Enige tijd na de zondvloed vestigde nakomelingen van Noach zich op een laagvlakte in het land Sinear, niet ver van de Eufraat. Zij spraken één taal en vormden één gemeenschap. In Genesis 11 staat hun verhaal: En zij zeiden: Kom aan, laat ons voor ons een stad bouwen, en een toren, welks opperste in den hemel zij, en laat ons een naam voor ons maken, opdat wij niet misschien over de ganse aarde verstrooid worden!
De toren zou moeten dienen als een herkenningspunt in het landschap, waardoor de mensen elkaar niet kwijt zouden kunnen raken. En dat terwijl God Noach en de zijnen had opgedragen de aarde te 'vervullen' (Gen. 9:1). Het bouwwerk zou ook een veilig heenkomen kunnen bieden bij een mogelijke nieuwe zondvloed.
God bekeek deze nijvere lieden en oordeelde dat ze te ambitieus waren: ze probeerden gelijk te zijn aan hem. Hij besloot de mensheid te straffen met de Babylonische spraakverwarring. Hierdoor konden de mensen elkaar niet meer verstaan, en raakten ze alsnog verspreid over de aarde. De plek waar dit allemaal gebeurde, noemde men voortaan Babel, hetgeen 'verwarring' zou betekenen.
Pieter Bruegel de Oudere schilderde de toren driemaal; een van die versies is verloren gegaan. De twee behouden werken (uit 1563) zijn enorm gedetailleerd en kunnen (uiteraard) het best in het echt worden bekeken: de 'grote' toren meet 114 bij 155 cm en bevindt zich in het Kunsthistorisch Museum te Wenen; de kleine meet 60 bij 74,5 cm in hangt in Museum Boijmans Van Beuningen te Rotterdam. Op de voorgrond van 'de grote' zien we een leidersfiguur; sommige bronnen stellen dat deze Nimrod leiding gaf aan de bouw.
Bruegel is waarschijnlijk uitgegaan van de vorm van het Colosseum te Rome een ander gebouw dat door de christenen van zijn tijd gezien werd gezien als uiting van ongelovige hoogmoed. De torens lijken op het eerste gezicht stevig en verstandig gebouwd, maar bij nadere inspectie valt op dat het ontwerp fouten bevat waarschijnlijk aangebracht om aan te geven hoe onmogelijk en overmoedig de hele onderneming was.
De talloze miniscule figuurtjes benadrukken de monumentaliteit van de toren en de nietigheid van de mens.
De toren van Babel heeft echt bestaan, alleen hoogstwaarschijnlijk geheel anders gebouwd dan Bruegel dacht. Op oude kleitabletten zijn vermeldingen gevonden van een zikkoerrat, een trapvormige tempeltoren, die 91 meter hoog was op een basis van 91 x 91 meter. De toren hoorde bij de tempel van Mardoek, de voornaamste god van Babylonië. Uit de spijkergeschriften blijkt dat men met de toren daadwerkelijk de hemel wilde bereiken het valt dan ook bepaald niet uit te sluiten dat ook dit bijbelverhaal zijn oorsprong vindt in Mesopotamië, net als het verhaal van de zondvloed. Vernietigd door de Assyrische koning Sanherib in 689 v.C., herbouwd en voltooid door o.a. Neboekadnezar II. De Perzen van Xerxes sloopten de toren opnieuw, in 478 v.C.. De Babyloniërs noemden hun toren Bab-Iloe, Poort van God.