På Tiberens højre bred byggede kejser Hadrian sit mausolæum. Det var også dengang en cylinder formet bygning. Fra 138 e. kr og frem til 217 e. kr. blev romerske kejsere bisat her i urner. I 401 blev mausolæet omdannet til en borg og blev en del af Aurelius bymur omkring Rom. Under senere erobringer af Rom blev gravpladserne hærget. Figuren på toppen af bygningen er ærkeenglen Michael som er ved at sætte sit sværd i dets skede. Det skyldes at han i 590 e. kr. viste sig oven over bygningen og der satte sit sværd i dets skede - det var tegn på at pesten var ovre.
I 1300-tallet ombyggede paverne borgen til et slot og forbandt slottet med en tunnel til Peters kirken, således at paverne hurtigt kunne komme i sikkerhed, hvis der var en trussel mod dem.