Fortet är byggt som ett citadell med vallgravar på tre sidor och Yamuna-floden på den fjärde sidan. På andra sidan floden ligger Taj Mahal, som härskaren av mogulriket, Shah Jahan lät bygga till sin älskade fru som dog i barnsäng. Själv satt han inspärrad på fortet sina sista år.