Nors bokštas dažnai žinomas kaip Didysis Benas, šis vardas iš tiesų reiškia didžiausią, 14,5 tonų sveriantį, bokšto varpą. Varpas niekada neturėjo oficialaus pavadinimo, nėra visiškai aišku ir iš kur kilusi ši jo pravardė. Manoma, kad ji gali reikšti serą Bendžaminą Holą, Parlamento rūmų atstatymo darbų vykdytoją, arba sunkiasvorį XIX a. boksininką Bendžaminą Kauntą.