Многие думают, что знаменитый Биг Бен (Big Ben) — это название всей башни, но это всего лишь название колокола внутри неё, который получил это название (Большой Бен) в честь сэра Бенджамина Холла, куратора строительных работ.

Согласно другой версии, он назван в честь Бенджамина Каунта, популярного боксёра в тяжелом весе. Само же здание называется башня Святого Стефана, а с 2012 года башня переименована в честь королевы Великобритании Елизаветы II и теперь называется "Башня Елизаветы". Также стоит отметить, что это не просто башня с огромными часами. В декоративном орнаменте стен башни есть ячейки. Они не использовались с 1880 года, но, тем не менее, они по-прежнему готовы заключить в тюрьму любого члена парламента, который посмеет нарушить парламентскую привилегию.