Tidak mengherankan jika menara ini dihuni banyak hantu, mengingat tempatnya merupakan bangunan tua dengan umur ratusan tahun. Terlebih lagi, menara ini merupakan tempat eksekusi mati. Kabarnya hantu-hantu wanita berwarna putih dan hitam kerap memunculkan dirinya di Menara London. Sejumlah pengunjung juga mengaku kadang mereka mencium bau aneh menyerupai parfum dan sesuatu tak terlihat mencoba menyentuh bahu mereka.