Menara jam ini didirikan pada tahun 1886 hasil sumbangan Tan Jiak Kim sebagai penghormatan kepada mendiang ayahnya Tan Beng Swee.
Di sini dahulu terdirinya A' Famosa yang dibina Alfonso de Albuquerque bermula pada Ogos 1511 dan siap pada Januari 1512. Cepat siapnya bukan? Mana tidaknya, seramai 1500 buruh (hamba raja) dipaksa untuk menyiapkan kubu yang mempunyai menara 5 tingkat ini.
Sebelum terbina A' Famosa, dahulu terdapat sebuah masjid yang dipercayai Masjid Agong Melaka. Menurut catatan Tome Pires di dalam Suma Oriental, kubu A' Famosa dibina di atas runtuhan Masjid Agong Melaka (the great mosque).
"...the famous fortress which was built on the side of the great mosque, with wall of great width and a tower of five storey. He states that on one side the sea washes against it, and on the other the river."
Terdapat juga catatan mengenai A' Famosa dalam Portuguese Document on Malacca yang memerihalkan :
"At the foot of the hill, in a comparatively short time he built a noble fortress. Do that the hill should not overlook it the keep was built height of a five-storey building with a spire covered with lead. It had apartments commensurate with its majesty. It was so imposing and was situated in a place so remote (from Portugal) that it deserved the name A' Famosa which was given to it." (183)
"The plunder was brought to Afonso D' Albuquerque who by now was already engaged in building a fortress where the mosque once stood which he named Famosa. In order to built it, he made use of the stones from the numerous tombs of important persons of the state.... " (393)
Namun apabila terlihat pada menara jam ini, terbayang di benak fikiran adakah ini simbolik kepada kewujudan menara A' Famosa yang dibina Portugis atau mungkin simbolik kepada menara Masjid Agong Melaka yang dipercayai tapaknya di situ.
Menurut penyelidikan yang dibuat oleh Institut Alam & Tamadun Melayu (ATMA UKM), kebarangkalian A' Famosa itu dahulu merupakan masjid yang telah diubahsuai. Mungkin disebabkan itu Alfonso de Albuquerque hanya memerlukan 5 bulan untuk menyiapkan pembinaannya.
Ini dapat dibuktikan melalui hipotesis :
1. A' Famosa mempunyai sebuah ruang kelihatan seperti mihrab masjid.
2. Kedudukan A' Famosa menghadap ke arah kiblat.
Bagi mengukuhkan hipotesis ini maka kajian melalui kaedah ekskavasi arkeologi perlu dilaksanakan bagi menelusuri kembali jajaran-jajaran lama kota zaman kesultanan Melayu Melaka. Jika ini dapat dilaksanakan dan ditemui, ia merupakan satu kejayaan besar bagi sejarah Melaka yang sememangnya sudah terkenal seantero dunia.