Deze tuinen behoorden vroeger tot de berghut van de gouverneur, maar het gebouw werd door de Japanners gesloopt tijdens de bezetting van Hong Kong.
De Japanners hadden twintigduizend soldaten die Hong Kong bezetten.