After the Taira family fell in the Battle of Dannoura in 1185, Tomomune was taken into the care of Chinzei Bugyo (magistrate of Kyusyu region) Sukeyori MUTO and the wet nurse Koremune clan through Hyogo SAITO in Nagato Province.
元暦2年（寿永4年/1185年）に壇ノ浦の戦いで平家が滅亡した後、長門国斎藤兵庫を経て鎮西奉行武藤資頼と乳母の惟宗氏によって庇護される。