Since his father, Noriaki, was exiled for siding with anti-Ieyasu TOKUGAWA Mikawa Ikko Ikki revolts in the same year he was born, he grew up leading the life of a wanderer.
生まれた年の三河一向一揆で父の教明が、一揆側に属して徳川家康に背き、流浪の身となったため、嘉明も放浪する。