Although not confirmed whether true or not, Masakazu came under suspicion of misusing ten thousand ryo of public funds in his later years, but the matter was dropped after the helpful intervention of Tadakatsu SAKAI (lord of Obama Domain in Wakasa Province), Naotaka II and Tadaoki HOSOKAWA.
晩年になり、真偽は不明であるが、公金一万両を流用したとする嫌疑がかかったが、酒井忠勝(若狭国小浜藩主)・井伊直孝・細川忠興らの口添えにより不問とされた。