However, in 1609, he was punished by Imperial order together with Mitsuhiro KARASUMARU, Yorikuni OINOMIKADO and Noritoshi INOKUMA because of scandalous affairs (the Inokuma incident).
しかし慶長14年（1609年）には烏丸光広・大炊御門頼国・猪熊教利らとともに姦淫放蕩をして勅勘を被った（猪熊事件）。