In 1221, he was banished to Tajima Province on the charge of involvement in the Jokyu War and confined in Takaya, Kinosaki County in the same province (present Toyooka City, Hyogo Prefecture).
承久3年（1221年）、承久の乱に加担したとして但馬国に流刑となり、同国城崎郡高屋（現在の兵庫県豊岡市）に幽閉された。