Through some vicissitudes in later days, such as a restoration in 1415 by Yoshihiro OUCHI, Tadaoki HOSOKAWA who entered in the Nakatsu Domain after the Battle of Sekigahara retorted it in 1619.
以後、応永22年（1415年）の大内義弘による中興等の盛衰を経て、関ヶ原の戦の後に中津藩に入封した細川忠興のもとで元和(日本)5年（1619年）に再興された。