Perhaps for this reason, the lord got permission from the new Meiji government to convert the jinya into a more solidly-built castle, and built a yagura-mon gate, a tatsumi-yagura turret, and a three-layer turret on Komugi-yama Mountain in two years starting from 1868.
そのためか明治新政府から陣屋をより堅牢な城郭とする許可を受け、明治元年（1868年）から2年の歳月をかけ、櫓門・巽櫓、小麦山の三層櫓などが築かれた。