He quit the post in June 1863 because 'There was a continuous string of incidents at Kyoto at that time and impossible for a small domain like the Nagaoka Domain to handle the situation.'
文久3年（1863年）6月に「当時の京都は騒動続きであり、長岡藩のような小藩では対応できない」として辞職した。