In April, 1863, he made the second visit to Kyoto (he left Kagoshima on April 21 and arrived in Kyoto on May 1), but he could not suppress the insistence of Sonjo-kyushinha (rapid group of Sonno-joi) supported by the Choshu Domain, and as a result, he returned to Kagoshima after only five days in Kyoto (he left Kyoto on May 5 and arrived at Kagoshima on May 28).
文久3年（1863年）3月に2回目の上京（3月4日鹿児島発、14日京都着）をするが、長州藩を後ろ盾にした尊攘急進派の専横を抑えられず、足かけ5日間の滞京で帰藩する（18日京都発、4月11日鹿児島着）。