In 1864, he joined the camp of Genzui KUSAKA and Izumi MAKI, which was lining up at Yamazaki, in Kinmon Incident, and Yamada escaped to Choshu with them, as the Choshu army was beaten.
元治元年（1864年）、禁門の変では山崎に布陣する久坂玄瑞、真木和泉らの陣に加わったものの長州勢は敗北し、山田も長州へ落ち延びている。