In 1557, after Fujiuji's attempt to raise an army in order to take back Koga-jo Castle was failed, Haruuji was confined and Fujiuji was expeled.
弘治(日本)3年（1557年）、藤氏は挙兵して古河城奪還を試みるが失敗し、晴氏は幽閉され、藤氏も追放されてしまう。