At that time, the Rokkaku clan who was kin to the Sasaki clan, and influential in the area, had Namazue-jo Castle, a branch castle of Kannonji-jo Castle, near Hyakusai-ji Temple.
当時、この地に勢力をもっていた佐々木氏の一族六角氏は、観音寺城の支城である鯰江城（なまずえじょう）を百済寺の近くに築いていた。