Di tengah-tengah kita dapat menemukan sebuah dinding yang menceritakan sejarah terjadinya Pagat Batu Banawa ini, legenda tersebut yaitu mengisahkan anak yang durhaka kepada ibunnya, anak tersebut bernama Raden Panganten dan ibunya bernama Diang Insun.
Tinureksa saking pamargin satuanipun, Sumanasantaka dados kabaos satua pangawit Kakawin Ramayana riantukan satua puniki nyritayang indik pamargin urip kakiang lan niang Ida Sang Rama, inggih punika Sang Prabu Aja miwah Ratu Indumati.