It is because the god protecting agriculture and the sorei protecting the family were equated, and the deity of rice fields and harvests and the sorei were also believed to descend from the mountains (refer to mountain god).
農作を守護する神と家を守護する祖霊が同一視されたため、また、田の神も祖霊も山から降りてくるとされていたため（山の神も参照）である。