There are theories that he was the eldest son of MINAMOTO no Yoriyoshi, born in Koroho residence in Kamakura (present day Tsuboi, Habikino City, Osaka Prefecture), but they remain within the realm of conjecture.
源頼義の長男として、河内源氏の本拠地である河内国石川郡壷井（現大阪府羽曳野市壷井）の香炉峰の館に生まれたという説、鎌倉で生まれたとの説もあるが、いずれも伝承の域を出ない。