In 912, Ryogen was born as a son of the Kozu clan, then the local Gozoku (local ruling family), in Torahime, Asai-gun, Omi Province (present-day, Torahime-cho, Higashi-Asai-gun, Shiga Prefecture).
良源は延喜12年（912年）、近江国浅井郡虎姫（現・滋賀県東浅井郡虎姫町）に、地元の豪族・木津（こづ）氏の子として生まれた。