In 1561, Norimasa passed on the name of Yamanouchi-Uesugi and the position of Kanto Kanrei to Kagetora NAGAO (later Kenshin UESUGI) of the Echigo Nagai clan, and Norimasa moved to Kasuga-yama Mountain.
1561年、憲政は山内上杉家の名跡と関東管領の職を、越後長尾氏の長尾景虎（後の上杉謙信）に譲り、自身は春日山に移った。