In 1962, the Cabinet agreed to then Prime Minister Hayato IKEDA's proposal to have new guesthouse facilities, because Japan's developing relations with foreign countries had increased the number of distinguished foreign guests, and the former Asakanomiya House (currently the Tokyo Metropolitan Teien Art Museum) in Shiba-Shiroganedai, Minato Ward, which had been used as the State Guest House, was too small to accommodate guests' entourages.
その後、国際関係が緊密化して外国の賓客を迎えることが多くなり、またそれまで迎賓館として使用していた港区芝白金台の旧朝香宮邸（現東京都庭園美術館）は手狭で随行員が同宿できないなどの支障があったため、1962年に内閣総理大臣：池田勇人の発意により、新たに迎賓施設を整備する方針が閣議決定された。