Nach dessen kinderlosem Tod fiel das Nassauer Lehen an seinen Verwandten Hugo Friedrich Waldecker von Kempt († 1753), der von 1712 bis 1716 den heute noch bewohnbaren Hauptbau der Burg neu errichten ließ.