Schäffer lod en stor og fornem hovedbygning i rokokostil opføre i håbet om, at kongen ville købe ejendommen til lystophold, men hans vilde spekulation lykkedes ikke, og Schäffer kom tæt på en fallit på grund af byggeriet.