In der älteren Literatur wird gemeinhin angenommen, dass die Familie bald nach dem Erwerb der Burg Hornberg ihren Wohnsitz im Tal genommen habe, jedoch finden sich keinerlei Baulichkeiten, die als Herrensitz in Frage kämen.