Es ist belegt, dass um 1100 Friedrich von Hohenstaff, seines Zeichens Vogt der Kirche des heiligen Veits, am St. Veiter Staff auf der Staffspitze die Staffburg errichtet hatte, auf der das Geschlecht der Hohenstaffer bis 1202 residieren sollte.