Sein ältester Bruder Aubrey starb im Oktober 1214 ohne Nachkommen, und da auch sein zweitältester Bruder Ralph bereits ohne männliche Nachkommen gestorben war, wurde Robert der Erbe der Besitzungen der Familie de Vere.