Tidlige 19. århundrede Efter krigen i 1812 blev USA klar over vigtigheden af at beskytte Hampton Roads og de indre farvande fra angreb fra havet, og bygningen begyndte i 1819 af det der skulle blive det største stenfort i USA.