John Dawes, một nhà môi giới chứng khoán giàu có, mua lại địa điểm của Lâu đài Jack Straw's cùng với 247 mẫu Anh (1.00 km 2) đất xung quanh. Năm 1781 ông xây dựng Highbury House với chi phí 10.000 bảng Anh tại nơi Highbury Manor từng đứng. Trong 30 năm tiếp theo, ngôi nhà được mở rộng bởi các chủ sở hữu mới, đầu tiên là Alexander Aubert và sau đó là John Bentley, bao gồm một đài quan sát lớn và khu vườn xa hoa.