Việc xây dựng bắt đầu khi viên đá góc đầu tiên được đặt vào tháng 10 năm 1792. Mặc dù Tổng thống George Washington đã giám sát việc xây dựng ngôi nhà, nhưng ông chưa bao giờ sống trong đó. Mãi đến năm 1800, khi Nhà Trắng gần hoàn thành, những cư dân đầu tiên của nó, Tổng thống John Adams và vợ ông, Abigail, mới chuyển đến. 14 người mới thấy điều này hữu ích.