Nhà yêu nước cách mạng Carter Henry Harrison là chủ sở hữu đầu tiên của Clifton. Với tư cách là thành viên của Ủy ban An toàn Cumberland, Harrison đã viết hướng dẫn cho bản tuyên bố độc lập khỏi “bất kỳ lòng trung thành nào đối với Bệ hạ Britannick”, được trình lên Hội nghị Virginia vào tháng 5 1776. Hội nghị này là một trong những cơ quan đầu tiên tuyên bố thẳng thắn về nền độc lập của Hoa Kỳ. Clifton ban đầu được bao gồm trong một khoản tài trợ được ông nội của ông là Robert (“King”) Carter để lại cho Thomas Randolph vào 1723 . Có niên đại từ giữa những năm1700 , dinh thự Quận Cumberland là một ví dụ tuyệt vời về tính trang trọng của kiến trúc có thể đạt được trong kiến trúc Georgia bằng cách sử dụng kết cấu bằng gỗ. Gỗ thường được ưa chuộng hơn nhà xây bằng đá vì nhà gỗ ít ẩm ướt hơn. Ngôi nhà vẫn giữ được lớp ván gỗ đúc ban đầu và một dãy phòng ốp gỗ tinh xảo. Các phòng tại Clifton có lò sưởi theo phong cách Phục hưng Hy Lạp sau này được sao chép từ cuốn Practical House Carpenter (1830) của Asher Benjamin.