Edwin J. Amiss đã xây dựng ngôi biệt thự bằng gạch đồ sộ này vào khoảng 1856 trên một ngọn đồi cao, sau đó chỉ huy con đường vào thị trấn Blacksburg thuộc Quận Montgomery. Amiss, một thương gia và chủ đất, đã tập hợp nhiều khu đất, bao gồm một lô đất rộng 125mẫu Anh nơi ngôi nhà được xây dựng. Ngôi nhà Amiss-Palmer được trang trí tinh xảo với mặt tiền bằng gạch Flemish-bond, cổng vào có cặp cột Ionic và lò sưởi bằng đá cẩm thạch bên trong. Trên khuôn viên có ba tòa nhà phụ ban đầu: một nhà bếp bằng gạch, một ngôi nhà gỗ có lẽ dành cho những người bị bắt làm nô lệ và một nhà kho thịt bằng gỗ. Nơi này được WH Palmer, con rể của Amiss, mua vào 1880 , người đã thêm một mái hiên trên hông lên trên mái nhà thấp ban đầu. Vùng đất nông nghiệp xung quanh được phát triển vào giữa thế kỷ20 , thu hẹp khu đất xung quanh ngôi nhà thành một sân rộng ba mẫu Anh. Mặc dù mất đi khung cảnh nông thôn, Nhà Amiss-Palmer vẫn là một trong những địa danh chính của Blacksburg thời tiền chiến.

Ngôi nhà Amiss-Palmer được liệt kê trong sổ đăng ký thuộc Sở Cảnh sát Quận Montgomery về Tài nguyên Lịch sử và Tiền sử .