Trong gần hai thế kỷ, ngôi nhà được mở rộng này là nơi sinh sống của gia đình Fudge. Gia đình Fudges có nguồn gốc từ Đức ở Quận Rockingham; tên ban đầu của họ là Futch. Bất động sản này được anh em Christian và Conrad Fudge mua lại vào 1795. Vào khoảng 1798, Conrad Fudge đã xây dựng một ngôi nhà gỗ hai tầng, là cốt lõi của ngôi nhà hiện tại. Fudge đã mở rộng đáng kể ngôi nhà vào những năm 1820 , thêm một phần gạch lớn và ống khói mới. Con trai của ông là Andrew thừa kế tài sản vào 1849. Ngoài việc làm thư ký của quận, ông còn canh tác đất đai và điều hành một lò chưng cất. Con trai của Andrew là Joseph và ba người anh em của ông đã chiến đấu trong Nội chiến, phục vụ trong Lữ đoàn Stonewall. Joseph thừa kế tài sản và mở rộng thêm ngôi nhà vào năm 1897, mang lại cho ngôi nhà diện mạo theo phong cách Victoria hiện tại. Ngôi nhà, hiện nằm trong ranh giới của thành phố Covington, đã được bán khỏi quyền sở hữu của gia đình Fudge vào 1991.