Mặc dù được xây dựng vào năm 1851 cho Joseph Williams, Ngôi nhà Charles Cohen ở Petersburg lại được đặt theo tên chủ sở hữu thứ tư, người chịu trách nhiệm cho diện mạo theo phong cách Đế chế thứ hai hiện tại của ngôi nhà. Cuộc cải tạo 1898 của Cohen đã sử dụng kiểu mái mansard đặc trưng của phong cách này như một cách thời trang và tiết kiệm để tăng thêm không gian sống ở tầng thứ ba. Cohen là một thương gia địa phương nổi tiếng, mặc dù hoạt động kinh doanh của ông cũng mở rộng sang Bắc Carolina với việc thành lập Công ty Điện nước, Sản xuất và Cải tiến Great Falls. Ông chuyển đến Richmond vào 1900, nơi ông thành lập một công ty hàng khô, sau đó đến Thành phố New York vào năm 1911, nơi ông và con trai Jacob thành lập một công ty dệt may. Ông mất tại New York vào năm 1915 nhưng được chôn cất tại nghĩa trang Do Thái ở Petersburg, thành phố nơi ông sinh ra. Ngôi nhà Cohen đã được bán ra khỏi gia đình vào 1939, sau đó nó xuống cấp, nhưng kể từ đó nó đã trải qua quá trình cải tạo rộng rãi.  Ngôi nhà tọa lạc tại Tam giác Halifax và Khu thương mại lịch sử trung tâm thành phố Petersburg.