Charles Fenton Mercer, sĩ quan quân đội, nhà lập pháp và người ủng hộ chủ nghĩa thực dân hóa người da đen, đã định cư tại khu vực này ở phía đông nam Quận Loudoun vào năm 1804. Ông đặt tên bất động sản của mình theo tên Lâu đài Aldie, quê hương của ông ở Scotland. Nhà máy xay xát lớn của thương gia đóng vai trò là trung tâm của Khu lịch sử Nhà máy xay xát Aldie được xây dựng vào 1807 bởi đối tác của Mercer là William Cooke, và hiện vẫn tồn tại như một trong những nhà máy đầu tiên được trang bị tốt nhất ở Virginia. Khu phức hợp gồm ba phần, một đầu là nhà máy thạch cao và đầu kia là cửa hàng. Cặp bánh xe Fitz overshot đôi của Aldie Mill, được lắp đặt tại 1900, là cặp bánh xe duy nhất còn sót lại ở Virginia. Nhìn ra nhà máy là một ngôi nhà lớn theo phong cách Liên bang, được Mercer xây dựng vào năm 1810 làm nơi ở của mình. Phía sau nhà máy xay là nhà của người xay bột. Hoàn thiện nhóm này là một cây cầu đá ban đầu bắc qua Sông Little. Nhà máy hoạt động vào những năm 1970khi nó được tặng cho Quỹ Virginia Outdoors, nơi đã tiến hành một đợt trùng tu toàn diện. Aldie Mill hiện thuộc sở hữu của Cơ quan Công viên Khu vực Bắc Virginia.