Trường Lylburn Downing được hoàn thành vào 1927 và mở rộng vào năm 1940 để cung cấp giáo dục tiểu học và trung học cho cộng đồng người Mỹ gốc Phi ở Lexington. Người da đen Lexington đã thành lập Liên đoàn Gia đình và Trường học vào 1922, đã thành công trong việc kiến nghị lên Hội đồng Trường học Lexington về việc xây dựng tòa nhà trường học mới. Ngôi trường được đặt theo tên của Mục sư Lylburn L. Downing, một người bản xứ nổi tiếng của Lexington, từng là mục sư của Nhà thờ Trưởng lão Fifth Avenue ở Roanoke từ 1894 đến 1937. Ngôi trường xây bằng gạch theo phong cách Phục hưng Cổ điển vẫn là một ví dụ ít thay đổi về thiết kế trường công lập của Virginia vào những năm 1920 , với một khán phòng trung tâm được bao quanh bởi các lớp học. Quỹ Julius Rosenwald đã cung cấp $1,500 cho việc xây dựng, trong khi các thành viên của cộng đồng người Mỹ gốc Phi Lexington đóng góp $500 vào tổng chi phí là $32,000 để xây dựng trường học. Nhiều sinh viên tốt nghiệp trường Lylburn Downing đã có sự nghiệp thành công trong lĩnh vực giáo dục, luật pháp và dịch vụ xã hội.