Philip St. George Cocke, membre du conseil d'administration de l'Institut militaire de Virginie, souhaitait faire de la nouvelle académie militaire de l'État un grand institut polytechnique du Sud, installé dans un complexe architectural de premier plan dans la ville de Lexington. Il a contribué à ce que le célèbre architecte Alexander Jackson Davis soit chargé de concevoir les installations physiques. Au cours des années 1848 à 1861, Davis a construit six bâtiments de style gothique, formant l'un des premiers campus néo-gothiques du pays et un prototype pour de nombreuses écoles militaires. L'élément dominant du groupe est la caserne, une structure prodigieuse, semblable à une forteresse, avec des tours d'angle, des parapets crénelés et un quadrilatère intérieur à galeries. Le bâtiment a été incendié par les forces de l'Union en 1864 mais a été reconstruit selon les plans de Davis en 1867-68. Les casernes de l'Institut militaire de Virginie ont depuis été agrandies, mais l'élévation est, la façade principale, conserve une grande partie du romantisme original de la conception de Davis.