Le manoir néo-grec d'Elk Hill présente des proportions, un plan et des boiseries intérieures d'une sophistication comparable à celle des maisons de ville de Richmond de l'époque. La maison du comté de Goochland a été construite entre 1835 et 1839 pour Randolph Harrison Jr. sur une partie du terrain appartenant auparavant à Thomas Jefferson, qu'il avait acquis de sa femme. À l'instar des habitations urbaines plus raffinées de la ville voisine de Richmond, Elk Hill possède une spacieuse véranda arrière plutôt qu'un portique monumental à l'avant, plus typique des maisons néo-grecques du Sud profond. Les pièces principales sont enrichies de portes élaborées avec des frises grecques. En 1943, Elk Hill est devenu la maison de campagne de S. Buford Scott, un agent de change de Richmond. La maison a ensuite servi de bureaux administratifs à Elk Hill Farm, une école privée à but non lucratif pour jeunes hommes à risque, créée à l'adresse 1970.