James Monroe a commencé la construction de son manoir d'Oak Hill dans le comté de Loudoun entre 1820 et 1823, et y a vécu après sa présidence jusqu'à 1830, l'année précédant sa mort. Pour sa conception, Monroe s'est inspiré de Thomas Jefferson et de James Hoban, l'architecte de la Maison Blanche. La maison a été construite par le bâtisseur local William Benton. Sa caractéristique architecturale dominante est le portique pentastyle inhabituel. Oak Hill a reçu la visite de Lafayette en 1825 lors de son tour d'Amérique et c'est ici que Monroe a travaillé à la rédaction de la Doctrine Monroe. Après la mort de Monroe, le domaine est sorti de la famille. La maison a été agrandie à 1922 par l'agrandissement de ses ailes et l'ajout de portiques terminaux sous la propriété de M. et Mme Frank C. Littleton. Ce siège historique, qui est toujours une résidence privée, est un monument digne du dernier président de la "dynastie de Virginie".