Située à la périphérie de la ville de Kilmarnock, à la frontière entre les comtés de Lancaster et de Northumberland, Clifton est une résidence de deux étages en bardage avec un nogging en briques qui a été construite en 1785 pour Landon Carter II. La maison, trois dépendances, des terres agricoles et des bois intercalés font partie des vastes propriétés de Robert "King" Carter en Virginie. La maison d'origine possède une cheminée centrale et un toit à deux versants. Au début des années 1800, deux annexes d'un étage avec des cheminées d'extrémité ont été ajoutées aux extrémités est et ouest. L'un de ces ajouts a été supprimé dans les années 1860et remplacé plus tard par un porche latéral. Après avoir construit la maison, Landon et Catherine Tayloe Carter y ont vécu pendant une dizaine d'années avant de déménager dans la maison ancestrale des Carter, Sabine Hall, dans le comté de Richmond. À plusieurs reprises au cours de son histoire, Clifton a été utilisé comme lieu d'évasion ou comme pavillon de chasse. Clifton est resté dans la famille Carter jusqu'à 1842, date à laquelle il a été vendu à James Armistead Palmer. Il appartenait toujours à la famille Palmer au moment où la propriété a été inscrite au Registre national des lieux historiques.