Marl Hill doit son nom à ses dépôts de marne, une substance argileuse contenant du carbonate de calcium utilisé pour fertiliser les sols déficients en chaux. Les champs qui entourent la maison étaient autrefois le théâtre de l'exploitation de la marne. La propriété du comté de New Kent a été colonisée avant 1700 par Thomas Jackson, qui a vendu cette année-là un acre de terrain pour la construction de l'église St. Peter, située à proximité. La partie la plus ancienne et la plus petite de la maison actuelle a été construite dans le troisième quart du 18e siècle par la famille Crump. Elle est caractéristique des habitations compactes mais bien construites occupées par de nombreux propriétaires respectables de l'époque, ce qui contraste avec les masures de fortune des classes plus pauvres. À cela s'ajoutait la section plus grande du plan de passage latéral à 1825, un exemple typique de l'architecture fédérale de campagne. La partie originale de Marl Hill possède une série inhabituelle de portes de placard à panneaux alignés au deuxième étage.