Breveté à l'origine en 1638 au profit d'Elizabeth Grayne et exploité en tant qu'unité distincte pendant près de trois siècles et demi, Hardens est un domaine de la rivière James qui servait autrefois de ferme subsidiaire, ou de quart, de la plantation Shirley. La propriété du comté de Charles City s'appelait autrefois Hardings, et aussi Hardings Landing. Un relevé et un plan ( 1818 ) montrent une habitation à l'emplacement approximatif de la maison actuelle. Exemple typique de l'architecture rurale vernaculaire de la Virginie du milieu du19e siècle, la partie principale de la maison à ossature existante a été construite en 1846 par Hill Carter, de Shirley, pour son fils Lewis Warrington Carter, et pourrait incorporer des sections d'une structure plus ancienne. Hardens a été rachetée par David Walker Haxall en 1852 afin de fournir du bois d'œuvre aux vastes activités de meunerie de sa famille à Richmond. Pendant la guerre de Sécession, l'endroit a servi de station de communication de l'Union et de camp pour le Maj. Le général George B. McClellan sur 1862.