Edwin J. Amiss a construit cette imposante demeure en briques vers 1856 sur une butte élevée qui commandait alors la route menant à la ville de Blacksburg, dans le comté de Montgomery. Amiss, commerçant et propriétaire terrien, a rassemblé plusieurs parcelles, dont une parcelle de 125-acre où la maison a été érigée. La maison Amiss-Palmer, finement aménagée, présente une façade en briques flamandes, un portique d'entrée avec des colonnes ioniques jumelées et des cheminées en marbre à l'intérieur. Sur le terrain se trouvent trois anciennes dépendances : une cuisine en briques, un chalet en rondins probablement destiné aux esclaves, et une boucherie en rondins. L'établissement a été acheté en 1880 par W. H. Palmer, le gendre d'Amiss, qui a ajouté un toit en terrasse sur le toit inférieur d'origine. Les terres agricoles environnantes ont été développées au milieu du20e siècle, réduisant le terrain autour de la maison à une cour de trois acres. Malgré la perte de son cadre rural, la maison Amiss-Palmer reste l'un des principaux sites antebellum de Blacksburg.

La maison Amiss-Palmer a été inscrite sur les registres des ressources préhistoriques et historiques du comté de Montgomery.