Milburne a une longue présence dans l'histoire de la ville de Richmond et du Commonwealth of Virginia, et une importance tout aussi remarquable dans l'histoire de l'architecture néo-coloniale. Le génie de Milburne réside dans les circonstances de sa création, qui reflètent les efforts de collaboration du célèbre architecte William Lawrence Bottomley, de son client Walter Spencer Robertson et de son épouse Mary Dade Taylor Robertson. Milburne est également important au niveau de l'État pour son association avec la vie et la carrière de Walter Spencer Robertson (1893-1970). Ses affectations au Département d'État des États-Unis de 1943 à 1946, suivies de 1953 à 1959 par un poste de secrétaire d'État adjoint pour les affaires d'Extrême-Orient, ont élevé son statut dans la vie publique parmi celui de sa génération de Virginiens, alors même qu'il servait lui aussi sa communauté et son État en tant que dirigeant et membre du conseil d'administration d'institutions et d'associations importantes. La période d'importance pour Milburne commence à 1934 avec la conception du manoir et de son plan d'implantation, et le début des constructions, se poursuit par l'amélioration et le raffinement de ses jardins jusqu'à 1968, et se termine avec la mort de Walter Spencer Robertson à 1970.