L'assemblée de l'église et du cimetière baptiste Scott Zion compte parmi les plus grandes et les plus anciennes congrégations afro-américaines du comté d'Amherst. Située à environ six miles au nord-ouest de Lynchburg, la communauté de Scott Zion est apparue après la guerre civile et était composée d'Afro-Américains et de quelques Amérindiens qui avaient migré loin des communautés agraires le long de la rivière James. À la recherche de meilleurs emplois et de salaires plus élevés, les habitants se sont installés à Scott Zion et dans les environs. Depuis 1872, la propriété de l'église baptiste Scott Zion a servi de lieu de culte, d'éducation et de centre social à la communauté. L'église attire également des fidèles d'une autre communauté noire, San Domingo, située à environ trois kilomètres au sud-est de Scott Zion. Bien que San Domingo ait sa propre école, elle n'a jamais eu d'église, et de nombreux membres de la communauté sont liés à des personnes de la communauté de Scott Zion. Le premier enterrement connu dans le vaste cimetière de l'église baptiste de Scott Zion a eu lieu vers 1890. En 1942, la congrégation a construit le bâtiment actuel de l'église et, à la fin des années 1960, la finition extérieure en stuc de la structure d'origine a été recouverte d'un placage de briques.