阳明山自古就是佛教圣地，据有关史料记载:东汉时便开始修建寺庙，白云寺曾鼎盛近千年，现存的万寿寺始建于宋代，明朝时重修，并将包括现有争执区域在内的山林划为"国山"，"永奉香火，免供民赋"。
自西汉公元前206年至公元1926年(民国16年)，历史长河共计跨过了2312年的时空，而阳明山始终在佛教世袭制下延续发展中走过这2132年，民国16年10月1日，政府开始直接正面参与管理阳明山的实际性事务，要不是农民运动的风起云涌，佛教世袭制还要在此地延续更长时。
公元1927年在阳明山始设阳明县，1931年12月裁撤，改设阳明山特区，由湖南省委派何宗汉带一个营的人马在阳明山特区设防负责.1933年，何宗汉一营人马撤除，阳明山特区如同虚设，1938年归属第七行政督察区，1949年10月，中华人民共和国成立，同年湖南和平解放，1950年阳明山为黄柏洞乡，属宁远县上龙盘区管辖，此时阳明山万寿寺等各寺庵共有和尚尼姑70人，1956年撤区并乡，将黄柏洞乡并入上龙盘乡。
1958年公社化时，上龙盘、清水桥、柏家坪乡合建为先进人民公社，黄柏洞划出，另立国营阳明山林场。同年的(1958年)2月，国营零陵县五星岭林场建场时，省、地县联合工作组将粗漯漕至歇马庵、祖爷庵、禹龙岌等方圆几十里人烟稀少的原始天然林和灌木丛林划入该场管理;1960年3月设立国营零陵县五星岭林场阳明山分场，下设三个工区五个生产点，经营管理包括上述山林在内的大块山林。
1963年建立阳明山国营林场管理局，统一管理三个县的八个林场，其中包括零陵县的五星岭林场(含五星岭林场阳明山分场)和宁远县的阳明山林场;后考虑到阳明山分场距零陵县五星岭林场路程遥远不便管理，管理局决定:将该分场划归宁远县阳明山林场管理。同年10月，国营宁远县阳明山林场经零陵专署林业局调查队编制了"基本建设设计任务书"和"规划设计图"，并逐级报请林业行政主管部门予以审核批准，宁远县阳明山林场规划设计图的四至(界)为:东至祁阳县交界，南至阳明山万寿寺后大山岌，西至鸡公冠子，北至马鞍子下三叉水;粗漯漕至歇马庵、祖爷岩等约3万亩山林在规划设计图辖至之内。
1965年成立潇水林区管理局，国营宁远县阳明山林场的建制划归潇水林区管理局，1969年在潇水林区管理局的基础上建立双牌县，国营宁远县阳明山林场更名为双牌县阳明山国有林场。粗漯漕至歇马庵、祖爷庵、禹龙岌等3万亩山林的林地权、林木权按1963年编制、1964年批准的国营宁远县阳明山林场规划设计图应全部属于双牌县阳明山国有林场所有。
至此，阳明山林场属社、场合一，全民、集体所有制并存的林场。1984年林场集体部分实行生产责任制，全场总面积10808.133公顷，其中水田104.267公顷。辖4个村19个村民小组，566户，2653人，其中职工79人，瑶族2户，7人，其余均为汉族。