四方山森林公园位于湖南省中部偏东、衡阳市东北角，是由四方山同有林场和县苗圃两家单位共同建设而成的公园。公园内的三片区域通过水和吴南公路相连，总面积达1218公顷。

四方山森林公园地处衡东县东南部，水中游南坡，距离县城约23.5公里。公园外部与衡南县相邻，内部则与杨林镇、莫井乡接壤。公园的地理位置介于东经113°02′40〃至113°04′48〃，北纬26°57′05〃至27°00′43〃之间。

公园的经营范围从西南延伸至山脊线，北部边界至中线，两侧则以多个小山脊线或山沟作为分界。公园公布的三个工区和一个托管村民委员会构成了国有林场和森林公园的主要组成部分，分别占据了国有林场总面积的95.5%和森林公园总面积的82.6%。

杨林片位于杨林镇政府驻地附近，距离县城大约30公里，离林场本部约9公里。这片区域的经营面积为47公顷，属于国有产权。其北侧边界为乌鸦形，南侧边界为芦荻山乡冲，与四工区的界线重合。杨林片只占了林场总面积的4.5%和森林公园总面积的3.9%。区域内最低海拔为67.4米，最高海拔为四工区山头101.9米。四工区所在的地理坐标为东经113°07′36〃，北纬26°56′31〃。此外，在四工区以北约0.8公里的吴南公路西侧山坡上，还有一块面积仅有2公顷的小飞地。