截至2013年12月11日，衡阳县辖17个镇、7个乡。分别为：西渡镇、岘山镇、三湖镇、井头镇、关市镇、台源镇、曲兰镇、杉桥镇、金兰镇、金溪镇、洪市镇、界牌镇、集兵镇、渣江镇、演陂镇、库宗桥镇、石市镇、大安乡、长安乡、角山乡、栏垅乡、岣嵝乡、溪江乡、樟木乡。
2015年，根据衡阳县乡镇区划调整方案，潮江乡、集兵镇成建制合并设立集兵镇。乡镇行政区划调整后，衡阳县共减少1个乡级建制，现辖樟木、岣嵝、栏垅、板市、樟树、大安、溪江、长安8个乡，西渡、集兵、杉桥、井头、演陂、金兰、洪市、金溪、界牌、渣江、台源、曲兰、三湖、关市、库宗桥、岘山、石市17个镇，总面积2558.61平方千米，总人口123.51万人。县人民政府驻地不变（西渡镇）。
樟木乡位于衡阳县的东北面，南接石鼓区松木乡，北接衡山县店门镇，东邻珠晖区茶山镇，西靠本县集兵镇。全乡面积100平方公里，辖培元、里仁、双衡、七里、仁爱、曹田、永升、高城、九渡、新文、衡岳、竹园、南塘、河江、西林、吉兴、塔兴、云山殿、伏下19个村，1个居委会，238个村小组，人口25980人，乡政府坐落白露坳。