安家自解放设立，先后历经4次行政区划变革，行政级别、名称和管辖范围几经反复，现在定名为“安家乡”。
2005年底，全乡下辖辖安家河、神雾岭、田坑、瓦房沟、长岗岭、十王寺、康家坪、有水沟、卸甲坡、藏王沟、五里河、元门、八道河等13个村委会。
据探访研究当地人们口头流传已久的“安家”地名之说，只有一种说法最令人信服：在很早以前，这里河水清澈、山林茂密、土地肥沃，是个鸟语花香、气候温和、景色秀丽、水草丰茂、环境清幽的“桃花源之地”，十分适宜人们安居兴家，其中居住在此的有“安”姓族人，因为勤劳和乐善好施终得天时、地利、人和，逐渐发展成为本地最大的名门望族，倍受乡邻的尊敬，树为治家立业的典范，故赠名为“安家”。寓意居住此地可永远安居乐业、和谐幸福，直接体现了人们对美好生活大环境得无限向往与呵护。后来整族全迁，本地再无安姓人家，为了表示怀念从此没有再更换地名。