民国三十六年（1947年），邵阳县析置隆回县，时属武冈县紫阳乡。
1950年4月，武冈县紫阳乡划入隆回县，属第十二区。
1956年9月，山界、新隆、金隆乡合并建立山界回族乡。
1958年9月，撤销民族乡，并入红旗公社。
1961年，为紫阳区民族公社。
1978年，天福公社并入紫阳区民族公社。
1982年3月，民族公社析置天福公社，设立山界回族公社。
1984年4月，公社改乡。
1995年6月，撤区并乡，罗白乡并入山界回族乡。