清光绪年间属中兴乡，1935年为安阜联保，1940年废联保置安阜乡辖17个保，1951年改保为村。
1953年将涌泉村（原16保）划给安了乡，1958年建立安阜人民公社，设五个管理区，1960年合并于江源，1961年分社，划分8个大队，1980年增划10个大队，1981年又增划为12个大队，1983年改公社为乡，改大队为村，2004年与羊马，并为羊马镇。
2005年村组体制改革将原楠木村、双桂村并入场镇设立安阜社区。
2020年村组体制改革撤销白鸽村，将原白鸽村管理范围划归安阜社区。