1934年于此设马跳乡，旋废。
1953年改设悬山乡，1965年改称元山乡，1992年并入台门镇。
1949年为下庄乡第十六、十七、十八保。
1950年为下庄乡第十六、十七、十八村。
1958年设悬山农业、悬山第一渔业、悬山第二渔业3个大队。
1961年析设为海丰、大鱼厂渔业、杨柳坑、马跳头农业、马跳头渔业、外局6个大队。
1984年撤队改设村民委员会，并改大鱼厂渔业大队为大鱼厂村民委员会。
2003年与对面山村合设悬山中心村民委员会。
2016年改为悬山社区村民委员会。
2019年划出原对面山村，并改今名。