1955年属大桥乡辖。
1958年并置为东风公社，村名五会大队，属东风公社辖。
1962年置大桥公社，村名五会大队，属大桥公社辖。
1981年大桥公社更名为西江公社，村名五会大队，属西江公社辖。
1984年撤社设乡，西江公社改西江乡，村名五会村，属西江乡辖。
1992年撤乡并镇，西江乡合并至现江安镇，村名五会村，属江安镇辖至今。
2019年11月13日，因村建制调整撤销灯杆山村、大桥坝村，以原灯杆山村、原大桥坝村、原五会村所辖范围合并设立五会村。