民国时期属永顺镇第12保。
1951年2月建东寨乡，属该乡灵山村；1958年9月为东寨公社白鹤管区；1961年改称白鹤大队；1964年撤东寨公社，白鹤大队划入白马公社；仍为白鹤大队；1981年白鹤大队更名为灵山大队；1984年1月撤公社建白马乡，属该乡灵山村；1985年5月撤白马乡并入铁佛镇，同年7月铁佛镇更名为白马镇，仍辖灵山村；2004年6月将长坝镇光明村和原东升村长岭、马鞍村民小组并入白马镇灵山村。
同年设立灵山村村民委员会。