王氏始祖从本镇石头村湾角村迁入落户，另有从本镇双益村迁入，形成本村委最早的村落。
之后，黄氏族人分别有从本镇排阜村迁入、从广西迁入、从泗纶镇迁入落户，陈氏族人从本镇排阜村迁入、扶合镇迁入、泗纶镇迁入，李氏族人从本镇鳌头村迁入，潘氏族人从泗纶镇高寨迁入，韦氏族人从本镇排阜村迁入，赖氏族人从本镇鳌头村围寨村迁入和合江村迁入，温氏族人从泗纶镇马桥村迁入，董氏始祖世荣公于1901年从黎少横岗迁入。
现有王、黄、陈、李、潘、盘、许、韦、赖、温、董等共11姓，最大姓王，占25%。
建国初郁南县七区设灵凡乡。
1957年1月，随郁南县第七区划归罗定县，称加益区灵凡乡，1958年2月设置加益乡灵凡合作社，同年9月公社化，加益公社设灵凡大队。
1961年6月，灵凡大队撤并于其他大队。
1974年7月，加益公社复设灵凡大队。
1983年撤大队设灵凡乡，隶属加益区，1986年撤乡改设灵凡村委会，1989年撤村委会改设灵凡管理区。
1999年撤管理区复称灵凡村委会。
宋元时期属泷水县乡。
明代属三都图。
清末属罗定直隶州西宁县镇南都。
民国三年(1914年)属郁南县十二区；民国三十七年(1948年)属郁南县由十二区改设的镇南乡。
1950年4月属郁南县七区；1957年1月归属罗定县加益区；1958.2-1958.9属罗定县加益乡灵凡合作社；1958.9-1958.11属罗定县加益人民公社灵凡营；1958.11-1959.1属由罗定、郁南合并而成的罗南县加益人民公社；1959.1-1959.11属由罗南县改称的罗定县加益人民公社；1959.11-1961.4属由罗南县改称的罗定县加益人民公社；1961.4-1961.6属恢复罗定、郁南两县建制后的罗定县加益人民公社；1961.6-1983.7属罗定县加益人民公社；1983.8-1986.11属罗定县加益区；1986.11-1989.5属罗定县加益镇；1989.5-1998.8属罗定县(市)加益镇；1998.8-现在属罗定市加益镇。