该镇明朝属宣化、安昌乡；清康熙年间，分属四会乡茅潭里、宣化乡顾县里、安昌乡西阳里。
清同治年间，分属宣化乡顾县里、宣化乡宫台里弥陀堡、安昌乡西阳里天台堡。
民国元年（1912），分属第五区天台堡和第八区弥陀堡、杨桥堡、多宝堡。
第二次国内革命战争时期，分属果城区、茗山区、升启区。
民国三十七年（1948），分属石洪乡、灵峰乡、南台乡、大茗乡。
1949年5月属长灵区草坪乡、欧家港乡、彭贵乡、乐吾乡、陈贵乡、洪滨乡、上罗乡、伏二乡和保安区雷山乡，南台区郭思恭乡、官厅乡。
1951年，属八区。
1955年，为矿山区。
1958年，矿山区改为矿山公社。
1959年又称矿山区。
1975年，撤区并社，为矿山公社。
1984年4月，矿山公社改为矿山乡。
1989年9月，经省人民政府批准，以矿山乡政府驻地陈贵命名，将矿山乡改为陈贵镇至今。