民国时称乐山村，属乐山乡。
1951年为乐山乡，属柳江县第六区。
1955年属进德区。
1958年改乐山大队，属红旗公社。
1959年析出江中大队，属进德公社。
1962年改乐山公社，江中大队并入。
属进德区。
1968年复改乐山大队，属进德公社。
1980年析出江中大队。
1984年改乐山村，设立乐山村民委员会，属进德乡。
1987年改设乐山村公所。
1995年复设乐山村民委员会。
1996年属进德镇。
2021年2月5日更名乐山村村民委员会，沿用至今。