清宣统二年（1910年）起属龙山乡辖；1933年6月红四方面军在茨林垭、文庙垭建立乡苏维埃；民国二十四年（1935年）至三十八年先后属龙彭乡、双龙乡，部分属文运乡；1951年成立柏杨乡人民政府，为塘山村，属柏杨乡；1958年政社合一，改为塘山大队，属柏杨人民公社；1984年政社分设，复名塘山村，属柏杨乡；1992年并入龙山镇，属龙山镇；1997年又从龙山镇划出单行乡，属柏杨乡；2004年“强村并组”塘山村，桂阳村合并为桂山村；2005年乡镇建制调整将原柏杨乡所属行政区域并入龙山镇，属龙山镇；2006年村（居）委会区域调整，撤销桂山村，恢复原塘山村，桂阳村建制；2020年村级建制调整将塘山村和桂阳村合并为塘山村。