宋属奉政乡安仁里。
元属二十三都关山村。
明代与二十都等6个都同属统一个图。
清属怀德乡官山、曲坑村。
民国时期属时坪乡温山保。
解放后，1950年属第二区温山乡。
1952至1954年属第七区温山乡。
1955至1957年属雄江区温山乡。
1958年属雄江公社关山大队。
1961年属桔林公社关山大队。
1964年属雄江公社温山大队。
1973年恢复关山大队。
1977年属桔林公社关山大队，之后长期不变。
1984年7月桔林乡人民政府成立，关山成为该乡属下的一个村民委员会。