1953年兴建居民小区，得名五三，后演化为五山。
五山居民委员会成立于2001年4月21日，位于小河区中部。
东面是北门居民委员会，南面是龙王村，西面是中曹居民委员会，北面是南明区中曹司社区服务中心。
居委会办公地点位于中曹司贵花大道旁，服务面积约0.58平方千米，辖有38个居民小组。
居委会由原第二十五、二十六居民委员会整合组建。
2012年前属小河区所辖，2012年后属花溪区所辖，2020年1月属花溪区平桥街道所辖。