1949年属岛斗乡第九、十保。
1950年属岛斗乡第九、十村。
1958年属樟木山、西丰和沙塘大队。
1960年，改西丰大队为向东大队。
1961年析向东大队南扫箕自然村和沙塘大队南扫箕自然村设双基大队。
1982年，复向东大队为西丰大队。
1984年撤队改设为樟木山、西丰、双基村民委员会。
原属桂花乡，1992年并入岛斗镇，2001年并入衢山镇。
2005年，双基村并入樟木山村民委员会。
2006年，西丰村并入。
2016年改称樟木山社区村民委员会。
2019年改为今名。