该区域是南山区最早立村村落之一，为清代建的小村庄，又叫“红花园村”。
桂庙来源于“龟庙”，村民在庙宇供奉神龟。
清朝初年，清廷为防范沿海居民接济台湾“反清复明”的郑成功势力，采取了坚壁清野的迁海政策，新安县首当其冲，致使当地居民迫迁外地，该村祖先也从桂庙村迫迁东莞岭磡。
康熙入年（1669）年，恢复新安县，政府号召原籍居民返乡耕种，由于在迁海过程中人民颠沛流离，死者过半，该村祖先从东莞迁回新安县桂庙村。
抗日战争时期，日本侵略我国，当地村民又从桂庙村迫迁栗树村（现桂庙新村位置），日军在此村以及周边地区修建军用飞机场；后来我国南下大军迫击日本军，期间红军曾在如今桂庙新村的叶氏宗词所在位置扎营（以前为草棚）。
全国解放之后，村民回到栗树村，并正式改名桂庙新村。
九十年代后，实行“农村城市化”改革，成立居委会，把村委会发展经济和组织村民自治两大职能分离撤销村委会。
粤桂社区居委会于2001年10月由原粤海门居委会和桂庙居委会调整合并成立，名称沿用至今。