清代属缙云乡四都，民国时属廿三里乡，1950年为廿三里乡娄山塘、下娄、光耀境农会，1956年合作化时属廿三里乡石柱下、下娄、跃进高级社，1958年分属廿三里人民公社廿三里大队管理区石柱下、下娄、光耀境生产队，1961年属廿三里人民公社石柱下、下娄、光耀境大队，1983年改称廿三里乡石柱下、下娄、光耀境村民委员会，1988年属廿三里镇，2003年属廿三里街道，2018年11月撤销下娄居民委员会及石柱下、光耀境村等2个村民委员会，设立拨浪鼓社区居民委员会。