民国时期属桐梓乡第15、16保各一部分。
1951年11月建至安乡，为该乡灵活村；1953年析置大田乡，为该乡大田村；1954年6月撤大田乡并入至安乡；1955年12月撤至安乡并入桐梓乡；为该乡灵活村；1958年9月建桐梓公社，为该公社繁荣管区；1961年改为繁荣大队；1984年1月撤公社建桐梓乡，为繁荣村；1995年9月撤桐梓乡建桐梓镇；2004年6月将药林、石柱村并入繁荣村。
繁荣村村民委员会于2004年村镇建制调整中成立，地名沿用至今。