民国时期属封窦乡第6保；建国后1951年建政为新生乡第7村；1955年建社为回龙乡八村二十六社；1958年为回龙公社二十一管理区；1962年为幸福公社五大队；1967年改为幸福公社四大队；1981年地名普查命名为幸福公社团山大队；1984年改社为乡时为幸福乡团山村；1992年撤区并乡建镇后并入回龙镇，团山村不变。
2020年，村级建制调整，撤销高坎村、楠庙村和团山村，合并设立团山村（营府函〔2020〕72号）。