北宋时形成聚落，至元末，属清道乡，明清属广德湖田隅。
1946年9月，属罂湖乡。
1949年5月后建村，1950年5月属岳山乡。
1956年，建童家横、岳阳、白岳3个高级农业合作社。
1958年，为上游（望春）公社湖山大队童家横、岳阳、白岳3个耕作队。
1961年，为童家横、岳阳、白岳3个大队，属白岳公社。
1983年，为白岳乡童家横村、岳阳村和白岳村。
1992年，属集士港镇。
2004年4月，由白岳、岳阳、童家横3个行政村合并为岳童村。