隋唐时期，因地处古驿道，有四家铺面，为四合院方形结构，被称为四方铺。
清晚期，集镇有300多人。
《荆门州志》记载：”荆门州南道13铺，纪山有3铺（花梨铺、四方铺、左溪铺）。
1914年，四方铺为荆门县第五区政府所在地，至抗日战争时衰亡。
1949年新中国成立时，总人口10804人。
仍称四方铺。
1975年11月前，岳山、四方铺2个小公社由拾回桥区管辖。
12月，撤区并社，成立十里铺公社。
岳山、四方铺小公社改称岳山和四方铺管理区。
岳山管理区隶属拾回桥公社，四方铺管理区隶属十里铺公社。
1984年4月，四方铺、岳山管理区改称四方铺乡、岳山乡。
1987年，2乡合并为四方铺乡，总人口26074人。
1993年5月，成立五龙居委会。
同年，四方铺乡下辖区域变更为2个管理区。
1998年，撤乡设镇，四方铺乡更名为纪山镇。
2000年10月，撤销管理区。
2005年9月，严庙、夏巷两村合并为严庙村，五龙居委会与四方铺村合并为四方铺社区。
2006年底，纪山镇辖12个村和1个社区，即纪山村、金桥村、程新村、郭店村、砖桥村、付场村、金牛村、肖场村、严庙村、更新村、郭场村、岳山村和四方铺社区。