1941年，民国政府废细沙坪联保设铁炉乡，下设落桐溪保，驻地唐家垭，属走马区铁炉乡管辖。
后来保的驻地迁至张家坪（别名鱼山），改称鱼山保，属走马区铁炉乡管辖。
1950年3月改旧制改保为村，鱼山保改称鱼山村，属五区（驻地白果坪）铁炉乡管辖。
1951年建立乡政权，鱼山村改称鱼山乡，属六区（江口区）管辖。
1953年1月，第六区人民政府改称第六区公所（驻地江口），属六区管辖。
1955年12月，调整区划，第六区命名为江口区公所（习惯称五区、驻地江口），属五区管辖。
1956年至1958年春缩减并乡，合并组建江口乡，原鱼山乡改建为鱼山农业生产合作社，属于江口区江口乡管辖。
1958年9月江口区组建分为梅坪、江口两个公社，乡改称管理区，鱼山合作社改称鱼山大队，属江口公社江口管理区管辖。
1960年2月走马、江口、梅坪公社合并，属于走马公社江口管理区管辖。
1961年8月恢复区建制，管理区改称公社，属走马区江口公社管辖。
1975年撤区并社，属铁炉公社江口管理区管辖。
1984年恢复区乡行政区划，鱼山大队改称鱼山村民委员会，属走马区江口乡管辖。
1989年3月，设立铁炉区，属铁炉区江口乡管辖。
1997年1月撤区建乡，江口乡改称江口管理区，鱼山村改称渔山村，属铁炉乡江口管理区管辖。
2001年6月，撤销管理区，属铁炉乡管辖。
2006年3月设立铁炉白族乡，属铁炉白族乡管辖至今。