1948年称吴关村，属东升乡。
1952年并入灌阳县第一区大仁乡。
1955年属城厢区大仁乡。
1958年分设胡家大队，属红旗公社。
1961年属城关镇。
1962年改公社，属城关区。
1968年改拥军大队，并析出爱民大队，属城关镇公社。
1973年复为胡家大队。
1982年属灌阳镇。
1984年改胡家村委会。
1987年改胡家村公所，1995年复名胡家村委会。
2020年根据民政部基层政权的文件要求，改为胡家村村民委员会至今。