清朝时期属蕲水县永福乡；民国时期属第四区；1955年农业合作化时，成立调军初级社；1957年转高级社时为调军高级社，茅江中心乡；1958年人民公社化时，更名为调军大队，属巴河公社；1959年恢复区建制，属巴河区；1970年与金盆大队、精华大队合并，设调军大队；1974年撤区并社，属巴河公社；1981年调军大队与金盆大队、精华大队分开，以境内山名调军山定名为调军山大队；1984年底，恢复区、乡、村建制，属巴驿区茅江乡，原名称调军山大队变更为调军山村民委员会；1988年撤区建乡镇，属巴驿镇；2001年合并乡镇，属巴河镇至今。