吕家湾位于谢家堡乡北部，村南部与胡家沟村、板铺村相邻，村的东部、北部、西部与杨家坪林场相邻。总面积8819亩，耕地总面积156.96亩，林地总面积5135亩，退耕还林总面积104.4亩，公益林总面积1328.25亩。
吕家湾村与李家堡村、胡家沟村、范家坡村、朱家峪村、孔涧村、西安村、板铺村、张家房村、梨园村、王涧村、池涧村、谢家堡村、白家口村、桃园沟村相邻。
吕家湾村附近有黄帝城、黄羊山国家森林公园、丁玲纪念馆、涿鹿清凉寺、涿鹿三祖文化广场、黄帝城文化旅游区等旅游景点，有涿鹿紫皮大蒜、涿鹿葡萄、涿鹿悠悠枣、张家口蕨菜、宣化牛奶葡萄等特产，有涿鹿三祖文化、冀台同胞共祭中华三祖大典、蔚县剪纸、蔚县拜灯山、康保二人台等民俗文化。