柴侯祠位于全州县城西隅(全州镇粮所内)。据全州镇志记载:始建于唐代。明代及清乾隆十三年(公元1748年)先后对该祠进行过维修。原有戏台、前殿、走马廊、后殿等建筑。现存前殿、后殿及院墙。前殿面阔五间,宽18.03米;进深五间,长16.5米,硬山顶,小青瓦屋面,采用穿斗式和抬梁式结构,有蜈蚣形翘檐封火山墙。正殿共用24根木柱,前檐柱为方形,金柱为包镶拼合圆柱,后檐柱为圆木柱。柱础有覆盆、鼓形、方形等,上雕饰着仰覆莲、暗八仙等纹饰,也有素面无纹的。轩廊步架和当心间大梁置斗拱、花板,梁枋上雕饰动植物纹和彩绘人物故事图案。藻井金绘行龙纹,四围饰五蝠、西番莲纹等。前后殿间有四方天井。后殿为穿斗式硬山顶建筑,面阔五间,宽16.9米;进深五间,长11.3米,除前檐挑梁梁身雕有花草纹外,其他木构件均朴实无纹。该祠不仅是历史悠久的古建筑,还是一处革命旧址。抗战时期,爱国将领杜聿明、戴安谰将军曾分别在此驻扎,西面内墙上至今还留有“轰轰烈烈抗日,慷慷慨慨就义”的抗战标语。1945年中共全州县党小组在此成立,并以此为地下联络点开展地下工作。解放后一直为全州镇粮所使用。1989年公布为县重点文物保护单位,收归文物管理所管理。1981年8月自治区人民政府公布为自治区文物保护单位。2003年自治区人民政府拨款进行了维修。