1935年至建国初属蟠龙乡辖，1958年为蟠龙公社，村名为柏香林大队，属蟠龙公社辖。
1978年将新振、南屏公社的两个大队并入本公社，村名为柏香林大队，属蟠龙公社辖。
1980年恢复原建置（分出新振公社另置）仍为蟠龙公社，村名为柏香林大队，属蟠龙公社辖。
1984年公社改乡时，蟠龙公社恢复蟠龙乡名称。
村名更改为柏香林村。
属蟠龙乡辖。
1992年撤乡并镇，将新振乡并入蟠龙乡，村名为柏香林村，属蟠龙乡辖。
2019年8月乡镇乡镇区划调整，撤销蟠龙乡，将其所属行政区域划归夕佳山镇管辖，原蟠龙乡柏香林村更名为夕佳山镇柏香村。