常氏家族拥有中国民居中最大的书院。名为“石芸轩书院”，该院位于北常后街中端，为园林式建筑，又是常家呤诗作画、陶冶情操和培养族中子第的书廊学府。书院由东、西两院和正面主楼三大部分组成，虽分为三院。整体上却连为一体。前院由四亭三廊组成，东廊为“听雨楼法帖”、西廊为“常氏贵墨法帖”、正面廊为“石芸轩法帖”，皆是中国书法艺术之珍品。石芸轩法帖后有御笔亭四十四帝后帖，均具有极高的艺术品位和文物价值。书院正面的主体建筑，为七开间两层“听雨楼”，取李商隐“留得残荷听雨声”的意境，是当年常家子弟呤诗作画，研读史书的场所。
