陶山书堂是退溪先生亲自教授弟子的地方。于1557年动工,1560年完工。作为书院内年代最为久远的建筑,据说是退溪先生直接设计的。
书堂呈“一”字形,共有三间,分为厨房、火炕房、地板房。这里还加建了半间厨房、一间地板房,还有一个特点是房间三面都有木廊台。加建房顶然后延长了地板间,火炕房叫做玩乐斋,地板房叫岩栖轩。
在这里不断进行思索、研究和教育弟子的退溪先生把这间单间火炕房叫做玩乐斋,这个名字源于朱熹《名堂室记》中的“乐而玩之,固足以终吾身而不厌”。 休息时候去的地板间叫做岩栖轩,这个名字来源于朱熹《云谷诗》中的“自信久未能,岩栖冀微效。”