四知书屋位于澹泊敬诚殿后，是面阔5间、外形简朴的四知书屋，以小巧的抄手回廊与大殿相通。康熙皇帝曾题名“依清旷”，1788年（乾隆五十二年），乾隆皇帝更名为“四知书屋”。
所谓“四知”源于《周易·系词》：“群子知微、知彰、知柔、知刚。”四知书屋尽东墙挂有嘉庆帝写的条幅，推崇他父亲乾隆皇帝，其中“刚柔相济政胥协，藏显咸孚治允宜”，说明“知微”是要善于隐藏自己的内心；“知彰”就是宣扬自己的功德；“知刚”是要懂得发挥武力和权威的作用；“知柔”即怀柔安抚的手段。统治者只有学会灵活运用刚柔相济、恩威并施的手腕，才能达到巩固其统治的目的。
清帝在举行大典前后，都在这里休息更衣，也作为“常朝”处理日常政务的所在。乾隆皇帝在这里召见过许多少数民族的王公贵族，包括喀尔喀蒙古的哲布尊丹巴胡图克图一世、三世、四世，并用蒙语同土尔扈特首领渥巴锡谈话，用藏语同六世班禅交谈。