Храм литературы в Каолань был перенесен на нынешнее место в 1878 году, хотя дата основания 1857. Храм принадлежит конфуцианскому течению. В 1951 году из-за войны храм забросили, затем открыли библиотеку в 1975 году. До 2011 году была завершена реставрация старой архитектуры. Храм хранит в себя множество древних буддийских писаний.