中正图书馆位于衡阳市南岳区集贤峰下，成立于1932年。图书馆是一个四合院建筑，总面积1700余平方米。占地约1万平方米，建筑面积2147平方米，设有8个阅览室，可容纳200人同时阅览，可藏书40万册。据史料记载，中正图书馆有其重要的历史地位，源于南岳书院，历史可追溯至李亨时期，明嘉靖13年重修，名为集贤书院。民国21年（1932年），南岳图书馆在此建馆，民国36年，国民政府湖南省省主席王东垣借将该馆扩建为南岳中正图书馆，成为当时湖南第二大图书馆。

中正图书馆的历史可以追溯到唐朝时期的南岳书院，最初是由邺侯李泌的儿子李繁为了纪念他的父亲而建立的。书院经历了多次重建，最终在明朝嘉靖13年由夏良胜等人在邺侯书院的遗址上重新修建，命名为集贤书院。到了民国时期，由于南岳图书馆的建立，这个地方成为了中正图书馆的所在地。1945年，南岳图书馆遭受战争破坏，随后在1946年进行了大规模的重建工作。1947年7月，南岳中正图书馆正式成立，康和声担任首任馆长。然而，到了20世纪50年代中期，随着时代的变迁，中正图书馆的建制被撤销，其藏书也分散到了不同的地方。

中图书馆是一座具有中国传统特色的四合院建筑，白色的外墙和红色的窗棂使其外观显得古朴典雅。正建筑采用了砖木结构，分为两层，包括藏书室、阅览室和办公室等功能区域。整个图书馆占地面积约为1万平方米，建筑面积达到2147平方米，拥有8个阅览室，能够同时容纳200人的阅读需求。此外，图书馆还具备了存放40万册书籍的能力。

中正图书馆在其历史上曾拥有一批珍贵的古籍图书，其中包括向郁阶捐赠的4万册善本书籍。尽管后来图书馆的建制被撤销，这些宝贵的文献资料仍然得以保存下来，一部分被湖南图书馆收藏，另一部分则分给了其他地区的图书馆。