衡南县图书馆，始建于
1977年，现座落于衡南县云集镇黄金路129号，建馆初期与文化馆一起办公，1980年两馆分家，衡南县图书馆正式挂牌对外开放。
衡南县图书馆总馆建筑面积3320.42㎡（其中直属养浩分馆506.4 ㎡）。乡镇分馆面积5827㎡，总馆有阅览座席360个，每一楼层配有存包柜，各借阅室安装了门禁及设有导读岗和读者咨询台，计算机总量75台，可供读者使用终端62台，供盲人使用电脑1台。有纸质藏书161167余册，其中古籍5783册，数字图书51.24万册，电子借阅机1台，报刊阅览机2台，有持证读者6832个，总流通131165人次，借阅127530册次。移动及微信图书馆已经运行，采用科图ILAS大型网络版图书管理系统。现财政年预算已突破300万元。2010年实行免费开放。
图书馆和文化共享工程两块牌子一套人马，班子成员三人，内设：办公室、财务室、采编部、对外服务窗口有：辅导与活动室、古籍地方文献室、
电子阅览室、
报告厅、外借室、报刊综合阅览室、少儿阅览室、自修室等。