1930年江永县创立民众图书馆。馆址在城东蒲氏宗祠。藏有经、史、子、集各类图书2000余册及《万有文库》、《四库全书》各1套。因当时经费无着落，民国29年（1940年）并入民众教育图书馆，配有专职图书管理员1名。1949年11月，县人民政府接管民众教育图书馆，改称县文化馆，馆内仍设有图书室。1968年，县文化馆并入毛泽东思想宣传站，历年所藏近万册珍贵古籍被“红卫兵”当作“四旧”毁损殆尽。1973年恢复文化馆建制，图书室重新开放。1979年正式命名为江永县图书馆，建立分类目录、书名目录，每年外借图书近2万册次，接待读者1.5万多人次。1988年10月新建县图书馆启用，位于五一北路，占地3546平方米，建筑面积780平方米。馆内设办公室、采编室、外借室、综合阅览室、少儿阅览室和书库，到1998年为止，馆内在编人员13人（其中在职10人，离退休3人），拥有藏书5万余册，持证读者1500多人。

该馆根据县情和读者的需要，在购书经费严重紧缺的情况下，每年都要从以文补文收入中提出一部分，用于发展图书事业。1997年、1998年共购书2150册，征订各类报刊162册、征集地方文献36册，设立了地方文献专柜，建立了专门目录供读者查阅，并有专人保管，到1998年止，累计工具书达360册。馆藏图书设置3套目录，即公务分类目录和读者分类目录各1套，公务书名目录1套；目录组织质量误差率在1%以下，公务目录由采编室管理，读者目录由外借室管理。馆内制定了书库保管制度、藏书保护制度和读者借阅制度，规范书刊出入手续。