桐乡图书馆前身为县文化馆图书室。1976年8月，县委宣传部批准建立县图书馆，设于文化馆内。1984年8月由县人民政府批拨专款建造了桐乡县图书馆，自此，图书馆始有独立馆舍。1993年桐乡撤县设市，更名为桐乡市图书馆。

2000年10月13日，经桐乡市人民政府批准，陆费逵图书馆在本馆挂牌成立。（陆费逵：桐乡人，著名爱国教育家，出版界的先驱，中华书局创始人）此后，桐乡市图书馆，陆费逵图书馆两名并用。

2001年8月由桐乡市人民政府投入2100万元，异地重建新馆，新馆位于桐乡市行政大楼西侧，占地5640平方米，建筑面积7200平方米，2002年12月底竣工，2003年3月3日开馆。

我馆现有读者21000人，年接待读者达40余万人次，年图书流通近40万册次，在社区、老年公寓、学校、企业等设立了馆外图书流通点。

2008年，根据《桐乡市构建城乡一体化公共图书馆服务体系的实施意见》，我馆已在崇福、洲泉、濮院、龙翔、凤鸣、石门建立了镇（街道）分馆，2009年还将在乌镇、河山、大麻、屠甸、高桥建分馆，实现全覆盖。

桐乡市图书馆现藏各种文献38万册（件），其中方志、年鉴、家谱、地方性史料、乡贤著述等地方文献约5800册（件），《四库全书》、《四库全书存目丛书》、《民国丛书》等大型新版古籍丛书3200余册，《古今图书集成》、《四部备要》、《光绪朝朱批奏折》等中华书局版本图书近6千册，年订报刊660多种。

桐乡市图书馆作为精神文明建设窗口，立足于通过提供各种形式的资源与服务来满足各方面的需要，为桐乡的社会进步、经济发展服务。