渌江书院座落于醴陵城区西山半山腰，三面环山，面向渌水，与瓷城繁华街区隔江相望，环境幽静，历史悠久，是醴陵古代所办七所书院中存在时间最长、规模最大、影响最深远的书院。

渌江书院创立于清乾隆十八年（1753），原址在醴陵城东青云山下朱子祠右侧。道光九年（1825年）县令陈心炳倡捐，迁建于城西靖兴山（西山）宋淳祐年间的原西山书院遗址之上。建头门、讲堂、内厅三进合院，左右各设三斋。又移建始于唐代的靖兴寺及李卫公祠于左阜。光绪十九年（1903年）傍寺又增建宋名臣祠；与靖兴寺一并作渌江书院斋舍。自此，院、祠、寺三位一体延用至今。现除北侧斋舍，因山洪冲毁于1927年重建成学生宿舍楼外，其余建筑群均保存较完整。总建筑面积已达4123平方米。

渌江书院有自己独特的办学思想和教学方式，并有名人掌教的传统。这里文星朗耀，名硕辈出。宋代著名教育家、理学家朱熹曾两次寓醴，在书院的前身学宫讲学，至今存有纪念他讲学的石刻画像。明代著名哲学家、教育家王守仁也曾在后为书院一部分的靖兴寺讲学。军事家左宗堂曾在书院任过山长。近现代很多名人，如宁太一、刘揆一、傅熊湘、李立三、左权、蔡申熙、陈明仁、李明灏等都曾在这里求学。渌江书院为振兴文教、培植英才作出了贡献。

渌江书院已成为展示湖湘文化的一扇重要窗口，享有“醴陵文化摇篮”的美誉。

1996年1月，渌江书院被列为湖南省省级文物保护单位。

2013年3月，渌江书院被国务院公布为第七批全国重点文物保护单位。