荷亭书院坐落于卢宅街北，是全国重点文物保护单位东阳卢宅古建筑群的组成部分，乃卢氏后裔卢格初建于明朝弘治年间。
卢格，号东元居士，别号荷亭。他是成化辛丑年进士，官至江西监察御史，巡按广东。后因不满宦官刘瑾乱政，毅然辞官还乡。
明弘治年间，卢格在此凿地栽荷，广邀学者雅集，一同辨析经史，编撰的《荷亭辩论》被《四库全书》收录，荷亭书院也由此得名。
现荷亭书院位于卢宅肃雍堂甬道两侧，分称为东荷亭、西荷亭。西荷亭书院前后三进，天井水池仍如旧时般，栽满荷花。微风拂过，荷香与墨香交织在一起，让人恍惚间听见当年学者们激烈的辩论声。游客们坐在亭内的石凳上，看着水中游鱼，感受着“出淤泥而不染”的文人风骨，仿佛穿越回了那个群贤毕至、人才济济的年代。