衢州父老感思德政，于城北李遂原讲学处塑李遂铜像，重约2000斤，并建李公遗爱祠，祠及碑均列入省二级文物保护单位。

李遂，博学多智，长于用兵，但也善于逢迎，皇帝准备重新建造三殿，李遂奏说五河县泗水中涌现大杉一棵，这是川泽效灵，为助圣主鼎新革故，皇帝大喜。李遂又进献白兔，皇帝为此派遣官员告于宗庙，从此皇帝更加宠爱李遂。以老致仕，辞官归隐，卒年六十三，赠太子太保，谥号襄敏，着作有《督抚经略疏》等。