乾隆即位后,對李衛還是很厚待的,很能聽取李衛的進諫,在處理誠親王府的護衛庫克與安州百姓淤池之爭時,李衛依法秉公處理,乾隆很是嘉賞李衛的辦事能力,特賜予四團龍補服。在彈劾總河道管理朱藻貪污,其弟挾制地方官員干預賑災之事時,乾隆聽取了建議對兩人進行治罪。在李衛生病時,乾隆還專門派自己御用的太醫去給他治病,很是體恤。可能衛因病去近后,以總督之禮厚葬。不過,李衛在乾隆沒呆兩年,在乾隆三年時,李衛就病逝了。也由于死得早,沒來得及讓乾隆對他翻臉。
在乾隆四十二年時,乾隆又一次下江南,在游賞西湖時,看到西湖的花神廟里立著李衛和他的妻妾的神像,乾隆帝突然開始暴怒,稱:“李衛于督撫中并非公正純臣,在浙江沒有為當地人民建立功德,仰借著皇恩寵幸,反而多有任性驕縱的行為。如果他現在還活在,朕一定要追究他的罪責并處置他”。下令撤掉了李衛的神像,并且搗毀。
顯然,自詡十全老人的乾隆是吃醋了。吃李衛的醋,這位好大喜功的皇帝對李衛是好生嫉妒,嫉妒李衛被當地人民如此愛戴。作為一國之君,自以為文治武功無人能及的他,都沒有被人如此供奉過,而一個小小的李衛竟然如此受厚待,還被浙江人民自發建廟供像,這讓他大為光火。歸根結底,乾隆是把臣子當奴才看待的,作為奴才,你什么都是主子給予你的,所以,你所作出的一切都應該屬于主子的,只有主子才能尊享。而奴才,只有乖乖當好奴才就好了,哪有資格登殿入廟呢?