公元643年，魏征去世，李世民非常悲痛，亲自写碑文，还把衡山公主许配给魏征的儿子；然而没多久，李世民就，下令推倒魏征的墓碑、磨掉原来御撰的碑文，并且取消了衡山公主的婚约。

主要原因是太子李承乾的黏，魏征生前极力向李世民推荐侯君集、杜正伦，说他们有宰相之才。结果，侯君集、杜正伦全部卷入了李承乾谋逆案，李世民大为震惊，魏征居然举荐了谋反分子，他开始怀疑魏征早就和太子勾连。

紧接着，史官褚遂良又爆出一些事情，魏征私下多次把自己劝谏皇帝的奏章底稿拿给史官褚遂良，让他记入国史。李世民知道后，非常恼火。 这就是拿我的过失，换你自己 “千古直臣” 的名声。

两年后，公元645年，李世民亲征高句丽，打得很辛苦，得不偿失。 他想起魏征，“要是魏征还活着，肯定会阻拦我的！” 于是，李世民又派人去魏征墓前重新把墓碑立起来了，但是，他还是心有芥蒂，没有恢复公主和魏征儿子的婚约。