徐世绩原本是义军首领，其后加入了瓦岗军。李密失败后，徐世绩投降唐朝，被赐予李姓，为李世勣。李世民登基后，李世勣处于避讳的考虑，又改名为李勣。然而李世民去世前，这对“塑胶”君臣的关系便有了破裂的趋势。首先，李世民无缘无故将李勣贬出京师，让他做叠州刺史。其后，他又对太子李治说：“你无恩于李勣，他必不服你。如今他被贬出京师，若李勣有怨言，则定斩不饶；若他没有怨言，你便应将他官复原职，那样李勣就服你了。”

当然，老谋深算的李勣非常识相，接到诏令后二话不说，便去往叠州赴任。对此，李治非常满意，在父亲去世后不久便招他回京，并委以重任。

在为官方面，李勣没有甚么原则。他出身布衣，好不容易有了三公之位。而他的同僚如张亮、侯君集、薛万彻等人都因事被斩，因此他决定没有原则的迎合君王之意。

永徽六年(655)，高宗欲以武则天取代王皇后，并以此事询问老臣们的意见。对此，作为武则天政敌的长孙无忌和褚遂良自然极力反对。而李勣呢？他却借口“生病”，不发表意见。第二天，李勣的病又奇迹般的好了，他偷偷溜进宫，对李治说：“此乃陛下家事，不合问外人!”

也就是说，皇后的废立都由皇帝自己做主，大臣干嘛掺和家务事？听了李勣的话，李治如吃一颗定心丸。有了李勣支持，还怕甚么长孙无忌？就这样，武则天如愿以偿地成为了皇后。之后，长孙无忌等老臣纷纷倒台，而李勣却安然无恙。

李勣深知，只要有自己坐镇，家族必然安然无恙。但自己百年之后，就很难说了。大谋士房玄龄曾经深受李世民信赖，但由于儿子房遗爱不肖，最终人亡家破；而杜如晦的家族，早在贞观年间就因不肖子孙而败落。

为了防微杜渐，李勣决定正家风，防止灭家之祸。在他眼中，最值得担心之人便是自己的爱孙——李敬业。李敬业继承了李勣的智谋，而胆量更是过之。他曾以奇谋镇压蛮族叛乱，李勣甚至称赞道：“连我都做不到”。然而李敬业的不谨慎却让李勣忧虑不已，他说：“此儿可兴我家，然破我家者必此儿。”

李勣去世前，仍忧虑于子孙的安全。他命令自己的弟弟，在自己死后入驻自己的英国公府，若子孙有不轨之行，便可立即打死。其后，李勣又对自己的后事进行了一个令人匪夷所思的安排：唐初风俗，当时的达官显贵都喜欢厚葬。但李勣却力主薄葬，陪葬唯朝服、石马和十个木人而已。此外，立即发狠道：“若不按我的话作，如同戮我尸体”。

李勣死后不久，他的担心果然应验。武则天连续废黜皇帝，争权夺位之形昭然若揭。李敬业一向认为富贵险中求，于是打出扶植李氏的旗号，悍然造反。不过最终，李敬业被黑齿常之击败，兵败身死。

在李敬业的牵连下，李勣的子孙都遭了殃，而心胸狭窄的武后更是决定掘了李勣的坟，丝毫不顾念旧情。打开坟墓后，李勣尸体保存十分完好，而陪葬的唯有朝服和十个木人，十分寒酸。朝服说明了李勣的忠诚——因为他要穿此衣服去见先帝；木人说明了李勣的低调，谨慎而不僭越，根本不是乱臣贼子。

或许，足智多谋的李勣已经料到自己坟墓可能被打开，而他临死前的遗嘱，证明了自己的忠诚和清廉，也反衬了掘墓者的卑劣。对此，武则天自然大怒，大骂李勣老奸巨猾。她命手下烧毁了李勣的尸体，挫骨扬灰，同时还收回了他的“李姓”，重新变成了徐世绩。

不过神龙革命后，李氏复位，徐世绩又重新成了李勣，而他的子孙也重新被起用。不过他的子孙再也不能姓李了，而是以徐姓示人。