一个人到底可以红多久？长孙无忌告诉你，可以红三十年，李义府则告诉你，其实也没有多少天。显庆三年，原本红极一时的李义府栽了个跟头。李义府的跟头栽在他的同事，同为中书令的杜正伦身上。杜正伦是一个老资格高官，贞观年间就曾经在魏征的推荐下受到李世民的重用，到了李治当皇帝，杜正伦同样受到重用，辗转升迁为中书令。现在问题就来了，以杜正伦的资历，自然是老资格，因此便不由得以前辈自居，在他眼中，李义府不过是个受到恩宠的新人，在他面前是没有资格摆谱的。然而在李义府的眼中，杜正伦不过是一个老资格，跟自己这个正受皇帝恩宠的新贵相比，是没法比的。老资格遇到新贵，矛盾在所难免。两人的龌龊不断升级，彼此缠斗不已，甚至在李治的面前也不停争吵，日子一长，李治烦了，两个中书令怎么跟斗鸡一样？大臣不和，非国家之福，还是把两人分开吧，一个去横州，一个去普州。杜正伦被贬为横州刺史，横州是现在的广西横县，李义府被贬为普州刺史，普州是四川省的安岳县，两人山高水远，再也不用争吵了。确实不用再争吵了。因为这一去，杜正伦再也没回来，不久便在横州去世。
李义府呢？他还能回来吗？从中书令的高位摔下来，要回来，恐怕难吧？很多人都在猜测，尤其是那些曾经跟李义府论过本家，称过兄道过弟的人。由于李义府出身的李姓并非豪门大姓，他曾经迫切地想进入豪门大姓的行列，比如赵郡李姓。都是姓李，赵郡李姓可是北魏时的四大国姓，即便到唐朝时也是豪门大姓，因此李义府很想混入赵郡李姓的族谱。为了巴结李义府，不少赵郡李姓子弟都称李义府为堂兄或者堂弟，给事中李崇德做的更彻底，他直接把李义府列入了家谱，这样李义府在赵郡李姓的家谱中就有了一席之地。现在李义府被贬了，李崇德陷入犹豫之中：还需要在家谱之中保留这个不伦不类的外来户吗？大概不用了吧，被贬到普州那个荒凉的地方，八成回不来了。对，回不来了！李崇德随即将李义府的名字从家谱中剔除，跟这种落水狗趁早划清界限，省得沾包！一年后，李崇德傻眼了--李义府又回来了，官职是吏部尚书，同中书门下三品，还是宰相，还是很红。李崇德的苦日子来了，李义府是不会放过他。李义府这个人有恩不一定会报，但有仇却是一定会报的，而李崇德就是那个他不得不报的仇人。很快李崇德被诬告下狱，在狱中自知无路可走，自杀身死。谁说被贬了，就不能东山再起呢？