所以在开元五年起，李胤就频频搞事。
李胤也曾暗示长孙无忌致仕退休，甚至愿意在辽东给他再赐封一大块世封地，但长孙无忌并不愿意归隐。
最后李胤只好另寻他法夺权。
中书舍人李义府因为得罪了长孙无忌，本来要被贬官，许敬宗出面求情，长孙无忌也只肯让他贬的近些，却坚决要把他踢出朝堂。李义府心有不甘，最后心生一计，向皇帝上了一道秘本。
李义府在密奏上列了些苏皇后无德，太子李象不贤的内容，然后建议废后换储，这个密奏有些胆大，但却让李胤一下子找到了突破口。因为李义府很清楚的知晓皇帝想夺权的心思，所以提供了突破口。
李绩为枢密使，属于不问朝政的那种人。
而许敬宗和长孙无忌关系不错，双方没有根本的利益冲突，所以要夺权，先得分化这两派。
废后换储就是一个最好的办法。
只要提出废苏氏立秦氏，那么长孙无忌等肯定反对，而许敬宗、崔敦礼本来都是秦琅拉起来的山头，他们当然愿意支持秦琅的妹妹为皇后，更支持秦琅的外甥做太子，这样就能保证他们在朝中的地位更稳固，利益更持久。
两派一分化，李胤就立马不被动了。
让许敬宗和长孙无忌两派内斗，皇帝可就能坐山观虎斗了。
李胤在读过李义府的奏章后，马上召见了他，一番密议过后，皇帝让翰林院白麻宣相，李义府加中书侍郎，同中书门下三品，入政事堂为相。
长孙无忌本来要把李义府一脚踢去岭南，许敬宗出面，才答应踢去关中，谁知道皇帝却拜他为相，这可就让长孙无忌恼怒万分。
可更料不到，皇帝马上带着秦贵妃亲临长孙无忌府中，送去许多钱财珠宝，然后暗示想要废苏立秦，并许诺，等四皇子晋王李贤加冠后，到时从长孙无忌孙女中择一淑女婚配。
这已经算是很不错的示好了，但没出李胤预料，长孙无忌拒绝了。
理由是苏氏为皇帝元配发妻，也没有什么失德之举，不当废除，至于太子李象，已经为储多年，且是当年圣祖选定的，怎么能换储呢。国之储君，一国之本啊。
李胤从长孙无忌府中回去后，舅甥二人的关系也算是难以回头了。
接下来，也就正式开始了朝中近十年之争的废后换储之争，许敬宗、崔敦礼等果然迅速转变立场，很快就都成了同意废后换储的支持者，跟长孙无忌等掐了起来。
原本一团和气的政事堂宰相，立马就泾渭分明的成了两派，斗争也就越来越激烈。
等到开元十三年此时，斗争也终于到了最白热化的阶段，因为李胤成功的得到了军方大佬们的支持，枢密使李绩，副使程咬金、苏定方、牛进达，大将梁建方、高侃、高甄生、刘仁轨、薛仁贵等都站到了皇帝这边，公开表态，废后本是天子家事，何须问宰相？
这个态度一出，李胤终于可以收网，对长孙无忌等再无半点忌惮。
于是乎，韩瑗、柳奭、褚遂良等先后被各种罪名罢相贬出京，紧接着把长孙无忌也给牵连进谋反案。
到现在，也是正式收网的时候了。
许敬宗站了出来。
“陛下，臣始末推究反复查证，他们反状已露，陛下犹以为疑，此非国家社稷之福啊！”
李胤长叹一声。
“我家竟然如此不幸，亲戚间屡有异志，往年齐王祐和汉王元昌、魏王泰谋反，后来吴王恪、荆王元景亦谋反，多位姑父、妹夫也参与谋乱，如今元舅又如此，使朕还有何脸面再见天下之人。”
但话锋一转，“兹事若实，如之奈何？”
许敬宗再劝，“陛下，遗爱乳臭儿，与一女子谋反，如何能成事？但无忌与先帝谋取天下，天下服其智，为宰相三十年，天下畏其威，若一旦窃发，陛下遣谁当之？今赖宗庙之灵，皇天疾恶，因按小事，乃得大奸，实天下之大庆也。”
“臣唯恐无忌窘急发谋，振臂一呼，到时同恶云集，必为宗庙之忧。臣昔见宇化及及其父宇述为隋炀帝所亲任，结以婚姻，委以朝政，宇述死后，化及复又典领禁军，可一夕于江都作乱弑君，先杀不附已者，臣家当年亦遭此祸，于是大臣苏威、裴矩之徒，皆舞蹈马首，唯恐不急，黎明遂倾隋室。”
“陛下，前事不远矣，望陛下速决之！”
崔敦礼、李义府皆上前，请皇帝速斩长孙无忌、褚遂良、韩瑗、柳奭一党。
皇帝沉默了一会。
“此事当问请太师，传令，速派人往吕宋召太师秦琅入朝辅政，主持朝政大局！”
李义府再次弹劾于志宁，称于志宁也是长孙无忌一党，不能让于志宁再窃居高位，同时请皇帝下旨，将长孙无忌一党在朝为官的兄弟子侄尽皆夺职，令有司逮捕下狱审讯，以免这些人狗急跳墙，谋逆造反。
皇帝皆准。
于志宁此时为尚书右仆射，站在殿中，气的浑身发抖，却已经无法辩夺，因为他也早看出来今天这金殿之上本就是个局，再多解释也不会有用的。
最终，于志宁只得冲着许敬宗李义府崔义玄等人大骂，“奸佞贼臣！”
侍卫将于志宁冠带摘去，将他拖出去，于志宁望着那御坐上的天子，忍不住骂出了声，“昏君！”