驕兵必敗，政治場上也是同樣道理，但驕縱的楊憲似乎并未感到危險的降臨，此時春風得意的他的政治嗅覺已經有些遲鈍了。不過，李善長先前確實得罪過楊憲，故而楊憲才更是與之針鋒相對。

《國初事跡》記載，朱元璋曾經征選宮女，看中了一位熊姓女子。熊氏正值妙齡，哥哥是一位宣使。員外郎張來碩站出來反對，說此事不可，因為熊氏已經訂婚，許配給了參議楊希圣。然后張來碩說了這樣一句話：“若明取之，于理不妥。”這讓朱元璋非常不爽，但是，張來碩的話也有他的道理，朱元璋就從他的表達方式上挑毛病，說：“諫君不當如此！”意思是說，沒有你這樣勸諫君主的，然后讓軍士拿刀背敲碎了張來碩的牙齒，這件事暫時放下了。過了這一次風波，楊希圣肯定不敢迎娶熊氏了，但并沒有完結。

對此朱元璋大概一直有所不快，當李善長揭發(fā)參議李飲冰與楊希圣弄權不法，結果朱元璋將二人黥（qíng）面，還狠狠地說道：“奸詐百端，譎（jué）詭萬狀，宜此刑?！弊詈?，李飲冰被割乳，當場死亡；楊希圣則被割去鼻子，安置到了淮安。當時楊憲還在山西參政任上，他聞訊后趕緊到南京找朱元璋謝罪，但他心中顯然更為痛恨李善長，二人勢如水火也就不難理解了。

李善長的反攻機會很快就等來了，當時楊憲又教唆劉炳彈劾刑部侍郎左安善，罪名是其斷案不公，誣陷好人。李善長抓住時機，開始向楊憲反擊，他隨即上書指控楊“排陷大臣，放肆為奸”等事，結果引起了朱元璋的高度重視。

劉炳隨后被下獄，經過一翻拷問，劉炳便“盡吐其實”。此時，作為太史令的劉基也一齊發(fā)難，揭發(fā)楊憲的各種“奸狀及諸陰事”。墻倒眾人推，眼見楊憲得罪的人實在太多、積怨太深，朱元璋為平息眾怒，只得選擇了丟車保帥，令群臣共審楊憲等人。楊憲驕縱過頭，權欲之盛竟到了跟廖永忠等元勛大將相勾結的地步，即使保下了他，也已不堪大用，更不能放心使用。最終，朱元璋便將楊憲與劉炳等人一同處死，這是在洪武三年（1371年）七月的事情。接著被罷黜汪廣洋不但得以復起，還被進封為忠勤伯，可見朱元璋已恢復對他的高度信任。

其實對于楊憲的死因，有一種說法就是李善長和胡惟庸彈劾楊憲，說他唆使侍御史劉炳陷害汪廣洋，然后再殺了劉炳滅口。還有一個原因就是劉伯溫向朱元璋告發(fā)了楊憲的不法行為。楊憲為人處世太過于鋒芒畢露，自己又干過特務情報的工作，兩個主流的勢力都排斥他。歷史上并沒有明確記載楊憲到底是因為什么事而被殺，我們只知道他犯事被誅。雖然楊憲之死很蹊蹺，但是從他一系列的行為來看，被殺只是遲早的問題。楊憲在《明史》中并未立傳，可能是覺得他在明初政壇上不過是個曇花一現(xiàn)的人物，而且由于他的特殊職位，朱元璋父子其實也不希望這份陰私被人注意到。《明實錄》中雖保留了楊氏的相關記載，但已極為簡單化，可見朱元璋父子動了手腳。

楊憲死后，作為朱元璋鷹爪的凌說、高見賢、夏煜等人也相繼被處死。其實，這幾乎是酷吏們最普遍的下場，因為他們最容易成為替罪羊?！氨诨辔病笔且环N非常典型的帝王權術，朱元璋可謂深諳此道。楊憲死后，淮西集團失去了有力的制衡，其勢力開始大為膨脹。作為樹大根深的開國元勛，朱元璋自然不放心李善長繼續(xù)掌控中書省，于是李善長乖乖地提出了退休的請求。就這樣，兩大集團的主腦相繼離開政治舞臺，朱元璋暫時可以安生一些了。可事實并非如此。

自從楊憲被誅后，朱元璋認為胡惟庸有才干，很寵信他。胡惟庸也自覺奮進，曾以遇事小心謹慎博得朱元璋歡心，進一步獲得朱元璋的寵信。1371年，胡惟庸當上了右丞，之前的左丞汪廣洋也順理成章地被提拔為丞相，頂替了告老還鄉(xiāng)的李善長的班?？赏魪V洋作為丞相，根本提不出什么有建設性的意見和建議。所以，汪廣洋很快就被朱元璋一腳踹到廣東，由胡惟庸繼任丞相。而且胡惟庸作為獨相一直干到1377年。

胡惟庸當上丞相之后，加上自己又是李善長的人，于是開始在朝中拉幫結派，遍植黨羽，大量的拉攏淮西人加入自己的權利小集團，極力的打擊排斥異己，使得淮西幫在朝中成為第一大勢力集團。

朱元璋在決定任用胡惟庸為左丞相之前曾經詢問過劉伯溫的意見，劉伯溫認為胡惟庸此人好大喜功，獨攬專權，不建議朱元璋任用胡惟庸，但是朱元璋覺得劉伯溫對胡惟庸有偏見，最終還是決定任用胡惟庸，因此這件事情讓劉伯溫得罪了胡惟庸。所以在劉伯溫告老還鄉(xiāng)之后，胡惟庸用自己手中的權利革去了劉伯溫的歲祿。1年后，劉伯溫回京城臥病在家，朱元璋指示胡惟庸派人去他，胡惟庸特地安排了一名太醫(yī)去幫助劉伯溫治病，誰料劉伯溫服用完藥之后就去世了。這個事我們講劉伯溫的時候提及過。

隨后幾年，以胡惟庸為首的淮西朋黨集團勢力越來越大，大權在握的胡惟庸開始得意起來，有時生殺大事，根本就不報告朱元璋便執(zhí)行。呈遞給皇帝的奏章，先私自審閱，凡是對自己不利的，便扣下不上呈。一些蠅營狗茍之輩，見胡惟庸如此大權在握，紛紛給他賄送金帛、名馬、玩好之物。胡惟庸大肆收受賄賂，古玩字畫金石玉器來者不拒，賣官鬻爵，大肆侵占百姓的田產，不僅如此，在一些重大的涉及到生殺大權的案件處理上，胡惟庸經常不向朱元璋匯報，自己隨意處置，過于獨斷專權。這無疑是朱元璋不能忍的，因為這觸動了皇權。