秦國夫人被他說得倒也啞口無言，站在楊家的角度上，權勢越大固然是越穩固，多年的苦心經營不就是為了楊家能有今日麼？雖然楊國忠的作法有些偏激不妥，但畢竟他也是為了楊家好。而且除了他，楊家又有誰能夠立足於朝堂之上？這麼想著，秦國夫人也就懶得說了，睜一隻眼閉一隻眼隨他去了。
人的變化有時候讓人吃驚。短短一兩個月，楊國忠從李林甫的陰影中走了出來便成為了另外一個人。變得跋扈驕橫而且不可一世。
在大肆收羅黨羽擴充自己的勢力之時，楊國忠也開始對他的敵人進行打壓。一直以來楊國忠和安祿山之間便矛盾重重，以前有李林甫在，兩人之間還算有人壓制各自剋制，現在楊國忠揚眉吐氣，豈會再看安祿山的臉色。楊國忠做的第一件事便是大幅削減范陽平盧河西三鎮兵馬的軍費。原先在李林甫手中決策的各種物資的供給糧餉的額外供給也統統一刀砍掉。
楊國忠上奏玄宗解釋這些舉措時說：“東北邊鎮屯兵過多，已成朝廷重負。安祿山依舊年年要求擴大兵額，這根本是不合理的要求，照這樣下去，朝廷其他地方也不用養兵了，都給安祿山消耗完了。”
安祿山得知楊國忠說的話之後恨得牙根癢癢，跟讓他怒火中燒的是，他得知楊國忠將從他頭上剋扣的軍餉補給盡數給了劍南隴右節度使王源。厚此薄彼，打壓自己的架勢不言自明。安祿山為此事上奏朝廷，和楊國忠進行爭吵。玄宗夾在當中左右為難，最後各打二十大板，將軍餉和物資部分恢復供給，兩人這才看著玄宗的面子上平息了關於此事的爭吵。
然而，安祿山心中已經很清楚了，有楊國忠在一天，自己便別想順風順水的發展實力。而且楊國忠曾經在玄宗面前說過自己兵馬過多什麼胡人不可信之類的話，暗指自己圖謀不軌。若是自己沒有這個心思倒也罷了，偏偏這件事正是自己心心念念所想的事情，所以這便讓安祿山坐臥難安了。楊國忠在陛下身邊，隨時可以吹耳邊風，總有一天陛下會信了他的話，那麼自己很有可能隨時會在不知情的情況下被陛下召入長安殺掉。雖然自己的的準備還不充分，一切尚未達到自己想達到的理想狀態，兵馬數量，兵器物資的囤積還不夠多，但安祿山知道，自己恐怕不能再等太多的時間了。
三月，楊國忠終於發動了針對李林甫的大清算。正如王源所預料的那樣，對李林甫的清算不是會不會的問題，而是何時開始的問題。只是恐怕王源也沒想到的是，楊國忠居然僅僅隔了三個月時間便已經按耐不住，對李林甫的過往進行的大清算。
楊國忠命朝中官員蒐羅揭發了李林甫以前做過的各種事情，從中選取了十五件事情加以大肆宣揚，稱其為李林甫的十五宗大罪。將李林甫說成是結黨營私，打擊異己，誅殺忠誠，任用私人，玩弄權謀、矇蔽聖聽、驕橫跋扈等等罪行的千古第一奸相。翻出韋堅皇甫惟明的案子來翻案。同時將李適之李邕一案，西北石堡城之戰中指使董延光不遵王忠嗣之令架空王忠嗣的事情也都翻了出來。而且成功的讓李林甫的女婿諫議大夫楊齊宣出來作證，說李林甫在家中多出對陛下不敬之語，常常自稱若我是陛下如何如何這樣的話來，活脫脫將李林甫又安上了一個意圖謀逆的罪名。
正所謂樹倒猢猻散，牆倒眾人推。眾多官員在這種情形下也紛紛的揭發李林甫的罪行，歷數李林甫做過的大逆不道之事。有的人說李林甫甚至私刻玉璽，私造龍袍，半夜三更在家裡穿著過皇帝的癮。有的說李林甫一直一來都覬覦貴妃的美色，家裡養著一名小妾名字就叫做楊玉環。晚上摟著睡的時候還叫她愛妃云云。
總而言之，在這種大清算之下，人性的醜惡面暴露無遺，各種匪夷所思令人啼笑皆非的捏造之言也堂而皇之的登上了案卷，成為了李林甫的各種罪狀。
玄宗開始是不太