然而從另一些記載來看，拿楊玉環與趙飛燕作比較，似乎並不是什麼能夠觸怒楊玉環的事情。因為首先拿她們相比的人正是李隆基。他曾經指著《漢成帝內傳》中關於趙飛燕“身輕欲不勝風”的內容笑話豐滿的楊貴妃：“爾則任風吹多少。”——因此，李白的被貶謫究竟與楊貴妃有多大關聯，真實情況實在還有待商榷。
隨著楊玉環在玄宗心目中占據絕對上風，楊氏家族也正式開始了烈焰熏天的權貴生涯。
天寶七載，楊貴妃的堂哥楊釗升任禦史大夫、京兆尹，賜名“國忠”。十月，貴妃的三個姐姐分別被封為“韓國夫人”、“虢國夫人”、“秦國夫人”，這三位國夫人每月額外得錢十萬為脂粉之資。
天寶十一年十一月，隨著李林甫的去世，首相之職落到了楊國忠的頭上，次年他又兼司空之職。
這時的楊家，已經富貴到了令路人側目的地步。
除了首相和三位國夫人之外，楊玉環的父親楊玄琰被追封為太尉、齊國公；母親封梁國夫人；叔父楊玄□任光祿卿、工部尚書；堂兄楊銛任鴻臚卿；堂兄楊錡任禦史，尚武惠妃幼女（在女兒中排行二十六）的太華公主；堂弟楊鑒任秘書少監，尚承榮郡主；楊國忠長子楊暄任銀青光祿大夫、太常卿、戶部侍郎，尚延和郡主；楊國忠幼子楊炪任鴻臚卿，尚玄宗杜美人所生的第二十五女萬春公主；韓國夫人的外孫女崔氏嫁給了太子李亨的長子李豫（未來的代宗崔貴妃）；虢國夫人的兒子裴徽做了太子李亨的女婿，其妻後封延光公主；虢國夫人的女兒則嫁給了玄宗大哥“讓帝”李憲的兒子；秦國夫人的大外孫柳鈞尚長清縣主，小外孫柳潭則和表哥裴徽一樣當了李亨的女婿，其妻後封和政公主。
楊家成了李家親上加親、貨真價實的皇親國戚。韓國、虢國、秦國三夫人與楊銛、楊錡五家宅第相連，被稱為“楊氏五宅”。
心滿意足的老皇帝卻並不覺得自己給予楊家的財富有多麼了不起，他認為楊貴妃才是真正的無價之寶，還對身邊的人說：“朕得貴妃，得如至寶”，還作歌《得寶子》以誌心意。這時的玄宗與一個尋常的癡迷男子實在看不出什麼區別來。
然而唐玄宗和楊貴妃畢竟不是尋常的夫妻，他們擁有王朝頂級的富貴權柄，他們的一舉一動都牽扯著王朝最敏感的神經。
與王皇後、武惠妃相比，楊玉環還算不得愛幹預政事，她更像一個享樂主義者，像所有被寵壞了的女人那樣喜好玩樂、偏幫娘家。然而她的問題也正在於此。
楊氏族人在貴妃專寵之後的表現，基本就是完全的暴發戶行徑，所作所為可謂是目中無人，對唐玄宗的天下，隻有破壞沒有建設。
為了表示對楊貴妃的寵愛，玄宗不但與她形影不離，而且將王朝所有的財富都毫不吝惜地用在她和她的家族身上。皇宮中專為貴妃織錦刺繡製衣的技工多達七百人，為她製作玩器的也有數百人。凡是進獻禮物使貴妃滿意的官員都能夠得到提拔。至於楊氏五宅更是窮奢極欲，他們的府第奢華無比，若是看見有誰的宅院比自己宏偉的，他們就不惜將新造的屋子推倒重建。
天寶十年（751）元宵佳節，楊氏五宅聯袂出遊，在西市與廣寧公主的隊伍爭道。混亂之中，楊氏家奴揮鞭誤及長寧公主的衣裙，致使公主墜馬受傷，駙馬程昌裔趕上去扶公主，也挨了幾鞭。長寧公主哭著向玄宗訴說，玄宗盡管大怒，卻隻不過是處死楊氏家奴一人而已，反倒把程昌裔的官職都給免了——也是啊，長寧公主隻是一個公主，而且生母也不得寵，反倒是楊家娶了兩個公主，還是玄宗最寵愛的，算起來長寧公主哪能落得了好去。
此事傳揚開去，楊氏頓時聲威大震，長安城裏民謠四起：“生女勿悲酸，生男勿喜歡”，“男不封侯女做妃，君看女卻為門楣”。世人都對楊貴妃帶給家族的榮寵羨慕不已。
然而就在玄宗對楊貴妃家族寵愛備至的同時，他仍然免不了老毛病重犯，對自己的新任繼承人太子李亨百般提防。
天寶年間的首相之職，有一多半的時間是由李林甫擔任的。李林甫曾經擺明車馬支持壽王李瑁為太子，因此他很清楚自己與新太子李亨之間是永遠也搞不好關係的。為了權力和平安富貴，他使盡心機要將李亨拉下馬來。
他首先盯上了李亨的嫡妃韋氏。韋妃的母親與李林甫的妻子本是表姐妹，但是親戚關係敵不過權力之爭，為了陷害李亨，李林甫向玄宗進讒，說韋妃之兄韋堅與將領皇甫惟明私宴，密謀要讓太子篡位。玄宗大怒，盡管查無實據，他仍然將兩人貶出朝廷。
李亨無奈之下，隻得向父親討饒，請求與自己的嫡妃離異。
然而李亨的隱忍沒有用，李林甫又出了一個新花樣，誣告太子妾杜良娣的父親杜有鄰謀反。毫無反抗之力的李亨隻得又與杜良娣離婚。
玄宗對兒子的表態還是很滿意的，對他恢複了信任。李亨終於保全了身家性命。
天寶十一年，楊國忠取代李林甫成為唐王朝首相。楊國忠一向跟李林甫有仇，太子李亨又與楊家結了兒女親家，照說楊國忠應該跟李亨關係很好才是。但是事情剛好相反。於是楊家的結局可想而知。
除了與太子關係不好，楊國忠和另外一個關鍵人物的關係也非常惡劣。這個人就是安祿山。
安祿山生於703年正月初一，其父是個康姓胡人。“安”是他繼父之姓，他對自己生父究竟如何並不清楚，隻知道母親為突厥巫師，因此他是個“雜胡”。