當梅花盛開之時，玄宗便攜梅妃來到這裡，賞花吟詩，恩愛無比。後來，唐玄宗又見到了楊玉環，便為她的風韻所傾倒，因為二人同擅長音樂，很快成為了知音。唐玄宗在千方百計將玉環弄到手之後，便日日與楊妃在一起，很快就把梅妃忘卻了。梅妃擅長詩賦，一日，她寫了一首《一斛珠》，託人帶給玄宗。玄宗見詩，便想起了昔日與梅妃在一起的情景。於是，便召她入翠華西閣敘舊。不料，此事被楊貴妃探知，醋意大發，把玄宗和梅妃一番羞辱。李隆基畢竟是皇帝，怎能讓貴妃如此教訓，一怒之下，命人將楊貴妃送回孃家。
這件事在歷史上被傳得沸沸揚揚。但歷史上不論是《舊唐書》、《新唐書》，還是司馬光的《資治通鑑》，都沒有記載有梅妃這個人，其次，我們所看到的有關梅妃的書籍，其內容是從《梅妃傳》衍化而來的。而《梅妃傳》一文無作者（有人認為是唐曹鄴所著，並無實據。）抄錄者也不知作者是何人，只知他是北宋、南宋之交的人。而《梅妃傳》是最早記載梅妃其人其事的作品。其它所有關於梅妃的記載都是晚於該文，而且大多是該文的轉抄，或者增加了傳說部分。
其三，在《梅妃傳》裡有這樣幾句話，值得注意：“今世圖畫美人者，號梅妃，泛言唐明皇時人，而莫詳所自也。”其意思說，當今（宋代）仕女畫中的梅妃，人們只泛泛地說她是唐明皇時的人，而對她的身世卻不大瞭解。因此魯迅先生在《中國小說史略》中說到：“《梅妃傳》一卷亦無撰人，蓋見當時有把梅美人號梅妃者，泛言唐明皇時人。因造此傳……”。治學嚴謹的文學家鄭振鐸也否認梅妃的存在。最後，查考唐代史籍，並未發現有高力士到閩粵選美的記載；《梅妃傳》所記梅妃被貶所居之上陽東宮在東都洛陽.它與長安相距數百裡，而洛陽上陽東宮又無翠華殿西閣，何以會出現唐玄宗夜召梅妃，當被楊貴妃發覺後，又怎會有梅妃“步歸東宮”之事。
唐玄宗時期專門設了一個職業，叫作“花鳥使”，專管到民間蒐羅美女以充實後宮。唐玄宗是個風流天子，整日和楊貴妃在一起已經玩膩了，便揹著楊貴妃召幸這些女人。楊貴妃吃醋，與玄宗大吵大鬧；玄宗也生氣了，妃子竟然管起了皇帝的私生活，實在是不像話。於是，一氣之下，下令“攆回去”。楊貴妃就這樣被攆回了孃家。貴妃一走，唐玄宗突然覺得心中空落落的，很快就後悔了。當天晚上，趁著夜色，唐玄宗就派禁軍將貴妃從楊家接了回來。
經過一番折騰，二人的感情迅速升溫。不僅如此，玄宗還將楊貴妃的三個姐姐接到長安，封她們為一品夫人，准許她們隨意出入宮門。
再次出宮
天寶九年，楊貴妃又一次被遣送回了孃家。
至於楊貴妃這次被攆的原因，《舊唐書》卷五十一天寶九載，貴妃復忤旨，送歸外第。時吉溫與中貴人善，溫入奏曰：“婦人智識不遠，有忤聖情，然貴妃久承恩顧，何惜宮中一席之地，使其就戮，安忍取辱於外哉！”上即令中使張韜光賜御饌，妃附韜光泣奏曰：“妾忤聖顏，罪當萬死。衣服之外，皆聖恩所賜，無可遺留，然髮膚是父母所有。”乃引刀翦發一繚附獻。
玄宗見之驚惋，即使力士召還。《資治通鑑》中只有六個字“楊貴妃復忤旨。”楊貴妃忤的是什麼旨呢？《楊太真外傳》記載：750年，天寶九載二月的一天，楊貴妃偷偷地吹唐玄宗大哥寧王李憲的紫玉笛，被唐玄宗看見了，以忤旨又被送出宮外。貴妃出宮後，剪下一綹青絲，託中使張韜光帶給玄宗，玄宗大駭，又令高力士把她召回。
這兩種說法都不可信，因為寧王死於開元二十九年二十九年十一月（（742年1月15日））薨，天寶九年（750年），已經死了八年。楊貴妃不可能與死人有染。對於楊貴妃吃姐姐的醋的說法，也僅在《集靈臺.其二》作者張祜：虢國夫人承主恩，平明騎馬入宮門。卻嫌脂粉汙顏色，淡掃峨眉朝至尊出現，不足為據。而且，在天寶年間，楊貴妃和她的姐妹們關係一直不錯，說明唐玄宗和虢國夫人之間是清白的。
【穩定運行多年的小說app，媲美老版追書神器，老書蟲都在用的換源App，huanyuanapp.org】
這次楊貴妃被攆可能是玄宗給楊家的一個下馬威。因為楊貴妃的得寵，楊家也跟著顯赫起來。隨著地位的升高，楊家便無法無天了。楊家接受招待的規格已經超出了規定的界限；大肆收受賄賂；不僅如此，他們甚至還騎到了皇室的頭上。《新唐書》中記載：“出入宮掖，恩寵聲焰震天下。
每命婦入班，持盈公主等皆讓不敢就位，建平、信成二公主以與妃家忤，至追內封物，駙馬都尉獨孤明失官。”皇上的親妹妹在三位夫人面前只能讓座而不敢就坐；唐玄宗的女兒信成公主因為和楊家人有矛盾，竟淪落到追回內府封贈東西，如再不處理，恐怕整個江山都成了楊家的了。玄宗生氣了，楊家就是仗著有個貴妃撐腰，於是，楊貴妃再一次被攆回了家。
楊貴妃這次被送回家，是玄宗使用殺雞給猴看的策略，就是要滅滅楊氏家族的威風。這一招果真很靈，楊家人慌了神，可又不好出面求情，楊貴妃更是終日以淚洗面。因為，這一次唐玄宗並沒有急著把貴妃接回去，而且送走之後就再沒有了訊息。玄宗雖然沒有派人去接楊貴妃，但心中還是很想念的。
一個叫吉溫的人來遊說唐玄宗，正中玄宗下懷。唐玄宗立刻派人看望貴妃，還將自己的御膳分了一半給她。楊貴妃見皇帝派人來看她了，感動地淚流滿面，馬上伏地認錯，還剪下了自己的一縷頭髮，獻給玄宗。唐玄宗一看到貴妃的青絲，派高力士將楊貴妃接回了宮。
楊貴妃知道玄宗沒有她，便寢食不安，於是更為驕縱，楊家“出入禁門不問，京師長吏為之側目”。陳鴻《長恨歌傳》記載：居易歌曰姊妹弟兄皆列土，可憐光彩生門戶；遂令天下父母心，不重生男重生女。