图：诗意图｜图源网络
名花倾国两相欢，常得君王带笑看。
解释春风无限恨，沉香亭北倚阑干。
——《清平调·其三》
图：诗意图｜图源网络
然而，此事却让高力士引以为辱，记恨心中。高力士不是一般的宫人太监，他从小就跟着玄宗，几次宫变，他都出谋划策，参与其中，是玄宗非常亲近的人。此后，在玄宗面前，高力士有意无意间，都会提及李白的失仪。
而在杨贵妃面前，高力士也刻意说道：“赵飞燕虽受宠，下场却不好，她跟人私通，以‘淫妃’之名留史，李翰林难道不是有意讥讽，说您宫闱不检？”杨贵妃听后，对李白也生了不满之心。玄宗曾让李白起草诏书，而起草诏书一向是中书省的工作，见玄宗有意给李白官做，杨贵妃开始从中阻扰，玄宗只得做罢。
不管是去赏花、泛舟、打猎，还是泡温泉，玄宗都让李白随侍，这在旁人看来，是无上的恩宠，但是李白却很不快乐，他进宫来，是想做将帅之才，而不是当玄宗的私人秘书，负责逗皇帝开心。
即便他在诗词中竭力奉承玄宗，让玄宗开心。他最终的目标还是能够获得要职，成为真正的治世之臣。可事实上，无论玄宗多喜欢他，他也只是和一个得宠的伶人差不多。
这也是他时常喝得酩酊大醉的原因，他写给皇帝之外的诗，透露了他真实的心境。在《秋夜独坐怀故山》中，他写下了不被赏识的孤独。玄宗出入宫，都会让他陪侍左右，然而皇帝只会夸他的新赋做得好，却看不到他文韬武略的才华，这让他有了归隐山田的念头。
入侍瑶池宴，出陪玉辇行。
夸胡新赋作，谏猎短书成。
但奉紫霄顾，非邀青史名。
庄周空说剑，墨翟耻论兵。
拙薄遂疏绝，归闲事耦耕。
——《秋夜独坐怀故山》
《月下独酌》中“花间一壶酒，独酌无相亲。举杯邀明月，对影成三人”四句，更是将自己的孤独写到极致，在深宫中，他可以喝酒聊心事的对象，竟然只有天上的明月，还有地上的花影。
李白还写了不少表意归乡的诗作，也正是这些诗作，让李白开始失去玄宗的恩宠。
在《翰林读书言怀呈集贤诸学士》中，他写自己“晨趋紫禁中，夕待金门诏。”“功成谢人间，从此一投钓。”他从早到晚都在等待玄宗的召见，言语中透露出对这种生活的厌烦，甚至有退隐的意向。
这是李白呈现给翰林院同事的闲诗，却被张垍呈现给玄宗。张垍也在翰林院任职，还是李白的上级，他很清楚李白写过什么，也知道玄宗讨厌什么，于是加油添醋，跟玄宗汇报一通。玄宗很反感有人说他不识才，孟浩然就曾因为一句“不才明主弃”，被玄宗听到，永远失去了做官的机会。
再加上高力士、杨贵妃的煽风点火，玄宗渐渐疏远了李白，不再那么频繁召见他。以至于宫中有开始有人刻意散布谣言，诋毁李白。
李白等不来召见，也听见关于自己的谣言，在焦虑之下，写了《惧谗》，前面借用四则“谗言*人”的典故，写自己被谗害的处境。在诗的最后，还将自己比作被弃长信宫，失宠于汉成帝的班婕妤。此时，孤身一人入长安的李白，内心不仅有被谗言所害忧惧，还有不能施展抱负的不甘。
二桃*三士，讵假剑如霜。
众女妒蛾眉，双花竞春芳。
魏姝信郑袖，掩袂对怀王。
一惑巧言子，朱颜成死伤。
行将泣团扇，戚戚愁人肠。
——《惧谗》
诗中不仅隐晦地说明杨贵妃就如魅惑君王的郑袖、赵飞燕姐妹，也指明唐玄宗是被女人所惑的君王。
此后，李白还用后宫女子的口吻，写了很多埋怨君王的诗。在《长信宫》中，依然自比班婕妤，埋怨玄宗，“别有欢娱处，承恩乐未穷。谁怜团扇妾，独坐怨秋风。”而《怨情》里，“但见泪痕湿，不知心恨谁。”更是因爱，生了些哀怨。
李白在宫中随侍两年，起初荣宠无比，后来遭谗受冷遇，巨大的落差，让他心生幽怨，自知不为玄宗亲近所容，索性上书还山。而玄宗读过李白写的怨妇诗，也以他“非廊庙器”之名，赐金遣还。
虽然是自辞，但李白还是哀怨，出了宫门后，望着高大而威严的朱门，看着墙壁上栩栩如生，似要飞出的鹦鹉，自嘲道：“落羽的鸟离开金銮殿，只能孤寂哀鸣，谁让你那么能说，遭人妒忌，只能回故家陇西了。”
落羽辞金殿，孤鸣咤绣衣。
能言终见弃，还向陇西飞。
——《初出金门寻王侍御不遇咏壁上鹦鹉》
公元744年，43岁的李白，落寞地离开了长安。
