这时高力士亦随侍在玉环身旁，他见了这般情景，心中痛恨不已，便对玉环说：“前日李白在沉香亭中作《清平调》，在词中叙及娘娘的地方颇多，老奴以为娘娘定会恨他入骨，绝不再提这首曲子呢，没想到您竟然唱得这么开心，这实在是大出老奴意料！”
“高内监此话从何说起呢？”杨玉环疑惑地问。
“娘娘您竟全然不知？我们都知道娘娘您是风华绝代的佳人，但那李白天生狂傲，他认为您并不能称得上绝世佳人，他把您和汉宫中的赵飞燕相比，他是认为您……您……”高力士故意装做开不了口的忸怩不安的样子。
“他说我如何？你倒是讲啊！”杨玉环急切地问。
“娘娘，小的实在难以启齿，如果娘娘您一定要我说，那如有什么冒犯之处，还请娘娘海涵。”
“你但说无妨！我不会怪你的。”
“他暗示您是太……太臃肿、肥胖了！”
杨玉环即的脸颊真如盛开的芙蓉般娇艳，俏丽而端庄。虽说隋唐人欣赏的美是华贵健康的类型，但也有分寸，雍容之美与肥胖终归有别，所以杨玉环听他这么一说，顿时火冒三丈。这时园中还有人在哼唱着：“……云雨巫山枉断肠，借问汉宫谁得似？可怜飞燕倚新妆……”
“你们全都给我住口！以后谁也不许再唱这首曲子！”杨玉环脸孔涨得通红，恨恨地说着。
而李白本人觉得得到了玄宗的赏识，还有权倾朝野的高力士为他脱靴，便更加将他的豪放不羁、无所顾忌的性格在朝廷中展露无遗。渐渐地，他开始借诗讽喻起宫中的人和事，如他作了一首《乌栖曲》来讽谏玄宗和杨玉环夜夜笙歌：
姑苏台上乌栖时，吴王宫里醉西施。吴歌楚舞欢未毕，青山欲衔半边日。银箭金壶漏水多，起看秋月坠江波。东方浙高奈乐何。
此外，李白还作诗讽喻杨玉环得宠后，整个杨家都一人得道鸡犬升天的政治局面。如《上元夫人》便借助诸多神话人物来暗写杨家为巩固地位以联姻为手段的政治交易：
上元谁夫人？偏得王母娇。嵯峨三角髻，馀发散垂腰。裘披青毛锦，身着赤霜袍。手提嬴女儿，闲与凤吹箫。眉语两自笑，忽然随风飘。
这些诗也让杨玉环不满，于是常在玄宗面前数说李白的种种不是，幸好玄宗颇富爱才之心。但据说玄宗曾有三次要派给李白一个官位，都被杨玉环和高力士给阻拦了，于是李白的才华就这样永远地被埋没了。
李白与杨玉环关系就此断了，从之前的偶像与粉丝，变成了仇人。
但李白自恃才情甚高、器识兼茂，他当初被召进长安，原是抱着大鹏展翅的志向，但他并未获得任何施展大志的机会，即使获得皇上赏识，也不过是被用来作为宴乐取悦的工具罢了。在高力士向玄宗说了针对李白的谗言之后，李白感念君恩，还曾表明自己的志向，希望能够功成而后身退。但他发现针对自己的谗言诽谤越来越多，同时君恩日衰，李白的处境越来越尴尬，他觉得自己大展宏图的梦想逐渐破碎了。
李白一气之下，又写了一首名诗：
烈士击玉壶，壮心惜暮年。三杯拂剑舞秋月，忽然高咏涕泗涟。凤凰初下紫泥诏，谒帝称觞登御筵。揄扬九重万乘主，谑浪赤墀青琐贤。朝天数换飞龙马，敕赐珊瑚白玉鞭。世人不识东方朔，大隐金门是谪仙。西施宜笑复宜嚬，丑女效之徒累身。君王虽爱蛾眉好，无奈宫中妒杀人！——《玉壶吟》
从这一时期的诗作可以看出，此时的李白既畏惧谗言，又憎恨屡谏谗言的人，同时对玄宗也是怨念和期盼交杂：
玉阶生白露，夜久侵罗袜。却下水晶帘，玲珑望秋月。——《玉阶怨》
曾有后人评价李白的《玉阶怨》，无一“怨”字，却饱含幽怨之意。的确，虽然此诗表面是写宫人望幸，但此时此刻的李白，何来的闲心描摹宫人望幸，不过是借此抒发自己的不幸罢了。他本可由此一帆风顺，做起大官来，却因得罪了高力士，而落得只能借酒浇愁，这位天才的心情是多么苦闷啊！
奸人屡谏谗言，令李白无法在玄宗面前重获赏识，同时，李白的狂傲不驯也往往不能获得翰林院同僚们的谅解，他们对李白的放荡行径不断地加以指摘和讥讽。而李白“安能摧眉折腰事权贵，使我不得开心颜”的高傲气节也使他得罪了朝廷中人，他们几乎集体处处抵制他，这使得李白万分苦闷，而在这陌生的朝廷中，他能向谁倾诉他心中的郁闷不平呢？于是李白只好日日把自己沉溺在酒乐声色中。
（本章完，下一章：狂人李白（下））