天宝五年，公元746年春季，正月乙丑日，朝廷任命陇右节度使皇甫惟明兼任河西节度使。
李适之性情粗疏直率，李林甫曾对他说：“华山藏有金矿，开采出来可以让国家富足，皇上还不知道这件事。”过了几天，李适之趁着奏事的机会向玄宗提起此事。玄宗就此事询问李林甫，李林甫回答说：“臣早就知道这件事，但华山是陛下的本命山，蕴含着帝王之气，不宜开凿，所以臣不敢进言。”玄宗认为李林甫是真心爱护自己，而轻视李适之考虑事情不够周全，对他说：“从今以后奏事，应当先和李林甫商议，不得轻率行事。”李适之从此束手束脚，不敢再轻易谏言。李适之失宠之后，韦坚也被削夺实权，二人来往愈发密切，李林甫对他们的憎恶也更加强烈。
当初，太子李亨被册立，并非出自李林甫的意愿。李林甫担心太子日后会成为自己的祸患，一直有动摇东宫地位的想法；而韦坚又是太子妃的兄长。皇甫惟明曾经担任过忠王李亨的友伴，当时他击败吐蕃，入朝献上捷报，看到李林甫独揽大权，心中颇为不平。他趁觐见玄宗的机会，委婉劝说玄宗罢黜李林甫。李林甫得知此事后，派杨慎矜暗中窥伺他的一举一动。恰逢正月十五元宵夜，太子出宫游玩，与韦坚会面，韦坚又和皇甫惟明在景龙观道士的房里相聚。杨慎矜揭发了这件事，认为韦坚身为皇亲国戚，不应该与边将过分亲近。李林甫趁机诬陷韦坚与皇甫惟明勾结密谋，想要共同拥立太子。韦坚、皇甫惟明被逮捕下狱，李林甫派杨慎矜与御史中丞王鉷、京兆府法曹参军吉温一同审讯他们。玄宗也怀疑韦坚与皇甫惟明有谋逆之心，但没有确凿的证据。癸酉日，玄宗颁布制书，斥责韦坚钻营求官、欲望不止，将他贬为缙云太守；斥责皇甫惟明离间君臣关系，将他贬为播川太守；还另外颁布制书，告诫文武百官。
朝廷任命王忠嗣为河西、陇右节度使，同时掌管朔方、河东节度使的事务。王忠嗣当初在朔方、河东任职时，每次与胡人贸易，都抬高马匹的价格，各族胡人听说后，争相把马匹卖给唐朝，王忠嗣全部买下。从此胡人的马匹日渐减少，唐朝的军队却日益壮大。等到调任陇右、河西节度使后，他又请求调拨朔方、河东的九千匹马充实军备，所辖军队的实力也随之增强。王忠嗣手握四枚节度使的符节，掌控着万里疆域，天下的精锐部队和军事重镇，都在他的掌握之中。他率军与吐蕃在青海、积石交战，都大获全胜；又在墨离军讨伐吐谷浑，将其部众全部俘获后班师。
夏季，四月癸未日，朝廷册封奚族酋长娑固为昭信王，册封契丹族酋长楷洛为恭仁王。己亥日，朝廷颁布制书：“从今以后，每年四季的第一个月，都要挑选吉日祭祀天地、九宫贵神。”
韦坚等人被贬官之后，左相李适之十分恐惧，主动请求调任清闲的职位。庚寅日，朝廷任命李适之为太子少保，免去他的宰相职务。李适之的儿子、卫尉少卿李霅曾经准备了丰盛的宴席邀请宾客，宾客们都畏惧李林甫的权势，一整天都没有一个人敢赴宴。
朝廷任命门下侍郎、崇玄馆大学士陈希烈为同平章事。陈希烈是宋州人，凭借讲解《老子》《庄子》得以晋升，专门用神仙符瑞之说讨好玄宗。李林甫因为陈希烈受到玄宗的喜爱，而且性情柔顺、善于谄媚、容易控制，所以引荐他担任宰相；所有政务都由李林甫一人决断，陈希烈只会随口附和。按照旧例，宰相要到午后六刻才能离开朝堂。李林甫上奏说，如今天下太平无事，请求在巳时就返回府第，军政要务都在自己家中裁决；主书官抱着已经拟定好的案卷到陈希烈那里，让他签字署名而已。
五月乙亥日，朝廷任命剑南节度使章仇兼琼为户部尚书；这是杨贵妃姐妹引荐的结果。
秋季，七月丙辰日，朝廷下敕令：“被流放和贬谪的官员，大多在途中逗留不前。从今以后，被贬谪的官员每天必须赶路十驿以上。”从此以后，被流放和贬谪的人大多不能保全性命。
杨贵妃正受到玄宗的极度宠幸，每次骑马时，都由高力士为她牵马执鞭，专门为贵妃院织造刺绣衣物的工匠就有七百人，朝廷内外的官员都争相进献各种器用服饰和奇珍异宝。岭南经略使张九章、广陵长史王翼，因为进献的贡品精美绝伦，张九章被破格晋升为三品官，王翼被征召入朝担任户部侍郎；天下人纷纷效仿，形成奢靡之风。民间流传着歌谣说：“生男勿喜女勿悲，君今看女作门楣。”杨贵妃想要吃新鲜的荔枝，朝廷每年都命令岭南通过驿站快马加鞭送往长安，等荔枝送到时，颜色和味道都还没有改变。到这时，杨贵妃因为生性嫉妒、蛮横傲慢、不遵礼法，惹得玄宗大怒，下令将她送回堂兄杨銛的府第。当天，玄宗闷闷不乐，到了中午，还没有吃饭。身边的侍从一举一动都不合他的心意，动辄遭到鞭打。高力士想要试探玄宗的心意，请求把贵妃院中所有的积蓄财物都送到杨銛府第，总共装了一百多车；玄宗还亲自分出自己的御膳赏赐给杨贵妃。到了夜晚，高力士跪请玄宗接杨贵妃回宫，于是打开宫门让她入宫。从此以后，杨贵妃得到的恩宠越发深厚，后宫中的其他嫔妃再也没有机会得到玄宗的宠幸。
将作少匠韦兰、兵部员外郎韦芝为他们的兄长韦坚鸣冤，并且引太子作证；玄宗因此更加愤怒。太子十分恐惧，上表请求与太子妃韦氏离婚，乞求朝廷不要因为亲属关系而废弃国法。五月丙子日，朝廷再次将韦坚贬为江夏别驾，韦兰、韦芝都被贬到岭南。不过玄宗向来知道太子孝顺谨慎，所以没有将怒气牵连到他身上。李林甫趁机进言说韦坚与李适之等人结党营私，几天后，韦坚被长期流放临封，李适之被贬为宜春太守，太常少卿韦斌被贬为巴陵太守，嗣薛王李琄被贬为夷陵别驾，睢阳太守裴宽被贬为安陆别驾，河南尹李齐物被贬为竟陵太守，总共因为韦坚的亲属党羽而被牵连流放、贬官的有几十人。韦斌是韦安石的儿子。李琄是李业的儿子，也是韦坚的外甥。李琄的母亲也被下令跟随李琄一起到贬所上任。
赞善大夫杜有邻，他的女儿是太子的良娣，这位良娣的姐姐是左骁卫兵曹柳积的妻子。柳积性情狂放粗疏，一心追求功名，喜欢结交豪杰之士。淄川太守裴敦复把他推荐给北海太守李邕，李邕与他结为好友。柳积来到京城后，与着作郎王曾等人交往密切，这些人都是当时的名士。
柳积与妻子的娘家关系不和睦，想要陷害他们，就编造流言蜚语，诬告杜有邻妄谈图谶，勾结东宫太子，指责讥讽玄宗。李林甫下令京兆府士曹参军吉温与御史一同审讯此案，结果查明这是柳积一手策划的阴谋。吉温又让柳积牵连攀咬王曾等人，将他们都逮捕入狱。十二月甲戌日，杜有邻、柳积以及王曾等人都被杖打而死，尸体堆积在大理寺的牢狱里，他们的妻子儿女都被流放到偏远地区；朝廷内外的人都对此感到震惊和恐惧。嗣虢王李巨被贬为义阳司马。李巨是李邕的儿子。朝廷另外派遣监察御史罗希奭前往北海查办李邕，太子也将杜良娣废为庶人。十二月乙亥日，邺郡太守王琚因为贪赃枉法，被贬为江华司马。王琚生性豪放奢侈，他和李邕都自认为是朝廷的元老重臣，长期在外地任职，心中郁郁不得志，李林甫厌恶他们恃才傲物，所以趁机借故将他们除掉。
天宝六年，公元747年春季，正月辛巳日，李邕、裴敦复都被杖打而死。李邕才华出众，卢藏用曾经对他说：“你就像干将、莫邪宝剑一样，锐不可当，很难有人能和你匹敌，但终究担心你会锋芒太露而遭受折损。”李邕没有听从他的劝告。
李林甫还不肯罢休，又上奏朝廷，派遣御史分别前往贬所，赐皇甫惟明、韦坚兄弟等人自尽。罗希奭从青州出发前往岭南，所到之处，将被贬谪的官员全部处死，沿途的郡县官员都惶恐不安。当罗希奭的驱马文书送到宜春时，李适之又惧又忧，服毒自杀。抵达江华时，王琚服毒自尽却没有死，听说罗希奭已经到了，就上吊身亡。罗希奭又特意绕道经过安陆，想要恐吓并杀死裴宽，裴宽对着罗希奭磕头求饶，乞求活命，罗希奭没有留宿，直接离开了，裴宽才得以幸免。李适之的儿子李适前往东京迎接父亲的灵柩，李林甫派人诬告他，最终他在河南府被杖打致死。给事中房琯因为与李适之交好而受到牵连，被贬为宜春太守。
李林甫对韦坚恨之入骨，派遣使者沿着黄河以及江淮地区的州县搜寻韦坚的罪名，所到之处逮捕负责漕运的官吏和船夫，监狱都被挤满了；还征收追缴拖欠的赋税，牵连到邻里街坊，很多人都在官府中被折磨得赤身露体而死，这场迫害一直持续到李林甫去世才停止。
丁亥日，玄宗祭祀太庙；戊子日，在南郊合祭天地，大赦天下。颁布制书，免除百姓当年的田租；又下令废除绞刑、斩刑的条款。玄宗贪图爱惜生灵的美名，所以下令应当处以绞刑、斩刑的罪犯，全部改为重杖责打后流放到岭南，但实际上有关部门往往在杖打时就将罪犯打死。又下令天下百姓为改嫁的母亲服丧三年。
玄宗想要广泛搜罗天下的贤才，下令只要精通一门技艺以上的人，都前往京城应试。李林甫担心来自民间的读书人在对策时直言揭露自己的奸恶行径，就向玄宗建议说：“前来应试的举人大多出身卑贱，愚昧无知，恐怕会用粗俗的言语玷污圣上的听闻。”于是玄宗下令让各郡县长官精心挑选和考核，确实才华出众、远超常人的人，才列出名单送到尚书省，委托尚书省进行复试，由御史中丞监督，选拔名实相符的人上奏朝廷。前来应试的人到齐之后，都被要求考试诗、赋、论，最终没有一个人考中，李林甫于是上表祝贺玄宗，声称民间已经没有遗漏的贤才。
戊寅日，朝廷任命范阳、平卢节度使安禄山兼任御史大夫。
安禄山身材肥胖，肚子下垂超过膝盖，曾经自称体重有三百斤。他外表看起来憨厚老实，内心却十分狡猾奸诈。他常常派自己的部将刘骆谷留在京城，刺探朝廷的动向，无论大小事情都向他禀报。有时需要向朝廷呈递奏表，刘骆谷就会替他代写并直接呈送。安禄山每年都向朝廷进献俘虏、各种牲畜、奇珍异兽、珠宝玩物，运送这些贡品的队伍在路上络绎不绝，沿途的郡县都因为转运这些物资而疲惫不堪。
安禄山在玄宗面前应答敏捷，还夹杂着诙谐幽默的话语。玄宗曾经开玩笑地指着他的肚子说：“你这个胡人肚子里装的是什么东西，竟然这么大？”安禄山回答说：“没有别的东西，只有一颗对陛下的赤胆忠心！”玄宗听后十分高兴。玄宗又曾经让他拜见太子，安禄山却不肯下拜。身边的人催促他下拜，安禄山拱手站立说：“臣是胡人，不熟悉朝廷的礼仪规矩，不知道太子是什么官职？”玄宗说：“这是皇位的继承人，朕去世之后，他就会代替朕做你的君主。”安禄山说：“臣愚昧无知，以前只知道有陛下一人，不知道还有皇位继承人。”在不得已的情况下，才向太子下拜。玄宗认为他说的都是真话，因而越发宠爱他。玄宗曾经在勤政楼设宴，文武百官都坐在楼下，唯独为安禄山在御座东边的隔间设置了金鸡障，摆放床榻让他坐在前面，还下令卷起帘子，以此显示对他的恩宠。又命令杨銛、杨锜以及杨贵妃的三个姐姐都和安禄山结拜为兄弟姐妹。安禄山得以随意出入皇宫，于是趁机请求做杨贵妃的养子。玄宗和杨贵妃并排坐着，安禄山却先拜见杨贵妃。玄宗问他原因，安禄山回答说：“我们胡人的习俗是先敬母亲，后敬父亲。”玄宗听后十分满意。
李林甫因为王忠嗣的功劳和名声越来越大，担心他会入朝担任宰相，心中十分忌惮。安禄山暗中积蓄谋反的野心，借口抵御敌寇，修筑雄武城，大量储存兵器，又请求王忠嗣率领部众前来助工，想要趁机扣留他的军队。王忠嗣提前前往雄武城，没有见到安禄山就返回了，还多次向玄宗进言说安禄山必定会谋反；李林甫因此更加憎恶王忠嗣。夏季，四月，王忠嗣坚决推辞兼任的河东、朔方节度使职务；玄宗答应了他的请求。
冬季，十月己酉日，玄宗前往骊山温泉，将温泉宫改名为华清宫。
河西、陇右节度使王忠嗣任命部将哥舒翰为大斗副使，任命李光弼为河西兵马使，兼任赤水军使。哥舒翰的祖辈原本是突骑施的别部酋长，李光弼是契丹王李楷洛的儿子，二人都因为勇猛善战、富有谋略而受到王忠嗣的器重。王忠嗣派哥舒翰攻打吐蕃，有一位同级的将领担任他的副手，此人傲慢无礼，不听从指挥，哥舒翰将他打死，军中将士都吓得两腿发抖；哥舒翰累积功劳，升任陇右节度副使。每年积石军的麦子成熟时，吐蕃军队都会前来抢夺，唐朝守军没有人能抵挡，边境的百姓称这里是“吐蕃麦庄”。哥舒翰提前在麦田旁边埋伏下军队，等吐蕃军队到达后，切断他们的退路，然后前后夹击，吐蕃军队没有一个人能够逃脱，从此以后再也不敢前来抢麦。