。他还豢养了一百多名家僮，这些人都骁勇善战，一个人可以抵挡一百个人。安禄山又畜养了几万匹战马，大量聚集兵器军械，派遣西域的胡商到各道去贩卖货物，每年运送来的珍贵财物多达几百万。他还私自制作了数以百万计的绯色、紫色官袍和鱼袋。安禄山把高尚、严庄、张通儒以及将军孙孝哲当作心腹，把史思明、安守忠、李归仁、蔡希德、牛廷玠、向润容、李庭望、崔乾佑、尹子奇、何千年、武令珣、能元皓、田承嗣、田乾真、阿史那承庆当作爪牙。高尚是雍奴人，本来名叫高不危，很有文才学识，早年在河朔一带游历，因贫困而不得志，常常感叹说：“我高不危就算是干一番大事业而死，也怎能去啃草根活命呢！”安禄山把他召到幕府里，让他自由出入自己的卧室。高尚负责掌管奏章文书，严庄负责管理账簿文书。张通儒是张万岁的儿子；孙孝哲出身契丹族。田承嗣家世代担任卢龙镇的小军官，安禄山任命他为前锋兵马使，他治军严整。有一次下大雪，安禄山巡视各个军营，来到田承嗣的军营时，里面静悄悄的，好像空无一人，进去检阅士兵，却没有一个人缺席，安禄山因此十分器重他。
夏季四月壬午日，剑南节度使鲜于仲通率军讨伐南诏蛮族，在泸水南岸遭遇惨败。当时鲜于仲通率领八万大军，兵分两路从戎州、巂州出发，抵达曲州、靖州。南诏王阁罗凤派遣使者前来谢罪，请求归还掳掠的人口和财物，修复云南城后就撤军离开，还说：“现在吐蕃的大军逼近边境，如果您不答应我的请求，我就要归附吐蕃，云南就不再是唐朝的领土了。”鲜于仲通不答应，还囚禁了南诏的使者。他率军进军到西洱河，与阁罗凤交战，结果唐军大败，六万士兵战死，鲜于仲通仅仅保住了自己的性命。杨国忠隐瞒了鲜于仲通战败的实情，反而向朝廷陈述他的战功。
阁罗凤收集唐军阵亡士兵的尸体，堆成一座高大的京观，然后向北臣服于吐蕃。蛮族语言里称弟弟为“钟”，吐蕃册封阁罗凤为“赞普钟”，封他为东帝，还赐给他金印。阁罗凤在南诏国的城门边刻下石碑，表明自己是迫不得已才背叛唐朝的，并且说：“我南诏世世代代侍奉唐朝，接受唐朝的封赏，后世如果有机会再归附唐朝，应当指着这座石碑告诉唐朝的使者，让他们知道我背叛唐朝并非出自本心。”玄宗下令大规模招募两京以及黄河南北地区的士兵去攻打南诏；人们听说云南一带流行瘴气瘟疫，还没开战士兵就会死掉十分之八九，都不肯应募参军。杨国忠派遣御史分赴各道抓捕壮丁，把他们用枷锁拴在一起押送到军营。按照以往的制度，百姓立有军功的可以免除兵役，当时朝廷调遣的士兵太多，杨国忠就上奏请求优先征调那些有高等级功勋的人。于是被征发的人都满心忧愁怨恨，父母妻子儿女来送别他们，哭声在各地响彻原野。
高仙芝俘虏石国国王后，石国的王子逃到西域各族胡人那里，把高仙芝用欺诈手段诱骗石国、贪婪残暴的行径全都告诉了他们。各族胡人都很愤怒，暗中联合大食国，打算一同攻打唐朝的安西四镇。高仙芝得知这个消息后，率领三万蕃、汉联军前去攻打大食，大军深入大食境内七百多里，抵达怛罗斯城时，与大食军队遭遇。两军对峙了五天，葛罗禄部落的士兵突然反叛，和大食军队一起夹击唐军，高仙芝大败，士兵几乎全部阵亡，只剩下几千人。右威卫将军李嗣业劝说高仙芝连夜逃走，逃亡的道路狭窄难行，拔汗那部落的士兵和牲畜堵塞了道路；李嗣业走在前面开路，挥舞着大棍击打，人马都被打死，高仙芝才得以通过。
唐军将士相互失散，别将汧阳人段秀实听到李嗣业的呵斥声，大骂道：“躲避敌人率先逃跑，是胆小怯懦的表现；保全自己抛弃士兵，是不仁不义的行径。你侥幸得以脱险，难道就不感到羞愧吗！”李嗣业握住他的手向他道歉，然后留下来抵御追兵，收拢溃散的士兵，两人才得以一同逃脱。回到安西后，李嗣业向高仙芝举荐段秀实，任命他兼任都知兵马使，担任自己的判官。
八月丙辰日，武器库发生火灾，烧毁了三十七万件兵器。
安禄山率领范阳、平卢、河东三镇的六万士兵去讨伐契丹，派两千名奚族骑兵担任向导，军队经过平卢城一千多里，抵达土护真水时，遭遇了大雨。安禄山率领军队昼夜兼程三百多里，赶到契丹的牙帐，契丹人十分惊恐。当时大雨下了很久，弓箭和弩机上的筋胶都因受潮而松弛失效，大将何思德对安禄山说：“我们的军队虽然人数众多，但长途奔袭已经疲惫不堪，实在不能再作战了，不如按兵不动，休整军队来威慑他们，不出三天，敌人就一定会投降。”安禄山听后大怒，想要杀掉他，何思德请求让自己担任先锋，战死沙场。何思德的相貌和安禄山很像，契丹士兵争相攻打他，把他杀死了，还以为已经杀了安禄山，士气顿时倍增。奚族士兵又反叛了，和契丹人联合起来，两面夹击唐军，唐军几乎全军覆没。契丹人射箭射中了安禄山的马鞍，折断了他的帽簪，他还弄丢了鞋子，只和手下的二十名骑兵逃走；恰逢夜幕降临，追击的骑兵放松了警惕，安禄山才得以逃进师州城，他把战败的罪责推到左贤王哥解、河东兵马使鱼承仙身上，将他们斩首。