袁绍对于夫罗去而复归，很是欢迎，既往不咎，供给粮食、甲具，非常大度。上两次公孙瓒入于冀州，冀州郡县都有投奔者，自上次袁绍在修县斩杀邹丹、大败公孙瓒后，各郡县见公孙瓒无能为也，皆服从袁绍，不敢背叛。因此袁绍这次北上，各郡县供应粮草甚勤，一路顺畅，一日可行七八十里，十余日已至冀幽边界。乌丸、鲜卑等亦来会。
乌桓领兵者乃楼烦王难楼，三十多岁，身材甚是雄壮，声如洪钟，气势不凡。
所谓三郡乌桓，实际上是四部，上谷难楼，自称楼烦王；辽西丘力居，自称乌桓王；辽东苏朴延，自称峭王；右北平乌延，自称汗鲁王。其中以丘力居为雄，威慑其余三部。丘力居曾与张纯造反，与公孙瓒结仇，幽州牧刘虞到任后，采取招抚政策，许诺通商，不禁铁器往来，丘力居遂名义投降。丘力居今年刚刚病死，临终前以其子楼班年幼，指定侄子蹋顿执政。蹋顿有勇力，多计策，三部乌桓均表示认可。但蹋顿毕竟年轻，威信未孚，控制力不如丘力居，故难楼不经蹋顿批准，便率其众赴袁绍之邀。
袁绍与难楼把酒言欢，当场表任难楼为乌桓大单于。难楼大喜，拍其胸做鼓声，对袁绍道：“有我精骑在，必破公孙瓒，袁公可放宽心。”
鲜卑亦为袁绍重利招诱，步度根和轲比能均率其众来会。此前鲜卑檀石槐北拒丁零、东却夫余、西击乌孙、尽据匈奴故地，东西万四千余里，南北七千余里，形成一个比汉朝疆域还辽阔的大帝国。公元177年，朝廷派臧洪之父臧旻等三将率领三万余骑，讨伐鲜卑，为檀石槐所败，汉兵十死七八。幸亏檀石槐于四年后病死，不然汉朝局势大大不妙。檀石槐四十五岁死后，鲜卑迅速分崩离析。如今主要分为三部，一是盘踞太原、雁门等地的步度根，二是分散代郡、上谷等地的轲比能，三是分布辽西、右北平、渔阳塞外的素利、弥加、阙机等。
袁绍三万兵加上于夫罗、难楼、步度根、轲比能两三万骑兵，绕过涿郡，经代郡、上谷进入广阳郡时，众至十万。曹操建议：“公孙瓒在蓟县兵虽少，但城坚，仓促难下，若折损过多，难楼等胡兵必怀迟疑，且陈兵于坚城之下，殊为不智，若公孙瓒、田豫率然来救，与城中公孙范等里应外合，内外夹击，胜负实难料，不如与鲜于辅夹击王门、田楷，挟大胜之威回击广阳，如泰山压顶，谁能相挡？”
袁绍谋士许攸亦以为然，赞同曹操建议，道：“王门、田楷兵虽众，但正与鲜于辅战于平原，若挥军击其背，必破之。”许攸与逄纪都是南阳人，为袁绍元从旧将，自袁绍弱冠临朝时就已追随。袁绍对他相当信重，颔首道：“孟德、子远之计是也！”因激励胡汉将士道：“田楷勇而无谋、王门暴而无恩，皆庸碌之辈，我等大军十万，破之如沃汤泼雪！诸将士！破贼立功，岂能人后！”遂入渔阳，进至狐奴。
鲜于辅、刘和等聚集胡汉兵马三万人，自右北平向渔阳进军。王门兵仅万余，野战难胜，只得困守平谷，窘迫异常，幸有田楷、严纪率兵来救，双方于平谷城外大战。田楷、严纪皆悍勇之辈，亲自冲锋陷阵，大挫鲜于辅胡汉联军。刘虞旧部齐周战死，鲜于辅、刘和立足不住，退至无终。鲜卑族素利、弥加、阙机等虽名为刘虞复仇而来，实际上还是为了私利，见田楷难以对付，折损将士，顿生犹豫。