乌丸军人可以申请加入幽州军，将给予与汉人一样的待遇，甚至更为优厚。楼班虽然愿意听从袁熙指挥，但是也不希望被袁熙限制出兵自由，而是请求道：‘袁刺史，我乌丸勇士愿为您甘为前锋，开疆拓土，还希望能给予出兵自由的权利。”
袁熙见楼班还有扩张的想法，心里顿时不高兴，一直盯着看楼班，看得楼班心里发慌，然后语气有点冷，说道：“乌丸是我大汉的最好盟友，我希望楼班单于能以大局为重，不要妄动干戈，引起边境不稳。若有需要乌丸帮助，乌丸校尉阎柔大人自会传达我的命令，无需楼班单于太过费心！”楼班单于见袁熙态度坚决，他也知道袁熙是怕自己壮大了对他不利，一定不会放宽这个条件，也就没有再提。
经过双方协商，然后楼班将袁熙的话传递给了乌丸军人，刚开始乌丸军人还是很抵触乌丸军队只能在辽西一地活动，后来听到可以报名参加幽州军队，而且待遇比起乌丸军要好很多，上谷、右北平还有辽东的乌丸军人纷纷报名参加袁熙的军队，袁熙命张辽将这群乌丸勇士组建一支军队，归其单独统领，张辽非常感谢袁熙的看重，也已经习惯了在幽州的生活。张辽和袁熙有过约定，就是投靠他之后，不想与曹操为敌，袁熙正好让他带领乌丸军队，守卫北方边疆。
袁熙的幽州大军在柳城驻扎了几日，帮楼班稳定了辽西的局势，任命鲜于铺为大汉使者，与阎柔一起建设汉族驿站，负责传递幽州与乌丸之间的文化交流和贸易活动，当然还有监督乌丸单于。楼班也传令给三郡驻扎的乌丸军队，令他们撤回辽西，将三郡的控制权还给袁熙。袁熙也顺利接手了三郡，开始三郡的恢复工作，任命张辽为上谷郡守，田畴为北平郡守，孙礼为渔阳郡守，积极招收流民，开荒种植，发展实力。
袁熙虽未幽州刺史，其实治下只有范阳郡、涿郡、代郡，范阳郡蓟县是幽州的中心，也是自己的大本营，而涿郡和代郡靠近边关，主要有触焦和张南守卫，目前两人并没有像历史上背叛自己，也就没有撤换的必要，主要还是缺少更换的人才。如今多了三郡，相当于势力增加了一倍，不过距离收服幽州全境还有很长的路要走。剩余的昌黎郡，辽东郡还在公孙度手中，玄菟郡被高句丽占据，乐浪郡被百济占据，带方郡被新罗占据，所以袁熙的下一个目标就是公孙度。