再说了，就算他回军收复中山郡，而且士兵们都听指挥，他也没把握迅速收复中山郡。
因此，沮授在巨鹿郡北部的晋县留下了一部分兵力，以加强晋县的防御，便往冀州州治邯郸而去了。
当沮授回到邯郸拜见袁绍的时候，袁绍气得七窍生烟，因为他不但没有拿下常山郡，反而又丢了中山郡，他气得差点儿就亲手斩杀了沮授，幸好田丰、审配、张郃等人苦苦求情，许攸也不赞成杀掉沮授，袁绍这才放过了沮授，不过将他的官职全部剥夺了。
现在袁绍面临两难的境地，到底是派军去收复中山郡，还是派军去驱逐赵云军呢？
最终，他的部下们商议的结果，还是先去驱逐赵云军再说，因为赵云军如今肆虐渤海郡，无人能制，自从他入侵渤海郡以来，如今运送到玄菟郡的人口已经接近二十万了，再这样下去，只怕渤海郡会变成一块空地。
渤海郡的地位在冀州是非常重要的，因为渤海郡的人口在冀州是最多的，差不多有一百一十万人，是冀州重要的兵源和粮食来源地，若是这里的人口被赵云给搬空了，那冀州将会大伤元气。
因此，袁绍派颜良、文丑各领三千骑兵，去驱逐赵云，又派张郃率领两万步兵随后跟上，接应颜良、文丑，他同时命令颜良和文丑不得与赵云决战，只需要将赵云驱逐出冀州境内即可。
同时，袁绍又令青州袁谭派数千骑兵协助颜良、文丑共同驱逐赵云，一定要将赵云驱逐出冀州境内。
为了加强兵力，以免其它势力过来趁火打劫，袁绍又在冀州各郡开始征兵，准备再增加五万常备兵力，其实这对冀州已经算是相当大的负担了，冀州现在的兵力加起来有七八万之多，再增加五万，就是十三万，而每次打仗还必须征发数量差不多的民伕，这对冀州的农业生产是有着非常大的破坏性的，要知道目前冀州在袁绍控制之下的人口也只有五百多万，冀州的生产力也还远远比不上交州，现在供应的兵力已经差不多到了他的极限了。
一时间，冀州境内被弄得鸡飞狗跳，袁绍的军队又不发军饷，当兵也就是混个能吃军粮不饿死罢了，所以家里有田的人都不大愿意当兵，可是袁绍强行征兵，自然弄得老百姓苦不堪言了。
袁绍的手下谋士如田丰、沮授、审配、辛评、辛毗等人都劝他不要征兵过多，以免造成劳动力不足，田地无人耕种，以致抛荒，不过冀州现在这种情况，也确实是没办法，若是袁绍不多征点兵，他是四面皆敌，他心里不踏实啊。
尤其是现在，他们战况不利，损兵折将，折损的还都是精锐，要是不多征点兵用来补充，那冀州现在就有倾覆之危了。
为此，虽然明知道这是饮鸩止渴之举，也是不得已而为之了。