大业十年七月。
由于天下大乱，杨广下令所征的天下兵多预期不至，同时由于他亲自率领的兵也是逃亡不止，所有杨广的车驾四月二十七日到了北平郡后，便一直停滞不前，没能继续往辽东进发。
直到了七月十日，杨广才率兵勉强行进到怀远镇，但这时，士卒说什么都不肯继续前行了，杨广由是陷入困顿之中。
就在杨广进进不得，退退不得的时候，喜讯忽然传来，高丽王高元竟派人请降了！
原来这时的高丽，也已是十分的困弊了，虽然前两次战争，高丽都是赢家，但高丽国小，哪里能经得起这接二连三的举国大战？
高丽国也是农耕国家，几年大战下来，田地荒芜，四处都在闹饥荒，使得国内也像隋朝一样爆发了好几起农民起义，所以高丽国也是没能力再将战争打下去了。
再加上来护儿自东莱郡率水军东进，又一次攻破了沙卑城，杀敌数千，然后率领大军直驱平壤。
高元于是震惧万分，于七月二十八日遣使者押送大隋叛臣斛斯政，前去怀远镇上表乞降，困窘无比的杨广顿时大喜，接受高丽的投降，然后遣使持节去召来护儿还师东莱。
来护儿召集部下道：“大军三次出征，未能平定高丽，这次回去就再也不能来了，劳而无功，我感到耻辱。如今高丽确实已经疲惫不堪，以我们这么多的军队去讨伐高丽，不日便可大胜。我打算抗诏进兵直接包围平壤，俘获高元，然后才凯旋而归，众位以为如何？”
长史崔君肃力争奉旨班师，来护儿不答应，道：“高丽已经支持不住了，皇帝完全相信任用我，我完全可以自行决定此事。我在朝廷之外，有事应该自己决断，我宁可俘获高元返回而受到责罚，但放弃这次成功的机会，我办不到！”
崔君肃见此没再说什么，但私下里却向其将官道：“要是跟从元帅违抗皇帝的诏命，必定被人上奏皇帝，元帅历受皇恩，到时可能会被免责，但我们定然都得获罪。”
诸将听后，大为恐惧，全都要求返回，来护儿心中一阵悲凉，心中想到，他的大对头周法尚要是此时在军中就好了，周法尚近两年一直率部在沿海剿杀叛军，他以前虽然经常与他唱反调，但在大是大非上没有含糊过，定然会支持他的决定的。
只要有一个人支持他来护儿，他定然能将这命抗到底，但此时……
来护儿大笑几声，最终唯有接受了诏命，班师而回。
八月初四，杨广从怀远镇班师回朝。邯郸贼帅杨公卿率领部众八千人抢劫车驾后面的第八队，抢走了飞黄上厩的马四十二匹，然后扬长而去，天下盗贼之猖獗，由此可见一班。
要是换了以往，靠着运河之便利，从涿郡返回洛阳费时不会超过一个月。然而此时，因归途多有叛军，且这些叛军又都不像以前那样惧怕杨广了，多有在一个御驾附近耀武扬威的，所以杨广这次归途每天前行的速度都不快，只怕不到冬季之时是回不到洛阳的了。
……
恒山郡共有八县，除郡治真定城，多被叛军攻破过，现在的叛军，大都攻破城池后劫掠一番便离开，所以恒山郡除真定城以外的地方，在今年五月份以前，基本属于无主状态，只盘踞着一些小贼。
但在五月份以后，李隐击退张金称、控制井陉关，便开始派人来接管了真定城以北的井陉县、房山县、灵寿县、行唐县和滋阳县。
这五个县既没官兵，又没较大势力的叛军，所以接管的工作进行的十分顺利，基本没遇到什么阻碍。
为了避免不必要的麻烦，李隐并不是以他的名义接管恒山五县的，在将恒山五县的贼寇扫清后，他让张亮重新落草为寇，带着一班郡吏，领着上万流民，浩浩荡荡的进入了各县城之中，他们自称恒山盗，与李隐没有什么关系。
一开始进入恒山五县的流民只有万余，不过后面还会陆陆续续的将人送来，与本地存留的人一起按府兵制进行统一收编安置，五户为保，设保长，百户为里，设里长，五里为乡，设乡长。
平均每保征两丁，在闲时进行军事训练，即可保卫乡里，又可成为优质兵源。
安置流民，琐事繁多，所以李隐最近这几个月来，一直都是忙得不可开交，其中最要紧的事情，还是粮食。
不过由于太原郡的郡丞王威、虎贲将军潘长文都有意拉拢李隐，李隐并没有一口气将他们拒绝，与之虚与委蛇，索要了大量的钱粮，这才勉强渡过难关。
将恒山五县的事情暂时处理妥当后，李隐便将这里的担子交给了张亮，自己则带了百余骑，从恒山郡一直北上，来到了上谷郡的飞狐县。
上谷郡自古出精锐骑兵，当年汉光武帝刘秀渡过黄河北上，便是在得到了上谷、渔阳两郡的支持后，这才凭借两郡骑兵，横扫河北，建立不世之基业的。
李隐此来上谷，不为钱，不为粮，只为招些这上谷郡的骑兵。
上谷郡的耕地不算多，这里的百姓多是半耕半牧，所以许多人自小便是在马背上长大的。不过自从大业七年以来，这里的居民也是日益困顿，幸而此处民风彪悍，百姓结坞自保，使得各处叛军也不太敢来这里，所以相对河北的其他郡县来说，算是比较安稳的一个地方。
李隐在五月份初到恒山各郡的时候，许多地方都是百里无人烟，村庄成鬼域，进入上谷郡后，道上百姓虽然依旧大都面有饥色，但总算是能见着人，这已经是很难得的事情了。
李隐有粮有钱，要在此招得适合的骑兵不是什么难事，况且飞狐县与雁门郡的灵丘县只隔了条飞狐陉，此地的人大都知道李隐的大名，所以他将招人的牌子在此一立起来后，从者云集，一日不到的时间，便招得骑兵八百，这还是经过李隐精挑细选后的结果。