这七千骑军中包括了三方面的人马，因此在出之前杨炎将士兵们进行了重新整编。 ( 虞公亮带来的俱甲骑兵虽然有近一半是重新补充的，但论战斗力迮是宋军中最强的，迭锋军山营的一千俱甲骑兵也只剩八百多骑，杨炎将这两军合为一队，为第一营；这些甲俱虽然比铁浮图的铁甲要轻得多，但战马的负重还是要比普通骑军重得多，因此每人都有两匹马，指挥是陈亦和刘复武。原选锋军的风营和林营的轻骑兵也合为一队，为第二营，指挥是曹勋和高震；原迭锋军火营是配有马皇弩的轻骑射军，共八百人单独为第三营，指挥张荣和张师彦；原来魏胜部下的两千多骑军为第四营，指挥是董成、朱震；原选锋军的雷营和阴营合为第五营，由杨炎亲自辛领，辛弃疾、王世隆、魏昌以及赵月如、赵倩如和她们带来的女兵都被编入了五营中。
赵月如和赵倩如这次来兖州共带了三十个女兵，经过挑选之后只有十二个人合格加入了远袭军。其中有四个原来是她们的宫女，分别叫作绵纹、暗香、梅影、幽萍。她们在宫里跟着赵月如学过一些武技，式以在路正照顾两人的起居。另外八人都是在尚武院中学习过的女子，韩照静、张文珠都在其中，另几人是：石鸾英，余秀琳、幕容红、陈瑛、林雅仙、彭璐也都不是平民家出身，大多都来自武将世家。其实在尚武院上学的女子中不是出身官宦获是富豪之家，很少有来自平民之家的。这是因为只有大户豪族才愿意出钱供女子学武，这在平民家中是不可能的。
远袭军只带了十天的干粮，路上避开大城镇，专走山间、密林以避开人群。晚间休息也不劫火，只吃些干粮，饮些山泉，这一点连赵月如和赵倩如也不例外。不过女兵们到是准备充足，糕饼、点心、糖果等都带了不少，杨炎特许拔给她们一辆大车来装，到是够她们吃的。不过在过夜时只搭三个帐蓬供妆兵休息，其他人包拎杨炎全部都是在地上铺块毛毡睡觉。好在现在是五月下旬，天气炎热，到不寒冷。
远征军自兖州出，先绕过归德府，由楚丘渡过黄河，转向西北，走了四天，行程近七百里，由于有万显声在前面探路，宋军走的又都山林小路，又有飞鹰在空中巡视，因此一路上到也平安无事。现在己到了东明城附近。这里离黑阳叫约有二百多里路，如果崔马快行，一天就可以到了。
队伍正在行进之中，忽然前面一阵骚乱，只听见有人喊道：“抓住，抓住他们。”紧接着就是“嗖、嗖”几声箭响。杨炎听了，立刻大喝道：“前面生了什么事情。”
这时一个士兵催马过来道：“杨统制，王统制在前面抓了几个猎人。”
王统制就是王世隆，杨炎不解他抓猎人做什么。立即传令，叫全军暂时停止前进，并布下放哨的士兵。这时王世隆带着抓住的猎人过来见杨炎：“杨统制，都抓住了，一个也没跑了。”
杨炎一看，王世隆抓了五个人，一个老人，三个壮年，一个少年，都是猎人打份，其中一个人的胳膊上还中了一箭，血流不止。一个个都五花大把，吓的脸色惨白。
杨炎不禁道：“王统制，你抓他们作什么，莫非是金国的奸细。”
王世隆还没开口，那几个猎人大叫起来：“大人，我们只是普通的猎人，不是奸细啊！大人，饶了我们吧！”
“大人，我们不是女真人，我们可也是中原百姓啊！”
王世隆不理他们，对杨炎道：“杨统制，他们是什幺人并不重要，只是他们己经现了我军的行踪，万万留不得他们。”
这句话只吓得那五个猎人全身抖，“扑通，扑通”跪在杨炎面见，不住磕头。道：“大人饶命，大人饶命，我们真的只是普通的猎人，绝不是金国的奸细。”
那老年猎人道：“大人、大人，你要杀就杀哦吧，千万放了我的儿子、孙子。”
这时赵月如、赵倩如、辛弃疾、虞公亮、魏昌、曹勋、高震、陈赤、刘复武等人都已围了过来，看看是生了什么事情。等听王世隆说明了事情的经过，众人都不禁沉默不语，都看着杨炎，想听听他是什么意见。
这时杨炎心中却也是难以决定。听了王世隆一说，他也明白，远征军的行踪被这几个猎人现，如果是放了这几个猎人，但他们却去佝金军告密，这次袭击黑阳山的计划恐怕就不能成功了。杨炎当然不会天真的以为这五个猎人是中原人，就一定会帮助大宋。他知道对于老百姓来说，只要能活下去，有饭吃，无论是维来统制都行，金国宋园都没有什么区别。何况一但告密成功，无疑会得到一笔赏金，利令心薰，很难说这几个人不会动心。
但要他下决心杀死这几个无辜的人，杨炎却也真的下不了这个狠心。他虽然处理讳犯军纪的士军决不留情，但并不是一个狠心嗜杀的人。但是如果不杀，这次远征又怎么办呢？杀还是木杀，在杨炎的心中激烈的斗急着。
其实不仅是他一个人，在场的每一个人心里都在想着：如果换了是我，是杀还是不杀呢？
杨炎像是在问众人，又像是在自语道：“难道扰没有别的办法了，非要杀了他们不可吗？”
这是猛听有人道：“杨统制，绝不可滥杀无辜啊！”
众人一看，原来说话的人是陈亦起。这时刘复武心里不禁但心起来。他知道陈亦一向心高气傲，平素又看不起那些世家子弟。因此他觉得世家子弟都只是无能之辈，只是幸运生在官宦之家而己。平时也只服毕再遇一人，对杨昌鹏、虞公亮这样的世家子弟都不大瞧得起，自然也包括杨炎在内。在徐州时就对杨炎无礼，好在杨炎并不在意，只是不知他这次要闹出什么事情来。