很快法国政府发现，随着这只軍队越来越有名气，开始有法国平民不愿意在法军中服役，反而试图加入这只軍队。而杰罗姆一方面不愿意让自己的軍队兵力减少，一方面也是性格使然，对这些主动来投奔他的法国公民表示欢迎。结果拿破仑义勇军在激烈的战斗中非但没有被消磨，反而越打越多，一年过去，伤亡人次早就超过了20万，但他们的兵力反而从最初的十五万，增长到了三十万。
这就让法国政府头痛了，杰罗姆招募法国平民的做法超出了法国政府的底线，但此时又拿他没办法，战争不顺，杰罗姆打的还算出色，解散这只义勇军，会让政府被抨击，也会让海外法裔不满，现在法国政府不但需要海外法裔参军，还需要他们购买法国债券呢。免除杰罗姆的职务，这也不容易，首先他没犯错，法国民众是主动来参加他的軍队的，不是他强迫的，既然海外法裔可以志愿参军，在高度强调权力的法国，谁敢说法国本国公民没有这个权力。在战争不顺利的时候，大量波拿巴分子在鼓动舆论，更让法国政府顾虑重重。
直到埃及参战的消息出现，而英国人跟法国协商之后，英国强烈要求有丰富的，在北非战斗经验的法国，派兵从陆路攻打埃及，英国可以尽可能提供海上保护，但鉴于中国海军的压力，英国人认为他们无法从海上维持法军的补给。
英国人的想法其实是，法国北非军团在北非地区已经打了三十多年的殖民地战争了，阿尔及利亚的柏柏儿人部落，有的被法国降服，有的则接受法国统治，但总是时不时有部落起来反叛，三十多年来，战斗就没停止过，当然这种殖民地战争的规模都不大，法军最多的时候，也很少出动上万人。
但法国总统却想出了一个摆脱杰罗姆的办法，他没有派非洲军团去作战，非洲军团人数不多，甚至都没有调回法国作战，而是继续留在北非维持治安，战争中北非的资源是重要的战略物资。
杰罗姆是不愿意去埃及的，尽管之前他并不了解北非的恶劣气候，他只是不愿意离开法国，热情的人喜欢追逐名誉，离开了法国，就没有了狂热的向他欢呼的人群，就没有了仰慕他的法国女郎的热吻，更没有了那些受到拿破仑旗帜召唤的无畏的法国勇士。
所以当法国总参谋部派遣他去北非作战的时候，杰罗姆跑去找总统吵架，他坚决不同意去北非，尽管这可能会让他背上不服从命令的名声，可是无所谓，他们是义勇军，说白了就是民兵，并不需要绝对服从法国参谋部。
可是总统有总统的办法，总统背后有一个庞大的智囊团，有的是办法让他走。
法国政府没办法处理杰罗姆，是因为不好对舆论解释，因为杰罗姆的名声，让法国政府投鼠忌器，法国政府就干脆用名誉来把杰罗姆逼到北非去。
埃及向英法宣战之后，政府发动宣传机器，大肆宣传埃及参战的威胁，告诉法国人民，一旦中国軍队进入埃及，那么将有数以千万计的中国大军通过这里侵入北非，接着以北非为跳板登陆法国。
这尽管有些危言耸听，可民众在战争中早就失去了判断力。法国政府表示高度重视北非战役，必须在短时间内征服埃及，从而将中国人挡在埃及，不能让他们逼近欧洲。这需要派遣一个最称职的统帅，而法国现在名声最响的统帅即便不是杰罗姆，杰罗姆也之一。
所以当法国政府公开表示会派战功赫赫的拿破仑家族成员杰罗姆男爵前往北非作战的时候，舆论一片支持，并且舆论开始自我发酵，联系到了拿破仑当年征服埃及的辉煌，认为杰罗姆会在两三个月内就能占领埃及，不但能阻挡中国人，还能切断苏伊士运河，让中国庞大的海军无法开进地中海，从而帮助到法国的盟友英国。
见到舆论这么支持他来征服埃及，杰罗姆就没有办法了，拒绝这项任务，对他的名誉有影响。
所以尽管不满，他还是带着他的义勇军开进了北非，从突尼斯登陆，沿着地中海沿岸向埃及推进。
这是一场灾难，由于英国人无法提供海上支持，他们必须靠两条腿行军。
如果是法国也就罢了，看着怡人的法国乡村风景，总有达到的目的地。可北非是什么地方，地中海气候让这里冬季多雨水，夏季极为干燥，降雨量最多的沿海地区也只有五六百毫米，只能保证这些地方最多不是沙漠，稍微深入内陆，就是连绵的大沙漠，每年降雨量只有二三十毫米，简直就是世界上最干旱的地方。
还好，这里有铁路，而且铁路状态相当不错。这条从的黎波里通往开罗的铁路，并不是英国人掌握的，而是一条没什么经济价值的政府修建的铁路，本意是加强埃及跟的黎波里的联系。修建者是中国人，中国人也没有兴趣经营这条铁路，因此他们是拿钱干活，唯一的投资者是埃及政府。