李建成派人探路，发现沿途数十里的路线都泥泞不堪，车马难以通行，而且许多路道被山洪冲得坑坑洼洼，到处积水，暂时不适合赶路。
滞留半个月后，军中的粮草已经不足，李渊派出了一支辎重队回返晋阳，却也因为降雨关系，停留在某地，暂时没有了音讯。
其实，那支队伍已经消失了，被一群来历不明的黑衣人雨夜中袭击，全部击杀，然后掩埋了尸体，从世上消失了。
李渊越等越急，一旦等粮草亏空，十万大军饿肚子，很可能就地要兵变了。
军中忽然有人散播了消息，说粮草已经耗尽，很快无法度日了，而且刘武周破了雁门郡就要攻打太原郡，唐军很可能要葬送在途中。
这股消息传开，使得唐军顿时有些军心不稳，人心惶惶。
李渊听到风声后，立即召集文臣武将议会商讨。
“最近军中谣言四起，军心浮动，不利于行军，尔等有何看法？”李渊询问。
刘弘基神色复杂，说道：“这些谣言，不止一股，有的再传李氏当有天下为假，有的渲染粮草要空，有的加大吹捧刘武周要攻克晋阳城，都会我军不利，似乎有人推波助澜，应该派人查一查，是否我军中有其它势力安插的奸细。”
李渊有些想不通，思忖说：“奸细，究竟是哪一股势力，这么歹毒心思，把我唐军作为死敌？”
李建成道：“最大可能就是刘武周，他如今占据雁门郡，比邻太原郡，跟我唐军利益冲突最大，而且这几个传言，似乎都跟刘武周有关。”
“有道理！”李渊点点头，不过他稳重惯了，说道：“并不排除其它势力的可能，比如仍忠于朝廷的情报组织，甚至李密、薛举、梁师都、窦建德，都有这个可能，不希望我唐军做大，顺利抵达大兴城。”
只是李渊决计没想到，那是出自燕琅阁的情报人，在唐军中散播出来。
裴寂道：“唐公，眼下宋老生据霍邑雄关，屈突通占据了河东郡，先后堵住咱们的去路，此行崎岖坎坷，充满变数，眼下刘武周联合突厥兵力，正在雁门郡聚集，不日就要攻打太原郡，晋阳乃是我们的根基所在，将士们家眷都在那里，不容有失，不如，我军立即挥师返回，先守住晋阳才是当务之急。”
李渊也有此意，微微点头，不少文臣武将也意识到事情严重性，在此多逗留下去，恐怕有变，都想着极早赶回。
刘弘基摇头道：“不可，这样返回晋阳，士气必泄，恐怕再无南下的良机和锐气，开弓没有回头箭，决不能掉头，无功而返。”
李世民素来信奉刘弘基的智计，也附和他的提议。
于是主战、主退的双方争论起来，各说各的道理，使得李渊也陷入举棋不定，进退两难的状态。