杨玄感从洛阳一路向西，往东而去。沿途过城池而不入，拼了命地赶路。
杨玄感到达龙潭峡谷之后，汇合大将王伯仲所部，全军共计有三万多人。为防止卫玄追击，杨玄感便以巨石堵塞峡谷之路，使其不得出。
卫玄这些日子，被困于峡谷之中，进退不得，且兵尽粮绝，根本无力反攻。此时见杨玄感向西，却无能为力，只得派人往洛阳问询情况，并请求救兵。
而杨玄感则是昼夜兼程，很快到达弘农宫（今河南三门峡市西陕县老城）。
到了陕县，杨玄感就算到了老家了。陕县从两汉便是弘农郡的治所，到了隋朝才被朝廷从弘农郡划给河南郡。此时不少闻询赶来的杨家故旧前来投奔杨玄感，杨玄感便对众人说道：“我已破东都，今日西行，只为取关西矣！”
一众人闻之大喜，纷纷请为向导。
这时杨玄感的堂叔杨虔逊进言道：“今弘农宫宫城空虚，又多积粟，攻之易下。若取弘农宫，如此进可绝追兵粮道，进可去宜阳之地。”
这时不少杨家人也不希望杨玄感向西放弃弘农，白白将偌大的家族基业丢给大隋，因此纷纷请求杨玄感攻打弘农宫。
杨玄感碍不住家族请求，同时也觉得需要家族支持，因此便决定驱兵攻打弘农宫。
李密听到此事之后，忙来见杨玄感。
“楚公，今黄明远追兵在后，我军宜速速入关中为上，一旦在弘农迁延日久，敌军又至，我军危矣。”
杨玄感见李密前来，高兴地对李密说道：“法主勿忧，我听闻弘农宫内，有兵卒不过千人，但粮食、兵甲却是堆积如山。我左思右想，这些日子在洛阳城下屡屡碰壁，不就是兵戈不利，甲胄不全。我虽憎恶黄明远，但此贼有一句话说得不错‘磨刀不误砍柴工’，便是如此。”
李密听了一阵焦急，现在情况能一样吗？
李密忙说道：“楚公，弘农宫再是兵少，毕竟有坚城依托，急切之间? 未必能下。但追兵若至? 则我军进退无路? 便是全军覆没的结果。”
杨玄感一副了然于胸的样子说道：“法主勿忧，黄明远虽然大军赶来，但既要整顿军队，又要安定洛阳城? 这都需要时间。我军至少有五天的时间可以攻击弘农宫? 绰绰有余。”
李密眼看杨玄感油盐不进，也有些恼怒? 愤然说道：“楚公，这都是侥幸，黄明远乃兵法大家? 焉能不知兵贵神速的道理。若黄明远不管不顾? 直接追来，那我军哪里又有五天空余时间。我就怕我军正攻打着弘农宫，而身后隋军又至，到时候只能再次逃命。”
“放肆！”
听到李密的话? 杨玄感也有些恼怒。这是你一个做臣子的该与主上所说的话。此时屡次为李密所劝阻的事情都涌上心头? 杨玄感不由得愤怒交加，恶狠狠地说道：“李密，你屡屡对我军方略横加干涉? 你真以为我军除了你一人别人都不懂方略，既然如此，我这个主帅的位置让给你便是了。”
“楚公······”
杨玄感之言可谓是诛心之乱，李密听了大惊失色。