河南、山东大水，饿殍满野，炀帝诏开黎阳仓赈之，吏不时给，死者日数万人。徐世勣言于李密曰：“天下大乱，本为饥荒。今更得黎阳仓，大事济矣。”密遣世绩帅麾下五千人自原武济河，会元宝藏、郝孝德、李文相及洹水贼帅张升、清河贼帅赵君德共袭破黎阳仓，据之，开仓恣民就食，浃旬间，得胜兵二十馀万。武安、永安、义阳、弋阳、齐郡接踵降密。窦建德、朱粲之徒亦遣使附密，密以粲为扬州总管、邓公。泰山羽士徐洪客献书于密，觉得：“大众久聚，恐米尽人散，师老好战，难可胜利。”劝密“乘进取之机，因士马之锐，沿流东指，直向江都，执取独夫，号令天下。”密壮其言，以书招之，洪客竟不出，莫知所之。
将佐复推渊领太尉，增置官属，渊从之。时河东未下，三辅豪杰至者日以千数。渊欲引兵西趣长安，踌躇未决。裴寂曰：“屈突通拥大众，凭坚城，吾舍之而去，若打击长安不克，退为河东所踵，腹背受敌，此危道也。不若先克河东，然后西上。长安恃通为援，通败，长安必破矣。”李世民曰：“不然。兵贵神速，吾席累胜之威，抚归附之众，鼓行而西，长安之人望风震骇，智不及谋，勇不及断，取之若振槁叶耳。若淹留自弊于坚城之下，彼得成谋修备以待我，坐费日月，众心离沮，则大事去矣。且关中蜂起之将，未有所属，不成不早招怀也。屈突通自守虏耳，不敷为虑。”渊两从之，留诸将围河东，自引军而西。
王世充、韦霁、王辩及河内通守孟善谊、河阳郡尉独孤武都各帅所体味东都，唯王隆前期不至。己未，越王侗使虎贲郎将刘长恭等帅留守兵，宠玉等帅偃师兵，与世充等合十馀万众，击李密于洛口，与密夹洛水相守。炀帝诏诸军皆受世充节度。
屈突通闻渊西入，署鹰扬郎将汤阳尧君素领河东通守，使守蒲坂，自引兵数万趣长安，为刘文静所遏。将军刘纲戍潼关，屯都尉南城，通欲往依之，王长谐先引兵袭斩纲，据城以拒通，通退保北城。渊遣其将吕绍宗等攻河东，不能克。
冠氏善于志宁、安养尉颜师古及世民妇兄弟长孙无忌谒见渊于长春宫。师古名籀，以字行。志宁，宣敏之兄子；师古，之推之孙也；皆以文学着名，无忌仍有才略。渊皆礼而用之，以志宁为记室，师古为朝散大夫，无忌为渭北行军典签。
柴绍之自长安赴太原也，谓其妻李氏曰：“尊公举兵，今同行则不成，留此则及祸，何如？”李氏曰：“君弟速行，我一妇人，易以埋没，当自为计。”绍遂行。李氏归鄠县别墅，散家赀，聚徒众。渊从弟神通在长安，亡入鄠县山中，与长安大侠史万宝等起兵以应渊。西域商胡何潘仁入司竹园为盗，有众数万，劫前尚书右卫李纲为长史，李氏使其奴马三宝说潘会与之就神通，合势攻鄠县，下之。神通众逾一万，自称关中道行军总管，之前东城长令狐德棻为记室。德棻，熙之子也。李氏又使马三宝说群盗李仲文、向善志、丘师利等，皆帅众从之。仲文，密之从父；师利，和之子也。西京留守屡遣兵讨潘仁等，皆为所败。李氏徇眛厔、武功、始平，皆下之，众至七万。左亲卫段纶，文振之子也，娶渊女，亦聚徒于蓝田，得万馀人。及渊济河，神通、李氏、纶各遣使迎渊。渊以神通为光禄大夫，子道彦为朝请大夫，纶为金紫光禄大夫；使柴绍将数百骑并南山迎李氏。何潘仁、李仲文、向善志及关中群盗，皆请降于渊，渊一一以书慰劳授官，使各居其所，受敦煌公世民节度。