初，嵩高羽士潘诞自言三百岁，为帝合炼金丹。帝为之作嵩阳观，华屋数百间，以童男童女各一百二十人充给使，位视三品；常役数千人，所费巨万。云金丹利用石胆、石髓，发石工凿嵩高大石深百尺者数十处。凡六年，丹不成。帝诘之，诞对以“无石胆、石髓，若得童男女胆髓各三斛六斗，能够代之。”帝怒，锁诣涿郡，斩之。且死，语人曰：“此乃天子无福，值我兵解时至，我应生梵摩天”云。
仲春，己未，上升钓台，临杨子津，大宴百僚。乙亥，帝自江都行幸涿郡，御龙舟，渡河入永济渠，仍敕选部、门下、内史、御史四司之官于前船选补，其受选者三千余人，或徒步随船三千馀里，不得处罚，冻馁疲顿，因此致死者什一二。
漳南人窦建德，少尚气侠，胆力过人，为乡党所归附。会募人征高丽，建德以英勇选为二百人长。同县孙安祖亦以勇猛选为征士，安祖辞以家为水所漂，老婆馁死，县令怒笞之。安祖刺杀令，亡抵建德，建德匿之。官司逐捕，踪迹至建德家，建德谓安祖曰：“文天子时，天下殷盛，发百万之众以伐高丽，尚为所败。今水潦为灾，百姓困穷，加上往岁西征，行者不归，疮痍未复；主上不恤，乃更出兵亲击高丽，天下必大乱。丈夫不死，当立大功，岂可但为亡虏邪！”乃集恶棍少年，得数百人，使安祖将之，入高鸡泊中为群盗，安祖自号将军。时鄃人张金称聚众河曲，蓚人高士达聚众于清河境内为盗。群县疑建德与贼通，悉收其家眷，杀之。建德帅麾下二百人亡归士达，士达自称东海公，以建德为司兵。顷之，孙安祖为张金称所杀，其众尽归建德，建德兵至万馀人。建德能倾身接物，与士卒均劳逸，由是人争附之，为之致死。
平原东有豆子□，负海带河，地形深阻。自高齐以来，群盗多匿此中。有刘霸道者，家于其旁，累世官吏，赀产丰富。霸道喜游侠，门客常数百人。及群盗起，远近多往依之，有众十馀万，号“阿舅贼”。
世充本西域胡人，姓支氏。父收，幼从其母嫁王氏，因冒其姓。世充性谲诈，有口辩，颇涉书传，好兵法，习律令。帝数幸江都，世充能服侍色彩为恭维，雕饰池台，奏献珍物，由是有宠。
邹布衣王薄拥众据长白山，剽掠齐、济之郊，自称知世郎，言事可知矣；又作《无向辽东浪死歌》，以相感劝，避征役者多往归之。
大业七年辛未，公元六一一年春，正月，壬寅，真定襄侯郭衍卒。
初，帝欲大营汾阳宫，令御史大夫张衡具图奏之。衡承间进谏曰：“近年劳役繁多，百姓疲弊，伏愿留意，略加抑损。”帝意甚不平，后日衡谓侍臣曰：“张衡自谓由其计画，令我有天下也。”乃录齐王暕携皇甫诩从驾及前幸涿郡祠恒岳时，父老谒见者衣冠多不整，谴衡以宪司不能举正，出为榆林太守。久之，衡督役筑楼烦城，因帝巡幸，得谒帝。帝恶衡不损瘦，觉得不念咎，谓衡曰：“公甚肥泽，宜且还郡。”复遣之榆林。未几，敕衡督役江都宫。礼部尚书杨玄感使至江都，衡谓玄感曰：“薛道衡真为枉死。”玄感奏之；江都郡丞王世充又奏衡频减顿具。帝因而发怒，锁诣江都会，将斩之，久乃得释，除名为民，放还田里。以王世充领江都宫监。
夏，六月，甲寅，制江都太守秩同京尹。
上以百官从驾皆服裦褶，于军旅间不便，是岁，始诏“从驾涉远者，文武官皆军装，五品以上，通著紫袍，六品以下，兼用绯绿，胥史以青，庶人以白，屠商以皂，士卒以黄。”