李世民和李玄霸这对双生子是这个时代绝对的主角，但在接下来一两年时间，两人却在史书中没有多少存在感。
他们所做的事，留在实录中也就一句，“时中原大乱，帝与晋王戍张掖以御突厥”。
这时候中原的主角仍旧是隋炀帝杨广。
杨广回到洛阳后，原本准备进攻洛阳的杨玄感和义军纷纷撤退。
东都洛阳城池十分坚固，杨玄感当年趁着杨广征高丽都没能把洛阳拿下，现在杨广回到了洛阳，隋军精锐也集中在洛阳，没人会蠢得以为自己仅凭人多势众就能攻陷洛阳。他们在这一次集体配合中各自获得了不少好处，为了消化这些好处，义军都再次蛰伏，与各路讨捕大使过招。
杨玄感本以为自己能风风光光当个盟军首领，一举攻占洛阳。谁知道义军都是乌合之众，见杨广没死便一哄而散，气得杨玄感这段时间韬光养晦养出的稳重性情都崩了，每日沉湎酒色。他本来对自己的身份和能力都很自信，以为自己出兵攻打杨广一定会一呼百应，轻而易举夺得天下。现在他像是丧家之犬一样东躲西藏，从未如此窝囊。好不容易看到希望，希望又瞬间破灭，杨玄感有些承受不住了。
李密多次劝说无果，连连叹气。
杨玄感的下属人心惶惶，有多人生出逃往他处的念头。可惜现在还没有第二个起兵的勋贵，不然他们早就跑了。杨玄感颓废，义军蛰伏，大隋好像一瞬间又耳根清净了。苏威看到天下暂时平静，赶紧以宇文述的遗言为引，请杨广回大兴安定人心。
杨广问宇文化及道： “苏威说朕该回大兴安定人心，你父亲也是这么劝朕，你意见如何?”
宇文化及恭敬道：“陛下是皇帝，无论在何处都能安定人心。陛下想去哪里，哪里就是都城。”
杨广龙心大悦。
看到杨广这番作态，虞世基和裴蕴都支持杨广留在洛阳，裴世矩置身事外。于是苏威劝说失败。
苏威本来想着就这么算了，东都西京都是都城，陛下留在洛阳也行。只要陛下别又想征高丽，区区民贼还是很容易被镇压的。
谁知道，杨广不仅重提征高丽的事，还征役夫修龙舟，又要南下江都。杨玄感叛乱时，把杨广的龙舟都烧了，导致杨广这几年都没能南下江都。现在杨广终于安静地在洛阳待了一会儿，就萌生了重造龙舟下江南的想法。
沉默的群臣这次沉默不住了。
天下大乱，突厥入侵，陛下你还修什么龙舟下什么江南?你大隋的基业都动摇了，这是下江南的时候吗?!但杨广什么时候听过群臣的话?
于是今年不征高丽，也没有修长城驰道运河，但还是征了役夫，为杨广修龙舟。杨广想明年开春就下江南，所以给役夫修龙舟的时间非常短。
如今已经进入深秋，虽然洛阳的气候温和，但也是相对而言。役夫们穿着单薄的衣服，没日没夜地在工地上忙碌。秋日多雨，他们浑身湿透也不敢停歇。入冬之后，饿死累死冻死和病死的役夫数不胜数。
苏威想再次劝谏，被裴世矩拦住。
裴世矩道： “苏公知道陛下为何非要下江南吗?”
苏威皱眉： “陛下不就是爱好江南的美景?但现在哪是看美景的时候?!”
裴世矩摇头，叹气道： “陛下其实是知道大隋式微，知道天下民贼四起。自从陛下被民贼惊吓后，现在晚上难以入眠，夜里常常惊呼民贼来袭惊醒。”
裴世矩不想让苏威往死路上走，才悄悄透露了这件事。
苏威的年纪已经这么大了，活一日是一日，何苦在半只脚踏入棺材的时候去惹恼陛下?看看宇文述这老贼奸猾了一辈子，临死前带着护驾的功劳劝说陛下，陛下可念着宇文述的好了?
朝中人都长了眼睛。杨广以为自己赦免宇文化及和宇文智及就算是对宇文家有大恩宠了，但谁不知道宇文化及和宇文智及这所谓的“变为奴隶”就没有实施过，顶多算是贬为庶民。
就算宇文述没有救驾，凭借宇文述生前的功劳，他的两个儿子在他死后也是能做官的，根本算不上什么额外堂赐。何况杨广还扣下了宇文述的爵位，没有让他的儿子继承。
即使杨广说要看看宇文化及有没有改正错误，但他完全可以给宇文士及一个额外的国公。
宇文述救驾身亡，难道还不值得给家里再增加一个国公吗?宇文士及又是杨广的女婿，提升宇文士及的爵位对杨广而言也是肥水不流外人田。杨广就算再吝啬，但在这件事上他完全没有吝啬的理由。所以朝中人怎么会不知道，宇文述最后的谏言得罪了杨广?
连生前被杨广偏爱，为救驾而死的宇文述都因进谏被杨广厌恶，他们怎敢直言劝谏杨广?
苏威如今成了朝中第一人，脾气没有以前谨慎。裴世矩见苏威要撞杨广刀口上，出于同僚情谊，提醒了苏威一番。
苏威没有关注杨广在后宫的行为，不知道杨广失眠惊悸的事。
他听了裴世矩的话后，语气古怪道： “你的意思是陛下并非贪图江南美景美色，而是想要逃避?”
裴世矩道： “我什么都没说。”
苏威背着双手原地转了几圈，放下双手握拳道：“他看不见，大隋就没有乱吗?!不行，我更要劝说陛下回心转意!”裴世矩拉住苏威道：“苏公，陛下极重脸面，你要如何劝说陛下?难道让陛下别自欺欺人?”
苏威颓然道： “我就不信陛下对大隋的天下一点都不上心。只要稍稍振作就能挽回大隋，他怎么能什么都不做?不，我不信。”裴世矩叹气不语，松开拉着苏威的手，没有再阻拦苏威。