因为提出不同意见而触犯杨素和苏威，杨素向隋文帝推荐李纲，让他担任刘方的行军司马。刘方秉承杨素的意思，侮辱折磨李纲，李纲差点死去。军队返回后，李纲长期没有得到调任，苏威又派李纲前往南海接应林邑的军队，很久都没有召回他。李纲自己返回朝廷奏事，苏威弹劾李纲擅自离开职位，将他交给官吏审问；恰逢大赦，李纲被免官，隐居在鄠县。
五月，朝廷下诏修筑西苑，周围二百里；苑内有人工海，周围十多里；建造方丈、蓬莱、瀛洲等神山，高出水面一百多尺，亭台楼阁，错落分布在山上，布局精妙如神来之笔。北面有龙鳞渠，曲折蜿蜒注入人工海。沿着水渠建造十六座院落，院门都临近水渠，每座院落由四品夫人主持，堂殿楼观，极其华丽。宫中的树木在秋冬季节凋零后，就剪彩绸做成花叶，点缀在枝条上，颜色褪色后就更换新的，始终像春天一样。池塘里也剪彩绸做成荷花、菱角、芡实等，炀帝乘车游览时，就去掉冰面，将这些彩绸饰品布置在水中。十六座院落争相以珍奇美味的菜肴相互攀比，以求获得炀帝的恩宠。炀帝喜欢在月夜率领数千名宫女骑马游览西苑，创作《清夜游曲》，在马上演奏。
炀帝对待各位藩王恩情淡薄，多有猜忌。滕王杨纶、卫王杨集内心忧虑恐惧，叫来术士询问吉凶，并设坛祭祀祈福。有人告发他们心怀怨恨、诅咒炀帝，有关部门上奏请求处死他们；秋季，七月丙午日，炀帝下诏将他们削去官籍，贬为平民，迁徙到边疆郡县。杨纶是杨瓒的儿子，杨集是杨爽的儿子。
八月壬寅日，炀帝前往江都，从显仁宫出发，王弘派龙舟前来迎接。乙巳日，炀帝乘坐小朱航，从漕渠驶出洛口，换乘龙舟。龙舟有四层，高四五十尺，长二百丈。上层有正殿、内殿、东西朝堂，中间两层有一百二十间房屋，都用金玉装饰，下层是内侍居住的地方。皇后乘坐翔螭舟，规格稍微小一些，但装饰与龙舟没有差别。另外有浮景船九艘，三层，都是水上宫殿。还有漾彩、朱鸟、苍螭、白虎、玄武、飞羽、青凫、陵波、五楼、道场、玄坛、板翕、黄篾等数千艘船只，后宫妃嫔、各位藩王、公主、文武百官、僧人、尼姑、道士、外国宾客都乘坐这些船只，同时装载朝廷内外各部门进献的物品，一共使用拉船的民夫八万多人，其中拉漾彩以上船只的有九千多人，称为“殿脚”，都穿着锦彩织成的袍子。还有平乘、青龙、艨艟、艚艟、八棹、艇舸等数千艘船只，由十二卫的士兵乘坐，同时装载兵器和帐幕，士兵们自己拉船，不配备民夫。船只首尾相接二百多里，灯火照耀着江河陆地，骑兵在两岸护卫前行，旌旗遮蔽了田野。所经过的州县，五百里内都命令进献食物，多的一个州要献上一百车，极尽水陆珍奇之物；后宫妃嫔们吃腻了，将要出发时，很多食物都被丢弃埋葬。
契丹侵犯营州，炀帝下诏令通事谒者韦云起率领突厥军队讨伐契丹，启民可汗派出两万骑兵，接受韦云起的指挥。韦云起将军队分为二十个营，分四路进发，各营之间相距一里，不得相互混杂，听到鼓声就前进，听到号角声就停止，除非是公务使者，否则不准骑马奔驰，反复告诫后，击鼓发兵。有一名纥干违反约定，被韦云起斩首，拿着他的首级示众。于是突厥的将帅入朝拜见韦云起时，都跪着行走，双腿发抖，不敢抬头看他。契丹一向臣服于突厥，彼此没有猜忌。韦云起进入契丹境内后，让突厥人谎称要前往柳城与高丽进行贸易，谁敢泄露实情就斩首。契丹没有防备，韦云起在距离契丹营地五十里的地方，指挥军队疾驰突袭，将契丹的男女四万人全部俘获，杀死成年男子，将女子和牲畜的一半赏赐给突厥，其余的都收归朝廷。炀帝非常高兴，召集百官说：“韦云起率领突厥军队平定契丹，文武双全，我现在亲自提拔他。”于是升任韦云起为治书侍御史。
当初，西突厥的阿波可汗被叶护可汗俘虏，西突厥国人拥立鞅素特勒的儿子为可汗，这就是泥利可汗。泥利可汗去世后，他的儿子达漫即位，号称处罗可汗。他的母亲向氏，本来是中国人，后来改嫁给泥利可汗的弟弟婆实特勒。开皇末年，婆实特勒与向氏入朝，恰逢达头可汗叛乱，于是留在长安，居住在鸿胪寺。处罗可汗大多居住在乌孙的旧地，治理不当，国内百姓大多反叛，又被铁勒部落围困。铁勒是匈奴的后裔，部族种类最多，有仆骨、同罗、契苾、薛延陀等部落，他们的酋长都号称俟斤。虽然部族姓氏不同，但都统称为铁勒，大致与突厥风俗相同，以劫掠为生，没有统一的大君主，分别隶属于东、西两突厥。这一年，处罗可汗率领军队进攻铁勒各部落，征收沉重的赋税，又猜忌薛延陀部落，担心他们发动叛乱，于是召集薛延陀的数百名酋长，将他们全部杀死。于是铁勒各部落都反叛了，拥立俟利发俟斤契苾歌楞为莫何可汗，又拥立薛延陀俟斤字也咥为小可汗，与处罗可汗交战，多次打败他。莫何可汗勇猛刚毅，无与伦比，很得民心，被邻国所畏惧，伊吾、高昌、焉耆都归附了他。
到了公元606年春季，正月辛酉日，东京建成，晋升将作大匠宇文恺为开府仪同三司。
丁卯日，派遣十位使者合并精简各州的机构。
二月丙戌