上天，我做错了什么，你要这样惩罚我？这个以“刚毅”闻名的皇帝终于绷不住劲了。被围在雁门的他，当看到幼子杨杲被城外飞来的箭头吓得发抖时，惭愧、悔恨、委屈一时袭来，当着挤在临时朝堂里的大臣们的面，他一把抱住小小的杨杲，号啕大哭，声达户外，哭得“目尽肿”。人们一时不知所措，所有人都是头一次看到了杨广的眼泪。他是哭自己保护不了孩子，还是哭自己这几年的不顺利？
就在皇帝号啕大哭的那一刻，他的大臣们已经看清了这个号称天纵圣明的政治家，骨子里毕竟还是生长于深宫之中妇人之手的贵公子。虽然聪明无比，但是毕竟没有经历过真正的风霜磨炼，缺乏承担大业梦想的坚韧顽强。包括李渊在内的诸多贵族已经摸透了杨广的底细：起兵的时候已经到了，看来皇帝又可以轮流做了。杨玄感失败，是因为第一个出头的椽子必然烂掉。但是，如果是第二个、第三个，那可就不一样了。命运的一次又一次打击下，杨广的性格中的负面因素暴露得越来越多。
大业十二年元旦，大隋朝堂上已经见不到一个外国使臣了。这与大业五年诸国使臣云集洛阳的场面形成强烈对比。甚至各地的官员来得都很少，原因是各地农民起义阻隔，许多大臣们没法赶到首都。这是杨广过的最冷冷清清的一个年。
眼看着自己竭尽全力辛苦建立起的雄伟大业像个豆腐渣工程一样稀里哗啦地倒下，杨广的心气也随之散了。事实上，虽然东征高丽失败，但是杨广的命运还远远没有到灭国的边缘。农民军的战斗力相当有限。虽然号称四十八家之多，但他们一直没能联合起来，甚至都没有能力出省作战。如果杨广潜下心来，痛定思痛，励精图治，力挽狂澜，他还是有能力在政治高层闪展腾挪。只要能防止贵族们纷纷起兵，维持住帝国政治的平衡，隋军还是有能力消灭各地农民起义的烈火。这样，虽然大业已去，但是他毕竟还能安享富贵尊荣，在历史上以平庸之主收局。然而他却没心思去做这些了。
他原本是一个极其心高气傲的人。他的自我期待是一个将要绘出世界上最完美图画的绝世艺术家。因此，当这幅图画失败了，他怎么还有兴趣在它上面修修补补，把老鹰改画成一只乌鸦，以求卖几个钱花花度此一生？
艺术家的性格决定了他将走极端。不做最好，就做最坏，他唯一忍受不了的是平庸。他，一个原本打造传世金碗的大匠，此时不屑于去做为口奔忙的锔碗工。做不了千古一帝，他也没有心情去做一个辛苦维持的平庸帝王。
因此，在眼看天下分裂，自己在皇帝排行榜上不可能有名次之后，杨广有点破罐破摔了。命运已经不是原先许诺给他的命运，前途也已经不再是预想的前途，他对上天从感激变成了抱怨，他像一个没有要到糖吃的小孩子一样躺在地上，不想起来。在大业十一年雁门被围之后，我们看到他与以前判若两人。连续的打击使他那贵公子娇嫩的神经受到了不可避免的伤害。从大业八年以后，杨广“每夜眠，恒惊悸，云有贼，令数妇摇抚，乃得眠”。（《资治通鉴》卷一百八十二）他对治国有点心不在焉。大业十一年前，他每天上朝，每日都在处理公务。大业十一年后，他开始三天打鱼，两天晒网了。虽然天下越来越乱，他自己也危在旦夕，他却鼓不起心气去为自己的生存而奋斗。他对政治越来越松懈，越来越放任。甚至，对自己的生命，他也有点三心二意，不那么周密地去考虑。
不知道什么时候，那个原本不喜欢饮酒的皇帝领略了美酒的好处。他下诏命各地官员供献本地名酒，自己一一品尝，定出高下。他醉酒的次数越来越多，有一次在长乐宫独饮大醉后赋了一首五言诗，诗文今已失传，只留下最后两句：
徒有归飞心，无复因风力。（《文献通考》卷三百九）
杨广已经不再是那个双肩担起大业，只手擎起乾坤的杨广了。“气可鼓不可泄”，心气已消的他放弃了自我，投身到无边无际放任自流中，什么都不想，什么都不做，只听任生理欲望控制自己、填充自己、遮蔽自己。既然命运是由上天控制，既然上天说给就给，说不给就不给，那么一切由上天决定吧！他其实是在向上天撒娇。在冥冥中，他还期望上天那神秘的力量什么时候能再光顾他，把他推出失意的泥淖。
眼看着皇帝越来越颓废，政治越来越混乱，昔日贵族们摩拳擦掌。从雁门之围后，北方草原上的马匹价格一路飙长，以唐国公李渊为代表的各地贵族纷纷招兵买马。大业十三年，他们感觉时机已经成熟，隋鹰扬郎将梁师都、马邑富豪刘武周、金城富豪校尉薜举、唐国公李渊、武威富豪李轨、萧梁子孙萧铣、江都通守王世充等手握重权的大臣不约而同，纷纷起兵，割据一方，众多世族亦加入其中。在闻听昔日贵族全部起来后，杨广的意志完全崩溃了。一直到死，杨广都认为他的真正敌人不是农民起义军。这些农民军不过是贵族们政治游戏的前奏和引子，真正的政治军事方向，最终还是得由贵族来把握。事实也证明了他的判断。正如参加了隋末起义的魏徵在《隋书》所说：“彼山东之群盗，多出厮役之中，无尺土之资，十家之产，岂有陈涉亡秦之志，张角乱汉之谋哉！皆苦于上欲无厌，下不堪命，饥寒交切，救死萑蒲。莫识旌旗什伍之容，安知行师用兵之势！但人自为战，众怒难犯，故攻无完城，野无横阵，星罗棋布，以千百数。豪杰因其机以动之，乘其势而用之，虽有勇敢之士，明智之将，连踵复没，莫之能御。”隋末三支实力最雄的农民军都难以和这些贵族军阀相抗衡，一旦交锋即土崩瓦解。瓦岗军失利于王世充，河北军被李世民一战而击溃，江淮军降于李渊，后虽又起兵亦旋即败亡。在隋末乱局中，最终还是贵族们得到了传国宝鼎。
杨广深知大势已去，不过他还不想死。他决定南逃。毕竟他即位前曾经在江南经营了十年，别处烽火四起，这里还算安静。做不了千古一帝，那么就干脆在秀丽的江南风光中了此一生吧！在国家一片混乱、大势岌岌可危之时，他却调集十郡数万兵力，在江苏常州一带为他建造宫苑，周围十二里，内为十六离宫，虽然比洛阳宫苑规模要小，但“奇丽过之”。
到过江南之后，杨广一头钻进离宫之内，万事不管，整天饮酒为乐。他把他的过人的聪明用来发明各种新奇的玩法上，其中最有名的一种玩法是广派宫人四处去抓萤火虫，得到数斛之多，装于布袋之中，夜里外出游玩时一齐放出，“光遍岩谷”，十分瑰丽。他命官员大量为他进奉民间美女，分为百房，每天由一房做主人，饮酒赋诗，以为笑乐。在天下水深火热之际，别人都是强颜欢笑，只有皇帝似乎真的乐在其中，诗酒会中，他做了数组颇为清新雅致的小词，其中最有名的一首如下：
求归不得去，真成遭个春。鸟声争劝酒，梅花笑杀人。（《隋书?五行志》）
在生命最后阶段的杨广内心其实是十分矛盾的。一方面，这个残缺的、不完美的、与自己的期望已经大相径庭的生命让他不再珍视；另一方面，他体内的欲望却依然强盛，他的感觉依然敏锐，他对生活中每一点滴的甜美都依依不舍。那个励精图治者变成了及时享乐主义者，他把自己剩下的生命目标定位为体验快乐。他经常“于苑中林亭间盛陈酒馔，敕燕王倓与钜、皛及高祖嫔御为一席，僧、尼、道士、女官为一席，帝与诸宠姬为一席，略相连接，罢朝即从之宴饮，更相劝侑，酒酣殽乱，靡所不至，以是为常。杨氏妇女之美者，往往进御。皛出入宫掖，不限门禁，至于妃嫔、公主皆有丑声，帝亦不之罪也”。（《资治通鉴》卷一百八十一）
不饮酒时，他常穿起短衣短裤，策杖步游，遍历台馆，细斟细酌每一处景致，直到天尽黑才止，“汲汲顾景，惟恐不足”。他知道，命运留给他体验这个世界的时间已经不多了。
最近有个片子“隋唐演义”，里面演杨广的是富大龙，演的怎么样不好说，有的人说演的好——把演义里面的杨广荒淫、嗜杀的本色，有的说演的差，跟土匪似的。事实上，正史里面的杨广根本就不是演义的形象，单说荒淫**，根本跟杨广不沾边，杨广是喜欢讲排场、好大喜功，大修宫室，按照礼制广选秀女入宫，但他本人却不是一个**之人，短短的十余年皇帝生涯，大半时间都是在巡视天下中度过，他所选的秀女大多成了摆设，宫妃张婕妤就是摆设之一。事实上，李渊却是个极**之人，在做臣子之时。他需要自己妻娘家窦家为后台，不敢过于放纵自己，所以让人看上去一副老实人的样子。但李渊做了皇帝后，便本性毕露，肆无忌惮地临幸原先隋朝的宫妃，其中又以张婕妤和尹德妃二人最受宠，她二人的父兄也因此飞黄腾达。结果到了隋唐演义和一些唐朝人写的书里面，变成了张婕妤和尹德妃二人主动**老实人李渊了，而且还说张婕妤和尹德妃和太子李建成有男女关系上的一腿。