在杨勇做着蠢事的时候，杨广开始控制住自己，让自己不去做那么令父母讨厌的事。
首先，他唯独与萧妃住在一起，不沾其她任何女子。
他这个做法，大得独孤皇后之心，觉得杨广这个儿子不错，三观和自己一样，当下对皇帝“数称广贤。”
其次，对皇帝信任的大臣，倾心与交。
所以，杨坚与大臣们谈论自己的儿子时，大臣都称赞杨广，让杨广在父皇那里更得好印象。
杨坚见大家都说杨广的好话，当下决定去杨广家看看。
他和皇后来到了杨广府邸，杨广与萧妃迎门接引，摆下美馔，施与厚礼。
那些往来的婢仆，没有不称赞杨广仁孝的。
杨广在父母每次来的时候，都把家里的美女藏在别室，只留下老丑的，穿着老旧的衣服，服侍在左右；屏帐也改用缣素，乐器之弦，上面布满尘埃。
杨坚见了，觉得杨广不好声色，又非常简朴，当下还宫，对那些侍臣夸赞杨广，心中很高兴。
侍臣听了，都为皇帝有如此佳儿庆贺。
杨坚对杨广也开始喜欢得“特异诸子，”与其他儿子不一样了！
这对杨勇来说，是一个危险的信号！
杨广知道，是该出手害杨勇的时候了！
他在出任为扬州总管时，入宫拜别母后，伏地流涕。
独孤皇后见杨广这么有孝心，也为之泫然泣下。
杨广收起眼泪说：“儿臣性识愚昧，常常守着昆弟之意，却不知道什么得罪了太子，对我成怒，想要加害于我。儿臣每每恐怕谗谮生于投杼之时，鸩毒遇于杯勺之间，是以勤忧积念，惧履危亡。”
独孤皇后听了，忿然说：“我看他是渐渐忍耐不住了！我为他娶元氏女，他竟不以夫妇之礼对待，专宠阿云！前段时间，元妃遇毒而夭，我也不能去穷治，怎么也想不到他对你也想这样！我还活着，他就这样在！我死之后，他还不把你当鱼肉的！每当想到东宫竟无正嫡，至尊千秋万岁之后，派你们兄弟向阿云的儿子前再拜问讯，这是多么痛苦的一件事啊！”
杨广听了，知道不用再说什么了，当下再次拜下去，唯有呜咽不已。
独孤皇后也悲不自胜，心里决意要废除杨勇，立杨广为太子了！
这一刻的杨广，真是情商高啊，演起戏来，完全可以匹敌司马懿！
杨广去到扬州后，与安州总管宇文述有交往。
他问计于宇文述，宇文述说：“皇太子失爱已久，令德不闻于天下。您仁孝著称，才能盖世，数经将领，频有大功；主上和内宫，咸所钟爱，四海之望，实归于您。然而，废立者，国家大事，处人父子骨肉之间，不是那么容易谋划啊。然而，能移主上之意的，只有杨素。而杨素所与谋划的，只有他的弟弟杨约。我很了解杨约，请去京师，与杨约相见，共图大事！”
杨广听了很高兴，当下给他很多金宝，让他入关。
杨约为大理少卿，杨素的所有行为，都要先筹划于杨约，然后再实行。
宇文述把杨约请了出去，把器玩放在他面前，与他畅聊，因而赌博。
宇文述假装不胜，所带的金宝尽输给杨约。
杨约所得很多，当下感谢宇文述。
宇文述这才说：“其实，这些都是晋王所赐，要我与你为欢乐而已。”
杨约听了大惊，说：“这是什么意思呢？”
宇文述便把杨广的意思说了，又说：“夫守正履道，固人臣之常致；反经合义，亦达者之令图。自古贤人君子，莫不与时消息以避祸患。公之兄弟，功名盖世，当途用事有年矣，朝臣为足下家所屈辱者，可胜数哉！又，储后以所欲不行，每切齿于执政；公虽自结于人主，而欲危公者固亦多矣！主上一旦弃群臣，公亦何以取庇！今皇太子失爱于皇后，主上素有废黜之心，此公所知也。今若请立晋王，在贤兄之口耳。诚能因此时建大功，王必永铭骨髓，斯则去累卵之危，成太山之安也。”
杨约听了，深以为然，当下去跟杨素说。
杨素听了，大喜，抚掌说：“我之智思，没有达到这一层啊，幸好有你启发我！”
杨约知道他计策实行了，当下又对杨素说：“如今皇后之言，上无不用，应当趁机会早自结托，就可以长保荣禄，传祚子孙。兄长若果迟疑，一旦有变，让太子用事，恐怕祸害很快就到了！”
杨素听了，听从他的话。
过了几天，杨素入侍，对独孤皇后说：“晋王孝悌恭俭，有类至尊。”
他这话，要是皇后不想废太子的话，这话就是乱政的大罪，就是在干预皇家内政，就是灭族的大罪！
可是，独孤皇后也想着废了太子，所以，她哭泣着说：“公言是也！我儿大孝爱！每次听说皇帝和我遣内使到他府邸，必定迎于境首；言及分离，没有不哭泣的。他新妇也很可爱，我派婢去，常常与她们同寝共食。而太子只知道与阿云对坐，终日酣宴，昵近小人，疑阻骨肉！我所以更加可怜我的儿子杨广，常常怕他被人潜杀了！”
杨素听见皇后这样说，更加大力诋毁太子不才了。
独孤皇后听了，便赠送一些金子给杨素，让他和皇帝说太子废立之事。
这时的杨勇，可谓岌岌可危了！
不过，他还没到悬崖边上，因为，他还有一线生机，那就是杨坚的决心还没下，还可以争取。
杨广虽然厉害，但是，只要隋文帝杨坚没有下定决心，他发展再多的人都没用！
杨勇这时候如果有去争取父亲的心，他还是有机会继续当这个太子的。
可惜的是，杨勇的智商和情商不够高，终究还是无法挽回走向悬崖的局面。
他站在悬崖边上了，还没知道前面的危险！
他的前面，只要后面有人一推，他将掉入深渊，死无葬身之地！
自古以来，太子失势，除了自己死之外，还要连累家人，他的一脉就要绝了！