陈听说好贤则昌，好色则亡。如今陛下好色不好贤，太监一出，天下人都知道陛下是淫色之主。苏威乃是先皇老臣，又因为进谏而被免职，百官已经都知道陛下是不正之君。百官在上面阻止，万民在下面埋怨，江山怎么能够安稳呢？”炀帝说道：“朕既然身为天子，也是万方之主，不就是选几个美女吗？又不是什么大过错。爱卿为何这么责备我呢！”杨素说道：“陛下坐享其成，安享富贵，哪里知道创业的艰难！先帝与老臣，龙争虎斗，不知费了多少心力，方才打下这座江山。又经开皇二十年勤俭节约，天下才如此太平。陛下登极不到一年，便要宣淫纵欲，驱赶老臣，安有不败之理！现在如果不听老臣之言，恐百官有变。一旦祸起萧墙，就是后悔也来不及了。”说完转身要走。炀帝说道：“爱卿留步，容朕再想想。”杨素说道：“陛下如果执迷不悟，老臣就先派人把这十个太监拿下，以美色惑君的罪名问罪。陛下莫怪老臣鲁莽。”炀帝见杨素话头不妙，知道选美女的事要黄了，只得勉强说道：“既然爱卿忠言苦劝，朕没有不从之理！”就传旨收回许廷辅等太监的成命，苏威官复原职。杨素这才谢恩回去。正是：
多欲君王唯好色，擅权臣子敢欺君。
可怜名分何曾定，富便骄奢强便尊。
炀帝被杨素抵触了一番，气得目瞪口呆，气呼呼地回宫以后，对萧后说道：“杨素这老贼，欺朕太甚！一开口就气势凌人，一点都不顾及君臣体面，必须诛灭他九族，方能解恨！”萧后说道，“杨素敢如此横行的原因，只是仗着兵权在手，又欺陛下不曾经历政事，陛下何不留心治国，也像先帝一样每天和百官讲论，亲揽朝纲，培养信得过的大臣，慢慢削了他的兵权，然后再杀他也不晚。”炀帝说道：“御妻之言，正合朕心。”第二天炀帝早早地来到朝堂，每一件事都要亲自裁定。原来隋朝的天下多亏文帝二十年节俭治化，不但天下十分富足，而且边境也很安定，四方的属国都年年进贡，岁岁来朝。也有进明珠异宝的，也有进虎豹犀象的，也有贡名马的，也有献美