正当皇帝高兴的时候，就有人泼冷水了。．』．中书令李渊就说道：“启奏皇上，现在虽然是太平之年，那也是先皇几十年兢兢业业，勤俭守家的结果，原来的时候国库充盈，一度达到9ooo亿两银子，是何等的富裕，可是近几年来，由于朝廷大兴土木，修建皇陵不说，还挖掘运河，修建天庭园，加上几个省份有天灾，不但税收收不上来，国库银子已经不足5ooo万两了，足足去了一半，现在的消耗有点快了，我建议皇上还是勤俭持家，重整先皇的雄风”。
李渊一说，皇帝杨广就不高兴了，说了几件事都是自己的不对，无非就是自己不会过日子，说的厉害一些就是骄奢淫逸，只是李渊不敢说，自己猜也猜的出来，皇帝就气呼呼的问大殿之上的百官：“刚才李渊说我不会过日子，无非就是嫌我花钱多，可是钱就是用来花的，钱不花，在国库里干什么，你们说说，我说的对不对？”。户部，吏部，工部三个大臣先赞成，工部沈括就道：“李大人此言差亦，皇上富甲天下，容阔四海，无非就是花点小钱，那银子就是9ooo亿两也罢，5ooo亿两也罢，放在国库里生锈吗？皇上修建运河，是为了南北大通途，修建天庭园是为了彰显国威，修建皇陵更是人之常情，难道李大人自己就不修剪陵墓了，怎么还说皇上的不对？”。
吏部尚书许庆奎也觉得李渊是在说自己，自己主持修建大运河，可是没少收到回扣，每年的几亿两银子的回扣，要是查出来可是掉脑袋的事情，许庆奎可是不愿意：“李大人此话差亦，修建大运河是在为民造福，这是皇上的英明决断，可不是我们做臣子对策妄自揣测，我主持大运河的修整，这也是一项苦差事，李大人这些话有些影射之嫌啊？”。礼部尚书胡学义更是气愤：“启奏皇上，李渊纯粹是大逆不道，修建皇陵是百年大计，他竟然攻击皇上，说皇上乱花国库的银两，简直就是不臣之心，我建议皇上，讲李渊打入死牢，斩立决”。
礼部尚书胡学义一说，吏部，工部，户部就随声迎合，李渊就大怒：“你们这些奸臣，简直就是在蛊惑皇上，要皇上做昏君吗？”，皇帝一听就怒了：“大胆李渊，竟然说朕是昏君，来人啊，打入天牢，秋后问斩”，就只见御林军就上来，就按住李渊，就要拖出去，李渊气急大骂：“昏君，既然不听忠言，早晚有亡国之恨”，皇帝更是大怒：“竟敢咒我大隋灭亡，拖出去，斩立决”。这是刑部尚书宇文化及就站出来了：“启奏皇上，太平盛世，斩杀大臣不吉利，不如将李渊降级使用，现在朔州贫困，天灾不断，不如要李渊