诚如杨坚所料想的那般大隋这几年风调雨顺，五谷丰登。杨坚则令高颎在淮河和汉江负责督造战舰，为伐陈做准备。
正当大隋恢复国力，国势蒸蒸日上之际，李德林和苏威的矛盾却日益凸显，已经到了不可调和的地步。
杨坚这几年不仅亲自巡幸四方，体察民情，还经常派使臣巡省地方，及时了解民间苦情，也格外重视选拔人才，考察吏治。新年刚刚过完，杨坚便派十使节巡省天下，以苏威为大使巡省山东，毕竟收复中原不过十余年，杨坚急于要了解山东民情，须加强对山东地区的治理。
苏威回到京师后便奏疏杨坚说山东地区多技巧、商贩和乐户之家，造成百姓脱离乡村，游食于城市，营利生奸，风俗恶险，这是滋生****的根源，也是齐国腐败衰亡的原因，奏请以关中之法进一步加强对山东地区的管制。
杨坚明白朝廷下诏整治乡村在山东地区设立三长制度，但是效果并不是太理想，杨坚始终对山东放心不下，对山东地区也始终保持高度的警惕。苏威的看法正与杨坚也是不谋而合。
“苏爱卿啊，朕之所以让你巡视山东，就是因为朕推行三长制度，整治乡村，如今关中地区秩序井然，盗贼不起，百姓勤劳顺从，然而山东地区推行的效果却不甚明显，朕甚为忧虑啊。”杨坚召见苏威道。
“皇上，您整治乡村的力度不可谓不大，之所以效果不甚明显，乃是皇上没有抓住主要脉络，皇上应该抑制工商业的发展，继续检括浮浪人口，使他们归籍务农，安心生产。士农工商，不可颠倒，还望皇上三思。”
“这么说，爱卿可有良策？”
“皇上，臣认为临街店舍，乃求利之徒，不符合大隋励行耕战鼓励农本的国策，皇上应该下诏将临街店舍加以拆除，断绝他们追逐利润的生计，遣散回乡务农。这才是釜底抽薪的办法。“
杨坚听后心中大为赞同，但同时也很犹豫，“若是这样恐怕便是要滋扰百姓了，与民不便吧。”
苏威奏道：“皇上，如果有想继续经营者，可令他们拆毁旧店，令他们迁往远离道路和远离州县中心的偏僻地段经营。并且官府要将他们登录于市籍，另行造册，对他们实行严格管控。皇上，臣认为这些人实在是大隋安定的隐患，他们毫无羞耻之心，为了利益，置皇上诏令于不顾，倒腾一些稀奇珍玩，令大隋的达官贵人竞相追逐，趋之若鹜，从而助长了大隋的奢侈之风，与皇上提倡勤俭节约背道而驰，皇上现在就应该防微杜渐，加以杜绝，否则的话，只会助长大隋的骄奢淫逸之风。”
杨坚听后大为赞同，然而李德林闻讯后却大为惊愕，苦苦劝谏杨坚放弃这一愚蠢的做法，然而杨坚终不为所动。
其他朝臣闻知苏威居然向杨坚献出这等计策，都是极为愤慨，北魏皇族武川元老元善当面向杨坚坦言相告：苏威求名太甚，没有宰相的才气和肚量，托付社稷者唯有高颎。
杨坚见群臣反对一时也是颇为犹豫，便问询于高颎。高颎内心也并不赞同苏威这一操之过急的做法，但高颎早已揣摩出杨坚的心思，便违心地表示赞同。杨坚得到了高颎支持的态度后便放下心来，对于朝臣的劝谏杨坚便不予理会，反而将苏威升任为吏部尚书。众臣子见杨坚这么做便明白了杨坚的态度，只好沉默了下来。
苏威不久又向杨坚奏疏要把农民挨家挨户剩余的粮食登记造册，作成“余粮薄”，全面掌控百姓的经济状况，若是发生灾荒，朝廷粮库备用不足可以征调农民余粮。
苏威的这一奏疏更是让群臣瞠目结舌，杨坚作为帝王自然想对社会各方面进行无所不在的控制，自然倾向于苏威的做法，群臣见杨坚如此信任苏威也都不好再公开反对。李德林对苏威的建议是极为恼火，多次面奏杨坚请求不要行如此苛粹扰民之举，但是都被杨坚拒绝，无济于事。
李德林见杨坚如此固执己见，陷入了深深地失望当中，不久又因为招降吐谷浑之事与杨坚发生了公开而激烈地争执，惹得杨坚恼火万分，李德林在失望之中便向杨坚辞病归养，一怒之下批准了李德林的请辞。
