但是，杨广不想看到的局面却在他和张、王两位仆射构和政务的同时就已经呈现了。享有专悃之权的河北道行军元帅杨爽部下的前锋大将，行军总管燕荣已带领两万先头军队北出雁门关，进驻到了百里以外的白道州，拟待杨爽亲率雄师赶到白道州时，即持续向北挺进，锋芒直指都斤山南面的突厥重镇――五原城。
王韶也起家拱手道：“王爷所言甚是，关东世家中以河北诸州府世家豪右权势最为庞大，像范阳卢氏、赵郡李氏如许的天下高门望族，其门人故吏可谓是遍及朝野，已渐成尾大不掉之势，如不采取雷霆手腕严加束缚、整饬，今后必成大祸。如王爷方才所说，简拔官员到河北任职，慢慢裁汰旧齐故吏固是一法，但如能收拢河北诸世家豪右之心，使其为朝廷效命，岂不更加便利之法？”
“是收拢其为朝廷所用也罢，是采取雷霆手腕严加整饬也罢，都只能待北境局势规复安静以火线能动手停止。两位仆射既已回到并州，不知可曾去见过行军元帅卫王？”杨广对王韶的建议未置可否，转而问起他们回城后是否去见过杨爽的事来了。
在病榻前，杨广听罢两位行台仆射关于此番分赴诸州催促规复春耕环境的禀报，遂向他们说了然本身欲重修梵刹、重倡佛法的筹算，以收罗两位首要助手的定见。
裴矩带着杨广叔侄的嘱托，仓促分开并州返回长安后的第三天，两位行台仆射张威和王韶就回到了并州。
“下官等传闻王爷坠马受伤之事，一回到并州，就赶来向王爷复命，尚未与卫王殿下见过面。”
张威职掌行台吏部，听杨广直言不讳地揭出诸州府衙署和本地世家豪右通同、勾搭之事，自发脸面上很有些挂不住，忙起家向杨广赔罪道：“都是下官疏于管束，才会呈现如此局面，请王爷治下官渎职之罪。”
既然王韶主动提及了诸世家豪右会聚并州，索要家奴这件事，杨广便将此事的前后颠末向两位仆射报告了一遍，末端说道：“我受父皇重托，与两位仆射共同执掌河北道行台政务，诸世家豪右前此会聚并州，大有逼迫本王就范，承诺他们所提之要求之势，其背后若无诸州府衙署的暗中放纵和支撑，本王量他们决无此胆量。此次我欲重倡佛法，如诸州府衙署再与本地世家豪右相互勾搭，欲谋不轨，本王决不轻饶。”