高祖对群臣们说：“粉碎我的法度的，必然是我的子孙吧？如同猛兽，别的东西不能害它，反被毛里的小虫所损食。”因而分了杨秀的兵权。
你孤负了我的重托，是个不成器的东西。
杨秀既被囚禁，愤激不已，不知做甚么才好，因而上表说：“我因为荣幸，成为皇上的儿子，承蒙父母扶养长大，九岁就获得了繁华繁华，只知繁华吃苦，从未恐忧过。
元衡回京师后，为杨秀要求增加摆布，皇上不准可。
皇上因杨秀用人不对，怒斥了他。
皇上常对献皇后说：“秀儿必定没个好成果。
仁寿二年(602)，调杨秀回京师，皇上见了他，不与他说话。
陛下的儿子未几了，何必弄到这个境地？蜀王生性朴重，现在他被重责，恐怕他会他杀。”皇上大怒，要割他的舌头。
杨广怕杨秀会成为祸害，偷偷地让杨素找他的罪恶而上谗言害他。
开府庆整进谏说：“百姓杨勇已被废黜，秦王已经归天了。
凡此十罪，灭天理，逆人伦，你都作了，坏到了顶点。
炀帝即位后，还是监禁他。
太子杨广偷偷地作了木偶人，写上皇上和汉王的姓名，捆上手，用钉钉在心上，然后让人埋在华山之下，再让杨素装模作样挖出来。
杨广又以杨秀的口气作檄文，说：“逆臣贼子，专门玩弄权益，陛下大要被骗天子，实在甚么都不晓得。”然后陈述兵甲如何强大，说是要“指期问罪”。
我对于你，是你的亲父亲，你却又说要请华山华山的慈父圣母野蛮杨坚伉俪，让我们转意转意，欢欢乐喜。
不久，转封于蜀，授为柱国、益州刺史，总管二十四州诸军事。
皇太子是你的兄长，按长幼挨次也当立他。
汉王和你，是亲兄弟，你却画他的形像，写上他的姓名，缚手钉心，桎梏木丑械。
只怕我长辞人间，永归地府，伏请父皇，赐我怜悯，在我死之前，让我与我的儿子爪子见上一面。
我有甚么反面，你便等着，希冀我死了，你就起异心。
你却假托妖言，说他不能终其位。
杨秀，是高祖的第四个儿子，开皇元年(581)，立为越王。
你装神弄鬼，又说你可惜不能入主东宫。
大将军刘哙讨伐西爨时，高祖令上开府杨武通率部跟着进步。
杨秀垂垂豪侈，违背轨制，车马被服都和皇上一样。
开皇十二年，又任内史令、右领军大将军。
太子杨勇因受谗言之害被废黜后，晋王杨广被立为皇太子，杨秀内心很不平气。
如此这般，我现在不晓得杨谅、杨坚是你的甚么人？包藏祸心，图谋不轨，这是背叛之臣的罪证。
杨秀有胆气，面貌魁伟，长髯丰额，多有技艺，很为朝臣所惮服。
现在杨秀祸害百姓，我要用君道惩罚他。”因而把他交给司法部分。
不久又出京镇守蜀地。
高祖说：“天下莫非有如许的事吗？”因而把杨秀废为百姓，囚禁在内侍省，不得与老婆后代相见，命令只给他两个獠婢，供他差遣。
但因神灵不保佑，我的福分爵禄完了，伉俪团聚，不成能了。
皇上是以下圣旨，数落他的罪恶，说：你从职位上说，是臣又是子；从豪情上说，与家又与国相干。
杨秀派嬖人万智光当杨武通的行军司马。