一个月后，杨坚给杨爽这道奏章的答复下达到了并州：准杨爽所请，免除其河北道行军元帅之职，其军权暂由杨广代掌，调杨爽回京，仍兼任雍州牧。
杨广本筹算将这两封家书拜托给李渊带往长安，面交到杨坚、独孤伽罗手中，可次日天明转念一想，仍觉对李渊的为人信不过，便于送李渊率军返回东都的当天，改派了新任标兵营统领的赵才带着两封家书，骑快马返回了长安。
令杨广厥后越想越感到不安的是，李渊也仅仅向他问了这么一句，便就此打住，不再持续诘问下去了。
当晚送走李渊，杨广也没跟安如溪筹议，便提起笔，别离给杨坚和独孤伽罗各写了一封家书，在信中，杨广出于美意，成心躲避了提及是在太子杨勇的一手安排下，安如溪才从万善尼寺还了俗，重新回到了本身身边，只死力奖饰安如溪献言献策，为本身确保北境无虞进献颇多，立下了头功，恳请父皇母后允准他纳安如溪为妾。
李渊深知皇后独孤伽罗对原是宇文般若贴身侍女的安如溪非常记恨，此时又见杨广为了本身不向独孤伽罗禀报安如溪已跟从他来了并州，竟然说出要将本身强留在并州的话来，又觉好气，又是好笑，遂耐下心来劝杨广道：“娘娘于诸皇子中，最心疼的就是王爷你了，我劝王爷千万不要因为一名侍女而开罪了娘娘。如果王爷真故意留下她在身边，也请王爷趁早将此事照实向娘娘禀明，免得被娘娘先察知了此事，于王爷，于安如溪本人，都没有好处。”
杨广这些日子满脑门的心机全都放在了如何能策应杨爽雄师安然从关外返来这一件事上，底子未曾留意到李渊已发明安如溪守在本身身边，此时听李渊问起安如溪因何回到本身的身边，才蓦地惊觉，忙含糊其辞地对付他道：“原是我离京前，她受命还了俗，这才又回到我身边来的。表兄，请再饮一杯。”
前来赴宴的李彻、赵才等人因与杨广、李渊二人坐得相隔较远，又多喝了几杯，对他二人说的话并没听得很清楚，目睹得杨广起家向李渊施礼，误觉得杨广有送客之意，忙纷繁起家向杨告白辞。
“若溪于我出镇并州，保北境安宁着力颇多，且迟早有一日，我将禀明父皇、母后，正式纳她为妾，目下但请表兄回京晋见母后之时，不要在母前面前提及此事，阿纵就不堪感激了。”杨广听李渊竟劝本身趁早打发了安如溪，急得起家向李渊鞠躬行了一礼，哀告道。
待酒过三巡，饺子也端了上来，李渊左顾右盼，见四下无人，才靠近杨广，低低的声音向他问道：“王爷，这安如溪如何又回到了你的身边了呢？”
在裴矩不久前来并州传诏，要杨广回长安与后梁公主结婚之时，杨广本来筹算，真要躲不过这桩婚事的话，他便趁返回长安的机遇，劈面要求父皇、母后，允准本身同时迎娶安如溪过门，正式纳其为妾，今晚被李渊这么一说，他的心机不由随之活络了起来，天真地打起了向母后奏明此事，迎娶安如溪过门的快意算盘。
临时撂下杨爽返京不提，拐返来再说说李渊。
杨爽带领着残存的近五万人马，伴同李渊、李彻所部一道撤回关内，回想起此番本身率军北伐的前后颠末，不但一城一地未得，反而折损了将近三万人马，杨爽既羞且愧，回到并州城内，只仓促和杨广等人打了个照面，便将军权拜托给杨广，本身则回到住处，一病不起。