谢清知此事没法挽回，便上表请辞，文帝准了。至此宦海新贵变成白身，当年的门庭若市，变成门可罗雀。当年墨客意气至此已没法挽回。谢清闭门思考苦读。读了圣贤书三十年的谢清，此时也不由对信奉有了思疑。当年苦苦寻求的圣贤之道为何如此。阔别了政治斗争的他，开端放心读书，苦苦思考答案。
太祖金口一开，便要将其间宝地赐给当年荡平天下第一谋士江合，旺其子孙后代。江合当是时已位极人臣，宰执天下，深谙为臣之道。本身已经位极人臣，后代子孙能够安然已是最好的成果，便回绝了，言：“既然卿相不竭，何不在其间兴书院，臣请在此建一书院，为国育才。”