此时是仁寿元年七月了。
太子杨广看到最终也没能害死李渊，让他辞任逃回了太原，心中多少还是有些懊恼，对宇文述意犹未尽的说道：“张麻子这计也确实是妙，可惜被李渊这厮最后还是逃脱了，保的全身家性命不说，还功成身退。他在父王面前还是有分量的人啊？万一有一天东山再起，就是祸患了。可惜还白白害了李浑一家替他送了命。”
宇文述看到太子还是不罢休，阴狠的神秘一笑，说道：“太子您看？这厮已经告老还乡了，也折腾不出什么花样了，您要是宅心仁厚说放过他，我们也就罢了；若觉得要斩草除根就不想放过他，下官还有一计，定可让李渊一家一个不留！”
太子笑道：“宇文兄，你心中早就有安排了？也不说出来。早用你的计谋，也就不用我们这么多人白白费了这么多周了！”
宇文述听了杨广如此说，急忙解释道：“太子殿下莫急，此计虽妙。但也是这个时点才可使用，用出来效果也才最好。”随即头凑到太子耳边低语了几句。
太子听完，连连击掌，大赞道：“宇文兄！妙计！妙计啊！此事成后定将他李氏一门女眷全都赐予你。”
但转念一想，接着说道：“但是李渊他怎么说也是一员猛将，也不失心机，此计恐怕没有那么容易成功吧？。”
宇文述接着答道：“以下官之计，一定不辱太子使命；就是万一有个变化，没能最终结果了李渊这厮。太子放心，这次也一定让这厮吓怕了，让他再也不敢想着出来做官了，我们也就一样安心了。”
杨广听了，点点头：“也罢，这两个结果，无论哪个结果都是极好的。就按宇文兄你说的来！”
接着两人你一言我一语，密谋到深夜，最终定下计策，誓要害死李渊方才罢了。
再说李渊这边，在朝中接到了任命他为河北道行台太原郡守的旨意，就好像得到了一块免死金牌，立刻打道回府并开始整顿行囊、安置府中下人等等，想要尽快离开这暗潮涌动的都城。
一大早，他坐在府邸门前的滴水檐下，望着满满一屋子常年跟着自己的下属，心情沉重，脸上显露出悲痛和不舍。他的双眼充满忧虑，目光柔和却又带着一丝坚定。眼角的皱纹凸显出他内心的沧桑，嘴唇紧闭，仿佛在强忍着无尽的哀伤。
他的手中握着一把扇子，轻轻摇晃，仿佛想借此挥去心头的阴霾。然而，扇子的声音在这样的氛围中显得异常寂寥，让人不禁心头一紧。他的手指关节因为紧握扇子而变得苍白，暴露出他内心的紧张和无奈。
每当他望向手下们，眼中都会闪过一丝不忍，那份深厚的情感让他的眼神变得越发温柔。然而，他又不得不做出决绝的决定，使得他的眼神中又夹杂着一丝无奈和哀求。
“诸位对我李渊有恩，一直跟随我左右。我李渊也是忠君职守之人，本想做个好官，好在京城也给诸位谋得个一官半职的，好让诸君终身有个依靠，也不枉各位跟随我多年。但如今，我李渊只能被迫离职，犹如丧家之犬，回到太原。各位都是有能力的人，你们大部分人就不要跟随我去太原了，在京城以你们的能力，还是能有所发展的。”他说罢，语气充满哀伤。
李渊为人耿直忠义，平日里就对属下诸多照料，众人大多都念着他的恩情，听到老爷这么说，一个个都是泪流满面，依依不舍。
看到属下如此对待自己，李渊更是感动的眼泪也夺眶而出。他强忍住泪水，用袖子擦干眼角的泪痕，接着说道：“诸君你们不必如此悲伤，我李渊就是今天不做官了，也不会要把你们抛弃了。我已经考虑了，现在有两条路给诸位选择：一是：家中有些资产的有田地可以耕种，有店铺可以维持生计的，就不必随我远去太原担惊受怕了。二是诸位在京城有亲人的，或者在京城有其他关系的，能谋得个一官半职的，也就都留在京城吧！这样对你们更好。剩下的诸位，如果在京城无亲无故，留下来也没有什么意义，愿意的话就跟着我一起去太原，我李渊无德无能，现在虎落平阳。但再怎么样，总也会给跟着我的各位谋个安身立命之所，请诸位放心。”
众多手下纷纷都站了出来，有许多人更是跃跃欲试，急切地表达自己的意愿：“小人愿意跟随老爷。”一时间只见李府人潮涌动，让人分辨不清谁是愿去的谁是去不了的。
唐公李渊早已经深思熟虑过了，于是吩咐众人：“请你们分成两波吧：愿意跟随我去太原的站在东边的台阶下，要留在长安不走的站在这西边台阶。”唐公一边吩咐，一边也忍不住暗暗的想：“愿意选择跟我这么远行，前途未卜的人。应该不会很多的。”
然而，结果却大大出乎他的意料，但凡只要能抽出身的人，都愿意跟随他去太原。有的人甚至先前都站上了西边台阶，想了想又转到东边去站定了，最终两边的人数大致差不多。
这时站在下边的众人纷纷私下议论：留下在长安的话，我们又都舍不得唐公，感觉对不起他的恩情；但是有些想去的人，却又迫于无奈，无法立刻离开长安城中的亲人、放弃仕途，以及生意上的牵绊，实在做不到，无法随行。
因此，同样是作为李渊的属下，西边队伍的人很是羡慕能放下一切站在东边序列，跟随唐公去往太原的人，觉得他们愿意放弃现在的一切所得，说不定未来会有更好的前程。
唐公望向站在西边的众人，问道：“各位都是决定要留守长安安家的吗？”
几位官员迈着谦卑的步伐，缓缓走近，脸上洋溢着感激之情。他们纷纷低头鞠躬，谦逊地说：“感谢大人之前的提拔，为小人谋得了一官半职，大人保重。”
其中一人也不好意思地低下头，说道：“小人在京城房产，都是大人之前资助资金所购得的，大人对在下实在是恩重如山，小人定终身铭记。”
另一位官员更是充满敬意地报告李渊：“我家田地也是大人之前慷慨赐予的，让我可以耕种养家。以后每年的钱粮收益部分，我都会如数上交大人，供您府中公用。”
他们的神情真挚，充满了对唐公李渊的敬仰和感激之情。
听完众人的禀告，唐公面带微笑。他果断地吩咐：“把箱子抬出来。”
补充道：“留下的各位，之前都对我李渊多有帮助，我定会终身铭记于心。在场各位，无论男女老少，按人分发每人棉布两匹，银子一锭。各位后会有期！”
见到这个时候李渊还给予奖励，众人欢呼雀跃，脸上洋溢着喜悦和感慨。他们忍不住惊叹：“大人真是仁慈宽厚，我们未能一直跟随大人，但他仍对我们这些普通人如此关心，真是宅心仁厚的好官啊。”他们的内心被唐公的慷慨所感动，不禁对这位领袖充满了敬意。
赏赐完毕后，唐公语气严肃地吩咐：“我既然已不在长安为官，日后你们更应该谨言慎行，遵守法度。切记，遵纪守法，不得有丝毫懈怠！”众人听后，纷纷跪拜谢恩，然后离去。
接着，唐公又将目光转向东边的一群人，关切地问：“你们在场的各位，都是确定打算随我一同去太原的吗？”
众人纷纷向前一步，齐声回答：“小的们追随大人。我们有的确实是全家老小几辈子一起生活的，但我们一家都愿意跟随老爷去太原，终生效忠大人。”
唐公微微点头，表示满意。他吩咐手下：“那就开启花名簿，给他们发放行粮和银两。但有一条，各位切记：途经各地不得骚扰百姓，哪怕是再便宜或不起眼的物件，都要与百姓公平交易，切勿强取豪夺，侵害百姓的利益。若是有人违反，必将严惩不贷。”
接着再简单的吩咐之后，唐公转身步入后堂，稍作休息。
窦夫人此时正怀着孕，脸上洋溢着即将回乡的喜悦，但同时也流露出一丝担忧。她迎向前去，说道：“老爷为官多年，伴君如伴虎。今天我们一家能安安稳稳的回归故乡，确实是件大喜事；但是我现在身怀六甲，万一路上车马劳顿，我的身体恐怕。。。而且分娩的日子就快临近，我觉得不行还是推迟半个月我们再启程吧。”
李渊眉头紧皱，忧虑地说：“夫人，当今圣上生性多疑，现在朝中又有奸人造谣生事，想把姓李的官员一网打尽。我们现在再在京城多待一天，就好像身处虎穴龙潭，随时可能出现不确定的风险。能在此刻请辞归乡，就已经是九死一生，最好的结局了。你还不知道李浑大人吗？他一门忠烈，却落得如此下场。现在全家想回去，都回不去了啊！我们一天都不能耽搁，要速速离去！”
窦夫人听了这番话，心中五味杂陈，默默无言地开始去准备行李了。
李渊一方面向同事和亲朋好友告别，一方面向朝廷请辞。很快就带着窦夫人、十六岁的大女儿一同乘坐四人抬的木轿子匆匆离开都城了。随行的还有同胞弟弟李道宗和长子李建成，二人骑着马，紧随其后。四十多个身强力壮的家丁组成的随行队伍，这些都是关西大汉，他们各个弓上弦、刀出鞘，小心翼翼地随行护送着一行人离开了长安。