正巧此时李渊也在为自己的前途发愁，因为他收到了皇帝杨广的问责诏书，事情的起因是去年一年与东突厥作战的失利。
当时李渊刚刚上任不久，东突厥派骑兵进犯马邑郡，得到急报的李渊安排副留守长官高君雅会同马邑郡太守王仁恭出兵抵抗，结果屡战不利，后来就被御史到皇帝杨广那里参了一本。
现在皇帝追查了下来，虽然失利不是李渊的直接责任，但他毕竟是高君雅的上级，追查起来他是要负领导责任的。
现在他和高君雅都被暂停职务，等候调查。
听说李渊被暂停职务，李世民觉得机会已经来临，壮着胆子向父亲试探。
现在皇上无道，民变四起，晋阳城外都是战场，如果您还拘泥于做臣属的小节上，下有盗匪你杀不完，上有皇帝的严刑在等着你，危险时刻有可能来临。
然而如果现在起义，反而可以转危为安，这可是天赐良机，不能错过！听完儿子的话，李渊吃了一惊，他知道儿子在背后做小动作，但是他不知道已经筹划到这个地步了。
李渊顿时表现得很愤怒：汝安得为此言，吾今执汝以告县官！他作势拿起笔，却又放下了，无奈地对李世民说：吾岂忍告汝，汝慎勿出口！李世民走后，李渊陷入了沉思，他知道儿子的话很有道理，然而起兵的风险太大了，自己承担得起吗？第二天李世民又来了，父子间又有了一次深谈。
李世民缓缓地对父亲说：现在乱民越来越多，国家已经失控，以父亲您的一己之力，能把盗匪都抓完吗？即使都抓完又怎么样？太仆卿杨义臣不就是一个例子吗？他剿匪算成功吧，可现在呢，还不是被皇帝冷落，朝不保夕。
再说现在外边都在传李姓当王，右骁卫大将军李浑没有什么过失就被满门抄斩，现在皇帝对李姓的大臣和将军都起了杀机，父亲您还以为自己高枕无忧吗？眼下之计只有采用我昨天说的方法才能转危为安，事不宜迟，不要犹豫了！其实不用李世民说，李渊也很清楚这些道理，他知道，无论是在战场，还是在现实中，只有刀把握在自己手里才是最安全的。
如果刀把握在别人的手里，需要依赖别人的宽恕才能活命，那就始终是不安全的。
李渊悠悠地对李世民说：吾一夕思汝言，亦大有理。
今日破家亡躯亦由汝，化家为国亦由汝矣！这是李渊第一次比较清楚的表态，实际上他知道，不到万不得已决不能造反，实在是已经没有安全感了，那就跟儿子一起反了。
李渊正在烦恼的时候，老友裴寂又来了，裴寂也是来做他的工作的。
裴寂先给他交了一个底，这此交底让李渊吓了一跳。
裴寂告诉李渊，上次喝酒之后他安排陪李渊上床的那两个美女其实是晋阳宫的宫女，也就是说李渊睡了皇帝杨广的宫女，给皇帝戴了两顶绿帽子。
裴寂的话让李渊直冒冷汗，侵犯宫女可是死罪啊，那是给皇帝戴绿帽子啊！看李渊有些含糊，裴寂又加了一把火：你家二小子李世民最近正在私下招募兵马，打算创立大业，这事如果让皇帝知道就是死罪；我安排宫女陪侍你，如果让皇帝知道也是死罪。
我跟世民已经通过气了，我们决定一起干，就差你表个态了！看着一本正经的裴寂，李渊意识到，自己是被裴寂和自己的儿子算计了，只可惜他们的算计多余了。
即使他们不算计，不筹划，李渊也在心里自己筹划，他比李世民他们更清楚国内的形势，至于直指关中的布局他也曾盘算过，别忘了当年杨玄感起义的全过程他都关注过，杨玄感的棋没做活，主要就是关中的眼没有做活。