吕不韦因嫪毐叛乱而受到牵连，被罢免相邦之位，贬到河南。吕不韦到达河南后，仍有万千宾客相迎，这令嬴政十分反感。
吕不韦究竟是不是秦王嬴政的亲生父亲？
首先要知道吕不韦将赵姬送给嬴异人的时间和目的。
吕不韦的目的很简单，是想通过送赵姬取得嬴异人的信任，同时通过嬴异人回去继承秦国国君之位而使自己飞黄腾达。这在之前不是没有先例，秦国一直是一个开明的国度，很多东方六国的人都在秦国做过国相，秦国的客卿制度是它们引进人才的一个重要手段，吕不韦就是想通过嬴异人搭上这条船。
那么关于赵姬被送过去的时候，有没有怀孕的问题，就要看实际情况和吕不韦的动机了。
首先看动机，如果吕不韦想通过这种方式篡取秦国的王权，那么后来他就应该和秦始皇一条心的治理好秦国。但实际上他却和秦始皇因为权力之争而翻脸，最终被处死。所以吕不韦的动机只是想自己独揽大权，根本无暇顾及下一代的问题，何况这样做还会冒很大的风险，一旦嬴异人发现，将会失去对吕不韦的信任。
再来看当时的实际情况，吕不韦讨好嬴异人是计划内的事情，机会是刻不容缓的，他不可能等到赵姬怀了孕才送过去，而且能查出怀孕的话就应该有妊娠反应了，嬴异人不可能蠢到连这都看不出来。还有一点，如果秦始皇是吕不韦的孩子，他的长相肯定和吕不韦多少有些相似，当然也可能像赵姬，但肯定和嬴异人一点关系都没有，嬴异人难道不产生怀疑吗？
还有一个重要的事实可以肯定：秦始皇绝对不是吕不韦的儿子！
就是在赵国遭遇“长平之败”后，被秦军趁势进军围了国都邯郸，当时吕不韦及嬴异人一家都在邯郸，形势对嬴异人非常不利。关键时候，吕不韦想法带着嬴异人潜逃出了邯郸，投奔秦军阵前才回到秦国。而赵姬母子则被抛弃在了邯郸，如果不是她们命大，估计早被赵王杀死泄愤了。直到嬴异人被立为秦国太子后，才从赵国接回赵姬母子（此时两国停火）。如果秦始皇真是吕不韦的儿子，那么作为吕不韦计划的一部份，他不可能将秦始皇抛弃在危险的赵国，这样岂不是前功尽弃？
公元前235年，吕不韦又被贬谪到蜀地。吕不韦接到旨意后，矛盾万分，明白秦王嬴政生性暴戾高傲，自己难再活命，眼看自己费尽心机几十年的功绩宣告破产，吕不韦绝望之中饮鸩自尽。
而秦王嬴政看着将要自裁的吕不韦，问出了天下人都好奇的话。
“究竟你到底是不是寡人的生父？”秦王嬴政双眼通红地看着曾经风光无限的秦相吕不韦。
“怎么可能？当年大王出生之时，我和先王曾经当场滴血验亲，证实大王的确是嬴氏血脉，从此君臣之间再无芥蒂。”吕不韦苦笑地解释道。
“既然如此，你为何从未公开辩解？”秦王嬴政大惑不解地追问道。
“大王曾经当着满朝大臣的面当场滴血验亲，不是已经证实了么？老臣的辩解还有用吗？谣言止于智者，就像樊於期和成蛟，他们为了造反，只不过想找一个合适的借口罢了。”吕不韦接着唉声叹息道。
“两代先王的去世是不是你下的毒手？”秦王嬴政立即又问道，双目爆发出仇恨的火光。
“大王也太看得起老臣了，谋害两代秦王可是诛九族的死罪。再说嬴姓宗室历来不缺体弱多病而早逝的，只不过有人想对付老臣，欲加之罪何患无辞？”吕不韦彻底叫屈起来。
“你权倾朝野，可曾想过取而代之？”秦王嬴政接续问道。
“老夫有没有想过，并不重要！重要的是老夫根本没有机会成功。秦国排外势力太强了，无论是商鞅、公孙衍，还是张仪、范雎，哪怕是芈姓外戚，都没有机会胜过秦国本土势力。这就是现实！”吕不韦苦笑道，“老臣不过是一个商人，不会冒那么大的风险，去谋取根本得不到的东西。”
“看在你这么多年的苦劳份上，寡人会放过你的家人，你安心地去吧。”秦王嬴政默默站了一会，留下一杯毒酒，飘然而去。
吕不韦死后，秦王嬴政听从秦国贵族所言，下了《逐客书》，逐出六国食客。