嬴政出生后不久，秦国便派来了使者要把异人一家和吕不韦带回国。但刚刚经历长平惨败的赵孝成王赵丹显然没有心情和秦国人打交道，他没有答应秦使的请求。吕不韦得知这件事，就亲自求见赵丹，对他说：
“异人现在是秦王最宠爱的公子，连华阳夫人都想让他作儿子。但是假如秦国真的要攻打赵国，也不会因为一个公子的缘故而耽误灭赵大计，赵国不是空有人质了吗？但如果让异人回国，赵国再以厚礼好生相送，公子是不会忘记大王的恩义的。将来他一旦即位，赵国就有了与秦国和平相处的机会。”
赵丹觉得有道理，便同意过段时间放了异人。
然而，就在异人和吕不韦兴高采烈地收拾东西，准备回国的时候，秦赵两国又再次开战了。当年九月，秦将王陵率领二十万大军围攻邯郸，意图灭亡赵国。邯郸之战爆发了。
愤怒的赵丹收回了释放异人的命令，转而下令把异人和吕不韦给抓了起来，准备杀掉。赵丹还派人去搜捕赵姬和嬴政母子，幸好赵姬的父母有些钱财，想方设法把赵姬母子藏了起来。赵国的官兵这才没有找到他们。
异人和吕不韦两个大男人的处境就没有这么好了，他们随时随地都有可能被拉出去砍头祭旗。吕不韦想来想去，觉得这世界上就没有钱办不了的事情。于是，他拿出了自己所有的家当，买通了监牢内外的看守。在一天晚上带着异人越狱，逃到了城外的秦军大营里。王陵便把他俩送去了秦国。
但赵姬母子现在是没法跟着他俩回国了，异人和吕不韦只能等待将来的时机再接回他们。
然而，回到秦国的异人却没有受到父亲和华阳夫人的热情迎接，嬴柱本来就对这个儿子没什么感觉，而华阳夫人则是和异人不熟，虽然承诺要认异人为养子，但内心还有些不安，怕选错了人，就迟迟没有认异人为儿子。吕不韦就建议异人要在父亲和华阳夫人面前好好表现，打消他们的疑虑。
在吕不韦的策划下，异人开始变得非常懂事和乖巧，经常对父亲和华阳夫人嘘寒问暖，并表现自己聪明才智。有一天，异人特意穿上楚国的服装，前来向华阳夫人问安。华阳夫人是楚国人，一看到异人的打扮非常高兴，很快就和异人拉近了距离。不久之后，华阳夫人就正式认下异人为养子，并把他的名字改称“楚”。从此，异人有了第二个名字——“子楚”。
异人又找了个父亲空闲的时间，向他进言说：
“父亲也曾羁留过赵国，赵国豪杰之士知道您大名的不在少数。如今您回国了，他们都还惦念着您，可是陛下却连一个使臣未曾遣派去抚慰他们。孩儿担心他们会心生怨恨，希望父亲让边境城门迟开而早闭，严加盘查，防止有危险人物渗透。”
嬴柱觉得异人说的很有道理，对这个儿子有未雨绸缪的想法也是刮目相看，觉得异人是个聪明人。不久，他便在华阳夫人的劝说之下，把异人立为世子。当年的屌丝终于成功地咸鱼翻身，成了秦国王位第二顺位的继承人。
父亲回到了秦国，混得有声有色，但小嬴政和母亲这几年却只能赵国提心吊胆地过日子了。母子俩不仅要想办法不让赵国得官兵发现自己真实的身份，还要努力地让生活继续下去。在秦军围攻邯郸的这一年多时间里，城里物资紧缺，母子俩吃不饱穿不暖，还在襁褓里的小嬴政差点要被饿死。多亏外祖父一家家境殷实，能高价买到粮食，小嬴政才活过了围城的这段时间。
随着嬴政一点点的长大，赵姬是单身妈妈的身份让她受到了街坊邻居们的压力。人们传播着各种风言风语，说赵姬怎么样的不检点。还有不少人故意欺负赵姬孤儿寡母，用各种方式刁难他们母子。这让小嬴政经常看见母亲在家抹眼泪。
没有父亲的关爱，加上母亲又被街坊欺负，年幼的嬴政心里充满了怨恨，没有安全感。他开始变得脾气暴躁，对周围人缺少信任。小小年纪就显得很孤僻，和同龄人不合群，动不动就和人打架。
而母亲赵姬对嬴政也懒于管教，生性放荡的她耐不住寂寞，经常找男人私通。这种事情，小嬴政不可能不知情。所以嬴政对母亲从来都没有怜悯之心，平常也对她漠不关心，不想多说一句话。
在异乡孤独的生活让嬴政这个孩子心灵变得扭曲，那个时候的邯郸的街坊们肯定想不到，这个孩子的孤僻和暴躁的性格最终会影响到了整个天下，乃至整个历史的发展。
在赵国生活了八年，嬴政也成长到了八岁的年纪。这一年，公元前251年，赵姬终于收到了一个好消息。那就是赵王不再通缉他们母子二人，而且愿意把他们护送回秦国。
原来，在这一年，秦昭襄王嬴稷去世了。嬴柱继位为新一任秦王，史称秦孝文王。而嬴政的父亲异人也顺理成章地成为了太子。为了和未来的秦王搞好关系，赵丹决定送回异人的原配和长子。
躲藏了八年，赵姬和嬴政终于恢复了身份，赶到咸阳和异人团聚了。异人仍旧把赵姬立为夫人，让嬴政以嫡长子的身份成为世子。
一切似乎都往好的方向发展了。
但是，一家人毕竟分离了八年，昔日的感情早已变得生疏了起来。异人回秦国的这八年，又纳妃生子，对赵姬和嬴政的喜爱远不如从前了。赵姬贵为正妻，却备受冷落，几乎与打入冷宫无异；嬴政也很少得到父亲的关心，异人现在是更喜欢另一个名叫成蟜（jiǎo）的儿子。成蟜虽然年纪比嬴政小，却仗着父亲喜欢，不把哥哥嬴政放在眼里。
赵姬和嬴政母子依旧生活在压抑之中。
