贺若抱一越是寻思，越萌生了离开的念头。
忽然又忆起贺若平以前经常说的话：必须要自己强大起来，才能对抗这个险恶的世道。
小鹰要经历风雨才能飞翔，树苗要经历雪霜才能成长，如果自己一直留在李家，活在李渊的羽翼庇护下，如何变得强大呢？
但要出走，又谈何容易？天大地大，哪里才是自己的落脚点？
啊，对了，不如去太室山！
贺若平当年曾经提过一嘴，贺若弼的师父、也就是贺若抱一的太师父幻空老和尚，隐居在离荥阳不远的太室山上，何不去投奔他呢？老和尚既然能把爹调教成顶尖高手，一定也能教自己！
但自己一个稚嫩少年，在中原地带人生地不熟，如何到得了路途遥远的太室山？
贺若抱一的思绪摇摆不定，每天都挣扎在走与留之间，如此又过了一段时间。
忽然一日，李府传出一个消息，说李渊可能调回洛阳。这个传言好比是压垮骆驼的最后一根稻草，让贺若抱一彻底断掉了留在李家的念头。
他在心里暗叹一声：“真是天意，眼下看来，我走也得走，不走也得走了。李元吉刁蛮无礼这摊事，姑且先放在一边不说，单单处出于安全考虑，我也不可能回洛阳。我是朝廷罪犯的后代，娘和义父牺牲了自己的性命，好不容易才帮我逃出了龙潭虎穴，我岂能自投罗网呢？”
贺若抱一将想法悄悄告知了李世民，李世民竭力挽留，道：“爹调回洛阳，只是一个传闻，就连爹自己都不知道真假，你怎么能作数？”
贺若抱一说：“叔父调回洛阳，只是我想离开的原因之一。元吉的话你也听到了，如果我继续留下，就未免脸皮太厚，太不识时务了。我堂堂贺若家之后，岂能受这种鸟气！”
李世民摇头道：“元吉年少无知，口不择言，你怎能与他一般见识？小不忍则乱大谋啊，抱一，你再好好想想，千万别冲动。”
贺若抱一说：“世民，我是经再三思虑，并非一时冲动。元吉恨我入骨，我因为义父之死，对他也有成见，我们之间好比水火，不是火把水烧干，就是水将火灭掉，断然没有共存的可能。他今日能对‘赛珍珠’落毒，明日就能对我下手，我防不胜防啊！世民，我不想令叔父、叔母、建成大哥、三儿和你为难，我也不想让自己委曲求全。离开，也许是我最好的选择。再说，男儿志在四方，我终究要独立，不能一直在李家的羽翼之下生活。”
“可是，你才十二岁，怎么能够独闯江湖呢？”
“十二岁不算小了，秦国的神童甘罗，十二岁就出使赵国，立下显赫功劳，被秦始皇赐任上卿了。还有世民你，才九岁就敢玩心理战，吓退李德江。我十二岁，如果连路都不敢上，岂不是愧对古人愧作你，还愧对贺若这个姓？世民，我已经拿定主意，你就不用再相劝了。不瞒你说，我还有另一层考虑，我义父传了个归元心法给我，但是还没等我学完，他就被奸人害死了。我正好想趁此机会找到太师父，请他老人家指点一二。”
李世民见贺若抱一眼神果敢，知他已下决心，自己再说无益，便张开双臂，与他紧紧拥在一起，道：“抱一，我很难过，对你是一百个舍不得。但是你既然决定这么做，我也只能祝福你。这件事情，你要告诉三儿吗？”
“不，三儿性格直爽，她要是知道了，一定会告诉你爹娘，这样我就走不成了。”贺若抱一脑中闪现出李三儿娇俏可人的面容，担心自己见了她，就再也舍不得离开，便决然摇了摇头。 李世民只好同意：“好吧，我瞒着所有人，连爹娘都不说。抱一，我还能帮你做些什么？”