玄宗此时一心要去蜀地避难，以前开玩笑说他这是想去领略一下秦川八百里栈道的险峻，事实上当然不可能如此，玄宗一把老骨头了，哪里还经得起如此折腾。但他为什么坚持去蜀地，实有些费解，难道他不再管他的天下、他的苍生了么？难道他已失去反击的信心了么？唯一的解释就是，他确实怕了，只想找个清静的地方躲起来，或者是，至少要找一个不容易为敌人攻破的堡垒躲起来，再进行反击。所以听到大家七嘴八舌的说，却没一个人说中自己的心思，又怕违背了大家的意思，所以沉默不语。这时韦谔说：“如果要返回京师，需要有足够的兵力来抵御叛军。现在兵力单薄，不能轻易回去。不如暂时到扶风郡，再慢慢考虑去向。”玄宗征求大家的意见，大家也都同意，于是准备出发去扶风。
等到要出发的时候，当地的百姓便当路拦着玄宗请求他留下，并说：“宫阙，陛下家居，陵寝，陛下坟墓，今舍此，欲何之？”宫殿是陛下的住所，陵寝是陛下列祖列宗的坟墓，现在都不要了，究竟是要去哪里呢？玄宗在马上想了许久，其实他也很不甘心，真的这么一走了之吗？但话又说回来，他也很无奈，自己的皇帝威严被一再挑战，先是有人大叛乱，被逼离京后又有人小叛乱，自信心难免减弱。所以，最后，玄宗让太子留下来安慰这些父老乡亲。不用很久，玄宗就会发现，这是他今生做的第二大失策，当然第一大失策就是当初无比信任安禄山了。
既然太子断后，这些父老们有什么话只好对太子讲，他们说：“既然皇上不想留下来，那我们愿意率领子弟跟着殿下您向东讨伐叛军，收复长安。如果殿下与皇上都逃到蜀地去，那么谁又来为中原的百姓做主呢？”不久，来到李亨跟前请求的人的多达数千。但李亨并不同意，他说：“我父皇冒着艰难险阻，远出避难，我怎么忍心不管他、早晚都不在他身边呢？再说我没有当面辞行，所以得回去告诉父皇一声，然后听候他的吩咐。”说着涕泣流泪，便要回马西行。其实“且吾尚未面辞，当还白至尊，更禀进止”这句话已是答应了众人的请求，真不同意的话又何必说去当面辞行呢？当然也有可能是以辞行为借口，赶紧回去。不过从李亨角度来想，他绝对愿意留下来，因为他已经46岁了，这么老了仍然是太子的比较少见，李亨心里多半会有点着急吧。如果继续留在玄宗身边，那么也就是要等到皇帝老死之后自己才能即位，可是玄宗的身体硬朗的很，从长安一路赶来，也没听老人家念叨哪里不好受，其势大有“真的还想再活五百年”的意思。可是李亨自己的身体就未必吃的消了，从后来的情况看，他当皇帝的后几年一直有病，此前也必有征兆才是，当事人李亨自己自然很清楚这一点。唐朝皇帝很多正常死亡的都是在五十左右，李亨现已46岁，的确也是时日无多，如果一直当下去，最后也不过是位老太子，怎么也心有不甘吧。写到这里，忽然想起今年81岁的沙特王储阿卜杜拉在他82岁的国王哥哥死后即位，他们78岁的弟弟苏丹成为新一任王储，这条消息刚看到的时候瞠目结舌了半天，不禁觉得有些好笑。李亨是要命也活到不到这么大年纪的，七老八十的皇帝在中国历史上也属罕见，七老八十的太子更是一个都没有。而且他这十几年的太子当的也不甚舒服，又有人陷害（李林甫等人），又有人轻视（比如安禄山），所以这一次如果能够单独留下来，则是一个脱离父皇的好机会，李亨能放过吗？从私人角度来讲，李亨没有理由不想留下，再有，我们也不能忽视太子留下来的积极作用，从后面来看，正是即位后的李亨组织起反击的力量（虽然玄宗在蜀地也有所行动，但不能不承认，真正起作用的是李亨），这里我们不妨对李亨的思想境界想的高一些，就是他留下来排除个人因素，确实也出于抵御叛军的目的，小一点则是为了祖宗的基业，大一点则是为国为民，无论怎么看，都是正确的。
既如此，李亨只要派一个人去和玄宗说一下便可，自己又何必去呢？李亨心里并非不明白，若是当面辞行，有可能就不会留下了。确实，如果是他亲自辞行，变数会很大的，玄宗究竟会持何态度，真是不好说。一种可能是，“啊，什么？好啊，你这小子，翅膀硬了，想脱离你老爹了么？”皇帝当然不喜欢有人背叛自己，自己的亲人当然也不例外，也许不但不会答应，反而从此对李亨会防备起来；另一种可能是，“啊？哦，这样啊……唉，我老了，这里的事就交给你了。”这种可能也是会发生的。但我倾向于前者，因为李亨如果自己来请的话，那对玄宗发出的信号只是“想要脱离”，玄宗未必就会同意；如果是让别人来说，那发出的信号就不只是“想要脱离”了，而是“已经脱离，有力量脱离”，所以玄宗心理上产生的感觉绝不会一样。
众人想必也是认为李亨若亲自去辞行，多半会不批准，所以也劝他乘机留下。这时李亨的三子建宁王李倓与东宫宦官李辅国，一起拉着他的马笼头进谏道：
“逆胡犯阙，四海分崩，不因人情，何以兴复！今殿下从至尊入蜀，若贼兵烧绝栈道，则中原之地拱手授贼矣。人情既离，不可复合，虽欲复至此，其可得乎！不如收西北守边之兵，召郭、李于河北，与之并力东讨逆贼，克复两京，削平四海，使社稷危而复安，宗庙毁而更存，扫除宫禁以迎至尊，岂非孝之大者乎！何必区区温情，为儿女之恋乎！”