'安史之乱”发生后，唐明皇李隆基仓皇出逃京师长安。至德二年，唐军收复了长安和洛阳，玄宗从成都还宫，皇帝已是肃宗。玄宗退居太上皇，住在兴庆宫里，肃宗李亨不时来看望他，又叫来梨园子弟天天奏乐、唱歌、跳舞以供消遣。可这种生活并没有持续到底，玄宗经常在楼上徘徊观望，百姓经过这里，一看到玄宗，往往跪拜，并高呼“万岁”。他还经常在楼下安排酒食招待客人，并在楼下宴请将军郭子仪等人，并送给他们很多好的东西。玄宗也许并没有东山再起的的意图，但却引起了肃宗的猜忌。

唐明皇和杨贵妃

原来玄宗宠爱武惠妃，早就想废掉太子李瑛，立武惠妃的儿子李瑁为太子。为此还赐死了李瑛、李瑶、李琚三个儿子。太子李瑛是玄宗第二子，在他死后，论资排辈，应该是长子庆王李琮，因他的脸被伤，当皇帝不雅观，而且德才普通，便轮到了第三子肃宗李亨了。在朝臣们的争取下，玄宗经过一年多的考虑，才勉强立了李亨做太子。但是他还是总想把肃宗废掉，立寿王李瑁为太子。因此，太子李亨也早对玄宗怀恨在心。肃宗被立为太子后，当皇帝的愿望日益迫切。后来，在他的儿子和宦官李辅国等的支持下，在灵武称帝。玄宗在兴庆宫的所作所为，早已引起了肃宗的猜疑。他想采取相应的对策，又怕有人说他不孝，心里非常急躁。正在此时，李辅国为他出了一个主意。

影视剧中的李辅国

李辅国对肃宗说：“太上皇住在兴庆宫，天天和外人来往，而且陈玄礼，高力士一直保卫、侍候着玄宗，密谋对陛下不利，如今六军都是灵武功臣，对此都坐卧不安。”肃宗假意为难的道：“圣皇仁慈，怎么会有这样的想法？”李辅国接着说：“即使太上皇没有这样的心思，可也禁不住身边小人一直怂恿和蛊惑啊！陛下乃天下之主，应当为社稷考虑，未雨绸缪，防患于未然啊！哪能之局限于孝道呢？兴庆宫和里巷相连，围墙低矮，不及太极宫森严，请他搬到那里居住，就能杜绝小人在他身边说三道四了，这样以来，太上皇便能安度晚年，陛下也可常去探望，以示孝顺，岂不妙哉。”李辅国的话说到了肃宗的心坎里。便默许了他的建议。

影视剧中的唐肃宗

因此李辅国便传旨，请玄宗游览太极宫，但当玄宗走到睿午门时，预先埋伏的士兵突然冲出来，把玄宗簇拥进了太极宫甘露殿，就此住下。肃宗还是不太放心，又把高力士流放到了巫州（今湖南黔阳县），命陈玄礼退休。只给玄宗留下几十名老弱病残的卫士。

住进太极宫的玄宗晚年忧郁寡欢，憔悴不堪。公元762年，太上皇玄宗驾崩，终年78岁。