肃宗为了此事，乃忧闷成疾。辅国竟诈传诏敕，把兴庆宫的厩马三百匹，取了二百九十匹，只剩十匹，然后令铁骑五百人，待着睿武门外，自趋入兴庆宫，矫称上语，迎上皇游西内。上皇驰马出宫，高力士后随，至睿武门，忽见铁骑满布，露刃而立，上皇惊问何事？那骑士却应声道：“皇上以兴庆宫湫隘，特迎上皇迁居西内。”上皇尚未及答，辅国即走近上皇驾前，来持御马。惹得上皇大骇，险些儿坠下马来。高力士赶前一步，向辅国摇手道：“今日即有他变，亦须顾全礼义，怎得惊动上皇？”辅国回叱道：“老翁太不解事。”力士不禁大怒道：“李辅国休得无礼！五十年太平天子，辅国意欲何为？”这三语驳斥辅国，那辅国才觉禁受不起，慢慢儿的走开。力士又代上皇宣诰道：“太上皇劳问将士，无事且退，不必护驾。”各骑士见辅国气馁，也不敢倔强，便各纳刃下拜，三呼万岁而退。力士复叱辅国道：“辅国可为太上皇引马！”辅国只好上前，与力士相对执辔，导上皇入西内，居甘露殿中，辅国乃退。殿中萧瑟得很，但剩老太监数人，器具食物，都不甚完备，尘封户牖，草满庭除。比华清宫何如？上皇不觉唏嘘，执力士手道：“今日若非将军，朕且为兵死鬼了。”力士从旁劝慰，上皇复道：“我儿为辅国所惑，恐不得终全孝道，但兴庆宫是我王地，我本欲让与皇帝，皇帝不受，我乃暂住，今日徙居，还是我初志呢。”无聊语，聊以自慰。待至午餐，膳人进食，多是冷胾残羹，不堪下箸。上皇命膳人撤肉，且嘱：“自今日始，不必进肉食，我当茹素终身。”愤极。草草食罢，直至酉刻，始有老宫婢数人，拨来侍奉，且将上皇随身衣物，搬取了来，既见上皇，相向号泣。上皇亦流涕道：“不必如此，我闻皇帝有疾，想此事非他主使哩。”嗣是与高力士闲步庭中，看侍婢扫除尘秽，芟薙草木，粗粗整理，才得少安。