张皇后大吹枕边风，说公公李隆基的坏话，理由是：这个老不死的东西克死了咱们的宝贝儿子。她不提这事儿倒也罢了，这么一提，肃宗的眼睛当时就红了，心情变得无比烦乱，想起了刚死去不久的十二子兴王李佋。
兴王李佋是肃宗和张皇后所生的第二个儿子。这个小家伙生来聪明伶俐，肃宗十分喜欢。可是，就在上元元年（公元760年）的六月，年仅八岁的兴王李佋早夭而死。肃宗追赠他为恭懿太子，并因此而卧床一个月。
趁着肃宗心情烦乱的当口，张皇后与李辅国一唱一和，把肃宗也搅得将信将疑起来。二人见肃宗没有反对，便派遣心腹日夜监视玄宗的一举一动。
父子之间的嫌隙就此萌生。
转眼之间，七月到了，天气变得异常炎热，酷暑难耐。刚好有西域诸国近贡来西瓜，玄宗一时兴起，便派陈玄礼将一干旧臣召到长庆楼吃瓜喝酒。看到自己的老下属都来了，玄宗的心情越发地好了。众人觥筹交错，喝得十分尽兴。
喝高了的李隆基倚着栏杆，一边儿休息，一边儿俯瞰宫外街市人来人往的热闹景象。他不认得老百姓，但是老百姓都认得他这位太上皇。那些老百姓远远地一看，哎呦，那不是从前的玄宗陛下嘛，欢呼声中赶紧倒头下拜，呼啦啦跪下一大片，场面无比壮观。玄宗见百姓们仍然还记着自己，心中感动，向大伙招手示意，眼泪又掉了下来，一班老臣见此也是感慨万千，唏嘘不已。
这件事很快被李辅国知道了，兴冲冲的来见肃宗，把这事报告给肃宗，说太上皇现在每天都和外面的人联系，而且还召集一班老臣喝酒吃瓜，所谈的都是开元如何如何兴盛、天宝如何如何繁华之类的话，他如此不甘寂寞，恐怕是有什么不可告人的阴谋，陛下你可得早早想法子预防啊！
肃宗听了，并不放在心上，反而替父亲解释，太上皇一大把年纪了，雄心壮志早没了，还能有什么作为，只不过是太寂寞了，找人喝酒解闷而已，辅国，你想得太多了！
李辅国见肃宗这么理解自己的父亲，话锋一转，说即便太上皇没有这样的想法，但是架不住他身边还有一帮煽风点火的小人啊。一旦真发生了什么变故，陛下您该如何应对呢？我觉着吧，兴庆宫距离民居比较近，人多口杂，对太上皇静心休养不利，不如将他安置到深宫大内，这样一来可以远离尘嚣，二来可以杜绝小人。（太上皇居近市，交通外人，玄礼、力士等将不利陛下，六军功臣反侧不自安，愿徙太上皇入禁中）
肃宗对自己的父亲还是了解的，当下就表示反对，太上皇就喜欢住在兴庆宫，怎么能突然把他迁往大内呢？
这个时候，突然有个女人的声音插了进来，李辅国这么说，也是为了大唐的江山社稷啊。陛下您是天下的共主，理应从天下的高度来考虑事情，怎么能固执于愚孝呢？
这当然就是张皇后了，一个女人和半个男人对肃宗展开了疯狂的劝说，但肃宗就是不肯答应。