上皇已经成为了一个笑柄。大臣们不拥护他，老百姓们看不起他，景泰帝更加不想他回来掌权。景泰帝表面上是关心皇兄太上皇，其实是担心他重新夺回皇位，所以把太上皇一家人幽禁在重华宫。每天除了送饭之外，大门是关闭的，里面有太监监视着，外面有侍卫把守着，太上皇一家人连自由也没有。不久之后大家对太上皇的态度越来越差，不知道是景泰帝有意安排的，还是有人故意这么做的。外面把守的士兵换上了终于景泰帝的人，军官也是太上皇不认识的。重华宫里面的太监也换上了曾经被王振欺负的，这些人痛恨王振也痛恨当初事事听从王振的皇帝也就是现在的太上皇。这些太监不但不用心伺候太上皇一家人，而且总是在一边对太上皇一家人冷嘲热讽。
最后发展到太上皇一家人吃不饱穿不暖，太上皇想吃上一顿肉也很困难。因为送来的饭菜越来越少，质量也越来越差，所以太上皇一家人都吃不饱。为了不饿死不冷死，太上皇的妻子以前的皇后只好带着不多的妃子和宫女一起连日连夜做针线活。做好之后托送饭的太监拿出去卖，换来的钱添加伙食或者衣物。送饭的太监也不是好说话的，不但从中拿了不少的好处，而且对这位皇太后也不是很尊敬。为了一家人的温饱，明宪宗的母亲只好忍下了这一切。
因为吃不饱穿不暖，明宪宗从小不但失去了读书识字的资格，而且缺少照顾的人。太监们不敢过多欺负当过皇帝的贴身，也不敢过多得罪刚烈的皇太后，只好拿不懂事的小皇子出气。当时还是太上皇儿子的明宪宗经常被太监们欺负，而且被士兵们吓唬和戏弄，留下了不少的阴影。身边只有一个宫女对他比较好，经常帮他保护他不说，而且晚上抱着他哄着他睡觉。当时还是小皇子的明宪宗就对这个宫女做出了承诺，将来一定要对她好，一辈子都听她的话。没想到这个承诺后来真的实现了，而且明宪宗真的做到了最后。
太上皇本来已经放弃了皇位之争，决定留在重华宫过一辈子了。可是事情发生了巨大的变化，使他不得不改变原有的想法。原来