哀帝于是下令免去赵飞燕兄弟新成候赵钦、侄儿成阳候赵订的爵位，贬为庶人，家属徙辽西郡。正当哀帝对如何处置赵飞燕犹疑不决时，议郎耿育上疏为之求情。其中说：“愚臣既不能深援安危，定金匮之计，又不知推演圣德，述先帝之志，乃反覆校省内，暴露私燕，诬汙先帝倾惑之过，成结宠妾妒媚之诛，甚失贤圣远见之明，逆负先帝忧国之意。夫论大德不拘俗，立大功不合众，此乃孝成皇帝至思所以万万于众臣，陛下圣德盛茂所以符合于皇天也，岂当世庸庸斗筲之臣所能及哉！且褒广将顺君父之美，匡捄销灭既往之过，古今通义也。事不当时固争，防祸于未然，各随指阿从，以求容媚，晏驾之后，尊号已定，万事已讫，乃探追不及之事，许扬幽昧之过，此臣所深痛也！”（注：《汉书·外戚传》。）这里，耿育对解光揭出的案情持怀疑态度，对其落井下石的品格也毫不客气地加以痛责。由于哀帝得继皇位乃赵飞燕大力促成，加上她与哀帝祖母傅太后关系密切，哀帝自然不愿为之过甚。这样，终哀帝之世、赵飞燕总算暂时保住了皇太后的位子。但也只能在深宫中遥望蓝天白云，过她孤苦凄清，寂寞难耐的日子。
        元寿二年（公元前1年）六月，哀帝崩逝。与哀帝不睦的王氏外戚集团在对哀帝宠臣和外戚严厉打击的同时，也没有放过赵飞燕。王莽挟持太皇太后王政君下诏曰：“前皇太后与昭仪俱侍帷幄，姊弟专宠锢寝，执贼乱之谋，残灭继嗣以危宗庙，誖天犯祖，无为天下母之义。贬皇太后为孝成皇后，徙居北宫。”尔后，王莽认为此一惩罚太轻，于是在一个多月后，又下诏给予更严厉的惩罚：“皇后自知罪恶深大，朝请希阔，失妇道，无共养之礼，而有狼虎之毒，宗室所怨，海内之仇也，而尚在小君之位，诚非皇天之心。夫小不忍乱大谋，恩之所不能已者义之所割也，今废皇后为庶人，就其园。”（注：《汉书·外戚传》。）赵飞燕知道自己隐忍苟活而不可得，在接到诏书的当天就自杀了。
        平心而论，赵飞燕姐妹的悲剧是咎由自取，很难引起社会的同情。但是，解光讲述的曲折离奇的害死两个皇子案却是扑朔迷离，疑窦丛生。从情理推断，它存在的可能很小，十之八九是一桩冤案。
        第一，本案列举的证人虽然超过10名，但却拿不出物证。曹宫所生儿子既然被宫长李南持诏书取走，其下落应该追查得出来，可是没有追查。许美人生的儿子死后被籍武埋于“狱楼垣下”，案发后照理应掘取尸骨以为证，解光等也没有做。没有物证，这些证人的证词的可靠性就使人生疑；谁又能保证它不是在某些人导演下精心编造的呢！
        第二，封建皇帝个个希望有子嗣继承皇位“不孝有三，无后为大”，无子对于皇帝更是大忌。成帝既然与许美人和曹宫生有儿子，且自己又完全了解其内部，怎么会在赵昭仪挟持下杀害亲子呢？许美人的名份实实在在，她与成帝生出儿子是天经地义的事情。如果此事当真，以成帝中年盼子的心情推断，完全应该大事庆祝。即使碍于赵氏颜面低调处理，不事张扬也就可以了，断不至于与赵氏合谋杀死孩子。再说曹宫，以皇帝的威严和权力，只要一纸诏书，就可以给她一个婕妤、美人之类的名号，名正言顺地确定自己与孩子的关系，完全用不着偷偷地寻乳母抚育，更不可能屈服于赵氏姐妹的压力处死曹宫，使自己的亲生骨肉不知所终。只要成帝还有常人的理智，上面两件事是断断做不出来的。试想，成帝乃祖刘邦年轻时风流成性，与情妇曹氏生子刘肥。做皇帝以后，即公开承认与情妇的关系，又将齐国这一东方大国封给这个儿子。朝中大臣和嫔妃们谁也没有提出疑义。成帝另一个祖宗景帝在酒醉的情况下与唐姬的侍女生下了儿子刘发，后来被封为长沙王。对此事景帝周围的人谁也没有说三道四。成帝与许美人和曹宫生儿子，总比刘邦与情妇生子，景帝与侍女生子更名正言顺吧！
        第三，成帝做皇帝时，王政君及王氏外戚已经基本上控制了汉皇朝的大权，在成帝周围安插了许多耳目。赵昭仪与成帝一起如此处置两个孩子，难道能一点都不走露风声？试想，王政君与王氏外戚盼望成帝生儿子的心情恐怕不亚于成帝自己，他们对成帝嫔妃怀孕生子之事肯定异常关切。中朝班子中不乏王氏族人、亲友，宫女队伍中亦不会缺少亲信。一个小小的赵昭仪，在如此环境中做出如此伤天害理之事而又能瞒过王氏外戚集团，几乎是不可能的。既然此事存在的可能性差不多等于零，那么，解光又为什么能编造出这样情节离奇，人证众多的宫闱秘闻呢？而赵昭仪和身为皇后的赵飞燕面对诬陷又为什么不出来澄清事实真相，奋力抗争？这里的原因其实更为简单：赵飞燕姐妹出身卑微，她们的发达靠的是汉成帝的色令智昏。不过，成帝在世时虽然给了她们的外家以封侯的赏赐，但并未给他们任何实质性的权力，根本无法形成盘根错节的权力网络，与王氏外戚集团相比实在不可同日而语。赵飞燕姐妹当年的盛气凌人，飞扬跋扈，靠的是成帝至高无上的权位。成帝一死，她们立即陷入孤立无援的困境。特别是，由于她们在成帝当国时不知检点，树敌太多，与其他外戚、嫔妃间积怨太多太深。及至成帝寿终正寝，宿敌们一齐出来向赵飞燕姐妹身上泼脏水，有些趁机落井下石，众口铄金，使她们百口莫辩。而事实上对他们来说，自我辩解的权力已经被剥夺了。事已至此，赵昭仪明白汉宫廷那连栋数以千百计的搂宇再也没有自己可以容身的空间，她也就只能以自杀求解脱，到地下追随她亲爱的夫君了。赵飞燕因为拥立问题有恩哀帝，又隐忍苟活了六个年头，最后也惨死在王莽的淫威下。
        第四，成帝活了45岁，他嫔妃成群却无一人生子，这说明他本人无生育能力。否则，无论赵飞燕姐妹怎么一手遮天，也不能使成帝断子绝孙。成帝既无生育能力，许后与曹宫为之生子之事以及赵飞燕姐妹谋杀二子之事就不会存在。致赵飞燕姐妹于死命的这桩谋杀二子案显系精心编造的冤案，它的编剧兼导演不是别人，乃是日后首开中国封建皇朝篡位记录的臣奸大憝王莽。你看，是作为大司马大将军的王莽：纠合一班朝廷官吏在成帝死后以“治问皇帝起居发病状”为名逼赵昭仪自杀。又是他在哀帝死后挟太皇太后王政君以解光罗织的罪状逼使赵飞燕步其妹后尘自杀身亡。而解光上奏所谓二皇子被害案恰恰是在哀帝尊赵飞燕为皇太后，并封其弟侍中驸马都尉赵钦为新成候之后数月，此时赵飞燕地位已经稳定下来。没有王莽背后支持，身为司隶校尉的解光恐怕不敢拂逆哀帝的意志向赵飞燕家族发难。而王莽支使解光编造此一假案，目的仅仅是为清除赵氏亲族在朝中的那点可怜的势力制造借口而已。