牢祭告高庙。皇太后听完就同意了他们的建议，霍光让昌邑王起身接诏，昌邑王还想要辩解，霍光直接以太后诏令为由，解下了他的玺绶，扶他下殿，大臣们也都出来相送。昌邑王自认愚笨，不配掌管汉朝的事务，随后就乘副车回到了昌邑府邸。霍光表示是昌邑王自己有负于天，自己为了社稷只能如此，含泪与昌邑王告别。
这时大臣们上奏说：古代被废黜放逐的人，都把他们安排到远方，不参与政事。请将刘贺迁至汉中房陵县吧。太后却让刘贺回昌邑去，赐给他汤沐邑二千户，故王家财物都归刘贺；还有哀王女四人，各赐汤沐邑千户；昌邑国被降为山阳郡。?
刘贺的臣子因为不能匡君辅国，被诛杀了二百多人。只有中尉吉、龚遂因忠直多次劝谏，免去一死，但被剃去了头发贬为城旦。刘贺的老师也应该被治死罪，治事使者就责问他：“你为何没有谏书呢？老师就回答说：臣以《诗》三百五十篇朝夕教授大王，至于忠臣、孝子之篇，也是为大王反复诵读。至于危亡失道之君，未尝不流泪为大王讲述。臣以三百五十篇为谏，所以无谏书。使者就把这事向上报告，他也因为这被免去一死。??
霍光因为大臣们在东宫奏事，政务也由太后处理，认为她应该了解经学的内容，于是就建议让夏侯胜用《尚书》来教导太后。夏侯胜因此被任命为长信少府，并赐予关内侯的爵位。?
想当初，卫太子娶了鲁国的史良娣，生了一个儿子叫进，号称史皇孙。史皇孙娶了涿郡的王夫人，生了一个儿子叫病已，号称皇曾孙。皇曾孙出生几个月后，就遭遇了巫蛊之祸，太子的三个儿子、一个女儿以及所有的妻妾都被害死了，只有皇曾孙幸存了下来，但是被关押在郡邸狱中。前廷尉监鲁国的丙吉奉命处理巫蛊案件，丙吉心里知道太子是无辜的，他也非常的同情皇曾孙的遭遇，于是就挑选了谨慎厚道的女囚城胡组和淮阳的郭征卿来抚养皇曾孙，并将他们安置在干燥通风的地方，丙吉每天都会去看望他们。?
巫蛊案件引起的祸事好多年都没能解决，这时汉武帝生病了，经常来往于长杨宫和五柞宫之间，有占卜者就说长安狱中有天子气，于是汉武帝就派使者去中都官，命令将所有在押的犯人，无论是罪行轻重，全部处死。听到这个命令，郭穰连夜就来到了郡邸狱，但是丙吉却关上门拒绝使者进入，他说：皇曾孙在这里，那些无辜的人死了都不行，更何况是亲曾孙呢！双方一直僵持到天亮，使者一直未能进入。郭穰回去就把情况报告给了汉武帝，并弹劾丙吉。此时的汉武帝也醒悟过来了，他说：这是天意啊。于是就下令大赦天下。郡邸狱中的犯人，只有丙吉得以生还。?
后来，丙吉对守丞谁如说道：皇孙不应该留在官府之中。于是，他就让谁如给京兆尹写了一封信，派人将皇曾孙和胡组一同送进宫去。然而，京兆尹却拒绝接受，又将他们送了回来。当胡组的服役期满，即将离开时，皇曾孙对她十分想念。丙吉见状，便自掏腰包，雇佣胡组继续留下来，与郭征卿一同抚养皇曾孙。就这样，又过了一个月，丙吉才让胡组离开。不久之后，少内啬夫告诉丙吉：你并没有得到抚养皇曾孙的诏令。尽管如此，丙吉还是每个月都会给皇曾孙送去一些米和肉。有一次，皇曾孙生病了，病情严重到好几次都差点丧命。丙吉心急如焚，多次命令乳母要加强护理，并及时给皇曾孙用药治疗。他对待皇曾孙可谓是无微不至，尽心尽力。后来，丙吉听说史良娣有一位母亲名叫贞君，还有一个哥哥叫恭。于是，他决定将皇曾孙送到他们那里去。此时的贞君年事已高，当她看到自己的孙子孤苦伶仃、无依无靠时，心中不禁涌起一股强烈的怜悯之情，她决定亲自抚养这个可怜的孩子。
后来朝廷有诏令让掖庭来抚养皇曾孙。当时的掖庭令张贺，曾经侍奉过戾太子，他非常感念戾太子的旧恩，也非常同情皇曾孙的遭遇，就非常谨慎地奉养他，还用私人的钱供给他读书。等到皇曾孙长大后，张贺就想把自己的孙女嫁给他。当时的昭帝刚刚成年，身高八尺二寸，张贺的弟弟张安世是右将军，辅佐昭帝处理朝政，他听说张贺称赞皇曾孙年轻有为，又想把自己的孙女嫁给他，顿时就生气地说：皇曾孙是卫太子的后代，能够以庶人的身份衣食无忧就足够了，不要再提嫁孙女的事了！于是张贺就不再提这事了。当时的暴室啬夫许广汉有个女儿，张贺于是就设宴邀请许广汉，等到酒酣之际，张贺就对他说：皇曾孙身体健壮，将来可能会成为关内侯，你可以把女儿嫁给他。许广汉一听很开心，就答应了。到了第二天，许广汉的妻子听说后，就非常的生气。许广汉就重新派人去做媒，终于是把女儿嫁给了皇曾孙。张贺用自己家的钱财为皇曾孙做聘礼。皇曾孙依靠许广汉兄弟和祖母家史氏才得以平安长大，又跟随东海澓中翁学习《诗经》，才华出众，好学不倦；但也喜欢游侠，斗鸡走狗，因此对民间的奸邪和官吏的得失非常了解。他多次游历诸陵，遍访三辅，曾经在莲勺卤中受困，他特别喜欢杜、鄠之间，经常在下杜居住。当时他参加朝请，住在长安的尚冠里。?