王、列侯、二千石官员的绶带及黑色、黄色绶带，赏给昌邑国郎官，及被免除奴仆身分的人佩带。将皇家仓库中的金钱、刀剑、玉器、彩色丝织品等赏给与其一起游戏的人。与侍从官、奴仆彻夜狂饮，酒醉沉迷。在温室殿设下隆重的九宾大礼，于夜晚单独接见其姐夫昌邑关内侯。尚未举行祭祀宗庙的大礼，就颁发正式诏书，派使者携带皇帝符节，以三牛、三羊、三猪的祭祀大礼前往祭祀其父昌邑哀王的陵庙，还自称‘嗣子皇帝’。即位以来二十七天，向四面八方派出使者，持皇帝符节，用诏令向各官署征求调发，共一千一百二十七次。荒淫昏乱，失去了帝王的礼义，败坏了大汉的制度。杨敞等多次规劝，但并无改正，反而日益加甚，恐怕这样下去将危害国家，使天下不安。我们与博士官商议，一致认为：‘当今陛下继承孝昭皇帝的帝位，行为淫邪不轨。《孝经》上说：“五刑之罪当中，以不孝之罪最大。”昔日周襄王不孝顺母亲，所以《春秋》上说他：“天王出居郑国，”因其不孝，所以出居郑国，被迫抛弃天下。宗庙要比君王重要得多，陛下既然不能承受天命，侍奉宗庙，爱民如子，就应当废黜！’因此，臣请求太后命有关部门用一牛、一羊、一猪的祭祀大礼，祭告于高祖皇帝的祭庙。”皇太后下诏说：“可以。”于是霍光命刘贺站起来，拜受皇太后诏书。刘贺说道：“我听说：‘天子只要有七位耿直敢言的大臣在身边，既使无道，也不会失去天下。’”霍光说：“皇太后已经下诏将你废黜，岂能自称天子！”随即抓住刘贺的手，将他身上佩戴的玉玺绶带解下，献给皇太后，然后扶着刘贺下殿，从金马门走出皇宫，群臣跟随后崐相送。刘贺出宫后，面向西方叩拜道：“我太愚蠢，不能担当汉家大事！”然后起身，登上御驾的副车，由大将军霍光送到长安昌邑王官邸。霍光道歉说：“大王的行为是自绝于上天，我宁愿对不起大王，不敢对不起社稷！希望大王自爱，我不能再常侍奉于大王的左右了。”说完洒泪而去。
文武群臣上奏太后说：“古时候，被废黜之人，要放逐到远方去，使其不能再参与政事。请将昌邑王刘贺迁徙到汉中房陵县。”太后下诏，命刘贺回昌邑居住，赐给他二千户人家作为汤沐邑，他当昌邑王时的家财也全部发还给他，其姐妹四人，各赐一千户人家作为汤沐邑；撤销昌邑国，改为山阳郡。
原昌邑国群臣都被指控在封国时不能举奏刘贺的罪过，使朝廷不了解真实情况，又不能加以辅佐、引导，使刘贺陷于罪恶，一律逮捕下狱，诛杀二百余人；只有中尉王吉、郎中令龚遂因忠正耿直，多次规劝刘贺，
