當劉賀進京即位的第二十七日，他來到未央宮承明殿，和羣臣一起向上官太后朝拜時，卻發現宮門緊閉，他的衆多昌邑親隨已經被隔絕在宮門之外。霍光連同其黨羽丞相楊敞、車騎將軍光祿勳張安世等一起發難，將昌邑羣臣二百餘人盡數捕拿，送往詔獄。下面小編就爲大家帶來詳細的介紹，一起來看看吧!
接着，霍光向上官太后奏言，劉賀種種昏庸淫暴，犯下無數悖逆行徑。霍光攝政十餘年，又黨同伐異，清洗政敵，朝堂百官大都是他黨羽，對此豈有不認同的道理?上官太后順水推舟，正式宣佈廢去劉賀帝位。
從堂堂天子瞬間淪爲罪大惡極之徒，人世間的大起大落莫過於此。眼見大勢已去，性命危在旦夕，熟讀經史的劉賀靈光一現，用一句話保住了自己的性命：【聞天子有爭臣七人，雖亡道不失天下!】
這句話出自儒家典籍《孝經》，是孔子的原話，意思是：「天子如果能有七個敢於向他進言諫諍的臣子，即使無道也不會失去天下!」
【子曰：“是何言矣!是何言矣!昔者天子有諍臣七人，雖無道，不失其天下;諸侯有諍臣五人，雖無道，不失其國;大夫有諍臣三人，雖無道，不失其家;士有諍友，則身不離於令名;父有諍子，則身不陷於不義。故當不義，則子不可以弗諍於父，臣不可以弗諍於君。故當不義則諍之，從父之令，又焉得爲孝乎!”】——《孝經》
霍光在歷史上原以“不學無術”著稱(這個成語的由來)，對此難以對答，只得橫蠻道「皇太后詔廢，安得天子!」親自上前，剝下劉賀身上的冠冕綬帶，搶走天子璽印，押解他出了宮門。事已至此，劉賀倒是放下了，向西邊上官太后的寶座遙遙一拜：「愚戇不任漢事」(我愚昧不明事理，不堪擔當大漢天子之任)，灑然而去。
霍光一邊假惺惺哭泣“寧負大王，不負社稷”，一邊將昌邑諸臣二百餘人盡數斬殺，只留下曾多次進言諫諍的郎中令龔遂不死，以迴應劉賀的留言。這些人從天子親隨一朝淪爲冤鬼，在刑場上大呼“當斷不斷，反受其亂!”
之後霍光又選中了漢武帝前太子劉據之孫劉病已，即位爲帝。正因劉據滿門遇害，劉病已此時連爵位都沒有，完全沒有自家班底，在霍光看來是可讓自己任意操縱的最佳選擇。劉病已即位後改名劉詢，即大漢中宗孝宣皇帝。
昌邑國被廢除，劉賀被廢爲庶人，賜食邑二千戶，但允許他保留了從前昌邑王府的家財，和家人一起囚禁於王府中，包括了他的妻妾十一人，奴婢一百八十三人。她們並在之後幾年，陸續爲劉賀生下了十一個兒子，十一個女兒。
霍光派親信張敞爲山陽郡太守，負責監視劉賀的一舉一動。昌邑王府大門緊閉，每日僅開一小門，進奉所需食物，只有張敞可以多次登門拜訪，對劉賀察言觀色，試探他是否有怨望不臣之心。
漢宣帝即位後，汲取劉賀操切奪權失敗的教訓，對霍光言聽計從，包括糟糠之妻皇后許平君被霍光之妻霍顯暗害之事，也強忍下來，並立霍光之女霍成君爲繼任皇后。
一直到霍光死後三年，(公元前65年)大權在握的漢宣帝才正式發難，將霍光一門滅族，並廢霍皇后。而對囚禁於昌邑王府的廢帝劉賀，宣帝既有相當程度的防範，恐怕亦不乏同病相憐的同情。因此，當張敞奏知劉賀被囚禁多年後，“身患風溼、行走不便、舉止癡傻，毫無仁愛之心”後，漢宣帝對劉賀這個“前任”不免動了惻隱之心，封劉賀爲海昏侯，封給揚州豫章郡海昏縣四千戶封地，結束了他十多年的囚徒生涯。
劉賀拖家帶口來到鄱陽湖畔，猶如“海闊憑魚躍，天高任鳥飛”，在一片南疆僻野，用心經營自己的小小侯國。他耗費原昌邑王府巨資，大興土木建起一座紫金城，作爲自己的居所，並將中原地區的詩書典籍、先進技術和文明傳播到當時尚屬蠻荒的贛越之地。
