霍光 是临死前选定的顾命大臣，他执政以来，大权独揽，虽无皇帝之名，已行皇帝之实。但是，霍光正确地执行了武帝临终遗诏的基本精神，终于使西汉王朝由社 会动荡不安进入到“昭宣中兴”清平局面，为西汉的进一步发展奠定了基础。然而他的后人却难以像他一样尽职尽责，霍氏家族势力的强大也必然会招来皇权和其他 人的忌恨，因此，风光一时的霍家最终也没有逃出被消灭的命运。
24岁的熟知闾里奸邪、吏治得失，是一位富有社会经验的青年。公 元前68年霍光病逝，汉宣帝挣脱了辅政大臣的羁绊，开始亲问政事，独揽朝纲，渴望以自己的意志施政，。但此时霍氏家族仍然紧紧地控制着中朝的军政 大权。宣帝很沉着、稳重，不是鲁莽的政治家，表面上继续封赏霍光的子孙，让其在享受荣华富贵时极尽暴露自己的缺点，等到时机成熟时再逐渐削夺他们的权力； 暗地里却加强外朝的权力，让御史大夫魏相暗查霍氏隐匿不报的上书，以防壅敝，进而戳穿其阴谋，逼迫其就范、让权，最后达到清除的目的。
为此，汉宣帝对上书制度进行了改革，下令吏民上书，直接呈皇帝审阅，不必经过尚书，这就把霍山、霍云领尚书事的职务架空起来。汉宣帝接着采取行动，削夺 霍家把持的权力。他先解除了霍光两女婿东宫、西宫卫尉的职务，剥夺了他们掌管的禁卫军权。之后，又提拔霍光的儿子霍禹为大司马，明升暗降，剥夺了霍禹掌握 右将军屯兵的实权。并且将霍光的两个侄女婿调离了中郎将和骑都尉的位置，让自己的亲信担任南北军和羽林郎的统帅，最终把兵权掌握在自己手中。通过这一系列 步骤，霍家掌握的权力被剥夺殆尽，权力逐渐集中在汉宣帝的手中。面对汉宣帝全面夺权的行动，霍家集团内部无人不惊恐，一时慌张无措，惶惑不安，他们决定铤 而走险，举行叛乱，推翻汉宣帝，保住他们的既得利益。
宣帝一直要追究许皇后被害的事件，由于怀念许皇后，他下诏立许皇后的儿子刘为 太子。宣帝的决定，深深地触怒了霍光的孀妻显儿。她气得茶不思饭不想，大口大口地吐血，随后教唆女儿霍成君毒死太子刘。霍成君的一言一行，宣帝都看在眼 里，但他表面上仍不动声色，只是暗地里加快了从霍氏家族手中夺回皇权的步伐。这样一来，霍皇后实在找不到下毒的机会。
霍光像霍氏兄弟再次商议，决定由霍禹出面要求首先清除宣帝身边的权臣，然后再废掉汉宣帝，大家商议完毕，正准备实行的时候，这件事被一个叫张章的人揭发出来。
长安平民张章不知如何知道了此事，就写成一书直接递向北阙宫门（这里是直达皇帝的上书之处）。宣帝看到后，心想正好可以一举铲除霍氏，便立即下令追查，命军队包围霍氏的住宅。搜查结果显示，霍氏藏有大量的兵器用具，的确是要起兵谋反，于是，宣帝下诏将霍氏全部下狱。
经过审查，廷尉查出了霍氏谋反的事实真情，宣帝命令立即行刑，显儿及霍氏诸女婿都被处斩，霍禹被处腰斩。此外，与霍氏相连的数千家也遭到了灭门之灾，宣帝还下诏废去霍皇后。这样，在西汉朝廷中盘踞了十几年的霍家势力一朝覆灭，汉宣帝最终确立了自己的绝对统治。
汉宣帝是位有勇有谋的皇上，他一上台便铲除了霍氏集团，把被霍氏把持多年的朝政大权夺了回来。从此，汉朝江山又恢复了刘氏的天下。
