坚持原则就不怕人捣乱
权力是一把双刃剑，既可伤人，也能害己。霍光作为顾命大臣之首拥有至高无上的权力，但他没有滥用权力。尽管他也曾以高压手段坚决打击了向他挑战的对手，因为坚持原则，他并没有因此受到过多的非议。从这一点上来讲，作为一个权臣，霍光是成功的。
汉武帝遗诏让霍光、金日石单和上官桀共同辅佐幼主，不久，金日石单病死，由霍光和上官桀共同辅政。霍光和上官桀之间有着姻亲关系，霍光的大女儿是上官桀儿子上官安的妻子，彼此原本亲密无间，霍光有事或出宫休假期间，上官桀就入宫代替他处理政事。
但过了不久，两人的关系就逐渐紧张起来。上官安有个女儿，年方5岁，与昭帝年龄相当。上官安贪图禄位，请求霍光把他的女儿送进宫去，许配给昭帝为皇后。霍光认为外孙女年龄太小，没有同意。上官桀父子又通过昭帝姐姐鄂邑长公主，把上官安的女儿收入后宫，几个月后，就被立为皇后。不久，皇后的父亲上官安就被封为骠骑将军、桑乐侯。
上官桀父子位高权增之后，对长公主十分感激。公主私生活不严肃，与河间的丁外人私通。上官桀、上官安想为丁外人求封爵，希望依照国家关于列侯娶公主的成例把外人封为列侯。霍光不同意。他们又为丁外人求取光禄大夫的官职，霍光又不同意。因此长公主对霍光大为怨恨，而上官桀屡次为丁外人求官爵而不得，也很惭愧，心里想，从先帝（指汉武帝）时开始，自己已经是九卿了，官位在霍光之上，现在自己与霍光都是辅弼重臣，皇后是自己的亲生孙女，霍光只不过是外祖父，他反而一人专制朝廷政事！从此，他们也很怨恨霍光，企图与之争夺权力。
此时，自以为年长又未得立为帝的燕王刘旦，亦常怀怨恨之心。御史大夫桑弘羊创始酒、盐、铁专卖官营制度为国家兴利，居功自傲，想为他的子弟求官不得，也怨恨霍光。于是，上官桀父子便同长公主、桑弘羊串通一气，并勾结燕王刘旦，策划发动政变，先除掉霍光，然后废黜昭帝，立燕王旦为帝。燕王答应事成后封上官桀父子为王。上官安则图谋事成后杀燕王而立其父。他们各怀鬼胎，却还是为共同的预谋走到了一起。
元凤元年（公元前80年）八月，上官桀等人让一个冒充是燕王使者的人向朝廷上书，以燕王的名义攻击霍光“专权自恣”，并列举了他的三大罪状：其一，霍光到长安东郊去主持郎官和羽林军的大规模军事演习时，路途中他像皇帝出行时那样的威严，吃饭时让皇帝御膳房为他提前准备饮食。其二，霍光赏罚不公，苏武出使匈奴，被拘留达20年而不投降，回国以后只是被任用为典属国，而大将军长史杨敞没有任何功劳，却当上了搜粟都尉。其三，霍光擅自调动、增加大将军幕府的校尉，而不报告朝廷。并称燕王怀疑霍光别有企图，表示愿意交出燕王封爵，入宫值宿保护皇帝，防止奸臣作乱。这份奏章是乘霍光休假之机呈送给皇帝的。上官桀打算，从宫里把这件事下交给主管官吏查办，桑弘羊负责和各大臣共同胁迫霍光退职。但是燕王书信上奏以后，昭帝并没有向下转发查处。
第二天早上，霍光知道了上书这件事，留在殿前西阁的画室里不肯进殿。昭帝问：“大将军在哪儿？”左将军上官桀说：“因为燕王告发他的罪行，所以不敢进来。”昭帝下诏叫霍光进殿。霍光进殿后，取下头上的冠帽，叩头谢罪。昭帝说：“将军请戴上冠帽吧！朕知道信是假的。将军没有罪。”霍光很惊讶地问道：“陛下怎么知道的呢？”昭帝说：“将军去检阅郎官是近日的事。调校尉以来还不到10天，燕王远在数千里以外，怎么来得及知道呢？况且将军您一定要反，也不会在乎多一个或少一个校尉吧！”这时昭帝才14岁，却能如此识别贤愚，明辨是非，着实使在场的尚书及其身边的人都感到惊奇不已。这时，那上书的人果然已逃之夭夭了。皇帝命人追捕，上官桀等人害怕机密泄露，于是对昭帝说：“小事不值得穷追不舍。”昭帝坚决不同意。不得已，上官桀派人把上书的人杀了，然后制造假证，说他是畏罪自杀，这件事才算告一段落。
后来，上官桀及其党羽又在昭帝面前攻击、诬陷霍光。昭帝发怒说：“大将军是忠臣，先帝委托他来辅佐朕，敢有诽谤他的，要治罪！”从此以后，上官桀再也不敢再说什么了。
上官桀等人见上告的计谋不行，于是密谋叫长公主设酒席请霍光，暗伏兵士，杀掉霍光，乘势废掉昭帝，迎立燕王为天子。长公主家舍人的父亲稻田使者燕仓得知这个密谋，立即告诉他的上司大司农杨敞，杨敞畏事不敢揭发，于是告诉了杜延年，杜延年立即将此密谋报告给霍光。霍光震惊不已，当即采取断然行动。这年九月，上官桀父子、桑弘羊、丁外人等都以谋反罪被处死，并诛灭了他们的宗族。长公主、燕王旦都自杀而死。在这次激烈而残酷的权力争夺战中，霍光取得了绝对的胜利，从而也奠定了他更为坚实的政治基础，为日后推行他的政策和主张提供了有效的保障。
大是大非面前敢于担起责任
霍光有胆。废立皇帝事关重大，如果处理不好，一不小心就是造反，就是谋逆，结局只能是自己身首异处。霍光有识。在统了一群臣的意见后，和他们一起去谒见太后，取得太后的支持，在太后的名义下进行废帝另立的活动，最终顺利地把不称职的昌邑王废掉，这样做稳定了国内的政治形势，保障了社会经济的继续发展，出现了“吏称其职，民安其业”的汉宣帝中兴局面。
西汉元平元年（公元前74年），昭帝病逝，没有儿子，武帝的6个儿子中独有广陵王刘胥在世，群臣讨论该立谁为皇帝时，都有意立广陵王。广陵王本来就是因为行为放纵、不合正道，才不被武帝选用的，所以霍光听了大家的议论后犹豫不决。这时有个郎官上书说：“周太王废黜太伯而立王季，周文王舍弃伯邑考而立武王，都是只看合适才立。即使是废黜长子而立少子也是可以的。广陵王不能继承帝位。”此话正合霍光的心意，霍光把郎官的上书拿给丞相杨敞等人看，于是把这个郎官提拔为九江太守。当天，霍光奉皇太后诏令，派遣行大鸿胪事的少府乐成、宗正德、光禄大夫吉、中郎将利汉去迎接昌邑王刘贺。
刘贺是汉武帝的孙子，是哀王的儿子。到长安后，即位为皇帝，但是他行为放纵，淫乱不堪，举动无节，政事失当。霍光见昌邑王荒淫无道，非常担忧，于是单独询问大司农田延年，这事该怎么办。田延年说：“将军是国家的柱石，既然知道这个人确实不行，为什么不向太后说明，另选贤明的加以拥立呢？”霍光很是疑惑地说：“现在想这么办，在古代有先例吗？”田延年说：“伊尹做殷朝的相，废黜太甲来安定宗庙社稷，后世称颂他的忠诚。将军您如果能够办好这件事，也就是汉朝的伊尹啊！”霍光深以为然，又给田延年加官给事中。让他可以进宫议事，紧接着就与车骑将军张安世合谋，召集公卿大夫在未央宫共同议事。
会上，霍光说道：“昌邑王行为昏庸淫乱，恐怕会给国家带来危险，怎么办？”群臣全都大惊失色，谁也不敢发言，只是随声应付，不置可否而已。这时田延年离开座席走上前，按着剑慷慨陈辞道：“先帝把年幼的太子托付给将军，又把天下托付给将军，是因为将军忠诚、贤明，能保刘氏子孙的平安。现如今臣民扰乱不安，国家行将崩溃。而且汉朝历代相传，谥号里都有孝字，意思就是要长保天下太平，让祖先能享受子孙的祭祀啊！如果让汉家断绝了祭祀，等将军死了，他又拿什么脸面到地下去见先帝呢！”接着他又带着威胁的口吻说：“今天的讨论，不能有一会儿的耽搁。群臣中有谁赞成得晚一些，就请让我杀了他！”霍光谢罪说：“九卿对我的责备是正确的。天下人心浮动，议论纷纷，我应当受到责备。”于是参加会议的都叩头说：“百姓的命运都在将军一个人了，我们都只听将军的安排。”
会议当即停止，霍光立即率群臣一起去谒见太后，并向太后详细禀告了会议的情况，并认为昌邑王荒淫迷惑，失掉了帝王礼仪，扰乱了汉家制度，不能继承帝位。皇太后对昌邑王的行为也很不满，现在霍光等人有意废黜昌邑王，她没有任何异议，当下表示同意和支持。
不久，昌邑王就被遣送回昌邑，成为一个普通的人。仅仅只有27天，他就从位极天尊的皇帝宝座上跌落，成为一个湮没无闻的平民百姓。
昌邑王被废后，霍光与车骑将军张安世商议迎立新君，并在掖庭中会集丞相以下官员讨论确立人选。当时武帝的子孙中，齐王早死，没有儿子；广陵王刘胥已经在以前决定不用了；燕王刘旦由于谋反而自杀，他的子孙不在考虑范围之内，近亲惟有戾太子的孙子已在民间，叫刘询，民间都称赞他好。这时，光禄大夫丙吉上书说，皇曾孙已有十八九岁了，而且通经术，为人节俭，慈仁爱人，请求霍光拥立他。田延年也认为皇曾孙德行美好，力劝霍光、张安世拥立。霍光采纳了他们的意见。在这年九月，霍光会同公卿大臣上奏太后立皇曾孙为帝，皇太后下诏同意了。
霍光于是派宗王刘德到皇曾孙的家乡去，让皇曾孙梳洗干净，然后给他皇宫里的衣服。太仆驾车来迎接曾孙，到宗正府举行斋戒，进未央宫谒见皇太后，被封为阳武侯。过了不久，霍光捧上皇帝的玺绶，皇曾孙在拜谒高祖庙后正式继位，是为汉宣帝。
宣帝即位后不久，即下诏褒扬霍光“安宗庙”之功，命令把河北东武阳1.7万户加封给霍光，连同以前封的共为2万户。另外，前后赏赐计黄金7千斤，钱6千万，杂色绸缎3万匹，奴婢170人，马两千匹，最好的住宅一所。
