因为如果不尊崇霍光，他的皇位合法性就有问题，俩人是一根绳上的蚂蚱，无论怎么不爽，也只能抱着他的牌位。要理解这个问题，你必须了解之前的背景，即汉武帝临死前所发生的“继承权危机”。
在汉武帝晚年，发生了“巫蛊之祸”，也就是汉武帝岁数大了，有迷信鬼神，所以，产生了幻觉，怀疑是有人用“巫蛊”的妖术诅咒他，想要他的命。今天宫斗剧其实普及了一下“巫蛊”，就是俗称的“扎小人”，现代人一般是不信这东西能害人的，但是汉代的古人，就另当别论，他们是真信别人在后面拍你肩膀，你答应了就会中巫术的。
所以，怀着对死亡恐惧的汉武帝就任用了一群“奸邪小人”，在长安城中四处寻找巫蛊的证据，关键是他们还真在当时太子的宫中找到了证据，过去人们依据《资治通鉴》的说法，认为太子刘据是被冤枉的，不得不谋反，后来汉武帝还后悔了。
里面明确考证出，卫太子刘据应该就是搞了巫蛊，想让他老爹早日归西，只是没想到冲突激化，只能发兵来硬的。最后卫太子刘据兵败逃亡自杀，其家人也死的死，藏的藏。而汉宣帝就是刘据的孙子，也就是汉武帝的曾孙。但是，必须指出的是，接下来的继承权之争，就没有刘据一系什么事儿了，因为很明确的是汉武帝并没有给予自己这个长子和结发妻子卫子夫对等的哀荣，也没有什么追封。
所以，在汉武帝死后，顺理成章地，留下了遗诏，让钩弋夫人的儿子刘弗陵继位，并让之前只是校尉级别的近臣霍光担当大司马大将军来辅政。当然，辅政班子是四个人，在刘弗陵在位期间，这四个人也是明争暗斗，最终，霍光依托汉昭帝刘弗陵的信任，一举消灭了上官桀、桑弘羊和燕王刘旦这个反动集团。
而金日（石+单）作为匈奴降人王子，一直很低调，有很早挂掉，所谓的四人辅政，很快变成了一人专政。要注意的是，汉武帝死时总共就没几个成年的儿子，燕王刘旦是一个，广陵王刘胥是一个，还有一个就是昌邑王刘髆。
在汉昭帝英年早逝之后，汉王朝又一次面临继承权危机，整个朝廷都支持广陵王刘胥的情况下，霍光力排众议，扶立了昌邑王刘髆之子，继承了死去老爹刘髆王位的昌邑王刘贺，也就是日后的海昏侯。没想到，这位新君在进长安登基的过程中，犯了种种错误，在汉朝的历史书写中，说他犯了成百上千中缺德事儿，然后就被霍光拉着太后给废黜了。
事实上，从蛛丝马迹来看，应该是他想复制当年先祖汉文帝入长安后，先控制宫禁军队，逐步替换自己昌邑王国亲信，当个实权皇帝的路子，结果却被权臣霍光无情地扇趴下在地上，最后皇位丢了，近臣也全部被诛杀。
要知道，霍光为了忽略广陵王刘胥，下了多大的功夫，甚至不惜以昌邑王刘髆之母李夫人是汉武帝晚年最爱的理由来“霸王硬上弓”，事实上，他所宣传的，所谓的汉武帝最爱，甚至对李夫人“以后礼葬之”的说法，在茂陵考古之后，很明确地不存在，李夫人墓葬只有一条墓道，整体规格距离皇后差得远呢。
换句话说，霍光事先把宣传工作做得太足了，昌邑王刘贺都让他吹成“天降伟人”的伟大血统了，结果，他给废了。怎么办？只能内部挖潜，这时候推出了狱中长大的刘据的孙子，也就是汉宣帝。所以，汉宣帝的血脉身份，实际上是霍光确认的，霍光用他滔天的权势为汉宣帝的正统血脉做了背书。
而在礼仪关系上，汉宣帝在霍光活着的时代，并不是以刘据一脉的继承者出现的，而是汉昭帝的皇位继承人。汉昭帝按照血缘，应该算是他的叔祖父，但在宗法昭穆上，两人实际上成了“父子”。
汉宣帝在霍光死后，力求排除之前低头的故事，追尊自己的亲父，又给自己的祖父刘据上谥号，但是也是一个“戾”字，即“戾太子”，这既不是美谥，也没有追尊为皇帝，但是也成为了王莽篡汉时指责的一个理由。
“贰父”，其实是宗法父亲和亲生父亲都尊奉，实际上是违背常理的事情，这个王莽还有专门的奏议文章讨论。到了东汉，汉统回归，政治上，就不再强调汉宣帝与汉昭帝的关系，而着重提他的长子嫡出身份，理应为帝。但是在汉宣帝继位的当时，由于戾太子的谋反事件并没有平反，反贼的后人到底有没有资格当合法皇帝，是霍光一句话的事儿。而如果汉宣帝在霍光死后否定霍光，有一个人会非常高兴。
那就是广陵王刘胥，这位老爷爷在位64年，是中国历史上执政很长的一位诸侯王。宣帝五凤四年，也就是汉宣帝（刘胥的侄孙啊）自己死之前10年，因“坐祝祖上”，也就是诅咒，案发被究，自己以绶带自缢，广陵国除。广陵王刘胥作为汉武帝留下的唯一一个在世的儿子，活得很结实，一只眼睛肯定一直盯着长安，如果汉宣帝真的露出这么大的破绽，会不会借势生事，就谁也说不清了，事实上，汉宣帝也一直派使者监视着广陵王和海昏侯，这两个有可能产生威胁的对手。
可见，汉宣帝未必不想把霍光一起批倒批臭，重点是，为了出一口气，造成现实的政治动荡，实在是个赔本的买卖，完全划不来。
至于清洗霍光势力，只是出于收回皇权的政治需要，并不一定就是造反。纵观大汉一朝，宦官势力与外戚势力交替掌权的恶性循环一直存在。皇帝刚掌权的时候，提高宦官势力，清理外戚势力成为惯例。下一个小皇帝上位，外戚势力跟着上位，清理宦官势力也是惯例。
