家奴驰入朝堂，称病乞假。朝臣亦知他欺主，莫敢举劾。还有霍禹姊妹，仗着母家势力，任意出入太后皇后两宫。霍显越好横行，视两宫如帷闼一般，往返自由，不必拘礼。为此种种放浪，免不得有人反对，凭着那一腔懊恼，毅然上书道：
臣闻《春秋》讥世卿，恶宋三世为大夫，及鲁季孙之专权，皆足危乱国家。自后元以来，后元为汉武年号，见前文。禄去王室，政由冢宰。今大将军霍光已殁，子禹复为右将军，兄孙山，亦入秉枢机，昆弟诸婿，各据权势，分任兵官，夫人显及诸女，皆通籍长信宫，宫在长乐宫内，为上官太后所居。或夤夜呼门出入，骄奢放纵，恐渐不制；宜有以损夺其权，破散阴谋，以固万世之基，全功臣之世，国家幸甚！臣等幸甚！
这封书系由许广汉呈入，署名并非广汉，乃是御史大夫魏相所陈。相字弱翁，定陶人氏，少学易，被举贤良，对策得高第，受官茂陵令。迁任河南太守，禁止奸邪，豪强畏服。故丞相田千秋次子，方为雒阳武库令，闻相治郡尚严，恐自己不免遭劾，辞职入都，入白霍光。光还道相器量浅窄，不肯容故相次儿，当即贻书责备。嗣又有人劾相滥刑，遂发缇骑，拘相入都。河南戍卒，在都留役，闻知魏相被拘，都乘霍光公出，遮住车前，情愿多充役一年，赎太守罪。经光好言遣散，旋又接得函谷关吏报告，谓有河南老弱万余人，愿入关上书，请赦魏相。光复言相罪未定，不过使他候质，如果无罪，自当复任等语。关吏依言抚慰，大众方才散归。至相被逮至，竟致下狱，案无左证，幸得不死。经冬遇赦，再为茂陵令，调迁扬州刺史。宣帝即位，始召入为大司农，擢任御史大夫。至是愤然上书，也并非欲报私仇，实由霍氏太横，看不过去。因浼平恩侯许广汉代为呈递，委屈求全。相有贤声，故笔下代为洗刷。
宣帝未尝不阴忌霍家，因念霍光旧功，姑示包容，及览到相书，自无异言。相复托广汉进言，乞除去吏民副封，借免壅蔽。原来汉廷故事，凡吏民上书，须具正副二封，先由领尚书事将副封展阅一周，所言不合，得把正封搁置，不复上奏。相因霍山方领尚书事，恐他捺住奏章，故有此请。宣帝也即依从，变更旧制，且引相为给事中。霍显得知此事，召语禹及云山道：“汝等不思承大将军余业，日夕偷安，今魏大夫入为给事中，若使他人得进闲言，汝等尚能自救么？”问汝果做何勾当？禹与云山，尚不以为意。既而霍氏家奴与御史家奴争道，互生龃龉，霍家奴恃蛮无理，竟捣入御史府中，汹汹辱骂。还是魏相出来陪礼，令家奴叩头谢罪，才得息争。旋由丞相韦贤，老病乞休，宣帝特赐安车驷马，送归就第，竟升魏相为丞相。御史大夫一缺，就用了光禄大夫丙吉。吉曾保护宣帝，未尝自述前恩，此次不过循例超迁，与魏相同心夹辅，各尽忠诚。独霍显暗暗生惊，只恐得罪魏相，将被报复。且因太子奭册立以后，尝恨恨道：“彼乃主上微贱时所生，怎得立为太子？若使皇后生男，难道反受他压迫，只能外出为王么？”汝试自思系是何等出身？乃悄悄的入见霍后，叫她毒死太子，免为所制。霍后依着母命，怀着毒物，屡召太子赐食，拟乘间下毒。偏宣帝早已防着，密嘱媬姆，随时护持，每当霍后与食，必经媬姆先尝后进，累得霍后无从下手，只好背地咒骂，衔恨不休。有是母必有是女。宣帝留心伺察，觉得霍后不悦太子，心下大疑。回忆从前许后死状，莫非果由霍氏设计，遣人下毒，以致暴崩。且渐渐闻得宫廷内外，却有三言两语，流露毒案，因此与魏相密商，想出一种釜底抽薪的计策，逐渐进行。
当时度辽将军范明友，为未央卫尉，中郎将任胜，为羽林监，还有长乐卫尉邓广汉，光禄大夫散骑都尉赵平，统是霍光女婿，入掌兵权。光禄大夫给事中张朔，系光姊夫，中郎将王汉，系光孙婿，宣帝先徙范明友为光禄勋，任胜为安定太守，张朔为蜀郡太守，王汉为武威太守；复调邓广汉为少府，收还霍禹右将军印，阳尊为大司马，与乃父同一官衔；特命张安世为卫将军，所有两宫卫尉，城门屯兵，北军八校尉，尽归安世节制。又将赵平的骑都尉印绶，也一并撤回，但使为光禄大夫。另使许史两家子弟，代为军将。
霍禹因兵权被夺，亲戚调徙，当然郁愤得很，托疾不朝。大中大夫任宣，曾为霍氏长史，且前此奉诏护丧，因特往视霍禹，探问病恙。禹张目道：“我有甚么病症？只是心下不甘。”宣故意问为何因，禹呼宣帝为县官，信口讥评道：“县官非我家将军，怎得至此？今将军坟土未干，就将我家疏斥，反任许史子弟，夺我印绶，究竟我家有甚么大过呢？”宣闻言劝解道：“大将军在日，亲揽国权，生杀予夺，操诸掌握，就是家奴冯子都王子方等，亦受百官敬重，比丞相还要威严。今却不能与前并论了。许史为天子至亲，应该贵显，愿大司马不可介怀！”宣亦有心人，惜语未尽透辟。禹默然不答，宣自辞去。
越数日禹已假满，没奈何入朝视事。天下事盛极必衰，势盛时无不奉承，势衰后必遇怨谤，况霍氏不知敛束，怎能不受人讥弹？因此纠劾霍家，常有所闻。霍禹、霍山、霍云，无从拦阻，愁得日夜不安，只好转告霍显。显勃然道：“这想是魏丞