霍光目光短浅，并没有一种对当时大势所趋的儒家礼乐文教政治的充分认同，适时将儒生逐渐吸取到自己的政治架构中，反而长期将他们排斥在外。这使得此段时间许多已经陆续进入政治活动的儒生仍然只能继续游离于政治主流外，只能继续不断积累力量以待时机。
直至霍光去世，魏相清除霍氏势力，才为儒学政治化打开了缺口。霍光去世后，宣帝思其功德，继续重用霍氏子孙。时任御史大夫的魏相即通过平恩侯许伯上封事主张对霍氏子孙要“损夺其权，破散阴谋”(《汉书·魏相传》)，首开削夺霍氏之权的主张。其后又再度借平恩侯上书去副封之制，架空领尚书事的霍山。此后，魏相为相，积极进行各项改革，“尽变异大将军时法令，以公田赋与贫民，发扬大将军过失”。
并不断削夺霍氏权力，使霍氏对他又怨又惧，最终铤而走险，“谋矫太后诏，先召斩丞相，然后废天子”，结果事败被族诛。据王利器先生考证，参加过盐铁会议的，在《汉书》唯一有传可查的，仅有魏相一人。魏相诛灭霍氏并非一种偶然行为，也并非只是一次简单的权力斗争，而是儒生集团对霍光政治的最后总攻。通过此事，儒家政治在被霍光长期压制后终于扫清了障碍，为其后在宣、元时期逐步走上政治舞台的主角，使汉代政治完成向“守文”的转变打开了大门。
