但是汉武帝页不得不先按耐住自己,因为当时的卫家贡献非常大,先说卫青,他作为大将军,破匈奴平战乱。立下赫赫战功,在军中的威望非常高,所以哪怕是汉武帝,真的想要解决他也要好好想一想。毕竟军中的战士心中的战神就是卫青将军,一旦卫青出事,那军中就可能混乱。并且当时汉武帝对于武将的需求是非常大的,而卫青能力显而易见,所以以汉武帝的智谋和他的雄才大略是不可能先把自己人给灭了,汉武帝做不出这样的傻事。
但是汉武帝是什么样的人呢?他是一个拥有雄才大略的人,并且他对于权力的把控非常的强烈。是一个不允许任何人威胁自己权力的君王。但是卫家的存在却如鲠在喉,所以一直忍耐,忍到卫青死后,他才彻底的对卫家动手。西汉的外戚专权,从吕后到杜太后一直都有,汉武帝这样的君王是不可能成为傀儡的。同时卫家的情况非常复杂。
汉武帝的皇后是卫子夫,而卫子夫生下嫡子刘据,刘据的舅舅是卫青,而霍去病的舅舅也是卫青,不仅如此,卫青还娶了汉武帝的姐姐,所生下的三个儿子都被封侯,丞相公孙贺是卫子夫姐姐的丈夫。这样算下来几乎西汉当时的高级权力,大部分都掌握在卫家的手中。这些姻亲关系和血缘关系形成了一个庞大的利益链条。可以说这是一荣俱荣,一损俱损。在汉武帝看来,这就是外戚专权的前兆,甚至已经不能算是前兆了,也许之后,卫家便会彻底把自己架空,让自己成为一个傀儡,这种事情,汉武帝绝对不会重蹈覆辙。
他先是把卫青和霍去病通通设立成大司马,让两人的官职相当,借此挑拨两人的关系。但是汉武帝失策了,他没有想到舅甥两人的关系如此好。他就借钩弋夫人的儿子刘弗陵来谋划这件事情。他先是把刘弗陵的母亲钩弋夫人所居住的宫殿改名为尧母宫,很多人都认为这是汉武帝决定立刘弗陵,为下一任君王的前兆。于是手下的很多人就有了别的想法。当时的卫青已经死了,而卫子夫也已经失宠。现在又有一个刘弗陵,所以一些势力开始蠢蠢欲动,他们要把太子刘据给解决了,于是他们诬陷太子刘据进行巫蛊之术。
汉武帝非常愤怒,并且下令彻查。这次彻查杀了很多卫家的人,刘据发现这根本就不是查案,简直就是针对卫家。于是为了保住自己的性命决定起兵,汉武帝得知后也出兵,两人开始了内斗。最后太子刘据虽然逃跑,但是卫子夫却自缢,太子也没有跑多远,暴露自己行踪后,非常绝望也自缢。最后汉武帝把卫氏全家都杀了。但是汉武帝依然非常愤怒,他愤怒的是自己只想解决掉魏家的势力,但是因为那些奸人的挑拨,自己的儿子也死了,所以最后他把那些奸人人直接杀了,并且立了思念儿子的宫殿。在汉武帝晚年的时候,他离刘弗陵为太子,并且除掉了年轻的钩弋夫人,这也是为了防止江山不落入他人手中,为了防止外戚专权。