卫皇后听了卫青的转达，即向汉武帝脱簪请罪。汉武帝此举，是要安定卫氏集团成员的心。
但是，汉武帝同皇太子的关系仍和先前一样，卫皇后也依然独守空房，难得见皇帝一面。朝内大臣中的忠厚长者皆喜欢皇太子，那些用法深刻的酷吏们却经常向武帝说他的坏话。
皇太子之所以得立，是他的背后有两股支持的力量。一股力量来自汉武帝，这股力量如今有些变幻莫测；另一股力量来自卫氏外戚集团。
虽然卫青不像田蚡那样飞扬跋扈，一贯循规蹈矩， “奉法遵职”,但大将军、骠骑将军的崇高地位不由人不畏惧几分。
当时除汲黯外，有哪个大臣见了卫青不拜上几拜呢?可惜的是，卫氏集团的两根台柱子——卫青和霍去病年寿不永，英年早逝，霍去病的终年只有二十四岁。卫氏集团自此一蹶不振。
太初二年(前103),皇太子的姨夫公孙贺拜相，为卫氏集团带来一丝生气，但要想恢复昔日气势已经不可能了。
有学者断言后来公孙贺被族诛，是一场政治清洗的开始，是武帝打击卫氏外戚集团，为废长立幼扫清道路的信号。
