刘询忌讳的不是霍禹，霍云几个不成器的霍氏子孙，他忌讳的是霍家亲戚中那几位掌管军队的将军。
刘询第一个动的是范友明。
范友明是霍光的女婿，封平陵侯，现任度辽将军，未央卫尉。刘询改任其为光禄勋，剥夺了他的兵权。
范友明还没回过神来，刘询的第二道任命诏书又下来了，霍光的二女婿中郎将，羽林监任胜为安定太守。
这还不算完，刘询继续着他的动作。
霍光姐姐的女婿给事中，光禄大夫张朔外放蜀郡太守。霍光孙女婿中郎将王汉外放五威太守。霍光的长女婿长乐卫尉改任少府。中女婿赵平的骑都尉兵权印绶也被收回，专人光禄勋。
刘询还嫌不够安稳，他改令张安世为两宫卫尉，掌管长安南北两军。其他空出的职位则由许，史两家子弟担任。
当然，刘询也不是不讲人情的，他特意任命霍禹为大司马。
不过，这个大司马与他爹的大司马却大不相同，因为除了名分上一样，权力可大不一样，霍禹这个大司马连印绶都没有，更别说什么权力。
说白了，这个大司马就是糊弄霍禹的。
刘询总算可以睡个安稳觉了，因为在他看来，霍氏已经对国家构不成任何威胁了。
事实上，霍氏只要从此有所收敛，荣华富贵应该是没任何问题的。
但是事实并不如此。
地节三年（前67）四月，刘奭立为太子。霍夫人听闻，气愤地连饭都吃不下，她说道，“刘奭乃民间时子，岂能立？皇后若有子，难道反为王邪？”
这位悍妇居然想故伎重施，命人暗中毒杀刘奭。只是刘询在许后崩逝后，特意加强了警戒，没让霍夫人得逞。
地节四年（前66），霍禹，霍云，霍山等人聚在一起长吁短叹。
霍山不无忧虑的道，“如今丞相用事，县官（指刘询）信之，大将军时的法度部更换。而且，儒生们喜欢狂言，又不避讳，大将军常常嗤之以鼻。陛下喜欢与儒生们在一起，他们多言我家过失，曾经说什么我家兄弟骄矜。现在还流传着“我家毒杀许后”的谣言。哼，你说这些毒舌之人…”
没想到，霍山话音刚落，霍夫人就焦急地跳了出来。
“山儿，你是听谁说的？”
“大街上，酒坊，茶楼，到处都是。”
霍夫人跌坐了下去，看到她这个表情，霍禹，霍云，霍山等十分迷惑，我看看你，你看看我，霍禹问道，“娘，你怎么了？”
“唉呀，糟了，糟了…”
“娘，您倒是说个明白，什么糟了？”
霍夫人焦急的直跺脚，她说道，“许后确是为娘叫女医衍毒杀的啊！”
“什么？！”霍禹等人惊呆了。
大堂里几盏茶杯打碎在地上，霍山更是连喝进去的茶水都喷了出来。