而这三方与霍光交恶，甚至敌对的势力，正是丁外人这个小人物串联起来的。
与此同时，汉昭帝刘弗陵的三哥燕王刘旦，因为自己明明在汉武帝在世的皇子中居长，却没有被立为皇帝，也心存怨恨。盐铁会议后，刘旦派往长安城的奸细发现了这一点，于是，他便联络丁外人，就这样，这几股政治势力就暂时联合起来，试图杀死霍光，废掉刘弗陵。
当然，指望这四方势力同心协力，肯定没有那么简单。
在诛杀霍光，清除霍氏一党的这个问题上，四方势力目标相同，但是，在是否废掉刘弗陵这个问题上，上官家必然有异心，毕竟，刘弗陵取得是他们家的闺女，作为当朝皇帝的老丈人，怎么可能说放弃就能放弃呢？
在始元六年，还发生了一件大事，可惜，因为盐铁会议的缘故，把官方注意力全部都吸引了过去，可是，在民间反应却完全不同。
阔别大汉朝整整十九年，未能为见自己的父亲苏建最后一面的苏武终于回到了长安城。
如果单从这一点来看，霍光主导的和匈奴人议和之事，还是颇具成效的。
苏武，苏建的第二子。
苏建，初以校尉身份跟随大将军卫青出征匈奴，因功封平陵侯，后以将军身份建造朔方城。后来，在元朔六年的那场对匈奴人的战争中，因为这一世有金知蝉的影响，匈奴人赵信并未得到汉武帝的重用，且苏建一直都在负责后勤任务，故此，苏建并没有在这一战中战败。
也正因为这个缘故，苏建就成了汉武帝时期，卫青手下唯一一个在生前能够保全自己爵位的部将。
后来，因为苏建生性文件，又善于营造，汉武帝任命他担任代郡太守，最终，他也死在代郡太守的官任上，死后，被安葬于大犹乡。
年轻的时候，凭着父亲苏建的庇荫，苏武与兄长苏嘉、弟弟苏贤皆被汉武帝加封为郎中，后来，苏武升任栘中厩监，这个官职也就是秩比六百石的小官，等于一个小号的弼马温。
在汉武帝时期，大汉朝不断讨伐匈奴，期间，交战双方也曾多次派使节互相侦察，互相试探对方的态度。
匈奴先后扣留了大汉朝使节郭吉、路充国等前后十余批人，而汉朝也扣留匈奴使节以相抵。
天汉元年，且鞮侯单于即位之后，因为害怕受到汉朝攻击，送还了之前被其所扣押的汉使路充国等人。
武帝为了表示对且鞮侯单于的赞许，于是，他派遣苏武以中郎将的身份，持节护送扣留在汉的匈奴使者回国，并附带了不少礼物，以答谢。苏武同副中郎将张胜及临时委派的使臣常惠等，并临时招募士卒、斥候百余人一同前往。到了匈奴，赠送财物给且鞮侯单于。
除了苏武之外，随行的人还有副中郎将张胜、假吏常惠等，以及招募来的斥候一百余人。
可是，之后，让苏武没有想到的是，他护送匈奴使者来到单于庭之后，且鞮侯单于却表现得越来越傲慢，这可不是大汉朝所期望的。
即便如此，且鞮侯单于原本也并没有打算扣留苏武等人。
且鞮侯单于正准备派使者护送苏武等人返回大汉，这一批汉使命实在是不好。
恰巧在此时，虞常事变发生了。
适逢匈奴缑王与虞常等在匈奴谋反，他们居然暗中策划绑架单于的母阏氏投奔汉朝。
这不，正好苏武等至匈奴。
虞常这个人，在汉朝的时候，就与张胜有旧。
于是，虞常私下拜访张胜，说：“听说汉朝皇帝很恨卫律，我能替汉朝用暗箭射杀他。我的母亲和弟弟都在汉，希望他们能得到汉朝的赏赐。”
张胜想都没有向，便答应了他，因为汉武帝的确是非常憎恨叛逃的卫律。苏武的这个好副手不仅没有将此事禀报给苏武，还送给了虞常许多财物。
于是，一个多月后，单于出外打猎，只有阏氏和单于子弟在。
虞常自以为找到了好的时机，便准备在这个时候发动叛乱。
只是，让他没有想到的是，虞常集齐的七十余人准备起事之前，其中一个人不但趁夜逃跑，而且，还揭发了他们的计划。
单于子弟急忙举兵与虞常等人交战，缑王等人战死；虞常被活捉。
且鞮侯单于游猎回来，得知此事，非常生气，他立即指派卫律亲自审理此案。
这个时候，张胜听到叛乱失败的消息，这才知道怕了。
张胜担心和虞常所说的话被揭发，便把事情告诉了苏武。
苏武看着猪队友，无可奈何地摇了摇头，并没有责怪张胜，只回答了一句话，道：“事情已经发生了，不管我这个正使是否提前知道此事，一定会牵连到我。如果我受到了侵害，就更加对不起国家了。”
说完，苏武便抽出身上的佩剑准备自杀。
张胜、常惠见状及时制止了他。
果不其然，虞常很快就供出了张胜。
且鞮侯单于听到审讯的结果，震怒不已，立即召集贵族商议此事，想杀汉使。
左伊秩訾说：“单于，此次叛乱，如果汉朝使团全员参与此事的话，全都将他们杀了，也没有什么可说的，可是，如果，只是一两个人参与此事的话，那要怎么处刑呢？以属下看，除了那个被虞常供出来的张胜之外，其他人应该全部招降。”
且鞮侯单于觉得有理，便又指派卫律召唤苏武来受审讯。
听闻这个消息，苏武对常惠说：“屈节辱命，即使活着，有什么面目归汉！”
说着，苏武便从怀中抽出父亲苏建临行前送给解腕尖刀，拔刀自刺。当初，苏建送给他这把刀的时候，就是为了防止自己的儿子在匈奴领地内受辱。
与其受辱，不如自杀。
这样还能够保全他自己，以及苏家的名声。
苏建一再告诫苏武，千万不能像以往那些投降于单于的汉人一样，为了让自己能够苟活于世，却害了全家人。