匈奴采纳了赵信的建议，派使者到汉朝，好言请求和亲。

天子把这件事交给群臣商议，有的人赞成和亲，有的人主张趁机迫使对方臣服。

丞相长史任敞说：“匈奴刚刚被打败，处境困窘，应该让他们做外藩之臣，每年按春秋两季在边境朝拜皇上。”

汉朝派任敞出使匈奴。单于听说任敞的主张，十分生气，就扣留他不放他回去。

此前汉朝也曾招降过匈奴使者，单于也就扣留汉朝使者相抵。

汉朝重新集结士兵、马匹，正赶上骠骑将军霍去病去世，于是汉朝很久都没有向北攻打匈奴。

几年后，伊稚斜单于在位十三年去世，他的儿子乌维即位为单于。

这一年，是汉朝元鼎三年（前114年）。

乌维单于即位，汉朝天子开始出行巡视郡县。

此后汉朝正在忙于向南诛灭南越和东越，没有进攻匈奴，匈奴也不进犯边境。

乌维单于即位的第三年，汉朝已经攻灭南越，派原来的太仆公孙贺率领一万五千名骑兵从九原出发行进二千多里，一直走到浮苴井才回来，途中没有看到一个匈奴人。

汉朝又派原来的从骠侯赵破奴率领一万多名骑兵从令居出发行进几千里，一直走到匈河水才回来，也没有看到匈奴人。

这个时候天子巡视边境地区，到了朔方郡，统领训练十八万骑兵来显示军威，并派郭吉委婉地转告单于。

郭吉到匈奴后，匈奴主客问他出使的目的，郭吉礼节谦卑言辞美好，说：“我见到单于后亲口跟他说。”

单于会见郭吉，郭吉说：“南越王的人头已经悬挂在汉朝京城北门了。现在单于如果立即前去与汉朝交战，天子正亲自带兵在边境等候；单于如果不能去，就该面向南方对汉朝称臣。为什么只是远远地跑开，躲藏在大沙漠以北寒冷而辛苦，又缺少水草的地方，没有作为呢。”

话说完后单于十分生气，立即将引见郭吉的主客斩首，并且扣留了郭吉不让他回去，把他迁往北海一带。

单于终究不肯进犯汉朝边境，而是休养士兵和马匹，习练射箭和狩猎，多次派使者到汉朝，甜言蜜语请求和亲。