单于已经签署和亲盟约，于是汉文帝就下令御史说：“匈奴大单于送给我的信中说，和亲已确定，逃亡的人不足以增加民众和扩大土地，今后匈奴人不再闯入边塞，汉朝人也不要走出边塞，违犯现今条约的就处死，这就可以长久保持亲近友好关系，今后不再产生祸患，对双方都有利，我已答应了他的要求。希望向全国发布告示，让百姓都知道此事。”

　　汉文帝后元四年（前160），老上稽粥单于死去，他的儿子军臣继位当了单于。军臣单于继位后，孝文帝再次与匈奴和亲。而中行说仍然侍奉军臣单于。

　　军臣单于继位四年时，匈奴又断绝了和亲关系，大举进攻上郡、云中郡，派出三万骑兵，杀死许多汉人，抢掠大量财物而离去。于是汉朝派出张武等三位将军，驻军北地、代国驻句注，赵国驻飞口，沿着边塞之地，也各派兵坚守，防备匈奴入侵。又安置周亚夫等三位将军率兵驻守长安西边的细柳，渭河北岸的棘门和霸上，以防御匈奴。匈奴骑兵侵入代地句注边界，报警的烽火便通向甘泉和长安。几个月后，汉朝兵马来到边境，匈奴远远地离开边塞，汉朝的军队也就作罢。此后一年多，孝文帝去世，孝景帝继位，赵王刘遂就暗中派人与匈奴联络。吴、楚等七国叛乱时，匈奴想同赵国联合，入侵边塞。后来，汉王朝围困并攻破赵国，匈奴也停止了入侵的举动。从此以后，孝景帝又和匈奴和亲，互通关市，送给匈奴礼物，派遣公主嫁给单于，按以前的盟约行事。直到孝景帝去世，匈奴虽然时有小的骚扰边境的活动，却没有大的侵掠行动。

　　当今皇帝汉武帝继位，申明和亲的规定，宽厚地对待匈权，互通关市，赠送大量财物。匈奴从单于到平民都亲近汉朝，往来于长城之下。

　　汉朝派马邑城的聂翁壹故意违犯禁令，运出货物同匈奴交易，佯称出卖马邑城以引诱单于。单于相信此事，又贪恋马邑城的财物，就用十万骑兵侵入武州边塞。这时，汉朝在马邑城附近埋伏下三十余万大军，御史大夫韩安国担任护军将军，护卫着四位将军准备伏击单于。单于已经进入汉朝边塞，离马邑城尚有一百余里，看到牲畜遍野却无放牧之人，感到奇怪，就去攻打汉朝的侦察哨所。这时，雁门郡的尉史正在巡察，看到敌军，就保护侦察哨所，他知道汉朝的打算。单于捉到了尉史，想杀死他，尉史便向单于报告了汉朝军队埋伏的地点。单于大惊说：“我本来就对此事有疑心。”于是单于就率兵而回。走出边境时说道：“我得到尉史，是天意，天让你向我报告。”就封尉史做“天王”。汉朝军队曾约定，单于进入马邑城后，再放纵兵士攻杀。如今单于未到马邑，所以汉朝军队一无所获。汉朝将军王恢的军队走出代郡攻击匈奴的辎重，听说单于大军已回，兵卒多，因而不敢出击。汉朝认为王恢本是这次伏击战的出谋画策的人，却不敢进攻，因而杀了王恢。从此以后，匈奴断绝和亲关系，攻击直通要道的边塞，常常侵入汉朝边境抢掠，次数多得无法计算。但匈奴贪婪，还是喜欢与汉朝互通关市，非常喜欢汉朝的财物，汉朝也仍然与匈奴保持着关市贸易关系，投合他们的心意。