颍阴侯把灌夫的情况向皇上汇报了，皇上就任命灌夫担任中郎将。过了几个月，因为犯法而丢了官。后来到长安安了家，长安城中的许多显贵没有不称赞他的。汉景帝时，灌夫官至代国国相。景帝去世，当今皇上武帝刚即位，认为淮阳是天下的交通枢纽，必须驻扎强大的兵力加以防守，因此调任灌夫担任淮阳太守。建元元年（前140），又把灌夫内调为太仆。二年（前139），灌夫与长乐卫尉窦甫喝酒，灌夫喝醉了，打了窦甫。窦甫，是窦太后的兄弟。皇上恐怕窦太后杀灌夫，调派他担任了燕（ｙāｎ，烟）国国相。几年以后，又因犯法丢官，闲居在长安家中。

　　灌夫为人刚强直爽，好发酒疯，不喜欢当面奉承人。对皇亲国戚及有势力的人，凡是地位在自己以上的，他不但不想对他们表示尊敬，反而要想办法去凌辱他们；对地位在自己之下的许多士人，越是贫*的，就更加恭敬，跟他们平等相待。在大庭广众之中，推荐夸奖那些比自己地位低的人。士人们也因此而推重他。

　　灌夫不喜欢文章经学，爱打抱不平，已经答应了别人的事，一定办到。凡和他交往的那些人，无不是杰出人士或大*巨猾。他家中职累的资产有几千万，每天的食客少则几十，多则近百。为了在田园中修筑堤塘，灌溉农田，他的宗族和宾客扩张权势，垄断利益，在颍川一带横行霸道。颍川的儿童于是作歌唱道：“颍水清清，灌氏安宁；颍水浑浊，灌氏灭族。”

　　灌夫闲居在家虽然富有，但失去了权势，达官贵人及一般宾客逐渐减少。等到魏其侯失去权势，也想依*灌夫去报复那些平日仰慕自己，失势后又抛弃了自己的人。灌夫也想依*魏其侯去结交列侯和皇族以抬高自己的名声。两人互相援引借重，他们的交往就如同父子之间那样密切。彼此情投意合，没有嫌忌，只恨相知太晚了。

　　灌夫在服丧期内去拜访丞相，丞相随便地说：”我想和你一起去拜访魏其侯，恰值你现在服丧不便前往。”灌夫说：“您竟肯屈驾光临魏其侯，我灌夫怎敢因为服丧而推辞呢！请允许我告诉魏其侯设置帷帐，备办酒席，您明天早点光临。”武安侯答应了。灌夫详细地告诉了魏其侯，就像他对武安侯所说的那样。魏其侯和他的夫人特地多买了肉和酒，连夜打扫房子，布置帷帐，准备酒宴，一直忙到天亮。天刚亮，就让府中管事的人在宅前伺侯。等到中午，不见丞相到来。魏其侯对灌夫说：“丞相难道忘记了这件事？”灌夫很不高兴，说：“我灌夫不嫌丧服在身而应他之约，他应该来。”于是便驾车，亲自前往迎接丞相。丞相前一天只不过开玩笑似地答应了灌夫，实在没有打算来赴宴的意思。等到灌夫来到门前，丞相还在睡觉。于是灌夫进门去见他，说：“将军昨天幸蒙答应拜访魏其侯，魏其侯夫妇备办了酒食，从早晨到现在，没敢吃一点东西。”武安侯装作惊讶地道歉说：“我昨天喝醉了，忘记了跟您说的话。”便驾车前往，但又走得很慢，灌夫更加生气。等到喝酒喝醉了，灌夫舞蹈了一番，舞毕邀请丞相，丞相竟不起身，灌夫在酒宴上用话讽刺他。魏其侯便扶灌夫离去，向丞相表示了歉意。丞相一直喝到天黑，尽欢才离去。