御史就是管监察的官，任命这样的人当御史，那不还要得谁咬谁？所以，汉文帝犹豫了。
季布来到京城长安，在客馆居留了一个月，虽然住宿费国家给报销，但是季布很郁闷，所以他找人四处打听，到底是怎么回事，这才知道汉文帝有点犯嘀咕，召见之后就又想让他回原郡。
季布是个很重承诺的人，只要出口就必须办到，这样的人最讨厌那种朝令夕改的人，动不动就变卦，成何体统？
他对汉文帝的决定很恼火，因此求见汉文帝，当面对皇帝说道：“我没有什么功劳却受到了您的恩宠，在河东郡任职。现在陛下无缘无故地召见我，这一定是有人妄誉我来欺骗陛下；现在我来到了京城，没有接受任何事情，就此作罢，遣回原郡，这一定是有人在您面前毁谤我。陛下因为一个人赞誉我就召见，又因为一个人的毁谤而要我回去，我担心天下有见识的人听了这件事，就窥探出您为人处事的深浅了。”那意思是本来您是想提拔我，但是又总是拿不定主意，这样的事我季布就做不出来！
汉文帝脸羞得红了，默不作声，觉得很难为情，过了很久才找了个好的借口：“河东对我来说是一个最重要的郡，好比是我的大腿和臂膀，所以我才特地召见你啊！”
季布虽然知道皇帝言而无信，却也不好再顶撞，就辞别了皇上，回到了河东郡守的原任。
