就在曹操左右为难之时，忽有吕昭自许都携带荀彧、荀衍兄弟密信来至军前。
“袁绍谋划奇袭许都……”曹操看完密报脑袋里嗡的一声，“我因意气而误事矣！”说罢跌坐在杌凳之上，脸色惨白半天无语。
吕昭见他这等模样，赶紧凑上前解释道：“此乃田丰向袁绍所献之策，袁绍尚未决断，即便他此刻自易县回军也需时日。再说夏侯大爷坐镇许都，程昱、万潜等保守兖州，敌锋未可骤至，大爷您切莫着急。”吕昭是曹府小仆出身，虽然现在归在夏侯惇帐下听用，对曹操的称呼依旧没有改变。
曹操摆摆手以示不要做声，思索了好久才道：“悔不听荀公达之言，现在当真进退维谷了！我岂不知河北这消息未必是实，但此事给我提了个醒。我离开许都已有三月，这三个月里又有多少大小变故？公孙瓒未灭，袁绍别军即便渡河亦不足惧，但若是袁绍、吕布同时发难我又将如何应对呢？”他这会儿突然清醒过来，进而越想越害怕：此间战事未解，刘表与袁绍又素来交好，倘若袁绍攻我于北，刘表拖我于南，那时候或是吕布、或是袁术、或是关中诸将，只要再有一方与我为敌，许都人心不稳，我曹孟德这颗脑袋就要搬家了。
曹操不敢再想下去，即刻决定收兵，唤荀攸、郭嘉前来商议退军事宜，又向荀彧回信叮嘱戒备。曹营上下密宣指令，趁夜晚解去穰县之围，留下空营虚插旌旗，人衔枚马裹蹄，暗暗撤兵北归。就这样，这次征讨张绣又无功而返。
虽然曹操撤退井然有序，但时至天明两家兵马上发觉事情之变。穰县之危已解，留下贾诩守城，张绣、蔡瑁兵合一处，不过半日工夫就撵上了曹军大队人马。撤退遭袭最是危险，好在曹操早有准备，亲统精锐士卒殿后。饶是如此安排，荆州兵皆是生力军，仅杀个平分秋色，还是未能彻底击退敌军。曹军继续撤退，两家兵马紧随不舍，更糟糕的是此时又逢雨季到来。
对于擅长统兵的曹操而言，诸般不利因素都可以设法避免，唯有天气是无可奈何的，而这次赶上的还是多年不见的连续阴雨。雨下得并不大，但没完没了很是恼人。断断续续间，一连下了十几天的霉雨，好像老天再也不会晴朗了，加之气温炎热，天地间仿佛变成了大蒸笼，把一切都笼罩在氤氲之中。
虽然撤退者与追赶者受的是一样的苦，但彼此的情况却大不相同。张绣之军受困已久，如今可得发泄，天气虽差斗志不减；蔡瑁的荆州兵皆是襄樊一带的人，火炉子里长起来的，对闷热阴雨习以为常，几乎不受天气影响；但曹操的兵可就遭罪遭大啦！
曹军打了三个月的攻城战，师劳无功又颓然撤退，连兵带将本就气势低迷，再加上这样的鬼天气，众人压抑得喘不上气来。无奈之下曹操下令缓慢撤退步步为营，每天行进不到十里，脚下淌着泥水，还得随时注意后面的骚扰。这种时候只有耐住性子稳扎稳打，只要行军速度一加快，撤退马上就会变成溃退。
这段日子里满营将士的衣衫几乎没干过，又是雨、又是汗、又是泥，黏糊糊湿漉漉贴在身上，到晚上脱下来一看，在衣衫上起了一层白毛，而后背也生满了痱子。更加要命的是连着几天的雨道路也变得泥泞不堪，一脚踩下去又湿又滑，只得把草鞋脱去赤足前行。连着走几天这样的路，不少士兵的脚趾头都溽烂了，前一日的脓血未干第二天又在泥里挣命，疼得龇牙咧嘴一瘸一拐。就这样连着走了几天，曹军尚未撤出南阳这一郡之地，所幸河北方面并无动静，袁绍似乎没有采纳田丰的奇袭策略。
这一日，天气越发糟糕，比之先前又热了不少，而霉雨还是不见停歇。曹操一早督率兵马行军，击退了张绣的两番追袭，但兵士疲乏至极，只行了六里地便不得不安营休息。
时至正午霉雨不停，可气温却闷热难当，连一丝风都没有，热烘烘的水汽晕得人脑袋发涨。中军帐里一片氤氲，乐进、夏侯渊等武将都脱了个光膀子，空身背着剑，一个个露着浑身的腱子肉；荀攸是端正之士，但这会儿也不得不解开衣衫，显出瘦骨嶙峋的胸膛；郭嘉可不管那么多，不但脱了上衣，连裤子都扒了，反正他也不打仗，就穿了条裤头，可又怕坐下生痱子，干脆赤脚在帅案边蹲着。曹操身为当朝司空三军统帅自不能失仪，但也敞开怀，手里攥着一卷自己编纂的《兵法节要》，看是看不进去了，无非是想办法转移一下炎热感，这哪还像一场军事会议。
曹洪手扒帐帘望了一会儿，突然转身抱怨道：“他娘了个蛋的！敌人没有布帐，都是竹草搭棚，比咱透气舒服得多！”
“这就是教训啊。”荀攸叹了口气继续道：“以后再赶上这样的天气，务必事先做好准备，另外还得有些避暑的药草才好。”
乐进挺着光溜溜的大肚子，气喘吁吁道：“张绣那厮是不是疯了？这两天日夜骚扰我军，没有这么打仗的，咱们不得安歇，可他自己就不累吗？”于禁接茬道：“说是袁绍来袭，这都过了几天了，一点儿动静都没有，这不是虚惊一场嘛！早知如此还不如拿下穰县再退呢。”
朱灵哼了一声，撅着地包天的大下巴驳道：“我看撤兵就对了，真在穰县赶上这样的天气，即便攻城也攻不下。”
于禁听出他故意作对，擦擦额头上不住涌出的汗水，冷笑道：“没打的仗，你怎么知道攻不下？”
曹操本就心烦，听这俩人到了此刻还不能同心协力，把手中竹简往桌案上一拍。于禁、朱灵见他动怒，赶紧低下头不敢说话了。曹操环视这“肉隐肉现”的军帐，心绪烦乱至极，最后指了指蹲在一旁的郭嘉道：“奉孝，你说说现在该怎么办？”
郭嘉光着身子还不忘了拱手行礼，低声道：“天气这种事情，着急也没用，蔡瑁、张绣不退，咱们终究是被动。在下没有任何办法，只希望明公能横下心来慢慢走，老天总不能始终不晴吧？再者越往北咱们越有利，只要出了南阳郡，他们也就不敢追了。”
说了等于没说，但除了忍耐确实毫无办法。就在此时闻帐外一声禀报，王必、繁钦领着一个身披蓑衣的人走来。蓑衣人看见曹操赶紧摘下斗笠，露出年轻的白净面庞，跪倒帐外施礼道：“末将乃夏侯将军麾下校尉王图，率领一千兵马并携带蓑衣前来助阵！”曹操以前未见过王图，但听他带来蓑衣颇为高兴，笑道：“请起！快快进来避雨吧。”
王图起身走进来，顿觉这大帐里人肉味、土腥味、湿热气一并往脸上涌，又不好当着曹操的面抱怨什么，屏住呼吸道：“在下还有一件重要军情禀报，主公是不是……”说着话他左顾右看似有顾忌。
曹操见他这样小心，便知又不是什么好消息，叹了口气道：“有事但说无妨，是不是袁绍起兵了？”
“河北并无异样，不过……”王图从怀里掏出一纸帛书放到帅案上，“徐州吕布复叛，起兵袭击。这是荀令君亲笔书信，详述事情经过，请主公示下。”
天气湿热墨迹都花了，曹操辨认字迹细细观看。原来吕布起兵的罪魁祸首又是白波旧将杨奉、韩暹。这两个朝廷叛贼自被曹操击败后先投靠了袁术，再叛归吕布。有道是贼性难改，加之吕布约束不严，杨奉、韩暹时常率领部下掠夺百姓，还越过州界为害。郊县太守定下计谋，假称朝廷原谅二人往昔之罪，将他们诓骗至营中，于酒宴之上将二人斩杀。杨奉、韩暹一生三叛，死也是罪有应得，吕布也并未深究，只将二人余部草草了事。哪知郊县太守自以为已与吕布反目，适逢吕布遣人往河内张杨处购置马匹，郊县太守便派部将张飞半路劫走。吕布得知怒不可遏，即刻派手下率领精锐攻打小沛，又遣人联络沿海臧霸、吴敦、孙观等豪强为后援。郊县太守两战失利困守城中，派人至许都求援。
得知是吕布作乱不是袁绍来袭，曹操心里安宁多了。这几天他与荀攸、郭嘉私下计议过，回军许都后稍事休整就去灭掉吕布，以解除对抗袁绍时的东线隐患，只苦于吕布已在名义上归附朝廷，没有出兵的口实。而此事一出吕布情同造反，大可以名正言顺地出兵了。不过想了片刻，曹操又觉忧虑，眼前的危机尚未解除，而留守之人打仗的本事很不叫人放心，若是这样慢吞吞地行军，只恐未回许都，吕布已经攻破郊县。
荀攸在一旁看出曹操心思，伏到他耳边低声提醒道：“吕布尚不知陈登归顺，可速速致书广陵，令陈登假借协助吕布手下之名突袭下邳，小沛之围立时可解。”陈登为内应这件事帐中诸将还不知道，荀攸不敢当众明言。杀进豫州了。
曹操心有不甘。陈登是楔入吕布阵营的一颗钉子，若有一日曹操兵进徐州，陈登突然反水可以给吕布致命一击，若现在就用他，效果可就大打折扣了。但身在南阳鞭长莫及，曹操只得行此下策，无奈地喃喃道：“就依军师之言，我修下一封书信，叫军吏火速送回许都，叫文若按信行事……”
话未说完，王图便打断道：“主公，只怕军吏送不回去书信了。”
“唔？”曹操一愣问道：“什么意思？”
王图跪倒在地道：“在下领兵过来时，已有荆州兵马绕行至安众县地界，似乎有意截断我军归路。在下凭借骑兵之势强行突击而过，这才来到您面前。恐怕他们现在已经布置妥当，若无大队军兵掩护，单靠一个信使绝对过不去。”
荀攸眼睛一亮道：“荆州兵绕道扼我军归路？难怪张绣这两日连续强袭我军，原来要掩护蔡瑁绕道至安众。”众将闻听无不愕然。乐进第一个瞪圆了眼睛，挺着大肚皮嚷嚷道：“他妈的！前有堵截后有追兵，这不是把咱往死路上逼吗？若依我言，咱们转身灭了张绣，回头再跟荆州佬玩命！”他这一闹，其他人也急了，你喊我叫乱作一团。
“哈哈哈……”曹操突然仰天大笑道：“蔡德珪蒯子柔！你们妄自聪明，惜乎不通兵法，这次我可赢定了，哈哈哈……”明明形势更加不利，他却说赢定了，诸将不明就里都呆住了；荀攸、郭嘉明白其中道理，不禁随之莞尔。曹操笑罢多时，喜滋滋问道：“大家听好，现在有个要紧的差事，我必须给许都传一道命令，有谁敢率领兵马闯过蔡瑁重围往许都送信？”
“末将愿往！”还不等乐进、朱灵来抢，王图脱口而出。
曹操原未把这个小将当回事，听他讨令这才留心打量。但见王图二十出头白皙俊美，柳叶眉杏核眼，高鼻梁薄嘴唇，哪里像个厮杀汉？曹操不太放心道：“王将军，这突围送信可大有危险啊！”
王匡道：“末将虽无孟贲、夏育之勇，不过自认为可以担当。既然我能从安众闯过来，就能设法再闯回去。”王图说话很实在。
曹操点点头。既然夏侯惇能拔擢此人，想必这个王图有些本事，想至此心下豁然道：“好！你仍旧带领所部一千兵马突围，务必要将我的指令送到许都。这件事办好了，我封你个中郎将！”
“谢主公！”王图安然领受。