說到撤軍，還真是一件令人為難的事情。當場就有將領詢問，那些已經染病計程車卒該如何處理，曹操的眼裡閃過幾絲冷厲，斷然回道：&ldo;凡是染病計程車卒，包括下層軍吏，皆不可帶回。就留他們在烏林大寨裡，自生自滅吧&rdo;
曹操的話讓屬下的那些將領們都感到了絲絲寒意，儘管他們心裡也明白，這些染病計程車卒很難帶得回去，周瑜的軍隊是不會輕易讓他們順利撤走的。即便是路途順利，勉強帶回去了，這些人也可能是一個個傳播疾病的源泉，會讓中原大地變成煉獄一般。
曹操的決定是明智的，但是拋棄這些生死兄弟在感情上卻是難以下決斷的曹操眼光一掃，便看出眾人心中的想法，他知道自己不可如他們一般優柔寡斷，便拋下令箭，冷冷地道：&ldo;各部迅速做出準備，明日分為兩路，一路登船走水道，直奔江陵。一路向北，抵達漢陽後沿著漢水撤往襄陽。如有延誤時機者，立斬不饒&rdo;
眾將領命紛紛離去，曹操特地留下了蔡瑁和張允二將，問道：&ldo;你二人部下的情況如何？&rdo;
蔡瑁老老實實稟道：&ldo;我們部下願為荊州水軍，大數是當地人士，不懼風浪，又服水土，較之原籍北方的將士們是要好很多了。只是因為被上船訓練的步兵士卒所傳染，目前約有近萬人染病，末將已經他們全部隔離了，單獨住在一座封閉的小營裡。&rdo;
曹操鬆了一口氣，呵呵笑道：&ldo;那就好。我準備坐你們的戰船回江陵，今後的身家性命就靠你們了。&rdo;
蔡瑁、張允二人激動地道：&ldo;大人如此信任，我等縱然粉身碎骨，也要護衛好大人&rdo;
由於曹操撤軍的命令下得非常突然，本來正忙於應付治療、隔離染病士卒的各部將領一回到營中，便快刀斬亂麻，直接下令將所有正在治療中計程車卒全部封閉在空閒的小營裡，令所有身體健康計程車卒抓緊時間整理裝備，所有的重型器械一概丟棄，只帶必需的作戰武器和十天的乾糧上路。
人心都是肉長的，看到這些和自己朝夕相處的兄弟們就要被拋棄被遺棄，即便不死在江東將士的刀下，也會死在疾病之下，很多人都不忍心。有那些症狀不明顯的病卒，便被悄悄地隱瞞了，編入身體正常計程車卒佇列之中，一起撤退。
是夜，許褚帶著荀攸到了曹操大帳，一直忙碌著的曹操方才停下了手頭的事情，對荀攸和許褚道：&ldo;公達、仲康，我剛剛得到訊息，周瑜很可能這幾日就會趁我軍虛弱，展開進攻。我軍主力須得在他發動進攻之前就撤離烏林，一切須得從速。所有不必要的物品一概燒毀，輕裝出發&rdo;
二人聞言點頭，荀攸回道：&ldo;主公，營中情形今日更加惡化，除了沒和我軍駐紮在一起的五萬西涼騎兵外，各部都減員過半，唯有水軍略微好些，只有約萬人染病。&rdo;
曹操只覺得自己的心中一陣陣絞痛，減員過半，那就二十萬人馬啊足可抵得上一座郡治的人口了唉呀怪只怪自己輕敵冒進，想要尋找周瑜決戰，卻沒想到水土不服會帶來如此大的災難&ldo;馬超那邊的動靜如何？&rdo;曹操沉聲問道。
&ldo;馬超已經令西涼騎兵封鎖了和我軍聯絡的通道，只有書信往來，還是綁在箭矢上傳遞的。看來，他們對於這場瘟疫防範甚嚴，應該受損失不大。&rdo;
&ldo;無論如何，這是我軍為完整，最有戰鬥力的部隊傳令於他，讓他於明日作為我軍的前鋒部隊撤軍夏侯淵和夏侯惇將軍的部隊緊隨其後，我們中軍就位於兩位夏侯將軍的中間，一起撤軍。&rdo;曹操想了想，神色堅決地對荀攸道。
&ldo;主公，我們不是要隨水軍撤回江陵麼？&rdo;