庞统去后，刘贤心下稍安，因顾念麾下大将都在北线、东线，而西线如今只有霍峻、史阿可以称道。但二人论及战斗力，与关羽、张飞相比，却又差了一截。况且关平、周仓也是武力值一流的猛将。倘若西线众将稍不留意，恐怕就有损兵折将之忧。
当下刘贤想了许久，又传令驻守竟陵的苗瓠所部北上进驻当阳，命黄忠领一千精兵火速前往增援西陵。又传令西线众将，见到关羽、张飞，只许结阵以弓箭攻击，不许与之斗将。
待各路信使去后，刘贤看了看江对岸的武昌，心中颇有些无奈地想到：“荆州四战之地，果然难守！看来想要逼孙权作出更大让步是不可能的了。”
当下刘贤找来程祁，对其道：“如今与孙权协议谈到什么程度了？”
程祁道：“诸事都已谈妥，只在是否遣返宋谦将军，以及今后江东在武昌的驻兵数量上，尚未能达成一致。”
刘贤沉默片刻，道：“宋谦以及经过救治之后，确定已经伤残的数百江东士兵都可以遣返回江东。此外孙权想在武昌驻兵多少？”
程祁道：“孙权欲在武昌驻兵七千人，在蕲春驻兵三千人，合计一万大军。”
刘贤想了想，道：“可以答应他。”
程祁道：“但孙权也同时要求我军减少在江夏一带的驻兵数量，这却该如何答复？”
刘贤叹道：“罢了，我军日后在西陵驻兵三千，在夏口驻兵一万，在州陵驻兵三千，合计一万六千人。你就告诉孙权，夏口之兵虽多，但我会随时抽调去协助攻打襄樊，并非是针对江东。想来他应该无话可说了。”
程祁闻言点头，当即驾船去武昌，将刘贤之意告知孙权。孙权见刘贤让步了许多，于是也欣然同意。双方于是达成协议。孙权留黄盖、晋宗领兵三千守卫蕲春，留孙皎、蒋钦领兵七千镇守武昌。又加封庶弟孙朗为平北中郎将，将长兄孙策之次女许配给陆逊为妻，令二人往荆州刘贤麾下听用。
刘贤见孙权火速履约，当下也令南北两路兵马撤回。令魏延领兵三千驻扎西陵，并总督西陵、夏口、州陵之兵。令樊岐领兵三千，继续镇守州陵。令吕介、胡济驻扎夏口，张著所部士兵全部调归胡济，张著本人则从江东降兵之中另择选二千人作为本部，仍为水军，驻扎江陵。从黄权所部水军之中调出二千人归吕介指挥，黄权则也从江东降兵之中择选二千人精壮者补充进入本部，回驻宜都。
至此，夏口所存的江东降兵还剩二千人，北线魏延，南线黄权之处也还各有六七百降兵。
刘贤命将其中伤残者六百余人挑选出来，全部放还给孙权。又从剩余降卒之中挑选了一千精神萎靡，眼神闪烁，经历大败之后已经有畏战情绪的士兵单独编为一营，名为无难营，点选了一个名叫徐顾的江东军侯统领，令其领兵去孙权麾下效力。而剩余的一千六百余人则全部分散补充各营的损失。
武昌城中，孙权看着徐顾率领的这一千无难营士兵，不由脸上一阵青一阵白，变幻不定，良久才挥手叫众军退下，随后愤怒地拔剑而起，砍翻了身前的桌案，怒喝道：“刘贤小儿，真是欺人太甚！”