樊胄识破了谭雄的缓兵之计，心中怒气勃发，果断放弃劝降，下令军队强攻四门。
但因为兵力分散，虽然城内的谭雄也有些疲于应付，攻城的效果并不好。
谭雄准备充分，樊胄军靠近城墙都不易，双方的交锋是用弓箭远程互射为主。
樊胄亲自在四门巡视，对手下将领的攻击非常不满。
但将领们各有各的理由，一致建议樊胄“围三缺一”，好让谭雄弃城逃跑。
如果真的是孤城难守，有了逃走的通路，谭雄当然会弃城而走。
事实上，谭雄城内粮草充足，外有潘濬的援军兼程赶来，肯定不会弃城逃走。
谭雄用缓兵之计，不但争取了时间，也简慢了樊胄的军心。
在城下驻扎十余天以后才开始攻城，，樊胄军早就没有了兵临城下的锐气，一个个都是无精打采，装模作样的进攻，对城门没有造成什么威胁。
反观谭雄的手下，大部分是城内世家的私兵，知道樊胄招降在先，然后出尔反尔，不给众人提供军粮，摆明了要从自己的嘴里抢食。
军卒们个个义愤填膺，为了自己和家族的利益，抵抗非常激烈。
为了加强攻击的效果，樊胄集中进攻北门，甚至动用了军法，杀掉了几个畏缩不前的军卒。
樊胄这招还是有效，他手下几个心腹将领非常卖力，但因为军士们不肯卖命，进攻没有大的起色，连续两日，伤亡不小，士卒连城墙都没有攀上去。
照这样打下去，不知道何时能够攻破城池。
而樊胄派出的探子来报，潘濬的援军已经过长沙，离武陵城最多只有三天的路程了。
潘濬在荆州名声很大，文武双全，虽然也只有五千军队，但樊胄有自知之明，可不认为自己五千乌合之众能够抗衡潘濬的精兵，不由萌生退意。
樊胄手下的谋士不少，有几个还是有真才实学的，也是真心为樊胄谋划。
他们看出事不可为，建议樊胄立即退军，以免背腹受敌。
并建议他领军退往零陵，与习珍合兵一处，才有希望击败潘濬。
在这个关键时刻，马允和几个与谭雄暗通款曲的人，看到了立功的机会，自然不愿意让樊胄扬长而出，想要把樊胄拖在城下，又跳出来献计道：
“樊将军，谭雄如此愚弄我等，实在咽不下这口气！潘濬的军队离此还有三天的路程，我们还有攻破城池的机会，所谓重赏之下必有勇夫，不如将军重赏士卒，再猛攻城池一天，如果能够打破城池，到时侯据城而守，自然不怕潘濬到来，如果打不下城池，还有两天的时间，也可从容退走。”
樊胄知道，与习家兄弟合兵一处是最稳妥的办法。
但因为习家兄弟一向看不起樊胄，这次功败垂成，率军前去投奔，樊胄害怕受到嘲笑。
虽然习珍不会拒绝樊胄投效，但乘机剥夺自己的兵权是肯定的。
刘备东征在即，樊胄如果拿不出像样的功劳，这到手的武陵太守也会泡汤。
因此，樊胄犹豫不决，不想把家族耗费钱粮、自己辛苦招来的军卒，拱手让给习珍去建功立业。
听马允等人说得有理，不由心动，就准备组织敢死队攻城。
樊胄下令盘点了一下军资，看到盘点的结果，他的脸色变得有点难看了。
虽然军粮还有不少，但剩余的钱财只有五万铜钱，就算按最低的赏金标准，每人一百钱，也只能组织五百军卒。
樊胄知道，成败在此一举，就一咬牙，被五万钱赏给了五百勇士，并承诺攻下城池以后加倍赏赐。
有了赏钱，军卒攻城的劲头就是不一样，那五百军卒很快就攻上了城头，守城的军卒节节败退，眼看就要打开城门。
关键时刻，谭雄亲自带卫队杀上城头，很快就稳住了阵脚。
樊胄自然不想功亏一篑，不停地封官许愿，派出更多的军队爬上了墙头。
两军你来我往，在城头上杀的非常激烈。
樊胄军始终无法突破防线，打不开城门，也就无法发挥他的优势兵力。
樊胄在城下不停的高喊，给将士们封官许愿，希望他们能够打破城门。
突然身后一声炮响，樊胄的后军大乱，军卒们四散逃窜，五千兵马，一转眼，剩下不到一半。
樊胄转过头来一看，有一队敌军杀来，高举“潘”字帅旗。
当先一将，手握长枪，正是潘濬。
潘濬也看到了樊胄，大喝一声道：
“潘濬在此，樊胄可敢与我一战？”
樊胄的武艺可不是潘濬的对手，哪里敢应战。
眼看手下军卒四散而逃，情知大势已去，就在吩咐手下卫士，保护自己逃跑，先保住性命再说。
谁知道，他用大价钱雇来卫士，都是老兵油子，在战场上，保住自己的小命，才是第一要务，对樊胄的命令充耳不闻，自顾自逃命。
好在还有几个武功高强的卫士，向他靠拢过来，数百樊家的私兵，在樊家子弟的带领下，也向樊胄靠拢过来。
有了这数百军马，只要冲开包围，樊胄就能够脱险，还可以卷土重来。
樊胄好歹也在军中数年，他勒住马，发出结阵的命令，准备让手下的心腹结成军阵，杀出一条血路，并收拢残兵。
眼看有千余人组成了一个厚实的军阵，而潘濬并没有上前拦阻，樊胄大喜，拍马就走。
猛然间，樊胄觉得脑后一股凉风刮过，紧接着眼前一黑，一颗头颅高高飞起，翻身落马。
原来，是潘濬发出了实施斩首计划的命令，奉命潜伏在樊胄身边的卫士，手起一刀，砍下了樊胄的首级，并举起首级高喊道：
“樊胄已死，降者不杀！”
潘濬正面进攻的军队虽然不多，但四周喊声不绝，不知道有多少军卒埋伏在四周。
主将已死，军卒们为了保命，唯有丢下武器投降。
已经杀上城墙的樊胄军卒，一见潘濬军杀到，自知形势不妙，纷纷跳墙而逃，不少人当场摔死。
而城内的谭雄，也打开城门，领一千精锐杀出，和潘濬一起打扫战场，抓捕败兵。