黄文金也不追赶，在马上喊道：“败将王开化听着，回去叫你家左老二守好城门，老子隔日来取。”
黄文金将李世贤接进徽州，李世贤说：“霆军勇不可当，这是本王出兵以来首次遇到的劲敌。”
黄文金不信，令黟县守将欧阳炎到渔亭断了湘军退路，又请李世贤守徽州，自己率大军来攻休宁。
黟县太平军刚一出动，就有快马报至休宁，鲍超准备带兵回战，张运兰说：“黟县长毛有我率老湘营前去迎战，霆军在休宁挡住徽州之敌即可。”
鲍超点头同意。
张运兰领兵出休宁至渔亭，见前面竖着一面杏黄旗，一将在那里耀武扬威，刘松山一看生气，纵马持枪，与欧阳炎大战一场，张运兰挥军向前，太平军不敌退出渔亭，张运兰又令宋国永、刘松山、易开俊一路紧追至黟县，将黟县层层包围，又在城南扎下大营。
次日，刘松山率一队人马前来挑战，太平军置之不理，时近中午，湘军又累又渴，收兵回营。此时城门大开，冲出数百太平军，为首的正是欧阳炎。易开俊见状急忙来迎，接住欧阳炎厮杀。
刘松山大怒说：“狗娘养的，叫你出战你不敢战，还来偷袭，看枪！”转身围攻欧阳炎。
欧阳炎力战二将并不胆怯，双方斗了十几个回合，力不如前，露出破绽，欧阳炎被刘松山一枪刺中臂膀，龙吐舌锐利无比，顿时鲜血直流。易开俊见有机可乘，从背后一枪将欧阳炎挑于马下，太平军面面相觑，无人敢上前救援。
欧阳炎死后，守城副将沈胄富说：“主将已战死，我等还守黟县干什么？不如出城。”说完摘下头盔，率一队太平军冲出城门准备突围，却被易开俊截住，一枪刺透胸膛。军帅汤必浓想逃，刘松山带住枪，弯弓搭箭，将其一箭射翻，余众一见，四散而逃。宋国永进入黟县，迅速肃清城内残余的太平军，严令湘军不准私取民财，城内秩序很快安定下来。之后宋国永守黟县，张运兰率大军回休宁。
却说黄文金率军至休宁，鲍超并不出战，而是坐等待张运兰的消息。休宁县东门外有蓼山，离城甚远。黄文金围城后，驱赶当地百姓与太平军一起搬土到城门外垒山。数日后，城外垒起两座小山，太平军居高临下，昼夜不停攻打休宁。
江南六月，雨水较多，城外土山经雨水浸泡，发生山体滑坡，掩埋了不少太平军，黄文金前来救援。鲍超打开城门，冒雨冲出。太平军连日苦战，筋疲力尽，抵挡不住霆军进攻，很快溃败，又被赶来的张运兰大杀一阵，死伤无数，黄文金不敢再战，收拾残兵败将逃回徽州。
李世贤借口浙江事急，从徽州码头上船，沿新安江东下，进入浙江淳安、建德。一时间，浙江警报又起。
曾国藩在祁门的这段日子里很不太平，但他有节制浙江的职责，马上调唐义训出祁门，增援建德，调鲍超到左宗棠军前效力。
左宗棠说：“浙江建德的长毛是心腹大患，他们随时会出兵皖赣边境。鲍超、唐义训长期以来配合默契，可先平浙江的李世贤，然后回师皖赣，再与楚军一起迎战黄文金、杨辅清。”
曾国藩同意，又派刘元培为浙江水师统领，随鲍超、唐义训一起出兵浙江。
湘军水陆人马声势浩大，到淳安后大张旗鼓地进攻太平军。双方发生激战，李世贤抵挡不住，退往建德。
李世贤重金招募富春江一带的渔民组成太平军水营，让他们在千岛湖抄湘军后路。
太平军水营仓促上阵，炮火不及湘军猛烈，不少船只被湘军大炮击沉。李世贤不甘心失败，用小船载着柴草，撒上硝石桐油，顺风点火，实施火攻。但是千岛湖水域面积大，风向瞬间即变，火船没有烧着湘军，反而烧着自己的粮草。太平军计划落空，惨遭失败，李世贤不敢进入建德，出新安江，经富春江撤往兰溪、金华。
鲍超率军攻入建德，大肆抢劫三天，发了一笔横财，唐义训实在看不下去了，制止鲍超，鲍超根本不听。唐义训知道鲍超是个粗人，就当着没看见，将捷报送往祁门。
咸丰十一年正月，寒流滚滚，左宗棠、鲍超合兵一处，在鄱阳、都昌边界大败太平军，收复两城。左宗棠又率部进攻婺源，前军中了太平军的埋伏，后军前往接战，双方战至黄昏，不分胜负，左宗棠趁着夜色，引军退走。
二月，春寒料峭，曾国藩命建德守将陈大富前往景德镇与左宗棠合兵一处，太平军从鄱阳县向东进攻景德镇，左宗棠命令陈大富驻守景德镇，自己率部扼守金鱼桥。
太平军进至金鱼桥，见湘军据险不战，遂分军攻取景德镇。陈大富出城迎战，太平军发动猛烈进攻，陈大富走投无路，投水而死。
曾国藩驻军祁门，江西的粮草，都通过景德镇转运，水师粮船护送粮饷，以为十分安全。陈大富丢了景德镇，让他前功尽弃，祁门粮路断绝，左宗棠撤军金鱼桥，退守乐平。
三月初三，曾国藩调动九千人围攻徽州，唐义训在景德镇被太平军打败，曾国藩退守休宁。太平军前来追击，曾国藩撤回祁门，进退失据，不断叹息，挥笔写好遗嘱，准备赴难。
祁门两次被围，左宗棠对曾国藩用兵颇不以为然，劝曾国藩离开祁门，曾国藩这才改变计划，准备与水师合兵一处。
祁门湘军增至三万人马，一个月没有粮草运至。众将议论，或取徽州自保，或请浙江方面转运粮饷。前段时间防守休宁的太平军连夜撤退，张运兰进驻休宁，太平军也不来进攻。大家认为徽州的太平军势力已弱，容易攻取。
曾国藩令黟县守将宋国永率军前来休宁会师进攻徽州。大雨突至，粮草器械都被淋湿，道路损坏，不得已，湘军退回休宁。几天以后，宋国永再次进军徽州，在西门外面打败了太平军。
七天以后湘军再战，太平军坚守不出，还夜袭湘营，宋国永没有想到太平军会有此招，八营人马全部溃散。
李榕也不作声，曾国藩传令各军回营自守，声称誓与太平军血战到底。
左宗棠率楚军在乐平附近击败李世贤部，李世贤是李秀成的弟弟，经此一击，湘军大营粮饷复通，让曾国藩绝处逢生。
欧阳兆熊抵达祁门，曾国藩喜出望外，但他也带来了一个不好的消息，那就是胡林翼已病入膏肓。
却说左宗棠在江西大获全胜，祁门压力顿减。曾国藩命唐义训、娄云庆防渔亭，鲍超增援安庆，左宗棠攻进婺源。
婺源位于江西省东北部，乐安河上游，典型的低山丘陵地区，是古徽州一府六县之一。
杨辅清率两万大军来到婺源，黄少春准备出兵迎战。左宗棠说：“杨辅清善于出奇制胜，今天天色已晚，不可以出战，我军要以逸待劳。”
当天晚上，天降大雾，太平军不少将士露宿营外。杨辅清心想这是上天给予的绝好机会，何不去偷袭湘军营寨。主意已定，亲点三千人马前往偷营。
左宗棠早有准备，当杨辅清摸入湘军营寨时，点火一看，见是一座空营，大呼“中了左老二奸计！”此时湘军乱箭如雨，太平军被逼后退，乱军相互踩踏，死伤一千多人。杨辅清身中两箭，战马也陷入泥潭，幸亏总制武化文拼死相救，杨辅清才免于被杀，狼狈地逃回景德镇。
景德镇已不可守，杨辅清大肆搜捕城内商户和店铺，得银子数万两，布匹、瓷器多得数不尽。军帅陶祖清让他用这些财物去招募士兵，杨辅清又舍不得。