左宗棠率領(lǐng)著他的楚軍集團(tuán)攻城略地，朝著他們的權(quán)力巔峰進(jìn)發(fā)。1863年四五月間，太平軍方面在浙江戰(zhàn)場(chǎng)只剩下了杭州、湖州兩大戰(zhàn)區(qū)。而要攻下杭州，必須先攻下富陽。由此，富陽戰(zhàn)役開打。

太平軍方面，調(diào)汪海洋從杭州來到富陽組織抵抗，與此同時(shí)，陳秀成調(diào)江蘇戰(zhàn)線的陳炳文馳援，由陳炳文負(fù)責(zé)指揮杭州地區(qū)所有太平軍。經(jīng)過四個(gè)多月的苦戰(zhàn)，富陽仍然固若金湯。為了避免落在李鴻章后面，左宗棠決定調(diào)常捷軍相助。

8月7日，楚軍、常捷軍急攻富陽。在洋人的大炮攻擊下，富陽城被轟塌，8月8日富陽被攻占。這一戰(zhàn)，左宗棠真正認(rèn)識(shí)到了洋人武器的優(yōu)異，從而加快了自己仿制洋槍洋炮的步伐。楚軍開始圍困杭州，左宗棠又命令黃少春由安徽戰(zhàn)場(chǎng)回浙江，集中兵力猛攻余杭。

然而，左宗棠的做法使得左曾李三人矛盾激化。黃少春部本來是奉左宗棠之命輔佐曾國(guó)荃進(jìn)攻南京，阻斷南京的后路。結(jié)果該部調(diào)走后，曾國(guó)藩認(rèn)為太平軍余部大規(guī)模逃出包圍圈，其罪責(zé)應(yīng)由左宗棠承擔(dān)。同時(shí)，對(duì)于李鴻章插手浙江戰(zhàn)局，左宗棠更為不滿。再加上對(duì)于淮軍軍紀(jì)松弛的不滿，更使得左李二人之間的關(guān)系日加生硬終至決裂。

左李比拼的結(jié)果是江蘇巡撫李鴻章于1863年12月4日收復(fù)了蘇州（1864年5月江蘇全部收復(fù)）。顯然，在眾人面前左宗棠落后于李鴻章，更令左宗棠生氣的是，1864年2月李鴻章竟然命令淮軍程學(xué)啟部進(jìn)攻浙江太平軍，幫助身為浙江巡撫的他收復(fù)浙江。

1864年楚軍于2月24日攻占了杭州，同時(shí)，康國(guó)器率領(lǐng)粵軍占領(lǐng)余杭。進(jìn)入杭州后，左宗棠立刻作了以下工作解決民生問題。

第一，號(hào)召有錢人出錢賑災(zāi)。令左宗棠沒有想到的是浙江一些富豪竟然拒絕幫助百姓。早在同治元年（1862年）上海道吳煦，在浙江富豪楊坊等人的幫助下，和美國(guó)人華爾一起組建了常勝軍，這4500多人的武裝配備的資金大多為蘇浙富豪捐贈(zèng)。為此，楊坊、毛象賢、俞斌等還為此得到了官銜。李鴻章的淮軍之所以進(jìn)軍速度較快，其主要原因就是武器先進(jìn)。

左宗棠本以為這些有錢的外國(guó)人都給捐錢，中國(guó)人自會(huì)踴躍，哪里想到，當(dāng)左宗棠號(hào)召他們捐款的時(shí)候，這些人竟然以各種理由少捐乃至不捐。為此，左宗棠在上奏彈劾他們之余，強(qiáng)令他們?nèi)セI款買糧運(yùn)回浙江。