豫章就是後世的南昌，此地四周環山，江河湖泊星羅分佈，在滕王閣序中對豫章的描述是襟三江而帶五湖，控蠻荊而引甌越，歷來就是兵家征伐之地。因此要想繼續南下，豫章必取之。
林士弘也是看到豫章郡的優越地理位置，佔據豫章南可控宜春、南康、南海等郡，西可取長沙、衡山、桂陽、蒼梧等郡，北可過九江逐鹿中原，因此高不二江南下首先攻取的城鎮定為豫章郡。
林士弘雖然號稱傭兵十餘萬，但是真正被他控制的也就豫章、宜春、長沙、衡山、桂陽等郡，其他都是隋朝官吏起義後依附過來的，他的影響也是有限。
去年鄱陽湖大戰時操師乞被流箭所殺，剩下林士弘一家獨大，年初，林士弘在豫章稱帝，國號楚，年號太平，豫章就是都城，因此他屬下的兵馬大部分都集中在豫章，有十萬餘眾，高不二兵分兩路來攻，林士弘找來他弟弟兼大將軍林藥師及司徒王戎商議對策。
林士弘道：“隋朝派楚王高不二帶兵來攻，如今地方兵分兩路，正在往豫章而來，我們該如何拒敵？”
王戎道：“陛下，臣去年就建議派兵攻佔九江，因為九江是長江重鎮，是豫章咽喉之地，而今九江在隋廷手中，與我十分不利，現在我們唯一的優勢就是水戰，另外還要在城外找地勢險要之地佈置堡壘，以拒敵軍方可。”
林藥師道：“王司徒所言甚是，不過在城外尋找地勢險要之地築堡壘，我認為大可不必。”
林士弘道：“大將軍說說道理。”
林藥師道：“自去年張善安那賊子反水後，將豫章外城毀之殆盡，至今還未恢復，守城於我不利，我們不如集中大軍，在水上迎敵。”
王戎道：“大將軍所言不錯，但是我們手中戰船有閒，只夠組建三四萬人的水軍，如此我們人數優勢就發揮不出來了。再有，我聽聞李靖軍中配備有一中會噴火、能遠距離作戰的兵器，他們陸軍又是重甲騎兵，如果水戰一旦失利，因無險可守，到時我們就只能放棄豫章了。”
林藥師自負道：“什麼會噴火的兵器？我們都沒見過，也許是李子通那廝為掩蓋自己無能故意杜撰出來的也未可知，你也知道李靖軍馬裝備精良，所以我們不適合分兵，還是水陸並進，大軍迎敵勝算較大。”
林士弘聽他們倆如是說，思考良久便道：“那我們就集中全部力量先擊潰李靖哪路大軍，只要此路大軍一破，拿什麼楚王高不二帶領的兩萬人就是甕中之鱉。”
王戎見他兄弟決心已定，也只得領命。
林士弘看統一了意見，下達作戰任務道：“大將軍隨我領水軍三萬、陸軍五萬，水陸並進迎戰李靖，豫章城守衛工作就由王司徒負責，朕給你留下兩萬人馬，大軍的物資糧草你要按時供應。”
“臣等遵命。”
王戎又再次提醒道：“陛下，如果水戰失利，還請立馬回軍，萬不可與李靖大軍近戰交鋒，畢竟我們武器不如他們，騎兵也太少，近戰非我所長。”
林士弘道：“司徒放心，朕明白該怎麼做，你守好城池就行。”
第二天，林士弘和林藥師就率領水路人馬八萬之眾，沿著贛水順流而下，準備故技重施在鄱陽湖迎戰李靖，但是李靖進軍速度遠超他們預期，在第二天，兩軍便在贛水之中相遇。
李靖素聞林士弘軍善水戰，因此水軍他只帶了一萬人，綴在騎兵後面。面對林士弘軍人數多與我的劣勢，李靖準備充分發揮輕騎兵機動靈活優勢，一萬玄甲重騎在前，兩萬輕騎兵在後。
兩軍不期而遇，人數較少的李靖先發制人，他命令水軍全速出擊，岸上騎兵放火箭協助，纏住林士弘水軍，使之顧不上登岸，重騎兵全線壓上，一舉擊潰對方陸軍。
因為河道寬度有限，軍艦密密麻麻的佔滿了河面，火箭到處，戰船大火四起，瞬間亂作一團。
帶領陸軍的林藥師一看戰船起火，便想派人為水軍搭建搭板，接應水軍上岸，李靖哪會給他這機會，他們吃了裝備的虧，兄弟們手裡拿的兵器砍不動對方鎧甲，甚至連馬匹的披甲都破不了，有人以為遇到怪物了，駭然大呼，東奔西跑。
李靖騎兵所過之處，猶如推土機一般，重騎兵開路，輕騎兵快速斬殺對方軍卒，堅持了半刻鐘，林士弘軍大亂，四散爭相逃命，李靖讓紅拂女收攏重騎兵，自己帶領輕騎兵繼續追殺對方散卒。
帶領水軍的林士弘一看陸軍潰敗，於是連忙收攏水軍撤退，他們的舢板戰船佔了靈活優勢，很快就利用著火的戰船封鎖江面，軍卒駕著舢板小船很快脫離了戰場。
等水軍清理乾淨江面後，紅拂女立即帶領一萬重甲騎兵及水軍追著輕騎兵殺奔豫章城。
林藥師逃回豫章城只剩下了千餘人，林士弘水軍還算完整，撤回來有兩萬多人。
但是這兩萬多人剛到豫章城外，就遇到了從臨川而來的高不二，雙方在豫章城外大戰一回，城中的王戎、林藥師一看己方不敵對方，於是連忙率軍出城增援，這時李靖帶的輕騎兵日夜兼程趕到。
林士弘軍新敗，人數優勢又損失殆盡，廝殺半天只得遁入山林突圍而去，林士弘、林藥師雖然僥倖突圍，但是軍卒一下只剩一千多人，收攏了一下，也不過一萬餘眾，只得退往宜春郡。
經豫章一戰，高不二俘虜了王戎，同時俘虜的還有軍卒四萬餘眾。進入豫章城，高不二立馬宣佈了新的政令，讓百姓心安勞作。
攻佔豫章城後，高不二命令大軍休整半月，同時對願意繼續從軍的俘虜進行整訓，不願意繼續從軍的，由新歸降的王戎帶領，修築豫章城。經此一戰高不二又得人馬三萬多人。