人难过。岳公因分付前军道：“此地极为险峻，兵贵神速，趁他立脚未稳，一鼓破之。若容他把守停当，便天神也难攻破。”那时岳家兵止八千人，却人人奋勇，果然一鼓登岭。曹成见了心慌，竟逃往连州而去。
岳公因对张宪等一班将士道：“曹成败去，若尽数追杀，则胁从可悯；若纵放了他，又仍聚为盗。今汝辈但诛其首恶，余众须以恩义招其投降。切不可妄杀，以累上天保民之仁。”张宪等领命。于是自贺州直到庆、彬、桂，共招降一万余人，与岳兵会于连州。曹成正被岳兵追赶得上天没路，恰值韩世忠遣将招曹成投降，曹成只得乘机就领了八万人马，诣韩世忠帐下投降。岳公探知，遂整得胜之军而回。岭表之地忽平，捷报朝廷，高宗大喜，遂授岳飞武安军承宣使。
到了绍半三年、又出了一个云都大盗彭支，连兵寇掠循州、梅州等十一郡，其势甚是猖獗。高宗诏岳飞人朝，面谕以剿贼之事。又以隆v太后被虔州震惊，密密谕岳飞道：“殄平盗贼之后，可即将虔州百性尽行屠灭，然后报朕。”岳飞闻言，忙叩首阶下，道：“愿陛下但诛首恶而赦胁从，庶不负上天好生之德。”高宗沉吟半晌，方点首道：“卿言是也。”
岳公受了君命。遂领兵径到虔州。那大盗彭支，恃人多将广，在强盗中也要算一个英勇的，谁知见了岳将军，就不济起来。到得对阵时，战不上十数合，早已被岳公纵马而上，直律律的捉了过去。贼党一时惊怖，谁敢上前来？遂尽数退保于一个固石洞。岳公恐怕前面攻，他后面走，因访了几个老成居民做向导，领了三百名死士，各带鼓一面从山中小路衔枚而渡，反在他洞背后，将战鼓乱鸣，起来。贼众大惊，岳军然后一拥而上，破了洞口。正如瓮中捉鳖，贼人方出投降。岳公只诛了首恶，余人一概赦免。虔州百姓个个感其再生，家家香灯跪接，图像供养，岳公既平了云都之难，回朝复命，龙颜大悦，亲洒庚翰，书“精忠岳飞”四字，制大旗以赐之。岳飞谢恩而出。有诗为证：
制旗既已识精忠，只合存留作股肱。
何事风波亭子上，听谗全不念其功？
那时，许多山贼俱被岳将军平了，谁知又有一个水中的大盗，比山贼更是凶恶。他一名杨太，又名杨么。这杨么乘着宋朝之乱，无人料理着他，遂东勾西引聚集了十余万人，屯据湖中，僭号为大圣大王，时时上岸来骚扰地方，掳掠居民，官兵不敢正眼觑他。他常自夸说道：“我水中有穴，岸上有巢，纵有官兵，也无奈我何？他若从陆路杀来，我却躲到水里；他若从水路杀来，我却又走到岸上，焉能犯我分毫。若要犯我，除是飞来。”因此骄矜，遂无恶不作，湖襄一带大受其害。高宗闻之，因命统制王燮，会兵进讨杨么。不期兵到鼎江，早被杨么率亡命之徒，只一阵，就将官兵几乎杀尽。报到高宗，高宗大怒。此时已升岳飞兼黄复州汉阳军、德安府制置使，高宗遂降诏，命岳飞移屯于鄂，剿捕杨么。
有人对岳公说道：“杨么屯据水中，水中出没，是他的熟路。今将军所部皆关西汉子，水战恐非所长。”岳公笑道：“兵亦何常之有？全在主将，陆则陆用之，水则水用之，顾用之何如耳！岂有不习水战之说哉？”遂先遣人招谕他来降。杨么虽狂横，置之不理，早有一个得力贼党，叫做黄佐，最有识见。因岳家来招谕，他就转了一个念头，遂聚所部商量道：“我见岳节使用兵与众不同，真是旗开得胜，马到成功。连金兵数十万都被他杀败，我与他相抗，万无生理，不如投降他，乃为上着。”众亦以为然、遂亲到辕门纳款。岳公大喜，遂表奏黄佐武义大夫。随即率骑到黄佐营中按其部垒，有人谏止，俱不听。到了黄佐营中，出于意外，尽大惊，俯伏在地道：“将军推诚若此，情愿执鞭坠橙。”岳公都以温言抚慰，那些人欢声若雷。岳公接了营垒，以手拍黄佐肩道：“子知顺逆者，必能成功，封候岂足道哉！我欲汝至湖中，视其可劝者招之，可乘者抚之。”黄佐感岳公赤心待人，誓以死报。
那时张浚都督诸军士至潭洲。他的参政席益见岳兵不战，说他玩寇，将欲奏闻。张浚道：“岳公，忠孝人也。兵有深机，胡可易言？”席盎见张浚说了这一句，羞惭而止。过不多几日，黄佐欲邀一个贼将周伦，同来投降。那个周伦不肯听，黄佐因大怒，遂率领自部下的人马，夜袭其寨，把周伦一刀杀了，献于岳公。岳公大喜，随迁黄佐为武功大夫统制。
此时，岳公胸中已有了成算，正欲剪灭杨么。适值高宗有旨，要召张浚回去防秋。岳公忙去见张浚，袖中取出一个小小图儿，送与张浚看。上面细细开载：杨么屯兵某处，杨钦屯兵某处，俞端、刘铣屯兵某处，某处最险，某处可以进兵。岳公一一指示道：“已有定画。都督若少留，不八日可破贼也。”张浚道：“王燮已有前辙，君侯何言之易也？”岳公道：“前日王燮以王师攻水寇则难，非今以水寇攻水寇则易。若因敌将用敌兵，夺其手足之助，离其腹心之托，八日之内当俘诸贼。”张浚壮其言。
却说杨么有个心腹之贼，叫做杨钦，曾膂力绝人。黄佐又甜言苦口，说他来降。岳公大喜道：“杨钦骁勇，今既来降，贼腹心失矣。”遂表授杨钦为武勇