但是，靖康事变之后，江南、江西、湖南等长江以南地区出现了军阀割据，以及严重的匪患，这些隐患仍然威胁着南宋朝廷的安全。
因此，宋朝派遣岳飞领兵驻守洪州（今南昌西），对江西、湖南等地区进行剿匪。
农历3月17日，岳飞率军由洪州出发，前往讨伐侵扰湖南、广南（今广东及广西交汇地区）诸州的大军阀曹成、曹亮。
曹成和曹亮是兄弟俩，他们本是河南汝州人，靖康事变后不久，他们加入伪齐军，在伪齐军进入两淮地区后，他们纠集了一伙流民组成军队，渡江到南方各地抢劫为生！
最后，他们在发展都几万兵马，在湖南与广西交界的地区落草为寇。
为了招降这伙流寇，岳飞派使节向曹成晓谕了宋廷的意旨，望其投降，单曹成执意不降。
于是，岳飞带领大军便继续进军，经郴州（湖南郴州）、桂阳监（湖南桂阳县），直抵道州（湖南道县）。
农历4月处，岳飞派前军统制张宪和吴锡取道全州（广西全州县），往西南进军桂州（广西桂林），对曹成军进行猛攻猛打，并解除了曹成军对桂州的包围。
之后，曹成军战败南逃，退守荔浦县东北的莫邪关。
岳飞命张宪攻关，正当岳家军攻破关厢庆功之时，却遭曹成部将杨再兴反扑，岳家军第五将正将韩顺夫被杀，入关官军被迫后撤。
杨再兴骁勇非常，连战岳家军统制王经、张宪等三将，并杀死了岳飞的胞弟岳翻。
农历闰四月初，岳家军进入贺州，曹成在太平场布阵数十里抗拒岳家军。
岳飞故意向曹成麾下探子透露军粮将尽，准备撤军的假情报，吸引曹成前来追击。
之后，曹成军果然中计，放松了对岳家军的戒备。
在曹成军大意时，岳家军遂乘夜间进军太平场，攻破了曹成军的营寨！
农历闰四月初六，岳飞又以八千兵马大败曹成三万余人！
之后，曹成逃往桂岭县（广西桂岭镇），曹成派都统领王渊占据北藏岭、上梧关和蓬岭，凭险据守。
岳飞率军猛攻曹成军据点，突破了三道防线，曹成带领残部慌忙败逃！
之后，岳飞占领曹成军的大本营，缴获他们的刀枪、金鼓、旗帜等不计其数的物资。
同时，岳飞张宪部生擒曹成军将领杨再兴！
张宪想杀了杨再兴为岳飞胞弟报仇时，杨再兴笑着对张宪说：“兄弟！我也是一条好汉，如果，你要杀！你先让我见岳飞！好吗？！”
于是，张宪带杨再兴去见岳飞。
岳飞看到杨再兴威风凛凛、面不改色、心不跳的样子，岳飞知道他确实是一条好汉！
因此，岳山马上抛下他斩杀胞弟的仇恨，亲自为杨再兴松绑！
岳飞对杨再兴说：“我与尔是乡人，汝好汉也，吾不杀汝，当以忠义报国家！”
杨再兴马上心悦诚服的下跪，给岳飞磕头谢恩了！
随后，岳飞遣散了被曹成军胁迫来为他们服务的当地良民。
同时，岳飞招降了曹成军两万兵马加入岳家军，这样，岳家军一下子壮大起来了！
之后，曹成军残部在湖南、江西等地四处逃窜，最终，他们向韩世忠投降了！
农历6月初，岳飞班师回到洪州驻地，因平游寇有功，宋朝授岳飞中卫大夫、武安军承宣使。
同时，让岳家军移师江州（江西九江），守卫长江中游！
由于，江州与兴龙城是紧邻，因此，岳飞去兴龙城拜访阿龙叙旧。
农历6月中旬的某一天下午，岳飞与阿龙在兴龙城汇龙府的客厅里喝茶叙旧。
“龙叔！我今年有28岁了！你今年是应该上50岁了吧？！”
岳飞满脸尊敬地看着头发斑白的阿龙！
阿龙笑着说：“是啊！人过了45岁之后，就开始衰老了！现在，你正当年华啊！”
岳飞说：“是啊！但是，宋国与金兵战争不知道要打到什么时候啊？！总是这样打仗，老百姓的物资和人力消耗不起啊！我们还是要想办法早日结束这场战争啊！龙叔！在结束战争方面，你有好建议吗？！”
阿龙看着岳飞说：“结束战争只有两种方法！一种一方完全战胜另一方！一种是双方打到势均力敌的时候，双方签定和平协议！从目前宋国与金国的军事实力对比上看，宋国还没有战胜金国的实力！当然，如果宋军的将领中都是岳将军这样的人才！宋军要战胜金军就能指日可待了！但是，岳飞啊，你记住了！宋朝最喜欢对敌人以称臣、献地、献利等下贱方式求和了！因此，宋军再强大，也不可能有机会彻底消灭金军！你一定要见好就收啊！否则，朝廷里的那些求和派，肯定要以破坏和谈的理由，给你治罪啊！”