如果苏咏霖有所担忧的话，就应该安排一些军队留在当地，以备不时之需，并且尽快展开土地改革和改土归流的政策，将所有人口置于政府的管控之下。

与此同时，南越李氏王朝也没有出兵北上觊觎大南关，大南关被顺利拿下了。

大南关一带并没有发生预想的激烈战斗，大南关守军望风而降，没有进行抵抗。

但是赵玉成麾下猛将、原江南西路起义军领袖之一的张小虎率军突袭拿下大南关的战术动作却起到了奇效——

那些从明军南下开始就一路向南逃跑的南宋官僚、大地主大豪强们所结成的数支逃难队伍在大南关一带被明军一网打尽。

张小虎率军抵达大南关之后，就在附近发现了一批人数超过千人的逃难队伍，然后又在上石西州、下石西州一带发现三个逃难队伍，组成成分全都是南宋官僚和不敢抵抗明军的地主豪强，以及他们的家眷。

他们眼见明军追击而来，感到十分恐惧，于是拿出钱财雇佣当地的土司帮忙组织军队护送他们进入南越国境内，希望以此逃脱明军的追击，获得新生。

当地土司和一些深山密林部落首领见钱眼开，于是动用武装力量保护他们，和明军作对，还偷袭明军，引起张小虎的极大愤怒。

张小虎决定动用火油和火药对付他们，用火油焚烧深山老林，用火药炸毁他们的部族建筑，然后士兵们以小组为战斗单位进入密林作战，成功剿灭了十数个和明军作对的土司、密林部落。

明军大规模用火油焚烧深山老林的行动让其他不少土司部落感到震恐，他们一边尝试抵抗明军，一边又感觉这件事情很难成功，继续战斗下去的话很难获胜，所以试图和明军谈判。

张小虎一边谈判，一边围剿袭击过明军的土司部落，一定要他们付出血的代价，奠定明军强硬而不可战胜的印象。

经过一番苦战，张小虎率领明军消灭了多家土司和他们的部族武装力量，焚毁大量山林，奠定了极为强硬的形象，并且捕获了他们发现的三支逃难队伍，将他们一网打尽。

于是四支逃难队伍被张小虎全部抓到了大南关看押，其总人数超过了四千人。

而就在这群人当中，南孔宗门族人被发现了。