对于王应麟建议疏离降军之事，赵昺并没有多做解释，只是说当前的新编旅已经训练了两年，高级军官大部从由老护军选拔，基层军官则多是自武学结业的学员选调担任，仅有少数军官由降军担任。另外新编旅是以降军为主编练的，可其也只占半数，余者大部来自于江南各地征募的新兵，且客家人又占据了八成以上。
王应麟听了有些哭笑不得，小皇帝这是用的‘以毒攻毒’的法子来牵制降军，但也放心不少。他知道历代每逢中原地区发生战乱，都会有大批的人南迁，而本朝靖康之变后，亦有众多北方汉人随朝廷南渡，被称为客家。客家人因为当地的土地资源不足，所以向南方各省各地移民，不少客家人先后去往广西、福建、川蜀及琼州等地。
而同时期的畲瑶人亦迁移到闽西与粤北，成为当地主要民族，他们与后来从江南移民过来的汉人，还有广东广府人，两下杂居使得畲瑶族大量汉化，一道形成了客家民系。客家人数虽不少，但在华南各省的地位低下，经常遭到当地民众排斥。
客家人与当地汉人历来不睦，王应麟却是知道的，他祖籍河南开封，后迁居到庆元府鄞县，说起来也算是客家人。两下相争说起来也是有根源的，客家人大约在五代十国时从北方来到江南南部，但这里从东晋开始，就有不少从北方迁徙来的世家大族，他们早已成为当地豪强，根深蒂固，拥有大量土地。
客家人也是农民，需要土地和水源来而维持农耕生活，所以客家人来到后，与当地豪强在土地和水源上发生冲突是在所难免的，这些外来户对当地豪强的资源财产都产生了极大的威胁，自然不受欢迎，所以各地的宗族豪强都排挤客家人。
故而，客家人就被逼选择土地贫瘠、位置偏僻的山区。同住在这些山区的，还有被赶上山的畬族、瑶族等百越山民。他们便跟这些百越人有相当多的交流，有一部份的百越人接受了客家人的汉文化，被同化成客家民系的一员，而且不少客家人与百越人通婚。
客家人和百越人通婚，使得南方大族认为他们带有“南蛮”血统，而非汉族一员了，必然会遭受排斥和歧视。被主流势力打压，必然会引发反抗，与本地人引发频繁的武力冲突，甚至导致大范围的动乱。此外，客家人多数生活在偏僻山区，这些地方往往有毒蛇猛兽，山贼土匪也时常出没。为了保障村落安全，除了习武之外，客家人还会修筑半军事式的围村，据山险以守，用以防御山贼并保留与本地人械斗的优势。
在这种半军事的环境下，不论男女都需要学会保护自己，而在不断的‘战斗’中，客家人慢慢养成了悍勇尚武的风气。再者，客家人跟山地的百越人长期通婚，很自然地也继承了百越山民的特点。畲族山民以彪悍著称，所以山民的尚武精神不亚于其他少数民族。客家人作为跟百越人交往较深的群体，在习俗上也深受影响。加上长期与本地人械斗，又在山区修筑防御工事，所以客家人积累了很多实战经验，稍加训练便是军中悍卒。
土客频繁的大规模械斗，不仅引发地方动乱，也使政权受到威胁。而客家人被视为异类，自然不仅受到主流势力的歧视，也往往被朝廷打压，所以也是历代朝廷头疼不已的事情。不过王应麟知道在小皇帝掌握权力之后，重视与畲族和客家人的关系，双方矛盾得以缓解，并在收复江南的战争中居功甚伟，不少人得到了封赏，身居要职。
在这种背景下，畲族和客家族首为了摆脱低下的地位愿意为朝廷出力，而族人也可借此改变命运。且军中优厚的待遇亦十分有诱惑力，所以客家男子纷纷应募入伍，为国效力。其实王应麟也以为当下军队中是最为公平、公正的地方，这里不问出身、不关系宗族矛盾，也没有民族歧视，只要你立有战功都会得到封赏。
另外王应麟以为当下小皇帝选拔军官主要就两个渠道，一个是战功；一个是武学的学员，且以此为主。即便是荫补的军官也要在武学中学习，无法完成学业的也无缘进入军中。基础军官的晋升一般在本部完成，而中级以上的军官升职则要调离本部任职。在加上退役和混编制度，如此最大程度上的保证了战斗力，又使得军中难以形成宗派势力，避免了武臣擅权，割据一方的情况发生。
因而王应麟在获知详情后，压力顿减，新编旅中的降军在严