周淳离开峨眉山后不久，李宁父女便结识了同住峨眉山中的广慧师太，以及她的徒弟余英男。
余英男和李英琼一见如故，又年纪相若，彼此交情日深。
又过不久，李宁也被白眉禅师收为弟子，离开峨眉，随他出家修佛。
白眉禅师见父叔都走后，李英琼独居深山，甚是寂寞，又怕她小小年纪，遭遇危险，便派来座下黑雕与她作伴，只是每逢朔望，仍要回禅师处听两次经。
又过了一段时日，一次昆仑派弃徒阴素棠路过峨眉，看见李英琼在那里舞剑，天资根基都非常之厚，本想将她带回山去，收归门下。正要上前说话，忽见佛奴飞来，认得是白眉禅师座前的神雕。
阴素棠知那雕又向来不讲情面，厉害非常，幸喜不曾被它看见，连忙隐身退去。她自脱离昆仑派后，原想独创一派。这些年来，老想寻得到一个根基深厚的门人，来光大门户。如今遇见这般出类拔萃的人才，怎肯放过。回山以后，越想越觉难舍。知道师弟赤城子昔日曾随半边老尼到白眉禅师那里听过经，神雕佛奴与他曾有数面之缘。若派赤城子前往，即使李英琼弄不回来，也决不会伤他。特地着人将赤城子请去，请他代劳一行。赤城子当年曾受过阴素棠许多好处，当然义不容辞。
赤城子赶到峨眉山后，恰赶上佛奴回白眉禅师座下听经，只李英琼一人在家。他当即现身，不消三言两语，便诓得李英琼随他同去。却不料途径莽苍山时，遇见他的老对头华山烈火祖师。
赤城子知道难以回避，便将李英琼藏于赵神庙中，自己前去应敌。可是，刚一交手，便被人家将他的剑光绞断。他好不容易才逃得性命，却身受重伤，直到两三天后才复原。但那时李英琼早已取得紫郢剑，离开赵神庙，并遇见了严人英，拜入了峨眉派。
回头再来说余英男。
在李英琼被赤城子带走不过两天，余英男的师父广慧师太便圆寂坐化。余英男在安排好师父的后事后，便打算上山来找李英琼同住。岂知李英琼没遇着，却碰见了来找李英琼的阴素裳。
原来赤城子在伤好之后，回到赵神庙，没有找着李英琼，便前往云南枣花崖，向阴素裳回报。
阴素棠在得知李英琼被遗失在莽苍山后，便急忙驾起剑光，沿途寻找她的踪影，但找了半天也没找到。于是阴素裳便猜李英琼已从原路回转峨眉，便来到李英琼在峨眉居住的山洞。谁知李英琼没见到，却见到了余英男。
阴素裳见余英男根骨甚厚，不下李英琼，便强收她为徒，将她带回了枣花崖。
阴素棠本是昆仑派长老，后与赤城子两人因触犯教规，被昆仑派掌教知非禅师开革出教。离开昆仑门下后，阴素裳便处心积虑想独树一帜，与昆仑对抗。故而到处物色门徒，不论男女，一律兼收。又开辟了几处洞府，作她门人修道之所。
她门下原有四个得意门徒，三男一女，分带了这些新收门徒散居各地。同时又命他们各地留心，物色收罗有根基的男女幼童，枣花崖只是别府之一。
阴素裳起初原住在这里，新近在巫山十二峰中寻了一座好洞府，便带了两个得意门人移居过去，只留下她最宠爱的第三门徒桃花仙子孙凌波和余英男在此居住，并命余英男先跟孙凌波学剑。
起初阴素棠对余英男极好，本打算将自己昆仑嫡传用心传授。谁知余英男自小清修，又加天资颖异，根骨优厚，竟看出阴素棠种种败坏清规劣迹，