因为自天山童姥陨落后，灵鹫宫龙蛇混杂，失去了往日的雄厚实力，因此，逐渐在江湖上没落乃至衰亡了！
更重要的是虚竹本身闲云野鹤，后来又云游天下，不知所踪当了甩手掌柜。
之前逍遥子晚年都是天山童姥和李秋水，无崖子三位弟子后大多是女子，而且虚竹是和尚不能破戒，贪恋女色，最关键的是虚竹有梦姑，作者也把虚竹打造成一位英雄！也不变打扰虚竹的二人世界，让书中的人物性格更加饱满，更吸引读者所以把婢女都献给段誉搭理更符合人物特征
缥缈峰灵鹫宫天山童姥因为痴恋师弟无崖子而不可得，从而认定天下男子都是负心薄幸，于是她在灵鹫宫就收留天下不幸女子，而她武功高强，利用生死符统领三十六洞七十二岛，可谓影响力极大。而天山童姥在返老还童武功尽失之际，又遭遇师妹李秋水前来寻仇，正好天山童姥被虚竹所救，后来童姥也将灵鹫宫宫主传给虚竹，这其中主要有三方面原因：
第一，虚竹救了她性命。
本来在万仙大会上，天山童姥就有可能被三十六洞七十二岛之人所杀，但是虚竹突然冲出救出了童姥，因为他认为童姥太过无辜。后来，他又帮助童姥脱离李秋水的追杀，这也让童姥甚为感激。而童姥也感知到这个小和尚宅心仁厚，为人还是很不错，虽然童姥很讨厌天下男子，但是她还是认可小和尚的人品，认定小和尚肯定会善待灵鹫宫那群女子。
灵鹫宫基本都是女子，当初就是因为被欺负被压迫，童姥救上山后死心塌地的一起学武功，死心塌地听命于童姥
灵鹫宫”远在天山缥缈峰，经过几十年的经营，却悄悄控制着中原至东南沿海大多数江湖帮会。所以江湖上谈起天山灵鹫宫，不谈“天山”，往往用“宫里”代替。
“灵鹫宫”当然不在雪山峰顶，而是在天山南麓一处温暖湿润的所在。众多弟子居住于此，“灵鹫宫”实际上既是集市、也是城堡。因为方圆百里皆是其控制范围，所以“灵鹫宫”从未经过刀光剑影，一派安乐祥和景象
