玄慈方丈的師父，是上一任方丈，法號靈門大師，當年雁門關阻擊戰，就是得到他的首肯，玄慈才帶著中原高手去伏擊蕭遠山。可以說汪劍通等二十多名武林高手，一大半都是看著靈門大師的面子，才參加這次伏擊戰的，畢竟玄慈當時年紀尚輕，想要成為帶頭大哥還是欠缺實力的，逍遙派門人也正是因為懼怕靈門大師和掃地僧，才不敢上少林搶奪易筋經和七十二絕技。
逍遙派一直都是一個隱世的門派，從不與外界來往，那麼這個門派存在的意義何在，既然逍遙子只有三個徒弟，又不涉足於江湖，何必要成立一個門派，很顯然他們是有目的的，其實逍遙派與姑蘇慕容家有著千絲萬縷的聯絡。逍遙派的總舵在天涯海閣，位於茫茫大雪的天山之上，逍遙子因材施教，收錄天山童姥、無崖子、李秋水三人為徒。逍遙派的武功是以內功為基礎的，所以無崖子三人從小就練習內功，李秋水練習小無相功，天山童姥練習不老長春功，無崖子練習北冥神功，而後再透過三人的功力，傳授特有的武功招式，其中天山童姥練習的是天山六陽掌和天山折梅手，李秋水練習的白虹掌力和傳音搜魂大法。
逍遙派門人都是有追求有操守的，除了她們之間複雜的感情之外，創造出一門包羅永珍的武功，就是逍遙派門人終身奮鬥的目標。要想完成這麼宏偉的目標，單靠逍遙三老之力，顯然是不可能完成的，只有聚集整個武林的武學知識，去其糟粕取其精華，融匯各家之長，才能創造出厲害的武功。武功一途有強有弱，有優點也有缺點，就像六脈神劍一樣，優點就是殺傷力大，武功大成時，能夠達到六脈齊開的境界，缺點就是內力不足時，只能是個花架子，根本沒有殺傷力，就像葵花寶典一樣，威力非常驚人，但是需要自宮練劍。逍遙派門人就是要去除武功中的缺點，創造出一門包羅永珍的武功秘籍，能蘊含世間一切武功的優點，其實有點類似於射鵰時期的《九陰真經》。
既然要依靠全武林的力量，就要收集各門各派的武功秘籍，然後慢慢研究眾家之長，去其糟粕取其精華。如何能夠收集各門各派的武學，最直接的方法就是去搶，若是搶不到武功秘籍，就儘量和這個門派的人交手，從交手的武功招式中，偷學別派的武功，然後用小無相功複製出來。若要得到對手的內力，就用北冥神功吸他人內力為己用，因為在天龍時期，每一門武功都有其獨門的內功，只有掌握了這獨門內功，才能發揮出武功的最大威力。既然如此，逍遙三老就開始在江湖上搜刮各門各派的武功秘籍，憑藉她們高超的武功，大多數門派都是屈服的，會主動獻上門派的武功秘籍，唯獨丐幫和少林，還有大理段氏的幾門絕學，不曾被逍遙派搞到手。
少室山英雄大會的時候，玄慈方丈已經五六十歲了，然而靈門大師是玄慈的師父，也就是說靈門大師和逍遙三老是同一個時期的人，既然逍遙派看上了少林派的武學，就會想方設法去獲取易筋經和七十二絕技。作為少林寺的住持方丈，是他們首先要面對的，七十二絕技一直都存放在藏經閣內，且從未禁止寺內僧人翻閱，只是有掃地僧這位大神看守，所以一直都不曾被逍遙派的人搶走。而易筋經最為重要，向來都不存放在藏經閣中，因為燈下黑的緣故，所以這本經書最為安全。
在藏經閣大戰中，鳩摩智顯露出小無相功時，被掃地僧一眼就識破了，說明掃地僧多年前是見過這門武功的，我們都知道逍遙派的武功，向來的不會外傳的，即使聽到“逍遙派”這三個字，也會有滅頂之災，也就是說掃地僧只能在與李秋水交手時，才能見過這門武功。有了這條線索，就可以非常清楚的看出當年事情發生的經過了，逍遙三老一同到少林搶奪武功秘籍，天山童姥與靈門大師交手，李秋水與掃地僧交手，無崖子與眾位高僧交手，由於少林人多勢眾，且有掃地僧和靈門大師兩位大神坐鎮，逍遙三老只有能敗走。
關於這一戰的慘烈，其實在天龍原著中是有蛛絲馬跡的，這一點在虛竹救天山童姥的故事中有展現，並且天生童姥說和靈門大師平輩論交，多少都有點吹牛的嫌疑，她們雖然是同輩，但是卻沒有達到論交的地步，只是在搶奪經書的過程中，被對方的武學修為震驚，有了惺惺相惜的心態。起碼從內心深處來說，逍遙三老是非常佩服少林高僧的，以至於後來他們一直都不敢踏入少室山一步，即使是靈門大師圓寂多年之後，他們依舊不敢再上少林寺搶奪經書。
童姥從懷中取出一枚黃色藥丸服了，道：“這賤人和我仇深似海，決計放我不過。我還得有七十九日，方能神功還原，那時便不怕這賤人了。這七十九日卻躲到哪裡去才好？”虛竹皺起眉頭，心想：“便要躲半天也難，卻到哪裡躲七十九日去？”童姥自言自語：“倘若躲到你少林寺中去，倒是個絕妙好地方……”虛竹嚇了一跳，全身一震。童姥怒道：“死和尚，你怕什麼？少林寺離此千里迢迢，咱們怎能去得？”她側過了頭，說道：“自此而西，再行百餘里便是西夏國了。新修版《天龍八部·第三十六回》
天山童姥身處險境，首先想到避難的地方是少林寺，就是看準了李秋水的弱點，他是根本不敢去少林寺搜尋，因為當年她在少林寺慘敗過，搶奪藏經閣七十二絕技時，遇到了看守經書的掃地僧，兩人一番大戰之後，掃地僧以無上功力，破了李秋水的小無相功。逍遙三老搶奪少林寺武功秘籍時，掃地僧尚在盛年，遇到這麼強勁的對手，少林寺不可能沒有防範之心，肯定會召集武學強者，商量對應之策，特別是逍遙派的武功。只是到了玄慈這一輩，年代久遠了，都沒有聽說過逍遙三老的名頭。
天山童姥和靈門大師平輩論交，無崖子臨死之前問詢枯榮大師，李秋水不敢踏入少林寺一步，這裡面都蘊含了深層次的意思，無崖子最為可惜的事情，就是沒有搶到大理段氏的六脈神劍和一陽指。當年逍遙三老也曾潛伏大理，去天龍寺搶奪六脈神劍和一陽指，只可惜被枯榮大師等眾位高僧合力打敗，逃到無量山劍湖底，才僥倖保住了性命，因為這次天龍寺之行，無崖子等人見識了大理段氏的一陽指和六脈神劍神奇，才有了後來抱憾終身的想法。還有丐幫的打狗棒法，李秋水透過和丐幫幫主交手，以小無相功模仿了幾十招打狗棒法的招式，後來製成秘籍藏於琅嬛福地，又輾轉搬到曼陀山莊的琅嬛玉洞，王語嫣後來交給慕容復的打狗棒法殘篇，就是由此而來。
正是因為逍遙三老有在少林寺的這段往事，兩者之間才會惺惺相惜，天山童姥才會說和靈門大師平輩論交。