金兵大舉南下，宋高宗趙構逃到揚州，依舊過著“太平皇帝”的淫逸生活。建炎三年二月，金兵破徐州，取彭城，入泗州，直趨楚州，前鋒只離揚州僅幾十里路了。

一天夜裡，宋高宗趙構正在床上作樂。忽然，內侍鄺詢驚慌失措來報告：“金兵已進逼城下！”宋高宗驚嚇過度，如大夢初醒，急呼：“快快備馬。”

宋高宗披甲上馬，馳出城外。跟著他隨行的只有王淵不能、張浚和內侍康履，以及少數御林軍士卒。

君臣數人離開揚州，飛馬趕到瓜州渡口，尋得幾葉小舟，急急渡過長江，到了鎮江。

在揚州，黃潛善、汪伯彥全然不知金兵的訊息，次日還帶著同僚，在寺院中悠然聽老僧講經說法。

傍晚時分，聽罷說法，剛要會食，忽聽堂吏進來大喊：“皇上已經走了。”黃潛善、汪伯彥二人大吃一驚，相顧失色，連飯也不敢吃，倉皇穿上戎裝，策馬南逃。

這一來，揚州城內一片混亂，全城居民紛紛奪門而逃，互相踐踏，屍橫街巷，情景悽慘。

跟隨宋高宗南遷的太常少卿季陵，看到朝廷儀物，遍地散棄，也無力拾掇，只得到壽寧寺、取了九廟神主出城。

季陵未行數里，回頭一看，城中火焰沖天，令人可怖。驀地，聽到後面喊聲大作，疑是金兵追到，急急逃竄，竟把九廟神主失落於途中。