王天雨說：我的居所後面，住著一戶姓張的人，曾經捕獲一隻大雁，把牠養在庭院裡。第二年，天上有大雁哀鳴，院裡的大雁應聲鳴叫。過了一陣，空中有一隻大雁飛下，兩隻雁，彼此用脖子相纏，雙雙絞死在樓前。後來這個樓就叫做「雙雁樓」。這是明朝正德年間，發生的事情。

詩曰：

一別茫茫兩度秋，悲嘶幾盡白雲求。

斷魂不得雙飛去，煙黯空庭月黯樓。@*

（出自《聖師錄》）