相传，王母娘娘首次邀请“八仙”去瑶池参加蟠桃宴会。蟠挑宴的主食，就是三千年一熟的蟠桃，和千年陈酿玉液琼浆。
八仙酒醉桃饱，游兴大发，相约同往蓬菜仙境一游。到得东海边，铁拐李把铁拐往海中一扔，变成一艘华丽的大龙船，八仙坐着船尽情观赏海上风光。良辰美景，赏心悦目，游兴高涨。此时，八仙各自吹舞起自己的宝物。一时间仙音缭绕，热闹非凡，声震东海龙宫。
正在玩乐的东海龙王的第七个儿子，名叫“花龙太子”，听见如此美妙的歌声乐曲，引发起他那好色猎艳的本性。浮上海面一看，嗨！何仙姑那娇艳动人的容貌，婀娜多姿的身材，悦耳迷人的歌喉……使他目瞪口呆，勾魂消魄！巴不得一口就把她吞到肚子里。他即刻兴风作浪，把何仙姑掳回了龙宫。
游玩得正高兴的七个仙人，见何仙姑突然被龙太子掳走，顿时气恼万分。立即把各人手里吹打弹奏的宝贝变成了战斗的武器，一齐杀向龙宫。霎时间，七个仙人与龙宫的虾兵蟹将龙子龙孙们杀得天昏地暗，宫摇海啸，日月无光。但是，“花龙太子”始终不肯把何仙姑放出龙宫。见此情景，七个仙人动了真怒。铁拐李取下背上的葫芦，催动三味真火，烈焰腾腾把东海龙宫烧着了。吕洞宾祭起诛仙剑杀了“花龙太子”，抢出何仙姑，八个仙人一路杀出了东海龙宫。
东海龙宫被烧，儿子被杀，东海龙王一气之下，把“八仙”告到了天庭。玉帝闻之大惊，要从严从重惩治“八仙”。观音娘娘闻讯后，急忙赶到玉帝殿前，说明了原委。并向玉帝呈告：东海龙王亦有“教子不严，溺爱放纵儿子作恶”之过。在观音的百般调停与回护下，“八仙”才未被严惩。其结果是：事因何仙姑风流放荡不羁而起，将她打下凡间，罚其为奴十年；铁拐李火烧龙宫罪为首恶，但念其见义勇为救友心切，罚其“一世为仙，终生为丐”；吕洞宾杀死龙太子，本应杀人偿命。但因其事出有因，情真义重，侠义可彰。只将其逐返凡尘，流配充军，建功立业，待其罪愆赎清后，方准回归仙班；其余五仙因是协从，从轻罚落。罚其在武夷山中的山高沟深，穷苦困顿之处，自择地方面壁思过五百年。
玉帝旨下，八仙甘愿受罚，各领其罚。因为何仙姑被贬到东华山脚下的一个大户人家做了丫头，五位仙人友情难舍，也就在离东华山不远的“通天寨”寻到了一个岩高洞广，冬暖夏凉的山洞为家，他们在洞内品茗对奕，面壁思过，感悟玄机。受罚期满后与何仙姑一道，又回到他们的神乐世界去了。但留下了此处风光宜人的优美胜境，和一则被人们世代传育的动人故事。
从此后，人们把这个大岩寺叫“五仙岩”。
