相传很久以前，这儿的山顶上常常是仙乐飘飘，彩凤青驾环绕其间，各路神仙结队而来，在山顶摆开棋局，对弈厮杀，常常是难分难解，不分胜负，于是便请南极仙翁在旁观局并作裁判，久而久之就化为顽石了。峰顶还留有九仙石像和石棋盘，因此得名仙人弈棋台，简称仙人台。山顶上有一巨大的石柱，呈四棱状，高7米，直径约25米，形状像一只鹅头，所以叫鹅头峰，相传是当年
丁令威化鹤之处。据东晋文学家陶渊明的《搜神后记》记载：“辽阳知州丁令威于灵虚山学道，千年之后化鹤飞回辽东，飞到仙人台上，常以仙乐诱化人们进山学道。”鹅头峰的峭壁上还有摩崖石刻“仙人台”三个篆字，是清
光绪年间题刻上去的。
仙人台景区名胜古迹甚多，历史悠久，五大禅林，无量观中会、大安、香岩、三大寺均建在这个景区内。清代建的五龙宫、朝阳宫、太和宫殿、东极宫、泰安宫、斗姥宫、圣先宫、慈祥观、石龙庵、木鱼庵、洪谷庵等十多处道教庙宇均分布在这个区域内，著名景点近百余处。