灵岩寺古称石门寺,始建年代不详。后圮,于唐僖宗乾符三年(867)重建。解放前后,因年久失修倒毁。1999年,开发百丈飞瀑时规划移建寺院。2006年,经张绍平等善男信女的努力,投资100余万元,将灵岩寺移建于王院村西的璜院山麓。移建的灵岩寺规划三进:第一进五开间天王殿,第二进五开间大雄宝殿,第三进三开间济公殿,左右两侧各建僧房、客房。现已建成大雄宝殿,五开间四周游廊。大殿重檐歇山顶,飞檐翘角。殿前石砌高坎,有30余步台阶,大雄宝殿显得格外雄伟壮观。灵岩寺是个地道的佛教寺院,但风俗与嵊州其他寺庙一样,它供奉的菩萨以佛像为主,却也有一尊济公佛像。所以,灵岩寺也像神庙一样有庙会活动。农历九月十八便是“灵岩赛社” 。赛社起源很早,是山民庆祝丰收,酬谢神道的重要日子。所以,从农历九月十七日至十九日三天,四邻八村的山民纷纷赶来集会,形成了烧高香、看社戏、会亲友、游景区、购物资的五大庙会特色。山民在赶庙会时卖货买货,一举数得,因此灵岩赛社年年火爆,人气很旺。