除了环境外，这里几乎没有正宗的佛教寺院，更别说专门的观音道场，而且已经建起来的寺院或神庙，大多都是岛民自发修建的，由于资金等问题绝大多数规模很小。此外，一些信众虽然有信仰，但分不清道教和佛教。用当地人的话说，“看到什么拜什么。”
　　中普陀寺就是在这样的环境里开始发展起来的。
　　据信众回忆，当时他们非常希望找到一位好师傅去建寺弘法，将正宗的佛教带到洞头。而当得知在潮州开元寺任监院的芳振法师表示愿意过去看看时，他们几乎兴奋地睡不着觉。当即找到芳振法师请求他过去看看。
　　由于担心这里环境太差，芳振法师不愿留下来，跟随芳振法师视察位置的信众一个劲地说“前面还可以再盖一座殿，房子还可以修得再漂亮一些。”但等见到开元寺的辉煌和宏伟后，这些信众都以为芳振法师不会过来了。

　　芳振法师说，当时闭关时，斋堂还未完全建好，几乎是“毛坯房”的样子。之所以急着闭关，主要是考虑到未来中普陀寺一旦大规模建设起来，已经繁忙的他可能更加繁忙，所以得趁着年轻，杂事还少的时候。
　　4年的闭关生活，整个中普陀寺的建设暂时停顿，直到2004年，芳振法师出关。那一年，芳振法师出关后的第一件事，就是修建圆通殿，这也意味着中普陀寺的建设重新开始。经过一年的建设，圆通殿成功建成。按照信众的说法，当时中普陀寺每天都有新变化，而这种变化总能带给她们一些惊喜。