日光岩有两个传说。一种是地理传说，因为每天清晨太阳从厦门五老峰后升起，日光岩最先沐浴在阳光中，因此得名为日光岩，寺成为日光岩寺。

另一种是历史传说，当年郑成功来到晃岩，晃岩是日光岩的别称，见到这里景色胜过日本的日光山，便把晃字拆开，成了日光岩。