相传很久以前，此神社的祭神伊都岐岛姬命曾从筑紫东渡大海以寻找安居之地，当其看到途中风光优美的笠户岛后深受吸引，决定“永居于此”，但是当其想要祭祀七浦七惠比寿时，发现岛上缺少一浦（海湾），最终不得不改住到了更东方的安艺国“宫岛”。

立于海中的石鸟居是1925年时由当地的有志之士出资所建。

深浦的西浴供奉有严岛明神，每年农历六月十七日都会举行“十七夜管弦祭”，届时会有无数渔船点上灯笼并在湾内巡游。