海岸寺位于濑户内海沿岸城镇多度津的屏风浦地区。其广阔的用地分为正殿和僧房所在的沿海区域，以及内殿和大师堂所在的内陆区域。内陆区域有公路和JR予赞线通过。游客从仁王门（守护王之门）进入寺庙。这样的大门两侧通常有一对代表佛教诸神的雕像，但在海岸寺，守护大门两侧的却是一对相扑力士。传说这座寺庙由佛教僧侣空海（774—835）于807年刚从中国留学归来时建立——空海是佛教真言宗的创始人，也是四国八十八所巡礼的开创者。空海之所以选择在这里建立海岸寺，可能是因为他的母亲玉依御前在他出生时曾住在这里。玉依御前可能居住过的地方现在是佛母院，而这座寺庙本身据说就建立在玉依御前为分娩而设的小屋旧址上。寺内有几个地方可以观赏北边群岛点缀的大海。其中一个观景点是正殿背后的海滩，另一个观景点是附近一座小山上的内殿，小山可以在15分钟内爬上去。