4世紀頃、神功皇后が播磨灘で暴雨風に遭った際、この海岸に立ち寄り住吉神社大明神に祈ると、風雨が収まった。
皇后が住吉大明神を祀ったのが、この神社の始まりと言われている。住吉神社の御神木である藤の木の花が見頃を迎える5月1日に、能舞台で能楽会が催されます。