当社は福山寺の守護神として祀られたのが創祀である。
　古来、この一帯は吉備の穴海と称され、瀬戸内海が深く湾入した多島海域で、源平の屋島合戦の前にあった藤戸合戦（1184）は謡曲にも謳われている程で、その遺跡は周辺に点在し、現在の平地は当時殆ど海で、海岸は北方２キロメートルの福山（標高３００メートル）の南麓であった。
　この福山は山陽道を眼下に、瀬戸の島々を見晴るかす要地で、古く平安時代から信仰の山とされ、山岳仏教の１２坊を持つ大寺「福山寺」が建立された。
　延元元年（1336）足利氏の北上にあたり、南朝に組みして尊氏の弟、直義と対戦し、地元の土豪大江田氏経と共に戦ったが、諸社寺その福山合戦に於いて全て焼失した。