当社は承元元年３月山城国から御分霊を遷し奉った。往古は現在の社地から１００メートルばかり奥の牛岩に小社があって勧請当時から氏神として崇敬されていた。
　この地の周囲一帯は平地であるが、鎮座地は特に凸地にして老樹の古株の中に一つの大石があり、その形が牛が伏している姿に似ていることから不異衆人牛岩と称し、この地を牛岩の牛と男山を併せ牛男山と称した。
　毎年正月２日には氏子が牛馬をひいて参拝する。承元元年社殿を創建し現在地に遷座し、明治６年村社に、昭和４年４月神饌幣帛料供進神社に指定された。