当社の創建は、元亀年間(１５７０～１５７３)と伝えられています。
　創建者は織田信長に敗れた美濃国(岐阜県)の齋藤龍興(道三の孫)の遺臣四名で、この地を開拓し祭神を四ツ谷の氏神として祀ったと伝えられています。
　宝暦十三年(１７６３)に火災にあい、七十八年後の天保十二年(１８４１)に再建、棟札に「山王大権現」と記され、手水石や諏訪社の祠の奉納年号から見ると、社域もこのころから整えられてきたようです。