社殿は平安末期に罹災しましたが、当時の領主で後の姫路城主となる池田輝政公によって1610年に再建されました。当時建てられた本殿が現存する本殿であり、再建記念として池田輝政公によって植樹された大楠は御神木として当社のシンボルになっています。