Solo la statua autoscolpita di Ieyasu e un ginkgo sacro sopravvissero al devastante bombardamento incendiario del 1945 che distrusse tutto il resto, gli edifici attuali risalgono alla ricostruzione del 1969.

Originariamente chiamato Ankoku-den dal nome postumo buddhista di Ieyasu, il santuario faceva parte del Tempio Zojoji fino a quando il governo Meiji nel 1868 ordinò la separazione forzata dei santuari shintoisti dai templi buddhisti in tutto il paese.

Sebbene designato Edificio Speciale Protetto nel 1915 (equivalente a Bene Culturale Importante), il santuario originale riccamente decorato con il suo portale in stile cinese e la recinzione trasparente fu completamente distrutto nei bombardamenti aerei di Tokyo del 1945.

Tokugawa Ieyasu scolpì la propria statua a grandezza naturale all'età di 60 anni e la venerò personalmente al Castello di Sunpu prima di ordinare che fosse consacrata qui dopo la sua morte, rendendolo uno dei pochi santuari che custodiscono un'immagine della divinità commissionata da se stessa.