Solo la estatua tallada por Ieyasu y un sagrado ginkgo sobrevivieron al devastador bombardeo incendiario de 1945 que destruyó todo lo demás; los edificios actuales datan de la reconstrucción de 1969.

Originalmente llamado Ankoku-den por el nombre budista póstumo de Ieyasu, el santuario fue parte del Templo Zojoji hasta que la orden de 1868 del gobierno Meiji separó por la fuerza los santuarios sintoístas de los templos budistas en todo el país.

Aunque fue designado como Edificio Especialmente Protegido en 1915 (equivalente a Propiedad Cultural Importante), el original santuario ornamentado con su puerta de estilo chino y valla transparente fue completamente destruido en los bombardeos

Tokugawa Ieyasu esculpió su propia estatua a tamaño real a los 60 años y la veneró en el Castillo de Sunpu antes de ordenar que se consagrara aquí tras su muerte, convirtiendo este lugar en uno de los pocos santuarios con una imagen de deidad