[1]​ Aunque se desconocen los orígenes del castillo, hay indicios de que los Mōri poseyeron la fortaleza Yoshida en el mismo lugar en el siglo XIII.

Los 3000 defensores resistieron durante cuatro meses, hasta que llegó una fuerza de apoyo del clan Ōuchi con 10 000 tropas.

Amako Hisayuki murió en la batalla; este clan sufrió grandes pérdidas y finalmente se retiró un mes después.

El castillo Yoshida-Kōriyama fue abandonado en 1591, cuando los Mōri se trasladaron a la nueva fortaleza de Hiroshima.

La gran mayoría de estas murallas fueron destruidas durante el período Edo, pero los terrenos aún conservan algunos pozos y trincheras.