Su ubicación estratégica le permitió el control del paso entre Hokkaidō y Honshu.Ya que en ese momento la familia Matsumae no contaba con los fondos necesarios para levantar un nuevo castillo en el monte Hakodate, el lugar que se recomendó, decidieron fortificar la casa de Matsumae Takahiro en Fukuyama.Durante la Guerra Boshin en 1868, las fuerzas del Shinsengumi, que apoyaban al shogunato Tokugawa, tomaron el control del fuerte Goryōkaku en Hakodate y también atacaron y derrotaron al castillo de Matsumae.[3] En 1941 fue designado como Tesoro Nacional de Japón, pero sufrió un incendio en 1949 que redujo a cenizas casi todas las construcciones, excepto la puerta principal.[3] En la actualidad, el edificio es una reconstrucción de hormigón de 1960 que alberga un museo municipal, donde se exhiben distintos artefactos del clan Matsumae así como del pueblo ainu.
