[1]​ El castillo fue construido en un afloramiento rocoso sobre el pueblo, probablemente en el siglo XII como el hogar de la familia Greifenstein.

En 1243, sus parientes Heinrich y Albert fueron mencionados como testigos en un proceso legal como Hainricus et Albertus de Grifinstain.

En 1392, la familia von Matsch eran caballeros ladrones que utilizaban el castillo como base para ataques contra las propiedades del obispo.

En 1394, el obispo Hartmann II envió con éxito un ejército para expulsar a los ladrones y tomar el control del castillo.

En 1537, Filisur compró los derechos para gobernarse a sí mismo del obispo y el castillo perdió su importancia.

El castillo consta de tres partes separadas construidas en terrazas en diferentes elevaciones.

Sin embargo, no quedan rastros de la pared que lo protegía en el lado del valle.