En los años 80 del siglo XX tenía 500 habitantes y contaba con una fábrica de conservas.
En Raufarhöfn se encuentra el Arctic Henge (Heimskautsgerði en islandés), un monumento moderno con un diámetro de 50 m que se compone de varias partes con una altura de hasta 10 m.[3] Fue creado por el artista Erlingur Thoroddsen a partir de 2002.
[4] La obra de arte fue inspirada por el mundo mítico del poema Völuspá.
[5] Dentro del monumento hay un sendero especial que se refiere a los 68 enanos mencionados en la obra Völuspá.
La iglesia de Raufarhöfn fue construida en 1928 por Guðjón Samúelsson, el arquitecta más conocido de Islandia, y renovada en 1979.