En su lado sur se encuentra el monte Esja.
Otra explicación del nombre Hvalfjörður se deriva de las sagas islandesas, donde se narra la historia de un sacerdote que lucha contra una ballena malvada.
El fiordo sirvió asimismo de base militar británica y más tarde estadounidense durante la Segunda Guerra Mundial.
El Hvalfjörður es un ejemplo para proyectos de reforestación que se encuentran dispersos en todo el país.
Aunque no excesivamente largo ni ancho, el fiordo obligaba a los viajeros a rodearlo completamente para cruzarlo hasta 1998, cuando se construyó el túnel de Hvalfjörður, con una longitud de 5.7 km y que atraviesa el fiordo por debajo del mar hasta una profundidad de 165 m. El túnel forma parte de la carretera periférica islandesa Hringvegur (Carretera Nacional N º 1), y ha acortado la distancia entre Reikiavik y el norte y oeste de Islandia en casi una hora y 60 km.