Muy posiblemente Hvalba fue fundada durante la colonización vikinga de las islas, en el siglo IX.

En el siglo XVII el pueblo, al igual que varios más en las Feroe, fue atacado por piratas berberiscos.

Uno de ellos se llevó 30 mujeres y niños, que fueron vendidos como esclavos en África del norte.

Hvalba está enclavada en el norte de Suðuroy, al fondo del Hvalbiarfjørður.

La costa occidental es abrupta y prácticamente inaccesible, mientras que en la costa oriental hay dos amplias playas: una al norte donde está el pueblo de Hvalba propiamente dicho, y otra al sur, donde está el asentamiento de Nes.

El municipio incluye dos localidades, Hvalba y Sandvík, que en total suman 712 habitantes en 2011.

Actualmente hay una mina de carbón con una actividad meramente testimonial, financiada por el Estado y utilizada con fines turísticos.