Se sitúa entre Hiiumaa y la península de Noarootsi en el continente, del cual está separada 3 km por el estrecho de Voosi.
La isla alcanzó los 3000 habitantes antes de la Segunda Guerra Mundial.
Durante la guerra se evacuó a casi toda la población de Vormsi, así como a otros suecos que vivían en Estonia, hacia Suecia.
Actualmente la isla está habitada por alrededor de 350 personas.
La influencia sueca puede también encontrarse en otros nombres de lugares; aldeas como Hullo (centro administrativo), Sviby (puerto principal), Söderby, Norrby, Diby, Rälby, Borrby, Kärrslätt, Saxby, Busby, Suuremõisa (Magnushof) y Rumpo; y lagos como el Prästvik.