Su nombre completo era Frances Anne Rafferty, y nació en Sioux City, Iowa.

[1]​ Cuando tenía nueve años de edad, su familia se mudó a Los Ángeles, California.

Normalmente hizo papeles menores y de reparto y, aunque tuvo un buen personaje en el film de 1944 Dragon Seed, interpretado por Katharine Hepburn y Walter Huston, sus primeros papeles se limitaron casi exclusivamente al cine de serie B.

Otra cinta de cierta popularidad en la que actuó fue Abbott and Costello in Hollywood (1945).

En la década de 1950 Rafferty enfocó su carrera al medio televisivo.