«Crybaby» se lanzó cómo tercer sencillo de Rainbow a mediados del 2000, cómo una doble cara A de la canción "Can't Take That Away (Mariah's Theme)".
Aunque los dos sencillos anteriores del álbum "Heartbreaker" y "Thank God I Found You" demostraron ser exitosos, puesto que ambos llegaron al número uno en el Hot 100, Sony creía que el proyecto no necesitaba más sencillos, Carey creía otra cosa y comenzó a criticar públicamente a Sony a través de mensajes dejados en su sitio Web.
Los ejecutivos decidieron promocionar "Can't Take That Away" en las radios pop y "Crybaby" en las estaciones urbanas.
En general la intención era que la primera entrara en el Hot 100 y la segunda se centrara en las lista de R&B.
Aunque actualmente casi no se lanzan sencillo dobles porque en 1998 las reglas de Billboard cambiaron y desde entonces cualquier canción de un álbum puede entrar al Hot 100 aunque no sea sencillo.