La propia YMHA era una organización secular destinada a servir como una fraternidad social y literaria.
La "Y" fue constituida oficialmente el 10 de septiembre de 1874, la YMHA estaba inicialmente en un local alquilado, unos años más tarde, la organización se trasladó a un local ubicado en la calle 42, la "Y" operaba una sucursal en el centro.
En ese local, la poetisa judía Emma Lazarus enseñaba el idioma inglés a los nuevos inmigrantes, esta sucursal posteriormente se fusionaría con otras organizaciones para convertirse en la Alianza Educativa.
La "Y" encontró un hogar permanente, gracias a la generosidad del empresario y filántropo judío Jacob Schiff, el cual financió la construcción de un edificio ubicado entre la calle 92 y la Avenida Lexington, el edificio fue diseñado por el arquitecto Arnold W. Brunner, quien produjo muchas sinagogas a principios del siglo XX, el edificio se inauguró en el año 1900.
El director de la "Y", William Kolodney, argumentó que el arte era fundamental para la tradición religiosa judía.
A la junta directiva le preocupaba que este cambio transformara a la "Y" en una institución secular y dañara a sus finanzas, Kolodney abogó por no atender al mínimo común denominador en la búsqueda de multitudes y mantener los cargos mínimos para que las actividades estuvieran al alcance de los trabajadores asalariados.
Adler había trabajado para la "Y" durante 11 años, cuando fue contratado por el anterior director ejecutivo.
En la década de 1990, hubo una disminución del interés del público por la música clásica, ello junto con el aumento de los costos inmobiliarios amenazó a las finanzas, la "Y" respondió recortando la oferta cultural judía.