[3]​ Para 1920, el área se había convertido en lo que The New York Times llamó "un gran centro cívico".

A diferencia de estructuras similares en lotes pequeños, como el edificio Fred F. French, 400 Madison Avenue es simétrico.

[13]​ George Shepard Chappell, escribiendo en The New Yorker bajo el seudónimo "T-Square", criticó la forma de 400 Madison Avenue como "angustiosamente pretenciosa" con detalles "completamente innecesarios" en la fachada.

[13]​ William LaZinsk, arquitecto de la empresa Severance, explicó que se utilizó terracota crema porque podía absorber y reflejar la luz solar.

Según LaZinsk, la terracota crema podría usarse para formar reflejos y sombras que "varían con la posición cambiante del sol", incluso si estos detalles mantuvieron el mismo efecto general durante todo el día.

[12]​ En las calles 47 y 48, hay tres tramos: una bahía estrecha flanqueada por dos más anchas.

[19]​ La fachada principal en Madison Avenue tiene una planta baja revestida con granito rosa, así como ocho escaparates y dos ventanas adicionales.

Las fachadas laterales y los tramos exteriores de Madison Avenue están coronadas por bandas que se asemejan a colonettes.

Sobre el piso 14, hay pabellones ligeramente salientes en la fachada de Madison Avenue, que contienen motivos estilizados.

[21]​ Los ascensores y pasillos se agruparon en la parte trasera u occidental del edificio.

En 400 Madison Avenue, cuatro huecos de ascensor se consideraron suficientes para dar servicio a todo el espacio interior.

[7]​[31]​ El segundo piso y el entresuelo estaban destinados al uso de una institución financiera,[30]​ como un banco.

[7]​[31]​ El banquero George L. Ohrstrom fundó 400 Madison Avenue Corporation en 1928 para erigir un edificio en esa dirección en la ciudad de Nueva York.

[30]​ 400 Madison Avenue contenía menos de una sexta parte del espacio de piso del edificio Chrysler cercano, y los desarrolladores creían que había un mercado para firmas, profesionales y empresarios que querían "oficinas pequeñas pero impresionantes", como firmas financieras en Bajo Manhattan que deseaba una sucursal en Midtown.

[42]​ En otros materiales promocionales, el número de la casa del edificio, 400, se utilizó para evocar a la clase alta.

[26]​ Los primeros inquilinos se dedicaban principalmente a la publicidad, las finanzas, los seguros, el derecho y los bienes raíces.

[26]​ Entre los primeros inquilinos se encontraban numerosas empresas que cotizaban en la Bolsa de Valores, como Cowen & Co.

[16]​ Además, el Council on Books in Wartime arrendó un espacio en 400 Madison Avenue para su sede durante la Segunda Guerra Mundial,[54]​[55]​ enviando cerca de 123 millones de libros durante ese tiempo.

[56]​ Después de la Segunda Guerra Mundial, el edificio contenía las oficinas del productor David O. Selznick y la actriz Lucille Lortel.

[57]​[58]​ Nueve años más tarde, los inversores adquirieron la participación minoritaria en el edificio de Lefcourt Realty Corporation.

[61]​ El vicepresidente ejecutivo de la empresa, William S. Macklowe, dijo que inicialmente la empresa buscaba grandes inquilinos; en ese momento, el treinta por ciento del edificio estaba vacío y el sistema eléctrico original permanecía en su lugar.

[8]​[66]​ ASB vendió 400 Madison Avenue en 2018 a la empresa coreana Daishin Securities por 194,5 millones de dólares.