¡Imagínense las vistas!»[6] John Wayne, Howard Hughes, Frank Sinatra, Jerry Buss y el novelista James Wohl vivieron en el ático en diferentes momentos,[7] y, según se dice, Hughes también alquiló alguno de los apartamentos de las plantas más bajas para sus novias o amantes.[5] También residieron en el edificio Clark Gable, Errol Flynn, Marilyn Monroe, Michael Caine, Quincy Jones, Roger Moore, Zsa Zsa Gabor, Billie Burke, Joseph Schenck, Paulette Goddard, Zasu Pitts, George Stevens, Preston Sturges y Carol Kane.En 1982 fracasó un proyecto para convertir el edificio en condominios, y las obras se detuvieron abruptamente mientras todavía vivían allí residentes.El edificio se había deteriorado y fue descrito «como algo de una tierra devastada por la guerra».[7][19] En esa época, el residente Werner Klemperer dijo sobre el edificio: «Bienvenidos a Beirut oeste».James's Club funcionó como un hotel exclusivo durante varios años, frecuentado por celebridades como David Bowie.[23][24] El Lancaster Group compró el hotel a Peter de Savary en 1992 y cambió su nombre por The Argyle.[25] Klein contrató al diseñador Paul Fortune para que renovara el hotel, añadiendo instalaciones más modernas, y recuperó su nombre original.[26] En 2006, The Globe and Mail analizó la renovación de la Sunset Tower y afirmó: «No es un lugar que necesite autodeclararse "de moda" porque su grandiosa historia habla por sí sola, y ha sido llevada exitosamente hasta la actualidad».[30] Otras celebridades que han visitado el Tower Bar son Sean Penn, Victoria Beckham, Tom Cruise y Jennifer López.Según el New York Post, cuando Klein dijo que llamaría la policía si no se marchaba, Combs gritó: «Inténtalo y me pasaré el resto de mi vida persiguiéndote».