El 8 de septiembre de 1935, Weiss se encaró y presuntamente disparó contra Huey Long en el edificio del capitolio en Baton Rouge.

Los guardaespaldas de Long respondieron y Weiss recibió el impacto de sesenta y dos balas.

Weiss fue enterrado en el cementerio de Roselawn en Baton Rouge.

Por el número de asistentes se cree que el funeral de Weiss es el más multitudinario jamás realizado para honrar a un acusado de magnicidio en los Estados Unidos.

Los restos nunca fueron devueltos a Roselawn.