Wirz ejerció la medicina en Suiza durante un tiempo antes de emigrar a los EE.Estableció un consultorio médico en Kentucky, donde se casó con una metodista viuda llamada Wolfe.Se discute si participó en la batalla de Seven Pines en mayo de 1862, durante la cual supuestamente fue gravemente herido por una bala Minie y perdió la sensibilidad del brazo derecho.No hay registro oficial para dar crédito a cualquier participación en este o cualquier otro asunto militar antes de ser director de Andersonville.Fue enterrado más tarde en el Cementerio del Monte de los Olivos, en Washington D. C. sobrevivieron su esposa y una hija.
