[9]​ Agee dijo que su conciencia social de la Iglesia católica lo había convertido cada vez más incómodo su trabajo por la década de 1960 llevando a su desilusión con la CIA y su apoyo a los gobiernos autoritarios en América Latina.

[14]​ Ocupó un pasaporte granadino brevemente,[14]​ después de ayudar a Granada y su gobierno radical en 1980 y posteriormente en los años ochenta uno nicaragüense, que le dio el Gobierno Sandinista.

[15]​ Regresó a Estados Unidos donde viven sus dos hijos, Phil y Chris, en Nueva York.

Él habla a menudo de ellos con orgullo y cierto pesar.

Interrumpió la educación de mis hijos y no creo que fue una época feliz para ellos.

[18]​ Según una biografía de autores adosada a un ensayo Agee en marzo de 2007 en la revista editada por Alexander Cockburn Counterpunch, Agee ha vivido desde 1978 con su esposa en Hamburgo, Alemania.