En 1932, fue contratado como redactor de la revista Fortune. Dos años más tarde, su colección de poesía, Me Voyage, ganó la Serie de Yale de los poetas más jóvenes. Pero Agee es fundamentalmente conocido por su libro Ahora elogiemos a hombres famosos (1941), sobre los aparceros de Alabama durante la Gran Depresión; por sus críticas de cine, que aparecieron regularmente en The Nation y The Time; y por sus guiones de La reina de África y La noche del cazador. Murió dos años antes de publicarse su gran obra de ficción, Una muerte en la familia (1957), que ganó el Premio Pulitzer en 1958.