Reynolds va continuar en el comandament de brigada de l'Exèrcit de Tennessee durant la Campanya d'Atlanta de 1864. Va servir a la divisió de Stevenson del cos del tinent general John Bell Hood. Va lluitar a les batalles de Rocky Face Ridge, Resaca
, i Adairsville abans de ser ferit a la Batalla de l'Església de Nova Esperança el 27 de maig. Després de recuperar-se de les seves ferides, Reynolds va ser nomenat inspector general assistent del Districte de Geòrgia el 1865 fins al final de la guerra. Va ser alliberat condicionalment a Atenes, Geòrgia, el 8 de maig.