Reynolds continuò a comandare una brigata nell'esercito del Tennessee durante la campagna di Atlanta del 1864. Ha servito nella divisione di Stevenson del Corpo del tenente generale John Bell Hood. Ha combattuto nelle battaglie di Rocky Face Ridge,
Resaca, e Adairsville prima di essere ferito nella battaglia di New Hope Church il 27 maggio. Dopo la guarigione dalle ferite, Reynolds fu nominato assistente ispettore generale del distretto della Georgia nel 1865 fino alla fine della guerra. È stato rilasciato in libertà condizionale ad Atene, Georgia, l'8 maggio.