Com l'Exèrcit de la Unió sota el Major General William T. Sherman va començar a avançar a Geòrgia el maig de 1864, el governador de Geòrgia Joseph E. Brown va nomenar Carswell general de brigada de la milícia de Geòrgia. Carswell va dirigir la 1a Brigada de la milícia de Geòrgia en oposició a l'Exèrcit de la Unió sota Sherman durant la Campanya d'Atlanta i la Marxa de Sherman al Mar. La brigada va lluitar a la batalla de Ruff's Station, ara Smyrna, Geòrgia el 4 de juliol de 1864, la batalla d'Atlanta
el 22 de juliol de 1864 i durant el posterior setge d'Atlanta fins a la caiguda de la ciutat el 2 de setembre de 1864.