Sa réputation a été entaché par sa défense répétée des personnes nommées corrompues, et par la première dépression économique de l'ère industrielle de la Amérique (appelée la "panique de 1873") qui a dominé son deuxième mandat.