Scrivi una continuazione per questo paragrafo - Emigrò in Argentina nel luglio del 1862. Quando il presidente-maresciallo Solano Lopez del Paraguay invase la provincia di Corrientes nel 1865 scoppiò la Guerra della Triplice Alleanza e Kyle si unì al corpo medico dell'esercito argentino come farmacista con il grado di tenente. Ha partecipato all'assedio dell'Uruguaiana (dove i difensori sono stati ridotti a vivere di zucchero a pezzi), alla battaglia di tre giorni del Boquerón e alla battaglia di Tuyutí.
, la più sanguinosa battaglia internazionale nella storia del Sud America. Servì a bordo della nave ospedaliera Pavón e tornò a Buenos Aires nel dicembre 1866 a capo di un convoglio di soldati feriti. Le sue esperienze di guerra lo portarono a prendere un interesse fondamentale per la Società della Croce Rossa Argentina, di cui divenne membro onorario nel 1896.