Nel 1737 De La Warr fu nominato governatore di New York e New Jersey. Tuttavia, non ha mai viaggiato in America. Continuò la sua carriera militare mentre era attivo nella Camera dei Lord e combatté nella battaglia di Dettingen.
nel 1743 durante la guerra di successione austriaca. Il 30 agosto 1737 fu nominato colonnello della 1a truppa di guardie a cavallo, incarico che mantenne fino alla sua morte. Divenne brigadiere generale nel 1743, maggiore generale nel 1745, tenente generale nel 1747 e generale di cavalleria nel 1765. Nel 1752 fu nominato governatore di Guernsey, incarico che ricoprì fino alla sua morte. Nel 1761 Giorgio III lo creò Visconte Cantalupe e Conte De La Warr.