Ord nacque a Cumberland, Maryland, figlio di James e Rebecca Ord. La tradizione familiare faceva di James Ord il figlio illegittimo di Giorgio IV del Regno Unito e Maria Fitzherbert, ma sembra probabile che fosse figlio di Ralph Ord, battezzato a Wapping, Middlesex, nel 1757, figlio di John Ord, un fattore (agente) di Berwick-upon-Tweed. Edward Ord era considerato un genio della matematica e fu nominato all'Accademia Militare degli Stati Uniti dal presidente Andrew Jackson. Il suo compagno di stanza a West Point era il futuro generale William Tecumseh Sherman. Si laureò nel 1839 e fu nominato sottotenente nella 3a artiglieria degli Stati Uniti. Ha combattuto nella seconda guerra Seminole.
in Florida e fu promosso primo tenente.