Γεννηθείς στο μικρό χωριό Theuley-les-Lavoncourt της ανατολικής Γαλλίας, στις 14 Οκτωβρίου 1873, ο Ριμέ ήταν γιος παντοπώλη με περιορισμένα οικονομικά.
Born in the small village of Theuley-les-Lavoncourt in eastern France on October 14th 1873, Rimet was the son of a grocer of modest means.