Si Cowdery iminundag kan Oktubre 3, 1806 sa Wells, Vermont.  An saiyang ama, si William, sarong paraoma na naglipat kan saiyang pamilya sa Poultney, Vermont kan si Oliver tolong taon pa sana.  Si William Cowdery nagin parasunod kan sarong lider nin sekta na si Nathaniel Wood kan Middletown, Vermont, na an sadit na relihiyosong sektang ini, an “Mga Bagong Israelitas”, nag-uutob nin pagpapabanal para sa nakalubong na kayamanan asin para sa kapahayagan na katuyuhan.