Charles Altamont Doyle ingelesez jaio zen, irlandar jatorri katolikoa, eta bere ama, Mary (née Foley), irlandar katolikoa zen. Gurasoak 1855ean ezkondu ziren. 1864an, familia sakabanatu egin zen Charlesen alkoholizismoa handitu zelako, eta haurrak aldi baterako Edinburgora joan ziren. 1867an, familia berriro elkartu zen eta etxebizitza txiroetan bizi izan ziren 3 Sciennes Plazan. Doyleren aita 1893an hil zen, Crichton Royal Dumfries-en, urte askotan gaixotasun psikiatrikoak izan ondoren. Osaba aberatsek lagundu ondoren, Ingalaterrara bidali zuten, St Hodder Place-ko jesuiten prestakuntza eskolara, Lancashire-n.
1859ko maiatzaren 22a