Dina taun 1864 kulawargana ngabubarkeun alatan tumuwuhna alkoholisme Charles, sarta barudak éta samentara housed sakuliah Edinburgh. Dina taun 1867, kulawarga datang babarengan deui sarta cicing di apartemen tenement squalid di 3 Sciennes Place. bapa Doyle urang maot dina taun 1893, di Crichton, Royal Dumfries, sanggeus sababaraha taun panyakit jiwa. dirojong ku uncles jegud, Doyle ieu dikirim ka Inggris, di sakola preparatory Jesuit Place Hodder, di Lancashire. bapana, Charles Altamont Doyle, lahir di Inggris, tina turunan Katolik Irlandia, sarta indungna, Mary (née Foley), ieu Katolik Irlandia. kolotna nikah dina 1855. Dina 1864 kulawarga dispersed alatan alkoholisme tumuwuh Charles urang, sarta barudak anu samentara housed sakuliah Edinburgh.
Crichton Royal, Dumfries,