Aos 23 anos se casou com a afro-descendente Mattie Foley, que tinha sido escrava, e enfrentou problemas legais por conta das leis racistas da época em Ohio, as quais proibiam o casamento interracial.
aʊʒ vˈiŋtɨitɹˈeʒ ˈɐ̃nʊʃ sɨ kɐzˈow kˈom ɐ ˈafɹʊdˌɨseɪŋdˈeɪŋtɨ mˌɐtˈiɨ fulˈeɪ, kɨ tˌiɲɐ sˈidʊ ʃkɹˈavɐ, i ˌeɪŋfɹeɪŋtˈow pɹˌublˈemɐʒ lɨɡˈaɪʃ puɹ kˈoŋtɐ dɐʒ lˈeɪʒ ʁˌɐsˈiʃtɐʒ dɐ ˈɛpukɐ ˈeɪŋ ɔˈiʊ, ɐʃ kwˈaɪʃ pɹˌoɪbˈiɐ̃ʊ̃ ʊ kˌɐzɐmˈeɪŋtw ˌiŋtɨʁˌɐsiˈɑl.