1813an, Ruffin eta Susan Hutchings ezkondu ziren. Bikotea, Ruffinek bere aitonaren oinordetzan jaso zuen plantaziora joan zen bizitzera, Coggin's Point-era, James ibaiaren ertzean, Prince George konderrian, eta Benedict Arnold-en abiapuntu bezala nabarmendu zen, 1781ean leialtasunak aldatu eta James ibaiaren ertzean (Richmond barne) eraso egin ondoren. Hamaika seme-alaba izan zituzten Susan Ruffin 1846an hil aurretik, nahiz eta gehienak gerra zibila amaitu eta aita suizidatu aurretik hilko ziren: Edmund Ruffin Jr. (1814-1875), Agnes Ruffin Beckwith (1816<unk>1865), Julian Calx Ruffin (1821<unk>1864, Drewry's Bluff-eko guduan hil zena
), Elizabeth Ruffin Sayre (1821<unk>1860), Rebecca Ruffin Bland (1823<unk>1855), Jane Ruffin Dupuy (1829<unk>1855), Charles Lorraine Ruffin (1832<unk>1870; gerratik bizirik atera zen VMIko graduatua), Ella Ruffin (1832<unk>1855), Ann Ruffin (1844<unk>1863) eta George Champion Ruffin (1845-1913).