<prompt> Skryf n voortsetting vir hierdie paragraaf - In 1813 het Ruffin met Susan Hutchings Travis van Williamsburg getrou. Die egpaar het verhuis na n plantasie wat Ruffin geërf het van sy naamgenoot-grootvader, by Coggins Point, langs die Jamesrivier in Prince George County, wat opgemerk is as die vertrekpunt van Benedict Arnold nadat hy lojaliteite geskakel het en in 1781 langs die Jamesrivier insluitend Richmond aangeval het. Hulle het elf kinders gehad voordat Susan Ruffin in 1846 gesterf het, hoewel die meeste sou sterf voordat die Amerikaanse Burgeroorlog geëindig het en hul vader selfmoord gepleeg het: Edmund Ruffin Jr. 1814-1875, Agnes Ruffin Beckwith 18161865, Julian Calx Ruffin 18211864, wat in die Slag van Drewrys Bluff gesterf het  <response>: , Elizabeth Ruffin Sayre 18211860, Rebecca Ruffin Bland 18231855, Jane Ruffin Dupuy 18291855, Charles Lorraine Ruffin 18321870; VMI-gegradueerde wat die oorlog oorleef het, Ella Ruffin 18321855, Ann Ruffin 18441863 en George Champion Ruffin 1845-1913. 