Rugadh Henry Cavendish ar an 10 Deireadh Fómhair 1731 i Nice, áit a raibh a theaghlach ina gcónaí ag an am. Ba í Lady Anne de Grey, ceathrú iníon Henry Grey, 1ú Diúc de Kent, a mháthair, agus ba é Lord Charles Cavendish, an tríú mac de William Cavendish, 2ú Diúc Devonshire, a athair. Thrasnaigh an teaghlach a línte ar fud ocht gcéad bliain go dtí amanna Norman, agus bhí nasc dlúth aige le go leor teaghlaigh aristocratacha na Breataine Móire. Fuair máthair Henry bás i 1733, trí mhí tar éis breith a dara mac, Frederick, agus go gairid roimh an dara lá breithe Henry, ag fágáil an Tiarna Charles Cavendish chun a dhá mhac a thógáil.
1748 an t-am