Gardnerrek James Madisonekin batera Filadelfiara bidaiatu zuen 1780an, Madison Kontinentearen Kongresuan ari zela.
-Ez da izango. Madisonek 1782an diru gutxi zuen, baina filosofia liburuak eskuratu nahi zituen, Thomas Hobbesen "Leviathan"a barne. Liburu horiek erosteko, Gardnerri saltzea pentsatu zuen haiek erosteko. Pensilvaniako legeak ez zuen hori onartuko. Urte hartan, Gardnerrek ere ihes egiten saiatu zen, baina atxilotu egin zuten.