Valkoinen talo
Ennen Valkoisen talon rakentamista Yhdysvaltain presidentti oli asunut New Yorkissa ja Philadelphiassa. Ajatuksen Yhdysvaltain presidentin virallisesta asuintalosta esitti maan hallitus 1789. Seuraavana vuonna asunto säädettiin asuinpaikka-asetuksessa ("Residence Act"), joka määräsi liittovaltion pysyvän pääkaupungin perustamisesta. Kaupunki nimettiin Washingtoniksi ensimmäisen presidentin George Washingtonin mukaan.
Valkoinen talo
Rakennuksen nurkkakivi muurattiin 1792. Kahdeksan vuotta myöhemmin vuonna 1800 presidentti John Adams muutti vaimoineen taloon sen ollessa yhä keskeneräinen. Talo kalkittiin valkoiseksi vuonna 1798, jotta huokoisesta kivestä rakennetut seinät eivät jäätyisi. Myöhemmin seinät maalattiin valkoisiksi.