En 1808, le château fut choisi par Napoléon comme résidence des Princes d'Espagne en exil. Ferdinand d'Espagne, son frère Don Carlos et son oncle Don Antonio ne quittèrent Valençay qu'en 1814 après avoir signé un traité réglant l'affaire d'Espagne.