Kahden epäonnistuneen retken jälkeen herttua kääntyi omille ihmisilleen. Kapteeni Otto Stiel, kurlantilainen, joka oli aiemmin vieraillut Gambiassa, nimitettiin sen kuvernööriksi ja St. Andrew's Islandin komentajaksi. Vuonna 1658 ruotsalainen palkkasotilas vangitsi Kurlan herttuan ja hänen perheensä.
, ja viestintä Courlandin ja St Andrew's Islandin välillä katkaistiin noin kahdeksi vuodeksi. Tämän seurauksena Alankomaiden Länsi-Intian yhtiö teki sopimuksen herttuan edustajan Hollannissa, Henry Momberin kanssa, jonka mukaan he toimittaisivat uudelleen St Andrew's Islandia, mutta sen seurauksena sallitaan ottaa se haltuunsa. Momber suostui ilman herttuan ohjeita. Hollantilaiset lähettivät sotilaiden aluksen saarelle valloittamaan sen. Stiel vastusti, mutta kun he saivat tietää, että Hollannin Länsi-Intian yhtiö takaisi heille palkansa, varuskunta kapinoi ja palasi Hollantiin aluksella, joka oli tuonut uuden varuskunnan.