Вскоре известия о беспорядках на островах достигли Лондона, и граф Карлайл решил подыскать губернатору Невиса замену. Узнав об этом через своих друзей, Хилтон спешно снарядил корабль, набил его трюмы табаком и, оставив своим заместителем капитана Валетта, летом 1629 года отплыл в Англию. Возможно, его попытки подкупить лорда-собственника увенчались бы успехом, если бы свежие новости из Вест-Индии не спутали ему все карты.
7 сентября 1629 года к Невису подошел испанский флот, состоявший из 24 военных галеонов и 15 фрегатов (французский иезуит Шарлевуа приводит иные цифры: 35 больших галеонов и 14 вооруженных торговых судов). Возглавлял эту армаду генерал дон Хуан Фадрике де Толедо. На рейде острова стояли 10 кораблей, которые испанцы тут же объявили пиратскими. Команды кораблей в лихорадочной спешке попытались сняться с якорей и улизнуть, но Фортуна отвернулась от них — спастись удалось только двоим (заметим, что, по данным Шарля де ла Ронсьера, испанцы захватили у Невиса 7 английских судов, а по данным Шарлевуа — лишь 4, упустив пятое; последнее бежало на Сент-Кристофер, под прикрытие пушек форта, которым командовал нормандский корсар Урбэн де Руассей).
Приблизившись к берегу, испанские корабли неожиданно попали под артиллерийский обстрел со стороны небольшого форта, возведенного на мысе Пеликана и вооруженного лишь двумя дряхлыми пушками. В «Рассказе Джона Хилтона, кладовщика и главного пушкаря Невиса», сообщается, что английский форт «вел огонь до тех пор, пока имелись ядра и порох». Особенно досталось галеону «Хесус Мария», застрявшему на мели как раз напротив форта. На помощь к нему подоспел капитан Антонио де Окендо, который, став рядом с ним на якорь, высадил на берег десант и заставил английский гарнизон капитулировать.
Колонисты, вручив Джону Хилтону (брату отсутствующего губернатора) белый флаг, отправили его на переговоры с испанским генералом. Дон Фадрике заявил, что, будучи христианином, не желает кровопролития и готов предоставить в распоряжение англичан несколько судов для возвращения их в Европу. Это предложение было с радостью принято, и на следующий день испанский флот, прихватив четырех заложников, отплыл в сторону Сент-Кристофера. Местные плантаторы — и англичане, и их соседи-французы — сдались испанцам на тех же условиях, что и жители Невиса. А те, кто не пожелал сдаться, бежали в лес и на соседние острова.
Около 80 беглых французов — в основном выходцев из Нормандии, — посетив северное побережье Эспаньолы, решили обосноваться там и на соседней Тортуге. Отрывочные сведения о них содержатся в отчете об экспедиции Филиппа де Ротонди, сеньора де Каузака, отправленной кардиналом Ришелье на Антильские острова в июне 1629 года. Не имея достаточно сил для противодействия армаде дона Фадрике, Каузак в конце сентября увел свою небольшую эскадру с Малых Антильских островов в сторону Эспаньолы, к мысу Тибурон. 26 октября он встретил возле мыса Сан-Николас группу французских пиратов, которые признались, что захватили в окрестных водах небольшое испанское судно. Один из кораблей де Каузака, 250-тонный паташ «Сент-Мари», зашел на Тортугу, где пополнил запасы питьевой воды, в то время как команды флагманскою корабля «Труа Руа» и «Нотр-Дама» 29 октября высадились на соседнем берегу Эспаньолы, в районе Пор-Франсэ, чтобы поохотиться на одичавших быков, коров и свиней.
В начале ноября, когда эскадра встала на якорь в укромной гавани Пор-Марго, моряки повстречали там некоего Жана Кра-мойе из Гавра Этот бродяга жил на берегу, «не имея хлеба или иной провизии для своего пропитания». С его слов стало известно, что в тех краях обитала еще одна группа французов, ожидавшая прихода корабля некоего Франсуа Руйяна.
Примерно через два месяца после ухода эскадры де Каузака на Тортуге высадился отряд англичан, которым командовал упоминавшийся выше капитан Энтони Хилтон.
Обанкротившийся в результате уничтожения его плантации и не добившийся нового кредита у своего делового партнера Литтлтона, Хилтон вернулся на остров Невис лишь для того, чтобы собрать таких же нищих, как он, авантюристов и попытаться найти удачу в иных местах. Его знакомство с пиратами различных национальностей помогло ему остановить свой выбор на острове Тортуга, куда он и прибыл в начале 1630 года во главе примерно 150 изгоев. Поскольку англичан было почти в два раза больше, чем французов, они заявили свои права на владение островом и избрали губернатором капитана Хилтона.