Одному из призов — «Луизе Гатч», груженной кардифским углем, Семс был особенно рад. Планировавшаяся вторая встреча с «Агриппиной» не состоялась, а уголь «Алабаме» требовался позарез. Попытались загрузить уголь с «Луизы Гатч» в океане. Однако все попытки оказались безрезультатными. Шлюпки с углем с шедшей на буксире «Луизы Гатч» подтягивали к «Алабаме». При этом ход приходилось стопорить: стоило дать ход снова, как буксир рвался. Надо было его заводить заново. На это уходила масса времени и сил, поэтому от затеи загрузиться углем в океане пришлось отказаться. Решили идти к острову Фернанду-ди-Норонья. «К рассвету мы были от него милях в 38 или 40, но уже увидели его пик. В 2 1/2 часа пополудни пришли на якорное место и отдали якорь. Приз поставили рядом. В коммерческом отношении Фернанду-ди-Норонья занимает самое ничтожное место среди других уголков Земли. Суда его посещают редко, хотя мимо проходят очень многие. Это крутая живописная скала среди океана. Одета она роскошной зеленью. Вершина горы главного острова обстроена маленькими фермами... Но как же здесь жарко! После сумерек подтянул приз к борту и начал погрузку угля».
Странно, но остров, принадлежащий Бразилии, которая не признала Конфедеративные Штаты, оказал «Алабаме» всяческое внимание и гостеприимство: «Губернатор известил меня, что я могу взять с берега мяса, свежей свинины, кур и проч.». То ли сказывалась его удаленность и затерянность в океане, то ли то, что губернатору — бывшему майору бразильской армии, сосланному сюда за какие-то провинности, очень уж было скучно на острове с населением 2 тыс. человек, тысяча из которых были ссыльными. На погрузку угля ушло несколько дней. Интересно, что попытка продать приз после его разгрузки за очень низкую цену — 20 тыс. долларов — так и не удалась: «Мне ответили, что столько денег не набрать на всем острове». Надо отметить, что гостеприимством губернатора Рафаэль Семс явно злоупотреблял. Свою стоянку на острове он использовал для неоднократных набегов на проходящие мимо суда. Не случайно губернатор провинции Пернабуку, в которую входил и Фернанду-ди-Норонья, для обеспечения нейтралитета Бразилии вынужден был вскоре отправить на остров три военных судна. «Алабаме» же после оставления на берегу 140 пленных было приказано покинуть остров в течение 24 ч. «В 9 1/2 утра 22 апреля мы снялись с якоря и взяли курс на Багию, куда пришли 11 мая. По пути взяли в плен и сожгли еще 4 судна». Одним из призов, попавшихся всепожирающей «Алабаме», оказался китобойный барк из Нью-Бедфорда. «Одиннадцать месяцев тому назад он вышел в море и в течение всего этого времени никуда не заходил. За целых три месяца до спуска «Алабамы» это маленькое судно уже рассекало волны и собирало продукты, которые теперь как нельзя более способствовали его сожжению. Утомительное плавание и какой грустный исход!» — такая запись появилась в дневнике Семса.