Ответный огонь немцы открыли уже на втором залпе нашего отряда. Как вспоминал командир "Баку" Беляев, вражеские пушки вели огонь беспламенными зарядами и "были видны только трассы полета снарядов... Наши корабли и конвой были как бы связаны светящимися линиями". Охотники открыли шквальный огонь изо всех стволов, включая даже 7,92-мм пулемет С/34 с UJ-1104. Целью был головной советский корабль. UJ-1105 начал сбрасывать дымовые буи, пытаясь прикрыть дымом остальной отряд. Следом в бой вступили тральщики, тоже стрелявшие по первому кораблю. Они обрубили тралы и увеличили ход до максимального. Минзаг отстреливался из своего главного калибра - полуавтоматических 37-мм пушек. Командир "Скагеррака", являвшийся одновременно и командиром отряда, приказал остальным кораблям под прикрытием дымзавес отходить к берегу, куда направился сам.
Носовые орудия эсминца "Разумный", 1946-1947гг.
Тральщик типа 1940 у побережья Норвегии
Пока тральщики избавлялись от своих громоздких тралов и маневрировали, советские корабли находились вне сектора обстрела их кормовых 105-мм орудий. Для тральщиков ведение огня было осложнено тем, на них имелось только по одному 1,5-метровому дальномеру. При резких сменах курса их приходилось перетаскивать с борта на борт, на что уходило много времени. Затем, когда тральщики повернулись к противнику кормой, на линии стрельбы находились охотники, и, кроме того, цель закрывали дымовые завесы. Сами тральщики тоже ставили дымы. В результате этого, самыми тяжелыми немецкими орудиями, участвовавшими в бою, оказались 88-мм пушки, имевшиеся по одной на каждом из охотников. Экипажи каждого из немецких кораблей, пожалуй, кроме минзага, предполагали, что достигли одного-двух попаданий в противника. Наблюдатели с разных кораблей видели либо дымление из надстроек у мостика, либо потерю скорости, либо то, что один советский корабль прикрывал другой дымовой завесой. Фактически же успешному ведению огня немецкими артиллеристами препятствовали те же факторы, что и у наших, пожалуй, за исключением плохой отработки экипажей. Тем не менее, несмотря на отсутствие попаданий, немецкая стрельба имела определенный результат.
Примерно между четвертым и пятым залпами "Баку" сигнальщики обнаружили всплески и разрывы снарядов по носу и корме корабля. "Видел два 2-орудийных падения у корабля, - уточнял ст. лейтенант Измайлов, - два из них имели темные столбы, один, который упал по носу корабля, имел белый цвет". В отчете командира БЭМ это характеризовалось уже как "большое количество накрывающих всплесков". При этом Колчин уверенно заявлял, что огонь по кораблям отряда вела береговая батарея с мыса Маккаур и, предположительно, еще одна с мыса Корснес. В результате, спустя 1 мин 45 сек с момента открытия огня, комбриг приказал лечь на курс 62° и увеличить ход до 400 оборотов. В качестве причины своего решения, помимо обстрела с берега, комбриг указал отход противника к берегу и то обстоятельство, что пеленг на цель составил уже 160° левого борта, а это исключало участие в бою носовых орудий. В результате после производства 11 залпов, "Баку" повернул в открытое море, и, получив в качестве помехи совершавший поворот последовательно "Разумный", примерно на полторы минуты прекратил стрельбу.
На мостике эсминца усиливалось чувство легкого недоумения действиями флагмана. Не получив ни одного указания за время боя, начштаба бригады теперь должен был повторить маневр выход из боя в тот момент, когда до уничтожения каравана было еще очень далеко. Обухов догадался, что "Баку" уже совершил торпедный залп, а его надежды на то, что лидер выведет его корабль в атаку с малой дистанции, оказались несбыточными. В какой-то момент Обухов и командир эсминца Федоров решили, что отряд повернет на обратный курс и возобновит атаку, в связи с чем приказали развернуть аппараты на правый борт. Однако задолго до того, как "Баку" лег на параллельный противнику курс, поворот был закончен. На минуту Обухов подумал было о том, чтобы продолжить поворот, догнать врага и выпустить торпеды, но как автор "Дополнительного боевого наставления", где говорилось о недопустимости разделения кораблей отряда, быстро отбросил эту мысль прочь. "Разумный" продолжил следовать за "Баку" и еще некоторое время вел огонь, целясь в одно из двух темных пятен (немецкие охотники), откуда пучком вылетали трассы.