Ободренный известием о том, что его брат Франсиско жив, Эрнан расстался с мыслью достичь побережья и вместо этого решил, что ему и его отряду следует попытаться сокрушить инкское восстание одним храбрым ударом. Шпионы-янаконы информировали Эрнана о том, что Манко Инка перенес свою штаб-квартиру в Оллантайтамбо, находящийся в 30 милях к северо-западу от Куско. Если Эрнан сможет пленить или убить императора, то будет нанесен удар по движущей силе восстания. Тогда можно будет посадить на трон кузена Манко, Паскака, продолжавшего сражаться на стороне испанцев. Оставив 50 пехотинцев держать оборону Саксауамана и еще 40 в городе, Эрнандо повел отряд, состоящий из 70 кавалеристов и 30 пехотинцев, за пределы города. Цель Эрнана была простая: захватить или убить лидера национального восстания — самого Манко Инку.
Эрнан со своим отрядом добрался до узкой долины Юкай и далее проследовал вдоль по течению протекающей по ней реки. В процессе продвижения испанцам приходилось пять или шесть раз пересекать реку вброд. Долина все более сужалась. Сопровождавшие испанцев индейцы неожиданно остановились и стали на что-то показывать. На вершине огромного отрога, выступавшего из каменной стены долины, как контрфорс, испанцы увидели храм-крепость Оллантайтамбо. Педро Писарро вспоминал:
«Когда мы подъехали, мы обнаружили [Оллантай]тамбо настолько хорошо укрепленным, что это произвело на нас впечатление ужаса, — это совершенно неприступное место с очень высокими террасами и очень большими и хорошо укрепленными стенами. Оно имеет только один вход, расположенный напротив очень крутого холма. И… [на холме] стояло множество воинов с валунами, и они готовы были их сбросить, как только испанцы осмелятся войти в крепостные ворота».
Испанцы стояли пораженные видом высоких стен и десятков тысяч туземных воинов, стоящих на огромных, расположенных в шахматном порядке террасах, которые поднимались к командному центру крепости. Вскоре испанцы заметили, что рядом с инкскими воинами находились индейцы из другой племенной группы. Это было племя антис, обитавшее в лесистых областях на востоке.
Испанцам раньше уже приходилось встречаться с тем, что инки включали амазонских воинов в свою армию, но сейчас конкистадоры с удивлением обнаружили, сколь большое число этих туземцев присутствовало здесь. В отличие от обитателей Анд многие антис раскрашивали свои лица красками. Когда испанцы подъехали слишком близко к крепостным стенам, множество стрел с заостренными бамбуковыми и пальмовыми наконечниками поднялось в воздух. Эрнан вскоре обнаружил, что антис стреляют из луков очень метко.
Писарро подъехал для разговора к одному седовласому конкистадору. Один очевидец писал:
«Эрнан… сказал пожилому человеку, рядом с которым он находился: „Ну что ж, молодые не отваживаются приблизиться и что-либо сделать, так давай мы, старики, прощупаем индейскую оборону“. И он взял седовласого человека с собой, и они помчались к стенам, — пиками они проткнули двух индейцев. Было удивительно видеть тот водопад стрел, который сыпался на них, когда они возвращались назад, и слышать весь тот рев [индейцев]».
Такие качества Эрнана, как высокомерие, жадность и эгоизм, сделали его непопулярным в среде испанцев, однако никто не мог обвинить его в трусости. Продемонстрированная им сейчас редкая храбрость заставила остальных испанцев устыдиться, и несколько молодых всадников пришпорили своих лошадей и попытались достичь ведущих в крепость ворот, которые индейцы заложили камнями. Но туземные воины в мгновение ока отразили атаку, как писал Педро Писарро, они «бросали вниз столько валунов и запускали столько камней из пращей, что если бы там нас, испанцев, было даже намного больше, они бы убили нас всех». В ходе этой первоначальной стычки воины Манко убили большое число индейских сподвижников испанцев и ранили нескольких конкистадоров.
Солдатам Эрнана пришлось отступить и произвести перегруппировку, воины Манко в это время начали спускаться с крепости, с тем чтобы начать преследование испанцев. «У индейцев, есть одна особенность, — вспоминал Педро Писарро, — когда победа на их стороне, они гонятся за тобой, словно демоны, когда же им приходится убегать, они ведут себя, как мокрые курицы. Поскольку на этот раз победа сопутствовала им, они преследовали нас с огромной решимостью». Испанцы обнаружили, что особенно яростно атаковали амазонские лучники: «В инкской армии было множество… [амазонских туземцев], которые не знают, что значит бежать, — писал один испанец, — они продолжают выпускать стрелы, даже когда смертельно ранены».