Бой продолжался все отведенные на него 10 раундов, и, когда наконец прозвучал финальный гонг, было неясно, кого объявят победителем. Когда рефери поднял руку Фрезера, довольных этим решением было примерно столько же, сколько и недовольных, как всегда в подобных случаях.
Нелегким получился и следующий бой Фрезера с опытнейшим Эдди Мэкеном, который и Листону проиграл только по очкам, когда все остальные заканчивали бои со страшным Сан-ни в горизонтальном положении. С Фрезером Мэкен добился того же результата, но публика осталась не слишком довольна метящим в настоящие звезды Джо.
Следующий, 1967 год был для Фрезера очень удачным. В числе прочих он нокаутировал Дата Джонса в шестом раунде, а также победил техническим нокаутом в четвертом раунде Джорджа Чувало. Рефери остановил встречу из-за сильнейшего рассечения у канадца в области глаза.
Тем временем разразился скандал в связи с отказом Мохаммеда Али надевать военную форму, и трон чемпиона мира в тяжелом весе впервые с 1928 года оказался вакантным. Как и тогда, различные чиновники от бокса никак не могли прийти к единому решению, кого же считать настоящим чемпионом мира в этой ситуации, и мнения разделились.
4 марта 1968 года в бою с Бастером Матисом Фрезер завоевал абсурдный титул чемпиона мира по версии штата Нью-Йорк. Однако самым главным в этом поединке было одно: он рассчитался со своим старым обидчиком, которому проиграл предолимпийские отборочные соревнования. А в конце этого года Джо встретился с Оскаром Бонавеной и на этот раз куда более убедительно победил его по очкам в 15-раундовом бою.
В 1969 году Джо провел три боя. Самым главным из них был с Джерри Кворри. Снова на ринге сошлись два боксера остро-атакующего плана, и победил сильнейший: в седьмом раунде рефери остановил встречу и зафиксировал победу Фрезера техническим нокаутом.
Всемирная боксерская ассоциация (WBA), формально тогда главная сила в мировом боксе, уже имела своего чемпиона. Им стал великолепный технарь Джимми Эллис, когда-то начинавший в том же спортзале, что и Кассиус Клей. Объединительный бой между двумя «получемпионами» состоялся 16 февраля 1970 года. Техника не спасла Эллиса ни от напора Фрезера, ни от его левого хука. Первые три раунда прошли еще туда-сюда, однако все же с преимуществом Фрезера, а в четвертом раунде Джо провел длинную серию ударов, последним из которых был короткий левый хук, после которого Эллис упал. Он встал и продолжил бой. Джимми пошел на обмен ударами на средней дистанции, пытаясь таким образом лишить Фрезера пространства, чтобы нанести свой коронный длинный левый боковой, но ему это не удалось. Левая рука Фрезера просвистела в воздухе и обрушилась на челюсть Эллиса как ракета. Джимми упал, и почти тут же раздался гонг. Эллис встал и отправился в свой угол, однако на пятый раунд он выйти все равно не смог. Эллиса после этого пост-фактум нарекли «бумажным чемпионом мира», так как свой титул по версии WBA, который он проиграл Джо, он завоевал не в бою. Что касается Фрезера, то он наконец-то стал официальным, хотя и необщепризнанным чемпионом мира в тяжелом весе. Признание могла принести только победа над Мохаммедом Али, но тому все никак не возвращали боксерскую лицензию.
Признать Фрезера публике мешало и его необычное хобби. Джо увлекался рок-музыкой и организовал группу «Нокауты», которая выступала по ночным клубам. Музыкальные способности у него были, мягко говоря, сомнительные. Конечно, Али к тому времени приучил публику к тому, что «второй человек после президента» может вести себя как шут гороховый, однако он должен был делать это с размахом, как Али, а Фрезер делал это жалко и к тому же относился к своему хобби слишком серьезно. Вскоре он прогорел вместе со своим ансамблем, и проблема решилась сама собой.
Когда в ноябре 1970 года Фрезер нокаутировал во втором раунде чемпиона мира в полутяжелом весе Боба Фостера, Мохаммед Али уже вернулся на ринг, и многие сочли, что отныне чемпионом является только он. Не в характере Фрезера было уклоняться от боя, тем более что Али делал все от него зависящее, чтобы их встреча наконец произошла. Джо не питал никаких теплых чувств к Мохаммеду, но согласился на пару с ним разыграть сцену у своего тренировочного зала в Филадельфии, куда Али заявился с целой толпой почитателей. Их поединок был неизбежен, и потому он состоялся.
Страна в превкушении боя разделилась надвое. Все, кто протестовал против войны во Вьетнаме, классических американских ценностей и неизвестно чего, но все равно протестовал, были за Али. А все традиционалисты были, естественно, за Фрезера, который, по злой иронии судьбы, стал знаменем тех, чьи взгляды он в значительной степени не разделял. Усугубляло ситуацию еще и то, что Мохаммед Али, как это с ним часто случалось, перегнул палку и, в частности, назвал Фрезера Дядей Томом. Тогда это прозвище играло роль позорного ярлыка, который навешивали на всех негров, уклонявшихся от активной борьбы за свои права. В частности, некоторые горячие головы прозвали Дядей Томом и Джо Луиса. Что касается Фрезера, то он стал регулярно получать по почте письма, в которых представители самых разных экстремистских течений, по большей части негритянских, угрожали ему смертью. Фрезер всячески пытался отмежеваться от многих своих непрошеных союзников, но те, кто не хотел его слышать, не слышали. В результате Джо возненавидел Али на всю жизнь.
Бой состоялся на самой престижной арене Америки, в нью-йоркском Медисон-сквер-гардене, 8 марта 1971 года. Все билеты были распроданы за месяц, несмотря на рекордно высокие цены. Страна буквально замерла в ожидании этого события, и, надо сказать, оно эти ожидания полностью оправдало.
Те, кто полагал, что Мохаммед Али не сможет вернуть себе былую скорость передвижения по рингу, сколько бы ни тренировался, оказались правы. Он был таким же, как и в боях с Квор-ри и Бонавеной. Однако, как ни странно, Али и не пытался ускользнуть от Фрезера. Он пытался удерживать низкорослого Джо на дистанции, не смещаясь во все стороны одновременно, как он делал раньше. Скорее всего, еще во время тренировок Али понял, что прошлого не вернуть и придется драться по-новому.
Скорее всего, выбрав после возвращения на ринг в соперники Кворри и Бонавену, Али решил исподволь подготовиться к бою с Фрезером. Невысокие, мощные слагтеры, как называют в Америке бойцов остроатакующего плана (от to slug — сильно ударить), во многом походили на Фрезера, однако были все-таки классом ниже его. В боях с ними «новый» Али пропускал довольно много ударов в ближнем бою. Во встрече с Фрезером случилось то же самое, но с другим результатом.
Джо придерживался традиционной тактики борьбы с более высоким противником, когда-то с большим успехом использованной Рокки Марчиано: он много бил по корпусу, изматывая соперника и заставляя его опускать руки, а потом переходил на атаку по голове. Ему было нужно открыть челюсть Али под свой левый хук, но Мохаммед ждал этого, так как ему было нетрудно рассчитать еще до боя, что именно будет делать Фрезер.
Первые пять раундов прошли в относительно равной борьбе, когда ни одному из соперников не удавалось достичь чего-то существенного, однако в шестом раунде для Али прозвучал первый по-настоящему тревожный звонок. Фрезер прижал его к канатам и провел мощную атаку по корпусу и по голове, которую Мохаммед не смог сдержать и на которую не смог достойно ответить, хотя перед боем обещал нокаутировать Фрезера именно в шестом раунде.