Представление, будто сверхумные машины могут превзойти своих создателей и объявить им войну, зародилось не сегодня. В своей лекции в 1951 году Алан Тьюринг предсказал, что машины «перещеголяют людей с их ничтожными способностями» и в итоге возьмут власть. Американский математик и писатель-фантаст Вернор Виндж популяризовал эту идею и в 1983 году выдвинул концепцию «технологической сингулярности». «В скором времени мы создадим разум более мощный, чем наш собственный. Когда это произойдет, человеческая история достигнет своего рода точки сингулярности — перехода, столь же непостижимого, как и искривление пространства-времени в центре черной дыры, — и мир выйдет за пределы нашего понимания»{95}. Десять лет спустя он уточнил: «В течение ближайших 30 лет у нас появится техническая возможность создать сверхчеловеческий интеллект. Вскоре после этого человеческая эпоха будет завершена»{96}.
Бостром принял эстафету и продолжил бег. Благодаря широчайшим знаниям и умению найти общий язык с массовой аудиторией он стал одним из ведущих проповедников, вещающих об опасностях суперинтеллектуальных машин. Его книга «Суперинтеллект» выходит за рамки обычных мрачных пророчеств и детально объясняет (подчас наводя ужас), как и почему мы можем создавать машины гораздо умнее нас и по какой причине те могут в конце концов перестать нуждаться в людях.
Плодовитый изобретатель и футуролог Рэй Курцвейл со своей концепцией суперинтеллектуальных машин бежит в противоположном направлении. Его книга «Сингулярность уже близко» (2005) стала бестселлером. Как и в случае со многими предсказаниями, понятие «близко» подразумевает будущее, которое наступит достаточно быстро, чтобы мы его опасались, но не настолько скоро, чтобы воспринимать его как реальность. Курцвейл рисует почти утопический мир, в котором биологическая природа человека и нанотехнологии объединяются в сингулярность и начинают служить людям, позволяя им достичь чрезвычайно высокого уровня мышления и продолжительности жизни.
Ноэля Шарки больше занимает практическая сторона вопроса. Он разрабатывает этические нормы для использования автономных машин, особенно тех, которые он прямо называет роботами-убийцами. Мы близки к созданию дронов, способных самостоятельно спускать курок, поэтому уже сегодня должны предусмотреть и предотвратить вероятность дистанционных убийств. Фонд ответственной робототехники Ноэля Шарки также пытается обратить наше внимание на социальные последствия автоматизации и ее влияние на человеческую природу. «Настало время остановиться и подумать, каким будет наше технологическое будущее, прежде чем оно подкрадется и обрушится на нас», — говорит профессор. Очень важно, что такие предостережения звучат из уст человека уровня Шарки — ведущего мирового эксперта в области робототехники и исследований ИИ, поскольку это свидетельствует о том, что не все, кто говорит о необходимости сделать паузу, — луддиты и паникеры.
Как объяснил мне Шарки во время нашей встречи в Оксфорде в сентябре 2016 года, мы стоим на пороге революции в робототехнике буквально во всех областях, включая здравоохранение, образование, секс, транспорт, сферу услуг, охрану порядка и военное дело. Однако на государственном и международном уровне эту проблему явно игнорируют. «Кажется, все думают, что надо выждать так же, как было в случае с интернетом, — говорит Шарки. — Сегодня некоторые видные фигуры во все горло кричат о том, что ИИ захватит мир и уничтожит всех нас. Их предсказания вряд ли скоро сбудутся, но они поднимают облако пыли, скрывающее от нас насущные проблемы, с которыми мы можем столкнуться уже в ближайшее время. Пока еще искусственный интеллект остается довольно тупым и ограниченным вопреки всеобщему ажиотажу, но постепенно мы движемся к тому, чтобы позволить ему все больше контролировать нашу жизнь».
Фонд Шарки выступает за принятие международного закона о правах человека в технологическую эпоху, призванного определить и ограничить виды решений, которые могут приниматься машинами в отношении людей и взаимодействия людей с роботами. Это сразу заставляет вспомнить знаменитые три закона робототехники Айзека Азимова{97}, но в реальной жизни все обстоит гораздо сложнее.
Однажды я спросил у Эндрю Макафи, сотрудника Массачусетского технологического института и соавтора книг «Наперегонки с машиной» (2011) и «Вторая эпоха машин» (2014), что он считает самым большим на сегодняшний день заблуждением, связанным с искусственным интеллектом. Тот лаконично ответил: «Величайшее заблуждение — считать, что наши надежды на сингулярность или страхи перед суперинтеллектом вот-вот станут реальностью». Рассудительное и гуманистическое отношение Макафи к влиянию технологий на общество мне очень близко. Его прагматизм перекликается и с позицией эксперта в области машинного обучения Эндрю Ына, ранее работавшего в Google, а сейчас — в китайской компании Baidu. По меткому замечанию Эндрю, беспокоиться сегодня о сверхразумном злодейском ИИ — все равно что тревожиться о «проблеме перенаселенности на Марсе».