Вышедший из-под контроля сверхчеловеческий интеллект – наше обозримое будущее?

Вокруг светаHi-Tech

Бог из машины

Первый роман о захвативших мир разумных машинах был написан еще в XIX веке. Все следующее столетие фантасты пугали нас восстанием роботов. Но что, если вышедший из-под контроля сверхчеловеческий интеллект – уже обозримое будущее. Каким оно может быть?

Текст: Анатолий Глянцев

В 1993 году математик и писатель Вернор Виндж опубликовал статью «Грядущая технологическая сингулярность: как выжить в постчеловеческую эпоху». В ней он заявил: «Мы на грани перемен, сравнимых с появлением на Земле человека. Точная причина этих перемен заключается в том, что развитие техники неизбежно ведет к созданию сущностей с интеллектом, превышающим человеческий».

Виндж видел несколько путей к сверхразуму. Возможно, искусственный интеллект превзойдет человеческий. Или биологи научатся улучшать мозг и сращивать его с компьютером. Тогда сверхразумными станут сами люди – если, конечно, их все еще можно будет назвать людьми. А может быть, компьютерные сети и человеческое общество сольются в единый сверхразумный организм, где каждый отдельный мозг будет винтиком огромной системы.

Любой из этих сценариев изменит жизнь на Земле до неузнаваемости. «Такое событие аннулирует за ненадобностью весь свод человеческих законов, возможно, в мгновение ока», – пишет Виндж. Весь опыт прошлого окажется бесполезен, перемены станут молниеносными, непредсказуемыми и неуправляемыми.

Подобное состояние общества Виндж назвал сингулярностью, позаимствовав термин у физиков. В физике сингулярность – это состояние пространства и времени, в котором будущее теряет связь с прошлым и становится принципиально непредсказуемым.

Вернор Виндж (род. 1944 г.) – математик, писатель-фантаст и футуролог. Один из авторов идеи технологической сингулярности

Позже красивое слово подхватил Рэймонд Курцвейл и другие трансгуманисты. Для них сингулярность – это радикальное улучшение человеческой природы, обретение вечной молодости и сверхчеловеческих способностей. Эти киборги с чипами в мозге, улучшенной ДНК и ремонтными наноботами в артериях, безусловно, будут умнее нас. Но в целом они останутся людьми, только куда более могущественными и счастливыми. Сингулярность Курцвейла – это технологический Эдем, счастливый исход прогресса.

Виндж не разделяет подобного оптимизма. Он предупреждает: сверхразум будет кем угодно, только не человеком. «Натуральные» люди окажутся ему не нужны и не интересны. Вполне возможно, что наши личности растворятся и разрушатся в сверхразумных человеко-компьютерных сетях. Или «бог из машины» уничтожит нас – чтобы не путались под ногами или даже случайно, без злого умысла.

Алан Тьюринг, один из основоположников информатики, в 1950 г. высказал идею машины, которая становится умнее по мере обучения

Когда же появится сверхчеловеческий разум, несущий с собой грозную эпоху сингулярности? «Я удивлюсь, если это случится до 2005 года или после 2030 года» – пишет Виндж в 1993 г., и спустя десять лет не меняет своего мнения.

Теперь еще несколько дат. 2020 год. Ученые обучают нейронную сеть обманывать человека. Компьютер играет с пользователем в простенькую экономическую игру. Задача искусственного интеллекта – подтолкнуть игрока к бесполезному решению, создав иллюзию выгоды. Система преуспевает в этом в 70% случаев. Это обычная, не очень мощная нейросеть, очень далекая от полноценного разума. Одни программы пишут картины, другие переводят тексты, почему бы третьим не манипулировать людьми? Эксперимент показал, что ИИ способен этому обучиться. Умение не сложнее любого другого.

2023 год. Исследовательская группа OpenAI презентует нейронную сеть GPT-4. Перед запуском проверяют, не склонен ли ИИ размножаться, как компьютерный вирус. Удостоверяются, что нейросеть не нанимает людей через интернет и ничего им не поручает. Разумеется, систему никто не учил подобным вещам. Но что, если… она додумается до них сама? Ведь к «человеческим» экзаменам на профессиональные знания ее тоже никто специально не готовил. Однако нейросеть на равных конкурировала с людьми и даже превосходила их. «Мне кажется, что руководство OpenAI понимает, что AGI (искусственный интеллект, равный человеческому – прим. ред.) уже не за горизонтом, а на расстоянии одного условного «Манхэттенского проекта» или чуть больше. По мере движения к AGI деталей о таких проектах мы будем знать все меньше и меньше. Возможно, о релизе GPT 5 вы и вовсе не узнаете», – пишет в Telegram известный специалист по искусственному интеллекту Сергей Марков после релиза GPT-4.

Манхэттенский проект, как известно, продолжался шесть лет и закончился созданием атомной бомбы.

Тропа самосовершенствования

По мнению многих экспертов, самый опасный путь развития искусственного интеллекта – дать ему совершенствовать самого себя. Умная система будет становиться еще умнее, и так без конца. Процесс ускоряет сам себя, как снежная лавина или цепная реакция.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

По следам первопроходцев По следам первопроходцев

Следы эпохи Великих географических открытий – во всей нашей жизни

Вокруг света
Паузы в речи: как сделать из них инструмент для воздействия на собеседника Паузы в речи: как сделать из них инструмент для воздействия на собеседника

Как правильно использовать паузы в речи?

Psychologies
Бойня RAF Бойня RAF

В 1970-х RAF была одной из самых влиятельных террористических организаций

Дилетант
Москвичи остались дома: как модные магазины проиграли битву с Ozon и Wildberries Москвичи остались дома: как модные магазины проиграли битву с Ozon и Wildberries

Москвичи по итогам 2023 года стали реже посещать торговые центры

Forbes
Дочь Ра Дочь Ра

Клеопатре суждено было стать последней царицей относительно независимого Египта

Дилетант
Интересный факт! Ученые не стали скрывать вещество, которое сохранит чувство любви Интересный факт! Ученые не стали скрывать вещество, которое сохранит чувство любви

Что происходит в мозгу, когда мы видим кого-то, кого любим?

ТехИнсайдер
Мифы и факты: о чем умолчал Марко Поло Мифы и факты: о чем умолчал Марко Поло

Что Марко Поло упустил в своих рассказах

Вокруг света
TANK 300 прибавляет 450 TANK 300 прибавляет 450

Великолепие Tank 300 в том... что он не должен был появиться

4x4 Club
Тень Карафуто Тень Карафуто

Южная половина острова Сахалин исторически была тесно связана с японцами

Вокруг света
Инженеры разобрались с искривлением морковки в холодильнике Инженеры разобрались с искривлением морковки в холодильнике

Морковка в холодильнике изгибается из-за потери влаги

N+1
Человек улучшенный Человек улучшенный

Самые знаменитые предсказания и проекты усовершенствования человечества

Вокруг света
Как воспитывать «обычного» ребенка рядом с вундеркиндом Как воспитывать «обычного» ребенка рядом с вундеркиндом

Проблема воспитания одаренных детей — тема множества дискуссий

СНОБ
Слон Жюля Верна Слон Жюля Верна

Креативное продолжение фантазий Жюля Верна в путешествии по его родному городу

Вокруг света
«Настоящий мужчина»: 5 советов, как найти общий язык с партнером «Настоящий мужчина»: 5 советов, как найти общий язык с партнером

Как научиться видеть и принимать мужчину таким, какой он есть?

Psychologies
Установка соединения Установка соединения

Зачем сращивать мозг с компьютером?

Вокруг света
Воры времени: как вести себя с людьми, которые могут разговаривать часами напролет Воры времени: как вести себя с людьми, которые могут разговаривать часами напролет

Как отстоять границы в общении с ворами времени?

Psychologies
Ильич раздора Ильич раздора

Фреска Риверы, которая должна была воспевать бурный научно-технический прогресс

Вокруг света
Почему водители и пилоты сидят слева, а машинисты справа Почему водители и пилоты сидят слева, а машинисты справа

Почему в разных видах транспорта руль расположен с разных сторон?

ТехИнсайдер
И любимая подпись — «Ильич» И любимая подпись — «Ильич»

Маргарита Фофанова — одна из любимейших женщин Ленина

Дилетант
Сумчатые муравьеды перегрелись после десяти минут охоты на термитов в жару Сумчатые муравьеды перегрелись после десяти минут охоты на термитов в жару

Намбаты уязвимы перед глобальным потеплением

N+1
Английский Гитлер Английский Гитлер

Освальд Эрнальд Мосли известен советским людям по фильму «Обыкновенный фашизм»

Дилетант
12 российских сериалов последних лет, которые и вправду можно смотреть 12 российских сериалов последних лет, которые и вправду можно смотреть

Работники отечественного сериалостроения научились лучше писать и снимать

Maxim
Когда связи не рвутся Когда связи не рвутся

Что нужно сделать, чтобы мобильная связь была доступна везде

ТехИнсайдер
Практические вопросы: Нужно ли прогревать машину? Практические вопросы: Нужно ли прогревать машину?

Очередной вопрос о том, как долго нужно прогревать машину на холостом ходу

4x4 Club
Как научиться играть на гитаре быстро и без скуки Как научиться играть на гитаре быстро и без скуки

Как подойти к обучению на гитаре так, чтобы не терять задор и мотивацию?

ТехИнсайдер
6 орехов с сомнительной репутацией 6 орехов с сомнительной репутацией

Не все орехи одинаково полезны, а некоторые даже могут быть опасны!

ТехИнсайдер
Раз – и на Кузбасс Раз – и на Кузбасс

Кузбасс: уникальная природа Шерегеша и гостеприимство шорцев

Лиза
Угрозы Земле. Градации апокалипсиса Угрозы Земле. Градации апокалипсиса

В мифологических представлениях особое место занимают учения о конце света

Зеркало Мира
Бег на короткие дистанции: техника, противопоказания, советы экспертов Бег на короткие дистанции: техника, противопоказания, советы экспертов

Бег на короткие дистанции требует определенного уровня подготовки

РБК
Комиссия Аграната Комиссия Аграната

В ноябре 1973 года пришло время понять, как нападение оказалось столь внезапным

Дилетант
Открыть в приложении