Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Что такое фенхель, в чем его польза и вред: комментарий врача и рецепты Что такое фенхель, в чем его польза и вред: комментарий врача и рецепты

Фенхель — травянистое растение, но едят его как овощ

РБК
Что нас ждет в Новом году Что нас ждет в Новом году

Символом 2025 года станет Зеленая Змея. Как встретить таинственную хозяйку года?

Лиза
Следите за руками: как распознать популярные жесты Следите за руками: как распознать популярные жесты

Движения рук могут подчас рассказать о человеке больше, чем слова

Psychologies
Чем могли бы болеть принцессы Disney? Вот что скрывают знаменитые мультики! Чем могли бы болеть принцессы Disney? Вот что скрывают знаменитые мультики!

Болезни принцесс Disney: от болезней легких у Золушки до травм у Покахонтас

ТехИнсайдер
Председатель Магаданской областной думы: «Работаем ради результата и решаем поставленные вопросы» Председатель Магаданской областной думы: «Работаем ради результата и решаем поставленные вопросы»

Какие задачи стоят перед депутатами Магаданской областной думы?

ФедералПресс
Глобальное осушение: можно ли избежать войн за пресную воду Глобальное осушение: можно ли избежать войн за пресную воду

Спрос на пресную воду растет, а ее количество, похоже, уменьшается

Forbes
Вдова Вадима Спиридонова: «Думаю, он опередил свое время. Сейчас бы нашел применение своим задумкам» Вдова Вадима Спиридонова: «Думаю, он опередил свое время. Сейчас бы нашел применение своим задумкам»

Вдова актера Вадима Спиридонова — о том, каким он был в жизни

Коллекция. Караван историй
Океан белковых структур Океан белковых структур

Белки выполняют львиную долю той работы, которая необходима живым организмам

Наука и жизнь
Непоследний пациент Непоследний пациент

«13 клиническая. Начало»: история установления контактов генсеков с демонами

Weekend
Кошка — облигатный хищник. Чем ее кормить? Кошка — облигатный хищник. Чем ее кормить?

Как правильно составить рацион для своего домашнего тигра?

ТехИнсайдер
«Нет такого вопроса, на который у звезд не было бы правильного ответа» «Нет такого вопроса, на который у звезд не было бы правильного ответа»

Что нужно сделать, чтобы в 2025 году вам сопутствовала удача в делах

Добрые советы
«Грозы сии пойдут во славу России» «Грозы сии пойдут во славу России»

Ушаков не потерял в боях ни одного корабля, не потерпел ни одного поражения

Зеркало Мира
Выборочные инвестиции Выборочные инвестиции

Вложения в фонды акций за год выросли почти в пять раз

Деньги
Белорусский феномен Белорусский феномен

В июне в Минске прошла II Международная выставка индустрии безопасности

Обозрение армии и флота
Знакомьтесь, культуртрегер и галерист Кристина Сасонко Знакомьтесь, культуртрегер и галерист Кристина Сасонко

Кристина Сасонко руководит междисциплинарным арт-хабом Arts Square Production

Собака.ru
Об очередях и амбулаторных картах. Отрывок из книги «Пациентология» Об очередях и амбулаторных картах. Отрывок из книги «Пациентология»

Как устроена очередь в российской больнице

СНОБ
«Очень приличный император» «Очень приличный император»

Римский император Диоклетиан: тот, кто променял власть на капусту

Дилетант
Почему у одних самолетов крыло находится в нижней части фюзеляжа, а у других в верхней: 15 неочевидных причин Почему у одних самолетов крыло находится в нижней части фюзеляжа, а у других в верхней: 15 неочевидных причин

От чего зависит расположение крыльев у самолетов?

ТехИнсайдер
Жить в поиске Жить в поиске

Художница Любовь Попова: новатор в живописи, сценографии, промышленном дизайне

Дилетант
Маленькая выставка большого художника Маленькая выставка большого художника

Почему маленькая выставка и действительно ли большого художника?

Наука и жизнь
Грибоедов. Русская драма Грибоедов. Русская драма

«Гениальнейшей русской драмой» назвал «Горе от ума» А. Блок. Где же драма?

Знание – сила
За стенами: 10 российских художников уличной волны, которых стоит знать За стенами: 10 российских художников уличной волны, которых стоит знать

Десять знаковых российских художников с уличным бэкграундом

Правила жизни
Быстро, удобно и вкусно Быстро, удобно и вкусно

Прогноз развития food-сегмента до 2030 года

Агроинвестор
Де Голль — ставка на «зеро» Де Голль — ставка на «зеро»

Шарль де Голль: пятая республика, сильная власть, отставка правительства

Дилетант
Основу рациона палеоамериканки культуры Кловис составило мясо мамонтов Основу рациона палеоамериканки культуры Кловис составило мясо мамонтов

Биоархеологи проанализировали изотопный состав останков ребенка Anzick-1

N+1
Шаг за шагом до Европы Шаг за шагом до Европы

Как на спутнике Юпитера Европе будут искать внеземные организмы

ТехИнсайдер
«Собеседник на вашей стороне»: как преодолеть страх
при общении на иностранном языке «Собеседник на вашей стороне»: как преодолеть страх
при общении на иностранном языке

Как воспринимать общение на иностранном языке не как суд и пытку?

Forbes
Свет, который меняет город Свет, который меняет город

Почему светодизайн становится важным элементом градостроительства

СНОБ
Как создать пространство для партнерства после рождения ребенка: 4 простых упражнения Как создать пространство для партнерства после рождения ребенка: 4 простых упражнения

Как избежать угасания эмоциональной связи после рождения ребенка?

Psychologies
Взрывная техника Джона Перальты Взрывная техника Джона Перальты

Взрывные диаграммы легендарных приборов, механизмов и гаджетов прошлого

ТехИнсайдер
Открыть в приложении