Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

8 легких способов повысить уровень дофамина 8 легких способов повысить уровень дофамина

Когда вырабатывается дофамин? Как увеличить его количество в организме?

Psychologies
Эмоциональное обслуживание: почему вы им занимаетесь и как это влияет на вашу жизнь Эмоциональное обслуживание: почему вы им занимаетесь и как это влияет на вашу жизнь

Как часто вы полностью меняете свои планы ради родных или друзей?

Psychologies
Сон с младенцем Сон с младенцем

Что лучше: спать в одной кровати с младенцем или раздельно?

Здоровье
Почему у одних самолетов крыло находится в нижней части фюзеляжа, а у других в верхней: 15 неочевидных причин Почему у одних самолетов крыло находится в нижней части фюзеляжа, а у других в верхней: 15 неочевидных причин

От чего зависит расположение крыльев у самолетов?

ТехИнсайдер
Во имя отца и сына Во имя отца и сына

Эволюция российских пап

Men Today
Резерв на будущее Резерв на будущее

Как развиваются технологии хранения энергии

РБК
Строительство нового жилья: «Судьба льготной ипотеки определит будущее отрасли» Строительство нового жилья: «Судьба льготной ипотеки определит будущее отрасли»

Как можно ускорить строительство новых многоквартирных домов?

ФедералПресс
Окно в Сибирь Окно в Сибирь

Сибирь: чем так притягивает туристов этот суровый край?

Лиза
Деликатный вопрос Деликатный вопрос

Все, что ты хотела знать об интимной пластике, но стеснялась спросить

Лиза
Игра на контрастах: как развивается рынок цветных драгоценных камней Игра на контрастах: как развивается рынок цветных драгоценных камней

Как добывают редкие цветные драгоценные камни и в чем их ценность?

Forbes
Знакомьтесь, культуртрегер и галерист Кристина Сасонко Знакомьтесь, культуртрегер и галерист Кристина Сасонко

Кристина Сасонко руководит междисциплинарным арт-хабом Arts Square Production

Собака.ru
Целую, береги себя Целую, береги себя

Новый год в трогательных воспоминаниях

Новый очаг
«Нет причин не продлить нашу жизнь до 200 лет и даже до 1000» «Нет причин не продлить нашу жизнь до 200 лет и даже до 1000»

Как мировая наука и бизнес борются со старением

РБК
«Заткнись ради команды»: биатлонистки рассказали о сексуальном насилии в сборной «Заткнись ради команды»: биатлонистки рассказали о сексуальном насилии в сборной

Почему в сборной США по биатлону процветало сексуальное насилие?

Forbes
Вытер в голове Вытер в голове

Что не так с нашей психикой?

Men Today
Разумом, молотком, пистолетом Разумом, молотком, пистолетом

Какими приспособлениями пользуются полевые исследователи

ТехИнсайдер
Власть тайной азбуки Власть тайной азбуки

История развития криптографии

Знание – сила
Для всех и каждого Для всех и каждого

Современный и эргономичный интерьер в компактной евротрешке

Идеи Вашего Дома
Перелет–2020. От Санкт-Петербурга до Владивостока на мотопараплане Перелет–2020. От Санкт-Петербурга до Владивостока на мотопараплане

Перелет через 23 региона России за 69 дней на мотопараплане

Наука и техника
HR-директор — об инвестициях в людей и трендах кадровой политики HR-директор — об инвестициях в людей и трендах кадровой политики

Как ставка на человекоцентричность меняет HR-политику современных компаний

ФедералПресс
Время чудес Время чудес

Молодые актеры о веселых и трогательных воспоминаниях нового года

Grazia
Что такое движение «Ни-ни», и почему оно набирает обороты Что такое движение «Ни-ни», и почему оно набирает обороты

Почему каждый пятый зумер в мире не хочет работать?

Psychologies
Залечь на дно в Белфасте Залечь на дно в Белфасте

«Ничего не говори»: история ирландских террористов, рассказанная ими самими

Weekend
Габриэле Д’Аннунцио Габриэле Д’Аннунцио

Современный читатель знает о нём в лучшем случае двустишие Маяковского...

Дилетант
Владимир Мартынов: «Сейчас не время Эйнштейнов или Ньютонов» Владимир Мартынов: «Сейчас не время Эйнштейнов или Ньютонов»

Об актуализации генетической памяти и принципе пестрых овец Иакова

СНОБ
Банкир всех штатов Банкир всех штатов

Как Амадео Джаннини создал Bank of America

Деньги
«Доверие Александра Македонского к врачу Филиппу» «Доверие Александра Македонского к врачу Филиппу»

Во время похода в Персию Александр Ма­кедонский тяжело заболел

Дилетант
Лучшие сказки пишутся для себя Лучшие сказки пишутся для себя

Какими должны быть сказки, для кого автор пишет и ходят ли дети в библиотеки

Правила жизни
Непростой узелок Непростой узелок

О чем сообщают увеличенные лимфоузлы у ребенка?

Лиза
Вечность пахнет нефтью Вечность пахнет нефтью

«Лэндмен»: нефтедобытчики куют американскую мечту

Weekend
Открыть в приложении