Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Во френч-прессе, турке и гейзерной кофеварке: как сварить вкусный кофе дома Во френч-прессе, турке и гейзерной кофеварке: как сварить вкусный кофе дома

Как приготовить вкусный кофе дома — без кофемашины и профессионального опыта

Forbes
Желтая кофта Маяковского: как поэты Серебряного века становились иконами стиля Желтая кофта Маяковского: как поэты Серебряного века становились иконами стиля

Как галстук-бант и желтая кофта Маяковского стали символами нового искусства

Forbes
Судьба разведчика Судьба разведчика

Под покровом секретности на Урале в 1962 году случился международный скандал

Популярная механика
Путешествие в Сибирь Путешествие в Сибирь

Атмосферные апартаменты, не имеющие аналогов в Тобольске

Идеи Вашего Дома
Многоликий минерал кварц Многоликий минерал кварц

Кварц и его разнообразные формы

Наука и техника
Они повсюду: 7 источников радиации, которые окружают нас в быту Они повсюду: 7 источников радиации, которые окружают нас в быту

Какие из домашних вещей могут быть настоящими источниками радиации?

ТехИнсайдер
Как правильно выражать гнев: 4 этапа проживания негативных эмоций Как правильно выражать гнев: 4 этапа проживания негативных эмоций

Всегда ли стоит выражать свой гнев и как прожить его без вреда?

Psychologies
Скрытен, самолюбив, самонадеян, вежлив, кроток, усерден, опрятен и прилежен… Скрытен, самолюбив, самонадеян, вежлив, кроток, усерден, опрятен и прилежен…

Какие качества позволили Модесту Корфу стать идеальным чиновником

Дилетант
Николай, Карачун, Трескунец: правдивая история Деда Мороза Николай, Карачун, Трескунец: правдивая история Деда Мороза

Прежде чем стать дедушкой в красной шубе, Дед Мороз проделал долгий путь

Правила жизни
Юлианна Караулова: «Пусть сбудется всё, что загадано под бой курантов!» Юлианна Караулова: «Пусть сбудется всё, что загадано под бой курантов!»

Юлианна Караулова о семейных традициях празднования Нового года

Здоровье
«Что наша жизнь? Игра!»: как эволюционировали интеллектуальные телешоу в России «Что наша жизнь? Игра!»: как эволюционировали интеллектуальные телешоу в России

Как на российском телевидении складывался жанр интеллектуальной игры?

Правила жизни
Большая история маленького самолета. Часть 2 Большая история маленького самолета. Часть 2

Через призму суперджета смотрим на российский авиапром в новейшем времени

Наука и техника
«Я перестала страдать из-за отсутствия отношений и нашла счастье в одиночестве»: история одной женщины «Я перестала страдать из-за отсутствия отношений и нашла счастье в одиночестве»: история одной женщины

История женщины, которая нашла счастье в одиночестве

Psychologies
РНК-интерференция снизила уровень липопротеина (а) во второй фазе испытаний РНК-интерференция снизила уровень липопротеина (а) во второй фазе испытаний

Ученые: об успехе испытаний препарата на основе малой интерферирующей РНК

N+1
Всё идёт по плану Всё идёт по плану

Сегодня не все задумываются о контрацепции в период пременопаузы. А зря...

Новый очаг
Пять прелюдий о Грибоедове Пять прелюдий о Грибоедове

Грибоедовский миф занимает особое место среди других литературных мифов

Знание – сила
Первому «Аватару» 15 лет. Как создавался революционный проект Джеймса Кэмерона Первому «Аватару» 15 лет. Как создавался революционный проект Джеймса Кэмерона

Какую роль «Аватара» занял в истории кино и наших сердцах?

Правила жизни
Больше, чем орган слуха: насколько важны наши уши Больше, чем орган слуха: насколько важны наши уши

Как работают наши уши и какое влияние они оказали на развитие мировой культуры

Правила жизни
Как стресс, нагрузки и навязанные стандарты красоты влияют на женское здоровье Как стресс, нагрузки и навязанные стандарты красоты влияют на женское здоровье

Как пропадают месячные и при чем здесь расстройства пищевого поведения

Forbes
Грани и границы Грани и границы

Петр Рыков играет на грани

Men Today
Цикламены зажигают огни Цикламены зажигают огни

Среди зимнецветущих комнатных растений цикламен занимает одно из первых мест

Наука и жизнь
Всхлип тишины Всхлип тишины

Джошуа Оппенхаймер и его «Конец света»

Weekend
Снова всегда Снова всегда

Как Чарли Кауфман сводит все концы со всеми началами

Weekend
Заряд энергии: 7 видов чая, которые взбодрят не хуже кофе Заряд энергии: 7 видов чая, которые взбодрят не хуже кофе

От пуэра до саган-дайля: самые бодрящие виды листового напитка

ТехИнсайдер
Транспорт, который удивляет: как инновации помогают при передвижении по городу Транспорт, который удивляет: как инновации помогают при передвижении по городу

Технологические тренды, развивающиеся в сфере городского транспорта в регионах

ФедералПресс
Вечный фашизм Вечный фашизм

Предлагаем вниманию читателей знаменитое эссе писателя и философа Умберто Эко

Дилетант
Система Юпитера: бесчисленные спутники и чудеса в «зоне смерти» Система Юпитера: бесчисленные спутники и чудеса в «зоне смерти»

Помимо четырех знаменитых «галилеевых» спутников Юпитер окружен роями малых тел

Наука и техника
7 способов укротить боль 7 способов укротить боль

Боль бывает разная, ноющая, колющая, резкая, слабая. Можно ли от неё избавиться?

Здоровье
Фудблогинг Фудблогинг

Среди разнообразия страниц соцсетей блоги о еде пользуются особой популярностью

Здоровье
Трофеи Вьетконга Трофеи Вьетконга

Во время Вьетнамской войны почтовые марки выпускала не только Республика Вьетнам

Дилетант
Открыть в приложении