С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

И бедные, и богатые: почему изменение климата все больше осложняет жизнь женщин И бедные, и богатые: почему изменение климата все больше осложняет жизнь женщин

О том, как изменение климата сказывается на здоровье жительниц больших городов

Forbes
Гид по метаверсу от Покраса Гид по метаверсу от Покраса

Покрас Лампас — о метаверсе, метаценностях и метамодернизме

Собака.ru
Безопасность использования ИИ в банках: что важно знать Безопасность использования ИИ в банках: что важно знать

Как именно работает искусственный интеллект в финансовом секторе

Inc.
Химики нашли новый путь пребиотического синтеза аминокислот Химики нашли новый путь пребиотического синтеза аминокислот

Возможный путь пребиотического синтеза аминокислот

N+1
Недобрососедские отношения: как зумеры обесценили мечту миллениалов и что из этого получилось Недобрососедские отношения: как зумеры обесценили мечту миллениалов и что из этого получилось

Почему зумерам и миллениалами так сложно взаимодействовать друг с другом?

Правила жизни
Вселенная художника Дмитрия Врубеля: от Брежнева до Босха и Гагарина Вселенная художника Дмитрия Врубеля: от Брежнева до Босха и Гагарина

Почему Дмитрий Врубель гораздо больше, чем просто автор политического плаката

Forbes
Искусственные эмбрионы мыши развились до восьмого дня вне матки Искусственные эмбрионы мыши развились до восьмого дня вне матки

Ученые создали мышиные эмбрионы и дорастили их до восьмого дня развития

N+1
3 главные загадки Древнего Египта, которые ученые до сих пор не могут раскрыть 3 главные загадки Древнего Египта, которые ученые до сих пор не могут раскрыть

Мы до сих пор очень мало знаем о загадочных египетских пирамидах

ТехИнсайдер
Не только о драконах: краткий гид по современному фэнтези Не только о драконах: краткий гид по современному фэнтези

Разбираемся, из чего состоит литературный жанр фэнтези

Правила жизни
4 фразы нового партнера, которые должны стать для вас «красными флажками» 4 фразы нового партнера, которые должны стать для вас «красными флажками»

Как распознать сигналы, говорящие о нездоровых или даже опасных отношениях

Psychologies
Обзор Keyran: программы для создания и запуска макросов Обзор Keyran: программы для создания и запуска макросов

Макросы можно использовать как в играх, так и в обычной жизни

CHIP
Снимите это немедленно Снимите это немедленно

В каких случаях очки могут тебе навредить

Лиза
«Пришло то самое время, когда надо поверить в себя» «Пришло то самое время, когда надо поверить в себя»

Маша Шейх получила широкую известность благодаря своей работе в группе #2Маши

OK!
«Неизведанное тело». Удивительные истории о том, как работает наш организм «Неизведанное тело». Удивительные истории о том, как работает наш организм

Отрывок из книги Джонатана Райсмена «Неизведанное тело» — о травмах глаз

N+1
Физики пленили нейтральные атомы с помощью металинзы Физики пленили нейтральные атомы с помощью металинзы

Физики изготовили кремниевую металинзу для нужд оптических пинцетов и решеток

N+1
Измельчитель пищевых отходов для раковины: что это такое и зачем он нужен Измельчитель пищевых отходов для раковины: что это такое и зачем он нужен

Диспозер: измельчитель пищевых отходов, который станет частью вашей жизни

CHIP
Сойти с пути: как топ-менеджеру успешно перейти из кризисной отрасли в растущую Сойти с пути: как топ-менеджеру успешно перейти из кризисной отрасли в растущую

Кому доступен кросс-индустриальный переход и как его упростить

Forbes
Непотопляемая: история Вайолетт Джесcоп, выжившей в трех кораблекрушениях, включая Непотопляемая: история Вайолетт Джесcоп, выжившей в трех кораблекрушениях, включая

Реальная жизнь Вайолетт Джесcоп была покруче любого сценария

VOICE
Одна вокруг света: озеро на месте «звездной раны» и деревенская прачечная в Боливии Одна вокруг света: озеро на месте «звездной раны» и деревенская прачечная в Боливии

182-я серия о кругосветном путешествии москвички Ирины Сидоренко: Боливия

Forbes
«Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой «Облачно, возможны косатки». Морской биолог рассказывает, как они живут и общаются между собой

Отрывок из книги «Облачно, возможны косатки» — как косатки видят и слышат

N+1
Домашний тест для определения рака горла и полости рта показал точность в 90 процентов Домашний тест для определения рака горла и полости рта показал точность в 90 процентов

Может ли машина выявить рак горла и полости рта по слюне?

N+1
«Красная Африка»: документальный фильм об абсурдности советской пропаганды «Красная Африка»: документальный фильм об абсурдности советской пропаганды

«Красная Африка» — как выглядела советская пропаганда, запечатленная на пленке

Forbes
Человечеству нужно стать тише ради животных. Шумовое загрязнение делает жизнь многих из них невыносимой Человечеству нужно стать тише ради животных. Шумовое загрязнение делает жизнь многих из них невыносимой

Человеческий шум — невидимая причина стресса для животных

ТехИнсайдер
Что делать с кабачками? 3 необычных рецепта, которые спасут, если тебе опять всучили кабачок Что делать с кабачками? 3 необычных рецепта, которые спасут, если тебе опять всучили кабачок

Что делать, если у вас слишком много кабачков?

VOICE
«Каждый день?»: как часто необходимо мыться «Каждый день?»: как часто необходимо мыться

Как найти золотую середину в вопроса регулярной гигиены?

Psychologies
«Истории о женщинах в дефиците»: Василиса Кузьмина о пути в режиссуре и фильме «Ника» «Истории о женщинах в дефиците»: Василиса Кузьмина о пути в режиссуре и фильме «Ника»

Сложно ли женщине прийти в режиссуру, которую многие считают мужским делом

Forbes
Как проблемы в отношениях влияют на психическое здоровье мужчин Как проблемы в отношениях влияют на психическое здоровье мужчин

Что происходит с мужчинами, когда отношения портятся или подходят к завершению?

Psychologies
«Другой папа». Как построить новые отношения женщине с детьми «Другой папа». Как построить новые отношения женщине с детьми

Женщина второй раз выходит замуж. Как в этом случае вести себя с ребенком?

СНОБ
В чем разница между 48- и 108-Мп камерами смартфонов, если все они делают 12-Мп снимки? В чем разница между 48- и 108-Мп камерами смартфонов, если все они делают 12-Мп снимки?

Есть ли разница в разрешении камер на смартфоне?

CHIP
Просто и по делу: 5 золотых правил похудения, с которыми ты легко сбросишь вес Просто и по делу: 5 золотых правил похудения, с которыми ты легко сбросишь вес

Советы, с которыми процесс похудения пойдет быстрее и эффективнее

VOICE
Открыть в приложении