С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Вера»: драма о контролирующей матери по культовой советской повести «Вера»: драма о контролирующей матери по культовой советской повести

Чем интересна адаптация повести «Вам и не снилось...» — драма «Вера»

Forbes
Отсеквенирован геном «бессмертной» медузы Отсеквенирован геном «бессмертной» медузы

Ученые составили список генов, которые отвечают за «бессмертие» медузы

N+1
11 книг, которые надо прочитать всем, кто хочет быть богатым (и кто уже богатый — тоже) 11 книг, которые надо прочитать всем, кто хочет быть богатым (и кто уже богатый — тоже)

Книги, которые советуют бизнесмены, предприниматели и филантропы

Inc.
Внимание, черный ящик. Как и зачем исследовать логику нейросетей Внимание, черный ящик. Как и зачем исследовать логику нейросетей

Как и зачем исследовать логику нейросетей

N+1
Бегущий по шейкеру: как набрать массу, когда нет времени Бегущий по шейкеру: как набрать массу, когда нет времени

Что нужно делать, когда на весах нужен плюс, а на часах везде минус?

Правила жизни
Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать! Топ-10 лучших вариантов осеннего маникюра с акцентом: ты должна их попробовать!

Маникюр с акцентом на один-два ногтя

VOICE
В арктических водах поймали рыбу с настоящим В арктических водах поймали рыбу с настоящим

Арктическая рыба с телом, очень устойчивым к низким температурам

ТехИнсайдер
5 сайтов продажи авто, где вы точно найдете покупателя 5 сайтов продажи авто, где вы точно найдете покупателя

Онлайн-сервисы, которые помогут вам продать автомобиль

РБК
Если родители были токсичными: 5 защитных механизмов психики Если родители были токсичными: 5 защитных механизмов психики

Как сделать свою взрослую жизнь и отношения счастливее?

Psychologies
Тянет на солёное и поплакать: ранние признаки беременности Тянет на солёное и поплакать: ранние признаки беременности

Как уловить изменения в своем теле на ранних сроках беременности

VOICE
«Им нужны твои деньги»: честный отзыв российской туристки о Кубе и кубинцах «Им нужны твои деньги»: честный отзыв российской туристки о Кубе и кубинцах

Россиянка осталась разочарована Островом свободы

Вокруг света
Почему оборотень Джейкоб из “Сумерек” не стал суперзвездой — как Кристен Стюарт и Роберт Паттинсон Почему оборотень Джейкоб из “Сумерек” не стал суперзвездой — как Кристен Стюарт и Роберт Паттинсон

Почему про Тейлора Лотнера все забыли?

VOICE
Путешествие с домашними животными. В прокате «Первая корова» Келли Райхардт — самый необычный вестерн на свете Путешествие с домашними животными. В прокате «Первая корова» Келли Райхардт — самый необычный вестерн на свете

«Первая корова» — о том, как люди и животные едут в Америку на поиски рая

Правила жизни
Змеиный характер Змеиный характер

Стопе повезло: она остановилась в каких-то двадцати сантиметрах от головы змеи

Наука и жизнь
Окно в Париж Окно в Париж

Художник-импрессионист Камиль Писсарро и его парижские пейзажи

Вокруг света
Авангард Леонтьев. Счастливчик Авангард Леонтьев. Счастливчик

«Только сейчас начал понимать, как мне везло в жизни»

Коллекция. Караван историй
«Пока не сыграл в ящик»: как составить список самых важных дел «Пока не сыграл в ящик»: как составить список самых важных дел

Как составить bucket list и при этом избежать ошибок?

Psychologies
10 вещей, которые нельзя делать с кошкой 10 вещей, которые нельзя делать с кошкой

10 вещей, которые могут навредить вашей кошке

Maxim
Федерико Феллини — о вреде продюсеров и изнанке кинематографа. Фрагмент автобиографии режиссера «Делать фильм» Федерико Феллини — о вреде продюсеров и изнанке кинематографа. Фрагмент автобиографии режиссера «Делать фильм»

Отрывок из автобиографии великого итальянского режиссера Федерико Феллини

Правила жизни
«Уэбб»: получены первые снимки «Уэбб»: получены первые снимки

Первые глубокие и чёткие снимки «Уэбба»

Наука и жизнь
Врачи назвали 5 причин, из-за которых мы просыпаемся ночью и рано утром Врачи назвали 5 причин, из-за которых мы просыпаемся ночью и рано утром

Замечаете, что ни с того ни с сего просыпаетесь среди ночи?

ТехИнсайдер
Как за 10 лет архитектурный облик Москвы вышел на международный уровень Как за 10 лет архитектурный облик Москвы вышел на международный уровень

Какие проекты определяют облик столицы на столетия вперед

СНОБ
8 способов обмануть аппетит (например во время интервального голодания) 8 способов обмануть аппетит (например во время интервального голодания)

Можно ли убедить организм, что он не голоден?

Inc.
Как покупать винил: для чайников и продвинутых Как покупать винил: для чайников и продвинутых

Где и как приобретать пластинки в России, как не купить ерунду?

Maxim
Она разгадала убийство Она разгадала убийство

10 сериалов с детективами-женщинами

Weekend
Как прием гормональных контрацептивов влияет на жизнь и психику женщин: ученые обозначили главные проблемы Как прием гормональных контрацептивов влияет на жизнь и психику женщин: ученые обозначили главные проблемы

Как синтетические гормоны влияют на женщин?

ТехИнсайдер
Как создать полезное приложение: простые правила продуманной навигации Как создать полезное приложение: простые правила продуманной навигации

Как продумать пользовательский путь в приложении?

ТехИнсайдер
Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда Забытый король вестернов Том Микс: ковбой с простреленным горлом и легенда Голливуда

Том Микс — реальный ковбой со сломанным носом и простреленным горлом

Maxim
«Мальчики не плачут»: в чем вред запрета на эмоции «Мальчики не плачут»: в чем вред запрета на эмоции

Почему вредно запрещать детям жаловаться и ныть?

Psychologies
Музыкальная память сохраняется при деменции и может стать «мостом» к пациенту Музыкальная память сохраняется при деменции и может стать «мостом» к пациенту

Музыка всегда способна достучаться до нас

ТехИнсайдер
Открыть в приложении