С какими материалами работают модераторы контента в TikTok?

ForbesБизнес

Зачем TikTok база изображений сексуализированного насилия над несовершеннолетними

Бывшие подрядчики TikTok заявляют, что справочным материалом для сторонних модераторов контента соцсети служит множество изображений с детьми, подвергшимися сексуализированному насилию, ― и все это находится в почти неограниченном корпоративном доступе

Александра С. Левин. Перевод Forbes USA. Перевод Антона Бундина

Фото Scott Eells / Bloomberg via Getty Images

Бывший сотрудник TikTok Нассер (фамилии этого и некоторых других собеседников не называются из соображений конфиденциальности) знал, что в процессе обучения на должность модератора контента TikTok ему придется иметь дело с неприятными материалами. Но когда ему и другим новичкам на обучении показали изображения сексуального характера без цензуры с участием детей, для него это стало настоящим шоком.

Нассер работал в сторонней компании Teleperformance, которая модерирует контент социальной сети. Нового сотрудника взяли на специальный проект, в рамках которого планировалось научить искусственный интеллект (ИИ) TikTok выявлять на платформе худшее из худшего. Спустя всего несколько дней после начала работы Нассеру и его коллегам показали натуралистические изображения и видео, где дети подвергаются действиям сексуального характера, ― все ролики и фотографии, удаленные из TikTok.

«У меня самого есть дочь, и мне кажется, что неправильно, когда это смотрит толпа незнакомых людей, ― рассказал Forbes Нассер (из Teleperformance он ушел в 2020 году). ― Думаю, что такое для обучения использовать нельзя».

Уитни Тернер, работавшая в Teleperformance по этой же программе TikTok в Эль-Пасо на протяжении чуть больше года и уволившаяся в 2021-м, тоже вспоминает, как на обучении ей показывали визуальные материалы с сексуализированным насилием над детьми. Сотруднице дали доступ к общей таблице. Сама Уитни и ее бывшие коллеги утверждают, что в файле полно материалов, нарушающих правила сообщества TikTok, в том числе сотни изображений с детьми, которых заставляют раздеваться или насилуют. Бывшие модераторы заявляют, что документ под названием DRR (англ. Daily Required Reading, «обязательная ежедневная вычитка») находился в широком доступе для сотрудников Teleperformance и TikTok еще этим летом. Несмотря на то что некоторым модераторам, задействованным по другим направлениям, просмотр этого документа был запрещен, многие источники рассказали Forbes о том, что свободный доступ к файлу имели сотни работников из обеих компаний. DRR и другие справочные материалы хранились в программе Lark, корпоративной системе китайского гиганта ByteDance, владельца социальной сети.

Уитни была настолько ошеломлена небрежным обращением с материалами, что сообщила об этом в ФБР и впоследствии, в июне, встречалась по этому поводу с агентом. В ФБР на вопросы о том, предвидится ли какое-то расследование, не ответили.

«Я модерировала контент и думала: это же чей-то сын, чья-то дочь. И их родители даже не знают, что у нас сохранены эти фотографии, эти видео, этот ужас, настоящее преступление, ― поделилась Уитни. ― Будь родители в курсе, я уверена, они бы сожгли TikTok дотла».

Президент глобального подразделения по доверию и безопасности Teleperformance Акаш Пугалия заявил Forbes, что ролики откровенного содержания с участием детей компания в целях обучения не применяет. Кроме того, он добавил, что фирма не хранит подобный контент в своих «инструментах калибровки», хотя, что это за инструменты и для чего используются, он не пояснил. Отвечать на другие вопросы из обширного списка о том, сколько людей имеют через DRR доступ к материалам с насилием в отношении детей и как Teleperformance охраняет визуальный данные, управленец тоже отказался.

TikTok ― далеко не единственная платформа, которая борется с материалами сексуального насилия над несовершеннолетними. Крупнейшие социальные сети мира давно прибегают к машинному обучению и помощи сторонних проверяющих, чтобы находить и удалять подобные записи до того, как они разлетятся по интернету. Многие фирмы сотрудничают с Национальным центром по поиску пропавших и подвергшихся насилию детей (National Center for Missing & Exploited Children), чтобы сообщать о подобных постах в своем приложении органам правопорядка.

Однако уникально то, как TikTok и его сторонние консультанты обращаются с таким контентом. Эксперты называют сложившийся подход в лучшем случае небрежным и халатным, а в худшем ― опасным и травмирующим снова и снова. Специалисты подчеркивают, что изображения сексуального характера с детьми при обучении модерации контента ― не важно, с цензурой или без, ― лишь унижает жертв каждый раз заново. Кроме того, хранение записей в документе с общим доступом безответственно и излишне.

Пресс-секретарь TikTok Джейми Фавацца заявила, что «материалы для обучения в компании имеют строгий контроль доступа и не включают в себя наглядные примеры материалов сексуального насилия над детьми», но признала, что бизнес работает со сторонними фирмами, у которых внутренние процессы могут отличаться. Отвечать на вопросы о том, сколько сотрудников имеют доступ к файлу DRR и где документ хранится, в TikTok отказались. Родительская компания ByteDance, разработчик платформы Lark, многочисленные запросы прокомментировать эту информацию оставила без внимания.

«Свободный и неограниченный оборот здесь не пройдет»

Изображения насилия над детьми и их эксплуатации противозаконны, и существуют строгие правила по обращению с такими данными в случае обнаружения. Материал подлежит незамедлительной блокировке, и о нем необходимо сообщать в систему CyberTipline Национального центра по поиску пропавших и подвергшихся насилию детей. Там персонал анализирует файлы и ищет их первоисточник, чтобы уведомить соответствующие правоохранительные органы. Как только компания сообщает о материале в профильный центр, ей официально разрешается хранить контент в течение 90 дней для помощи следствию. Но федеральный закон США четко требует от предприятий «минимизировать число сотрудников, которым дается доступ» к незаконному контенту, «хранить материалы в безопасном месте» и «обеспечивать полное уничтожение любого визуального изображения по запросу от органов правопорядка».

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Не звони, не опаздывай и не сокращай: шесть главных табу в бизнес-общении Не звони, не опаздывай и не сокращай: шесть главных табу в бизнес-общении

Что предпринимателей больше всего раздражает в деловом общении?

Forbes
Финансовая сепарация: что делать, если женщина материально зависит от мужа Финансовая сепарация: что делать, если женщина материально зависит от мужа

Как бороться с финансовой зависимостью в отношениях?

Psychologies
Что делать, когда один из супругов оказался в долгах: разбор частых ситуаций и мнения юриста и психолога Что делать, когда один из супругов оказался в долгах: разбор частых ситуаций и мнения юриста и психолога

Как обсуждать с близкими людьми непростые ситуации, касающиеся денег?

Psychologies
Илон Маск в переработке. Как выпускник Принстона создал крупнейшую в мире частную компанию по утилизации мусора с оборотом $70 млн в год Илон Маск в переработке. Как выпускник Принстона создал крупнейшую в мире частную компанию по утилизации мусора с оборотом $70 млн в год

История компании по утилизации отходов TerraCycle

Inc.
«Там, где нет обязательств, нет нашей ответственности»: почему мы обижаем и обижаемся «Там, где нет обязательств, нет нашей ответственности»: почему мы обижаем и обижаемся

Зачем мы причиняем боль близким людям?

Psychologies
Инстаграмное место: как соцсети изменили представления об идеальном пространстве Инстаграмное место: как соцсети изменили представления об идеальном пространстве

Отрывок из книги «Формула грез» — почему минимализм превратился в эстетику

Forbes
Все испортили? Почему дизайнеры наняли моделей плюс-сайз и все равно не угодили девушкам Все испортили? Почему дизайнеры наняли моделей плюс-сайз и все равно не угодили девушкам

Что не так с современной модой для плюс-сайз девушек?

VOICE
Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе Мужские гаремы и женская дружба: как устроены отношения полов в дикой природе

Натуралист Евгения Тимонова: о борьбе полов, феминизме, бодипозитиве — у зверей

Forbes
Психология симулянтов: что заставляет людей притворяться тяжелобольными? Психология симулянтов: что заставляет людей притворяться тяжелобольными?

Суд по делу Бланчард привлек внимание общества к теме симулятивных расстройств

Psychologies
Зашла на час, потеряла день: почему мы впадаем в зависимость от игр Зашла на час, потеряла день: почему мы впадаем в зависимость от игр

Что заставляет нас тратить часы своей жизни на это бессмысленную игру три в ряд?

VOICE
Одна вокруг света: озеро на месте «звездной раны» и деревенская прачечная в Боливии Одна вокруг света: озеро на месте «звездной раны» и деревенская прачечная в Боливии

182-я серия о кругосветном путешествии москвички Ирины Сидоренко: Боливия

Forbes
Луна образовалась в результате столкновения Земли с неизвестной планетой: новые доказательства старой теории Луна образовалась в результате столкновения Земли с неизвестной планетой: новые доказательства старой теории

Следы газов в недрах лунной породы принадлежат только сформировавшейся Земле

ТехИнсайдер
Любовные похождения Маяковского: тройничок, аборты, дети, самоубийство и та самая Лиля Брик Любовные похождения Маяковского: тройничок, аборты, дети, самоубийство и та самая Лиля Брик

Маяковский был нагл, эпатажен и груб, но в то же время был ранимым человеком

ТехИнсайдер
Как справиться с источниками негатива в нашей жизни: 3 совета Как справиться с источниками негатива в нашей жизни: 3 совета

Как найти источники негативного влияния и нейтрализовать их?

Psychologies
Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке» Катерина Сильванова, Елена Малисова: «О чем молчит Ласточка». Продолжение бестселлера «Лето в пионерском галстуке»

Глава из книги «О чем молчит Ласточка» — о рефлексии юношеской любви

СНОБ
Как пользоваться мультиметром: пошаговая инструкция для новичков Как пользоваться мультиметром: пошаговая инструкция для новичков

Мы сделали простой и подробный гайд о том, как пользоваться мультиметром

CHIP
Кино как улика Кино как улика

Как одна телевизионная трилогия спасла троих невинно осужденных

Weekend
Что опаснее для ребенка: игра Among Us, новое видео А4 или онлайн-груминг? Что опаснее для ребенка: игра Among Us, новое видео А4 или онлайн-груминг?

Многие родители сражаются не с теми врагами в интернете

Psychologies
Мама, не грусти Мама, не грусти

Мамы проходят испытание послеродовой депрессией, даже не подозревая об этом

Лиза
Внимание, черный ящик. Как и зачем исследовать логику нейросетей Внимание, черный ящик. Как и зачем исследовать логику нейросетей

Как и зачем исследовать логику нейросетей

N+1
Собрание сочинений Собрание сочинений

Светлый и изящный интерьер в стиле галерейного пространства

SALON-Interior
Цвет личности: что расскажет о вас выпускное платье Цвет личности: что расскажет о вас выпускное платье

Как цвет платья на выпускном отражает ваше психологическое состояние?

Psychologies
Каким был величайший океан в истории Земли? Каким был величайший океан в истории Земли?

Так каким же был самый большой океан когда-либо существовал на нашей планете?

ТехИнсайдер
6 мифов о космосе, в которые вы до сих пор верите 6 мифов о космосе, в которые вы до сих пор верите

По количеству существующих мифов космос может соперничать разве что с медициной

ТехИнсайдер
Шансы выжить невелики: что будет, если человека ударит молнией Шансы выжить невелики: что будет, если человека ударит молнией

Электрические разряды редко проходят для людей без последствий

Вокруг света
Отпуск без обязательств: что такое экспресс-путешествия и почему они набирают популярность в России Отпуск без обязательств: что такое экспресс-путешествия и почему они набирают популярность в России

Как спонтанные поездки ворвались в нашу жизнь, потеснив привычные путешествия

Вокруг света
AMOLED-дисплеи в смартфонах: плюсы и минусы AMOLED-дисплеи в смартфонах: плюсы и минусы

Разбираемся в том, что такое AMOLED-экран в смартфоне

CHIP
Смотреть в корень Смотреть в корень

Может ли секс быть ресурсом?

Psychologies
Вместо сына: зачем афганским девочкам дают мужские имена Вместо сына: зачем афганским девочкам дают мужские имена

Бача-пош: что это за практика и как она влияет на афганок?

Forbes
Павел Деревянко: «Девчонки считают меня привлекательным» Павел Деревянко: «Девчонки считают меня привлекательным»

Главный по волейболу Паша Деревянко рассказывает про популярность и деньги

Maxim
Открыть в приложении