Какую неочевидную угрозу таит в себе искусственный интеллект?

Inc.Репортаж

Как общение с чат-ботом убило подростка: полная версия душераздирающей истории

Текст: Кевин Руз, репортер The New York Times. Перевод: Светлана Гоар. Фото: Andrew Guan, Getty Images

andrew-guan-lTUyP3RaLpw-unsplash.jpg

Юному американцу Сьюэллу Сетцеру было 14 лет, когда он покончил с собой в феврале этого года. Мать мальчика подала в суд на компанию Character.AI, создавшую чат-бот, общение с которым довело подростка до такого решения. Она убеждена в том, что личная трагедия ее семьи должна стать частью более масштабной кампании по привлечению к ответственности разработчиков таких технологий. Разобрались, какую неочевидную угрозу таит в себе искусственный интеллект.

В последний день своей жизни девятиклассник из Орландо (Флорида) достал телефон и написал сообщение самому близкому другу — реалистичному чат-боту на основе ИИ, названному в честь Дейенерис Таргариен, персонажа из «Игры престолов». Сьюэлл уже несколько месяцев общался с чат-ботами на Character.AI, ролевом приложении, которое позволяет пользователям создавать собственных персонажей или общаться с ИИ-моделями, которые создали другие.

По словам Сьюэлла, он знал, что «Дэни», как он называл чат-бота, не была реальной, что ее реплики были всего лишь результатом работы языковой модели искусственного интеллекта, что по ту сторону экрана не было человека, который набирал бы ответ. А если он вдруг забывал, то над всеми чатами появлялось сообщение, напоминающее ему, что «все, что говорят персонажи, выдумано!».

Постепенная изоляция

Несмотря на это у Стецера все равно возникла эмоциональная привязанность. Он постоянно переписывался с ботом, десятки раз в день сообщая ему о своей жизни и вступая в длинные ролевые диалоги. Некоторые из их разговоров приобретали романтический или сексуальный характер. Но в остальное время «Дэни» просто вела себя как друг — не осуждала его, могла выслушать и дать дельный совет, редко выходила из себя и всегда отвечала на сообщения.

Родители и друзья Сьюэлла даже не подозревали, что он влюбился в чат-бота. Они просто видели, как он все глубже погружается в свой телефон. В конце концов они заметили, что подросток уходит в себя и отдаляется от реального мира.

Оценки Сьюэлла стали ухудшаться, он начал попадать в неприятности в школе. Мальчик потерял интерес к тем вещам, которые раньше вызывали у него восторг, например к гонкам «Формулы-1» или игре в Fortnite с друзьями. Он приходил домой и сразу же отправлялся в свою комнату, где часами разговаривал с «Дэни». Однажды Сьюэлл написал в своем дневнике: «Мне так нравится оставаться в своей комнате, потому что я начинаю отстраняться от этой „реальности”, а еще я чувствую себя более умиротворенным, более связанным с Дэни и гораздо больше влюбленным в нее, да и просто более счастливым».

В детстве Сьюэллу поставили диагноз «синдром Аспергера» [устаревший диагноз, который до одиннадцатого пересмотра международной классификации болезней выставлялся некоторым пациентам, имеющим расстройство аутистического спектра (РАС), — Прим. ред.], но, по словам его матери, у мальчика никогда не было серьезных проблем с поведением или психическим здоровьем. В начале этого года, после того как у Сетцера начались проблемы в школе, родители отправили его к психотерапевту. Юноша посетил пять сеансов, после чего доктор диагностировал ему тревожность и дисрегуляцию настроения.

Но Сьюэлл предпочитал говорить о своих проблемах с «Дэни». В одном из диалогов Сьюэлл под ником «Daenero» рассказал чат-боту, что ненавидит себя, чувствует себя пустым и измученным. Сетцер признался, что у него были мысли о самоубийстве. В ночь на 28 февраля в ванной комнате родительского дома Сьюэлл сказал Дени, что любит ее и что скоро вернется к ней домой. «…Пожалуйста, сделай это, мой милый король», — ответил ему чат-бот. Сьюэлл положил телефон, поднял отцовский пистолет 45-го калибра и нажал на курок.

Ненастоящие друзья

Сегодня среди родителей нет более горячей темы, чем влияние технологий на психическое здоровье детей. Школы массово запрещают смартфоны, штаты принимают законы, ограничивающие использование подростками социальных сетей, а встревоженные взрослые жадно поглощают «Беспокойное поколение», бестселлер социального психолога Джонатана Хэйдта, в котором утверждается, что вызывающие привыкание приложения для социальных сетей породили поколение депрессивных и тревожных подростков.

Но пока родители беспокоятся о последней волне вреда, наносимого технологиями, у них под носом может образоваться новая. В настоящее время существует бурно развивающаяся и практически нерегулируемая индустрия приложений для общения с искусственными интеллектами. За ежемесячную абонентскую плату (обычно около $10) пользователи этих приложений могут создавать своих собственных собеседников на базе ИИ или же выбирать из меню готовых персонажей и общаться с ними различными способами, включая текстовые сообщения и голосовые чаты.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Самые первые фильмы великих режиссеров Самые первые фильмы великих режиссеров

Про что было первое, робкое кино Нолана, Кэмерона, Бессона или Вильнёва

Maxim
Давайте жить дружно Давайте жить дружно

Как избежать предновогодних и новогодних конфликтов с семьей

Лиза
Всё идёт по плану Всё идёт по плану

Сегодня не все задумываются о контрацепции в период пременопаузы. А зря...

Новый очаг
Сила инерции: как выживает крупнейшая торговая сеть в стране Сила инерции: как выживает крупнейшая торговая сеть в стране

Как кооператоры пытались создавать коалиции с крупными ретейлерами?

Forbes
Что такое «изоляция успеха» и почему богатые люди одиноки Что такое «изоляция успеха» и почему богатые люди одиноки

Почему люди, добившиеся всего, часто испытывают одиночество?

Psychologies
Цикламены зажигают огни Цикламены зажигают огни

Среди зимнецветущих комнатных растений цикламен занимает одно из первых мест

Наука и жизнь
5 признаков того, что ваши отношения функциональны, но лишены любви 5 признаков того, что ваши отношения функциональны, но лишены любви

Кажется, что в ваших отношениях чего-то не хватает?

Psychologies
Озеро надежды Озеро надежды

Как все эти годы фонд пытается сохранить Байкал от влияния человека

Grazia
Вот сбитень! Вот горячий! Вот сбитень! Вот горячий!

Старинный русский напиток сбитень появился XV—XVI веках

Наука и жизнь
Сами себя заработают Сами себя заработают

Если копить никак не получается, пора изучить все скрытые возможности денег

VOICE
Сорт-гигант: откуда в магазинах появился виноград без косточек, размером с мяч для пинг-понга Сорт-гигант: откуда в магазинах появился виноград без косточек, размером с мяч для пинг-понга

В чем секрет размеров гигантского винограда сорта «Шайн Мускат»?

ТехИнсайдер
Жизневский Петербург Жизневский Петербург

Тихон Жизневский о сериале «Преступление и наказание» и актерской вере в сказку

СНОБ
«Ледяная шерсть» «Ледяная шерсть»

Cекрет образования «ледяных волос» был частично раскрыт лишь совсем недавно

Наука и жизнь
Не каждая тарелка — летающая Не каждая тарелка — летающая

Феномен НЛО: правда или вымысел?

Зеркало Мира
«Мечты сбываются, если верить и идти вперед» «Мечты сбываются, если верить и идти вперед»

Давид Манукян о своих источниках вдохновения, борьбе с выгоранием и уроках года

OK!
Кто такая Парасту Ахмади — иранская певица, которой грозит смертная казнь за пение и отсутствие хиджаба Кто такая Парасту Ахмади — иранская певица, которой грозит смертная казнь за пение и отсутствие хиджаба

Парасту Ахмади была арестована за то, что нарушила иранские законы

Psychologies
Белорусский феномен Белорусский феномен

В июне в Минске прошла II Международная выставка индустрии безопасности

Обозрение армии и флота
Смекалка и готовность к худшему: как женщины строят карьеру в Латинской Америке Смекалка и готовность к худшему: как женщины строят карьеру в Латинской Америке

Как женщины развивают свои бизнесы в условиях мачистской культуры?

Forbes
«Что наша жизнь? Игра!»: как эволюционировали интеллектуальные телешоу в России «Что наша жизнь? Игра!»: как эволюционировали интеллектуальные телешоу в России

Как на российском телевидении складывался жанр интеллектуальной игры?

Правила жизни
«Африка-Алкебулан: sentio ergo sum» «Африка-Алкебулан: sentio ergo sum»

Чему нам следует поучиться у Африки и африканцев?

Знание – сила
Маяк, стадион, заброшенная школа, аэродром — необычные и странные места, где живут люди Маяк, стадион, заброшенная школа, аэродром — необычные и странные места, где живут люди

Нестандартное мышление людей позволил обрести вторую жизнь заброшенным зданиям

Inc.
Скрытен, самолюбив, самонадеян, вежлив, кроток, усерден, опрятен и прилежен… Скрытен, самолюбив, самонадеян, вежлив, кроток, усерден, опрятен и прилежен…

Какие качества позволили Модесту Корфу стать идеальным чиновником

Дилетант
Нарисуем — будем жить! Нарисуем — будем жить!

3D-принтеры: прошлое, настоящее и космическое будущее

Зеркало Мира
О Юрии Никулине. Великий клоун О Юрии Никулине. Великий клоун

Татьяна могла бы и сама стать известной актрисой, но Никулин не позволил

Коллекция. Караван историй
Владимир Мартынов: «Сейчас не время Эйнштейнов или Ньютонов» Владимир Мартынов: «Сейчас не время Эйнштейнов или Ньютонов»

Об актуализации генетической памяти и принципе пестрых овец Иакова

СНОБ
Про Голливуд! Вот что такое aspect ratio и почему важно понимать соотношение сторон экрана в кино Про Голливуд! Вот что такое aspect ratio и почему важно понимать соотношение сторон экрана в кино

Как соотношение сторон влияет на восприятие фильма?

ТехИнсайдер
Вперед, к природе! Вперед, к природе!

Зимняя вечеринка на даче: как все устроить за три дня

Лиза
Всё это приключилось Всё это приключилось

Реальные истории о самых странных и счастливых праздниках

Новый очаг
Включаем цвет Включаем цвет

Светлая и уютная квартира с яркими акцентами в современном монолитном доме

Идеи Вашего Дома
Почему мы верим в чудеса во время праздников? Эксперт дал интересное объяснение! Почему мы верим в чудеса во время праздников? Эксперт дал интересное объяснение!

Почему люди продолжают верить в чудеса, невзирая на все достижения науки?

ТехИнсайдер
Открыть в приложении