Леонид Жуков — об ответственности людей и машин за принятие критических решений

РБКHi-Tech

На ошибках учатся

Леонид Жуков — об ответственности людей и машин за принятие критических решений.

Фото: из личного архива

Мы ежедневно сталкиваемся с искусственным интеллектом, но редко задумываемся, какие нормы этики заложены в его алгоритмы, какие решения машины могут принимать самостоятельно, а для чего нужно слово человека. Глава Лаборатории по искусственному интеллекту «Сбера» Леонид Жуков объяснил, почему люди в ближайшем будущем не смогут полностью довериться ИИ.

Что такое хорошо...

Существует этика разработчиков, то есть тех, кто создает софт, этика применения алгоритмов и этика пользователей. Если говорить про разработчиков, то их задача — предотвратить закладывание в алгоритмы процессов, которые могут навредить человеку. С точки зрения алгоритмов самый главный вопрос в том, чтобы они были справедливы в принятии каких-либо решений и честны с пользователем. Пользователь, в свою очередь, должен использовать ИИ только по прямому назначению.

Почему вопрос этики встает, когда речь заходит про искусственный интеллект, и не так важен, к примеру, в разговоре про обычный софт? ИИ, в отличие от традиционного программного продукта, учится на примерах, которые мы ему даем. Он обобщает поступившую информацию и применяет полученные знания к ситуации, которая раньше не встречалась. В этом заключается сила алгоритмов: если бы мы могли перечислить все возможные встречающиеся ситуации, тогда искусственный интеллект был бы бесполезен. Например, без искусственного интеллекта сложно учить машину ездить, потому что невозможно спрогнозировать каждую ситуацию, которая будет встречаться на дороге. Алгоритмы в этом случае способны принять решение самостоятельно на основе анализа и обобщения примеров в его памяти.

Но ИИ может и ошибиться. В алгоритмах, как в любом медицинском тесте, есть показатели точности и есть ошибки, которые невозможно избежать в силу их предсказательной или обобщающей способности. Есть также ошибки, которые возникают при обучении ИИ, потому что определенные сценарии не встречались в обучающих примерах. Например, в компании N за всю историю не было женщин, занимавших высокие посты. Алгоритм, основываясь на этих данных, никогда не наймет женщин, потому что будет считать, что они не способны достичь высокого положения в компании.

Это этично? Нет. Поэтому с точки зрения разработчиков очень важно минимизировать возможность таких ошибок и научить алгоритм собирать непредвзятые данные. С точки зрения пользователей алгоритмов, как уже говорилось выше, очень важно не применять ИИ в ситуациях, для которых он не предназначен. Например, если алгоритм, натренированный отличать кошек от собак, запустить в зоопарке, он будет либо не способен дать ответ, либо, что еще хуже, пытаться классифицировать всех зверей лишь на кошек или собак.

…и что такое плохо

На сегодняшний день основное средство контроля за этичностью алгоритма — это отсутствие у него возможности принимать критически важные решения самостоятельно. Например, ставить диагнозы. На языке разработчиков это называется human in the loop: человек обязательно участвует в принятии решений, а алгоритм выступает как советчик.

Уровень алгоритмов пока не настолько высок, чтобы мы им доверяли принятие жизненно важных решений, но некоторые вещи мы все же позволяем делать ИИ самостоятельно. Например, повсеместно используемые роботы-пылесосы. Они управляются искусственным интеллектом, но могут ошибиться и заехать не в ту комнату или наехать на препятствие. Однако это не грубая ошибка, и она не приводит к критическим последствиям. То есть пылесос не может сделать ничего такого, что могло бы навредить человеку. Это к вопросу об этике — в алгоритмы работы робота заложены определенные ограничения, которые он не может переступить.

Существующие алгоритмы ИИ можно разделить на два класса: black-box и white-box. Первый — это некий «черный ящик», при использовании которого даже эксперту, создавшему его, может быть непонятно, почему ИИ выдал ту или иную рекомендацию (например, модели глубинного нейронного обучения, deep learning). Такие алгоритмы можно использовать для сервисов с музыкой или фильмами, но нельзя применять ни в медицине, ни в финансах, ни в какой-либо другой ответственной отрасли.

White-box или transparent (прозрачные алгоритмы), наоборот, используют для важных отраслей, так как там алгоритмы максимально просты и понятны. Важным моментом для обеих категорий является ответственность за ошибку. Пока этот вопрос остается нерешенным с юридической точки зрения. Неясно, кто должен нести ответственность за неправильное решение или ошибку ИИ — пользователь, создатель или владелец алгоритма.

Алгоритмы учатся точнее моделировать ситуации и меньше ошибаться, однако они никогда не станут совершенны и безошибочны. Вопрос о допустимом пороге ошибок, цене за ошибку и экономии от замены человека искусственным интеллектом будет стоять всегда. В ближайшем будущем человек по-прежнему будет принимать критические решения, каким бы умным и этичным ни был ИИ.

Леонид Жуков — директор Лаборатории по искусственному интеллекту «Сбера», доктор наук, профессор Высшей школы экономики, пятикратно удостоенный звания «Лучший преподаватель». Является одним из ведущих экспертов в России и в мире в области анализа больших данных, искусственного интеллекта и машинного обучения.

Хочешь стать одним из более 100 000 пользователей, кто регулярно использует kiozk для получения новых знаний?
Не упусти главного с нашим telegram-каналом: https://kiozk.ru/s/voyrl

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Разумные сомнения. Как критическое мышление помогает распознавать дезинформацию и противостоять манипуляциям Разумные сомнения. Как критическое мышление помогает распознавать дезинформацию и противостоять манипуляциям

Как не попадаться на обман и манипуляции собственного мозга и других людей

РБК
Лейла Слимани: Адель. Новый роман от лауреата Гонкуровской премии Лейла Слимани: Адель. Новый роман от лауреата Гонкуровской премии

Отрывок из нового романа Лейлы Слимани — о браке, сексуальности и зависимости

СНОБ
Груз платформы Груз платформы

Павел Дуров: бизнесмен, который бросил вызов мировому господству доллара

Forbes
Желаю удачи Желаю удачи

Удачливость можно тренировать: рассказываем, как это делать

Cosmopolitan
Максим Федоров: искусственный интеллект в десяти вопросах и ответах Максим Федоров: искусственный интеллект в десяти вопросах и ответах

Профессор Сколтеха — об искусственном интеллекте и реальности сюжетов фантастики

РБК
Гигантских вирусов заподозрили в наличии энергетического метаболизма Гигантских вирусов заподозрили в наличии энергетического метаболизма

У пандоравирусов нашли мембранный градиент и ферменты цикла Кребса

N+1
Боты против уток. Сможет ли искусственный интеллект избавить соцсети от Fake News Боты против уток. Сможет ли искусственный интеллект избавить соцсети от Fake News

Мы считаем, что интернет создан ради нас, но на деле его пользователи — боты

РБК
5 самых смертоносных бриллиантов в истории 5 самых смертоносных бриллиантов в истории

Ты и раньше обходил ювелирные магазины стороной, а теперь будешь их избегать!

Maxim
Двойная игра Двойная игра

Иван Бегтин — о больших данных и мире без секретов

РБК
Баварская советская республика и еще четыре экзотические страны Советов Баварская советская республика и еще четыре экзотические страны Советов

У 15 сестер-республик были и другие близкие родственники!

Maxim
«Люди людей еши» «Люди людей еши»

Неурожайные года и голод на Руси

Дилетант
Продюсер 2020 года: Вячеслав Муругов Продюсер 2020 года: Вячеслав Муругов

Империя Вячеслава Муругова оккупирует все экраны страны

GQ
Мобильный офис Мобильный офис

Как выпускница физфака построила мебельную компанию в России

Forbes
Трубы в порядке: как прочистить засор в раковине Трубы в порядке: как прочистить засор в раковине

Устранить засор в раковине самостоятельно совсем не сложно!

Cosmopolitan
Экономика на высоких технологиях Экономика на высоких технологиях

Развитие ИТ-индустрии в Москвоской области стимулируется дополнительно

РБК
Как зависть помогает заботиться о себе: 5 шагов Как зависть помогает заботиться о себе: 5 шагов

Как использовать зависть себе во благо

Psychologies
Кубок Карьяла – турнир, который сборная России по хоккею запомнит надолго Кубок Карьяла – турнир, который сборная России по хоккею запомнит надолго

Почему победа в товарищеском турнире вдруг стала триумфом сборной России в 2020

GQ
Мороз по коже: что мы чувствуем в присутствии опасных людей? Мороз по коже: что мы чувствуем в присутствии опасных людей?

Стоит ли отмахиваться от реакций своего тела на присутствие других людей?

Psychologies
Три десятилетия Игнобеля: от памяти воды до чистящей слюны Три десятилетия Игнобеля: от памяти воды до чистящей слюны

Открытия, за которые в разные годы присуждали Игнобелевскую премию

Наука и жизнь
Андрей Житинкин. Перемена участи Андрей Житинкин. Перемена участи

Артист пойдет на любую провокацию, любой сложный ход ради успеха

Караван историй
Мечты сбываются Мечты сбываются

Известные люди рассказывают о том, что хорошего случилось с ними в 2020 году

Домашний Очаг
Скука как путь к новым идеям Скука как путь к новым идеям

Скука ассоциируется у нас с чем-то неприятным, негативным, а зря

Psychologies
Их объединила трагедия: трогательная история любви Павла Воли и Ляйсан Утяшевой Их объединила трагедия: трогательная история любви Павла Воли и Ляйсан Утяшевой

Вспоминаем, как развивались отношения Павла Воли и Ляйсан Утяшевой

Cosmopolitan
Засухи приведут к массовой замене древесных видов в лесах Земли Засухи приведут к массовой замене древесных видов в лесах Земли

Из-за засухи деревья в лесах будут заменяться засухоустойчивыми кустарниками

N+1
«Менеджер должен признавать ошибки и не быть слишком заносчивым»: карьерные советы вице-президента Porsche «Менеджер должен признавать ошибки и не быть слишком заносчивым»: карьерные советы вице-президента Porsche

Какие качества нужны для построения успешной карьеры в автомобильной компании

Forbes
Ученые нашли способ сделать бытовую технику компактнее Ученые нашли способ сделать бытовую технику компактнее

Разработка, которая позволит сделать основные компоненты приборов намного меньше

Популярная механика
Нужна ли организму чистка? Нужна ли организму чистка?

Всегда ли детоксикация приносит организму пользу?

Добрые советы
Быт с привилегиями: чем «Городок чекистов» в Екатеринбурге отличался от других советских районов Быт с привилегиями: чем «Городок чекистов» в Екатеринбурге отличался от других советских районов

История и современность района Екатеринбурга, известного как «Городок чекистов»

VC.RU
Тонкости «Перезагрузки»: как стилисты преображают участниц шоу — фото до и после Тонкости «Перезагрузки»: как стилисты преображают участниц шоу — фото до и после

Стилист и визажист рассказывают о лайфхаках, которые помогут отлично выглядеть

Cosmopolitan
100 самых честных правил мужского гардероба. Часть 3: аксессуары 100 самых честных правил мужского гардероба. Часть 3: аксессуары

Бескомпромиссные советы по стилю!

Maxim
Открыть в приложении