С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Я хуже других»: как синдром самозванца мешает работе «Я хуже других»: как синдром самозванца мешает работе

Откуда берётся внутренний «самозванец» и что помогает с ним справляться

VC.RU
Как пережить кризис четверти жизни: 5 простых советов Как пережить кризис четверти жизни: 5 простых советов

Как пережить трудный период кризиса четверти жизни и стать сильнее?

Psychologies
Книга на выходные: как ChatGPT стал самым эффективным копирайтером «Зерокодера» Книга на выходные: как ChatGPT стал самым эффективным копирайтером «Зерокодера»

Отрывок из книги «Искусственный интеллект: путь к новому миру»

Inc.
«Голый маникюр», аура, стемпинг «Голый маникюр», аура, стемпинг

Тренды в маникюре, о которых стыдно не знать

Лиза
Психологический портрет: что такое дисморфофобия, или синдром Квазимодо Психологический портрет: что такое дисморфофобия, или синдром Квазимодо

Что нужно знать о дисморфофобии?

Forbes
Формула любви: как гормоны влияют на твои чувства и можно ли ими управлять? Формула любви: как гормоны влияют на твои чувства и можно ли ими управлять?

Можно ли сделать, чтобы "химия любви" работала в твою пользу?

VOICE

Как живет Бекка Батчер, которая от природы лишена второй груди

VOICE
С дерева – в лечебный чай С дерева – в лечебный чай

Чага березовая: польза, применение, рецепты

Лиза
Почему Мойдодыр из одноименной сказки выбежал из маминой спальни? Оказывается, на то были свои причины Почему Мойдодыр из одноименной сказки выбежал из маминой спальни? Оказывается, на то были свои причины

Кто такой Мойдодыр и почему он был в маминой спальне?

ТехИнсайдер
Старичок, которого не смог поднять Мухаммед Али: трюк Джонни Кулона, который до сих пор используют фокусники Старичок, которого не смог поднять Мухаммед Али: трюк Джонни Кулона, который до сих пор используют фокусники

Джонни Кулон — фокусник в легком веке, которого никто не мог поднять

VOICE
Нейросеть нарисовала несуществующих людей, которые выглядят реалистичнее настоящих снимков Нейросеть нарисовала несуществующих людей, которые выглядят реалистичнее настоящих снимков

Отличить рисунок нейросети от реального фото все тяжелее и тяжелее

ТехИнсайдер
Людмила Зайцева: «Сопротивляться обаянию Олега Ефремова было невозможно» Людмила Зайцева: «Сопротивляться обаянию Олега Ефремова было невозможно»

Я пришла к Станиславу и сказала, что готова сниматься в фильме в любом качестве

Караван историй
Что делать при шутинге? Можно ли без опыта обезоружить преступника? Советы экспертов Что делать при шутинге? Можно ли без опыта обезоружить преступника? Советы экспертов

Выработайте «привычку к безопасности», — рекомендует преподаватель единоборства

ТехИнсайдер
Плечом к плечу: пять лучших современных сериалов о женской дружбе Плечом к плечу: пять лучших современных сериалов о женской дружбе

Несколько отличных историй, которые рассказывают о настоящей силе сестринства

Forbes
Как понять свой цветотип и как он работает при подборе одежды: мнение эксперта Как понять свой цветотип и как он работает при подборе одежды: мнение эксперта

Цветотип — мифический единорог или существующая характеристика внешности?

VOICE
Теория равновесия Теория равновесия

Четыре века продолжались поиски Неведомой Южной Земли

Вокруг света
Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново

Почему Сергей Дягилев ― глыба мирового балета

Правила жизни
Топ-10 самых грязных мест у человека: спорим, первое место вас точно удивит!? Топ-10 самых грязных мест у человека: спорим, первое место вас точно удивит!?

Пройдемся по самым грязным местам человека!

ТехИнсайдер
Сладкие напитки обложат акцизом Сладкие напитки обложат акцизом

Чем это обернется для рынка безалкогольной продукции

Агроинвестор
«Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины «Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины

Глава из книги «Восковые ноги и железные глаза» про феномен вотив

Forbes
Закон детской травмы: что делать, если прошлое мешает жить в настоящем Закон детской травмы: что делать, если прошлое мешает жить в настоящем

Как детские травмы мешают нам быть счастливыми?

Psychologies
«Волковская пивоварня». Пиво имени себя «Волковская пивоварня». Пиво имени себя

Директор «Волковской пивоварни» рассказал нам как живёт российский крафт

4x4 Club
Пик разума: как стресс, плохое настроение и чувство угрозы влияют на наше внимание Пик разума: как стресс, плохое настроение и чувство угрозы влияют на наше внимание

Как как концентрироваться, чтобы быть максимально продуктивным

Forbes
Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project

Подход к оценке социального возврата на инвестиции используется во всем мире

Позитивные изменения
Основатель бренда «Инженер Гарин» — о культуре ношения головных уборов Основатель бренда «Инженер Гарин» — о культуре ношения головных уборов

Как устроена мастерская бренда «Инженер Гарин» и почему многие избегают шапок

РБК
Как перестать бояться и начать коллекционировать искусство Как перестать бояться и начать коллекционировать искусство

Личная коллекция искусства — это привилегия узкого круга людей?

СНОБ
Вред или польза: разрушаем самые популярные мифы о молоке Вред или польза: разрушаем самые популярные мифы о молоке

Вместе с экспертом говорим начистоту о плюсах и минусах молочных продуктов

VOICE
«Пожалей меня»: бонусы роли жертвы, от которых пора избавляться «Пожалей меня»: бонусы роли жертвы, от которых пора избавляться

Чем опасны для психики вторичные выгоды роли жертвы?

Psychologies
Не выходя из дома Не выходя из дома

15 способов найти достойную работу на фрилансе

Лиза
Что делать, если ничего не хочется. Cоветы психолога Что делать, если ничего не хочется. Cоветы психолога

Как по-научному называется состояние «ничего не хочу» и можно ли с ним бороться

Лиза
Открыть в приложении