С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Без клея и особой отвёртки: Fairphone — смартфон, который можно разобрать и собрать за несколько минут Без клея и особой отвёртки: Fairphone — смартфон, который можно разобрать и собрать за несколько минут

Fairphone разбирается и собирается за считанные минуты

VC.RU
Аллантоин в косметике: главные факты о пользе и противопоказания Аллантоин в косметике: главные факты о пользе и противопоказания

Аллантоин считается чудодейственным ингредиентом. Разбираемся, так ли это

РБК
Почему беспроводные наушники быстро разряжаются Почему беспроводные наушники быстро разряжаются

Причины, по которым беспроводные наушники быстро разряжаются

CHIP
Частые укусы малярийных комаров вызвали лимфому у детей Частые укусы малярийных комаров вызвали лимфому у детей

Частый контакт с малярийным плазмодием не проходит бесследно для иммунитета

N+1
Возможно, математик раскрыл тайну красивейших птичьих мурмураций Возможно, математик раскрыл тайну красивейших птичьих мурмураций

Математик Энди Рейнольдс, возможно, разгадал тайну птичьих мурмураций

ТехИнсайдер
Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново

Почему Сергей Дягилев ― глыба мирового балета

Правила жизни
«Радость жизни стала исчезать»: прославившиеся в детстве знаменитости, которых эксплуатировали родители «Радость жизни стала исчезать»: прославившиеся в детстве знаменитости, которых эксплуатировали родители

Грустные и шокирующие истории некоторых знаменитостей

VOICE
Анна Гусева Анна Гусева

Знакомьтесь, новое лицо Дома Радио — Анна Гусева

Собака.ru

Как живет Бекка Батчер, которая от природы лишена второй груди

VOICE
Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы

Фильмы о женщинах, которые сталкиваются с разными жизненными обстоятельствами

Forbes
Безногий мужчина сделал себе карьеру акробата. Удивительная история! Безногий мужчина сделал себе карьеру акробата. Удивительная история!

По сути: Эли Боуэн был человеком со ступнями, но без ног. И он стал акробатом

ТехИнсайдер
Из гламурного безумства в тихую гавань: как икона нулевых Пэрис Хилтон смогла остепениться — а верилось с трудом Из гламурного безумства в тихую гавань: как икона нулевых Пэрис Хилтон смогла остепениться — а верилось с трудом

Как Пэрис Хилтон стала примерной женой и матерью

VOICE
«Толстый день»: что делать, когда не радует отражение в зеркале «Толстый день»: что делать, когда не радует отражение в зеркале

Почему мы бываем недовольны своим отражением в зеркале и как с этим справиться

Psychologies
Секс, маргиналы и апокалипсис: 20 лучших британских сериалов последних лет Секс, маргиналы и апокалипсис: 20 лучших британских сериалов последних лет

Собрали для вас подборку сериалов из Великобритании

Правила жизни
Водка с Востока: секреты арака Водка с Востока: секреты арака

Казалось бы, где Восток и где крепкий алкоголь?

Maxim
На Алтае обнаружили ранее неизвестную популяцию среднего голоцена На Алтае обнаружили ранее неизвестную популяцию среднего голоцена

Палеогенетики прочитали древние геномы людей, останки которых нашли в Сибири

N+1
Призраки прошлого: как я жил в Аушвице — воспоминания ребенка узников концлагеря Призраки прошлого: как я жил в Аушвице — воспоминания ребенка узников концлагеря

Рассказ Миколая Гринберга о жизни на территории Аушвица

Psychologies
Наследство Иваны Трамп: что и кому оставила экс-супруга бывшего президента США Наследство Иваны Трамп: что и кому оставила экс-супруга бывшего президента США

Ивана Трамп не оставила своему бывшему супругу в наследство ничего

Forbes
Нам это (не) нужно? | Do We (Not) Need It? Нам это (не) нужно? | Do We (Not) Need It?

Оценка воздействия социальных предприятий в России

Позитивные изменения
Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах

Как одежда с припиской "еврозима" на бирке может невовремя подвести тебя

VOICE
Эксперт по богатым русским Элизабет Шимпфессль: «Все хотели найти хорошего олигарха» Эксперт по богатым русским Элизабет Шимпфессль: «Все хотели найти хорошего олигарха»

Элизабет Шимпфессль — с каких пор миллиардеры начали гордиться крепкими браками

Forbes
6 научно доказанных преимуществ быть владельцем кота 6 научно доказанных преимуществ быть владельцем кота

Кошки способны изменить вашу жизнь к лучшему!

ТехИнсайдер
Inc. Адаптация Inc. Адаптация

Как сохранить устойчивость разума и тела в кризисное время

Inc.
Зачем бобры строят плотины? Зачем бобры строят плотины?

Зачем бобры вообще строят плотины? Они в них живут?

ТехИнсайдер
4 способа ездить на собаках 4 способа ездить на собаках

Да, на собаках можно ездить, причем не только зимой

Maxim
Верить нельзя проверить Верить нельзя проверить

Оцениваем истинный урон окружающей среде на всех этапах жизненного цикла яхты

Y Magazine
Как «исправить» избалованного ребенка: 9 шагов Как «исправить» избалованного ребенка: 9 шагов

Избалованный ребенок привык получать все. Но подобная ситуация обратима!

Psychologies
Крокодиловы слезы: могут ли животные плакать? Крокодиловы слезы: могут ли животные плакать?

Животные не смогут поделиться с нами, грустно им или нет. Почему же они плачут?

ТехИнсайдер
Что делать, когда грустно? Ученые дали необычный совет Что делать, когда грустно? Ученые дали необычный совет

В зависимости от настроения человеку стоит заниматься теми или иными заданиями

ТехИнсайдер
Что будет, если питаться лишь сырым мясом Что будет, если питаться лишь сырым мясом

Может быть, сырым мясом можно питаться постоянно?

ТехИнсайдер
Открыть в приложении