С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Мессенджер в голове: есть ли перспективы у «техно-телепатии» Мессенджер в голове: есть ли перспективы у «техно-телепатии»

Как людям обмениваться мыслями, не став жертвами унификации

VC.RU
Аура океана Аура океана

50‑метровая стальная яхта Ocean Z строилась on speculation

Y Magazine
Электростимуляция заставила жука-киборга лезть на стену Электростимуляция заставила жука-киборга лезть на стену

Как электрическая стимуляция заставляет двигаться жука-киборга

N+1
Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы

Фильмы о женщинах, которые сталкиваются с разными жизненными обстоятельствами

Forbes
Помело: польза, вред, как есть и что приготовить — рецепт шеф-повара Помело: польза, вред, как есть и что приготовить — рецепт шеф-повара

Чем полезно помело и как правильно его есть?

РБК
«Свежатинка»: самые обсуждаемые новые фильмы от женщин-режиссеров «Свежатинка»: самые обсуждаемые новые фильмы от женщин-режиссеров

Самые интересные «женские» премьеры 2022 года

Forbes
Renault Arkana. Ответ диванным экспертам Renault Arkana. Ответ диванным экспертам

С момента появления этого автомобиля мы слышали Renault Arkana только стоны

4x4 Club
«Не хочу провести жизнь за компом»: белоруска уволилась из Google, чтобы путешествовать «дикарём» «Не хочу провести жизнь за компом»: белоруска уволилась из Google, чтобы путешествовать «дикарём»

Как Виктория Пилинко с одним рюкзаком отправилась в путешествие по миру

VC.RU
Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому

Делимся необычными советами: как применить старые пакетики с силикагелем

ТехИнсайдер
Как понравиться на первом свидании Как понравиться на первом свидании

О чем говорить на первом свидании? Как понравиться?

Psychologies
Как разобрать гардероб и правильно хранить вещи: 5 простых советов Как разобрать гардероб и правильно хранить вещи: 5 простых советов

Структуризация шкафа точно снизит градус хаоса в жизни. Вот несколько советов

Правила жизни
Украсть ребенка Украсть ребенка

Психолог рассказывает об одном из самых необычных случаев в ее практике

СНОБ
«Одинокий волк» или эффективный бизнесмен? | A “Lone Wolf” or an Effective Businessman? «Одинокий волк» или эффективный бизнесмен? | A “Lone Wolf” or an Effective Businessman?

Сравнительный анализ образов соцпредпринимателя в России, Казахстане и Беларуси

Позитивные изменения
Как защитить личные границы: 7 советов от практических психологов Как защитить личные границы: 7 советов от практических психологов

Как защитить свое персональное пространство? Рекомендации наших экспертов

Psychologies

Самые безумные рекорды из Книги Гиннесса

ТехИнсайдер
Хроники потерянного человека Хроники потерянного человека

Николай Досталь и его герои

Weekend
«Он ставит на место внутренний компас»: Фекла Толстая о наследии великого прапрадеда «Он ставит на место внутренний компас»: Фекла Толстая о наследии великого прапрадеда

О новом прочтении классических текстов Фекла Толстая рассказала в интервью

Forbes
«Я жертва, вы мне должны»: как быть страдальцем и всеми манипулировать «Я жертва, вы мне должны»: как быть страдальцем и всеми манипулировать

Кто эти люди, сидящие на игле собственной «несчастности»?

Psychologies
Пилатес для начинающих Пилатес для начинающих

Пилатесом довольно легко заниматься, не выходя из дома

Лиза
Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости

Не все паразиты опасны, и даже им порой нужна наша защита

ТехИнсайдер
Как бы выглядел дом, в котором могло жить все население Земли Как бы выглядел дом, в котором могло жить все население Земли

Собирай свои вещи, мы все переезжаем в дом, который будет строить весь мир!

ТехИнсайдер
Привычные продукты, о составе которых вы и не догадывались: из чего делают крабовые палочки, гематоген и майонез Привычные продукты, о составе которых вы и не догадывались: из чего делают крабовые палочки, гематоген и майонез

Хотите узнать, из чего делают майонез, желатин и крабовые палочки?

ТехИнсайдер
Автономная станция подлёдного лова на шасси Volkswagen Amarok Автономная станция подлёдного лова на шасси Volkswagen Amarok

О чём мечтают любители зимней рыбалки? О хорошем клёве? Нет!

4x4 Club
Как строение зубов влияет на форму лица: разбираемся на примере звезд Как строение зубов влияет на форму лица: разбираемся на примере звезд

Как нижняя часть лица влияет на общую привлекательность человека?

VOICE
Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах

Как одежда с припиской "еврозима" на бирке может невовремя подвести тебя

VOICE
Куклы детям не игрушка. Чем пугает хоррор «М3ГАН», о котором все говорят? Куклы детям не игрушка. Чем пугает хоррор «М3ГАН», о котором все говорят?

Неужели страшной куклой опять кого-то можно напугать?

Правила жизни
3 уровня финансовых отношений — проверьте вашу пару 3 уровня финансовых отношений — проверьте вашу пару

Дело не в доходах и расходах, а в уровне финансовых отношений

Psychologies
Парафилия: почему людей возбуждают странные вещи — 3 любопытных факта Парафилия: почему людей возбуждают странные вещи — 3 любопытных факта

Почему и как формируется парафилия

Psychologies
Как правильно разморозить холодильник и не сломать его: пошаговая инструкция Как правильно разморозить холодильник и не сломать его: пошаговая инструкция

Как грамотно разморозить холодильник и при этом ничего не испортить

ТехИнсайдер
Дорогая, я уменьшил людей: почему на Сахалине самые обычные растения достигают гигантских размеров? Дорогая, я уменьшил людей: почему на Сахалине самые обычные растения достигают гигантских размеров?

В чем причина гигантизма сахалинских растений?

ТехИнсайдер
Открыть в приложении