С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Сплю в середине рабочего дня ради второго «Сплю в середине рабочего дня ради второго

Издание dev.by поговорило с разработчиками о нестандартных графиках

VC.RU
Движение за новую деревню | The New Village Movement Движение за новую деревню | The New Village Movement

Южнокорейский опыт в развитии сельских территорий

Позитивные изменения
Каким мог стать Ту-204: как советские конструкторы искали идеальный авиалайнер Каким мог стать Ту-204: как советские конструкторы искали идеальный авиалайнер

За 15 лет видение о том, каким должен быть Ту-204, несколько раз менялось

ТехИнсайдер
Повелители молний: как управлять небесным электричеством с помощью лазера Повелители молний: как управлять небесным электричеством с помощью лазера

Физики впервые вызвали искусственный разряд молнии с помощью лазерного луча

Forbes
Путь Дзэн Путь Дзэн

Истоки, принципы, практика

kiozk originals
Кто придумал названия месяцев календаря? Кто придумал названия месяцев календаря?

Как появился первый в мире календарь и в честь кого назван апрель

ТехИнсайдер
Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах

Как одежда с припиской "еврозима" на бирке может невовремя подвести тебя

VOICE
Ванильное небо Ванильное небо

Лаконичный и выдержанный интерьер в стиле роскошного минимализма

SALON-Interior
Неизведанный Байкал Неизведанный Байкал

Факты о Байкале, которые мало кто знает

Наука и жизнь
«Сколько ты зарабатываешь?»: топ-5 провокационных вопросов «Сколько ты зарабатываешь?»: топ-5 провокационных вопросов

Как правильно подготовиться к интервью?

Psychologies
Неудавшийся человек. О фильме «Молодость» Дмитрия Давыдова Неудавшийся человек. О фильме «Молодость» Дмитрия Давыдова

Какие фильмы снимают якутские режиссеры

СНОБ
Дорога в «парадиз» Дорога в «парадиз»

В августе 1700 года Пётр начал, без объявления, войну со Швецией

Дилетант
3 простых способа сохранить молодость вашего мозга 3 простых способа сохранить молодость вашего мозга

Есть несколько способов сохранить работоспособность нашего мозга с годами

ТехИнсайдер
Как установить сертификат Минцифры: подробная инструкция Как установить сертификат Минцифры: подробная инструкция

Рассказываем о том, как установить сертификат Минцифры 2022 года

CHIP
Как айсберг в океане: что нужно знать о моржевании, купании в проруби и терапии холодной водой Как айсберг в океане: что нужно знать о моржевании, купании в проруби и терапии холодной водой

Стоит ли купаться в холодной воде и как это делать правильно

Правила жизни
Влад Тирон: Как стать настоящим художником Влад Тирон: Как стать настоящим художником

Актер Влад Тирон — кто такой новый Эраст Фандорин

СНОБ
Я люблю людей: почему в альтруизме важен сухой расчет и к чему может привести благотворительность, основанная на эмоциях Я люблю людей: почему в альтруизме важен сухой расчет и к чему может привести благотворительность, основанная на эмоциях

Уильям Макаскилл рассказывает, как устроен эффективный альтруизм

Правила жизни
Как влюбить его в себя за 240 секунд Как влюбить его в себя за 240 секунд

Способ влюбить в себя кого угодно существует

VOICE
Чтобы выжить, надо верить в лучшее: как «прокачать» в себе оптимизм — советы социального психолога Чтобы выжить, надо верить в лучшее: как «прокачать» в себе оптимизм — советы социального психолога

Что поможет нам выстоять в трудные времена, которые длятся и длятся?

Psychologies
Что будет, если питаться лишь сырым мясом Что будет, если питаться лишь сырым мясом

Может быть, сырым мясом можно питаться постоянно?

ТехИнсайдер
«Черкизово» закрепляется в Приволжье и на Урале «Черкизово» закрепляется в Приволжье и на Урале

Компания «Черкизово» приобрела новые птицеводческие активы

Агроинвестор
Стремление к нулю Стремление к нулю

Смогут ли суперяхты пересекать океаны без использования ископаемого топлива

Y Magazine
Речь о деталях: возможно ли выпустить хороший российский смарфтон Речь о деталях: возможно ли выпустить хороший российский смарфтон

Возможны ли локальные чудеса в жестоком мире потребительской электроники

Правила жизни
Убийственный снегоход. Как обезопасить себя на горном склоне Убийственный снегоход. Как обезопасить себя на горном склоне

Основные правила поведения на снежном склоне

4x4 Club
Горячие фото звезд, на которые потрачено 10 млрд долларов Горячие фото звезд, на которые потрачено 10 млрд долларов

Для нас с тобой эти картинки — просто завораживающие виды

Maxim
Не выходя из дома Не выходя из дома

15 способов найти достойную работу на фрилансе

Лиза
Прикуси язык! Никогда не говори эти 6 фраз своему ребенку Прикуси язык! Никогда не говори эти 6 фраз своему ребенку

Список фраз, произносить которые не стоит даже в пылу горячей ссоры с ребенком

VOICE
Садоводство снижает риск рака. Пора в огород! Садоводство снижает риск рака. Пора в огород!

Общественное садоводство может играть важную роль в предотвращении рака

ТехИнсайдер
8 продуктов питания, которые снижают уровень холестерина в крови 8 продуктов питания, которые снижают уровень холестерина в крови

Изменения в рационе питания могут снизить уровень холестерина в вашем кровотоке

ТехИнсайдер
Как защититься от переработок, которые навязывают лиды: шесть практических советов Как защититься от переработок, которые навязывают лиды: шесть практических советов

Как сохранить work-life balance?

VC.RU
Открыть в приложении