С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Вы теряете навыки, оставаясь на одном месте»: эйчар рассказала, как часто надо менять работу «Вы теряете навыки, оставаясь на одном месте»: эйчар рассказала, как часто надо менять работу

Почему айтишники часто переходят из компании в компанию?

VC.RU
Как строение зубов влияет на форму лица: разбираемся на примере звезд Как строение зубов влияет на форму лица: разбираемся на примере звезд

Как нижняя часть лица влияет на общую привлекательность человека?

VOICE
Образование без серверов: как и зачем использовать облачные технологии вузам Образование без серверов: как и зачем использовать облачные технологии вузам

Использование облачных технологий в процессе образования улучшает успеваемость

Forbes
Как убрать брылы: советы экспертов и 7 способов подтянуть овал лица Как убрать брылы: советы экспертов и 7 способов подтянуть овал лица

Что такое брылы и как от них избавиться?

РБК
Мы выбираем друг друга не случайно Мы выбираем друг друга не случайно

Выбор партнера предопределен всем предшествующим ходом нашей жизни

Psychologies
Как создать бота в Telegram: простая пошаговая инструкция Как создать бота в Telegram: простая пошаговая инструкция

Создать бота в Телеграм намного проще, чем кажется

CHIP
Крик в пустоту: как писатель Иван Шмелев пытался найти и спасти своего сына Крик в пустоту: как писатель Иван Шмелев пытался найти и спасти своего сына

Отрывок из книги «Написанные в истории. Письма, изменившие мир»

Forbes
7 неожиданных фактов о пиве, в которые вы можете сначала не поверить — но они реальны! 7 неожиданных фактов о пиве, в которые вы можете сначала не поверить — но они реальны!

Что может быть такого интересного в пиве? Оказывается, кое-что все-таки есть!

ТехИнсайдер
Почему впервые не выросли продажи товаров для сексуального здоровья Почему впервые не выросли продажи товаров для сексуального здоровья

По итогам 2022 года российский рынок товаров 18+ показал отрицательную динамику

Forbes
20 мифов об алкоголе, в которые пора бы перестать верить 20 мифов об алкоголе, в которые пора бы перестать верить

Задаем странные вопросы врачу-токсикологу Алексею Водовозову

Maxim
«В физики девочки не выживают»: как женщины развивают квантовые технологии в России «В физики девочки не выживают»: как женщины развивают квантовые технологии в России

Женщины, которые развивают квантовые технологии в России

Forbes
Микросхемы, острый соус и IT: как зарабатывают участницы списка «50 Over 50 Asia» Микросхемы, острый соус и IT: как зарабатывают участницы списка «50 Over 50 Asia»

Вдохновляющие истории участниц списка «50 Over 50 Asia»

Forbes
Однажды Джима Моррисона арестовали за показ гениталий и Однажды Джима Моррисона арестовали за показ гениталий и

Музыка часто требует от артистов достаточно высокого уровня раскрепощения

ТехИнсайдер
Как вернуть секс в браке: 7 важных советов — устройте перезагрузку Как вернуть секс в браке: 7 важных советов — устройте перезагрузку

Что делать, если партнеры больше не испытывают прежнего желания?

Psychologies
Она изменила цвет кожи и сделала себе самую большую грудь в Европе, но это еще не все! История преображения Она изменила цвет кожи и сделала себе самую большую грудь в Европе, но это еще не все! История преображения

Девушка немецкого происхождения решила изменить свое тело... и свою жизнь

ТехИнсайдер
Топ-10 самых грязных мест у человека: спорим, первое место вас точно удивит!? Топ-10 самых грязных мест у человека: спорим, первое место вас точно удивит!?

Пройдемся по самым грязным местам человека!

ТехИнсайдер
Все актеры, игравшие Фандорина в кино — кто лучше всех попал в образ самого везучего сыщика? Все актеры, игравшие Фандорина в кино — кто лучше всех попал в образ самого везучего сыщика?

Кто из российских актеров воссоздавал образ Эраста Петровича Фандорина

VOICE
Одна в поле воин: как женщины остаются наедине с проблемами и ждать ли подкрепления Одна в поле воин: как женщины остаются наедине с проблемами и ждать ли подкрепления

Как женщине найти опору в изменившейся реальности

Forbes
Вот почему в западных школах учатся 12 лет. Меняем систему образования в РФ? Вот почему в западных школах учатся 12 лет. Меняем систему образования в РФ?

Рассматриваем несколько необычных фактов о школьном образовании на Западе

ТехИнсайдер
Кто на самом деле изобрел унитаз и при чем тут сантехник Крэппер: история против легенды Кто на самом деле изобрел унитаз и при чем тут сантехник Крэппер: история против легенды

Возможно, вы слышали легенду об английском сантехнике Томасе Крэппере

ТехИнсайдер
Инвесторам — деньги, застройщикам — должники: кто и где покупает дешевые квартиры Инвесторам — деньги, застройщикам — должники: кто и где покупает дешевые квартиры

Инвесторы в новостройки — особый тип участников рынка недвижимости

Forbes
Влад Тирон: Как стать настоящим художником Влад Тирон: Как стать настоящим художником

Актер Влад Тирон — кто такой новый Эраст Фандорин

СНОБ
Как выходцы из «Яндекса» придумали помощника для сборки Lego и привлекли $1,6 млн Как выходцы из «Яндекса» придумали помощника для сборки Lego и привлекли $1,6 млн

Как выходцы из «Яндекса» запустили успешное приложение Brickit

Forbes
Вредная свекровь, сосед или коллега? Как наладить отношения с неприятным человеком — советы коуча Вредная свекровь, сосед или коллега? Как наладить отношения с неприятным человеком — советы коуча

Что делать, если приходится налаживать контакт с тем, кто тебе неприятен?

Psychologies
Не только Алек Болдуин: голливудские знаменитости, которые совершили непредумышленные убийства Не только Алек Болдуин: голливудские знаменитости, которые совершили непредумышленные убийства

У этих звезд были серьезные проблемы с законом

VOICE
Renault ушел с «АвтоВАЗа»: что он после себя оставил и какие перспективы у автозавода Renault ушел с «АвтоВАЗа»: что он после себя оставил и какие перспективы у автозавода

Как сейчас живут «Автоваз» и Тольятти?

Forbes
7 необычных музеев Москвы 7 необычных музеев Москвы

Мы собрали семь самых интересных экспозиций в Москве

Караван историй
Королева ненадежности: самая плохая винтовка в мире Королева ненадежности: самая плохая винтовка в мире

Автоматическая винтовка, которая давала один отказ на 30-60 выстрелов

Maxim
Темные джинсы - на выброс: стилисты показали 7 брюк, которые модные девушки будут носить весь год Темные джинсы - на выброс: стилисты показали 7 брюк, которые модные девушки будут носить весь год

Самые трендовые брюки ближайших сезонов

VOICE
Как привести себя в порядок после новогодних праздников? Простые советы для всех! Как привести себя в порядок после новогодних праздников? Простые советы для всех!

Как избавиться от лишних килограммов после затянувшихся праздников?

ТехИнсайдер
Открыть в приложении