С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Книги редко становятся бестселлерами просто так — приходится похлопотать»: как они попадают в списки The New York Times «Книги редко становятся бестселлерами просто так — приходится похлопотать»: как они попадают в списки The New York Times

Как писатели получают места в рейтинге бестселлеров от NYT

VC.RU
Думай как миллионер: какие мысли помогут разбогатеть Думай как миллионер: какие мысли помогут разбогатеть

Разница между бедными и богатыми — в отношении к деньгам

Psychologies
Почему телемедицина в России пока остается нишевым продуктом Почему телемедицина в России пока остается нишевым продуктом

Телемедицина в России: стоит ли записываться на удаленный прием к врачу?

РБК
Что такое слепые прослушивания и помогают ли они бороться с дискриминацией Что такое слепые прослушивания и помогают ли они бороться с дискриминацией

Действительно ли слепые отборы работают?

Forbes
Все, везде и сразу: почему после отпуска мы чувствуем себя еще более уставшими и что с этим делать Все, везде и сразу: почему после отпуска мы чувствуем себя еще более уставшими и что с этим делать

Как проявляется постотпускная усталость и что помогает вернуться в форму

Правила жизни
Как быстро убрать синяки под глазами: топ-5 полезных лайфхаков от косметолога Как быстро убрать синяки под глазами: топ-5 полезных лайфхаков от косметолога

Самые частые причины появления синяков под глазами

VOICE
Нет ничего нарядного? Как из обычного гардероба сделать вечерний — 3 секретных трюка Нет ничего нарядного? Как из обычного гардероба сделать вечерний — 3 секретных трюка

Как составить стильный праздничный наряд, при этом не потратив сутки на шоппинг

VOICE
Традиции святочной недели, которые кажутся дикими современному человеку Традиции святочной недели, которые кажутся дикими современному человеку

Вечерки, коляда и совершенно дикое гадание в овине

Maxim
Шторм какой силы оторвёт вас от земли и унесёт к лешему? Шторм какой силы оторвёт вас от земли и унесёт к лешему?

Какой ветер опасен лично для вас?

ТехИнсайдер
5 странностей советских квартир, которые в современных домах уже не встретишь 5 странностей советских квартир, которые в современных домах уже не встретишь

В квартирах времен СССР нередко встречались странные детали

ТехИнсайдер
Как бы выглядел дом, в котором могло жить все население Земли Как бы выглядел дом, в котором могло жить все население Земли

Собирай свои вещи, мы все переезжаем в дом, который будет строить весь мир!

ТехИнсайдер
Как подтянуть фигуру к весне: 5 уникальных упражнений для дома — справится любая! Как подтянуть фигуру к весне: 5 уникальных упражнений для дома — справится любая!

Лови крутую программу тренировок для встречи весны во всеоружии

VOICE
На Алтае обнаружили ранее неизвестную популяцию среднего голоцена На Алтае обнаружили ранее неизвестную популяцию среднего голоцена

Палеогенетики прочитали древние геномы людей, останки которых нашли в Сибири

N+1
Самые обедневшие в 2022 году российские миллиардеры Самые обедневшие в 2022 году российские миллиардеры

Кто и почему больше всех потерял из миллиардеров России?

Forbes
Закон детской травмы: что делать, если прошлое мешает жить в настоящем Закон детской травмы: что делать, если прошлое мешает жить в настоящем

Как детские травмы мешают нам быть счастливыми?

Psychologies
«Глаза бы мои не видели!» «Глаза бы мои не видели!»

11 опасных фраз, которые провоцируют болезни

Лиза
Обойдемся без капель Обойдемся без капель

12 способов снять отек и заложенность носа

Лиза
«Голый маникюр», аура, стемпинг «Голый маникюр», аура, стемпинг

Тренды в маникюре, о которых стыдно не знать

Лиза
Какой силы может достигать землетрясение? Какой силы может достигать землетрясение?

Могут ли землетрясения стать сильнее 9,5 баллов?

ТехИнсайдер
Безногий мужчина сделал себе карьеру акробата. Удивительная история! Безногий мужчина сделал себе карьеру акробата. Удивительная история!

По сути: Эли Боуэн был человеком со ступнями, но без ног. И он стал акробатом

ТехИнсайдер
Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах Что такое еврозима и почему этот термин может стоить тебе больших денег: так ты обманываешься в магазинах

Как одежда с припиской "еврозима" на бирке может невовремя подвести тебя

VOICE
Шипучка из США: история всемирно известной Coca-Cola Шипучка из США: история всемирно известной Coca-Cola

Как началась история Coca-Cola?

ТехИнсайдер
Национальная гордость: 5 суперкаров из неожиданных стран Национальная гордость: 5 суперкаров из неожиданных стран

Необычные спортивные автомобили из Афганистана, Ливана, Индии, Ливии и Марокко

РБК
Крокодиловы слезы: могут ли животные плакать? Крокодиловы слезы: могут ли животные плакать?

Животные не смогут поделиться с нами, грустно им или нет. Почему же они плачут?

ТехИнсайдер
Мария Куликова: «Я очень изменилась, всегда весело расплескивала себя, а сейчас нет» Мария Куликова: «Я очень изменилась, всегда весело расплескивала себя, а сейчас нет»

За то время, пока создавался «Склифосовский», многое случилось

Караван историй
«Момент истины»: что значит утро после первого секса — интервью социолога «Момент истины»: что значит утро после первого секса — интервью социолога

Первым совместным утром начинает яснее видеться продолжение завязавшейся истории

Psychologies
Я люблю людей: почему в альтруизме важен сухой расчет и к чему может привести благотворительность, основанная на эмоциях Я люблю людей: почему в альтруизме важен сухой расчет и к чему может привести благотворительность, основанная на эмоциях

Уильям Макаскилл рассказывает, как устроен эффективный альтруизм

Правила жизни
Биометрические границы и аборты при помощи нанороботов: страшный сценарий развития ИИ Биометрические границы и аборты при помощи нанороботов: страшный сценарий развития ИИ

Апокалиптический сценарий будущего от футуролога Эми Уэбб

Forbes
В Фиванском некрополе обнаружили гробницу членов царской семьи времен XVIII династии В Фиванском некрополе обнаружили гробницу членов царской семьи времен XVIII династии

Археологи сообщили об открытии в Фиванском некрополе ранее неизвестной гробницы

N+1
Ученые разработали новый способ заморозки без вреда для здоровья и окружающей среды Ученые разработали новый способ заморозки без вреда для здоровья и окружающей среды

Поздоровайтесь с новым ионокалорическим охлаждением

ТехИнсайдер
Открыть в приложении