С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«После первого класса вряд ли захочешь в эконом»: в 2000-х энтузиасты летали через всю страну ради миль, но не теперь «После первого класса вряд ли захочешь в эконом»: в 2000-х энтузиасты летали через всю страну ради миль, но не теперь

Почему программы лояльности авиакомпаний больше не актуальны

VC.RU
«Метод серого камня»: как эффективно защищаться от нарциссов и других токсичных личностей «Метод серого камня»: как эффективно защищаться от нарциссов и других токсичных личностей

Что делать, если ваш близкий страдает нарциссическим расстройством личности

Psychologies
Обновления нарочно ломают наши телефоны и еще 9 мифов о гаджетах Обновления нарочно ломают наши телефоны и еще 9 мифов о гаджетах

10 самых распространенных мифов об электронных устройствах

Maxim
Почему йога так популярна: большой разбор Почему йога так популярна: большой разбор

Что стоит за удивительной популярностью йоги?

Psychologies
Эмоциональный интеллект Эмоциональный интеллект

Новое представление о том, что значит быть «умным»

kiozk originals
Наталью Крачковскую Гайдай грозился снять с роли, если она не наберет двадцать килограммов Наталью Крачковскую Гайдай грозился снять с роли, если она не наберет двадцать килограммов

Называть вещи своими именами и не унывать — простые правила жизни от Крачковской

Коллекция. Караван историй
Пилот-инструктор Денис Окань — о секретах обучения капитанов и вторых пилотов Пилот-инструктор Денис Окань — о секретах обучения капитанов и вторых пилотов

Отрывок из книги о работе пилотов «Взлет разрешен»

СНОБ
Дали себе обещание заниматься спортом в новом году? Вот 4 совета для новичков от спортивного ученого Дали себе обещание заниматься спортом в новом году? Вот 4 совета для новичков от спортивного ученого

Снова наступило то самое время, когда все обещают исправно заниматься спортом

Inc.
Ученые разгадали, зачем в Великой Китайской стене были сделаны секретные ходы Ученые разгадали, зачем в Великой Китайской стене были сделаны секретные ходы

Великая Китайская стена до сих пор хранит секреты

Maxim
10 лет спустя: как изменились актеры сериала «Молодежка» с первых серий 10 лет спустя: как изменились актеры сериала «Молодежка» с первых серий

Сегодня мы расскажем, как изменились главные герои сериала «Молодежка»

VOICE
Едим по-русски Едим по-русски

История любимых блюд и продуктов – киселя, квашеной капусты, гречки и щей

Лиза
Роман Федерики Де Паолис «Несовершенные» о шансе на новую жизнь Роман Федерики Де Паолис «Несовершенные» о шансе на новую жизнь

Отрывок из романа о том, как потерять все, но обрести себя

СНОБ
Автономная станция подлёдного лова на шасси Volkswagen Amarok Автономная станция подлёдного лова на шасси Volkswagen Amarok

О чём мечтают любители зимней рыбалки? О хорошем клёве? Нет!

4x4 Club
С чистого листа С чистого листа

Современный расслабленный интерьер с элементами классики

SALON-Interior
Любовь на расстоянии: как родились и развились чувства де Мопассана и Башкирцевой Любовь на расстоянии: как родились и развились чувства де Мопассана и Башкирцевой

Отрывок из книги «Написанные в истории. Письма, изменившие мир»

Psychologies
Не медовый год для пчеловодов Не медовый год для пчеловодов

Производство меда становится все менее доходным

Агроинвестор
Тест Aston Martin DBX707, самого крутого кроссовера в мире Тест Aston Martin DBX707, самого крутого кроссовера в мире

Aston Martin DBX707: заслуживает ли он своей цены?

4x4 Club
Реальная история вампира, орудовавшего в СССР: мужчина искал человеческую кровь для сохранения молодости своей жены Реальная история вампира, орудовавшего в СССР: мужчина искал человеческую кровь для сохранения молодости своей жены

Одно из самых загадочных дел в истории криминалистики СССР

ТехИнсайдер
«Доктор Яд. О том, кто тихо убивал молодых женщин, пока все боялись Джека-потрошителя». Отрывок из книги «Доктор Яд. О том, кто тихо убивал молодых женщин, пока все боялись Джека-потрошителя». Отрывок из книги

Отрывок из тру-крайма об одержимом ядами докторе Томасе Криме

СНОБ
ChatGPT так хорошо пишет научные рефераты, что эксперты не отличают их от написанных человеком. Чем это грозит ChatGPT так хорошо пишет научные рефераты, что эксперты не отличают их от написанных человеком. Чем это грозит

При слепой оценке каждый 3-ий реферат, написанный ChatGPT, приписывают человеку

ТехИнсайдер
Диванные миллиарды: как разработчик сайтов из Владимира построил мебельную компанию Диванные миллиарды: как разработчик сайтов из Владимира построил мебельную компанию

Как компания Divan.ru стала заметным игроком на российском мебельном рынке?

Forbes
Заменит ли когда-нибудь криптовалюта национальные валюты? Заменит ли когда-нибудь криптовалюта национальные валюты?

Остались ли у криптовалют перспективы?

ТехИнсайдер
Традиции святочной недели, которые кажутся дикими современному человеку Традиции святочной недели, которые кажутся дикими современному человеку

Вечерки, коляда и совершенно дикое гадание в овине

Maxim
Как айсберг в океане: что нужно знать о моржевании, купании в проруби и терапии холодной водой Как айсберг в океане: что нужно знать о моржевании, купании в проруби и терапии холодной водой

Стоит ли купаться в холодной воде и как это делать правильно

Правила жизни
Зельфира Трегулова: «То, что отличает русский культурный код от всех остальных, — это свет и надежда» Зельфира Трегулова: «То, что отличает русский культурный код от всех остальных, — это свет и надежда»

Впечатления, которые ты получаешь в музее, могут сохраняться довольно долго

Караван историй
8 способов вывести токсины из организма, которые действительно работают 8 способов вывести токсины из организма, которые действительно работают

Эти 8 способов очистки организма не скажутся негативно на вашем здоровье

ТехИнсайдер
Петровский флот Петровский флот

«Полтава» — первый полноценный линейный корабль русского флота на Балтике

Дилетант
Крик в пустоту: как писатель Иван Шмелев пытался найти и спасти своего сына Крик в пустоту: как писатель Иван Шмелев пытался найти и спасти своего сына

Отрывок из книги «Написанные в истории. Письма, изменившие мир»

Forbes
Гармония с собой: как перестать бояться одиночества Гармония с собой: как перестать бояться одиночества

Действительно ли одиночество такое страшное?

Psychologies
Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение

Почему знак сердца не похож на реальный орган?

ТехИнсайдер
Открыть в приложении