С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Все каждый день приходили с надеждой, что вчера был самый плохой день»: как HeadHunter переживала кризис 2008 года «Все каждый день приходили с надеждой, что вчера был самый плохой день»: как HeadHunter переживала кризис 2008 года

Отрывок из книги «HeadHunter: успех неизбежен» Михаила Жукова

VC.RU
Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому

Делимся необычными советами: как применить старые пакетики с силикагелем

ТехИнсайдер
Я, мы, робот: как андроиды проникли в наши дома и головы Я, мы, робот: как андроиды проникли в наши дома и головы

О том, как роботы медленно, но верно становятся частью нашей жизни

Forbes
«У нас рождались дети»: Светлана Иванова рассказала о закулисье съемок сериала «Тест на беременность» «У нас рождались дети»: Светлана Иванова рассказала о закулисье съемок сериала «Тест на беременность»

Актрисы рассказали о своей работе в новом сезоне сериала «Тест на беременность»

VOICE
Смертельно опасный тренд TikTok: почему мужчины бреют ресницы и чем это грозит? Смертельно опасный тренд TikTok: почему мужчины бреют ресницы и чем это грозит?

Для чего человеку нужны ресницы и что будет, если их сбрить?

Inc.
Тайсон повернут на марихуане: курил даже перед боями, а теперь зарабатывает миллионы на ранчо и планирует тематический парк Тайсон повернут на марихуане: курил даже перед боями, а теперь зарабатывает миллионы на ранчо и планирует тематический парк

Мы осуждаем это увлечение Майка Тайсона, ты тоже осуди!

Maxim
Вспомнить все: 10 странных фанатских теорий о Гарри Поттере Вспомнить все: 10 странных фанатских теорий о Гарри Поттере

Теории поттероманов о мире чародейства и волшебства.

Правила жизни
3 уровня финансовых отношений — проверьте вашу пару 3 уровня финансовых отношений — проверьте вашу пару

Дело не в доходах и расходах, а в уровне финансовых отношений

Psychologies
Медвежья услуга: почему слишком активное желание помочь не всегда приносит пользу Медвежья услуга: почему слишком активное желание помочь не всегда приносит пользу

Отрывок из книги психотерапевта Илсе Санд «Исцеляющие беседы»

Forbes
Как пить — каждый день понемногу или раз в неделю, но много? Как пить — каждый день понемногу или раз в неделю, но много?

Как лучше пить алкоголь?

Maxim
Триллионы долларов: сколько метавселенная принесет человечеству (и как на ней заработать) Триллионы долларов: сколько метавселенная принесет человечеству (и как на ней заработать)

Отрывок из книги «Метавселенная: как она меняет наш мир»

Inc.
Что делать, если ничего не хочется. Cоветы психолога Что делать, если ничего не хочется. Cоветы психолога

Как по-научному называется состояние «ничего не хочу» и можно ли с ним бороться

Лиза
Блестящий результат Блестящий результат

8 способов вернуть ванной комнате безупречную чистоту

Лиза
Лекарство от астмы оказалось способно возвращать утраченные воспоминания Лекарство от астмы оказалось способно возвращать утраченные воспоминания

«Забытые» воспоминания могут быть восстановлены

ТехИнсайдер
7 классных идей, как повторно использовать пустые пластиковые бутылки 7 классных идей, как повторно использовать пустые пластиковые бутылки

Старые бутылки разного объема можно применить в хозяйстве

ТехИнсайдер
Образ жизни Образ жизни

Дизайнер Леонид Алексеев задает новые стандарты петербургского добрососедства

Собака.ru
Модернистский храм, барный кластер в Замоскворечье и закопанный гелендваген: знаковые проекты архитектора Валерия Лизунова Модернистский храм, барный кластер в Замоскворечье и закопанный гелендваген: знаковые проекты архитектора Валерия Лизунова

Подборка самых интересных проектов Валерия Лизунова и его бюро

СНОБ
21 год сражений 21 год сражений

Северная война полностью изменила географию Балтийского региона

Дилетант
Прикуси язык! Никогда не говори эти 6 фраз своему ребенку Прикуси язык! Никогда не говори эти 6 фраз своему ребенку

Список фраз, произносить которые не стоит даже в пылу горячей ссоры с ребенком

VOICE
Как разобрать гардероб и правильно хранить вещи: 5 простых советов Как разобрать гардероб и правильно хранить вещи: 5 простых советов

Структуризация шкафа точно снизит градус хаоса в жизни. Вот несколько советов

Правила жизни
Аллантоин в косметике: главные факты о пользе и противопоказания Аллантоин в косметике: главные факты о пользе и противопоказания

Аллантоин считается чудодейственным ингредиентом. Разбираемся, так ли это

РБК
Что будет, если вы перестанете спать Что будет, если вы перестанете спать

Как долго может длиться бессонная “ночь”?

ТехИнсайдер
Не медовый год для пчеловодов Не медовый год для пчеловодов

Производство меда становится все менее доходным

Агроинвестор
Брюки и джинсы карго зимой: как носить, чтобы не замерзнуть и выглядеть стильно Брюки и джинсы карго зимой: как носить, чтобы не замерзнуть и выглядеть стильно

Изучаем самые стильные комбинации с карго

VOICE
Где еще покупать одежду: 7 достойных российских массмаркет-брендов на замену ушедшим Где еще покупать одежду: 7 достойных российских массмаркет-брендов на замену ушедшим

Недорогие и приятные магазины, куда теперь стоит ходить вместо H&M и Uniqlo

Правила жизни
Скопцы — сектанты-кастраты: зачем русские люди добровольно лишали себя гениталий? Скопцы — сектанты-кастраты: зачем русские люди добровольно лишали себя гениталий?

Скопцы — самая загадочная и влиятельная секта России

ТехИнсайдер
Как деревенский дом превратился в буржуазный коттедж Как деревенский дом превратился в буржуазный коттедж

Григорий Ревзин о самой успешной из утопий

Weekend
Страшная трагедия СССР: тайна крушения парохода «Адмирал Нахимов», в котором погибло почти 500 человек Страшная трагедия СССР: тайна крушения парохода «Адмирал Нахимов», в котором погибло почти 500 человек

31 августа 1986 года в акватории Новороссийской бухты столкнулись два судна

ТехИнсайдер
Необычный туризм. Британцы заинтересовались отдыхом и ночевками в церквях Необычный туризм. Британцы заинтересовались отдыхом и ночевками в церквях

Чемпинг: что особенного в этом виде туризма?

ТехИнсайдер
Британка начала новую жизнь к 60 годам. Она отправилась в Китай и Куала Лумпур, проехавшись по транссибирской магистрали Британка начала новую жизнь к 60 годам. Она отправилась в Китай и Куала Лумпур, проехавшись по транссибирской магистрали

Как Нурайни Мидин набралась смелости осуществить свою давнюю мечту

ТехИнсайдер
Открыть в приложении