С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

От «компьютера будущего» до «убыточной ямы»: почему провалилась разработка «умной» колонки от Amazon От «компьютера будущего» до «убыточной ямы»: почему провалилась разработка «умной» колонки от Amazon

Почему колонка от Amazon стала не революционным продуктом, а убытком?

VC.RU
Как сделать оральный секс удачным? Советы, которые нужны каждому! Как сделать оральный секс удачным? Советы, которые нужны каждому!

Несколько простых фактов о том, как можно улучшить свою сексуальную жизнь

ТехИнсайдер
Почему телемедицина в России пока остается нишевым продуктом Почему телемедицина в России пока остается нишевым продуктом

Телемедицина в России: стоит ли записываться на удаленный прием к врачу?

РБК
«Это мощное зеркало для города»: как меняется отношение людей и власти к паблик-арту «Это мощное зеркало для города»: как меняется отношение людей и власти к паблик-арту

Чем паблик-арт отличается от стрит-арта и почему меняется отношение к нему?

Forbes
Используй ложку и телефон: 20 способов доставить себе удовольствие Используй ложку и телефон: 20 способов доставить себе удовольствие

Двадцать разных способов мастурбации на любой вкус и цвет

Cosmopolitan
Скопцы — сектанты-кастраты: зачем русские люди добровольно лишали себя гениталий? Скопцы — сектанты-кастраты: зачем русские люди добровольно лишали себя гениталий?

Скопцы — самая загадочная и влиятельная секта России

ТехИнсайдер
Галина Юзефович x Феликс Сандалов Галина Юзефович x Феликс Сандалов

Меня утешает мысль, что оставленные книги могут случайно попасть в нужные руки

СНОБ
Что будет, если есть только шоколад целый месяц Что будет, если есть только шоколад целый месяц

Давайте узнаем, что будет, если есть только шоколад целый месяц!

ТехИнсайдер
Как быстро и просто отмыть йод и зеленку с любой поверхности: самые нужные лайфхаки Как быстро и просто отмыть йод и зеленку с любой поверхности: самые нужные лайфхаки

Справиться с пятнами от зеленки и йода помогут некоторые хитрости

ТехИнсайдер
Секс, фантазии или тайная связь: психологи выяснили, что психопаты считают неверностью Секс, фантазии или тайная связь: психологи выяснили, что психопаты считают неверностью

Психопаты склонны воспринимать сексуальные фантазии партнера о других как измену

Psychologies
Украсть ребенка Украсть ребенка

Психолог рассказывает об одном из самых необычных случаев в ее практике

СНОБ
Потерял паспорт и прожил в терминале аэропорта 18 лет: нелепая история Мехрана Нассери Потерял паспорт и прожил в терминале аэропорта 18 лет: нелепая история Мехрана Нассери

История человека, который на 18 лет стал узником терминала аэропорта во Франции

ТехИнсайдер
Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому Пользы на 1000%! Удивительные лайфхаки с силикагелем, о которых полезно знать каждому

Делимся необычными советами: как применить старые пакетики с силикагелем

ТехИнсайдер
Что на самом деле происходит с организмом во время долгого перелета? Это не так безопасно, как вы думали Что на самом деле происходит с организмом во время долгого перелета? Это не так безопасно, как вы думали

Что же происходит с нашим телом за время длительных перелетов?

ТехИнсайдер
Доминирование, релакс или абсурд? Что такое чувство юмора и как его развить Доминирование, релакс или абсурд? Что такое чувство юмора и как его развить

Все ученые по-своему трактуют наличие у нас чувства юмора

Psychologies
Породы собак, которых нельзя держать в квартире Породы собак, которых нельзя держать в квартире

Если вы решили завести четырехлапого друга, подойдите к этому вопросу с умом!

ТехИнсайдер
Торможение на повороте: почему китайская экономика не вернется к былому росту Торможение на повороте: почему китайская экономика не вернется к былому росту

Китаю необходимо переходить на внутренние источники развития

Forbes
Качели глобализации: почему странам мира все сложнее снижать торговые барьеры Качели глобализации: почему странам мира все сложнее снижать торговые барьеры

Почему люди не могут правильно распределить выигрыш от глобализации

Forbes
Фабрика радости: 7 способов повысить уровень серотонина Фабрика радости: 7 способов повысить уровень серотонина

Как устроен серотонин и что влияет на его уровень?

Правила жизни
«Не то же самое, что в одиночку»: зачем мастурбировать вдвоем — мнение сексолога «Не то же самое, что в одиночку»: зачем мастурбировать вдвоем — мнение сексолога

Из такого «одинокого» занятия, как мастурбация, может родиться наслаждение двоих

Psychologies
Чек-лист для видеорегистратора: как не остаться без важного видео Чек-лист для видеорегистратора: как не остаться без важного видео

7 тонкостей видеорегистратора, на которые надо обратить внимание

CHIP
Неожиданные факты о советских «панельках» — вы удивитесь! Неожиданные факты о советских «панельках» — вы удивитесь!

Знаете, зачем в квартирах панельных домов устанавливали двойные двери?

ТехИнсайдер
Стекло под ногами, или как дневной свет попал в подвал Стекло под ногами, или как дневной свет попал в подвал

Город — словно остров в океане времени

Наука и жизнь
Почему ставить цели вредно: 3 главные причины Почему ставить цели вредно: 3 главные причины

Как научиться правильно планировать, чтобы не потерять мотивацию?

Psychologies
Триллионы долларов: сколько метавселенная принесет человечеству (и как на ней заработать) Триллионы долларов: сколько метавселенная принесет человечеству (и как на ней заработать)

Отрывок из книги «Метавселенная: как она меняет наш мир»

Inc.
Скучные, тягомотные фильмы, почему-то ставшие популярными Скучные, тягомотные фильмы, почему-то ставшие популярными

Девять кинолент, под которые можно заснуть даже после энергетика

Maxim
Непризнанные герои: список продуктов, которые помогают побороть рак Непризнанные герои: список продуктов, которые помогают побороть рак

Врачи рекомендуют включить в свой рацион эти «противораковые продукты»

ТехИнсайдер
Ваше такси подлетает Ваше такси подлетает

Возможность взмыть на такси над пробками успешно ищут в компании Airbus

Y Magazine
Тестируем электромобиль Skywell ET5: почем бесплатное электричество? Тестируем электромобиль Skywell ET5: почем бесплатное электричество?

Тестируем электромобиль Skywell ET5 зимой и за городом

Maxim
Как выглядел обладатель знаменитого Как выглядел обладатель знаменитого

Иерихонский череп обрел новое лицо благодаря новейшим методам реконструкции

ТехИнсайдер
Открыть в приложении