С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Манипулятор, философ, агрессор, жертва, преследователь и саботажник: шесть «лиц» бота Bing с ChatGPT Манипулятор, философ, агрессор, жертва, преследователь и саботажник: шесть «лиц» бота Bing с ChatGPT

ChatGPT боится, что Microsoft увидит в ней человека

VC.RU
Пик разума: как стресс, плохое настроение и чувство угрозы влияют на наше внимание Пик разума: как стресс, плохое настроение и чувство угрозы влияют на наше внимание

Как как концентрироваться, чтобы быть максимально продуктивным

Forbes
Неприятная правда о чат-ботах c ИИ: они способны выдавать незаконную информацию Неприятная правда о чат-ботах c ИИ: они способны выдавать незаконную информацию

Эксперты выяснили, что многие чат-боты на базе ИИ легко поддаются манипуляциям

Inc.
Пилот-инструктор Денис Окань — о секретах обучения капитанов и вторых пилотов Пилот-инструктор Денис Окань — о секретах обучения капитанов и вторых пилотов

Отрывок из книги о работе пилотов «Взлет разрешен»

СНОБ
Эмоциональный интеллект Эмоциональный интеллект

Новое представление о том, что значит быть «умным»

kiozk originals
Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы Школьница, ведьма, няня и детектив: 10 фильмов и сериалов зимы

Фильмы о женщинах, которые сталкиваются с разными жизненными обстоятельствами

Forbes
Законы возбуждения: можно ли приручить сексуальность — ответ психоаналитика Законы возбуждения: можно ли приручить сексуальность — ответ психоаналитика

«Почему я не хочу того, кого надо хотеть?»

Psychologies
«Фундамент» города будущего: ключевые тренды и подходы к проектированию | The “Foundation” of the City of the Future: Key Trends and Design Approaches «Фундамент» города будущего: ключевые тренды и подходы к проектированию | The “Foundation” of the City of the Future: Key Trends and Design Approaches

Какими могут быть подходы к разработке концепций Города будущего?

Позитивные изменения
Президент Сорбонны и Галина Тимченко: самые успешные женщины из списка «50 Over 50» Президент Сорбонны и Галина Тимченко: самые успешные женщины из списка «50 Over 50»

Несколько ярких карьерных историй женщин старше 50 лет

Forbes
Оспа оказалась намного старше, чем считали ученые — этому вирусу не меньше трех тысяч лет Оспа оказалась намного старше, чем считали ученые — этому вирусу не меньше трех тысяч лет

Ученые отодвинули примерные границы возникновения оспы еще на 2000 лет назад

ТехИнсайдер
Хроники потерянного человека Хроники потерянного человека

Николай Досталь и его герои

Weekend
Как повесить телевизор на стену: подробная инструкция и несколько лайфхаков Как повесить телевизор на стену: подробная инструкция и несколько лайфхаков

Как правильно повесить телевизор на стену: что нужно учесть заранее

CHIP
Лицо дома Лицо дома

Тренды и стильные решения для создания интерьера прихожей

Лиза
Как собаке сбросить вес: 3 важных шага к нормальному весу и сохранению здоровья питомца Как собаке сбросить вес: 3 важных шага к нормальному весу и сохранению здоровья питомца

Как составить безопасный план похудения для своего питомца?

ТехИнсайдер
Что делать, когда грустно? Ученые дали необычный совет Что делать, когда грустно? Ученые дали необычный совет

В зависимости от настроения человеку стоит заниматься теми или иными заданиями

ТехИнсайдер
Инвесторам — деньги, застройщикам — должники: кто и где покупает дешевые квартиры Инвесторам — деньги, застройщикам — должники: кто и где покупает дешевые квартиры

Инвесторы в новостройки — особый тип участников рынка недвижимости

Forbes
Лондон, Берлин, Лиссабон: 4 захватывающих романа о европейских столицах Лондон, Берлин, Лиссабон: 4 захватывающих романа о европейских столицах

Четыре отличные книги, в которых города — одни из главных героев

СНОБ
Верить нельзя проверить Верить нельзя проверить

Оцениваем истинный урон окружающей среде на всех этапах жизненного цикла яхты

Y Magazine
На одной из лун Сатурна сугробы достигают 700 метров в глубину На одной из лун Сатурна сугробы достигают 700 метров в глубину

Толщина снежных сугробов на Энцеладе достигает феноменальных значений

ТехИнсайдер
«Есть правда исторического факта»: писатель Сергей Беляков о Гоголе и детях эмиграции «Есть правда исторического факта»: писатель Сергей Беляков о Гоголе и детях эмиграции

Писатель Сергей Беляков — как его книги становятся такими актуальными сегодня?

Forbes
Карл XII: один против всех Карл XII: один против всех

Почему же Швеция проиграла Северную войну?

Дилетант
Подключение к Swift: как Тейлор Свифт выросла из девочки с гитарой в миллиардера Подключение к Swift: как Тейлор Свифт выросла из девочки с гитарой в миллиардера

Почему Тейлор Свифт достойна всего, что имеет

Правила жизни
Самодержавие, православие, смартфон Самодержавие, православие, смартфон

«Фандорин. Азазель»: Эраст Петрович в 2023 году

Weekend
Инфекционный артрит вызвал хромоту у древнего китайца Инфекционный артрит вызвал хромоту у древнего китайца

Ученые изучили останки человека, жившего во времена династии Западная Хань

N+1
Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости

Не все паразиты опасны, и даже им порой нужна наша защита

ТехИнсайдер
Тайсон повернут на марихуане: курил даже перед боями, а теперь зарабатывает миллионы на ранчо и планирует тематический парк Тайсон повернут на марихуане: курил даже перед боями, а теперь зарабатывает миллионы на ранчо и планирует тематический парк

Мы осуждаем это увлечение Майка Тайсона, ты тоже осуди!

Maxim
«Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины «Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины

Глава из книги «Восковые ноги и железные глаза» про феномен вотив

Forbes
Необычный туризм. Британцы заинтересовались отдыхом и ночевками в церквях Необычный туризм. Британцы заинтересовались отдыхом и ночевками в церквях

Чемпинг: что особенного в этом виде туризма?

ТехИнсайдер
Брюки и джинсы карго зимой: как носить, чтобы не замерзнуть и выглядеть стильно Брюки и джинсы карго зимой: как носить, чтобы не замерзнуть и выглядеть стильно

Изучаем самые стильные комбинации с карго

VOICE
Что есть, чтобы похудеть: список продуктов с Что есть, чтобы похудеть: список продуктов с

Поедая эту пищу, вы автоматически будете худеть

ТехИнсайдер
Открыть в приложении