С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Спи, учи стихи или умри»: зачем программисту хорошая память и как её улучшить «Спи, учи стихи или умри»: зачем программисту хорошая память и как её улучшить

Для успехов в работе с кодом недостаточно технических знаний и логики

VC.RU
Как заблокировать номер телефона на iOS и Android Как заблокировать номер телефона на iOS и Android

Как включить блокировку неизвестных номеров на смартфоне?

CHIP
Какие ценности есть у ИИ? Ученые изучили Claude и рассказали интересные факты! Какие ценности есть у ИИ? Ученые изучили Claude и рассказали интересные факты!

Как ИИ выражает свои «принципы» в диалогах с людьми

ТехИнсайдер
Операция «Гэг» Операция «Гэг»

Как Леонид Гайдай отказался от намеков и показал мир тотальной идиотии

Weekend
Тихоходкам набили татуировки электронным пучком Тихоходкам набили татуировки электронным пучком

Китайские материаловеды нанесли татуировки живым тихоходкам

N+1
«Кто дарит жизнь — дарит смерть»: как женщины воспринимают старение матери «Кто дарит жизнь — дарит смерть»: как женщины воспринимают старение матери

Как принять старение своей матери?

Psychologies
Медвежья услуга: почему слишком активное желание помочь не всегда приносит пользу Медвежья услуга: почему слишком активное желание помочь не всегда приносит пользу

Отрывок из книги психотерапевта Илсе Санд «Исцеляющие беседы»

Forbes
Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом

Необходимость в застилании постели видят не специалисты по гигиене, а психологи

ТехИнсайдер
Что на самом деле происходит с организмом во время долгого перелета? Это не так безопасно, как вы думали Что на самом деле происходит с организмом во время долгого перелета? Это не так безопасно, как вы думали

Что же происходит с нашим телом за время длительных перелетов?

ТехИнсайдер
Тест Aston Martin DBX707, самого крутого кроссовера в мире Тест Aston Martin DBX707, самого крутого кроссовера в мире

Aston Martin DBX707: заслуживает ли он своей цены?

4x4 Club
Инфекционный артрит вызвал хромоту у древнего китайца Инфекционный артрит вызвал хромоту у древнего китайца

Ученые изучили останки человека, жившего во времена династии Западная Хань

N+1
10 книг для легкого чтения в праздники 10 книг для легкого чтения в праздники

Книги, с которых стоит начать год

Правила жизни
Как пользоваться Midjourney: простая инструкция, чтобы опробовать нейросеть с картинками Как пользоваться Midjourney: простая инструкция, чтобы опробовать нейросеть с картинками

Midjourney: делимся пошаговой инструкцией для начинающих текстовых художников

Правила жизни
Все везде и сразу, но без женщин: самые интересные фильмы-номинанты на «Оскар-2023» Все везде и сразу, но без женщин: самые интересные фильмы-номинанты на «Оскар-2023»

Фильмы — оскаровские номинанты, которые стоит посмотреть

Forbes
Топ-10 лучших бизнес-книг 2022 года для предпринимателей: выбор Forbes Топ-10 лучших бизнес-книг 2022 года для предпринимателей: выбор Forbes

Бизнес-книги, которые помогут расширить кругозор и научиться принимать решения

Forbes
Вечность болот Вечность болот

Самые крупные болотистые территории на Земле

Вокруг света
Почему не стоит использовать гаджеты перед сном? Почему не стоит использовать гаджеты перед сном?

Почему специалисты не рекомендуют использовать гаджеты перед сном?

CHIP
6 медицинских процедур, которых больше всего боятся мужчины 6 медицинских процедур, которых больше всего боятся мужчины

Медицинские процедуры, которые могут довести мужчину до обморока

Maxim
«Одинокий волк» или эффективный бизнесмен? | A “Lone Wolf” or an Effective Businessman? «Одинокий волк» или эффективный бизнесмен? | A “Lone Wolf” or an Effective Businessman?

Сравнительный анализ образов соцпредпринимателя в России, Казахстане и Беларуси

Позитивные изменения
«Легендарная женщина бьюти-индустрии»: Владислав Лисовец прокомментировал смерть Долорес Кондрашовой «Легендарная женщина бьюти-индустрии»: Владислав Лисовец прокомментировал смерть Долорес Кондрашовой

Владислав Лисовец рассказал о роли Долорес Кондрашовой в индустрии красоты

VOICE
Календарь путешествий по России на 2023 год Календарь путешествий по России на 2023 год

12 идей для путешествий по России на 12 месяцев

Лиза
«Разные: мужское и женское глазами приматолога» «Разные: мужское и женское глазами приматолога»

Как наблюдения за животными ставят под сомнение гендерные стереотипы

N+1
Как деревенский дом превратился в буржуазный коттедж Как деревенский дом превратился в буржуазный коттедж

Григорий Ревзин о самой успешной из утопий

Weekend
Александр Демьяненко говорил: Александр Демьяненко говорил:

Людмила Акимовна рассказала о настоящем Александре Демьяненко

Коллекция. Караван историй
Снег, лунатик и испорченный номер: почему в отелях не разрешают открывать окна Снег, лунатик и испорченный номер: почему в отелях не разрешают открывать окна

Что будет, если зимой, в мороз, оставить окно в номере открытым?

Правила жизни
Горячие фото звезд, на которые потрачено 10 млрд долларов Горячие фото звезд, на которые потрачено 10 млрд долларов

Для нас с тобой эти картинки — просто завораживающие виды

Maxim

Самые безумные рекорды из Книги Гиннесса

ТехИнсайдер
Археологи  раскрыли «водную» тайну первого крупного города на юге Африки Археологи  раскрыли «водную» тайну первого крупного города на юге Африки

В древнем Великом Зимбабве была создана специальная система накопления воды

ТехИнсайдер
Как найти угнанную машину: 7 советов Как найти угнанную машину: 7 советов

Как действовать, если машина пропала: инструкция

РБК
Вредная свекровь, сосед или коллега? Как наладить отношения с неприятным человеком — советы коуча Вредная свекровь, сосед или коллега? Как наладить отношения с неприятным человеком — советы коуча

Что делать, если приходится налаживать контакт с тем, кто тебе неприятен?

Psychologies
Открыть в приложении