GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Роботы Figure научились сообща сортировать предметы Роботы Figure научились сообща сортировать предметы

Компания Figure разработала универсальный алгоритм управления роботами

N+1
Рожденная в семье нацистов: как жила Одри Хепбёрн во время войны Рожденная в семье нацистов: как жила Одри Хепбёрн во время войны

Мало кто знает, но Одри Хепбёрн родилась в семье… нацистов. Да-да, именно так!

Cosmopolitan
Разработана умная роботизированная инвалидная коляска Разработана умная роботизированная инвалидная коляска

Как умное кресло-коляска позволяет находить оптимальный путь к пункту назначения

ТехИнсайдер
Козыри разведчика: как принимать решения по методике британских спецслужб Козыри разведчика: как принимать решения по методике британских спецслужб

Отрывок из книги «Прицельное мышление» о главном навыке разведчика

Forbes
Открывая космос Открывая космос

Путеводитель женщины-астронавта по миру миссий, чудес и перемен в космосе

kiozk originals
Итальянский опыт Итальянский опыт

Мы попросили шеф-поваров — преподавателей академии поделиться своими рецептами

Bones
Можно, только осторожно: 5 правил, которые помогут есть сладости и не толстеть Можно, только осторожно: 5 правил, которые помогут есть сладости и не толстеть

Памятка для тех, кто любит сладкое и не планирует от него отказываться

Cosmopolitan
10 необычных примеров противостояния растений и насекомых 10 необычных примеров противостояния растений и насекомых

Вокруг нас каждую секунду кипит битва, на которую мы обычно не обращаем внимания

Популярная механика
Стадию 14 дней назвали необязательной для развития зародышей человека in vitro Стадию 14 дней назвали необязательной для развития зародышей человека in vitro

«Стадия 14 дней» на самом деле необязательна для развития эмбриона человека

N+1
ТОП-5 крошечных домов 2021 года ТОП-5 крошечных домов 2021 года

Самые интересные крошечные дома 2021 года

Популярная механика
Астрономы построили карту релятивистских джетов радиогалактики Центавр А Астрономы построили карту релятивистских джетов радиогалактики Центавр А

Изображение релятивистских джетов активной галактики Центавр А в радиодиапазоне

N+1
Острова открытий Острова открытий

Как спланировать свою поездку на Сахалин, где побывать и что посмотреть?

Отдых в России
Киногид эмигранта Киногид эмигранта

Уезжать и не бояться

GQ
Миром правят деньги: 9 фильмов про миллионеров, которые стоит посмотреть Миром правят деньги: 9 фильмов про миллионеров, которые стоит посмотреть

Герои этих фильмов вызывают зависть, мотивируют, возмущают

Playboy
Пика: история о долгожителе из мира холодного оружия Пика: история о долгожителе из мира холодного оружия

Среди древкового оружия пика – настоящий долгожитель

Популярная механика

Мюзикл — одна из главных форм массового развлечения XX века

Esquire
Искусство оздоровления — как найти путь к себе, отдыхая в Марокко Искусство оздоровления — как найти путь к себе, отдыхая в Марокко

С чего стоит начать путь к себе и как сделать это красиво?

Esquire
Жертвы проклятия короля Тутанхамона (и один избежавший злого рока) Жертвы проклятия короля Тутанхамона (и один избежавший злого рока)

Вот история девяти человек, которая может заставить вас поверить в такие вещи

Популярная механика
Мы такими не были. Правда ли, что зумеры за ЗОЖ, — и почему они такие? Мы такими не были. Правда ли, что зумеры за ЗОЖ, — и почему они такие?

Действительно ли молодые люди курят меньше?

Esquire
Самые красивые автомобили: американский Stutz Самые красивые автомобили: американский Stutz

Американская марка Stutz пережила два рождения

Популярная механика
Великий и ужасный Великий и ужасный

Как Иосиф Сталин полюбил Ивана Грозного

Дилетант
5 открытий, которые были сделаны случайно 5 открытий, которые были сделаны случайно

Иногда изобретателям сопутствует удача, и изобретения получаются по случайности

Популярная механика
Как запустить процесс коллективного воображения и эффективно генерировать идеи Как запустить процесс коллективного воображения и эффективно генерировать идеи

Отрывок из книги «Машина воображения» — о том, как генерировать идеи

СНОБ
Под какао и мандарины: 14 рождественских фильмов на Netflix Под какао и мандарины: 14 рождественских фильмов на Netflix

Киномарафон классических (а то и приторных) праздничных фильмов

Esquire
«Сначала лучше, потом дешевле. Сначала доходы, потом расходы» «Сначала лучше, потом дешевле. Сначала доходы, потом расходы»

Интервью руководителя ВТБ Private Banking Дмитрия Брейтенбихера

Forbes
Певица Юлия Паршута: «Я взяла полный контроль над своей жизнью» Певица Юлия Паршута: «Я взяла полный контроль над своей жизнью»

Юлия Паршута рассказа о походах к психологу, любви к каверам и творческим планах

Cosmopolitan
Как внушить человеку ложные воспоминания и еще четыре любопытных эксперимента Как внушить человеку ложные воспоминания и еще четыре любопытных эксперимента

Быть ученым — значит иметь фантазию, чтобы придумывать необычные эксперименты

Maxim
На берегах Волги На берегах Волги

Памятники природы и волжские просторы – основа для развития туризма

Отдых в России
Марафон обмана Марафон обмана

Факторы, указывающие на то, что на тренингах по обретению счастья тебя разводят

Лиза
К косметологу в 20, 30 и 40 лет: каких процедур требует возраст? К косметологу в 20, 30 и 40 лет: каких процедур требует возраст?

Некоторые процедуры стоит делать как можно раньше, а другие стоит отложить

Cosmopolitan
Открыть в приложении