GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Робособаку научили карабкаться по стенам враспор Робособаку научили карабкаться по стенам враспор

Как инженеры научили робособаку научили эффективно двигаться по вертикали

N+1
Палеогенетики секвенировали древнюю ДНК из пропитанных смолой отложений Палеогенетики секвенировали древнюю ДНК из пропитанных смолой отложений

В плейстоценовых отложениях хорошо сохраняется древняя ДНК

N+1
3D-печать домов, роботы-диагносты, космические двигатели и сверхпрочные ткани: как российские стартапы создают будущее 3D-печать домов, роботы-диагносты, космические двигатели и сверхпрочные ткани: как российские стартапы создают будущее

Подборка историй людей, которые двигают прогресс

ТехИнсайдер
«Ирина Салтыкова клевая»: как изменилась самая сексуальная певица 90-х? «Ирина Салтыкова клевая»: как изменилась самая сексуальная певица 90-х?

Глядя на эти фото кажется — годы не властны над красавицей Ириной Салтыковой

Maxim
Мы выбираем друг друга не случайно Мы выбираем друг друга не случайно

Выбор партнера предопределен всем предшествующим ходом нашей жизни

Psychologies
Почему после еды хочется чего-нибудь вкусненького Почему после еды хочется чего-нибудь вкусненького

Почему после плотного обеда все равно хочется съесть закуску или десерт?

Популярная механика
«В молодости надо зарабатывать, а когда построишь бизнес — отдавать. Бизнес провалится без доброго взгляда на мир» «В молодости надо зарабатывать, а когда построишь бизнес — отдавать. Бизнес провалится без доброго взгляда на мир»

Что Дмитрий Зимин думал о создании компании, просветительстве и предпринимателях

VC.RU
7 советов по подготовке собаки к зиме 7 советов по подготовке собаки к зиме

Собак тоже нужно защитить от холода и реагентов на тротуаре!

Maxim
Бодишейминг: что это и как ему противостоять Бодишейминг: что это и как ему противостоять

В чем причины бодишейминга, чем он опасен и как ему противостоять

РБК
30 м² 30 м²

Квартира с видом на Исаакиевский собор по проекту Владимира Березина

AD
«Матрица: Воскрешение»: искусственный интеллект победил «Матрица: Воскрешение»: искусственный интеллект победил

Разбираемся, стоит ли смотреть «Матрицу: Воскрешение»

GQ
90 м² 90 м²

Квартира в старом фонде, в которую добавили цвета и естественного света

AD
Стальная фиалка: трагичная история актрисы Ии Саввиной Стальная фиалка: трагичная история актрисы Ии Саввиной

За что Ию Саввину прозвали стальной фиалкой

Cosmopolitan
Про животных и людей Про животных и людей

«Корова» Андреа Арнольд: взгляд на человечество глазами животных

Weekend
Artik:«Молодежь выбирает рэп» Artik:«Молодежь выбирает рэп»

Артем Умрихин: кого он ищет на смену солистке и почему надо чаще делать релизы

ЖАРА Magazine
Фантастическая наноскульптура: слон высотой в сотые доли миллиметра Фантастическая наноскульптура: слон высотой в сотые доли миллиметра

Наноскульптуры Джонти Гурвица, которые нельзя увидеть невооруженным глазом

Популярная механика
Почему пора перестать бояться разговоров об онкологии и начать следить за своим здоровьем Почему пора перестать бояться разговоров об онкологии и начать следить за своим здоровьем

Что такое онкология и как она появляется?

GQ
Собираемся на Dakar: как готовятся к заездам участники ралли-марафона Собираемся на Dakar: как готовятся к заездам участники ралли-марафона

Вот уже 44 лет «Дакар» — это мечта для многих мальчишек и девчонок

Популярная механика
Китайские наскальные рисунки оставили палеолитические охотники-собиратели Китайские наскальные рисунки оставили палеолитические охотники-собиратели

Эти произведения искусства создали палеолитические охотники-собиратели

N+1
Польза и вред хурмы для здоровья: советы врача Польза и вред хурмы для здоровья: советы врача

Чем именно хороша хурма и сколько плодов в день есть полезно?

РБК
Вся суть в конце Вся суть в конце

Долгое время нам твердили: главное в сексе - это прелюдия!

Men’s Health
Почему автомобильные шины черного цвета Почему автомобильные шины черного цвета

Из чего сделаны автомобильные шины?

Популярная механика
Все важное и архиважное о фильме «Ассе» Все важное и архиважное о фильме «Ассе»

С нами остались лучшие фильмы Соловьева, они теперь выглядят еще более особенно

Maxim
Как понять, что в желчном пузыре камни: 5 симптомов, которые нельзя игнорировать Как понять, что в желчном пузыре камни: 5 симптомов, которые нельзя игнорировать

Как вовремя заметить, что с желчным пузырем что-то не так?

Cosmopolitan
Приманка для топа: как стартапу привлечь опытного менеджера Приманка для топа: как стартапу привлечь опытного менеджера

Как подобрать подходящего управленца и чем его можно заманить в стартап

Inc.
Операция «Карусель: как работает ноу-хау от инспекторов ГИБДД Операция «Карусель: как работает ноу-хау от инспекторов ГИБДД

Инспекторы ГИБДД рассказали про хитрую схему наказания водителей

РБК
Земля и Марс сформировались из материала внутренней части Солнечной системы Земля и Марс сформировались из материала внутренней части Солнечной системы

Ученые сравнили изотопный состав Земли, Марса и метеоритов

Популярная механика
Труды и дни принцессы Уэльской: почему Диана до сих пор остается кумиром в Британии Труды и дни принцессы Уэльской: почему Диана до сих пор остается кумиром в Британии

Почему Диана до сих пор остается образцом инфлюенс-маркетинга в социальной сфере

Forbes
Гонка за орбитальный кинематограф Гонка за орбитальный кинематограф

Зачем снимать кино в космосе, если есть компьютерная графика?

Популярная механика
На ликвидной волне На ликвидной волне

Объем первичных размещений акций российских компаний установил 10-летний рекорд

Forbes
Открыть в приложении