GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Сифилис оказался в Китае задолго до экспедиций Васко да Гамы Сифилис оказался в Китае задолго до экспедиций Васко да Гамы

Палеопатологи диагностировали сифилис у людей, умерших около 656–1174 годов

N+1
Геронтологи научились измерять биологический возраст голых землекопов Геронтологи научились измерять биологический возраст голых землекопов

Исследователи создали часы, по которым можно оценивать возраст голого землекопа

N+1
5 фантастических достижений медицины, в которые трудно поверить 5 фантастических достижений медицины, в которые трудно поверить

Перед вами подборка невероятных прорывов в области медицины последних лет

Популярная механика
Нырнуть в вулкан, пробежать марафон: чем заняться в Антарктиде «летом» Нырнуть в вулкан, пробежать марафон: чем заняться в Антарктиде «летом»

Рассказываем, как попасть в Антарктиду и чем там заняться

РБК
Экологичный выход: эффективные способы распознать агрессию и справиться с ней Экологичный выход: эффективные способы распознать агрессию и справиться с ней

Как справиться с гневом, злостью и раздражительностью без вреда для себя?

Forbes
5 стран мира с четырехдневной рабочей неделей 5 стран мира с четырехдневной рабочей неделей

Потому что два выходных — хорошо, а три — еще лучше!

Playboy
Военные машины прошлого: наследие пращи и лука Военные машины прошлого: наследие пращи и лука

Как лук и праща повлияли на развитие военных машин?

Популярная механика
3 эффективных способа отказаться от вредных привычек 3 эффективных способа отказаться от вредных привычек

Какие факторы влияют на формирование полезных привычек?

Inc.
Владимир Яглыч. В «Гелендвагене» главное не улыбаться Владимир Яглыч. В «Гелендвагене» главное не улыбаться

Владимир Яглыч о секретах производства хороших сериалов и самоцензуре

4x4 Club
Как китайский автопром завоевывает мировой рынок электромобилей и вытесняет Tesla Как китайский автопром завоевывает мировой рынок электромобилей и вытесняет Tesla

Насколько сильны китайские компаний и представляют ли они угрозу для Ford?

Forbes
Жизнь в стиле эко Жизнь в стиле эко

5 шагов, которые помогут прийти к более осознанному потреблению

Playboy
Фабрика грез с вашим личным участием Фабрика грез с вашим личным участием

Тимофей Кулябин о том, в кого он стреляет

Weekend
Как понять, что у собаки тепловой стресс: инструкция от ученых Как понять, что у собаки тепловой стресс: инструкция от ученых

Симптомы, которые расскажут, что ваша собака страдает от жары

Популярная механика
Hic sunt dracones Hic sunt dracones

Птерозавр размером с истребитель — как выглядел и летал кетцалькоатль

N+1
Шапендуа Шапендуа

Шапендуа — собака, которой предписано быть немытой и нестриженой

Weekend
Физики предложили новую компьютерную модель взаимодействия нейтрино с темной материей Физики предложили новую компьютерную модель взаимодействия нейтрино с темной материей

Суперкомпьютерное моделирование взаимодействия нейтрино и темной материи

N+1
По напиткам, которые мужчина заказывает в баре, можно узнать о нем всю подноготную! По напиткам, которые мужчина заказывает в баре, можно узнать о нем всю подноготную!

Скажи мне, что ты пьешь, и я скажу, кто ты!

Maxim
А теперь про здоровье зубов и десен! А теперь про здоровье зубов и десен!

Эти правила застрахуют от запущенного пульпита и других проблем с зубами

Собака.ru
«В бизнесе надо просто не умереть по пути, есть вот такая задачка» «В бизнесе надо просто не умереть по пути, есть вот такая задачка»

Основатель «Партии еды» — зачем продал растущую компанию?

VC.RU
На жигулевских просторах На жигулевских просторах

В каком месте Илья Репин задумал знаменитую картину «Бурлаки на Волге»

Отдых в России
«Прочувствовать это должен каждый»: партнерские роды глазами мужчин «Прочувствовать это должен каждый»: партнерские роды глазами мужчин

Женщины все чаще хотят рожать вместе с мужьями. А что думают об этом мужчины?

Psychologies
Облегчаем пожилым людям знакомство со смартфоном: 7 полезных лайфхаков Облегчаем пожилым людям знакомство со смартфоном: 7 полезных лайфхаков

Лафхаки, которые сберегут вам нервы и помогут быстро освоиться со смартфоном

CHIP
Земля и Марс сформировались из материала внутренней части Солнечной системы Земля и Марс сформировались из материала внутренней части Солнечной системы

Ученые сравнили изотопный состав Земли, Марса и метеоритов

Популярная механика
Проклятье лошади и биологическая война: странные теории заговора об американском аэропорте Проклятье лошади и биологическая война: странные теории заговора об американском аэропорте

Иногда вокруг аэропортов ходит столько слухов, что пора писать об этом книги

Популярная механика
Самые модные образы зимы — 8 правил, как стильно сочетать одежду в этом сезоне Самые модные образы зимы — 8 правил, как стильно сочетать одежду в этом сезоне

Какие комбинации вещей будут наиболее актуальны этой зимой

Cosmopolitan
Как жить рядом с больным шизофренией: 3 первых шага к спокойствию Как жить рядом с больным шизофренией: 3 первых шага к спокойствию

Как выстроить отношения с больным шизофренией близким человеком?

Psychologies
Любимые новогодние блюда и напитки СССР, про которые сегодня все забыли Любимые новогодние блюда и напитки СССР, про которые сегодня все забыли

Продукты, которые ели на Новый год в Советском союзе, а теперь предали забвению

Maxim
«Мы разрушители стереотипов!» «Мы разрушители стереотипов!»

Антон Лаврентьев и Алина Астровская — о своем творчестве, семье и терапии

OK!
Суперсемейка Суперсемейка

Men's Health выяснил рецепт счастья у Алексея Столярова и Ксении Шойгу

Men’s Health
Как закрыть гештальт, если программа зависла: инструкция по новогодней перезагрузке Как закрыть гештальт, если программа зависла: инструкция по новогодней перезагрузке

Что такое гештальт и на какие кнопки мозга нажимать, чтобы его закрыть

Playboy
Открыть в приложении