GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Длительное ожирение вызвало экспрессию биомаркеров старения в молодом возрасте Длительное ожирение вызвало экспрессию биомаркеров старения в молодом возрасте

Как ожирение снижает ожидаемую продолжительность жизни

N+1
Обсерватория Пик-дю-Миди зафиксировала свободный тропосферный перенос микропластика Обсерватория Пик-дю-Миди зафиксировала свободный тропосферный перенос микропластика

В обсерватории на высоте 2877 метров был обнаружен микропластик

N+1
Ученые превратили растительные отходы в топливо для самолетов Ученые превратили растительные отходы в топливо для самолетов

Технологию производства авиатоплива из биомассы создали в РГУ нефти и газа

ТехИнсайдер
Боязнь дырок. Учёные выяснили причины возникновения трипофобии Боязнь дырок. Учёные выяснили причины возникновения трипофобии

Что такое трипофобия и почему она возникает?

Популярная механика
Лекарство от уныния: как философия помогает бороться с тревогой и внутренней пустотой Лекарство от уныния: как философия помогает бороться с тревогой и внутренней пустотой

Почему в мире бесконечных возможностей мы все чаще чувствуем тревогу, пустоту?

Forbes
Как феминистка Эми Дилвин стала одной из первых промышленниц Великобритании Как феминистка Эми Дилвин стала одной из первых промышленниц Великобритании

Писательница, предпринимательница, феминистка, миллионерша — все это Эми Дилвин

Forbes
Идет игра Идет игра

Если виртуальная реальность это будущее, для игроков в онлайн-игры оно наступило

Vogue
Археологи нашли в Якутии берестяной гроб с останками «опасного умершего» Археологи нашли в Якутии берестяной гроб с останками «опасного умершего»

Археологи нашли в Якутии захоронение самоубийцы, шамана или отверженного

N+1
Балтийские косы Балтийские косы

Рассказ о путешествии в Калининградскую область тревел-журналиста

Отдых в России
7 советов по подготовке собаки к зиме 7 советов по подготовке собаки к зиме

Собак тоже нужно защитить от холода и реагентов на тротуаре!

Maxim
«У владельцев есть искушение превратить компании в кеш-машину» «У владельцев есть искушение превратить компании в кеш-машину»

Почему Forbes выбрал первого вице-премьера Андрея Белоусова регулятором года?

Forbes
«Мы должны быть уверены, что не отравим людей». Как изменилась жизнь рестораторов после введения обязательной маркировки продуктов «Мы должны быть уверены, что не отравим людей». Как изменилась жизнь рестораторов после введения обязательной маркировки продуктов

Доля фальсифицированных продуктов на российском рынке достигает 20%

СНОБ
Что за Web 3.0, о котором все говорят, и какие недостатки нынешнего интернета он намерен исправить Что за Web 3.0, о котором все говорят, и какие недостатки нынешнего интернета он намерен исправить

Концепция Web 3.0, возможно, вернёт права авторам и построит новую экономику

VC.RU
Долгие разговоры с незнакомцами могут иметь удивительные последствия Долгие разговоры с незнакомцами могут иметь удивительные последствия

Ожидания людей относительно их взаимодействия с незнакомцами ошибочны

Популярная механика
Универсальный актёр Универсальный актёр

Николай Черкасов мог сыграть кого угодно

Дилетант
Программа тренировок для девушек в тренажерном зале Программа тренировок для девушек в тренажерном зале

Как составить эффективную программу тренировок для девушек

VOICE
30 м² 30 м²

“Инстаграмный” интерьер, который будет эффектно выглядеть и привлекать туристов

AD
Актриса Нелли Уварова: Самое главное в жизни — не тратить энергию на то, чтобы кому-то что-то доказать Актриса Нелли Уварова: Самое главное в жизни — не тратить энергию на то, чтобы кому-то что-то доказать

Нелли Уварова — о роли танцев в её жизни и благотворительности

СНОБ
Здесь был ЗИЛ. Репортаж о легендарном заводе, которого не стало Здесь был ЗИЛ. Репортаж о легендарном заводе, которого не стало

Выясняем, что стало с МСЦ № 6 ЗИЛа после сноса его исторического здания

РБК
Гонка за орбитальный кинематограф Гонка за орбитальный кинематограф

Зачем снимать кино в космосе, если есть компьютерная графика?

Популярная механика
Сокращение населения Китая: как падает рождаемость, какие прогнозы Сокращение населения Китая: как падает рождаемость, какие прогнозы

Рассказываем о причинах сокращения населения Китая и о тенденциях этого процесса

ТехИнсайдер
Путь белого волка Путь белого волка

Булат Рафиков больше двадцати лет кочует по малонаселенным районам Сибири

Отдых в России
Экология Экология

Самой актуальной антиутопией по-прежнему остается климатическая

Esquire
Археологи раскопали древнейшее погребение девочки-младенца в Европе Археологи раскопали древнейшее погребение девочки-младенца в Европе

Детские погребения все чаще обращают на себя внимание археологов и антропологов

N+1
Как пережить праздники без последствий: 5 принципов Как пережить праздники без последствий: 5 принципов

Всем известно, что за праздничным столом удержать себя в руках почти невозможно

Cosmopolitan
Genesis GV70. Продажа перспектив Genesis GV70. Продажа перспектив

Внешность GV70 действительно впечатляет

4x4 Club
«Эй вы там, наверху»: что делать, если у соседей ремонт «Эй вы там, наверху»: что делать, если у соседей ремонт

Как быть, если ремонт соседей затянулся и не дает вам жить?

Psychologies
Топ-5 Топ-5

Что придумывали шарлатаны до развития доказательной медицины

Популярная механика
Почему домашнее насилие — национальная традиция, с которой в стране не готовы расставаться Почему домашнее насилие — национальная традиция, с которой в стране не готовы расставаться

Почему бороться с домашним насилием в России никто не спешит?

СНОБ
Время первой Время первой

История Зендеи, которой удалось покорить мир в кратчайшие сроки

Cosmopolitan
Открыть в приложении