GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

В Португалии нашли выгравированные в эпоху верхнего палеолита фигуры животных В Португалии нашли выгравированные в эпоху верхнего палеолита фигуры животных

Археологи обнаружили в Португалии новые произведения палеолитического искусства

N+1
Интим предлагать Интим предлагать

Когда женщина выбирает отношения без обязательств

Лиза
Японцы сделали роборуку с человеческими мышцами Японцы сделали роборуку с человеческими мышцами

Японские инженеры разработали биогибридную руку с человеческими мышцами

N+1
«У сильных желаний нет обстоятельств». Как люди с ограниченными возможностями исполняют свои мечты «У сильных желаний нет обстоятельств». Как люди с ограниченными возможностями исполняют свои мечты

Что помогает людям с ограниченными возможностями добиваться желаемого

СНОБ
Первая минута Первая минута

Как заставить начало разговора работать на результат

kiozk originals
Избегайте этих 5 фраз, когда просите о повышении зарплаты, — эксперт по переговорам Избегайте этих 5 фраз, когда просите о повышении зарплаты, — эксперт по переговорам

Начать разговор о повышении зарплаты часто бывает очень сложно

Inc.
Искусственный интеллект научился распознавать азиатские языки лучше человека: корейский, японский и китайский Искусственный интеллект научился распознавать азиатские языки лучше человека: корейский, японский и китайский

Что для ИИ представляют собой азиатские языки.

Популярная механика
Дмитрий Чеботарев: Актерство для меня — бегство от скуки Дмитрий Чеботарев: Актерство для меня — бегство от скуки

Дмитрий Чеботарев — о том, почему нужно идти за мечтой и не бояться нового

СНОБ
История пузырьков на упаковочной пленке История пузырьков на упаковочной пленке

Долгая история лопающегося полиэтилена

Esquire
Забытое искусство обрядов посвящения Забытое искусство обрядов посвящения

Вылазка с детьми порой посложнее Ironman и Death Race

Men’s Health
Кормилец Енисей Кормилец Енисей

Тур по Красноярскому краю, Республикам Хакасия и Тыва

Отдых в России
«Возраст — просто цифра». Пенсионерка похудела на 40 кг и стала звездой бурлеска «Возраст — просто цифра». Пенсионерка похудела на 40 кг и стала звездой бурлеска

История Мэрилин, которая в 70 лет стала звездой эротического шоу

Cosmopolitan
Топ самых лучших новогодних и рождественских фильмов на все времена Топ самых лучших новогодних и рождественских фильмов на все времена

Небольшой список самых популярных новогодних фильмов и мультфильмов

Популярная механика
Придуманная жизнь Придуманная жизнь

Почему основателя Group-IB Илью Сачкова обвиняют в госизмене

Forbes
5 продуктов, которые помогут заснуть и лучше выспаться 5 продуктов, которые помогут заснуть и лучше выспаться

Что съесть перед сном, чтобы лучше спалось?

Популярная механика
Магнитное экранирование ядра в атоме гелия-3 уточнили на порядок Магнитное экранирование ядра в атоме гелия-3 уточнили на порядок

Физики смогут сделать из гелия-3 стандарт магнитометрии

N+1
Как вызывают искусственный дождь и вредно ли это для природы Как вызывают искусственный дождь и вредно ли это для природы

Сегодня вам не к чему танцевать с бубном, чтобы вызвать дождь

Популярная механика
Думали, что это дисбактериоз: у меня нашли рак и удалили часть кишечника Думали, что это дисбактериоз: у меня нашли рак и удалили часть кишечника

Наша героиня о том, как ей удалось вылечить рак желудочно-кишечного тракта

Cosmopolitan
Выловленная в конце жаркого сезона рыба повысила риск заражения чадских собак дракункулезом Выловленная в конце жаркого сезона рыба повысила риск заражения чадских собак дракункулезом

Новый и малоизученный путь заражения дракункулезом

N+1
IBM создала автоматизированную лабораторию с искусственным интеллектом IBM создала автоматизированную лабораторию с искусственным интеллектом

RoboRXN, автоматизированная удаленная лаборатория с искусственным интеллектом

Популярная механика
Зачем fashion-индустрии машинное обучение Зачем fashion-индустрии машинное обучение

От персонализации до предсказания трендов: машинное обучение в fashion-индустрии

Популярная механика
«Всё, что я хочу на Новый год» «Всё, что я хочу на Новый год»

Елизавета Боярская с детства не верит в Деда Мороза, но все равно любит декабрь

OK!
«Сначала лучше, потом дешевле. Сначала доходы, потом расходы» «Сначала лучше, потом дешевле. Сначала доходы, потом расходы»

Интервью руководителя ВТБ Private Banking Дмитрия Брейтенбихера

Forbes
Что делать, если ноутбук не включается Что делать, если ноутбук не включается

Почему ноутбук может не включаться и как решить эту проблему?

CHIP
Можем ли мы деградировать обратно в обезьян? Можем ли мы деградировать обратно в обезьян?

Может ли очень старый человек однажды превратиться в обезьяну?

Популярная механика
Живые и искусственные ёлки: какие вредят экологии больше и что с ними делать после Нового года Живые и искусственные ёлки: какие вредят экологии больше и что с ними делать после Нового года

Как сказываются на окружающей среде искусственные и живые ёлки?

VC.RU
Звезда Немезида: тайный близнец Солнца мог привести к массовому вымиранию и гибели динозавров Звезда Немезида: тайный близнец Солнца мог привести к массовому вымиранию и гибели динозавров

Где-то на задворках нашей звездной системы прячется "отторгнутый" близнец Солцна

Популярная механика
10 археологических открытий, сделанных с помощью сканера 10 археологических открытий, сделанных с помощью сканера

Что общего у археологии с медицинской диагностикой? Методы сканирования

Популярная механика
Взять под контроль: что такое селфхарм и почему люди причиняют себе боль Взять под контроль: что такое селфхарм и почему люди причиняют себе боль

Когда самоповреждающее поведение может маскироваться под норму?

Forbes
Скучно не будет! Скучно не будет!

5 вариантов совместного досуга с детьми-подростками

Лиза
Открыть в приложении