GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

За 10 лет арктические дафнии не смогли приспособиться к потеплению За 10 лет арктические дафнии не смогли приспособиться к потеплению

Почему особи бесполых дафний плохо переносят потепление

N+1
Опять начинается Опять начинается

Новая и лучшая жизнь не с понедельника и даже не с 1 января

Cosmopolitan
Исследователи создали роботизированную руку, управляемую силой мысли Исследователи создали роботизированную руку, управляемую силой мысли

Ученые позволили парализованному мужчине управлять роботизированной рукой

Inc.
5 лучших книг для девочек, женщин и тех, кто о них заботится 5 лучших книг для девочек, женщин и тех, кто о них заботится

Книги: с какими трудностями сталкиваются современные девушки, как их поддержать?

Популярная механика
Дискуссия о формате: почему российской рознице нужны единые стандарты регулирования Дискуссия о формате: почему российской рознице нужны единые стандарты регулирования

Государство хочет установить правила регулирования работы маркетплейсов

Forbes
Эксперт по лидерству дала 6 советов для выступающих на английском языке Эксперт по лидерству дала 6 советов для выступающих на английском языке

Советы по ораторскому мастерству для выступающих на английском языке

Inc.
Алена Водонаева: «Я живу для себя и я счастлива» Алена Водонаева: «Я живу для себя и я счастлива»

Звезда рассказала о личной жизни, новой квартире и своем проекте на Youtube

Cosmopolitan
Разгадка истории Венеры кроется в её поверхности Разгадка истории Венеры кроется в её поверхности

Активны ли венерианские вулканы сегодня?

Наука и жизнь
Китовая бухта Китовая бухта

Где водятся русские тропические киты? Как сохранить этих исчезающих великанов?

Отдых в России
Лучший танк в мире: Т-14 «Армата» запущен в производство Лучший танк в мире: Т-14 «Армата» запущен в производство

Т-14 «Армата» — танк, о котором все отзываются с восхищением

Maxim
C-25: как создавалась первая советская система ПРО C-25: как создавалась первая советская система ПРО

С-25 – одна из первых в мире систем объектовой противовоздушной обороны

Популярная механика
Писатель Алексей Иванов — о литературе, внутреннем туризме и новых структурах общества Писатель Алексей Иванов — о литературе, внутреннем туризме и новых структурах общества

Писатель Алексей Иванов о влиянии литературы на туристический бизнес

СНОБ
Почему не падают небоскребы Почему не падают небоскребы

Как небоскребы выдерживают колоссальные ветровые нагрузки?

Популярная механика
50 м² 50 м²

Сочинская квартира для сдачи в аренду по дизайну Анастасии Комаровой

AD
Выловленная в конце жаркого сезона рыба повысила риск заражения чадских собак дракункулезом Выловленная в конце жаркого сезона рыба повысила риск заражения чадских собак дракункулезом

Новый и малоизученный путь заражения дракункулезом

N+1
Герасим и топор, или Преступление без наказания Герасим и топор, или Преступление без наказания

Вероятно, это самое знаменитое описание преступления в мировой литературе

Дилетант
3 мифа о теории привязанности 3 мифа о теории привязанности

Стиль привязанности очень сильно влияет на нашу личность и на отношения

Psychologies
Как банки управляют нашими деньгами (и борются за доверие клиента)? Разговор Сергея Минаева с старшим вице-президентом ВТБ Дмитрием Брейтенбихером Как банки управляют нашими деньгами (и борются за доверие клиента)? Разговор Сергея Минаева с старшим вице-президентом ВТБ Дмитрием Брейтенбихером

О том, как банки перестраиваются в цифровом мире и какое место занимает клиент

Esquire
ESG: как заработать на ответственном инвестировании ESG: как заработать на ответственном инвестировании

Как не поддаться моде и научиться инвестировать в хорошие компании?

Forbes
Льняное масло: польза и вред, советы врача Льняное масло: польза и вред, советы врача

Что нужно знать о льняном масле и какие могут быть от него побочные эффекты?

РБК
Би Сатонгун: «Уделяйте внимание вкусу блюда, а не красивой картинке» Би Сатонгун: «Уделяйте внимание вкусу блюда, а не красивой картинке»

Би Сатонгун прилетела в Сильваплану для участия в St.Moritz Gourmet Festival

Bones
Модельный комплекс железа позволил изучить механизм процесса Габера — Боша Модельный комплекс железа позволил изучить механизм процесса Габера — Боша

Первый нитридный комплекс, выделяющий аммиак с высоким выходом

N+1
Ты теперь полярник: инструкция к поездке мечты по Кольскому полуострову Ты теперь полярник: инструкция к поездке мечты по Кольскому полуострову

Полуостров Рыбачий – рай для фотографа: фактуры-текстуры просто завораживают

Playboy
Алексей Ивашов: «Отец ушел из дома, и на этот раз все могло закончиться разводом» Алексей Ивашов: «Отец ушел из дома, и на этот раз все могло закончиться разводом»

В кино я наконец повидал родителей: Светлану Светличную и Владимира Ивашова

Коллекция. Караван историй
Яркая классика Яркая классика

Здесь органично сочетаются современный комфорт и красивая стилизация под старину

SALON-Interior
Всё о ВИЧ и СПИД: 8 вопросов эксперту Всё о ВИЧ и СПИД: 8 вопросов эксперту

Как защититься от ВИЧ, что делать, если произошел контакт и можно ли вылечиться?

РБК
Букет в цветочном горшке Букет в цветочном горшке

Красивые комнатные растения с недолгим сроком жизни

Наука и жизнь
Успех без зависти. Новое поколение и старая классика в новосибирском театре «Глобус» Успех без зависти. Новое поколение и старая классика в новосибирском театре «Глобус»

Рассказ о театре-«паруснике» и трендах театральной режиссуры

СНОБ
Как женщины боролись и борются за право на аборт Как женщины боролись и борются за право на аборт

Отрывок из книги «Неудобные женщины»: как девушки веками отстаивали свои права

СНОБ
Что такое сход-развал и когда его делать. Памятка для водителей Что такое сход-развал и когда его делать. Памятка для водителей

Разбираемся, что такое развал-схождение и можно ли сделать его самостоятельно

РБК
Открыть в приложении