Компания Meta выпустила языковую модель, которая понимает устную речь

N+1Hi-Tech

Нейросеть от Meta (признана экстремистской организацией на территории РФ) узнает 4017 языков по устной речи и ответит на 1107 из них

Она обучалась на библейских текстах

Виктория Земляк

036d47669be5b6a9ee36339f7fab444e.jpg
Torre de Babel (Вавилонская башня). Pieter Brueghel the Elder / Wikimedia Commons

Компания Meta (признана экстремистской организацией на территории РФ)* выпустила языковую модель, которая понимает устную речь. Она распознает более 4000 языков и может разговаривать на 1107 из них. Meta (признана экстремистской организацией на территории РФ) считает, что модель поможет сохранить языковое разнообразие в мире. Статья опубликована на сайте компании, код модели доступен на гитхабе.

*Деятельность компании Meta запрещена в России.

Обычно модели распознавания речи обучаются на больших объемах данных: им требуются тысячи часов аудиозаписей. При этом каждой записи должен соответствовать текст, чтобы модель научилась сопоставлять звучащую и письменную речь. Такие большие датасеты можно собрать только для популярных языков, на которых говорит много людей. Всего в мире существует около 7000 языков, но современные системы распознавания речи поддерживают не более 200 из них.

Команда инженеров из компании Meta (признана экстремистской организацией на территории РФ) под руководством Майкла Аули (Michael Auli) обучила большую модель для распознавания речи Massively Multilingual Speech (MMS), которая может общаться на 1107 языках и распознавать 4017. Нейросеть обучалась на религиозных записях. Исследователи собрали два датасета: один с аудиозаписями и соответствующими текстами и второй только с аудиозаписями.

fe065aa4c134af4b7f5dca22405e1e58.jpg
Карта языков, которые поддерживает модель. Фиолетовые и зеленые: определение языка, только фиолетовые: превращение речи в текст. Auli et al. / research.facebook, 2023

Первый датасет состоит из 55 тысяч аудиозаписей, на которых люди зачитывают вслух тексты из Нового Завета. Всего в Новом Завете 27 книг и 260 глав. Данные собирали из трех источников: Faith Comes By Hearing, GoTo.Bible и YouVersion. Во второй датасет попали 7,7 тысяч часов аудиозаписей с сайта Global Recordings Network: это религиозные песни, записи отрывков из Библии и других религиозных текстов.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Дядька императора Дядька императора

В Российской империи воспитание царских отпрысков было делом политическим

Дилетант
Генетики обнаружили древнейших зараженных чумой в Британии Генетики обнаружили древнейших зараженных чумой в Британии

ДНК бактерий нашли в зубах трех человек, живших около четырех тысяч лет назад

N+1
«Я не смогла сдержаться и разрыдалась»: Лариса Долина рассказала о последней встрече с Александром Абдуловым «Я не смогла сдержаться и разрыдалась»: Лариса Долина рассказала о последней встрече с Александром Абдуловым

Лариса Долина видела Александра Абдулова в больнице незадолго до его смерти

VOICE
«В детстве мне снилось, что я нахожусь среди темнокожих людей»: как живется в африканской глубинке миссионеру из Ростова-на-Дону «В детстве мне снилось, что я нахожусь среди темнокожих людей»: как живется в африканской глубинке миссионеру из Ростова-на-Дону

Команда волонтеров оказывает помощь жителям уголков Кении, Танзании и ДР Конго

Вокруг света
7 продуктов питания, которые помогут вам выглядеть моложе 7 продуктов питания, которые помогут вам выглядеть моложе

Многие продукты питания могут стать частью омолаживающего ухода за кожей

ТехИнсайдер
Теломеры протеев удлинились с возрастом Теломеры протеев удлинились с возрастом

При постоянной температуре теломеры в клетках протея удлиняются с возрастом

N+1
Иван Янковский: «Я очень боюсь застрять, перестать развиваться, переживать новые чувства и эмоции» Иван Янковский: «Я очень боюсь застрять, перестать развиваться, переживать новые чувства и эмоции»

Иван Янковский делится мыслями о том, как стиль жизни наполняет ее смыслом

Maxim
Мама, я создал! Ученые построили машину из Lego, чтобы выращивать человеческую кожу Мама, я создал! Ученые построили машину из Lego, чтобы выращивать человеческую кожу

Изобретение из Lego в десятки раз дешевле, чем современные биопринтеры

Вокруг света
Шум не мешает пониманию прочитанного, но влияет скорость чтения Шум не мешает пониманию прочитанного, но влияет скорость чтения

Влияние звукового и визуального шума на обработку информации во время чтения

ТехИнсайдер
«Отсутствие диалога между поколениями в прямом смысле слова убивает» «Отсутствие диалога между поколениями в прямом смысле слова убивает»

Алиса Хазанова о своем фильме «Белый список»

Weekend
И Джаред Лето — гигантский кот: худшие образы звезд на Met Gala-2023 И Джаред Лето — гигантский кот: худшие образы звезд на Met Gala-2023

В этом году Бал Института костюма выдался богатным на «мемные» аутфиты

VOICE
Главный по тарелочкам. История космического агентства США Главный по тарелочкам. История космического агентства США

Рассказываем про агентство, посчитавшее точное количество звезд на небе

Цифровой океан
Как гражданину России разблокировать активы в Credit Suisse Как гражданину России разблокировать активы в Credit Suisse

На этапе нашей работы с банком Credit Suisse мы выбрали стратегию защиты клиента

Forbes
Эволюция русалочки: нужен ли под водой темный цвет кожи Эволюция русалочки: нужен ли под водой темный цвет кожи

Существует ли эволюционная выгода для русалок от темной кожи под водой?

СНОБ
Средневековые колбы для дегустации мочи найдены на свалке лечебницы, возведенной на руинах куда более древнего строения Средневековые колбы для дегустации мочи найдены на свалке лечебницы, возведенной на руинах куда более древнего строения

Мусорная свалка эпохи Возрождения полна старых медицинских принадлежностей

ТехИнсайдер
Вылетаем сегодня! Почему мы совершаем незапланированные поездки? Объясняют ученые Вылетаем сегодня! Почему мы совершаем незапланированные поездки? Объясняют ученые

Социологи рассказали, как влияют на нас спонтанные траты

Вокруг света
К чему идет Sanlorenzo? К чему идет Sanlorenzo?

Как найти способ развиваться, не утрачивая прибыльность компании?

Y Magazine
Принц Чарльз официально стал королем Карлом III: что это значит для нас? Принц Чарльз официально стал королем Карлом III: что это значит для нас?

Почему даже для иностранцев коронация Карла III — важное событие?

Psychologies
От Дании до Японии: пять главных коронаций монархов Европы и Азии за последние 50 лет От Дании до Японии: пять главных коронаций монархов Европы и Азии за последние 50 лет

Яркие церемонии восшествия на престол и пять действующих правителей

Forbes
Голова идет кругом Голова идет кругом

Почему, когда резко встаешь, кружится голова и как с этим справиться?

Лиза
Мнение эксперта: из-за ИИ в мире будет меньше профессионалов и «больше лузеров». Согласны? Мнение эксперта: из-за ИИ в мире будет меньше профессионалов и «больше лузеров». Согласны?

Правительства должны поддержать работников, которые потеряли работу из-за ИИ

ТехИнсайдер
Об этике применения программных средств с элементами искусственного интеллекта Об этике применения программных средств с элементами искусственного интеллекта

Как пересекаются этика и искусственный интеллект?

Эксперт
Топ-5 самых напряженных скандинавских фильмов и сериалов последних лет Топ-5 самых напряженных скандинавских фильмов и сериалов последних лет

Детективы, триллеры и хорроры для самых искушенных ценителей

Maxim
Помойный бердвотчинг Помойный бердвотчинг

Как я ездил на индийскую свалку смотреть редких марабу

N+1
Почему сейчас кино Ингмара Бергмана может быть нам близко, как никогда раньше Почему сейчас кино Ингмара Бергмана может быть нам близко, как никогда раньше

Почему не нужно бояться фильмов Ингмара Бергмана?

Правила жизни
Как носить джинсовку этим летом: 4 крутых способа от стилиста Как носить джинсовку этим летом: 4 крутых способа от стилиста

С чем можно комбинировать джинсовку, чтобы выглядеть неотразимо?

VOICE
10 самых крутых и диких русских злодеев в голливудских фильмах 10 самых крутых и диких русских злодеев в голливудских фильмах

Самые известные русские злодеи в голливудских фильмах

Maxim
По уважительной причине: как звезды берут тайм-аут от соцсетей и вредит ли он карьере По уважительной причине: как звезды берут тайм-аут от соцсетей и вредит ли он карьере

Кто из знаменитостей отказывался от своей цифровой идентичности?

Forbes
Как помочь людям с аутизмом в период стресса и изменений Как помочь людям с аутизмом в период стресса и изменений

Как помочь людям с РАС в непростое время перемен

Psychologies
Элемент расселения и элементарная физика пространства Элемент расселения и элементарная физика пространства

Как решить уравнение освоения пространств России

Эксперт
Открыть в приложении