Тренировка на одних фразах помогла нейросети распознать по активности мозга другие

Алгоритм не просто запоминает предложения, но и находит закономерности

N+1Hi-Tech

Тренировка на одних фразах помогла нейросети распознать по активности мозга другие

Алиса Бахарева

Joseph Makin, David Moses & Edward Chang / Nature Neuroscience, 2020

Нейросеть обучили распознавать речь по активности коры мозга человека. Алгоритм обучали и тестировали на ограниченном наборе из 50 предложений, точность распознавания в среднем составила 97 процентов. Обучение на дополнительных данных снизило количество ошибок, что говорит о том, что алгоритм не просто запоминает предложения, а находит общие закономерности. Статья опубликована в журнале Nature Neuroscience.

Современные нейроинтерфейсы умеют хорошо расшифровывать активность мозга, которая связана с движениями, — таким образом человек может управлять, например, искусственными конечностями. А вот напрямую переводить электрические сигналы мозга в речь до сих пор было невозможно, поэтому повсеместно используется схема, в которой человек управляет курсором и печатает текст на экране компьютера. Но даже если бы точность контроля курсора была идеальной, говорить таким способом все равно получалось бы очень медленно — максимальная скорость была бы как при печати одним пальцем.

Были и попытки расшифровать речь из активности мозга напрямую, однако пока удавалось понять лишь отдельные фонемы или звуки, а распознать речь, которая состояла из ограниченного набора в 100 слов, ученым удалось с точностью менее 40 процентов.

Ученые из Калифорнийского университета в Сан-Франциско под руководством Джозефа Мэйкина (Joseph Makin) воспользовались методами машинного обучения для того, чтобы расшифровать речь по активности мозга. У четырех добровольцев записывали электрокортикограмму, аналог электроэнцефалограммы, в котором электроды накладывают непосредственно на кору мозга (электроды пациентам установили по медицинским показаниям). Решетка электродов покрывала область коры вокруг боковой борозды — эта зона включает в себя речевые центры.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Напечатанная микроракета промчалась по кровеносному сосуду Напечатанная микроракета промчалась по кровеносному сосуду

Среди микророботов был установлен рекорд скорости в 2,8 миллиметра в секунду

N+1
«Это полностью изменит мир»: миллиардер Богуславский о том, как заработал $1 млрд на одной сделке, и грядущем перевороте в интернете «Это полностью изменит мир»: миллиардер Богуславский о том, как заработал $1 млрд на одной сделке, и грядущем перевороте в интернете

Леонид Богуславский: почему талантливые бизнесмены похожи на теннисистов

Forbes
Как полностью удалить уже удаленную программу? Как полностью удалить уже удаленную программу?

Даже удаленный с диска софт может оставлять следы в системе

CHIP
Правила жизни Брюса Уиллиса Правила жизни Брюса Уиллиса

Правила жизни Крепкого орешка

Esquire
Четыре способа вернуться к себе Четыре способа вернуться к себе

Разные виды психотерапии – разные пути, ведущие к внутренней зрелости

Psychologies
Почему состоятельные люди оставляют детей без наследства Почему состоятельные люди оставляют детей без наследства

Почему многие звезды и бизнесмены не завещают детям своё состояние

РБК
4 ступени и 4 закона на пути от привычки к свободе и успеху 4 ступени и 4 закона на пути от привычки к свободе и успеху

Успехом и прогрессом движут… привычки

Psychologies
Гибкая диета Гибкая диета

Основной принцип флекситарианской диеты – никаких жестких органичений

Лиза
Вкус Канады из-под Пензы: история кленоварни из села, которая продаёт тонны сиропа по всей России Вкус Канады из-под Пензы: история кленоварни из села, которая продаёт тонны сиропа по всей России

Кооператив поставляет кленовый сироп «Вкусвиллу», «Кофемании» и другим сетям

VC.RU
Быль об Эболе Быль об Эболе

Как протекала Эбола, и почему миру тогда крупно повезло

Maxim
Офис во время чумы: как организовать работу отдела на удаленке и не разорить компанию Офис во время чумы: как организовать работу отдела на удаленке и не разорить компанию

Какие подводные камни скрывает безобидный на первый взгляд режим работы из дома?

Forbes
Правила жизни Правила жизни

Правила жизни величайшего актера Кирка Дугласа

Playboy
«Английский пот»: загадочная средневековая эпидемия, унесшая тысячи жизней «Английский пот»: загадочная средневековая эпидемия, унесшая тысячи жизней

В XVI веке достать маски и дезинфицирующие средства было особенно трудно

Maxim
Большой Санитарный брат следит за тобой. Как люди поступаются своими правами в обмен на здоровье Большой Санитарный брат следит за тобой. Как люди поступаются своими правами в обмен на здоровье

Представления о правах, свободах и возможностях отправлены на долгое хранение

СНОБ
Почему Россия начала ценовую войну на нефтяном рынке Почему Россия начала ценовую войну на нефтяном рынке

Теперь Россия попробует перенять роль у Штатов — со всеми понятными рисками

РБК
Первая встреча: как Тернер, Лопес и другие звезды встретили свою любовь Первая встреча: как Тернер, Лопес и другие звезды встретили свою любовь

Вот как познакомились эти известные пары, порой все было как в кино

Cosmopolitan
Сергей Янчуков: «Деньги здесь не быстрые, но мы осознанно инвестируем миллиарды» Сергей Янчуков: «Деньги здесь не быстрые, но мы осознанно инвестируем миллиарды»

Что такое развивать бизнес в забайкальской тайге и как помогает государство

Forbes
От «Дау» до «Ширли»: лучшие фильмы Берлинского кинофестиваля От «Дау» до «Ширли»: лучшие фильмы Берлинского кинофестиваля

Какими фильмами запомнился Юбилейный Берлинале

РБК
Богатая белая женщина, которая всем наносит пользу: каким получился сериал «И повсюду тлеют пожары» с Риз Уизерспун Богатая белая женщина, которая всем наносит пользу: каким получился сериал «И повсюду тлеют пожары» с Риз Уизерспун

Сериал «И повсюду тлеют пожары» по одноименному бестселлеру Селесты Инг

Esquire
Безымянный экспорт Безымянный экспорт

Экспорт из России по скрытым разделам таможенной статистики превысил $55 млрд

РБК
Как пиво влияет на твою интимную жизнь? 5 положительных и негативных эффектов Как пиво влияет на твою интимную жизнь? 5 положительных и негативных эффектов

Пиво — нечто большее, чем просто очередной спиртной напиток

Playboy
Боль валит с ног Боль валит с ног

Боль в ноге может появиться внезапно, а может беспокоить долгое время

Здоровье
Элио Гуариско: «Когда мы практикуем йогу, у нас должно быть понимание присутствия» Элио Гуариско: «Когда мы практикуем йогу, у нас должно быть понимание присутствия»

Элио Гуариско — о том, как практикует йогу и что главное в тибетских текстах

Yoga Journal
«Мы все оказались в хорроре»: репортаж с окраин эпидемии в Италии «Мы все оказались в хорроре»: репортаж с окраин эпидемии в Италии

Жизнь на самом крупном острове Италии в условиях жесткого карантина

Forbes
Как носить украшения, чтобы не выглядеть дамой из прошлого, — звездные секреты Как носить украшения, чтобы не выглядеть дамой из прошлого, — звездные секреты

Какие приемы подсмотреть у звезд, чтобы сделать свой образ эффектным

Cosmopolitan
Синяя рубашка: с чем носить и как сочетать Синяя рубашка: с чем носить и как сочетать

Какие комплекты можно составить с синей рубашкой на все случаи жизни

Cosmopolitan
Зубчик даю! Зубчик даю!

Останешься цел, если овладеешь секретным рецептом

Огонёк
Аэрозольные частицы оказались источниками муравьиной кислоты в атмосфере Аэрозольные частицы оказались источниками муравьиной кислоты в атмосфере

Ученые сумели понаблюдать за процессами, происходящими в атмосферном аэрозоле

N+1
Танцуй со мной Танцуй со мной

Интервью с балериной–примой Екатериной Шипулиной и ее мамой Людмилой Шипулиной

Grazia
Тестируем ИБП для компьютера: надолго ли его хватает? Тестируем ИБП для компьютера: надолго ли его хватает?

Сколько времени после отключения питания даст источник бесперебойного питания

CHIP
Открыть в приложении