Кажется, что у ИИ с лингвистикой не должно возникнуть проблем. Но так ли это?

Популярная механикаHi-Tech

Распознать любой ценой: как искусственный интеллект научился понимать арабский язык

Автор: Владимир Арлазаров, к.т.н., генеральный директор Smart Engines

Каждому из нас хотелось бы говорить на любом языке мира, не прилагая к этому никаких усилий. При этом мы примерно понимаем, что овладеть английским чуть легче, чем китайским, а испанским - легче, чем арабским. Кажется, что у искусственного интеллекта с лингвистикой вообще не должно возникнуть никаких проблем. Но так ли это на самом деле, расскажет Владимир Арлазаров, к.т.н., генеральный директор компании Smart Engines.

Самое интересное, что шкала сложности изучения языков действительного существует. Например, американский Институт зарубежной службы при Госдепе делит все языки на 4 категории в зависимости от того, сколько часов нужно носителям английского языка на их изучение до уровня свободного владения. Самые сложные языки — это арабский, китайский, корейский и японский, и на их изучение придется потратить не менее 2200 часов. Тогда как на испанский, к примеру, не более 600 часов.

В этой статье мы расскажем, допустимо ли считать арабский язык сложным для человека и искусственного интеллекта (спойлер — да), и почему распознавание арабской вязи — это отдельная ачивка для ИИ.

82100b993fd7d4121834fe92ff32874b.jpg

Что делает арабский таким сложным для человека?

Чтобы ответить на этот вопрос, достаточно вспомнить знаменитый анекдот:

— Ты француз?

— Да.

— О, а скажи что-нибудь на арабском?

Особенность номер один — это отсутствие единого арабского. Арабский язык является основным языком сразу во многих странах мира, что неизбежно ведет к возникновению различных местных диалектов, отличающихся друг от друга так же сильно, как русский от польского, и ни у одного из этих диалектов нет письменного варианта.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Как возводят дымовые трубы Как возводят дымовые трубы

Какие мысли возникают у нас при виде дымовых труб, выпускающих в небо облака?

Популярная механика
«Когда геоданные попадают на рынок, их можно перепродавать бесконечно»: как устроен рынок сведений о местоположении «Когда геоданные попадают на рынок, их можно перепродавать бесконечно»: как устроен рынок сведений о местоположении

Как информация попадает в сеть, где она продаётся и кто её покупает

VC.RU
Домашняя работа: как привести IT в ЖКХ в порядок Домашняя работа: как привести IT в ЖКХ в порядок

О том, что можно сделать с хаосом в жилищно-коммунальном IT

Forbes
«Меня били в детстве»: как отпустить старые обиды? «Меня били в детстве»: как отпустить старые обиды?

Что делать, если детские травмы не дают покоя?

Psychologies
Природное и культурное наследие: 5 самых впечатляющих объектов из списка ЮНЕСКО в России Природное и культурное наследие: 5 самых впечатляющих объектов из списка ЮНЕСКО в России

Впечатляющие объекты, входящие в список Всемирного наследия ЮНЕСКО

ТехИнсайдер
Как мир перестал слышать архитекторов Как мир перестал слышать архитекторов

Проект Григория Ревзина «Оправдание утопии». Мишель Рагон: GIAP

Weekend
Как разблокировать телефон, если забыл пароль: 6 способов Как разблокировать телефон, если забыл пароль: 6 способов

Что делать, если вы забыли пароль или графический ключ от телефона

CHIP
Как криптовалютный стартап из Сан-Франциско обошел Coinbase по объему сделок Как криптовалютный стартап из Сан-Франциско обошел Coinbase по объему сделок

Dydx — стартап, который обошел крупнейшую криптовалютную биржу Америки

Forbes
Сказка о мачехе и сиротах на новый лад: глава романа «Голландский дом» Энн Пэтчетт Сказка о мачехе и сиротах на новый лад: глава романа «Голландский дом» Энн Пэтчетт

Вдруг замкнутое пространство только в нашей голове? Отрывок из книги Энн Пэтчетт

Esquire
Люди и портреты. Стоит ли злиться на Моргенштерна за слова о Дне победы Люди и портреты. Стоит ли злиться на Моргенштерна за слова о Дне победы

Даже среди патриотов казенщина о Дне Победы вызывает раздражение

СНОБ
Удивительные деревянные механизмы Дерека Хаггера Удивительные деревянные механизмы Дерека Хаггера

Работы Дерека Хаггера – из тех, которые стоит повторить самостоятельно.

Популярная механика
Кто виноват в ДТП? Видео вызвало споры в соцсетях (в ГИБДД все объяснили) Кто виноват в ДТП? Видео вызвало споры в соцсетях (в ГИБДД все объяснили)

Кто нарушил правила дорожного движения и кто виноват в этой аварии?

РБК
Магазин на ладони. Как ретейл по всему миру стал «умнее» Магазин на ладони. Как ретейл по всему миру стал «умнее»

Какие инновации и тренды влияют на развитие международной розницы

СНОБ
Бывшие актер и менеджер Skillbox запустили российский аналог MasterClass. Смогут ли курсы российских знаменитостей принести миллиарды? Бывшие актер и менеджер Skillbox запустили российский аналог MasterClass. Смогут ли курсы российских знаменитостей принести миллиарды?

Образовательная платформа «Уроки легенд» с курсами от знаменитостей

Inc.
Все в наших руках Все в наших руках

Здоровье наших подруг и жен в прямом смысле в наших руках

Men’s Health
10 малоизвестных производителей самолётов Германии 10 малоизвестных производителей самолётов Германии

Германия – одна из лидирующих стран по количеству авиастроительных производств

Популярная механика
Семь лет в ящике под кроватью: история похищения Коллин Стэн Семь лет в ящике под кроватью: история похищения Коллин Стэн

Семь лет Коллин Стэн провела в ящике под кроватью

Cosmopolitan
Гибкая личность: как избавиться от ярлыков и стать тем, кем хочешь Гибкая личность: как избавиться от ярлыков и стать тем, кем хочешь

Почему тестам на типы личности следует доверять не больше, чем гороскопам?

РБК
Подвиг офицера, который пожертвовал собой, чтобы спасти заложников во время «Норд-Оста» Подвиг офицера, который пожертвовал собой, чтобы спасти заложников во время «Норд-Оста»

Офицер предложил террористам себя в обмен на заложников в «Норд-Осте»

Maxim
Как заморозить будущее: отложенное материнство Как заморозить будущее: отложенное материнство

Репродуктивное старение - крайне важная социальная и медицинская проблема

Популярная механика
Как запустить стартап без денег (пошаговая инструкция) Как запустить стартап без денег (пошаговая инструкция)

Можно ли построить полноценный бизнес без денег?

Inc.
Что такое NVMe SSD: чем он лучше SATA Что такое NVMe SSD: чем он лучше SATA

Чем NVMe SSD лучше SATA?

CHIP
Четыре лика империи Четыре лика империи

Как землетрясение повлияло на нынешний облик малых городов Италии

Вокруг света
Неоклассика в жемчужных тонах Неоклассика в жемчужных тонах

Элегантный интерьер на все времена

SALON-Interior
Не верь слезам: как бороться с осенней хандрой — советуют киногерои Не верь слезам: как бороться с осенней хандрой — советуют киногерои

Реально работающие способы борьбы с осенней хандрой

Esquire
Лед тронулся Лед тронулся

Время снега приближается, но и глобальное потепление наступает неумолимо

Men’s Health
Мотивация, выбор, прогресс: как работать с лучшими сотрудниками Мотивация, выбор, прогресс: как работать с лучшими сотрудниками

Области, на которых нужно сосредоточиться при наставничестве хороших сотрудников

VC.RU
Дал бог зайку, но за что? Честные сериалы про материнство Дал бог зайку, но за что? Честные сериалы про материнство

Подборка честных сериалов о материнстве, которые рассказывают все как есть

Cosmopolitan
7 научных причин есть тыквенные семечки каждый день 7 научных причин есть тыквенные семечки каждый день

Чем полезны тыквенные семечки и как их готовить?

РБК
10 поз, в которых спит твой кот, и что они значат 10 поз, в которых спит твой кот, и что они значат

Оказывается, по тому, как спит кот, можно понять его загадочную душу!

Maxim
Открыть в приложении