Кажется, что у ИИ с лингвистикой не должно возникнуть проблем. Но так ли это?

Популярная механикаHi-Tech

Распознать любой ценой: как искусственный интеллект научился понимать арабский язык

Автор: Владимир Арлазаров, к.т.н., генеральный директор Smart Engines

Каждому из нас хотелось бы говорить на любом языке мира, не прилагая к этому никаких усилий. При этом мы примерно понимаем, что овладеть английским чуть легче, чем китайским, а испанским - легче, чем арабским. Кажется, что у искусственного интеллекта с лингвистикой вообще не должно возникнуть никаких проблем. Но так ли это на самом деле, расскажет Владимир Арлазаров, к.т.н., генеральный директор компании Smart Engines.

Самое интересное, что шкала сложности изучения языков действительного существует. Например, американский Институт зарубежной службы при Госдепе делит все языки на 4 категории в зависимости от того, сколько часов нужно носителям английского языка на их изучение до уровня свободного владения. Самые сложные языки — это арабский, китайский, корейский и японский, и на их изучение придется потратить не менее 2200 часов. Тогда как на испанский, к примеру, не более 600 часов.

В этой статье мы расскажем, допустимо ли считать арабский язык сложным для человека и искусственного интеллекта (спойлер — да), и почему распознавание арабской вязи — это отдельная ачивка для ИИ.

82100b993fd7d4121834fe92ff32874b.jpg

Что делает арабский таким сложным для человека?

Чтобы ответить на этот вопрос, достаточно вспомнить знаменитый анекдот:

— Ты француз?

— Да.

— О, а скажи что-нибудь на арабском?

Особенность номер один — это отсутствие единого арабского. Арабский язык является основным языком сразу во многих странах мира, что неизбежно ведет к возникновению различных местных диалектов, отличающихся друг от друга так же сильно, как русский от польского, и ни у одного из этих диалектов нет письменного варианта.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

7 крутых маринадов для шашлыка, которые вам точно пригодятся на майских праздниках 7 крутых маринадов для шашлыка, которые вам точно пригодятся на майских праздниках

Мясо само себя не приготовит: собрали для вас семь вкусных шашлычных маринадов

Популярная механика
Землетрясение назвали причиной гибели мужчины на Кипре более 1600 лет назад Землетрясение назвали причиной гибели мужчины на Кипре более 1600 лет назад

Этот мужчина погиб во время землетрясения в середине IV века нашей эры на Кипре

N+1
Как можно использовать искусственный интеллект для создания видео? Интересные факты Как можно использовать искусственный интеллект для создания видео? Интересные факты

Как работают ИИ-видеогенераторы, где их применяют и что ждет нас в будущем

ТехИнсайдер
«Мне противно менять подгузники своему ребенку» «Мне противно менять подгузники своему ребенку»

Рождение ребенка — это не только улыбки, нежные объятия и бесконечное счастье

Psychologies
Партнер-провокатор: что стоит за его манипуляциями и как реагировать правильно Партнер-провокатор: что стоит за его манипуляциями и как реагировать правильно

Как вычислить манипуляцию провокацией и как правильно реагировать на нее

Psychologies
5 фильмов о непростых отношениях с технологиями 5 фильмов о непростых отношениях с технологиями

Кино о технологиях: от несбывшихся мечтаний до пугающих прогнозов.

GQ
Вызов разуму: Нобелевскую премию по физике присудили за изучение сложности Вызов разуму: Нобелевскую премию по физике присудили за изучение сложности

Нобелевская премия «за вклад в наше понимание сложных физических систем»

Forbes
Мать оставила дочери шрамы на всю жизнь, пытаясь вылечить педикулез керосином Мать оставила дочери шрамы на всю жизнь, пытаясь вылечить педикулез керосином

Чарити Саттер почти 20 лет страдает от последствий лечения керосином

Cosmopolitan
Какая разница? Звездные пары, где мужчина значительно старше избранницы Какая разница? Звездные пары, где мужчина значительно старше избранницы

Пары с внушительной разницей в возрасте

Cosmopolitan
«Вежливенько побить, за руки держа»: какими были семейные традиции на Руси «Вежливенько побить, за руки держа»: какими были семейные традиции на Руси

У наших предков были критерии, определяющие, какая жена хороша, а какая нет

Cosmopolitan
Новый русский Гарвард. Как создать успешное профессиональное сообщество из тех, кто только учится Новый русский Гарвард. Как создать успешное профессиональное сообщество из тех, кто только учится

Зачем нужны и как создаются новые объединения учащихся в России

СНОБ
Айрис Апфель Айрис Апфель

Икона стиля Айрис Апфель отмечает сотый день рождения

Grazia
Хуже алкоголя: 5 вещей, которые разрушают твою печень Хуже алкоголя: 5 вещей, которые разрушают твою печень

Иногда мы, сами того не подозревая, даем печени дополнительную нагрузку

Cosmopolitan
Сахарный детокс: я отказалась от сладкого на месяц — вот что из этого вышло Сахарный детокс: я отказалась от сладкого на месяц — вот что из этого вышло

Рассказываем результаты отказа от сахара на месяц.

Cosmopolitan
Запечатывает от мороза: почему ты должна сделать японский маникюр этой осенью Запечатывает от мороза: почему ты должна сделать японский маникюр этой осенью

Самый эффективный способ восстановить ногти — сделать японский маникюр

Cosmopolitan
Капитал очевидность Капитал очевидность

Если подумываешь вложиться во что-нибудь прибыльное, давай разберемся как начать

Cosmopolitan
Губы ТП-69: обходи стороной мастера, который предложит тебе такое! Губы ТП-69: обходи стороной мастера, который предложит тебе такое!

В России орудует банда «черных косметологов»

Cosmopolitan
Выходи за толстого: 20 самых глупых советов наших мам и бабушек про отношения Выходи за толстого: 20 самых глупых советов наших мам и бабушек про отношения

Сеть переполнена «секретами наших бабушек», которые помогут сохранить брак

Cosmopolitan
Присоединяй и властвуй Присоединяй и властвуй

Примеры объявления одним государством об аннексии другого

Дилетант
Безопасность вместо развития: какой капитализм построили в России за 30 лет Безопасность вместо развития: какой капитализм построили в России за 30 лет

30 лет назад Россия выбрала курс на строительство капитализма

Forbes
Полезные советы и лайфхаки домашнего мастера Полезные советы и лайфхаки домашнего мастера

Нехитрые решения для хитрых задач

Популярная механика
Мир копий и двойников: зачем нужна цифровая обработка геометрии Мир копий и двойников: зачем нужна цифровая обработка геометрии

Как нейросети помогают создавать протезы и восстанавливать культурные памятники

Популярная механика
Как математика может помочь стать профессиональным спортсменом Как математика может помочь стать профессиональным спортсменом

Спорт и математика — разные виды деятельности, влияющие друг на друга

Популярная механика
В сперме не было ни одного сперматозоида: как я перенесла неудачную попытку ЭКО В сперме не было ни одного сперматозоида: как я перенесла неудачную попытку ЭКО

Беременность не всегда наступает быстро

Cosmopolitan

19 кадров тех трех страшных дней 26 октября 2002 года

Cosmopolitan
Сувениры Севера Сувениры Севера

Норильск — город «Норникеля» и ворота главного природного сокровища Заполярья

Robb Report
Как короли и королевы XIX века отличались от своих парадных портретов? (галерея) Как короли и королевы XIX века отличались от своих парадных портретов? (галерея)

Некоторые художники… привирали о внешности королей и королев

Maxim
Три года в Долине строил мессенджер и закрыл его: что сделал не так Юрий Лифшиц и какие уроки вынес из провала Три года в Долине строил мессенджер и закрыл его: что сделал не так Юрий Лифшиц и какие уроки вынес из провала

Какие проблемы могут возникнуть при создании мессенджера — рассказал Юрий Лифшиц

VC.RU
«Чем хлеб белее, тем умрешь скорее»: навигатор еды от диетолога Майкла Поллана «Чем хлеб белее, тем умрешь скорее»: навигатор еды от диетолога Майкла Поллана

Книга диетолога Майкла Поллана — отличный навигатор по разумному питанию

Forbes
Зачем (и как) покупать и коллекционировать современное искусство Зачем (и как) покупать и коллекционировать современное искусство

Почему все больше людей интересуется приобретением современного искусства

РБК
Открыть в приложении