Кажется, что у ИИ с лингвистикой не должно возникнуть проблем. Но так ли это?

Популярная механикаHi-Tech

Распознать любой ценой: как искусственный интеллект научился понимать арабский язык

Автор: Владимир Арлазаров, к.т.н., генеральный директор Smart Engines

Каждому из нас хотелось бы говорить на любом языке мира, не прилагая к этому никаких усилий. При этом мы примерно понимаем, что овладеть английским чуть легче, чем китайским, а испанским - легче, чем арабским. Кажется, что у искусственного интеллекта с лингвистикой вообще не должно возникнуть никаких проблем. Но так ли это на самом деле, расскажет Владимир Арлазаров, к.т.н., генеральный директор компании Smart Engines.

Самое интересное, что шкала сложности изучения языков действительного существует. Например, американский Институт зарубежной службы при Госдепе делит все языки на 4 категории в зависимости от того, сколько часов нужно носителям английского языка на их изучение до уровня свободного владения. Самые сложные языки — это арабский, китайский, корейский и японский, и на их изучение придется потратить не менее 2200 часов. Тогда как на испанский, к примеру, не более 600 часов.

В этой статье мы расскажем, допустимо ли считать арабский язык сложным для человека и искусственного интеллекта (спойлер — да), и почему распознавание арабской вязи — это отдельная ачивка для ИИ.

82100b993fd7d4121834fe92ff32874b.jpg

Что делает арабский таким сложным для человека?

Чтобы ответить на этот вопрос, достаточно вспомнить знаменитый анекдот:

— Ты француз?

— Да.

— О, а скажи что-нибудь на арабском?

Особенность номер один — это отсутствие единого арабского. Арабский язык является основным языком сразу во многих странах мира, что неизбежно ведет к возникновению различных местных диалектов, отличающихся друг от друга так же сильно, как русский от польского, и ни у одного из этих диалектов нет письменного варианта.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Как выжить в технологической сингулярности? Как выжить в технологической сингулярности?

Что такое концепция сингулярности?

Популярная механика
Как стартапу избежать утечек и защититься от кибератак Как стартапу избежать утечек и защититься от кибератак

Об опасности взлома необходимо помнить всегда

Inc.
Вход в провал: какие гаджеты опередили свое время и потерпели неудачу Вход в провал: какие гаджеты опередили свое время и потерпели неудачу

Гаджеты, которые обещали перевернуть нашу жизнь, но в итоге потерпели крах

Forbes
15 стыдных вещей, которые делает каждая женщина 15 стыдных вещей, которые делает каждая женщина

Ни одна девушка в этом не признается

Maxim
Вопрос психологу: что мешает нам экономить и как изменить свое отношение к деньгам Вопрос психологу: что мешает нам экономить и как изменить свое отношение к деньгам

Почему экономия часто кажется наказанием и как можно изменить это восприятие

Правила жизни
Откуда родом лягушка — подскажет её кожный секрет Откуда родом лягушка — подскажет её кожный секрет

Исследователи нашли новый способ различать виды и популяции лягушек

Наука и жизнь
Дохлая жаба и папирус: как женщины справлялись с месячными в прошлом Дохлая жаба и папирус: как женщины справлялись с месячными в прошлом

Чем бы нам пришлось пользоваться, если б мы жили в Древнем Египте

Cosmopolitan
Привет с альфы Центавра: как и зачем астрономы ищут сигналы инопланетян Привет с альфы Центавра: как и зачем астрономы ищут сигналы инопланетян

Каковы же наши шансы на связь с братьями по разуму в космосе?

Forbes
Стоит отметить Стоит отметить

Оксана Бондаренко, основательница бренда «Ли–Лу», отмечает 28 лет в бизнесе

Harper's Bazaar
Здоровье ног. Как предотвратить и лечить варикоз Здоровье ног. Как предотвратить и лечить варикоз

Почему возникает варикоз, как его лечат и можно ли обойтись без операции?

Cosmopolitan
После стоматолога лучше не садиться за руль. Могут лишить прав После стоматолога лучше не садиться за руль. Могут лишить прав

Как анестезия влияет на реакцию у водителей

РБК
Лучшие хорроры 2021 года Лучшие хорроры 2021 года

Список самых любопытных хорроров года 2021 года

Esquire
Нас везут к злой колдунье: история мальчика, тайно жившего в Бухенвальде Нас везут к злой колдунье: история мальчика, тайно жившего в Бухенвальде

История самого юного узника концлагеря

Cosmopolitan
«Хотите измениться к лучшему — меняйте свое окружение» «Хотите измениться к лучшему — меняйте свое окружение»

Что можно сделать, чтобы наша жизнь стала лучше?

Psychologies
Эдвард Радзинский. Прощальная гастроль клуба «418» Эдвард Радзинский. Прощальная гастроль клуба «418»

Эдвард Радзинский остается блистательным рассказчиком

СНОБ
Дарья Урсуляк: «В нашем кино сейчас эротических сцен в избытке» Дарья Урсуляк: «В нашем кино сейчас эротических сцен в избытке»

Дарья Урсуляк — о предстоящих проектах, откровенных сценах и секретах красоты

Cosmopolitan
Зачарованная война Зачарованная война

О «Повести пламенных лет» Юлии Солнцевой, получившей приз за режиссуру в Канне

Weekend
Что делать, если нет скул? 8 примеров модного макияжа звезд с круглым лицом Что делать, если нет скул? 8 примеров модного макияжа звезд с круглым лицом

Как мейкап помогает в «рисовании» скул на круглом лице

VOICE
Убить прокрастинатора: 5 книг о привычках, которые изменят вашу жизнь Убить прокрастинатора: 5 книг о привычках, которые изменят вашу жизнь

Книги, которые помогут добиться желаемого благодаря полезным привычкам

Популярная механика
Еще 15 стыдных вещей, которые делает каждая женщина Еще 15 стыдных вещей, которые делает каждая женщина

В чем девушки никогда не признаются

Maxim
Археологи достали из растаявшего ледника вторую лыжу эпохи викингов Археологи достали из растаявшего ледника вторую лыжу эпохи викингов

Ученые нашли пару лыж, возраст которой около 1300 лет

N+1
Трудности перевода: что не так с голосовыми помощниками Трудности перевода: что не так с голосовыми помощниками

Почему сфера голосовых помощников еще далека от инновационных прорывов?

Inc.
Жизнь в зоне смерти Жизнь в зоне смерти

Британец Кентон Кул стал первым человеком, которому покорилась "Тройная корона"

Men’s Health
«С нуля до профи» «С нуля до профи»

Какие знания и умения необходимы лидеру для проведения ESG-трансформации

РБК
«В нашем мозгу непонятно каким образом записан весь мир» «В нашем мозгу непонятно каким образом записан весь мир»

Игорь Кричевер: мехмат ничем не отличается от творческих вузов наподобие МХАТа

Наука
Неокрестьяне и «манящий агротех» с кофемашинами в парниках: как французы вовлекают молодёжь в сельское хозяйство Неокрестьяне и «манящий агротех» с кофемашинами в парниках: как французы вовлекают молодёжь в сельское хозяйство

Как частные предприниматели доказывают, что фермерство — это прибыльный бизнес

VC.RU
Автомобили на дровах: как технологии СССР помогут пережить апокалипсис на колесах Автомобили на дровах: как технологии СССР помогут пережить апокалипсис на колесах

Каждый, кто слышит про машины на дровах, первым делом восклицает: «Бред!»

Maxim
Запуск без денег и раскрутка через TikTok: как устроен магазин корейской косметики с выручкой 40 млн рублей за полгода Запуск без денег и раскрутка через TikTok: как устроен магазин корейской косметики с выручкой 40 млн рублей за полгода

Наталья Мичкаева — об открытии магазина косметики в пандемию

VC.RU
Герои самых популярных мемов: что с ними стало сейчас? Герои самых популярных мемов: что с ними стало сейчас?

Что сейчас стало с героями самых знаменитых мемов

VOICE
Археологи раскопали в Верхней Нубии 142 погребения эпохи неолита Археологи раскопали в Верхней Нубии 142 погребения эпохи неолита

В Верхней Нубии обнаружили 142 человеческих погребения эпохи неолита

N+1
Открыть в приложении