Кажется, что у ИИ с лингвистикой не должно возникнуть проблем. Но так ли это?

Популярная механикаHi-Tech

Распознать любой ценой: как искусственный интеллект научился понимать арабский язык

Автор: Владимир Арлазаров, к.т.н., генеральный директор Smart Engines

Каждому из нас хотелось бы говорить на любом языке мира, не прилагая к этому никаких усилий. При этом мы примерно понимаем, что овладеть английским чуть легче, чем китайским, а испанским - легче, чем арабским. Кажется, что у искусственного интеллекта с лингвистикой вообще не должно возникнуть никаких проблем. Но так ли это на самом деле, расскажет Владимир Арлазаров, к.т.н., генеральный директор компании Smart Engines.

Самое интересное, что шкала сложности изучения языков действительного существует. Например, американский Институт зарубежной службы при Госдепе делит все языки на 4 категории в зависимости от того, сколько часов нужно носителям английского языка на их изучение до уровня свободного владения. Самые сложные языки — это арабский, китайский, корейский и японский, и на их изучение придется потратить не менее 2200 часов. Тогда как на испанский, к примеру, не более 600 часов.

В этой статье мы расскажем, допустимо ли считать арабский язык сложным для человека и искусственного интеллекта (спойлер — да), и почему распознавание арабской вязи — это отдельная ачивка для ИИ.

82100b993fd7d4121834fe92ff32874b.jpg

Что делает арабский таким сложным для человека?

Чтобы ответить на этот вопрос, достаточно вспомнить знаменитый анекдот:

— Ты француз?

— Да.

— О, а скажи что-нибудь на арабском?

Особенность номер один — это отсутствие единого арабского. Арабский язык является основным языком сразу во многих странах мира, что неизбежно ведет к возникновению различных местных диалектов, отличающихся друг от друга так же сильно, как русский от польского, и ни у одного из этих диалектов нет письменного варианта.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Конаковская ГРЭС: титан советской энергетики Конаковская ГРЭС: титан советской энергетики

Конаковская ГРЭС издали выглядит как большой трехмачтовый корабль

Популярная механика
Голодная война Голодная война

Нездоровые отношения с едой — бич моделей

Vogue
В режиме «не беспокоить»: что такое синдром цифровой усталости, чем он опасен и как с ним бороться В режиме «не беспокоить»: что такое синдром цифровой усталости, чем он опасен и как с ним бороться

Как зумеры столкнулись с выгоранием от бесконечного скроллинга социальных сетей

Правила жизни
Взглянуть на миллиарды лет назад Взглянуть на миллиарды лет назад

Как построить телескоп площадью 100 квадратных километров

Наука
Как повысить самооценку и обрести уверенность? 11 советов психолога Как повысить самооценку и обрести уверенность? 11 советов психолога

Заниженная самооценка мешает нам строить здоровые отношения и карьеру

Psychologies
Уловки автодилеров: как не переплатить при покупке автомобиля Уловки автодилеров: как не переплатить при покупке автомобиля

На что обращать внимание при покупке автомобиля в дилерском центре

СНОБ
Какие животные умеют петь? Какие животные умеют петь?

Поставленным голосом могут похвастаться даже некоторые грызуны

Популярная механика
Новая добрая бедность Новая добрая бедность

Татьяна Алешичева о сериале «Уборщица»

Weekend
Искусство убеждать: 14 правил ведения сложных переговоров Искусство убеждать: 14 правил ведения сложных переговоров

Отрывок из книги «Убедить дракона» — об особенностях ведения переговоров

Inc.
5 необычных и жутких обрядов африканских племен 5 необычных и жутких обрядов африканских племен

Это вам не свадебные конкурсы

Playboy
6 моментов, которые многое расскажут вам о характере человека 6 моментов, которые многое расскажут вам о характере человека

Благодаря умению разбираться в людях мы понимаем, кому стоит доверять

Psychologies
«ЖЖ — всего лишь транспорт, который устарел». Медиаменеджер Демьян Кудрявцев — об интернете нулевых и его главных действующих лицах «ЖЖ — всего лишь транспорт, который устарел». Медиаменеджер Демьян Кудрявцев — об интернете нулевых и его главных действующих лицах

Демьян Кудрявцев о былом интернете, цензуре и о том, почему ЖЖ в России взлетел

Esquire
«Всегда эксперимент». Краткий гид по российскому портвейну «Всегда эксперимент». Краткий гид по российскому портвейну

Какой портвейн достоин вашего внимания?

СНОБ
Фантастические беспилотники и где они обитают Фантастические беспилотники и где они обитают

Если вы давно хотели прокатиться на беспилотнике, мы расскажем, где их искать

Популярная механика
Надуть надувателей: блогеры разоблачают телефонных мошенников, чтобы в мире стало «на одну обманутую бабушку меньше» Надуть надувателей: блогеры разоблачают телефонных мошенников, чтобы в мире стало «на одну обманутую бабушку меньше»

Кто такие скамбайтеры и как они борются с мошенниками?

VC.RU
7 самых необычных и таинственных мест на планете 7 самых необычных и таинственных мест на планете

Эти уголки планеты заставят вас удивиться

Playboy
Мамонтов и другую арктическую мегафауну погубил рост влажности Мамонтов и другую арктическую мегафауну погубил рост влажности

Мамонтов погубили не охотники, а потепление климата и рост влажности

N+1
30 признаков эмоциональной травмы 30 признаков эмоциональной травмы

Как распознать симптомы эмоциональных ран?

Psychologies
Да здравствует удаленка!: 5 важных пунктов в организации работы на дому Да здравствует удаленка!: 5 важных пунктов в организации работы на дому

Что важно учесть, чтобы работа дома была эффективной?

Playboy
Стриминг. Онлайн-кинотеатр Стриминг. Онлайн-кинотеатр

Как ivi удается выигрывать в битве с пиратами и соревноваться с корпорациями

Esquire
20 ошибок, которые совершает почти каждый владелец кошки 20 ошибок, которые совершает почти каждый владелец кошки

Иногда наша любовь может навредить кошке.

Популярная механика
Бизнес на опечатках: в 50-х секретарше надоело ошибаться в документах, она взбила краску в блендере и создала корректор Бизнес на опечатках: в 50-х секретарше надоело ошибаться в документах, она взбила краску в блендере и создала корректор

Как секретарша изобрела корректор и сделала из своего гараж мини-завод

VC.RU
Блан де блан Блан де блан

Ксения Собчак рассказала всю свою жизнь Ариану Романовскому

Tatler
Сто лет одиночества: почему мы не можем построить отношения? Сто лет одиночества: почему мы не можем построить отношения?

Почему мы так сильно хотим сблизиться с кем-то и все равно остаемся одни

Psychologies
Вместо школы: несколько эффективных способов заняться собственным образованием Вместо школы: несколько эффективных способов заняться собственным образованием

Чтобы самообразование было продуктивным, к нему следует относиться как к проекту

Inc.
«Домашнее насилие и я: история Мии». Мия Бордман сняла фильм о бытовой тирании «Домашнее насилие и я: история Мии». Мия Бордман сняла фильм о бытовой тирании

Звезда телешоу «Teen Mom UK» сняла документальный фильм о домашнем насилии

Cosmopolitan
Михаил Вишневский Михаил Вишневский

Михаил Вишневский: «Грибы могут примерно всё»

Собака.ru
Антропологи нашли слепки утерянных во время войны окаменелостей неандертальца Антропологи нашли слепки утерянных во время войны окаменелостей неандертальца

Палеоантропологи обнаружили слепки костей неандертальца Ле Мустье–1

N+1
Как накормить малоежку? Читай в новой книге Марики Кравцовой «Мама, хочу есть!» Как накормить малоежку? Читай в новой книге Марики Кравцовой «Мама, хочу есть!»

Марика Кравцова — о специфике детского питания и о том, как кормить детей

Cosmopolitan
Древние сибиряки оказались предками таримских мумий Древние сибиряки оказались предками таримских мумий

Палеогенетики разобрались в происхождении населения Синьцзяна бронзового века

N+1
Открыть в приложении