Кажется, что у ИИ с лингвистикой не должно возникнуть проблем. Но так ли это?

Популярная механикаHi-Tech

Распознать любой ценой: как искусственный интеллект научился понимать арабский язык

Автор: Владимир Арлазаров, к.т.н., генеральный директор Smart Engines

Каждому из нас хотелось бы говорить на любом языке мира, не прилагая к этому никаких усилий. При этом мы примерно понимаем, что овладеть английским чуть легче, чем китайским, а испанским - легче, чем арабским. Кажется, что у искусственного интеллекта с лингвистикой вообще не должно возникнуть никаких проблем. Но так ли это на самом деле, расскажет Владимир Арлазаров, к.т.н., генеральный директор компании Smart Engines.

Самое интересное, что шкала сложности изучения языков действительного существует. Например, американский Институт зарубежной службы при Госдепе делит все языки на 4 категории в зависимости от того, сколько часов нужно носителям английского языка на их изучение до уровня свободного владения. Самые сложные языки — это арабский, китайский, корейский и японский, и на их изучение придется потратить не менее 2200 часов. Тогда как на испанский, к примеру, не более 600 часов.

В этой статье мы расскажем, допустимо ли считать арабский язык сложным для человека и искусственного интеллекта (спойлер — да), и почему распознавание арабской вязи — это отдельная ачивка для ИИ.

82100b993fd7d4121834fe92ff32874b.jpg

Что делает арабский таким сложным для человека?

Чтобы ответить на этот вопрос, достаточно вспомнить знаменитый анекдот:

— Ты француз?

— Да.

— О, а скажи что-нибудь на арабском?

Особенность номер один — это отсутствие единого арабского. Арабский язык является основным языком сразу во многих странах мира, что неизбежно ведет к возникновению различных местных диалектов, отличающихся друг от друга так же сильно, как русский от польского, и ни у одного из этих диалектов нет письменного варианта.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Как работают современные российские ледоколы Как работают современные российские ледоколы

«кСромные размеры» — последнее, что приходит в голову при виде ледокола

Популярная механика
«В нашем мозгу непонятно каким образом записан весь мир» «В нашем мозгу непонятно каким образом записан весь мир»

Игорь Кричевер: мехмат ничем не отличается от творческих вузов наподобие МХАТа

Наука
Я, мы, робот: как андроиды проникли в наши дома и головы Я, мы, робот: как андроиды проникли в наши дома и головы

О том, как роботы медленно, но верно становятся частью нашей жизни

Forbes
Как в США несколько лет сражались за яйца — история одной нелепой войны Как в США несколько лет сражались за яйца — история одной нелепой войны

Война за яйца: в ходе неё гибли люди и едва ли не погибла целая экосистема

Популярная механика
От жуткого хоррора до ироничной пародии: как кино переосмысливает классические сказки на новый лад От жуткого хоррора до ироничной пародии: как кино переосмысливает классические сказки на новый лад

Оригинальные проекты, переосмысливающие классические сказки в неожиданном ключе

Правила жизни
Нужен характер Нужен характер

В борьбе с раком молочной железы многое зависит от решимости пациенток

Cosmopolitan
Почему одиноки дочери «безумных» матерей Почему одиноки дочери «безумных» матерей

Иногда причина одиночества женщины — мать с пограничным расстройством личности

Psychologies
Дамблдор от моды. Парижский показ-трибьют Альберу Эльбазу, который войдет в историю Дамблдор от моды. Парижский показ-трибьют Альберу Эльбазу, который войдет в историю

Шоу-трибьют в честь Альбера Эльбаза

Esquire
Подвиг офицера, который пожертвовал собой, чтобы спасти заложников во время «Норд-Оста» Подвиг офицера, который пожертвовал собой, чтобы спасти заложников во время «Норд-Оста»

Офицер предложил террористам себя в обмен на заложников в «Норд-Осте»

Maxim
Древнейшего хищного динозавра Великобритании назвали в честь отца короля Артура Древнейшего хищного динозавра Великобритании назвали в честь отца короля Артура

Палеонтологи описали новый род и вид теропод из верхнетриасовых отложений Уэльса

N+1
Дедушка, Егор и Наташа Дедушка, Егор и Наташа

Рассказ обладателя премии «Национальный бестселлер» Алексея Сальникова

Grazia
Какие женщины отталкивают мужчин? Рассуждает Михаил Лабковский Какие женщины отталкивают мужчин? Рассуждает Михаил Лабковский

Несколько эффективных способов отпугнуть мужчину, того совершенно не желая

VOICE
10 советов от того, кто стал миллионером в 37 10 советов от того, кто стал миллионером в 37

«Правила жизни» Криса Рейнинга, которые помогли ему достичь успеха

Psychologies
60 лет в комоде: девушка надела на свадьбу винтажное бабушкино платье 60 лет в комоде: девушка надела на свадьбу винтажное бабушкино платье

Элли Ливингвотер надела на свадьбу бабушкин наряд 60-летней давности

Cosmopolitan
Не Настя, а Амина: Решетова и другие звезды, которые сменили имена Не Настя, а Амина: Решетова и другие звезды, которые сменили имена

10 примеров, когда знаменитости меняли имена

Cosmopolitan
«Я думала, что плохо запоминаю людей, а оказалось, у меня «лицевая слепота» «Я думала, что плохо запоминаю людей, а оказалось, у меня «лицевая слепота»

Есть люди, лишенные способности узнавать лица в принципе

Psychologies
4 признака того, что вы слишком контролируете своих подчиненных 4 признака того, что вы слишком контролируете своих подчиненных

Как понять, что вы выбрали неудачный стиль управления?

Psychologies
Рыцарь футуризма Рыцарь футуризма

Как Джанни Маттиоли очистил итальянский футуризм от политики

Weekend
Одна вокруг света: Панамский канал и путь в неизвестность Одна вокруг света: Панамский канал и путь в неизвестность

Путешественницы рассказывают, как устроена шлюзовая система Панамского канала

Forbes
О птицах и людях О птицах и людях

Что делать, если животные отказываются жить по правилам, введенным человеком

Forbes
Послания из ГУЛАГа. Фрагмент аудиосборника «Из личной переписки» Послания из ГУЛАГа. Фрагмент аудиосборника «Из личной переписки»

«Сноб» публикует письма Николая Повало-Швейковского

СНОБ
По ОМС и не только: самый подробный гид по ЭКО По ОМС и не только: самый подробный гид по ЭКО

Пары, у которых не получается зачать ребенка, могут воспользоваться ЭКО

Cosmopolitan
Похудела и пожалела: я отказалась от хлеба на неделю и не собираюсь повторять Похудела и пожалела: я отказалась от хлеба на неделю и не собираюсь повторять

Что может случиться, если отказаться от хлеба и булок

Cosmopolitan
Перестройку доменов в сегнетоэлектрике увидели в реальном времени Перестройку доменов в сегнетоэлектрике увидели в реальном времени

Физики выделили механизмы, происходящие при перестройке доменной структуры

N+1
Возвращение «Землян» на большую сцену – не случайность, а закономерность Возвращение «Землян» на большую сцену – не случайность, а закономерность

Поговорим о таком явлении как «феномен возвращения»

Cosmopolitan
От первого в СССР магазина с западными стандартами до устаревшего ТЦ: история универмага «Москва» От первого в СССР магазина с западными стандартами до устаревшего ТЦ: история универмага «Москва»

История универмага «Москва»

VC.RU
Александра Ребенок в зоне турбулентности. Интервью с актрисой Александра Ребенок в зоне турбулентности. Интервью с актрисой

Александра Ребенок — о секрете профессии, почему надо смотреть «Содержанок»

СНОБ
Почему мы больше не красимся на работу Почему мы больше не красимся на работу

Похоже, привычка краситься каждый день для многих стала пережитком прошлого

Psychologies
Отеки, усталость, тяжесть: когда и зачем тебе нужен флеболог Отеки, усталость, тяжесть: когда и зачем тебе нужен флеболог

Ты тоже могла сталкиваться с тяжестью в ногах, характерным «гулом», отеками

Cosmopolitan

Автобиография легендарного редактора журнала Vogue

Esquire
Открыть в приложении