Даже GPT-5 путается в эмиратском арабском: в ОАЭ проверили ИИ на местных диалектах

Современный искусственный интеллект умеет распознавать арабскую культуру, но заставить его заговорить как жителя ОАЭ оказалось значительно сложнее. Слабое место арабы нашли даже у ведущих ИИ-моделей.

Учёные из Объединённых Арабских Эмиратов устроили крупным моделям искусственного интеллекта необычную проверку: их попросили не просто понимать арабский язык, а различать национальные диалекты и отвечать так, как действительно разговаривают жители разных арабских стран.

Результат оказался показательным. GPT-5 и Gemini 2.5 Pro хорошо справляются с пониманием культурного контекста, однако при генерации живой местной речи качество заметно снижается. Особенно трудными для моделей оказались эмиратский, ливийский, суданский и йеменский варианты арабского.

Исследователи Mohamed bin Zayed University of Artificial Intelligence разработали систему ArabCulture-Dialogue — набор из 6 942 диалоговых ситуаций, отражающих повседневную жизнь арабского мира.

Тест охватывает 13 стран, 12 крупных тематических направлений и 54 более узкие категории. Каждая ситуация подготовлена в двух вариантах: на современном литературном арабском и на национальном разговорном диалекте.

ИИ проверяли сразу на нескольких уровнях: понимает ли он культурную ситуацию, способен ли переводить литературный арабский на диалект и обратно и может ли самостоятельно продолжить разговор так, чтобы его речь действительно соответствовала конкретной стране.

В заданиях, где требовалось выбрать правильный с культурной точки зрения ответ, результаты ведущих моделей были очень высокими.

GPT-5 и Gemini 2.5 Pro показали около 94–95% точности как на литературном арабском, так и на диалектных заданиях.

Но когда искусственный интеллект попросили самостоятельно говорить на местном диалекте, разница стала намного заметнее.

GPT-5, например, хорошо переводил разговорную арабскую речь на литературный язык. Обратная задача — создать естественную фразу именно на нужном национальном диалекте — оказалась значительно сложнее.

Особенно интересны результаты по ОАЭ.

Эмиратский диалект оказался в числе четырёх наиболее сложных для GPT-5 наряду с ливийским, суданским и йеменским. В одном из строгих автоматических тестов на распознавание национального варианта арабского показатель для этих диалектов оказался нулевым.

Это не означает, что GPT-5 не умеет говорить по-арабски. Речь идёт о гораздо более тонкой проблеме: модель способна сформировать грамотный арабский текст, но характерные слова, выражения и речевые особенности могут оказаться недостаточно «эмиратскими», чтобы система уверенно отнесла ответ именно к ОАЭ.

ИИ знает, что происходит на свадьбе в ОАЭ, но может заговорить как саудовец

Исследователи приводят показательный пример. Модель может правильно понять культурное значение мабхары — традиционной курильницы с удом — на эмиратской свадьбе, определить контекст и дать подходящий ответ.

Но если попросить её воспроизвести тот же разговор именно на эмиратском диалекте, результат может приобрести особенности соседнего, например саудовского, варианта арабского.

Именно здесь проявляется одна из главных проблем современных языковых моделей: знать культуру и звучать как местный житель — не одно и то же.

Почему арабские диалекты остаются проблемой для ИИ

Арабский язык особенно сложен для искусственного интеллекта из-за огромного разрыва между литературной формой и повседневной речью.

Человек может изучить стандартный арабский и при этом столкнуться в Дубае, Каире, Эр-Рияде или Касабланке с совершенно разной лексикой, произношением и устойчивыми выражениями.

Для ИИ ситуация аналогична: модель должна не просто знать перевод слов, а учитывать страну, социальный контекст, местные традиции и реальные речевые привычки.

Исследователи MBZUAI также подчёркивают ограничения собственного теста. ArabCulture-Dialogue охватывает 13 из 22 арабских стран и условно использует один основной диалект для каждой страны, хотя в реальности речевые различия существуют даже внутри отдельных государств.

ОАЭ хотят научить ИИ понимать арабский мир глубже

Исследование показывает, куда может двигаться развитие искусственного интеллекта на арабском языке. Высокой точности на литературном арабском уже недостаточно. Для полноценной работы в ОАЭ и других странах региона ИИ должен понимать, чем эмиратская речь отличается от саудовской, египетской или марокканской, и учитывать культурные нормы конкретного общества.

Поэтому результаты теста выглядят одновременно как достижение и как предупреждение разработчикам: даже самые мощные современные модели уже хорошо знают арабскую культуру, но до способности действительно заговорить как местный им ещё есть куда развиваться.

Русский Дом

Метки: gpt; араб; оаэ; gemini; диалект; ии