Новости

Польский язык оказался лучшим для сложных задач ИИ, на пятом месте — русский

Международное исследование показало, что показало, что нейросети лучше всего справлялись со сложными задачами, когда получали запросы на польском языке. Авторы работы признают, что этот результат оказался для них самих удивительным — как и то, что английский занял лишь шестое место среди 26 изученных ими языков.

Исследование провела группа американских ученых — они сравнили, как шесть так называемых больших языковых моделей справлялись с одними и теми же заданиями на 26 разных языках.

Большие языковые модели, или LLM — это программы искусственного интеллекта, обученные на огромных объемах данных. Благодаря этому они могут выполнять такие задачи, как распознавание, создание и перевод текста. Именно такие модели лежат в основе самых популярных чат-ботов ИИ — ChatGPT, Gemini или Grok.

Исследование показало, что нейросети лучше всего справлялись со сложными задачами, когда получали запросы на польском языке. В этом случае они давали правильные ответы в среднем в 88% случаев. 

Английский оказался только шестым с результатом 83,9%, а китайский — язык, который, как и английский, чаще всего используют для предварительного обучения больших языковых моделей, — показал только четвертый с конца результат с 62,1% правильных ответов.

Русский оказался на пятом месте с 84% правильных ответов. Второе, третье и четвертое место заняли французский (87%), итальянский (86%) и испанский (85%) языки. 

Ученые пока не могут объяснить такой успех польского языка — объем данных на этом языке, необходимых для обучения моделей ИИ, значительно меньше, чем на английском или китайском.

В самой Польше говорят, что польский язык давно считается очень сложным для изучения — однако, как оказалось, трудности с ним испытывают люди, но не ИИ.

В этом году правительство Польши запустило собственную большую языковую модель PLLuM.  Она находится в свободном доступе и должна помочь развивать ИИ на польском языке.

Одна из целей проекта — упростить работу государственных служб. В августе город Ченстохова первым начал использовать PLLuM, чтобы ускорить подготовку официальных писем, анализ обращений жителей, краткое изложение длинных документов и другие задачи.

Топ-10 языков, на которых модели лучше всего справлялись со сложными заданиями

  1. Польский (88% правильных ответов)
  2. Французский (87%)
  3. Итальянский (86%)
  4. Испанский (85%)
  5. Русский (84%)
  6. Английский (83,9%)
  7. Украинский (83,5%)
  8. Португальский (82%)
  9. Немецкий (81%)
  10. Нидерландский (80%)