АйPulatov ✔

Искусственный интеллект превзошел людей в тесте на грамотность узбекского языка

Команда проектов UzLiB и Tahrirchi.uz собрали тесты на грамотность, опубликованные в Telegram-каналах @oriftolib, @xatoliklar, @tahrir_uz и @tahrirchi_uz, и предложили их разным ИИ-моделям. Участникам (и людям, и ИИ) предлагалось выполнить задания на:

✅ Определение правильных слов – насколько точно модель выбирает нужные слова.
✅ Понимание значения – как хорошо ИИ распознает смысл слов.
✅ Контекстное понимание – насколько правильно модель интерпретирует слова в зависимости от ситуации.
✅ Заполнение пропусков – насколько точно модель может дополнить пропущенные слова.

Какие модели показали лучшие результаты?

В тесте приняли участие ведущие ИИ-решения от Google, OpenAI, Meta, Microsoft и других компаний. Вот лидеры рейтинга:

🥇 Gemini 2.0 Pro Experimental (Google) – 63,03%
🥈 GPT-4o (OpenAI) – 62,87%
🥉 Gemini 2.0 Flash (Google) – 60,88%
🏅 Claude 3.7 Sonnet (Anthropic) – 59,38%

Для сравнения, средний показатель человеческих участников составил 58,94%.

То есть ИИ уже опережает людей по грамотности в узбекском языке. Особенно высокие результаты продемонстрировали модели от Google и OpenAI, а вот Meta, Microsoft и Mistral AI пока уступают лидерам.

www.tgoop.com/pulatov_kh/2938

1.8K viewsedited  Mar 16 at 19:06

Искусственный интеллект превзошел людей в тесте на грамотность узбекского языка

Команда проектов UzLiB и Tahrirchi.uz собрали тесты на грамотность, опубликованные в Telegram-каналах @oriftolib, @xatoliklar, @tahrir_uz и @tahrirchi_uz, и предложили их разным ИИ-моделям. Участникам (и людям, и ИИ) предлагалось выполнить задания на:

✅ Определение правильных слов – насколько точно модель выбирает нужные слова.
✅ Понимание значения – как хорошо ИИ распознает смысл слов.
✅ Контекстное понимание – насколько правильно модель интерпретирует слова в зависимости от ситуации.
✅ Заполнение пропусков – насколько точно модель может дополнить пропущенные слова.

Какие модели показали лучшие результаты?

В тесте приняли участие ведущие ИИ-решения от Google, OpenAI, Meta, Microsoft и других компаний. Вот лидеры рейтинга:

🥇 Gemini 2.0 Pro Experimental (Google) – 63,03%
🥈 GPT-4o (OpenAI) – 62,87%
🥉 Gemini 2.0 Flash (Google) – 60,88%
🏅 Claude 3.7 Sonnet (Anthropic) – 59,38%

Для сравнения, средний показатель человеческих участников составил 58,94%.

То есть ИИ уже опережает людей по грамотности в узбекском языке. Особенно высокие результаты продемонстрировали модели от Google и OpenAI, а вот Meta, Microsoft и Mistral AI пока уступают лидерам.

BY АйPulatov