Google изменила систему оценки искусственного интеллекта для помощи в написании кода для Android-приложений. Обновленный рейтинг Android Bench теперь работает на новой тестовой системе Harbor. Об этом сообщает издание Ferra.ru.

Новая система Harbor, по словам разработчиков, лучше прежней оценивает, насколько хорошо ИИ-модели справляются с реальными задачами. Среди них — переписывание старого кода на современный язык и настройка работы умных часов.

После смены тестов Google заново проверила все модели и добавила восемь новых. Лидером обновленного рейтинга стал Claude Fable 5 с результатом 84,5%. Второе место занял GPT 5.5 (80,2%), а третье — Claude Sonnet 5 (76,2%).

Среди бесплатных моделей с открытым кодом лучшей стала GLM 5.2 (72,2%), за ней следует Kimi K2.7 Code (70,4%). Собственная модель Google Gemini 3.1 Pro оказалась на пятой строчке с результатом 73,7%.

Подписывайтесь на наш Telegram-канал, чтобы быть в курсе всех новостей и событий Рунета.