GigaChat от Сбера вошла в пятерку лучших моделей ИИ мира
Российская нейросеть GigaChat от Сбера вошла в пятерку лучших моделей искусственного интеллекта в мире по версии журнала Arabian Business. Это единственное российское решение, которое вошло в международный бенчмарк, пишет ИА «Регнум»
Проверка моделей шла как на «родном», так и иностранных языках методом «слепого» тестирования, то есть аналитики не знали, какую систему ИИ проверяют. В оценке моделей использовали метод параллельного тестирования AI-моделей, который был разработан ChipAI для обеспечения справедливого и всестороннего их сравнения.
Модели проверялись на адекватный языковой перевод, творческое письмо, генерацию кода и анализ данных. Критерии оценки были адаптированы к заявленным возможностям рассматриваемой модели и включали такие показатели, как точность, последовательность, релевантность и способность обрабатывать нюансы подсказок.
Помимо GigaChat в рейтинг были включены нейросети от OpenAI, Google, Anthropic и других крупнейших мировых разработчиков.