Компания Primate Labs, занимающаяся тестированием производительности, в четверг выпустила Geekbench AI 1.0. Приложение, доступное в настоящее время для Android, Linux, MacOS и Windows, применяет принципы Geekbench к машинному обучению, глубокому обучению и другим рабочим нагрузкам искусственного интеллекта в попытке стандартизировать оценку производительности на различных платформах. Оно является преемником Geekbench ML (машинное обучение), который был представлен в 2021 году и в настоящее время имеет версию 0.6.
"В последние годы компании сходятся в использовании термина 'ИИ' в таких нагрузках работы (и в своем связанном маркетинге)," - говорит Primate Labs о смене названия. "Для того чтобы обеспечить понимание того, что делает этот бенчмарк и как он работает – от инженеров до энтузиастов производительности, мы почувствовали, что настало время обновить его".
Ранее на этой неделе компания OpenAI, создатель ChatGPT, объявила о выходе новой версии своей собственной модели бенчмарка искусственного интеллекта. SWE-bench Verified – это "проверенное человеком" предложение, которое использует человеческую проверку для определения эффективности моделей в решении "реальных проблем".
