Агенты
ArenaNet Improvement · выполнение задач
-3,67%
95% ДИ: -7,51–0,16
Место 38 · 7 489 сессий
В Arena: Beam 1.0 501B A23B
Рейтинг от
Сравнение моделей
Оценки Arena
Реальные задачи и выбор пользователейПодробнее о работе агента
Подтверждённый успех
ArenaConfirmed Success
-6,65%
95% ДИ: -13,19–-0,11
Место 40
В Arena: Beam 1.0 501B A23B
Рейтинг от
Похвала и жалобы
ArenaPraise vs Complaint
-2,08%
95% ДИ: -12,71–8,55
Место 33
В Arena: Beam 1.0 501B A23B
Рейтинг от
Управляемость
ArenaSteerability
-4,75%
95% ДИ: -9,99–0,49
Место 40
В Arena: Beam 1.0 501B A23B
Рейтинг от
Надёжность Bash
ArenaBash Reliability
-3,88%
95% ДИ: -17,57–9,8
Место 44
В Arena: Beam 1.0 501B A23B
Рейтинг от
Инструменты без галлюцинаций
ArenaTool Hallucination · улучшение
-1,12%
95% ДИ: -2,32–0,09
Место 44
В Arena: Beam 1.0 501B A23B
Рейтинг от
В агентных метриках показано улучшение к базовой линии, а не доля успешных задач; выше — лучше. ДИ — доверительный интервал. Конфигурация Arena может отличаться от оценки Artificial Analysis.
Проверено 17 октября 2026
Возможности
- Контекстное окноArtificial Analysis
- 1 048 576 токенов
- ВходArtificial Analysis
- Текст
- ВыходArtificial Analysis
- Текст
- Срез знанийArtificial Analysis
- Нет данных
- ПараметрыArtificial Analysis
- 501 млрд
- Активные параметрыArtificial Analysis
- 23 млрд
- ЛицензияArtificial Analysis
- Apache 2.0
Цена и скорость
USD за 1 млн токенов
- Входные токеныArtificial Analysis
- $0,7
- Выходные токеныArtificial Analysis
- $2,1
- Вход из кэшаArtificial Analysis
- $0,115
- Скорость генерацииArtificial Analysis
- 227,9 токенов/с
- До первого токенаArtificial Analysis
- 1,33 с
Скорость и задержка: медиана по провайдерам по данным Artificial Analysis. Цены могут различаться у провайдеров.
На общей шкале
Intelligence Index · выше — лучшеArtificial Analysis
Лидеры среди 416 релизов календаря. Исторические модели оценены по текущей версии Index; это не оценки на дату выхода. Знак ≈ означает приблизительную оценку.
Результаты тестов
Отдельные оценки Artificial AnalysisTerminal-Bench 4.0
Агентное программирование
Artificial AnalysisAutomationBench-AA
Работа с SaaS-инструментами
Artificial AnalysisGDP.pdf
Работа с документами
Artificial AnalysisSciCode
Научное программирование
Artificial AnalysisHumanity’s Last Exam
Знания и рассуждение
Artificial AnalysisAA-LCR
Рассуждение в длинном контексте
Artificial AnalysisCritPt
Задачи по физике
Artificial AnalysisПроцентные результаты показаны в исходной шкале каждого теста. Они измеряют разные задачи и не сравниваются друг с другом. Набор тестов зависит от версии модели.