Рейтинг нейросетей
Сравнивай модели, бенчмарки и цены. Быстро находи лучшее под твои задачи.
Мы фокусируемся на том, чтобы предоставить вам наиболее точные и актуальные данные от лучших разработчиков ИИ
Топ языковых моделей
# | ||||||||||||||||
---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|---|
41 | DeepSeek R1 Distill Llama 70B | 128K | 20 янв. 2025 г. | - | 70.6B | Нет | 0.10 | 0.40 | - | 65.2% | - | - | - | - | - | |
42 | DeepSeek R1 Distill Qwen 32B | 128K | 20 янв. 2025 г. | - | 32.8B | Нет | 0.12 | 0.18 | - | 62.1% | - | - | - | - | - | |
43 | DeepSeek-R1 | 131K | 20 янв. 2025 г. | - | 671.0B | Нет | 7.00 | 7.00 | 90.8% | 71.5% | - | 49.2% | - | - | - | |
44 | Kimi K2 Instruct | 128K | 1 янв. 2025 г. | - | 1000.0B | Нет | 0.57 | 2.29 | 89.5% | 75.1% | - | - | 93.3% | 56.5% | - | |
45 | DeepSeek-V3 | 131K | 25 дек. 2024 г. | - | 671.0B | Нет | 0.27 | 1.10 | 88.5% | 59.1% | - | 42.0% | - | - | - | |
46 | o1 | 200K | 17 дек. 2024 г. | - | - | Нет | 15.00 | 60.00 | 91.8% | 78.0% | - | 41.0% | 88.1% | 50.0% | - | |
47 | DeepSeek VL2 | 129K | 13 дек. 2024 г. | - | 27.0B | Да | 9.50 | 4800.00 | - | - | - | - | - | - | - | |
48 | Phi 4 | 16K | 12 дек. 2024 г. | 1 июн. 2024 г. | 14.7B | Нет | 0.07 | 0.14 | 84.8% | 56.1% | - | - | 82.6% | - | - | |
49 | Llama 3.3 70B Instruct | 128K | 6 дек. 2024 г. | - | 70.0B | Нет | 0.88 | 0.88 | 86.0% | 50.5% | - | - | 88.4% | - | - | |
50 | Gemini 2.0 Flash | 1049K | 1 дек. 2024 г. | 1 авг. 2024 г. | - | Да | 0.10 | 0.40 | - | 62.1% | - | - | - | - | - |
Размер контекстного окна
У каждой модели свой способ разделения текста на токены. Примерно токен = 3-4 символа, но зависит от языка и модели.
Важно: OpenAI считает по-одному, Claude по-другому, поэтому точные цифры всегда отличаются.
Чтобы понять масштаб — миллион токенов это:
~150 слов в минуту
~500 слов на страницу
~60 символов на строку
~150 слов в минуту
~500 слов на страницу
~60 символов на строку
На основе среднего количества символов в строке. См. Wikipedia.
Топ модели в вызове инструментов (Tool Calling)
Примеры Tool Calling в действии
→ send_email(to="ivan@company.com", subject="Отчёт", attachment="report.pdf")
→ get_weather(city="Moscow", lang="ru")
→ book_flight(date="2025-01-07", destination="SPB")
→ send_email(to="ivan@company.com", subject="Отчёт", attachment="report.pdf")
→ get_weather(city="Moscow", lang="ru")
→ book_flight(date="2025-01-07", destination="SPB")
Почему это важно для разработчиков
Представь: ты просишь модель проанализировать код, потом запустить тесты, затем зафиксировать изменения в git. Если модель в одном из шагов накосячит — всё развалится. Чем выше процент, тем меньше шансов, что твой автоматизированный процесс сломается на ровном месте.
Скорость генерации токенов
Отладка: 15 моделей, макс скорость: 1000 т/с
Демонстрация скорости генерации токенов
Значения сбрасываются каждые 15 секунд для демонстрации разных скоростей
Рейтинги LLM
Лучшая модель - Код
Лучшая мультимодальная модель
Лучшая модель - Знания
Самый длинный контекст
Самый дешевый API
Самый быстрый API
Лучшая модель - Код
Лучшая мультимодальная модель
Лучшая модель - Знания
Самый длинный контекст
Самый дешевый API
Самый быстрый API
Бенчмарки и тесты
MMLU
ЗнанияТест на понимание языка и широкие знания в 57 предметах
HumanEval
ПрограммированиеРешение задач по программированию на Python
GPQA
НаукаВопросы уровня PhD по физике, химии и биологии
ARC
РассужденияЛогические задачи для школьников на рассуждения
SWE-Bench
ИнженерияРеальные задачи разработки программного обеспечения
MMMU
МультимодальностьМультимодальные задачи на понимание изображений и текста
GSM8K
МатематикаМатематические задачи уровня начальной школы
HellaSwag
ПониманиеТест на здравый смысл и понимание контекста
Arena Hard
ДиалогиСложные задачи из пользовательских запросов
ComplexFuncBench
Tool CallingСложные сценарии вызова функций с многоступенчатыми задачами
Tau2
Tool CallingКомплексные сценарии вызова инструментов с множественными параметрами
ToolBench
Tool CallingПрактические задачи использования API в реальных сценариях
MMLU
ЗнанияТест на понимание языка и широкие знания в 57 предметах
HumanEval
ПрограммированиеРешение задач по программированию на Python
GPQA
НаукаВопросы уровня PhD по физике, химии и биологии
ARC
РассужденияЛогические задачи для школьников на рассуждения
SWE-Bench
ИнженерияРеальные задачи разработки программного обеспечения
MMMU
МультимодальностьМультимодальные задачи на понимание изображений и текста
GSM8K
МатематикаМатематические задачи уровня начальной школы
HellaSwag
ПониманиеТест на здравый смысл и понимание контекста
Arena Hard
ДиалогиСложные задачи из пользовательских запросов
ComplexFuncBench
Tool CallingСложные сценарии вызова функций с многоступенчатыми задачами
Tau2
Tool CallingКомплексные сценарии вызова инструментов с множественными параметрами
ToolBench
Tool CallingПрактические задачи использования API в реальных сценариях