LiveCodeBench
Описание
LiveCodeBench — это целостный и свободный от загрязнения оценочный бенчмарк LLM для кода, который постоянно собирает новые задачи с течением времени. В частности, LiveCodeBench также уделяет внимание более широким возможностям, связанным с кодом, таким как самовосстановление, выполнение кода и прогнозирование выходных данных тестов, помимо простой генерации кода.
Похожие инструменты
LLM Stats
LLM Stats — самый полный рейтинг LLM, который оценивает и сравнивает API-модели, используя ежедневно обновляемые открытые данные сообщества о производительности, цене, скорости и длине контекста.
Цена за токен
Сравнивайте цены на LLM API для 200+ моделей от OpenAI, Anthropic, Google и других. Включает счётчики токенов, калькуляторы стоимости и сравнения бенчмарков.
LMSYS Chatbot Arena Leaderboard
LMSYS Chatbot Arena — это краудсорсинговая открытая платформа для оценки LLM. Собрано более 1 000 000 человеческих попарных сравнений для ранжирования LLM с помощью модели Брэдли-Терри и отображения рейтингов моделей по шкале Эло.
Artificial Analysis
Artificial Analysis — это платформа, которая предоставляет сравнения и бенчмарки моделей ИИ и поставщиков услуг, чтобы помочь пользователям принимать обоснованные решения при выборе моделей ИИ и поставщиков услуг. Платформа предоставляет сравнительные данные по широкому спектру популярных моделей ИИ, включая GPT-4 от OpenAI, Llama 3 от Meta и серию Claude от Anthropic, охватывая такие показатели производительности, как время отклика, задержка и стоимость.
BenchGecko
Уровень данных экономики ИИ. Таблица лидеров бенчмарков моделей ИИ со сравнением цен у сотен провайдеров. Отслеживает тысячи моделей по 128 бенчмаркам, индикаторы экономики ИИ, таблицу лидеров агентов и каталог серверов MCP. Бесплатный API.