LiveCodeBench
Beschrijving
LiveCodeBench is een holistische en contaminatievrije evaluatiebenchmark voor LLM's voor code die in de loop van de tijd continu nieuwe problemen verzamelt. Met name richt LiveCodeBench zich ook op bredere codegerelateerde capaciteiten, zoals zelfreparatie, code-uitvoering en voorspelling van testuitvoer, naast louter codegeneratie.
Gerelateerde tools
LLM Stats
LLM Stats is het meest uitgebreide LLM-klassement, dat API-modellen benchmarkt en vergelijkt met behulp van dagelijks bijgewerkte open-source communitygegevens over capaciteit, prijs, snelheid en contextlengte.
Prijs per token
Vergelijk LLM API-prijzen voor 200+ modellen van OpenAI, Anthropic, Google en meer. Inclusief token-tellers, kostencalculators en benchmarkvergelijkingen.
LMSYS Chatbot Arena Leaderboard
LMSYS Chatbot Arena is een crowdsourced open platform voor LLM-evaluaties. Verzamelde meer dan 1.000.000 menselijke paarsgewijze vergelijkingen om LLM's te rangschikken met het Bradley-Terry-model en de modelbeoordelingen op de Elo-schaal weer te geven.
Artificial Analysis
Artificial Analysis is een platform dat vergelijkingen en benchmarks biedt van AI-modellen en serviceproviders om gebruikers te helpen weloverwogen beslissingen te nemen bij het kiezen van AI-modellen en serviceproviders. Het platform biedt vergelijkende gegevens over een breed scala aan populaire AI-modellen, waaronder GPT-4 van OpenAI, Llama 3 van Meta en de Claude-serie van Anthropic, met prestatiestatistieken zoals responstijd, latentie en kosten.
BenchGecko
De datalaag van de AI-economie. AI-model benchmark leaderboard met prijsvergelijking tussen honderden aanbieders. Volgt duizenden modellen over 128 benchmarks, AI-economie-indicatoren, agent leaderboard en MCP-serverdirectory. Gratis API.