Ai21-Labs · pașaport de model
Jamba 1 5 Mini
jamba-1-5-mini- Ponderi deschise
- Licență Jamba Open
- Lansat 2024-08-22(curatoriat)
- General · LMArena
- 1,240#305 din 396
- Cea mai bună percentilă
- 23.2General
- Poziția în cohortă
- 27.6mediană 37.7
Ce spun datele
Evaluat pe 6 din 27 axe urmărite. Fiecare cifră de mai jos este rezultatul publicat al modelului pe acel clasament.
Cele mai slabe axe
- 5 pct — LiveCodeBench (Artificial Analysis) (6.2%)
- 7.5 pct — MMLU-Pro (Artificial Analysis) (37.1%)
Neuniform: 18,2 puncte de percentilă între cea mai bună și cea mai slabă axă a sa — 23.2 pct pe General față de 5 pct pe LiveCodeBench (Artificial Analysis).
- General23.2 pct1,240Verifică →
- Prompturi dificile22 pct1,237Verifică →
- Urmarea instrucțiunilor20.7 pct1,205Verifică →
- Programare20.2 pct1,264Verifică →
- MMLU-Pro (Artificial Analysis)7.5 pct37.1%Verifică →
- LiveCodeBench (Artificial Analysis)5 pct6.2%Verifică →
- WebDev ArenaNeevaluat
- Vision ArenaNeevaluat
- Factuality ArenaNeevaluat
- Search ArenaNeevaluat
- Document ArenaNeevaluat
- Agent ArenaNeevaluat
- GPQA DiamondNeevaluat
- AIME (matematică)Neevaluat
- FrontierMathNeevaluat
- SimpleQA VerifiedNeevaluat
- ARC-AGI-2Neevaluat
- Humanity's Last ExamNeevaluat
- SimpleBenchNeevaluat
- LiveBenchNeevaluat
- BFCL v4 (apelare de funcții)Neevaluat
- SWE-bench Verified (clasament live)Neevaluat
- Terminal-Bench 4.0Neevaluat
- IFBench (Artificial Analysis)Neevaluat
- Halucinații HHEM (Vectara)Neevaluat
- SWE-bench VerifiedNeevaluat
- Terminal-BenchNeevaluat
Percentilele reprezintă poziția modelului în populația proprie a fiecărui clasament. Axele marcate „neevaluat” nu au niciun rezultat publicat pentru acest model — este o absență a datelor, nu un scor mic.
jamba-1.5-mini stands at 27.6 (raw mean 16.4) — measured on 6 of 27 axes.
jamba-1.5-mini stands at 27.6 versus a cohort median of 37.7 across 126 models released within 180 days — below the peer median.
jamba-1.5-mini scores in the 5th percentile on LiveCodeBench (Artificial Analysis).
jamba-1.5-mini scores at percentile 7.5 on MMLU-Pro (Artificial Analysis).
jamba-1.5-mini ranks between #316 and #994 across 5 built-in weightings — best under "Axat pe programare", worst under "Toate sursele".
Fiecare afirmație este un fapt calculat din datele actuale ale clasamentului, formulat de un apel de model la temperatură scăzută și respins de o poartă de validare dacă vreun număr nu se află în rândul sursă. Cum funcționează clasamentele →