Google · pașaport de model
Gemini 1 5 Pro 002
gemini-1-5-pro-002- Doar în cloud
- Licență Proprietary
- Lansat 2024-09-24(curatoriat)
- General · LMArena
- 1,351#201 din 396
- Cea mai bună percentilă
- 53.6LiveBench
- Poziția în cohortă
- 39.0mediană 38.2
Ce spun datele
Evaluat pe 11 din 27 axe urmărite. Fiecare cifră de mai jos este rezultatul publicat al modelului pe acel clasament.
Cele mai slabe axe
- 13 pct — Humanity's Last Exam (4.6%)
Neuniform: 40,6 puncte de percentilă între cea mai bună și cea mai slabă axă a sa — 53.6 pct pe LiveBench față de 13 pct pe Humanity's Last Exam.
- LiveBench53.6 pct54.9%Verifică →
- Urmarea instrucțiunilor50 pct1,339Verifică →
- General49.5 pct1,351Verifică →
- Prompturi dificile45.7 pct1,351Verifică →
- GPQA Diamond41.6 pct57.2%Verifică →
- Vision Arena39.3 pct1,179Verifică →
- Programare37.9 pct1,356Verifică →
- AIME (matematică)30.5 pct23.1%Verifică →
- SimpleBench19.5 pct27.1%Verifică →
- ARC-AGI-215.7 pct0.8%Verifică →
- Humanity's Last Exam13 pct4.6%Verifică →
- WebDev ArenaNeevaluat
- Factuality ArenaNeevaluat
- Search ArenaNeevaluat
- Document ArenaNeevaluat
- Agent ArenaNeevaluat
- FrontierMathNeevaluat
- SimpleQA VerifiedNeevaluat
- BFCL v4 (apelare de funcții)Neevaluat
- SWE-bench Verified (clasament live)Neevaluat
- Terminal-Bench 4.0Neevaluat
- MMLU-Pro (Artificial Analysis)Neevaluat
- LiveCodeBench (Artificial Analysis)Neevaluat
- IFBench (Artificial Analysis)Neevaluat
- Halucinații HHEM (Vectara)Neevaluat
- SWE-bench VerifiedNeevaluat
- Terminal-BenchNeevaluat
Percentilele reprezintă poziția modelului în populația proprie a fiecărui clasament. Axele marcate „neevaluat” nu au niciun rezultat publicat pentru acest model — este o absență a datelor, nu un scor mic.
gemini-1.5-pro-002 stands at 39 (raw mean 36) — measured on 11 of 27 axes.
gemini-1.5-pro-002 stands at 39 versus a cohort median of 38.2 across 132 models released within 180 days — above the peer median.
On Humanity's Last Exam, gemini-1.5-pro-002 raised the running best score by 0.5 percentage points to 4.6% on 2024-09-24.
gemini-1.5-pro-002 scores in the 13th percentile on Humanity's Last Exam.
gemini-1.5-pro-002 ranks between #185 and #899 across 5 built-in weightings — best under "Conversație pe primul loc", worst under "Toate sursele".
Fiecare afirmație este un fapt calculat din datele actuale ale clasamentului, formulat de un apel de model la temperatură scăzută și respins de o poartă de validare dacă vreun număr nu se află în rândul sursă. Cum funcționează clasamentele →