Sari la conținut

Română · beta. Traducerea a fost făcută automat și este încă în curs de revizuire. Citește pagina în engleză

Benchmark-uri

Surse
8
Intrări urmărite
22.310
Ultima sincronizare
10 min
Toate sursele se sincronizează normal
  • Arena · Textacum 49 de minute
  • Arena · WebDevacum 49 de minute
  • Arena · Visionacum 49 de minute
  • Arena · Agentacum 49 de minute
  • GPQA Diamondacum 10 minute
  • SWE-benchacum 10 minute
  • Terminal-Benchacum 10 minute
  • ARC-AGI-2acum 10 minute

gemini-2.5-pro-exp-03-25

60±1

58interval62

Google DeepMindoscilație #138–#147

gemini-2.5-pro-preview-03-25

60±0

59interval60

Google DeepMindmar. 2025oscilație #152–#152

gemini-2.5-pro

58±2

56interval60

googleiun. 2025oscilație #60–#432

General ×1WebDev Arena ×1Vision Arena ×1Factuality Arena ×1Search Arena ×1Document Arena ×1Agent Arena ×1GPQA Diamond ×1AIME (matematică) ×1FrontierMath ×1SimpleQA Verified ×1ARC-AGI-2 ×1Humanity's Last Exam ×1SimpleBench ×1LiveBench ×1BFCL v4 (apelare de funcții) ×1inactivSWE-bench Verified (clasament live) ×1Terminal-Bench 4.0 ×1MMLU-Pro (Artificial Analysis) ×1LiveCodeBench (Artificial Analysis) ×1IFBench (Artificial Analysis) ×1Halucinații HHEM (Vectara) ×17 din 1034 modele
ModelOrganizațieIntervalOscilațieiiiiiiiiiiiiiiiiiiiiiiAdaugă la comparație
143gemini-2.5-pro-exp-03-25Google DeepMind——60.1 67.7Clasat 60.1 = (4 × 67.7 + 3 × 50) ÷ 7. 67.7 este percentila medie pe cele 4 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.58–62444/22#138–147———————67————545397———————
152gemini-2.5-pro-preview-03-25Google DeepMindmar. 2025$1.25 / $1059.7 74.4Clasat 59.7 = (2 × 74.4 + 3 × 50) ÷ 5. 74.4 este percentila medie pe cele 2 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—432/22redusă——————————————5396———————
202gemini-2.5-progoogleiun. 2025$1.25 / $1057.7 59.5Clasat 57.7 = (13 × 59.5 + 3 × 50) ÷ 16. 59.5 este percentila medie pe cele 13 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.56–608713/22#60–4328186878—13—696151—35——————95905570
283gemini-2.5-pro-06-05-highthinkingGoogle——54.8 69.1Clasat 54.8 = (1 × 69.1 + 3 × 50) ÷ 4. 69.1 este percentila medie pe cele 1 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.——1/22redusă———————————————69———————
351gemini-2.5-pro-preview-06-05Google DeepMindiun. 2025$1.25 / $1052.2 53.5Clasat 52.2 = (5 × 53.5 + 3 × 50) ÷ 8. 53.5 este percentila medie pe cele 5 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.50–53685/22#137–351———————68—48—116179————————
423gemini-2.5-pro-preview-05-06Google DeepMindmai 2025$1.25 / $1049.6 49.0Clasat 49.6 = (2 × 49.0 + 3 × 50) ÷ 5. 49.0 este percentila medie pe cele 2 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.48–5222/22redusă#226–423———————48————50—————————
712gemini-2.5-pro-groundinggoogleiun. 2025—41.7 16.7Clasat 41.7 = (1 × 16.7 + 3 × 50) ÷ 4. 16.7 este percentila medie pe cele 1 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.40–42—1/22redusă—————17—————————————————

Mixul este contractat după acoperire; scorul compus brut apare gri lângă el · O insignă „redusă” înseamnă că mai puțin de 3 clasamente au evaluat acest model

Puținele lucruri din AI și cuantic care au contat cu adevărat săptămâna asta — rezumate cinstit.

Un e-mail pe săptămână. Dezabonare dintr-un clic. Fără urmărire, fără partajare.