Sari la conținut

Română · beta. Traducerea a fost făcută automat și este încă în curs de revizuire. Citește pagina în engleză

Benchmark-uri

Surse
8
Intrări urmărite
22.308
Ultima sincronizare
28 min
Toate sursele se sincronizează normal
  • Arena · Textacum 29 de minute
  • Arena · WebDevacum 29 de minute
  • Arena · Visionacum 29 de minute
  • Arena · Agentacum 28 de minute
  • GPQA Diamondacum 52 de minute
  • SWE-benchacum 52 de minute
  • Terminal-Benchacum 52 de minute
  • ARC-AGI-2acum 52 de minute

mistral-large-4-0

55±2

52interval57

Mistral AIoscilație #55–#288

General ×1WebDev Arena ×1Vision Arena ×1Factuality Arena ×1Search Arena ×1Document Arena ×1Agent Arena ×1GPQA Diamond ×1AIME (matematică) ×1FrontierMath ×1SimpleQA Verified ×1ARC-AGI-2 ×1Humanity's Last Exam ×1SimpleBench ×1LiveBench ×1BFCL v4 (apelare de funcții) ×1inactivSWE-bench Verified (clasament live) ×1Terminal-Bench 4.0 ×1MMLU-Pro (Artificial Analysis) ×1LiveCodeBench (Artificial Analysis) ×1IFBench (Artificial Analysis) ×1Halucinații HHEM (Vectara) ×18 din 1034 modele
ModelOrganizațieIntervalOscilațieiiiiiiiiiiiiiiiiiiiiiiAdaugă la comparație
272mistral-large-4-0Mistral AI—$0.68 / $2.0955.1 60.3Clasat 55.1 = (3 × 60.3 + 3 × 50) ÷ 6. 60.3 este percentila medie pe cele 3 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.52–57733/22#55–288———————7689—16———————————
348mistral-large-4mistraloct. 2026—52.3 54.1Clasat 52.3 = (4 × 54.1 + 3 × 50) ÷ 7. 54.1 este percentila medie pe cele 4 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.49–56504/22#51–3487573—43——25———————————————
516mistral-large-3mistraloct. 2025—47.1 45.9Clasat 47.1 = (7 × 45.9 + 3 × 50) ÷ 10. 45.9 este percentila medie pe cele 7 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.46–49627/22#132–5166794644——————————————705431—
606mistral-large-2411mistralnov. 2024—44.2 41.7Clasat 44.2 = (7 × 41.7 + 3 × 50) ÷ 10. 41.7 este percentila medie pe cele 7 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.42–46867/22#239–60635——————36237————4059—————93
722Mistral Large 2 (Nov '24)mistral——41.4 32.8Clasat 41.4 = (3 × 32.8 + 3 × 50) ÷ 6. 32.8 este percentila medie pe cele 3 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—213/22———————————————————413820—
915mistral-large-2407mistraliul. 2024$2 / $636.9 29.0Clasat 36.9 = (5 × 29.0 + 3 × 50) ÷ 8. 29.0 este percentila medie pe cele 5 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.35–38305/22#228–91537——————3325————1040———————
979mistral-large-2402mistralfeb. 2024—32.4 19.2Clasat 32.4 = (4 × 19.2 + 3 × 50) ÷ 7. 19.2 este percentila medie pe cele 4 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.31–34164/22#291–97924——————209—————25———————
984mistral-largeMistral—$2 / $632.1 14.1Clasat 32.1 = (3 × 14.1 + 3 × 50) ÷ 6. 14.1 este percentila medie pe cele 3 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—223/22———————————————1———1923——

Mixul este contractat după acoperire; scorul compus brut apare gri lângă el · O insignă „redusă” înseamnă că mai puțin de 3 clasamente au evaluat acest model

Puținele lucruri din AI și cuantic care au contat cu adevărat săptămâna asta — rezumate cinstit.

Un e-mail pe săptămână. Dezabonare dintr-un clic. Fără urmărire, fără partajare.