Sari la conținut

Română · beta. Traducerea a fost făcută automat și este încă în curs de revizuire. Citește pagina în engleză

Benchmark-uri

Surse
8
Intrări urmărite
22.308
Ultima sincronizare
8 min
Toate sursele se sincronizează normal
  • Arena · Textacum 9 ore
  • Arena · WebDevacum 9 ore
  • Arena · Visionacum 9 ore
  • Arena · Agentacum 9 ore
  • GPQA Diamondacum 8 minute
  • SWE-benchacum 8 minute
  • Terminal-Benchacum 8 minute
  • ARC-AGI-2acum 8 minute

phi-4-reasoning-plus

52±0

51interval52

Microsoftoscilație #377–#377

phi-4

40±0

39interval41

microsoftdec. 2024oscilație #285–#769

General ×1WebDev Arena ×1Vision Arena ×1Factuality Arena ×1Search Arena ×1Document Arena ×1Agent Arena ×1GPQA Diamond ×1AIME (matematică) ×1FrontierMath ×1SimpleQA Verified ×1ARC-AGI-2 ×1Humanity's Last Exam ×1SimpleBench ×1LiveBench ×1BFCL v4 (apelare de funcții) ×1inactivSWE-bench Verified (clasament live) ×1Terminal-Bench 4.0 ×1MMLU-Pro (Artificial Analysis) ×1LiveCodeBench (Artificial Analysis) ×1IFBench (Artificial Analysis) ×1Halucinații HHEM (Vectara) ×14 din 1034 modele
ModelOrganizațieIntervalOscilațieiiiiiiiiiiiiiiiiiiiiiiAdaugă la comparație
377phi-4-reasoning-plusMicrosoft——51.5 56.0Clasat 51.5 = (1 × 56.0 + 3 × 50) ÷ 4. 56.0 este percentila medie pe cele 1 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.——1/22redusă———————————————56———————
769phi-4microsoftdec. 2024$0.07 / $0.1440.3 37.0Clasat 40.3 = (9 × 37.0 + 3 × 50) ÷ 12. 37.0 este percentila medie pe cele 9 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.39–41909/22#285–76924——————3926—————2939——4427797
926Phi-4 Multimodal Instructazure——36.4 15.9Clasat 36.4 = (2 × 15.9 + 3 × 50) ÷ 5. 15.9 este percentila medie pe cele 2 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—02/22redusă———————————————————1616——
1026Phi-4 Mini Instructazure——26.4 8.8Clasat 26.4 = (4 × 8.8 + 3 × 50) ÷ 7. 8.8 este percentila medie pe cele 4 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—134/22———————————————————141542

Mixul este contractat după acoperire; scorul compus brut apare gri lângă el · O insignă „redusă” înseamnă că mai puțin de 3 clasamente au evaluat acest model

Puținele lucruri din AI și cuantic care au contat cu adevărat săptămâna asta — rezumate cinstit.

Un e-mail pe săptămână. Dezabonare dintr-un clic. Fără urmărire, fără partajare.