Sari la conținut

Română · beta. Traducerea a fost făcută automat și este încă în curs de revizuire. Citește pagina în engleză

Benchmark-uri

Surse
8
Intrări urmărite
22.318
Ultima sincronizare
12 min
Toate sursele se sincronizează normal
  • Arena · Textacum 5 ore
  • Arena · WebDevacum 5 ore
  • Arena · Visionacum 5 ore
  • Arena · Agentacum 5 ore
  • GPQA Diamondacum 12 minute
  • SWE-benchacum 12 minute
  • Terminal-Benchacum 12 minute
  • ARC-AGI-2acum 12 minute

Kimi-K2-Instruct

45±0

45interval46

Moonshotoscilație #108–#566

Kimi-K2-Instruct-0905

40±0

40interval41

moonshotaioscilație #776–#776

General ×1WebDev Arena ×1Vision Arena ×1Factuality Arena ×1Search Arena ×1Document Arena ×1Agent Arena ×1GPQA Diamond ×1AIME (matematică) ×1FrontierMath ×1SimpleQA Verified ×1ARC-AGI-2 ×1Humanity's Last Exam ×1SimpleBench ×1LiveBench ×1BFCL v4 (apelare de funcții) ×1inactivSWE-bench Verified (clasament live) ×1Terminal-Bench 4.0 ×1MMLU-Pro (Artificial Analysis) ×1LiveCodeBench (Artificial Analysis) ×1IFBench (Artificial Analysis) ×1Halucinații HHEM (Vectara) ×13 din 1034 modele
ModelOrganizațieIntervalOscilațieiiiiiiiiiiiiiiiiiiiiiiAdaugă la comparație
145Moonshotai-Kimi-K2-Instruct (FC)moonshotai——60.1 90.2Clasat 60.1 = (1 × 90.2 + 3 × 50) ÷ 4. 90.2 este percentila medie pe cele 1 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.——1/22redusă————————————————90——————
566Kimi-K2-InstructMoonshot——45.2 40.4Clasat 45.2 = (3 × 40.4 + 3 × 50) ÷ 6. 40.4 este percentila medie pe cele 3 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.—373/22#108–566—————————————1750—54—————
776Kimi-K2-Instruct-0905moonshotai——40.1 10.5Clasat 40.1 = (1 × 10.5 + 3 × 50) ÷ 4. 10.5 este percentila medie pe cele 1 din 22 axe selectate pe care este măsurat modelul; cu cât sunt mai puține axe, cu atât tragerea spre 50 este mai puternică.——1/22redusă——————————————————————10

Mixul este contractat după acoperire; scorul compus brut apare gri lângă el · O insignă „redusă” înseamnă că mai puțin de 3 clasamente au evaluat acest model

Puținele lucruri din AI și cuantic care au contat cu adevărat săptămâna asta — rezumate cinstit.

Un e-mail pe săptămână. Dezabonare dintr-un clic. Fără urmărire, fără partajare.