Română · beta. Traducerea a fost făcută automat și este încă în curs de revizuire. Citește pagina în engleză

Meta · pașaport de model

Codellama 34b Instruct

codellama-34b-instruct

Ponderi deschise
Licență Llama 2 Community
33.7B parametri
Lansat 2023-08-24(curatoriat)

General · LMArena: 1,137#367 din 396
Cea mai bună percentilă: 7.6General
Poziția în cohortă: 25.6mediană 26.2

Ce spun datele

Evaluat pe 4 din 27 axe urmărite. Fiecare cifră de mai jos este rezultatul publicat al modelului pe acel clasament.

Cele mai slabe axe

6.9 pct — Programare (1,160)
7.3 pct — Urmarea instrucțiunilor (1,104)
7.6 pct — Prompturi dificile (1,134)

Neuniform: 0,7 puncte de percentilă între cea mai bună și cea mai slabă axă a sa — 7.6 pct pe General față de 6.9 pct pe Programare.

General7.6 pct1,137Verifică →
Prompturi dificile7.6 pct1,134Verifică →
Urmarea instrucțiunilor7.3 pct1,104Verifică →
Programare6.9 pct1,160Verifică →
WebDev ArenaNeevaluat
Vision ArenaNeevaluat
Factuality ArenaNeevaluat
Search ArenaNeevaluat
Document ArenaNeevaluat
Agent ArenaNeevaluat
GPQA DiamondNeevaluat
AIME (matematică)Neevaluat
FrontierMathNeevaluat
SimpleQA VerifiedNeevaluat
ARC-AGI-2Neevaluat
Humanity's Last ExamNeevaluat
SimpleBenchNeevaluat
LiveBenchNeevaluat
BFCL v4 (apelare de funcții)Neevaluat
SWE-bench Verified (clasament live)Neevaluat
Terminal-Bench 4.0Neevaluat
MMLU-Pro (Artificial Analysis)Neevaluat
LiveCodeBench (Artificial Analysis)Neevaluat
IFBench (Artificial Analysis)Neevaluat
Halucinații HHEM (Vectara)Neevaluat
SWE-bench VerifiedNeevaluat
Terminal-BenchNeevaluat

Percentilele reprezintă poziția modelului în populația proprie a fiecărui clasament. Axele marcate „neevaluat” nu au niciun rezultat publicat pentru acest model — este o absență a datelor, nu un scor mic.

Cum îl rulezi

Rulează-l singur

Repositorymeta-llama/CodeLlama-34b-Instruct-hf

Parametri33.7B

ArhitecturăLlamaForCausalLM

LicențăLlama 2 Community

AccesRestricționat — trebuie să accepți termenii repository-ului înainte de descărcare

Transformers

from transformers import AutoModelForCausalLM, AutoTokenizer

model_id = "meta-llama/CodeLlama-34b-Instruct-hf"
tokenizer = AutoTokenizer.from_pretrained(model_id)
model = AutoModelForCausalLM.from_pretrained(model_id)

Ollama

Nu sincronizăm tag-urile Ollama, așa că nu afișăm o comandă pe care nu o putem verifica — una greșită ar descărca modelul greșit. Caută în biblioteca Ollama →

Rețetele de fine-tuning Unsloth sunt specifice fiecărui model și nu le derivăm aici. Documentația Unsloth →

Identificatorii, limitele și prețurile sunt sincronizate din sursa upstream afișată mai sus. Orice câmp nesincronizat este omis complet, nu ghicit.

codellama-34b-instruct stands at 25.6 (raw mean 7.3) — measured on 4 of 27 axes.
pozițieșablonVerifică →
codellama-34b-instruct stands at 25.6 versus a cohort median of 26.2 across 59 models released within 180 days — below the peer median.
cohortășablonVerifică →

Fiecare afirmație este un fapt calculat din datele actuale ale clasamentului, formulat de un apel de model la temperatură scăzută și respins de o poartă de validare dacă vreun număr nu se află în rândul sursă. Cum funcționează clasamentele →