Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Llama 2-⁠13B

Meta AI · États-Unis · sorti le Meta AI · États-Unis · 18 juillet 2023

  • Poids ouverts
  • Carte graphique 12 Go
7,3de 0,0 à 22,5Rang 254 · 75 %?
Empreinte?
Raisonnement7,8Code7,0AgentsUsage7,5Maths7,5Sciences8,6Français2,2VisionÉcriture7,0Web

Son bilan?

  • Au classement général, 254e sur 257, dans un peloton de 16 modèles que la marge d'erreur ne permet pas de séparer.
  • Pas encore classé en raisonnement, code, maths et sciences : trop peu de mesures.
  • Pas encore mesuré en tâches d'agent, compréhension d'images et création web.

Score général?

7,3de 0,0 à 22,5

Rang254Groupe 13, ex æquoCouverture75 %12 mesures

Pourquoi ce score ? →Comment lire un score →

Peut-il tourner chez vous ?ESTIMATION

Tient à partir d'une carte graphique de 12 Go (10 Go utiles), en version allégée à 4 bits, par exemple une Intel Arc B580. Mémoire estimée : 9,0 Go.

Mémoire selon la versionAllégée, 4 bits9,0 GoAllégée, 8 bits15,7 GoComplète, 16 bits29,9 GoLe pointillé marque 10 Go, la mémoire utile d'une carte graphique de 12 Go. Au-delà, le modèle ne tient plus sur cette machine.
Vitesse de générationEstimation pour un contexte court : le débit mémoire de chaque machine divisé par ce que le modèle relit à chaque jeton dans la version qui y tient, ramené à ce que donnent les 7 mesures publiées qui servent d'étalon. Dans chaque famille, la plus petite machine à débit publié où il tient, la moins rapide à mémoire égale. Comment on l’estime.

Les benchmarks mesurent la version complète du modèle. La version allégée fait un peu moins bien. À télécharger avec Ollama, LM Studio ou llama.cpp. Comment on compte la mémoire. Les prix et les marchands sont sur la page de chaque machine.

Pour aller plus loin. Installer Ollama, lancer un premier modèle et fixer la taille du contexte pour qu'il tienne dans la mémoire de la machine. Ollama & les modèles locaux, sur minilabai.com. Un guide du même auteur que QUELLE IA.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
13 milliards
Licence
Poids ouvertspoids ouverts, téléchargeables
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

70 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
TriviaQA79,6 %36,3InconnueARCHIVÉepoch.ai
TriviaQA79,6 %36,3InconnueARCHIVÉepoch.ai
TriviaQA79,4 %35,1InconnueARCHIVÉepoch.ai
TriviaQA77,2 %22,9InconnueARCHIVÉepoch.ai
LAMBADA76,5 %11,0InconnueARCHIVÉepoch.ai
LAMBADA76,5 %11,0InconnueARCHIVÉepoch.ai
HellaSwag80,7 %12,4InconnueARCHIVÉepoch.ai
TriviaQA73,1 %2,3InconnueARCHIVÉepoch.ai
BoolQ82,4 %4,1InconnueARCHIVÉepoch.ai
Voir les 58 autres mesures
BoolQ81,7 %1,4InconnueARCHIVÉepoch.ai
BoolQ81,7 %1,4InconnueARCHIVÉepoch.ai
BoolQ81,7 %1,4InconnueARCHIVÉepoch.ai
BoolQ81,1 %-0,9InconnueARCHIVÉepoch.ai
PIQA80,8 %0,2InconnueARCHIVÉepoch.ai
PIQA80,5 %-2,8InconnueARCHIVÉepoch.ai
PIQA80,5 %-2,8InconnueARCHIVÉepoch.ai
PIQA80,5 %-2,8InconnueARCHIVÉepoch.ai
PIQA80,5 %-2,8InconnueARCHIVÉepoch.ai
PIQA79,8 %-9,7InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)60,3 %-2,1InconnueARCHIVÉepoch.ai
WinoGrande72,8 %-0,8InconnueARCHIVÉepoch.ai
WinoGrande72,8 %-0,8InconnueARCHIVÉepoch.ai
WinoGrande72,8 %-0,8InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)58,2 %12,4InconnueARCHIVÉepoch.ai
OpenBookQA57 %-8,7InconnueARCHIVÉepoch.ai
ScienceQA55,8 %-4,8InconnueARCHIVÉepoch.ai
MMLU55,6 %-0,7InconnueARCHIVÉepoch.ai
MMLU55,4 %-1,1InconnueARCHIVÉepoch.ai
MMLU55,1 %-1,6InconnueARCHIVÉepoch.ai
MMLU54,8 %-2,2InconnueARCHIVÉepoch.ai
MMLU54,8 %-2,2InconnueARCHIVÉepoch.ai
MMLU54,8 %-2,2InconnueARCHIVÉepoch.ai
GSM8K36,9 %-9,6InconnueARCHIVÉepoch.ai
MMLU50,9 %-9,5InconnueARCHIVÉepoch.ai
GSM8K34,3 %-12,1InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)49,4 %-18,3InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)49,4 %-18,3InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)49,4 %-18,3InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)49,4 %-18,3InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)48,8 %-19,3InconnueARCHIVÉepoch.ai
MMLU47,3 %-16,8InconnueARCHIVÉepoch.ai
GSM8K29,6 %-16,7InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)47 %-3,8InconnueARCHIVÉepoch.ai
GSM8K28,9 %-17,4InconnueARCHIVÉepoch.ai
GSM8K28,7 %-17,6InconnueARCHIVÉepoch.ai
GSM8K28,7 %-17,6InconnueARCHIVÉepoch.ai
GSM8K28,7 %-17,6InconnueARCHIVÉepoch.ai
GSM8K24,5 %-22,2InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)39,4 %-17,7InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)39,4 %-17,7InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)39,4 %-17,7InconnueARCHIVÉepoch.ai
Arena, texte1 141,6 Elo8,4InconnueACTIFarena.ai
Arena, écriture créative1 091,5 Elo6,2InconnueACTIFarena.ai
Arena, questions de code1 162,7 Elo6,3InconnueACTIFarena.ai
Arena, questions d'experts1 130,4 Elo13,6InconnueACTIFarena.ai
Arena, questions de maths1 110,8 Elo8,9InconnueACTIFarena.ai
Arena, questions en français1 107,5 Elo0,4InconnueACTIFarena.ai
EuroEval, ScaLA (grammaire)13,4 %-36,6InconnueACTIFeuroeval.com
BIG-Bench Hard (BBH)32,9 %-35,3InconnueARCHIVÉepoch.ai
DTBench42,2 %16,5InconnueSATURÉconceptualreasoning.ai
GSM8K2,7 %-74,8InconnueARCHIVÉepoch.ai

En bref

Quel est le score de Llama 2-13B ?
Llama 2-13B obtient un score IA de 7,3, avec une marge de 0,0 à 22,5, dans l'édition du 9 novembre 2026. Il est classé 254e sur 257 modèles, à partir de 12 mesures.?
Dans quelles tâches Llama 2-13B est-il le plus fort ?
Ses deux meilleures tâches sont sciences (8,6) et raisonnement (7,8). Sa tâche la plus faible est français (2,2).
Llama 2-13B peut-il tourner en local ?
Tient à partir d'une carte graphique de 12 Go (10 Go utiles), en version allégée à 4 bits, par exemple une Intel Arc B580. Mémoire estimée : 9,0 Go.
Qui édite Llama 2-13B ?
Llama 2-13B est édité par Meta AI (États-Unis), et il est sorti le 18 juillet 2023. Ses poids sont ouverts.

Ses voisins?