Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

LLaMA-⁠13B

Meta AI · États-Unis · sorti le Meta AI · États-Unis · 24 février 2023

  • Poids ouverts
0,0de 0,0 à 11,3Provisoire · 40 %?
Empreinte?
RaisonnementCode0,0AgentsUsage0,0Maths0,0SciencesFrançaisVisionÉcriture0,0Web

Son bilan?

  • Pas encore de rang au classement général : il a trop peu de mesures, son score est provisoire.
  • Pas encore classé en code et maths : trop peu de mesures.
  • Mesuré seulement en code, usage courant, maths et écriture pour l'instant.
L'application de l'éditeurMeta AI Ce modèle n'y est peut-être plus proposé. (nouvel onglet)

Score général?

0,0de 0,0 à 11,3

RangScore provisoireCouverture40 %4 mesures

Pourquoi ce score ? →Comment lire un score →

Les dix tâches?

Peut-il tourner chez vous ?

Il se télécharge, mais son éditeur ne dit pas combien de paramètres il compte : impossible d'estimer la mémoire qu'il demande.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Poids ouvertspoids ouverts, téléchargeables
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

43 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
TriviaQA77,9 %26,7InconnueARCHIVÉepoch.ai
TriviaQA77,1 %22,4InconnueARCHIVÉepoch.ai
LAMBADA75,2 %3,5InconnueARCHIVÉepoch.ai
LAMBADA75,2 %3,5InconnueARCHIVÉepoch.ai
TriviaQA74,4 %8,6InconnueARCHIVÉepoch.ai
HellaSwag79,2 %5,7InconnueARCHIVÉepoch.ai
TriviaQA70,1 %-11,6InconnueARCHIVÉepoch.ai
TriviaQA64 %-37,6InconnueARCHIVÉepoch.ai
TriviaQA63,1 %-41,2InconnueARCHIVÉepoch.ai
TriviaQA60,5 %-51,6InconnueARCHIVÉepoch.ai
PIQA80,1 %-6,8InconnueARCHIVÉepoch.ai
PIQA80,1 %-6,8InconnueARCHIVÉepoch.ai
Voir les 31 autres mesures
PIQA80,1 %-6,8InconnueARCHIVÉepoch.ai
BoolQ78,7 %-10,0InconnueARCHIVÉepoch.ai
TriviaQA56,6 %-66,7InconnueARCHIVÉepoch.ai
BoolQ78,1 %-12,2InconnueARCHIVÉepoch.ai
BoolQ78,1 %-12,2InconnueARCHIVÉepoch.ai
WinoGrande73 %0,0InconnueARCHIVÉepoch.ai
WinoGrande73 %0,0InconnueARCHIVÉepoch.ai
WinoGrande73 %0,0InconnueARCHIVÉepoch.ai
BoolQ71,4 %-36,7InconnueARCHIVÉepoch.ai
OpenBookQA56,4 %-9,7InconnueARCHIVÉepoch.ai
OpenBookQA56,4 %-9,7InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)52,7 %-13,2InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)52,7 %-13,2InconnueARCHIVÉepoch.ai
ARC (AI2 Reasoning Challenge)52,7 %-13,2InconnueARCHIVÉepoch.ai
MMLU47,7 %-16,0InconnueARCHIVÉepoch.ai
MMLU46,9 %-17,7InconnueARCHIVÉepoch.ai
MMLU46,9 %-17,7InconnueARCHIVÉepoch.ai
MMLU46,3 %-19,0InconnueARCHIVÉepoch.ai
ScienceQA43,3 %-22,0InconnueARCHIVÉepoch.ai
GSM8K20,5 %-27,1InconnueARCHIVÉepoch.ai
GSM8K20,3 %-27,4InconnueARCHIVÉepoch.ai
GSM8K17,8 %-30,9InconnueARCHIVÉepoch.ai
GSM8K17,8 %-30,9InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)37,9 %-21,1InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)37,9 %-21,1InconnueARCHIVÉepoch.ai
BIG-Bench Hard (BBH)37 %-23,3InconnueARCHIVÉepoch.ai
GSM8K15,4 %-34,6InconnueARCHIVÉepoch.ai
Arena, texte975,4 Elo-31,2InconnueACTIFarena.ai
Arena, écriture créative936,1 Elo-29,7InconnueACTIFarena.ai
Arena, questions de maths924,1 Elo-30,4InconnueACTIFarena.ai
Arena, questions de code882,6 Elo-57,0InconnueACTIFarena.ai

En bref

Quel est le score de LLaMA-13B ?
LLaMA-13B obtient un score IA de 0,0, avec une marge de 0,0 à 11,3. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.?
Dans quelles tâches LLaMA-13B est-il le plus fort ?
Ses deux meilleures tâches sont code (0,0) et usage (0,0). Sa tâche la plus faible est écriture (0,0).
LLaMA-13B peut-il tourner en local ?
Il se télécharge, mais son éditeur ne dit pas combien de paramètres il compte : impossible d'estimer la mémoire qu'il demande.
Qui édite LLaMA-13B ?
LLaMA-13B est édité par Meta AI (États-Unis), et il est sorti le 24 février 2023. Ses poids sont ouverts.

Ses voisins?