Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Llama 3-⁠70B

Meta AI · États-Unis · sorti le Meta AI · États-Unis · 18 avril 2024

  • Poids ouverts
  • Mac 96 Go
43,7de 37,8 à 49,6Rang 215 · 75 %?
Empreinte?
Raisonnement45,3Code41,8AgentsUsage42,6Maths41,8Sciences44,2Français47,1VisionÉcriture43,7Web

Son bilan?

  • Au classement général, 215e sur 257, ex æquo avec 30 autres modèles dont les marges d'erreur se recouvrent.
  • Pas encore classé en raisonnement, code, maths et sciences : trop peu de mesures.
  • Pas encore mesuré en tâches d'agent, compréhension d'images et création web.

Score général?

43,7de 37,8 à 49,6

Rang215Groupe 12, ex æquoCouverture75 %15 mesures

Pourquoi ce score ? →Comment lire un score →

Peut-il tourner chez vous ?ESTIMATION

Tient à partir d'un Mac de 96 Go (71 Go utiles), en version allégée à 4 bits, par exemple un Mac Studio M5 Ultra de 96 Go. Mémoire estimée : 48,7 Go.

Mémoire selon la versionAllégée, 4 bits48,7 GoAllégée, 8 bits85,2 GoComplète, 16 bits162,3 GoLe pointillé marque 71 Go, la mémoire utile d'un Mac de 96 Go. Au-delà, le modèle ne tient plus sur cette machine.
Vitesse de générationEstimation pour un contexte court : le débit mémoire de chaque machine divisé par ce que le modèle relit à chaque jeton dans la version qui y tient, ramené à ce que donnent les 7 mesures publiées qui servent d'étalon. Dans chaque famille, la plus petite machine à débit publié où il tient, la moins rapide à mémoire égale. Comment on l’estime.

Les benchmarks mesurent la version complète du modèle. La version allégée fait un peu moins bien. À télécharger avec Ollama, LM Studio ou llama.cpp. Comment on compte la mémoire. Les prix et les marchands sont sur la page de chaque machine.

Pour aller plus loin. Installer Ollama, lancer un premier modèle et fixer la taille du contexte pour qu'il tienne dans la mémoire de la machine. Ollama & les modèles locaux, sur minilabai.com. Un guide du même auteur que QUELLE IA.

Fiche technique

Prix
Non communiqué
Fenêtre de contexte
Non communiqué
Entrées
Non communiqué
Réflexion
Non communiqué
Paramètres
70,6 milliards
Licence
Poids ouvertspoids ouverts, téléchargeables
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

24 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
MMLU79,3 %43,5InconnueARCHIVÉepoch.ai
WinoGrande83,5 %45,1InconnueARCHIVÉepoch.ai
Voir les 12 autres mesures
Arena, écriture créative1 254,3 Elo43,8InconnueACTIFarena.ai
Arena, texte1 276,7 Elo40,6InconnueACTIFarena.ai
Arena, questions en français1 290,3 Elo41,3InconnueACTIFarena.ai
Arena, questions de code1 306,1 Elo38,6InconnueACTIFarena.ai
Arena, questions de maths1 258,7 Elo40,1InconnueACTIFarena.ai
Arena, questions d'experts1 245,9 Elo36,2InconnueACTIFarena.ai
DTBench54,2 %45,7InconnueSATURÉconceptualreasoning.ai
MATH Level 522,6 %39,4InconnueARCHIVÉepoch.ai
GPQA Diamond40,6 %45,6InconnueSATURÉepoch.ai
ForecastBench60,2 %50,0InconnueACTIFepoch.ai
Cybench5 %56,0InconnueARCHIVÉepoch.ai
OTIS Mock AIME 2024-20254,3 %41,2InconnueSATURÉepoch.ai

En bref

Quel est le score de Llama 3-70B ?
Llama 3-70B obtient un score IA de 43,7, avec une marge de 37,8 à 49,6, dans l'édition du 9 novembre 2026. Il est classé 215e sur 257 modèles, à partir de 15 mesures.?
Dans quelles tâches Llama 3-70B est-il le plus fort ?
Ses deux meilleures tâches sont français (47,1) et raisonnement (45,3). Sa tâche la plus faible est maths (41,8).
Llama 3-70B peut-il tourner en local ?
Tient à partir d'un Mac de 96 Go (71 Go utiles), en version allégée à 4 bits, par exemple un Mac Studio M5 Ultra de 96 Go. Mémoire estimée : 48,7 Go.
Qui édite Llama 3-70B ?
Llama 3-70B est édité par Meta AI (États-Unis), et il est sorti le 18 avril 2024. Ses poids sont ouverts.

Ses voisins?