Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Gemma 2 27B

Google DeepMind · États-Unis · sorti le Google DeepMind · États-Unis · 24 juin 2024

  • Poids ouverts
  • Carte graphique 24 Go
42,9de 36,5 à 49,3Rang 219 · 75 %?
Empreinte?
Raisonnement38,9Code41,0AgentsUsage43,2Maths39,7Sciences41,6Français47,1VisionÉcriture46,9Web

Son bilan?

  • Au classement général, 219e sur 257, dans un peloton de 31 modèles que la marge d'erreur ne permet pas de séparer.
  • Pas encore classé en raisonnement, code, maths et sciences : trop peu de mesures.
  • Pas encore mesuré en tâches d'agent, compréhension d'images et création web.
L'application de l'éditeurGemini Ce modèle n'y est peut-être plus proposé. (nouvel onglet)

Estimationenviron 0,87 € pour 1 000 questions par l'API, en comptant 1 000 jetons lus et 500 écrits par question. Comment on l'estime

Score général?

42,9de 36,5 à 49,3

Rang219Groupe 12, ex æquoCouverture75 %15 mesures

Pourquoi ce score ? →Comment lire un score →

Peut-il tourner chez vous ?ESTIMATION

Tient à partir d'une carte graphique de 24 Go (22 Go utiles), en version allégée à 4 bits, par exemple une Intel Arc Pro B60. Mémoire estimée : 18,8 Go.

Mémoire selon la versionAllégée, 4 bits18,8 GoAllégée, 8 bits32,9 GoComplète, 16 bits62,6 GoLe pointillé marque 22 Go, la mémoire utile d'une carte graphique de 24 Go. Au-delà, le modèle ne tient plus sur cette machine.
Vitesse de générationPas d'estimation de vitesse : l'éditeur ne publie pas le nombre de paramètres actifs par jeton de ce modèle. Comment on l’estime.

Les benchmarks mesurent la version complète du modèle. La version allégée fait un peu moins bien. À télécharger avec Ollama, LM Studio ou llama.cpp. Comment on compte la mémoire. Les prix et les marchands sont sur la page de chaque machine.

Pour aller plus loin. Installer Ollama, lancer un premier modèle et fixer la taille du contexte pour qu'il tienne dans la mémoire de la machine. Ollama & les modèles locaux, sur minilabai.com. Un guide du même auteur que QUELLE IA.

Fiche technique

Prix
0,58 € / 0,58 €entrée / sortie, par million de jetons
Fenêtre de contexte
8 192 jetonsenviron 6 000 mots
Entrées
Texte
Réflexion
Non communiqué
Paramètres
27,2 milliards
Licence
Poids ouvertspoids ouverts, téléchargeables
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Juin 2024

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

26 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
MMLU75,7 %36,0InconnueARCHIVÉepoch.ai
Arena, écriture créative1 292,8 Elo52,7InconnueACTIFarena.ai
LiveBench38,2 %43,0InconnueARCHIVÉepoch.ai
Voir les 14 autres mesures
LiveBench, code36 %45,8InconnueARCHIVÉepoch.ai
Arena, texte1 289,6 Elo43,7InconnueACTIFarena.ai
Arena, questions en français1 312,5 Elo46,2InconnueACTIFarena.ai
Arena, questions de code1 303,9 Elo38,1InconnueACTIFarena.ai
Arena, questions de maths1 248,1 Elo37,9InconnueACTIFarena.ai
Arena, questions d'experts1 260,8 Elo39,1InconnueACTIFarena.ai
LiveBench, raisonnement28,1 %41,0InconnueARCHIVÉepoch.ai
MATH Level 527,9 %41,6InconnueARCHIVÉepoch.ai
LiveBench, mathématiques26,5 %39,2InconnueARCHIVÉepoch.ai
GPQA Diamond36,5 %41,6InconnueSATURÉepoch.ai
DTBench48 %35,9InconnueSATURÉconceptualreasoning.ai
LMCA7,142,7InconnueACTIFconceptualreasoning.ai
OTIS Mock AIME 2024-20251,4 %33,0InconnueSATURÉepoch.ai

En bref

Quel est le score de Gemma 2 27B ?
Gemma 2 27B obtient un score IA de 42,9, avec une marge de 36,5 à 49,3, dans l'édition du 9 novembre 2026. Il est classé 219e sur 257 modèles, à partir de 15 mesures.?
Dans quelles tâches Gemma 2 27B est-il le plus fort ?
Ses deux meilleures tâches sont français (47,1) et écriture (46,9). Sa tâche la plus faible est raisonnement (38,9).
Gemma 2 27B peut-il tourner en local ?
Tient à partir d'une carte graphique de 24 Go (22 Go utiles), en version allégée à 4 bits, par exemple une Intel Arc Pro B60. Mémoire estimée : 18,8 Go.
Combien coûte Gemma 2 27B ?
0,58 € par million de jetons en entrée et 0,58 € en sortie, au tarif affiché par les fournisseurs. Pour fixer les idées, 1 000 questions de 1 000 jetons, avec des réponses de 500 jetons, coûteraient environ 0,87 € par l'API : c'est une estimation, pas un tarif. Le coût réel d'une tâche dépend du nombre de jetons que le modèle consomme.
Qui édite Gemma 2 27B ?
Gemma 2 27B est édité par Google DeepMind (États-Unis), et il est sorti le 24 juin 2024. Ses poids sont ouverts.

Ses voisins?