Aller au contenu
EN 4 QUESTIONSTrouver mon modèle
Fiche modèle · édition du

Claude 3 Haiku

Anthropic · États-Unis · sorti le Anthropic · États-Unis · 7 mars 2024

  • Poids fermés
  • En ligne seulement
37,6de 30,1 à 45,1Rang 227 · 80 %?
Empreinte?
Raisonnement38,9Code37,6AgentsUsage37,3Maths36,2Sciences40,0Français37,8Vision32,8Écriture36,5Web

Son bilan?

  • Au classement général, 227e sur 257, dans un groupe de 31 modèles trop proches pour être départagés.
  • Pas encore classé en raisonnement, code, maths, sciences, français et compréhension d'images : trop peu de mesures.
  • Pas encore mesuré en tâches d'agent et création web.
L'application de l'éditeurClaude Ce modèle n'y est peut-être plus proposé. (nouvel onglet)

Estimationenviron 0,78 € pour 1 000 questions par l'API, en comptant 1 000 jetons lus et 500 écrits par question. Comment on l'estime

Score général?

37,6de 30,1 à 45,1

Rang227Groupe 12, ex æquoCouverture80 %13 mesures

Pourquoi ce score ? →Comment lire un score →

Artificial Analysis

Hors du score

Artificial Analysis évalue les modèles de son côté et publie son propre indice, l'Artificial Analysis Intelligence Index. C'est un autre indice, qui ne compte pas dans le score IA de QUELLE IA et ne se compare pas directement à lui.

Version évaluéeIndiceRang chez euxVitessePremier jetonPrix par million de jetonsentrée / sortie
Claude 3 Haiku5,6non publié0,0 jetons/s0,00 s0,25 $ / 1,25 $

Médianes de leurs mesures : vitesse en jetons produits par seconde, délai avant le premier jeton en secondes. Prix en dollars par million de jetons, en entrée puis en sortie. Relevé le 26 octobre 2026 sur leur site, reproduit avec leur accord.

Source : Artificial Analysis

Peut-il tourner chez vous ?

Non. Claude 3 Haiku est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.

Ces trois modèles ouverts ont le score le plus proche. Eux se téléchargent, et peuvent tourner sur votre machine ou sur votre serveur.

Fiche technique

Prix
0,22 € / 1,11 €entrée / sortie, par million de jetons
Fenêtre de contexte
200 000 jetonsenviron 150 000 mots
Entrées
Texte, image
Réflexion
Non communiqué
Paramètres
Non communiqué
Licence
Propriétairepoids fermés, accès par l'éditeur
Classe énergétique
Non communiquée
Hébergement en Europe
Non communiqué
Connaissances jusqu'à
Mars 2024

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

18 mesures · d'où vient le score
BenchmarkRésultatÉquivaut à?RéflexionÉtatSource
MMLU73,8 %32,2InconnueARCHIVÉepoch.ai
ScienceQA72 %15,1InconnueARCHIVÉepoch.ai
WinoGrande74,2 %5,0InconnueARCHIVÉepoch.ai
Arena, texte1 261,8 Elo37,0InconnueACTIFarena.ai
Arena, questions de code1 301,2 Elo37,5InconnueACTIFarena.ai
Arena, questions en français1 276,3 Elo38,1InconnueACTIFarena.ai
Arena, écriture créative1 215,5 Elo34,9InconnueACTIFarena.ai
Arena, questions d'experts1 254,0 Elo37,8InconnueACTIFarena.ai
Arena, questions de maths1 232,3 Elo34,5InconnueACTIFarena.ai
Arena, vision1 000,1 Elo20,5InconnueACTIFarena.ai
DTBench50,1 %39,8InconnueSATURÉconceptualreasoning.ai
GPQA Diamond36,3 %41,4InconnueSATURÉepoch.ai
Voir les 6 autres mesures
MATH Level 514,9 %35,4InconnueARCHIVÉepoch.ai
CadEval12 %36,9InconnueARCHIVÉepoch.ai
LMCA8,8446,6InconnueACTIFconceptualreasoning.ai
WeirdML (v2)9,8 %37,4InconnueACTIFhtihle.github.io
ForecastBench54,8 %-12,0InconnueACTIFepoch.ai
OTIS Mock AIME 2024-20251,8 %34,9InconnueSATURÉepoch.ai

En bref

Quel est le score de Claude 3 Haiku ?
Claude 3 Haiku obtient un score IA de 37,6, avec une marge de 30,1 à 45,1, dans l'édition du 9 novembre 2026. Il est classé 227e sur 257 modèles, à partir de 13 mesures.?
Dans quelles tâches Claude 3 Haiku est-il le plus fort ?
Ses deux meilleures tâches sont sciences (40,0) et raisonnement (38,9). Sa tâche la plus faible est vision (32,8).
Claude 3 Haiku peut-il tourner en local ?
Non. Claude 3 Haiku est un modèle fermé : il s'utilise en ligne, par l'application de son éditeur ou par API.
Combien coûte Claude 3 Haiku ?
0,22 € par million de jetons en entrée et 1,11 € en sortie, au tarif affiché par les fournisseurs. Pour fixer les idées, 1 000 questions de 1 000 jetons, avec des réponses de 500 jetons, coûteraient environ 0,78 € par l'API : c'est une estimation, pas un tarif. Le coût réel d'une tâche dépend du nombre de jetons que le modèle consomme.
Qui édite Claude 3 Haiku ?
Claude 3 Haiku est édité par Anthropic (États-Unis), et il est sorti le 7 mars 2024. C'est un modèle fermé.

Ses voisins?