Quel est le score de MPT-30B ?

MPT-30B obtient un score IA de 14,5, avec une marge de 0,0 à 32,1. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.

Dans quelles tâches MPT-30B est-il le plus fort ?

Ses deux meilleures tâches sont écriture (15,0) et usage (13,7). Sa tâche la plus faible est maths (12,7).

MPT-30B est édité par MosaicML (États-Unis), et il est sorti le 22 juin 2023. Ses poids sont ouverts.

Fiche modèle · édition du 28 septembre 2026

MPT-30B

MosaicML · États-Unis · sorti le 22 juin 2023MosaicML · États-Unis · 22 juin 2023

Poids ouverts

14,5de 0,0 à 32,1Provisoire · 40 %

Empreinte

RaisonnementCode13,2AgentsUsage13,7Maths12,7SciencesFrançaisVisionÉcriture15,0Web

Score général

14,5de 0,0 à 32,1

RangScore provisoireCouverture40 %4 mesures

Pourquoi ce score ? →

Les dix tâches

Raisonnement
Non mesuré
Code
13,2Provisoire · 8 %
Agents
Non mesuré
Usage
13,7Rang 263 · 100 %
Maths
12,7Provisoire · 12 %
Sciences
Non mesuré
Français
Non mesuré
Vision
Non mesuré
Écriture
15,0Rang 261 · 100 %
Web
Non mesuré

Peut-il tourner chez vous ?

Ses poids sont ouverts, mais sa taille n'est pas communiquée. Aucune estimation de mémoire n'est possible.

Fiche technique

Prix: Non communiqué
Fenêtre de contexte: Non communiqué
Entrées: Non communiqué
Réflexion: Non communiqué
Paramètres: Non communiqué
Licence: Poids ouvertspoids ouverts, téléchargeables
Classe énergétique: Non communiquée
Hébergement en Europe: Non communiqué
Connaissances jusqu'à: Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

22 mesures · la matière du score

BenchmarkPubliéSuggèreRéflexionÉtatSource

TriviaQA73,6 %5,5InconnueARCHIVÉepoch.ai

TriviaQA73,3 %4,1InconnueARCHIVÉepoch.ai

TriviaQA71,3 %-5,1InconnueARCHIVÉepoch.ai

BoolQ85 %15,5InconnueARCHIVÉepoch.ai

TriviaQA68 %-19,4InconnueARCHIVÉepoch.ai

PIQA81,9 %12,0InconnueARCHIVÉepoch.ai

BoolQ79 %-7,8InconnueARCHIVÉepoch.ai

WinoGrande71 %-7,3InconnueARCHIVÉepoch.ai

BoolQ70,4 %-38,6InconnueARCHIVÉepoch.ai

OpenBookQA52 %-15,9InconnueARCHIVÉepoch.ai

GSM8K34,4 %-10,8InconnueARCHIVÉepoch.ai

ARC (AI2 Reasoning Challenge)50,6 %-15,1InconnueARCHIVÉepoch.ai

Voir les 10 autres mesures

MMLU47,9 %-14,3InconnueARCHIVÉepoch.ai

MMLU46,9 %-16,4InconnueARCHIVÉepoch.ai

Arena, écriture créative1 132,5 Elo16,3InconnueACTIFarena.ai

Arena, texte1 150,7 Elo11,7InconnueACTIFarena.ai

BIG-Bench Hard (BBH)38 %-19,5InconnueARCHIVÉepoch.ai

Arena, questions de code1 168,3 Elo9,0InconnueACTIFarena.ai

GSM8K16,4 %-31,3InconnueARCHIVÉepoch.ai

GSM8K15,2 %-33,1InconnueARCHIVÉepoch.ai

Arena, questions de maths1 095,7 Elo6,9InconnueACTIFarena.ai

En bref

Quel est le score de MPT-30B ?: MPT-30B obtient un score IA de 14,5, avec une marge de 0,0 à 32,1. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.
Dans quelles tâches MPT-30B est-il le plus fort ?: Ses deux meilleures tâches sont écriture (15,0) et usage (13,7). Sa tâche la plus faible est maths (12,7).
MPT-30B peut-il tourner en local ?: Ses poids sont ouverts, mais sa taille n'est pas communiquée. Aucune estimation de mémoire n'est possible.
Qui édite MPT-30B ?: MPT-30B est édité par MosaicML (États-Unis), et il est sorti le 22 juin 2023. Ses poids sont ouverts.