Quel est le score de MPT-7B ?

MPT-7B obtient un score IA de 0,0, avec une marge de 0,0 à 20,8. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.

Dans quelles tâches MPT-7B est-il le plus fort ?

Ses deux meilleures tâches sont code (0,0) et usage (0,0). Sa tâche la plus faible est écriture (0,0).

MPT-7B est édité par MosaicML (États-Unis), et il est sorti le 5 mai 2023. Ses poids sont ouverts.

Fiche modèle · édition du 28 septembre 2026

MPT-7B

MosaicML · États-Unis · sorti le 5 mai 2023MosaicML · États-Unis · 5 mai 2023

Poids ouverts

0,0de 0,0 à 20,8Provisoire · 40 %

Empreinte

RaisonnementCode0,0AgentsUsage0,0Maths0,0SciencesFrançaisVisionÉcriture0,0Web

Score général

0,0de 0,0 à 20,8

RangScore provisoireCouverture40 %4 mesures

Pourquoi ce score ? →

Les dix tâches

Raisonnement
Non mesuré
Code
0,0Provisoire · 8 %
Agents
Non mesuré
Usage
0,0Rang 275 · 100 %
Maths
0,0Provisoire · 12 %
Sciences
Non mesuré
Français
Non mesuré
Vision
Non mesuré
Écriture
0,0Rang 274 · 100 %
Web
Non mesuré

Peut-il tourner chez vous ?

Ses poids sont ouverts, mais sa taille n'est pas communiquée. Aucune estimation de mémoire n'est possible.

Fiche technique

Prix: Non communiqué
Fenêtre de contexte: Non communiqué
Entrées: Non communiqué
Réflexion: Non communiqué
Paramètres: Non communiqué
Licence: Poids ouvertspoids ouverts, téléchargeables
Classe énergétique: Non communiquée
Hébergement en Europe: Non communiqué
Connaissances jusqu'à: Non communiqué

Où le trouver

Liens directs, sans affiliation

Toutes les mesures

44 mesures · la matière du score

BenchmarkPubliéSuggèreRéflexionÉtatSource

LAMBADA70 %-23,0InconnueARCHIVÉepoch.ai

HellaSwag76,4 %-4,9InconnueARCHIVÉepoch.ai

HellaSwag76,1 %-6,1InconnueARCHIVÉepoch.ai

TriviaQA61,6 %-45,2InconnueARCHIVÉepoch.ai

PIQA80,6 %-0,8InconnueARCHIVÉepoch.ai

TriviaQA61,2 %-46,7InconnueARCHIVÉepoch.ai

TriviaQA59,6 %-52,9InconnueARCHIVÉepoch.ai

PIQA79,1 %-15,2InconnueARCHIVÉepoch.ai

PIQA78,9 %-17,1InconnueARCHIVÉepoch.ai

TriviaQA55,7 %-67,5InconnueARCHIVÉepoch.ai

Voir les 32 autres mesures

BoolQ75 %-22,1InconnueARCHIVÉepoch.ai

BoolQ74,1 %-25,2InconnueARCHIVÉepoch.ai

BoolQ73,9 %-26,0InconnueARCHIVÉepoch.ai

HellaSwag57,1 %-73,2InconnueARCHIVÉepoch.ai

WinoGrande68,6 %-17,4InconnueARCHIVÉepoch.ai

WinoGrande68,3 %-18,7InconnueARCHIVÉepoch.ai

WinoGrande68 %-20,0InconnueARCHIVÉepoch.ai

OpenBookQA51,4 %-16,9InconnueARCHIVÉepoch.ai

ARC (AI2 Reasoning Challenge)42,6 %-28,7InconnueARCHIVÉepoch.ai

OpenBookQA41,8 %-35,7InconnueARCHIVÉepoch.ai

ARC (AI2 Reasoning Challenge)41,7 %-30,5InconnueARCHIVÉepoch.ai

ARC (AI2 Reasoning Challenge)40,5 %-32,9InconnueARCHIVÉepoch.ai

BIG-Bench Hard (BBH)35,6 %-25,4InconnueARCHIVÉepoch.ai

Arena, écriture créative1 053,0 Elo-1,6InconnueACTIFarena.ai

BIG-Bench Hard (BBH)35,2 %-26,5InconnueARCHIVÉepoch.ai

Arena, texte1 063,4 Elo-8,5InconnueACTIFarena.ai

Arena, questions de code1 066,5 Elo-13,3InconnueACTIFarena.ai

GSM8K9,1 %-45,3InconnueARCHIVÉepoch.ai

GSM8K8,6 %-46,5InconnueARCHIVÉepoch.ai

OpenBookQA31,4 %-69,3InconnueARCHIVÉepoch.ai

Arena, questions de maths986,9 Elo-15,4InconnueACTIFarena.ai

BIG-Bench Hard (BBH)31 %-41,0InconnueARCHIVÉepoch.ai

MMLU30,8 %-67,8InconnueARCHIVÉepoch.ai

GSM8K6,8 %-51,9InconnueARCHIVÉepoch.ai

MMLU27,9 %-91,2InconnueARCHIVÉepoch.ai

MMLU27,4 %-97,9InconnueARCHIVÉepoch.ai

MMLU26,8 %-107,4InconnueARCHIVÉepoch.ai

MMLU26,7 %-109,3InconnueARCHIVÉepoch.ai

En bref

Quel est le score de MPT-7B ?: MPT-7B obtient un score IA de 0,0, avec une marge de 0,0 à 20,8. Ce score est provisoire : il repose sur 4 mesures, et le modèle n'a pas de rang.
Dans quelles tâches MPT-7B est-il le plus fort ?: Ses deux meilleures tâches sont code (0,0) et usage (0,0). Sa tâche la plus faible est écriture (0,0).
MPT-7B peut-il tourner en local ?: Ses poids sont ouverts, mais sa taille n'est pas communiquée. Aucune estimation de mémoire n'est possible.
Qui édite MPT-7B ?: MPT-7B est édité par MosaicML (États-Unis), et il est sorti le 5 mai 2023. Ses poids sont ouverts.