À quoi il sert
Sur QUELLE IA, EBR-bench (Earthborne Rangers) sert à noter la tâche Agents : c'est l'un de ses 8 benchmarks. Il départage surtout les modèles dont le score IA approche 95.
Sur QUELLE IA, EBR-bench (Earthborne Rangers) sert à noter la tâche Agents : c'est l'un de ses 8 benchmarks. Il départage surtout les modèles dont le score IA approche 95.
Part des 21 objectifs atteints lors des deux dernières parties, après huit parties d'apprentissage ; la meilleure des deux est retenue.
Seuls les cinq premiers jours de la campagne sont joués, sur 20 à 25. Le résultat dépend du harnais et de la façon dont l'historique des parties est résumé.
Epoch AI.
epoch.ai/benchmarks/ebr-bench · tâche Agents · 29 modèles mesurés
En tête : GPT-6.1 Terra, 78,1 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 95. Le meilleur, GPT-6.1 Terra, atteint 78,1 %. Le benchmark sera dit saturé quand un modèle atteindra 95 %.
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
1,88 %du score général. EBR-bench (Earthborne Rangers) porte 13 % de la tâche Agents (15 % du score général), que se partagent 8 benchmarks.
En couleur, la tâche Agents dans le score général. En noir, la part d'EBR-bench (Earthborne Rangers).
↑↓ choisirEntrée ouvrirÉchap fermerTous les modèles, avec filtres