À quoi il sert
Sur Quelle IA, EBR-bench (Earthborne Rangers) sert à noter la tâche Agents : c'est l'un de ses 9 benchmarks. Il départage surtout les modèles dont le score IA approche 95.
Sur Quelle IA, EBR-bench (Earthborne Rangers) sert à noter la tâche Agents : c'est l'un de ses 9 benchmarks. Il départage surtout les modèles dont le score IA approche 95.
Part des 21 objectifs atteints lors des deux dernières parties, après huit parties d'apprentissage ; la meilleure des deux est retenue.
Seuls les cinq premiers jours de la campagne sont joués, sur 20 à 25. Le résultat dépend du harnais et de la façon dont l'historique des parties est résumé.
Epoch AI.
epoch.ai/benchmarks/ebr-bench · tâche Agents · 23 modèles mesurés
En tête : GPT-6 Astra, 76,2 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 95. Le meilleur, GPT-6 Astra, atteint 76,2 %. Le benchmark sera dit saturé quand un modèle atteindra 95 %.
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
1,67 %du score général. EBR-bench (Earthborne Rangers) porte 11 % de la tâche Agents (15 % du score général), que se partagent 9 benchmarks.
En couleur, la tâche Agents dans le score général. En noir, la part d'EBR-bench (Earthborne Rangers).