À quoi il sert
GeoBench servait à noter la tâche Vision et multimodal. Archivé faute de modèle récent mesuré, il ne sert plus qu'à situer les modèles plus anciens sur l'échelle commune.
VisionFiche benchmark · ccmdi (projet personnel) · geobench.org
GeoBench
Deviner où une photo de rue a été prise, comme au jeu GeoGuessr, à partir des panneaux, de la végétation ou de l'architecture.
Comment c'est noté
Part de photos dont le pays est correctement identifié sur la carte principale du classement (ACW).
Ce qu'il ne dit pas
Projet personnel. Le score retenu ne regarde que le pays trouvé, alors que le classement mesure aussi la distance au bon endroit.
Qui le tient
ccmdi (projet personnel).
geobench.org · tâche Vision · 27 modèles mesurés
Comment lire le score
27 modèles mesurés · 32 mesuresSeuil de saturation : 95 % ↓
0 %50 %Gemini 3 Flash : 88 %100 %
En tête : Gemini 3 Flash, 88 %
Chaque trait est un modèle, placé à son meilleur score. Un modèle qui obtient 50 % a un score IA d'environ 38. Le meilleur, Gemini 3 Flash, atteint 88 %. Le benchmark est archivé, faute de modèle récent mesuré.
Ce que ce benchmark attend à chaque niveau
- Score IA 51niveau de GPT-4o (Nov 2024)
- 58 %
- Score IA 76niveau de Claude Sonnet 4.5
- 73 %
- Score IA 100niveau de Claude Opus 5.5
- 83 %
Valeurs lues sur la courbe d'étalonnage du benchmark, qui relie le score publié au score IA. La démarche
Son poids chez nous
0 %du score général. GeoBench est archivé et ne compte plus : la tâche Vision et multimodal (5 % du score général) repose sur 3 autres benchmarks.
En couleur, la tâche Vision et multimodal dans le score général. GeoBench n'y a plus de part.
Le classement du benchmark
Scores relevés sur epoch.ai · édition duRangModèleRéflexionScore publiéSuggèreSource
27 modèles mesurés, chacun à sa meilleure configuration. « Suggère » : le score IA que cette seule mesure indique.Voir les 27 →Replier le classement ↑
En bref
- Que mesure GeoBench ?
- Deviner où une photo de rue a été prise, comme au jeu GeoGuessr, à partir des panneaux, de la végétation ou de l'architecture. Sur Quelle IA, il est rangé dans la tâche Vision et multimodal.
- Comment GeoBench est-il noté ?
- Part de photos dont le pays est correctement identifié sur la carte principale du classement (ACW). Un modèle qui obtient 50 % a un score IA d'environ 38.
- Qui est en tête sur GeoBench ?
- Gemini 3 Flash (Google DeepMind) est en tête de GeoBench avec 88 %, dans l'édition du 28 septembre 2026. Suivent Gemini 2.5 Pro (May 2025) (86 %) et Gemini 3 Pro (84 %). 27 modèles y sont mesurés.
- Quelles sont les limites de GeoBench ?
- Projet personnel. Le score retenu ne regarde que le pays trouvé, alors que le classement mesure aussi la distance au bon endroit. Au 28 septembre 2026, le benchmark est archivé.
- Combien pèse GeoBench dans le score IA ?
- GeoBench compte pour 0 % du score général, dans l'édition du 28 septembre 2026. Il est archivé et ne compte plus : la tâche Vision et multimodal (5 % du score général) repose sur 3 autres benchmarks.
- Qui maintient GeoBench ?
- ccmdi (projet personnel). Sa page de référence : geobench.org.
Les autres benchmarks de la tâche Vision et multimodal
- Arena, vision121 modèles · 1,67 % du score
- Furniture Assembly28 modèles · 1,67 % du score
- Blueprint-Bench 226 modèles · 1,67 % du score
- Video-MME50 modèles · hors scoreARCHIVÉ
- VPCT (Visual Physics Comprehension Test)28 modèles · hors scoreARCHIVÉ
- CadEval15 modèles · hors scoreARCHIVÉ
- SpatialViz-Bench8 modèles · hors scoreARCHIVÉ
- MindCube5 modèles · hors scoreARCHIVÉ