La ChatBot Arena, qui compare les modèles génératifs d’IA en temps réel, utilise le système Elo. Ce dernier est souvent utilisé dans les compétitions comme l’e-sport et les échecs, pour classer les performances des modèles. En septembre 2024, un nouveau classement a été publié, mettant en avant des entreprises comme Google, OpenAI et xAI, qui dominent le marché des modèles d’intelligence artificielle.
Avec l’essor de l’intelligence artificielle, il est crucial pour les professionnels et les passionnés de toujours être à jour concernant l’évolution des modèles d’IA présents sur le marché. Pour septembre 2024, plusieurs modèles se distinguent dans la ChatBot Arena grâce à des scores impressionnants. De grandes entités comme Google, OpenAi ou encore xAI se disputent les places dans l’arène. Ce système repose sur Elo d’Artificial Analysis qui analyse les performances des générateurs d’images IA, offrant un aperçu des meilleures solutions disponibles sur le marché. Pour ce faire, les utilisateurs ont la responsabilité de départager les modèles d’IA de manière anonyme.
Des modèles aux scores impressionnants, avec une stabilité remarquable
Dans la ChatBot Arena, les cinq meilleurs de modèles d’intelligence artificielle pour le mois de septembre 2024 :
- o1-preview ;
- ChatGPT 4o Latest ;
- o1-mini ;
- Gemini 1.5 Pro 0827 ;
- Grok-2 0813.
Les trois premiers modèles sont en tête du classement, se démarquant considérablement en matière de performance. En première place, le modèle o1-preview présente un score d’arène impressionnant de 1 355, suivi de près par ChatGPT 4o latest, qui détient un score de 1 335.
Le modèle o1-mini est à la troisième position avec 1 324 de points. Le point à retenir ici est que les deux premiers modèles d’OpenAi présentent une grande stabilité, avec une marge de confiance relative (95 % CI) très serrée. ChatGPT 4o Latest, par exemple, a une marge de +5/-6, soulignant son incroyable constance dans les performances.
A la quatrième place, Google prend position solidement avec son modèle Gemini 1.5 Pro Exp 0827, qui montre un score de 1 299. À noter aussi la montée de xAI dans le top 5 avec « Grok-2 0813 », se hissant à la cinquième place avec un score de 1 294.
Ces modèles peuvent être particulièrement intéressants pour tout consultant indépendant, cherchant à optimiser leurs outils de communication et d’analyse. En effet, ils permettent d’améliorer l’efficacité des services, notamment en automatisant des tâches complexes ou répétitives.
Montée en puissance et diversité des modèles dans le classement
Les cinq autres modèles d’IA inclus dans le classement montrent des performances impressionnantes. Ils proviennent de diverses organisations comme Google, xAI, Anthropic et OpenAI.
- GPT-4o 0512 ;
- GPT-4o mini 0718 ;
- Claude 3.5 Sonnet ;
- Gemini 1.5 Flash 0827 ;
- Grok-2 Mini 0813.
A la sixième place, le modèle GPT-4o présente un score de 1 285, avec un vote élevé de 90.695 venant des utilisateurs. Sa version plus légère, le GPT-4o mini, se situe juste derrière GPT-4o en septième place pour un score de 1 273.
Se trouvant à la huitième position, Claude 3.5 Sonnet est un modèle performant avec un score de 1 269. Google se positionne à la neuvième place avec son modèle d’IA Gemini 1.5 Flash Exp 0827 avec plus de 22.000 votes et dont le score est également à 1 269. Le modèle Grok-2 mini, développé par xAI, a atteint un score de 1 267, légèrement en-dessous des autres modèles. Il se positionne à la dixième place avec un vote utilisateur de 22.041.
Ces outils performants représentent une ressource précieuse pour un travailleur indépendant qui souhaite affiner son expertise et automatiser des tâches répétitives afin de se concentrer sur des activités à plus forte valeur ajoutée.