TechFlow Logo
Connexion/ Inscription
Frais ETH
Gwei
Peur
gas
7x24hBrève

Des employés d'OpenAI accusent publiquement les résultats de benchmark de Grok3 d'être trompeurs

2025.02.23 - 03:26
Partager vers

TechFlow, selon une information de Jinshi, un employé d'OpenAI a récemment publiquement accusé la société xAI d'Elon Musk d'avoir publié des résultats biaisés concernant les tests de référence de son dernier modèle d'intelligence artificielle, Grok3.

En réponse, Igor Babushkin, cofondateur de xAI, a affirmé que l'entreprise n'avait commis aucune faute.

Les graphiques de xAI montrent que deux versions de Grok3 — Grok3 Reasoning Beta et Grok3 mini Reasoning — surpassent le modèle actuellement le plus performant d'OpenAI disponible, o3-mini-high, sur le test AIME 2025.

Cependant, un employé d'OpenAI a rapidement fait remarquer sur X que les graphiques de xAI ne comprenaient pas le score d'o3-mini-high dans la condition « cons@64 » sur AIME 2025. Babushkin a répliqué sur X que OpenAI avait également déjà publié par le passé des graphiques de tests de référence similaires et trompeurs, bien que ceux-ci aient été utilisés pour comparer les performances de ses propres modèles.

Ajouter aux favoris
Partager sur les réseaux sociaux

Brèves 7x24h