Meta accusée de tricherie sur les performances de son IA Llama 4
Meta aurait utilisé une version boostée de son IA Llama 4 pour impressionner sur un benchmark. LMArena revoit ses règles après la polémique.
Par Anthony Rodier
Les choses s'accélèrent du côté de Meta, qui tente de combler son retard face à des géants comme OpenAI, Google ou Anthropic. Avec la montée en puissance de l’intelligence artificielle, l’entreprise dirigée par Mark Zuckerberg a lancé deux nouveaux modèles basés sur Llama 4 : Scout, conçu pour les réponses rapides, et Maverick, un modèle haut de gamme censé rivaliser avec le fameux GPT-4o d’OpenAI.
Sur le papier, Maverick impressionne. Lors d’un test sur LMArena, un benchmark de référence pour les IA, le modèle a obtenu un score exceptionnel de 1417, dépassant même GPT-4o. Un exploit qui aurait pu marquer un tournant pour Meta… sauf que tout n’est pas si clair.
Une version expérimentale pour gonfler les résultats
Des spécialistes ont vite levé le drapeau rouge : la version de Maverick utilisée pour ce test n’était pas celle accessible au public. Meta aurait en réalité utilisé un modèle expérimental, optimisé pour répondre au mieux aux attentes humaines – un peu comme si on présentait un prototype de course dans une compétition ouverte aux véhicules de série.
Face à cette révélation, LMArena a décidé de durcir ses règles. L’organisation a précisé que l’utilisation de cette version expérimentale n'était pas conforme à l'esprit du classement :
« Meta aurait dû indiquer que “Llama-4-Maverick-03-26-Experimental” était un modèle personnalisé. Nous mettons à jour nos règles pour garantir des évaluations justes et comparables. »
Une stratégie IA de plus en plus ambitieuse
Malgré la polémique, Meta continue d’investir massivement dans l’IA. L’entreprise mise gros sur la famille Llama pour intégrer l’intelligence artificielle dans ses produits phares comme Facebook, WhatsApp et Instagram. Et même si certains choix suscitent la controverse, il est clair que la stratégie est ambitieuse.
Reste à voir si la confiance des utilisateurs et des experts pourra suivre.