La Chine devant ChatGPT... pendant 4 jours

Ça n'a pas duré.

Kimi K3.1 Pro, le nouveau modèle de la start-up chinoise Moonshot AI, a fait des titres en France, comme celui-ci : "La Chine vient de dépasser ChatGPT". Quelques jours plus tard, il dégringolait au classement. Voici pourquoi.

Le meilleur modèle ouvert
Moonshot le présente comme son modèle ouvert le plus puissant. Il est déjà disponible sur kimi.ai et dans les applis Kimi, et ses poids, c'est-à-dire le modèle lui-même, sont promis en téléchargement. Une fois publiés, ce serait le meilleur modèle ouvert.

La chute en chiffres
• à sa sortie : 4e du classement d'Artificial Analysis avec 55 points, à 3 points seulement des meilleurs modèles fermés
• quand l'indice passe en version 5, avec ses tests secrets : 46 points, 9e place
• après l'arrivée de Gemini 4 Carbon de Google : 10e
L'écart avec le premier passe de 3 à 12 points. La Chine aura donc dépassé ChatGPT pendant 4 jours.

Pourquoi une telle chute
C'est sur les nouveaux tests, les plus durs, que l'écart se creuse. Sur Terminal-Bench-Science, un test de recherche scientifique, Kimi fait 34 % quand GPT-6 Astra fait 63 %. Depuis la version 5, 60 % de la note d'Artificial Analysis repose sur des questions ou des réponses gardées secrètes, pour empêcher les labos d'entraîner leur modèle juste à réussir les tests.

Ce qu'il fait de bien
Kimi reste un excellent modèle, et le meilleur modèle ouvert du classement. Moonshot montre des jeux créés de bout en bout avec Unity, Unreal ou Godot, et des objets 3D faits à partir d'une simple description. Avant de publier ses poids, Moonshot dit aussi avoir retiré de l'entraînement les données liées à la cybersécurité, pour limiter les risques de piratage.

Questions fréquentes
Kimi K3.1 Pro a-t-il dépassé ChatGPT ?
Brièvement : 4e avec 55 points à sa sortie, puis 9e avec 46 points quand le classement est passé aux tests secrets.

Qui a créé Kimi K3.1 Pro ?
Moonshot AI, une start-up chinoise.

Où essayer Kimi K3.1 Pro ?
Sur kimi.ai et dans les applis Kimi.

#Kimi #MoonshotAI #ChatGPT