ChatGPT échec et mat face à un Atari 2600 à 1 MHz : la chute d'une prétendue intelligence artificielle
Dans une démonstration cinglante des limites des modèles linguistiques, ChatGPT s'est fait humilier aux échecs par un simple émulateur d'Atari 2600 fonctionnant à 1,19 MHz. L'expérience, menée par l'ingénieur Citrix Robert Jr. Caruso ce week-end, révèle la profonde incompétence des IA conversationnelles dans les jeux de stratégie.
Caruso a eu l'idée de ce test après une discussion avec ChatGPT sur l'histoire des IA et des échecs. Le chatbot a proposé de jouer au "Atari Chess", ce que l'ingénieur a interprété comme une référence à Video Chess, le seul jeu d'échecs jamais sorti sur Atari 2600 en 1979.
Malgré des indications de base sur la disposition des pièces, ChatGPT a accumulé les erreurs grossières. Il a confondu tours et fous, ignoré des fourchettes évidentes avec des pions, et commis une série de bourdes inexplicables selon Caruso.
Le chatbot a même tenté de rejeter la faute sur les symboles abstraits utilisés par Video Chess pour représenter les pièces. "Pendant 90 minutes, j'ai dû l'empêcher de faire des mouvements désastreux et corriger sa perception du jeu plusieurs fois par tour", a témoigné l'ingénieur.
Malgré ses demandes répétées de recommencer la partie, ChatGPT s'est finalement incliné face au moteur d'échecs 8 bits. Un résultat embarrassant pour une IA reposant sur des milliers de GPU modernes, battue par un processeur vintage capable de calculer seulement un ou deux coups à l'avance.
Cette expérience rappelle crûment la nature réelle des modèles linguistiques : des moteurs de recherche sophistiqués sans aucune capacité de raisonnement. Ils excellent à produire des réponses plausibles, mais échouent lamentablement dès qu'il s'agit de logique ou de stratégie.
Caruso envisage maintenant de soumettre ChatGPT à un autre test avec Battle Chess sur un émulateur de PC 80286 à 16 MHz. Un nouveau défi qui promet d'être tout aussi impitoyable pour les prétentions de l'IA conversationnelle.