Doom, Mario, Civilization : les IA génératives peuvent-elles terminer des jeux des années 90 ?

Cela fait plusieurs mois que des petits malins s’amusent à essayer de faire jouer les IA génératives à des jeux vidéo: la chaîne Twitch Claude Plays Pokemon montre par exemple le modèle d’Anthropic tentant de venir à bout de Pokémon Rouge grâce à ses capacités de vision par ordinateur. Le chercheur Alex Zhang va plus loin et a créé VideoGameBench, un benchmark qui cherche à voir si les modèles d’IA peuvent terminer une vingtaine de jeux vidéo tournant en temps réel. Le test repose sur des titres des années 90 aux genres variés.

4 modèles d’IA jouant à Doom

Alex Zhang note que, si les LLM peuvent effectuer certaines actions complexes, ils sont bien en peine de venir à bout de jeux vidéo demandant de raisonner à court et à long terme, en plus de faire preuve d’intuition et de compréhension de l'espace. Son benchmark fournit l’essentiel à l’IA, à savoir l’image du jeu, une « manette » virtuelle et une indication claire si un jeu est terminé. Les titres présentés sont principalement des...