Les NPCs NEO d'Ubisoft explorent les possibilités des humains numériques dans les jeux avec les technologies NVIDIA ACE et Inworld

Dans une expérience créative présentée lors de la GDC 2024, une équipe de créateurs de jeux d'Ubisoft explore l'avenir des personnages non joueurs (PNJ), du gameplay interactif et de la narration émergente.

Ubisoft explore de nouveaux types de jeux interactifs avec des PNJ dynamiques, un domaine révolutionné par l'émergence des technologies d'IA générative. Les 'NEO NPCs', fruit de leur dernier projet de recherche et développement, sont des PNJ avancés conçus pour interagir en temps réel avec les joueurs, leur environnement et les autres personnages, ouvrant ainsi de nouvelles possibilités de narration dynamique et émergente.

Développés par une équipe pluridisciplinaire d'Ubisoft Paris, les PNJ NEO sont le fruit d'une étroite collaboration entre les créateurs d'Ubisoft et les principaux partenaires technologiques de GenAI, NVIDIA et Inworld AI. Le moteur de personnages et la technologie LLM d'Inworld permettent à l'équipe narrative d'Ubisoft de construire un historique complet, une base de connaissances et un style de conversation pour chaque PNJ, tandis que NVIDIA Audio2Face, qui fait partie de la suite de technologies NVIDIA ACE, est utilisé pour permettre l'animation faciale en temps réel.

Ubisoft a présenté les capacités de ces PNJ NEO à travers trois scénarios de démonstration distincts. Chaque scénario se concentre sur différents aspects du comportement des PNJ, de la connaissance de l'environnement et du contexte, d'un éventail de réactions et d'animations en temps réel, ainsi que de la mémoire des conversations, de la collaboration et de la prise de décision stratégique. Combinées, ces découvertes faites au cours de l'expérience repoussent les limites de la conception des jeux et de l'immersion.

Avec les PNJ NEO, les concepteurs de narration et d'animation d'Ubisoft ont mélangé la fiabilité des éléments de jeu scénarisés avec le dynamisme des interactions spontanées des joueurs, ouvrant ainsi de nouveaux horizons au développement des jeux.

En s'appuyant sur la technologie d'IA d'Inworld, l'équipe narrative d'Ubisoft a créé deux PNJ NEO, Bloom et Iron, qui ont leur propre histoire, leur propre base de connaissances et des styles de conversation différents afin d'établir ces personnages uniques dans l'univers de la démo.

La technologie d'Inworld fournit également aux PNJ NEO une connaissance intrinsèque de leur environnement, ainsi que des réponses interactives grâce au LLM d'Inworld. Audio2Face fournit des animations faciales et des synchronisations labiales pour les visages des deux PNJ en temps réel. […]
Lire la suite