Ubisoft dévoile Teammates : un nouveau projet expérimental d’IA qui réagit à la voix du joueur en temps réel

Plus d’un an après avoir présenté ses “NEO NPCs“, Ubisoft a dévoilé un nouveau projet de recherche qui explore l’intégration d’une IA générative dans les jeux vidéo. Cette fois, le projet s’appelle “Teammates” et une partie de la presse a pu l’essayer.

Un projet expérimental qui explore l’IA en jeu

Ubisoft a présenté Teammates, un projet de recherche jouable qui teste une IA générative capable de réagir à la voix du joueur en temps réel. L’expérience plonge le joueur dans un futur dystopique où il incarne un membre de la résistance chargé de retrouver cinq équipiers disparus dans une base ennemie. Tout au long du niveau, il doit récupérer leurs dernières mémoires et affronter des patrouilles hostiles.

Dans cette expérience, le joueur est accompagné de deux coéquipiers, Sofia et Pablo, ainsi que d’un assistant vocal appelé Jaspar. Tous réagissent à des consignes naturelles grâce à des systèmes qui interprètent le contexte et les intentions du joueur. Sofia et Pablo se déplacent, attaquent ou se mettent à couvert selon ce qu’il leur dit, ce qui change la manière d’aborder chaque situation.

Jaspar ne se limite pas au rôle classique d’une aide. Il fournit des informations de lore, ajuste certains paramètres ou signale des cibles après une simple demande vocale. Les développeurs expliquent que les premiers tests ont montré une forte connexion entre les joueurs et ces personnages réactifs, ce qui a poussé l’équipe à imaginer des usages plus larges pour de futurs jeux.

Nos premières expérimentations ont montré que les joueurs se connectaient rapidement avec les PNJ pilotés par l’IA et avec le concept d’assistant vocal. Jaspar aidait les joueurs lorsqu’ils se perdaient ou ne savaient pas quoi faire, il pouvait accéder aux menus et aux paramètres, en dire davantage sur le monde et sur l’histoire. Nous avons vraiment commencé à apprécier Jaspar et nous avons vu comment un tel système pouvait être intéressant pour de nombreux types de jeux.

Xavier Manzanares / Director of Gameplay Gen AI

Une approche créative et des ambitions à long terme

Les responsables du projet soulignent que l’objectif est de placer le joueur au centre du récit. Virginie Mosser, Narrative Director, explique que parler à un équipier comme Sofia change l’expérience et donne l’impression de coécrire l’aventure. Selon elle, l’IA peut personnaliser l’histoire grâce aux interactions vocales et créer des réactions impossibles à obtenir avec des dialogues préécrits.

Nous espérons que les joueurs auront l’impression de façonner eux-mêmes l’histoire, et non de simplement la suivre. Quand je parle à [mon équipière IA] Sofia, elle réagit à ce que je lui dis et cela modifie mon expérience. Pour moi, c’est une véritable avancée et cela permet aux joueurs de vivre l’histoire à leur manière

Virginie Mosser / Narrative Director

Évidemment, l’équipe est consciente des critiques liées à l’IA dans les jeux. Selon elle, l’objectif n’est pas de remplacer les créatifs.

Au début, j’avais les mêmes inquiétudes que beaucoup d’autres. Mais j’ai découvert que c’est exactement l’inverse du fait de retirer l’humain du processus. J’écris toujours l’histoire et les personnalités des personnages, mais au lieu de répliques fixes, nous créons une sorte de cadre qui permet aux PNJ d’improviser dans le monde tout en restant dans les limites du lore et des motivations que nous leur avons données. Ils peuvent improviser, mais nous fixons toujours les règles et nous orientons l’histoire et les personnages

Virginie Mosser / Narrative Director

L’équipe continue son travail après avoir déjà fait tester Teammates par plusieurs centaines de joueurs en sessions fermées. Leurs retours guident les prochaines étapes et aideront à améliorer des outils destinés aux créateurs d’Ubisoft. Les développeurs prévoient aussi de publier une vidéo explicative qui présentera plus en détail cette expérience et ses perspectives.

Reste à voir dans combien d’années de telles fonctionnalités pourront être intégrées dans les jeux et dans quelle mesure elles pourraient redéfinir certains genres ou en créer de nouveaux. Il est clair qu’Ubisoft n’est pas la seule société à s’intéresser au sujet.