Quand NVIDIA utilise l’IA pour donner vie à un personnage, voici Jin

L’année 2023 est marquée par l’arrivée massive d’outils mettant en avant l’intelligence artificielle, et le gaming n’échappe évidemment pas à la règle. Parmi les entreprises qui l’utilisent depuis un moment maintenant, on retrouve NVIDIA, qui dévoile aujourd’hui une vidéo assez intrigante mettant en avant un personnage un peu particulier.
Des discussions générées grâce à NVIDIA ACE
Dans une démo baptisée NVIDIA Kairos, on découvre Jin, un personnage non jouable qui interagit de manière naturelle dans une conversation. NVIDIA s’est associé à Convai pour optimiser et intégrer les modules ACE dans cette interaction qualifiée « d’immersive et dynamique », et le résultat est assez impressionnant.
NVIDIA ACE permet en effet de créer des modèles personnalisés de parole, de conversation et d’animation pour des personnages dans les jeux.

Plusieurs outils sont utilisés afin de donner vie à Jin dans cette démo tournant sous le moteur Unreal Engine 5, avec du ray tracing.
La démo Kairos s’est appuyée sur NVIDIA Riva pour les capacités de conversion, sur NVIDIA NeMo pour l’IA conversationnelle et sur Audio2Face pour l’animation faciale pilotée par l’IA à partir d’entrées vocales. Ces modules ont été intégrés de manière transparente dans la plateforme de services Convai et alimentés par Unreal Engine 5 et MetaHuman pour donner vie à Jin.
Actuellement, ces technologies sont utilisées par une poignée de développeurs. Parmi eux, on retrouve GSC Game World, qui utilise Audio2Face pour les animations faciales de S.T.A.L.K.E.R. 2: Heart of Chornobyl.
Fallen Leaf utilise également l’outil pour l’animation faciale des personnages de Fort Solis, et on imagine que d’autres studios viendront se joindre à la fête prochainement si les résultats sont convaincants.
L’idée de pouvoir avoir des conversations intelligentes, non scriptées et dynamiques avec des PNJ dotés de personnalités persistantes est très alléchante, et nous avons évidemment hâte de voir comment ces outils évolueront. L’article complet de NVIDIA sur le sujet est à retrouver à cette adresse.
Dhusara > C’est toujours pareil à chaque génération. Il y a des vitrines techniques, des technologies ambitieuses… et puis il y a les développements, avec ses limites humaines, ses coûts, les freins dus aux ressources de la machine, aux délais… Il n’y a jamais eu de gros gap entre les générations, contrairement aux promos faites à chaque fois ; c’est un continuum, le temps d’avoir les ressources suffisantes et que les développeurs puissent monter en compétence. Et c’est bien ça qui est normal.
Perso, j’ai de plus en plus l’impression que ce sont des technos que l’on ne verra jamais, ou de façon hyper light.
Entre le reveal de l’UE5 il y a 3 ans, et ce que l’on a aujourd’hui, il y a un monde…