NVIDIA a présenté des microservices de production pour le NVIDIA Avatar Cloud Engine (ACE) qui permettent aux développeurs de jeux, d'outils et de middleware d'intégrer des modèles d'IA générative dans les avatars numériques de leurs jeux et applications. Les nouveaux microservices ACE permettent aux développeurs de créer des avatars interactifs en utilisant des modèles d'IA tels que NVIDIA Omniverse Audio2Face ? (A2F), qui crée des animations faciales expressives à partir de sources audio, et la reconnaissance vocale automatique (ASR) NVIDIA Riva, qui permet de créer des applications multilingues personnalisables de traduction et d'expression vocale à l'aide de l'IA générative.

Les développeurs qui adoptent ACE sont Charisma.AI, Convai, Inworld, miHoYo, NetEase Games, Ourpalm, Tencent, Ubisoft et UneeQ. Les principaux développeurs de jeux et d'avatars interactifs sont les pionniers de l'utilisation des technologies ACE et d'IA générative pour transformer les interactions entre les joueurs et les personnages non jouables (PNJ) dans les jeux et les applications. Historiquement, les PNJ ont été conçus avec des réponses et des animations faciales prédéterminées.

Cela limitait les interactions avec les joueurs, qui avaient tendance à être transactionnelles, de courte durée et, par conséquent, ignorées par la majorité des joueurs. Pour montrer comment ACE peut transformer les interactions avec les PNJ, NVIDIA a travaillé avec Convaito pour étendre la démo NVIDIA Kairos, présentée au Computex, avec un certain nombre de nouvelles fonctions et l'inclusion des microservices ACE. Dans la dernière version de Kairos, Riva ASR et A2F sont largement utilisés, ce qui améliore l'interactivité des PNJ.

Le nouveau cadre de Convai permet aux PNJ de converser entre eux et leur donne conscience des objets, ce qui leur permet de ramasser et de livrer des objets aux endroits souhaités. De plus, les PNJ ont la possibilité de guider les joueurs vers des objectifs et de traverser des mondes. Les microservices de reconnaissance vocale automatique Audio2Face et Riva sont disponibles dès maintenant.

Les développeurs d'avatars interactifs peuvent intégrer les modèles individuellement dans leurs processus de développement.