NVIDIA präsentiert Covert-Protocol-Demo mit Inworld AI

Während der heutigen Keynote zur GTC 2024 zeigte NVIDIA-CEO Jensen Huang eine neue KI-NPC-Demo namens Covert Protocol. Im Gegensatz zur auf der CES 2024 gezeigten Kairos-Demo, die auf Convai-Technologie basierte, basiert diese auf Inworld AI, der anderen großen KI-NPC-Plattform, die auf die Spieleentwicklung ausgerichtet ist. Wie Sie sich vielleicht erinnern, wurde Inworld AI erstmals vom Modder „Bloc“ in Spielen wie Mount & Blade II: Bannerlord, The Elder Scrolls V: Skyrim und Grand Theft Auto V hinzugefügt, obwohl Rockstar dies zum Entsetzen des Erstellers schnell zurücknahm .

Im November kündigte Microsoft eine Partnerschaft mit Inworld AI an, um ein Multiplattform-Toolset mit einem KI-Design-Copiloten und einer Charakter-Laufzeit-Engine zu entwickeln. Jetzt wurde die Technologie von Inworld in NVIDIA ACE for Games integriert, die Avatar Cloud Engine-Plattform, die letztes Jahr auf der Computex vorgestellt wurde.

NVIDIA ACE zielt darauf ab, eine vollständige „digitale menschliche Pipeline“ bereitzustellen. Alles beginnt mit Riva, das automatische Spracherkennung (ASR) und Text-to-Speech (TTS) mit dem anpassbaren Nemotron Large Language Model (LLM) ermöglicht. Hier können Entwickler spezifische Hintergrundgeschichten und Persönlichkeiten für Charaktere erstellen, die zur Spielwelt eines Entwicklers passen. Durch programmierbare Regeln für NPCs mit NeMo Guardrails können sie die Spielerinteraktionen auch besser auf den Kontext einer Szene ausrichten. Schließlich erstellt Audio2Face automatisch ausdrucksstarke Gesichtsanimationen für Spielcharaktere aus nur einer Audioquelle.

Auf der Inworld-Seite können Entwickler verschiedene Parameter für jeden einzelnen NPC anpassen: Persönlichkeit, Wissen und Kognition, Ziele, Szenen, Sicherheit, Langzeitgedächtnis und Beziehungen. Kylan Gibbs, CEO von Inworld AI, sagte auch:

Die Kombination aus NVIDIA ACE-Mikrodiensten und der Inworld Engine ermöglicht es Entwicklern, digitale Charaktere zu erstellen, die dynamische Erzählungen vorantreiben können und neue Möglichkeiten eröffnen, wie Gamer entschlüsseln, folgern und spielen können.

Interessanterweise beabsichtigt NVIDIA, dass seine „Digital Human Platform Partners“ ACE auf den Markt bringen, sei es an Spieleentwickler oder an Unternehmen für Kundendienstzwecke. Hier ist die aktuelle Liste, die auf der GTC 2024 geteilt wurde: