NVIDIA发布首个数字人设备端小语言模型，提升游戏角色的对话能力

      2024年8月20日，德国科隆，Gamescom——NVIDIA宣布首款数字人小语言模型将在由西山居游戏开发的全新多人机甲游戏《解限机》(Mecha BREAK)中演示，这一功能旨在使游戏角色栩栩如生，为GeForce RTX™ AI PC玩家提供更具活力、更身临其境的游戏体验。

      全新本地模型名为 Nemotron-4 4B Instruct，它提升了游戏角色的对话能力，使其能更直观地理解玩家并做出自然回应。

      NVIDIA消费级AI业务副总裁Jason Paul表示：“我们优化了ACE技术，使其能直接在GeForce RTX AI PC和笔记本电脑上运行，从而大幅提升开发者在《解限机》(Mecha BREAK)等次世代游戏中部署最先进数字人的能力。”

专为角色扮演游戏设计的小语言模型

      NVIDIA Nemotron-4 4B Instruct 可提供更好的角色扮演、检索增强生成（RAG）和功能调用能力，使游戏角色能更准确地理解玩家指令、回应玩家并执行更准确的相关操作。

      NIM 优化了显存占用率，能提供更快的响应速度，为开发者利用超过1亿台GeForce RTX驱动的PC和笔记本电脑提供途径。

      该模型是NVIDIA ACE的一部分，NVIDIA ACE是一套由生成式AI驱动的数字人技术，提供语音、智能和动画功能。Nemotron-4 4BInstruct可作为NVIDIA NIM™提供，让游戏开发者在云端或设备端部署。

首款展示 ACE NIM 微服务的游戏

      由金山公司旗下西山居游戏开发的《解限机》(Mecha BREAK)首次展示了由 ACE 支持的游戏交互-- 在设备端运行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM以及Whisper模型可在设备端运行面部动画和语音识别。ElevenLabs通过云为游戏角色提供语音支持。

      在Demo中，NVIDIA ACE 和数字人技术使玩家能与机械师NPC互动，该角色可帮助玩家从各种机甲中进行选择，以满足玩家的游戏风格或团队需求，协助进行外观定制，就如何最好地准备庞大的战斗机器提供建议。

      西山居游戏首席执行官郭炜炜表示：“我们很高兴在《解限机》(Mecha BREAK)中展示ACE NIM的强大潜力，利用Audio2Face和Nemotron-4 4B Instruct大幅提升游戏沉浸感。”

完美世界游戏探索最新的数字人技术

      NVIDIA ACE和数字人技术持续扩大游戏行业影响力。

      全球游戏发行商和开发者完美世界游戏(Perfect World Games)正利用全新AI视觉功能推进其NVIDIA ACE 和数字人技术Demo《传奇》(Legends)。在Demo中，角色 “云霓”可以使用由ChatGPT-4o支持的PC摄像头识别现实世界中的玩家和物体，为游戏体验增添一个增强现实层。这些功能将PC游戏的沉浸感和可访问性提升到全新水平。

      了解有关 NVIDIA ACE的更多信息，下载 NIM，开始构建由生成式AI驱动的游戏角色。