NVIDIA 发布首个增强游戏角色扮演的本地小语言模型
realtime news Aug 21, 2024 02:25
NVIDIA 推出一个本地小语言模型，以改进游戏角色互动，并在 Amazing Seasun Games 的《Mecha BREAK》中首次亮相。
在 2024 年的 Gamescom 上，NVIDIA 宣布部署其首个本地小语言模型（SLM），旨在增强游戏角色的对话能力，据 NVIDIA 技术博客 报道。此创新将在 Amazing Seasun Games 的《Mecha BREAK》中首次亮相，承诺在 NVIDIA GeForce RTX AI 电脑上带来更动态和沉浸的游戏体验。
NVIDIA ACE 推出用于角色扮演的 SLM
NVIDIA ACE 是一套数字人类技术，现在包括首个 NVIDIA SLM，Nemotron-4 4B Instruct。此模型可作为 NVIDIA NIM 进行云端和本地部署，提供游戏开发者一种简化的方式将先进的语言模型集成到他们的游戏中。NVIDIA NIM 提供一套微服务，以更快的速度在任意云端或数据中心部署这些模型。
Nemotron-4 4B Instruct 通过蒸馏、修剪和 INT4 量化进行优化，将 VRAM 使用量最小化到大约 2 GB 并显著减少与大型语言模型（LLM）相比的首令牌时间。该模型从 Nemotron-4 15B LLM 蒸馏而来，通过指令性提示进行微调，以在特定任务中实现更好的性能，增强角色扮演、检索增强生成（RAG）和函数调用功能。
这项技术使游戏角色能够更直观地理解玩家指令，准确响应并执行相关操作。开发者可以通过云端将 Nemotron-4 4B Instruct NIM 集成到他们的数字人类技术管线中，或利用超过 1 亿台 NVIDIA GeForce RTX 驱动的电脑和笔记本电脑进行本地推理。此外，Unreal Engine 5 ACE 示例应用程序已更新以支持本地插件集成。
NVIDIA ACE NIM 首次在游戏中亮相
由金山软件公司子公司 Amazing Seasun Games 开发的《Mecha BREAK》是首个展示运行本地的 NVIDIA Nemotron-4 4B Instruct NIM 的游戏。该游戏利用 NVIDIA 的 Audio2Face-3D NIM 和 OpenAI 的语音识别模型 Whisper 进行面部动画和语音识别，而 Elevenlabs 提供通过云服务的角色声音。
在此演示中，NVIDIA ACE 和数字人类技术让玩家能够与一名机械师角色互动，帮助选择、定制和准备机甲进行战斗，增强整个游戏体验。
游戏开发者探索最新的数字人类技术
NVIDIA ACE 和数字人类技术在游戏行业的影响力不断扩大。完美世界游戏正在推进其 NVIDIA ACE 和数字人类技术演示《传奇》，增加了新的 AI 驱动的视觉能力。在此演示中，角色云妮可以通过电脑相机看到玩家并识别现实世界中的人物和物体，由 ChatGPT-4o 提供支持，为游戏玩法增添了增强现实层。
这些进步为 PC 游戏带来了新的沉浸感和可访问性。欲了解更多信息，请访问 NVIDIA ACE 并下载 NIM 开始构建由生成性人工智能驱动的游戏角色。
Image source: Shutterstock