“自主意识” NPC？英伟达公布了一项可能颠覆游戏开发的 AI 技术 ...

BLOG宣传大使

译 / 安德鲁
6 D" h" y6 @: @. S( x游戏 NPC 不再千篇一律执行预设指令、根据玩家对话自由发挥的情况，可能要出现在游戏里了？英伟达最近公布的一项新 AI 技术就指向了这种可能性。
) M3 _+ T$ K% h  }6 X


AI 生成技术正在从根本上改变游戏行业，从设计开发、到游玩方式。游戏开发者正在探索，怎样在 2D、3D 的内容创作管线中利用 AI 技术。这其中有一些让人兴奋的要点：在于 AI 带来了 " 在游戏运行过程中创作内容 " 的能力，这在更早期的阶段原本是无法实现的。
9 E6 B. T) k& q% `& B随着游戏变得越来越复杂，游戏对于 NPC 的刻画也在不断进步。面部表情更丰富、台词量更大、与玩家的交互方式也更多样。
" g0 M8 o( ^$ u但当前玩家与 NPC 的交互方式，依然是偏程式化的、目的性明显，因为对话选项有限，玩家与 NPC 的交谈、交互都只是为了推动游戏内的故事发展。
  i/ j2 L, r1 H: q( i而现在，生成式 AI 则可以改善 NPC 的交谈方式，创造出能够随时间推进而长期存在的性格，并对玩家的行为做出更特别的响应，让 NPC 的塑造显得更生动。
, e' \3 p' x; g$ o$ {在 COMPUTEX 2023 展会上，英伟达公布了 NVIDIA Avatar Cloud Engine ( ACE ) for Games。这是一项 AI 模型定制服务，通过 AI 驱动的自然语言互动让 NPC 表现得更为智能，从而改变游玩方式。
& J6 Z+ B* f. N/ @% j  h' Z) E游戏开发者、中间件和工具软件的开发者，都可以利用 NVIDIA ACE for Games 在游戏、软件中部署定制的对话文本、语音以及动画的 AI 模型。
以下内容来自英伟达官方技术博客《Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games》，由 DeepL AI 翻译完成：
用 AI 基础模型的最新突破生成 NPC
优化的人工智能基础模型包括以下内容：
NVIDIA NeMo：提供基础语言模型和模型定制工具，因此你可以为游戏角色进一步调整模型。这些模型可以根据需要进行端到端整合，也可以进行任意组合。这种可定制的大型语言模型（LLM）能够实现符合游戏世界的特定角色背景故事和个性。
9 p9 k' h, G$ Z: Q: o& b; w- FNVIDIA Riva：提供自动语音识别（ASR）和文本转语音（TTS）功能，实现与 NVIDIA NeMo 的实时语音对话。
1 B7 h: s& E+ y- W4 C6 zNVIDIA Omniverse Audio2Face：只需一个音源，就能立即为游戏角色创建富有表现力的面部动画。Audio2Face 具有适用于虚幻引擎 5 的 Omniverse 连接器，因此用户可以直接为 MetaHuman 角色添加面部动画。
您可以通过 NeMo 模型对齐技术为 NPC 带来活力。首先，采用行为克隆，使基础语言模型能够根据指令执行角色扮演任务。为了进一步使 NPC 的行为与预期相一致，在未来，你可以应用人类反馈的强化学习（RLHF），在开发过程中接收设计师的实时反馈。
- Z: l' A/ J! N& e8 r+ O7 \在 NPC 完全对齐后，最后一步是应用 NeMo Guardrails，它为 NPC 增加了可编程的规则。这个工具包可以协助你建立准确、适当、符合主题和安全的游戏角色。NeMo Guardrails 原生支持 LangChain，这是一个用于开发 LLM 支持的应用程序的工具包。
1 W/ Q; V4 I* k* U英伟达为各种规模的中间件、工具和游戏开发者提供灵活的部署方法。实现 NVIDIA ACE for Games 的神经网络针对不同的能力进行了优化，并在尺寸、性能和质量方面进行了不同的权衡。
ACE for Games 代工服务将帮助你对游戏模型进行微调，然后通过 NVIDIA DGX 云、GeForce RTX PC 或企业内部进行部署，以便进行实时推理。你还可以实时验证模型的质量，并测试性能和延迟，以确保模型在部署前符合特定标准。
为游戏创建端到端的化身 / 头像解决方案
为了展示如何利用 ACE for Games 来构建 NPC，英伟达与 Convai 公司合作，帮助其优化 ACE 模块并将其整合到产品中，Convai 公司是一家为在游戏和虚拟世界中创建和部署 AI 角色而建立平台的初创公司。
"Convai 公司创始人兼首席执行官 Purnendu Mukherjee 表示：" 通过 NVIDIA ACE for Games，Convai 公司的工具可以实现所需的延迟和质量，从而以具有成本效益的方式向几乎所有的开发者提供 AI 非游戏角色。
4 t6 |* Z7 R, `! ^# }8 _0 CConvai 将英伟达 Riva 用于语音转文字和文字转语音功能，英伟达 NeMo 用于驱动对话的 LLM，而 Audio2Face 则用于从语音输入中获得 AI 驱动的面部动画。
( u' ~& \% W6 h0 B1 w$ W视频 1. 英伟达 Kairos 演示展示了身临其境的 NPC Jin，以及利用最新的英伟达 RTX 和英伟达 DLSS 技术打造的拉面店。
# k2 c( C; }/ X! r1 j8 F如视频 1 所示，这些模块被无缝集成到 Convai 服务平台中，并被输入到虚幻引擎 5 和 MetaHuman 中，将身临其境的 NPC Jin 带入到生活中。由 NVIDIA Lightspeed Studios 艺术团队创作的拉面店场景，在虚幻引擎 5 的 NVIDIA RTX 分支（NvRTX 5.1）中运行。该场景使用 RTX Direct Illumination（RTXDI）进行渲染，用于光线追踪照明和阴影，同时使用 NVIDIA DLSS 3 以获得最大性能。
游戏开发者已经在使用现有的 NVIDIA 生成式 AI 技术进行游戏开发：
4 P+ s) b/ A$ Z8 E欧洲领先的游戏开发商之一 GSC Game World 正在其即将推出的游戏《S.T.A.L.K.E.R. 2: Heart of Chornobyl》中采用 Audio2Face。
独立游戏开发商 Fallen Leaf 也在 Fort Solis 中使用 Audio2Face 制作角色面部动画，这是一款发生在火星的第三人称科幻惊悚游戏。
5 P. d' J- I4 A7 R9 v. K以生成性人工智能为重点的公司，如 Charisma.ai，正在利用 Audio2Face 为他们的对话引擎提供动画。
内容来源：
https://developer.nvidia.com/blog/generative-ai-sparks-life-into-virtual-characters-with-ace-for-games/
- j( S& [1 {2 q& M+ I游戏葡萄编译
游戏葡萄招聘内容编辑，