NVIDIA發(fā)布首個數(shù)字人設(shè)備端小語言模型，提升游戲角色的對話能力

2024 年 8 月 20 日 作者 Jason Paul 分享

2024 年 8 月 20 日，德國科隆，Gamescom——NVIDIA 宣布首款數(shù)字人小語言模型將在由西山居游戲開發(fā)的全新多人機(jī)甲游戲《解限機(jī)》(Mecha BREAK)中演示，這一功能旨在使游戲角色栩栩如生，為 GeForce RTX? AI PC 玩家提供更具活力、更身臨其境的游戲體驗。

全新本地模型名為 Nemotron-4 4B Instruct，它提升了游戲角色的對話能力，使其能更直觀地理解玩家并做出自然回應(yīng)。

NVIDIA 消費級 AI 業(yè)務(wù)副總裁 Jason Paul 表示：“我們優(yōu)化了 ACE 技術(shù)，使其能直接在 GeForce RTX AI PC 和筆記本電腦上運行，從而大幅提升開發(fā)者在《解限機(jī)》(Mecha BREAK) 等次世代游戲中部署最先進(jìn)數(shù)字人的能力?！?

專為角色扮演游戲設(shè)計的小語言模型

NVIDIA Nemotron-4 4B Instruct 可提供更好的角色扮演、檢索增強(qiáng)生成 (RAG) 和功能調(diào)用能力，使游戲角色能更準(zhǔn)確地理解玩家指令、回應(yīng)玩家并執(zhí)行更準(zhǔn)確的相關(guān)操作。

NIM 優(yōu)化了顯存占用率，能提供更快的響應(yīng)速度，為開發(fā)者利用超過1億臺GeForce RTX驅(qū)動的PC和筆記本電腦提供途徑。

該模型是 NVIDIA ACE 的一部分，NVIDIA ACE是一套由生成式AI驅(qū)動的數(shù)字人技術(shù)，提供語音、智能和動畫功能。Nemotron-4 4BInstruct 可作為 NVIDIA NIM? 提供，讓游戲開發(fā)者在云端或設(shè)備端部署。

首款展示 ACE NIM 微服務(wù)的游戲

由金山公司旗下西山居游戲開發(fā)的《解限機(jī)》(Mecha BREAK)首次展示了由 ACE 支持的游戲交互— 在設(shè)備端運行的 NVIDIA Nemotron-4 4B Instruct NIM。NVIDIA Audio2Face-3D NIM 以及 Whisper 模型可在設(shè)備端運行面部動畫和語音識別。ElevenLabs 通過云為游戲角色提供語音支持。

在 Demo 中，NVIDIA ACE 和數(shù)字人技術(shù)使玩家能與機(jī)械師 NPC 互動，該角色可幫助玩家從各種機(jī)甲中進(jìn)行選擇，以滿足玩家的游戲風(fēng)格或團(tuán)隊需求，協(xié)助進(jìn)行外觀定制，就如何最好地準(zhǔn)備龐大的戰(zhàn)斗機(jī)器提供建議。

西山居游戲首席執(zhí)行官郭煒煒表示：“我們很高興在《解限機(jī)》(Mecha BREAK) 中展示 ACE NIM 的強(qiáng)大潛力，利用 Audio2Face 和 Nemotron-4 4B Instruct 大幅提升游戲沉浸感。”

完美世界游戲探索最新的數(shù)字人技術(shù)

NVIDIA ACE和數(shù)字人技術(shù)持續(xù)擴(kuò)大游戲行業(yè)影響力。

全球游戲發(fā)行商和開發(fā)者完美世界游戲 (Perfect World Games) 正利用全新AI視覺功能推進(jìn)其 NVIDIA ACE 和數(shù)字人技術(shù)Demo《傳奇》(Legends)。在 Demo 中，角色 “云霓”可以使用由 ChatGPT-4o 支持的 PC 攝像頭識別現(xiàn)實世界中的玩家和物體，為游戲體驗增添一個增強(qiáng)現(xiàn)實層。這些功能將PC游戲的沉浸感和可訪問性提升到全新水平。