英偉達官宣AI NPC首秀 相中了這款中國電競游戲

周二(8月20日)，英偉達在官網技術博客中宣布，其在2024科隆國際游戲展(Gamescom 2024)上發(fā)布了首款設備端小型語言模型(SLM)，可用于提升游戲角色對話能力。

英偉達還宣布，首款展示“NVIDIA ACE”數字人技術的游戲是Amazing Seasun Games(西山居)開發(fā)的《Mecha BREAK》(解限機) ，新技術能讓游戲中的角色栩栩如生，以提供更具活力和沉浸感的游戲體驗。

年初的時候，英偉達就發(fā)布了其數字人技術NVIDIA ACE，可以提供由生成式人工智能驅動的語音、智能和動畫。現在這項技術擁有了其第一個SLM“Nemotron-4 4B Instruct”。

新聞稿稱，英偉達對該模型進行了優(yōu)化，提高了其響應速度和設備端推理的性能，VRAM使用量被降至約2GB，顯著縮短了首個Token的生成時間，可作為“NVIDIA NIM”推理微服務供游戲開發(fā)人員在云和設備上部署。

作為首款采用NVIDIA ACE NIM的游戲，《解限機》中的NPC(非玩家控制角色)機械師能夠響應玩家的指令——NVIDIA Audio2Face-3D NIM和Whisper在設備上負責面部動畫和語音識別，Elevenlabs則通過云端提供角色聲音。

Whisper是OpenAI研發(fā)并開源的一個自動語音識別模型。這些技術相結合，玩家能夠與《解限機》中的機械師進行互動，機械師可以幫助玩家根據戰(zhàn)斗風格和團隊需要選擇機甲，協(xié)助玩家定制機甲外觀，并就戰(zhàn)斗提供建議