在今年的游戲開發(fā)者大會(huì)（GDC 2024）上，NVIDIA 宣布了一系列激動(dòng)人心的新技術(shù)，旨在徹底改變游戲開發(fā)領(lǐng)域。通過與領(lǐng)先的 AI 應(yīng)用程序開發(fā)者如 Inworld AI 的合作，NVIDIA 展示了其最新的數(shù)字人技術(shù)和更新的 RTX SDK。這些創(chuàng)新不僅簡化了高質(zhì)量游戲世界的創(chuàng)建，還加速了生成式 AI 驅(qū)動(dòng)的游戲角色的部署。

NVIDIA 數(shù)字人技術(shù)：革新游戲角色

NVIDIA 的數(shù)字人技術(shù)提供了一個(gè)全套或單個(gè)微服務(wù)的解決方案，用戶可以根據(jù)需要整合到他們的產(chǎn)品中。這些技術(shù)包括：

1. NVIDIA Avatar Cloud Engine (ACE)：通過 NVIDIA Audio2Face (A2F) 提供逼真的面部動(dòng)畫，以及由 NVIDIA Riva 提供的自動(dòng)語音識別 (ASR) 和文本轉(zhuǎn)語音 (TTS) 功能，極大地增強(qiáng)了數(shù)字人的真實(shí)感和互動(dòng)性。

2. NVIDIA NeMo：一個(gè)用于開發(fā)自定義生成式 AI 的端到端框架。NeMo 提供了精確的數(shù)據(jù)管理、先進(jìn)的自定義功能、檢索增強(qiáng)生成和加速性能，使企業(yè)就緒型模型的開發(fā)更加高效。

3. NVIDIA RTX：包括 RTX 全局照明（RTXGI）和 DLSS 3.5 在內(nèi)的渲染技術(shù)集合，為游戲和應(yīng)用提供了實(shí)時(shí)路徑追蹤的能力。

這些技術(shù)在由 Inworld AI 與 NVIDIA 合作完成的《秘密協(xié)議》演示中得到了展示。玩家可以在游戲中扮演一位經(jīng)驗(yàn)豐富的私人偵探，體驗(yàn)前所未有的 NPC 交互。該演示結(jié)合了 OpenAI 的 ChatGPT 3.5、ElevenLabs 的文本轉(zhuǎn)語音 (TTS)、Riva ASR 和 A2F 微服務(wù)，大大提升了 Inworld 的語言、語音和動(dòng)畫制作流程。Inworld 的 AI 引擎采用多模態(tài)方法，將認(rèn)知、感知和行為系統(tǒng)結(jié)合，并利用 Unreal Engine 插件進(jìn)行快速集成，使得使用 MetaHumans 更加簡單高效。

AI 驅(qū)動(dòng)的照明改進(jìn)和渲染集成

除了數(shù)字人技術(shù)，NVIDIA 還推出了 RTX 全局照明（RTXGI）2.0 SDK，通過 AI 實(shí)現(xiàn)光線追蹤的間接照明。這一更新進(jìn)一步豐富了現(xiàn)有的神經(jīng)渲染技術(shù)選項(xiàng)，如 DLSS 超分辨率技術(shù)、DLSS 3 幀生成、DLSS 光線重建和 DLAA。

最新的算法——神經(jīng)輻射緩存（NRC）提供了一種 AI 驅(qū)動(dòng)的解決方案，能夠?qū)崟r(shí)訓(xùn)練場景的輻射緩存，并使用反應(yīng)式照明處理全動(dòng)態(tài)場景。這種技術(shù)無需預(yù)先為幾何圖形和材質(zhì)烘焙靜態(tài)照明，從而在高要求的場景中提供了更出色的性能和更準(zhǔn)確的全局照明。

為提供更好的擴(kuò)展性，NVIDIA 推出了空間哈希輻射緩存 (SHaRC)，它無需使用神經(jīng)網(wǎng)絡(luò)即可提供與 NRC 類似的優(yōu)勢，并與任何支持 DirectX 或 Vulkan 光線追蹤的 GPU 兼容。這是一種基于空間哈希數(shù)據(jù)結(jié)構(gòu)構(gòu)建的輻射緩存，專為路徑追蹤的快速且可擴(kuò)展的全局照明技術(shù)而設(shè)計(jì)。

NVIDIA 的這些創(chuàng)新為游戲開發(fā)者提供了強(qiáng)大的工具，使他們能夠創(chuàng)建更加真實(shí)、生動(dòng)的游戲角色和高質(zhì)量的游戲世界。通過申請搶先體驗(yàn)計(jì)劃，用戶可以開啟 NVIDIA ACE 的旅程，并獲取正在開發(fā)的 AI 模型。有關(guān)更多信息，可以訪問 NVIDIA 的 API Catalog，并通過瀏覽器或完全加速堆棧的 API 端點(diǎn)體驗(yàn)和評估這些微服務(wù)。

對于尋求端到端數(shù)字人解決方案的游戲開發(fā)者，NVIDIA 提供了包括 Convai、Inworld、Data Monsters、Quantiphi 和 UneeQ 在內(nèi)的中間件合作伙伴的支持。有關(guān)更多信息和反饋，用戶可以參閱 Digital Human 論壇。

總的來說，NVIDIA 在 GDC 2024 上的展示不僅展示了其在生成式 AI 和渲染技術(shù)領(lǐng)域的領(lǐng)先地位，也為未來的游戲開發(fā)設(shè)定了新的標(biāo)準(zhǔn)。隨著這些技術(shù)的不斷發(fā)展和應(yīng)用，我們可以期待更加沉浸和互動(dòng)的游戲體驗(yàn)。

▲ 滑動(dòng)查看往期內(nèi)容