英偉達(dá)最新AI升采樣技術(shù)可改變游戲光照和材質(zhì)效果

英偉達(dá)在周一的GTC大會(huì)上宣布了DLSS 5技術(shù)，根據(jù)早期反響來看，這將是一個(gè)引發(fā)爭(zhēng)議的更新，一些人稱其為"AI垃圾"，認(rèn)為它不可接受地改變了藝術(shù)創(chuàng)作意圖。英偉達(dá)CEO黃仁勛稱這是"圖形領(lǐng)域的GPT時(shí)刻——將手工渲染與生成式AI相結(jié)合，在保持藝術(shù)家創(chuàng)作表達(dá)所需控制力的同時(shí)，實(shí)現(xiàn)視覺真實(shí)感的巨大飛躍"。

在支持DLSS 5的游戲中，該工具可以立即為光照和陰影提供顯著改善，但與之前使用機(jī)器學(xué)習(xí)來縮小高低畫質(zhì)設(shè)置差距的升采樣版本不同，這個(gè)版本應(yīng)用生成式AI重新處理光照和材質(zhì)，添加了感覺全新的細(xì)節(jié)。英偉達(dá)今天展示的《生化危機(jī)：安魂曲》、《星空》、《霍格沃茨遺產(chǎn)》和《EA體育FC》等游戲示例看起來確實(shí)更加逼真，但DLSS 5版本的變化看起來與我們?cè)跀z影、視頻和其他創(chuàng)意領(lǐng)域看到的"AI垃圾"更新類似。

據(jù)英偉達(dá)介紹，"AI模型經(jīng)過端到端訓(xùn)練，能夠理解復(fù)雜的場(chǎng)景語義，如角色、頭發(fā)、織物和半透明皮膚，以及正面光照、背光或陰天等環(huán)境光照條件——所有這些都通過分析單個(gè)幀完成。DLSS 5然后利用其深度理解生成視覺精確的圖像，處理皮膚次表面散射、織物精致光澤和頭發(fā)光材質(zhì)相互作用等復(fù)雜元素，同時(shí)保持原始場(chǎng)景的結(jié)構(gòu)和語義。"

最顯著的影響是DLSS 5似乎對(duì)角色模型的外觀進(jìn)行了重大改變。在《安魂曲》的案例中，覆蓋在原始資源上的生成式AI讓主角Grace Ashcroft看起來完全不同，就像她使用了Instagram濾鏡，讓嘴唇更飽滿，涂抹了濃重的眼影。

它在《星空》中的應(yīng)用產(chǎn)生了類似詭異的效果，仿佛銳度被調(diào)到最大，明亮的高光讓角色的面部特征和頭發(fā)看起來像舞臺(tái)燈光效果，盡管他們站在沒有這種光照的環(huán)境中。英偉達(dá)引用貝塞斯達(dá)游戲工作室總監(jiān)托德·霍華德的話說："當(dāng)英偉達(dá)向我們展示DLSS 5并讓它在《星空》中運(yùn)行時(shí)，看到它如何讓游戲煥發(fā)生機(jī)真是令人驚嘆。我們已經(jīng)體驗(yàn)過了，迫不及待想讓所有人都試試。"

DLSS 5可以在高達(dá)4K分辨率下實(shí)時(shí)運(yùn)行，雖然它肯定會(huì)滿足一些期待在更多游戲中看到照片級(jí)真實(shí)感的玩家和開發(fā)者，但這種效果并不適合所有人。游戲開發(fā)者M(jìn)ike Bithell寫道："當(dāng)你絕對(duì)、肯定地不希望在游戲體驗(yàn)中有任何藝術(shù)指導(dǎo)時(shí)使用。看到有人認(rèn)真對(duì)待這種荒謬的東西令人失望。真是一團(tuán)糟。"

不過，英偉達(dá)表示它為游戲開發(fā)者提供了控制選項(xiàng)，讓他們決定DLSS 5如何影響游戲外觀，因此到它正式發(fā)布時(shí)，游戲內(nèi)效果可能與我們現(xiàn)在看到的不同。

英偉達(dá)表示，DLSS 5通過兩種方式尊重藝術(shù)創(chuàng)作意圖：

將游戲每幀的顏色和運(yùn)動(dòng)矢量輸入模型，將輸出錨定在源3D內(nèi)容中。通過為開發(fā)者提供詳細(xì)控制選項(xiàng)，如強(qiáng)度和顏色分級(jí)。藝術(shù)家可以使用這些控制來調(diào)整混合、對(duì)比度、飽和度和伽馬值，并確定在何處以及如何應(yīng)用增強(qiáng)效果以保持游戲獨(dú)特的美學(xué)風(fēng)格。開發(fā)者還可以遮罩特定對(duì)象或區(qū)域，使其不受增強(qiáng)效果影響。

DLSS 5將于今年秋季推出，目前僅確認(rèn)與精選游戲兼容，除了前面提到的游戲外，還包括《上古卷軸VI：湮滅重制版》和《刺客信條：影》等大作。

Q&A

Q1：DLSS 5與之前版本有什么不同？

A：DLSS 5與之前版本的主要區(qū)別是它應(yīng)用生成式AI重新處理游戲的光照和材質(zhì)，添加全新細(xì)節(jié)，而不是像之前版本那樣僅使用機(jī)器學(xué)習(xí)來縮小高低畫質(zhì)設(shè)置的差距。它能夠理解復(fù)雜場(chǎng)景語義并生成視覺精確的圖像。

Q2：DLSS 5會(huì)改變游戲角色的外觀嗎？

A：是的，DLSS 5會(huì)對(duì)角色模型外觀進(jìn)行顯著改變。例如在《生化危機(jī)：安魂曲》中，主角Grace Ashcroft看起來完全不同，像使用了濾鏡效果。在《星空》中，角色面部特征和頭發(fā)會(huì)有舞臺(tái)燈光般的明亮高光效果。

Q3：開發(fā)者能控制DLSS 5的效果嗎？

A：能夠。英偉達(dá)為游戲開發(fā)者提供了詳細(xì)的控制選項(xiàng)，包括強(qiáng)度和顏色分級(jí)調(diào)整。藝術(shù)家可以調(diào)整混合、對(duì)比度、飽和度和伽馬值，決定增強(qiáng)效果的應(yīng)用位置和方式，甚至可以遮罩特定對(duì)象或區(qū)域使其不受影響。