英偉達宣布DLSS Transformer模型退出beta測試,準備正式部署
今年英偉達在新一代Blackwell架構GPU上引入了DLSS 4,具備多幀生成功能,在每個傳統渲染的幀之間生成多達三個額外的幀。 DLSS 4也加入了自2020年發布DLSS 2.0以來對其AI模型的最大升級,DLSS光線重建、DLSS超解析度和DLAA將由Transformer模型驅動,這是Transformer模型首次在圖形領域的即時應用。
近日英偉達發布了NVIDIA DLSS SDK 310.3.0,除了錯誤修復和穩定性改進外,還明確表示Transformer模型已正式退出beta測試。根據英偉達先前的說法,在Transformer模型基礎上不斷改進,預計在未來幾年裡,影像品質將持續提升。
Transformer模型透過改進的時間穩定性、減少鬼影以及運動中的更高細節來提升影像質量,將進一步提升RTX 20/30/40系列顯示卡的DLSS性能體驗。先前DLSS使用卷積神經網路(CNN)透過分析局部上下文並在連續幀中追蹤這些區域的變化來產生新像素,經過六年的持續改進,已經達到了極限。新的Transformer模型使用了視覺Transformer變壓器,使自註意力機制操作能夠評估整個幀中每個像素的相對重要性,並且跨越多個幀。
Transformer模型採用兩倍於CNN模型的參數來實現對場景的更深層理解,從而產生提供更高穩定性、減少鬼影、運動細節更多以及場景邊緣更平滑的像素。在密集的光線追蹤內容裡,新的Transformer模型能大幅提升影像質量,在複雜的光照條件下會有更明顯的優勢,穩定性會加強,重影會減少,閃爍現像也會消失。
延伸影片閱讀:
Tags:DLSS Transformer