NVIDIA「DLSS 3」可能是 RTX 40 限定技術 10/12 號推出
NVIDIA 新推出的 RTX 40、Ada Lovelace GPU,在核心架構中加入 Optical Flow Accelerator,這也是新一代「DLSS 3」所需的主要加速功能。
Ada Lovelace GPU 的第四代 Tensor Cores 加入 Optical Flow Accelerator 單元,而 DLSS 3 將採用 Optical Multi Frame Generation 新技術。
新一代 DLSS 3 將需要 4 個輸入:現在與之前的遊戲畫面,以及 Optical Flow Field 由 Ada 的 Optical Flow Accelerator 產生,還有遊戲引擎的資料像是 Motion Vectors 與 depth。
Ada 的 Optical Flow Accelerator 單元,將分析遊戲影像與計算 Optical Flow Field。Optical Flow Field 會追蹤向素的移動方向與速度,從 frame 1 到 frame 2 的連續分析。
Optical Flow Accelerator 能夠追蹤像素級的資料,例如:像素、反射、陰影、光線,這些資料不被遊戲引擎納入 Motion Vector 資料當中。像是下圖的影像,就記錄了陰影在畫面移動的方向與速度。
也就是說 Optical Flow Accelerator 能夠準確的追蹤像素級的效果,而 DLSS 3 依然會使用遊戲引擎提供的 Motion Vectors,以確保能夠完整的追蹤遊戲場景的幾何變化。而下圖則是顯示出,遊戲的 Motion Vectors 可以有效的追蹤摩托車的物體運動,但是他的陰影卻沒被追蹤導致陰影異常。
針對每個像素,DLSS 的 AI 神經網路會決定如何使用遊戲引擎的 Motion Vectors 以及 Optical Flow Field 的資料,通過兩者資料的互相運用,DLSS 能夠夠精準的重建遊戲幾何與效果。
當使用 DLSS 3 技術,通過 AI 能夠重建第一個畫面的 3/4 影像,並在第二畫面時完全由 DLSS 產生,也就是說整體來看 DLSS 3 能夠重建 7/8 的畫面像素,藉此大幅提升遊戲效能。
目前 NVIDIA 展示的效能來看,通過 DLSS 3 加速,微軟模擬飛行可達到 200% 的效能提升,而 2077 則可有著 400% 的效能加速。
DLSS 3 將在 10/12 號推出,目前已有 35 款遊戲或程式支援,玩家可以稍微期待日後的測試。但目前新聞稿與 Blog 資料來看,DLSS 3 似乎是 RTX 40 系列顯卡獨有的功能,但 Optical Flow 其實 Turing 與 Ampere 架構也支援,但就要看 NVIDIA 如何解說了。
- A Plague Tale: Requiem
- Atomic Heart
- Black Myth: Wukong
- Bright Memory: Infinite
- Chernobylite
- Conqueror’s Blade
- Cyberpunk 2077
- Dakar Rally
- Deliver Us Mars
- Destroy All Humans! 2 -Reprobed
- Dying Light 2 Stay Human
- F1® 22
- F.I.S.T.: Forged In Shadow Torch
- Frostbite Engine
- HITMAN 3
- Hogwarts Legacy
- ICARUS
- Jurassic World Evolution 2
- Justice
- Loopmancer
- Marauders
- Microsoft Flight Simulator
- Midnight Ghost Hunt
- Mount & Blade II: Bannerlord
- Naraka Bladepoint
- NVIDIA Omniverse™
- NVIDIA Racer RTX
- PERISH
- Portal With RTX
- Ripout
- S.T.A.L.K.E.R 2: Heart of Chornobyl
- Scathe
- Sword and Fairy 7
- SYNCED
- The Lord of the Rings: Gollum
- The Witcher 3: Wild Hunt
- THRONE AND LIBERTY
- Tower of Fantasy
- Unity
- Unreal Engine 4 & 5
- Warhammer 40,000: Darktide