Arm 推出類神經超取樣 NSS 技術可加速行動裝置繪圖效能

Arm 在 SIGGRAPH 大會上發表 Arm 類神經技術（Arm Neural Technology），能夠在行動裝置中降低 50% 的 GPU 工作負載，並預計在 2026 年推出的 Arm GPU 當中加入專用類神經加速器。

Arm 也提供全面開放的類神經圖像開發套件，讓開發者可快速將 AI 渲染整合到現有的繪圖工作流程當中。套件中的所有 Arm 類神經技術都將全面開放，其中包括遊戲工作室重新訓練模型所需的模型架構、權重和工具。

目前，該開發套件已得到 Enduring Games、Epic Games（虛幻引擎）、網易遊戲、Sumo Digital、騰訊遊戲與 Traverse Research 等合作夥伴的支持。

開發者即刻便能開始使用類神經圖像開發套件，在硬體問世前著手整合 AI 圖像技術。該開發套件是專為手遊打造，涵蓋整合和客製 AI 視覺效果所需的各項資源，其中包括：

• 虛幻引擎外掛程式
• 基於 PC 的 Vulkan 模擬
• 更新的分析工具
• 透過 GitHub 和 Hugging Face 提供的完全開放的模型
• 針對 Vulkan 的 Arm 機器學習（ML）擴展

針對 Vulkan 的開放 Arm ML 擴展能讓開發者將 AI 直接導入熟悉的渲染管線。傳統 Vulkan 支援圖像管線（Graphics Pipeline）和運算管線（Compute Pipeline），而 Arm ML 擴展還導入了第三種管線，即專為類神經網路推論而打造的圖形管線（Graph Pipeline）。為此，開發者能更輕易地將 AI 做為圖像管線的原生部分整合到行動裝置端渲染。開發者可以在此篇文章中瞭解更多資訊。

類神經圖像的實際應用：類神經超取樣

Arm 類神經超取樣（Arm Neural Super Sampling, Arm NSS）是一款 AI 驅動的圖像放大引擎，充分利用開發套件內的各項資源。它建立在 Arm 精確超解析度技術（Arm Accuracy Super Resolution, Arm ASR）的基礎之上，而這一技術已被《要塞英雄》、《無限暖暖》等遊戲工作室採用。

Arm NSS 能夠以每幀四毫秒的耗時，將解析度從 540p 放大至 1080p，且畫質幾乎與原生畫質無異。對比於傳統的全幀渲染方法，開發者可透過 Arm NSS 減少多達 50% 的 GPU 工作負載，進而靈活選擇如何利用這些節省下來的資源，既可用於降低遊戲的整體功耗，也可用於提升幀率或強化視覺效果。這項技術還能讓開發者運用 AI，來保留表面細節、光照和運動清晰度，進而能夠根據遊戲需求靈活地平衡視覺逼真度和能耗。

有趣的是在 Arm 技術部落格 當中提到：「Arm NSS 的影像畫質與 DLSS2-comparable。」

不只圖像放大技術，更多類神經圖像應用即將推出

Arm 預計在 2026 年進一步擴展其類神經技術應用路徑圖，推出利用 AI 實現幀率翻倍而無需加倍渲染負載的類神經幀率升頻（Neural Frame Rate Upscaling），以及採用 AI 在行動裝置上實現即時路徑追蹤，且每個圖元只需發射更少光線的類神經超取樣與雜訊消除（Neural Super Sampling and Denoising）。這兩項應用都將於硬體問世前推出。

也就是說利用 AI 模型的超解析度、影像畫質提升等技術，已經不是 PC 平台 GPU 專屬的技術，現在 Arm 也將提供行動裝置更新一代的繪圖提升技術。