這項技術能將用於圖像渲染的 GPU 效能提升至更高水準;為當前手遊領域中更為複雜的行動裝置端內容,減少了多達 50% 的 GPU 工作負載。
Arm 控股有限公司(納斯達克股票代碼:ARM,以下簡稱 Arm)在 SIGGRAPH 上,發表 Arm 類神經技術(Arm Neural Technology),該技術為業界首創,並將專用類神經加速器導入 2026 年推出的 Arm GPU。這項技術能將用於圖像渲染的 GPU 效能提升至更高水準;為當前手遊領域中更為複雜的行動裝置端內容,減少了多達 50% 的 GPU 工作負載。而這僅僅只是開始,這項新技術的問世,將為產業在未來實現更多的行動裝置端人工智慧(AI)創新奠定基礎。
同時,Arm 還推出全球首個全面開放的類神經圖像開發套件,將 AI 渲染整合到現有的工作流程中,使得開發者能夠在硬體問世前一年就能著手進行開發。套件中的所有 Arm 類神經技術都將全面開放,其中包括遊戲工作室重新訓練模型所需的模型架構、權重和工具。目前,該開發套件已得到 Enduring Games、Epic Games(虛幻引擎)、網易遊戲、Sumo Digital、騰訊遊戲與 Traverse Research 等合作夥伴的支持。
Arm 人工智慧和開發者平台院士 Geraint North 表示:「此次發表說明了桌機等級的類神經圖像技術,已經可在行動裝置上實現,這對於正在向行動裝置端 AI 轉型的前端遊戲開發者而言,無疑是一個重要的里程碑。Arm 類神經技術不僅適用於遊戲領域,還將對類神經攝影機工作負載等應用帶來實質的影響,為開發者在從圖像放大到路徑追蹤等行動裝置端的應用場景中,提供大規模實現圖像技術的強大工具。」
以開發者需求為本:針對類神經技術的開放開發套件
開發者即刻便能開始使用類神經圖像開發套件,在硬體問世前著手整合 AI 圖像技術。該開發套件是專為手遊打造,涵蓋整合和客製 AI 視覺效果所需的各項資源,其中包括:
- 虛幻引擎外掛程式
- 基於 PC 的 Vulkan 模擬
- 更新的分析工具
- 透過 GitHub 和 Hugging Face 提供的完全開放的模型
- 針對 Vulkan 的 Arm 機器學習(ML)擴展
針對 Vulkan 的開放 Arm ML 擴展能讓開發者將 AI 直接導入熟悉的渲染管線。傳統 Vulkan 支援圖像管線(Graphics Pipeline)和運算管線(Compute Pipeline),而 Arm ML 擴展還導入了第三種管線,即專為類神經網路推論而打造的圖形管線(Graph Pipeline)。為此,開發者能更輕易地將 AI 做為圖像管線的原生部分整合到行動裝置端渲染。
類神經圖像的實際應用:類神經超取樣
Arm 類神經超取樣(Arm Neural Super Sampling, Arm NSS)是一款 AI 驅動的圖像放大引擎,充分利用開發套件內的各項資源。它建立在 Arm 精確超解析度技術(Arm Accuracy Super Resolution, Arm ASR)的基礎之上,而這一技術已被《要塞英雄》、《無限暖暖》等遊戲工作室採用。
Arm NSS 能夠以每幀四毫秒的耗時,將解析度從 540p 放大至 1080p,且畫質幾乎與原生畫質無異。對比於傳統的全幀渲染方法,開發者可透過 Arm NSS 減少多達 50% 的 GPU 工作負載,進而靈活選擇如何利用這些節省下來的資源,既可用於降低遊戲的整體功耗,也可用於提升幀率或強化視覺效果。這項技術還能讓開發者運用 AI,來保留表面細節、光照和運動清晰度,進而能夠根據遊戲需求靈活地平衡視覺逼真度和能耗。
不只圖像放大技術,更多類神經圖像應用即將推出
Arm 預計在 2026 年進一步擴展其類神經技術應用路徑圖,推出利用 AI 實現幀率翻倍而無需加倍渲染負載的類神經幀率升頻(Neural Frame Rate Upscaling),以及採用 AI 在行動裝置上實現即時路徑追蹤,且每個圖元只需發射更少光線的類神經超取樣與雜訊消除(Neural Super Sampling and Denoising)。這兩項應用都將於硬體問世前推出。
透過這些新技術的開發,Arm 正在實現能針對實際效能具備開放、可存取且最佳化的類神經圖像技術。Arm 為開發者提供一致的開放平台,使其能夠更輕鬆地在 Arm 運算平台上,橫跨各類行動裝置體驗部署 AI。
合作夥伴證言:
Enduring Games 創始人兼執行長 Adam Creighton
「Enduring Games 和 Arm 擁有共同的願景,致力於協助開發者在各種不同的裝置上,都能實現更好的控制度、效能和內容品質。Arm 的類神經圖像開發套件為未來的手遊開發提供了專用平台,使得開發者能興奮地探索 AI 強化的工作流程,並為全球玩家帶來更豐富、更沉浸式的遊戲體驗。」
網易遊戲資深遊戲引擎開發專家吳彧文
「網易遊戲的使命之一,就是在每一部手機上實現主機等級的視覺體驗。我們認為這次 Arm 推出的新技術是協助我們使命落實的重要一步。我們很高興能與 Arm 合作,共同優化類神經圖像開發套件,透過利用我們行動端引擎的卓越性能,使其在行動裝置上得以充分發揮。」
Sumo Digital 集團技術總監 Scott Kirkland
「Sumo Digital 深信,類神經圖像技術和基於 AI 的圖像放大將為手遊領域帶來革新 – 在不過度消耗電池壽命的情況下,實現遊戲主機等級的視覺效果和深度沉浸式體驗。類神經技術開啟了一個令人驚歎的圖像與便攜性相結合的新時代,我們很高興能與 Arm 合作,共同探索手遊創意和技術創新的未來。」
騰訊遊戲
「騰訊遊戲的引擎技術團隊與 Arm 針對類神經圖像開發套件緊密合作,共同探索並推進在行動裝置上實現主機等級的渲染效果。我們期待與 Arm 持續攜手,在該開發套件的持續演進和廣泛應用中發揮關鍵作用,進而支援新一代手遊的開發。」
Traverse Research 執行長 Jasper Bekkers
「Traverse Research 始終致力於探索電腦圖像技術的極限所在,我們很自豪能與 Arm 合作,共同將其對類神經渲染的願景變為現實。」