作者：安謀科技高級(jí)軟件技術(shù)經(jīng)理 楊喜樂(lè)

2025 年 8 月，Arm 在 SIGGRAPH 大會(huì)上發(fā)布了突破性的 Arm 神經(jīng)技術(shù)。這是業(yè)內(nèi)首次將專(zhuān)用神經(jīng)加速器集成到 Arm GPU 中，搭載這項(xiàng)技術(shù)的設(shè)備預(yù)計(jì)將于 2026 年底上市。這一開(kāi)放、前瞻性的創(chuàng)新首次將 PC 級(jí)別的人工智能 (AI) 圖形技術(shù)引入移動(dòng)設(shè)備，為未來(lái)端側(cè) AI 的發(fā)展奠定了基礎(chǔ)。

與此同時(shí)，Arm 還推出了全球首個(gè)全面開(kāi)放的神經(jīng)圖形開(kāi)發(fā)套件。這是一個(gè)完全開(kāi)放且可擴(kuò)展的平臺(tái)，旨在為開(kāi)發(fā)者提供支持。該套件包含虛幻引擎 (Unreal Engine) 插件、完全開(kāi)放的模型、面向 Vulkan 的機(jī)器學(xué)習(xí)擴(kuò)展，以及基于 PC 的 Vulkan 模擬和分析工具。借助這些開(kāi)放組件，開(kāi)發(fā)者可以在硬件面世前，就能著手將 AI 渲染功能集成到現(xiàn)有的工作流程中。

近期，Arm 又進(jìn)一步推進(jìn)了這項(xiàng)工作，推出面向游戲引擎的 Arm 神經(jīng)圖形軟件開(kāi)發(fā)套件 (SDK)，以及適用于虛幻引擎 5.4 (UE5.4) 的神經(jīng)超級(jí)采樣 (Neural Super Sampling, NSS) 插件。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 是一個(gè)獨(dú)立于引擎的開(kāi)源庫(kù)，屬于 Arm 神經(jīng)圖形開(kāi)發(fā)套件的一部分。該 SDK 可幫助開(kāi)發(fā)者將 Arm 神經(jīng)圖形技術(shù)集成到目標(biāo)游戲引擎中，從而在手游中實(shí)現(xiàn) AI 圖形技術(shù)。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 源自 AMD FidelityFX SDK，確保與其 API 設(shè)計(jì)實(shí)現(xiàn)無(wú)縫兼容。這種相似性降低了開(kāi)發(fā)者的采用門(mén)檻，而其分層模塊化框架則有助于流暢實(shí)現(xiàn)和集成各種 Arm 神經(jīng)圖形技術(shù)，包括 NSS，以及神經(jīng)幀率提升 (Neural Frame Rate Upscaling, NFRU) 和神經(jīng)超級(jí)采樣與降噪 (Neural Super Sampling Denoising, NSSD) 等未來(lái)用例。這樣一來(lái)，開(kāi)發(fā)者就可以?xún)H集成其所需的組件即可。

在面向游戲引擎的 Arm 神經(jīng)圖形 SDK 中（見(jiàn)圖 1），用例提供者 (Provider) 位于 API 層，是 SDK 與游戲引擎之間的主要接口。這些 Provider 通過(guò)將上層 API 與底層組件層連接，開(kāi)放特定用例的功能，例如 NSS 或 NFRU。

圖 1：面向游戲引擎的 Arm 神經(jīng)圖形 SDK 架構(gòu)

組件層包含每個(gè)用例的算法實(shí)現(xiàn)，涵蓋神經(jīng)網(wǎng)絡(luò)推理、著色器邏輯和運(yùn)行時(shí)編排。該 SDK 基于現(xiàn)代跨平臺(tái)圖形 API Vulkan 后端構(gòu)建，可在所有支持的環(huán)境中提供穩(wěn)定的接口。這種設(shè)計(jì)可實(shí)現(xiàn)無(wú)縫集成，簡(jiǎn)化升級(jí)流程，并提升開(kāi)發(fā)者長(zhǎng)期維護(hù)的便利性。

Arm 近期推出了面向游戲引擎的 Arm 神經(jīng)圖形 SDK 的首個(gè)公開(kāi)版本 v1.0.0，該版本內(nèi)置 NSS 和相應(yīng)平臺(tái)的支持。

NSS 是 Arm 神經(jīng)技術(shù)的首款應(yīng)用，通過(guò)機(jī)器學(xué)習(xí)技術(shù)將低分辨率幀優(yōu)化升級(jí)為高質(zhì)量圖像。與基于著色器的傳統(tǒng)超分技術(shù)相比，NSS 利用神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)突破，在移動(dòng)平臺(tái)上同時(shí)提升了圖像保真度與計(jì)算效率。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 為 NSS 提供以下支持：

最新的開(kāi)放 NSS 模型[1]。這是由 Arm 開(kāi)發(fā)的實(shí)時(shí)時(shí)域超級(jí)采樣參數(shù)預(yù)測(cè)模型，并針對(duì)移動(dòng)端 GPU 中的神經(jīng)加速器 (NX) 執(zhí)行進(jìn)行了優(yōu)化。

靈活的優(yōu)化超分比例支持。建議使用兩倍比例，以實(shí)現(xiàn)最佳質(zhì)量和性能，以及專(zhuān)用優(yōu)化。

動(dòng)態(tài)輸入分辨率和運(yùn)行時(shí)形狀推理。在 NSS 上下文創(chuàng)建過(guò)程中加載 NSS 模型時(shí)，可對(duì)輸入分辨率進(jìn)行動(dòng)態(tài)編程。

目前，面向游戲引擎的 Arm 神經(jīng)圖形 SDK 通過(guò) Vulkan 模擬層支持 Linux 和 Windows 平臺(tái)，獨(dú)立的安卓平臺(tái)支持已納入開(kāi)發(fā)路線圖。

適用于 UE5.4 的 NSS 插件

對(duì)于希望在基于虛幻引擎的游戲中實(shí)現(xiàn)即插即用體驗(yàn)的開(kāi)發(fā)者，Arm 此前在 SIGGRAPH 大會(huì)上推出了適用于 UE5.5 的 NSS 插件。近期，Arm 推出了新的適用于 UE5.4 的 NSS 插件，這是首款為基于面向游戲引擎的 Arm 神經(jīng)圖形 SDK 開(kāi)發(fā)的虛幻引擎插件。

適用于 UE5.4 的 NSS 插件通過(guò)調(diào)用 SDK 提供的 API 層，實(shí)現(xiàn)了虛幻引擎的 “UE::ITemporalUpscaler” 接口。該插件重點(diǎn)支持 Vulkan 作為默認(rèn)的渲染硬件接口 (RHI)，并支持多種著色器模型配置文件，包括 ES3.1、SM5 和 SM6。

適用于 UE5.4 的 NSS 插件通過(guò) Vulkan 模擬層支持 Windows 平臺(tái)，獨(dú)立的安卓平臺(tái)支持已納入開(kāi)發(fā)路線圖。

圖 2：適用于 UE5.4 的 NSS 插件

對(duì)于尋求更廣泛虛幻引擎支持的開(kāi)發(fā)者，Arm 正在積極推進(jìn)開(kāi)發(fā)，計(jì)劃在未來(lái)的路線圖中增加對(duì)更多虛幻引擎版本的兼容性。

即刻著手使用

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 和適用于虛幻引擎的 NSS 插件均為開(kāi)源，并在寬松的 MIT 許可協(xié)議進(jìn)行分發(fā)。開(kāi)發(fā)者可以從 Arm 的官方 GitHub 代碼倉(cāng)庫(kù)中獲取最新的源代碼和預(yù)編譯二進(jìn)制文件。

請(qǐng)?jiān)L問(wèn) GitHub 鏈接來(lái)下載相關(guān)資源[2]-[3]，并按照開(kāi)發(fā)者指南[4]和 Learning Path 資料[5]獲取集成指導(dǎo)。

無(wú)論開(kāi)發(fā)者是將該 SDK 集成到游戲引擎中，還是使用適用于 UE5.4 的 NSS 插件，Arm 的開(kāi)源方案都能確保開(kāi)發(fā)者獲得順暢的上手體驗(yàn)。

期待你的反饋

如果各位開(kāi)發(fā)者有功能需求，或遇到任何問(wèn)題，歡迎聯(lián)系 Arm 或在 GitHub[6]上提交問(wèn)題。開(kāi)發(fā)者的聲音對(duì) Arm 至關(guān)重要，有助于為整個(gè)開(kāi)發(fā)者社區(qū)提升 Arm工具。開(kāi)發(fā)者也可訪問(wèn) Arm 開(kāi)發(fā)者網(wǎng)站，探索神經(jīng)圖形開(kāi)發(fā)套件中的各類(lèi)工具。