作者：安謀科技高級軟件技術(shù)經(jīng)理 楊喜樂

2025 年 8 月，Arm 在 SIGGRAPH 大會上發(fā)布了突破性的 Arm 神經(jīng)技術(shù)。這是業(yè)內(nèi)首次將專用神經(jīng)加速器集成到 Arm GPU 中，搭載這項(xiàng)技術(shù)的設(shè)備預(yù)計(jì)將于 2026 年底上市。這一開放、前瞻性的創(chuàng)新首次將 PC 級別的人工智能 (AI) 圖形技術(shù)引入移動設(shè)備，為未來端側(cè) AI 的發(fā)展奠定了基礎(chǔ)。

與此同時，Arm 還推出了全球首個全面開放的神經(jīng)圖形開發(fā)套件。這是一個完全開放且可擴(kuò)展的平臺，旨在為開發(fā)者提供支持。該套件包含虛幻引擎 (Unreal Engine) 插件、完全開放的模型、面向 Vulkan 的機(jī)器學(xué)習(xí)擴(kuò)展，以及基于 PC 的 Vulkan 模擬和分析工具。借助這些開放組件，開發(fā)者可以在硬件面世前，就能著手將 AI 渲染功能集成到現(xiàn)有的工作流程中。

近期，Arm 又進(jìn)一步推進(jìn)了這項(xiàng)工作，推出面向游戲引擎的 Arm 神經(jīng)圖形軟件開發(fā)套件 (SDK)，以及適用于虛幻引擎 5.4 (UE5.4) 的神經(jīng)超級采樣 (Neural Super Sampling, NSS) 插件。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 是一個獨(dú)立于引擎的開源庫，屬于 Arm 神經(jīng)圖形開發(fā)套件的一部分。該 SDK 可幫助開發(fā)者將 Arm 神經(jīng)圖形技術(shù)集成到目標(biāo)游戲引擎中，從而在手游中實(shí)現(xiàn) AI 圖形技術(shù)。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 源自 AMD FidelityFX SDK，確保與其 API 設(shè)計(jì)實(shí)現(xiàn)無縫兼容。這種相似性降低了開發(fā)者的采用門檻，而其分層模塊化框架則有助于流暢實(shí)現(xiàn)和集成各種 Arm 神經(jīng)圖形技術(shù)，包括 NSS，以及神經(jīng)幀率提升 (Neural Frame Rate Upscaling, NFRU) 和神經(jīng)超級采樣與降噪 (Neural Super Sampling Denoising, NSSD) 等未來用例。這樣一來，開發(fā)者就可以僅集成其所需的組件即可。

在面向游戲引擎的 Arm 神經(jīng)圖形 SDK 中（見圖 1），用例提供者 (Provider) 位于 API 層，是 SDK 與游戲引擎之間的主要接口。這些 Provider 通過將上層 API 與底層組件層連接，開放特定用例的功能，例如 NSS 或 NFRU。

圖 1：面向游戲引擎的 Arm 神經(jīng)圖形 SDK 架構(gòu)

組件層包含每個用例的算法實(shí)現(xiàn)，涵蓋神經(jīng)網(wǎng)絡(luò)推理、著色器邏輯和運(yùn)行時編排。該 SDK 基于現(xiàn)代跨平臺圖形 API Vulkan 后端構(gòu)建，可在所有支持的環(huán)境中提供穩(wěn)定的接口。這種設(shè)計(jì)可實(shí)現(xiàn)無縫集成，簡化升級流程，并提升開發(fā)者長期維護(hù)的便利性。

Arm 近期推出了面向游戲引擎的 Arm 神經(jīng)圖形 SDK 的首個公開版本 v1.0.0，該版本內(nèi)置 NSS 和相應(yīng)平臺的支持。

NSS 是 Arm 神經(jīng)技術(shù)的首款應(yīng)用，通過機(jī)器學(xué)習(xí)技術(shù)將低分辨率幀優(yōu)化升級為高質(zhì)量圖像。與基于著色器的傳統(tǒng)超分技術(shù)相比，NSS 利用神經(jīng)網(wǎng)絡(luò)實(shí)現(xiàn)突破，在移動平臺上同時提升了圖像保真度與計(jì)算效率。

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 為 NSS 提供以下支持：

最新的開放 NSS 模型[1]。這是由 Arm 開發(fā)的實(shí)時時域超級采樣參數(shù)預(yù)測模型，并針對移動端 GPU 中的神經(jīng)加速器 (NX) 執(zhí)行進(jìn)行了優(yōu)化。

靈活的優(yōu)化超分比例支持。建議使用兩倍比例，以實(shí)現(xiàn)最佳質(zhì)量和性能，以及專用優(yōu)化。

動態(tài)輸入分辨率和運(yùn)行時形狀推理。在 NSS 上下文創(chuàng)建過程中加載 NSS 模型時，可對輸入分辨率進(jìn)行動態(tài)編程。

目前，面向游戲引擎的 Arm 神經(jīng)圖形 SDK 通過 Vulkan 模擬層支持 Linux 和 Windows 平臺，獨(dú)立的安卓平臺支持已納入開發(fā)路線圖。

適用于 UE5.4 的 NSS 插件

對于希望在基于虛幻引擎的游戲中實(shí)現(xiàn)即插即用體驗(yàn)的開發(fā)者，Arm 此前在 SIGGRAPH 大會上推出了適用于 UE5.5 的 NSS 插件。近期，Arm 推出了新的適用于 UE5.4 的 NSS 插件，這是首款為基于面向游戲引擎的 Arm 神經(jīng)圖形 SDK 開發(fā)的虛幻引擎插件。

適用于 UE5.4 的 NSS 插件通過調(diào)用 SDK 提供的 API 層，實(shí)現(xiàn)了虛幻引擎的 “UE::ITemporalUpscaler” 接口。該插件重點(diǎn)支持 Vulkan 作為默認(rèn)的渲染硬件接口 (RHI)，并支持多種著色器模型配置文件，包括 ES3.1、SM5 和 SM6。

適用于 UE5.4 的 NSS 插件通過 Vulkan 模擬層支持 Windows 平臺，獨(dú)立的安卓平臺支持已納入開發(fā)路線圖。

圖 2：適用于 UE5.4 的 NSS 插件

對于尋求更廣泛虛幻引擎支持的開發(fā)者，Arm 正在積極推進(jìn)開發(fā)，計(jì)劃在未來的路線圖中增加對更多虛幻引擎版本的兼容性。

即刻著手使用

面向游戲引擎的 Arm 神經(jīng)圖形 SDK 和適用于虛幻引擎的 NSS 插件均為開源，并在寬松的 MIT 許可協(xié)議進(jìn)行分發(fā)。開發(fā)者可以從 Arm 的官方 GitHub 代碼倉庫中獲取最新的源代碼和預(yù)編譯二進(jìn)制文件。

請?jiān)L問 GitHub 鏈接來下載相關(guān)資源[2]-[3]，并按照開發(fā)者指南[4]和 Learning Path 資料[5]獲取集成指導(dǎo)。

無論開發(fā)者是將該 SDK 集成到游戲引擎中，還是使用適用于 UE5.4 的 NSS 插件，Arm 的開源方案都能確保開發(fā)者獲得順暢的上手體驗(yàn)。

期待你的反饋

如果各位開發(fā)者有功能需求，或遇到任何問題，歡迎聯(lián)系 Arm 或在 GitHub[6]上提交問題。開發(fā)者的聲音對 Arm 至關(guān)重要，有助于為整個開發(fā)者社區(qū)提升 Arm工具。開發(fā)者也可訪問 Arm 開發(fā)者網(wǎng)站，探索神經(jīng)圖形開發(fā)套件中的各類工具。