9月8日,Arm在上海舉行的Arm Everywhere China年度大會上推出第二代移動終端計算子系統CSS for Mobile 2。
這套新平台裏,最值得關注的變化發生在GPU。
Arm首次在Mali GPU中集成專用神經網絡加速器。新發布的Mali G2-Ultra NX可以讓部分神經圖形工作負載直接在GPU內部完成。
這並不是Arm一家在做。9月2日,高通公布了Adreno Neural Fusion技術,在下一代Adreno GPU中加入專門用於AI計算的Matrix Cores。
高通、Arm先後把專用神經計算能力塞進GPU,這背後是移動GPU的競爭邏輯正在發生變化。過去,AI計算更多由SoC裏的獨立NPU承擔,GPU主要負責圖形渲染。但隨着光線追蹤、AI超分、幀生成等技術開始進入移動遊戲,AI正在直接進入圖形處理本身。
Mali G2-Ultra NX就是Arm對這一變化的回應。
這款GPU支持三類神經圖形技術:NSS主要用於神經超級採樣,NFRU用於通過AI生成中間幀提升幀率,NSSD則將超級採樣和降噪結合,面向光線追蹤等更復雜的場景。
據Arm介紹,在神經圖形工作負載下,Mali G2-Ultra NX最高可以實現4倍的每瓦性能提升。
傳統圖形性能也同步提高。Arm給出的數據顯示,新一代GPU在非AI遊戲內容中的性能最高提升14%;結合NFRU等神經圖形技術,可以支持最高120FPS的持續移動遊戲體驗。
這背後其實是一筆新的算力賬。手機的功耗和散熱空間有限,GPU很難無限增加傳統計算規模。相比把每一幀畫面都完整渲染出來,通過神經網絡重建部分畫面、生成中間幀,可以用更少的傳統計算換取更高的畫質和幀率。
但這最終還是要看遊戲引擎等廠商是否「買單」,Arm已經開始補這一層生態。
由Arm與Sumo Digital聯合開發的《光影新生》,率先展示了Mali G2-Ultra NX在神經圖形上的實際效果。
騰訊遊戲公共技術線正在把Arm神經網絡技術接入由AI驅動的遊戲中台Magic Dawn,Unity中國也將相關能力原生集成進團結引擎。
具體的遊戲方面,網易《燕雲十六聲》正在把Arm神經網絡技術接入彌賽亞引擎,並計劃今年向玩家推出支持NSS的版本。《燕雲十六聲》引擎團隊負責人周克利表示,該遊戲將成為首批搭載Arm神經網絡技術的遊戲之一。
騰訊則與Arm在《暗區突圍:無限》中進行NSSD技術演示,通過神經超級採樣和降噪改善複雜圖形場景;疊紙《無限暖暖》也正在推進NSS技術集成。
Arm能否推動Mali G2-Ultra NX進入更多中國廠商中,市場正在持續關注。