聯發科技(MTK)近期即將推出第二個世代的5G晶片系列,新款產品在各項技術效能上都力求精進,希望能延續過去一年的好成績,持續在5G行動裝置維持領先的態勢,在AI與遊戲技術的發展上,聯發科技AI處理器APU強調混合精度優勢,靈活運用整數精度與浮點精度運算;在遊戲體驗部分,也將導入光線追蹤、遊戲超高解析度成像以及全域性照明技術等。
AI多媒體已經成為行動平台上的主流應用之一,聯發科技計算與人工智慧技術事業群總監吳驊表示,該公司AI處理器APU可進行AI人臉偵測、AI高動態範圍影像、AI雜訊抑制、AI景深、AI快門、AI白平衡、AI物體追蹤、AI多人虛化、AI串流影音畫質增強等多種AI拍照和影像應用成為可能。
在AI的趨勢和挑戰部分,吳驊指出,拍照、影片、串流影音、遊戲等高頻應用場景中,相比AI計算能力最大值,APU有效算力才是真正AI運算的能力,而每瓦有效AI性能才是提升使用者體驗與長時間穩定使用的關鍵,這是真正看得到用得到的指標,不是無法發揮的總算力(CPU+GPU+APU)。
聯發科技天璣系列5G行動平台的AI技術將涵蓋拍照、錄影、顯示、遊戲等旗艦手機關鍵的應用場景,以APU處理器能效架構並搭配NeuroPilot,提供platform-aware工具鏈和優化的軟體層來提升有效AI算力,也就是結合硬體、軟體滿足終端更多樣的AI應用需求,以高效能為使用者帶來更好的AI體驗。
在遊戲部分,相關技術不斷升級在聲、光、觸等提出沉浸式遊戲體驗需求。手遊技術演進,仰賴晶片、終端系統、周邊元件的整體搭配。晶片廠商提供先進的製程技術,最新的運算架構以及任何跟性能、功耗所需要的基礎平台功能布建;手機廠商則著重在手機系統上的元件需求,例如高刷新率、電池、儲存、觸控等周邊;內容開發者在手機平台上擴展遊戲特效及遊戲性能優化。聯發科技無線通訊事業部技術規劃總監李俊男認為,以上三者相互合作,可以提升使用者的體驗。
從不同的遊戲類型來看,聯發科技研究歸納出遊戲類型的玩家追逐著共同的遊戲體感,李俊男說,包含流暢不發燙、看得舒服(才能玩得更久)、好聽有臨場感、畫質擬真沉浸感,轉化成技術指標後,就包含了聲音、觸控、顯示、聯網等的各類低延遲指標,也變成聯發科技技術開發的目標,包含如何布建高影格率高畫質的平台需求,以及各類跟低延遲相關的周邊元件與晶片之間的深度結合。
針對手遊技術趨勢的預測來看,手遊內容商因為新世代遊戲機及Vulkan的流行,旗艦手機的性能拉高,可能會有三大的技術需求為:光線追蹤、遊戲超高解析度成像,以及全域性照明。隨著遊戲技術由PC走向手機發展,行動平台性能與遊戲內容的不斷升級勢必將加快行動遊戲體驗的顛覆式躍進。聯發科技也發展基於Vulkan擴展的行動光線追蹤SDK解決方案,與遊戲廠商共同實現行動端即時光線追蹤技術的演示。
聯發科技推出的行動端光線追蹤SDK解決方案提供了創建核心光線追蹤功能的途徑,包括路徑追蹤、螢幕空間光線追蹤陰影、多重反射和任意表面反射等,並且相容Khronos定義的產業圖形標準,可讓PC遊戲開發人員能夠遷移到移動平台,為行動裝置帶來更逼真的沉浸式遊戲體驗。