聯發科技分享手機平台在遊戲繪圖與相機影像處理的部分技術趨勢
聯發科技在 5G 時代推出天璣系列行動平台,擁有良好效能與多項創新設計,針對現代使用者重視的遊戲繪圖與相機影像,特別將部分技術與大家分享。
現代人幾乎離不開智慧手機,它擁有的便利性、資料儲存能力等,讓它成為現代生活中極佳的數位工具。隨著各種技術的演進,手機的功能也越來越強大,而其中許多的功能都是依靠所採用的晶片組或稱行動平台給予。現今行動裝置的行動平台通常在製程、功能改進,或是重大新規格變動時會推陳出新。
聯發科技(MediaTek)是目前全球的行動裝置平台主要供應商之一,在全球進入 5G 行動通訊時代時,它所推出的天璣系列行動平台擁有創新的運算、遊戲、影像、多媒體、通訊科技等,為消費者提供不同的選擇,市占率也有不錯的表現。
華碩 ROG Phone 6D 系列手機採用聯發科技天璣 9000+ 平台擁有極佳的性能表現
現代使用者對智慧手機的要求,除了高運算性能之外,相機影像處理與遊戲性能也都有不同的需求。聯發科技推出的產品已在多家手機品牌的高階機種中使用,像是 Vivo 的 X80 旗艦影像手機與華碩的 ROG Phone 6D 電競系列手機,都有令人驚艷的表現。
隨著手機遊戲大受歡迎與性能的提升,手機的繪圖性能也進步許多。面對遊戲技術由雲端走向手機的趨勢,如何突破算力、GPU 架構以及溫度限制等,一直都是晶片設計的重點。行動 GPU 的特性分類為能效導向、性能導向及超級算力。通常會選擇將能效導向做為主要重點,以滿足行動平台續航的需求,再嘗試堆疊性能,提升算力。
去年聯發科技預測全域性光照技術的應用,而今年則大膽預測從 GPU 的開發進展,光線追蹤技術的應用範圍將會持續擴展。今年一月 vulkan 1.3 標準發布後,已經將光線追蹤標準正式納入,這也代表 GPU 相關領域導入光線追蹤技術速度以及應用類型會加快。行動光線追蹤技術已經不再專屬遊戲主機或 PC 的技術,相同的體驗正逐步向手機、作業系統介面和 AR、VR、元宇宙等領域快速發展。
然而行動 GPU 必須同時追求品質並突破資源限制,未來旗艦 GPU 技術中,光線追蹤將是呈現最自然、富沉浸感畫面不可或缺的技術。與生態系合作達到的64位元運算、動態調整降載技術,則是提升資源使用效率的必備技術。
行動平台中的繪圖處理器是採用 Arm 最新的旗艦 GPU Immortalis-G715,它可支援硬體級行動光線追蹤以及更複雜、更真實的場景應用,為行動遊戲等應用帶來更逼真、更具沉浸感的使用體驗。硬體加速能達到即時光線追蹤效果,包括柔和陰影、反射效果和全域性光照等,可提升各種場景畫質,成為旗艦機種不可或缺的技術配備。
因應行動遊戲等應用的發展趨勢,聯發科技推出行動 GPU 增效方案,針對 GPU 性能提升,搭配 GPU 周邊技術,實現保持系統資源平衡的基礎上,滿足高複雜度內容的計算需求。將從性能和能效提升、生態發展、平台軟體強化、自行開發演算法等不同方向發展。
相機功能是更多人注重的手機功能之一,除了影像感測器與鏡頭光學元件之外,運用不同演算法或是人工智慧來強化影像表現也成為現代新手機的發展重點。現在的旗艦電視晶片使用分區的影像處理來取代單一全格的影像處理,可提供更細緻的畫質增強。藉由 AI 搭配區域影像強化處理技術,能夠快速、省電地呈現細膩畫質,因此將數位電視的影像處理技術應用在手機的顯示及相機領域,將是未來的發展趨勢。
透過人工智慧調整畫質也是發展重點,其中 AI 圖像語意分割 (AI image semanticsegmentation) 是圖像處理和機器視覺技術中關於圖像理解的重要一環,透過強大 AI 及時識別顯示內容,將畫面切割成不同物件,再針對物件主體和背景特性,分別提升其最適對比及清晰效果。導入AI 圖像語意分割功能,可有效率地協助系統讀懂圖像內容,達到自然最佳的圖像處理。
運用 AI 圖像語意分割不僅可針對不同物件做局部的影像加強或特效處理、降低所需運算量、降低耗能,還能疊加更多算法,快速提升影像效果,是手機影像技術的重要利器。
未來新的智慧手機將可利用 AI 等技術提供更好的影像處理能力,提供更具真實的影像。