NVIDIA

NVIDIA推出視頻會議平台超低帶寬且支持多項AI雲處理

今日,NVIDIA宣布推出一款名為NVIDIA Maxine的視頻會議平台,據稱該平台將允許開發者利用NVIDIA的雲端AI處理能力,提供諸如超分辨率、噪聲消除、面部優化、實時翻譯等AI功能,並且所需帶寬極低。
在官方的視頻演示中,NVIDIA介紹了該視頻會議平台的多項功能,除了我們常見的背景替換、環境噪音消除、虛擬面部追踪等功能外,還有多項創新功能出現。比如面部對齊、照明調整、目光對準和實時翻譯,它們都基於基於AI雲端建模,為視頻中的人物實現了常規條件下不可能的處理。

 

S0cdf7fa1-5d81-4df0-86e7-88e6420109a0.png
不僅提高了分辨率還消除了噪點優化了面部光照並進行了目光對準

 

Sc00b59bb-c0e7-4d54-861b-4a92c5858f07.png
面部調整可以通過AI建模使人物在視頻中調整頭部角度始終正對鏡頭
 

 

此外,利用AI的視頻壓縮技術,NVIDIA的視頻會議平台運行所需的帶寬也大幅減少。就30FPS的H.264視頻而言,常規來說其所需帶為2918KB/s,但在NVIDIA的平台下,所需帶寬將被縮小至十分之一,也就是所292KB/s即可正常視頻。

 

Sf2797316-89e2-4f49-aa66-c9033963a43f.png

 

NVIDIA表示,該壓縮功能基於AI在雲端重建了視頻者的面孔,類似我們常見的DeepFake所使用的技術。軟件不再傳輸整個屏幕的像素,而是只需傳輸面部關鍵點即可在視頻端生成整個面部。、
此次NVIDIA大舉進軍視頻會議平台,一方面是結合現實來看視頻通話確有市場,另一方面則是要繼續擴大自身在雲計算領域的影響力。該技術並非消費者可以直接使用,而是面向開發者提供的平台。目前僅有通信公司Avaya宣布合作,NVIDIA此舉能否成功還要看後續與其它公司合作的進展。

 

s_fcae22b2c4a04a70887a32af3ab23c65.jpg
延伸影片閱讀:  
Previous post

ASRock A520M-ITX/ac 主機板,A520 ITX 入門好選擇|EP.107

Next post

Intel預計在2021年3月發布第11代Core Rocket Lake-S系列處理器

The Author

Alice

Alice