NVIDIA

這就是 AI 直播!NVIDIA RTX Broadcast 引擎即時綠幕, AR 臉部特徵/追蹤與特殊濾鏡

NVIDIA 似乎要前進最大的直播盛事 TwitchCon,並帶來透過 NVIDIA RTX Broadcast 引擎,所帶來的 AI 直播,可幫助玩家進行綠幕去背、AR 臉部追蹤 / 特徵,以及將名畫套用成為畫面濾鏡等功能。

簡單來說,NVIDIA RTX Broadcast 引擎,借住 GeFroce RTX 顯示卡當中的 Tensor Cores 來加速這種 AI 驗證功能,而且可達到即時處理運算,並且無須任何額外的硬體設備,只要你的直播電腦有安裝 RTX 顯示卡(或筆電)搭配一般視訊鏡頭即可。

NVIDIA RTX Broadcast 引擎 SDK 包含以下三種 AI 驗證功能:

  • RTX Greenscreen 綠幕,即時背景移除的功能,也就是透過 AI 辨識臉部與身體,並將額外的影像去背,而在影片展示時亦可將遊戲畫面當作背景使用;各位直播主,跟你的實體綠幕說掰掰吧!
  • RTX AR,透過 AI 進行臉部辨識、特徵辨識,甚至可導入 3D 模型,即時的展示 AR 3D 人物於直播當中。
  • RTX Style Filters,這絕非一般濾鏡,玩家可指定一副名畫,並將這名畫的化風、顏色做為濾鏡套用至視訊鏡頭當中,例如直播遊戲時透過 RTX Style Filters,將視訊鏡頭套用遊戲風格,如此一來可進行更個性化的直播。

 

而 RTX Broadcast 引擎,將支援 OBS、XSplit、Huya、Douya 與 Streamlabs 等直播串流軟體,而這個月將會推出此更新的包含 Twitch Studio、Discord 與 Elgato。

小編滿喜歡 RTX Greenscreen 與 RTX Style Filters 的功能,但實際效果與需要佔用多少的 GPU 資源,以及適合單機 RTX 直播 + 遊戲的使用模式,還是要建立雙機直播來處理這即時 AI 的效果,就等 SDK 更新後在來測試了。

 

source: nvidia.com

延伸影片閱讀:  
Previous post

TEAMGROUP 推出MP33 M.2 PCIe 固態硬碟及Full-HD錄製拍攝專用Classic SD 記憶卡

Next post

【10/4 抽】ANTEC Striker 迷你 ITX 開放式機殼 XF LIVE 隨堂考

The Author

sinchen

sinchen

我是 Sinchen。