再邋遢都不怕!NVIDIA推人工智慧視訊會議神器(下)

 


再邋遢都不怕!NVIDIA推人工智慧視訊會議神器(下)

NVIDIA推人工智慧視訊會議神器,不用整理家裡的你也能一秒體面上工(下)

本文為該系列的下篇,上篇(Maxine 是如何運作,讓視訊頻寬消耗減少至原本的十分之一)請點此連結

眼神接觸、臉部對齊……人工智慧提升視訊會議的體驗

臉部眼神校正功能:模擬面對面開會

Maxine 還應用了 NVIDIA 在生成對抗網路 (GAN) 的優勢,讓視訊會議服務供應商能為用戶提供各種 AI 功能,讓用戶有真實「面對面」的感受。

例如:「臉部對齊」功能可自動調整臉部角度,讓用戶在參與會議的過程中,看起來像是彼此相對、「眼神校正」能模擬眼神接觸、校正會議參與者的視線。這些功能能幫助與會者保持互動,無需一直盯著攝影機。

0628-3.jpeg

替身與虛擬背景:人再邋遢、家中再亂都能體面開會!

除此之外,視訊會議服務的供應商也能增加替身功能,讓用戶選擇自己的動畫當替身,能即時地透過用戶的聲音、情緒音調,自動生成逼真的動畫。

除了替身功能,Nvidia 也在今年六月 CVPR 大會,發表 Maxine 平台最新的「Vid2Vid Cameo」的深度學習模型:採用生成對抗網絡(GAN)的技術,只需將一個人的 2D 照片合成至談話影像中,就能輕易地打造數位虛擬化身、節省視訊頻寬,並能夠進行人臉辨識等強大功能。如此一來,就算鏡頭另一端的用戶衣衫不整、頭髮凌亂也不怕了!只要你在會議前拿出一張自己穿正式衣服的照片,就能讓穿著得體的自己當成替身參與視訊會議喔!

假如家中小孩太吵、或是燈光太暗的話,也不用怕!Maxine 的人工智慧技術可以移除背景噪音、並且提供超高解析度的畫面,也提升光線較暗時的清晰度,甚至為臉重新打光!

0628-4.png


若上述的都不行的話,你也可以乾脆直接更換成虛擬背景!

0628-5.png

Jarvis 對話式 AI:即時翻譯、會議記錄

透過 NVIDIA 對話式人工智慧功能 Jarvis SDK,開發人員可藉由整合使用虛擬助手,在視訊會議服務中進行語音辨識、語言理解與語音生成的功能。虛擬助手可做紀錄、設置執行項目,並以人聲回答問題,也能提供即時翻譯、即時字幕和逐字稿等,有助與會者了解會議中正在討論的內容。

0628-6.jpeg

Maxine 平台整合多個 NVIDIA 人工智慧 SDK 和 API 技術。除了上述的 Jarvis 外,還有強化音訊和視訊功能的  NVIDIA DeepStream ,並以 TensorRT SDK 執行高效能深度學習推理。官方提到,Maxine 平臺的人工智慧運算,因為都在雲端處理,所以終端用戶不需升級任何硬體,就能獲得這些功能。

以下為 Maxine 的串流視訊 AI SDK 展示影片:

 

 

參考文章:

3款人工智慧彩妝,讓你在家就可試妝、立馬客製粉底液!

人工智慧成最強替身演員 還可能得奧斯卡?

隱私是基本人權!蘋果新功能「App 追蹤透明度」讓 Facebook 急跳腳?

AI判定洋蔥照片「太性感」、乳癌文宣為色情,FB人工智慧出包!

首支南韓人工智慧KPOP女團誕生!網友:怕

國小架人工智慧虛擬電廠,更省錢環保!

人工智慧開農場啦!!連種菜養牛都能科技化!!(下) 

 

全球首屆元宇宙時裝周,複刻20年前的失敗?

全球首屆元宇宙時裝周, 遇到瓶頸 複刻20年前的失敗? 目錄 元宇宙時裝周參與盛況 叫好不叫座?新興技術的行銷瓶頸 由虛擬實境平台 Decentraland 所舉辦的「元宇宙時裝週」(Metaverse Fashion Week...