星期五, 3月 2

Google 利用 AI換視頻背景,少數YouTube用戶先體驗

Google最近將人工智能技術運用到了視頻主體和背景的分辨上,在速度達到100 fps的同時,還能夠保證相當自然的特效體驗。雖然摳圖換背景是一項有著幾十年曆史的老技術,但在通常情況下,這種工作是相當費時費力的——尤其在需要配合綠幕演出的超級英雄主題的好萊塢科幻大片上。計算機在後期製作時,可以將綠幕整個替換成爆炸的建築物等背景。但如果配合iPhone X等能夠記錄3D感知數據的攝像頭,事情就變得更加簡單了。



Google AI軟件可以檢測中的物體和變更背景

不過,Google 採用的是另一種方法,即通過標籤圖像來精心訓練一個神經網絡,幫助它學習如何正確地在各種背景元素中分辨出面部特徵,比如眼睛、頭髮、嘴巴等。

最終結果是,該公司開發出了一套能夠跟上視頻幀速、快速切換背景的系統。常規視頻的幀速為30 fps,但Google在Pixel 2上達成了40 fps(iPhone X更是超過了100 fps)。



Google 在視頻分離技術中運用了機器學習的方法

遺憾的是,這項技術尚未全面對外開放,初期只有少數一群YouTube 用戶能夠體驗到(其提供了一種分享Snapchat 風格的短視頻的能力)。

如果你對背後的技術細節更感興趣,可以翻閱Google在本週四發布的一篇博客文章(Mobile Real Time Video Segmentation)。

沒有留言: