谷歌AI新技能:不用綠幕摳像自動更換視頻背景

加拿大都市网

新浪科技訊 北京時間3月2日上午消息,谷歌AI又學會一項新技能,如果你拍攝自拍視頻,它可以更換視頻背景(摳像);之前我們只能更換靜態照片的背景。

  摳像是一門應用了幾十年的特效技術,不過做起來很費時間,也很複雜,例如,拍攝電影時,導演會讓演員在綠幕前表演,稍後計算機用再用數字特效(比如爆炸的大樓)更換綠屏。但現在,有了3D場景數據(比如iPhone雙攝像頭提取的數據)之後,處理起來就容易很多了。

  谷歌用許多標籤圖像訓練神經網絡,讓神經網絡不斷學習,分辨臉部特徵,比如眼睛、頭髮、眼鏡、嘴等部位的特點,將這些特徵與其它東西區分開來。最終,谷歌開發出一套系統,它可以置換背景,速度很快,能夠跟上視頻的播放速度。數字視頻幀的播放速度約為30fps,在谷歌Pixel 2手機上,新技術的處理速度約為40fps,如果是蘋果iPhone 7,處理速度可以超過100fps。

  想不想試試?抱歉啊,現在只有少數知名YouTube播主才能用,而且這些人還是YouTube Stories用戶。

  谷歌程序員在博文中介紹說:「我們開發了新的技術,它可以幫助創作者替換、修改背景,不需要任何特殊設備就可以輕鬆提升視頻製作價值。」

  神經網絡技術有一個優勢,它不需要知道各種各樣的規定,比如臉有兩隻眼睛,位於鼻子之上,只有一些情況例外,比如從側面觀看時,可能只會看到一隻眼睛,又或者拍攝對象戴了黑色眼鏡。我們只需要用足夠多的照片訓練網絡,照片已經由人貼上標籤,這些人知道它是不是臉,然後神經網絡就會自己學習,掌握特定模式。事實證明,當我們篩選垃圾郵件,預測手機輸入內容時,這門技術很實用。(德克)

新浪新聞

share to wechat