愛奇藝全球首發互動視頻標準IVG,融合多種AI技術

5月9日,在愛奇藝世界·大會智能視頻科技論壇上,愛奇藝展示了包括愛創媒資系統、AIWorks智能製作系統等過去一年來在“AI+娛樂”領域的多項成果,同時發佈全球首個互動視頻標準,並計劃推出協助互動視頻生產的互動視頻平臺,旨在爲內容創作者便捷高效地打造高品質的互動視頻。愛奇藝首席技術官兼基礎架構和智能內容分發事業羣總裁劉文峯表示,用戶對互動的追求是無限的,互動視頻標準的提出能夠大大降低互動內容製作的門檻,同時,極大提升用戶再享受互動內容時的體驗。此外,愛奇藝還發布了VR戰略和三款VR新品,表示5G將讓VR迎來爆發期。最後在5G+AI智能論壇上,工業界還與學術界共同探討了在5G時代下,結合AI技術將會爲各行各業帶來的想象空間。

當天,愛奇藝公開展示了其愛創媒資系統、AIWorks智能製作系統和ZoomAI智能增強系統。早前,AI前線在《在虛擬主播上線!多模態將改變人機交互的未來》一文中就對愛奇藝在產品矩陣中落地AI技術做過比較全面的總結,彼時愛創媒資系統和AIWorks智能製作系統還因爲保密原因未能公佈。今天,愛奇藝謝丹銘對這兩款產品做了簡單的介紹。

AI技術在愛奇藝的應用

愛創媒資系統

愛奇藝的內容主要來自三個部分,一部分是傳統的採買,另外一部分是其自制劇,以及愛奇藝號等原創用戶產生的一些內容。對於自制部分,愛奇藝採用AI打造了一個愛創媒資系統。

在智能生產環節,愛奇藝的愛創媒資系統能夠完成自動合版、素材檢索、扒詞、成片唱詞、發行任務,人力需要耗費數天,比如兩小時的綜藝後期製作往往需要8-10天,而用愛創媒資系統,通過身份識別、表情識別、景觀識別等AI技術,類似工作可縮短至數分鐘,效率提高20%-30%。同時,愛奇藝還能用語音識別技術來輔助產生字幕進行扒詞,今年的《青春有你》、《我是唱作人》等都已經落地了愛奇藝愛創媒資系統。

AIWorks智能製作系統

世界各地每天都在產生豐富的視頻素材,通過愛奇藝智能製作系統AIWorks,就能夠直接生產內容。還有一些素材可以通過愛奇藝號供二次創作使用,產出的短視頻之後會進入到愛奇藝頻道頁、短視頻、泡泡社區等,用AI自動生成視頻。

ZoomAI視頻增強系統

愛奇藝的視頻增強系統ZoomAI利用超分辨率、去噪銳化、色彩增強、去除劃痕、智能插幀、畫質評價等AI算法對影視作品進行畫質增強。今年3月26日,愛奇藝發佈了中國經典電視劇修復工程。在廣電總局的指導下,與中國電影資料館合作,修復了片庫中的50部電視劇。

AI手語主播


2018年12月,愛奇藝發佈了全球首款AI手語主播,那時候的AI手語主播還是一個以娛樂爲主的卡通形象。在論壇上,愛奇藝發佈了AI手語主播新版本,新版本的形象更貼近真人,播報內容也以嚴肅新聞爲主,在技術上也進行了迭代優化,之前是一個卡通的形象“奈奈”,主要是手勢識別,之前做到幾十個詞彙,現在能做到上千個詞彙。技術迭代優化後,增加了眼神、神態表達的技術,能夠把人的一些情感表達出來,讓主播看起來更加生動。

此外,愛奇藝產品中落地AI技術的產品還包括創可貼廣告(根據內容實時插入個性化廣告)、前情提要廣告、個性化推薦、個性化海報、蒙版彈幕、HomeAI 智能交互平臺、智能跳轉鏡頭等。
發佈全球首個互動視頻標準IVG
在會上,愛奇藝還發布全球首個互動視頻標準IVG(Interactive Video Guideline),並計劃推出協助互動視頻生產的互動視頻平臺IVP(Interactive Video Platform)。

隨着觀衆對於觀影的要求越來越高,觀看一段視頻,若觀衆能夠與視頻進行互動,會產生沉浸式的體驗,連接內容的消費者和內容的創造者,這是互動視頻的最大價值,也是愛奇藝制定互動視頻標準IVG的初衷。

在製作即將上線的首支互動視頻《她的微笑》的過程中,愛奇藝產品、技術和內容團隊遇到了很多問題,踩過了很多坑,他們把這些經驗總結起來形成了IVG。

在互動視頻中,愛奇藝同樣將AI技術融合進去,這就是IVG的能力之一——X因子,即互動視頻會根據用戶在觀影的整個過程中的每一次選擇,包括用戶每一次觀影實際的情況,來爲用戶推出只有自己猜能看到的故事情節或故事選項,這些只有這些用戶自己能看到,而且存在巨大的不確定性,這就爲用戶創造了全新的互動體驗。

5G+AI給視頻行業帶來新機遇

在5G+AI的圓桌論壇上,工業界和學術界還探討了在5G時代下,結合AI技術能夠爲行業帶來的影響。

我們都知道,5G意味着更寬的帶寬,更快的速度和更好的體驗,同時也能讓目前很多無法實現的目標成爲可能。另一方面,AI技術越來越多地應用於日常生活中,幾乎每個人都能感受到它帶給人們生活的改變。這兩項炙手可熱的技術帶給視頻行業無限想象,那麼,究竟它們結合在一起會產生什麼神奇的效應呢?

對於這個問題,愛奇藝副總裁謝丹銘表示,VR目前還處於很初級的階段,還有很大的發展空間。在他的想象中,VR的未來是我們每個人會有兩個世界,一個是現實世界,第二個是虛擬世界。這兩個世界唯一的焦點就是我們自己。而這個未來背後其實有兩個核心的技術支撐,一是5G,二是AI,AI是一個非常關鍵的技術。另外,這個虛擬世界一定是存在於雲端而不是在終端的。我們通過一些設備來獲取大量的數據,在雲端形成一個巨大的架構,而這需要5G這樣的技術,這樣纔有可能在虛擬世界裏生活。

“虛擬世界背後的基礎支撐技術,就是5G和AI,這是我想象當中的未來。”謝丹銘說道。

北大計算機所深度視頻研究室主任孫俊則認爲,希望5G+AI能夠將視覺、觸覺、聽覺等感官結合起來,學術界和工業界共同努力,真正實現真切地感受到某個遠在千里之外的東西就近在眼前,讓人有身臨其境的感覺。

相信5G的價格是很多普通人最關心的問題之一,那麼5G用起來會更貴還是更便宜呢?對此,中國聯通5G創新中心總經理馮毅說道:“一方面要看設備成本,二是還要看未來AI技術是否能提高運營商的運營效率,降低運營商成本。”

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章