Jenny Hsiao
9 min readJul 4, 2019

愛奇藝 (iQIYI) 的 AI 賦能娛樂生態-講座分享

愛奇藝北京總部的外觀(和騰訊舊辦公大樓一樣都位於北京中關村,每天上下班都會看見哈铪)

此篇目的為摘要「愛奇藝iQIYI 的 AI 賦能」講座內容和收穫,要特別感謝我在上海復旦大學修習電子商務與移動商務課程的竇一凡老師,邀請到愛奇藝智能平台部的總監劉俊暉先生於 2019 年 5 月 20 日來到我們課堂介紹愛奇藝的 AI 最新進展。(分享內容是我快刀手打下來的筆記和記憶中的重點,如有疏漏/錯誤請見諒~)

在講述愛奇藝如何使用 AI 技術前,先簡短回顧一下這間公司的概況和內容生產方式:

愛奇藝是由龔宇於2010年4月22日創立的視頻網站,2011年11月26日啟動 “愛奇藝” 品牌並推出全新標志。
愛奇藝堅持 “悅享品質” 的公司理念,以 “用戶體驗” 為生命,通過持續不斷的技術投入、產品創新,為用戶提供清晰、流暢、界面友好的觀映體驗。在2013年5月7日時百度收購PPS視頻業務,並與愛奇藝進行合併,現為百度公司旗下平台。2018年3月29日,愛奇藝在美國上市。

而愛奇藝內容的產生方式主要分為以下列三種為主:

  • PPC (Professionally-produced Content): 視頻網站自己專業生產/採買內容。
  • PGC (Professional Generated Content): 視頻網站以入資分潤的模式和工作室/外部創作團隊合作生產內容。
  • UGC (User Generate Content): 由視頻網站的用户來生成内容。

以下內容將以愛奇藝生產線角度講述 AI 的應用

(如上圖所示分為七個階段)

階段一:賦能創作內容

  1. 智能選角系統:
    利用 AI 算法更精準地匹配選角方與演員的需求,提升自製內容的選角效率。演員只要演過愛奇藝裡的視頻,在企業視頻庫裡都留有相關記錄,導演在新戲選角時可以直接透過以往表現做選擇。(如下圖)
智能選角系統圖示

2. IP 價值評估系統:
此系統會利用深度學習、自然語言處理等 AI 技術多方位對相關的 IP 作品進行價值信息的提取,並對此進行算法建立評分模型,來評估其IP潛在價值(ex. 有多少的市場空間和背後盈利空間),支撐企業做分析評估,實現 IP 價值最大化。(*註:IP 即知識產權的意思,用來改編電視劇、電影的版權素材,均可以稱之為 IP。)

3. 流量預測:
愛奇藝對每部視頻的播放趨勢、流量多寡都要提早一個季度做預測,而 AI 技術幫助愛奇藝對電視劇的流量預測準確率和電影票房的準確率分別達到了88%和81%,這對企業在內容採購上很有幫助。

4. AIWorks 智能制作系統:
此系統可以根據劇本自動搜索素材,智能生成符合某個話題的視頻精華集,並支持不同畫面的不同輸出方式,如橫豎屏效果、自動卡點配樂、台詞集錦等。 (ex. 利用“你瘋了”字眼創造一個短視頻,引起熱潮)

階段二:智能生產(=內容創作完了要如何包裝呈現)

  1. 視頻指紋:
    指紋識別可以排去重覆的視頻,達到版權保護,通過指紋識別技術可以找到了偷到視頻並且在做販賣的人。
  2. 智能審核:
    系統會自動過濾盜版、情色等內容的視頻。
  3. 智能剪編:
    一段視頻生成進入智能剪編後,會自動把片頭、片尾和廣告去掉,只剪取需要的片段。
  4. 智能生成描述關鍵詞
    剪編後的視頻會自動為其生成描述關鍵詞(就像把所有的商品打上標簽一樣,之後根據這個標籤進行推薦和搜索)。
  5. 智能封面:
    視頻完成後系統會自動生成封面和動態海報圖,這功能也可以幫助對剪輯不熟悉的自媒體用戶選取魅力封面圖,提高了海量視頻的分發效率。

階段三:智能標注(=用 AI 算法結果替代人工標註,減少了大量標註人力,提高了視頻生產效率)

  • 智能標籤:
    通過人臉識別、表情識別、聲紋識別、景別識別和動作識別技術,AI 會為視頻裡的不同素材確定相應的標籤(視頻裡面到底有誰、什麼地點、什麼物品),之後剪輯師只要通過標簽搜索所需要的演員、情感、場景等關鍵詞,就可以快速找到相應的視頻片段。(這些標籤也會在 “階段六-智能變現” 時使用到)
    標籤舉例:
    1. 類型標籤效果:舞蹈類、炫技類、美食類
    2. 場景標籤效果:客廳、健身房、山、廚房
    3. 目標檢測效果:物體的品牌是什麼、動物的種類是什麼
    4. 行為識別:揮手、擁抱、打籃球、跑步…

階段四:智能分發(如何將視頻內容被動/主動地推薦給用戶)

  1. 智能搜索:
    愛奇藝甚至還發明了 “以圖搜劇” 的新功能,改變了以往單純以劇名或主演名搜索觀看視頻的傳統模式,也讓視頻搜索更加便捷。
  2. 個性化推薦:
    根據用戶畫像推薦用戶感興趣的視頻。(見下圖)
  3. 泡泡社區宣發:
    泡泡社區是一個全站互動社交平台,以明星、電視劇、電影等各類圈子為基本形態,聚合具有相同喜好和訴求的粉絲。而以社交基因為根本的泡泡社區,也創造了一個泡泡矩陣(聽起來很荒謬的名字 XD),實際上就是一個內容精準行銷的渠道,讓視頻內容透過泡泡社區的互動功能、資源與技術,更加精準地觸達到用戶。
    (題外話:在大陸粉絲經濟是一個當紅話題,有興趣的人可以上網查下)

圖中列出兩個例子:(1)愛奇藝私人影院:會根據觀影記錄推薦用戶沒有看過的且可能最想看的電影,私人影院上線以後,觀看率提高了15%。(2)短視頻聯播:另外一套推薦的方式,因為電影的喜好和短視頻喜好不一樣,短視頻聯播的推薦和用戶的習慣有很大的關係,使用後發現用戶播放時長大量增加。

階段五:智能播放

  1. 熱點預測:機器掃描一集電視劇之後會標註一個熱點,這個熱點會判斷、預測用戶最喜歡看的哪幾個點。
  2. 自適應碼流:
    能夠判斷網速的變化從而選擇最適合播放的碼流。這個功能能讓視頻在當前的網速下自動播放最清晰的內容。(不會再一直lagggg,雖然我在大陸網路常常其差無比….這有待商榷)
  3. 只看他 (TA)
    在愛奇藝 APP 中,只看 TA 這個功能可以使得用戶在觀看視頻的時候,可以選擇只看某個演員或只看某對 CP 的功能,這是 AI 人物識別技術在愛奇藝的一個典型應用。
  4. 這是誰:
    在視頻中看到某個主角不認識時,可以點畫面掃碼他是誰的 qr code 了解詳情。

階段六:智能變現(終於談到如何將上面那些聽起來很炫的應用變成錢了)

  • 個性化廣告投放:
    精準分析用戶畫像,助力品牌精準地投放廣告到目標客群。
  • 情境化廣告創新:
    自動識別明星、劇情、行為、動作、情感、台詞等,讓廣告和視頻內容有關聯,用戶會對廣告更有興趣,也讓品牌悄悄曝光在視頻當中。
  • video in :這可以說是一款有趣的「編輯功能」,視頻制作完成後可以在場景中插入内容,且不會對觀眾造成干擾。(ex. 長達 45 秒甚至 60 秒的可樂插播廣告絕對會讓用戶心煩,但如果是在後製時將視頻某段加入可樂罐,放在原先空蕩蕩的桌子上,聽起來是不是就合理多了哈哈)
  • video out:這技術能夠通過智能算法,進行視頻內物品快速精準識別,並導向購買的規模化操作。這也意味著視頻對用戶而言,將不再僅是娛樂需求的滿足,還將成為獲得消費信息的重要途徑。同時獲得更精準的視頻搜索、推薦服務。數據顯示,“Video out” 商品廣告點擊率與傳統廣告相比提升十倍。(有趣的是,淘寶網上也會因為這樣的廣告方式出現因應的熱搜詞 ex. 某明星風衣服)

階段七:智能交互(前兩項為 AI 在客服上的應用)

  1. 小藝機器人:
    “奇小藝” 是由愛奇藝自主研發的一款智能客服助手機器人,憑借愛奇藝在大數據、NLP、機器學習方面的技術積累,精煉為數以萬計條業務知識庫以及有趣的寒暄語料庫。
  2. 智能在線客服:
    智能客服解答有效率90%,僅智能客服一項,就為公司節約近 200 個客服人員投入。
  3. HomeAI:
    如下圖所示,HomeAI 將技術帶入家庭場景中, 例如奇巴布產品內有功能是系統自動化抽出線搞,讓小朋友自己著色。(又稱為智能漫畫)

4. SmileAR:(AR大家應該蠻熟悉的了XD 在此省略敘述)
在愛奇藝 SmileAR 其中一個應用是「人體姿態點識別」,上面提到的奇巴布產品內有一個奇巴布教室就是利用這技術偵測小朋友跳舞的姿態是否和視頻上所教學的動作一致。

以上就是自己在講座中所學到愛奇藝如何應用 AI 的實際做法了,文末再總結一下本文:

愛奇藝以 AI 為核心的科技創新貫串了企業的生產線,從視頻內容的創作、生產包裝、行銷廣告上,都能夠看到 AI 的蹤影。

最後的最後,WHAT IS AI?

講師給予的一個簡單觀點是「從白盒變成黑盒的過程」就是 AI 的一個展現:

白盒(要看得清清楚楚才知道是隻貓),經過深度學習後,成為黑盒(不需要知道規則就知道是隻貓!)
(*註 深度學習過程:標註-訓練-神經網絡模型-推理)

最後附上愛奇藝北京大廈的照片哈哈,and 希望之後有機會我也能分享一下現在在這附近互聯網公司的實習心得!XD

如果這篇文章對你來說有點收穫的話,請幫我拍拍手,謝謝!(絞盡腦汁寫了很久,拍越多我會越開心!XDD)

Jenny Hsiao

Project Manager | @LiveMe APP | Tech products management | Project Management | Market Strategy