在线观看www成人影院-在线观看www日本免费网站-在线观看www视频-在线观看操-欧美18在线-欧美1级

0
  • 聊天消息
  • 系統消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發帖/加入社區
會員中心
創作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內不再提示

AVA新技術讓劇照清晰又好看

LiveVideoStack ? 來源:未知 ? 作者:楊鑫 ? 2018-03-06 15:04 ? 次閱讀

電影、劇集等視頻的創作、生產、分銷等環節已經可以通過算法優化提升效率。Netflix的AVA平臺可以自動的甄選最有代表性的劇照,從而針對不同人群推送最能打動觀眾的劇照。

在Netflix公司,無論是內容平臺工程師團隊,還是全球產品創意團隊都知道,觀眾在尋找新的節目和電影觀看時,封面插圖扮演著非常重要的角色。我們可以透過封面插圖,揭示故事的獨特元素,而這些元素將我們的觀眾與不同的角色和故事線索聯系起來。我們為此感到很自豪。隨著我們的原創內容不斷增多,我們的技術專家的任務是尋找新的方式來處理不多擴展的資源,并使我們的創意可以擺脫不斷增長的令人厭煩的數字宣傳需求。其中的一個方法是直接從我們的源視頻中采集靜態圖像幀,以提供更加靈活的原始插圖來源。

商業案例

宣傳劇照是直接從源視頻內容中獲取的靜態視頻幀,用于擴大Netflix服務的標題范圍。在一個一小時的新劇集中,有近86,000個靜態視頻幀。

通常來說,這些宣傳劇照是由影片的策劃人或編輯人工選擇的,他們需要對打算呈現的源內容有深入的了解。通過A / B測試我們了解到,通過盡可能多地變換各種不同的標題,我們可以有效地推動預期和意外受眾群體進行更多地觀看。說到標題藝術,我們喜歡測試一個標題的許多藝術表現形式,以便為正確的觀眾找到“正確的”作品插圖。雖然這為創新和測試提供了一個令人興奮的機會,但它同時也提出了一個非常嚴峻的挑戰,即在我們不斷增長的全球內容目錄中的每個標題上實踐這種體驗。

AVA

AVA是一個工具和算法的集合,旨在從我們服務的視頻中提取高質量的圖像。平均一個電視節目(約10集)包含近900萬個總幀數。要求創意編輯們從許多視頻幀中有效篩選出來一個能夠吸引觀眾注意力的視頻幀是乏味并且缺乏效率的。我們著手構建了一個工具,能夠快速有效地識別Netflix服務上哪些幀能夠最佳地表達主題和標題。

為了實現這個目標,我們首先提出了客觀信號,它可以促使我們使用幀注解來衡量視頻的每一幀。因此,我們可以收集視頻的每個幀的有效表示。隨后,我們創建了排序算法,使我們能夠對符合審美、創意和多樣性目標的視頻幀子集進行排序,以準確地為我們產品的各種畫面呈現內容。

由AVA提供的備選圖像

從源視頻到編輯備選圖像的高級階段

幀注解

作為我們自動化流水線的一部分,我們在視頻的每個幀中都處理和注釋不同的變量,以便最好地得出幀的內容,并理解該幀對于故事是否重要。為了進行橫向擴展,并為不斷增長的內容目錄提供可預測的SLA,我們利用Archer框架更有效地處理視頻。Archer允許我們把視頻分成更小的可以并行處理的視頻塊。這使我們能夠通過提高視頻處理流水線的效率來擴展規模,并允許我們將越來越多的內容智能算法集成到我們的工具集中。

通過一系列計算機視覺算法處理一段內容中的每一幀視頻,以收集客觀幀元數據、幀的潛在表示,以及這些幀所包含的一些上下文元數據。我們處理和應用到視頻幀的注解屬性大致可以分為三大類:

視覺元數據

通常這些屬性是客觀的、可測量的,并且主要包含在像素級。視覺屬性包括亮度、顏色、對比度和運動模糊等等。

我們在幀級捕獲到的一些視覺屬性的例子。

上下文元數據

上下文元數據由多個元素的組合組成,這些元素被聚合以從幀的角色、對象和攝影機的動作或移動中獲得含義。下面是一些例子:

人臉識別。使用面部特征跟蹤、姿態估計和情感分析技術 —— 這使我們能夠估計該幀中主體的姿勢和情緒。

運動估計—— 這使我們能夠估計特定鏡頭中包含的運動量(包括攝影機運動和主體運動)。這使我們能夠控制諸如運動模糊之類的元素,以及識別產生高質量靜止圖像的攝影機移動。

攝影機拍攝識別—— (例如,近距離拍攝與移動攝影車拍攝)這提供了對電影攝影師意圖的洞察,使我們能夠快速識別并顯現出攝影師選擇的體裁風格,以提供對主題表達的情緒、基調和流派的更深入洞察。

對象檢測—— 道具和動畫對象的分割檢測使我們能夠找到該幀中重要的非人類主體。

面部特征和姿勢估計的例子; 我們用一些因子來檢測幀特征,發現有令人信服的面部表情出現。

用于預測攝影機運動的光流分析示例,以估計Black Mirror的拍攝手法(縮小和平移鏡頭)。

構圖元數據

構圖元數據是指我們根據攝影、電影拍攝和視覺美學設計中的一些核心原理確定和定義的一組特殊的啟發式特征。有一些構圖的基本原則:三分法原則、景深原則和對稱原則。

對象檢測和語義分割的例子,以識別三分法美學的前景對象。

圖像排名

在給定視頻中的每一幀都經過處理和注解后,下一步就是通過一個自動藝術品流水線從這些幀中選出最佳的候選圖像。這樣,當我們的創意團隊準備好開始一段內容的工作時,他們會自動提供一個高質量的圖像集供您選擇。下面,我們概述一些我們用來為給定標題提供最佳圖像的關鍵考慮元素。

演員

演員在藝術品中起著非常重要的作用。我們確定給定情節的關鍵角色的一種方法是利用臉部聚類和角色識別的組合來對主要角色,而不是次要角色或額外角色進行優先順序。為了達到這個目的,我們訓練了一個深度學習模型,從所有符合幀注解的候選幀中追蹤面部相似性,以找到并排序該標題的主要演員,而不知道該劇演員的任何情況。

除了演員重要性之外,我們還會考慮演員的姿勢,面部標志以及角色的整體位置。

Wynona Ryder出演Joyce Byers時的幀排名和最佳選擇范例。

由于次優的面部表情、姿勢和動作模糊而排名較低的圖像的示例

幀分類

創意和視覺分類是一個非常主觀的學科,因為有很多不同的方式來感知和定義圖像的多樣性。在該解決方案中,圖像分類更具體地指的是算法捕捉在單個電影或情節中自然發生的具有啟發式變化的能力。在此過程中,我們希望為設計師和創意人員提供一個可擴展的機制,以便快速了解哪些視覺元素最能代表主題,以及哪些元素無法準確代表主題。我們在AVA中引入的一些視覺啟發式變量為一個標題提供了不同的圖像集,包括攝影機鏡頭類型(遠景vs中景)、視覺相似性(三分法則,亮度,對比度)、顏色(最突出的顏色)和顯著圖(識別負面空間和復雜度)。通過結合這些啟發式變量,我們可以基于定制矢量對圖像幀進行有效聚類后再分類。此外,通過合并多個向量,我們能夠構建一個多樣性指數,針對某個特定情節或電影的所有候選圖像進行評分。

AVA的鏡頭檢測分集的例子; (左)中景,(中心)特寫,(右)極端特寫。

成人圖像過濾器

考慮到內容敏感度和受眾成熟度等原因,我們還需要確保排除了包含有害或令人反感元素的幀。編輯排除的標準示例,比如: 性/裸露、文字、標志/未經授權的品牌,以及暴力/血腥。為了降低含有這些元素的幀的優先級,我們將這些變量中的每一個的概率作為向量,使我們能夠量化并最終為這些幀賦予較低的分數。

我們還添加了標題流派,內容格式,成人度評分等元素作為次要元素或次要特征,并作為反饋,提供給排名預測模型。

聲明:本文內容及配圖由入駐作者撰寫或者入駐合作網站授權轉載。文章觀點僅代表作者本人,不代表電子發燒友網立場。文章及其配圖僅供工程師學習之用,如有內容侵權或者其他違規問題,請聯系本站處理。 舉報投訴
  • 算法
    +關注

    關注

    23

    文章

    4625

    瀏覽量

    93123
  • 甄別
    +關注

    關注

    0

    文章

    2

    瀏覽量

    5412

原文標題:AVA:Netflix的劇照個性化甄選平臺

文章出處:【微信號:livevideostack,微信公眾號:LiveVideoStack】歡迎添加關注!文章轉載請注明出處。

收藏 人收藏

    評論

    相關推薦

    中欣晶圓半導體獲“高新技術企業”認定

    近日,全國高新技術企業認定管理工作領導小組辦公室正式發布了《對浙江省認定機構2024年認定報備的高新技術企業進行備案的公告》,標志著新一輪的高新技術企業認定工作圓滿落幕。在此次認定中,浙江麗水中欣晶
    的頭像 發表于 01-06 14:35 ?127次閱讀

    不銹鋼激光打標技術產品標識更清晰、更持久

    不銹鋼激光打標機是一種利用激光技術對不銹鋼等金屬材料進行打標的設備。以下是對不銹鋼激光打標機的詳細介紹:一、技術原理不銹鋼激光打標機利用激光束對不銹鋼材料進行加工。激光束聚焦后,能夠使材料表面產生
    的頭像 發表于 12-11 17:23 ?255次閱讀
    不銹鋼激光打標<b class='flag-5'>技術</b>:<b class='flag-5'>讓</b>產品標識更<b class='flag-5'>清晰</b>、更持久

    南京微測生物通過江蘇省高新技術企業認證

    日前,根據《高新技術企業認定管理辦法》(國科發火〔2016〕32號)和《高新技術企業認定管理工作指引》(國科發火〔2016〕195號)有關規定,對江蘇省認定機構2024年認定報備的第二批高新技術企業
    的頭像 發表于 12-05 18:31 ?420次閱讀

    FLIR Ex Pro熱像儀的OTA無線更新技術

    手機換代迅速,系統更新頻繁 人不禁遐想:若熱像儀也能如此 檢測人員是否就能隨時掌握最新科技? 今日為您揭秘 FLIR Ex Pro熱像儀的OTA無線更新技術您的熱像儀輕松升級至最新版 確保您
    的頭像 發表于 12-04 11:39 ?180次閱讀

    OTA無線更新技術:一鍵升級系統,隨時暢享FLIR最新技術!

    手機換代迅速,系統更新頻繁,人不禁遐想:若熱像儀也能如此,檢測人員是否就能隨時掌握最新科技? 比如FLIR Ex Pro熱像儀的OTA無線更新技術 ,它用戶的熱像儀輕松升級至最新版,確保用戶始終
    的頭像 發表于 12-03 15:34 ?207次閱讀
    OTA無線更<b class='flag-5'>新技術</b>:一鍵升級系統,隨時暢享FLIR最<b class='flag-5'>新技術</b>!

    海格通信亮相2024年能源北斗與時空智能創新技術應用大會

    近日,2024能源北斗與時空智能創新技術應用大會在廣州召開,海格通信作為大會重要支持單位,充分展示了北斗與時空智能新技術、新應用、新產品,共享實踐經驗、啟迪發展思路。
    的頭像 發表于 11-09 14:51 ?511次閱讀

    當今數據中心新技術趨勢

    當今數據中心的新技術趨勢正以前所未有的速度推動著行業的變革與創新。隨著云計算、大數據、人工智能等技術的快速發展,數據中心作為信息技術的核心基礎設施,正面臨著前所未有的機遇與挑戰。 一、高效能與高性能
    的頭像 發表于 10-24 15:15 ?524次閱讀

    示波器測量的是U13的輸出,輸出的波形不清晰是什么原因導致的?

    示波器測量的是U13的輸出(其實測量U9U10輸出的波形都是一樣的不清晰) 輸入頻率40K-50K交流電流經過采樣電阻,接著是一個200KHZ的有源低通,我想40K-50K之間的波形無衰減才把
    發表于 08-26 07:19

    揭秘能耗管理系統:如何你的建筑綠色省錢?

    揭秘能耗管理系統:如何你的建筑綠色省錢? 在當今這個環保意識日益增強的時代,建筑行業的綠色轉型已成為不可逆轉的趨勢。而在這場轉型中,能耗管理系統(Energy Management System
    的頭像 發表于 08-14 10:38 ?274次閱讀

    采用ava+BS架構開發的工業級UWB室內定系統源碼UWB Ultra-Wideband定位系統技術接口及技術特點

    采用ava+B/S架構開發的工業級UWB室內定系統源碼UWB(Ultra-Wideband)定位系統技術接口及技術特點 UWB(Ultra-Wideband)定位技術本身并不直接連接藍
    的頭像 發表于 06-28 09:36 ?379次閱讀
    采用<b class='flag-5'>ava</b>+BS架構開發的工業級UWB室內定系統源碼UWB Ultra-Wideband定位系統<b class='flag-5'>技術</b>接口及<b class='flag-5'>技術</b>特點

    凌度被評為高新技術企業,正式躋身國家高新技術企業隊伍!

    凌度喜報接踵而至!繼斬獲“專精特新”企業稱號后,東莞市凌度電子科技有限公司被評為高新技術企業,正式躋身國家高新技術企業隊伍!
    的頭像 發表于 05-09 09:49 ?449次閱讀
    凌度被評為高<b class='flag-5'>新技術</b>企業,正式躋身國家高<b class='flag-5'>新技術</b>企業隊伍!

    北極芯微榮獲“國家高新技術企業”稱號

    武漢北極芯微電子有限公司(以下簡稱:北極芯微)順利通過2023年度國家高新技術企業認定,榮獲由全國高新技術企業認定機構頒布的“國家高新技術企業”稱號。
    的頭像 發表于 04-25 09:50 ?576次閱讀
    北極芯微榮獲“國家高<b class='flag-5'>新技術</b>企業”稱號

    Type-C PD無線麥克風OTG聲音更清晰?。?!LDR6028方案!

    在日常工作和生活中,我們經常需要使用麥克風進行直播或者視頻通話。而Type-C PD麥克風的出現,為我們提供了更便捷、更高效的錄音體驗。它不僅具備高保真音質,還支持快速充電,您的聲音更加清晰
    的頭像 發表于 04-21 23:04 ?628次閱讀
    Type-C PD無線麥克風OTG<b class='flag-5'>讓</b>聲音更<b class='flag-5'>清晰</b>?。。DR6028方案!

    Type-C PD無線麥克風OTG聲音更清晰!??!LDR6028方案!

    在日常工作和生活中,我們經常需要使用麥克風進行直播或者視頻通話。而Type-C PD麥克風的出現,為我們提供了更便捷、更高效的錄音體驗。它不僅具備高保真音質,還支持快速充電,您的聲音更加清晰
    的頭像 發表于 04-21 22:13 ?568次閱讀
    Type-C PD無線麥克風OTG<b class='flag-5'>讓</b>聲音更<b class='flag-5'>清晰</b>?。?!LDR6028方案!

    中移芯昇獲高新技術企業證書

    近日,中國移動旗下專業芯片公司芯昇科技有限公司(以下簡稱“中移芯昇”)順利通過“高新技術企業”認定,獲高新技術企業證書。創新是企業發展的內在動力。高新技術企業是指在《國家重點支持的高新技術
    的頭像 發表于 03-06 08:17 ?462次閱讀
    中移芯昇獲高<b class='flag-5'>新技術</b>企業證書
    主站蜘蛛池模板: 四虎在线电影| 日本在线播放一区| 国产精品高清免费网站| 国产免费高清在线精品一区| 91x视频| 香蕉爱爱视频| 色多多www网站| 久久综合九色综合97婷婷群聊| 激情五月婷婷色| eeuss久久久精品影院| 午夜免费啪视频| 免费观看成人欧美1314www| 动漫精品成人免费网站| 69xxxxxxxxxhd日本| 调教双性学霸美人| 四虎影院在线观看免费| 美女一级免费毛片| www.色天使| 久草一本| 中文字幕在线二区| 伊人涩| 欧美色图一区| 成人精品视频在线观看播放| 天天都色| 欧美黄免在线播放| 一级毛片真人免费播放视频| 日韩精品一区二区三区免费视频| 狠狠激情五月综合婷婷俺| 午夜视频在线观看视频| 把小嫩嫩曰出白浆| 国色天香网在线| 日韩a视频| www视频在线观看天堂| 久久久这里有精品999| 色爱区综合五月激情| 四虎国产精品免费观看| 国产日韩一区二区三区| 免费午夜网站| 男男np主受高h啪啪肉| 日本特黄a级高清免费大片18| 操操久久|