TW201301891A - 基於環境感測之視訊精彩畫面識別 - Google Patents

基於環境感測之視訊精彩畫面識別 Download PDF

Info

Publication number
TW201301891A
TW201301891A TW101113799A TW101113799A TW201301891A TW 201301891 A TW201301891 A TW 201301891A TW 101113799 A TW101113799 A TW 101113799A TW 101113799 A TW101113799 A TW 101113799A TW 201301891 A TW201301891 A TW 201301891A
Authority
TW
Taiwan
Prior art keywords
video
viewer
emotional
emotional response
item
Prior art date
Application number
TW101113799A
Other languages
English (en)
Inventor
Steven Bathiche
Doug Burger
David Rogers Treadwell Iii
Joseph H Matthews Iii
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of TW201301891A publication Critical patent/TW201301891A/zh

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/29—Arrangements for monitoring broadcast services or broadcast-related services
    • H04H60/33—Arrangements for monitoring the users' behaviour or opinions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/35—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users
    • H04H60/46—Arrangements for identifying or recognising characteristics with a direct linkage to broadcast information or to broadcast space-time, e.g. for identifying broadcast stations or for identifying users for recognising users' preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/251—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H04N21/252—Processing of multiple end-users' preferences to derive collaborative data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42201—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] biosensors, e.g. heat sensor for presence detection, EEG sensors or any limb activity sensors worn by the user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8549—Creating video summaries, e.g. movie trailer

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Biophysics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • Ecology (AREA)
  • Business, Economics & Management (AREA)
  • Computing Systems (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Biomedical Technology (AREA)
  • Emergency Management (AREA)
  • Neurosurgery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本發明揭示關於識別及顯示自較長視訊內容提取之部分視訊內容之實施例。在一個示例性實施例中，藉由接收複數個觀眾中之每一觀眾對視訊項目之情感回應概況來提供視訊項目之部分，每一情感回應概況包含在特定觀眾觀看時特定觀眾對視訊項目之情感回應之時間相關性。方法進一步包含以下步驟：使用情感回應概況來選擇視訊項目之第一部分，該第一部分經判定為比該視訊項目之第二部分更情感刺激；及回應於對視訊項目之第一部分之請求將視訊項目之第一部分發送至另一計算裝置而不發送視訊項目之第二部分。

Description

基於環境感測之視訊精彩畫面識別
本發明係關於基於環境感測之視訊精彩畫面識別。
通常由內容之製作者手動地執行將用於回放之視訊內容之有趣部分識別為(例如)精彩畫面。因此，選擇作為精彩畫面之部分可代表製作者關於廣大觀看受眾之興趣之最佳構想，而非受眾之任意特定個體或子群體。
本文揭示關於基於自視訊觀看環境感測器之資料而選擇視訊項目之部分的各種實施例。舉例而言，一個實施例提供一種包含以下步驟之方法：接收複數個觀眾之每一觀眾對視訊項目之情感回應概況，每一情感回應概況包含在特定觀眾觀看時特定觀眾對視訊項目之情感回應之時間相關性；及接著使用情感回應概況來選擇視訊項目之第一部分，該第一部分經判定為比視訊項目之第二部分更情感刺激。回應於對視訊項目之第一部分之請求，接著將視訊項目之第一部分發送至另一計算裝置而不發送視訊項目之第二部分。
以簡化形式提供本【發明內容】來引入在下文之【實施方式】中進一步描述之可供選擇的概念。本【發明內容】不欲識別所主張標的之主要特徵或基本特徵，亦不 意欲用以限制所主張標的之範疇。此外，所主張標的不受限於解決在本揭示案之任何部分中指出之任意或所有缺點之實施。
如上文所述，選擇部分視訊內容項目(諸如體育展示或電影)用作精彩畫面、預告片或其他類似編輯展示已通常依賴于人類編輯工作。最近，已使用刮擦將電腦網路可存取內容聚集成易瀏覽格式中以輔助內容發現。刮擦為自動方法，在該方法中，用程式自一或多個內容源(諸如網站)收集資訊、在語義上分類資訊並展現經分類資訊，以使得使用者可快速地存取根據使用者興趣定制之資訊。
刮擦可為相當直接的，其中在刮擦結果中識別整個內容項目。舉例而言，靜態影像、視訊影像、音訊檔案及上述各者之類似物可藉由作為整體應用於內容之標題、藝術家、關鍵字及其他後設資料整體地識別。然而，內部視訊片段(亦即，自較大視訊內容項目內提取之視訊片段)之識別帶來挑戰。舉例而言，許多內容項目可能缺乏內部媒體後設資料，該內部媒體後設資料允許自較大內容項目識別及單獨地拉取感興趣之片段。在其他狀況下，視訊內容項目可作為可單獨存取之片段之集合儲存。然而，此等片段仍可能經由人類編輯輸入來界定。
因此，所揭示之實施例係關於部分視訊內容之自動識別，該等部分視訊內容與其他相同視訊內容之部分相比可能特別有趣，且所揭示之實施例係關於將與其他部分分離之經識別部分展現給觀眾。實施例可利用觀看環境感測器(諸如影像感測器、深度感測器、聲音感測器)及潛在地其他感測器(諸如生物測定感測器)來輔助判定觀眾偏好以用於識別此等片段。此等感測器可允許系統識別個體、偵測及瞭解經識別個體之人類情感表達且利用此資訊來識別視訊內容項目之特別有趣之部分。
第1圖示意性地展示根據本揭示案之實施例觀眾(第1圖中分別展示為160、162及164)觀看視訊項目(第1圖中分別展示為150、152及154)，每一視訊項目在各別視訊觀看環境100中之各別顯示器102上(如經由顯示器輸出端112輸出)觀看。在一個實施例中，與媒體計算裝置104連接(經由輸入端111)之視訊觀看環境感測器系統106將感測器資料提供至媒體計算裝置104以允許媒體計算裝置104偵測視訊觀看環境100中之觀眾情感回應。將理解，在各種實施例中，可將感測器系統106作為媒體計算裝置104之周邊組件或內建式組件來實施。
進而，將觀眾對視訊項目之情感回應概況經由網路110發送至伺服器計算裝置130，其中，對於視訊項目之每一者，來自複數個觀看者之情感回應經合成為用於彼視訊項目之聚集情感回應概況。隨後，請求觀眾搜尋自彼等視訊項目中之一者提取之有趣或情感刺激的視訊片段， 該請求觀眾可接收判定為比彼等相同項目之其他部分更刺激情感之彼等視訊項目之部分的清單。自彼清單，請求觀眾可請求單獨地或以彙集方式觀看彼等一或多個視訊項目之一或多個部分。收到請求後，伺服器計算裝置發送所請求部分至請求計算裝置而不發送彼等一或多個視訊項目之相對不那麼刺激及/或不那麼有趣的部分。因此，請求觀眾具有視訊項目之片段，請求觀眾可能覺得該片段有趣且情感刺激。同樣地，可對複數個視訊項目執行此分析以展現自不同視訊內容項目提取之潛在有趣視訊片段之清單。此舉可幫助(例如)內容發現。
視訊觀看環境感測器系統106可包括任何適宜感測器，包括(但不限於)一或多個影像感測器、深度感測器及/或麥克風或其他聲音感測器。來自此等感測器之資料可由計算裝置104使用以偵測觀眾之面部及/或身體姿態及姿勢，該等面部及/或身體姿態及姿勢可藉由媒體計算裝置104與人類情感顯示相關。作為實例，可將此等姿態及姿勢與預先界定之參考情感顯示資料(諸如姿態資料及姿勢資料)比較，該參考情感顯示資料可與指定情感狀態相關聯。將理解，本文所用術語「人類情感顯示」可表示對正觀看之內容之任何可偵測人類回應，包括(但不限於)人類情感表達及/或人類情感行為之可偵測顯示，諸如面部顯示、姿勢顯示及聲音顯示，無論是有意識地還是下意識地執行的面部、姿勢及聲音顯示。
媒體計算裝置104可處理自感測器系統106接收之資料以產生觀眾觀看之視訊項目與每一觀眾對視訊項目之情感回應之間的時間關係。如下文更詳細解釋，此等關係記錄為觀眾對特定視訊項目之情感回應概況且此等關係包括于編入觀眾之視訊興趣之觀看興趣概況中。此舉可允許請求觀眾之觀看興趣概況隨後經擷取且用以選擇對請求觀眾潛在有趣之一或多個視訊項目之部分。
作為更特定實例，自觀看環境感測器系統106接收之影像資料可捕獲觀眾之人類情感行為之有意識顯示，諸如觀眾160哆嗦或掩面之影像。作為回應，觀眾對彼視訊項目之情感回應概況可指示在項目期間觀眾在彼時刻害怕。影像資料亦可包括人類情感狀態之下意識顯示。在此情況下，影像資料可展示，在視訊項目期間之特定時刻，使用者正把目光自顯示器移開。作為回應，觀眾對彼視訊項目之情感回應概況可指示觀眾在彼時刻感到無聊或心不在焉。眼追蹤、面部姿態特性化及其他適宜技術亦可用來估計觀眾之情感刺激度及與視訊項目150之參與度。
在一些實施例中，影像感測器可收集光譜區域內之光，該光為人類生理狀況之診斷。舉例而言，紅外光可用以粗略估計身體內血氧水平及/或心率水平。反過來，此等水平可用以估計人之情感刺激。
此外，在一些實施例中，安置於其他裝置而非觀看環境感測器系統106中之感測器可用以將輸入提供至媒體 計算裝置104。舉例而言，在一些實施例中，包括於行動計算裝置140(例如，行動電話及膝上型電腦以及平板電腦)中之加速計及/或其他感測器可偵測彼觀眾之基於姿態的情感表達或其他情感表達，該行動計算裝置140由視訊觀看環境100中之觀眾160持有。
第2A圖至第2B圖展示用於為請求計算裝置提供自較長視訊內容提取之視訊內容之潛在有趣部分之方法200的實施例的流程圖。將瞭解，所描繪之實施例可經由任何適宜硬體實施，該硬體包括(但不限於)第1圖及第2A圖至第2B圖中提及之硬體之實施例。
如第2A圖中所示，媒體計算裝置104包括資料保存子系統114，該資料保存子系統114可保存藉由邏輯子系統116可執行之指令以實施本文所揭示之各種任務。此外，媒體計算裝置104亦可包括或經配置以容納可卸除式電腦可讀儲存媒體118，該可卸除式電腦可讀儲存媒體118配置為儲存藉由邏輯子系統116可執行之指令。亦將伺服器計算裝置130描述為包括資料保存子系統134、邏輯子系統136及可卸除式電腦儲存媒體138。
在一些實施例中，可將來自觀眾之行動裝置上之感測器的感測器資料提供至媒體計算裝置。此外，可將與正觀看之視訊項目相關之補充內容提供至觀眾之行動裝置。因此，在一些實施例中，行動計算裝置140可在媒體計算裝置104及/或伺服器計算裝置130處註冊。適宜行動 計算裝置包括(但不限於)行動電話及可攜個人計算裝置(例如，膝上型電腦、平板電腦及其他此類計算裝置)。
如第2A圖中所示，行動計算裝置140包括資料保存子系統144、邏輯子系統146及電腦儲存媒體148。將在下文更詳細描述本文所提及之此等資料保存子系統、邏輯子系統及電腦儲存媒體之態樣。
在202處，方法200包括以下步驟：收集視訊觀看環境感測器處及潛在地來自行動計算裝置140或其他適宜含感測器之裝置的感測器資料。在204處，方法200包含以下步驟：將感測器資料發送至媒體計算裝置，該媒體計算裝置接收感測器資料之輸入。可收集任何適宜感測器資料，包括(但不限於)影像感測器資料、深度感測器資料、聲音感測器資料、生物測定感測器資料等。
在206處，方法200包括以下步驟：根據感測器資料之輸入判定視訊觀看環境中之觀眾之身份。在一些實施例中，可自藉由感測器資料收集之影像資料與儲存于觀眾之個人概況中之影像資料的比較來建立觀眾之身份。舉例而言，包括於自視訊觀看環境收集之影像資料之面部與儲存于觀眾之概況中之影像之間的面部相似性比較可用以確定彼觀眾之身份。亦可根據聲音資料或任何其他適宜資料來判定觀眾之身份。
在208處，方法200包括以下步驟：產生觀眾之情感回應概況，該情感回應概況代表觀眾對正顯示於視訊觀看環境中之視訊項目之情感反應之時間相關性。換言之， 觀眾對視訊項目之情感回應概況指示觀眾之情感表達與行為顯示為在視訊項目之內的時間位置函數。
第3圖示意性地展示觀眾情感回應概況304之實施例。如第3圖中所示，藉由語義挖掘模組302使用自一或多個視訊觀看環境感測器接收之感測器資訊而產生觀眾情感回應概況304，該語義挖掘模組302運行於媒體計算裝置104及伺服器計算裝置130之一或多者上。使用來自感測器之資料且亦使用視訊項目資訊303(例如，鑒別在收集情感回應資料時觀眾正觀看之特定視訊項目及該情感回應在視訊項目中之何處發生的後設資料)，語義挖掘模組302產生觀眾情感回應概況304，該觀眾情感回應概況304捕獲觀眾之情感回應作為視訊項目中之時間位置函數。
在第3圖中所示之實例中，語義挖掘模組302分派對於各種行為及其他表達資料(例如，生理資料)的情感識別，該等行為及其他表達資料由視訊觀看環境感測器偵測。語義挖掘模組302亦指示與視訊項目同步之根據時序之觀眾之情感表達，例如，藉由在視訊項目中之各種事件、場景及行為發生之時間與視訊項目同步。因此，在第3圖中所示之實例中，在視訊項目之時間索引1處，語義挖掘模組302基於生理資料(例如，心率資料)及人類情感顯示資料(例如，身體語言評分)記錄觀眾感到無聊或心不在焉。在隨後的時間索引2處，觀眾情感回應概況304指示觀眾感到快樂且對視訊項目感興趣，而在時間 索引3處，觀眾情感回應概況304指示觀眾感到害怕但全神貫注地專注於視訊項目。
第3圖亦展示為簡單起見繪示為單一變量之圖表之非限制示例性觀眾情感回應概況306之圖示。雖然觀眾情感回應概況306繪示為作為時間函數之單一變量(例如，情感狀態)之圖表，但將瞭解，情感回應概況可包含任何適宜數目之代表任何適宜數量之變量。
在一些實施例中，語義挖掘模組302可經配置以分辨觀眾對視訊項目之情感回應與觀眾之一般情緒。舉例而言，在一些實施例中，語義挖掘模組302可忽略在觀眾之注意力未集中于顯示器裝置時偵測之彼等人類情感顯示，或語義挖掘模組302可記錄在此等情況下關於使用者之注意狀態之資訊。因此，作為示例性情況，若觀眾由於來源於視訊觀看環境之外的較大噪聲而明顯受到干擾，則語義挖掘模組302可經配置以免將偵測干擾歸因於視訊項目，及/或語義挖掘模組302可不將彼時間位置處之干擾記錄于觀眾對視訊項目之情感回應概況中。在包括影像感測器作為視訊觀看環境感測器之實施例中，可使用適宜眼追蹤及/或面部位置追蹤技術來判定觀眾之注意力集中於顯示器裝置及/或視訊項目之程度。
可分析觀眾對視訊項目之情感回應概況304來判定誘發觀眾之積極回應及消極回應之場景/對象/事件的類型。舉例而言，在第3圖中所示之實例中，視訊項目資訊(包括場景描述)與感測器資料及觀眾之情感回應相 關。可接著將此分析之結果收集於觀看興趣概況308中。觀看興趣概況308編入觀眾對視訊媒體之喜好或厭惡，根據觀眾對過去媒體體驗之情感回應而判定觀眾對視訊媒體之喜好或厭惡。觀看興趣概況由複數個情感回應概況產生，每一情感回應概況在時間上相關於觀眾對觀眾先前觀看之視訊項目之情感回應。換言之，觀眾對特定視訊項目之情感回應概況在彼視訊項目中將彼觀眾之情感表達及行為顯示整理為時間位置函數。隨著觀眾觀看更多視訊項目，觀眾之觀看興趣概況可經改變以反映觀眾之變化品味及興趣，如在觀眾對最近觀看之視訊項目之情感反應中所表達。
藉由執行針對觀眾觀看之其他內容項目之此分析(如第3圖之310處所示)，且接著判定誘發相似情感回應之不同內容項目之部分之間的相似性，可判定觀眾之潛在喜好或厭惡且接著用來指出對將來觀看及/或用於展示之視訊片段精彩畫面之內容建議。舉例而言，第3圖展示觀眾相較演員A及演員C更喜歡演員B且觀眾相較A類位置更喜歡B類位置。此外，可對在觀看環境中之複數個觀眾之每一者執行此等分析。
回至第2A圖，方法200包括以下步驟：在212處，自複數個觀眾之每一者接收對視訊項目之情感回應概況。因此，在212處，接收許多觀眾對同一視訊項目之情感回應以用於進一步處理。可在不同時刻(例如，在所擷取之視訊項目由不同觀眾在不同時刻觀看之情況下)或同時 地(例如，在電視實況事件之情況下)接收此等情感回應。一旦接收到，可即時分析情感回應及/或儲存情感回應以用於隨後分析，如下文所描述。
在214處，方法200包括以下步驟：聚集來自不同觀眾之複數個情感回應概況以形成對彼視訊項目之經聚集情感回應概況。在一些實施例中，方法200可包括以下步驟：在216處展現經聚集情感回應概況之圖解描繪。此等觀看可為觀眾提供看一眼即區分視訊項目之情感刺激且有趣之部分與同一項目之其他部分的方式，且此等觀看亦可為觀眾提供機構來選擇此等視訊內容部分以用於觀看(例如，在該機構中，經聚集概況充當控制視訊內容展示之使用者界面元件)。
此外，在一些實施例中，可將此等觀看提供至內容提供者及/或廣告提供者以使得此等提供者可發現與觀眾(及/或與于各種市場區隔中之觀眾)有情感聯繫之視訊項目之彼等部分。舉例而言，在實況廣播情況下，接收此等觀看之內容提供者可即時向廣播主持人提供建議，該等建議關於吸引觀看受眾及進一步與觀看受眾聯繫之方式，從而潛在地留住觀眾，否則該等觀眾可能試圖換頻道。
舉例而言，第3圖展示對視訊項目之經聚集情感回應概況314之實施例。如第3圖中所示，對視訊項目之複數個情感回應概況可在312處在時間上相關以產生經聚集情感回應概況314，每一概況來源於不同觀眾及/或同一觀 眾之不同觀看會話。此外，在一些實施例中，經聚集情感回應概況314亦可以任何適宜方式(例如，藉由視訊項目類型、藉由演員、藉由導演、編劇等)與視訊項目資訊相關以識別關於視訊項目之特徵，該視訊項目激發複數個觀眾之情感體驗至不同程度及享受水平。此外，如下文所述，可基於社交網路資訊過濾經聚集情感回應概況。
回至第2A圖，方法200包括以下步驟：在218處，接收對視訊項目之有趣部分之請求，請求包括請求觀眾之身份。舉例而言，請求可在請求觀眾到達視訊刮擦點時、在打開請求觀眾之行動或媒體計算裝置時，或藉由自請求觀眾至行動、媒體或其他計算裝置之輸入提出。將瞭解，可以任何適宜方式接收請求觀眾之身份，包括(但不限於)上文提及之觀眾身份判定方案。
在一些實施例中，請求可包括由請求觀眾提供之搜索術語及/或過濾條件，以使得視訊內容之第一部分之選擇可部分地基於搜索術語及/或過濾條件。但將瞭解，請求觀眾可在過程中于任何適宜點上供應此等搜索術語及/或過濾條件而不背離本揭示案之範疇。
在220處，方法200包括以下步驟：使用情感回應概況選擇視訊項目之第一部分，該第一部分經判定為比視訊項目之第二部分更情感刺激。因此，情感回應可用以識別視訊項目部分，該等視訊項目部分對於經聚集觀看受眾(例如，情感回應概況構成經聚集情感回應概況之觀 眾)比在受眾中誘發較小情感反應之其他部分相對更有趣。因此，可將視訊媒體之有趣部分選擇及/或概括為對於較長視訊媒體之源自人群之情感回應資訊之結果。
在一些實施例中，源自人群之結果可藉由潛在地肯定相關之觀眾(例如，極有可能以類似于觀眾之方式對視訊項目作出回應之人，該方式由觀眾之間的社交關係或其他聯繫判定)之群體之情感回應概況來加權。因此，在一些實施例中，群體成員之情感回應概況可具有比非成員之權重更高的權重。一旦分配權重，就可以任何適宜方式來執行選擇。可以任何適宜方式來分配權重，例如，在零至一範圍內之數。在一個實例中，加權算術平均值可作為時間函數來計算，以識別在視訊項目中不同時間位置處之情感刺激之平均幅度。因此，對於觀眾，選擇結果可能比未加權選擇結果(例如，所有經聚集情感回應概況未經加權之選擇結果)相對更有趣。
此外，在一些實施例中，用於群體(或群體之成員)之權重可以觀眾輸入為基礎。舉例而言，權重可基於觀眾之社交網路中之社交聯繫及/或親密之不同水平。在另一實例中，權重可基於由觀眾分配之信賴等級，該等信賴等級反映彼群體(或成員)之品味及/或識別觀眾覺得有趣之視訊項目之部分的能力中觀眾之信任及信賴的相對水平。在一些其他實施例中，在不存在觀眾輸入之情況下可根據特徵(諸如人群特徵)分配信賴等級，從而表明群體成員興趣與觀眾興趣之間的積極聯繫。將理 解，用於加權情感回應概況之此等方法出於實例之目的而提出，且不欲以任何方式限制此等方法。
第4圖示意性地展示繪示上文描述之示例性實施例之三個示例性選擇方案。在方案402中，基於未加權經聚集情感回應概況314來選擇視訊項目之第一部分404。在此等實施例中，選擇視訊項目之第一部分可包括基於對視訊內容項目之第一部分之情感回應在經聚集情感回應概況中之幅度的選擇。在第4圖中，預先選擇臨限值406用以判定在經聚集觀看受眾中由視訊項目誘發之情感刺激之相對程度。可以任何適宜方式(例如，如絕對值或函數值，諸如對應于廣告商需求之相對於內容類型及正請求視訊項目之當日時間之興趣水平的值)來界定預先選擇臨限值406。因此，第一部分404對應於超過(在可接受公差內)預先選擇臨限值406之視訊項目之彼部分。
在方案410中，由請求觀眾之社交網路中之觀眾加權經聚集觀眾情感回應概況314。因此，基於使用與屬於請求觀眾之社交網路之觀眾對應之經聚集情感回應概況的子集來選擇視訊項目之第一部分。將瞭解，社交網路可為與觀眾有社交聯繫之人之任何適宜集合，以使得觀眾之興趣可特定地與網路成員之共同興趣較好地相關。此網路可為使用者界定的或此網路可由使用者之間的共同特徵(例如校友關係)來自動地界定。在方案410處，經加權情感回應概況412與預先選擇臨限值406一起使用來識別第一部分404。以虛線展示經聚集情感回應概況314， 此僅用於參考目的。基於請求觀眾之社交網路來選擇第一部分可為請求觀眾提供視訊項目之部分，該等視訊項目之部分有趣且與請求觀眾之緊密社交聯繫相關。此舉可增強為請求觀眾選擇之第一部分之個性化程度。
在方案420中，由請求觀眾所屬之人群中之觀眾加權經聚集觀眾情感回應概況314。因此，基於使用經聚集情感回應概況之子集來選擇視訊項目之第一部分，該等經聚集情感回應概況之子集對應于屬於請求觀眾之人群的觀眾。將瞭解，可基於任何適宜特徵來界定人群，該等特徵可導致群體成員之間的比所有使用者之間潛在地更高度相關的興趣。接著，經加權情感回應概況422與預先選擇臨限值406一起用來識別第一部分404。以虛線展示經聚集情感回應概況314，此僅用於參考目的。基於請求觀眾之人群來選擇第一部分可幫助請求觀眾發現視訊項目之部分，該等視訊項目之部分使具有與請求觀眾之品味及興趣相似之品味及興趣之人感興趣。
將瞭解，可藉由使用觀眾提供之過濾器(諸如搜索術語及/或觀眾界定之觀看興趣)來達成進一步個性化。舉例而言，在一些實施例中，亦可基於請求觀眾之觀看興趣概況308來選擇第一部分。在一些實施例中，如第4圖中在430處所示，可進一步基於請求觀眾供應之搜索術語及/或過濾條件來選擇。
在其他實施例中，可基於由觀眾選擇之情感回應概況之子集來選擇視訊項目之第一部分。舉例而言，觀眾可 選擇接收視訊項目之經選擇部分及其他內容(諸如精彩畫面清單、觀眾反應視訊及下文描述之反應精彩畫面清單)，該等經選擇部分及其他內容僅基於觀眾之社交網路之情感回應概況。藉由以此方式過濾情感回應概況，而不是對經加權或未經加權經聚集情感回應概況過濾，可增強在使用者體驗中之個性化之相對水平。
轉回至第2A圖，方法200包括以下步驟：在222處，產生精彩畫面清單，該精彩畫面清單包括視訊項目之第一部分且該精彩畫面清單亦包括基於情感回應概況之視訊項目之其他部分。因此，針對特定視訊項目，彙集視訊項目之情感刺激部分及/或有趣部分之清單。在一些實施例中，藉由標簽、注解或其他觀眾供應之注釋，藉由圖解表示(諸如熱圖)或藉由向請求觀眾傳達由視訊項目在觀看受眾中誘發之相對情感刺激的任何其他適宜方式，可根據情感刺激程度(諸如記錄於經聚集情感回應概況中之情感回應之幅度)列出精彩畫面清單。
視情況，222可包括以下步驟：在224處，產生觀眾反應視訊片段，該觀眾反應視訊片段包含特定觀眾對視訊內容項目之情感、生理及/或行為回應，如由藉由視訊觀看環境感測器記錄之人類情感顯示所表達。此等觀眾回應片段在所記錄觀眾之選擇處可與視訊項目之相關部分一起儲存及/或同時地展現，以使得請求觀眾可觀看視訊項目及所記錄觀眾對視訊項目之情感反應。因此，搜索體育事件之情感刺激部分之請求觀眾亦可看見其他觀眾 對彼事件之反應片段的片段。在一些實施例中，可自請求觀眾之社交網路及/或人群中之觀眾選擇觀眾反應片段，該等觀眾反應片段可進一步個性化請求觀眾體驗的親和力，該親和力用於展示于觀眾反應片段中之其他觀眾之反應。
在一些實施例中，222亦可包括以下步驟：在226處，產生觀眾反應精彩畫面片段清單，該觀眾反應精彩畫面片段清單包含視訊片段，該等視訊片段捕獲一或多個觀眾中之每一者對經由情感回應概況選擇之視訊內容項目之複數個部分的反應。此等觀眾反應精彩畫面片段清單可藉由參考其他觀眾對彼等片段之情感反應以與選擇視訊項目之有趣部分大致相同之方式來產生，以使得請求觀眾看一眼即可直接搜索此等觀眾反應片段及/或看見風行及/或情感刺激的(如由觀看觀眾反應片段之其他觀眾感知)觀眾反應片段。
雖然第2A圖之描述已為清晰起見專注于選擇單一視訊項目之部分，但將瞭解，在一些實施例中，可自複數個各別視訊項目選擇複數個部分。因此，轉至第2B圖，方法200包括以下步驟：在228處，建立複數個視訊項目之部分之清單，及在230處，發送各別部分之清單。在一些實施例中，可將如上文描述之彼等視訊項目及/或觀眾反應片段之精彩畫面清單與各別部分之清單一起發送。此外，在一些實施例中，230可包括以下步驟：在232處 將每一視訊項目之經聚集情感回應概況之圖解描繪與清單一起發送。
在234處，方法200包括以下步驟：接收對請求視訊項目之第一部分之請求。在234處接收請求之步驟可包括接收對單一請求視訊項目之第一部分之請求及/或接收自各別請求視訊項目選擇之複數個部分。
在一些實施例中，對請求視訊項目之請求可包括由請求觀眾提供之搜索術語及/或過濾條件。在此等實施例中，搜索術語及/或過濾條件可允許請求觀眾根據準則(諸如觀看偏好)經由各別視訊項目之第一部分之清單來分類，該準則提供于搜索術語及/或過濾條件中。
回應於在234處接收之請求，方法200包括以下步驟：在236處，將視訊內容項目之第一部分發送至請求計算裝置而不發送視訊內容項目之第二部分。舉例而言，描繪於第4圖中之方案中之每一者展示待發送至請求計算裝置之第一部分404，同時亦展示被判定為比各別第一部分404(如上文描述)不那麼情感刺激之另一部分，該另一部分將不被發送。將瞭解，在一些實施例中，亦可發送視訊項目之其他情感刺激的部分。舉例而言，第4圖之方案410及方案420各自包括額外部分405(亦以交叉影線展示)，該額外部分相對於視訊項目之其他部分被判定為情感刺激的。在一些實施例中，回應於請求，可發送此等額外部分。
在一些實施例中(其中請求視訊項目之多於一個各別第一部分)，236可包括以下步驟：發送作為單一視訊組合之各別第一部分。此外，在一些實施例中，236可包括以下步驟：在238處，發送觀眾反應視訊片段。在240處，輸出所發送之視訊項目之部分(或多個部分)以用於顯示。
如上文介紹，在一些實施例中，本揭示案中描述之方法及過程可與包括一或多個電腦之計算系統相關聯。詳言之，本文描述之方法及過程可作為電腦應用、電腦服務、電腦API、電腦程式庫及/或其他電腦程式產品來實施。
圖2示意性地以簡化形式展示可執行一或多個上文描述之方法及過程之非限制性計算系統。將理解，事實上，可使用任何電腦架構而不背離本揭示案之範疇。在不同實施例中，計算系統可採用主機電腦、伺服器電腦、桌上型電腦、膝上型電腦、平板電腦、家庭娛樂型電腦、網路計算裝置、行動計算裝置、行動通信裝置、遊戲裝置等之形式。
計算系統包括邏輯子系統(例如，第2A圖之行動計算裝置104之邏輯子系統116、第2A圖之行動計算裝置140之邏輯子系統146及第2A圖之伺服器計算裝置130之邏輯子系統136)及資料保存子系統(例如，第2A圖之行動計算裝置104之資料保存子系統114、第2A圖之行動計算裝置140之資料保存子系統144及第2A圖之伺服器計 算裝置130之資料保存子系統134)。計算系統可視情況包括未展示於第2A圖中之顯示器子系統、通信子系統及/或其他組件。計算系統亦可視情況包括使用者輸入裝置，例如(諸如)鍵盤、滑鼠、遊戲控制器、相機、麥克風及/或觸控式螢幕。
邏輯子系統可包括經配置以執行一或多個指令之一或多個實體裝置。舉例而言，邏輯子系統可經配置以執行一或多個指令，該一或多個指令為一或多個應用、服務、程式、常式、程式庫、對象、組件、資料結構或其他邏輯結構之部分。可實施此等指令以執行任務、實施資料類型、轉換一或多個裝置之狀態或以其他方式達到所要結果。
邏輯子系統可包括經配置以執行軟體指令之一或多個處理器。另外或替代地，邏輯子系統可包括經配置以執行硬體或韌體指令之一或多個硬體或韌體邏輯機。邏輯子系統之處理器可為單核或多核，且執行於該等處理器上之程式可經配置用於平行或分散處理。邏輯子系統可視情況包括分佈遍及兩個或兩個以上裝置之個別組件，該兩個或兩個以上裝置可遠端定位及/或經配置以用於協調處理。可藉由以雲計算配置形式配置之遠端可存取網路計算裝置來虛擬化且執行邏輯子系統之一或多個態樣。
資料保存子系統可包括一或多個實體、非暫時裝置，該一或多個實體、非暫時裝置經配置以保存資料及/或藉 由邏輯子系統可執行之指令以實施本文描述之方法及過程。當實施此等方法及過程時，可轉換資料保存子系統之狀態(例如，以保存不同資料)。
資料保存子系統可包括可卸除式媒體及/或內建式裝置。資料保存子系統可包括光記憶體裝置(例如，CD、DVD、HD-DVD、Blu-Ray光碟等)、半導體記憶體裝置(例如，RAM、EPROM、EEPROM等)及/或磁性記憶體裝置(例如，硬磁碟驅動機、軟磁碟驅動機、磁帶驅動機、MRAM等)及其他裝置。資料保存子系統可包括具有以下特徵中之一或多者之裝置：揮發性、非揮發性、動態、靜態、讀/寫、唯讀、隨機存取、順序存取、位置可定址、檔案可定址及內容可定址。在一些實施例中，可將邏輯子系統及資料保存子系統整合至一或多個共同裝置中，諸如應用特定積體電路或系統單晶片。
第2A圖亦展示呈可卸除式電腦儲存媒體(例如，第2A圖之行動計算裝置104之可卸除式電腦儲存媒體118、第2A圖之行動計算裝置140之可卸除式電腦儲存媒體148及第2A圖之伺服器計算裝置130之可卸除式電腦儲存媒體138)形式之資料保存子系統之態樣，該資料保存子系統可用以儲存及/或傳送資料及/或可執行之指令以實施本文所描述之方法及過程。可卸除式電腦儲存媒體可採用CD、DVD、HD-DVD、Blu-Ray光碟、EEPROM及/或軟磁碟及其他之形式。
將瞭解，資料保存子系統包括一或多個實體、非暫時裝置。相反，在一些實施例中，本文所描述之指令之態樣可以暫時方式藉由純訊號(例如，電磁訊號、光訊號等)來傳播，該純訊號至少在有限持續時間內不由實體裝置保存。此外，可藉由純訊號來傳播關於本揭示案之資料及/或其他形式之資訊。
可使用術語「模組」、「程式」及「引擎」來描述計算系統之態樣，實施該計算系統之態樣以執行一或多個特定功能。在一些情況下，可經由執行指令之邏輯子系統來實體化此模組、程式或引擎，該等指令由資料保存子系統保存。將理解，可由同一應用、服務、碼塊、物體、程式庫、常式、API、功能等來實體化不同模組、程式及/或引擎。同樣地，可藉由不同應用、服務、碼塊、物體、程式庫、常式、API、功能等來實體化同一模組、程式及/或引擎。術語「模組」、「程式」及「引擎」意謂涵蓋可執行檔案、資料檔案、程式庫、驅動器、方案、資料庫記錄等之個體或群體。
將瞭解，如本文中所用之「服務」可為應用程式，該應用程式可執行遍及多個使用者會話且該應用程式可用於一或多個系統組件、程式及/或其他服務。在一些實施中，回應于來自客戶之請求，可在伺服器上運行服務。
當包括時，顯示器子系統可用以展現藉由資料保存子系統保存之資料之視覺表示。由於本文描述之方法及過程改變藉由資料保存子系統保存之資料，且因此轉換資 料保存子系統之狀態，故可同樣地轉換顯示器子系統之狀態以在視覺上表示在基礎資料中之改變。顯示器子系統可包括在視覺上利用任何類型之技術之一或多個顯示器裝置。此等顯示器裝置可與邏輯子系統及/或資料保存子系統組合於共用外殼中，或此等顯示器裝置可為周邊顯示器裝置。
應理解，本文描述之配置及/或方法在本質上為示例性的，且此等特定實施例或實例不視為限制性意義，原因在於眾多改變係有可能的。本文描述之特定常式或方法可表示任何數目之處理策略之一或多者。就此而言，可以所繪示之順序、其他順序、平行地執行所繪示之各種行為，或在一些情況下省略該等行為。同樣地，可改變上文描述之過程之順序。
本揭示案之標的包括各種方法、系統及配置之所有新穎及非顯而易知之組合及子組合，及本文所揭示之其他特徵、功能、行為及/或特性，以及以上各者之任何及所有等效物。
100‧‧‧視訊觀看環境
102‧‧‧顯示器
104‧‧‧媒體計算裝置
106‧‧‧感測器系統
110‧‧‧網路
111‧‧‧輸入端
112‧‧‧顯示器輸出端
114‧‧‧資料保存子系統
116‧‧‧邏輯子系統
118‧‧‧可卸除式電腦可讀儲存媒體
130‧‧‧伺服器計算裝置
134‧‧‧資料保存子系統
136‧‧‧邏輯子系統
138‧‧‧可卸除式電腦儲存媒體
140‧‧‧行動計算裝置
144‧‧‧資料保存子系統
146‧‧‧邏輯子系統
148‧‧‧電腦儲存媒體
150‧‧‧視訊項目
152‧‧‧視訊項目
154‧‧‧視訊項目
160‧‧‧觀眾
162‧‧‧觀眾
164‧‧‧觀眾
200‧‧‧方法
202‧‧‧步驟
204‧‧‧步驟
206‧‧‧步驟
208‧‧‧步驟
212‧‧‧步驟
214‧‧‧步驟
216‧‧‧步驟
218‧‧‧步驟
220‧‧‧步驟
222‧‧‧步驟
224‧‧‧步驟
226‧‧‧步驟
228‧‧‧步驟
230‧‧‧步驟
232‧‧‧步驟
234‧‧‧步驟
236‧‧‧步驟
238‧‧‧步驟
240‧‧‧步驟
302‧‧‧語義挖掘模組
303‧‧‧視訊項目資訊
304‧‧‧觀眾情感回應概況
306‧‧‧觀眾情感回應概況
308‧‧‧觀看興趣概況
314‧‧‧經聚集情感回應概況
402‧‧‧方案
404‧‧‧第一部分
405‧‧‧額外部分
406‧‧‧預先選擇臨限值
410‧‧‧方案
412‧‧‧經加權情感回應概況
420‧‧‧方案
422‧‧‧經加權情感回應概況
430‧‧‧步驟
第1圖示意性地展示根據本揭示案之實施例觀眾在視訊觀看環境中觀看視訊項目。
第2A圖至第2B圖展示根據本揭示案之實施例之流程圖，該流程圖描述為請求計算裝置提供自較長視訊內容項目提取之部分視訊內容之方法。
第3圖示意性地展示觀眾情感回應概況、觀看興趣概況及經聚集觀眾情感回應概況之實施例。
第4圖示意性地展示根據本揭示案之實施例用於選擇待發送至請求計算裝置之視訊項目之情感上刺激部分之示例性情況。
100‧‧‧視訊觀看環境
102‧‧‧顯示器
104‧‧‧媒體計算裝置
106‧‧‧感測器系統
110‧‧‧網路
111‧‧‧輸入端
112‧‧‧顯示器輸出端
130‧‧‧伺服器計算裝置
140‧‧‧行動計算裝置
150‧‧‧視訊項目
152‧‧‧視訊項目
154‧‧‧視訊項目
160‧‧‧觀眾
162‧‧‧觀眾
164‧‧‧觀眾

Claims (20)

  1. 一種在一計算裝置上編譯及為請求計算裝置供應自較長視訊內容提取之部分視訊內容之方法，該方法包含以下步驟：接收複數個觀眾之每一觀眾對一視訊項目之一情感回應概況，每一情感回應概況包含在一特定觀眾觀看時該特定觀眾對該視訊項目之情感回應之一時間相關性；使用該等情感回應概況選擇該視訊項目之一第一部分，該第一部分經判定為比該視訊項目之一第二部分更情感刺激；及回應於對該視訊項目之該第一部分之一請求，將該視訊項目之該第一部分發送至另一計算裝置而不發送該視訊項目之該第二部分。
  2. 如請求項1所述之方法，其中選擇該視訊項目之一第一部分之步驟包括以下步驟：與其他情感回應概況相比，更多地加權對應於屬於一社交網路之觀眾之該等情感回應概況，一請求觀眾屬於該社交網路。
  3. 如請求項1所述之方法，其中選擇該視訊項目之一第一部分之步驟包括以下步驟：與該等其他情感回應概況相比，更多地加權對應于屬於一人群之觀眾之該等情感回應概況，一請求觀眾屬於該人群。
  4. 如請求項1所述之方法，該方法進一步包含以下步驟：產生一精彩畫面清單，該精彩畫面清單包括該視訊項目之 該第一部分且該精彩畫面清單亦包括基於該等情感回應概況之該視訊項目之其他部分。
  5. 如請求項1所述之方法，該方法進一步包含以下步驟：產生一觀眾反應視訊片段，該觀眾反應視訊片段包含該特定觀眾對該視訊項目之生理回應，且其中發送該第一部分之步驟包括以下步驟：發送該觀眾反應視訊片段。
  6. 如請求項5所述之方法，該方法進一步包含以下步驟：產生一觀眾反應精彩畫面片段清單，該觀眾反應精彩畫面片段清單包含視訊片段，該等視訊片段捕獲一或多個觀眾中之每一者對該視訊項目之複數個部分的反應，該複數個部分經由該等情感回應概況選擇。
  7. 如請求項1所述之方法，其中選擇該視訊項目之該第一部分之步驟進一步包含以下步驟：聚集複數個情感回應概況以形成對該視訊項目之一經聚集情感回應概況，及接著基於對該經聚集情感回應概況中之該視訊項目之該第一部分之一情感回應的一幅度選擇該視訊項目之該第一部分。
  8. 如請求項1之方法，該方法進一步包含以下步驟：接收對其他視訊項目之情感回應概況；針對該等其他視訊項目中之每一者：將該等情感回應概況聚集至對該視訊項目之一經聚集情感回應概況，及基於對該經聚集情感回應概況中之該第一部分之一情感回應之一幅度選擇該視訊項目之該第一部分；以及 發送該等其他視訊項目之該各別第一部分之一或多者而不發送該等其他視訊項目之各別第二部分。
  9. 如請求項8所述之方法，其中發送該視訊項目之該第一部分之步驟包括以下步驟：將該等其他視訊項目之該等各別第一部分中之一或多者作為一單一視訊組合物來發送。
  10. 如請求項1所述之方法，其中該請求包括一搜索術語，且其中選擇該視訊項目之該第一部分之步驟包括以下步驟：在選擇該視訊項目之該第一部分時基於該搜索術語過濾。
  11. 一種用於將自較長視訊內容提取之部分視訊內容發送至請求計算裝置之計算裝置，該計算裝置包含：一邏輯子系統；及一資料保存子系統，該資料保存子系統保存藉由該邏輯子系統可執行之指令以：接收對複數個視訊項目之情感回應概況，每一情感回應概況藉由一特定觀眾對一特定視訊項目之情感回應之一時間相關性基於自一感測器接收之資料來產生，該感測器經調適以收集與該特定觀眾之情感回應相關之資料；針對每一視訊項目，使用對彼視訊項目之該等情感回應概況選擇該視訊項目之一第一部分，該第一部分經判定為比該視訊項目之一第二部分更情感刺激；及回應於一請求，將該等各別第一部分中之一或多者發送至另一計算裝置而不發送該等各別第二部分。
  12. 如請求項11所述之計算裝置，該計算裝置進一步包含指令，該等指令可執行以針對每一視訊項目產生一精彩畫面清單，該精彩畫面清單包括該視訊項目之該第一部分且該精彩畫面清單亦包括基於對該視訊項目之該等觀眾情感回應概況的該視訊項目之其他部分。
  13. 如請求項12所述之計算裝置，該計算裝置進一步包含指令，該等指令可執行以產生一觀眾反應精彩畫面片段清單，該觀眾反應精彩畫面片段清單包含視訊片段，該等視訊片段捕獲一或多個觀眾中之每一者對該特定視訊項目之複數個部分的反應，該特定視訊項目之複數個部分經由對該特定視訊項目之該等情感回應概況選擇。
  14. 如請求項11所述之計算裝置，該計算裝置進一步包含：用於每一視訊項目之指令，該等指令可執行以針對每一視訊項目：聚集該複數個觀眾之該等情感回應概況以形成對彼視訊項目之一經聚集情感回應概況；及基於對彼視訊項目之該經聚集情感回應概況中的彼視訊項目之該第一部分之一情感回應之一幅度選擇彼視訊項目之該第一部分。
  15. 如請求項14所述之計算裝置，該計算裝置進一步包含指令，該等指令可執行以針對每一視訊項目：產生針對彼視訊項目之該經聚集情感回應概況之一圖解描繪；及將該圖解描繪發送至一請求計算裝置以用於顯示。
  16. 如請求項14所述之計算裝置，該計算裝置進一步包含指令，該等指令可執行以：接收一社交網路之一識別，一請求觀眾屬於該社交網路；及基於識別：將一權重分配至該社交網路中之該等觀眾之該等情感回應概況，彼等權重中之每一者比分配至其他情感回應概況之權重更大，及基於一加權情感回應概況計算產生該幅度。
  17. 一種用於將自視訊項目選擇之請求部分發送至一請求觀眾的計算系統，該計算系統包含：一顯示器輸出端，該顯示器輸出端經配置以將視訊項目輸出至一顯示器裝置；一邏輯子系統，該邏輯子系統經由該顯示器輸出端可操作地與該顯示器裝置連接；及一資料保存子系統，該資料保存子系統保存指令，該等指令藉由該邏輯子系統可執行以：自一伺服器接收視訊項目之各別第一部分之一清單，該等各別第一部分基於複數個觀眾之觀眾情感回應概況中對彼等各別第一部分之一情感回應之一各別幅度而選擇，該複數個觀眾屬於一社交網路，該請求觀眾屬於該社交網路，對於一特定視訊項目，每一情感回應概況代表一特定觀眾在該特定觀眾觀看作為一整體之該視訊項目時對該視訊項目之情感回應之一時間相關性， 發送對一請求視訊項目之該第一部分之一請求，該請求視訊項目自視訊項目之各別第一部分之該清單選擇，自該伺服器接收該請求視訊項目之該第一部分而不接收該請求視訊項目之一第二部分，及輸出該請求視訊項目之該第一部分以用於顯示。
  18. 如請求項17之計算系統，該計算系統進一步包含：一輸入端，該輸入端經配置以自一影像感測器接收影像資料，該邏輯子系統經由該輸入端可操作地與深度相機相連；及其中該資料保存子系統進一步保存指令，該等指令可執行以：自該輸入端接收用於一視訊觀看環境之影像資料之一輸入，藉由比較包括於該影像資料中之觀眾情感顯示資料與關聯於規定情感狀態之預先界定參考情感顯示資料而根據影像資料之輸入產生該請求觀眾之情感回應資料，該情感回應資料包括該請求觀眾對該特定視訊內容項目之該第一部分之情感回應，該情感回應資料以該等規定情感狀態中之一或多者為特徵，將該請求觀眾之該情感回應資料發送至該伺服器，自該伺服器接收視訊項目之各別第一部分之一更新清單，該等各別第一部分之該更新清單基於該請求觀眾之該情感回應資料與複數個觀眾之該等觀眾情感回應概況的一相關性而選擇，該複數個觀眾屬於該社交網路。
  19. 如請求項17所述之計算系統，該計算系統進一步包含指令以針對該請求視訊項目接收觀眾對該請求視訊項目之情感回應之一圖解描繪且輸出該圖解描繪以用於顯示。
  20. 如請求項19所述之計算系統，該計算系統進一步包含指令以自該伺服器接收一觀眾反應精彩畫面片段清單，該觀眾反應精彩畫面片段清單包含視訊片段，該等視訊片段捕獲一或多個觀眾中之每一者對經由該等觀眾情感回應概況選擇之該請求視訊項目之複數個部分的反應。
TW101113799A 2011-06-17 2012-04-18 基於環境感測之視訊精彩畫面識別 TW201301891A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/163,379 US20120324491A1 (en) 2011-06-17 2011-06-17 Video highlight identification based on environmental sensing

Publications (1)

Publication Number Publication Date
TW201301891A true TW201301891A (zh) 2013-01-01

Family

ID=47354842

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101113799A TW201301891A (zh) 2011-06-17 2012-04-18 基於環境感測之視訊精彩畫面識別

Country Status (7)

Country Link
US (1) US20120324491A1 (zh)
EP (1) EP2721831A4 (zh)
JP (1) JP2014524178A (zh)
KR (1) KR20140045412A (zh)
CN (1) CN103609128A (zh)
TW (1) TW201301891A (zh)
WO (1) WO2012174381A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104461222A (zh) * 2013-09-16 2015-03-25 联想(北京)有限公司 一种信息处理的方法和电子设备
US10511888B2 (en) 2017-09-19 2019-12-17 Sony Corporation Calibration system for audience response capture and analysis of media content

Families Citing this family (184)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8898316B2 (en) * 2007-05-30 2014-11-25 International Business Machines Corporation Enhanced online collaboration system for viewers of video presentations
US9190110B2 (en) 2009-05-12 2015-11-17 JBF Interlude 2009 LTD System and method for assembling a recorded composition
US11232458B2 (en) 2010-02-17 2022-01-25 JBF Interlude 2009 LTD System and method for data mining within interactive multimedia
US10143414B2 (en) 2010-06-07 2018-12-04 Affectiva, Inc. Sporadic collection with mobile affect data
US10799168B2 (en) 2010-06-07 2020-10-13 Affectiva, Inc. Individual data sharing across a social network
US10111611B2 (en) 2010-06-07 2018-10-30 Affectiva, Inc. Personal emotional profile generation
US11823055B2 (en) 2019-03-31 2023-11-21 Affectiva, Inc. Vehicular in-cabin sensing using machine learning
US11484685B2 (en) 2010-06-07 2022-11-01 Affectiva, Inc. Robotic control using profiles
US10922567B2 (en) 2010-06-07 2021-02-16 Affectiva, Inc. Cognitive state based vehicle manipulation using near-infrared image processing
US10627817B2 (en) 2010-06-07 2020-04-21 Affectiva, Inc. Vehicle manipulation using occupant image analysis
US11587357B2 (en) 2010-06-07 2023-02-21 Affectiva, Inc. Vehicular cognitive data collection with multiple devices
US10869626B2 (en) 2010-06-07 2020-12-22 Affectiva, Inc. Image analysis for emotional metric evaluation
US9934425B2 (en) 2010-06-07 2018-04-03 Affectiva, Inc. Collection of affect data from multiple mobile devices
US11704574B2 (en) 2010-06-07 2023-07-18 Affectiva, Inc. Multimodal machine learning for vehicle manipulation
US11887352B2 (en) 2010-06-07 2024-01-30 Affectiva, Inc. Live streaming analytics within a shared digital environment
US11657288B2 (en) 2010-06-07 2023-05-23 Affectiva, Inc. Convolutional computing using multilayered analysis engine
US11465640B2 (en) 2010-06-07 2022-10-11 Affectiva, Inc. Directed control transfer for autonomous vehicles
US10911829B2 (en) * 2010-06-07 2021-02-02 Affectiva, Inc. Vehicle video recommendation via affect
US10779761B2 (en) 2010-06-07 2020-09-22 Affectiva, Inc. Sporadic collection of affect data within a vehicle
US10614289B2 (en) 2010-06-07 2020-04-07 Affectiva, Inc. Facial tracking with classifiers
US11073899B2 (en) 2010-06-07 2021-07-27 Affectiva, Inc. Multidevice multimodal emotion services monitoring
US11017250B2 (en) 2010-06-07 2021-05-25 Affectiva, Inc. Vehicle manipulation using convolutional image processing
US11935281B2 (en) 2010-06-07 2024-03-19 Affectiva, Inc. Vehicular in-cabin facial tracking using machine learning
US10897650B2 (en) 2010-06-07 2021-01-19 Affectiva, Inc. Vehicle content recommendation using cognitive states
US11430561B2 (en) 2010-06-07 2022-08-30 Affectiva, Inc. Remote computing analysis for cognitive state data metrics
US11232290B2 (en) 2010-06-07 2022-01-25 Affectiva, Inc. Image analysis using sub-sectional component evaluation to augment classifier usage
US10628741B2 (en) 2010-06-07 2020-04-21 Affectiva, Inc. Multimodal machine learning for emotion metrics
US10108852B2 (en) 2010-06-07 2018-10-23 Affectiva, Inc. Facial analysis to detect asymmetric expressions
US11393133B2 (en) 2010-06-07 2022-07-19 Affectiva, Inc. Emoji manipulation using machine learning
US11056225B2 (en) 2010-06-07 2021-07-06 Affectiva, Inc. Analytics for livestreaming based on image analysis within a shared digital environment
US10074024B2 (en) 2010-06-07 2018-09-11 Affectiva, Inc. Mental state analysis using blink rate for vehicles
US11292477B2 (en) 2010-06-07 2022-04-05 Affectiva, Inc. Vehicle manipulation using cognitive state engineering
US10592757B2 (en) 2010-06-07 2020-03-17 Affectiva, Inc. Vehicular cognitive data collection using multiple devices
US11067405B2 (en) 2010-06-07 2021-07-20 Affectiva, Inc. Cognitive state vehicle navigation based on image processing
US10796176B2 (en) 2010-06-07 2020-10-06 Affectiva, Inc. Personal emotional profile generation for vehicle manipulation
US11700420B2 (en) 2010-06-07 2023-07-11 Affectiva, Inc. Media manipulation using cognitive state metric analysis
US10474875B2 (en) 2010-06-07 2019-11-12 Affectiva, Inc. Image analysis using a semiconductor processor for facial evaluation
US10401860B2 (en) 2010-06-07 2019-09-03 Affectiva, Inc. Image analysis for two-sided data hub
US10289898B2 (en) * 2010-06-07 2019-05-14 Affectiva, Inc. Video recommendation via affect
US11511757B2 (en) 2010-06-07 2022-11-29 Affectiva, Inc. Vehicle manipulation with crowdsourcing
US10204625B2 (en) 2010-06-07 2019-02-12 Affectiva, Inc. Audio analysis learning using video data
US11430260B2 (en) 2010-06-07 2022-08-30 Affectiva, Inc. Electronic display viewing verification
US10628985B2 (en) 2017-12-01 2020-04-21 Affectiva, Inc. Avatar image animation using translation vectors
US11151610B2 (en) 2010-06-07 2021-10-19 Affectiva, Inc. Autonomous vehicle control using heart rate collection based on video imagery
US10843078B2 (en) 2010-06-07 2020-11-24 Affectiva, Inc. Affect usage within a gaming context
US10517521B2 (en) 2010-06-07 2019-12-31 Affectiva, Inc. Mental state mood analysis using heart rate collection based on video imagery
US9503786B2 (en) * 2010-06-07 2016-11-22 Affectiva, Inc. Video recommendation using affect
US11410438B2 (en) 2010-06-07 2022-08-09 Affectiva, Inc. Image analysis using a semiconductor processor for facial evaluation in vehicles
US11318949B2 (en) 2010-06-07 2022-05-03 Affectiva, Inc. In-vehicle drowsiness analysis using blink rate
US10482333B1 (en) 2017-01-04 2019-11-19 Affectiva, Inc. Mental state analysis using blink rate within vehicles
US8760395B2 (en) 2011-05-31 2014-06-24 Microsoft Corporation Gesture recognition techniques
US8635637B2 (en) 2011-12-02 2014-01-21 Microsoft Corporation User interface presenting an animated avatar performing a media reaction
US8943526B2 (en) * 2011-12-02 2015-01-27 Microsoft Corporation Estimating engagement of consumers of presented content
US9100685B2 (en) 2011-12-09 2015-08-04 Microsoft Technology Licensing, Llc Determining audience state or interest using passive sensor data
CA2775700C (en) 2012-05-04 2013-07-23 Microsoft Corporation Determining a future portion of a currently presented media program
US10762582B2 (en) 2012-07-19 2020-09-01 Comcast Cable Communications, Llc System and method of sharing content consumption information
US9247225B2 (en) * 2012-09-25 2016-01-26 Intel Corporation Video indexing with viewer reaction estimation and visual cue detection
US20140096167A1 (en) * 2012-09-28 2014-04-03 Vringo Labs, Inc. Video reaction group messaging with group viewing
US9032434B2 (en) * 2012-10-12 2015-05-12 Google Inc. Unsupervised content replay in live video
US9338508B2 (en) 2012-10-23 2016-05-10 Google Technology Holdings LLC Preserving a consumption context for a user session
US8832721B2 (en) * 2012-11-12 2014-09-09 Mobitv, Inc. Video efficacy measurement
US9544647B2 (en) 2012-11-21 2017-01-10 Google Technology Holdings LLC Attention-based advertisement scheduling in time-shifted content
KR20140072720A (ko) * 2012-12-05 2014-06-13 삼성전자주식회사 콘텐츠 제공 장치, 콘텐츠 제공 방법, 영상표시장치 및 컴퓨터 판독가능 기록매체
EP2929690A4 (en) * 2012-12-07 2016-07-20 Hewlett Packard Entpr Dev Lp GENERATION OF MULTIMODAL OBJECTS FROM USER REACTIONS ON MEDIA
US9721010B2 (en) 2012-12-13 2017-08-01 Microsoft Technology Licensing, Llc Content reaction annotations
KR20140094336A (ko) * 2013-01-22 2014-07-30 삼성전자주식회사 사용자 감정 추출이 가능한 전자기기 및 전자기기의 사용자 감정 추출방법
US9749710B2 (en) * 2013-03-01 2017-08-29 Excalibur Ip, Llc Video analysis system
US9292923B2 (en) 2013-03-06 2016-03-22 The Nielsen Company (Us), Llc Methods, apparatus and articles of manufacture to monitor environments
US9729920B2 (en) * 2013-03-15 2017-08-08 Arris Enterprises, Inc. Attention estimation to control the delivery of data and audio/video content
FR3004054A1 (fr) * 2013-03-26 2014-10-03 France Telecom Generation et restitution d'un flux representatif d'un contenu audiovisuel
US9681186B2 (en) * 2013-06-11 2017-06-13 Nokia Technologies Oy Method, apparatus and computer program product for gathering and presenting emotional response to an event
JP6191278B2 (ja) * 2013-06-26 2017-09-06 カシオ計算機株式会社 情報処理装置、コンテンツ課金システム及びプログラム
US9264770B2 (en) * 2013-08-30 2016-02-16 Rovi Guides, Inc. Systems and methods for generating media asset representations based on user emotional responses
US10297287B2 (en) 2013-10-21 2019-05-21 Thuuz, Inc. Dynamic media recording
JP6154728B2 (ja) * 2013-10-28 2017-06-28 日本放送協会 視聴状態推定装置およびそのプログラム
CN104681048A (zh) * 2013-11-28 2015-06-03 索尼公司 多媒体读取控制装置、曲线获取装置、电子设备、曲线提供装置及方法
US20160234551A1 (en) * 2013-12-02 2016-08-11 Dumbstruck, Inc. Video reaction processing
EP2882194A1 (en) * 2013-12-05 2015-06-10 Thomson Licensing Identification of a television viewer
US9426525B2 (en) * 2013-12-31 2016-08-23 The Nielsen Company (Us), Llc. Methods and apparatus to count people in an audience
CN104918067A (zh) * 2014-03-12 2015-09-16 乐视网信息技术（北京）股份有限公司 对视频热度进行曲线处理的方法和系统
CN108742560A (zh) * 2014-03-14 2018-11-06 上海万泽精密铸造有限公司 采用干扰震动疗法的自闭症患者用随身佩戴装置
CN104837036B (zh) * 2014-03-18 2018-04-10 腾讯科技（北京）有限公司 生成视频看点的方法、服务器、终端及系统
US9653115B2 (en) 2014-04-10 2017-05-16 JBF Interlude 2009 LTD Systems and methods for creating linear video from branched video
CN104837059B (zh) * 2014-04-15 2019-01-08 腾讯科技（北京）有限公司 视频处理方法、装置和系统
US10070178B2 (en) * 2014-05-21 2018-09-04 Pcms Holdings, Inc. Methods and systems for contextual adjustment of thresholds of user interestedness for triggering video recording
US9832538B2 (en) * 2014-06-16 2017-11-28 Cisco Technology, Inc. Synchronizing broadcast timeline metadata
US9626103B2 (en) * 2014-06-19 2017-04-18 BrightSky Labs, Inc. Systems and methods for identifying media portions of interest
US11016728B2 (en) * 2014-07-09 2021-05-25 International Business Machines Corporation Enhancing presentation content delivery associated with a presentation event
US9305441B1 (en) 2014-07-11 2016-04-05 ProSports Technologies, LLC Sensor experience shirt
US9398213B1 (en) 2014-07-11 2016-07-19 ProSports Technologies, LLC Smart field goal detector
US9474933B1 (en) 2014-07-11 2016-10-25 ProSports Technologies, LLC Professional workout simulator
US9724588B1 (en) 2014-07-11 2017-08-08 ProSports Technologies, LLC Player hit system
WO2016007970A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Whistle play stopper
WO2016007969A1 (en) 2014-07-11 2016-01-14 ProSports Technologies, LLC Playbook processor
EP3186969A1 (en) * 2014-08-29 2017-07-05 Sling Media Inc. Systems and processes for delivering digital video content based upon excitement data
US10264175B2 (en) 2014-09-09 2019-04-16 ProSports Technologies, LLC Facial recognition for event venue cameras
US9792957B2 (en) 2014-10-08 2017-10-17 JBF Interlude 2009 LTD Systems and methods for dynamic video bookmarking
US10536758B2 (en) 2014-10-09 2020-01-14 Thuuz, Inc. Customized generation of highlight show with narrative component
US10419830B2 (en) 2014-10-09 2019-09-17 Thuuz, Inc. Generating a customized highlight sequence depicting an event
US11863848B1 (en) 2014-10-09 2024-01-02 Stats Llc User interface for interaction with customized highlight shows
US10433030B2 (en) 2014-10-09 2019-10-01 Thuuz, Inc. Generating a customized highlight sequence depicting multiple events
US10192583B2 (en) 2014-10-10 2019-01-29 Samsung Electronics Co., Ltd. Video editing using contextual data and content discovery using clusters
US11412276B2 (en) 2014-10-10 2022-08-09 JBF Interlude 2009 LTD Systems and methods for parallel track transitions
US9671862B2 (en) * 2014-10-15 2017-06-06 Wipro Limited System and method for recommending content to a user based on user's interest
CN104349206A (zh) * 2014-11-26 2015-02-11 乐视致新电子科技（天津）有限公司 一种电视信息处理方法、装置及系统
WO2016118848A1 (en) * 2015-01-22 2016-07-28 Clearstream. Tv, Inc. Video advertising system
JP6417232B2 (ja) * 2015-02-09 2018-10-31 日本放送協会 映像評価装置およびそのプログラム
WO2016144218A1 (en) * 2015-03-09 2016-09-15 Telefonaktiebolaget Lm Ericsson (Publ) Method, system and device for providing live data streams to content-rendering devices
JP2016191845A (ja) * 2015-03-31 2016-11-10 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US9659218B1 (en) 2015-04-29 2017-05-23 Google Inc. Predicting video start times for maximizing user engagement
US10749923B2 (en) 2015-06-08 2020-08-18 Apple Inc. Contextual video content adaptation based on target device
US10785180B2 (en) * 2015-06-11 2020-09-22 Oath Inc. Content summation
WO2016205734A1 (en) * 2015-06-18 2016-12-22 Faysee Inc. Communicating reactions to media content
US9785834B2 (en) * 2015-07-14 2017-10-10 Videoken, Inc. Methods and systems for indexing multimedia content
US10158983B2 (en) 2015-07-22 2018-12-18 At&T Intellectual Property I, L.P. Providing a summary of media content to a communication device
US9792953B2 (en) * 2015-07-23 2017-10-17 Lg Electronics Inc. Mobile terminal and control method for the same
US10607063B2 (en) * 2015-07-28 2020-03-31 Sony Corporation Information processing system, information processing method, and recording medium for evaluating a target based on observers
KR102376700B1 (ko) 2015-08-12 2022-03-22 삼성전자주식회사 비디오 컨텐츠 생성 방법 및 그 장치
US10460765B2 (en) 2015-08-26 2019-10-29 JBF Interlude 2009 LTD Systems and methods for adaptive and responsive video
CN106503022B (zh) * 2015-09-08 2020-12-01 北京邮电大学 推送推荐信息的方法和装置
US10057651B1 (en) * 2015-10-05 2018-08-21 Twitter, Inc. Video clip creation using social media
US10148808B2 (en) 2015-10-09 2018-12-04 Microsoft Technology Licensing, Llc Directed personal communication for speech generating devices
US9679497B2 (en) * 2015-10-09 2017-06-13 Microsoft Technology Licensing, Llc Proxies for speech generating devices
US10262555B2 (en) 2015-10-09 2019-04-16 Microsoft Technology Licensing, Llc Facilitating awareness and conversation throughput in an augmentative and alternative communication system
CN105898340A (zh) * 2015-11-30 2016-08-24 乐视网信息技术（北京）股份有限公司 现场直播中的关键点提示方法、服务器、用户终端和系统
US11128853B2 (en) 2015-12-22 2021-09-21 JBF Interlude 2009 LTD Seamless transitions in large-scale video
US9916866B2 (en) * 2015-12-22 2018-03-13 Intel Corporation Emotional timed media playback
US11164548B2 (en) 2015-12-22 2021-11-02 JBF Interlude 2009 LTD Intelligent buffering of large-scale video
CN105872765A (zh) * 2015-12-29 2016-08-17 乐视致新电子科技（天津）有限公司 制作视频集锦的方法、装置、电子设备、服务器及系统
US20170249558A1 (en) * 2016-02-29 2017-08-31 Linkedin Corporation Blending connection recommendation streams
CN107241622A (zh) * 2016-03-29 2017-10-10 北京三星通信技术研究有限公司 视频定位处理方法、终端设备及云端服务器
US11856271B2 (en) 2016-04-12 2023-12-26 JBF Interlude 2009 LTD Symbiotic interactive video
US10529379B2 (en) * 2016-09-09 2020-01-07 Sony Corporation System and method for processing video content based on emotional state detection
US10045076B2 (en) * 2016-11-22 2018-08-07 International Business Machines Corporation Entertainment content ratings system based on physical expressions of a spectator to scenes of the content
US11050809B2 (en) 2016-12-30 2021-06-29 JBF Interlude 2009 LTD Systems and methods for dynamic weighting of branched video paths
CN106802946B (zh) * 2017-01-12 2020-03-27 合一网络技术(北京)有限公司 视频分析方法及装置
CN107071579A (zh) * 2017-03-02 2017-08-18 合网络技术（北京）有限公司 多媒体资源处理方法及装置
AU2018263287A1 (en) * 2017-05-05 2020-01-02 5i Corporation Pty. Limited Devices, systems and methodologies configured to enable generation, capture, processing, and/or management of digital media data
US10922566B2 (en) 2017-05-09 2021-02-16 Affectiva, Inc. Cognitive state evaluation for vehicle navigation
CN108932451A (zh) * 2017-05-22 2018-12-04 北京金山云网络技术有限公司 音视频内容分析方法及装置
US11062359B2 (en) 2017-07-26 2021-07-13 Disney Enterprises, Inc. Dynamic media content for in-store screen experiences
JP6447681B2 (ja) * 2017-08-09 2019-01-09 カシオ計算機株式会社 情報処理装置、情報処理方法、及びプログラム
CN109547859B (zh) * 2017-09-21 2021-12-07 腾讯科技（深圳）有限公司 视频片段的确定方法和装置
US10636449B2 (en) * 2017-11-06 2020-04-28 International Business Machines Corporation Dynamic generation of videos based on emotion and sentiment recognition
KR102429901B1 (ko) 2017-11-17 2022-08-05 삼성전자주식회사 부분 영상을 생성하기 위한 전자 장치 및 그의 동작 방법
EP3503565B1 (en) * 2017-12-22 2022-03-23 Vestel Elektronik Sanayi ve Ticaret A.S. Method for determining of at least one content parameter of video data
US10453496B2 (en) * 2017-12-29 2019-10-22 Dish Network L.L.C. Methods and systems for an augmented film crew using sweet spots
US10783925B2 (en) 2017-12-29 2020-09-22 Dish Network L.L.C. Methods and systems for an augmented film crew using storyboards
US10834478B2 (en) * 2017-12-29 2020-11-10 Dish Network L.L.C. Methods and systems for an augmented film crew using purpose
US10257578B1 (en) 2018-01-05 2019-04-09 JBF Interlude 2009 LTD Dynamic library display for interactive videos
CN110062283A (zh) * 2018-01-18 2019-07-26 深圳光峰科技股份有限公司 一种播放影片的方法、影片播放机及影片服务器
US10419790B2 (en) * 2018-01-19 2019-09-17 Infinite Designs, LLC System and method for video curation
CN108391164B (zh) * 2018-02-24 2020-08-21 Oppo广东移动通信有限公司 视频解析方法及相关产品
US11373404B2 (en) 2018-05-18 2022-06-28 Stats Llc Machine learning for recognizing and interpreting embedded information card content
EP3787303A4 (en) * 2018-05-25 2021-12-08 Kim, Sukyung MULTI-WINDOW VIEWING SYSTEM WITH EDITOR FOR REACTION VIDEO AND PROCESS FOR GENERATING REACTION VIDEOS WITH IT
US11601721B2 (en) * 2018-06-04 2023-03-07 JBF Interlude 2009 LTD Interactive video dynamic adaptation and user profiling
US11264048B1 (en) 2018-06-05 2022-03-01 Stats Llc Audio processing for detecting occurrences of loud sound characterized by brief audio bursts
US11025985B2 (en) 2018-06-05 2021-06-01 Stats Llc Audio processing for detecting occurrences of crowd noise in sporting event television programming
CN110611824B (zh) * 2018-06-14 2021-12-24 连株式会社 精彩视频产生方法、使用其的精彩视频产生装置以及介质
US10701416B2 (en) * 2018-10-12 2020-06-30 Disney Enterprises, Inc. Content promotion through automated curation of content clips
JP6754412B2 (ja) * 2018-11-07 2020-09-09 スカパーＪｓａｔ株式会社 体験記録システム及び体験記録方法
JP2020077229A (ja) * 2018-11-08 2020-05-21 スカパーＪｓａｔ株式会社 コンテンツ評価システム及びコンテンツ評価方法
US10983812B2 (en) * 2018-11-19 2021-04-20 International Business Machines Corporation Replaying interactions with a graphical user interface (GUI) presented in a video stream of the GUI
US10943125B1 (en) 2018-12-13 2021-03-09 Facebook, Inc. Predicting highlights for media content
US10798425B1 (en) 2019-03-24 2020-10-06 International Business Machines Corporation Personalized key object identification in a live video stream
US11887383B2 (en) 2019-03-31 2024-01-30 Affectiva, Inc. Vehicle interior object management
WO2020242435A1 (en) * 2019-05-24 2020-12-03 Hewlett-Packard Development Company, L.P. Embedded indicators
CN110418148B (zh) * 2019-07-10 2021-10-29 咪咕文化科技有限公司 视频生成方法、视频生成设备及可读存储介质
US11490047B2 (en) 2019-10-02 2022-11-01 JBF Interlude 2009 LTD Systems and methods for dynamically adjusting video aspect ratios
US11798282B1 (en) 2019-12-18 2023-10-24 Snap Inc. Video highlights with user trimming
US11610607B1 (en) 2019-12-23 2023-03-21 Snap Inc. Video highlights with user viewing, posting, sending and exporting
US11769056B2 (en) 2019-12-30 2023-09-26 Affectiva, Inc. Synthetic data for neural network training using vectors
US11538499B1 (en) * 2019-12-30 2022-12-27 Snap Inc. Video highlights with auto trimming
US11245961B2 (en) 2020-02-18 2022-02-08 JBF Interlude 2009 LTD System and methods for detecting anomalous activities for interactive videos
US20210350139A1 (en) * 2020-05-11 2021-11-11 Nvidia Corporation Highlight determination using one or more neural networks
US12047637B2 (en) 2020-07-07 2024-07-23 JBF Interlude 2009 LTD Systems and methods for seamless audio and video endpoint transitions
CN114205534A (zh) * 2020-09-02 2022-03-18 华为技术有限公司 一种视频编辑方法及设备
US11843820B2 (en) * 2021-01-08 2023-12-12 Sony Interactive Entertainment LLC Group party view and post viewing digital content creation
US11750883B2 (en) * 2021-03-26 2023-09-05 Dish Network Technologies India Private Limited System and method for using personal computing devices to determine user engagement while viewing an audio/video program
US11997321B2 (en) * 2021-04-22 2024-05-28 Shopify Inc. Systems and methods for controlling transmission of live media streams
US11882337B2 (en) 2021-05-28 2024-01-23 JBF Interlude 2009 LTD Automated platform for generating interactive videos
US11849160B2 (en) * 2021-06-22 2023-12-19 Q Factor Holdings LLC Image analysis system
US11934477B2 (en) 2021-09-24 2024-03-19 JBF Interlude 2009 LTD Video player integration within websites
GB202219760D0 (en) * 2022-12-23 2023-02-08 Flok Health Ltd A method of generating video content

Family Cites Families (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6708335B1 (en) * 1999-08-18 2004-03-16 Webtv Networks, Inc. Tracking viewing behavior of advertisements on a home entertainment system
US9292516B2 (en) * 2005-02-16 2016-03-22 Sonic Solutions Llc Generation, organization and/or playing back of content based on incorporated parameter identifiers
CA2441639A1 (en) * 2001-03-29 2002-10-10 British Telecommunications Public Limited Company Image processing
US8561095B2 (en) * 2001-11-13 2013-10-15 Koninklijke Philips N.V. Affective television monitoring and control in response to physiological data
US6585521B1 (en) * 2001-12-21 2003-07-01 Hewlett-Packard Development Company, L.P. Video indexing based on viewers' behavior and emotion feedback
US7607097B2 (en) * 2003-09-25 2009-10-20 International Business Machines Corporation Translating emotion to braille, emoticons and other special symbols
EP1582965A1 (en) * 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
US20050289582A1 (en) * 2004-06-24 2005-12-29 Hitachi, Ltd. System and method for capturing and using biometrics to review a product, service, creative work or thing
US7689556B2 (en) * 2005-01-31 2010-03-30 France Telecom Content navigation service
US20060218573A1 (en) * 2005-03-04 2006-09-28 Stexar Corp. Television program highlight tagging
US20070214471A1 (en) * 2005-03-23 2007-09-13 Outland Research, L.L.C. System, method and computer program product for providing collective interactive television experiences
US20060224046A1 (en) * 2005-04-01 2006-10-05 Motorola, Inc. Method and system for enhancing a user experience using a user's physiological state
US7742111B2 (en) * 2005-05-06 2010-06-22 Mavs Lab. Inc. Highlight detecting circuit and related method for audio feature-based highlight segment detection
US20070203426A1 (en) * 2005-10-20 2007-08-30 Kover Arthur J Method and apparatus for obtaining real time emotional response data over a communications network
US20070150916A1 (en) * 2005-12-28 2007-06-28 James Begole Using sensors to provide feedback on the access of digital content
EP2007271A2 (en) * 2006-03-13 2008-12-31 Imotions - Emotion Technology A/S Visual attention and emotional response detection and display system
KR100763236B1 (ko) * 2006-05-09 2007-10-04 삼성전자주식회사 생체 신호를 이용하는 동영상 편집 장치 및 방법
US20080103907A1 (en) * 2006-10-25 2008-05-01 Pudding Ltd. Apparatus and computer code for providing social-network dependent information retrieval services
US20080155587A1 (en) * 2006-12-20 2008-06-26 General Instrument Corporation Video Content Targeting System and Method
JP2008205861A (ja) * 2007-02-20 2008-09-04 Matsushita Electric Ind Co Ltd 視聴質判定装置、視聴質判定方法、視聴質判定プログラム、および記録媒体
US20090088610A1 (en) * 2007-03-02 2009-04-02 Lee Hans C Measuring Physiological Response to Media for Viewership Modeling
US20080295126A1 (en) * 2007-03-06 2008-11-27 Lee Hans C Method And System For Creating An Aggregated View Of User Response Over Time-Variant Media Using Physiological Data
JP4539712B2 (ja) * 2007-12-03 2010-09-08 ソニー株式会社 情報処理端末、情報処理方法、およびプログラム
JP4538756B2 (ja) * 2007-12-03 2010-09-08 ソニー株式会社 情報処理装置、情報処理端末、情報処理方法、およびプログラム
JP5020838B2 (ja) * 2008-01-29 2012-09-05 ヤフー株式会社 視聴反応共有システム、視聴反応管理サーバ及び視聴反応共有方法
JPWO2010001512A1 (ja) * 2008-07-03 2011-12-15 パナソニック株式会社 印象度抽出装置および印象度抽出方法
JP2010026871A (ja) * 2008-07-22 2010-02-04 Nikon Corp 情報処理装置及び情報処理システム
US8925001B2 (en) * 2008-09-12 2014-12-30 At&T Intellectual Property I, L.P. Media stream generation based on a category of user expression
US20100107075A1 (en) * 2008-10-17 2010-04-29 Louis Hawthorne System and method for content customization based on emotional state of the user
JP2010206447A (ja) * 2009-03-03 2010-09-16 Panasonic Corp 視聴端末装置、サーバ装置および参加型番組共有システム
US8161504B2 (en) * 2009-03-20 2012-04-17 Nicholas Newell Systems and methods for memorializing a viewer's viewing experience with captured viewer images
US9083932B2 (en) * 2009-03-25 2015-07-14 Eloy Technology, Llc Method and system for providing information from a program guide
KR101708682B1 (ko) * 2010-03-03 2017-02-21 엘지전자 주식회사 영상표시장치 및 그 동작 방법.
US20110154386A1 (en) * 2009-12-22 2011-06-23 Telcordia Technologies, Inc. Annotated advertisement referral system and methods
US8438590B2 (en) * 2010-09-22 2013-05-07 General Instrument Corporation System and method for measuring audience reaction to media content
US20120174032A1 (en) * 2010-12-30 2012-07-05 Trusted Opionion, Inc. System and Method for Displaying Responses from a Plurality of Users to an Event
US9026476B2 (en) * 2011-05-09 2015-05-05 Anurag Bist System and method for personalized media rating and related emotional profile analytics
US8676937B2 (en) * 2011-05-12 2014-03-18 Jeffrey Alan Rapaport Social-topical adaptive networking (STAN) system allowing for group based contextual transaction offers and acceptances and hot topic watchdogging

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104461222A (zh) * 2013-09-16 2015-03-25 联想(北京)有限公司 一种信息处理的方法和电子设备
CN104461222B (zh) * 2013-09-16 2019-02-05 联想(北京)有限公司 一种信息处理的方法和电子设备
US10511888B2 (en) 2017-09-19 2019-12-17 Sony Corporation Calibration system for audience response capture and analysis of media content
US11218771B2 (en) 2017-09-19 2022-01-04 Sony Corporation Calibration system for audience response capture and analysis of media content

Also Published As

Publication number Publication date
KR20140045412A (ko) 2014-04-16
US20120324491A1 (en) 2012-12-20
WO2012174381A3 (en) 2013-07-11
EP2721831A4 (en) 2015-04-15
JP2014524178A (ja) 2014-09-18
CN103609128A (zh) 2014-02-26
EP2721831A2 (en) 2014-04-23
WO2012174381A2 (en) 2012-12-20

Similar Documents

Publication Publication Date Title
TW201301891A (zh) 基於環境感測之視訊精彩畫面識別
JP6121408B2 (ja) インタレストベースビデオストリーム
JP6132836B2 (ja) ビュアーフィードバックを介した広告選択
TWI558186B (zh) 基於環境感測之視訊選擇
US9749692B2 (en) Providing recommendations based upon environmental sensing
KR102025334B1 (ko) 검출된 물리적 표시를 통한 사용자 관심 결정
US20140337868A1 (en) Audience-aware advertising
CN102844812A (zh) 媒体内对象的社交上下文
KR20130125367A (ko) 콘텐츠의 시청자 기반 제공 및 맞춤화
US20140325540A1 (en) Media synchronized advertising overlay
WO2014179515A2 (en) Management of user media impressions
US11736780B2 (en) Graphically animated audience
EP2824630A1 (en) Systems and methods for obtaining user feedback to media content