TWI558186B - 基於環境感測之視訊選擇 - Google Patents

Description

基於環境感測之視訊選擇

本發明係關於基於環境感測之視訊選擇。

獲得用於視訊節目之即時回饋可能面臨各種挑戰。舉例而言，一些過去的方法利用樣本群組來提供回饋以廣播電視內容。接著，可用該回饋來導引未來的節目確定。然而，此等樣本群組的收視族群調查(demographics)可能依賴收集該回饋之實體的目標，且因此此等樣本群組的收視族群調查可能在做關於在該目標收視族群調查之外的許多潛在檢視者之節目確定上沒有助益。再者，該回饋一般用在呈現用於未來節目開發之程式後，因此該回饋在收集該回饋時並未對當下正在觀看之節目發生作用。

在本發明中揭露的各種實施例係關於基於來自視訊檢視環境感測器之資料以選擇視訊項目。舉例而言，一實施例提供一種包含以下步驟之方法：從接收自視訊檢視環境感測器之資料來確定在該視訊檢視環境中每一檢視者之身分；基於該已確定之個人身分或眾人身分來獲得 視訊項目；及傳送該視訊項目至用於顯示之顯示裝置。

本發明內容係用來以一種簡化的形式來介紹概念之選擇，該等概念將在下文的實施方式中進一步描述。本摘要不欲識別請求標的之主要或重要特徵，本摘要亦不欲用以限制該請求標的之範圍。此外，該請求標的不限於解決在本說明書之任何部分中所提到之任何或所有缺點的實施。

廣播電視長期以來為單向通道(one-way channel)，藉此在無需提供檢視者回饋之即時回饋迴路下(feedback loop)推動節目及廣告，此種方式使得難以將內容個人化。因此，已揭露之實施例係關於包含視訊檢視環境感測器(例如，影像感測器、深度感測器、感音器，及潛在的其他感測器(例如，生物辨識感測器))之娛樂系統，以助於確定用於幫助檢視者發現內容之檢視者偏好。此等感測器可允許系統識別個人；此等感測器可允許系統偵測及了解人類情緒表達；此等感測器可允許系統在檢視者觀看視訊時提供即時回饋。基於該回饋，娛樂系統可確定檢視者對該視訊之喜好的量測，及提供針對該已察覺的檢視者情緒反應之即時反應(例如，推薦相似的內容、記錄在同時間播放於其他通道上之相似內容，及/或改變正在播放之內容)。

人類情緒表達的偵測可進一步有助於得知檢視者偏好，及在當娛樂系統係由多個檢視者所共享時個人化內容。舉例而言，當另一檢視者可接收戲劇的推薦時，一檢視者可接收運動的推薦。再者，可選擇及/或客製化內容以符合使用該顯示器之檢視者們的已結合之興趣。舉例而言，可藉由找出在用於彼等成員之每一者的檢視興趣之交集處的內容，來客製化內容以符合在房間內之家庭成員的興趣。

另外，當檢視者檢視內容時，偵測檢視者情緒回饋可允許及時更新內容(例如，藉由將長電影壓縮為較短的時間週期、藉由刪去無趣之場景、藉由提供不同已編輯版本之內容項目，及/或藉由更有效地將廣告傳遞(target)給檢視者)。

第1圖示意性圖示在視訊檢視環境100內觀看視訊項目150之檢視者160及162。連接至媒體計算裝置104之視訊檢視環境感測器系統106提供感測器資料給媒體計算裝置104以允許媒體計算裝置104偵測在視訊檢視環境100內之檢視者情緒反應。視訊檢視環境感測器系統106可包含任何合適合的感測器，該等感測器包含但不限於一或更多個影像感測器、深度感測器，及/或麥克風或其他感音器。計算裝置104可使用來自此等感測器的資料以偵測身體姿勢、手勢、演講，及/或檢視者之其他表達，媒體計算裝置104可使該等身體姿勢、手勢、演講，及/或檢視者之其他表達與人類情感顯示有關聯。 我們將瞭解，在本發明中所使用的術語「人類情感顯示」可代表人類針對正在檢視之內容的任何可偵測之反應，包含但不限於是否有意識的或潛意識的人類情緒表達及/或可偵測的人類情緒行為之顯示(例如，臉部的、手勢的，及聲音的顯示)。

媒體計算裝置104可處理接收自感測器系統106的資料，以產生由檢視者所檢視的視訊項目與每一檢視者針對該視訊項目之情緒反應間的時間關係。如以下以更詳細方式說明，可將此等關係記錄為用於特定視訊項目之檢視者情緒反應輪廓，且可將此等關係包含在對檢視者之視訊興趣進行分類的檢視興趣輪廓中。此舉可允許擷取及使用在檢視方(viewing party)中之複數個檢視者之該等檢視興趣輪廓來選出潛在較大興趣的項目，以用於被當下觀眾所檢視。

作為一個更具體的實例，接收自檢視環境感測器系統106之影像資料可捕捉檢視者之人類情緒行為的意識顯示(例如，蜷縮或蓋住檢視者的臉的檢視者160之影像)。作為回應，該檢視者針對該視訊項目的情緒反應輪廓可指示該檢視者在該項目期間的彼時係為恐懼的。該影像資料亦可包含人類情緒狀態之潛意識顯示。在該場景下，影像資料可顯示在視訊項目期間的特定時間時使用者自該顯示器移開目光。作為回應，該檢視者針對該視訊項目之情緒反應輪廓可指示在彼時該使用者覺得很乏味或思想不集中。可使用眼球追蹤、臉部姿勢特徵化， 及其他適合技術來判斷檢視者的情緒刺激及與視訊項目150契合的程度。

在一些實施例中，影像感測器可收集在可診斷人類生理狀況之光譜範圍內之光。舉例而言，可用紅外線來估計在身體內之血液氧氣程度及/或心率程度。接著，可利用此等程度以估計該人的情緒刺激。

另外，在一些實施例中，可使用位於其他裝置而非在檢視環境感測器系統106中之感測器來提供輸入至媒體計算裝置104。舉例而言，在一些實施例中，包含在視訊檢視環境100內之檢視者160所持有的移動計算裝置(例如，行動電話、膝上型電腦，及平板電腦)中之加速器可偵測用於該檢視者的以手勢為主之情緒表達。

第1至3圖示意性圖示在三個連續時間處之不同的視訊項目，該等視訊項目係被選出以回應在檢視觀眾選舉區及一或更多個檢視者之情緒反應中之已偵測的改變。在第1圖中，圖示檢視者160及162正看著一部動作片。在該動作片期間，視訊檢視環境感測器系統106提供捕捉自視訊檢視環境100之感測器資料給媒體計算裝置104。

接著，在第2圖中，媒體計算裝置104已偵測到檢視者164的在場，及針對檢視者164而言，該動作片可能太強烈了。媒體計算裝置識別檢視者164；媒體計算裝置基於與檢視者160、162，及164的檢視興趣輪廓之關聯性，來獲得圖示於第2圖中之152處的另一視訊項目； 且媒體計算裝置將該另一視訊項目輸出至顯示裝置102。

接著，在第3圖中，檢視者162及164已離開視訊檢視環境100。確定檢視者160單獨處於檢視環境100後，媒體計算裝置104僅基於與檢視者160的興趣之關聯性來獲得視訊項目154。如該情境所示，根據來在視訊檢視環境100內觀看顯示器裝置102之檢視者的選舉區(及興趣)來更新該視訊項目可提供強化的檢視體驗及促進探索用於具有混和興趣的觀眾之內容。接著，相較於傳統開迴路廣播電視，檢視者可能較少改變頻道，且因此檢視者可能潛在地更有可能檢視廣告。

基於檢視者160之個別的身分與情緒輪廓，上述簡短的情境與視訊項目150之選擇相關。另外，在一些實施例中，可使用即時情緒反應資料來更新當下正在檢視之視訊內容項目。舉例而言，基於針對視訊項目之即時情緒反應，正在顯示之該項目之版本(例如，內容已編輯與內容未編輯)可能改變。作為一個更具體的實例，若媒體電腦104偵測到檢視者160因視訊項目150中之粗話而變得尷尬，則媒體計算裝置104可獲得具有已將粗話編輯去除之已更新版本。在另一實例中，若視訊檢視環境感測器系統106偵測到檢視者160詢問檢視者162在視訊項目150中之人物剛說了甚麼，則媒體計算裝置104可將該問題解譯為重播視訊項目150之相關部分的請求，及重播該部分以回應該請求。

第4A至4D圖圖示一流程圖，該流程圖描述在視訊檢 視環境中提供視訊項目至檢視者之方法400的實施例。我們將體會，可由包含但不限於經描述於第1至3圖中及在本發明其餘處之該等實施例之任何適合硬體來實施方法400。如在第4A圖中所圖示，媒體計算裝置104包含資料持有(data-holding)子系統114及邏輯子系統116，其中資料持有子系統114可持有可由邏輯子系統116所執行之指令以實施方法400之各種程序。此等指令亦可經持有於可移除式儲存媒體118上。同樣地，每一圖示於第4A圖中之伺服器計算裝置130及移動計算裝置140之實施例包含資料持有子系統134及144及邏輯子系統136及146，且該伺服器計算裝置130及移動計算裝置140之實施例亦可能包含或經配置以分別讀取及/或寫入可移除式電腦儲存媒體138及148。此等資料持有子系統、邏輯子系統，及電腦儲存媒體之態樣在下文以更詳細內容來描述。

如上所提，在一些實施例中，可提供來自在檢視者之移動裝置上的感測器之感測器資料給媒體計算裝置。另外，可提供與正在基礎檢視環境顯示器上觀看的視訊項目相關的補充內容給該檢視者的行動裝置。適合的移動計算裝置包含但不限於行動電話、可攜式個人計算裝置(例如，膝上型、平板，及其他該等計算裝置)。所以，在一些實施例中，方法400可包含，在402處，傳送來自屬於在視訊檢視環境中之檢視者之移動計算裝置的請求至媒體計算裝置以用該媒體計算裝置來註冊移動計算 裝置，及在404處，註冊該移動計算裝置。在一些此等實施例中，可用檢視者之個人輪廓來註冊該移動計算裝置。

在406處，方法400包含收集來自視訊檢視環境感測器系統106及潛在來自行動裝置140的感測器資料，及在408處，傳送該感測器資料至接收該感測器資料之輸入的該媒體計算裝置。可收集任何適合的感測器資料，該等感測器資料包含但不限於影像資料、深度資料、聲音資料，及/或生物特徵資料。

在410處，方法400包含自該感測器資料之輸入來確定在該視訊檢視環境中之每一該複數個檢視者的身分。在一些實施例中，可自藉由該感測器收集之影像資料與儲存在檢視者之個人輪廓中之影像資料的比較來建立檢視者之身分。舉例而言，可使用介於包含在自該視訊檢視環境收集之影像資料中之臉與儲存在檢視者之輪廓中的影像間的臉部相似性比較來建立該檢視者之身分。在此實例中，該檢視者可以不用密碼來登入。相反地，該媒體計算裝置可偵測該檢視者、檢查該檢視者之輪廓的存在，且若輪廓存在則確認該檢視者之身分。可自聲音資料，及/或任何其他適合的資料來確定檢視者的身分。

在412處，方法400包含基於在該視訊檢視環境中之該複數個檢視者之身分來獲得用於顯示之視訊項目。我們將體會，412之態樣可發生在該媒體計算裝置處及/或在各種實施例之伺服器計算裝置處。因此，可發生在任 一裝置上之態樣在第4A圖中圖示為共享一共用元件符號，雖然我們體會到可執行程序的位置可能改變。因此，在執行412之態樣於伺服器計算裝置處的實施例中，412包含在413處，傳送該複數個檢視者之已確定之身分至伺服器，及在417處，接收來自該伺服器之該視訊項目。在執行412之態樣於媒體計算裝置處的實施例中，可省略程序413及417。

獲得該視訊項目之步驟可包含在414處，使儲存用於每一該複數個檢視者之檢視興趣輪廓互相有關聯，及使該等檢視興趣輪廓與關於可用視訊項目之資訊有關聯，然後在416處，基於該關聯性來選擇該視訊項目。舉例而言，在一些實施例中，可基於用於該視訊檢視環境中之該等檢視者之該等檢視興趣輪廓之交集來選出該視訊項目，如以下詳述。

檢視興趣輪廓對檢視者針對視訊媒體之喜好及厭惡進行分類，該分類係自該檢視者針對先前媒體體驗之情緒反應來判斷。檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓使該檢視者針對由該特定檢視者先前所檢視之視訊項目之情緒反應有時間上關聯。換句話說，該檢視者針對特定視訊項目之情緒反應輪廓組織該檢視者之情緒表達及行為顯示為在該視訊項目內之時間位置的函數。當該檢視者觀看更多視訊項目時，該檢視者之檢視興趣輪廓可能改變以反映改變該檢視者之嗜好及興趣如表達在該檢視者針對最近檢視之視訊項目 的情緒反應中。

第5圖示意性圖示檢視者情緒反應輪廓504及檢視興趣輪廓508之實施例。如在第5圖中所示，可由運作在一或更多個媒體計算裝置104上之語意探勘模組502及使用接收自一或更多個視訊檢視環境感測器之感測器資訊的伺服器計算裝置130來產生檢視者情緒反應輪廓504。使用來自該感測器之情緒反應資料及視訊項目資訊503(例如，識別特定視訊項目之元資料，該特定視訊項目係為當收集到該情緒反應輪廓時且在該視訊項目中發生該情緒反應處，該檢視者正在觀看的視訊項目)，語意探勘模組502產生檢視者情緒反應輪廓504，該情緒反應輪廓504捕捉該檢視者之情緒反應為在該視訊項目內之該時間位置之函數。

在圖示於第5圖中之該實例中，語意探勘模組502指定情緒識別給由該視訊檢視環境感測器所偵測到的各種行為及其他表達資料(例如，生理資料)。語意探勘模組502亦根據與該視訊項目同步之時間序列來將該檢視者之情緒表達編入索引(例如，藉由發生在該視訊項目內之各種事件、場景，及動作之時間)。因此，在圖示於第5圖之實例中，在視訊項目之時間索引1處，語意探勘模組502基於生理資料(例如，心率資料)及人類情緒顯示資料(例如，身體語言分數)來紀錄該檢視者感到乏味且思想不集中。在較晚的時間索引2處，檢視者情緒反應輪廓504指示該檢視者在該視訊項目中係快樂的且感到 有趣，當在時間索引3處時，該檢視者係恐懼的但該檢視者的注意力著迷地專注在該視訊項目上。

在一些實施例中，語意探勘模組502可經配置以在該檢視者針對視訊項目之情緒反應及該檢視者之一般情緒間作區別。舉例而言，在一些實施例中，語意探勘模組502可忽略，或語意探勘模組502可回報當該檢視者之注意力未集中在該顯示裝置上時偵測到的彼等人類感情的顯示期間該檢視者係為分心的。因此，作為一個示例性情境，若檢視者因為源自外部至該視訊檢視環境之喧噪的噪音而視覺上係為氣惱，語意探勘模組502可經配置不把該已偵測的氣惱歸因於該視訊項目，且語意探勘模組502可能不記錄該氣惱於針對該視訊項目之該檢視者的情緒反應輪廓內之該時間位置處。在其內包含影像感測器為視訊檢視環境感測器之實施例中，適合的眼球追蹤及/或臉部位置追蹤技術可用以(潛在地與該視訊檢視環境之深度地圖搭配組合)確定該檢視者之注意力集中在該顯示裝置及/或該視訊項目上之程度。

第5圖亦圖示檢視者針對視訊項目之情緒反應輪廓504，該情緒反應輪廓504經圖形化呈現於506處。當檢視者情緒反應輪廓506呈現為單一變數時間關聯性時，我們將體會代表該檢視者之情緒反應之複數個變數可經追蹤為時間函數。

檢視者對於視訊項目之情緒反應輪廓504可經分析以確定在該檢視者中引起正面或負面反應之場景/物件/ 事件之形式。舉例而言，在圖示於第5圖中之實施例，包含場景描述之視訊項目資訊係與感測器資料及該檢視者之情緒反應有關聯。接著可將此分析之結果收集於檢視興趣輪廓508中。藉由執行如在510處所示的用於其他由該檢視者所檢視之其他內容項目的該分析，且接著確定介於引起類似情緒反應之不同內容項目的部分間之相似性，可確定檢視者之潛在的喜歡及厭惡，然後該等喜歡及厭惡可用以找出用於未來檢視之內容建議。舉例而言，第5圖圖示該檢視者喜愛演員B勝於演員A及演員C，且該檢視者喜愛位置型態B勝於位置型態A。再者，可執行該等分析以用於在該視訊檢視環境中之複數個檢視者之每一者。接著，彼等分析的結果可自所有在場的檢視者匯總及彼等分析的結果可用以識別用於由該檢視方所檢視之視訊項目。

在一些實施例中，可應用附加的過濾器(例如，考量在場檢視者成員之年齡的年齡式過濾器等)以進一步過濾用於呈現之內容。舉例而言，在一場景中，視訊節目可自包含不適合所有年齡的檢視者之內容的版本轉換至所有年齡皆適合之版本以回應進入該視訊檢視環境之小孩(或另一個具有如此配置之檢視興趣輪廓的人)。在此情境中，可用一種明顯的無縫轉換來管理該轉換，以使得節目中之缺口不會發生。在另一情境中，可根據個人檢視偏好來使用適合的顯示器(例如，與3D眼鏡搭配之3D顯示器，或光楔式方向視訊顯示器，在該光楔式方向視 訊顯示器中，校準光係經由空間光調變器以具有產生不同影像之同步方式循序導至不同檢視者)來傳遞特定檢視者版本之視訊項目。因此，當成人同時檢視該視訊項目之更成熟版本及適合成人人口族群之廣告時，小孩可檢視該視訊項目之所有年齡皆適合之版本，且可觀賞適合兒童觀眾之廣告。

回到第4A圖，在一些實施例中，412包含在416處基於用於該複數個檢視者之每一者的檢視興趣輪廓的關聯性來選擇該視訊項目。在一些實施例中，使用者可選擇過濾用於此關聯性的資料；在另外的實施例中，可在沒有使用者輸入下執行此關聯性。舉例而言，在一些實施例中，該關聯性可藉由對在該視訊檢視環境之檢視者的檢視興趣輪廓加權而發生，以使得多數使用者可對於該結果感到滿意。

作為一個更具體的實例，在一些實施例中，該關聯性可與該等檢視者欲觀看的視訊項目類型相關。舉例而言，若該等檢視者欲觀看恐怖片，可基於該等檢視者已經歷並感到恐怖的先前視訊項目場景而使該等檢視興趣輪廓有關聯。另外或可替代地，在一些實施例中，該關聯性可基於其他適合的因素，例如，視訊項目型態(例如，卡通及真人電影、長篇電影及視訊短片等)。一旦選擇了視訊項目，則方法400包含在418處，傳送用於顯示之該視訊項目。

如上文所說明的，在一些實施例中，選擇視訊內容的 類似方法可用以更新視訊項目，該視訊項目係為當檢視者離開或加入該檢視方時，由檢視方所檢視之視訊項目。回到第4B圖，方法400包含在420處收集來自一或更多個視訊檢視環境感測器之附加的感測器資料，及方法400包含在422處傳送該感測器資料至接收該感測器資料之該媒體計算裝置。

在424處，方法400包含自該附加的感測器資料確定在該檢視環境中之該複數個檢視者之選舉區中之改變。作為更具體的實例，該媒體計算裝置確定新的檢視者是否已進入該檢視方或現存的檢視者是否已離開該檢視方，以使得正在播放的該視訊項目可更新至相較於原本的檢視方之下，該已改變之檢視方比較想看的視訊項目。

在一些實施例中，在檢視者未實際離開該視訊檢視環境下，該檢視者可能已決定要離開該檢視方。舉例而言，若已確定特定檢視者未專注於該視訊項目，則該檢視者被認為在建設性上(constructively)已離開該檢視方。因此，在一情境下，間歇注意該視訊項目之檢視者(例如，在該檢視者再次轉移該檢視者的視線之前，該檢視者把注意力集中在該顯示器的時間少於預先選擇的時間)可在不具有該檢視者的已有關聯性之檢視興趣輪廓下出現在該視訊檢視環境中。然而，該媒體計算裝置及/或該語意探勘模組可紀錄彼等佔據該檢視者注意力的該視訊項目之部分，且該媒體計算裝置及/或該語意探勘模組可因此來更新該檢視者的檢視興趣輪廓。

在426處，在確定選舉區中的改變後，方法400包含基於該複數個檢視者之該等身分來獲得已更新的視訊項目。如上所說明的，可在該媒體計算裝置及/或該伺服器計算裝置處執行426之態樣。因此，在執行426之態樣於伺服器計算裝置處之實施例中，426包含在427處，傳送用於該複數個檢視者之已確定的身分至伺服器，該等身分反映出在選舉區之該改變，及在433處，接收來自該伺服器之該已更新的視訊項目。在執行426之態樣於媒體計算裝置處之實施例中，可省略程序427及433。

在一些實施例中，426可包含，在428處，再次使用於該複數個檢視者之該等檢視興趣輪廓有關連，及在430處，在選舉區之該改變後，基於使該檢視興趣輪廓再次有關聯來選擇該已更新之視訊項目。在此等實施例中，如上所述的該再次有關聯之檢視興趣輪廓可用以選出項目，該等項目可吸引該新檢視方之該已結合檢視興趣。一旦選出該視訊項目，方法400包含，在434處，傳送用於顯示之該視訊項目。

在一些實施例中，該已選出的已更新視訊項目可為與當該檢視方選舉區改變時已經呈現之視訊項目不同版本之該視訊項目。舉例而言，根據加入該顯示方之檢視者之語言適應性，該已更新之視訊項目可為已編輯以顯示適合字幕之版本。在另一個實例中，該已更新之視訊項目可為已編輯以根據內容適應性(例如，若較年輕的檢視者已加入該檢視方)來省略粗話及/或暴力場景之版本。 因此，在一些實施例中，426可包含，在432處，根據與該視訊項目相關之觀眾適應性分級及該複數個檢視者之該等身分來更新該視訊項目。此等適應性分級可由個別檢視者及/或藉由內容建立者來配置，該適應性分級可提供針對該檢視者之調節內容選擇的方法。

在一些實施例中，該已選擇的已更新視訊項目可為與當該檢視方選舉區改變時已呈現之視訊項目不同的視訊項目。在此等實施例中，該等檢視者可看到同意用於檢視之該已更新之視訊項目的選擇及/或該等檢視者可看到自該等視訊項目中選擇的複數個已更新之視訊項目，該複數個已更新之視訊項目係基於使檢視興趣輪廓再次有關聯及/或觀眾適應性分級來選擇。

我們將體會，針對已獲得以用於顯示之該視訊項目的改變及更新可藉由其他適合的事件來觸發，且該等改變及更新不限制於藉由在檢視方選舉區中的改變來觸發。在一些實施例中，可基於在檢視者之情緒狀態中之改變來選擇已更新的視訊項目以回應正在檢視之該視訊項目。舉例而言，若視訊項目被該等檢視者察覺為無吸引力，則可選擇不同的視訊項目。因此，回到第4C圖，方法400包含，在436處，收集檢視環境感測器資料，及在438處，傳送該感測器資料至接收該感測器資料的該媒體計算裝置。

在440處，方法400包含使用該感測器資料來確定在特定檢視者針對該視訊項目的情緒反應中之改變。舉例 而言，在該視訊檢視環境感測器包含影像感測器的一些實施例中，確定在特定檢視者針對該視訊項目的情緒反應中之改變可基於該特定檢視者之情緒反應的影像資料。同樣地，亦可經由聲音資料、生物特徵資料等來偵測在情緒反應中的改變。另外或可替代地，在一些實施例中，在該特定檢視者之情緒反應中之改變可包含自感測器接收情緒反應資料，該感測器包含在該檢視者之移動計算裝置中。

在442處，方法400包含基於該特定檢視者之即時情緒反應來獲得用於顯示之已更新的視訊項目。如上所說明的，可執行442之態樣於媒體計算裝置及/或伺服器計算裝置處。因此，在執行442之態樣於伺服器計算裝置處的實施例中，442包含在443處，傳送該複數個檢視者之已確定之身分至伺服器，該等身分反映在選舉區之改變，及在452處，自該伺服器接收該已更新之視訊項目。在執行442之態樣於媒體計算裝置處的實施例中，可省略程序443及452。

在一些實施例中，442可包含在444處，以該特定檢視者針對該視訊項目之情緒反應來更新該特定檢視者之檢視興趣輪廓。更新該檢視者之檢視興趣輪廓可保持該檢視者之檢視興趣輪廓的現有狀態不變，反映隨著時間流逝及在不同檢視情況下，在該檢視者之檢視興趣中之改變。接著，可用該已更新的檢視興趣輪廓來選出在未來該檢視者可能更想看的視訊項目。

在一些實施例中，442可包含在446處，在更新該特定檢視者之檢視興趣輪廓之後及/或在偵測在該特定檢視者之情緒反應的改變之後，再次使該複數個檢視者之該等檢視興趣輪廓有關聯。因此，若該檢視者針對該視訊項目具有相反的情緒反應，使該等檢視興趣輪廓再次有關聯可導致更新正在顯示之視訊項目。舉例而言，可選擇且獲得用於顯示之不同的視訊項目或不同版本的當下視訊項目。

在一些實施例中，442可包含在448處，偵測用於重播部分該視訊項目之隱含請求的輸入，及選擇經重播之該部分視訊項目以做為回應。舉例而言，可確定已包含之該檢視者的情緒反應影響對應於困惑之播放。此等反應可視為用以重播部分該視訊項目之隱含請求(例如，當偵測到該反應時，正在呈現之部分)，且該使用者可再次看到檢視該場景之選擇。另外或可替代地，此等隱含請求之偵測可為根據上下文式的。舉例而言，已偵測的情緒反應可藉由超過一預先選擇的容忍度以自已預測的情緒反應改變(例如，藉由來自樣本觀眾之針對該視訊項目的所匯總情緒反應輪廓來預測)，暗示該檢視者並未了解該視訊項目之內容。在該等情況下，可選擇該視訊項目之相關部分以重播。

我們將瞭解，可用類似方式處理用於重播之外顯請求。外顯請求可包含檢視者發出用於重播的命令(例如，“play that back！”)及檢視者發出表示重播部分的願望(例 如，“what did she say？”)之意見。因此，在一些實施例中，450可包含，在444處，偵測用於重播部分該視訊項目之外顯請求的輸入，及選擇經重播之該部分視訊項目以做為回應。

回到第4D圖，一旦獲得已更新之視訊項目，方法400包含在454處，傳送用於顯示之該已更新的視訊項目。如上所述，當選擇接收在移動計算裝置上之主要及/或附加內容時，一些檢視者可在主要顯示器上(例如，電視或其他連接至媒體計算裝置之顯示器)觀看視訊項目。因此，454可包含在455處，傳送視訊項目(如開始傳送的或已更新的)至用於顯示之適合的移動計算裝置，及在456處，顯示該已更新之視訊項目。

在一些實施例中，如在458處所示，在用於該特定檢視者之該移動計算裝置上，可將基於特定檢視者之檢視興趣輪廓所選出的已更新視訊項目呈現給該檢視者。此舉可在無需中斷該檢視方的娛樂體驗的情況下，提供用於檢視者之微調內容的個人化傳遞。此舉亦可提供用於維持具有邊際興趣層級之檢視者與該視訊項目之銜接的方法。舉例而言，當在該檢視者之個人移動計算裝置上檢視該電影之字幕及/或當藉由連接至該移動計算裝置之耳機來聆聽該電影之不同音軌時，檢視者可與檢視方在該主要顯示裝置上觀看電影。在另一個實例中，一檢視者可經由該檢視者的移動計算裝置看到與出現在該視訊項目中喜愛的演員相關之附加內容，就像基於該檢視 者針對該演員的情緒反應來選擇一樣。同時，不同的檢視者可在該不同檢視者的移動計算裝置上看到與該視訊項目之外景拍攝場地相關的附加內容，可基於該不同檢視者針對在該視訊項目中該特定場景的情緒反應來選出該內容。如此一來，身為群體，該檢視方可繼續欣賞基於該檢視方之檢視興趣輪廓的關聯性所選出之視訊項目，但身為個體，該檢視方亦可接收已選出之附加內容來幫助該檢視方獲得更多出自於該體驗之樂趣。

如上所述，在一些實施例中，在本發明中所描述之該等方法及程序可與包含一或更多個電腦之計算系統作綁定。特別地，在本說明書中所描述之該等方法及程序可經實施為電腦應用程式、電腦服務、電腦應用程式介面、電腦程式庫，及/或其他電腦程式產品。

第4A圖以一種簡化方式來示例性圖示可執行一或更多個該等上述方法及程序之非限制性的計算系統。我們將瞭解，事實上在不悖離本發明之範圍下可使用任何電腦結構。在不同實施例中，計算系統可採用大型電腦、伺服器電腦、桌上型電腦、膝上型電腦、平板電腦、家用娛樂電腦、網路計算裝置、移動計算裝置、移動通訊裝置、遊戲裝置等之形式。

該計算系統包含邏輯子系統(例如，第4A圖之媒體計算裝置104之邏輯子系統116、第4A圖之移動計算裝置140之邏輯子系統146，及第4A圖之伺服器計算裝置130之邏輯子系統136)及資料保存子系統(例如，第4A 圖之媒體計算裝置104之資料保存子系統114、第4A圖之移動計算裝置140之資料保存子系統144，及第4A圖之伺服器計算裝置130之資料保存子系統134)。該計算系統可選擇性包含顯示子系統、通訊子系統，及/或其他未圖示於第4A圖中之元件。舉例而言，該計算系統亦可選擇性包含使用者輸入裝置(例如，鍵盤、滑鼠、遊戲控制器、攝影機、麥克風，及/或觸碰螢幕)。

該邏輯子系統可包含一或更多個經配置以執行一或更多個指令的實體裝置。舉例而言，該邏輯子系統亦可經配置以執行一或更多個指令，該一或更多個指令係為一或更多個應用程式、服務、程式、常式、程式庫、物件、元件、資料結構，或其他邏輯建構的一部分。此等指令可實施以執行任務、實施資料型態、轉換一或更多個裝置的狀態，或達到所欲結果之其他。

該邏輯子系統可包含一或更多個經配置以執行軟體指令之處理器。另外或可替代地，該邏輯子系統可包含一或更多個經配置以執行硬體或韌體指令之硬體或韌體邏輯機器。該邏輯子系統之處理器可為單核或多核，且在該處理器上執行之該等程式可經配置用於平行或分散式處理。該邏輯子系統可選擇性包含分散於二或更多個裝置之個別元件，該元件可遠端定位及/或該元件經配置以用於協調處理。該邏輯子系統之一或更多個態樣可在雲端計算配置中為虛擬化及由已配置的遠端可存取網路計算裝置所執行。

該資料保存子系統可包含一或更多個經配置以保存資料及/或指令的實體、非暫時性裝置，該等指令可由該邏輯子系統執行以實施在本說明書中所描述之方法與程序。當實施此等方法及程序時，可轉換該資料保存子系統之狀態(例如，保存不同資料)。

該資料保存子系統可包含可移除式媒體及/或內建裝置。該資料保存子系統可包含光學記憶裝置(例如，光碟、數位光碟、高畫質數位光碟、藍光光碟等)、半導體記憶裝置(例如，隨機存取記憶體、可抹除可規劃唯讀記憶體、電子可擦拭記憶體等)及/或磁性記憶體裝置(例如，硬碟驅動機、軟碟驅動機、磁帶機、磁性隨機存取記憶體(MRAM)等)等等。該資料保存子系統可包含具有一或更多個下列特性之裝置：揮發性、非揮發性、動態、靜態、讀/寫、唯讀、隨機存取、循序存取、位置可定址、檔案可定址，及內容可定址。在一些實施例中，可將該邏輯子系統及該資料保存子系統整合至一或更多個通用設備(例如，應用程式特定整合電路或單晶片系統(system on a chip))。

第4A圖亦以可移除式電腦儲存媒體形式(例如，第4A圖之媒體計算裝置104之可移除式電腦儲存媒體118、第4A圖之移動計算裝置140之可移除式電腦儲存媒體148，及第4A圖之伺服器計算裝置130之可移除式電腦儲存媒體138)來圖示該資料保存子系統的一種態樣，該可移除式電腦儲存媒體可用於儲存及/或轉換資料及/或 指令，該等指令可執行以實施在本說明書中所描述之方法及程序。可移除式電腦儲存媒體可採用光碟、數位光碟、高畫質數位光碟、藍光光碟、電子可擦拭記憶體，及/或軟性磁碟等的形式。

我們將體會，該資料保存子系統包含一或更多個實體、非暫時性裝置。相對地，在一些實施例中，可藉由純信號(例如，電磁信號、光信號等)以一種暫時性方式來傳播在本說明書中所描述之該等指令之態樣，該信號在至少一有限期間內並非由實體裝置所持有。此外，係屬於本發明之資料及/或其他形式之資訊可藉由純信號來傳播。

該等術語「模組」、「程式」，及「引擎」可用以描述經實施以執行一或更多個特定功能之計算系統之態樣。在一些情況下，可經由執行由該資料保存子系統所保存之指令的邏輯子系統來實例化該模組、程式，或引擎。我們將瞭解，可自相同的應用程式、服務、碼塊、物件、函式庫、常式、應用程式介面、函數等來實例化不同的模組、程式，及/或引擎。同樣地，可藉由不同的應用程式、服務、碼塊、物件、常式、應用程式介面、函數等來實例化相同的模組、程式，及/或引擎。該等術語「模組」、「程式」，及「引擎」意謂要包含可執行之檔案、資料檔案、函式庫、驅動程式、腳本、資料庫紀錄等的個體或群組。

我們將體會，在本發明中所使用之「service」可為可 跨過多個用戶通信期執行的應用程式且在本發明中所使用之「service」可被一或更多個系統元件、程式碼及/或其他服務所用。在一些實施中，服務可在伺服器上運行以回應來自客戶端之請求。

當已包含時，可使用顯示器子系統以呈現由該資料保存子系統所保存之資料的視覺化表示。當本說明書中所述的方法及程序改變該由該資料保存子系統所保存之資料，並因此轉換該資料保存子系統之狀態時，該顯示器子系統之狀態同樣地可轉換以視覺化表示在下層資料中之改變。該顯示器子系統可包含一或更多個實際上使用任何技術形式之顯示裝置。此等顯示裝置在共享的範圍內可與該邏輯子系統及/或該資料保存子系統作結合，或此等顯示裝置可為周邊顯示裝置。

因為許多變化係為可能的，我們將瞭解，在本發明中所描述之該等配置及/或方法在本質上係為示例性，且該等特定實施例或實例並不認為是限制的意思。在本發明中所描述之該等特定的常式或方法可代表一或更多個任何數目的處理策略。就此而言，各種已說明之步驟可以已說明之序列、其他序列、平行，或在一些省略的情況下執行。同樣地，可改變該等上述程序之順序。

本發明之請求標的包含各種在本說明書中所揭露之程序、系統，及配置之所有新穎的及非顯而易知的組合及次組合及在本說明書中所揭露之其他特徵、函數、步驟，及/或特性，及任何及所有上述各者之均等物。

100‧‧‧視訊檢視環境

102‧‧‧顯示裝置

104‧‧‧媒體計算裝置

106‧‧‧視訊檢視環境感測器系統

114‧‧‧資料持有子系統

116‧‧‧邏輯子系統

118‧‧‧可移除式儲存媒體

130‧‧‧伺服器計算裝置

134‧‧‧資料持有子系統

136‧‧‧邏輯子系統

138‧‧‧可移除式電腦儲存媒體

140‧‧‧移動計算裝置

144‧‧‧資料持有子系統

146‧‧‧邏輯子系統

148‧‧‧可移除式電腦儲存媒體

150‧‧‧視訊項目

152‧‧‧視訊項目

160‧‧‧檢視者

162‧‧‧檢視者

164‧‧‧檢視者

400‧‧‧方法

402‧‧‧動作

404‧‧‧動作

406‧‧‧動作

408‧‧‧動作

410‧‧‧步驟

412‧‧‧步驟

413‧‧‧動作

414‧‧‧步驟

416‧‧‧步驟

417‧‧‧步驟

418‧‧‧步驟

420‧‧‧步驟

422‧‧‧動作

424‧‧‧步驟

426‧‧‧步驟

427‧‧‧動作

428‧‧‧步驟

430‧‧‧步驟

432‧‧‧步驟

433‧‧‧動作

434‧‧‧步驟

436‧‧‧步驟

438‧‧‧動作

440‧‧‧步驟

442‧‧‧步驟

443‧‧‧動作

444‧‧‧步驟

446‧‧‧步驟

448‧‧‧步驟

450‧‧‧步驟

452‧‧‧動作

454‧‧‧步驟

455‧‧‧動作

456‧‧‧步驟

458‧‧‧步驟

502‧‧‧語意探勘模組

503‧‧‧視訊項目資訊

504‧‧‧情緒反應輪廓

506‧‧‧情緒反應輪廓之圖形

508‧‧‧檢視興趣輪廓

510‧‧‧動作

第1圖示意性圖示根據本發明之實施例之檢視者，該等檢視者正在觀看視訊檢視環境內之視訊項目。

第2圖示意性圖示在新增檢視者及改變視訊內容後，第1圖之視訊檢視環境實施例。

第3圖示意性圖示在另一檢視者成員及該視訊內容之改變後，第2圖之視訊檢視環境實施例。

第4A-D圖圖示流程圖，該等流程圖根據本發明之實施例來描述提供視訊項目至在視訊檢視環境中之檢視者之方法。

第5圖示意性圖示根據本發明之實施例之檢視者情緒反應輪廓及檢視興趣輪廓。

100‧‧‧視訊檢視環境

102‧‧‧顯示裝置

104‧‧‧媒體計算裝置

106‧‧‧視訊檢視環境感測器系統

150‧‧‧視訊項目

160‧‧‧檢視者

162‧‧‧檢視者

Claims (18)

1. 一種在一媒體呈現計算裝置處，用於提供視訊項目至一視訊檢視環境中之複數個檢視者的方法，該方法包括以下步驟：接收步驟，在該媒體呈現計算裝置處，接收來自一或更多個視訊檢視環境感測器的影像資料；確定步驟，自該顯示資料來確定該視訊檢視環境中之一顯示裝置之該複數個檢視者之每一者的一身分；獲得步驟，基於該視訊檢視環境中之該顯示裝置之該複數個檢視者的該等身分來獲得用於顯示的一視訊項目；傳送步驟，向該顯示裝置傳送用於向該複數個檢視者顯示的該視訊項目；在由該複數個檢視者檢視該視訊項目的一步驟期間，透過該影像資料來確定以下中之一或更多者中的一改變：該顯示裝置之該複數個檢視者的一選舉區，及針對該視訊項目之該複數個檢視者之一或更多者中的一情緒反應；獲得步驟，基於該改變來獲得一不同視訊項目；及向該顯示裝置傳送該不同視訊項目以供顯示。
2. 如請求項1所述之方法，其中獲得該視訊項目的步驟包括以下步驟： 傳送步驟，傳送該顯示裝置之該複數個檢視者之已確定的身分至一伺服器；及接收步驟，自該伺服器接收該視訊項目，該視訊項目係基於針對該顯示裝置之該複數個檢視者之每一者之檢視興趣輪廓的一關聯性(correlation)來選擇，每一檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓代表一特定檢視者針對先前由該特定檢視者所檢視之一媒體項目之情緒反應的一時間關聯性。
3. 如請求項1所述之方法，其中獲得該視訊項目的步驟包括以下步驟：使有關聯步驟，針對該顯示裝置的每一該複數個檢視者使檢視興趣輪廓有關聯，每一檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓代表一特定檢視者針對先前由該特定檢視者所檢視之一媒體項目之情緒反應的一時間關聯性；及選擇步驟，基於已有關聯的檢視興趣輪廓來選擇該視訊項目。
4. 如請求項1所述之方法，其中獲得該不同視訊項目的步驟更包括以下步驟：獲得步驟，獲得具有一不同觀眾適應性分級之該不同視訊項目的一不同版本。
5. 如請求項1所述之方法，更包括以下步驟：更新步驟，更新每一檢視者的檢視興趣輪廓，該更新步驟是用該檢視者針對該視訊項目的情緒反應來進行的。
6. 如請求項1所述之方法，更包括以下步驟：偵測步驟，偵測針對重播該視訊項目之一步驟之一隱含請求的一輸入，及重播步驟，回應於該輸入，重播該視訊項目的一片段。
7. 如請求項1所述之方法，更包括以下步驟：偵測步驟，偵測針對重播該視訊項目之一步驟之一外顯請求的一輸入，及重播步驟，回應於該輸入，重播該視訊項目的一片段。
8. 如請求項1所述之方法，其中該情緒反應中的該改變包括針對該視訊項目的一相反情緒反應，且其中獲得該不同視訊項目的步驟包括以下步驟：顯示該視訊項目的一不同版本，該視訊項目的該不同版本係基於針對該視訊項目之該相反情緒反應來編輯的。
9. 一種媒體呈現系統，該媒體呈現系統包括：一周邊輸入，該周邊輸入經配置以自一深度攝影機接收影像資料； 一顯示輸出，該顯示輸出經配置以輸出視訊內容至一顯示裝置；一邏輯子系統，該邏輯子系統經由該周邊輸入可操作式連接至該深度攝影機，且該邏輯子系統經由該顯示輸出可操作式連接至該顯示裝置；一資料保存(data-holding)子系統，該資料保存子系統保存指令，該等指令可由該邏輯子系統執行以進行以下步驟：接收步驟，自該周邊輸入接收針對一視訊檢視環境的一影像資料輸入；確定步驟，自該影像資料輸入來確定該視訊檢視環境中之該顯示裝置之每一複數個檢視者的一身分；獲得步驟，基於在該視訊檢視環境中之該顯示裝置之該複數個檢視者的該等身分來獲得用於顯示的一視訊項目；輸出步驟，向該複數個檢視者在該顯示裝置上輸出用於顯示的該視訊項目；確定步驟，透過該影像資料輸入來在由該複數個檢視者檢視該視訊項目的一步驟期間確定在該顯示裝置之該複數個檢視者之選舉區中的一改變；獲得步驟，獲得一已更新的視訊項目，該已更新視訊項目係在選舉區中的該改變之後基於該顯示裝置之該複數個檢視者的該等身分來選擇的；及 輸出步驟，在該顯示裝置上輸出用於顯示的該已更新視訊項目。
10. 如請求項9所述之系統，其中獲得該視訊項目之步驟包括以下步驟：傳送步驟，傳送該顯示裝置之檢視者的已確定身分至一伺服器；及接收步驟，自該伺服器接收該視訊項目，該視訊項目係基於針對該顯示裝置之該複數個檢視者之每一者之檢視興趣輪廓的一關聯性來選擇的，每一檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓代表一特定檢視者針對先前由該特定檢視者所檢視之一媒體項目之情緒反應的一時間關聯性，且其中獲得該已更新視訊項目的步驟包括以下步驟：傳送步驟，在選舉區的該改變之後，傳送該顯示裝置之該複數個檢視者的已確定身分至該伺服器，及接收步驟，自該伺服器接收該已更新視訊項目，該已更新視訊項目係在選舉區的該改變之後，基於針對該顯示裝置的該複數個檢視者使該等檢視興趣輪廓重新有關聯的一步驟來選擇的。
11. 如請求項9所述之系統，其中獲得該視訊項目的步驟包括以下步驟：使有關聯步驟，針對該顯示裝置的每一該複數個檢視 者使檢視興趣輪廓有關聯，每一檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓代表一特定檢視者針對先前由該特定檢視者所檢視之一媒體項目之情緒反應的一時間關聯性；及選擇步驟，基於已有關聯的檢視興趣輪廓來選擇該視訊項目，且其中獲得該已更新的視訊項目之步驟包括以下步驟：使重新有關聯步驟，在選舉區的該改變之後，針對該顯示裝置之該複數個檢視者使該等檢視興趣輪廓重新有關聯，及選擇步驟，基於已重新有關聯的檢視興趣輪廓來選擇該已更新視訊項目。
12. 如請求項9所述之系統，更包括以下步驟：確定步驟，基於接收自該周邊輸入之該特定檢視者之情緒反應的影像資料，來確定該特定檢視者針對該視訊項目之情緒反應中的一改變，其中獲得該已更新視訊項目的步驟包括以下步驟：選擇步驟，基於該特定檢視者針對該視訊項目之情緒反應該該影像資料，來選擇該已更新視訊項目。
13. 如請求項12所述之系統，更包括以下步驟：呈現步驟，在用於該特定檢視者的一移動計算裝置上呈現與該視訊項目相關的內容，且其中確定該特定檢視 者之情緒反應中之一改變的步驟包括以下步驟：接收步驟，自一感測器接收情緒反應資料，該感測器係包括在該移動計算裝置中。
14. 如請求項13所述之系統，其中該移動計算裝置係為一行動電話、一個人計算裝置及一平板計算裝置中之一者。
15. 一種在一媒體呈現計算裝置處，用於提供一視訊項目至一視訊檢視環境中之一顯示裝置之複數個檢視者的方法，該方法包括以下步驟：接收步驟，在該媒體呈現計算裝置處接收來自一或更多個視訊檢視環境感測器的感測器資料；確定步驟，自該感測器資料來確定該視訊檢視環境中之該顯示裝置之該複數個檢視者之每一者的一身分；傳送步驟，將該顯示裝置之該複數個檢視者的已確定身分傳送至一伺服器；接收步驟，自該伺服器接收該視訊項目，該視訊項目係基於該顯示裝置之該複數個檢視者之每一者之檢視興趣輪廓的一關聯性來選擇的，每一檢視興趣輪廓係產生自複數個情緒反應輪廓，每一情緒反應輪廓代表一特定檢視者針對先前由該特定檢視者所檢視之一媒體項目之情緒反應的一時間關聯性；傳送步驟，向該顯示裝置傳送該視訊項目以供向該複 數個檢視者顯示；及傳送步驟，傳送關於該視訊項目的內容至一移動計算裝置，該移動計算裝置係屬於該顯示裝置之該複數個檢視者的一特定檢視者，該移動計算裝置係不同於該顯示裝置；在由該複數個檢視者檢視該視訊項目的一步驟期間，透過該感測器資料來確定以下中之一或更多者中的一改變：該顯示裝置之該複數個檢視者的一選舉區，及該複數個檢視者中之一或更多者針對該視訊項目的一情緒反應輪廓；獲得步驟，基於該改變來獲得一不同視訊項目；及傳送步驟，向該顯示裝置傳送該不同視訊項目以供向該複數個檢視者顯示。
16. 如請求項15所述之方法，更包括以下步驟：偵測步驟，從該顯示裝置的該特定檢視者偵測針對重播該視訊項目之一步驟之一隱含或一外顯請求的一輸入，及重播步驟，回應於該輸入，在該移動計算裝置上重播該視訊項目的一片段。
17. 如請求項15所述之方法，更包括以下步驟：偵測步驟，偵測該特定檢視者針對該相關內容的一相反情緒反應；及 選擇步驟，回應於該偵測步驟，基於針對該視訊項目的該相反情緒反應來選擇一已更新視訊項目以供在該移動計算裝置上顯示。
18. 如請求項15所述之方法，更包括以下步驟：確定步驟，在由該複數個檢視者檢視該視訊項目的該步驟期間，確定用於該顯示裝置之該複數個檢視者之選舉區中的一改變；傳送步驟，在選舉區中的該改變之後，傳送該顯示裝置之該複數個檢視者的已確定身分至該伺服器；接收步驟，自該伺服器接收一已更新視訊項目，該已更新視訊項目係在選舉區中的該改變之後基於針對該顯示裝置的該複數個檢視者使該等檢視興趣輪廓重新有關聯的一步驟來選擇的；及傳送步驟，傳送該已更新視訊項目至用於顯示的該顯示裝置。