TWI513305B - 應用於多媒體內容的播放方法與播放裝置 - Google Patents

應用於多媒體內容的播放方法與播放裝置 Download PDF

Info

Publication number
TWI513305B
TWI513305B TW101109317A TW101109317A TWI513305B TW I513305 B TWI513305 B TW I513305B TW 101109317 A TW101109317 A TW 101109317A TW 101109317 A TW101109317 A TW 101109317A TW I513305 B TWI513305 B TW I513305B
Authority
TW
Taiwan
Prior art keywords
multimedia content
video
user
playing
audio
Prior art date
Application number
TW101109317A
Other languages
English (en)
Other versions
TW201242356A (en
Inventor
Min Hung Chien
Po Kai Fang
Original Assignee
Mediatek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mediatek Inc filed Critical Mediatek Inc
Publication of TW201242356A publication Critical patent/TW201242356A/zh
Application granted granted Critical
Publication of TWI513305B publication Critical patent/TWI513305B/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/376Image reproducers using viewer tracking for tracking left-right translational head movements, i.e. lateral movements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • H04N13/383Image reproducers using viewer tracking for tracking with gaze detection, i.e. detecting the lines of sight of the viewer's eyes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/816Monomedia components thereof involving special video data, e.g 3D video
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2213/00Details of stereoscopic systems
    • H04N2213/006Pseudo-stereoscopic systems, i.e. systems wherein a stereoscopic effect is obtained without sending different images to the viewer's eyes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Description

應用於多媒體內容的播放方法與播放裝置
本發明係關於多媒體資料的播放,尤指依據使用者狀態的偵測結果來調整多媒體內容的播放以及其相關裝置。
傳統的平面(two-dimensional,2D)顯示技術係呈現單一畫面(frame)給使用者的雙眼,然而,近來由於科技的發展,使用者所追求的已是具有立體感與更逼真的影像顯示,而不再是高品質影像,因此,立體(three-dimensional,3D)顯示技術便被提出來,以呈現不同的畫面給使用者左眼與右眼,如此一來,使用者的大腦會將兩眼所看到不同的畫面認作一立體畫面。然而,使用者必須手動控制平面/立體視訊播放設定以滿足個人偏好的觀賞需求;同樣地,關於音訊的播放,使用者亦必須手動控制音訊播放設定以滿足個人偏好的聆聽需求。因此,使用者也許會渴望有更佳的視訊觀賞與/或音訊聆聽之體驗,所以,需要一種創新的播放機制,其可正確地與自動地調整包含視訊及/或音訊的多媒體內容的播放。
依據本發明之實施例,其提出一種依據使用者狀態的偵測結果來調整多媒體內容的播放方法以及其相關裝置,以解決上述問題。
依據本發明之第一實施例,其揭示一種多媒體內容的播放方法,包含:接收一多媒體內容、對該多媒體內容進行播放、偵測一使用者狀態並據以產生一偵測結果,以及當該偵測結果指示該使用者狀態有一變化時,調整該多媒體內容的播放。
依據本發明之第二實施例,其揭示一種多媒體內容的播放裝置,包含一接收功能方塊、一播放功能方塊以及一偵測功能方塊。該接收功能方塊係用以接收該多媒體內容。該播放功能方塊耦接於該接收功能方塊,用以對該多媒體內容進行播放。該偵測功能方塊耦接於該播放功能方塊,用以偵測一使用者狀態並據以產生一偵測結果。當該偵測結果指示該使用者狀態有一變化時,該播放功能方塊會調整該多媒體內容的播放。
本發明之多媒體內容的播放方法及播放裝置能偵測使用者的狀態以正確地與自動地調整包含視訊及/或音訊之多媒體內容的播放,使用者可以具有更佳的多媒體內容播放的觀賞/聆聽體驗。
在說明書及後續的申請專利範圍當中使用了某些詞彙來指稱特定的元件。所屬領域中具有通常知識者應可理解,製造商可能會用不同的名詞來稱呼同樣的元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區別元件的方式,而是以元件在功能上的差異來作為區別的基準。在通篇說明書及後續的請求項當中所提及的 「包含」係為一開放式的用語,故應解釋成「包含但不限定於」。此外,「電性連接」一詞在此係包含任何直接及間接的電氣連接手段。因此,若文中描述一第一裝置電性連接於一第二裝置,則代表該第一裝置可直接連接於該第二裝置,或透過其他裝置或連接手段間接地連接至該第二裝置。
本發明的主要概念在於:在多媒體內容播放的期間,藉由偵測使用者的狀態以正確地與自動地調整包含視訊及/或音訊之多媒體內容的播放。舉例來說,當使用者狀態改變時,使用者狀態的偵測結果(例如使用者的人臉角度(user’s face angle)或是使用者的人臉位置/使用者的位置(user’s face location/user’s location))會做為控制信號,以正確地調整多媒體內容的播放,如此一來,即便在多媒體內容播放的控制過程中沒有使用者的介入,使用者可以具有更佳的多媒體內容播放的觀賞/聆聽體驗。進一步的細節將說明如下。
第1圖為本發明之一實施例中廣義的多媒體播放裝置的方塊示意圖。播放裝置100包含(但並不侷限於):接收功能方塊(receiving block)102、播放功能方塊(playback block)105以及偵測功能方塊(detecting block)106。接收功能方塊102係用以接收多媒體內容DATA_IN。播放功能方塊104耦接於接收功能方塊102,用以藉由驅動輸出裝置101來對多媒體內容DATA_IN進行播放。偵測功能方塊106耦接於播放功能方塊104,用以偵測一使用者狀態並據以產生一個指示所偵測到的使用者狀態的偵測結果DR,此外,由偵 測功能方塊106所產生的偵測結果DR會被傳送到播放功能方塊104。在本實施例中,當偵測結果DR指示出該使用者狀態的改變時,播放功能方塊104會調整多媒體內容DATA_IN的播放,舉例來說,當使用者處於一第一觀賞/聆聽狀態時,輸出裝置101會呈現由多媒體內容DATA_IN所得之視訊/音訊資訊(video/audio information)的一第一播放結果,以及當使用者處於一第二觀賞/聆聽狀態時,輸出裝置101會呈現由多媒體內容DATA_IN所得之視訊/音訊資訊的一第二播放結果。如此一來,播放裝置100係具備自動調整多媒體內容DATA_IN播放的能力,以在多媒體內容DATA_IN播放的期間滿足具有不同觀賞/聆聽狀態之使用者的觀賞/聆聽需求。以下會藉由基於第1圖所示的架構而衍生的複數個實施例,來說明有關播放裝置100之詳細的技術特徵。
請參閱第2圖,第2圖為本發明多媒體播放裝置的第一實施例的方塊示意圖。播放裝置200包含(但並不侷限於):接收介面(receiving interface)202、視訊播放模組(video playback module)204以及人臉偵測模組(face detection module)206。請注意,播放裝置200的組態係基於第1圖所示之播放裝置架構,舉例來說,第1圖所示之輸出裝置101是由顯示螢幕(display screen)201來加以實作、第1圖所示之接收功能方塊102是由第2圖所示之接收介面202來加以實作、第1圖所示之偵測功能方塊106是由人臉偵測模組206來加以實作,以及第1圖所示之播放功能方塊104是由視訊播放模組204來加以實作。在本實施例中,多媒體內容DATA_IN 包含有分別對應至複數個視角的複數個視訊位元流(video bitstream)BS1~BSN,舉例來說(但本發明並不侷限於此),多媒體內容DATA_IN包含一足球賽的視訊資料,其中複數個視訊位元流BS1~BSN(例如第3圖中的BS_1~BS_5)分別對應於足球場的複數個視角A1~A5,因此,該足球賽中的事件可被記錄在複數個視訊位元流BS_1~BS_5中,舉例來說,踢角球的事件較適合以視訊位元流BS_2與BS_4來記錄、射門事件較適合以視訊位元流BS_1與BS_5來記錄,以及開球/傳球事件較適合以視訊位元流BS_3來記錄。
由接收介面202所接收之視訊位元流BS1~BSN會被傳送至視訊播放模組204,以進行更進一步的處理。如第2圖所示,視訊播放模組204包含(但並不侷限於):解碼電路(decoding circuit)212、選擇電路(selective circuit)214以及視訊控制器(video controller)216,其中解碼電路212包含複數個解碼單元(decoding unit)211_1~211_M。請注意,基於實際上的設計需求/考量,解碼單元211_1~211_M的數量可以等於或小於視訊位元流BS1~BSN的數量。在解碼單元211_1~211_M的數量等於視訊位元流BS1~BSN的數量的情形之下,解碼單元211_1~211_M係用來分別且同時地對視訊位元流BS1~BSN進行解碼。另外,在解碼單元211_1~211_M的數量小於視訊位元流BS1~BSN的數量的另一情形之下,解碼單元211_1~211_M便分別且同時地對視訊位元流BS1~BSN中所選擇出來的一部分視訊位元流進行解碼。此外,解碼視訊位元流所產生的畫面 會從解碼電路212傳送到選擇電路214。選擇電路214會依據由人臉偵測模組206所產生的偵測結果DR_A,來選擇解碼單元211_1~211_M所分別產生之複數個輸出S_1~S_M之中的一個輸出,並且傳送所選到的輸出S至視訊控制器216。接著,視訊控制器216便驅動顯示螢幕201以顯示所選到的輸出S中的畫面。
於本實施例中,上述之使用者狀態係為使用者的人臉角度,因此,接收介面202另接收由一影像擷取裝置(image capturing device)(例如,一視訊攝影機(video camera))218所產生的一擷取影像(captured image)IMG。舉例來說,影像擷取裝置218與顯示螢幕201可設置於同一個顯示裝置(例如,電視機)中。人臉偵測模組206則會基於擷取影像IMG來進行人臉偵測,以偵測該使用者狀態(亦即該使用者的人臉角度)。當偵測結果DR_A指示該使用者的人臉角度有所改變時,選擇電路214會藉由選擇輸出S_1~S_M中的另一個輸出來改變所選到的輸出S。
簡而言之,當使用者的人臉對應於一第一角度時,視訊播放模組204會控制顯示螢幕201以顯示對應一第一視角之一第一視訊位元流的畫面,以及當使用者的人臉對應於一第二角度時(亦即使用者的人臉角度有所改變時),則視訊播放模組204會控制顯示螢幕201以顯示對應一第二視角(相異於該第一視角)之一第二視訊位元流的畫面。
請一併參閱第3圖與第4圖,第4圖為運用第2圖所示的播放裝置200來進行自動調整多媒體內容播放的操作示意圖。如第4圖中的附圖(B)所示,當使用者以與第3圖所示之視角A3相同或相近的一正常視角來觀賞顯示螢幕201時,視訊播放模組204會驅動顯示螢幕201以顯示視訊位元流BS_3所對應之畫面FBS_3。如第4圖中附圖(A)所示,當使用者想要觀賞於足球場的右邊角落所發生的事件時,使用者會將臉以逆時鐘方向(counterclockwise)轉動,由於使用者的人臉角度係與第3圖所示之視角A4相同或相近,因此,因應偵測結果DR_A(其指出使用者的人臉角度的逆時鐘方向變化),視訊播放模組204會藉由驅動顯示螢幕201顯示視訊位元流BS_4之畫面FBS_4以自動調整視訊的播放。如第4圖中的附圖(C)所示,當使用者想要觀賞於足球場的左邊角落所發生的事件時,使用者會將臉以順時鐘方向(clockwise)轉動,由於使用者的人臉角度係與第3圖所示之視角A2相同或相近,因此,因應偵測結果DR_A(其指出使用者的人臉角度的順時鐘方向變化),視訊播放模組204會藉由驅動顯示螢幕201顯示視訊位元流BS_2之畫面FBS_2以自動調整視訊的播放。請注意,第4圖所示之例子僅作為範例說明之用,並非用來作為本發明之限制,換言之,只要多媒體內容的播放會因應指示出使用者人臉角度產生變化的偵測結果而自動地調整時,皆符合本發明的發明精神。
請參閱第5圖,第5圖為本發明多媒體播放裝置的第二實施例的方塊示意圖。第5圖所示之播放裝置500的組態係與第2圖所示 之播放裝置的組態相似,而兩者最主要的差異在於人臉偵測模組506所偵測的使用者狀態係為使用者的人臉位置(亦即使用者的位置)而不是使用者的人臉角度,因此,人臉偵測模組506會產生一個指示使用者的人臉位置的偵測結果DR_P至選擇電路514。當偵測結果DR_P指出使用者的人臉位置有所改變(亦即使用者的位置產生改變)時,選擇電路514會藉著由輸出S_1~S_M中的一個輸出切換至另一個輸出以改變所選到的輸出S。
簡而言之,當使用者的人臉對應於一第一位置時,視訊播放模組504會控制顯示螢幕201以顯示對應一第一視角之一第一視訊位元流的畫面,以及當使用者的人臉對應於一第二位置時(亦即使用者的人臉位置有所改變),視訊播放模組504會控制顯示螢幕201以顯示對應一第二視角(相異於該第一視角)之一第二視訊位元流的畫面。
請一併參閱第3圖與第6圖,第6圖為運用第5圖所示的播放裝置500來進行自動調整多媒體內容播放的操作示意圖。如第6圖中的附圖(B)所示,當使用者處在一特定位置並以與第3圖所示之視角A3相同或相近的一正常視角來觀賞顯示螢幕201時,視訊播放模組504會驅動顯示螢幕201以顯示視訊位元流BS_3所對應之畫面FBS_3。如第6圖中附圖(A)所示,當使用者想要觀賞於足球場的左邊角落所發生的事件時,使用者會往左方移動至一個新的位置,因此,因應偵測結果DR_A(其指出使用者之人臉位置向左 移動),視訊播放模組504會藉由驅動顯示螢幕201顯示視訊位元流BS_2所對應之畫面FBS_2來自動調整視訊的播放。如第6圖中附圖(C)所示,當該使用者想要觀賞於足球場的右邊角落所發生的事件時,使用者會往右方移動至一個新的位置,因此,因應偵測結果DR_A(其指出使用者之人臉位置向右移動),視訊播放模組504會藉由驅動顯示螢幕201顯示視訊位元流BS_4所對應之畫面FBS_4來自動調整視訊的播放。請注意,第6圖所示的例子僅作為範例說明之用,並非用來作為本發明之限制,換言之,只要多媒體內容的播放會因應指示出使用者的人臉位置之變化(亦即使用者位置之變化)的偵測結果而自動地調整時,皆符合本發明的發明精神。
請參閱第7圖,第7圖為本發明多媒體播放裝置的第三實施例的方塊示意圖。播放裝置700包含(但不侷限於):接收介面702、視訊播放模組704,以及人臉偵測模組706。請注意,播放裝置700的組態係基於第1圖所示之播放裝置架構,舉例來說,第1圖所示之輸出裝置101是由顯示螢幕201來加以實作、第1圖所示之接收功能方塊102是以第7圖所示之接收介面702來加以實作、第1圖所示之偵測功能方塊106是以人臉偵測模組706來加以實作,以及第1圖所示之播放功能方塊104是以視訊播放模組704來加以實作。在本實施例中,多媒體內容DATA_IN包含至少一視訊位元流BS,舉例來說,視訊位元流BS可以是上述複數個視訊位元流BS1~BSN之中的一個視訊位元流。
由接收介面702所接收之視訊位元流BS會被傳送至視訊播放模組704,以進行更進一步的處理。如第7圖所示,視訊播放模組704包含(但並不侷限於):解碼電路712、判斷電路(determining circuit)714、處理電路(processing circuit)716以及視訊控制器718。視訊位元流BS解碼所產生的複數個畫面(亦即解碼電路712的輸出S_BS),會從解碼電路712被傳送到判斷電路714。判斷電路714會依據人臉偵測模組706所產生的偵測結果DR_P,來選擇該複數個畫面中每一個畫面的一個局部影像(partial image)。處理電路716則依據一視訊效果設定(video effect setting)來處理該複數個畫面所分別選出的複數個局部影像,以產生複數個已處理影像(processed image),然後傳送該複數個已處理影像至視訊控制器718。接著,視訊控制器718會驅動顯示螢幕201以顯示該複數個已處理影像。
於本實施例中,上述之使用者狀態係為使用者的人臉位置/使用者的位置,因此,接收介面702另接收由上述之影像擷取裝置(例如,一視訊攝影機)218所產生的擷取影像IMG。人臉偵測模組706的運作係與第5圖所示之人臉偵測模組506的運作相同,換言之,人臉偵測模組706會基於擷取影像IMG來進行人臉偵測,以偵測使用者狀態(亦即使用者的人臉位置)。當偵測結果DR_P指示使用者的人臉位置有所改變時,判斷電路714可改變自解碼電路712所產生的每一個畫面中選取出局部影像的位置,及/或處理電路716可調整目前正在使用的視訊效果設定。
舉例來說,當偵測結果DR_P傳送使用者的人臉位置/使用者的位置之一第一指示值而據此判斷出使用者的人臉係對應於一第一位置的時候,視訊播放模組704會依據該第一指示值,自視訊位元流BS所得之複數個第一畫面中每一個第一畫面中選擇一第一局部影像、依據一第一視訊效果設定來處理該複數個第一畫面所選取的複數個第一局部影像以產生複數個已處理第一影像,以及依據該複數個已處理第一影像來驅動顯示螢幕201。當偵測結果DR_P傳送使用者的人臉位置/使用者的位置之一第二指示值而據此判斷出使用者的人臉係對應於一第二位置的時候,視訊播放模組704會依據該第二指示值,自視訊位元流BS所得之複數個第二畫面中每一個第二畫面選擇一第二局部影像、依據與該第一視訊效果設定相異的一第二視訊效果設定來處理該複數個第二畫面所選取的複數個第二局部影像以產生複數個已處理第二影像,以及依據該複數個已處理第二影像來驅動顯示螢幕201。
請參閱第8圖,第8圖為運用第7圖所示的播放裝置700來進行自動調整多媒體內容播放的操作示意圖。如第8圖中的附圖(B)所示,當使用者處在位置P1以及使用者的人臉位置靠近顯示螢幕201的顯示區802的時候,視訊播放模組704會顯示因應使用者人臉位置之一第一縮放設定(zooming setting)與一第一指示值所產生的複數個第一已處理影像IMG_1。當使用者由位置P1移動至新的位置P2時,此時,使用者人臉位置會靠近顯示螢幕201的顯示區806,因此,如第8圖中附圖(A)所示,視訊播放模組704會顯示 因應使用者人臉位置之一第二縮放設定與一第二指示值所產生的複數個第二已處理影像IMG_2,具體地說,由於偵測結果DR_P所指示之使用者人臉位置的該第二指示值的緣故,因此顯示區806中的複數個局部影像會被選取,並接著被以該第二縮放設定所定義的放大比例(zoom-in ratio)來放大。當該使用者由位置P1移動至新的位置P3時,此時,使用者人臉位置會靠近顯示螢幕201的顯示區804,因此,如第8圖中附圖(C)所示,視訊播放模組704會顯示因應使用者人臉位置之一第三縮放設定與一第三指示值所產生的複數個第三已處理影像IMG_3,具體地說,由於偵測結果DR_P所指示之使用者人臉位置的該第三指示值的緣故,因此,顯示區804中複數個局部影像會被選取,並接著被以該第三縮放設定所定義的放大比例來放大。請注意,使用者與顯示螢幕201之間的距離D1、D2以及D3,彼此之間是不同的。在一設計範例中,複數個縮放設定會具有不同的放大/縮小(zoom-out)比例,例如,由於D1>D2,該第一縮放設定會具有一個小於該第二縮放設定的放大比例;以及由於D2>D3,該第二縮放設定會具有一個小於該第三縮放設定的放大比例。然而,以上僅作為範例說明之用,並非用來作為本發明的限制,也就是說,只要多媒體內容的播放會因應指示出使用者的人臉位置/使用者的位置之變化的偵測結果而自動地調整,皆符合本發明之發明精神。
請注意,第7圖所示之判斷電路714可為選擇性(optional)的元件,換言之,在另一實施例中,可以省略判斷電路714。請參閱 第9圖,第9圖為本發明多媒體播放裝置的第四實施例的方塊示意圖。播放裝置700與播放裝置900彼此之間主要的不同之處在於第9圖所示之播放裝置900中的視訊播放模組904並沒有判斷電路,因此,解碼電路712的輸出S_BS會被傳送至處理電路916。於此實施例中,處理電路916依據一視訊效果設定以藉由處理視訊位元流BS中複數個畫面來產生複數個已處理畫面,並接著傳送該複數個已處理畫面至視訊控制器718,接下來,視訊控制器718會驅動顯示螢幕201以顯示該複數個已處理畫面。請注意,當偵測結果DR_P指示使用者的人臉位置/使用者的位置有所改變時,處理電路916可調整目前正在使用的該視訊效果設定,因而調整視訊的播放。
舉例來說,當偵測結果DR_P傳送使用者人臉位置的一第一指示值而據此判斷出使用者人臉係對應於一第一位置的時候,視訊播放模組904會依據一第一視訊設定來處理視訊位元流BS中複數個第一畫面以產生複數個第一已處理畫面,並依據該複數個第一已處理畫面來驅動顯示螢幕201。當偵測結果DR_P傳送使用者人臉位置的一第二指示值而據此判斷出使用者人臉係對應於一第二位置的時候,視訊播放模組904會依據與該第一視訊設定相異的一第二視訊設定來處理視訊位元流BS中複數個第二畫面以產生複數個第二已處理畫面,並依據該複數個第二已處理畫面來驅動顯示螢幕201。舉例來說(但本發明並不侷限於此),該第一視訊設定包含一第一縮放設定,以及該第二視訊設定包含一第二縮放設定。
請參閱第10圖,第10圖為運用第9圖所示的播放裝置900來進行自動調整多媒體內容播放的操作示意圖。如第10圖中附圖(B)所示,當使用者處在位置P1來觀賞顯示螢幕201時;視訊播放模組904會顯示因應使用者人臉位置之一第一指示值而配置的一第一縮放設定所產生的複數個第一已處理影像IMG_1。如第10圖中附圖(A)所示,當使用者由位置P1移動至新的位置P2時,視訊播放模組904會顯示因應使用者人臉位置之一第二指示值而配置的一第二縮放設定所產生的複數個第二已處理影像IMG_2’,具體地說,中間顯示區802的複數個局部影像係由該第二縮放設定所定義的放大比例來放大。如第10圖中附圖(C)所示,當使用者由位置P1移動至新的位置P3時,視訊播放模組904會顯示因應使用者人臉位置之一第三指示值而配置的一第三縮放設定所產生的複數個第三已處理影像IMG_3’,具體地說,中間顯示區802的複數個局部影像係由該第三縮放設定所定義的放大比例來放大。請注意,使用者與顯示螢幕201之間的距離D1、D2以及D3,彼此之間是不同的。在一設計範例中,複數個縮放設定會具有不同的放大/縮小比例,例如,由於D1>D2,該第一縮放設定會具有一個小於該第二縮放設定的放大比例;以及由於D2>D3,該第二縮放設定會具有一個小於該第三縮放設定的放大比例。由第10圖可輕易瞭解,無論使用者的人臉位置/使用者的位置為何,在同樣的中間顯示區802內的複數個局部影像皆可藉由複數個適當的放大比例值來放大。然而,以上僅作範例說明之用,並非用來作為本發明的限制,也就是說,只要多媒體內容的播放會因應指示出使用者的人臉位置/使用者的位置之變化的偵 測結果而自動地調整,皆符合本發明之發明精神。
除了視訊播放控制以外,同樣的概念也可應用於音訊(audio)播放控制以提昇使用者聆聽的體驗。請參閱第11圖,第11圖為本發明多媒體播放裝置的第五實施例的方塊示意圖。播放裝置1100包含有(但不侷限於):接收介面1102、音訊播放模組(audio playback module)1104以及人臉偵測模組1106。請注意,播放裝置1100的組態係基於第1圖所示之播放裝置架構,舉例來說,第1圖所示之輸出裝置101是由揚聲系統(speak system)1101來加以實作、第1圖所示之接收功能方塊102是以接收介面1102來加以實作、第1圖所示之偵測功能方塊106是以人臉偵測模組1106來加以實作,以及第1圖所示之播放功能方塊104是以音訊播放模組1104來加以實作。在本實施例中,多媒體內容DATA_IN包含音訊資料DA,例如是一已編碼/已調變(encoded/modulated)的音訊輸入。
接收介面1102所接收的音訊資料DA會被傳送到音訊播放模組1104以供進一步處理。如第11圖所示,音訊播放模組1104包含有(但不侷限於):解碼電路1112、處理電路1114以及音訊輸出電路(audio output circuit)1116。音訊資料DA解碼所產生的複數個音訊取樣(audio sample)會從解碼電路1112傳送到處理電路1114,而處理電路1114會依據一音訊效果設定來對於解碼電路1112的輸出S_A進行處理,並且傳送複數個已處理音訊取樣(processed audio sample)至音訊輸出電路1116,接下來,音訊輸出電路1116會驅動 揚聲系統1101以播放該複數個已處理音訊取樣。請注意,該音訊效果設定係依據人臉偵測模組1106所產生的偵測結果DR_P來加以設定。
舉例來說(但本發明不侷限於此),揚聲系統1101可以是一個雙聲道揚聲系統(two-channel speaker system),以及該音訊效果設定係為一環繞音訊設定(surrounding audio setting)。多視角立體演算法(multi-view stereo algorithm,MVS algorithm)可被應用於處理電路1114以創造出使用者所渴望的環繞音效(surrounding sound effect)。第12圖說明了多視角立體演算法如何運作以呈現環繞音效給使用者。如第12圖所示,雙聲道揚聲系統包含左聲道揚聲器(left-channel speaker)SPKL以及右聲道揚聲器(right-channel speaker)SPKR,且由左聲道輸入XL與右聲道輸入XR所驅動以呈現環繞音效給使用者。請注意,圖中所示之複數個角度值θ L 與θ R 係由使用者的位置來決定,換言之,當使用者位置有所改變時,多視角立體演算法所使用的複數個參數也應適度地調整。如第12圖所示,左聲道揚聲器SPKL的音訊輸入可傳送到使用者的左耳與右耳,而其中的傳送方式可利用複數個參數HLL與HLR來模型化;同樣地,右聲道揚聲器SPKR的音訊輸入可傳送到使用者的右耳與左耳,而其中的傳送方式可利用複數個參數HRR與HRL來模型化。為了要呈現環繞音效給使用者,左聲道輸入XL與右聲道輸入XR可利用下列公式來決定:
在上述公式(1)中,參數SL與SR代表音源(sound source),以及參數HL與HR係由環繞聲音應該被建立以供使用者聆聽的位置所決定。請注意,當音源為單音源(mono audio source)時,參數SL會等於參數SR;否則,參數SL與參數SR代表不同聲道的資料。在第12圖所示的範例中,參數HL與HR會具有以下關係:HL=HR=H90。考慮角度值θ L R =30°的情形下,上述參數HLL、HLR、HRR以及HRL會具有以下關係:HRL=HLR=H330以及HLL=HRR=H30。在實際應用上,可預先建構一對照表(look-up table),其中該對照表儲存了由複數個使用者的人臉位置/使用者的位置所索引(index)的複數個參數值集合(parameter value set),舉例來說,由第12圖所示的使用者位置所索引之一參數值集合包含HRL=H330、HLR=H330、HLL=H30以及HRR=H30。因此,基於用以指示出使用者的人臉位置/使用者的位置的偵測結果DR_P,該音訊效果設定會藉由從預先建構的對照表中讀取出所需的參數值集合來進行自動更新。
在此實施例中,上述之使用者狀態係為使用者的人臉位置/使用者的位置,因此,人臉偵測模組1106的運作係與上述人臉偵測模組506/706的運作相同,也就是說,接收介面1102另接收由影像擷取裝置(例如,一視訊攝影機)218所產生的擷取影像IMG。舉例來 說,影像擷取裝置218與揚聲系統1101可被設置於同一顯示裝置(例如,一電視機)中,因此,人臉偵測模組1106會對擷取影像IMG進行人臉偵測以偵測使用者狀態(亦即使用者的人臉位置/使用者的位置)。
當偵測結果DR_P指示使用者的人臉位置/使用者的位置有所改變時,處理電路1114也會因此改變音訊效果設定。簡而言之,當使用者人臉對應於一第一位置以及接收介面1102接收音訊資料DA的一第一音訊片段時,音訊播放模組1104會依據一第一音訊效果設定來驅動揚聲系統1101以播放該第一音訊片段;以及當使用者人臉對應於一第二位置(亦即使用者人臉位置/使用者位置有所改變)以及接收介面1102接收音訊資料DA的一第二音訊片段時,音訊播放模組1104會依據與該第一音訊設定相異的一第二音訊效果設定來驅動揚聲系統1101以播放該第二音訊片段。舉例來說(但本發明不侷限於此),該第一音訊設定係為一第一環繞音訊設定,以及該第二音訊設定係為一第二環繞音訊設定,而在一較佳的實施例中,該第一環繞音訊設定與該第二環繞音訊設定可分別對應於不同的音場深度(soundstage depth),以提供使用者較佳的聆聽體驗。然而,以上僅作為範例說明之用,並非用來作為本發明的限制,也就是說,只要多媒體內容的播放會因應指示出使用者的人臉位置/使用者的位置之變化的偵測結果而自動地調整,皆符合本發明之發明精神。
如上文所述,播放裝置1100具有驅動雙聲道揚聲系統的能力以 呈現環繞音效給予使用者,而在播放裝置1100使用於立體視訊播放環境時,處理電路1114亦可考量關於立體視訊播放的景深(the depth of field)。舉例來說,接收介面1102另接收與立體視訊資料的播放相關的景深參數PD,並傳送景深參數PD至處理電路1114,例如(但本發明並不侷限於此),景深參數PD可由使用者介面/人機介面(user interface/man-machine interface)來設定與提供,因此,除了偵測結果DR_P以外,景深參數PD亦可被參考來設定處理電路1114正在使用之音訊效果設定。
在上述複數個實施例中,第1圖所示之偵測功能方塊106係用人臉偵測模組206/506/706/1106來加以實作,然而,以上並非用來侷限本發明之其他變形,換言之,任何具有可偵測使用者狀態(例如,使用者的人臉角度、使用者的人臉位置或使用者的位置)的技術皆可運用其中,舉例來說,當使用者按壓一遙控器(remote control)上的一個按鍵/按鈕時,由該遙控器所傳送的一控制信號可被感應以辨識出使用者位置。此外,包含於多媒體內容DATA_IN的視訊資料可傳送一平面視訊內容或一立體視訊內容,及/或包含於多媒體內容DATA_IN的音訊資料可傳送一單聲道音訊內容或一雙聲道音訊內容。再者,運用一種不是縮放設定的視訊效果設定及/或運用一種不是環繞音訊設定的音訊效果設定也是可行的。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。
100、200、500、700、900、1100‧‧‧播放裝置
101‧‧‧輸出裝置
102‧‧‧接收功能方塊
104‧‧‧播放功能方塊
106‧‧‧偵測功能方塊
201‧‧‧顯示螢幕
202、702、1102‧‧‧接收介面
204、504、704、904‧‧‧視訊播放模組
206、506、706、1106‧‧‧人臉偵測模組
211_1、211_M‧‧‧解碼單元
212、712、1112‧‧‧解碼電路
214、514‧‧‧選擇電路
216‧‧‧視訊控制器
218‧‧‧影像擷取裝置
714‧‧‧判斷電路
716、916、1114‧‧‧處理電路
718‧‧‧視訊控制器
1101‧‧‧揚聲系統
1104‧‧‧音訊播放模組
1116‧‧‧音訊輸出電路
第1圖為本發明之一實施例中廣義的多媒體播放裝置的方塊示意圖。
第2圖為本發明多媒體播放裝置的第一實施例的方塊示意圖。
第3圖為足球場上不同視角所對應的視訊位元流的示意圖。
第4圖為運用第2圖的裝置來進行自動調整多媒體播放的示意圖。
第5圖為本發明多媒體播放裝置的第二實施例的方塊示意圖。
第6圖為運用第5圖的裝置來進行自動調整多媒體播放的示意圖。
第7圖為本發明多媒體播放裝置的第三實施例的方塊示意圖。
第8圖為運用第7圖的裝置來進行自動調整多媒體播放的示意圖。
第9圖為本發明多媒體播放裝置的第四實施例的方塊示意圖。
第10圖為運用第9圖的裝置來進行自動調整多媒體播放的示意圖。
第11圖為本發明多媒體播放裝置的第五實施例的方塊示意圖。
第12圖為關於多視角立體演算法如何呈現環繞音效給使用者的示意圖。
200‧‧‧播放裝置
201‧‧‧顯示螢幕
202‧‧‧接收介面
204‧‧‧視訊播放模組
206‧‧‧人臉偵測模組
211_1、211_M‧‧‧解碼單元
212‧‧‧解碼電路
214‧‧‧選擇電路
216‧‧‧視訊控制器
218‧‧‧影像擷取裝置

Claims (28)

  1. 一種應用於一多媒體內容的播放方法,包含有:接收該多媒體內容;對該多媒體內容進行播放;偵測一使用者狀態,並據以產生一偵測結果;以及當該偵測結果指示該使用者狀態具有一變化時,自動地調整該多媒體內容的播放。
  2. 如申請專利範圍第1項所述之應用於一多媒體內容的播放方法,其中偵測該使用者狀態的步驟,包含:接收一擷取影像;以及對該擷取影像進行一人臉偵測,以偵測該使用者狀態。
  3. 如申請專利範圍第1項所述之應用於一多媒體內容的播放方法,其中該使用者狀態係為一使用者的人臉角度。
  4. 如申請專利範圍第3項所述之應用於一多媒體內容的播放方法,其中該多媒體內容包含分別對應至複數個視角的複數個視訊位元流;對該多媒體內容進行播放的步驟包含:控制一顯示螢幕以顯示對應一第一視角之一第一視訊位元流的畫面;以及調整該多媒體內容的播放的步驟包含:當該使用者的人臉角度改變時,控制該顯示螢幕以顯示對應一第二視角之一第二視訊位元流的畫面,其中該第一視角不同於該第二視角。
  5. 如申請專利範圍第1項所述之應用於一多媒體內容的播放方法,其中該使用者狀態係為一使用者的位置。
  6. 如申請專利範圍第5項所述之應用於一多媒體內容的播放方法,其中該多媒體內容包含分別對應至複數個視角的複數個視訊位元流;對該多媒體內容進行播放的步驟包含:控制一顯示螢幕以顯示對應一第一視角之一第一視訊位元流的畫面;以及調整該多媒體內容的播放的步驟包含:當該使用者的位置改變時,控制該顯示螢幕以顯示對應一第二視角之一第二視訊位元流的畫面,其中該第一視角不同於該第二視角。
  7. 如申請專利範圍第5項所述之應用於一多媒體內容的播放方法,其中該多媒體內容包含一視訊位元流;對該多媒體內容進行播放的步驟包含:依據至少該視訊位元流的複數個第一畫面以及一第一視訊效果設定來驅動一顯示螢幕;以及調整該多媒體內容的播放的步驟包含:當該使用者的位置改變時,依據至少該視訊位元流的複數個第二畫面以及與該第一視訊效果設定相異的一第二視訊效果設定來驅動該顯示螢幕。
  8. 如申請專利範圍第7項所述之應用於一多媒體內容的播放方法,其中依據至少該視訊位元流的該複數個第一畫面以及該第一視訊效果設定來驅動該顯示螢幕的步驟包含:依據該第一視訊效果設定來處理該複數個第一畫面以產生複數個已處理第一畫面,以 及依據該複數個已處理第一畫面來驅動該顯示螢幕;以及依據至少該視訊位元流的該複數個第二畫面以及與該第二視訊效果設定來驅動該顯示螢幕的步驟包含:依據該第二視訊效果設定來處理該複數個第二畫面以產生複數個已處理第二畫面,以及依據該複數個已處理第二畫面來驅動該顯示螢幕。
  9. 如申請專利範圍第7項所述之應用於一多媒體內容的播放方法,其中該第一視訊效果設定包含一第一縮放設定,以及該第二視訊效果設定包含一第二縮放設定。
  10. 如申請專利範圍第7項所述之應用於一多媒體內容的播放方法,其中依據至少該視訊位元流的該複數個第一畫面與該第一視訊效果設定來驅動該顯示螢幕的步驟包含:依據該使用者位置的一第一指示值,選擇該複數個第一畫面之每一第一畫面中的一第一局部影像;依據該第一視訊效果設定來處理該複數個第一畫面所選取出的複數個第一局部影像,以產生複數個已處理第一影像;以及依據該複數個已處理第一影像來驅動該顯示螢幕;以及依據至少該視訊位元流的該複數個第二畫面以及與該第二視訊效果設定來驅動該顯示螢幕的步驟包含有:依據該使用者位置的一第二指示值,選擇該複數個第二畫面之每一第二畫面中的一第二局部影像,其中該第二指示值係 不同於該第一指示值;依據該第二視訊效果設定來處理該複數個第二畫面所選取出的複數個第二局部影像,以產生複數個已處理第二影像;以及依據該複數個已處理第二影像來驅動該顯示螢幕。
  11. 如申請專利範圍第5項所述之應用於一多媒體內容的播放方法,其中該多媒體內容包含一音訊資料;對該多媒體內容進行播放的步驟包含:當接收到該音訊資料的一第一音訊片段時,依據一第一音訊效果設定來驅動一揚聲系統以播放該第一音訊片段;以及調整該多媒體內容的播放的步驟包含:當該使用者的位置改變且接收到該音訊資料的一第二音訊片段時,依據與該第一音訊效果設定相異的一第二音訊效果設定來驅動該揚聲系統以播放該第二音訊片段。
  12. 如申請專利範圍第11項所述之應用於一多媒體內容的播放方法,其中該第一音訊效果設定係為一第一環繞音訊設定,以及該第二音訊效果設定係為一第二環繞音訊設定。
  13. 如申請專利範圍第11項所述之應用於一多媒體內容的播放方法,其中該第一環繞音訊設定與該第二環繞音訊設定係對應於不同的音場深度。
  14. 如申請專利範圍第11項所述之應用於一多媒體內容的播放方法,另包含:接收與一立體視訊資料之播放相關的一景深參數;其中該景深參數係被參考來設定該第一音訊效果設定與該第二音訊效果設定中至少其一。
  15. 一種應用於一多媒體內容的播放裝置,包含有:一接收功能方塊,用以接收該多媒體內容;一播放功能方塊,耦接於該接收功能方塊,用以對該多媒體內容進行播放;一偵測功能方塊,耦接於該播放功能方塊,用以偵測一使用者狀態,並據以產生一偵測結果;其中當該偵測結果指示該使用者狀態有一變化時,該播放功能方塊會自動地調整該多媒體內容的播放。
  16. 如申請專利範圍第15項所述之應用於一多媒體內容的播放裝置,其中該接收功能方塊另接收一擷取影像,以及該偵測功能方塊對該擷取影像進行一人臉偵測以偵測該使用者狀態。
  17. 如申請專利範圍第15項所述之應用於一多媒體內容的播放裝置,其中該使用者狀態係為一使用者的人臉角度。
  18. 如申請專利範圍第17項所述之應用於一多媒體內容的播放裝 置,其中該多媒體內容包含分別對應複數個視角的複數個視訊位元流;該播放功能方塊控制一顯示螢幕顯示對應一第一視角之一第一視訊位元流的畫面;以及當該使用者的人臉角度改變時,該播放功能方塊控制該顯示螢幕顯示對應一第二視角之一第二視訊位元流的畫面,其中該第一視角不同於該第二視角。
  19. 如申請專利範圍第15項所述之應用於一多媒體內容的播放裝置,其中該使用者狀態係為一使用者的位置。
  20. 如申請專利範圍第19項所述之應用於一多媒體內容的播放裝置,其中該多媒體內容包含分別對應複數個視角的複數個視訊位元流;該播放功能方塊控制一顯示螢幕顯示對應一第一視角之一第一視訊位元流的畫面;以及當該使用者的位置改變時,該播放功能方塊控制該顯示螢幕顯示對應一第二視角之一第二視訊位元流的畫面,其中該第一視角不同於該第二視角。
  21. 如申請專利範圍第19項所述之應用於一多媒體內容的播放裝置,其中該多媒體內容包含一視訊位元流;該播放功能方塊依據至少該視訊位元流的複數個第一畫面以及一第一視訊效果設定來驅動一顯示螢幕;以及當該使用者的位置改變時,依據至少該視訊位元流的複數個第二畫面以及與該第一視訊效果設定相異的一第二視訊效果設定來驅動該顯示螢幕。
  22. 如申請專利範圍第21項所述之應用於一多媒體內容的播放裝置,其中該播放功能方塊依據該第一視訊效果設定來處理該複數個第一畫面以產生複數個已處理第一畫面,以及依據該複數個已處理第一畫面來驅動該顯示螢幕;以及該播放功能方塊另依據該第二視訊效果設定來處理該複數個第二畫面以產生複數個已處理第二畫面,以及依據該複數個已處理第二畫面來驅動該顯示螢幕。
  23. 如申請專利範圍第21項所述之應用於一多媒體內容的播放裝置,其中該第一視訊效果設定包含一第一縮放設定,以及該第二視訊效果設定包含一第二縮放設定。
  24. 如申請專利範圍第21項所述之應用於一多媒體內容的播放裝置,其中該播放功能方塊會依據該使用者位置的一第一指示值,選擇該複數個第一畫面之每一第一畫面中的一第一局部影像、依據該第一視訊效果設定來處理該複數個第一畫面所選取出的複數個第一局部影像以產生複數個已處理第一影像,以及依據該複數個已處理第一影像來驅動該顯示螢幕;以及該播放功能方塊另依據該使用者位置的一第二指示值,選擇該複數個第二畫面之每一第二畫面中的一第二局部影像,其中該第二指示值係不同於該第一指示值、依據該第二視訊效果設定來處理該複數個第二畫面所選取出的複數個第二局部影像以產生複數個已處理第二影像,以及依據該複數個已處理第二影像來驅動該顯示螢幕。
  25. 如申請專利範圍第19項所述之應用於一多媒體內容的播放裝置,其中該多媒體內容包含一音訊資料;當該接收功能方塊接收到該音訊資料的一第一音訊片段時,該播放功能方塊會依據一第一音訊效果設定來驅動一揚聲系統以播放該音訊資料的該第一音訊片段;以及當該使用者的位置改變與該接收功能方塊接收到該音訊資料的一第二音訊片段時,該播放功能方塊會依據與該第一音訊效果設定相異的一第二音訊效果設定來驅動該揚聲系統以播放該第二音訊片段。
  26. 如申請專利範圍第25項所述之應用於一多媒體內容的播放裝置,其中該第一音訊效果設定係為一第一環繞音訊設定,以及該第二音訊效果設定係為一第二環繞音訊設定。
  27. 如申請專利範圍第25項所述之應用於一多媒體內容的播放裝置,其中該第一環繞音訊設定與該第二環繞音訊設定係對應於不同的音場深度。
  28. 如申請專利範圍第25項所述之應用於一多媒體內容的播放裝置,其中該接收功能方塊另接收與一立體視訊資料之播放相關的一景深參數,以及該景深參數係被參考來設定該第一音訊效果設定與該第二音訊效果設定中至少其一。
TW101109317A 2011-04-14 2012-03-19 應用於多媒體內容的播放方法與播放裝置 TWI513305B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US13/087,349 US8988512B2 (en) 2011-04-14 2011-04-14 Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof

Publications (2)

Publication Number Publication Date
TW201242356A TW201242356A (en) 2012-10-16
TWI513305B true TWI513305B (zh) 2015-12-11

Family

ID=46994799

Family Applications (1)

Application Number Title Priority Date Filing Date
TW101109317A TWI513305B (zh) 2011-04-14 2012-03-19 應用於多媒體內容的播放方法與播放裝置

Country Status (3)

Country Link
US (2) US8988512B2 (zh)
CN (1) CN102740154B (zh)
TW (1) TWI513305B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011205487A (ja) * 2010-03-26 2011-10-13 Panasonic Corp 指向性音響システム
JP5772069B2 (ja) * 2011-03-04 2015-09-02 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8988512B2 (en) * 2011-04-14 2015-03-24 Mediatek Inc. Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof
KR101873759B1 (ko) * 2012-04-10 2018-08-02 엘지전자 주식회사 영상 표시 장치 및 그 제어방법
CN103873917A (zh) * 2012-12-13 2014-06-18 联想(北京)有限公司 一种多媒体播放处理方法及系统
TWI499289B (zh) * 2013-01-25 2015-09-01 Wistron Corp 媒體內容推薦方法及媒體播放系統
CN103546672B (zh) * 2013-11-07 2016-09-07 苏州君立软件有限公司 一种图像采集系统
TWI558229B (zh) 2014-05-06 2016-11-11 宏碁股份有限公司 多媒體播放系統及其聲道控制方法
CN105474071A (zh) * 2014-05-27 2016-04-06 联发科技股份有限公司 投射显示系统的投射处理器
US9918136B2 (en) 2014-05-29 2018-03-13 Nextvr Inc. Methods and apparatus for delivering content and/or playing back content
KR102407283B1 (ko) * 2014-05-29 2022-06-10 네버마인드 캐피탈 엘엘씨 콘텐트를 전달 및/또는 콘텐트를 재생하기 위한 방법들 및 장치
CN105263072B (zh) * 2014-07-14 2018-12-18 宏碁股份有限公司 多媒体播放系统及其声道控制方法
TWI556624B (zh) * 2014-07-18 2016-11-01 友達光電股份有限公司 影像顯示方法以及影像顯示裝置
WO2017054185A1 (zh) 2015-09-30 2017-04-06 华为技术有限公司 一种展示全景视觉内容的方法、装置及终端
CN105791882B (zh) * 2016-03-22 2018-09-18 腾讯科技(深圳)有限公司 视频编码方法及装置
CN107147824A (zh) * 2016-06-22 2017-09-08 深圳市量子视觉科技有限公司 多视角视频的输出方法和装置
US10481856B2 (en) * 2017-05-15 2019-11-19 Microsoft Technology Licensing, Llc Volume adjustment on hinged multi-screen device
CN111225269B (zh) * 2020-01-17 2022-11-11 北京达佳互联信息技术有限公司 视频播放方法、装置、播放终端及存储介质
CN114816641B (zh) * 2022-05-09 2023-05-02 海信视像科技股份有限公司 显示设备、多媒体内容显示方法和存储介质
US11748406B2 (en) * 2021-11-01 2023-09-05 Lucasfilm Entertainment Company Ltd. LLC AI-assisted sound effect editorial
CN114285933A (zh) * 2021-12-23 2022-04-05 天翼视讯传媒有限公司 一种实现手机视频、图片随人脸位置变化而变化的方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030123713A1 (en) * 2001-12-17 2003-07-03 Geng Z. Jason Face recognition system and method
US20050144284A1 (en) * 1997-11-04 2005-06-30 Collaboration Properties, Inc. Scalable networked multimedia system and applications
US20070162571A1 (en) * 2006-01-06 2007-07-12 Google Inc. Combining and Serving Media Content
US20100008416A1 (en) * 2008-07-10 2010-01-14 Sagee Ben-Zedeff Systems, Methods, and Media for Providing Selectable Video Using Scalable Video Coding

Family Cites Families (54)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5287437A (en) 1992-06-02 1994-02-15 Sun Microsystems, Inc. Method and apparatus for head tracked display of precomputed stereo images
US6266106B1 (en) * 1997-09-24 2001-07-24 Sanyo Electric Co., Ltd. Liquid crystal shutter glasses having inclined liquid crystal glasses
US20020163482A1 (en) * 1998-04-20 2002-11-07 Alan Sullivan Multi-planar volumetric display system including optical elements made from liquid crystal having polymer stabilized cholesteric textures
US6590983B1 (en) * 1998-10-13 2003-07-08 Srs Labs, Inc. Apparatus and method for synthesizing pseudo-stereophonic outputs from a monophonic input
US6788274B2 (en) * 2000-01-31 2004-09-07 National Institute Of Information And Communications Technology Apparatus and method for displaying stereoscopic images
US7127081B1 (en) * 2000-10-12 2006-10-24 Momentum Bilgisayar, Yazilim, Danismanlik, Ticaret, A.S. Method for tracking motion of a face
US7155036B2 (en) * 2000-12-04 2006-12-26 Sony Corporation Face detection under varying rotation
US6421259B1 (en) * 2000-12-28 2002-07-16 International Business Machines Corporation Modular DC distribution system for providing flexible power conversion scalability within a power backplane between an AC source and low voltage DC outputs
US7027620B2 (en) * 2001-06-07 2006-04-11 Sony Corporation Method of recognizing partially occluded and/or imprecisely localized faces
US20040072584A1 (en) * 2002-03-01 2004-04-15 Kern Ronald J. Wireless distribution of multimedia content
AU2003280516A1 (en) * 2002-07-01 2004-01-19 The Regents Of The University Of California Digital processing of video images
DE10243096A1 (de) * 2002-09-16 2004-03-25 Michael Thiemann Streamingportal, Computervorrichtung mit dem Streamingportal, Verfahren zum Bereitstellen des Streamingportals, Computerprogrammprodukt, computerlesbares Medium, Computernetzwerk zum Bereitstellen des Streamingportals, erstes, zweites und drittes Computersystem und Verwendung derselben
WO2004049734A1 (ja) * 2002-11-28 2004-06-10 Seijiro Tomita 立体映像信号生成回路及び立体映像表示装置
EP1599828A1 (en) * 2003-03-06 2005-11-30 Animetrics, Inc. Viewpoint-invariant image matching and generation of three-dimensional models from two-dimensional imagery
US7428000B2 (en) * 2003-06-26 2008-09-23 Microsoft Corp. System and method for distributed meetings
US7738554B2 (en) * 2003-07-18 2010-06-15 Microsoft Corporation DC coefficient signaling at small quantization step sizes
JP2008508621A (ja) * 2004-08-03 2008-03-21 シルバーブルック リサーチ ピーティワイ リミテッド ウォークアップ印刷
KR20060029074A (ko) * 2004-09-30 2006-04-04 삼성에스디아이 주식회사 전자방출 표시장치 및 이의 제조방법
US20070035628A1 (en) * 2005-08-12 2007-02-15 Kunihiko Kanai Image-capturing device having multiple optical systems
JP4595750B2 (ja) * 2005-08-29 2010-12-08 ソニー株式会社 画像処理装置および方法、並びにプログラム
US20070277203A1 (en) * 2006-05-25 2007-11-29 Samsung Electronics Co., Ltd. Apparatus and method for receiving digital multimedia broadcast in electronic device
JP4683339B2 (ja) * 2006-07-25 2011-05-18 富士フイルム株式会社 画像トリミング装置
US20080118086A1 (en) * 2006-11-16 2008-05-22 Scott Krig Method and System For Controlling Volume Settings For Multimedia Devices
US7693535B2 (en) * 2006-12-22 2010-04-06 Sony Ericsson Mobile Communications Ab Communication systems and methods for providing a group play list for multimedia content records
TWI363555B (en) * 2007-01-25 2012-05-01 Inventec Appliances Corp Communication apparatus with network multimedia playback function
US8253797B1 (en) * 2007-03-05 2012-08-28 PureTech Systems Inc. Camera image georeferencing systems
JP4782725B2 (ja) * 2007-05-10 2011-09-28 富士フイルム株式会社 合焦装置および方法並びにプログラム
JP4600435B2 (ja) * 2007-06-13 2010-12-15 ソニー株式会社 画像撮影装置及び画像撮影方法、並びにコンピュータ・プログラム
DE202007010389U1 (de) * 2007-07-24 2007-09-27 Maier, Florian Vorrichtung zur automatischen Positionierung von gekoppelten Kameras zur plastischen Bilddarstellung
JP4946730B2 (ja) * 2007-08-27 2012-06-06 ソニー株式会社 顔画像処理装置及び顔画像処理方法、並びにコンピュータ・プログラム
US8488901B2 (en) * 2007-09-28 2013-07-16 Sony Corporation Content based adjustment of an image
US8155090B2 (en) * 2007-11-01 2012-04-10 Telefonaktiebolaget L M Ericsson (Publ) Method and apparatus for efficient multimedia delivery in a wireless packet network
US8612384B2 (en) * 2008-04-02 2013-12-17 Michael Andrew Hall Methods and apparatus for searching and accessing multimedia content
WO2009157159A1 (ja) * 2008-06-24 2009-12-30 パナソニック株式会社 記録媒体、再生装置、集積回路、再生方法、プログラム
CN102067591B (zh) * 2008-06-26 2014-03-19 松下电器产业株式会社 再现装置、记录装置、再现方法及记录方法
US8331023B2 (en) * 2008-09-07 2012-12-11 Mediatek Inc. Adjustable parallax barrier 3D display
US20100081486A1 (en) * 2008-09-26 2010-04-01 Kim Justin C Portable wireless communication device
CN102232295A (zh) * 2008-09-30 2011-11-02 松下电器产业株式会社 再现装置、记录介质及集成电路
CN102204261B (zh) * 2008-10-21 2016-08-24 皇家飞利浦电子股份有限公司 用于处理输入的三维视频信号的方法和系统
JP5472584B2 (ja) * 2008-11-21 2014-04-16 ソニー株式会社 撮像装置
US8111247B2 (en) * 2009-03-27 2012-02-07 Sony Ericsson Mobile Communications Ab System and method for changing touch screen functionality
GB2471137B (en) * 2009-06-19 2011-11-30 Sony Comp Entertainment Europe 3D image processing method and apparatus
CN101931823A (zh) 2009-06-24 2010-12-29 夏普株式会社 显示3d图像的方法和设备
US8878912B2 (en) * 2009-08-06 2014-11-04 Qualcomm Incorporated Encapsulating three-dimensional video data in accordance with transport protocols
US8442244B1 (en) * 2009-08-22 2013-05-14 Marshall Long, Jr. Surround sound system
KR101695809B1 (ko) * 2009-10-09 2017-01-13 엘지전자 주식회사 이동 단말기 및 그 제어방법
US8274592B2 (en) * 2009-12-22 2012-09-25 Eastman Kodak Company Variable rate browsing of an image collection
US20110157322A1 (en) * 2009-12-31 2011-06-30 Broadcom Corporation Controlling a pixel array to support an adaptable light manipulator
CN101742096A (zh) 2010-01-21 2010-06-16 中华电信股份有限公司 多视角互动电视系统与方法
KR101349227B1 (ko) * 2010-03-29 2014-02-11 한국전자통신연구원 멀티미디어 시스템에서 객체 정보 제공 장치 및 방법
US8446461B2 (en) * 2010-07-23 2013-05-21 Superd Co. Ltd. Three-dimensional (3D) display method and system
US9716920B2 (en) * 2010-08-05 2017-07-25 Qualcomm Incorporated Signaling attributes for network-streamed video data
US20120086777A1 (en) * 2010-10-08 2012-04-12 Industrial Technology Research Institute Systems and methods for detecting and displaying three-dimensional videos
US8988512B2 (en) * 2011-04-14 2015-03-24 Mediatek Inc. Method for adjusting playback of multimedia content according to detection result of user status and related apparatus thereof

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050144284A1 (en) * 1997-11-04 2005-06-30 Collaboration Properties, Inc. Scalable networked multimedia system and applications
US20030123713A1 (en) * 2001-12-17 2003-07-03 Geng Z. Jason Face recognition system and method
US20070162571A1 (en) * 2006-01-06 2007-07-12 Google Inc. Combining and Serving Media Content
US20100008416A1 (en) * 2008-07-10 2010-01-14 Sagee Ben-Zedeff Systems, Methods, and Media for Providing Selectable Video Using Scalable Video Coding

Also Published As

Publication number Publication date
CN102740154A (zh) 2012-10-17
US20120262555A1 (en) 2012-10-18
US9367218B2 (en) 2016-06-14
US20150153940A1 (en) 2015-06-04
TW201242356A (en) 2012-10-16
CN102740154B (zh) 2015-07-15
US8988512B2 (en) 2015-03-24

Similar Documents

Publication Publication Date Title
TWI513305B (zh) 應用於多媒體內容的播放方法與播放裝置
TWI530157B (zh) 多視角影像之顯示系統、方法及其非揮發性電腦可讀取紀錄媒體
EP2432229A2 (en) Object tracking and highlighting in stereoscopic images
JP5452537B2 (ja) 映像表示システム及び表示装置
JP5851625B2 (ja) 立体視映像処理装置、立体視映像処理方法及び立体視映像処理用プログラム
JP2012015774A (ja) 立体視映像処理装置および立体視映像処理方法
JP2008103820A (ja) 立体画像処理装置
US20150172558A1 (en) Video processing method, apparatus, and system
CN107925840A (zh) 用于处理与视频图像相关联的音频信号的方法和装置
EP2751988A1 (en) Method and system for providing an improved audio experience for viewers of video
EP3468171B1 (en) Display apparatus and recording medium
JP2012186652A (ja) 電子機器、画像処理方法及び画像処理プログラム
JP5066244B2 (ja) 映像再生装置及び映像再生方法
JP2012080294A (ja) 電子機器、映像処理方法、及びプログラム
TWI425498B (zh) 關聯於雙影像應用的影音播放系統及其方法
KR20110114583A (ko) 디스플레이 파라미터 설정들의 제어
US8416288B2 (en) Electronic apparatus and image processing method
JP5550520B2 (ja) 再生装置及び再生方法
JP5161999B2 (ja) 電子機器、表示制御方法及び表示制御プログラム
JP5433774B2 (ja) 電子機器、表示制御方法及び表示制御プログラム
JP2011109422A (ja) 3次元映像表示装置、再生装置及び記録媒体
JP2011223182A (ja) 画像処理装置、画像処理方法、およびプログラム
JP2013146043A (ja) 3d映像表示装置、同プログラム及び同プログラムを記憶した記録媒体
JP2012222376A (ja) 表示装置
JP2011146830A (ja) 映像処理装置、映像識別方法、映像表示装置及びコンピュータプログラム