TWI410862B - 多媒體資料顯示方法和多媒體資料顯示裝置 - Google Patents

多媒體資料顯示方法和多媒體資料顯示裝置 Download PDF

Info

Publication number
TWI410862B
TWI410862B TW099106082A TW99106082A TWI410862B TW I410862 B TWI410862 B TW I410862B TW 099106082 A TW099106082 A TW 099106082A TW 99106082 A TW99106082 A TW 99106082A TW I410862 B TWI410862 B TW I410862B
Authority
TW
Taiwan
Prior art keywords
picture
display
pictures
music
audio
Prior art date
Application number
TW099106082A
Other languages
English (en)
Other versions
TW201113806A (en
Inventor
Min Hung Chien
Original Assignee
Mediatek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mediatek Inc filed Critical Mediatek Inc
Publication of TW201113806A publication Critical patent/TW201113806A/zh
Application granted granted Critical
Publication of TWI410862B publication Critical patent/TWI410862B/zh

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B19/00—Driving, starting, stopping record carriers not specifically of filamentary or web form, or of supports therefor; Control thereof; Control of operating function ; Driving both disc and head
    • G11B19/02—Control of operating function, e.g. switching from recording to reproducing
    • G11B19/022—Control panels
    • G11B19/025—'Virtual' control panels, e.g. Graphical User Interface [GUI]
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Description

多媒體資料顯示方法和多媒體資料顯示裝置
本發明係有關於一種多媒體資料顯示方法和多媒體資料顯示裝置。
隨著人工智能的發展，消費者電子產品的應用被需要。然而，用於播放音樂和顯示圖片的媒體播放器並未提供足夠的類似人工智能的功能，以至於情感類型模式功能可能並未充分滿足使用者需求。因此，需要進行人工操作以設置情感類型模式，例如為待播放的圖片設置顯示效果和顯示速度，用以與音樂類型進行匹配。
因此，需要提供一種用於顯示多媒體資料的方法和裝置，依據情感類型模式而不需人工操作能同步播放音樂和顯示圖片。
有鑑於此，本發明提供一種多媒體資料顯示方法和多媒體資料顯示裝置以解決上述問題。
本發明提供一種多媒體資料顯示方法，包括：提供音頻位元流和至少一圖片；分析該音頻位元流用以獲得至少一特徵值；依據該音頻位元流的該至少一特徵值，確定來自多個重現模型的重現模型用以播放該音頻位元流；播放該音頻位元流；以及當播放該音頻位元流時，依據該已確定的重現模型顯示該至少一圖片。
本發明另提供一種多媒體資料顯示方法，包括：提供多張圖片和多個不同音樂類型；分析該多張圖片之至少一者用以獲得至少一特徵值；依據該多張圖片之至少一者的該至少一特徵值，確定來自多個重現模型的重現模型用以顯示該多張圖片之至少一者；依據該已確定的重現模型選擇該多個不同音樂類型之一者；播放該已選擇的音樂類型；以及當播放該已選擇的音樂類型時，依據該已確定的重現模型顯示該多張圖片之該至少一者。
本發明再提供一種多媒體資料顯示裝置，依據多個重現模型進行顯示，包括：第一記憶體，用以存儲多個音頻位元流；第二記憶體，用以存儲一圖片組；處理模組，用以在音樂優先級模式中接收和分析該多個音頻位元流之一者或在圖片優先級模式中接收和分析該圖片組之至少一張圖片，以產生至少一特徵值；決定模組，用以接收該至少一特徵值，並依據該至少一特徵值確定該多個重現模型之一者在該音樂優先級模式中播放該已分析的音頻位元流，或在該圖片優先級模式中顯示該已分析的圖片，並依據該已確定的重現模型產生第一指示信號和第二指示信號；音樂播放模組，用以依據該第一指示信號在該音樂優先級模式中播放該多個音頻位元流之該者，或依據該第一指示信號在該圖片優先級模式中播放該多個音頻位元流之一類型；以及顯示模組，用以依據該第二指示信號在該音樂優先級模式中顯示該圖片組，或依據該第二指示信號在該圖片優先級模式中顯示該圖片組之該至少一張圖片。
利用本發明提供的多媒體資料顯示方法和多媒體資料顯示裝置能夠依據情感類型模式而不需人工操作就能同步播放音樂和顯示圖片。
在說明書及後續的申請專利範圍當中使用了某些詞彙來指稱特定元件。所屬領域中具有通常知識者應可理解，製造商可能會用不同的名詞來稱呼同一個元件。本說明書及後續的申請專利範圍並不以名稱的差異來作為區分元件的方式，而是以元件在功能上的差異來作為區分的準則。在通篇說明書及後續的請求項當中所提及的“包括”和“包含”係為一開放式的用語，故應解釋成“包含但不限定於”。此外，“耦接”一詞在此係包含任何直接及間接的電性連接手段。間接的電性連接手段包括通過其他裝置進行連接。
提供依據多個重現模型的用以顯示多媒體資料的裝置。第1圖係本發明一範例實施例的用以顯示多媒體資料的裝置。用以顯示多媒體資料的裝置1包括第一記憶體10和第二記憶體11、處理模組12、決定模組13、音樂播放模組14和顯示模組15。裝置1可由音樂優先級模式或圖片優先級模式操作，用以同步播放音樂和顯示圖片。音樂優先級模式和圖片優先級模式之每一者皆包括至少一重現模型。第一記憶體10用以存儲多個音頻位元流，當裝置1工作時可從外部裝置輸入該多個音頻位元流，也可預先輸入並存儲該多個音頻位元流。在本實施例中，一個音頻位元流相應於一音樂片段，或多個接續音頻位元流構成一音樂片段。第二記憶體11用以存儲多張圖片，當裝置1工作時可從外部裝置輸入該多張圖片，也可預先輸入並存儲該多張圖片。處理模組12可依據音樂優先級模式的操作存取音頻位元流，以及依據圖片優先級模式的操作存取圖片，其中，音頻位元流由第一記憶體10或外部裝置輸入，圖片來自第二記憶體11或外部裝置。需注意的是，第一記憶體10和第二記憶體11皆僅用於舉例，並非用於限制本發明。第一記憶體10和第二記憶體11可實施為同一個記憶體；任何能夠存儲多個音頻位元流和多張圖片的儲存裝置皆符合本發明之範疇。
音樂播放模組14包括重現控制器140和由重現控制器140控制的音頻輸出元件141，例如，揚聲器、線路輸出插口和耳機。顯示模組15包括顯示控制器150和由顯示控制器150控制的顯示元件151，例如面板和液晶顯示(Liquid crystal display，LCD)。
接下來，依據第1圖和相應的流程圖描述處於音樂優先級模式和圖片優先級模式的裝置1的操作。
第2圖係處於音樂優先級模式的裝置1的操作的範例實施例的流程圖。如第2圖所示，已建立多個重現模型，且重現模型的資訊已記錄於決定模組13的表130之內(步驟S20)。第3圖係第2圖的步驟S20的範例實施例的流程圖。如第3圖所示，提供並收集多個模組音頻位元流(步驟S30)，然後將模組音頻位元流播放給收聽者(步驟S31)。然後收聽者收聽每個模組音頻位元流，並為每種類型的模組音頻位元流確定收聽者的情感感受。然後收集收聽者的情感感受(步驟S32)。分析每個模組音頻位元流以獲得至少一個特徵值(步驟S33)。在本實施例中，該至少一特徵值可為已分析的模組音頻位元流的頻率變化值和/或音量變化值。然後將至少一參考值與該每個模組音頻位元流的該至少一特徵值進行比較(步驟S34)。依據在步驟S32中收集的情感感受以及在步驟S34中產生的比較結果建立用於音樂優先級模式的重現模型，用以同時播放音樂和顯示圖片(步驟S35)。
假設該至少一特徵值係頻率變化值，且已預先確定兩個參考值FH和FL，其中，參考值FH大於參考值FL。將一模組音頻位元流播放給收聽者。然後收聽者確定他們對該類型的模組音頻位元流的情感感受(步驟S32)，例如搖滾音樂、羅曼蒂克音樂或普通音樂。分析已播放的模組音頻位元流以獲得其頻率變化值(步驟S33)，然後將已獲得的頻率變化值與參考值FH和FL進行比較(步驟S34)。將足夠多的模組音頻位元流播放給收聽者，且執行步驟S32、S33和S34。經由對收聽者的情感感受和模組音頻位元流的比較結果執行統計學操作和分類操作，可為音樂優先級模式建立如下的三種重現模型。
第一重現模型：具有大於參考值FH的頻率變化值FV的音頻位元流被分類為第一音樂類型，例如搖滾音樂，且當播放該音頻位元流時，根據預設顯示效果和/或相應於第一重現模型的預設顯示效果(換言之，根據該預設顯示效果、該相應於第一重現模型的預設顯示效果或該預設顯示效果和該相應於第一重現模型的預設顯示效果的組合)顯示所需圖片，其中，如第1表所示，相應於第一重現模型的預設顯示效果係快轉變效果，而該預設顯示效果係快顯示速度。
第二重現模型：具有小於參考值FL的頻率變化值FV的音頻位元流被分類為第二音樂類型，例如羅曼蒂克音樂，且當播放該音頻位元流時，根據預設顯示效果和/或相應於第二重現模型的預設顯示效果顯示所需圖片，其中，如第1表所示，相應於第二重現模型的預設顯示效果係漸進轉變效果，而該預設顯示效果係慢顯示速度。
第三重現模型：具有大於參考值FL而小於參考值FH的頻率變化值FV的音頻位元流被分類為第三音樂類型，例如普通音樂，且當播放該音頻位元流時，根據預設顯示效果和/或相應於第三重現模型的預設顯示效果顯示所需圖片，其中，如第1表所示，相應於第三重現模型的預設顯示效果係普通轉變效果，而該預設顯示效果係平均顯示速度，該普通轉變效果界於快轉變效果和漸進轉變效果之間，該平均顯示速度界於快顯示速度和慢顯示速度之間。
在一些實施例中，顯示效果依據重現模型的確定可為寬轉變效果、對角線寬轉變效果、延伸轉變效果、壓縮轉變效果、視窗轉變效果或淡入轉變效果。第1表僅用於舉例，並非用於限制本發明之範疇。
請參考第1圖和第2圖，提供預先存儲於第一記憶體10的多個音頻位元流的一個或來自外部裝置的一音頻位元流至處理模組12。此外，提供預先存儲於第二記憶體11的多張圖片或來自外部裝置的多張圖片(步驟S21)。在本實施例中，處理模組12對第一記憶體10執行讀操作，用以接收存儲於第一記憶體10的多個音頻位元流的一個。然後處理模組12分析已接收的音頻位元流用以獲得該音頻位元流的至少一個特徵值(步驟S22)。提供該特徵值至決定模組13。決定模組13對該特徵值和存儲於表130中的至少一個參考值(例如參考值FH和FL)進行比較(步驟S23)，並確定已分析的音頻位元流的類型為第1表所示的第一音樂類型、第二音樂類型或第三音樂類型，並依據比較結果進一步確定對於該已分析的音頻位元流使用三種重現模型之何者(步驟S24)。決定模組13依據該已確定的重現模型分別為重現控制器140和顯示控制器150產生指示信號S130和S131。重現控制器140依據該指示信號S130從第一記憶體10讀取由處理模組12分析的音頻位元流，並經由音頻輸出元件141播放該音頻位元流(步驟S25)。顯示控制器150依據該指示信號S131控制顯示元件151，用以調節顯示效果和顯示速度，並從第二記憶體11中讀取至少一張圖片。當重現控制器140經由該音頻輸出元件141播放該音頻位元流時，顯示元件151依據相應於該已確定的重現模型的該指示信號S131顯示該至少一張圖片(步驟S26)。例如，顯示元件151使用該已確定的重現模型的顯示效果和顯示速度對該至少一張圖片進行顯示。
例如，當該已分析的音頻位元流的頻率變化值大於該參考值FH時，決定模組13確定將使用該第一重現模型。當播放該已分析的音頻位元流時，顯示元件151使用快轉變效果和快顯示速度對該至少一張圖片進行顯示。
依據第2圖的實施例，當裝置1操作於音樂優先級模式而同步播放音樂和顯示圖片時，圖片的顯示效果和/或顯示速度與音頻位元流的類型匹配。相應地，裝置1可以依據人類情感感受而非人工操作同時播放音樂和顯示圖片。
此外，假設存儲於第一記憶體10的音頻位元流能依據音頻片段的音樂類型被分為多個接續的音頻片段，則可交替地提供該等音頻片段至處理模組12，用以獲得特徵值。然後決定模組13為每個音頻片段確定重現模型。相應地，圖片的顯示效果和顯示速度根據每個音頻片段的音樂類型的改變而改變。
第4圖係處於圖片優先級模式的裝置1的操作的範例實施例的流程圖。如第4圖所示，已建立多個重現模型，且重現模型的資訊已記錄於決定模組13的表130之內(步驟S40)。第5圖係第4圖的步驟S40的範例實施例的流程圖。如第5圖所示，提供多張模組圖片(步驟S50)，然後將模組圖片顯示給觀看者(步驟S51)。然後觀看者觀看每張模組圖片，並為每張模組圖片的內容確定觀看者的情感感受。然後收集觀看者的情感感受(步驟S52)。分析每張模組圖片以獲得至少一特徵值(步驟S53)。在本實施例中，該至少一特徵值可為該模組圖片的產生時間、快門速度值、光圈值和國際標準化組織(International Standardization Organization，ISO)值至少一者。然後將至少一參考值與該每張模組圖片的該至少一特徵值進行比較(步驟S54)。依據在步驟S52中收集的情感感受以及在步驟S54中產生的比較結果建立用於圖片優先級模式的重現模型，用以同時播放音樂和顯示圖片(步驟S55)。
假設該至少一特徵值係快門速度值，且已預先確定兩個參考值SH和SL，其中，參考值SH大於參考值SL。將一模組圖片顯示給觀看者。然後觀看者確定他們對該模組圖片內容的情感感受(步驟S52)，例如動態圖片、靜態圖片或普通圖片。分析已顯示的模組圖片以獲得其快門速度值(步驟S53)，然後將已獲得的快門速度值與參考值SH和SL進行比較(步驟S54)。將足夠多的模組圖片顯示給觀看者，且執行步驟S52、S53和S54。經由對觀看者的情感感受和模組圖片的比較結果執行統計學操作和分類操作，可為圖片優先級模式建立如下的三種重現模型。
第一重現模型：圖片組中的具有大於參考值SH的快門速度值SV的一張圖片被分類為第一圖片類型，例如動態圖片，且根據預設顯示效果和/或相應於第一重現模型的預設顯示效果顯示該圖片組，其中，如第2表所示，相應於第一重現模型的預設顯示效果係快轉變效果，而該預設顯示效果係快顯示速度，且當顯示該圖片組時，選擇並播放相應於第一重現模型的第一音樂類型，例如搖滾音樂。
第二重現模型：圖片組中的具有小於參考值SL的快門速度值SV的一張圖片被分類為第二圖片類型，例如靜態圖片，且根據預設顯示效果和/或相應於第二重現模型的預設顯示效果顯示該圖片組，其中，如第2表所示，相應於第二重現模型的預設顯示效果係漸進轉變效果，而該預設顯示效果係慢顯示速度，且當顯示該圖片組時，選擇並播放相應於第二重現模型的第二音樂類型，例如羅曼蒂克音樂。
第三重現模型：圖片組中的具有大於參考值SL而小於參考值SH的頻率變化值SV的一張圖片被分類為第三圖片類型，例如普通圖片，且根據預設顯示效果和/或相應於第三重現模型的預設顯示效果顯示該圖片組，其中，如第2表所示，相應於第三重現模型的預設顯示效果係普通轉變效果，而該預設顯示效果係平均顯示速度，該普通轉變效果界於快轉變效果和漸進轉變效果之間，該平均顯示速度界於快顯示速度和慢顯示速度之間，且當顯示該圖片組時，選擇並播放相應於第三重現模型的第三音樂類型，例如普通音樂。需注意的是，第2表中的SV、SH和SL並非為絕對快門速度值，而是示意快門速度值，且第2表僅用來舉例，並非用以限制本發明之範疇。此外，對於圖片優先級模式，可使用該圖片組的多張圖片用以確定重現模型。
請參考第1圖和第4圖，提供預先存儲於第一記憶體10的多個音頻位元流以及預先存儲於第二記憶體11的一圖片組。作為選擇，可從外部裝置提供該圖片組至處理模組12，並也存儲於第二記憶體11(步驟S41)，其中，該音頻位元流包括多個不同的音樂類型。在本實施例中，處理模組12對第二記憶體11執行讀操作，用以接收存儲於第二記憶體11的該圖片組的至少一張圖片。然後處理模組12分析已接收的圖片用以獲得該圖片的至少一個特徵值(步驟S42)，例如快門速度值。提供該特徵值至決定模組13。決定模組13對該特徵值和存儲於表130中的至少一個參考值(例如參考值SH和SL)進行比較(步驟S43)，並確定已分析的圖片的類型為第2表所示的第一圖片類型、第二圖片類型或第三圖片類型，並依據比較結果進一步確定對於該圖片組使用三種重現模型之何者(步驟S44)。決定模組13依據該已確定的重現模型分別為重現控制器140和顯示控制器150產生指示信號S130和S131。重現控制器140依據該指示信號S130在第一記憶體10中從該等不同音樂類型中選擇出一種相應的音樂類型(步驟S45)，並經由音頻輸出元件141播放已選擇的音樂類型(步驟S46)。顯示控制器150依據該指示信號S131調節顯示效果和/或顯示速度，用以控制顯示元件151顯示來自第二記憶體11的圖片組。當重現控制器140經由音頻輸出元件141播放該已選擇的音樂類型時，顯示元件151依據該已確定的重現模型的顯示效果和顯示速度顯示該圖片組的至少一張圖片(步驟S47)。
例如，當該已分析的圖片的快門速度值大於該參考值SH時，決定模組13確定將使用第一重現模型。重現控制器140選擇搖滾音樂提供至音頻輸出元件141用以播放。當播放搖滾音樂時，顯示元件151使用快轉變效果和快顯示速度對該圖片組進行顯示。
依據第4圖的實施例，當裝置1操作於圖片優先級模式而同步播放音樂和顯示圖片時，圖片的顯示效果和/或顯示速度與圖片組的內容匹配，且選擇播放與該圖片組內容匹配的音樂類型。相應地，裝置1可以依據人類情感感受而非人工操作同時播放音樂和顯示圖片。
此外，假設經由處理模組12對存儲於第二記憶體11的圖片組的多張圖片進行處理，並對於已確定的重現模型獲得各自的特徵值。處理模組12對該等特徵值執行統計學操作，用以獲得一最終特徵值，決定模組13依據該最終特徵值和該等參考值確定使用該等重現模型之何者。
在音樂優先級模式和圖片優先級模式中，在決定模組13確定使用該等重現模型之何者去同時播放音樂和顯示圖片之後，顯示模組15可依據該已確定的重現模型修改該等圖片的顏色溫度、顏色色調、對比度、亮度值和/或飽和度，因此，已修改的圖片的內容進一步與已播放的音樂類型匹配。在一些實施例中，在圖片優先級中確定重現模型之後，音樂播放模組14亦可修改待播放的音樂的低音、高音或均衡，因此，已修改的音樂類型進一步與待顯示的圖片的內容匹配。
上述之實施例僅用來例舉本發明之實施態樣，以及闡釋本發明之技術特徵，並非用來限制本發明之範疇。任何習知技藝者可依據本發明之精神輕易完成之改變或均等性之安排均屬於本發明所主張之範圍，本發明之權利範圍應以申請專利範圍為準。
1．．．播放多媒體資料的裝置
10．．．第一記憶體
11．．．第二記憶體
12．．．處理模組
13．．．決定模組
14．．．音樂播放模組
15．．．顯示模組
140．．．重現控制器
141．．．音頻輸出元件
150．．．顯示控制器
151．．．顯示元件
130．．．表
S130、S131．．．指示信號
S20~S26．．．步驟
S30~S35．．．步驟
S40~S47．．．步驟
S50~S55．．．步驟
第1圖係本發明一範例實施例的用以播放多媒體資料的裝置；
第2圖係處於音樂優先級模式的裝置1的操作的範例實施例的流程圖；
第3圖係第2圖的構建重現模型步驟的範例實施例的流程圖；
第4圖係處於圖片優先級模式的裝置1的操作的範例實施例的流程圖；
第5圖係第4圖的構建重現模型步驟的範例實施例的流程圖。
S20~S26．．．步驟

Claims (21)

  1. 一種多媒體資料顯示方法，該多媒體資料顯示方法包括：基於對應於多個模組音頻位元流之多個情感感受建立多個重現模型；提供一音頻位元流和至少一圖片；分析該音頻位元流用以獲得至少一特徵值；依據該音頻位元流的該至少一特徵值，確定來自該多個重現模型的一重現模型用以播放該音頻位元流；播放該音頻位元流；以及當播放該音頻位元流時，依據該已確定的重現模型顯示該至少一圖片。
  2. 如申請專利範圍第1項所述之多媒體資料顯示方法，其中，依據該已確定的重現模型顯示該至少一圖片的步驟包括：依據該已確定的重現模型顯示具有一預設顯示效果、一預設顯示速度和該預設顯示效果以及該預設顯示速度的一組合之一者的該至少一圖片。
  3. 如申請專利範圍第2項所述之多媒體資料顯示方法，其中，該預設顯示效果係一快轉變效果、一漸進轉變效果或一普通轉變效果，且該預設顯示速度係一快顯示速度、一慢顯示速度或一平均顯示速度。
  4. 如申請專利範圍第1項所述之多媒體資料顯示方法，其中，該多個模組音頻位元流之多個不同音樂類型對應於該多個重現模型。
  5. 如申請專利範圍第1項所述之多媒體資料顯示方法，其中，建立該多個重現模型的步驟包括：收集相應於該多個模組音頻位元流的該多個情感感受；分析該多個模組音頻位元流之每一者，用以獲得至少一特徵值；比較該多個模組音頻位元流之每一者的該至少一特徵值與至少一參考值；以及依據該多個情感感受和該比較結果建立該多個重現模型。
  6. 如申請專利範圍第1項所述之多媒體資料顯示方法，其中，該至少一特徵值包括該音頻位元流的一頻率變化值和一音量變化值之至少一者。
  7. 一種多媒體資料顯示方法，該多媒體資料顯示方法包括：基於對應於多張模組圖片之多個情感感受建立多個重現模型；提供多張圖片和多個不同音樂類型；分析該多張圖片之至少一者用以獲得至少一特徵值；依據該多張圖片之至少一者的該至少一特徵值，確定來自該多個重現模型的一重現模型用以顯示該多張圖片之至少一者；依據該已確定的重現模型選擇該多個不同音樂類型之一者；播放該已選擇的音樂類型；以及 當播放該已選擇的音樂類型時，依據該已確定的重現模型顯示該多張圖片之該至少一者。
  8. 如申請專利範圍第7項所述之多媒體資料顯示方法，其中，依據該已確定的重現模型顯示該多張圖片之該至少一者的步驟包括：顯示具有一預設顯示效果、一預設顯示速度和該預設顯示效果以及該預設顯示速度的一組合之一者的該多張圖片之該至少一者。
  9. 如申請專利範圍第8項所述之多媒體資料顯示方法，其中，該預設顯示效果係一快轉變效果、一漸進轉變效果或一普通轉變效果，且該預設顯示速度係一快顯示速度、一慢顯示速度或一平均顯示速度。
  10. 如申請專利範圍第7項所述之多媒體資料顯示方法，其中，該多張模組圖片描繪不同內容，並且該內容包括動態圖片和靜態圖片中之其一。
  11. 如申請專利範圍第7項所述之多媒體資料顯示方法，其中，建立該多個重現模型的步驟包括：收集相應於該多張模組圖片的該多個情感感受；分析該多張模組圖片之每一者，用以獲得至少一特徵值；比較該多張模組圖片之每一者的該至少一特徵值與至少一參考值；以及依據該多個情感感受和該比較結果建立該多個重現模型。
  12. 如申請專利範圍第7項所述之多媒體資料顯示方 法，其中，該至少一特徵值包括該多張圖片之該至少一者的一產生時間、該多張圖片之該至少一者的一快門速度值、該多張圖片之該至少一者的一光圈值和該多張圖片之該至少一者的一國際標準化組織值之至少一者。
  13. 如申請專利範圍第7項所述之多媒體資料顯示方法，其中，該已選擇的音樂類型係一搖滾類型、一羅曼蒂克類型或一普通類型。
  14. 一種多媒體資料顯示裝置，依據多個重現模型進行顯示，該多媒體資料顯示裝置包括：一第一記憶體，用以存儲多個音頻位元流；一第二記憶體，用以存儲一圖片組；一處理模組，用以在一音樂優先級模式中接收和分析該多個音頻位元流之一音頻位元流或在一圖片優先級模式中接收和分析該圖片組之至少一張圖片，以產生至少一特徵值；一決定模組，用以接收該至少一特徵值，並依據該至少一特徵值確定該多個重現模型之一重現模型以在該音樂優先級模式中播放該已分析的音頻位元流，或在該圖片優先級模式中顯示該已分析的圖片，並依據該已確定的重現模型產生一第一指示信號和一第二指示信號；一音樂播放模組，用以依據該第一指示信號在該音樂優先級模式中播放該多個音頻位元流之該音頻位元流，或依據該第一指示信號在該圖片優先級模式中播放該多個音頻位元流之一類型；以及一顯示模組，用以依據該第二指示信號在該音樂優先 級模式中顯示該圖片組，或依據該第二指示信號在該圖片優先級模式中顯示該圖片組之該至少一張圖片。
  15. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，該音樂優先級模式中的該至少一特徵值包括該已分析的音頻位元流的一頻率變化值和一音量變化值之至少一者。
  16. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，該顯示模組顯示具有一預設顯示效果、一預設顯示速度和該預設顯示效果以及該預設顯示速度的一組合之一者的多張圖片。
  17. 如申請專利範圍第16項所述之多媒體資料顯示裝置，其中，該預設顯示效果係一快轉變效果、一漸進轉變效果或一普通轉變效果，且該預設顯示速度係一快顯示速度、一慢顯示速度或一平均顯示速度。
  18. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，在該圖片優先級模式中的該至少一特徵值包括該已分析的圖片的一產生時間、該已分析的圖片的一快門速度值、該已分析的圖片的一光圈值和該已分析的圖片的一國際標準化組織值之至少一者。
  19. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，該已播放的類型係一搖滾類型、一羅曼蒂克類型或一普通類型。
  20. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，當該處理模組操作於該音樂優先級模式時，該圖片組的顯示效果和/或顯示速度與該音頻位元流的類型 相匹配。
  21. 如申請專利範圍第14項所述之多媒體資料顯示裝置，其中，當該處理模組操作於該圖片優先級模式時，該播放的該多個音頻位元流之該類型與該圖片組的內容相匹配。
TW099106082A 2009-10-02 2010-03-03 多媒體資料顯示方法和多媒體資料顯示裝置 TWI410862B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
US12/572,384 US8909531B2 (en) 2009-10-02 2009-10-02 Methods and devices for displaying multimedia data emulating emotions based on image shuttering speed

Publications (2)

Publication Number Publication Date
TW201113806A TW201113806A (en) 2011-04-16
TWI410862B true TWI410862B (zh) 2013-10-01

Family

ID=43823225

Family Applications (1)

Application Number Title Priority Date Filing Date
TW099106082A TWI410862B (zh) 2009-10-02 2010-03-03 多媒體資料顯示方法和多媒體資料顯示裝置

Country Status (3)

Country Link
US (1) US8909531B2 (zh)
CN (1) CN102034406B (zh)
TW (1) TWI410862B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8504422B2 (en) * 2010-05-24 2013-08-06 Microsoft Corporation Enhancing photo browsing through music and advertising
CN103165152B (zh) * 2011-12-14 2017-02-08 联想(北京)有限公司 播放多媒体文件的方法及装置
US20130346920A1 (en) * 2012-06-20 2013-12-26 Margaret E. Morris Multi-sensorial emotional expression
US20150189166A1 (en) * 2013-12-30 2015-07-02 Telefonica Digital España, S.L.U. Method, device and system for improving the quality of photographs
CN104021152B (zh) * 2014-05-19 2017-09-05 广州酷狗计算机科技有限公司 基于音频文件播放的图片显示方法和装置
CN104965683A (zh) * 2015-06-29 2015-10-07 天脉聚源（北京）科技有限公司 一种动态显示数据变化过程的方法及装置
CN105142017B (zh) * 2015-08-12 2019-01-22 北京金山安全软件有限公司 一种图片视频播放时的图片切换方法及图片切换装置
CN105208439B (zh) * 2015-09-11 2018-09-04 深圳Tcl数字技术有限公司 音频文件播放方法及装置
CN110069651B (zh) * 2017-10-23 2023-04-07 腾讯科技（北京）有限公司 图片筛选方法及装置、存储介质
CN109688264B (zh) * 2018-12-17 2021-02-12 咪咕数字传媒有限公司 一种电子设备显示状态调整方法、装置及存储介质
CN110209844B (zh) * 2019-05-17 2021-08-31 腾讯音乐娱乐科技（深圳）有限公司 多媒体数据匹配方法、装置和存储介质
CN110933490B (zh) * 2019-11-20 2021-07-27 深圳创维－Rgb电子有限公司 一种画质和音质的自动调整方法、智能电视机及存储介质
CN113727038B (zh) * 2021-07-28 2023-09-05 北京达佳互联信息技术有限公司 一种视频处理方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040027369A1 (en) * 2000-12-22 2004-02-12 Peter Rowan Kellock System and method for media production
TW200937332A (en) * 2008-01-16 2009-09-01 Yahoo Inc System and method for real-time media object-specific communications
TW200941379A (en) * 2007-12-10 2009-10-01 Yahoo Inc Advertising associated with multimedia content

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6226608B1 (en) * 1999-01-28 2001-05-01 Dolby Laboratories Licensing Corporation Data framing for adaptive-block-length coding system
US20080012789A1 (en) * 2006-07-17 2008-01-17 Mediatek Inc. Multimedia display system, multimedia display apparatus and method thereof
US7904798B2 (en) * 2007-08-13 2011-03-08 Cyberlink Corp. Method of generating a presentation with background music and related system
EP2225758A2 (en) * 2007-12-21 2010-09-08 Koninklijke Philips Electronics N.V. Method and apparatus for playing pictures
CN101370216B (zh) * 2008-10-15 2013-05-22 北京中星微电子有限公司 一种手机音频文件的情绪化处理和播放方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040027369A1 (en) * 2000-12-22 2004-02-12 Peter Rowan Kellock System and method for media production
TW200941379A (en) * 2007-12-10 2009-10-01 Yahoo Inc Advertising associated with multimedia content
TW200937332A (en) * 2008-01-16 2009-09-01 Yahoo Inc System and method for real-time media object-specific communications

Also Published As

Publication number Publication date
US8909531B2 (en) 2014-12-09
TW201113806A (en) 2011-04-16
CN102034406A (zh) 2011-04-27
US20110081101A1 (en) 2011-04-07
CN102034406B (zh) 2013-07-24

Similar Documents

Publication Publication Date Title
TWI410862B (zh) 多媒體資料顯示方法和多媒體資料顯示裝置
US9402100B2 (en) Integrated multimedia signal processing system using centralized processing of signals
US8880205B2 (en) Integrated multimedia signal processing system using centralized processing of signals
US20050180462A1 (en) Apparatus and method for reproducing ancillary data in synchronization with an audio signal
WO2019069482A1 (ja) 映像表示システム及び映像表示方法
KR20060079125A (ko) 통합형 오디오 처리 시스템, 오디오 신호 조절 방법 및제어 방법
TW200931384A (en) Motion-adaptive alternating gamma drive for a liquid crystal display
US11234042B2 (en) Display device, control method therefor and recording medium
US20050207332A1 (en) Picture/sound output device with automatic output adjustment function
KR100615676B1 (ko) 콘텐츠 재생장치 및 그의 ｇｕｉ화면 디스플레이방법
US20030071839A1 (en) Method of presenting adjustable multi-channel sound field when multimedia software is playing audio data
JP2008187320A (ja) 画像表示装置、画像表示方法および制御プログラム
KR20050066249A (ko) 디지털 기록장치에서의 녹화 품질 설정방법
KR100631651B1 (ko) 음악재생이 가능한 휴대용 단말기 및 그의 이퀄라이저표시방법
JP2021019340A (ja) 情報処理装置、コンテンツ出力制御システム、情報処理装置の制御方法、及び制御プログラム
KR20000049304A (ko) 노래 반주기를 이용한 뮤직 비디오 촬영장치 및 촬영방법
JP2008294630A (ja) 録画・再生装置及びその制御方法
WO2018042722A1 (ja) 画像処理装置、テレビジョン受像機、画像処理プログラム、記録媒体、および映像提供装置
CN101661702A (zh) 视频再生设备和用于控制照明装置的方法
JP2010109657A (ja) コンテンツ再生装置、コンテンツ再生システム及びコンテンツ再生方法
JP2003101959A (ja) 映像再生装置
KR20070070734A (ko) 휴대용 멀티미디어 재생기기 및 재생방법
KR20070117033A (ko) 디브이디 데이터 구조 및 이를 이용한 디브이디 컨텐츠의출력제어장치와 방법
JP2006303557A (ja) テレビ
KR20110127909A (ko) 학습기 및 그의 작동 방법

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees