TW201820316A - 內容再生程式及內容再生裝置 - Google Patents

內容再生程式及內容再生裝置 Download PDF

Info

Publication number
TW201820316A
TW201820316A TW106137069A TW106137069A TW201820316A TW 201820316 A TW201820316 A TW 201820316A TW 106137069 A TW106137069 A TW 106137069A TW 106137069 A TW106137069 A TW 106137069A TW 201820316 A TW201820316 A TW 201820316A
Authority
TW
Taiwan
Prior art keywords
content
time axis
sound
content reproduction
unit
Prior art date
Application number
TW106137069A
Other languages
English (en)
Other versions
TWI760383B (zh
Inventor
瀧川淳
鈴木久晴
那須猛士
長友康彥
Original Assignee
日商艾菲克澤股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商艾菲克澤股份有限公司 filed Critical 日商艾菲克澤股份有限公司
Publication of TW201820316A publication Critical patent/TW201820316A/zh
Application granted granted Critical
Publication of TWI760383B publication Critical patent/TWI760383B/zh

Links

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • G11B27/3036—Time code signal
    • G11B27/3045—Time code signal superimposed on the recorded main signal, e.g. burn-in-time code
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8547—Content authoring involving timestamps for synchronizing content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本發明之內容再生程式及內容再生裝置容易且確實地判定某一內容之時間軸，且與該內容之再生連動而再生另外之內容。內容再生程式使電腦實現：聲音檢測部，其檢測在電腦之外部再生之第1內容之聲音；時間軸判定部，其基於檢測到之聲音，判定在電腦之外部繼第1內容後再生之第2內容之時間軸；及內容再生部，其基於所判定之時間軸，與第2內容之再生配合而再生與第2內容相應之第3內容。

Description

內容再生程式及內容再生裝置
本發明係關於一種內容再生程式及內容再生裝置。
業界揭示有將針對伴隨著聲音之影像的第二螢幕資訊輸出至能夠進行聲音輸入/輸出及顯示圖像之可攜式裝置之方法(專利文獻1)。在專利文獻1揭示之方法中，將影像之與各影像場景建立對應關係之時間碼作為浮水印資料而埋入於聲音中。而後進行：將時間碼與相當於第二螢幕資訊之資料建立對應關係且預先儲存於可攜式裝置內，在影像之附近將聲音輸入至可攜式裝置，且使其與影像場景同步而輸出第二螢幕資訊。 [先前技術文獻] [專利文獻] [專利文獻1]日本特開2015-61112號公報
[發明所欲解決之問題] 在專利文獻1揭示之方法中，需要與各影像場景建立對應關係且將浮水印資料埋入於聲音中。因此，有電影等之內容製作作業之負擔高，而因製作側之情況不能進行浮水印資料之埋入之情形。 亦有不是使用浮水印資料，而是使用作為聲音之特徵量之指紋而判定影像之時間軸之手法，在無音之情形下，或在持續固定之聲音之部位係無法製作指紋。又，於在1個影像之不同之時間帶使用完全相同之聲音之情形下，利用指紋無法判別為哪一時間帶。 因此，本發明之目的在於提供一種容易且確實地判定某一內容之時間軸，且與該內容之再生連動而再生另外之內容的內容再生程式及內容再生裝置。 [解決問題之技術手段] 本發明之一態樣之內容再生程式使電腦實現：聲音檢測部，其檢測在電腦之外部再生之第1內容之聲音；時間軸判定部，其基於檢測到之聲音，判定在電腦之外部繼第1內容後再生之第2內容之時間軸；及內容再生部，基於所判定之時間軸，與第2內容之再生配合而再生與第2內容相應之第3內容。 又，本發明之一態様之內容再生裝置具備：聲音檢測部，其檢測在外部再生之第1內容之聲音；時間軸判定部，其基於檢測到之聲音，判定繼第1內容後在外部再生之第2內容之時間軸；及內容再生部，其基於所判定之時間軸，與第2內容之再生配合而再生與第2內容相應之第3內容。 另外，在本發明中，所謂「部」並不單單意味著物理性機構，亦包含藉由軟體而實現該「部」所具有之功能之情形。此外，既可藉由2個以上之物理性機構或裝置實現1個「部」或裝置所具有之功能，亦可藉由1個物理性機構或裝置實現2個以上之「部」或裝置之功能。 [發明之效果] 根據本發明，可提供一種容易且確實地判定某一內容之時間軸，且與該內容之再生連動而再生另外之內容的內容再生程式及內容再生裝置。
參照附圖針對本發明之較佳之實施形態進行說明。圖1係顯示本發明之一實施形態之內容再生系統之構成之圖。內容再生系統具備：使用者終端100(內容再生裝置)、螢幕110及揚聲器120。螢幕110及揚聲器120例如設置於電影院或球場等之設施，使用者終端100由該設施之利用者而利用。在螢幕110顯示有電影等之內容之影像，該內容之聲音係自揚聲器120輸出。而且，在使用者終端100中，與該內容之再生連動而再生字幕或語音導引等之其他內容。 圖2係顯示內容再生系統之內容再生之概要之圖。 在電影院等之設施中所再生之內容包含：第1內容200、及繼該第1內容200後再生之第2內容210。第2內容210係例如電影之正片。另外，第1內容200係例如在電影之正片之前再生之預告片或廣告等(映前貼片內容)。在第1內容200中，在其聲音中埋入有浮水印資料220。浮水印資料220例如就第1內容200之每一訊框而埋入，包含用於判定第2內容210之開始時機(時間軸)之時間碼等之資料(第1資料)。又，浮水印資料220包含例如顯示設施或地域等之資料(第2資料)。 在使用者終端100再生之第3內容230係例如與電影之正片連動而再生之該電影之字幕。第3內容230只要係與第2內容210連動而再生之內容即可，並不限定於字幕，亦可設為語音導引或手語圖像、說明圖像等之任意內容。在使用者終端100中，基於浮水印資料220而判定第2內容210之開始時機(時間軸)，且與第2內容210連動而再生第3內容230。 圖3係顯示使用者終端100之硬體構成之一例之圖。使用者終端100係例如智慧型手機或平板終端等之電腦。如圖3所示般，使用者終端100具備：處理器300、記憶裝置310、通信介面(I/F)320、麥克風330、聲音輸出裝置340、顯示裝置350及輸入裝置360。 藉由處理器300執行儲存於記憶裝置310之程式，而可實現使用者終端100之各種功能。 記憶裝置310係記憶程式或資料之記憶區域。記憶裝置310可包含暫時記憶區域之揮發性記憶體、或永久記憶區域之非揮發性記憶體。記憶裝置310可設置於使用者終端100之外部。 通信介面320係用於在與外部之裝置之間進行程式或資料之發送/接收之介面裝置。通信介面320包含例如行動電話之通信網用之介面、或無線LAN(Local Area Network，區域網路)用之介面。通信介面320可包含有線之介面。 麥克風330檢測周圍之聲音。麥克風330並不限定於聽覺範圍之聲音，亦可檢測非聽覺範圍之聲音。麥克風330可設置於使用者終端100之外部。 聲音輸出裝置340係用於輸出聲音之輸出裝置。聲音輸出裝置340係例如揚聲器。又，聲音輸出裝置340亦可為用於將聲音輸出至耳機之裝置。在第3內容230包含聲音(例如，語音導引或配音)時，該聲音係自聲音輸出裝置340輸出。 顯示裝置350係用於顯示圖像(靜畫或動畫)之輸出裝置。顯示裝置350係例如液晶顯示器或有機EL(Electroluminescence，電致發光)顯示器。顯示裝置350可設置於使用者終端100之外部。在第3內容230包含圖像(例如字幕)時，該圖像顯示於顯示裝置350。 輸入裝置360係用於受理使用者輸入之裝置。輸入裝置360可為例如與顯示裝置350一體地形成之觸控面板。輸入裝置360可設置於使用者終端100之外部。 圖4係顯示使用者終端100之功能構成之一例。使用者終端100具備：內容取得部400、內容記憶部410、聲音檢測部420、時間軸判定部430、內容再生部440、參考資料取得部450、參考資料記憶部460、設定部470及設定資料記憶部480。圖4所示之各部例如可藉由使用記憶裝置310之記憶區域或使處理器300執行儲存於記憶裝置310之程式(內容再生程式)而實現。 內容取得部400例如經由網際網路而取得在使用者終端100再生之第3內容230，且儲存於內容記憶部410。圖5係顯示用於取得內容之使用者介面之一例之圖。畫面500顯示例如啟動用於再生第3內容230之應用程式。畫面500包含用於選擇內容之種類之區域510、520。 在畫面500中，可在區域510中選擇字幕、手語或語音導引。又，在畫面500中，可在區域510中選擇電影院·劇場、主題樂園、博物館·美術館、DVD/BD或其他。而後，與區域510、520之選擇內容相應之內容之一覽顯示於區域530。在區域530中，顯示有例如第2內容210(例如正片)之標題。內容取得部400取得與在區域530中選擇之第2內容210對應之第3內容230。另外，內容取得部400可取得包含非再生對象之第3內容230。 此外，內容取得部400可取得由在第1內容200中檢測到之聲音(浮水印資料或指紋)而特定之第3內容230。例如，在埋入於第1內容200之浮水印資料中包含用於特定第3內容230之資料(第2資料)時，內容取得部400可基於該資料而取得第3內容230。 聲音檢測部420檢測在使用者終端100之外部所再生之內容之聲音。具體而言，聲音檢測部420可檢測第1內容200(映前貼片內容)之聲音。又，聲音檢測部420可檢測第2內容210(正片)之聲音。聲音檢測部420所檢測之聲音係例如浮水印資料或指紋。聲音檢測部420在藉由時間軸判定部430判定到第2內容210之時間軸時，可停止動作。 時間軸判定部430基於由聲音檢測部420檢測之聲音，而判定第2內容210之時間軸。具體而言，例如，可基於埋入於第1內容200之聲音之浮水印資料所包含的用於判定第2內容210之時間軸之資料(第1資料)，而判定第2內容210之時間軸。又，時間軸判定部430可基於第2內容210之聲音之指紋而在第2內容210之再生中判定第2內容210之時間軸。此處，所謂第2內容210之時間軸之判定係指將第2內容210之再生時機與時刻建立對應關係。例如，時間軸判定部430可判定第2內容210之再生開始之時刻(例如，既可為實際之時刻，亦可為以某一時點作為基準之相對時刻)。又，例如，時間軸判定部430可判定目前再生著第2內容210之哪一部分。時間軸判定部430在判定到第2內容210之時間軸時，可停止動作。 內容再生部440基於由時間軸判定部430判定之時間軸，與第2內容210之再生配合(同步)而再生第3內容230。又，內容再生部440可輸出表示時間軸判定部430進行之時間軸之判定狀態之資訊。圖6係顯示顯示有時間軸之判定狀態之畫面之一例之圖。如圖6之畫面600所示般，內容再生部440可將顯示時間軸之判定完成之訊息(例如「字幕之顯示準備已完成。請稍作等候，稍後開始播放正片」)顯示於顯示裝置350。 參考資料取得部450例如經由網際網路而取得用於時間軸判定部430基於指紋而判定時間軸之參考資料，且儲存於參考資料記憶部460。參考資料係將內容之聲音之特徵量與內容之再生時刻建立對應關係之資料。時間軸判定部430可藉由將第1內容200或第2內容210之聲音之特徵量與參考資料進行比較，而判定第2內容210之時間軸。 設定部470自使用者受理用於第3內容230之再生之設定，且將表示該設定之設定資料儲存於設定資料記憶部480。內容再生部440可基於該設定資料而再生第3內容230。 圖7係顯示使用者終端100之內容再生處理之一例之流程圖。圖7所示之處理可藉由例如使用者啟動應用程式而開始。 聲音檢測部420開始進行埋入於第1內容200之聲音之浮水印資料之檢測(S701)。若檢測到浮水印資料，則時間軸判定部430基於浮水印資料判定第2內容210之時間軸(S702)。又，時間軸判定部430亦可基於第1內容200之聲音之指紋而判定第2內容210之時間軸。 又，聲音檢測部420與基於第1內容200之聲音進行之時間軸之判定(S701～S702)相並行地執行基於第2內容210之聲音進行之時間軸之判定(S703～S704)。具體而言，聲音檢測部420開始進行第2內容210之聲音之指紋(特徵量)之檢測(S703)。而後，時間軸判定部430基於該指紋而判定第2內容210之時間軸(S704)。基於第2內容210之聲音之時間軸之判定(S703～S704)處理，例如，在第2內容210之再生開始之後，在使用者開始第2內容210之收看時，或基於第1內容200之聲音之時間軸之判定(S701～S702)不再正常地動作時等為有效。 在直至基於第1內容200或第2內容210之聲音之時間軸之判定(S701～S704)完成為止之期間(S705：否)，重複執行時間軸之判定處理。而後，若時間軸之判定完成(S705：是)，則聲音檢測部420及時間軸判定部430停止動作，而內容再生部440基於所判定之時間軸與第2內容210之再生配合而再生第3內容230(S706)。 以上，針對本發明之一實施形態進行了說明。根據本實施形態，可基於第1內容200(例如映前貼片內容)之聲音，而判定繼第1內容200後再生之第2內容210(例如正片)之時間軸。而後，可基於該判定之時間軸，與第2內容210之再生配合而再生與第2內容210相應之第3內容230(例如字幕或語音導引)。因此，即便於在第2內容210之聲音未埋入有浮水印資料時，或藉由第2內容210之聲音之指紋難以進行第2內容210之開始時機之判定時，仍可容易且確實地判定第2內容210之時間軸。 又，根據本實施形態，可基於埋入於第1內容200之聲音之浮水印資料判定第2內容210之時間軸。第1內容200與第2內容210相比較易於埋入浮水印資料居多。因此，可藉由將浮水印資料埋入於第1內容200之聲音，而容易且確實地判定第2內容210之時間軸。 再者，根據本實施形態，可將埋入於第1內容200之聲音之浮水印資料視作非聽覺範圍之聲音資料。藉此，在不對收看第1內容200之使用者帶來影響下，可容易且確實地判定第2內容210之時間軸。 又，根據本實施形態，除了基於埋入於第1內容200之聲音之浮水印資料進行第2內容210之時間軸之判定外，還可基於第2內容210之聲音之指紋(特徵量)判定第2內容210之時間軸。因此，例如，可在第2內容210之再生開始後使用者開始第2內容210之收看之情形下，容易且確實地判定第2內容210之時間軸。 又，根據本實施形態，埋入於第1內容200之聲音之浮水印資料220除了包含用於時間軸之判定之資料(例如時間碼)外，還可包含用於特定第3內容230之資料(例如顯示設施或地域等之資料)。因此，例如，可藉由埋入於第1內容200之聲音之浮水印資料220而選擇第3內容230。 又，根據本實施形態，可基於第1內容200之聲音之特徵量而判定第2內容210之時間軸。藉此，例如，即便於在第1內容200內未埋入有浮水印資料220之情形下，仍可容易且確實地判定第2內容210之時間軸。 又，根據本實施形態，在聲音檢測部420及時間軸判定部430判定到第2內容210之時間軸時，可停止動作。因此，可抑制使用者終端100之電力消耗。 另外，由於使用者終端100之性能等之影響，有可能在進行了第2內容210之時間軸之判定之後，在使用者終端100所保持之第2內容210之時間軸與第2內容210之實際之時間軸之間產生偏差。因此，時間軸判定部430可在第2內容210之時間軸之判定完成之後，以適宜之時機，基於第2內容210之聲音之指紋(特徵量)而修正第2內容210之時間軸。例如，時間軸判定部430可在第2內容210之時間軸之判定完成之後，以特定之時間間隔，基於第2內容210之聲音之指紋(特徵量)而修正第2內容210之時間軸。又，例如，時間軸判定部430可在第2內容210之時間軸之判定完成之後，根據來自使用者之指示，基於第2內容210之聲音之指紋(特徵量)而修正第2內容210之時間軸。 另外，根據本實施形態，可將表示第2內容210之時間軸之判定狀態之資訊輸出至顯示裝置350。此外，該資訊之輸出對象並不限定於顯示裝置350，亦可為聲音輸出裝置340。藉此，可將第2內容210之時間軸之判定狀態通知給使用者。 以上所說明之實施形態係用於容易地進行本發明之理解者，而非限定本發明而解釋者。實施形態所具備之各要件以及其配置、材料、條件、形狀及尺寸等並不限定於所例示者，而是可適宜變更。另外，能夠部分地置換或組合以不同之實施形態顯示之諸個構成。
100‧‧‧使用者終端(內容再生裝置)
110‧‧‧螢幕
120a‧‧‧揚聲器
120b‧‧‧揚聲器
200‧‧‧第1內容(映前貼片內容)
210‧‧‧第2內容(正片)
220‧‧‧浮水印資料
230‧‧‧第3內容
300‧‧‧處理器
310‧‧‧記憶裝置
320‧‧‧通信介面(I/F)
330‧‧‧麥克風
340‧‧‧聲音輸出裝置
350‧‧‧顯示裝置
360‧‧‧輸入裝置
400‧‧‧內容取得部
410‧‧‧內容記憶部
420‧‧‧聲音檢測部
430‧‧‧時間軸判定部
440‧‧‧內容再生部
450‧‧‧參考資料取得部
460‧‧‧參考資料記憶部
470‧‧‧設定部
480‧‧‧設定資料記憶部
500‧‧‧畫面
510‧‧‧區域
520‧‧‧區域
530‧‧‧區域
600‧‧‧畫面
S701~S706‧‧‧步驟
圖1係顯示本發明之一實施形態之內容再生系統之構成之圖。 圖2係顯示內容再生系統之內容再生之概要之圖。 圖3係顯示使用者終端100之硬體構成之一例之圖。 圖4係顯示使用者終端100之功能構成之一例之圖。 圖5係顯示用於取得內容之使用者介面之一例之圖。 圖6係顯示顯示有時間軸之判定狀態之畫面之一例之圖。 圖7係顯示使用者終端100之內容再生處理之一例之流程圖。

Claims (10)

  1. 一種記憶有用於使電腦實現下述部分之內容再生程式之記錄媒體，即： 聲音檢測部，其檢測在前述電腦之外部再生之第1內容之聲音； 時間軸判定部，其基於前述檢測到之聲音，判定在前述電腦之外部繼前述第1內容後再生之第2內容之時間軸；及 內容再生部，其基於前述判定之時間軸，與前述第2內容之再生配合而再生與前述第2內容相應之第3內容。
  2. 如請求項1之記憶有內容再生程式之記錄媒體，其中前述聲音係埋入於前述第1內容之浮水印資料。
  3. 如請求項2之記憶有內容再生程式之記錄媒體，其中前述浮水印資料係非聽覺範圍之聲音資料。
  4. 如請求項2之記憶有內容再生程式之記錄媒體，其中前述聲音檢測部進一步檢測在前述電腦之外部再生之前述第2內容之聲音之特徵量， 前述時間軸判定部基於埋入於前述第1內容之前述浮水印資料或前述第2內容之前述特徵量而判定前述時間軸。
  5. 如請求項2之記憶有內容再生程式之記錄媒體，其中前述浮水印資料包含用於前述時間軸之判定之第1資料、及用於特定前述第3內容之第2資料，且 前述時間軸判定部基於前述第1資料判定前述時間軸， 前述內容再生部基於前述第2資料再生前述第3內容。
  6. 如請求項1之記憶有內容再生程式之記錄媒體，其中前述聲音檢測部檢測前述聲音之特徵量， 前述時間軸判定部基於前述檢測到之特徵量判定前述時間軸。
  7. 如請求項1之記憶有內容再生程式之記錄媒體，其中在前述聲音檢測部及前述時間軸判定部判定到前述時間軸時停止動作。
  8. 如請求項4之記憶有內容再生程式之記錄媒體，其中前述時間軸判定部在判定前述時間軸之後，基於前述第2內容之前述特徵量而修正前述時間軸。
  9. 如請求項1之記憶有內容再生程式之記錄媒體，其中前述內容再生部輸出顯示前述時間軸之判定狀態之資訊。
  10. 一種內容再生裝置，其具備：聲音檢測部，其檢測在外部再生之第1內容之聲音； 時間軸判定部，其基於前述檢測到之聲音，判定繼前述第1內容後在外部再生之第2內容之時間軸；及 內容再生部，其基於前述判定之時間軸，與前述第2內容之再生配合而再生與前述第2內容相應之第3內容。
TW106137069A 2016-10-27 2017-10-27 內容再生程式及內容再生裝置 TWI760383B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
PCT/JP2016/081900 WO2018078768A1 (ja) 2016-10-27 2016-10-27 コンテンツ再生プログラム及びコンテンツ再生装置
??PCT/JP2016/081900 2016-10-27
WOPCT/JP2016/081900 2016-10-27

Publications (2)

Publication Number Publication Date
TW201820316A true TW201820316A (zh) 2018-06-01
TWI760383B TWI760383B (zh) 2022-04-11

Family

ID=59351268

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106137069A TWI760383B (zh) 2016-10-27 2017-10-27 內容再生程式及內容再生裝置

Country Status (7)

Country Link
US (1) US11303951B2 (zh)
EP (1) EP3534618A4 (zh)
JP (1) JP6163680B1 (zh)
KR (1) KR102607703B1 (zh)
CN (1) CN109983781B (zh)
TW (1) TWI760383B (zh)
WO (1) WO2018078768A1 (zh)

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004021404B4 (de) * 2004-04-30 2007-05-10 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Wasserzeicheneinbettung
JP2007207328A (ja) 2006-01-31 2007-08-16 Toshiba Corp 情報記憶媒体、プログラム、情報再生方法、情報再生装置、データ転送方法、及びデータ処理方法
US8763029B1 (en) * 2006-11-13 2014-06-24 Visible World Inc. Systems and methods for client-based addressable advertising
CN101370261B (zh) * 2007-08-15 2011-12-07 华为技术有限公司 从cs域向ps域切换的资源准备方法及通信设备
JP2010170604A (ja) * 2009-01-21 2010-08-05 Sony Corp 光ディスク装置、光ピックアップ、プリフォーマット信号生成方法及びプログラム
US8925024B2 (en) * 2009-12-31 2014-12-30 The Nielsen Company (Us), Llc Methods and apparatus to detect commercial advertisements associated with media presentations
US9026102B2 (en) * 2010-03-16 2015-05-05 Bby Solutions, Inc. Movie mode and content awarding system and method
CN101877625A (zh) * 2010-06-29 2010-11-03 中兴通讯股份有限公司 下行语音帧的接收处理方法及装置、基带
JP5724283B2 (ja) * 2010-10-15 2015-05-27 ソニー株式会社 情報処理装置、同期方法およびプログラム
US20130083036A1 (en) * 2011-08-19 2013-04-04 Hall of Hands Limited Method of rendering a set of correlated events and computerized system thereof
US20150019644A1 (en) * 2012-01-06 2015-01-15 Thomsom Licensing Method and system for providing a display of socialmessages on a second screen which is synched to content on a first screen
CN102664007B (zh) * 2012-03-27 2016-08-31 上海量明科技发展有限公司 用于生成字符标识内容的方法、客户端及系统
CN102625164A (zh) * 2012-04-06 2012-08-01 上海车音网络科技有限公司 多媒体数据处理平台及多媒体读物、系统和方法
US9305559B2 (en) * 2012-10-15 2016-04-05 Digimarc Corporation Audio watermark encoding with reversing polarity and pairwise embedding
FR3006525B1 (fr) * 2013-06-04 2016-10-14 Visiware Synchronisation de contenus multimedia sur deuxieme ecran
JP6271194B2 (ja) * 2013-09-17 2018-01-31 特定非営利活動法人メディア・アクセス・サポートセンター 携帯デバイスへのセカンドスクリーン情報の提供方法
WO2015039888A1 (en) * 2013-09-20 2015-03-26 Koninklijke Kpn N.V. Correlating timeline information between media streams
JP6349977B2 (ja) * 2013-10-21 2018-07-04 ソニー株式会社 情報処理装置および方法、並びにプログラム
WO2015087804A1 (ja) * 2013-12-09 2015-06-18 株式会社Ｐｕｍｏ リンク先指定用インタフェース装置、視聴者用インタフェース装置、及びコンピュータプログラム
CN103702145A (zh) * 2013-12-26 2014-04-02 京东方科技集团股份有限公司 节目播放提醒方法及其系统和显示装置
EP3100458B1 (en) * 2014-01-31 2018-08-15 Thomson Licensing Method and apparatus for synchronizing the playback of two electronic devices
CN104023251B (zh) * 2014-06-13 2015-08-19 腾讯科技（深圳）有限公司 基于视频的互动方法和系统
JP6433273B2 (ja) * 2014-12-05 2018-12-05 株式会社テレビ朝日 端末装置、サーバ装置、及びプログラム
US9665341B2 (en) * 2015-02-09 2017-05-30 Sonos, Inc. Synchronized audio mixing
US20160309214A1 (en) * 2015-04-15 2016-10-20 Rovi Guides, Inc. Method of synchronizing alternate audio content with video content
EP3226570A1 (en) * 2016-03-31 2017-10-04 Thomson Licensing Synchronizing audio and video signals rendered on different devices
JP6157679B2 (ja) 2016-04-12 2017-07-05 日本放送協会 信号処理装置及びプログラム
KR102389040B1 (ko) * 2018-02-23 2022-04-22 에빅사 가부시키가이샤 콘텐츠 재생 프로그램, 콘텐츠 재생 방법 및 콘텐츠 재생 시스템

Also Published As

Publication number Publication date
KR102607703B1 (ko) 2023-11-30
KR20190085938A (ko) 2019-07-19
US11303951B2 (en) 2022-04-12
CN109983781A (zh) 2019-07-05
US20190253749A1 (en) 2019-08-15
JP6163680B1 (ja) 2017-07-19
CN109983781B (zh) 2022-03-22
EP3534618A1 (en) 2019-09-04
JPWO2018078768A1 (ja) 2018-11-01
WO2018078768A1 (ja) 2018-05-03
TWI760383B (zh) 2022-04-11
EP3534618A4 (en) 2020-06-03

Similar Documents

Publication Publication Date Title
TWI538520B (zh) 視頻資訊添加方法及裝置、視頻資訊顯示方法及裝置
US9578210B2 (en) A/V Receiving apparatus and method for delaying output of audio signal and A/V signal processing system
US20150341410A1 (en) Media stream cue point creation with automated content recognition
WO2016095384A1 (zh) 一种弹幕显示方法及系统
US20120064874A1 (en) Movie mode and content awarding system and method
KR20210090262A (ko) 정보 처리 방법과 장치, 전자 디바이스 및 기록 매체
US20130335594A1 (en) Enhancing captured data
US20170171643A1 (en) Method and electronic device for displaying watermark
KR101789221B1 (ko) 동영상 제공 장치, 동영상 제공 방법, 및 컴퓨터 프로그램
JP6271194B2 (ja) 携帯デバイスへのセカンドスクリーン情報の提供方法
EP3035670A1 (en) Display apparatus and method of controlling content output of display apparatus
US20170249971A1 (en) Method for generating image in which sound source is inserted and apparatus therefor
JP2019507978A5 (zh)
TWI760383B (zh) 內容再生程式及內容再生裝置
RU2636116C2 (ru) Способ, сервер и устройство отображения для воспроизведения мультимедийного контента
JP5711242B2 (ja) 音声コンテンツをビデオコンテンツに加える方法及び当該方法を実施する装置
CN106162292B (zh) 一种智能电视的信源开机控制方法、系统及智能电视
KR101832464B1 (ko) 동영상 제공 장치, 동영상 제공 방법, 및 컴퓨터 프로그램
TWI581626B (zh) 影音自動處理系統及方法
JP2010206716A (ja) 再生装置、その制御方法及びプログラム
KR20190109046A (ko) 동영상 콘텐트에 포함된 블랙 영역을 검출하기 위한 방법 및 그 전자 장치
JP2010287974A (ja) 携帯電話及びプログラム
JP2022090874A (ja) 映像表示装置
CN112788428A (zh) 音视频文件的处理方法、装置和存储介质
JP2009105498A (ja) 情報処理装置およびコンテンツ推奨方法