TW200832370A - Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program - Google Patents

Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program Download PDF

Info

Publication number
TW200832370A
TW200832370A TW096136475A TW96136475A TW200832370A TW 200832370 A TW200832370 A TW 200832370A TW 096136475 A TW096136475 A TW 096136475A TW 96136475 A TW96136475 A TW 96136475A TW 200832370 A TW200832370 A TW 200832370A
Authority
TW
Taiwan
Prior art keywords
information
meta
time
video stream
stream
Prior art date
Application number
TW096136475A
Other languages
English (en)
Other versions
TWI368906B (zh
Inventor
Koji Miyagi
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of TW200832370A publication Critical patent/TW200832370A/zh
Application granted granted Critical
Publication of TWI368906B publication Critical patent/TWI368906B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84Generation or processing of descriptive data, e.g. content descriptors
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00Record carriers by type
    • G11B2220/20Disc-shaped record carriers
    • G11B2220/25Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
    • G11B2220/2537Optical discs
    • G11B2220/2562DVDs [digital versatile discs]; Digital video discs; MMCDs; HDCDs

Description

200832370 九、發明說明: 【發明所屬之技術領域】 本^明係與再生裝置及方法、資訊產生裝置及方法、資 料儲存媒體、資料社塞 、 一 貝枓結構、及程式有關,且特別與可將元 (meta)貝訊各易進行編輯或附加之再生裝置及方法、資訊 產生裳置及方法、資料儲存媒體、資料結構、及程式有 關。 【先前技術】 先月”在DVD(Digital Versatile Disc:數位多用途碟片) 2代表之封裝媒體上’除在錄影帶上已經實現之圖像、聲 音的再生之外,藉由選單畫面之設定或内容的選擇、藉由 章節選擇等之跳躍再生、來自多角度等之複數個流的^擇 再生亦已經變為可能。尤其,附帶著特惠圖像、行銷宣傳 ,訊1解說視訊、設計草圖等附加圖像資訊的圖像,:可 k選單畫面來進行選擇之内容,正呈現增多趨勢。 先前,在此等封裝媒體方面,係同步於圖像、聲音之内 容而賦予附加圖像資訊後進行顯示,因此在個別製作如下 兩種流後,將該等任一種均進行記錄,作切換後再予以再 生(專利文獻1 ),而該流係:同步於圖像、聲音之内容而力 入附加圖像資訊者;及未加入附加圖像資訊者。 [專利文獻1]曰本特開2005-335521號公報 【發明内容】 [發明所欲解決之問題] 然而’在先前之封裝媒體方面,為了同步於圖像、聲音 121765.doc 200832370 之内谷而賦予附加圖像資訊後進行顯示,則有需要作為圖 像茸音等之流而進行個別製作,因此,為了可讓觀賞者 進行附加圖像資訊的導通/切斷選擇,則有必要以相同内 谷之/现準備有附加圖像資訊者與無附加圖像資訊者兩種, 因而在編輯作業上頗耗費時間。 又’基於同樣的理由,而導致比實際需要更佔用媒體之 有限的容量。 再者,為了提供新的附加服務,則必須將圖像、聲音等 核心流一起重新製作才行。 就結果而言,基於上述問題點,在先前之封裝媒體方 面成乎未冒提供同步於核心圖像、聲音之附加圖像資 訊。 ' 、本發明係有鑒於如此之情況而研發者,目的在於特別使 成為附加圖像資訊之圖像、聲音變得容易進行編輯或記 錄。 [解決問題之技術手段] 本發明之第1側面之再生裝置,其包含:流再生機構, 其係將所輸入之視訊流進行再生者;元資訊讀入機構,其 係讀入前述視訊流之S資訊,而其係與由前述流再生機構 π訊流不同擋案者;流同步讀人機構,其係根據 2前述流再生機構所輸出之視訊流的再生資訊,與由前述 Μ再生機構所再生之視訊流同步控制前述元資訊讀入機 構’而δ貝入刖述兀資訊者;附加圖像資訊提供機構,其係 由則述机同纟項入機構所控帝J,根據由前述元資訊讀入機 121765.doc 200832370 構所讀入之元資訊,而將附加圖像資訊提供給前述流者; 及合成機構,其係將由前述附加圖像資訊提供機構所提供 之附加SM象貧訊合成&由前述再生機構所再纟之視訊流 者0 可設定為’更包含輪出視訊流的輸出機構,該視訊流係 輸出藉由前述合成機構而合成有前述附加圖像資訊的視訊 流者。且前述元資訊係顯示可設定為視訊流之際的顯示晝
面上之位置資訊’而該視訊流係由前述輸出機構所輸出之 合成了如述附加圖像資訊者。 前述元資訊具有包含第!時刻資訊之第Μ資訊及包含第 2%刻貝訊之第2兀育訊;前述流同步讀入機構係藉由將前 述視訊流之再生時刻與前述第i時刻f訊或前述第2時刻資 訊=行比較,而選擇前述第^資訊或前述第2元資訊。 幻述元資訊項入機構係依據格式而可設為1以上。 可=定為’更設有透過網路而取得前述元資訊之取得機 構;前述流同步讀入機構係可設定為,將藉由前述取得機 構所取得之元資訊予以讀入。 當前述視訊流為運動節目之情形,前述元資訊係可設定 為對應於競技中之各競技者之再生資訊的再生畫面上之位 置貧:’·前述附加圖像資訊提供機構係可収為,同步於 藉由前述再生機構所再生之視訊流的再生時點,而依據特 疋競技者之位置資訊,將前述特定競技者之縮放畫面作為 附加圖像資訊而進行提供。 包含複數個遵照時間 當前述視訊流之内容係可設定為 121765.doc 200832370 系列之物件;前述元資訊係可設定為,遵照前述時間系列 而變化之前述視訊流之内容中的複數個物件間之關連資 訊。 當前述視訊流為戲劇或電影的情形,前述元資訊係可設 • Μ,對應於各登場人物之再生資訊的關連資訊;前述附 • 加圖像資訊提供機構係可設定為,同步於藉由前述再生機 構所再生之視訊流的再生資訊,而將前述登場人物之關連 φ 目作為附加圖像資訊而進行提供,而該登場人物之關連圖 係依據對應於前述各登場人物之再生資訊的關連資訊者。 當丽述視訊流為戲劇或電影的情形,前述元資訊係可設 定為,對應於各登場人物之再生資訊的關連資訊且係前述 登場人物之介紹資訊;前述附加圖像資訊提供機構係可設 定為,同步於藉由前述再生機構所再生之視訊流的再生資 訊,而將依據前述各登場人物之介紹資訊的前述登場人物 之介紹資訊作為附加圖像資訊而進行提供者。 • 本發明之第1側面之再生方法,其包含:流再生步驟, 其係將所輸入之視訊流進行再生者;元資訊讀入步驟,其 係讀入視訊流之元資訊,而其係與由前述流再生步驟之處 、 理所再生之視訊流不同檔案者;流同步讀入步驟,其係根 - 據由前述流再生步驟之處理所再生之視訊流的再生資訊, 與由前述流再生步驟之處理所再生之視訊流同步控制前述 凡資訊讀入機構,而讀入前述元資訊者;附加圖像資訊提 供步驟,其係由前述流同步讀入步驟之處理所控制,且根 據由前述元資訊讀入步驟之處理所讀入之元資訊,而將附 121765.doc 200832370 加圖像資訊提供給前述視訊流者;及合成步驟,其係將由 前述附加圖像資訊提供步驟之處理所提供之附加圖像資訊 合成於由前述再生步驟之處理所再生之視訊流者。 本發明之第1側面之程式係使電腦執行包含如下步驟之 處理者:流再生步驟,其係將所輸入之視訊流進行再生 者,元資訊讀入步驟,其係讀入視訊流之元資訊,而其係 與由前述流再生步驟之處理所再生之視訊流不同檔案者;
流同步讀入步驟,其係根據由前述流再生步驟之處理所再 生之視訊流的再生資訊,與由前述流再生步驟之處理所再 生之視訊流同步控制前述元資訊讀入機構,而讀入前述元 資Λ者,附加圖像資訊提供步驟,其係由前述流同步讀入 y驟之處理所控制,且根據由前述元資訊讀入步驟之處理 所讀入之m ’而將附加圖像資訊提供給前述視訊流 者’及合成步驟’其係將由前述附加圖像資訊提供步驟之 處理所提供之附加圖像資訊合成於由前述再生步驟之處理 所再生之視訊流者。 本餐明之弟1側面之程式儲在 。 忒储存媒體係儲存有如請求項9之 第2側面之資料儲存媒體係_種記錄媒體,其 係3己錄有具有應由再生 者·且你i 一 、 生之時刻資訊的視訊流 ’作為與前述視訊流不同檔案儲存有:第工元資 ^ 係對應於顯示於第〖時刻位 、 流係包含對應於第㈣刻位置之時刻資:訊:,:㈣ 置係包含於前述時刻資訊之時刻軸^及Γ時刻位 j神者,及第2元資訊,其 121765.doc 200832370 係對應於顯示於第2時刻 人m m ^外* 之視訊^,而該視訊流係包 3對應於弟2時刻位置之時刿次 人 之呀刻貝訊,而該第2時刻位置係包 3於别述時刻資訊之時刻軸者。 本發明之第3側面之資料結構係與視訊流一起被再生之 =:案的資料結構’而該視訊流係記錄於記錄媒體或 =’4路配达之具有應由再生裝置所再生之時刻資訊;且 ^ :第】元資訊,其係對應於顯示於第“夺刻位置之視訊 ❿ ▲,而該視訊流係包含對庫 3對應於弟1時刻位置之時刻資訊, 而該第1時刻位置係舍+於乂 十 直你匕3於别述時刻資訊之時刻軸者;及 弟2凡魏,其係對應於顯示於第2時刻位置之視訊流,而 二年見訊流係包含對應於^時刻位置之時刻資訊,而該“ Μ位置係包含於前述時刻資訊之時刻軸者。 前述第1元資訊與第2元資訊係可設定為各自獨立之不同
檔案。 U 本發明之第4側面之資訊產生褒置包含:時刻資訊取得 機構’其係取得對應於時刻位置之時刻資訊,而該時刻位 置係包含於視訊流之前述時刻資訊的時刻車由,而該視訊流 係具有應由再生裝置所再生之時刻資訊者;元資訊取得機 構,其係取得對應於所顯示之視訊流的元資訊者;及儲存 機構’其係使至少!個以上之前述時刻資訊與前述元資訊 形成對應關係而作為元資訊槽案予以儲存者。 可設定為更包含:變換機構,其係變換前述元資訊樓案 之格式形式者。 本發明之第4側面之資訊產生方法包含:時刻資訊取得 121765.doc -11 - 200832370 步驟’其係取得對應於時刻位置之時刻資訊,而該時刻位 置係包含㈣見訊流之前述時刻f訊的時刻軸,而該視訊流 係具有應由再生裝置所再生之時刻資訊者;元資訊取得步 驟,其係取得對應於所顯示之視訊流的元資訊者〆及儲存 步驟’其係使至少1個以上之前述時刻資訊與前述元資訊 成對應關係而作為元資訊檔案予以儲存者。 本發明之第4側面之程式係使電腦執行包含如下步驟之 處理者:時刻資訊取得步驟,其係取得對應於時刻位置之 時刻資訊,而該_位置係包含於視職之前料刻資訊 的時刻軸’而該視訊流係具有應由再生裝置所再生之時刻 資訊者;元資訊取得步驟,其係取得對應於所顯示之視訊 流的元資訊者;及儲存步驟,其係使至少丨個以上之前述 時刻資訊與前述元資訊成對應關係而作為元資訊檔案予以 儲存者。 本發明之第4側面之程式儲存媒體係儲存有如請求項π 之程式者。 、 在本發明之第1側面之再生裝置及方法、以及程式方 面,已輸入之視訊流係被再生,所#生之視訊流的元資訊 係被讀入,根據輸出之視訊流的再生資訊,同步於再生中 之流,進行控制,使前述元資訊被讀入,根據所讀入之元 資訊,而將附加圖像資訊提供給前述視訊流,被提供之附 加圖像資訊係合成於已再生之流。 在本發明之第2側面之資料儲存媒體方面,作為與視訊 流之不同標案’而儲存著··第i元資訊,其係對應於顯^ 121765.doc -12- 200832370 於第1時刻位置之視訊 刻位置之°爪 以視訊流係包含對應於第1時 置之蚪刻貧訊,而第2時 訊之時刻軸去.^。 置係包3於别述時刻資 位置w 資訊’其係對應於顯示於第2時刻 =訊^而該視訊流係包含對應m時刻位置之 ㈣而弟2時刻位置係包含於前述時刻資訊之時刻 在本發明之第3側面之資料結構方面,係包含:糾
訊,其係對應於顯示於第i時刻 、 土文么以 丁 J诅置之視訊流,而該視邙 机係包含對應於第丨時刻位置 ° 焱 J貝σ札而弟1時刻位置 係匕3於前述時刻資訊時 藉由再以置Γ 流係具有應 ㈣處時刻資訊者;及第2元資訊,其 係對應於顯示於第2時刻位晋& 人 置之視訊▲,而該視訊流係包 1應於第2時刻位置之時刻資訊,而第辦刻位置係包含 於β述時刻資訊之時刻軸者。 在本發明之第4侧面之資訊產生裝置、方法及程式方 面’係取得對應於時刻位置之時刻資訊,取得對應於所顯 :之視:流的元資訊,而產生將至少2個以上之前述時刻 貝讯與$述元貧訊成對應關係而被儲存的元資訊檔案;而 該時刻位置係包含於視訊流4前述時刻資訊之時刻軸者, 而該視訊流係具有應藉由再生裝置進行再生之時刻資訊 I 〇 、口 本發明之再生裝置及資訊產生裝置可為獨立之裝置,亦 可為分別進行再生處理及資訊產生處理之區塊。 [發明之效果] 121765.doc -13- 200832370 根據本發明,可將元資絲易進行編輯或附加。 【實施方式】 如例示本說明書所記載 以下’說明本發明之實施型態 則成為如下所述。 之發明及發明之實施型態的對應關係 此,己载係用於確5忍支援記載於本說明書之發明的實施型 態係記載於本說明書。因此,雖記载於發明之實施型態 中,但作為對應於發明者,即使在此有未記載之實施型
恶’其亦並非意味著該實施型態並不對應於該發明。反 之,即使實施型態作為對應於發⑽記載於此,其亦並非 意味著該實施型態並不對應於該發明以外之發明。 再者,此一記載並非意味著記载於本說明書之發明的全 ^換σ之此一记載係記載於本說明書之發明,且並不 否疋在此申明案中未請求之發明的存在,亦即,並未否 定將來藉由分割巾請或修正而出%、追加之發明的存在。 亦即,本發明之第〗側面之再生裝置包含:流再生機構 (譬如圖1之流再生部16),其係將所輸入之視訊流進行再生 者,7G貪訊讀入機構(譬如圖i之元資訊檔案讀入部14),其 係項入則述視訊流之元資訊者,而其係與由前述流再生機 構所再生之視訊流不同檔案者;流同步讀入機構(譬如圖工 之流同步讀入部15),其係根據藉由前述流再生機構所再 生之視訊流的再生資訊,與由前述流再生機構所再生之視 訊流同步,進行控制前述元資訊讀入機構,而使之讀入前 述元資訊者;附加圖像資訊提供機構(譬如圖1之附加圖像 資訊提供部12),其係根據藉由前述流同步讀入機構所控 121765.doc -14- 200832370 制且藉由前述元資訊讀入機構所讀入之元資訊,而將附加 圖像資訊提供給4述視訊流者;及合成機構(譬如圖1之合 成部13),其係將由前述附加圖像資訊提供機構所提供之 付加圖像資A,進行合成於藉由前述再生機構所再生之視 訊流者。 可"又疋為,更包含輸出機構(譬如圖1之顯示部2),其係 將由則述合成機構(譬如圖κ合成部13)而合成了前述附加 e ®像資訊的視訊流予以輸出者;前述元資訊係可設定為視 ㈣被顯示之際的顯示畫面上之位置資訊,而該視訊流係 藉由前述輸出機構所輸出之合成了前述附加圖像資訊者。 本發明之第1側面之再生方法及程式包含:流再生步驟 (譬如圖2之步驟S61、S63),其係將已輸入之流進行再生 者;元資訊讀入步驟(譬如圖2之步驟S83)’其係讀入前述 視訊流之元資訊,而其係與藉由前述流再生步驟之處理所 再生之視訊流為不同檔案者;流同步讀人步驟(譬如圖之之 籲纟驟S39),其係根據藉由前述流再生步驟之處理所再生之 視訊流的再生資訊,與藉由前述流再生步驟之處理所再生 之視訊流同步,進行控制前述元資訊讀入機構,而使之讀 - A前述元資訊者;附加圖像資訊提供步驟(譬如圖2之步驟 ' S1G)’其係根據藉由前述流同步讀人步驟之處理所控制且 藉由前述元資訊讀入步驟之處理所讀入之元資訊,而將附 加圖像資訊提供給前述視訊流者;及合成步驟(譬如⑽之 步驟S101),其係將藉由前述附加圖像資訊提供步驟之處 理所提供之附加圖像資訊,進行合成於藉由前述再生步驟 121765.doc 200832370 之處理所再生之視訊流者。 本發月之第4側面之資訊產生裝置包含:時刻資訊取得 機構(譬如圖13之時刻資訊取得部112),其係取得對應於時 刻位置之時刻資訊,而該時刻位置係包含於視訊流之前述 時刻貧訊的時刻軸,而該視訊流係具有應藉由再生裝置進 行再生之4刻資訊者;元資訊取得機構(譬如圖13之元資 吞取知邛113 ),其係取得對應於所顯示之視訊流的元資訊 者,及儲存機構(譬如圖13之儲存部114),其係使至少1個 以上之則述時刻資訊與前述元資訊成對應關係而作為元資 訊檔案予以儲存者。 可叹疋為,更包含變換機構,其係進行變換前述元資訊 播案之格式形式者。 本發明之第4側面之資訊產生方法及程式包含:時刻資 訊取得步驟(譬如圖14之步驟S192),其係取得對應於時刻 位置之時刻資訊,而該時刻位置係包含於視訊流之前述時 d ΐ訊的枯刻軸,而該視訊流係具有應藉由再生裝置進行 再生之時刻資訊者;元資訊取得步驟(譬如圖14之步驟 S 1 94) ’其係取得對應於所顯示之視訊流的元資訊者;及 儲存步驟(譬如圖14之步驟S195),其係使至少1個以上之 刖述日守刻資訊與前述元資訊成對應關係而作為元資訊檔案 予以儲存者。 圖1係顯示應用本發明之再生裝置的一實施型態之構 成再者,圖1之再生裝置1係針對藉由軟體所構成之例作 °兒月但如藉由具有同樣功能之硬體所構成亦可。 121765.doc •16- 200832370 再生裝置1係根據元為訊播案3而產生附加圖像資訊,而 將之合成於視訊流並顯示於顯示部2,而該視訊流係根據 流檔案4而再生者。 操作部11係由鍵盤、滑鼠、或按鍵等構成,附加圖像資 • 訊提供部12之導通或切斷等係藉由使用者進行輸入時被操 作,而產生依據操作内容之操作信號,並輸出給附加圖像 資訊提供部12。 魯 附加圖像資訊提供部12係根據從流同步讀入部15所供應 之元資訊,而產生附加圖像資訊,並輸出給合成部Η。在 此,附加圖像資訊係指,在將記錄於流檔案4之内容進行 再生之際以圖像等附加之資訊。更具體而言,譬如,藉由 流稽案4所再生之視訊流為足球比賽之情形時,附加圖像 資訊係依據包含各競技者之時刻單位之位置資訊的元資 訊,而針對特定競技者在晝面上所賦予的追縱記號等。再 者,以下,如附加圖像資訊為對特定競技者所賦予的追蹤 鲁 t己號的情料’龍續進行說明,但視訊流、附加圖像資 訊亚不限疋於此,如為將其他内容再生之流播案亦可,如 為其他附加圖像資訊亦可。 ’ ^元資訊檔案讀人部14取得從流同步讀人部咖應至此 - 1 U生部16所再生之視訊流的再生資訊,則根據再 生貝訊k 70貝訊檔案3將對應時點之元資訊進行讀入, 並供應至流同步讀入部1 5。 當流同步讀入部15藉由對流再生部16進行委託再生資 訊,而取得顯示現在再生中之視訊流的再生時刻、再生圖 121765.doc -17- 200832370 框等之再生資訊,則將之供應至元資訊檔案讀入部14。再 者,流同步讀入部15係依據已供應之再生資訊,而取得元 貧訊檔案讀入部14所供應之元資訊,將之供應至附加圖像 資訊提供部12。 流再生部16係讀入流檔案4之資訊,依序將視訊流進行 再生,作為圖像而輸出給合成部13,同時當被從流同步讀 入部15委託再生資訊時,則將當下之再生資訊供應至流同 步讀入部1 5。 合成部13係產生將如下兩者合成後之圖像,並使之顯示 於由 LCD(Liquid Crystal Display :液晶顯示器)或 CRT(Cathode Ray Tube:陰極射線管)等所構成之顯示部 2 ;而該兩者係:藉由流再生部16所再生之視訊流的圖 像、及附加圖像資訊提供部! 2所供應之附加圖像資訊。 附加圖像資訊提供部12包含元資訊檔案讀入管理部3 i、 70貧訊取得部32、元資訊辨識部33、附加圖像資訊輸出部 34、及附加圖像資訊產生部35。 元資訊檔案讀入管理部31係依據操作部u之操作信號, ®已選擇將附加圖像資訊合成於作流再生之圖像的情形時 (亦即’附加圖像資訊之提供被設定為導通的情形時),在 將疋資訊檔案讀入部14登錄於流同步讀入部15的同時,如 已選擇使附加圖像資訊合成於視訊流之顯示結束的情形時 (亦即,附加圖像資訊之提供被設定為切斷的情形時),則 使流同步讀入部15解除元資訊檔案讀入部14之登錄。亦 P元資訊檐案讀入部14作為軟體而存在之情形時(當附 121765.d〇< -18- 200832370 加圖像資訊之提供被設定為切斷的情形時),係不存在之 物;當附加圖像資訊之提供被設定料通的情形時,則藉 由元資訊檔案讀入管理部31而產生,並被登錄於流同步言; 入部15。然而,以下,元資訊檔案讀入管理部31係可作= 硬體者’因此’作為始終存在之物而構成區塊圖。 元資訊取得部32係取得流同步讀入部15所供應之元資 訊,並供應至元資關識部33。元資訊韻和係進行^ 識已被供應之元資訊,並將辨識結果供應至附加圖像資訊 產生部3 5。 ' °
附加圖像資訊產生部35係根據元資訊之辨識結果,而進 行產生附加圖像資訊’並將已產生之附加圖像資訊供應至 附加圖像資訊輸出部34。更具體而言,附加圖像資訊產生 :35係進行控制列表產生糾、追縱記號產生部42、及時 標尺產生部43 ’根據元資訊之辨識結果,將競技者之列 ^特疋双技者之追縱記號及時標尺之圖像作為附加圖像 資況予以產生’並供應至附加圖像資訊輸出部Μ。 附加圖像資訊輸出部34係將藉由附加圖像資訊產生部% 所產生之附加圖像資訊輸出至合 一 ^ 口成邛13。此時,附加圖像 資訊輸出部34係考慮從取得再生資 ^ 貝冗之日守點起至輸出附加 圖像資訊為止之處理時問 而 处野間而進行輸出至合成部13。亦 即’元資《案讀入部14係考慮附加圖像資訊提供部以 之處理時間,而讀入此者》p a 、 項入比田下以流再生部16進行再生之視訊 流譬如早數個圖框的元眘_ 、5 口此,附加圖像資訊輸出部 34係在視訊流藉由流再生 丹生°卩16而被再生之時點,將附加圖 121765.doc -19- 200832370 像資訊供應至合成部13,而該視訊流係對應於已取得之元 資訊的再生位置者。 元資訊檔案讀入部14之再生資訊取得部51係取得流同步 讀入部15所供應之再生資訊,並將所取得之再生資訊供應 至讀入部52。讀入部52係對元資訊檔案3進行存取,根據 被供應之再生資訊,考慮附加圖像資訊提供部丨2中之處理 時間,而讀入比當下之再生時刻早數個圖框分的時點之元 資訊,並供應給流同步讀入部丨5。 流同步讀入部1 5係當元資訊檔案讀入部14藉由元資訊檔 案讀入管理部3 1而被登錄時,則以特定之時間間隔進行控 制再生資訊取得委託部61,使之對流再生部丨6進行委託再 生資訊。 再生資訊取得部62係依據再生資訊取得委託部6丨之委 託,而取得流再生部16所供應之再生資訊,並供應給再生 資訊輸出部63。再生資訊輸出部63係將再生資訊取得部62 所供應之再生資訊供應至元資訊檔案讀入部14。 凡貧訊取得部64係取得元資訊檔案讀入部14所供應之元 資訊,並供應給元資訊輸出部65。元資訊輸出部65係將被 供應之元資訊供應給附加圖像資訊提供部12。 流再生部16之再生處理部71係對流檔案4進行存取,將 視訊流進行再生,在將之供應給合成部丨3的同時並將再生 資訊供應給再生資訊輸出部73。再生資訊委託受理部72係 進行文理來自流同步讀入部丨5之再生資訊取得委託部6 i的 再生資訊之取得委託,並依據此委託,使再生資訊輸出部 121765.doc -20- 200832370 訊之取心错再生育訊委託受理部72而被通知有再生資 部71所=情料,再生f訊輸㈣73係將再生處理 應之再生資訊輸出至流同步讀入部15。 接著’參考圖2之流程圖’針對附加圖像資訊提供處理
/驟81上’兀貝訊播案讀人管理部η係在操作部η被 :作後、,針對是否已被要求附加圖像資訊的提供進行判 被要求為止’反覆進行同樣的處理。在步驟S i上, 譬11操作部11被操作,要求進行附加圖像資訊之提供 月$ ^ (亦即’被要求使附加圖像資訊提供部12之動作 成為接通的情形時)’則在步驟以上,元資訊檔案讀入管 理部31係進行產生元資訊檔案讀入部丨々。 在步驟S3上’元資訊檔案讀入管理部”係要求將已產生 之疋育訊檔案讀入部14登錄於流同步讀入部15。 在步驟S31上,流同步讀人部15係對是否被要求元資訊 檔案讀入部丨4之登錄進行判定,至被要求登錄為止,反覆 進行該處理。在步驟S31上,譬如,藉由步驟83之處理, 而被要求元資訊檔案讀入部14之登錄,則在步驟S32上, 流同步讀入部15係將已被要求登錄之元資訊檔案讀入部14 進行登錄。 再者,步驟S2、S3、S31、S32(含對應之步驟S10、 Sll、S41、S42)之處理係元資訊檔案讀入部14藉由軟體而 構成之情形的處理,係藉由硬體而構成之情形所不必要的 處理。因此,在使用藉由硬體所構成之元資訊檔案讀入部 121765.doc -21 · 200832370 S32(含對應之步 14的情形時,係跳過步驟S2、S3、^丨 驟 S10、Sll、S41、S42)之處理。 、在步驟S33上’再生資訊取得委託部㈣針對是否已經 過特定之時間進行判定,至經過特定之㈣為止,反覆進 :該處理。在步驟S33上’如判定為已經過特定之時間的 情形時,則在步驟S34上,再生資訊取得委託部Η係對流 再生部16進行委託以取得再生資訊。
在/驟861上’流再生部16之再生處理部η係進行讀出 流檔案4,遵㈣定之順序,依序將含聲音之圖像進行再 生’將之輸出至合成部13的同時,並將當下之再生資訊供 應給再生資訊輸出部73。 v驟S62上,再生資訊委託受理部了^係針對是否有再 生資訊之取得委託進行散,當散為無再生資訊之取得 委先之情形日夺,處理係返回步驟S61。,亦#,只要無再生 貝孔之委託’則僅單純從流檔案將含聲音之圖像等作為視 訊流進行持續再生。 在步驟S62上,譬如,藉由步驟S34而被要求再生資訊之 之h形時’則在步驟S63上,再生資訊委託受理部72 系進行控制再生資訊輸出部73,使之將再生處理部71所供 應之再生貧訊輸出至流同步讀入部15。 在步驟S35上,再生資訊取得部62係針對再生資訊是否 已被輸出進行判定,至再生資訊被輸出至此為止,反覆進 /于同樣的處理。在步驟S35上,譬如,藉由步驟S63之處理 而再生貝訊已被輪出至此的情形,則在步驟S36上,再生 121765.doc -22- 200832370 資訊取得部62係取得已被輸出之再生資訊,將所取得之再 生資訊供應至再生資訊輸出部63。 在步驟S37上,再生資訊輸出部63係將已被供應之再生 資訊進行輸出至元資訊播案讀入部14。 在步驟S81上,再生資訊取得部51係針對流同步讀入部 15疋否已將再生資訊供應至此進行判定,至輸出至此為 止,反覆進行同樣之處理。在步驟S8i上,譬如,藉由步
驟S37之處理而再生資訊已被輸出的情形,則判定為已被 供應再生資訊;在步驟S82上,再生資訊取得部51係取得 已被供應之再生資訊,將所取得之再生資訊供應給讀入部 52。 在步驟S83上,讀入部52係對元資訊檔案3進行存取,根 據被供應之再生資訊,進行讀入對應於視訊流之再生位置 之元資訊。 在步驟S84上,讀入部52係將已讀入之元資 同步讀入部1 5 在步驟S38上,元資訊取得部料係針對元資訊是否已被 輸出進行判定,至元資戒給ψ 芏兀貝巩輸出至此為止,反覆進行該處 里在步驟S38上,譬如,藉由步驟S84之處理已輸出元資 訊之情形時,則在步驟S39上,元f訊取得部在取得 已作傳送之元資訊的同時,祐腺 ^ J J ^亚將已取得之元資訊供應至元 資訊輸出部65。 在步驟S40上,元資訊輸出部65係將已供應之元資訊輸 出給附加圖像資訊提供部12。 121765.doc -23- 200832370 在步驟S4上,元資訊取得部32係針對流同步讀入部15是 否已將再生資訊供應進行判定,至供應至此為止,反覆進 行該處理。在步驟S4上,譬如,藉由步驟S4〇之處理已輸 出元資訊之情形時’則在步驟S5上,元資訊取得部32在取 得將供應之元資訊的同時,並將已取得之元資訊供應至元 資訊辨識部33。 在步驟S6上,元資訊辨識部33係進行辨識供應之元資 訊’將辨識内容供應給附加圖像資訊產生部%。 在步驟S7上,附加圖像資訊產生部35係藉由附加圖像資 訊產生處理而產生附加圖像資訊,並供應給附加圖像資訊 輸出部34。再者,隨後,參考圖3之流程圖,將針對附加 圖像資訊產生處理作詳細說明。 在步驟S8上,附加圖像資訊輸出部34係將藉由附加圖像 資訊產生部35所產生之附加圖像資訊輸出給合成部丨3。 在步驟S101上,合成部13係將視訊流及如下圖像進行合 成,並在步驟S102上使之顯示於顯示部2 ;而該視訊流係 藉由流再生部16所供應之包含含有聲音的圖像等者,而該 圖像係構成藉由附加圖像資訊提供部12供應之附加圖像資 訊者。基於此因,如設定附加圖像資訊提供部12之動作為 導通,則構成藉由附加圖像資訊提供部12所供應的附加圖 像資訊之圖像係合成於包含含有聲音之圖像的視訊流,而 顯示於顯示部2 ;然而,如附加圖像資訊提供部12之動作 未被設為導通而維持切斷的情形,則僅藉由流再生部16供 應之包含含有聲音之圖像的視訊流單獨被顯示於顯示部 121765.doc -24- 200832370 2 〇
又,在步驟S9_L,το貢訊;ff案讀人管理部31係在操作部 11被操作後’針對是否已被要求附加圖像資訊提供的停止 進行判定(亦即,針對是否已被要求使附加圖像資訊提供 部12之動作為切斷進行判定),譬如,如未被要求停止之 情形時’處理係返回步驟S4。亦即,只要未被要求附加圖 像資訊提供的停止,則反覆進行步驟84至89之處理。就結 果而s,當判定為未被要求解除登錄之情形時,合成部U 係將如下圖像及視訊流及進行合成,使之持續顯示於顯示 P 2,而4圖像係構成藉由附加圖像資訊提供部12供應之 附加圖像錢者;*該視訊㈣藉由流再生部卿應之包 含含有聲音的圖像者。 在步驟S9上’譬如’在被要求附加圖像資訊提供之停止 的情形時’則在步驟S10上,元資訊檔案讀入管理部”係 對流同步讀入部15進行要求,以解除元資訊檔案讀入部14 之登錄。 在步驟州上,流同㈣人部15係針對是否已被要求解 除凡貧訊檔案讀人部14之登錄進行判定,如判定為未被要 求解除登錄之情形時,則處理係返时驟阳。亦即,反 覆進行步驟S33至步驟S41之處理。 另-方面,在步驟S41上,譬如’當藉由步驟si〇之處理 而被要求解除元資訊播案讀人部14之登錄的情形時,則在 步驟S42上,流同步讀人邱】$备 ^ 、 口 P 1 5係將被要求解除之元資訊檔 案項入部14之登錄予以解哈甘士 宁以解除其結果為,流同步讀入部15 121765.doc -25- 200832370 係成為不對元資訊檔案讀入部14進行供應再生資訊之狀 態。 在步驟S11上’元資訊檔案讀入管理部31將元資訊檔案 頃入部14予以廢茱,處理係返回步驟s】。
藉由以上之處理,從流檔案4所讀出之視訊流、與根據 記錄於元資訊擋案3之元資訊而產生之附加圖像資訊係進 行合成,因而僅更換元資訊檔案3即可將附加圖像資訊作 變更’並且無須依據附加圖像資訊之種類而構成流檔案 4,因此僅記錄1個流標案即可,故可節省記錄容量。 接著,參考圖3之流程圖,針對附加圖像資訊產生處理 作說明。 在/驟呂151上,列表產生部41係進行讀出藉由步驟μ之 處理所取得之元資訊(各競技者之位置資訊),接著,在步 驟以52上,係根據所讀出之位置資訊’而進行產生作為‘ 訊流而被再生之參加足球比賽的競技者之列表。 在此,針對元資訊檔案3之構成作說明。元資訊播案场' =如如圖4所示者。在圖4中顯示’從左側起依序為各競技 者之比賽的各經過時刻於畫面上的位置資訊。亦即, 4中顯示,競技者為「aaa」、「bbb」、「Μ」: .··川」、及「kkk」之U人分,譬如,競技 aaa」在時刻「〇〇 : 〇1 ’ 刀.秒··秒/100))係存 、旦 之座標(Xal,Yal),在時刻「00 : 02 : 〇〇 存在於晝面上之座標(Xa2, Ya2)’在時刻「m:、 ''子在於旦面上之座標(Xa3,Ya3),在時刻「〇〇:叫: 121765.doc -26- 200832370 參 〇〇」係存在於晝面上之座標(Xa4, Ya4),在時刻r 94 ·· 59 ’「〇〇」係存在於晝面上之座標(Xa5699, Ya5699),在時 00 * 〇〇」係存在於晝面上之座標(Xa57〇〇, γ/5700)。再者,由於在競技者「bbb」、「ccc」、 jjj」 及「kkk」方面亦相同,因此省略 其說明。 從此處,譬如,在時刻「〇〇: 〇4: 00」之時點的情形, 圖4所示競技者之名字「aaa」、「bbb」、「。“」、 ddd」、…「jjj」、及「kkk」、以及作為各自之存在位 置,(Xa4, Ya4)、(Xb4, Yb4)、(XC4, YC4)、(Xc4, Yc4)、 ⑽,Yd4) ·_· (Xj4, Yj4)、(Xk4, Yk4)、以及最終時刻 「95 · 〇〇 ·· 00」係藉由元資訊檔案3作為元資訊而被讀 出。 、 因此,根據此元資訊,列表產生部41係產生顯示於圖5 右下部之列表1 02。在圖5中,藉由流再生部丨6所再生之足 球比賽中之圖像係顯示於圖像顯示部丨〇丨,將足球比賽中 之圖像予以顯示。又,在圖5中之列表1〇2方面,從上起係 顯示「aaa」、「bbb」、「ccc」、「ddd」、「_」、 及「kkk」,以及顯示選擇框1〇3,其係用於選擇任一個欲 使追蹤記號1 1 1顯不的競技者者。選擇框丨〇3係可藉由操作 部11使之作上下移動,藉由此方式,可選擇任一位競技者 厂 aaa j bbb j
CCC J ddd
Jjj 及 「kkk」。在圖5中,係選擇「kkk」作為欲使追蹤記號j工j 顯示的競技者。 121765.doc -27- 200832370 在步驟S153上,追縱記號產生部42係根據元資訊,在被 選擇之競技者的位置產生追蹤記號lu。亦即,在圖$中, 選擇框Π)3係位於「kkk」上,作為欲使追蹤記號^顯示 的競技者而選擇「kkk」,因此,追蹤記號產生㈣係以 在時刻「H GO」之時點之「咖」的座標(xk4,Yk4) 作為中心,而產生追蹤記號ln。再者,在圖5中,追蹤記 號111係圓圈記號,但如為其他形狀亦可,此點毋庸贅 言〇 、 在步驟Si54上,時標尺產生部43係根據被供應之元資 訊’而產生時標尺ΠΜ。亦即,在圖5中,於圖像顯示部 1〇1之下部係顯示時標尺104,再者,在時標尺1〇4上,將 水平方向之長度設定為「95 :⑽:⑽」作為全體時,在顯 寸4 〇〇 ’ 04 . 00」上之比率的位置,係顯示目前記號 105時才不尺產生部43係在產生時標尺⑽的同時,藉由叶 算而求出如下位置’並將目前記號如附加於該位置,^ f生時標尺104之圖像,而該位置係將水平方向之長度設 定為「95 : 00 : 00」作為全體時之顯示時刻 〇〇」上之比率者。 藉由附加圖像資訊產生處理,圖5中之列表1〇2、選擇框 二3、追蹤記號⑴、時標尺1〇4、及目前記號ι〇5之圖像係 各自之位置產生’藉由上述步驟S8之處理,而被輸出給 合成部13。接著,藉由+ 乂驟81〇1之處理,合成部13係在足 求比賽的視5fl流圖像上’將包含該等附加圖像資訊之圖像 以進行重疊顯示之方式予以合成,並藉由使之顯示於顯示 121765.doc •28- 200832370 部2 ’而進行顯 而該足球比賽的視 案4所讀出及顯示 如圖5所不般的圖像, 訊流圖像# v t /、 v驟%1之處理而從流播 f。 就結果而士, # 者,則所_ a 擇框⑻㈣擇列表1G2上之競技 此,使用者„之规技者係被連續性附加追蹤記號111,因 圖5中,係顯示作…定之VI肌技者。再者,在
後在經過特定… 追蹤記號ιη 一旦顯示 被、…:則顏色逐漸變淡並消失。就結果而言, 被适擇之競社本 而被m ㈣作係作為追蹤記號ui的殘影 而被顯不出炎,m H、〜 進行中之方向等變得更容易辨識,可 :更…式觀賞所選擇之競技者的動作。再者,在圖5 ^在作為殘影而被顯示之追縱記號方面,係以虛 顯不。 你X上内谷中,係針對將追蹤記號111附加於所選擇 之观=者的提供附加圖像f訊之例作說明,但如藉由同樣 之兀資訊而提供其他附加圖像資訊亦可,譬如,以所選擇 之双技者的位置作為中心,而進行顯示放大為特定倍率之 圖像,以取代追蹤記號1"亦可。藉由如此之附加圖像資 訊提供,而可將所選擇之競技者的比㈣作在顯示部2作 連續性擴大,進行觀賞。 再者,在以上内容中,根據流檔案4而再生之含聲音的 圖像係將足球現場轉播予以錄影而成者,且係以將追蹤記 號附加於所選擇之競技者作為附加w像資訊之例作說明 但譬如,根據流檔案4而再生之含聲音的圖像係戲劇或電 121765.doc -29- 200832370 影等之情形,則顯示登場人物之關連圖等作為附加圖像資 訊亦可° 圖6係顯示再生裝置1之構成例,其係根據流檐案4而再 生之含聲音的圖像為戲劇或電影等之情形時,進行顯示登 場人物之關連圖等作為附加圖像資訊者。再者,在圖6之 再生裝置!中,如為與圖!之再生裝置1中之構成為同一構 成者,則賦予同一符號,但適宜省略其說明。 在圖6之再生裝置1方面,其與圖!之再生裝置丨不同之構 f,係在於設置附加圖像資訊產生部141以取代附加圖像 資訊產生部35之點,以及元資訊檔案3之内容。 附加圖像資訊產生部141包含臉部圖像框產生部i5i、群 組框產生部152、關連產生部153、時標尺產生部154、及 類型轉換框產生部155。臉部圖像框產生部151係根據元資 訊,而產生登場人物之臉部圖像框。群組框產生部152係 根據包含於元資訊之將登場人物作群組化的群組化資訊, 而產生將臉部圖像框作群組化並予以顯示的群組框之圖 像關連產生部15 3係產生顯示各登場人物間之關係的箭 頭狀的關連圖像。時標尺產生部154係根據元資訊而產 生·對從流檔案4被讀出並作再生的戲劇或電影之再生總 時間的再生位置、顯示故事情節中之事件的時標尺的圖 像。類型轉換框產生部1 55係根據元資訊而產生登場人物 之介紹圖像。 接著,參考圖7之流程圖,針對藉由圖6之再生裝置 附加圖像資訊產生處理作說明。再者,在藉由圖6之再生 121765.doc -30- 200832370 裝置1之附加圖像資訊提供處理方面,除步驟以之附加圖 像貧訊產生處理之外,係與參考圖2作說明之處理為相 同,因此省略其說明。 在步驟S171上’附加圖像資訊產生部ι41係產生顯示視 © 202(圖9)之圖像,而視窗202係用於作為附加圖像資訊而 顯示關連圖者。 在步驟S172上,臉部圖像框產生部151係根據元資訊, 按照各登場人物將臉部圖像之位置資訊進行讀出,並產生 臉部圖像框。亦即,圖6之再生裝置〗中的元資訊檔案3係 如圖8所示者。在圖8中,從左起係顯示各登場人物設定之 ID、登場人物名稱、及各再生時刻之臉部圖像框的顯示中 心位置、群組化資訊、關連資訊、及臉部圖像之儲存位 置。 亦即’在圖8中,分別顯示:登場人物r aaa」係id=1, 登場人物之介紹文件資料儲存於「c:¥cast¥aaa txt」,在 %刻「00 : 01 : 00」(=「時:分:秒」)上,臉部圖像之 旦面上的中心位置座標為座標(Xal,Yal);群組化資訊 Gr(好友夥伴)為「好友夥伴」,關連資訊(fr〇rn ID==2 :好 感)係從「ID=2」之登場人物「bbb」對其抱有「好感」, 關連資訊(from ID=3 :好感)係從「ID=3」之登場人物 「ccc」對其抱有「好感」,登場人物r aaa」之臉部圖像 賓亂係健存於「c:¥face¥aaa.jpg」。 又’分別顯不:10== 1之登場人物「aaa」在時刻「qq : 02 : 00」上,臉部圖像之晝面上的中心位置座標為座標 121765.doc -31 - 200832370 (Xa2,Ya2);群組化資訊Gr(好友夥伴)為「好友夥伴」, 關連資訊(from ID=2 ·好感)係從「ID=2」之登場人物 「bbb」對其抱有「好感」’關連資訊(from ID=3 :好减) 係從「ID=3」之登場人物「cc〇」對其抱有「好感」,登 場人物「aaa」之臉部圖像資訊係儲存於 「c:¥face¥aaa.jpg」〇
再者,亦顯示·· ID=1之登場人物「aaa」在時刻r 〇〇 : 50 : 09」上,臉部圖像之畫面上的中心位置座標為座標 (Xa3009,Ya3009);群組化資訊Gr(好友夥伴)為「好友夥 伴」,關連資訊(from ID=2 :好感)係從「id=:2」之登場人 物「bbb」對其抱有「好感」,關連資訊(from id=3 ··好 感)係從「ID=3」之登場人物「ccc」對其抱有「好感」, 登場人物「aaa」之臉部圖像資訊係儲存於 「c:¥face¥aaa.jpg」。 又’分別顯示:ID= 1之登場人物「aaa」在時刻「⑽: 5 0 : 10」上,臉部圖像之晝面上的中心位置座標為座標 (Xa3010,Ya3010);群組化資訊Gr(情侣夥伴)係表示「情 侣夥伴」,關連資訊(to ID=2 :好感)係對「ID=2」之登場 人物「bbb」抱有「好感」,關連資訊(from ID=3 :失戀) 係表示與「ID=3」之登場人物「ccc」之間為r失戀」之 關係,登場人物「aaa」之臉部圖像資訊係儲存於 c:¥face¥aaa.jpg」。再者,於此一時點,如最上階所示 般,係登錄「告白」作為故事情節上之重要事件。 又’分別顯示· 1之登場人物「aaa」在時刻 厂 00 : 121765.doc -32- 200832370 50 : 11」上,臉部圖像之晝面上的中心位置座標為座標 (XaSOll,Ya3011);群組化資訊Gr(情侣夥伴)係表示「情 4呂夥伴」,關連負訊(t〇 ID 2 ·好感)係對「」之登場 人物「bbb」抱有「好感」’關連負訊(to id=3 :失、爭、)係 表示與「ID = 3」之登場人物「ccc」之間為「失戀^之關 係’登場人物「aaa」之臉部圖像資訊係儲存於 「c:¥face¥aaa.jpg」。 ODD J 及 係 又,在ID=2及3之登場人
與ID== 1之登場人物「aaa」為同樣,因而省略其說明。 從圖8之元資訊檔案3,分別作為元資訊而讀出:譬如, 在時刻「00 : 02 : 00」之時點的情形,在圖8所示1〇=1至3 之登場人物「aaa」、「bbb」及「ccc」之各個方面,就臉 部圖像顯示位置而言係(Xa2,Ya2)、(Xb2,Yb2)、及(XC2, Yc2),就群組化資訊而言係Gr(好友夥伴)、情侣夥 伴)、及Gr(好友夥伴),就關連資訊而言,在「⑽③」方面 為關連資訊(from ID=2:好感)、及關連資訊(fr〇m ID=3: 子感)在bbb」、「ccc」之各個方面為關連資訊 山=1 :好感),就各個之臉部圖像之儲存位置而言係 (c.¥face¥aaa.jPg)、(c:¥face¥bbb jpg)、及(。¥^¥⑽柄)^ 就各個之介紹資訊的儲存位置而言係(e:¥east¥aaa txt)、 (c:¥cast¥bbb.txt)、及(c:¥cast¥ccc圳,再生總時間,以 及作為事件而言係於時刻「00: 50 U「告白」。 立口此根據此凡資訊,如圖9所示般,臉部圖像框產生 Ρ 5 1係在顯不附加圖像資訊之視窗202上產生登場人物 121765.doc •33· 200832370 aaa」、「bbb」及「ccc」之各自的臉部圖像框2^4至 221-3。在圖9方面,從流檔案4藉由流再生部16所再生之 戲劇或電影之圖像係顯示於圖像顯示部2〇 1,並顯示表示 附加圖像資訊的視窗202。再者,在圖9中,係將圖像顯示 部20 1上所顯示之戲劇或電影之圖像予以省略。 譬如,在時刻「00 : 02 : 〇〇」,臉部圖像框產生部151 係以視窗 202 上之(Xa2,Ya2)、(Xb2,Yb2)、及(XC2,YC2)之 各者之位置為中心,從(c:¥face¥aaa.jpg)、 (c¥face¥bbb.jPg)、及(c:¥face¥ccc jpg)把登場人物 「aaa」、「bbb」及「ccc」之各自的臉部圖像讀出,作為 圖9之臉部圖像框221-1至221-3而予以產生。 在步驟S173上,群組框產生部152係根據元資訊,而產 生群組框211。亦即,譬如,在時刻「〇〇 : 〇2 : 〇〇」上, 登場人物「aaa」、「bbb」及「ccc」之群組化資訊均為 Gr(好友夥伴),因此,以包圍具備同一群組化資訊之臉部 圖像框221·1至221·3的方式,而產生群組框211,作為群組 構成而附加「好友夥伴」。 在步驟S174上,關連產生部153係根據元資訊,而產生 關連222-1、222-2。亦即,譬如,在時刻「〇〇: 〇2: 〇〇」 上’登場人物「⑽a」、「_」及「ccc」之關連資訊,在 aaa」方面’係设為關連資訊(fr〇m ID=2 :好感)及關連 資訊(f— m=3:好感),在「咖」及「⑽」之各者方 面’係設為關連資訊(t0 ID=1 :好感),在此顯示上,關連 貝&係以(以自己為起點之箭頭的終點之形狀成為終點 121765.doc -34 - 200832370 位置之臉部圖像之ID:關係)所構成’譬如,u自己為起 點,箭頭的終點之形狀係「from」或「t〇」令任一個,如 為from」之情形,以自己為起點之箭頭的終點之形狀係 顯示無箭頭記號’如為、」之情形,以自己為起點之箭 頭的終點之形狀係顯示有箭頭記號。 Λ P g如,在「aaa」方面之關連資訊(from ID=2 ··好 感)的情形,係構成以臉部圖像框22h為起點、以山=2之 「bbb」的臉部圖像框221_2為終點之無箭頭記號的關連 一相對的,譬如,在「bbb」方面,關連資訊(fr〇m ID 1 ·好感)的情形,係構成以臉部圖像框22卜2為起點、 以㈣的臉部圖像框221]為終點之有箭頭㈣的關連 , 就…果而曰,根據此等二個關連資訊,關連222-1 係構成為從臉部圖像框221.2往臉部圖像框22“方向之箭 頭狀。再者’用於顯示「好感」,在關連中,下部 係顯示出心形記號。 。如,在「aaa」方面之關連資訊(from ID=3 :妤 ^㈣π 臉部圖像框22m為起點、以1〇=3之 J的臉邛圖像框221 -3為終點之無箭頭記號的關連 相對的,譬如’在rCCCj方面,關連資訊 ID=i:好感)的情形’係構成以臉部圖像框221_3為起點、 、D 1的臉Q卩圖像框221_〗為終點之有箭頭記號的關連 222-2。就結果而冑’根據此等二個關連資訊,關連222_2 係構成為從臉部圖像框221_3往臉部圖像框⑶妨向之箭 頭狀再者’用於顯不「好感」,在關連中,下部 121765.doc -35- 200832370 係顯示出心形記號。 在步驟S175上,時標尺產生部154 根據被供應之元資 加,之而下/時標尺2〇3。亦即,在圖9中,於圖像顯示部 ⑽之下部顯示出時標尺203,再者,在時標尺2〇3上,將 水平方向之長度設定為「〇1:53:2()」作為全 貝 示時刻「00: 02·· 00」上之比率的 在』 置 係顯不目前fp跋 2〇4。時標尺產生部154係在產生時標尺2()3的同時 計算而求出如下位置’並將目前記號2〇4附加於該… 而該位置係將水平方向之長度設定為「(H : 53 : 2〇」作為 全體時之顯示時刻「〇。:。2:。。」上之比率者;再:,藉 由計算而求出顯示時標尺2〇3上之比率的位置,並將事: 記號205、2〇6附加於該位£,而產生時標尺加上之圖 像;而該位置係顯示作為事件在時刻「〇〇 : 5〇 :丨 「告白」者。 如圖9所示般,作為包含如此之附加圖像資訊的視窗加 而顯示’而在時刻「〇0:02:〇〇」上’作為如下關連圖而 顯示:登場人物「aaa」、「bbb」及「咖」均為相互為好 友夥伴,而登場人物「bbb」及「咖」分別對登場人物 「aaa」抱有好感。 其結果’譬如’戲劇或電影之視訊流展開,至時刻 「00 · 50 ·· 09」為止’仍為維持同樣之關連關係,但在時 刻「00: 50: 10」上,藉由人物「bbb」對人物「嫌」進 行告白,而使人物「aaa」與rbbb」之群組化資訊發生變 化,如同Gr(情侣夥伴)所示般而成為情侣夥伴,人物 121765.doc -36· 200832370 ccc」之群組化資訊係如Gr()所示般成為不屬任—群組之 狀態,當關連資訊在「aaa」方面為關連資訊(t〇 ^=2 :好 感)及關連資訊(to ID=3 :失戀)、在「bbb」方面為關連資 訊(to ID=1 :好感)、在「ccc」方面為關連資訊出叫: 失戀)之情形時’則如圖1 〇所示般,屬於情侣夥伴之同一 群組的登場人物「aaa」及「bbb」之臉部圖像框221_夏、 221-2係被群組框251所包圍,並被附加顯示群組的「情侶 夥伴」。 再者,作為關連,在「aaa」方面之關連資訊“〇 ID;=2 : 好感)的情形,係構成以臉部圖像框]^」為起點、以 之「bbb」的臉部圖像框221_2為終點之有箭頭記號的關連 262:1。相對的,譬如,在rbbb」方面關連資訊係成為關 連資訊(to ID=1 :好感),因此構成以臉部圖像框^^為 起點、以m爿之臉部圖像框221_丨為終點之有箭頭記號的 關連222-1。就結果而言,根據此等二個關連資訊,關連 261-1係構成為臉部圖像框221_2、221-1之雙向的箭頭狀。 再者,用於顯示「好感」,在關連Mi」中,下部係顯示 出心形記號。 又,譬如,在「aaa」方面之關連資訊(to ID=3:失戀) 的情形,係構成以臉部圖像框“^丨為起點、以1〇=3之 「CCC」的臉部圖像框221_3為終點之有箭頭記號的關連 261-2。相對的,在「CCCj方面’關連資訊㈦ι〇=ι :失 戀)的情形,係構成以臉部圖像框221·3為起點、以1〇=1的 臉部圖像框221-1為終點之有箭頭記號的關連261_2。就結 121765.doc -37- 200832370 果而言,根據此等二個關連資訊,關連261·2係構成為臉 部圖像框221.3、221·1之雙向的箭頭狀。再者,用於顯示 「失戀」,在關連261-2中,下部係顯示出破碎心形記號 「〇〇 : 50 : 10」 白」的事件,因 再者’在時標尺203方面,由於在時刻 上發生人物「bbb」對人物「aaa」之「告 此,作為事件記號205,而使顯示從「????」切換為「告
白」,此外,在目鈾圮號204’方面,亦顯示當下之時刻 「〇1 : 05 : 10」。 就結果而言,藉由在時刻r 〇〇 : 50 : 1〇」上人物 「bbb」對人物「aaa」進行告白,如圖1〇所示般,關連圖 係顯示:在時刻「00 : 50 : 1〇」以後,登場人物 「aaa」、「bbb」變成情侣夥伴之關係,而登場人物 「ac」、「aaa」則變化為失戀關係,好友關係崩解。 在步驟S176上,附加圖像資訊產生部ι41係在操作部^ 被操作後,針對是否已被指定特定之登場人物的臉部圖像 框221進行判定。譬如,如圖丨丨所示般,當臉部圖像框 221-1已被選擇之情形,則在步驟8177上,產生用於顯示 類型轉換框之附有「類型轉換介紹」標題的視窗271,同 時並進行變更,將已選擇之臉部圖像框221-1設為粗框 等,使已選擇之臉部圖像框221容易辨識。 在步驟S178上,類型轉換框產生部155係根據元資訊, 在視窗271上顯示各整場人物之人物介紹。亦即,類型轉 換框產生部155從臉部圖像之健存位置(c:¥face¥aaa.jpg)、 12l765.doc -38 - 200832370 (c:¥faCe¥bbb.jPg)、及(c:¥face¥cceJpg)讀出臉部圖像,並 對介紹貧訊之儲存位置(c:¥cast¥aaa txt)、(c:¥cast¥bbb 及(C:¥caSt¥ccc.txt)的各個進行存取而讀出,而產生個別之 類型轉換框281至283。在圖11中,類型轉換框281係已被 • €擇之登場人物「纖」1,因此比其他類型轉換框為 大,與臉部圖像一起,作為人物介紹,被註明為「班上之 又歡人物人見人雯的萬人迷」;類型轉換框282係與 未被選擇之登場人物「bbb」的臉部圖像一起,在人物介 紹上被註明為「有點難搞的男生」;類型轉換框Μ]係與 未被選擇之登場人物r ccc」的臉部圖像一起,在人物介 紹上被註明為「個性有怪的傢伙」。 再者,在步驟S176上,當判定為特定登場人物之臉部圖 像框221並未被選擇之情形,則跳過步驟si 77、μ π之處 理’因此並不顯示視窗271。 藉由以上之處理,伴隨儲存於流檔案4之戲劇或電影之 • ㈣而變化之登場人物之關連圖、介紹文件係被作圖示並 顯示出來。 -39- 200832370 因此作為各自獨立之樓案而予以設^。再者,纟圖η之再 生裝置1中’與圖1之再生裝置1為同-構成方面,係賦同 一符號,但省略其說明。
/在圖12之再生裝置i方面,與圖i之再生裝置請不同點 係在於m資訊標案讀入部14]、14_2以取代元資訊 檔案讀入部14。元資訊檔案讀入部14-1、14-2雖分別包含 同一之再生資訊取得部5H、51·2,但讀人部⑸係從以 格式Α記錄之元資訊檔案進行讀出元資訊,讀人部如 係從以格式B記錄之元資訊檔案3韻行讀出元資訊。如此 方式般,在本實施例中,由於可操作處理格式不同之元資 Λ 4田案,因此,格式A作為人容易辨識之文字形式之格式 的檔案而容易進行編輯,格式B為已壓縮之元資訊檔案, 藉由作如此設定,在使編輯變得更容易的同時,亦可將記 錄媒體之容量作效率化使用,以使用元資訊檔案。 然而,藉由讀入部52-1、52-2所讀出之元資訊係均成為 同一格式之資訊,因此,將藉由讀入部52-1、52-2所讀出 之元資訊予以組合而成者係被供應至附加圖像資訊提供部 12 〇 又’在附加圖像資訊提供處理方面,係參考圖2之流程 圖所說明之元資訊檔案讀入部14的處理。步驟S81至步驟 S84係僅以元資訊檔案讀入部14-1、14-2之各個獨立進行 而成者,因此省略其說明。 在以上内容方面,係針對將人物關連、登場人物介紹作 為附加圖像資訊而顯示之例作說明,然而,譬如,亦可在 121765.doc -40- 200832370 進行再生與訪扮演登 顯示。 <廣貝專有關之場景時予以 根據以上内容,針對包含含 的内容,可据糾 夕樣聲音之圖像的視訊流 像資訊。 耳“之再生内容的附加圖 二:由:流檔案與元資訊檔案為各自不同之檔案,可各 ,::订編軏,因此,無須將核心圖像、聲音之流重新 、 僅附加新元資訊即可進行再生。 再者,,由於可將製作含有圖像、聲音的視訊流之製作作 ::及製作7G資訊之作業予以分開,可同時並行進行作 業,因此可縮短全體之編輯時間。 又’藉由使用以利用網際網路之下載所代表的資訊取得 歲構則亦可叹定兀育訊之追加或置換’因而即使為已發 售之封裝媒體,則亦無須換購封裝媒體而可將新的享受觀 賞之娱的方法提供給觀賞者。因此,觀賞者即使在購入封 裝媒體後,在靖:人日卑益、土古士 Μ 1 嗎守無法予有的功能,亦可藉由作為附加 圖像資訊Μ追加’而可享有該功能。 再者’在以上之再生裝置1方面,由於可僅將元資訊檔 案之格式、及碩入元資訊檔案之機構作更換,故可將格式 進灯切換使用,譬如,如為元資訊檔案之資訊量非常多的 内谷,則使用使元資訊檔案之大小儘量變小之高效率壓縮 型格式’而在由人進行編輯機會較多之内容方面,則使用 人容易辨識之格式。 接著’參考圖13,針對產生元資訊檔案之元資訊檔案產 121765.doc -41 · 200832370 生裝置之實施型態作說明。 圖13之元資訊檔案產生裝置1 〇丨係產生圖4或圖8所示元 資訊檔案3。 操作部1 1 1係由鍵盤、操作按鍵等所構成,係於流之再 _ 生時刻、及在輸入對應之再生時刻上之元資訊時被進行操 作’分別將對依據操作内容之再生時刻的資訊供應至時刻 貝訊取得部1 12,將對應之再生時刻上之元資訊供應至元 Φ 資訊取得部113。又,操作部111係在指定元資訊檔案3之 格式時、或在決定元資訊檔案3之格式之際進行指定優先 之模式日可被進行操作,將依據操作内容之資訊供應至格式 變換部1 1 5。 時刻資訊取得部112係藉由操作部ln被操作,而取得將 已輪入之再生時刻進行特定之資訊,並使之儲存於儲存部 114 〇 疋貧訊取得部113係藉由操作部lu被操作,而取得已輸 • 入之元資訊,並使之儲存於儲存部114。 儲存部114係使進行特定再生時刻之資訊與元資訊成對 應關係而作為元資訊檔案3予以儲存,而該再生時刻係從 夺d資訊取得部Π2供應至此者,而該元資訊係從元資訊 • 取得部11 3供應至此者。 格式變換部115係從操作部lu依據被指定之形式或模 式,將儲存於儲存部114之元資訊檔案3進行格式變換,並 供應至記錄部116。在此所提及之模式係指,顯示在複數 存在之格式的形式中選擇任一個格式之優先度者,譬如, 121765.doc -42- 200832370 在已指定人容易辨識之模式的情形’格式變換部115係以 在複數存在之格式㈣式巾人最容㈣識之形式之切 式將元資訊檔案3進行蠻拖,& P 4t — ^ m仃瓮換’如已指定使容量為最 式的情形,則變換為使容量為爭| 一 、 、 ο忧谷里為最小之鬲效率壓縮形式的格 式’如已被指定為適合資訊虛 梦 貝π慝理衣置上之處理的模式之情 形,則變換為適合資訊處理裝置上之處理的格式。 記錄部116係將格式變換部115所供應至此之以特定形式 格式化的元資訊檔案3,進行 綠於圯錄媒體121。此時, 各己錄部116係在執行對岸於^々年 “丁對應己錄媒體121之記錄形式的格式 變換後’將元資訊㈣3進行記錄於記錄媒體ΐ2ι。 接著,參考圖14之流程圖,針對藉由之元資訊檔案 產生裝置101之元資訊產生處理作說明。 在步驟Sl9i上,時刻資訊取得部112係在操作部⑴被操 作後,料與登錄於元資訊標案3之元資訊制之視訊流 之再生時刻之資訊是否p赫私 已被輸入進行判定,至判定已被輸 入為止,反覆進行同樣的處理者。 在步驟S191上,作為再生時刻之資訊,譬如,「00: 01 ·· 00」或「⑽·· 50 ·· 1〇 ^ 」A §判疋已被輸入視訊流之 再生時刻的資訊之情形’則在步驟S192上,取得藉由操作 部in所輸入之再生時刻’並供應至儲存部114。 /在/驟8193上’ %貢訊取得部113係在操作部⑴被操作 後,針對元資訊是否已被輸人進㈣m枝已被輸入 為止’反覆進行同樣的處理, 在/驟81 93上’當已判定如下資訊作為元資訊已被輸入 121765.doc -43· 200832370 時,則在步驟S194上,取得藉由操作部U1所輸入之元資 訊,並供應至儲存部i 14 ;該資訊係··譬如,在足球比賽 之視訊流上顯示各競技者的位置資訊之情形時,如圖4所 示般之各肌技者在比賽之晝面上的座標(Xal,YU)等位置 貧訊,或是,作為戲劇或電影等之附加圖像資訊,而顯示 登場人物之關連圖等之情形時,如圖8所示般之座標(χΗ, Yal)、群組化資訊以(好友夥伴)、關連資訊汾㈣ι〇=2 : 好感)、(from ID=3··好感)、及登場人物「⑽叫之臉部圖 像的資訊「c:¥face¥aaa.jPg」。再者,作為戲劇或電影等 之附加圖像貧訊而輸入將登場人物之關連圖等之顯示作切 換之事件的情形時,作為元資訊,譬如,如圖8所示般, 輸入「告白」之事件資訊亦可。 在步驟S195上,儲存部114係使從時刻資訊取得部ιΐ2供 應之再生時刻之貧訊、及從元資訊取得部丨13供應之元資 Λ形成對應關係(譬如,如圖4或圖8所示般)而作為元資訊 槽案4予以儲存。 在步驟S196上,時刻資訊取得部112係依據操作部lu之 操作内谷,針對疋否存在著新登錄於元資訊檔案3之其他 再生%刻的元資訊進行判定,當判定為存在著新其他再生 日守刻的元資訊之情形時,處理係返回步驟s丨9丨。亦即,至 應作新登錄之元資訊不存在之狀態為止,反覆進行步驟 S191至S196之處理。 接著,在步驟S196上,如應作新登錄之元資訊不存在之 h形%,則在步驟S197上,格式變換部i 15係在操作部U1 121765.doc -44- 200832370 被操作後’針對如下内容進行判定:是否已選擇將元資訊 標案作變換的格式之形式、或是否已輸入用於選擇格式之 幵> 式的权式;至將元資訊檔案作變換的格式之形式被選擇 或用於選擇形式的模式被輸入為止,反覆進行同樣的處 理。
夂在步驟S197上,譬如,格式之形式已被選擇或用於選擇 °弋之开/式的模式已被決定之情形時,則在步驟s 19 8上, Τ式2換部115係將儲存於儲存部114之元資訊檔案3進行 式文換’使之成為已選擇之形式的格式或藉由模式而應 乍k擇之开> 式的模式,並供應至記錄部11 6。 在卜驟8199上,記錄部116係將從格式變換部ιΐ5供應至 之已作格式蜒換的兀資訊檔案3,作為與流檔案呈個別 獨^之檔案,而進行記錄於特定形式之記錄媒體!21。 ::以上之處理,而產生已變換為所指定之形式之檔案 :=!呈訊::3,方式般,元資— 、徭 之‘帛目此,在僅進行編輯元資訊之 =僅編輯如上述般所產生的元資訊檔案3 3Τ^流㈣4而進行編輯。又,藉由可將元資訊㈣ 語言=乍:了立:置,’即使在需要對應多種 記錄於二…亦無須將流檔案4重複進行 者:錄媒體,所以可使記錄容量維持於最小限度。再 者,在欲僅將元資訊進行編輯之情形時,由再 訊槽案3進行編輯,故可使元資訊之編輯變得容易資 由於將元資訊權案與流檔案作獨立設定,因此,藉由^案 121765.doc •45· 200832370 置換(Name mapping),㈣行置換元資料標案,則亦可將 顯示^藉由此方式’如下處理亦變為可 症.譬如,當記錄於記錄媒體之電影中的電影明星獲得某 獎之情形時,》了將其獲獎經歷予以顯示等,則藉由再生 裝置透過網路等取得新的元資料,並在該當電影明星所演 出之場景上予以顯示。
“再者,上述-連之圖像處理雖可藉由硬體執行,但亦可 藉由軟體執行。當-連之處理藉由軟體執行之情形時,構 成該軟體之程式’係譬如從記錄媒體進行安裝於组入於專 用之硬體的㈣、或藉由安裝各種程式而可執行各種功能 之泛用型個人電腦等。 圖15係顯示泛用型個人電腦之構成例。此個人電腦係内 CPU(Central Processing Unit: t ^ 4 S H )1001 〇 CPU 1001係介以匯流排1004,而連接於輸出入介面1〇〇5。匯流 排1004係連接於R〇M(Read 〇nly Memory :唯讀記惊 體)1002、及 RAM(Random Access Mem〇ry :隨機存取記憶 體)1003。 u 輸出入介面1005係連接於··輸入部1〇〇6,其係包含用戶 輸入操作指令之鍵盤、及滑鼠等輸入元件者;輸出部 1〇07,其係將處理操作晝面、處理結果之圖像輸出至顯^ 元件者;記憶部1008,其係包含儲存程式、各種資料之硬 碟等者;及通信部1009,其係包含LAN(L〇cal心以 Network ··區域網路)轉接器等,執行介以網際網路所代表 之網路的通信處理者;又,連接著驅動器i 〇丨〇,其係對磁 121765.doc -46- 200832370 碟(含可撓式磁碟)、光碟(含CD_R0M(CGmp_此卜偏 y 卿1^ ·小型碟片唯讀記憶體)、DVD(Digital
Versatile D1SC ·數位多用途碟片))、光磁碟(含· 迷如、碟片))或半導體記憶體等可移媒體丨〇〗1進行資 料之讀寫者。 '
CPU 1GG1係遵照如下程式而執行各種處理,而該程式 係:記憶於ROM 1002者;或是從磁碟、光碟、光磁碟或 半導體記憶體等可移媒體1〇11所讀出,安裝於記憶部 1008,且從記憶部1008上載於RAM 1〇〇3者。在RAM 1⑽3 中亦適且圮憶著CPU 1001在執行各種處理上所需之資料 等。 、’ 再者,在本發明專利說明書中,進行記述記錄於記錄媒 體之程式的步驟,當然包含依照所記載之順序作時間系列 施行之處理,亦包含即使並非必然作時間系列處理而採取 並列式或作個別執行之處理。 【圖式簡單說明】 圖1係說明應用本發明之再生裝置的構成例之區塊圖之 圖0 圖2係說明藉由圖丨之再生裝置之附加圖像資訊提供處理 的流程圖。 圖3係說明藉由圖丨之再生裝置之附加圖像資訊產生處理 的流程圖。 圖4係說明藉由圖1之再生裝置之元資訊檔案之圖。 圖5係說明藉由圖1之再生裝置之附加圖像資訊提供處理 121765.doc •47- 200832370 之圖。 圖6係說明顯示再生裝置之其他構成例的區塊圖之圖。 圖7係說明藉由圖6之再生裝置之附加圖像資訊產生處理 的流程圖。 圖8係說明藉由圖6之再生裝置之元資訊檔案之圖。 圖9係說明藉由圖6之再生裝置之附加圖像資訊產生處理 之圖。
圖10係說明藉由圖6之再生裝置之附加圖像資訊產生處 理之圖。 圖11係說明藉由圖6之再生裝置之附加圖像資訊產生處 理之圖。 圖12係說明顯示再生裝晉 丹王衣置之另外其他構成例的區塊圖之 圖0 置之構成例的區塊圖 圖13係說明顯示元資訊檔案產生裝 之圖。
圖14係說明藉由圖13之 案產生處理的流程圖。 70貪訊檔案產生裝置之元資訊檔 圖15係說明個人電腦之構成例之圖。 【主要元件符號說明】 1 再生裝置 2 顯示部 3 元資訊彳當案 4 流檔案 11 操作部 121765.doc -48- 200832370
12 附加圖像資訊提供部 13 合成部 14 元資訊檔案讀入部 15 流同步讀入部 16 流再生部 121765.doc -49-

Claims (1)

  1. 200832370 十、申請專利範圍: 1· 一種再生裝置,其包含: 流再生機構,其係將所輸入之視訊流進行再生; 兀資訊讀入機構,其係讀入前述視訊流之元資訊,而 該凡貧訊係與由前述流再生機構所再生之視訊流為不同 檔案; | 流同步讀入機構,其係根據由前述流再生機構所再生
    之視訊流的再生資訊,與由前述流再生機構所再生之視 訊流同步控制前述元資訊讀入機構,而讀入前述元資 訊; ~ 附加圖像資訊提供機構,其係由前述流同步讀入機構 所控制’且根據由前述元資訊讀入機構所讀入之元資 訊,而將附加圖像資訊提供給前述視 合成機構,其係將由前述附加圖像資;^供機構所提 供之附加圖像資訊,合成於由前述再生機構所再生之視
    2.如請求項1之再生裝置,其中更包含: 輸出機構,其係輸出藉由前述合成機構而合成有前述 附加圖像資訊的視訊流; 雨述元資訊係在顯示由前述輪 +、^因你^ ^輪出機構所輸出之已合成 月,j述附加圖像貧訊之視訊流之 ▲ 4不畫面上之位置資 3·如請求項1之再生裝置,其中 前述元資訊具有: 121765.doc 200832370 包含第1時刻資訊之第丨元 之第2元資訊; 、訊、及包含第2時刻資訊 4述流同步讀入機構係 藉由將前述視訊流之再生時 义— 守刻與前述第1時刻資訊痞 刖述弟2時刻資訊進行比較, 一 述第2元資訊。 而…述第!元資訊或前 4·如請求項1之再生裝置,其中
    月’J述兀*資訊讀入機構係依據格式而為1以上。 5·如請求項1之再生裝置,其中更包含: =得機構,其係透過網路而取得前述元資訊; ^前述流同步讀入機構讀入由前述取得部所取得之元資 6.如請求項1之再生裝置,其中 當前述視訊流為戲劇或電影的情形’前述元資訊係對 應於各登場人物之再生資訊的關連資訊; 前述附加圖像資訊提供機構係與由前述再生機構所再 生之視訊流的再生資訊同步,提供依據於對應於前述各 登場人物之再生資訊的關連資訊之前述登場人物之關連 圖作為附加圖像資訊。 7·如請求項1之再生裝置,其中 當前述視訊流為戲劇或電影的情形,前述元資訊係對 應於各登場人物之再生資訊的關連資訊且係前述登場人 物之介紹資訊; 萷述附加圖像資訊提供機構係與由前述再生機構所再 121765.doc 200832370 8. 生之流的再生資訊同步,提供依據於前述各登場人物之 介紹資訊的前述登場人物之介紹資訊作為附加圖像資 訊。 一種再生方法,其包含: 流再生步驟,其係將所輸入之視訊流進行再生; 元資訊讀入步驟,其係讀入前述視訊流之元資訊,而 其係與由前述流再生步驟之處理所再生之視訊流不同檔 瘳 • 案; 流同步讀入步驟,其係根據由前述流再生步驟之處理 所再生之視訊流的再生資訊,與由前述流再生步驟之處 理所再生之視訊流同步控制前述元資訊讀入機構,而讀 入前述元資訊; 附加圖像資訊提供步驟,其係由前述流同步讀入步驟 之處理所控制,且根據由前述元資訊讀入步驟之處理所 讀入之元資訊,而將附加圖像資訊提供給前述視訊流; 及 合成步驟,其係將由前述附加圖像資訊提供步驟之處 理所提供之附加圖像資訊,合成於由前述再生步驟之處 理所再生之視訊流。 . 9. 一種程式,其係使電腦執行包含如下步驟之處理者: 流再生步驟,其係將所輸入之視訊流進行再生; 元資訊讀入步驟,其係讀入前述視訊流之元資訊,而 該元資訊係與由前述流再生步驟之處理所再生之視訊流 為不同檔案; 121765.doc
    200832370 机同步讀入步驟,其係根據由前述流再生步驟之處裡 所再生之視訊流的再生資訊,與由前述流再生步驟之處 理所再生之視訊流同步控制前述元資訊讀入機構,而讀 入前述元資訊; 附加圖像貢訊提供步驟,其係由前述流同步讀入步驊 之處理所控制’且根據由前述元資訊讀入步驟之處理所 讀=之元資訊,而將附加圖像資訊提供給前述視訊流;及 口成乂驟,其係將由前述附加圖像資訊提供步驟之處 理所提供之附加圖像資訊,合成於由前述再生步驟之處 理所再生之視訊流。 10· -種程式儲存媒體,其係儲存有如請求項9之程式。 種資料儲存媒體’其係儲存有具有應由再生裝置所再 生之時刻資訊的視訊流;且 作為與前述視訊流不同檔案,而儲存有: 第1元資訊,其係對應於顯示於^時刻位置之視訊 流,而該視訊流係包含對應於第1時刻位置之時刻資 訊’而該第1時刻位置係包含於前述時刻資訊之時刻 軸;及 不&町則立置之祝抓 流,而該視訊流係包含對應於第 禾2日寸刻位置之時刻貢 訊,而該第2時刻位置係包含於义 i竹G S於則述時刻資訊之時刻 轴。 12. 一種資料結構,其係與視訊流一 的資料結構,而該視訊流係記錄 起被再生之元資訊檔案 於記錄媒體或透過網路 121765.doc 200832370 配送之具有應由再生裝置所再生之時刻資訊;且該資料 結構包含: 第1 70貧訊,其係對應於顯示於第丨時刻位置之視訊 流,而該視訊流係包含對應於第丨時刻位置之時刻資 訊,而該第丨時刻位置係包含於前述時刻資訊之時刻 轴;及 古第2元資訊,其係對應於顯示於第2時刻位置之視訊 流,而該視訊流係包含對應於第2時刻位置之時刻資 訊,而該第2時刻位置係包含於前述時刻資訊之時刻 轴0 13.如請求項〗2之資料結構,其中 前述第1元資訊與第2元資訊係設定為各自獨立之不同 檔案。 14· 一種資訊產生裝置,其包含: 時刻資訊取得機構,其係取得對應於時刻位置之時刻 =訊,而該時刻位置係包含於視訊流之前述時刻資=的 時刻軸,而該視訊流係具有應由再生裝置所再生之 資訊; ^ 元資訊取得機構,其係取得對應於所顯示之視訊流的 元資訊;及 & 、儲存機構’其係使至少!個以上之前述時刻資訊與前 述元資訊成對應關係而作為元資訊檔案予以儲存。 15·如請求項14之資訊產生裝置,其中更包含: 變換機構,其係變換前述元資訊檔案之格式形式。 121765.doc 200832370 16· 一種資訊產生方法,其包含: 一時刻資訊取得步驟,其係取得對應於相位置之時刻 資訊,而該時刻位置係包含於視職之前料刻資訊的 時刻軸’而該視訊流係具有應由再生裝置 資訊; ^ 元資訊取得步驟,其係取得對應於所顯示之視訊流的 元資訊;及 儲存步驟,其係使至少1個以上俞 、+、_+、 夕1U以上之刖述時刻資訊與前 述π貪訊成對應關係而作為元資訊檔案予以儲存。 17· -種程式,其係使電腦執行包含如下㈣之處^者. 時刻資訊取得步驟,其係取得對應於時刻位置之時叫 魏,而該時刻位置係、包含於視訊流之前述時刻資訊的 4刻軸’而該視訊流係具有應由再生裝置所再生之時刻 元貢訊取得步驟,其係取得對應於所顯 元資訊;及 儲存步驟,其係使至少1個以上 示之視訊流的 、+、一一 之Θ述時刻資訊與前 述凡育訊成對應關係而作為元資訊檔案予以儲存 18· —種程式儲存媒體,其係儲存有如請求項17之浐弋 121765.doc
TW096136475A 2006-09-29 2007-09-28 Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program TW200832370A (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006268161 2006-09-29

Publications (2)

Publication Number Publication Date
TW200832370A true TW200832370A (en) 2008-08-01
TWI368906B TWI368906B (zh) 2012-07-21

Family

ID=39268488

Family Applications (1)

Application Number Title Priority Date Filing Date
TW096136475A TW200832370A (en) 2006-09-29 2007-09-28 Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program

Country Status (4)

Country Link
US (1) US20100215334A1 (zh)
JP (1) JPWO2008041629A1 (zh)
TW (1) TW200832370A (zh)
WO (1) WO2008041629A1 (zh)

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5674465B2 (ja) * 2008-04-23 2015-02-25 レノボ・イノベーションズ・リミテッド(香港) 画像処理装置、カメラ、画像処理方法およびプログラム
US20120159327A1 (en) * 2010-12-16 2012-06-21 Microsoft Corporation Real-time interaction with entertainment content
JP5857450B2 (ja) * 2011-05-30 2016-02-10 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
JP5898501B2 (ja) 2012-01-13 2016-04-06 キヤノン株式会社 画像処理装置、撮像装置、制御方法、プログラム及び記録媒体
US10291597B2 (en) 2014-08-14 2019-05-14 Cisco Technology, Inc. Sharing resources across multiple devices in online meetings
US10034038B2 (en) * 2014-09-10 2018-07-24 Cisco Technology, Inc. Video channel selection
US10542126B2 (en) 2014-12-22 2020-01-21 Cisco Technology, Inc. Offline virtual participation in an online conference meeting
US9948786B2 (en) 2015-04-17 2018-04-17 Cisco Technology, Inc. Handling conferences using highly-distributed agents
US9877031B2 (en) * 2015-04-29 2018-01-23 Pitney Bowes Inc. System and method for multi-resolution raster data processing
US10592867B2 (en) 2016-11-11 2020-03-17 Cisco Technology, Inc. In-meeting graphical user interface display using calendar information and system
US10516707B2 (en) 2016-12-15 2019-12-24 Cisco Technology, Inc. Initiating a conferencing meeting using a conference room device
US10440073B2 (en) 2017-04-11 2019-10-08 Cisco Technology, Inc. User interface for proximity based teleconference transfer
US10375125B2 (en) 2017-04-27 2019-08-06 Cisco Technology, Inc. Automatically joining devices to a video conference
US10375474B2 (en) 2017-06-12 2019-08-06 Cisco Technology, Inc. Hybrid horn microphone
US10477148B2 (en) 2017-06-23 2019-11-12 Cisco Technology, Inc. Speaker anticipation
US10516709B2 (en) 2017-06-29 2019-12-24 Cisco Technology, Inc. Files automatically shared at conference initiation
US10706391B2 (en) 2017-07-13 2020-07-07 Cisco Technology, Inc. Protecting scheduled meeting in physical room
US10091348B1 (en) 2017-07-25 2018-10-02 Cisco Technology, Inc. Predictive model for voice/video over IP calls
JP6603962B2 (ja) * 2018-03-08 2019-11-13 株式会社光電製作所 移動体情報伝送システム
JP7282519B2 (ja) * 2018-12-28 2023-05-29 キヤノン株式会社 画像処理装置または画像処理サーバー

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4226730B2 (ja) * 1999-01-28 2009-02-18 株式会社東芝 物体領域情報生成方法及び物体領域情報生成装置並びに映像情報処理方法及び情報処理装置
KR100350792B1 (ko) * 1999-09-22 2002-09-09 엘지전자 주식회사 사용자 선호도를 반영한 사용자 프로파일 생성방법과 멀티미디어 데이타 브라우징 방법
JP2001251565A (ja) * 2000-03-03 2001-09-14 Sony Corp 受信装置及び受信装置の情報再生方法、並びに、電子機器及び電子機器の情報再生方法
CA2664732C (en) * 2002-04-12 2013-07-02 Mitsubishi Denki Kabushiki Kaisha An apparatus to edit, reproduce, deliver, search and re-generate condition settings for metadata
JP2004135256A (ja) * 2002-08-09 2004-04-30 Ricoh Co Ltd 情報ファイルのデータ構造、情報ファイル生成方法、情報ファイル生成装置、情報ファイル生成プログラム、これを記憶する記憶媒体、情報ファイル再生方法、情報ファイル再生装置、情報ファイル再生プログラム、及びこれを記憶する記憶媒体
JP3998187B2 (ja) * 2002-10-09 2007-10-24 日本放送協会 コンテンツ解説データ生成装置、その方法及びそのプログラム、並びに、コンテンツ解説データ提示装置、その方法及びそのプログラム
JP4193629B2 (ja) * 2003-07-25 2008-12-10 ソニー株式会社 画面表示装置,プログラム,および画面表示方法
JP2005151147A (ja) * 2003-11-14 2005-06-09 Toshiba Corp 再生装置及び再生方法
JP4168940B2 (ja) * 2004-01-26 2008-10-22 三菱電機株式会社 映像表示システム
JP2005223744A (ja) * 2004-02-06 2005-08-18 Epson Avasys Corp 動画マニュアル
JP2006197485A (ja) * 2005-01-17 2006-07-27 Fujitsu Ltd 動画データ管理方法および動画データ管理装置並びに動画表示装置

Also Published As

Publication number Publication date
US20100215334A1 (en) 2010-08-26
JPWO2008041629A1 (ja) 2010-02-04
WO2008041629A1 (fr) 2008-04-10
TWI368906B (zh) 2012-07-21

Similar Documents

Publication Publication Date Title
TW200832370A (en) Reproducing device and method, information generation device and method, data storage medium, data structure, program storage medium, and program
CN105765990B (zh) 通过分布式网络分布视频内容的方法、系统及计算机介质
CN102752641B (zh) 使用元数据来处理多个视频流的方法和设备
KR101339535B1 (ko) 콘텐츠 재생 장치 및 기록 매체
KR20040111363A (ko) 동화상 데이터 생성 시스템, 동화상 데이터 생성 방법 및동화상 데이터 생성 프로그램과 정보 기록 매체
JP2009529250A (ja) スライドショーの静止画像を複数のビデオフレーム画像に変換
JP2006041886A (ja) 情報処理装置および方法、記録媒体、並びにプログラム
JP2010157961A (ja) 字幕作成システム及びプログラム
US20030086682A1 (en) System and method for creating synchronized multimedia presentations
KR20090044105A (ko) 삼차원 가상 공간 콘텐츠를 이용한 영상제공시스템
JP2009071699A (ja) 動画像配信装置、動画像配信方法ならびにそのプログラム
KR20070098362A (ko) 배경 음악을 동영상에 합성시키는 음성 합성 장치 및 방법
US10984836B2 (en) Information processing apparatus, information processing method, and non-transitory computer readable medium
WO2009157152A1 (ja) 合成装置および合成方法
CN102474650B (zh) 立体观察影像的再现装置、集成电路、再现方法
JP2010010736A (ja) 映像コンテンツ再生装置
JP4727908B2 (ja) コンテンツ再生装置、コンピュータプログラム、及び記録媒体
JP2019092146A (ja) 配信サーバ、配信プログラムおよび端末
TWI246324B (en) Method and system for media production in virtual studio
KR20100117944A (ko) 멀티영상 편집장치 및 재생장치
KR20170015447A (ko) 복합 컨텐츠의 제공 방법 및 장치
Tiwary SCREENING CONJUGALITY: THE AFFECTIVE INFRASTRUCTURE OF THE MARRIAGE VIDEO
KR20050109845A (ko) 고품질 실시간 동영상 서비스 시스템
McGovern et al. Slides, Transparencies, and Videos
JP2002015339A (ja) 3次元映像編集表示装置

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees