JP2009159442A - Multimedia data reproducing system and multimedia data reproducing apparatus - Google Patents

Multimedia data reproducing system and multimedia data reproducing apparatus Download PDF

Info

Publication number
JP2009159442A
JP2009159442A JP2007337099A JP2007337099A JP2009159442A JP 2009159442 A JP2009159442 A JP 2009159442A JP 2007337099 A JP2007337099 A JP 2007337099A JP 2007337099 A JP2007337099 A JP 2007337099A JP 2009159442 A JP2009159442 A JP 2009159442A
Authority
JP
Japan
Prior art keywords
multimedia data
control information
output
data
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2007337099A
Other languages
Japanese (ja)
Inventor
Kosuke Imoji
公介 伊茂治
Yoshitada Hida
義賢 飛田
Akira Nakanishi
晃 中西
Shunichi Kawabata
俊一 川端
Shinji Kuno
真司 久野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2007337099A priority Critical patent/JP2009159442A/en
Publication of JP2009159442A publication Critical patent/JP2009159442A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a multimedia data reproducing system for dynamically controlling the operation of an external device, and to provide a multimedia data reproducing apparatus. <P>SOLUTION: The multimedia data reproducing apparatus includes: a multimedia data acquisition part 100 for acquiring multimedia data including in advance device control information for controlling the operation of an external device in a display data area according to an external device identifier for identifying the external device; an output permission information insertion part 150 for dynamically inserting output permission information indicating whether or not to output the device control information, into the display data area of the multimedia data; a synchronizing signal detection part 210 for detecting synchronizing signals; a control information extraction processing part 220 for extracting the device control information from the multimedia data on the basis of the synchronizing signals detected by the synchronizing signal detection part 210; and the external device operated according to the extracted device control information. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、マルチメディアデータ再生システム及びマルチメディアデータ再生装置に関する。   The present invention relates to a multimedia data playback system and a multimedia data playback apparatus.

従来の映像を再生して外部装置を動作させる装置として、制御信号内挿入部を有する受信側装置と、信号分解部と映像出力部とビデオオブジェクト部とを有する送信側装置とを備えるインタラクティブビデオデマンド装置が提案されている(例えば、特許文献1参照)。   As an apparatus for reproducing a conventional video and operating an external apparatus, an interactive video demand including a receiving apparatus having a control signal insertion section, and a transmitting apparatus having a signal decomposition section, a video output section, and a video object section. An apparatus has been proposed (see, for example, Patent Document 1).

特許文献1に記載のインタラクティブビデオデマンド装置は、制御信号内挿入部において映像信号に連動した制御信号が内挿されたビデオコマンド信号を、送信側装置から受信側装置へ伝送し、受信側装置の信号分解部が、ビデオコマンド信号を映像信号と制御信号とに分解し、映像信号が映像出力部において表示されると共に、制御信号がビデオオブジェクト部を介して外部装置に供給されて、外部装置を動作させることができる。
特開平08−56351号公報
The interactive video demand apparatus described in Patent Literature 1 transmits a video command signal in which a control signal linked to a video signal is inserted in a control signal insertion section from a transmission side apparatus to a reception side apparatus, and The signal decomposing unit decomposes the video command signal into a video signal and a control signal, the video signal is displayed in the video output unit, and the control signal is supplied to the external device via the video object unit. It can be operated.
Japanese Patent Application Laid-Open No. 08-56351

しかし、特許文献1に記載のインタラクティブビデオデマンド装置では、画像データに予め埋め込まれた制御信号に応じて外部装置が動作しており、外部装置の動作の変更を動的にすることができなかった。   However, in the interactive video demand apparatus described in Patent Document 1, an external apparatus is operated in accordance with a control signal embedded in image data in advance, and the change in the operation of the external apparatus cannot be made dynamic. .

したがって、本発明の目的は、外部装置の動作を動的に制御することができるマルチメディアデータ再生システム及びマルチメディアデータ再生装置を提供することにある。   Accordingly, an object of the present invention is to provide a multimedia data playback system and multimedia data playback apparatus that can dynamically control the operation of an external device.

本発明の一態様は、外部装置を識別する外部装置識別子に対応付けて外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含むマルチメディアデータを取得するマルチメディアデータ取得部と、装置制御情報の出力の可否を示す出力可否情報を、マルチメディアデータの表示用データ領域に動的に挿入する出力可否情報挿入部と、マルチメディアデータから出力可否情報を抽出して外部装置に供給することにより外部装置の動作を制御するコンバーターに、挿入された出力可否情報を含むマルチメディアデータを出力するマルチメディアデータ出力部とを備えるマルチメディアデータ再生装置を提供する。   One aspect of the present invention is a multimedia data acquisition unit that acquires multimedia data that includes in advance in a display data area device control information that controls the operation of an external device in association with an external device identifier that identifies the external device. An output enable / disable information insertion unit for dynamically inserting output enable / disable information indicating whether or not to output the device control information into a display data area of the multimedia data; and extracting the output enable / disable information from the multimedia data to the external device Provided is a multimedia data playback device comprising a converter that controls the operation of an external device by supplying a multimedia data output unit that outputs multimedia data including inserted output enable / disable information.

また、本発明の他の態様は、外部装置を識別する外部装置識別子に対応付けて外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含むマルチメディアデータを取得するマルチメディアデータ取得部と、装置制御情報の出力の可否を示す出力可否情報を、マルチメディアデータの表示用データ領域に動的に挿入する出力可否情報挿入部と、同期信号を検出する同期信号検出部と、同期信号検出部が検出した同期信号に基づいて、マルチメディアデータから装置制御情報を抽出する制御情報抽出処理部と、抽出された装置制御情報に応じて動作する外部装置とを備えるマルチメディアデータ再生システムを提供する。   According to another aspect of the present invention, there is provided multimedia data for acquiring multimedia data preliminarily including device control information for controlling the operation of an external device in association with an external device identifier for identifying the external device in a display data area. An acquisition unit, an output propriety information indicating whether the device control information can be output, an output propriety information insertion unit that dynamically inserts into the display data area of the multimedia data, a synchronization signal detection unit that detects a synchronization signal, Multimedia data reproduction comprising: a control information extraction processing unit that extracts device control information from multimedia data based on the synchronization signal detected by the synchronization signal detection unit; and an external device that operates in accordance with the extracted device control information Provide a system.

本発明に係るマルチメディアデータ再生システム及びマルチメディアデータ再生装置によれば、マルチメディアデータに予め含まれる外部装置の動作を制御する装置制御情報の使用の有無を動的に選択できるので、外部装置の動作を動的に制御することができる。   According to the multimedia data playback system and the multimedia data playback apparatus according to the present invention, it is possible to dynamically select whether or not to use the device control information for controlling the operation of the external device included in advance in the multimedia data. Can be controlled dynamically.

[第1の実施の形態]
図1は、本発明の第1の実施の形態に係るマルチメディアデータ再生システムの概要を示す。図1において、S1〜S17bは機器間を伝送されるデータを示している。
[First Embodiment]
FIG. 1 shows an outline of a multimedia data reproduction system according to the first embodiment of the present invention. In FIG. 1, S1 to S17b indicate data transmitted between devices.

(マルチメディア再生システム1の概要)
第1の実施の形態に係るマルチメディアデータ再生システム1は、ロボット、スピーカー、及び香り供給装置等のアミューズメント機器52、並びに照明装置としての照明54、空調装置等の外部装置の動作を制御する装置制御情報を所定の領域に予め含むマルチメディアデータを取得する再生装置10と、再生装置10が取得したマルチメディアデータから装置制御情報を動的に抽出して所定の外部装置に供給するコンバーター20と、再生装置10が取得したマルチメディアデータ中の音データを音声再生装置及び/又は音声再生装置を有する表示装置40に供給するアンプ30と、コンバーター20から受け取った装置制御情報に応じて所定の動作を実行するアミューズメント機器52又は照明54等の複数の外部装置とを備える。
(Outline of multimedia playback system 1)
The multimedia data reproduction system 1 according to the first embodiment is a device that controls operations of an amusement device 52 such as a robot, a speaker, and a scent supply device, and an external device such as a lighting device 54 and an air conditioner as a lighting device A playback device 10 that acquires multimedia data that includes control information in a predetermined area in advance, and a converter 20 that dynamically extracts device control information from the multimedia data acquired by the playback device 10 and supplies the device control information to a predetermined external device; An amplifier 30 that supplies sound data in the multimedia data acquired by the playback device 10 to the sound playback device and / or the display device 40 having the sound playback device, and a predetermined operation according to the device control information received from the converter 20 A plurality of external devices such as an amusement device 52 or a lighting 54.

第1の実施の形態に係るマルチメディアデータは、グラフィックデータ、画像データ(動画データ及び/又は静止画データ)、音データ(例えば、ドルビーデジタル又はSPDIF)、テキストデータ、及びその他所定の制御情報(一例として、HD DVD規格に準拠した制御情報)を含む。また、マルチメディアデータは、複数の表示プレーンにより構成することができる。一例として、マルチメディアデータは、ビデオ画像(動画データ及び音データを含む)用の表示プレーンと、ピクチャーインピクチャー用のコメンタリ表示プレーンと、テキストデータ用の字幕表示プレーンと、装置制御情報を含むことができるグラフィックス表示プレーンと、カーソル表示用の表示プレーンとを有する。   The multimedia data according to the first embodiment includes graphic data, image data (moving image data and / or still image data), sound data (for example, Dolby Digital or SPDIF), text data, and other predetermined control information ( As an example, control information conforming to the HD DVD standard) is included. Multimedia data can be composed of a plurality of display planes. As an example, the multimedia data includes a display plane for video images (including moving image data and sound data), a commentary display plane for picture-in-picture, a caption display plane for text data, and device control information. A graphics display plane that can display the image and a display plane for displaying a cursor.

そして、マルチメディアデータは、CD−ROM、DVD−ROM、HD DVD等の光ディスク等の蓄積メディアとしての記録媒体60、リムーバブルハードディスク等の磁気記録媒体又は半導体記録媒体等の記録媒体62、及び/又はインターネット、LAN、WAN、デジタル放送網等のネットワーク70を介して再生装置10と通信可能に接続するサーバー64に格納される。   The multimedia data includes a recording medium 60 as a storage medium such as an optical disk such as a CD-ROM, DVD-ROM, and HD DVD, a magnetic recording medium such as a removable hard disk, or a recording medium 62 such as a semiconductor recording medium, and / or The data is stored in a server 64 that is communicably connected to the playback apparatus 10 via a network 70 such as the Internet, LAN, WAN, or digital broadcasting network.

再生装置10は、記録媒体60、記録媒体62、又はサーバー64からマルチメディアデータを受け取る(S1、S3、S5)。再生装置10は、受け取ったマルチメディアデータから外部装置の動作を制御する装置制御情報をコンバーター20が受け取り可能に供給するか否かを動的に決定すると共に、決定結果を動的にマルチメディアデータに挿入する。そして、再生装置10は、決定結果を挿入したマルチメディアデータをコンバーター20に供給する(S7)。なお、再生装置10は、マルチメディアデータに含まれている音データをアンプ30に供給することもできる(S15)。   The playback apparatus 10 receives multimedia data from the recording medium 60, the recording medium 62, or the server 64 (S1, S3, S5). The playback apparatus 10 dynamically determines whether or not the converter 20 can supply the apparatus control information for controlling the operation of the external apparatus from the received multimedia data so as to be receivable, and dynamically determines the result of the determination. Insert into. Then, the playback device 10 supplies the multimedia data into which the determination result is inserted to the converter 20 (S7). Note that the playback device 10 can also supply sound data included in the multimedia data to the amplifier 30 (S15).

一例として、再生装置10は、ユーザ等の指示を含む再生装置10の外部から再生装置10に供給される指示に応じて、装置制御情報をコンバーター20に読み取り可能に供給するか否かを決定する。そして、装置制御情報をコンバーター20に読み取り可能に供給するか否かの決定結果を、コンバーター20に供給するマルチメディアデータの所定の領域に動的に挿入する。ここで、「動的」とは、一例として、再生装置10が所定のマルチメディアデータを再生(又は放映)中に、当該マルチメディアの再生(又は放映)の途中において当該マルチメディアデータの再生(又は放映)の進行を妨げないことを指す。   As an example, the playback device 10 determines whether to supply device control information to the converter 20 in a readable manner in accordance with an instruction supplied to the playback device 10 from the outside of the playback device 10 including an instruction from a user or the like. . Then, the determination result as to whether or not the device control information is supplied to the converter 20 in a readable manner is dynamically inserted into a predetermined area of the multimedia data supplied to the converter 20. Here, “dynamic” means, for example, that the playback device 10 is playing back (or airing) predetermined multimedia data, while the multimedia data is being played back (or aired). (Or televising) refers to not hindering the progress.

例えば、再生装置10がマルチメディアデータを再生中において、装置制御情報をコンバーター20に読み取り可能に供給する旨の決定結果をマルチメディアデータに挿入する場合、又は装置制御情報をコンバーター20に読み取り可能に供給しない旨の決定結果をマルチメディアデータに挿入する場合、再生装置10は、再生中のマルチメディアデータを停止及び/又は巻き戻し等を実施せずに、決定結果をマルチメディアデータに挿入する。   For example, when the playback device 10 is playing back multimedia data, the determination result that the device control information is supplied to the converter 20 in a readable manner is inserted into the multimedia data, or the device control information can be read into the converter 20. When the determination result indicating that the supply is not performed is inserted into the multimedia data, the playback apparatus 10 inserts the determination result into the multimedia data without stopping and / or rewinding the multimedia data being played back.

コンバーター20は、再生装置10から受け取ったマルチメディアデータに含まれる決定結果が装置制御情報を読み取り可能に供給する旨を示す場合、マルチメディアデータから装置制御情報を抽出する。一方、コンバーター20は、決定結果が装置制御情報を読み取り可能に供給しない旨を示す場合、装置制御情報を抽出しない。コンバーター20は、装置制御情報を抽出した場合、抽出した装置制御情報を所定の外部装置に供給する(S11、S13)。外部装置(例えば、人形、アクチュエータを含むロボット等のアミューズメント機器52、照明54等)は、受け取った装置制御情報に基づいて、所定の動作を実行する。   When the determination result included in the multimedia data received from the playback device 10 indicates that the device control information is supplied in a readable manner, the converter 20 extracts the device control information from the multimedia data. On the other hand, when the determination result indicates that the device control information is not supplied in a readable manner, the converter 20 does not extract the device control information. When the device control information is extracted, the converter 20 supplies the extracted device control information to a predetermined external device (S11, S13). An external device (for example, an amusement device 52 such as a doll or a robot including an actuator, an illumination 54, etc.) executes a predetermined operation based on the received device control information.

なお、コンバーター20は、装置制御情報を抽出しない場合であっても、マルチメディアデータをHDTV等の表示装置40に供給する(S9)。また、アンプ30は、音データを表示装置40に供給して音データを表示装置40から出力させる(S17a)。アンプ30は、音データをコンバーター20に供給して(S17b)、コンバーター20が音データを表示装置40に供給してもよい。   Note that the converter 20 supplies multimedia data to the display device 40 such as an HDTV even when the device control information is not extracted (S9). In addition, the amplifier 30 supplies sound data to the display device 40 and outputs the sound data from the display device 40 (S17a). The amplifier 30 may supply sound data to the converter 20 (S17b), and the converter 20 may supply the sound data to the display device 40.

(再生装置10の構成)
図2は、本発明の第1の実施の形態に係る再生装置の機能構成の一例を示す。
(Configuration of playback apparatus 10)
FIG. 2 shows an example of a functional configuration of the playback apparatus according to the first embodiment of the present invention.

第1の実施の形態に係る再生装置10は、マルチメディアデータを取得するマルチメディアデータ取得部100と、ユーザ等の指示又は外部からの指示を入力する指示入力部130と、指示入力部130が入力した指示に応じて装置制御情報をコンバーター20に読み取り可能に供給するか否かを決定する出力可否決定部140と、出力可否決定部140の決定に応じてマルチメディアデータに決定結果を挿入する出力可否情報挿入部150と、マルチメディアデータ取得部100が取得したマルチメディアデータに対して所定のデータ処理を施すデータ処理部110と、決定結果が挿入されたマルチメディアデータをコンバーター20に供給するマルチメディアデータ出力部120とを有する。   The playback apparatus 10 according to the first embodiment includes a multimedia data acquisition unit 100 that acquires multimedia data, an instruction input unit 130 that inputs an instruction from a user or the like, or an external instruction, and an instruction input unit 130. An output permission determination unit 140 that determines whether or not to supply device control information to the converter 20 in a readable manner according to an input instruction, and a determination result is inserted into the multimedia data according to the determination of the output permission determination unit 140 An output permission information insertion unit 150, a data processing unit 110 that performs predetermined data processing on the multimedia data acquired by the multimedia data acquisition unit 100, and the multimedia data into which the determination result is inserted are supplied to the converter 20. And a multimedia data output unit 120.

マルチメディアデータ取得部100は、記録媒体60、記録媒体62、又はサーバー64からマルチメディアデータを取得する。ここで、記録媒体60は、一例として、HD DVD規格に準拠した光ディスク記録媒体を用いることができる。この場合、マルチメディアデータもHD DVD規格に準拠したデータ構成を有する。マルチメディアデータ取得部100は、取得したマルチメディアデータをデータ処理部110に供給する。   The multimedia data acquisition unit 100 acquires multimedia data from the recording medium 60, the recording medium 62, or the server 64. Here, as an example, the recording medium 60 may be an optical disc recording medium that conforms to the HD DVD standard. In this case, the multimedia data also has a data configuration conforming to the HD DVD standard. The multimedia data acquisition unit 100 supplies the acquired multimedia data to the data processing unit 110.

なお、本実施の形態に係るマルチメディアデータは、外部装置を一意に識別する外部装置識別子としての外部装置IDに対応付けて、当該外部装置IDで識別される外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含む。そして、装置制御情報は、例えば、ロボット等のアミューズメント機器52に所定のタイミングにおいて所定の動作を実行させる情報、照明54に点滅等の所定の動作を実行させる情報、香り供給装置に所定のタイミングにおいて所定の種類の香りを放出させる動作を実行させる情報等を示す。   Note that the multimedia data according to this embodiment is associated with an external device ID as an external device identifier that uniquely identifies the external device, and controls the operation of the external device identified by the external device ID. Information is previously included in the display data area. The device control information includes, for example, information that causes the amusement device 52 such as a robot to execute a predetermined operation at a predetermined timing, information that causes the illumination 54 to execute a predetermined operation such as blinking, and the scent supply device at a predetermined timing. The information etc. which perform the operation | movement which discharge | releases a predetermined | prescribed kind of fragrance are shown.

装置制御情報は、例えば、映像信号としてマルチメディアデータに記録することができる。また、装置制御情報は、音声信号(例えば、ドルビーデジタル又はSPDIF)としてマルチメディアデータに記録することもできる。   The device control information can be recorded in multimedia data as a video signal, for example. The device control information can also be recorded in the multimedia data as an audio signal (for example, Dolby Digital or SPDIF).

指示入力部130は、装置制御情報を、コンバーター20に読み取り可能に供給するか否かを示す指示を入力する。指示入力部130は、一例として、赤外線通信により動作するリモートコントローラー等の外部の入力指示装置(図示しない)から送信されるユーザにより入力された指示を受信する。入力指示装置に入力される指示は、外部装置を動作させるか否かを示す情報であり、例えば、外部装置の動作を実行させる情報、又は外部装置の動作を停止させる情報を示す決定結果である。指示入力部130は、入力された指示としての決定結果を出力可否決定部に供給する。なお、入力指示装置は、携帯電話等の携帯情報端末を用いることもできる。   The instruction input unit 130 inputs an instruction indicating whether or not to supply the device control information to the converter 20 so as to be readable. For example, the instruction input unit 130 receives an instruction input by a user transmitted from an external input instruction device (not shown) such as a remote controller that operates by infrared communication. The instruction input to the input instruction device is information indicating whether or not to operate the external device, for example, a determination result indicating information for executing the operation of the external device or information for stopping the operation of the external device. . The instruction input unit 130 supplies the determination result as the input instruction to the output permission determination unit. Note that the input instruction device may be a portable information terminal such as a mobile phone.

出力可否決定部140は、決定結果を解析して、装置制御情報をコンバーター20に読み取り可能に出力するか否かを決定する。一例として、出力可否決定部140は、ユーザが指示入力部130を介して入力した指示(指示データ)が、外部装置の動作を実行させる旨を示す場合、装置制御情報をコンバーター20に読み取り可能に出力する旨を決定する。一方、出力可否決定部140は、ユーザが入力した指示が、外部装置の動作を停止させる旨を示す場合、装置制御情報をコンバーター20に読み取り可能に出力しない旨を決定する。そして、出力可否決定部140は、装置制御情報の出力の可否を示す出力可否情報を出力可否情報挿入部150に供給する。   The output permission determination unit 140 analyzes the determination result and determines whether or not to output the device control information to the converter 20 so as to be readable. As an example, when the instruction (instruction data) input by the user via the instruction input unit 130 indicates that the operation of the external device is to be executed, the output permission determination unit 140 can read the device control information into the converter 20. Decide to output. On the other hand, when the instruction input by the user indicates that the operation of the external device is to be stopped, the output permission determination unit 140 determines not to output the device control information to the converter 20 so as to be readable. Then, the output propriety determination unit 140 supplies the output propriety information insertion unit 150 with output propriety information indicating whether the apparatus control information can be output.

出力可否情報挿入部150は、出力可否決定部140から受け取った出力可否情報を、マルチメディアデータの表示用データ領域(一例として、マルチメディアデータが映像データの場合、可視領域)に動的に挿入する。具体的に、出力可否情報挿入部150は、データ処理部110に出力可否情報を供給して、データ処理部110を制御して、マルチメディアデータの所定の領域に出力可否情報を挿入させる。より具体的に、出力可否情報挿入部150は、出力可否決定部140の決定に応じて決まる出力可否情報を、マルチメディアデータの表示用データ領域に挿入する。   The output availability information insertion unit 150 dynamically inserts the output availability information received from the output availability determination unit 140 into a display data area of multimedia data (for example, a visible area when the multimedia data is video data). To do. Specifically, the output availability information insertion unit 150 supplies the output availability information to the data processing unit 110 and controls the data processing unit 110 to insert the output availability information into a predetermined area of the multimedia data. More specifically, the output propriety information insertion unit 150 inserts output propriety information determined according to the determination of the output propriety determination unit 140 into the display data area of the multimedia data.

一例として、出力可否情報挿入部150は、マルチメディアデータの表示用データ領域の下端、又は左端に出力可否情報を挿入する。更に、出力可否情報挿入部150は、出力可否情報を、ユーザの入力結果に応じて動的に生成して表示用データ領域に挿入することもできる。また、出力可否情報挿入部150は、装置制御情報を、タイトルタイムラインに同期して動的に生成して、表示用データ領域に挿入することもできる。   As an example, the output propriety information insertion unit 150 inserts output propriety information at the lower end or the left end of the multimedia data display data area. Further, the output availability information insertion unit 150 can dynamically generate output availability information according to the user input result and insert it into the display data area. Further, the output permission / inhibition information insertion unit 150 can dynamically generate the device control information in synchronization with the title timeline and insert it into the display data area.

具体的に、マルチメディアデータは、複数のコンテンツデータ(例えば、音楽データ、映像データ、字幕データ等)を含んで構成される。タイトルタイムラインは、各コンテンツデータが、当該コンテンツデータを含むマルチメディアデータの再生開始からの時間(例えば、1/60秒毎)で規定される時間単位である。タイトルタイムラインは、例えば、装置内の基準タイマーの時間を利用して決定される。なお、タイマーは、マルチメディアデータの巻き戻し、早送り、及び/又はスキップ等の操作に応じて、再びマルチメディアデータの再生が開始するときに、所定の時間にセットされる。   Specifically, the multimedia data includes a plurality of content data (for example, music data, video data, caption data, etc.). The title timeline is a time unit in which each content data is defined by a time (for example, every 1/60 seconds) from the start of reproduction of multimedia data including the content data. The title timeline is determined using, for example, the time of a reference timer in the apparatus. Note that the timer is set to a predetermined time when the reproduction of multimedia data starts again in response to operations such as rewinding, fast-forwarding, and / or skipping of the multimedia data.

本実施の形態において、マルチメディアデータは複数のタイトルタイムを含み、これら複数のタイトルタイム毎に、所定の装置制御情報が対応付けられている。ここで、再生装置10は、マルチメディアデータを識別するマルチメディアデータ識別子に対応付けて、このマルチメディアデータに含まれる複数のタイトルタイム毎に所定の装置制御情報を対応付けて格納するタイトルタイム格納部を更に有することができる。   In the present embodiment, the multimedia data includes a plurality of title times, and predetermined device control information is associated with each of the plurality of title times. Here, the playback device 10 associates a multimedia data identifier for identifying multimedia data with a title time storage that stores predetermined device control information in association with each of a plurality of title times included in the multimedia data. It can have a part.

具体的に、タイトルタイム格納部は、マルチメディアデータ識別子に対応付けて、このマルチメディアデータ識別子で識別されるマルチメディアデータの複数のタイトルタイムを格納する。更に、タイトルタイム格納部は、複数のタイトルタイムのそれぞれに対応付けて、所定の装置制御情報を格納する。そして、出力可否情報挿入部150は、マルチメディアデータの再生に伴い、このマルチメディアデータのマルチメディアデータ識別子に対応付けられているタイトルタイムを、タイトルタイム格納部から取得する。続いて、出力可否情報挿入部150は、取得したタイトルタイムに対応付けてタイトルタイム格納部が格納している装置制御情報を抽出すると共に、取得したタイトルタイムに同期するタイミングで、装置制御情報をマルチメディアデータに動的に挿入することができる。   Specifically, the title time storage unit stores a plurality of title times of multimedia data identified by the multimedia data identifier in association with the multimedia data identifier. Further, the title time storage unit stores predetermined device control information in association with each of a plurality of title times. Then, the output availability information insertion unit 150 acquires the title time associated with the multimedia data identifier of the multimedia data from the title time storage unit with the reproduction of the multimedia data. Subsequently, the output availability information insertion unit 150 extracts the device control information stored in the title time storage unit in association with the acquired title time, and at the same time synchronizes with the acquired title time. It can be dynamically inserted into multimedia data.

なお、タイトルタイム格納部がマルチメディアデータ識別子に対応付けて格納している複数のタイトルタイム及び複数の装置制御情報は、例えば、マルチメディアデータ取得部100が外部(記録媒体60、記録媒体62、又はサーバー64)からマルチメディアデータ識別子及びタイトルタイムに対応付けて取得した装置制御情報により更新することができる。   The title time storage unit stores a plurality of title times and a plurality of device control information stored in association with the multimedia data identifier. For example, the multimedia data acquisition unit 100 uses an external (recording medium 60, recording medium 62, Alternatively, it can be updated by the device control information acquired from the server 64) in association with the multimedia data identifier and the title time.

データ処理部110は、マルチメディアデータ取得部100から受け取ったマルチメディアデータにデコード処理等を施す。そして、データ処理部110は、複数の表示プレーンを重畳すると共に、出力可否情報挿入部150の制御に応じて、表示用データ領域に出力可否情報を動的に挿入する。データ処理部110は、出力可否情報を含むマルチメディアデータをマルチメディアデータ出力部120に供給する。マルチメディアデータ出力部120は、出力可否情報を含むマルチメディアデータをコンバーター20及び/又はアンプ30に供給する。   The data processing unit 110 performs a decoding process or the like on the multimedia data received from the multimedia data acquisition unit 100. Then, the data processing unit 110 superimposes a plurality of display planes, and dynamically inserts output enable / disable information into the display data area under the control of the output enable / disable information inserting unit 150. The data processing unit 110 supplies multimedia data including output enable / disable information to the multimedia data output unit 120. The multimedia data output unit 120 supplies multimedia data including output availability information to the converter 20 and / or the amplifier 30.

なお、本実施の形態に係る再生装置10は、一例として、HD DVD規格に準拠したHD DVDプレーヤーである。また、再生装置10は、HD DVDプレーヤーだけではなく、CD−ROM再生装置、DVD−ROM再生装置、デジタルビデオプレーヤー等の記録媒体再生装置、又は、家庭用ゲーム機、携帯電話端末若しくはPersonal Digital Assistance(PDA)等の携帯情報端末により構成することもできる。   Note that the playback apparatus 10 according to the present embodiment is, for example, an HD DVD player that conforms to the HD DVD standard. The playback device 10 is not only an HD DVD player, but also a recording medium playback device such as a CD-ROM playback device, a DVD-ROM playback device, a digital video player, or a home game machine, a mobile phone terminal, or a personal digital assistance. It can also be configured by a portable information terminal such as (PDA).

(コンバーター20の構成)
図3は、本発明の第1の実施の形態に係るコンバーターの機能構成の一例を示す。
(Configuration of converter 20)
FIG. 3 shows an example of the functional configuration of the converter according to the first embodiment of the present invention.

第1の実施の形態に係るコンバーター20は、出力可否情報を含むマルチメディアデータを取得するデータ取得部200と、同期信号を検出する同期信号検出部210と、同期信号に基づいてマルチメディアデータから装置制御情報を抽出する制御情報抽出処理部220と、制御情報抽出処理部220が抽出した装置制御情報を格納する制御情報格納部230と、制御情報格納部230が格納している装置制御情報を解析する制御情報解析部240と、制御情報解析部240の解析結果に応じて、装置制御情報の外部装置識別子に対応する外部装置に装置制御情報を出力する装置制御情報出力部250と、マルチメディアデータを表示装置40及び/又はアミューズメント機器52に出力するデータ出力部260とを有する。   The converter 20 according to the first embodiment includes a data acquisition unit 200 that acquires multimedia data including output availability information, a synchronization signal detection unit 210 that detects a synchronization signal, and multimedia data based on the synchronization signal. The control information extraction processing unit 220 that extracts the device control information, the control information storage unit 230 that stores the device control information extracted by the control information extraction processing unit 220, and the device control information that the control information storage unit 230 stores A control information analysis unit 240 to analyze, a device control information output unit 250 that outputs device control information to an external device corresponding to an external device identifier of the device control information according to an analysis result of the control information analysis unit 240, and multimedia And a data output unit 260 that outputs data to the display device 40 and / or the amusement device 52.

データ取得部200は、再生装置10のマルチメディアデータ出力部120が出力した出力可否情報を含むマルチメディアデータを取得する。そして、データ取得部200は、取得したマルチメディアデータを、制御情報抽出処理部220に供給する。   The data acquisition unit 200 acquires multimedia data including output permission information output by the multimedia data output unit 120 of the playback device 10. Then, the data acquisition unit 200 supplies the acquired multimedia data to the control information extraction processing unit 220.

同期信号検出部210は、コンポーネント入力端子(図示しない)からの同期信号の有無を検出する。同期信号検出部210は、一例として、マルチメディアデータの下端を表示する水平同期信号を検出する。また、同期信号検出部210は、コンポーネント映像信号の輝度成分又はHDMIの映像信号に基づいて同期信号を検出することもできる。更に、同期信号検出部210は、出力解像度がSD解像度である場合、コンポジット映像信号に基づいて同期信号を検出することもできる。同期信号検出部210は、検出した同期信号を制御情報抽出処理部220に供給する。   The synchronization signal detector 210 detects the presence or absence of a synchronization signal from a component input terminal (not shown). For example, the synchronization signal detection unit 210 detects a horizontal synchronization signal that displays the lower end of the multimedia data. The synchronization signal detection unit 210 can also detect the synchronization signal based on the luminance component of the component video signal or the HDMI video signal. Furthermore, when the output resolution is the SD resolution, the synchronization signal detection unit 210 can also detect the synchronization signal based on the composite video signal. The synchronization signal detection unit 210 supplies the detected synchronization signal to the control information extraction processing unit 220.

制御情報抽出処理部220は、装置制御情報をコンバーター20に読み取り可能に出力する旨を示す出力可否情報を受け取った場合、同期信号検出部210から受け取った同期信号に基づいて、マルチメディアデータの所定の領域に含まれている装置制御情報を抽出する。一例として、制御情報抽出処理部220は、水平同期信号に応じて、装置制御情報を抽出する。また、制御情報抽出処理部220は、出力可否情報が挿入されたマルチメディアデータから装置制御情報を抽出した後、装置制御情報が含まれている表示用データの領域を単色データ(例えば、白色又は黒色、若しくは最大の輝度成分又は最小の輝度成分)に置き換えることもできる。これにより、マルチメディアデータがアンダースキャンされた場合において、表示装置40等に表示されるマルチメディアデータのちらつき等を抑制できる。なお、制御情報抽出処理部220は、マルチメディアデータをアンダースキャンしない場合には、表示用データの領域を単色データ等に置き換えずにマルチメディアデータをデータ出力部260に供給することもできる。   When the control information extraction processing unit 220 receives the output permission information indicating that the device control information is output to the converter 20 so as to be readable, the control information extraction processing unit 220 determines the predetermined multimedia data based on the synchronization signal received from the synchronization signal detection unit 210. The device control information included in the area is extracted. As an example, the control information extraction processing unit 220 extracts device control information in accordance with the horizontal synchronization signal. Further, the control information extraction processing unit 220 extracts the device control information from the multimedia data in which the output permission information is inserted, and then converts the display data area including the device control information into monochrome data (for example, white or Black, or the maximum luminance component or the minimum luminance component). Thereby, when the multimedia data is under-scanned, flickering of the multimedia data displayed on the display device 40 or the like can be suppressed. If the multimedia data is not under-scanned, the control information extraction processing unit 220 can supply the multimedia data to the data output unit 260 without replacing the display data area with single-color data or the like.

なお、制御情報抽出処理部220は、表示用データ領域の装置制御情報が含まれている領域、又は当該領域から所定の範囲内の走査線上の輝度又は色を抽出して、抽出した輝度又は色を用いて装置制御情報が含まれている表示用データの領域を単色データ又は抽出した色に置き換えることもできる。制御情報抽出処理部220は、所定の処理を施したマルチメディアデータ又は所定の処理を施していないマルチメディアデータをデータ出力部260に供給する。また、制御情報抽出処理部220は、抽出した装置制御情報が制御対象としている外部装置の外部装置IDに対応付けて、当該装置制御情報を制御情報格納部230に格納する。   The control information extraction processing unit 220 extracts the luminance or color on the scanning data area within the predetermined range from the area including the device control information of the display data area, or the extracted area. The display data area including the device control information can be replaced with single color data or extracted color. The control information extraction processing unit 220 supplies multimedia data that has been subjected to predetermined processing or multimedia data that has not been subjected to predetermined processing to the data output unit 260. Also, the control information extraction processing unit 220 stores the device control information in the control information storage unit 230 in association with the external device ID of the external device that is the control target of the extracted device control information.

制御情報格納部230は、装置制御情報を外部装置IDに対応付けて格納する。制御情報解析部240は、制御情報格納部230が格納している装置制御情報を解析して、装置制御情報出力部250に供給する。具体的に、制御情報解析部240は、制御情報を解析して、当該装置制御情報に対応する外部装置IDで識別される外部装置(例えば、表示装置40、アミューズメント機器52、照明54等)を識別すると共に、この外部装置IDに対応付けて制御情報格納部230が格納している装置制御情報を取得する。そして、制御情報解析部240は、取得した装置制御情報を装置制御情報出力部250から外部装置IDで識別した外部装置に出力させる。装置制御情報出力部250は、複数の外部装置のそれぞれに装置制御情報を出力する。   The control information storage unit 230 stores the device control information in association with the external device ID. The control information analysis unit 240 analyzes the device control information stored in the control information storage unit 230 and supplies the device control information to the device control information output unit 250. Specifically, the control information analysis unit 240 analyzes the control information and identifies an external device (for example, the display device 40, the amusement device 52, the illumination 54, etc.) identified by the external device ID corresponding to the device control information. At the same time, the device control information stored in the control information storage unit 230 is acquired in association with the external device ID. Then, the control information analysis unit 240 outputs the acquired device control information from the device control information output unit 250 to the external device identified by the external device ID. The device control information output unit 250 outputs device control information to each of a plurality of external devices.

なお、装置制御情報出力部250は、照明制御用信号を出力するDMX信号出力部としての機能を有する。すなわち、マルチメディアデータには、照明54の動作を制御する装置制御情報として、DMX信号が含まれる。DMX信号は、例えば、照明54の調光出力信号を含む。係る場合において、装置制御情報出力部250は、複数の外部装置IDのそれぞれに対応する複数の外部装置のそれぞれに、複数の外部装置のそれぞれ用の装置制御情報を出力する。例えば、装置制御情報出力部250は、ロボット等のアミューズメント機器52にはアミューズメント機器用の装置制御情報を出力すると同時に、照明54にはDMX信号を出力する。   The device control information output unit 250 has a function as a DMX signal output unit that outputs an illumination control signal. That is, the multimedia data includes a DMX signal as device control information for controlling the operation of the illumination 54. The DMX signal includes a dimming output signal of the illumination 54, for example. In such a case, the device control information output unit 250 outputs device control information for each of the plurality of external devices to each of the plurality of external devices corresponding to each of the plurality of external device IDs. For example, the device control information output unit 250 outputs device control information for an amusement device to the amusement device 52 such as a robot and simultaneously outputs a DMX signal to the illumination 54.

また、マルチメディア再生システム1は、外部装置として、MIDI規格に準拠する電子楽器を含む。係る場合において、マルチメディアデータには、電子楽器の動作を制御する装置制御情報が含まれる。そして、係る場合、装置制御情報出力部250は、MIDI信号出力部としての機能を有する。   The multimedia playback system 1 includes an electronic musical instrument that conforms to the MIDI standard as an external device. In such a case, the multimedia data includes device control information for controlling the operation of the electronic musical instrument. In such a case, the device control information output unit 250 has a function as a MIDI signal output unit.

データ出力部260は、表示装置40及び/又はアミューズメント機器52にマルチメディアデータを出力する。そして、表示装置40はマルチメディアデータをユーザに視覚及び/又は視聴可能に出力する。また、アミューズメント機器52は、音声再生部(例えば、スピーカー)を有する場合、受け取ったマルチメディアデータに含まれる音データをユーザに視聴可能に出力する。   The data output unit 260 outputs multimedia data to the display device 40 and / or the amusement device 52. Then, the display device 40 outputs the multimedia data to the user so as to be visually and / or viewable. Further, when the amusement device 52 has an audio reproduction unit (for example, a speaker), the amusement device 52 outputs the sound data included in the received multimedia data so that the user can view it.

(マルチメディアデータの一例)
図4は、本発明の第1の実施の形態に係るマルチメディアデータの構成の一例を示す。
(Example of multimedia data)
FIG. 4 shows an example of the structure of multimedia data according to the first embodiment of the present invention.

第1の実施の形態に係るマルチメディアデータは、一例としてHD DVD規格に対応する映像データである。そして、映像データとしてのマルチメディアデータは、一例として、ビデオ画像(動画データ及び音データを含む)用の表示プレーン610と、ピクチャーインピクチャー用のコメンタリ表示プレーン612と、テキストデータ用の字幕用の表示プレーン614と、装置制御情報(例えば、装置制御情報800)を含むことができるグラフィックス表示プレーン616と、カーソル表示用の表示プレーン(図示しない)とを有する。すなわち、本実施の形態に係る画像600は、アドバンスドコンテンツに対応する映像データである。   The multimedia data according to the first embodiment is, for example, video data corresponding to the HD DVD standard. For example, the multimedia data as video data includes a display plane 610 for video images (including moving image data and sound data), a commentary display plane 612 for picture-in-picture, and a subtitle for text data. It includes a display plane 614, a graphics display plane 616 that can include device control information (for example, device control information 800), and a cursor display display plane (not shown). That is, the image 600 according to the present embodiment is video data corresponding to advanced content.

そして、再生装置10のデータ処理部110は、表示プレーン610と表示プレーン612と表示プレーン614とメタデータとしての表示プレーン616とをそれぞれ重畳して画像600を生成する。そして、出力可否情報挿入部150は、画像600に対して出力可否情報を動的に挿入する。出力可否情報挿入部150は、一例として、所定のプログラム処理により表示プレーン616に出力可否情報を描画することにより、出力可否情報をフレーム単位で挿入することができる。   Then, the data processing unit 110 of the playback device 10 generates the image 600 by superimposing the display plane 610, the display plane 612, the display plane 614, and the display plane 616 as metadata. The output availability information insertion unit 150 dynamically inserts output availability information into the image 600. For example, the output availability information insertion unit 150 can insert the output availability information in units of frames by drawing the output availability information on the display plane 616 by a predetermined program process.

したがって、本実施の形態においては、出力可否情報挿入部150が、メタデータを利用して装置制御情報の出力可否情報を動的にマルチメディアデータに挿入できるので、マルチメディアデータを転送するインターフェースがHD DVD規格によらないコンバーター20であっても、マルチメディアデータのデータ転送を定義できる。また、出力可否情報挿入部150は、メタデータを利用して出力可否情報を動的にマルチメディアデータに挿入するので、コンバーター20が複数の外部装置を連動して制御する場合でもMIDIケーブルのように最大チャネル数を考慮することを要せず、同時制御を容易に実現できる。   Therefore, in the present embodiment, the output permission information inserting unit 150 can dynamically insert the output permission information of the device control information into the multimedia data using the metadata, so that an interface for transferring the multimedia data is provided. Even the converter 20 not based on the HD DVD standard can define data transfer of multimedia data. Further, since the output permission information insertion unit 150 dynamically inserts the output permission information into the multimedia data using the metadata, even if the converter 20 controls a plurality of external devices in conjunction with each other, it is like a MIDI cable. Therefore, simultaneous control can be easily realized without considering the maximum number of channels.

(マルチメディアデータの他の例)
図5(a)は、本発明の第1の実施の形態の変形例に係るマルチメディアデータの構成の一例を示し、(b)は、第1の実施の形態の変形例に係るストリームの構成を示す。
(Other examples of multimedia data)
FIG. 5A shows an example of the configuration of multimedia data according to the modification of the first embodiment of the present invention, and FIG. 5B shows the configuration of the stream according to the modification of the first embodiment. Indicates.

図5(a)を参照すると、第1の実施の形態の変形例に係るマルチメディアデータの構成は、一例として、DVD規格に対応する映像データであって、いわゆるスタンダードコンテンツに対応する映像データである。すなわち、図5を参照すると、映像データとしてのマルチメディアデータは、ビデオ画像(動画データ及び音データを含む)用の表示プレーン610と、テキストデータ用の字幕用の表示プレーン614とを有する。第1の実施の形態の変形例においては、出力可否情報挿入部150は、表示プレーン614に対して出力可否情報を動的に挿入する。   Referring to FIG. 5A, the configuration of the multimedia data according to the modification of the first embodiment is, for example, video data corresponding to the DVD standard, and video data corresponding to so-called standard content. is there. That is, referring to FIG. 5, multimedia data as video data has a display plane 610 for video images (including moving image data and sound data) and a display plane 614 for subtitles for text data. In the modification of the first embodiment, the output availability information insertion unit 150 dynamically inserts output availability information into the display plane 614.

なお、図5(b)を参照すると、変形例に係るストリーム700は、例えば、ビデオデータ702及びオーディオデータ704の他に、第1の字幕データ706、第2の字幕データ708等の字幕データを8つ含むことができる。第1の実施の形態の変形例において、表示プレーン614は、第1の言語から第8の言語までの字幕データを含む領域に、字幕データの代わりに、装置制御情報を記録することができる。したがって、1つの表示プレーン614に、8つのパターンの装置制御情報(例えば、全てを出力する旨を示す情報、ビデオデータ702を出力し、オーディオデータ704を出力しない旨を示す情報(カラオケモード)等)を記録できる。   Referring to FIG. 5B, the stream 700 according to the modification includes subtitle data such as first subtitle data 706 and second subtitle data 708 in addition to the video data 702 and the audio data 704, for example. Eight can be included. In the modification of the first embodiment, the display plane 614 can record device control information instead of caption data in an area including caption data from the first language to the eighth language. Accordingly, eight patterns of device control information (for example, information indicating that all are output, information indicating that video data 702 is output and audio data 704 is not output (karaoke mode)) are displayed on one display plane 614. ) Can be recorded.

(装置制御情報の挿入の詳細)
図6A(a)は、本発明の第1の実施の形態に係る装置制御情報のマルチメディアデータへの挿入方法の一例を示し、図6A(b)は、装置制御情報のマルチメディアデータへの挿入方法の他の例を示す。
(Details of device control information insertion)
FIG. 6A (a) shows an example of a method for inserting device control information into multimedia data according to the first embodiment of the present invention, and FIG. 6A (b) shows the device control information into multimedia data. The other example of the insertion method is shown.

まず、図6A(a)を参照する。まず、マルチメディアデータとしての画像600は、例えば、実際に画像が表示される領域600bと、アンダースキャンされた場合に表示される領域である領域600cと、HD DVDの規格により情報を書き込むことが制限されている領域である領域600dとを含む。領域600b及び領域600cが、一例として、表示用データ領域として定義される。そして、領域600dの下端600aには装置制御情報が予め記録されており、出力可否情報挿入部150は、下端600aの所定の領域に出力可否情報を動的に挿入する。   First, FIG. 6A (a) is referred. First, for example, an image 600 as multimedia data is written in accordance with an HD DVD standard, an area 600b where an image is actually displayed, an area 600c which is an area displayed when underscanned, and the HD DVD standard. And a region 600d which is a restricted region. The area 600b and the area 600c are defined as display data areas as an example. Device control information is recorded in advance at the lower end 600a of the area 600d, and the output availability information insertion unit 150 dynamically inserts output availability information into a predetermined area of the lower end 600a.

例えば、出力可否情報挿入部150は、画像600の下端600aとしての最下部のライン(一例として、上端から1080番目のライン)に、出力可否情報を示す一定長の線分(例えば、線分800、802、804、806)を描画することにより、画像600に出力可否情報を動的に挿入する。   For example, the output enable / disable information insertion unit 150 displays a line segment of a certain length (for example, a line segment 800) indicating output enable / disable information on the lowermost line (for example, the 1080th line from the upper end) as the lower end 600a of the image 600. , 802, 804, 806), the output availability information is dynamically inserted into the image 600.

また、図6A(b)を参照すると、本実施の形態の他の例においては、出力可否情報挿入部150は、画像602の左端602aに1ピクセル分の長さを有する線分808、線分810を描画することにより、画像600に出力可否情報を動的に挿入することもできる。   Referring to FIG. 6A (b), in another example of the present embodiment, the output availability information insertion unit 150 includes a line segment 808 having a length of one pixel at the left end 602a of the image 602, and a line segment. By rendering 810, output enable / disable information can be dynamically inserted into the image 600.

本実施の形態において、出力可否情報挿入部150は、一例として、HD DVD規格におけるグラフィックス描画機能、及びDrawing API又はマークアップ言語を用いて外部装置の動作の実行の決定ができるので、HD DVD用のマルチメディアデータとしてのコンテンツと、外部装置との間の同期を容易にとることができる。   In the present embodiment, the output permission / inhibition information insertion unit 150 can, for example, determine the execution of the operation of the external device using the graphics rendering function in the HD DVD standard and the Drawing API or markup language. It is possible to easily synchronize content as multimedia data for use with an external device.

また、外部装置が照明54である場合、照明54の動作を制御する装置制御情報は、一例として、以下の構成を有する。まず、マルチメディアデータ再生システム1は、外部装置としての照明54を、1つだけではなく、複数個備えることができる。そして、複数の照明54はそれぞれ、直列に連結することができる。すなわち、複数の照明54は、デイジーチェーン方式で連結され、例えば、コンバーター20に第1の照明54を接続し、第2の照明54を第1の照明54に接続し、更に、第3の照明54を第2の照明54に接続するように構成される。   When the external device is the illumination 54, the device control information for controlling the operation of the illumination 54 has the following configuration as an example. First, the multimedia data reproduction system 1 can include not only one illumination 54 but also a plurality of illuminations 54 as external devices. And each of the some illumination 54 can be connected in series. That is, the plurality of lights 54 are connected in a daisy chain manner, and for example, the first light 54 is connected to the converter 20, the second light 54 is connected to the first light 54, and further the third light 54 54 is configured to connect to the second illumination 54.

コンバーター20は、マルチメディアデータが映像データの場合、一例として、複数の照明54の動作を制御する装置制御情報を含むフレーム画像を1/60秒毎(又は、1/30秒毎)に取得する。そして、コンバーター20は、一定周期にて(例えば、1周期を10msとして)、1周期毎に第1の照明54に装置制御情報を出力する。係る場合において、コンバーター20が映像データを取得するタイミングと、コンバーター20から第1の照明54に装置制御情報を出力するタイミングが異なるので、このタイミングのズレを吸収することを目的として、コンバーター20は、キャッシュを更に有することができる。   For example, when the multimedia data is video data, the converter 20 acquires a frame image including device control information for controlling the operation of the plurality of lights 54 every 1/60 seconds (or every 1/30 seconds). . Then, the converter 20 outputs the device control information to the first illumination 54 at every cycle (for example, assuming that one cycle is 10 ms). In such a case, the timing at which the converter 20 acquires the video data is different from the timing at which the apparatus control information is output from the converter 20 to the first illumination 54. For the purpose of absorbing this timing shift, the converter 20 Can further include a cache.

そして、コンバーター20は、キャッシュに格納した装置制御情報を周期毎に第1の照明54に出力する。複数の照明54の動作を制御する装置制御情報は、例えば、1つのフレーム画像の中に、複数の照明54のそれぞれ毎に含まれる。すなわち、複数の照明54のそれぞれに対応する装置制御情報としての複数のビットをフレーム画像は有しており、コンバーター20は、複数の照明54のそれぞれに対応付けて、複数のビットを装置制御情報として第1の照明54に出力する。第1の照明54は、第1の照明54に対応付けられている装置制御情報に応じて動作すると共に、第1の照明54に装置制御情報を転送する。これにより、第2の照明54は第1の照明54と同様に動作すると共に、第3の照明54も第2の照明54と同様に動作する。   Then, the converter 20 outputs the device control information stored in the cache to the first illumination 54 every cycle. The apparatus control information for controlling the operations of the plurality of lights 54 is included in each frame light, for example, in one frame image. That is, the frame image has a plurality of bits as device control information corresponding to each of the plurality of lights 54, and the converter 20 associates each of the plurality of lights 54 with each of the plurality of bits. To the first illumination 54. The first illumination 54 operates in accordance with the device control information associated with the first illumination 54 and transfers the device control information to the first illumination 54. Accordingly, the second illumination 54 operates in the same manner as the first illumination 54, and the third illumination 54 operates in the same manner as the second illumination 54.

図6Bは、本発明の第1の実施の形態に係る装置制御情報のマルチメディアデータに含まれる装置制御情報の概要を示す。   FIG. 6B shows an outline of device control information included in the multimedia data of the device control information according to the first embodiment of the present invention.

マルチメディアデータとしての画像600は、図6A(a)における上記説明と同様に、領域600bと領域600cとを含む。なお、図6Bにおいては、領域600dの記載は省略する。装置制御情報は、例えば、画像600の下端に記録される(例えば、装置制御情報D1、D2、及びD3)。具体的に、装置制御情報D1は、その先頭にチェックデジットを含み、ロボット等の駆動機構を有する外部装置を制御する情報が記録される。また、装置制御情報D2は、例えば、DMX信号として記録することができ、装置制御情報D3は、例えば、MIDI信号として記録することができる。   An image 600 as multimedia data includes a region 600b and a region 600c, as described above with reference to FIG. 6A (a). In FIG. 6B, the description of the region 600d is omitted. The device control information is recorded, for example, at the lower end of the image 600 (for example, device control information D1, D2, and D3). Specifically, the device control information D1 includes a check digit at the head thereof, and information for controlling an external device having a drive mechanism such as a robot is recorded. Further, the device control information D2 can be recorded as, for example, a DMX signal, and the device control information D3 can be recorded as, for example, a MIDI signal.

なお、装置制御情報は、画像600の下端だけでなく、上端、下端、左端、又は右端のいずれか1つの端を含む領域に記録することができる。また、装置制御情報は、上端、下端、左端、右端を除く領域の少なくとも一部に記録することもできる。更に、装置制御情報は、上端、下端、左端、又は右端のいずれか1つの端を含む領域と、上端、下端、左端、右端を除く領域の少なくとも一部の領域とに記録することもできる。また、装置制御情報は、所定の端に沿って、複数行にわたって記録することもできる。この場合に、装置制御情報は、連続した複数の行、及び/又は所定の間隔をおいた複数の行に記録することができる。   Note that the apparatus control information can be recorded not only in the lower end of the image 600 but also in an area including any one of the upper end, the lower end, the left end, and the right end. The device control information can also be recorded in at least a part of the area excluding the upper end, lower end, left end, and right end. Furthermore, the apparatus control information can be recorded in an area including any one of the upper end, the lower end, the left end, and the right end, and at least a part of the area excluding the upper end, the lower end, the left end, and the right end. The device control information can also be recorded over a plurality of lines along a predetermined end. In this case, the device control information can be recorded in a plurality of continuous lines and / or a plurality of lines with a predetermined interval.

なお、HD DVDコンテンツとしてのマルチメディアデータの先頭に、複数の装置制御情報をいずれの領域に割り振って記録するかを示す信号を挿入することもできる。また、コンバーター20は、複数の装置制御情報を画像600のいずれの領域に記録するかを示す情報と、記録すべき装置制御情報の順序を予め格納した格納部を更に有していてもよい。そして、コンバーター20は、マルチメディアデータが供給された場合に、当該格納部を参照して、装置制御情報を格納部に格納されている順序に沿って抽出することができる。   It is also possible to insert a signal indicating to which area a plurality of device control information is allocated and recorded at the head of multimedia data as HD DVD content. The converter 20 may further include a storage unit that stores in advance information indicating in which area of the image 600 a plurality of device control information is to be recorded and the order of the device control information to be recorded. When the multimedia data is supplied, the converter 20 can refer to the storage unit and extract the device control information in the order stored in the storage unit.

(線分の描画方法の記述)
図7(a)及び(b)は、本発明の第1の実施の形態に係る線分の描画方法の記述の例である。
(Description of line segment drawing method)
FIGS. 7A and 7B are examples of description of a line segment drawing method according to the first embodiment of the present invention.

出力可否情報挿入部150は、図7(a)に示すようなマークアップファイル812、又は図7(b)に示すようなスクリプトファイル814に基づいて、図7の上記説明における画像600又は画像602に線分を描画する。また、出力可否情報挿入部150は、再生装置10が所定のグラフィックエンジンを更に有する場合、グラフィックエンジンに線分の描画を分担させることができる。なお、装置制御情報は、HD DVD規格で規定されたマークアップファイル又はスクリプトファイルを用いてマルチメディアデータに含めることができるので、コンテンツ作成者が容易に装置制御情報を編集でき、マルチメディアデータと外部装置とが連携するコンテンツを短時間で作製できる。   Based on the markup file 812 as shown in FIG. 7 (a) or the script file 814 as shown in FIG. 7 (b), the output permission / inhibition information insertion unit 150 performs the image 600 or the image 602 in the above description of FIG. Draw a line segment at. Further, when the playback apparatus 10 further includes a predetermined graphic engine, the output availability information insertion unit 150 can cause the graphic engine to share line segments. Since the device control information can be included in the multimedia data using a markup file or a script file defined in the HD DVD standard, the device creator can easily edit the device control information, Content that works with external devices can be created in a short time.

また、出力可否情報挿入部150は、出力可否決定部140から受け取った出力可否情報に応じて、画像600又は画像602に線分を描画するか否かを選択できる。すなわち、出力可否情報が、コンバーター20に読み取り可能に装置制御情報を出力する旨を示す場合、出力可否情報挿入部150は、画像600又は画像602に線分を描画することを選択する。一方、出力可否情報が、コンバーター20に読み取り可能に装置制御情報を出力しない旨を示す場合、出力可否情報挿入部150は、画像600又は画像602に線分を描画しないことを選択する。   The output availability information insertion unit 150 can select whether to draw a line segment on the image 600 or the image 602 according to the output availability information received from the output availability determination unit 140. That is, when the output availability information indicates that the device control information is output to be readable to the converter 20, the output availability information insertion unit 150 selects to draw a line segment on the image 600 or the image 602. On the other hand, when the output enable / disable information indicates that the device control information is not output so as to be readable to the converter 20, the output enable / disable information insertion unit 150 selects not to draw a line segment on the image 600 or the image 602.

なお、出力可否情報挿入部150は、マークアップファイル812又はスクリプトファイル814を用いずに、マルチメディアデータに直接、装置制御情報を出力するか否かの情報を埋め込むこともできる。   Note that the output permission information insertion unit 150 can also embed information on whether or not to output device control information directly in the multimedia data without using the markup file 812 or the script file 814.

(装置制御情報の検出方法)
図8(a)及び(b)は、本発明の第1の実施の形態に係る装置制御情報の検出方法の例を示す。
(Device control information detection method)
FIGS. 8A and 8B show examples of a method for detecting apparatus control information according to the first embodiment of the present invention.

まず、図8(a)を参照する。コンバーター20のデータ取得部200は、マルチメディアデータを取得する。例えば、データ取得部200は、マルチメディアデータとして、図6A(a)の上記説明における画像600を取得する。一方、コンバーター20の同期信号検出部210が同期信号を検出した場合、制御情報抽出処理部220は、画像600の映像信号としての画像信号のうち、輝度成分の信号820に関して水平同期信号900を検出する。   First, reference is made to FIG. The data acquisition unit 200 of the converter 20 acquires multimedia data. For example, the data acquisition unit 200 acquires the image 600 in the above description of FIG. 6A (a) as multimedia data. On the other hand, when the synchronization signal detection unit 210 of the converter 20 detects the synchronization signal, the control information extraction processing unit 220 detects the horizontal synchronization signal 900 with respect to the luminance component signal 820 from the image signal as the video signal of the image 600. To do.

更に、制御情報抽出処理部220は、図6A(a)の上記説明における画像600の下端600aに相当する部分の水平同期信号900を同期信号検出部210が検出したタイミングで、輝度成分の信号820に含まれる輝度を示すデータを読み取る。制御情報抽出処理部220は、読み取ったデータを装置制御情報850として抽出する。また、制御情報抽出処理部220は、輝度成分の信号820の所定の場所にチェックサム用データ830を付加する。なお、マルチメディアデータ生成システム1は、制御情報抽出処理部220において輝度成分の代わり又は輝度成分と共に、他の映像信号を読み取って装置制御情報として抽出するシステムとして構築することもできる。   Further, the control information extraction processing unit 220 detects the luminance component signal 820 at the timing when the synchronization signal detection unit 210 detects the horizontal synchronization signal 900 corresponding to the lower end 600a of the image 600 in the above description of FIG. 6A (a). The data indicating the luminance included in is read. The control information extraction processing unit 220 extracts the read data as device control information 850. The control information extraction processing unit 220 adds checksum data 830 to a predetermined location of the luminance component signal 820. The multimedia data generation system 1 can also be constructed as a system that reads other video signals and extracts them as device control information in the control information extraction processing unit 220 instead of or together with the luminance components.

図8(b)は、図8(a)と異なり、図6A(b)の上記説明における画像602の左端602bに装置制御情報が含まれている場合の装置制御情報の検出方法を示すので、図8(a)との相違点を除き詳細な説明は省略する。   Unlike FIG. 8A, FIG. 8B shows a method for detecting device control information when device control information is included in the left end 602b of the image 602 in the above description of FIG. 6A (b). Except for the difference from FIG. 8A, detailed description is omitted.

図8(b)において、制御情報抽出処理部220は、画像602の映像信号912のうち、輝度成分の信号822から水平同期信号902毎に、左端602bから最初の1ピクセル分の輝度データを取得する。そして、制御情報抽出処理部220は、取得した1ピクセル分の輝度データを、一例として、MIDI又はアクチュエータ制御用の制御信号としての装置制御情報852として抽出する。更に、制御情報抽出処理部220は、輝度成分の信号822の最後にチェックサム用データ832を付加する。   In FIG. 8B, the control information extraction processing unit 220 obtains luminance data for the first pixel from the left end 602 b for each horizontal synchronization signal 902 from the luminance component signal 822 of the video signal 912 of the image 602. To do. Then, the control information extraction processing unit 220 extracts the acquired luminance data for one pixel as device control information 852 as a control signal for MIDI or actuator control as an example. Further, the control information extraction processing unit 220 adds checksum data 832 to the end of the luminance component signal 822.

(制御情報格納部への制御情報の格納方法)
図9は、本発明の第1の実施の形態に係る制御情報格納部への制御情報の格納方法のフローの一例を示す。
(How to store control information in the control information storage)
FIG. 9 shows an example of a flow of a method for storing control information in the control information storage unit according to the first embodiment of the present invention.

まず、同期信号検出部210は、コンポーネント入力端子からの同期信号の有無をチェックする(S100)。同期信号検出部210が、同期信号を検出した場合(S110:Yes)、制御情報抽出処理部220は、抽出した輝度成分のデータを加算する。一方、同期信号検出部210が同期信号を検出しない場合、同期信号検出部210は、制御情報抽出処理部220を介してデータ出力部260から外部にエラーを出力する(S110:No)。更に、制御情報抽出処理部220は、加算した輝度成分のデータと、輝度信号に付加されたチェックサム用データの値とを比較する(S120)。   First, the synchronization signal detection unit 210 checks whether or not there is a synchronization signal from the component input terminal (S100). When the synchronization signal detection unit 210 detects a synchronization signal (S110: Yes), the control information extraction processing unit 220 adds the extracted luminance component data. On the other hand, when the synchronization signal detection unit 210 does not detect the synchronization signal, the synchronization signal detection unit 210 outputs an error from the data output unit 260 to the outside via the control information extraction processing unit 220 (S110: No). Further, the control information extraction processing unit 220 compares the added luminance component data with the value of the checksum data added to the luminance signal (S120).

制御情報抽出処理部220が、加算した輝度成分のデータとチェックサム用データの値とを照合して、両者が等しいと判断した場合(S130:Yes)、制御情報抽出処理部220は、MIDIやアクチュエータ制御等の装置制御情報としての輝度データを制御信号用バッファとしての制御情報格納部230に格納する(S140)。一方、制御情報抽出処理部220が、加算した輝度成分のデータとチェックサム用データの値とが一致しないと判断した場合(S130:No)、制御情報抽出処理部220は、データ出力部260からコンバーター20の外部にエラーを出力する(S150)。   When the control information extraction processing unit 220 collates the added luminance component data with the checksum data value and determines that they are equal (S130: Yes), the control information extraction processing unit 220 determines whether MIDI or Luminance data as device control information such as actuator control is stored in the control information storage unit 230 as a control signal buffer (S140). On the other hand, when the control information extraction processing unit 220 determines that the added luminance component data and the value of the checksum data do not match (S130: No), the control information extraction processing unit 220 receives the data from the data output unit 260. An error is output to the outside of the converter 20 (S150).

(第1の実施の形態の効果)
第1の実施の形態に係るマルチメディア再生システム1によれば、再生装置10においてマルチメディアデータを再生中に、外部装置に装置制御情報を供給するか否かを動的に決定することができる。これにより、マルチメディア再生システム1は、再生装置10がマルチメディアデータを再生中であっても、マルチメディアデータに予め記録された装置制御情報の使用の有無を自由に選択できる。したがって、マルチメディア再生システム1は、マルチメディアデータの内容に応じて外部装置の動作を自動的に制御するだけでなく、ユーザの好みに応じて自由に外部装置の動作を制御できる。
(Effects of the first embodiment)
According to the multimedia playback system 1 according to the first embodiment, it is possible to dynamically determine whether or not to supply device control information to an external device while the playback device 10 is playing back multimedia data. . Thereby, the multimedia playback system 1 can freely select whether or not to use the device control information recorded in advance in the multimedia data even when the playback device 10 is playing back the multimedia data. Therefore, the multimedia playback system 1 not only automatically controls the operation of the external device according to the contents of the multimedia data, but can freely control the operation of the external device according to the user's preference.

また、第1の実施の形態に係るマルチメディア再生システム1によれば、メタデータを利用してマルチメディアデータに出力可否情報を挿入できるので、HD DVDのVideo規格を変更しなくても、外部装置を制御できる。   Also, according to the multimedia playback system 1 according to the first embodiment, output permission / prohibition information can be inserted into the multimedia data using the metadata, so that the external DVD can be externally changed without changing the HD DVD Video standard. You can control the device.

[第2の実施の形態]
図10は、本発明の第2の実施の形態に係るマルチメディアデータ再生システムの構成の概要を示す。
[Second Embodiment]
FIG. 10 shows an outline of the configuration of the multimedia data playback system according to the second embodiment of the present invention.

(マルチメディアデータ再生システム1aの構成)
第2の実施の形態に係るマルチメディアデータ再生システム1aは、一例として、マルチメディアデータ取得部100又はマルチメディアデータ出力部120としてのHDMIインターフェース160及びコンポジット映像信号インターフェース170を有するHD DVDプレーヤー10aと、一例として、データ取得部200及びデータ出力部260としてのコンポジット映像信号インターフェース170を有するコンバーター20aと、HDMIインターフェース410を有する表示装置40と、外部装置50とを備える。更に、本実施の形態に係るマルチメディアデータ再生システム1aは、第1の実施の形態に係るマルチメディアデータ再生システム1の構成及び/又は機能の一部及び/又は全部を備える(図示しない)。
(Configuration of multimedia data playback system 1a)
The multimedia data playback system 1a according to the second embodiment includes, as an example, an HD DVD player 10a having an HDMI interface 160 and a composite video signal interface 170 as the multimedia data acquisition unit 100 or the multimedia data output unit 120. As an example, the converter 20a having the composite video signal interface 170 as the data acquisition unit 200 and the data output unit 260, the display device 40 having the HDMI interface 410, and the external device 50 are provided. Furthermore, the multimedia data playback system 1a according to the present embodiment includes a part and / or all of the configuration and / or functions of the multimedia data playback system 1 according to the first embodiment (not shown).

例えば、マルチメディアデータ再生システム1aにおいて、1080i、720pの解像度を有するコンテンツを480iの解像度で出力する場合、HD DVDプレーヤー10aと表示装置40とを、HD DVDプレーヤー10aのHDMIインターフェース160と表示装置40のHDMIインターフェース410とを介して接続する。更に、HD DVDプレーヤー10aのコンポジット映像信号インターフェース170とコンバーター20aのコンポジット映像信号インターフェース270とを接続する。そして、コンバーター20aが外部装置50の動作を制御する。   For example, in the multimedia data playback system 1a, when content having a resolution of 1080i and 720p is output at a resolution of 480i, the HD DVD player 10a and the display device 40 are connected, and the HDMI interface 160 and the display device 40 of the HD DVD player 10a are output. And the HDMI interface 410. Further, the composite video signal interface 170 of the HD DVD player 10a and the composite video signal interface 270 of the converter 20a are connected. Then, the converter 20a controls the operation of the external device 50.

(制御情報格納部への制御情報の格納方法)
図11は、本発明の第2の実施の形態に係る制御情報格納部への制御情報の格納方法のフローの一例を示す。
(How to store control information in the control information storage)
FIG. 11 shows an example of a flow of a method for storing control information in the control information storage unit according to the second embodiment of the present invention.

例えば、コンバーター20aの同期信号検出部210は、コンポジット映像信号インターフェース170からの同期信号の有無をチェックする(S200)。同期信号検出部210が、同期信号を検出した場合(S210:Yes)、コンバーター20aの制御情報抽出処理部220は、マルチメディアデータとしての映像データに含まれる輝度信号と色信号とを分離して、例えば、輝度信号が示す輝度成分のみを抽出する(S220)。一方、同期信号検出部210が同期信号を検出しない場合、同期信号検出部210は、コンポジット映像信号インターフェース270から外部にエラーを出力する(S210:No)。更に、制御情報抽出処理部220は、輝度成分のデータを加算した値と輝度信号の最後に付加された値(チェックサム用データ)とを比較する(S230)。   For example, the synchronization signal detection unit 210 of the converter 20a checks whether or not there is a synchronization signal from the composite video signal interface 170 (S200). When the synchronization signal detection unit 210 detects the synchronization signal (S210: Yes), the control information extraction processing unit 220 of the converter 20a separates the luminance signal and the color signal included in the video data as the multimedia data. For example, only the luminance component indicated by the luminance signal is extracted (S220). On the other hand, when the synchronization signal detection unit 210 does not detect the synchronization signal, the synchronization signal detection unit 210 outputs an error from the composite video signal interface 270 to the outside (S210: No). Further, the control information extraction processing unit 220 compares the value obtained by adding the luminance component data with the value (checksum data) added at the end of the luminance signal (S230).

制御情報抽出処理部220が、加算した輝度成分のデータとチェックサム用データの値とが等しいと判断した場合(S240:Yes)、制御情報抽出処理部220は、輝度データを装置制御情報として制御信号用バッファとしての制御情報格納部230に格納する(S250)。一方、制御情報抽出処理部220が、加算した輝度成分のデータとチェックサム用データの値とが一致しないと判断した場合(S240:No)、制御情報抽出処理部220は、コンポジット映像信号インターフェース270からコンバーター20aの外部にエラーを出力する(S260)。   When the control information extraction processing unit 220 determines that the added luminance component data is equal to the checksum data value (S240: Yes), the control information extraction processing unit 220 controls the luminance data as device control information. The data is stored in the control information storage unit 230 as a signal buffer (S250). On the other hand, when the control information extraction processing unit 220 determines that the added luminance component data and the value of the checksum data do not match (S240: No), the control information extraction processing unit 220 performs the composite video signal interface 270. Outputs an error to the outside of the converter 20a (S260).

[第3の実施の形態]
第3の実施の形態に係るマルチメディア再生システムおいては、コンバーター20bの構成が第1の実施の形態に係るコンバーター20の構成の一部と異なる点を除き、第1の実施の形態に係るマルチメディアデータ再生システム1と同一の構成を備える。したがって、相違点を除き詳細な説明は省略する。
[Third Embodiment]
In the multimedia playback system according to the third embodiment, the configuration of the converter 20b is different from the part of the configuration of the converter 20 according to the first embodiment, except that the configuration is related to the first embodiment. The same configuration as the multimedia data playback system 1 is provided. Therefore, a detailed description is omitted except for differences.

(コンバーター20bの構成)
図12は、本発明の第3の実施の形態に係るコンバーターの機能構成の一例を示す。
(Configuration of converter 20b)
FIG. 12 shows an example of the functional configuration of the converter according to the third embodiment of the present invention.

第3の実施の形態に係るコンバーター20bは、第1の実施の形態に係るコンバーター20とは、データ取得部200が取得したマルチメディアデータの流れが異なる点を除き、コンバーター20と略同一の構成及び機能を有する。したがって、相違点を除き詳細な説明は省略する。   The converter 20b according to the third embodiment is substantially the same as the converter 20 except that the flow of multimedia data acquired by the data acquisition unit 200 is different from that of the converter 20 according to the first embodiment. And has a function. Therefore, a detailed description is omitted except for differences.

コンバーター20bにおいては、データ取得部200が取得したマルチメディアデータは、制御情報抽出処理部220とデータ出力部260とに供給される。データ出力部260は、データ取得部200が取得したマルチメディアデータを、そのまま表示装置40に供給する。すなわち、第3の実施の形態においては、再生装置10からコンバーター20bを介して表示装置40に、装置制御情報が含まれている表示用データ領域を所定の色で置き換える処理が施されていないマルチメディアデータが供給される。なお、第3の実施の形態の変形例においては、再生装置10からコンバーター20bにマルチメディアデータが供給されると共に、再生装置10から直接に表示装置40にマルチメディアデータが供給されてもよい。   In the converter 20b, the multimedia data acquired by the data acquisition unit 200 is supplied to the control information extraction processing unit 220 and the data output unit 260. The data output unit 260 supplies the multimedia data acquired by the data acquisition unit 200 to the display device 40 as it is. That is, in the third embodiment, the display device 40 from the playback device 10 through the converter 20b is not subjected to the processing for replacing the display data area including the device control information with a predetermined color. Media data is supplied. In the modification of the third embodiment, the multimedia data may be supplied from the playback device 10 to the converter 20b, and the multimedia data may be supplied directly from the playback device 10 to the display device 40.

[その他の実施の形態]
本発明の他の実施の形態においては、記録媒体としての蓄積メディアに格納されているマルチメディアデータに予め記録されている外部装置の動作を制御する装置制御情報を抽出して、抽出した装置制御情報に基づいて外部装置の動作を制御するマルチメディア再生システム用の再生プログラムであって、マルチメディア再生システムを、外部装置を識別する外部装置識別子に対応付けて外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含むマルチメディアデータを取得するマルチメディアデータ取得部100、装置制御情報の出力の可否を示す出力可否情報を、マルチメディアデータの表示用データ領域に動的に挿入する出力可否情報挿入部150、同期信号を検出する同期信号検出部210、同期信号検出部210が検出した同期信号に基づいて、マルチメディアデータから装置制御情報を抽出する制御情報抽出処理部220として機能させる再生プログラムを提供することができる。
[Other embodiments]
In another embodiment of the present invention, device control information for controlling the operation of an external device recorded in advance in multimedia data stored in a storage medium as a recording medium is extracted, and the extracted device control A playback program for a multimedia playback system that controls the operation of an external device based on information, wherein the multimedia control system controls the operation of the external device in association with an external device identifier that identifies the external device Multimedia data acquisition unit 100 that acquires multimedia data that includes information in advance in the display data area, and dynamically inserts output permission information indicating whether device control information can be output into the display data area of multimedia data Output enable / disable information insertion unit 150, synchronization signal detection unit 210 that detects a synchronization signal, and synchronization signal detection unit 210 Based on the synchronization signal issued to function as the control information extracting unit 220 for extracting the device control information from the multimedia data can provide reproduction program.

以上、本発明の実施の形態を説明したが、上記に記載した実施の形態は特許請求の範囲に係る発明を限定するものではない。また、実施の形態の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。   While the embodiments of the present invention have been described above, the embodiments described above do not limit the invention according to the claims. In addition, not all the combinations of features described in the embodiments are essential to the means for solving the problems of the invention.

第1の実施の形態に係るマルチメディアデータ再生システムの概要図である。1 is a schematic diagram of a multimedia data playback system according to a first embodiment. 第1の実施の形態に係る再生装置の機能構成ブロック図である。It is a functional block diagram of the reproducing | regenerating apparatus concerning 1st Embodiment. 第1の実施の形態に係るコンバーターの機能構成ブロック図である。It is a functional block diagram of the converter concerning a 1st embodiment. 第1の実施の形態に係るマルチメディアデータの構成を示す図である。It is a figure which shows the structure of the multimedia data which concern on 1st Embodiment. (a)は、第1の実施の形態の変形例に係るマルチメディアデータの構成を示す図であり、(b)は、第1の実施の形態の変形例に係るストリームの構成を示す図である。(A) is a figure which shows the structure of the multimedia data which concerns on the modification of 1st Embodiment, (b) is a figure which shows the structure of the stream which concerns on the modification of 1st Embodiment. is there. (a)は、第1の実施の形態に係る装置制御情報のマルチメディアデータへの挿入方法の一例を示す図であり、(b)は、装置制御情報のマルチメディアデータへの挿入方法の他の例を示す図である。(A) is a figure which shows an example of the insertion method to the multimedia data of the device control information which concerns on 1st Embodiment, (b) is other than the insertion method of the device control information to the multimedia data It is a figure which shows the example of. 第1の実施の形態に係る装置制御情報のマルチメディアデータに含まれる装置制御情報の概要図である。It is a schematic diagram of the device control information included in the multimedia data of the device control information according to the first embodiment. (a)及び(b)は、第1の実施の形態に係る線分の描画方法の記述の例を示す図である。(A) And (b) is a figure which shows the example of the description of the drawing method of the line segment which concerns on 1st Embodiment. (a)及び(b)は、第1の実施の形態に係る装置制御情報の検出方法の例を示す図である。(A) And (b) is a figure which shows the example of the detection method of the apparatus control information which concerns on 1st Embodiment. 第1の実施の形態に係る制御情報格納部への制御情報の格納方法の流れを示す図である。It is a figure which shows the flow of the storage method of the control information to the control information storage part which concerns on 1st Embodiment. 第2の実施の形態に係るマルチメディアデータ再生システムの構成の概要図である。It is a schematic diagram of the structure of the multimedia data reproduction system which concerns on 2nd Embodiment. 第2の実施の形態に係る制御情報格納部への制御情報の格納方法の流れを示す図である。It is a figure which shows the flow of the storage method of the control information to the control information storage part which concerns on 2nd Embodiment. 第3の実施の形態に係るコンバーターの機能構成ブロック図である。It is a functional block diagram of the converter which concerns on 3rd Embodiment.

符号の説明Explanation of symbols

1、1a マルチメディアデータ再生システム
10 再生装置
20、20a、20b コンバーター
50 外部装置
100 マルチメディアデータ取得部
110 データ処理部
120 マルチメディアデータ出力部
150 出力可否情報挿入部
210 同期信号検出部
220 制御情報抽出処理部
850、852 装置制御情報
DESCRIPTION OF SYMBOLS 1, 1a Multimedia data reproduction system 10 Playback apparatus 20, 20a, 20b Converter 50 External apparatus 100 Multimedia data acquisition part 110 Data processing part 120 Multimedia data output part 150 Output availability information insertion part 210 Synchronization signal detection part 220 Control information Extraction processing unit 850, 852 Device control information

Claims (17)

外部装置を識別する外部装置識別子に対応付けて前記外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含むマルチメディアデータを取得するマルチメディアデータ取得部と、
前記装置制御情報の出力の可否を示す出力可否情報を、前記マルチメディアデータの前記表示用データ領域に動的に挿入する出力可否情報挿入部と、
前記マルチメディアデータから前記出力可否情報を抽出して前記外部装置に供給することにより前記外部装置の動作を制御するコンバーターに、挿入された前記出力可否情報を含む前記マルチメディアデータを出力するマルチメディアデータ出力部と
を備えるマルチメディアデータ再生装置。
A multimedia data acquisition unit for acquiring multimedia data preliminarily included in a display data area in association with an external device identifier for identifying an external device to control the operation of the external device;
An output availability information insertion unit that dynamically inserts output availability information indicating availability of output of the device control information into the display data area of the multimedia data;
Multimedia that outputs the multimedia data including the inserted output permission information to a converter that controls the operation of the external device by extracting the output permission information from the multimedia data and supplying the extracted information to the external device A multimedia data playback device comprising a data output unit.
前記装置制御情報の出力の可否を決定する出力可否決定部
を更に備え、
前記出力可否情報挿入部は、前記出力可否決定部の決定に応じて決まる前記出力可否情報を前記マルチメディアデータの前記表示用データ領域に挿入する
請求項1に記載のマルチメディアデータ再生装置。
Further comprising an output permission determination unit that determines whether the device control information is output;
2. The multimedia data reproducing apparatus according to claim 1, wherein the output availability information insertion unit inserts the output availability information determined according to the determination of the output availability determination unit into the display data area of the multimedia data.
前記出力可否情報挿入部は、前記表示用データ領域の上端、下端、右端、および/又は左端からなる端辺部分に前記出力可否情報を挿入し、
前記コンバーターは、前記端辺部分に表示される同期信号に基づいて、前記装置制御情報を抽出する
請求項1に記載のマルチメディアデータ再生装置。
The output availability information insertion unit inserts the output availability information into an edge portion consisting of an upper end, a lower end, a right end, and / or a left end of the display data area,
The multimedia data reproducing device according to claim 1, wherein the converter extracts the device control information based on a synchronization signal displayed on the end portion.
前記出力可否情報挿入部は、前記出力可否情報を、ユーザの入力結果に応じて動的に生成して挿入する
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the output availability information insertion unit dynamically generates and inserts the output availability information according to a user input result.
前記出力可否情報挿入部は、前記装置制御情報を、タイトルタイムラインに同期して動的に生成して挿入する
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the output availability information inserting unit dynamically generates and inserts the apparatus control information in synchronization with a title timeline.
前記マルチメディアデータ出力部は、前記マルチメディアデータをコンポーネント映像信号又はHDMIの映像信号で出力する
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the multimedia data output unit outputs the multimedia data as a component video signal or an HDMI video signal.
前記マルチメディアデータ出力部は、前記マルチメディアデータの出力解像度がSD解像度である場合、前記マルチメディアデータをコンポジット映像信号で出力する
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the multimedia data output unit outputs the multimedia data as a composite video signal when the output resolution of the multimedia data is SD resolution.
前記出力可否情報挿入部が、チェックサムを更に挿入し、
前記コンバーターに、前記マルチメディアデータに挿入された前記出力可否情報と前記チェックサムとの照合結果に応じて、前記装置制御情報を抽出させる
請求項1に記載のマルチメディアデータ再生装置。
The output permission information insertion unit further inserts a checksum,
The multimedia data reproducing apparatus according to claim 1, wherein the converter is configured to extract the apparatus control information according to a collation result between the output permission information inserted into the multimedia data and the checksum.
前記マルチメディアデータが、HD DVD規格に準拠するマルチメディアデータであって、前記装置制御情報をアドバンスドコンテンツとしての表示用データ領域中に予め含む
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the multimedia data is multimedia data compliant with the HD DVD standard, and the apparatus control information is included in advance in a display data area as advanced content.
前記マルチメディアデータが、DVD規格に準拠するマルチメディアデータであって、前記装置制御情報をスタンダードコンテンツとしての表示用データ領域中に予め含む
請求項1に記載のマルチメディアデータ再生装置。
2. The multimedia data reproducing apparatus according to claim 1, wherein the multimedia data is multimedia data compliant with a DVD standard, and the apparatus control information is previously included in a display data area as standard content.
前記マルチメディアデータが、前記装置制御情報を、音声信号として有する
請求項1に記載のマルチメディアデータ再生装置。
The multimedia data reproducing apparatus according to claim 1, wherein the multimedia data includes the apparatus control information as an audio signal.
外部装置を識別する外部装置識別子に対応付けて前記外部装置の動作を制御する装置制御情報を表示用データ領域中に予め含むマルチメディアデータを取得するマルチメディアデータ取得部と、
前記装置制御情報の出力の可否を示す出力可否情報を、前記マルチメディアデータの前記表示用データ領域に動的に挿入する出力可否情報挿入部と、
同期信号を検出する同期信号検出部と、
前記同期信号検出部が検出した前記同期信号に基づいて、前記マルチメディアデータから前記装置制御情報を抽出する制御情報抽出処理部と、
抽出された前記装置制御情報に応じて動作する外部装置と
を備えるマルチメディアデータ再生システム。
A multimedia data acquisition unit for acquiring multimedia data preliminarily included in a display data area in association with an external device identifier for identifying an external device to control the operation of the external device;
An output availability information insertion unit that dynamically inserts output availability information indicating availability of output of the device control information into the display data area of the multimedia data;
A synchronization signal detector for detecting the synchronization signal;
A control information extraction processing unit that extracts the device control information from the multimedia data based on the synchronization signal detected by the synchronization signal detection unit;
A multimedia data playback system comprising: an external device that operates according to the extracted device control information.
前記出力可否情報挿入部は、前記表示用データ領域の上端、下端、右端、および/又は左端からなる端辺部分に前記出力可否情報を挿入し、
前記同期信号検出部は、前記端辺部分を表示する同期信号を検出し、
前記制御情報抽出処理部は、前記端辺部分に表示される同期信号に基づいて、前記装置制御情報を抽出する
請求項12に記載のマルチメディアデータ再生システム。
The output availability information insertion unit inserts the output availability information into an edge portion consisting of an upper end, a lower end, a right end, and / or a left end of the display data area,
The synchronization signal detection unit detects a synchronization signal for displaying the edge portion,
The multimedia data reproduction system according to claim 12, wherein the control information extraction processing unit extracts the device control information based on a synchronization signal displayed on the end portion.
前記制御情報抽出処理部は、前記出力可否情報が挿入された前記マルチメディアデータから、前記装置制御情報を抽出した後、前記装置制御情報が含まれている前記表示用データの領域を、単色データに置き換える
請求項12に記載のマルチメディアデータ再生システム。
The control information extraction processing unit extracts the device control information from the multimedia data into which the output permission information has been inserted, and then converts the display data area including the device control information into monochrome data. The multimedia data playback system according to claim 12, which is replaced by:
前記同期信号検出部が、コンポーネント映像信号又はHDMIの映像信号に基づいて、前記同期信号を検出する
請求項12に記載のマルチメディアデータ再生システム。
The multimedia data reproduction system according to claim 12, wherein the synchronization signal detection unit detects the synchronization signal based on a component video signal or an HDMI video signal.
前記同期信号検出部が、出力解像度がSD解像度である場合、コンポジット映像信号に基づいて、前記同期信号を検出する
請求項12に記載のマルチメディアデータ再生システム。
The multimedia data reproduction system according to claim 12, wherein the synchronization signal detection unit detects the synchronization signal based on a composite video signal when the output resolution is SD resolution.
前記出力可否情報挿入部が、チェックサムを更に挿入し、
前記制御情報抽出処理部が、前記マルチメディアデータに挿入された前記出力可否情報と前記チェックサムとの照合結果に応じて、前記装置制御情報を抽出する
請求項12に記載のマルチメディアデータ再生システム。
The output permission information insertion unit further inserts a checksum,
13. The multimedia data reproduction system according to claim 12, wherein the control information extraction processing unit extracts the device control information according to a collation result between the output permission information inserted into the multimedia data and the checksum. .
JP2007337099A 2007-12-27 2007-12-27 Multimedia data reproducing system and multimedia data reproducing apparatus Pending JP2009159442A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2007337099A JP2009159442A (en) 2007-12-27 2007-12-27 Multimedia data reproducing system and multimedia data reproducing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007337099A JP2009159442A (en) 2007-12-27 2007-12-27 Multimedia data reproducing system and multimedia data reproducing apparatus

Publications (1)

Publication Number Publication Date
JP2009159442A true JP2009159442A (en) 2009-07-16

Family

ID=40962921

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007337099A Pending JP2009159442A (en) 2007-12-27 2007-12-27 Multimedia data reproducing system and multimedia data reproducing apparatus

Country Status (1)

Country Link
JP (1) JP2009159442A (en)

Similar Documents

Publication Publication Date Title
JP4871550B2 (en) Recording / playback device
JP2009521170A (en) Script synchronization method using watermark
JP2010166622A (en) Apparatus for receiving digital information signal
JP2008312183A (en) Information processing apparatus, method, and program
KR100604831B1 (en) Audio and video player synchronizing ancillary word and image to audio and method thereof
TWI417873B (en) A storage medium and an apparatus for reproducing data from a storage medium storing audio-visual data and text-based subtitle data
EP1562376A2 (en) Information storage medium containing interactive graphics stream for changing the AV data reproducing state, and reproducing method and apparatus therefor
JP2007522723A (en) Recording medium on which moving image data including event information is recorded, reproducing apparatus and reproducing method thereof
JP2011087312A (en) Recording medium in which moving-image data containing mode information are recorded, reproducing device, and reproducing method
JP2009004872A (en) One-segment broadcast receiver, one-segment broadcast receiving method and medium recording one-segment broadcast receiving program
US20100278517A1 (en) Video decoding device
KR20090074864A (en) Display device and method for skipping advertising
JP4334591B2 (en) Multimedia data playback device
JP2009301638A (en) Information storing medium, information reproducing device and information reproducing method
JP2008167256A (en) Information processor and information processing method, and program
JP2009159442A (en) Multimedia data reproducing system and multimedia data reproducing apparatus
WO2018099898A1 (en) Method and apparatus for creating, distributing and dynamically reproducing room illumination effects
JP4609711B2 (en) Image processing apparatus and method, and program
KR101022479B1 (en) Storage medium recording audio-visual data with event information, reproducing apparatus and reproducing method thereof
KR100907216B1 (en) Apparatus and method for controlling video using subtitle information
KR100850918B1 (en) Method for skipping commercial in digital broadcasting recorder device
JP2010226520A (en) Content display control apparatus, content display control method, program, and recording medium
JP2008181654A (en) Information recording medium recording a plurality of titles to be reproduced as moving images, and reproducing device and method thereof
JP2007048379A (en) Program reproduction method
JP2010183596A (en) Video recording/reproducing device