JP3948051B2 - Editing apparatus and data editing method - Google Patents

Editing apparatus and data editing method Download PDF

Info

Publication number
JP3948051B2
JP3948051B2 JP11314797A JP11314797A JP3948051B2 JP 3948051 B2 JP3948051 B2 JP 3948051B2 JP 11314797 A JP11314797 A JP 11314797A JP 11314797 A JP11314797 A JP 11314797A JP 3948051 B2 JP3948051 B2 JP 3948051B2
Authority
JP
Japan
Prior art keywords
directory
data
menu
sub
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP11314797A
Other languages
Japanese (ja)
Other versions
JPH10304304A (en
Inventor
彰人 中川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP11314797A priority Critical patent/JP3948051B2/en
Publication of JPH10304304A publication Critical patent/JPH10304304A/en
Application granted granted Critical
Publication of JP3948051B2 publication Critical patent/JP3948051B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Description

【０００１】
【発明の属する技術分野】
本発明は、映像や音声の符号化データを多重化して光ディスク等の記録媒体に対して記録する記録用データを生成する編集装置及びデータ編集方法に関し、特に、ＤＶＤ−ＶＩＤＥＯ規格における副映像データを生成する編集装置及びデータ編集方法に関する。
【０００２】
【従来の技術】
近年、画像や音声を圧縮符号化して大容量のデータを記録することができるＤＶＤと呼ばれる光ディスクが提案されている。このＤＶＤと呼ばれる光ディスクでは、映画やアニメーション等のコンテンツを提供するＤＶＤ−ＶＩＤＥＯ規格が提案されている。
【０００３】
ＤＶＤ−ＶＩＤＥＯ規格では、映画やアニメーション等の映像をＭＰＥＧ方式により圧縮符号化して記録すること、及び、音声をＭＰＥＧ又はＡＣ−３等の方式で圧縮符号化して記録することが規定されている。そして、ＤＶＤ−ＶＩＤＥＯ規格では、質問・応答画面（メニュー画面）等の静止画像を提供するためのデータとしてサブピクチャについて規定されている。
【０００４】
このような、ＤＶＤ−ＶＩＤＥＯで規定されているサブピクチャを用いたメニュー画面について説明する。
【０００５】
ＤＶＤ−ＶＩＤＥＯ規格では、例えば、ビデオテープと同じように映像データをシーケンシャルに再生すること（通常再生モード）の他に、複数のアングルから同一対象を撮影して得られた複数の音声・映像データのいずれかをユーザーの操作に応じて選択して再生し表示すること（マルチアングル再生モード）が規定されている。また、複数のストーリーが収録された映画の主なストーリー（メインストーリー）およびメインストーリーに付随するサブストーリーのいずれかの音声・映像データを、ユーザーの操作に応じて選択して再生すること（マルチストーリー再生モード）や、予め、ユーザーがストーリー展開を選択可能に作成した音声・映像データを、ストーリーの分岐点ごとに、ユーザーの操作に応じて対話形式に選択して再生すること（インタラクティブストーリー再生モード）等が規定されている。そのため、このＤＶＤ−ＶＩＤＥＯ規格に基づいて記録されたＤＶＤを用いて映画等を視聴するユーザーは、このような特殊再生モード（special mode）で、音声・映像データを記録・再生することが可能である。
【０００６】
また、ＤＶＤ−ＶＩＤＥＯ規格では、複数の音声チャンネルを多重化して記録することが規定されている。そのため、ユーザーは、この複数の音声チャネルのいずれにより再生するかを、選択することができる。
【０００７】
このようなマルチストーリーやインタラクティブストーリー等の特殊再生モード（special mode）が設定されている映画等を再生する場合や複数の音声チャンネルを選択する場合に、ユーザーに質問を表示し表示された質問へのユーザーの応答の操作を行うために用いられる静止画像の質問・応答画面が必要になる。ＤＶＤ−ＶＩＤＥＯ規格では、この質問・応答画面となるメニュー画面をサブピクチャを用いて設定できるように規定している。
【０００８】
図１５は、このメニュー画面を説明する為の図である。
【０００９】
具体的に、このメニュー画面は、図１５（Ａ）に示す主映像（Main picture）に、図１５（Ｂ）に示すサブピクチャ（Sub-picture）と図１５（Ｃ）に示すハイライト処理（Hifhlight Informaion）に基づき選択された操作ボタンが重ね合わされて、図１５（Ｄ）〜（Ｆ）に示すように表示される。
【００１０】
このようにメニュー画面を構成することができるサブピクチャは、ＤＶＤ−ＶＩＤＥＯ規格において横７２０×縦４７８（ＮＴＳＣビデオ方式の場合）に分割した画素〔ピクセル（pixel）〕それぞれに固有に割り当てた２ビットの画素データとして規定されている。すなわち、サブピクチャは、ピクチャの画素に対応するビットマップの形式で符号化されている。
【００１１】
また、サブピクチャは、画素それぞれに割り当てられた２ビットの画素データの値〔０〜３（十進法）〕はそれぞれ固有の色に対応しており、サブピクチャの画素それぞれには４種類の色が付けられることが規定されている。
【００１２】
また、メニュー画面において用いられるハイライト処理は、メニュー画面上の操作ボタンとしての機能を果たす処理が行われる。すなわち、メニュー画面上に、操作ボタンの割り付けを行い、この割り付けられた操作ボタンを選択し、実行することにより目的の応答ができるよう規定されている。例えば、ユーザーは、リモートコントローラ等を用いて、図１５（Ｄ）〜（Ｆ）のようにメニュー画面上の選択ボタンの表示を移動させ操作ボタンを選択し、表示された質問に対する目的の応答をする。
【００１３】
ＤＶＤ−ＶＩＤＥＯ規格では、このハイライト処理に用いる情報として、表示画面上の操作ボタンの位置情報、選択した操作ボタン色を変更する選択色情報、選択した後に実行をした場合に操作ボタンの色を変更する実行色情報、リモートコントローラ等により選択する操作ボタンの移動に必要な隣接ボタン情報、実行した操作ボタンの実行内容を示す実行情報等の情報を規定している。
【００１４】
以上のようにＤＶＤ−ＶＩＤＥＯ規格では、サブピクチャにより、メニュー画面上にユーザーへの質問事項を表示させ、ハイライト処理によりそれに対するユーザーの応答が行えるように規定されている。
【００１５】
このような、ＤＶＤ−ＶＩＤＥＯ規格に基づいて映画やアニメーション等の映像ソースを符号化して規格に沿ったかたちで多重化し、記録用データを生成するためには、オーサリングと呼ばれる編集作業をする必要がある。従って、コンテンツの提供者は、このオーサリング段階で、音声・映像データの再生の順番およびタイミング等に応じて、ユーザーが音声・映像の選択等に用いるメニュー画面を生成する必要がある。このため、コンテンツ提供者は、オーサリング処理の段階で、副映像となるサブピクチャ及びハイライト処理の情報を、動画像（メインピクチャ）に重ね合わせて符号化しなければならない。
【００１６】
【発明が解決しようとする課題】
ところが、映画等をＤＶＤ−ＶＩＤＥＯのディスクで提供する場合には、多数のメニュー画面を作らなければならない。特に、マルチストーリーやインタラクティブストーリー等の特殊再生モード（special mode）を設定する場合は、非常に多くのメニュー画面を作らなければならない。
【００１７】
従って、オーサリングの段階で、各ストーリー等に対応したメニュー画面を操作内容に応じてつくらなければならず、サブピクチャの内容やハイライト処理の情報を変更しなければならない。そのため、メニュー画面を作るに当たり、サブピクチャやハイライト処理に用いる情報を符号化するために非常に多くの手間と時間がかかる。
【００１８】
さらに、ＤＶＤ−ＶＩＤＥＯ規格では、ランゲージユニットと呼ばれる複数言語で字幕やメニュー画面を提供することを規定しており、提供する言語の数だけメニュー画面を作らなければならず、さらに、多くの時間がかかる。
【００１９】
本発明は、このような実情を鑑みてなされたものであり、サブピクチャ等の副映像を用いてメニュー画面を作成するにあたり、効率的に符号化する編集装置及びデータ編集方法を提供することを目的とする。
【００２０】
【課題を解決するための手段】
上述の課題を解決するために、本発明に係る編集装置は、複数の映像及び／又は音声について、それぞれ符号化をして複数の符号化データを生成し、この複数の符号化データを多重化して記録媒体に対して記録する記録用データを生成する編集装置であって、映像及び／又は音声についての質問・応答を行う為に表示されるメニュー画面のメニュー構造に応じて展開され、このメニュー画面のメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを有し、各メニュー画面に対応した副映像の符号化データを、各メニュー名に対応した下位ディレクトリ内のファイルに格納する副映像符号化手段を備えることを特徴とする。
【００２１】
この編集装置では、副映像符号化手段が、メニュー構造に応じて展開されメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを有し、副映像の符号化データを、各メニューに対応した下位ディレクトリ内のファイルに格納する。
【００２２】
また、本発明に係る編集装置は、上記副映像符号化手段が、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを有し、第１のディレクトリの下位ディレクトリ内のファイルを複製してこの第２のディレクトリの下位ディレクトリ内のファイルに格納することを特徴とする。
【００２３】
この編集装置では、副映像符号化手段が、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリに符号化データを格納する。
【００２４】
本発明に係るデータ編集方法は、複数の映像及び／又は音声について、それぞれ符号化をして複数の符号化データを生成し、この複数の符号化データを多重化して記録媒体に対して記録する記録用データを生成するデータ編集方法であって、映像及び／又は音声についての質問・応答を行う為に表示されるメニュー画面のメニュー構造に応じて展開され、このメニュー画面のメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを作成し、各メニュー画面に対応した副映像の符号化データを、各メニュー名に対応した下位ディレクトリ内のファイルに格納することを特徴とする。
【００２５】
このデータ編集方法では、メニュー構造に応じて展開されメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを作成し、副映像の符号化データを、各メニューに対応した下位ディレクトリ内のファイルに格納する。
【００２６】
また、本発明に係るデータ編集方法は、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを作成し、第１のディレクトリの下位ディレクトリ内のファイルを複製してこの第２のディレクトリの下位ディレクトリ内のファイルに格納することを特徴とする。
【００２７】
このデータ編集方法では、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを作成する。
【００２８】
【発明の実施の形態】
以下、本発明の実施形態として、例えば、特殊再生モードに適するように編集処理した映画等の動画像の映像データ（以下、「メインピクチャ」とも記す。）および音声データまたはこれらのいずれか（音声・映像データ）の、操作内容をユーザーに示すメニュー画面等の映像あるいは字幕（以下、「サブピクチャ」と記す。）を多重化し、ＤＶＤに記録する記録用データを生成するＤＶＤのオーサリング装置を説明する。
【００２９】
まず、本実施の形態であるオーサリング装置を説明するにあたりＤＶＤ−ＶＩＤＥＯ規格に規定されたサブピクチャ及びメニュー画面等の概要を説明する。
【００３０】
ＤＶＤ−ＶＩＤＥＯ規格においては、ＭＰＥＧ（moving picture experts group）２により圧縮符号化された動画像の圧縮映像データ（メインピクチャ）とは別に、メインピクチャに重ねて表示する静止画像（サブピクチャ）のフォーマットが定義されている。
【００３１】
図１は、ＤＶＤ−ＶＩＤＥＯ規格において定義されているサブピクチャを示す図である。
【００３２】
ＤＶＤ−ＶＩＤＥＯ規格において、サブピクチャは、１枚のピクチャ（画面；フレーム）を、横７２０×縦４７８（ＮＴＳＣビデオ方式の場合）に分割した画素〔ピクセル（pixel）〕それぞれに固有に割り当てた２ビットの画素データとして定義される。つまり、サブピクチャは、ピクチャの画素に対応するビットマップの形式で定義される。
【００３３】
画素それぞれに割り当てられた２ビットの画素データの値〔０〜３（十進法）〕はそれぞれ固有の色に対応しており、従って、サブピクチャの画素それぞれには４種類の色を付すことができる。
【００３４】
なお、実際には、１６種類の色から構成されるカラーパレットの中から任意の４種類が選ばれ、サブピクチャの各画素に付される４種類の色として用いられる。
【００３５】
また、選ばれた４種類の色が画素データの値（０〜３）のいずれと対応するか、および、サブピクチャと背景となるメインピクチャとをどのような比率で重ね合わせるのか（例えば、サブピクチャを０％、動画を１００％の比率とすると、サブピクチャは透明となり見えない、また５０％：５０％とすれば、半透明のサブピクチャとなり、１００％：０％となると背景の動画部分は完全に隠れる）は、別途用意されたこれらを設定するテーブルにより決められる。
【００３６】
図２（Ａ），（Ｂ）は、ＤＶＤ−ＶＩＤＥＯ規格において定義されているサブピクチャの例〔９×９画素の大きさの縁取りのついた十文字〕を示す図である。例えば、図２（Ａ）に示すように、９×９画素の大きさの「縁取りのついた十文字」を表示するサブピクチャにおいて必要とされる色は、背景（バックグランド）の色、十文字本体の色、及び十文字本体を縁どる色の合計３色である。
【００３７】
背景（バックグラウンド）の色には画素データ００を対応付け、十文字本体の色には画素データ１１を対応付け、縁取りの色には画素データ１０を対応付けると、図２（Ｂ）に示すように、９×９画素データの集合を得ることができる。このような画素データを、１枚の画面を構成する７２０×４７８画素全部について求めることにより、画面１枚分のサブピクチャを得ることができる。
【００３８】
また、例えば、７２０×４７８画素の領域のうち、下辺に近いところだけに文字および図形の画素データを置き、これ以外の部分の全てには背景（バックグラウンド）の画素データを置き、さらに、バックグラウンドの画素データのメインピクチャに対する混合比率を０％とすることにより、文字および図形を画面の下辺の部分のみに表示し、他の部分の全てに背景（バックグラウンド）をそのまま表示する（透明な）サブピクチャを生成することができる。
【００３９】
ＤＶＤ−ＶＩＤＥＯ規格においては、例えば、後述するメニュー画面や映画の字幕はこのようなサブピクチャを用いて表現される。
【００４０】
つぎに、ＤＶＤに記録された映画等を再生する際、このようなサブピクチャがどのように用いられるか、及び、ＤＶＤ−ＶＩＤＥＯ規格のナビゲーションコマンド（navigation command）を説明する。
【００４１】
ＤＶＤ−ＶＩＤＥＯ規格においては、再生方法を制御するために、ナビゲーションコマンドが用意されている。ナビゲーションコマンドで記述された情報は、音声・映像データとともにＤＶＤに記録される。このＤＶＤを再生する再生装置では、ナビゲーションコマンドにより記述された情報が示す再生の順番およびタイミングに従って音声，映像および静止画像等を再生する。
【００４２】
ＤＶＤ−ＶＩＤＥＯ規格においては、複数の音声チャンネルを多重化してＤＶＤに記録可能とされており、例えば、複数の音声チャネルのいずれを選択して再生するかを指定することができる。また、映画の映像データの見どころのシーンの始まり、あるいは、ストーリーの切れ目を示す特定の頭だし点〔チャプター（chapter）〕から直接、映像データを再生を開始することを指定することができる。
【００４３】
また、例えば、あるチャプターの再生終了点で、視聴者に対して質問を発する静止画像（サブピクチャ）を表示し、この質問に対する視聴者の回答に応じて、次に再生を開始するチャプターを決定するといったように、対話形式で（インタラクティブに）再生映像を選択することができる映像データ（ソフトウェア）を作成することができる。
【００４４】
このインタラクティブ再生モードは、マルチストーリー／マルチエンディングと呼ばれる作品（シーンの切れ目ごとに、ＡかＢかの選択肢があり、その結果で次のシーンが決まるような、ゲーム的要素の高い作品）の映像データを再生する際等に用いられる。
【００４５】
このようなマルチストーリー／マルチエンディング作品といったインタラクティブ再生モード用のソフトウェアを再生する場合、ＤＶＤの再生装置では、ユーザーに質問を表示し、表示された質問へのユーザーの応答の操作を行うために用いられる質問・応答画面が必要になる。この質問・応答画面（メニュー画面）は、その性質上、静止画像として表示するのが適している。従って、質問・応答画面としては、上述したサブピクチャが用いられる。
【００４６】
ＤＶＤの再生装置に対するインタラクティブな操作（インタラクティブ操作）は、通常、ユーザーがリモートコントローラ（remote controller）等のカーソルキー等を押下することにより直接的に行われることはなく、メニュー画面にアイコンとして表示された操作ボタンを、ユーザーがリモートコントローラに設けられたキー等を用いて間接的に選択することにより実現される。このような間接的な操作ボタンの選択により、ＤＶＤの再生装置のハードウエアに固有なボタンの機能に制約されず、様々なインタラクティブ再生に適したソフトウェア（インタラクティブソフトウェア）を提供することが可能である。
【００４７】
なお、上述したインタラクティブ再生用のメニュー画面のうち基本的なものは、ＤＶＤ−ＶＩＤＥＯ規格においてＤＶＤシステムメニューとして定義されている。このＤＶＤシステムメニューとは、ＤＶＤの再生装置において、ＤＶＤディスクから音声・映像データを再生する際に、リモートコントローラ等に必ず設けなければならないと規定されている「メニューボタン」をユーザー自身が操作することで呼び出されるサブピクチャにより生成されるものである。ユーザーは、ＤＶＤシステムメニューに基づき表示された操作ボタンを、リモートコントローラに設けられたキーを用いて選択することにより、インタラクティブソフトウェアの種々の再生パターンを指定することができる。
【００４８】
つぎに、ＤＶＤ−ＶＩＤＥＯ規格において規定されるＤＶＤシステムメニューについて各メニュー例を列挙して説明する。
【００４９】
１．タイトルメニュー（ Title Menu ）
タイトルメニューは、ＤＶＤに、複数のタイトル（映画やアニメの一話分）の音声・映像データが記録されている場合に、ユーザーがいずれのタイトルの音声・映像データを再生するかを指定するために用いられる。
【００５０】
２．チャプター・メニュー（ Chapter Menu ）
ｌ本のタイトル（映画なら映画１本分、ミュージックビデオ（ビデオクリップ）ならｌアルバム分など、通常、作品と呼ばれるもの）の音声・映像データには、内部に固有の区切り（映画ならシーンの変わり目、ビデオクリップなら曲の切れ目等、レコード会社の制作者が作品上、頭だしをすることを希望するような区切り）が設けられており、上述のように、この区切りはチャプター（Chapter）と呼ばれる。チャプター・メニュー（Chapter Menu）は、チャプターのそれぞれから直接に再生を開始するための操作ボタンを画面に配置したものである。
【００５１】
３．オーディオ・メニュー（ Audio Menu ）
オーディオ・メニューは、ＤＶＤに記録されている各タイトルの映像データそれぞれに、複数の音声チャンネルが付されている場合、例えば、映画の映像データに、元の言語の音声（オリジナル音声）と、複数の言語の吹き替え音声が付されている場合に、いずれの言語の音声を聞くかを選択するために用いられる。オーディオ・メニューには、選択可能な言語の名称等が付された操作ボタンが、音声チャネルごとに独立して画面上に配置される。
【００５２】
４ . サブタイトルメニュー〔 Sub Title Menu （ サブピクチャメニュー とも記載する）〕サブタイトルは、映画やテレビ放送の用語であって、いわゆる「字幕スーパー」等を意味する。サブタイトルメニューは、ＤＶＤに記録されているタイトルに複数の字幕スーパーが付されている場合に、これら複数の字幕スーパーのいずれを表示するのか、あるいは、字幕スーパーを表示しないかを選択するために用いられる。サブタイトルメニューには、選択可能な字幕スーパーを示す名称が付された操作ボタンが、字幕スーパーごとに独立して画面上に配置される。
【００５３】
５・アングルメニュー（ Angle Menu ）
アングルとは、ＤＶＤ−ＶＩＤＥＯ規格固有の機能である。例えば、サッカーの試合を収録する場合には、通常、複数のカメラが用いられ、これらのカメラは、試合を同時に、それぞれ異なったカメラアングルから並行して撮影する。つまり、例えば、サッカーの試合の映像データには、試合全体をロングで引いて写しているカメラから得られたもの、攻撃側の選手をアップで追っているカメラから得られたもの、あるいは、守備側の選手をアップにしているカメラから得られたものが含まれる。
【００５４】
このように、対象物を複数のカメラアングルで同時に並行して撮影して得られた複数の映像データを多重化してＤＶＤに記録し、ユーザーがいずれのカメラアングルで撮影して得られた映像データを再生するかを選択可能とした再生モードが、上述したように、マルチアングル再生モードである。
【００５５】
アングルメニューには、選択可能なアングルの名称などが記された操作ボタンが、アングルごとに独立して画面上に配置される。
【００５６】
６．ルート・メニュー（ Root Menu ）
以上に示した合計５種類のメニューがＤＶＤ−ＶＩＤＥＯ規格において定められている。しかしながら、ＤＶＤの再生装置のリモートコントローラには、５種類のメニューそれぞれを表示させるための５個の操作ボタンが設けられるとは限らない。ＤＶＤ−ＶＩＤＥＯ規格においては、リモートコントローラに、２個の操作ボタン、つまり、タイトルメニュー（Title Menu）を呼び出す操作ボタンおよび他のメニューのいずれかを呼び出す操作ボタンを義務づけているのみだからである。
【００５７】
従って、再生するタイトルが、チャプターメニュー（Chapter Menu）、オーディオメニュー(Audio Menu)、サブタイトルメニュー(Sub Title Menu)およびアングルメニュー（Angle Menu）のいずれか１つ以上を要する場合には、それらのメニューを呼び出すために用いられる特別なメニュー画面が必要になる。
【００５８】
ルートメニュー（Root Menu）は、チャプターメニュー（Chapter Menu）、オーディオメニュー（Audio Menu）、サブタイトルメニュー（Sub Title Menu）およびアングルメニュー（Angle Menu）のいずれか１つ以上が必要である場合に用いられる。このルートメニュー（Root Menu）には、それぞれチャプターメニュー（Chapter Menu）、オーディオメニュー（Audio Menu）、サブタイトルメニュー（Sub Title Menu〉およびアングルメニュー（Angle Menu）の名称が付された操作ボタンが個別に配置されている。
【００５９】
図３は、実際のチャプターメニュー（Chapter Menu）を例示する図である。
【００６０】
チャプターメニュー画面には、例えば、チャプターを指定する操作ボタンａ、メニュー切り換え用の操作ボタンｂおよびメニューページ切り換え用の操作ボタンｃの３種類の操作ボタンが配置されている。
【００６１】
このようなチャプターメニューを作成する場合には、ＤＶＤ−ＶＩＤＥＯ規格のサブピクチャのフォーマットに従って各操作ボタンに対応する画素データを作成する他に、作成した操作ボタンそれぞれに対して、音声・映像データの再生を制御するプログラムのナビゲーションコマンドに対応付ける必要がある。
【００６２】
この対応付けは、例えば、ＤＶＤ−ＶＩＤＥＯ規格の用語を使用して表現すると、音声・映像データのチャプター（シーン６：対決１）のＤＶＤ上の記録開始時点のセクターアドレスを示すテーブルＴＴ−ＳＲＰＴのデータＴＴ ＤＯＭＡＩＮ ＮＵＭＢＥＲ ｘおよびデータＰＴＴ ＮＵＭＢＥＲ ｙを用いてナビゲーションコマンドＪｕｍｐＰＴＴ（ＴＴ５ｘ，ＰＴＴ＝ｙ）のバイナリーコードを生成し、ボタンコマンドＢＴＮ ＣＭＤ（ナビゲーションコマンドの一種）に含まれるテーブルにおいて、シーン６：対決１の操作ボタンｄの画面内の位置を示すＰＣＩのＨＬＩ中のＢＴＩＮＴのＢＴＮ−ＰＯＳＩに対応する位置に記入することにより行われる。
【００６３】
つぎに、ＤＶＤ−ＶＩＤＥＯ規格において規定されている上述したメニュー画面とビデオデータ等のボリューム構造との関係を説明する。
【００６４】
ＤＶＤ−ＶＩＤＥＯ規格では、図４に示すようにビデオデータ等のボリューム構造が規定されており、そのボリュームスペースであるＤＶＤ Ｖｉｄｅｏ−ｚｏｎｅが１個のビデオマネージャ（VMG:Video Manager）と１個以上９９個以下のビデオタイトルセット（VTS:Video Title Set）により構成されている。
【００６５】
図５にＶＭＧとＶＴＳの構造を示す。ＶＭＧは、先頭のファイルがコントロールデータ（Video Manager Information）であり、次のファイルがＶＯＢＳ（VMGM＿Object Set）であり、最後のファイルがＶＭＧＩのバックアップとなっている。このＶＭＧＩは、ＶＭＧメニュー（VMGM:VMG Menu）が含まれている。
【００６６】
また、ＶＴＳは、先頭のファイルがコントロールデータ（VTSI:Video Title Set Information）であり、次のファイルがメニューのためのＶＯＢＳ（VTSM＿VTSM Video Object Set）であり、次の１から９個のファイルがタイトルの為のＶＯＢＳ（VTSTT＿VOBS:VTSTT Video Ovject Set）であり、最後のファイルがＶＴＳＩのバックアップとなっている。このＶＴＳＩは、ＶＴＳにおけるＶＴＳメニュー（VTSM:Video Title Set Menu）が含まれている。
【００６７】
上述した各メニュー画面のデータは、ＶＭＧ及びＶＴＳのＶＭＧＭ及びＶＴＳＭに含まれる。
【００６８】
タイトルメニュー（Title Menu）は、図６に示すように、ＶＭＧＭに含まれる。また、ルートメニュー（Root Menu）は、図７に示すように、ＶＴＳＭに含まれ、このルートメニューの下位に、チャプターメニュー（Chapter Menu）、オーディオメニュー（Audio Menu）、サブタイトルメニュー（Sub Title Menu）、アングルメニュー（Angle Menu）が含まれる。
【００６９】
また、ＤＶＤ−ＶＩＤＥＯ規格では、言語コードを規定するランゲージユニット（LU:Language Unit）と呼ばれる機能を規定している。この機能は、多数の言語が使われている国や地域において、同じコンテンツを提供する際に言語毎に違うディスクを販売するのは混乱が生じまた効率的でもないことから、異なる複数の言語で予めメニューを作成するものである。従って、上述した各メニュー画面は、図６及び図７に示すように、ＬＵ毎に作成されている。
【００７０】
また、ＤＶＤ−ＶＩＤＥＯ規格では、図８に示すように、プログラムチェーン（PGC:Program Chain）構造が規定されており、プレゼンテーションのエッセンス及び順序を述べたＰＧＣ情報（PGCI:PGC Information）に基づいて、整数個のプログラムＰＧ（PG:Program）により構成されるＰＧＣとしてデータが記録されている。ＰＧＣは、上述した各メニュー画面、ビデオデータ、タイトル等を提供する論理ユニットであり、ＰＧＣＩに基づいて構成される。１つのＰＧＣは、整数個のＰＧに分割されてる。ＰＧは、ＰＧＣの内容を分割した単位であり、１つのＰＧは、整数個のセル（Cell）からなる。ＤＶＤの再生装置では、このＰＧＣＩを取得して、このＰＧＣＩの情報に基づいてＰＧＣを再生する。また、ＰＧＣＩは、プレ・コマンドエリア（Pre-Command）と、ポストコマンドエリア（Post-Command）と、プレゼンテーションコントロールブロックとからなり、このプレゼンテーションコントロールブロックにより、Ｃｅｌｌの再生順序と、プレゼンテーションを制御するためのナビゲーションコマンドが与えられる。
【００７１】
すなわち、マルチストーリーやインタラクティブストーリー等の特殊再生モード（special mode）が設定されている映画等を再生する場合、ＰＧＣに基づき、再生されることとなる。また、このＰＧＣは１つのメニュー画面全体の枠組みとしての意味も有し、全てのメニュー画面データーを含むこととなる。
【００７２】
なお、１つのメニュー画面が複数のページから構成される場合があるが、ＰＧＣは、メニュー画面を構成するページの枚数にかかわらず、１つのメニューには１つのＰＧＣが対応する。つまり、例えば、６種類のメニュー（それぞれ複数のページで構成されるメニュー）には６つのプログラムチェインＰＧＣが対応する。
【００７３】
つぎに、メニュー画面を構成するために必要なデータ及びナビゲーションコマンドについて、図９を用いて説明する。
【００７４】
図９は、メニュー画面を構成するデータ（メニュー画面データ）の構造を示す図である。なお、メニュー画面データの構造は、実際には、さらに細分化されているが（例えば、ＤＶＤ−ＶＩＤＥＯ規格において規定されるＶＯＢＵ内のナビゲーションパック（ＮＡＶＩ＿ＰＡＣ）に示されているものもある。）、図示および説明の簡略化のために、本発明を適用したオーサリング装置の説明に必要な部分のみを簡略化して示してある。
【００７５】
プリコマンドＰＲＥ−ＣＭＤには、１つのメニュー画面（ＰＧＣ）の再生が始まるときに、最初に実行されるナビゲーションコマンド（主に後述するボタンコマンドＢＴＮ−ＣＭＤの実行に必要なパラメータの初期化命令）が記述されている。
【００７６】
アクセスユニットＡＣＣＥＳＳ−ＵＮＩＴは、メニュー画面のサブピクチャ（図１，図２）のデータ（画素データおよび色データ）が格納されている。このアクセスユニットＡＣＣＥＳＳ−ＵＮＩＴには、サブピクチャ画素データおよびボタン色データＢＴＮ−ＣＯＬＯＲとが含まれている。
【００７７】
ハイライト情報データＨＬＩは、ユーザーが、メニュー画面の操作ボタンをリモートコントローラのキー等を用いて選択した場合、選択された操作ボタンの色を変更するために用いられる。このように、選択された操作ボタンの色を変更する処理をハイライト（highlight）処理と称する。ハイライト情報データＨＬＩは、ハイライト処理に用いられる色データを格納し、ハイライト処理実行の前後の色（ハイライト色）を示すハイライト色データと、各操作ボタンのメニュー内での相対的位置関係、リモートコントローラ等のキー操作による操作ボタンの選択に必要な操作ボタン間の隣接情報と、操作ボタンに対応するナビゲーションコマンドを示すボタン情報データＢＴＮ ＩＮＦＯとが含まれている。
【００７８】
ポストコマンドＰＯＳＴ−ＣＭＤには、ｌつのメニュー画面（ＰＧＣ）に対応するタイトルの映像データの再生終了時に、最後に実行されるナビゲーションコマンド（主に、ボタンコマンドＢＴＮ−ＣＭＤの実行結果として得られるパラメータによって決定された分岐先へ飛ぷためのジャンプ命令）が記述される。
【００７９】
サブピクチャ画素データは、メニュー画面として用いられるサブピクチャのデータ（図１，図２）を格納する。なお、メニュー画面が複数のページから構成される場合には、サブピクチャ画素データは、複数のページそれぞれに対応して複数段けられる。また、上述のように、サブピクチャ画素データは、アクセスユニットＡＣＣＥＳＳ−ＵＮＩＴの構成要素である。
【００８０】
ボタン色データＢＴＮ−ＣＯＬＯＲは、操作ボタンがハイライト処理されていない場合（非選択時）の色情報、および、操作ボタンがハイライト処理されている場合（選択時）の色情報の参照先のカラーパレットを示すデータを格納する。なお、上述のように、ボタン色データＢＴＮ−ＣＯＬＯＲはアクセスユニットＡＣＣＥＳＳ−ＵＮＩＴの構成要素である。
【００８１】
ハイライト色データは、操作ボタンのハイライト処理に用いられる色情報を格納する。この色情報は、操作ボタンの実際の色の情報ではなく、ボタン色データＢＴＮ−ＣＯＬＯＲが示すカラーパレットへのポインタを示しており、操作ボタンの選択時のハイライト色と、ボタンコマンドＢＴＮーＣＭＤの実行時のハイライト色の２種類とを含む。なお、上述のように、ハイライト色データはハイライト色データＨＬＩの構成要素であり、選択色データＳＥＬＥＣＴ−ＣＯＬＯＲおよびアクション色データＡＣＴＩＯＮ−ＣＯＬＯＲが含まれている。
【００８２】
ボタン情報データＢＴＮ−ＩＮＦＯは、メニュー画面内の各操作ボタンの相対的位置関係と、リモートコントローラのキー操作で操作ボタンの選択を移動する際に必要となるボタン間の隣接情報と、操作ボタンに付随する実行時のナビゲーションコマンドとを格納し、メニュー画面の各操作ボタンの機能ロジックを記述する部分として中心的な役割を果たす。このボタン情報データは、メニュー画面に存在する数だけある。なお、上述のように、ボタン情報データＢＴＮ−ＩＮＦＯはハイライト色データＨＬＩの構成要素であり、ボタン位置データＢＴＮ−ＰＯＳＩＳＯＮ、隣接ボタンデータＡＤＪ−ＢＴＮおよびボタンコマンドＢＴＮ−ＣＭＤを含む。
【００８３】
選択色データＳＥＬＥＣＴ−ＣＯＬＯＲは、操作ボタンの選択時のハイライト色のカラーパレットへのポインタを格納する。
【００８４】
アクション色データＡＣＴＩＯＮ−ＣＯＬＯＲは、操作ボタンの実行時（ボタンコマンドＢＴＮ−ＣＭＤが実行されるときと実行の直後）のハイライト色のカラーパレットへのポインタを格納する。なお、上述のように、アクション色データＡＣＴＩＯＮ−ＣＯＬＯＲは、ハイライト色データの構成要素である。
【００８５】
ボタン位置データＢＴＮ−ＰＯＳＩＴＩＯＮは、長方形と定められた各操作ボタンの論理的表示領域の左上と右下の座標、および、各操作ボタンの非選択時の色情報のカラーパレット（データＢＴＮ−ＣＯＬＯＲの）へのポインタを格納する。各操作ボタンのメニュー画面内での相対的位置が、操作ボタンそれぞれの画素の座標で表現される。なお、ｌつのメニュー画面内ににおいては、操作ボタンの数にかかわらず、非選択時の色はｌ種類のみである。また、上述のように、ボタン位置データＢＴＮ−ＰＯＳＩＴＩＯＮは、ボタン情報データＢＴＮ−ＩＮＦＯの構成要素である。
【００８６】
隣接ボタンデータＡＤＪ−ＢＴＮは、リモートコントローラのキーを用いた操作ボタンの選択の際に必要となるボタン間の隣接情報を格納する。なお、上述のように、隣接ボタンデータＡＤＪ−ＢＴＮはボタン情報データＢＴＮ−ＩＮＦＯの構成要素である。
【００８７】
ボタンコマンドＢＴＮ−ＣＭＤは、操作ボタンの実行時のナビゲーションコマンドを格納し、操作ボタンそれぞれの機能を直接的に定義する。なお、上述のように、ボタンコマンドＢＴＮ−ＣＭＤはボタン情報データＢＴＮ−ＩＮＦＯの構成要素である。
【００８８】
また、ボタン位置データＢＴＮ−ＰＯＳＩＴＩＯＮ、隣接ボタンデータＡＤＪ−ＢＴＮ及びボタンコマンドＢＴＮ−ＣＭＤは、メニュー画面を構成する操作ボタンの数だけ存在する。
【００８９】
上述したサブピクチャ画素データ、ボタン色データＢＴＮ−ＣＯＬＯＲ、ハイライト色データ、ボタン情報データＢＴＮ−ＩＮＦＯ、選択色データＳＥＬＥＣＴ−ＣＯＬＯＲ、アクション色データＡＣＴＩＯＮ−ＣＯＬＯＲ、ボタン位置データＢＴＮ−ＰＯＳＩＴＩＯＮ、隣接ボタンデータＡＤＪ−ＢＴＮ、ボタンコマンドＢＴＮ−ＣＭＤは、まとめてＰＧを構成する。このＰＧは、メニュー画面を構成するページ数分だけ存在することになる。
【００９０】
以上のように、ｌつのメニュー画面を構成するためには、図９に示すデータ構造に含まれるデーターの全てを記述する必要がある。また、メニュー画面として用いられるサブピクチャ画素データを作成するために必要となるデータの種類は多く、これらのデータをメニュー画面ごとに全て作成するのは非常に手間がかかる。従って、サブピクチャの画素データをシステマティックに作成することができれば、編集作業の効率が向上し、作業時間の短縮も可能となる。
【００９１】
つぎに、本発明を適用した実施の形態であるオーサリング装置について、図面を参照しながら説明する。
【００９２】
図１０に示す本発明を適用した実施の形態であるオーサリング装置１０は、画像や音声を圧縮符号化して多重化することによりＤＶＤ−ＶＩＤＥＯ規格で光ディスクに対して記録する記録用データを生成する。
【００９３】
オーサリング装置１０は、動画像を符号化するビデオエンコーダ１１と、音声を符号化するオーディオエンコーダ１２と、静止画像等を符号化するサブピクチャエンコーダと、それぞれ符号化されたデータを記憶するサーバ１４と、符号化されたデータを多重化し記録用データを生成するマルチプレクサ１５と、装置全体の動作を管理するシステムコントローラ１６とを備えている。また、このオーサリング装置１０は、生成された記録用データを検査するビューア１７と、生成された記録用データを磁気テープ等の所定の記録媒体に記録するテープストリーマ１８とを備えている。
【００９４】
ビデオエンコーダ１１は、入力されたビデオ信号Ｓ１０をＭＰＥＧ方式に基づいて圧縮符号化し、その結果得られるビデオ符号化データＳ１１をサーバ１４の所定記憶領域に順次格納する。このビデオエンコーダ１１は、符号化に際して必要な各種情報、例えば符号化処理を行う動画像の本数や符号化データを格納する記憶領域のアドレス情報をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に符号化処理を実行してビデオ符号化データＳ１１をサーバ１４の指示された記憶領域に格納する。
【００９５】
オーディオエンコーダ１２は、入力されたオーディオ信号Ｓ１２をＭＰＥＧ音声方式又はＡＣ−３方式（変形離散コサイン変換（ＭＤＣＴ）とスペクトラムエンベロープ符号化を組み合わせた圧縮符号化方式）に基づいて圧縮符号化し、その結果得られるオーディオ符号化データＳ１３をサーバ１４の所定記憶領域に順次格納する。このオーディオエンコーダ１２も、符号化に際して必要な各種情報、例えば符号化処理を行う音声の本数や符号化データを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に符号化処理を実行してオーデイオ符号化データＳ１３をサーバ１４の指示された記憶領域に格納する。
【００９６】
サブピクチャエンコーダ１３は、字幕等から形成されるサブピクチャ信号Ｓ１４を所定の符号化方式で符号化し、その結果得られるサブピクチャ符号化データＳ１５をサーバ１４の所定記憶領域に順次格納する。このサブピクチャエンコーダ１３も同様に、符号化に際して必要な各種情報、例えば符号化処理を行うピクチャの枚数や符号化データを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基にサブピクチャ符号化データＳ１５をサーバ１４の指示された記憶領域に格納する。ここで、このサブピクチャエンコーダ１３により生成されるサブピクチャ符号化データＳ１５には、上述したＤＶＤ−ＶＩＤＥＯ規格により定められているサブピクチャのビットマップデータとともにナビゲーションコマンド等も含まれている。
【００９７】
なお、このサブピクチャエンコーダ１３については、詳細を後述する。
【００９８】
サーバ１４は、複数の入出力ポートを有するハードディスクアレイからなり、入力される各符号化データＳ１１、Ｓ１３、Ｓ１５をそれぞれ異なる記憶領域に格納する。また、サーバ１４には、各符号化データＳ１１、Ｓ１３、Ｓ１５の記憶領域の他にも、後述するマルチプレクサ１５によって生成される多重化データを格納する記憶領域も確保されており、この多重化データをその記憶領域に格納する。すなわち、サーバ１４は、各符号化データＳ１１、Ｓ１３、Ｓ１５や多重化データを記憶し得るだけの充分な記憶領域を有している。
【００９９】
また、サーバ１４は、各エンコーダ１１〜１３とを接続するインターフェースとして、高速伝送が可能なＳＣＳＩ等が使用されている。
【０１００】
マルチプレクサ１５は、各符号化データＳ１１、Ｓ１３、Ｓ１５を処理対象データとしてサーバ１４から順次読み出し、これらのデータをＤＶＤ−ＶＩＤＥＯ規格に沿って多重化し、その結果得られる多重化データＳ１７を記録用データとしてサーバ１４の所定記憶装置に順次格納する。このマルチプレクサ１５は、多重化に際して必要な情報、例えば各符号化データＳ１１、Ｓ１３、Ｓ１５が格納されている記憶領域のアドレス情報や多重化したデータを格納する記憶領域のアドレス情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に多重化処理を実行して多重化データＳ１７をサーバ１４の指示された記憶領域に格納する。
【０１０１】
ビューア１７は、各エンコーダ１１〜１３の符号化処理やマルチプレクサ１５の多重化処理が正常に行われたか否かを検査するためのものである。このビューア１７は、サーバ１４に格納されている多重化データＳ１７を読み出して復号し、これをモニタに出力する。このようなビューア１７を設けることにより、このオーサリング装置１０では、符号化処理や多重化処理が正常に行われたか否かを即座にかつ容易に検査することができる。なお、このビューア１７も、復号するに際して必要な情報、例えば多重化データＳ１７が格納されている記憶領域のアドレス情報や符号化方式の情報をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基に復号処理を実行する。
【０１０２】
テープストリーマ１８は、ディスク製造工程に多重化データＳ１７を渡すためにこの多重化データＳ１７を磁気テープ等に記録するものである。このテープストリーマ１８は、記録動作に必要な情報、例えば多重化データＳ１７が格納されている記憶領域のアドレス情報や記録方式の情報等をネットワーク１９を介してシステムコントローラ１６から受け、これらの情報を基にサーバ１４から順次多重化データＳ１７を読み出して磁気テープ等に記録する。このようなテープストリーマ１８を設けることにより、このオーサリング装置１０では、ディスク製造工程に渡す記録用データである多重化データＳ１７を即座にかつ容易に記録することができる。
【０１０３】
なお、マルチプレクサ１５やビューア１７、及びテープストリーマ１８と、サーバ１４との接続は、高速伝送が可能なＳＣＳＩ等のインターフェースが使用されている。
【０１０４】
システムコントローラ１６は、各エンコーダ１１〜１３やマルチプレクサ１５、或いはビューア１７やテープストリーマ１８の動作を管理すると共に、サーバ１４のデータ記録領域を管理する。
【０１０５】
具体的には、システムコントローラ１６はオペレータによって入力されたオーサリング作業に必要なオーサリング情報Ｓ１８を基に各エンコーダ１１〜１３に符号化処理開始の指示を与える。また、システムコントローラ１６は各エンコーダ１１〜１３の符号化処理が終了すると、マルチプレクサ１５に多重化処理開始の指示を与える。またシステムコントローラ１６は、マルチプレクサ１５の処理が終了すると、ビューア１７やテープストリーマ１８に対して処理開始の指示を与える。
【０１０６】
また、システムコントローラ１６は、各エンコーダ１１〜１３によって生成された各符号化データＳ１１、Ｓ１３、Ｓ１５やマルチプレクサ１５によって生成された多重化データＳ１７のサーバ１４上の記憶領域を管理し、各エンコーダ１１〜１３に対してデータ格納先としてそれぞれ異なる記憶領域を指示すると共に、マルチプレクサ１５に対してはデータ格納先として符号化データＳ１１、Ｓ１３、Ｓ１５とは異なる記憶領域を指示する。
【０１０７】
このようなシステムコントローラ１６を設けることにより、各エンコーダ１１〜１３等は、自分に割り当てられた作業を実行することができると共に、生成したデータＳ１１、Ｓ１３、Ｓ１５及びＳ１７の格納先が重複しないようにしてサーバ１４を各装置間で共有することができる。
【０１０８】
なお、システムコントローラ１６からの動作指示やデータ格納先の指示はそれぞれネットワーク１９を介して各エンコーダ１１〜１３等に与えられる。
【０１０９】
つぎに、図１１を参照して上述したサブピクチャエンコーダ１３の説明をする。
【０１１０】
サブピクチャエンコーダ１３は、量子化部２０と、符号化部２２と、制御部２４と、操作端末２５とを有している。
【０１１１】
量子化部２０は、タイムコード発生回路（ＴＣＧ）２０２、アナログ／デジタル変換回路（Ａ／Ｄ変換回路）２０４、セレクタ回路（ＳＥＬ）２０６および量子化回路（Ｑ）２０８から構成される。
【０１１２】
符号化部２２は、可変長符号化回路（ＶＬＣ）２２０、復号回路（ＩＶＬＣ）２２２および加算回路２２４から構成される。
【０１１３】
操作端末２５は、例えばコンピュータ装置等からなり、主制御装置２３１と、入力装置となるキーボード・マウス２３２と、出力装置となるモニタ２３３とから構成される。
【０１１４】
このような構成を有するサブピクチャエンコーダ１３は、外部に接続されたアナログＶＴＲ装置等から入力されるアナログ形式のサブピクチャの映像信号、または、外部に接続されたデジタルＶＴＲ装置あるいはコンピュータ等から入力される例えば８ビットデジタル形式の映像データの輝度信号であるサブピクチャ信号Ｓ１４を、ＤＶＤ−ＶＩＤＥＯ規格のサブピクチャの符号化データとして適合するように４値（２ビット；００ｄ，０１ｄ，１０ｄ，１１ｄ）に量子化し、量子化したサブピクチャの画素データを符号化してサーバ１４に対して出力する。また、サブピクチャエンコーダ１３は、一度、符号化したサブピクチャの画素データを復号し、背景となる動画の映像データ（メインピクチャ）と重ね合わせて操作端末２５のモニタ装置２３３に表示し、ユーザーに示す。また、サブピクチャエンコーダ１３は、操作端末２５によって、メニュー画面を生成するために必要なナビゲーションコマンド等を生成し、このナビゲーションコマンドを、画素データとともにサブピクチャ符号化データＳ１５として、サーバ１４に対して出力する。
【０１１５】
サブピクチャエンコーダ１３において、Ａ／Ｄ変換回路２０４は、外部から入力されるアナログ形式の映像データの輝度信号をデジタル形式に変換してセレクタ回路２０６の入力端子ｂに対して出力する。
【０１１６】
セレクタ回路２０６は、外部およびＡ／Ｄ変換回路２０４からそれぞれ入力端子ａ，ｂに入力されるデジタル形式の映像データの輝度信号のいずれかを選択して量子化回路２０８に対して出力する。
【０１１７】
量子化回路２０８は、セレクタ回路２０６から入力された８ビットデジタル形式の映像データの輝度信号を、例えば、輝度信号の値が０〜６３（００ｈ〜３Ｆｈ）の範囲を画素データの値０（００）に、輝度信号の値が６４〜１２７（４０ｈ〜７Ｆｈ）の範囲を画素データの値１（０１）に、輝度信号の値が１２８〜１９１（８０ｈ〜ＢＦｈ）の範囲を画素データの値２（１０）に、輝度信号の値が１９２〜２５５（Ｃｏｈ〜ＦＦｈ）の範囲を画素データの値３（１１）に量子化し、量子化結果を可変長符号化回路２２０に対して出力する。
【０１１８】
可変長符号化回路２２０は、量子化回路２０８から入力された量子化結果をランレングス符号化し、サブピクチャ画素データとして制御部２４および復号回路２２２に対して出力する。
【０１１９】
制御部２４は、可変長符号化回路２２０から入力されたサブピクチャ画素データをバッファリングし、あるいは、例えば、ハードディスクを用いて記録・再生することにより、サブピクチャの画素データのタイムコードが示すタイミングで出力する。
【０１２０】
制御部２４は、操作端末２５から入力される指示データに含まれ、エンコードの対象を示すサブピクチャそれぞれのタイムコードの範囲と、タイムコード発生回路２０２から入力される映像データのタイムコードＴＣとの比較結果に基づいて、可変長符号化回路２２０のデータの取り込み、および、復号回路２２２の復号処理のタイミング等を制御する。
【０１２１】
制御部２４は、サブピクチャエンコーダ１３のエンコード結果に基づいて、図１２に示すように、量子化回路２０８から入力される量子化結果の値が１〜３（０１〜１１）となる画素が存在する範囲にサブピクチャがあると判定〔量子化結果の値が０（００）となる画素のみが存在する部分をサブピクチャがないと判定〕してサブピクチャが存在する矩形領域を導出し、この矩形領域の左上および右下を示す座標値〔（ＸＳ，ＹＳ），（ＸＥ，ＹＥ）〕を求める。なお、制御部２４が求めた矩形領域の座標値〔（ＸＳ，ＹＳ），（ＸＥ，ＹＥ）〕は、加算回路２２４による背景映像とサブピクチャの重ね合わせ処理の制御に用いられる。
【０１２２】
復号回路２２２は、可変長符号化回路２２０から入力されたサブピクチャデータに対して可変長符号化回路２２０と逆の処理を行い、量子化回路２０８の量子化結果に対応するデータを生成して加算回路２２４に対して出力する。
【０１２３】
加算回路２２４は、制御部２４の制御に従って、復号回路２２２から入力される量子化結果の内、図１２に示した矩形領域の部分の画素データに係数ｋ（０≦ｋ≦１）を乗算し、外部から入力される背景映像データ〔バックグラウンド；例えば、ビデオエンコーダ１１に入力される映像データと同じである。〕に係数（１−ｋ）を乗算し、これらの乗算値を加算して操作端末２５のモニタ２３３に主制御部２３１を介して出力する。なお、加算回路２２４は、矩形領域以外の背景映像データに対しては係数（１−ｋ）の乗算処理、および、係数ｋを乗算した量子化値の加算処理を行わずに素通しする。
【０１２４】
操作端末２００のモニタ２３３は、加算回路２２４から入力される映像データを表示してユーザーに示す。ユーザーは、操作端末２５のモニタ２３３に表示された映像を見ながらサブピクチャの映像の濃度、あるいは、サブピクチャの表示のタイミング等を確認することができ、さらに、操作端末２５のキーボード・マウス２３２を介してデータを入力することにより、サブピクチャの映像の濃度〔係数ｋ（１−ｋ）〕および表示のタイミング等を調整する。
【０１２５】
すなわち、この操作端末２５は、このＤＶＤオーサリング装置１０におけるメニュー作成装置としての機能を有している。この操作端末２５は、ユーザーがデータ構造を意識せずに、必要なデータを漏れなくメニュー画面を構成するデータである画素データやナビゲーションコマンドの記述をすることができ、しかも、ユーザーによるデータの記述ミスに起因するエラーの発生を未然に防ぐことができるように構成されている。つまり、操作端末２５は、いわば、ナビゲーションコマンドおよびメニュー画面のサブピクチャ作成専用の非常に高いインテリジェンスを有するコンパイラとして機能する。
【０１２６】
ユーザーは、操作端末２５が提供するＧＵＩ（Graphical User Interface）により、例えば会話形式で（インタラクティブに）データの記述作業を進めることができる。操作端末２５は、ユーザーがインタラクティブに記述したデータを用いて、ＤＶＤ−ＶＩＤＥＯ規格に適合するメニュー画面を構成するデータをソフトウエア処理により自動的に作成するとともに、背景映像と重ね合わせ処理して表示し、ユーザーに示す。
【０１２７】
以上のように、サブピクチャエンコーダ１３は、字幕データやメニュー画面を表示する際に必要なサブピクチャ符号化データＳ１５を符号化し、サーバ１４に供給する。具体的に、このサブピクチャ符号化データＳ１５としては、上述した図９に示す、プリコマンドＰＲＥ−ＣＭＤ、ポストコマンドＰＯＳＴ−ＣＭＤ、サブピクチャ画素データ、ボタン色データＢＴＮ−ＣＯＬＯＲ、選択色データＳＥＬＥＣＴ−ＣＯＬＯＲ、アクション色データＡＣＴＩＯＮ−ＣＯＬＯＲ、ボタン位置データＢＴＮ−ＰＯＳＩＳＯＮ、隣接ボタンデータＡＤＪ−ＢＴＮ、ボタンコマンドＢＴＮ−ＣＭＤが含まれている。
【０１２８】
つぎに、このサブピクチャエンコーダ１３の操作端末２５で管理するサブピクチャ符号化データＳ１５の管理ファイルについて説明する。
【０１２９】
この操作端末２５では、上述したように、メニュー画面を表示する為に必要なサブピクチャ符号化データＳ１５を生成するとともに、この生成したサブピクチャ符号化データＳ１５を保存する。この操作端末２５では、この保存するサブピクチャ符号化データＳ１５をディレクトリ構造でファイル管理を行う。
【０１３０】
具体的に、操作端末２５がファイル管理をするディレクトリ構造について図１３を用いて説明する。
【０１３１】
操作端末２５での作業環境の最上位ディレクトリは、ＭＥＮＵディレクトリである。この操作端末２５で、メニュー画面を表示する際に必要なサブピクチャ符号化データＳ１５を生成し、このサブピクチャ符号化データＳ１５を保存する場合は、このＭＥＭＵディレクトリから下位のディレクトリにファイルに保存することになる。
【０１３２】
このＭＥＮＵディレクトリの下位ディレクトリには、ＰＲＪディレクトリが展開される。このＰＲＪディレクトリは、作成する映画等の作品毎に設けられ、このＰＲＪディレクトリ以下に、ＤＶＤ−ＶＩＤＥＯ規格に沿ったメニュー構造に従ってディレクトリが展開される。
【０１３３】
ＶＭＧＭディレクトリ及びＶＴＳＭディレクトリは、各ＰＲＪｎ（ｎは整数であり、プロジェクト番号を示す。）ディレクトリの下位に展開されるディレクトリである。また、このＶＭＧＭディレクトリ及びＶＴＳＭディレクトリの下位ディレクトリには、それぞれＬＵｍ（ｍは整数であり登録されている言語の番号を示す。）ディレクトリが展開されており、作成するメニュー画面の言語毎にディレクトリが展開するようになっている。
【０１３４】
ＶＭＧＭディレクトリは、上述したＶＭＧＭ領域で作成されるメニュー画面が保存されるディレクトリである。具体的には、このＶＭＧＭ領域で作成されるメニュー画面であるタイトルメニュー（Title Menu）に対応してランゲージユニット毎にディレクトリが展開して、サブピクチャ符号化データＳ１５が保存される。
【０１３５】
ＶＴＳＭディレクトリは、上述したＶＴＳＭ領域で作成されるメニュー画面のディレクトリである。具体的には、このＶＴＳＭ領域で作成されるメニュー画面であるルートメニュー（Root Menu）、チャプターメニュー（Chapter Menu）、オーディオメニュー（Audio Menu）、サブタイトルメニュー（Sub Title Menu）、アングルメニュー（Angle Menu）に対応してランゲージユニット毎にディレクトリが展開して、サブピクチャ符号化データＳ１５が保存される。
【０１３６】
なお、ＶＴＳＭの各メニューのディレクトリ（Root,Chapter,Audio,Sub Title,Angle）の下位には、ＰＧＣ単位のディレクトリが展開される。このＰＧＣは、上述したように、マルチストーリーやインタラクティブストーリー等の特殊再生モード（special mode）が設定されている映画等を再生する場合、ＰＧＣに基づき再生されることとなる。このことから、マルチストーリーやインタラクティブストーリー等の特殊再生モード（special mode）が設定されている映画等を作成する場合、複数のＰＧＣが用意される。そのため、作成するメニュー画面も、特殊再生を行うために設定されているＰＧＣの数だけ必要となる。
【０１３７】
従って、ＶＴＳＭの各メニューのディレクトリ（Root,Chapter,Audio,Sub Title,Angle）の下位にＰＧＣの数だけディレクトリが展開される。
【０１３８】
また、ＶＭＧＭディレクトリの場合は、１つのＰＧＣのみしか示していないが、これは、ＶＭＧＭでのタイトルメニューにおいては、ＤＶＤ−ＶＩＤＥＯ規格のフォーマット上では、１つのＰＧＣしか使用しないからである。
【０１３９】
上述のようにディレクトリが展開してファイル管理をする操作端末２５は、最下位ディレクトリである各ＰＧＣ＊（この＊は、整数を表し、作成するＰＧＣの番号を表す。）ディレクトリに存在するファイルに、各メニュー画面のサブピクチャ符号化データを保存する。具体的に、各ＰＧＣディレクトリには、図１４に示すように、サブピクチャ符号化データとしてサブピクチャ画素データ（ＳＰ）、ボタン色データ（ＢＴＮ−ＣＯＬＯＲ）、選択色データ（ＳＥＬＥＣＴ−ＣＯＬＯＲ）、アクション色データ（ＡＣＴＩＯＮ−ＣＯＬＯＲ）、ボタン位置データ（ＢＴＮ−ＰＯＳＩＳＯＮ）、隣接ボタンデータ（ＡＤＪ−ＢＴＮ）、ボタンコマンド（ＢＴＮ−ＣＭＤ）の各ファイルが含まれている。
【０１４０】
また、操作端末２５での作業環境の最上位ディレクトリであるＭＥＮＵディレクトリの下位ディレクトリには、ライブラリディレクトリ（ＬＩＢ）が展開される。このライブラリディレクトリは、生成したサブピクチャ符号化データＳ１５を一覧化し、管理するためのディレクトリである。このライブラリディレクトリは、この操作端末２５のオペレータが任意に付けたディレクトリ名の下位ディレクトリが展開される。そして、このオペレータが任意に付けたディレクトリ名の下位ディレクトリには、上述したＰＧＣ＊以下に保存されるサブピクチャ符号化データと同じデータのファイルが保存される。
【０１４１】
このようなディレクトリ構造を有してサブピクチャ符号化データＳ１５を管理する操作端末２５は、ＰＲＪディレクトリの最下位ディレクトリとなるＰＧＣ＊単位のディレクトリ全てにメニュー画面を構成するために必要な情報であるサブピクチャ符号化データの各ファイルが保存されることにより、処理を終了する。そして、操作端末２５は、処理を終了すると、各ＰＧＣ＊のデータを制御部２４に供給し、サブピクチャ符号化データＳ１５として符号化し、サーバ１４に供給する。
【０１４２】
また、操作端末２５では、メニュー画面を構成するために必要なデータとなるサブピクチャ符号化データを生成する処理を終了したとき、または、処理の最中に、ＰＧＣ＊内のデータをライブラリディレクトリ内に保存することができる。このとき、操作端末２５のオペレータは、ライブラリ名として任意のディレクトリ名を設定し（例えば、図１３に示すように、ＡＢＣ，ＤＥＦ，ＧＨＩといったライブラリ名を設定し）、ライブライディレクトリに下位ディレクトリを作る。そして、この任意のディレクトリ名としたライブラリディレクトリの下位ディレクトリに、任意のＰＧＣ＊ディレクトリの各ファイルのデータをコピーする。
【０１４３】
このことにより、操作端末２５では、作成したメニュー画面を構成するサブピクチャ符号化データを別途管理でき、他の作品や他のＤＶＤ（媒体）のサブピクチャ符号化データを生成する際に、流用し、使用することができるようになる。なお、ＰＧＣ＊の各ファイルのデータをコピーする際に、ボタンコマンド（ＢＴＮ−ＣＭＤ）のデータはコピーしないように設定してもよい。これは、このボタンコマンド（ＢＴＮ−ＣＭＤ）のデータは、メニュー画面毎独立に機能するものであるため、他のメニュー画面を作成する際には、必要がないからである。
【０１４４】
【発明の効果】
本発明に係る編集装置では、副映像符号化手段が、主映像の符号化データのメニュー構造に応じて展開されメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを有し、副映像の符号化データを各メニューに対応した下位ディレクトリ内のファイルに格納することにより、副映像の符号化データを生成する際の作業工程を簡略化でき、効率的に符号化することができる。
【０１４５】
また、本発明に係る編集装置では、副映像符号化手段が任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを有していることにより、既に生成した副映像の符号化データを複製して他の副映像の符号化データを生成することができ、作業工程を簡略化できる。
【０１４６】
本発明に係るデータ編集方法では、主映像の符号化データのメニュー構造に応じて展開されメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを作成し、副映像の符号化データを、各メニューに対応した下位ディレクトリ内のファイルに格納することにより、副映像の符号化データを生成する際の作業工程を簡略化でき、効率的に符号化することができる。
【０１４７】
また、本発明に係るデータ編集方法では、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを作成することにより、既に生成した副映像の符号化データを複製して他の副映像の符号化データを生成することができ、作業工程を簡略化できる。
【図面の簡単な説明】
【図１】ＤＶＤ−ＶＩＤＥＯ規格において定められているサブピクチャを説明する図である。
【図２】ＤＶＤ−ＶＩＤＥＯ規格において定められているサブピクチャを説明する図である。
【図３】ＤＶＤ−ＶＩＤＥＯ規格において定められているメニュー画面を説明する図である。
【図４】ＤＶＤ−ＶＩＤＥＯ規格において定められているデータのボリューム構造を説明する図である。
【図５】ＤＶＤ−ＶＩＤＥＯ規格において定められているデータのボリューム構造を説明する図である。
【図６】ＤＶＤ−ＶＩＤＥＯ規格において定められているタイトルメニューを説明する図である。
【図７】ＤＶＤ−ＶＩＤＥＯ規格において定められているルートメニュー，チャプターメニュー，オーディオメニュー，アングルメニュー，サブピクチャメニューを説明する図である。
【図８】ＤＶＤ−ＶＩＤＥＯ規格において定められているＰＧＣを説明する図である。
【図９】メニュー画面を生成する際に必要となるナビゲーションコマンド等を説明する図である。
【図１０】本発明を適用したオーサリング装置のブロック構成図である。
【図１１】上記オーサリング装置のサブピクチャエンコーダのブロック構成図である。
【図１２】サブピクチャが存在する矩形領域を説明する図である。
【図１３】サブピクチャ符号化データが保存されるファイルのディレクトリ構造を示す図である。
【図１４】サブピクチャ符号化データが保存されるファイルの内容を示す図である。
【図１５】ＤＶＤ−ＶＩＤＥＯ規格において定められているメニュー画面を説明する図である。
【符号の説明】
１０ オーサリング装置、１１ ビデオエンコーダ、１２ オーディオエンコーダ、１３ サブピクチャエンコーダ、１４ サーバ、１５ マルチプレクサ、１６ システムコントローラ、１７ ビューア、１８ テープストリーマ、２０量子化部、２２ 符号化部、２４ 制御部、２５ 操作端末[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an editing apparatus and a data editing method for generating recording data to be recorded on a recording medium such as an optical disk by multiplexing video and audio encoded data, and in particular, sub-video data in the DVD-VIDEO standard. The present invention relates to an editing apparatus and a data editing method to be generated.
[0002]
[Prior art]
In recent years, there has been proposed an optical disc called a DVD that can record a large amount of data by compressing and encoding images and sounds. In this optical disc called DVD, a DVD-VIDEO standard that provides contents such as movies and animations has been proposed.
[0003]
The DVD-VIDEO standard stipulates that video such as movies and animations is recorded after being compressed and encoded by the MPEG method, and that audio is compressed and encoded by a method such as MPEG or AC-3. In the DVD-VIDEO standard, a sub-picture is defined as data for providing a still image such as a question / response screen (menu screen).
[0004]
A menu screen using such a sub-picture defined by DVD-VIDEO will be described.
[0005]
In the DVD-VIDEO standard, for example, a plurality of audio / video data obtained by photographing the same object from a plurality of angles, in addition to sequentially reproducing the video data in the same manner as a video tape (normal playback mode). Is selected according to the user's operation, and is reproduced and displayed (multi-angle reproduction mode). In addition, the audio / video data of the main story (main story) of a movie that contains multiple stories and the sub-story accompanying the main story can be selected and played according to user operations (multi (Story playback mode) and audio / video data created in advance so that the user can select story development is selected and played back interactively according to user operations at each branch point of the story (interactive story playback) Mode) and the like. Therefore, a user who watches a movie or the like using a DVD recorded based on the DVD-VIDEO standard can record and reproduce audio / video data in such a special reproduction mode. is there.
[0006]
The DVD-VIDEO standard defines that a plurality of audio channels are multiplexed and recorded. Therefore, the user can select which of the plurality of audio channels is used for reproduction.
[0007]
When playing a movie with a special playback mode (special mode) such as a multi-story or interactive story, or when selecting multiple audio channels, a question is displayed to the user and displayed. A still image question / response screen used for the user's response operation is required. The DVD-VIDEO standard stipulates that a menu screen serving as a question / response screen can be set using a sub-picture.
[0008]
FIG. 15 is a diagram for explaining the menu screen.
[0009]
Specifically, the menu screen displays a main picture shown in FIG. 15A, a sub-picture shown in FIG. 15B, and a highlight process shown in FIG. The operation buttons selected based on (Hifhlight Informaion) are superimposed and displayed as shown in FIGS.
[0010]
The sub picture that can constitute the menu screen in this way is a 2-bit uniquely assigned to each pixel divided into 720 × 478 (in the case of NTSC video system) in the DVD-VIDEO standard. Pixel data. That is, the sub-picture is encoded in a bitmap format corresponding to the picture pixels.
[0011]
In the sub-picture, 2-bit pixel data values [0 to 3 (decimal)] assigned to each pixel correspond to unique colors, and each of the sub-picture pixels has four types of colors. It is prescribed that it is attached.
[0012]
The highlight process used on the menu screen is a process that functions as an operation button on the menu screen. That is, it is stipulated that an operation button can be assigned on the menu screen, and a desired response can be made by selecting and executing the assigned operation button. For example, the user uses a remote controller or the like to move the display of the selection button on the menu screen as shown in FIGS. 15D to 15F, select the operation button, and send a desired response to the displayed question. To do.
[0013]
In the DVD-VIDEO standard, as information used for the highlight processing, the position information of the operation button on the display screen, the selection color information for changing the selected operation button color, and the color of the operation button when executed after the selection are performed. Information such as execution color information to be changed, adjacent button information necessary for moving an operation button selected by a remote controller, and execution information indicating the execution contents of the executed operation button is defined.
[0014]
As described above, the DVD-VIDEO standard stipulates that questions to be displayed to the user can be displayed on the menu screen by the sub-picture, and the user can respond to it by highlight processing.
[0015]
In order to encode video sources such as movies and animations based on the DVD-VIDEO standard and multiplex them in accordance with the standard to generate recording data, it is necessary to perform an editing operation called authoring. is there. Accordingly, the content provider needs to generate a menu screen used by the user for audio / video selection or the like in accordance with the reproduction order and timing of the audio / video data at the authoring stage. For this reason, the content provider has to superimpose and encode the sub-picture that becomes the sub-picture and the highlight processing information on the moving image (main picture) at the stage of the authoring process.
[0016]
[Problems to be solved by the invention]
However, when a movie or the like is provided on a DVD-VIDEO disc, a large number of menu screens must be created. In particular, when setting a special playback mode (special mode) such as a multi-story or interactive story, a very large number of menu screens must be created.
[0017]
Therefore, at the authoring stage, a menu screen corresponding to each story or the like must be created in accordance with the operation content, and the sub-picture content and highlight processing information must be changed. For this reason, it takes a great deal of time and effort to encode information used for sub-pictures and highlight processing when creating a menu screen.
[0018]
Furthermore, the DVD-VIDEO standard stipulates that subtitles and menu screens are provided in a plurality of languages called language units, and menu screens must be created for the number of languages provided. Take it.
[0019]
The present invention has been made in view of such circumstances, and provides an editing apparatus and a data editing method for efficiently encoding a menu screen using a sub-picture such as a sub-picture. Objective.
[0020]
[Means for Solving the Problems]
In order to solve the above-described problem, an editing apparatus according to the present invention generates a plurality of encoded data by encoding a plurality of video and / or audio, and multiplexes the plurality of encoded data. An editing apparatus that generates recording data to be recorded on a recording medium, and is developed in accordance with the menu structure of a menu screen displayed for asking and answering questions about video and / or audio. It has a first directory including a lower directory whose directory name corresponds to the menu name of the screen, and encodes sub-picture encoded data corresponding to each menu screen into a file in the lower directory corresponding to each menu name. Sub-picture encoding means for storing is provided.
[0021]
In this editing apparatus, the sub-picture encoding means has a first directory including a lower directory expanded in accordance with the menu structure and having a directory name corresponding to the menu name. Store in the file in the lower directory corresponding to the menu.
[0022]
In the editing apparatus according to the present invention, the sub-picture encoding unit has a second directory including a lower directory having an arbitrary directory name, and duplicates a file in the lower directory of the first directory. The lever is stored in a file in a lower directory of the second directory.
[0023]
In this editing apparatus, the sub-picture encoding means stores the encoded data in a second directory including a lower directory having an arbitrary directory name.
[0024]
In the data editing method according to the present invention, a plurality of video and / or audio is encoded to generate a plurality of encoded data, and the plurality of encoded data are multiplexed and recorded on a recording medium. A data editing method for generating data for recording, which is expanded according to the menu structure of the menu screen displayed for asking and answering questions about video and / or audio, and according to the menu name of this menu screen A first directory including a lower directory having a directory name is created, and encoded data of a sub-picture corresponding to each menu screen is stored in a file in the lower directory corresponding to each menu name. .
[0025]
In this data editing method, a first directory including a lower directory expanded according to the menu structure and having a directory name corresponding to the menu name is created, and the sub-picture encoded data is stored in the lower directory corresponding to each menu. Store it in a file.
[0026]
In the data editing method according to the present invention, a second directory including a lower directory having an arbitrary directory name is created, and a file in the lower directory of the first directory is copied to copy the second directory. It is stored in a file in a lower directory.
[0027]
In this data editing method, a second directory including a lower directory having an arbitrary directory name is created.
[0028]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, as an embodiment of the present invention, for example, video data (hereinafter also referred to as “main picture”) of moving images such as a movie edited so as to be suitable for the special playback mode and audio data or one of these (audio) Describes a DVD authoring device that multiplexes video or subtitles (hereinafter referred to as “sub-pictures”) such as a menu screen showing the operation content to the user and generates recording data to be recorded on the DVD. To do.
[0029]
First, in describing the authoring apparatus according to the present embodiment, an outline of sub-pictures and menu screens defined in the DVD-VIDEO standard will be described.
[0030]
In the DVD-VIDEO standard, in addition to compressed video data (main picture) of a moving picture that has been compression-encoded by MPEG (moving picture experts group) 2, the format of a still picture (sub-picture) to be displayed superimposed on the main picture Is defined.
[0031]
FIG. 1 is a diagram showing sub-pictures defined in the DVD-VIDEO standard.
[0032]
In the DVD-VIDEO standard, a sub-picture is uniquely assigned to each pixel (pixel) obtained by dividing one picture (screen; frame) into 720 horizontal x 478 vertical (in the case of the NTSC video system). Defined as bit pixel data. That is, the sub-picture is defined in a bitmap format corresponding to the picture pixels.
[0033]
The 2-bit pixel data values [0 to 3 (decimal system)] assigned to each pixel correspond to unique colors, and accordingly, four types of colors can be assigned to each sub-picture pixel. .
[0034]
Actually, any four types are selected from a color palette composed of 16 types of colors, and are used as the four types of colors assigned to each pixel of the sub-picture.
[0035]
In addition, the selected four types of colors correspond to any of the pixel data values (0 to 3), and in what ratio the sub picture and the main picture as the background are superimposed (for example, sub If the ratio of the picture is 0% and the moving picture is 100%, the sub-picture is transparent and cannot be seen. If 50% is 50%, the sub-picture is semi-transparent. Is completely hidden) is determined by a table for setting these separately prepared.
[0036]
2A and 2B are diagrams showing examples of sub-pictures defined in the DVD-VIDEO standard [a crossed out character with a size of 9 × 9 pixels]. For example, as shown in FIG. 2 (A), the colors required for the sub-picture for displaying “tened characters with a border” having a size of 9 × 9 pixels are the color of the background (background), the main character body And a color that borders the cross-shaped body.
[0037]
When the pixel data 00 is associated with the background color, the pixel data 11 is associated with the cross body color, and the pixel data 10 is associated with the border color, as shown in FIG. , A set of 9 × 9 pixel data can be obtained. By obtaining such pixel data for all 720 × 478 pixels constituting one screen, a sub picture for one screen can be obtained.
[0038]
Also, for example, in a 720 × 478 pixel region, pixel data of characters and figures are placed only near the lower side, background pixel data is placed in all other portions, and the back By setting the mixing ratio of the pixel data of the ground to the main picture to 0%, characters and figures are displayed only on the lower part of the screen, and the background (background) is displayed as it is on all other parts (transparent ) A sub-picture can be generated.
[0039]
In the DVD-VIDEO standard, for example, menu screens and movie subtitles to be described later are expressed using such sub-pictures.
[0040]
Next, how to use such a sub-picture when reproducing a movie or the like recorded on a DVD and a navigation command of the DVD-VIDEO standard will be described.
[0041]
In the DVD-VIDEO standard, a navigation command is prepared to control the playback method. Information described by the navigation command is recorded on the DVD together with the audio / video data. In a playback device for playing back this DVD, audio, video, still images, etc. are played according to the playback order and timing indicated by the information described by the navigation command.
[0042]
In the DVD-VIDEO standard, a plurality of audio channels can be multiplexed and recorded on a DVD. For example, it is possible to specify which of a plurality of audio channels is selected for reproduction. In addition, it is possible to specify that the reproduction of the video data is started directly from the beginning of the highlight scene of the video data of the movie or from a specific head point (chapter) indicating the break of the story.
[0043]
Also, for example, at the end of playback of a certain chapter, a still image (sub-picture) for asking a question is displayed to the viewer, and a chapter to be played next is determined according to the viewer's answer to this question. As described above, it is possible to create video data (software) that can select a playback video in an interactive manner (interactively).
[0044]
This interactive playback mode is a video of a work called multi-story / multi-ending (a work with high game elements in which there are choices of A or B for each scene break and the next scene is determined as a result) This is used when reproducing data.
[0045]
When playing software for interactive playback mode such as multi-story / multi-ending work, the DVD playback device is used to display a question to the user and to operate the user's response to the displayed question. Questions / response screens are required. This question / response screen (menu screen) is suitable for display as a still image because of its nature. Therefore, the sub-picture described above is used as the question / response screen.
[0046]
An interactive operation (interactive operation) with respect to a DVD playback device is usually not performed directly by the user pressing a cursor key such as a remote controller, but is displayed as an icon on the menu screen. This is realized by the user indirectly selecting the operation button using a key or the like provided on the remote controller. By such indirect operation button selection, it is possible to provide various software suitable for interactive playback (interactive software) without being restricted by the function of the buttons specific to the hardware of the DVD playback device. .
[0047]
The basic menu screen for interactive playback described above is defined as a DVD system menu in the DVD-VIDEO standard. The DVD system menu means that a user operates a “menu button” which is stipulated that a remote controller or the like must be provided when reproducing audio / video data from a DVD disc in a DVD playback device. This is generated by the sub-picture called. The user can specify various playback patterns of the interactive software by selecting operation buttons displayed based on the DVD system menu using keys provided on the remote controller.
[0048]
Next, menu examples of the DVD system menu defined in the DVD-VIDEO standard will be listed and described.
[0049]
1. Title menu ( Title Menu )
The title menu is used to specify which title audio / video data is to be played back by the user when audio / video data of multiple titles (one episode of a movie or animation) is recorded on the DVD. Used for.
[0050]
2. Chapter menu ( Chapter Menu )
Audio / video data of l titles (one movie for movies, one album for music videos (video clips), etc., usually called a work) has an internal delimiter (movies are scene changes) In the case of a video clip, there is a break that the record company producer wants to cue up on the work, such as the break of the song), and as described above, this break is called Chapter . The chapter menu (Chapter Menu) is an arrangement of operation buttons on the screen for starting playback directly from each chapter.
[0051]
3. Audio menu ( Audio Menu )
In the audio menu, when a plurality of audio channels are attached to each video data of each title recorded on the DVD, for example, the video data of the movie includes the original language audio (original audio) and the plurality of audio channels. This is used to select which language voice is to be listened to when the voice-over voice of the language is attached. In the audio menu, operation buttons with names of selectable languages and the like are arranged on the screen independently for each audio channel.
[0052]
4 . Subtitle menu [ Sub Title Menu ( Sub picture menu Also described))]The subtitle is a term for movies and television broadcasts, and means a so-called “subtitle supermarket”. The subtitle menu is used to select which of the plurality of subtitle supers is displayed or not to be displayed when a plurality of subtitle supers are attached to the title recorded on the DVD. It is done. In the subtitle menu, operation buttons with names indicating selectable subtitles are arranged on the screen independently for each subtitle.
[0053]
5. Angle menu ( Angle Menu )
The angle is a function unique to the DVD-VIDEO standard. For example, when recording a soccer game, a plurality of cameras are usually used, and these cameras shoot the game simultaneously from different camera angles in parallel. In other words, for example, the video data of a soccer game can be obtained from a camera that has been drawn by drawing the entire game long, obtained from a camera that is chasing the attacking player up, or the defensive side Included are those obtained from cameras that are up for players.
[0054]
In this way, video data obtained by multiplexing a plurality of video data obtained by photographing an object in parallel at a plurality of camera angles in parallel and recording them on a DVD, and shooting at any camera angle by the user. As described above, the playback mode that enables selection of whether or not to play is the multi-angle playback mode.
[0055]
In the angle menu, operation buttons with names of selectable angles are arranged on the screen independently for each angle.
[0056]
6). Root menu ( Root Menu )
A total of five types of menus as described above are defined in the DVD-VIDEO standard. However, the remote controller of the DVD playback device is not always provided with five operation buttons for displaying each of the five types of menus. This is because the DVD-VIDEO standard only requires the remote controller to have two operation buttons, that is, an operation button for calling a title menu and an operation button for calling one of the other menus.
[0057]
Therefore, if the title to be played requires one or more of a chapter menu, an audio menu, a subtitle menu, and an angle menu, those menus are required. A special menu screen used to call is required.
[0058]
The Root Menu is used when one or more of the Chapter Menu, Audio Menu, Sub Title Menu, and Angle Menu are required. . The Root Menu has operation buttons with the names of Chapter Menu, Audio Menu, Sub Title Menu, and Angle Menu, respectively. Is arranged.
[0059]
FIG. 3 is a diagram illustrating an actual chapter menu.
[0060]
On the chapter menu screen, for example, there are arranged three types of operation buttons: an operation button a for specifying a chapter, an operation button b for switching a menu, and an operation button c for switching a menu page.
[0061]
When creating such a chapter menu, in addition to creating pixel data corresponding to each operation button according to the sub-picture format of the DVD-VIDEO standard, audio / video data for each created operation button is created. It is necessary to correspond to the navigation command of the program that controls playback.
[0062]
For example, when this association is expressed using terms of the DVD-VIDEO standard, the table TT-SRPT indicating the sector address at the start of recording on the DVD of the chapter of audio / video data (scene 6: confrontation 1) A binary code of the navigation command JumpPTT (TT5x, PTT = y) is generated using the data TT DOMAIN NUMBER x and the data PTT NUMBER y. This is done by filling in the position corresponding to BTN-POSI of BTINT in the PCI HLI indicating the position of the operation button d of 1 in the screen.
[0063]
Next, the relationship between the menu screen defined in the DVD-VIDEO standard and the volume structure of video data and the like will be described.
[0064]
In the DVD-VIDEO standard, a volume structure of video data or the like is defined as shown in FIG. 4, and the DVD Video-zone that is the volume space is one video manager (VMG: Video Manager) and one or more 99. The video title set (VTS: Video Title Set) or less.
[0065]
FIG. 5 shows the structures of VMG and VTS. In VMG, the first file is control data (Video Manager Information), the next file is VOBS (VMGM_Object Set), and the last file is a backup of VMGI. This VMGI includes a VMG menu (VMGM: VMG Menu).
[0066]
In the VTS, the first file is control data (VTSI: Video Title Set Information), the next file is VOBS (VTSM_VTSM Video Object Set) for menus, and the next 1 to 9 files are titles. This is a VOBS (VTSTT_VOBS: VTSTT Video Ovject Set), and the last file is a backup of VTSI. This VTSI includes a VTS menu (VTSM: Video Title Set Menu) in the VTS.
[0067]
The data of each menu screen described above is included in VMGM and VTSM of VMG and VTS.
[0068]
The title menu is included in the VMGM as shown in FIG. Also, as shown in FIG. 7, the Root Menu is included in the VTSM, and below this root menu is a chapter menu, an audio menu, and a subtitle menu. , Angle Menu is included.
[0069]
The DVD-VIDEO standard defines a function called a language unit (LU) that defines a language code. This feature can be confusing and inefficient to sell different discs for each language when providing the same content in countries and regions where many languages are used. A menu is created in advance. Accordingly, each menu screen described above is created for each LU as shown in FIGS.
[0070]
In addition, in the DVD-VIDEO standard, as shown in FIG. 8, a program chain (PGC: Program Chain) structure is defined, and based on PGC information (PGCI: PGC Information) describing the essence and order of the presentation, Data is recorded as a PGC composed of an integer number of programs PG (PG: Program). The PGC is a logical unit that provides the above-described menu screens, video data, titles, and the like, and is configured based on PGCI. One PGC is divided into an integer number of PGs. The PG is a unit obtained by dividing the contents of the PGC, and one PG is composed of an integer number of cells. The DVD playback apparatus acquires the PGCI and plays back the PGC based on the PGCI information. The PGCI is composed of a pre-command area (Pre-Command), a post-command area (Post-Command), and a presentation control block. The presentation control block controls the playback order of the cells and the presentation. Navigation commands are given.
[0071]
That is, when a movie or the like in which a special playback mode (special mode) such as a multi story or an interactive story is set is played, the movie is played based on the PGC. The PGC also has a meaning as a framework for the entire menu screen, and includes all menu screen data.
[0072]
Although one menu screen may be composed of a plurality of pages, one PGC corresponds to one menu regardless of the number of pages constituting the menu screen. That is, for example, six program chains PGC correspond to six types of menus (menus each composed of a plurality of pages).
[0073]
Next, data and navigation commands necessary for configuring the menu screen will be described with reference to FIG.
[0074]
FIG. 9 is a diagram showing a structure of data (menu screen data) constituting the menu screen. Note that the structure of the menu screen data is actually further subdivided (for example, some are shown in the navigation pack (NAVI_PAC) in the VOBU defined in the DVD-VIDEO standard). For the sake of simplicity of illustration and description, only parts necessary for the description of the authoring apparatus to which the present invention is applied are shown in a simplified manner.
[0075]
The pre-command PRE-CMD includes a navigation command that is executed first when reproduction of one menu screen (PGC) starts (mainly a parameter initialization command necessary for executing a button command BTN-CMD described later). Is described.
[0076]
The access unit ACCESS-UNIT stores data (pixel data and color data) of sub-pictures (FIGS. 1 and 2) of the menu screen. This access unit ACCESS-UNIT includes sub-picture pixel data and button color data BTN-COLOR.
[0077]
The highlight information data HLI is used to change the color of the selected operation button when the user selects an operation button on the menu screen using a key of the remote controller or the like. Thus, the process of changing the color of the selected operation button is referred to as a highlight process. The highlight information data HLI stores color data used for highlight processing, highlight color data indicating colors before and after execution of highlight processing (highlight color), and relative in the menu of each operation button. It includes positional information, adjacent information between operation buttons necessary for selecting an operation button by key operation of a remote controller, etc., and button information data BTN INFO indicating a navigation command corresponding to the operation button.
[0078]
The post command POST-CMD includes a navigation command (mainly a parameter obtained as an execution result of the button command BTN-CMD) executed at the end of reproduction of video data of a title corresponding to one menu screen (PGC). (Jump instruction for jumping to the branch destination determined by (1)) is described.
[0079]
The sub picture pixel data stores sub picture data (FIGS. 1 and 2) used as a menu screen. When the menu screen is composed of a plurality of pages, the sub-picture pixel data is divided into a plurality of stages corresponding to each of the plurality of pages. Further, as described above, the sub-picture pixel data is a component of the access unit ACCESS-UNIT.
[0080]
Button color data BTN-COLOR is a reference destination of color information when the operation button is not highlighted (when not selected) and color information when the operation button is highlighted (when selected). Stores data indicating the color palette. As described above, the button color data BTN-COLOR is a component of the access unit ACCESS-UNIT.
[0081]
The highlight color data stores color information used for highlight processing of the operation buttons. This color information indicates not the actual color information of the operation button but the pointer to the color palette indicated by the button color data BTN-COLOR, the highlight color when the operation button is selected, and the button command BTN-CMD. And two types of highlight colors at the time of execution. As described above, the highlight color data is a component of the highlight color data HLI, and includes selection color data SELECT-COLOR and action color data ACTION-COLOR.
[0082]
The button information data BTN-INFO includes the relative positional relationship of each operation button in the menu screen, the adjacent information between buttons necessary for moving the operation button selection by the key operation of the remote controller, and the operation button. Stores accompanying navigation commands at the time of execution, and plays a central role as a part describing functional logic of each operation button on the menu screen. There are as many button information data items as there are on the menu screen. As described above, the button information data BTN-INFO is a component of the highlight color data HLI, and includes button position data BTN-POSISO, adjacent button data ADJ-BTN, and button command BTN-CMD.
[0083]
The selection color data SELECT-COLOR stores a pointer to the highlight color palette when the operation button is selected.
[0084]
The action color data ACTION-COLOR stores a pointer to the highlight color palette when the operation button is executed (when the button command BTN-CMD is executed and immediately after the execution). As described above, the action color data ACTION-COLOR is a component of highlight color data.
[0085]
The button position data BTN-POSITION includes coordinates of the upper left and lower right of the logical display area of each operation button defined as a rectangle, and a color palette of color information when each operation button is not selected (data BTN-COLOR). ) Is stored. The relative position of each operation button in the menu screen is expressed by the coordinates of the pixel of each operation button. Note that in one menu screen, there are only l types of colors when not selected regardless of the number of operation buttons. Further, as described above, the button position data BTN-POSITION is a component of the button information data BTN-INFO.
[0086]
The adjacent button data ADJ-BTN stores adjacent information between buttons necessary when selecting an operation button using a key of the remote controller. As described above, the adjacent button data ADJ-BTN is a component of the button information data BTN-INFO.
[0087]
The button command BTN-CMD stores a navigation command when the operation button is executed, and directly defines the function of each operation button. As described above, the button command BTN-CMD is a component of the button information data BTN-INFO.
[0088]
The button position data BTN-POSITION, the adjacent button data ADJ-BTN, and the button command BTN-CMD exist as many as the number of operation buttons constituting the menu screen.
[0089]
Sub picture pixel data, button color data BTN-COLOR, highlight color data, button information data BTN-INFO, selection color data SELECT-COLOR, action color data ACTION-COLOR, button position data BTN-POSITION, adjacent button data The ADJ-BTN and the button command BTN-CMD collectively constitute a PG. There are as many PGs as there are pages constituting the menu screen.
[0090]
As described above, in order to configure one menu screen, it is necessary to describe all of the data included in the data structure shown in FIG. In addition, there are many types of data required to create sub-picture pixel data used as a menu screen, and it is very troublesome to create all of these data for each menu screen. Therefore, if the sub-picture pixel data can be created systematically, the efficiency of the editing work can be improved and the working time can be shortened.
[0091]
Next, an authoring apparatus according to an embodiment to which the present invention is applied will be described with reference to the drawings.
[0092]
An authoring apparatus 10 that is an embodiment to which the present invention shown in FIG. 10 is applied generates recording data to be recorded on an optical disc in accordance with the DVD-VIDEO standard by compressing and encoding images and audio.
[0093]
The authoring apparatus 10 includes a video encoder 11 that encodes a moving image, an audio encoder 12 that encodes audio, a sub-picture encoder that encodes a still image and the like, and a server 14 that stores encoded data. , A multiplexer 15 that multiplexes the encoded data to generate recording data, and a system controller 16 that manages the operation of the entire apparatus. In addition, the authoring apparatus 10 includes a viewer 17 that inspects the generated recording data and a tape streamer 18 that records the generated recording data on a predetermined recording medium such as a magnetic tape.
[0094]
The video encoder 11 compresses and encodes the input video signal S10 based on the MPEG system, and sequentially stores the encoded video data S11 obtained as a result in a predetermined storage area of the server 14. The video encoder 11 receives various information necessary for encoding, for example, the number of moving images to be encoded and address information of a storage area for storing encoded data from the system controller 16 via the network 19, Encoding processing is executed based on the information, and the encoded video data S11 is stored in the designated storage area of the server.
[0095]
The audio encoder 12 compression-encodes the input audio signal S12 based on the MPEG audio system or the AC-3 system (compression encoding system combining modified discrete cosine transform (MDCT) and spectrum envelope encoding), and the result The obtained audio encoded data S13 is sequentially stored in a predetermined storage area of the server 14. The audio encoder 12 also receives various information necessary for encoding, for example, the number of voices to be encoded, address information of a storage area for storing encoded data, and the like from the system controller 16 via the network 19. The encoding process is executed based on the information, and the audio encoded data S13 is stored in the designated storage area of the server 14.
[0096]
The sub-picture encoder 13 encodes a sub-picture signal S14 formed from subtitles and the like by a predetermined encoding method, and sequentially stores the sub-picture encoded data S15 obtained as a result in a predetermined storage area of the server 14. Similarly, the sub-picture encoder 13 receives various information necessary for encoding, for example, the number of pictures to be encoded and address information of a storage area for storing encoded data from the system controller 16 via the network 19. Based on these pieces of information, the sub-picture encoded data S15 is stored in the storage area designated by the server 14. Here, the sub-picture encoded data S15 generated by the sub-picture encoder 13 includes a navigation command and the like together with the sub-picture bitmap data defined by the above-mentioned DVD-VIDEO standard.
[0097]
Details of the sub-picture encoder 13 will be described later.
[0098]
The server 14 is composed of a hard disk array having a plurality of input / output ports, and stores input encoded data S11, S13, and S15 in different storage areas. In addition to the storage areas for the encoded data S11, S13, and S15, the server 14 has a storage area for storing multiplexed data generated by the multiplexer 15 described later. Are stored in the storage area. That is, the server 14 has a sufficient storage area that can store the encoded data S11, S13, S15 and multiplexed data.
[0099]
Further, the server 14 uses, for example, SCSI capable of high-speed transmission as an interface for connecting the encoders 11 to 13.
[0100]
The multiplexer 15 sequentially reads out the encoded data S11, S13, and S15 from the server 14 as processing target data, multiplexes these data in accordance with the DVD-VIDEO standard, and multiplex data S17 obtained as a result is recorded data. Are sequentially stored in a predetermined storage device of the server 14. The multiplexer 15 transmits information necessary for multiplexing, for example, address information of a storage area in which each encoded data S11, S13, S15 is stored, address information of a storage area in which multiplexed data is stored, and the like through the network 19. Through the system controller 16, the multiplexing process is executed based on these pieces of information, and the multiplexed data S 17 is stored in the designated storage area of the server 14.
[0101]
The viewer 17 is for inspecting whether the encoding process of each encoder 11-13 and the multiplexing process of the multiplexer 15 were normally performed. The viewer 17 reads and decodes the multiplexed data S17 stored in the server 14, and outputs this to the monitor. By providing such a viewer 17, the authoring apparatus 10 can immediately and easily inspect whether the encoding process and the multiplexing process are normally performed. The viewer 17 also receives information necessary for decoding, for example, address information of a storage area in which the multiplexed data S17 is stored and information on the encoding method from the system controller 16 via the network 19 and receives the information. The decoding process is executed based on the above.
[0102]
The tape streamer 18 records the multiplexed data S17 on a magnetic tape or the like in order to pass the multiplexed data S17 to the disk manufacturing process. The tape streamer 18 receives information necessary for the recording operation, for example, address information of a storage area in which the multiplexed data S17 is stored, information on a recording method, and the like from the system controller 16 via the network 19, and receives these information. Based on this, the multiplexed data S17 is sequentially read from the server 14 and recorded on a magnetic tape or the like. By providing such a tape streamer 18, the authoring apparatus 10 can immediately and easily record multiplexed data S17, which is recording data to be passed to the disk manufacturing process.
[0103]
Note that the multiplexer 15, the viewer 17, the tape streamer 18, and the server 14 are connected using an interface such as SCSI capable of high-speed transmission.
[0104]
The system controller 16 manages the operations of the encoders 11 to 13, the multiplexer 15, the viewer 17, and the tape streamer 18, and manages the data recording area of the server 14.
[0105]
Specifically, the system controller 16 gives an instruction to start encoding processing to each of the encoders 11 to 13 based on the authoring information S18 necessary for the authoring work input by the operator. Further, when the encoding process of each of the encoders 11 to 13 is completed, the system controller 16 gives the multiplexer 15 an instruction to start the multiplexing process. Further, when the processing of the multiplexer 15 is completed, the system controller 16 gives an instruction to start processing to the viewer 17 and the tape streamer 18.
[0106]
Further, the system controller 16 manages the storage area on the server 14 of each encoded data S11, S13, S15 generated by each encoder 11-13 and the multiplexed data S17 generated by the multiplexer 15, and each encoder 11 To 13 are designated as data storage destinations, and the multiplexer 15 is designated as a data storage destination that is different from the encoded data S11, S13, S15.
[0107]
By providing such a system controller 16, each of the encoders 11 to 13 and the like can execute the work assigned to them, and the storage destinations of the generated data S11, S13, S15, and S17 do not overlap. Thus, the server 14 can be shared among the devices.
[0108]
The operation instruction and the data storage destination instruction from the system controller 16 are given to the encoders 11 to 13 through the network 19, respectively.
[0109]
Next, the sub picture encoder 13 described above will be described with reference to FIG.
[0110]
The sub-picture encoder 13 includes a quantization unit 20, an encoding unit 22, a control unit 24, and an operation terminal 25.
[0111]
The quantization unit 20 includes a time code generation circuit (TCG) 202, an analog / digital conversion circuit (A / D conversion circuit) 204, a selector circuit (SEL) 206, and a quantization circuit (Q) 208.
[0112]
The encoding unit 22 includes a variable length encoding circuit (VLC) 220, a decoding circuit (IVLC) 222, and an addition circuit 224.
[0113]
The operation terminal 25 includes, for example, a computer device, and includes a main control device 231, a keyboard / mouse 232 serving as an input device, and a monitor 233 serving as an output device.
[0114]
The sub-picture encoder 13 having such a configuration is input from an analog-format sub-picture video signal input from an externally connected analog VTR device or the like, or from an externally connected digital VTR device or a computer or the like. For example, a 4-picture (2 bits; 00d, 01d, 10d, 11d) is used so that the sub-picture signal S14, which is a luminance signal of 8-bit digital format video data, is adapted as encoded data of a sub-picture of the DVD-VIDEO standard. And the quantized pixel data of the sub-picture is encoded and output to the server 14. The sub-picture encoder 13 once decodes the pixel data of the encoded sub-picture and displays it on the monitor device 233 of the operation terminal 25 so as to be superimposed on the video data (main picture) of the moving image as the background. Show. Further, the sub picture encoder 13 generates a navigation command or the like necessary for generating the menu screen by using the operation terminal 25, and the navigation command is transmitted to the server 14 as the sub picture encoded data S15 together with the pixel data. Output.
[0115]
In the sub-picture encoder 13, the A / D conversion circuit 204 converts the luminance signal of the analog format video data input from the outside into a digital format and outputs it to the input terminal b of the selector circuit 206.
[0116]
The selector circuit 206 selects any one of the luminance signals of the digital video data input from the external and A / D conversion circuit 204 to the input terminals a and b, and outputs the selected signal to the quantization circuit 208.
[0117]
The quantization circuit 208 inputs the luminance signal of the 8-bit digital format video data input from the selector circuit 206, for example, within the range of the luminance signal value from 0 to 63 (00h to 3Fh), and the pixel data value 0 (00 ), The range of the luminance signal value from 64 to 127 (40h to 7Fh) is the pixel data value 1 (01), and the range of the luminance signal value is from 128 to 191 (80h to BFh) is the pixel data value 2. In (10), the range of the luminance signal value from 192 to 255 (Coh to FFh) is quantized to the pixel data value 3 (11), and the quantization result is output to the variable length coding circuit 220.
[0118]
The variable length coding circuit 220 performs run length coding on the quantization result input from the quantization circuit 208 and outputs the result to the control unit 24 and the decoding circuit 222 as sub-picture pixel data.
[0119]
The control unit 24 buffers the sub-picture pixel data input from the variable-length coding circuit 220, or records / reproduces the sub-picture pixel data using, for example, a hard disk, thereby indicating the timing indicated by the time code of the sub-picture pixel data. To output.
[0120]
The control unit 24 is included in the instruction data input from the operation terminal 25, and includes the time code range of each sub-picture indicating the encoding target and the time code TC of the video data input from the time code generation circuit 202. Based on the comparison result, the data fetching of the variable length coding circuit 220 and the decoding processing timing of the decoding circuit 222 are controlled.
[0121]
Based on the encoding result of the sub-picture encoder 13, the control unit 24 includes pixels whose quantization result values input from the quantization circuit 208 are 1 to 3 (01 to 11), as shown in FIG. 12. To determine that there is a sub-picture in the range (determines that there is no sub-picture where there is only a pixel whose quantization result value is 0 (00)), and derives a rectangular area where the sub-picture exists, The coordinate values [(XS, YS), (XE, YE)] indicating the upper left and lower right of the rectangular area are obtained. Note that the coordinate values [(XS, YS), (XE, YE)] of the rectangular area obtained by the control unit 24 are used to control the overlay processing of the background image and the sub-picture by the adding circuit 224.
[0122]
The decoding circuit 222 performs processing opposite to that of the variable length coding circuit 220 on the sub-picture data input from the variable length coding circuit 220 to generate data corresponding to the quantization result of the quantization circuit 208. Output to the adder circuit 224.
[0123]
Under the control of the control unit 24, the adder circuit 224 multiplies the pixel data of the rectangular area shown in FIG. 12 by a coefficient k (0 ≦ k ≦ 1) in the quantization result input from the decoding circuit 222. Background video data input from the outside [background; for example, the same as the video data input to the video encoder 11. ] Is multiplied by a coefficient (1-k), and these multiplication values are added and output to the monitor 233 of the operation terminal 25 via the main control unit 231. The addition circuit 224 passes through the background video data other than the rectangular area without performing the multiplication process of the coefficient (1-k) and the addition process of the quantized value multiplied by the coefficient k.
[0124]
The monitor 233 of the operation terminal 200 displays the video data input from the adding circuit 224 and shows it to the user. The user can check the video density of the sub-picture or the display timing of the sub-picture while viewing the video displayed on the monitor 233 of the operation terminal 25. Furthermore, the user can check the keyboard / mouse 232 of the operation terminal 25. By inputting data through the sub-picture, the density of the sub-picture image [coefficient k (1-k)], display timing, and the like are adjusted.
[0125]
That is, the operation terminal 25 has a function as a menu creation device in the DVD authoring device 10. The operation terminal 25 can describe pixel data and navigation commands, which are data constituting a menu screen without omission of necessary data, without the user being aware of the data structure. An error caused by a mistake can be prevented beforehand. In other words, the operation terminal 25 functions as a compiler having very high intelligence dedicated to creating navigation commands and sub-pictures of menu screens.
[0126]
The user can proceed with the data description work in an interactive manner (interactively) by using a GUI (Graphical User Interface) provided by the operation terminal 25, for example. The operation terminal 25 automatically creates data constituting a menu screen conforming to the DVD-VIDEO standard by software processing using data interactively described by the user, and superimposes it on the background video and displays it. And show it to the user.
[0127]
As described above, the sub-picture encoder 13 encodes the sub-picture encoded data S15 necessary for displaying the caption data and the menu screen, and supplies the encoded data to the server 14. Specifically, the sub-picture encoded data S15 includes the pre-command PRE-CMD, post-command POST-CMD, sub-picture pixel data, button color data BTN-COLOR, and selection color data SELECT- shown in FIG. COLOR, action color data ACTION-COLOR, button position data BTN-POSISON, adjacent button data ADJ-BTN, and button command BTN-CMD are included.
[0128]
Next, a management file of the sub-picture encoded data S15 managed by the operation terminal 25 of the sub-picture encoder 13 will be described.
[0129]
As described above, the operation terminal 25 generates the sub-picture encoded data S15 necessary for displaying the menu screen, and stores the generated sub-picture encoded data S15. The operation terminal 25 performs file management of the sub-picture encoded data S15 to be stored in a directory structure.
[0130]
Specifically, a directory structure in which the operation terminal 25 manages files will be described with reference to FIG.
[0131]
The top directory of the work environment on the operation terminal 25 is a MENU directory. In this operation terminal 25, sub-picture encoded data S15 necessary for displaying the menu screen is generated, and when the sub-picture encoded data S15 is stored, the sub-picture encoded data S15 is stored in a file in a lower directory from the MEMU directory. It will be.
[0132]
The PRJ directory is expanded in a lower directory of the MENU directory. This PRJ directory is provided for each work such as a movie to be created, and under this PRJ directory, the directory is expanded according to a menu structure in accordance with the DVD-VIDEO standard.
[0133]
The VMGM directory and the VTSM directory are directories that are expanded under each PRJn (n is an integer and indicates a project number) directory. In addition, LUm (m is an integer and indicates a registered language number) directory is expanded in the subordinate directories of the VMGM directory and the VTSM directory, and there is a directory for each language of the menu screen to be created. It has come to expand.
[0134]
The VMGM directory is a directory in which the menu screen created in the VMGM area described above is saved. Specifically, a directory is expanded for each language unit corresponding to a title menu (Title Menu) which is a menu screen created in the VMGM area, and the sub-picture encoded data S15 is stored.
[0135]
The VTSM directory is a menu screen directory created in the above-described VTSM area. Specifically, the menu screen created in this VTSM area is a Root Menu, a Chapter Menu, an Audio Menu, a Sub Title Menu, an Angle Menu. ), A directory is expanded for each language unit, and the sub-picture encoded data S15 is stored.
[0136]
Note that a directory in units of PGCs is developed below the directory (Root, Chapter, Audio, Sub Title, Angle) of each menu of VTSM. As described above, this PGC is played back based on the PGC when playing a movie or the like in which a special playback mode (special mode) such as a multi-story or interactive story is set. Therefore, when creating a movie or the like in which a special playback mode (special mode) such as a multi-story or interactive story is set, a plurality of PGCs are prepared. Therefore, the number of menu screens to be created is also required by the number of PGCs set for performing special reproduction.
[0137]
Accordingly, directories corresponding to the number of PGCs are expanded below the directory (Root, Chapter, Audio, Sub Title, Angle) of each menu of VTSM.
[0138]
In the case of the VMGM directory, only one PGC is shown. However, in the title menu in VMGM, only one PGC is used on the DVD-VIDEO standard format.
[0139]
As described above, the operation terminal 25 that expands the directory and manages the file transfers the file existing in each PGC * (this * represents an integer and the number of the PGC to be created) that is the lowest directory. The sub-picture encoded data of each menu screen is saved. Specifically, as shown in FIG. 14, each PGC directory includes sub-picture pixel data (SP), button color data (BTN-COLOR), selection color data (SELECT-COLOR), action, as shown in FIG. Each file includes color data (ACTION-COLOR), button position data (BTN-POSISON), adjacent button data (ADJ-BTN), and button command (BTN-CMD).
[0140]
In addition, a library directory (LIB) is expanded in a lower directory of the MENU directory, which is the highest directory of the work environment on the operation terminal 25. This library directory is a directory for listing and managing the generated sub-picture encoded data S15. In this library directory, a lower directory of a directory name arbitrarily given by the operator of the operation terminal 25 is expanded. Then, in the lower directory of the directory name arbitrarily given by the operator, a file of the same data as the sub-picture encoded data stored under the above PGC * is stored.
[0141]
The operating terminal 25 having such a directory structure and managing the sub-picture encoded data S15 is information necessary for configuring the menu screen in all PGC * -unit directories that are the lowest directory of the PRJ directory. The processing ends when each file of the sub-picture encoded data is saved. When the operation terminal 25 ends the process, the operation terminal 25 supplies the data of each PGC * to the control unit 24, encodes it as sub-picture encoded data S15, and supplies it to the server 14.
[0142]
Further, in the operation terminal 25, the data in the PGC * is stored in the library directory when the process of generating the sub-picture encoded data that is necessary for constructing the menu screen is completed or during the process. Can be saved. At this time, the operator of the operation terminal 25 sets an arbitrary directory name as the library name (for example, sets library names such as ABC, DEF, and GHI as shown in FIG. 13), and sets a lower directory in the library directory. create. Then, the data of each file in the arbitrary PGC * directory is copied to the lower directory of the library directory having the arbitrary directory name.
[0143]
Thus, the operation terminal 25 can separately manage the sub-picture encoded data constituting the created menu screen, and can be used when generating sub-picture encoded data of other works or other DVDs (mediums). To be able to use. When copying the data of each file of PGC *, it may be set so that the data of the button command (BTN-CMD) is not copied. This is because the data of the button command (BTN-CMD) functions independently for each menu screen, and is not necessary when creating another menu screen.
[0144]
【The invention's effect】
In the editing apparatus according to the present invention, the sub-picture encoding means has a first directory including a lower directory expanded according to the menu structure of the encoded data of the main picture and having a directory name corresponding to the menu name. By storing the sub-picture encoded data in a file in a lower directory corresponding to each menu, the work process when generating the sub-picture encoded data can be simplified and encoded efficiently. it can.
[0145]
In the editing apparatus according to the present invention, since the sub-picture encoding means has the second directory including the lower directory having an arbitrary directory name, the already generated sub-picture encoded data is duplicated. Thus, encoded data of other sub-pictures can be generated, and the work process can be simplified.
[0146]
In the data editing method according to the present invention, a first directory including a lower directory expanded according to the menu structure of encoded data of the main video and having a directory name corresponding to the menu name is created, and the sub video is encoded. By storing the data in a file in a lower directory corresponding to each menu, the work process when generating the encoded data of the sub-picture can be simplified and the encoding can be performed efficiently.
[0147]
Also, in the data editing method according to the present invention, by creating a second directory including a subdirectory with an arbitrary directory name, the already generated sub-picture encoded data is duplicated to create another sub-picture. Encoded data can be generated, and the work process can be simplified.
[Brief description of the drawings]
FIG. 1 is a diagram for explaining sub-pictures defined in the DVD-VIDEO standard.
FIG. 2 is a diagram for explaining sub-pictures defined in the DVD-VIDEO standard.
FIG. 3 is a diagram for explaining a menu screen defined in the DVD-VIDEO standard.
FIG. 4 is a diagram for explaining a volume structure of data defined in the DVD-VIDEO standard.
FIG. 5 is a diagram for explaining a volume structure of data defined in the DVD-VIDEO standard.
FIG. 6 is a diagram for explaining a title menu defined in the DVD-VIDEO standard.
FIG. 7 is a diagram for explaining a root menu, chapter menu, audio menu, angle menu, and sub-picture menu defined in the DVD-VIDEO standard.
FIG. 8 is a diagram for explaining PGC defined in the DVD-VIDEO standard.
FIG. 9 is a diagram for explaining navigation commands and the like necessary for generating a menu screen.
FIG. 10 is a block diagram of an authoring apparatus to which the present invention is applied.
FIG. 11 is a block diagram of a sub-picture encoder of the authoring apparatus.
FIG. 12 is a diagram illustrating a rectangular area where a sub picture exists.
FIG. 13 is a diagram illustrating a directory structure of a file in which sub-picture encoded data is stored.
FIG. 14 is a diagram illustrating the contents of a file in which sub-picture encoded data is stored.
FIG. 15 is a diagram illustrating a menu screen defined in the DVD-VIDEO standard.
[Explanation of symbols]
10 authoring devices, 11 video encoders, 12 audio encoders, 13 sub-picture encoders, 14 servers, 15 multiplexers, 16 system controllers, 17 viewers, 18 tape streamers, 20 quantization units, 22 encoding units, 24 control units, 25 operations Terminal

Claims (8)

複数の映像及び／又は音声について、それぞれ符号化をして複数の符号化データを生成し、この複数の符号化データを多重化して記録媒体に対して記録する記録用データを生成する編集装置において、
映像及び／又は音声についての質問・応答を行う為に表示されるメニュー画面のメニュー構造に応じて展開され、このメニュー画面のメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを有し、各メニュー画面に対応した副映像の符号化データを、各メニュー名に対応した下位ディレクトリ内のファイルに格納する副映像符号化手段を備えること
を特徴とする編集装置。In an editing apparatus that generates a plurality of encoded data by encoding a plurality of video and / or audio, and generates recording data to be recorded on a recording medium by multiplexing the plurality of encoded data ,
A first directory including a lower directory that is expanded according to the menu structure of the menu screen displayed for asking and responding to questions and responses regarding video and / or audio, and has a directory name corresponding to the menu name of the menu screen. An editing apparatus comprising: a sub-picture encoding unit that stores encoded data of a sub-picture corresponding to each menu screen in a file in a lower directory corresponding to each menu name. 上記副映像符号化手段は、任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを有し、第１のディレクトリの下位ディレクトリ内のファイルを複製してこの第２のディレクトリの下位ディレクトリ内に格納すること
を特徴とする請求項１に記載の編集装置。The sub-picture encoding means has a second directory including a subordinate directory having an arbitrary directory name, and duplicates a file in the subordinate directory of the first directory to store the subdirectory in the subordinate directory of the second directory. The editing apparatus according to claim 1, wherein the editing apparatus is stored in a storage device. 上記副映像符号化手段は、ＤＶＤ−ＶＩＤＥＯ規格におけるサブピクチャに関する符号化データを生成し、ＤＶＤ−ＶＩＤＥＯにおけるメニュー構造に応じて展開されＤＶＤ−ＶＩＤＥＯにおけるメニュー名に応じたディレクトリ名とされた下位ディレクトリを含むディレクトリを有すること
を特徴とする請求項１に記載の編集装置。The sub-picture encoding means generates encoded data relating to a sub-picture in the DVD-VIDEO standard, is expanded according to the menu structure in the DVD-VIDEO, and is a subordinate directory having a directory name corresponding to the menu name in the DVD-VIDEO. The editing apparatus according to claim 1, further comprising a directory including 上記副映像の符号化手段は、ＤＶＤ−ＶＩＤＥＯにおけるメニュー構造に応じて展開したディレクトリ構造が、プレゼンテーションのエッセンス及び順序を述べたＰＧＣ（Program Chain）単位まで展開しており、このＰＧＣ単位のサブピクチャの符号化データに格納すること
を特徴とする請求項３に記載の編集装置。In the sub-picture encoding means, the directory structure expanded in accordance with the menu structure in DVD-VIDEO expands to the PGC (Program Chain) unit describing the essence and order of the presentation. The editing apparatus according to claim 3, wherein the editing data is stored in the encoded data. 複数の映像及び／又は音声について、それぞれ符号化をして複数の符号化データを生成し、この複数の符号化データを多重化して記録媒体に対して記録する記録用データを生成するデータ編集方法において、
映像及び／又は音声についての質問・応答を行うメニュー画面のメニュー構造に応じて展開され、このメニュー画面のメニュー名に応じたディレクトリ名とされた下位ディレクトリを含む第１のディレクトリを作成し、各メニュー画面に対応した副映像の符号化データを、各メニュー名に対応した下位ディレクトリ内のファイルに格納すること
を特徴とするデータ編集方法。A data editing method for generating a plurality of encoded data by encoding each of a plurality of video and / or audio, and generating recording data to be recorded on a recording medium by multiplexing the plurality of encoded data In
A first directory including a lower directory that is expanded in accordance with the menu structure of the menu screen for questioning / replying video and / or audio and corresponding to the menu name of the menu screen is created. A data editing method, wherein encoded data of a sub-picture corresponding to a menu screen is stored in a file in a lower directory corresponding to each menu name. 任意のディレクトリ名とされた下位ディレクトリを含む第２のディレクトリを作成し、第１のディレクトリの下位ディレクトリ内のファイルを複製してこの第２のディレクトリの下位ディレクトリ内のファイルに格納すること
を特徴とする請求項５に記載のデータ編集方法。A second directory including a lower directory having an arbitrary directory name is created, and a file in a lower directory of the first directory is copied and stored in a file in a lower directory of the second directory. The data editing method according to claim 5. ＤＶＤ−ＶＩＤＥＯ規格におけるサブピクチャに関する符号化データを生成し、ＤＶＤ−ＶＩＤＥＯにおけるメニュー構造に応じて展開されＤＶＤ−ＶＩＤＥＯにおけるメニュー名に応じたディレクトリ名とされた下位ディレクトリを含むディレクトリを作成すること
を特徴とする請求項５に記載のデータ編集方法。Generating encoded data relating to a sub-picture in the DVD-VIDEO standard, and creating a directory including a lower directory expanded according to the menu structure in the DVD-VIDEO and having a directory name corresponding to the menu name in the DVD-VIDEO. 6. The data editing method according to claim 5, wherein the data is edited. ＤＶＤ−ＶＩＤＥＯ規格におけるメニュー構造に応じて展開したディレクトリ構造を、プレゼンテーションのエッセンス及び順序を述べたＰＧＣ（Program Chain）単位まで展開させ、このＰＧＣ単位のサブピクチャの符号化データをファイル内に格納すること
を特徴とする請求項７に記載のデータ編集方法。The directory structure expanded in accordance with the menu structure in the DVD-VIDEO standard is expanded to the PGC (Program Chain) unit describing the essence and order of the presentation, and the encoded data of the subpicture in PGC unit is stored in the file. The data editing method according to claim 7, wherein:
JP11314797A 1997-04-30 1997-04-30 Editing apparatus and data editing method Expired - Fee Related JP3948051B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP11314797A JP3948051B2 (en) 1997-04-30 1997-04-30 Editing apparatus and data editing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP11314797A JP3948051B2 (en) 1997-04-30 1997-04-30 Editing apparatus and data editing method

Publications (2)

Publication Number Publication Date
JPH10304304A JPH10304304A (en) 1998-11-13
JP3948051B2 true JP3948051B2 (en) 2007-07-25

Family

ID=14604765

Family Applications (1)

Application Number Title Priority Date Filing Date
JP11314797A Expired - Fee Related JP3948051B2 (en) 1997-04-30 1997-04-30 Editing apparatus and data editing method

Country Status (1)

Country Link
JP (1) JP3948051B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3570286B2 (en) 1999-03-31 2004-09-29 ブラザー工業株式会社 Information recording medium having logically structured recording area, method and apparatus for creating information for creating this information recording medium, information recording medium on which creation program is recorded, and method and apparatus for creating this information recording medium An information recording medium on which an apparatus and its creation program are recorded, and a method and apparatus for creating an information recording medium on which image information or sound information is recorded using this information recording medium, and an information recording medium on which the creation program is recorded.
EP1552515A4 (en) * 2002-10-15 2007-11-07 Samsung Electronics Co Ltd Information storage medium containing subtitle data for multiple languages using text data and downloadable fonts and apparatus therefor
TW200518070A (en) 2003-10-10 2005-06-01 Matsushita Electric Ind Co Ltd Recording medium, reproduction device, program, and reproduction method
EP1551030A1 (en) * 2004-01-05 2005-07-06 Deutsche Thomson-Brandt Gmbh Method and apparatus for generating an electronic menu
JP4007362B2 (en) 2004-10-26 2007-11-14 船井電機株式会社 Information recording / reproducing device
JP4848290B2 (en) * 2007-01-04 2011-12-28 株式会社日立製作所 Recording apparatus and recording method
JP4882891B2 (en) * 2007-07-04 2012-02-22 株式会社日立製作所 Recording apparatus and recording method
JP4883138B2 (en) * 2009-05-22 2012-02-22 株式会社日立製作所 Recording apparatus and recording method

Also Published As

Publication number Publication date
JPH10304304A (en) 1998-11-13

Similar Documents

Publication Publication Date Title
US6246401B1 (en) Reproduction control data generating apparatus and method of same
JP3379961B2 (en) Recording medium in which audio data and sub-picture data of a plurality of channels are recorded together with moving image data, reproducing apparatus and reproducing method thereof
US6226446B1 (en) Machine readable recording medium, reproduction apparatus and method for controlling selection of menu items within a video object
US6728477B1 (en) Simultaneous multiple-angle presentation of DVD audio/visual content
JP3362856B2 (en) No matter how the main image is arranged on the screen, a recording medium, a reproducing apparatus, and a reproducing method capable of superimposing the sub-image on the main image with good balance
JP3345019B2 (en) Recording method, reproducing apparatus, and reproducing method for recording medium with improved performance of interactive reproduction progress
US8737816B2 (en) System for selecting video tracks during playback of a media production
JP3345413B2 (en) Recording method, reproducing apparatus, and reproducing method for recording medium with improved performance of interactive reproduction progress
CA2563169C (en) Context dependent multi-angle navigation technique for digital versatile discs
JP3345412B2 (en) Recording method, reproducing apparatus, and reproducing method for recording medium with improved performance of interactive reproduction progress
JP3948051B2 (en) Editing apparatus and data editing method
US7039298B1 (en) Extraction of audio/visual segment from digital versatile disk content
JPH11225307A (en) Video data recoding medium and video data reproduction device
JP3356768B2 (en) Recording method, playback device
JP3345352B2 (en) Recording method of recording medium
JP3345411B2 (en) Recording method of recording medium
JP3356759B2 (en) Recording method, playback device
JP2007095292A (en) Data generation apparatus and data generation method
US7646968B1 (en) End-user configurable digital versatile disk menus and methods for generating the same
JP3356767B2 (en) Recording method, playback device
JPH10145723A (en) Reproduction control data generation device and method
JP2002074906A (en) Reproducing data editing system
JPH10145713A (en) Video data generation device and method therefor

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040415

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070315

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070327

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070409

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100427

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110427

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120427

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130427

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140427

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees