JP2007280578A - 副音声信号の記録方法および信号処理装置 - Google Patents

Abstract

【課題】制御信号を含めた音声記述信号の記録方法がＤＶＤのフォーマットの規格に取り入れられていないため、記録することができない。すなわち、音声記述信号の制御情報が欠落してしまう。
【解決手段】ＤＶＤの記録規格の範囲内で、音声記述信号を記録すると共に、リアルタイムデータインフォメーションパックの生産者情報記録領域もしくは、制御ファイルの生産者情報記録領域に音声制御信号とその制御信号が有効となるプレゼンテーションタイムスタンプを記録する。そして、再生時には、制御信号を抽出し、その制御信号が有効となるプレゼンテーションタイムスタンプ時間において、その制御情報を基に音声記述信号と主音声信号に対して、制御を実施する。
【選択図】図１

Description

本発明は、映像および音声の記録技術に関する。特に、副音声を持ち、かつ主音声と副音声の出力を制御する制御情報を保有しているコンテンツを記録する技術に関する。

主音声と副音声を持つコンテンツを記録する場合には、一般的に、ＤＶＤビデオレコーディングフォーマットが適している。なぜならば、ＤＶＤビデオレコーディングには、デュアルモノ記録という規格がある。このデュアルモノ記録は、主音声および副音声をひとつの音声ストリームとして符号化し、記録するものである。そして、再生時は、音声ストリームをデコードして、主音声もしくは副音声のいずれか一方を選択して、出力することができる。

また、ＤＶＤビデオフォーマットでは、音声ストリームとして、８本分の領域を確保している。すなわち、主音声をストリーム０，副音声をストリーム１に記録すればよい（例えば、特許文献１参照。）。

さらに、ＤＶＤビデオレコーディングのデュアルモノ記録をＤＶＤビデオの２つのストリームに変換することを特徴とする手法もある（例えば、特許文献２参照。）。

これら両者の特許の特徴は、主音声と副音声を別々のストリームとして記録するというものである。一方で、難視者に対して、画面の状況を説明する音声として、音声記述という記述がある。この音声記述は、主音声に対して、副音声ということができる。が、音声記述は、主音声と合成させて出力する必要があるため、その合成割合を制御信号として、保有している。
特開２００３−１３２６２８号公報 特開２００５−１１７２６４号公報

しかしながら従来の方法では、主音声と音声記述とを合成させる割合の示している制御信号の記録方法については、具体的に示されていない。すなわち、主音声と音声記述とを合成させる割合の示している制御信号を記録できないという欠点を有していた。この点を少し詳しく説明する。DVD規格には、上記制御信号を上記制御信号として、認識できる記録領域が存在しない。従って、上記合成割合の情報を保持することができないため、再生時には、上記合成割合は、任意のものとなってしまう。すなわち、上記合成割合は、本来の作成者の意図とは、異なる割合で再生されてしまうという欠点を有していた。

そこで、本発明では、音声合成の制御信号を含む副音声の記録方法および記録装置を提供するものである。

上記目的を達成するために、本発明は、放送信号を復号して映像信号および主音声信号および副音声信号および制御信号を含む音声信号を抽出する放送復号器と、前記放送復号器からの映像信号を符号化する映像信号符号化器と、前記放送復号器からの主音声信号を符号化する主音声信号符号化器と、前記放送復号器からの副音声信号を符号化する副音声信号符号化器と、前記放送復号器からの制御信号を含む音声信号から音声制御信号を抽出する音声制御信号抽出器と、前記映像信号符号器の出力である符号化された映像信号および前記主音声符号器の出力である符号化された主音声信号および前記副音声符号器の出力である符号化された副音声信号および前記音声制御信号抽出器の出力である音声制御信号に対して、ＤＶＤのビデオレコーディングフォーマットもしくは、ＤＶＤビデオフォーマットに変換するシステムエンコーダと、前記システムエンコーダからのストリームに対して、記録に適切なタイミングを指示しながら、記録装置にストリームを転送するストリーム制御器と、前記ストリーム制御器からのストリームを記録に最適な信号に変換して記録媒体に記録する記録装置とを備えている。

そして、上記システムエンコーダは、ＤＶＤビデオレコーディングフォーマットもしくはＤＶＤビデオフォーマットに記載されているパディングパケットのパディングデータ部分に音声制御情報を埋め込む機能を有する。また、上記システムエンコーダは、ＤＶＤビデオレコーディングフォーマットに記載されている実時間データ情報パックの生産者情報記録領域に音声制御情報を埋め込む機能を有する。さらに、上記システムエンコーダは、ＤＶＤビデオフォーマットに記載されている制御ファイルのナビ情報領域の生産者情報表に前記制御信号を埋め込む機能を有する。

以上のように本発明によれば、副音声信号をその制御信号と共に記録することができる。さらに、再生時に副音声を再生したり、再生しなかったりというような効果も得られる。しかも、ＤＶＤレコーディング規格で記録されている副音声信号と制御信号を高速にＤＶＤビデオ規格に変換することができる。

副音声信号をその制御信号と共に記録するという目的を、最小の部品点数で、ＤＶＤレコーディング規格およびＤＶＤビデオ規格に準拠しつつ、実現した。

（実施の形態１）
図１は本発明の実施の形態１における信号処理ブロック図であり、図２は音声の制御信号を含む副音声データを記録する記録フォーマットの図である。図１中の１はデジタル放送信号の復号器であり、２は映像信号符号化器であり、３は主音声符号化器であり、４は副音声符号化器であり、５は音声制御信号抽出器であり、６はシステムエンコーダであり、７はストリーム制御器であり、８は記録再生装置であり、９はシステムデコーダであり、１０は映像信号復号器であり、１１は主音声復号器であり、１２は副音声復号器であり、１３は音声制御信号抽出器であり、１４は合成器である。図２中の１０１はパックヘッダであり、１０２はパケットヘッダであり、１０３はオーディオデータであり、１０４はパディングパケットデータであり、１０５はパケットヘッダであり、１０６は記述子であり、１０７は記述子である。

まず、記録処理について、図を用いて、説明する。デジタル放送の信号がデジタル放送復号器１に入力される。デジタル放送復号器１では、入力されたストリームに対して、映像・音声等のストリームを分離すると共に、圧縮映像信号を復号し、映像のベースバンド信号を映像符号化器２に出力し、圧縮主音声信号を復号し、主音声のベースバンド信号を主音声符号化器３に出力し、圧縮副音声信号を復号し、副音声のベースバンド信号を副音声符号化器４に出力し、副音声のストリームを音声制御信号抽出器に出力する。映像符号化器２は、入力された映像のベースバンド信号に対して、例えばＤＶＤビデオレコーディング規格もしくはＤＶＤビデオ規格に準拠するように圧縮処理を施してストリーム化して、システムエンコーダ６に出力する。主音声符号化器３は、入力された音声のベースバンド信号に対して、例えばＤＶＤビデオレコーディング規格もしくはＤＶＤビデオ規格に準拠するように圧縮処理を施してストリーム化して、システムエンコーダ６に出力する。副音声符号化器４は、入力された音声のベースバンド信号に対して、例えばＤＶＤビデオレコーディング規格もしくはＤＶＤビデオ規格に準拠するように圧縮処理を施してストリーム化して、システムエンコーダ６に出力する。音声制御信号抽出器５は、入力されたストリームから音声制御信号を抽出する。ここでは、具体的に例えば、英国の音声記述を例に用いて音声制御信号の抽出方法を述べる。まず、入力されるストリームは、分離されていることを前提としているが、分離されている必要はない。もし、分離されていなければ、副音声信号のパケット識別情報（ＰＩＤ）を用いて、分離することができる。副音声信号のＰＥＳヘッダの構造は、ＰＥＳ＿ｐｒｉｖａｔｅ＿ｄａｔａ＿ｆｌａｇが有効になっており、独自データがＰＥＳヘッダの中に埋め込まれていることがわかる。従って、まず、このＰＥＳ＿ｐｒｉｖａｔｅ＿ｄａｔａ＿ｆｌａｇが有効であることを確認する。ＰＥＳ＿ｐｒｉｖａｔｅ＿ｄａｔａ＿ｆｌａｇが有効であれば、ＰＥＳ＿ｅｘｔｅｎｓｉｏｎ＿ｆｌａｇ＿２の直後の１６バイトが音声制御信号である。なお、英国の音声記述の詳細は、ｈｔｔｐ：／／ｗｗｗ．ｂｂｃ．ｃｏ．ｕｋ／ｒｄ／ｐｕｂｓ／ｗｈｐ／ｗｈｐ０５１．ｓｈｔｍｌに記載されているので、そちらの文献を参照願いたい。このようにして、抽出した１６バイト音声制御信号をシステムエンコーダに出力する。システムエンコーダ６では、ＤＶＤビデオレコーディング規格あるいはＤＶＤビデオ規格に準拠するように、映像ストリームおよび音声ストリームに対して、システムフォーマットを施す。ここで、音声制御信号のフォーマット化について、述べる。音声制御信号に対応する再生装置では、音声制御信号の制御に基づいて、主音声および副音声を制御すればよいが、音声制御信号に対応しない再生装置で、再生する場合には、副作用を発生させないようにしなければならない。従って、音声制御信号のフォーマット化は、限られたものになる。この様子を、図２を用いて説明する。

まず、第１の方法としては、パディングパケットを用いて、音声制御信号をパディングパケット内に埋め込むものである。パディングパケットは、有効データではないため、ここにデータを持たせておいても、従来機種、すなわち、音声制御信号に対応してない装置に対して、何ら悪影響を及ぼさない。これを示したものが図２中のパディングパケット１０４内の音声記述子１０６である。なお、１つの音声パックの中には、音声パケットとパディングパケットの２つのパケットを持つことがされているため、音声パックの中に音声パケットを持つ場合と持たない場合の２種類を記載した。ここで、パディングパケット内への埋め込み方としては、第１の方法として、パディングデータの始まる先頭から音声記述子のみを挿入する方法がある。また、第２の方法として、任意の位置に埋め込む方法がある。第２の方法の場合、開始地点を明確にするために、タグをつける方法があげられる。タグは、どのようなものでも良いが、パディングデータを拡張することを鑑みて、体系的に決めることが望ましい。また、多機種との整合性から、音声記述子のタグを用いることも一案である。この場合、タグとして、４４５４４７４１４４（１６進数）を用いると、英国の音声記述子との整合性がとり易い。なお、このタグを用いる手法は、音声制御信号をパディングデータの開始先頭から挿入する場合でも、用いることができる。

次に第２の方法について、述べる。 音声制御信号をＰａｃｋｅｔ＿Ｈｅａｄｅｒ内に埋め込む手法である。ＤＶＤビデオレコーディング規格もしくはＤＶＤビデオ規格の音声パケットにおいては、図２のようにＰａｃｋ＿Ｈｅａｄｅｒ，Ｐａｃｋｅｔ＿Ｈｅａｄｅｒが、各オーディオパックに付加されている。ここのＰａｃｋｅｔ＿Ｈｅａｄｅｒにおいて、ＰＥＳ＿ｐｒｉｖａｔｅ＿ｄａｔａ＿ｆｌａｇを有効にして、独自データの挿入領域を確保する。そして、音声制御情報、すなわち、音声記述子を独自データとして、挿入する。これら、第１の方法、第２の方法の両方に共通して、音声記述子すべてを書き込む場合と、必要な制御情報のみ書き込み場合の２種類が選択できる。英国の音声記述子を例にとると、音声記述子すべてを書き込む場合、１６バイトのデータ量となる。音声記述子をすべて書き込み場合、放送の音声記述子をそのまま書き込む、すなわち、詳細な制御情報を抽出しなくても良いというメリットがある。また、音声記述子すべてを書き込まず、必要な制御情報のみを書き込む場合（英国の音声記述子の場合、減衰情報、左右移動情報（パン情報）等である。）、効率の良い挿入ができる（英国の音声記述の場合、２バイト）というメリットがある。

以上のようにして、従来機種、すなわち、音声制御情報に対応していない機種に対して、悪影響を及ぼさない形式で、ＤＶＤビデオレコーディング規格もしくはＤＶＤビデオ規格に音声制御情報を埋め込むことができる。なお、音声制御情報が有効になるプレゼンテーションタイムスタンプの記録方法であるが、この記録については、パケットヘッダのプレゼンテーションタイムスタンプを用いても良いし、音声記述子を書き込む領域に記述しても良い。

次に、埋め込まれた音声制御情報を再生する手順について、説明する。まず、上記、第１の方法、すなわち、Ｐａｄｄｉｎｇパケットに音声情報が埋め込まれている場合について、説明する。図１中の再生装置８から、音声制御情報を含むコンテンツを再生し、ストリームをストリーム制御器７に転送する。ストリーム制御器７は、首尾よくシステムデコーダ９にストリームを転送する。例えば、同時録画再生の機能を有する場合は、記録中のコンテンツのストリームおよび再生中のコンテンツのストリームを途切れることなく、転送する機能を有する。さて、システムデコーダ９は、Ｐａｃｋ＿Ｈｅａｄｅｒ，Ｐａｃｋｅｔ＿Ｈｅａｄｅｒを解析することにより、入力されたストリームを、映像パック，主音声パック，副音声パックに分離させて、ぞれぞれのパックを映像復号器１０，主音声復号器１１，副音声復号器１２に出力する。そして、音声制御信号は、副音声パックのＰａｄｄｉｎｇパケットに挿入されているので、音声制御信号抽出器にも副音声パックを出力する。映像復号器１０は、入力された映像パックに対して、復号処理を行い、ベースバンドの映像信号を生成して、出力する。主音声復号器１１は、入力された主音声パックに対して、復号処理を行い、ベースバンドの音声信号を生成して、合成器１４に出力する。副音声復号器１２は、入力された副音声パックに対して、復号処理を行い、ベースバンドの副音声信号を生成して、合成器１４に出力する。そして、音声制御信号抽出器１３は、入力された副音声パックから、音声制御信号を抽出して、その制御信号を合成器１４に出力する。ここで、音声制御信号の抽出方法の一例を簡単に述べる。まず、音声制御信号が、パディングデータ内に埋め込まれている場合について、述べる。音声制御信号は、パディングデータ内に埋め込まれている。もし、パディングデータの先頭に埋め込まれているのであれば、Ｐａｃｋ＿Ｈｅａｄｅｒ，Ｐａｃｋｅｔ＿Ｈｅａｄｅｒの順に解析し、Ｐａｃｋｅｔ＿Ｈｅａｄｅｒの直後のデータからが音声制御信号となる。また、タグ付きの場合であれば、Ｐａｃｋ＿Ｈｅａｄｅｒ，Ｐａｃｋｅｔ＿Ｈｅａｄｅｒの順に解析した後、タグを探索し、タグが見つかれば、その直後のデータからが音声制御信号となる。次に、音声制御信号がＰａｃｋｅｔ＿Ｈｅａｄｅｒ内に埋め込まれている場合について、述べる。Ｐａｃｋｅｔ＿Ｈｅａｄｅｒを探索し、順次Ｐａｃｋｅｔ＿Ｈｅａｄｅｒ内を解析すると、ＰＥＳ＿ｐｒｉｖａｔｅ＿ｄａｔａ＿ｆｌａｇが有効であることが検出される。このｆｌａｇが検出されると、Ｐ−ＳＴＤ＿ｂｕｆｆｅｒ＿ｓｉｚｅ後のデータが音声制御信号である。このようにして音声制御信号を抽出する。音声制御信号の中には、主音声および副音声の合成割合，減衰割合，左右操作（パン）割合等の情報が含まれている。これらの制御情報を合成器１４に出力する。合成器１４は、音声制御情報抽出器１３からの制御情報に基づき、主音声復号器１１からの主音声信号と副音声信号復号器１２からの副音声信号に対して、最適な合成を施し、出力する。

上記実施例は、記録装置と再生装置の両方を述べているが、記録装置のみ、もしくは、再生装置のみでも可能であることはいうまでもない。

（実施の形態２）
次に本発明の実施の形態２について、図３および図５および図８を用いて、説明する。実施の形態１と異なるところは、音声制御情報の埋め込み場所にある。実勢の形態１では、音声制御情報は、副音声のパック内に埋め込んだ。一方、実施の形態２では、制御パックに埋め込む。すなわち、ＤＶＤビデオレコーディング規格においては、実時間データ情報パック内に埋め込む。また、ＤＶＤビデオ規格においては、ナビゲーションパック内に埋め込む。

まず、ＤＶＤレコーディング規格の場合について、述べる。図８を用いて、簡単に信号の流れを説明する。実施の形態２での特徴は、システムエンコーダ４１およびシステムデコーダ４２にあるので、これらを中心に簡単に説明する。システムエンコーダ４１に入力される映像符号化器２からの映像ストリーム，主音声符号化器３からの主音声ストリーム，副音声符号化器４からの副音声ストリーム，音声制御信号抽出器５からの音声制御情報までの信号の流れは、実施の形態１と同一であるので、ここでは、割愛する。

図３は、ＤＶＤビデオレコーディングフォーマットの実時間情報データパック（ＲＤＩパック）の大まかな構造を示しており、２０１はパックヘッダ、２０２はシステムヘッダ、２０３はパケットヘッダ、２０４はサブストリームＩＤ、２０５はＲＤＩデータ、２０６は生産者情報記録領域である。システムエンコーダ４１には、映像ストリーム，主音声ストリーム，副音声ストリーム，音声制御信号が入力されている。システムエンコーダ４１において、映像ストリームから映像パック、主音声ストリームと副音声パックから音声パックを生成する。そして、ＲＤＩパックをＣＰＵが生成し、システムエンコーダに入力するか、ＲＤＩパックそのものをシステムエンコーダが生成する。ここで、ＲＤＩパックには、図３に示した生産者情報記録領域２０６というものが設けられている。この生産者情報記録領域２０６は、生産者が自由に利用できる領域であるので、この生産者情報記録領域２０６に、音声制御情報を格納し、ＲＤＩパックを完成させる。さらに、どの副音声パケットから音声情報が変化するかを示す情報、例えば、ＲＤＩパックを起点とした副音声パック数、もしくは、プレゼンテーションタイムスタンム、をＲＤＩパックの生産者情報記録領域２０６に書き込む。そして、これらのパックをストリーム制御器７に出力する。その後、媒体に記録する課程は、実施の形態１と同一であるので、ここでは、割愛する。

再生時は、媒体から、ストリームを再生して、システムデコーダ４２に入力され、映像復号器１０，主音声復号器１１，副音声復号器１２に至るまでの過程は、実施の形態１と同一なので、ここでは、割愛する。システムデコーダ４２では、入力されたストリームからパックヘッダ，パケットヘッダを解析して、映像パックは映像復号器１０へ、主音声パックは主音声復号器１１へ、副音声パックは副音声復号器１２へ、ＲＤＩパックを音声制御情報抽出器４３へ、送出する。ここで、映像復号器１０、主音声復号器１１、副音声復号器１２の動作は実施の形態１と同一であるので、ここでは割愛する。音声制御信号抽出器４３では、入力されたＲＤＩパックを解析し、音声制御情報とその音声制御情報が有効になる副音声パックのプレゼンテーションタイムスタンプを抽出する。そして、音声制御情報が有効になる副音声パックのプレゼンテーションタイムスタンプの時刻で、音声制御情報に基づいた信号を合成器１４に出力する。合成器１４の動作は、実施の形態１と同一であるので、ここでは割愛する。

また、ＲＤＩパックに埋め込まれている音声制御情報が有効になる副音声パックを示す手段が、ＲＤＩパックからのパック数である場合には、音声制御信号抽出器４３から副音声復号器１２にパック数を通知し、副音声復号器１２では、通知されたパック数に該当するパックのデコードが開始されると、その開始タイミングを音声制御信号抽出器４３に通知する。そして、音声制御信号抽出器４３は、副音声復号器１２から通知されたタイミングで、合成器１４に音声制御情報を通知する。

次に、ＤＶＤビデオ規格について、述べる。ＤＶＤレコーディング規格と異なる点は、ＲＤＩパックでなく、ナビゲーションパックに音声制御情報および音声制御情報が有効となる副音声パックの位置を示す情報が書き込まれる点である。図５にナビゲーションパックの構造を示した。図５において、４０１はパックヘッダ、４０２はシステムヘッダ、４０３はＰＣＩパケット、４０４はＤＳＩパケット、４０５はＤＳＩパケット内に在るリザーブ領域である。

ＤＶＤビデオ規格では、音声制御情報および音声制御情報が有効となる副音声パックの位置を示す情報をＤＳＩパケット内のリザーブ領域に書き込む。すなわち、システムエンコーダ４１で、ナビパックを生成する過程において、上記の音声制御情報および音声制御情報が有効となる副音声パックの位置を示す情報を書き込む。また、再生時には、ナビパックを音声制御信号情報抽出器４３に転送するようにシステムデコーダ４２が動作する。なお、その他の動作は、ＤＶＤレコーディング規格の場合と同様であるので、ここでは割愛する。

以上のようにして、副音声信号を音声制御信号と共に記録し、また、再生することができる。

（実施の形態３）
次に本発明の実施の形態３について、図４および図６を用いて、説明する。実施の形態１および実施の形態２と異なるところは、音声制御情報の埋め込み場所にある。実勢の形態１および実施の形態２では、音声制御情報をストリーム内に埋め込んだ。一方、実施の形態３では、制御ファイルに埋め込む。

図４は、ＤＶＤレコーディング規格の制御ファイルの構造を簡略化したものである。図４において、３０１は制御ファイル、３０２はプログラムセット、３０３はナビ情報、３０４は管理情報、３０５は生産者情報表である。また、図６は、信号処理を示す概略ブロック図である。図６において、２１は制御ファイル生成器、２２はシステムエンコーダ、２３はシステムデコーダ、２４は音声制御信号抽出器、２５はストリーム制御器である。基本的な信号の処理は、上記実施の形態１および実施の形態２と同様なので、ここで、制御ファイル生成器２１およびストリーム制御器２５および音声制御信号抽出器２４の動作について、詳しく述べる。

音声制御情報抽出器５は、ストリームから音声制御情報と共に、プレゼンテーションタイムスタンプを抽出し、制御ファイル生成器２１に送信する。制御ファイル２１では、音声制御情報と共にその音声制御情報が有効になるプレゼンテーションタイムスタンプを制御ファイル３０１の生産者情報表３０５に書き込む。そして、完成した制御ファイルをストリーム制御器２５に転送し、記録媒体に書き込む。また、ストリーム制御器２５は再生時には、記録媒体より制御ファイル３０１を読み出し、音声制御信号抽出器２４に送出する処理を行う。音声制御信号抽出器２４では、制御ファイル３０１から生産者情報表３０５を検出し、音声制御情報と音声制御情報が有効になるプレゼンテーションタイムスタンプを抽出し、音声制御情報が有効になるプレゼンテーションタイムスタンプの時刻に音声制御信号を合成器１４に送出する。

以上のようにして、副音声信号を音声制御信号と共に記録し、また、再生することができる。

（実施の形態４）
次に、実施の形態４について、図７を用いて、説明する。図７は、実施の形態４における信号処理ブロック図である。図７において、１５は音声制御信号分離器であり、３１はデジタル放送復号器であり、３２はシステムエンコーダである。実施の形態１から３と異なるところは、副音声信号を記録する際において、符号化されたままの信号を活用するところにある。すなわち、実施の形態１から３における副音声符号化器４を必要としない点にある。図７を用いて、簡単に信号の流れを説明する。ここで、実施の形態１から３と異なる点が副音声信号の記録処理にあることから、音声制御信号分離器１５について、詳しく述べる。他のブロックの動作は、実施の形態１から３と同様であるので、ここでは割愛する。すなわち、音声制御情報の記録場所および再生時の抽出については、実施の形態１から３と同様である。

デジタル放送復号器３１からの出力のうち、映像信号と主音声信号は実施の形態１から３と同様なので、ここでは割愛する。副音声信号は、パック化されたエレメンタリーストリームの状態で、音声制御信号分離器１５に出力する。音声制御信号分離器１５では、パック化されたエレメンタリーストリームから、副音声のエレメンタリーストリームを抜き出し、システムエンコーダ３２に送出すると共に、音声制御信号とその音声制御信号が有効になるプレゼンテーションタイムスタンプを抽出し、出力する。図７においては、音声制御信号もシステムエンコーダに送出されている。これは、ストリーム上に音声制御信号を記録する場合である。実施の形態３のように制御ファイルに音声制御信号を書き込んでも良い。

以上のようにして、副音声信号を記録することができる。

（実施の形態５）
最後に、本発明の実施の形態５について、図９を用いて説明する。図９は、副音声および音声制御情報をＤＶＤレコーディング規格で記録したコンテンツに対して、ＤＶＤビデオ規格に変換する部分の信号処理ブロック図である。図９において、５１は音声制情報抽出器であり、５２はナビゲーションパック生成器であり、５３はストリーム制御器である。実施の形態１から実施の形態４と異なる点は、ＤＶＤレコーディング規格で記録されている副音声信号および音声制御情報をＤＶＤビデオ規格に変換するという点にある。従って、この変換のしくみに特徴があり、記録もしくは再生課程もしくはＤＶＤレコーディング規格による副音声および音声制御情報記録は、実施の形態１から実施の形態４と同様であるので、ここでは割愛する。

副音声および音声制御情報をＤＶＤレコーディング規格で記録したコンテンツを記録媒体から再生し、ストリーム制御器５３に入力する。映像および音声のエレメンタリーの変換は、従来発明されている手法と同様なので、ここでは割愛する。すなわち、ストリーム制御器５３で、映像および音声パックの変換が行われる。音声制御情報を抽出するために、まず、音声制御情報がＲＤＩパックに書かれている場合について、説明する。

音声制御情報がＲＤＩパックに書かれている場合は、ＲＤＩパックのみを音声制御情報抽出器５１に送信する。音声制御情報抽出器５１は、ＲＤＩパックを解析して、生産者情報記録領域２０６を検出する。そして、生産者情報記録領域２０６から音声制御情報と音声制御情報が有効となるプレゼンテーションタイムスタンプ時刻を抽出し、ナビパック生成器５２に送出する。ナビパック生成器５２では、入力された信号をもとにナビパックを生成する。ここで、音声制御情報以外のデータによるナビパック生成は、従来発明されている手法と同様なので、ここでは、割愛する。抽出された音声制御情報と音声制御情報が有効になるプレゼンテーションタイムスタンプ時刻を予備領域４０５に書き込み、ナビパックを完成させてストリーム制御器５３に送出する。ストリーム制御器５３では、記録装置８を介して記録媒体に、生成されたＤＶＤビデオ規格のストリームを記録する。

また、音声制御情報と音声制御情報が有効となるプレゼンテーションタイムスタンプ時刻が生産者情報表３０５に書き込まれている場合は、ストリーム制御器５３は制御ファイルを音声制御情報抽出器５１に送出する。音声制御情報抽出器５１では、制御ファイルを解析し、生産者情報表３０５を検出し、音声制御情報と音声制御情報が有効となるプレゼンテーションタイムスタンプ時刻を抽出し、ナビパック生成器５２に送出する。ナビパック生成器５２の動作は、上記と同様なので、割愛する。

以上のようにして、首尾よくＤＶＤレコーディングフォーマット規格で記録されたコンテンツをＤＶＤビデオフォーマット規格のコンテンツに変換することができる。

なお、パディングデータ内に音声制御情報を記録した場合は、ＤＶＤレコーディング規格とＤＶＤビデオ規格で共通となるので、変換機構を必要としない。すなわち、パディングデータ内に音声制御情報を記録することは、さらなるメリットがある。

本発明にかかる副音声信号の記録方法および信号処理装置は、副音声を持ち、かつ主音声と副音声の出力を制御する制御情報を保有しているコンテンツを記録する用途に適用できる。

本発明の実施の形態１における信号処理ブロック図 音声の制御信号を含む副音声データを記録する記録フォーマットの図 ＤＶＤビデオレコーディングフォーマットの実時間情報データパック（ＲＤＩパック）の大まかな構造を表した図 ＤＶＤレコーディング規格の制御ファイルの構造を簡略化した図 ナビゲーションパックの構造を示した図 本発明の実施の形態３における信号処理ブロック図 本発明の実施の形態４における信号処理ブロック図 本発明の実施の形態２における信号処理ブロック図 本発明の実施の形態５における信号処理ブロック図

符号の説明

１ デジタル放送復号器
２ 映像信号符号化器
３ 主音声符号化器
４ 副音声符号化器
５ 音声制御信号抽出器
６ システムエンコーダ
７ ストリーム制御器
８ 記録装置（再生装置）
９ システムデコーダ
１０ 映像復号器
１１ 主音声復号器
１２ 副音声復号器
１３ 音声制御信号抽出器
１４ 合成器
１５ 音声制御信号分離器
２１ 制御ファイル生成器
２２ システムエンコーダ
２３ システムデコーダ
２４ 音声制御信号抽出器
３１ デジタル放送復号器
３２ システムエンコーダ
４１ システムエンコーダ
４２ システムデコーダ
４３ 音声制御信号抽出器
５１ 音声制御信号抽出器
５２ ナビゲーションパック生成器
５３ ストリーム制御器
１０１ パックヘッダ（音声パック）
１０２ パケットヘッダ（音声パケットもしくはパディングパケット）
１０３ 音声データ
１０４ パディングパケットデータ
１０５ パケットヘッダ（音声パケット）
１０６ 音声記述子記録部
２０１ パケットヘッダ（実時間データ情報パック）
２０２ システムヘッダ
２０３ パケットヘッダ
２０４ サブストリーム識別子
２０５ 実時間データ情報
２０６ 生産者情報記録部
３０１ 制御ファイル
３０２ プログラムセット
３０３ ナビ情報
３０４ 管理情報
３０５ 生産者情報表
４０１ パックヘッダ（ナビゲーションパック）
４０２ システムヘッダ
４０３ ＰＣＩパケット
４０４ ＤＳＩパケット
４０５ 予備領域

Claims (17)

1. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツを記録する場合に於いて、前記制御信号を音声情報とは独立となるパケットに記録することを特徴とする副音声信号の記録方法。
2. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツをＤＶＤに記録する場合において、パディングパケットを用いて、前記制御信号を記録することを特徴とする副音声信号の記録方法。
3. パディングパケットを副音声信号のパケットと同一のパックに埋め込むことを特徴とする、請求項２記載の副音声信号の記録方法。
4. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツをＤＶＤビデオレコーディングフォーマットで記録する場合において、実時間データ情報の生産者情報記録領域に前記制御信号を記録することを特徴とする副音声信号の記録方法。
5. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツをＤＶＤビデオレコーディングフォーマットで記録する場合において、制御ファイルのナビ情報領域の生産者情報表に前記制御信号を記録することを特徴とする副音声信号の記録方法。
6. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツをＤＶＤビデオフォーマットで記録する場合において、ナビゲーションパックのデータ検索情報データの予備領域に前記制御信号を記録することを特徴とする副音声信号の記録方法。
7. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツを記録する場合に於いて、放送信号を復号して主音声信号および副音声信号および制御信号を含む音声信号を抽出する放送復号器と、前記放送復号器からの主音声信号を符号化する主音声信号符号化器と、前記放送復号器からの副音声信号を符号化する副音声信号符号化器と、前記放送復号器からの制御信号を含む音声信号から音声制御信号を抽出する音声制御信号抽出器と、前記主音声符号器の出力である符号化された主音声信号、および前記副音声符号器の出力である符号化された副音声信号、および前記音声制御信号抽出器の出力である音声制御信号に対して、ＤＶＤのビデオレコーディングフォーマットもしくは、ＤＶＤビデオフォーマットに変換するシステムエンコーダと、前記システムエンコーダからのストリームに対して、記録に適切なタイミングを指示しながら、記録装置にストリームを転送するストリーム制御器と、前記ストリーム制御器からのストリームを記録に最適な信号に変換して記録媒体に記録する記録装置とを具備する信号処理装置。
8. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツが記録されている媒体からコンテンツを再生する場合に於いて、記録媒体からストリームを再生する再生装置と、転送に適切なタイミングを指示して、前記再生装置からのストリームをシステムデコーダに転送するストリーム制御器と、前記ストリーム制御器からのストリームに対して、符号化された主音声ストリームおよび符号化された副音声ストリームに分離するシステムデコーダと、前記システムデコーダからの符号化された主音声ストリームに対して、復号処理を行い、主音声信号を生成する主音声復号器と、前記システムデコーダからの符号化された副音声ストリームに対して、復号処理を行い、副音声信号を生成する副音声復号器と、前記システムデコーダからの符号化された副音声ストリームから音声制御情報を抽出する音声制御信号抽出器と、前記音声制御信号抽出器からの制御情報に基づいて、前記主音声復号器からの主音声信号と前記副音声復号器からの副音声信号とを合成して、出力する合成器とを具備することを特徴とする信号処理装置。
9. 請求項７記載の放送復号器と、請求項７記載の主音声信号符号化器と、請求項７記載の副音声信号符号化器と、請求項７記載の音声制御信号抽出器と、請求項７記載のシステムエンコーダと、記録ストリームと再生ストリームとを首尾よく制御するストリーム制御器とを具備する請求項８記載の信号処理装置。
10. ＤＶＤビデオレコーディングフォーマットもしくはＤＶＤビデオフォーマットに記載されているパディングパケットのパディングデータ部分に音声制御情報を埋め込むシステムエンコーダを具備することを特徴とする請求項７および請求項９記載の信号処理装置。
11. ＤＶＤビデオレコーディングフォーマットに記載されている実時間データ情報パックの生産者情報記録領域に音声制御情報を埋め込むシステムエンコーダを具備することを特徴とする請求項７および請求項９記載の信号処理装置。
12. ＤＶＤビデオフォーマットに記載されている制御ファイルのナビ情報領域の生産者情報表に前記制御信号を埋め込むシステムエンコーダを具備することを特徴とする請求項７および請求項９記載の信号処理装置。
13. ＤＶＤビデオレコーディングフォーマットに記載されている制御ファイルのナビ情報領域の生産者情報表に前記制御信号を埋め込む制御ファイル生成器と、前記制御ファイルを記録媒体に記録するために、適切にタイミングを調整するストリーム制御器とを具備することを特徴とする請求項７および請求項９記載の信号処理装置。
14. 主音声と制御信号を含む副音声の２つの音声信号を少なくとも含むコンテンツを記録する場合に於いて、放送信号を復号して主音声信号および制御信号を含む符号化された副音声信号を抽出する放送復号器と、前記放送復号器からの主音声信号を符号化する主音声信号符号化器と、前記放送復号器からの制御信号を含む符号化された副音声信号から音声制御信号と符号化された副音声信号とを分離する音声制御信号分離器と、前記主音声符号器の出力である符号化された主音声信号および前記音声制御信号分離器の出力である符号化された副音声信号および音声制御信号に対して、ＤＶＤのビデオレコーディングフォーマットもしくは、ＤＶＤビデオフォーマットに変換するシステムエンコーダと、前記システムエンコーダからのストリームに対して、記録に適切なタイミングを指示しながら、記録装置にストリームを転送するストリーム制御器と、前記ストリーム制御器からのストリームを記録に最適な信号に変換して記録媒体に記録する記録装置とを具備する信号処理装置。
15. 請求項１４記載の放送復号器と、請求項１４記載の映像信号符号化器と、請求項１４記載の主音声信号符号化器と、請求項１４記載の音声制御信号分離器と、請求項１４記載のシステムエンコーダと、記録ストリームと再生ストリームとを首尾よく制御するストリーム制御器とを具備する請求項８記載の信号処理装置。
16. 請求項４記載の記録装置で記録したコンテンツに対して、実時間情報パック内にある音声信号の制御情報を請求項６記載のナビゲーションパックの予備領域に書き込む制御信号書き込み領域変換器を具備することを特徴とする信号処理装置。
17. 請求項５記載の記録装置で記録したコンテンツに対して、制御ファイルのナビ情報内にある音声信号の制御情報を請求項６記載のナビゲーションパックの予備領域に書き込む制御信号書き込み領域変換器を具備することを特徴とする信号処理装置。

Images