JP2008123674A - 記録媒体におけるアフターレコーディング方法及び装置並びにそのデジタル記録媒体の再生方法及び装置 - Google Patents

Abstract

【課題】アフレコ音声を容易にオリジナルの映像と時間的に正確に一致させて再生することのできるアフレコの方法を提供する。
【解決手段】記録媒体１９からビットストリームを読み出す第１ステップと、このビットストリームをデコードする第２ステップと、このビットストリームのデコードに同期して、新たなデータをエンコードしてアフレコ用ビットストリームとする第３ステップと、アフレコ用ビットストリームを記録媒体１９の所定の領域に書き込む第４ステップと、記録媒体１９から読み出したビットストリームとアフレコ用ビットストリームとの時間的な対応関係を示す情報として、記録媒体１９から読み出したビットストリームのうちアフレコ用ビットストリームと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を記録媒体１９の付加情報を記録するための領域に書き込む第５ステップとを含む。
【選択図】図７

Description

本発明は、記録媒体に記録したビデオデータ等に対してアフターレコーディングを行う方法及び装置等に関する。

アフターレコーディング（以下、単に「アフレコ」ともいう）は、例えばスタジオ収録や野外収録等でオリジナルデータ（ビデオデータのみ、あるいはビデオデータとセリフ等の音声データ）を記録した後、編集過程において、効果音等の新たな音声データ（アフレコ音声データ）を追加して記録したり、あるいはオリジナルの音声データの一部をこうしたアフレコ音声データで置き換えたりする音声編集処理法である。

デジタル記録媒体に記録したオリジナルデータに対してアフレコを行う手法には、例えば次の（１）〜（３）のような幾通りかのものが存在しているが、本明細書ではこのうちの（１）及び（３）の手法を対象として説明を行うものとする。

（１）オリジナルデータを再生しながらアフレコ音声を入力し、このアフレコ音声データを、オリジナルデータの再生時にリアルタイムにオリジナルデータと多重化して当該デジタル記録媒体に記録する。

（２）オリジナルデータを再生しながら入力したアフレコ音声データを一旦別の記録媒体に記録しておき、その後（即ちリアルタイムでなく）、この別の記録媒体から再生したアフレコ音声データを、オリジナルデータを記録しているデジタル記録媒体に多重化して記録する。

（３）当該デジタル記録媒体に、アフレコ音声のデータをオリジナルデータとは多重化せずに記録し、再生時に、当該デジタル記録媒体から読み出したオリジナルの音声データとアフレコ音声データとをミキシングして完成音として出力する。

図５は、デジタル記録媒体へのデータ（ビットストリーム）の記録例を示す。ビデオビットストリームＶと、主音声ビットストリームＡ１と、副音声ビットストリームＡ２とが、１つのストリームに多重化して記録されている。ビデオビットストリームのビットレートに対して音声ビットストリームのビットレートは低いので（例えば、前者が６Ｍｂｐｓまたは８Ｍｂｐｓ程度であるのに対して後者は２５６ｋｂｐｓ程度なので、その比はおよそ２５対１または３２対１である）、ほとんどの記録領域をＶが占める中で、Ａ１，Ａ２の記録領域は周期的に点在している。

尚、デジタル記録媒体用の符号化標準としては例えばＭＰＥＧ２が用いられるが、その場合には、ＭＰＥＧ２のビデオで圧縮符号化したビデオビットストリームＶと、ＭＰＥＧ２のオーディオで圧縮符号化した主音声ビットストリームＡ１及び副音声ビットストリームＡ２とが、ＭＰＥＧ２のシステムによりパケット多重方式で記録されることになる。

図６は、デジタル記録媒体に図５の例のように記録したオリジナルデータに対して上記（１）の手法でアフレコを行う際の処理過程の一例を示す。最初に、オリジナルデータであるビデオビットストリームＶと主音声ビットストリームＡ１とをデジタル記録媒体から読み出し、ＲＦ及び復調回路２１，ＥＣＣ回路２２で復調，誤り訂正を行った後、読み出しレートとデコード処理のレートとの差を吸収するためのバッファ２３を経て、デコーダ（多重分離のためのデマルチプレックス部とビデオデコーダとオーディオデコーダとを含む）２４でデコードし、ビデオ出力端子Ｐ１，音声出力端子Ｐ２から図示しないディスプレイ，スピーカに送ってオリジナルの映像，音声を再生する。

アフレコを行おうとするユーザは、このように映像及び音声を再生しながら、アフレコ音声データ（例えば、図示しないマイクの前で発生した音声のデータ、またはアフレコ音声のライブラリテープから選択して再生した音声データ等）を音声入力端子Ｐ３から入力する。実際に記録するアフレコ音声データとしては、この入力したアフレコ音声データにミキサ２５でオリジナル（主音声）の音声データをミキシングしたものを用いることも多い。

そして、オリジナルの映像，音声の再生に同期してアフレコ音声データをエンコーダ２６でエンコードし、エンコード処理レートと書き込みレートとの差を吸収するためのバッファ２７を経て、ＥＣＣ回路２８，変調及びＲＦ回路２９で誤り訂正符号の付加，変調を行った後、副音声ビットストリームＡ２の記録領域にこのアフレコ音声データを書き込む。

ここで、副音声ビットストリームＡ２の記録領域は、アフレコ音声データを記録できる容量を有してさえいればよいので、アフレコを行う前に音声データが記録されている必要はなく、空白になっていてもよい。但し、空白になっている副音声ビットストリームＡ２の記録領域にアフレコ音声データを書き込んだ際に、ビデオビットストリームＶと主音声ビットストリームＡ１と副音声ビットストリームＡ２とが正しい（ＭＰＥＧ２のシステムの規格に則った）多重化ビットストリームにならない場合には、アフレコ時に再度多重化を行うことが必要である。

以上でアフレコが完了する。このようにアフレコを終えたデジタル記録媒体から完成作品としての映像及び音声を再生する際には、オリジナルの音声（主音声ビットストリームＡ１）とアフレコ音声（副音声ビットストリームＡ２）とのうちの任意の一方を選択して再生することができる。

尚、上記処理過程例では、便宜上書き込み時にアフレコ音声データのみを書き込むものとして説明を行った。しかし、実際には、ＥＣＣ回路が一定の大きさのデータブロックを単位として処理を行うことを理由として、アフレコ音声データの書き込みと併せてオリジナルデータの書き直しも行う必要がある。即ち、例えば音声ビットストリームのパケットの大きさが２ｋバイトであるのに対し、ＥＣＣ回路のデータブロックの大きさが３２ｋバイトまたは６４ｋバイトであるとすると、ＥＣＣ回路２８での誤り訂正符号の付加は、アフレコ音声データと、この音声データを書き込むべき副音声ビットストリームＡ２の記録領域に隣接する領域に記録されているビデオビットストリームＶ等とを併せた３２または６４ｋバイト分のデータを単位として行なわなければならない。このように、デジタル記録媒体中の一部の領域に新たなデータを書き込む際にそれに隣接する領域のデータも誤り訂正符号を付加し直すべき対象となることから、オリジナルデータの書き直しが必要になる。

ところで、このような処理過程を経るアフレコでは、ビデオビットストリームＶ及び主音声ビットストリームＡ１を読み出してからアフレコ音声データを書き込むまでに、各回路において概ね次のような処理時間がかかる。

ＥＣＣ回路２２，２８：それぞれ数十ミリ秒程度
バッファ２３，２７：それぞれ数百ミリ秒から数十秒程度（使用するバッファの機能に応じて大きなばらつきがある）
デコーダ２４：数十ミリ秒程度エンコーダ２６：数十ミリ秒程度

従って、通算として数百ミリ秒から数秒程度（場合によっては数十秒程度）の処理時間がかかるので、アフレコ音声データが、同時に再生されるべきオリジナルデータが記録されている領域よりもこの処理時間分だけ遅れた再生時刻に対応する領域に書き込まれるというディレイの問題が生じていた。即ち、例えばパケット多重化の場合には、アフレコ音声データが、同時に再生されるべきオリジナルデータのパケット中のタイムスタンプが示す時刻よりも遅い時刻を示すタイムスタンプを有するパケットとして記録されていた。

しかも、この処理時間の長さはアフレコを行う毎に多少は変動するのが通常なので、オリジナルデータの記録領域に対するアフレコ音声データの記録領域の時間的関係もアフレコを行う毎に変動してしまう。その結果、従来は、完成作品としての映像及び音声を再生する際に、アフレコ音声をオリジナルの映像等と時間的に正確に一致させて再生することは困難であった。

本発明は上述の点に鑑みてなされたもので、上記（１）のアフレコ手法を採用した図６のような処理過程を経ても、アフレコ音声を容易にオリジナルの映像等と時間的に正確に一致させて再生することのできるアフレコの方法及び装置を提供しようとするものである。

また、上記（３）のアフレコ手法を採用しても、アフレコ音声をオリジナルの映像等と時間的に正確に一致させて再生することのできる、アフレコの方法及び装置並びに再生方法及び装置を提供しようとするものである。

本発明に係るアフレコ方法は、請求項１に記載のように、記録媒体からビットストリームを読み出す第１ステップと、このビットストリームをデコードする第２ステップと、このビットストリームのデコードに同期して、新たなデータをエンコードしてアフレコ用のビットストリームとする第３ステップと、このアフレコ用のビットストリームをこの記録媒体の所定の領域に書き込む第４ステップと、この記録媒体から読み出したビットストリームとアフレコ用のビットストリームとの時間的な対応関係を示す情報として、記録媒体から読み出したビットストリームのうちアフレコ用のビットストリームと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を前記記録媒体の付加情報を記録するための領域に書き込む第５ステップとを含むことを特徴としている。

このアフレコ方法によれば、記録媒体から読み出したビットストリームのデコードに同期して新たなデータをエンコードして得たアフレコ用のビットストリームを、当該記録媒体の所定の領域に書き込むようにしている。

このように、アフレコ用のデータを所定の領域に書き込むことにより、オリジナルデータの記録領域に対するアフレコデータの記録領域の時間的関係が明確になる。これにより、完成作品としての映像及び音声を再生する際に、アフレコデータを容易にオリジナルデータと時間的に正確に一致させて再生することが可能になる。そして、オリジナルデータとアフレコデータとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコデータと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を記録媒体の付加情報の記録領域に書き込むので、オリジナルデータとアフレコデータとを多重化せずに記録しても、付加情報中のこの情報に基づいて、アフレコデータをオリジナルデータと時間的に正確に一致させて再生することが可能になる。

また本発明に係るアフレコ装置は、請求項８に記載のように、記録媒体からビットストリームを読み出す読み出し手段と、このビットストリームをデコードするデコーダと、新たなデータをエンコードしてアフターレコーディング用のビットストリームとするエンコーダと、このアフターレコーディング用のビットストリームを記録媒体に書き込むための書き込み手段と、このデコーダによるビットストリームのデコードに同期してこのエンコーダによりエンコードされたアフターレコーディング用のビットストリームを、この書き込み手段を制御して記録媒体の所定の領域に書き込ませる制御手段と、記録媒体から読み出したビットストリームとアフターレコーディング用のビットストリームとの時間的な対応関係を示す情報として、記録媒体から読み出したビットストリームのうちアフターレコーディング用のビットストリームと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を記録媒体の付加情報を記録するための領域に書き込む付加情報書込み手段とを備えたことを特徴としている。

このアフレコ装置によれば、読み出し手段により記録媒体から読み出したビットストリームのデコーダによるデコードに同期して、新たなデータがエンコーダによりエンコードされてアフレコ用のビットストリームが得られると、このアフレコ用のビットストリームが、制御手段の制御のもとで、書き込み手段により当該記録媒体の所定の領域に書き込まれる。

このように、アフレコ用のデータを所定の領域に書き込むことにより、オリジナルデータの記録領域に対するアフレコデータの記録領域の時間的関係が明確になる。これにより、完成作品としての映像及び音声を再生する際に、アフレコデータを容易にオリジナルデータと時間的に正確に一致させて再生することが可能になる。そして、オリジナルデータとアフレコデータとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコデータと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を記録媒体の付加情報の記録領域に書き込むので、オリジナルデータとアフレコデータとを多重化せずに記録しても、付加情報中のこの情報に基づいて、アフレコデータをオリジナルデータと時間的に正確に一致させて再生することが可能になる。

尚、請求項１０及び１３に記載の再生方法及び装置は、前述の（３）のアフレコ手法を採用した場合に好適な方法及び装置の一例である。

この再生方法及び装置によれば、記録媒体の付加情報の記録領域から、オリジナルデータとアフレコデータとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコデータと対応し始める部分のプレゼンテーションタイムスタンプを示す情報が読み出され、この情報に基づき、オリジナルデータとアフレコデータとが同期して読み出されてデコードされるので、アフレコ時にオリジナルデータとアフレコデータとが多重化せずに記録されていても、アフレコデータがオリジナルデータと時間的に正確に一致させて再生される。

本発明に係るアフレコ方法及び装置によれば、オリジナルデータの記録領域に対するアフレコデータの記録領域の時間的関係が明確になるので、完成作品としての映像及び音声を再生する際に、アフレコデータを容易にオリジナルデータと時間的に正確に一致させて再生することができるという効果が得られる。

また、オリジナルデータとアフレコデータとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコデータと対応し始める部分のプレゼンテーションタイムスタンプを示す情報が記録媒体の付加情報の記録領域に記録されるので、オリジナルデータとアフレコデータとが多重化せずに記録しても、この情報に基づいて、アフレコデータをオリジナルデータと時間的に正確に一致させて再生することができるという効果が得られる。

また、本発明に係る再生方法及び装置によれば、記録媒体の付加情報の記録領域から、オリジナルデータとアフレコデータとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコデータと対応し始める部分のプレゼンテーションタイムスタンプを示す情報が読み出され、この情報に基づき、オリジナルデータとアフレコデータとが同期して読み出されてデコードされるので、アフレコ時にオリジナルデータとアフレコデータとが多重化せずに記録されていても、アフレコデータをオリジナルデータと時間的に正確に一致させて再生することができるという効果が得られる。

最初に、前述のアフレコ手法（１）〜（３）のうちの（１）の手法を採用する場合（すなわちオリジナルデータを再生しながらアフレコ音声を入力し、このアフレコ音声データを、オリジナルデータの再生時にリアルタイムにオリジナルデータに多重化して当該デジタル記録媒体に記録する場合）における本発明の一例について説明することにする。

この（１）のアフレコ手法を採用する場合において、アフレコ音声データを記録するデジタル記録媒体の「所定の領域」として具体的にどのような領域を決定するかについては、例えば次の（Ａ）または（Ｂ）のような領域が考えられる。但し、これらはそれぞれ好適な例であり、それ以外の領域を除外する趣旨ではない。

（Ａ）オリジナルデータの記録領域と略等しい再生時刻に対応する領域これは、ＭＰＥＧのシステムのような多重方式における方式上の制約に従って決定した例である。図５及び図６との関係でこの領域を説明すると、図６の処理過程で読み出した主音声ビットストリームＡ１と略同時に再生される副音声ビットストリームＡ２の記録領域ということになるが、具体的には、例えば次の（ｉ）〜（ｉｉ）のうちのいずれかの領域とすることが考えられる。

（ｉ）この主音声ビットストリームＡ１の記録領域に最も空間的に近い副音声ビットストリームＡ２の記録領域
（ｉｉ）この主音声ビットストリームＡ１に付加されている時刻情報（ＭＰＥＧのシステムではパケット中のプレゼンテーションタイムスタンプ（ＰＴＳ））と略同じ時刻を示す時刻情報を付加されている副音声ビットストリームＡ２の記録領域

（Ｂ）オリジナルデータの記録領域から大幅に遅れた時刻に対応する領域これは、多重方式における方式上の制約に従わずに決定した例である。

このうち、上記（Ａ）の領域にアフレコ用のデータを書き込む場合には、デジタル記録媒体からオリジナルデータを読み出すためのデータチャネルと、アフレコ用のデータを当該デジタル記録媒体に書き込むデータチャネルとが別々に必要である。従って、読み出し用と書き込み用との２系統のヘッドを設けて読み出しと書き込みとを独立して行う方法か、あるいは１系統のヘッドをシークさせて読み出しと書き込みを時分割に行う方法かのいずれかを採用する必要がある（後者の方法は、ディスクのようなランダムアクセス方式の記録媒体に記録したオリジナルデータに対してアフレコを行う場合に限られることはもちろんである）。

こうした方法は、一般的に記録再生装置においてデータの入出力をマルチチャネルで行う場合の方法と同じである。しかし、チャネル数が僅か２つであり読み出しと書き込みとを独立して行う場合でもヘッドは２系統のみで足りることや、読み出しと書き込みとを時分割に行う場合でもディレイの大きさに応じた距離だけヘッドをシークすればよい（フルストロークのシークを行うようなことはない）のでシーク距離が比較的小さいことから、一般的なマルチチャネルにおけるよりは実現のための条件は厳しくないといえる。

これに対し、上記（Ｂ）の領域にアフレコ用のデータを書き込む場合には、１系統のヘッドでオリジナルデータを読み出した後、当該ヘッドの現在の位置でアフレコ用のデータの書き込みを行えば足りる。従って、ヘッドの系統数の削減やヘッドの制御の簡略化という点からは、こちらのほうが更に実現が容易であるといえる。

しかし、この場合には、完成作品としての映像及び音声の再生時に、アフレコデータをオリジナルデータと時間的に一致させて再生するための処理を行わなければならない。この処理は、特にスロー再生や倍速再生等の特殊再生時には煩雑である。また、こうした処理を行うことは、装置のコストの増加にもつながる。従って、これらの点からは、逆に上記（Ａ）の領域に書き込むほうが望ましいといえる。そこで、以下では、上記（Ａ）の領域に書き込む場合を例にとって具体例を説明する。

図１は、前述の（１）のアフレコ手法を採用する場合において本発明のアフレコ方法及び装置を適用した光ディスク装置のシステム構成の一例を示す。この光ディスク装置では、１枚の書き換え型の光ディスク１に対して１系統の光ピックアップ（光ヘッド）２が設けられており、データの読み出しと書き込みの双方にこの光ピックアップ２が共用される。光ディスク１には、図５に示したのと同様にして、ビデオビットストリームＶ，主音声ビットストリームＡ１及び副音声ビットストリームＡ２がＭＰＥＧ２のシステムによりパケット多重方式で記録されている。各ビットストリームＶ，Ａ１及びＡ２において、それぞれ幾つかのパケットに対して１つの割合で、プレゼンテーションタイムスタンプを有するパケットが存在している。

光ピックアップ２により光ディスク１から読み出されたビットストリームは、ＲＦ及び復調／変調回路３（図６のＲＦ及び復調回路２１と変調及びＲＦ回路２９との機能を併有するもの），ＥＣＣ回路４（図６のＥＣＣ回路２２とＥＣＣ回路２８との機能を併有するもの）でそれぞれ復調，誤り訂正を施された後、スイッチ５を介し、読み出しレートとデコード処理レートとの差を吸収するための読み出しチャネル用バッファ６に送られる。

読み出しチャネル用バッファ６から取り出されたビットストリームは、デコーダ（デマルチプレックス部とビデオデコーダとオーディオデコーダとを含む）７でデコードされ、ビデオ出力端子Ｐ１，音声出力端子Ｐ２から図示しないディスプレイ，スピーカに送られて再生される一方で、バイパスバッファ８に送られる。バイパスバッファ８は、光ディスク１から読み出されたビットストリームを、デコード処理の後にも蓄積しておいて光ディスク１に再び書き込むことができるようにする役割を果たす。

バイパスバッファ８から取り出されたビットストリームは、各パケット中のストリームＩＤに基づいて当該パケットのメディアの種類（ビデオか、主音声か、副音声か）を検出する検出器９を経て、スイッチ１０の一方の固定接点に送られる。

他方、音声入力端子Ｐ３から入力された音声データは、エンコーダ１１でエンコードされた後、エンコーダバッファ１２に蓄積される。エンコーダバッファ１２から取り出された音声データは、スイッチ１０のもう一方の固定接点に送られる。

スイッチ１０の可動接点は、エンコード処理レートと書き込みレートとの差を吸収するための書き込みチャネル用バッファ１３に接続されている。スイッチ１０を介して書き込みチャネル用バッファ１３に送られたデータ（バイパスバッファ８から取り出されたビットストリームまたはエンコーダバッファ１２から取り出された音声データ）は、書き込みチャネル用バッファ１３から取り出され、スイッチ５を介してＥＣＣ回路４，ＲＦ及び復調／変調回路３で誤り訂正符号の付加，変調を施された後、光ピックアップ２により光ディスク１に書き込まれる。

尚、一例として、読み出しレートと書き込みレートとは互いに等しい大きさになっている（あるいは、読み出しレートと書き込みレートとの双方が可変であってそれらの最大レートが互いに等しくなっている）。

この光ディスク装置でも、このように光ディスク１からビットストリームを読み出してから、その再生に同期して入力した音声データが光ディスク１に書き込まれるまでに、図６を用いて説明したような理由からやはり数百ミリ秒から数秒程度の処理時間がかかる。

従って、この読み出しから書き込みまでの間に、光ディスク１に対する光ピックアップ２の位置は、この処理時間分だけ先に進んでしまうことになる。換言すれば、或る時刻を基準にして考えると、読み出したデータの記録領域と略等しい再生時刻に対応する領域にデータを書き込むために光ピックアップ２が存在しなければならない位置Ｗは、図２に示すように、当該時刻における光ピックアップ２の読み出し位置Ｒよりも、この処理時間分だけ後方にあることになる。

図１に戻り、システムコントローラ１４は、後述のようにアフレコ時にこの光ディスク装置の各部の動作を制御するものであり、図示せずも、ＣＰＵと、ＣＰＵが実行すべき処理プログラム等を格納したＲＯＭと、処理過程で生じたデータ等を一時記憶するためのＲＡＭとを含んでいる。尚、この制御のうち、光ピックアップ２の位置の微調整は、ＲＦ及び復調／変調回路３で復調されたビットストリームを取り込んで現在読み出し中のデータのアドレス情報を検出するアドレス検出回路１５の検出結果に基づいて行われる。また、スイッチ１０の切り替え制御は、検出器９の検出結果に基づいて行われる。

次に、アフレコ時にこのシステムコントローラ１４が実行する処理の一例を説明する。
〔第１ステップ〕
最初に、図示しない操作パネルの操作によりユーザがアフレコ対象のオリジナルデータを指定することか、あるいは予め光ディスク１に書き込まれているアフレコ対象のオリジナルデータの指定情報を読み出すことに基づき、光ディスク１に記録されているオリジナルデータのうち、アフレコの対象となるオリジナルデータの範囲を確定する。

続いて、このアフレコ対象のオリジナルデータのアドレス情報に基づき、光ピックアップ２を読み出し開始位置Ｘ０にシークさせる。そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を読み出しモードに設定すると共にスイッチ５を読み出しチャネル用バッファ６側に切り替え、光ピックアップ２の位置を微調整した後、光ピックアップ２による読み出しを開始する。これにより、アフレコ対象のオリジナルデータが読み出しチャネル用バッファ６に蓄積されていく。

図３は、アフレコ時の各時刻における光ピックアップ２の位置と読み出し・書き込み状況との関係（同図Ａ）を示すと共に、これらの時刻における読み出しチャネル用バッファ６，書き込みチャネル用バッファ１３のデータ蓄積量（同図Ｂ，Ｃ）を示す。尚、図３Ａでは、太い実線は読み出し中であることを示し、破線は書き込み中であることを示し、細い実線はシーク中であることを示している。

この図３では、読み出しチャネル用バッファ６への蓄積処理は、時刻Ｔ０からＴ２までの段階に相当しており、同図にも読み出しチャネル用バッファ６のデータ蓄積量が増加する様子が表れている。

〔第２ステップ〕
読み出しチャネル用バッファ６からオリジナルデータを取り出し、デコーダ７でデコードして再生する一方で、バイパスバッファ８に蓄積する。

デコーダ７でのデコード処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込みモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。このデコード処理は、図３との関係では時刻Ｔ０と時刻Ｔ１との間で開始される。

〔第３ステップ〕
オリジナルデータの再生に同期してユーザが入力したアフレコ音声データを、エンコーダ１１でエンコードし、エンコーダバッファ１２に蓄積する。エンコーダ１１でのエンコード処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込むモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。

〔第４ステップ〕
バイパスバッファ８からオリジナルデータを取り出して検出器９に送る。検出器９の検出結果が、現在バイパスバッファ８から取り出しているオリジナルデータがビデオビットストリームＶまたは主音声ビットストリームＡ１であることを示しているときは、スイッチ１０の可動接点を検出器９側の固定接点に切り替えて、オリジナルデータを書き込みチャネル用バッファ１３に蓄積する。

他方、検出器９の検出結果が、現在バイパスバッファ８から取り出しているオリジナルデータが副音声ビットストリームＡ２であることを示しているときは、スイッチ１０の可動接点をエンコーダバッファ１２側の固定接点に切り替えて、エンコーダバッファ１２から取り出したアフレコ音声データを書き込みチャネル用バッファ１３に蓄積する。それと同時に、バイパスバッファ８から副音声ビットストリームＡ２を取り出して検出器９側の固定接点に流し続けることにより、書き込みチャネル用バッファ１３側ではこの副音声ビットストリームＡ２を無視するようにする。

これにより、オリジナルデータであるビデオビットストリームＶ，主音声ビットストリームＡ１及び副音声ビットストリームＡ２のうちの副音声ビットストリームＡ２をアフレコ音声データで置き換えることによりオリジナルデータとアフレコ音声データとを組み合わせたビットストリームが、書き込みチャネル用バッファ１３に蓄積されていく。

この書き込みチャネル用バッファ１３への蓄積処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込むモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。この書き込みチャネル用バッファ１３への蓄積処理は、図３では時刻Ｔ１以降の段階に相当している。

続いて、次の（ａ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされた時点で、オリジナルデータの読み出しを停止し、スイッチ５を書き込みチャネル用バッファ１３側に切り替える。
（ａ）読み出し開始からの経過時間
（ｂ）読み出しチャネル用バッファ６のデータ蓄積量
（ｃ）書き込みチャネル用バッファ１３のデータ蓄積量
（ｄ）メディアレート（光ディスク１に対する読み出し・書き込みのレート）
（ｅ）読み出しチャネル，書き込みチャネルのデータレート（デコーダ７の消費レート，エンコーダ１１の出力レート）
（ｆ）バッファ６，１３の容量

そして、最後に読み出しチャネル用バッファ６に送ったオリジナルデータのアドレス情報を記憶する。（次回読み出しを再開する際には、このアドレス情報に基づき、この最後にバッファ６に送ったデータに続くオリジナルデータを光ディスク１から読み出していく。）このスイッチ５の切り替えは、図３では時刻Ｔ２の段階に相当している。

続いて、システムコントローラ１４に予め記憶された情報に基づき、光ピックアップ２を、現在の位置Ｘ２から、書き込み開始位置（ここでは、読み出し開始位置と同じ位置Ｘ０）にまでシークさせ、位置Ｘ０に近づくと光ピックアップ２の位置を微調整する。

このシーク動作は、図３では時刻Ｔ２からＴ３までの段階に相当している。前出の図２を例にとれば、このシーク動作により光ピックアップ２の位置はＲからＷに変化することになる。

そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を書き込みモードに切り替えて、書き込みチャネル用バッファ１３からデータを取り出す。これにより、光ディスク１から読み出したオリジナルデータのうち副音声ビットストリームＡ２をアフレコ音声データで置き換えたデータが、誤り訂正符号を付加し直された後、光ディスク１上の当初の記録領域と略等しい領域に書き込まれていく。換言すれば、オリジナルデータであるビデオビットストリームＶ及び主音声ビットストリームＡ１の記録領域と略等しい再生時刻に対応する副音声ビットストリームＡ２の領域に、当該オリジナルデータと同時に再生されるべきアフレコ音声データが多重化して記録されていく。

この書き込み処理は、図３では時刻Ｔ３からＴ４までの段階に相当しており、同図にも書き込みチャネル用バッファ１３のデータ蓄積量が減少する様子が表れている。

続いて、書き込み開始からの経過時間及び上記（ｂ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされた時点で、光ディスク１へのデータの書き込みを停止し、スイッチ５を再び読み出しチャネル用バッファ６側に切り替える。そして、最後に書き込んだデータのアドレス情報を記憶する。（次回書き込みを再開する際には、このアドレス情報に基づき、この最後に書き込んだデータに続くデータを書き込みチャネル用バッファ１３から取り出していく。）
このスイッチ５の切り替えは、図３では時刻Ｔ４の段階に相当している。この第４ステップまでで、アフレコ動作の１サイクルが終了する。

続いて、前回スイッチ５を書き込みチャネル用バッファ１３側に切り替えた際に記憶したアドレス情報に基づき、光ピックアップ２を、現在の位置Ｘ１から、前回読み出しを停止した位置Ｘ２にまでシークさせる。

このシーク動作は、図３では時刻Ｔ４からＴ５までの段階に相当している。前出の図２を例にとれば、このシーク動作により光ピックアップ２の位置はＷからＲに変化することになる。このように、光ピックアップ２の位置は読み出し位置と書き込み位置との間を往復する。

そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を再び読み出しモードに設定して、光ピックアップ２の位置を微調整した後、光ピックアップ２による読み出しを再開する。以下、アフレコ対象のオリジナルデータに対応するアフレコデータの書き込みが全て完了するまで（あるいは図示しない操作パネルの操作によりユーザがアフレコの終了を指示するまで）、図３に時刻Ｔ５以降の段階として示すように、上述のような読み出しと書き込みとを時分割に行っていく。

尚、図１の例ではバイパスバッファ８の後段に検出器９を設けているが、バイパスバッファ８の前段に検出器９を設けたり、あるいはデコーダ７でパケットのメディアの種類を検出したりしてもよい。但し、そうする場合には、検出結果とバイパスバッファ８の蓄積データとの関連をシステムコントローラ１４が記憶しておく必要がある。

また、メディアの種類を検出するだけでなくパケット中のプレゼンテーションタイムスタンプに基づいて各パケットの再生時刻をも検出する検出器を設けるようにしてもよい。そうすることにより、アフレコ音声データをビデオビットストリームＶ及び主音声ビットストリームＡ１の記録領域と略等しい再生時刻に対応する領域に多重化して記録する処理を、一層高精度に行うことができる。

また、こうした検出器とスイッチ１０との組み合わせに代えて、バイパスバッファ８から取り出したオリジナルデータとエンコーダバッファ１２から取り出したアフレコ音声データとを多重化するための多重化器を設けるようにしてもよい。そうすることにより、一層効率的かつ高精度に多重化を行うことができるとともに、当初のオリジナルデータとは異なる構成で多重化を行うことができる。

図４は、前述の（１）のアフレコ手法を採用する場合において本発明のアフレコ方法及び装置を適用した光ディスク装置のシステム構成の別の一例を示すものであり、図１と同一の部分には同一符号を付して重複説明を省略する。

この光ディスク装置では、ＥＣＣ回路４用のワークメモリとして２系統のワークメモリ１６，１７が設けられており、ＥＣＣ回路４に供給されるデータが、スイッチ１８を介してワークメモリ１６，１７のうちのいずれか一方に一時記憶されるようになっている（これに対し、図１の光ディスク装置では、ＥＣＣ回路４には図示せずも１系統のワークメモリのみが設けられている）。

この光ディスク装置においてアフレコ時にシステムコントローラ１４が実行する処理は、図１の光ディスク装置での処理に対して次のような相違点を有しているが、その他の点については図１の光ディスク装置での処理と一致している。

〔読み出しモードでの相違点〕
光ディスク１から読み出されてＥＣＣ回路４に供給されるオリジナルデータを、スイッチ１８を介して例えば一方のワークメモリ１６に一時記憶する。

前述の（ａ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされてスイッチ５を書き込みチャネル用バッファ１３側に切り替える際に、スイッチ１８をワークメモリ１７側に切り替える。

オリジナルデータの読み出しを停止してアドレス情報を記憶する際に、読み出しチャネル用バッファ６に最後に送ったオリジナルデータではなく、ワークメモリ１６に最後に送ったオリジナルデータのアドレス情報を記憶する。

〔書き込みモードでの相違点〕
前述の（ａ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされてスイッチ５を読み出しチャネル用バッファ６側に切り替える際に、スイッチ１８を再びワークメモリ１６側に切り替える。

このような処理を行う利点は、次の通りである。図１の光ディスク装置での処理では、ＥＣＣ回路４が一定の大きさのデータブロックを単位として処理を行うことから、ＥＣＣ回路４に入力されてはいるがデータブロックの大きさに達していないデータは、スイッチ５の切り替え時にＥＣＣ回路４において破棄してしまわざるを得ない。従って、読み出し再開時にはこの破棄したデータを光ディスク１から読み出し直さなければならず、書き込み再開時にもこの破棄したデータを書き込みチャネル用バッファ１３から取り出し直さなければならないので、非効率的である。

これに対し、図４の光ディスク装置での処理では、読み出し時，書き込み時にＥＣＣ回路４に入力されたがデータブロックの大きさに達していないデータが、スイッチ５の切り替え後にもそのままワークメモリ１６，１７に保持されるので、読み出し再開時にはワークメモリ１６に保持したデータに続くデータを光ディスク１から読み出せば足り、書き込みの再開時にもワークメモリ１７に保持したデータに続くデータを書き込みチャネル用バッファ１３から取り出せば足りるので、効率的にアフレコを行うことができる。

次に、前述のアフレコ手法（１）〜（３）のうちの（３）の手法を採用する場合（すなわちオリジナルデータを記録したデジタル記録媒体に、アフレコ音声のデータをオリジナルデータとは多重化せずに記録し、再生時に、当該デジタル記録媒体から読み出したオリジナルの音声データとアフレコ音声データとをミキシングして完成音として出力する場合）における本発明の一例について説明することにする。

図７は、この（３）のアフレコ手法を採用する場合において本発明のアフレコ方法及び装置を適用した光ディスク装置のシステム構成の一例を示すものであり、図１と同一の部分には同一符号を付して重複説明を省略する。この光ディスク装置では、１枚の書き換え型の光ディスク１９に対して１系統の光ピックアップ（光ヘッド）２が設けられており、データの読み出しと書き込みの双方にこの光ピックアップ２が共用される。光ディスク１９には、図８に示すように、ビデオビットストリームＶ，主音声ビットストリームＡ１及び副音声ビットストリームＡ２が記録されている。オリジナルデータであるビデオビットストリームＶと主音声ビットストリームＡ１は、ＭＰＥＧ２のシステムによりパケット多重方式で記録されている（Ｒの部分）。また副音声ビットストリームＡ２は、ＭＰＥＧ２のシステムのパケット多重方式によりパケットに入っているが、ビットストリームＶ，Ａ１とは独立して記録されている（Ｗの部分）。各ビットストリームＶ，Ａ１及びＡ２において、それぞれ幾つかのパケットに対して１つの割合で、プレゼンテーションタイムスタンプを有するパケットが存在している。

光ピックアップ２により光ディスク１９から読み出されたビットストリームは、ＲＦ及び復調／変調回路３（図６のＲＦ及び復調回路２１と変調及びＲＦ回路２９との機能を併有するもの），ＥＣＣ回路４（図６のＥＣＣ回路２２とＥＣＣ回路２８との機能を併有するもの）でそれぞれ復調，誤り訂正を施された後、スイッチ５を介し、読み出しレートとデコード処理レートとの差を吸収するための読み出しチャネル用バッファ６に送られる。

読み出しチャネル用バッファ６から取り出されたビットストリームは、デコーダ（デマルチプレックス部とビデオデコーダとオーディオデコーダとを含む）７でデコードされ、ビデオ出力端子Ｐ１，音声出力端子Ｐ２から図示しないディスプレイ，スピーカに送られて再生される。

他方、音声入力端子Ｐ３から入力された音声データは、エンコーダ１１でエンコードされた後、エンコーダバッファ１２に蓄積される。エンコーダバッファ１２から取り出された音声データは、多重化器２０を経て、書き込みチャネル用バッファ１３に送られる。

書き込みチャネル用バッファ１３に送られたデータ（エンコーダバッファ１２から取り出された音声データ）は、書き込みチャネル用バッファ１３から取り出され、スイッチ５を介してＥＣＣ回路４，ＲＦ及び復調／変調回路３で誤り訂正符号の付加，変調を施された後、光ピックアップ２により光ディスク１９に書き込まれる。

本例の場合には、読み出しレートと書き込みレートとは互いに異なっているのが通常である。つまり、読み出しレートはビデオとオーディオとが多重化されているストリームのビットレートであり、書き込みレートはオーディオ１本から成るストリームのビットレートであるため、読み出しレートのほうが書き込みレートよりも高いことが予想される。

この光ディスク装置でも、このように光ディスク１９からビットストリームを読み出してから、その再生に同期して入力した音声データが光ディスク１９に書き込まれるまでに、図６を用いて説明したような理由からやはり数百ミリ秒から数秒程度の処理時間がかかる。

従って、この読み出しから書き込みまでの間に、光ディスク１９に対する光ピックアップ２の位置は、この処理時間分だけ先に進んでしまうことになる。但しこの例では、オリジナルデータのビットストリームは図８におけるＲの部分であるのに対し、後述するようにアフレコ音声データは図８におけるＷの部分に書き込まれ、この両部分は互いに異なるそれぞれ独立したビットストリームであるため、遅れは考慮しなくてよい。つまり、読み出しているデータと書き込んでいるデータとの間には、信号処理による遅れだけの時間差が発生しているが、これは記録時の動作には全く影響しない。但し、後述するように、オリジナルデータのビットストリームとアフレコ音声データのビットストリームとの時間的な対応関係について光ディスク１９のＴＯＣの領域に記録しておく。

図７に戻り、システムコントローラ１４は、後述のようにアフレコ時にこの光ディスク装置の各部の動作を制御するものであり、図示せずも、ＣＰＵと、ＣＰＵが実行すべき処理プログラム等を格納したＲＯＭと、処理過程で生じたデータ等を一時記憶するためのＲＡＭとを含んでいる。尚、この制御のうち、光ピックアップ２の位置の微調整は、ＲＦ及び復調／変調回路３で復調されたビットストリームを取り込んで現在読み出し中のデータのアドレス情報を検出するアドレス検出回路１５の検出結果に基づいて行われる。

次に、アフレコ時にこのシステムコントローラ１４が実行する処理の一例を説明する。
〔第１ステップ〕
最初に、図示しない操作パネルの操作によりユーザがアフレコ対象のオリジナルデータを指定することか、あるいは予め光ディスク１９に書き込まれているアフレコ対象のオリジナルデータの指定情報を読み出すことに基づき、光ディスク１９に記録されているオリジナルデータのうち、アフレコの対象となるオリジナルデータの範囲を確定する。

続いて、このアフレコ対象のオリジナルデータのアドレス情報に基づき、光ピックアップ２を読み出し開始位置Ｘ０にシークさせる。そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を読み出しモードに設定すると共にスイッチ５を読み出しチャネル用バッファ６側に切り替え、光ピックアップ２の位置を微調整した後、光ピックアップ２による読み出しを開始する。これにより、アフレコ対象のオリジナルデータが読み出しチャネル用バッファ６に蓄積されていく。

図９は、アフレコ時の各時刻における光ピックアップ２の位置と読み出し・書き込み状況との関係（同図Ａ）を示すと共に、これらの時刻における読み出しチャネル用バッファ６，書き込みチャネル用バッファ１３のデータ蓄積量（同図Ｂ，Ｃ）を示す。尚、図９Ａでは、太い実線は読み出し中であることを示し、破線は書き込み中であることを示し、細い実線はシーク中であることを示している。

この図９では、読み出しチャネル用バッファ６への蓄積処理は、時刻Ｔ０からＴ２までの段階に相当しており、同図にも読み出しチャネル用バッファ６のデータ蓄積量が増加する様子が表れている。

〔第２ステップ〕
読み出しチャネル用バッファ６からオリジナルデータを取り出し、デコーダ７でデコードして再生する。

デコーダ７でのデコード処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込みモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。このデコード処理は、図９との関係では時刻Ｔ０と時刻Ｔ１との間で開始される。

〔第３ステップ〕
オリジナルデータの再生に同期してユーザが入力したアフレコ音声データを、エンコーダ１１でエンコードし、エンコーダバッファ１２に蓄積する。エンコーダ１１でのエンコード処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込むモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。

〔第４ステップ〕
エンコーダバッファ１２から取り出したアフレコ音声データは、多重化器２０でＭＰＥＧ２のシステムの規格に則ったパケットに収められて、書き込みチャネル用バッファ１３に蓄積される。

これにより、オリジナルデータと時間的に対応するビットストリームが作成されて、書き込みチャネル用バッファ１３に蓄積されていく。

この書き込みチャネル用バッファ１３への蓄積処理は、光ピックアップ２の位置にかかわらず、また読み出しモードと書き込むモードのいずれであるかにかかわらず、アフレコが終了するまで継続して行う。この書き込みチャネル用バッファ１３への蓄積処理は、図９では時刻Ｔ１以降の段階に相当している。

続いて、次の（ａ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされた時点で、オリジナルデータの読み出しを停止して、スイッチ５を再び書き込みチャネル用バッファ１３側に切り替る。
（ａ）読み出し開始からの経過時間
（ｂ）読み出しチャネル用バッファ６のデータ蓄積量
（ｃ）書き込みチャネル用バッファ１３のデータ蓄積量
（ｄ）メディアレート（光ディスク１９に対する読み出し・書き込みのレート）
（ｅ）読み出しチャネル，書き込みチャネルのデータレート（デコーダ７の消費レート，エンコーダ１１の出力レート）
（ｆ）バッファ６，１３の容量

そして、最後に読み出しチャネル用バッファ６に送ったオリジナルデータのアドレス情報を記憶する。（次回読み出しを再開する際には、このアドレス情報に基づき、この最後にバッファ６に送ったデータに続くオリジナルデータを光ディスク１９から読み出していく。）
このスイッチ５の切り替えは、図９では時刻Ｔ２の段階に相当している。

続いて、システムコントローラ１４に予め記憶された情報に基づき、光ピックアップ２を、現在の位置Ｘ２から、書き込み開始位置（ここでは、オリジナルデータの記録位置である図８のＲの部分とは重ならない、副音声ビットストリームＡ２の記録位置である図８のＷの部分の中の位置Ｙ０）にまでシークさせ、位置Ｙ０に近づくと光ピックアップ２の位置を微調整する。

このシーク動作は、図９では時刻Ｔ２からＴ３までの段階に相当している。前出の図８を例にとれば、このシーク動作により光ピックアップ２の位置はＲからＷに変化することになる。

そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を書き込みモードに切り替えて、書き込みチャネル用バッファ１３からデータを取り出す。これにより、アフレコ音声データが、誤り訂正符号を付加された後、光ディスク１９上に書き込まれていく。

この書き込み処理は、図９では時刻Ｔ３からＴ４までの段階に相当しており、同図にも書き込みチャネル用バッファ１３のデータ蓄積量が減少する様子が表れている。

続いて、書き込み開始からの経過時間及び上記（ｂ）〜（ｆ）の要因のうちのいずれか１つまたは２以上の組み合わせにより決定される一定の条件が満たされた時点で、光ディスク１９へのデータの書き込みを停止し、スイッチ５を再び読み出しチャネル用バッファ６側に切り替える。そして、最後に書き込んだデータのアドレス情報を記憶する。（次回書き込みを再開する際には、このアドレス情報に基づき、この最後に書き込んだデータに続くデータを書き込みチャネル用バッファ１３から取り出していく。）
このスイッチ５の切り替えは、図９では時刻Ｔ４の段階に相当している。この第４ステップまでで、アフレコ動作の１サイクルが終了する。

続いて、前回スイッチ５を書き込みチャネル用バッファ１３側に切り替えた際に記憶したアドレス情報に基づき、光ピックアップ２を、現在の位置Ｙ１から、前回読み出しを停止した位置Ｘ２にまでシークさせる。

このシーク動作は、図９では時刻Ｔ４からＴ５までの段階に相当している。前出の図８を例にとれば、このシーク動作により光ピックアップ２の位置はＷからＲに変化することになる。このように、光ピックアップ２の位置は読み出し位置と書き込み位置との間を往復する。

そして、光ピックアップ２，ＲＦ及び復調／変調回路３，ＥＣＣ回路４を再び読み出しモードに切り替え、光ピックアップ２の位置を微調整した後、光ピックアップ２による読み出しを再開する。以下、アフレコ対象のオリジナルデータに対応するアフレコデータの書き込みが全て完了するまで（あるいは図示しない操作パネルの操作によりユーザがアフレコの終了を指示するまで）、図９に時刻Ｔ５以降の段階として示すように、上述のような読み出しと書き込みとを時分割に行っていく。

〔第５ステップ〕
アフレコの最終段階として、オリジナルデータとアフレコ音声データとの時間的な対応関係を示す情報を光ディスク１９に記録する。ここでは、一例として、プレゼンテーションタイムスタンプ（ＰＴＳ）を利用する。すなわち、先にも述べたように、ＭＰＥＧ２のシステムでは、各メディアのビットストリームのパケットがプレゼンテーションタイムスタンプを有しているので、図１０に例示するように、オリジナルデータであるビデオビットストリームＶ及び主音声ビットストリームＡ１のうちアフレコ音声データである音声ビットストリームＡ２と対応し始める部分（すなわちユーザあるいは光ディスク１９に書き込まれている指定情報により指定されたアフレコ対象のオリジナルデータの先頭部分）のプレゼンテーションタイムスタンプにより、オリジナルデータとアフレコ音声データとの時間的な対応関係が一義的に特定されることになる。

そこで、アフレコ対象のオリジナルデータに対応するアフレコ音声データの書き込みが全て完了したときあるいはユーザがアフレコの終了を指示したときには、システムコントローラ１４は、オリジナルデータのうちアフレコ音声データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を、光ディスク１９のＴＯＣ（Table Of Contents ）の領域に記録する。また、オリジナルデータのうちアフレコ音声データと対応し始める部分（図９のＸ０）のアドレス情報と、アフレコ音声データの開始位置（図９のＹ０）及び終了位置のアドレス情報も、ＴＯＣの領域に記録する。

このように、オリジナルデータとアフレコ音声データとの時間的な対応関係を示す情報として、オリジナルデータのうちアフレコ音声データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報が光ディスク１９のＴＯＣの領域に記録されるので、オリジナルデータとアフレコ音声データとが多重化せずに記録されるにも係わらず、ＴＯＣ中のこの情報に基づいて、アフレコ音声データをオリジナルデータと時間的に正確に一致させて再生することが可能になる。

図１１は、前述の（３）のアフレコ手法を採用する場合において本発明の再生方法及び装置を適用した光ディスク装置のシステム構成の一例を示す。この光ディスク装置では、データ読み出し用の１系統の光ピックアップ（光ヘッド）３１が設けられており、この光ディスク装置に装着された光ディスクから光ピックアップ３１により読み出されたビットストリームは、ＲＦ及び復調回路３２（図６のＲＦ及び復調回路２１の機能を有するもの），ＥＣＣ回路３３（図６のＥＣＣ回路２２の機能を有するもの）でそれぞれ復調，誤り訂正を施された後、スイッチ３４を介し、読み出しレートとデコード処理レートとの差を吸収するためのバッファ３５（チャンネル（Ｃｈ）１のバッファ３５ａとチャンネル（Ｃｈ）２のバッファ３５ｂとのいずれか）に送られる。

Ｃｈ１のバッファ３５ａから取り出されたビットストリームは、デコーダ（デマルチプレックス部とビデオデコーダとオーディオデコーダとを含む）３６ａでデコードされる。デコーダ３６ａから出力された映像信号は、ビデオ出力端子Ｐ１から図示しないディスプレイに送られ、デコーダ３６ａから出力された音声信号は、ミキシング回路３７に送られる。

他方Ｃｈ２のバッファ３５ｂから取り出されたビットストリームは、デコーダ（オーディオデコーダを含む）３６ｂでデコードされ、デコーダ３６ｂから出力された音声信号はミキシング回路３７に送られる。ミキシング回路３７から出力された音声信号は、音声出力端子Ｐ２から図示しないスピーカに送られて再生される。

また図示せずも、光ピックアップ３１により光ディスクから読み出されたＴＯＣ情報は、ＲＦ及び復調回路３２，ＥＣＣ回路３３でそれぞれ復調，誤り訂正を施された後、システムコントローラ３８に送られる。システムコントローラ３８は、後述のように再生時にこの光ディスク装置の各部の動作を制御するものであり、図示せずも、ＣＰＵと、ＣＰＵが実行すべき処理プログラム等を格納したＲＯＭと、処理過程で生じたデータ等を一時記憶するためのＲＡＭとを含んでいる。尚、この制御のうち、光ピックアップ３１の位置の微調整は、ＲＦ及び復調／変調回路３２で復調されたビットストリームを取り込んで現在読み出し中のデータのアドレス情報を検出するアドレス検出回路３９の検出結果に基づいて行われる。

次に、光ディスク１９（図７の光ディスク装置によりアフレコが行われたもの）の再生時にこのシステムコントローラ３８が実行する処理の一例を説明する。
〔第１ステップ〕
光ピックアップ３１に光ディスク１９のＴＯＣ情報を読み出させた際に、図７の光ディスク装置により記録された情報であるところの、オリジナルデータのうちアフレコ音声データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報と、オリジナルデータのうちアフレコ音声データと対応し始める部分（図９のＸ０）のアドレス情報と、アフレコ音声データの開始位置（図９のＹ０）及び終了位置のアドレス情報とを得る。

〔第２ステップ〕
図示しない操作パネルの操作によりユーザがオリジナルデータ（図８のビデオビットストリームＶ及び主音声ビットストリームＡ１）の再生開始位置を指定すると、この再生開始位置のアドレス情報に基づき、光ピックアップ３１をこの再生開始位置にシークさせる。そして、スイッチ３４をＣｈ１のバッファ３５ａ側に切り替え、光ピックアップ３１の位置を微調整した後、光ピックアップ３１による読み出しを開始する。そして、バッファ３５ａに蓄積されたオリジナルデータをバッファ３５ａから取り出してデコーダ３６ａに送り、デコーダ３６ａでのデコード処理を開始する。

これにより、オリジナルの映像が再生されると共に、オリジナルの音声がミキシング回路３７を経てそのまま再生される。尚、デコーダ３６ａの消費レートは光ディスク１９からの読み出しレートよりも小さいので、バッファ３５ａに容量一杯にまでオリジナルデータが蓄積されると、光ディスク１９からのオリジナルデータの読み出しを中断し、その後バッファ３５ａからデータが取り出されることによりバッファ３５ａの容量に十分な空きができると、光ディスク１９からの読み出しを再開する。

このようにしてオリジナルデータが読み出されていき、第１ステップで得た情報が示すプレゼンテーションタイムスタンプと同じプレゼンテーションタイムスタンプを有する部分（図９ではＸ０、図１０ではＰＴＳの部分）に達すると、バッファ３５ａのデータ蓄積量が例えば次の（ｇ）〜（ｊ）のような各要因から決定される最低限必要な量（一例として容量一杯の量）になった時点で、オリジナルデータの読み出しを停止すると共にバッファ３５ａからのオリジナルデータの取り出しを停止して、スイッチ３４をＣｈ２のバッファ３５ｂ側に切り替える。
（ｇ）第１ステップで得た情報が示すプレゼンテーションタイムスタンプと同じプレゼンテーションタイムスタンプを有する部分に達してからの経過時間
（ｈ）メディアレート（光ディスク１９に対する読み出し・書き込みのレート）
（ｉ）Ｃｈ１，Ｃｈ２のデータレート（デコーダ３６ａ，３６ｂの消費レート）
（ｊ）バッファ３５ａ，３５ｂの容量

そして、最後にバッファ３５ａに送ったオリジナルデータのアドレス情報を記憶する。（次回オリジナルデータの読み出しを再開する際には、このアドレス情報に基づき、この最後にバッファ３５ａに送ったデータに続くオリジナルデータを光ディスク１９から読み出していく。）

続いて、第１ステップで得たアドレス情報に基づき、光ピックアップ３１を、現在の位置から、アフレコ音声データの開始位置（図９のＹ０）にまでシークさせ、光ピックアップ３１の位置を微調整した後、光ピックアップ３１による読み出しを開始する。これにより、アフレコ音声データ（図８の副音声ビットストリームＡ２）がバッファ３５ｂに蓄積されていく。

〔第３ステップ〕
続いて、バッファ３５ｂのデータ蓄積量が、例えば上記（ｈ）〜（ｊ）及び次の（ｋ）及び（ｌ）のような各要因から決定される最低限必要な量（一例として容量一杯の量）になった時点で、Ｃｈ１のバッファ３５ａ，Ｃｈ２のバッファ３５ｂからオリジナルデータ，アフレコ音声データをそれぞれ取り出してデコーダ３６ａ，３６ｂに送り、デコーダ３６ｂでのデコード処理も開始する。
（ｋ）アフレコ音声データの読み出しを開始してからの経過時間
（ｌ）Ｃｈ１のバッファ３５ａのデータ蓄積量
尚、バッファ３５ｂについての上記最低限必要なデータ蓄積量は、バッファ３５ａについての上記最低限必要なデータ蓄積量よりも小さくてもよい。なぜなら、デコーダ３６ｂでのデコード処理の開始後もまだアフレコ音声データの読み出しを続けているので、バッファ３５ｂにアンダーフローが発生する危険性が少なくなっているからである。

また、この例では、第２ステップにおいて、第１ステップで得た情報が示すプレゼンテーションタイムスタンプと同じプレゼンテーションタイムスタンプを有する部分に達すると、Ｃｈ１のバッファ３５ａからのオリジナルデータの取り出しを停止し（従ってデコーダ３６ａでのオリジナルデータのデコード処理を停止し）、その後の第３ステップにおいて、Ｃｈ２のバッファ３５ｂからのアフレコ音声データの取り出しを開始してデコーダ３６ｂでのアフレコ音声データのデコード処理を開始すると同時に、バッファ３５ａからのオリジナルデータの取り出しを再開（従ってデコーダ３６ａでのオリジナルデータのデコード処理を再開）している。しかし別の例として、第２ステップにおいて、第１ステップで得た情報が示すプレゼンテーションタイムスタンプと同じプレゼンテーションタイムスタンプを有する部分に達しても、バッファ３５ａからのオリジナルデータの取り出しを継続し（従ってデコーダ３６ａでのオリジナルデータのデコード処理を継続し）、このようにデコーダ３６ａでのデコード処理を継続した状態で、第３ステップにおいて、バッファ３５ｂからのアフレコ音声データの取り出しを開始してデコーダ３６ｂでのアフレコ音声データのデコード処理を開始するようにしてもよい。

〔第４ステップ〕
これにより、オリジナルの映像が再生されると共に、オリジナルの音声とアフレコ音声とがミキシング回路３７でミキシングされて再生され始める。

続いて、例えば上記（ｈ）〜（ｊ），（ｋ），（ｌ）及び次の（ｍ）のような各要因から決定される一定の条件を満たした時点で、アフレコ音声データの読み出しを停止し、スイッチ３４を再びＣｈ１のバッファ３５ａ側に切り替える。
（ｍ）Ｃｈ２のバッファ３５ｂのデータ蓄積量
そして、最後にバッファ３５ｂに送ったアフレコ音声データのアドレス情報を記憶する。（次回アフレコ音声データの読み出しを再開する際には、このアドレス情報に基づき、この最後にバッファ３５ｂに送ったデータに続くアフレコ音声データを光ディスク１９から読み出していく。）

続いて、前回スイッチ３４をＣｈ２のバッファ３５ｂ側に切り替えた際に記憶したアドレス情報に基づき、光ピックアップ３１を、現在の位置から、前回読み出しを停止したオリジナルデータの位置にまでシークさせ、光ピックアップ３１の位置を微調整した後、光ピックアップ３１による読み出しを開始する。
以下、アフレコ音声データの終了位置までの読み出しが全て完了するまで（あるいは図示しない操作パネルの操作によりユーザが再生の終了を指示するまで）、上述のようなオリジナルデータの読み出しとアフレコ音声データの読み出しとを時分割に行っていく。

図１２は、この再生時の定常状態における、光ピックアップ３１の読み出し状況（同図Ａ）と、Ｃｈ１のバッファ３５ａ，Ｃｈ２のバッファ３５ｂのデータ蓄積量（同図Ｂ，Ｃ）との一例を示す。図１２Ａにおいて、Ｃｈ１はオリジナルデータを読み出し中の期間であり、Ｃｈ２はアフレコ音声データを読み出し中の期間であり、Ｔｐはシーク中の期間であり、Ｔｃは時分割読み出しの繰り返し周期であり、Ｒｍは光ディスク１９からの読み出しレートである。

この図１２では、時刻Ｔ０に、バッファ３５ａのデータ蓄積量がゼロになる前にオリジナルデータの読み出しが再開され、その後の時刻Ｔ１に、オリジナルデータの読み出しが停止され、時刻Ｔ１からＴ２の間に光ピックアップ３１がアフレコ音声データの記録位置にシークされ、その後時刻Ｔ２に、バッファ３５ｂのデータ蓄積量がゼロになる前にアフレコ音声データの読み出しが再開され、その後の時刻Ｔ３に、アフレコ音声データの読み出しが停止され、時刻Ｔ３からＴ４の間に光ピックアップ３１がオリジナルデータの記録位置にシークされ、以下同様な過程が繰り返される様子が表れている。

尚、図１２では、オリジナルデータの読み出し中の期間とアフレコ音声データの読み出し中の期間との長さの関係や、バッファ３５ａのデータ蓄積量とバッファ３５ｂのデータ蓄積量と大きさの関係を捨象して描いている。しかし、オリジナルデータはビデオビットストリームＶ及び主音声ビットストリームＡ１から成るのに対し、アフレコ音声データは副音声ビットストリームＡ２のみから成るので、オリジナルデータの読み出し中の期間がアフレコ音声データの読み出し中の期間よりも長く、且つバッファ３５ａのデータ蓄積量がバッファ３５ｂのデータ蓄積量よりも大きくてよいことはもちろんである。

このように、光ディスク１９のＴＯＣの領域から、オリジナルデータのうちアフレコ音声データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報が読み出され、この情報に基づき、オリジナルデータとアフレコ音声データとが同期して読み出されてデコードされるので、アフレコ時にはオリジナルデータとアフレコ音声データとが多重化せずに記録されているにも係わらず、アフレコ音声データがオリジナルデータと時間的に正確に一致させて再生される。

以上の各例では１系統の光ピックアップをシークさせて読み出しと書き込みと（または２チャンネルのデータの読み出し）を時分割に行っているが、２系統の光ピックアップを設けて読み出しと書き込みと（または２チャンネルのデータの読み出し）を独立して行うようにしてもよい。

また、以上の例では書き換え型の光ディスクを搭載した光ディスク装置に本発明を適用しているが、例えば磁気ディスク等の適宜の書き換え可能なディスク状記録媒体（あるいはディスク状記録媒体以外のランダムアクセス方式のデジタル記録媒体）を搭載した記録再生装置に本発明を適用してもよい。また、２系統のヘッドを設ける場合には、例えば磁気テープ等のシーケンシャルアクセス方式のデジタル記録媒体を搭載した記録再生装置に本発明を適用してもよい。

また、以上の例ではオリジナルデータをパケット多重方式で記録した記録媒体に本発明を適用しているが、適宜の方式でオリジナルデータを記録したデジタル記録媒体に本発明を適用してよい。

また、以上の例ではビデオビットストリームＶと主音声ビットストリームＡ１とから成るオリジナルデータに対して音声データのアフレコを行うようにしているが、適宜のメディア種類のビットストリームから成るオリジナルデータに対して適宜の種類の新たなデータのアフレコを行う場合に本発明を適用してよい。即ち、例えばビデオビットストリームのみから成る（あるいはビデオビットストリームと音声ビットストリームとから成る）オリジナルデータに対して音声データとグラフィックデータとの少なくともいずれか一方のアフレコを行う場合や、音声ビットストリームのみから成るオリジナルデータに対してビデオデータとグラフィックデータとの少なくともいずれか一方のアフレコを行う場合等にも本発明を適用してよい。

そして、前述の（３）のアフレコ手法を採用する場合における再生時のミキシングも、図１１の光ディスク装置におけるように主音声ビットストリームＡ１と副音声ビットストリームＡ２とについて行なうだけでなく、オリジナルデータのうちのビデオビットストリームと、アフレコデータのうちのビデオビットストリームまたはグラフィックビットストリームとについて行なうようにしてもよい。

また、本発明は、以上の実施例に限らず、本発明の要旨を逸脱することなく、その他様々の構成をとりうることはもちろんである。

本発明を適用した光ディスク装置のシステム構成の一例を示すブロック図である。 光ピックアップの読み出し位置と書き込み位置との関係の一例を示す図である。 光ピックアップの位置と読み出し・書き込みの状況との関係と、バッファへのデータ蓄積量との一例を示す図である。 本発明を適用した光ディスク装置のシステム構成の別の一例を示すブロック図である。 デジタル記録媒体へのデータの記録例を示す図である。 従来のアフレコの処理過程の一例を示す図である。 本発明を適用した光ディスク装置のシステム構成の一例を示すブロック図である。 光ピックアップの読み出し位置と書き込み位置との関係の一例を示す図である。 光ピックアップの位置と読み出し・書き込みの状況との関係と、バッファへのデータ蓄積量との一例を示す図である。 オリジナルデータのうちアフレコ音声データと対応し始める部分のプレゼンテーションタイムスタンプを示す図である。 本発明を適用した光ディスク装置のシステム構成の別の一例を示すブロック図である。 時分割再生時における光ピックアップの読み出しの状況とバッファへのデータ蓄積量との一例を示す図である。

符号の説明

１，１９‥‥光ディスク、２，３１‥‥光ピックアップ、３‥‥ＲＦ及び復調／変調回路、４、３３‥‥ＥＣＣ回路、５，１０，１８、３４‥‥スイッチ、６‥‥読み出しチャネル用バッファ、７，３６ａ，３６ｂ‥‥デコーダ、８‥‥バイパスバッファ、９‥‥検出器、１１‥‥エンコーダ、１２‥‥エンコーダバッファ、１３‥‥書き込みチャネル用バッファ、１４，３８‥‥システムコントローラ、１５，３９‥‥アドレス検出回路、１６，１７‥‥ワークメモリ、２０‥‥多重化器，３２‥‥ＲＦ及び復調回路、３５ａ‥‥Ｃｈ１のバッファ、３５ｂ‥‥Ｃｈ２のバッファ、３７‥‥ミキシング回路

Claims (15)

1. 記録媒体からビットストリームを読み出す第１ステップと、
   前記ビットストリームをデコードする第２ステップと、
   前記ビットストリームのデコードに同期して、新たなデータをエンコードしてアフターレコーディング用のビットストリームとする第３ステップと、
   前記アフターレコーディング用のビットストリームを前記記録媒体の所定の領域に書き込む第４ステップと、
   前記記録媒体から読み出されたビットストリームと前記アフターレコーディング用のビットストリームとの時間的な対応関係を示す情報として、前記記録媒体から読み出されたビットストリームのうち前記アフターレコーディング用のビットストリームと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を前記記録媒体の付加情報を記録するための領域に書き込む第５ステップと
   を含むことを特徴とする記録媒体におけるアフターレコーディング方法。
2. 前記第１ステップで、ビデオビットストリームと音声ビットストリームとの少なくともいずれか一方を含むビットストリームを読み出し、前記第３ステップで、音声データ，ビデオデータ，グラフィックデータのうちの少なくともいずれか一方をエンコードしてアフターレコーディング用のビットストリームとすることを特徴とする請求項１に記載の記録媒体におけるアフターレコーディング方法。
3. 前記第１ステップで、ビデオビットストリームと少なくとも１つの音声ビットストリームとを含むビットストリームを読み出し、前記第３ステップで、音声データをエンコードしてアフターレコーディング用のビットストリームとすることを特徴とする請求項２に記載の記録媒体におけるアフターレコーディング方法。
4. 前記記録媒体は書き換え可能なディスク状記録媒体であり、前記第１ステップと前記第４ステップとを、共通の読み出し・書き込み用ヘッドを時分割に用いて行うことを特徴とする請求項１乃至３のいずれかに記載の記録媒体におけるアフターレコーディング方法。
5. 前記第２ステップでは、前記ビットストリームをデコーダに送る一方でバッファに蓄積し、前記第４ステップでは、前記バッファから取り出した前記ビットストリームと前記アフターレコーディング用のビットストリームとを組み合わせて前記記録媒体に書き込むことを特徴とする請求項１乃至４のいずれかに記載の記録媒体におけるアフターレコーディング方法。
6. 前記第４ステップでは、前記アフターレコーディング用のビットストリームを、前記第１ステップで読み出した前記ビットストリームと多重化せずに書き込むことを特徴とする請求項１乃至５のいずれかに記載の記録媒体におけるアフターレコーディング方法。
7. 記録媒体からビットストリームを読み出す読み出し手段と、
   前記読み出し手段が前記記録媒体から読み出したビットストリームをデコードするデコーダと、
   新たなデータをエンコードしてアフターレコーディング用のビットストリームとするためのエンコーダと、
   前記アフターレコーディング用のビットストリームを前記記録媒体に書き込むための書き込み手段と、
   前記デコーダによる前記ビットストリームのデコードに同期して前記エンコーダによりエンコードされた前記アフターレコーディング用のビットストリームを、前記書き込み手段を制御して前記記録媒体の所定の領域に書き込ませる制御手段と、
   前記記録媒体から読み出されたビットストリームと前記アフターレコーディング用のビットストリームとの時間的な対応関係を示す情報として、前記記録媒体から読み出されたビットストリームのうち前記アフターレコーディング用のビットストリームと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を前記記録媒体の付加情報を記録するための領域に書き込む付加情報書込み手段と
   を備えたことを特徴とする記録媒体におけるアフターレコーディング装置。
8. 前記記録媒体は書き換え可能なディスク状記録媒体であり、
   前記読み出し手段と前記書き込み手段とは共通の読み出し・書き込み用ヘッドであり、
   前記制御手段は、前記読み出し・書き込み用ヘッドを時分割に用いて前記アフターレコーディング用のビットストリームを書き込ませることを特徴とする請求項７に記載の記録媒体におけるアフターレコーディング装置。
9. 前記制御手段は、前記アフターレコーディング用のビットストリームを、前記読み出し手段で読み出した前記ビットストリームと多重化せずに書き込ませることを特徴とする請求項７または８に記載の記録媒体におけるアフターレコーディング装置。
10. 記録媒体の付加情報の記録領域から、アフターレコーディングの対象となったオリジナルデータのビットストリームと、該オリジナルデータのビットストリームとは多重化せずに書き込まれたアフターレコーディング用データのビットストリームとの時間的な対応関係を示す情報として、前記オリジナルデータのうち前記アフターレコーディング用データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を読み出す第１ステップと、
    前記情報に基づき、前記オリジナルデータのビットストリームと前記アフターレコーディング用データのビットストリームとを同期させて読み出す第２ステップと、
    前記オリジナルデータのビットストリーム及び前記アフターレコーディング用データのビットストリームをデコードする第３ステップと
    を含むことを特徴とするアフターレコーディングされた記録媒体の再生方法。
11. 前記第３ステップでデコードした前記オリジナルデータのビットストリームと前記アフターレコーディング用データのビットストリームとをミキシングする第４ステップを更に含むことを特徴とする請求項１０に記載のアフターレコーディングされた記録媒体の再生方法。
12. 前記記録媒体はディスク状記録媒体であり、前記第２ステップを、１つの読み出しヘッドを時分割に用いて行うことを特徴とする請求項１０または１１に記載のアフターレコーディングされた記録媒体の再生方法。
13. 記録媒体からビットストリームを読み出すための読み出し手段と、
    前記読み出し手段に、前記記録媒体の付加情報の記録領域から、アフターレコーディングの対象となったオリジナルデータのビットストリームと、該オリジナルデータのビットストリームとは多重化せずに書き込まれたアフターレコーディング用データのビットストリームとの時間的な対応関係を示す情報として、前記オリジナルデータのうち前記アフターレコーディング用データと対応し始める部分のプレゼンテーションタイムスタンプを示す情報を読み出させ、該情報に基づき、前記読み出し手段を制御して、前記オリジナルデータのビットストリームと前記アフターレコーディング用データのビットストリームとを同期させて読み出させる制御手段と、
    前記読み出し手段が前記記録媒体から読み出したビットストリームをデコードするデコーダと
    を備えたことを特徴とするアフターレコーディングされた記録媒体の再生装置。
14. 前記デコーダがデコードした前記オリジナルデータのビットストリームと前記アフターレコーディング用データのビットストリームとをミキシングするミキシング手段を更に備えたことを特徴とする請求項１３に記載のアフターレコーディングされた記録媒体の再生装置。
15. 前記記録媒体はディスク状記録媒体であり、
    前記読み出し手段は１つの読み出し用ヘッドであり、
    前記制御手段は、前記１つの読み出しヘッドを時分割に用いて前記オリジナルデータのビットストリームと前記アフターレコーディング用データのビットストリームとを読み出させることを特徴とする請求項１３または１４に記載のアフターレコーディングされた記録媒体の再生装置。

Images