JP2004192661A - Device and method for recording and reproducing audio/video information - Google Patents

Device and method for recording and reproducing audio/video information Download PDF

Info

Publication number
JP2004192661A
JP2004192661A JP2002324405A JP2002324405A JP2004192661A JP 2004192661 A JP2004192661 A JP 2004192661A JP 2002324405 A JP2002324405 A JP 2002324405A JP 2002324405 A JP2002324405 A JP 2002324405A JP 2004192661 A JP2004192661 A JP 2004192661A
Authority
JP
Japan
Prior art keywords
audio
recording
video
information
data area
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002324405A
Other languages
Japanese (ja)
Other versions
JP4169577B2 (en
Inventor
Masanori Ito
正紀 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Priority to JP2002324405A priority Critical patent/JP4169577B2/en
Publication of JP2004192661A publication Critical patent/JP2004192661A/en
Application granted granted Critical
Publication of JP4169577B2 publication Critical patent/JP4169577B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an audio/video information recording and reproducing device in which a post recording function on an optical disk is easily realized employing an inexpensive disk drive having a relatively slow speed seek time. <P>SOLUTION: When a video file is to be recorded, the file is continuously recorded on the optical disk for a duration which is related to a time equal to or more than three times a seek time. When dubbing audio is to be recorded, the dubbing audio is continuously recorded for only a constant data size and in parallel to the above, recorded video file is reproduced so that real time continuous reproducing and recording are simultaneously conducted. Thus, simultaneous reproducing of the video and the audio files is guaranteed when the dubbing audio is reproduced. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【０００１】
【発明の属する技術分野】
本発明は、映像信号及び音声信号を圧縮して光ディスク等の記録媒体へ記録する音声／映像情報記録再生装置および方法に関する。
【０００２】
【従来の技術】
映像を低いビットレートで圧縮する方法として、ＭＰＥＧ２規格（ＩＳＯ／ＩＥＣ １３８１８−１）で規定されているシステムストリームがある。このシステムストリームとしては、プログラムストリーム、トランスポートストリーム及びＰＥＳストリームの３種類が規定されている。
【０００３】
一方、磁気テープに代わる記録媒体としては、相変化光ディスク（例えば、ＤＶＤ−ＲＡＭやＭＶＤＩＳＣ）や光磁気ディスク（ＭＯ）等の光ディスクが注目を浴びてきている。例えば、ＤＶＤ−ＲＡＭ上に映像を記録するための規格として、ＶＩＤＥＯ ＲＥＣＯＲＤＩＮＧ規格（ＤＶＤ Ｓｐｅｃｉｆｉｃａｔｉｏｎｓ ｆｏｒ Ｒｅｗｒｉｔａｂｌｅ／Ｒｅ−ｒｅｃｏｒｄａｂｌｅ Ｄｉｓｃｓ Ｐａｒｔ ３ ＶＩＤＥＯ ＲＥＣＯＲＤＩＮＧ Ｖｅｒｓｉｏｎ １．０ Ｓｅｐｔｅｍｂｅｒ １９９９）がある。この規格は、ＤＶＤ−ＲＡＭディスクに対して、ＭＰＥＧ２規格のプログラムストリームから成る映像ファイルを記録再生するためのものである。以下では、相変化光ディスク（以下、混乱の無い限り、単に「光ディスク」と呼ぶ）に対して、ＭＰＥＧ２のトランスポートストリームから成る映像ファイルを記録再生する場合に置き換えて説明することにより、ＶＩＤＥＯ ＲＥＣＯＲＤＩＮＧ規格の技術内容を含んだ形で従来の技術内容を説明する。また、映像はＩＳＯ／ＩＥＣ １３８１８−１のＭＰＥＧ２圧縮とし、音声を圧縮処理する場合はＩＳＯ／ＩＥＣ １３８１８−７のＭＥＰＧ２−ＡＡＣ（Ａｄｖａｎｃｅｄ Ａｕｄｉｏ Ｃｏｒｄｉｎｇ）圧縮するものとする。
【０００４】
図１６に、従来の相変化光ディスクを使った音声／映像情報記録再生装置の構成図を示す。映像信号および音声信号の記録時は、映像信号入力部１００及び音声信号入力部１０２から入力した信号を各々映像圧縮部１０１及び音声圧縮部１０３で圧縮し、次にトランスポートストリーム組立部１０４においてポストレコーディング用ダミーパケット発生部１０５が生成するダミーパケットを圧縮結果に混合してトランスポートストリームを作成し、それをバッファメモリ１５４、記録部１２０及びピックアップ１３０を経由して相変化光ディスク１３１へ書き込む。
【０００５】
映像信号および音声信号の再生時は、ピックアップ１３０、再生部１２１およびバッファメモリ１５４を経由して取り出したトランスポートストリームをトランスポートストリーム分解部１１５で映像信号と音声信号に分離し、各々映像伸長部１１１及び第１音声伸長部１１３を介して、映像表示部１１０及び音声出力部１１２へ出力する。また、第２音声伸長部１１４は、トランスポートストリーム内に裏音声（後述）が記録された場合に、この裏音声の再生に用いるものである。
【０００６】
映像信号および音声信号の記録時には、記録制御部１５１が、記録部１２０、連続データ領域検出部１５０および論理ブロック管理部１４１の制御を行ない、記録を実施する。このとき、連続データ領域検出部１５０は、記録制御部１５１の指示に応じて、論理ブロック管理部１４１で管理されるセクタの使用状況を調べて、物理的に連続する空き領域を検出する。
【０００７】
映像信号および音声信号の再生時には、再生制御部１４０が、再生部１２１および記録部１２０の制御を行ない、再生を実施する。また、ポストレコーディング用記録制御部１５２およびポストレコーディング用再生制御部１５３は後述するポストレコーディング時に起動される。
【０００８】
なお、以下では「映像信号および音声信号の記録」を「動画信号の記録」と呼ぶことにする。また同様に「映像および音声の記録」を「動画の記録」と呼ぶことにする。
【０００９】
また、図１７は、相変化光ディスク１３１にリアルタイムで映像記録する場合の記録フォーマットを示す。相変化光ディスク１３１は２ｋバイトのセクタから構成され、１６個のセクタを１つの論理ブロック（３２ｋバイト）として取り扱い、この論理ブロックごとに誤り訂正符号を付与して相変化光ディスク１３１へ記録する。さらに、最大記録再生レート換算で特定時間（例えば、後述の様に、０．８６秒）以上の物理的に連続する論理ブロックを１つの連続データ領域として確保し、この領域へ、０．４〜１秒分の再生時間（表示時間）のＭＰＥＧトランスポートストリームからなる、ビデオ・オブジェクト・ユニット（Ｖｉｄｅｏ Ｏｂｊｅｃｔ Ｕｎｉｔ：以下、「ＶＯＢＵ」という）を順に記録する。なお、ひとつのＶＯＢＵは、原則的にすべて単独で復号可能な映像および音声圧縮データを含むものとする。すなわち、映像および音声圧縮データは１ＶＯＢＵ内で完結しているものとする。
【００１０】
１つのＶＯＢＵは、１８８バイト単位のＭＰＥＧトランスポートストリームの下位階層であるトランスポートパケットから構成される。トランスポートパケットは、ビデオ圧縮データが格納されたビデオトランスポートパケット（Ｖ＿ＴＳＰ）と、オーディオ圧縮データが格納されたオーディオトランスポートパケット（Ａ＿ＴＳＰ）と、ダミーオーディオトランスポートパケット（Ｄ＿ＴＳＰ）の３種類から構成される。また、１つのＶＯＢＵには、対応する時間のＶ＿ＴＳＰ、Ａ＿ＴＳＰおよびＤ＿ＴＳＰが全て含まれる。また、１つのＶＯＢＵのデータサイズは、映像が可変ビットレートであれば、最大記録再生レート以下の範囲で変動する。一方、映像が固定ビットレートであれば、ＶＯＢＵのデータサイズはほぼ一定である。
【００１１】
図１８は、Ｖ＿ＴＳＰ、Ａ＿ＴＳＰおよびＤ＿ＴＳＰの詳細を示す図である。Ｖ＿ＴＳＰは、トランスポートパケットヘッダとビデオデータから構成され、Ａ＿ＴＳＰは、トランスポートパケットヘッダとオーディオデータから構成され、Ｄ＿ＴＳＰは、トランスポートパケットヘッダと裏音声用ダミーデータから構成される。Ｖ＿ＴＳＰ、Ａ＿ＴＳＰ、Ｄ＿ＴＳＰ間の違いは、トランスポートパケットヘッダ内のＰＩＤ（Ｐａｃｋｅｔ ＩＤ）で識別される。例えば、図の様に、Ｖ＿ＴＳＰにはＰＩＤ＝“０ｘ００２０”、Ａ＿ＴＳＰにはＰＩＤ＝“０ｘ００２１”、Ｄ＿ＴＳＰにはＰＩＤ＝“０ｘ００２２”を割り付けることにより、それぞれ識別される。
【００１２】
図１６に示す音声／映像情報記録再生装置の連続データ領域検出部１５０は、１つの連続データ領域の残りが少なくなった時点で、次の連続データ領域の再検出を行なう。そして、１つの連続データ領域が一杯になると、次の連続データ領域に書き込みを行なう。
【００１３】
また、図１９は、光ディスク上の記録内容がＵＤＦ（Ｕｎｉｖｅｒｓａｌ Ｄｉｓｋ Ｆｏｒｍａｔ）ファイルシステムによって管理されている状態を示す。ここでは、記録開始ボタンのオンとオフの各１回の操作により、１つのＭＰＥＧトランスポートストリームがファイル「ＭＯＶＩＥ．ＭＰＧ」として記録される場合を示す。ファイルは、ファイル名及びファイル・エントリの位置が、ＦＩＤ（Ｆｉｌｅ Ｉｄｅｎｔｉｆｉｅｒ Ｄｅｓｃｒｉｐｔｏｒ）で管理される。さらに、ファイル・エントリ内のアロケーション・ディスクリプタ（Ａｌｌｏｃａｔｉｏｎ Ｄｅｓｃｒｉｐｔｏｒ）を使って、１つのファイルとそのファイルを構成する３つの連続データ領域ａ、ｂ、ｃを管理する。連続データ領域が３つに分れる経緯を次に示す。なお、各アロケーション・ディスクリプタの構造は、図２０に示すように、エクステント長（Ｅｘｔｅｎｔ Ｌｅｎｇｔｈ）とエクステント位置（Ｅｘｔｅｎｔ Ｐｏｓｉｔｉｏｎ）とから成る。
【００１４】
記録制御部１５１は、連続データ領域ａへの記録中に不良論理ブロックを見つけると、その不良論理ブロックをスキップして、連続データ領域ｂの先頭から書き込みを継続する。さらに、記録制御部１５１は、連続データ領域ｂへの記録中にＰＣファイルの記録領域とぶつかりそうになると、今度は連続データ領域ｃの先頭から書き込みを継続する。この結果、ファイル「ＭＯＶＩＥ．ＭＰＧ」は３つの連続データ領域ａ、ｂ、ｃから構成されることになる。
【００１５】
図２１は、ファイルの再生時の動作概要を示す。再生時は、再生制御部１４０が、光ディスク１３１からバッファメモリ１５４へのデータの読み込み動作と、バッファメモリ１５４からトランスポートストリーム分解部１１５へのデータ移動によるデータの再生動作を同時に実施する。このとき、データの再生速度Ｖｏよりもデータの読出速度Ｖｒの方が高速となるように設定し、再生すべきデータがバッファメモリ１５４内に無いこと（アンダーフロー）が起きないように制御を行う。従って、連続したデータ読み込み及び連続したデータ再生を続けると、データ再生速度Ｖｏとデータ読出速度Ｖｒとの速度差分だけ、再生すべきデータを余分に確保できることになる。かかる余分に確保できるデータを、ピックアップ１３０のジャンプによりデータ読み込みが途絶える間の再生データとして使うことにより、連続再生を実現することができる。
【００１６】
具体的には、データ読出速度Ｖｒが２４Ｍｂｐｓ、データ再生速度Ｖｏが１０Ｍｂｐｓ、ピックアップ１３０の最大移動時間が０．５秒の場合、ピックアップ移動中に５Ｍビットの余分な再生データが必要になる。かかる余分な再生データを確保するためには、０．３６秒間の連続読み込みが必要になる。すなわち、５Ｍビットをデータ読出速度２４Ｍｂｐｓとデータ再生速度１０Ｍｂｐｓの差で割った時間だけ連続読み込みする必要がある。
【００１７】
ここで、０．３６秒間の連続読み込みの間に８．６Ｍビット分、すなわち１０Ｍｂｐｓの再生速度換算で０．８６秒分の再生データを読み出すことになる。したがって、最大１０Ｍｂｐｓの動画を０．８６秒分以上の連続データ領域を確保して記録することで、連続データ再生を保証することが可能となる。
【００１８】
なお、ピックアップ１３０の最大移動時間はディスクの最内周と最外周間の移動時間を指す。また、この時間に、回転待ち時間も含まれるものとする。
【００１９】
なお、連続データ領域の途中には、数個の不良論理ブロックがあっても良い。ただし、この場合には、再生時にかかる不良論理ブロックを読み込むのに必要な読み込み時間を見越して、連続データ領域を０．８６秒分よりも少し多めに確保する必要が有る。
【００２０】
また、民生用ムービーに通常備わっている機能の一つにポストレコーディングがある。ポストレコーディングは、一度記録した映像の音声（以下、表音声という）を新規録音した音声（以下、裏音声という）に吹き替える機能である。
【００２１】
ポストレコーディングは、一般に次の３つのステップから構成される。第１ステップとして、まず映像をポストレコーディング可能な記録モードで記録する（以下、「ポストレコーディングモード記録」と呼ぶ）。第２ステップとして、記録した映像を見ながら、その映像に同期した裏音声を記録する（以下、「ポストレコーディング記録」と呼ぶ）。第３ステップとして、第２ステップの映像と裏音声を同期させて再生する（以下、「ポストレコーディング再生」と呼ぶ）。これらのステップで、吹き替えが実現する。
【００２２】
ここで、第１ステップでは、ポストレコーディング用記録制御部１５２が、Ｖ＿ＴＳＰ、Ａ＿ＴＳＰおよびＤ＿ＴＳＰを含むＭＰＥＧトランスポートストリームを記録する（例えば、特許文献１参照）。第２ステップでは、ポストレコーディング用記録制御部１５２が、Ｄ＿ＴＳＰを裏音声用Ａ＿ＴＳＰに置き換えて光ディスク１３１へ記録する。第３ステップでは、ポストレコーディング用再生制御部１５３が、表音声用Ａ＿ＴＳＰ、裏音声用Ａ＿ＴＳＰおよびＶ＿ＴＳＰをトランスポートストリーム分解部１１５へ渡す様に制御して吹き替えを実現する。
【００２３】
なお、以下では、ポストレコーディングモード記録時に記録する映像と音声を含むファイルを動画ファイル呼ぶ。
【００２４】
また、ポストレコーディングの必要が無い場合は、Ｄ＿ＴＳＰを含めないで、Ａ＿ＴＳＰとＶ＿ＴＳＰから構成される動画ファイルを記録する。
【００２５】
また、ポストレコーディングモード記録された動画ファイルを再生制御部１４０が再生する場合は、Ｄ＿ＴＳＰをトランスポートストリーム分解部１１５へ渡さないで、Ａ＿ＴＳＰとＶ＿ＴＳＰを渡す。
【００２６】
【特許文献１】
国際公開第０１／０４８９３号パンフレット （第１１図）
【００２７】
【発明が解決しようとする課題】
ポストレコーディング記録時に、映像を見ながら裏音声を記録する場合、映像の再生処理と同時に、裏音声を含んだ映像の再記録処理が必要となる。具体的には、ポストレコーディング用再生制御部１５３が再生するストリームをバッファ上に保存しておき、そのストリーム内のＤ＿ＴＳＰを裏音声用Ａ＿ＴＳＰに置き換えて、再度ディスク上へ書き戻すことになる。すなわち、映像の記録レートでの連続再生と同じレートでの連続記録を同時に実施する必要がある。この同時記録再生処理を実現するには、高い転送レートと高速なシークタイムを実現する必要があり、高価なディスクドライブが必要であった。
【００２８】
そこで、本発明は、上記問題点を解消すべく、光ディスク上でポストレコーディング機能を比較的低速なシークタイムを有する安価なディスクドライブでも容易に実現できると同時に、音声ファイルの結合や分割等の編集を容易に実現できる音声／映像情報記録再生装置および方法を提供することを目的とする。
【００２９】
【課題を解決するための手段】
前記の目的を達成するため、本発明に係る第１の音声／映像記録再生装置は、映像情報を記録媒体に映像ファイルとして記録する映像記録部と、音声情報を記録媒体に音声ファイルとして記録する音声記録部と、記録媒体に記録された映像情報を実時間連続再生する映像再生部と、映像情報を再生し、同時に映像情報に関連した音声情報を記録するポストレコーディング用記録部とを有する音声／映像情報記録再生装置であって、映像記録部は、読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する映像用連続データ領域検出部と、映像情報を記録すべき映像用連続データ領域の記録単位番号を指示する映像記録制御部とを含み、音声記録部は、音声情報の記録が可能な物理的に連続する複数の記録単位からなり、かつデータサイズが所定の範囲となるような音声用連続データ領域を検出する音声用連続データ領域検出部と、複数の音声用連続データ領域上に音声情報を連続的に記録する音声記録制御部とを含み、映像記録部が映像情報を記録し、ポストレコーディング用記録部が、映像用連続データ領域に記録された映像情報の再生と音声用連続データ領域への音声情報の記録とを交互に実施しながら、映像情報の実時間連続再生と音声情報の記録とを同時に実施することを特徴とする。
【００３０】
第１の音声／映像情報記録再生装置において、ポストレコーディング記録部はさらに、音声用連続データ領域の境界を示す境界情報を音声情報と共に記録することが好ましい。
【００３１】
前記の目的を達成するため、本発明に係る第２の音声／映像記録再生装置は、映像情報を記録媒体に映像ファイルとして記録する映像記録部と、音声情報を記録媒体に音声ファイルとして記録する音声記録部と、記録媒体に記録された映像情報を実時間連続再生する映像再生部と、記録媒体に記録された音声情報を実時間連続再生する音声再生部と、映像情報を再生し、同時に前記映像情報に関連した音声情報を再生するポストレコーディング用再生部とを有する音声／映像情報記録再生装置であって、映像記録部は、読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する映像用連続データ領域検出部と、映像情報を記録すべき映像用連続データ領域の記録単位番号を指示する映像記録制御部とを含み、音声記録部は、音声情報の記録が可能な物理的に連続する複数の記録単位からなり、かつデータサイズが所定の範囲となるような音声用連続データ領域を検出する音声用連続データ領域検出部と、複数の音声用連続データ領域上に音声情報を連続的に記録する音声記録制御部とを含み、映像記録部が映像情報を記録し、音声記録部が映像情報に関連のある音声情報を記録し、ポストレコーディング用再生部が、映像用連続データ領域に記録された映像情報と音声用連続データ領域に記録された音声情報を交互に読み出しながら、映像と音声とを同時に実時間連続再生することを特徴とする。
【００３２】
第２の音声／映像情報記録再生装置において、音声記録部はさらに、音声用連続データ領域の境界を示す境界情報を音声情報と共に記録し、ポストレコーディング用再生部はさらに、音声用連続データ領域に記録された音声情報を読み出す際に、境界情報を参照することが好ましい。
【００３３】
前記の目的を達成するため、本発明に係る第１の音声／映像記録再生方法は、映像情報を記録媒体に映像ファイルとして記録し、記録媒体に記録された映像情報を実時間連続再生すると同時に、映像情報に関連した音声情報を記録媒体に音声ファイルとして記録する音声／映像情報記録再生方法であって、読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する工程と、映像情報を記録すべき映像用連続データ領域の記録単位番号を指示する工程と、音声情報の記録が可能な物理的に連続する複数の記録単位からなり、かつデータサイズが所定の範囲となるような音声用連続データ領域を検出する工程と、複数の音声用連続データ領域上に音声情報を連続的に記録する工程とを含み、映像用連続データ領域に記録された映像情報の再生と音声用連続データ領域への音声情報の記録とを交互に実施しながら、映像情報の実時間連続再生と音声情報の記録とを同時に実施することを特徴とする。
【００３４】
第１の音声／映像情報記録再生方法はさらに、音声用連続データ領域の境界を示す境界情報を音声情報と共に記録する工程を含むことが好ましい。
【００３５】
前記の目的を達成するため、本発明に係る第２の音声／映像記録再生方法は、映像情報を記録媒体に映像ファイルとして記録し、音声情報を記録媒体に音声ファイルとして記録し、記録媒体に記録された映像情報と音声情報とを同時に実時間連続再生する音声／映像情報記録再生方法であって、読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する工程と、映像情報を記録すべき前記映像用連続データ領域の記録単位番号を指示する工程と、音声情報の記録が可能な物理的に連続する複数の記録単位からなり、かつデータサイズが所定の範囲となるような音声用連続データ領域を検出する工程と、複数の音声用連続データ領域上に音声情報を連続的に記録する工程とを含み、映像用連続データ領域に記録された映像情報と音声用連続データ領域に記録された音声情報を交互に読み出しながら、映像と音声とを同時に実時間連続再生することを特徴とする。
【００３６】
第２の音声／映像情報記録再生方法はさらに、音声用連続データ領域の境界を示す境界情報を音声情報と共に記録する工程と、境界情報を参照して、音声用連続データ領域に記録された音声情報を読み出す工程とを含むことが好ましい。
【００３７】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００３８】
（実施の形態１）
図１は、本発明の実施の形態１に係る音声／映像情報記録再生装置の構成を示すブロック図である。本実施形態と従来例（図１６）との違いは、第２トランスポートストリーム分解部１６６を有する点と、連続データ領域検出部１６０、記録制御部１６１、ポストレコーディング用記録制御部１６２、ポストレコーディング用再生制御部１６３およびバッファメモリ１６４の機能が異なる点にある。また、再生部１２１のデータ読み込み速度、第１トランスポートストリーム分解部１６５に入力する同画データの最大再生レート、ピックアップ１３０の読み込み動作時および書き込み動作時の最大移動時間は、従来例と同じであるものとしている。
【００３９】
図２は、図１の機能ブロックの中で、ポストレコーディングモード記録の際に関係するブロックを示し、図３は、図１の機能ブロックの中で、ポストレコーディング記録の際に関係するブロックを示し、図４は、図１の機能ブロックの中で、ポストレコーディング再生の際に関係するブロックを示す図である。
【００４０】
図５は、本発明の実施の形態１に係る音声／映像情報記録装置における映像および音声の記録形態を示す図である。従来例を示す図１７との違いは、連続データ領域の長さ（２．６秒分以上）が異なる点だけである。その他の点（例えば、ＶＯＢＵが、Ｖ＿ＴＳＰ、Ａ＿ＴＳＰおよびＤ＿ＴＳＰから構成される点など）は同じである。
【００４１】
図６は、本発明の実施の形態１において、ポストレコーディング記録時に記録する裏音声ファイルの記録形態を示す図である。裏音声ファイルは、裏音声を符号化したＡ＿ＴＳＰから構成される。具体的には、ＡＡＣ（Ａｄｖａｎｃｅｄ Ａｕｄｉｏ Ｃｏｄｉｎｇ）圧縮符号化された音声データにトランスポートパケットヘッダを付加してトランスポートストリームを構成する。また、光ディスク１３１上に確保された複数個の９６ｋｂｙｔｅ固定長の連続データ領域内に、このトランスポートストリームが連続的に記録される。それぞれの９６ｋｂｙｔｅは互いに物理的に離れていても良い。なお、図６では省略しているが、ＰＡＴ、ＰＭＴ等はトランスポートストリームに必須のパケットであり、裏音声ファイルに含まれる。
【００４２】
図７は、本発明の実施の形態１におけるポストレコーディング記録時の動作モデルを示す図である。光ディスク１３１上に記録済みの動画データはピックアップ１３０を介して速度Ｖｒで動画バッファメモリ内に取り込まれ、さらにその動画データは速度Ｖｏｕｔでトランスポートストリーム分解部１６５に転送され、さらに映像伸長部１１１および第１音声伸長部１１３により映像および音声が再生される。一方、音声信号は音声圧縮部１０３により音声データに変換され、次にトランスポートストリーム組立部１０４を介して速度Ａｉｎで音声バッファメモリに取り込まれる。さらに、その音声データは、速度Ａｗでピックアップ１３０を介して光ディスク１３１に書き込まれる。動画データの読み込みと音声データの書き込みは１個のピックアップ１３０を時分割的に交互に切り替えることにより実現される。ここで、Ｖｒ＞Ｖｏｕｔ、Ａｗ＞Ａｉｎとする。
【００４３】
図８は、本発明の実施の形態１におけるポストレコーディング記録時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図である。図８において、ｔｓｅｅｋはピックアップ１３０の最大移動時間、ｔＡｗｒｉｔｅは裏音声用音声ファイルの書込み時間、ｔＶ−ＣＤＡは動画用連続データ領域の読出し時間を示す。ＢＡ−ｔｈは、音声データの書込みのためのシーク動作を開始する際の閾値である。音声バッファメモリ内の符号量がＢＡ−ｔｈ以上になった場合に、ピックアップ１３０は動画データ上から裏音声データ上へ移動を開始する。本実施の形態１では、ＢＡ−ｔｈは９６ｋｂｙｔｅであるものとする。
【００４４】
図９は、本発明の実施の形態１におけるポストレコーディング再生時の動作モデルを示す図である。光ディスク１３１上に記録済みの動画データは、ピックアップ１３０を介して速度Ｖｒで動画バッファメモリ内に取り込まれ、さらに、その動画データは、速度Ｖｏｕｔでトランスポートストリーム分解部１６５に転送され、さらに映像伸長部１１１および第１音声伸長部１１３により映像および音声として再生される。一方、光ディスク１３１上に記録済の裏音声データは、ピックアップ１３０を介して速度Ａｒで音声バッファメモリ内に取り込まれ、さらに、その裏音声データは、速度Ａｏｕｔでトランスポートストリーム分解部１６６を介して第２音声伸長部１１４により裏音声として再生される。ここで、Ｖｒ＞Ｖｏｕｔ、Ａｒ＞Ａｏｕｔとする。
【００４５】
図１０は、本発明の実施の形態１におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図である。ＢＶは動画バッファメモリサイズ、ＢＡは音声バッファメモリサイズを示す。
【００４６】
図３７は連続データ領域の概念図である。最小の動画用連続データ領域は、最小の２倍の音声用連続データ領域を読み込むのにかかる時間と、２回分の最大シーク時間の合計時間分だけの映像データを含む。一方、最小の音声用連続データ領域は、最小の２倍の映像用連続データ領域を読み込むのにかかる時間と、２回分の最大シーク時間の合計時間分だけの音声データを含む。
【００４７】
ポストレコーディングモード記録時には、図２の機能ブロックを利用する。記録制御部１６１が記録部１２０、連続データ領域検出部１６０および論理ブロック管理部１４４の制御を行ない、ポストレコーディングモード記録を実施する。この時、記録制御部１６１は、連続データ領域検出部１６０に物理的に連続する空き領域を検出させる。
【００４８】
具体的には、記録開始操作によって、トランスポートストリーム組立部１０４は、圧縮された映像信号と圧縮された音声信号をそれぞれ１８８バイト単位のトランスポートパケットＶ＿ＴＳＰおよびＡ＿ＴＳＰに分割し、さらにポストレコーディング用ダミーパケット発生部１０５が生成するＤ＿ＴＳＰを加え、この３種類のトランスポートパケットで１つのＶＯＢＵを構成する様に順番に並べてトランスポートストリームを作成した後に、バッファメモリ１６４を介して記録部１２０へ渡す。
【００４９】
記録部１２０では、記録制御部１６１から指示された論理ブロック番号の位置からＶＯＢＵの記録を開始する。このとき、記録部１２０において、１つのＶＯＢＵは３２ｋバイト単位に分割され、３２ｋバイト単位に誤り訂正符号が付加されて光ディスクの１つの論理ブロック上に記録される。また、１つの論理ブロックの途中で１つのＶＯＢＵの記録が終了した場合は、隙間を開けることなく次のＶＯＢＵの記録を連続的に行う。
【００５０】
連続データ領域検出部１６０は、論理ブロック管理部１４４内で管理されている論理ブロックの使用状況を探索して、未使用の論理ブロックが最大記録再生レート換算で２．６秒分連続している領域を検出しておく。そして、当該論理ブロック領域の論理ブロック番号を、論理ブロック単位の書き込みが発生するごとに記録部１２０へ通知し、また論理ブロックが使用済みになることについては、論理ブロック管理部１４４に通知する。
【００５１】
論理ブロック管理部１４４は、必要に応じて再生部１２１を起動して、光ディスク１３１上に記録されているＵＤＦファイルシステムのスペースビットマップを読み込み、論理ブロックの使用状況を把握する。本実施形態では、電源投入時にまとめてスペースビットマップを読み込むことにより、ポストレコーディングモード記録時、ポストレコーディング記録時、ポストレコーディング再生時には、途中でスペースビットマップの読み込みは不要な処理として扱う。
【００５２】
次に、ポストレコーディング記録（裏音声を記録）を行う場合には、図１の機能ブロック内の図３に示す機能ブロックを利用する。ポストレコーディング用記録制御部１６２は、光ディスク１３１上に記録されたＭＰＥＧトランスポートストリームがピックアップ１３０、再生部１２１、トランスポートストリーム分解部１６５を経由する様に制御することにより、映像および音声を再生する。この時バッファメモリ１６４は、図７に示すように動画バッファメモリと音声バッファメモリに分割使用され、あらかじめ記録されている動画および音声の一時的なデータ蓄積のために、バッファメモリ１６４が使用される。ポストレコーディング用記録制御部１６２は同時に、音声信号入力部１０２の音声を、音声圧縮部１０３を経由することによりＡＡＣ圧縮符号に圧縮し、さらにトランスポートストリーム組立部１０４を経由することにより、ＭＰＥＧトランスポートストリームへ変換する。
【００５３】
そして、その変換されたＭＰＥＧトランスポートストリームは、さらにバッファメモリ１６４（ただし、音声バッファメモリ）、記録部１２０およびピックアップ１３０を介して、相変化光ディスク１３１へ裏音声ファイルとして記録される。
【００５４】
裏音声ファイルは、図６に示すように、固定長の物理的に連続した領域に配置される（動画ファイルとは固定長である点およびデータサイズが異なる）。この連続データ領域を複数個確保し、その領域に裏音声のトランスポートストリームを連続的に配置する。それぞれの固定長領域は物理的に離れていても良い。
【００５５】
ポストレコーディング用記録制御部１６２は、図８の時間（１）では、ピックアップ１３０を介して映像の再生を行うので、動画バッファメモリ内には最低Ｖｒ−Ｖｏｕｔ以上の速度で映像データが蓄積される。一方、音声バッファメモリ内には、裏音声のトランスポートストリームがＡｉｎ以下の速度で蓄積される。音声バッファメモリの蓄積量が音声用連続データ領域のデータサイズである９６ｋバイトを越えると、ポストレコーディング用記録制御部１６２は、裏音声データの書出しを行うために、ピックアップ１３０を裏音声データ用の空き連続データ領域へ移動させる（時間（２））。この移動の間、動画のディスクからの読み込みが中断するので、動画バッファメモリのデータ量は最大Ｖｏｕｔの速度で減少する。ピックアップ１３０の移動が完了すると、時間（３）に示す様に、裏音声データの書き込みにより、音声バッファメモリの符号量はＡｗの速度で減少する。次に、裏音声データの連続データ領域１個分の書き込みが完了すると、ピックアップ１３０を動画ファイルの読み込み中断位置まで戻す（時間（４））。さらに、最悪のケースであるが、戻った直後に、動画ファイルの連続データ領域の不連続個所に遭遇すると、次の連続データ領域までピックアップ１３０を移動させるので、動画バッファメモリ上の動画データは０にまで減少する（時間（５））。そして、次の連続データ領域内における動画データの読み込みが再開すると、動画バッファメモリ内に最低Ｖｒ−Ｖｏｕｔの速度で動画データが蓄積する（時間（６））。以降は同様にして、ピックアップ１３０を交互に移動させながらポストレコーディング記録を実現する。
【００５６】
以上の様に、動画ファイルの連続データ領域の最小サイズが３回分のピックアップ移動時間および音声データの書き込み時間を合計した時間の間、動画を表示し続けるだけの動画データが、確実に動画バッファメモリ内に蓄積されるだけのサイズになっているので、動画を途切れることなく連続して実時間再生できる。また、同時に音声ファイルの書き込みにおいても、データが欠落すること無く連続的に記録できる。
【００５７】
ポストレコーディング再生の場合には、図４の機能ブロックを利用する。ポストレコーディング用再生制御部１６３は、光ディスク１３１上に記録された動画ファイルを、ピックアップ１３０、再生部１２１、第１トランスポートストリーム分解部１６５、映像伸長部１１１および第１音声伸長部１１３を経由することにより、映像および表音声として再生する。同時に、ポストレコーディング用再生制御部１６３は、光ディスク１３１上に記録された裏音声ファイルを、ピックアップ１３０、再生部１２１、第２トランスポートストリーム分解部１６６、第２音声伸長部１１４を経由することにより、裏音声として再生する。この時、バッファメモリ１６４は、図９に示す様に、動画バッファメモリと音声バッファメモリに分割使用され、動画ファイルのデータを蓄積するために動画バッファメモリが使用され、裏音声ファイルのデータを蓄積するために音声バッファメモリが使用される。
【００５８】
ポストレコーディング用再生制御部１６３は、図１０の時間（１）では、裏音声ファイルを音声用連続データ領域１個分（９６ｋバイト）だけ読み込む。これにより、音声バッファメモリ内に裏音声データが蓄積される。次に、裏音声ファイルから動画ファイルへとピックアップ１３０の移動を開始する（時間（２））。ピックアップ１３０が動画ファイルに到着すると、時間（３）の先頭より、動画データの読み込みおよび再生を開始する。従って、動画バッファメモリ内には、最低Ｖｒ−Ｖｏｕｔの速度でデータが蓄積される。同時に、時間（３）の先頭より、音声バッファメモリ内のデータの再生を開始する。これにより、音声バッファメモリ内のデータ量は最大Ａｏｕｔの速度で減少する。そして、このデータ量がＢＡ−ｔｈになった時点で、動画ファイル上のピックアップ１３０が音声ファイル上へ移動を開始する（時間（４））。この移動により、光ディスク１３１からの動画データの読み込みが中断するので、動画バッファメモリの符号量は最大Ｖｏｕｔのペースで減少する。この移動が完了すると、時間（５）の様に、裏音声ファイルからのデータ読み込みが始まるので、音声バッファメモリ内に最低Ａｒ−Ａｏｕｔの速度で音声データが蓄積される。そして、時間（６）において、ポストレコーディング用再生制御部１６３は、ピックアップ１３０を裏音声ファイル上から動画ファイル上へ移動させる。図１０では、移動が完了した後、時間（７）でたまたま動画ファイルの不連続点（連続データ領域の境界）に遭遇し、ピックアップ１３０の移動が発生した例を示す。この移動が完了すると、時間（８）に示す様に、再び動画データの読み込みを開始する。以降は同様にして、ピックアップ１３０を交互に移動させながら、ポストレコーディング再生を実現する。
【００５９】
ポストレコーディング再生時の動画用連続データ領域の最低限の読み込み時間長をｔＶ−ＣＤＡ、ポストレコーディング再生時の音声用連続データ領域の読み込み時間長をｔＡ−ＣＤＡとすると、図１０において、
（Ｖｒ−Ｖｏｕｔ）ｔＶ−ＣＤＡ＝Ｖｏｕｔ×（３ｔｓｅｅｋ＋ｔＡ−ＣＤＡ）…（式１）
（Ａｒ−Ａｏｕｔ）ｔＡ−ＣＤＡ＝Ａｏｕｔ×ｔＡｏｕｔ…（式２）
ｔＡｏｕｔ＝ｔＶ−ＣＤＡ＋３ｔｓｅｅｋ…（式３）
なる関係があることより、ｔＶ−ＣＤＡおよびｔＡ−ＣＤＡはそれぞれ以下のように求まる。
【００６０】
ｔＶ−ＣＤＡ＝（Ｖｏｕｔ／Ｖｒ）×（３ｔｓｅｅｋ＋ｔＡ−ＣＤＡ）／（１−（Ｖｏｕｔ／Ｖｒ））…（式４）
ｔＡ−ＣＤＡ＝（（Ａｏｕｔ／Ａｒ）×３ｔｓｅｅｋ）／（１−（Ａｏｕｔ／Ａｒ）−（Ｖｏｕｔ／Ｖｒ））…（式５）
また、映像用連続データ領域の最小限のデータサイズＳＶ−ＣＤＡ、および裏音声用連続データ領域の最低限のデータサイズＳＡ−ＣＤＡはそれぞれ以下のように求まる。
【００６１】
ＳＶ−ＣＤＡ＝Ｖｒ×ｔＶ−ＣＤＡ …（式６）
ＳＡ−ＣＤＡ＝Ａｒ×ｔＡ−ＣＤＡ …（式７）
本実施形態の場合、ｔｓｅｅｋ＝０．５ｓ、Ｖｏｕｔ＝１０Ｍｂｐｓ、Ｖｒ＝２４Ｍｂｐｓ、Ａｏｕｔ＝２８８ｋｂｐｓ、Ａｒ＝２４Ｍｂｐｓとして計算することにより、ｔＶ−ＣＤＡ＝１．１ｓ、ＳＶ−ＣＤＡ＝３．３Ｍｂｙｔｅ、ｔＡ−ＣＤＡ＝０．０３ｓ、ＳＡ−ＣＤＡ＝９０ｋｂｙｔｅとなる。そこで、ＳＡ−ＣＤＡは、論理ブロックの整数倍となる様に、９６ｋｂｙｔｅとした。
【００６２】
以上の様に、動画ファイルの連続データ領域がピックアップ１３０の移動時間の３倍と音声データの読み込み時間を合計した時間（１．５３ｓ）の間、動画を表示し続けられるだけの動画データが、確実に動がバッファメモリ内に蓄積されるだけのサイズ（３．３Ｍｂｙｔｅ）になっているので、映像および表音声をとぎれることなく連続して実時間再生できる。また、同時に裏音声ファイルの再生においても、データが欠落すること無く連続的に実時間再生できる。
【００６３】
また、１つの映像に対して複数の裏音声ファイルを作成し、映像ファイルと裏音声ファイルの組み合わせを取捨選択して映像と複数の裏音声を比較できるメリットもある。
【００６４】
なお、裏音声ファイル用の連続データ領域のデータサイズは固定長であるものとしたが、その固定値のサイズ以上の可変長であっても良い。ただし、この場合、動画ファイルの連続データ領域の最小データサイズをピックアップ１３０の１回分の最大移動時間を見込んだ長さだけ伸ばす必要がある。すなわち、動画ファイルの連続データ領域のデータサイズが４回分のピックアップ１３０の移動時間および音声データの読み込み時間を見込んだ長さにしても良い。ただしこの場合、ピックアップが一度に読み出す裏音声ファイルのデータ量は固定値であるものとする。
【００６５】
なお、本実施形態では、動画ファイルの連続データ領域のデータサイズは所定のサイズ以上であるものとしたが、動画ファイルの先頭および末尾の連続データ領域のデータサイズはこの限りではない。というのは、例えば、動画ファイルの先頭部分を削除する場合は、残りの連続データ領域のデータサイズが所定のデータサイズよりも小さくなる場合があるからである。所定の連続データ領域のデータサイズが短い場合でも、再生開始時の事前のデータ読み込みを多めにすることにより、ひとつの動画ファイルの連続再生には影響しない。
【００６６】
なお、図１０では、動画ファイルと裏音声ファイルの読み込みが完全に同期する場合を示したが、完全に同期する必要はない。動画ファイルおよび裏音声ファイルの連続データ領域が図１０の場合よりも長めに確保されていれば、図２４に示す様な動作となる。図１０との違いは、動画ファイルおよび裏音声ファイルの連続データ領域が図１０の場合よりも長いため、区間（３）がより長い点にある。この場合、上記（式３）は以下の（式８）に置き換えられる。
【００６７】
ｔＡｏｕｔ≧ｔＶ−ＣＤＡ＋３ｔｓｅｅｋ …（式８）
さらにこの場合、例えば、裏音声ファイルの連続データ領域のデータサイズが９６ｋバイトから１９２ｋバイトの範囲になるようにすることにより、裏音声ファイルの編集が非常に容易になる（図２５に、裏音声ファイルのデータ構造を示す）。このことは、２つの裏音声ファイルの特定の部分同士を結合してひとつの裏音声ファイルとする様な編集の際において、例えば結合部分の２つの連続データ領域の合計のデータサイズが９６ｋバイト以下の場合に、２つの連続データ領域を単純に結合すること、もしくはさらに隣接する連続データ領域を加えた３つの連続データ領域を結合するにより、最小９６ｋバイト以上、最大１９２ｋバイト以下の連続データ領域を作成可能になることを意味する。このことにより、結合部分のみデータを書き換えることにより、裏音声ファイルの結合が非常に容易に達成できる。もし、９６ｋバイトの固定長とした場合、結合部分以降の全てのデータを連続データ領域内の前方にシフトする必要があるからである。ただし、この場合ポストレコーディング記録およびポストレコーディング再生時にピックアップが一度に読み込むデータ量はひとつの連続データ領域分とする。また、式（１）のｔＡ−ＣＤＡを１９２ｋバイト分（すなわち上限値）の音声データの読み込み時間に置き換える必要がある。図３３は、ポストレコーディング再生実施時のデータ読み込み順序および読込みデータ量を示す図である。動画データの一回の読み込み量は動画用の最小連続記録長以上で良い。一方、音声データの一回の読み込み量は音声用の最小連続記録長以上でかつ最小連続記録長の２倍未満であって良い。図３２は、この時の。ポストレコーディング再生実施時のタイミングチャートを示す。図３２のｔＡ−ＣＤＡは、図１０のｔＡ−ＣＤＡに比べて２倍の音声データを読み込む点が異なる。
【００６８】
裏音声ファイルのデータ読み出し単位を例えば９６ｋバイトから１９２ｋバイトのように最小連続データ領域のデータサイズの１から２倍を前提とする場合、（式２）を以下の（式９）に置き換えることにより、最小連続データ領域のデータサイズが求まる。
【００６９】
（Ａｒ−Ａｏｕｔ）ｔＡ−ＣＤＡ＝２Ａｏｕｔ×ｔＡｏｕｔ…（式９）
また、（式１）、（式９）、（式３）の関係より、
ｔＡ−ＣＤＡ＝（２（Ａｏｕｔ／Ａｒ）×３ｔｓｅｅｋ）／（（１−（Ｖｏｕｔ／Ｖｒ）×（１＋（Ａｏｕｔ／Ａｒ））…（式１０）
が導出される。ここでＶｒ＝Ａｒであることから、上記（式１０）は、
ｔＡ−ＣＤＡ＝（２（Ａｏｕｔ／Ａｒ）×３ｔｓｅｅｋ）／（１−Ｖｏｕｔ＋Ａｏｕｔ−Ａｏｕｔ×Ｖｏｕｔ）…（式１１）
に簡略化される。
【００７０】
また、この時、裏音声ファイルの連続データ領域のデータサイズが所定の範囲内で変動するので、ポストレコーディング再生制御部が裏音声用連続データ領域の境界を検出し易いように、音声ファイルをＵＤＦのロング・アロケーション・ディスクリプタのみを使用して構成し、そのインプリメンテーション・ユース・フィールド内に、裏音声用連続データ領域の先頭であることを示す１ｂｉｔの情報を付加しても良い。この時、ショート・アロケーション・ディスクリプタを使用しないのは、インプリメンテーション・ユース・フィールドが無いので、境界を示す情報を配置できないからである。また、別の方法として、ファイル・エントリの拡張属性（Ｅｘｔｅｎｄｅｄ Ａｔｔｒｉｂｕｔｅｓ）フィールドにおいて、１つのアロケーション・ディスクリプタ毎に連続データ領域の先頭かどうかを示す情報を設けても良い。ここで、あるアロケーション・ディスクリプタが連続データ領域の先頭でない場合とは、不良論理ブロックをスキップした結果、２つのアロケーション・ディスクリプタを使用する場合である。
【００７１】
また、別の方法として、ポストレコーディング記録時に、裏音声用連続データ領域のデータサイズを、裏音声ファイルとは別の専用ファイルに記録してもよい。この時、それぞれの裏音声用連続データ領域のデータサイズを裏音声ファイル毎に例えば別々の専用ファイルに記録する。そして、ポストレコーディング再生時においては、別途記録された裏音声用連続データ領域のデータサイズ情報を参照してそのデータサイズ分だけ１度に読み込む。
【００７２】
なお、本実施の形態１では、裏音声用連続データ領域の境界とＡ＿ＴＳＰに含まれる各音声フレームの境界については特に触れなかったが、一致させても良い。
【００７３】
なお、本実施の形態１では、動画ファイル側の連続データ領域間の１回のシーク動作を考慮したが、逆に、裏音声ファイル側の連続データ領域が所定値以上のデータサイズ有し、動画ファイル側の連続データ領域が所定の範囲のデータサイズを有し、裏音声側の連続データ領域間の１回のシーク動作を考慮しても良い。
【００７４】
なお、本実施の形態１では連続データ領域のデータサイズはピークレートＶｒおよびＡｒを基準として算出したが、たとえば動画ストリームの実際のビットレートがピークレート以下で変動する場合は、連続データ領域のデータサイズが式（６）の値を満たさなくとも、ピークレート時の再生時間に等しい再生時間の動画データを含んでいれば良い。このことは音声ストリームの場合も同様である。例えばＶｏｕｔ＝１０Ｍｂｐｓ、ＳＶ−ＣＤＡ＝３．３Ｍｂｙｔｅを前提として記録を開始した場合でも、トランスポートストリーム組み立部１０４が生成する実際のビットレートがたまたま５Ｍｂｐｓ以下となっていれば、映像用の連続データ領域のデータサイズは１．６５Ｍｂｙｔｅであっても良い。同じ再生時間分のデータを読み込んだことになるからである。
【００７５】
なお、本実施の形態１では、ポストレコーディング記録、およびポストレコーディング再生の場合を取り扱ったが、動画ファイル記録と例えば１Ｍｂｐｓ以下の低ビットレートの動画ファイル記録を同時に実施する場合に、ポストレコーディング記録時と類似した連続データ領域長の考え方を導入しても良い。このケースとしては、例えばカムコーダで７４０×４８０画素のＭＰＥＧ２圧縮された動画ファイルを記録しながら１６０×１２０画素のＭＰＥＧ４圧縮された動画ファイルを記録することが想定される。ただし、この場合、７４０×４８０画素の動画ファイルは再生ではなく記録する対象となる。
【００７６】
なお、本実施の形態１では、ひとつの動画ファイルとひとつの裏音声ファイルを同時録再したり同時再生する場合を示したが、ひとつの動画ファイルを再生しながら複数の裏音声ファイルを記録したり、また、ひとつの動画ファイルを再生しながら複数の裏音声ファイルを再生する場合も類似した考え方が適用可能である。たとえば、Ｎ個の裏音声ファイルを想定する場合は、ひとつの裏音声ファイルの場合に比べて、動画ファイルの連続記録領域のデータサイズの最小値をＮ倍すればよい。裏音声ファイルの連続データ領域の最大値および最小値もＮ倍すれば良い。
【００７７】
なお、本実施の形態１では、ポストレコーディング再生時に、音声バッファ内のデータが図１０の閾値ＢＡ−ｔｈ以下になったら裏音声ファイル側へピックアップを移動するものとしたが、あらかじめ決められた時間周期とスケジュールで裏音声ファイルのひとつの連続データ領域を読み込んでも良い。そして、裏音声ファイルを読み込まない期間内は動画ファイルの読み込みを必要に応じて適宜実施する。
【００７８】
なお、本実施の形態１では、ポストレコーディング再生時に、音声バッファ内のデータが図１０の閾値ＢＡ−ｔｈ以下になったら裏音声ファイル側へピックアップを移動するものとしたが、あらかじめ決められた時間周期とスケジュールで、動画ファイルおよび裏音声ファイルの読み込みを実施しても良い。
【００７９】
なお、本実施の形態１では、ポストレコーディング記録時に、音声バッファ内のデータが図８の閾値ＢＡ−ｔｈ以上になったら裏音声ファイル側へピックアップを移動するものとしたが、あらかじめ決められた時間周期とスケジュールで裏音声ファイルのひとつの連続データ領域への書込みを実施しても良い。そして、裏音声ファイルを読み込まない期間内は動画ファイルの読み込みを必要に応じて適宜実施す。
【００８０】
なお、本実施の形態１では、ポストレコーディング記録時に、音声バッファ内のデータが図８の閾値ＢＡ−ｔｈ以上になったら裏音声ファイル側へピックアップを移動するものとしたが、あらかじめ決められた時間周期とスケジュールで裏音声ファイルのひとつの連続データ領域への書込み、および動画ファイルからのデータ読み込みを実施しても良い。
【００８１】
なお、本実施の形態１では、裏音声ファイルの連続データ領域のデータサイズが、所定値以上の可変長の場合を示したが、連続データ領域のデータサイズの規則の簡素化のために、動画ファイルの連続データ領域の規則と同じにしても良い。ただし、この場合であっても、一度に読み込むべき裏音声ファイルのデータサイズは固定長分だけ読み込む。
【００８２】
なお、本実施の形態１では、裏音声ファイルの連続データ領域のデータサイズが、所定値以上の可変長の場合を示したが、連続データ領域のデータサイズの規則の簡素化のために、物理的に完全に連続していることとしても良い。ただし、この場合、裏音声ファイルの記録が完了した後で、連続化のために全データの移動が必要となる。また、この場合であっても、一度に読み込むべき裏音声ファイルのデータサイズは固定長分だけ読み込む。
【００８３】
なお、本実施の形態１では、動画ファイルと裏音声ファイル相互の物理配置については特に触れなかったが、ポストレコーディングモード記録時に、図２６に示す様に、あらかじめ裏音声ファイルのデータと動画ファイルのデータを交互に配置できる様に、映像ファイルを記録しておいても良い。ポストレコーディング記録時に、あらかじめ確保された領域に裏音声ファイルのデータを書き込む。これにより、ポストレコーディング再生時のシーク発生量を著しく減らすことができる。図２６に示す裏音声用連続データ領域と動画ファイル用連続データ領域を順に読み出せば、裏音声データを読みだす度に必要だった２回のシーク動作が不要になるからである。
【００８４】
また、図３１に示すように、裏音声ファイルの連続データ領域の物理配置が動画ファイルのＶＯＢＵの直前となる様に配置しても良い。このとき、ひとつの裏音声用連続データ領域内には、物理的に直後に配置されるＶＯＢＵに対応する裏音声データを格納する。これにより、ポストレコーディング再生時にＶＯＢＵの単位のランダムアクセスが容易に可能になる。このとき、ポストレコーディング再生時において、シームレスにデータを読み出すために必要な動画ファイルの連続読み出し量が、実施の形態１の場合に較べて１／３で済む。なお、裏音声ファイルの連続データ領域へのポストレコーディング記録が、光ディスクドライブの転送レートや最大シーク時間の関係で、リアルタイムに実施できない場合は、オフラインで裏音声用のデータを記録しても良い。この場合、再生データを確認しながらの音声吹き込みができないことになるが、ＢＧＭ（バックグラウンドミュージック）を書き込む場合等には活用できる。なお、図３１において、裏音声ファイルの連続データ領域は３個のＥＣＣブロックから構成されるものとしたが、これは１秒分の音声データ用に２個（６４ｋバイト）と、欠陥ブロック発生時の予備のＥＣＣブロック（３２ｋバイト）から構成されるものとした。これ以外にも、動画ファイルに重畳すべき静止画データ等を記録すべく４個目のＥＣＣブロックを追加しても良い。
【００８５】
さらに、図３１の裏音声データとして、動画データ内の裏音声用ダミーデータと同じプレゼンテーションタイムスタンプを持つ音声フレームを有する様にしても良い。これにより、裏音声ファイルの音声データを動画ファイル内にコピーしやすくなる。また、パケット内の内部データ構造も動画ファイル内の裏音声データに類似したデータ構造を持つようにしても良い。このことは、動画ファイルがトランスポートストリームでなくてプログラムストリーム形式で記録される場合も同様である。
【００８６】
（実施の形態２）
次に、本発明の実施の形態２について説明する。実施の形態２と実施の形態１との違いは、裏音声の符号化方式が異なる点にある。実施の形態１では、ＡＡＣ圧縮符号を使うのに対して、実施の形態２では、リニアＰＣＭ（Ｌｉｎｅａｒ ＰＣＭ、あるいはＰｕｌｓｅ Ｃｏｄｅ Ｍｏｄｕｌａｔｉｏｎ）符号を使う。
【００８７】
図１１は、本発明の実施の形態２に係る音声／映像情報記録再生装置の機能構成を示すブロック図である。図１と図１１の違いは、Ａ／Ｄ変換部１７４および第２トランスポートストリーム組立部１７５を含む点と、トランスポートストリーム組立部１０４の代わりに第１トランスポートストリーム組立部１７３を有する点（但し、機能的には同じ）と、第２音声伸長部１１４の代わりにＤ／Ａ変換部１７６を有する点と、機能的に異なったポストレコーディング用記録制御部１７０、ポストレコーディング用再生制御部１７１、およびバッファメモリ１７２を有する点にある。なお、再生部１２１のデータ読出速度、トランスポートストリーム分解部１６５、１６６の最大記録再生レート、ピックアップ１３０の読み込み動作時および書き込み動作時の最大移動時間は従来例と同じであるものとしている。
【００８８】
図１２は、図１１の中でポストレコーディング記録の際に関係するブロックを示し、図１３は、図１１の中でポストレコーディング再生の際に関係するブロックを示す図である。
【００８９】
以上の様に、裏音声の符号形式としてリニアＰＣＭ符号を使うので、ポストレコーディング再生時に、回路規模の大きい第２音声伸長部１１４を回路規模の小さいＤ／Ａ変換部１７６で代替できる。
【００９０】
ただし、裏音声の再生速度はＡＡＣ圧縮の場合よりも上がるので、その分連続データ領域の長さを（式７）に基づいて調整する必要がある。
【００９１】
なお、裏音声ファイル用の連続データ領域のデータサイズは固定長であるものとしたが、固定のサイズ以上の可変長であっても良い。ただし、この場合、動画ファイルの連続データ領域の最小データサイズをピックアップ１３０の１回分の最大移動時間を見込んだ長さだけ伸ばす必要がある。
【００９２】
なお、裏音声ファイルの連続データ領域のデータサイズは、所定の範囲（例えば、９６ｋバイト〜１９２ｋバイト）であっても良い。というのは、裏音声ファイル同士の結合等の編集処理が非常に容易になるからである。
【００９３】
（実施の形態３）
次に、本発明の実施の形態３について説明する。実施の形態３と実施の形態１との違いは、ポストレコーディング再生時に、動画ファイルと裏音声ファイルの同時再生を行うのではなく、動画ファイルの中にあらかじめ裏音声ファイルを１つのトランスポートストリームとして混合（ＭＩＸ）しておき、再生時には表音声ストリームと裏音声ストリームを並列に復号する点にある。
【００９４】
図１４は、本発明の実施の形態３に係る音声／映像情報記録再生装置の機能構成を示すブロック図である。図１と図１４の違いは、トランスポートストリーム分解部１１５を１つしか有さない点と、ポストレコーディング用ＭＩＸ制御部１８０を有する点にある。また、ポストレコーディング用再生制御部１５３は、従来例のポストレコーディング用再生制御部１５３と同等の機能を有する点が異なる。なお、再生部１２１のデータ読出速度、トランスポートストリーム分解部１１５の最大記録再生速度、ピックアップ１３０の読み込み動作時および書き込み動作時の最大移動時間は従来例と同じであるものとしている。
【００９５】
図１５は、図１４の中でポストレコーディング再生の際に関係するブロックを示す図である。
【００９６】
映像記録時、ポストレコーディング記録時は、実施の形態１と同様に処理を行う。その後で、裏音声ファイル内のＡ＿ＴＳＰで動画ファイル内のＤ＿ＴＳＰを置き換えることにより、表音声ストリームと裏音声ストリームがＭＩＸされたトランスポートストリームに書き換える。
【００９７】
ポストレコーディング再生時は、ＭＩＸ後の動画ファイルを図１５の再生部１２１、バッファメモリ１６４、トランスポートストリーム分解部１１５を経由させる。そして、さらに表音声ストリームは、第１音声伸長部１１３および音声出力部１１２を経由し、裏音声ストリームは、第２音声伸長部１１４および音声出力部１１２を経由させて、両方の音声を映像と共に再生する。
【００９８】
以上の様に、表音声と裏音声がＭＩＸされたトランスポートストリームからなる動画ファイルを作成することにより、２つのファイルを管理する必要はなく、１つのファイルのみを管理すれば良くなる。
【００９９】
また、動画ファイルと裏音声ファイルのデータ構造が同じトランスポートストリーム形式であることにより、動画ファイル内のＤ＿ＴＳＰと裏音声ファイル内のＡ＿ＴＳＰを交換すれば良いので、ＭＩＸされた動画ファイルを作成しやすい。また、動画ファイルと裏音声ファイルのデータ構造が同じトランスポートストリーム形式であることにより、動画ファイル内のＤ＿ＴＳＰを裏音声ファイル内のＡ＿ＴＳＰで置き換えたトランスポートストリームをデジタルインタフェースへ出力する際にも置き換えが容易になる。さらに、裏音声ファイルのデータ構造をトランスポートストリームの様なＭＰＥＧシステムストリーム形式にすることにより、音声圧縮符号（例えば、ＡＡＣ符号）が異なっていても、統一した音声ファイルとして取り扱うことができるので、裏音声ファイルの取り扱いが容易になる。
【０１００】
なお、裏音声ファイルの連続データ領域のデータサイズは、所定の範囲（例えば、９６ｋバイト〜１９２ｋバイト）であっても良い。というのは、裏音声ファイル同士の結合等の編集処理が非常に容易になるからである。
【０１０１】
なお、裏音声ファイル用の連続データ領域のデータサイズのみ固定長であるものとしたが、動画ファイル側の連続データ領域のデータサイズが別の固定値であっても良い。ただし、この場合、動画ファイルの連続データ領域の最小データサイズをピックアップ１３０の１回分の最大移動時間を見込んだ長さだけ減らす必要がある。すなわち、動画ファイルの連続データ領域のデータサイズが２回分のピックアップ１３０の移動時間および音声データの読み込み時間を見込んだ長さにしても良い。ただし、この場合、アフレコ再生時にピックアップが一度に読み出す動画ファイルのデータ量はひとつの連続データ領域分であるものとする。また、アフレコ再生時にピックアップが読み出す裏音声ファイルのデータ量もひとつの連続データ領域分であるものとする。
【０１０２】
また、この時、裏音声ファイルの連続データ領域のデータサイズが固定長でなくても、最小値と最大値の間に収まるデータサイズであっても良い。
【０１０３】
（実施の形態４）
次に、本発明の実施の形態４について説明する。実施の形態４と実施の形態１との違いは、動画ファイルに音声データが含まれていなくて、静止画像のみ含まれる動画ファイルのポストレコーディング再生を取り扱う点にある。そして、この様な静止画像を、指定された順序で所定の時間間隔でスライドショーの様に切り換えながら、同時に音声ファイルに記録されている音声を再生する場合の例について説明する。なお、音声／映像情報記録再生装置の構成は実施の形態１と同様であるものとする。
【０１０４】
図２３は、本発明の実施の形態４に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図である。以下、図２３を参照して説明する。
【０１０５】
ポストレコーディング用再生制御部１６３は、時間（１）の先頭より、動画データの読み込みを開始する。従って、動画バッファメモリ内にはＶｒの速度でデータが蓄積される。次に、時間（２）において、音声データへシーク動作を行う。そして、１枚分の静止画データの読み込み完了後、時間（３）よりその静止画を表示する。同時に、音声バッファメモリ内のデータの読み込みと、読み込まれたデータの再生を開始する。これにより、音声バッファメモリ内のデータ量は最大Ａｒ−Ａｏｕｔの速度で増加する。そして、時間（４）では、ピックアップ１３０が音声データ上から映像データ上へ移動を行う。この間、音声出力も同時に実施するので、音声バッファメモリ内の符号量はＡｏｕｔの速度で減少する。ピックアップ１３０の移動が完了すると、映像データの読み込みを再開する（時間（５））。そして、音声バッファメモリ内のデータ量がＢＡ−ｔｈになった時点で、動画ファイル上のピックアップ１３０が音声ファイル上への再移動を開始する（時間（６））。以上の繰り返しにより、表示周期ｔｓｔｉｌｌの間に、読み込まれた静止画データは、トランスポートストリーム分解部１６５に転送され、さらに映像伸長部１１１により映像が再生される。また、表示周期ｔｓｔｉｌｌの間に、読み込まれた音声データも第１音声伸長部１１３により再生される。
【０１０６】
ここで、表示周期である映像更新間隔ｔｓｔｉｌｌｌは、１枚の静止画像データを読み込む時間をｔＶｒｅａｄ、固定データサイズの連続データ領域に記録された音声データを読み込む時間をｔＡ−ＣＤＡ、ピックアップ１３０の最大移動時間をｔｓｅｅｋとすれば、以下の（式１２）を満たせば良い。
【０１０７】
ｔｓｔｉｌｌ≧ｔＶｒｅａｄ＋ｔＡ−ＣＤＡ＋２ｔｓｅｅｋ …（式１２）
以上の様にして、スライドショーに音声を付加することが容易に実現できる。
【０１０８】
なお、本実施の形態４において、静止画像はトランスポートストリームからなる動画ファイルに含まれるものとしたが、ＪＰＥＧファイルであっても良い。この場合、ＪＰＥＧ復号部が必要となることは言うまでも無い。
【０１０９】
また、本実施の形態４において、静止画の更新間隔は一定であるものとしたが、上記（式１２）を満たせば一枚毎に個別に指定しても良い。また、静止画像のデータサイズが個別に異なる場合は、更新間隔をそのデータサイズに応じて（式９）を満たす様な範囲で１枚毎に指定しても良い。
【０１１０】
また、本実施の形態４では、静止画をスライド表示しながら、音声を再生する場合を示したが、音声を記録する場合も同様である。この場合、音声データの読み込み時間と書き込み時間を差替えれば良いことは言うまでもない。
【０１１１】
なお、裏音声ファイルの連続データ領域のデータサイズは、所定の範囲（例えば、９６ｋバイト〜１９２ｋバイト）であっても良い。というのは、裏音声ファイル同士の結合等の編集処理が非常に容易になるからである。ただし、この場合、（式１２）のｔＡ−ＣＤＡとして、データサイズの最大値（１９２ｋバイト）の読み込み時間に置き換える必要がある。
【０１１２】
また、本実施の形態４では、音声ファイルの１回の読み込み時にシークは発生しないものとしたが、複数回のシークを前提として良い。ただし、この場合、静止画の再生時間をそのシーク分だけ引き延ばす必要がある。
【０１１３】
（実施の形態５）
本発明の実施の形態５と実施の形態１との違いについて、以下に説明する。
【０１１４】
第１に、動画用連続データ領域の最小値が異なる点である。最小値は２回のピックアップの最大移動時間分の動画データを確保するのに要する連続データ領域のデータサイズと、裏音声の連続データ領域の最小値の２倍分のデータサイズを読み出す間の動画データを確保するのに要する連続データ領域上のデータサイズとの合計とする。
【０１１５】
第２に、裏音声用連続データ領域の最小値が異なる点である。この最小値は、２回のピックアップの最大移動時間分の裏音声データを確保するのに要する連続データ領域のデータサイズと、映像の連続データ領域の最小値の２倍分のデータを読み出す間に再生すべき動画データを確保するのに要する連続データ領域上のデータサイズとの合計とする。
【０１１６】
第３に、動画データの１回の読み出し量の最小値および最大値が決まっている点である。
【０１１７】
第４に、裏音声用データの１回の読み出し量も別の最小値および最大値が決まっている点である。
【０１１８】
図２７は、本実施の形態５におけるアフレコ再生時のピックアップの移動経路を示す図である。図２７において、読み込み番号（＃に続く番号）の順に動画データまたは裏音声ファイルの読み込みを実施する。
【０１１９】
図２８は、本実施の形態５における裏音声ファイルのデータ構造を示す図である。図２８において、Ａ＿ＴＳＰにより連続データ領域が構成される。また、連続データ領域上の特定のデータ範囲をひとつの読み込み範囲とする。
【０１２０】
図２９は、本実施の形態５における音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図である。
【０１２１】
図３０は、ひとつの連続データ領域の読み出しデータサイズの例を示す図である。たとえば、先頭から２回、最小値で読み出し、次は最小値の１．５倍のデータサイズを読み出す場合を示す（図３０（ａ））。最後の１回のデータサイズが長くなっているのは、仮に読み出しを固定読み出し量（ＳＶ−ＣＤＡ）の４回に分けた場合、最後の４回目が最小値よりも小さくなってしまうためである。固定読み出し量を確保するためには、次の連続データ領域＃（ｍ＋１）の先頭データも読み出す必要ある（図３０（ｂ））。このとき、シーク動作が発生するので、ポストレコーディング再生時に映像が途切れてしまう。
【０１２２】
図３４は、ポストレコーディング再生実施時のデータ読み込み順序および読込みデータ量を示す図である。動画データの一回の読み込み量は動画用の最小連続記録長以上でかつ最小連続記録長の２倍未満であって良い。また、同様に音声データの一回の読み込み量も音声用の最小連続記録長以上でかつ最小連続記録長の２倍未満であって良い。
【０１２３】
図３６は連続データ領域の概念図である。最小の動画用連続データ領域は、最小の２倍の音声用連続データ領域を読み込むのにかかる時間と、２回分の最大シーク時間の合計時間分だけの映像データを含む。一方、最小の音声用連続データ領域は、最小の２倍の映像用連続データ領域を読み込むのにかかる時間と、２回分の最大シーク時間の合計時間分だけの音声データを含む。
【０１２４】
図４０は、ポストレコーディング再生時に参照することができるスケジューリング情報を示す図である。
【０１２５】
図２９において、動画用連続データ領域の最小値（ＳＶ−ＣＤＡ）、および音声用連続データ領域の最小値（ＳＡ−ＣＤＡ）は、
（Ｖｒ−Ｖｏｕｔ）ｔＶ−ＣＤＡ＝２Ｖｏｕｔ×（２ｔｓｅｅｋ＋ｔＡ−ＣＤＡ）…（式１３）
（Ａｒ−Ａｏｕｔ）ｔＡ−ＣＤＡ＝２Ａｏｕｔ×ｔＡｏｕｔ …（式１４）
ｔＡｏｕｔ＝ｔＶ−ＣＤＡ＋２ｔｓｅｅｋ …（式１５）
という関係式から、ｔＡ−ＣＤＡは以下の（式１６）で表される。
【０１２６】
ｔＡ−ＣＤＡ＝（４ｔｓｅｅｋ×Ａｏｕｔ（Ｖｒ＋Ｖｏｕｔ））／（（Ｖｒ−Ｖｏｕｔ）（Ａｒ−Ａｏｕｔ）−４Ａｏｕｔ×Ｖｏｕｔ）…（式１６）
また、
ＳＶ−ＣＤＡ＝Ｖｒ×ｔＶ−ＣＤＡ／２ …（式１７）
ＳＡ−ＣＤＡ＝Ａｒ×ｔＡ−ＣＤＡ／２ …（式１８）
となる。ここで、映像用連続データ領域のデータサイズはＳＶ−ＣＤＡ以上の任意の値であるものとする。また、裏音声用連続データ領域のデータサイズはＳＡ−ＣＤＡ以上の任意の値とする。
【０１２７】
ポストレコーディング再生時は、裏音声ファイルと動画ファイルを交互に読み出す。このとき一度に読み出す量の最小値は、裏音声ファイルであれば、最小でＳＡ−ＣＤＡ分、最大でこの２倍とする。動画ファイルであれば、最小でＳＶ−ＣＤＡ分、最大でこの２倍とする。
【０１２８】
以上の構成により、ポストレコーディング記録およびポストレコーディング再生を実現するための連続データ領域のデータサイズの最小値（ＳＶ−ＣＤＡ）を実施の形態１に比べて２／３にすることができる。これにより、例えばＳＭＩＬ等のプレイリストにより順番が決められた場合であっても、ＩＮ点からＯＵＴ点までの時間間隔を減らすことができる。
【０１２９】
なお、本実施の形態５では、動画ファイルの連続データ領域のデータサイズは所定のサイズ以上であるものとしたが、動画ファイルの先頭および末尾の連続データ領域のデータサイズはこの限りではない。というのは、例えば、動画ファイルの先頭部分を削除する場合は、残りの連続データ領域のデータサイズが所定のデータサイズよりも小さくなる場合があるからである。所定の連続データ領域のデータサイズが短い場合でも、再生開始時の事前のデータ読み込みを多めにすることにより、ひとつの動画ファイルの連続再生には影響しない。
【０１３０】
なお、本実施の形態５では、データの読み出し方の例を図３０に示したが、できるだけ即座に映像バッファの符号量を満杯にしつつ、音声データが不足する直前に音声データを読込むような読み出し方であっても良い。ただし、この場合であっても、音声データに対しては図３０と同様の読み出し方が実施される。
【０１３１】
なお、本実施の形態５の様に、図３０のような読み出し方をポストレコーディング再生時に実施するのではなく、図３９に示すように、データサイズを３回の各読み出しにおいて均等となる様な読み出し方をしても良い。この方法により、ポストレコーディング再生時により少量のバッファメモリで済む様になる。さらに、ポストレコーディング時に毎回できるだけ均等となるような読み込みデータサイズと、そのデータサイズの先頭データのアドレス情報をディスク上に記録しておいても良い。図４０にディスク中に記録されるアフレコ再生のためのこの様なスケジューリング情報の例を示す。このスケジューリング情報には、裏音声データおよび動画データそれぞれに対して、１回で連続して読み出す量を含む。図４０の例では、裏音声データは固定データサイズＳＡ−ＣＤＡづつ毎回読み出し、動画データはＳＶ−ＣＤＡの１．１７倍づつデータを読み込む。すなわち、動画データと裏音声データを交互に読み込んでシームレスなポストレコーディング再生を実現する際の読込みデータサイズを保持していることになる。図４０では、動画ファイルまたは裏音声ファイルの読み出し開始点のアドレスも記録されている。このアドレスはファイルの先頭からのオフセット値が記録されている。この様なデータ読み出しのスケジューリングに関する情報を、ポストレコーディング再生の内容を指示するファイル（たとえばプレイリスト）毎に関連付けて記録する。これにより、容易に映像バッファの使用率を下げることができる。このことは映像バッファを振動吸収のためのデータ蓄積の用途に使える機会が増えるので、耐震性が向上する。また、ポストレコーディング再生時に読み込みデータ量を毎回算出したりする必要が無い。もしくは、ポストレコーディング再生時に毎回映像バッファ、もしくは音声バッファの残量を監視してデータ読み出しタイミングを調整する必要が無い。この様なスケジューリング情報を記録再生装置は、ポストレコーディング記録による裏音声データが完了した後で記録しても良いし、記録中に作成しても良い。
【０１３２】
（実施の形態６）
本発明の実施の形態６が実施の形態１と異なるのは、２回分のシーク動作を想定している点にある。
【０１３３】
図３５は、動画データおよび音声データの読み出し順序および読み出しデータサイズを示す。音声データの読み出しデータ量は常に所定の値（連続データ領域の最小長）である。
【０１３４】
図３８は動画データおよび音声データの読み出しタイミングを示す。
【０１３５】
また、以下の（式１９）から（式２４）は本実施の形態に関する関係式である。
【０１３６】
（Ｖｒ−Ｖｏｕｔ）ｔＶ−ＣＤＡ＝Ｖｏｕｔ×（２ｔｓｅｅｋ＋ｔＡ−ＣＤＡ）…（式１９）
（Ａｒ−Ａｏｕｔ）ｔＡ−ＣＤＡ＝Ａｏｕｔ×ｔＡｏｕｔ …（式２０）
ｔＡｏｕｔ＝ｔＶ−ＣＤＡ＋２ｔｓｅｅｋ …（式２１）
ＳＶ−ＣＤＡ＝Ｖｒ×ｔＶ−ＣＤＡ …（式２２）
ＳＡ−ＣＤＡ＝Ａｒ×ｔＡ−ＣＤＡ …（式２３）
ｔＡ−ＣＤＡ＝（２ｔｓｅｅｋ×Ａｏｕｔ）／（Ｖｒ−Ｖｏｕｔ−Ａｏｕｔ）…（式２４）
以上の構成により、ポストレコーディング記録／再生を実施できる。本実施形態の特徴は、動画ファイルの連続データ領域のデータサイズが実施の形態１や５の場合と比べて小さくて済むことである。そのかわり、動画ファイルと裏音声ファイルを記録した後で、編集のため動画ファイルの途中部分を削除する場合、ポスレコーディング再生時に映像がフリーズしやすくなる。または、音声データが欠落する。
【０１３７】
なお、各実施の形態において、記憶媒体は相変化光ディスクであるものとしたが、特にこれに限定するものではなく、例えばＤＶＤ−ＲＡＭ、ＭＯ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、ＣＤ−Ｒ、ＣＤ−ＲＷ等の光ディスクやハードディスク等のディスク形状を有する記録媒体であれば何でも良い。また、フラッシュメモリ等の半導体メモリであっても良い。
【０１３８】
同様に、各実施の形態において、読み書きヘッドはピックアップとしているが、ＭＯの場合はピックアップ及び磁気ヘッドとなり、またハードディスクの場合は磁気ヘッドとなる。
【０１３９】
また、各実施の形態において、トランスポートストリームは、ＭＰＥＧを用いたデジタル放送規格に準拠した形式で合っても良い。例えば、日本のＢＳデジタル放送規格に準拠したトランスポートストリーム、米国のＡＴＳＣ規格に準拠したトランスポートストリーム、および欧州のＤＶＢ規格に準拠したトランスポートストリームであっても良い。
【０１４０】
また、各実施の形態において、動画ファイルおよび音声ファイルはトランスポートストリームからなるものとしてが、プログラムストリームやＰＥＳストリーム等の他のマルチメディア情報を含むビットストリームであっても良い。
【０１４１】
また、各実施の形態において、ポストレコーディング再生時に、音声ファイルのみを読み込むものとしたが、音声ファイルの他に静止画ファイルも読み込むようにしても良い。このとき、音声ファイルと静止画ファイルをできるだけ集合させて記録し、シーク動作直後に、毎回音声ファイルの一部分および必要な静止画ファイルの一部分をまとめて読み出せるように物理的に交互に記録すると良い。
【０１４２】
また、各実施の形態において、論理ブロックは３２ｋｂｙｔｅ、セクタは２ｋｂｙｔｅとしたが、論理ブロックサイズがセクタサイズの整数倍であれば、例えば、論理ブロックが１６ｋｂｙｔｅ、セクタは２ｋｂｙｔｅであっても良い。また、論理ブロック、セクタが共に２ｋｂｙｔｅであっても良い。
【０１４３】
また、各実施の形態において、映像圧縮符号および音声圧縮符号はそれぞれＭＰＥＧ２映像圧縮符号およびＡＡＣ圧縮符号であるものとしたが、ＭＰＥＧ１映像圧縮符号またはＭＰＥＧ４映像圧縮符号等や、ＭＰＥＧ−Ａｕｄｉｏ圧縮符号、Ｄｏｌｂｙ ＡＣ３圧縮符号、またはＴｗｉｎ−ＶＱ圧縮符号等であっても良い。
【０１４４】
また、各実施の形態において、動画ファイルと裏音声ファイルは同一の光ディスク上に記録するものとしたが、異なった記録媒体上に記録しても良い。例えば、動画ファイルを光ディスク上に、裏音声ファイルをフラッシュメモリカード上に記録し、合成ファイルを光ディスク上に記録する様にしても良い。この場合、ピックアップの移動機会が減るので、ポストレコーディング記録やポストレコーディング再生の実現が著しく容易になる。
【０１４５】
また、各実施の形態において、ファイルはＵＤＦファイルシステムで管理したが、ＦＡＴ（ファイル・アロケーション・テーブル）やその他の独自ファイルシステムで管理されても良い。
【０１４６】
また、各実施の形態において、動画ファイルと裏音声ファイルの他に動画ファイルと裏音声ファイルを関連付けるファイルとして第３のファイルを記録しても良い。この第３のファイルは、Ｗ３Ｃで規格化進展中のＳＭＩＬ（ＳｙｎｃｈｒｏｎｉｚｅｄＭｕｌｔｉｍｅｄｉａ Ｉｎｔｅｇｒａｔｉｏｎ Ｌａｎｇｕａｇｅ）言語で、動画ファイルと裏音声ファイルの同時再生（並列再生）タイミングを記述しても良い。これにより、動画ファイルと裏音声ファイルの関係を再生タイミング等の観点でに明確に記述できる。例えば、映像ファイルの先頭からの経過時間および音声ファイルの先頭からの経過時間を指定することにより、同時再生の開始個所を指定することができる。また、ＳＭＩＬ言語を使用することにより、動画ファイル、裏音声ファイル、および第３のファイルをパソコンへ移動した場合でも、パソコン上のアプリケーションソフトのＳＭＩＬプレーヤー等で再生可能になる。
【０１４７】
また、各実施の形態において、動画ファイルの一部分に対してポストレコーディング記録を行って裏音声ファイルを記録する場合、ポストレコーディング記録開始タイミングの時間情報を裏音声ファイル、前記の第３のファイル内、もしくは別の第４のファイルに記録しておく必要がある。
【０１４８】
また、各実施の形態において、裏音声ファイルには動画に対する裏音声を記録するものとしたが、動画とはタイミングが直接的には無関係な音楽（ＢＧＭ等）を記録し、ポストレコーディング再生と同じ方法で再生しても良い。
【０１４９】
また、各実施の形態において、ピックアップの最大移動時間は、読み込み時と書き込み時とで同じであるものとしたが、異なっていても良い。ただし、この場合、ピックアップの最大移動時間として適切な方もしくは大きい方を選択して、連続データ領域のデータサイズ（式６、式７）や、映像更新時間（式９）を求める必要がある。
【０１５０】
【発明の効果】
以上説明したように、本発明によれば、光ディスク上でポストレコーディング機能を容易に実現できると同時に、音声ファイルの結合や分割等の編集を容易に実現できる音声／映像情報記録再生装置を提供することが可能になる。
【図面の簡単な説明】
【図１】本発明の実施の形態１に係る音声／映像情報記録再生装置の機能構成を示すブロック図
【図２】本発明の実施の形態１に係る音声／映像情報記録再生装置のポストレコーディングモード記録の際に関係するブロック図
【図３】本発明の実施の形態１に係る音声／映像情報記録再生装置のポストレコーディング記録の際に関係するブロック図
【図４】本発明の実施の形態１に係る音声／映像情報記録再生装置のポストレコーディング再生の際に関係するブロック図
【図５】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディングモード記録時の動画ファイルの記録形態を示す図
【図６】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング記録時の裏音声ファイルの記録形態を示す図
【図７】本発明の実施の形態１に係る音声／映像情報記録再生装置のポストレコーディング記録時の動作モデルを示す図
【図８】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング記録時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図９】本発明の実施の形態１に係る音声／映像情報記録再生装置のポストレコーディング再生時の動作モデルを示す図
【図１０】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図１１】本発明の実施の形態２に係る音声／映像情報記録再生装置の機能構成を示すブロック図
【図１２】本発明の実施の形態２に係る音声／映像情報記録再生装置のポストレコーディング記録の際に関係するブロックを示す図
【図１３】本発明の実施の形態２に係る音声／映像情報記録再生装置のポストレコーディング再生の際に関係するブロックを示す図
【図１４】本発明の実施の形態３に係る音声／映像情報記録再生装置の機能構成を示すブロック図
【図１５】本発明の実施の形態３に係る音声／映像情報記録再生装置のポストレコーディング再生の際に関係するブロックを示す図
【図１６】従来の音声／映像情報記録再生装置の機能構成を示すブロック図
【図１７】従来の音声／映像情報記録再生装置におけるポストレコーディングモード記録時の動画ファイルの記録形態を示す図
【図１８】従来の音声／映像情報記録再生装置におけるポストレコーディングモード記録時の動画ファイルのトランスポートストリームの構造図
【図１９】動画ファイルがＵＤＦファイルシステムによって管理されている状態を示す図
【図２０】ＵＤＦファイルシステムのアロケーション・ディスクリプタのデータ構造を示す図
【図２１】従来の音声／映像情報記録再生装置におけるファイル再生時の動作モデルを示す図
【図２２】従来の音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図２３】本発明の実施の形態４に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図２４】本発明の実施の形態１に係る、動画用連続データ領域が長めに確保された場合の音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図２５】本発明の実施の形態１に係る音声／映像情報記録再生装置における裏音声ファイルのトランスポートストリームの変形例を示すデータ構造図
【図２６】本発明の実施の形態１に係る音声／映像情報記録再生装置における映像ファイルおよび裏音声ファイルの連続データ領域相互間の関係を示す図
【図２７】本発明の実施の形態５におけるアフレコ再生時のピックアップの移動経路を示す図
【図２８】本発明の実施の形態５における裏音声ファイルのデータ構造を示す図
【図２９】本発明の実施の形態５に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図３０】ひとつの連続データ領域の読み出しデータサイズの例を示す図
【図３１】本発明の実施の形態１に係る音声／映像情報記録再生装置における映像ファイルおよび裏音声ファイルの連続データ領域内での物理配置を示す図
【図３２】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の遷移を示す図
【図３３】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の別のデータ読み込みタイミングを示す図
【図３４】本発明の実施の形態５に係る音声／映像情報記録再生装置におけるポストレコーディング再生時のデータ読み込みタイミングを示す図
【図３５】本発明の実施の形態６に係る音声／映像情報記録再生装置におけるポストレコーディング再生時のデータ読み込みタイミングを示す図
【図３６】本発明の実施の形態５に係る音声／映像情報記録再生装置におけるポストレコーディング再生可能な連続データ領域のデータサイズを示す図
【図３７】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング再生可能な連続データ領域のデータサイズを示す図
【図３８】本発明の実施の形態１に係る音声／映像情報記録再生装置におけるポストレコーディング再生時の動画バッファメモリおよび音声バッファメモリ内の符号量の別の遷移を示す図
【図３９】本発明の実施の形態５に係る音声／映像情報記録再生装置におけるポストレコーディング再生時のひとつの連続データ領域の読み出しデータサイズの例を示す図
【図４０】本発明の実施の形態５の変形例におけるポストレコーディング再生時に参照することができるスケジューリング情報を示す図
【符号の説明】
１００ 映像信号入力部
１０１ 映像圧縮部
１０２ 音声信号入力部
１０３ 音声圧縮部
１０４ トランスポートストリーム組立部
１０５ ポストレコーディング用ダミーパケット発生部
１１０ 映像表示部
１１１ 映像伸長部
１１２ 音声出力部
１１３ 第１音声伸長部
１１４ 第２音声伸長部
１６５ 第１トランスポートストリーム分解部
１６６ 第２トランスポートストリーム分解部
１２０ 記録部
１２１ 再生部
１３０ ピックアップ
１３１ 相変化光ディスク
１４０ 再生制御部
１４１ 論理ブロック監理部
１６０ 連続データ領域検出部
１６１ 記録制御部
１６２ ポストレコーディング用記録制御部
１６３ ポストレコーディング用再生制御部
１６４ バッファメモリ
１８０ ポストレコーディングＭＩＸ制御部[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to an audio / video information recording / reproducing apparatus and method for compressing a video signal and an audio signal and recording the compressed signal on a recording medium such as an optical disk.
[0002]
[Prior art]
As a method of compressing a video at a low bit rate, there is a system stream defined by the MPEG2 standard (ISO / IEC 13818-1). As the system stream, three types of a program stream, a transport stream, and a PES stream are defined.
[0003]
On the other hand, as recording media replacing magnetic tapes, optical disks such as phase-change optical disks (for example, DVD-RAM and MVDISC) and magneto-optical disks (MO) have been receiving attention. For example, as a standard for recording a video on a DVD-RAM, there is a VIDEO RECORDING standard (DVD Specifications for Rewritable / Re-recordable Discs Part 3 VIDEO RECORDING Version 1.0 Sep. 99). This standard is for recording and reproducing a video file composed of a program stream of the MPEG2 standard on a DVD-RAM disk. In the following description, a video file composed of an MPEG2 transport stream is recorded and reproduced on a phase-change optical disc (hereinafter, simply referred to as an “optical disc” unless there is confusion), and the VIDEO RECORDING standard is adopted. The conventional technical contents will be described in a form including the technical contents of the above. In addition, video is compressed according to MPEG2 according to ISO / IEC 13818-1, and when audio is compressed, MPEG2-AAC (Advanced Audio Recording) according to ISO / IEC 13818-7 is compressed.
[0004]
FIG. 16 shows a configuration diagram of a conventional audio / video information recording / reproducing apparatus using a phase change optical disk. When recording a video signal and an audio signal, the signals input from the video signal input unit 100 and the audio signal input unit 102 are compressed by the video compression unit 101 and the audio compression unit 103, respectively. The transport stream is created by mixing the dummy packet generated by the recording dummy packet generator 105 with the compression result, and the transport stream is written to the phase-change optical disk 131 via the buffer memory 154, the recording unit 120, and the pickup.
[0005]
At the time of reproducing the video signal and the audio signal, the transport stream extracted via the pickup 130, the reproducing unit 121 and the buffer memory 154 is separated into a video signal and an audio signal by the transport stream decomposing unit 115, and the video decompressing unit is used. The signal is output to the video display unit 110 and the audio output unit 112 via the first audio expansion unit 113 and the first audio expansion unit 113. The second audio decompression unit 114 is used for reproducing the back audio when the back audio (described later) is recorded in the transport stream.
[0006]
When recording a video signal and an audio signal, the recording control unit 151 controls the recording unit 120, the continuous data area detection unit 150, and the logical block management unit 141, and performs recording. At this time, the continuous data area detection unit 150 checks the use status of the sector managed by the logical block management unit 141 according to the instruction of the recording control unit 151, and detects a physically continuous free area.
[0007]
When reproducing the video signal and the audio signal, the reproduction control unit 140 controls the reproduction unit 121 and the recording unit 120 to perform the reproduction. The post-recording recording control unit 152 and the post-recording reproduction control unit 153 are activated at the time of post-recording described later.
[0008]
Hereinafter, “recording of video signal and audio signal” is referred to as “recording of moving image signal”. Similarly, "recording of video and audio" will be referred to as "moving image recording".
[0009]
FIG. 17 shows a recording format when video is recorded on the phase change optical disk 131 in real time. The phase change optical disk 131 is composed of 2 kbyte sectors, and treats 16 sectors as one logical block (32 kbyte), adds an error correction code to each logical block, and records the logical block on the phase change optical disk 131. Furthermore, a logical block that is physically continuous for a specific time (for example, 0.86 seconds as described later) or longer in terms of the maximum recording / reproducing rate is secured as one continuous data area, and 0.4 to Video object units (Video Object Units: hereinafter, referred to as “VOBUs”) composed of an MPEG transport stream having a reproduction time (display time) of one second are sequentially recorded. Note that one VOBU basically includes compressed video and audio data that can be decoded independently. That is, it is assumed that the compressed video and audio data is completed within one VOBU.
[0010]
One VOBU is composed of transport packets, which are lower layers of the MPEG transport stream in units of 188 bytes. The transport packet is composed of three types: a video transport packet (V_TSP) storing video compressed data, an audio transport packet (A_TSP) storing audio compressed data, and a dummy audio transport packet (D_TSP). Is done. In addition, one VOBU includes all V_TSP, A_TSP, and D_TSP at the corresponding time. Further, the data size of one VOBU fluctuates in a range equal to or lower than the maximum recording / reproducing rate if the video has a variable bit rate. On the other hand, if the video is at a fixed bit rate, the data size of the VOBU is almost constant.
[0011]
FIG. 18 is a diagram illustrating details of V_TSP, A_TSP, and D_TSP. V_TSP is composed of a transport packet header and video data, A_TSP is composed of a transport packet header and audio data, and D_TSP is composed of a transport packet header and dummy data for back audio. Differences between V_TSP, A_TSP, and D_TSP are identified by a PID (Packet ID) in the transport packet header. For example, as shown in the figure, V_TSP is identified by assigning PID = "0x0020", A_TSP is assigned PID = "0x0021", and D_TSP is assigned PID = "0x0022".
[0012]
The continuous data area detection unit 150 of the audio / video information recording / reproducing apparatus shown in FIG. 16 re-detects the next continuous data area when the remaining of one continuous data area decreases. When one continuous data area becomes full, writing is performed on the next continuous data area.
[0013]
FIG. 19 shows a state in which the recorded content on the optical disc is managed by a UDF (Universal Disk Format) file system. Here, a case is shown in which one MPEG transport stream is recorded as a file “MOVIE.MPG” by one operation of turning on and off the recording start button. For the file, the file name and the position of the file entry are managed by FID (File Identifier Descriptor). Further, one file and three continuous data areas a, b, and c constituting the file are managed by using an allocation descriptor (Allocation Descriptor) in the file entry. The following describes how the continuous data area is divided into three. As shown in FIG. 20, the structure of each allocation descriptor includes an extent length (Extent Length) and an extent position (Extent Position).
[0014]
When finding a defective logical block during recording in the continuous data area a, the recording control unit 151 skips the defective logical block and continues writing from the beginning of the continuous data area b. Further, when the recording control unit 151 is likely to collide with the recording area of the PC file during recording in the continuous data area b, it continues writing from the beginning of the continuous data area c. As a result, the file “MOVIE.MPG” is composed of three continuous data areas a, b, and c.
[0015]
FIG. 21 shows an outline of the operation at the time of reproducing a file. At the time of reproduction, the reproduction control unit 140 simultaneously performs an operation of reading data from the optical disk 131 into the buffer memory 154 and an operation of reproducing data by moving data from the buffer memory 154 to the transport stream decomposing unit 115. At this time, the data reading speed Vr is set to be higher than the data reproducing speed Vo, and control is performed so that data to be reproduced does not exist in the buffer memory 154 (underflow). . Therefore, if continuous data reading and continuous data reproduction are continued, extra data to be reproduced can be secured by the speed difference between the data reproduction speed Vo and the data read speed Vr. By using such extra data as reproduction data while data reading is interrupted by the jump of the pickup 130, continuous reproduction can be realized.
[0016]
Specifically, when the data read speed Vr is 24 Mbps, the data reproduction speed Vo is 10 Mbps, and the maximum movement time of the pickup 130 is 0.5 seconds, extra reproduction data of 5 Mbits is required during the movement of the pickup. In order to secure such extra reproduction data, continuous reading for 0.36 seconds is required. That is, it is necessary to continuously read 5 Mbits for the time obtained by dividing the difference between the data read speed of 24 Mbps and the data reproduction speed of 10 Mbps.
[0017]
Here, during the continuous reading for 0.36 seconds, the reproduction data for 8.6 Mbits, that is, 0.86 seconds in terms of the reproduction speed of 10 Mbps is read. Therefore, by recording a moving image of a maximum of 10 Mbps while securing a continuous data area for 0.86 seconds or more, continuous data reproduction can be guaranteed.
[0018]
The maximum moving time of the pickup 130 indicates the moving time between the innermost circumference and the outermost circumference of the disk. This time also includes a rotation waiting time.
[0019]
Note that there may be several defective logical blocks in the middle of the continuous data area. In this case, however, it is necessary to secure a continuous data area slightly larger than 0.86 seconds in anticipation of the read time required to read the defective logical block during reproduction.
[0020]
One of the functions normally provided in consumer movies is post-recording. Post-recording is a function of dubbing once recorded audio (hereinafter referred to as front audio) to newly recorded audio (hereinafter referred to as back audio).
[0021]
Post-recording generally consists of the following three steps. As a first step, first, a video is recorded in a recording mode capable of post-recording (hereinafter, referred to as “post-recording mode recording”). As a second step, while watching the recorded video, a back audio synchronized with the video is recorded (hereinafter, referred to as “post-recording recording”). As a third step, the video and the back audio of the second step are reproduced in synchronization (hereinafter, referred to as “post-recording reproduction”). Dubbing is realized by these steps.
[0022]
Here, in the first step, the post-recording recording control unit 152 records an MPEG transport stream including V_TSP, A_TSP, and D_TSP (for example, see Patent Document 1). In the second step, the post-recording recording control unit 152 replaces the D_TSP with the A_TSP for the back audio and records it on the optical disc 131. In the third step, the post-recording reproduction control unit 153 controls the A_TSP for front audio, the A_TSP for back audio, and the V_TSP to pass to the transport stream decomposing unit 115 to realize dubbing.
[0023]
In the following, a file including video and audio to be recorded during post-recording mode recording is referred to as a moving image file.
[0024]
If there is no need for post-recording, a moving image file composed of A_TSP and V_TSP is recorded without including D_TSP.
[0025]
When the playback control unit 140 plays back the moving image file recorded in the post-recording mode, the playback control unit 140 does not pass the D_TSP to the transport stream decomposition unit 115 but passes the A_TSP and the V_TSP.
[0026]
[Patent Document 1]
International Publication No. 01/04893 pamphlet (FIG. 11)
[0027]
[Problems to be solved by the invention]
When recording the back audio while watching the video at the time of post-recording recording, it is necessary to re-record the video including the back audio simultaneously with the video playback process. Specifically, the stream reproduced by the post-recording reproduction control unit 153 is stored in a buffer, and the D_TSP in the stream is replaced with the A_TSP for the back audio, and is written back to the disk again. That is, it is necessary to simultaneously perform continuous recording at the same rate as continuous playback at the video recording rate. In order to realize this simultaneous recording / reproducing process, it is necessary to realize a high transfer rate and a high seek time, and an expensive disk drive is required.
[0028]
In order to solve the above-mentioned problems, the present invention can easily realize a post-recording function on an optical disk even with an inexpensive disk drive having a relatively low seek time, and at the same time, edit audio files such as combining and dividing. It is an object of the present invention to provide an audio / video information recording / reproducing apparatus and method which can easily realize the above.
[0029]
[Means for Solving the Problems]
To achieve the above object, a first audio / video recording / reproducing apparatus according to the present invention records a video information on a recording medium as a video file, and records the audio information on the recording medium as an audio file. Audio having an audio recording unit, a video reproducing unit for continuously reproducing video information recorded on a recording medium in real time, and a post-recording recording unit for reproducing video information and simultaneously recording audio information related to the video information In the video information recording / reproducing apparatus, the video recording unit adds video information for a total time of three times the maximum movement time of the read / write head and a time for reading one continuous data area for audio. Video continuous data area detection that detects a video continuous data area consisting of a plurality of physically continuous recording units that can record video information for the time required for securing or more And a video recording control unit for instructing a recording unit number of a video continuous data area in which video information is to be recorded, wherein the audio recording unit is configured from a plurality of physically continuous recording units capable of recording audio information. And a voice data control unit that continuously records voice information on a plurality of voice continuous data areas, and a voice continuous data area detection unit that detects a voice continuous data area whose data size is within a predetermined range. The video recording unit records video information, and the post-recording recording unit alternates between playback of video information recorded in the video continuous data area and recording of audio information in the audio continuous data area. While simultaneously performing real-time continuous reproduction of video information and recording of audio information.
[0030]
In the first audio / video information recording / reproducing apparatus, it is preferable that the post-recording recording unit further records boundary information indicating a boundary of the continuous audio data area together with the audio information.
[0031]
In order to achieve the above object, a second audio / video recording / reproducing apparatus according to the present invention records a video information on a recording medium as a video file, and records the audio information on the recording medium as an audio file. An audio recording unit, a video reproducing unit for continuously reproducing video information recorded on a recording medium in real time, an audio reproducing unit for continuously reproducing audio information recorded on a recording medium in real time, and reproducing video information simultaneously. An audio / video information recording / reproducing apparatus having a post-recording reproducing section for reproducing audio information related to the video information, wherein the video recording section has a time three times as long as a maximum movement time of a read / write head; A plurality of physically continuous recordings that can record video information for a time longer than the time required to secure extra video information for the total time of reading the continuous data area for audio A video continuous data area detection unit that detects a video continuous data area consisting of multiple positions, and a video recording control unit that indicates the recording unit number of the video continuous data area where video information is to be recorded. A plurality of physically continuous recording units capable of recording voice information, and a voice continuous data area detection unit that detects a voice continuous data area such that the data size is within a predetermined range; An audio recording control unit that continuously records audio information on an audio continuous data area, a video recording unit records video information, an audio recording unit records audio information related to the video information, The recording / playback unit alternately reads out the video information recorded in the video continuous data area and the audio information recorded in the audio continuous data area, and simultaneously reproduces the video and audio simultaneously in real time. Characterized in that it.
[0032]
In the second audio / video information recording / reproducing apparatus, the audio recording unit further records boundary information indicating a boundary of the continuous audio data area together with the audio information, and the post-recording reproduction unit further stores the boundary information in the continuous audio data area. When reading the recorded audio information, it is preferable to refer to the boundary information.
[0033]
In order to achieve the above object, a first audio / video recording / reproducing method according to the present invention records video information as a video file on a recording medium and simultaneously reproduces the video information recorded on the recording medium in real time. And a method for recording and reproducing audio / video information as audio files on a recording medium, wherein the time is three times the maximum movement time of a read / write head and one continuous data area for audio is read. Detecting a video continuous data area consisting of a plurality of physically continuous recording units capable of recording video information for a time equal to or longer than the time required to secure extra video information for the total time A step of designating a recording unit number of a video continuous data area in which video information is to be recorded, and a plurality of physically continuous recording units capable of recording audio information, and Detecting a continuous data area for audio such that the size is within a predetermined range, and a step of continuously recording audio information on a plurality of continuous data areas for audio; Real-time continuous reproduction of video information and recording of audio information are simultaneously performed while alternately performing reproduction of video information and recording of audio information in the continuous audio data area.
[0034]
It is preferable that the first audio / video information recording / reproducing method further includes a step of recording boundary information indicating a boundary of the continuous audio data area together with the audio information.
[0035]
In order to achieve the above object, a second audio / video recording / reproducing method according to the present invention records video information as a video file on a recording medium, records audio information as an audio file on a recording medium, and records the audio information on a recording medium. An audio / video information recording / reproducing method for simultaneously and continuously reproducing recorded video information and audio information in real time, the time being three times the maximum moving time of a read / write head, and the time for reading one continuous data area for audio. A step of detecting a video continuous data area consisting of a plurality of physically continuous recording units capable of recording video information for a time equal to or longer than the time required to secure extra video information for the total time of Specifying a recording unit number of the video continuous data area in which video information is to be recorded, and a plurality of physically continuous recording units capable of recording audio information, Includes a step of detecting a continuous data area for audio such that a predetermined range is included, and a step of continuously recording audio information on a plurality of continuous data areas for audio, and is recorded in the continuous data area for video. Video and audio are simultaneously and continuously reproduced in real time while alternately reading out the video information and audio information recorded in the audio continuous data area.
[0036]
The second audio / video information recording / reproducing method further includes a step of recording boundary information indicating a boundary of the continuous audio data area together with the audio information, and a step of referring to the boundary information to record the audio recorded in the continuous audio data area. Reading out the information.
[0037]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0038]
(Embodiment 1)
FIG. 1 is a block diagram showing a configuration of an audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention. The difference between this embodiment and the conventional example (FIG. 16) is that a second transport stream decomposing unit 166 is provided, a continuous data area detecting unit 160, a recording control unit 161, a post-recording recording control unit 162, a post-recording In that the functions of the playback control unit 163 and the buffer memory 164 are different. The data reading speed of the reproducing unit 121, the maximum reproduction rate of the same image data input to the first transport stream decomposing unit 165, and the maximum movement time of the pickup 130 during the reading operation and the writing operation are the same as those in the conventional example. There is something.
[0039]
FIG. 2 shows blocks related to the post-recording mode recording in the functional blocks of FIG. 1, and FIG. 3 shows blocks related to the post-recording recording of the functional blocks of FIG. FIG. 4 is a diagram showing blocks related to post-recording reproduction in the functional blocks of FIG.
[0040]
FIG. 5 is a diagram showing a recording format of video and audio in the audio / video information recording device according to Embodiment 1 of the present invention. The difference from FIG. 17 showing the conventional example is only that the length of the continuous data area (2.6 seconds or more) is different. The other points (for example, the point where the VOBU is composed of V_TSP, A_TSP, and D_TSP) are the same.
[0041]
FIG. 6 is a diagram showing a recording form of a back audio file recorded at the time of post-recording recording in the first embodiment of the present invention. The back audio file is composed of A_TSP that encodes the back audio. Specifically, a transport stream is formed by adding a transport packet header to audio data that has been subjected to AAC (Advanced Audio Coding) compression encoding. Also, this transport stream is continuously recorded in a plurality of continuous data areas of a fixed length of 96 kbytes secured on the optical disc 131. Each 96 kbyte may be physically separated from each other. Although omitted in FIG. 6, PAT, PMT, and the like are essential packets for the transport stream and are included in the back audio file.
[0042]
FIG. 7 is a diagram showing an operation model at the time of post-recording recording according to Embodiment 1 of the present invention. The moving image data recorded on the optical disc 131 is taken into the moving image buffer memory via the pickup 130 at the speed Vr, and the moving image data is transferred to the transport stream decomposing unit 165 at the speed Vout. Video and audio are reproduced by the first audio decompression unit 113. On the other hand, the audio signal is converted into audio data by the audio compression unit 103, and is then taken into the audio buffer memory via the transport stream assembling unit 104 at the speed Ain. Further, the audio data is written to the optical disk 131 via the pickup 130 at the speed Aw. Reading of moving image data and writing of audio data are realized by alternately switching one pickup 130 in a time-division manner. Here, it is assumed that Vr> Vout and Aw> Ain.
[0043]
FIG. 8 is a diagram showing a transition of a code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording recording according to the first embodiment of the present invention. In FIG. 8, t seek Is the maximum travel time of the pickup 130, t Awrite Is the writing time of the back audio file, t V-CDA Indicates the read time of the moving image continuous data area. B A-th Is a threshold value at the start of a seek operation for writing audio data. The code amount in the audio buffer memory is B A-th In this case, the pickup 130 starts moving from the moving image data to the back audio data. In the first embodiment, B A-th Is assumed to be 96 kbytes.
[0044]
FIG. 9 is a diagram showing an operation model at the time of post-recording reproduction according to Embodiment 1 of the present invention. The moving image data recorded on the optical disk 131 is taken into the moving image buffer memory at the speed Vr via the pickup 130, and the moving image data is transferred to the transport stream decomposing unit 165 at the speed Vout, and further expanded. The video and audio are reproduced by the unit 111 and the first audio decompression unit 113. On the other hand, the back audio data recorded on the optical disk 131 is taken into the audio buffer memory at the speed Ar via the pickup 130, and the back audio data is further transmitted via the transport stream decomposing unit 166 at the speed Aout. The second audio decompression unit 114 reproduces it as a back audio. Here, it is assumed that Vr> Vout and Ar> Aout.
[0045]
FIG. 10 is a diagram showing a transition of the code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording reproduction according to Embodiment 1 of the present invention. B V Is the video buffer memory size, B A Indicates the audio buffer memory size.
[0046]
FIG. 37 is a conceptual diagram of a continuous data area. The minimum moving image continuous data area includes video data corresponding to the total time of the time required to read the audio continuous data area twice as large as the minimum and the maximum seek time for two times. On the other hand, the minimum audio continuous data area includes the time required to read twice the minimum video continuous data area and the audio data for the total of the two maximum seek times.
[0047]
At the time of post-recording mode recording, the functional blocks in FIG. 2 are used. The recording control unit 161 controls the recording unit 120, the continuous data area detection unit 160, and the logical block management unit 144, and performs post-recording mode recording. At this time, the recording control unit 161 causes the continuous data area detection unit 160 to detect a physically continuous free area.
[0048]
Specifically, by the recording start operation, the transport stream assembling section 104 divides the compressed video signal and the compressed audio signal into transport packets V_TSP and A_TSP each having a unit of 188 bytes, and further performs a post-recording dummy. The D_TSP generated by the packet generator 105 is added, the three types of transport packets are arranged in order so as to form one VOBU, and a transport stream is created. Then, the transport stream is transferred to the recording unit 120 via the buffer memory 164.
[0049]
The recording unit 120 starts recording the VOBU from the position of the logical block number specified by the recording control unit 161. At this time, in the recording unit 120, one VOBU is divided into units of 32 kbytes, and an error correction code is added in units of 32 kbytes and recorded on one logical block of the optical disk. When the recording of one VOBU is completed in the middle of one logical block, the recording of the next VOBU is continuously performed without leaving a gap.
[0050]
The continuous data area detection unit 160 searches for the use status of the logical block managed in the logical block management unit 144, and the unused logical block continues for 2.6 seconds in terms of the maximum recording / reproducing rate. The area is detected in advance. Then, the logical block number of the logical block area is notified to the recording unit 120 each time writing in the logical block unit is performed, and the logical block management unit 144 is notified that the logical block has been used.
[0051]
The logical block management unit 144 activates the playback unit 121 as needed, reads the space bitmap of the UDF file system recorded on the optical disk 131, and grasps the usage status of the logical block. In the present embodiment, the space bitmap is read at a time when the power is turned on, so that during the recording in the post-recording mode, the post-recording recording, and the post-recording reproduction, the reading of the space bitmap is treated as unnecessary processing.
[0052]
Next, when performing post-recording recording (recording of back audio), the functional block shown in FIG. 3 in the functional block of FIG. 1 is used. The post-recording recording control unit 162 reproduces video and audio by controlling the MPEG transport stream recorded on the optical disc 131 to pass through the pickup 130, the reproduction unit 121, and the transport stream decomposition unit 165. . At this time, the buffer memory 164 is divided into a moving image buffer memory and an audio buffer memory as shown in FIG. 7, and the buffer memory 164 is used for temporarily storing moving image and audio data recorded in advance. . At the same time, the post-recording recording control unit 162 compresses the audio of the audio signal input unit 102 into an AAC compression code via the audio compression unit 103, and further, via the transport stream assembling unit 104, and thereby converts the MPEG Convert to port stream.
[0053]
Then, the converted MPEG transport stream is further recorded as a back audio file on the phase change optical disk 131 via the buffer memory 164 (however, an audio buffer memory), the recording unit 120, and the pickup 130.
[0054]
As shown in FIG. 6, the back audio file is arranged in a physically continuous area of a fixed length (the fixed length and the data size are different from the moving image file). A plurality of the continuous data areas are secured, and the transport stream of the back audio is continuously arranged in the area. Each fixed length area may be physically separated.
[0055]
At time (1) in FIG. 8, the post-recording recording control unit 162 reproduces a video through the pickup 130, so that video data is stored in the video buffer memory at a speed of at least Vr-Vout or higher. . On the other hand, the transport stream of the back audio is stored in the audio buffer memory at a speed equal to or lower than Ain. When the storage amount of the audio buffer memory exceeds 96 kbytes, which is the data size of the audio continuous data area, the post-recording recording control unit 162 sets the pickup 130 to the back audio data for writing the back audio data. It is moved to an empty continuous data area (time (2)). During this movement, the reading of the moving image from the disk is interrupted, so that the data amount of the moving image buffer memory decreases at the speed of the maximum Vout. When the movement of the pickup 130 is completed, as shown in time (3), the code amount of the audio buffer memory decreases at the speed of Aw due to the writing of the back audio data. Next, when writing of one continuous data area of the back audio data is completed, the pickup 130 is returned to the reading interruption position of the moving image file (time (4)). Further, in the worst case, immediately after returning, if a discontinuous portion of the continuous data area of the moving image file is encountered, the pickup 130 is moved to the next continuous data area. (Time (5)). Then, when the reading of the moving image data in the next continuous data area is restarted, the moving image data is accumulated in the moving image buffer memory at a speed of at least Vr-Vout (time (6)). Thereafter, similarly, post-recording recording is realized while the pickup 130 is moved alternately.
[0056]
As described above, the moving image data for displaying the moving image for the minimum time of the continuous data area of the moving image file for the total time of the pickup movement time for three times and the writing time of the audio data is reliably stored in the moving image buffer memory. The size of the movie is such that it can be stored in the camera, so that the movie can be played continuously without interruption. At the same time, even when writing an audio file, data can be continuously recorded without data loss.
[0057]
In the case of post-recording reproduction, the functional blocks in FIG. 4 are used. The post-recording reproduction control unit 163 passes the moving image file recorded on the optical disk 131 via the pickup 130, the reproduction unit 121, the first transport stream decomposition unit 165, the video decompression unit 111, and the first audio decompression unit 113. As a result, it is reproduced as video and audio. At the same time, the post-recording reproduction control unit 163 transfers the back audio file recorded on the optical disc 131 through the pickup 130, the reproduction unit 121, the second transport stream decomposing unit 166, and the second audio decompression unit 114. , And play it as a back sound. At this time, as shown in FIG. 9, the buffer memory 164 is divided into a moving image buffer memory and an audio buffer memory, and the moving image buffer memory is used to store the data of the moving image file, and the data of the back audio file is stored. An audio buffer memory is used to do this.
[0058]
At time (1) in FIG. 10, the post-recording reproduction control unit 163 reads the back audio file for one continuous data area for audio (96 kbytes). As a result, the back audio data is stored in the audio buffer memory. Next, the movement of the pickup 130 from the back audio file to the moving image file is started (time (2)). When the pickup 130 arrives at the moving image file, reading and reproducing of moving image data starts from the beginning of the time (3). Therefore, data is stored in the moving image buffer memory at a speed of at least Vr-Vout. At the same time, reproduction of data in the audio buffer memory is started from the beginning of time (3). As a result, the amount of data in the audio buffer memory decreases at the maximum Aout speed. And this data amount is B A-th At this point, the pickup 130 on the moving image file starts moving to the audio file (time (4)). Because of this movement, the reading of the moving image data from the optical disk 131 is interrupted, so that the code amount of the moving image buffer memory decreases at the maximum Vout pace. When this movement is completed, data reading from the back audio file starts, as in time (5), so that audio data is stored in the audio buffer memory at a minimum Ar-Aout speed. Then, at time (6), the post-recording reproduction control unit 163 moves the pickup 130 from the back audio file to the moving image file. FIG. 10 shows an example in which, after the movement is completed, a discontinuous point (a boundary of a continuous data area) of the moving image file is encountered at time (7), and the movement of the pickup 130 occurs. When this movement is completed, the reading of the moving image data is started again as shown at time (8). Thereafter, similarly, post-recording reproduction is realized while the pickups 130 are alternately moved.
[0059]
The minimum read time length of the continuous data area for video during post-recording playback is t V-CDA , The reading time length of the continuous audio data area during post-recording playback is t A-CDA Then, in FIG.
(Vr-Vout) t V-CDA = Vout × (3t seek + T A-CDA ) (Equation 1)
(Ar-Aout) t A-CDA = Aout × t Aout ... (Equation 2)
t Aout = T V-CDA + 3t seek … (Equation 3)
From the relationship V-CDA And t A-CDA Are obtained as follows.
[0060]
t V-CDA = (Vout / Vr) × (3t seek + T A-CDA ) / (1- (Vout / Vr)) (Equation 4)
t A-CDA = ((Aout / Ar) × 3t seek ) / (1- (Aout / Ar)-(Vout / Vr)) (Equation 5)
In addition, the minimum data size S of the video continuous data area V-CDA , And the minimum data size S of the continuous data area for the back audio A-CDA Are obtained as follows.
[0061]
S V-CDA = Vr × t V-CDA … (Equation 6)
S A-CDA = Ar × t A-CDA … (Equation 7)
In the case of the present embodiment, t seek = 0.5 s, Vout = 10 Mbps, Vr = 24 Mbps, Aout = 288 kbps, and Ar = 24 Mbps, t V-CDA = 1.1s, S V-CDA = 3.3 Mbytes, t A-CDA = 0.03s, S A-CDA = 90 kbytes. Then, S A-CDA Is set to 96 kbytes so as to be an integral multiple of the logical block.
[0062]
As described above, for the continuous data area of the moving image file, the moving image data that can keep displaying the moving image for the total time (1.53 s) of the moving time of the pickup 130 and the reading time of the audio data is: The size of the motion is assuredly enough to be stored in the buffer memory (3.3 Mbytes), so that the video and the audio / audio can be continuously reproduced in real time without interruption. In addition, at the same time, even in the reproduction of the back audio file, continuous real-time reproduction can be performed without data loss.
[0063]
Another advantage is that a plurality of back audio files can be created for one video, and a combination of the video file and the back audio file can be selected to compare the video with a plurality of back audio.
[0064]
Although the data size of the continuous data area for the back audio file has a fixed length, the data size may be a variable length equal to or larger than the fixed value. However, in this case, it is necessary to increase the minimum data size of the continuous data area of the moving image file by a length that allows for the maximum movement time of one pickup 130. That is, the data size of the continuous data area of the moving image file may be set to a length that allows for the moving time of the pickup 130 and the reading time of the audio data for four times. However, in this case, the data amount of the back audio file read by the pickup at one time is assumed to be a fixed value.
[0065]
In the present embodiment, the data size of the continuous data area of the moving image file is equal to or larger than the predetermined size. However, the data size of the continuous data area at the beginning and end of the moving image file is not limited to this. This is because, for example, when deleting the head part of a moving image file, the data size of the remaining continuous data area may be smaller than a predetermined data size. Even when the data size of the predetermined continuous data area is short, the continuous reproduction of one moving image file is not affected by increasing the amount of data read before starting reproduction.
[0066]
Although FIG. 10 shows a case where the reading of the moving image file and the reading of the back audio file are completely synchronized, it is not necessary to completely synchronize them. If the continuous data area of the moving image file and the back audio file is secured longer than in the case of FIG. 10, the operation will be as shown in FIG. The difference from FIG. 10 is that the continuous data area of the moving image file and the back audio file is longer than that of FIG. 10, so that the section (3) is longer. In this case, the above (Equation 3) is replaced by the following (Equation 8).
[0067]
t Aout ≧ t V-CDA + 3t seek … (Equation 8)
Further, in this case, for example, by setting the data size of the continuous data area of the back audio file to be in the range of 96 kbytes to 192 kbytes, the editing of the back audio file becomes very easy (see FIG. 25, the back audio file). Indicates the data structure of the file). This means that, when editing such that specific portions of two back audio files are combined into one back audio file, for example, the total data size of two continuous data areas of the connection portion is 96 kbytes or less. In the case of the above, the continuous data area having a minimum of 96 kbytes or more and a maximum of 192 kbytes or less can be obtained by simply combining two continuous data areas or by combining three continuous data areas in which adjacent continuous data areas are added. It means that it can be created. As a result, the connection of the back audio file can be achieved very easily by rewriting the data only in the connection portion. If the fixed length is 96 kbytes, it is necessary to shift all data after the connection portion forward in the continuous data area. However, in this case, the amount of data read by the pickup at one time during post-recording recording and post-recording reproduction is one continuous data area. In addition, t in equation (1) A-CDA Needs to be replaced with the audio data reading time of 192 kbytes (that is, the upper limit value). FIG. 33 is a diagram showing a data reading order and a read data amount when performing post-recording reproduction. The read amount of moving image data at one time may be equal to or longer than the minimum continuous recording length for moving images. On the other hand, the amount of one read of the audio data may be equal to or more than the minimum continuous recording length for audio and less than twice the minimum continuous recording length. FIG. 32 shows the state at this time. 4 shows a timing chart when performing post-recording reproduction. T in FIG. A-CDA Is t in FIG. A-CDA The difference is that twice as much audio data is read as compared to.
[0068]
If the data reading unit of the back audio file is assumed to be 1 to 2 times the data size of the minimum continuous data area, for example, from 96 kbytes to 192 kbytes, (Expression 2) can be replaced by (Expression 9) below. , The data size of the minimum continuous data area is determined.
[0069]
(Ar-Aout) t A-CDA = 2Aout × t Aout … (Equation 9)
Also, from the relations of (Equation 1), (Equation 9) and (Equation 3),
t A-CDA = (2 (Aout / Ar) × 3t seek ) / ((1− (Vout / Vr) × (1+ (Aout / Ar))) (Equation 10)
Is derived. Here, since Vr = Ar, the above (Equation 10) becomes:
t A-CDA = (2 (Aout / Ar) × 3t seek ) / (1−Vout + Aout−Aout × Vout) (Equation 11)
Simplified.
[0070]
At this time, since the data size of the continuous data area of the back audio file fluctuates within a predetermined range, the audio file is converted to a UDF so that the post-recording / reproduction control unit can easily detect the boundary of the continuous data area for the back audio. May be configured using only the long allocation descriptor, and 1-bit information indicating the beginning of the back audio continuous data area may be added to the implementation use field. At this time, the reason why the short allocation descriptor is not used is that information indicating a boundary cannot be arranged because there is no implementation use field. As another method, information indicating whether or not the head of a continuous data area is provided for each allocation descriptor in an extended attribute (Extended Attributes) field of a file entry. Here, the case where a certain allocation descriptor is not the head of the continuous data area is a case where two allocation descriptors are used as a result of skipping a bad logical block.
[0071]
As another method, during post-recording recording, the data size of the continuous data area for back audio may be recorded in a dedicated file different from the back audio file. At this time, the data size of each continuous data area for back sound is recorded in, for example, a separate dedicated file for each back sound file. Then, at the time of post-recording reproduction, the data size is read at once by referring to the data size information of the continuous data area for the back audio that is separately recorded.
[0072]
In the first embodiment, the boundary of the continuous data area for the back audio and the boundary of each audio frame included in A_TSP are not particularly described, but they may be matched.
[0073]
Although the first embodiment considers one seek operation between continuous data areas on the moving image file side, the continuous data area on the back audio file side has a data size of a predetermined value or more, The continuous data area on the file side may have a data size within a predetermined range, and one seek operation between the continuous data areas on the back audio side may be considered.
[0074]
In the first embodiment, the data size of the continuous data area is calculated on the basis of the peak rates Vr and Ar. For example, when the actual bit rate of the moving image stream fluctuates below the peak rate, the data size of the continuous data area is changed. Even if the size does not satisfy the value of Expression (6), it is sufficient that the size includes moving image data having a reproduction time equal to the reproduction time at the peak rate. This is the same for the audio stream. For example, Vout = 10 Mbps, S V-CDA = 3.3 Mbps, and if the actual bit rate generated by the transport stream assembling unit 104 happens to be 5 Mbps or less, the data size of the continuous data area for video is 1.65 Mbps. It may be. This is because data for the same reproduction time is read.
[0075]
In the first embodiment, the case of post-recording recording and the case of post-recording reproduction are dealt with. However, when the moving image file recording and the moving image file recording at a low bit rate of, for example, 1 Mbps or less are performed simultaneously, The concept of the continuous data area length similar to that described above may be introduced. In this case, for example, it is assumed that an MPEG4 compressed moving image file of 160 × 120 pixels is recorded while an MPEG2 compressed moving image file of 740 × 480 pixels is recorded by a camcorder. However, in this case, a moving image file of 740 × 480 pixels is to be recorded, not reproduced.
[0076]
In the first embodiment, one video file and one back audio file are simultaneously recorded / reproduced and played back simultaneously. However, a plurality of back audio files are recorded while playing back one video file. Alternatively, a similar concept can be applied to a case where a plurality of back audio files are reproduced while a single moving image file is being reproduced. For example, when assuming N back audio files, the minimum value of the data size of the continuous recording area of the moving image file may be multiplied by N compared to the case of one back audio file. The maximum value and the minimum value of the continuous data area of the back audio file may also be multiplied by N.
[0077]
In the first embodiment, at the time of post-recording reproduction, the data in the audio buffer A-th In the following case, the pickup is moved to the back audio file, but one continuous data area of the back audio file may be read at a predetermined time period and schedule. Then, during the period in which the back audio file is not read, reading of the moving image file is appropriately performed as needed.
[0078]
In the first embodiment, at the time of post-recording reproduction, the data in the audio buffer A-th In the following, the pickup is moved to the back audio file side. However, the moving image file and the back audio file may be read at a predetermined time period and schedule.
[0079]
In the first embodiment, at the time of post-recording recording, the data in the audio buffer A-th In this case, the pickup is moved to the back audio file. However, the back audio file may be written to one continuous data area at a predetermined time period and schedule. Then, during the period in which the back audio file is not read, reading of the moving image file is appropriately performed as needed.
[0080]
In the first embodiment, at the time of post-recording recording, the data in the audio buffer A-th When the above is reached, the pickup is moved to the back audio file side, but writing to one continuous data area of the back audio file and reading data from the video file are performed at a predetermined time period and schedule. May be.
[0081]
In the first embodiment, the case where the data size of the continuous data area of the back audio file has a variable length equal to or larger than a predetermined value has been described. The rule may be the same as the rule of the continuous data area of the file. However, even in this case, the data size of the back audio file to be read at a time is read only for a fixed length.
[0082]
In the first embodiment, the case where the data size of the continuous data area of the back audio file has a variable length equal to or larger than a predetermined value has been described. However, in order to simplify the data size rule of the continuous data area, It may be completely continuous. However, in this case, after the recording of the back audio file is completed, it is necessary to move all data for continuity. Even in this case, the data size of the back audio file to be read at a time is read only for a fixed length.
[0083]
Although the physical arrangement between the moving image file and the back audio file is not particularly described in the first embodiment, at the time of recording in the post-recording mode, as shown in FIG. A video file may be recorded so that data can be alternately arranged. At the time of post-recording recording, the data of the back audio file is written in a previously secured area. As a result, the amount of seek generated during post-recording reproduction can be significantly reduced. This is because if the continuous data area for the back audio and the continuous data area for the moving image file shown in FIG. 26 are sequentially read, two seek operations, which are required every time the back audio data is read, become unnecessary.
[0084]
Further, as shown in FIG. 31, the physical arrangement of the continuous data area of the back audio file may be arranged immediately before the VOBU of the moving image file. At this time, the back audio data corresponding to the VOBU that is physically located immediately after is stored in one back audio continuous data area. This makes it easy to perform random access in VOBU units during post-recording reproduction. At this time, at the time of post-recording reproduction, the continuous readout amount of the moving image file required for seamlessly reading out the data can be reduced to 1/3 as compared with the case of the first embodiment. If post-recording recording of the back audio file in the continuous data area cannot be performed in real time due to the transfer rate of the optical disk drive and the maximum seek time, the data for the back audio may be recorded offline. In this case, it is not possible to perform the speech blowing while checking the reproduction data, but this can be utilized when writing BGM (background music). In FIG. 31, the continuous data area of the back audio file is assumed to be composed of three ECC blocks. However, this is two (64 kbytes) for one second of audio data, Of spare ECC blocks (32 kbytes). In addition, a fourth ECC block may be added to record still image data to be superimposed on the moving image file.
[0085]
Further, the back audio data in FIG. 31 may include an audio frame having the same presentation time stamp as the back audio dummy data in the moving image data. This makes it easier to copy the audio data of the back audio file into the moving image file. Also, the internal data structure in the packet may have a data structure similar to the back audio data in the moving image file. The same applies to a case where a moving image file is recorded in a program stream format instead of a transport stream.
[0086]
(Embodiment 2)
Next, a second embodiment of the present invention will be described. The difference between the second embodiment and the first embodiment resides in that the encoding method of the back audio is different. In the first embodiment, the AAC compression code is used, whereas in the second embodiment, a linear PCM (Linear PCM or Pulse Code Modulation) code is used.
[0087]
FIG. 11 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to Embodiment 2 of the present invention. The difference between FIG. 1 and FIG. 11 is that an A / D conversion unit 174 and a second transport stream assembling unit 175 are included, and that a first transport stream assembling unit 173 is provided instead of the transport stream assembling unit 104 ( However, it is functionally the same), the point that a D / A converter 176 is provided instead of the second audio decompressor 114, and the functionally different post-recording recording controller 170 and post-recording reproduction controller 171. , And a buffer memory 172. The data reading speed of the reproducing unit 121, the maximum recording / reproducing rate of the transport stream decomposing units 165 and 166, and the maximum moving time of the pickup 130 during the reading operation and the writing operation are the same as those in the conventional example.
[0088]
FIG. 12 is a diagram showing blocks related to post-recording recording in FIG. 11, and FIG. 13 is a diagram showing blocks related to post-recording reproduction in FIG.
[0089]
As described above, since the linear PCM code is used as the encoding format of the back audio, the second audio decompression unit 114 having a large circuit scale can be replaced by the D / A conversion unit 176 having a small circuit scale during post-recording reproduction.
[0090]
However, since the reproduction speed of the back audio is higher than that in the case of AAC compression, it is necessary to adjust the length of the continuous data area based on (Equation 7).
[0091]
Although the data size of the continuous data area for the back audio file has a fixed length, it may have a variable length equal to or larger than the fixed size. However, in this case, it is necessary to increase the minimum data size of the continuous data area of the moving image file by a length that allows for the maximum movement time of one pickup 130.
[0092]
The data size of the continuous data area of the back audio file may be in a predetermined range (for example, 96 kbytes to 192 kbytes). The reason is that editing processing such as connection of back audio files becomes very easy.
[0093]
(Embodiment 3)
Next, a third embodiment of the present invention will be described. The difference between the third embodiment and the first embodiment is that, at the time of post-recording reproduction, the moving image file and the back audio file are not simultaneously reproduced, but the back audio file is preliminarily included in the moving image file as one transport stream. Mixing (MIX) is performed, and the front audio stream and the back audio stream are decoded in parallel during reproduction.
[0094]
FIG. 14 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to Embodiment 3 of the present invention. The difference between FIG. 1 and FIG. 14 resides in that only one transport stream decomposing unit 115 is provided and in that a post-recording MIX control unit 180 is provided. Further, the post-recording reproduction control unit 153 is different in that it has the same function as the conventional post-recording reproduction control unit 153. The data reading speed of the reproducing unit 121, the maximum recording / reproducing speed of the transport stream decomposing unit 115, and the maximum movement time of the pickup 130 during the reading operation and the writing operation are the same as those in the conventional example.
[0095]
FIG. 15 is a diagram showing blocks related to post-recording reproduction in FIG.
[0096]
At the time of video recording and post-recording recording, processing is performed in the same manner as in the first embodiment. After that, the A_TSP in the back audio file replaces the D_TSP in the moving image file, thereby rewriting the front audio stream and the back audio stream into a MIX transport stream.
[0097]
At the time of post-recording reproduction, the moving image file after MIX is passed through the reproduction unit 121, the buffer memory 164, and the transport stream decomposition unit 115 in FIG. Further, the front audio stream passes through the first audio decompression unit 113 and the audio output unit 112, and the back audio stream passes through the second audio decompression unit 114 and the audio output unit 112, so that both the audio and the video are output. Reproduce.
[0098]
As described above, by creating a moving image file composed of a transport stream in which front and back sounds are mixed, it is not necessary to manage two files, and only one file needs to be managed.
[0099]
Also, since the data structure of the moving image file and the back audio file is the same transport stream format, D_TSP in the moving image file and A_TSP in the back audio file can be exchanged, so that it is easy to create a MIXed moving image file. . In addition, since the data structure of the moving image file and the back audio file are the same transport stream format, the transport stream in which the D_TSP in the moving image file is replaced with the A_TSP in the back audio file is also output when outputting to the digital interface. Becomes easier. Further, by setting the data structure of the back audio file to an MPEG system stream format such as a transport stream, even if the audio compression code (for example, AAC code) is different, it can be handled as a unified audio file. Handling of the back audio file becomes easy.
[0100]
The data size of the continuous data area of the back audio file may be in a predetermined range (for example, 96 kbytes to 192 kbytes). The reason is that editing processing such as connection of back audio files becomes very easy.
[0101]
Although only the data size of the continuous data area for the back audio file has a fixed length, the data size of the continuous data area on the moving image file side may be another fixed value. However, in this case, it is necessary to reduce the minimum data size of the continuous data area of the moving image file by a length that allows for the maximum movement time of one pickup 130. That is, the data size of the continuous data area of the moving image file may be set to a length that allows for the moving time of the pickup 130 and the reading time of the audio data for two times. However, in this case, it is assumed that the data amount of the moving image file read by the pickup at the time of post-recording reproduction is one continuous data area. It is also assumed that the data amount of the back audio file read by the pickup during post-recording reproduction is equivalent to one continuous data area.
[0102]
At this time, the data size of the continuous data area of the back audio file does not have to be a fixed length, and may be a data size falling between the minimum value and the maximum value.
[0103]
(Embodiment 4)
Next, a fourth embodiment of the present invention will be described. The difference between the fourth embodiment and the first embodiment is that post-recording reproduction of a moving image file that does not include audio data but includes only a still image is handled. Then, an example will be described in which such still images are switched in a designated order at predetermined time intervals like a slide show, and simultaneously, the sound recorded in the sound file is reproduced. The configuration of the audio / video information recording / reproducing apparatus is the same as that of the first embodiment.
[0104]
FIG. 23 is a diagram showing transition of the code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 4 of the present invention. Hereinafter, description will be made with reference to FIG.
[0105]
The post-recording reproduction control unit 163 starts reading moving image data from the beginning of time (1). Therefore, data is stored in the moving image buffer memory at the speed of Vr. Next, at time (2), a seek operation is performed on the audio data. After the reading of one still image data is completed, the still image is displayed from time (3). At the same time, the reading of the data in the audio buffer memory and the reproduction of the read data are started. As a result, the data amount in the audio buffer memory increases at the maximum Ar-Aout speed. Then, at time (4), the pickup 130 moves from the audio data to the video data. During this time, the audio output is performed at the same time, so that the code amount in the audio buffer memory decreases at the Aout speed. When the movement of the pickup 130 is completed, the reading of the video data is restarted (time (5)). Then, if the data amount in the audio buffer memory is B A-th At this point, the pickup 130 on the moving image file starts moving again to the audio file (time (6)). By repeating the above, the display cycle t still During this period, the read still image data is transferred to the transport stream decomposing unit 165, and the video is reproduced by the video decompression unit 111. Also, the display cycle t still During this time, the read audio data is also reproduced by the first audio decompression unit 113.
[0106]
Here, the video update interval t, which is the display cycle, still l is the time to read one still image data, t Vread , The time to read the audio data recorded in the continuous data area of the fixed data size is t A-CDA , The maximum movement time of the pickup 130 is t seek Then, the following (Equation 12) may be satisfied.
[0107]
t still ≧ t Vread + T A-CDA + 2t seek ... (Equation 12)
As described above, it is possible to easily add sound to the slide show.
[0108]
In the fourth embodiment, the still image is included in the moving image file including the transport stream, but may be a JPEG file. In this case, it goes without saying that a JPEG decoding unit is required.
[0109]
In the fourth embodiment, the update interval of still images is assumed to be constant. However, if the above (Equation 12) is satisfied, it may be individually specified for each image. When the data sizes of the still images are individually different, the update interval may be specified for each image within a range that satisfies (Equation 9) according to the data size.
[0110]
Further, in the fourth embodiment, the case where the sound is reproduced while the still image is slid and displayed is described, but the same applies to the case where the sound is recorded. In this case, it goes without saying that the reading time and the writing time of the audio data may be replaced.
[0111]
The data size of the continuous data area of the back audio file may be in a predetermined range (for example, 96 kbytes to 192 kbytes). The reason is that editing processing such as connection of back audio files becomes very easy. However, in this case, t in (Equation 12) A-CDA It is necessary to replace with the reading time of the maximum value of the data size (192 kbytes).
[0112]
Further, in the fourth embodiment, it is assumed that no seek occurs at the time of reading the audio file once, but a plurality of seeks may be performed. However, in this case, the playback time of the still image needs to be extended by the seek time.
[0113]
(Embodiment 5)
The difference between the fifth embodiment and the first embodiment of the present invention will be described below.
[0114]
First, the minimum value of the moving image continuous data area is different. The minimum value is the data size of the continuous data area required to secure the moving image data for the maximum movement time of two pickups, and the moving image during reading the data size of twice the minimum value of the continuous data area of the back audio. This is the sum of the data size in the continuous data area required to secure data.
[0115]
Second, the minimum value of the back audio continuous data area is different. This minimum value is determined by the data size of the continuous data area required to secure the back audio data for the maximum movement time of the two pickups and the time required to read out the data twice as large as the minimum value of the video continuous data area. It is the sum of the data size on the continuous data area required to secure the moving image data to be reproduced.
[0116]
Third, the minimum value and the maximum value of the one-time reading amount of the moving image data are determined.
[0117]
Fourth, another minimum value and maximum value are also determined for one reading amount of the back audio data.
[0118]
FIG. 27 is a diagram showing the movement path of the pickup during post-recording reproduction according to the fifth embodiment. In FIG. 27, the moving image data or the back audio file is read in the order of the reading number (the number following #).
[0119]
FIG. 28 is a diagram showing a data structure of a back audio file according to the fifth embodiment. In FIG. 28, A_TSP forms a continuous data area. Also, a specific data range on the continuous data area is set as one reading range.
[0120]
FIG. 29 is a diagram showing a transition of the code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus in the fifth embodiment.
[0121]
FIG. 30 is a diagram illustrating an example of the read data size of one continuous data area. For example, there is shown a case where the data is read twice from the head with the minimum value, and then the data size 1.5 times the minimum value is read (FIG. 30A). The reason why the data size of the last one is long is that the reading is temporarily performed by the fixed reading amount (S V-CDA This is because, in the case of dividing into four times, the last fourth time becomes smaller than the minimum value. In order to secure a fixed read amount, it is necessary to read the head data of the next continuous data area # (m + 1) (FIG. 30B). At this time, since a seek operation occurs, the video is interrupted during post-recording reproduction.
[0122]
FIG. 34 is a diagram showing a data reading order and a read data amount at the time of performing post-recording reproduction. The one-time reading amount of the moving image data may be equal to or more than the minimum continuous recording length for the moving image and less than twice the minimum continuous recording length. Similarly, the amount of one reading of the audio data may be equal to or more than the minimum continuous recording length for audio and less than twice the minimum continuous recording length.
[0123]
FIG. 36 is a conceptual diagram of a continuous data area. The minimum moving image continuous data area includes video data corresponding to the total time of the time required to read the audio continuous data area twice as large as the minimum and the maximum seek time for two times. On the other hand, the minimum audio continuous data area includes the time required to read twice the minimum video continuous data area and the audio data for the total of the two maximum seek times.
[0124]
FIG. 40 is a diagram showing scheduling information that can be referred to at the time of post-recording reproduction.
[0125]
In FIG. 29, the minimum value (S V-CDA ) And the minimum value (S A-CDA )
(Vr-Vout) t V-CDA = 2Vout × (2t seek + T A-CDA ) ... (Equation 13)
(Ar-Aout) t A-CDA = 2Aout × t Aout … (Equation 14)
t Aout = T V-CDA + 2t seek … (Equation 15)
From the relation, t A-CDA Is represented by the following (Equation 16).
[0126]
t A-CDA = (4t seek × Aout (Vr + Vout)) / ((Vr−Vout) (Ar−Aout) −4Aout × Vout) (Equation 16)
Also,
S V-CDA = Vr × t V-CDA / 2 (Equation 17)
S A-CDA = Ar × t A-CDA / 2 (Equation 18)
It becomes. Here, the data size of the video continuous data area is S V-CDA It is assumed that the above values are arbitrary. The data size of the continuous data area for back audio is S A-CDA Any value above.
[0127]
At the time of post-recording reproduction, the back audio file and the moving image file are alternately read. At this time, the minimum value of the amount read at a time is at least S for the back audio file. A-CDA Minutes, up to twice this. If it is a movie file, at least S V-CDA Minutes, up to twice this.
[0128]
With the above configuration, the minimum value (S) of the data size of the continuous data area for realizing post-recording recording and post-recording reproduction. V-CDA ) Can be reduced to ／ in comparison with the first embodiment. Thus, for example, even when the order is determined by a playlist such as SMIL, the time interval from the IN point to the OUT point can be reduced.
[0129]
In the fifth embodiment, the data size of the continuous data area of the moving image file is equal to or larger than the predetermined size. However, the data size of the continuous data area at the beginning and end of the moving image file is not limited to this. This is because, for example, when deleting the head part of a moving image file, the data size of the remaining continuous data area may be smaller than a predetermined data size. Even when the data size of the predetermined continuous data area is short, the continuous reproduction of one moving image file is not affected by increasing the amount of data read before starting reproduction.
[0130]
Note that, in the fifth embodiment, an example of how to read data is shown in FIG. 30. However, while reading the audio data immediately before the audio data becomes insufficient, the code amount of the video buffer becomes full as soon as possible. May be better. However, even in this case, the same reading method as that of FIG. 30 is performed on the audio data.
[0131]
It is to be noted that the reading method as shown in FIG. 30 is not performed at the time of post-recording reproduction as in Embodiment 5, but as shown in FIG. The reading method may be used. With this method, a smaller amount of buffer memory is required for post-recording reproduction. Furthermore, a read data size that is as uniform as possible each time during post-recording and the address information of the leading data of the data size may be recorded on the disk. FIG. 40 shows an example of such scheduling information for post-recording reproduction recorded on the disc. This scheduling information includes the amount of continuous reading of the back audio data and the moving image data at one time. In the example of FIG. 40, the back audio data has a fixed data size S A-CDA Read out each time, the video data is S V-CDA 1.17 times the data is read. That is, the read data size is maintained when the moving image data and the back audio data are alternately read to realize seamless post-recording reproduction. In FIG. 40, the address of the reading start point of the moving image file or the back audio file is also recorded. This address records an offset value from the beginning of the file. Information on the scheduling of such data reading is recorded in association with each file (for example, playlist) instructing the contents of post-recording reproduction. As a result, the usage rate of the video buffer can be easily reduced. This increases the chances that the video buffer can be used for data storage for absorbing vibration, thus improving the earthquake resistance. Further, it is not necessary to calculate the read data amount every time during post-recording reproduction. Alternatively, there is no need to adjust the data read timing by monitoring the remaining amount of the video buffer or audio buffer every time during post-recording reproduction. The recording / reproducing apparatus may record such scheduling information after the back audio data by the post-recording recording is completed, or may generate the scheduling information during the recording.
[0132]
(Embodiment 6)
The sixth embodiment of the present invention differs from the first embodiment in that two seek operations are assumed.
[0133]
FIG. 35 shows the read order and read data size of moving image data and audio data. The read data amount of the audio data is always a predetermined value (the minimum length of the continuous data area).
[0134]
FIG. 38 shows the read timing of moving image data and audio data.
[0135]
The following (Equation 19) to (Equation 24) are relational expressions relating to the present embodiment.
[0136]
(Vr-Vout) t V-CDA = Vout × (2t seek + T A-CDA ) ... (Equation 19)
(Ar-Aout) t A-CDA = Aout × t Aout ... (Equation 20)
t Aout = T V-CDA + 2t seek ... (Equation 21)
S V-CDA = Vr × t V-CDA ... (Equation 22)
S A-CDA = Ar × t A-CDA … (Equation 23)
t A-CDA = (2t seek × Aout) / (Vr−Vout−Aout) (Expression 24)
With the above configuration, post-recording recording / reproduction can be performed. The feature of this embodiment is that the data size of the continuous data area of the moving image file can be smaller than that in the first and fifth embodiments. Instead, when the moving image file and the back audio file are recorded and then the middle part of the moving image file is deleted for editing, the image is likely to freeze at the time of post recording reproduction. Or, audio data is missing.
[0137]
In each of the embodiments, the storage medium is a phase-change optical disk. However, the present invention is not limited to this. For example, DVD-RAM, MO, DVD-R, DVD-RW, DVD + RW, CD-R And any recording medium having a disk shape such as an optical disk such as a CD-RW or a hard disk. Further, a semiconductor memory such as a flash memory may be used.
[0138]
Similarly, in each embodiment, the read / write head is a pickup, but in the case of an MO, it is a pickup and a magnetic head, and in the case of a hard disk, it is a magnetic head.
[0139]
In each embodiment, the transport stream may be in a format conforming to a digital broadcasting standard using MPEG. For example, a transport stream conforming to the Japanese BS digital broadcasting standard, a transport stream conforming to the US ATSC standard, and a transport stream conforming to the European DVB standard may be used.
[0140]
In each of the embodiments, the moving image file and the audio file are composed of a transport stream, but may be a bit stream including other multimedia information such as a program stream or a PES stream.
[0141]
Further, in each embodiment, only the audio file is read at the time of post-recording reproduction, but a still image file may be read in addition to the audio file. At this time, the audio file and the still image file may be collected and recorded as much as possible, and immediately after the seek operation, it may be preferable that the part of the audio file and the part of the necessary still image file be physically and alternately recorded so that they can be collectively read each time. .
[0142]
Further, in each embodiment, the logical block is 32 kbytes and the sector is 2 kbytes. However, if the logical block size is an integral multiple of the sector size, for example, the logical block may be 16 kbytes and the sector may be 2 kbytes. Further, both the logical block and the sector may be 2 kbytes.
[0143]
In each embodiment, the video compression code and the audio compression code are assumed to be the MPEG2 video compression code and the AAC compression code, respectively. However, the MPEG1 video compression code or the MPEG4 video compression code and the like, the MPEG-Audio compression code, It may be a Dolby AC3 compression code or a Twin-VQ compression code.
[0144]
Further, in each embodiment, the moving image file and the back audio file are recorded on the same optical disk, but may be recorded on different recording media. For example, a moving image file may be recorded on an optical disk, a back audio file may be recorded on a flash memory card, and a composite file may be recorded on an optical disk. In this case, the chance of moving the pickup is reduced, so that the realization of post-recording recording and post-recording reproduction becomes remarkably easy.
[0145]
Further, in each embodiment, the file is managed by the UDF file system, but may be managed by a FAT (File Allocation Table) or another unique file system.
[0146]
In each embodiment, a third file may be recorded as a file that associates a moving image file with a back audio file in addition to the moving image file and the back audio file. This third file may describe the simultaneous reproduction (parallel reproduction) timing of the moving image file and the back audio file in the SMIL (Synchronized Multimedia Integration Language) language that is being standardized in W3C. Thereby, the relationship between the moving image file and the back audio file can be clearly described from the viewpoint of the reproduction timing and the like. For example, by specifying the elapsed time from the beginning of the video file and the elapsed time from the beginning of the audio file, it is possible to specify the start point of simultaneous reproduction. In addition, by using the SMIL language, even when the moving image file, the back audio file, and the third file are moved to the personal computer, the moving image file, the back audio file, and the third file can be reproduced by the SMIL player of the application software on the personal computer.
[0147]
Further, in each embodiment, when performing post-recording recording on a part of a moving image file to record a back audio file, the time information of the post-recording recording start timing is expressed as a back audio file, in the third file, Alternatively, it is necessary to record it in another fourth file.
[0148]
Further, in each embodiment, the back audio file is recorded with the back audio for the moving image, but music (BGM, etc.) whose timing is not directly related to the moving image is recorded, and the same as the post-recording reproduction. It may be reproduced by a method.
[0149]
Further, in each embodiment, the maximum movement time of the pickup is the same at the time of reading and at the time of writing, but may be different. However, in this case, it is necessary to select the appropriate one or the longer one as the maximum movement time of the pickup and obtain the data size (Equation 6, Equation 7) and the video update time (Equation 9) of the continuous data area.
[0150]
【The invention's effect】
As described above, according to the present invention, there is provided an audio / video information recording / reproducing apparatus capable of easily realizing a post-recording function on an optical disc and easily realizing editing such as coupling and division of audio files. It becomes possible.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention.
FIG. 2 is a block diagram related to post-recording mode recording of the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention;
FIG. 3 is a block diagram relating to post-recording recording of the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention;
FIG. 4 is a block diagram relating to post-recording reproduction of the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention;
FIG. 5 is a diagram showing a recording mode of a moving image file in a post-recording mode recording in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 6 is a diagram showing a recording form of a back audio file at the time of post-recording recording in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 7 is a diagram showing an operation model at the time of post-recording recording of the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention.
FIG. 8 is a diagram showing a transition of a code amount in a moving image buffer memory and an audio buffer memory at the time of post-recording recording in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 9 is a diagram showing an operation model at the time of post-recording reproduction of the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention.
FIG. 10 is a diagram showing a transition of a code amount in a moving image buffer memory and an audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 11 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to Embodiment 2 of the present invention.
FIG. 12 is a diagram showing blocks related to post-recording recording of the audio / video information recording / reproducing apparatus according to Embodiment 2 of the present invention.
FIG. 13 is a diagram showing blocks involved in post-recording reproduction of the audio / video information recording / reproducing apparatus according to Embodiment 2 of the present invention.
FIG. 14 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to Embodiment 3 of the present invention.
FIG. 15 is a diagram showing blocks related to post-recording reproduction of the audio / video information recording / reproducing apparatus according to Embodiment 3 of the present invention.
FIG. 16 is a block diagram showing a functional configuration of a conventional audio / video information recording / reproducing apparatus.
FIG. 17 is a diagram showing a recording format of a moving image file in post-recording mode recording in a conventional audio / video information recording / reproducing apparatus.
FIG. 18 is a structural diagram of a transport stream of a moving image file during post-recording mode recording in a conventional audio / video information recording / reproducing apparatus.
FIG. 19 is a diagram showing a state in which a moving image file is managed by a UDF file system.
FIG. 20 is a diagram showing a data structure of an allocation descriptor of the UDF file system.
FIG. 21 is a diagram showing an operation model at the time of file playback in a conventional audio / video information recording / playback apparatus.
FIG. 22 is a diagram showing a transition of a code amount in a moving image buffer memory and an audio buffer memory at the time of post-recording reproduction in a conventional audio / video information recording / reproducing apparatus.
FIG. 23 is a diagram showing a transition of a code amount in a moving image buffer memory and an audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 4 of the present invention.
FIG. 24 is a diagram illustrating a moving image buffer memory and a code in the audio buffer memory during post-recording reproduction in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention when a continuous data area for moving images is secured longer. Diagram showing amount transitions
FIG. 25 is a data structure diagram showing a modification of the transport stream of the back audio file in the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention.
FIG. 26 is a diagram showing a relationship between continuous data areas of a video file and a back audio file in the audio / video information recording and reproducing apparatus according to the first embodiment of the present invention.
FIG. 27 is a diagram showing a movement path of a pickup during post-recording reproduction according to the fifth embodiment of the present invention.
FIG. 28 is a diagram showing a data structure of a back audio file according to the fifth embodiment of the present invention.
FIG. 29 is a diagram showing a transition of a code amount in a moving image buffer memory and an audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 5 of the present invention.
FIG. 30 is a diagram showing an example of the read data size of one continuous data area.
FIG. 31 is a diagram showing a physical arrangement of a video file and a back audio file in a continuous data area in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 32 is a diagram showing a transition of a code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to the first embodiment of the present invention.
FIG. 33 is a diagram showing another data reading timing at the time of post-recording reproduction in the audio / video information recording / reproduction device according to the first embodiment of the present invention.
FIG. 34 is a diagram showing data reading timing at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 5 of the present invention.
FIG. 35 is a diagram showing data reading timing at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 6 of the present invention.
FIG. 36 is a diagram showing a data size of a continuous data area that can be post-recorded and reproduced in the audio / video information recording / reproducing apparatus according to Embodiment 5 of the present invention.
FIG. 37 is a diagram showing a data size of a continuous data area that can be post-recorded and reproduced in the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention;
FIG. 38 is a diagram showing another transition of the code amount in the moving image buffer memory and the audio buffer memory at the time of post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 1 of the present invention.
FIG. 39 is a diagram showing an example of a read data size of one continuous data area during post-recording reproduction in the audio / video information recording / reproducing apparatus according to Embodiment 5 of the present invention.
FIG. 40 is a diagram showing scheduling information that can be referred to at the time of post-recording reproduction in a modification of the fifth embodiment of the present invention.
[Explanation of symbols]
100 Video signal input section
101 Video compression unit
102 Audio signal input unit
103 audio compression unit
104 Transport Stream Assembly
105 Dummy packet generator for post recording
110 Image display
111 Video decompression unit
112 Audio output unit
113 1st audio decompression unit
114 Second audio decompression unit
165 first transport stream decomposition unit
166 Second Transport Stream Decomposition Unit
120 Recorder
121 playback unit
130 Pickup
131 Phase change optical disk
140 Playback control unit
141 Logical Block Management Unit
160 continuous data area detector
161 Recording control unit
162 Post-recording recording control unit
163 Playback control unit for post recording
164 buffer memory
180 post-recording MIX control unit

Claims (8)

映像情報を記録媒体に映像ファイルとして記録する映像記録部と、音声情報を前記記録媒体に音声ファイルとして記録する音声記録部と、前記記録媒体に記録された前記映像情報を実時間連続再生する映像再生部と、前記映像情報を再生し、同時に前記映像情報に関連した前記音声情報を記録するポストレコーディング用記録部とを有する音声／映像情報記録再生装置であって、
前記映像記録部は、
読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する映像用連続データ領域検出部と、
前記映像情報を記録すべき前記映像用連続データ領域の記録単位番号を指示する映像記録制御部とを含み、
前記音声記録部は、
音声情報の記録が可能な物理的に連続する複数の前記記録単位からなり、かつデータサイズが所定の範囲となるような前記音声用連続データ領域を検出する音声用連続データ領域検出部と、
複数の前記音声用連続データ領域上に前記音声情報を連続的に記録する音声記録制御部とを含み、
前記映像記録部が前記映像情報を記録し、
前記ポストレコーディング用記録部が、前記映像用連続データ領域に記録された前記映像情報の再生と前記音声用連続データ領域への前記音声情報の記録とを交互に実施しながら、前記映像情報の実時間連続再生と前記音声情報の記録とを同時に実施することを特徴とする音声／映像情報記録再生装置。A video recording unit that records video information as a video file on a recording medium, an audio recording unit that records audio information as a voice file on the recording medium, and a video that continuously reproduces the video information recorded on the recording medium in real time An audio / video information recording / reproducing apparatus having a reproducing unit and a post-recording recording unit that reproduces the video information and simultaneously records the audio information related to the video information,
The video recording unit,
The recording of the video information is performed for a time equal to or more than three times the maximum movement time of the read / write head and the time required to secure extra video information for the total time of reading one continuous data area for audio. A video continuous data area detection unit that detects a video continuous data area composed of a plurality of physically continuous recording units that can be physically connected,
Including a video recording control unit that indicates the recording unit number of the video continuous data area to record the video information,
The audio recording unit,
An audio continuous data area detection unit configured to detect the audio continuous data area such that the plurality of physically continuous recording units capable of recording audio information and the data size is within a predetermined range,
An audio recording control unit that continuously records the audio information on a plurality of the continuous data areas for audio,
The video recording unit records the video information,
The post-recording recording unit alternately performs the reproduction of the video information recorded in the video continuous data area and the recording of the audio information in the audio continuous data area, while realizing the video information. An audio / video information recording / reproducing apparatus, wherein time-continuous reproduction and recording of the audio information are performed simultaneously. 前記ポストレコーディング記録部はさらに、前記音声用連続データ領域の境界を示す境界情報を前記音声情報と共に記録することを特徴とする請求項１記載の音声／映像情報記録再生装置。2. The audio / video information recording / reproducing apparatus according to claim 1, wherein the post-recording recording unit further records boundary information indicating a boundary of the continuous audio data area together with the audio information. 映像情報を記録媒体に映像ファイルとして記録する映像記録部と、音声情報を前記記録媒体に音声ファイルとして記録する音声記録部と、前記記録媒体に記録された前記映像情報を実時間連続再生する映像再生部と、前記記録媒体に記録された前記音声情報を実時間連続再生する音声再生部と、前記映像情報を再生し、同時に前記映像情報に関連した前記音声情報を再生するポストレコーディング用再生部とを有する音声／映像情報記録再生装置であって、
前記映像記録部は、
読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する映像用連続データ領域検出部と、
前記映像情報を記録すべき前記映像用連続データ領域の記録単位番号を指示する映像記録制御部とを含み、
前記音声記録部は、
音声情報の記録が可能な物理的に連続する複数の前記記録単位からなり、かつデータサイズが所定の範囲となるような前記音声用連続データ領域を検出する音声用連続データ領域検出部と、
複数の前記音声用連続データ領域上に前記音声情報を連続的に記録する音声記録制御部とを含み、
前記映像記録部が前記映像情報を記録し、
前記音声記録部が前記映像情報に関連のある前記音声情報を記録し、
前記ポストレコーディング用再生部が、前記映像用連続データ領域に記録された前記映像情報と前記音声用連続データ領域に記録された前記音声情報を交互に読み出しながら、映像と音声とを同時に実時間連続再生することを特徴とする音声／映像情報記録再生装置。A video recording unit that records video information as a video file on a recording medium, an audio recording unit that records audio information as a voice file on the recording medium, and a video that continuously reproduces the video information recorded on the recording medium in real time A reproducing unit, an audio reproducing unit that reproduces the audio information recorded on the recording medium continuously in real time, and a reproducing unit for post recording that reproduces the video information and simultaneously reproduces the audio information related to the video information. An audio / video information recording / reproducing apparatus having:
The video recording unit,
The recording of the video information is performed for a time equal to or more than three times the maximum movement time of the read / write head and the time required to secure extra video information for the total time of reading one continuous data area for audio. A video continuous data area detection unit that detects a video continuous data area composed of a plurality of physically continuous recording units that can be physically connected,
Including a video recording control unit that indicates the recording unit number of the video continuous data area to record the video information,
The audio recording unit,
An audio continuous data area detection unit configured to detect the audio continuous data area such that the plurality of physically continuous recording units capable of recording audio information and the data size is within a predetermined range,
An audio recording control unit that continuously records the audio information on a plurality of the continuous data areas for audio,
The video recording unit records the video information,
The audio recording unit records the audio information related to the video information,
The post-recording reproduction unit alternately reads out the video information recorded in the video continuous data area and the audio information recorded in the audio continuous data area, and simultaneously performs video and audio continuously in real time. An audio / video information recording / reproducing device for reproducing. 前記音声記録部はさらに、前記音声用連続データ領域の境界を示す境界情報を前記音声情報と共に記録し、
前記ポストレコーディング用再生部はさらに、前記音声用連続データ領域に記録された前記音声情報を読み出す際に、前記境界情報を参照することを特徴とする請求項３記載の音声／映像情報記録再生装置。The audio recording unit further records boundary information indicating a boundary of the continuous data area for audio together with the audio information,
The audio / video information recording / reproducing apparatus according to claim 3, wherein the post-recording reproducing unit further refers to the boundary information when reading out the audio information recorded in the audio continuous data area. . 映像情報を記録媒体に映像ファイルとして記録し、前記記録媒体に記録された前記映像情報を実時間連続再生すると同時に、前記映像情報に関連した音声情報を前記記録媒体に音声ファイルとして記録する音声／映像情報記録再生方法であって、
読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する工程と、
前記映像情報を記録すべき前記映像用連続データ領域の記録単位番号を指示する工程と、
音声情報の記録が可能な物理的に連続する複数の記録単位からなり、かつデータサイズが所定の範囲となるような前記音声用連続データ領域を検出する工程と、
複数の前記音声用連続データ領域上に前記音声情報を連続的に記録する工程とを含み、
前記映像用連続データ領域に記録された前記映像情報の再生と前記音声用連続データ領域への前記音声情報の記録とを交互に実施しながら、前記映像情報の実時間連続再生と前記音声情報の記録とを同時に実施することを特徴とする音声／映像情報記録再生方法。The video information is recorded as a video file on a recording medium, and the video information recorded on the recording medium is continuously reproduced in real time, and at the same time, the audio / video information related to the video information is recorded as a voice file on the recording medium. A video information recording and reproducing method,
The recording of the video information is performed for a time equal to or more than three times the maximum movement time of the read / write head and the time required to secure extra video information for the total time of reading one continuous data area for audio. Detecting a continuous data area for video composed of a plurality of physically continuous recording units that can be physically contiguous;
Indicating the recording unit number of the video continuous data area to record the video information,
A step of detecting a continuous data area for audio, which is composed of a plurality of physically continuous recording units capable of recording audio information, and whose data size is within a predetermined range,
Continuously recording the audio information on a plurality of continuous data areas for audio,
While the reproduction of the video information recorded in the continuous data area for video and the recording of the audio information in the continuous data area for audio are alternately performed, the real-time continuous reproduction of the video information and the reproduction of the audio information are performed. A method for recording and reproducing audio / video information, wherein recording and reproduction are performed simultaneously. 前記音声／映像情報記録再生方法はさらに、
前記音声用連続データ領域の境界を示す境界情報を前記音声情報と共に記録する工程を含むことを特徴とする請求項５記載の音声／映像情報記録再生装置。The audio / video information recording / reproducing method further comprises:
6. The audio / video information recording / reproducing apparatus according to claim 5, further comprising a step of recording boundary information indicating a boundary of the continuous audio data area together with the audio information. 映像情報を記録媒体に映像ファイルとして記録し、音声情報を前記記録媒体に音声ファイルとして記録し、前記記録媒体に記録された前記映像情報と前記音声情報とを同時に実時間連続再生する音声／映像情報記録再生方法であって、
読み書きヘッドの最大移動時間の３倍の時間と、ひとつの音声用連続データ領域を読み込む時間との合計の時間分の映像情報を余分に確保するのに要する時間以上の間、映像情報の記録が可能な物理的に連続する複数の記録単位からなる映像用連続データ領域を検出する工程と、
前記映像情報を記録すべき前記映像用連続データ領域の記録単位番号を指示する工程と、
前記音声情報の記録が可能な物理的に連続する複数の前記記録単位からなり、かつデータサイズが所定の範囲となるような前記音声用連続データ領域を検出する工程と、
複数の前記音声用連続データ領域上に前記音声情報を連続的に記録する工程とを含み、
前記映像用連続データ領域に記録された前記映像情報と前記音声用連続データ領域に記録された前記音声情報を交互に読み出しながら、映像と音声とを同時に実時間連続再生することを特徴とする音声／映像情報記録再生方法。Audio / video for recording video information as a video file on a recording medium, recording audio information as an audio file on the recording medium, and simultaneously and continuously reproducing the video information and the audio information recorded on the recording medium in real time An information recording / reproducing method,
The recording of the video information is performed for a time equal to or more than three times the maximum movement time of the read / write head and the time required to secure extra video information for the total time of reading one continuous data area for audio. Detecting a continuous data area for video composed of a plurality of physically continuous recording units that can be physically contiguous;
Indicating the recording unit number of the video continuous data area to record the video information,
A step of detecting the audio continuous data area such that the recording of the audio information is composed of a plurality of physically continuous recording units, and the data size is within a predetermined range.
Continuously recording the audio information on a plurality of continuous data areas for audio,
Wherein the video and audio are simultaneously and continuously reproduced in real time while alternately reading out the video information recorded in the video continuous data area and the audio information recorded in the audio continuous data area. / Video information recording and playback method. 前記音声／映像情報記録再生方法はさらに、
前記音声用連続データ領域の境界を示す境界情報を前記音声情報と共に記録する工程と、
前記境界情報を参照して、前記音声用連続データ領域に記録された前記音声情報を読み出す工程とを含むことを特徴とする請求項７記載の音声／映像情報記録再生方法。The audio / video information recording / reproducing method further comprises:
A step of recording boundary information indicating the boundary of the audio continuous data area together with the audio information,
Reading out the audio information recorded in the audio continuous data area with reference to the boundary information.
JP2002324405A 2001-11-20 2002-11-07 Audio / video information recording / reproducing apparatus and method Expired - Fee Related JP4169577B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002324405A JP4169577B2 (en) 2001-11-20 2002-11-07 Audio / video information recording / reproducing apparatus and method

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2001354446 2001-11-20
JP2002274086 2002-09-19
JP2002291642 2002-10-03
JP2002304926 2002-10-18
JP2002324405A JP4169577B2 (en) 2001-11-20 2002-11-07 Audio / video information recording / reproducing apparatus and method

Publications (2)

Publication Number Publication Date
JP2004192661A true JP2004192661A (en) 2004-07-08
JP4169577B2 JP4169577B2 (en) 2008-10-22

Family

ID=32777280

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002324405A Expired - Fee Related JP4169577B2 (en) 2001-11-20 2002-11-07 Audio / video information recording / reproducing apparatus and method

Country Status (1)

Country Link
JP (1) JP4169577B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006025398A1 (en) * 2004-09-03 2006-03-09 Matsushita Electric Industrial Co., Ltd. Information recording device, information recording method, information recording program and recording medium
WO2009122743A1 (en) * 2008-04-04 2009-10-08 パナソニック株式会社 Access device, information recording device, information recording system, file management method, and program

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2006025398A1 (en) * 2004-09-03 2006-03-09 Matsushita Electric Industrial Co., Ltd. Information recording device, information recording method, information recording program and recording medium
US7917005B2 (en) 2004-09-03 2011-03-29 Panasonic Corporation Information recording device, information recording method, information recording program and recording medium
WO2009122743A1 (en) * 2008-04-04 2009-10-08 パナソニック株式会社 Access device, information recording device, information recording system, file management method, and program
US8019800B2 (en) 2008-04-04 2011-09-13 Panasonic Corporation Access device, information recording device, information recording system, file management method, and program

Also Published As

Publication number Publication date
JP4169577B2 (en) 2008-10-22

Similar Documents

Publication Publication Date Title
US8320748B2 (en) Audio/video information recording/reproducing device and method therefor
JP4299836B2 (en) Data processing device
US20050013583A1 (en) Audio/video information recording/reproducing apparatus and method, and recording medium in which information is recorded by using the audio/video information recording/reproducing apparatus and method
JP2001067802A (en) Apparatus and method for multi-channel recording
JPWO2005015907A1 (en) Data processing device
JPWO2004080071A1 (en) Data processing device
JPWO2005013274A1 (en) Data processing device
JP2003274367A (en) Reproducing device
KR100625406B1 (en) Data processing device
JP3986973B2 (en) AV data recording method, AV data recording apparatus, data recording medium, and program
JP4189304B2 (en) Data processing device
JP4169577B2 (en) Audio / video information recording / reproducing apparatus and method
KR100660399B1 (en) Audio/video information recording/reproducing apparatus and method, and recording medium in which information is recorded by using the audio/video information recording/reproducing apparatus and method
JP4312783B2 (en) AV data reproducing method, AV data reproducing apparatus, program, and recording medium
JP3727913B2 (en) Information recording apparatus and information recording method
JP2003174622A (en) Audio/video information recording and reproducing device and method, and recording medium with information recorded thereon by using the audio/video information recording and reproducing device and method
EP1331816B1 (en) Method for editing source video to fast motion on the recordable media
JP2004072790A (en) Av data recording apparatus and method, disk recorded with the same av data recording apparatus or method, and av data reproducing apparatus and method
JP2004364324A (en) Recording reproducer with chapter forming guide function
JP2005141819A (en) Information recording/reproducing device and method
JP2004072789A (en) Av data recording apparatus and method, disk recorded by the av data recording apparatus or method, av data reproducing apparatus and method
JP2004072791A (en) Av data recording apparatus and method, disk recorded with the same av data recording apparatus or method, and av data reproducing apparatus and method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051102

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20070823

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071029

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20080115

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080317

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080402

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080513

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080618

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080710

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080805

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110815

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120815

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130815

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

LAPS Cancellation because of no payment of annual fees