JP4211153B2 - 記録装置および方法 - Google Patents
記録装置および方法 Download PDFInfo
- Publication number
- JP4211153B2 JP4211153B2 JP26463199A JP26463199A JP4211153B2 JP 4211153 B2 JP4211153 B2 JP 4211153B2 JP 26463199 A JP26463199 A JP 26463199A JP 26463199 A JP26463199 A JP 26463199A JP 4211153 B2 JP4211153 B2 JP 4211153B2
- Authority
- JP
- Japan
- Prior art keywords
- data
- audio
- unit
- video
- recording
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 22
- 230000003287 optical effect Effects 0.000 claims description 47
- 230000006835 compression Effects 0.000 claims description 19
- 238000007906 compression Methods 0.000 claims description 19
- 230000001360 synchronised effect Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 10
- 238000013139 quantization Methods 0.000 description 6
- 102100037812 Medium-wave-sensitive opsin 1 Human genes 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 5
- 230000003044 adaptive effect Effects 0.000 description 4
- 230000002457 bidirectional effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000008707 rearrangement Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/10—Digital recording or reproducing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
- H04N9/8042—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B20/00—Signal processing not specific to the method of recording or reproducing; Circuits therefor
- G11B20/00007—Time or data compression or expansion
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
- G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
- G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
- G11B27/327—Table of contents
- G11B27/329—Table of contents on a disc [VTOC]
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/34—Indicating arrangements
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
- G11B2220/213—Read-only discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/21—Disc-shaped record carriers characterised in that the disc is of read-only, rewritable, or recordable type
- G11B2220/215—Recordable discs
- G11B2220/216—Rewritable discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2525—Magneto-optical [MO] discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B2220/00—Record carriers by type
- G11B2220/20—Disc-shaped record carriers
- G11B2220/25—Disc-shaped record carriers characterised in that the disc is based on a specific recording technology
- G11B2220/2537—Optical discs
- G11B2220/2545—CDs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/84—Television signal recording using optical recording
- H04N5/85—Television signal recording using optical recording on discs or drums
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、圧縮符号化例えばＭＰＥＧで符号化されたビデオ信号および／またはオーディオ信号を光ディスクに対して記録するのに好適な記録装置および方法に関する。
【０００２】
【従来の技術】
近年、マルチメディア対応のシステムソフトウェアとして、QuickTime が知られている。QuickTime は、時系列的に変化するデータ（Movie と称される）を扱うためのソフトウェアである。Movie には、動画、音声および文字データが含まれる。現在、Apple がQuickTime ファイルフォーマットとして、Macintosh プラットフォーム上でのみ対応しているＭＰＥＧ−１(Moving Picture Experts Group phase1) のプログラムストリーム（ビデオエレメンタリストリームとオーディオエレメンタリストリームを時間で多重化したデータ形式）ファイル格納形式がある。この格納形式では、ＭＰＥＧ−１ファイル全体、すなわち、１つの閉じたシーン全体をその時間の長さと無関係に、QuickTime ファイルフォーマットにおけるSampleに対応させ、且つその巨大なSampleを１つの巨大なChunk として扱っている。
【０００３】
また、オーディオとビデオの各データをまとめてQuickTime ファイルフォーマットにおける１つのTrack 、そして、１つのMedia に格納している。このデータを理解するための新たなMedia TypeとしてＭＰＥＧMedia を定義し、その中で巨大なSample、Chunk の中に含まれているビデオデータやオーディオデータの理解を行っている。
【０００４】
【発明が解決しようとする課題】
しかしながら、巨大なSample中の特定のデータに対するアクセス性が低下し、また、編集性が乏しい問題があった。例えばコンピュータにおいて、QuickTime による再生、編集を可能とするために、携帯形カメラ一体形記録再生装置における記録媒体例えば光ディスクへの映像音声データをQuickTime ファイルフォーマットに準拠して格納することが考えられる。この場合でも、特定のデータへのアクセス性が劣り、編集性が乏しい問題を解決する必要がある。ビデオデータに限らずオーディオデータの記録再生装置においても同様である。
【０００５】
したがって、この発明の目的は、QuickTime のようなマルチメディアデータフォーマットに準拠したファイル構造を持つように、データ構造が変換されたデータを記録媒体に記録する時に、アクセス性の低下を防止し、編集性を向上できる記録装置および方法を提供することにある。
【０００６】
【課題を解決するための手段】
請求項１の発明は、ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録装置において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化手段と、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力手段と、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、符号化手段からの符号化ビデオデータとオーディオ出力手段からのオーディオデータのデータ構造をそれぞれ変換し、ファイル構造を有する符号化ビデオデータとオーディオデータを多重化する手段と、
ファイル構造を有し、多重化されたデータを光ディスクに記録する手段とからなり、
ファイル構造は、第１のデータ単位と、複数の第１のデータ単位の集合としての第２のデータ単位とを有し、
多重化されたデータは、第２のデータ単位の符号化ビデオデータと第２の単位のオーディオデータとが交互に配列され、
隣接する第２の単位の符号化ビデオデータおよびオーディオデータを光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録装置である。
【０００７】
請求項７の発明は、ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録方法において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化のステップと、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力のステップと、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、符号化ビデオデータと出力されるオーディオデータのデータ構造をそれぞれ変換し、ファイル構造を有する符号化ビデオデータとオーディオデータを多重化するステップと、
ファイル構造を有し、多重化されたデータを光ディスクに記録するステップとからなり、
ファイル構造は、第１のデータ単位と、複数の第１のデータ単位の集合としての第２のデータ単位とを有し、
多重化されたデータは、第２のデータ単位の符号化ビデオデータと第２の単位のオーディオデータとが交互に配列され、
隣接する第２の単位の符号化ビデオデータおよびオーディオデータを光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録方法である。
【００２１】
この発明によれば、ＭＰＥＧ圧縮ビデオのＧＯＰの１または複数個がQuickTime 等のファイルのデータ単位に対応されているので、データ単位でのアクセス、編集が可能となる。また、光ディスクにファイル構造を有するデータを記録する時に、連続記録長を第２のデータ単位（例えばQuickTime のChunk ）に対応させているので、アクセス性、編集性を向上できる。
【００２２】
【発明の実施の形態】
以下、この発明の一実施形態について図面を参照して説明する。図１は、この発明の一実施形態におけるディジタル記録再生装置を示す。図１において、１がビデオ符号器を示す。ビデオ入力がビデオ符号器１に供給され、ビデオ符号器１において、ビデオ信号が圧縮符号化される。また、２がオーディオ符号器を示し、オーディオ入力がオーディオ符号器２においてオーディオ信号が圧縮符号化される。ビデオ信号およびオーディオ信号に対する圧縮符号化としては、例えばＭＰＥＧが使用される。ビデオ符号器１およびオーディオ符号器２のそれぞれの出力がエレメンタリストリームと称される。
【００２３】
ビデオ符号器１は、ＭＰＥＧの場合、動きベクトルを検出する動き予測部、ピクチャ順序並び替え部、入力映像信号とローカル復号映像信号間の予測誤差を形成する減算部、減算出力をＤＣＴ変換するＤＣＴ部、ＤＣＴ部の出力を量子化する量子化部、量子化出力を可変長符号化する可変長符号化部、一定レートで符号化データを出力するバッファメモリとから構成される。ピクチャ順序並び替え部は、ピクチャの順序を符号化処理に適したものに並び替える。つまり、ＩおよびＰピクチャを先に符号化し、その後、Ｂピクチャを符号化するのに適した順序にピクチャを並び替える。ローカル復号部は、逆量子化部、逆ＤＣＴ部、加算部、フレームメモリおよび動き補償部で構成される。動き補償部では、順方向予測、逆方向予測、両方向予測が可能とされている。イントラ符号化の場合では、減算部は、減算処理を行わず、単にデータが通過する。また、オーディオ符号器２は、サブバンド符号化部、適応量子化ビット割り当て部等で構成される。
【００２４】
一例として、携帯形カメラ一体ディスク記録再生装置の場合では、ビデオカメラで撮影された画像がビデオ入力とされ、マイクロホンで集音された音声がオーディオ入力とされる。ビデオ符号器１およびオーディオ符号器２では、アナログ信号がディジタル信号へ変換されて処理される。また、この一実施形態では、書き換え可能な光ディスクを記録媒体として使用する。この種の光ディスクとしては、光磁気ディスク、相変化型ディスク等を使用できる。一実施形態では、比較的小径の光磁気ディスクを使用している。
【００２５】
ビデオ符号器１およびオーディオ符号器２の出力がファイル生成器５に供給される。ファイル生成器５は、特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、ビデオエレメンタリストリームおよびオーディオエレメンタリストリームのデータ構造を変換する。この一実施形態では、ソフトウェアとして例えばQuickTime を使用する。QuickTime が処理する時系列的に変化する一連のデータ（ビデオデータ、オーディオデータ、テキストデータ）は、QuickTime ムービー(Movie) と称される。また、ファイル生成器５では、符号化ビデオデータおよび符号化オーディオデータが多重化される。QuickTime ムービーファイルの構造を作成するために、システム制御マイコン９によってファイル生成器５が制御される。
【００２６】
ファイル生成器５からのQuickTime ムービーファイルがメモリコントローラ８を介してメモリ７に順次書き込まれる。メモリコントローラ８に対して、システム制御マイコン（マイクロコンピュータ）９からディスクへのデータ書き込み要求が入力されると、メモリコントローラ８によって、メモリ７からQuickTime ムービーファイルが読み出される。ここで、QuickTime ムービー符号化の転送レートは、ディスクへの書き込みデータの転送レートより低く、例えば約１／２とされている。したがって、QuickTime ムービーファイルが連続的にメモリ７に書き込まれるのに対して、メモリ７からの読み出しは、メモリ７がオーバーフローまたはアンダーフローしないことをシステム制御マイコン９が監視しながら間欠的に行われる。
【００２７】
メモリコントローラ８を介してメモリ７から読み出されたQuickTime ムービーファイルがエラー訂正符号／復号器１１に供給される。エラー訂正符号／復号器１１は、QuickTime ムービーファイルを一旦メモリ１０に書き込み、インターリーブおよびエラー訂正符号の冗長データの生成の処理を行い、冗長データが付加されたデータをメモリ１０から読み出す。
【００２８】
エラー訂正符号／復号器１１の出力がデータ変復調器１３に供給される。データ変復調器１３は、ディジタルデータをディスクに記録する時に、再生時のクロック抽出を容易とし、符号間干渉のような問題が生じないように、データを変調する。例えばＲＬＬ（１，７）を使用できる。
【００２９】
データ変復調器１３の出力が磁界変調ドライバ１４に供給されると共に、光ピックアップ２３を駆動するための信号を出力する。磁界変調ドライバ１４は、入力された信号に応じて磁界ヘッド２２を駆動して光ディスク２０に磁界を印加する。光ピックアップ２３は、記録用のレーザビームを光ディスク２０に照射する。このようにして光ディスク２０に対してデータが記録される。光ディスク２０は、モータ２１によって、ＣＬＶ（線速度一定），ＣＡＶ（角速度一定），またはＺＣＡＶ（ゾーンＣＬＶ）で回転される。
【００３０】
メモリコントローラ８から読み出される間欠的なデータを光ディスク２０へ記録するので、通常は、連続的な記録動作がなされず、一定のデータ量を記録したら記録動作を中断し、次の記録要求まで待機するように、記録動作が間欠的になされる。
【００３１】
また、システム制御マイコン９からの要求に応じて、ドライブ制御マイコン１２がサーボ回路１５に要求を出し、ディスクドライブ全体の制御がなされる。それによって記録動作がなされる。サーボ回路１５によって、光ピックアップ２３のディスク径方向の移動のサーボ、トラッキングサーボ、フォーカスサーボがなされ、また、モータ２１のスピンドルサーボがなされる。図示しないが、システム制御マイコン９と関連してユーザの操作入力部が設けられている。
【００３２】
次に、再生のための構成および動作について説明する。再生時には、再生用のレーザビームを光ディスク２０に照射し、光ディスク２０からの反射光を光ピックアップ２３中のディテクタによって再生信号へ変換する。この場合、光ピックアップ２３のディテクタの出力信号からトラッキングエラーおよびフォーカスエラーが検出され、読み取りレーザビームがトラック上に位置し、トラック上に合焦するように、サーボ回路１５により制御される。また、光ディスク２０上の所望の位置のデータを再生するために、光ピックアップ２３の径方向の移動が制御される。
【００３３】
再生時においても、記録時と同様に、QuickTime ムービーファイルの転送レーザよりも高い、例えば２倍のレートで光ディスク２０からデータを再生する。この場合では、通常、連続的な再生が行われず、一定のデータ量を再生したら再生動作を中断し、次の再生要求まで待機するような間欠的な再生動作がなされる。再生時動作において、記録動作と同様に、システム制御マイコン９からの要求に応じて、ドライブ制御マイコン１２がサーボ回路１５に要求を出して、ディスクドライブ全体の制御がなされる。
【００３４】
光ピックアップ２３からの再生信号がデータ変復調器１３に入力され、復調処理がなされる。復調後のデータがエラー訂正符号／復号器１１に供給される。エラー訂正符号／復号器１１においては、再生データを一旦メモリ１０に書き込み、デインターリーブ処理およびエラー訂正処理がなされる。エラー訂正後のQuickTime ムービーファイルがメモリコントローラ８を介してメモリ７に書き込まれる。
【００３５】
メモリ７に書き込まれたQuickTime ムービーファイルは、システム制御マイコン９の要求に応じて、多重化を解く同期のタイミングに合わせてファイル復号器６に出力される。システム制御マイコン９は、ビデオ信号およびオーディオ信号を連続再生するために、光ディスク２０から再生されてメモリ７に書き込まれるデータ量とメモリ７から読み出してファイル復号器６に出力されるデータ量を監視し、メモリ７がオーバーフローまたはアンダーフローしないように、メモリコントローラ８およびドライブ制御マイコン１２を制御し、光ディスク２０からのデータの読み出しを行う。
【００３６】
ファイル復号器６では、システム制御マイコン９の制御の下で、QuickTime ムービーファイルをビデオエレメンタリストリームおよびオーディオエレメンタリストリームに分解する。ビデオエレメンタリストリームがビデオ復号器３に供給され、オーディオエレメンタリストリームがオーディオ復号器４に供給される。ファイル復号器６からのビデオエレメンタリストリームおよびオーディオエレメンタリストリームは、両者が同期するように出力される。
【００３７】
ビデオ復号器３およびオーディオ復号器４は、圧縮符号化の復号をそれぞれ行い、ビデオ出力およびオーディオ出力を発生する。例えばＭＰＥＧがビデオ信号およびオーディオ信号の圧縮符号化として使用される。図示しないが、ビデオ出力が表示ドライブを介してディスプレイ（液晶等）に出力され、表示され、オーディオ出力がオーディオアンプを介してスピーカに対して出力され、再生される。
【００３８】
ビデオ復号器３は、バッファメモリ、可変長符号復号部、逆ＤＣＴ部、逆量子化部、逆量子化部の出力とローカル復号出力を加算する加算部、ピクチャ順序並び替え部並びにフレームメモリおよび動き補償部からなるローカル復号部によって構成されている。イントラ符号化の場合では、加算部での加算処理がなされず、データが加算部を通過する。加算部からの復号データがピクチャ順序並び替え部によって元の画像の順序とされる。
【００３９】
なお、上述したようにデータが記録された光ディスク２０は、着脱自在のものであるので、他の機器でも再生できる。例えばQuickTime のアプリケーションソフトウェアで動作するパーソナルコンピュータが光ディスク２０に記録されているデータを読み取り、パーソナルコンピュータによって記録されているビデオおよびオーディオデータを再生することができる。さらに、この発明は、ビデオデータのみ、またはオーディオデータのみを扱う場合に対しても適用することができる。
【００４０】
上述したこの発明の一実施形態についてより詳細に説明する。先ず、QuickTime について、図２を参照して概略的に説明する。QuickTime は、一般的には、特殊なハードウエアを用いずに動画を再生するためのＯＳの拡張機能である。取り扱い可能なデータ形式は、多様で３２Track までの音声、動画、ＭＤＩなどの出力を同期させることができる。
【００４１】
QuickTime ムービーファイルは、大きくは、Movie ResourseとMovie Dataの二つの部分に分かれている。Movie Resourseの部分には、そのQuickTime ファイルを再生するのに必要な時間や、実データ参照のための情報が格納されており、Movie Data部分には、ビデオやオーディオの実データが格納されている。
【００４２】
一つのQuickTime ムービーファイルには、サウンド、ビデオ、テキストといった異なるタイプのMedia Dataをそれぞれ別のTrack として格納することができ、Sound Track,Video Track , Text Trackと呼ばれ、時間軸で厳密に管理されている。各Track には、それぞれの実データの圧縮方式や格納場所と表示時間を参照するためのMedia を有している。Media の中で、実データをMovie Data部分にどのような単位で格納されているかを示す最小単位のSampleのサイズや、そのSampleを複数個集めてブロック化したChunk の格納場所や、各Sampleの表示時間などの情報を格納している。
【００４３】
図２は、オーディオデータと画像データとを扱うQuickTime ムービーファイルの一例を示す。QuickTime ムービーファイルの最も大きな構成部分は、Movie Resourse部分とMovie Data部分とである。Movie Resourse部分には、そのファイルを再生するために必要な時間や実データ参照のためのデータが格納される。また、Movie Data部分には、ビデオ、オーディオ等の実データが格納される。
【００４４】
Movie Resourse部分について詳細に説明する。Movie Resourse部分には、ファイル全体に係る情報を記述するムービーヘッダ４１と、データの種類毎のTrack とが含まれる。図２では、ビデオTrack ５０の内部的な構造の一例を詳細に示した。ビデオTrack ５０には、トラック全体に係る情報を記述するTrack ヘッダ４２とMedia 部とが含まれる。Media 部には、メディア全体に係る情報を記述するMedia ヘッダ４３、Media データの取り扱いに係る情報を記述するMedia ハンドラ４４と共に、Media インフォメーション部が含まれる。
【００４５】
Media インフォメーション部には、画像メディアに係る情報を記述するMedia ハンドラ４５、画像データの取り扱いに係る情報を記述するデータハンドラ４６、およびデータについての情報を記述するデータインフォーメーション４７と共に、サンプルテーブルが記録されている。サンプルテーブル内には、各Sampleについての記述を行うサンプルデスクリプション、Sampleと時間軸の関係を記述するタイム−ツーサンプル、Sampleの大きさを記述するSampleサイズ４８、SampleとChunk の関係を記述するタイム−ツーChunk と、Movie Data内でのChunk の開始ビット位置を記述するChunk オフセット４９、同期に係る記述を行うシンクサンプル等が格納されている。さらに、オーディオTrack ５１にも、図示は省略するが、ビデオデータについてのTrack の内部的な構造に類似する内部構造が設定される。
【００４６】
一方、Movie Data部分には、例えばＭＰＥＧオーディオレイヤ２に基づく圧縮符号化方式によって符号化されたオーディオデータ、および例えばＭＰＥＧ規定に従う圧縮符号化方式によって符号化された画像データがそれぞれ所定数のSampleからなるChunk を単位として格納されている。勿論、符号化方式はこれらに限定されるものではなく、また、圧縮符号化が施されていないリニアデータを格納することも可能である。
【００４７】
Movie Resourse部分における各Track と、Movie Data部分に格納されているデータとは対応付けられている。すなわち、図２に示した一例は、オーディオデータと画像データとを扱うものなので、Movie Resourse部分にビデオデータについてのTrack とオーディオデータについてのTrack とが含まれ、Movie Data部分に、オーディオデータの実データと画像データの実データとが含まれている。他の種類のデータを扱う場合には、Movie Resourse部分におけるTrack 、およびMovie Data部分における実データの内容を、扱うべきデータに合わせれば良い。例えばテキスト、ＭＩＤＩ等を扱う場合には、Movie Resourse部分にテキスト、ＭＩＤＩ等についてのTrack を含むようにし、Movie Data部分に、テキスト、ＭＩＤＩ等の実データを含むようにすれば良い。
【００４８】
次に、圧縮符号化復号化方法としてＭＰＥＧ２を用いた場合、圧縮されたビデオデータ（ビデオエレメンタリストリーム）および圧縮されたオーディオデータ（オーディオエレメンタリストリーム）をQuickTime ファイルフォーマットに変換する方法について説明する。ここで、ＭＰＥＧについて説明すると、ＭＰＥＧは、上位から順にシーケンス層、ＧＯＰ層、ピクチャ層、スライス層、マクロブロック層、ブロック層の６層の階層構造を有している。各層の先頭にヘッダが付加される。例えばシーケンスヘッダは、シーケンス層の先頭に付加されるヘッダであり、シーケンス開始コード、画面の水平および垂直サイズ、アスペクト比、ピクチャレート、ビットレート、ＶＢＶバッファサイズ、制約パラメータビット、２つの量子化マトリックスのロードフラグと内容などが含まれている。
【００４９】
また、ＭＰＥＧの場合では、ピクチャタイプとして、Ｉ、Ｐ、Ｂの３種類が存在する。Ｉピクチャ(Intra-coded picture：イントラ符号化画像) は、符号化されるときその画像１枚の中だけで閉じた情報を使用するものである。従って、復号時には、Ｉピクチャ自身の情報のみで復号できる。Ｐピクチャ(Predictive-coded picture ：順方向予測符号化画像）は、予測画像（差分をとる基準となる画像）として、時間的に前の既に復号されたＩピクチャまたはＰピクチャを使用するものである。動き補償された予測画像との差を符号化するか、差分を取らずに符号化するか、効率の良い方をマクロブロック単位で選択する。Ｂピクチャ(Bidirectionally predictive-coded picture ：両方向予測符号化画像）は、予測画像（差分をとる基準となる画像）として、時間的に前の既に復号されたＩピクチャまたはＰピクチャ、時間的に後ろの既に復号されたＩピクチャまたはＰピクチャ、並びにこの両方から作られた補間画像の３種類を使用する。この３種類のそれぞれの動き補償後の差分の符号化と、イントラ符号化の中で、最も効率の良いものをマクロブロック単位で選択する。
【００５０】
従って、マクロブロックタイプとしては、フレーム内符号化(Intra) マクロブロックと、過去から未来を予測する順方向(Foward)フレーム間予測マクロブロックと、未来から過去を予測する逆方向(Backward)フレーム間予測マクロブロックと、前後両方向から予測する両方向マクロブロックとがある。Ｉピクチャ内の全てのマクロブロックは、フレーム内符号化マクロブロックである。また、Ｐピクチャ内には、フレーム内符号化マクロブロックと順方向フレーム間予測マクロブロックとが含まれる。Ｂピクチャ内には、上述した４種類の全てのタイプのマクロブロックが含まれる。
【００５１】
そして、ＭＰＥＧでは、ランダムアクセスを可能とするために、複数枚のピクチャのまとまりであるＧＯＰ(Group Of Picture)構造が規定されている。ＧＯＰに関するＭＰＥＧの規則では、第１にビットストリーム上で、ＧＯＰの最初がＩピクチャであること、第２に、原画像の順で、ＧＯＰの最後がＩまたはＰピクチャであることが規定されている。また、ＧＯＰとしては、以前のＧＯＰの最後のＩまたはＰピクチャからの予測を必要とする構造も許容されている。以前のＧＯＰの画像を使用しないで復号できるＧＯＰは、クローズドＧＯＰと称される。この一実施形態では、クローズドＧＯＰの構造とし、ＧＯＰ単位の編集を可能としている。
【００５２】
また、ＭＰＥＧオーディオ（圧縮方式）としては、レイヤ１、レイヤ２およびレイヤ３の３個のモードが規定されている。例えばレイヤ１では、３２サブバンド符号化および適応ビット割り当てがなされ、１オーディオ復号単位が３８４サンプルとされている。１オーディオ復号単位は、オーディオビットストリームの１オーディオフレームのことである。オーディオ復号単位が単独で符号化データをオーディオデータへ復号できる最小単位である。ビデオデータについても、同様に１ビデオフレームに対応するビデオ復号単位が規定されている。１ビデオフレームは、ＮＴＳＣ方式では、１／３０秒である。通常、レイヤ１のオーディオのビットレートは、ステレオで２５６kbpsである。また、レイヤ２では、３２サブバンド符号化および適応ビット割り当てがなされ、１オーディオ復号単位が１１５２サンプルとされている。通常、レイヤ２のオーディオのビットレートは、ステレオで１９２kbpsである。
【００５３】
ファイル生成器５は、上述したQuickTime ファイルフォーマットに準拠したファイル構造へＭＰＥＧで圧縮されたビデオおよびオーディオデータを変換する。図３は、ビデオフレームと、ＧＯＰと、QuickTime ファイルフォーマットでのSampleとChunk の単位との関係を示す。上述したように、Sampleは、Movie データ中の最小単位であり、Chunk は、複数のSampleを集めてブロック化した単位である。
【００５４】
図３Ａに示すように、原ビデオ信号の例えば１５ビデオフレームがＭＰＥＧ２で圧縮符号化され、１ＧＯＰとされる。１５ビデオフレームは、０．５秒の時間である。ＧＯＰは、好ましくは、クローズドＧＯＰの構造とされる。各ＧＯＰの先頭にシーケンスヘッダが付加される。シーケンスヘッダとＧＯＰとを１つのビデオ復号単位とする。シーケンスヘッダをＧＯＰごとに付加することによって、QuickTime で直接Sample単位のアクセスとそのデータの復号とが可能となる。図１中のビデオ符号器１が図３Ａに示すＭＰＥＧビデオエレメンタリストリームを出力する。
【００５５】
図３Ｂに示すように、ビデオ復号単位の１つをQuickTime ファイルフォーマットの１Sampleとする。時間的に連続する６個のSample（例えばSample#0〜Sample#5) を１つのビデオChunk （例えばChunk #0) と対応させる。１Chunk の長さは、３秒である。なお、１Sampleに６個のＧＯＰを対応させ、１Chunk に１Sampleを対応させるようにしても良い。その場合でも、１Chunk の時間長が３秒となる。
【００５６】
図４は、ＭＰＥＧオーディオのレイヤ２の符号化を行う時のオーディオフレームと、ＧＯＰと、QuickTime ファイルフォーマットでのSampleとChunk の単位との関係を示す。レイヤ２においては、オーディオサンプルの１１５２サンプル／チャンネルが１オーディオフレームとされる。図４Ａに示すように、ステレオの場合、１１５２サンプル×２チャンネルのオーディオデータがレイヤ２で符号化され、１つのオーディオ復号単位とされる。１つのオーディオ復号単位には、圧縮符号化後の３８４バイト×２チャンネルのデータが含まれる。オーディオ復号単位中には、ヘッダおよび復号に必要な情報（アロケーション、スケールファクタ等）が含まれる。
【００５７】
図４Ｂに示すように、オーディオ復号単位の１つをQuickTime ファイルフォーマットの１Sampleとする。したがって、QuickTime でSample単位でオーディオの復号が可能となる。時間的に連続する１２５個のSample（例えばSample#0〜Sample#124) を１つのオーディオChunk （例えばChunk #0) と対応させる。１Chunk の長さは、オーディオのサンプリング周波数を４８ｋHzとするときに、３秒である。
【００５８】
図３および図４は、ビデオデータのファイルとオーディオデータのファイルとを別々に示しているが、ファイル生成器５では、これらを一つのデータストリームとして多重化し、QuickTime ムービーファイルを形成する。QuickTime ムービーファイルでは、ビデオChunk とオーディオChunk とが時間軸上で交互に存在する。この場合、時間的に連続するオーディオChunk と、次のビデオChunk とが対応したものとなるように、関連するビデオおよびオーディオChunk が隣接して配される。上述したように、１つのビデオChunk に含まれるビデオデータの時間長と、１つのオーディオChunk に含まれるオーディオデータの時間長とが等しく、例えば３秒に選ばれている。
【００５９】
オーディオの圧縮符号化の他の例として、ミニディスクで採用されているＡＴＲＡＣ(Adaptive Transform Acoustic Coding)を使用しても良い。ＡＴＲＡＣでは、４４．１ｋHzでサンプリングした１サンプル１６ビットのオーディオデータを処理する。ＡＴＲＡＣでオーディオデータを処理する時の最小のデータ単位がサウンドユニットである。ステレオの場合、１サウンドユニットは、５１２サンプル×１６ビット×２チャンネルである。
【００６０】
ＡＴＲＡＣをオーディオ圧縮符号化として採用する場合には、図５Ａに示すように、１サウンドユニットが２１２バイト×２チャンネルのオーディオ復号単位に圧縮される。図５Ｂに示すように、１オーディオ復号単位をQuickTime ファイルフォーマットの１Sampleに対応させる。また、６４個のSampleをQuickTime ファイルフォーマットの１Chunk に対応させる。
【００６１】
さらに、この発明は、オーディオデータを圧縮しないで記録するようにしても良い。圧縮しない方式をリニアＰＣＭと称する。リニアＰＣＭにおいても、５１２個のオーディオサンプルを１個のオーディオ復号単位とし、１個のオーディオ復号単位をQuickTime ファイルフォーマットの１Sampleに対応させる。
【００６２】
図６は、ビデオとオーディオを多重化した場合における、ビデオに関してのQuickTime ファイルフォーマットを示す。図６Ａに示すように、ビデオフレームの周期をｔ０秒とし、１ＧＯＰに含まれるフレーム数をｆ０としている。原ビデオデータがＭＰＥＧ２で符号化されることによって、図６Ｂに示すＭＰＥＧビデオエレメンタリストリームが形成される。上述したように、ＧＯＰごとにシーケンスヘッダ（ＳＨ）が付加されている。
【００６３】
そして、図６Ｃに示すように、シーケンスヘッダが付加されたＧＯＰがQuickTime ファイルフォーマットの１Sampleに対応付けられる。１Sampleの大きさは、Sampleサイズと称される。複数Sample例えば上述した６個のSampleによってQuickTime ファイルフォーマットの１Chunk が構成される。図６Ｄに示すように、ビデオChunk とオーディオChunk とが時間軸上に交互に配されることによって多重化され、QuickTime ムービーファイルが構成される。QuickTime ムービーファイル上で各ビデオChunk の先頭の位置がビデオChunk オフセットと称される。ビデオChunk オフセットは、ファイルの先頭からそのビデオChunk の先頭の位置までのバイト数で表される。
【００６４】
図７は、ビデオとオーディオを多重化した場合における、オーディオに関してのQuickTime ファイルフォーマットを示す。図７では、信号処理の順番に沿って図の下側から上側に向かってＡ、Ｂ、Ｃ、Ｄの分図記号が付されている。図７Ａに示すように、原オーディオ信号がディジタル化され、１オーディオフレーム内にｆ０音声サンプル×ｎチャンネルが含まれる。原オーディオデータがＭＰＥＧオーディオで圧縮符号化されることによって、図７Ｂに示すＭＰＥＧオーディオエレメンタリストリームが形成される。
【００６５】
そして、図７Ｃに示すように、例えば１個のオーディオ復号単位がQuickTime ファイルフォーマットの１Sampleに対応付けられる。１Sampleの大きさは、Sampleサイズと称される。複数Sample例えば上述した１２５個のSampleによってQuickTime ファイルフォーマットの１Chunk が構成される。図７Ｄに示すように、ビデオChunk とオーディオChunk とが時間軸上に交互に配されることによって多重化され、QuickTime ムービーファイルが構成される。QuickTime ムービーファイル上で各オーディオChunk の先頭の位置がオーディオChunk オフセットと称される。オーディオChunk オフセットは、ファイルの先頭からそのオーディオChunk の先頭の位置までのバイト数で表される。ビデオChunk およびオーディオChunk の時間長は、互いに等しく例えば３秒とされる。
【００６６】
ビデオSampleのSampleサイズ、オーディオSampleのSampleサイズ、ビデオChunk オフセットの値、オーディオChunk オフセットの値は、そのQuickTime ムービーファイルのResourse中に記述される。それによって、各Chunk 中の各Sampleを特定することが可能となり、Sample単位（復号単位）で編集を行うことができる。
【００６７】
上述したように、ビデオChunk とオーディオChunk とが多重化（インターリーブ）されたQuickTime ムービーファイルを光ディスク２０に対して記録する時の記録方法について説明する。上述したように、QuickTime ムービーファイルは、大きくは、Movie ResourseとMovie Dataの二つの部分に分かれている。QuickTime ムービーファイルを光ディスク２０に記録する時には、図８に示すように、Movie Resourseと、Movie Data（実データ）の各Chunk （ビデオChunk またはオーディオChunk ）をディスク上の連続記録長に対応させる。連続記録長とは、１回のアクセス、すなわち、光ピックアップ２３のジャンプ動作を伴わないで、連続したアドレスに書き込み可能な長さのことである。
【００６８】
また、図９は、QuickTime ムービーファイルを光ディスク２０に記録する他の例を示す。上述したように、ビデオChunk とオーディオChunk とが多重化されている場合には、Movie Data中の互いに対応する（隣接している）オーディオChunk とビデオChunk のペアを連続記録長に対応させる。
【００６９】
図８および図９に示すように、光ディスク２０上の連続記録長の位置は、物理的には不連続である。したがって、Movie Resourseを最初に再生し、次に最初のオーディオChunk およびビデオChunk を再生するまでの間のように、二つの連続記録長を再生する間では、トラックジャンプが生じる。しかしながら、上述したように、書き込み／読み出しデータの転送レートがQuickTime ムービーファイルの転送レートより高いもの、例えば２倍に選定されているので、間欠的な読み出しがなされても、連続したQuickTime ムービーファイルを再生することができる。
【００７０】
このように、QuickTime ムービーファイルの転送レート、光ディスクの読み出しレート、連続記録長の時間、ディスクドライブのシークタイム（あるトラックから異なるトラックにジャンプして再生するまでの時間）は、相互に関係している。したがって、連続記録長に記録されるビデオおよびオーディオデータの時間は、３秒以外に種々選ぶことができる。連続記録長に記録されるビデオデータのビデオフレーム数の時間に対応する時間に、整数個のオーディオサンプルが含まれることが好ましい。
【００７１】
上述した連続記録長として記録されるビデオデータの時間およびオーディオデータの時間は、固定でない場合には、そのQuickTime ムービーファイルのMovie Resourse中に連続記録長が記述される。例えば１個のビデオChunk 中のフレーム数、１個のオーディオChunk 中のサンプル数が記述される。
【００７２】
なお、以上の説明では、携帯形カメラ一体形ディスク記録再生装置に対してこの発明を適用した例について説明したが、他の機器に対してもこの発明を適用できる。例えばディジタルスチルカメラ、ディジタルオーディオレコーダ／プレーヤ等にもこの発明を適用できる。
【００７３】
さらに、この発明は、図１のブロック図に示すハードウエア構成の一部、または全体をソフトウェアによって実現するようにしても良い。また、このソフトウェアは、ＣＤ−ＲＯＭ等のコンピュータによって読み取り可能な記録媒体に格納されて提供される。
【００７４】
また、QuickTime について説明したが、それ以外に、複数の時系列的に変化する一連のデータを特殊なハードウエアを使用せずに同期して再生することを可能とするコンピュータソフトウェアに対してこの発明を適用しても良い。
【００７５】
【発明の効果】
この発明によれば、ＭＰＥＧ圧縮ビデオのＧＯＰの１または複数個がQuickTime 等のファイルの第１のデータ単位（Sample）に対応されているので、データ単位でのアクセス、編集が可能となる。また、光ディスクにファイル構造を有するデータを記録する時に、連続記録長を第２のデータ単位（例えばQuickTime のChunk ）に対応させているので、アクセス性、編集性を向上できる。
【図面の簡単な説明】
【図１】この発明の一実施形態のブロック図である。
【図２】この発明を適用できるQuickTime ファイルフォーマットの一例を示す略線図である。
【図３】この発明の一実施形態におけるＭＰＥＧビデオのＧＯＰとQuickTime のファイルフォーマットの関係を説明するための略線図である。
【図４】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の一例を説明するための略線図である。
【図５】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の他の例を説明するための略線図である。
【図６】この発明の一実施形態におけるＭＰＥＧビデオのＧＯＰとQuickTime のファイルフォーマットの関係を説明するための略線図である。
【図７】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の一例を説明するための略線図である。
【図８】この発明の一実施形態における光ディスクへの記録方法の一例を説明するための略線図である。
【図９】この発明の一実施形態における光ディスクへの記録方法の他の例を説明するための略線図である。
【符号の説明】
１・・・ビデオ符号器、２・・・オーディオ符号器、３・・・ビデオ復号器、４・・・オーディオ復号器、５・・・ファイル生成器、６・・・ファイル復号器、２０・・・光ディスク
【発明の属する技術分野】
この発明は、圧縮符号化例えばＭＰＥＧで符号化されたビデオ信号および／またはオーディオ信号を光ディスクに対して記録するのに好適な記録装置および方法に関する。
【０００２】
【従来の技術】
近年、マルチメディア対応のシステムソフトウェアとして、QuickTime が知られている。QuickTime は、時系列的に変化するデータ（Movie と称される）を扱うためのソフトウェアである。Movie には、動画、音声および文字データが含まれる。現在、Apple がQuickTime ファイルフォーマットとして、Macintosh プラットフォーム上でのみ対応しているＭＰＥＧ−１(Moving Picture Experts Group phase1) のプログラムストリーム（ビデオエレメンタリストリームとオーディオエレメンタリストリームを時間で多重化したデータ形式）ファイル格納形式がある。この格納形式では、ＭＰＥＧ−１ファイル全体、すなわち、１つの閉じたシーン全体をその時間の長さと無関係に、QuickTime ファイルフォーマットにおけるSampleに対応させ、且つその巨大なSampleを１つの巨大なChunk として扱っている。
【０００３】
また、オーディオとビデオの各データをまとめてQuickTime ファイルフォーマットにおける１つのTrack 、そして、１つのMedia に格納している。このデータを理解するための新たなMedia TypeとしてＭＰＥＧMedia を定義し、その中で巨大なSample、Chunk の中に含まれているビデオデータやオーディオデータの理解を行っている。
【０００４】
【発明が解決しようとする課題】
しかしながら、巨大なSample中の特定のデータに対するアクセス性が低下し、また、編集性が乏しい問題があった。例えばコンピュータにおいて、QuickTime による再生、編集を可能とするために、携帯形カメラ一体形記録再生装置における記録媒体例えば光ディスクへの映像音声データをQuickTime ファイルフォーマットに準拠して格納することが考えられる。この場合でも、特定のデータへのアクセス性が劣り、編集性が乏しい問題を解決する必要がある。ビデオデータに限らずオーディオデータの記録再生装置においても同様である。
【０００５】
したがって、この発明の目的は、QuickTime のようなマルチメディアデータフォーマットに準拠したファイル構造を持つように、データ構造が変換されたデータを記録媒体に記録する時に、アクセス性の低下を防止し、編集性を向上できる記録装置および方法を提供することにある。
【０００６】
【課題を解決するための手段】
請求項１の発明は、ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録装置において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化手段と、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力手段と、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、符号化手段からの符号化ビデオデータとオーディオ出力手段からのオーディオデータのデータ構造をそれぞれ変換し、ファイル構造を有する符号化ビデオデータとオーディオデータを多重化する手段と、
ファイル構造を有し、多重化されたデータを光ディスクに記録する手段とからなり、
ファイル構造は、第１のデータ単位と、複数の第１のデータ単位の集合としての第２のデータ単位とを有し、
多重化されたデータは、第２のデータ単位の符号化ビデオデータと第２の単位のオーディオデータとが交互に配列され、
隣接する第２の単位の符号化ビデオデータおよびオーディオデータを光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録装置である。
【０００７】
請求項７の発明は、ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録方法において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化のステップと、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力のステップと、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、符号化ビデオデータと出力されるオーディオデータのデータ構造をそれぞれ変換し、ファイル構造を有する符号化ビデオデータとオーディオデータを多重化するステップと、
ファイル構造を有し、多重化されたデータを光ディスクに記録するステップとからなり、
ファイル構造は、第１のデータ単位と、複数の第１のデータ単位の集合としての第２のデータ単位とを有し、
多重化されたデータは、第２のデータ単位の符号化ビデオデータと第２の単位のオーディオデータとが交互に配列され、
隣接する第２の単位の符号化ビデオデータおよびオーディオデータを光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録方法である。
【００２１】
この発明によれば、ＭＰＥＧ圧縮ビデオのＧＯＰの１または複数個がQuickTime 等のファイルのデータ単位に対応されているので、データ単位でのアクセス、編集が可能となる。また、光ディスクにファイル構造を有するデータを記録する時に、連続記録長を第２のデータ単位（例えばQuickTime のChunk ）に対応させているので、アクセス性、編集性を向上できる。
【００２２】
【発明の実施の形態】
以下、この発明の一実施形態について図面を参照して説明する。図１は、この発明の一実施形態におけるディジタル記録再生装置を示す。図１において、１がビデオ符号器を示す。ビデオ入力がビデオ符号器１に供給され、ビデオ符号器１において、ビデオ信号が圧縮符号化される。また、２がオーディオ符号器を示し、オーディオ入力がオーディオ符号器２においてオーディオ信号が圧縮符号化される。ビデオ信号およびオーディオ信号に対する圧縮符号化としては、例えばＭＰＥＧが使用される。ビデオ符号器１およびオーディオ符号器２のそれぞれの出力がエレメンタリストリームと称される。
【００２３】
ビデオ符号器１は、ＭＰＥＧの場合、動きベクトルを検出する動き予測部、ピクチャ順序並び替え部、入力映像信号とローカル復号映像信号間の予測誤差を形成する減算部、減算出力をＤＣＴ変換するＤＣＴ部、ＤＣＴ部の出力を量子化する量子化部、量子化出力を可変長符号化する可変長符号化部、一定レートで符号化データを出力するバッファメモリとから構成される。ピクチャ順序並び替え部は、ピクチャの順序を符号化処理に適したものに並び替える。つまり、ＩおよびＰピクチャを先に符号化し、その後、Ｂピクチャを符号化するのに適した順序にピクチャを並び替える。ローカル復号部は、逆量子化部、逆ＤＣＴ部、加算部、フレームメモリおよび動き補償部で構成される。動き補償部では、順方向予測、逆方向予測、両方向予測が可能とされている。イントラ符号化の場合では、減算部は、減算処理を行わず、単にデータが通過する。また、オーディオ符号器２は、サブバンド符号化部、適応量子化ビット割り当て部等で構成される。
【００２４】
一例として、携帯形カメラ一体ディスク記録再生装置の場合では、ビデオカメラで撮影された画像がビデオ入力とされ、マイクロホンで集音された音声がオーディオ入力とされる。ビデオ符号器１およびオーディオ符号器２では、アナログ信号がディジタル信号へ変換されて処理される。また、この一実施形態では、書き換え可能な光ディスクを記録媒体として使用する。この種の光ディスクとしては、光磁気ディスク、相変化型ディスク等を使用できる。一実施形態では、比較的小径の光磁気ディスクを使用している。
【００２５】
ビデオ符号器１およびオーディオ符号器２の出力がファイル生成器５に供給される。ファイル生成器５は、特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、ビデオエレメンタリストリームおよびオーディオエレメンタリストリームのデータ構造を変換する。この一実施形態では、ソフトウェアとして例えばQuickTime を使用する。QuickTime が処理する時系列的に変化する一連のデータ（ビデオデータ、オーディオデータ、テキストデータ）は、QuickTime ムービー(Movie) と称される。また、ファイル生成器５では、符号化ビデオデータおよび符号化オーディオデータが多重化される。QuickTime ムービーファイルの構造を作成するために、システム制御マイコン９によってファイル生成器５が制御される。
【００２６】
ファイル生成器５からのQuickTime ムービーファイルがメモリコントローラ８を介してメモリ７に順次書き込まれる。メモリコントローラ８に対して、システム制御マイコン（マイクロコンピュータ）９からディスクへのデータ書き込み要求が入力されると、メモリコントローラ８によって、メモリ７からQuickTime ムービーファイルが読み出される。ここで、QuickTime ムービー符号化の転送レートは、ディスクへの書き込みデータの転送レートより低く、例えば約１／２とされている。したがって、QuickTime ムービーファイルが連続的にメモリ７に書き込まれるのに対して、メモリ７からの読み出しは、メモリ７がオーバーフローまたはアンダーフローしないことをシステム制御マイコン９が監視しながら間欠的に行われる。
【００２７】
メモリコントローラ８を介してメモリ７から読み出されたQuickTime ムービーファイルがエラー訂正符号／復号器１１に供給される。エラー訂正符号／復号器１１は、QuickTime ムービーファイルを一旦メモリ１０に書き込み、インターリーブおよびエラー訂正符号の冗長データの生成の処理を行い、冗長データが付加されたデータをメモリ１０から読み出す。
【００２８】
エラー訂正符号／復号器１１の出力がデータ変復調器１３に供給される。データ変復調器１３は、ディジタルデータをディスクに記録する時に、再生時のクロック抽出を容易とし、符号間干渉のような問題が生じないように、データを変調する。例えばＲＬＬ（１，７）を使用できる。
【００２９】
データ変復調器１３の出力が磁界変調ドライバ１４に供給されると共に、光ピックアップ２３を駆動するための信号を出力する。磁界変調ドライバ１４は、入力された信号に応じて磁界ヘッド２２を駆動して光ディスク２０に磁界を印加する。光ピックアップ２３は、記録用のレーザビームを光ディスク２０に照射する。このようにして光ディスク２０に対してデータが記録される。光ディスク２０は、モータ２１によって、ＣＬＶ（線速度一定），ＣＡＶ（角速度一定），またはＺＣＡＶ（ゾーンＣＬＶ）で回転される。
【００３０】
メモリコントローラ８から読み出される間欠的なデータを光ディスク２０へ記録するので、通常は、連続的な記録動作がなされず、一定のデータ量を記録したら記録動作を中断し、次の記録要求まで待機するように、記録動作が間欠的になされる。
【００３１】
また、システム制御マイコン９からの要求に応じて、ドライブ制御マイコン１２がサーボ回路１５に要求を出し、ディスクドライブ全体の制御がなされる。それによって記録動作がなされる。サーボ回路１５によって、光ピックアップ２３のディスク径方向の移動のサーボ、トラッキングサーボ、フォーカスサーボがなされ、また、モータ２１のスピンドルサーボがなされる。図示しないが、システム制御マイコン９と関連してユーザの操作入力部が設けられている。
【００３２】
次に、再生のための構成および動作について説明する。再生時には、再生用のレーザビームを光ディスク２０に照射し、光ディスク２０からの反射光を光ピックアップ２３中のディテクタによって再生信号へ変換する。この場合、光ピックアップ２３のディテクタの出力信号からトラッキングエラーおよびフォーカスエラーが検出され、読み取りレーザビームがトラック上に位置し、トラック上に合焦するように、サーボ回路１５により制御される。また、光ディスク２０上の所望の位置のデータを再生するために、光ピックアップ２３の径方向の移動が制御される。
【００３３】
再生時においても、記録時と同様に、QuickTime ムービーファイルの転送レーザよりも高い、例えば２倍のレートで光ディスク２０からデータを再生する。この場合では、通常、連続的な再生が行われず、一定のデータ量を再生したら再生動作を中断し、次の再生要求まで待機するような間欠的な再生動作がなされる。再生時動作において、記録動作と同様に、システム制御マイコン９からの要求に応じて、ドライブ制御マイコン１２がサーボ回路１５に要求を出して、ディスクドライブ全体の制御がなされる。
【００３４】
光ピックアップ２３からの再生信号がデータ変復調器１３に入力され、復調処理がなされる。復調後のデータがエラー訂正符号／復号器１１に供給される。エラー訂正符号／復号器１１においては、再生データを一旦メモリ１０に書き込み、デインターリーブ処理およびエラー訂正処理がなされる。エラー訂正後のQuickTime ムービーファイルがメモリコントローラ８を介してメモリ７に書き込まれる。
【００３５】
メモリ７に書き込まれたQuickTime ムービーファイルは、システム制御マイコン９の要求に応じて、多重化を解く同期のタイミングに合わせてファイル復号器６に出力される。システム制御マイコン９は、ビデオ信号およびオーディオ信号を連続再生するために、光ディスク２０から再生されてメモリ７に書き込まれるデータ量とメモリ７から読み出してファイル復号器６に出力されるデータ量を監視し、メモリ７がオーバーフローまたはアンダーフローしないように、メモリコントローラ８およびドライブ制御マイコン１２を制御し、光ディスク２０からのデータの読み出しを行う。
【００３６】
ファイル復号器６では、システム制御マイコン９の制御の下で、QuickTime ムービーファイルをビデオエレメンタリストリームおよびオーディオエレメンタリストリームに分解する。ビデオエレメンタリストリームがビデオ復号器３に供給され、オーディオエレメンタリストリームがオーディオ復号器４に供給される。ファイル復号器６からのビデオエレメンタリストリームおよびオーディオエレメンタリストリームは、両者が同期するように出力される。
【００３７】
ビデオ復号器３およびオーディオ復号器４は、圧縮符号化の復号をそれぞれ行い、ビデオ出力およびオーディオ出力を発生する。例えばＭＰＥＧがビデオ信号およびオーディオ信号の圧縮符号化として使用される。図示しないが、ビデオ出力が表示ドライブを介してディスプレイ（液晶等）に出力され、表示され、オーディオ出力がオーディオアンプを介してスピーカに対して出力され、再生される。
【００３８】
ビデオ復号器３は、バッファメモリ、可変長符号復号部、逆ＤＣＴ部、逆量子化部、逆量子化部の出力とローカル復号出力を加算する加算部、ピクチャ順序並び替え部並びにフレームメモリおよび動き補償部からなるローカル復号部によって構成されている。イントラ符号化の場合では、加算部での加算処理がなされず、データが加算部を通過する。加算部からの復号データがピクチャ順序並び替え部によって元の画像の順序とされる。
【００３９】
なお、上述したようにデータが記録された光ディスク２０は、着脱自在のものであるので、他の機器でも再生できる。例えばQuickTime のアプリケーションソフトウェアで動作するパーソナルコンピュータが光ディスク２０に記録されているデータを読み取り、パーソナルコンピュータによって記録されているビデオおよびオーディオデータを再生することができる。さらに、この発明は、ビデオデータのみ、またはオーディオデータのみを扱う場合に対しても適用することができる。
【００４０】
上述したこの発明の一実施形態についてより詳細に説明する。先ず、QuickTime について、図２を参照して概略的に説明する。QuickTime は、一般的には、特殊なハードウエアを用いずに動画を再生するためのＯＳの拡張機能である。取り扱い可能なデータ形式は、多様で３２Track までの音声、動画、ＭＤＩなどの出力を同期させることができる。
【００４１】
QuickTime ムービーファイルは、大きくは、Movie ResourseとMovie Dataの二つの部分に分かれている。Movie Resourseの部分には、そのQuickTime ファイルを再生するのに必要な時間や、実データ参照のための情報が格納されており、Movie Data部分には、ビデオやオーディオの実データが格納されている。
【００４２】
一つのQuickTime ムービーファイルには、サウンド、ビデオ、テキストといった異なるタイプのMedia Dataをそれぞれ別のTrack として格納することができ、Sound Track,Video Track , Text Trackと呼ばれ、時間軸で厳密に管理されている。各Track には、それぞれの実データの圧縮方式や格納場所と表示時間を参照するためのMedia を有している。Media の中で、実データをMovie Data部分にどのような単位で格納されているかを示す最小単位のSampleのサイズや、そのSampleを複数個集めてブロック化したChunk の格納場所や、各Sampleの表示時間などの情報を格納している。
【００４３】
図２は、オーディオデータと画像データとを扱うQuickTime ムービーファイルの一例を示す。QuickTime ムービーファイルの最も大きな構成部分は、Movie Resourse部分とMovie Data部分とである。Movie Resourse部分には、そのファイルを再生するために必要な時間や実データ参照のためのデータが格納される。また、Movie Data部分には、ビデオ、オーディオ等の実データが格納される。
【００４４】
Movie Resourse部分について詳細に説明する。Movie Resourse部分には、ファイル全体に係る情報を記述するムービーヘッダ４１と、データの種類毎のTrack とが含まれる。図２では、ビデオTrack ５０の内部的な構造の一例を詳細に示した。ビデオTrack ５０には、トラック全体に係る情報を記述するTrack ヘッダ４２とMedia 部とが含まれる。Media 部には、メディア全体に係る情報を記述するMedia ヘッダ４３、Media データの取り扱いに係る情報を記述するMedia ハンドラ４４と共に、Media インフォメーション部が含まれる。
【００４５】
Media インフォメーション部には、画像メディアに係る情報を記述するMedia ハンドラ４５、画像データの取り扱いに係る情報を記述するデータハンドラ４６、およびデータについての情報を記述するデータインフォーメーション４７と共に、サンプルテーブルが記録されている。サンプルテーブル内には、各Sampleについての記述を行うサンプルデスクリプション、Sampleと時間軸の関係を記述するタイム−ツーサンプル、Sampleの大きさを記述するSampleサイズ４８、SampleとChunk の関係を記述するタイム−ツーChunk と、Movie Data内でのChunk の開始ビット位置を記述するChunk オフセット４９、同期に係る記述を行うシンクサンプル等が格納されている。さらに、オーディオTrack ５１にも、図示は省略するが、ビデオデータについてのTrack の内部的な構造に類似する内部構造が設定される。
【００４６】
一方、Movie Data部分には、例えばＭＰＥＧオーディオレイヤ２に基づく圧縮符号化方式によって符号化されたオーディオデータ、および例えばＭＰＥＧ規定に従う圧縮符号化方式によって符号化された画像データがそれぞれ所定数のSampleからなるChunk を単位として格納されている。勿論、符号化方式はこれらに限定されるものではなく、また、圧縮符号化が施されていないリニアデータを格納することも可能である。
【００４７】
Movie Resourse部分における各Track と、Movie Data部分に格納されているデータとは対応付けられている。すなわち、図２に示した一例は、オーディオデータと画像データとを扱うものなので、Movie Resourse部分にビデオデータについてのTrack とオーディオデータについてのTrack とが含まれ、Movie Data部分に、オーディオデータの実データと画像データの実データとが含まれている。他の種類のデータを扱う場合には、Movie Resourse部分におけるTrack 、およびMovie Data部分における実データの内容を、扱うべきデータに合わせれば良い。例えばテキスト、ＭＩＤＩ等を扱う場合には、Movie Resourse部分にテキスト、ＭＩＤＩ等についてのTrack を含むようにし、Movie Data部分に、テキスト、ＭＩＤＩ等の実データを含むようにすれば良い。
【００４８】
次に、圧縮符号化復号化方法としてＭＰＥＧ２を用いた場合、圧縮されたビデオデータ（ビデオエレメンタリストリーム）および圧縮されたオーディオデータ（オーディオエレメンタリストリーム）をQuickTime ファイルフォーマットに変換する方法について説明する。ここで、ＭＰＥＧについて説明すると、ＭＰＥＧは、上位から順にシーケンス層、ＧＯＰ層、ピクチャ層、スライス層、マクロブロック層、ブロック層の６層の階層構造を有している。各層の先頭にヘッダが付加される。例えばシーケンスヘッダは、シーケンス層の先頭に付加されるヘッダであり、シーケンス開始コード、画面の水平および垂直サイズ、アスペクト比、ピクチャレート、ビットレート、ＶＢＶバッファサイズ、制約パラメータビット、２つの量子化マトリックスのロードフラグと内容などが含まれている。
【００４９】
また、ＭＰＥＧの場合では、ピクチャタイプとして、Ｉ、Ｐ、Ｂの３種類が存在する。Ｉピクチャ(Intra-coded picture：イントラ符号化画像) は、符号化されるときその画像１枚の中だけで閉じた情報を使用するものである。従って、復号時には、Ｉピクチャ自身の情報のみで復号できる。Ｐピクチャ(Predictive-coded picture ：順方向予測符号化画像）は、予測画像（差分をとる基準となる画像）として、時間的に前の既に復号されたＩピクチャまたはＰピクチャを使用するものである。動き補償された予測画像との差を符号化するか、差分を取らずに符号化するか、効率の良い方をマクロブロック単位で選択する。Ｂピクチャ(Bidirectionally predictive-coded picture ：両方向予測符号化画像）は、予測画像（差分をとる基準となる画像）として、時間的に前の既に復号されたＩピクチャまたはＰピクチャ、時間的に後ろの既に復号されたＩピクチャまたはＰピクチャ、並びにこの両方から作られた補間画像の３種類を使用する。この３種類のそれぞれの動き補償後の差分の符号化と、イントラ符号化の中で、最も効率の良いものをマクロブロック単位で選択する。
【００５０】
従って、マクロブロックタイプとしては、フレーム内符号化(Intra) マクロブロックと、過去から未来を予測する順方向(Foward)フレーム間予測マクロブロックと、未来から過去を予測する逆方向(Backward)フレーム間予測マクロブロックと、前後両方向から予測する両方向マクロブロックとがある。Ｉピクチャ内の全てのマクロブロックは、フレーム内符号化マクロブロックである。また、Ｐピクチャ内には、フレーム内符号化マクロブロックと順方向フレーム間予測マクロブロックとが含まれる。Ｂピクチャ内には、上述した４種類の全てのタイプのマクロブロックが含まれる。
【００５１】
そして、ＭＰＥＧでは、ランダムアクセスを可能とするために、複数枚のピクチャのまとまりであるＧＯＰ(Group Of Picture)構造が規定されている。ＧＯＰに関するＭＰＥＧの規則では、第１にビットストリーム上で、ＧＯＰの最初がＩピクチャであること、第２に、原画像の順で、ＧＯＰの最後がＩまたはＰピクチャであることが規定されている。また、ＧＯＰとしては、以前のＧＯＰの最後のＩまたはＰピクチャからの予測を必要とする構造も許容されている。以前のＧＯＰの画像を使用しないで復号できるＧＯＰは、クローズドＧＯＰと称される。この一実施形態では、クローズドＧＯＰの構造とし、ＧＯＰ単位の編集を可能としている。
【００５２】
また、ＭＰＥＧオーディオ（圧縮方式）としては、レイヤ１、レイヤ２およびレイヤ３の３個のモードが規定されている。例えばレイヤ１では、３２サブバンド符号化および適応ビット割り当てがなされ、１オーディオ復号単位が３８４サンプルとされている。１オーディオ復号単位は、オーディオビットストリームの１オーディオフレームのことである。オーディオ復号単位が単独で符号化データをオーディオデータへ復号できる最小単位である。ビデオデータについても、同様に１ビデオフレームに対応するビデオ復号単位が規定されている。１ビデオフレームは、ＮＴＳＣ方式では、１／３０秒である。通常、レイヤ１のオーディオのビットレートは、ステレオで２５６kbpsである。また、レイヤ２では、３２サブバンド符号化および適応ビット割り当てがなされ、１オーディオ復号単位が１１５２サンプルとされている。通常、レイヤ２のオーディオのビットレートは、ステレオで１９２kbpsである。
【００５３】
ファイル生成器５は、上述したQuickTime ファイルフォーマットに準拠したファイル構造へＭＰＥＧで圧縮されたビデオおよびオーディオデータを変換する。図３は、ビデオフレームと、ＧＯＰと、QuickTime ファイルフォーマットでのSampleとChunk の単位との関係を示す。上述したように、Sampleは、Movie データ中の最小単位であり、Chunk は、複数のSampleを集めてブロック化した単位である。
【００５４】
図３Ａに示すように、原ビデオ信号の例えば１５ビデオフレームがＭＰＥＧ２で圧縮符号化され、１ＧＯＰとされる。１５ビデオフレームは、０．５秒の時間である。ＧＯＰは、好ましくは、クローズドＧＯＰの構造とされる。各ＧＯＰの先頭にシーケンスヘッダが付加される。シーケンスヘッダとＧＯＰとを１つのビデオ復号単位とする。シーケンスヘッダをＧＯＰごとに付加することによって、QuickTime で直接Sample単位のアクセスとそのデータの復号とが可能となる。図１中のビデオ符号器１が図３Ａに示すＭＰＥＧビデオエレメンタリストリームを出力する。
【００５５】
図３Ｂに示すように、ビデオ復号単位の１つをQuickTime ファイルフォーマットの１Sampleとする。時間的に連続する６個のSample（例えばSample#0〜Sample#5) を１つのビデオChunk （例えばChunk #0) と対応させる。１Chunk の長さは、３秒である。なお、１Sampleに６個のＧＯＰを対応させ、１Chunk に１Sampleを対応させるようにしても良い。その場合でも、１Chunk の時間長が３秒となる。
【００５６】
図４は、ＭＰＥＧオーディオのレイヤ２の符号化を行う時のオーディオフレームと、ＧＯＰと、QuickTime ファイルフォーマットでのSampleとChunk の単位との関係を示す。レイヤ２においては、オーディオサンプルの１１５２サンプル／チャンネルが１オーディオフレームとされる。図４Ａに示すように、ステレオの場合、１１５２サンプル×２チャンネルのオーディオデータがレイヤ２で符号化され、１つのオーディオ復号単位とされる。１つのオーディオ復号単位には、圧縮符号化後の３８４バイト×２チャンネルのデータが含まれる。オーディオ復号単位中には、ヘッダおよび復号に必要な情報（アロケーション、スケールファクタ等）が含まれる。
【００５７】
図４Ｂに示すように、オーディオ復号単位の１つをQuickTime ファイルフォーマットの１Sampleとする。したがって、QuickTime でSample単位でオーディオの復号が可能となる。時間的に連続する１２５個のSample（例えばSample#0〜Sample#124) を１つのオーディオChunk （例えばChunk #0) と対応させる。１Chunk の長さは、オーディオのサンプリング周波数を４８ｋHzとするときに、３秒である。
【００５８】
図３および図４は、ビデオデータのファイルとオーディオデータのファイルとを別々に示しているが、ファイル生成器５では、これらを一つのデータストリームとして多重化し、QuickTime ムービーファイルを形成する。QuickTime ムービーファイルでは、ビデオChunk とオーディオChunk とが時間軸上で交互に存在する。この場合、時間的に連続するオーディオChunk と、次のビデオChunk とが対応したものとなるように、関連するビデオおよびオーディオChunk が隣接して配される。上述したように、１つのビデオChunk に含まれるビデオデータの時間長と、１つのオーディオChunk に含まれるオーディオデータの時間長とが等しく、例えば３秒に選ばれている。
【００５９】
オーディオの圧縮符号化の他の例として、ミニディスクで採用されているＡＴＲＡＣ(Adaptive Transform Acoustic Coding)を使用しても良い。ＡＴＲＡＣでは、４４．１ｋHzでサンプリングした１サンプル１６ビットのオーディオデータを処理する。ＡＴＲＡＣでオーディオデータを処理する時の最小のデータ単位がサウンドユニットである。ステレオの場合、１サウンドユニットは、５１２サンプル×１６ビット×２チャンネルである。
【００６０】
ＡＴＲＡＣをオーディオ圧縮符号化として採用する場合には、図５Ａに示すように、１サウンドユニットが２１２バイト×２チャンネルのオーディオ復号単位に圧縮される。図５Ｂに示すように、１オーディオ復号単位をQuickTime ファイルフォーマットの１Sampleに対応させる。また、６４個のSampleをQuickTime ファイルフォーマットの１Chunk に対応させる。
【００６１】
さらに、この発明は、オーディオデータを圧縮しないで記録するようにしても良い。圧縮しない方式をリニアＰＣＭと称する。リニアＰＣＭにおいても、５１２個のオーディオサンプルを１個のオーディオ復号単位とし、１個のオーディオ復号単位をQuickTime ファイルフォーマットの１Sampleに対応させる。
【００６２】
図６は、ビデオとオーディオを多重化した場合における、ビデオに関してのQuickTime ファイルフォーマットを示す。図６Ａに示すように、ビデオフレームの周期をｔ０秒とし、１ＧＯＰに含まれるフレーム数をｆ０としている。原ビデオデータがＭＰＥＧ２で符号化されることによって、図６Ｂに示すＭＰＥＧビデオエレメンタリストリームが形成される。上述したように、ＧＯＰごとにシーケンスヘッダ（ＳＨ）が付加されている。
【００６３】
そして、図６Ｃに示すように、シーケンスヘッダが付加されたＧＯＰがQuickTime ファイルフォーマットの１Sampleに対応付けられる。１Sampleの大きさは、Sampleサイズと称される。複数Sample例えば上述した６個のSampleによってQuickTime ファイルフォーマットの１Chunk が構成される。図６Ｄに示すように、ビデオChunk とオーディオChunk とが時間軸上に交互に配されることによって多重化され、QuickTime ムービーファイルが構成される。QuickTime ムービーファイル上で各ビデオChunk の先頭の位置がビデオChunk オフセットと称される。ビデオChunk オフセットは、ファイルの先頭からそのビデオChunk の先頭の位置までのバイト数で表される。
【００６４】
図７は、ビデオとオーディオを多重化した場合における、オーディオに関してのQuickTime ファイルフォーマットを示す。図７では、信号処理の順番に沿って図の下側から上側に向かってＡ、Ｂ、Ｃ、Ｄの分図記号が付されている。図７Ａに示すように、原オーディオ信号がディジタル化され、１オーディオフレーム内にｆ０音声サンプル×ｎチャンネルが含まれる。原オーディオデータがＭＰＥＧオーディオで圧縮符号化されることによって、図７Ｂに示すＭＰＥＧオーディオエレメンタリストリームが形成される。
【００６５】
そして、図７Ｃに示すように、例えば１個のオーディオ復号単位がQuickTime ファイルフォーマットの１Sampleに対応付けられる。１Sampleの大きさは、Sampleサイズと称される。複数Sample例えば上述した１２５個のSampleによってQuickTime ファイルフォーマットの１Chunk が構成される。図７Ｄに示すように、ビデオChunk とオーディオChunk とが時間軸上に交互に配されることによって多重化され、QuickTime ムービーファイルが構成される。QuickTime ムービーファイル上で各オーディオChunk の先頭の位置がオーディオChunk オフセットと称される。オーディオChunk オフセットは、ファイルの先頭からそのオーディオChunk の先頭の位置までのバイト数で表される。ビデオChunk およびオーディオChunk の時間長は、互いに等しく例えば３秒とされる。
【００６６】
ビデオSampleのSampleサイズ、オーディオSampleのSampleサイズ、ビデオChunk オフセットの値、オーディオChunk オフセットの値は、そのQuickTime ムービーファイルのResourse中に記述される。それによって、各Chunk 中の各Sampleを特定することが可能となり、Sample単位（復号単位）で編集を行うことができる。
【００６７】
上述したように、ビデオChunk とオーディオChunk とが多重化（インターリーブ）されたQuickTime ムービーファイルを光ディスク２０に対して記録する時の記録方法について説明する。上述したように、QuickTime ムービーファイルは、大きくは、Movie ResourseとMovie Dataの二つの部分に分かれている。QuickTime ムービーファイルを光ディスク２０に記録する時には、図８に示すように、Movie Resourseと、Movie Data（実データ）の各Chunk （ビデオChunk またはオーディオChunk ）をディスク上の連続記録長に対応させる。連続記録長とは、１回のアクセス、すなわち、光ピックアップ２３のジャンプ動作を伴わないで、連続したアドレスに書き込み可能な長さのことである。
【００６８】
また、図９は、QuickTime ムービーファイルを光ディスク２０に記録する他の例を示す。上述したように、ビデオChunk とオーディオChunk とが多重化されている場合には、Movie Data中の互いに対応する（隣接している）オーディオChunk とビデオChunk のペアを連続記録長に対応させる。
【００６９】
図８および図９に示すように、光ディスク２０上の連続記録長の位置は、物理的には不連続である。したがって、Movie Resourseを最初に再生し、次に最初のオーディオChunk およびビデオChunk を再生するまでの間のように、二つの連続記録長を再生する間では、トラックジャンプが生じる。しかしながら、上述したように、書き込み／読み出しデータの転送レートがQuickTime ムービーファイルの転送レートより高いもの、例えば２倍に選定されているので、間欠的な読み出しがなされても、連続したQuickTime ムービーファイルを再生することができる。
【００７０】
このように、QuickTime ムービーファイルの転送レート、光ディスクの読み出しレート、連続記録長の時間、ディスクドライブのシークタイム（あるトラックから異なるトラックにジャンプして再生するまでの時間）は、相互に関係している。したがって、連続記録長に記録されるビデオおよびオーディオデータの時間は、３秒以外に種々選ぶことができる。連続記録長に記録されるビデオデータのビデオフレーム数の時間に対応する時間に、整数個のオーディオサンプルが含まれることが好ましい。
【００７１】
上述した連続記録長として記録されるビデオデータの時間およびオーディオデータの時間は、固定でない場合には、そのQuickTime ムービーファイルのMovie Resourse中に連続記録長が記述される。例えば１個のビデオChunk 中のフレーム数、１個のオーディオChunk 中のサンプル数が記述される。
【００７２】
なお、以上の説明では、携帯形カメラ一体形ディスク記録再生装置に対してこの発明を適用した例について説明したが、他の機器に対してもこの発明を適用できる。例えばディジタルスチルカメラ、ディジタルオーディオレコーダ／プレーヤ等にもこの発明を適用できる。
【００７３】
さらに、この発明は、図１のブロック図に示すハードウエア構成の一部、または全体をソフトウェアによって実現するようにしても良い。また、このソフトウェアは、ＣＤ−ＲＯＭ等のコンピュータによって読み取り可能な記録媒体に格納されて提供される。
【００７４】
また、QuickTime について説明したが、それ以外に、複数の時系列的に変化する一連のデータを特殊なハードウエアを使用せずに同期して再生することを可能とするコンピュータソフトウェアに対してこの発明を適用しても良い。
【００７５】
【発明の効果】
この発明によれば、ＭＰＥＧ圧縮ビデオのＧＯＰの１または複数個がQuickTime 等のファイルの第１のデータ単位（Sample）に対応されているので、データ単位でのアクセス、編集が可能となる。また、光ディスクにファイル構造を有するデータを記録する時に、連続記録長を第２のデータ単位（例えばQuickTime のChunk ）に対応させているので、アクセス性、編集性を向上できる。
【図面の簡単な説明】
【図１】この発明の一実施形態のブロック図である。
【図２】この発明を適用できるQuickTime ファイルフォーマットの一例を示す略線図である。
【図３】この発明の一実施形態におけるＭＰＥＧビデオのＧＯＰとQuickTime のファイルフォーマットの関係を説明するための略線図である。
【図４】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の一例を説明するための略線図である。
【図５】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の他の例を説明するための略線図である。
【図６】この発明の一実施形態におけるＭＰＥＧビデオのＧＯＰとQuickTime のファイルフォーマットの関係を説明するための略線図である。
【図７】この発明の一実施形態における圧縮符号化オーディオとQuickTime のファイルフォーマットの関係の一例を説明するための略線図である。
【図８】この発明の一実施形態における光ディスクへの記録方法の一例を説明するための略線図である。
【図９】この発明の一実施形態における光ディスクへの記録方法の他の例を説明するための略線図である。
【符号の説明】
１・・・ビデオ符号器、２・・・オーディオ符号器、３・・・ビデオ復号器、４・・・オーディオ復号器、５・・・ファイル生成器、６・・・ファイル復号器、２０・・・光ディスク
Claims (9)
- ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録装置において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化手段と、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力手段と、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、上記符号化手段からの符号化ビデオデータと上記オーディオ出力手段からのオーディオデータのデータ構造をそれぞれ変換し、上記ファイル構造を有する符号化ビデオデータと上記オーディオデータを多重化する手段と、
上記ファイル構造を有し、多重化されたデータを光ディスクに記録する手段とからなり、
上記ファイル構造は、第１のデータ単位と、複数の上記第１のデータ単位の集合としての第２のデータ単位とを有し、
上記多重化されたデータは、上記第２のデータ単位の符号化ビデオデータと上記第２の単位のオーディオデータとが交互に配列され、
隣接する上記第２の単位の符号化ビデオデータおよびオーディオデータを上記光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録装置。 - 請求項１において、
上記符号化ビデオデータのグループ構造の１または複数個を上記ファイル構造の第１のデータ単位に対応させることを特徴とする記録装置。 - 請求項１において、
上記多重化されたデータは、上記第２のデータ単位の符号化ビデオデータと上記第２の単位のオーディオデータの時間長が略等しくされたことを特徴とする記録装置。 - 請求項１において、
上記オーディオデータがＡＴＲＡＣにより圧縮符号化され、
上記ファイル構造の上記第１のデータ単位に上記ＡＴＲＡＣの１または複数のサウンドユニットが含まれることを特徴とする記録装置。 - 請求項１において、
上記ファイル構造が管理情報を記述するためのデータ部分をさらに有することを特徴とする記録装置。 - 請求項１において、
上記ファイル構造が管理情報を記述するためのデータ部分をさらに有し、
上記データ部分に上記第１のデータ単位のサイズ情報と上記第２のデータ単位の位置情報とを記述することを特徴とする記録装置。 - ビデオデータおよびオーディオデータを書き換え可能な光ディスクに記録する記録方法において、
フレーム間予測符号化と動き補償とを組み合わせ、複数フレームのグループ構造を有する圧縮符号化によってビデオデータを符号化するビデオ符号化のステップと、
圧縮符号化または非圧縮のオーディオデータを出力するオーディオ出力のステップと、
特殊なハードウエアを用いずに動画等を同期して再生するためのコンピュータソフトウェアにより取り扱うことができるファイル構造を持つように、符号化ビデオデータと上記出力されるオーディオデータのデータ構造をそれぞれ変換し、上記ファイル構造を有する符号化ビデオデータと上記オーディオデータを多重化するステップと、
上記ファイル構造を有し、多重化されたデータを光ディスクに記録するステップとからなり、
上記ファイル構造は、第１のデータ単位と、複数の上記第１のデータ単位の集合としての第２のデータ単位とを有し、
上記多重化されたデータは、上記第２のデータ単位の符号化ビデオデータと上記第２の 単位のオーディオデータとが交互に配列され、
隣接する上記第２の単位の符号化ビデオデータおよびオーディオデータを上記光ディスクに書き込む時の連続記録長に対応させることを特徴とする記録方法。 - 請求項７において、
上記符号化ビデオデータのグループ構造の１または複数個を上記ファイル構造の第１のデータ単位に対応させることを特徴とする記録方法。 - 請求項７において、
上記多重化されたデータは、上記第２のデータ単位の符号化ビデオデータと上記第２の単位のオーディオデータの時間長が略等しくされたことを特徴とする記録方法。
Priority Applications (9)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26463199A JP4211153B2 (ja) | 1999-09-17 | 1999-09-17 | 記録装置および方法 |
| SG200005145A SG97930A1 (en) | 1999-09-17 | 2000-09-11 | Recording apparatus, recording method, and record medium |
| EP00307902A EP1085768B1 (en) | 1999-09-17 | 2000-09-13 | Recording apparatus, recording method and record medium |
| MYPI20051616A MY143018A (en) | 1999-09-17 | 2000-09-14 | Recording apparatus, recording method, and record medium. |
| MYPI20004278A MY131883A (en) | 1999-09-17 | 2000-09-14 | Recording apparatus, recording method, and record medium |
| CNB001286250A CN1229991C (zh) | 1999-09-17 | 2000-09-15 | 记录设备和记录方法 |
| US09/663,731 US7539399B1 (en) | 1999-09-17 | 2000-09-15 | Recording apparatus, recording method, and record medium |
| KR1020000054384A KR100732867B1 (ko) | 1999-09-17 | 2000-09-16 | 기록 장치 및 방법, 및 기록 매체 |
| US12/047,440 US8204360B2 (en) | 1999-09-17 | 2008-03-13 | Recording apparatus, recording method and record medium |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP26463199A JP4211153B2 (ja) | 1999-09-17 | 1999-09-17 | 記録装置および方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001094933A JP2001094933A (ja) | 2001-04-06 |
| JP4211153B2 true JP4211153B2 (ja) | 2009-01-21 |
Family
ID=17406038
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP26463199A Expired - Fee Related JP4211153B2 (ja) | 1999-09-17 | 1999-09-17 | 記録装置および方法 |
Country Status (7)
| Country | Link |
|---|---|
| US (2) | US7539399B1 (ja) |
| EP (1) | EP1085768B1 (ja) |
| JP (1) | JP4211153B2 (ja) |
| KR (1) | KR100732867B1 (ja) |
| CN (1) | CN1229991C (ja) |
| MY (2) | MY131883A (ja) |
| SG (1) | SG97930A1 (ja) |
Families Citing this family (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100739357B1 (ko) | 1999-09-30 | 2007-07-18 | 소니 가부시끼 가이샤 | 기록 장치, 기록 방법 및 기록 매체 |
| KR20020064125A (ko) * | 2001-01-31 | 2002-08-07 | (주)하이미디어통신 | 간단한 하드웨어 캡쳐와 소프트웨어 인코더를 이용한동영상 편집 장치 및 그 방법 |
| EP2204988A1 (en) * | 2001-06-15 | 2010-07-07 | Sharp Kabushiki Kaisha | Data recording method, data editing method and data decoding method and apparatus and recording medium thereon |
| AU2003248055A1 (en) * | 2002-07-12 | 2004-02-02 | Matsushita Electric Industrial Co., Ltd. | Data processing device |
| JP3824163B2 (ja) * | 2003-04-04 | 2006-09-20 | ソニー株式会社 | 記録制御装置および記録制御方法、プログラム、並びに記録媒体 |
| JP4062230B2 (ja) | 2003-10-10 | 2008-03-19 | ソニー株式会社 | ファイル記録再生装置、ファイル記録再生方法、ファイル記録再生方法のプログラム及びファイル記録再生方法のプログラムを記録した記録媒体 |
| JP4443387B2 (ja) | 2004-11-10 | 2010-03-31 | 三洋電機株式会社 | 動画像再生装置 |
| TWI288918B (en) * | 2006-03-30 | 2007-10-21 | Sunplus Technology Co Ltd | Optical storage media for real-time recording AVI-format file and method therefor |
| JP4810298B2 (ja) * | 2006-05-09 | 2011-11-09 | キヤノン株式会社 | 画像符号化装置及び符号化方法並びに画像復号化装置及び復号化方法 |
Family Cites Families (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4777537A (en) * | 1985-10-21 | 1988-10-11 | Sony Corporation | Signal recording apparatus and method |
| JPH03136485A (ja) * | 1989-10-20 | 1991-06-11 | Brother Ind Ltd | 特殊情報付ビデオディスクシステム |
| JP2712656B2 (ja) * | 1989-10-25 | 1998-02-16 | 日本電気ホームエレクトロニクス株式会社 | Ｃｄ―ｒｏｍ記録方法 |
| JP3158557B2 (ja) * | 1991-09-27 | 2001-04-23 | ソニー株式会社 | 再生装置 |
| US6208805B1 (en) * | 1992-02-07 | 2001-03-27 | Max Abecassis | Inhibiting a control function from interfering with a playing of a video |
| JP2993351B2 (ja) * | 1994-02-14 | 1999-12-20 | 松下電器産業株式会社 | 圧縮データ記録装置 |
| RU2158969C2 (ru) * | 1994-02-28 | 2000-11-10 | Сони Корпорейшн | Способ и устройство записи данных, среда записи данных, способ и устройство воспроизведения данных |
| US5740435A (en) * | 1994-10-31 | 1998-04-14 | Sony Corporation | Data management apparatus and method for managing data of variable lengths recorded on a record medium |
| JPH08339637A (ja) | 1995-04-11 | 1996-12-24 | Toshiba Corp | 記録媒体とこの記録媒体へのデータの記録装置とその記録方法、その記録媒体からのデータの再生装置とその再生方法 |
| US5819004A (en) * | 1995-05-08 | 1998-10-06 | Kabushiki Kaisha Toshiba | Method and system for a user to manually alter the quality of previously encoded video frames |
| US5999697A (en) * | 1995-07-21 | 1999-12-07 | Sony Corporation | Apparatus for recording and/or reproducing still images |
| TW385431B (en) * | 1995-09-29 | 2000-03-21 | Matsushita Electric Ind Co Ltd | A method and an apparatus for encoding a bitstream with plural possible searching reproduction paths information useful in multimedia optical disk |
| TW436777B (en) * | 1995-09-29 | 2001-05-28 | Matsushita Electric Ind Co Ltd | A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween |
| EP0847199B1 (en) * | 1995-09-29 | 1999-04-28 | Matsushita Electric Industrial Co., Ltd. | Method, disc and device for encoding seamless-connection of telecine-converted video data |
| TW303570B (ja) * | 1995-09-29 | 1997-04-21 | Matsushita Electric Ind Co Ltd | |
| US5627335A (en) * | 1995-10-16 | 1997-05-06 | Harmonix Music Systems, Inc. | Real-time music creation system |
| US5852800A (en) * | 1995-10-20 | 1998-12-22 | Liquid Audio, Inc. | Method and apparatus for user controlled modulation and mixing of digitally stored compressed data |
| JP3761623B2 (ja) * | 1996-03-18 | 2006-03-29 | パイオニア株式会社 | 情報記録媒体、情報記録装置及び方法並びに情報再生装置及び方法 |
| JP3156597B2 (ja) | 1996-09-04 | 2001-04-16 | 松下電器産業株式会社 | 画像情報復号化再生装置および画像情報復号化再生方法 |
| JPH10210409A (ja) | 1997-01-16 | 1998-08-07 | Sony Corp | 半導体メモリを用いた画像および音声記録装置および記録再生装置 |
| JPH10320913A (ja) * | 1997-05-23 | 1998-12-04 | Sony Corp | データ記録装置および方法、データ再生装置および方法、データ記録再生装置および方法、並びに伝送媒体 |
| US5998235A (en) * | 1997-06-26 | 1999-12-07 | Lockheed Martin Corporation | Method of fabrication for mercury-based quaternary alloys of infrared sensitive materials |
| US6222805B1 (en) * | 1997-08-07 | 2001-04-24 | Matsushita Electric Industrial Co., Ltd. | Optical disk, reproduction apparatus, and reproduction method |
| EP1020860B1 (en) * | 1997-09-17 | 2002-11-13 | Matsushita Electric Industrial Co., Ltd. | Optical disc recording apparatus, computer-readable recording medium recording a file management program, and optical disc |
| US6181870B1 (en) * | 1997-09-17 | 2001-01-30 | Matushita Electric Industrial Co., Ltd. | Optical disc having an area storing original and user chain information specifying at least part of a video object stored on the disc, and a computer program and recording apparatus for recording and editing the chain information |
| ID29305A (id) * | 1997-12-15 | 2001-08-16 | Matsushita Electric Ind Co Ltd | Piringan optik, aparatus perekaman, media penyimpanan komputer-yang-dapat-membaca yang menyimpan program perekaman, dan metoda perekaman |
| US6453355B1 (en) * | 1998-01-15 | 2002-09-17 | Apple Computer, Inc. | Method and apparatus for media data transmission |
| US6134243A (en) | 1998-01-15 | 2000-10-17 | Apple Computer, Inc. | Method and apparatus for media data transmission |
| US6744763B1 (en) | 1998-01-15 | 2004-06-01 | Apple Computer, Inc. | Method and apparatus for media data transmission |
| KR100739357B1 (ko) * | 1999-09-30 | 2007-07-18 | 소니 가부시끼 가이샤 | 기록 장치, 기록 방법 및 기록 매체 |
| JP3956549B2 (ja) * | 1999-09-30 | 2007-08-08 | ソニー株式会社 | 記録装置および方法、再生装置および方法並びに記録媒体 |
-
1999
- 1999-09-17 JP JP26463199A patent/JP4211153B2/ja not_active Expired - Fee Related
-
2000
- 2000-09-11 SG SG200005145A patent/SG97930A1/en unknown
- 2000-09-13 EP EP00307902A patent/EP1085768B1/en not_active Expired - Lifetime
- 2000-09-14 MY MYPI20004278A patent/MY131883A/en unknown
- 2000-09-14 MY MYPI20051616A patent/MY143018A/en unknown
- 2000-09-15 CN CNB001286250A patent/CN1229991C/zh not_active Expired - Fee Related
- 2000-09-15 US US09/663,731 patent/US7539399B1/en not_active Expired - Fee Related
- 2000-09-16 KR KR1020000054384A patent/KR100732867B1/ko not_active IP Right Cessation
-
2008
- 2008-03-13 US US12/047,440 patent/US8204360B2/en not_active Expired - Lifetime
Also Published As
| Publication number | Publication date |
|---|---|
| KR20010030413A (ko) | 2001-04-16 |
| MY143018A (en) | 2011-02-14 |
| JP2001094933A (ja) | 2001-04-06 |
| EP1085768B1 (en) | 2012-07-11 |
| CN1289209A (zh) | 2001-03-28 |
| US7539399B1 (en) | 2009-05-26 |
| EP1085768A2 (en) | 2001-03-21 |
| SG97930A1 (en) | 2003-08-20 |
| EP1085768A3 (en) | 2004-06-02 |
| MY131883A (en) | 2007-09-28 |
| KR100732867B1 (ko) | 2007-06-28 |
| CN1229991C (zh) | 2005-11-30 |
| US20080159723A1 (en) | 2008-07-03 |
| US8204360B2 (en) | 2012-06-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100739357B1 (ko) | 기록 장치, 기록 방법 및 기록 매체 | |
| US7313320B2 (en) | Recording apparatus, recording method, reproducing apparatus, reproducing method, and record medium | |
| US8204360B2 (en) | Recording apparatus, recording method and record medium | |
| WO2006027880A1 (ja) | 記録装置および方法、再生装置および方法、記録媒体、並びにプログラム | |
| TW450007B (en) | Information recording system and information recording method | |
| KR100858759B1 (ko) | 기록 장치 및 기록 매체 | |
| JP2006073173A (ja) | 情報記録再生装置及び方法 | |
| JP3991540B2 (ja) | 記録装置および方法、並びに記録媒体 | |
| JP4292465B2 (ja) | ファイル記録装置及びファイル記録方法 | |
| JP4154811B2 (ja) | 編集方法およびディジタル記録又は再生装置 | |
| JP4487196B2 (ja) | 記録装置及びその制御方法 | |
| JP4497019B2 (ja) | 映像処理装置 | |
| JPH0879710A (ja) | ディスクデータ再生方法および再生装置 | |
| JP2004140679A (ja) | 記録媒体とその再生装置及び記録装置 | |
| JP2000324447A (ja) | ディスク状記録媒体、記録装置及び再生装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060314 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080529 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080610 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080811 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20081007 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20081020 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111107 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111107 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111107 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121107 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121107 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131107 Year of fee payment: 5 |
|
| LAPS | Cancellation because of no payment of annual fees |