JP3849975B2 - Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method - Google Patents

Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method Download PDF

Info

Publication number
JP3849975B2
JP3849975B2 JP2001356414A JP2001356414A JP3849975B2 JP 3849975 B2 JP3849975 B2 JP 3849975B2 JP 2001356414 A JP2001356414 A JP 2001356414A JP 2001356414 A JP2001356414 A JP 2001356414A JP 3849975 B2 JP3849975 B2 JP 3849975B2
Authority
JP
Japan
Prior art keywords
audio
video information
recording
mpeg transport
recording unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001356414A
Other languages
Japanese (ja)
Other versions
JP2003158716A (en
Inventor
正紀 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Panasonic Holdings Corp
Original Assignee
Panasonic Corp
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Corp, Matsushita Electric Industrial Co Ltd filed Critical Panasonic Corp
Priority to JP2001356414A priority Critical patent/JP3849975B2/en
Publication of JP2003158716A publication Critical patent/JP2003158716A/en
Application granted granted Critical
Publication of JP3849975B2 publication Critical patent/JP3849975B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、リアルタイムで映像信号及び音声信号を圧縮して光ディスク等の記録媒体へ記録する音声/映像情報記録装置および方法、ならびに記録媒体に記録された映像信号及び音声信号を伸長して再生する音声/映像情報再生装置および方法に関する。
【0002】
【従来の技術】
映像データを低いビットレートで圧縮する方法として、MPEG2規格(ISO/IEC 13818-1)で規定されているシステムストリームがある。このシステムストリームとしては、プログラムストリーム、トランスポートストリーム、及びPES(Packetized Elementary Stream)ストリームの3種類が規定されている。
【0003】
一方、磁気テープに代わる記録媒体としては、相変化光ディスク(例えば、DVD−RAMやMVDISC)や光磁気ディスク(MO)等の光ディスクが注目を浴びてきている。例えば、DVD−RAM上に映像を記録するための規格として、VIDEO RECORDING規格(DVD Specifications for Rewritable/Re-recordable Discs Part 3 VIDEO RECORDING Version 1.0 September 1999)がある。この規格は、DVD−RAMディスクに対して、MPEG2規格のプログラムストリームから成る動画ファイルを記録再生するためのものである。
【0004】
また、相変化光ディスクに対して、ISO/IEC 13818-1で規定されるMPEG2のトランスポートストリームから成る動画ファイルを記録再生する場合もある。この場合、映像データは、ISO/IEC 13818-2で規定されるMPEG2で圧縮され、音声データは、例えばISO/IEC 13818-7で規定されるMPEG2−AAC(Advanced Audio Cording)で圧縮される。
【0005】
図3に、従来の相変化光ディスクを使ったトランスポートストリームのリアルタイム記録再生装置300の構成図を示す。図3において、映像信号および音声信号の記録時は、映像信号入力部100および音声信号入力部102から入力した信号を各々映像圧縮部101および音声圧縮部103で圧縮し、次にシステムエンコード部104においてトランスポートストリームを作成し、記録部120およびピックアップ130を経由して相変化光ディスク131へ書き込む。ここで、映像圧縮部101と、音声圧縮部103と、システムエンコード部104とでMPEGエンコーダ170が構成される。
【0006】
映像信号および音声信号の再生時は、ピックアップ130および再生部121を経由して取り出したトランスポートストリームをシステムデコード部114で映像信号と音声信号に分離し、各々映像伸長部111および音声伸長部113を介して、映像表示部110および音声出力部112へ出力する。ここで、映像伸長部111と、音声伸長部113と、システムデコード部114とでMPEGデコーダ171が構成される。
【0007】
映像信号および音声信号の記録時には、記録制御部161が、記録部120、連続データ領域検出部160、および論理ブロック管理部163の制御を行ない、記録を実施する。このとき、連続データ領域検出部160は、記録制御部161の指示に応じて、論理ブロック管理部163で管理されるセクタの使用状況を調べて、物理的に連続する空き領域を検出する。記録が完了する際に、トランスポートストリームからなる動画ファイルが作成される。
【0008】
映像信号および音声信号の再生時には、再生制御部162が、再生部121の制御を行ない、再生を実施する。
【0009】
記録された動画ファイルをIEEE1394インターフェース部(1394i/f部)140経由のアイソクロナス(Isochronous)転送モードで外部に出力する場合、1394再生制御部164が再生部121を経由して読み出したトランスポートストリームに対して、出力タイミング生成部141で送出タイミングを算出し、算出された送出タイミングに応じて当該トランスポートストリームを1394i/f部140へ渡すことになる。
【0010】
また、一方、外部から1394i/f部140を介してアイソクロナス転送モードで動画ファイルを入力する場合、記録制御部161が、記録部120、連続データ領域検出部160、および論理ブロック管理部163の制御を行い、記録を実施する。
【0011】
図4は、相変化光ディスク131にリアルタイムで映像記録する場合の記録形態を示す図である。図4において、相変化光ディスク131は2kバイトのセクタから構成され、16個のセクタを1つの論理ブロック(32kバイト)として取り扱い、この論理ブロックごとに誤り訂正符号を付与して相変化光ディスク131へ記録するようになっている。
【0012】
さらに、少なくとも所定時間分のデータサイズ(相変化光ディスク131に対して再生部121が読み出しを行う際の最大読み込みレートで、例えば0.5秒分のデータ)を有する物理的に連続する論理ブロックを1つの連続データ領域として確保し、この領域へ、0.4〜1秒分のMPEGトランスポートストリームからなる単位ビデオパケットであるムービー・オブジェクト・ユニット(Movie Object Unit:以下、「MOBU」という)を順に記録する。
【0013】
1つのMOBUは、188バイト単位のMPEGトランスポートストリームの下位階層であるトランスポートパケットから構成される。トランスポートパケットは、ビデオ圧縮データが格納されたビデオ・トランスポートパケット(V_TSP)と、オーディオ圧縮データが格納されたオーディオ・トランスポートパケット(A_TSP)と、プログラム・アソシエーション・テーブル・トランスポートパケット(PAT_TSP)と、プログラム・マップ・テーブル・トランスポートパケット(PMT_TSP)との4種類から構成されている。
【0014】
また、1つのMOBUには、対応する時間のV_TSPが全て含まれる。さらに、1つのMOBUには、T−STD(トランスポートストリーム・システム・ターゲットデコーダ)を満足するためにタイミング的に必要となる音声フレームを含むA_TSPが全て含まれる。すなわち、MOBU内で音声フレームが完結する。また、1つのMOBUのデータサイズは、動画が可変ビットレートであれば、最大記録再生レート以下の範囲で変動する。一方、動画が固定ビットレートであれば、MOBUのデータサイズはほぼ一定である。
【0015】
図5は、V_TSP、A_TSP、PAT_TSP、およびPMT_TSPの詳細を示す図である。図5に示すように、V_TSPは、トランスポートパケットヘッダとビデオデータから構成され、A_TSPは、トランスポートパケットヘッダとオーディオデータから構成され、PAT_TSPは、主にトランスポートパケットヘッダおよびプログラム・アソシエーション・テーブルから構成され、PMT_TSPは、主にトランスポートパケットヘッダおよびプログラム・マップ・テーブルから構成される。
【0016】
V_TSP、A_TSP、PAT_TSP、およびPMT_TSPの4つは、トランスポートパケットヘッダ内のPID(Packet ID)で識別される。例えば、図5に示すように、V_TSPにはPID=“0x0020”、A_TSPはPID=“0x0021”、PAT_TSPはPID=“0x0000”、PMT_TSPはPID=“0x0030”を検出することにより識別される。
【0017】
ここで、V_TSPおよびA_TSP用のPIDの割り当て状況は、PMT_TSP内のプログラム・マップ・テーブルに記録される。なお、PAT_TSP用のPIDは“0x0000”の固定値をとる。
【0018】
図3に示す情報記録再生装置の連続データ領域検出部160は、1つの連続データ領域の残りが少なくなった時点で、次の連続データ領域の再検出を行なう。そして、1つの連続データ領域が一杯になると、次の連続データ領域に書き込みを行なう。
【0019】
図6は、情報記録再生装置間で動画ファイルをダビングする場合の接続形態を示す図である。図6において、一方の情報記録再生装置501と他方の情報記録再生装置502とは、IEEE1394インターフェースケーブル(1394i/fケーブル)503を使用して接続される。情報記録再生装置501において記録された動画ファイルは、内部の1394i/f部140からIEEE1394インターフェースケーブル503を介して情報記録再生装置502の1394i/f部140へと、MPEGトランスポートストリーム伝送用のアイソクロナス転送モードで伝送され、受信側の情報記録再生装置502において動画ファイルとして記録される。
【0020】
【発明が解決しようとする課題】
上記のように、従来の情報記録再生装置間で、記録された動画ファイルを、1394i/fケーブル503を介してダビングする場合、受信側の情報記録再生装置502では、MOBUの境界を判定するために、少なくとも連続する3個のトランスポートパケット(PAT_TSP、PMT_TSP、およびV_TSP)の組をチェックした後、さらに3個目のパケットがV_TSPであり、そのパケットがシーケンスヘッダを有するかどうかを確認する必要があり、判定処理が複雑化するという問題があった。
【0021】
また、トランスポートストリームを音声(A_TSP)のみから構成する場合、例えば約1秒分に相当する個定数の音声フレームをMOBUに対応する記録単位として記録する。このようなストリームを同様にダビングする場合、受信側の情報記録再生装置502では、MOBUの境界を判定するために、少なくとも連続する3個のトランスポートパケット(PAT_TSP、PMT_TSP、およびA_TSP)の組をチェックした後、さらに3個目のパケットがA_TSPであり、そのパケットが音声フレームの先頭であるかどうかを確認する必要があり、やはり判定処理が複雑化していた。加えて、様々な音声圧縮フォーマット(AACの他に、例えばMPEGオーディオ、ドルビーAC3)毎にフレーム先頭のデータ構造が異なるので、音声フレームの先頭か否かの判定処理内容を音声圧縮フォーマット毎に切り換える必要があり、一層複雑化するという問題があった。
【0022】
本発明は、上記問題点に鑑みてなされたものであり、その目的は、複数の記録単位から構成される動画ファイルをIEEE1394のアイソクロナス伝送により装置間でダビングする場合、受信側で記録単位であるMOBUの境界を容易に検出でき、送信側が保持していたMOBU毎の管理情報を受信側で容易に復元可能にした情報記録装置および方法、ならびに情報再生装置および方法を提供することにある。
【0023】
【課題を解決するための手段】
前記の目的を達成するため、本発明に係る音声/映像情報記録装置は、映像情報および音声情報のうちの少なくともひとつをMPEGトランスポートパケットから構成されるMPEGトランスポートストリームとして記録する音声/映像情報記録部を備え、音声/映像情報記録部は、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、複数の記録単位が連続したデータストリームをMPEGトランスポートストリームとし、かつ記録単位の先頭のMPEGトランスポートパケットが記録単位の先頭であることを示す識別情報を含むように記録することを特徴とする。
【0024】
本発明に係る音声/映像情報記録装置において、識別情報は、トランスポート・プライオリティ・インディケータの値であることが好ましい。
【0025】
前記の目的を達成するため、本発明に係る音声/映像情報再生装置は、記録されたMPEGトランスポートパケットを出力する音声/映像情報再生部を備え、音声/映像情報再生部は、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、記録単位の先頭のMPEGトランスポートパケット記録単位の先頭であることを示す識別情報を含ませながら、複数の記録単位を連続して出力することを特徴とする。
【0026】
本発明に係る音声/映像情報再生装置において、識別情報は、トランスポート・プライオリティ・インディケータの値であることが好ましい。
【0027】
前記の目的を達成するため、本発明に係る音声/映像情報記録方法は、映像情報および音声情報のうちの少なくともひとつをMPEGトランスポートパケットから構成されるMPEGトランスポートストリームとして記録する音声/映像情報記録方法であって、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、複数の記録単位が連続したデータストリームをMPEGトランスポートストリームとし、かつ記録単位の先頭のMPEGトランスポートパケットが記録単位の先頭であることを示す識別情報を含むように記録することを特徴とする。
【0028】
本発明に係る音声/映像情報記録方法において、識別情報は、トランスポート・プライオリティ・インディケータの値であることが好ましい。
【0029】
前記の目的を達成するため、本発明に係る音声/映像情報再生方法は、記録されたMPEGトランスポートパケットを出力する音声/映像情報再生方法であって、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、記録単位の先頭のMPEGトランスポートパケット記録単位の先頭であることを示す識別情報を含ませながら、複数の記録単位を連続して出力することを特徴とする。
【0030】
本発明に係る音声/映像情報再生方法において、識別情報は、トランスポート・プライオリティ・インディケータの値であることが好ましい。
前記の目的を達成するため、本発明に係る音声/映像情報処理装置は、映像情報および音声情報のうちの少なくともひとつを含むMPEGトランスポートパケットを受信する音声/映像情報受信部を備え、前記音声/映像情報受信部は、所定の前記受信したMPEGトランスポートパケットの組を記録単位とみなし、前記記録単位の先頭のMPEGトランスポートパケットに含まれる識別情報を検出し、前記識別情報により前記記録単位を識別することを特徴とする。
本発明に係る音声/映像情報記録方法において、前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることが好ましい。
前記の目的を達成するため、本発明に係る音声/映像情報処理方法は、映像情報および音声情報のうちの少なくともひとつを含むMPEGトランスポートパケットを受信する音声/映像情報処理方法であって、所定の前記受信したMPEGトランスポートパケットの組を記録単位とみなし、前記記録単位の先頭のMPEGトランスポートパケットに含まれる識別情報を検出し、前記識別情報により前記記録単位を識別することを特徴とする。
本発明に係る音声/映像情報記録方法において、前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることが好ましい。
本発明に係る音声/映像情報記録装置において、前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加されることが好ましい。
本発明に係る音声/映像情報処理装置において、前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加されることが好ましい。
本発明に係る音声/映像情報記録方法において、前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加されることが好ましい。
本発明に係る音声/映像情報処理方法において、前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加されることが好ましい。
【0031】
上記の構成によれば、記録された動画ファイルをIEEE1394のアイソクロナス伝送により装置間でダビングする場合、受信側で記録単位であるMOBUの境界を容易に検出することが可能になる。
【0032】
【発明の実施の形態】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【0033】
図1は、本発明の一実施形態に係る情報記録再生装置200の構成を示すブロック図である。本実施形態と図3に示す従来例とは、1394再生制御部164の処理内容が異なる。その他の部分の構成および機能は従来と同じであり、同一の符号を付して説明を省略する。
【0034】
図2は、本実施形態における動画ファイルのデータ構造を示す図である。なお、図2において、MOBUを構成するトランスポートパケットは、従来と同じである。しかし、本実施形態と従来例とが異なるのは、MOBUの先頭のPAT_TSPにおけるトランスポートパケットヘッダ内のトランスポート・プライオリティ・インディケータ・フィールドの値が「1」(トランスポート・プライオリティ=1)になっていて、その他の位置のPAT_TSPにおけるトランスポート・プライオリティ・インディケータ・フィールドの値は「0」(トランスポート・プライオリティ=0)になっている点にある。
【0035】
動画ファイルのダビング時は、トランスポート・プライオリティ・インディケータ・フィールドの値が「1」で且つPIDが「0(ゼロ)」のトランスポートパケットを検出するだけで、MOBUの境界が検出できる。これにより、受信側において、動画ファイル中から再生を容易にするための管理情報として各MOBUの先頭アドレスを容易に作成可能になる。すなわち、トランスポートストリーム中の1個のトランスポートパケットヘッダのみを評価すれば良い。
【0036】
なお、本実施形態では、トランスポートパケットヘッダ内のトランスポート・プライオリティ・インディケータを使用したが、それに代えて、MOBU先頭のトランスポートパケットのトランスポートパケットヘッダのみにおいて、トランスポート・プライベート・データ・フィールド内にMOBUの先頭を示すデータ(例えば、4バイトの文字「MOBU」)を挿入しても良い。
【0037】
以上のように、本実施形態によれば、記録された動画ファイルをIEEE1394のアイソクロナス伝送により装置間でダビングする場合、受信側で記録単位であるMOBUの境界を容易に検出することができるようになる。これにより、送信側が保持していたMOBU毎の管理情報を受信側で容易に復元することが可能になる。
【0038】
なお、本実施形態では、記録単位であるMOBUの先頭はPAT_TSPから構成されるものとしたが、これ以外のV_TSPやその他のトランスポートパケットであっても良い。
【0039】
また、本実施形態では、記録単位であるMOBUがそのままIEEE1394インターフェース部140から外部へ出力されるものとしたが、特定のPIDを持つトランスポートパケットは出力時に除外されても良い。この場合、MOBU内において、その特定のPIDを持たないトランスポートパケットのうち、先頭のトランスポートパケットのプライオリティ・インディケータの値が「1」になっていれば良い。
【0040】
また、本実施形態では、記録時に、MOBU先頭のトランスポートパケットのプライオリティ・インディケータの値が「1」になっているものとしたが、記録時には常に、プライオリティ・インディケータの値を「0」にしておき、IEEE1394インターフェース部140から外部へ出力する直前に、その値を「1」に変更しても良い。
【0041】
また、本実施形態では、記録された動画ファイルは188バイトのパケットからなるトランスポートストリームであるものとしたが、188バイト以外のデータサイズのパケットからなるデータストリームであっても良い。例えば、IEEE1394インターフェースで送信されるトランスポートパケットは、188バイトに4バイトのタイミング情報を付加した192バイトが1単位となっているが、このようなデータストリームを記録しても良い。ただし、この場合、IEEE1394インターフェース上で伝送可能なMPEGストリームはトランスポートストリームに限られるので、追加される4バイトは送信時に破棄する必要がある。また、記録される動画ファイルを構成するパケットは、188バイト以外のデータサイズのパケットからなるデータストリームであっても良いことは言うまでも無い。
【0042】
また、本実施形態において、記憶媒体は相変化光ディスク(相変化光ディスク131)であるものとしたが、特にこれに限定するものではなく、例えばDVD−RAM、MO(光磁気ディスク)、DVD−R、DVD−RW、DVD+RW、CD−R、CD−RW等の光ディスクやハードディスク等のディスク形状を有する記録媒体、磁気テープ、およびフラッシュメモリ等の半導体メモリであっても良い。
【0043】
【発明の効果】
以上説明したように、本発明によれば、記録された動画ファイルをIEEE1394のアイソクロナス伝送により装置間でダビングする場合、受信側で記録単位であるMOBUの境界を容易に検出でき、送信側が保持していたMOBU毎の管理情報を受信側で容易に復元することが可能になる。
【図面の簡単な説明】
【図1】 本発明の一実施形態に係る音声/映像情報記録再生装置の機能構成を示すブロック図
【図2】 図1の情報記録再生装置における動画ファイルのデータ構造を示す図
【図3】 従来の音声/映像情報記録再生装置の機能構成を示すブロック図
【図4】 従来の情報記録再生装置における動画ファイルのデータ構造を示す図
【図5】 トランスポートパケットのデータ構造を示す図
【図6】 音声/映像情報記録再生装置間で動画ファイルをダビングする場合の接続形態を示す図
【符号の説明】
100 映像信号入力部
101 映像圧縮部
102 音声信号入力部
103 音声圧縮部
104 システムエンコード部
110 映像表示部
111 映像伸長部
112 音声出力部
113 音声伸長部
114 システムデコード部
120 記録部
121 再生部
130 ピックアップ
131 相変化光ディスク
140 IEEE1394インターフェース部(1394i/f部)
141 出力タイミング生成部
160 連続データ領域検出部
161 記録制御部
162 再生制御部
163 論理ブロック管理部
164 1394再生制御部
170 MPEGエンコーダ
171 MPEGデコーダ
200、300 音声/映像情報記録再生装置
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an audio / video information recording apparatus and method for compressing a video signal and an audio signal in real time and recording them on a recording medium such as an optical disc, and to expand and reproduce the video signal and the audio signal recorded on the recording medium. The present invention relates to an audio / video information reproducing apparatus and method.
[0002]
[Prior art]
As a method for compressing video data at a low bit rate, there is a system stream defined by the MPEG2 standard (ISO / IEC 13818-1). Three types of system streams are defined: a program stream, a transport stream, and a PES (Packetized Elementary Stream) stream.
[0003]
On the other hand, optical disks such as phase change optical disks (for example, DVD-RAM and MVDISC) and magneto-optical disks (MO) have been attracting attention as recording media replacing magnetic tapes. For example, there is a VIDEO RECORDING standard (DVD Specifications for Rewritable / Re-recordable Discs Part 3 VIDEO RECORDING Version 1.0 September 1999) as a standard for recording video on a DVD-RAM. This standard is for recording and reproducing a moving image file composed of a program stream of the MPEG2 standard on a DVD-RAM disk.
[0004]
In some cases, a moving image file composed of an MPEG2 transport stream defined by ISO / IEC 13818-1 is recorded on and reproduced from a phase change optical disk. In this case, the video data is compressed by MPEG2 specified by ISO / IEC 13818-2, and the audio data is compressed by MPEG2-AAC (Advanced Audio Cording) specified by ISO / IEC 13818-7, for example.
[0005]
FIG. 3 shows a configuration diagram of a transport stream real-time recording / reproducing apparatus 300 using a conventional phase change optical disk. In FIG. 3, at the time of recording a video signal and an audio signal, signals input from the video signal input unit 100 and the audio signal input unit 102 are compressed by the video compression unit 101 and the audio compression unit 103, respectively, and then the system encoding unit 104 A transport stream is created and written to the phase change optical disk 131 via the recording unit 120 and the pickup 130. Here, the video compression unit 101, the audio compression unit 103, and the system encoding unit 104 constitute an MPEG encoder 170.
[0006]
At the time of reproduction of the video signal and the audio signal, the transport stream taken out via the pickup 130 and the reproduction unit 121 is separated into the video signal and the audio signal by the system decoding unit 114, and the video expansion unit 111 and the audio expansion unit 113, respectively. To the video display unit 110 and the audio output unit 112. Here, an MPEG decoder 171 is configured by the video decompression unit 111, the audio decompression unit 113, and the system decoding unit 114.
[0007]
When recording a video signal and an audio signal, the recording control unit 161 controls the recording unit 120, the continuous data area detection unit 160, and the logical block management unit 163 to perform recording. At this time, the continuous data area detection unit 160 checks the usage status of the sectors managed by the logical block management unit 163 in accordance with an instruction from the recording control unit 161, and detects physically continuous free areas. When recording is completed, a moving image file composed of a transport stream is created.
[0008]
At the time of reproduction of a video signal and an audio signal, the reproduction control unit 162 controls the reproduction unit 121 to perform reproduction.
[0009]
When the recorded moving image file is output to the outside in the isochronous transfer mode via the IEEE 1394 interface unit (1394 i / f unit) 140, the 1394 playback control unit 164 outputs the transport stream read through the playback unit 121 to the transport stream. On the other hand, the transmission timing is calculated by the output timing generation unit 141, and the transport stream is transferred to the 1394 i / f unit 140 according to the calculated transmission timing.
[0010]
On the other hand, when the moving image file is input from the outside via the 1394 i / f unit 140 in the isochronous transfer mode, the recording control unit 161 controls the recording unit 120, the continuous data area detection unit 160, and the logical block management unit 163. And record.
[0011]
FIG. 4 is a diagram showing a recording form when video is recorded on the phase change optical disc 131 in real time. In FIG. 4, the phase change optical disk 131 is composed of 2 kbyte sectors, and 16 sectors are handled as one logical block (32 kbytes), and an error correction code is assigned to each logical block to the phase change optical disk 131. It comes to record.
[0012]
Furthermore, a physically continuous logical block having a data size of at least a predetermined time (maximum reading rate when the reproducing unit 121 reads out from the phase change optical disk 131, for example, data of 0.5 seconds). One continuous data area is secured, and a movie object unit (Movie Object Unit: hereinafter referred to as “MOBU”), which is a unit video packet composed of an MPEG transport stream for 0.4 to 1 second, is reserved in this area. Record in order.
[0013]
One MOBU is composed of transport packets which are lower layers of an MPEG transport stream of 188 bytes. The transport packet includes a video transport packet (V_TSP) in which compressed video data is stored, an audio transport packet (A_TSP) in which audio compressed data is stored, and a program association table transport packet (PAT_TSP). ) And a program map table transport packet (PMT_TSP).
[0014]
One MOBU includes all V_TSPs corresponding to the time. Further, one MOBU includes all A_TSPs including audio frames necessary in terms of timing in order to satisfy T-STD (Transport Stream System Target Decoder). That is, the audio frame is completed within the MOBU. Also, the data size of one MOBU varies within a range equal to or less than the maximum recording / reproduction rate if the moving image is a variable bit rate. On the other hand, if the moving image is a fixed bit rate, the data size of the MOBU is almost constant.
[0015]
FIG. 5 is a diagram illustrating details of V_TSP, A_TSP, PAT_TSP, and PMT_TSP. As shown in FIG. 5, V_TSP is composed of a transport packet header and video data, A_TSP is composed of a transport packet header and audio data, and PAT_TSP is mainly composed of a transport packet header and a program association table. The PMT_TSP mainly includes a transport packet header and a program map table.
[0016]
Four of V_TSP, A_TSP, PAT_TSP, and PMT_TSP are identified by PID (Packet ID) in the transport packet header. For example, as shown in FIG. 5, PID = "0x0020" is detected for V_TSP, PID = "0x0021" for A_TSP, PID = "0x0000" for PAT_TSP, and PID = "0x0030" for PMT_TSP.
[0017]
Here, the assignment status of PIDs for V_TSP and A_TSP is recorded in the program map table in PMT_TSP. The PID for PAT_TSP takes a fixed value of “0x0000”.
[0018]
The continuous data area detector 160 of the information recording / reproducing apparatus shown in FIG. 3 performs re-detection of the next continuous data area when the remaining one continuous data area is reduced. When one continuous data area becomes full, data is written to the next continuous data area.
[0019]
FIG. 6 is a diagram showing a connection form when dubbing a moving image file between information recording / reproducing apparatuses. In FIG. 6, one information recording / reproducing apparatus 501 and the other information recording / reproducing apparatus 502 are connected using an IEEE 1394 interface cable (1394 i / f cable) 503. The moving image file recorded in the information recording / reproducing apparatus 501 is isochronous for MPEG transport stream transmission from the internal 1394 i / f section 140 to the 1394 i / f section 140 of the information recording / reproducing apparatus 502 via the IEEE 1394 interface cable 503. It is transmitted in the transfer mode and recorded as a moving image file in the information recording / reproducing apparatus 502 on the receiving side.
[0020]
[Problems to be solved by the invention]
As described above, when a recorded moving image file is dubbed between the conventional information recording / reproducing apparatuses via the 1394 i / f cable 503, the information recording / reproducing apparatus 502 on the receiving side determines the boundary of the MOBU. After checking a set of at least three consecutive transport packets (PAT_TSP, PMT_TSP, and V_TSP), it is necessary to check whether the third packet is V_TSP and that the packet has a sequence header. There is a problem that the determination process becomes complicated.
[0021]
Further, when the transport stream is composed only of audio (A_TSP), for example, a constant number of audio frames corresponding to about 1 second is recorded as a recording unit corresponding to MOBU. When such a stream is similarly dubbed, the receiving side information recording / reproducing apparatus 502 uses a set of at least three consecutive transport packets (PAT_TSP, PMT_TSP, and A_TSP) in order to determine the boundary of the MOBU. After the check, the third packet is A_TSP, and it is necessary to check whether or not the packet is the head of the voice frame, which again complicates the determination process. In addition, since the data structure at the head of the frame is different for each of various audio compression formats (for example, MPEG audio, Dolby AC3 in addition to AAC), the content of determination processing for determining whether or not it is the head of the audio frame is switched for each audio compression format. There was a problem of necessity and complexity.
[0022]
The present invention has been made in view of the above problems, and an object thereof is a recording unit on the receiving side when dubbing a moving image file composed of a plurality of recording units between apparatuses by IEEE 1394 isochronous transmission. An object of the present invention is to provide an information recording apparatus and method, and an information reproducing apparatus and method that can easily detect the boundary of the MOBU and can easily restore the management information for each MOBU held on the transmitting side on the receiving side.
[0023]
[Means for Solving the Problems]
To achieve the above object, an audio / video information recording apparatus according to the present invention records audio / video information as an MPEG transport stream composed of MPEG transport packets, at least one of video information and audio information. The audio / video information recording unit treats a set of predetermined MPEG transport packets as one recording unit, a data stream in which a plurality of recording units are continuous as an MPEG transport stream, and the beginning of the recording unit The MPEG transport packet is recorded so as to include identification information indicating the beginning of the recording unit.
[0024]
In the audio / video information recording apparatus according to the present invention, the identification information is preferably a value of a transport priority indicator.
[0025]
In order to achieve the above object, an audio / video information reproducing apparatus according to the present invention includes an audio / video information reproducing unit for outputting a recorded MPEG transport packet, and the audio / video information reproducing unit has a predetermined MPEG. Handle a set of transport packets as one recording unit, and output multiple recording units continuously while including identification information indicating the beginning of the recording unit in the MPEG transport packet at the beginning of the recording unit. It is characterized by.
[0026]
In the audio / video information reproducing apparatus according to the present invention, the identification information is preferably a value of a transport priority indicator.
[0027]
To achieve the above object, an audio / video information recording method according to the present invention records audio / video information as an MPEG transport stream composed of MPEG transport packets, at least one of video information and audio information. A recording method in which a predetermined set of MPEG transport packets is treated as one recording unit, a data stream in which a plurality of recording units are continuous is defined as an MPEG transport stream, and the first MPEG transport packet in the recording unit is recorded. It is recorded so that the identification information which shows that it is the head of a unit is included.
[0028]
In the audio / video information recording method according to the present invention, the identification information is preferably a value of a transport priority indicator.
[0029]
In order to achieve the above object, an audio / video information reproducing method according to the present invention is an audio / video information reproducing method for outputting a recorded MPEG transport packet. A plurality of recording units are continuously output while including identification information indicating the beginning of the recording unit in the MPEG transport packet at the beginning of the recording unit.
[0030]
In the audio / video information reproducing method according to the present invention, the identification information is preferably a value of a transport priority indicator.
To achieve the above object, an audio / video information processing apparatus according to the present invention includes an audio / video information receiving unit that receives an MPEG transport packet including at least one of video information and audio information, and The video information receiving unit regards a predetermined set of received MPEG transport packets as a recording unit, detects identification information included in the first MPEG transport packet of the recording unit, and uses the identification information to detect the recording unit. It is characterized by identifying.
In the audio / video information recording method according to the present invention, it is preferable that the identification information is a predetermined value of a transport priority indicator.
To achieve the above object, an audio / video information processing method according to the present invention is an audio / video information processing method for receiving an MPEG transport packet including at least one of video information and audio information. The received MPEG transport packet set is regarded as a recording unit, identification information included in the first MPEG transport packet of the recording unit is detected, and the recording unit is identified by the identification information. .
In the audio / video information recording method according to the present invention, it is preferable that the identification information is a predetermined value of a transport priority indicator.
In the audio / video information recording apparatus according to the present invention, it is preferable that timing information is individually added to the MPEG transport packet.
In the audio / video information processing apparatus according to the present invention, it is preferable that timing information is individually added to the MPEG transport packet.
In the audio / video information recording method according to the present invention, it is preferable that timing information is individually added to each of the MPEG transport packets.
In the audio / video information processing method according to the present invention, it is preferable that timing information is individually added to each of the MPEG transport packets.
[0031]
According to the above configuration, when a recorded moving image file is dubbed between apparatuses by IEEE 1394 isochronous transmission, it is possible to easily detect the boundary of the MOBU which is a recording unit on the receiving side.
[0032]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[0033]
FIG. 1 is a block diagram showing a configuration of an information recording / reproducing apparatus 200 according to an embodiment of the present invention. The processing content of the 1394 playback control unit 164 is different between this embodiment and the conventional example shown in FIG. The configuration and function of the other parts are the same as those in the prior art, and the same reference numerals are given and description thereof is omitted.
[0034]
FIG. 2 is a diagram illustrating a data structure of a moving image file in the present embodiment. In FIG. 2, the transport packets constituting the MOBU are the same as the conventional ones. However, the difference between this embodiment and the conventional example is that the value of the transport priority indicator field in the transport packet header in the PAT_TSP at the head of the MOBU is “1” (transport priority = 1). Therefore, the value of the transport priority indicator field in the PAT_TSP at other positions is “0” (transport priority = 0).
[0035]
When dubbing a moving image file, the boundary of the MOBU can be detected only by detecting a transport packet having a transport priority indicator field value of “1” and a PID of “0 (zero)”. As a result, on the receiving side, it is possible to easily create the start address of each MOBU as management information for facilitating reproduction from the moving image file. That is, only one transport packet header in the transport stream needs to be evaluated.
[0036]
In this embodiment, the transport priority indicator in the transport packet header is used. Instead, the transport private data field is used only in the transport packet header of the MOBU head transport packet. Data indicating the beginning of the MOBU (for example, a 4-byte character “MOBU”) may be inserted.
[0037]
As described above, according to the present embodiment, when a recorded moving image file is dubbed between apparatuses by IEEE1394 isochronous transmission, the boundary of the MOBU that is a recording unit can be easily detected on the receiving side. Become. This makes it possible to easily restore management information for each MOBU held on the transmission side on the reception side.
[0038]
In the present embodiment, the head of MOBU, which is a recording unit, is composed of PAT_TSP, but other V_TSP and other transport packets may be used.
[0039]
In this embodiment, the MOBU that is a recording unit is output as it is from the IEEE 1394 interface unit 140 as it is, but a transport packet having a specific PID may be excluded at the time of output. In this case, it is only necessary that the priority indicator value of the first transport packet among the transport packets not having the specific PID in the MOBU is “1”.
[0040]
In the present embodiment, the value of the priority indicator of the transport packet at the beginning of the MOBU is “1” at the time of recording. However, the value of the priority indicator is always set to “0” at the time of recording. Alternatively, the value may be changed to “1” immediately before output from the IEEE 1394 interface unit 140 to the outside.
[0041]
In the present embodiment, the recorded moving image file is a transport stream composed of 188-byte packets, but may be a data stream composed of packets having a data size other than 188 bytes. For example, a transport packet transmitted through the IEEE 1394 interface has 192 bytes, which is 188 bytes plus 4 bytes of timing information, as a unit, but such a data stream may be recorded. However, in this case, since the MPEG stream that can be transmitted on the IEEE 1394 interface is limited to the transport stream, it is necessary to discard the added 4 bytes at the time of transmission. Needless to say, the packets constituting the moving image file to be recorded may be a data stream composed of packets having a data size other than 188 bytes.
[0042]
In this embodiment, the storage medium is a phase change optical disk (phase change optical disk 131). However, the present invention is not limited to this. For example, a DVD-RAM, MO (magneto-optical disk), DVD-R , DVD-RW, DVD + RW, CD-R, CD-RW and other optical disks and recording media having a disk shape such as a hard disk, magnetic tape, and semiconductor memory such as flash memory.
[0043]
【The invention's effect】
As described above, according to the present invention, when a recorded moving image file is dubbed between apparatuses by IEEE 1394 isochronous transmission, the boundary of MOBU which is a recording unit can be easily detected on the receiving side, and the transmitting side holds it. The management information for each MOBU that has been stored can be easily restored on the receiving side.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a functional configuration of an audio / video information recording / reproducing apparatus according to an embodiment of the present invention. FIG. 2 is a diagram showing a data structure of a moving image file in the information recording / reproducing apparatus of FIG. FIG. 4 is a block diagram showing a functional configuration of a conventional audio / video information recording / reproducing apparatus. FIG. 4 is a diagram showing a data structure of a moving image file in a conventional information recording / reproducing apparatus. 6] Diagram showing the connection form when dubbing a video file between audio / video information recording / reproducing devices
100 video signal input unit 101 video compression unit 102 audio signal input unit 103 audio compression unit 104 system encoding unit 110 video display unit 111 video expansion unit 112 audio output unit 113 audio expansion unit 114 system decoding unit 120 recording unit 121 reproduction unit 130 pickup 131 Phase change optical disk 140 IEEE1394 interface part (1394i / f part)
141 Output Timing Generation Unit 160 Continuous Data Area Detection Unit 161 Recording Control Unit 162 Playback Control Unit 163 Logical Block Management Unit 164 1394 Playback Control Unit 170 MPEG Encoder 171 MPEG Decoder 200, 300 Audio / Video Information Recording / Reproduction Device

Claims (16)

映像情報および音声情報のうちの少なくともひとつをMPEGトランスポートパケットから構成されるMPEGトランスポートストリームとして記録する音声/映像情報記録部を備え、
前記音声/映像情報記録部は、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、複数の前記記録単位が連続したデータストリームを前記MPEGトランスポートストリームとし、かつ前記記録単位の先頭のMPEGトランスポートパケットが前記記録単位の先頭であることを示す識別情報を含むように記録することを特徴とする音声/映像情報記録装置。
An audio / video information recording unit that records at least one of video information and audio information as an MPEG transport stream composed of MPEG transport packets;
The audio / video information recording unit treats a set of predetermined MPEG transport packets as one recording unit, a data stream in which a plurality of recording units are continuous as the MPEG transport stream, and the top of the recording unit. An audio / video information recording apparatus, wherein an MPEG transport packet is recorded so as to include identification information indicating the beginning of the recording unit.
前記識別情報は、トランスポート・プライオリティ・インディケータの値であることを特徴とする請求項1記載の音声/映像情報記録装置。  2. The audio / video information recording apparatus according to claim 1, wherein the identification information is a value of a transport priority indicator. 記録されたMPEGトランスポートパケットを出力する音声/映像情報再生部を備え、
前記音声/映像情報再生部は、所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、前記記録単位の先頭のMPEGトランスポートパケット前記記録単位の先頭であることを示す識別情報を含ませながら、複数の前記記録単位を連続して出力することを特徴とする音声/映像情報再生装置。
An audio / video information reproducing unit for outputting the recorded MPEG transport packet;
The audio / video information reproducing section, including identification information indicating that treats a set of predetermined MPEG transport packets as one recording unit, a head of the recording unit at the head of the MPEG transport packet of the recording unit Mase while, audio / video information reproducing apparatus characterized by continuously outputting a plurality of said recording unit.
前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることを特徴とする請求項3記載の音声/映像情報再生装置。  4. The audio / video information reproducing apparatus according to claim 3, wherein the identification information is a predetermined value of a transport priority indicator. 映像情報および音声情報のうちの少なくともひとつをMPEGトランスポートパケットから構成されるMPEGトランスポートストリームとして記録する音声/映像情報記録方法であって、
所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、複数の前記記録単位が連続したデータストリームを前記MPEGトランスポートストリームとし、かつ前記記録単位の先頭のMPEGトランスポートパケットが前記記録単位の先頭であることを示す識別情報を含むように記録することを特徴とする音声/映像情報記録方法。
An audio / video information recording method for recording at least one of video information and audio information as an MPEG transport stream composed of MPEG transport packets,
A set of predetermined MPEG transport packets is treated as one recording unit, a data stream in which a plurality of recording units are continuous is used as the MPEG transport stream, and the first MPEG transport packet of the recording unit is the recording unit. An audio / video information recording method comprising recording so as to include identification information indicating the head.
前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることを特徴とする請求項5記載の音声/映像情報記録方法。  6. The audio / video information recording method according to claim 5, wherein the identification information is a predetermined value of a transport priority indicator. 記録されたMPEGトランスポートパケットを出力する音声/映像情報再生方法であって、
所定のMPEGトランスポートパケットの組をひとつの記録単位として扱い、前記記録単位の先頭のMPEGトランスポートパケット前記記録単位の先頭であることを示す識別情報を含ませながら、複数の前記記録単位を連続して出力することを特徴とする音声/映像情報再生方法。
An audio / video information reproducing method for outputting a recorded MPEG transport packet,
A predetermined set of MPEG transport packets is treated as one recording unit, and a plurality of the recording units are included while including identification information indicating the beginning of the recording unit in the first MPEG transport packet of the recording unit. A method of reproducing audio / video information, wherein the audio / video information is output continuously.
前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることを特徴とする請求項7記載の音声/映像情報再生方法。  8. The audio / video information reproducing method according to claim 7, wherein the identification information is a predetermined value of a transport priority indicator. 映像情報および音声情報のうちの少なくともひとつを含むMPEGトランスポートパケットを受信する音声/映像情報受信部を備え、An audio / video information receiving unit for receiving an MPEG transport packet including at least one of video information and audio information;
前記音声/映像情報受信部は、所定の前記受信したMPEGトランスポートパケットの組を記録単位とみなし、前記記録単位の先頭のMPEGトランスポートパケットに含まれる識別情報を検出し、前記識別情報により前記記録単位を識別することを特徴とする音声/映像情報処理装置。The audio / video information receiving unit regards a predetermined set of received MPEG transport packets as a recording unit, detects identification information included in the first MPEG transport packet of the recording unit, and uses the identification information to detect the identification information. An audio / video information processing apparatus characterized by identifying a recording unit.
前記識別情報は、トランスポート・プライオリティ・インディケータの所定値であることを特徴とする、請求項9記載の音声/映像情報記録方法。10. The audio / video information recording method according to claim 9, wherein the identification information is a predetermined value of a transport priority indicator. 映像情報および音声情報のうちの少なくともひとつを含むMPEGトランスポートパケットを受信する音声/映像情報処理方法であって、An audio / video information processing method for receiving an MPEG transport packet including at least one of video information and audio information,
所定の前記受信したMPEGトランスポートパケットの組を記録単位とみなし、前記記録単位の先頭のMPEGトランスポートパケットに含まれる識別情報を検出し、前記識別情報により前記記録単位を識別することを特徴とする音声/映像情報処理方法。A predetermined set of the received MPEG transport packets is regarded as a recording unit, identification information included in the first MPEG transport packet of the recording unit is detected, and the recording unit is identified by the identification information. Audio / video information processing method.
前記識別情報は、トランスポート・プライオリティ・インディケータThe identification information is a transport priority indicator. の所定値であることを特徴とする、請求項11に記載の音声/映像情報記録方法。The audio / video information recording method according to claim 11, wherein the audio / video information recording method is a predetermined value. 前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加される、請求項1から2に記載の音声/映像情報記録装置。3. The audio / video information recording apparatus according to claim 1, wherein timing information is individually added to each of the MPEG transport packets. 前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加される、請求項9から10に記載の音声/映像情報処理装置。11. The audio / video information processing apparatus according to claim 9, wherein timing information is individually added to each of the MPEG transport packets. 前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加される、請求項5から6に記載の音声/映像情報記録方法。7. The audio / video information recording method according to claim 5, wherein timing information is individually added to the MPEG transport packet. 前記MPEGトランスポートパケットには、それぞれ個別にタイミング情報が付加される、請求項11から12に記載の音声/映像情報処理方法。13. The audio / video information processing method according to claim 11, wherein timing information is individually added to each of the MPEG transport packets.
JP2001356414A 2001-11-21 2001-11-21 Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method Expired - Fee Related JP3849975B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001356414A JP3849975B2 (en) 2001-11-21 2001-11-21 Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001356414A JP3849975B2 (en) 2001-11-21 2001-11-21 Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method

Publications (2)

Publication Number Publication Date
JP2003158716A JP2003158716A (en) 2003-05-30
JP3849975B2 true JP3849975B2 (en) 2006-11-22

Family

ID=19167934

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001356414A Expired - Fee Related JP3849975B2 (en) 2001-11-21 2001-11-21 Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method

Country Status (1)

Country Link
JP (1) JP3849975B2 (en)

Also Published As

Publication number Publication date
JP2003158716A (en) 2003-05-30

Similar Documents

Publication Publication Date Title
CA2439467C (en) A method and an apparatus for stream conversion, a method and an apparatus for data recording, and data recording medium
US7386223B2 (en) Method and an apparatus for stream conversion a method and an apparatus for data recording and data recording medium
TW425544B (en) Information storage and information transmission media with parental control
EP0837472B1 (en) Signal recording apparatus and signal recording method
WO1998014938A1 (en) Recording/reproducing method suitable for recording/reproducing av data on/from disc, recorder and reproducer for the method, information recording disc and information processing system
RU2214632C2 (en) Record medium (alternatives)
US20040114908A1 (en) Av data recording/reproducing apparatus and method for the same, and disc on which data is recorded by the av data recording/reproducing apparatus or method
US8126315B2 (en) Recording medium for carrying transport time information
KR100335440B1 (en) Disc recording DVD application on CD media, recording and/or reproducing apparatus and method therefor
JPWO2004080071A1 (en) Data processing device
US7805059B2 (en) Data recording method, data recording apparatus and image pick-up apparatus
JP3795382B2 (en) Information recording apparatus and method, and information reproducing apparatus and method
JP3849975B2 (en) Audio / video information recording apparatus and method, and audio / video information reproducing apparatus and method
JP2006244699A (en) Method for recording audio data on rewritable recording medium
US7099560B2 (en) Information recording apparatus, information recording method, and information recording medium in which information recording program is computer-readably recorded
JPH117705A (en) Recorder of optical disc, optical disc data transfer device, optical disc data format device and optical disc reproducer
CN100536554C (en) Data processing device and method thereof
JP4830773B2 (en) Data processing apparatus, method, and program
US20020081101A1 (en) Write-once disc recording system with audio after-recording capability
US20050195721A1 (en) High density optical disc and method for creating and reproducing file system of the same
KR101040553B1 (en) Apparatus and method for recording data separation in disc recorder
JP2004192661A (en) Device and method for recording and reproducing audio/video information
JP2003006983A (en) Recording/playing back method and system for optical disk
JP2003036649A (en) Disk recording and reproducing apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040908

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060601

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060731

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060824

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060825

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090908

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100908

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110908

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120908

Year of fee payment: 6

LAPS Cancellation because of no payment of annual fees