JP3647387B2 - Optical recording / reproducing device - Google Patents

Optical recording / reproducing device Download PDF

Info

Publication number
JP3647387B2
JP3647387B2 JP2001111875A JP2001111875A JP3647387B2 JP 3647387 B2 JP3647387 B2 JP 3647387B2 JP 2001111875 A JP2001111875 A JP 2001111875A JP 2001111875 A JP2001111875 A JP 2001111875A JP 3647387 B2 JP3647387 B2 JP 3647387B2
Authority
JP
Japan
Prior art keywords
channel
audio data
data stream
program
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001111875A
Other languages
Japanese (ja)
Other versions
JP2002063780A (en
Inventor
誠辰 文
永南 呉
泰允 鄭
政錫 姜
判基 朴
鳳吉 朴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to JP2001111875A priority Critical patent/JP3647387B2/en
Publication of JP2002063780A publication Critical patent/JP2002063780A/en
Application granted granted Critical
Publication of JP3647387B2 publication Critical patent/JP3647387B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、複数本のオーディオデータストリームを含むプログラムを再生するA/V機器において、プログラム或いはオーディオデータストリームが切り換わった場合であっても、使用者により選択されたオーディオチャネルを追従して選択できるようにしたオーディオチャネルID(Identification)付加方法、これを用いたオーディオチャネル選択方法、及びこれに適した光記録再生装置に関する。
【0002】
【従来の技術】
現在、オーディオ信号の圧縮符号化方法として、主にMPEG、AC3が用いられ、また、圧縮符号化をせずにそのまま記録を行うLPCM(Linear Pulse Code Modulation)も用いられている。デジタルテレビ放送又はデジタルAV機器であるVCD、DVDなどでは、主としてMPEGが用いられる。
【0003】
MPEG A/Vデータの符号化されたデータストリーム、及びそれ以外のデータストリームを統合して実際の応用に適用する場合、かかるデータが統合された1本のデータストリームにする必要があり、応用形態に応じては、ある補助データを付加して用いることもできる。このように、ビデオデータ及びオーディオデータを同期させながら多重化させることが、MPEGシステムの機能である。
【0004】
MPEGシステムにおいては、パケットによる多重化方式を採択している。パケットによる多重化とは、ビデオデータ及びオーディオデータのそれぞれを、パケットと呼ばれる適当な長さのデータストリームに分割し、ヘッダなどの情報を付加して、ビデオデータ及びオーディオデータのパケットを多重化する方式である。
【0005】
これらのパケットには、図1に示されたように、ヘッダと呼ばれる部分に、ビデオデータか、或いはオーディオデータかの属性を識別するための情報が存する。パケットの長さは、伝送媒体又は応用形態による。
【0006】
表1は、図1に示されたパケットヘッダの内容を示している。
【表1】

Figure 0003647387
【0007】
ここで、Packet_start_code_prefixはパケットが開始することを表し、stream_idはデータの種類を表す。例えば、ビデオデータの場合には2進数で“1110 0000”bとなり、オーディオデータの場合には2進数で“1100 0***”bとなる。ここで、***は、000bから111bまで、合計8種類のデータストリームが存しうることを表す。MPEGシステムにおいては、この2種類以外のデータに対しては、privateストリームとして用いるようにしているが、このprivateストリームには“1011 1101”bというコードが使用可能である。
【0008】
PTS(Presentation Time Stamp)及びDTS(Decoding Time Stamp)は、MPEGシステム規格に準拠したものであって、それぞれビデオデータまたはオーディオデータ等における再生単位(presentation unit)の出力時間及び復号化時間を表す。再生単位は、ビデオデータにおいては、映像の1フレームをいい、オーディオデータにおいては、音声の1フレームをいう。オーディオデータの場合には、DTSが不要である。
【0009】
MPEGオーディオデータを除いたAC3又はLPCMなどのオーディオデータは、privateストリーム化して構成される。このときのパケットヘッダを表2に示す。
【表2】
Figure 0003647387
【0010】
ここで、substream_idの場合には、AC3又はLPCMなど、オーディオ符号化の種類を区別するために用いられる。例えば、AC3の場合には、“1010 ***”bである。ここで、***は、MPEGオーディオデータにおけるように、8本までのデータストリームが存しうるという意味である。MPEGにおいては、1つのプログラムが多数本のビデオデータストリーム及びオーディオデータストリームを持つことができる。
【0011】
number_of_audio_channelsは、チャネル数を表すものであって、1ch、2ch、3ch、4ch及びdual monoチャネルなどがある。ここでのチャネルは、使用者が選択をするという意味のチャネルとは異なる。すなわち、dual monoチャネルを除いては、いずれも使用者にとって1つのチャネルとして認識される。dual monoは、2つとして認識される。
【0012】
MPEG−1又はMPEG−2 PS(Program Stream)においては、ビデオパケット又はオーディオパケットの上位に、パック(Pack)と呼ばれる上位階層が存する。通常、複数のビデオパケット又はオーディオパケットからなるパックを1つの基本単位として取扱う。図2は、パックの構造を示すものである。これを参照すると、パックヘッダのところに、同期再生のための時間基準参照用の付加情報が存する。
【0013】
表3は、図2に示されたパックヘッダの内容を示す。
【表3】
Figure 0003647387
【0014】
ここで、Pack_start_codeは、ここからパックデータが開始するということを知らせるコードである。また、SCR valueは、このパックデータが復号器のバッファに達した時間を表すものであって、符号化端及び復号化端のシステムクロックを同期させるために用いられる。program_mux_rateは、ビデオデータ、オーディオデータ、privateデータがいずれも多重化され伝送される伝送率を表す。ここで、正しい復号のためには、この伝送率より高伝送率での伝送が要求される。pack_stuffing_lengthは、ダミーデータの数を表す。
【0015】
図3は、チャネル及びこれに相当するオーディオ信号を示すものである。図3に示されたように、復号器を介してオーディオ信号が出力される。ここで、dual monoチャネルデータの場合には、CH0オーディオデータ及びCH1オーディオデータが出力され、2chデータの場合と極めて似ているように見えるが、dual monoチャネルデータの場合には、CH0オーディオデータ及びCH1オーディオデータが互いに関連のないオーディオデータであるのに対し、2chデータの場合には、左オーディオデータ及び右オーディオデータが互いに関連しているという点で相違する。
【0016】
例えば、dual monoチャネルにおいて、CH0には韓国語のオーディオデータが、CH1には英語のオーディオデータが載せられる場合がある。ここで、通常は、2チャネルの内いずれか1つだけを選択して出力する。または、左スピーカを介してCH0を、右スピーカを介してCH1を出力する場合もある。
【0017】
図4は、dual monoチャネルのデータを復号及び出力する装置の一例を示すものである。図4に示された装置において、選択信号が0であれば、左オーディオデータ及び右オーディオデータともCH0オーディオデータを出力し、選択信号が1であれば、左オーディオデータ及び右オーディオデータともCH1オーディオデータを出力する。そして、選択信号が2であれば、LEFT AUDIOにCH1オーディオデータを、RIGHT AUDIOにCH1オーディオデータを出力する。
【0018】
図5は、音声多重オーディオ信号をdual monoのオーディオデータとして記録又は再生する方法を示すものである。音声多重オーディオ信号は、主オーディオデータと副オーディオデータとで構成される。記録に際し、主オーディオデータ及び副オーディオデータは、音声多重符号化器を介して1本のオーディオデータストリームに符号化される。このとき、主オーディオデータはCH0に符号化され、副オーディオデータはCH1に符号化される。
【0019】
再生に際し、オーディオデータストリームは、音声多重復号化器を介してCH0オーディオデータ及びCH1オーディオデータに復号化される。ここで、CH0オーディオデータは主オーディオデータであり、CH1オーディオデータは副オーディオデータである。
【0020】
ここで、複数本のオーディオデータストリームが存すると仮定する。例えば、A/Vデータストリーム内に2本のオーディオデータストリームが存するとするとき、使用者は、2つのチャネルの内いずれか1つを選択することができる。ところが、選択されたオーディオデータストリームがdual monoデータであれば、すなわち、サブオーディオデータストリームを含む場合であれば、使用者はさらに2つのチャネルを選択することができる。
【0021】
【発明が解決しようとする課題】
本発明の目的は、複数本のオーディオデータストリームを含むA/Vデータストリームにおいて、それぞれのオーディオデータストリームがdual monoモードである場合、オーディオデータストリームに含まれたサブオーディオデータストリームにチャネルIDを付加する方法を提供することにある。
【0022】
本発明の他の目的は、dual monoモードを認める複数本のオーディオデータストリームを再生するA/V機器において、プログラム或いはオーディオデータストリームが切り換わった場合であっても、使用者により入力されたオーディオチャネルを追従して、同種のオーディオチャネルを選択する方法を提供することにある。
【0023】
本発明のさらに他の目的は、上記したオーディオチャネル選択方法に適した装置を提供することにある。
【0024】
【課題を解決するための手段】
本発明にかかる装置は、ディスク上の/からの光学信号を記録しかつ再生するための光記録再生装置であって、
ディスクから光学信号をピックアップするピックアップ部と、
ピックアップ部で生成された光学信号を電気信号に変換し、サーボ信号および変調されたデータを抽出するRF AMPと、
変調されたデータを復調して、圧縮されたA/Vデータストリームを出力するデジタルシグナルプロセッサと、
RF AMPからサーボ制御に必要な情報を受け取って、サーボ制御を行うサーボ部と、
圧縮されたA/Vデータストリームを復号化して、複数のオーディオデータストリームを含むA/Vデータストリームを出力するAVコーデックと、
ディスク上の/からのサブオーディオデータストリームを持つプログラムの記録と再生を変更する、使用者によるキー入力を入力させるキー入力部と、
キー入力部を通してユーザーインターフェイスを実行し、ピックアップ部とRF AMPとデジタルシグナルプロセッサとサーボユニットとAVコーデックを制御するシステムコントローラと
を備え、
一つのプログラムが他のプログラムに変更されるときに、プログラムが変更される前にプログラムの中で再生された一つのプログラムのサブオーディオデータストリームに割り当てられたチャネルIDと同じチャネルIDを持つサブオーディオデータストリームがあるかどうかを探索し、探索が成功した場合に、プログラムが変更される前にプログラムの中で再生された一つのプログラムのサブオーディオデータストリームに割り当てられたチャネルIDと同じチャネルIDを持つサブオーディオデータストリームを選択することを特徴とする。
【0025】
また、本発明にかかる他の装置は、ディスク上に/からのA/Vデータストリームの中のオーディオデータストリームを記録および/または再生するための光記録再生装置において、オーディオデータストリームの一つは、デュアルモノチャネルを持ち、該装置は、
入射光を発生する光学的ピックアップと、
前記光学的ピックアップによって生成された入射光を制御する情報信号を処理し、各異なるチャネル識別子IDをA/Vデータストリームのオーディオデータストリームの各チャネルに割り当てる処理部と
を備えることを特徴とする。
【0026】
また、本発明にかかるさらに他の装置は、複数のプログラムを記録および/または再生するための光記録再生装置であって、各プログラムは、少なくとも2個のオーディオデータストリームを備え、オーディオデータストリームのいくつかはデュアルモノチャネルを持ち、該装置は、
入射光を発生する光学的ピックアップと、
前記光学的ピックアップによって生成された入射光を制御する情報信号を処理し、プログラムの第1のもののオーディオデータストリームの一つのデュアルモノチャネルの一つを再生し、プログラムの第2のものを変更し、第2のプログラムのオーディオデータストリームの一つの、デュアルモノチャネルの一つが第1のプログラムの、一つのオーディオデータストリームの、一つのデュアルモノチャネルに対応するかどうかを決定し、もし対応していれば第2のプログラムの一つのオーディオデータストリームの一つのデュアルモノチャネルを再生する処理部と
を備えることを特徴とする。
【0027】
また、本発明にかかるさらに別の装置は、複数のプログラムを備えた、A/Vデータストリーム内のオーディオデータストリームを記録および/または再生するための光記録再生装置であって、各プログラムは、少なくとも一つのチャネルを持った少なくとも2個のオーディオデータストリームを備え、オーディオデータストリームの一つはデュアルモノチャネルを持ち、各チャネルには、プログラム内の所定の優先順位に従ったチャネルIDがあり、該装置は、
入射光を発生する光学的ピックアップと、
光学的ピックアップによって生成された入射光を制御する情報信号を処理し、プログラムの第1のものがプログラムの第2のものに変更されるときに、変更に先立って再生されていた第1のプログラムの第1のデュアルモノチャネルに割り当てられたチャネルIDと同じチャネルIDを持つ第2のプログラムの第2のデュアルモノチャネルがあるかどうかを探索し、もし探索が成功すれば第2のデュアルモノチャネルを選択する処理部と
を備えることを特徴とする。
【0028】
【発明の実施の形態】
以下、添付された図面に基づき、本発明の構成及び動作を具体的に説明する。本発明に係るオーディオチャネルID付加方法は、プログラムに含まれたオーディオチャネルに相異なるチャネルIDを付加することを特徴とする。
【0029】
表4は、1つのプログラムに3本のオーディオデータストリームが記録された場合において、本発明によるチャネルID付加方法に従い付加されたチャネルIDの例を示す。
【表4】
Figure 0003647387
【0030】
表4の例から明らかなように、dual monoでない場合には、2n−1(ここで、n=1、2、3)に相当するチャネルIDを付加する。このとき、nはデータストリーム番号に等しい。これに対し、dual monoの場合には、CH0に2n−1に相当するチャネルIDを付加し、CH1に2nに相当するチャネルIDを付加する。
【0031】
使用者により、リモコンなどの遠隔調整装置を介してオーディオ切換キーが押下されると、現在再生中のチャネルIDより大きい番号が順番に選択され出力される。ここで、使用者が、1つのチャネルIDを設定すると、継続してそのIDに相当するオーディオデータストリームを選択し、復号した後に出力する。
【0032】
本発明に係るオーディオチャネル選択方法は、プログラムの切換に際し、切換前のプログラムにおいて選択されていたオーディオチャネルを、切換後のプログラムにおいても追従して選択するようにしたことを特徴とする。また、切換前のオーディオチャネルが存しない場合には、デフォルトのオーディオチャネルを選択するようにした。
【0033】
ここで、再生中に新たなデータストリームが入力されたと仮定する。新たなデータストリームには、以前のデータストリームとは異なるオーディオデータが記録されている場合がある。例えば、以前のデータストリームには、オーディオ用データストリームは1本であり、dual monoで記録されているのに対し、新たなデータストリームには、dual monoでないオーディオデータストリームが2本記録されていたりする。
【0034】
本発明に係るオーディオチャネル選択方法は、以前に再生していたチャネルIDに相当するデータが存するならばそれを選択して再生し、そうでなければ、チャネルID−1番に相当するものを選択して出力する。
【0035】
さらに、他の例として、以前に再生していたチャネルIDに相当するデータが存するならばそれを選択して再生し、そうでなければ、現在のチャネルが偶数である場合、現在のチャネルID−1に相当するデータを探して、それがあったなら、それを選択して出力し、そうでなければ、チャネルID−1番に相当するものを選択して出力する。また相当するデータが存せず、かつ現在のチャネルが奇数である場合には、チャネルID−1番に相当するものを選択して出力する。
【0036】
表5は、オーディオデータストリームの別の組合わせ例を示す。
【表5】
Figure 0003647387
【0037】
例えば、プログラム1の再生中に、使用者によりオーディオ切換キーが押下されると、出力されるオーディオ信号は、データストリーム1のCH0→データストリーム1のCH1→データストリーム2のCH0→データストリーム2のCH1の順番で切り換わる。
【0038】
一方、プログラム1を、該チャネルIDが3である、データストリーム2のCH0を選択して再生完了し、次いで、プログラム2を再生しようとするときには、取り敢えずチャネルID3に相当するデータストリームが存するか否かを調べる。ここでは、プログラム2に、チャネルID3に相当するデータストリーム2が存するので、それを再生する。
【0039】
また、プログラム1を、該チャネルIDが4である、データストリーム2のCH1を選択して再生完了し、次いで、プログラム2を再生しようとするときには、取り敢えずチャネルID4に相当するデータストリームが存するか否かを調べる。ここでは、プログラム2に、チャネルID4に相当するデータが存しないので、基本チャネルであるID1のデータストリーム1を選択して、それを再生する。
【0040】
このほか、好適なチャネル切換方法としては、チャネルID4−1に相当する、チャネルID3が存するか否かを調べ、それが存するとそれを選択し、存しないと、基本チャネルID1に相当するデータストリーム1を選択して、それを再生する方法がある。ここでは、チャネルID3に相当するデータストリームが存するので、それを再生する。
【0041】
本発明による方法においては、チャネルIDが奇数の場合には、non dual monoか、或いはdual monoにおけるメーンオーディオチャネルを意味する。これに対し、チャネルIDが偶数の場合には、dual monoにおけるサブオーディオチャネルを意味する。
【0042】
使用者によるオーディオチャネル切換時には、使用者からみて、オーディオチャネルが別のオーディオデータストリームに分類されようが、dual monoに分類されようが、その如何を問わず、チャネル切換がなされることが好ましい。
【0043】
本発明に係るオーディオチャネル選択方法によれば、オーディオ切換キーによる入力がなされると、相当するオーディオデータストリームにおいて、メーンオーディオデータからサブオーディオデータへの切換が先になされ、次いで、オーディオデータストリームへの切換がなされる。
【0044】
また、使用者により、1つのオーディオチャネルが選択されると、プログラムが切り換わった場合であっても、取り敢えず現在設定されたチャネルをそのまま維持する。
【0045】
しかし、相当するチャネルが存しない場合には、そこに当てはまるチャネルを選択する必要がある。このときには、無条件に基本チャネルであるCH0を選択して再生するか、それとも現在選択されたオーディオチャネルに最も近似したチャネルを探して(チャネルたIDが偶数である場合、即ち、サブオーディオデータの場合には、メーンオーディオチャネルが最も近似したチャネルと考えられ、これが奇数チャネルID−1である)再生する。
【0046】
また、現在設定されたチャネルIDに相当するオーディオデータストリームが存しない場合には、取り敢えずこのチャネルIDを記憶しておき、上記した方法に従い基本チャネルを選択して出力するか、或いは最も近似したチャネルを選択して再生し、再生中に上記したチャネルIDに相当するオーディオデータストリームが現われると、該データストリームをさらに選択して出力しても良い。
【0047】
これは、使用者が、サブオーディオチャネルを選択して再生中に、しばらくの間サブオーディオチャネルの存しないプログラムを再生し、再度元のサブオーディオチャネルが存するプログラムを再生する場合には、さらにサブオーディオチャネルを選択して再生する場合に行われる。そうでなければ、使用者は、サブオーディオチャネルを再生するために、さらに切換をしなければならない。
【0048】
図6は、本発明に適した光記録再生装置のブロック構成図であって、記録可能なディスクを用い、A/Vデータを記録再生する。またその機能は、記録と再生とに大別できる。
【0049】
記録に際し、A/Vコーデック110は、外部から入力されるA/V信号を所定の圧縮体系に従って圧縮符号化を行い、圧縮されたデータに対する容量情報を提供する。デジタルシグナルプロセッサ(Digital Signal Processor;以下、DSPと称する)120は、A/Vコーデック110からのA/Vデータを受け取って、誤り訂正符号(Error Correction Code;以下、ECCと称する)処理のための付加データを付加し、所定の変調体系に従い、変調などを行う。高周波増幅器(以下、RF AMP)130は、DSP 120からの電気的データを光学信号に変換する。
【0050】
ピックアップ部140には、RF AMP 130からの光学信号をディスクに記録するとともに、フォーカシング及びトラッキングを行なうためのアクチュエータが組み込まれている。サーボ部150は、RF AMP 130及びシステムコントローラ160から、サーボ制御を行うのに必要な情報を受け取って、サーボ制御を行う。
【0051】
システムコントローラ160は、システム全体の制御を司る。特に、オーディオデータの符号化モードを決定して、データをディスク上に記録するように制御する。
【0052】
再生に際し、ピックアップ部140は、データを格納しているディスクから光学信号をピックアップし、この光学信号からデータが抽出される。RF AMP130は、光学信号を電気的信号に変換させ、サーボ制御を行なうためのサーボ信号及び変調されたデータを抽出する。
【0053】
DSP 120は、RF AMP 130からの変調済みのデータを、変調に際し用いた変調体系に対応して復調するとともに、ECCを行って誤りを訂正し、且つ付加データを除去する。サーボ部150は、RF AMP 130及びシステムコントローラ160から、サーボ制御に必要な情報を受け取って、安定したサーボを行う。
【0054】
A/Vコーデック110は、DSP 120からの圧縮されたA/Vデータを復号化して、A/V信号を出力する。
【0055】
システムコントローラ160は、使用者によるキー入力を処理するなど、使用者インタフェースを行いつつ、上記したような方法により、ピックアップ部140、RF AMP 130、DSP 120、A/Vコーデック110を制御する。特にオーディオデータストリーム切換のためのコマンドがキー入力部170を介して入力された場合には、オーディオデータストリームを分析し、該当するオーディオデータを選択して再生するように制御する。
【0056】
【発明の効果】
以上述べたように、本発明に係るチャネルID付加方法によると、オーディオデータストリームの各チャネルごとに相異なるチャネルIDを付加することにより、オーディオ信号の選択に際し、同一チャネルが追従可能である。
さらに、本発明に係るオーディオチャネル選択方法によると、プログラム或いはオーディオデータストリームが切り換わった場合であっても、使用者により選択された音声モードを追従できる効果がある。
【図面の簡単な説明】
【図1】MPEGシステムにおけるパケットの構造を示すものである。
【図2】MPEGシステムにおけるパックの構造を示すものである。
【図3】チャネル別オーディオ信号を示すものである。
【図4】デュアルモノチャネルのデータを復号及び出力する装置の一例を示すものである。
【図5】音声多重オーディオ信号をデュアルモノのオーディオデータとして記録又は再生する方法を示すものである。
【図6】本発明に係る記録再生装置のブロック構成図である。
【符号の説明】
110 A/Vコーデック
120 DSP
130 RF AMP
140 ピックアップ部
150 サーボ部
160 システムコントローラ
170 キー入力部[0001]
BACKGROUND OF THE INVENTION
The present invention is an A / V device that reproduces a program including a plurality of audio data streams, and tracks and selects the audio channel selected by the user even when the program or the audio data stream is switched. The present invention relates to an audio channel ID (Identification) adding method, an audio channel selecting method using the same, and an optical recording / reproducing apparatus suitable for the method.
[0002]
[Prior art]
Currently, MPEG and AC3 are mainly used as compression encoding methods for audio signals, and LPCM (Linear Pulse Code Modulation) that performs recording without compression encoding is also used. MPEG is mainly used in VCD, DVD and the like which are digital television broadcasting or digital AV equipment.
[0003]
When an MPEG A / V data encoded data stream and other data streams are integrated and applied to an actual application, the data must be integrated into a single data stream. Depending on the case, some auxiliary data can be added and used. Thus, multiplexing the video data and the audio data while synchronizing them is a function of the MPEG system.
[0004]
In the MPEG system, a multiplexing method using packets is adopted. In the multiplexing by packets, each of video data and audio data is divided into data streams of appropriate length called packets, and information such as headers is added to multiplex the packets of video data and audio data. It is a method.
[0005]
In these packets, as shown in FIG. 1, information for identifying an attribute of video data or audio data exists in a portion called a header. The length of the packet depends on the transmission medium or the application form.
[0006]
Table 1 shows the contents of the packet header shown in FIG.
[Table 1]
Figure 0003647387
[0007]
Here, Packet_start_code_prefix indicates that the packet starts, and stream_id indicates the type of data. For example, in the case of video data, the binary number is “1110 0000” b, and in the case of audio data, the binary number is “1100 0 ***” b. Here, *** represents that a total of eight types of data streams can exist from 000b to 111b. In the MPEG system, data other than these two types is used as a private stream, but a code “1011 1101” b can be used for this private stream.
[0008]
PTS (Presentation Time Stamp) and DTS (Decoding Time Stamp) are compliant with the MPEG system standard and represent the output time and decoding time of a reproduction unit in video data or audio data, respectively. The playback unit refers to one frame of video in video data, and one frame of audio in audio data. In the case of audio data, DTS is not required.
[0009]
Audio data such as AC3 or LPCM excluding MPEG audio data is configured as a private stream. The packet header at this time is shown in Table 2.
[Table 2]
Figure 0003647387
[0010]
Here, in the case of substream_id, it is used to distinguish the type of audio encoding such as AC3 or LPCM. For example, in the case of AC3, “1010 ***” b. Here, *** means that there can be up to 8 data streams as in MPEG audio data. In MPEG, one program can have many video data streams and audio data streams.
[0011]
number_of_audio_channels represents the number of channels, and includes 1ch, 2ch, 3ch, 4ch, and dual mono channel. The channel here is different from the channel meaning that the user makes a selection. That is, except for the dual mono channel, all are recognized as one channel for the user. The dual mono is recognized as two.
[0012]
In MPEG-1 or MPEG-2 PS (Program Stream), an upper layer called a pack exists above a video packet or an audio packet. Normally, a pack composed of a plurality of video packets or audio packets is handled as one basic unit. FIG. 2 shows the structure of the pack. Referring to this, there is additional information for time base reference for synchronous reproduction at the pack header.
[0013]
Table 3 shows the contents of the pack header shown in FIG.
[Table 3]
Figure 0003647387
[0014]
Here, Pack_start_code is a code notifying that the pack data starts from here. The SCR value represents the time when the pack data reaches the decoder buffer, and is used to synchronize the system clock at the encoding end and the decoding end. program_mux_rate represents a transmission rate at which video data, audio data, and private data are multiplexed and transmitted. Here, for correct decoding, transmission at a higher transmission rate than this transmission rate is required. pack_stuffing_length represents the number of dummy data.
[0015]
FIG. 3 shows channels and corresponding audio signals. As shown in FIG. 3, an audio signal is output through the decoder. Here, in the case of dual mono channel data, CH0 audio data and CH1 audio data are output and it looks very similar to the case of 2ch data, but in the case of dual mono channel data, CH0 audio data and The CH1 audio data is audio data that is not related to each other, whereas the 2ch data is different in that the left audio data and the right audio data are related to each other.
[0016]
For example, in the dual mono channel, Korean audio data may be loaded on CH0 and English audio data may be loaded on CH1. Here, normally, only one of the two channels is selected and output. Alternatively, CH0 may be output via the left speaker and CH1 may be output via the right speaker.
[0017]
FIG. 4 shows an example of an apparatus that decodes and outputs dual mono channel data. In the apparatus shown in FIG. 4, if the selection signal is 0, CH0 audio data is output for both the left audio data and the right audio data, and if the selection signal is 1, both the left audio data and the right audio data are CH1 audio. Output data. If the selection signal is 2, CH1 audio data is output to LEFT AUDIO and CH1 audio data is output to RIGHT AUDIO.
[0018]
FIG. 5 shows a method for recording or reproducing an audio multiplexed audio signal as dual mono audio data. The audio multiplexed audio signal is composed of main audio data and sub audio data. At the time of recording, the main audio data and the sub audio data are encoded into one audio data stream through an audio multiplex encoder. At this time, the main audio data is encoded into CH0, and the sub audio data is encoded into CH1.
[0019]
At the time of reproduction, the audio data stream is decoded into CH0 audio data and CH1 audio data through an audio multiplex decoder. Here, CH0 audio data is main audio data, and CH1 audio data is sub audio data.
[0020]
Here, it is assumed that there are a plurality of audio data streams. For example, if there are two audio data streams in the A / V data stream, the user can select one of the two channels. However, if the selected audio data stream is dual mono data, that is, if it includes a sub audio data stream, the user can select two more channels.
[0021]
[Problems to be solved by the invention]
An object of the present invention is to add a channel ID to a sub audio data stream included in an audio data stream when each audio data stream is in dual mono mode in an A / V data stream including a plurality of audio data streams. It is to provide a way to do.
[0022]
Another object of the present invention is to provide audio input by a user even when a program or audio data stream is switched in an A / V device that reproduces a plurality of audio data streams that allow a dual mono mode. An object is to provide a method for following a channel and selecting a similar audio channel.
[0023]
Still another object of the present invention is to provide an apparatus suitable for the audio channel selection method described above.
[0024]
[Means for Solving the Problems]
An apparatus according to the present invention is an optical recording / reproducing apparatus for recording and reproducing optical signals on / from a disc,
A pickup section for picking up an optical signal from the disc;
An RF AMP that converts an optical signal generated by the pickup unit into an electrical signal and extracts a servo signal and modulated data;
A digital signal processor that demodulates the modulated data and outputs a compressed A / V data stream;
A servo unit that receives information necessary for servo control from the RF AMP and performs servo control; and
An AV codec that decodes a compressed A / V data stream and outputs an A / V data stream including a plurality of audio data streams;
A key input unit for inputting a key input by a user to change recording and playback of a program having a sub audio data stream on / from the disc;
A user interface is executed through a key input unit, and a pickup unit, an RF AMP, a digital signal processor, a servo unit, and a system controller for controlling an AV codec are provided.
When one program is changed to another program, the sub audio having the same channel ID as the channel ID assigned to the sub audio data stream of one program reproduced in the program before the program is changed. If there is a data stream, and if the search is successful, the same channel ID as the channel ID assigned to the sub audio data stream of one program reproduced in the program before the program is changed. The sub audio data stream is selected.
[0025]
Another apparatus according to the present invention provides an optical recording / reproducing apparatus for recording and / or reproducing an audio data stream in / from an A / V data stream on / from a disc. A dual mono channel, the device
An optical pickup that generates incident light;
And a processing unit for processing an information signal for controlling incident light generated by the optical pickup and assigning each different channel identifier ID to each channel of the audio data stream of the A / V data stream.
[0026]
Still another apparatus according to the present invention is an optical recording / reproducing apparatus for recording and / or reproducing a plurality of programs, each program including at least two audio data streams, Some have dual mono channels and the device
An optical pickup that generates incident light;
Processing the information signal controlling the incident light generated by the optical pickup, playing one of the dual mono channels of the audio data stream of the first one of the program and modifying the second one of the program Determining whether one of the dual mono channels of the audio data stream of the second program corresponds to one of the dual mono channels of the one audio data stream of the first program; A processing unit for reproducing one dual mono channel of one audio data stream of the second program.
[0027]
Still another apparatus according to the present invention is an optical recording / reproducing apparatus for recording and / or reproducing an audio data stream in an A / V data stream, comprising a plurality of programs, Comprising at least two audio data streams with at least one channel, one of the audio data streams having a dual mono channel, each channel having a channel ID according to a predetermined priority in the program; The device
An optical pickup that generates incident light;
A first program that processed the information signal that controls the incident light generated by the optical pickup and was reproduced prior to the change when the first one of the program was changed to the second one of the program And if there is a second dual mono channel of the second program having the same channel ID as that assigned to the first dual mono channel, and if the search is successful, the second dual mono channel And a processing unit that selects
[0028]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, the configuration and operation of the present invention will be described in detail with reference to the accompanying drawings. The audio channel ID adding method according to the present invention is characterized by adding different channel IDs to audio channels included in a program.
[0029]
Table 4 shows an example of channel IDs added according to the channel ID addition method according to the present invention when three audio data streams are recorded in one program.
[Table 4]
Figure 0003647387
[0030]
As is clear from the example of Table 4, when the dual mono is not used, a channel ID corresponding to 2n-1 (where n = 1, 2, 3) is added. At this time, n is equal to the data stream number. On the other hand, in the case of dual mono, a channel ID corresponding to 2n-1 is added to CH0, and a channel ID corresponding to 2n is added to CH1.
[0031]
When the user presses the audio switching key via a remote adjustment device such as a remote controller, numbers larger than the channel ID currently being reproduced are sequentially selected and output. Here, when the user sets one channel ID, the audio data stream corresponding to the ID is continuously selected and output after being decoded.
[0032]
The audio channel selection method according to the present invention is characterized in that, when switching programs, the audio channel selected in the program before switching is selected following the program after switching. In addition, when there is no audio channel before switching, the default audio channel is selected.
[0033]
Here, it is assumed that a new data stream is input during reproduction. There are cases where audio data different from the previous data stream is recorded in the new data stream. For example, the previous data stream has one audio data stream and is recorded in dual mono, whereas the new data stream contains two audio data streams that are not dual mono. To do.
[0034]
In the audio channel selection method according to the present invention, if there is data corresponding to the previously played channel ID, it is selected and played, and if not, the data corresponding to channel ID-1 is selected. And output.
[0035]
Further, as another example, if there is data corresponding to the channel ID that was previously played back, it is selected and played back, otherwise, if the current channel is an even number, the current channel ID− The data corresponding to 1 is searched, and if it is found, it is selected and output. If not, the data corresponding to channel ID-1 is selected and output. If there is no corresponding data and the current channel is an odd number, the channel corresponding to channel ID-1 is selected and output.
[0036]
Table 5 shows another example combination of audio data streams.
[Table 5]
Figure 0003647387
[0037]
For example, when the audio switch key is pressed by the user during the reproduction of the program 1, the output audio signal is: CH0 of data stream 1 → CH1 of data stream 1 → CH0 of data stream 2 → data stream 2 Switch in the order of CH1.
[0038]
On the other hand, when the program 1 is reproduced by selecting CH0 of the data stream 2 with the channel ID of 3 and then attempting to reproduce the program 2, whether or not there is a data stream corresponding to the channel ID 3 for the time being. Find out. Here, since the data stream 2 corresponding to the channel ID 3 exists in the program 2, it is reproduced.
[0039]
In addition, when the program 1 is reproduced by selecting CH1 of the data stream 2 whose channel ID is 4, and then the program 2 is to be reproduced, whether or not there is a data stream corresponding to the channel ID 4 for the time being. Find out. Here, since the data corresponding to the channel ID 4 does not exist in the program 2, the data stream 1 having the basic channel ID 1 is selected and reproduced.
[0040]
In addition, as a preferable channel switching method, it is checked whether or not the channel ID 3 corresponding to the channel ID 4-1 exists. If it exists, the channel ID 3 is selected. If not, the data stream corresponding to the basic channel ID 1 is selected. There is a method of selecting 1 and playing it. Here, since there is a data stream corresponding to channel ID 3, it is reproduced.
[0041]
In the method according to the present invention, when the channel ID is an odd number, it means a non-dual mono or a main audio channel in a dual mono. On the other hand, when the channel ID is an even number, it means a sub audio channel in dual mono.
[0042]
When the audio channel is switched by the user, it is preferable that the channel is switched regardless of whether the audio channel is classified into another audio data stream or dual mono, from the viewpoint of the user.
[0043]
According to the audio channel selection method of the present invention, when an input using an audio switching key is made, the corresponding audio data stream is switched from the main audio data to the sub audio data first, and then to the audio data stream. Is switched.
[0044]
When one audio channel is selected by the user, the currently set channel is maintained as it is even if the program is switched.
[0045]
However, if there is no corresponding channel, it is necessary to select a channel that fits there. At this time, the basic channel CH0 is selected and played back unconditionally, or the channel closest to the currently selected audio channel is searched (if the channel ID is an even number, that is, the sub audio data In this case, the main audio channel is considered the closest channel, which is the odd channel ID-1).
[0046]
Also, if there is no audio data stream corresponding to the currently set channel ID, this channel ID is stored for the time being, and the basic channel is selected and output according to the method described above, or the closest channel When an audio data stream corresponding to the above-described channel ID appears during reproduction, the data stream may be further selected and output.
[0047]
This is because when a user selects a sub audio channel and plays a program that does not have a sub audio channel for a while and plays a program that has the original sub audio channel again, This is done when an audio channel is selected for playback. Otherwise, the user must switch further in order to play the sub audio channel.
[0048]
FIG. 6 is a block diagram of an optical recording / reproducing apparatus suitable for the present invention, which records / reproduces A / V data using a recordable disc. The functions can be broadly divided into recording and reproduction.
[0049]
At the time of recording, the A / V codec 110 compresses and encodes an externally input A / V signal according to a predetermined compression system, and provides capacity information for the compressed data. A digital signal processor (Digital Signal Processor; hereinafter referred to as DSP) 120 receives A / V data from the A / V codec 110, and performs error correction code (hereinafter referred to as ECC) processing. Additional data is added and modulation is performed according to a predetermined modulation system. A high frequency amplifier (hereinafter referred to as RF AMP) 130 converts electrical data from the DSP 120 into an optical signal.
[0050]
The pickup unit 140 incorporates an actuator for recording an optical signal from the RF AMP 130 on a disk and performing focusing and tracking. The servo unit 150 receives information necessary for performing servo control from the RF AMP 130 and the system controller 160 and performs servo control.
[0051]
The system controller 160 controls the entire system. In particular, the audio data encoding mode is determined, and control is performed so that the data is recorded on the disc.
[0052]
During reproduction, the pickup unit 140 picks up an optical signal from a disk storing data, and the data is extracted from the optical signal. The RF AMP 130 converts an optical signal into an electrical signal, and extracts a servo signal and modulated data for performing servo control.
[0053]
The DSP 120 demodulates the modulated data from the RF AMP 130 in accordance with the modulation scheme used for modulation, performs ECC to correct errors, and removes additional data. The servo unit 150 receives information necessary for servo control from the RF AMP 130 and the system controller 160 and performs stable servo.
[0054]
The A / V codec 110 decodes the compressed A / V data from the DSP 120 and outputs an A / V signal.
[0055]
The system controller 160 controls the pickup unit 140, the RF AMP 130, the DSP 120, and the A / V codec 110 by the method described above while performing a user interface such as processing a key input by the user. In particular, when a command for switching the audio data stream is input via the key input unit 170, the audio data stream is analyzed, and control is performed so that the corresponding audio data is selected and reproduced.
[0056]
【The invention's effect】
As described above, according to the channel ID adding method according to the present invention, by adding different channel IDs for each channel of the audio data stream, the same channel can be followed when selecting an audio signal.
Furthermore, according to the audio channel selection method of the present invention, there is an effect that the audio mode selected by the user can be followed even when the program or the audio data stream is switched.
[Brief description of the drawings]
FIG. 1 shows a packet structure in an MPEG system.
FIG. 2 shows the structure of a pack in the MPEG system.
FIG. 3 shows channel-specific audio signals.
FIG. 4 shows an example of an apparatus for decoding and outputting dual mono-channel data.
FIG. 5 shows a method for recording or reproducing an audio multiplexed audio signal as dual-mono audio data.
FIG. 6 is a block diagram of a recording / reproducing apparatus according to the present invention.
[Explanation of symbols]
110 A / V codec 120 DSP
130 RF AMP
140 Pickup unit 150 Servo unit 160 System controller 170 Key input unit

Claims (4)

ディスク上に/からのプログラムのA/Vデータストリームの中のオーディオデータストリームを記録および/または再生するための光記録再生装置において、オーディオデータストリームの一つは、デュアルモノチャネルを持ち、該装置は、
入射光を発生する光学的ピックアップと、
前記光学的ピックアップによって生成された入射光を制御する情報信号を処理し、各異なるチャネル識別子IDをプログラムのA/Vデータストリームのオーディオデータストリームの各チャネルに割り当てる処理部と
を備え
前記処理部は、2n−1(nは、オーディオデータストリームの優先順位)のチャネルIDをオーディオデータストリームに割り当て、2nのチャネルIDを、デュアルモノチャネルを持つオーディオデータストリームのデュアルモノチャネルの第2のものに割り当てることを特徴とする光記録再生装置。
In an optical recording / reproducing apparatus for recording and / or reproducing an audio data stream in an A / V data stream of a program on / from a disc, one of the audio data streams has a dual mono channel, and the apparatus Is
An optical pickup that generates incident light;
A processing unit that processes an information signal that controls incident light generated by the optical pickup and assigns each different channel identifier ID to each channel of the audio data stream of the A / V data stream of the program ;
The processing unit assigns a channel ID of 2n-1 (n is the priority of the audio data stream) to the audio data stream, and assigns a channel ID of 2n to the second of the dual mono channels of the audio data stream having dual mono channels. An optical recording / reproducing apparatus characterized by being assigned to a recording medium.
前記処理部は、オーディオデータストリームのデュアルモノチャネルの第1のものに2n−1のチャネルIDを割り当てることを特徴とする請求項記載の装置。Wherein the processing unit, according to claim 1, wherein assigning a first channel ID of 2n-1 to that of the dual mono channel audio data streams. ディスク上に/からのプログラムのA/Vデータストリームの中のオーディオデータストリームを記録および/または再生するための光記録再生装置において、オーディオデータストリームの一つは、デュアルモノチャネルを持ち、該装置は、
入射光を発生する光学的ピックアップと、
前記光学的ピックアップによって生成された入射光を制御する情報信号を処理し、各異なるチャネル識別子IDをプログラムのA/Vデータストリームのオーディオデータストリームの各チャネルに割り当てる処理部と
を備え、
前記処理部は、プログラムの切替に際し、現在処理中のプログラムとは異なる第2のプログラムのオーディオストリームがデュアルモノチャネルを持たなければ、チャネルIDの異なる各々を前記第2のプログラムのオーディオデータストリームに再割り当てし、もし前記第2のプログラムのオーディオデータストリームがデュアルモノチャネルを持てば、チャネルIDの異なる各々を前記第2のプログラムのデュアルモノチャネルの各々に再割り当てし、
前記処理部は、2n−1(nは、第2のプログラムのオーディオデータストリームの優先順位)のチャネルIDを前記第2のプログラムのオーディオデータストリームに再割り当てし、2nのチャネルIDをデュアルモノチャネルを持つ前記第2のプログラムのオーディオデータストリームのデュアルモノチャネルの第2のものに再割り当てすることを特徴とする光記録再生装置。
In an optical recording / reproducing apparatus for recording and / or reproducing an audio data stream in an A / V data stream of a program on / from a disc, one of the audio data streams has a dual mono channel, and the apparatus Is
An optical pickup that generates incident light;
A processing unit for processing an information signal for controlling incident light generated by the optical pickup and assigning each different channel identifier ID to each channel of an audio data stream of an A / V data stream of a program;
With
Wherein the processing unit, upon switching of the program, have to have different second program audio stream dual mono channel of the program currently being processed, different each of the channel ID to the audio data stream of the second program reassign, if the audio data stream of the second program the underbarrel dual mono channel, reassign different each of the channel ID to each of the dual mono channel of the second program,
The processing unit reassigns a channel ID of 2n-1 (n is the priority of the audio data stream of the second program) to the audio data stream of the second program, and assigns the 2n channel ID to the dual mono channel An optical recording / reproducing apparatus for reassigning the second mono-channel audio data stream of the second program having
前記処理部は、前記第2のプログラムのオーディオデータストリームのデュアルモノチャネルの第1のものに、2n−1のチャネルIDを割り当てることを特徴とする請求項記載の装置。The apparatus according to claim 3 , wherein the processing unit assigns a channel ID of 2n-1 to the first of the dual mono channels of the audio data stream of the second program.
JP2001111875A 2001-04-10 2001-04-10 Optical recording / reproducing device Expired - Fee Related JP3647387B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2001111875A JP3647387B2 (en) 2001-04-10 2001-04-10 Optical recording / reproducing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001111875A JP3647387B2 (en) 2001-04-10 2001-04-10 Optical recording / reproducing device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP37171399A Division JP2001197029A (en) 1999-12-27 1999-12-27 Audio channel id adding method, audio channel selecting method using same, and optical recording and reproducing device suitable to same

Publications (2)

Publication Number Publication Date
JP2002063780A JP2002063780A (en) 2002-02-28
JP3647387B2 true JP3647387B2 (en) 2005-05-11

Family

ID=18963391

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001111875A Expired - Fee Related JP3647387B2 (en) 2001-04-10 2001-04-10 Optical recording / reproducing device

Country Status (1)

Country Link
JP (1) JP3647387B2 (en)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7231268B1 (en) 1999-08-17 2007-06-12 Samsung Electronics Co., Ltd. Method of assigning audio channel identification, method for selecting audio channel using the same, and optical recording and reproducing apparatus suitable therefor
US6813281B1 (en) 1999-08-17 2004-11-02 Samsung Electronics Co., Ltd. Method of assigning audio channel identification, method for selecting audio channel using the same, and optical recording and reproducing apparatus suitable therefor
CN118118740A (en) * 2022-11-29 2024-05-31 腾讯科技(深圳)有限公司 Playing method, device, equipment and storage medium based on data stream

Also Published As

Publication number Publication date
JP2002063780A (en) 2002-02-28

Similar Documents

Publication Publication Date Title
JP4071812B2 (en) Multiplexer and demultiplexer
JP4970688B2 (en) Method and apparatus for creating and playing back digital video recordings, and digital video recordings created using this method
JP2004355802A (en) Information storing medium in which multi-stream is recorded, its recording device, its recording method, its reproducing device, and its reproducing method
WO2004008759A1 (en) Data processing device
US20090010615A1 (en) Recording/reproducing apparatus, recording apparatus, reproducing apparatus, recording method, reproducing method and computer program
JP2006507730A (en) Information storage medium on which stop video is recorded, reproducing apparatus and method thereof
US7386553B2 (en) Data processing device
JP3647387B2 (en) Optical recording / reproducing device
JP4013800B2 (en) Data creation method and data recording apparatus
US6813281B1 (en) Method of assigning audio channel identification, method for selecting audio channel using the same, and optical recording and reproducing apparatus suitable therefor
US7231268B1 (en) Method of assigning audio channel identification, method for selecting audio channel using the same, and optical recording and reproducing apparatus suitable therefor
US6694091B1 (en) Method of assigning audio channel identification, method for selecting audio channel using the same, and optical recording and reproducing apparatus suitable therefor
EP1113435B1 (en) Identification of audio channels
KR100396579B1 (en) Optical recording/reproducing apparatus
KR100389852B1 (en) Method for assignning audio channel indentification number
KR100346724B1 (en) Method for selecting of audio channel
JP2001197029A (en) Audio channel id adding method, audio channel selecting method using same, and optical recording and reproducing device suitable to same
JP2006352587A (en) Information processor
JPH1166754A (en) Multiple channel data recording medium and transmission record and recording device
RU2303825C2 (en) Method for setting identification of sound channel, method for selecting sound channel with usage of the same and optical recording and reproduction device usable for said purpose
JP2002063779A (en) Method for adding audio channel id, method for selecting audio channel by using the method, and optical recording and reproducing device suitable therefor
RU2214631C2 (en) Method for selecting audio channels from audio/video data stream
KR100300984B1 (en) Apparatus for writing/playback of optical disk written with multi-language audio signals and method thereof
JP2006050192A (en) Multiplexing method, information recording medium, and data reproducing method
JP2003132628A (en) Information recording and reproducing device

Legal Events

Date Code Title Description
A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20031125

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040218

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040518

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040817

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050118

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050208

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080218

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090218

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100218

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100218

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110218

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110218

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120218

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120218

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130218

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140218

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees