JP3255308B2 - データ再生装置 - Google Patents

データ再生装置

Info

Publication number
JP3255308B2
JP3255308B2 JP03455793A JP3455793A JP3255308B2 JP 3255308 B2 JP3255308 B2 JP 3255308B2 JP 03455793 A JP03455793 A JP 03455793A JP 3455793 A JP3455793 A JP 3455793A JP 3255308 B2 JP3255308 B2 JP 3255308B2
Authority
JP
Japan
Prior art keywords
data
video
decoding
audio
timing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP03455793A
Other languages
English (en)
Other versions
JPH06237437A (ja
Inventor
靖 藤波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=26373375&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP3255308(B2) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP03455793A priority Critical patent/JP3255308B2/ja
Priority to US08/165,885 priority patent/US5502573A/en
Priority to AU52387/93A priority patent/AU671317B2/en
Priority to EP93310100A priority patent/EP0602943B1/en
Priority to AT93310100T priority patent/ATE173370T1/de
Priority to DE69322060T priority patent/DE69322060T2/de
Priority to ES93310100T priority patent/ES2123035T3/es
Priority to KR1019930028147A priority patent/KR100307118B1/ko
Priority to CN93119864A priority patent/CN1076928C/zh
Publication of JPH06237437A publication Critical patent/JPH06237437A/ja
Priority to HK98114878A priority patent/HK1013574A1/xx
Publication of JP3255308B2 publication Critical patent/JP3255308B2/ja
Application granted granted Critical
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/24—Systems for the transmission of television signals using pulse code modulation
    • H04N7/52—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
    • H04N7/54—Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal the signals being synchronous
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42646—Internal components of the client ; Characteristics thereof for reading from or writing on a non-volatile solid state storage medium, e.g. DVD, CD-ROM
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4341—Demultiplexing of audio and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9261—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction
    • H04N5/9264—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation involving data reduction using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/92—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N5/926—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation
    • H04N5/9265—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation with processing of the sound signal
    • H04N5/9267—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback by pulse code modulation with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/84—Television signal recording using optical recording
    • H04N5/85—Television signal recording using optical recording on discs or drums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H04N5/94—Signal drop-out compensation
    • H04N5/945—Signal drop-out compensation for signals recorded by pulse code modulation

Description

【発明の詳細な説明】
【０００１】
【産業上の利用分野】本発明は、例えば光ディスクに時
分割多重して記録されているビデオデータとオーディオ
データを再生する場合に用いて好適なデータ再生装置に
関する。
【０００２】
【従来の技術】図６は、従来のデータ再生装置の一例の
構成を示すブロック図である。ドライブ１は、内蔵する
光ディスクに記録されているデータを再生する。この光
ディスクには、ビデオデータとオーディオデータとが時
分割多重されて記録されている。ドライブ１より出力さ
れた再生データは、復調装置２に供給され、復調され
る。ＥＣＣ回路３は、復調装置２が出力するデータの誤
り検出訂正をおこない、リングバッファ４に供給する。
リングバッファ４は、供給されたデータを所定量蓄積し
た後、多重化データ分離装置５に出力する。
【０００３】多重化データ分離装置５は、リングバッフ
ァ４より供給されたデータからビデオデータとオーディ
オデータとを分離すると共に、タイミングデータとして
のＳＣＲ（Ｓｙｓｔｅｍ Ｃｌｏｃｋ Ｒｅｆｅｒｅｎ
ｃｅ）と、ビデオ用ＤＴＳ（Ｄｅｃｏｄｉｎｇ Ｔｉｍ
ｅ Ｓｔａｍｐ）（ＤＴＳＶ）と、オーディオ用ＤＴＳ
（ＤＴＳＡ）のとを分離するデータ分離回路２１を有し
ている。
【０００４】ビデオデータは、ビデオコードバッファ６
（ＦＩＦＯ）に供給される。オーディオデータは、オー
ディオコードバッファ８（ＦＩＦＯ）に供給される。ま
た、ＳＣＲはＳＴＣレジスタ２６に供給され、ここに記
憶される。そして、ＳＴＣレジスタ２６はクロック発生
回路２７が出力する９０ｋＨｚの周波数のクロックをカ
ウントし、この記憶値をインクリメントして、ＳＴＣ
（Ｓｙｓｔｅｍ Ｔｉｍｅ Ｃｌｏｃｋ）を生成する。
【０００５】ＤＴＳＶとＤＴＳＡは、それぞれＤＴＳＶ
レジスタ２２とＤＴＳＡレジスタ２４に供給され、記憶
される。そして、このＤＴＳＶレジスタ２２とＤＴＳＡ
レジスタ２４に記憶されたデータは、比較器２３と２５
にそれぞれ供給され、ＳＴＣレジスタ２６が出力するＳ
ＴＣと比較される。制御回路２８は、例えばＣＰＵ等に
より構成され、入力部２９より使用者の操作に対応して
入力される指令に基づきデータ分離回路２１を制御す
る。
【０００６】ビデオコードバッファ６に記憶されたビデ
オデータは、読み出されてビデオデコーダ７に供給され
る。そして、ビデオデコーダ７によりデコードされ、生
成されたビデオ信号が、図示せぬ回路に出力される。こ
のビデオデコーダ７には、比較器２３が出力するビデオ
デコードスタート信号が供給される。
【０００７】同様に、オーディオコードバッファ８より
出力されたデータがオーディオデコーダ９に供給され、
ここでデコードされる。このオーディオデコーダ９に
は、比較器２５の出力がオーディオデコードスタート信
号として供給される。
【０００８】次に、図６の従来例の動作について、図８
のタイミングチャートを参照して説明する。入力部２９
を操作して再生の開始を指令すると、ドライブ１は、内
蔵する光ディスクに記録されているデータを再生させ
る。ドライブ１より出力された再生データは、復調装置
２に供給され、復調された後、ＥＣＣ回路３に供給され
て誤り検出訂正の処理が施される。この処理が施された
データは、リングバッファ４を介して、多重化データ分
離装置５のデータ分離回路２１に供給される。
【０００９】この多重化データ分離装置５に供給される
データのフォーマットは、例えば図７に示すように規定
されている。このフォーマットは、ＭＰＥＧ（ＩＳＯ１
１１７２）の多重化ビットストリームとして規定されて
いるものである。同図に示すように、多重化スビットト
リームは１つ以上のパック（ＰＡＣＫ）で構成される。
そして、各パックは１つ以上のパケット（ＰＡＣＫＥ
Ｔ）で構成される。パックの先頭には、パックヘッダ
（ＰＡＣＫ ＨＥＡＤＥＲ）が配置され、このパックベ
ッダにはパックの開始点を示すパックスタートコード
（ＰＡＣＫ ＳＴＡＲＴ ＣＯＤＥ）、ＳＣＲおよびＭ
ＵＸ ＲＡＴＥが配置されている。ＳＣＲは、その最後
のバイトが多重化データ分離装置５に入力される時刻を
表わしている。ＭＵＸ ＲＡＴＥは、転送レートを示す
ものである。
【００１０】図７の例においては、パックヘッダの次に
ビデオパケット（ＶＩＤＥＯ ＰＡＣＫＥＴ）と、オー
ディオパケット（ＡＵＤＩＯ ＰＡＣＫＥＴ）が配置さ
れている。これらのパケットの先頭にもパケットヘッダ
が配置され、このパケットヘッダは、ビデオまたはオー
ディオのパケットの開始点を表すビデオパケットスター
トコード（ＶＩＤＥＯ ＰＡＣＫＥＴ ＳＴＡＲＴ Ｃ
ＯＤＥ）またはオーディオパケットスタートコード（Ａ
ＵＤＩＯ ＰＡＣＫＥＴ ＳＴＡＲＴ ＣＯＤＥ）と、
ビデオまたはオーディオデータのデコードの開始時刻を
示すＤＴＳＶまたはＤＴＳＡが配置されている。そし
て、この各パケットヘッダの次に、ビデオデータあるい
はオーディオデータが配置されている。
【００１１】なお、これらＳＣＲ、ＤＴＳ（ＤＴＳＶま
たはＤＴＳＡ）などのタイミングデータは、９０ｋＨｚ
の周波数のクロックのカウント値で表わされ、３３ビッ
トの有効数字を有している。
【００１２】データ分離回路２１は、制御回路２８に制
御され、リングバッファ４より供給されるデータからビ
デオデータとオーディオデータを分離し、それぞれビデ
オコードバッファ６とオーディオコードバッファ８に供
給するとともに、ＳＣＲ，ＤＴＳＶおよびＤＴＳＡをそ
れぞれ分離し、それぞれＳＴＣレジスタ２６、ＤＴＳＶ
レジスタ２２およびＤＴＳＡレジスタ２４に供給し、記
憶させる。
【００１３】ＳＴＣレジスタ２６は、ＳＣＲを記憶し、
以後クロック発生回路２７が出力するクロックをカウン
トし、クロックに対応して記憶値をインクリメントす
る。このＳＴＣレジスタ２６の記憶値は、内部時刻（Ｓ
ＴＣ）として比較器２３と２５に供給される。
【００１４】ＳＣＲは、リングバッファ４より多重化デ
ータ分離装置５にデータが供給され、ディマルチプレク
スが開始される時刻に対応している。即ち、図６のタイ
ミングチャートにおける時刻ｔ1に対応している。従っ
て、ＳＴＣレジスタ２６は、この時刻ｔ1からの時刻デ
ータ（現在時刻）を比較器２３および２５の一方の入力
に出力することになる。
【００１５】ＤＴＳＶレジスタ２２は、ビデオデコーダ
７がデコードを開始する時刻ＤＴＳＶを比較器２３の他
方の入力に供給する。比較器２３は、ＳＴＣレジスタ２
６が出力する現在時刻が、ＤＴＳＶレジスタ２２が出力
するデコード開始時刻に一致したとき（図８における時
刻ｔ2において）、ビデオデコードスタート信号をビデ
オデコーダ７に出力する。ビデオデコーダ７は、このビ
デオデコードスタート信号が入力されたとき、ビデオコ
ードバッファ６に書き込まれていたビデオデータを１フ
レーム分読み出し、デコードを開始する。
【００１６】なお、図８において、直線Ａはビデオコー
ドバッファ６へのデータの書き込み状態を示しており
（その傾きは、書込転送レートを表わしている）、折線
Ｂはビデオコードバッファ６よりビデオデコーダ７がデ
ータを読み出す状態を示している。従って、ビデオコー
ドバッファ６には、図中、影を付して示した範囲にデー
タが残っていることになる。ビデオコードバッファ６の
記憶容量は、直線Ａと直線Ｃの垂直方向の距離で表され
る。
【００１７】ビデオデコーダ７は、ビデオデコードスタ
ート信号が供給されるとデコードを開始し、デコードが
完了した時点において、即ちデコード開始後ビデオデコ
ードディレイ（ＶＩＤＥＯ＿ＤＥＣＯＤＥ＿ＤＥＬＡ
Ｙ）の時間が経過したタイミングにおいて、ビデオ垂直
同期信号を発生し、これに続けてビデオ信号を出力す
る。即ち、デコード開始後、ビデオデコードディレイの
時間が経過した後、表示が開始されることになる。
【００１８】同様にして、比較器２５は、ＳＴＣレジス
タ２６が出力する現在時刻が、ＤＴＳＡレジスタ２４が
出力するオーディオデータのデコード開始時刻に一致し
たとき、オーディオデコードスタート信号を出力する。
オーディオデコーダ９は、このオーディオデコードスタ
ート信号が入力されたとき、オーディオコードバッファ
８よりデータを読み出し、デコードの処理を開始する。
そして、デコード処理の結果、生成されたオーディオ信
号を図示せぬ回路に出力する。
【００１９】
【発明が解決しようとする課題】図６の従来のデータ再
生装置においては、上述のようにビデオデコーダ７とオ
ーディオデコーダ９の同期関係の設定が、再生開始時に
１回だけ行われるだけであった。また、ＤＴＳデータは
多重化データ分離装置５で分離されてしまうため、ビデ
オデコーダ７とオーディオデコーダ９では同期エラーを
知ることは難しかった。
【００２０】具体的な同期エラーの原因の大きなもの
は、読み出したデータのエラーレートが高く、ＥＣＣ回
路３において訂正不能と判断された場合である。この時
データエラーによる同期エラーが発生する。
【００２１】図９を参照し、ＥＣＣ回路３における訂正
不能による同期のずれについて説明する。図９（ａ）
は、デコーダ７に入力されるビデオビットストリームを
示す。ここでは P12、B11、P14、B13、I1、B0、P3、B
2...という順番ピクチャがで並んでいる。なお、ＩはＩ
ピクチャを、ＰはＰピクチャを、ＢはＢピクチャを示
す。Ｉ，ＰおよびＰピクチャについては、特願平４−１
６３６４７号を参照されたい。また、数字はテンポラル
リファレンスを示す。テンポラル・リファレンスとはＧ
ＯＰの頭から表示順で数えたピクチャの番号である。Ｍ
ＰＥＧの規格ではＧＯＰの先頭で０にクリアされると定
義されている。
【００２２】エラーのない場合には、図９（ａ）のビッ
トストリームがデコードされて、図９（ｂ）の様に出力
される。しかし、例えば、図９（ｃ）のビットストリー
ム中のＸの部分に訂正不能エラーが生じ、Ｐ１４のピク
チャヘッダが失われてしまうと、ビデオデコーダ７はＰ
１４の存在を知ることができないので、図９（ｄ）の様
にデコードされ、この結果、図９（ｅ）のように出力さ
れる。なお、この例ではビデオデコードディレイは無視
している。
【００２３】テンポラルリファレンスは、次のＧＯＰの
先頭で０にリセットされてしまうので、ビデオデコーダ
７は当該ＧＯＰに１４枚目が存在したことは知ることが
出来ない。これによりビデオデコーダ７はオーディオデ
コーダ９に対して１ピクチャ分早まってしまったことに
なる。
【００２４】また、前述のように、ＤＴＳデータは、多
重化データ分離装置５で分離されてしまうため、ビデオ
コードバッファ６に入力されたビデオデータおよびオー
ディオコードバッファ８に入力されたオーディオデータ
の再同期は構造的に困難であり、各コードバッファをク
リアしてから再同期を行う等の処理が必要であった。
【００２５】再同期の必要な例として、図１０を参照し
て、一時停止（ポーズ）状態を説明する。図１０（ａ）
は、通常再生した場合のビデオデータとオーディオデー
タとの同期関係を示す。一般的に、ビデオデータのアク
セスユニット（ここではピクチャ１枚）とオーディオデ
ータのアクセスユニット（ここでは５１２サンプル）の
長さは異なっており、倍数の関係にもないため、同期関
係は刻々と変化している。ここではＰ１４の出力開始時
刻とＡ１０の出力開始時刻の差（ｔｄ）に注目する。
【００２６】図１０（ｂ）に示すように、Ｂ１３を出力
中に、ユーザからポーズが指令された場合（つまり入力
部２９のポーズボタンが押された場合）、ビデオデータ
としてポーズが解除されるまでＢ１３が出力される。こ
の時オーディオはミュートされる。そして、 図１０
（ｃ）に示すタイミングでポーズの解除が行われると、
ビデオデータは次のフレームからＰ１４以降が出力さ
れ、正常動作に復帰する。オーディオデータは、Ｐ１４
の出力開始から（ｔｄ））後に、Ａ１０の出力を開始す
る必要がある。
【００２７】しかし、図６に示す従来例においては、ポ
ーズを解除する時刻においてＰ１４およびＡ１０は、既
にタイミング情報（ＤＴＳ）と分離された後、ビデオコ
ードバッファ６あるいはオーディオコードバッファ８に
入力されており、両者のタイミング差（ｔｄ）を知るこ
とは困難であった。
【００２８】ポーズすなわち一時停止の原因は、ユーザ
からの指令が一般的であるが、メディアの訂正不能エラ
ーに対応するために、デコードシステムをポーズするこ
とも考えられる。すなわち、図６において、衝撃等の影
響によりのドライブ１のピックアップサーボが乱れ、こ
れによりデータ再生に不具合が生じたとする。この場
合、復調装置２を経て、ＥＣＣ回路３においてエラーが
検知される。衝撃等の影響によるエラーの場合、メディ
ア上の同一個所を再度読み出せば、言い換えればリトラ
イを行えば、正しいデータを得ることが出来る。
【００２９】しかし、一般的にリトライには時間がかか
り、例えばドライブ１がＣＤ−ＲＯＭだとした場合、デ
ィスクの同じ位置が来るまでに、最大３００ミリ秒程度
かかってしまう。このため、単にドライブ１に対してリ
トライを指令した場合、データの供給は最大３００ミリ
秒程度中断するが、データの消費は普通通り行われてし
まうため、リングバッファ４、ビデオコードバッファ
６、オーディオコードバッファ８の何れか、あるいは全
てがアンダーフローしてしまう可能性がある。
【００３０】本発明の第１の目的は、同期エラーの検出
および修正が容易なデータ再生装置を提供することにあ
る。
【００３１】本発明の第２の目的は、一時停止後のビデ
オデータとオーディオデータとの同期の回復を容易にす
ることにある。
【００３２】本発明の第３の目的は、データ再読み出し
すなわちリトライによるアンダーフローの発生を防止す
ることにある。
【００３３】
【課題を解決するための手段】本発明のデータ再生装置
は、ビデオデータおよびオーディオデータをデコードす
るデコード手段と、ビデオデータおよびオーディオデー
タと、デコード手段がデコードを開始する時刻を示すタ
イミングデータとを含む入力データから、デコード手段
の直前または内部において、タイミングデータを抽出す
るタイミングデータ抽出手段と、基準タイミング信号を
発生するタイミング手段と、タイミングデータ抽出手段
によって抽出されたタイミングデータと基準タイミング
信号とを比較し、比較結果に基づいてデコード手段を制
御することによりビデオデータおよびオーディオデータ
の同期を制御する同期制御手段とを備えることを特徴と
する。
【００３４】
【００３５】同期制御手段が、タイミングデータ抽出手
段によって抽出されたビデオタイミングデータとオーデ
ィオタイミングデータとを比較し、比較結果に基づいて
デコード手段を制御するようにもできる。
【００３６】
【００３７】デコード手段を、ビデオデータをデコード
するビデオデコード手段と、オーディオデータをデコー
ドするオーディオデコード手段とから構成し、ビデオデ
ータおよびオーディオデータを記憶し、これらのデータ
を読み出すドライブ手段と、ビデオデコード手段および
オーディオデコード手段のデコーディングを一時停止さ
せ、ドライブ手段にデータの再読み出しを行わせる読み
出し制御手段とをさらに設けることができる。
【００３８】
【００３９】
【作用】本発明のデータ再生装置においては、ビデオデ
ータまたはオーディオデータと、デコード手段がデコー
ドを開始する時刻を示すタイミングデータとを含む入力
データから、デコード手段の直前または内部において、
タイミングデータが抽出され、抽出されたタイミングデ
ータと基準タイミング信号とが比較される。従って、デ
コード手段の直前まで、ビデオデータとビデオタイミン
グデータとの時間関係が保存されるから、ビデオデコー
ディングの同期が容易に確保される。
【００４０】
【００４１】
【００４２】また、タイミングデータ抽出手段によって
抽出されたビデオタイミングデータとオーディオタイミ
ングデータとを比較することにより、どの程度の同期エ
ラーが発生したかを正確に知ることができ、比較結果に
基づいてビデオデコード手段またはオーディオデコード
手段を制御することにより、同期エラーを修正できる。
【００４３】
【００４４】
【００４５】ビデオデコード手段およびオーディオデコ
ード手段のデコーディングが一時停止させられて、ドラ
イブ手段によるデータの再読み出しが行われるようにし
た場合には、データ再読み出しすなわちリトライによる
アンダーフローの発生を防止することができる。
【００４６】
【００４７】
【実施例】図１は、本発明のデータ再生装置の一実施例
の構成を示すブロック図であり、図４の従来例と対応す
る部分には同一の符号を付してある。この実施例におい
ては、多重化データ分離装置５Ａには、データ分離装置
２１Ａ、ＳＴＣレジスタ２６、クロック発生回路２７、
および制御回路２８が設けられている。
【００４８】データ分離回路２１Ａは、ＦＩＦＯからな
るビデオコードバッファ６Ａに、ビデオデータおよびＤ
ＴＳＶ情報を両者が多重化されたままの状態で供給す
る。データ分離回路２１Ａは、ＦＩＦ０からなるオーデ
ィオコードバッファ８Ａに、オーディオデータとＤＴＳ
Ａ情報を、両者が分離された状態で供給する。オーディ
オコードバッファ８Ａにおいては、入力されたオーディ
オデータとＤＴＳＡ情報の時間関係が保存される。
【００４９】ビデオコードバッファ６Ａの出力は、ＤＴ
ＳＶ抽出回路３０に入力される。ＤＴＳＶ抽出回路３０
は、ビデオデータとＤＴＳＶ情報とを分離し、ビデオデ
ータをビデオデコーダ７に供給される。ビデオデータ
は、ビデオデコーダ７によりデコードされ、生成された
ビデオ信号が、図示せぬ回路に出力されるように構成さ
れている。
【００５０】同様に、オーディオコードバッファ８Ａの
オーディオデータ出力およびＤＴＳＡ出力はＤＴＳＡ抽
出回路３２に入力される。ＤＴＳＡ抽出回路３２は、オ
ーディオデータとＤＴＳＡ情報とを分離し、オーディオ
データはオーディオデコーダ９に供給され、ここでデコ
ードされ、生成されたオーディオ信号が、図示せぬ回路
に出力されるように構成されている。
【００５１】他方、ＤＴＳＶ抽出回路３０によってビデ
オデータと分離されたＤＴＳＶ情報、およびＤＴＳＡ抽
出回路３２によってオーディオデータと分離されたＤＴ
ＳＡ情報は同期制御回路３１に入力される。
【００５２】同期制御回路３１は、入力されたＤＴＳＶ
情報およびＤＴＳＡ情報とＳＴＣレジスタ２６から供給
されているＳＴＣの値を比較し、その結果によってビデ
オデコーダ７およびオーディオデコーダ９を制御する。
【００５３】なお、図１中、ドライブ１、復調装置２、
ＥＣＣ回路３、リングバッファ４、制御回路２８および
入力部２９の構成は、図４の従来例と同様である。
【００５４】次に、図１の実施例の動作について説明す
る。入力部２９を操作して再生の開始を指令すると、ド
ライブ１が内蔵する光ディスクから再生したデータが復
調装置２に供給され、復調される。この復調データはＥ
ＣＣ回路３において、誤り検出訂正の処理が施された
後、リングバッファ４を介してデータ分離回路２１Ａに
供給される。
【００５５】データ分離回路２１Ａは、制御回路２８に
制御され、リングバッファ４より供給されるデータから
ビデオデータおよびオーディオデータを分離し、それぞ
れビデオコードバッファ６Ａとオーディオコードバッフ
ァ８Ａに供給する。また、データ分離回路２１Ａは、Ｓ
ＣＲおよびＤＴＳＡを分離し、それぞれ、ＳＴＣレジス
タ２６およびオーディオコードバッファ８Ａに供給し記
憶させる。
【００５６】ＳＴＣレジスタ２６は、ＳＣＲを記憶し、
以後クロック発生回路２７が出力する９０ｋＨｚのクロ
ックをカウントし、クロックに対応して記憶値をインク
リメントする。このＳＴＣレジスタ２６の記憶値は、内
部時刻（ＳＴＣ）として同期制御回路３１に供給され
る。
【００５７】ビデオのデコード開始時刻を示すＤＴＳＶ
は、データ分離回路２１Ａでは分離せず、ビデオコード
バッファ６Ａに供給する。具体的には、ＤＴＳＶを含む
パケットヘッダを分離せずにおく。パケットヘッダ中の
パケットスタートコード（図５参照）はビデオデータ中
でもユニークなので、後段で抽出することが出来る。
【００５８】オーディオのデコード開始時刻を示すＤＴ
ＳＡは、データ分離回路２１Ａで分離され、オーディオ
データとは別個にオーディオコードバッファ８に供給さ
れる。ＭＰＥＧオーディオや、リニアＰＣＭではパック
スタートコードと同じビット列が発生する可能性がある
ため、ビデオ系で採用している簡易な方法が使えない。
このため、データ分離回路２１Ａで一度分離し、オーデ
ィオコードバッファ８Ａにオーディオデータとは別個に
供給する。
【００５９】オーディオコードバッファ８Ａは、入力さ
れたＤＴＳＡとそれに続くオーディオデータとの時間関
係を保存し、ＤＴＳＡ抽出回路３２に供給する。具体的
には、例えば、図２に示すように、オーディオコードバ
ッファ８Ａに、オーディオデータおよびＤＴＳＡが記憶
されるコードバッファ本体部の外に１ビットのフラグビ
ット領域を設け、このフラグビットによりオーディオデ
ータすなわちコードデータか、ＤＴＳＡかを示すように
しておく。図２の例では、フラグビットが０であるとき
にはオーディオデータであることを示し、フラグビット
が１であるときにはＤＴＳＡであることを示している。
このような構成を取ることにより、オーディオデータと
ＤＴＳＡを区別したまま、時間関係を保存できる。
【００６０】次に、図１の実施例におけるデコードスタ
ート動作にしいて説明する。ビデオコードバッファ６Ａ
に入力されたビデオデータとＤＴＳＶは、ＤＴＳＶ抽出
回路３０に入力され、ＤＴＳＶは、同期制御回路３１
に、ビデオデータは、ビデオデコーダ７に、それぞれ、
供給される。同様にオーディオコードバッファ８Ａに入
力されたオーディオデータとＤＴＳＡは、ＤＴＳＡ抽出
回路３２に入力され、ＤＴＳＡは、同期制御回路３１
に、オーディオデータは、オーディオデコーダ９に供給
される。
【００６１】同期制御回路３１は、ＤＴＳＶ抽出回路３
０より入力された、ビデオデコーダ７がデコードを開始
する時刻ＤＴＳＶと、ＳＴＣレジスタ２６が出力する現
在時刻ＳＴＣを比較し、ＤＴＳＶがＳＴＣと一致した時
点（図６のｔ2）でビデオデコーダ７にデコードスター
トを指令する。ビデオデコーダ７は、デコードスタート
が指令されると、デコードを開始しビデオ信号を出力す
る。
【００６２】同様にして、同期制御回路３１は、ＤＴＳ
Ａ抽出回路３２より入力された、オーディオデコーダ７
がデコードを開始する時刻ＤＴＳＡと、ＳＴＣレジスタ
２６が出力する現在時刻ＳＴＣを比較し、ＤＴＳＡがＳ
ＴＣと一致した時点でオーディオデコーダ７にデコード
スタートを指令する。オーディオデコーダ９はデコード
が指令されると、デコードを開始しオーディオ信号を出
力する。
【００６３】このようにして、ＤＴＳＶとＤＴＳＡ及び
ＳＣＲを使用してビデオとオーディオの同期がとられた
デコード開始がなされる。
【００６４】次に、同期エラーが発生したときの動作に
ついて、図３を参照して説明する。図３（ａ）は、ビデ
オデコーダ７に入力されるビデオビットストリームを示
す。これは、従来例の図７（ａ）と同じである。また、
図３（ａ）の下部にはP12がデコードされる時刻をＮと
した、各ピクチャのデコードされるべき時刻が示されて
いる。図３（ａ）中の矢印の下側がＳＴＣの出力であ
り、上側がＤＴＳＶ抽出回路３０にて分離されたＤＴＳ
Ｖの値である。ＮＴＳＣ圏の場合、フレーム周波数が２
９．９７Ｈｚであるから、１ピクチャ当たりの時間は、
９０ｋＨｚのクロック数で表すと、90K/29.97=3003とな
る。ここではすべてのピクチャの先頭にＤＴＳＶが含ま
れると考える。図３（ｂ）は、デコーダ７の出力の様子
である。
【００６５】ここで、図３（ｃ）に示されているよう
に、ビットストリーム中のＸの部分に訂正不能エラーが
生じ、Ｐ１４のピクチャヘッダが失われてしまうと言う
例を考える。この場合、同期制御回路３１には時刻（Ｓ
ＴＣレジスタ２６からの信号）＝Ｎ＋６００６に、ＤＴ
ＳＶ＝Ｎ＋９００９が入力される。同期制御回路３１は
両者の比較を行い、ＤＴＳＶがＳＴＣより３００３だけ
進んでいることから、ビデオのデコードに際してエラー
が発生し、正常な時刻より丁度１ピクチャ分早まってい
ると判断する。
【００６６】そして、同期制御回路３２は、図３（ｅ）
に示されているように、ビデオデコーダ７に対し、１ピ
クチャ分のウェイトを指令する。この結果、図３（ｆ）
に示されているように、Ｂ１３以降は正しい時刻にデコ
ードが開始される。なお、ウェイトの間、ビデオ出力に
は直前の画像（＝Ｂ１１）が出力される。
【００６７】オーディオの同期エラーに関しても、アク
セスユニット単位で上記ビデオデコーダと同様の処理が
行われて、エラーの修復が行われる。ただし、オーディ
オデコーダ９のコントロールに際してはその前後を含め
た充分な時間をミュートとし、制御によって不快な音声
が出力されない様にする必要がある。
【００６８】また、以上の実施例においては、訂正不能
エラーによりピクチャスタートコードを失ったことを原
因としたデコードの早まりにウェイトで対応した。この
逆の例として、訂正不能エラーによりデータの一部を削
除したことで、例えば間違ったピクチャスタートコード
を生成してしまったことを原因したデコードの遅れに対
しては、１アクセスユニット分（１ピクチャ分）のデー
タをスキップすることをデコーダに指令することにより
対応できる。
【００６９】なお、ビデオデコーダ７とオーディオデコ
ーダ９との同期エラーの検出および修正だけであれば、
ＤＴＳＶとＤＴＳＡとを比較することで実現できる。
【００７０】また、ＳＴＣと各ＤＴＳを比較することに
より各バッファのオーバーフロー／アンダーフローの対
策が可能である。ＤＴＳＶ抽出回路３０により分離さ
れ、同期制御回路３１に入力されたＤＴＳＶとＳＴＣレ
ジスタ２６より入力されたＳＴＣを比較する。ＤＴＳＶ
がＳＴＣより大きい場合、ビデオのデコード処理がシス
テムの時刻より早まっていることであり、ビデオコード
バッファ６Ａのアンダーフローの危険がある。この場合
はビデオデコーダ７に対してウェイトの指令を発行する
等の方法を用いて対応すればよい。
【００７１】また、ＤＴＳＶがＳＴＣより小さい場合、
ビデオのデコード処理がシステムの時刻より遅いという
ことであり、ビデオコードバッファ６Ａのオーバーフロ
ーの危険がある。この場合にはビデオデコーダ７に対し
スキップの指令を発行する等の方法を用いて対応すれば
よい。
【００７２】オーディオに対しても同様である。ただ
し、オーディオデコーダ９のコントロールに際してはそ
の前後を含めた充分な時間をミュートとし、制御によっ
て不快な音声が出力されない様にする必要がある。
【００７３】なお、特願平３−２３０９７５に開示され
た技術にに基づく再生装置の場合、オーバーフロー対策
は必要ない。
【００７４】また、図１の実施例では、ビデオデコーダ
７の直前にＤＴＳＶ抽出回路３０を設け、オーディオデ
コーダ９の直前にＤＴＳＡ抽出回路３２を設けている
が、ＤＴＳＶを抽出する機能を備えたビデオデコーダ、
およびＤＴＳＡを抽出する機能を備えたオーディオデコ
ーダを使用することも出来る。
【００７５】また、上述の実施例においては、デコード
開始時刻としてＤＴＳＶ，ＤＴＳＡを用いるようにした
が、ＰＴＳ（Ｐｒｅｓｅｎｔａｔｉｏｎ Ｔｉｍｅ Ｓ
ｔａｍｐ）を用いることもできる。このＰＴＳは、１部
のパケットのパケットヘッダに配置されており、この値
は当刻パケット内の最初のアクセスユニットで始まる部
分が表示されるべき時刻を表している。オーディオデー
タにおいては、ＰＴＳとＤＴＳが同一の値となり、ビデ
オデータにおいても簡単な計算によりＰＴＳとＤＴＳの
相互の変換が可能である。
【００７６】図４は、本発明のデータ再生装置の他の実
施例の構成を示す。図４の実施例では、ＳＴＣレジスタ
２６Ａが計時（進行）／停止の２つのモードを有し、制
御回路２８Ａが、多重化データ分離回路５Ａの外に設け
られて、ドライブ１にデータ再読み出し指令すなわちリ
トライ指令を与えること、ＥＣＣ回路３からＥＣＣステ
ータス信号を受けること、およびＳＴＣレジスタ２６Ａ
に対して計時（進行）コマンドおよび停止コマンドを与
える等の点で、図１の実施例と異なる。なお、図４の実
施例と図１の実施例の同一部分には同一符号が付されて
いる。
【００７７】図４の実施例の再生動作中に、ユーザが入
力部２９を操作して一時停止を指定すると、その命令は
制御回路２８Ａに伝えられる。制御回路２８ＡはＳＴＣ
レジスタ２６Ａに停止コマンドを送り、そのインクリメ
ント動作を停止させる。この結果として、同期制御回路
３１に入力されるＳＴＣが一定値を示すことになる。こ
れはシステム全体の時計が止まっていることを示す。ま
た同時に、制御回路２８Ａはドライブ１に対して読み出
しを停止させる。
【００７８】同期制御回路３１は、ＤＴＳＶ抽出回路３
０から入力されたＤＴＳＶ、およびＤＴＳＡ抽出回路３
２から抽出されたＤＴＳＡをＳＴＣとそれぞれ比較しそ
の結果によりビデオデコーダ７及びオーディオデコーダ
９を制御するが、ＳＴＣレジスタ２６から入力されるＳ
ＴＣが変化しない場合には、結果として各ＤＴＳの値が
ＳＴＣより大きくなる。この結果、同期制御回路３１は
各デコーダに対しウェイトの命令を与える。
【００７９】ポーズ中に、入力部２９に対して一時停止
の解除が指令されると、その命令は制御回路２８Ａに伝
えられる。制御回路２８ＡはＳＴＣレジスタ２６Ａに計
時（進行）コマンドを送り、そのインクリメント動作を
再開させる。また同時に、制御回路２８Ａはドライブ１
に対して読み出しを再開させる。
【００８０】図５を参照して、図４の実施例の動作につ
いて説明する。図５（ａ）は、ビデオビットストリーム
の入力及びデコード状態を示す。また、図５（ａ）下部
にはＰ１２がデコードされる時刻をＮとした、各ピクチ
ャのデコードされるべき時刻が書かれている。矢印下側
がＳＴＣの出力であり、上部がＤＴＳＶ抽出回路３０に
て分離されたＤＴＳＶの値である。ＮＴＳＣ圏の信号を
考えているため、１ピクチャ当たりの時間は、９０ｋＨ
ｚのクロック数で表すと、90K/29.97=3003となる。ここ
では、すべてのピクチャの先頭にＤＴＳＶが含まれると
考える。図５（ｂ）は、出力の様子を示す。
【００８１】ここで、図５（ｃ）において、時刻Ｎ＋８
０００の時刻にポーズが指令されたとする。この時刻か
ら、ポーズが解除される時刻までＳＴＣは、Ｎ＋８００
０であり、一定値を保持する。ビデオデコーダ７は、Ｐ
１４デコード後にＢ１３のデコードを開始しようとす
る。しかし同期制御回路３１は入力されたＤＴＳＶ＝Ｎ
＋９００９とＳＴＣ＝Ｎ＋８０００を比較し、ビデオデ
コーダ７に対してウェイトを指令する。ウェイトの間ビ
デオデコーダ７の出力は、直前に出力していたＰ１２と
なる。
【００８２】オーディオデコーダ９に対しても、上記と
同様の操作が行われる。ただしウェイトの間はミュート
とされる。
【００８３】ポーズ状態は、入力部２９にて一時停止が
解除され、ＳＴＣレジスタ２６Ａのインクリメントが再
開されるまで継続する。これにより、ＳＴＣレジスタ２
６Ａを操作するだけで間接的にビデオデコーダ７および
オーディオデコーダ９の制御も行える。この方法のメリ
ットは、同期制御回路３１を経由した制御であるため、
基本的に同期関係は保持されていることである。
【００８４】図５（ｃ）において、ポーズが解除される
と、その時点からＳＴＣのインクリメントが再開され
る。これにより次のデコードタイミングではＳＴＣ＞Ｄ
ＴＳＶとなり、デコードが再開される。
【００８５】以上においては、ビデオデコーダ７および
オーディオデコーダ９の制御が同期制御回路３１のみよ
り行われるとしたが、入力部２９あるいは制御回路２８
から各デコーダへ制御が行われるようにしても、同様の
動作を実行することが出来ることはもとよりである。
【００８６】また、上記実施例においては、ＳＴＣレジ
スタ２６Ａのインクリメント・スタート／ストップのタ
イミングがビデオデータのデコードタイミングと関係な
いため、ポーズ解除後にＤＴＳＶとＳＴＣの関係がず
れ、図５（ｃ）に示すように、ＤＴＳＶ＝Ｎ＋９００９
の時刻にＳＴＣ＝Ｎ＋１００００となる。
【００８７】この対策として、ビデオデコーダ７等が発
生する、映像同期信号を同期制御回路３１あるいはＳＴ
Ｃレジスタ２６Ａあるいは制御回路２８Ａに入力すれば
よい。こうすることにより、ポーズの設定／解除のタイ
ミング（＝ＳＴＣのインクリメント）を映像同期信号に
同期させることが出来る。これにより、ＤＴＳＶとＳＴ
Ｃの関係を保存することができる。
【００８８】また、間欠的に一時停止／解除を繰り返す
ことでスローフォーワード動作を行うことが出来る。つ
まり入力部２９に対してスローフォワードモードが指定
されるとその命令は制御回路２８Ａに伝えられる。制御
回路２８Ａは指定されたスローフォワードの速さに従
い、間欠的に一時停止／解除を繰り返す。例えば１／２
倍速の場合には１：１の割合で一時停止／解除を繰り返
すことで実現できる。
【００８９】ドライブ１に対して衝撃が与えられ、ドラ
イブ１内の図示せぬピックアップサーボが乱れ、これに
よりデータ再生に不具合が生じたとする。このデータは
復調回路２を経てＥＣＣ回路３に供給される。ＥＣＣ回
路３においては入力されたデータの冗長部分を利用して
エラー訂正を行うが、ここでは衝撃が強すぎて該当部分
のデータが訂正できなかったとする。
【００９０】訂正不能が発生したという情報および、訂
正不能が発生した場所（セクタ番号）は、ＥＣＣ回路３
から制御回路２８Ａに伝えられる。制御回路２８Ａは、
この情報を受け、データ読み出しのリトライを行う。
【００９１】まず、制御回路２８Ａは、多重化データ分
離装置５Ａ以降を一時停止モードにする。例えば、図４
の実施例においては、ＳＴＣレジスタ２６Ａにコマンド
を送り、そのインクリメント動作を停止させる。これに
より上述したようにデコーダ側すなわちビデオデコーダ
７およびオーディオデコーダ９は、一時停止する。
【００９２】同時に、制御回路２８Ａは、ドライブ１に
対してコマンドを送り、訂正不能の発生した場所（セク
タ）の読み出しのリトライを行う。これにより、バッフ
ァ６Ａおよび８Ａのアンダーフローの危険なしに、デー
タ読み出しのリトライが可能である。このような方法を
取った場合には瞬間的に画像が停止し、音が途切れるだ
けであるので、ユーザに与える不快感は小さい。
【００９３】
【発明の効果】本発明の第１のデータ再生装置によれ
ば、ビデオデータまたはオーディオデータと、デコード
手段がデコードを開始する時刻を示すタイミングデータ
とを含む入力データから、デコード手段の直前または内
部において、タイミングデータを抽出し、抽出したタイ
ミングデータと基準タイミング信号とを比較するように
したので、デコード手段の直前まで、ビデオデータとビ
デオタイミングデータとの時間関係が保存されるから、
ビデオデコーディングの同期が容易に確保される。
【００９４】
【００９５】また、上記抽出されたビデオタイミングデ
ータと上記抽出されたオーディオタイミングデータとを
比較することにより、どの程度の同期エラーが発生した
かを正確に知ることができ、比較結果に基づいてデコー
ド手段を制御することにより、同期エラーを修正でき
る。
【００９６】さらに、ビデオデコード手段の前段に、ビ
デオデータを記憶するビデオバッファが設けられる場合
には、ビデオタイミングデータと基準タイミング信号と
の比較することにより、ビデオバッファのアンダーフロ
ー／オーバーフローの状態を知ることか可能であり、オ
ーディオデコード手段の前段に、オーディオデータを記
憶するオーディオバッファが設けられる場合には、オー
ディオタイミングデータと基準タイミング信号との比較
することにより、オディオバッファのアンダーフロー／
オーバーフローの状態を知ることが可能である。
【００９７】
【００９８】ビデオデコード手段およびオーディオデコ
ード手段のデコーディングを一時停止させて、ドライブ
手段によるデータの再読み出しを行うようにした場合に
は、データ再読み出しすなわちリトライによるアンダー
フローの発生を防止することができる。
【００９９】
【図面の簡単な説明】
【図１】本発明のデータ再生装置の一実施例の構成を示
すブロック図である。
【図２】図１のオーディオコードバッファ８Ａの一構成
例を示す図である。
【図３】図１の実施例の動作を説明するタイミングチャ
ートである。
【図４】本発明のデータ再生装置の他の実施例の構成を
示すブロック図である。
【図５】図４の実施例において、ボーズが指令されない
ときのデコーダの入力および出力、並びにボーズが指令
されたときのデコーダの入力および出力を示す図であ
る。
【図６】従来のデータ再生装置の一例の構成を示すブロ
ック図である。
【図７】図６の例の多重化ビットストリームを説明する
図である。
【図８】図６の例の動作を説明するタイミングチャート
である。
【図９】図６の従来例における同期エラーの発生を説明
する図である。
【図１０】ポーズ設定直後のビデオ出力およびオーディ
オ出力の関係、ならびにポーズ解除直後のビデオ出力お
よびオーディオ出力の望ましい関係を示す図である。
【符号の説明】
１ ドライブ ４ リングバッファ ５Ａ 多重化データ分離装置 ６Ａ ビデオコードバッファ ７ ビデオデコーダ ８Ａ オーディオコードバッファ ９ オーディオデコーダ ２１Ａ データ分離回路 ２６，２６Ａ ＳＴＣレジスタ ２７ クロック発生回路 ２８，２８Ａ 制御回路 ２９ 入力部 ３０ ＤＴＳＶ抽出回路 ３１ 同期制御回路 ３２ ＤＴＳＡ抽出回路

Claims (4)

    (57)【特許請求の範囲】
  1. 【請求項１】 ビデオデータおよびオーディオデータを
    デコードするデコード手段と、 前記ビデオデータおよびオーディオデータと、前記デコ
    ード手段がデコードを開始する時刻を示すタイミングデ
    ータとを含む入力データから、前記デコード手段の直前
    または内部において、前記タイミングデータを抽出する
    タイミングデータ抽出手段と、 基準タイミング信号を発生するタイミング手段と、 前記タイミングデータ抽出手段によって抽出されたタイ
    ミングデータと前記基準タイミング信号とを比較し、比
    較結果に基づいて前記デコード手段を制御することによ
    り前記ビデオデータおよびオーディオデータの同期を制
    御する同期制御手段とを備えることを特徴とするデータ
    再生装置。
  2. 【請求項２】 前記同期制御手段が、前記タイミングデ
    ータ抽出手段によって抽出されたビデオタイミングデー
    タとオーディオタイミングデータとを比較し、比較結果
    に基づいて前記デコード手段を制御することを特徴とす
    る請求項１記載のデータ再生装置。
  3. 【請求項３】 前記デコード手段は、 ビデオデータをデコードするビデオデコード手段と、 オーディオデータをデコードするオーディオデコード手
    段とから構成され、 ビデオデータおよびオーディオデータを記憶し、これら
    のデータを読み出すドライブ手段と、 前記ビデオデコード手段および前記オーディオデコード
    手段のデコーディングを一時停止させ、前記ドライブ手
    段にデータの再読み出しを行わせる読み出し制御手段と
    をさらに備えることを特徴とする請求項２記載のデータ
    再生装置。
  4. 【請求項４】 前記タイミング手段は、 前記ビデオデコード手段および前記オーディオデコード
    手段のデコーディングタイミングの基準となる基準タイ
    ミング信号を発生し、 前記読み出し制御手段は、前記タイミング手段を制御す
    ることにより、前記ビデオデコード手段および前記オー
    ディオデコード手段のデコーディングを一時停止させる
    ことを特徴とする請求項３記載のデータ再生装置。
JP03455793A 1992-12-18 1993-01-29 データ再生装置 Expired - Lifetime JP3255308B2 (ja)

Priority Applications (10)

Application Number Priority Date Filing Date Title
JP03455793A JP3255308B2 (ja) 1992-12-18 1993-01-29 データ再生装置
US08/165,885 US5502573A (en) 1992-12-18 1993-12-14 Apparatus for reproducing and decoding multiplexed data from a record medium with means for controlling data decoding as a function of synchronization errors
AU52387/93A AU671317B2 (en) 1992-12-18 1993-12-14 Apparatus for reproducing and decoding multiplexed data from a record medium with means for controlling data decoding as a function of synchronization errors
ES93310100T ES2123035T3 (es) 1992-12-18 1993-12-15 Aparato para reproducir datos multiplexados desde un medio de grabacion.
AT93310100T ATE173370T1 (de) 1992-12-18 1993-12-15 Vorrichtung zum wiedergeben multiplexierter daten von einem aufzeichnungsträger
DE69322060T DE69322060T2 (de) 1992-12-18 1993-12-15 Vorrichtung zum Wiedergeben multiplexierter Daten von einem Aufzeichnungsträger
EP93310100A EP0602943B1 (en) 1992-12-18 1993-12-15 Apparatus for reproducing multiplexed data from a record medium
KR1019930028147A KR100307118B1 (ko) 1992-12-18 1993-12-17 데이타재생장치및재생방법
CN93119864A CN1076928C (zh) 1992-12-18 1993-12-18 从记录媒体再生和解码多路复用数据的设备
HK98114878A HK1013574A1 (en) 1992-12-18 1998-12-22 Apparatus for reproducing multiplexed data from a record medium

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP4-355557 1992-12-18
JP35555792 1992-12-18
JP03455793A JP3255308B2 (ja) 1992-12-18 1993-01-29 データ再生装置

Publications (2)

Publication Number Publication Date
JPH06237437A JPH06237437A (ja) 1994-08-23
JP3255308B2 true JP3255308B2 (ja) 2002-02-12

Family

ID=26373375

Family Applications (1)

Application Number Title Priority Date Filing Date
JP03455793A Expired - Lifetime JP3255308B2 (ja) 1992-12-18 1993-01-29 データ再生装置

Country Status (10)

Country Link
US (1) US5502573A (ja)
EP (1) EP0602943B1 (ja)
JP (1) JP3255308B2 (ja)
KR (1) KR100307118B1 (ja)
CN (1) CN1076928C (ja)
AT (1) ATE173370T1 (ja)
AU (1) AU671317B2 (ja)
DE (1) DE69322060T2 (ja)
ES (1) ES2123035T3 (ja)
HK (1) HK1013574A1 (ja)

Families Citing this family (105)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB9405914D0 (en) 1994-03-24 1994-05-11 Discovision Ass Video decompression
US5019826A (en) * 1988-09-29 1991-05-28 Hughes Aircraft Company Coherent radar using recirculating delay line
US6034674A (en) * 1992-06-30 2000-03-07 Discovision Associates Buffer manager
JP3427416B2 (ja) * 1993-05-25 2003-07-14 ソニー株式会社 多重化データ分離装置および方法
US5430485A (en) * 1993-09-30 1995-07-04 Thomson Consumer Electronics, Inc. Audio/video synchronization in a digital transmission system
JP3509080B2 (ja) * 1993-10-15 2004-03-22 ソニー株式会社 データ再生装置
ES2196668T3 (es) * 1993-12-18 2003-12-16 Sony Corp Aparato de reproduccion de datos y medio de almacenamiento de datos.
KR960008470B1 (en) * 1994-01-18 1996-06-26 Daewoo Electronics Co Ltd Apparatus for transferring bit stream data adaptively in the moving picture
JP3197766B2 (ja) * 1994-02-17 2001-08-13 三洋電機株式会社 Ｍｐｅｇオーディオデコーダ、ｍｐｅｇビデオデコーダおよびｍｐｅｇシステムデコーダ
US5699370A (en) * 1994-02-17 1997-12-16 Hitachi, Ltd. Information recording and reproduction apparatus to be controlled by temporal information
BR9505850A (pt) * 1994-02-28 1996-02-13 Sony Corp Processo e aparelho de gravação de dados,meio de gravação de dados e processo e aparelho de reprodução de dados para reproduzir um meio de gravação de dados
CA2145361C (en) 1994-03-24 1999-09-07 Martin William Sotheran Buffer manager
CA2145365C (en) 1994-03-24 1999-04-27 Anthony M. Jones Method for accessing banks of dram
JP3483612B2 (ja) * 1994-04-08 2004-01-06 株式会社東芝 記録方法、記録装置並びに再生装置
JP3568984B2 (ja) 1994-06-20 2004-09-22 株式会社日立製作所 情報の再生方法、再生装置、出力方法及び出力装置
ATE190794T1 (de) * 1994-07-05 2000-04-15 Koninkl Philips Electronics Nv Signalverarbeitungssystem
US5801973A (en) 1994-07-29 1998-09-01 Discovision Associates Video decompression
JP3500724B2 (ja) * 1994-09-05 2004-02-23 ソニー株式会社 データ再生方法およびデータ再生装置
US5559999A (en) * 1994-09-09 1996-09-24 Lsi Logic Corporation MPEG decoding system including tag list for associating presentation time stamps with encoded data units
JP2910575B2 (ja) * 1994-09-26 1999-06-23 日本電気株式会社 音声信号処理回路と画像・音声デコーダ
US5598352A (en) * 1994-09-30 1997-01-28 Cirrus Logic, Inc. Method and apparatus for audio and video synchronizing in MPEG playback systems
US5815634A (en) * 1994-09-30 1998-09-29 Cirrus Logic, Inc. Stream synchronization method and apparatus for MPEG playback system
US5594660A (en) * 1994-09-30 1997-01-14 Cirrus Logic, Inc. Programmable audio-video synchronization method and apparatus for multimedia systems
SG34287A1 (en) * 1994-10-28 1996-12-06 Hitachi Ltd Input-output circuit recording apparatus and reproduction apparatus for digital video signal
JP3575100B2 (ja) * 1994-11-14 2004-10-06 ソニー株式会社 データ送信／受信装置及び方法並びにデータ記録／再生装置及び方法
US5754241A (en) * 1994-11-18 1998-05-19 Sanyo Electric Co., Ltd Video decoder capable of controlling encoded video data
JP3270983B2 (ja) * 1994-12-21 2002-04-02 ソニー株式会社 画像データ符号化方法及び装置、画像データ復号化方法及び装置
US5621772A (en) * 1995-01-20 1997-04-15 Lsi Logic Corporation Hysteretic synchronization system for MPEG audio frame decoder
US5517250A (en) * 1995-02-28 1996-05-14 General Instrument Corporation Of Delaware Acquisition of desired data from a packetized data stream and synchronization thereto
KR960036744A (ko) * 1995-03-31 1996-10-28 사또오 후미오 동화상 재생장치 및 동화상 재생처리 회로
US5696756A (en) * 1995-04-14 1997-12-09 Kabushiki Kaishia Toshiba Optical disk having an evaluation pattern for evaluating the optical disk
US6163644A (en) * 1995-04-27 2000-12-19 Hitachi, Ltd. Method and apparatus for receiving and/or reproducing digital signal
US5751694A (en) * 1995-05-22 1998-05-12 Sony Corporation Methods and apparatus for synchronizing temporally related data streams
JP3701051B2 (ja) * 1995-07-04 2005-09-28 パイオニア株式会社 情報記録装置及び情報再生装置
JP3570785B2 (ja) * 1995-07-18 2004-09-29 株式会社ルネサステクノロジ 動画像伸張再生方法および装置
KR0183723B1 (ko) * 1995-07-20 1999-04-15 김광호 두 개 신호 동시 기록 재생 브이티알 장치
JP3493822B2 (ja) * 1995-08-04 2004-02-03 ソニー株式会社 データ記録方法及び装置、並びに、データ再生方法及び装置
TW303569B (ja) * 1995-09-29 1997-04-21 Matsushita Electric Ind Co Ltd
TW305043B (ja) * 1995-09-29 1997-05-11 Matsushita Electric Ind Co Ltd
TW436777B (en) * 1995-09-29 2001-05-28 Matsushita Electric Ind Co Ltd A method and an apparatus for reproducing bitstream having non-sequential system clock data seamlessly therebetween
WO1997013362A1 (en) * 1995-09-29 1997-04-10 Matsushita Electric Industrial Co., Ltd. Method and device for encoding seamless-connection of telecine-converted video data
JPH09149411A (ja) * 1995-11-24 1997-06-06 Ekushingu:Kk 復号化装置
JP3405034B2 (ja) * 1995-12-27 2003-05-12 ソニー株式会社 ディジタル信号多重化方法及び装置、並びにディジタル信号記録媒体
US6148135A (en) * 1996-01-29 2000-11-14 Mitsubishi Denki Kabushiki Kaisha Video and audio reproducing device and video decoding device
JP3816572B2 (ja) * 1996-03-15 2006-08-30 パイオニア株式会社 情報記録装置及び情報記録方法並びに情報再生装置及び情報再生方法
US5617502A (en) * 1996-03-22 1997-04-01 Cirrus Logic, Inc. System and method synchronizing audio and video digital data signals during playback
JPH09293361A (ja) * 1996-04-23 1997-11-11 Sony Corp 記録再生装置
JP3047812B2 (ja) * 1996-05-08 2000-06-05 日本ビクター株式会社 磁気記録再生装置
US6405255B1 (en) * 1996-07-01 2002-06-11 Sun Microsystems, Inc. Mixing and splitting multiple independent audio data streams in kernel space
KR100308704B1 (ko) * 1996-07-04 2001-10-19 모리시타 요이찌 다중화 데이터 생성 장치, 부호화 데이터 재생 장치, 클럭 변환 장치, 다중화 데이터 생성 방법, 부호화 데이터 재생 방법 및 클럭 변환 방법
KR100219610B1 (ko) * 1996-09-20 1999-10-01 윤종용 디지탈 신호의 기록 및 재생장치
US5838876A (en) * 1996-09-24 1998-11-17 Sony Corporation Frame-accurate edit and playback in digital stream recording
JP3063824B2 (ja) * 1996-10-29 2000-07-12 日本電気株式会社 オーディオ・ビデオ同期再生装置
TW361046B (en) * 1996-10-31 1999-06-11 Matsushita Electric Ind Co Ltd Dynamic picture image decoding apparatus and method of decoding dynamic picture image
WO1998025413A1 (en) 1996-12-04 1998-06-11 Matsushita Electric Industrial Co., Ltd. Optical disc for high resolution and three-dimensional image recording, optical disc reproducing device, and optical disc recording device
KR100254610B1 (ko) * 1997-01-06 2000-05-01 구자홍 광디스크의 재생시간 산출장치 및 방법
US5926606A (en) * 1997-03-10 1999-07-20 Winbond Electronics Corp. VCD up-grading circuit board for a CD player or CD-ROM
JPH10262208A (ja) * 1997-03-19 1998-09-29 Sony Corp 同期ずれ制御装置及び方法
US6021440A (en) * 1997-05-08 2000-02-01 International Business Machines Corporation Method and apparatus for coalescing and packetizing data
US6122316A (en) * 1997-07-31 2000-09-19 Lsi Logic Corporation MPEG decoding system meeting 2-frame store and letterboxing requirements
US6289053B1 (en) 1997-07-31 2001-09-11 Lsi Logic Corporation Architecture for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements
US6236681B1 (en) 1997-07-31 2001-05-22 Lsi Logic Corporation Method for decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements
US6266091B1 (en) 1997-07-31 2001-07-24 Lsi Logic Corporation System and method for low delay mode operation video decoding
US6101221A (en) * 1997-07-31 2000-08-08 Lsi Logic Corporation Video bitstream symbol extractor for use in decoding MPEG compliant video bitstreams meeting 2-frame and letterboxing requirements
US6310918B1 (en) 1997-07-31 2001-10-30 Lsi Logic Corporation System and method for motion vector extraction and computation meeting 2-frame store and letterboxing requirements
US6327418B1 (en) * 1997-10-10 2001-12-04 Tivo Inc. Method and apparatus implementing random access and time-based functions on a continuous stream of formatted digital data
JP3063841B2 (ja) * 1997-11-26 2000-07-12 日本電気株式会社 オーディオ・ビデオ同期再生装置
KR100562116B1 (ko) * 1997-11-28 2006-05-25 마츠시타 덴끼 산교 가부시키가이샤 처리 효율을 높인 영상음성 처리장치
US6788882B1 (en) * 1998-04-17 2004-09-07 Timesurf, L.L.C. Systems and methods for storing a plurality of video streams on re-writable random-access media and time-and channel- based retrieval thereof
US6393430B1 (en) 1998-05-08 2002-05-21 Sony Corporation Method and system for automatically recording music data files by using the hard drive of a personal computer as an intermediate storage medium
JP3104681B2 (ja) * 1998-06-10 2000-10-30 日本電気株式会社 オーディオ・ビデオ同期再生方法および装置
US6363207B1 (en) * 1998-10-22 2002-03-26 Sony Corporation Method and apparatus for a virtual system time clock for digital audio/video processor
US6323909B1 (en) * 1998-10-28 2001-11-27 Hughes Electronics Corporation Method and apparatus for transmitting high definition television programming using a digital satellite system transport and MPEG-2 packetized elementary streams (PES)
EP1139347A3 (en) * 1999-03-09 2004-10-06 Matsushita Electric Industrial Co., Ltd. Information recording medium, apparatus and method for recording or reproducing the recording medium
JP4292654B2 (ja) 1999-03-19 2009-07-08 ソニー株式会社 記録装置および方法、再生装置および方法、並びに記録媒体
US6973069B1 (en) * 1999-03-23 2005-12-06 Motorola, Inc. Method for transporting multimedia information in a communication system
JP2001025010A (ja) * 1999-07-09 2001-01-26 Mitsubishi Electric Corp マルチメディア情報通信装置およびその方法
SK282249B6 (sk) * 1999-08-17 2001-12-03 Juraj Kelly�R Spôsob záznamu, reprodukcie alebo projekcie digitálnych alebo analógových, vzorkovaných alebo spojitých audio- a/alebo videozáznamov
JP2001202698A (ja) * 2000-01-19 2001-07-27 Pioneer Electronic Corp オーディオ及びビデオ再生装置
JP2001231035A (ja) * 2000-02-14 2001-08-24 Nec Corp 復号同期制御装置、復号装置、及び復号同期制御方法
US6993251B1 (en) * 2000-03-31 2006-01-31 Matsushita Electric Industrial Co., Ltd. Method and apparatus for concealing disk soft errors in recorded digital television signals
JP4035277B2 (ja) * 2000-05-31 2008-01-16 富士通株式会社 映像・音声再生装置及び映像・音声再生方法
US7110452B2 (en) * 2001-03-05 2006-09-19 Intervideo, Inc. Systems and methods for detecting scene changes in a video data stream
US20030079228A1 (en) * 2001-10-23 2003-04-24 Shu Lin Searching for frames to perform a trick mode
EP1472879A1 (en) * 2002-01-24 2004-11-03 Koninklijke Philips Electronics N.V. Embedding tv anytime crids
KR100490403B1 (ko) * 2002-05-04 2005-05-17 삼성전자주식회사 오디오 스트림의 버퍼링 제어 방법 및 그 장치
KR100825286B1 (ko) * 2002-05-10 2008-04-28 주식회사 포스코 도로 경계용 프레임 블럭
US20040047611A1 (en) * 2002-09-06 2004-03-11 Funai Electric Co., Ltd. Optical disc apparatus
JP4162454B2 (ja) * 2002-09-10 2008-10-08 三洋電機株式会社 データ処理装置
CN1720749B (zh) * 2002-12-04 2010-12-08 三叉微系统(远东)有限公司 自动测试音频/视频同步的方法
FR2849327A1 (fr) * 2002-12-20 2004-06-25 St Microelectronics Sa Procede et dispositif de decodage audio/video, circuit pilote video et boitier decodeur l'incorporant
JP4305065B2 (ja) 2003-06-12 2009-07-29 ソニー株式会社 Ａｖ同期処理装置および方法ならびにａｖ記録装置
EP1499131A1 (en) * 2003-07-14 2005-01-19 Deutsche Thomson-Brandt Gmbh Method and apparatus for decoding a data stream in audio video streaming systems
JP2005123789A (ja) * 2003-10-15 2005-05-12 Matsushita Electric Ind Co Ltd Ａｖ同期システム
JP4380598B2 (ja) * 2005-06-16 2009-12-09 株式会社日立製作所 受信装置及び受信方法
KR100656159B1 (ko) * 2005-10-17 2006-12-13 삼성전자주식회사 광디스크 재생방법
US8059538B1 (en) * 2007-02-16 2011-11-15 Sprint Communications Company L.P. CMON: an “always-on” monitoring platform for high-speed links
JP2008263404A (ja) * 2007-04-12 2008-10-30 Sony Corp 受信装置および受信方法
US20110090773A1 (en) * 2009-10-16 2011-04-21 Chih-Ching Yu Apparatus for generating viterbi-processed data using an input signal obtained from reading an optical disc
US20110090779A1 (en) * 2009-10-16 2011-04-21 Mediatek Inc. Apparatus for generating viterbi-processed data
US20110167323A1 (en) * 2010-01-07 2011-07-07 Mediatek Inc. Error-Correcting Apparatus and Method Thereof
US9167296B2 (en) * 2012-02-28 2015-10-20 Qualcomm Incorporated Customized playback at sink device in wireless display system
US8432780B1 (en) 2012-05-10 2013-04-30 Mediatek Inc. Viterbi decoding apparatus using level information generator supporting different hardware configurations to generate level information to Viterbi decoder and related method thereof
US11553211B2 (en) * 2013-01-03 2023-01-10 Disney Enterprises, Inc. Heuristic detection of potential digital media artifacts and defects in digital media assets
WO2018170852A1 (zh) 2017-03-23 2018-09-27 华为技术有限公司 多设备间唇音同步方法及设备

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5226850B2 (ja) * 1972-08-23 1977-07-16
JPS60107760A (ja) * 1983-11-16 1985-06-13 Nec Corp ビデオテ−プ駆動装置
NL8601182A (nl) * 1986-05-12 1987-12-01 Philips Nv Werkwijze en inrichting voor het opnemen en/of weergeven van een beeldsignaal en een bijbehorend audiosignaal in respektievelijk van een registratiedrager, en een registratiedrager verkregen volgens de werkwijze.
JP2845915B2 (ja) * 1989-01-06 1999-01-13 株式会社日立製作所 情報再生方法および情報再生装置
GB9012538D0 (en) * 1990-06-05 1990-07-25 Philips Nv Coding of video signals
US5218450A (en) * 1990-06-21 1993-06-08 Pioneer Electric Corporation Apparatus for reproducing information from a recording medium in accordance with a search command
JPH04134670A (ja) * 1990-09-25 1992-05-08 Olympus Optical Co Ltd データ記録再生装置
US5291486A (en) * 1991-08-19 1994-03-01 Sony Corporation Data multiplexing apparatus and multiplexed data demultiplexing apparatus

Also Published As

Publication number Publication date
US5502573A (en) 1996-03-26
CN1092197A (zh) 1994-09-14
EP0602943A2 (en) 1994-06-22
EP0602943B1 (en) 1998-11-11
KR100307118B1 (ko) 2002-07-27
JPH06237437A (ja) 1994-08-23
HK1013574A1 (en) 1999-08-27
DE69322060D1 (de) 1998-12-17
DE69322060T2 (de) 1999-05-06
AU671317B2 (en) 1996-08-22
EP0602943A3 (en) 1994-12-14
ES2123035T3 (es) 1999-01-01
CN1076928C (zh) 2001-12-26
ATE173370T1 (de) 1998-11-15
AU5238793A (en) 1994-06-30
KR940016019A (ko) 1994-07-22

Similar Documents

Publication Publication Date Title
JP3255308B2 (ja) データ再生装置
JP3509080B2 (ja) データ再生装置
JP3427416B2 (ja) 多重化データ分離装置および方法
JP5059301B2 (ja) 同期再生装置および同期再生方法
US5537148A (en) Video and audio data demultiplexer having controlled synchronizing signal
JP3666021B2 (ja) データ再生装置
JPH08214264A (ja) 符号化データ復号方法および復号装置
JP4439468B2 (ja) データ処理装置
JPH10262208A (ja) 同期ずれ制御装置及び方法
JP3592906B2 (ja) データ処理同期装置
JP4690965B2 (ja) データ記録再生装置
JP2003348543A (ja) データ復号器およびデータ復号化方法
JP3973568B2 (ja) データ処理装置、データ再生装置、データ処理方法及びデータ再生方法
JP3975503B2 (ja) 情報再生装置及び再生方法
JP2000236519A (ja) 映像／音声再生装置
JP2000217080A (ja) 圧縮情報再生装置
JP3849944B2 (ja) データ再生装置
JP2021034085A (ja) 映像再生装置
JP2000312344A (ja) 情報記録再生装置及び情報記録再生方法
JP2004362774A (ja) データ再生装置及びデータ記録媒体
JP2003264784A (ja) ストリームデータ記録装置、ストリームデータ再生装置、ストリームデータ記録制御装置、ストリームデータ再生制御装置、ストリームデータ記録方法、およびストリームデータ再生方法
JP2005210636A (ja) デジタルデータ再生方法および装置
JP2004362773A (ja) データ再生装置及びデータ記録媒体
JP2003087749A (ja) 画像データ再生装置および画像データ再生方法
JP2002112180A (ja) ディジタルデータ記録再生装置及びその方法

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20011102

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20071130

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081130

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091130

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091130

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101130

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111130

Year of fee payment: 10

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121130

Year of fee payment: 11

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131130

Year of fee payment: 12

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131130

Year of fee payment: 12