JP2001101838A - 編集方法およびディジタル記録再生装置 - Google Patents

編集方法およびディジタル記録再生装置

Info

Publication number
JP2001101838A
JP2001101838A JP27999499A JP27999499A JP2001101838A JP 2001101838 A JP2001101838 A JP 2001101838A JP 27999499 A JP27999499 A JP 27999499A JP 27999499 A JP27999499 A JP 27999499A JP 2001101838 A JP2001101838 A JP 2001101838A
Authority
JP
Japan
Prior art keywords
data
recorded
recording
reproduction
recording medium
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP27999499A
Other languages
English (en)
Other versions
JP2001101838A5 (ja
JP4154811B2 (ja
Inventor
Makoto Yamada
誠 山田
Satoshi Tsujii
訓 辻井
Toshiya Ishizaka
敏弥 石坂
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP27999499A priority Critical patent/JP4154811B2/ja
Priority to KR1020000056948A priority patent/KR100739357B1/ko
Priority to EP00308498A priority patent/EP1089572B1/en
Priority to US09/676,645 priority patent/US7668437B1/en
Priority to CNB00136958XA priority patent/CN1197073C/zh
Publication of JP2001101838A publication Critical patent/JP2001101838A/ja
Publication of JP2001101838A5 publication Critical patent/JP2001101838A5/ja
Application granted granted Critical
Publication of JP4154811B2 publication Critical patent/JP4154811B2/ja
Priority to US12/642,969 priority patent/US20100092158A1/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Management Or Editing Of Information On Record Carriers (AREA)

Abstract

(57)【要約】 【課題】 ノンリニア編集を容易に、また、的確に行な
う。 【解決手段】 ディスクドライブの不揮発メモリからR
a とTsを読み出し(ステップS1)、第1のデータフ
ァイルに記述されているRmとTmを読み取る(ステッ
プS2)。さらに、編集すべきデータが媒体上に存在す
るか否かを判定する(ステップS3)。存在する時に
は,第2のデータファイルに記述されているRaとTa
を読み取り(ステップS4)、さらに、Rm,Tm,R
a,Taに基づいて、連続再生が担保されるか否かの判
定を行う(ステップS5〜S8)一方、編集すべきデー
タが媒体上に存在しない時には、連続再生が担保される
ための条件を設定し(ステップS10〜S12),条件
に合致するような記録を行う(ステップS13)。これ
により、連続再生が担保された、或いは連続再生が担保
されるための条件の記録が記録された編集結果の管理フ
ァイルが作成される。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】この発明は、ビデオデータ、
オーディオデータ等に係る編集方法およびディジタル記
録再生装置に関する。
【0002】
【従来の技術】例えばカムコーダ等の、ビデオデータお
よび/またはオーディオデータを記録する記録装置によ
り、幾つかの場面を撮像および/または録音してなるデ
ータを記録媒体に記録することができる。また、このよ
うな記録装置に、例えば液晶表示パネル等の表示部やス
ピーカ等の音声発生部を付加することにより、記録した
データを再生・編集する機能をも有する記録再生装置が
知られている。このような記録再生装置において、特に
光磁気ディスク等のディスク状記録媒体を用いるものに
おいては、記録内容がランダムアクセスされることが可
能である。このため、ユーザ等がファイルを指定するこ
とにより、所望のデータを速やかに再生することが可能
である。
【0003】編集処理の1種として、ノンリニア編集す
なわち、別個に記録された例えばビデオデータとオーデ
ィオデータとを同期して再生出力させるための編集処理
に対する要求がある。このようなノンリニア編集処理に
より、例えば、以前に撮影したことによって記録媒体上
に記録されているビデオデータに、後からナレーション
を付加する等の編集処理が可能となる。特に、光ディス
ク等のランダムアクセス可能な記録媒体を使用する記録
再生装置では、記録媒体離散的に記録されているビデオ
データ、オーディオデータ等が互いに同期して再生され
るようにする編集処理を容易に行うことが可能な装置に
対する要望が高い。
【0004】
【発明が解決しようとする課題】従って、この発明の目
的は、ノンリニア編集を容易に、また的確に行なうこと
が可能な編集方法およびディジタル記録再生装置を提供
することにある。
【0005】
【課題を解決するための手段】請求項1の発明は、ディ
スク状記録媒体を用いるディジタル記録再生装置におけ
る編集方法において、記録媒体に間欠的に記録されてい
る第1のデータと、記録媒体上の第1のデータとは異な
る記録位置に間欠的に記録されている第2のデータとに
ついて、記録時の転送レートが再生時の転送レートより
大きい場合に、第2のデータを記録媒体上に記録する際
に連続して記録されるデータ部分のする時間長を、第1
のデータを記録媒体上に記録する際に連続して記録され
るデータ部分のする時間長より長くし、第1のデータと
第2のデータとが互いに同期して再生されるような、再
生時における第1のデータと第2のデータとの取り扱い
に係る情報を記録する管理ファイルを作成し、管理ファ
イルを記録媒体に記録するようにしたことを特徴とする
編集方法である。
【0006】請求項13の発明は、ディスク状記録媒体
を用いるディジタル記録再生装置において、記録媒体に
間欠的に記録されている第1のデータと、記録媒体上の
第1のデータとは異なる記録位置に間欠的に記録されて
いる第2のデータとについて、記録時の転送レートが再
生時の転送レートより大きい場合に、第2のデータを記
録媒体上に記録する際に連続して記録されるデータ部分
のする時間長を、第1のデータを記録媒体上に記録する
際に連続して記録されるデータ部分のする時間長より長
くし、第1のデータと第2のデータとが互いに同期して
再生されるような、再生時における第1のデータと第2
のデータとの取り扱いに係る情報を記録する管理ファイ
ルを作成し、管理ファイルを記録媒体に記録する機能を
有することを特徴とするディジタル記録再生装置であ
る。
【0007】以上のような発明によれば、間欠的な再生
のためのシークの回数を減少させることができ、また、
QuickTime ファイルフォーマット等の既存の記録形式を
前提としてノンリニア編集を容易に行うことができる。
【0008】
【発明の実施の形態】図1は、この発明の一実施形態に
おけるディジタル記録再生装置の構成の一例を示す。図
1において、1がビデオ符号器を示す。図示しない光学
系によって撮像光がCCD(Charge Coupled Device) 等
の撮像素子に供給されることによって生成されるビデオ
信号がビデオ符号器1に供給され、ビデオ符号器1にお
いて、ビデオ信号が圧縮符号化される。また、2がオー
ディオ符号器を示す。マイクロフォン等のオーディオ信
号生成部によって生成されるオーディオ信号がオーディ
オ符号器2に供給され、オーディオ符号器2においてオ
ーディオ信号が圧縮符号化される。ビデオ信号およびオ
ーディオ信号に対する圧縮符号化としては、例えばMP
EGが使用される。ビデオ符号器1およびオーディオ符
号器2のそれぞれの出力がエレメンタリストリームと称
される。
【0009】ビデオ符号器1は、MPEGの場合、動き
ベクトルを検出する動き予測部、ピクチャ順序並び替え
部、入力ビデオ信号とローカル復号ビデオ信号間の予測
誤差を形成する減算部、減算出力をDCT変換するDC
T部、DCT部の出力を量子化する量子化部、量子化出
力を可変長符号化する可変長符号化部、一定レートで符
号化データを出力するバッファメモリとから構成され
る。ピクチャ順序並び替え部は、ピクチャの順序を符号
化処理に適したものに並び替える。つまり、IおよびP
ピクチャを先に符号化し、その後、Bピクチャを符号化
するのに適した順序にピクチャを並び替える。ローカル
復号部は、逆量子化部、逆DCT部、加算部、フレーム
メモリおよび動き補償部で構成される。動き補償部で
は、順方向予測、逆方向予測、両方向予測が可能とされ
ている。イントラ符号化の場合では、減算部は、減算処
理を行わず、単にデータが通過する。また、オーディオ
符号器2は、サブバンド符号化部、適応量子化ビット割
り当て部等で構成される。
【0010】一例として、携帯形カメラ一体ディスク記
録再生装置の場合では、ビデオカメラで撮影された画像
がビデオ入力とされ、マイクロホンで集音された音声が
オーディオ入力とされる。ビデオ符号器1およびオーデ
ィオ符号器2では、アナログ信号がディジタル信号へ変
換されて処理される。また、この一実施形態では、書き
換え可能な光ディスクを記録媒体として使用する。この
種の光ディスクとしては、光磁気ディスク、相変化型デ
ィスク等を使用できる。一実施形態では、比較的小径の
光磁気ディスクを使用している。
【0011】ビデオ符号器1およびオーディオ符号器2
の出力がファイル生成器5に供給される。ファイル生成
器5は、特殊なハードウエアを用いずに動画等を同期し
て再生するためのコンピュータソフトウェアにより取り
扱うことができるファイル構造を持つように、ビデオエ
レメンタリストリームおよびオーディオエレメンタリス
トリームのデータ構造を変換する。この一実施形態で
は、ソフトウェアとして例えばQuickTime を使用する。
QuickTime は、動画をはじめとして、静止画、テキス
ト、オーディオ、MIDI(Musical Instrument Digita
l Interface)等の種々のデータを扱うことができ、それ
らのデータを時間軸に沿ってコントロールできるソフト
ウエアである。QuickTime を使用して、種々のデータを
格納してなるデータを、QuickTime ムービーファイルと
称する。
【0012】また、ファイル生成器5では、符号化ビデ
オデータおよび符号化オーディオデータが多重化され
る。QuickTime ムービーファイルの構造を作成するため
に、システム制御マイコン9によってファイル生成器5
が制御される。この発明に係るインデックスファイル
も、ファイル生成器5によって生成される。
【0013】ファイル生成器5からのQuickTime ムービ
ーファイルがメモリコントローラ8を介してメモリ7に
順次書き込まれる。メモリコントローラ8に対して、シ
ステム制御マイコン(マイクロコンピュータ)9からデ
ィスクへのデータ書き込み要求が入力されると、メモリ
コントローラ8によって、メモリ7からQuickTime ムー
ビーファイルが読み出される。ここで、QuickTime ムー
ビー符号化の転送レートは、ディスクへの書き込みデー
タの転送レートより低く、例えば約1/2とされてい
る。したがって、QuickTime ムービーファイルが連続的
にメモリ7に書き込まれるのに対して、メモリ7からの
読み出しは、メモリ7がオーバーフローまたはアンダー
フローしないことをシステム制御マイコン9が監視しな
がら間欠的に行われる。
【0014】メモリコントローラ8を介してメモリ7か
ら読み出されたQuickTime ムービーファイルがエラー訂
正符号/復号器11に供給される。エラー訂正符号/復
号器11は、QuickTime ムービーファイルを一旦メモリ
10に書き込み、インターリーブおよびエラー訂正符号
の冗長データの生成の処理を行い、冗長データが付加さ
れたデータをメモリ10から読み出す。
【0015】エラー訂正符号/復号器11の出力がデー
タ変復調器13に供給される。データ変復調器13は、
ディジタルデータをディスクに記録する時に、再生時の
クロック抽出を容易とし、符号間干渉のような問題が生
じないように、データを変調する。例えばRLL(1,
7)を使用できる。
【0016】データ変復調器13の出力が磁界変調ドラ
イバ14に供給されると共に、光ピックアップ23を駆
動するための信号を出力する。磁界変調ドライバ14
は、入力された信号に応じて磁界ヘッド22を駆動して
光ディスク20に磁界を印加する。光ピックアップ23
は、記録用のレーザビームを光ディスク20に照射す
る。このようにして光ディスク20に対してデータが記
録される。光ディスク20は、モータ21によって、C
LV(線速度一定),CAV(各速度一定),またはZ
CAV(ゾーンCLV)で回転される。
【0017】メモリコントローラ8から読み出される間
欠的なデータを光ディスク20へ記録するので、通常
は、連続的な記録動作がなされず、一定のデータ量を記
録したら記録動作を中断し、次の記録要求まで待機する
ように、記録動作が間欠的になされる。
【0018】また、システム制御マイコン9からの要求
に応じて、ドライブ制御マイコン12がサーボ回路15
に要求を出し、ディスクドライブ全体の制御がなされ
る。それによって記録動作がなされる。サーボ回路15
によって、光ピックアップ23のディスク径方向の移動
のサーボ、トラッキングサーボ、フォーカスサーボがな
され、また、モータ21のスピンドルサーボがなされ
る。図示しないが、システム制御マイコン9と関連して
ユーザの操作入力部が設けられている。
【0019】次に、再生のための構成および動作につい
て説明する。再生時には、再生用のレーザビームを光デ
ィスク20に照射し、光ディスク20からの反射光を光
ピックアップ23中のディテクタによって再生信号へ変
換する。この場合、光ピックアップ23のディテクタの
出力信号からトラッキングエラーおよびフォーカスエラ
ーが検出され、読み取りレーザビームがトラック上に位
置し、トラック上に合焦するように、サーボ回路15に
より制御される。また、光ディスク20上の所望の位置
のデータを再生するために、光ピックアップ23の径方
向の移動が制御される。
【0020】再生時においても、記録時と同様に、Quic
kTime ムービーファイルの転送レーザよりも高い、例え
ば2倍のレートで光ディスク20からデータを再生す
る。この場合では、通常、連続的な再生が行われず、一
定のデータ量を再生したら再生動作を中断し、次の再生
要求まで待機するような間欠的な再生動作がなされる。
再生時動作において、記録動作と同様に、システム制御
マイコン9からの要求に応じて、ドライブ制御マイコン
12がサーボ回路15に要求を出して、ディスクドライ
ブ全体の制御がなされる。
【0021】光ピックアップ23からの再生信号がデー
タ変復調器13に入力され、復調処理がなされる。復調
後のデータがエラー訂正符号/復号器11に供給され
る。エラー訂正符号/復号器11においては、再生デー
タを一旦メモリ10に書き込み、デインターリーブ処理
およびエラー訂正処理がなされる。エラー訂正後のQuic
kTime ムービーファイルがメモリコントローラ8を介し
てメモリ7に書き込まれる。
【0022】メモリ7に書き込まれたQuickTime ムービ
ーファイルは、システム制御マイコン9の要求に応じ
て、多重化を解く同期のタイミングに合わせてファイル
復号器6に出力される。システム制御マイコン9は、ビ
デオ信号およびオーディオ信号を連続再生するために、
光ディスク20から再生されてメモリ7に書き込まれる
データ量とメモリ7から読み出してファイル復号器6に
出力されるデータ量を監視し、メモリ7がオーバーフロ
ーまたはアンダーフローしないように、メモリコントロ
ーラ8およびドライブ制御マイコン12を制御し、光デ
ィスク20からのデータの読み出しを行う。
【0023】ファイル復号器6では、システム制御マイ
コン9の制御の下で、QuickTime ムービーファイルをビ
デオエレメンタリストリームおよびオーディオエレメン
タリストリームに分解する。ビデオエレメンタリストリ
ームがビデオ復号器3に供給され、オーディオエレメン
タリストリームがオーディオ復号器4に供給される。フ
ァイル復号器6からのビデオエレメンタリストリームお
よびオーディオエレメンタリストリームは、両者が同期
するように出力される。
【0024】ビデオ復号器3およびオーディオ復号器4
は、圧縮符号化の復号をそれぞれ行い、ビデオ出力およ
びオーディオ出力を発生する。例えばMPEGがビデオ
信号およびオーディオ信号の圧縮符号化として使用され
る。ビデオ復号器3は、バッファメモリ、可変長符号復
号部、逆DCT部、逆量子化部、逆量子化部の出力とロ
ーカル復号出力を加算する加算部、ピクチャ順序並び替
え部並びにフレームメモリおよび動き補償部からなるロ
ーカル復号部によって構成されている。
【0025】イントラ符号化の場合では、加算部での加
算処理がなされず、データが加算部を通過する。加算部
からの復号データがピクチャ順序並び替え部によって元
の画像の順序とされる。ビデオ復号器3の出力は、LC
D(Liquid Crystal Display) 等の表示部(図示せず)
に供給される。また、外部出力端子を介して外部の画像
表示装置に供給しても良い。オーディオ復号器4の出力
は、スピーカ等の音声発生部(図示せず)に供給され
る。また、外部出力端子を介して外部の音声発生装置に
供給しても良い。
【0026】なお、上述したようにデータが記録された
光ディスク20は、着脱自在のものであるので、他の機
器でも再生できる。例えばQuickTime のアプリケーショ
ンソフトウェアで動作するパーソナルコンピュータが光
ディスク20に記録されているデータを読み取り、パー
ソナルコンピュータによって記録されているビデオおよ
びオーディオデータを再生することができる。
【0027】次に、ノンリニア編集について説明する。
カムコーダ等では、ビデオデータとオーディオデータと
が同時に記録されることが一般的である。但し、既に記
録したビデオデータ#1と、後から記録したオーディオ
データ#2とが同期しながら再生されるようにしたい
と、ユーザが所望する場合がある。編集の結果として、
ナレーション、ビージーエム(背景音楽)の挿入等の効
果を得る、いわゆる「アフレコ編集」を実現したい場合
等である。このような要求に応じるためには、ビデオデ
ータ#1、オーディオデータ#2の各々を時分割で再生
し、それらの再生データに基づいて同期をとりながらビ
デオおよびオーディオを出力するように記録データを編
集するノンリニア編集が行われる必要がある。
【0028】以下、QuickTime ファイルフォーマットを
前提として、ノンリニア編集処理についての原理的な説
明を行う。図2に、ビデオデータとオーディオデータと
を扱うQuickTime ムービーファイルの一例を示す。Quic
kTime ムービーファイルの最も大きな構成部分は、ムー
ビーリソース部分とムービーデータ部分とである。ムー
ビーリソース部分には、そのファイルを再生するために
必要な時間や実データ参照のためのデータが格納され
る。また、ムービーデータ部分には、ビデオ、オーディ
オ等の実データが格納される。
【0029】ムービーリソース部分について詳細に説明
する。ムービーリソース部分には、ファイル全体に係る
情報を記述するムービーヘッダ41と、データの種類毎
のトラックとが含まれる。図2では、ビデオトラック5
0の内部的な構造の一例を詳細に示した。ビデオデータ
トラックにはビデオデータトラックにはトラック全体に
係る情報を記述するトラックヘッダ42とメディア部と
が含まれる。メディア部には、メディア全体に係る情報
を記述するメディアヘッダ43、メディアデータの取り
扱いに係る情報を記述するメディアハンドラ44と共
に、メディアインフォメーション部が含まれる。
【0030】メディアインフォメーション部には、映像
メディアに係る情報を記述するメディアハンドラ45、
ビデオデータの取り扱いに係る情報を記述するデータハ
ンドラ46、およびデータについての情報を記述するデ
ータインフォーメーション47と共に、サンプルテーブ
ルが記録されている。サンプルテーブル内には、各サン
プルについての記述を行うサンプルデスクリプション、
サンプルと時間軸の関係を記述するタイム−ツー−サン
プル、サンプルの大きさを記述するサンプルサイズ4
8、サンプルとチャンクの関係を記述するタイム−ツー
チャンクと、ムービーデータ内でのチャンクの開始ビッ
ト位置を記述するチャンクオフセット49、同期に係る
記述を行うシンクサンプル等が格納されている。ここ
で、Quick Timeにおいてはデータの最小単位(例えばM
PEG符号かデータにおけるピクチャ)がサンプルとし
て扱われ、サンプルの集合体としてチャンクが定義され
る。記録再生時のアクセス性を向上させるために、チャ
ンク内には、連続するサンプルが格納される。また、オ
ーディオトラック51にも、図示は省略するが、ビデオ
トラックの内部的な構造に類似する内部構造が設定され
る。
【0031】一方、ムービーデータ部分には、例えばM
PEG Audio Layer2に基づく圧縮符号化
方式によって符号化されたオーディオデータ611 ,6
2,‥‥および例えばMPEG(Moving Picture Expe
rt Group)規定に従う圧縮符号化方式によって符号化さ
れたビデオデータ601 ,602 ,‥‥がそれぞれ所定
数のサンプルからなるチャンクを単位として格納されて
いる。但し、符号化方式はこれらに限定されるものでは
なく、また、圧縮符号化が施されていないリニアデータ
を格納することも可能である。
【0032】ムービーリソース部分における各トラック
と、ムービーデータ部分に格納されているデータとは対
応付けられている。すなわち、図2に示した一例は、オ
ーディオデータとビデオデータとを扱うものなので、ム
ービーリソース部分にビデオトラックとオーディオトラ
ックとが含まれ、ムービーデータ部分に、オーディオデ
ータの実データとビデオデータの実データとが含まれて
いる。他の種類のデータを扱う場合には、ムービーリソ
ース部分におけるトラック、およびムービーデータ部分
における実データの内容を、扱うべきデータに合わせれ
ば良い。例えばテキスト、MIDI等を扱う場合には、
ムービーリソース部分にテキスト、MIDI等について
のトラックを含むようにし、ムービーデータ部分に、テ
キスト、MIDI等の実データを含むようにすれば良
い。
【0033】次に、ノンリニア編集の対象とされるデー
タの形態について説明する。ここでは、図3Aに示すム
ービーファイル#1が光ディスク20に以前から記録さ
れており、ムービーファイル#1内のビデオデータに対
するノンリンア編集を行うために用いられる例えばナレ
ーション等の内容のオーディオデータを含むオーディオ
ファイル#2が光ディスク20に新たに記録される場合
を例として説明を行う。ムービーファイル#1は、ムー
ビーリソース部分ムービーリソース#1と、オーディオ
データのチャンクであるオーディオデータ#1−、#
1−、#1−‥‥と、ビデオデータのチャンクであ
るビデオデータ#1−、#1−、#1−‥‥とが
交互に記録されてなるムービーデータ部分とを有する。
また、オーディオファイル#2は、ムービーリソース部
分ムービーリソース#2と、オーディオデータのチャン
クであるオーディオデータ#2−、#2−、#2−
、‥‥からなるムービーデータ部分とを有する。
【0034】ムービーファイル#1と、オーディオファ
イル#2との、光ディスク20における記録位置の一例
を図3Dに示す。ここで、101がムービーファイル#
1の記録箇所を示し、102がオーディオファイル#2
の記録箇所を示す。ムービーファイル#1におけるムー
ビーリソース#1と、オーディオデータ#1−とビデ
オデータ#1−との組、オーディオデータ#1−と
ビデオデータ#1−との組、オーディオデータ#1−
とビデオデータ#1−との組が間欠的に記録され
る。また、オーディオファイル#1におけるムービーリ
ソース#2と、オーディオデータ#2−と、オー
ディオデータ#2−と、オーディオデータ#2−
とが間欠的に記録される。
【0035】ここで、ノンリニア編集によれば、例え
ば、オーディオデータ#2−とビデオデータ#1−
との組、オーディオデータ#2−とビデオデータ#1
−との組、‥‥の各組がそれぞれ同期しながら再生出
力されるようになされる。このような再生出力の手続き
は、図3Cに示すような、編集結果の管理ファイルであ
るムービーリソース#3(以下、編集結果の管理ファイ
ル#3と表記する)によって記述される。図3Dでは、
103で示す箇所に編集結果の管理ファイル#3が記録
される。
【0036】編集結果の管理ファイル#3によって記述
された再生出力の手続きの実行について図4を参照して
説明する。光ディスク20から順次再生されるデータを
図4Aに示す。図3Dを参照して上述したような、光デ
ィスク20における間欠的な記録データに対して、トラ
ックジャンプを伴う間欠的な再生が行われる結果とし
て、時間方向に間欠的な一連の再生データが生成され、
エラー訂正および符号/復号器11によって復号等の処
理を施された後にメモリ7に記憶される。
【0037】メモリ7においては、供給されるデータが
ムービーファイル#1内のオーディオデータおよびビデ
オデータと、オーディオファイル#2内のオーディオデ
ータとの2系列として扱われる(図4B,図4C参
照)。さらに、オーディオ復号器4に対してオーディオ
データ#2−‥‥が供給され、ビデオ復号器4
に対してビデオデータ#1−‥‥が供給され
る。ここで、オーディオデータ#2−とビデオデータ
#1−の組、オーディオデータ#2−との組、‥
‥が互いに同期するようなタイミングで出力される(図
4D,図4E参照)。以上のような処理は、編集結果の
管理ファイル#3による記述に基づいて、メモリコント
ローラ8等によってメモリ7等が制御されることによっ
て実現される。
【0038】上述したような処理が可能となるために
は、光ディスク20上からの再生データの転送レート、
再生データのバッファリングに係るメモリ7の容量、再
生データから復号されるビデオ、オーディオ等の転送レ
ート等の諸パラメータと、光ディスク20上のビデオデ
ータ、オーディオデータの各々に対するアクセスに要す
る時間とが一定の関係を満たしている必要がある。
【0039】かかる一定の関係についてより詳細に説明
する。まず、再生データの転送レートが当該再生データ
から復号されるビデオ、オーディオ等の転送レートより
も大きくなければならない。このような条件の下では、
図4Aに示したような、トラックジャンプを伴う間欠的
な再生データの生成および転送処理が可能となる。すな
わち、例えばオーディオデータ#1−とビデオデータ
#1−との組に関して新たな再生データの転送が必要
とされない期間に、オーディオデータ#2が記録
されているトラックから再生データが生成され、転送さ
れる。一方、オーディオデータ#2に関して新た
な再生データの転送が必要とされない期間に、オーディ
オデータ#1−とビデオデータ#1−との組が記録
されているトラックから、再生データが生成され、転送
される。光ピックアップ23の位置が制御されてトラッ
クジャンプが行われることにより、これら2種類の動作
が交互に繰り返される。
【0040】ここで、ディスクからの読み出しレートを
Rd[bps] 、ビデオデータ#1を含むムービーデータ#
1の記録レートをRm[bps] 、ムービーデータ#1にお
いてディスク上で連続記録されている時間をTm[sec]
、オーディオデータ#2の記録レートをRa[bps] 、
オーディオデータ#2においてディスク上で連続記録さ
れている時間をTa[sec] 、ディスクのシークタイム
(すなわち、あるトラックから他のトラックにジャンプ
して再生するまでに要する時間)をTsとすると、以下
の式(1)が成り立つ場合に、ビデオデータ#1とオー
ディオデータ#2とを同期して再生させる処理、すなわ
ちムービーデータ#1内のデータについてオーディオデ
ータ#1をオーディオデータ#2に置き換える処理が可
能とされる。
【0041】
【数1】
【0042】第1の数値例として、Tm=3sec 、Ta
=3sec 、Rm=10Mbps、Ra=256Kbps、Rd=
20Mbpsである場合には、式(1)から、Tsは0.7
3sec 以下である。また、Ta=9sec で他のパラメー
タが上述の第1の数値例と同じ第2の数値例では、Ts
は0.69sec 以下である。
【0043】第2の数値例の場合、第1の数値例と比較
して、シークタイムTsに課される条件は多少厳しくな
るが、オーディオデータ#2が記録されているトラック
を読みに行く回数は減少する。すなわち、ムービーデー
タ#1が記録されているトラックの再生3回に対して、
オーディオデータ#2が記録されているトラックの再生
1回を行えば良いことになる。このような場合にはトラ
ックジャンプの回数が少なくて済むので、動作時の消費
電力を削減することができると共に、振動等に起因して
突発的に発生するトラックジャンプ等に対応するための
余裕を多くすることができる。
【0044】より一般的には、例えば新たに記録された
オーディオデータ等の、ノンリニア編集に係る一方のデ
ータを、以前から記録されていたビデオデータ等の、ノ
ンリニア編集に係る他方のデータよりも長い時間長で光
ディスク20上に記録するようにすれば、一方のデータ
を再生するためのシーク処理の回数を、他方のデータを
再生するためのシーク処理の回数よりも小さくすること
ができる。
【0045】次に、上述したようなノンリニア編集を行
い、その結果に対応する記述を光ディスク20上に記録
した場合に、再生時に所望のビデオ、オーディオの出力
が連続的になされることが担保される条件について説明
する。例えばQuickTime 等の汎用されているファイル形
式においては、Rm、Ra等が付加情報として記録され
ていることが多い。また、Rd,Tm、Ta等は、記録
フォーマットによって規定することが可能である。従っ
て、ディスクドライブの機種毎に固有の値をとるシーク
タイムTsの値を知ることにより、ノンリニア編集処理
の結果において所望のビデオ、オーディオの出力の連続
性が担保されるか否かを判断することができる。
【0046】特に、ノンリニア編集完了後に、ノンリニ
ア編集を行う際に使用したディスクドライブと異なる機
種によって光ディスク20を再生する場合には、ノンリ
ニア編集を行う際に使用したディスクドライブの再生時
の転送レートとシークタイムとが付加情報として記録さ
れていれば、ノンリニア編集処理の結果において所望の
ビデオ、オーディオの出力の連続性が担保されるか否か
を判断することができる。
【0047】そこで、この発明の一実施形態では、Quic
kTime ファイルフォーマットを前提として、再生時の転
送レートとその際のシークタイムを編集ファイルに記録
するようにしている。
【0048】上述したようなQuickTime ファイルフォー
マットにより、ビデオデータ601,602 ,‥‥とオ
ーディオデータ611 ,612 ,‥‥とが光ディスク2
0に記録されているとする(図5参照)。図5におい
て、図2と同様な記述部分については、同一の符号を付
し、重複する説明を省略する。
【0049】また、光ディスク20上でムービーファイ
ル#1とは離れた位置に、QuickTime ファイルフォーマ
ットにより、オーディオデータ621 ,622 ,‥‥が
記録されているとする(図6参照)。図6において、図
2と同様な記述部分については、同一の符号を付し、重
複する説明を省略する。
【0050】この場合に、ビデオデータ601 ,6
2 ,‥‥と、オーディオデータ621,622 ,‥‥
とが互いに同期して再生されるような処理の手続きを記
述する編集結果の管理ファイル#3(図7参照)が生成
される。これにより、ノンリニア編集がなされる。図4
において、図2と同様なファイルについては、同一の符
号を付し、重複する説明を省略する。この発明の一実施
形態では、編集結果の管理ファイル#3において、ノン
リニア編集を行う際に使用したディスクドライブの再生
時の転送レートとシークタイムとを記述することによ
り、他の種類のディスクドライブを用いて再生する場合
等においても、ノンリニア編集処理の結果において所望
のビデオ、オーディオの出力の連続性が担保されるか否
かを判断することができる。
【0051】編集結果の管理ファイル#3における記述
の具体的な一例を図8に示す。ここで、200の部分が
ムービーリソース部分における記述の全体を示す。20
1の部分はムービーリソース部分における一般的な記述
内容である。これに対して、201の部分は、QuickTim
e の規格ではオプションとされている、ユーザ定義の部
分である。この発明の一実施形態では、この202の部
分に、ノンリニア編集を行う際に使用したディスクドラ
イブの再生時の転送レートPlayback speed、およびシー
クタイムSeek Time が記述される。
【0052】この発明の一実施形態におけるノンリニア
編集処理の手順の一例を図9に示す。図9は、図3を参
照して上述したノンリニア編集処理の一例を実行する際
の手順を示すフローチャートである。ステップS1とし
て、ディスクドライブの不揮発メモリからRa とTsを
読み出す。なお、この発明の一実施形態におけるディス
クドライブは、Ra 、Ts等の動作パラメータ等を記憶
した不揮発メモリを備えるものとされている。そして、
ステップS2に移行して、ムービーファイル#1の管理
ファイル(すなわちムービーリソース#1)に記述され
ているRmとTmを読み取る。
【0053】さらに、ステップS3に移行して、編集す
べきデータが光ディスク20に存在するか否かを判定す
る。ここでは、図3等を参照して上述したようなノンリ
ニア編集を例として説明する。この場合、ムービーファ
イル#1内のビデオデータであるビデオデータ#1と同
期して再生出力されるようなされるオーディオデータ#
2を含む、オーディオファイル#2がステップS3にお
ける「編集すべきデータ」とされる。
【0054】編集すべきデータが光ディスク20に存在
する(既に記録されている)と判定される場合にはステ
ップS4に移行し、それ以外の場合にはステップS10
に移行する。ステップS4では、オーディオファイル#
2の管理ファイル(すなわちムービーリソース#2)に
記述されているRaとTaを読み取る。そして、ステッ
プS5に移行し、上述の式(1)が成立するか否かを判
定する。式(1)が成立すると判定される場合にはステ
ップS6に移行し、それ以外の場合にはステップS7に
移行する。ステップS6では、編集結果の管理ファイル
#3を作成して処理を終了する。この際には、編集結果
の連続再生出力が担保される。
【0055】また、ステップS7では、編集結果の管理
ファイル#3を作成して処理を終了する。この際には、
編集結果の連続再生出力が担保されない。そして、ステ
ップS8に移行し、編集結果の連続再生出力が可能とな
る時のRdの値を編集結果の管理ファイル#3に記録す
る。
【0056】一方、ステップS10以降の処理では、編
集すべきデータであるオーディオファイルを新たに記録
する。ステップS10では、新たに記録されるオーディ
オファイル#2におけるRaが確定しているか否かが判
定される。当該Raの値が確定していると判定される場
合にはステップS11に移行し、それ以外の場合にはス
テップS12に移行する。ステップS11では、上述の
式(1)を満たすTaの値が求まるか否かが判断され
る。そのようなTaの値が求まると判定される場合には
ステップS13に移行し、それ以外の場合にはステップ
S7に移行する。また、ステップS12では、上述の式
(1)を満たすRaおよびTaの値を求める。そして、
ステップS13に移行し、オーディオファイル#2の新
たな記録を実行する。ステップS13の完了後、ステッ
プS6に移行する。
【0057】次に、図3および図9を参照して上述した
ようなノンリニア編集処理の結果が連続再生出力される
ことが担保されるか否かを確認するための処理手順につ
いて、図10を参照して説明する。ステップS21とし
て、再生処理に供するディスクドライブの不揮発メモリ
から当該ディスクドライブのRa,Tsの値(それぞ
れ、Ra(1),Ts(1)と表記する)を読み出す。
そして、ステップS22に移行し、編集結果の管理ファ
イル#3に記述されているRa,Tsの値(それぞれ、
Ra(2),Ts(2)と表記する)を読み取る。
【0058】さらに、ステップS23に移行し、「Rd
(1)がRd(2)以上であり、且つ、Ts(1)がT
s(2)以下である」との条件が成立するか否か判定さ
れる。上述の条件が成立すると判定される場合にはステ
ップS24に移行し、それ以外の場合にはステップS2
5に移行する。ステップS24では、編集結果の連続再
生出力が担保されるとの判断を行う。また、ステップS
25では、編集結果の連続再生出力が担保されないとの
判断を行う。
【0059】上述したこの発明の一実施形態は、記録媒
体に記録されているビデオデータと、当該記録媒体上
で、当該ビデオデータとは離れた位置に記録されている
オーディオデータとが互いに同期しながら再生されるよ
うにするものである。これに対して、互いに同期しなが
ら再生されるようになされるデータがビデオデータとオ
ーディオデータ以外であるような場合にも、この発明を
適用することができる。すなわち、記録媒体に記録され
ている、ビデオデータ、オーディオデータ、静止画のデ
ータ、テキストデータ等の種々の形態のデータの内の2
個以上のデータを互いに同期しながら再生されるように
する場合に、この発明を適用することができる。
【0060】この発明は、ビデオデータ、オーディオデ
ータ等を記録する際の圧縮符号化方式等には依存せず、
例えばQuickTime ムービーファイルの形式の下で扱うこ
とができるデータに対して一般的に適用することができ
る。
【0061】また、一般にノンリニア編集に対応する処
理手続きを記述する機能を有する、ビデオデータ、オー
ディオデータ等に係るものであれば、QuickTime ムービ
ーファイルの形式以外の記録フォーマットを前提とする
場合にも、この発明を適用することができる。
【0062】この発明は、上述したこの発明の一実施形
態等に限定されるものでは無く、この発明の主旨を逸脱
しない範囲内で様々な変形や応用が可能である。
【0063】
【発明の効果】この発明では、例えば以前から記録され
ているビデオデータ等の第1のデータをディスク状記録
媒体に記録する際の連続記録部分の時間長よりも、例え
ば新たに記録されたオーディオデータ等の第2のデータ
をディスク状記録媒体に記録する際の連続記録部分の時
間長を長くなされる。このため、ノンリニア編集結果に
従う、第1のデータと第2のデータとを同期して再生す
る処理(処理)において、第1のデータと第2のデータ
とに間欠的にアクセスするためのシークの回数を減少さ
せることができる。
【0064】このため、トラックジャンプの回数を少な
くすることができる。従って、動作時の消費電力を削減
することができ、省電力化に寄与することができる。ま
た、振動等に起因して突発的に発生するトラックジャン
プ等に対応するための余裕を多くすることができ、特に
装置動作の安定化に寄与することができる。
【0065】また、ノンリニア編集結果に従う再生処理
を行うに際して、再生出力の連続性を担保できるか否か
を、記録媒体および/または装置に記録された動作パラ
メータ等の情報に基づいて判定することができる。これ
により、編集処理の利便性を向上させることができる。
【図面の簡単な説明】
【図1】この発明の一実施形態におけるディジタル記録
再生装置の構成の一例を示すブロック図である。
【図2】QuickTime ムービーファイルについて説明する
ための略線図である。
【図3】ノンリニア編集の対象とされるデータの形態に
ついて説明するための略線図である。
【図4】ノンリニア編集結果の再生出力について説明す
るための略線図である。
【図5】ノンリニア編集の対象とされるデータの一例を
示す略線図である。
【図6】ノンリニア編集の対象とされるデータの他の例
を示す略線図である。
【図7】ノンリニア編集結果の管理ファイルの一例を示
す略線図である。
【図8】この発明の一実施形態におけるドライブの動作
パラメータの記述について説明するための略線図であ
る。
【図9】ノンリニア編集処理の手順の一例を示すフロー
チャートである。
【図10】ノンリニア編集処理の結果に関する確認処理
について説明するための略線図である。
【符号の説明】
20・・・光ディスク、7・・・メモリ、8・・・メモ
リコントローラ、9・・・システム制御マイコン
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 5/781 G11B 27/02 B 5/85 K 5/92 H04N 5/781 510F 5/92 H (72)発明者 石坂 敏弥 東京都品川区北品川6丁目7番35号 ソニ ー株式会社内 Fターム(参考) 5C052 AA03 AA17 AB03 AB04 AB05 AB09 AC08 CC03 DD04 5C053 FA23 GB05 GB17 GB37 GB38 HA27 HA33 5D044 AB05 AB07 BC01 CC04 DE49 DE52 EF03 FG10 FG21 GK11 HL16 5D110 AA13 AA14 AA27 AA29 BB20 CA05 CA06 CA16 CA18 CB04 CD15 CD26 CF11 CF13 CJ14 CK02 CK18 CK26 CM06 CM12 DA09 DA12 DA14 DA15 DB05 DB09 DC05 DC07 DC15 DE04 DE06 EB04

Claims (13)

    【特許請求の範囲】
  1. 【請求項1】 ディスク状記録媒体を用いるディジタル
    記録再生装置における編集方法において、 記録媒体に間欠的に記録されている第1のデータと、上
    記記録媒体上の上記第1のデータとは異なる記録位置に
    間欠的に記録されている第2のデータとについて、記録
    時の転送レートが再生時の転送レートより大きい場合
    に、上記第2のデータを上記記録媒体上に記録する際に
    連続して記録されるデータ部分のする時間長を、上記第
    1のデータを上記記録媒体上に記録する際に連続して記
    録されるデータ部分のする時間長より長くし、 上記第1のデータと上記第2のデータとが互いに同期し
    て再生されるような、再生時における上記第1のデータ
    と上記第2のデータとの取り扱いに係る情報を記録する
    管理ファイルを作成し、 上記管理ファイルを上記記録媒体に記録するようにした
    ことを特徴とする編集方法。
  2. 【請求項2】 請求項1において、 上記第1のデータはビデオデータであり、 上記第2のデータはオーディオデータであることを特徴
    とする編集方法。
  3. 【請求項3】 請求項1において、 上記第1のデータは既に記録されているデータであり、 上記第2のデータは新たに記録されるデータであること
    を特徴とする編集方法。
  4. 【請求項4】 請求項1において、 上記第1のデータ、第2のデータ、および上記管理ファ
    イルは、 QuickTime (登録商標)ファイルフォーマッ
    ト形式で記録されることを特徴とする編集方法。
  5. 【請求項5】 請求項1において、 上記管理ファイルに記録された情報に基づく再生時の処
    理によって、再生出力が連続したものとなるか否かを判
    断するための情報を上記記録媒体に記録するようにした
    ことを特徴とする編集方法。
  6. 【請求項6】 請求項5において、 上記情報は、 上記管理ファイルに記録されることを特徴とする編集方
    法。
  7. 【請求項7】 請求項5において、 上記情報は、 上記管理ファイルを作成する処理を行うために使用され
    た装置における再生時の転送レートであることを特徴と
    する編集方法。
  8. 【請求項8】 請求項5において、 上記情報は、 上記管理ファイルを作成する処理を行うために使用され
    た装置における再生時のシークタイムであることを特徴
    とする編集方法。
  9. 【請求項9】 請求項1において、 上記管理ファイルに記録された情報に基づく再生時の処
    理によって、再生出力が連続したものとなるか否かを判
    断するための情報を上記記録媒体を再生する再生装置内
    のメモリに記録するようにしたことを特徴とする編集方
    法。
  10. 【請求項10】 請求項9において、 上記再生装置内のメモリは、 不揮発メモリであることを特徴とする編集方法。
  11. 【請求項11】 請求項9において、 上記情報は、 上記再生装置における再生時の転送レートであることを
    特徴とする編集方法。
  12. 【請求項12】 請求項9において、 上記情報は、 上記再生装置における再生時のシークタイムであること
    を特徴とする編集方法。
  13. 【請求項13】 ディスク状記録媒体を用いるディジタ
    ル記録再生装置において、 記録媒体に間欠的に記録されている第1のデータと、上
    記記録媒体上の上記第1のデータとは異なる記録位置に
    間欠的に記録されている第2のデータとについて、記録
    時の転送レートが再生時の転送レートより大きい場合
    に、上記第2のデータを上記記録媒体上に記録する際に
    連続して記録されるデータ部分のする時間長を、上記第
    1のデータを上記記録媒体上に記録する際に連続して記
    録されるデータ部分のする時間長より長くし、 上記第1のデータと上記第2のデータとが互いに同期し
    て再生されるような、再生時における上記第1のデータ
    と上記第2のデータとの取り扱いに係る情報を記録する
    管理ファイルを作成し、 上記管理ファイルを上記記録媒体に記録する機能を有す
    ることを特徴とするディジタル記録再生装置。
JP27999499A 1999-09-30 1999-09-30 編集方法およびディジタル記録又は再生装置 Expired - Fee Related JP4154811B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP27999499A JP4154811B2 (ja) 1999-09-30 1999-09-30 編集方法およびディジタル記録又は再生装置
KR1020000056948A KR100739357B1 (ko) 1999-09-30 2000-09-28 기록 장치, 기록 방법 및 기록 매체
EP00308498A EP1089572B1 (en) 1999-09-30 2000-09-28 Recording apparatus, recording method, and record medium
US09/676,645 US7668437B1 (en) 1999-09-30 2000-09-29 Recording apparatus, recording method, and record medium
CNB00136958XA CN1197073C (zh) 1999-09-30 2000-09-30 记录装置和记录方法
US12/642,969 US20100092158A1 (en) 1999-09-30 2009-12-21 Recording apparatus, recording method, and record medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP27999499A JP4154811B2 (ja) 1999-09-30 1999-09-30 編集方法およびディジタル記録又は再生装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007280188A Division JP4379513B2 (ja) 2007-10-29 2007-10-29 編集方法およびディジタル記録又は再生装置

Publications (3)

Publication Number Publication Date
JP2001101838A true JP2001101838A (ja) 2001-04-13
JP2001101838A5 JP2001101838A5 (ja) 2006-04-27
JP4154811B2 JP4154811B2 (ja) 2008-09-24

Family

ID=17618838

Family Applications (1)

Application Number Title Priority Date Filing Date
JP27999499A Expired - Fee Related JP4154811B2 (ja) 1999-09-30 1999-09-30 編集方法およびディジタル記録又は再生装置

Country Status (1)

Country Link
JP (1) JP4154811B2 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004049329A1 (ja) * 2002-11-28 2004-06-10 Matsushita Electric Industrial Co., Ltd. データ処理装置
CN116634233A (zh) * 2023-04-12 2023-08-22 北京优贝卡科技有限公司 一种媒体编辑方法、装置、设备和存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004049329A1 (ja) * 2002-11-28 2004-06-10 Matsushita Electric Industrial Co., Ltd. データ処理装置
US7929825B2 (en) 2002-11-28 2011-04-19 Panasonic Corporation Data processing device
CN116634233A (zh) * 2023-04-12 2023-08-22 北京优贝卡科技有限公司 一种媒体编辑方法、装置、设备和存储介质
CN116634233B (zh) * 2023-04-12 2024-02-09 北京七彩行云数字技术有限公司 一种媒体编辑方法、装置、设备和存储介质

Also Published As

Publication number Publication date
JP4154811B2 (ja) 2008-09-24

Similar Documents

Publication Publication Date Title
JP4629173B2 (ja) 記録装置および記録方法、並びに記録媒体
EP1089572B1 (en) Recording apparatus, recording method, and record medium
US7313320B2 (en) Recording apparatus, recording method, reproducing apparatus, reproducing method, and record medium
JP4062230B2 (ja) ファイル記録再生装置、ファイル記録再生方法、ファイル記録再生方法のプログラム及びファイル記録再生方法のプログラムを記録した記録媒体
US20080159723A1 (en) Recording apparatus, recording method and record medium
JP2002197839A (ja) データ記録方法、データ記録装置及び記録媒体
JP3858883B2 (ja) 記録装置及びその制御方法
JP4203812B2 (ja) ファイル記録装置、ファイル記録方法、ファイル記録方法のプログラム、ファイル記録方法のプログラムを記録した記録媒体、ファイル再生装置、ファイル再生方法、ファイル再生方法のプログラム及びファイル再生方法のプログラムを記録した記録媒体
JP3835554B2 (ja) ファイル記録装置、ファイル再生装置、ファイル記録方法、ファイル記録方法のプログラム、ファイル記録方法のプログラムを記録した記録媒体、ファイル再生方法、ファイル再生方法のプログラム及びファイル再生方法のプログラムを記録した記録媒体
JP4154811B2 (ja) 編集方法およびディジタル記録又は再生装置
JP4292465B2 (ja) ファイル記録装置及びファイル記録方法
JP4379513B2 (ja) 編集方法およびディジタル記録又は再生装置
JP3991540B2 (ja) 記録装置および方法、並びに記録媒体
JP2003264773A (ja) データ処理装置および方法、プログラム格納媒体、並びにプログラム
JP4662547B2 (ja) ディジタル記録装置、ディジタル記録方法および記録媒体
JP3476146B2 (ja) 再生方法

Legal Events

Date Code Title Description
A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060314

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060314

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20071029

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20071225

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080221

A911 Transfer of reconsideration by examiner before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20080321

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080408

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080528

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080617

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080630

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110718

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110718

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees