JP3933103B2 - Image data recording apparatus and image data recording method - Google Patents

Image data recording apparatus and image data recording method Download PDF

Info

Publication number
JP3933103B2
JP3933103B2 JP2003199578A JP2003199578A JP3933103B2 JP 3933103 B2 JP3933103 B2 JP 3933103B2 JP 2003199578 A JP2003199578 A JP 2003199578A JP 2003199578 A JP2003199578 A JP 2003199578A JP 3933103 B2 JP3933103 B2 JP 3933103B2
Authority
JP
Japan
Prior art keywords
image data
recording
image
recording medium
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP2003199578A
Other languages
Japanese (ja)
Other versions
JP2005006270A (en
Inventor
創 阿久津
洋介 道端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2003199578A priority Critical patent/JP3933103B2/en
Publication of JP2005006270A publication Critical patent/JP2005006270A/en
Application granted granted Critical
Publication of JP3933103B2 publication Critical patent/JP3933103B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は画像データ記録技術に関し、特に画像データを同時に複数の記録方式に圧縮することができ、また、画像データを外部に送信することで記録可能時間が増大できる画像データ記録技術に関する。
【0002】
【従来の技術】
近年、カメラを内蔵し、動画記録が可能な小型機器が次々と開発されている。デジタルビデオカメラのような従来からある動画撮影の為のカメラだけでなく、動画記録が可能なデジタルスチルカメラや、動画記録が可能なカメラ付き携帯電話など、その開発は広範囲に渡っている。
【0003】
このような画像データ記録装置は、いずれも記録媒体を備えており、画像データを記録媒体に記録するものであるが、機器の小型化や製品コストなどの制限から、記録媒体の記憶容量は限られたものになっており、ユーザーの要求に対して十分な記録時間を提供できない場合も多い。
【0004】
このような背景から、ユーザーは長時間の画像信号を記録するために、画像データの符号レートを低くして記録する方法や、取り外し可能な記録媒体を交換して記録する方法が一般的である。
【0005】
また、カメラに備えられた記憶装置に依存することなく事実上無限に撮影ができるようにするために、生成された画像データをリアルタイムに遠隔のサーバに送信することで、サーバに送信済みの画像データを新たな画像データに書き換える技術がある(例えば、特許文献1参照。)。
【0006】
さらに、撮影した画像データを通信により外部の画像データベースに送信して保存させるとともに、画像データベースに保存された膨大な画像データの中から所望の画像データを効率よく確実に抽出し、迅速に表示できる電子カメラがある(例えば、特許文献2参照。)。
【0007】
さらに、パーソナルコンピュータ(PC)等の外部機器に接続する前に画像データを一時記録手段に保持し、その後に画像データを記録媒体への記録用と外部機器への送信用とでそれぞれ異なる圧縮率で圧縮し、その圧縮した画像データをそれぞれ記録媒体へ記録し、外部機器へ送信する技術もある(例えば、特許文献3参照。)。
【0008】
【特許文献1】
特開2002−101369号公報
【特許文献2】
特開2002−209131号公報
【特許文献3】
特開2003−116041号公報
【0009】
【発明が解決しようとする課題】
しかしながら、画像データの符号レートを低くして記録する方法では、記録可能時間は増やせても、画像品質が劣化するという問題があった。
【0010】
また、取り外し可能な記録媒体を用いて画像データを記録する方法では、記録可能時間は増やせても、記録媒体を取外した場合には画像の再生が不可能になってしまうという問題があった。
【0011】
また、特許文献1に開示されている手法では、生成された画像データを遠隔サーバにリアルタイムに送信した後に、カメラ本体より画像データを消去してしまうことにより、記録可能時間は増やせる。しかし、ユーザーが画像データの再生を要求した場合には、再度遠隔サーバに接続して画像データの受信を行う必要があるので、素早く画像の再生・表示を行うことができない。そのため、画像データを送信し本体から消去した後にユーザーが移動するなどして外部機器に接続不可能な状況になった場合には、画像データの受信が不可能になる。従って、記録した画像の再生が不可能になってしまい、使い勝手の点で好ましくない。
【0012】
また、特許文献2に開示されている手法では、画像データを送信する際に、電子カメラ本体に縮小画であるサムネイルを記録しておき、再生時にはユーザーが再生する画像データを選択してから画像データの受信を開始する。よって、記録可能時間を増やせると共に、電子カメラ本体で簡易的に画像データを確認できる。しかし、サムネイルは、画像データのうち一部の画像データを縮小した画像データであるため、サムネイルのみの表示では、動画像データを全て表示することはできず、動画像データの再生・表示には不十分である。結局、動画像を再生・表示するためには、再度遠隔サーバに接続して動画像データの受信を行う必要があるので、素早く動画像の再生・表示を行うことができないばかりか、ユーザーが移動するなどして外部機器に接続不可能な状況になった場合には、動画像データの再生が不可能になる。
【0013】
また、特許文献3に開示されている手法では、外部機器に接続する前に画像データを一時記録手段に保持するため、せいぜい数MBの記録容量しか持たない一時記録手段に、必ず画像データを保持できるわけではない。従って、画像データを記録媒体への記録用と外部機器への送信用とでそれぞれ異なる圧縮率で圧縮することができない可能性がある。
【0014】
本発明の目的は、画像データ、特に動画像データの記録可能時間を増大させると共に、素早く画像データの再生・表示が可能な画像データ記録技術を提供することにある。
【0015】
【課題を解決するための手段】
上記目的を達成するため、本発明では、画像信号をデジタル画像信号に変換し、デジタル画像信号を第一の記録方式により圧縮して第一の画像データにし、かつ、第一の記録方式よりも符号レートの低い第二の記録方式により圧縮して第二の画像データにし、第二の画像データを記録媒体に記録し、第一の画像データを外部機器に送信することとする。画像信号の第一の画像データへの圧縮及び外部機器への送信は外部機器との接続を確立した後にすることが望ましい。
【0016】
また、本発明では、画像信号をデジタル画像信号に変換し、デジタル画像信号を第一の記録方式により圧縮して第一の画像データにし、かつ、第一の記録方式よりも符号レートの小さい第二の記録方式により圧縮して第二の画像データにする。そして、第一の画像データを交換可能な第一の記録媒体に記録し、第二の画像データを装置内に設けられている第二の記録媒体に記録する。画像を再生する際には、第二の記録媒体に記録されている第二の画像データを伸長し、表示手段に第二の画像データに基づく画像を表示させることとする。
【0017】
【発明の実施の形態】
以下、図面を参照して本発明を適用した実施例について説明する。
図1は、本発明を適用した実施例である画像データ記録装置としてのビデオカメラ100のブロック図である。レンズ101を通して撮影された画像は、撮像手段であるCCD(Charge Coupled Device)102にて画像信号に変換され、D/A変換器やデジタル信号処理回路を内蔵した画像信号処理回路104にてデジタル画像信号が生成される。または、ビデオ機器などから出力された画像信号を外部入力端子103に入力することで、同様に画像信号処理回路104を経由してデジタル画像信号が生成される。
【0018】
前記デジタル画像信号は、第一の記録方式に圧縮する第一画像エンコーダ105aと、第一の記録方式よりも符号レートの小さい第二の記録方式に圧縮する第二画像エンコーダ105bにより、それぞれ画像データに圧縮される。なお本実施例では、第一の記録方式をMPEG(Moving Picture Experts Group)2方式、第二の記録方式をMPEG4方式として説明する。
【0019】
所定の操作により記録が開始されると、第一の記録方式により圧縮されたMPEG2画像データ109は、半導体メモリ等のバッファ115に一時的に蓄積され、第二の記録方式によるMEPG4画像データ108は、ドライブ107により、記録媒体であるハードディスク等の記録媒体に記録される。なお、ビデオカメラ各部の制御、記録時間や記録媒体の空き容量などを示す画像データの管理情報の管理は、CPU(Central Processing Unit)106が行う。
【0020】
ビデオカメラ100は、通信インターフェース112を備えることで、インターネットなどのネットワーク、もしくはパソコンなどの外部機器と接続が可能である。図1に示す無線アンテナ113や有線通信端子であるUSB(Universal Serial Bus)端子114などを用いて画像データの送受信を行うことができる。無線アンテナ113やUSB端子114により、ビデオカメラ100がネットワークや外部機器に接続可能な場合には、CPU106は、接続手段の確立、機器の認証等を経て、バッファ115に蓄積されているMPEG2画像データ109の送受信を開始する。
【0021】
ビデオカメラ100がインターネットなどのネットワークに接続している場合、もしくはパソコンなどの外部機器と接続している場合には、CPU106はバッファ115にあるMPEG2画像データ109を読み出し、通信インターフェース112を用いて、外部機器に画像データを送信する。MPEG2画像データ109をネットワークや外部機器に転送した後には、CPU106は、バッファ115からMPEG2画像データ109を消去して空き容量を確保する。
【0022】
このような構成にすることで、ビデオカメラ100は、バッファ115に一時的に蓄えた画像データをネットワークや外部機器に送信しながら新しい画像データをバッファ115に蓄積することができるので、画像データの記録可能時間を増やすことができる。
【0023】
ここでビデオカメラ100は、MPEG2画像データ109を送信する際に、一時的にバッファ115に記録するが、バッファ115の代わりに記録装置107内の記録媒体に記録するようにしてもかまわない。このように構成することにより、ビデオカメラ100がネットワークや外部機器に接続できないような場合にも、ユーザーが撮影を継続できるよう、一時的な記録手段であるバッファ115よりも記憶容量の大きい記録媒体を持つドライブ107に記録し、記録終了後にネットワークや外部機器に送信することが可能になる。もちろん、ネットワークや外部機器に接続できる場合であってもバッファ115の代わりにドライブ107内の記録媒体に画像データを記録する構成としてもよい。
【0024】
尚、MPEG2画像データ109の記録用にドライブ107、バッファ115とは別の記録手段を設けてもよい。
【0025】
ビデオカメラ100は、撮影時の画角などの被写体確認のためにディスプレイ110を備えており、画像データの記録時には、画像信号処理回路104の画像信号に基づく画像がディスプレイ110に表示されるが、ユーザーが撮影済みの任意の画像データの再生を要求したときには、CPU106は、ドライブ107内の記録媒体に記録されているMPEG4画像データ108を読出し、画像デコーダ111を用いて画像信号に伸張し、この画像信号に基づく画像をディスプレイ110に表示させる。ディスプレイ110は、画像データ記録装置に備えた小型の表示デバイスであり、具体的には、液晶や有機EL(Electro Luminescence)などを用いた表示デバイスである。
【0026】
ここで、ディスプレイ110は、ビデオカメラ100の大きさに対応しており、最大でも3.5インチ程度であるため、表示面積は小さく、解像度が低いことが多い。このため、画像データ記録装置100にて撮影した画像を再生しようとした場合には、MPEG2画像データ109のようなデータ量の多い画像データは必要なく、符号レートの低い記録方式を用いても十分内容を確認できる。そこで、符号レートの低いMPEG4画像データ108を用いることで、ドライブ107内の記録媒体に長時間の画像データを記録することが可能になる。
【0027】
なお、画像信号処理回路104、第一画像エンコーダ105a、第二画像エンコーダ105b、画像デコーダ111は、回路としてハードウエア的に構成しても良いし、CPU106内のプログラムとしてソフトウエア的に構成しても良い。つまり、上述した機能さえ果たせば、その具体的構成が特に限定されることはない。
【0028】
次に、本実施形態に関係するビデオカメラ100の動作手順について説明する。図2は、ビデオカメラ100の動作手順を説明するフローチャートである。以下説明する各動作手順は、CPU106の制御のもとで行われる。
【0029】
まず、ビデオカメラ100の電源スイッチ(図示せず)をオンすると(S200)、ビデオカメラ100は、初期設定(S201)を行う。その際、ドライブ107内の記録媒体にMPEG4画像データ108を記録できる空き容量があるかどうかチェックを行う(S202)。空き容量が不足して記録不可能な場合は、ディスプレイ110上に、記録してあるMPEG4画像データの消去をユーザーに促す画面表示を行う(S203)。なお、空き容量が不足かどうかの判断は、CPU106が予め記憶している所定値との比較により行うようにすればよい。この所定値は、1分、5分といった分数や1MB、5MBといったデータ量であり、ユーザーがこの所定値を任意に変えられるようにしても良い。
ユーザーがMPEG4画像データ108を消去することにより、ドライブ107内の記録媒体の空き容量が確保し、次のステップに進む。
【0030】
なお、ステップS203の代わりに、最も古いMPEG4画像データ108を消去しながら新たなMPEG4画像データ108を記録する、画像データの自動更新を行うようにしてもよい。
【0031】
その後、ビデオカメラ100の通信状態の確認を行い(S204)、ビデオカメラ100が通信可能な状態にある場合には、ネットワークに接続を開始し(S207)、ビデオカメラ100が送信する画像データの送信先との接続を確立する。通信が不可能な場合は、ディスプレイ110上にネットワーク接続ができない事を画面に表示し(S205)、ユーザーに警告する。
【0032】
ここで、ビデオカメラ100が通信可能になるまで、ネットワーク接続を繰返し試みるように構成しても良いが、撮影不可能な状態を避けるため、MPEG4画像データ108のみを記録するように構成しても良い(S206)。あるいはディスプレイ100上に両者の選択を促す表示を行い、ユーザーにいずれか一方を選択させる構成にしても良い。MPEG4画像データ108のみを記録することとした場合は、MPEG2画像データ109の生成、送信は行わず、ドライブ107内の記録媒体にMPEG4画像データ108を記録して(S212)記録終了となる。なお、ネットワークへの送信方法については上述したとおりである。
【0033】
一方、ビデオカメラ100がネットワークへの接続に成功した場合は、画像データの記録可能な状態で待機し(S208)、ユーザーが記録を開始するのを待つ。ユーザーにより画像の記録が開始されたら(S209)、MPEG2画像データ109のネットワークへの送信を開始するとともに、MPEG4画像データ108をドライブ107内の記録媒体に記録する(S210)。なお、ネットワークへの送信方法、ドライブ107内の記録媒体への記録方法については上述したとおりである。最後に、ユーザーの記録終了の操作により、データ送信とデータ記録を終了する(S211)。
【0034】
以上説明したとおり、撮影した映像を二つの記録方式で圧縮して記録することで、ビデオカメラ(画像データ記録装置)から外部機器に画像データを送信した後でも、その映像を再生することが可能になり、さらに再生に用いる画像データを符号レートの低い記録方式で圧縮することで、画像データの記録可能時間を増やすと共に、素早く画像データの再生・表示を行うことができる。特に、符号レートの高い画像データについては、外部機器への接続を確立した後に圧縮、送信するので、静止画のみならず動画データにも対応できる。
【0035】
ここで、ドライブ107で用いる記録媒体は、ハードディスク、半導体メモリ、光ディスク、光磁気ディスクなど様々な媒体が考えられるが、特に種類が限定されるものではない。また、ビデオカメラ100と外部機器に用いられる通信インターフェースは、無線接続や有線接続、光通信など様々な方法が考えられるが、特に種類が限定されるものではない。
【0036】
次に、別の実施例について、図3を用いて説明する。図3は本実施例の画像データ記録装置としてのビデオカメラ200のブロック図である。前述した実施例と同じ符号がついている部分は、前述した実施例と同様の機能を有するため、説明を省略する。本実施例では、前述した実施例と異なる点について説明する。
【0037】
所定の操作により記録が開始されると、第一の記録方式により圧縮されたMPEG2画像データ209は、第一ドライブ207aにより、交換可能な記録媒体である光ディスク212に記録されるとともに、第一の記録方式よりも符号レートの小さい第二の記録方式により圧縮されたMEPG4画像データ208は、第二ドライブ207bに内蔵された固定記録媒体である第二の記録媒体に記録され、その際記録時間や記録媒体の空き容量などの画像データの管理情報はCPU206で管理される。
【0038】
ユーザーが撮影済みの任意の画像データの再生を要求したとき、CPU206は、その画像データがMPEG2画像データ209として光ディスク212に記録されているか否かを確認する。光ディスク212にその画像データが記録されていれば、CPU206は、その画像データを光ディスク212から再生するよう第一ドライブ207aを制御する。なお、光ディスク212にその画像データが記録されている場合であっても、後述するようにMPEG4画像データ208を読み出すようにする構成であってもよい。
【0039】
一方、その画像データの入っている光ディスクを抜いていたり、別の光ディスクが入っていたりして、第一ドライブ207aから任意の画像の第一の画像データが検出できない場合には、CPU206の制御により、ドライブ207b内の記録媒体にあるMPEG4画像データ208を読出し、画像デコーダ211を用いて映像信号に伸張し、ディスプレイ210に表示する。
【0040】
次に、本実施形態に関係するビデオカメラ200の動作手順について説明する。図4は、本実施形態に関係するビデオカメラ200の動作手順を説明するフローチャートである。以下に説明する各手順は、CPU206の制御に基づいて行われる。
【0041】
ステップS400、S401、S402及びS403は、それぞれ図2のステップS200、S201、S202及びS203と同様の動作を行うので、説明を省略する。
【0042】
ステップS402にて第二ドライブ207bでMPEG4画像データが記録できる状態であることを確認した後、光ディスク212にMPEG2画像データ209を記録できる空き容量があるかどうかチェックを行い(S404)、空き容量が不足して記録不可能な場合は、ディスプレイ110上に、ユーザーに対して記録したMPEG2画像データ209の消去または光ディスク等の記録媒体の交換を促す(S405)表示を行う。なお、空き容量が不足かどうかの判断は、CPU106が予め記憶している所定値との比較により行うようにすればよい。この所定値は、1分、5分といった分数や1MB、5MBといったデータ量であり、ユーザーがこの所定値を任意に変えられるようにしても良い。
【0043】
光ディスク212の空き容量が確認できたら、記録可能な状態で待機し(S406)、ユーザーが記録を開始するのを待つ。ユーザーにより画像の記録が開始されたら(S407)、MPEG2画像データ209は光ディスク等の記録媒体に、MPEG4画像データ208はハードディスク等の装置内蔵の記録手段に記録する(S408)。最後に、ユーザーの記録終了の操作により、記録を終了する(S409)。なお、ドライブ107a、107b内の記録媒体への記録方法については上述したとおりである。
【0044】
撮影中に第一ドライブ207a内の光ディスク212の記憶容量が一杯になるなどしたときには、ユーザーが光ディスク212を交換して撮影を継続することになるが、このように撮影した画像を二つの記録方式で圧縮して、装置に内蔵されており交換できない固定記録媒体を用いた第二ドライブ207b内の記録媒体にも画像データを記録することで、光ディスク212を交換した後でもMPEG2画像データ209が記録された光ディスクに再度交換することなく即時にその画像データを再生することが可能になる。さらに再生に用いる画像データを符号レートの低い記録方式で圧縮することで、画像データの記録可能時間を増やすことができる。
【0045】
これにより、ユーザーは画像データを再生するときに、複数の記録媒体に分散した画像データを探すことなく、長時間の画像の再生がビデオカメラ本体において可能になる。
【0046】
上述した実施形態における交換可能な記録媒体として光ディスクを用い、内蔵タイプで交換できない固定型の記録媒体としてハードディスクを用いた例について説明したが、記録媒体には光ディスク、光磁気ディスク、テープ、ハードディスク、半導体メモリなど様々な種類があり、特に種類が限定されるものではない。
【0047】
さらに上述した実施形態では、MPEG2記録方式、MPEG4記録方式を用いた例について説明したが、MPEG以外の記録方式であってもよいことは言うまでもない。
【0048】
また、上述した実施形態では、画像データが動画像の場合を例に挙げて説明したが、静止画像にも利用可能であるし、画像データ以外の情報データにも利用可能である。ただし、後述する理由から、動画記録のほうが本実施例のメリットをより享受することができる。
【0049】
最後に、各実施例の利点について説明する。
【0050】
(1)動画は静止画よりもエンコード(圧縮)に時間がかかる。従来技術では、撮影後にCPUがサムネイルを作成する構成となっているが、動画でこれを行うと多くの時間がかかり、その間ユーザーが待たされたり、他の操作をできなくなったりするため、使い勝手が悪い。本実施例のように、撮影時に2種類の画像データを生成する構成にすれば、撮影後に余計な時間を費やす必要がなくなる。
【0051】
(2)従来技術のようにサムネイルを選択してからサーバーに受信しに行く構成だと、動画を受信する場合に、画像データを受信し終わるまで再生する事ができなくなってしまう。静止画の場合は比較的短時間で受信が完了するが、動画の場合は受信に時間がかかるため、ユーザーが再生したい画像を選択してから、受信を完了し再生できるようになるまで多くの時間がかかり、ユーザーの利便性を損なう。本実施例のように装置内に再生可能な動画をあらかじめ記録媒体に保存しておくことにより、素早く動画像データの再生を行うことができる。
【0052】
【発明の効果】
本発明によれば、画像データ、特に動画像データの記録可能時間を増大させると共に、素早く画像データの再生・表示が可能となる。
【図面の簡単な説明】
【図1】本発明を適用した実施例を示すビデオカメラのブロック図である。
【図2】図1に示したビデオカメラの動作手順を示す図である。
【図3】本発明を適用した別の実施例を示すビデオカメラのブロック図である。
【図4】図3に示したビデオカメラの動作手順を示す図である。
【符号の説明】
100…ビデオカメラ、101…レンズ、102…CCD、103…外部入力端子、104…画像信号処理回路、105a…第一画像エンコーダ、105b…第二画像エンコーダ、106…CPU、107…ドライブ、110…ディスプレイ、111…画像デコーダ、112…通信インターフェース、113…無線アンテナ、114…USB端子、115…バッファ。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image data recording technique, and more particularly to an image data recording technique capable of simultaneously compressing image data into a plurality of recording methods and increasing the recordable time by transmitting the image data to the outside.
[0002]
[Prior art]
In recent years, small devices with built-in cameras and capable of recording moving images have been developed one after another. In addition to conventional cameras for shooting moving images, such as digital video cameras, the development of digital still cameras capable of recording moving images and mobile phones with cameras capable of recording moving images has been extensively developed.
[0003]
All of such image data recording apparatuses are provided with a recording medium and record image data on the recording medium. However, the storage capacity of the recording medium is limited due to the downsizing of devices and the product cost. In many cases, sufficient recording time cannot be provided for the user's request.
[0004]
From such a background, in order to record a long-time image signal, a user generally uses a method of recording at a low image data code rate or a method of recording by replacing a removable recording medium. .
[0005]
In addition, in order to be able to shoot virtually infinitely without depending on the storage device provided in the camera, the generated image data is transmitted to the remote server in real time, so that the image already transmitted to the server can be obtained. There is a technique for rewriting data with new image data (see, for example, Patent Document 1).
[0006]
Furthermore, the captured image data can be transmitted and stored in an external image database via communication, and desired image data can be efficiently and reliably extracted from a vast amount of image data stored in the image database and displayed quickly. There is an electronic camera (for example, refer to Patent Document 2).
[0007]
Further, before connecting to an external device such as a personal computer (PC), the image data is held in the temporary recording means, and thereafter, the compression rate is different for recording the image data on the recording medium and for transmitting the image data to the external device. There is also a technique in which the compressed image data is recorded on a recording medium and transmitted to an external device (for example, see Patent Document 3).
[0008]
[Patent Document 1]
JP 2002-101369 A [Patent Document 2]
JP 2002-209131 A [Patent Document 3]
[Patent Document 1] Japanese Patent Laid-Open No. 2003-116041
[Problems to be solved by the invention]
However, the method of recording with the code rate of the image data lowered has a problem that the image quality deteriorates even if the recordable time can be increased.
[0010]
Further, in the method of recording image data using a removable recording medium, there is a problem that even if the recordable time can be increased, the image cannot be reproduced when the recording medium is removed.
[0011]
In the technique disclosed in Patent Document 1, the recordable time can be increased by deleting the image data from the camera body after transmitting the generated image data to the remote server in real time. However, when the user requests the reproduction of the image data, it is necessary to connect to the remote server again to receive the image data, so that the image cannot be reproduced / displayed quickly. For this reason, when image data is transmitted and erased from the main body, and the user moves, for example, it becomes impossible to connect to an external device, image data cannot be received. Therefore, the recorded image cannot be reproduced, which is not preferable in terms of usability.
[0012]
Further, in the method disclosed in Patent Document 2, when transmitting image data, a thumbnail that is a reduced image is recorded in the electronic camera body, and the image data to be reproduced is selected by the user at the time of reproduction. Start receiving data. Therefore, the recordable time can be increased and the image data can be easily confirmed on the electronic camera body. However, since thumbnails are image data obtained by reducing a part of image data, image data cannot be displayed entirely by displaying only thumbnails. It is insufficient. After all, in order to play back and display moving images, it is necessary to connect to the remote server again to receive moving image data, so it is not only possible to play and display moving images quickly, but also the user moves If it becomes impossible to connect to an external device, for example, the moving image data cannot be reproduced.
[0013]
In the method disclosed in Patent Document 3, image data is held in the temporary recording means before being connected to an external device. Therefore, the image data is always held in the temporary recording means having a recording capacity of at most several MB. It's not possible. Therefore, there is a possibility that image data cannot be compressed at different compression rates for recording on a recording medium and for transmitting to an external device.
[0014]
An object of the present invention is to provide an image data recording technique capable of increasing the recordable time of image data, in particular, moving image data, and quickly reproducing and displaying the image data.
[0015]
[Means for Solving the Problems]
In order to achieve the above object, in the present invention, an image signal is converted into a digital image signal, the digital image signal is compressed by the first recording method into the first image data, and moreover than the first recording method. It is assumed that the second image data is compressed by the second recording method with a low code rate, the second image data is recorded on a recording medium, and the first image data is transmitted to an external device. The compression of the image signal to the first image data and the transmission to the external device are preferably performed after establishing a connection with the external device.
[0016]
In the present invention, the image signal is converted into a digital image signal, the digital image signal is compressed by the first recording method to the first image data, and the code rate is smaller than that of the first recording method. The second image data is compressed by the second recording method. Then, the first image data is recorded on a replaceable first recording medium, and the second image data is recorded on a second recording medium provided in the apparatus. When the image is reproduced, the second image data recorded on the second recording medium is expanded, and an image based on the second image data is displayed on the display means.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments to which the present invention is applied will be described below with reference to the drawings.
FIG. 1 is a block diagram of a video camera 100 as an image data recording apparatus according to an embodiment to which the present invention is applied. An image photographed through the lens 101 is converted into an image signal by a CCD (Charge Coupled Device) 102 which is an image pickup means, and a digital image is obtained by an image signal processing circuit 104 incorporating a D / A converter and a digital signal processing circuit. A signal is generated. Alternatively, when an image signal output from a video device or the like is input to the external input terminal 103, a digital image signal is similarly generated via the image signal processing circuit 104.
[0018]
The digital image signal is converted into image data by a first image encoder 105a that compresses the first recording method and a second image encoder 105b that compresses the second recording method with a code rate smaller than that of the first recording method, respectively. Is compressed. In the present embodiment, the first recording method will be described as MPEG (Moving Picture Experts Group) 2 method, and the second recording method will be described as MPEG4 method.
[0019]
When recording is started by a predetermined operation, the MPEG2 image data 109 compressed by the first recording method is temporarily stored in a buffer 115 such as a semiconductor memory, and the MPEG4 image data 108 by the second recording method is stored. The drive 107 records the information on a recording medium such as a hard disk as a recording medium. Note that a CPU (Central Processing Unit) 106 performs control of each part of the video camera, management of image data management information indicating recording time, recording medium free space, and the like.
[0020]
Since the video camera 100 includes the communication interface 112, the video camera 100 can be connected to a network such as the Internet or an external device such as a personal computer. Image data can be transmitted and received using the wireless antenna 113 and the USB (Universal Serial Bus) terminal 114 which is a wired communication terminal shown in FIG. When the video camera 100 can be connected to a network or an external device via the wireless antenna 113 or the USB terminal 114, the CPU 106 establishes connection means, authenticates the device, etc., and then stores the MPEG2 image data stored in the buffer 115. 109 transmission / reception is started.
[0021]
When the video camera 100 is connected to a network such as the Internet, or is connected to an external device such as a personal computer, the CPU 106 reads the MPEG2 image data 109 in the buffer 115 and uses the communication interface 112 to Send image data to an external device. After transferring the MPEG2 image data 109 to the network or an external device, the CPU 106 deletes the MPEG2 image data 109 from the buffer 115 to ensure a free space.
[0022]
With this configuration, the video camera 100 can store new image data in the buffer 115 while transmitting the image data temporarily stored in the buffer 115 to the network or an external device. The recordable time can be increased.
[0023]
Here, the video camera 100 temporarily records in the buffer 115 when transmitting the MPEG2 image data 109, but it may be recorded in a recording medium in the recording device 107 instead of the buffer 115. With such a configuration, a recording medium having a larger storage capacity than the buffer 115 that is a temporary recording unit so that the user can continue shooting even when the video camera 100 cannot be connected to a network or an external device. Can be transmitted to the network or an external device after the recording is completed. Of course, the image data may be recorded on a recording medium in the drive 107 instead of the buffer 115 even when it can be connected to a network or an external device.
[0024]
Note that recording means other than the drive 107 and the buffer 115 may be provided for recording the MPEG2 image data 109.
[0025]
The video camera 100 includes a display 110 for confirming a subject such as an angle of view at the time of shooting. When recording image data, an image based on the image signal of the image signal processing circuit 104 is displayed on the display 110. When the user requests the reproduction of any image data that has been shot, the CPU 106 reads out the MPEG4 image data 108 recorded on the recording medium in the drive 107, decompresses it to an image signal using the image decoder 111, and An image based on the image signal is displayed on the display 110. The display 110 is a small display device provided in the image data recording apparatus. Specifically, the display 110 is a display device using liquid crystal, organic EL (Electro Luminescence), or the like.
[0026]
Here, since the display 110 corresponds to the size of the video camera 100 and is about 3.5 inches at the maximum, the display area is small and the resolution is often low. Therefore, when an image taken by the image data recording apparatus 100 is to be reproduced, image data having a large amount of data such as MPEG2 image data 109 is not necessary, and it is sufficient to use a recording method with a low code rate. You can check the contents. Therefore, by using MPEG4 image data 108 having a low code rate, it is possible to record long-time image data on a recording medium in the drive 107.
[0027]
The image signal processing circuit 104, the first image encoder 105a, the second image encoder 105b, and the image decoder 111 may be configured as hardware as a circuit, or configured as software as a program in the CPU 106. Also good. That is, the specific configuration is not particularly limited as long as the above-described functions are performed.
[0028]
Next, an operation procedure of the video camera 100 related to the present embodiment will be described. FIG. 2 is a flowchart for explaining the operation procedure of the video camera 100. Each operation procedure described below is performed under the control of the CPU 106.
[0029]
First, when a power switch (not shown) of the video camera 100 is turned on (S200), the video camera 100 performs initial setting (S201). At that time, it is checked whether the recording medium in the drive 107 has a free capacity capable of recording the MPEG4 image data 108 (S202). If recording is not possible due to insufficient free space, a screen is displayed on the display 110 that prompts the user to erase the recorded MPEG4 image data (S203). It should be noted that whether or not the free space is insufficient may be determined by comparison with a predetermined value stored in advance by the CPU 106. The predetermined value is a fraction such as 1 minute or 5 minutes or a data amount such as 1 MB or 5 MB, and the user may arbitrarily change the predetermined value.
When the user erases the MPEG4 image data 108, the recording medium in the drive 107 is secured, and the process proceeds to the next step.
[0030]
Instead of step S203, new MPEG4 image data 108 may be recorded while deleting the oldest MPEG4 image data 108, and image data may be automatically updated.
[0031]
Thereafter, the communication state of the video camera 100 is confirmed (S204). When the video camera 100 is in a communicable state, connection to the network is started (S207), and image data transmitted by the video camera 100 is transmitted. Establish a connection with the destination. If communication is impossible, a message indicating that the network connection cannot be made is displayed on the display 110 (S205), and the user is warned.
[0032]
Here, the network connection may be repeatedly attempted until the video camera 100 becomes communicable. However, in order to avoid a state in which photographing is not possible, only the MPEG4 image data 108 may be recorded. Good (S206). Alternatively, a display that prompts the user to select both may be displayed on the display 100 so that the user can select either one. If only the MPEG4 image data 108 is recorded, the MPEG2 image data 109 is not generated and transmitted, and the MPEG4 image data 108 is recorded on the recording medium in the drive 107 (S212), and the recording is completed. The transmission method to the network is as described above.
[0033]
On the other hand, if the video camera 100 is successfully connected to the network, the video camera 100 waits in a state where image data can be recorded (S208), and waits for the user to start recording. When image recording is started by the user (S209), transmission of MPEG2 image data 109 to the network is started, and MPEG4 image data 108 is recorded on a recording medium in the drive 107 (S210). Note that the transmission method to the network and the recording method to the recording medium in the drive 107 are as described above. Finally, data transmission and data recording are terminated by the user's recording termination operation (S211).
[0034]
As described above, by compressing and recording the captured video using the two recording methods, the video can be played even after image data is transmitted from the video camera (image data recording device) to the external device. Further, by compressing the image data used for reproduction by a recording method with a low code rate, it is possible to increase the recordable time of the image data and to quickly reproduce and display the image data. In particular, since image data with a high code rate is compressed and transmitted after establishing a connection to an external device, it can handle not only still images but also moving image data.
[0035]
Here, various media such as a hard disk, a semiconductor memory, an optical disk, and a magneto-optical disk can be considered as the recording medium used in the drive 107, but the type is not particularly limited. In addition, as a communication interface used for the video camera 100 and an external device, various methods such as wireless connection, wired connection, and optical communication are conceivable, but the type is not particularly limited.
[0036]
Next, another embodiment will be described with reference to FIG. FIG. 3 is a block diagram of a video camera 200 as an image data recording apparatus of this embodiment. Parts having the same reference numerals as those of the above-described embodiments have the same functions as those of the above-described embodiments, and thus description thereof is omitted. In the present embodiment, differences from the above-described embodiment will be described.
[0037]
When recording is started by a predetermined operation, the MPEG2 image data 209 compressed by the first recording method is recorded on the optical disk 212 which is an exchangeable recording medium by the first drive 207a. The MPEG4 image data 208 compressed by the second recording method having a code rate smaller than that of the recording method is recorded on a second recording medium that is a fixed recording medium built in the second drive 207b. Image data management information such as the free capacity of the recording medium is managed by the CPU 206.
[0038]
When the user requests reproduction of any image data that has been shot, the CPU 206 checks whether the image data is recorded on the optical disc 212 as MPEG2 image data 209. If the image data is recorded on the optical disk 212, the CPU 206 controls the first drive 207a to reproduce the image data from the optical disk 212. Even when the image data is recorded on the optical disk 212, the MPEG4 image data 208 may be read as described later.
[0039]
On the other hand, if the first image data of an arbitrary image cannot be detected from the first drive 207a because the optical disk containing the image data is removed or another optical disk is inserted, the CPU 206 controls Then, the MPEG4 image data 208 on the recording medium in the drive 207b is read, decompressed into a video signal using the image decoder 211, and displayed on the display 210.
[0040]
Next, an operation procedure of the video camera 200 related to the present embodiment will be described. FIG. 4 is a flowchart for explaining an operation procedure of the video camera 200 related to the present embodiment. Each procedure described below is performed based on the control of the CPU 206.
[0041]
Steps S400, S401, S402, and S403 perform the same operations as steps S200, S201, S202, and S203 of FIG.
[0042]
After confirming that the MPEG4 image data can be recorded by the second drive 207b in step S402, it is checked whether or not there is a free capacity capable of recording the MPEG2 image data 209 on the optical disk 212 (S404). If the recording is not possible due to a shortage, the display 110 prompts the user to delete the recorded MPEG2 image data 209 or replace a recording medium such as an optical disk (S405). It should be noted that whether or not the free space is insufficient may be determined by comparison with a predetermined value stored in advance by the CPU 106. The predetermined value is a fraction such as 1 minute or 5 minutes or a data amount such as 1 MB or 5 MB, and the user may arbitrarily change the predetermined value.
[0043]
If the free capacity of the optical disk 212 can be confirmed, it waits in a recordable state (S406) and waits for the user to start recording. When recording of an image is started by the user (S407), the MPEG2 image data 209 is recorded on a recording medium such as an optical disk, and the MPEG4 image data 208 is recorded on a recording means built in the apparatus such as a hard disk (S408). Finally, the recording is terminated by the user's recording termination operation (S409). The recording method on the recording medium in the drives 107a and 107b is as described above.
[0044]
When the storage capacity of the optical disk 212 in the first drive 207a becomes full during shooting, the user replaces the optical disk 212 and continues shooting. MPEG2 image data 209 is recorded even after the optical disk 212 is replaced by recording the image data on the recording medium in the second drive 207b using the fixed recording medium that is compressed in the apparatus and cannot be replaced. The image data can be immediately reproduced without replacing the optical disk again. Furthermore, by compressing the image data used for reproduction by a recording method with a low code rate, the recordable time of the image data can be increased.
[0045]
Thus, when the user reproduces the image data, it is possible to reproduce the image for a long time in the video camera main body without searching for the image data distributed on the plurality of recording media.
[0046]
Although an example in which an optical disk is used as a replaceable recording medium in the above-described embodiment and a hard disk is used as a fixed recording medium that cannot be replaced by a built-in type has been described, the recording medium includes an optical disk, a magneto-optical disk, a tape, a hard disk, There are various types such as a semiconductor memory, and the type is not particularly limited.
[0047]
Further, in the above-described embodiment, the example using the MPEG2 recording system and the MPEG4 recording system has been described, but it goes without saying that a recording system other than MPEG may be used.
[0048]
In the above-described embodiment, the case where the image data is a moving image has been described as an example. However, the image data can be used for still images and can be used for information data other than image data. However, for the reasons described later, moving image recording can enjoy the advantages of this embodiment.
[0049]
Finally, advantages of each embodiment will be described.
[0050]
(1) A moving image takes longer to encode (compress) than a still image. In the conventional technology, the CPU is configured to create thumbnails after shooting, but it takes a lot of time to do this with movies, and during that time the user waits or can not perform other operations, so it is easy to use bad. As in this embodiment, if two types of image data are generated at the time of shooting, it is not necessary to spend extra time after shooting.
[0051]
(2) If the thumbnail is selected and then sent to the server as in the prior art, when the moving image is received, it cannot be reproduced until the image data has been received. For still images, reception is completed in a relatively short time, but for movies, it takes time to receive, so there are many times until the user completes reception and playback can be performed after selecting the image that the user wants to play. It takes time and impairs user convenience. By storing a reproducible moving image in the apparatus in advance in a recording medium as in this embodiment, moving image data can be quickly reproduced.
[0052]
【The invention's effect】
According to the present invention, it is possible to increase the recordable time of image data, particularly moving image data, and to quickly reproduce and display image data.
[Brief description of the drawings]
FIG. 1 is a block diagram of a video camera showing an embodiment to which the present invention is applied.
FIG. 2 is a diagram showing an operation procedure of the video camera shown in FIG.
FIG. 3 is a block diagram of a video camera showing another embodiment to which the present invention is applied.
4 is a diagram showing an operation procedure of the video camera shown in FIG. 3;
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 100 ... Video camera, 101 ... Lens, 102 ... CCD, 103 ... External input terminal, 104 ... Image signal processing circuit, 105a ... First image encoder, 105b ... Second image encoder, 106 ... CPU, 107 ... Drive, 110 ... Display, 111 ... Image decoder, 112 ... Communication interface, 113 ... Wireless antenna, 114 ... USB terminal, 115 ... Buffer.

Claims (7)

画像信号をデジタル画像信号に変換する画像信号処理手段と、
前記デジタル画像信号を第一の記録方式により圧縮して第一の画像データにする第一画像圧縮手段と、
前記デジタル画像信号を前記第一の記録方式よりも符号レートの低い第二の記録方式により圧縮して第二の画像データにする第二画像圧縮手段と、
画像データを記録媒体に記録する記録手段と、
画像データを外部機器に送信する送信手段と、
前記画像信号処理手段により変換された前記デジタル画像信号を圧縮し、前記第一の画像データと前記第二の画像データを並行して生成するよう、前記第一画像圧縮手段と前記第二画像圧縮手段を制御し、前記第二の画像データを前記記録媒体に記録するとともに、前記送信手段を介して前記第一の画像データを前記外部機器に送信するよう制御する制御手段と、
を備えていることを特徴とする画像データ記録装置。
Image signal processing means for converting the image signal into a digital image signal;
First image compression means for compressing the digital image signal by a first recording method into first image data;
A second image compression means for compressing the digital image signal by a second recording method having a code rate lower than that of the first recording method into second image data;
Recording means for recording image data on a recording medium;
Transmitting means for transmitting image data to an external device;
The first image compression unit and the second image compression unit compress the digital image signal converted by the image signal processing unit and generate the first image data and the second image data in parallel. control means, and records the second image data on the recording medium, and control means for controlling so that the first image data via a pre-Symbol transmitting means for transmitting to said external device,
An image data recording apparatus comprising:
請求項1に記載の画像データ記録装置において、前記制御手段は、前記記録媒体の記録容量が足りない場合には、前記第一の画像データを前記記録媒体に記録してから前記送受信手段により外部機器に送信し、送信完了後に前記記録媒体に記録した第一の画像データを消去するよう制御することを特徴とする画像データ記録装置。  2. The image data recording apparatus according to claim 1, wherein when the recording medium has insufficient recording capacity, the control unit records the first image data on the recording medium and then externally transmits the first image data by the transmission / reception unit. An image data recording apparatus for controlling to delete the first image data transmitted to the device and recorded on the recording medium after the transmission is completed. クレーム1に記載の画像記録データ装置において、画像を表示する表示手段と、前記第二の画像データを伸長して前記表示手段に表示可能な画像信号にする画像伸張手段とを備え、
前記制御手段は、再生操作がなされた場合、前記記録媒体に記録されている第二の画像データを前記画像伸張手段により伸長し、前記表示手段に前記第二の画像データに基づく画像を表示させるよう制御することを特徴とする画像データ記録装置。
The image recording data device according to claim 1, comprising display means for displaying an image, and image expansion means for expanding the second image data into an image signal that can be displayed on the display means,
When the reproduction operation is performed, the control unit expands the second image data recorded on the recording medium by the image expansion unit, and causes the display unit to display an image based on the second image data. An image data recording apparatus characterized in that the control is performed as described above.
外部機器との接続を確立し、
画像信号をデジタル画像信号に変換し、
前記デジタル画像信号を第一の記録方式により圧縮して第一の画像データにするとともに並行して前記デジタル画像信号を前記第一の記録方式よりも符号レートの低い第二の記録方式により圧縮して第二の画像データにし、
前記第二の画像データを記録媒体に記録し、
前記第一の画像データを前記外部機器に送信することを特徴とする画像データ記録方法。
Establish a connection with an external device,
Convert image signal to digital image signal,
Wherein while the first image data is compressed by the digital image signal a first recording mode, compressed by lower second printing method of code rate than parallel the first recording the digital image signal To the second image data,
Recording the second image data on a recording medium;
An image data recording method, wherein the first image data is transmitted to the external device.
請求項に記載の画像データ記録方法において、前記第一の画像データを前記記録媒体に記録してから前記送受信手段により外部機器に送信し、送信完了後に前記記録媒体に記録した第一の画像データを消去することを特徴とする画像データ記録方法。5. The image data recording method according to claim 4 , wherein the first image data is recorded on the recording medium and then transmitted to an external device by the transmission / reception means, and recorded on the recording medium after transmission is completed. An image data recording method comprising erasing data. 請求項に記載の画像データ記録方法において、再生操作がなされた場合、前記記録媒体に記録されている第二の画像データを伸長し、表示手段に前記第二の画像データに基づく画像を表示させることを特徴とする画像データ記録方法。5. The image data recording method according to claim 4 , wherein when a reproduction operation is performed, the second image data recorded on the recording medium is expanded and an image based on the second image data is displayed on the display means. An image data recording method comprising: 外部機器との接続を確立し、
情報信号をデジタル情報信号に変換し、
前記デジタル情報信号を第一の記録方式により圧縮して第一の情報データにするとともに並行して前記デジタル情報信号を前記第一の記録方式よりも符号レートの低い第二の記録方式により圧縮して第二の情報データにし、
前記第二の情報データを記録媒体に記録し、
前記第一の情報データを前記外部機器に送信することを特徴とする情報データ記録方法。
Establish a connection with an external device,
Convert information signals into digital information signals,
The digital information signal is compressed by a first recording method as well as to the first information data, compressed by the lower second printing method of code rate than parallel the first recording said digital information signal To the second information data,
Recording the second information data on a recording medium;
An information data recording method comprising transmitting the first information data to the external device.
JP2003199578A 2003-04-16 2003-07-22 Image data recording apparatus and image data recording method Expired - Lifetime JP3933103B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003199578A JP3933103B2 (en) 2003-04-16 2003-07-22 Image data recording apparatus and image data recording method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003110990 2003-04-16
JP2003199578A JP3933103B2 (en) 2003-04-16 2003-07-22 Image data recording apparatus and image data recording method

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2007010956A Division JP2007174686A (en) 2003-04-16 2007-01-22 Image data recording apparatus and image data recording method

Publications (2)

Publication Number Publication Date
JP2005006270A JP2005006270A (en) 2005-01-06
JP3933103B2 true JP3933103B2 (en) 2007-06-20

Family

ID=34106230

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003199578A Expired - Lifetime JP3933103B2 (en) 2003-04-16 2003-07-22 Image data recording apparatus and image data recording method

Country Status (1)

Country Link
JP (1) JP3933103B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5915872B2 (en) * 2014-08-29 2016-05-11 パナソニックIpマネジメント株式会社 Transaction terminal device

Also Published As

Publication number Publication date
JP2005006270A (en) 2005-01-06

Similar Documents

Publication Publication Date Title
KR100971741B1 (en) Image pickup apparatus
US20050076371A1 (en) Mobile terminal and moving picture recording/reproducing system
WO2007049449A1 (en) Video reproducing device, video recorder, video reproducing method, video recording method, and semiconductor integrated circuit
US20100124408A1 (en) Image Converter, Image Reproducer, Image Conversion/Reproduction System, and Recording Medium
JP5082973B2 (en) Video recording system and imaging apparatus
JP3868145B2 (en) Image recording apparatus and electronic camera apparatus
JP2003179852A (en) Video audio data recording and reproducing method, and disk device employing the same
US20050219382A1 (en) Digital camera device and method for generating image pick-up signal
JP2007174686A (en) Image data recording apparatus and image data recording method
US20090195662A1 (en) Electronic camera and image transfer method adopted in electronic camera
JP3933103B2 (en) Image data recording apparatus and image data recording method
JP2003125344A (en) Method and device for recording/reproducing picture and method and device for managing file
US20040208490A1 (en) Image data recording/reproducing apparatus and image data recording/reproducing method
US20070279517A1 (en) Method for recording image and image pickup apparatus
TW200830287A (en) Recording/reproducing system, recording/reproducing device and control method of recording/reproducing device
JP4040268B2 (en) Imaging recording device
JP2006115412A (en) Data recorder
JP4065526B2 (en) Imaging apparatus and recording apparatus
KR20090015863A (en) Information processing system, recording apparatus, portable device, information processing method, and program
JP3840125B2 (en) Image processing device
JP2002191009A (en) Digital camera and its operation control method
JP2002199322A (en) Imaging system, imaging unit, image processor and signal processing method
JP4086563B2 (en) Data transfer device
JP2001016492A (en) Digital video camera
KR100555842B1 (en) Portable multimedia playing apparatus having security ability

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060127

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060420

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061110

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070122

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070227

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070312

R151 Written notification of patent or utility model registration

Ref document number: 3933103

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110330

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110330

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120330

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130330

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130330

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140330

Year of fee payment: 7

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term