JPH10200859A - 画像処理装置及び方法 - Google Patents
画像処理装置及び方法Info
- Publication number
- JPH10200859A JPH10200859A JP154097A JP154097A JPH10200859A JP H10200859 A JPH10200859 A JP H10200859A JP 154097 A JP154097 A JP 154097A JP 154097 A JP154097 A JP 154097A JP H10200859 A JPH10200859 A JP H10200859A
- Authority
- JP
- Japan
- Prior art keywords
- image
- recording
- recording medium
- compression
- moving image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】
【課題】 連続撮影中の任意のフレームを高精細記録で
きるようにする。 【解決手段】 連続撮影用トリガー３８により連続撮影
が指示されると、カメラ信号処理回路１６の出力画像
は、動画用フレーム・メモリ２０に一時記憶され、動画
像圧縮伸長回路１８によりモーションＪＰＥＧ方式で圧
縮されて、記録媒体２８に記録される。連続撮影中に静
止画用レリーズ４０が操作されると、システム制御回路
２６は、動画像圧縮伸長回路１８による動画像圧縮と記
録媒体２８への記録を続行しながら、該当するフレーム
の画像情報をフレーム・メモリ２４に格納すると共に、
静止画撮影フラグを記録媒体２８に書き込む。連続撮影
終了と共に、システム制御回路２６は、静止画用フレー
ム・メモリ２４から画像情報を読み出し、静止画像圧縮
伸長回路２２により静止画圧縮して、記録媒体２８の、
動画記録領域とは別の領域に記録する。
きるようにする。 【解決手段】 連続撮影用トリガー３８により連続撮影
が指示されると、カメラ信号処理回路１６の出力画像
は、動画用フレーム・メモリ２０に一時記憶され、動画
像圧縮伸長回路１８によりモーションＪＰＥＧ方式で圧
縮されて、記録媒体２８に記録される。連続撮影中に静
止画用レリーズ４０が操作されると、システム制御回路
２６は、動画像圧縮伸長回路１８による動画像圧縮と記
録媒体２８への記録を続行しながら、該当するフレーム
の画像情報をフレーム・メモリ２４に格納すると共に、
静止画撮影フラグを記録媒体２８に書き込む。連続撮影
終了と共に、システム制御回路２６は、静止画用フレー
ム・メモリ２４から画像情報を読み出し、静止画像圧縮
伸長回路２２により静止画圧縮して、記録媒体２８の、
動画記録領域とは別の領域に記録する。
Description
【０００１】
【発明の属する技術分野】本発明は、画像処理装置及び
方法に関し、より具体的には、動画像とその動画像中の
所望の静止画像を記録媒体に記録する画像処理装置及び
方法に関する。
方法に関し、より具体的には、動画像とその動画像中の
所望の静止画像を記録媒体に記録する画像処理装置及び
方法に関する。
【０００２】
【従来の技術】銀塩フィルムの代わりに半導体メモリ、
磁気ディスク及び光磁気ディスク等を記録媒体として撮
影画像をディジタル記録する電子スチル・カメラが、研
究及び商品化されている。記録媒体がランダムアクセス
可能であれば、記録順とは異なる順序で再生でき、任意
の記録画像を即座に再生できる。ディジタル記録ではま
た、ダビングによっても画質が劣化しない、時間軸上の
スケーラビリティを活用しやすいなどの利点がある。し
かし、ディジタル記録は、アナログ記録に比べて、記録
データ量が膨大になるという欠点がある。
磁気ディスク及び光磁気ディスク等を記録媒体として撮
影画像をディジタル記録する電子スチル・カメラが、研
究及び商品化されている。記録媒体がランダムアクセス
可能であれば、記録順とは異なる順序で再生でき、任意
の記録画像を即座に再生できる。ディジタル記録ではま
た、ダビングによっても画質が劣化しない、時間軸上の
スケーラビリティを活用しやすいなどの利点がある。し
かし、ディジタル記録は、アナログ記録に比べて、記録
データ量が膨大になるという欠点がある。
【０００３】記録データ量を削減する手段として、情報
圧縮技術が有益であり、静止画のＪＰＥＧ方式の他に
も、動画のＭＰＥＧ方式など、種々の方式が提案されて
いる。ＪＰＥＧ方式では、８×８画素単位で空間座標系
での値を周波数座標上の値に直交変換（ＤＣＴ変換）
し、その変換係数を量子化し、ハフマン符号化方式等で
可変長符号とする。これにより、データ量はほぼ１／１
０以上に圧縮される。可逆符号化ではないので、入力信
号を忠実に再現することはできないが、通常の画質レベ
ルでは問題とはならない。圧縮情報を復元するには、圧
縮のときと逆の過程をたどることになる。
圧縮技術が有益であり、静止画のＪＰＥＧ方式の他に
も、動画のＭＰＥＧ方式など、種々の方式が提案されて
いる。ＪＰＥＧ方式では、８×８画素単位で空間座標系
での値を周波数座標上の値に直交変換（ＤＣＴ変換）
し、その変換係数を量子化し、ハフマン符号化方式等で
可変長符号とする。これにより、データ量はほぼ１／１
０以上に圧縮される。可逆符号化ではないので、入力信
号を忠実に再現することはできないが、通常の画質レベ
ルでは問題とはならない。圧縮情報を復元するには、圧
縮のときと逆の過程をたどることになる。
【０００４】静止画の単独撮影では、画質が優先され、
画像を取り込んだ後の後処理（圧縮処理と記録媒体への
記録処理）に多少時間がかかったとしても許容できた。
しかし、高速の連写の場合には、連写の時間間隔が後処
理に要する時間で制限されるので、圧縮処理及び記録処
理に要する時間を短縮するか、いずれかの部分を並列動
作させて画像取り込みの待ち時間を短縮するかしなけれ
ばならない。
画像を取り込んだ後の後処理（圧縮処理と記録媒体への
記録処理）に多少時間がかかったとしても許容できた。
しかし、高速の連写の場合には、連写の時間間隔が後処
理に要する時間で制限されるので、圧縮処理及び記録処
理に要する時間を短縮するか、いずれかの部分を並列動
作させて画像取り込みの待ち時間を短縮するかしなけれ
ばならない。
【０００５】また、短時間の動画を記録しようとする
と、画面の動きを滑らかにするには、３０フレーム／秒
（又は６０フィールド／秒）程度のフレームレートを確
保しなければならない。このためにも、後処理に要する
時間を短縮する必要があり、勿論、記録媒体の記録容量
を増大し、画像圧縮率を高める必要がある。とくに圧縮
と記録をリアルタイムに行なおうとすると、構成が複雑
化し、記録媒体も高速書き込み可能な媒体を使用しなけ
ればならない。これに対し、画像情報を高速書き込み可
能な第１の半導体メモリを介して低速書き込みの大容量
の第２の半導体メモリに転送する構成の電子スチルカメ
ラが提案されている（例えば、平成１年特許出願公開第
１０７８４号公報及び平成５年特許出願公開第４９００
０号公報）。
と、画面の動きを滑らかにするには、３０フレーム／秒
（又は６０フィールド／秒）程度のフレームレートを確
保しなければならない。このためにも、後処理に要する
時間を短縮する必要があり、勿論、記録媒体の記録容量
を増大し、画像圧縮率を高める必要がある。とくに圧縮
と記録をリアルタイムに行なおうとすると、構成が複雑
化し、記録媒体も高速書き込み可能な媒体を使用しなけ
ればならない。これに対し、画像情報を高速書き込み可
能な第１の半導体メモリを介して低速書き込みの大容量
の第２の半導体メモリに転送する構成の電子スチルカメ
ラが提案されている（例えば、平成１年特許出願公開第
１０７８４号公報及び平成５年特許出願公開第４９００
０号公報）。
【０００６】動画像の周知の圧縮技術であるＭＰＥＧ方
式では、各画面の圧縮に時間軸方向の圧縮を加味して圧
縮率を高めている。例えば、基準となる画面（開始フレ
ーム（又はフィールド。以下、同じ。）の前後のフレー
ムは、動きがあったとしても、基準画面との相関が高い
（類似した画素情報が得られる）はずなので、同一の画
素番地で基準画像値からの差分を求めて、これを符号化
すれば圧縮効果は高くなる。さらに、ある画素ブロック
単位で比較フレームの比較対象とブロックマッチングを
行なうことで、動き量に応じた量だけ横画素方向及び縦
ライン方向にシフトさせて差分をとることにおり、更
に、圧縮効果が高くなる。
式では、各画面の圧縮に時間軸方向の圧縮を加味して圧
縮率を高めている。例えば、基準となる画面（開始フレ
ーム（又はフィールド。以下、同じ。）の前後のフレー
ムは、動きがあったとしても、基準画面との相関が高い
（類似した画素情報が得られる）はずなので、同一の画
素番地で基準画像値からの差分を求めて、これを符号化
すれば圧縮効果は高くなる。さらに、ある画素ブロック
単位で比較フレームの比較対象とブロックマッチングを
行なうことで、動き量に応じた量だけ横画素方向及び縦
ライン方向にシフトさせて差分をとることにおり、更
に、圧縮効果が高くなる。
【０００７】このような動画圧縮処理を行なえば、より
高い圧縮率を達成できるが、装置の構成が複雑化し、高
価なものになってしまう。
高い圧縮率を達成できるが、装置の構成が複雑化し、高
価なものになってしまう。
【０００８】ランダムアクセス性については、先にも述
べたが、動画の再生時に任意のフレームを指定して再生
できるはずである。動画像圧縮記録時にフレーム間圧縮
を行なっていると、再生表示しようとするフレームがフ
レーム間圧縮によらないイントラ画像である場合には、
そのフレームの情報のみで再生表示できるが、フレーム
間圧縮画像である場合には、そのフレーム単体では伸長
不可能であり、基準となる前又はのフレームの画像情報
が必要となる。さらには、任意のフレームを動画像より
高精細な画質で出力（再生表示又はプリントアウト）す
ることはできない。
べたが、動画の再生時に任意のフレームを指定して再生
できるはずである。動画像圧縮記録時にフレーム間圧縮
を行なっていると、再生表示しようとするフレームがフ
レーム間圧縮によらないイントラ画像である場合には、
そのフレームの情報のみで再生表示できるが、フレーム
間圧縮画像である場合には、そのフレーム単体では伸長
不可能であり、基準となる前又はのフレームの画像情報
が必要となる。さらには、任意のフレームを動画像より
高精細な画質で出力（再生表示又はプリントアウト）す
ることはできない。
【０００９】静止画像に比較して動画像の画質要求が一
般的に低い点に注目すれば、フレーム間圧縮は、人間の
視覚上のメカニズムを巧妙に利用した高能率な圧縮符号
化方式であり、実用上、非常に有効である。但し、上述
のように、任意の１フレームを再生出力すると、鑑賞又
はプリントアウトに充分耐えうる良質の画質は望めな
い。
般的に低い点に注目すれば、フレーム間圧縮は、人間の
視覚上のメカニズムを巧妙に利用した高能率な圧縮符号
化方式であり、実用上、非常に有効である。但し、上述
のように、任意の１フレームを再生出力すると、鑑賞又
はプリントアウトに充分耐えうる良質の画質は望めな
い。
【００１０】
【発明が解決しようとする課題】例えば、動画記録中で
も、所望のフレームについて動画処理とは別に静止画処
理を実行することも考えられる。具体的には、動画撮影
開始終了のトリガー釦とは別に、静止画撮影用レリーズ
スイッチを設け、連続撮影中にも、静止画撮影用レリー
ズスイッチを押し込み操作することで、その間の取り込
み画像を静止画処理させる。
も、所望のフレームについて動画処理とは別に静止画処
理を実行することも考えられる。具体的には、動画撮影
開始終了のトリガー釦とは別に、静止画撮影用レリーズ
スイッチを設け、連続撮影中にも、静止画撮影用レリー
ズスイッチを押し込み操作することで、その間の取り込
み画像を静止画処理させる。
【００１１】その動作を、図３、図４及び図５を参照し
て具体的に説明する。図３〜図５は、一連の画像の時間
軸上の流れの模式図を示す。図３は、撮影画像の時間軸
上の流れを示す模式図である。ＮＴＳＣ方式では、７２
０×４８０画素程度の画像をインターレースして６０フ
ィールド／秒で取り込む。サンプリング周波数は、輝度
信号が１３．５ＭＨｚ、色差信号Ｒ−Ｙ、Ｂ−Ｙがそれ
ぞれ６．７５ＭＨｚであり、色差信号のサンプリング周
波数を１／２に間引いて４：１：１コンポーネント信号
にした後、情報圧縮する。ＴＶに表示する以外にもパー
ソナルコンピュータにとりこんで種々の用途に用いる場
合もあり、その時は、上記の画素数及びフレームレート
までは必要としない場合がある。例えば、３２０×２４
０画素、３０フレーム／秒でも十分な場合もある。しか
し、この程度の動画像でも、無圧縮では８ビット取り込
みで、１８Ｍｂｐｓの転送レートを必要とする。
て具体的に説明する。図３〜図５は、一連の画像の時間
軸上の流れの模式図を示す。図３は、撮影画像の時間軸
上の流れを示す模式図である。ＮＴＳＣ方式では、７２
０×４８０画素程度の画像をインターレースして６０フ
ィールド／秒で取り込む。サンプリング周波数は、輝度
信号が１３．５ＭＨｚ、色差信号Ｒ−Ｙ、Ｂ−Ｙがそれ
ぞれ６．７５ＭＨｚであり、色差信号のサンプリング周
波数を１／２に間引いて４：１：１コンポーネント信号
にした後、情報圧縮する。ＴＶに表示する以外にもパー
ソナルコンピュータにとりこんで種々の用途に用いる場
合もあり、その時は、上記の画素数及びフレームレート
までは必要としない場合がある。例えば、３２０×２４
０画素、３０フレーム／秒でも十分な場合もある。しか
し、この程度の動画像でも、無圧縮では８ビット取り込
みで、１８Ｍｂｐｓの転送レートを必要とする。
【００１２】４：１：１コンポーネント信号を各フレー
ムにつき１／１０程度にＪＰＥＧ方式で圧縮した場合
で、１フレームあたりの映像情報は約１２Ｋバイトの容
量となる。これでも、１秒間では０．４Ｍバイト、１分
間で２１Ｍバイト強のデータ量になり、記録できる画像
数（又は時間）を多く（又は長く）できない。もっと
も、この状態では各フレームがフレーム内圧縮画像（イ
ントラ画像）であるから、単独フレームのみで伸長表示
が可能である。即ち、ランダム再生が容易である。記録
媒体としては、半導体メモリ、磁気ディスク、光ディス
ク、ハードディスク等、数多くあるが、現時点で高速書
き込み可能、小型、大容量及び安価というすべての条件
を満足するものはない。
ムにつき１／１０程度にＪＰＥＧ方式で圧縮した場合
で、１フレームあたりの映像情報は約１２Ｋバイトの容
量となる。これでも、１秒間では０．４Ｍバイト、１分
間で２１Ｍバイト強のデータ量になり、記録できる画像
数（又は時間）を多く（又は長く）できない。もっと
も、この状態では各フレームがフレーム内圧縮画像（イ
ントラ画像）であるから、単独フレームのみで伸長表示
が可能である。即ち、ランダム再生が容易である。記録
媒体としては、半導体メモリ、磁気ディスク、光ディス
ク、ハードディスク等、数多くあるが、現時点で高速書
き込み可能、小型、大容量及び安価というすべての条件
を満足するものはない。
【００１３】ＭＰＥＧ方式ように、高圧縮した状態で記
録媒体に書き込むようにすれば、記録媒体に対する転送
レートも低下するし、記録時間も飛躍的に増大する。図
４はＭＰＥＧ圧縮の場合の画像情報の時系列を示す。図
３に示す一連の画像情報を動画処理用フレーム・メモリ
に一時格納し、動画像圧縮伸長回路がリアルタイムに時
間軸方向のフレーム間相関をとって、圧縮する。
録媒体に書き込むようにすれば、記録媒体に対する転送
レートも低下するし、記録時間も飛躍的に増大する。図
４はＭＰＥＧ圧縮の場合の画像情報の時系列を示す。図
３に示す一連の画像情報を動画処理用フレーム・メモリ
に一時格納し、動画像圧縮伸長回路がリアルタイムに時
間軸方向のフレーム間相関をとって、圧縮する。
【００１４】図４では、動画撮影中のある１０フレーム
だけを取り出して示している。フレーム上にあてられた
番号は、圧縮の処理順を示すフレーム番号である。
だけを取り出して示している。フレーム上にあてられた
番号は、圧縮の処理順を示すフレーム番号である。
【００１５】第１フレームはイントラ画像と呼ばれ、す
べてのブロック情報はフレーム内で情報圧縮される。図
３のフレーム（ａ）と同一であると考えれば良い。図３
のフレーム（ｂ），（ｃ）は、フレーム・メモリに一時
格納され、まずフレーム（ｄ）が圧縮される。フレーム
（ｄ）は、第１フレームを参照フレーム又は基準フレー
ムとして差分符号化される。この時、ブロック単位ごと
に動き成分が少なければ単なる差分値でも良いが、必要
なら動きベクトルから動き補償を行なって圧縮符号化し
ても良い。
べてのブロック情報はフレーム内で情報圧縮される。図
３のフレーム（ａ）と同一であると考えれば良い。図３
のフレーム（ｂ），（ｃ）は、フレーム・メモリに一時
格納され、まずフレーム（ｄ）が圧縮される。フレーム
（ｄ）は、第１フレームを参照フレーム又は基準フレー
ムとして差分符号化される。この時、ブロック単位ごと
に動き成分が少なければ単なる差分値でも良いが、必要
なら動きベクトルから動き補償を行なって圧縮符号化し
ても良い。
【００１６】第３及び第４フレームは、図３のフレーム
（ｂ），（ｃ）を、第１及び第２フレームの双方向から
の予測の下でフレーム相関圧縮される。図中、矢印は、
フレーム間圧縮の参照関係を示す。
（ｂ），（ｃ）を、第１及び第２フレームの双方向から
の予測の下でフレーム相関圧縮される。図中、矢印は、
フレーム間圧縮の参照関係を示す。
【００１７】図３の場合はいわば静止画の連続である
が、モーションＪＰＥＧ方式で圧縮して記録する場合、
記録容量を考慮すると、解像度を３２０×２４０画素程
度にしなければならず、静止画として表示又はプリント
アウトするには、画質的に充分とは言いがたい。今、フ
レーム（ｅ）がユーザの意図した静止画フレームだとす
ると、これに相当する図４の第６フレームはイントラ画
像ではないので、これを再生しようとしても、このフレ
ームのみでは伸長できない。
が、モーションＪＰＥＧ方式で圧縮して記録する場合、
記録容量を考慮すると、解像度を３２０×２４０画素程
度にしなければならず、静止画として表示又はプリント
アウトするには、画質的に充分とは言いがたい。今、フ
レーム（ｅ）がユーザの意図した静止画フレームだとす
ると、これに相当する図４の第６フレームはイントラ画
像ではないので、これを再生しようとしても、このフレ
ームのみでは伸長できない。
【００１８】そこで、動画記録中に静止画記録要求のあ
ったフレーム（例えば、フレーム（ｅ））については、
図５に示すように、より高い解像度、例えば６４０×４
８０画素で静止画として、即ち単独フレームで情報圧縮
する方法が考えられる。
ったフレーム（例えば、フレーム（ｅ））については、
図５に示すように、より高い解像度、例えば６４０×４
８０画素で静止画として、即ち単独フレームで情報圧縮
する方法が考えられる。
【００１９】しかし、動画の画素サイズの４倍の情報量
となるので、圧縮処理に多くの時間を要する。動画の圧
縮処理能力が最大限で秒間３０フレーム処理とすれば、
静止画の割り込みによって、単純には４倍の情報量を１
／３０秒の間で処理すべきところを、４／３０秒、即ち
動画４フレーム分の時間を費すこととなる。従って、割
り込み同時処理では、図５に点線で示すように、高精細
静止画に続く動画が３フレーム分欠落してしまう。
となるので、圧縮処理に多くの時間を要する。動画の圧
縮処理能力が最大限で秒間３０フレーム処理とすれば、
静止画の割り込みによって、単純には４倍の情報量を１
／３０秒の間で処理すべきところを、４／３０秒、即ち
動画４フレーム分の時間を費すこととなる。従って、割
り込み同時処理では、図５に点線で示すように、高精細
静止画に続く動画が３フレーム分欠落してしまう。
【００２０】即ち、動画処理中に高精細静止画処理を割
り込ませるだけでは、高精細静止画処理が高精細故に圧
縮処理に時間がかかるので、動画のフレームレートが落
ちる等の所謂コマ落ちが発生してしまう。当然ながら、
高精細な静止画を動画のフレームレート内で高速処理で
きればよいが、撮像装置の構成が複雑になると同時に、
動画撮影中の動画圧縮処理で圧縮処理能力を最大限には
活用していないことになり、無駄が多い。
り込ませるだけでは、高精細静止画処理が高精細故に圧
縮処理に時間がかかるので、動画のフレームレートが落
ちる等の所謂コマ落ちが発生してしまう。当然ながら、
高精細な静止画を動画のフレームレート内で高速処理で
きればよいが、撮像装置の構成が複雑になると同時に、
動画撮影中の動画圧縮処理で圧縮処理能力を最大限には
活用していないことになり、無駄が多い。
【００２１】本発明は、このような問題点を解決する画
像処理装置及び方法を提示することを目的とする。
像処理装置及び方法を提示することを目的とする。
【００２２】
【課題を解決するための手段】本発明では、入力された
動画像を第１の圧縮手段（又は条件）で圧縮処理した
後、記録媒体に記録すると共に、当該動画像中の所望の
少なくとも１フレーム以上の静止画像を内部フレーム・
メモリに一時格納し、動画像記録中又は動画像記録終了
後に第２の圧縮手段（又は条件）で圧縮処理した後、当
該記録媒体に記録する。
動画像を第１の圧縮手段（又は条件）で圧縮処理した
後、記録媒体に記録すると共に、当該動画像中の所望の
少なくとも１フレーム以上の静止画像を内部フレーム・
メモリに一時格納し、動画像記録中又は動画像記録終了
後に第２の圧縮手段（又は条件）で圧縮処理した後、当
該記録媒体に記録する。
【００２３】これにより、動画記録をコマ落ちさせず
に、所望のフレームを静止画として記録できる。
に、所望のフレームを静止画として記録できる。
【００２４】
【発明の実施の形態】以下、図面を参照して、本発明の
実施の形態を詳細に説明する。
実施の形態を詳細に説明する。
【００２５】図１は、本発明の一実施例の概略構成ブロ
ック図を示す。１０はＣＣＤ撮像素子、１２は撮像素子
１０のアナログ出力をディジタル信号に変換するＡ／Ｄ
変換器、１４は、Ａ／Ｄ変換器１２の出力データを輝度
データと色差データに分離してコンポーネント信号を生
成するディジタル信号処理回路である。Ａ／Ｄ変換器１
２及びディジタル信号処理回路１４からなる部分をカメ
ラ信号処理回路１６と呼ぶことにする。
ック図を示す。１０はＣＣＤ撮像素子、１２は撮像素子
１０のアナログ出力をディジタル信号に変換するＡ／Ｄ
変換器、１４は、Ａ／Ｄ変換器１２の出力データを輝度
データと色差データに分離してコンポーネント信号を生
成するディジタル信号処理回路である。Ａ／Ｄ変換器１
２及びディジタル信号処理回路１４からなる部分をカメ
ラ信号処理回路１６と呼ぶことにする。
【００２６】１８は、フレーム・メモリ２０を利用して
画像信号を動画像圧縮伸長処理する動画像圧縮伸長回
路、２２は、フレーム・メモリ２４を利用して画像情報
を静止画像圧縮伸長処理する静止画像圧縮伸長回路であ
る。
画像信号を動画像圧縮伸長処理する動画像圧縮伸長回
路、２２は、フレーム・メモリ２４を利用して画像情報
を静止画像圧縮伸長処理する静止画像圧縮伸長回路であ
る。
【００２７】２６は全体を制御するシステム制御回路、
２８は撮影画像情報を記録する最終的な記録媒体、３０
は記録媒体２８をシステム制御回路２６に接続するイン
ターフェースである。３２は電子ビューファインダ（又
は光学式ファインダ）、３２は映像／音声の外部出力端
子である。
２８は撮影画像情報を記録する最終的な記録媒体、３０
は記録媒体２８をシステム制御回路２６に接続するイン
ターフェースである。３２は電子ビューファインダ（又
は光学式ファインダ）、３２は映像／音声の外部出力端
子である。
【００２８】３６は、連続撮影用トリガー３８及び静止
画撮影要求用レリーズ４０を具備する操作キー、４２は
撮影コマ数及び記録メモリの残量等を表示する表示器、
４４は電源回路である。
画撮影要求用レリーズ４０を具備する操作キー、４２は
撮影コマ数及び記録メモリの残量等を表示する表示器、
４４は電源回路である。
【００２９】図１に示す実施例の基本動作を説明する。
連続撮影用トリガー３８により連続撮影が指示される
と、カメラ信号処理回路１６の出力画像は、動画用フレ
ーム・メモリ２０に一時記憶され、動画像圧縮伸長回路
１８によりモーションＪＰＥＧ方式で圧縮されて、記録
媒体２８に記録される。
連続撮影用トリガー３８により連続撮影が指示される
と、カメラ信号処理回路１６の出力画像は、動画用フレ
ーム・メモリ２０に一時記憶され、動画像圧縮伸長回路
１８によりモーションＪＰＥＧ方式で圧縮されて、記録
媒体２８に記録される。
【００３０】連続撮影中に静止画用レリーズ４０が操作
されると（即ち、静止が撮影要求が入力されると）、シ
ステム制御回路２６は、動画像圧縮伸長回路１８による
動画像圧縮と記録媒体２８への記録を続行しながら、該
当するフレームの画像情報をフレーム・メモリ２４に格
納すると共に、静止画撮影フラグを記録媒体２８に書き
込む。そして、連続撮影終了と共に、システム制御回路
２６は、静止画用フレーム・メモリ２４から画像情報を
読み出し、静止画像圧縮伸長回路２２により静止画圧縮
して、記録媒体２８の、動画記録領域とは別の領域に記
録する。動画に比べれば、リアルタイム性は必要とされ
ないので、静止画像圧縮伸長回路２２の静止画圧縮に多
少時間がかかってもよい。
されると（即ち、静止が撮影要求が入力されると）、シ
ステム制御回路２６は、動画像圧縮伸長回路１８による
動画像圧縮と記録媒体２８への記録を続行しながら、該
当するフレームの画像情報をフレーム・メモリ２４に格
納すると共に、静止画撮影フラグを記録媒体２８に書き
込む。そして、連続撮影終了と共に、システム制御回路
２６は、静止画用フレーム・メモリ２４から画像情報を
読み出し、静止画像圧縮伸長回路２２により静止画圧縮
して、記録媒体２８の、動画記録領域とは別の領域に記
録する。動画に比べれば、リアルタイム性は必要とされ
ないので、静止画像圧縮伸長回路２２の静止画圧縮に多
少時間がかかってもよい。
【００３１】本実施例では、記録媒体２８は例えば、カ
ードタイプのフラッシュメモリであるが、これに限ら
ず、ハードディスク、光ディスク、、光磁気ディスク、
及び磁気ディスクメモリ等であってもよい。
ードタイプのフラッシュメモリであるが、これに限ら
ず、ハードディスク、光ディスク、、光磁気ディスク、
及び磁気ディスクメモリ等であってもよい。
【００３２】再生時には、記録媒体２８から動画像情報
を読み出し、順次、動画像圧縮伸長回路１８により伸長
する。途中、静止画フレーム撮影フラグを検知した時
は、記録媒体２８の別領域に記録されている高精細静止
画データを読み出し、静止画像圧縮伸長回路２２により
伸長する。
を読み出し、順次、動画像圧縮伸長回路１８により伸長
する。途中、静止画フレーム撮影フラグを検知した時
は、記録媒体２８の別領域に記録されている高精細静止
画データを読み出し、静止画像圧縮伸長回路２２により
伸長する。
【００３３】図３、図４及び図５を参照して、本実施例
の特徴的な動作を具体的に説明する。図３はいわば、カ
メラ信号処理回路１６から出力される画像の時間軸上の
流れを示す模式図と見ることが出来る。動画像圧縮伸長
回路１８は、図３に示す一連の画像情報を動画処理用フ
レーム・メモリ２０に一時格納し、リアルタイムに時間
軸方向のフレーム間相関をとって、圧縮する。
の特徴的な動作を具体的に説明する。図３はいわば、カ
メラ信号処理回路１６から出力される画像の時間軸上の
流れを示す模式図と見ることが出来る。動画像圧縮伸長
回路１８は、図３に示す一連の画像情報を動画処理用フ
レーム・メモリ２０に一時格納し、リアルタイムに時間
軸方向のフレーム間相関をとって、圧縮する。
【００３４】本実施例では、動画記録中に静止画記録要
求のあったフレーム（例えば、フレーム（ｅ））につい
ては、４倍の情報量の高精細静止画を、一旦、フレーム
・メモリ２４にそのままで格納し又は、短時間で済む前
処理程度で格納し、動画のリアルタイム圧縮を優先処理
させる。動画撮影を終了した後、フレーム・メモリ２４
から静止画データを読み出し、静止画像圧縮伸長回路２
２により圧縮して記録媒体２８の静止画記録領域に書き
込む。フレーム・メモリ２４は、静止画を複数枚分、格
納できることが望ましい。
求のあったフレーム（例えば、フレーム（ｅ））につい
ては、４倍の情報量の高精細静止画を、一旦、フレーム
・メモリ２４にそのままで格納し又は、短時間で済む前
処理程度で格納し、動画のリアルタイム圧縮を優先処理
させる。動画撮影を終了した後、フレーム・メモリ２４
から静止画データを読み出し、静止画像圧縮伸長回路２
２により圧縮して記録媒体２８の静止画記録領域に書き
込む。フレーム・メモリ２４は、静止画を複数枚分、格
納できることが望ましい。
【００３５】さらに望ましくは、動画記録中に、フレー
ム・メモリ２４から静止画データをゆっくり読みだし、
動画のリアルタイム圧縮処理を阻害しない時間範囲内で
同一の記録媒体２８又は別の記録媒体に記録するように
すれば、フレーム・メモリ２４に新たな静止画フレーム
を取り込む余裕ができる。これにより、フレーム・メモ
リ２４を節約できる。
ム・メモリ２４から静止画データをゆっくり読みだし、
動画のリアルタイム圧縮処理を阻害しない時間範囲内で
同一の記録媒体２８又は別の記録媒体に記録するように
すれば、フレーム・メモリ２４に新たな静止画フレーム
を取り込む余裕ができる。これにより、フレーム・メモ
リ２４を節約できる。
【００３６】図２は、本発明の変更実施例の概略構成ブ
ロック図を示す。図１と同じ構成要素には同じ符号を付
してある。動画像圧縮伸長回路１８に代わる動画像圧縮
伸長回路５０は、ＤＣＴ回路５０ａ、量子化回路５０
ｂ、可変長符号化回路５０ｃ、逆ＤＣＴ回路５０ｄ、逆
量子化回路５０ｅ、可変長復号化回路５０ｆ及び動き補
償回路５０ｇからなる。また、静止画像圧縮伸長回路２
２に代わる静止画像圧縮伸長回路５２は、ＤＣＴ回路５
２ａ、量子化回路５２ｂ、可変長符号化回路５２ｃ、逆
ＤＣＴ回路５２ｄ、逆量子化回路５２ｅ及び可変長復号
化回路５２ｆからなり、２つのフレーム・メモリ５４
ａ，５４ｂを利用する。本実施例には、２つの記録媒体
５６，５８があり、記録媒体５６は磁気テープからな
り、記録媒体５８は、高速に書き込みできる半導体メモ
リ、例えば、フラッシュ・メモリからなる。６０は、動
画像圧縮伸長回路５０、静止画像圧縮伸長回路５２並び
に記録媒体５６，５８への書込み及び読み出しを総合的
に制御する大規模ゲートアレイＣＰＵ、６２はＣＰＵ５
０と記録媒体５６，５８を接続するインターフェースで
ある。
ロック図を示す。図１と同じ構成要素には同じ符号を付
してある。動画像圧縮伸長回路１８に代わる動画像圧縮
伸長回路５０は、ＤＣＴ回路５０ａ、量子化回路５０
ｂ、可変長符号化回路５０ｃ、逆ＤＣＴ回路５０ｄ、逆
量子化回路５０ｅ、可変長復号化回路５０ｆ及び動き補
償回路５０ｇからなる。また、静止画像圧縮伸長回路２
２に代わる静止画像圧縮伸長回路５２は、ＤＣＴ回路５
２ａ、量子化回路５２ｂ、可変長符号化回路５２ｃ、逆
ＤＣＴ回路５２ｄ、逆量子化回路５２ｅ及び可変長復号
化回路５２ｆからなり、２つのフレーム・メモリ５４
ａ，５４ｂを利用する。本実施例には、２つの記録媒体
５６，５８があり、記録媒体５６は磁気テープからな
り、記録媒体５８は、高速に書き込みできる半導体メモ
リ、例えば、フラッシュ・メモリからなる。６０は、動
画像圧縮伸長回路５０、静止画像圧縮伸長回路５２並び
に記録媒体５６，５８への書込み及び読み出しを総合的
に制御する大規模ゲートアレイＣＰＵ、６２はＣＰＵ５
０と記録媒体５６，５８を接続するインターフェースで
ある。
【００３７】動画像圧縮伸長回路５０は、カメラ信号処
理回路１６からの６４０×４８０画素の画像データを、
動画像用フレーム・メモリ２０を利用して、画素変換、
間引き及びＤＣＴ処理等を行ない、さらに動き補償回路
５２ｇによる動きベクトルを用いてフレーム間相関圧縮
する。圧縮画像データは、磁気テープからなる記録媒体
５６に記録される。
理回路１６からの６４０×４８０画素の画像データを、
動画像用フレーム・メモリ２０を利用して、画素変換、
間引き及びＤＣＴ処理等を行ない、さらに動き補償回路
５２ｇによる動きベクトルを用いてフレーム間相関圧縮
する。圧縮画像データは、磁気テープからなる記録媒体
５６に記録される。
【００３８】動画撮影中の静止画記録は、以下のように
行なわれる。静止画レリーズ１６により指定されたフレ
ームの画像データは、静止画用フレーム・メモリ５４ａ
に６４０×４８０画素の解像度のまま取り込まれる。動
画撮影中に更に別の静止画フレームを取り込む場合に
は、その静止画は、第２のフレーム・メモリ５４ｂに格
納される。静止画圧縮伸長回路５２は静止画用フレーム
・メモリ５４ａ，５４ｂに格納される静止画を圧縮す
る。圧縮された画像データは、記録媒体５８に記録され
る。
行なわれる。静止画レリーズ１６により指定されたフレ
ームの画像データは、静止画用フレーム・メモリ５４ａ
に６４０×４８０画素の解像度のまま取り込まれる。動
画撮影中に更に別の静止画フレームを取り込む場合に
は、その静止画は、第２のフレーム・メモリ５４ｂに格
納される。静止画圧縮伸長回路５２は静止画用フレーム
・メモリ５４ａ，５４ｂに格納される静止画を圧縮す
る。圧縮された画像データは、記録媒体５８に記録され
る。
【００３９】本実施例では、静止画圧縮伸長回路５２を
ＣＰＵ６０とは別に設けることで、ＣＰＵ６０の負荷を
減らすことができ、静止画像の圧縮処理を高速に実行で
きる。勿論、ＣＰＵ６０の処理能力にもよるが、動画像
圧縮伸長回路５０及び静止画像圧縮伸長回路５２の機能
をソフトウエアによっても実現できることはいうまでも
ない。
ＣＰＵ６０とは別に設けることで、ＣＰＵ６０の負荷を
減らすことができ、静止画像の圧縮処理を高速に実行で
きる。勿論、ＣＰＵ６０の処理能力にもよるが、動画像
圧縮伸長回路５０及び静止画像圧縮伸長回路５２の機能
をソフトウエアによっても実現できることはいうまでも
ない。
【００４０】
【発明の効果】以上の説明から容易に理解できるよう
に、本発明によれば、動画像の質と量に適した形式で、
圧縮記録を簡易化し、かつ、動画撮影中の任意のフレー
ムを、動画をコマ落ちさせずに高精細に記録できる。
に、本発明によれば、動画像の質と量に適した形式で、
圧縮記録を簡易化し、かつ、動画撮影中の任意のフレー
ムを、動画をコマ落ちさせずに高精細に記録できる。
【００４１】さらに再生表示の時には、動画データ中の
静止画フレームフラグと静止画データとをリンクするこ
とで、静止画像からの動画シーンの頭出し、または逆
に、動画シーン中からの高精細静止画プリント等が容易
に行なえる。
静止画フレームフラグと静止画データとをリンクするこ
とで、静止画像からの動画シーンの頭出し、または逆
に、動画シーン中からの高精細静止画プリント等が容易
に行なえる。
【図１】 本発明の第１実施例の概略構成ブロック図で
ある。
ある。
【図２】 本発明の第２実施例の概略構成ブロック図で
ある。
ある。
【図３】 カメラ信号処理回路１６から出力される画像
情報を時系列で示す模式図である。
情報を時系列で示す模式図である。
【図４】 動画像圧縮される画像情報を時系列で示す模
式図である。
式図である。
【図５】 連続撮影中で静止画要求があった場合の、従
来例の圧縮結果を時系列で示す模式図である。
来例の圧縮結果を時系列で示す模式図である。
１０：ＣＣＤ撮像素子 １２：Ａ／Ｄ変換器 １４：ディジタル信号処理回路 １６：カメラ信号処理回路 １８：動画像圧縮伸長回路 ２０：動画像圧縮用フレーム・メモリ ２２：静止画像圧縮伸長回路 ２４：静止画圧縮用フレーム・メモリ ２６：システム制御回路 ２８：記録媒体 ３０：インターフェース ３２：電子ビューファインダ（又は光学式ファインダ） ３４：映像／音声の外部出力端子 ３６：操作キー ３８：連続撮影用トリガー ４０：静止画撮影要求用レリーズ ４２：表示器 ４４：電源回路 ５０：動画像圧縮伸長回路 ５０ａ：ＤＣＴ回路 ５０ｂ：量子化回路 ５０ｃ：可変長符号化回路 ５０ｄ：逆ＤＣＴ回路 ５０ｅ：逆量子化回路 ５０ｆ：可変長復号化回路 ５０ｇ：動き補償回路 ５２：静止画像圧縮伸長回路 ５２ａ：ＤＣＴ回路 ５２ｂ：量子化回路 ５２ｃ：可変長符号化回路 ５２ｄ：逆ＤＣＴ回路 ５２ｅ：逆量子化回路 ５２ｆ：可変長復号化回路 ５４ａ，５４ｂ：フレーム・メモリ ５６，５８：記録媒体 ６０：大規模ゲートアレイＣＰＵ ６２：インターフェース
Claims (12)
- 【請求項１】 入力された動画像を第１の圧縮手段で圧
縮処理した後、記録媒体に記録すると共に、当該動画像
中の所望の少なくとも１フレーム以上の静止画像を内部
フレーム・メモリに一時格納し、動画像記録終了後に第
２の圧縮手段で圧縮処理した後、当該記録媒体に記録す
ることを特徴とする画像処理装置。 - 【請求項２】 当該静止画像は、当該動画像に比較して
高精細画像である請求項１に記載の画像処理装置。 - 【請求項３】 当該記録媒体が、動画像を記録する第１
記録媒体と、静止画像を記録する第２記録媒体からなる
請求項１に記載の画像処理装置。 - 【請求項４】 入力された動画像を第１の圧縮手段で圧
縮処理した後、記録媒体に記録すると共に、当該動画像
中の所望の少なくとも１フレーム以上の静止画を内部フ
レーム・メモリに一時格納し、動画像記録中に第２の圧
縮手段で並列に圧縮処理した後、当該記録媒体に記録す
ることを特徴とする画像処理装置。 - 【請求項５】 当該静止画像は、当該動画像に比較して
高精細画像である請求項４に記載の画像処理装置。 - 【請求項６】 当該記録媒体が、動画像を記録する第１
記録媒体と、静止画像を記録する第２記録媒体からなる
請求項４に記載の画像処理装置。 - 【請求項７】 入力された動画像を第１の圧縮条件で圧
縮処理した後、記録媒体に記録する第１の圧縮記録ステ
ップと、 所定の指令に従い、当該動画像中の所望の少なくとも１
フレーム以上の静止画像を内部フレーム・メモリに一時
格納する一時格納ステップと、 当該内部フレーム・メモリに一時格納された静止画像
を、動画像記録終了後に第２の圧縮条件で圧縮処理した
後、当該記録媒体に記録する第２の圧縮記録ステップと
からなることを特徴とする画像処理方法。 - 【請求項８】 当該静止画像は、当該動画像に比較して
高精細画像である請求項７に記載の画像処理方法。 - 【請求項９】 当該記録媒体が、動画像を記録する第１
記録媒体と、静止画像を記録する第２記録媒体からなる
請求項７に記載の画像処理方法。 - 【請求項１０】 入力された動画像を第１の圧縮条件で
圧縮処理した後、記録媒体に記録する第１の圧縮記録ス
テップと、 当該動画像中の所望の少なくとも１フレーム以上の静止
画を内部フレーム・メモリに一時格納し、動画像記録中
に第２の圧縮条件で並列に圧縮処理した後、当該記録媒
体に記録する第２の圧縮記録ステップとからなることを
特徴とする画像処理方法。 - 【請求項１１】 当該静止画像は、当該動画像に比較し
て高精細画像である請求項１０に記載の画像処理方法。 - 【請求項１２】 当該記録媒体が、動画像を記録する第
１記録媒体と、静止画像を記録する第２記録媒体からな
る請求項１０に記載の画像処理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00154097A JP3902824B2 (ja) | 1997-01-08 | 1997-01-08 | 画像処理装置及び方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP00154097A JP3902824B2 (ja) | 1997-01-08 | 1997-01-08 | 画像処理装置及び方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH10200859A true JPH10200859A (ja) | 1998-07-31 |
| JP3902824B2 JP3902824B2 (ja) | 2007-04-11 |
Family
ID=11504366
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP00154097A Expired - Fee Related JP3902824B2 (ja) | 1997-01-08 | 1997-01-08 | 画像処理装置及び方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3902824B2 (ja) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001003431A1 (fr) * | 1999-07-05 | 2001-01-11 | Hitachi, Ltd. | Procede et dispositif d'enregistrement video, procede et dispositif de reproduction video, et support d'enregistrement |
| WO2001049026A1 (fr) * | 1999-12-24 | 2001-07-05 | Sanyo Electric Co., Ltd. | Camera numerique, dispositif de commande de memoire utilisable dans ce cas, procede et dispositif de traitement d'image |
| WO2003036967A1 (fr) * | 2001-10-25 | 2003-05-01 | Matsushita Electric Industrial Co., Ltd. | Appareil et procede de traitement de signaux video, programme et moyen d'enregistrement |
| JP2007202050A (ja) * | 2006-01-30 | 2007-08-09 | Nikon Corp | 画像生成装置および画像生成プログラム |
| US7432957B2 (en) | 2002-12-06 | 2008-10-07 | Casio Computer Co., Ltd. | Image pickup device with still picture pickup function during moving picture pickup operation |
-
1997
- 1997-01-08 JP JP00154097A patent/JP3902824B2/ja not_active Expired - Fee Related
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7995897B2 (en) | 1999-05-07 | 2011-08-09 | Hitachi, Ltd. | Video recording and reproducing method, and video reproducing apparatus and method |
| US6754440B2 (en) | 1999-07-05 | 2004-06-22 | Hitachi, Ltd. | Video reproducing method and apparatus |
| JP2009159615A (ja) * | 1999-07-05 | 2009-07-16 | Hitachi Ltd | 映像記録方法及び装置、映像再生方法及び装置、及び記録媒体 |
| US10349030B2 (en) | 1999-07-05 | 2019-07-09 | Maxell, Ltd. | Video recording and reproducing method, and video reproducing apparatus and method including thumbnails for moving pictures and still pictures |
| WO2001003431A1 (fr) * | 1999-07-05 | 2001-01-11 | Hitachi, Ltd. | Procede et dispositif d'enregistrement video, procede et dispositif de reproduction video, et support d'enregistrement |
| US9451229B2 (en) | 1999-07-05 | 2016-09-20 | Hitachi Maxell, Ltd. | Video recording and reproducing method, and video reproducing apparatus and method |
| US8417088B2 (en) | 1999-07-05 | 2013-04-09 | Hitachi, Ltd. | Video recording and reproducing method, and video reproducing apparatus and method |
| US6424795B1 (en) * | 1999-07-05 | 2002-07-23 | Hitachi, Ltd. | Method and apparatus for recording and reproducing video data, and recording medium |
| US7295767B2 (en) | 1999-07-05 | 2007-11-13 | Hitachi, Ltd. | Method and apparatus for recording and reproducing video data, and recording medium |
| US6856760B2 (en) | 1999-07-05 | 2005-02-15 | Hitachi, Ltd. | Recording medium |
| US7457529B2 (en) | 1999-07-05 | 2008-11-25 | Hitachi, Ltd. | Video recording method and apparatus |
| CN100388775C (zh) * | 1999-12-24 | 2008-05-14 | 三洋电机株式会社 | 数码相机、存储器控制设备、图像处理装置及其方法 |
| WO2001049026A1 (fr) * | 1999-12-24 | 2001-07-05 | Sanyo Electric Co., Ltd. | Camera numerique, dispositif de commande de memoire utilisable dans ce cas, procede et dispositif de traitement d'image |
| WO2003036967A1 (fr) * | 2001-10-25 | 2003-05-01 | Matsushita Electric Industrial Co., Ltd. | Appareil et procede de traitement de signaux video, programme et moyen d'enregistrement |
| US8482624B2 (en) | 2002-12-06 | 2013-07-09 | Casio Computer Co., Ltd. | Image pickup device with still picture pickup function during moving picture pickup operation |
| US7432957B2 (en) | 2002-12-06 | 2008-10-07 | Casio Computer Co., Ltd. | Image pickup device with still picture pickup function during moving picture pickup operation |
| JP2007202050A (ja) * | 2006-01-30 | 2007-08-09 | Nikon Corp | 画像生成装置および画像生成プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3902824B2 (ja) | 2007-04-11 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3787398B2 (ja) | 画像処理装置及びその方法 | |
| US6690881B1 (en) | Digital camera apparatus and recording method thereof | |
| US8120671B2 (en) | Digital camera for recording a still image while shooting a moving image | |
| JPH11316708A (ja) | データシーケンスの圧縮及び伸長におけるメモリ帯域幅を最小とさせるためのピクチャメモリマッピング | |
| US20020003573A1 (en) | Processing apparatus, image recording apparatus and image reproduction apparatus | |
| JP3348917B2 (ja) | 画像信号処理装置 | |
| US6661452B1 (en) | Digital camera capable of decreasing a required memory capacity | |
| JP3814565B2 (ja) | 記録装置 | |
| JP3902824B2 (ja) | 画像処理装置及び方法 | |
| JP4103276B2 (ja) | 画像記録装置および方法 | |
| JPH10276402A (ja) | 画像記録装置 | |
| JP4306035B2 (ja) | 符号化方法、符号化装置およびカメラ装置 | |
| JPH10108133A (ja) | 撮像装置及びその制御方法 | |
| JP2003018532A (ja) | 撮像装置 | |
| JP4001946B2 (ja) | 再生装置 | |
| JP3276858B2 (ja) | デジタルスチルカメラ | |
| JP3235917B2 (ja) | 画像記録再生装置 | |
| JPH10257422A (ja) | 画像記録再生装置 | |
| JP4293151B2 (ja) | 映像符号化方法及び映像記録装置 | |
| JPH08186791A (ja) | ビデオ記録装置 | |
| JP2006174025A (ja) | 動画静止画同時記録可能な撮像記録再生装置 | |
| JP2002112086A (ja) | カメラシステム、画像符号化装置および画像復号化装置 | |
| JP4359966B2 (ja) | 画像信号符号化装置、カメラ装置および記録方法 | |
| JP3745605B2 (ja) | 電子スチルカメラ | |
| JPH0564144A (ja) | 画像メモリ装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060810 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060829 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061023 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061219 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070105 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110112 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120112 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130112 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140112 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |