JP3564733B2 - Digital still video camera - Google Patents

Digital still video camera Download PDF

Info

Publication number
JP3564733B2
JP3564733B2 JP15430294A JP15430294A JP3564733B2 JP 3564733 B2 JP3564733 B2 JP 3564733B2 JP 15430294 A JP15430294 A JP 15430294A JP 15430294 A JP15430294 A JP 15430294A JP 3564733 B2 JP3564733 B2 JP 3564733B2
Authority
JP
Japan
Prior art keywords
compression
image data
image
video camera
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP15430294A
Other languages
Japanese (ja)
Other versions
JPH0775056A (en
Inventor
政央 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nikon Corp
Original Assignee
Nikon Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nikon Corp filed Critical Nikon Corp
Priority to JP15430294A priority Critical patent/JP3564733B2/en
Publication of JPH0775056A publication Critical patent/JPH0775056A/en
Application granted granted Critical
Publication of JP3564733B2 publication Critical patent/JP3564733B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Description

【0001】
【産業上の利用分野】
本発明は、デジタルスチルビデオカメラに関するものである。
【0002】
【従来の技術】
近年、CCD等の撮像手段を使用して静止画の撮影を行い、得られた画像データを半導体メモリを用いたメモリカードに記録するいわゆるデジタルスチルビデオカメラが普及しつつあるが、このようなデジタルスチルビデオカメラにおいては、撮影データを記録格納する前記メモリカードの有効利用を図るために、一般に、撮影画像データを圧縮してメモリカードに格納している。
【0003】
図5はこのような従来のデジタルスチルビデオカメラの構成の一例を示すブロック図であるが、同図において、501は後述の撮像部505に被写体像を結像させる撮影レンズ群、502は絞り、503は露光及び合焦のために被写体光を測光部及び焦点検出部に取り入れるためのミラー光学系、504はシャッタ、505は撮影レンズ群を介して取り入れられた被写体光を電気信号に変換する撮像部で、CCD等の撮像手段により構成される。
【0004】
506は撮像部505で光電変換された画像信号をデジタル信号に変換するA/D変換部、507はA/D変換部506でデジタル化された画像信号に対してホワイトバランス補正や、増幅、γ補正、輪郭強調などの一定の信号処理を施す信号処理部、508は信号処理部507で処理された画像信号を一時的に蓄えるバッファメモリ、509は画像データを圧縮する圧縮回路、510は圧縮回路により圧縮された画像データを記録するメモリカードである。
【0005】
また、515は焦点検出部、516は測光部、520は撮影動作を制御する制御部で、焦点検出部515、並びに測光部516からの出力信号に基づいて制御部520で合焦及び適正露光のための演算が行われ、該演算結果に基づいて前記撮影レンズ群501、並びに絞り502及びシャッタ504の駆動が制御され、これにより自動焦点及び自動露出が行われる。
【0006】
また、前記圧縮回路509での画像データの圧縮の度合い、すなわち圧縮率は不図示のマニュアルスイッチ等により予め選択されるもので、撮影者は該スイッチにより所望の圧縮率を選択して撮影を行う。
【0007】
【発明が解決しようとする課題】
ところで、近年、いわゆるコンパクトカメラのみならず一眼レフカメラの自動焦点化、自動露出化などにおいても見られるように、より簡単な操作で、より高画質の画像が得られるようにと、カメラの撮影操作の単純化、簡単化の傾向が著しい。
【0008】
このような状況にあって、前記のような従来のデジタルスチルビデオカメラにおいては、前述のように、撮影前にスイッチを操作してデータの圧縮率を選択しなければならないとの煩わしさがあった。
【0009】
一方、このような煩わしさをなくすために、前記A/D変換部506でデジタル化されバッファメモリ508に格納された画像データを解析して自動的に圧縮率を決定したり、或いは、バッファメモリ508から画像データを部分的に抽出してこれを圧縮し、その結果をフィードバックして圧縮を繰り返すことにより最適な圧縮率を決定するものもあるが、いずれのものも最適な圧縮率を算出するのに長時間を要するため迅速な撮影を行うことができず、また、圧縮率の決定に当たって圧縮回路を動作させる必要があるためそれだけ電力を消費してしまうとの問題があった。
【0010】
本発明は、かかる従来のデジタルスチルビデオカメラの問題を解決するためになされたもので、画像データの圧縮率を短時間で且つ少ない電力で自動的に求めることができるデジタルスチルビデオカメラを得ることを目的とする。
【0011】
【課題を解決するための手段】
前記目的を達成すべく、本願の請求項1に記載の発明は、被写体光を電気信号に変換する撮像手段と、該撮像手段上に被写体像を結像させる撮影光学系と、該撮影光学系を合焦させるための焦点検出手段と、前記撮像手段により光電変換された電気信号をデジタル信号に変換するアナログ−デジタル変換手段と、該アナログ−デジタル変換手段によりデジタル化された画像データを圧縮する圧縮手段と、該圧縮手段により圧縮された画像データを記録する記録手段とを備えたデジタルスチルビデオカメラにおいて、前記圧縮手段は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど前記データ圧縮手段の圧縮率を高く制御するように、前記出力信号に応じた圧縮率で前記画像データを圧縮するものであることを特徴とするデジタルスチルビデオカメラに係るものである。
【0015】
本願の請求項に記載の発明は、被写体光を電気信号に変換する撮像手段と、該撮像手段上に被写体像を結像させる撮影光学系と、該撮影光学系を合焦させるための焦点検出手段と、前記撮像手段により光電変換された電気信号をデジタル信号に変換するアナログ−デジタル変換手段と、該アナログ−デジタル変換手段によりデジタル化された画像データを圧縮する圧縮手段と、該圧縮手段により圧縮された画像データを記録する記録手段とを備えたデジタルスチルビデオカメラにおいて、前記撮像手段により撮像された被写体像の画質をほぼ保持したまで画像データを圧縮して前記記録媒体に格納する画質優先モードと、前記撮像手段により撮像された被写体像の画質にかかわらず画像データのデータ長がほぼ一定となるように画像データを圧縮するデータ長優先モードとを切り替えるモード選択手段を更に備えたものを提案している。
【0016】
そして、前記モード選択手段が、画質優先モードを選択している際は、前記圧縮手段は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を低く制御し、前記モード選択手段が、データ長優先モードを選択している際は、前記圧縮手段は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を高く制御するように、出力信号に応じた圧縮率で前記画像データを圧縮することを特徴とするデジタルスチルビデオカメラに係るものである。
【0017】
【作用】
前記のように構成された本発明において、前記撮影光学系により前記撮像手段上に被写体像が結像され、該撮像手段により被写体光が電気信号に変換される。この電気信号は、前記アナログ−デジタル変換手段によりデジタル信号に変換され、デジタル化された該画像データは、さらに前記圧縮手段により圧縮処理される。
【0018】
ここで、前記圧縮手段は、前記焦点検出手段からの出力信号に基づいて、該出力信号に対応した圧縮率で前記画像データを圧縮する。そして、該圧縮された画像データは、前記記録手段に記録される。
【0021】
請求項1に記載の発明においては、前記圧縮手段は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど前記データ圧縮手段の圧縮率を高く制御する。即ち、どのような画質を持つ画像データであっても一定のデータ長に圧縮して記録媒体に格納するため、記録媒体に格納できる画像のコマ数が常に一定となり、使い勝手が良い。
【0022】
更に、前記請求項に記載の発明においては、前記撮像手段により撮像された被写体像の画質をほぼ保持したまで画像データを圧縮して前記記録媒体に格納する画質優先モードと、前記撮像手段により撮像された被写体像の画質にかかわらず画像データのデータ長がほぼ一定となるように画像データを圧縮するデータ長優先モードとを切り替えるモード選択手段を更に備えている。
【0023】
このモード選択手段は、撮影者の必要に応じて自由に切え替えることのできるもので、撮影者が高画質な画像データを高画質な再生画像としたい場合には、モード選択手段を画質優先モードに切り替えるとよい。モード選択手段が画質優先モードを選択している際は、圧縮手段が、焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を低く制御するため、画質の品質が損なわれていない再生画像を得ることができる。
【0024】
また、撮影者が記録媒体に格納する画像データのコマ数を一定としたい場合には、モード選択手段をデータ長優先モードに切り替えるとよい。前記モード選択手段が、データ長優先モードを選択している際は、前記圧縮手段は、前記焦点検出内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を高く制御するため、撮像手段により撮像された被写体像の画質に関係なく1画面の画像データ長が一定となる。従って、記録媒体に格納される画像データのコマ数は一定となる。
【0025】
このように、本発明に係るデジタルスチルビデオカメラでは、焦点検出手段の出力信号に基づいて画像データの圧縮率を決定しているため、従来のデジタルスチルビデオカメラのように撮影前に撮像データの圧縮率を選択するためのスイッチ操作が不要となる。さらに、画像データ自体を解析して圧縮率を決定することもなく、また、適正な圧縮率を決定するために圧縮手段を動作させることもないため、短時間で且つ少ない電力で撮影画像データの適正な圧縮を行うことが可能となる。
【0026】
【実施例】
本発明の一実施例を図面に基づいて説明する。図1は本発明の一実施例に係るデジタルスチルビデオカメラの概略構成を示すブロック図であり、図2乃至図3は該デジタルスチルビデオカメラが備える構成の一部をさらに詳しく示すブロック図、図4は実施例のデジタルスチルビデオカメラの動作を示すフローチャートである。
【0027】
図1に示すように、本実施例に係るデジタルスチルビデオカメラは、図5に示した前記従来のデジタルスチルビデオカメラと同様に、撮影レンズ群101、絞り102、露光及び合焦のために被写体光を測光部116及び焦点検出部115に取り入れるためのミラー光学系103、シャッタ104、CCD等の撮像手段からなる撮像部105、画像信号をデジタル信号に変換するA/D変換部106、A/D変換部でデジタル化された画像信号に対してホワイトバランス補正や、増幅、γ補正、輪郭強調などの一定の信号処理を施す信号処理部107、信号処理部107で処理された画像信号を一時的に蓄えるバッファメモリ108、及び画像データを圧縮する圧縮処理部109を備える。
【0028】
また、焦点検出部115、測光部116、及び撮影動作を制御する制御部120を備え、該制御部120は、焦点検出部115、並びに測光部116からの出力信号に基づいて合焦及び適正露光のための演算を行い、該演算結果に基づいて前記撮影レンズ群101、並びに絞り102及びシャッタ104を駆動制御し、これにより自動焦点及び自動露出が行われる。そして、撮影画像データは、圧縮処理部109で圧縮された後メモリカード110に記録される。
【0029】
一方、本実施例に係るデジタルスチルビデオカメラは、前記従来のデジタルスチルビデオカメラと異なり、メモリカード110に撮影画像データを記録する際にデータ圧縮を行う前記圧縮処理部109は、前記焦点検出部115の出力信号に対応した圧縮率でデータ圧縮を行う。
【0030】
以下に、画質優先モードを選択している場合について説明する。圧縮処理部109は、デジタル画像データに対して周知の量子化演算および符号割当て演算を行い、画像データの圧縮演算を行なう。この圧縮処理部109は、量子化演算のための複数の量子化テーブル、具体的には3つの量子化テーブル(即ち、低圧縮率(L)、中圧縮率(M)および高圧縮率(H))を有しており、量子化テーブルのいずれかを選択することにより最終的なデータ圧縮率を定めている。
【0031】
圧縮率モードにおける画質優先モード、あるいはデータ長優先モードの選択は、外部操作スイッチにより行われる。図1の圧縮モード選択スイッチ123と圧縮係数選択スイッチ124とが双方オン(H)に切り換えられた時は、画質優先モードとなり、圧縮モード選択スイッチ123がオン(H)、圧縮係数選択スイッチ124がオフ(L)に切り換えられた時は、データ長優先モードとなり、モードの選択が可能である。
【0032】
ここで、画質優先モードとは、撮像部105により撮像された被写体像の画質をできるだけ保持したまま圧縮してメモリカード110に格納し、高画質な画像データについては再生画像の画質もできるだけ高画質なものにするモードである。従って、高画質な画像データについては、低圧縮率で圧縮してメモリカード110に格納するため、位置画面の画像データ長は一定しない。
【0033】
一方、データ長優先モードとは、撮像部105により撮像された被写体像の画質に関係なく1画面の画像データ長をできるだけ一定にしてメモリカード110に格納するモードである。従って、一枚のメモリカードに記録される画像のコマ数がいつでもほぼ同数になり、使い勝手が良い。
【0034】
すなわち、図1に示すように、本デジタルスチルビデオカメラは、公知の焦点検出部115からの光電変換素子の出力信号のうちある一定値以上の周波数成分を有する信号のみを通過させるハイパスフィルタ140と、該ハイパスフィルタ140を通過した信号を積分する積分器141と、該積分器141からの出力信号に基づいて圧縮率の選定を行う圧縮係数選定部142とを備えており、該圧縮係数選定部142からの出力信号に基づいて圧縮処理部109は画像データの圧縮を行う。以下、これらにつき説明する。
【0035】
先ず、図2は本実施例が備える前記公知の焦点検出部115の構成を示すものであるが、同図に示すように、前記図1に示したミラー光学系103からの被写体光は一次焦点面201に結像し、コンデンサレンズ202及び光学系203によってCCDラインセンサによる光電変換素子204に被写体像の任意の部分(一般には被写体エリアの中心部分)が入力される。そして、該CCDラインセンサによる光電変換素子204からの出力信号は、合焦演算のために制御部120に入力される一方、前記ハイパスフィルタ140に入力される。
【0036】
該ハイパスフィルタ140は、ある一定値以上の周波数成分を有する信号のみを通過させ、ハイパスフィルタ140を通過した信号は積分器141に入力される。積分器141は、制御部120からの指令に基づいて各画面ごとに所定の時間だけ前記ハイパスフィルタ140の出力信号を積分し、その結果を電圧値として圧縮係数選定部142に出力する。
【0037】
該圧縮係数選定部142の構成を図3に示すが、同図において、342が前記圧縮係数選定部142であり、341は前記積分器141、309は前記圧縮処理部109である。図示のように、圧縮係数選定部342は、2つのコンパレータ342a、342bと、該2つのコンパレータ342a、342bにそれぞれ接続された基準電圧発生器343a、343bとを備えている。基準電圧発生器343a、343bは、カメラ内の基準電圧VCCからそれぞれA[V]、B[V](A>B)の基準電圧を発生する。
【0038】
コンパレータ342aには、積分器341の出力電圧V が加算されて入力され、基準電圧発生器343aからの基準電圧A[V]が減算されて入力される。同様に、コンパレータ342bには、積分器341の出力電圧V が加算されて入力され、基準電圧発生器343bからの基準電圧B[V]が減算されて入力される。そして、コンパレータ342a、342bの出力は、圧縮処理部309の入力ポートP 、P にそれぞれ入力され、圧縮処理部309はこの入力ポートP 、P の状態に対応する圧縮係数により画像データの圧縮を行う。
【0039】
すなわち、前記積分器141(341)の出力電圧V と基準電圧A[V]とが、V >Aとの関係にある(高周波成分が多い)場合には、入力ポートの状態P /P は、H/Hとなり、この場合には圧縮処理部109(309)は圧縮係数L(低圧縮率)により圧縮を行う。
【0040】
A≧V ≧Bとの関係にある場合には、入力ポートの状態P /P は、L/Hとなり、圧縮処理部109(309)は圧縮係数M(中圧縮率)により圧縮を行う。
【0041】
また、B>V との関係にある(高周波成分が少ない)場合には、入力ポートの状態P /P は、L/Lとなり、圧縮処理部109(309)は圧縮係数H(高圧縮率)により圧縮を行う。
【0042】
一方、データ長優先モードの場合には、前記積分器141(341)の出力電圧V と、基準電圧A[V]とが、V >Aとの関係にある(高周波成分が多い)場合には、入力ポートの状態P /P は、H/Hとなり、この場合には圧縮処理部109(309)は圧縮係数H(高圧縮率)により圧縮を行う。
【0043】
A≧V ≧Bとの関係にある場合には、入力ポートの状態P /P は、L/Hとなり、圧縮処理部109(309)は圧縮係数M(中圧縮率)により圧縮を行う。
【0044】
また、B>V との関係にある(高周波成分が少ない)場合には、入力ポートの状態P /P は、L/Lとなり、圧縮処理部109(309)は圧縮係数L(低圧縮率)により圧縮を行う。
【0045】
このように、本第3の実施例のカメラでは、データ長優先モードの場合には、積分器141(341)の出力電圧V が高くなるほど、すなわち、高周波成分が多ければ多いほど圧縮率が高くなるように選定されるため、例えば、高周波成分が多い細かい画像に対しても自動的に高い圧縮率により画像データ圧縮が行なわれる。
【0046】
又、画質優先モードを選択している場合では、積分器141の出力電圧V が高くなるほど、すなわち、高周波成分が多ければ多いほど圧縮率が低くなるように選定されるため、例えば、高周波成分が多い細かい画像に対しては自動的に低い圧縮率により画像データ圧縮が行われる。
【0047】
なお、本カメラには、前述のような圧縮係数選定部142などにより自動的に圧縮率を決定して圧縮を行う「圧縮オートモード」と、前記従来のカメラのように使用者がスイッチ操作により圧縮率の選定を行う「圧縮マニュアルモード」との2種類のモードを備えており、このモードの切換は、圧縮モード選択スイッチ123により指示される。
【0048】
すなわち、該圧縮モード選択スイッチ123が閉成されていれば、圧縮マニュアルモードとなり、圧縮係数選定スイッチ124、125のオン・オフにより3種類の圧縮係数(低圧縮係数L、中圧縮係数M、高圧縮係数H)が選択され、該圧縮係数により画像データが圧縮される。一方、前記圧縮モード選択スイッチ123が開成されていれば、圧縮オートモードとなり、前記圧縮係数選定部142などにより自動的に圧縮係数が選定され、該選定された圧縮係数で画像データが圧縮される。
【0049】
次に、本実施例のカメラの動作を図1、図3、及び図4を参照して説明する。本実施例のカメラにおいては、レリーズボタンの所謂半押し動作により撮影準備動作が開始される。すなわち、図4のステップ401で半押しスイッチ121が閉成されるとステップ402乃至ステップ403で測光及び焦点検出動作が行われ、ステップ404で前記圧縮モード選択スイッチ123が閉成されていればステップ405で使用者により設定された圧縮係数の読み込みが行われる。
【0050】
一方、前記圧縮モード選択スイッチ123が開成されていれば、ステップ406により前述のように画像に応じた適正な圧縮係数が自動的に選定される。
【0051】
そして、ステップ407で全押しスイッチ122が閉成すれば、ステップ410で一連の撮影動作が行われ、ステップ411で前記読み込み又は選定された圧縮係数で画像データが圧縮され、ステップ412で該画像データがメモリカード110に記録され、撮影を終了する。
【0052】
一方、前記ステップ407で全押しスイッチ122が開成されたままであれば、ステップ408に進行し、前記半押しスイッチ121が閉成されていれば前記ステップ402乃至ステップ407が再び繰り返される。また、前記ステップ408で半押しスイッチ121が開成されている場合には、ステップ409により、一定時間経過後、前記撮影準備動作が終了される。
【0053】
以上のように、本実施例のデジタルスチルビデオカメラでは、焦点検出部115の光電変換素子からの出力信号の高周波成分に基づいて圧縮処理部109により画像データの圧縮係数を自動的に選定しているので、デジタル画像データの性状により、または一部の画像データを抽出して圧縮回路を動作させ、そのときのデータ長からデータの圧縮係数を選定していた従来のカメラに比較して、圧縮係数選定作業を高速に行うことができる。
【0054】
これにより撮影動作の開始からメモリカードへの画像データの格納までの時間を従来より短縮することができ、高速連写が可能となる。また、圧縮係数選定のためにA/D変換器やバッファメモリ、圧縮回路を動作させる必要がないため、電力を浪費することもなくなる。
【0055】
なお、前記実施例では、一連の撮影動作は、所謂シングルモード(単写)撮影について説明を行ったが、コンティニアスモード(連写)撮影の場合には、該撮影期間中も測光及び焦点検出動作が行われるため、該撮影期間中に前記圧縮係数を変化させるように構成してもよいし、或いは、連写中は圧縮係数を固定するようにしてもよい。また、以上、本実施例で説明してきた圧縮係数は、圧縮処理部における公知である量子化テーブルの選択であると考えてよい。
【0056】
【発明の効果】
以上説明したとおり、本発明によれば、画像データの圧縮率を短時間で且つ少ない電力で自動的に求めることが可能なデジタルスチルビデオカメラを実現できる。
【図面の簡単な説明】
【図1】本発明の一実施例に係るデジタルスチルビデオカメラの概略構成を示すブロック図である。
【図2】本発明の一実施例に係るデジタルスチルビデオカメラが備える測距手段の構成を示すブロック図である。
【図3】本発明の一実施例に係るデジタルスチルビデオカメラが備える圧縮係数選定部の構成を示すブロック図である。
【図4】本発明の一実施例に係るデジタルスチルビデオカメラの動作を示すフローチャートである。
【図5】従来のデジタルスチルビデオカメラの概略構成を示すブロック図である。
【符号の説明】
101、501 撮影レンズ群
102、502 絞り
103、503 ミラー光学系
104、504 シャッタ
105、505 撮像部
106、506 A/D変換部
107、507 信号処理部
108、508 バッファメモリ
109、309、509 圧縮処理部
110、510 メモリカード
115、515 焦点検出部
116、516 測光部
120、520 制御部
121 半押しスイッチ(レリーズ)
122 全押しスイッチ(レリーズ)
123 圧縮モード選択スイッチ
124、125 圧縮係数選定スイッチ
140 ハイパスフィルタ
141、341 積分器
142、342 圧縮係数選定部
201 一次焦点面
202 コンデンサレンズ
203 光学系
204 CCDラインセンサ部
342a、342b コンパレータ
343a、343b 基準電圧発生器
[0001]
[Industrial applications]
The present invention relates to a digital still video camera.
[0002]
[Prior art]
In recent years, a so-called digital still video camera, which captures a still image using an imaging means such as a CCD and records the obtained image data on a memory card using a semiconductor memory, is becoming popular. In a still video camera, photographed image data is generally compressed and stored in a memory card in order to effectively use the memory card for recording and storing photographed data.
[0003]
FIG. 5 is a block diagram showing an example of the configuration of such a conventional digital still video camera. In FIG. 5, reference numeral 501 denotes a photographing lens group for forming a subject image on an image pickup unit 505 described later; Reference numeral 503 denotes a mirror optical system for taking in the subject light into a photometry unit and a focus detection unit for exposure and focusing, 504 a shutter, and 505 an image pickup for converting the subject light taken in through a photographic lens group into an electric signal. And an image pickup means such as a CCD.
[0004]
Reference numeral 506 denotes an A / D conversion unit that converts the image signal photoelectrically converted by the imaging unit 505 into a digital signal. Reference numeral 507 denotes white balance correction, amplification, and γ for the image signal digitized by the A / D conversion unit 506. A signal processing unit for performing certain signal processing such as correction and contour enhancement; 508, a buffer memory for temporarily storing the image signal processed by the signal processing unit 507; 509, a compression circuit for compressing image data; Is a memory card for recording image data compressed by a.
[0005]
Reference numeral 515 is a focus detection unit, 516 is a photometry unit, and 520 is a control unit for controlling a shooting operation. Based on output signals from the focus detection unit 515 and the photometry unit 516, the control unit 520 performs focusing and proper exposure. The driving of the photographing lens group 501, the aperture 502 and the shutter 504 is controlled based on the calculation result, whereby the automatic focusing and the automatic exposure are performed.
[0006]
The degree of compression of the image data in the compression circuit 509, that is, the compression ratio is previously selected by a manual switch or the like (not shown), and the photographer selects a desired compression ratio with the switch and performs photographing. .
[0007]
[Problems to be solved by the invention]
By the way, in recent years, as can be seen not only in so-called compact cameras but also in auto-focusing and auto-exposure of single-lens reflex cameras, camera shooting has been carried out so that higher quality images can be obtained with simpler operations. There is a remarkable tendency to simplify and simplify operations.
[0008]
In such a situation, in the conventional digital still video camera as described above, as described above, there is an annoyance that the user has to operate a switch to select a data compression ratio before shooting. Was.
[0009]
On the other hand, in order to eliminate such inconvenience, the image data digitized by the A / D converter 506 and stored in the buffer memory 508 is analyzed to automatically determine the compression ratio, or In some cases, the image data is partially extracted from the image data 508, the image data is compressed, the result is fed back, and the compression is repeated to determine the optimum compression ratio. In any case, the optimum compression ratio is calculated. It takes a long time to perform this operation, so that it is not possible to take a picture quickly. In addition, it is necessary to operate a compression circuit to determine the compression ratio, which consumes power.
[0010]
The present invention has been made to solve the problem of the conventional digital still video camera, and provides a digital still video camera capable of automatically determining the compression ratio of image data in a short time and with low power. With the goal.
[0011]
[Means for Solving the Problems]
In order to achieve the above object, the invention according to claim 1 of the present application is directed to an image pickup unit that converts a subject light into an electric signal, a photographing optical system that forms a subject image on the image pickup unit, and the photographing optical system. Focus detection means for focusing the image, analog-to-digital conversion means for converting an electric signal photoelectrically converted by the imaging means into a digital signal, and compressing image data digitized by the analog-to-digital conversion means In a digital still video camera including a compression unit and a recording unit that records image data compressed by the compression unit, the compression unit includes a high-frequency component included in an output signal of a photoelectric conversion element in the focus detection unit. this is intended the amount of higher to increase a compression ratio of the data compressor often, to compress the image data at a compression rate in accordance with the output signal Those of the digital still video camera according to claim.
[0015]
According to a second aspect of the present invention, there is provided an imaging unit for converting subject light into an electric signal, a photographic optical system for forming a subject image on the imaging unit, and a focus for focusing the photographic optical system. Detecting means, analog-to-digital conversion means for converting an electric signal photoelectrically converted by the imaging means into a digital signal, compression means for compressing image data digitized by the analog-to-digital conversion means, and compression means And a recording means for recording image data compressed by a digital still video camera, wherein image quality is reduced by compressing image data until the image quality of a subject image captured by the image capturing means is substantially maintained. Priority mode and image data such that the data length of the image data is substantially constant irrespective of the image quality of the subject image picked up by the image pickup means. It has proposed that further comprising a mode selecting means for switching between the data length priority mode to compress.
[0016]
When the mode selecting means selects the image quality priority mode, the compressing means lowers the compression ratio as the amount of the high frequency component included in the output signal of the photoelectric conversion element in the focus detecting means increases. When the mode selection means selects the data length priority mode, the compression means controls the compression ratio as the amount of high frequency components contained in the output signal of the photoelectric conversion element in the focus detection means increases. The digital still video camera is characterized in that the image data is compressed at a compression ratio according to an output signal so that the image data is controlled to be high.
[0017]
[Action]
In the present invention configured as described above, a subject image is formed on the imaging unit by the imaging optical system, and the imaging unit converts the subject light into an electric signal. This electric signal is converted into a digital signal by the analog-digital conversion means, and the digitized image data is further compressed by the compression means.
[0018]
Here, based on an output signal from the focus detection unit, the compression unit compresses the image data at a compression rate corresponding to the output signal. Then, the compressed image data is recorded in the recording means.
[0021]
In the invention described in claim 1, the compression unit controls the compression ratio of the data compression unit to be higher as the amount of the high frequency component included in the output signal of the photoelectric conversion element in the focus detection unit is larger. That is, since image data having any image quality is compressed to a fixed data length and stored in the recording medium, the number of frames of the image that can be stored in the recording medium is always constant, and the usability is good.
[0022]
Further, in the invention according to the second aspect , an image quality priority mode in which image data is compressed and stored in the recording medium until image quality of a subject image captured by the imaging unit is substantially maintained, There is further provided mode selection means for switching between a data length priority mode for compressing image data so that the data length of the image data is substantially constant regardless of the image quality of the captured subject image.
[0023]
This mode selection means can be freely switched according to the photographer's needs. If the photographer wants to convert high-quality image data into a high-quality reproduced image, the mode selection means should be set to image quality priority. Switch to mode. When the mode selection unit selects the image quality priority mode, the compression unit controls the compression ratio to be lower as the amount of the high frequency component included in the output signal of the photoelectric conversion element in the focus detection unit is larger. A reproduced image whose quality is not impaired can be obtained.
[0024]
When the photographer wants to keep the number of frames of the image data stored in the recording medium constant, the mode selecting means may be switched to the data length priority mode. When the mode selection means selects the data length priority mode, the compression means controls the compression ratio higher as the amount of the high frequency component included in the output signal of the photoelectric conversion element in the focus detection is larger. Therefore, the image data length of one screen is constant regardless of the image quality of the subject image picked up by the image pickup means. Therefore, the number of frames of the image data stored in the recording medium is constant.
[0025]
As described above, in the digital still video camera according to the present invention, the compression ratio of the image data is determined based on the output signal of the focus detection means. A switch operation for selecting a compression ratio is not required. Furthermore, since the compression ratio is not determined by analyzing the image data itself, and the compression unit is not operated to determine the appropriate compression ratio, the captured image data can be obtained in a short time and with low power. Appropriate compression can be performed.
[0026]
【Example】
An embodiment of the present invention will be described with reference to the drawings. FIG. 1 is a block diagram showing a schematic configuration of a digital still video camera according to one embodiment of the present invention. FIGS. 2 and 3 are block diagrams showing a part of the configuration of the digital still video camera in more detail. 4 is a flowchart showing the operation of the digital still video camera of the embodiment.
[0027]
As shown in FIG. 1, a digital still video camera according to the present embodiment is similar to the conventional digital still video camera shown in FIG. A mirror optical system 103 for taking light into the photometry unit 116 and the focus detection unit 115, a shutter 104, an imaging unit 105 including imaging means such as a CCD, an A / D conversion unit 106 for converting an image signal into a digital signal, A signal processing unit 107 for performing certain signal processing such as white balance correction, amplification, γ correction, and edge enhancement on the image signal digitized by the D conversion unit, and temporarily outputs the image signal processed by the signal processing unit 107. A buffer memory 108 for temporarily storing image data; and a compression processing unit 109 for compressing image data.
[0028]
The control unit 120 further includes a focus detection unit 115, a photometry unit 116, and a control unit 120 that controls a shooting operation. The control unit 120 performs focusing and proper exposure based on output signals from the focus detection unit 115 and the photometry unit 116. And the drive of the photographing lens group 101, the aperture 102 and the shutter 104 is controlled based on the calculation result, whereby the automatic focusing and the automatic exposure are performed. Then, the captured image data is recorded on the memory card 110 after being compressed by the compression processing unit 109.
[0029]
On the other hand, the digital still video camera according to the present embodiment is different from the conventional digital still video camera in that the compression processing unit 109 that performs data compression when recording captured image data on the memory card 110 includes the focus detection unit. Data compression is performed at a compression rate corresponding to the output signal of the output signal 115.
[0030]
The case where the image quality priority mode is selected will be described below. The compression processing unit 109 performs a well-known quantization operation and code assignment operation on the digital image data, and performs a compression operation on the image data. The compression processing unit 109 includes a plurality of quantization tables for the quantization operation, specifically, three quantization tables (ie, a low compression rate (L), a medium compression rate (M), and a high compression rate (H )), And the final data compression ratio is determined by selecting one of the quantization tables.
[0031]
The selection of the image quality priority mode or the data length priority mode in the compression ratio mode is performed by an external operation switch. When both the compression mode selection switch 123 and the compression coefficient selection switch 124 of FIG. 1 are turned on (H), the image quality priority mode is set, the compression mode selection switch 123 is turned on (H), and the compression coefficient selection switch 124 is turned on. When switched to OFF (L), the mode is the data length priority mode, and the mode can be selected.
[0032]
Here, the image quality priority mode means that the image quality of the subject image captured by the imaging unit 105 is compressed and stored in the memory card 110 while maintaining the image quality of the subject image as much as possible. Mode. Accordingly, high-quality image data is compressed at a low compression ratio and stored in the memory card 110, so that the image data length of the position screen is not constant.
[0033]
On the other hand, the data length priority mode is a mode in which the image data length of one screen is made as constant as possible and stored in the memory card 110 irrespective of the image quality of the subject image captured by the imaging unit 105. Therefore, the number of frames of an image recorded on one memory card is almost always the same, which is convenient.
[0034]
That is, as shown in FIG. 1, the digital still video camera includes a high-pass filter 140 that passes only a signal having a frequency component equal to or higher than a certain value among output signals of the photoelectric conversion element from a known focus detection unit 115. , An integrator 141 for integrating the signal passing through the high-pass filter 140, and a compression coefficient selection unit 142 for selecting a compression ratio based on an output signal from the integrator 141. The compression processing unit 109 compresses the image data based on the output signal from 142. Hereinafter, these will be described.
[0035]
First, FIG. 2 shows the configuration of the known focus detection unit 115 provided in the present embodiment. As shown in FIG. 2, the subject light from the mirror optical system 103 shown in FIG. An image is formed on the surface 201, and an arbitrary part of the subject image (generally, the center part of the subject area) is input to the photoelectric conversion element 204 by the CCD line sensor by the condenser lens 202 and the optical system 203. Then, an output signal from the photoelectric conversion element 204 by the CCD line sensor is input to the control unit 120 for focusing calculation and is input to the high-pass filter 140.
[0036]
The high-pass filter 140 allows only a signal having a frequency component equal to or higher than a certain value to pass, and the signal that has passed through the high-pass filter 140 is input to the integrator 141. The integrator 141 integrates the output signal of the high-pass filter 140 for each screen for a predetermined time based on a command from the control unit 120, and outputs the result to the compression coefficient selection unit 142 as a voltage value.
[0037]
FIG. 3 shows the configuration of the compression coefficient selection unit 142. In FIG. 3, reference numeral 342 denotes the compression coefficient selection unit 142, 341 denotes the integrator 141, and 309 denotes the compression processing unit 109. As shown, the compression coefficient selection unit 342 includes two comparators 342a and 342b, and reference voltage generators 343a and 343b connected to the two comparators 342a and 342b, respectively. Reference voltage generator 343a, 343b, respectively from the reference voltage V CC in the camera A [V], for generating a reference voltage of B [V] (A> B ).
[0038]
The comparator 342a, the output voltage V Y of the integrator 341 is input are added, the reference voltage A from the reference voltage generator 343a [V] is input is subtracted. Similarly, the comparator 342b, the output voltage V Y of the integrator 341 is inputted by adding a reference voltage B from the reference voltage generator 343b [V] is input is subtracted. The outputs of the comparators 342a and 342b are input to the input ports P 1 and P 0 of the compression processing unit 309, respectively. The compression processing unit 309 uses the compression coefficients corresponding to the states of the input ports P 1 and P 0 to output image data. Compression.
[0039]
That is, the integrator 141 (341) of the output voltage V Y and the reference voltage A [V], but if one is on the relationship between V Y> A (high-frequency component is great), the input port state P 1 / P 0 is, H / H, and the compression processing unit 109 (309) in this case is to compress the compression factor L (low compression ratio).
[0040]
In the case of A ≧ V Y ≧ B, the state P 1 / P 0 of the input port becomes L / H, and the compression processing unit 109 (309) performs compression by the compression coefficient M (medium compression ratio). Do.
[0041]
Further, when there is a relationship of B> V Y (the number of high-frequency components is small), the state P 1 / P 0 of the input port becomes L / L, and the compression processing unit 109 (309) sets the compression coefficient H (high). (Compression ratio).
[0042]
On the other hand, if the data length priority mode, the output voltage V Y of the integrator 141 (341), the reference voltage A [V], but the relationship between V Y> A (high-frequency component is great) when In this case, the state P 1 / P 0 of the input port becomes H / H, and in this case, the compression processing unit 109 (309) performs compression using the compression coefficient H (high compression ratio).
[0043]
In the case of A ≧ V Y ≧ B, the state P 1 / P 0 of the input port becomes L / H, and the compression processing unit 109 (309) performs compression by the compression coefficient M (medium compression ratio). Do.
[0044]
Further, when there is a relationship of B> V Y (the number of high-frequency components is small), the state P 1 / P 0 of the input port becomes L / L, and the compression processing unit 109 (309) sets the compression coefficient L (low). (Compression ratio).
[0045]
Thus, in this third embodiment of a camera, when the data length priority mode, as the output voltage V Y of the integrator 141 (341) is high, i.e., higher compression ratio greater the high frequency component Since the image data is selected to be high, for example, image data compression is automatically performed at a high compression ratio even for a fine image having many high frequency components.
[0046]
Furthermore, since the case is selected the image quality priority mode, as the output voltage V Y of the integrator 141 is high, i.e., the the more high-frequency components often higher compression ratio is selected to be lower, for example, a high frequency component The image data is automatically compressed at a low compression ratio for a fine image having many images.
[0047]
This camera has a “compression auto mode” in which the compression ratio is automatically determined by the above-described compression coefficient selection unit 142 and the like, and compression is performed. There are two types of modes, a “compression manual mode” for selecting a compression ratio. Switching of this mode is instructed by the compression mode selection switch 123.
[0048]
That is, when the compression mode selection switch 123 is closed, the compression manual mode is set, and three types of compression coefficients (low compression coefficient L, medium compression coefficient M, high compression coefficient) are set by turning on / off the compression coefficient selection switches 124 and 125. The compression coefficient H) is selected, and the image data is compressed by the compression coefficient. On the other hand, if the compression mode selection switch 123 is opened, the compression auto mode is set, and the compression coefficient is automatically selected by the compression coefficient selection unit 142 and the image data is compressed by the selected compression coefficient. .
[0049]
Next, the operation of the camera of this embodiment will be described with reference to FIGS. 1, 3, and 4. FIG. In the camera of the present embodiment, a so-called half-pressing operation of the release button starts a shooting preparation operation. That is, when the half-press switch 121 is closed in step 401 of FIG. 4, photometry and focus detection operations are performed in steps 402 to 403. If the compression mode selection switch 123 is closed in step 404, step At 405, the compression coefficient set by the user is read.
[0050]
On the other hand, if the compression mode selection switch 123 is open, an appropriate compression coefficient according to the image is automatically selected in step 406 as described above.
[0051]
If the full-press switch 122 is closed in step 407, a series of photographing operations are performed in step 410, and the image data is compressed in step 411 by the read or selected compression coefficient. Is recorded on the memory card 110, and the shooting ends.
[0052]
On the other hand, if the full-push switch 122 remains open in step 407, the process proceeds to step 408, and if the half-press switch 121 is closed, steps 402 to 407 are repeated again. If the half-push switch 121 has been opened in step 408, the photographing preparation operation is terminated in step 409 after a predetermined time has elapsed.
[0053]
As described above, in the digital still video camera of the present embodiment, the compression processing unit 109 automatically selects the compression coefficient of image data based on the high frequency component of the output signal from the photoelectric conversion element of the focus detection unit 115. Because of the nature of the digital image data, or by extracting a part of the image data and operating the compression circuit, the data compression coefficient is selected based on the data length at that time. Coefficient selection work can be performed at high speed.
[0054]
As a result, the time from the start of the photographing operation to the storage of the image data in the memory card can be reduced as compared with the related art, and high-speed continuous shooting can be performed. Further, since it is not necessary to operate an A / D converter, a buffer memory, and a compression circuit for selecting a compression coefficient, power is not wasted.
[0055]
In the above-described embodiment, a series of photographing operations has been described with respect to so-called single mode (single-shot) photographing. However, in continuous mode (continuous photographing) photographing, photometry and focus detection are performed even during the photographing period. Since the operation is performed, the compression coefficient may be changed during the photographing period, or the compression coefficient may be fixed during continuous shooting. In addition, the compression coefficient described in the present embodiment may be considered as a selection of a well-known quantization table in the compression processing unit.
[0056]
【The invention's effect】
As described above, according to the present invention, a digital still video camera that can automatically determine the compression ratio of image data in a short time and with low power can be realized.
[Brief description of the drawings]
FIG. 1 is a block diagram illustrating a schematic configuration of a digital still video camera according to an embodiment of the present invention.
FIG. 2 is a block diagram showing a configuration of a distance measuring unit provided in the digital still video camera according to one embodiment of the present invention.
FIG. 3 is a block diagram illustrating a configuration of a compression coefficient selection unit included in the digital still video camera according to one embodiment of the present invention.
FIG. 4 is a flowchart showing an operation of the digital still video camera according to one embodiment of the present invention.
FIG. 5 is a block diagram showing a schematic configuration of a conventional digital still video camera.
[Explanation of symbols]
101, 501 photographing lens group 102, 502 aperture 103, 503 mirror optical system 104, 504 shutter 105, 505 imaging unit 106, 506 A / D conversion unit 107, 507 signal processing unit 108, 508 buffer memory 109, 309, 509 compression Processing unit 110, 510 Memory card 115, 515 Focus detection unit 116, 516 Photometry unit 120, 520 Control unit 121 Half-press switch (release)
122 Full-press switch (release)
123 Compression mode selection switch 124, 125 Compression coefficient selection switch 140 High pass filter 141, 341 Integrator 142, 342 Compression coefficient selection unit 201 Primary focal plane 202 Condenser lens 203 Optical system 204 CCD line sensor unit 342a, 342b Comparator 343a, 343b Reference Voltage generator

Claims (2)

被写体光を電気信号に変換する撮像手段と、該撮像手段上に被写体像を結像させる撮影光学系と、該撮影光学系を合焦させるための焦点検出手段と、前記撮像手段により光電変換された電気信号をデジタル信号に変換するアナログ−デジタル変換手段と、該アナログ−デジタル変換手段によりデジタル化された画像データを圧縮する圧縮手段と、該圧縮手段により圧縮された画像データを記録する記録手段とを備えたデジタルスチルビデオカメラにおいて、
前記圧縮手段は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど前記圧縮手段の圧縮率を高く制御するように、前記出力信号に応じた圧縮率で前記画像データを圧縮することを特徴とするデジタルスチルビデオカメラ。
Imaging means for converting subject light into an electric signal; a photographing optical system for forming a subject image on the imaging means; focus detection means for focusing the photographing optical system; Analog-to-digital conversion means for converting the electrical signal into a digital signal, compression means for compressing the image data digitized by the analog-to-digital conversion means, and recording means for recording the image data compressed by the compression means In a digital still video camera with
The compression unit controls the compression ratio of the compression unit to be higher as the amount of the high-frequency component included in the output signal of the photoelectric conversion element in the focus detection unit is larger, so that the compression ratio according to the output signal is higher. A digital still video camera characterized by compressing image data.
被写体光を電気信号に変換する撮像手段と、該撮像手段上に被写体像を結像させる撮影光学系と、該撮影光学系を合焦させるための焦点検出手段と、前記撮像手段により光電変換された電気信号をデジタル信号に変換するアナログ−デジタル変換手段と、該アナログ−デジタル変換手段によりデジタル化された画像データを圧縮する圧縮手段と、該圧縮手段により圧縮された画像データを記録する記録手段とを備えたデジタルスチルビデオカメラにおいて、
前記撮像手段により撮像された被写体像の画質をほぼ保持したまで画像データを圧縮して前記記録媒体に格納する画質優先モードと、前記撮像手段により撮像された被写体像の画質にかかわらず画像データのデータ長がほぼ一定となるように画像データを圧縮するデータ長優先モードとを切り替えるモード選択手段を更に備え、
前記圧縮手段は、前記モード選択手段が画質優先モードを選択している際は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を低く制御し、前記モード選択手段がデータ長優先モードを選択している際は、前記焦点検出手段内の光電変換素子の出力信号に含まれる高周波成分の量が多いほど圧縮率を高く制御するように、出力信号に応じた圧縮率で前記画像データを圧縮することを特徴とするデジタルスチルビデオカメラ。
Imaging means for converting subject light into an electric signal; a photographing optical system for forming a subject image on the imaging means; focus detection means for focusing the photographing optical system; Analog-to-digital conversion means for converting the electrical signal into a digital signal, compression means for compressing the image data digitized by the analog-to-digital conversion means, and recording means for recording the image data compressed by the compression means In a digital still video camera with
An image quality priority mode in which the image data is compressed and stored in the recording medium until the image quality of the subject image captured by the imaging unit is substantially maintained; Mode selection means for switching between a data length priority mode for compressing image data so that the data length is substantially constant,
Said compression means, when you have selected the mode selecting means Gae quality priority mode, the control to lower the higher the compression ratio the amount of high-frequency components are often included in the output signal of the photoelectric conversion elements in the focus detecting means when you select the mode selecting means is de chromatography data length priority mode, so as to increase control as the compression ratio the amount of high-frequency components are often included in the output signal of the photoelectric conversion elements in the focus detecting means , it features and to Lud digital still video camera to compress the image data at a compression rate corresponding to the output signal.
JP15430294A 1993-06-23 1994-06-14 Digital still video camera Expired - Lifetime JP3564733B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP15430294A JP3564733B2 (en) 1993-06-23 1994-06-14 Digital still video camera

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP5-174653 1993-06-23
JP17465393 1993-06-23
JP15430294A JP3564733B2 (en) 1993-06-23 1994-06-14 Digital still video camera

Publications (2)

Publication Number Publication Date
JPH0775056A JPH0775056A (en) 1995-03-17
JP3564733B2 true JP3564733B2 (en) 2004-09-15

Family

ID=26482628

Family Applications (1)

Application Number Title Priority Date Filing Date
JP15430294A Expired - Lifetime JP3564733B2 (en) 1993-06-23 1994-06-14 Digital still video camera

Country Status (1)

Country Link
JP (1) JP3564733B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4765240B2 (en) * 1999-06-14 2011-09-07 株式会社ニコン Compression encoding method, recording medium storing a compression encoding program, and electronic camera for implementing the compression encoding method
US8319833B2 (en) 2009-06-23 2012-11-27 Sentrus, Inc. Video surveillance system

Also Published As

Publication number Publication date
JPH0775056A (en) 1995-03-17

Similar Documents

Publication Publication Date Title
US5502485A (en) Camera which compresses digital image data in correspondence with the focus control or the stop value of the camera
JP3427454B2 (en) Still camera
JP4591325B2 (en) Imaging apparatus and program
US6833864B1 (en) Image capturing apparatus and method for obtaining images with broad brightness range
JP3473552B2 (en) Digital still camera
JP2007184733A (en) Imaging apparatus and photographing mode display method
US7161629B2 (en) Electronic camera and method for calculating an exposure amount
JP5614425B2 (en) Imaging apparatus and program
US5467129A (en) Camera with automatic data compression factor selection
US20060055991A1 (en) Image capture apparatus and image capture method
JP3733828B2 (en) Electronic camera
JP3964315B2 (en) Digital camera
JP3394019B2 (en) Exposure control circuit of image input device
US6862106B1 (en) Image-capturing apparatus, method of controlling the same apparatus, and computer program product for providing the same method
JP4799849B2 (en) Imaging apparatus and imaging processing method
JP2017123670A (en) Imaging controller, and control method, and program therefor
JP3564733B2 (en) Digital still video camera
JP4013026B2 (en) Electronic camera and image display method during automatic focus adjustment
JP4106485B2 (en) camera
JPH05347728A (en) Video camera
JP2010062987A (en) Imaging apparatus and method
JP2004205792A (en) Automatic focusing control method and image recording device
JP4468601B2 (en) Electronic camera
JP2009088688A (en) Imaging apparatus, its imaging method, and method for switching its settings
JPH05115045A (en) Exposure control circuit for picture input device

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040518

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040531

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100618

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130618

Year of fee payment: 9

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130618

Year of fee payment: 9

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130618

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term