JP2007133044A - Imaging apparatus and imaging method - Google Patents
Imaging apparatus and imaging method Download PDFInfo
- Publication number
- JP2007133044A JP2007133044A JP2005324145A JP2005324145A JP2007133044A JP 2007133044 A JP2007133044 A JP 2007133044A JP 2005324145 A JP2005324145 A JP 2005324145A JP 2005324145 A JP2005324145 A JP 2005324145A JP 2007133044 A JP2007133044 A JP 2007133044A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- area
- photometric
- photometry
- evaluation value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、焦点検知、特にマクロ撮影に関しての自動焦点(AF)検知を行う撮像装置および撮像方法に関するものである。 The present invention relates to an imaging apparatus and an imaging method that perform focus detection, particularly automatic focus (AF) detection for macro photography.
従来から、焦点検知を自動で行う撮像装置で、その検知範囲を制限する技術は提案されている(例えば、特許文献1乃至3参照)。
かかる技術は特許文献1のオートフォーカス装置、特許文献2の自動焦点検出装置に開示されている。特許文献1の開示では、暗い場合にはAF評価値を取得するエリアを大きくするようにしているが、不用意にAFエリアを拡大してしまうことによって、背景の影響を受けてしまい被写体に合焦しないという問題がある。
特許文献2の開示も同様に、暗い場合にAF評価値を取得するエリアを大きくするものであるが、周囲が明るく、かつ被写体が低コントラストのような環境においての考慮がなされておらず、この問題を改善する方法が望まれていた。
また、デジタルスチルカメラ等の電子撮像装置には、一般的に自動的に焦点を合わせるオートフォーカス(以下AF)装置が搭載されている。その方法として特許文献3に記載されている山登りAF制御が広く用いられている。
この山登りAF制御とは、1フィールドまたは1フレーム毎に得られた映像信号から高周波成分または近接画素の輝度差の積分値を求め、これを、合焦度合いを示すAF評価値とする制御である。
合焦状態にあるときは被写体のエッジ部分がはっきりしているためAF評価値は大きくなり、非合焦状態のときはAF評価値が小さくなる。AF動作実行時はレンズを移動させながらこのAF評価値を順次取得していき、AF評価値が最も大きくなったところを合焦点として、レンズを停止する。
デジタルスチルカメラのごときスチル画像を撮像する撮像装置では、一般的にビデオカメラ等の動画を撮影する撮影装置に比べ、厳密な合焦が要求される。このため、撮影動作のたびにAF動作を行うか、記録モードにおいて常に合焦動作を繰り返し行っている。
Such a technique is disclosed in the autofocus device of
Similarly, the disclosure of
In addition, an electronic imaging device such as a digital still camera is generally equipped with an autofocus (hereinafter referred to as AF) device that automatically focuses. As the method, the hill-climbing AF control described in
This hill-climbing AF control is a control in which an integral value of a high-frequency component or a luminance difference between adjacent pixels is obtained from a video signal obtained for each field or frame, and this is used as an AF evaluation value indicating the degree of focus. .
The AF evaluation value is large because the edge portion of the subject is clear when the subject is in focus, and the AF evaluation value is small when the subject is out of focus. When the AF operation is executed, the AF evaluation values are sequentially acquired while moving the lens, and the lens is stopped with the point where the AF evaluation value is maximized as the focal point.
An imaging apparatus that captures a still image, such as a digital still camera, generally requires strict focusing as compared to an imaging apparatus that captures moving images such as a video camera. For this reason, the AF operation is performed every time the photographing operation is performed, or the focusing operation is always repeated in the recording mode.
しかしながら、低コントラストが被写体になるような物体撮影の際には、AF評価値の山が低い、または低コントラストであることでノイズを生じ、複数の山を出現してしまうことがあり、合焦しないという問題がある。
また、マクロモードのような近接撮影時に関しては、カメラと被写体との距離が近いため、カメラが影となってしまうことがあり、被写体のコントラストを損なってしまうため、合焦できないという問題もある。
そこで、本発明の目的は、上述した実情を考慮して、被写体と周囲の測光結果に基づき、AF評価値を取得するエリアを可変にすることにより、低コントラストや、暗時のようなAF評価値の山が低くなる、またはノイズによって複数の山が出現してしまうような環境においても合焦可能である撮像装置及び撮像方法を提案することにある。
However, when shooting an object with low contrast as a subject, noise may be generated due to low or low contrast of AF evaluation values, and multiple peaks may appear. There is a problem of not.
In close-up shooting such as in the macro mode, the camera and the subject are close to each other, so the camera may become a shadow, and the contrast of the subject may be lost. .
In view of the above, the object of the present invention is to make the AF evaluation value as low contrast or dark by making the area from which the AF evaluation value is acquired variable based on the photometric results of the subject and the surroundings in consideration of the above situation. An object of the present invention is to propose an imaging apparatus and an imaging method capable of focusing even in an environment in which a mountain of values becomes low or a plurality of mountains appear due to noise.
上記の課題を解決するために、請求項1に記載の発明は、撮影レンズを通過してきた被写体及び被写体周辺からの光を受光して画像データを得る撮像装置において、被写体像を含む選定エリアのコントラストを検知することにより焦点を検知する自動焦点検知手段と、前記被写体像を複数の測光エリアに分割し、分割した各測光エリアの評価値を得ることにより測光を行う測光手段と、被写体エリアの大きさを設定する被写体エリア設定手段と、を備え、前記被写体エリア設定手段は、マクロ撮影モードが選択された場合に前記測光手段で得られた各測光エリアの評価値のうち、前記被写体を含む選定エリアと被写体周辺の測光エリアとの評価値を比較することにより前記被写体エリアの大きさの設定を行うようにしたことを特徴とする。
また請求項2に記載の発明は、請求項1記載の撮像装置において、前記被写体エリア設定手段は、前記評価値の比較の結果、前記被写体を含む選定エリアである測光エリアの評価値が前記被写体周辺の測光エリアより小さい場合、前記被写体を含む選定エリアを大きく設定することを特徴とする。
また請求項3に記載の発明は、請求項1又は2記載の撮像装置において、前記被写体エリア設定手段は、前記評価値の比較の結果、前記被写体を含む選定エリアである測光エリアの評価値が前記被写体周辺の測光エリアより小さい場合、前記被写体を含む選定エリアである測光エリアよりも評価値が大きい方向に対して前記被写体エリアを大きく設定することを特徴とする。
また請求項4に記載の発明は、請求項1乃至3のいずれか1項記載の撮像装置において、前記被写体エリア設定手段は、前記評価値の比較の結果、前記被写体を含む選定エリアである測光エリアの評価値が前記被写体周辺の測光エリアとともに所定の大きさに満たない場合は、前記被写体エリアを大きく設定することを特徴とする。
In order to solve the above problems, the invention described in
According to a second aspect of the present invention, in the imaging apparatus according to the first aspect, the subject area setting means determines that an evaluation value of a photometric area which is a selected area including the subject is the subject as a result of the comparison of the evaluation values. If it is smaller than the surrounding photometric area, the selected area including the subject is set larger.
According to a third aspect of the present invention, in the imaging apparatus according to the first or second aspect, the subject area setting means has an evaluation value of a photometric area that is a selected area including the subject as a result of the comparison of the evaluation values. When smaller than the photometry area around the subject, the subject area is set larger with respect to the direction in which the evaluation value is larger than the photometry area that is the selection area including the subject.
According to a fourth aspect of the present invention, in the imaging apparatus according to any one of the first to third aspects, the subject area setting means is a photometric measurement that is a selected area including the subject as a result of the comparison of the evaluation values. When the evaluation value of the area is less than a predetermined size together with the photometry area around the subject, the subject area is set to be large.
また請求項5に記載の発明は、被写体像を含む被写体エリアである画像データのコントラストを、フォーカスレンズを光軸方向に移動させながら検知することにより焦点を検知する自動焦点検知工程と、前記被写体像を複数の測光エリアに分割し、その分割した各測光エリアの評価値を得ることにより測光を行う測光工程を備え、撮影レンズを通過してきた被写体及び被写体周辺からの光を受光して画像データを得る撮像方法において、少なくとも通常撮影モード及びマクロ撮影モードを選択できる撮影モード選択工程と、前記撮影モード選択工程においてマクロ撮影モードが選択された場合に前記被写体を含むもしくは被写体に近い測光エリアと被写体周辺の測光エリアとの評価値を比較することにより、被写体エリアの大きさを設定する被写体エリア設定工程を有することを特徴とする。
また請求項6に記載の発明は、請求項5記載の撮像方法において、前記被写体エリア設定工程では、前記評価値の比較結果により前記被写体を含むもしくは被写体に近い測光エリアの評価値が前記被写体周辺の測光エリアより小さい場合、前記被写体エリアを大きく設定することを特徴とする。
また請求項7に記載の発明は、請求項5又は6記載の撮像方法において、前記被写体エリア設定工程では、前記評価値の比較結果により前記被写体を含むもしくは被写体に近い測光エリアの評価値が前記被写体周辺の測光エリアより小さい場合、前記被写体を含むもしくは被写体に近い測光エリアよりも評価値が大きい方向に対して前記被写体エリアを大きく設定することを特徴とする。
また請求項8に記載の発明は、請求項5乃至7のいずれか1項記載の撮像方法において、前記被写体エリア設定工程では、前記評価値の比較結果により前記被写体を含むもしくは被写体に近い測光エリアの評価値が前記被写体周辺の測光エリアとともに所定の大きさに満たない場合、前記被写体エリアを大きく設定することを特徴とする。
According to a fifth aspect of the present invention, there is provided an automatic focus detection step for detecting a focus by detecting a contrast of image data that is a subject area including a subject image while moving a focus lens in an optical axis direction, and the subject. The image data is divided into a plurality of photometry areas, and a photometry process is performed to obtain the evaluation value of each of the divided photometry areas. A photographing mode selection step capable of selecting at least a normal photographing mode and a macro photographing mode, and a photometric area and a subject including or close to the subject when the macro photographing mode is selected in the photographing mode selecting step. Set the size of the subject area by comparing the evaluation values with the surrounding photometry area It characterized by having a Utsushitai area setting step.
According to a sixth aspect of the present invention, in the imaging method according to the fifth aspect, in the subject area setting step, an evaluation value of a photometric area including the subject or close to the subject is determined based on a comparison result of the evaluation values. The subject area is set to be larger if it is smaller than the photometric area.
According to a seventh aspect of the present invention, in the imaging method according to the fifth or sixth aspect, in the subject area setting step, an evaluation value of a photometric area including the subject or close to the subject is determined based on a comparison result of the evaluation values. If it is smaller than the photometry area around the subject, the subject area is set larger with respect to the direction in which the evaluation value is larger than the photometry area including or close to the subject.
According to an eighth aspect of the present invention, in the imaging method according to any one of the fifth to seventh aspects, in the subject area setting step, a photometric area that includes the subject or is close to the subject according to a comparison result of the evaluation values. When the evaluation value is less than a predetermined size together with the photometric area around the subject, the subject area is set to be large.
本発明によれば、被写体と周囲の測光結果のうち、その輝度差が大きい方向にAF評価値を取得するエリアを大きくすることにより、不用意にエリアを拡大することにより背景に焦点を合わせてしまうような問題が解消される。 According to the present invention, by focusing on the background by inadvertently expanding the area by increasing the area from which the AF evaluation value is acquired in the direction in which the luminance difference is large among the photometric results of the subject and the surrounding area. Will be solved.
以下、図面を参照して、本発明の実施の形態を詳細に説明する。図1はデジタルスチルカメラの外観を示す上面図である。図2はデジタルスチルカメラの外観を示す正面図である。図3はデジタルスチルカメラの外観を示す背面図である。図4はデジタルスチルカメラの機能ブロック図である。
最初に本実施形態のデジタルスチルカメラの動作概要を説明する。先ず、図1乃至図3を参照して、操作キーユニット(SW1〜SW13)について説明する。デジタルカメラ3の操作キーユニットにおいては、SW1はレリーズシャッタボタン、SW2はモードダイアルスイッチ、SW3hズームスイッチ(WIDE)、SW4はズームスイッチ(TELE)を示している。
また操作キーユニットにおいては、SW5はセルフタイマ/削除スイッチ、SW6はメニュースイッチ、SW7は上/ストロボスイッチ、SW8は右スイッチ、SW9はディスプレイスイッチ、SW10は下/マクロスイッチ、SW11は左/画像確認スイッチ、SW12はOKスイッチ、そしてSW13は電源スイッチを示している。
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 is a top view showing the appearance of a digital still camera. FIG. 2 is a front view showing the appearance of the digital still camera. FIG. 3 is a rear view showing the appearance of the digital still camera. FIG. 4 is a functional block diagram of the digital still camera.
First, an outline of the operation of the digital still camera of this embodiment will be described. First, the operation key units (SW1 to SW13) will be described with reference to FIGS. In the operation key unit of the
In the operation key unit, SW5 is a self-timer / delete switch, SW6 is a menu switch, SW7 is an up / strobe switch, SW8 is a right switch, SW9 is a display switch, SW10 is a down / macro switch, SW11 is a left / image confirmation. A switch, SW12 is an OK switch, and SW13 is a power switch.
図1乃至図3には、SDカード/電池蓋2、光学ファインダ4、測距ユニット5、後述するリモコン受光部6、鏡筒ユニット7、サブLCD9、ストロボ発光部10、AF(自動焦点)LED12、ストロボLED13、LCDモニタ28が示されている。
図1乃至図4に示すように、鏡胴ユニット7は、被写体の光学画像を取り込むズームレンズ7−1a、ズーム駆動モータ7−1bからなるズーム光学系7−1、フォーカスレンズ7−2a、フォーカス駆動モータ7−2bからなるフォーカス光学系7−2、絞り7−3a、絞りモータ7−3bからなる絞りユニット7−3、メカシャッタ7−4a、メカシャッタモータ7−4bからなるメカシャッタユニット7−4、各モータを駆動するモータドライバ7−5を有している。
そして、モータドライバ7−5は、リモコン受光部6の入力や操作キーユニット(SW1〜SW13)の操作入力に基づく、後述するデジタルスチルカメラプロセッサ16内にあるCPUブロック16−3からの駆動指令により駆動制御される。
ROM18には、CPUブロック16−3にて解読可能なコードで記述された制御プログラムや、制御するためのパラメータが格納されている。このデジタルスチルカメラの電源がオン状態になると、前記プログラムは図示してないメインメモリにロードされる。
CPUブロック16−3は、そのプログラムに従って装置各部の動作を制御するとともに、制御に必要なデータ等を一時的にRAM17及び後述するデジタルスチルカメラプロセッサ16内にあるローカルSRAM16−4に保存する。
ROM18として書き換え可能なフラッシュROMを使用することで、制御プログラムや制御するためのパラメータを変更することが可能となり、機能のバージョンアップが容易に行える。
CCD8は光学画像を光電変換するための固体撮像素子である。F/E(フロント/エンド)−IC14は、画像ノイズ除去用相関二重サンプリングを行うCDS14−1、利得調整を行うAGC14−2、デジタル信号変換を行うA/D14−3を有している。
また、F/E−IC14は、CCD1制御(信号処理)ブロック16−1から、垂直同期信号(以下、VDと記す)、水平同期信号(以下、HDと記す)の供給を受け、CPUブロック16−3によって制御されるCCD8、及びF/E−IC14の駆動タイミング信号を発生するTG(タイミング発生器)14−4を有している。
1 to 3 show an SD card /
As shown in FIGS. 1 to 4, the lens barrel unit 7 includes a zoom optical system 7-1 including a zoom lens 7-1a for capturing an optical image of a subject, a zoom drive motor 7-1b, a focus lens 7-2a, a focus. Focus optical system 7-2 composed of drive motor 7-2b, diaphragm 7-3a, diaphragm unit 7-3 composed of diaphragm motor 7-3b, mechanical shutter unit 7- composed of mechanical shutter 7-4a, mechanical shutter motor 7-
The motor driver 7-5 is driven by a drive command from a CPU block 16-3 in the digital
The
The CPU block 16-3 controls the operation of each part of the apparatus according to the program, and temporarily stores data necessary for the control in the RAM 17 and a local SRAM 16-4 in the digital
By using a rewritable flash ROM as the
The CCD 8 is a solid-state image sensor for photoelectric conversion of an optical image. The F / E (front / end) -
Further, the F /
デジタルスチルカメラプロセッサ16は、CCD8よりF/E−IC14の出力データにホワイトバランス設定やガンマ設定を行い、また、前述したように、VD信号、HD信号を供給するCCD1制御ブロック16−1、フィルタリング処理により、輝度データ・色差データへの変換を行うCCD2制御(信号処理)ブロック16−2、前述した装置各部の動作を制御するCPUブロック16−3、前述した制御に必要なデータ等を、一時的に、保存するローカルSRAM16−4を含んでいる。
デジタルスチルカメラプロセッサ16は、また、パソコンなどの外部機器とUSB通信を行うUSBブロック16−5、パソコンなどの外部機器とシリアル通信を行うシリアルブロック16−6、JPEG圧縮・伸張を行うJPEG CODEC(ジェイペグ・コーデック)ブロック16−7、画像データのサイズを補間処理により拡大/縮小するリサイズブロック16−8、画像データを液晶モニタやTVなどの外部表示機器に表示するためのビデオ信号に変換するTV信号表示ブロック16−9、撮影された画像データを記録するメモリカードの制御を行うメモリカードコントローラブロック16−10を有している。
SDRAM15は、前述したデジタルスチルカメラプロセッサ16で画像データに各種処理を施す際に、画像データを一時的に保存する。保存される画像データは、例えば、CCD8から、F/E−IC14を経由して取り込んで、CCD1制御ブロック16−1でホワイトバランス設定、ガンマ設定が行われた状態の「RAW−RGB画像データ」、CCD2制御ブロック16−2で輝度データ及び色差データ変換が行われた状態の「YUV画像データ」、又はJPEG CODECブロック16−7で、JPEG圧縮された「JPEG画像データ」などである。
The digital
The digital
The
メモリカードスロット30は着脱可能なメモリカードを装着するためのスロットである。メモリカードスロット30は、メモリカード以外に、着脱可能なLANカード、無線LANカード、ブルートゥースカードなども装着可能とする。撮影された画像はそれらのカード経由で外部機器に転送することを可能とする。
内蔵メモリ29は、前述したメモリカードスロット30にメモリカードが装着されていない場合でも、撮影した画像データを記憶できるようにするためのメモリである。
LCDドライバ25は後述するLCDモニタ28を駆動するドライブ回路であり、TV信号表示ブロック16−9から出力されたビデオ信号を、LCDモニタ28に表示するための信号に変換する機能も有している。
LCDモニタ28は、撮影前に被写体の状態を監視・撮影した画像を確認し、メモリカードや前述した内蔵メモリ29に記録した画像データを表示するなどの役割を実施するためのモニタである。
ビデオAMP26は、TV信号表示ブロック16−9から出力されたビデオ信号を、75Ωインピーダンス変換するためのアンプである。ビデオジャック27はTVなどの外部表示機器と接続するためのジャックである。USBコネクタ31はパソコンなどの外部機器とUSB接続を行うためのコネクタである。
シリアルドライバ回路32−1は、パソコンなどの外部機器とシリアル通信を行うために、前述したシリアルブロック16−6の出力信号を電圧変換するための回路である。また、RS−232Cコネクタ32−2はパソコンなどの外部機器とシリアル接続を行うためのコネクタである。
The memory card slot 30 is a slot for mounting a removable memory card. In addition to the memory card, the memory card slot 30 can be mounted with a removable LAN card, a wireless LAN card, a Bluetooth card, and the like. The captured image can be transferred to an external device via the card.
The built-in
The
The LCD monitor 28 is a monitor for performing a role of monitoring the subject state before photographing and confirming the photographed image and displaying the image data recorded in the memory card or the built-in
The video AMP 26 is an amplifier for converting the impedance of the video signal output from the TV signal display block 16-9 to 75Ω. The video jack 27 is a jack for connecting to an external display device such as a TV. The
The serial driver circuit 32-1 is a circuit for converting the voltage of the output signal of the serial block 16-6 described above in order to perform serial communication with an external device such as a personal computer. The RS-232C connector 32-2 is a connector for performing serial connection with an external device such as a personal computer.
サブCPU19はROM・RAMをワンチップに内蔵したCPUであり、操作キーユニット(SW1〜SW13)やリモコン受光部6の出力信号をユーザの操作情報として、前述したCPUブロック16−3に出力する。また、このCPUブロック16−3から出力されるカメラの状態を、後述するサブLCD9、AF(自動焦点)LED12、ストロボLED13、ブザー21の制御信号に変換して、出力する。
サブLCD9は、例えば、撮影可能枚数など表示するための表示部である。LCDドライバ20は、前述したサブCPU19の出力信号により、前述したサブLCD9を駆動するためのドライブ回路である。
AF LED12は撮影時の合焦状態を表示するためのLEDであり、また、ストロボLED13はストロボ充電状態を表すためのLEDである。なお、このAF LED12とストロボLED13を、メモリカードアクセス中などの別の表示用途に使用しても良い。操作キーユニット(SW1〜SW13)は、ユーザが操作するキー回路であり、リモコン受光部6は、ユーザが操作したリモコン送信機の信号の受信部である。
音声記録ユニット23は、ユーザが音声信号を入力するマイク23−3、入力された音声信号を増幅するマイクAMP23−2、増幅された音声信号を記録する音声記録回路23−3からなっている。
音声再生ユニット24は、音声信号を出力するスピーカ24−3、記録された音声信号をスピーカ24−3から出力できる信号に変換する音声再生回路24−1、及び変換された音声信号を増幅し、かつスピーカ24−3を駆動するためのオーディオAMP24−2からなっている。
The
The sub LCD 9 is a display unit for displaying, for example, the number of shootable images. The
The
The
The audio reproduction unit 24 amplifies the speaker 24-3 that outputs the audio signal, the audio reproduction circuit 24-1 that converts the recorded audio signal into a signal that can be output from the speaker 24-3, and the converted audio signal, In addition, an audio AMP 24-2 for driving the speaker 24-3 is included.
図1のモードダイアルスイッチSW2を記録モードに設定することで、デジタルスチルカメラ3は記録モードで起動する。モードダイアルの設定は、図4における操作キーユニットに含まれるモードダイアルスイッチSW2の状態が記録モードオンになったことをCPUブロック16−3が検知し、モータドライバ7−5を制御して、鏡胴ユニット7を撮影可能位置に移動させる。
さらにCCD8、F/E−IC14、LCDディスプレイ(モニタ)28等の各部に電源を投入して動作を開始させる。各部の電源が投入されると、ファインダモードの動作が開始される。
ファインダモードでは、レンズを通して撮像素子(CCD)8に入射した光は、電気的に変換されてアナログ信号のR、G、BとしてCDS回路14−1、A/D変換器14−3に送られる。
A/D変換でデジタル信号に変換されたそれぞれの信号はデジタル信号処理IC(CCD2信号処理ブロック16−2)内のYUV変換部でYUV信号に変換されて、デジタルスチルカメラプロセッサ16内のメモリコントローラによってフレームメモリ(SDRAM15)に書き込まれる。
このYUV信号はメモリコントローラに読み出されて、表示出力制御部(TV信号表示ブロック16−9)を介してTVやLCDモニタ28へ送られて表示が行われる。この処理が1/30秒間隔で行われ、1/30秒ごとに更新されるファインダモードの表示となる。
By setting the mode dial switch SW2 of FIG. 1 to the recording mode, the digital
Further, the power is turned on to the respective parts such as the CCD 8, F /
In the finder mode, light incident on the image sensor (CCD) 8 through the lens is electrically converted and sent to the CDS circuit 14-1 and A / D converter 14-3 as analog signals R, G, B. .
Each signal converted into a digital signal by A / D conversion is converted into a YUV signal by a YUV converter in a digital signal processing IC (CCD2 signal processing block 16-2), and a memory controller in the digital
The YUV signal is read by the memory controller and sent to the TV or LCD monitor 28 via the display output control unit (TV signal display block 16-9) for display. This process is performed at 1/30 second intervals, and a finder mode display updated every 1/30 seconds is obtained.
また、デジタルスチルカメラプロセッサ16内のCCD I/Fブロック内に取り込まれたデジタルRGB信号より、画面の合焦度合いを示すAF評価値、露光状態を示すAE評価値が算出される。AF評価値データは、特徴データとしてCPU16−3に読み出されて、AFの処理に利用される。
AF評価値は、例えば、高周波成分抽出フィルタの出力積分値や、近接画素の輝度差の積分値によって作成される。合焦状態にあるときは、被写体のエッジ部分がはっきりとしているため、高周波成分が一番高くなる。これを利用して、AFによる合焦検知動作時は、それぞれのフォーカスレンズ位置におけるAF評価値を取得して、その極大になる点を合焦位置としてAFを実行する。
また、AE評価値は、デジタルRGB信号を幾つかのエリアに分割しそのエリア内の輝度データを用いる。各エリア内の画素に対して所定の閾値を超えるものを対象画素とし、その輝度値を加算、対象画素数で乗算することによって求められる。各エリアの輝度分布により、適正露光量を算出し、次のフレームの取り込みに対し補正を行う。
Also, an AF evaluation value indicating the degree of focusing on the screen and an AE evaluation value indicating the exposure state are calculated from the digital RGB signals captured in the CCD I / F block in the digital
The AF evaluation value is created by, for example, an output integrated value of a high frequency component extraction filter or an integrated value of a luminance difference between adjacent pixels. When in the in-focus state, the edge portion of the subject is clear, so the high frequency component is the highest. By utilizing this, at the time of the focus detection operation by AF, the AF evaluation value at each focus lens position is acquired, and AF is executed with the point where the maximum is obtained as the focus position.
The AE evaluation value is obtained by dividing the digital RGB signal into several areas and using luminance data in the areas. A pixel that exceeds a predetermined threshold with respect to pixels in each area is determined as a target pixel, and the luminance value is added and multiplied by the number of target pixels. An appropriate exposure amount is calculated based on the luminance distribution of each area, and correction is performed for capturing the next frame.
図1のレリーズシャッタボタンSW1が操作されると、合焦位置検知であるAF動作と静止画記録処理が行われる。レリーズシャッタボタンSW1が押されると、図4のカメラ操作部(操作キーユニットSW1〜13)から静止画撮影開始信号が回路内に取り込まれ、この回路がフレームレートに同期してモータドライバ7−5を介してレンズを駆動することにより山登りAFを実行する。
合焦範囲が無限から至近までの全領域であった場合、フォーカスレンズ7−2aは至近から無限、または無限から至近までの間の各フォーカス位置を移動し、デジタル信号処理IC(CCD1信号処理ブロック16−1)で作成された各フレーム(=各フォーカス位置)におけるAF評価値を回路が読み出す。各フォーカス位置のAF評価値が極大になる点を合焦位置として、フォーカスレンズ7−2aを合焦位置に移動する。
AF完了後にCCD8から取り出されたアナログRGB信号はデジタルRGB信号に変換され、デジタル信号処理IC(CCD1信号処理ブロック16−1)を介してフレームメモリ(SDRAM15)に格納される。デジタルRGB信号は再度デジタル信号処理回路(CCD2信号処理ブロック16−2)に読み込まれ、YUVデータに変換されて、フレームメモリに書き戻される。
スチル画像撮像時はYUV変換された画像データはデジタルスチルカメラプロセッサ16内の画像圧縮伸張回路(JPEG CODEC(ジェイペグ・コーデック)ブロック16−7)に送られる。画像圧縮伸張回路に送られたYUVデータは圧縮され、フレームメモリ(SDRAM15)に書き戻される。フレームメモリの圧縮データはデジタル信号処理回路を介して読み出され、フレームメモリ(SDRAM15)に格納される。
When the release shutter button SW1 of FIG. 1 is operated, an AF operation that is a focus position detection and a still image recording process are performed. When the release shutter button SW1 is pressed, a still image shooting start signal is taken into the circuit from the camera operation unit (operation key units SW1 to SW13) in FIG. 4, and this circuit synchronizes with the frame rate, and the motor driver 7-5. A hill-climbing AF is performed by driving the lens via
When the in-focus range is the entire region from infinity to close, the focus lens 7-2a moves each focus position from close to infinity or from infinity to close to the digital signal processing IC (CCD1 signal processing block). The circuit reads out the AF evaluation value in each frame (= each focus position) created in 16-1). The focus lens 7-2a is moved to the in-focus position with the point at which the AF evaluation value at each focus position is maximized as the in-focus position.
The analog RGB signal taken out from the CCD 8 after the AF is completed is converted into a digital RGB signal and stored in the frame memory (SDRAM 15) via the digital signal processing IC (CCD1 signal processing block 16-1). The digital RGB signal is read again by the digital signal processing circuit (CCD2 signal processing block 16-2), converted into YUV data, and written back to the frame memory.
At the time of capturing a still image, YUV converted image data is sent to an image compression / decompression circuit (JPEG CODEC (JPEG Codec) block 16-7) in the digital
図5はマクロモードを設定したときのLCD表示画面を示す図である。
次に本発明の特徴となる動作を説明する。図5において、画面の中央の十字マーク周辺がAF評価値の取得領域であり、点線で囲まれた部分である(実際のカメラ画面としてはこの点線の領域は表示しないようにしている)。
図1のカメラのレリーズシャッタボタンSW1は2段階のスイッチになっており、半押しで合焦動作を行い、さらに押し込むと記録動作を実行する。この時の合焦動作は、図5の画面に表示された十字マークの位置に基づいてその十字マークを囲むような矩形領域をAF評価値の取得領域として設定しかつ実行している。
図6はエリア位置変更モード画面を示す図である。図7はエリア位置移動画面を示す図である。図8はエリア位置決定画面を示す図である。図9はエリア拡大設定画面を示す図である。
第1の実施の形態として、本発明を搭載したデジタルスチルカメラについて説明する。図5の状態の時に、下/マクロスイッチSW10を押すと、図6のようなエリア位置変更モード画面へ変更される。
ここでエリア位置変更モードは画面上でのAF評価値取得領域を移動することを可能とするモードである。また、エリア枠変更モードはAF評価値取得領域の大きさを変更することを可能とするモードである。
エリア位置変更モード時、図3の上下左右スイッチSW7、SW10、SW11、SW8のいずれかを押すと、画面中心に表示されている十字マークを移動させることができる。画面内の任意の場所に移動させ(図7)、その後OKスイッチボタンSW12(図3)を押すと十字マークがその位置に固定される(図8)。固定した際にAF評価値を取得する領域が再設定される(図9)。
FIG. 5 is a diagram showing an LCD display screen when the macro mode is set.
Next, operations that characterize the present invention will be described. In FIG. 5, the area around the cross mark at the center of the screen is the AF evaluation value acquisition area, which is surrounded by a dotted line (the dotted line area is not displayed on the actual camera screen).
The release shutter button SW1 of the camera shown in FIG. 1 is a two-stage switch. When the shutter button SW1 is pressed halfway, a focusing operation is performed. When the shutter button is pressed further, a recording operation is performed. The focusing operation at this time is executed by setting a rectangular area surrounding the cross mark as an AF evaluation value acquisition area based on the position of the cross mark displayed on the screen of FIG.
FIG. 6 is a diagram showing an area position change mode screen. FIG. 7 is a diagram showing an area position moving screen. FIG. 8 is a diagram showing an area position determination screen. FIG. 9 is a diagram showing an area expansion setting screen.
As a first embodiment, a digital still camera equipped with the present invention will be described. When the down / macro switch SW10 is pressed in the state of FIG. 5, the screen changes to the area position change mode screen as shown in FIG.
Here, the area position change mode is a mode that makes it possible to move the AF evaluation value acquisition area on the screen. The area frame change mode is a mode that allows the size of the AF evaluation value acquisition area to be changed.
When one of the up / down / left / right switches SW7, SW10, SW11, SW8 in FIG. 3 is pressed in the area position change mode, the cross mark displayed at the center of the screen can be moved. When the user moves to an arbitrary position on the screen (FIG. 7) and then presses the OK switch button SW12 (FIG. 3), the cross mark is fixed at that position (FIG. 8). When fixed, the area for acquiring the AF evaluation value is reset (FIG. 9).
図10はAFエリア設定処理を説明するフローチャートである。図11は分割した測光エリアを示す図である。エリア位置を変更した後に、レリーズシャッタボタンSW1(図1)を半押しすると、フローチャートの処理が実行される。
まず、AFエリアの位置を確認する(S1)。確認した後、そのAFエリアに対応する測光エリアを選定する。この実施の形態では、測光エリアを図11のように画面を9つに分割した測光エリアとしている。今、図8の状態であるのならば、図11に示す測光エリア3がAFエリアに対応する測光エリアである。
次に、その選定した測光エリア、すなわち、被写体を含むもしくは被写体に近い測光エリアと被写体周辺の測光エリアの輝度を算出し、AFエリアと周辺の測光エリア輝度差が大きいかどうかを判断する(S2)。選定した測光エリアの輝度値と周辺の測光エリアの輝度値との差が大きい場合はステップS4へ、そうでない場合はステップS3へ進む。
ステップS3へ進んだ場合はその選定した測光エリアと周辺の測光エリアの輝度値が所定の輝度値かどうかを、すなわち、被写体及び周辺の測光エリアの輝度が低いかどうかを判断する。ここで所定の輝度とは、山登りAFが可能な輝度を指し、この実施の形態ではLv3としている。
もし選定測光エリアと周辺の測光エリアが所定の輝度値を下回るのであれば、ステップS4へ進んで、全体AFエリアの拡大処理を行う。そうでなければステップS5へ進んで、山登りAF処理を開始する。
上述したように、ステップS4では図8の点線で示したAFエリアを拡大する処理を行う。実際には、AFエリアを拡大し過ぎると背景側に引っ張られる恐れがあるため、現状では縦・横ともに20%拡大することにする(図9)。ステップS5で山登りAFを開始し、ピーク位置を算出する。
FIG. 10 is a flowchart for explaining the AF area setting process. FIG. 11 is a diagram showing the divided photometry areas. When the release shutter button SW1 (FIG. 1) is pressed halfway after changing the area position, the processing of the flowchart is executed.
First, the position of the AF area is confirmed (S1). After confirmation, a photometric area corresponding to the AF area is selected. In this embodiment, the photometric area is a photometric area obtained by dividing the screen into nine as shown in FIG. Now, if it is in the state of FIG. 8, the
Next, the luminance of the selected photometric area, that is, the photometric area including or close to the subject and the photometric area around the subject is calculated, and it is determined whether the luminance difference between the AF area and the peripheral photometric area is large (S2). ). If the difference between the luminance value of the selected photometric area and the luminance value of the surrounding photometric area is large, the process proceeds to step S4. Otherwise, the process proceeds to step S3.
When the process proceeds to step S3, it is determined whether or not the luminance values of the selected photometric area and the peripheral photometric area are predetermined luminance values, that is, whether the luminance of the subject and the peripheral photometric area is low. Here, the predetermined luminance refers to luminance capable of hill-climbing AF, and is Lv3 in this embodiment.
If the selected photometry area and the surrounding photometry area are below a predetermined luminance value, the process proceeds to step S4, and the entire AF area is enlarged. Otherwise, the process proceeds to step S5, and the mountain climbing AF process is started.
As described above, in step S4, processing for enlarging the AF area indicated by the dotted line in FIG. 8 is performed. Actually, if the AF area is enlarged too much, it may be pulled to the background side, so at present, it is enlarged 20% both vertically and horizontally (FIG. 9). In step S5, hill-climbing AF is started and a peak position is calculated.
次に、第2の実施の形態として、本発明を搭載したデジタルスチルカメラについて説明する。この第2の実施の形態において、AFエリアの選択方法は第1の実施の形態と同じである。
図12はAFエリア設定処理を説明するフローチャートである。図13はAFエリアを示す図である。図14はAFエリア全体を拡大して示す図である。図15は破線で輝度が高い部分を示している分割された測光エリアを示す図である。図16は部分的に拡大されたAFエリアを示す図である。
図1のレリーズシャッタボタンSW1を半押しすると、図12のフローチャートの処理が実行される。まず、AFエリアの位置を確認する(S10)。確認した後、そのAFエリアに対応する測光エリアを選定する。測光エリアは図11に示すとおりで、今、図13に示す状態であるならば、図11の測光エリア5がAFエリアに対応する測光エリアである。
次に、その選定した測光エリアとその周辺の測光エリアの輝度を算出し、AFエリア(被写体)と周辺の測光エリアの輝度差が大きいかどうかを判断する(S11)。選定した測光エリアの輝度値と周辺の測光エリアの輝度値との差が大きい場合はステップS13へ、そうでない場合はステップS12へ進む。
Next, a digital still camera equipped with the present invention will be described as a second embodiment. In the second embodiment, the AF area selection method is the same as in the first embodiment.
FIG. 12 is a flowchart for explaining the AF area setting process. FIG. 13 is a diagram showing an AF area. FIG. 14 is an enlarged view showing the entire AF area. FIG. 15 is a diagram showing a divided photometric area in which a broken line indicates a portion with high luminance. FIG. 16 shows a partially enlarged AF area.
When the release shutter button SW1 in FIG. 1 is half-pressed, the processing in the flowchart in FIG. 12 is executed. First, the position of the AF area is confirmed (S10). After confirmation, a photometric area corresponding to the AF area is selected. The photometry area is as shown in FIG. 11, and if it is in the state shown in FIG. 13, the
Next, the brightness of the selected photometry area and the surrounding photometry area is calculated, and it is determined whether the brightness difference between the AF area (subject) and the surrounding photometry area is large (S11). If the difference between the luminance value of the selected photometric area and the luminance value of the surrounding photometric area is large, the process proceeds to step S13. Otherwise, the process proceeds to step S12.
ステップS12へ進んだ場合はその選定した測光エリア(被写体)と周辺の測光エリアの輝度値が所定の輝度値かどうか、すなわち選定した測光エリア(被写体)と周辺の測光エリアの輝度が低いかどうかを判断する。この所定の輝度値は第1の実施の形態と同じで行っている。もし選定測光エリアと周辺の測光エリアが所定の輝度値を下回るのであれば、ステップS15へ進み、そうでなければステップS16へ進む。
ステップS15は第1の実施形態のステップS4と同じでAFエリアを全体的に拡大し(図14)、ステップS16へ進む。ステップS13では選定した測光エリアと周辺の測光エリアの輝度差を比較する。
今、測光エリア5(図11)が選定した測光エリアにあたるため、周辺の測光エリアとしては測光エリア1〜4、6〜9が該当する。この測光エリアの中から、選定したエリアよりも輝度値が大きい測光エリア番号を抽出し、ステップS14へ進む。
ステップS14ではステップS13で抽出された測光エリアを読み出し、その測光エリアがある方向にのみAFエリアを拡大する。例えば、図15のように測光エリア6、測光エリア8、測光エリア9が記録されている場合は、AFエリアは右・斜め下・下方向に拡大される(図16)。ステップS16では決定したAFエリアに対して、山登りAFを開始し、ピーク位置を算出する。
上記の第1の及び第2の実施の形態のように、マクロモードのような撮影に対し、被写体の輝度が低いもしくは低コントラストのような山登りAFが苦手とする環境に対しても、輝度の高いほうにAFエリアを拡大することによりピーク位置を算出することが可能となる。また、近接した際に、カメラが影となり合焦しづらい環境においても、AFエリアを拡大することにより改善される。
If the process proceeds to step S12, whether or not the luminance values of the selected photometric area (subject) and the surrounding photometric areas are predetermined luminance values, that is, whether the luminance values of the selected photometric area (subject) and the peripheral photometric areas are low. Judging. This predetermined luminance value is the same as that in the first embodiment. If the selected photometry area and the surrounding photometry area are below the predetermined luminance value, the process proceeds to step S15, and if not, the process proceeds to step S16.
Step S15 is the same as step S4 of the first embodiment, and the AF area is enlarged as a whole (FIG. 14), and the process proceeds to step S16. In step S13, the luminance difference between the selected photometry area and the surrounding photometry areas is compared.
Since the photometric area 5 (FIG. 11) corresponds to the selected photometric area, the
In step S14, the photometry area extracted in step S13 is read, and the AF area is enlarged only in the direction in which the photometry area is present. For example, when the photometry area 6, photometry area 8, and photometry area 9 are recorded as shown in FIG. 15, the AF area is enlarged rightward, obliquely downward, and downward (FIG. 16). In step S16, hill-climbing AF is started for the determined AF area, and the peak position is calculated.
As in the first and second embodiments described above, the luminance of the subject is low even in an environment where the subject is low in luminance or low in contrast, such as low-contrast AF. The peak position can be calculated by enlarging the AF area to the higher side. Further, even in an environment where the camera becomes a shadow and is difficult to focus when close to the camera, it can be improved by enlarging the AF area.
3 デジタルスチルカメラ、7 鏡胴ユニット、7−2a フォーカスレンズ、7−5 モータドライバ、16 測光手段(デジタルスチルカメラプロセッサ)、16−3 CPU、12 自動焦点検知手段(AF LED)、SW1 レリーズシャッタボタン、SW2 モードダイアルスイッチ、SW8 被写体エリア設定手段(右スイッチ)、SW10 被写体エリア設定手段(下/マクロスイッチ)、SW11 被写体エリア設定手段(左/画像確認スイッチ)、SW12 被写体エリア設定手段(OKスイッチ)、SW13 電源スイッチ 3 digital still camera, 7 lens barrel unit, 7-2a focus lens, 7-5 motor driver, 16 photometric means (digital still camera processor), 16-3 CPU, 12 auto focus detection means (AF LED), SW1 release shutter Button, SW2 mode dial switch, SW8 subject area setting means (right switch), SW10 subject area setting means (down / macro switch), SW11 subject area setting means (left / image confirmation switch), SW12 subject area setting means (OK switch) ), SW13 power switch
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005324145A JP4714561B2 (en) | 2005-11-08 | 2005-11-08 | Imaging apparatus and imaging method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005324145A JP4714561B2 (en) | 2005-11-08 | 2005-11-08 | Imaging apparatus and imaging method |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007133044A true JP2007133044A (en) | 2007-05-31 |
JP4714561B2 JP4714561B2 (en) | 2011-06-29 |
Family
ID=38154778
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005324145A Expired - Fee Related JP4714561B2 (en) | 2005-11-08 | 2005-11-08 | Imaging apparatus and imaging method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4714561B2 (en) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010169825A (en) * | 2009-01-21 | 2010-08-05 | Sanyo Electric Co Ltd | Imaging device |
JP2013213875A (en) * | 2012-03-30 | 2013-10-17 | Nikon Corp | Focus adjustment device, imaging device, and focus adjustment program |
US8928799B2 (en) | 2011-10-13 | 2015-01-06 | Ricoh Company, Ltd. | Imaging device and imaging method to perform autofocus operation to a subject |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02163715A (en) * | 1988-12-16 | 1990-06-25 | Kyocera Corp | Automatic focus adjustor |
JPH08289192A (en) * | 1995-04-17 | 1996-11-01 | Sanyo Electric Co Ltd | Auto-focusing video camera |
JPH11215426A (en) * | 1997-11-19 | 1999-08-06 | Ricoh Co Ltd | Automatic focusing system |
JP2000155261A (en) * | 1998-11-24 | 2000-06-06 | Canon Inc | Focus detecting method, focus detector and storage medium storing focus detecting method |
JP2002333573A (en) * | 2001-05-11 | 2002-11-22 | Fuji Photo Film Co Ltd | Camera |
-
2005
- 2005-11-08 JP JP2005324145A patent/JP4714561B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02163715A (en) * | 1988-12-16 | 1990-06-25 | Kyocera Corp | Automatic focus adjustor |
JPH08289192A (en) * | 1995-04-17 | 1996-11-01 | Sanyo Electric Co Ltd | Auto-focusing video camera |
JPH11215426A (en) * | 1997-11-19 | 1999-08-06 | Ricoh Co Ltd | Automatic focusing system |
JP2000155261A (en) * | 1998-11-24 | 2000-06-06 | Canon Inc | Focus detecting method, focus detector and storage medium storing focus detecting method |
JP2002333573A (en) * | 2001-05-11 | 2002-11-22 | Fuji Photo Film Co Ltd | Camera |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010169825A (en) * | 2009-01-21 | 2010-08-05 | Sanyo Electric Co Ltd | Imaging device |
US8928799B2 (en) | 2011-10-13 | 2015-01-06 | Ricoh Company, Ltd. | Imaging device and imaging method to perform autofocus operation to a subject |
JP2013213875A (en) * | 2012-03-30 | 2013-10-17 | Nikon Corp | Focus adjustment device, imaging device, and focus adjustment program |
Also Published As
Publication number | Publication date |
---|---|
JP4714561B2 (en) | 2011-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4943721B2 (en) | Color noise removal method for image data and imaging apparatus using the method | |
JP4824586B2 (en) | Imaging device | |
US20060098107A1 (en) | Method and apparatus for removing noise from a digital image | |
JP2012002951A (en) | Imaging device, method for detecting in-focus position and in-focus position detection program | |
TW201301866A (en) | Image processing device capable of generating wide-range image, image processing method, and recording medium | |
JP2005062370A (en) | Imaging apparatus | |
JP4855155B2 (en) | Imaging apparatus and imaging method using the same | |
JP5429588B2 (en) | Imaging apparatus and imaging method | |
JP6706167B2 (en) | Imaging device, image synthesizing method, and program | |
JP4714561B2 (en) | Imaging apparatus and imaging method | |
JP2012019341A (en) | Imaging device, and method and program for controlling the same | |
JP5803233B2 (en) | Imaging apparatus and imaging method | |
JP5144451B2 (en) | Imaging apparatus and flash control method | |
JP5418553B2 (en) | Imaging apparatus and imaging method using the same | |
JP2003319246A (en) | Digital camera | |
JP2010020081A (en) | Image capturing apparatus and method, and control program and storage medium | |
JP5195887B2 (en) | Imaging apparatus and imaging method | |
JP2006349908A (en) | Imaging apparatus and imaging method | |
JP2007110221A (en) | Imaging apparatus | |
JP5641411B2 (en) | Imaging apparatus, electronic device, image processing system, and computer-readable recording medium | |
JP2013027022A (en) | Imaging apparatus and timing signal control method | |
JP5799550B2 (en) | Imaging apparatus, imaging method, and imaging program | |
KR101086413B1 (en) | Method of controlling digital image processing apparatus wherein image shaking is corrected | |
JP2010204303A (en) | Imaging apparatus | |
JP4964830B2 (en) | Omnidirectional imaging apparatus and omnidirectional image imaging control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20081016 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20081020 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20101124 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20101130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20101217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110125 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110222 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110315 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110328 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4714561 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |