JP2011043776A - Electronic camera - Google Patents

Electronic camera Download PDF

Info

Publication number
JP2011043776A
JP2011043776A JP2009193615A JP2009193615A JP2011043776A JP 2011043776 A JP2011043776 A JP 2011043776A JP 2009193615 A JP2009193615 A JP 2009193615A JP 2009193615 A JP2009193615 A JP 2009193615A JP 2011043776 A JP2011043776 A JP 2011043776A
Authority
JP
Japan
Prior art keywords
focus
evaluation areas
evaluation
luminance
distance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2009193615A
Other languages
Japanese (ja)
Inventor
Kazuhiro Tsujino
和廣 辻野
Daisuke Mizuguchi
大介 水口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Priority to JP2009193615A priority Critical patent/JP2011043776A/en
Publication of JP2011043776A publication Critical patent/JP2011043776A/en
Pending legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an electronic camera capable of maintaining focusing performance for a field including a light source. <P>SOLUTION: Nine focus areas are allotted to an imaging surface 16f. A CPU 30 repeatedly changes a distance from a focus lens 12 to the imaging surface 16f, and repeatedly detects a high frequency component of a field image captured in each of the nine focus areas, that means, an AF evaluated value. The CPU 30 repeatedly selects one or two or more focus areas being out of a high luminance condition based on luminance information of the field image captured in each of the nine focus areas, and adjusts the distance from the focus lens 12 to the imaging surface 16f to a distance corresponding to a focusing point based on the AF evaluated value detected corresponding to the one or two or more selected focus areas. The focusing performance for the field including the light source is maintained. <P>COPYRIGHT: (C)2011,JPO&INPIT

Description

この発明は、電子カメラに関し、特にフォーカスレンズから撮像面までの距離を合焦点に対応する距離に調整する、電子カメラに関する。   The present invention relates to an electronic camera, and more particularly to an electronic camera that adjusts a distance from a focus lens to an imaging surface to a distance corresponding to a focal point.

この種の装置の一例が、特許文献1に開示されている。この背景技術によれば、フォーカスエリアは複数のエリアに分割される。焦点評価値および測光値は、分割された複数のエリアの各々に対応して、至近から無限遠までの全域で取得される。さらに、測光値の最大値および最小値が、分割された複数のエリアの各々に対応して検出される。   An example of this type of device is disclosed in Patent Document 1. According to this background art, the focus area is divided into a plurality of areas. The focus evaluation value and the photometric value are acquired in the entire area from the nearest to infinity corresponding to each of the divided areas. Further, the maximum value and the minimum value of the photometric values are detected corresponding to each of the divided areas.

焦点評価値を参照した合焦位置の検出にあたっては、検出された最大値および最小値の差分が許容値以上のエリアが除外される。すなわち、測光値の最大値と最小値の差分が許容値以上のエリアには高輝度の点光源が存在するものとみなされ、このようなエリアを除外して合焦位置の検出処理が実行される。これによって、点光源が存在する被写界についても正確に合焦位置を検出することができる。   In detecting the in-focus position with reference to the focus evaluation value, an area where the difference between the detected maximum value and minimum value is an allowable value or more is excluded. That is, it is considered that a high-brightness point light source exists in an area where the difference between the maximum value and the minimum value of the photometric value is greater than or equal to the allowable value, and the focus position detection process is performed excluding such an area. The As a result, the in-focus position can be accurately detected even in the field where the point light source exists.

特開2007−25559号公報JP 2007-25559 A

しかし、背景技術では、点光源が存在するエリアの除外によって合焦位置の検出のために参照できるエリア数が減少するため、合焦性能が低下するおそれがある。   However, in the background art, since the number of areas that can be referred to for the detection of the in-focus position is reduced by excluding the area where the point light source exists, the in-focus performance may be deteriorated.

それゆえに、この発明の主たる目的は、光源を含む被写界に対する合焦性能を維持することができる、電子カメラを提供することである。   Therefore, a main object of the present invention is to provide an electronic camera capable of maintaining a focusing performance with respect to an object field including a light source.

この発明に従う電子カメラ(10:実施例で相当する参照符号。以下同じ)は、フォーカスレンズ(12)から複数の評価エリア(FB_0~FB_8)を有する撮像面(16f)までの距離を繰り返し変更する変更手段(S31)、複数の評価エリアの各々で捉えられた被写界像の高周波成分を変更手段の変更処理と並列して繰り返し検出する検出手段(S23, S25, S33)、複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを複数の評価エリアの中から選択する処理を変更手段の変更処理と並列して繰り返し実行する選択手段(S53~S65)、および選択手段によって選択された1または2以上の評価エリアに対応して検出手段によって検出された高周波成分に基づいてフォーカスレンズから撮像面までの距離を合焦点に対応する特定距離に調整する調整手段(S67~S71, S29, S35~S41)を備える。   The electronic camera according to the present invention (10: reference numeral corresponding to the embodiment; the same applies hereinafter) repeatedly changes the distance from the focus lens (12) to the imaging surface (16f) having a plurality of evaluation areas (FB_0 to FB_8). Change means (S31), detection means (S23, S25, S33) for repeatedly detecting high-frequency components of the object scene image captured in each of the plurality of evaluation areas in parallel with the change processing of the change means, multiple evaluation areas The process of selecting one or more evaluation areas out of the high luminance condition from a plurality of evaluation areas based on the luminance information of the object scene image captured in each of the above is repeated in parallel with the changing process of the changing means The selection means (S53 to S65) to be executed, and the distance from the focus lens to the imaging surface is focused based on the high frequency component detected by the detection means corresponding to one or more evaluation areas selected by the selection means Corresponding to Comprise adjusting means for adjusting to a specific distance (S67 ~ S71, S29, S35 ~ S41).

好ましくは、選択手段は、複数の評価エリアの各々で捉えられた被写界像の輝度情報を変更手段の変更処理と並列して検出する輝度情報検出手段(S53~S55)、および輝度情報検出手段によって検出された輝度情報を基準と比較する比較手段(S57~S61)を含む。   Preferably, the selection unit includes luminance information detection unit (S53 to S55) for detecting the luminance information of the object scene image captured in each of the plurality of evaluation areas in parallel with the changing process of the changing unit, and luminance information detection Comparing means (S57 to S61) for comparing the luminance information detected by the means with a reference is included.

さらに好ましくは、輝度情報は変更手段の変更処理に伴う輝度の変化量および/または設定値を上回る輝度を示す画素の数をパラメータとして含む。   More preferably, the luminance information includes, as a parameter, the number of pixels that exhibit a luminance change amount and / or a luminance value exceeding a set value associated with the changing process of the changing means.

好ましくは、調整手段は、極大値を示す高周波成分が検出された特定評価エリアを選択手段によって選択された1または2以上の評価エリアの中から抽出する抽出手段(S69~S71)、および特定評価エリアで検出された高周波成分の変化量に基づいて特定距離への調整処理を実行する調整処理手段(S41)を含む。   Preferably, the adjustment means extracts extraction means (S69 to S71) for extracting the specific evaluation area where the high frequency component indicating the maximum value is detected from one or more evaluation areas selected by the selection means, and the specific evaluation. Adjustment processing means (S41) is included for executing adjustment processing to a specific distance based on the amount of change in the high-frequency component detected in the area.

さらに好ましくは、調整手段は特定評価エリアで検出された高周波成分の変化量が閾値を上回るとき調整処理手段を起動する起動制御手段(S39)をさらに含む。   More preferably, the adjustment means further includes an activation control means (S39) that activates the adjustment processing means when the amount of change in the high-frequency component detected in the specific evaluation area exceeds a threshold value.

この発明に従う合焦制御プログラムは、電子カメラ(10)のプロセッサ(30)に、フォーカスレンズ(12)から複数の評価エリア(FB_0~FB_8)を有する撮像面(16f)までの距離を繰り返し変更する変更ステップ(S31)、複数の評価エリアの各々で捉えられた被写界像の高周波成分を変更ステップの変更処理と並列して繰り返し検出する検出ステップ(S23, S25, S33)、複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを複数の評価エリアの中から選択する処理を変更ステップの変更処理と並列して繰り返し実行する選択ステップ(S53~S65)、および選択ステップによって選択された1または2以上の評価エリアに対応して検出ステップによって検出された高周波成分に基づいてフォーカスレンズから撮像面までの距離を合焦点に対応する距離に調整する調整ステップ(S67~S71, S29, S35~S41)を実行させるための、合焦制御プログラムである。   The focus control program according to the present invention repeatedly changes the distance from the focus lens (12) to the imaging surface (16f) having a plurality of evaluation areas (FB_0 to FB_8) in the processor (30) of the electronic camera (10). A change step (S31), a detection step (S23, S25, S33) for repeatedly detecting high-frequency components of the object scene image captured in each of the plurality of evaluation areas in parallel with the change process of the change step, a plurality of evaluation areas The process of selecting one or more evaluation areas out of the high luminance condition from a plurality of evaluation areas based on the luminance information of the object scene image captured in each of the above is repeated in parallel with the change process of the change step Imaging from the focus lens based on the selection step (S53 to S65) to be executed and the high-frequency component detected by the detection step corresponding to one or more evaluation areas selected by the selection step Adjustment step of adjusting the distance to a distance corresponding to the focal point for executing (S67 ~ S71, S29, S35 ~ S41), a focus control program.

この発明に従う合焦制御方法は、電子カメラ(10)によって実行される合焦制御方法であって、フォーカスレンズ(12)から複数の評価エリア(FB_0~FB_8)を有する撮像面(16f)までの距離を繰り返し変更する変更ステップ(S31)、複数の評価エリアの各々で捉えられた被写界像の高周波成分を変更ステップの変更処理と並列して繰り返し検出する検出ステップ(S23, S25, S33)、複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを複数の評価エリアの中から選択する処理を変更ステップの変更処理と並列して繰り返し実行する選択ステップ(S53~S65)、および選択ステップによって選択された1または2以上の評価エリアに対応して検出ステップによって検出された高周波成分に基づいてフォーカスレンズから撮像面までの距離を合焦点に対応する距離に調整する調整ステップ(S67~S71, S29, S35~S41)を備える。   The focus control method according to the present invention is a focus control method executed by the electronic camera (10), from the focus lens (12) to the imaging surface (16f) having a plurality of evaluation areas (FB_0 to FB_8). A change step (S31) for repeatedly changing the distance, and a detection step (S23, S25, S33) for repeatedly detecting high-frequency components of the object scene image captured in each of the plurality of evaluation areas in parallel with the change process of the change step. A process of changing the change step is a process of selecting one or more evaluation areas out of the high luminance condition from the plurality of evaluation areas based on the luminance information of the object scene image captured in each of the plurality of evaluation areas. Focus step based on the selection step (S53 to S65) that is repeatedly executed in parallel and the high-frequency component detected by the detection step corresponding to one or more evaluation areas selected by the selection step Adjustment step of adjusting the lens to the distance corresponding to the distance to the imaging surface at a focal point comprising a (S67 ~ S71, S29, S35 ~ S41).

この発明によれば、高輝度条件を満足する1または2以上の評価エリアを選択する処理は、フォーカスレンズから撮像面までの距離を変更する処理と並列して繰り返し実行される。一方、光源の周辺に現れる高輝度部分の広がりは、光源に対する合焦度によって相違する。したがって、被写界に光源が存在する場合、選択される1または2以上の評価エリアは、フォーカスレンズから撮像面までの距離の変更に伴って変動し得る。フォーカスレンズから撮像面までの距離は、こうして選択される1または2以上の評価エリアに対応する高周波成分に基づいて、合焦点に対応する距離に調整される。これによって、光源を含む被写界に対する合焦性能を維持することができる。   According to the present invention, the process of selecting one or more evaluation areas that satisfy the high luminance condition is repeatedly executed in parallel with the process of changing the distance from the focus lens to the imaging surface. On the other hand, the spread of the high-luminance portion that appears around the light source differs depending on the degree of focus on the light source. Therefore, when a light source is present in the object scene, one or more evaluation areas to be selected can vary with a change in the distance from the focus lens to the imaging surface. The distance from the focus lens to the imaging surface is adjusted to the distance corresponding to the focal point based on the high-frequency component corresponding to one or more evaluation areas selected in this way. Thereby, it is possible to maintain the focusing performance with respect to the object field including the light source.

この発明の上述の目的,その他の目的,特徴および利点は、図面を参照して行う以下の実施例の詳細な説明から一層明らかとなろう。   The above object, other objects, features and advantages of the present invention will become more apparent from the following detailed description of embodiments with reference to the drawings.

この発明の基本的構成を示すブロック図である。It is a block diagram which shows the basic composition of this invention. この発明の一実施例の構成を示すブロック図である。It is a block diagram which shows the structure of one Example of this invention. 単一の測光エリアおよび9個のフォーカスエリアの割り当て状態の一例を示す図解図である。It is an illustration figure which shows an example of the allocation state of a single photometry area and nine focus areas. 図2実施例に適用されるフォーカス評価回路の構成の一例を示すブロック図である。FIG. 3 is a block diagram showing an example of a configuration of a focus evaluation circuit applied to the embodiment in FIG. 2; 9個のフォーカスエリアに対応して検出された9個のAF評価値をレンズ位置毎に登録するためのレジスタの構成の一例を示す図解図である。It is an illustration figure which shows an example of a structure of the register | resistor for registering nine AF evaluation values detected corresponding to nine focus areas for every lens position. 9個のフォーカスエリアに対応して検出された9個の高輝度カウント値をレンズ位置毎に登録するためのレジスタの構成の一例を示す図解図である。It is an illustration figure which shows an example of a structure of the register | resistor for registering nine high-intensity count values detected corresponding to nine focus areas for every lens position. 9個のフォーカスエリアに対応して検出された9個の輝度変化率をレンズ位置毎に登録するためのレジスタの構成の一例を示す図解図である。It is an illustration figure which shows an example of a structure of the register | resistor for registering nine luminance change rates detected corresponding to nine focus areas for every lens position. 合焦調整のために参照すべき評価エリアを識別するためのレジスタの構成の一例を示す図解図である。It is an illustration figure which shows an example of a structure of the register | resistor for identifying the evaluation area which should be referred for focus adjustment. 撮像面で捉えられた被写界の一例を示す図解図である。It is an illustration figure which shows an example of the to-be-photographed field caught by the imaging surface. 図9に示す被写界に9個のフォーカスエリアを割り当てた状態を示す図解図である。FIG. 10 is an illustrative view showing a state in which nine focus areas are assigned to the object scene shown in FIG. 9. 一部のフォーカスエリアで検出される合焦曲線の一例を示すグラフである。It is a graph which shows an example of the focusing curve detected in a part of focus area. 図2実施例に適用されるCPUの動作の一部を示すフロー図である。It is a flowchart which shows a part of operation | movement of CPU applied to the FIG. 2 Example. 図2実施例に適用されるCPUの動作の他の一部を示すフロー図である。It is a flowchart which shows a part of other operation | movement of CPU applied to the FIG. 2 Example. 図2実施例に適用されるCPUの動作のその他の一部を示すフロー図である。FIG. 11 is a flowchart showing still another portion of behavior of the CPU applied to the embodiment in FIG. 2; 図2実施例に適用されるCPUの動作のさらにその他の一部を示すフロー図である。FIG. 10 is a flowchart showing yet another portion of behavior of the CPU applied to the embodiment in FIG. 2; 図2実施例に適用されるCPUの動作の他の一部を示すフロー図である。It is a flowchart which shows a part of other operation | movement of CPU applied to the FIG. 2 Example.

以下、この発明の実施の形態を図面を参照しながら説明する。
[基本的構成]
Embodiments of the present invention will be described below with reference to the drawings.
[Basic configuration]

図1を参照して、この発明の電子カメラは、基本的に次のように構成される。変更手段1は、フォーカスレンズ5から複数の評価エリアを有する撮像面6までの距離を繰り返し変更する。検出手段2は、複数の評価エリアの各々で捉えられた被写界像の高周波成分を変更手段1の変更処理と並列して繰り返し検出する。選択手段3は、複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを複数の評価エリアの中から選択する処理を変更手段1の変更処理と並列して繰り返し実行する。調整手段4は、選択手段3によって選択された1または2以上の評価エリアに対応して検出手段2によって検出された高周波成分に基づいてフォーカスレンズ5から撮像面6までの距離を合焦点に対応する距離に調整する。   Referring to FIG. 1, the electronic camera of the present invention is basically configured as follows. The changing unit 1 repeatedly changes the distance from the focus lens 5 to the imaging surface 6 having a plurality of evaluation areas. The detection unit 2 repeatedly detects the high-frequency component of the object scene image captured in each of the plurality of evaluation areas in parallel with the change process of the change unit 1. The selection unit 3 changes the process of selecting one or more evaluation areas out of the high luminance condition from the plurality of evaluation areas based on the luminance information of the object scene image captured in each of the plurality of evaluation areas. It is repeatedly executed in parallel with the changing process of the means 1. The adjusting means 4 corresponds to the focal point the distance from the focus lens 5 to the imaging surface 6 based on the high-frequency component detected by the detecting means 2 corresponding to one or more evaluation areas selected by the selecting means 3. Adjust to the distance you want.

高輝度条件を満足する1または2以上の評価エリアを選択する処理は、フォーカスレンズ5から撮像面6までの距離を変更する処理と並列して繰り返し実行される。一方、光源の周辺に現れる高輝度部分の広がりは、光源に対する合焦度によって相違する。したがって、被写界に光源が存在する場合、選択される1または2以上の評価エリアは、フォーカスレンズ5から撮像面6までの距離の変更に伴って変動し得る。フォーカスレンズ5から撮像面6までの距離は、こうして選択される1または2以上の評価エリアに対応する高周波成分に基づいて、合焦点に対応する距離に調整される。これによって、光源を含む被写界に対する合焦性能を維持することができる。
[実施例]
The process of selecting one or more evaluation areas that satisfy the high luminance condition is repeatedly executed in parallel with the process of changing the distance from the focus lens 5 to the imaging surface 6. On the other hand, the spread of the high-luminance portion that appears around the light source differs depending on the degree of focus on the light source. Therefore, when a light source is present in the object scene, the selected one or more evaluation areas may vary with a change in the distance from the focus lens 5 to the imaging surface 6. The distance from the focus lens 5 to the imaging surface 6 is adjusted to the distance corresponding to the focal point based on the high-frequency component corresponding to one or more evaluation areas selected in this way. Thereby, it is possible to maintain the focusing performance with respect to the object field including the light source.
[Example]

図2を参照して、この実施例のディジタルカメラ10は、ドライバ18aおよび18bによってそれぞれ駆動されるフォーカスレンズ12および絞り機構14を含む。フォーカスレンズ12および絞り機構14を経た被写界の光学像は、撮像装置16の撮像面16fに照射され、光電変換を施される。これによって、被写界像を表す電荷が生成される。   Referring to FIG. 2, the digital camera 10 of this embodiment includes a focus lens 12 and an aperture mechanism 14 driven by drivers 18a and 18b, respectively. The optical image of the object scene that has passed through the focus lens 12 and the diaphragm mechanism 14 is irradiated onto the imaging surface 16f of the imaging device 16 and subjected to photoelectric conversion. As a result, a charge representing the object scene image is generated.

電源が投入されると、CPU30は、スルー画像処理を実行するべく、ドライバ18cにプリ露光動作および間引き読み出し動作の繰り返しを命令する。ドライバ18cは、SG(Signal Generator)20から周期的に発生する垂直同期信号Vsyncに応答して、撮像面にプリ露光を施し、かつ撮像面で生成された電荷を間引き態様で読み出す。撮像装置16からは、読み出された電荷に基づく低解像度の生画像データが、ラスタ走査態様で周期的に出力される。   When the power is turned on, the CPU 30 instructs the driver 18c to repeat the pre-exposure operation and the thinning-out reading operation in order to execute through image processing. In response to a vertical synchronization signal Vsync periodically generated from an SG (Signal Generator) 20, the driver 18c performs pre-exposure on the imaging surface and reads out the charges generated on the imaging surface in a thinning manner. From the imaging device 16, low-resolution raw image data based on the read charges is periodically output in a raster scanning manner.

信号処理回路22は、撮像装置16から出力された生画像データに白バランス調整,色分離,YUV変換などの処理を施し、これによって作成されたYUV形式の画像データをメモリ制御回路32を通してSDRAM34に書き込む。LCDドライバ36は、SDRAM34に書き込まれた画像データをメモリ制御回路32を通して繰り返し読み出し、読み出された画像データに基づいてLCDモニタ38を駆動する。この結果、被写界のリアルタイム動画像(スルー画像)がモニタ画面に表示される。   The signal processing circuit 22 performs processing such as white balance adjustment, color separation, and YUV conversion on the raw image data output from the imaging device 16, and the YUV format image data thus created is transferred to the SDRAM 34 through the memory control circuit 32. Write. The LCD driver 36 repeatedly reads the image data written in the SDRAM 34 through the memory control circuit 32, and drives the LCD monitor 38 based on the read image data. As a result, a real-time moving image (through image) of the object scene is displayed on the monitor screen.

図3を参照して、撮像面の中央には測光エリアEAが割り当てられる。輝度評価回路24は、信号処理回路22から出力されたYデータのうち測光エリアEAに属するYデータを、垂直同期信号Vsyncが発生する毎に積分する。積分値つまり輝度評価値は、垂直同期信号Vsyncの発生周期で輝度評価回路24から出力される。CPU30は、輝度評価回路24から出力された輝度評価値に基づいて適正EV値を算出するべく、上述のスルー画像処理と並列してスルー画像用AE処理(簡易AE処理)を繰り返し実行する。算出された適正EV値を定義する絞り量および露光時間は、ドライバ18bおよび18cにそれぞれ設定される。この結果、LCDモニタ38に表示されるスルー画像の明るさが適度に調整される。   Referring to FIG. 3, a photometric area EA is assigned to the center of the imaging surface. The luminance evaluation circuit 24 integrates Y data belonging to the photometry area EA among the Y data output from the signal processing circuit 22 every time the vertical synchronization signal Vsync is generated. The integral value, that is, the luminance evaluation value is output from the luminance evaluation circuit 24 in the generation cycle of the vertical synchronization signal Vsync. In order to calculate an appropriate EV value based on the luminance evaluation value output from the luminance evaluation circuit 24, the CPU 30 repeatedly executes the through image AE process (simple AE process) in parallel with the above through image processing. The aperture amount and the exposure time that define the calculated appropriate EV value are set in the drivers 18b and 18c, respectively. As a result, the brightness of the through image displayed on the LCD monitor 38 is appropriately adjusted.

キー入力装置28上のシャッタボタン28sが半押しされると、輝度評価回路24から出力された輝度評価値に基づいて最適EV値を算出するべく、厳格な記録用AE処理が実行される。算出された最適EV値を定義する絞り量および露光時間は、上述と同様、ドライバ18bおよび18cにそれぞれ設定される。   When the shutter button 28 s on the key input device 28 is half-pressed, a strict recording AE process is executed in order to calculate the optimum EV value based on the luminance evaluation value output from the luminance evaluation circuit 24. The aperture amount and the exposure time that define the calculated optimal EV value are set in the drivers 18b and 18c, respectively, as described above.

記録用AE処理が完了すると、フォーカス評価回路26の出力に基づくAF処理が実行される。フォーカス評価回路26は、信号処理回路22から出力されたYデータのうち図3に示すフォーカスエリアFB_0〜FB_8の各々に属するYデータの高周波成分を、垂直同期信号Vsyncが発生する毎に積分する。算出された積分値つまりAF評価値は、レジスタRGST1に登録される。   When the recording AE process is completed, the AF process based on the output of the focus evaluation circuit 26 is executed. The focus evaluation circuit 26 integrates the high-frequency component of Y data belonging to each of the focus areas FB_0 to FB_8 shown in FIG. 3 in the Y data output from the signal processing circuit 22 every time the vertical synchronization signal Vsync is generated. The calculated integral value, that is, the AF evaluation value is registered in the register RGST1.

フォーカス評価回路26はまた、フォーカス評価エリアFB_0〜FB_8の各々に現れる高輝度画素(設定値を上回る輝度を有する画素)の数を垂直同期信号Vsyncが発生する毎にカウントし、フォーカス評価エリアFB_0〜FB_8の各々に属するYデータの輝度変化率を垂直同期信号Vsyncが発生する毎に算出する。カウントされた高輝度画素の数つまり高輝度カウント値はレジスタRGST2に登録され、算出された輝度変化率はレジスタRGST3に登録される。   The focus evaluation circuit 26 also counts the number of high-luminance pixels (pixels having luminance exceeding the set value) appearing in each of the focus evaluation areas FB_0 to FB_8 every time the vertical synchronization signal Vsync is generated, and the focus evaluation areas FB_0 to FB_0. The luminance change rate of Y data belonging to each of FB_8 is calculated every time the vertical synchronization signal Vsync is generated. The counted number of high luminance pixels, that is, the high luminance count value is registered in the register RGST2, and the calculated luminance change rate is registered in the register RGST3.

CPU30は、レジスタRGST1〜RGST3の記述を参照して、いわゆる山登り処理によって合焦点に対応する位置を探索する。フォーカスレンズ12は、垂直同期信号Vsyncが発生する毎に光軸方向に段階的に移動され、その後に合焦点に配置される。   The CPU 30 refers to the description of the registers RGST1 to RGST3 and searches for a position corresponding to the focal point by so-called hill climbing processing. The focus lens 12 is moved stepwise in the direction of the optical axis every time the vertical synchronization signal Vsync is generated, and then placed at the focal point.

シャッタボタン28sが全押しされると、記録処理が実行される。CPU30は、本露光動作および全画素読み出しを1回ずつ実行することをドライバ18cに命令する。ドライバ18cは、垂直同期信号Vsyncの発生に応答して撮像面に本露光を施し、電荷読み出しエリアで生成された全ての電荷をラスタ走査態様で読み出す。この結果、被写界を表す高解像度の生画像データが撮像装置16から出力される。   When the shutter button 28s is fully pressed, a recording process is executed. The CPU 30 instructs the driver 18c to execute the main exposure operation and the all pixel reading once. The driver 18c performs main exposure on the imaging surface in response to the generation of the vertical synchronization signal Vsync, and reads out all the charges generated in the charge reading area in a raster scanning manner. As a result, high-resolution raw image data representing the scene is output from the imaging device 16.

出力された生画像データは上述と同様の処理を施され、この結果、YUV形式に従う高解像度の画像データがSDRAM34に確保される。I/F40は、こうしてSDRAM34に格納された高解像度の画像データをメモリ制御回路32を通して読み出し、読み出された画像データをファイル形式で記録媒体42に記録する。なお、スルー画像処理は、高解像度の画像データがSDRAM34に格納された時点で再開される。   The output raw image data is subjected to the same processing as described above, and as a result, high-resolution image data conforming to the YUV format is secured in the SDRAM 34. The I / F 40 reads out the high-resolution image data thus stored in the SDRAM 34 through the memory control circuit 32 and records the read-out image data in the recording medium 42 in a file format. Note that the through image processing is resumed when high-resolution image data is stored in the SDRAM 34.

フォーカス評価回路26は、図4に示すように構成される。生画像データはラスタ走査態様で撮像装置16から出力されるため、Yデータもまたラスタ走査態様でフォーカス評価回路26に入力される。分配器50は、図3に示すフォーカスエリアFB_0〜FB_8の割り当て状態を参照してYデータを分配する。   The focus evaluation circuit 26 is configured as shown in FIG. Since the raw image data is output from the imaging device 16 in a raster scanning manner, the Y data is also input to the focus evaluation circuit 26 in a raster scanning manner. The distributor 50 distributes the Y data with reference to the allocation state of the focus areas FB_0 to FB_8 shown in FIG.

フォーカスエリアFB_0,FB_3およびFB_6に属するYデータは、HPF52,高輝度カウンタ64および輝度変化率算出回路70に与えられる。フォーカスエリアFB_1,FB_4およびFB_7に属するYデータは、HPF54,高輝度カウンタ66および輝度変化率算出回路72に与えられる。フォーカスエリアFB_2,FB_5およびFB_8に属するYデータは、HPF56,高輝度カウンタ68および輝度変化率算出回路74に与えられる。   The Y data belonging to the focus areas FB_0, FB_3 and FB_6 is given to the HPF 52, the high luminance counter 64 and the luminance change rate calculation circuit 70. The Y data belonging to the focus areas FB_1, FB_4, and FB_7 is given to the HPF 54, the high luminance counter 66, and the luminance change rate calculation circuit 72. Y data belonging to the focus areas FB_2, FB_5 and FB_8 is given to the HPF 56, the high luminance counter 68 and the luminance change rate calculation circuit 74.

HPF52,54および56の各々は、与えられたYデータの高周波成分を抽出する。積分回路58は、HPF52によって抽出された高周波成分をフォーカスエリアFB_0,FB_3およびFB_6の各々に対応して積分する。積分回路60は、HPF54によって抽出された高周波成分をフォーカスエリアFB_1,FB_4およびFB_7の各々に対応して積分する。積分回路62は、HPF56によって抽出された高周波成分をフォーカスエリアFB_2,FB_5およびFB_8の各々に対応して積分する。これによって、フォーカスエリアFB_0〜FB_8の各々に対応するフォーカス評価値が検出される。   Each of the HPFs 52, 54 and 56 extracts high frequency components of given Y data. The integrating circuit 58 integrates the high frequency component extracted by the HPF 52 corresponding to each of the focus areas FB_0, FB_3, and FB_6. The integration circuit 60 integrates the high-frequency component extracted by the HPF 54 corresponding to each of the focus areas FB_1, FB_4, and FB_7. The integrating circuit 62 integrates the high frequency component extracted by the HPF 56 corresponding to each of the focus areas FB_2, FB_5, and FB_8. Accordingly, focus evaluation values corresponding to the focus areas FB_0 to FB_8 are detected.

高輝度カウンタ64は、フォーカスエリアFB_0,FB_3およびFB_6の各々に注目して、高輝度画素の数をカウントする。高輝度カウンタ66は、フォーカスエリアFB_1,FB_4およびFB_7の各々に注目して、高輝度画素の数をカウントする。高輝度カウンタ68は、フォーカスエリアFB_2,FB_5およびFB_8の各々に注目して、高輝度画素の数をカウントする。これによって、フォーカスエリアFB_0〜FB_8の各々に対応する高輝度カウント値が検出される。   The high-intensity counter 64 pays attention to each of the focus areas FB_0, FB_3, and FB_6, and counts the number of high-intensity pixels. The high luminance counter 66 pays attention to each of the focus areas FB_1, FB_4, and FB_7, and counts the number of high luminance pixels. The high brightness counter 68 pays attention to each of the focus areas FB_2, FB_5, and FB_8 and counts the number of high brightness pixels. As a result, the high brightness count value corresponding to each of the focus areas FB_0 to FB_8 is detected.

輝度変化率算出回路70は、フォーカスエリアFB_0,FB_3およびFB_6の各々に注目して輝度変化率を算出する。輝度変化率算出回路70は、フォーカスエリアFB_1,FB_4およびFB_7の各々に注目して輝度変化率を算出する。輝度変化率算出回路70は、フォーカスエリアFB_2,FB_5およびFB_8の各々に注目して輝度変化率を算出する。これによって、フォーカスエリアFB_0〜FB_8の各々に対応する輝度変化率が検出される。   The luminance change rate calculation circuit 70 calculates the luminance change rate by paying attention to each of the focus areas FB_0, FB_3, and FB_6. The luminance change rate calculation circuit 70 calculates the luminance change rate by paying attention to each of the focus areas FB_1, FB_4, and FB_7. The luminance change rate calculation circuit 70 calculates the luminance change rate by paying attention to each of the focus areas FB_2, FB_5, and FB_8. Thereby, the luminance change rate corresponding to each of the focus areas FB_0 to FB_8 is detected.

図5〜図7を参照して、レジスタRGST1〜RGST3の各々は、フォーカスエリアFB_0〜FB_8にそれぞれ対応する9個のカラムを有する。また、AF処理が実行されるとき、フォーカスレンズ12は至近端から無限端までの間でPmax+1個の位置に配置される。これを踏まえて、9個のカラムの各々はPmax+1個に分割される。   5 to 7, each of registers RGST1 to RGST3 has nine columns corresponding to focus areas FB_0 to FB_8, respectively. Further, when the AF process is executed, the focus lens 12 is disposed at Pmax + 1 positions from the closest end to the infinite end. Based on this, each of the nine columns is divided into Pmax + 1.

フォーカスエリアFB_0〜FB_8で検出された9個のフォーカス評価値は、フォーカスレンズ12の現在位置に対応して、レジスタRGST1の9個のカラムに登録される。フォーカスエリアFB_0〜FB_8で検出された9個の高輝度カウント値は、フォーカスレンズ12の現在位置に対応して、レジスタRGST2の9個のカラムに登録される。フォーカスエリアFB_0〜FB_8で検出された9個の輝度変化率は、フォーカスレンズ12の現在位置に対応して、レジスタRGST3の9個のカラムに登録される。   The nine focus evaluation values detected in the focus areas FB_0 to FB_8 are registered in the nine columns of the register RGST1 corresponding to the current position of the focus lens 12. The nine high brightness count values detected in the focus areas FB_0 to FB_8 are registered in nine columns of the register RGST2 corresponding to the current position of the focus lens 12. The nine luminance change rates detected in the focus areas FB_0 to FB_8 are registered in the nine columns of the register RGST3 corresponding to the current position of the focus lens 12.

AF処理にあたっては、まずフォーカスレンズ12が至近端に配置され、変数Pが“0”に設定される。変数Pの設定処理によって、レジスタRGST1におけるAF評価値の書き込み位置が指定され、レジスタRGST2における輝度変化率の書き込み位置が指定され、そしてレジスタRGST3における高輝度カウント値の書き込み位置が指定される。AF評価値はレジスタRGST1のP番目の位置に登録され、輝度変化率はレジスタRGST2のP番目の位置に登録され、そして高輝度カウント値はレジスタRGST3のP番目の位置に登録される。   In the AF process, first, the focus lens 12 is disposed at the closest end, and the variable P is set to “0”. By the variable P setting process, the writing position of the AF evaluation value in the register RGST1 is designated, the writing position of the luminance change rate in the register RGST2 is designated, and the writing position of the high luminance count value in the register RGST3 is designated. The AF evaluation value is registered at the Pth position of the register RGST1, the luminance change rate is registered at the Pth position of the register RGST2, and the high luminance count value is registered at the Pth position of the register RGST3.

垂直同期信号Vsyncが発生すると、フォーカスエリアFB_0〜FB_8にそれぞれ対応する合焦曲線CV_0〜CV_8に注目したピーク検出処理が、以下の要領で実行される。なお、合焦曲線CV_K(K:0〜8)は、レジスタRGST1のK番目のカラムに登録されたAF評価値によって描かれる曲線に相当する。   When the vertical synchronization signal Vsync is generated, the peak detection process focusing on the focusing curves CV_0 to CV_8 respectively corresponding to the focus areas FB_0 to FB_8 is executed as follows. Note that the focusing curve CV_K (K: 0 to 8) corresponds to a curve drawn by the AF evaluation value registered in the Kth column of the register RGST1.

前提として、球状の光源LT1を有するデスクライトDKL1,線状の光源LT2を有する蛍光灯FL1および人物HM1が図9に示す要領で存在する被写界が捉えられた場合を想定する。ここで、デスクライトDKL1は蛍光灯FL1よりも至近側に位置する。また、フォーカスエリアFB_6は光源LT1の左側に割り当てられ、フォーカスエリアFB_0は光源LT2の左側に割り当てられ、フォーカスエリアFB_4は人物HM1の顔を覆う位置に割り当てられる。   As a premise, it is assumed that the object scene where the desk light DKL1 having the spherical light source LT1 and the fluorescent lamp FL1 having the linear light source LT2 and the person HM1 exist as shown in FIG. 9 is captured. Here, the desk light DKL1 is located closer to the fluorescent lamp FL1. The focus area FB_6 is assigned to the left side of the light source LT1, the focus area FB_0 is assigned to the left side of the light source LT2, and the focus area FB_4 is assigned to a position that covers the face of the person HM1.

こうして割り当てられたフォーカスエリアFB_6,FB_4およびFB_0にそれぞれ対応する合焦曲線CV_6,CV_4およびCV_0は、図11に示す要領で変化する。   The focusing curves CV_6, CV_4, and CV_0 respectively corresponding to the focus areas FB_6, FB_4, and FB_0 assigned in this manner change as shown in FIG.

光源LT1の高輝度成分は、光源LT1に対するデフォーカス量に応じて異なる態様でフォーカスエリアFB_6に進入する。フォーカスエリアFB_6に占める高輝度成分の割合が或る数値に達するまでは、合焦曲線CV_6は上昇する。   The high luminance component of the light source LT1 enters the focus area FB_6 in a different manner depending on the defocus amount with respect to the light source LT1. The focusing curve CV_6 rises until the ratio of the high luminance component in the focus area FB_6 reaches a certain value.

しかし、高輝度成分の割合が或る数値を上回ると、合焦曲線CV_6は急激に下降する。中央近傍に現れる合焦曲線CV_6のピークは、このような高輝度成分の割合の変動に起因するものである。   However, when the ratio of the high luminance component exceeds a certain numerical value, the focusing curve CV_6 rapidly decreases. The peak of the focusing curve CV_6 that appears in the vicinity of the center is caused by such a change in the ratio of the high luminance component.

合焦曲線CV_6は、その後、デスクライトDSK1の脚へのフォーカスによって上昇し、デスクライトDSK1の脚へのデフォーカスによって下降する。至近端近傍に現れる合焦曲線CV_6のピークは、このような合焦度の変動に起因するものである。   Thereafter, the focusing curve CV_6 is raised by the focus on the leg of the desk light DSK1, and is lowered by the defocus on the leg of the desk light DSK1. The peak of the focusing curve CV_6 that appears in the vicinity of the closest end is caused by such a variation in the focusing degree.

光源LT2の高輝度成分もまた、光源LT2に対するデフォーカス量に応じて異なる態様でフォーカスエリアFB_0に進入する。フォーカスエリアFB_0に占める高輝度成分の割合が或る数値まで減少すると、合焦曲線CV_0は急激に下降する。下降した合焦曲線CV_0は、高輝度成分の割合のさらなる減少に伴って下降する。   The high luminance component of the light source LT2 also enters the focus area FB_0 in a different manner depending on the defocus amount with respect to the light source LT2. When the ratio of the high luminance component in the focus area FB_0 decreases to a certain numerical value, the focusing curve CV_0 rapidly decreases. The lowered focusing curve CV_0 is lowered as the ratio of the high luminance component is further reduced.

合焦曲線CV_4は、人物HM1の顔へのフォーカスによって上昇し、人物HM1の顔へのデフォーカスによって下降する。中央近傍に現れる合焦曲線CV_4のピークは、このような合焦度の変動に起因するものである。   The focusing curve CV_4 rises due to the focus on the face of the person HM1 and falls due to the defocus on the face of the person HM1. The peak of the focusing curve CV_4 that appears in the vicinity of the center is caused by such a variation in the degree of focusing.

ピーク検出処理では、まず、注目フォーカスエリアにおける最新の輝度変化率および高輝度カウント値がレジスタRGST2およびレジスタRGST3からそれぞれ検出され、検出された輝度変化率および高輝度カウント値に基づいてフラグHL_FLGの設定が調整される。   In the peak detection process, first, the latest luminance change rate and high luminance count value in the focus area of interest are detected from the registers RGST2 and RGST3, respectively, and the flag HL_FLG is set based on the detected luminance change rate and high luminance count value. Is adjusted.

フラグHL_FLGは、輝度変化率が閾値TH1を上回りかつ高輝度カウント値が“0”を上回るときに“1”に設定され、さらに輝度変化率が閾値TH1以下でも高輝度カウント値が閾値TH2を上回れば“1”に設定される。   The flag HL_FLG is set to “1” when the luminance change rate exceeds the threshold TH1 and the high luminance count value exceeds “0”, and the high luminance count value exceeds the threshold TH2 even when the luminance change rate is equal to or lower than the threshold TH1. Is set to “1”.

フラグHL_FLGはまた、輝度変化率および高輝度カウント値がそれぞれ閾値TH1および閾値TH2以下であるときに“0”に設定され、さらに輝度変化率が閾値TH1を上回っても高輝度カウント値が“0”以下であれば“0”に設定される。   The flag HL_FLG is also set to “0” when the luminance change rate and the high luminance count value are equal to or lower than the threshold value TH1 and the threshold TH2, respectively, and the high luminance count value is “0” even if the luminance change rate exceeds the threshold value TH1. If it is less than or equal to “0”, it is set to “0”.

つまり、フラグHL_FLGは、注目フォーカスエリアに光源のような高輝度成分が存在するときに“1”に設定され、注目フォーカスエリアに高輝度成分が存在しないときに“0”に設定される。   That is, the flag HL_FLG is set to “1” when a high luminance component such as a light source exists in the focus area of interest, and is set to “0” when there is no high luminance component in the focus area of attention.

フラグHL_FLGの設定が完了すると、注目フォーカスエリアのフラグHL_FLGが“0”であるか否かが判別されるとともに、注目フォーカスエリアの合焦曲線にピークが現れたか否かが判別される。ピーク判別にあたっては、注目フォーカスエリアに対応してレジスタRGTS1に登録された1または2以上のAF評価値が参照される。   When the setting of the flag HL_FLG is completed, it is determined whether or not the flag HL_FLG of the focused focus area is “0” and whether or not a peak appears in the focusing curve of the focused focus area. In peak discrimination, one or more AF evaluation values registered in the register RGTS1 corresponding to the focus area of interest are referred to.

フラグHL_FLGが“0”でかつ注目フォーカスエリアの合焦曲線にピークが現れたときは、図8に示すレジスタRGST4に設けられたフラグRE_FLGが注目フォーカスエリアに対応して“1”に設定される。一方、フラグHL_FLGが“1”であるか、或いは注目フォーカスエリアの合焦曲線にピークが現れなければ、レジスタRGST4に設けられたフラグRE_FLGが注目フォーカスエリアに対応して“0”に設定される。   When the flag HL_FLG is “0” and a peak appears in the focus curve of the focus area, the flag RE_FLG provided in the register RGST4 shown in FIG. 8 is set to “1” corresponding to the focus area. . On the other hand, if the flag HL_FLG is “1” or no peak appears in the focusing curve of the focus area of interest, the flag RE_FLG provided in the register RGST4 is set to “0” corresponding to the focus area of focus. .

したがって、フラグRE_FLGは、高輝度成分が存在しないフォーカスエリアの合焦曲線にピークが現れたときに“1”に設定される。換言すれば、フォーカスエリアの合焦曲線にピークが現れても、このフォーカスエリアに高輝度成分が存在すれば、フラグRE_FLGが“1”に設定されることはない。   Accordingly, the flag RE_FLG is set to “1” when a peak appears in the focus curve of the focus area where no high luminance component exists. In other words, even if a peak appears in the focus curve of the focus area, the flag RE_FLG is not set to “1” if a high-luminance component exists in the focus area.

図9〜図11に示す例においては、合焦曲線CV_4のピークが中央近傍に現れたときに、フラグRE_FLGがフォーカスエリアFB_4に対応して“1”に設定される。また、合焦曲線CV_6のピークが至近端近傍に現れたときに、フラグRE_FLGがフォーカスエリアFE_6に対応して“1”に設定される。   In the example shown in FIGS. 9 to 11, when the peak of the focusing curve CV_4 appears near the center, the flag RE_FLG is set to “1” corresponding to the focus area FB_4. Further, when the peak of the focusing curve CV_6 appears in the vicinity of the closest end, the flag RE_FLG is set to “1” corresponding to the focus area FE_6.

ピーク検出処理は、フラグRE_FLGの状態がフォーカスエリアFB_0〜FB_8の全てについて確定した時点で終了される。   The peak detection process ends when the state of the flag RE_FLG is determined for all of the focus areas FB_0 to FB_8.

ピーク検出処理が終了すると、レジスタRGST1に設けられたフラグRE_FLGの状態が判別される。これらのフラグRE_FLGの少なくとも1つが“1”を示せば、RE_FLG=1に対応する1または2以上の合焦曲線が合焦曲線CV_0〜CV_8の中から特定される。さらに、ピーク近傍におけるAF評価値の変化率が特定された合焦曲線毎に算出され、算出された1または2以上の変化率の少なくとも1つが閾値THrtを上回るか否かが判別される。   When the peak detection process ends, the state of the flag RE_FLG provided in the register RGST1 is determined. If at least one of these flags RE_FLG indicates “1”, one or more focusing curves corresponding to RE_FLG = 1 are specified from the focusing curves CV_0 to CV_8. Furthermore, the change rate of the AF evaluation value in the vicinity of the peak is calculated for each specified focusing curve, and it is determined whether or not at least one of the calculated change rates of 1 or 2 or more exceeds the threshold value THrt.

閾値THrtを上回る変化率を示す合焦曲線が発見されれば、発見された合焦曲線のピーク位置が合焦点とみなされ、この合焦点にフォーカスレンズ12が配置される。図11の例では、合焦曲線CV4のピーク近傍における変化率は閾値THrtを上回る。この結果、フォーカスレンズ12は合焦曲線CV4のピーク位置に配置される。AF処理は、合焦点へのフォーカスレンズ12の配置によって終了される。   If a focus curve showing a change rate exceeding the threshold value THrt is found, the peak position of the found focus curve is regarded as a focus point, and the focus lens 12 is disposed at this focus point. In the example of FIG. 11, the rate of change in the vicinity of the peak of the focusing curve CV4 exceeds the threshold value THrt. As a result, the focus lens 12 is disposed at the peak position of the focusing curve CV4. The AF process is terminated when the focus lens 12 is placed at the focal point.

一方、レジスタRGST4の記述の中に“1”が存在しないか、或いは閾値THrtを上回る変化率を示す合焦曲線が発見されなければ、フォーカスレンズ12が既定量だけ無限側に移動され、変数Pがインクリメントされ、そして上述した処理が再開される。   On the other hand, if “1” does not exist in the description of the register RGST4 or if a focusing curve showing a change rate exceeding the threshold value THrt is not found, the focus lens 12 is moved to the infinite side by a predetermined amount, and the variable P Is incremented and the process described above is resumed.

CPU30は、図12〜図16に示す撮像タスクに従う処理を実行する。この撮像タスクに対応する制御プログラムは、フラッシュメモリ44に記憶される。   CPU30 performs the process according to the imaging task shown in FIGS. A control program corresponding to this imaging task is stored in the flash memory 44.

まずステップS1でスルー画像処理を実行する。この結果、被写界を表すスルー画像がLCDモニタ38から出力される。ステップS3ではシャッタボタン28sが半押しされたか否かを判別し、判別結果がNOである限りステップS5のスルー画像用AE処理を繰り返す。この結果、スルー画像の明るさが適度に調整される。シャッタボタン28sが半押しされると、ステップS3で記録用AE処理を実行し、ステップS7でAF処理を実行する。ステップS7の処理によってスルー画像の明るさが最適値に調整され、ステップS9の処理によってフォーカスレンズ12が合焦位置に配置される。   First, in step S1, through image processing is executed. As a result, a through image representing the object scene is output from the LCD monitor 38. In step S3, it is determined whether or not the shutter button 28s is half-pressed, and the through image AE process in step S5 is repeated as long as the determination result is NO. As a result, the brightness of the through image is appropriately adjusted. When the shutter button 28s is half-pressed, the recording AE process is executed in step S3, and the AF process is executed in step S7. The brightness of the through image is adjusted to the optimum value by the process of step S7, and the focus lens 12 is arranged at the in-focus position by the process of step S9.

ステップS11ではシャッタボタン28sが全押しされたか否かを判別し、ステップS13ではシャッタボタン28sの操作が解除されたか否かを判別する。ステップS11でYESであればステップS15の記録処理を経てステップS1に戻る。ステップS13でYESであればそのままステップS3に戻る。   In step S11, it is determined whether or not the shutter button 28s has been fully pressed. In step S13, it is determined whether or not the operation of the shutter button 28s has been released. If “YES” in the step S11, the process returns to the step S1 through the recording process of the step S15. If “YES” in the step S13, the process returns to the step S3 as it is.

ステップS9のAF処理は、図13〜図14に示すサブルーチンに従って実行される。まずステップS21でフォーカスレンズ12を至近側端部に配置し、ステップS23で変数Pを“0”に設定する。   The AF process in step S9 is executed according to a subroutine shown in FIGS. First, in step S21, the focus lens 12 is arranged at the closest end, and in step S23, the variable P is set to “0”.

変数Pの設定処理によって、レジスタRGST1におけるAF評価値の書き込み位置が指定され、レジスタRGST2における輝度変化率の書き込み位置が指定され、そしてレジスタRGST3における高輝度カウント値の書き込み位置が指定される。   By the variable P setting process, the writing position of the AF evaluation value in the register RGST1 is designated, the writing position of the luminance change rate in the register RGST2 is designated, and the writing position of the high luminance count value in the register RGST3 is designated.

垂直同期信号Vsyncが発生するとステップS25からステップS27に進み、フォーカスエリアFB_0〜FB_8にそれぞれ対応する合焦曲線CV_0〜CV_8に注目したピーク検出処理を実行する。   When the vertical synchronization signal Vsync is generated, the process proceeds from step S25 to step S27, and a peak detection process focusing on the focusing curves CV_0 to CV_8 respectively corresponding to the focus areas FB_0 to FB_8 is executed.

ピーク検出処理の結果、レジスタRGST4に設けられたフラグRE_FLGがフォーカスエリアFB_0〜FB_8の各々に対応して“0”または“1”に設定される。つまり、フラグRE_FLGは、高輝度成分が存在しないフォーカスエリアの合焦曲線にピークが現れたときに“1”に設定され、これ以外の状況の下で“0”に設定される。   As a result of the peak detection process, the flag RE_FLG provided in the register RGST4 is set to “0” or “1” corresponding to each of the focus areas FB_0 to FB_8. That is, the flag RE_FLG is set to “1” when a peak appears in the focusing curve in the focus area where no high luminance component exists, and is set to “0” under other circumstances.

ステップS29では、レジスタRGST4に設けられたフラグRE_FLGの少なくとも1つが“1”を示すか否かを判別する。判別結果がNOであればステップS31進み、フォーカスレンズ12を既定量だけ無限側に移動させる。レンズ移動処理が完了すると、ステップS33で変数Pをインクリメントし、その後にステップS25に戻る。   In step S29, it is determined whether or not at least one of the flags RE_FLG provided in the register RGST4 indicates “1”. If the determination result is NO, the process proceeds to step S31, and the focus lens 12 is moved to the infinite side by a predetermined amount. When the lens movement process is completed, the variable P is incremented in step S33, and then the process returns to step S25.

ステップS29の判別結果がYESであればステップS35に進み、RE_FLG=1に対応する1または2以上の合焦曲線を合焦曲線CV_0〜CV_8の中から特定する。ステップS37ではピーク近傍におけるAF評価値の変化率を特定された合焦曲線毎に算出し、ステップS39では算出された変化率の少なくとも1つが閾値THrtを上回るか否かを判別する。   If the decision result in the step S29 is YES, the process proceeds to a step S35 so as to specify one or more focusing curves corresponding to RE_FLG = 1 from the focusing curves CV_0 to CV_8. In step S37, the rate of change of the AF evaluation value in the vicinity of the peak is calculated for each specified focusing curve, and in step S39, it is determined whether or not at least one of the calculated rates of change exceeds the threshold value THrt.

判別結果がNOであればステップS31に戻る一方、判別結果がYESであればステップS41に進む。ステップS41では、閾値THrtを上回る変化率を示す合焦曲線のピーク位置(具体的には、現在のレンズ位置から既定量の2倍だけ至近側の位置)を合焦位置とみなし、この合焦位置にフォーカスレンズ12を配置する。ステップS43の処理が完了すると、上階層のルーチンに復帰する。   If the determination result is NO, the process returns to step S31, while if the determination result is YES, the process proceeds to step S41. In step S41, the peak position of the focusing curve showing the rate of change exceeding the threshold value THrt (specifically, a position closer to the preset amount by twice the current lens position) is regarded as the focusing position, and this focusing is performed. The focus lens 12 is disposed at the position. When the process of step S43 is completed, the process returns to the upper layer routine.

図13に示すステップS27のピーク検出処理は、図15〜図16に示すサブルーチンに従って実行される。まずステップS51で変数Kを“1”に設定する。ステップS53では変数Kに対応する最新の輝度変化率をレジスタRGST2から検出し、ステップS55では変数Kに対応する最新の高輝度カウント値をレジスタRGST3から検出する。   The peak detection process in step S27 shown in FIG. 13 is executed according to the subroutine shown in FIGS. First, in step S51, the variable K is set to “1”. In step S53, the latest luminance change rate corresponding to the variable K is detected from the register RGST2, and in step S55, the latest high luminance count value corresponding to the variable K is detected from the register RGST3.

ステップS57では、ステップS53で検出された輝度変化率が閾値TH1を上回るか否かを判別する。また、ステップS59では、ステップS55で検出された高輝度カウント値が閾値TH2を上回るか否かを判別する。さらに、ステップS61では、ステップS55で検出された高輝度カウント値が“0”を上回るか否かを判別する。   In step S57, it is determined whether or not the luminance change rate detected in step S53 exceeds a threshold value TH1. In step S59, it is determined whether or not the high brightness count value detected in step S55 exceeds a threshold value TH2. Further, in step S61, it is determined whether or not the high brightness count value detected in step S55 exceeds “0”.

ステップS57およびS61のいずれもYESであるか、或いはステップS57でNOでかつステップS59でYESであれば、ステップS63でフラグHL_FLGを“1”に設定する。また、ステップS57およびS59のいずれもNOであるか、或いはステップS57でYESでかつステップS61でNOであれば、ステップS65でフラグHL_FLGを“0”に設定する。   If both steps S57 and S61 are YES, or if NO in step S57 and YES in step S59, flag HL_FLG is set to “1” in step S63. If both of steps S57 and S59 are NO, or if YES in step S57 and NO in step S61, flag HL_FLG is set to “0” in step S65.

したがって、フラグHL_FLGは、フォーカスエリアFB_Kに高輝度成分が存在するときに“1”に設定され、フォーカスエリアFB_Kに高輝度成分が存在しないときに“0”に設定される。   Accordingly, the flag HL_FLG is set to “1” when a high luminance component exists in the focus area FB_K, and is set to “0” when no high luminance component exists in the focus area FB_K.

ステップS81またはS83の処理が完了すると、フラグHL_FLGが“0”を示すか否かをステップS67で判別し、合焦曲線CV_Kにピークが現れたか否かをステップS69で判別する。ステップS69の判別処理では、フォーカスエリアFB_Kに対応してレジスタRGTS1に登録された1または2以上のAF評価値が参照される。   When the process of step S81 or S83 is completed, it is determined in step S67 whether or not the flag HL_FLG indicates “0”, and whether or not a peak appears in the focusing curve CV_K is determined in step S69. In the determination process in step S69, one or more AF evaluation values registered in the register RGTS1 corresponding to the focus area FB_K are referred to.

ステップS67およびS69のいずれもYESであればステップS71に進み、レジスタRGST4に設けられたフラグRE_FLGを変数Kに対応して“1”に設定する。ステップS67またはS69でNOであればステップS73に進み、レジスタRGST4に設けられたフラグRE_FLGを変数Kに対応して“0”に設定する。   If both steps S67 and S69 are YES, the process proceeds to step S71, and the flag RE_FLG provided in the register RGST4 is set to “1” corresponding to the variable K. If “NO” in the step S67 or S69, the process proceeds to a step S73 to set a flag RE_FLG provided in the register RGST4 to “0” corresponding to the variable K.

したがって、フラグRE_FLGは、高輝度成分が存在しないフォーカスエリアの合焦曲線にピークが現れたときに“1”に設定される。換言すれば、フォーカスエリアの合焦曲線にピークが現れても、このフォーカスエリアに高輝度成分が存在すれば、フラグRE_FLGが“1”に設定されることはない。フラグRE_FLGの設定をこうして制御することで、高輝度成分が存在するフォーカスエリアの合焦曲線が合焦判別の対象から排除される。   Accordingly, the flag RE_FLG is set to “1” when a peak appears in the focus curve of the focus area where no high luminance component exists. In other words, even if a peak appears in the focus curve of the focus area, the flag RE_FLG is not set to “1” if a high-luminance component exists in the focus area. By controlling the setting of the flag RE_FLG in this way, the focus curve of the focus area where the high luminance component exists is excluded from the focus determination target.

ステップS71またはS73の処理が完了すると、変数KをステップS75でインクリメントし、変数Kが“8”を上回ったか否かをステップS77で判別する。判別結果がNOであればステップS53に戻り、判別結果がYESであれば上階層のルーチンに復帰する。   When the process of step S71 or S73 is completed, the variable K is incremented in step S75, and it is determined in step S77 whether or not the variable K exceeds “8”. If the determination result is NO, the process returns to step S53, and if the determination result is YES, the process returns to the upper hierarchy routine.

以上の説明から分かるように、撮像面16fにはフォーカスエリアFB_0〜FB_8が割り当てられる。CPU30は、フォーカスレンズ12から撮像面16fまでの距離を繰り返し変更し(S31)、フォーカスエリアFB_0〜FB_8の各々で捉えられた被写界像の高周波成分つまりAF評価値を距離変更処理と並列して繰り返し検出する(S23, S25, S33)。CPU30はまた、フォーカスエリアFB_0〜FB_8の各々で捉えられた被写界像の輝度情報に基づいて、高輝度条件から外れる1または2以上のフォーカスエリアをフォーカスエリアFB_0〜FB_8の中から選択する(S53~S65)。この選択処理は、距離調整処理と並列して繰り返し実行される。CPU30はさらに、選択された1または2以上のフォーカスエリアに対応して検出されたAF評価値に基づいて、フォーカスレンズ12から撮像面16fまでの距離を合焦点に対応する距離に調整する(S67~S71, S29, S35~S41)。   As can be seen from the above description, focus areas FB_0 to FB_8 are assigned to the imaging surface 16f. The CPU 30 repeatedly changes the distance from the focus lens 12 to the imaging surface 16f (S31), and parallels the high-frequency component of the object scene image captured in each of the focus areas FB_0 to FB_8, that is, the AF evaluation value, in parallel with the distance change process. Are repeatedly detected (S23, S25, S33). The CPU 30 also selects one or more focus areas out of the high brightness condition from the focus areas FB_0 to FB_8 based on the luminance information of the object scene image captured in each of the focus areas FB_0 to FB_8 ( S53 ~ S65). This selection process is repeatedly executed in parallel with the distance adjustment process. Further, the CPU 30 adjusts the distance from the focus lens 12 to the imaging surface 16f to a distance corresponding to the focal point based on the AF evaluation value detected corresponding to the selected one or more focus areas (S67). ~ S71, S29, S35 ~ S41).

高輝度条件を満足する1または2以上のフォーカスエリアを選択する処理は、フォーカスレンズ12から撮像面16fまでの距離を変更する処理と並列して繰り返し実行される。一方、光源の周辺に現れる高輝度部分の広がりは、光源に対する合焦度によって相違する。したがって、被写界に光源が存在する場合、選択される1または2以上のフォーカスエリアは、フォーカスレンズ12から撮像面16fまでの距離の変更に伴って変動し得る。フォーカスレンズ12から撮像面16fまでの距離は、こうして選択される1または2以上のフォーカスエリアに対応する高周波成分に基づいて、合焦点に対応する距離に調整される。これによって、光源を含む被写界に対する合焦性能を維持することができる。   The process of selecting one or more focus areas that satisfy the high luminance condition is repeatedly executed in parallel with the process of changing the distance from the focus lens 12 to the imaging surface 16f. On the other hand, the spread of the high-luminance portion that appears around the light source differs depending on the degree of focus on the light source. Therefore, when a light source exists in the object scene, one or more selected focus areas can be changed with a change in the distance from the focus lens 12 to the imaging surface 16f. The distance from the focus lens 12 to the imaging surface 16f is adjusted to the distance corresponding to the focal point based on the high frequency component corresponding to one or more focus areas selected in this way. Thereby, it is possible to maintain the focusing performance with respect to the object field including the light source.

なお、この実施例では、AF処理の際にフォーカスレンズ12を光軸方向に移動させるようにしているが、フォーカスレンズ12の代わりに或いはフォーカスレンズ12とともに、撮像面を光軸方向に移動させるようにしてよい。   In this embodiment, the focus lens 12 is moved in the optical axis direction during the AF processing, but the imaging surface is moved in the optical axis direction instead of the focus lens 12 or together with the focus lens 12. You can do it.

また、この実施例では、合焦位置が検出された時点でAF処理を終了するようにしている(図14のステップS41参照)。しかし、フォーカスレンズ12が無限側端部に達した後にAF処理を終了するようにしてもよい。   In this embodiment, the AF process is terminated when the in-focus position is detected (see step S41 in FIG. 14). However, the AF process may be terminated after the focus lens 12 reaches the end on the infinite side.

10 …ディジタルカメラ
12 …フォーカスレンズ
16 …撮像装置
24 …輝度評価回路
26 …フォーカス評価回路
30 …CPU
44 …フラッシュメモリ
DESCRIPTION OF SYMBOLS 10 ... Digital camera 12 ... Focus lens 16 ... Imaging device 24 ... Luminance evaluation circuit 26 ... Focus evaluation circuit 30 ... CPU
44 ... Flash memory

Claims (7)

フォーカスレンズから複数の評価エリアを有する撮像面までの距離を繰り返し変更する変更手段、
前記複数の評価エリアの各々で捉えられた被写界像の高周波成分を前記変更手段の変更処理と並列して繰り返し検出する検出手段、
前記複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを前記複数の評価エリアの中から選択する処理を前記変更手段の変更処理と並列して繰り返し実行する選択手段、および
前記選択手段によって選択された1または2以上の評価エリアに対応して前記検出手段によって検出された高周波成分に基づいて前記フォーカスレンズから前記撮像面までの距離を合焦点に対応する特定距離に調整する調整手段を備える、電子カメラ。
Changing means for repeatedly changing the distance from the focus lens to the imaging surface having a plurality of evaluation areas;
Detecting means for repeatedly detecting a high-frequency component of the object scene image captured in each of the plurality of evaluation areas in parallel with the changing process of the changing means;
Processing for selecting one or more evaluation areas out of the high luminance condition from the plurality of evaluation areas based on luminance information of the object scene image captured in each of the plurality of evaluation areas. Selection means for repeatedly executing in parallel with the changing process; and the imaging surface from the focus lens based on the high-frequency component detected by the detection means corresponding to one or more evaluation areas selected by the selection means An electronic camera comprising adjustment means for adjusting the distance to a specific distance corresponding to the focal point.
前記選択手段は、前記複数の評価エリアの各々で捉えられた被写界像の輝度情報を前記変更手段の変更処理と並列して検出する輝度情報検出手段、および前記輝度情報検出手段によって検出された輝度情報を基準と比較する比較手段を含む、請求項1記載の電子カメラ。   The selection means is detected by the luminance information detection means for detecting the luminance information of the object scene image captured in each of the plurality of evaluation areas in parallel with the changing process of the changing means, and the luminance information detection means. The electronic camera according to claim 1, further comprising comparison means for comparing the brightness information with the reference. 前記輝度情報は前記変更手段の変更処理に伴う輝度の変化量および/または設定値を上回る輝度を示す画素の数をパラメータとして含む、請求項2記載の電子カメラ。   The electronic camera according to claim 2, wherein the luminance information includes, as a parameter, a number of pixels that exhibit luminance exceeding a set amount and / or a luminance change amount associated with the changing process of the changing unit. 前記調整手段は、極大値を示す高周波成分が検出された特定評価エリアを前記選択手段によって選択された1または2以上の評価エリアの中から抽出する抽出手段、および前記特定評価エリアで検出された高周波成分の変化量に基づいて前記特定距離への調整処理を実行する調整処理手段を含む、請求項1ないし3のいずれかに記載の電子カメラ。   The adjusting means extracts from the one or two or more evaluation areas selected by the selection means the specific evaluation area where the high-frequency component indicating the maximum value is detected, and is detected in the specific evaluation area The electronic camera according to claim 1, further comprising an adjustment processing unit that performs an adjustment process to the specific distance based on a change amount of a high-frequency component. 前記調整手段は前記特定評価エリアで検出された高周波成分の変化量が閾値を上回るとき前記調整処理手段を起動する起動制御手段をさらに含む、請求項4記載の電子カメラ。   The electronic camera according to claim 4, wherein the adjustment unit further includes an activation control unit that activates the adjustment processing unit when a change amount of the high-frequency component detected in the specific evaluation area exceeds a threshold value. 電子カメラのプロセッサに、
フォーカスレンズから複数の評価エリアを有する撮像面までの距離を繰り返し変更する変更ステップ、
前記複数の評価エリアの各々で捉えられた被写界像の高周波成分を前記変更ステップの変更処理と並列して繰り返し検出する検出ステップ、
前記複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを前記複数の評価エリアの中から選択する処理を前記変更ステップの変更処理と並列して繰り返し実行する選択ステップ、および
前記選択ステップによって選択された1または2以上の評価エリアに対応して前記検出ステップによって検出された高周波成分に基づいて前記フォーカスレンズから前記撮像面までの距離を合焦点に対応する距離に調整する調整ステップを実行させるための、合焦制御プログラム。
In the electronic camera processor,
A change step for repeatedly changing the distance from the focus lens to the imaging surface having a plurality of evaluation areas;
A detection step of repeatedly detecting a high-frequency component of the object scene image captured in each of the plurality of evaluation areas in parallel with the change process of the change step;
Processing for selecting one or more evaluation areas out of the high luminance condition from the plurality of evaluation areas based on luminance information of the object scene image captured in each of the plurality of evaluation areas. A selection step that is repeatedly executed in parallel with the change process; and the imaging surface from the focus lens based on the high-frequency component detected by the detection step corresponding to one or more evaluation areas selected by the selection step A focus control program for executing an adjustment step for adjusting the distance to the distance corresponding to the focal point.
電子カメラによって実行される合焦制御方法であって、
フォーカスレンズから複数の評価エリアを有する撮像面までの距離を繰り返し変更する変更ステップ、
前記複数の評価エリアの各々で捉えられた被写界像の高周波成分を前記変更ステップの変更処理と並列して繰り返し検出する検出ステップ、
前記複数の評価エリアの各々で捉えられた被写界像の輝度情報に基づいて高輝度条件から外れる1または2以上の評価エリアを前記複数の評価エリアの中から選択する処理を前記変更ステップの変更処理と並列して繰り返し実行する選択ステップ、および
前記選択ステップによって選択された1または2以上の評価エリアに対応して前記検出ステップによって検出された高周波成分に基づいて前記フォーカスレンズから前記撮像面までの距離を合焦点に対応する距離に調整する調整ステップを備える、合焦制御方法。
A focus control method executed by an electronic camera,
A change step for repeatedly changing the distance from the focus lens to the imaging surface having a plurality of evaluation areas;
A detection step of repeatedly detecting a high-frequency component of the object scene image captured in each of the plurality of evaluation areas in parallel with the change process of the change step;
Processing for selecting one or more evaluation areas out of the high luminance condition from the plurality of evaluation areas based on luminance information of the object scene image captured in each of the plurality of evaluation areas. A selection step that is repeatedly executed in parallel with the change process; and the imaging surface from the focus lens based on the high-frequency component detected by the detection step corresponding to one or more evaluation areas selected by the selection step A focus control method comprising an adjustment step of adjusting the distance to the distance corresponding to the focal point.
JP2009193615A 2009-08-24 2009-08-24 Electronic camera Pending JP2011043776A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009193615A JP2011043776A (en) 2009-08-24 2009-08-24 Electronic camera

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009193615A JP2011043776A (en) 2009-08-24 2009-08-24 Electronic camera

Publications (1)

Publication Number Publication Date
JP2011043776A true JP2011043776A (en) 2011-03-03

Family

ID=43831222

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009193615A Pending JP2011043776A (en) 2009-08-24 2009-08-24 Electronic camera

Country Status (1)

Country Link
JP (1) JP2011043776A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013140297A (en) * 2012-01-06 2013-07-18 Hitachi Ltd Image signal processor
JP2013160919A (en) * 2012-02-06 2013-08-19 Hitachi Ltd Image signal processing device and image signal processing method
JP2016114811A (en) * 2014-12-16 2016-06-23 株式会社 日立産業制御ソリューションズ Focus controller, imaging apparatus, and method for controlling focus
CN112114414A (en) * 2013-05-10 2020-12-22 株式会社尼康 Changeable lens
CN112235563A (en) * 2019-07-15 2021-01-15 北京字节跳动网络技术有限公司 Focusing test method and device, computer equipment and storage medium

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06189187A (en) * 1992-12-22 1994-07-08 Fuji Photo Film Co Ltd Image pickup device, photometric method therefor, focus control method therefor and image pickup method
JPH08321985A (en) * 1995-05-24 1996-12-03 Sanyo Electric Co Ltd Auto focus video camera
JP2003156679A (en) * 2001-11-22 2003-05-30 Minolta Co Ltd Focus detector
JP2004294788A (en) * 2003-03-27 2004-10-21 Fuji Photo Optical Co Ltd Electronic endoscope device provided with automatic focusing function

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06189187A (en) * 1992-12-22 1994-07-08 Fuji Photo Film Co Ltd Image pickup device, photometric method therefor, focus control method therefor and image pickup method
JPH08321985A (en) * 1995-05-24 1996-12-03 Sanyo Electric Co Ltd Auto focus video camera
JP2003156679A (en) * 2001-11-22 2003-05-30 Minolta Co Ltd Focus detector
JP2004294788A (en) * 2003-03-27 2004-10-21 Fuji Photo Optical Co Ltd Electronic endoscope device provided with automatic focusing function

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013140297A (en) * 2012-01-06 2013-07-18 Hitachi Ltd Image signal processor
JP2013160919A (en) * 2012-02-06 2013-08-19 Hitachi Ltd Image signal processing device and image signal processing method
CN112114414A (en) * 2013-05-10 2020-12-22 株式会社尼康 Changeable lens
CN112114414B (en) * 2013-05-10 2023-08-11 株式会社尼康 Interchangeable lens
JP2016114811A (en) * 2014-12-16 2016-06-23 株式会社 日立産業制御ソリューションズ Focus controller, imaging apparatus, and method for controlling focus
CN112235563A (en) * 2019-07-15 2021-01-15 北京字节跳动网络技术有限公司 Focusing test method and device, computer equipment and storage medium
CN112235563B (en) * 2019-07-15 2023-06-30 北京字节跳动网络技术有限公司 Focusing test method and device, computer equipment and storage medium

Similar Documents

Publication Publication Date Title
JP5263763B2 (en) Electronic camera
CN101867724B (en) Imaging device and imaging method
US8284300B2 (en) Electronic camera
JP2009177272A (en) Imaging apparatus, and control method and program thereof
JP2009177271A (en) Imaging apparatus, and control method and program thereof
JP2011139171A (en) Video processing apparatus, and video processing method
KR101542436B1 (en) Imaging apparatus and imaging method
JP2009053448A (en) Electronic camera
JP2011043776A (en) Electronic camera
JP2010271600A (en) Electronic camera
JP2010171565A (en) Electronic camera
JP2010114674A (en) Video camera
JP2009192960A (en) Electronic camera
JP5106283B2 (en) Video camera
JP5219905B2 (en) Electronic camera
JP2009229775A (en) Electronic camera
JP5063381B2 (en) Electronic camera
JP2011223378A (en) Electronic camera
JP2008199461A (en) Imaging apparatus
JP4827811B2 (en) Electronic camera
JP2004173251A (en) Camera
JP2006039254A (en) Camera
JP2010117616A (en) Electronic camera
JP5782546B2 (en) VIDEO PROCESSING DEVICE, VIDEO PROCESSING METHOD, IMAGING DEVICE, PROGRAM, AND STORAGE MEDIUM
JP2011253099A (en) Focus detector

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120801

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A711

Effective date: 20130404

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130426

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130515

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20130521

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20131001