JPH10336508A - Automatic focusing device - Google Patents

Automatic focusing device

Info

Publication number
JPH10336508A
JPH10336508A JP10192784A JP19278498A JPH10336508A JP H10336508 A JPH10336508 A JP H10336508A JP 10192784 A JP10192784 A JP 10192784A JP 19278498 A JP19278498 A JP 19278498A JP H10336508 A JPH10336508 A JP H10336508A
Authority
JP
Japan
Prior art keywords
focusing
scanning
mode
local
final
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP10192784A
Other languages
Japanese (ja)
Other versions
JP2970902B2 (en
Inventor
Hideaki Yoshida
英明 吉田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Olympus Corp
Original Assignee
Olympus Optical Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Olympus Optical Co Ltd filed Critical Olympus Optical Co Ltd
Priority to JP10192784A priority Critical patent/JP2970902B2/en
Publication of JPH10336508A publication Critical patent/JPH10336508A/en
Application granted granted Critical
Publication of JP2970902B2 publication Critical patent/JP2970902B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Automatic Focus Adjustment (AREA)
  • Focusing (AREA)

Abstract

PROBLEM TO BE SOLVED: To realize final focusing which with less afocus in the case that plural contrast peaks are obtained due to the coexistence of remote and near objects in the scanning type imager AF. SOLUTION: This device is provided with a discrimination means 1d that makes scanning by changing a relative position between a focusing lens 2 and an image-pickup element 3 and discriminates a focal position, based on contrast information in image information which is an output of the image-pickup element obtained at each scanning position. The discrimination means recognizes a position corresponding to a prescribed peak of the contrast information, at least as a local focal position and selects a median focal point in the scanning order among plural focal points as a final focal point for the final focal adjustment, when plural local focal points obtained as the scanning executed over a prescribed scanning range exist within a prescribed scanning range.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、自動合焦装置、詳
しくは、連続映像および、非連続である静止画像撮影用
カメラ、例えば、ムービー/スチル兼用カメラや、連続
/静止モード型スチルカメラあるいは、ワンショット機
能付ムービーカメラ等に搭載される自動合焦装置に関す
る。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an automatic focusing apparatus, and more particularly, to a camera for photographing continuous images and discontinuous still images, for example, a camera for both movie / still and a still / still mode type still camera. And an automatic focusing device mounted on a movie camera with a one-shot function.

【0002】[0002]

【従来の技術】近年、一般の家庭用としても汎用される
ようになったムービー用ビデオカメラと、各メーカから
各種発売されている電子スチルカメラ等に用いられてい
る撮影レンズ、撮像ディバイス、更に、映像信号処理回
路の一部はそれぞれ同じ機能をもっているものである。
従って、それらを共用することによって、コンパクトに
一体化され、しかもコスト的に有利であるムービー/ス
チル兼用の電子カメラが実現できる。そこで、上記兼用
式カメラとして、特開昭55−165077号公報に開
示のものは、撮影レンズ、撮像ディバイス、映像信号処
理回路等を共用した構造を有するものである。
2. Description of the Related Art In recent years, video cameras for movies that have been widely used for general home use, photographing lenses and imaging devices used in electronic still cameras and the like sold by various manufacturers have been developed. Some of the video signal processing circuits have the same function.
Therefore, by sharing them, it is possible to realize a movie / still dual-purpose electronic camera that is compactly integrated and advantageous in cost. Therefore, the above-mentioned dual-purpose camera disclosed in Japanese Patent Application Laid-Open No. 55-165077 has a structure in which a photographic lens, an imaging device, a video signal processing circuit, and the like are shared.

【0003】上記兼用式のカメラにおいては、その合焦
装置が問題となる。従来のカメラの自動合焦(以下、A
Fと称す)装置には、AF専用の検出素子を用いるもの
と、撮像素子(以下、イメージャと称す)の画像データ
をAF信号としても利用するものがある。そして、上記
イメージャ信号を利用するイメージャAFにはそのAF
信号による合焦度合を検出しながらフォーカシングレン
ズを駆動し、その合焦度合のピーク点を合焦点として定
める山登り式イメージャAFと、レンズを全範囲走査し
て合焦度合を比較測定した後、再度、総合的判断に基づ
き決定された所定の点まで上記レンズを駆動して撮影を
行なうようにするスキャニング式イメージャAFがあ
る。
[0003] In the above-mentioned dual-purpose camera, the focusing device becomes a problem. Automatic focusing of a conventional camera (hereinafter A
Some devices use a detection element dedicated to AF, and others use image data of an image sensor (hereinafter, referred to as an imager) as an AF signal. The imager AF using the imager signal has the AF
The focusing lens is driven while detecting the degree of focusing by the signal, a hill-climbing imager AF that determines the peak point of the degree of focusing as the focal point, and the lens is scanned over the entire range to compare and measure the degree of focusing. There is a scanning-type imager AF that drives the lens to a predetermined point determined based on comprehensive judgment to perform photographing.

【0004】[0004]

【発明が解決しようとする課題】少なくとも従来の技術
に記載したスキャニング式イメージャAFの場合には、
被写体の遠近共存等があった場合はスキャニングに伴っ
てしばしばそれぞれの被写体に対応した複数個のコント
ラストピークが得られる。このような場合、どのように
最終的なフォーカシングを行なうかは自明ではない。
At least in the case of the scanning type imager AF described in the prior art,
When the objects coexist at a distance, a plurality of contrast peaks corresponding to the respective objects are often obtained with the scanning. In such a case, it is not obvious how to perform the final focusing.

【0005】まず、得られたコントラスト値が最大の点
に最終的なフォーカシングを行なうものが知られてお
り、この方法はピークの数には無関係に一意的にフォー
カシング点が決まる利点があるものの、常にコントラス
トが最大のものにフォーカシングするため、例えばコン
トラストの強い背景があった場合には主要被写体にピン
トが合わないという欠点を有している。
First, it is known that final focusing is performed at a point where the obtained contrast value is the maximum. This method has an advantage that a focusing point is uniquely determined regardless of the number of peaks. Since the focusing is always performed at the maximum contrast, for example, when there is a background having a high contrast, the main subject is not focused.

【0006】そこで、複数個のピークのうち最も近距離
に対応するピーク点(最近ピーク点)に最終的なフォー
カシングを行なうことも考えられるが、この方法は遠景
を背景にした人物撮影等では良い結果が得られるもの
の、特定の主要被写体が存在しない複数の遠近共存被写
体の場合には、遠方の被写体のピントが不良になり易い
という欠点を有する。
Therefore, it is conceivable to perform the final focusing on a peak point (the latest peak point) corresponding to the shortest distance among a plurality of peaks. However, this method is suitable for photographing a person against a distant background. Although a result is obtained, in the case of a plurality of distant and coexistent subjects in which a specific main subject does not exist, there is a disadvantage that the focus of a distant subject tends to be poor.

【0007】そこで、被写体全体を平均的にカバーする
意味で、最近ピーク点と最遠ピーク点の中間位置にフォ
ーカシングを行なうことも考えられるが、この方法は平
均的に好結果を期待できるが、通常はフォーカシング位
置がピーク点とは異なるため「どの被写体にもピントが
来ない」状態になってしまうから、全体にピントが甘い
結果を生じる可能性が極めて高いものである。
In order to cover the entire subject on average, it is conceivable to perform focusing at an intermediate position between the latest peak point and the farthest peak point. However, this method can expect good results on average. Normally, since the focusing position is different from the peak point, a state where “no subject comes into focus” is obtained. Therefore, there is a very high possibility that a result in which the whole subject is not well focused will be obtained.

【0008】本発明の目的は、例えば上記スキャニング
式イメージャAFのようなイメージャAFにおいて、被
写体の遠近共存等によって複数個のコントラストピーク
が得られた場合に、よりピント不良の少ない最終的なフ
ォーカシングを実現することにある。
An object of the present invention is to provide an imager AF such as the above-mentioned scanning type imager AF, in which a plurality of contrast peaks are obtained due to the coexistence of a subject at a distance, etc. Is to make it happen.

【0009】[0009]

【課題を解決するための手段】本発明による自動合焦装
置は、フォーカシングレンズと撮像素子との相対位置を
移動することにより走査せしめ、各々の走査位置で得ら
れた撮像素子の出力である画像情報中のコントラスト情
報に基づき合焦位置を判断する判断手段を有し、上記判
断手段は、上記コントラスト情報の所定のピークに対応
する位置を少なくとも局所的な合焦点として認識すると
ともに、所定の走査範囲に亘って実行された上記走査の
結果として得られた上記局所的な合焦点が上記所定の走
査範囲中に複数存在する場合には、上記複数の局所的合
焦点のうち走査序列において中央順位のあるものを最終
的な合焦調節を行なうべき最終合焦点として選択するこ
とを特徴とし、また、本発明による自動合焦装置は、フ
ォーカシングレンズと撮像素子との相対位置を移動する
ことにより走査せしめ、各々の走査位置で得られた撮像
素子の出力である画像情報中のコントラスト情報に基づ
き合焦位置を判断する判断手段を有し、上記判断手段
は、上記コントラスト情報の所定のピークに対応する位
置を少なくとも局所的な合焦点として認識するととも
に、所定の走査範囲に亘って実行された上記走査の結果
として得られた上記局所的な合焦点が上記所定の走査範
囲中に複数存在する場合には、上記複数の局所的合焦点
のうち上記所定の走査範囲の中間位置に最も近いものを
最終的な合焦調節を行なうべき最終合焦点として選択す
ることを特徴とする。
An automatic focusing apparatus according to the present invention scans by moving a relative position between a focusing lens and an image sensor, and outputs an image which is an output of the image sensor obtained at each scanning position. Determining a focus position based on contrast information in the information, wherein the determination means recognizes a position corresponding to a predetermined peak of the contrast information as at least a local focus and performs predetermined scan; When a plurality of the local focusing points obtained as a result of the scanning performed over the range are present in the predetermined scanning range, a center order in the scanning order among the plurality of local focusing points is determined. The automatic focusing device according to the present invention is characterized in that a certain focusing lens is selected as a final focusing point where final focusing adjustment is to be performed. Scanning means for moving the relative position of the image sensor and the image sensor, and determining a focus position based on contrast information in image information output from the image sensor obtained at each scan position. The determining means recognizes a position corresponding to a predetermined peak of the contrast information as at least a local focal point, and determines the local focus obtained as a result of the scanning performed over a predetermined scanning range. When there are a plurality of focal points in the predetermined scanning range, a focal point closest to an intermediate position of the predetermined scanning range among the plurality of local focusing points is a final focusing point to be subjected to final focusing adjustment. Is selected.

【0010】[0010]

【発明の実施の形態】以下、本発明の実施の形態を図示
の例によって説明する。図1は、本発明の一実施の形態
を示す自動合焦装置のブロック構成図である。この自動
合焦装置はムービー/スチル兼用の電子カメラに搭載さ
れるものである。そして、そのカメラは、連続的である
動画撮影が行なわれるムービー撮影モード(以下、Mモ
ードと称す)で使用する場合は第1合焦調節モードであ
る追尾型合焦動作を行なう、いわゆる、山登り式イメー
ジャAFの第1合焦調節手段を、更に、非連続的撮影が
行なわれるスチル撮影モード(以下、Sモードと称す)
で使用する場合は、第2合焦調節モードとして前記スキ
ャニング式イメージャAFである第2合焦調節手段を、
モード切換スイッチ8によって選択して機能せしめるよ
うにしたものである。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, embodiments of the present invention will be described with reference to illustrated examples. FIG. 1 is a block diagram of an automatic focusing apparatus according to an embodiment of the present invention. The automatic focusing device is mounted on a movie / still electronic camera. When the camera is used in a movie shooting mode (hereinafter, referred to as an M mode) in which continuous moving image shooting is performed, the camera performs a tracking type focusing operation as a first focusing adjustment mode, that is, a so-called hill-climbing operation. The first focus adjustment means of the imager AF is further provided with a still photography mode (hereinafter, referred to as an S mode) in which discontinuous photography is performed.
In the case of using the second focusing adjustment mode, the second focusing adjustment means, which is the scanning type imager AF, is used as a second focusing adjustment mode.
The function is selected and operated by the mode changeover switch 8.

【0011】この自動合焦装置の構成は、AF処理のた
めのAFデータ処理回路1a,AFデータ記憶部1b,
比較回路1c,判断回路1dおよびM,Sモード時のA
F処理プログラム等を内蔵するシステムコントローラ1
と、フォーカシングレンズ2aを含むレンズ群2と、上
記フォーカシングレンズ2aを駆動するモータのモータ
ドライバ4と、レンズ群2からの撮影光束による撮像信
号を出力するイメージャ3と、その撮像信号のサンプル
・ホールド回路であるS/H回路5と、そのサンプリン
グ出力を処理して後述の選択手段で選択されている上記
M,Sモードに従い、各々の記録装置へ映像信号を出力
する映像回路6と、上記S/H回路5の出力をA/D変
換するものであって、そのディジタル画像出力がAFデ
ータ処理回路1aに入力されるA/D変換回路7と、更
に、上記M,Sモードの選択手段であるモード切換スイ
ッチ8によって構成されている。
The configuration of the automatic focusing apparatus is composed of an AF data processing circuit 1a for AF processing, an AF data storage section 1b,
The comparison circuit 1c, the judgment circuit 1d, and A in the M and S modes
System controller 1 with built-in F processing program
A lens group 2 including a focusing lens 2a; a motor driver 4 of a motor for driving the focusing lens 2a; an imager 3 for outputting an imaging signal based on a photographic light beam from the lens group 2; An S / H circuit 5 as a circuit, a video circuit 6 for processing the sampling output and outputting a video signal to each recording device in accordance with the M and S modes selected by the selection means described later; A / D converter for converting the output of the / H circuit 5 into an A / D converter whose digital image output is input to the AF data processing circuit 1a. It is constituted by a certain mode changeover switch 8.

【0012】そして、上記AFデータ処理回路1aはA
/D変換回路7から出力されるディジタル画像データの
高周波成分を分離して求められる値であって、合焦度合
を示すコントラスト情報(以下コントラスト値と称す)
を演算する。AFデータ記憶部1bは上記処理回路1a
で演算されたコントラスト値を記憶するものである。ま
た、比較回路1cは、後述する各モードでのAF処理ル
ーチンの指示で上記AFデータ処理回路1aで演算され
たコントラスト値とAFデータ記憶部1bのコントラス
ト値の比較を行なう回路である。更に、判断回路1dは
同様に各モードでのAF処理ルーチンの指示に従い比較
回路1cのコントラスト値の比較結果によって、フォー
カスレンズ2aの駆動、あるいは合焦終了の判断を行な
うものである。
Then, the AF data processing circuit 1a
Contrast information (hereinafter referred to as a contrast value) which is a value obtained by separating high frequency components of digital image data output from the / D conversion circuit 7 and which indicates a degree of focusing.
Is calculated. The AF data storage unit 1b stores the processing circuit 1a
Is stored. The comparison circuit 1c compares the contrast value calculated by the AF data processing circuit 1a with the contrast value of the AF data storage unit 1b in accordance with an instruction of an AF processing routine in each mode described later. Further, the determination circuit 1d similarly determines the drive of the focus lens 2a or the end of focusing based on the comparison result of the contrast value of the comparison circuit 1c according to the instruction of the AF processing routine in each mode.

【0013】以上のように構成された本実施形態の合焦
装置の動作について、図2および、図3のAFルーチン
のフローチャートによって、また、被写体が至近から無
限遠(以下∞と称す)距離間において図4のようなコン
トラスト値を有している場合について説明を行なう。な
お、フォーカシングレンズ2aの駆動位置は上記至近と
∞距離に対応するレンズ位置を所定の段数で分割し、そ
の段数をレンズ駆動段数nで表す。そして至近位置は段
数n=0,∞位置は段数n=nmax とする。この段数位
置の設定は至近位置をn=nmax ,∞位置をn=0とし
て制御しても特に本発明の要旨を変えるものではない。
The operation of the focusing apparatus of the present embodiment constructed as described above will be described with reference to the flowcharts of the AF routine shown in FIGS. Will be described with reference to FIG. The driving position of the focusing lens 2a is obtained by dividing the lens positions corresponding to the close distance and the ∞ distance by a predetermined number of steps, and expressing the number of steps by the number n of lens driving steps. The closest position is the number of steps n = 0, and the position ∞ is the number of steps n = nmax. The setting of the step number position does not change the gist of the present invention even if the closest position is controlled to n = nmax and the ∞ position is controlled to n = 0.

【0014】まず、モード選択スイッチ8によってMモ
ード、即ち、ムービー撮影モードが選択された場合、撮
影時のAF動作指令により、図2に示されるMモードA
F処理ルーチンがコールされる。任意の位置においてフ
ォーカシングレンズ2aをイメージャ3に対して相対的
にどちらかの方向に駆動しAFデータ処理回路1aで演
算される画像データのコントラスト値が直前のレンズ駆
動位置でのコントラスト値と比較して増加したかどうか
の判別を行なう(ステップS101)。なお、直前のレ
ンズ位置でのコントラスト値はAFデータ記憶部1bに
格納されるものとする。そして、コントラスト値が増加
した場合、更に同方向に駆動して(ステップS10
2)、再度コントラスト値が増加したかどうかの判別を
行なう。その値が更に増加した場合、再度ステップS1
02の処理に戻り、コントラスト値が増加しなくなるま
で繰返される。そして、コントラスト値が増加しなくな
ると、ピーク点に達したものと判断し、レンズ駆動を停
止して、合焦完了の表示を行なってルーチン処理を終了
する。
First, when the M mode, ie, the movie shooting mode, is selected by the mode selection switch 8, the M mode A shown in FIG.
The F processing routine is called. At any position, the focusing lens 2a is driven in either direction relative to the imager 3, and the contrast value of the image data calculated by the AF data processing circuit 1a is compared with the contrast value at the immediately preceding lens driving position. It is determined whether or not the number has increased (step S101). Note that the contrast value at the immediately preceding lens position is stored in the AF data storage unit 1b. Then, when the contrast value increases, driving is further performed in the same direction (step S10).
2) It is determined again whether the contrast value has increased. If the value further increases, step S1 is performed again.
02, the process is repeated until the contrast value does not increase. Then, when the contrast value does not increase, it is determined that the peak point has been reached, the lens driving is stopped, the completion of focusing is displayed, and the routine processing ends.

【0015】例えば、図4において点Eをフォーカスレ
ンズ2aの駆動開始点とすると、上記のルーチンに従っ
て処理され、E点から矢印方向にコントラスト値の線図
を辿り、コントラスト値のピーク点Cに到達して合焦が
完了したとして処理される。
For example, assuming that point E in FIG. 4 is a driving start point of the focus lens 2a, the processing is performed according to the above-described routine, and the contrast value diagram is traced in the direction of the arrow from the point E to reach the peak value C of the contrast value. Then, it is determined that focusing has been completed.

【0016】一方、上記AFルーチンにおけるステップ
S101にてコントラスト値が増加しなかった場合
には、ステップS103へジャンプする。そして、逆方
向にレンズを駆動し、コントラスト値の増減をチェック
する。その値が増加すれば、ステップS102の処理に
戻る。値が増加しなければ、再びステップS103に戻
り、逆方向の駆動を行なう。そして、その駆動回路が予
め定められた規定回数に到達するとレンズ駆動を停止
し、合焦不能の表示をして処理を終了する。
On the other hand, if the contrast value has not increased in step S101 in the AF routine, the process jumps to step S103. Then, the lens is driven in the reverse direction to check whether the contrast value has increased or decreased. If the value increases, the process returns to step S102. If the value does not increase, the process returns to step S103, and the driving in the reverse direction is performed. Then, when the drive circuit reaches a predetermined number of times, the lens driving is stopped, a display indicating that focusing is impossible is performed, and the process is terminated.

【0017】なお、例えば低照度下等で撮像信号のS/
Hが悪い、或いは、レンズの大ぼけのためコントラスト
値が異常に大きいなどの場合、この処理において乱調状
態となり上記ステップS103に戻るサイクルを繰り返
し、合焦不能となってしまうことがあり、合焦感度や合
焦速度の設定に際しては被写体の外乱の影響、並びに応
答動作の安定性を充分に考慮して決定する必要がある。
本AF処理ルーチンを終了してメインルーチンの撮影処
理に戻されると、本AF処理ルーチンは上記メインルー
チンにおいて所謂、フォーカスロック状態に設定された
場合を除いて常に再起動のためにコントラスト値を監視
し続ける待機状態とされる。
In addition, for example, under low illuminance or the like, the S /
In the case where H is bad or the contrast value is abnormally large due to large blur of the lens or the like, the process returns to step S103 due to a turbulent state in this processing, and the focusing may not be performed. When setting the sensitivity and the focusing speed, it is necessary to determine the sensitivity and the focusing operation sufficiently in consideration of the influence of the disturbance of the subject and the stability of the response operation.
When the main AF processing routine is terminated and the process returns to the main routine photographing processing, the present AF processing routine always monitors the contrast value for restart except in the so-called focus lock state in the main routine. The standby state is kept.

【0018】以上のように上記のMモードAF処理はフ
ィードバック制御要素を有し、動体である被写体に対し
ても任意の位置から追従して、合焦することができるも
のである。従って、ムービーで撮影のような、被写体の
連続追従撮影に好適なものといえる。
As described above, the M mode AF process has a feedback control element, and can follow a moving subject from an arbitrary position to focus. Therefore, it can be said that this is suitable for continuous tracking shooting of a subject, such as shooting with a movie.

【0019】一方、モード選択スイッチ8によって、S
モード即ち、スチル撮影モードが選択された場合、撮影
シーケンスのAF動作指令により、図3に示されるSモ
ードAF処理ルーチンがコールされる。まず、フォーカ
シングレンズ2aを初期位置、即ち駆動段数nが0の位
置である至近位置まで駆動し、同時に段数nを0にリセ
ットする。そして、その時の画像データのコントラスト
値をAFデータ処理回路1aで演算し、AFデータ記憶
部1bにデータd(n)として格納する(ステップS2
01)。そして、フォーカシングレンズ2aをイメージ
ャ3に対して相対的に1段正方向へ駆動し、段数nをイ
ンクリメントする。段数nの値が最終段数nmax (∞位
置)を超えない限り、処理はステップS201に戻さ
れ、各レンズ各走査位置に対するコントラスト値を順次
AFデータ記憶部1bに格納してゆく。
On the other hand, the mode selection switch 8
When the mode, that is, the still shooting mode is selected, the S mode AF processing routine shown in FIG. 3 is called by the AF operation command of the shooting sequence. First, the focusing lens 2a is driven to the initial position, that is, the closest position where the number of driving steps n is 0, and the number of steps n is reset to 0 at the same time. Then, the contrast value of the image data at that time is calculated by the AF data processing circuit 1a and stored as data d (n) in the AF data storage unit 1b (step S2).
01). Then, the focusing lens 2a is driven one step forward relative to the imager 3, and the number of steps n is incremented. As long as the value of the step number n does not exceed the final step number nmax (∞ position), the process returns to step S201, and the contrast value for each scanning position of each lens is sequentially stored in the AF data storage unit 1b.

【0020】そして、フォーカシングレンズが全域に亘
って走査せしめられ、段数がn>nmax となると、上記
レンズ駆動は停止される。そして、上記格納データd
(n)を検索し、データd(n)の最大値に対応する段
数をMとし、フォーカシングレンズ2aを上記段数位置
Mまで駆動して合焦が終了し、ルーチンを終了する。そ
して、撮影シーケンスに制御が戻され撮影が行なわれる
ことになる。なお、上記のルーチンではコントラスト値
を配列変数で記憶部1bに格納する場合を示したが、格
納時にコントラスト値を比較して、その値の大きい方の
みのコントラスト値と段数を格納してゆくようにしても
よいことは勿論である。
When the focusing lens is scanned over the entire area and the number of stages becomes n> nmax, the lens driving is stopped. Then, the stored data d
(N) is searched, the number of steps corresponding to the maximum value of the data d (n) is set to M, and the focusing lens 2a is driven to the above-mentioned step number position M to complete focusing, and the routine ends. Then, control is returned to the photographing sequence, and photographing is performed. In the above routine, the case where the contrast value is stored in the storage unit 1b as an array variable has been described. However, the contrast value is compared at the time of storage, and only the larger one of the contrast value and the number of steps are stored. Needless to say, this may be done.

【0021】上記の処理を図4のコントラスト値線図の
例で説明すると、段数n=0に対応する線図上の点Eか
ら処理がスタートし、途中のコントラスト値をd(n)
に格納しながら、∞位置の段数nmax まで到達する。そ
して、d(n)の最大点Dが検索され、それに対応する
段数であって、合焦点を示すMが決定される。
The above process will be described with reference to the example of the contrast value diagram of FIG. 4. The process starts from a point E on the diagram corresponding to the number of steps n = 0, and changes the contrast value in the middle to d (n).
And reaches the number of steps nmax at the ∞ position. Then, the maximum point D of d (n) is searched, and the number M of steps corresponding to the maximum point D, which indicates the focal point, is determined.

【0022】以上のように上記Sモード処理ルーチンに
よるAF処理は、オープン制御の形態を有し、実質的全
走査範囲中の最高の合焦点を検索するので、動作上不安
定的な要素はない。また、上記合焦点にレンズが再駆動
されてAF動作を終了するものであるから、ムービー撮
影よりもワンショットであるスチル撮影により適したA
Fといえる。そして、山登り式のAFでは被写体の状態
やレンズの大ぼけなどの条件で合焦時間が変化し、場合
によってはかなりの時間を要したり、動作が不安定にな
ったりするが、このAF処理では常に一定時間の高速の
合焦が得られ、スチル撮影に最適といえる。
As described above, the AF processing by the S mode processing routine has the form of open control and searches for the highest focal point in substantially the entire scanning range, so that there is no operationally unstable element. . Also, since the lens is driven again to the above-mentioned focal point and the AF operation is completed, A which is more suitable for still shooting which is one shot than for movie shooting is used.
You can say F. In the hill-climbing AF, the focusing time changes depending on conditions such as the state of a subject and a large blur of a lens. In some cases, a considerable time is required and the operation becomes unstable. In this case, high-speed focusing for a certain period of time is always obtained, which is optimal for still photography.

【0023】なお、上記実施形態におけるSモード処理
では、コントラスト最大の状態をもって最終合焦点とし
ているが、走査域内でのコントラスト情報を総合的に判
断して最終合焦点を決める方法はもちろんこれに限ら
ず、様々なものがあり得る。例えば走査域内にコントラ
スト値のピークが複数あった場合の処理として、その各
ピークに対応するレンズ駆動段の各段数nが、その段数
の順にP1 ,P2 ,P3,……Pk である場合に、最終
合焦点の段数として上記のP1 を選択する、また、上記
PK を選択する、更には、PINT ((k+1)/2)を
選択する、ここで、INT(x)はxの整数部分を示
す。あるいは、上記P1 〜Pk において(Pi −nmax
/2)の値が最少となるときの段数Pi 、即ち、全駆動
段数の中間位置に最も近いところに存在するピーク点を
選択する等、様々なものが考えられる。
In the S-mode processing in the above embodiment, the final focus is set when the state of maximum contrast is reached. However, the method of determining the final focus by comprehensively judging the contrast information in the scanning area is not limited to this. There can be various things. For example, as a process when there are a plurality of peaks of the contrast value in the scanning area, when the number n of lens drive stages corresponding to each peak is P1, P2, P3,. Select the above P1 as the number of steps of the final focal point, select the above PK, and select PINT ((k + 1) / 2), where INT (x) indicates an integer part of x . Alternatively, in the above P1 to Pk, (Pi -nmax
/ 2) The number of stages when the value of / 2) becomes minimum, that is, a peak point located closest to the intermediate position of all the number of drive stages is selected, and various other methods can be considered.

【0024】次に、上述の実施形態の自動合焦装置を搭
載したカメラのM,Sモードのモード切換スイッチ8の
詳細について図5によって説明する。このモード切換ス
イッチ8の構成は、2つのスイッチ8a,8bが、その
アクチュエータの押圧によってスイッチ8aから8bの
順で動作するように配設されているものとする。上記ス
イッチ8aの出力端はモノマルチバイブレータ(MM
V)8cを介してNOR回路8dの一つの入力端に接続
され、一方、スイッチSW8bは上記NOR回路8dの
他の入力端に接続される。そして、NOR回路8dの出
力端はモード検出端子8gに接続されている。また、ス
イッチ8bの出力端は分岐して記録トリガ端子8hに接
続されている。抵抗8e,8fはそれぞれプルアップ抵
抗である。
Next, the details of the mode changeover switch 8 for the M and S modes of the camera equipped with the automatic focusing device of the above embodiment will be described with reference to FIG. The configuration of the mode change switch 8 is such that the two switches 8a and 8b are arranged so as to operate in the order of the switches 8a to 8b by pressing the actuator. The output terminal of the switch 8a is connected to a monomultivibrator (MM
V) The switch SW8b is connected to one input terminal of the NOR circuit 8d via the 8c, while the switch SW8b is connected to the other input terminal of the NOR circuit 8d. The output terminal of the NOR circuit 8d is connected to the mode detection terminal 8g. The output terminal of the switch 8b branches off and is connected to the recording trigger terminal 8h. Each of the resistors 8e and 8f is a pull-up resistor.

【0025】上記モード検出端子8gと記録トリガ端子
8hは、前記システムコントローラ1にそれぞれ接続さ
れている。そして、そのスイッチ操作によりモード検出
端子8gがHレベルに変化して、記録トリガ端子8hに
立下がりのトリガが出力されるとSモード撮影が選択さ
れ、また、モード検出端子8gが変化せずLレベルの状
態のままで、記録トリガ端子8hに立下りトリガが出力
されるとMモード撮影が選択され、記録開始指令がコン
トローラ1に与えられるものとする。
The mode detection terminal 8g and the recording trigger terminal 8h are connected to the system controller 1, respectively. When the mode detection terminal 8g changes to the H level by the switch operation and a falling trigger is output to the recording trigger terminal 8h, the S mode photographing is selected, and the mode detection terminal 8g does not change and the L mode is not changed. When the falling trigger is output to the recording trigger terminal 8h in the state of the level, the M mode shooting is selected, and a recording start command is given to the controller 1.

【0026】以上のように構成されたモード切換スイッ
チSの動作について説明する。モードの選択はスイッチ
8a,8bのアクチュエータをすばやく押圧する場合と
ゆっくり押圧する場合によってSモードまたはMモード
を区別して選択するものとし、ワンショット撮影である
Sモード選択に対しては、すばやくスイッチを押圧する
ものとし、連続してある時間撮影をするMモードの選択
にはゆっくりスイッチを押圧するものとする。Sモード
指定の場合、上記のようにスイッチ8a,8bのアクチ
ュエータをすばやく押圧する。まず、スイッチ8aがO
N状態となり、MMV8cよりLレベルの一定幅のパル
スが出力されるが、スイッチをすばやく押圧するため、
パルス幅内の時間にスイッチ8bもON状態となる。従
って、モード検出端子8gがHレベルとなり、同時に記
録トリガ端子8hにはスイッチ8bのONによりトリガ
信号が出力され、システムコントローラ1にSモード撮
影の記録開始指令が与えられる。
The operation of the mode changeover switch S configured as described above will be described. The mode is selected by selecting the S mode or the M mode depending on whether the actuators of the switches 8a and 8b are quickly pressed and when the actuator is slowly pressed. It is assumed that the switch is pressed, and the switch is slowly pressed to select the M mode in which the image is continuously taken for a certain period of time. When the S mode is designated, the actuators of the switches 8a and 8b are quickly pressed as described above. First, switch 8a is set to O
In the N state, the MMV 8c outputs a pulse having a constant width of L level.
The switch 8b is also turned on during the time within the pulse width. Accordingly, the mode detection terminal 8g becomes H level, at the same time, a trigger signal is output to the recording trigger terminal 8h by turning on the switch 8b, and a recording start command for S mode imaging is given to the system controller 1.

【0027】一方、Mモードを選択する場合には、スイ
ッチ8a,8bのアクチュエータをゆっくり押圧する。
まず、スイッチ8aがONとなり、MMV8cからLレ
ベルの一定幅のパルスが出力されるが、アクチュエータ
がゆっくり押圧されるのでスイッチ8bがON状態とな
る時には、既にMMV8cの上記のLレベルのパルスは
Hレベルに戻っており、NOR回路8dから信号は出力
されない。従って、Sモード検出端子8gはHレベルの
まま変化せず、記録トリガ端子8hからトリガのみが出
力され、システムコントローラ1にはMモードの撮影記
録開始指令が与えられる。なお、システムコントローラ
1に上記の各モードの撮影開始指令が入力されると撮影
制御がスタートし、その合焦指令に伴って本実施形態の
自動合焦装置のAFルーチンがコールされる。
On the other hand, when selecting the M mode, the actuator of the switches 8a and 8b is slowly pressed.
First, the switch 8a is turned on, and the MMV 8c outputs a pulse having a constant width of L level. However, when the switch 8b is turned on because the actuator is depressed slowly, the L level pulse of the MMV 8c is already at H level. The level has returned to the level, and no signal is output from the NOR circuit 8d. Accordingly, the S mode detection terminal 8g remains at the H level and does not change, only the trigger is output from the recording trigger terminal 8h, and the system controller 1 is given an M mode shooting / recording start command. Note that when a shooting start command in each mode described above is input to the system controller 1, shooting control is started, and the AF routine of the automatic focusing apparatus according to the present embodiment is called in accordance with the focusing command.

【0028】次に、上記モード切換スイッチ8の変形例
としてのモード切換スイッチの回路を図6によって説明
する。この変形例のモード切換スイッチはそれぞれ連続
して操作されるアクチュエータを有するスイッチ9a,
9bを有しており、スイッチ9aの端子はT型フリップ
フロップ9cの入力端に接続され、スイッチ9aのON
操作の度にH,Lレベルに変化するフリップフロップ9
cの出力端はモード検出端子9fに接続される。またス
イッチ9bの端子は記録トリガ出力端子9gに接続され
ている。そして、上記端子9f,9gはそれぞれシステ
ムコントローラ1に接続され、モード検出端子9fがH
レベルの状態で、記録トリガ端子9gにトリガが出力さ
れると、システムコントローラ1はSモード撮影の記録
を開始し、また端子9fがLレベルの状態で、記録トリ
ガ端子9gにトリガが出力されるとMモード撮影の記録
が開始されるものとする。なお、電源投入時に上記T型
フリップフロップ9cの出力端に接続されるモード検出
端子9fはLレベルにリセットされる。
Next, a circuit of a mode changeover switch as a modification of the mode changeover switch 8 will be described with reference to FIG. The mode change switch of this modified example has switches 9a, 9a,
9b, the terminal of the switch 9a is connected to the input terminal of the T-type flip-flop 9c, and the switch 9a is turned on.
Flip-flop 9 that changes to H or L level each time it is operated
The output terminal of c is connected to the mode detection terminal 9f. The terminal of the switch 9b is connected to the recording trigger output terminal 9g. The terminals 9f and 9g are respectively connected to the system controller 1, and the mode detection terminal 9f is
When the trigger is output to the recording trigger terminal 9g in the level state, the system controller 1 starts recording in the S mode shooting, and the trigger is output to the recording trigger terminal 9g when the terminal 9f is at the L level. And the recording of the M mode shooting is started. When the power is turned on, the mode detection terminal 9f connected to the output terminal of the T-type flip-flop 9c is reset to L level.

【0029】以上のように構成された変形例のモード切
換スイッチの動作について説明すると、まず1回目のス
イッチ9a,9bの押圧により、モード検出端子9fが
Hレベルになり、記録トリガ端子9gにトリガが出力さ
れ、Sモード指定となり、撮影記録が開始される。更
に、2回目のスイッチ9a,9bの押圧により、モード
検出端子9fはLレベルに戻り、同様に記録トリガ端子
9gにトリガが出力され、Mモード指定となって、撮影
記録が開始されることになる。以後、スイッチ9a,9
bが操作されると、上記の動作が繰返される。
The operation of the mode changeover switch of the modified example configured as described above will be described. First, the mode detection terminal 9f is set to the H level by the first pressing of the switches 9a and 9b, and the recording trigger terminal 9g is triggered. Is output, the S mode is designated, and shooting and recording are started. Further, when the switches 9a and 9b are pressed for the second time, the mode detection terminal 9f returns to the L level, a trigger is similarly output to the recording trigger terminal 9g, and the M mode is designated, and shooting and recording are started. Become. Thereafter, the switches 9a, 9
When b is operated, the above operation is repeated.

【0030】上記実施形態の自動合焦装置を適用したム
ービー/スチル兼用カメラの画像記録媒体としては、磁
気テープ/磁気ディスクの組合わせや磁気ディスク,光
磁気ディスク等が使用され、また、それらの記録装置と
しては、それを内蔵する構造のもの、あるいは外付構造
とするものなどがある。また、上記ムービー/スチル兼
用カメラ以外、連続/静止撮影モードを有している電子
スチルカメラやワンショット撮影機能付ムービーカメラ
等にも本発明の自動合焦装置は適用することができる。
As an image recording medium of a movie / still camera to which the automatic focusing apparatus of the above embodiment is applied, a combination of a magnetic tape / magnetic disk, a magnetic disk, a magneto-optical disk, and the like are used. As the recording device, there is a recording device having a built-in structure or a recording device having an external structure. In addition to the movie / still camera, the automatic focusing device of the present invention can be applied to an electronic still camera having a continuous / still shooting mode, a movie camera with a one-shot shooting function, and the like.

【0031】また、必ずしもカメラの撮影モードと関連
づけられている必要はなく、例えばスチル撮影専用のカ
メラにおいても、ファインダを撮影者が覗き込んだ場合
の合焦感覚の好みにあわせて、切り換えスイッチにて
M,S両モードを切り換え得るように構成しても良い。
Further, it is not always necessary to associate the camera with the photographing mode. For example, even in a camera dedicated to still photography, a changeover switch is set according to the preference of a focusing sensation when the photographer looks into the viewfinder. In this case, both the M and S modes may be switched.

【0032】[0032]

【発明の効果】以上述べたように本願の請求項1に係る
自動合焦装置によれば、複数の局所的合焦点のうち、走
査序列において中間順位にあるものを最終的な合焦調節
を行なうべき最終合焦点として選択するから、必ずいず
れかのピーク位置にフォーカシングが行われる。即ち
「どの被写体にもピントが来ない」状態を生じない。な
おかつ多数の遠近共存被写体に対して極めて簡単な演算
で比較的平均的なフォーカシングが実現される。
As described above, according to the automatic focusing apparatus according to the first aspect of the present invention, among the plurality of local focal points, the one at the intermediate order in the scanning order is used for final focusing adjustment. Since it is selected as the final focal point to be performed, focusing is always performed at any peak position. That is, a state where “no subject comes into focus” does not occur. In addition, a relatively average focusing can be realized with a very simple calculation for a large number of coexisting subjects.

【0033】また、本願の請求項2に係る自動合焦装置
によれば、複数の局所的合焦点のうち、上記所定の走査
範囲の中間位置に最も近いものを最終的な合焦調節を行
なうべき最終合焦点として選択するから、必ずいずれか
のピーク位置にフォーカシングが行われる。即ち「どの
被写体にもピントが来ない」状態を生じない。なおか
つ、多数の遠近共存被写体に対して、いわゆるパンフォ
ーカス撮影に類似した比較的平均的なフォーカシングが
実現される。
According to the automatic focusing apparatus of the second aspect of the present invention, of the plurality of local focal points, the one closest to the intermediate position of the predetermined scanning range is subjected to final focusing adjustment. Since it is selected as the final focal point to be focused, focusing is always performed at any peak position. That is, a state where “no subject comes into focus” does not occur. In addition, relatively average focusing similar to so-called pan-focus shooting is realized for a large number of co-existing subjects.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の1実施形態を示す自動合焦位置のブロ
ック構成図、
FIG. 1 is a block diagram showing an automatic focusing position according to an embodiment of the present invention;

【図2】上記図2の自動合焦位置のMモードAF処理ル
ーチンのフローチャート、
FIG. 2 is a flowchart of an M mode AF processing routine for an automatic focusing position in FIG. 2;

【図3】上記図1の自動合焦位置のSモードAF処理ル
ーチンのフローチャート、
FIG. 3 is a flowchart of an S-mode AF processing routine of the automatic focusing position in FIG. 1;

【図4】上記図1の自動合焦位置の説明に用いる、被写
体のコントラスト値の線図、
FIG. 4 is a diagram of a contrast value of a subject, which is used for describing the automatic focusing position in FIG. 1;

【図5】上記図1の自動合焦装置のモード切換スイッチ
の回路図、
FIG. 5 is a circuit diagram of a mode switch of the automatic focusing apparatus of FIG. 1;

【図6】上記図1の自動合焦装置のモード切換スイッチ
の変形例を示す回路図である。
FIG. 6 is a circuit diagram showing a modification of the mode changeover switch of the automatic focusing apparatus of FIG. 1;

【符号の説明】[Explanation of symbols]

1a………AFデータ処理回路 1b………AFデータ記憶部 1c………比較回路 1d………判断回路 2a………フォーカシングレンズ 3 ………イメージャ(撮像素子) 8 ………モード切換スイッチ 1a AF data processing circuit 1b AF data storage section 1c Comparison circuit 1d Judgment circuit 2a Focusing lens 3 Imager (imaging element) 8 Mode switch

Claims (2)

【特許請求の範囲】[Claims] 【請求項1】 フォーカシングレンズと撮像素子との相
対位置を移動することにより走査せしめ、各々の走査位
置で得られた撮像素子の出力である画像情報中のコント
ラスト情報に基づき合焦位置を判断する判断手段を有
し、 上記判断手段は、上記コントラスト情報の所定のピーク
に対応する位置を少なくとも局所的な合焦点として認識
するとともに、所定の走査範囲に亘って実行された上記
走査の結果として得られた上記局所的な合焦点が上記所
定の走査範囲中に複数存在する場合には、上記複数の局
所的合焦点のうち走査序列において中央順位にあるもの
を最終的な合焦調節を行なうべき最終合焦点として選択
することを特徴とする自動合焦装置。
A scanning is performed by moving a relative position between a focusing lens and an image sensor, and a focus position is determined based on contrast information in image information output from the image sensor at each scanning position. Determining means for recognizing a position corresponding to a predetermined peak of the contrast information as at least a local focal point, and obtaining the position as a result of the scanning performed over a predetermined scanning range. When a plurality of the obtained local focal points are present in the predetermined scanning range, a final focusing adjustment should be performed on the local focal points which are located at the center in the scanning order among the plural local focusing points. An automatic focusing device, which is selected as a final focusing point.
【請求項2】 フォーカシングレンズと撮像素子との相
対位置を移動することにより走査せしめ、各々の走査位
置で得られた撮像素子の出力である画像情報中のコント
ラスト情報に基づき合焦位置を判断する判断手段を有
し、 上記判断手段は、上記コントラスト情報の所定のピーク
に対応する位置を少なくとも局所的な合焦点として認識
するとともに、所定の走査範囲に亘って実行された上記
走査の結果として得られた上記局所的な合焦点が上記所
定の走査範囲中に複数存在する場合には、上記複数の局
所的合焦点のうち上記所定の走査範囲の中間位置に最も
近いものを最終的な合焦調節を行なうべき最終合焦点と
して選択することを特徴とする自動合焦装置。
2. Scanning is performed by moving a relative position between a focusing lens and an image sensor, and a focus position is determined based on contrast information in image information output from the image sensor obtained at each scanning position. Determining means for recognizing a position corresponding to a predetermined peak of the contrast information as at least a local focal point, and obtaining the position as a result of the scanning performed over a predetermined scanning range. If a plurality of the obtained local focal points are present in the predetermined scanning range, the local focusing point closest to the intermediate position of the predetermined scanning range among the plurality of local focusing points is finally focused. An automatic focusing device which is selected as a final focusing point to be adjusted.
JP10192784A 1998-07-08 1998-07-08 Automatic focusing device Expired - Lifetime JP2970902B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP10192784A JP2970902B2 (en) 1998-07-08 1998-07-08 Automatic focusing device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP10192784A JP2970902B2 (en) 1998-07-08 1998-07-08 Automatic focusing device

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP1153010A Division JP2863551B2 (en) 1989-06-14 1989-06-14 Camera with automatic focusing device

Publications (2)

Publication Number Publication Date
JPH10336508A true JPH10336508A (en) 1998-12-18
JP2970902B2 JP2970902B2 (en) 1999-11-02

Family

ID=16296950

Family Applications (1)

Application Number Title Priority Date Filing Date
JP10192784A Expired - Lifetime JP2970902B2 (en) 1998-07-08 1998-07-08 Automatic focusing device

Country Status (1)

Country Link
JP (1) JP2970902B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6552748B1 (en) 1997-02-25 2003-04-22 Sanyo Electric Co., Ltd. Camera which automatically and properly focuses in situations with relatively low luminance foreground objects and high luminance background objects
KR100781172B1 (en) * 2005-12-27 2007-11-30 삼성테크윈 주식회사 Digital camera, and method for controlling automatic focus
JP2007328360A (en) * 2007-07-27 2007-12-20 Fujifilm Corp Automatic focusing camera and photographing method
JP2009037263A (en) * 2008-11-04 2009-02-19 Canon Inc Point adjusting device, imaging device, control method for focus adjusting device, program, and recording medium
CN113766131A (en) * 2021-09-15 2021-12-07 广州市明美光电技术有限公司 Multi-target-point focusing method and application thereof

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6552748B1 (en) 1997-02-25 2003-04-22 Sanyo Electric Co., Ltd. Camera which automatically and properly focuses in situations with relatively low luminance foreground objects and high luminance background objects
KR100781172B1 (en) * 2005-12-27 2007-11-30 삼성테크윈 주식회사 Digital camera, and method for controlling automatic focus
JP2007328360A (en) * 2007-07-27 2007-12-20 Fujifilm Corp Automatic focusing camera and photographing method
JP2009037263A (en) * 2008-11-04 2009-02-19 Canon Inc Point adjusting device, imaging device, control method for focus adjusting device, program, and recording medium
CN113766131A (en) * 2021-09-15 2021-12-07 广州市明美光电技术有限公司 Multi-target-point focusing method and application thereof
CN113766131B (en) * 2021-09-15 2022-05-13 广州市明美光电技术有限公司 Multi-target point focusing method and digital slice scanner applying same

Also Published As

Publication number Publication date
JP2970902B2 (en) 1999-11-02

Similar Documents

Publication Publication Date Title
US7778539B2 (en) Optical apparatus
US7777802B2 (en) Imaging apparatus including an auto focusing function
CN101247477B (en) Image-pickup apparatus and control method thereof
JP4797522B2 (en) Imaging apparatus and program thereof
JP4390286B2 (en) Camera, control method thereof, program, and storage medium
JPH06201973A (en) Method and device for tracking object by automatic zooming
JP4024404B2 (en) camera
JP4094458B2 (en) Image input device
JP2000131598A (en) Automatic focusing device
JP2006053545A (en) Optical apparatus
US20080055751A1 (en) Focus adjustment apparatus, image pickup apparatus, and control method
JP2963006B2 (en) Camera device
JP2000330009A (en) Automatic focusing device for digital camera, and digital camera equipped with same
US7570298B2 (en) Image-taking apparatus with first focus control such that in-focus position is searched for based on first signal and second focus control such that one of in-focus position and drive amount is determined based on second signal
JP2970902B2 (en) Automatic focusing device
JPH07298120A (en) Automatic focusing adjustment device
JP2004086160A (en) Optical apparatus
JP2863551B2 (en) Camera with automatic focusing device
JPH05119249A (en) Zoom type camera
JPS60126976A (en) Automatic focusing device
JPH0437827A (en) Image pickup device
JP2005227447A (en) Autofocus camera
JP4744253B2 (en) Auto focus camera
JPH11305115A (en) Electronic camera
JPH0783445B2 (en) Imaging device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 19990803

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080827

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090827

Year of fee payment: 10

EXPY Cancellation because of completion of term
FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090827

Year of fee payment: 10