JP2895999B2 - Image sensor circuit - Google Patents
Image sensor circuitInfo
- Publication number
- JP2895999B2 JP2895999B2 JP33732491A JP33732491A JP2895999B2 JP 2895999 B2 JP2895999 B2 JP 2895999B2 JP 33732491 A JP33732491 A JP 33732491A JP 33732491 A JP33732491 A JP 33732491A JP 2895999 B2 JP2895999 B2 JP 2895999B2
- Authority
- JP
- Japan
- Prior art keywords
- circuit
- image sensor
- time signal
- image
- video data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Photometry And Measurement Of Optical Pulse Characteristics (AREA)
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
Description
【0001】[0001]
【産業上の利用分野】本発明は自動焦点カメラ等の光学
器械を被写体等の対象に合焦させるためその映像を検出
するイメージセンサ回路であって、逆光の背景内にある
対象の映像を正確に検出できるようにしたものに関す
る。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to an image sensor circuit for detecting an image of an object such as an object by focusing an optical instrument such as an autofocus camera on the object. Related to what can be detected.
【0002】[0002]
【従来の技術】周知のように、光学器械を対象に合焦さ
せる方法には大別して撮像レンズ外を通る光を用いる外
光三角測距方式と撮像レンズ内を通る光を用いるTTL
方式があるが、いずれの場合も最低でも1対のイメージ
センサを光学器械に組み込み、光学的手段によって対象
の映像を互いに空間的に分離したないしは異なる光路を
介して各イメージセンサ上に結像させ、両イメージセン
サが受ける映像の相対的な位置ずれや位置の関係から対
象までの距離や撮像レンズの合焦点からのずれを電気的
に検出した上で、撮像レンズの位置を検出された対象ま
での距離に合わせないしは焦点ずれをなくすように制御
して光学器械を合焦状態にする。本発明はかかる外光三
角測距方式やTTL方式により光学器械を対象に合焦さ
せるためにそれに組み込まれるイメージセンサとその光
検出信号の処理回路を含むイメージセンサ回路に関す
る。2. Description of the Related Art As is well known, methods for focusing an optical instrument on an object are roughly classified into an external light triangulation method using light passing outside the imaging lens and a TTL using light passing through the imaging lens.
In each case, at least one pair of image sensors is incorporated in the optical instrument, and the images of the object are spatially separated from each other by optical means or formed on each image sensor through different optical paths. Based on the relative positional deviation of the images received by both image sensors and the relationship between the positions, the distance to the target and the deviation from the focal point of the imaging lens are electrically detected, and then the position of the imaging lens is detected. The optical instrument is brought into a focused state by controlling so as to adjust the distance or eliminate the defocus. The present invention relates to an image sensor incorporated therein for focusing an optical instrument on a target by such an external light triangulation method or TTL method, and an image sensor circuit including a processing circuit for a light detection signal thereof.
【0003】かかる合焦の基礎となる対象までの距離や
撮像レンズの焦点ずれを正確に検出するには各イメージ
センサの映像検出精度をまず高める必要があるが、映像
内の光強度分布が1:106 もの非常に広い範囲内で変化
するので、従来からイメージセンサを構成する光センサ
に電荷蓄積形を用いるのが一般的である。現在では、か
かる光センサにより非常に弱い光からかなり強い光まで
を数十〜数百の段階に互いに区別して検出することが可
能である。In order to accurately detect the distance to an object serving as the basis for focusing and the defocus of the imaging lens, it is necessary to first increase the image detection accuracy of each image sensor. Since it varies within a very wide range of 10: 6, it is common to use a charge storage type for a photosensor constituting an image sensor. At present, it is possible to detect from a very weak light to a very strong light in several tens to several hundreds of stages by using such an optical sensor.
【0004】かかる光センサを用いるイメージセンサに
より対象の映像を高精度で検出した後はそれに基づいて
対象までの距離や焦点ずれを正確に検出する必要がある
が、各光センサからの光強度を表すアナログな光検出信
号のままでは1対のイメージセンサが受けた映像の相対
的な位置ずれや位置関係を検出する上で不便なので、最
近ではイメージセンサにAD変換機能をもつ回路を組み
合わせて各光センサの検出信号を例えば4〜8ビットの
映像データにディジタル化させることが多い。このイメ
ージセンサ回路はその映像データを取り扱う関連回路と
ともにふつうは1個の集積回路装置内に組み込まれる。After an image of an object is detected with high accuracy by an image sensor using such an optical sensor, it is necessary to accurately detect the distance to the object and defocus based on the detected image. Since it is inconvenient to detect the relative positional shift or positional relationship between the images received by a pair of image sensors if the analog light detection signal is used as it is, recently, a circuit having an AD conversion function has been combined with the image sensor, and In many cases, the detection signal of the optical sensor is digitized into video data of, for example, 4 to 8 bits. This image sensor circuit is usually incorporated into one integrated circuit device together with related circuits for handling the video data.
【0005】[0005]
【発明が解決しようとする課題】イメージセンサの映像
検出精度を上述のように高めかつ検出信号を映像データ
に変換した上で外光三角測距方式やTTL方式に適した
データ処理を施すことによってほぼすべての場合に光学
器械を対象に正確に合焦させ得るが、例外として対象が
非常に明るい逆光の背景内にあるとその映像を検出する
イメージセンサの実効精度が著しく低下して光学器械の
合焦が困難になる問題がある。この原因を図3を参照し
て以下に簡単に説明する。By improving the image detection accuracy of the image sensor as described above, converting the detection signal into image data, and performing data processing suitable for the external light triangulation system or the TTL system. In almost all cases, the optical instrument can be precisely focused on the object, except that if the object is in a very bright backlit background, the effective accuracy of the image sensor that detects the image will be significantly reduced and the optical instrument There is a problem that focusing becomes difficult. The reason will be briefly described below with reference to FIG.
【0006】図3(a) の例えば人物である対象1が図で
は矢印で簡略に示す明るい逆光BLを浴びており、光学器
械は図で細線で示すイメージセンサ10の視野の中心部に
この対象1を捉えているものとする。図3(b) はこの際
にイメージセンサ10が受ける光の光センサが並ぶ方向x
に沿う強度Iの分布を対数目盛りで示し、光強度Iは対
象1の左右の背景に対応するx方向の両端部では明るい
逆光BLによって図示のように非常に高いが、対象1に対
応する中央部ではそれよりもずっと低くなる。このた
め、イメージセンサ10が前述のように暗い光から明るい
光に至る図でRで示す広い範囲内の光強度Iを区別して
検出できる性能を備えているのに、肝心の対象1の映像
を検出するためには図のごく狭い実効範囲Re内の検出性
能しか利用できないことになる。An object 1 such as a person in FIG. 3 (a) is exposed to a bright backlight BL indicated by an arrow in the figure, and the optical instrument is located at the center of the visual field of the image sensor 10 indicated by a thin line in the figure. Assume that one is captured. FIG. 3B shows the direction x in which the light sensors of the light received by the image sensor 10 are lined up at this time.
Is shown on a logarithmic scale, and the light intensity I is very high at both ends in the x direction corresponding to the left and right backgrounds of the object 1 as shown in FIG. In the department it will be much lower. For this reason, although the image sensor 10 has the capability of distinguishing and detecting the light intensity I within a wide range indicated by R in the drawing from dark light to bright light as described above, the image of the subject 1 is important. For detection, only the detection performance within the very narrow effective range Re shown in the figure can be used.
【0007】すなわち、対象1とその背景の逆光BLの明
るさに大きな差があると、イメージセンサの映像検出精
度がいかに高くてもその折角の性能が活かされず、対象
1の映像を示す各光センサによる映像データの内容がす
べて同じかせいぜい最下位の1ビットの内容が変わる程
度に乏しくなり、この映像内容の情報量不足のために光
学器械の合焦が非常に不確実ないしは不可能になってし
まう。That is, if there is a large difference between the brightness of the back light BL of the object 1 and its background, no matter how high the image detection accuracy of the image sensor is, the performance of the angle is not utilized, and each light showing the image of the object 1 is not utilized. The contents of the video data by the sensors are all the same, at the very least, the content of the least significant 1 bit changes, and the lack of information in the video content makes it very uncertain or impossible to focus the optical instrument. Would.
【0008】本発明の目的は、上述の問題点を解決して
明るい逆光の背景内にある対象にも光学器械を正確に合
焦させ得るよう、イメージセンサ回路のかかる対象に対
する映像検出の精度を向上することにある。SUMMARY OF THE INVENTION It is an object of the present invention to provide an image sensor circuit with improved image detection accuracy for such objects so that the above problems can be solved and the optical instrument can be accurately focused even on objects in a bright backlit background. To improve.
【0009】[0009]
【課題を解決するための手段】上記の目的は本発明によ
れば、イメージセンサ内の電荷蓄積形の各光センサが対
象から受光する光強度をその電荷蓄積時間を表す時間信
号に変換する光センサ回路と、時間信号が表す電荷蓄積
時間を計数するためのクロックパルスを発するクロック
パルス発生回路と、各時間信号が表す電荷蓄積時間をク
ロックパルスにより計数して時間信号をディジタルな映
像データに変換する映像データ回路と、イメージセンサ
内の逆光を受ける光センサを除き、対象の映像を受ける
範囲内に並ぶ光センサに対応する光センサ回路から時間
信号を受けそれらの内の最短電荷蓄積時間を表す時間信
号に応動して計数指令を発する計数指令回路とをイメー
ジセンサ回路用に設け、この計数指令に基づいて映像デ
ータ回路にクロックパルスにより時間信号を映像データ
に変換する動作を開始させることによって達成される。SUMMARY OF THE INVENTION According to the present invention, there is provided, in accordance with the present invention, a light for converting the intensity of light received by a charge storage type photosensor in an image sensor from an object into a time signal representing the charge storage time. A sensor circuit, a clock pulse generating circuit for generating a clock pulse for counting the charge storage time represented by the time signal, and a charge pulse counting the charge storage time represented by each time signal to convert the time signal into digital video data. Except for the image data circuit that performs image processing and the optical sensor that receives backlight in the image sensor, the time signal is received from the optical sensor circuit corresponding to the optical sensor that is arranged in the range that receives the target image. A count command circuit for issuing a count command in response to a time signal indicating the accumulation time is provided for the image sensor circuit, and the video data circuit is closed based on the count command. It is achieved by starting the operation of converting a time signal to the video data by Kkuparusu.
【0010】なお、クロックパルス発生回路は各光セン
サ回路から上記のように光センサの電荷蓄積時間を表す
時間信号を発しられるのに対応して、周期が時間的に変
化,とくに増大して行くクロックパルスを発生するよう
に構成するのが、光センサにより弱い光から強い光に至
る広範囲の光強度を容易に検出できるようにする上で有
利である。Note that the clock pulse generation circuit changes in time and particularly increases in response to the time signal indicating the charge accumulation time of the light sensor from each light sensor circuit as described above. The configuration in which the clock pulse is generated is advantageous in that the optical sensor can easily detect a wide range of light intensity from weak light to strong light.
【0011】上記構成中の計数指令回路に時間信号を与
えるべき範囲は、イメージセンサ内の中央部に並ぶ光セ
ンサに対応する光センサ回路とするのが最も合理的であ
り、この中央部の範囲内の光センサ数はイメージセンサ
内の光センサ総数の50〜90%に設定するのがよく、とく
に70〜80%に設定するのが逆光の悪影響を避けながら対
象の映像検出を容易にする上で望ましい。場合によって
は、イメージセンサの一方の端部側を除く範囲の光セン
サに対応する光センサ回路から時間信号が計数指令回路
に与えるようにするのが有利になる。また、必要に応じ
計数指令回路に時間信号を与えるべきかかる範囲を可調
節とし、あるいはそれが受ける時間信号の中から計数指
令の発生タイミングを決めるため最短電荷蓄積時間を検
出すべき範囲を可調節とすることができる。The range in which the time signal is to be given to the counting command circuit in the above configuration is most suitably a photosensor circuit corresponding to the photosensors arranged in the center of the image sensor. The number of light sensors in the image sensor should be set to 50 to 90% of the total number of light sensors in the image sensor, especially to 70 to 80% in order to avoid the adverse effects of backlight and make it easier to detect the target image. Is desirable. In some cases, it is advantageous to provide a time signal to the counting command circuit from a photosensor circuit corresponding to the photosensor in a range excluding one end of the image sensor. Also, if necessary, the range in which the time signal should be given to the counting command circuit can be adjusted, or the range in which the shortest charge accumulation time should be detected in order to determine the generation timing of the counting command from the time signal received by it can be adjusted. It can be.
【0012】また、計数指令により映像データ回路に時
間信号を映像データに変換する動作を開始させるには、
それによってクロックパルスを有効化してもよく、ある
いはそれによりクロックパルス発生回路を起動させても
よい。なお、イメージセンサや本発明のイメージセンサ
回路は光学器械を合焦させるために最低1対が必要であ
るが、多点や移動体の測距方式等では必要に応じて2〜
3対のイメージセンサ回路が光学器械に組み込まれる。In order to start the operation of converting the time signal into the video data by the video data circuit in accordance with the counting command,
Thereby, the clock pulse may be validated, or the clock pulse generating circuit may be activated thereby. Note that the image sensor and the image sensor circuit of the present invention require at least one pair in order to focus an optical instrument.
Three pairs of image sensor circuits are incorporated into the optical instrument.
【0013】[0013]
【作用】本発明は、まず光センサ回路に光センサの電荷
蓄積時間を表す時間信号を発生させて、これを受ける映
像データ回路に電荷蓄積時間をクロックパルスで刻んで
時間信号を映像データに変換する動作をさせるようにし
た上で、逆光を受ける光センサを除き、対象の映像を受
ける範囲内の光センサ回路の時間信号のみから計数指令
回路に最短電荷蓄積時間を検出させて計数指令を発生さ
せ、映像データ回路にこの計数指令に基づいて各時間信
号が表す電荷蓄積時間をクロックパルスで刻んで映像デ
ータに変換する動作を開始させることにより、時間信号
を明るい逆光に影響されることなく対象の映像検出に最
も適した映像データに変換して、対象の映像検出の精度
を向上させるものである。According to the present invention, first, a time signal representing the charge accumulation time of the light sensor is generated in the light sensor circuit, and the time signal is converted into the image data by dividing the charge accumulation time in a video data circuit receiving the clock signal by a clock pulse. After receiving the image of the target, except for the optical sensor that receives backlight.
The count command circuit detects the shortest charge accumulation time from only the time signal of the optical sensor circuit within the range to be generated and generates a counting command, and the video data circuit clocks the charge accumulation time represented by each time signal based on the counting command. By starting the operation of converting to video data by pulsing, the time signal is converted to video data most suitable for target video detection without being affected by bright backlight, improving the accuracy of target video detection It is to let.
【0014】本発明の上記作用の理解を容易にするた
め、計数指令回路にイメージセンサのすべての光センサ
の最短電荷蓄積時間を検出させて計数指令を発生させる
場合を考えると、電荷蓄積時間がもちろん最短である明
るい逆光に応じたタイミングで計数指令が発生されるか
ら、映像データ回路が直ちに各時間信号が表す電荷蓄積
時間をクロックパルスで刻む動作を開始して、変換され
た映像データには明るい逆光に対応する上位ビット部が
含まれる。これに対し、本発明では逆光の範囲を除く時
間信号中の最短電荷蓄積時間のタイミングで計数指令が
発生されるから、時間信号から変換される映像データは
逆光に対応する上述の上位ビット部を余分に含まず、従
ってそのほぼ全ビットが対象の映像検出上有用な情報を
含むので、本発明により対象の映像検出精度を向上でき
る。In order to facilitate understanding of the above operation of the present invention, consider a case where the counting command circuit detects the shortest charge storage time of all the photosensors of the image sensor and generates a counting command. Of course, since the counting command is generated at the timing corresponding to the shortest bright backlight, the video data circuit immediately starts the operation of ticking the charge accumulation time represented by each time signal with a clock pulse, and the converted video data has An upper bit portion corresponding to a bright backlight is included. On the other hand, in the present invention, since the counting command is generated at the timing of the shortest charge accumulation time in the time signal excluding the range of the backlight, the video data converted from the time signal uses the above-described upper bit portion corresponding to the backlight. The present invention can improve the accuracy of detecting an image of an object, since it is not redundantly included, and almost all of the bits contain useful information for detecting an image of the object.
【0015】なお、このように逆光が入る範囲を除外し
た光センサ回路の時間信号中の最短電荷蓄積時間に対応
するタイミングで発生される計数指令により映像データ
への変換を開始すると、明るい逆光が入る範囲の光セン
サ回路の時間信号の電荷蓄積時間はこの時すでに終わっ
ているから、逆光に対する映像データはすべて同じ値に
なるが目的とする対象の映像の検出にはなんらの支障も
生じない。また背景が逆光でない通常の場合は、それ以
外の範囲内の映像検出に適する形で背景の分を含めて時
間信号が映像データに変換されるので、背景の検出精度
が若干とも低下することはあるが、対象の映像検出には
同様に支障は生じない。When the conversion into the video data is started by the counting command generated at the timing corresponding to the shortest charge accumulation time in the time signal of the optical sensor circuit excluding the range where the backlight enters, a bright backlight is generated. Since the charge accumulation time of the time signal of the optical sensor circuit in the entering range has already ended at this time, all the image data against the backlight have the same value, but there is no hindrance to the detection of the target image. Also, in the normal case where the background is not backlit, the time signal including the background is converted to video data in a form suitable for video detection in the other range, so the detection accuracy of the background will not decrease at all. However, there is no problem in detecting the target image.
【0016】[0016]
【実施例】以下、図を参照して本発明の実施例を説明す
る。図1は本発明によるイメージセンサ回路の実施例を
示し、同図(a) はイメージセンサ10を含む全体回路図
で、同図(b) はその内の光センサ回路20の部分回路図で
ある。図2はそれに関連する主な信号の波形を示し、同
図(a) は動作開始用リセットパルスRPの,同図(b) は光
センサ回路20の内部電位vの,同図(c) は時間信号TS
の,同図(d) はクロックパルスCPの波形図である。な
お、光学器械の合焦用には前述のようにこの図1に示す
イメージセンサ回路が少なくとも1対設けられ、それに
よる映像データIDを前述の外光三角測距方式やTTL方
式に応じデータ処理する回路とともに例えば共通の集積
回路装置内に作り込まれて光学器械に組み込まれる。DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 shows an embodiment of an image sensor circuit according to the present invention. FIG. 1 (a) is an entire circuit diagram including an image sensor 10, and FIG. 1 (b) is a partial circuit diagram of an optical sensor circuit 20 therein. . 2A and 2B show waveforms of main signals related thereto, FIG. 2A shows an operation start reset pulse RP, FIG. 2B shows an internal potential v of the optical sensor circuit 20, and FIG. Time signal TS
FIG. 4D is a waveform diagram of the clock pulse CP. As described above, at least one pair of the image sensor circuits shown in FIG. 1 is provided for focusing an optical instrument, and the image data IDs obtained by the image sensor circuits are processed according to the above-described external light triangulation or TTL method. Together with the associated circuitry, for example, in a common integrated circuit device and integrated into the optics.
【0017】図1(a) の上部に示されたイメージセンサ
10はn個, 例えば64個の電荷蓄積形の光センサ11からな
り、この実施例では光センサ11はフォトダイオードであ
って共通の電源電圧Vがそれらに逆バイアス方向に与え
られる。その下側にブロックで示された光センサ回路20
は各光センサ11ごとに設けられ、図では後述の説明の便
宜上1〜nの数字がそれらの番号として付けられてい
る。この光センサ回路20の回路構成例が図1(b) に光セ
ンサ11とともに示されているので、まずその回路構成と
光センサ11の電荷蓄積時間を表す時間信号TSを発生する
その動作をこれと図2の波形図を参照して説明する。The image sensor shown in the upper part of FIG.
Reference numeral 10 denotes n, for example, 64, charge accumulation type optical sensors 11. In this embodiment, the optical sensor 11 is a photodiode to which a common power supply voltage V is applied in the reverse bias direction. The optical sensor circuit 20 indicated by a block below it
Are provided for each of the optical sensors 11, and in the figure, numerals 1 to n are given as their numbers for the convenience of the description below. An example of the circuit configuration of the optical sensor circuit 20 is shown in FIG. 1B together with the optical sensor 11. First, the circuit configuration and the operation of generating a time signal TS indicating the charge accumulation time of the optical sensor 11 will be described. This will be described with reference to FIG.
【0018】この実施例では光センサ11用のフォトダイ
オードの接合容量12を電荷蓄積用のキャパシタとして利
用するので、光センサ回路20は図1(b) のように光セン
サ11と直列接続されたリセットトランジスタ21と両者の
相互接続点の電位vを受けるコンパレータ22とからなる
ごく簡単な構成とされる。光センサ11に光検出動作を開
始させるには、リセットトランジスタ21に図2(a) に示
すリセットパルスRPを与えて短時間内オンさせ、接合容
量12を電源電圧Vと動作点の初期化用電圧V0との差電圧
に充電するとともに、コンパレータ22に与える電位vを
図2(b) に示すように電圧V0に初期化する。In this embodiment, since the junction capacitance 12 of the photodiode for the optical sensor 11 is used as a capacitor for storing electric charges, the optical sensor circuit 20 is connected in series with the optical sensor 11 as shown in FIG. It has a very simple configuration comprising a reset transistor 21 and a comparator 22 receiving a potential v at an interconnection point between the two. In order for the optical sensor 11 to start the light detection operation, a reset pulse RP shown in FIG. 2A is applied to the reset transistor 21 to turn it on within a short time, and the junction capacitor 12 is used to initialize the power supply voltage V and the operating point. While charging to a voltage difference from the voltage V0, the potential v applied to the comparator 22 is initialized to the voltage V0 as shown in FIG.
【0019】以後は光センサ11の光電流により接合容量
12が放電され、これに応じ電位vが図2(b) に示すよう
にその初期値V0から時間の経過とともに光センサ11が受
けている光の強度に対応する傾斜で立ち上がって行く。
コンパレータ22はその一方の入力に受けるこの電位vを
他方の入力に受けている基準電圧Vrと比較しており、そ
の出力である図2(c) の時間信号TSはリセットパルスRP
と同時に図示の例ではローの状態にリセットされている
が、電圧vが基準電圧Vrに達した時点でハイに立ち上が
る。この時間信号TSがリセットパルスRPの消失後にロー
の状態にある間の時間は、電圧vが立ち上がる傾斜, す
なわち光センサ11が受けている光強度を表しており、こ
れが光センサ11の電荷蓄積時間Tsである。この電荷蓄積
時間Tsは光強度とはほぼ反比例の関係にある。Thereafter, the junction capacitance is determined by the photocurrent of the optical sensor 11.
12 is discharged, and in response to this, the potential v rises with the lapse of time from the initial value V0 at an inclination corresponding to the intensity of light received by the optical sensor 11 as shown in FIG. 2 (b).
The comparator 22 compares this potential v received at one input with a reference voltage Vr received at the other input, and its output, the time signal TS in FIG.
At the same time, in the illustrated example, the voltage is reset to a low state, but rises to a high level when the voltage v reaches the reference voltage Vr. The time during which the time signal TS is in the low state after the reset pulse RP has disappeared represents the slope of the rise of the voltage v, that is, the light intensity received by the optical sensor 11, which is the charge accumulation time of the optical sensor 11. Ts. The charge storage time Ts is substantially inversely proportional to the light intensity.
【0020】図1(a) の右下部のクロックパルス発生回
路30はこの電荷蓄積時間Tsを刻んで映像データIDにディ
ジタル化するためのクロックパルスCPを発生するもの
で、図の例ではトリガ入力TにリセットパルスRPを受け
てその消失と同時に動作を開始し、この実施例では時間
とともに周期が図示のように増大して行くクロックパル
スCPを発生する。この周期変化は電荷蓄積時間Tsが光セ
ンサ11が受けている光強度と前述のようにほぼ反比例の
関係にある点に合わせたもので、これにより数桁の広い
範囲内で変化し得る光強度を比較的少ないビット数の映
像データIDによって表すことが可能になる。The clock pulse generating circuit 30 at the lower right of FIG. 1A generates a clock pulse CP for digitizing the charge accumulation time Ts and digitizing the video data ID. In the example shown in FIG. Upon receiving the reset pulse RP at T, the operation starts simultaneously with its disappearance. In this embodiment, a clock pulse CP whose period increases with time as shown in the figure is generated. This period change is adjusted in accordance with the point that the charge accumulation time Ts is substantially inversely proportional to the light intensity received by the optical sensor 11 as described above, and thus, the light intensity that can vary within a wide range of several orders of magnitude. Can be represented by a relatively small number of bits of video data ID.
【0021】図1(a) で一点鎖線で囲んで示す映像デー
タ回路40は、n個の光センサ回路20から出力される時間
信号TSが表す電荷蓄積時間Tsをそれぞれ映像データIDに
変換するためのもので、この実施例では時間信号TSをそ
れぞれ受けるn個のラッチ41と, それらとバス42を介し
接続されたカウンタ43と, それへのクロックパルスCPの
供給を制御するトランスミッションゲート44と, ラッチ
41に出力指令Siを順次発する出力指令回路45と, ラッチ
41に接続された映像データID用の出力バス46とがこれに
含まれる。A video data circuit 40 enclosed by a dashed line in FIG. 1A converts the charge storage time Ts represented by the time signal TS output from the n photosensor circuits 20 into video data ID. In this embodiment, n latches 41 each receiving a time signal TS, a counter 43 connected to them via a bus 42, a transmission gate 44 for controlling the supply of a clock pulse CP thereto, latch
Output command circuit 45 that issues output command Si to 41 sequentially, and latch
An output bus 46 for video data ID connected to 41 is included in this.
【0022】この内のラッチ41は、図2(c) の電荷蓄積
時間Tsの終わりに時間信号TSがこの実施例ではローから
ハイに立ち上がったとき応動して、クロックパルスCPを
計数したカウンタ43内のカウント値をバス42から読み込
んで映像データIDとして記憶するものである。また出力
指令回路45は例えばデコーダ回路であり、ラッチ41を指
定するアドレスADに応じて出力指令Si(i=1-n) をラッチ
41に順次に与え、映像データIDを出力バス46を介して出
力させるものである。In this embodiment, the latch 41 responds when the time signal TS rises from low to high at the end of the charge accumulation time Ts in FIG. 2C, and the counter 43 counts the clock pulse CP. Is read from the bus 42 and stored as a video data ID. The output command circuit 45 is, for example, a decoder circuit, and latches an output command Si (i = 1-n) according to an address AD that specifies the latch 41.
The video data ID is sequentially provided to the output 41 and the video data ID is output via the output bus 46.
【0023】計数指令回路50はこの実施例では単一のオ
アゲートで構成され、かつイメージセンサ10の中央範囲
内に並ぶ光センサ11に対応する光センサ回路20のみから
時間信号TSを入力する。すなわち、この実施例ではイメ
ージセンサ10内の左右両側の背景の逆光が入るおそれの
ある範囲内の各p個の光センサ11に対応する光センサ回
路20の発する時間信号TSはこの計数指令回路50への入力
から除外される。前述のようにイメージセンサ10内の光
センサ11の総数が64個の場合のこの除外数pは例えば8
に設定され、従ってn−2p=48個の時間信号TSが計数指
令回路50に与えられる。この計数指令回路50から出力さ
れる計数指令CSは、この例ではクロックパルスCPを有効
化するために映像データ回路40内のトランスミッション
ゲート44に与えられる。なお、計数指令回路50に時間指
令TSを与えるべき光センサ回路20ないし光センサ11の個
数は場合に応じ全数の50〜90%に設定され、経験上から
は70〜80%の範囲内に設定するのが逆光の影響を排除し
ながら対象の映像に関する情報量をできるだけ増加させ
る上で望ましい。In this embodiment, the counting command circuit 50 is constituted by a single OR gate, and receives the time signal TS only from the optical sensor circuits 20 corresponding to the optical sensors 11 arranged in the central area of the image sensor 10. That is, in this embodiment, the time signal TS generated by the optical sensor circuit 20 corresponding to each of the p optical sensors 11 within the range in which the backlight of the left and right sides in the image sensor 10 may enter is determined by the counting command circuit 50. Excluded from input to. As described above, when the total number of the optical sensors 11 in the image sensor 10 is 64, the exclusion number p is, for example, 8
Therefore, n-2p = 48 time signals TS are supplied to the count command circuit 50. In this example, the count command CS output from the count command circuit 50 is given to the transmission gate 44 in the video data circuit 40 to validate the clock pulse CP. Incidentally, the number of the optical sensor circuits 20 to 11 to which the time instruction TS is to be given to the counting instruction circuit 50 is set to 50 to 90% of the total number depending on the case, and from experience, it is set within the range of 70 to 80%. This is desirable in order to increase the amount of information on the target video as much as possible while eliminating the effects of backlight.
【0024】以上のように構成されたこの実施例のイメ
ージセンサ回路では、前述のようにリセットパルスRPに
よりイメージセンサ10と光センサ回路20に光検出動作を
開始させると同時に映像データ回路40のラッチ41の記憶
内容とカウンタ43の計数値をクリアし、かつクロックパ
ルス発生回路30を起動させて図2(d) に示すクロックパ
ルスCPを発生させる。イメージセンサ10に図3(a) の対
象1の映像のほか背景の逆光BLが入っていると、その左
右の端部に対応する各p個の光センサ回路20の大部分で
は電荷蓄積時間Tsが最も早く経過して時間信号TSがロー
からハイに立ち上がり、それに応じて映像データ回路40
内の対応するラッチ41はバス42を介してカウンタ43内の
計数値を読み取るが、計数指令回路50から計数指令CSが
まだ出ておらずカウンタ43はクロックパルスCPを受けて
いないので、これらのラッチ41はこの実施例では0の計
数値を映像データIDとして記憶する。In the image sensor circuit of this embodiment configured as described above, the light detection operation is started by the image sensor 10 and the light sensor circuit 20 by the reset pulse RP as described above, and at the same time, the latch of the video data circuit 40 is performed. The memory contents of 41 and the count value of the counter 43 are cleared, and the clock pulse generating circuit 30 is activated to generate the clock pulse CP shown in FIG. If the image sensor 10 includes the background image BL in addition to the image of the object 1 in FIG. 3A, the charge accumulation time Ts in most of the p light sensor circuits 20 corresponding to the left and right ends thereof. The earliest time elapses and the time signal TS rises from low to high, and the video data circuit 40
The corresponding latch 41 reads the count value in the counter 43 via the bus 42, but since the count command CS has not yet been issued from the count command circuit 50 and the counter 43 has not received the clock pulse CP, these In this embodiment, the latch 41 stores the count value of 0 as the video data ID.
【0025】計数指令回路50のオアゲートが受けている
図1(a) のp+1からn−p番目の光センサ回路20の時
間信号TSのいずれかがハイになると、計数指令CSが発生
してトランスミッションゲート44がオンするので、カウ
ンタ43はクロックパルスCPを受けて計数を開始する。図
2(b) にこの最初に時間信号TSがハイになる光センサ回
路20内の電位veの波形が破線で示されており、これに対
応する図2(d) の最短電荷蓄積時間Te以降のクロックパ
ルスCPがカウンタ43内で計数される。従って、電荷蓄積
時間Tsがこの最短電荷蓄積時間Te以上の時間信号TSを受
けるラッチ41に正規の映像データIDが記憶される。な
お、図2(d) のクロックパルスCPは図示の都合からかな
り長周期で示されているが、もちろん実際には4〜8ビ
ットの正規の映像データIDが得られるよう短周期とされ
る。When any of the time signals TS of the (p + 1) to (np) th photosensor circuits 20 in FIG. 1A received by the OR gate of the counting command circuit 50 becomes high, a counting command CS is generated and the transmission is performed. Since the gate 44 is turned on, the counter 43 starts counting upon receiving the clock pulse CP. In FIG. 2B, the waveform of the potential ve in the photosensor circuit 20 at which the time signal TS first goes high is shown by a broken line, and the corresponding waveform after the shortest charge accumulation time Te in FIG. Are counted in the counter 43. Therefore, the normal video data ID is stored in the latch 41 that receives the time signal TS whose charge storage time Ts is longer than the shortest charge storage time Te. Although the clock pulse CP in FIG. 2D is shown with a considerably long period for convenience of illustration, the clock pulse CP is actually made a short period so as to obtain a normal video data ID of 4 to 8 bits.
【0026】このように、本発明では電荷蓄積時間Tsの
映像データIDへの変換用のクロックパルスCPをイメージ
センサ10の明るい逆光を受けている範囲の光センサ回路
20の動作中無効化し、対象の映像を受ける範囲の光セン
サ回路20に対してのみ有効化するので、逆光の影響を受
けることなく対象の映像を正確に表す映像データIDを所
望のビット数で得ることができる。As described above, according to the present invention, the clock pulse CP for converting the charge storage time Ts into the video data ID is supplied to the optical sensor circuit in the range where the image sensor 10 receives bright backlight.
Since it is invalidated during the operation of 20 and is enabled only for the optical sensor circuit 20 in the range where the target image is received, the video data ID accurately representing the target image without the influence of the backlight with the desired number of bits Obtainable.
【0027】なお、対象の背景が逆光でない場合、イメ
ージセンサ内の対象の映像を受ける範囲を上述のように
基準にして対象および背景を表す映像データIDが得られ
る。従って、対象の映像を受ける範囲内の最短電荷蓄積
時間Teより短い電荷蓄積時間の時間信号TSが背景を受け
る範囲内から出ると、それに対応する映像データIDが実
際と異なっては来るが、対象の映像を表す映像データID
はもちろん同じなので光学器械を合焦させる上での支障
にならない。いずれにせよ、本発明のイメージセンサ回
路から得られる映像データIDには対象の映像の正確な検
出部が含まれており、従来と同じ要領で光学器械の外光
三角測距方式やTTL方式による合焦のために用いるこ
とができる。If the background of the object is not backlit, the image data ID representing the object and the background is obtained based on the range of receiving the image of the object in the image sensor as described above. Therefore, when the time signal TS having a charge accumulation time shorter than the shortest charge accumulation time Te in the range in which the target image is received comes out of the range in which the background is received, the corresponding video data ID is different from the actual one. Video data ID representing the video of
Is of course the same, so it does not hinder the focusing of the optical instrument. In any case, the image data ID obtained from the image sensor circuit of the present invention includes an accurate detection unit of the target image, and the external light triangulation or TTL method of the optical instrument is used in the same manner as in the related art. Can be used for focusing.
【0028】以上説明した実施例では計数指令回路50が
時間信号TSを受ける光センサ回路20の個数ないしイメー
ジセンサ10内の範囲を固定としたが、ズームレンズを用
いる光学器械のように視野内の対象と背景の比率が大き
く変わる場合にはこの個数や範囲を可調節とするのが有
利になる。このためには図1(a) の計数指令回路50のオ
アゲートのほか、その担当範囲に隣接する左右の範囲内
のそれぞれ1〜p個の光センサ回路20から時間信号TSを
受ける第2のオアゲートを設け、アンドゲート等の手段
でイネーブルしたその出力を第1のオアゲートの出力と
ともに出力オアゲートに与えてそれから計数指令CSを取
り出せば、アンドゲートのイネーブルとディセーブルに
よって計数指令回路50の時間信号TSを受ける範囲を制御
ないしは切り換えることができる。In the embodiment described above, the counting command circuit 50 fixes the number of the optical sensor circuits 20 receiving the time signal TS or the range in the image sensor 10. When the ratio between the object and the background greatly changes, it is advantageous to make the number or range adjustable. For this purpose, in addition to the OR gate of the counting command circuit 50 shown in FIG. 1A, a second OR gate which receives the time signal TS from each of the 1 to p optical sensor circuits 20 in the right and left ranges adjacent to the assigned range. Is provided to the output OR gate together with the output of the first OR gate, and the count command CS is extracted from the output OR gate. Then, the time signal TS of the count command circuit 50 is obtained by enabling and disabling the AND gate. Can be controlled or switched.
【0029】これからわかるように本発明は上述の実施
例のほか種々の態様で実施できる。例えば、光学器械の
種類により計数指令回路に時間信号を与える範囲をイメ
ージセンサの一方の端部側のみを除いた範囲とするのが
有利になる。また実施例では計数指令によりクロックパ
ルスを有効化したが、それによりクロックパルス発生回
路を起動させるようにしてもよい。なお、本発明のイメ
ージセンサ回路は光学器械の合焦用に最低1対必要であ
るが、多点測距や移動体測距方式等では必要に応じて2
〜3対が光学器械に組み込まれる。As can be seen, the present invention can be implemented in various embodiments other than the above-described embodiment. For example, depending on the type of the optical instrument, it is advantageous to set the range in which the time signal is supplied to the counting command circuit to a range excluding only one end of the image sensor. In the embodiment, the clock pulse is validated by the counting command. However, the clock pulse generating circuit may be activated by the counting command. The image sensor circuit of the present invention requires at least one pair for focusing an optical instrument.
33 pairs are incorporated into the optics.
【0030】[0030]
【発明の効果】以上のように、本発明ではイメージセン
サ内の各光センサが受光する光強度を光センサ回路によ
り電荷蓄積時間を表す時間信号に変換し、イメージセン
サ内の明るい逆光を受ける光センサを除き、対象の映像
を受ける範囲に対応する光センサ回路の時間信号を計数
指令回路に与えてその内の最短電荷蓄積時間のタイミン
グで計数指令を発生させ、これに応じ映像データ回路に
各時間信号が表す電荷蓄積時間をクロックパルスで計数
して映像データに変換する動作を開始させることによ
り、次の効果が得られる。As described above, according to the present invention, the light intensity received by each optical sensor in the image sensor is converted into a time signal representing the charge accumulation time by the optical sensor circuit, and the light in the image sensor which receives bright backlight is obtained. Target image, excluding sensor
The time signal of the optical sensor circuit corresponding to the receiving range is given to the count command circuit, and the count command is generated at the timing of the shortest charge storage time, and the charge storage time represented by each time signal in the video data circuit accordingly. The following effects can be obtained by starting the operation of counting by the clock pulse and converting it into video data.
【0031】(a) 電荷蓄積時間を映像データに変換する
ためのクロックパルスが、イメージセンサ内の明るい逆
光を受けている範囲の光センサ回路の動作中は無効化さ
れ、対象の映像を受ける範囲の光センサ回路の時間信号
を映像データに変換するためにのみ有効化されるので、
背景の逆光に惑わされることなく対象の映像を正確に表
す映像データをイメージセンサ回路から取り出すことが
できる。 (b) 背景が明るい逆光でない場合にはイメージセンサ内
の対象の映像を受ける範囲の光センサ回路の電荷蓄積時
間に基づいて背景範囲を含むすべての光センサ回路の時
間信号が映像データにほぼ正常に変換されるので、正確
な映像データが対象と背景の双方に対して得られる。 (c) イメージセンサを光学器械に組み込む際にその光軸
との関係位置に若干のずれやばらつきが出やすいが、本
発明ではイメージセンサ内のずれの影響を受けやすい部
分以外の対象の映像を受ける範囲の光センサ回路の電荷
蓄積時間を基準にして時間信号が映像データに変換され
るので、位置ずれの影響を受けることが少なくなり、イ
メージセンサの組み込みを容易にすることができる。(A) The clock pulse for converting the charge accumulation time into video data is invalidated during the operation of the photosensor circuit in the range where the image sensor is receiving bright backlight, and the range in which the target video is received. Enabled only to convert the time signal of the optical sensor circuit to video data,
The video data accurately representing the target video can be extracted from the image sensor circuit without being disturbed by the backlight of the background. (b) When the background is not bright backlight, the time signals of all the photosensor circuits including the background range are almost normal to the video data based on the charge accumulation time of the photosensor circuit in the range where the target image in the image sensor is received. , Accurate video data is obtained for both the object and the background. (c) When the image sensor is incorporated into the optical instrument, slight misalignment or variation is likely to occur in the position relative to the optical axis. Since the time signal is converted into the video data based on the charge accumulation time of the photosensor circuit in the receiving range, the influence of the positional shift is reduced, and the incorporation of the image sensor can be facilitated.
【0032】このように、本発明は通常の背景の場合の
イメージセンサの性能を落とすことなく明るい逆光を浴
びる対象の映像の検出精度を向上する効果を奏するもの
で、光学器械の外光三角測距方式やTTL方式による対
象への合焦精度を高めてその使い勝手の改善と利用範囲
の拡大に貢献し得るものである。As described above, the present invention has an effect of improving the detection accuracy of an image of a subject exposed to bright backlight without deteriorating the performance of an image sensor in a normal background. It can contribute to improvement of usability and expansion of the range of use by increasing the focusing accuracy of the object by the distance method or the TTL method.
【図1】本発明によるイメージセンサ回路の実施例を示
し、同図(a) はイメージセンサを含む全体回路図、同図
(b) は光センサ回路の部分回路図である。FIG. 1 shows an embodiment of an image sensor circuit according to the present invention. FIG. 1 (a) is an overall circuit diagram including an image sensor, and FIG.
(b) is a partial circuit diagram of the optical sensor circuit.
【図2】図1に関連する主な信号の波形を示し、同図
(a) はリセットパルス,同図(b)は光センサ回路の内部
電位,同図(c) は時間信号,同図(d) はクロックパルス
の波形図である。FIG. 2 shows waveforms of main signals related to FIG.
(a) is a reset pulse, (b) is an internal potential of the photosensor circuit, (c) is a time signal, and (d) is a waveform diagram of a clock pulse.
【図3】イメージセンサの対象が逆光を受ける場合の問
題点の説明用であり、同図(a)は対象とその背景に対す
るイメージセンサの視野の関係図、同図(b) はイメージ
センサが受ける光強度の分布図である。FIG. 3 is a diagram for explaining a problem when an object of an image sensor receives backlight; FIG. 3 (a) is a diagram showing the relationship between the object and the background of the image sensor with respect to the background, and FIG. It is a distribution diagram of the received light intensity.
1 映像を検出すべき対象 10 イメージセンサ 11 光センサ 20 光センサ回路 30 クロックパルス発生回路 40 映像データ回路 50 計数指令回路 BL 逆光 CP クロックパルス CS 計数指令 ID 映像データ TS 時間信号 Te 最短電荷蓄積時間 Ts 電荷蓄積時間 v 光センサ回路の内部電位 1 Image detection target 10 Image sensor 11 Optical sensor 20 Optical sensor circuit 30 Clock pulse generation circuit 40 Video data circuit 50 Count command circuit BL Backlight CP clock pulse CS Count command ID Video data TS Time signal Te Minimum charge accumulation time Ts Charge accumulation time v Internal potential of photosensor circuit
───────────────────────────────────────────────────── フロントページの続き (56)参考文献 特開 平2−297514(JP,A) 特開 平2−183123(JP,A) (58)調査した分野(Int.Cl.6,DB名) G02B 7/28 G03B 13/36 ────────────────────────────────────────────────── ─── Continuation of the front page (56) References JP-A-2-297514 (JP, A) JP-A-2-183123 (JP, A) (58) Fields investigated (Int. Cl. 6 , DB name) G02B 7/28 G03B 13/36
Claims (4)
を検出するイメージセンサ回路であって、イメージセン
サ内の各光センサが対象から受光する光強度をその電荷
蓄積時間を表す時間信号に変換する光センサ回路と、時
間信号が表す電荷蓄積時間を計数するためのクロックパ
ルスを発するクロックパルス発生回路と、各時間信号が
表す電荷蓄積時間をクロックパルスにより計数して時間
信号をディジタルな映像データに変換する映像データ回
路と、イメージセンサ内の逆光を受ける光センサを除
き、対象の映像を受ける範囲内に並ぶ光センサに対応す
る光センサ回路から時間信号を受けそれらの内の最短電
荷蓄積時間を表す時間信号に応動して計数指令を発する
計数指令回路とを備えてなり、計数指令回路からの計数
指令に基づいて映像データ回路にクロックパルスによる
時間信号の映像データへの変換動作を開始させるように
したことを特徴とするイメージセンサ回路。An image sensor circuit for detecting an image of an optical instrument for focusing on an object, wherein each light sensor in the image sensor converts the light intensity received from the object into a time signal representing its charge accumulation time. A photosensor circuit for converting, a clock pulse generating circuit for generating a clock pulse for counting a charge accumulation time represented by the time signal, and a charge control circuit for counting the charge accumulation time represented by each time signal by the clock pulse to convert the time signal into a digital image. Excludes the video data circuit that converts data and the optical sensor that receives back light in the image sensor.
A count command circuit for receiving a time signal from an optical sensor circuit corresponding to an optical sensor arranged in a range for receiving an image of an object, and issuing a count command in response to a time signal representing the shortest charge accumulation time among them. An image sensor circuit, wherein a video data circuit is started to convert a time signal into video data by a clock pulse based on a count command from a count command circuit.
回路に対しイメージセンサ内の中央部に並ぶ光センサに
対応する光センサ回路から時間信号を与えるようにした
ことを特徴とするイメージセンサ回路。2. The image sensor according to claim 1, wherein a time signal is supplied to the counting command circuit from an optical sensor circuit corresponding to an optical sensor arranged in the center of the image sensor. circuit.
並ぶ光センサの数をイメージセンサ内の光センサ数の50
〜90%に設定したことを特徴とするイメージセンサ回
路。3. The circuit according to claim 2, wherein the number of light sensors arranged in the center is 50 times the number of light sensors in the image sensor.
An image sensor circuit characterized by being set to ~ 90%.
において、計数指令回路に対し時間信号を与えるべき光
センサ回路に対応する光センサのイメージセンサ内に並
ぶ範囲を可調節としたことを特徴とするイメージセンサ
回路。4. A circuit according to claim 2 , wherein the range of the photosensors corresponding to the photosensor circuits to which the time signal is to be given to the counting command circuit is adjustable. An image sensor circuit comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP33732491A JP2895999B2 (en) | 1991-12-20 | 1991-12-20 | Image sensor circuit |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP33732491A JP2895999B2 (en) | 1991-12-20 | 1991-12-20 | Image sensor circuit |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH05173054A JPH05173054A (en) | 1993-07-13 |
JP2895999B2 true JP2895999B2 (en) | 1999-05-31 |
Family
ID=18307555
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP33732491A Expired - Fee Related JP2895999B2 (en) | 1991-12-20 | 1991-12-20 | Image sensor circuit |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2895999B2 (en) |
-
1991
- 1991-12-20 JP JP33732491A patent/JP2895999B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JPH05173054A (en) | 1993-07-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US4716434A (en) | Focus condition detecting device | |
US4851657A (en) | Focus condition detecting device using weighted center or contrast evaluation | |
US4527053A (en) | Focus detecting device with relative movement detection | |
GB2082010A (en) | Automatic focus detecting devices for cameras | |
US4523101A (en) | Image scanning system with signal integration time control | |
JPH0380290B2 (en) | ||
US4835562A (en) | Focus condition detecting device | |
JPS59126517A (en) | Focusing detector of camera | |
JPH0311443B2 (en) | ||
US4641964A (en) | Apparatus for measuring optical characteristics of optical systems | |
US4595271A (en) | In-focus state detection device | |
JPH0230631B2 (en) | ||
US4300826A (en) | Focus indicating device for camera | |
JP2895999B2 (en) | Image sensor circuit | |
JPH0340366B2 (en) | ||
US4762987A (en) | Automatic focusing system with correlation-determined disabling | |
US4942418A (en) | Focus condition detecting device | |
US5028948A (en) | Photoelectric transducer apparatus for focus detection | |
JPS642922B2 (en) | ||
JP2707644B2 (en) | Charge storage type photoelectric conversion device | |
JP2558377B2 (en) | Focus detection device | |
JPS60176009A (en) | Autofocusing camera | |
SU1254408A1 (en) | Optronic device for automatic registering of defocusing level of lens | |
JP2797344B2 (en) | Charge storage type photoelectric conversion device | |
SU883843A1 (en) | Optical electronic device for automatic focusing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 19990223 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |