JP3244850B2 - License plate reader - Google Patents

License plate reader

Info

Publication number
JP3244850B2
JP3244850B2 JP06209293A JP6209293A JP3244850B2 JP 3244850 B2 JP3244850 B2 JP 3244850B2 JP 06209293 A JP06209293 A JP 06209293A JP 6209293 A JP6209293 A JP 6209293A JP 3244850 B2 JP3244850 B2 JP 3244850B2
Authority
JP
Japan
Prior art keywords
image
vehicle
license plate
imaging
binarizing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP06209293A
Other languages
Japanese (ja)
Other versions
JPH06274788A (en
Inventor
利恵 長谷川
公之 山本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Heavy Industries Ltd
Original Assignee
Mitsubishi Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Heavy Industries Ltd filed Critical Mitsubishi Heavy Industries Ltd
Priority to JP06209293A priority Critical patent/JP3244850B2/en
Publication of JPH06274788A publication Critical patent/JPH06274788A/en
Application granted granted Critical
Publication of JP3244850B2 publication Critical patent/JP3244850B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【産業上の利用分野】本発明は有料道路の車種判別装置
に適用されるナンバープレート読み取り装置に関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a license plate reading device applied to a vehicle type discriminating device on a toll road.

【0002】[0002]

【従来の技術】従来のナンバープレート読み取り装置
は、図10に示すように構成されている。同図において
101は一対の光センサで、車両105の侵入を検知す
る。102は撮像装置で、侵入してきた車両105の前
面部の画像を撮像する。103は画像処理装置で、撮像
機(カメラ)102で撮像した画像の中からナンバープ
レートを読み取る。104は車両侵入路で、ここに侵入
してきた車両105の画像が撮像機102により撮影さ
れる。
2. Description of the Related Art A conventional license plate reader is configured as shown in FIG. In FIG. 1, reference numeral 101 denotes a pair of optical sensors for detecting the intrusion of the vehicle 105. An imaging device 102 captures an image of the front portion of the vehicle 105 that has entered the vehicle. An image processing apparatus 103 reads a license plate from an image captured by an imaging device (camera) 102. Reference numeral 104 denotes a vehicle intrusion path, and an image of the vehicle 105 that has entered the vehicle is captured by the imaging device 102.

【0003】上記のように構成されたナンバープレート
読み取り装置は、車両侵入路104に車両105が侵入
してくると、光センサ101が遮光されて車両105が
検知され、光センサ101は画像処理装置103に対し
て車両検知信号を出力する。画像処理装置103は、車
両検知信号を受けると撮像機102に対して撮像指令を
出力する。撮像機102は、撮像指令を受けると車両侵
入路104に侵入してきた車両105の前面部を撮像
し、その画像信号を画像処理装置103に送る。画像処
理装置103は、撮像機102からの画像信号をA/D
(アナログ/デジタル)変換した後、車両105の前面
部の画像よりナンバープレート部分を読取り、そのナン
バープレート部の画像に対して各種の画像処理を施し、
ナンバープレート内の文字認識を行なう。この場合、図
11に示すように撮像機102は車両侵入方向に対して
斜め前方より撮像するため、撮像機102に取り込まれ
た原画像(図12(a))の実際の撮像範囲は、図12
(b)に示すように台形の範囲である。
In the license plate reading device configured as described above, when the vehicle 105 enters the vehicle intrusion path 104, the optical sensor 101 is shielded from light and the vehicle 105 is detected. A vehicle detection signal is output to 103. Upon receiving the vehicle detection signal, the image processing device 103 outputs an imaging command to the imaging device 102. Upon receiving the image capturing command, the image capturing device 102 captures an image of the front surface of the vehicle 105 that has entered the vehicle intrusion path 104 and sends the image signal to the image processing device 103. The image processing device 103 converts the image signal from the image pickup device 102 into an A / D signal.
After the (analog / digital) conversion, the license plate portion is read from the image of the front surface of the vehicle 105, and various image processes are performed on the image of the license plate portion.
Recognize characters in license plates. In this case, as shown in FIG. 11, since the image capturing apparatus 102 captures an image obliquely forward with respect to the vehicle entry direction, the actual image capturing range of the original image (FIG. 12A) captured by the image capturing apparatus 102 is as shown in FIG. 12
The area is trapezoidal as shown in FIG.

【0004】従って、図13(b)に示すように被撮像
平面上では規則正しく並んでいるナンバープレート内の
文字も、画像処理装置103内に取り込まれた原画像上
では、本来長方形のナンバープレートは、図13(a)
に示すように台形になり、文字のピッチや大きさも撮像
機102から遠い位置にあるものほど小さくなり、文字
の並びも傾いてくる。そのため画像処理装置103の各
処理では、この歪みを考慮する必要があり、撮像条件が
変更されると、画像処理中で使用される各種パラメータ
の変更が必要となる。
Accordingly, as shown in FIG. 13 (b), characters in a license plate that are regularly arranged on the plane to be imaged are also different from the original rectangular license plate in the original image captured in the image processing device 103. , FIG. 13 (a)
, The pitch and size of the characters become smaller as they are farther from the image pickup device 102, and the arrangement of the characters also becomes inclined. Therefore, in each process of the image processing apparatus 103, it is necessary to consider this distortion, and when the imaging conditions are changed, it is necessary to change various parameters used during the image processing.

【0005】[0005]

【発明が解決しようとする課題】上記したように撮像機
102により撮像した画像上のナンバープレートは、図
11に示す撮像位置の関係上、台形に歪むため、ナンバ
ープレートの中から文字を切出す時、本来規格化されて
いるはずの文字の大きさや文字間のピッチが図13
(a)に示すように一定でなかったり、文字の並びが傾
いたりしているので、文字の切出し処理が複雑化して認
識の誤りや不明が増加し、撮像位置による原画像上での
ナンバープレートの歪みがナンバープレート読取りの認
識率に大きな影響を及ぼすという問題があった。また、
撮像機102の設置条件が変更されると、その度に文字
切出し処理及び文字認識処理の各種パラメータの調整が
必要であった。
As described above, the license plate on the image captured by the image capturing device 102 is distorted into a trapezoid due to the relationship of the image capturing position shown in FIG. 11, so characters are cut out from the license plate. At this time, the character size and the pitch between characters, which should be standardized, are shown in FIG.
As shown in (a), the characters are not constant or the arrangement of the characters is inclined, so that the process of extracting the characters is complicated, and the number of recognition errors and unknowns increases. There is a problem that the distortion of the image greatly affects the recognition rate of license plate reading. Also,
Each time the installation condition of the imaging device 102 is changed, it is necessary to adjust various parameters of the character extraction processing and the character recognition processing.

【0006】本発明は上記実情に鑑みてなされたもの
で、文字の切出しや文字の認識処理が簡単となり、文字
認識結果の不明や誤りを減少できると共に、撮像距離や
撮像方向等の撮像条件が変更になっても簡単に対応する
ことができるナンバープレート読み取り装置を提供する
ことを目的とする。
SUMMARY OF THE INVENTION The present invention has been made in view of the above circumstances, and makes it easy to cut out characters and recognize characters, to reduce unknown or incorrect characters in character recognition results, and to reduce image pickup conditions such as image pickup distance and image pickup direction. It is an object of the present invention to provide a license plate reading device that can easily cope with a change.

【0007】[0007]

【課題を解決するための手段】本発明に係るナンバープ
レート読み取り装置は、ゲート車線内へ侵入する車両を
検知する車両検知手段と、前記ゲート車線内に設置さ
れ、前記車両検知手段から出力される車両検知信号によ
り前記侵入車両の前面部を斜め前方から撮像する撮像機
と、前記撮像機により撮像された画像を記憶する画像メ
モリと、前記画像メモリに記憶された画像データに対
し、前記車両を斜め前方より撮像することにより生ずる
被写体の遠近法的な歪みを前記侵入車両の被撮像平面に
対する前記撮像機の設置条件で与えられる垂直方向パラ
メータ及び水平方向パラメータに従って補正する補正手
段と、前記補正手段により補正された画像データよりナ
ンバープレートの部分を切出すナンバープレート切出し
手段と、前記切出されたナンバープレート部分の画像か
ら文字を切出す文字切出し手段と、前記文字切出し手段
により切出された文字を認識する認識手段とを具備し、
前記ナンバープレート切出し手段は、前記補正手段によ
り補正された画像データを微分する微分手段と、前記微
分手段による微分画像を所定の閾値で2値化する第1の
2値化手段と、前記2値画像から特徴画像を抽出する手
段と、前記特徴画像を単位画像に分割し、それぞれの単
位の画素の中から最大値を代表点として抽出する圧縮手
段と、前記圧縮手段により圧縮された特徴画像を所定の
閾値で2値化する第2の2値化手段と、前記第2の2値
化手段により2値化された画像からプレート存在位置を
推定してナンバープレートの部分を切出す手段とからな
ことを特徴とする。
A license plate reader according to the present invention is provided with a vehicle detecting means for detecting a vehicle entering a gate lane, and is provided in the gate lane and outputted from the vehicle detecting means. An image capturing device that captures an image of the front surface of the intruding vehicle obliquely from the front with a vehicle detection signal, an image memory that stores an image captured by the image capturing device, and image data that is stored in the image memory. Perspective distortion of an object caused by imaging obliquely from the front is caused by a vertical parameter given by the installation condition of the imaging device with respect to the imaging target plane of the intruding vehicle.
Correction means for correcting according to the meter and the horizontal direction parameter, license plate cutting means for cutting out a license plate portion from the image data corrected by the correction means, and a license plate portion from the image of the cut out license plate portion. Character extracting means for extracting characters, and recognition means for recognizing the characters extracted by the character extracting means,
The license plate cutting means is provided by the correcting means.
A differentiating means for differentiating the corrected image data;
A first method of binarizing a differential image by a dividing means with a predetermined threshold value
Binarizing means for extracting a feature image from the binary image;
And dividing the feature image into unit images, and
A compression method that extracts the maximum value as the representative point from the pixels
And a characteristic image compressed by the compression means.
A second binarizing means for binarizing with a threshold value, and the second binary
Plate position from the image binarized by the binarization means
Estimate and cut out the license plate
Characterized in that that.

【0008】[0008]

【作用】所定の車線ゲートに車両が侵入してくると、車
線ゲート入口に設置されている光センサが遮光されて車
両の侵入が検知され、撮像機により車両の前面部が撮影
される。この撮像機により撮影された画像は、画像にデ
ジタル変換されて画像メモリに格納される。この画像メ
モリに格納された原画像は、車両を斜め前方から撮像す
ることによって幾何学的歪みを生じているが、この幾何
学的歪みを撮像機の設置条件で与えられるパラメータに
従って補正する。このパラメータは、ある一定の撮像機
設置条件の下では常に一定である。
When a vehicle enters a predetermined lane gate, an optical sensor installed at the entrance of the lane gate is shielded from light and the intrusion of the vehicle is detected, and the front of the vehicle is photographed by the image pickup device. An image captured by the imager is converted into an image and stored in an image memory. The original image stored in the image memory has a geometric distortion caused by capturing the vehicle obliquely from the front, and the geometric distortion is corrected according to a parameter given by an installation condition of the imaging device. This parameter is always constant under a certain condition of installation of the imaging device.

【0009】そして、上記補正された画像よりプレート
部分を切出すと共に、このプレート部分の画像から文字
の切出しを行なう。このときナンバープレート部分の文
字の大きさや位置等は、上記の補正処理により本来の規
格化されものとなっているので、切出された文字の特徴
量は、その値の妥当性を確認することができる。そし
て、上記切出された文字の各特徴量を組合わせて、各文
字を順番に認識し、“特定文字である”または“不明で
ある”という結果を出力する。
Then, a plate portion is cut out from the corrected image, and a character is cut out from the image of the plate portion. At this time, the size, position, etc. of the characters in the license plate have been standardized by the above-mentioned correction processing. Therefore, check the validity of the values of the features of the extracted characters. Can be. Then, by combining the feature amounts of the extracted characters, each character is sequentially recognized, and a result of “specific character” or “unknown” is output.

【0010】上記のように画像メモリに格納された画像
全体の幾何学的な歪みを撮像機の設置条件で与えられる
パラメータに従って補正することにより、その後の文字
の切出し及び認識処理を簡易化できると共に、認識率を
向上できる。また、撮像距離、撮像方向等の撮像位置が
変更になっても、撮像機の設置条件で決まる歪み補正の
パラメータを変更するだけでよく、きわめて容易に対応
することができる。
As described above, the geometric distortion of the entire image stored in the image memory is corrected in accordance with the parameters given by the installation conditions of the image pickup device, so that the subsequent character segmentation and recognition processing can be simplified. , The recognition rate can be improved. Further, even if the imaging position such as the imaging distance and the imaging direction is changed, it is only necessary to change the distortion correction parameters determined by the installation conditions of the imaging device, and it is possible to cope with the situation very easily.

【0011】[0011]

【実施例】以下、図面を参照して本発明の一実施例を説
明する。図1は本発明の一実施例に係るナンバープレー
ト読み取り装置の機能ブロック図である。同図におい
て、1は光センサで、例えば有料道路の料金所ゲート車
線の入口に設置され、ゲートに侵入してきた車両が光セ
ンサ1を遮光することによって、車両のゲート車線内へ
の侵入を検知する。2はI/F回路で、光センサ1と制
御部間のインタフェースである。3は撮像機で、有料道
路の料金所ゲート車線に設置され、車両前面を撮像し、
その画像情報をアナログ映像信号として車両番号認識装
置に出力する。
An embodiment of the present invention will be described below with reference to the drawings. FIG. 1 is a functional block diagram of a license plate reader according to one embodiment of the present invention. In FIG. 1, reference numeral 1 denotes an optical sensor, which is installed, for example, at the entrance of a tollgate gate lane on a toll road, and detects a vehicle entering the gate lane by blocking the optical sensor 1 from a vehicle entering the gate. I do. Reference numeral 2 denotes an I / F circuit, which is an interface between the optical sensor 1 and the control unit. Reference numeral 3 denotes an image pickup device, which is installed in a toll gate lane on a toll road, and images the front of the vehicle.
The image information is output to the vehicle number recognition device as an analog video signal.

【0012】4は撮像機I/F回路で、撮像機3に対し
て撮像指令を出力し、撮像機3より出力される車両前面
部のアナログ映像信号をA/D変換して画像メモリ5に
格納する。5は画像メモリで、撮像機3によって撮像さ
れた処理の対象となる車両前面部の画像や、各種演算を
施された画像を格納する。6は制御部で、ナンバープレ
ート読取装置全体の制御、外部機器との入出力制御、プ
レート切出し処理、文字認識処理等を行なう。7は画像
演算処理部で、画像処理用の専用高速演算を行なう。8
は歪み補正回路で、車両を斜め前方から撮像することに
よって生じる幾何学的歪みを、撮像機3の設置条件で与
えられるパラメータに従って補正する。上記歪み補正回
路8による補正の度合い、即ちパラメータの値は、ある
一定のカメラ設置条件の下では常に一定である。上記I
/F回路2、撮像機I/F回路4、画像メモリ5、制御
部6、画像演算処理部7、歪み補正回路8によって画像
処理装置9が構成される。次に上記実施例の全体の処理
動作を図2のフローチャートを参照して説明する。 (A1 ):画像の取り込み
Reference numeral 4 denotes an image pickup device I / F circuit which outputs an image pickup command to the image pickup device 3, A / D converts an analog video signal output from the image pickup device 3 at the front of the vehicle, and stores the converted signal in the image memory 5. Store. Reference numeral 5 denotes an image memory for storing an image of the front surface of the vehicle, which is an image to be processed by the imaging device 3, and an image subjected to various calculations. A control unit 6 controls the entire license plate reading device, controls input / output with external devices, performs plate cutting processing, character recognition processing, and the like. Reference numeral 7 denotes an image operation processing unit which performs a dedicated high-speed operation for image processing. 8
Is a distortion correction circuit that corrects geometric distortion caused by imaging the vehicle obliquely from the front in accordance with the parameters given by the installation conditions of the imaging device 3. The degree of correction by the distortion correction circuit 8, that is, the value of the parameter, is always constant under certain camera installation conditions. I above
The / F circuit 2, the imaging device I / F circuit 4, the image memory 5, the control unit 6, the image operation processing unit 7, and the distortion correction circuit 8 constitute an image processing device 9. Next, the overall processing operation of the above embodiment will be described with reference to the flowchart of FIG. (A1): Image capture

【0013】有料道路の料金所の車線ゲートに車両が侵
入してくると、車線ゲート入口に設置されている光セン
サ1が遮光されて車両の車線ゲート内への侵入が検知さ
れ、車両検知信号が画像処理装置9へ出力される。画像
処理装置9は、車両検知信号を受信すると、制御部6か
ら撮像機I/F回路4を通じて撮像機3へ撮像指令信号
を出力する。撮像機3は、撮像信号を受信すると、シャ
ッタ動作を行ない、その時点の車両前面部の画像を撮像
し、その画像信号を撮像機I/F回路4によりA/D変
換し、この変換されたデジタル多値画像を画像メモリ5
へ格納する。この格納された車両前面部のデジタル多値
画像(以下、これを原画像という)が、これより後の画
像処理の対象となる画像である。 (A2 ):画像の歪み補正
When a vehicle enters a lane gate at a tollgate on a toll road, the optical sensor 1 installed at the entrance of the lane gate is shielded from light and the vehicle is detected from entering the lane gate. Is output to the image processing apparatus 9. Upon receiving the vehicle detection signal, the image processing device 9 outputs an imaging command signal from the control unit 6 to the imaging device 3 through the imaging device I / F circuit 4. Upon receiving the imaging signal, the imaging device 3 performs a shutter operation, captures an image of the front surface of the vehicle at that time, A / D-converts the image signal by the imaging device I / F circuit 4, and converts the image signal. Digital multi-valued image memory 5
To store. The stored digital multi-valued image of the front part of the vehicle (hereinafter, referred to as an original image) is an image to be subjected to subsequent image processing. (A2): Image distortion correction

【0014】上記画像メモリ5に格納された原画像は、
車両を斜め前方から撮像することによって幾何学的歪み
を生じているが、この幾何学的歪みを歪み補正回路8が
撮像機3の設置条件で与えられるパラメータに従って補
正する。この歪み補正回路8による補正動作の詳細につ
いては後述する。 (A3 ):補正画像よりプレート枠を切出す 次に、上記(A2 )により補正された画像からナンバー
プレート枠の切出しを行なうが、この切出しの手順を図
3に示すフローチャートに従って説明する。 (B1 ):水平方向微分
The original image stored in the image memory 5 is
Geometric distortion is caused by imaging the vehicle obliquely from the front. The geometric distortion is corrected by the distortion correction circuit 8 in accordance with the parameters given by the installation conditions of the imaging device 3. Details of the correction operation by the distortion correction circuit 8 will be described later. (A3): Cut out the plate frame from the corrected image Next, the license plate frame is cut out from the image corrected by the above (A2). The cutout procedure will be described with reference to the flowchart shown in FIG. (B1): Differential in the horizontal direction

【0015】画像メモリ5に格納された画像は、画像演
算処理部7へ入力され、水平方向微分がなされる。つま
り、隣り合う画像の濃度差が求められ、その絶対値が出
力される。 (B2 ):2値化
The image stored in the image memory 5 is input to an image processing unit 7 where the image is differentiated in the horizontal direction. That is, the density difference between adjacent images is obtained, and the absolute value is output. (B2): Binarization

【0016】上記(B1 )で生成された微分画素は、画
像演算処理部7において、所定の閾値で2値化される。
つまり、閾値よりも大きい濃度差を持つ点を“1”と
し、他を“0”とする。 (B3 ):特徴抽出
The differential pixel generated in the above (B1) is binarized by a predetermined threshold value in the image calculation processing section 7.
That is, a point having a density difference larger than the threshold value is set to “1”, and the other points are set to “0”. (B3): Feature extraction

【0017】画像中のナンバープレート部分では、文字
と地の濃度差が大きいために、微分を施すと、高い値を
とる点が多数出現する。従って、2値化によって“1”
となる点が多くなる。プレートの存在位置の推定は、こ
の“1”となった点の集まり方に注目して行なわれる。
そのために画像演算処理部7では、画像上の各点におい
て、その近傍(水平方向)に存在する“1”の数をその
点の情報とする(この段階での画像を「特徴画像」とす
る)。 (B4 ):画像圧縮
In the license plate portion of the image, since the density difference between the character and the ground is large, when differentiation is performed, many points having high values appear. Therefore, "1" is obtained by binarization.
Becomes more points. The position of the plate is estimated by paying attention to the way in which the "1" points are collected.
For this purpose, the image calculation processing unit 7 uses the number of “1” existing in the vicinity (horizontal direction) of each point on the image as information of the point (the image at this stage is referred to as a “feature image”). ). (B4): Image compression

【0018】次に特徴画像を単位画像(例えば16画素
(水平)×1画素)に分割し、それぞれの単位の画素の
中から最大値を代表点として抽出する。つまり、圧縮さ
れる訳である。また、圧縮は、「最大値を抽出する」方
法で行なわれるため、プレート部分で特徴量が損なわれ
ることはない。 (B5 ):2値化
Next, the characteristic image is divided into unit images (for example, 16 pixels (horizontal) × 1 pixel), and the maximum value is extracted as a representative point from the pixels of each unit. That is, it is compressed. In addition, since the compression is performed by the method of “extracting the maximum value”, the feature amount is not lost in the plate portion. (B5): Binarization

【0019】圧縮された特徴画像は、所定の閾値で2値
化される。“1”となる点は、“近傍に高濃度の点が多
数存在する”を意味する。すなわち、プレートの一部で
ある可能性が高いことを示す。 (B6 ):プレート存在位置推定
The compressed feature image is binarized at a predetermined threshold. The point "1" means "there are many points of high density in the vicinity". That is, it indicates that it is highly likely that the plate is a part of the plate. (B6): Estimation of plate position

【0020】これまでは、プレートの水平方向の特徴に
注目して抽出を行なったが、次の段階ではこの抽出され
た部分の垂直方向の並びに注目してプレート存在位置を
推定する。同処理は画像演算処理部7で行なわれる。 (B7 ):プレート枠切出し 次に制御部6は、以上の処理結果に基づいてプレート枠
の切出しを行なう。 (A4 ):ナンバープレート部の画像より文字を切出す 上記のようにして切出されたナンバープレートの画像を
使用して、文字の高さや幅といったような特徴量を再計
算する。
Until now, the extraction has been performed by paying attention to the horizontal characteristics of the plate, but in the next step, the plate existence position is estimated by paying attention to the vertical arrangement of the extracted portion. This processing is performed by the image calculation processing unit 7. (B7): Plate frame cut-out Next, the control unit 6 cuts out the plate frame based on the above processing results. (A4): Characters are cut out from the image of the license plate portion Using the image of the license plate cut out as described above, feature amounts such as the height and width of the character are recalculated.

【0021】ナンバープレート部分における文字の大き
さや位置等は、上記(A2 )の歪み補正処理により、本
来の規格化されたものとなっているので、計算されるべ
き特徴量の値は容易に推定でき、ナンバープレート部分
の画像より切出された文字の特徴量は、その値の妥当性
を確認することができる。 (A5 ):文字を認識する 上記(A4 )で計算された各特徴量を組合わせて、各文
字を順番に認識し、“特定文字である”または“不明で
ある”という結果を出力する。
Since the size and position of the characters in the license plate portion are originally standardized by the distortion correction process (A2), the value of the feature to be calculated can be easily estimated. Then, the validity of the value of the feature amount of the character extracted from the image of the license plate portion can be confirmed. (A5): Recognize Characters Combining the feature amounts calculated in (A4) above, each character is recognized in turn, and a result of "specific character" or "unknown" is output.

【0022】次に歪み補正回路8による補正動作につい
て説明する。図4に示すように撮像機3と撮像平面との
位置関係が既知であることを利用して、斜め方向から撮
像することで生じる遠近法的な歪みを次のようにして補
正する。図4は画像歪み補正パラメータを示すもので、
(a)は垂直方向パラメータ、(b)は水平方向パラメ
ータである。また、図4において、Hは被撮像平面Aの
高さ(mm)、Wは被撮像平面Aの幅(mm)、αは撮
像機3の水平方向の振り角、βは撮像機3の垂直方向の
振り角、aは水平画角の1/2、bは垂直画角の1/
2、fは光軸中心Bの撮像機3から被撮像平面Aまでの
距離である。
Next, the correction operation by the distortion correction circuit 8 will be described. Utilizing the fact that the positional relationship between the imaging device 3 and the imaging plane is known as shown in FIG. 4, perspective distortion caused by imaging from an oblique direction is corrected as follows. FIG. 4 shows image distortion correction parameters.
(A) is a vertical parameter, and (b) is a horizontal parameter. In FIG. 4, H is the height (mm) of the plane A to be imaged, W is the width (mm) of the plane A to be imaged, α is the swing angle of the imager 3 in the horizontal direction, and β is the vertical angle of the imager 3. The swing angle of the direction, a is 1/2 of the horizontal angle of view, and b is 1 / of the vertical angle of view.
2, f is the distance from the imaging device 3 at the optical axis center B to the plane A to be imaged.

【0023】(1) 図5に示すように2つの座標系θ−X
YZ系、θ−X′Y′Z′系において、θ−XYZ系か
らθ−X′Y′Z′系への変換を行なう。ここでθ−X
YZ系とは、撮像機3の設置位置を原点θ、Y軸を鉛直
方向、X軸を道路横断方向、Z軸を車線と平行にとった
空間固定座標であり、θ−X′Y′Z′系とはθ−XY
Z系においてθZ′軸が撮像機3の光軸中心となるよう
に、撮像機3をY軸回りにα(RAD)回転して道路側
に向け、X′軸β(RAD)回転上向きに向けたもので
ある。この時の変換式を次式(1)に示す。
(1) As shown in FIG. 5, two coordinate systems θ-X
In the YZ system and the θ-X'Y'Z 'system, the conversion from the θ-XYZ system to the θ-X'Y'Z' system is performed. Where θ-X
The YZ system is space fixed coordinates in which the installation position of the image pickup device 3 is the origin θ, the Y axis is the vertical direction, the X axis is the road crossing direction, and the Z axis is parallel to the lane. Θ−X′Y′Z 'Is θ-XY
In the Z system, the image pickup device 3 is rotated by α (RAD) around the Y axis toward the road side, and the X ′ axis is turned upward by β (RAD) rotation so that the θZ ′ axis becomes the optical axis center of the image pickup device 3. It is a thing. The conversion equation at this time is shown in the following equation (1).

【0024】[0024]

【数1】 (Equation 1)

【0025】(2) θ−X′Y′Z′系から原点θをθ
Z′軸に沿ってfだけ平行移動した撮像機画像の平面を
θ′−x′y′とする座標θ′−x′y′系への変換を
行なう。θ−X′Y′Z′系の平面θ′−x′y′に対
する射影は、次式(2)で表すことができる。 [x′,y′,z′]=[X′*(f/Z′),Y′*(f/Z′),0] …(2)
(2) From the θ-X'Y'Z 'system,
Conversion is performed to a coordinate θ′-x′y ′ system in which the plane of the image of the imaging device that has been translated by f along the Z′-axis is θ′-x′y ′. The projection of the θ-X′Y′Z ′ system onto the plane θ′-x′y ′ can be expressed by the following equation (2). [X ', y', z '] = [X' * (f / Z '), Y' * (f / Z '), 0] (2)

【0026】(3) θ′−x′y′z′系をデジタル画像
の表示系θ″−IX・IY系変換する。まず、図4に示
すように撮像機3の水平方向の画角を2a(RAD)、
垂直方向の画角を2b(RAD)とし、原画像1画面有
効サイズを縦isx(画素)×横isy(画素)とする
と、画素の分解能(gx ,gy )は、 gx =2f・tan a/isx gy =2f・tan b/isy …(3) となり、更に、
(3) Convert the θ′-x′y′z ′ system into a digital image display system θ ″ -IX.IY system.First, as shown in FIG. 2a (RAD),
Assuming that the vertical angle of view is 2b (RAD) and the effective size of one screen of the original image is vertical isx (pixel) × horizontal isy (pixel), the pixel resolution (g x , g y ) is g x = 2f · tan a / isx g y = 2f · tan b / isy (3)

【0027】[0027]

【数2】 が得られる。[isx/2,isy/2]は、原点θ′
を撮像平面の左上θ″に持ってくるためのオフセットで
ある。上記(2),(3)式を(4)式へ代入すると、 IX=(1+X′/(Z′・tan a)・isx/2 IY=(1+Y′/(Z′・tan b)・isy/2 …(5) となる。上記(1),(5)式を撮像平面全体に適用す
ることにより、遠近方的な歪みを補正する。以上より、
空間固定座標系θ−XYZをデジタル画像表示系θ″−
IX,IYへ変換する式は、(1)式を(5)式に代入
した次式となる。 IX={1+(Xcos α−Ysin β)/((Xsin α・cos β−Ysin β +Zcos α・cos β)tan a}isx/2 IY={1+(Xsin β・cos β+Ycos β+Zcos α・sin β) /((Zsin α・cos β−Ysin β +Zcos α・cos β)tan b}isy/2 …(6) 但し、α,β,Zは、撮像機3の設置位置によって決定
されるパラメータ(固定値)であり、a,b,isx,
isyは、撮像機3とその映像信号をD/A変換する回
路によって決定される固定値である。
(Equation 2) Is obtained. [Isx / 2, isy / 2] is the origin θ ′
Is given to the upper left corner θ ″ of the imaging plane. When the above equations (2) and (3) are substituted into the equation (4), IX = (1 + X ′ / (Z ′ · tan a) · isx / 2 IY = (1 + Y ′ / (Z ′ · tan b) · isy / 2... (5) By applying the above equations (1) and (5) to the entire imaging plane, a perspective distortion is obtained. Is corrected.
The space fixed coordinate system θ-XYZ is converted to the digital image display system θ ″-
The expression to be converted into IX and IY is the following expression obtained by substituting expression (1) into expression (5). IX = {1+ (Xcos α-Ysin β) / ((Xsin α · cos β-Ysin β + Zcos α · cos β) tan a} isx / 2 IY = {1+ (Xsin β · cos β + Ycos β + Zcos α · sin β) / ((Z sin α · cos β−Y sin β + Z cos α · cos β) tan bisy / 2 (6) where α, β, and Z are parameters (fixed values) determined by the installation position of the imaging device 3. ) And a, b, isx,
isy is a fixed value determined by the imaging device 3 and a circuit for D / A converting the video signal.

【0028】上記(6)式より、θ−XYZ系のXY平
面の任意の座標に対するθ″IX,IY系の座標が一意
に表示されるので、θ−XYZ系のXY平面を縦is
x,横isyの格子に分けて、その各点に対するθ″−
IX,IY系の座標の画素値をその格子の画素値として
座標変換すれば、画像の遠近法的な歪みを補正すること
ができる。ここで、 A=(sin α・cos β・tan a+cos α)・(isx/
2) B=(−sin β・tan a−sin β)・(isx/2) C=cos α・cos β・tan a・(isx/2) D=sin α・cos β・tan a E=−sin β・tan a F=cos α・cos β・tan a G=(sin α・cos βtan b+sin β・cos β)・(i
sy/2) H=(−sin β・tan b+cos )β・(isy/2) I=cos α・cos β・tan b・(isy/2) J=sin α・cos β・tan b K=−sin β・tan b L=cos α・cos β・tan b とすると、(6)式より IX=(A・X+B・Y+C)/(D・X+E・Y+F) IY=(G・X+H・Y+I)/(J・X+K・Y+L) …(7) 但し、A,B,C,D,E,F,G,H,I,J,K,
Lは固定値である。
From the above equation (6), since the coordinates of the θ ″ IX and IY systems with respect to the arbitrary coordinates of the XY plane of the θ-XYZ system are uniquely displayed, the XY plane of the θ-XYZ system is
divided into grids of x and horizontal isy, and θ ″ −
If the pixel values of the IX and IY system coordinates are coordinate-transformed as the pixel values of the grid, perspective distortion of the image can be corrected. Here, A = (sin α · cos β · tan a + cos α) · (isx /
2) B = (− sin β · tan a−sin β) · (isx / 2) C = cos α · cos β · tana · (isx / 2) D = sin α · cos β · tan a E = − sin β · tan a F = cos α · cos β · tan a G = (sin α · cos βtan b + sin β · cos β) · (i
sy / 2) H = (− sin β · tan b + cos) β · (isy / 2) I = cos α · cos β · tan b · (isy / 2) J = sin α · cos β · tan b K = − Assuming that sin β · tan b L = cos α · cos β · tan b, from equation (6), IX = (A × X + B + Y) / (D × X + E−Y + F) IY = (G × X + H−Y + I) / (J · X + KY · Y + L) (7) where A, B, C, D, E, F, G, H, I, J, K,
L is a fixed value.

【0029】上記図4に示したように、車両を斜め前方
から撮像するために生じる遠近法的な画像の歪みを補正
するためのパラメータは既知のものであるので、原画像
の歪みを補正でき、その後の文字の切出し、認識処理を
簡易化することができる。次に上記の補正処理を行なう
具体的な回路構成について説明する。図6は、上記画像
メモリ5の入出力回路の一例を示すブロック図である。
図7は、図6に示した画像メモリ入出力回路の動作を示
すタイミングチャートである。
As shown in FIG. 4, since the parameters for correcting the perspective distortion of the image generated when the vehicle is imaged obliquely from the front are known, the distortion of the original image can be corrected. The subsequent character extraction and recognition processing can be simplified. Next, a specific circuit configuration for performing the above-described correction processing will be described. FIG. 6 is a block diagram showing an example of the input / output circuit of the image memory 5.
FIG. 7 is a timing chart showing the operation of the image memory input / output circuit shown in FIG.

【0030】図6において、リードアドレス発生回路1
1は、演算器への出力データのリードアドレス31(R
A0 ,RA1 ,RA2 ,…)をクロック30に同期して
発生し、アドレスセレクタ13へ出力する。ライトアド
レス発生回路12は、演算器からの入力データのライト
アドレス32(WA0 ,WA1 ,WA2 ,…)をクロッ
ク30に同期して発生し、アドレスセレクタ13へ出力
する。リード/ライト制御回路14は、画像メモリ5の
リード信号34、ライト信号35及びリード/ライト切
換え信号36を発生する。このリード/ライト切換え信
号36は、1クロックサイクルの前半で“H”(ハ
イ)、後半で“L”(ロウ)となり、これによの画像メ
モリ5は、1クロックサイクルの前半でライト動作、後
半でリード動作を行なう。
In FIG. 6, read address generating circuit 1
1 is a read address 31 (R
A0, RA1, RA2,...) Are generated in synchronization with the clock 30 and output to the address selector 13. The write address generation circuit 12 generates a write address 32 (WA0, WA1, WA2,...) Of the input data from the arithmetic unit in synchronization with the clock 30 and outputs the write address 32 to the address selector 13. The read / write control circuit 14 generates a read signal 34, a write signal 35, and a read / write switching signal 36 for the image memory 5. The read / write switching signal 36 becomes "H" (high) in the first half of one clock cycle and "L" (low) in the second half, whereby the image memory 5 performs a write operation in the first half of one clock cycle. The read operation is performed in the latter half.

【0031】アドレスセレクタ13は、リード/ライト
切換え信号36が“L”のときには、リードアドレス3
1を、また、切換え信号36が“H”の時にはライトア
ドレス32を画像メモリアドレスバス33に出力する。
When the read / write switching signal 36 is "L", the address selector 13 reads the read address 3
1 and the write address 32 is output to the image memory address bus 33 when the switching signal 36 is "H".

【0032】データ切換え回路18は、リード/ライト
切換え信号36が“L”のときには、画像メモリデータ
バス39上のリードデータRD0 ,RD1 ,RD2 ,…
をデータ出力用フリップフロップ21へ出力する。ま
た、切換え信号36が“H”の時には、演算器からの入
力データ38(WD0 ,WD1 ,WD2 ,…)を画像メ
モリデータバス39へ出力する。
When the read / write switching signal 36 is "L", the data switching circuit 18 reads the read data RD0, RD1, RD2,.
To the data output flip-flop 21. When the switching signal 36 is "H", the input data 38 (WD0, WD1, WD2,...) From the arithmetic unit is output to the image memory data bus 39.

【0033】上記フリップフロップ21は、画像メモリ
5から送られてきたデータRD0 ,RD1 ,RD2 ,…
をクロック30に同期させ、出力データ37として演算
器へ送出する。
The flip-flop 21 stores the data RD0, RD1, RD2,... Transmitted from the image memory 5.
Is synchronized with the clock 30 and sent to the arithmetic unit as output data 37.

【0034】上記ライトアドレス発生回路12は、図8
に示す通常のラスタスキャンを行なうようにライトアド
レスを発生し、リードアドレス発生回路11は上記
(7)式に示す演算を実行してアドレスを発生すること
により、撮像機3の設置位置による画像歪みを補正す
る。
The write address generation circuit 12 is provided with the configuration shown in FIG.
The read address generation circuit 11 generates the address by executing the operation shown in the above equation (7), so that the image is distorted due to the installation position of the imaging device 3. Is corrected.

【0035】図9は上記リードアドレス発生回路11に
おけるX座標系のアドレス発生部について示したもので
ある。このリードアドレス発生回路11は、レジスタ4
1a〜41f、乗算器42〜45、加算器46,47、
除算器48により構成される。レジスタ41a〜41f
は、それぞれCPUにより初期設定されるもので、レジ
スタ41aの出力が乗算器42、レジスタ41bの出力
が乗算器43、レジスタ41dの出力が乗算器44、レ
ジスタ41eの出力が乗算器45に出力される。また、
乗算器42,44にはXアドレスが入力され、乗算器4
3,45にはYアドレスが入力される。上記Xアドレス
及びYアドレスは、ライトアドレス発生回路12で発生
するアドレスに対応した画像のX,Y座標である。
FIG. 9 shows an address generating section of the X coordinate system in the read address generating circuit 11. This read address generation circuit 11
1a to 41f, multipliers 42 to 45, adders 46 and 47,
It is constituted by a divider 48. Registers 41a to 41f
Are initialized by the CPU. The output of the register 41a is output to the multiplier 42, the output of the register 41b is output to the multiplier 43, the output of the register 41d is output to the multiplier 44, and the output of the register 41e is output to the multiplier 45. You. Also,
The X address is input to the multipliers 42 and 44,
Y addresses are input to 3 and 45. The X address and the Y address are the X and Y coordinates of the image corresponding to the address generated by the write address generation circuit 12.

【0036】そして、乗算器42,43の乗算結果及び
レジスタ41cの保持データが加算器46に入力され、
乗算器44,45の乗算結果及びレジスタ41fの保持
データが加算器47に入力される。加算器46,47
は、各入力データを加算して除算器48に出力する。除
算器48は、加算器46,47の加算結果を除算演算
し、その結果をリードアドレスIXとする。この場合の
リードアドレスIXは、リードアドレスに対応する画像
のX座標を示している。
The multiplication results of the multipliers 42 and 43 and the data held in the register 41c are input to the adder 46.
The multiplication results of the multipliers 44 and 45 and the data held in the register 41f are input to the adder 47. Adders 46 and 47
Add each input data and output to the divider 48. The divider 48 performs a division operation on the addition result of the adders 46 and 47, and sets the result as a read address IX. The read address IX in this case indicates the X coordinate of the image corresponding to the read address.

【0037】また、リードアドレス発生回路11は、図
9に示した回路と同様に構成されたY座標系のアドレス
発生部を備え、図9の場合と同様にしてリードアドレス
IYを得ている。この場合のリードアドレスIYは、リ
ードアドレスに対応する画像のY座標を示している。上
記のようにしてリード画像の座標IX,IYが得られ、
リードアドレスを発生することができる。
The read address generating circuit 11 includes an address generating section of a Y coordinate system configured similarly to the circuit shown in FIG. 9, and obtains the read address IY in the same manner as in FIG. The read address IY in this case indicates the Y coordinate of the image corresponding to the read address. The coordinates IX and IY of the lead image are obtained as described above,
A read address can be generated.

【0038】なお、上記実施例では、画像メモリ5に格
納した原画像を歪み補正した後、プレート部分の切出し
を行なった場合について示したが、その他、画像メモリ
5に格納した原画像に対して先にプレート部分の切出し
を行ない、その後、このプレート部分の画像に対して歪
み補正を行なうようにしても良い。このように歪み補正
の前にナンバープレート部分の切出しを行なった場合に
は、歪み補正の領域が小さくなり、処理の高速化を図る
ことができる。また、本発明は、有料道路の車種判別装
置に適用される他、駐車場システム、入出門管理システ
ムなどに適用し得るものである。
In the above embodiment, the case where the original image stored in the image memory 5 is subjected to distortion correction and then the plate portion is cut out has been described. The plate portion may be cut out first, and then the image of the plate portion may be subjected to distortion correction. When the license plate portion is cut out before the distortion correction as described above, the area for the distortion correction becomes small, and the processing can be speeded up. Further, the present invention can be applied to a parking lot system, an entrance / exit management system, and the like, in addition to being applied to a vehicle type discriminating apparatus on a toll road.

【0039】[0039]

【発明の効果】以上詳記したように本発明によれば、車
両の前面を斜め前方から撮像することによって生じる画
像全体の幾何学的な歪みを撮像機の設置条件で与えられ
るパラメータに従って補正し、歪みのない本来の規格化
されたナンバープレートから文字を切出して認識するよ
うにしたので、文字の切出し及び認識処理を簡易化でき
ると共に、認識結果の不明や誤りを減少でき、結果とし
てナンバープレートの認識率を向上することができる。
また、撮像距離、撮像方向等の撮像位置が変更になって
も、撮像機の設置条件で決まる歪み補正のパラメータを
変更するだけでよく、きわめて容易に対応することがで
きる。
As described above in detail, according to the present invention, the geometric distortion of the entire image caused by imaging the front of the vehicle obliquely from the front is corrected in accordance with the parameters given by the installation conditions of the imaging device. Characters are cut out and recognized from the original standardized license plate without distortion, so character extraction and recognition processing can be simplified, and the recognition result can be less unclear and errors. Can be improved.
Further, even if the imaging position such as the imaging distance and the imaging direction is changed, it is only necessary to change the distortion correction parameters determined by the installation conditions of the imaging device, and it is possible to cope with the situation very easily.

【図面の簡単な説明】[Brief description of the drawings]

【図1】本発明の一実施例に係るナンバープレート読み
取り装置の構成を示すブロック図。
FIG. 1 is a block diagram showing a configuration of a license plate reading device according to one embodiment of the present invention.

【図2】同実施例に係る車両番号認識処理を示すフロー
チャート。
FIG. 2 is a flowchart showing a vehicle number recognition process according to the embodiment.

【図3】同実施例に係るプレート切出し処理を示すフロ
ーチャート。
FIG. 3 is a flowchart showing a plate cutting process according to the embodiment.

【図4】同実施例に係る画像歪み補正パラメータを示す
図。
FIG. 4 is a view showing image distortion correction parameters according to the embodiment.

【図5】同実施例に係る歪み補正処理で使用する座標系
を示す図。
FIG. 5 is an exemplary view showing a coordinate system used in distortion correction processing according to the embodiment.

【図6】同実施例に係る画像メモリ入出力回路の一例を
示すブロック図。
FIG. 6 is a block diagram showing an example of an image memory input / output circuit according to the embodiment.

【図7】図6に示した画像メモリ入出力回路の動作を示
すタイミングチャート。
FIG. 7 is a timing chart showing the operation of the image memory input / output circuit shown in FIG. 6;

【図8】図6におけるライトアドレス発生回路のラスタ
スキャンを行なうためのライトアドレス発生動作を説明
する図。
FIG. 8 is a view for explaining a write address generation operation for performing a raster scan of the write address generation circuit in FIG. 6;

【図9】図6におけるリードアドレス発生回路の構成を
示すブロック図。
FIG. 9 is a block diagram showing a configuration of a read address generation circuit in FIG. 6;

【図10】ナンバープレート読み取り装置の一般的な構
成を示す図。
FIG. 10 is a diagram showing a general configuration of a license plate reading device.

【図11】図10における撮像機と被撮像平面の位置関
係を示す図。
FIG. 11 is a diagram showing a positional relationship between an image pickup device and a plane to be imaged in FIG. 10;

【図12】図10における撮像範囲と撮像機の取込み画
像の関係を示す図。
FIG. 12 is a diagram illustrating a relationship between an imaging range and an image captured by an imaging device in FIG. 10;

【図13】図10の撮像機により取込んだ原画像上にお
けるナンバープレートの歪みを示す図。
FIG. 13 is a view showing distortion of a license plate on an original image captured by the image pickup apparatus of FIG. 10;

【符号の説明】[Explanation of symbols]

1…光センサ、2…I/F回路、3…撮像機、4…撮像
機I/F回路、5…画像メモリ、6…制御部、7…画像
演算処理部、8…歪み補正回路、9…画像処理装置、1
1…リードアドレス発生回路、12…ライトアドレス発
生回路、13…アドレスセレクタ、14…リード/ライ
ト制御回路、18…データ切換え回路、21…フリップ
フロップ、30…クロック、31…リードアドレス、3
2…ライトアドレス、33…画像メモリアドレスバス、
34…リード信号、35…ライト信号、36…リード/
ライト切換え信号、37…出力データ、38…入力デー
タ、39…画像メモリデータバス、41a〜41e…レ
ジスタ、42〜45…乗算器、46,47…加算器、4
8…除算器。
DESCRIPTION OF SYMBOLS 1 ... Optical sensor, 2 ... I / F circuit, 3 ... Imaging machine, 4 ... Imaging machine I / F circuit, 5 ... Image memory, 6 ... Control part, 7 ... Image calculation processing part, 8 ... Distortion correction circuit, 9 ... Image processing device, 1
DESCRIPTION OF SYMBOLS 1 ... Read address generation circuit, 12 ... Write address generation circuit, 13 ... Address selector, 14 ... Read / write control circuit, 18 ... Data switching circuit, 21 ... Flip-flop, 30 ... Clock, 31 ... Read address, 3
2 ... write address, 33 ... image memory address bus,
34 read signal, 35 write signal, 36 read /
Write switch signal, 37 output data, 38 input data, 39 image memory data bus, 41a-41e register, 42-45 multiplier, 46, 47 adder, 4
8. Divider.

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI G08G 1/04 G06F 15/62 380 (56)参考文献 特開 平5−28321(JP,A) 特開 平2−66690(JP,A) 特開 平3−232100(JP,A) 特開 平5−101221(JP,A) 特開 平2−83798(JP,A) 尾上博和、塩野充,漢字部分を含めた ナンバープレート全体の文字認識実験, 電子情報通信学会技術報告,日本,1992 年11月、15−22頁 (58)調査した分野(Int.Cl.7,DB名) G08G 1/017 G01B 11/24 G06K 9/20 330 G06K 9/32 G06T 1/00 G08G 1/04 ────────────────────────────────────────────────── ─── Continuation of the front page (51) Int.Cl. 7 Identification symbol FI G08G 1/04 G06F 15/62 380 (56) References JP-A-5-28321 (JP, A) JP-A-2-66690 ( JP, A) JP-A-3-232100 (JP, A) JP-A-5-101221 (JP, A) JP-A-2-83798 (JP, A) Hirokazu Onoe, Mitsuru Shiono, numbers including kanji characters Character recognition experiment of whole plate, IEICE technical report, Japan, November 1992, pp. 15-22 (58) Fields investigated (Int. Cl. 7 , DB name) G08G 1/017 G01B 11/24 G06K 9/20 330 G06K 9/32 G06T 1/00 G08G 1/04

Claims (2)

(57)【特許請求の範囲】(57) [Claims] 【請求項1】 ゲート車線内へ侵入する車両を検知する
車両検知手段と、 前記ゲート車線内に設置され、前記車両検知手段から出
力される車両検知信号により前記侵入車両の前面部を斜
め前方から撮像する撮像機と、 前記撮像機により撮像された画像を記憶する画像メモリ
と、 前記画像メモリに記憶された画像データに対し、前記車
両を斜め前方より撮像することにより生ずる被写体の
近法的な歪みを前記侵入車両の被撮像平面に対する前記
撮像機の設置条件で与えられる垂直方向パラメータ及び
水平方向パラメータに従って補正する補正手段と、 前記補正手段により補正された画像データよりナンバー
プレートの部分を切出すナンバープレート切出し手段
と、 前記切出されたナンバープレート部分の画像から文字を
切出す文字切出し手段と、 前記文字切出し手段により切出された文字を認識する認
識手段とを具備し、前記ナンバープレート切出し手段は、前記補正手段によ
り補正された画像データを微分する微分手段と、前記微
分手段による微分画像を所定の閾値で2値化する第1の
2値化手段と、前記2値画像から特徴画像を抽出する手
段と、前記特徴画像を単位画像に分割し、それぞれの単
位の画素の中から最大値を代表点として抽出する圧縮手
段と、前記圧縮手段により圧縮された特徴画像を所定の
閾値で2値化する第2の2値化手段と、前記第2の2値
化手段により2値化された画像からプレート存在位置を
推定してナンバープレートの部分を切出す手段とからな
ことを特徴とするナンバープレート読み取り装置。
A vehicle detecting means for detecting a vehicle entering the gate lane; a vehicle detecting signal installed in the gate lane, and a front part of the invading vehicle being obliquely forwardly detected by a vehicle detection signal output from the vehicle detecting means. an imaging device for capturing, an image memory for storing the image captured by the imaging unit, the image data stored in the image memory, a far object caused by imaging from diagonally forward the vehicle
A vertical parameter given by the installation conditions of the imaging device with respect to the plane to be imaged of the invading vehicle,
Correction means for correcting in accordance with a horizontal direction parameter; license plate cutting means for cutting out a license plate portion from the image data corrected by the correction means; and character cutout for cutting out characters from the image of the cut out license plate portion. Means; and recognition means for recognizing characters cut out by the character cutout means, wherein the license plate cutout means is provided by the correction means.
A differentiating means for differentiating the corrected image data;
A first method of binarizing a differential image by a dividing means with a predetermined threshold value
Binarizing means for extracting a feature image from the binary image;
And dividing the feature image into unit images, and
A compression method that extracts the maximum value as the representative point from the pixels
And a characteristic image compressed by the compression means.
A second binarizing means for binarizing with a threshold value, and the second binary
Plate position from the image binarized by the binarization means
Estimate and cut out the license plate
License plate reader, characterized in that that.
【請求項2】 ゲート車線内へ侵入する車両を検知する
車両検知手段と、 前記ゲート車線内に設置され、前記車両検知手段から出
力される車両検知信号により前記侵入車両の前面部を斜
め前方から撮像する撮像機と、 前記撮像機により撮像された画像を記憶する画像メモリ
と、 前記画像メモリに記憶された画像データよりナンバープ
レートの部分を切出すナンバープレート切出し手段と、 前記切出されたナンバープレート部分の画像に対し、前
記車両を斜め前方より撮像することにより生ずる遠近法
な歪みを前記侵入車両の被撮像平面に対する前記撮像
機の設置条件で与えられる垂直方向パラメータ及び水平
方向パラメータに従って補正する補正手段と、 この補正手段により補正されたナンバープレート部の画
像から文字を切出す文字切出し手段と、 この文字切出し手段により切出された文字を認識する認
識手段とを具備し、前記ナンバープレート切出し手段
は、前記画像メモリに記憶された画像データを微分する
微分手段と、前記微分手段による微分画像を所定の閾値
で2値化する第1の2値化手段と、前記2値画像から特
徴画像を抽出する手段と、前記特徴画像を単位画像に分
割し、それぞれの単位の画素の中から最大値を代表点と
して抽出する圧縮手段と、前記圧縮手段により圧縮され
た特徴画像を所定の閾値で2値化する第2の2値化手段
と、前記第2の2値化手段により2値化された画像から
プレート存在位置を推定してナンバープレートの部分を
切出す手段とからなることを特徴とするナンバープレー
ト読み取り装置。
2. A vehicle detecting means for detecting a vehicle entering the gate lane, and a vehicle detecting signal installed in the gate lane and obliquely moving a front portion of the invading vehicle from a front by a vehicle detection signal output from the vehicle detecting means. An image pickup device for picking up an image, an image memory for storing an image picked up by the image pickup device, a license plate cutting unit for cutting out a license plate portion from image data stored in the image memory, and the cut out number. Perspective generated by imaging the vehicle obliquely from the front of the image of the plate portion
Vertical parameters and horizontally given distortion at the installation condition of the imaging device with respect to the imaging plane of the entering vehicle
Correction means for correcting according to the direction parameter; character extraction means for extracting characters from the image of the license plate portion corrected by the correction means; and recognition means for recognizing the characters extracted by the character extraction means. , Said license plate cutting means
Differentiates image data stored in the image memory
A differentiating means, and a differential image generated by the differentiating means is provided with a predetermined threshold value.
A first binarizing means for binarizing the image with
Means for extracting a signature image, and dividing the feature image into unit images.
Divide the maximum value from the pixels of each unit as the representative point.
Compression means for extracting
Binarizing means for binarizing the feature image with a predetermined threshold
From the image binarized by the second binarization means.
Estimate the location of the plate and determine the number plate
A license plate reading device, comprising: a cutting means .
JP06209293A 1993-03-22 1993-03-22 License plate reader Expired - Fee Related JP3244850B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP06209293A JP3244850B2 (en) 1993-03-22 1993-03-22 License plate reader

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP06209293A JP3244850B2 (en) 1993-03-22 1993-03-22 License plate reader

Publications (2)

Publication Number Publication Date
JPH06274788A JPH06274788A (en) 1994-09-30
JP3244850B2 true JP3244850B2 (en) 2002-01-07

Family

ID=13190069

Family Applications (1)

Application Number Title Priority Date Filing Date
JP06209293A Expired - Fee Related JP3244850B2 (en) 1993-03-22 1993-03-22 License plate reader

Country Status (1)

Country Link
JP (1) JP3244850B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2135240A1 (en) * 1993-12-01 1995-06-02 James F. Frazier Automated license plate locator and reader
JPH08320990A (en) * 1995-05-26 1996-12-03 Japan Radio Co Ltd Vehicle number reader
JP3649942B2 (en) * 1999-04-02 2005-05-18 三洋電機株式会社 Image input device, image input method, and storage medium
WO2005031252A1 (en) 2003-09-25 2005-04-07 Brother Kogyo Kabushiki Kaisha Three-dimensional shape determining apparatus, three-dimensional shape determining system, and three-dimensional shape determining program
JP4929068B2 (en) * 2007-06-15 2012-05-09 三菱重工業株式会社 Vehicle number recognition device and vehicle number recognition method
DE102009049849B4 (en) 2009-10-19 2020-09-24 Apple Inc. Method for determining the pose of a camera, method for recognizing an object in a real environment and method for creating a data model
JP5760462B2 (en) * 2011-02-01 2015-08-12 Jfeスチール株式会社 Tail-end crop detection device
JP2013075326A (en) * 2011-09-30 2013-04-25 Jfe Steel Corp Hot rolling equipment

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
尾上博和、塩野充,漢字部分を含めたナンバープレート全体の文字認識実験,電子情報通信学会技術報告,日本,1992年11月、15−22頁

Also Published As

Publication number Publication date
JPH06274788A (en) 1994-09-30

Similar Documents

Publication Publication Date Title
CN111145238B (en) Three-dimensional reconstruction method and device for monocular endoscopic image and terminal equipment
KR102399017B1 (en) Method of generating image and apparatus thereof
JP3156817B2 (en) Vehicle periphery monitoring device
CN103279952A (en) Target tracking method and device
JP3709879B2 (en) Stereo image processing device
JP3244850B2 (en) License plate reader
US20200242391A1 (en) Object detection apparatus, object detection method, and computer-readable recording medium
JP3291873B2 (en) License plate recognition device
JP4224328B2 (en) Car number recognition device
CN109600598B (en) Image processing method, image processing device and computer readable recording medium
JP2004235711A (en) Target tracking system and method therefor
JPH10269365A (en) Characteristic extracting method, and object recognition device using the method
JP2851348B2 (en) License plate reader
JP5935118B2 (en) Object detection apparatus and object detection method
JP3475700B2 (en) Object recognition method, object recognition device, and vehicle recognition device
JPH10283478A (en) Method for extracting feature and and device for recognizing object using the same method
CN112924707B (en) Vehicle speed detection device and method using image tracking
JP3053723B2 (en) License plate character recognition method and device
CN115690767B (en) License plate recognition method, license plate recognition device, unmanned aerial vehicle and storage medium
JPH11259642A (en) Recognition processing method, recognition processor using the same, and license number plate reader
JP3104279B2 (en) Image processing device, image processing method, and vehicle obstacle detection device
CN117351402A (en) Video stream identification method and device and readable storage medium
CN117522952A (en) Auxiliary positioning method, system and computer medium for vehicle
CN117557978A (en) Parking space identification method, device, terminal equipment and storage medium
JPH08194825A (en) Outline information extracting device

Legal Events

Date Code Title Description
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20011002

LAPS Cancellation because of no payment of annual fees