JP5134432B2 - Vehicle discrimination device and vehicle discrimination method - Google Patents

Vehicle discrimination device and vehicle discrimination method Download PDF

Info

Publication number
JP5134432B2
JP5134432B2 JP2008128310A JP2008128310A JP5134432B2 JP 5134432 B2 JP5134432 B2 JP 5134432B2 JP 2008128310 A JP2008128310 A JP 2008128310A JP 2008128310 A JP2008128310 A JP 2008128310A JP 5134432 B2 JP5134432 B2 JP 5134432B2
Authority
JP
Japan
Prior art keywords
vehicle
license plate
image data
monochrome image
light distribution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008128310A
Other languages
Japanese (ja)
Other versions
JP2009277056A (en
Inventor
真也 矢野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Heavy Industries Ltd
Original Assignee
Mitsubishi Heavy Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Heavy Industries Ltd filed Critical Mitsubishi Heavy Industries Ltd
Priority to JP2008128310A priority Critical patent/JP5134432B2/en
Publication of JP2009277056A publication Critical patent/JP2009277056A/en
Application granted granted Critical
Publication of JP5134432B2 publication Critical patent/JP5134432B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、車両のナンバープレートから特定分類車両を判別する車両判別装置及び車両判別方法に関する。   The present invention relates to a vehicle discrimination device and a vehicle discrimination method for discriminating a specific classification vehicle from a license plate of the vehicle.

駐車場や高速道路などでは、車種区分(軽・小型・普通・大型などの分類)によって利用料金が異なることが一般的であるため、それら駐車場や高速道路の料金所などにおいて、特定の分類に属する車両(以下「特定分類車両」という。)を判別すべきニーズがある。
従来、特定分類車両を判別するものとして、ナンバープレートに表示された車種コード(小文字)を撮像し、その撮像された車種コードを識別することにより特定分類車両(例えば、軽自動車)を判別するものがある。しかし、一部の登録自動車と軽自動車とで、車種コードの払出番号が重複しているため、車種コードのみから軽自動車などを精度よく判別することは困難である。
In parking lots and expressways, the usage charges generally differ depending on the type of vehicle (classification such as light, small, normal, and large). There is a need to discriminate vehicles belonging to (hereinafter referred to as “specific classification vehicles”).
Conventionally, as a means of discriminating a specific classification vehicle, an image of a vehicle type code (lower case) displayed on a license plate is imaged, and a specific classification vehicle (for example, a light vehicle) is discriminated by identifying the imaged vehicle type code There is. However, since some of the registered automobiles and light automobiles have the same vehicle type code payout numbers, it is difficult to accurately discriminate a light automobile from the vehicle type code alone.

また、特定分類車両を判別するものとして、軸数やトレッド(車幅)などの車両諸元をセンサで計測して、これら計測結果により、軽自動車かどうかを判別するものがある。しかし、近年では、例えば法令規定のトレッド幅を超える輸入車が軽自動車として登録されることもあるため、トレッド幅などの車両諸元だけで軽自動車かどうかを精度よく判別することも困難である。   In addition, as a means for discriminating a specific classification vehicle, there is a type in which vehicle specifications such as the number of axes and tread (vehicle width) are measured by a sensor, and whether or not the vehicle is a light vehicle is determined based on these measurement results. However, in recent years, for example, imported vehicles exceeding the tread width specified by laws and regulations may be registered as light vehicles, so it is difficult to accurately determine whether the vehicle is a light vehicle based on vehicle specifications such as the tread width. .

そこで、カラーカメラによってナンバープレートを撮像し、そのナンバープレートの背景色の色調によって、軽自動車かどうかを判別するものが提案されている(例えば、特許文献1参照。)。すなわち、ナンバープレートの背景色は、自家用軽自動車であれば黄色、自家用の軽自動車以外であれば白色、事業用軽自動車であれば黒色、事業用の軽自動車以外であれば緑色と決められているため、それらナンバープレートの色によって、軽自動車かどうかを判別することができる。
特許第3926673号公報
Therefore, there has been proposed a technique in which a license plate is imaged by a color camera and whether or not the vehicle is a light vehicle is determined based on the background color of the license plate (for example, see Patent Document 1). That is, the background color of the license plate is determined to be yellow if it is a light vehicle for private use, white if it is not a light vehicle for private use, black if it is a light vehicle for business use, and green if it is not a light vehicle for business use. Therefore, it is possible to determine whether the vehicle is a light vehicle by the color of the license plates.
Japanese Patent No. 3926673

しかしながら、上記のような特許文献1に記載の車両判別装置のように、カラーカメラを用いた色判定を行う場合、白色光源が必要となるため、車両の運転者に対して、白色光による眩惑を与えてしまうという問題がある。   However, when color determination using a color camera is performed as in the vehicle discrimination device described in Patent Document 1 described above, a white light source is required, and thus the driver of the vehicle is dazzled by white light. There is a problem of giving.

本発明は、このような事情に鑑みてなされたものであって、運転者に快適に通過してもらうことができ、迅速かつ高精度に特定分類車両を判別することができる車両判別装置及び車両判別方法を提供することを目的とする。   The present invention has been made in view of such circumstances, and is a vehicle determination device and a vehicle that can allow a driver to pass comfortably and quickly and accurately determine a specific classification vehicle. An object is to provide a discrimination method.

上記課題を解決するために、本発明は以下の手段を提供する。
本発明に係る車両判別装置は、予め定められた仮想の平面領域である撮像領域を撮像して、該撮像領域を通過する車両のナンバープレートを含むモノクロ画像データを取得する撮像部と、前記撮像部によって取得されたモノクロ画像データにおけるナンバープレートの輝度情報と、前記モノクロ画像データにおける前記ナンバープレートの位置情報とに基づいて、前記撮像領域における配光中心を演算する配光中心演算部と、判別対象のモノクロ画像データにおける前記ナンバープレートの位置情報と、前記配光中心演算部によって演算された配光中心とに基づいて、前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報を補正する補正部と、前記補正部によって補正された前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報に基づいて、前記特定分類車両を判別する判別部とを備えることを特徴とする。
In order to solve the above problems, the present invention provides the following means.
The vehicle discriminating apparatus according to the present invention captures an imaging region, which is a predetermined virtual plane region, and acquires monochrome image data including a license plate of a vehicle passing through the imaging region, and the imaging A light distribution center calculation unit for calculating a light distribution center in the imaging region based on luminance information of the license plate in the monochrome image data acquired by the unit and position information of the license plate in the monochrome image data; Correction for correcting the brightness information of the license plate in the monochrome image data to be determined based on the position information of the license plate in the target monochrome image data and the light distribution center calculated by the light distribution center calculation unit And the monochrome image data to be discriminated corrected by the correction unit. Based on the luminance information of the license plate, characterized in that it comprises a discriminator for discriminating the specific classification vehicle.

また、本発明に係る車両判別装置は、前記特定分類車両と相関のある説明変数により、判別関数を演算する判別関数演算部を備え、前記判別部は、前記補正部によって補正された前記判別対象の前記ナンバープレートの輝度情報から、前記判別関数演算部によって演算された判別関数に基づいて、前記特定分類車両を判別することを特徴とする。   In addition, the vehicle determination device according to the present invention includes a determination function calculation unit that calculates a determination function based on an explanatory variable correlated with the specific classification vehicle, and the determination unit is the determination target corrected by the correction unit. The specific classification vehicle is discriminated based on the discriminant function calculated by the discriminant function calculator from the luminance information of the license plate.

また、本発明に係る車両判別装置は、前記説明変数が、前記ナンバープレートの背景部の輝度値を含むことを特徴とする。   In the vehicle determination device according to the present invention, the explanatory variable includes a luminance value of a background portion of the license plate.

また、本発明に係る車両判別装置は、前記説明変数が、前記ナンバープレートの文字部の輝度値を含むことを特徴とする。   Moreover, the vehicle discrimination device according to the present invention is characterized in that the explanatory variable includes a luminance value of a character portion of the license plate.

また、本発明に係る車両判別方法は、予め定められた仮想の平面領域である撮像領域を撮像して、該撮像領域を通過する車両のナンバープレートを含むモノクロ画像データを取得する撮像ステップと、前記撮像ステップによって取得されたモノクロ画像データにおけるナンバープレートの輝度情報と、前記モノクロ画像データにおける前記ナンバープレートの位置情報とに基づいて、前記撮像領域における配光中心を演算する配光中心演算ステップと、判別対象のモノクロ画像データにおける前記ナンバープレートの位置情報と、前記配光中心演算ステップによって演算された配光中心とに基づいて、前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報を補正する補正ステップと、前記補正ステップによって補正された前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報に基づいて、前記特定分類車両を判別する判別ステップとを備えることを特徴とする。 In addition, the vehicle determination method according to the present invention captures an imaging region that is a predetermined virtual plane region, and acquires monochrome image data including a license plate of a vehicle that passes through the imaging region . A light distribution center calculating step for calculating a light distribution center in the imaging region based on luminance information of the license plate in the monochrome image data acquired by the imaging step and position information of the license plate in the monochrome image data; The brightness information of the license plate in the monochrome image data to be determined is corrected based on the position information of the license plate in the monochrome image data to be determined and the light distribution center calculated in the light distribution center calculation step. And a correction step to be corrected by the correction step. It was based on the luminance information of the license plate in the monochrome image data of the determination target, characterized by comprising a determination step of determining the specific classification vehicle.

本発明によれば、運転者に快適に通過してもらうことができ、迅速かつ高精度に特定分類車両を判別することができる。   According to the present invention, it is possible for a driver to pass comfortably, and a specific classification vehicle can be determined quickly and with high accuracy.

(実施形態)
以下、本発明の実施形態における車両判別装置について、図面を参照して説明する。
図1は、本発明の実施形態としての車両判別装置を示したものである。
本実施形態における車両判別装置1は、自家用の軽自動車(ナンバープレート:黄色、文字:黒)を判別するものとする。この車両判別装置1は、車両Cが走行する道路Rの脇に設置されるものである。
また、道路Rの両脇には、車両Cの有無を検出する車両検知センサ2が設けられている。車両検知センサ2は、例えば、光学センサやループコイルなどからなるものである。また、車両検知センサ2は、車両判別装置1に接続されている。この車両検知センサ2は、道路Rの両脇に設置された支柱2aと、これら支柱2aに取り付けられたセンサ部(不図示)と、このセンサ部に接続された検知制御部(不図示)とを備えている。
そして、支柱2aの間を車両Cが走行すると、例えば、支柱2a間における検知用の光が遮られたことをセンサ部が検出し、オン信号を検知制御部に出力する。検知制御部は、そのオン信号を読み出すと、トリガ信号を車両判別装置1に出力する。
(Embodiment)
Hereinafter, a vehicle determination device according to an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 shows a vehicle discrimination device as an embodiment of the present invention.
The vehicle discriminating apparatus 1 according to the present embodiment discriminates a personal light vehicle (number plate: yellow, letter: black). This vehicle discriminating device 1 is installed beside the road R on which the vehicle C travels.
Further, on both sides of the road R, vehicle detection sensors 2 that detect the presence or absence of the vehicle C are provided. The vehicle detection sensor 2 is composed of, for example, an optical sensor or a loop coil. The vehicle detection sensor 2 is connected to the vehicle determination device 1. The vehicle detection sensor 2 includes a column 2a installed on both sides of the road R, a sensor unit (not shown) attached to the column 2a, and a detection control unit (not shown) connected to the sensor unit. It has.
And if the vehicle C drive | works between the support | pillars 2a, for example, a sensor part will detect that the light for a detection between the support | pillars 2a was interrupted, and will output an ON signal to a detection control part. When the detection control unit reads the ON signal, the detection control unit outputs a trigger signal to the vehicle determination device 1.

車両判別装置1は、図2に示すように、全体の動作を制御する制御部(配光中心演算部、補正部、判別部、判別関数演算部)10と、種々の情報を記憶する記憶部11と、撮像対象を撮像する撮像部12とを備えている。また、車両判別装置1は、制御部10の演算結果を出力する出力部13と、各種情報の入力を受け付ける情報入力部14と、車両検知センサ2と制御部10とのインターフェースとなる信号入力部15とを備えている。
信号入力部15は、車両検知センサ2から出力されたトリガ信号を受け付け、制御部10に入力する。
撮像部12は、白黒カメラからなるものであり、白色光を使用しないものである。また、撮像部12は、制御部10の指示に基づいて、車両Cが通過する一平面領域を撮像する。この領域を、撮像領域S(図1に示す)とする。撮像領域Sは、支柱2aの間であって、車両Cの進行方向に直交する方向に延在する領域である。撮像部12は、撮像領域Sを撮像することにより、車両CのナンバープレートNを撮像する。また、撮像部12は、撮像領域Sを撮像することにより、撮像領域Sのモノクロ画像データを生成し、そのモノクロ画像データを制御部10に出力する。
As shown in FIG. 2, the vehicle discrimination device 1 includes a control unit (light distribution center calculation unit, correction unit, discrimination unit, discrimination function calculation unit) 10 that controls the overall operation, and a storage unit that stores various information. 11 and an imaging unit 12 that captures an imaging target. In addition, the vehicle determination device 1 includes an output unit 13 that outputs a calculation result of the control unit 10, an information input unit 14 that receives input of various information, and a signal input unit that serves as an interface between the vehicle detection sensor 2 and the control unit 10. 15.
The signal input unit 15 receives the trigger signal output from the vehicle detection sensor 2 and inputs the trigger signal to the control unit 10.
The imaging unit 12 is composed of a black and white camera and does not use white light. Further, the imaging unit 12 captures an image of a single plane region through which the vehicle C passes based on an instruction from the control unit 10. This area is defined as an imaging area S (shown in FIG. 1). The imaging area S is an area extending between the columns 2a and extending in a direction orthogonal to the traveling direction of the vehicle C. The imaging unit 12 images the license plate N of the vehicle C by imaging the imaging region S. Further, the imaging unit 12 captures the imaging region S to generate monochrome image data of the imaging region S, and outputs the monochrome image data to the control unit 10.

制御部10は、撮像部12から出力されたモノクロ画像データを読み出し、そのモノクロ画像データの中から、画像処理により、モノクロ画像データにおけるナンバープレートの位置情報を取得する。このときの位置情報は、ナンバープレートの中心点を取るものとする。なお、撮像部12が撮像するのは、撮像領域Sであり、この撮像領域Sとモノクロ画像データとは、それら位置関係が一致している。そのため、モノクロ画像データにおける位置情報は、撮像領域Sにおける位置情報となる。なお、撮像領域Sとモノクロ画像データとの位置関係は完全に一致している必要はなく、例えば、所定領域における両者の位置座標を対応させておいてもよい。   The control unit 10 reads the monochrome image data output from the imaging unit 12, and acquires the position information of the license plate in the monochrome image data from the monochrome image data by image processing. The position information at this time assumes the center point of the license plate. The imaging unit 12 captures an image area S, and the image area S and the monochrome image data have the same positional relationship. Therefore, the position information in the monochrome image data becomes position information in the imaging region S. Note that the positional relationship between the imaging region S and the monochrome image data does not need to be completely coincident, and for example, the positional coordinates of the two in a predetermined region may correspond to each other.

また、制御部10は、モノクロ画像データにおけるナンバープレートから、文字情報を除く背景の輝度情報のみを抽出し、その輝度平均を算出する。そして、その輝度平均とナンバープレートの位置情報とを記憶部11に記憶する。そして、制御部10は、所定のサンプル数分(例えば1,000台分)の輝度情報及び位置情報が得られると、それら1,000台分の輝度情報及び位置情報から、撮像領域Sにおける配光中心を演算し、記憶部11に記憶する。
さらに、制御部10は、実際に判別する車両Cのモノクロ画像データにおけるナンバープレートの位置情報を取得し、その位置情報と配光中心とから、判別する車両Cのナンバープレートの輝度情報を補正する。
そして、制御部10は、補正した輝度情報から、判別関数に基づいて、特定分類車両を判別する。
なお、これら制御部10の処理の詳細については、後述するものとする。
Further, the control unit 10 extracts only the luminance information of the background excluding the character information from the license plate in the monochrome image data, and calculates the luminance average. Then, the average brightness and the position information of the license plate are stored in the storage unit 11. When the luminance information and position information for a predetermined number of samples (for example, 1,000 vehicles) are obtained, the control unit 10 distributes the information in the imaging region S from the luminance information and position information for the 1,000 samples. The optical center is calculated and stored in the storage unit 11.
Further, the control unit 10 acquires the position information of the license plate in the monochrome image data of the vehicle C to be actually determined, and corrects the luminance information of the license plate of the vehicle C to be determined from the position information and the light distribution center. .
And the control part 10 discriminate | determines a specific classification | category vehicle from the corrected brightness | luminance information based on a discriminant function.
Details of the processing of the control unit 10 will be described later.

出力部13は、制御部10の判別結果を他の集計分析装置に出力する。
情報入力部14は、判別関数を演算するための後述する説明変数の入力を受け付け、それら説明変数のデータを制御部10に出力する。なお、それら説明変数のデータは、記憶部11に記憶される。
The output unit 13 outputs the determination result of the control unit 10 to another aggregation analyzer.
The information input unit 14 receives input of explanatory variables (to be described later) for calculating the discriminant function, and outputs data of these explanatory variables to the control unit 10. The explanatory variable data is stored in the storage unit 11.

次に、このように構成された本実施形態における車両判別装置1の動作について説明する。
車両判別装置1の動作としては、配光中心演算フェーズと、輝度情報補正フェーズと、判別関数による判別フェーズとの3つのフェーズが含まれている。
以下では、それら3つのフェーズについて順に説明する。
Next, operation | movement of the vehicle discrimination device 1 in this embodiment comprised in this way is demonstrated.
The operation of the vehicle discrimination device 1 includes three phases: a light distribution center calculation phase, a luminance information correction phase, and a discrimination phase based on a discrimination function.
Below, these three phases are demonstrated in order.

(配光中心演算フェーズ)
配光中心演算フェーズは、輝度情報補正フェーズの前に、あらかじめ行われるものである。また、配光中心の演算は、例えば1,000台などの所定のサンプル数分のデータを取得してから行われるものである。
図3は、配光中心演算フェーズにおける車両判別装置1の制御部10の処理を示すフローチャートである。
まず、車両Cの前端部が支柱2aの間に入り、検知用の光を遮ると、車両検知センサ2がトリガ信号を車両判別装置1に出力する。車両判別装置1の制御部10は、信号入力部15の出力を読み出し、トリガ信号が出力されたか否かを判定する(ステップS1)。そして、制御部10は、信号入力部15からトリガ信号が出力されていないと判定すると、ステップS1の処理を繰り返す。一方、制御部10は、トリガ信号が出力されたと判定すると、撮像部12を介して撮像領域Sを撮像する(ステップS2)。これにより、車両Cのナンバープレートを含むモノクロ画像が得られる。
(Light distribution center calculation phase)
The light distribution center calculation phase is performed in advance before the luminance information correction phase. The calculation of the light distribution center is performed after acquiring data for a predetermined number of samples such as 1,000.
FIG. 3 is a flowchart showing processing of the control unit 10 of the vehicle discrimination device 1 in the light distribution center calculation phase.
First, when the front end portion of the vehicle C enters between the columns 2 a and blocks the detection light, the vehicle detection sensor 2 outputs a trigger signal to the vehicle determination device 1. The control unit 10 of the vehicle determination device 1 reads the output of the signal input unit 15 and determines whether or not a trigger signal is output (step S1). When determining that the trigger signal is not output from the signal input unit 15, the control unit 10 repeats the process of step S1. On the other hand, when the control unit 10 determines that the trigger signal has been output, the control unit 10 images the imaging region S via the imaging unit 12 (step S2). Thereby, a monochrome image including the license plate of the vehicle C is obtained.

制御部10は、撮像部12から出力されたモノクロ画像を読み出すと、モノクロ画像の輝度からサンプル用のナンバープレート(以下、「サンプル用ナンバープレート」という。)の中心位置である位置情報を演算し、記憶部11に記憶する(ステップS3)。この位置情報が撮像領域Sにおける位置となる。さらに、制御部10は、サンプル用ナンバープレートの輝度情報から文字の輝度を除いて、背景のみの平均輝度情報を演算し、位置情報と対応させて記憶部11に記憶する(ステップS4)。
そして、制御部10は、カウンタなどにより所定のサンプル数分(例えば、1,000回分)の処理を行ったか否かを判定し(ステップS5)、行っていないと判定すると、ステップS1に戻って処理を繰り返す。一方、制御部10は、所定のサンプル数分の処理を行った(サンプル数を超えた)と判定すると、記憶部11からサンプル数分の位置情報及び平均輝度情報から、撮像領域Sにおける配光中心を演算する(ステップS6)。
When the monochrome image output from the imaging unit 12 is read, the control unit 10 calculates position information that is the center position of a sample license plate (hereinafter referred to as “sample number plate”) from the luminance of the monochrome image. And stored in the storage unit 11 (step S3). This position information is a position in the imaging region S. Further, the control unit 10 calculates the average luminance information of only the background by excluding the character luminance from the luminance information of the sample license plate, and stores it in the storage unit 11 in association with the position information (step S4).
Then, the control unit 10 determines whether or not processing for a predetermined number of samples (for example, 1,000 times) has been performed using a counter or the like (step S5), and when it is determined that processing has not been performed, the control unit 10 returns to step S1. Repeat the process. On the other hand, when the control unit 10 determines that the processing for the predetermined number of samples has been performed (exceeds the number of samples), the light distribution in the imaging region S is obtained from the position information and the average luminance information for the number of samples from the storage unit 11. The center is calculated (step S6).

さて、本実施形態における配光中心の演算手法は、白板と黄板の微妙な白黒調の差異に着目するものである。
なお、ナンバープレートの背景色が白色のものを白板とし、黄色のものを黄板、緑色のものを緑板、黒色のものを黒板とする。さらに、白板及び黄板を白色系とし、緑板及び黒板のものを黒色系とする。
白色系と黒色系とでは、ナンバープレートの背景の輝度が大きく異なることから、所定の閾値を設定することにより、白色系と黒色系とを容易に判別することができる。すなわち、制御部10は、判別しようとするナンバープレートの背景の輝度が所定の閾値以下であると判定すると、そのナンバープレートは黒色系となるから、自家用の軽自動車ではないということを直ちに判別することができる。本実施形態では、制御部10が、ナンバープレートの背景の輝度が所定の閾値以上であると判定した場合(白色系であった場合)に、黄板を高精度に判別するためのものである。
Now, the light distribution center calculation method in this embodiment pays attention to a subtle difference in white and black tones between a white plate and a yellow plate.
The white background of the license plate is the white plate, the yellow plate is the yellow plate, the green plate is the green plate, and the black plate is the blackboard. Further, the white plate and the yellow plate are white, and the green plate and the blackboard are black.
Since the brightness of the background of the license plate is greatly different between the white system and the black system, the white system and the black system can be easily distinguished by setting a predetermined threshold value. That is, if the control unit 10 determines that the background luminance of the license plate to be determined is equal to or less than a predetermined threshold, the control plate 10 immediately determines that the license plate is a black car and is not a private light vehicle. be able to. In the present embodiment, when the control unit 10 determines that the background brightness of the license plate is equal to or higher than a predetermined threshold (when it is a white system), the control unit 10 determines the yellow plate with high accuracy. .

白色系の中の白板と黄板とでは、全く同じ条件(アイリス値・CCD・露光時間・ガンマカーブ・照明配光など)で撮像した場合、その背景部や文字部輝度などに差が出る。すなわち、白板の方が黄板よりも明るくなる。
しかしながら、画中輝度はナンバープレートの写り具合によっても大きく左右されるため、プレートの被写姿勢や天候等によって、黄板が白板より明るく写ることはしばしばである。特に、工業用のナンバープレート認識装置では、一般に、コスト上の制約からスポット的な照明配光となっている場合が多い。したがって、画中の照明配光が均一でないため、撮像領域におけるナンバープレートの被写位置による輝度の変化を無視することができない。そのため、単純なプレート輝度の比較では、白板と黄板とを精度良く判別することは不可能である。
When the white plate and the yellow plate in the white system are imaged under exactly the same conditions (iris value, CCD, exposure time, gamma curve, illumination light distribution, etc.), there are differences in the background portion and character portion luminance. That is, the white board is brighter than the yellow board.
However, since the brightness in the picture is greatly affected by the number of shots on the license plate, the yellow plate often appears brighter than the white plate depending on the orientation of the plate and the weather. In particular, industrial license plate recognition devices generally have spot-like illumination light distribution due to cost constraints. Accordingly, since the illumination light distribution in the image is not uniform, a change in luminance due to the position of the license plate in the imaging region cannot be ignored. For this reason, it is impossible to accurately discriminate between a white plate and a yellow plate by simple plate luminance comparison.

図4は、床面以外からの照明反射のないオープンな空間で、通常の白い板の撮影を行い、撮影領域内で白い板の位置を変えて、その画中輝度の変化を8ビットで示すものである。
図4に示すように、一般的な照明の場合、物体の画中輝度は照明配光中心(220ビット〜の部分)から乖離するに従って暗くなり、その輝度変化の大きさは、同じ位置で白板と黄板を撮影したときに得られる輝度差よりも、相対的に大きい。そのため、撮像領域における配光中心やナンバープレートの位置によって、白板が黄板と誤って判別されたり、黄板が白板と誤って判別されてしまうおそれがある。
本実施形態における車両判別装置1では、黄板と白板の判定の前に、照明配光の影響を取り除いておくものである。
照明配光の影響を取り除くためには、照明配光分布と画中輝度との関係を定量的に知ることが必要である。照明配光分布は、照明設計時に決定され、事前にほぼ得ることができる。しかし、車両判別装置1の設置場所ごとに撮像系の幾何的条件が異なったり、据付調整のバラつきによって微妙な差異が生じたりするので、本実施形態では、オンライン的に実機で補正するものとする。
FIG. 4 shows a change in luminance in the picture in 8 bits by photographing a normal white board in an open space where there is no illumination reflection from other than the floor, and changing the position of the white board within the photographing area. Is.
As shown in FIG. 4, in the case of general illumination, the luminance of the object in the picture becomes darker as it deviates from the center of the illumination light distribution (portion from 220 bits), and the magnitude of the luminance change is the white plate at the same position. It is relatively larger than the luminance difference obtained when shooting a yellow plate and a yellow plate. For this reason, there is a possibility that the white plate is mistakenly identified as a yellow plate or the yellow plate is mistakenly identified as a white plate depending on the position of the light distribution center or the license plate in the imaging region.
In the vehicle discriminating apparatus 1 in the present embodiment, the influence of the illumination light distribution is removed before the determination of the yellow plate and the white plate.
In order to remove the influence of the illumination light distribution, it is necessary to quantitatively know the relationship between the illumination light distribution and the in-picture luminance. The illumination light distribution is determined at the time of illumination design and can be obtained approximately in advance. However, since the geometric conditions of the imaging system differ depending on the installation location of the vehicle discriminating apparatus 1 or a subtle difference occurs due to variations in installation adjustment, in this embodiment, correction is performed online with the actual machine. .

図5及び図6は、サンプル用ナンバープレートの位置情報と背景のみの平均輝度情報との関係を示すグラフである。なお、図5における横軸は、撮像領域Sの横方向の位置に対応するものであり、図6における横軸は、撮像領域Sの縦方向の位置に対応するものである。また、図5及び図6において、1ドットが、撮像領域Sにおける横方向及び縦方向のサンプル用ナンバープレートの1個分の中心位置を示している。
制御部10は、1,000台分のサンプルを記憶部11に記憶し、この記憶部11に記憶された1,000台分のサンプル用ナンバープレートの位置情報と背景のみの平均輝度情報とから、以下のようにして配光中心を演算する。
5 and 6 are graphs showing the relationship between the position information of the sample license plate and the average luminance information of only the background. The horizontal axis in FIG. 5 corresponds to the horizontal position of the imaging region S, and the horizontal axis in FIG. 6 corresponds to the vertical position of the imaging region S. 5 and 6, one dot indicates the center position of one sample number plate in the imaging region S in the horizontal direction and the vertical direction.
The control unit 10 stores 1,000 samples in the storage unit 11, and based on the position information of the 1,000 license plate samples stored in the storage unit 11 and the average luminance information of only the background. The light distribution center is calculated as follows.

まず、制御部10は、オペレータによってあらかじめ入力された設計時点での撮像領域Sでの照明配光中心(x,y)を、演算によって求めたい配光中心(x,y)の仮値として設定する。そして、制御部10は、記憶部11に記憶された位置情報と平均輝度情報とから、回帰計算により位置情報と平均輝度情報との2次近似関数(P1=f(P2):P1は平均輝度情報,P2は位置情報)を演算する。
なお、図5及び図6における曲線が、2次近似関数を示している。
さらに、制御部10は、2次近似関数を利用して、f’(P2)=0を演算することにより、平均輝度の最も高い位置、すなわち配光中心(x,y)を演算し、記憶部11に記憶する。
First, the control unit 10 calculates the provisional value of the light distribution center (x, y) to be obtained by calculating the illumination light distribution center (x 0 , y 0 ) in the imaging region S at the design time inputted in advance by the operator. Set as. Then, the control unit 10 calculates a quadratic approximation function (P1 = f (P2): P1 is the average luminance of the position information and the average luminance information by regression calculation from the position information and the average luminance information stored in the storage unit 11. Information, P2 is position information).
Note that the curves in FIGS. 5 and 6 indicate the quadratic approximation function.
Further, the control unit 10 calculates the position having the highest average luminance, that is, the light distribution center (x, y) by calculating f ′ (P2) = 0 using the quadratic approximation function, and stores it. Store in unit 11.

なお、図5及び図6における配光中心は、(640.256)辺りに存在していることがわかる。
また、上記2次近似関数は、照明分布が単峰性の場合を示しているが、複数の配光中心があるときは、双峰性・多峰性となるので、3次以上の近似線を用いてもよい。また、厳密には、「x-y-z(輝度) 3次元グラフ」の近似局面を微分してピークを求める手法もあるが、ここでは計算量を考慮して上述の手法を採用している。
In addition, it turns out that the light distribution center in FIG.5 and FIG.6 exists around (640.256).
The above quadratic approximation function shows a case where the illumination distribution is unimodal. However, when there are a plurality of light distribution centers, bimodal and multimodality are obtained. May be used. Strictly speaking, there is a method for obtaining a peak by differentiating an approximate phase of the “xyz (luminance) three-dimensional graph”, but here, the above-described method is adopted in consideration of the calculation amount.

(輝度情報補正フェーズ)
次いで、輝度情報補正フェーズについて説明する。
輝度情報補正フェーズは、判別関数による判別フェーズの前に、あらかじめ行われるものである。
また、輝度情報補正フェーズは、配光中心演算フェーズにおいて得られた配光中心と、撮像部12によって撮像した判別対象のナンバープレート(以下「判別対象ナンバープレート」という。)の位置とに基づいて、判別対象ナンバープレートの輝度の変化を推定し、定量的に補正するものである。
(Luminance information correction phase)
Next, the luminance information correction phase will be described.
The luminance information correction phase is performed in advance before the discrimination phase by the discrimination function.
Further, the luminance information correction phase is based on the light distribution center obtained in the light distribution center calculation phase and the position of the discrimination target license plate (hereinafter referred to as “discrimination target license plate”) imaged by the imaging unit 12. The change in luminance of the discrimination target license plate is estimated and corrected quantitatively.

図7は、輝度情報補正フェーズにおける車両判別装置1の制御部10の処理を示すフローチャートである。
まず、制御部10は、上記と同様にして、撮像部12によって、判別対象となる車両Cの判別対象ナンバープレートのモノクロ画像を取得する。
そして、制御部10は、ステップS3と同様にして、撮像領域Sにおける判別対象ナンバープレートの位置情報を演算し(ステップS20)、ステップS4と同様にして、判別対象ナンバープレートの背景のみの平均輝度情報を演算する(ステップS21)。
FIG. 7 is a flowchart showing the processing of the control unit 10 of the vehicle discrimination device 1 in the luminance information correction phase.
First, in the same manner as described above, the control unit 10 acquires a monochrome image of the determination target license plate of the vehicle C to be determined by the imaging unit 12.
Then, the controller 10 calculates the position information of the discrimination target license plate in the imaging region S in the same manner as in step S3 (step S20), and the average brightness of only the background of the discrimination target license plate in the same manner as in step S4. Information is calculated (step S21).

それから、制御部10は、配光中心演算フェーズにおいて記憶部11に記憶された配光中心を読み出し、この配光中心と判別対象ナンバープレートの位置情報とに基づいて、判別対象ナンバープレートの背景のみの平均輝度情報を補正する(ステップS22)。
ここで、平均輝度情報の補正について説明する。
図8は、照明配光と輝度減衰との関係をモデル化して示す説明図である。
図8における符号Mは、配光中心を中心とした等輝度線を示すものである。等輝度線Mが左右対称でないのは、撮像領域Sを斜めから撮像する撮像機を想定しているためである。斜方撮像だと、左右両サイドのうち逆サイド(正設置なら右側)の照明密度が低くなる。また、上下も路面からの照り返しがあるため、対称ではない。したがって、ここではスポット照明の減衰モデル(x-y2軸、上下左右対称)ではなく、配光中心からの上下左右独立4軸でモデル化している。
Then, the control unit 10 reads the light distribution center stored in the storage unit 11 in the light distribution center calculation phase, and only the background of the determination target license plate is based on the light distribution center and the position information of the determination target license plate. Are corrected (step S22).
Here, the correction of the average luminance information will be described.
FIG. 8 is an explanatory diagram modeling the relationship between illumination light distribution and luminance attenuation.
A symbol M in FIG. 8 indicates an isoluminance line centered on the light distribution center. The reason why the isoluminance line M is not symmetric is because it is assumed that the imaging area S is imaged from an oblique direction. In oblique imaging, the illumination density on the opposite side of the left and right sides (on the right side in normal installation) is low. Also, the upper and lower sides are not symmetrical because there is reflection from the road surface. Therefore, it is modeled not with a spot illumination attenuation model (x-y2 axis, vertical and horizontal symmetry) but with four independent vertical and horizontal axes from the light distribution center.

撮像領域Sにおける配光中心(x,y)に対して、判別対象ナンバープレートの位置がPであるとする。
この位置Pにおける画中輝度pは、以下の式により求めることができる。
p(p0,r,l,d,u)=kr+kl+kd+ku+k+k+k+k+p・・・(1)
なお、式(1)において、変数r,l,d,uは、配光中心からの上下左右への乖離距離を示し、k〜kは、乖離距離による減衰の強さを表す負の定数項、pは、配光中心における判別対象ナンバープレートの画中輝度を示す。
また、式(1)の回帰式は一通りではない。画像処理機が斜方撮像であるため、ここでは独立4軸でモデル化しているが、別の減衰モデルも存在し、同様に扱うことができる。
また、配光中心の推定ズレが有り得ることを考慮して、この減衰モデル(式(1))では、距離の1乗・2乗の両方に従う2次元モデルとした。配光中心の推定位置が本来の中心からずれていた場合は、距離の2乗にかかる減衰項k〜kがマイナス 、逆に1乗項k〜kはプラスとなって吸収できる。
Assume that the position of the discrimination target license plate is P with respect to the light distribution center (x, y) in the imaging region S.
The in-picture luminance p at this position P can be obtained by the following equation.
p (p 0 , r, l, d, u) = k 1 r + k 2 l + k 3 d + k 4 u + k 5 r 2 + k 6 l 2 + k 7 d 2 + k 8 u 2 + p 0 (1)
In equation (1), variables r, l, d, and u indicate the vertical and horizontal divergence distances from the light distribution center, and k 1 to k 8 are negative values that indicate the strength of attenuation due to the divergence distance. The constant term, p 0 , indicates the in-picture luminance of the discrimination target license plate at the light distribution center.
Moreover, the regression formula of Formula (1) is not one way. Since the image processor is oblique imaging, the model is made with four independent axes here, but another attenuation model exists and can be handled in the same manner.
Further, in consideration of the possible deviation of the center of light distribution, this attenuation model (Equation (1)) is a two-dimensional model that follows both the first and second powers of the distance. When the estimated position of the light distribution center is deviated from the original center, the attenuation terms k 5 to k 8 concerning the square of the distance are negative, and conversely, the first power terms k 1 to k 4 are positive and can be absorbed. .

さらに、式(1)は、一次元重回帰モデルであり、一定の標本データがあれば、重回帰分析によって解くことができる。制御部10は、記憶部11に記憶された所定サンプル数分の位置情報(r,l,d.u)及び平均輝度情報(p)から、重回帰問題を解いて、k〜k及びpを演算する。そして、制御部10は、以下の式により、判別対象ナンバープレートの平均輝度情報pを補正する。
=p−(kr+kl+kd+ku+k+k+k+k)・・・(2)
すなわち、判別対象ナンバープレートの平均輝度情報pが、配光中心で撮像したと仮定したときの画中輝度pに変換(輝度正規化)される。
なお、制御部10は、判別対象ナンバープレートの背景部のみならず、文字部の平均輝度情報についても、上記の正規化処理(pからp変換)を行う。
Furthermore, equation (1) is a one-dimensional multiple regression model, and if there is constant sample data, it can be solved by multiple regression analysis. The control unit 10 solves the multiple regression problem from the position information (r, l, du) and the average luminance information (p) for a predetermined number of samples stored in the storage unit 11, and k 1 to k 8 and to calculate the p 0. And the control part 10 correct | amends the average luminance information p of the discrimination | determination object license plate by the following formula | equation.
p 0 = p− (k 1 r + k 2 l + k 3 d + k 4 u + k 5 r 2 + k 6 l 2 + k 7 d 2 + k 8 u 2 ) (2)
That is, the average luminance information p of the discrimination target license plate is converted (luminance normalization) into the in-picture luminance p 0 when it is assumed that the image is captured at the center of the light distribution.
Note that the control unit 10 performs the above normalization process (conversion from p to p 0 ) not only on the background part of the discrimination target license plate but also on the average luminance information of the character part.

(判別関数による判別フェーズ)
次いで、判別関数による判別フェーズについて説明する。
上記の配光中心演算フェーズ及び輝度情報補正フェーズによって、判別対象ナンバープレートの平均輝度情報から、配光分布の影響を控除することができる。
しかし、照明配光以外にも多くの要因によって、輝度は変動する場合がある。
ここで、輝度に影響及ぼす要因には、局所的な天候変化(一時的な陰り)など、全くの未知的要因もあるが、既知(推定可能、又はセンシング可能)であって、適切な処理を施すことにより、その影響を控除できるものもある(例えば、プレート姿勢角、車体色調(拡散反射の影響)、大局的天候変化(昼と夜など))。
しかしながら、これらの既知的要因について、個別にその影響を控除するためには、その影響の仕方を予め評価しなければならないため、そのための調査や影響控除のための実装の手間などを考慮すると、現実的ではない。
そこで、本実施形態では、統計的手法である「判別分析法」を利用して、特定分類車両の判定を行っている。
本実施形態では、「軽自動車らしさ」と相関のある要因群を「説明変数」として定義することで、個別の影響の仕方を考慮して控除しなくても、総合的な判断で判別ができる。
(Determination phase by discriminant function)
Next, the discrimination phase by the discrimination function will be described.
By the light distribution center calculation phase and the luminance information correction phase, the influence of the light distribution can be subtracted from the average luminance information of the discrimination target license plate.
However, the luminance may fluctuate due to many factors other than the illumination light distribution.
Here, although there are totally unknown factors such as local weather changes (temporary shading) as factors affecting the brightness, they are known (can be estimated or can be sensed) and should be processed appropriately. In some cases, the effect can be subtracted (for example, plate attitude angle, body color tone (diffuse reflection effect), global weather change (day and night, etc.)).
However, in order to deduct the impact of these known factors individually, the way of the impact must be evaluated in advance, so when considering the effort and implementation for deduction of the impact, Not realistic.
Therefore, in the present embodiment, a specific classification vehicle is determined using a “discriminant analysis method” which is a statistical method.
In the present embodiment, by defining a factor group correlated with “light car-likeness” as “explanatory variable”, it is possible to make a judgment by comprehensive judgment without deducting in consideration of individual influence methods. .

まず、特定分類車両の判別の前に、実際の所属(軽自動車かそれ以外か)が明確に分かっているデータを標本群として準備する。例えば、事前に収集したデータを標本群とする場合(オフライン標本)は、目視確認等によって正解(軽自動車かそれ以外か)を確認しておく。また、リアルタイムに得られるデータを標本群とする場合(オンライン標本)は、車両諸元のセンシングなど、別の手法で確実に軽自動車かそれ以外かを断定できたデータのみを標本群に加える。
そして、車両判別装置1の情報入力部14などを介して、それら標本群が入力されると、制御部10が、標本群を記憶部11に記憶する。さらに、図9に示すように、標本群に対して、説明変数を定義する。なお、図9においては、標本が1〜N、説明変数が1〜M用意されている。
First, before identifying a specific classification vehicle, data in which the actual affiliation (light car or other) is clearly known is prepared as a sample group. For example, when data collected in advance is used as a sample group (offline sample), the correct answer (light car or other) is confirmed by visual confirmation or the like. In addition, when data obtained in real time is used as a sample group (online sample), only data that can be reliably determined whether it is a light vehicle or any other method, such as sensing of vehicle specifications, is added to the sample group.
Then, when those sample groups are input via the information input unit 14 of the vehicle discrimination device 1 or the like, the control unit 10 stores the sample groups in the storage unit 11. Furthermore, as shown in FIG. 9, explanatory variables are defined for the sample group. In FIG. 9, samples 1 to N and explanatory variables 1 to M are prepared.

ここで、説明変数とは、「軽自動車らしさ」と相関のある要因群であり、所属する群(軽自動車/軽自動車以外)を直接的・間接的に、示唆する量である。すなわち、これら説明変数が、特定分類車両判別の際の重み付けとして利用される。
説明変数としては、例えば、以下のようなものがある。
(a)直接的に軽自動車らしさを示唆する量
1.ナンバープレート背景部の輝度値
白色系において、自家用の軽自動車であれば、背景部の色は黄色であり、それ以外であれば白色であるから、軽自動車であれば背景部の輝度は暗くなり、軽自動車以外であればその輝度は明るくなる(軽(暗)←→軽以外(明))。
2.ナンバープレート文字部の輝度値
白色系において、自家用の軽自動車であれば、文字部の色は黒色であり、それ以外であれば緑色であるから、軽自動車であれば文字部の輝度は暗くなり、軽自動車以外であればその輝度は明るくなる(軽(暗)←→軽以外(明))。
3.エンブレムなどの有無
例えば、特定の自動車会社には、大型や普通自動車よりも、軽自動車を多く製造している自動車会社がある。この場合、その自動車会社のエンブレムを識別することにより、軽自動車である確立が増えることになる(軽(エンブレム無し)←→軽以外(エンブレム有り))。
Here, the explanatory variable is a factor group correlated with “light car-likeness”, and is an amount that directly or indirectly suggests a group to which the vehicle belongs (non-light car / other than light car). That is, these explanatory variables are used as weights in the specific classification vehicle determination.
Examples of explanatory variables include the following.
(A) A quantity that directly suggests a light car. The brightness value of the background of the license plate In a white system, if it is a light car for private use, the background color is yellow, otherwise it is white, so if it is a light car, the brightness of the background will be dark If it is not a light car, the brightness will be brighter (light (dark) ← → other than light (bright)).
2. The brightness value of the license plate character part In the white system, the color of the character part is black if it is a light car for private use, and the color of the character part is dark if it is a light car because it is green otherwise. If it is not a light car, the brightness will be brighter (light (dark) ← → other than light (bright)).
3. Presence / absence of emblems For example, certain automobile companies have automobile companies that manufacture more mini cars than large and ordinary cars. In this case, by identifying the emblem of the car company, the establishment of a light car increases (light (no emblem) ← → other than light (with emblem)).

(b)間接的に軽自動車らしさを示唆する量(軽自動車らしさの判定に間接的に影響を及ぼす量)
1.プレートの傾き
プレートが傾くと暗く写りやすい。すなわち、同じ輝度値であれば、傾きが大きいものほど、白板(軽自動車以外)の確率が高い。
2.推定外光量
夜ほどプレートが暗く写りやすい。すなわち、同じ輝度値であれば、推定外光量(撮像した時間帯で推定可)が小さいものほど、白板(軽自動車以外)の確率が高い。
なお、上例以外にも、軽自動車らしさ/らしくなさを示唆する説明変数の候補は多数存在するが、説明変数に採用するに当たっては、所属群(軽自動車/軽自動車以外)との相関の有無及び強弱などを評価して決めればよい。
(B) A quantity that indirectly suggests a light car (an amount that indirectly affects the judgment of a light car)
1. Plate tilt When the plate is tilted, it appears dark and easy to appear. That is, if the luminance value is the same, the probability of a white board (other than a light vehicle) is higher as the inclination is larger.
2. Estimated extraneous light The plate becomes darker and darker at night. That is, if the luminance value is the same, the probability of a white board (other than a light vehicle) is higher as the estimated extraneous light amount (which can be estimated in the captured time zone) is smaller.
In addition to the above examples, there are many candidates for explanatory variables that suggest the appearance / inappropriateness of minicars, but when adopting them as explanatory variables, there is a correlation with the affiliation group (minicars / other than minicars). It may be determined by evaluating the strength and weakness.

このように、説明変数が入力されると、制御部10は、以下のようにして判別関数をあらかじめ演算し、記憶部11に記憶する。
なお、ここでは、説明変数として、背景部の輝度値と、文字部の輝度値の2つを利用するものとする。
制御部10は、統計的な手法に倣い、標本群から2群判別の判別関数を算出する。算出方法としては、最小二乗によるもの(重回帰直線(線形判別関数)、図10に示す)やマハラノビス距離によるもの(中間曲線(非線形判別関数)、図11に示す)などがある。
As described above, when the explanatory variable is input, the control unit 10 calculates the discriminant function in advance as follows and stores it in the storage unit 11.
Here, it is assumed that two luminance values of the background portion and the character portion are used as explanatory variables.
The control unit 10 calculates a discriminant function for discriminating the second group from the sample group according to a statistical method. As a calculation method, there are a method using least squares (multiple regression line (linear discriminant function), shown in FIG. 10) and a method using Mahalanobis distance (intermediate curve (nonlinear discriminant function), shown in FIG. 11).

そして、上記のように、判別関数が記憶部11に記憶された状態で、制御部10は、以下のようにして、判別対象の車両が特定分類車両であるか否かを判定する。
まず、制御部10は、輝度情報補正フェーズによって補正された平均輝度情報を読み出すと、記憶部11に記憶された判別関数を読み出す。そして、制御部10は、図10に示すように、判別対象の平均輝度情報の標本群における位置P1を算出し、判別関数に基づいて、位置P1が、軽自動車以外のA群に属するか、軽自動車のB群に属するかを判定する。そして、位置P1はB群に属していることから、制御部10は、判別対象の車両が自家用の軽自動車であると判定し、出力部13を介して判定結果を出力する。
Then, as described above, with the discrimination function stored in the storage unit 11, the control unit 10 determines whether or not the discrimination target vehicle is a specific classification vehicle as follows.
First, when the control unit 10 reads the average luminance information corrected in the luminance information correction phase, the control unit 10 reads the discriminant function stored in the storage unit 11. Then, as shown in FIG. 10, the control unit 10 calculates the position P1 in the sample group of the average luminance information to be discriminated, and based on the discriminant function, whether the position P1 belongs to the A group other than the light vehicle, It determines whether it belongs to the B group of a light vehicle. Since the position P1 belongs to the group B, the control unit 10 determines that the vehicle to be determined is a private light vehicle and outputs a determination result via the output unit 13.

以上より、本実施形態における車両判別装置1によれば、配光中心に基づいて、判別対象ナンバープレートの平均輝度を正規化するので、白黒カメラであっても、白板か黄板かを高精度に判別することができる。したがって、白色光を使用することなく、運転者に快適に通過してもらうことができ、迅速かつ高精度に特定分類車両を判別することができる。
また、特定分類車両の判別の際に、説明変数によって重み付けをしていることから、判別の精度を向上させることができる。また、このとき、個々の説明変数の波及効果を定量的に明らかにしたり、それに基づいて控除したりする必要もない。
また、説明変数として、ナンバープレートの背景部の輝度値及び文字部の輝度値を利用していることから、特に相関の強い値を用いることにより、判別の精度を向上させることができる。
なお、適切な説明変数の設定の仕方については、装置の設計に依存するが、上記に例示した要因を始めとしたいくつかの説明変数を用いて、9割程度の判別精度を得ることができた(参考:単純にプレート部輝度の閾値から判別する手法では、判別精度は6割程度であった)。
As described above, according to the vehicle discrimination device 1 of the present embodiment, the average luminance of the discrimination target license plate is normalized based on the center of light distribution, so even a black and white camera can accurately determine whether it is a white plate or a yellow plate. Can be determined. Therefore, the driver can pass comfortably without using white light, and the specific classification vehicle can be discriminated quickly and with high accuracy.
In addition, since the weighting is performed by the explanatory variable when the specific classification vehicle is determined, the determination accuracy can be improved. At this time, it is not necessary to quantitatively clarify or subtract the ripple effect of individual explanatory variables.
Further, since the luminance value of the background portion of the license plate and the luminance value of the character portion are used as the explanatory variables, it is possible to improve the determination accuracy by using a particularly highly correlated value.
Although the method of setting appropriate explanatory variables depends on the design of the device, it is possible to obtain a discrimination accuracy of about 90% using several explanatory variables including the factors exemplified above. (Reference: In the method of simply discriminating from the threshold value of the plate portion luminance, the discrimination accuracy was about 60%).

なお、上記実施形態においては、判別対象を自家用の軽自動車としたが、これに限ることはなく、自家用及び事業用の普通自動車、大型自動車などであってもよい。すなわち、白色系から黄板を判別するものとしたが、白板を判別したり、黒色系から黒板又は緑板を判別してもよい。例えば、黒色系であれば、緑板よりも黒板の方が輝度は低いため、上記実施形態と同様にして、黒色系から黒板を判別することができる。
なお、本発明の技術範囲は上記の実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲において、種々の変更を加えることが可能である。
In the above-described embodiment, the discrimination target is a personal light vehicle. However, the present invention is not limited to this, and it may be a private vehicle or a commercial vehicle, a large vehicle, or the like. That is, the yellow plate is discriminated from the white system, but the white plate may be discriminated, or the blackboard or the green plate may be discriminated from the black system. For example, since the blackboard has a lower luminance than the green plate if it is black, the blackboard can be determined from the black as in the above embodiment.
The technical scope of the present invention is not limited to the above embodiment, and various modifications can be made without departing from the spirit of the present invention.

本発明に係る車両判別装置の実施形態を、道路に設置した様子を示す説明図である。It is explanatory drawing which shows a mode that embodiment of the vehicle discrimination device which concerns on this invention was installed in the road. 車両判別装置を機能ごとに示すブロック図である。It is a block diagram which shows a vehicle discrimination device for every function. 配光中心演算フェーズにおける車両判別装置の処理を示すフローチャートである。It is a flowchart which shows the process of the vehicle discrimination device in a light distribution center calculation phase. 床面以外からの照明反射のないオープンな空間で、通常の白い板の撮影を行ったときの照明配光分布と輝度変化を示すものであるThis is an open space where there is no illumination reflection from other than the floor surface, and shows the distribution of illumination light distribution and luminance change when shooting a normal white board. サンプル用ナンバープレートの位置情報と背景のみの平均輝度情報との関係を示すものであって、その横軸を、撮像領域の横方向の位置に対応させたときの様子を示すグラフである。It is a graph which shows the relationship between the positional information of a sample number plate, and the average luminance information of only a background, and shows a mode when the horizontal axis is made to respond | correspond to the position of the horizontal direction of an imaging region. サンプル用ナンバープレートの位置情報と背景のみの平均輝度情報との関係を示すものであって、その横軸を、撮像領域の縦方向の位置に対応させたときの様子を示すグラフである。It is a graph which shows the relationship between the position information of a sample number plate, and the average luminance information of only a background, and shows a mode when the horizontal axis is made to respond | correspond to the position of the vertical direction of an imaging region. 輝度情報補正フェーズにおける車両判別装置の処理を示すフローチャートである。It is a flowchart which shows the process of the vehicle discrimination device in a brightness | luminance information correction phase. 照明配光と輝度減衰との関係をモデル化して示す説明図である。It is explanatory drawing which models and shows the relationship between illumination light distribution and brightness | luminance attenuation | damping. 説明変数値と標本群との関係を示す表である。It is a table | surface which shows the relationship between an explanatory variable value and a sample group. 最小二乗によって算出された判別関数と標本群との位置関係を示す説明図である。It is explanatory drawing which shows the positional relationship between the discriminant function calculated by the least square, and a sample group. マハラノビス距離によって算出された判別関数と標本群との位置関係を示す説明図である。It is explanatory drawing which shows the positional relationship between the discriminant function calculated by Mahalanobis distance, and a sample group.

符号の説明Explanation of symbols

1 車両判別装置
10 制御部(配光中心演算部、補正部、判別部、判別関数演算部)
12 撮像部
C 車両
S 撮像領域
1 vehicle discriminating apparatus 10 control unit (light distribution center computing unit, correction unit, discriminating unit, discriminant function computing unit)
12 Imaging unit C Vehicle S Imaging region

Claims (5)

車両のナンバープレートから特定分類車両を判別する車両判別装置であって、
予め定められた仮想の平面領域である撮像領域を撮像して、該撮像領域を通過する前記車両のナンバープレートを含むモノクロ画像データを取得する撮像部と、
前記撮像部によって取得されたモノクロ画像データにおけるナンバープレートの輝度情報と、前記モノクロ画像データにおける前記ナンバープレートの位置情報とに基づいて、前記撮像領域における配光中心を演算する配光中心演算部と、
判別対象のモノクロ画像データにおける前記ナンバープレートの位置情報と、前記配光中心演算部によって演算された配光中心とに基づいて、前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報を補正する補正部と、
前記補正部によって補正された前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報に基づいて、前記特定分類車両を判別する判別部とを備えることを特徴とする車両判別装置。
A vehicle discrimination device for discriminating a specific classification vehicle from a vehicle license plate,
An imaging unit that captures an imaging region that is a predetermined virtual plane region and acquires monochrome image data including a license plate of the vehicle that passes through the imaging region;
A light distribution center calculation unit for calculating a light distribution center in the imaging region based on luminance information of the license plate in the monochrome image data acquired by the imaging unit and position information of the license plate in the monochrome image data; ,
Based on the position information of the license plate in the monochrome image data to be determined and the light distribution center calculated by the light distribution center calculation unit, the luminance information of the license plate in the monochrome image data to be determined is corrected. A correction unit;
A vehicle discrimination device comprising: a discrimination unit that discriminates the specific classification vehicle based on luminance information of the license plate in the monochrome image data to be discriminated corrected by the correction unit.
前記特定分類車両と相関のある説明変数により、判別関数を演算する判別関数演算部を備え、
前記判別部は、
前記補正部によって補正された前記判別対象の前記ナンバープレートの輝度情報から、前記判別関数演算部によって演算された判別関数に基づいて、前記特定分類車両を判別することを特徴とする請求項1に記載の車両判別装置。
A discriminant function computing unit that computes a discriminant function according to an explanatory variable correlated with the specific classification vehicle,
The discrimination unit is
The specific classification vehicle is discriminated based on a discriminant function calculated by the discriminant function calculator from brightness information of the license plate to be discriminated corrected by the corrector. The vehicle discriminating device described.
前記説明変数は、
前記ナンバープレートの背景部の輝度値を含むことを特徴とする請求項2に記載の車両判別装置。
The explanatory variables are
The vehicle determination device according to claim 2, comprising a luminance value of a background portion of the license plate.
前記説明変数は、
前記ナンバープレートの文字部の輝度値を含むことを特徴とする請求項2又は請求項3に記載の車両判別装置。
The explanatory variables are
The vehicle determination device according to claim 2, further comprising a luminance value of a character portion of the license plate.
車両のナンバープレートから特定分類車両を判別する車両判別方法であって、
予め定められた仮想の平面領域である撮像領域を撮像して、該撮像領域を通過する前記車両のナンバープレートを含むモノクロ画像データを取得する撮像ステップと、
前記撮像ステップによって取得されたモノクロ画像データにおけるナンバープレートの輝度情報と、前記モノクロ画像データにおける前記ナンバープレートの位置情報とに基づいて、前記撮像領域における配光中心を演算する配光中心演算ステップと、
判別対象のモノクロ画像データにおける前記ナンバープレートの位置情報と、前記配光中心演算ステップによって演算された配光中心とに基づいて、前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報を補正する補正ステップと、
前記補正ステップによって補正された前記判別対象のモノクロ画像データにおける前記ナンバープレートの輝度情報に基づいて、前記特定分類車両を判別する判別ステップとを備えることを特徴とする車両判別方法。
A vehicle discrimination method for discriminating a specific classification vehicle from a vehicle license plate,
An imaging step of imaging an imaging area, which is a predetermined virtual plane area, and obtaining monochrome image data including a license plate of the vehicle passing through the imaging area ;
A light distribution center calculating step for calculating a light distribution center in the imaging region based on luminance information of the license plate in the monochrome image data acquired by the imaging step and position information of the license plate in the monochrome image data; ,
Based on the position information of the license plate in the monochrome image data to be determined and the light distribution center calculated in the light distribution center calculation step, the luminance information of the license plate in the monochrome image data to be determined is corrected. A correction step;
A vehicle determination method comprising: a determination step of determining the specific classified vehicle based on luminance information of the license plate in the monochrome image data to be determined corrected in the correction step.
JP2008128310A 2008-05-15 2008-05-15 Vehicle discrimination device and vehicle discrimination method Active JP5134432B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008128310A JP5134432B2 (en) 2008-05-15 2008-05-15 Vehicle discrimination device and vehicle discrimination method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008128310A JP5134432B2 (en) 2008-05-15 2008-05-15 Vehicle discrimination device and vehicle discrimination method

Publications (2)

Publication Number Publication Date
JP2009277056A JP2009277056A (en) 2009-11-26
JP5134432B2 true JP5134432B2 (en) 2013-01-30

Family

ID=41442420

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008128310A Active JP5134432B2 (en) 2008-05-15 2008-05-15 Vehicle discrimination device and vehicle discrimination method

Country Status (1)

Country Link
JP (1) JP5134432B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6534951B2 (en) * 2015-03-18 2019-06-26 御木本製薬株式会社 Evaluation method of skin turnover
CN111063039A (en) * 2018-01-23 2020-04-24 西安艾润物联网技术服务有限责任公司 Vehicle entering and exiting rapid help seeking method, device and system and readable storage medium

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2706314B2 (en) * 1989-05-10 1998-01-28 三菱重工業株式会社 License plate reader
JP2501158B2 (en) * 1992-01-29 1996-05-29 株式会社京三製作所 Number plate background color determination device and background color determination method
JPH1173514A (en) * 1997-08-29 1999-03-16 Nissan Motor Co Ltd Recognition device for vehicle
JP2001222680A (en) * 2000-02-08 2001-08-17 Mitsubishi Electric Corp License plate number reader
JP4107812B2 (en) * 2001-06-11 2008-06-25 株式会社リコー Image processing apparatus, image processing method, and recording medium
JP3926673B2 (en) * 2002-05-15 2007-06-06 富士通株式会社 Vehicle type identification device

Also Published As

Publication number Publication date
JP2009277056A (en) 2009-11-26

Similar Documents

Publication Publication Date Title
US9047518B2 (en) Method for the detection and tracking of lane markings
US20190139449A1 (en) Method, computer readable storage medium and electronic equipment for analyzing driving behavior
CN101116106B (en) Image processing process, image processing apparatus, image processing system
EP1890264B1 (en) Vehicle, image processing system, image processing method, image processing program, image processing system configuration method, and server
CN104508722A (en) Vehicle-mounted surrounding environment recognition device
CN106128115A (en) A kind of fusion method based on twin camera detection Traffic Information
WO2020022042A1 (en) Deterioration diagnosis device, deterioration diagnosis system, deterioration diagnosis method, and storage medium for storing program
JP2006182086A (en) Vehicle sensing device
CN109415057B (en) Method for preferably identifying object by driver assistance system
JP6818626B2 (en) Vehicle type discrimination device, vehicle type discrimination method, and vehicle type discrimination system
CN115777196A (en) Camera testing and verification under electromagnetic interference
JP5134432B2 (en) Vehicle discrimination device and vehicle discrimination method
KR20180085574A (en) 3d modeling based tire inspection system
JP4936045B2 (en) Vehicle color discrimination device, method and program
JP4706693B2 (en) Vehicle color determination device, vehicle color determination system, and vehicle color determination method
JP2021522719A (en) Online evaluation of camera internal parameters
JP2006201817A (en) Method and device for discriminating vehicle body color
JP2017045137A (en) Vehicle type discrimination device and vehicle type discrimination method
CN112699748A (en) Human-vehicle distance estimation method based on YOLO and RGB image
CN107356916A (en) Vehicle distance detecting method and device, electronic equipment, computer-readable recording medium
JP4788926B2 (en) Vehicle number reading device
JP5056931B2 (en) Vehicle color determination device, vehicle color determination system, and vehicle color determination method
TWI408612B (en) Method and system for dynamically and simultaneously determining the relative relation between moving objects
CN115396658A (en) Camera tampering detection
KR101484839B1 (en) Detection Method of axles tampering truck using image processing

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110330

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120606

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120612

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120807

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120808

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20121016

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20121109

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151116

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5134432

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20151116

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350