JP2014182007A - Inter-vehicular distance measuring apparatus and inter-vehicular distance measuring method - Google Patents

Inter-vehicular distance measuring apparatus and inter-vehicular distance measuring method Download PDF

Info

Publication number
JP2014182007A
JP2014182007A JP2013056728A JP2013056728A JP2014182007A JP 2014182007 A JP2014182007 A JP 2014182007A JP 2013056728 A JP2013056728 A JP 2013056728A JP 2013056728 A JP2013056728 A JP 2013056728A JP 2014182007 A JP2014182007 A JP 2014182007A
Authority
JP
Japan
Prior art keywords
vehicle
image
inter
distance
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013056728A
Other languages
Japanese (ja)
Other versions
JP6048246B2 (en
Inventor
So Kaihatsu
壮 改發
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Priority to JP2013056728A priority Critical patent/JP6048246B2/en
Publication of JP2014182007A publication Critical patent/JP2014182007A/en
Application granted granted Critical
Publication of JP6048246B2 publication Critical patent/JP6048246B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

PROBLEM TO BE SOLVED: To provide an inter-vehicular distance measuring apparatus and an inter-vehicular distance measuring method, capable of securing practical accuracy and inexpensively measuring an inter-vehicular distance to a forward vehicle.SOLUTION: A self vehicle 2 includes a camera 4 for photographing a forward vehicle 3, and a control unit 5 for calculating an inter-vehicular distance to the forward vehicle 3 on the basis of an image photographed by the camera 4 . The control unit 5 calculates the inter-vehicular distance (a reference distance) between the self vehicle 2 and the forward vehicle 3 on the basis of a size of the number plate of the forward vehicle 3 included in an approach image photographed by the camera 4 when approaching to the forward vehicle 3. Further, the control unit 5 calculates the vehicle width (a basic dimension) of the forward vehicle 3 in the approach image. On and after measuring forward vehicle information of the reference distance and the basic dimension, the inter-vehicular distance from the forward vehicle 3 is calculated from the vehicle width of the forward vehicle 3 in the image photographed by the camera 4, using the forward vehicle information.

Description

本発明は、自車両と前方車両との車間距離を計測する車間距離計測装置及び車間距離計測方法に関する。   The present invention relates to an inter-vehicle distance measuring device and an inter-vehicle distance measuring method for measuring an inter-vehicle distance between a host vehicle and a preceding vehicle.

従来、カメラ(撮影手段)で距離計測の対象物を撮影し、撮影した画像に映された対象物の寸法(大きさ)に基づいて撮影位置からその対象物までの距離を計測する方法が知られている(例えば特許文献1参照)。特許文献1の方法では、基準距離Lsのときに画像に映る対象物の画素数(寸法)Fsを予め調べておく。そして、それら基準距離Ls、画素数Fsと、今回の対象物の画素数Fとから、対象物までの距離Lを、L=(Ls×Fs)/Fにより求めている。   2. Description of the Related Art Conventionally, there has been known a method for photographing a distance measurement target with a camera (photographing means) and measuring the distance from the shooting position to the target based on the size (size) of the target shown in the captured image. (See, for example, Patent Document 1). In the method of Patent Document 1, the number of pixels (dimensions) Fs of an object shown in an image at the reference distance Ls is checked in advance. Then, the distance L to the object is obtained from L = (Ls × Fs) / F from the reference distance Ls, the number of pixels Fs, and the number of pixels F of the current object.

この特許文献1の技術を利用することで、自車両と前方車両との車間距離を計測できる。すなわち、自車両に前方車両を撮影するカメラを搭載し、そのカメラが撮影した画像に映る前方車両のナンバープレートの寸法と車間距離との関係を予め調べておく。そして、その関係と今回の画像に映ったナンバープレートの寸法とから、今回の車間距離を求めることができる。また、ナンバープレートは、車種に関係無く定格サイズとなっているため、ナンバープレートの寸法を用いることで、前方車両がどの車種であったとしても車間距離を計測することができる。   By utilizing the technique of this Patent Document 1, the distance between the host vehicle and the preceding vehicle can be measured. That is, a camera that captures the vehicle ahead is mounted on the host vehicle, and the relationship between the dimension of the license plate of the vehicle ahead and the inter-vehicle distance reflected in the image captured by the camera is examined in advance. Then, the current inter-vehicle distance can be obtained from the relationship and the size of the license plate reflected in the current image. Further, since the license plate has a rated size regardless of the vehicle type, the distance between the vehicles can be measured by using the size of the license plate regardless of the vehicle type of the preceding vehicle.

特開2008−14825号公報JP 2008-14825 A

しかしながら、ナンバープレートはそれほど大きくないため、前方車両との距離が遠い場面や夜間の場面などでは、画像からナンバープレートを認識できないことがある。仮に、認識できたとしても車間距離の変化に対する画像でのナンバープレートの寸法(画素数)の変化は非常に小さいので、車間距離の計測精度が著しく劣る。また、カメラ性能にも依存し、実用的な精度を確保するためにはそれなりに高額なカメラが必要となる。なお、ステレオカメラやレーザー光により車間距離を計測する方法も考えられるが、ステレオカメラの方法の場合には複数のカメラを用意する必要があり、レーザー光の方法の場合にはレーザー光による距離計測装置を用意する必要があるので、高価となってしまう。   However, since the license plate is not so large, the license plate may not be recognized from the image in a scene where the distance from the vehicle ahead is long or a night scene. Even if it can be recognized, the change in the size (number of pixels) of the license plate in the image with respect to the change in the inter-vehicle distance is very small, so the measurement accuracy of the inter-vehicle distance is extremely inferior. In addition, depending on the camera performance, an expensive camera is required to secure practical accuracy. In addition, although it is possible to measure the distance between vehicles using a stereo camera or laser light, in the case of the stereo camera method, it is necessary to prepare multiple cameras. In the case of the laser light method, distance measurement using laser light is possible. Since it is necessary to prepare an apparatus, it becomes expensive.

本発明は上記問題に鑑みてなされたものであり、実用的な精度を確保でき、かつ安価に前方車両との車間距離を計測できる車間距離計測装置及び車間距離計測方法を提供することを課題とする。   The present invention has been made in view of the above problems, and it is an object of the present invention to provide an inter-vehicle distance measuring device and an inter-vehicle distance measuring method capable of ensuring practical accuracy and measuring an inter-vehicle distance with a preceding vehicle at low cost. To do.

上記課題を解決するために、本発明の車間距離計測装置は、前方車両(3、31、32)を撮影する撮影手段(4)を備える車両(2)に搭載され、
前記車両が前方車両に接近した時に前記撮影手段が撮影した画像である接近時画像(81)から前方車両のナンバープレート(35)を認識する認識手段(S12)と、
前記認識手段が認識したナンバープレートの画像上の寸法に基づき前記車両と前方車両との車間距離を基準距離として算出する第1の距離算出手段(S14)と、
前記接近時画像上での前方車両の寸法を基準寸法として算出する寸法算出手段(S15)と、
前記基準距離と前記基準寸法との情報である前方車両情報を用いて、前記撮影手段が撮影した画像での前方車両の寸法から前記車両と前方車両との車間距離を算出する第2の距離算出手段(S23、S35)と、
を備えることを特徴とする。
In order to solve the above-mentioned problem, the inter-vehicle distance measuring device of the present invention is mounted on a vehicle (2) including an imaging means (4) for imaging the preceding vehicle (3, 31, 32),
Recognizing means (S12) for recognizing the number plate (35) of the preceding vehicle from the approaching image (81) which is an image taken by the photographing means when the vehicle approaches the preceding vehicle;
First distance calculating means (S14) for calculating, as a reference distance, an inter-vehicle distance between the vehicle and the preceding vehicle based on the size of the license plate recognized by the recognition means;
Dimension calculation means (S15) for calculating the dimension of the preceding vehicle on the approaching image as a reference dimension;
Second distance calculation for calculating an inter-vehicle distance between the vehicle and the preceding vehicle from the dimension of the preceding vehicle in the image captured by the imaging means, using forward vehicle information that is information on the reference distance and the reference dimension. Means (S23, S35);
It is characterized by providing.

また、本発明の車間距離計測方法は、車両が前方車両(3、31、32)に接近した時に前記前方車両を撮影する近接時撮影ステップ(S11)と、
前記近接時撮影ステップで撮影された接近時画像(81)から前記前方車両のナンバープレート(35)を認識する認識ステップ(S12)と、
前記認識ステップで認識されたナンバープレートの画像上の寸法に基づき前記車両と前記前方車両との車間距離を基準距離として算出する第1の距離算出ステップ(S14)と、
前記接近時画像上での前方車両の寸法を基準寸法として算出する寸法算出ステップ(S15)と、
前記基準距離と前記基準寸法との情報である前方車両情報を得た以降は、新たに前記前方車両を撮影し、前記新たに前記前方車両を撮影した画像(82)上での前方車両(312)の寸法と、前記前方車両情報とから前記車両と前記前方車両との車間距離を算出する第2の距離算出ステップ(S23、S35)と、
を含むことを特徴とする。
Further, the inter-vehicle distance measurement method of the present invention includes a proximity photographing step (S11) for photographing the preceding vehicle when the vehicle approaches the preceding vehicle (3, 31, 32),
A recognition step (S12) for recognizing the number plate (35) of the preceding vehicle from the approaching image (81) photographed in the approaching photographing step;
A first distance calculating step (S14) for calculating, as a reference distance, an inter-vehicle distance between the vehicle and the preceding vehicle based on a size on the image of the license plate recognized in the recognition step;
A dimension calculating step (S15) for calculating the dimension of the preceding vehicle on the approaching image as a reference dimension;
After obtaining the forward vehicle information which is information of the reference distance and the reference dimension, the forward vehicle (312) on the image (82) where the forward vehicle is newly photographed and the forward vehicle is newly photographed. ) And a second distance calculating step (S23, S35) for calculating an inter-vehicle distance between the vehicle and the preceding vehicle from the preceding vehicle information,
It is characterized by including.

本発明では、前方車両を撮影する撮影手段を車両に搭載し、その車両が前方車両に接近した時に撮影手段が撮影した画像(接近時画像)に映ったナンバープレートの画像上の寸法から車間距離(基準距離)を算出するとともに、接近時画像上での前方車両の寸法(基準寸法)を算出する。そして、本発明は、それら基準距離、基準寸法の情報(前方車両情報)を用いて、画像での前方車両の寸法から車間距離を算出する。このように、一旦前方車両情報が得られた場合には、以降はナンバープレートよりも大きい前方車両の寸法から車間距離を算出できるので、前方車両との距離が遠い場面や夜間の場面であっても車間距離を実用的な精度で計測することができる。また、接近時以外はナンバープレートを認識する必要がないので、安価な撮影手段を用いることができる。つまり、安価に車間距離を計測できる。また、前方車両の車種が異なると、同一の車間距離であっても画像に映る前方車両の寸法が変わってくるが、本発明では、前方車両への接近時にその前方車両の車種(実際の寸法)が反映された前方車両情報を計測により得ているので、前方車両がどの車種であっても車間距離を計測することができる。   In the present invention, an imaging means for imaging the vehicle ahead is mounted on the vehicle, and the inter-vehicle distance from the dimension on the license plate image shown in the image taken by the imaging means when the vehicle approaches the vehicle ahead (image when approaching) (Reference distance) is calculated, and the dimension (reference dimension) of the preceding vehicle on the approaching image is calculated. And this invention calculates the inter-vehicle distance from the dimension of the front vehicle in an image using the information (front vehicle information) of these reference distances and reference dimensions. Thus, once the forward vehicle information is obtained, the inter-vehicle distance can be calculated from the size of the forward vehicle that is larger than the license plate, so it is a scene that is far from the forward vehicle or a night scene. Can measure the inter-vehicle distance with practical accuracy. Further, since it is not necessary to recognize the license plate except when approaching, an inexpensive photographing means can be used. That is, the inter-vehicle distance can be measured at a low cost. In addition, when the vehicle type of the front vehicle is different, the size of the front vehicle shown in the image changes even at the same inter-vehicle distance. However, in the present invention, the vehicle type of the front vehicle (actual size) when approaching the front vehicle. ) Is obtained by measurement, the inter-vehicle distance can be measured regardless of the type of vehicle in front.

車間距離計測システムの構成を示した図である。It is the figure which showed the structure of the inter-vehicle distance measurement system. 前方車両情報の計測を行う情報計測処理のフローチャートである。It is a flowchart of the information measurement process which measures front vehicle information. 情報計測処理が実行される想定場面であり、自車両が前方車両に接近した場面の図である。It is the assumption scene where an information measurement process is performed, and is a figure of the scene where the own vehicle approached the front vehicle. 図2のS11で取得した画像を例示した図である。It is the figure which illustrated the image acquired by S11 of FIG. サーバに記憶された画像と前方車両情報とのデータベースの概念図である。It is a conceptual diagram of the database of the image memorize | stored in the server and front vehicle information. 計測した前方車両情報を用いて車間距離を計測する第1距離計測処理のフローチャートである。It is a flowchart of the 1st distance measurement process which measures the distance between vehicles using the measured front vehicle information. 第1距離計測処理が実行される想定場面であり、前方車両情報が得られた前方車両の車間距離の追従計測を行う場面の図である。It is an assumption scene where the 1st distance measurement processing is performed, and is a figure of a scene which performs follow-up measurement of the inter-vehicle distance of the front vehicle from which forward vehicle information was obtained. 図6のS21で取得した画像を例示した図である。It is the figure which illustrated the image acquired by S21 of FIG. サーバから取得した前方車両情報を用いて車間距離を計測する第2距離計測処理のフローチャートである。It is a flowchart of the 2nd distance measurement process which measures the distance between vehicles using the front vehicle information acquired from the server. 第2距離計測処理が実行される想定場面であり、自車両と前方車両とが離れていて、その前方車両の前方車両情報が未計測の場面の図である。It is an assumption scene where the 2nd distance measurement processing is performed, and the self-vehicle and the preceding vehicle are separated, and it is a figure of the scene where the preceding vehicle information of the preceding vehicle is not measured. サーバのCPUが実行する処理のフローチャートである。It is a flowchart of the process which CPU of a server performs.

以下、本発明の実施形態を図面を参照しながら説明する。図1は、本発明が適用された車間距離計測システムの構成を示している。図1の車間距離計測システム1は、自車両2とその前方車両3との車間距離を計測するシステムである。その車間距離計測システム1は、自車両2に搭載される車載器10と、外部に設置されたサーバ20とを備えている。   Embodiments of the present invention will be described below with reference to the drawings. FIG. 1 shows the configuration of an inter-vehicle distance measurement system to which the present invention is applied. The inter-vehicle distance measurement system 1 in FIG. 1 is a system that measures the inter-vehicle distance between the host vehicle 2 and its front vehicle 3. The inter-vehicle distance measurement system 1 includes an in-vehicle device 10 mounted on the host vehicle 2 and a server 20 installed outside.

車載器10は、カメラ4と通信部6とそれらと接続した制御部5とを備えている。カメラ4は、例えば自車両2のルームミラーの裏側に取り付けられ、自車両2が走行している間継続して、自車両2の前方を撮影、つまり自車両2の前方を走行している前方車両3を撮影するカメラである。そのカメラ4は、例えば自車両2の走行履歴を記録するドライビングレコーダ用のカメラと兼用することができる。カメラ4で撮影された画像は制御部5に送られる。   The vehicle-mounted device 10 includes a camera 4, a communication unit 6, and a control unit 5 connected thereto. For example, the camera 4 is attached to the back side of the rear mirror of the host vehicle 2 and continuously captures the front of the host vehicle 2 while the host vehicle 2 is traveling, that is, the front traveling in front of the host vehicle 2. This is a camera for photographing the vehicle 3. The camera 4 can also be used as a camera for a driving recorder that records a travel history of the host vehicle 2, for example. An image captured by the camera 4 is sent to the control unit 5.

通信部6は、アンテナ、変調回路、復調回路等から構成され、サーバ20(厳密には、サーバ20の通信部23)との間で各種情報の無線通信(送受信)を行う部分である。すなわち、通信部6は、制御部5から送られてきた情報を変調してサーバ20に送信するとともに、サーバ20からの情報を受信して受信した情報を復調して制御部5に送る。   The communication unit 6 includes an antenna, a modulation circuit, a demodulation circuit, and the like, and is a part that performs wireless communication (transmission / reception) of various information with the server 20 (strictly, the communication unit 23 of the server 20). That is, the communication unit 6 modulates the information sent from the control unit 5 and transmits it to the server 20, receives the information from the server 20, demodulates the received information, and sends it to the control unit 5.

制御部5は、CPU、ROM、RAM等から構成されたコンピュータであり、カメラ4が撮影した画像や、通信部6で受信されたサーバ20からの情報に基づいて、自車両2と前方車両3との車間距離を算出する。詳細には、制御部5は、カメラ4で撮影された画像での前方車両3の車両幅(車両幅ピクセル数)に基づいて車間距離を算出する。車間距離の算出方法の詳細は後述する。また、制御部5は、EEPROM、フラッシュメモリ等のメモリ51を備え、そのメモリ51には後述する前方車両情報が記憶される。また、メモリ51には、カメラ4で撮像された画像でのナンバープレートの寸法(例えば横幅)と車間距離との関係が予め記憶されている。具体的には、自車両2と前方車両3との車間距離が所定の基準距離L0の時にカメラ4で撮像された画像でのナンバープレートの横幅ピクセル数(基準横幅ピクセル数)がD0としたとき、メモリ51には、それら基準距離L0及び基準横幅ピクセル数D0が記憶されている。   The control unit 5 is a computer composed of a CPU, a ROM, a RAM, and the like, and based on the image taken by the camera 4 and information from the server 20 received by the communication unit 6, the host vehicle 2 and the preceding vehicle 3. The distance between the vehicle and the vehicle is calculated. Specifically, the control unit 5 calculates the inter-vehicle distance based on the vehicle width (number of vehicle width pixels) of the front vehicle 3 in the image captured by the camera 4. Details of the calculation method of the inter-vehicle distance will be described later. Further, the control unit 5 includes a memory 51 such as an EEPROM or a flash memory, and the memory 51 stores vehicle information to be described later. In addition, the memory 51 stores in advance a relationship between a license plate dimension (for example, a lateral width) and an inter-vehicle distance in an image captured by the camera 4. Specifically, when the number of horizontal pixels (number of reference horizontal pixels) of the license plate in the image captured by the camera 4 when the inter-vehicle distance between the host vehicle 2 and the preceding vehicle 3 is a predetermined reference distance L0 is D0. The memory 51 stores the reference distance L0 and the reference width pixel number D0.

サーバ20は、記憶部22と通信部23とそれらと接続したCPU21とを備えている。記憶部22は、ハードディスクドライブ等、各種情報を記憶する部分であり、本実施形態では、記憶部22には、車載器10が搭載された各車両2から送られてきた情報(その情報の詳細は後述する)が記憶される。   The server 20 includes a storage unit 22, a communication unit 23, and a CPU 21 connected thereto. The storage unit 22 is a part that stores various types of information such as a hard disk drive. In this embodiment, the storage unit 22 includes information (details of the information) sent from each vehicle 2 on which the vehicle-mounted device 10 is mounted. Is stored).

通信部23は、アンテナ、変調回路、復調回路等から構成され、車載器10を備えた各車両2(厳密には車載器10の通信部6)との間で各種情報の無線通信(送受信)を行う部分である。すなわち、通信部23は、各車両2からの情報を受信して受信した情報を復調してCPU21に送るとともに、CPU21から送られてきた情報を変調して特定の車両2に送信する。なお、車載器10の通信部6とサーバ20の通信部23の間の通信方法は、インターネットを利用した通信や携帯電話回線を利用した通信など、どの通信方法であっても良い。   The communication unit 23 includes an antenna, a modulation circuit, a demodulation circuit, and the like, and wirelessly communicates (transmits and receives) various information with each vehicle 2 (strictly speaking, the communication unit 6 of the on-vehicle device 10) provided with the on-vehicle device 10. It is a part to do. That is, the communication unit 23 receives information from each vehicle 2, demodulates the received information, sends the information to the CPU 21, modulates the information sent from the CPU 21, and transmits the information to the specific vehicle 2. The communication method between the communication unit 6 of the vehicle-mounted device 10 and the communication unit 23 of the server 20 may be any communication method such as communication using the Internet or communication using a mobile phone line.

CPU21は、車両2と前方車両3との車間距離の計測に必要な前方車両情報を記憶部22から読み出して、読み出した前方車両情報を通信部23に送信させるなどの処理を行う。CPU21が行う処理の詳細は後述する。   The CPU 21 performs processing such as reading forward vehicle information necessary for measurement of the inter-vehicle distance between the vehicle 2 and the forward vehicle 3 from the storage unit 22 and causing the communication unit 23 to transmit the read forward vehicle information. Details of processing performed by the CPU 21 will be described later.

次に、自車両2と前方車両3との車間距離の計測方法を説明する。上述したように、制御部5は、カメラ4が撮影した画像での前方車両3の車両幅に基づいて、その前方車両3との車間距離を算出する。そのためには、制御部5は、画像に映った前方車両3の車両幅ピクセル数と車間距離との関係を示した前方車両情報を予め持っておく必要がある。この前方車両情報は前方車両3の車種に応じて変わってくる。つまり、同一の車間距離であっても車種が異なると前方車両の車両幅ピクセル数が変わってくる。そのため、ある特定の車種の前方車両情報を事前に調べておいたとしても、その前方車両情報は、他の車種の前方車両との車間距離計測には用いることができない。   Next, a method for measuring the inter-vehicle distance between the host vehicle 2 and the preceding vehicle 3 will be described. As described above, the control unit 5 calculates the inter-vehicle distance from the forward vehicle 3 based on the vehicle width of the forward vehicle 3 in the image captured by the camera 4. For that purpose, the control part 5 needs to have the front vehicle information which showed the relationship between the vehicle width pixel number of the front vehicle 3 reflected in the image, and the distance between vehicles. This forward vehicle information varies depending on the vehicle type of the forward vehicle 3. That is, even if the distance between the vehicles is the same, the number of vehicle width pixels of the preceding vehicle changes if the vehicle type is different. Therefore, even if the forward vehicle information of a specific vehicle type is checked in advance, the forward vehicle information cannot be used for measuring the inter-vehicle distance with the forward vehicle of another vehicle type.

そこで、制御部5は、車間距離を計測する場面で、実際に前方を走行している前方車両の前方車両情報を計測する情報計測処理を実行する。そして、その情報計測処理で前方車両情報が得られた場合には、以降、その前方車両情報を用いて車両幅から前方車両との車間距離を計測する第1距離計測処理を実行する。以下、それら情報計測処理、第1距離計測処理の詳細を説明する。なお、制御部5は、情報計測処理に先行して、サーバ20から前方車両情報の取得を試みて、前方車両情報を取得できた場合にはその前方車両情報を用いて車間距離を計測する第2距離計測処理を行う。そして、その第2距離計測処理にてサーバ20から前方車両情報を取得できなかった場合に情報計測処理を実行する。ここでは、説明の便宜上、情報計測処理、第1距離計測処理から説明をし、その後に、第2距離計測処理を説明する。   Then, the control part 5 performs the information measurement process which measures the front vehicle information of the front vehicle which is actually driving ahead in the scene which measures the distance between vehicles. Then, when the forward vehicle information is obtained by the information measurement process, the first distance measurement process for measuring the inter-vehicle distance from the vehicle width using the forward vehicle information is performed thereafter. Hereinafter, details of the information measurement process and the first distance measurement process will be described. In addition, prior to the information measurement process, the control unit 5 tries to acquire the forward vehicle information from the server 20 and, when the forward vehicle information can be acquired, the inter-vehicle distance is measured using the forward vehicle information. Two-distance measurement processing is performed. Then, the information measurement process is executed when the vehicle information ahead cannot be acquired from the server 20 in the second distance measurement process. Here, for convenience of explanation, the information measurement process and the first distance measurement process will be described, and then the second distance measurement process will be described.

図2は、情報計測処理のフローチャートを示している。この情報計測処理による前方車両情報の計測は、図3に示すように、画像に映った前方車両のナンバープレートが認識できる程度に自車両2が前方車両31に接近した時に行われることを想定している。より具体的には、認識した前方車両31のナンバープレートが画像上で所定の大きさ以上となったときに自車両2が前方車両31に充分接近したと判断している。   FIG. 2 shows a flowchart of the information measurement process. As shown in FIG. 3, it is assumed that the measurement of the forward vehicle information by this information measurement process is performed when the host vehicle 2 approaches the forward vehicle 31 so that the license plate of the forward vehicle reflected in the image can be recognized. ing. More specifically, it is determined that the host vehicle 2 has sufficiently approached the forward vehicle 31 when the recognized number plate of the forward vehicle 31 becomes a predetermined size or more on the image.

図2の処理を開始すると、先ず、カメラ4が撮影した画像をカメラ4から取得する(S11)。図4は、S11で取得した画像を例示している。図4の画像81には、前方車両31(図3参照)に相当する領域311(以下、単に前方車両311という)が含まれている。   When the processing of FIG. 2 is started, first, an image taken by the camera 4 is acquired from the camera 4 (S11). FIG. 4 illustrates the image acquired in S11. An image 81 in FIG. 4 includes a region 311 (hereinafter simply referred to as a forward vehicle 311) corresponding to the forward vehicle 31 (see FIG. 3).

次に、S11で取得した画像81から、前方車両311のナンバープレート35(図4参照)の認識を試みる(S12)。画像に基づくナンバープレートの認識は公知のどの手法を用いても良いが、例えば、特開2012−63869号公報に記載の手法を用いることができる。すなわち、ナンバープレートのテンプレート画像を予めメモリ51(図1参照)に記憶しておき、S11で取得した画像81の中から、メモリ51に記憶されたテンプレート画像の画像領域35(図4参照)を探索する。   Next, recognition of the license plate 35 (see FIG. 4) of the forward vehicle 311 is attempted from the image 81 acquired in S11 (S12). Any known method may be used for recognition of the license plate based on the image. For example, the method described in Japanese Patent Application Laid-Open No. 2012-63869 can be used. That is, the template image of the license plate is stored in advance in the memory 51 (see FIG. 1), and the image area 35 (see FIG. 4) of the template image stored in the memory 51 is selected from the images 81 acquired in S11. Explore.

次に、画像からナンバープレートを認識できたか否かを判断する(S13)。認識できない場合には(S13:No)、図2のフローチャートの処理を終了する。この場合には、図3に示す場面、つまり前方車両への接近時の場面ではなく、自車両と前方車両との距離が離れていて画像に映ったナンバープレートが小さすぎの場面や、夜間でナンバープレートが不鮮明の場面が想定される。この場合には、次回の図2の処理の実行時に、再度、ナンバープレートの認識の試みが行われる。   Next, it is determined whether the license plate can be recognized from the image (S13). If it cannot be recognized (S13: No), the process of the flowchart of FIG. 2 is terminated. In this case, it is not the scene shown in FIG. 3, that is, the scene when approaching the preceding vehicle, but the scene where the distance between the host vehicle and the preceding vehicle is far and the number plate displayed in the image is too small, or at night It is assumed that the license plate is unclear. In this case, at the next execution of the process of FIG. 2, an attempt is made to recognize the license plate again.

ナンバープレートを認識できた場合には(S13:Yes)、認識したナンバープレートの寸法に基づいて、特許文献1に記載の方法と同様の方法で、前方車両との車間距離を算出する(S14)。具体的には、認識したナンバープレート35からそのナンバープレート35の横幅ピクセル数D(図4参照)を算出する。そして、算出した横幅ピクセル数Dと、メモリ51に記憶された上記基準距離L0と基準横幅ピクセル数D0とに基づいて、以下の式1により、前方車両31との車間距離L1(図3参照)を算出する。なお、下記式1は、特許文献1に記載の式と同じである。
L1=(L0×D0)/D ・・・(式1)
If the license plate can be recognized (S13: Yes), the inter-vehicle distance from the preceding vehicle is calculated by the same method as that described in Patent Document 1 based on the recognized size of the license plate (S14). . Specifically, the number D of horizontal pixels of the license plate 35 (see FIG. 4) is calculated from the recognized license plate 35. Then, based on the calculated width pixel number D, the reference distance L0 and the reference width pixel number D0 stored in the memory 51, an inter-vehicle distance L1 from the preceding vehicle 31 (see FIG. 3) according to the following formula 1. Is calculated. The following formula 1 is the same as the formula described in Patent Document 1.
L1 = (L0 × D0) / D (Expression 1)

次に、S11で取得した画像81での前方車両311の車両幅W1(図4参照)を算出する(S15)。具体的には、S15では、先ず、画像81から前方車両311を認識する。具体的には、例えば、一般的な車両の後姿のテンプレート画像をメモリ51に予め記憶しておき、画像81の中からそのテンプレート画像と良くマッチした領域311(前方車両)を探索する。そして、認識した前方車両311の左端と右端の間のピクセル数W1を、車両幅として算出する。S14で算出した車間距離L1(基準車間距離)とS15で算出した車両幅W1(基準車両幅)とが、図3の前方車両31に対する前方車両情報となる。   Next, the vehicle width W1 (see FIG. 4) of the forward vehicle 311 in the image 81 acquired in S11 is calculated (S15). Specifically, in S15, the forward vehicle 311 is first recognized from the image 81. Specifically, for example, a template image of a rear view of a general vehicle is stored in the memory 51 in advance, and an area 311 (vehicle ahead) that matches the template image is searched from the image 81. Then, the number of pixels W1 between the left end and the right end of the recognized forward vehicle 311 is calculated as the vehicle width. The inter-vehicle distance L1 (reference inter-vehicle distance) calculated in S14 and the vehicle width W1 (reference vehicle width) calculated in S15 are the forward vehicle information for the forward vehicle 31 in FIG.

次に、S11で取得した画像と、S14、S15で算出した前方車両情報(基準車間距離L1、基準車両幅W1)とを、メモリ51に記憶するとともに、通信部6(図1参照)を介してサーバ20に送信する(S16)。画像及び前方車両情報をメモリ51に記憶する際には、それらを関連付けて記憶する。なお、毎回の前方車両情報の計測場面で図2の処理が実行されS16で画像及び前方車両情報がメモリ51に記憶されることにより、メモリ51には、複数種類の画像及び前方車両情報が蓄積されることになる。その後、図2のフローチャートの処理を終了する。   Next, the image acquired in S11 and the forward vehicle information (reference inter-vehicle distance L1 and reference vehicle width W1) calculated in S14 and S15 are stored in the memory 51 and via the communication unit 6 (see FIG. 1). To the server 20 (S16). When the image and the preceding vehicle information are stored in the memory 51, they are stored in association with each other. 2 is executed at each measurement of the preceding vehicle information, and the image and the preceding vehicle information are stored in the memory 51 in S16, whereby a plurality of types of images and the preceding vehicle information are accumulated in the memory 51. Will be. Thereafter, the processing of the flowchart of FIG.

S16でサーバ20に送信された画像と前方車両情報とは、サーバ20の通信部23(図1参照)に受信される。そして、CPU21は、通信部23が受信した画像と前方車両情報とを関連付けて記憶部22に記憶(蓄積)しておく。ここで、図5は、記憶部22に記憶された画像と前方車両情報とのデータベース220の概念図を示している。そのデータベース220には、車載器10を搭載した各車両から送信された各画像Xが格納される画像格納欄221と、各前方車両情報Yが格納される情報格納欄222とが設けられている。画像格納欄221の各欄と、情報格納欄222の各欄とは相互に関連付けられている。各車両からは各種車種の前方車両情報が送られてくるので、データベース220には、車種毎の前方車両情報が蓄積されることになる。   The image and the forward vehicle information transmitted to the server 20 in S16 are received by the communication unit 23 (see FIG. 1) of the server 20. Then, the CPU 21 associates and stores (accumulates) the image received by the communication unit 23 and the preceding vehicle information in the storage unit 22. Here, FIG. 5 shows a conceptual diagram of the database 220 of images and forward vehicle information stored in the storage unit 22. The database 220 is provided with an image storage column 221 for storing each image X transmitted from each vehicle on which the vehicle-mounted device 10 is mounted, and an information storage column 222 for storing each preceding vehicle information Y. . Each column of the image storage column 221 and each column of the information storage column 222 are associated with each other. Since forward vehicle information of various vehicle types is sent from each vehicle, the forward vehicle information for each vehicle type is accumulated in the database 220.

図2の処理により、前方車両情報を計測した以降は、制御部5は、その前方車両情報(計測情報)を用いて、画像での前方車両の車両幅から車間距離を計測する第1距離計測処理に移行する。ここで、図6はその第1距離計測処理のフローチャートを示している。この図6の処理は、図7に示すように、図2の処理で計測した前方車両情報に対応する前方車両31(図3の場面と同じ前方車両31)との車間距離を引き続き計測する場面で実行されることを想定している。なお、図6の処理は、前方車両との車間距離の計測を行う間中、一定間隔おきに繰り返し実行される。   After measuring the forward vehicle information by the process of FIG. 2, the control unit 5 uses the forward vehicle information (measurement information) to measure the inter-vehicle distance from the vehicle width of the forward vehicle in the image. Transition to processing. Here, FIG. 6 shows a flowchart of the first distance measurement processing. In the process of FIG. 6, as shown in FIG. 7, a scene in which the inter-vehicle distance with the forward vehicle 31 (the same forward vehicle 31 as that in FIG. 3) corresponding to the forward vehicle information measured in the process of FIG. 2 is continuously measured. Is assumed to be executed. Note that the process of FIG. 6 is repeatedly executed at regular intervals while measuring the distance between the vehicle and the vehicle ahead.

図6の処理を開始すると、先ず、カメラ4が撮影した画像をカメラ4から取得する(S21)。図8は、S21で取得した画像を例示している。図8の画像82には、前方車両31に相当する領域312(以下、単に前方車両312という)が含まれている。図3の場面に比べて、図7の場面のほうが、自車両2と前方車両31との距離が離れているとすると、図8の前方車両312の寸法は、図4の前方車両311の寸法よりも小さくなり、前方車両312のナンバープレートは認識しづらくなっている。ナンバープレートの寸法のみから車間距離を計測する手法では、図7の場面では、車間距離が計測できないか、計測できたとしても低精度の車間距離が得られてしまう。   When the processing of FIG. 6 is started, first, an image captured by the camera 4 is acquired from the camera 4 (S21). FIG. 8 illustrates the image acquired in S21. The image 82 in FIG. 8 includes a region 312 corresponding to the forward vehicle 31 (hereinafter simply referred to as the forward vehicle 312). If the distance between the host vehicle 2 and the front vehicle 31 is greater in the scene of FIG. 7 than the scene of FIG. 3, the size of the front vehicle 312 in FIG. 8 is the size of the front vehicle 311 in FIG. The license plate of the front vehicle 312 is difficult to recognize. In the method of measuring the inter-vehicle distance from only the dimensions of the license plate, the inter-vehicle distance cannot be measured in the scene of FIG. 7, or even if it can be measured, a low-accuracy inter-vehicle distance is obtained.

次に、先のS16でメモリ51に記憶された最新の前方車両情報をメモリ51から取得する(S22)。なお、先のS16では、メモリ51に画像も蓄積したので、S22では、メモリ51に蓄積された画像の中から、S21で取得した画像82(図8参照)に映っている前方車両312と同一形状(同一車種)の前方車両が映っている画像を検索する(パターンマッチングをする)。そして、検索した画像に関連付けて記憶された前方車両情報をメモリ51から取得しても良い。これによって、図7の前方車両31との車間距離の追従計測中に、自車両2とその前方車両31の間に他車両が割り込んできた場合であっても、その他車両の割り込みが解除された後は、図2により前方車両情報を再計測しなくても、前方車両31との車間距離の計測を再開することができる。なお、S22において、メモリ51に記憶された画像とのパターンマッチングを行わない場合、つまり、単に最新の前方車両情報をメモリ51から読み出す場合には、先のS16では、前方車両情報のみをメモリ51に記憶するようにしても良い。   Next, the latest forward vehicle information stored in the memory 51 in the previous S16 is acquired from the memory 51 (S22). Since the image is also stored in the memory 51 in the previous S16, in S22, it is the same as the preceding vehicle 312 shown in the image 82 (see FIG. 8) acquired in S21 from the images stored in the memory 51. Search for an image in which the vehicle ahead of the shape (same model) is shown (pattern matching is performed). Then, the forward vehicle information stored in association with the searched image may be acquired from the memory 51. As a result, during the follow-up measurement of the inter-vehicle distance with the preceding vehicle 31 in FIG. 7, even if another vehicle has interrupted between the host vehicle 2 and the preceding vehicle 31, the interruption of the other vehicle is released. Thereafter, the measurement of the inter-vehicle distance from the forward vehicle 31 can be resumed without re-measuring the forward vehicle information according to FIG. In S22, when pattern matching with the image stored in the memory 51 is not performed, that is, when the latest front vehicle information is simply read from the memory 51, only the front vehicle information is stored in the memory 51 in the previous S16. You may make it memorize.

次に、S22で取得した前方車両情報を用いて、S21で取得した画像82での前方車両312の車両幅W2(図8参照)からその前方車両312(図7の前方車両31)との車間距離を算出する(S23)。具体的には、S23では、先ず、画像82から前方車両312を認識する。その認識方法は、S15と同様に、例えば、一般的な車両のテンプレート画像をメモリ51に記憶しておき、そのテンプレート画像とのパターンマッチングにより画像82から前方車両312を探索すれば良い。次に、認識した前方車両312の左端と右端の間のピクセル数W2を、車両幅として算出する。そして、算出した車両幅W2(ピクセル数)と、S22で取得した前方車両情報(基準車間距離L1、基準車両幅W1)とに基づいて、以下の式2により、前方車両312との車間距離Lを算出する。なお、下記式2は、特許文献1に記載の式と同じである。
L=(L1×W1)/W2 ・・・(式2)
Next, using the forward vehicle information acquired in S22, the distance between the vehicle width W2 of the forward vehicle 312 (see FIG. 8) and the forward vehicle 312 (the forward vehicle 31 in FIG. 7) in the image 82 acquired in S21. The distance is calculated (S23). Specifically, in S23, the forward vehicle 312 is first recognized from the image 82. As the recognition method, as in S15, for example, a general vehicle template image may be stored in the memory 51, and the forward vehicle 312 may be searched from the image 82 by pattern matching with the template image. Next, the pixel number W2 between the left end and the right end of the recognized forward vehicle 312 is calculated as the vehicle width. Then, based on the calculated vehicle width W2 (number of pixels) and the forward vehicle information (reference inter-vehicle distance L1, reference vehicle width W1) acquired in S22, the inter-vehicle distance L with the forward vehicle 312 is calculated by the following equation 2. Is calculated. In addition, the following formula 2 is the same as the formula described in Patent Document 1.
L = (L1 × W1) / W2 (Expression 2)

その後、図6のフローチャートの処理を終了する。制御部5は、車間距離Lを計測した場合には、例えばその車間距離Lが閾値未満の場合にはドライバーに警告を発する処理を行ったり、車間距離Lが所定の車間距離となるように自車両2の駆動系(エンジン)を制御したりする。   Thereafter, the process of the flowchart of FIG. When the inter-vehicle distance L is measured, for example, when the inter-vehicle distance L is less than the threshold value, the control unit 5 performs a process of issuing a warning to the driver or automatically sets the inter-vehicle distance L to be a predetermined inter-vehicle distance. The drive system (engine) of the vehicle 2 is controlled.

次に、上記第2距離計測処理、つまり、サーバ20から前方車両情報を取得して、その取得した前方車両情報を用いて車間距離を計測する処理の詳細を説明する。図9は、その第2距離計測処理のフローチャートを示している。この図9の処理は、図10に示すように、自車両2と前方車両32とが離れていて、その前方車両32の前方車両情報が未計測の場面で実行されることを想定している。また、図11は、図9の処理に対応して、サーバ20のCPU21が実行する処理のフローチャートを示している。   Next, details of the second distance measurement process, that is, the process of acquiring the forward vehicle information from the server 20 and measuring the inter-vehicle distance using the acquired forward vehicle information will be described. FIG. 9 shows a flowchart of the second distance measurement process. The process of FIG. 9 assumes that the host vehicle 2 and the forward vehicle 32 are separated as shown in FIG. 10 and that the forward vehicle information of the forward vehicle 32 is executed in an unmeasured scene. . FIG. 11 shows a flowchart of processing executed by the CPU 21 of the server 20 corresponding to the processing of FIG.

図9の処理を開始すると、先ず、カメラ4が撮影した画像をカメラ4から取得する(S31)。このS31で取得した画像には、図10の前方車両32が映っている。次に、S31で取得した画像を通信部6(図1参照)を介してサーバ20に送信する(S32)。このとき、どの車両2から送信された画像であるのかを特定できるように、車両2を特定する情報を画像に付してサーバ20に送信する。   When the processing of FIG. 9 is started, first, an image taken by the camera 4 is acquired from the camera 4 (S31). The forward vehicle 32 of FIG. 10 is reflected in the image acquired in S31. Next, the image acquired in S31 is transmitted to the server 20 via the communication unit 6 (see FIG. 1) (S32). At this time, information for identifying the vehicle 2 is attached to the image and transmitted to the server 20 so that it can be identified from which vehicle 2 the image is transmitted.

S32で送信された画像はサーバ20の通信部23(図1参照)に受信されて、CPU21は、その通信部23で受信された画像を取得する(図11のS41)。次に、CPU21は、S41で取得した画像と、記憶部22に記憶されたデータベース220(図5参照)に格納された各画像Xとのパターンマッチング(照合)を行う(S42)。すなわち、CPU21は、データベース220に格納された各画像Xの中から、S41で取得した画像に映っている前方車両32(図10参照)と同一形状(同一車種)、言い換えると同一輪郭の前方車両が映っている画像を検索する。なお、S42では、画像Xに映っている前方亜車両の輪郭の大きさと、S41で取得した画像に映っている前方車両の輪郭の大きさとの差異は問わない。   The image transmitted in S32 is received by the communication unit 23 (see FIG. 1) of the server 20, and the CPU 21 acquires the image received by the communication unit 23 (S41 in FIG. 11). Next, the CPU 21 performs pattern matching between the image acquired in S41 and each image X stored in the database 220 (see FIG. 5) stored in the storage unit 22 (S42). That is, the CPU 21 has the same shape (same vehicle type) as that of the preceding vehicle 32 (see FIG. 10) reflected in the image acquired in S41 from among the images X stored in the database 220, in other words, the preceding vehicle having the same contour. Search for images with. In S42, there is no difference between the size of the contour of the front sub-vehicle shown in the image X and the size of the contour of the front vehicle shown in the image acquired in S41.

S42によるパターンマッチングにより、データベース220の中にS41の画像とマッチングできた画像がある場合には(S43:Yes)、その画像に関連付けてデータベース220に格納されている前方車両情報を、通信部23を介して、S41で取得した画像を送信してきた車両2(図10の車両2)に送信する(S44)。例えば、S42により、図5の画像X2とマッチングできた場合には、その画像X2に関連付けて記憶された前方車両情報Y2、つまり、画像X2に映っている前方車両の前方車両情報Y2を、車両2に送信する。このとき、S41で取得した画像には送信元の車両2を特定する情報(車載器10のIDなど)が付されているので、その情報で特定される車両2に前方車両情報を送信する。その後、図11のフローチャートの処理を終了する。   When there is an image that can be matched with the image of S41 in the database 220 by the pattern matching in S42 (S43: Yes), the vehicle information stored in the database 220 in association with the image is stored in the communication unit 23. Then, the image acquired in S41 is transmitted to the vehicle 2 (vehicle 2 in FIG. 10) (S44). For example, if the image X2 in FIG. 5 can be matched in S42, the vehicle information Y2 stored in association with the image X2, that is, the vehicle information Y2 of the vehicle ahead in the image X2, is stored in the vehicle. 2 to send. At this time, since the information (such as the ID of the vehicle-mounted device 10) that identifies the transmission source vehicle 2 is attached to the image acquired in S41, the forward vehicle information is transmitted to the vehicle 2 that is identified by the information. Then, the process of the flowchart of FIG. 11 is complete | finished.

一方、マッチングできた画像が無い場合には(S43:No)、そのまま図11のフローチャートの処理を終了する。   On the other hand, if there is no matching image (S43: No), the processing of the flowchart of FIG.

図9の説明に戻り、制御部5は、S32で画像をサーバ20に送信した後、次に、サーバ20からの前方車両情報(図11のS44で送信された前方車両情報)を通信部6を介して取得する(S33)。制御部5は、S33で取得した前方車両情報をメモリ51に記憶しておく。なお、図11のS44の処理が行われなかった場合(S43:No)には、S33では、前方車両情報を取得できないことになる。   Returning to the description of FIG. 9, the control unit 5 transmits the image to the server 20 in S <b> 32, and then transmits the forward vehicle information from the server 20 (forward vehicle information transmitted in S <b> 44 of FIG. 11) to the communication unit 6. (S33). The control unit 5 stores the forward vehicle information acquired in S33 in the memory 51. In addition, when the process of S44 of FIG. 11 is not performed (S43: No), it cannot acquire forward vehicle information in S33.

次に、サーバ20からの前方車両情報を取得できたか否かを判断して(S34)、取得できた場合には(S34:Yes)、取得した前方車両情報を用いて、図6のS23と同様の方法で、前方車両32(図10参照)との車間距離を算出する(S35)。すなわち、S31で取得した画像での前方車両の車両幅と、S33で取得した前方車両情報(基準車間距離、基準車両幅)とを上記式2に代入することで、車間距離を算出する。これにより、図10の前方車両32に接近してその前方車両32の前方車両情報を計測しなくても、その前方車両32との車間距離を得ることができる。その後、図9のフローチャートの処理を終了する。   Next, it is determined whether or not the front vehicle information from the server 20 has been acquired (S34). If it can be acquired (S34: Yes), the acquired front vehicle information is used to obtain S23 in FIG. The inter-vehicle distance from the preceding vehicle 32 (see FIG. 10) is calculated by the same method (S35). That is, the inter-vehicle distance is calculated by substituting the vehicle width of the preceding vehicle in the image acquired in S31 and the forward vehicle information (reference inter-vehicle distance, reference vehicle width) acquired in S33 into the above equation 2. Thereby, even if it approaches the front vehicle 32 of FIG. 10 and the front vehicle information of the front vehicle 32 is not measured, the inter-vehicle distance with the front vehicle 32 can be obtained. Thereafter, the processing of the flowchart of FIG. 9 ends.

なお、S33で前方車両情報を一旦取得した場合には、以降は、サーバ20との通信(S32、S33の処理)を行う必要が無いので、今回の図9の処理が終了した後は、次回以降は図6の処理により、前方車両32との車間距離の計測を引き続き行う。   If the forward vehicle information is once acquired in S33, communication with the server 20 (the processing of S32 and S33) does not need to be performed after that, and after the processing of FIG. Thereafter, the inter-vehicle distance from the preceding vehicle 32 is continuously measured by the process of FIG.

一方、サーバ20からの前方車両情報を取得できなかった場合には(S34:No)、そのまま図9のフローチャートの処理を終了する。この場合には、この図9の処理では、図10の前方車両32との車間距離の計測が行われないことになる。この場合には、先に説明した図2の処理に移行して、自車両2が前方車両32に接近した時に、その前方車両32に対する前方車両情報の計測を行う。その後、図6の処理により、計測した前方車両情報を用いて前方車両32との車間距離の計測を行う。   On the other hand, when the forward vehicle information from the server 20 cannot be acquired (S34: No), the process of the flowchart of FIG. In this case, in the process of FIG. 9, the measurement of the inter-vehicle distance from the forward vehicle 32 of FIG. 10 is not performed. In this case, the process proceeds to the process shown in FIG. 2 described above, and when the host vehicle 2 approaches the front vehicle 32, the front vehicle information for the front vehicle 32 is measured. Thereafter, by the process of FIG. 6, the inter-vehicle distance from the forward vehicle 32 is measured using the measured forward vehicle information.

以上説明したように、本実施形態によれば、ナンバープレートより大きい車両幅から車間距離を計測しているので、夜間や前方車両との距離が遠い場面でも実用的な精度の車間距離を得ることができる。車両幅は、車両の他の寸法(車高など)に比べて大きいので、その車両幅を用いることは車間距離の計測に好適である。また、ステレオカメラのように複数のカメラを設ける必要がなく、前方車両への接近時以外は前方車両を認識できる程度の画素数のカメラがあれば良いので、安価に車間距離を計測できる。   As described above, according to the present embodiment, since the inter-vehicle distance is measured from a vehicle width larger than the license plate, a practically accurate inter-vehicle distance can be obtained even at night or when the distance from the preceding vehicle is long. Can do. Since the vehicle width is larger than other dimensions (vehicle height, etc.) of the vehicle, using the vehicle width is suitable for measuring the inter-vehicle distance. Further, it is not necessary to provide a plurality of cameras as in the case of a stereo camera, and it is only necessary to have a camera with a number of pixels that can recognize the preceding vehicle except when approaching the preceding vehicle, so the inter-vehicle distance can be measured at low cost.

また、車間距離の計測場面で前方車両情報を計測し、又はサーバから取得しているので、車間距離の計測対象となる前方車両がどの車種であっても、その前方車両との車間距離を計測できる。また、各車両が計測した前方車両情報をサーバに送信し、それを蓄積することで、サーバに、車種毎の前方車両情報のデータベースを構成できる。これにより、サーバ側で前方車両情報を用意しなくても良く、将来、新たな車種が市場に投入された場合にも対応することができる。   In addition, because the vehicle information is measured or acquired from the server when measuring the inter-vehicle distance, the inter-vehicle distance to the preceding vehicle is measured regardless of the type of the front vehicle that is subject to measurement of the inter-vehicle distance. it can. Moreover, the database of the front vehicle information for every vehicle model can be comprised in a server by transmitting the front vehicle information which each vehicle measured to the server, and accumulating it. Thereby, it is not necessary to prepare the forward vehicle information on the server side, and it is possible to cope with a case where a new vehicle type is put on the market in the future.

なお、本発明は上記実施形態に限定されるものではなく、特許請求の範囲の記載を逸脱しない限度で種々の変更が可能である。例えば、上記実施形態では、前方車両の画像での車両幅を用いて車間距離を計測していたが、車高など、前方車両の他の寸法を用いて車間距離を計測しても良い。例えば車高を用いる場合には、図2のS15や図6のS23や図9のS35では、画像での前方車両の車高(ピクセル数)を算出することになる。   In addition, this invention is not limited to the said embodiment, A various change is possible to the limit which does not deviate from description of a claim. For example, in the above embodiment, the inter-vehicle distance is measured using the vehicle width in the image of the front vehicle, but the inter-vehicle distance may be measured using other dimensions of the front vehicle such as a vehicle height. For example, when the vehicle height is used, the vehicle height (number of pixels) of the preceding vehicle in the image is calculated in S15 of FIG. 2, S23 of FIG. 6, and S35 of FIG.

また、上記実施形態では、車載器10に通信部6が設けられている例を示したが、その通信部6が設けられてないとしても良い。この場合には、サーバ20からの前方車両情報は取得できないが、図2、図6の処理により、車間距離を計測することができる。また、上記実施形態では、各車両が計測した前方車両情報をサーバに送信し、それを蓄積することで、サーバに、車種毎の前方車両情報のデータベースを構成していたが、サーバ側で車種毎の前方車両情報を用意しても良い。この場合には、図2のS16では、サーバに前方車両情報を送信する必要がなくなる。   Moreover, although the example which the communication part 6 was provided in the onboard equipment 10 was shown in the said embodiment, the communication part 6 may not be provided. In this case, the forward vehicle information from the server 20 cannot be acquired, but the inter-vehicle distance can be measured by the processes of FIGS. Moreover, in the said embodiment, the front vehicle information which each vehicle measured was transmitted to the server, and it was accumulate | stored, and the database of the forward vehicle information for every vehicle model was comprised in the server. You may prepare the vehicle information for every front. In this case, it is not necessary to transmit the forward vehicle information to the server in S16 of FIG.

また、上記実施形態では、認識した前方車両31のナンバープレートが画像上で所定の大きさ以上となったときに自車両2が前方車両31に充分接近したと判断したが、本発明はこれに限定されるものではなく、超音波センサ、赤外線センサ、レーザーレーダなどのその他の距離計測手段を用いて自車両2が前方車両31に充分接近したと判断するようにしても良い。   Moreover, in the said embodiment, when the recognized license plate of the front vehicle 31 became more than predetermined magnitude | size on an image, it judged that the own vehicle 2 approached the front vehicle 31 enough, but this invention does this. However, the present invention is not limited, and it may be determined that the host vehicle 2 has sufficiently approached the preceding vehicle 31 using other distance measuring means such as an ultrasonic sensor, an infrared sensor, or a laser radar.

1 車間距離計測システム
2 自車両
3、31、32 前方車両
4 カメラ
5 制御部
6 通信部
10 車載器
20 サーバ
DESCRIPTION OF SYMBOLS 1 Inter-vehicle distance measurement system 2 Own vehicle 3, 31, 32 Vehicle ahead 4 Camera 5 Control part 6 Communication part 10 Onboard equipment 20 Server

Claims (8)

前方車両(3、31、32)を撮影する撮影手段(4)を備える車両(2)に搭載され、
前記車両が前方車両に接近した時に前記撮影手段が撮影した画像である接近時画像(81)から前方車両のナンバープレート(35)を認識する認識手段(S12)と、
前記認識手段が認識したナンバープレートの画像上の寸法に基づき前記車両と前方車両との車間距離を基準距離として算出する第1の距離算出手段(S14)と、
前記接近時画像上での前方車両の寸法を基準寸法として算出する寸法算出手段(S15)と、
前記基準距離と前記基準寸法との情報である前方車両情報を用いて、前記撮影手段が撮影した画像での前方車両の寸法から前記車両と前方車両との車間距離を算出する第2の距離算出手段(S23、S35)と、
を備えることを特徴とする車間距離計測装置(10)。
It is mounted on a vehicle (2) provided with photographing means (4) for photographing the preceding vehicle (3, 31, 32),
Recognizing means (S12) for recognizing the number plate (35) of the preceding vehicle from the approaching image (81) which is an image taken by the photographing means when the vehicle approaches the preceding vehicle;
First distance calculating means (S14) for calculating, as a reference distance, an inter-vehicle distance between the vehicle and the preceding vehicle based on the size of the license plate recognized by the recognition means;
Dimension calculation means (S15) for calculating the dimension of the preceding vehicle on the approaching image as a reference dimension;
Second distance calculation for calculating an inter-vehicle distance between the vehicle and the preceding vehicle from the dimension of the preceding vehicle in the image captured by the imaging means, using forward vehicle information that is information on the reference distance and the reference dimension. Means (S23, S35);
An inter-vehicle distance measuring device (10) comprising:
前記撮影手段が撮影した画像に映っている前方車両(32)の前記前方車両情報を、車種毎に前記前方車両情報を記憶したサーバ(20)から取得する取得手段(S33、6)を備え、
前記第2の距離算出手段(S35)は、自車両の前記車間距離計測装置により計測された前記前方車両情報である計測情報が無い場合には、前記取得手段が取得した前記前方車両情報を用いて前方車両との車間距離を算出することを特徴とする請求項1に記載の車間距離計測装置。
Acquisition means (S33, 6) for acquiring the forward vehicle information of the forward vehicle (32) reflected in the image taken by the photographing means from a server (20) storing the forward vehicle information for each vehicle type;
The second distance calculating means (S35) uses the preceding vehicle information acquired by the acquiring means when there is no measurement information that is the preceding vehicle information measured by the inter-vehicle distance measuring device of the host vehicle. The inter-vehicle distance measuring device according to claim 1, wherein the inter-vehicle distance from the preceding vehicle is calculated.
前記撮影手段が撮影した画像とその画像に映っている前方車両の前記計測情報を前記サーバに送信する第1送信手段(S16、6)を備え、
前記サーバは、前記車間距離計測装置を搭載した各車両の前記第1送信手段から送信された前方車両の画像と計測情報としての前記前方車両情報とを関連付けて記憶する記憶手段(22)を備えることを特徴とする請求項2に記載の車間距離計測装置。
First transmission means (S16, 6) for transmitting the image taken by the photographing means and the measurement information of the preceding vehicle reflected in the image to the server,
The server includes storage means (22) for storing an image of a preceding vehicle transmitted from the first transmission means of each vehicle equipped with the inter-vehicle distance measuring device and the preceding vehicle information as measurement information in association with each other. The inter-vehicle distance measuring device according to claim 2.
前記計測情報が無い前方車両(32)との車間距離の計測場面にて前記撮影手段が撮影した画像を前記サーバに送信する第2送信手段(S32、6)を備え、
前記取得手段は、前記サーバから送信された、前記第2送信手段が送信した画像に映っている前方車両の前記前方車両情報を受信し、
前記サーバは、
前記記憶手段に記憶された画像の中から、前記第2送信手段から送信された画像である照合画像に映っている前方車両と同一形状の前方車両が映っている画像を検索する検索手段(S42)と、
前記検索手段が検索した画像に関連付けて前記記憶手段に記憶された前記前方車両情報を、前記照合画像を送信してきた車両に送信する送信手段(S44、23)とを備えることを特徴とする請求項3に記載の車間距離計測装置。
A second transmission unit (S32, 6) for transmitting an image captured by the imaging unit to the server in a measurement scene of an inter-vehicle distance with the preceding vehicle (32) without the measurement information;
The acquisition means receives the forward vehicle information of the forward vehicle shown in the image transmitted from the server and transmitted by the second transmission means,
The server
Retrieval means (S42) for retrieving an image in which the preceding vehicle having the same shape as the preceding vehicle shown in the collation image, which is the image transmitted from the second transmitting means, is searched from the images stored in the storage means. )When,
Transmission means (S44, 23) for transmitting the forward vehicle information stored in the storage means in association with the image searched by the search means to a vehicle that has transmitted the verification image. Item 4. The inter-vehicle distance measuring device according to Item 3.
前方車両の前記寸法は車両幅であることを特徴とする請求項1〜4のいずれか1項に記載の車間距離計測装置。   The inter-vehicle distance measuring device according to any one of claims 1 to 4, wherein the dimension of the preceding vehicle is a vehicle width. 車両が前方車両(3、31、32)に接近した時に前記前方車両を撮影する近接時撮影ステップ(S11)と、
前記近接時撮影ステップで撮影された接近時画像(81)から前記前方車両のナンバープレート(35)を認識する認識ステップ(S12)と、
前記認識ステップで認識されたナンバープレートの画像上の寸法に基づき前記車両と前記前方車両との車間距離を基準距離として算出する第1の距離算出ステップ(S14)と、
前記接近時画像上での前方車両の寸法を基準寸法として算出する寸法算出ステップ(S15)と、
前記基準距離と前記基準寸法との情報である前方車両情報を得た以降は、新たに前記前方車両を撮影し、前記新たに前記前方車両を撮影した画像(82)上での前方車両(312)の寸法と、前記前方車両情報とから前記車両と前記前方車両との車間距離を算出する第2の距離算出ステップ(S23、S35)と、
を含むことを特徴とする車間距離計測方法。
A proximity photographing step (S11) for photographing the preceding vehicle when the vehicle approaches the preceding vehicle (3, 31, 32);
A recognition step (S12) for recognizing the number plate (35) of the preceding vehicle from the approaching image (81) photographed in the approaching photographing step;
A first distance calculating step (S14) for calculating, as a reference distance, an inter-vehicle distance between the vehicle and the preceding vehicle based on a size on the image of the license plate recognized in the recognition step;
A dimension calculating step (S15) for calculating the dimension of the preceding vehicle on the approaching image as a reference dimension;
After obtaining the forward vehicle information which is information of the reference distance and the reference dimension, the forward vehicle (312) on the image (82) where the forward vehicle is newly photographed and the forward vehicle is newly photographed. ) And a second distance calculating step (S23, S35) for calculating an inter-vehicle distance between the vehicle and the preceding vehicle from the preceding vehicle information,
The inter-vehicle distance measuring method characterized by including.
前記寸法算出ステップでは、前記接近時画像での前方車両の車両幅を前記基準寸法として算出し、
前記第2の距離算出ステップでは、前記新たに前記前方車両を撮影した画像上での前方車両の車両幅と、前記前方車両情報とから、前記車両と前記前方車両との車間距離を算出することを特徴とする請求項6に記載の車間距離計測方法。
In the dimension calculation step, the vehicle width of the front vehicle in the approaching image is calculated as the reference dimension,
In the second distance calculating step, an inter-vehicle distance between the vehicle and the preceding vehicle is calculated from a vehicle width of the preceding vehicle on the newly captured image of the preceding vehicle and the preceding vehicle information. The inter-vehicle distance measuring method according to claim 6.
各車両が撮影した画像とその画像に映っている前方車両の前記前方車両情報とを各車両から収集して、収集した画像と前方車両情報とを関連付けてサーバ(20)に蓄積する収集ステップ(S16)と、
前記収集ステップで収集された各画像の中から、車間距離の計測を望む対象車両が撮影した画像に映っている前方車両である対象前方車両と同一形状の前方車両が映っている画像を検索する検索ステップ(S42)とを含み、
前記第2の距離算出ステップ(S35)では、前記検索ステップで検索された画像に関連付けて前記サーバに蓄積された前記前方車両情報を用いて、前記対象車両と前記対象前方車両との車間距離を算出することを特徴とする請求項6又は7に記載の車間距離計測方法。
A collecting step (collecting an image taken by each vehicle and the preceding vehicle information of the preceding vehicle reflected in the image from each vehicle, and storing the collected image and the preceding vehicle information in association with each other in the server (20)). S16)
From each image collected in the collecting step, a search is made for an image showing a front vehicle having the same shape as the target front vehicle, which is the front vehicle shown in the image taken by the target vehicle for which the distance between vehicles is desired to be measured. A search step (S42),
In the second distance calculating step (S35), an inter-vehicle distance between the target vehicle and the target forward vehicle is calculated using the forward vehicle information stored in the server in association with the image searched in the search step. The inter-vehicle distance measuring method according to claim 6, wherein the inter-vehicle distance is calculated.
JP2013056728A 2013-03-19 2013-03-19 Inter-vehicle distance measuring device and inter-vehicle distance measuring method Expired - Fee Related JP6048246B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013056728A JP6048246B2 (en) 2013-03-19 2013-03-19 Inter-vehicle distance measuring device and inter-vehicle distance measuring method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013056728A JP6048246B2 (en) 2013-03-19 2013-03-19 Inter-vehicle distance measuring device and inter-vehicle distance measuring method

Publications (2)

Publication Number Publication Date
JP2014182007A true JP2014182007A (en) 2014-09-29
JP6048246B2 JP6048246B2 (en) 2016-12-21

Family

ID=51700857

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013056728A Expired - Fee Related JP6048246B2 (en) 2013-03-19 2013-03-19 Inter-vehicle distance measuring device and inter-vehicle distance measuring method

Country Status (1)

Country Link
JP (1) JP6048246B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108957460A (en) * 2018-06-27 2018-12-07 努比亚技术有限公司 Detection method, equipment and the computer readable storage medium of vehicle distances
WO2019043878A1 (en) * 2017-08-31 2019-03-07 株式会社オプティム Image analysis distance information provision system, method, and program
WO2019043876A1 (en) * 2017-08-31 2019-03-07 株式会社オプティム Image analysis distance information provision system, method, and program
WO2019131121A1 (en) * 2017-12-26 2019-07-04 ソニー株式会社 Signal processing device and method, and program
JP2020058003A (en) * 2018-10-04 2020-04-09 株式会社Ihiエアロスペース Remote control device for mobile
CN111746545A (en) * 2020-06-29 2020-10-09 中国联合网络通信集团有限公司 Vehicle distance detection method and device and vehicle distance reminding method and device
JP2021033521A (en) * 2019-08-21 2021-03-01 富士通株式会社 Information processing device, automobile control method, automobile control program, and vehicle

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777421A (en) * 1993-09-08 1995-03-20 Hitachi Ltd Distance measuring device for automobile and automobile having the same on-board
JP2005300315A (en) * 2004-04-09 2005-10-27 Denso Corp Object detection device
JP2007072987A (en) * 2005-09-09 2007-03-22 Denso Corp Environment recognition apparatus
JP2009217601A (en) * 2008-03-11 2009-09-24 Zenrin Datacom Co Ltd System and method for parking lot evaluation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0777421A (en) * 1993-09-08 1995-03-20 Hitachi Ltd Distance measuring device for automobile and automobile having the same on-board
JP2005300315A (en) * 2004-04-09 2005-10-27 Denso Corp Object detection device
JP2007072987A (en) * 2005-09-09 2007-03-22 Denso Corp Environment recognition apparatus
JP2009217601A (en) * 2008-03-11 2009-09-24 Zenrin Datacom Co Ltd System and method for parking lot evaluation

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019043878A1 (en) * 2017-08-31 2019-03-07 株式会社オプティム Image analysis distance information provision system, method, and program
WO2019043876A1 (en) * 2017-08-31 2019-03-07 株式会社オプティム Image analysis distance information provision system, method, and program
JPWO2019043878A1 (en) * 2017-08-31 2020-05-28 株式会社オプティム Image analysis distance information providing system, method and program
US11250582B2 (en) 2017-08-31 2022-02-15 Optim Corporation Image analysis distance information provision system, method, and program
WO2019131121A1 (en) * 2017-12-26 2019-07-04 ソニー株式会社 Signal processing device and method, and program
CN111566710A (en) * 2017-12-26 2020-08-21 索尼公司 Signal processing device and method, and program
US11511735B2 (en) 2017-12-26 2022-11-29 Sony Corporation Signal processing apparatus and signal processing method
CN108957460A (en) * 2018-06-27 2018-12-07 努比亚技术有限公司 Detection method, equipment and the computer readable storage medium of vehicle distances
JP2020058003A (en) * 2018-10-04 2020-04-09 株式会社Ihiエアロスペース Remote control device for mobile
JP2021033521A (en) * 2019-08-21 2021-03-01 富士通株式会社 Information processing device, automobile control method, automobile control program, and vehicle
JP7318415B2 (en) 2019-08-21 2023-08-01 富士通株式会社 Information processing device, vehicle control method, vehicle control program, and vehicle
CN111746545A (en) * 2020-06-29 2020-10-09 中国联合网络通信集团有限公司 Vehicle distance detection method and device and vehicle distance reminding method and device

Also Published As

Publication number Publication date
JP6048246B2 (en) 2016-12-21

Similar Documents

Publication Publication Date Title
JP6048246B2 (en) Inter-vehicle distance measuring device and inter-vehicle distance measuring method
KR20190084916A (en) Apparatus for informing parking position and method thereof
JP2020061079A (en) Traffic violation vehicle identification system, server, and vehicle control program
KR102507905B1 (en) Real-time Port Hall Detection Device Using Police Cars
JP2015230579A (en) Accident image acquisition system
JP6939362B2 (en) Vehicle search system, vehicle search method, and vehicles and programs used for it.
JP5932850B2 (en) Information processing system, information processing method, information processing apparatus, information processing terminal, information processing program, and recording medium
CN110879845B (en) Method, non-transitory computer readable medium and data structure for generating log data
JP2018189457A (en) Information processing device
US9876980B2 (en) System for saving vehicle exterior image, apparatus for saving vehicle exterior image, and inter-vehicle communication apparatus
KR101885520B1 (en) Apparatus for collecting vehicles information and method thereof
CN101408423A (en) Method for detecting angle of image viewfinding device and vehicle collision alarming system thereof
WO2022147785A1 (en) Autonomous driving scenario identifying method and apparatus
JP7103201B2 (en) Information processing systems, programs, and information processing methods
JP2014157489A (en) Vehicle platoon controller
JP7060334B2 (en) Training data collection device, training data collection system and training data collection method
JP7254000B2 (en) Image delivery device and method, and image delivery system
JP7429246B2 (en) Methods and systems for identifying objects
WO2021056185A1 (en) Systems and methods for partially updating high-definition map based on sensor data matching
JP2020067818A (en) Image selection device and image selection method
KR20150031942A (en) System for collecting vehicle information and method thereof
US20230202510A1 (en) Apparatus for acquiring autonomous driving learning data and method thereof
CN112802340B (en) Vehicle driving data processing method and system and related device
JP2014016706A (en) Information acquisition system and information acquisition method
KR101294285B1 (en) System and method for collecting vehicle information and adaptive picture based on road position

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150520

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160329

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160520

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20161025

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20161107

R151 Written notification of patent or utility model registration

Ref document number: 6048246

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

LAPS Cancellation because of no payment of annual fees