JP2007010335A - Vehicle position detecting device and system - Google Patents
Vehicle position detecting device and system Download PDFInfo
- Publication number
- JP2007010335A JP2007010335A JP2005188077A JP2005188077A JP2007010335A JP 2007010335 A JP2007010335 A JP 2007010335A JP 2005188077 A JP2005188077 A JP 2005188077A JP 2005188077 A JP2005188077 A JP 2005188077A JP 2007010335 A JP2007010335 A JP 2007010335A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- unit
- image
- index
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
- 238000001514 detection method Methods 0.000 claims abstract description 201
- 238000003384 imaging method Methods 0.000 claims abstract description 18
- 230000005540 biological transmission Effects 0.000 claims description 15
- 239000003550 marker Substances 0.000 description 362
- 238000005259 measurement Methods 0.000 description 60
- 238000010586 diagram Methods 0.000 description 42
- 238000000034 method Methods 0.000 description 26
- 238000012986 modification Methods 0.000 description 21
- 230000004048 modification Effects 0.000 description 21
- 230000000694 effects Effects 0.000 description 18
- 230000006870 function Effects 0.000 description 18
- 238000009434 installation Methods 0.000 description 18
- 238000012545 processing Methods 0.000 description 17
- 238000004891 communication Methods 0.000 description 15
- 238000012937 correction Methods 0.000 description 13
- 238000012806 monitoring device Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 239000003973 paint Substances 0.000 description 2
- 230000001788 irregular Effects 0.000 description 1
- 230000005389 magnetism Effects 0.000 description 1
Images
Landscapes
- Traffic Control Systems (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Navigation (AREA)
Abstract
Description
本発明は、車両の走行位置を検出する装置及びシステムに関する。 The present invention relates to an apparatus and a system for detecting a traveling position of a vehicle.
近年、ミリ波レーダ、DSRC(Dedicated Short Range Communication)、画像認識などにより車の安全運転を支援する装置の開発が行われている。その中でも、車両の走行位置を検出し、その走行位置情報を利用したシステムが多く利用されている。 In recent years, devices that support safe driving of vehicles by millimeter wave radar, DSRC (Dedicated Short Range Communication), image recognition, and the like have been developed. Among them, a system that detects the travel position of a vehicle and uses the travel position information is often used.
このような車両位置検出手法として、道路に埋め込まれた磁気マーカを車載機器の磁気センサ等により検出し、当該磁気マーカで特定される情報から自車両の位置を検出する手法がある(特許文献1から5参照)。 As such a vehicle position detection method, there is a method in which a magnetic marker embedded in a road is detected by a magnetic sensor of an in-vehicle device, and the position of the host vehicle is detected from information specified by the magnetic marker (Patent Document 1). To 5).
また、衛星を利用したGPS(Global Positioning System)により車両の位置を検出
する手法もある。
There is also a method for detecting the position of a vehicle by GPS (Global Positioning System) using a satellite.
その他、車載カメラで道路標示を写し、画像認識処理によって得られた情報から位置情報等が検出される手法がある。この手法では、認識された道路標示が位置情報とともに蓄積されることにより、以後、当該車両が同一地点を通行する場合に、前もって警告を行ったり、道路標示から衝突事故防止に必要な車間距離を算出し、車間距離によって警報を発生したりすることが考えられている(特許文献6及び7参照)。 In addition, there is a method in which a road sign is copied with an in-vehicle camera, and position information or the like is detected from information obtained by image recognition processing. In this method, the recognized road marking is accumulated together with the position information, so that if the vehicle passes through the same point, a warning is given in advance, or the distance between the road markings necessary to prevent a collision accident is calculated. It is considered to calculate and generate an alarm depending on the inter-vehicle distance (see Patent Documents 6 and 7).
また、ミリ波レーダやレーザレーダにより前方の障害物検出や前方車両との車間距離を計測する手法も考えられている。
しかしながら、例えば、DGPS(Differential GPS)の場合、位置検出精度が1メートルから5メートル程度の測定誤差があるため、交差点、道路の合流地点等の他車両が異なる方向から進入してくる可能性のある地点においては、衝突可能性を事前に判断し、回避するための手段として十分ではない。また、トンネル内やビルの陰などで衛星を必要個数補足できない場合には測定自体が不可能となる。 However, in the case of DGPS (Differential GPS), for example, there is a measurement error with a position detection accuracy of about 1 to 5 meters, so there is a possibility that other vehicles such as intersections and road junctions may enter from different directions. At a certain point, it is not sufficient as a means for judging and avoiding the possibility of collision in advance. Also, if the required number of satellites cannot be captured in the tunnel or behind the building, the measurement itself is impossible.
また、ミリ波レーダによる測定では、前方に車両が存在する場合、道路が曲折している場合、見通しが悪い場合等には、測定が不可能となる場合がある。その他、赤外線等のレーザレーダでは、乱反射等により雨などの天候の影響を受けやすく屋外における測定には向いていない。 In the measurement by the millimeter wave radar, the measurement may be impossible when a vehicle is present ahead, the road is bent, or the line of sight is bad. In addition, laser radars such as infrared rays are easily affected by weather such as rain due to irregular reflection and the like, and are not suitable for outdoor measurement.
また、レーンマーカに位置情報を持たせることにより位置検出も可能であるが、敷設コストが高いという問題がある。道路に設置した磁気マーカによる位置検出においても、高い精度で検出するためには磁気マーカを短い間隔で敷設しなければならないため、敷設コ
ストが高くなってしまう。
Further, although position detection is possible by providing position information to the lane marker, there is a problem that the laying cost is high. Even in the position detection by the magnetic marker installed on the road, the magnetic marker must be installed at a short interval in order to detect it with high accuracy, so that the installation cost increases.
本発明の目的は、敷設コストを抑え、精度の高い位置検出を可能とする車両位置検出装置を提供することである。 An object of the present invention is to provide a vehicle position detection device that can reduce the laying cost and enable highly accurate position detection.
本発明は、上述した課題を解決するために以下の構成を採用する。即ち、本発明は、車両周辺の映像を撮影する撮像部と、撮影された映像を画像データとして取り込む入力部と、 取り込まれた画像データの中から所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、特定された指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、特定された指標の種類に基づき、上記記憶部から位置情報を取得する取得部と、取得された位置情報により車両の位置を決定する決定部とを備える車両位置検出装置についてのものである。 The present invention employs the following configuration in order to solve the above-described problems. That is, the present invention recognizes and recognizes an imaging unit that captures a video around a vehicle, an input unit that captures the captured video as image data, and an index having a predetermined shape from the captured image data. A recognition unit that identifies the type of the index, a storage unit that stores the type of the identified index and position information corresponding to the type of the index, and position information from the storage unit based on the type of the identified index The vehicle position detection apparatus includes an acquisition unit that acquires the position of the vehicle and a determination unit that determines the position of the vehicle based on the acquired position information.
本発明では、車両周辺の撮影された映像が入力部から取り込まれ、取り込まれた画像データから所定の形状を持つ指標が認識される。さらに、認識された指標から指標の種類が特定されると、特定された指標の種類に対応する位置情報が取得される。 In the present invention, an image taken around the vehicle is captured from the input unit, and an index having a predetermined shape is recognized from the captured image data. Further, when the index type is identified from the recognized index, position information corresponding to the identified index type is acquired.
このように、本発明に係る車両位置検出装置では、画像処理により、路上等に設置され、位置を示すよう識別された指標が認識され、当該指標の種類に対応する位置情報により、車両の位置が特定される。 As described above, in the vehicle position detection device according to the present invention, the index that is installed on the road or the like and identified to indicate the position is recognized by the image processing, and the position of the vehicle is determined based on the position information corresponding to the type of the index. Is identified.
従って、磁気マーカ等のように特殊で高価な機能を有する指標を用いることなく、単に、画像処理による識別可能な指標により、車両の位置を特定することが可能となる。ひいては、敷設コストを抑えた車両位置検出装置を実現することができる。 Therefore, it is possible to specify the position of the vehicle simply by an identifiable index by image processing without using an index having a special and expensive function such as a magnetic marker. As a result, it is possible to realize a vehicle position detection device that reduces installation costs.
また、当該指標と撮像部とは接近しているため、誤認識の可能性も低く、当該指標が固定されていれば、それに対応する位置情報も不変であり、精度の高い位置検出が可能となる。 In addition, since the index and the imaging unit are close to each other, the possibility of misrecognition is low, and if the index is fixed, the position information corresponding to the index is unchanged, and highly accurate position detection is possible. Become.
また、本発明に係る車両位置検出装置は、上記認識部が、取り込まれた画像データの中から、指標の種類を特定すると共に、認識された指標の画像データ上の位置及び大きさを認識し、上記記憶部が、指標の種類に対応する位置情報の他、その指標の大きさと、隣接する他の指標との間隔を記憶し、上記取得部が、位置情報の他、該指標の大きさと、隣接する他の指標との間隔を取得し、上記決定部が、取得された指標の大きさと隣接する他の指標との間隔に基づき、車両から、該指標までの距離を算出する算出部を更に備え、算出された該指標までの距離と当該位置情報とから車両の位置を決定する。 In the vehicle position detection device according to the present invention, the recognition unit identifies the type of the index from the captured image data, and recognizes the position and size of the recognized index on the image data. In addition to the position information corresponding to the type of the index, the storage unit stores the size of the index and the interval between other adjacent indexes, and the acquisition unit stores the size of the index in addition to the position information. A calculation unit that obtains an interval between the adjacent index and the determination unit calculates a distance from the vehicle to the index based on the size of the acquired index and the interval between the adjacent index. In addition, the position of the vehicle is determined from the calculated distance to the index and the position information.
本発明では、撮影された画像データに映る指標と車両との間に所定の距離がある場合が想定され、上記算出部により、認識された指標と車両との間の距離が算出される。上記算出部では、画像データ上の当該指標の位置と大きさと隣接する他の指標との間隔とから、認識された指標と車両との間の距離が算出される。 In the present invention, it is assumed that there is a predetermined distance between the index reflected in the captured image data and the vehicle, and the distance between the recognized index and the vehicle is calculated by the calculation unit. In the calculation unit, the distance between the recognized index and the vehicle is calculated from the position and size of the index on the image data and the interval between other adjacent indexes.
これにより、撮像部が撮影した指標と車両との位置に一定の距離がある場合においても、その距離が算出され、同様に、車両の位置を検出することができる。 Thereby, even when there is a certain distance between the index taken by the imaging unit and the position of the vehicle, the distance is calculated, and the position of the vehicle can be detected similarly.
また、本発明に係る車両位置検出装置は、上記認識部により特定された指標の種類を連続した並びで格納する格納部を更に備え、上記記憶部が、幾つか連続した指標の種類の並びと、その並びに対応する位置情報とを記憶し、上記取得部が、上記格納部に格納された指標の種類の並びに基づき、上記記憶部から、その並びに対応する上記位置情報を取得す
る。
The vehicle position detection apparatus according to the present invention further includes a storage unit that stores the types of indicators specified by the recognition unit in a continuous sequence, and the storage unit includes a sequence of several types of indicators. The corresponding position information is stored, and the acquisition unit acquires the corresponding position information from the storage unit based on the order of the types of indices stored in the storage unit.
本発明では、格納部に、認識された指標の種類が逐次記憶される。また、上記記憶部には、当該指標の種類の並びとその並びに対応する位置情報とが格納される。これにより、本発明では、最新の認識された指標の種類を含んだ当該指標の種類の並びに基づき、車両の位置情報が決定される。 In the present invention, the types of recognized indices are sequentially stored in the storage unit. Further, the storage unit stores a list of types of the indicators and corresponding position information. Thereby, in the present invention, the position information of the vehicle is determined based on the order of the types of the indicators including the latest recognized indicator type.
従って、本発明によれば、指標の種類を少なくすることができ、すなわち、指標に持たせる情報量を抑えることができる。これにより、指標の認識処理の負荷を抑えることができるため、高速な車両位置検出が可能となり、ひいては、検出された位置情報が精密となる。 Therefore, according to the present invention, the types of indicators can be reduced, that is, the amount of information provided to the indicators can be suppressed. Thereby, since the load of the index recognition process can be suppressed, the vehicle position can be detected at high speed, and the detected position information becomes precise.
また、本発明は、車両が通過する地点周辺を、所定の形状を持つ指標を少なくとも1つ含むように撮影する撮像部と、撮影された映像を画像データとして取り込む入力部と、取り込まれた画像データの中から、少なくとも1つの指標を認識し、認識された指標の種類を特定する認識部と、特定された指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、特定された全ての指標の種類に基づき、上記記憶部から位置情報を取得する取得部と、取得された位置情報を記憶する位置記憶部と、この位置記憶部に記憶された位置情報と、上記取得部により取得された位置情報とを比較した結果、位置情報の数が一致しない場合に、上記取得部により取得された位置情報で足りない位置情報に対応する指標が認識されていないことを検知し、この認識されていない指標に関する位置情報を車両の位置と決定する決定部とを備える車両位置検出装置についてのものである。 In addition, the present invention provides an imaging unit that captures the vicinity of a point where a vehicle passes so as to include at least one index having a predetermined shape, an input unit that captures captured images as image data, and a captured image A recognition unit that recognizes at least one index from the data and identifies the type of the recognized index; a storage unit that stores the type of the identified index and position information corresponding to the type of the index; Based on the types of all identified indices, an acquisition unit that acquires position information from the storage unit, a position storage unit that stores the acquired position information, position information stored in the position storage unit, and As a result of comparison with the position information acquired by the acquisition unit, if the number of position information does not match, an indicator corresponding to the position information that is insufficient for the position information acquired by the acquisition unit is not recognized. Knowledge and is intended for the recognized have not the vehicle position detecting device and a determining unit that the position information about the index to determine the position of the vehicle.
本発明では、撮像部が、車両が通過する地点周辺を、所定の形状を持つ指標を少なくとも1つ含むように撮影し、この映像が画像データとして取り込まれる。取り込まれた画像データに含まれる指標がそれぞれ認識され、認識された指標の種類からその種類に対応する位置情報が取得され、位置記憶部にそれぞれ記憶される。 In the present invention, the imaging unit captures the vicinity of a point where the vehicle passes so as to include at least one index having a predetermined shape, and this video is captured as image data. Each index included in the captured image data is recognized, and position information corresponding to the type of the recognized index is acquired and stored in the position storage unit.
そして、決定部では、この位置記憶部に記憶された位置情報と、取得された位置情報とが比較されることで、認識されていない指標が検知され、当該認識されていない指標に関する位置情報が車両の位置と決定される。 Then, the determining unit detects the unrecognized index by comparing the position information stored in the position storage unit with the acquired position information, and the position information regarding the unrecognized index is obtained. It is determined as the position of the vehicle.
従って、本発明によれば、当該指標を用いた車両位置検出を車両外の装置で実現することができるため、交通インフラとして交通制御システム等に用いることも可能となる
また、本発明は、所定の形状を持つ指標を有する車両に搭載された装置と車両外に設置された装置とからなる車両位置検出システムについてのものである。
Therefore, according to the present invention, since vehicle position detection using the index can be realized by a device outside the vehicle, it can be used as a traffic infrastructure in a traffic control system or the like. The present invention relates to a vehicle position detection system including a device mounted on a vehicle having an index having the following shape and a device installed outside the vehicle.
このシステムにおける車両外に設置された装置は、車両が通過する地点周辺を撮影する撮像部と、撮影された映像を画像データとして取り込む入力部と、当該画像データの中から、車両に搭載され所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、当該指標の種類と、その指標の種類に対応する車両の識別情報とを記憶する記憶部と、特定された指標の種類に基づき、上記記憶部から車両の識別情報を取得する取得部と、取得された車両の識別情報と自装置に関する位置情報とを送信する送信部とを備える。 An apparatus installed outside the vehicle in this system includes an imaging unit that captures the vicinity of a point where the vehicle passes, an input unit that captures captured video as image data, and a predetermined unit that is mounted on the vehicle from the image data. A recognizing unit that recognizes an index having the following shape and identifies the type of the recognized index, a storage unit that stores the type of the index, and vehicle identification information corresponding to the type of the index, An acquisition unit that acquires vehicle identification information from the storage unit based on the type of index, and a transmission unit that transmits the acquired vehicle identification information and position information about the device itself.
また、このシステムにおける車両に搭載された装置は、上記車両外に設置された装置から送信された、車両を識別する車両識別情報と、上記車両外の設置された装置に関する位置情報とを受信する受信部と、上記車両識別情報から、受信された位置情報が自車両のための情報であると判断された場合に、当該受信された位置情報から自車両の位置を決定する決定部とを備える。 Further, the device mounted on the vehicle in this system receives the vehicle identification information for identifying the vehicle and the position information regarding the device installed outside the vehicle, transmitted from the device installed outside the vehicle. A receiving unit; and a determination unit that determines the position of the host vehicle from the received position information when it is determined from the vehicle identification information that the received position information is information for the host vehicle. .
本発明では、指標が車両に搭載され、この指標が車両外に設置された装置の撮像部により撮影される。撮影された指標が認識部により認識され、当該指標の種類に対応する車両の識別情報が取得される。取得された車両の識別情報は、車両外に設置された装置に関する位置情報と共に、送信される。 In the present invention, an index is mounted on a vehicle, and the index is photographed by an imaging unit of a device installed outside the vehicle. The photographed index is recognized by the recognition unit, and vehicle identification information corresponding to the type of the index is acquired. The acquired vehicle identification information is transmitted together with position information relating to a device installed outside the vehicle.
当該車両の識別情報と位置情報とが受信されると、決定部では、これら受信された情報が自車両のための情報であるか否かが判断され、自車両のための情報であると判断されると、当該位置情報により、本車両の位置が特定される。 When the identification information and position information of the vehicle are received, the determination unit determines whether the received information is information for the own vehicle, and determines that the information is for the own vehicle. Then, the position of the vehicle is specified by the position information.
従って、本発明によれば、当該指標を用いた車両の位置検出を車両と車両外に設置された装置間で情報をやりとりすることにより実現できるため、様々な形態を採用することが可能となる。 Therefore, according to the present invention, since vehicle position detection using the index can be realized by exchanging information between the vehicle and a device installed outside the vehicle, various forms can be adopted. .
なお、本発明は、以上の何れかの機能を実現させるプログラムであってもよい。また、本発明は、そのようなプログラムをコンピュータが読み取り可能な記憶媒体に記録してもよい。 Note that the present invention may be a program for realizing any of the above functions. In the present invention, such a program may be recorded on a computer-readable storage medium.
本発明によれば、敷設コストを抑え、精度の高い位置検出を可能とする車両位置検出装置を提供することができる。 According to the present invention, it is possible to provide a vehicle position detection device that can reduce the laying cost and enable highly accurate position detection.
以下、図面を参照して、それぞれ本発明の実施形態について説明する。以下に述べる実施形態の構成は例示であり、本発明は以下の実施形態の構成に限定されない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. The configuration of the embodiment described below is an exemplification, and the present invention is not limited to the configuration of the following embodiment.
[第一実施形態]
まず、図面を参照して、本発明の第一実施形態における車両位置検出装置について説明する。
[First embodiment]
First, a vehicle position detection device according to a first embodiment of the present invention will be described with reference to the drawings.
図1は、第一実施形態における車両位置検出装置の概要を示す図である。本車両位置検出装置は、図1に示すように、車両に搭載されたビデオカメラ10から、道路に設置された画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。なお、ビデオカメラ10の設置位置等は、図1に示す位置に限定されない。
FIG. 1 is a diagram showing an outline of a vehicle position detection device in the first embodiment. As shown in FIG. 1, the vehicle position detection apparatus captures an
〔画像マーカ〕
画像マーカ15(本発明の指標に相当)は、磁気マーカのように磁気を備える必要はなく、例えば、図2及び3に示すような形態を認識させうるものであればよい。図2及び3は、本実施形態で用いる画像マーカの例を示す図である。本実施形態で用いる画像マーカについて、図2を用いて説明する。
[Image marker]
The image marker 15 (corresponding to the index of the present invention) does not need to have magnetism like a magnetic marker, and may be any one that can recognize the forms shown in FIGS. 2 and 3, for example. 2 and 3 are diagrams showing examples of image markers used in the present embodiment. The image marker used in this embodiment will be described with reference to FIG.
画像マーカ15は、図2に示すように、所定の形状を持ち、当該所定の形状内の所定の箇所を所定のデータとして割り当て、その箇所の色を変えることにより、各画像マーカの種類を特定させる。例えば、ビット6の位置が黒色で塗られている場合には、ビット6が1であることを示し、その位置が白色で塗られている場合には、ビット6が0であることを示す。図2に示す例では、各画像マーカを7ビットのデータにより特定することができる。
As shown in FIG. 2, the
図3は、3種類の画像マーカとそれに対応するデータを示す図である。図3の左図は、ビット5を示す場所が黒色となっており、それ以外のビットを示す場所は白色で表されて
いる。これにより、左図の画像マーカが示すデータは、バイナリデータとして“0100000”を示す。同様に、中央図は、ビット6、ビット4、ビット1がそれぞれ黒色で表されており、“1010010”を示す。右図は、ビット5、ビット2、ビット0がそれぞれ黒色で表され、“0100101”を示す。
FIG. 3 is a diagram showing three types of image markers and corresponding data. In the left diagram of FIG. 3, the place showing the bit 5 is black, and the place showing the other bits is shown in white. Thereby, the data indicated by the image marker in the left diagram indicates “0100000” as binary data. Similarly, in the center diagram, bit 6, bit 4, and
なお、画像マーカ15は、上記色彩に限定されるものではなく、より複雑な線図等であってもよいし、現在、ヒートアイランド対策として、道路に赤外線反射塗料を塗ることが検討されているが、そのような塗料を用いて、所定の形状を認識されるようにしてもよい。
Note that the
〔装置構成〕
次に、第一実施形態における車両位置検出装置の機能構成について、図4を用いて説明する。図4は、第一実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
Next, the functional configuration of the vehicle position detection device in the first embodiment will be described with reference to FIG. FIG. 4 is a functional block diagram of the vehicle position detection apparatus in the first embodiment.
本車両位置検出装置は、プロセッサ、メモリ、入出力インタフェース等を備え、以下に示す機能部を制御する。本車両位置検出装置は、画像入力部20(本発明の入力部に相当)、画像認識部21(本発明の認識部に相当)、車両位置測定部22(本発明の取得部、決定部に相当)、画像マーカデータベース23(本発明の記憶部に相当)を備える。 The vehicle position detection device includes a processor, a memory, an input / output interface, and the like, and controls the functional units shown below. The vehicle position detection device includes an image input unit 20 (corresponding to the input unit of the present invention), an image recognition unit 21 (corresponding to the recognition unit of the present invention), and a vehicle position measuring unit 22 (acquisition unit and determination unit of the present invention). Equivalent), and an image marker database 23 (corresponding to the storage unit of the present invention).
画像入力部20には、ビデオカメラ10によって撮影された画像が逐次、入力される。この画像には、上述の画像マーカが映し出されている。画像入力部20は、入力された画像データを画像認識部21に渡す。
Images captured by the
画像認識部21は、画像入力部20から画像データを受けると、画像データ中にある画像マーカの形態を認識する。画像認識部21は、当該画像データに対して統計処理を行うことにより閾値を決定し、その閾値を用いて画像データを2値化する。画像データの2値化には、例えば、Pタイル法、モード法、動的閾値決定法等の閾値指定法が利用される。
When receiving the image data from the
画像認識部21は、2値化処理を施した画像データの各領域の中から画像マーカの大きさ、形状に合致する領域を切り出す。画像認識部21は、切り出された領域の大きさ、形から画像マーカの各ビット領域の大きさを計算し、各ビット領域部分のビット情報を認識することにより、当該画像マーカの形態に対応する情報を取得する。例えば、図3の右に示される画像マーカが認識された場合には、“0100101”というバイナリデータが取得される。画像認識部21は、画像マーカに対応する情報を車両位置測定部22に渡す。
The
車両位置測定部22は、画像マーカデータベース23を参照し、画像認識部21から出力される画像マーカに対応する情報から画像マーカの位置を取得し、当該車両の位置(交差点まで100メートルの地点等)を出力する。
The vehicle
画像マーカデータベース23は、図5に示すように、画像マーカに対応する情報(画像マーカデータ)と画像マーカの位置情報の相対を格納するデータベースである。車両位置測定部22は、画像マーカデータをキーとして、この画像マーカデータベース23を参照し、当該画像マーカの位置情報を取得する。
As shown in FIG. 5, the
〈第一実施形態における作用/効果〉
ここで、上述した第一実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in First Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the first embodiment described above will be described.
第一実施形態における車両位置検出装置では、車載のビデオカメラにより撮影された画
像が画像入力部20から入力され、入力された画像データから画像マーカが認識される。画像認識部21では、画像処理により画像マーカが認識され、画像マーカに対応する情報が取得される。車両位置測定部22では、取得された画像マーカに対応する情報に基づき、画像マーカデータベース23が参照され、画像マーカの位置情報が取得される。
In the vehicle position detection apparatus according to the first embodiment, an image captured by an in-vehicle video camera is input from the
このように、第一実施形態における車両位置検出装置では、画像処理により、路上の画像マーカが認識され、当該画像マーカの位置情報により、車両の位置が特定される。 As described above, in the vehicle position detection device in the first embodiment, the image marker on the road is recognized by the image processing, and the position of the vehicle is specified by the position information of the image marker.
よって、磁気マーカ等のように特殊な機能を有するマーカではなく、単に、形態が識別可能な画像マーカにより、車両の位置を特定することが可能となる。 Therefore, it is possible to specify the position of the vehicle not by a marker having a special function such as a magnetic marker but simply by an image marker whose form can be identified.
[第二実施形態]
次に、本発明の第二実施形態における車両位置検出装置について説明する。第一実施形態は、ビデオカメラが車両の直下を通過する画像マーカを撮影する形態についてのものであった。第二実施形態は、ビデオカメラが車両の前方の画像マーカを撮影する形態についてのものである。
[Second Embodiment]
Next, the vehicle position detection apparatus in 2nd embodiment of this invention is demonstrated. The first embodiment relates to a mode in which a video camera captures an image marker that passes directly under a vehicle. In the second embodiment, the video camera captures an image marker in front of the vehicle.
図6は、第二実施形態における車両位置検出装置の概要を示す図である。第二実施形態における本車両位置検出装置は、図6に示すように、車両の前方に設置されたビデオカメラ10から、車両前方を通過する画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。なお、ビデオカメラ10の設置位置等は、図6に示す位置に限定するものではない。
FIG. 6 is a diagram showing an outline of the vehicle position detection device in the second embodiment. As shown in FIG. 6, the vehicle position detection apparatus in the second embodiment captures an
〔装置構成〕
第二実施形態における車両位置検出装置の機能構成について、図7を用いて説明する。図7は、第二実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
A functional configuration of the vehicle position detection apparatus in the second embodiment will be described with reference to FIG. FIG. 7 is a functional block diagram of the vehicle position detection apparatus in the second embodiment.
第二実施形態における車両位置検出装置は、第一実施形態における機能部の他、画像マーカ・車両間距離計算部71(本発明の算出部に相当)を備える。以下に、第二実施形態における車両位置検出装置の各機能部について説明する。なお、第一実施形態と同様の機能部については、説明を省略する。 The vehicle position detection apparatus in the second embodiment includes an image marker / inter-vehicle distance calculation unit 71 (corresponding to the calculation unit of the present invention) in addition to the functional unit in the first embodiment. Below, each function part of the vehicle position detection apparatus in 2nd embodiment is demonstrated. Note that description of functional units similar to those in the first embodiment is omitted.
第二実施形態における車両位置検出装置では、ビデオカメラ10が車両前方を撮影しているため、画像入力部20に入力される画像データは、図8に示すような画像となる。図8に示す入力画像の例では、車両前方の画像マーカ81から84が映し出されている。画像入力部20は、当該入力画像を画像認識部21に渡す。
In the vehicle position detection apparatus in the second embodiment, since the
画像認識部21は、車両に一番近い位置に写る画像マーカ81を認識する。画像認識部21による画像認識処理については、第一実施形態と同様である。画像認識部21は、認識された画像マーカ81に対応する情報を車両位置測定部22に渡すと共に、画像マーカ・車両間距離計算部71に、認識された画像マーカ81に対応する情報、及び認識された画像マーカ81の画像データ中の位置情報(画像下端部からの位置等)を渡す。
The
画像マーカ・車両間距離計算部71は、画像データ上の位置と車両からの距離の関係を予め保持している。これらは、カメラ設置角、カメラの焦点距離、カメラの設置高さ等によって一意に決まるものであるため、初期設定処理等によって、画像マーカ・車両間距離計算部71に保持されるようにしてもよい。画像マーカ・車両間距離計算部71は、この画像データ上の位置と車両からの距離の関係から、画像マーカと車両との間の距離を計算する。画像マーカ・車両間距離計算部71は、計算された距離を車両位置測定部22に渡す。
The image marker / vehicle
車両位置測定部22は、画像マーカ・車両間距離計算部71から受けた距離と、画像マーカデータベース内にある画像マーカの位置情報とから、車両位置を算出する。
The vehicle
〈第二実施形態における変形例〉
上述の手法では、画像マーカ・車両間距離計算部71は、予め、画像データ上の位置と車両からの距離の関係を保持し、その情報を用いて、画像マーカと車両との間の距離を算出する。ここでは、このような情報を保持せず、当該画像マーカと車両との間の距離を算出する手法について、図9及び10を用いて説明する。図9は、第二実施形態の変形例における入力画像を示す図である。図10は、第二実施形態の変形例における画像マーカ・車両間距離の計算概念を示す図である。
<Modification in Second Embodiment>
In the above-described method, the image marker / vehicle
この場合、画像認識部21は、車両に一番近い位置に移る画像マーカ81の他、入力画像の垂直方向の中心線より上に映る画像マーカ83及び84を認識する。画像認識部21は、認識された画像マーカ81、83及び84に関し、それぞれ、対応する情報(第一実施形態におけるバイナリデータ等)を取得する。さらに、画像認識部21は、画像マーカ83及び84に関しては、入力画像の垂直方向の中心からの位置情報を取得する(C1、
C2、C3及びC4)。また、画像認識部21は、画像マーカ81に関し、当該入力画像の
垂直方向の中心線からの位置情報(C5)を取得する。
In this case, the
C 2, C 3 and C 4). Further, the
画像認識部21は、画像マーカ81に対応する情報を車両位置測定部22に渡すと共に、画像マーカ・車両間距離計算部71へ、画像マーカ81、83、及び84にそれぞれ対応する情報、位置情報C1、C2、C3、C4、及びC5などを渡す。
The
画像マーカ・車両間距離計算部71は、画像認識部21から受けた情報に基づき、まず、図10に示すように、カメラ設置角E、カメラの焦点距離B、カメラの設置高さDを、以下に示す算出処理により求める。
Based on the information received from the
画像マーカ83の下端部と車両との距離A1、画像マーカ83の上端部と車両との距離
A2、画像マーカ84の下端部と車両との距離A3、画像マーカ84の上端部と車両との距離A4については、以下に示す関係が成立する。
The distance A 1 between the lower end of the
A1=D/(tan(E−tan-1(C1/B))) (式1)
A2=D/(tan(E−tan-1(C2/B))) (式2)
A3=D/(tan(E−tan-1(C3/B))) (式3)
A4=D/(tan(E−tan-1(C4/B))) (式4)
さらに、式1から4により、以下の関係が成立する。
A 1 = D / (tan (E-tan −1 (C 1 / B))) (Formula 1)
A 2 = D / (tan (E-tan −1 (C 2 / B))) (Formula 2)
A 3 = D / (tan (E-tan −1 (C 3 / B))) (Formula 3)
A 4 = D / (tan (E-tan −1 (C 4 / B))) (Formula 4)
Further, the following relationship is established by the
(式1)−(式2)=(画像マーカ83の縦の長さ) (式5)
(式2)−(式3)=(画像マーカ83と画像マーカ84との間隔) (式6)
(式3)−(式4)=(画像マーカ84の縦の長さ) (式7)
画像マーカ・車両間距離計算部71は、画像認識部21から受けた画像マーカ83及び84に対応する情報をキーに、画像マーカデータベースを参照することにより、上記(画像マーカ83の縦の長さ)、(画像マーカ83と画像マーカ84との間隔)、(画像マーカ84の縦の長さ)を取得し、取得された情報を式5から7に代入することにより、連立方程式を解く。画像マーカ・車両間距離計算部71は、これにより、カメラ設置角E、カメラの焦点距離B、カメラの設置高さDを取得する。
(Expression 1) − (Expression 2) = (Vertical length of the image marker 83) (Expression 5)
(Expression 2) − (Expression 3) = (Distance between
(Expression 3) − (Expression 4) = (Vertical length of the image marker 84) (Expression 7)
The image marker / vehicle
画像マーカ・車両間距離計算部71は、算出された情報(E、B、D)及び画像認識部21から受けた位置情報C5を用いることにより、画像マーカ81と車両との間の距離を
算出する(A5=D/(tan(E−tan-1(C5/B))))。
The image marker / vehicle
なお、上述の画像マーカ・車両間距離計算部71によるカメラ設置角E、カメラの焦点距離B、カメラの設置高さDの算出は、車両位置算出時に常に実行されてもよいし、所定の周期により処理され、算出結果がメモリ等に保持されるようにし、その保持された情報を用いて、画像マーカと車両との間の距離を算出するようにしてもよい。
Note that the calculation of the camera installation angle E, the camera focal length B, and the camera installation height D by the above-described image marker / vehicle
また、上述の算出では、入力画像の垂直方向の中心からの距離(C1からC4)を用いたが、下端部からの距離、上端部からの距離、その他考えられる位置関係を用いて算出するようにしてもよい。すなわち、上述の算出処理は、入力画像に映し出された複数の画像マーカの位置関係を用いているものであって、それらをどのように使うかを限定するものではない。 In the above calculation, the distance (C 1 to C 4 ) from the center in the vertical direction of the input image is used, but the calculation is performed using the distance from the lower end, the distance from the upper end, and other possible positional relationships. You may make it do. That is, the above-described calculation process uses the positional relationship between a plurality of image markers displayed in the input image, and does not limit how to use them.
〈第二実施形態における作用/効果〉
ここで、上述した第二実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Second Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the second embodiment described above will be described.
第二実施形態における車両位置検出装置では、撮影された画像データに映る画像マーカと車両とは一定の距離があるため、画像マーカ・車両間距離計算部71により、その距離が算出される。
In the vehicle position detection apparatus according to the second embodiment, since the image marker shown in the captured image data and the vehicle have a certain distance, the distance is calculated by the image marker / inter-vehicle
画像マーカ・車両間距離計算部71では、画像データ上の位置と実際の車両との距離との関係が保持されており、その関係から、認識された画像マーカと車両との間の実距離が算出される。
The image marker / vehicle
また、変形例としての画像マーカ・車両間距離計算部71では、入力された画像データ上に写る複数の画像マーカの位置、配列等の情報に基づき、画像データ上の位置と実際の車両との距離との関係が算出される。
Further, in the image marker / vehicle
車両位置測定部22は、画像マーカデータベースに格納されている画像マーカの位置情報と、画像マーカ・車両間距離計算部71により算出された距離から、車両の位置を特定する。
The vehicle
これにより、ビデオカメラが車両の前方に設置されている場合についても、当該ビデオカメラを利用することにより、第一実施形態と同様の手法で、車両の位置を特定することができる。 Thereby, even when the video camera is installed in front of the vehicle, the position of the vehicle can be specified by using the video camera in the same manner as in the first embodiment.
[第三実施形態]
次に、本発明の第三実施形態における車両位置検出装置について説明する。
[Third embodiment]
Next, the vehicle position detection apparatus in 3rd embodiment of this invention is demonstrated.
〔装置構成〕
第三実施形態における車両位置検出装置の機能構成について、図11を用いて説明する。図11は、第三実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
The functional configuration of the vehicle position detection device in the third embodiment will be described with reference to FIG. FIG. 11 is a functional block diagram of the vehicle position detection apparatus in the third embodiment.
第三実施形態における車両位置検出装置は、第一実施形態における機能部の他、画像マーカ配列記憶部111(本発明の格納部に相当)を備える。以下に、第三実施形態における車両位置検出装置の各機能部について説明する。なお、第一実施形態と同様の機能部については、説明を省略する。第三実施形態における車両位置検出装置では、ビデオカメラ10が車両直下に通過する画像マーカを撮影する構成を例に挙げる(図1参照)。
The vehicle position detection device in the third embodiment includes an image marker array storage unit 111 (corresponding to a storage unit of the present invention) in addition to the functional unit in the first embodiment. Below, each function part of the vehicle position detection apparatus in 3rd embodiment is demonstrated. Note that description of functional units similar to those in the first embodiment is omitted. In the vehicle position detection apparatus according to the third embodiment, a configuration in which the
第三実施形態における画像マーカデータベース23には、個々の画像マーカを示す情報の配列とその配列が示す位置情報とが関連付けられ格納される。まず、この画像マーカデータベース23に格納されるデータの概念について、図12及び13を用いて説明する。図12は、第三実施形態における画像マーカ配列の概念を示す図である。図13は、第三実施形態における画像マーカデータベース構成の概念を示す図である。
In the
例えば、路上に画像マーカA、B、C、D、Eが車両の進行方向(図の左から右への方向)へ、A->D->B->C->B->Eの順で設置されている地点を考える。この場合、画像マーカデータベース23には、図13に示すようなデータが格納される。画像マーカデータベース23には、画像マーカが「A->D->B」の順で認識された場合「地点1」を示し、画像マーカが「D->B->C」の順で認識された場合「地点2」を示すといった情報が格納される。すなわち、画像マーカデータベース23には、画像マーカの配列に基づき車両の位置を特定するための情報が格納される。
For example, image markers A, B, C, D, and E are on the road in the traveling direction of the vehicle (the direction from the left to the right in the figure) in the order of A-> D-> B-> C-> B-> E. Consider the point installed at. In this case, the
また、画像マーカにM系列(Maximum Length Sequence)を利用した場合の例を図14
及び15に示す。図14は、第三実施形態における画像マーカ配列の例を示す図である。図15は、第三実施形態における画像マーカデータベース構成の例を示す図である。図14の例では、画像マーカ15は、「1」に対応するものと、「0」に対応するものが所定のM系列を利用した形で配列されている。この場合、画像マーカデータベース23には、図15に示すように、画像マーカ配列「1101」に対応する位置情報が「地点1」として登録され、画像マーカ配列「1010」に対応する位置情報が「地点2」として登録される。
An example in which an M sequence (Maximum Length Sequence) is used as an image marker is shown in FIG.
And 15. FIG. 14 is a diagram illustrating an example of an image marker array in the third embodiment. FIG. 15 is a diagram showing an example of an image marker database configuration in the third embodiment. In the example of FIG. 14, the
更に、画像マーカとして、第一実施形態における画像マーカ15を採用した場合の例を図16及び17を用いて説明する。図16は、第三実施形態における画像マーカ配列の例を示す図である。図17は、第三実施形態における画像マーカデータベース構成の例を示す図である。この場合、各画像マーカは7ビットの情報に対応付けられるため、画像マーカデータベース23には、7ビット情報を3つ持つ画像マーカ配列が、位置情報と関連付けられる。
Further, an example in which the
以下に述べる他の機能部の説明は、図17に示す例の画像マーカデータベース23を有する場合のものである。
The description of the other functional units described below is for the case where the
画像入力部20には、図16に示す画像マーカをビデオカメラ10によって撮影した画像が逐次、入力される。画像入力部20は、入力された画像データを画像認識部21に渡す。
Images obtained by photographing the image markers shown in FIG. 16 with the
画像認識部21は、画像入力部20から画像データを受けると、第一実施形態で述べたように、受けた画像マーカの形態に対応する数値情報を取得する。画像認識部21は、画像マーカに対応する情報を画像マーカ配列記憶部111に渡す。
When receiving image data from the
画像マーカ配列記憶部111は、画像認識部21から受けた画像マーカに対応する情報と共に、記憶されている前回までの画像マーカに対応する情報の配列を車両位置測定部22に渡す。画像マーカ配列記憶部111は、今回画像認識部21から受けた画像マーカに対応する情報を前回までの情報と共に記憶する。なお、本実施形態では、最新の情報の他、2つ前までの情報を以って画像マーカ配列とするが、これに限定するものではなく、より複数の情報を使って画像マーカ配列としてもよい。
The image marker
車両位置測定部22は、画像マーカデータベース23を参照し、画像認識部111から出力される画像マーカ配列から位置情報を取得し、当該車両の位置(地点1等)を出力
する。
The vehicle
〈第三実施形態の変形例〉
上述の第三実施形態における車両位置検出装置では、ビデオカメラ10が車両直下に通過する画像マーカを撮影する構成を例(図1参照)に挙げたが、第二実施形態における構成を用いるようにしてもよい。この場合、図6に示すように、車両の前方に設置されたビデオカメラ10から、車両前方を通過する画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。
<Modification of third embodiment>
In the vehicle position detection device in the third embodiment described above, the configuration in which the
この場合の車両位置検出装置の構成例を図18に示す。図18は、第三実施形態における車両位置検出装置の変形例を示す図である。すなわち、この場合の車両位置検出装置は、第三実施形態における装置構成に、第二実施形態における画像マーカ・車両間距離計算部71を付加した構成となる。
A configuration example of the vehicle position detection device in this case is shown in FIG. FIG. 18 is a diagram illustrating a modification of the vehicle position detection device according to the third embodiment. That is, the vehicle position detection device in this case has a configuration in which the image marker / inter-vehicle
画像マーカデータベース23には、画像マーカ配列と位置情報との関連付け情報の他、各画像マーカの縦の長さ、各画像マーカ間の間隔等が記憶される。
In the
画像マーカ・車両間距離計算部71は、第二実施形態と同様の処理により、カメラ設置角E、カメラの焦点距離B、カメラの設置高さD等を取得し、例えば、入力画面中の最も近い位置に写る画像マーカと車両との間の距離を算出する。
The image marker / vehicle
車両位置測定部22は、画像マーカ・車両間距離計算部71から受ける画像マーカと車両との間の距離と、当該画像マーカ配列により画像マーカデータベース23から取得される位置情報とから、車両の位置を特定する。
The vehicle
〈第三実施形態における作用/効果〉
ここで、上述した第三実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Third Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the third embodiment described above will be described.
第三実施形態における車両位置検出装置では、画像マーカ配列記憶部111に、認識された画像マーカの形態に対応する数値情報が逐次記憶される。また、画像マーカデータベース23には、当該画像マーカの配列とその配列に対応する位置情報とが格納されている。
In the vehicle position detection apparatus according to the third embodiment, numerical information corresponding to the recognized form of the image marker is sequentially stored in the image marker
これにより、本実施形態における車両位置検出装置では、最新の認識された画像マーカを含んだ当該画像マーカ配列に基づき、車両の位置情報が決定される。 Thereby, in the vehicle position detection apparatus according to the present embodiment, the position information of the vehicle is determined based on the image marker array including the latest recognized image marker.
従って、本実施形態における車両位置検出装置によれば、画像マーカの種類、すなわち、画像マーカに持たせる情報を少なくすることができる。よって、画像マーカ認識処理の負荷を抑えることができ、画像マーカのサイズも小さくすることができる。 Therefore, according to the vehicle position detection device of the present embodiment, the type of image marker, that is, the information to be provided to the image marker can be reduced. Therefore, the load of the image marker recognition process can be suppressed, and the size of the image marker can be reduced.
[第四実施形態]
次に、本発明の第四実施形態における車両位置検出装置について説明する。
[Fourth embodiment]
Next, the vehicle position detection apparatus in 4th embodiment of this invention is demonstrated.
図19は、第四実施形態における車両位置検出装置の概要を示す図である。本車両位置検出装置は、図19に示すように、例えば、道路等に設置されたビデオカメラ10(本発明の撮像部に相当)から、車両に備え付けられた画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。なお、ビデオカメラ10の設置位置等は、図19に示す位置に限定するものではなく、車両の画像マーカ15を撮影可能な位置であればどこでもよい。
FIG. 19 is a diagram illustrating an outline of a vehicle position detection device according to the fourth embodiment. As shown in FIG. 19, the present vehicle position detection device photographs, for example, an
〔装置構成〕
第四実施形態における車両位置検出装置の機能構成について、図20を用いて説明する。図20は、第四実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
The functional configuration of the vehicle position detection device in the fourth embodiment will be described with reference to FIG. FIG. 20 is a functional block diagram of the vehicle position detection apparatus in the fourth embodiment.
第四実施形態における車両位置検出装置は、車両以外の場所に、画像入力部201(本発明の入力部に相当)、画像認識部202(本発明の認識部に相当)、識別情報取得部203(本発明の取得部に相当)、画像マーカデータベース204(本発明の記憶部に相当)、及び情報送信部205(本発明の送信部に相当)を備え、車両に、情報受信部206(本発明の受信部に相当)、車両位置測定部207(本発明の決定部に相当)、及び位置情報データベース208を備える。車両以外の場所とは、路上、信号機、電柱等、車両と隣接する場所が考えられる。画像マーカ15の構成については、第一実施形態と同様であるため、説明を省略する。
The vehicle position detection device according to the fourth embodiment includes an image input unit 201 (corresponding to the input unit of the present invention), an image recognition unit 202 (corresponding to the recognition unit of the present invention), and an identification
画像入力部201には、画像マーカ15をビデオカメラ10によって撮影した画像が逐次、入力される。画像入力部201は、入力された画像データを画像認識部202に渡す。
Images obtained by photographing the
画像認識部202は、画像入力部201から画像データを受けると、画像データ中にある画像マーカの形状を認識する。画像認識部202による画像認識処理については、第一実施形態と同様である。画像認識部202は、当該画像認識処理により当該画像マーカの形態に対応する数値情報を取得し、識別情報取得部203に渡す。
Upon receiving image data from the
画像マーカデータベース204には、画像マーカの形態に対応する数値情報とその数値情報に対応する車両の識別情報が格納されている。識別情報取得部203は、画像マーカデータベース204を参照することにより、画像マーカの形態に対応する情報から車両の識別情報を取得し、情報送信部205に出力する。
The
情報送信部205は、識別情報取得部203から受けた車両の識別情報と自装置を示す識別情報を車両に送信する。この送信されたデータを受信する情報受信部206は、情報送信部205と無線により通信する。無線通信の規格については、何ら制限するものではない。
The
車両に搭載された情報受信部206は、情報送信部205から送信され、アンテナ等により取得された、当該装置を示す識別情報と車両の識別情報を受信する。受信された情報は、車両位置測定部207に出力される。
The
位置情報データベース208には、情報送信部205から送信される当該装置を示す識別情報とその識別情報に対応する位置情報とが格納されている。
The
車両位置測定部207は、受信された車両の識別情報から、当該受信された情報が自車両に関する情報か否かを判断する。車両位置測定部207は、例えば、各車両にそれぞれ搭載されるメモリに予め記憶された自車両を示す識別情報と、情報受信部206で受信された車両の識別情報とを比較し、一致した場合に自車両に関する情報であると判断する。車両位置測定部207は、受信された情報が自車両に関する情報であると判断すると、当該装置を示す識別情報を位置情報データベースに問い合わせることにより、当該路上に設置された装置の位置を取得し、車両の位置とする。
The vehicle
なお、画像マーカの形態に対応する情報を車両の識別情報とみなし、情報送信部205から車両の識別情報を送信する代わりに、画像マーカの形態に対応する情報を送信するよ
うにしてもよい。この場合には、画像マーカデータベース204は不要となる。そして、車両位置測定部207は、受信された画像マーカの形態に対応する情報から、自車両に関する情報であるか否かを判断する。
Information corresponding to the form of the image marker may be regarded as vehicle identification information, and instead of transmitting the vehicle identification information from the
〈第四実施形態の変形例〉
上述の第四実施形態における車両位置検出装置では、情報送信部205が路上に設置された装置を示す識別情報を車両に送信する構成を採るが、情報送信部205から送信される情報として、当該装置の位置情報を送信するようにしてもよい。
<Modification of Fourth Embodiment>
In the vehicle position detection device in the fourth embodiment described above, the
この場合の車両位置検出装置の機能ブロックを図21に示す。図21に示される第四実施形態における車両位置検出装置では、車両に備え付けられる車両位置検出装置には、車両位置測定部207及び位置情報データベース208に相当する機能部は省かれている。
FIG. 21 shows functional blocks of the vehicle position detection device in this case. In the vehicle position detection device in the fourth embodiment shown in FIG. 21, the vehicle position detection device provided in the vehicle does not include functional units corresponding to the vehicle
情報送信部205は、メモリ等に格納された自身の位置情報を読み出し、車両の識別情報若しくは画像マーカの形態に対応する情報と共に、送信する。これらの情報を受信した情報受信部206は、車両の識別情報若しくは画像マーカの形態に対応する情報から、自車両に関する情報か否かを判断する。情報受信部206は、自車両に関する情報であると判断すると、受信された位置情報により、車両の位置を特定する。
The
〈第四実施形態における作用/効果〉
ここで、上述した第四実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Fourth Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the fourth embodiment described above will be described.
第四実施形態における車両位置検出装置では、画像マーカが車両に搭載され、路上に設置されたビデオカメラで撮影される。撮影された画像マーカが画像認識部202により認識されると、画像マーカデータベース204から当該画像マーカに対応する車両の識別情報が取得される。取得された車両の識別情報は、路上に設置された本装置を示す識別情報と共に、情報送信部205から送信される。
In the vehicle position detection apparatus according to the fourth embodiment, an image marker is mounted on a vehicle and photographed with a video camera installed on the road. When the captured image marker is recognized by the
当該車両の識別情報と本装置を示す識別情報とが情報受信部206により受信されると、車両位置測定部207では、これら受信された情報が自車両のための情報であるか否かが、受信された車両の識別情報に基づき判断される。当該受信された情報が自車両のための情報であると判断されると、位置情報データベース208が参照され、受信された本装置を示す識別情報により、本装置の位置情報が取得される。第四実施形態における車両位置検出装置では、取得された本装置の位置情報が車両の位置として特定される。
When the
また、第四実施形態における車両位置検出装置の変形例では、車外に設置された装置から送信される情報のうち、当該本装置を示す識別情報の代わりに、当該本装置の位置情報が送信される。これにより、受信側となる車載装置では、他の処理がなされることなく、受信された情報がその車両の位置として特定される。 Further, in the modification of the vehicle position detection device in the fourth embodiment, the position information of the device is transmitted instead of the identification information indicating the device among the information transmitted from the device installed outside the vehicle. The Thereby, in the in-vehicle device on the receiving side, the received information is specified as the position of the vehicle without performing other processes.
[第五実施形態]
次に、本発明の第五実施形態における衝突回避装置について説明する。第五実施形態における衝突回避装置は、上述の第一実施形態から第四実施形態における車両位置検出装置から出力される位置情報を利用して、車両の衝突を回避する。
[Fifth embodiment]
Next, a collision avoidance device according to a fifth embodiment of the present invention will be described. The collision avoidance device in the fifth embodiment avoids a vehicle collision by using the position information output from the vehicle position detection device in the first to fourth embodiments described above.
図22は、第五実施形態における衝突回避装置の概要を示す図である。本衝突回避装置を搭載した車両221と車両222とは、自身で検出された位置情報をお互いにやりとりすることにより、衝突を回避する。
FIG. 22 is a diagram illustrating an outline of the collision avoidance device according to the fifth embodiment. The
〔装置構成〕
第五実施形態における衝突回避装置の機能構成について、図23を用いて説明する。図23は、第五実施形態における衝突回避装置の機能ブロック図である。
〔Device configuration〕
A functional configuration of the collision avoidance device according to the fifth embodiment will be described with reference to FIG. FIG. 23 is a functional block diagram of the collision avoidance device according to the fifth embodiment.
第五実施形態における衝突回避装置は、車両位置検出装置231、距離計算部232(本発明の距離計算部に相当)、通信部233(本発明の通信部に相当)、衝突判定部234(本発明の衝突判定部に相当)、及び衝突警報・回避部235(本発明の制御部に相当)を備える。車両位置検出装置231は、上述の第一実施形態から第四実施形態のいずれかの方法により、画像マーカから自車両の位置を検出し、距離計算部232に出力する。
The collision avoidance device in the fifth embodiment includes a vehicle
距離計算部232は、車両位置検出装置231から受ける自車両の位置情報から交差点までの距離を計算する。距離計算部232は、例えば、メモリに格納されている地図情報等を利用して、位置情報から交差点までの距離を計算する。なお、車両位置検出装置231から、直接現在の位置から交差点までの距離情報を受けるようにしてもよいし、交差点等に設置された通信装置から通信部233を経由して入力されるようにしてもよい。距離計算部232は、算出された交差点までの距離情報を衝突判定部234と通信部233に渡す。
The
通信部233は、同じ交差点に進入し交差する可能性のある車両へ、自車両の交差点までの距離及び車両速度を送信する。また、通信部233は、同じ交差点に進入し交差する可能性のある相手車両から、相手車両における交差点までの距離及び車両速度を受信する。通信部233は、受信された相手車両における交差点までの距離及び車両速度を衝突判定部234に出力する。
The
衝突判定部234は、距離計算部232から受ける自車両の交差点までの距離、及び自車両に搭載される車速センサ236から受ける車両速度と、通信部233から受ける相手車両の交差点までの距離及び車両速度とから、当該交差点における衝突の可能性を判断する。この衝突可能性の判断には、衝突の可能性があると判断される所定の閾値(例えば、5秒後の両車両間の距離が2メートル以内)が予めメモリ等に格納されており、そのような所定の閾値に基づいて判断されるようにしてもよい。衝突判定部234は、判定された衝突可能性を衝突警報・回避部235に渡す。
The
衝突警報・回避部235は、衝突の可能性があると判定されている場合に、警報発生やブレーキ等の衝突回避動作処理を行う。衝突警報・回避部235は、例えば、衝突判定部234から受ける情報を所定の警報レベルに分け、その警報レベルに応じた処理を行うようにしてもよい。
When it is determined that there is a possibility of a collision, the collision warning / avoidance unit 235 performs a collision avoidance operation process such as alarm generation or braking. For example, the collision warning / avoidance unit 235 may divide the information received from the
なお、上述の装置構成では、車両221と車両222とが直接通信する例を示したが、図24に示すように、交差点等に設置された衝突監視装置241を経由して、交差点までの距離情報や車速度情報等をやりとりするようにしてもよい。この場合には、図23に示す衝突回避装置の機能部のうち、車両には、車両位置検出装置231及び通信部233のみ備えるようにし、衝突監視装置241に、距離計算部232及び衝突判定部234を持たせるようにしてもよい。その場合、車両における車両位置検出装置231から出力される位置情報が通信部233から衝突監視装置241に送信され、衝突監視装置223の距離計算部232及び衝突判定部234により衝突判定情報が出力される。この衝突判定情報は、再度、車両に送信され、車両によって衝突回避制御がなされるようにしてもよい。
In the above-described device configuration, the example in which the
〈第五実施形態における作用/効果〉
ここで、上述した第五実施形態における衝突回避装置の作用及び効果について述べる。
<Operation / Effect in Fifth Embodiment>
Here, the operation and effect of the collision avoidance device in the fifth embodiment described above will be described.
第五実施形態における衝突回避装置では、他の実施形態における車両位置検出装置が出力する車両の位置情報から交差点までの距離を算出し、この算出された距離情報と、車速度情報とを、車両間相互に通信する。 In the collision avoidance device in the fifth embodiment, the distance to the intersection is calculated from the vehicle position information output by the vehicle position detection device in the other embodiment, and the calculated distance information and the vehicle speed information are used as the vehicle. Communicate with each other.
衝突判定部では、自車両に関する当該交差点までの距離及び車速度と、受信された他の車両に関するそれら情報とに基づき、当該交差点における衝突の可能性が判定される。この衝突の可能性の判定から、衝突警報・回避部235が所定の衝突回避動作制御を行う。 In the collision determination unit, the possibility of a collision at the intersection is determined based on the distance and the vehicle speed to the intersection regarding the host vehicle and the received information regarding the other vehicle. The collision warning / avoidance unit 235 performs predetermined collision avoidance operation control based on the determination of the possibility of the collision.
このように、本実施形態における衝突回避装置では、上述の実施形態の車両位置検出装置により検出された車両の位置情報が利用されることにより、他の車両との衝突可能性が判定される。これにより、検出された車両位置が安全な車両運転を可能とするシステムに利用することができる。 Thus, in the collision avoidance device according to the present embodiment, the possibility of a collision with another vehicle is determined by using the vehicle position information detected by the vehicle position detection device according to the above-described embodiment. Thereby, the detected vehicle position can be used for a system that enables safe vehicle driving.
[第六実施形態]
次に、本発明の第六実施形態における障害物検知装置について説明する。第六実施形態における障害物検知装置では、図25に示すような、路上にある障害物256が検知される。図25は、左に、障害物がない状態での路上に並ぶ画像マーカ251から255を示し、右に、障害物256が画像マーカ253上に存在する場合の例を示す。本障害物検知装置は、画像マーカの配列、画像マーカの位置等の情報をデータベースに格納し、あるべき位置に画像マーカが認識されない場合に、障害物が存在する可能性があると判断するものである。
[Sixth embodiment]
Next, an obstacle detection device according to a sixth embodiment of the present invention will be described. In the obstacle detection device according to the sixth embodiment, an
〔装置構成〕
第六実施形態における障害物検知装置の機能構成について、図26を用いて説明する。図26は、第六実施形態における障害物検知装置の機能ブロック図である。
〔Device configuration〕
A functional configuration of the obstacle detection apparatus according to the sixth embodiment will be described with reference to FIG. FIG. 26 is a functional block diagram of the obstacle detection apparatus according to the sixth embodiment.
第六実施形態における車両位置検出装置は、画像入力部20、画像認識部21、車両位置測定部22、画像マーカデータベース23、画像マーカ・車両間距離計算部71、及び障害物検知部261を備える。以下に、第六実施形態における障害物検知装置の各機能部について説明する。
The vehicle position detection apparatus in the sixth embodiment includes an
第六実施形態における障害物検知装置では、ビデオカメラが車両前方を撮影するように設置されている場合を想定しており、画像入力部20に入力される画像データは、複数の画像マーカが映し出される状態となっている。画像入力部20は、当該入力画像を画像認識部21に渡す。
In the obstacle detection device according to the sixth embodiment, it is assumed that the video camera is installed so as to photograph the front of the vehicle, and the image data input to the
画像認識部21は、画像入力部20から受けた画像データから、映し出された複数の画像マーカを認識する。個々の画像マーカに関する画像認識処理については、第一実施形態に説明したとおりである。画像認識部21は、認識された複数の画像マーカに対応する数値情報を車両位置測定部22に渡すと共に、画像マーカ・車両間距離計算部71に、認識された画像マーカに対応する数値情報、及び認識された画像マーカの画像データ中の位置情報(画像下端部からの位置等)を渡す。
The
車両位置測定部22は、画像マーカ・車両間距離計算部71と共に、車両位置測定処理を実行する。この処理については、第一及び二実施形態で説明したとおりであり、ここでは説明を省略する。
The vehicle
車両位置測定部22は、車両位置測定処理に加えて、画像認識部21から受けた複数の画像マーカに対応する数値情報に基づき、画像マーカデータベースからそれら画像マーカの位置を取得する。車両位置測定部22は、車両位置の情報と共に、認識された複数の画
像マーカそれぞれの位置情報を障害物検知部261に渡す。
In addition to the vehicle position measurement process, the vehicle
障害物検知部261は、認識された複数の画像マーカそれぞれの位置情報から、画像マーカデータベース23を参照し、本来認識されるべき画像マーカで認識されていない画像マーカがないかを探す。例えば、障害物検知部261は、図25の例によれば、画像データとして、画像マーカ254、252、及び251が認識されている。障害物検知部261は、認識されている画像マーカ254、252、及び251それぞれの位置情報のうち、車両に最も近い画像マーカ254の位置情報と、最も遠い位置にある画像マーカ251の位置情報とから、画像マーカデータベース23を参照することにより、両画像マーカの間に位置すべき画像マーカを検索する。障害物検知部261は、この検索により画像マーカ252及び253が存在することを認知する。これにより、障害物検知部261は、入力画像データに、画像マーカ253が存在しないことを検知する。
The
障害物検知部261は、認識されるべき画像マーカで認識されていないものがあると検知すると、その画像マーカ上に障害物がある可能性があると判断する。障害物検知部261は、認識されていない画像マーカ253の位置情報を画像マーカデータベース23から取得し、その位置情報と、車両の位置情報とから、その障害物への接近度を判定する。障害物検知部261は、所定の距離以上接近したと判断すると、障害物警報発生、ブレーキ等の所定の障害物回避動作制御を行うよう、所定の機能部に指示する。なお、障害物検知部261の最終的な出力(所定の機能部への指示)は、本実施形態により限定するものではない。
When the
〈第六実施形態における作用/効果〉
ここで、上述した第六実施形態における障害物回避装置の作用及び効果について述べる。
<Operation / Effect in Sixth Embodiment>
Here, the operation and effect of the obstacle avoidance device in the sixth embodiment described above will be described.
第六実施形態における障害物回避装置では、画像認識部21により複数の画像マーカが認識され、それらが利用され、車両位置測定部22、画像マーカ・車両間距離計算部71により車両の位置情報が取得される。
In the obstacle avoidance apparatus according to the sixth embodiment, the
また、障害物検知部261では、認識された複数の画像マーカに関する位置情報から、画像マーカデーベースを参照することにより、認識されるべき画像マーカで認識されていない画像マーカが検知され、その画像マーカの位置情報が取得される。
Also, the
これにより、認識されるべき画像マーカで認識されていない画像マーカの位置情報と、同じく画像マーカにより特定された車両の位置情報とから、障害物回避制御がなされる。 Thereby, obstacle avoidance control is performed from the position information of the image marker not recognized by the image marker to be recognized and the position information of the vehicle specified by the image marker.
このように、本実施形態における障害物回避装置では、認識されない画像マーカをもって、障害物が検知され、当該障害物が自動回避される。 Thus, in the obstacle avoidance apparatus according to the present embodiment, an obstacle is detected with an unrecognized image marker, and the obstacle is automatically avoided.
従って、当該画像マーカを用いることにより、車両の位置情報を取得するとともに、障害物を回避することもできるようになる。 Therefore, by using the image marker, it is possible to acquire position information of the vehicle and avoid an obstacle.
[第七実施形態]
次に、本発明の第七実施形態における車両位置検出装置について説明する。
[Seventh embodiment]
Next, the vehicle position detection apparatus in 7th embodiment of this invention is demonstrated.
〔装置構成〕
第七実施形態における車両位置検出装置の機能構成について、図27を用いて説明する。図27は、第七実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
The functional configuration of the vehicle position detection device in the seventh embodiment will be described with reference to FIG. FIG. 27 is a functional block diagram of the vehicle position detection device according to the seventh embodiment.
第七実施形態における車両位置検出装置は、画像入力部20、画像認識部21、画像マーカエラー検出訂正部271、画像マーカ間距離測定部272、画像マーカ間距離計算部273、車両位置測定部22、画像マーカデータベース23を備える。以下に、第七実施形態における車両位置検出装置の各機能部について説明する。
The vehicle position detection apparatus according to the seventh embodiment includes an
画像入力部20、画像認識部21については、第一実施形態等と同様であるため、説明を省略する。画像認識部21は、認識された画像マーカに対応する情報を画像マーカエラー検出訂正部271、及び画像マーカ間距離計算部273にそれぞれ渡すと共に、画像マーカが認識された旨を画像マーカ間距離測定部272に通知する。
About the
画像マーカ間距離測定部272は、画像認識部21からの画像マーカ認識通知と、車速センサ274からの車速情報とに基づき、画像マーカ間の距離を測定する。画像マーカ間距離測定部272は、画像マーカ認識通知を受けたときから次の通知を受けるまでの間の時間を計測し、さらに、その間の車速情報とから、画像マーカ間の距離を測定する。画像マーカ間距離測定部272は、測定された画像マーカ間の距離を画像マーカエラー検出訂正部271に渡す。
The inter-image marker
画像マーカ間距離計算部273は、画像認識部21から受ける画像マーカに対応する数値情報に基づき、画像マーカデータベース23から、当該画像マーカの位置情報を取得する。画像マーカ間距離計算部273は、前回認識された画像マーカの位置情報を記憶しており、それと今回取得された画像マーカの位置情報とから、画像マーカ間距離を計算する。画像マーカ間距離計算部273は、算出された画像マーカ間距離を画像マーカエラー検出訂正部271に渡す。
The inter-image marker
画像マーカエラー検出訂正部271は、画像マーカ間距離測定部272により測定された画像マーカ間距離と、画像マーカ間距離計算部273により算出された画像マーカ間距離とを比較する。画像マーカエラー検出訂正部271は、この比較において、両者が異なる場合には、画像マーカ間距離測定部272の結果が正しいと判断し、画像マーカ間距離測定部272からの画像マーカ間距離に対応する画像マーカを画像マーカデータベース23から検索する。画像マーカエラー検出訂正部271は、検索された正しい画像マーカ情報を車両位置測定部22に渡す。
The image marker error detection and
画像マーカの読み取りエラーが生じると画像マーカデータベースから計算される画像マーカ間距離は車速センサにより計測される距離とは大きく異なる一方、車速センサによる距離計測が画像マーカ間距離を測定するには十分な精度であると考えられるため、車速を優先適用するようにする。 When an image marker reading error occurs, the distance between image markers calculated from the image marker database is significantly different from the distance measured by the vehicle speed sensor, while the distance measurement by the vehicle speed sensor is sufficient to measure the distance between image markers. Because it is considered to be accuracy, priority is given to vehicle speed.
また、画像マーカ間距離測定部272と画像マーカ間距離計算部273との結果が同じ場合には、画像マーカエラー検出訂正部271は、画像認識部21から出力された画像マーカ情報を訂正せずに車両位置測定部22に渡す。
If the results of the image marker
車両位置測定部22は、画像マーカデータベース23を参照し、画像マーカエラー検出訂正部271から出力される画像マーカに対応する情報から画像マーカの位置を取得し、当該車両の位置(交差点まで100メートルの地点等)を出力する。
The vehicle
〈第七実施形態における作用/効果〉
ここで、上述した第七実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Seventh Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the seventh embodiment will be described.
第七実施形態における車両位置検出装置では、第一実施形態と同様に、ビデオカメラに
より撮影された画像データが画像入力部20に入力され、画像認識部21によりその画像データから画像マーカが認識される。
In the vehicle position detection apparatus according to the seventh embodiment, as in the first embodiment, image data captured by a video camera is input to the
画像マーカ間距離測定部272では、車速センサ274からの車速情報と画像認識部21からの画像マーカ認識通知とから、画像マーカ間距離が測定される。
The inter-image marker
一方、画像マーカ間距離計算部273では、画像マーカデータベース23が参照され、画像認識部21により認識された画像マーカ情報に基づく位置情報から、画像マーカ間距離が計算される。
On the other hand, the image marker
画像マーカエラー検出訂正部271では、画像マーカ間距離測定部から出力される画像マーカ間距離の測定値と画像マーカ間距離計算部から出力される画像マーカ間距離の計算値を比較して、両者の値が異なる場合に、当該画像マーカの誤認識が検知される。すなわち、画像マーカの読み取りエラーを検出するため、車速センサから得られる画像マーカ間距離とデータベースに格納されている画像マーカの位置情報から計算される画像マーカ間距離を比較し、異なる場合に画像マーカ間距離計算部からの画像マーカの位置を参照して正しい画像マーカの種類を車両位置測定部に出力する。
The image marker error detection /
〈第七実施形態の変形例〉
上述の第七実施形態における車両位置検出装置では、ビデオカメラ10が車両直下に通過する画像マーカを撮影する構成を例(図1参照)に挙げたが、第二実施形態における構成を用いるようにしてもよい。この場合、図6に示すように、車両の前方に設置されたビデオカメラ10から、車両前方を通過する画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。
<Modification of the seventh embodiment>
In the vehicle position detection device in the seventh embodiment described above, the configuration in which the
この場合の車両位置検出装置の構成例を図28に示す。図28は、第七実施形態における車両位置検出装置の変形例を示す図である。すなわち、この場合の車両位置検出装置は、第七実施形態における装置構成に、第二実施形態における画像マーカ・車両間距離計算部71を付加した構成となる。
A configuration example of the vehicle position detection device in this case is shown in FIG. FIG. 28 is a diagram illustrating a modification of the vehicle position detection device according to the seventh embodiment. That is, the vehicle position detection device in this case has a configuration in which the image marker / inter-vehicle
画像マーカデータベース23には、画像マーカ配列と位置情報との関連付け情報の他、各画像マーカの縦の長さ、各画像マーカ間の間隔等が記憶される。
In the
画像マーカ・車両間距離計算部71は、第二実施形態と同様の処理により、カメラ設置角E、カメラの焦点距離B、カメラの設置高さD等を取得し、例えば、入力画面中の最も近い位置に写る画像マーカと車両との間の距離を算出する。
The image marker / vehicle
車両位置測定部22は、画像マーカ・車両間距離計算部71から受ける画像マーカと車両との間の距離と、当該画像マーカ配列により画像マーカデータベース23から取得される位置情報とから、車両の位置を特定する。
The vehicle
[第八実施形態]
次に、本発明の第八実施形態における車両位置検出装置について説明する。
[Eighth embodiment]
Next, a vehicle position detection device according to an eighth embodiment of the present invention will be described.
〔装置構成〕
第八実施形態における車両位置検出装置の機能構成について、図29を用いて説明する。図29は、第八実施形態における車両位置検出装置の機能ブロック図である。第八実施形態における車両位置検出装置は、画像入力部を複数有する(画像入力部20、291及び292)こと以外、第一実施形態と同様の構成を備える。以下に、第八実施形態における車両位置検出装置の各機能部について説明する。なお、第一実施形態と同様の機能部に
ついては、説明を省略する。
〔Device configuration〕
A functional configuration of the vehicle position detection apparatus according to the eighth embodiment will be described with reference to FIG. FIG. 29 is a functional block diagram of the vehicle position detection apparatus in the eighth embodiment. The vehicle position detection apparatus according to the eighth embodiment has the same configuration as that of the first embodiment except that a plurality of image input units (
画像入力部20、291及び292はそれぞれ、車両に搭載されたビデオカメラにより撮影された、画像データを画像認識部21に出力する。
Each of the
画像認識部21は、画像入力部20、291及び292から出力されたそれぞれの画像データに対してそれぞれ画像処理を行い、それぞれの画像マーカの種類を認識する。画像認識部21は、画像マーカに対応する数値情報をそれぞれ車両位置測定部22に出力する。
The
車両位置測定部22は、画像認識部21から受けた画像マーカに対応する数値情報を比較し、画像マーカを正しく認識しているものを選択する。車両位置測定部22は、選択された画像マーカに対応する情報に基づき、画像マーカデータベース23を参照することにより画像マーカの位置情報を取得し、車両位置検出結果として出力する。
The vehicle
なお、上述の構成では、複数の画像入力部20、291及び292からの画像データが同時に利用されるが、画像入力部20、291及び292の画像取り込みタイミングが異なるようにしてもよい。図30は、画像入力部20、291及び292の画像取り込みタイミングが等間隔で異なる場合の例による取り込みタイミングを示す図である。
In the above-described configuration, image data from a plurality of
図30に示すように等間隔で異なる時間で画像入力部20、291及び292から画像データが取り込まれる場合、その間隔で、車両位置測定がなされるようにしてもよい。それにより、図30に示すタイミングの場合、画像入力部の画像取り込みタイミングの3倍のフレームレートで画像を取り込むことが可能となり、高精度の車両位置検出が可能となる。
As shown in FIG. 30, when image data is captured from the
〈第八実施形態における作用/効果〉
ここで、上述した第八実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Eighth Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the eighth embodiment will be described.
第八実施形態における車両位置検出装置では、複数のビデオカメラから入力される画像データに対しそれぞれ、画像処理がなされ、画像マーカがそれぞれ認識される。そして、複数の画像データから認識された情報を基に、正しいと認識された画像マーカ情報を用いて、車両位置を特定する。 In the vehicle position detection apparatus according to the eighth embodiment, image processing is performed on image data input from a plurality of video cameras, and image markers are recognized. And based on the information recognized from several image data, a vehicle position is pinpointed using the image marker information recognized as correct.
これにより、1つの画像入力部が障害物のために画像マーカを撮影できなかったとしても他の画像入力部で撮影された画像データを利用することができる。この結果、複数の入力画像を使用することにより高信頼、高精度の画像マーカの認識が可能となり、高信頼、高精度の車両位置検出が可能となる。 As a result, even if one image input unit cannot capture an image marker due to an obstacle, the image data captured by another image input unit can be used. As a result, by using a plurality of input images, highly reliable and highly accurate image markers can be recognized, and highly reliable and highly accurate vehicle position detection becomes possible.
〈第八実施形態の変形例〉
上述の第八実施形態における車両位置検出装置では、画像入力部20、291及び292が出力する画像データは、画像認識部21により取得されていたが、画像認識部を画像入力部それぞれに対応するように備えるようにしてもよい(画像認識部21、311、及び312)。
<Modification of the eighth embodiment>
In the vehicle position detection device in the eighth embodiment described above, the image data output from the
この場合の車両位置検出装置の機能ブロックを図31に示す。画像認識部311は、画像入力部291からの画像データを受け、画像マーカを認識する。同様に、画像認識部21は、画像入力部20からの画像データを受け、画像マーカを認識する。画像認識部312は、画像入力部292からの画像データを受け、画像マーカを認識する。
FIG. 31 shows functional blocks of the vehicle position detection device in this case. The
これら画像認識部21、311及び312からそれぞれ出力される画像マーカ認識結果を基に、車両位置測定部22では、正しく認識された画像マーカを特定し、その画像マーカを利用することにより、車両位置を測定する。
Based on the image marker recognition results output from the
[第九実施形態]
次に、本発明の第九実施形態における車両位置検出装置について説明する。
[Ninth embodiment]
Next, the vehicle position detection apparatus in 9th embodiment of this invention is demonstrated.
図32は、第九実施形態における車両位置検出装置の概要を示す図である。本車両位置検出装置は、図32に示すように、特定の位置に設置されたビデオカメラ10から、路上等に備え付けられた複数の画像マーカ15を撮影し、その撮影された画像を用いて位置検出を行う。すなわち、本車両位置検出装置は、図32に示す321から322の範囲を撮影範囲とし、その撮影範囲に入るべき画像マーカで撮影されていない画像マーカを認識することにより、車両の位置を特定するものである。なお、ビデオカメラ10の設置位置等は、図32に示す位置に限定するものではなく、路上等に設置された画像マーカ15を俯瞰撮影可能な位置であればどこでもよい。
FIG. 32 is a diagram illustrating an outline of a vehicle position detection device according to the ninth embodiment. As shown in FIG. 32, the present vehicle position detection apparatus photographs a plurality of
〔装置構成〕
第九実施形態における車両位置検出装置の機能構成について、図33を用いて説明する。図33は、第九実施形態における車両位置検出装置の機能ブロック図である。
〔Device configuration〕
A functional configuration of the vehicle position detection apparatus according to the ninth embodiment will be described with reference to FIG. FIG. 33 is a functional block diagram of the vehicle position detection device in the ninth embodiment.
第九実施形態における車両位置検出装置は、画像入力部331、画像認識部332、画像マーカ位置測定部333、画像マーカデータベース334、車両位置検知部335、及び画像マーカ位置記憶部336を備える。
The vehicle position detection apparatus according to the ninth embodiment includes an
画像入力部331には、複数の画像マーカ15をビデオカメラ10によって撮影した画像が逐次、入力される。画像入力部331は、入力された画像データを画像認識部332に渡す。
To the
画像認識部332は、画像入力部331から画像データを受けると、画像データ中にある複数の画像マーカの形状についてそれぞれ認識する。画像認識部332による画像認識処理については、第一実施形態等と同様である。画像認識部332は、当該画像認識処理により当該画像マーカの形態に対応する数値情報をそれぞれ取得し、画像マーカ位置測定部333に渡す。
Upon receiving image data from the
画像マーカ位置測定部333は、画像マーカデータベース334を参照することにより、画像認識部332から受けた画像マーカの形態に対応した数値情報から、画像マーカの位置情報を取得する。画像マーカ位置測定部333は、取得された複数の画像マーカに対応する位置情報を車両位置検知部335に出力する。
The image marker
車両位置検知部335は、画像マーカ位置測定部333から受けた画像マーカの位置情報を、画像マーカ位置記憶部336に記憶する。車両位置検出部335は、画像マーカ位置記憶部336に記憶された画像マーカの位置と、画像マーカ位置測定部333から入力される画像マーカの位置とを比較することにより、認識されていない画像マーカを特定する。車両位置検知部335は、特定された画像マーカを車両によって隠れている画像マーカであると認識し、その画像マーカの位置を車両の位置情報として出力する。
The vehicle
〈第九実施形態における作用/効果〉
ここで、上述した第九実施形態における車両位置検出装置の作用及び効果について述べる。
<Operation / Effect in Ninth Embodiment>
Here, the operation and effect of the vehicle position detection apparatus in the ninth embodiment described above will be described.
第九実施形態における車両位置検出装置では、複数の画像マーカ15を固定で撮影するビデオカメラから画像データが入力される。入力された画像データに含まれる画像マーカは、画像認識部332により認識され、画像マーカの形態に対応する情報が特定される。
In the vehicle position detection apparatus according to the ninth embodiment, image data is input from a video camera that captures a plurality of
画像マーカ位置測定部333では、当該認識された画像マーカの形態に対応する情報に基づき、それに対応する位置情報が画像マーカデータベース334から取得され、この取得された位置情報は、画像マーカ位置記憶部336に記憶される。
The image marker
車両位置検知部335では、今回取得された画像マーカ15の位置情報と、画像マーカ位置記憶部336に記憶される位置情報とを比較することにより、今回認識されていない画像マーカがあるか否かが判断される。今回認識されていない画像マーカがあると判断されると、当該画像マーカの位置情報を車両の位置として特定する。
The vehicle
このように、第九実施形態における車両位置検出装置では、信号機や電柱等の路上に固定で設置されるビデオカメラで、常時画像マーカを認識、特定し、認識されない画像マーカがあると判断した場合に、その画像マーカの位置情報を当該車両の位置とする。 As described above, in the vehicle position detection device according to the ninth embodiment, when a video camera fixedly installed on a road such as a traffic light or a utility pole recognizes and identifies an image marker at all times, and determines that there is an image marker that is not recognized. In addition, the position information of the image marker is set as the position of the vehicle.
これにより、画像マーカを用いた車両位置検出が交通制御システム等に用いることも可能となる。 As a result, vehicle position detection using an image marker can be used in a traffic control system or the like.
[上述の実施形態における変形例]
上述の実施形態では、画像マーカは、図2に示すような形態のものについて言及したが、図34に示すように、他の様々な形態により特定されるようにしてもよい。図34は、画像マーカの変形例を示す。
[Modifications in the above embodiment]
In the above-described embodiment, the image marker is referred to in the form as shown in FIG. 2, but may be specified in various other forms as shown in FIG. 34. FIG. 34 shows a modification of the image marker.
画像マーカは、形状、模様、色、輝度等、画像処理され、画像マーカの種類を特定できるものであれば、どのような形態を持つものでもよい。また、画像マーカは、形状、色、輝度の相違を単独で利用したものだけでなく、複数の形態を組み合わせて、個々を特定するようにしてもよい。例えば、形状と色との組み合わせにより特定されるようにしてもよい。 The image marker may have any form as long as the shape, pattern, color, brightness, and the like are subjected to image processing and the type of the image marker can be specified. Further, the image marker is not limited to the one that uses the difference in shape, color, and brightness, but may be specified individually by combining a plurality of forms. For example, it may be specified by a combination of shape and color.
また、図35に示すように、連続した画像マーカを用いるようにしてもよい。 Further, as shown in FIG. 35, continuous image markers may be used.
[その他]
本実施形態は次の発明を開示する。各項に開示される発明は、必要に応じて可能な限り組み合わせることができる。
[Other]
This embodiment discloses the following invention. The invention disclosed in each section can be combined as much as possible.
(付記1)
車両周辺の映像を撮影する撮像部と、
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、
特定された指標の種類に基づき、前記記憶部から位置情報を取得する取得部と、
取得された位置情報により車両の位置を決定する決定部と、
を備える車両位置検出装置。
(Appendix 1)
An imaging unit that captures a video around the vehicle;
An input unit for capturing captured video as image data;
A recognition unit that recognizes an index having a predetermined shape from the image data and identifies a type of the recognized index;
A storage unit for storing the type of the index and position information corresponding to the type of the index;
An acquisition unit that acquires position information from the storage unit based on the type of the identified index;
A determination unit that determines the position of the vehicle based on the acquired position information;
A vehicle position detecting device.
(付記2)
前記認識部は、前記画像データの中から、前記指標の種類を特定すると共に、認識され
た指標の画像データ上の位置及び大きさを認識し、
前記記憶部は、前記指標の種類に対応する位置情報の他、その指標の大きさと、隣接する他の指標との間隔を記憶し、
前記取得部は、前記位置情報の他、該指標の大きさと、隣接する他の指標との間隔を取得し、
前記決定部は、取得された指標の大きさと隣接する他の指標との間隔に基づき、車両から、該指標までの距離を算出する算出部を更に備え、算出された該指標までの距離と、前記位置情報とから、車両の位置を決定する、
付記1に記載の車両位置検出装置。
(Appendix 2)
The recognizing unit specifies the type of the index from the image data, recognizes the position and size of the recognized index on the image data,
The storage unit stores, in addition to the position information corresponding to the type of the index, the size of the index and an interval between other adjacent indexes,
In addition to the position information, the acquisition unit acquires the size of the index and an interval between other adjacent indexes,
The determination unit further includes a calculation unit that calculates a distance from the vehicle to the index based on the distance between the acquired index size and another adjacent index, and the calculated distance to the index; The position of the vehicle is determined from the position information.
The vehicle position detection device according to
(付記3)
前記認識部により特定された指標の種類を連続した並びで格納する格納部を更に備え、
前記記憶部は、幾つか連続した前記指標の種類の並びと、その並びに対応する前記位置情報とを記憶し、
前記取得部は、前記格納部に格納された指標の種類の並びに基づき、前記記憶部から、その並びに対応する前記位置情報を取得する、
付記1又は2に記載の車両位置検出装置。
(Appendix 3)
A storage unit for storing the types of indices specified by the recognition unit in a continuous sequence;
The storage unit stores several consecutive types of the indicator types and the corresponding position information.
The acquisition unit acquires the corresponding position information from the storage unit based on a sequence of types of indices stored in the storage unit,
The vehicle position detection device according to
(付記4)
車両が通過する地点周辺を撮影する撮像部と、
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から、前記車両に搭載され所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類と、その指標の種類に対応する車両の識別情報とを記憶する記憶部と、
特定された指標の種類に基づき、前記記憶部から車両の識別情報を取得する取得部と、
前記取得された車両の識別情報と自装置に関する位置情報とを送信する送信部と、
を備える車両位置検出装置。
(Appendix 4)
An imaging unit that captures the area around the point where the vehicle passes;
An input unit for capturing captured video as image data;
A recognition unit that recognizes an index having a predetermined shape mounted on the vehicle from the image data, and identifies a type of the recognized index;
A storage unit that stores the type of the index and vehicle identification information corresponding to the type of the index;
An acquisition unit that acquires vehicle identification information from the storage unit, based on the type of the specified index;
A transmission unit for transmitting the acquired vehicle identification information and position information about the own device;
A vehicle position detecting device.
(付記5)
自車両を識別するための所定の形状を持つ指標を有する車両に搭載された車両位置検出装置であって、
前記指標に基づき車両を特定可能な他の装置から、車両を識別する車両識別情報と、前記他の装置に関する位置情報とを受信する受信部と、
前記車両識別情報から、受信された位置情報が自車両のための情報であると判断された場合に、当該受信された位置情報から自車両の位置を決定する決定部と、
を備える車両位置検出装置。
(Appendix 5)
A vehicle position detection device mounted on a vehicle having an index having a predetermined shape for identifying the host vehicle,
A receiving unit for receiving vehicle identification information for identifying the vehicle and position information regarding the other device from another device capable of specifying the vehicle based on the index;
A determination unit that determines the position of the host vehicle from the received position information when the received position information is determined to be information for the host vehicle from the vehicle identification information;
A vehicle position detecting device.
(付記6)
前記送信部は、自装置に関する位置情報に代え、自装置の固有の識別情報を送信する、
付記4に記載の車両位置検出装置。
(Appendix 6)
The transmitting unit transmits unique identification information of the own device instead of position information regarding the own device.
The vehicle position detection device according to appendix 4.
(付記7)
前記受信部は、前記他の装置に関する位置情報に代え、前記他の装置を識別する装置識別情報を受信し、
前記決定部は、前記装置識別情報とその装置識別情報に対応する位置情報とを記憶する車両記憶部を更に備え、前記車両識別情報から、受信された装置識別情報が自車両のための情報であると判断された場合に、前記車両記憶部から、受信された装置識別情報に基づき、位置情報を取得し、この取得された位置情報により自車両の位置を決定する、
付記5に記載の車両位置検出装置。
(Appendix 7)
The receiving unit receives device identification information for identifying the other device, instead of position information regarding the other device,
The determination unit further includes a vehicle storage unit that stores the device identification information and position information corresponding to the device identification information, and the received device identification information is information for the host vehicle from the vehicle identification information. When it is determined that there is a position information from the vehicle storage unit based on the received device identification information, the position of the host vehicle is determined based on the acquired position information.
The vehicle position detection device according to appendix 5.
(付記8)
前記認識部による前記指標の認識と、自車両の車速度とに基づき、当該指標間の距離を測定する距離測定部と、
前記取得部により取得される指標の位置情報に基づく、当該指標間の距離を計算する距離計算部と、
前記距離測定部により測定された指標間の距離と、前記距離計算部により計算された指標間の距離とを比較し、その比較結果に基づき、前記認識部による認識の誤りを検出するエラー検出部と、
前記エラー検出部により認識の誤りが検出された場合に、前記距離測定部により測定された当該指標間の距離に基づき、前記記憶部から、正しい指標の種類に関する情報を取得するエラー訂正部とを更に備え、
前記取得部は、前記エラー訂正部により取得された指標の種類に基づき、前記記憶部から位置情報を取得する、
付記1、2、3いずれかに記載の車両位置検出装置。
(Appendix 8)
A distance measuring unit that measures the distance between the indicators based on the recognition of the indicators by the recognition unit and the vehicle speed of the host vehicle;
A distance calculation unit for calculating a distance between the indexes based on the position information of the indexes acquired by the acquisition unit;
An error detection unit that compares the distance between the indexes measured by the distance measurement unit and the distance between the indexes calculated by the distance calculation unit, and detects an error in recognition by the recognition unit based on the comparison result When,
An error correction unit that obtains information on the type of the correct index from the storage unit based on the distance between the indexes measured by the distance measurement unit when a recognition error is detected by the error detection unit; In addition,
The acquisition unit acquires position information from the storage unit based on the type of index acquired by the error correction unit,
The vehicle position detection device according to any one of
(付記9)
車両が通過する地点周辺を、所定の形状を持つ指標を少なくとも1つ含むように撮影する撮像部と、
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から、前記少なくとも1つの指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、
特定された全ての指標の種類に基づき、前記記憶部から位置情報を取得する取得部と、
取得された位置情報を記憶する位置記憶部と、
前記位置記憶部に記憶された位置情報と、前記取得部により取得された位置情報とを比較した結果、位置情報の数が一致しない場合に、前記取得部により取得された位置情報で足りない位置情報に対応する指標が認識されていないことを検知し、この認識されていない指標に関する位置情報を車両の位置と決定する決定部と、
を備える車両位置検出装置。
(Appendix 9)
An imaging unit that captures the vicinity of a point where the vehicle passes so as to include at least one index having a predetermined shape;
An input unit for capturing captured video as image data;
A recognition unit that recognizes the at least one index from the image data and identifies a type of the recognized index;
A storage unit for storing the type of the index and position information corresponding to the type of the index;
An acquisition unit that acquires position information from the storage unit, based on the types of all identified indicators,
A position storage unit for storing the acquired position information;
A position where the position information acquired by the acquisition unit is insufficient when the number of pieces of position information does not match as a result of comparing the position information stored in the position storage unit with the position information acquired by the acquisition unit. A determination unit that detects that an index corresponding to the information is not recognized, and determines position information regarding the unrecognized index as a vehicle position;
A vehicle position detecting device.
(付記10)
前記撮像部及び前記入力部を複数備える付記1、2、3、4、6、8、9いずれかに記載の車両位置検出装置。
(Appendix 10)
The vehicle position detection device according to any one of
(付記11)
前記認識部を複数備える付記10に記載の車両位置検出装置。
(Appendix 11)
The vehicle position detection device according to
(付記12)
前記複数の入力部は、それぞれ異なるタイミングで画像を取り込む付記10又は11記載の車両位置検出装置。
(Appendix 12)
The vehicle position detection device according to
(付記13)
前記指標は、形状、模様、色、輝度のいずれか、或いはその組み合わせにより種類分けされ、
前記認識部は、前記指標の持つ形状、模様、色、輝度のいずれか、或いはその組み合わせを認識することにより、指標の種類を特定する、
付記1から12いずれかに記載の車両位置検出装置。
(Appendix 13)
The index is classified by shape, pattern, color, brightness, or a combination thereof,
The recognizing unit identifies the type of the index by recognizing one of the shape, pattern, color, brightness, or a combination of the index,
The vehicle position detection device according to any one of
(付記14)
前記指標は、連続、或いは断片的な形状を有し、
前記認識部は、前記指標の持つ形状の疎密、或いは振幅、若しくはその組み合わせを認識することにより、指標の種類を特定する、
付記1から12いずれかに記載の車両位置検出装置。
(Appendix 14)
The indicator has a continuous or fragmentary shape,
The recognizing unit identifies the type of the index by recognizing the density of the shape of the index, or the amplitude, or a combination thereof.
The vehicle position detection device according to any one of
(付記15)
前記決定された自車両の位置に基づき、交差点までの距離を算出する距離計算部と、
他の車両から送信される、他の車両に関する前記交差点までの距離と車速度情報を受信する通信部と、
前記算出された交差点までの距離と、自車両の車速度と、前記他の車両に関する前記交差点までの距離と車速度情報とから、当該交差点における自車両と前記他の車両との接近状態を求め、当該接近状態から衝突可能性を判定する衝突判定部と、
前記衝突可能性から衝突回避制御を行う制御部と、
を更に備える、付記1、2、3、5、7、8、10、11、12いずれかに記載の車両位置検出装置を有する衝突回避装置。
(Appendix 15)
A distance calculation unit that calculates a distance to an intersection based on the determined position of the host vehicle;
A communication unit for receiving distance and vehicle speed information transmitted from another vehicle to the intersection with respect to the other vehicle;
Based on the calculated distance to the intersection, the vehicle speed of the host vehicle, and the distance to the intersection and the vehicle speed information regarding the other vehicle, the approach state of the host vehicle and the other vehicle at the intersection is obtained. A collision determination unit for determining the possibility of collision from the approach state;
A controller that performs collision avoidance control from the possibility of collision;
A collision avoidance device having the vehicle position detection device according to any one of
(付記16)
前記指標は、形状、模様、色、輝度のいずれか、或いはその組み合わせにより種類分けされ、
前記認識部は、前記指標の持つ形状、模様、色、輝度のいずれか、或いはその組み合わせを認識することにより、指標の種類を特定する、
付記15に記載の衝突回避装置。
(Appendix 16)
The index is classified by shape, pattern, color, brightness, or a combination thereof,
The recognizing unit identifies the type of the index by recognizing one of the shape, pattern, color, brightness, or a combination of the index,
The collision avoidance device according to
(付記17)
前記指標は、連続、或いは断片的な形状を有し、
前記認識部は、前記指標の持つ形状の疎密、或いは振幅、若しくはその組み合わせを認識することにより、指標の種類を特定する、
付記15に記載の衝突回避装置。
(Appendix 17)
The indicator has a continuous or fragmentary shape,
The recognizing unit identifies the type of the index by recognizing the density of the shape of the index, or the amplitude, or a combination thereof.
The collision avoidance device according to
(付記18)
車両周辺の映像を撮影する撮像部と、
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から複数の所定の形状を持つ指標を認識し、認識された指標の種類をそれぞれ特定する認識部と、
前記指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、
特定された指標の種類に基づき、前記記憶部から各指標に対応する位置情報をそれぞれ取得する取得部と、
複数の特定された指標に対応する位置情報に基づき、前記記憶部に記憶された位置情報から、認識されるべき指標で認識されていない指標を検知し、その認識されていない指標の位置情報を前記記憶部から取得する障害物検知部と、
を備える障害物検知装置。
(Appendix 18)
An imaging unit that captures a video around the vehicle;
An input unit for capturing captured video as image data;
A recognition unit for recognizing an index having a plurality of predetermined shapes from the image data, and identifying each type of the recognized index;
A storage unit for storing the type of the index and position information corresponding to the type of the index;
An acquisition unit that acquires position information corresponding to each index from the storage unit based on the type of the specified index,
Based on position information corresponding to a plurality of specified indices, an index that is not recognized by the index to be recognized is detected from the position information stored in the storage unit, and the position information of the unrecognized index is obtained. An obstacle detection unit acquired from the storage unit;
An obstacle detection device comprising:
(付記19)
前記指標は、形状、模様、色、輝度のいずれか、或いはその組み合わせにより種類分けされ、
前記認識部は、前記指標の持つ形状、模様、色、輝度のいずれか、或いはその組み合わせを認識することにより、指標の種類を特定する、
付記18に記載の障害物検知装置。
(Appendix 19)
The index is classified by shape, pattern, color, brightness, or a combination thereof,
The recognizing unit identifies the type of the index by recognizing one of the shape, pattern, color, brightness, or a combination of the index,
The obstacle detection apparatus according to appendix 18.
(付記20)
前記指標は、連続、或いは断片的な形状を有し、
前記認識部は、前記指標の持つ形状の疎密、或いは振幅、若しくはその組み合わせを認識することにより、指標の種類を特定する、
付記18に記載の障害物検知装置。
(Appendix 20)
The indicator has a continuous or fragmentary shape,
The recognizing unit identifies the type of the index by recognizing the density of the shape of the index, or the amplitude, or a combination thereof.
The obstacle detection apparatus according to appendix 18.
(付記21)
車両周辺の映像を撮影するステップと、
撮影された映像を画像データとして取り込むステップと、
前記画像データの中から所定の形状を持つ指標を認識し、認識された指標の種類を特定するステップと、
特定された指標の種類に基づき、前記指標の種類とその指標の種類に対応する位置情報とが記憶された記憶部から、位置情報を取得するステップと、
取得された位置情報により車両の位置を決定するステップと、
を備える車両位置検出方法。
(Appendix 21)
Shooting video around the vehicle;
Capturing captured video as image data;
Recognizing an index having a predetermined shape from the image data, and identifying the type of the recognized index;
Obtaining the position information from the storage unit storing the type of the index and the position information corresponding to the type of the index based on the identified index type;
Determining the position of the vehicle from the acquired position information;
A vehicle position detection method comprising:
(付記22)
所定の形状を持つ指標を持つ車両に搭載された装置と、車両外に設置された装置とで実行される車両位置検出方法であって、
前記車両外に設置された装置により、
前記車両が通過する地点周辺を撮影するステップと、
撮影された映像を画像データとして取り込むステップと、
前記画像データの中から、前記指標を認識し、認識された指標の種類を特定するステップと、
特定された指標の種類に基づき、前記指標の種類とその指標の種類に対応する車両の識別情報とを記憶する記憶部から、車両の識別情報を取得するステップと、
前記取得された車両の識別情報と自装置に関する位置情報とを送信するステップとが実行され、
前記車両に搭載された装置により、
前記車両外に設置された装置から送信された、車両を識別する車両識別情報と、前記車両外の装置に関する位置情報とを受信するステップと、
前記車両識別情報から、受信された位置情報が自車両のための情報であると判断された場合に、当該受信された位置情報から自車両の位置を決定する決定部とが実行される車両位置検出方法。
(Appendix 22)
A vehicle position detection method executed by a device mounted on a vehicle having an index having a predetermined shape and a device installed outside the vehicle,
By a device installed outside the vehicle,
Photographing the vicinity of a point where the vehicle passes;
Capturing captured video as image data;
Recognizing the index from the image data, and identifying the type of the recognized index;
Acquiring vehicle identification information from a storage unit that stores the type of the index and the vehicle identification information corresponding to the type of the index based on the identified index type;
Transmitting the acquired vehicle identification information and position information about the device itself,
By the device mounted on the vehicle,
Receiving vehicle identification information for identifying a vehicle and position information regarding the device outside the vehicle, transmitted from a device installed outside the vehicle;
When the received position information is determined to be information for the own vehicle from the vehicle identification information, a vehicle position that is executed by a determination unit that determines the position of the own vehicle from the received position information Detection method.
(付記23)
付記21に記載の車両位置検出方法を有した衝突回避方法であって、
前記決定された自車両の位置に基づき、交差点までの距離を算出するステップと、
他の車両から送信される、他の車両に関する前記交差点までの距離と車速度情報を受信するステップと、
前記算出された交差点までの距離と、自車両の車速度と、前記他の車両に関する前記交差点までの距離と車速度情報とから、当該交差点における自車両と前記他の車両との接近状態を求め、当該接近状態から衝突可能性を判定するステップと、
前記衝突可能性から衝突回避制御を行うステップと、
を更に備える衝突回避方法。
(Appendix 23)
A collision avoidance method including the vehicle position detection method according to
Calculating a distance to an intersection based on the determined position of the host vehicle;
Receiving distance and vehicle speed information transmitted from another vehicle to the intersection for the other vehicle; and
Based on the calculated distance to the intersection, the vehicle speed of the host vehicle, and the distance to the intersection and the vehicle speed information regarding the other vehicle, the approach state of the host vehicle and the other vehicle at the intersection is obtained. Determining the possibility of collision from the approaching state;
Performing collision avoidance control from the possibility of collision;
A collision avoidance method further comprising:
(付記24)
車両周辺の映像を撮影するステップと、
撮影された映像を画像データとして取り込むステップと、
前記画像データの中から複数の所定の形状を持つ指標を認識し、認識された指標の種類をそれぞれ特定するステップと、
特定された指標の種類に基づき、前記指標の種類とその指標の種類に対応する位置情報
とを記憶する記憶部から、各指標に対応する位置情報をそれぞれ取得するステップと、
複数の特定された指標に対応する位置情報に基づき、前記記憶部に記憶された位置情報から、認識されるべき指標で認識されていない指標を検知し、その認識されていない指標の位置情報を前記記憶部から取得するステップと、
を備える障害物検知方法。
(Appendix 24)
Shooting video around the vehicle;
Capturing captured video as image data;
Recognizing an index having a plurality of predetermined shapes from the image data, and identifying each of the recognized index types;
Obtaining each position information corresponding to each index from a storage unit storing the type of index and the position information corresponding to the type of the index based on the identified index type;
Based on position information corresponding to a plurality of specified indices, an index that is not recognized by the index to be recognized is detected from the position information stored in the storage unit, and the position information of the unrecognized index is obtained. Obtaining from the storage unit;
An obstacle detection method comprising:
10 ビデオカメラ
15 画像マーカ
20、201、291、292、331 画像入力部
21、202、311、312、332 画像認識部
22 車両位置測定部
23、204、334 画像マーカデータベース
71 画像マーカ・車両間距離計算部
81、82、83、84 画像マーカ
111 画像マーカ配列記憶部
203 識別情報取得部
205 情報送信部
206 情報受信部
207 車両位置測定部
208 位置情報データベース
221、222 車両
231 車両位置検出装置
232 距離計算部
233 通信部
234 衝突判定部
235 衝突警報・回避部
236、274 車速センサ
241 衝突監視装置
251、252、253、254、255 画像マーカ
256 障害物
261 障害物検知部
271 画像マーカエラー検出訂正部
272 画像マーカ間距離測定部
273 画像マーカ間距離計算部
321、322 撮影範囲
333 画像マーカ位置測定部
335 車両位置検知部
336 画像マーカ位置記憶部
10
Claims (5)
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、
特定された指標の種類に基づき、前記記憶部から位置情報を取得する取得部と、
取得された位置情報により車両の位置を決定する決定部と、
を備える車両位置検出装置。 An imaging unit that captures a video around the vehicle;
An input unit for capturing captured video as image data;
A recognition unit that recognizes an index having a predetermined shape from the image data and identifies a type of the recognized index;
A storage unit for storing the type of the index and position information corresponding to the type of the index;
An acquisition unit that acquires position information from the storage unit based on the type of the identified index;
A determination unit that determines the position of the vehicle based on the acquired position information;
A vehicle position detecting device.
前記記憶部は、前記指標の種類に対応する位置情報の他、その指標の大きさと、隣接する他の指標との間隔を記憶し、
前記取得部は、前記位置情報の他、該指標の大きさと、隣接する他の指標との間隔を取得し、
前記決定部は、取得された指標の大きさと隣接する他の指標との間隔に基づき、車両から、該指標までの距離を算出する算出部を更に備え、算出された該指標までの距離と、前記位置情報とから、車両の位置を決定する、
請求項1に記載の車両位置検出装置。 The recognizing unit specifies the type of the index from the image data, recognizes the position and size of the recognized index on the image data,
The storage unit stores, in addition to the position information corresponding to the type of the index, the size of the index and an interval between other adjacent indexes,
In addition to the position information, the acquisition unit acquires the size of the index and an interval between other adjacent indexes,
The determination unit further includes a calculation unit that calculates a distance from the vehicle to the index based on the distance between the acquired index size and another adjacent index, and the calculated distance to the index; The position of the vehicle is determined from the position information.
The vehicle position detection device according to claim 1.
前記記憶部は、幾つか連続した前記指標の種類の並びと、その並びに対応する前記位置情報とを記憶し、
前記取得部は、前記格納部に格納された指標の種類の並びに基づき、前記記憶部から、その並びに対応する前記位置情報を取得する、
請求項1又は2に記載の車両位置検出装置。 A storage unit for storing the types of indices specified by the recognition unit in a continuous sequence;
The storage unit stores several consecutive types of the indicator types and the corresponding position information.
The acquisition unit acquires the corresponding position information from the storage unit based on a sequence of types of indices stored in the storage unit,
The vehicle position detection device according to claim 1 or 2.
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から、前記少なくとも1つの指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類とその指標の種類に対応する位置情報とを記憶する記憶部と、
特定された全ての指標の種類に基づき、前記記憶部から位置情報を取得する取得部と、
取得された位置情報を記憶する位置記憶部と、
前記位置記憶部に記憶された位置情報と、前記取得部により取得された位置情報とを比較した結果、位置情報の数が一致しない場合に、前記取得部により取得された位置情報で足りない位置情報に対応する指標が認識されていないことを検知し、この認識されていない指標に関する位置情報を車両の位置と決定する決定部と、
を備える車両位置検出装置。 An imaging unit that captures the vicinity of a point where the vehicle passes so as to include at least one index having a predetermined shape;
An input unit for capturing captured video as image data;
A recognition unit that recognizes the at least one index from the image data and identifies a type of the recognized index;
A storage unit for storing the type of the index and position information corresponding to the type of the index;
An acquisition unit that acquires position information from the storage unit, based on the types of all identified indicators,
A position storage unit for storing the acquired position information;
A position where the position information acquired by the acquisition unit is insufficient when the number of pieces of position information does not match as a result of comparing the position information stored in the position storage unit with the position information acquired by the acquisition unit. A determination unit that detects that an index corresponding to the information is not recognized, and determines position information regarding the unrecognized index as a vehicle position;
A vehicle position detecting device.
前記車両外に設置された装置が、
車両が通過する地点周辺を撮影する撮像部と、
撮影された映像を画像データとして取り込む入力部と、
前記画像データの中から、前記車両に搭載され所定の形状を持つ指標を認識し、認識された指標の種類を特定する認識部と、
前記指標の種類と、その指標の種類に対応する車両の識別情報とを記憶する記憶部と、
特定された指標の種類に基づき、前記記憶部から車両の識別情報を取得する取得部と、
前記取得された車両の識別情報と自装置に関する位置情報とを送信する送信部と、
を備え、
前記車両に搭載された装置が、
前記車両外に設置された装置から送信された、車両を識別する車両識別情報と、前記車両外の設置された装置に関する位置情報とを受信する受信部と、
前記車両識別情報から、受信された位置情報が自車両のための情報であると判断された場合に、当該受信された位置情報から自車両の位置を決定する決定部と、
を備える車両位置検出システム。 In a vehicle position detection system comprising a device mounted on a vehicle having an index having a predetermined shape and a device installed outside the vehicle,
A device installed outside the vehicle,
An imaging unit that captures the area around the point where the vehicle passes;
An input unit for capturing captured video as image data;
A recognition unit that recognizes an index having a predetermined shape mounted on the vehicle from the image data, and identifies a type of the recognized index;
A storage unit that stores the type of the index and vehicle identification information corresponding to the type of the index;
An acquisition unit that acquires vehicle identification information from the storage unit, based on the type of the specified index;
A transmission unit for transmitting the acquired vehicle identification information and position information about the own device;
With
A device mounted on the vehicle,
A receiving unit for receiving vehicle identification information for identifying the vehicle and position information regarding the device installed outside the vehicle, transmitted from the device installed outside the vehicle;
A determination unit that determines the position of the host vehicle from the received position information when the received position information is determined to be information for the host vehicle from the vehicle identification information;
A vehicle position detection system comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005188077A JP2007010335A (en) | 2005-06-28 | 2005-06-28 | Vehicle position detecting device and system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005188077A JP2007010335A (en) | 2005-06-28 | 2005-06-28 | Vehicle position detecting device and system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2007010335A true JP2007010335A (en) | 2007-01-18 |
Family
ID=37749071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005188077A Withdrawn JP2007010335A (en) | 2005-06-28 | 2005-06-28 | Vehicle position detecting device and system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2007010335A (en) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007114313A1 (en) * | 2006-03-31 | 2007-10-11 | Canon Kabushiki Kaisha | Information processing method and information processing apparatus |
JP2009180631A (en) * | 2008-01-31 | 2009-08-13 | Denso It Laboratory Inc | Navigator, navigation method and program |
JP2010276583A (en) * | 2009-06-01 | 2010-12-09 | Mazda Motor Corp | Position measuring device for vehicles |
WO2011108377A1 (en) * | 2010-03-02 | 2011-09-09 | 日本電気株式会社 | Coordinated operation apparatus, coordinated operation method, coordinated operation control program and apparatus coordination system |
WO2016132457A1 (en) * | 2015-02-17 | 2016-08-25 | 日本郵船株式会社 | System and method for cylinder liner inspection, holding tool for imaging device, and cylinder liner |
WO2019107164A1 (en) * | 2017-11-28 | 2019-06-06 | Thk株式会社 | Image processing device, mobile robot control system, and mobile robot control method |
JP2019102047A (en) * | 2017-11-28 | 2019-06-24 | Thk株式会社 | Image processor, mobile robot control system, and mobile robot control method |
WO2019175992A1 (en) * | 2018-03-13 | 2019-09-19 | 日本電気株式会社 | Moving body guidance device, moving body guidance method, and computer readable recording medium |
WO2019175994A1 (en) * | 2018-03-13 | 2019-09-19 | 日本電気株式会社 | Moving body guidance device, moving body guidance method, and computer readable recording medium |
CN110361014A (en) * | 2018-03-26 | 2019-10-22 | 丰田自动车株式会社 | This truck position apparatus for predicting |
JP2019211482A (en) * | 2019-07-29 | 2019-12-12 | 日本郵船株式会社 | Cylinder liner and system for inspection of cylinder liner |
JP2020133329A (en) * | 2019-02-22 | 2020-08-31 | 株式会社ミツバ | Information display body and vehicle information acquisition system |
JP2021169989A (en) * | 2020-04-17 | 2021-10-28 | 株式会社Nichijo | Self-position measuring system, vehicle, and self-position measuring method |
-
2005
- 2005-06-28 JP JP2005188077A patent/JP2007010335A/en not_active Withdrawn
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8335400B2 (en) | 2006-03-31 | 2012-12-18 | Canon Kabushiki Kaisha | Information processing method and information processing apparatus |
WO2007114313A1 (en) * | 2006-03-31 | 2007-10-11 | Canon Kabushiki Kaisha | Information processing method and information processing apparatus |
JP2009180631A (en) * | 2008-01-31 | 2009-08-13 | Denso It Laboratory Inc | Navigator, navigation method and program |
JP2010276583A (en) * | 2009-06-01 | 2010-12-09 | Mazda Motor Corp | Position measuring device for vehicles |
JPWO2011108377A1 (en) * | 2010-03-02 | 2013-06-24 | 日本電気株式会社 | Linked operation device, linked operation method, linked operation control program, and device linked system |
CN102782664A (en) * | 2010-03-02 | 2012-11-14 | 日本电气株式会社 | Coordinated operation apparatus, coordinated operation method, coordinated operation control program and apparatus coordination system |
WO2011108377A1 (en) * | 2010-03-02 | 2011-09-09 | 日本電気株式会社 | Coordinated operation apparatus, coordinated operation method, coordinated operation control program and apparatus coordination system |
WO2016132457A1 (en) * | 2015-02-17 | 2016-08-25 | 日本郵船株式会社 | System and method for cylinder liner inspection, holding tool for imaging device, and cylinder liner |
JPWO2016132457A1 (en) * | 2015-02-17 | 2017-11-24 | 日本郵船株式会社 | Cylinder liner inspection system, method, imaging device retainer, and cylinder liner |
KR101946475B1 (en) * | 2015-02-17 | 2019-02-11 | 닛뽕 유센 가부시키가이샤 | A system, a method, and a holding mechanism of an imaging device for inspecting a cylinder liner, |
CN111417911A (en) * | 2017-11-28 | 2020-07-14 | Thk株式会社 | Image processing apparatus, control system for mobile robot, and control method for mobile robot |
WO2019107164A1 (en) * | 2017-11-28 | 2019-06-06 | Thk株式会社 | Image processing device, mobile robot control system, and mobile robot control method |
JP2019102047A (en) * | 2017-11-28 | 2019-06-24 | Thk株式会社 | Image processor, mobile robot control system, and mobile robot control method |
CN111417911B (en) * | 2017-11-28 | 2023-09-22 | Thk株式会社 | Image processing device, control system for mobile robot, and control method for mobile robot |
TWI806933B (en) * | 2017-11-28 | 2023-07-01 | 日商Thk股份有限公司 | Mobile robot control system, mobile robot control method |
WO2019175992A1 (en) * | 2018-03-13 | 2019-09-19 | 日本電気株式会社 | Moving body guidance device, moving body guidance method, and computer readable recording medium |
JPWO2019175992A1 (en) * | 2018-03-13 | 2021-02-18 | 日本電気株式会社 | Mobile guidance device, mobile guidance method, and program |
JPWO2019175994A1 (en) * | 2018-03-13 | 2021-02-18 | 日本電気株式会社 | Mobile guidance device, mobile guidance method, and program |
JP7028309B2 (en) | 2018-03-13 | 2022-03-02 | 日本電気株式会社 | Mobile guidance device, mobile guidance method, and program |
JP7070659B2 (en) | 2018-03-13 | 2022-05-18 | 日本電気株式会社 | Mobile guidance device, mobile guidance method, and program |
WO2019175994A1 (en) * | 2018-03-13 | 2019-09-19 | 日本電気株式会社 | Moving body guidance device, moving body guidance method, and computer readable recording medium |
US11887329B2 (en) | 2018-03-13 | 2024-01-30 | Nec Corporation | Moving body guidance apparatus, moving body guidance method, and computer-readable recording medium |
CN110361014A (en) * | 2018-03-26 | 2019-10-22 | 丰田自动车株式会社 | This truck position apparatus for predicting |
JP2020133329A (en) * | 2019-02-22 | 2020-08-31 | 株式会社ミツバ | Information display body and vehicle information acquisition system |
JP2019211482A (en) * | 2019-07-29 | 2019-12-12 | 日本郵船株式会社 | Cylinder liner and system for inspection of cylinder liner |
JP2021169989A (en) * | 2020-04-17 | 2021-10-28 | 株式会社Nichijo | Self-position measuring system, vehicle, and self-position measuring method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2007010335A (en) | Vehicle position detecting device and system | |
US9587948B2 (en) | Method for determining the absolute position of a mobile unit, and mobile unit | |
US8180561B2 (en) | Vehicle-installation obstacle detection apparatus | |
US8175331B2 (en) | Vehicle surroundings monitoring apparatus, method, and program | |
US9123242B2 (en) | Pavement marker recognition device, pavement marker recognition method and pavement marker recognition program | |
US20150378015A1 (en) | Apparatus and method for self-localization of vehicle | |
KR101446546B1 (en) | Display system of vehicle information based on the position | |
JP2007232690A (en) | Present position detection apparatus, map display device and present position detecting method | |
KR20130127822A (en) | Apparatus and method of processing heterogeneous sensor fusion for classifying and positioning object on road | |
JP2011027594A (en) | Map data verification system | |
JP5365792B2 (en) | Vehicle position measuring device | |
US10846546B2 (en) | Traffic signal recognition device | |
KR102428765B1 (en) | Autonomous driving vehicle navigation system using the tunnel lighting | |
JP4816009B2 (en) | Approach notification device | |
JP3666332B2 (en) | Pedestrian detection device | |
CN112455430A (en) | Method for detecting inclined parking spaces without parking space lines, parking method and parking system | |
JP2011027595A (en) | Map data verification system | |
JP2019207651A (en) | Detection device and detection system | |
JP2008097279A (en) | Vehicle exterior information display device | |
JP2002092797A (en) | Traffic information providing system | |
US11087618B2 (en) | Method for detecting illegally parked vehicles | |
KR20150055278A (en) | System and method for collecting traffic information using vehicle radar | |
US20230349719A1 (en) | Map generation apparatus, map generation program and on-vehicle equipment | |
CN113689718A (en) | Intelligent signal lamp and lane matching system and method | |
JP2023152109A (en) | Feature detection device, feature detection method and computer program for detecting feature |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Application deemed to be withdrawn because no request for examination was validly filed |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20080902 |