JP2019120629A - Position calculation device, position calculation program, and coordinate marker - Google Patents
Position calculation device, position calculation program, and coordinate marker Download PDFInfo
- Publication number
- JP2019120629A JP2019120629A JP2018001696A JP2018001696A JP2019120629A JP 2019120629 A JP2019120629 A JP 2019120629A JP 2018001696 A JP2018001696 A JP 2018001696A JP 2018001696 A JP2018001696 A JP 2018001696A JP 2019120629 A JP2019120629 A JP 2019120629A
- Authority
- JP
- Japan
- Prior art keywords
- marker
- position calculation
- coordinate
- coordinate marker
- automatic driving
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Navigation (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
Description
この発明は、自動運転車の自車位置を特定するための計算に使用される、位置計算装置、位置計算プログラム及び座標マーカに関する。 The present invention relates to a position calculation device, a position calculation program, and a coordinate marker, which are used for calculation for specifying the position of a self-driving vehicle.
現在、自動運転車の開発が進められている。自動運転車による自動運転走行では、自動運転車に搭載された各種車両センサが自動運転車の周囲の障害物や移動物体を検知し、自動運転車は障害物があれば障害物を回避する。また、ダイナミックマップデータのような3次元の高精度地図と、GPS衛星や準天頂衛星等の測位衛星の送信する測位情報を用いて数cmオーダで得られる測位補正結果とを用いる、自動運転走行が検討されている。 Currently, development of autonomous vehicles is underway. In automatic driving by an autonomous car, various vehicle sensors mounted on the autonomous car detect obstacles and moving objects around the autonomous car, and the autonomous car avoids obstacles if there is an obstacle. In addition, automatic driving travel using a three-dimensional high-precision map such as dynamic map data, and a positioning correction result obtained on the order of several centimeters using positioning information transmitted by positioning satellites such as GPS satellites and quasi-zenith satellites Is being considered.
近年では、車両単独では認知が難しい道路状況及び交通情報の提供を目的とする、インフラ協調型の自動運転システムが検討されている。路側システムを用いた、インフラ側からの支援の一例として、高速道路を走行中の自動運転車に、インフラ側から走行支援情報を配信する技術がある(例えば、特許文献1)。 In recent years, an infrastructure-coordinated automatic driving system has been considered for the purpose of providing road conditions and traffic information that are difficult to recognize by vehicles alone. As an example of support from the infrastructure side using the roadside system, there is a technology for distributing traveling support information from the infrastructure side to an autonomous vehicle traveling on a freeway (for example, Patent Document 1).
しかし、GPS衛星及び準天頂衛星のようなGNSS(Global Navigation Satellite System)衛星からの測位情報の入手が困難であり、かつ、路側システムが設置されていない場所では、自動運転車の自車位置を特定するための位置情報の入手が困難である。 However, in locations where it is difficult to obtain positioning information from GNSS (Global Navigation Satellite System) satellites such as GPS satellites and Quasi-Zenith satellites, and where the roadside system is not installed, the position of the self-driving vehicle is It is difficult to obtain location information for identification.
この発明は、GNSS衛星からの測位信号が受信できず、かつ、路側システムが設置されていない場所でも、自動運転車の自車位置を特定するための位置精度を維持できる装置の提供を目的とする。 It is an object of the present invention to provide a device capable of maintaining the position accuracy for specifying the position of a self-driving vehicle even in a place where a positioning signal from a GNSS satellite can not be received and a roadside system is not installed. Do.
この発明の位置計算装置は、
自動運転車に搭載される位置計算装置であって、
配置されている位置の座標が前記自動運転車の自動運転に使用されるダイナミックマップデータのような3次元の高精度地図データに登録されている座標マーカを撮影するカメラ装置と、
前記カメラ装置が撮影した前記座標マーカの画像に基づいて前記座標マーカを識別する識別情報を抽出し、前記識別情報に基づいて前記座標マーカの座標を前記地図データから取得し、前記座標マーカの座標に基づいて前記自動運転車の位置を計算する関連位置計算部と
を備える。
The position calculation device of the present invention is
A position calculation device mounted on an autonomous vehicle,
A camera device for photographing a coordinate marker registered in three-dimensional high-accuracy map data such as dynamic map data used for automatic driving of the autonomous driving vehicle, and a coordinate of the arranged position;
The identification information for identifying the coordinate marker is extracted based on the image of the coordinate marker captured by the camera device, and the coordinate of the coordinate marker is acquired from the map data based on the identification information, and the coordinates of the coordinate marker And an associated position calculation unit that calculates the position of the autonomous vehicle based on
この発明の位置計算装置は、座標マーカから自動運転車の位置を特定できるので、GNSS衛星からの測位信号が受信できず、かつ、路側システムが設置されていない場所でも、自動運転車の位置精度を維持できる。 Since the position calculation device of the present invention can specify the position of the autonomous vehicle from the coordinate markers, it can not receive the positioning signal from the GNSS satellite, and the position accuracy of the autonomous vehicle can be obtained even at a place where the roadside system is not installed. Can maintain
以下、本発明の実施の形態について、図を用いて説明する。なお、各図中、同一または相当する部分には、同一符号を付している。実施の形態の説明において、同一または相当する部分については、説明を適宜省略または簡略化する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. In the drawings, the same or corresponding parts are denoted by the same reference numerals. In the description of the embodiment, the description of the same or corresponding parts will be omitted or simplified as appropriate.
実施の形態1.
まず、実施の形態1の概要を説明する。
図1は、座標マーカ90を説明する図である。
図2は、車載カメラ10による、座標マーカ90を含む外部環境画像の撮影状態を示す。図2については後述の動作の説明で詳しく述べる。
ガードレール8には、車載カメラ10で認識可能な複数の座標マーカ90が配置されている。車載カメラ10は、遠赤外線、近赤外線または可視光のいずれか、もしくは、複数の車載カメラを組合せて座標マーカ90を撮影する。実施の形態1では、座標マーカ90はガードレール8に配置されているが、ガードレール8に限らず、複数の座標マーカ90は、例えば、「トンネル壁面または歩道」のような道路に沿った領域に配列されてもよい。座標マーカ90は、車載カメラ10で撮影された外部環境画像によって識別可能である。
Embodiment 1
First, an outline of the first embodiment will be described.
FIG. 1 is a diagram for explaining the
FIG. 2 shows a shooting state of an external environment image including the
A plurality of
個々の座標マーカ90の座標は、後述のダイナミックマップデータ71に、静的情報として登録されている。ダイナミックマップデータ71は補助記憶装置70に記憶されている。
図1では、左の座標マーカ90の座標は(X1,Y1,Z1)であり、中央の座標マーカ90の座標は(X2,Y2,Z2)であり、右の座標マーカ90の座標は(X3,Y3,Z3)である。座標マーカ90の座標は絶対座標として用いられる。自動運転車200の位置計算装置100aは、ガードレール8に描かれた座標マーカ90を認識後、座標マーカ90と車線リンク7を用いて、自動運転車200と座標マーカ90との間の相対位置を特定する。この相対位置は後述のベクトル6である。相対位置の特定は動作の説明で後述する。
The coordinates of each
In FIG. 1, the coordinates of the
図3から図6は座標マーカ90を示す。図3は座標マーカ90aを示す。図4は座標マーカ90bを示す。図5は座標マーカ90cを示す。図6は座標マーカ90dを示す。座標マーカ90a,90bは、マークのみからなる。座標マーカ90には、2次元バーコード3または数値4のような情報が付加されていても良い。座標マーカ90cは2次元バーコード3が付された状態を示す。座標マーカ90dはAA11として示す数値4が付された状態を示す。2次元バーコード3及び数値4は、座標マーカ90を識別する識別情報91を持つことができる。
3 to 6 show a
***構成の説明***
図7は、位置計算装置100aのハードウェア構成図である。図7を参照して、位置計算装置100aの構成を説明する。位置計算装置100aは、自動運転車200に搭載される。位置計算装置100aは、車載カメラ10、測位受信部20、慣性計測装置30、入出力インタフェース40、プロセッサ50、メモリ60及び補助記憶装置70といったハードウェアを備えるコンピュータである。これらのハードウェアは、信号線81を介して互いに接続されている。
慣性計測装置30は以下IMU30と記す。
*** Description of the configuration ***
FIG. 7 is a hardware configuration diagram of the
The
車載カメラ10は、図2に示すように、ガードレール8を含む、前方および側方の外部環境画像を撮影する。車載カメラ10の自動運転車200に対する、取付位置及び取付姿勢のデータは、補助記憶装置70に記憶されている。補助記憶装置70には、自動運転車200の自動運転に使用される地図データ901である、ダイナミックマップデータ71が記憶されている。ダイナミックマップデータ71は以下DMD71と記す。DMD71は、静的情報、准静的情報、准動的情報、動的情報からなる。DMD71の静的情報は、3次元の高精度な基盤的地図データであって、路面情報、車線情報、3次元構造物などを含み、地物を示す3次元位置座標や線形ベクトルデータから構成される。准静的情報、准動的情報、動的情報は、時々刻々と変化する動的データであって、位置参照基盤を基に静的情報に重畳されるデータである。准静的情報は交通規制情報、道路工事情報、広域気象情報などを含み、准動的情報は事故情報、渋滞情報、狭域気象情報などを含み、動的情報はITS情報(周辺車両、歩行者、信号情報など)を含む。
車載カメラ10は、座標マーカ90を撮影するカメラ装置902である。座標マーカ90は、上記のように、配置されている位置の座標が、DMD71の静的情報に、登録されている。
As shown in FIG. 2, the on-
The on-
測位受信部20は、測位衛星であるGNSS衛星の送信する測位信号を受信して測位信号を再生し、観測情報として出力する。
The
IMU30は、加速度センサ及びジャイロを備えている。IMU30は、加速度センサ及びジャイロの信号から観測情報を生成して出力する。
The
入出力インタフェース40は、車載カメラ10、測位受信部20及びIMU30と、プロセッサ50とを接続するインタフェース装置である。
The input /
プロセッサ50は、演算処理を行うIC(Integrated Circuit)であり、他のハードウェアを制御する。例えば、プロセッサ50は、CPU(Central Processing Unit)、DSP(Digital Signal Processor)、またはGPU(Graphics Processing Unit)である。
The
メモリ60は揮発性の記憶装置である。メモリ60は、主記憶装置またはメインメモリとも呼ばれる。例えば、メモリ60はRAM(Random Access Memory)である。メモリ60に記憶されたデータは必要に応じて補助記憶装置70に保存される。
The
補助記憶装置70は不揮発性の記憶装置である。例えば、補助記憶装置70は、ROM(Read Only Memory)、HDD(Hard Disk Drive)、またはフラッシュメモリである。補助記憶装置70に記憶されたデータは必要に応じてメモリ60にロードされる。
The
位置計算装置100aは、画像処理部51、関連位置計算部52、位置計算部53という機能要素を備えている。関連位置計算部52は、マーカ特定部52a及び位置補正部52bを備えている。画像処理部51、関連位置計算部52及び位置計算部53の機能はソフトウェアで実現される。
The
補助記憶装置70には、画像処理部51、関連位置計算部52及び位置計算部53の機能を実現させる位置計算プログラムが記憶されている。位置計算プログラムは、メモリ60にロードされて、プロセッサ50によって実行される。
また、DMD71は、メモリ60にロードされて、プロセッサ50によって読み込まれる。
さらに、補助記憶装置70には、OS(Operating System)が記憶されている。OSの少なくとも一部は、メモリ60にロードされて、プロセッサ50によって実行される。プロセッサ50は、OSを実行しながら位置計算プログラムを実行する。位置計算プログラムを実行して得られるデータは、メモリ60、補助記憶装置70、プロセッサ50内のレジスタまたはプロセッサ50内のキャッシュメモリといった記憶装置に記憶される。
The
Also, the DMD 71 is loaded into the
Further, the
位置計算装置100aは、プロセッサ50を代替する複数のプロセッサを備えてもよい。複数のプロセッサは、プロセッサ50の役割を分担する。
The
位置計算プログラムは、光ディスクまたはフラッシュメモリ等の不揮発性の記録媒体にコンピュータで読み取り可能に記録することができる。 The position calculation program can be computer-readably recorded on a non-volatile recording medium such as an optical disk or a flash memory.
***動作の説明***
図2及び図8、図9を参照して、位置計算装置100aの動作を説明する。
図8は、位置計算装置100aのデータの流れを示す。
図9は、位置計算装置100aの動作のシーケンスを示す。
*** Description of operation ***
The operation of the
FIG. 8 shows the flow of data of the
FIG. 9 shows a sequence of operations of the
ステップS11において、測位受信部20は、GNSS衛星の送信する測位信号を受信して測位信号を再生し、観測情報として出力する。また、IMU30は、加速度センサ及びジャイロの信号から観測情報を生成して出力する。
In step S11, the
ステップS12において、位置計算部53は、測位衛星の送信する測位信号を用いて自動運転車200の自己位置を計算する。その際、位置計算部53は、測位信号の観測情報に加え、IMU30の信号の観測情報も用いる。位置計算部53は、測位信号の観測情報とIMU30の観測情報とに対してカルマンフィルタを適用することにより、衛星測位と航法測位とを密結合した複合測位計算により自己位置を計算する。自己位置とは自動運転車200の位置を意味する。
In step S12, the
ステップS13において、車載カメラ10は、図2に示すようにガードレール8を含む、前方および側方の外部環境を画像情報として撮影する。
ステップS14において、画像処理部51は、外部環境画像の鮮鋭化処理及びクラスタリング処理のような、画像処理を行う。画像処理部51は画像処理された外部環境画像を出力する。画像処理部51の出力する外部環境画像は、ガードレール8及び座標マーカ90を含む。
In step S13, the on-
In step S14, the
ステップS15において、関連位置計算部52のマーカ特定部52aは、画像処理部51から出力された外部環境画像から、座標マーカ90の画像を抽出する。
ステップS16において、マーカ特定部52aは、座標マーカ90の画像から識別情報91を抽出する。座標マーカ90の識別情報91とは、座標マーカ90を識別するための情報である。識別情報91は複数の座標マーカ90の各座標マーカ90に固有に付与されており、識別情報91により座標マーカ90は一意に識別される。
座標マーカ90の識別情報91の抽出は、以下のようである。
In step S15, the
In step S16, the
Extraction of the
<タイプ1>
タイプ1として、補助記憶装置70には、複数の座標マーカ90について、その画像と、その画像に付与された識別情報91との対応が登録された対応情報72が格納されている。マーカ特定部52aは、抽出した座標マーカ90の画像を検索キーとして対応情報72を検索することで、座標マーカ90の識別情報91を抽出する。
<Type 1>
As the type 1, in the
<タイプ2>
タイプ2として、図5及び図6のように、ガードレール8に、座標マーカ90のマークに加えて、座標マーカ90の識別情報91も配置されている場合である。タイプ2の場合、画像処理部51から出力された外部環境画像には識別情報91も含まれている。マーカ特定部52aは、画像処理部51から出力された外部環境画像に含まれる識別情報91を読み取ることで識別情報91を抽出する。
<Type 2>
In addition to the mark of the coordinate
このように、ステップS16において、関連位置計算部52のマーカ特定部52aは、車載カメラ10が撮影した座標マーカ90の画像に基づいて座標マーカ90を識別する識別情報91を抽出する。
Thus, in step S16, the
ステップS17において、マーカ特定部52aはDMD71を参照し、座標マーカ90の識別情報91に基づき、座標マーカ90の座標をDMD71から取得する。
具体的には以下のようである。
DMD71には、複数の座標マーカ90の各座標マーカ90の座標が、識別情報91と対応づけられて登録されている。マーカ特定部52aは、ステップS16で抽出した識別情報91を検索キーとしてDMD71を検索し、識別情報91に対応する座標マーカ90の座標を取得する。このように、関連位置計算部52のマーカ特定部52aは、ステップS17において、識別情報91に基づいて座標マーカ90の座標をDMD71から取得する。
In step S17, the
Specifically, it is as follows.
The coordinates of each coordinate
ステップS18において、マーカ特定部52aは、ステップS15で特定した座標マーカ90の画像に基づいて、座標マーカ90の存在する方向の方位角θを計算する。
図2を参照して方位角θの計算方法を説明する。
(1)車載カメラ10の自動運転車200への取付位置及び取付姿勢は既知である。取付位置は自動運転車200の基準位置に対する座標(X,Y,Z)であり、取付姿勢は自動運転車200の基準姿勢に対する(ロール角、ピッチ角、ヨー角)である。取付位置及び取付姿勢は、補助記憶装置70に記憶されている。
(2)自動運転車200は自動運転を行っている。
自動運転の場合、自動運転車200は、車線リンク7に相当する軌道を走行している。
車線リンク7はDMD71に登録されているデータであり、車道の中心線としてDMD71に規定されているデータである。マーカ特定部52aはDMD71を参照することで車線リンク7を認識することができる。
(3)マーカ特定部52aは、ステップS15で抽出した座標マーカ90の画像と、車載カメラ10の取付位置及び取付姿勢と、車線リンク7の方向とに基づいて、座標マーカ90の画像における座標マーカ90の方位角θを計算することができる。車線リンク7の方向は自動運転車200の進行方向である。
In step S18, the
A method of calculating the azimuth angle θ will be described with reference to FIG.
(1) The mounting position and mounting posture of the on-
(2) The
In the case of automatic driving, the
The lane link 7 is data registered in the DMD 71 and data defined in the DMD 71 as a center line of a roadway. The
(3) The
図2を参照して、座標マーカ90の座標に関連して算出される、距離L及びマーカ関連位置P(m)の算出方法を説明する。マーカ関連位置P(m)とは、車載カメラ10によって撮影された座標マーカ90から求められる、自動運転車200の位置である。
ステップS19において、関連位置計算部52の位置補正部52bは、マーカ特定部52aの計算した算出方位角θと特定された座標マーカの座標とに基づいて、下記の式1、式2から、L及びマーカ関連位置P(m)を算出する。
図2にはXYZ座標系5を示している。
L=D/tanθ (式1)
P(m)=(Xm,Ym,Zm)+(−D、−L、Zr) (式2)
(Xm,Ym,Zm)は取得された、座標マーカ90の座標である。
(−D、−L、Zr)は座標マーカ90と自動運転車200との相対距離である。
(−D、−L、Zr)は図2におけるベクトル6の成分である。
D,Lは図2に示す距離であり、具体的には以下のようである。
(1)Dは、XYZ座標系5のXY平面における、車線リンク7と座標マーカ90との最短距離である。
(2)Lは、XYZ座標系5のXY平面における、座標マーカ90と車載カメラ10の位置との、車線リンク7の方向の距離である。
(3)Zrは、車載カメラ10の取付座標のZ値と、座標マーカ90のZ座標であるZmとの差分である。
(4)ベクトル6は座標マーカ90の座標から車載カメラ10の取付位置に向かうベクトルである。
式2の場合、自動運転車200のマーカ関連位置P(m)は車載カメラ10の位置となるが、自動運転車200の基準位置と車載カメラ10の取付位置とは既知であるので、自動運転車200の基準位置を自己位置に換算できる。
A method of calculating the distance L and the marker related position P (m), which is calculated in relation to the coordinates of the coordinate
In step S19, the
An XYZ coordinate
L = D / tan θ (equation 1)
P (m) = (Xm, Ym, Zm) + (-D, -L, Zr) (Formula 2)
(Xm, Ym, Zm) is the acquired coordinates of the coordinate
(-D, -L, Zr) is a relative distance between the coordinate
(-D, -L, Zr) is a component of the
D and L are distances shown in FIG. 2 and specifically as follows.
(1) D is the shortest distance between the lane link 7 and the coordinate
(2) L is the distance in the direction of the lane link 7 between the coordinate
(3) Zr is the difference between the Z value of the mounting coordinates of the on-
(4) The
In the case of Formula 2, the marker related position P (m) of the
上記のように、関連位置計算部52の位置補正部52bは、座標マーカ90の座標を用いて、自動運転車200の位置を示すマーカ関連位置P(m)を計算する。マーカ関連位置P(m)を計算する場合、関連位置計算部52は、座標マーカ90の画像から基準方向に対する座標マーカ90の方位角θを決定し、決定した方位角θを用いて、自動運転車200の位置を示すマーカ関連位置を計算する。ここで基準方向とは、車線リンク7に沿う方向である。自動運転車200は自動運転中であるので、図2に示すように、車線リンク7に沿う方向は、自動運転車200の進行方向でもある。
As described above, using the coordinates of the coordinate
ステップS20において、位置補正部52bは、式2で算出したマーカ関連位置P(m)と、位置計算部53の測位した自己位置に基づき、自己位置の補正を行う。補正された自己位置は自動運転車200の自動運転に使用される。このように、関連位置計算部52は、位置計算部53が測位信号を用いて計算した自動運転車200の位置を、マーカ関連位置P(m)を用いて補正する。
In step S20, the
なお、自動運転車200がトンネルまたは山林に位置するため、測位受信部20でGNSS衛星の測位信号が受信できない場合は、位置計算部53は、IMU30の観測情報に基づいて、自動運転車200の自動運転に使用する自己位置を求める。この場合、IMU30のバイアス誤差の蓄積により、自己位置の計算精度が劣化しないように、位置補正部52bは、ガードレール8の座標マーカ90を頻繁に用いて、自己位置を補正する。
つまり、位置計算部53は、IMU30によって得られた観測情報に基づいて自動運転車200の位置を計算する。そして、位置補正部52bは、位置計算部53がIMU30の観測情報を用いて計算した自動運転車200の自己位置を、マーカ関連位置P(m)を用いて補正する。
If the
That is, the
***実施の形態1の効果の説明***
実施の形態1によれば、座標マーカ90から自動運転車200の位置を得ることができるので、GNSS衛星からの測位信号が受信できず、かつ、路側システムが設置されていない地域においても、自動運転車の位置精度を維持することができる。
*** Description of the effects of the first embodiment ***
According to the first embodiment, since the position of the
<変形例1>
図10は、位置計算装置100aの変形例である位置計算装置100bのハードウェア構成を示す。
図11は、位置計算装置100bのデータの流れを示す。位置計算装置100bは、自動運転車200の側方に配置された、レーダまたはライダーのような、距離測定部80を備えている。距離測定部80は、レーダ送信波またはレーザ光のような測距のための測距信号をガードレール8に向けて送出し、距離測定部80とガードレール8との間の距離を計測する。マーカ特定部52aは、距離測定部80の測定結果から図2の距離Dを得ることができる。具体的には、自動運転車200に対する距離測定部80の取付位置及び取付姿勢は既知であるので、マーカ特定部52aは,距離測定部80の測定結果から図2の距離Dを得ることができる。マーカ特定部52aは、計測した距離から、自動運転車200の車載カメラ10のセンサ軸とガードレール8との、図2に示す距離Dを求めても良い。
<Modification 1>
FIG. 10 shows a hardware configuration of a
FIG. 11 shows the flow of data of the
<変形例2>
また、マーカ特定部52aは、車載カメラ10が撮影した画像から、道路の両側に存在する車線レーンである白線を抽出し、抽出した車線レーンに対する自動運転車200の傾斜角を求めて方位角θを補正しても良い。
<Modification 2>
The
***他の構成***
実施の形態1では、位置計算装置100a、100bの画像処理部51、関連位置計算部52及び位置計算部53の機能が、ソフトウェアで実現されるが、他の構成として、位置計算装置100a、100bの機能がハードウェアで実現されてもよい。位置計算装置100bを例に説明するが、位置計算装置100aについても位置計算装置100aと同様である。
図12は、位置計算装置100bの他の構成を示す図である。図12の位置計算装置100bでは、画像処理部51、関連位置計算部52及び位置計算部53の機能が電子回路903によって実現される。図12のその他の構成は、位置計算装置100bの構成と同じである。
*** Other configuration ***
In the first embodiment, the functions of the
FIG. 12 is a diagram showing another configuration of the
電子回路903は、具体的には、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ロジックIC、GA、ASIC、または、FPGAである。GAは、Gate Arrayの略語である。ASICは、Application Specific Integrated Circuitの略語である。FPGAは、Field−Programmable Gate Arrayの略語である。位置計算装置100bの画像処理部51、関連位置計算部52及び位置計算部53の機能は、1つの電子回路で実現されてもよいし、複数の電子回路に分散して実現されてもよい。別の変形例として、位置計算装置100bの画像処理部51、関連位置計算部52及び位置計算部53の一部の機能が電子回路で実現され、残りの機能がソフトウェアで実現されてもよい。
Specifically, the
プロセッサと電子回路の各々は、プロセッシングサーキットリとも呼ばれる。つまり、画像処理部51、関連位置計算部52及び位置計算部53の機能は、プロセッシングサーキットリにより実現される。
Each of the processor and electronics is also referred to as processing circuitry. That is, the functions of the
位置計算装置100bにおいて、画像処理部51、関連位置計算部52及び位置計算部53の「部」を、「工程」に読み替えてもよい。画像処理部51、関連位置計算部52及び位置計算部53による動作は、位置計算プログラムによって実現される位置計算方法としてとらえることが可能である。
In the
以上説明した通り、実施の形態1による位置計算装置は、自動運転車に搭載される位置計算装置であって、配置されている位置の座標が前記自動運転車の自動運転に使用される3次元の高精度地図データに登録されている座標マーカを撮影するカメラ装置と、前記カメラ装置が撮影した前記座標マーカの画像に基づいて前記座標マーカを識別する識別情報を抽出し、前記識別情報に基づいて前記座標マーカの座標を前記3次元の高精度地図データから取得し、前記座標マーカの座標を用いて前記自動運転車の位置を示すマーカ関連位置を計算する関連位置計算部を備えたことを特徴とする。 As described above, the position calculation device according to the first embodiment is a position calculation device mounted on an automatic driving vehicle, and the coordinates of the arranged position are used for automatic driving of the automatic driving vehicle. A camera device for capturing a coordinate marker registered in the high-accuracy map data, and identification information for identifying the coordinate marker based on the image of the coordinate marker captured by the camera device, and based on the identification information The coordinate position of the coordinate marker is obtained from the three-dimensional high-accuracy map data, and the related position calculation unit is used to calculate a marker related position indicating the position of the automatic driving vehicle using the coordinate of the coordinate marker. It features.
また、前記関連位置計算部は、前記座標マーカの画像から基準方向に対する前記座標マーカの方位角を決定し、決定した前記方位角を用いて、前記マーカ関連位置を計算しても良い。 Further, the related position calculation unit may determine an azimuth angle of the coordinate marker with respect to a reference direction from an image of the coordinate marker, and calculate the marker related position using the determined azimuth angle.
さらに、測位衛星の送信する測位信号を用いて前記自動運転車の位置を計算する位置計算部を備え、前記関連位置計算部は、前記位置計算部が測位信号を用いて計算した前記自動運転車の位置を、前記マーカ関連位置を用いて補正する位置補正部を備えても良い。 The vehicle further includes a position calculation unit that calculates the position of the autonomous driving vehicle using a positioning signal transmitted by a positioning satellite, and the related position calculation unit calculates the autonomous driving vehicle calculated by the position calculation unit using the positioning signal. A position correction unit may be provided that corrects the position of the image by using the marker related position.
さらに、慣性計測装置を備え、前記位置計算部は、前記慣性計測装置によって得られた観測情報から前記自動運転車の位置を計算し、前記位置補正部は、前記位置計算部が前記観測情報から計算した前記自動運転車の位置を、前記マーカ関連位置を用いて補正しても良い。 Furthermore, an inertial measurement device is provided, the position calculation unit calculates the position of the autonomous vehicle from the observation information obtained by the inertial measurement device, and the position correction unit is configured to calculate the position calculation unit from the observation information. The calculated position of the autonomous vehicle may be corrected using the marker related position.
かくして、実施の形態1によれば、座標マーカ90から自動運転車200の位置を得ることができるので、GNSS衛星からの測位信号が受信できず、かつ、路側システムが設置されていない地域においても、自動運転車の位置精度を維持することができる。
Thus, according to the first embodiment, since the position of the
P(m) マーカ関連位置、3 2次元バーコード、4 数値、5 XYZ座標系、6 ベクトル、7 車線リンク、8 ガードレール、10 車載カメラ、20 測位受信部、30 IMU、40 入出力インタフェース、50 プロセッサ、51 画像処理部、52 関連位置計算部、52a マーカ特定部、52b 位置補正部、53 位置計算部、60 メモリ、70 補助記憶装置、71 DMD、72 対応情報、80 距離測定部、81 信号線、90、90a,90b,90c,90d 座標マーカ、91 識別情報、100a,100b 位置計算装置、200 自動運転車、901 地図データ、902 カメラ装置、903 電子回路。 P (m) Marker related position, 3 2D barcode, 4 numerical value, 5 XYZ coordinate system, 6 vector, 7 lane link, 8 guardrail, 10 onboard camera, 20 positioning receiver, 30 IMU, 40 I / O interface, 50 Processor, 51 image processing unit, 52 related position calculation unit, 52a marker specifying unit, 52b position correction unit, 53 position calculation unit, 60 memory, 70 auxiliary storage device, 71 DMD, 72 correspondence information, 80 distance measurement unit, 81 signal Line, 90, 90a, 90b, 90c, 90d Coordinate marker, 91 identification information, 100a, 100b Position calculation device, 200 self-driving car, 901 map data, 902 camera device, 903 electronic circuit.
Claims (7)
配置されている位置の座標が前記自動運転車の自動運転に使用される地図データに登録されている座標マーカを撮影するカメラ装置と、
前記カメラ装置が撮影した前記座標マーカの画像に基づいて前記座標マーカを識別する識別情報を抽出し、前記識別情報に基づいて前記座標マーカの座標を前記地図データから取得し、前記座標マーカの座標を用いて前記自動運転車の位置を示すマーカ関連位置を計算する関連位置計算部と
を備える位置計算装置。 A position calculation device mounted on an autonomous vehicle,
A camera device for photographing a coordinate marker registered in map data used for automatic driving of the autonomous driving vehicle, and a coordinate of a position where the camera is arranged;
The identification information for identifying the coordinate marker is extracted based on the image of the coordinate marker captured by the camera device, and the coordinate of the coordinate marker is acquired from the map data based on the identification information, and the coordinates of the coordinate marker And a related position calculation unit that calculates a marker related position indicating the position of the autonomous vehicle using.
前記座標マーカの画像から基準方向に対する前記座標マーカの方位角を決定し、決定した前記方位角を用いて、前記マーカ関連位置を計算する請求項1に記載の位置計算装置。 The related position calculation unit
The position calculation device according to claim 1, wherein an azimuth angle of the coordinate marker with respect to a reference direction is determined from an image of the coordinate marker, and the marker related position is calculated using the determined azimuth angle.
測位衛星の送信する測位信号を用いて前記自動運転車の位置を計算する位置計算部を備え、
前記関連位置計算部は、
前記位置計算部が測位信号を用いて計算した前記自動運転車の位置を、前記マーカ関連位置を用いて補正する位置補正部を備える請求項1または請求項2に記載の位置計算装置。 The position calculation device further includes
A position calculation unit that calculates the position of the autonomous vehicle using a positioning signal transmitted by a positioning satellite;
The related position calculation unit
The position calculation device according to claim 1, further comprising a position correction unit that corrects the position of the autonomous vehicle calculated by the position calculation unit using the positioning signal using the marker related position.
慣性計測装置を備え、
前記位置計算部は、
前記慣性計測装置によって得られた観測情報から前記自動運転車の位置を計算し、
前記位置補正部は、
前記位置計算部が前記観測情報から計算した前記自動運転車の位置を、前記マーカ関連位置を用いて補正する請求項3に記載の位置計算装置。 The position calculation device further includes
Equipped with an inertial measurement device,
The position calculation unit
Calculating the position of the autonomous vehicle from the observation information obtained by the inertial measurement device;
The position correction unit
The position calculation apparatus according to claim 3, wherein the position calculation unit corrects the position of the autonomous vehicle calculated from the observation information using the marker related position.
配置されている位置の座標が自動運転車の自動運転に使用される地図データに登録されている座標マーカを撮影するカメラ装置が撮影した前記座標マーカの画像に基づいて前記座標マーカを識別する識別情報を抽出する処理と、
前記識別情報に基づいて前記座標マーカの座標を前記地図データから取得する処理と、
前記座標マーカの座標を用いて前記自動運転車の位置を示すマーカ関連位置を計算する処理とを実行させる位置計算プログラム。 On the computer
Identification that identifies the coordinate marker based on an image of the coordinate marker captured by a camera device that captures a coordinate marker registered in map data used for automatic driving of an automatic driving vehicle, wherein the coordinates of the arranged position are registered in the map data used for automatic driving Processing to extract information;
A process of acquiring coordinates of the coordinate marker from the map data based on the identification information;
A position calculation program for executing a process of calculating a marker related position indicating the position of the automatic driving vehicle using the coordinates of the coordinate marker.
配置されている位置の座標が前記自動運転車の自動運転に使用される地図データに登録されており、
前記カメラ装置によって撮影された際の基準方向に対する方位角から前記自動運転車の位置を計算する計算方法に使用される座標マーカ。 An autonomous vehicle equipped with a camera device is disposed in an area where the camera device can capture an image when passing on a road,
The coordinates of the arranged position are registered in the map data used for automatic driving of the self-driving car,
A coordinate marker used in a calculation method for calculating the position of the autonomous vehicle from an azimuth angle with respect to a reference direction when it is photographed by the camera device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018001696A JP7114165B2 (en) | 2018-01-10 | 2018-01-10 | Position calculation device and position calculation program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018001696A JP7114165B2 (en) | 2018-01-10 | 2018-01-10 | Position calculation device and position calculation program |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019120629A true JP2019120629A (en) | 2019-07-22 |
JP7114165B2 JP7114165B2 (en) | 2022-08-08 |
Family
ID=67307343
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018001696A Active JP7114165B2 (en) | 2018-01-10 | 2018-01-10 | Position calculation device and position calculation program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7114165B2 (en) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112833897A (en) * | 2020-12-24 | 2021-05-25 | 浙江合众新能源汽车有限公司 | Vehicle positioning method and device based on vehicle-road cooperation and high-precision positioning fusion |
WO2021158062A1 (en) * | 2020-02-05 | 2021-08-12 | (주)에바 | Position recognition method and position recognition system for vehicle |
JP2022020917A (en) * | 2020-07-21 | 2022-02-02 | 株式会社Wave Technology | System and method for detecting moving-body position |
CN114463439A (en) * | 2022-01-18 | 2022-05-10 | 襄阳达安汽车检测中心有限公司 | Vehicle-mounted camera correction method and device based on image calibration technology |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004264182A (en) * | 2003-03-03 | 2004-09-24 | Kawasaki Heavy Ind Ltd | Method and apparatus for measuring location of vehicle |
JP2012159506A (en) * | 2011-01-31 | 2012-08-23 | Raytheon Co | Navigation system and method using coded marker |
JP2015184155A (en) * | 2014-03-25 | 2015-10-22 | 株式会社日立製作所 | Map data structure, map data update method, vehicle position correction method, on-vehicle device, server, and vehicle position data correction system |
WO2016130719A2 (en) * | 2015-02-10 | 2016-08-18 | Amnon Shashua | Sparse map for autonomous vehicle navigation |
-
2018
- 2018-01-10 JP JP2018001696A patent/JP7114165B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004264182A (en) * | 2003-03-03 | 2004-09-24 | Kawasaki Heavy Ind Ltd | Method and apparatus for measuring location of vehicle |
JP2012159506A (en) * | 2011-01-31 | 2012-08-23 | Raytheon Co | Navigation system and method using coded marker |
JP2015184155A (en) * | 2014-03-25 | 2015-10-22 | 株式会社日立製作所 | Map data structure, map data update method, vehicle position correction method, on-vehicle device, server, and vehicle position data correction system |
WO2016130719A2 (en) * | 2015-02-10 | 2016-08-18 | Amnon Shashua | Sparse map for autonomous vehicle navigation |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021158062A1 (en) * | 2020-02-05 | 2021-08-12 | (주)에바 | Position recognition method and position recognition system for vehicle |
JP2022020917A (en) * | 2020-07-21 | 2022-02-02 | 株式会社Wave Technology | System and method for detecting moving-body position |
JP7045421B2 (en) | 2020-07-21 | 2022-03-31 | 株式会社Wave Technology | Mobile position detection system and mobile position detection method |
CN112833897A (en) * | 2020-12-24 | 2021-05-25 | 浙江合众新能源汽车有限公司 | Vehicle positioning method and device based on vehicle-road cooperation and high-precision positioning fusion |
CN114463439A (en) * | 2022-01-18 | 2022-05-10 | 襄阳达安汽车检测中心有限公司 | Vehicle-mounted camera correction method and device based on image calibration technology |
Also Published As
Publication number | Publication date |
---|---|
JP7114165B2 (en) | 2022-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110057373B (en) | Method, apparatus and computer storage medium for generating high-definition semantic map | |
Rose et al. | An integrated vehicle navigation system utilizing lane-detection and lateral position estimation systems in difficult environments for GPS | |
US10788830B2 (en) | Systems and methods for determining a vehicle position | |
EP3343172B1 (en) | Creation and use of enhanced maps | |
US10240934B2 (en) | Method and system for determining a position relative to a digital map | |
US10955854B2 (en) | Method and system for determining the position of a vehicle | |
JP7114165B2 (en) | Position calculation device and position calculation program | |
JP6656886B2 (en) | Information processing apparatus, control method, program, and storage medium | |
JP2001331787A (en) | Road shape estimating device | |
JP2008249639A (en) | Own position locating device, own position locating method, and own position locating program | |
KR20180132917A (en) | A map data update device, a map data update method, and a map data update program | |
JP4596566B2 (en) | Self-vehicle information recognition device and self-vehicle information recognition method | |
JP2009199572A (en) | Three-dimensional machine map, three-dimensional machine map generating device, navigation device, and automatic driving device | |
JP2009053059A (en) | Object specifying device, object specifying method, and object specifying program | |
JP5762131B2 (en) | CALIBRATION DEVICE, CALIBRATION DEVICE CALIBRATION METHOD, AND CALIBRATION PROGRAM | |
US20130293716A1 (en) | Mobile mapping system for road inventory | |
JP2009180631A (en) | Navigator, navigation method and program | |
CN112601928A (en) | Position coordinate estimation device, position coordinate estimation method, and program | |
JP2018189463A (en) | Vehicle position estimating device and program | |
JP4986883B2 (en) | Orientation device, orientation method and orientation program | |
JP2011112556A (en) | Search target position locating device, method, and computer program | |
US9014964B2 (en) | Navigation apparatus capable of providing real-time navigation images | |
US11482098B2 (en) | Localization in complex traffic scenarios with the aid of markings | |
KR102622587B1 (en) | Apparatus and method for correcting longitudinal position error of fine positioning system | |
JP2017142204A (en) | Point group positioning device and point group positioning program |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200520 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210413 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210527 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210907 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211027 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220222 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220426 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220426 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20220509 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20220510 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220726 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220726 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7114165 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |