JP6166294B2 - 自動運転システム、自動運転の方法及びコンピューティング装置 - Google Patents
自動運転システム、自動運転の方法及びコンピューティング装置 Download PDFInfo
- Publication number
- JP6166294B2 JP6166294B2 JP2015030372A JP2015030372A JP6166294B2 JP 6166294 B2 JP6166294 B2 JP 6166294B2 JP 2015030372 A JP2015030372 A JP 2015030372A JP 2015030372 A JP2015030372 A JP 2015030372A JP 6166294 B2 JP6166294 B2 JP 6166294B2
- Authority
- JP
- Japan
- Prior art keywords
- geographic
- features
- geographic features
- ground plane
- feature map
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
- G01C21/30—Map- or contour-matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2218/00—Aspects of pattern recognition specially adapted for signal processing
- G06F2218/08—Feature extraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
Description
104 メモリ
106 データ
108 バス
110 オペレーティングシステム
112 インストールされたアプリケーション
114 第2の記憶装置
116 センサ
118 特徴検出器
120 特徴分析器
122 乗り物の位置最適化器
Claims (15)
- 自動運転システムであって、
乗り物に配置された1又は複数のセンサと、
該1又は複数のセンサと通信するコンピューティング装置であって、
当該コンピューティング装置の操作を制御するための1又は複数のプロセッサと、
前記1又は複数のプロセッサによって使用されるデータ及びプログラム指令を記憶するためのメモリとを有するコンピューティング装置と、を具備し、
前記1又は複数のプロセッサが、
前記乗り物が経路を走行するときに、前記1又は複数のセンサから受信された情報に基づいて、1又は複数の地理的特徴を識別させ、また、該1又は複数の地理的特徴の各々が、接地面に沿った物理的空間または接地面の上方の物理的空間のいずれにあるのかを識別させ、
前記1又は複数の地理的特徴の各々に対して、接地面に沿った物理的空間にあると識別された場合には水平空間と関連付け、接地面の上方の物理的空間にあると識別された場合には鉛直空間と関連付け、
前記1又は複数の地理的特徴の各々と、経路に沿った地理的特徴であって予め記録された各地理的特徴との間の一致を識別するために、前記1又は複数の地理的特徴の各々を、経路を表示する地理的特徴マップであって予め記録された地理的特徴を含む地理的特徴マップと比較し、
前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に、前記1又は複数の地理的特徴のそれぞれの空間の関連付けに少なくとも部分的に基づいた重み付けをし、
前記1又は複数の地理的特徴と前記地理的特徴マップとの間の重み付けされた比較に基づいて位置決定された乗り物の位置を生成するために、前記メモリに記憶された指令を実行するように構成された、
自動運転システム。 - 前記1又は複数の地理的特徴が、前記接地面に沿った物理的空間における少なくとも1つの水平空間の地理的特徴と、前記接地面の上方の物理的空間における少なくとも1つの鉛直空間の地理的特徴とを含み、
前記1又は複数の地理的特徴が、前記接地面に沿った物理的空間における車線マーキング及び車線縁特徴部と、前記接地面の上方の物理的空間における標識、柱、ビル及び木を含む、請求項1に記載の自動運転システム。 - 前記1又は複数のプロセッサが、地球物理学的位置及び形状の少なくとも一方を、前記1又は複数の地理的特徴のそれぞれと関連付けるように更に構成され、また、前記1又は複数のプロセッサが、前記1又は複数のセンサからの情報からの強度値を前記1又は複数の地理的特徴の各々と関連付けるように更に構成された、請求項1に記載の自動運転システム。
- 前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に対する重み付けはさらに、前記1又は複数の地理的特徴のそれぞれの前記地球物理学的位置の関連付け及び前記形状の関連付けの少なくとも一方に少なくとも部分的に基づく、請求項3に記載の自動運転システム。
- 前記地理的特徴マップが、予め記録された各地理的特徴のそれぞれの、地球物理学的位置の関連付け、形状の関連付け、強度値の関連付け及び空間の関連付けの少なくとも2つを含む、請求項1に記載の自動運転システム。
- コンピュータによって実行される自動運転の方法であって、
乗り物が経路を走行するときに前記乗り物に配置された1又は複数のセンサから情報を受信し、
1又は複数のプロセッサにより、
前記1又は複数のセンサから受信された情報に基づいて、1又は複数の地理的特徴を識別させ、また、該1又は複数の地理的特徴の各々が、接地面に沿った物理的空間または接地面の上方の物理的空間のいずれにあるのかを識別させ、
前記1又は複数の地理的特徴の各々に対して、接地面に沿った物理的空間にあると識別された場合には水平空間と関連付け、接地面の上方の物理的空間にあると識別された場合には鉛直空間と関連付け、
前記1又は複数の地理的特徴の各々と、経路に沿った地理的特徴であって予め記録された各地理的特徴との間の一致を識別するために、前記1又は複数の地理的特徴の各々を、経路を表示する地理的特徴マップであって予め記録された地理的特徴を含む地理的特徴マップと比較し、
前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に、前記1又は複数の地理的特徴のそれぞれの空間の関連付けに少なくとも部分的に基づいた重み付けをし、
前記1又は複数の地理的特徴と前記地理的特徴マップとの間の重み付けされた比較に基づいて位置決定された乗り物の位置を生成する、方法。 - 前記1又は複数の地理的特徴が、前記接地面に沿った物理的空間における少なくとも1つの水平空間の地理的特徴と、前記接地面の上方の物理的空間における少なくとも1つの鉛直空間の地理的特徴とを含み、
前記1又は複数の地理的特徴が、前記接地面に沿った物理的空間における車線マーキング及び車線縁特徴部と、前記接地面の上方の物理的空間における標識、柱、ビル及び木を含む、請求項6に記載の方法。 - 前記1又は複数のプロセッサにより、地球物理学的位置及び形状の少なくとも一方を、前記1又は複数の地理的特徴のそれぞれと関連付け、また、前記1又は複数のセンサからの情報からの強度値を前記1又は複数の地理的特徴の各々と関連付ける、請求項6に記載の方法。
- 前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に対する重み付けはさらに、前記1又は複数の地理的特徴のそれぞれの前記地球物理学的位置の関連付け及び前記形状の関連付けの少なくとも一方に少なくとも部分的に基づく、請求項8に記載の方法。
- 前記地理的特徴マップが、予め記録された各地理的特徴のそれぞれの、地球物理学的位置の関連付け、形状の関連付け、強度値の関連付け及び空間の関連付けの少なくとも2つを含む、請求項6に記載の方法。
- コンピューティング装置であって、
当該コンピューティング装置の操作を制御するための1又は複数のプロセッサと、
該1又は複数のプロセッサによって使用されるデータ及びプログラム指令を記憶するためのメモリと、を具備し、
前記1又は複数のプロセッサが、
前記乗り物が経路を走行するときに、乗り物に配置された1又は複数のセンサから受信された情報に基づいて、1又は複数の地理的特徴を識別させ、また、該1又は複数の地理的特徴の各々が、接地面に沿った物理的空間または接地面の上方の物理的空間のいずれにあるのかを識別させ、
前記1又は複数の地理的特徴の各々に対して、接地面に沿った物理的空間にあると識別された場合には水平空間と関連付け、接地面の上方の物理的空間にあると識別された場合には鉛直空間と関連付け、
前記1又は複数の地理的特徴の各々と、経路に沿った地理的特徴であって予め記録された各地理的特徴との間の一致を識別するために、前記1又は複数の地理的特徴の各々を、経路を表示する地理的特徴マップであって予め記録された地理的特徴を含む地理的特徴マップと比較し、
前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に、前記1又は複数の地理的特徴のそれぞれの前記空間の関連付けに少なくとも部分的に基づいた重み付けをし、
前記1又は複数の地理的特徴と前記地理的特徴マップとの間の重み付けされた比較に基づいて位置決定された乗り物の位置を生成するために、前記メモリに記憶された指令を実行するように構成された、
コンピューティング装置。 - 前記1又は複数の地理的特徴が、前記接地面に沿った物理的空間における車線マーキング及び車線縁特徴部と、前記接地面の上方の物理的空間における標識、柱、ビル及び木を含む、請求項11に記載のコンピューティング装置。
- 前記1又は複数のプロセッサが、地球物理学的位置及び形状の少なくとも一方を、前記1又は複数の地理的特徴のそれぞれと関連付けるように更に構成され、また、前記1又は複数のプロセッサが、前記1又は複数のセンサからの情報からの強度値を前記1又は複数の地理的特徴の各々と関連付けるように更に構成された、請求項11に記載のコンピューティング装置。
- 前記地理的特徴マップと前記1又は複数の地理的特徴の各々との間のそれぞれの比較に対する重み付けはさらに、前記1又は複数の地理的特徴のそれぞれの前記地球物理学的位置の関連付け及び前記形状の関連付けの少なくとも一方に少なくとも部分的に基づく、請求項13に記載のコンピューティング装置。
- 前記地理的特徴マップが、予め記録された各地理的特徴のそれぞれの、地球物理学的位置の関連付け、形状の関連付け、強度値の関連付け及び空間の関連付けの少なくとも2つを含む、請求項11に記載のコンピューティング装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/185,391 US9298992B2 (en) | 2014-02-20 | 2014-02-20 | Geographic feature-based localization with feature weighting |
US14/185,391 | 2014-02-20 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2015155903A JP2015155903A (ja) | 2015-08-27 |
JP2015155903A5 JP2015155903A5 (ja) | 2017-06-01 |
JP6166294B2 true JP6166294B2 (ja) | 2017-07-19 |
Family
ID=53797840
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015030372A Active JP6166294B2 (ja) | 2014-02-20 | 2015-02-19 | 自動運転システム、自動運転の方法及びコンピューティング装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9298992B2 (ja) |
JP (1) | JP6166294B2 (ja) |
Families Citing this family (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9519061B2 (en) * | 2014-12-26 | 2016-12-13 | Here Global B.V. | Geometric fingerprinting for localization of a device |
US9536176B2 (en) * | 2015-03-23 | 2017-01-03 | International Business Machines Corporation | Environmental-based location monitoring |
DE102016205867A1 (de) * | 2016-04-08 | 2017-10-12 | Robert Bosch Gmbh | Verfahren zur Bestimmung einer Pose eines wenigstens teilautomatisiert fahrenden Fahrzeugs mittels verschiedener Landmarkentypen |
DE102016214868A1 (de) * | 2016-08-10 | 2018-02-15 | Volkswagen Aktiengesellschaft | Verfahren und Vorrichtung zum Erstellen oder Ergänzen einer Karte für ein Kraftfahrzeug |
DE102016220249A1 (de) * | 2016-10-17 | 2018-04-19 | Robert Bosch Gmbh | Verfahren und System zur Lokalisierung eines Fahrzeugs |
US10699305B2 (en) | 2016-11-21 | 2020-06-30 | Nio Usa, Inc. | Smart refill assistant for electric vehicles |
JP6989284B2 (ja) * | 2017-05-01 | 2022-01-05 | 株式会社Soken | 車両位置推定装置及びプログラム |
US10289115B2 (en) * | 2017-06-01 | 2019-05-14 | Aptiv Technologies Limited | Automated vehicle map localization based on observed geometries of roadways |
DE102017211626A1 (de) * | 2017-07-07 | 2019-01-10 | Robert Bosch Gmbh | Verfahren zum Betreiben eines höher automatisierten Fahrzeugs (HAF), insbe-sondere eines hochautomatisierten Fahrzeugs |
DE102017213628A1 (de) * | 2017-08-07 | 2019-02-07 | Robert Bosch Gmbh | System und Verfahren zum Bestimmen einer Position eines Fahrzeuges |
DE102017214729A1 (de) * | 2017-08-23 | 2019-02-28 | Robert Bosch Gmbh | Verfahren und Vorrichtung zum Bestimmen einer hochgenauen Position und zum Betreiben eines automatisierten Fahrzeugs |
JP6747405B2 (ja) * | 2017-08-25 | 2020-08-26 | トヨタ自動車株式会社 | 自車位置自信度演算装置 |
US10635109B2 (en) | 2017-10-17 | 2020-04-28 | Nio Usa, Inc. | Vehicle path-planner monitor and controller |
US10935978B2 (en) * | 2017-10-30 | 2021-03-02 | Nio Usa, Inc. | Vehicle self-localization using particle filters and visual odometry |
US10859384B2 (en) * | 2017-11-15 | 2020-12-08 | Uatc, Llc | Lightweight vehicle localization systems and methods |
CN111656135A (zh) * | 2017-12-01 | 2020-09-11 | 迪普迈普有限公司 | 基于高清地图的定位优化 |
KR102421856B1 (ko) * | 2017-12-20 | 2022-07-18 | 삼성전자주식회사 | 영상의 상호작용 처리 방법 및 장치 |
DE102018206067A1 (de) * | 2018-04-20 | 2019-10-24 | Robert Bosch Gmbh | Verfahren und Vorrichtung zum Bestimmen einer hochgenauen Position eines Fahrzeugs |
WO2020031295A1 (ja) * | 2018-08-08 | 2020-02-13 | 日産自動車株式会社 | 自己位置推定方法及び自己位置推定装置 |
US11340355B2 (en) | 2018-09-07 | 2022-05-24 | Nvidia Corporation | Validation of global navigation satellite system location data with other sensor data |
KR102627453B1 (ko) | 2018-10-17 | 2024-01-19 | 삼성전자주식회사 | 위치 추정 장치 및 방법 |
EP3696507B1 (en) * | 2019-02-12 | 2022-04-20 | Veoneer Sweden AB | Representing an environment by cylindrical and planar structures |
WO2020264060A1 (en) * | 2019-06-24 | 2020-12-30 | DeepMap Inc. | Determining weights of points of a point cloud based on geometric features |
US10904851B1 (en) | 2020-01-21 | 2021-01-26 | Cisco Technology, Inc. | Systems and methods for determining locations of access points |
US11620831B2 (en) * | 2020-04-29 | 2023-04-04 | Toyota Research Institute, Inc. | Register sets of low-level features without data association |
CN113723141B (zh) * | 2020-05-25 | 2022-09-06 | 阿波罗智能技术(北京)有限公司 | 车辆的定位方法、装置、电子设备、车辆及存储介质 |
US11702111B2 (en) * | 2020-08-19 | 2023-07-18 | Here Global B.V. | Method and apparatus for estimating object reliability |
DE102020214327A1 (de) | 2020-11-13 | 2022-05-19 | Continental Automotive Gmbh | Verfahren und System zum Bestimmen einer Position einer Fahrspur |
US12031829B2 (en) * | 2020-12-03 | 2024-07-09 | Motional Ad Llc | Localization based on surrounding vehicles |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7610146B2 (en) * | 1997-10-22 | 2009-10-27 | Intelligent Technologies International, Inc. | Vehicle position determining system and method |
JPH10300494A (ja) * | 1997-04-28 | 1998-11-13 | Fujitsu Ten Ltd | 車輌位置検出装置および方法ならびに経路案内装置および方法 |
DE19855400A1 (de) * | 1998-12-01 | 2000-06-15 | Bosch Gmbh Robert | Verfahren und Vorrichtung zur Bestimmung eines zukünftigen Kursbereichs eines Fahrzeugs |
US6429789B1 (en) * | 1999-08-09 | 2002-08-06 | Ford Global Technologies, Inc. | Vehicle information acquisition and display assembly |
JP3575352B2 (ja) * | 1999-10-25 | 2004-10-13 | 株式会社デンソー | 車両用位置標定装置及び記録媒体 |
US20080033645A1 (en) * | 2006-08-03 | 2008-02-07 | Jesse Sol Levinson | Pobabilistic methods for mapping and localization in arbitrary outdoor environments |
US8699754B2 (en) * | 2008-04-24 | 2014-04-15 | GM Global Technology Operations LLC | Clear path detection through road modeling |
US8478493B2 (en) * | 2008-09-11 | 2013-07-02 | Deere & Company | High integrity perception program |
US9052207B2 (en) * | 2009-10-22 | 2015-06-09 | Tomtom Polska Sp. Z O.O. | System and method for vehicle navigation using lateral offsets |
JP2012127896A (ja) * | 2010-12-17 | 2012-07-05 | Kumamoto Univ | 移動体位置測定装置 |
JP5714940B2 (ja) * | 2011-03-04 | 2015-05-07 | 国立大学法人 熊本大学 | 移動体位置測定装置 |
US9140792B2 (en) * | 2011-06-01 | 2015-09-22 | GM Global Technology Operations LLC | System and method for sensor based environmental model construction |
KR20130068249A (ko) | 2011-12-15 | 2013-06-26 | 한국전자통신연구원 | 이동체의 위치 추정 장치 및 방법 |
KR102028720B1 (ko) * | 2012-07-10 | 2019-11-08 | 삼성전자주식회사 | 위험 요소에 대한 정보를 디스플레이하는 투명 디스플레이 장치 및 그 방법 |
US8706417B2 (en) * | 2012-07-30 | 2014-04-22 | GM Global Technology Operations LLC | Anchor lane selection method using navigation input in road change scenarios |
-
2014
- 2014-02-20 US US14/185,391 patent/US9298992B2/en active Active
-
2015
- 2015-02-19 JP JP2015030372A patent/JP6166294B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
US9298992B2 (en) | 2016-03-29 |
JP2015155903A (ja) | 2015-08-27 |
US20150233720A1 (en) | 2015-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6166294B2 (ja) | 自動運転システム、自動運転の方法及びコンピューティング装置 | |
US11703879B2 (en) | All weather autonomously driven vehicles | |
CN110155053B (zh) | 提供用于驾驶车辆的信息的方法和设备 | |
US20190147320A1 (en) | "Matching Adversarial Networks" | |
JP6317230B2 (ja) | 交差点における画像及び地図に基づく車両の検出法 | |
US10203409B2 (en) | Method and device for the localization of a vehicle from a fixed reference map | |
Chen et al. | Gaussian-process-based real-time ground segmentation for autonomous land vehicles | |
KR102037820B1 (ko) | 고정밀 지도 데이터 처리 방법, 장치, 저장 매체 및 기기 | |
US9037403B2 (en) | Intensity map-based localization with adaptive thresholding | |
US9915951B2 (en) | Detection of overhanging objects | |
CN110674705B (zh) | 基于多线激光雷达的小型障碍物检测方法及装置 | |
US20170369051A1 (en) | Occluded obstacle classification for vehicles | |
JP2019527832A (ja) | 正確な位置特定およびマッピングのためのシステムおよび方法 | |
US8972093B2 (en) | Lane-based localization | |
US11668573B2 (en) | Map selection for vehicle pose system | |
CN112781599B (zh) | 确定车辆的位置的方法 | |
RU2744012C1 (ru) | Способы и системы для автоматизированного определения присутствия объектов | |
US11699274B2 (en) | Long range localization with surfel maps | |
CN114641701A (zh) | 使用表面穿透雷达和深度学习的改进的导航和定位 | |
US20230350064A1 (en) | False positive object removal with surfel maps | |
CN114212106A (zh) | 一种车辆的可行驶区域内安全概率的确定方法及装置 | |
Chen et al. | A real-time relative probabilistic mapping algorithm for high-speed off-road autonomous driving | |
KR102373733B1 (ko) | 모바일 유닛을 위한 위치 결정 시스템 및 위치 결정 시스템을 작동시키기 위한 방법 | |
Jiang | Semi-automated Generation of Road Transition Lines Using Mobile Laser Scanning Data |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170417 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170417 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20170417 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20170519 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170523 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170622 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6166294 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |