JP2022130209A - 自動運転システム、自動運転方法、及び自動運転プログラム - Google Patents
自動運転システム、自動運転方法、及び自動運転プログラム Download PDFInfo
- Publication number
- JP2022130209A JP2022130209A JP2021029263A JP2021029263A JP2022130209A JP 2022130209 A JP2022130209 A JP 2022130209A JP 2021029263 A JP2021029263 A JP 2021029263A JP 2021029263 A JP2021029263 A JP 2021029263A JP 2022130209 A JP2022130209 A JP 2022130209A
- Authority
- JP
- Japan
- Prior art keywords
- obstacle
- distribution
- recognition
- automatic driving
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 238000009826 distribution Methods 0.000 claims abstract description 149
- 238000011156 evaluation Methods 0.000 claims abstract description 48
- 230000005856 abnormality Effects 0.000 claims description 30
- 230000033001 locomotion Effects 0.000 claims description 18
- 238000007619 statistical method Methods 0.000 claims description 6
- 238000003384 imaging method Methods 0.000 abstract description 8
- 238000012545 processing Methods 0.000 description 43
- 238000009825 accumulation Methods 0.000 description 41
- 238000013499 data model Methods 0.000 description 37
- 238000013480 data collection Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 21
- 238000001514 detection method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 15
- 238000004891 communication Methods 0.000 description 14
- 230000005540 biological transmission Effects 0.000 description 7
- 230000007717 exclusion Effects 0.000 description 4
- 230000002159 abnormal effect Effects 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 3
- 230000007423 decrease Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
- 230000029305 taxis Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
- G06V20/54—Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W60/00—Drive control systems specially adapted for autonomous road vehicles
- B60W60/001—Planning or execution of driving tasks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2540/00—Input parameters relating to occupants
- B60W2540/215—Selection or confirmation of options
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/10—Historical data
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/20—Data confidence level
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2556/00—Input parameters relating to data
- B60W2556/45—External transmission of data to or from the vehicle
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Traffic Control Systems (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
Abstract
Description
図1は、第1の実施形態に係る自動運転システム100の構成の一例を示す図である。
上記第1の実施形態では、インフラカメラに認識部が設けられ、評価対象として、所定期間毎にバッチ処理で抽出される障害物の特徴量分布を用いる形態について説明した。第2の実施形態では、インフラカメラに認識部が設けられ、評価対象として、リアルタイムで抽出される障害物の特徴量を用いる形態について説明する。
第3の実施形態では、自動運転制御装置に認識部が設けられ、評価対象として、所定期間毎にバッチ処理で抽出される障害物の特徴量分布を用いる形態について説明する。
第4の実施形態では、自動運転制御装置に認識部が設けられ、評価対象として、リアルタイムで抽出される障害物の特徴量を用いる形態について説明する。
メモリと、
少なくとも1つのプロセッサと、
を含み、
前記プロセッサは、
自動運転車両の外部環境における特定の場所に設置された撮影装置によって前記自動運転車両が走行する道路を含む所定領域を撮影して得られた画像データに基づいて、障害物を認識し、
過去に認識された障害物に関する特徴量の分布を表す特徴量分布を作成し、
前記作成された特徴量分布と、評価対象として認識された障害物の特徴量とを比較し、前記評価対象として認識された障害物の誤認識を判定する
ように構成されている自動運転システム。
コンピュータを、
自動運転車両の外部環境における特定の場所に設置された撮影装置によって前記自動運転車両が走行する道路を含む所定領域を撮影して得られた画像データに基づいて、障害物を認識する認識部、
前記認識部により過去に認識された障害物に関する特徴量の分布を表す特徴量分布を作成する作成部、及び、
前記作成部により作成された特徴量分布と、評価対象として認識された障害物の特徴量とを比較し、前記評価対象として認識された障害物の誤認識を判定する判定部、
として機能させるための自動運転プログラムを記憶した非遷移的記録媒体。
Claims (9)
- 自動運転車両の外部環境における特定の場所に設置された撮影装置(30、30A)によって前記自動運転車両が走行する道路を含む所定領域を撮影して得られた画像データに基づいて、障害物を認識する認識部(31B、21L)と、
前記認識部により過去に認識された障害物に関する特徴量の分布を表す特徴量分布を作成する作成部(21B)と、
前記作成部により作成された特徴量分布と、評価対象として認識された障害物の特徴量とを比較し、前記評価対象として認識された障害物の誤認識を判定する判定部(21C、21H)と、
を備えた自動運転システム(100、100A、100B、100C)。 - 前記作成部は、前記特徴量分布として、障害物が滞留した時間の分布を表す滞留時間分布、障害物が移動した速度の分布を表す移動速度分布、及び、障害物が移動した距離の分布を表す移動距離分布の少なくとも1つを作成し、
前記判定部は、前記作成部により作成された滞留時間分布、移動速度分布、及び移動距離分布の少なくとも1つと、前記評価対象として認識された障害物の滞留時間、移動速度、及び移動距離の少なくとも1つとを比較し、前記評価対象として認識された障害物の誤認識を判定する
請求項1に記載の自動運転システム。 - 前記判定部(21C)は、前記比較を、前記滞留時間分布の統計分析から得られる代表値、前記移動速度分布の統計分析から得られる代表値、及び、前記移動距離分布の統計分析から得られる代表値の少なくとも1つを基準として実行する
請求項2に記載の自動運転システム。 - 前記判定部(21H)は、前記比較を、前記滞留時間分布から得られる閾値、前記移動速度分布から得られる閾値、及び、前記移動距離分布から得られる閾値の少なくとも1つを基準として実行する
請求項2に記載の自動運転システム。 - 前記判定部により前記障害物が誤認識と判定された場合に、前記障害物の認識結果を除外するフラグが付与された障害物情報を、前記障害物の周辺を走行する自動運転車両に通知する通知部(21J)を更に備えた
請求項4に記載の自動運転システム。 - 前記判定部により前記障害物が誤認識と判定された場合に、オペレータに対して、誤認識と判定されたときの画像データを提示し、前記オペレータから異常の有無の入力を受け付ける提示部(21E)を更に備え、
前記通知部は、前記オペレータから異常有りの入力を受け付けた場合に、前記障害物の認識結果を除外するフラグが付与された前記障害物情報を、前記障害物の周辺を走行する自動運転車両に通知する
請求項5に記載の自動運転システム。 - 前記判定部により前記障害物が誤認識と判定された場合に、誤認識の判定結果に対して、オペレータが入力した異常の有無及び要因を含む判定結果をラベルとして、障害物の認識モデルを学習する学習部(21F)を更に備えた
請求項1~請求項6の何れか1項に記載の自動運転システム。 - 自動運転車両の外部環境における特定の場所に設置された撮影装置によって前記自動運転車両が走行する道路を含む所定領域を撮影して得られた画像データに基づいて、障害物を認識し、
過去に認識された障害物に関する特徴量の分布を表す特徴量分布を作成し、
前記作成された特徴量分布と、評価対象として認識された障害物の特徴量とを比較し、前記評価対象として認識された障害物の誤認識を判定する、
自動運転方法。 - コンピュータを、
自動運転車両の外部環境における特定の場所に設置された撮影装置(30、30A)によって前記自動運転車両が走行する道路を含む所定領域を撮影して得られた画像データに基づいて、障害物を認識する認識部(31B、21L)、
前記認識部により過去に認識された障害物に関する特徴量の分布を表す特徴量分布を作成する作成部(21B)、及び、
前記作成部により作成された特徴量分布と、評価対象として認識された障害物の特徴量とを比較し、前記評価対象として認識された障害物の誤認識を判定する判定部(21C、21H)、
として機能させるための自動運転プログラム(25A)。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021029263A JP7380614B2 (ja) | 2021-02-25 | 2021-02-25 | 自動運転システム、自動運転方法、及び自動運転プログラム |
PCT/JP2022/006780 WO2022181502A1 (ja) | 2021-02-25 | 2022-02-18 | 自動運転システム、自動運転方法、及び自動運転プログラム |
US18/455,489 US20230401870A1 (en) | 2021-02-25 | 2023-08-24 | Autonomous driving system, autonomous driving method, and autonomous driving program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2021029263A JP7380614B2 (ja) | 2021-02-25 | 2021-02-25 | 自動運転システム、自動運転方法、及び自動運転プログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2022130209A true JP2022130209A (ja) | 2022-09-06 |
JP2022130209A5 JP2022130209A5 (ja) | 2022-12-08 |
JP7380614B2 JP7380614B2 (ja) | 2023-11-15 |
Family
ID=83048977
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021029263A Active JP7380614B2 (ja) | 2021-02-25 | 2021-02-25 | 自動運転システム、自動運転方法、及び自動運転プログラム |
Country Status (3)
Country | Link |
---|---|
US (1) | US20230401870A1 (ja) |
JP (1) | JP7380614B2 (ja) |
WO (1) | WO2022181502A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003030776A (ja) * | 2001-07-17 | 2003-01-31 | Japan Radio Co Ltd | 物体検知システムおよびその方法 |
JP2008026985A (ja) * | 2006-07-18 | 2008-02-07 | Toyota Motor Corp | 車載用歩行者検出装置 |
JP2019021201A (ja) * | 2017-07-20 | 2019-02-07 | 株式会社デンソー | 学習サーバ及び支援システム |
-
2021
- 2021-02-25 JP JP2021029263A patent/JP7380614B2/ja active Active
-
2022
- 2022-02-18 WO PCT/JP2022/006780 patent/WO2022181502A1/ja active Application Filing
-
2023
- 2023-08-24 US US18/455,489 patent/US20230401870A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003030776A (ja) * | 2001-07-17 | 2003-01-31 | Japan Radio Co Ltd | 物体検知システムおよびその方法 |
JP2008026985A (ja) * | 2006-07-18 | 2008-02-07 | Toyota Motor Corp | 車載用歩行者検出装置 |
JP2019021201A (ja) * | 2017-07-20 | 2019-02-07 | 株式会社デンソー | 学習サーバ及び支援システム |
Also Published As
Publication number | Publication date |
---|---|
US20230401870A1 (en) | 2023-12-14 |
JP7380614B2 (ja) | 2023-11-15 |
WO2022181502A1 (ja) | 2022-09-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3602220B1 (en) | Dynamic sensor selection for self-driving vehicles | |
CN110809790B (zh) | 车辆用信息存储方法、车辆的行驶控制方法、以及车辆用信息存储装置 | |
US11769318B2 (en) | Systems and methods for intelligent selection of data for building a machine learning model | |
JP5288423B2 (ja) | データ配信システム、及びデータ配信方法 | |
US9360332B2 (en) | Method for determining a course of a traffic lane for a vehicle | |
CN111353522B (zh) | 用于确定车辆周围环境中的路标的方法和系统 | |
CN110807412B (zh) | 一种车辆激光定位的方法、车载设备和存储介质 | |
CN112540606B (zh) | 避障的方法、装置、调度服务器及存储介质 | |
JP7380616B2 (ja) | 自動運転制御装置、自動運転制御方法、及び自動運転制御プログラム | |
RU2769921C2 (ru) | Способы и системы для автоматизированного определения присутствия объектов | |
US12093045B2 (en) | Method and system for operating a mobile robot | |
US11577732B2 (en) | Methods and systems for tracking a mover's lane over time | |
CN111731296A (zh) | 行驶控制装置、行驶控制方法以及存储程序的存储介质 | |
JP2017224107A (ja) | センタ及び運転支援システム | |
US20230260254A1 (en) | Information processing device, information processing method, and program | |
US20230068848A1 (en) | Systems and methods for vehicle camera obstruction detection | |
WO2022108744A1 (en) | On-board feedback system for autonomous vehicles | |
WO2022181502A1 (ja) | 自動運転システム、自動運転方法、及び自動運転プログラム | |
CN117416344A (zh) | 自主驾驶系统中校车的状态估计 | |
US20240265298A1 (en) | Conflict analysis between occupancy grids and semantic segmentation maps | |
JP7537263B2 (ja) | 遠隔支援装置、遠隔支援方法、及び遠隔支援プログラム | |
US20220105959A1 (en) | Methods and systems for predicting actions of an object by an autonomous vehicle to determine feasible paths through a conflicted area | |
CN117831269A (zh) | 区域监视系统及区域监视方法 | |
JP2024062325A (ja) | 情報処理装置及びプログラム | |
CN117854268A (zh) | 区域监视系统及区域监视方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210309 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20210309 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221130 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230704 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20230817 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231003 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231016 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7380614 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |