JP2022088094A - 画像認識装置及び画像認識方法 - Google Patents
画像認識装置及び画像認識方法 Download PDFInfo
- Publication number
- JP2022088094A JP2022088094A JP2020200350A JP2020200350A JP2022088094A JP 2022088094 A JP2022088094 A JP 2022088094A JP 2020200350 A JP2020200350 A JP 2020200350A JP 2020200350 A JP2020200350 A JP 2020200350A JP 2022088094 A JP2022088094 A JP 2022088094A
- Authority
- JP
- Japan
- Prior art keywords
- lane
- road sign
- road
- recognized
- sign
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 238000003384 imaging method Methods 0.000 abstract 1
- 230000006870 function Effects 0.000 description 18
- 239000000463 material Substances 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000010801 machine learning Methods 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 240000004050 Pentaglottis sempervirens Species 0.000 description 1
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
- G06V20/582—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
- B60W30/18—Propelling the vehicle
- B60W30/18009—Propelling the vehicle related to particular drive situations
- B60W30/18163—Lane change; Overtaking manoeuvres
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/82—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using neural networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2554/00—Input parameters relating to objects
- B60W2554/40—Dynamic objects, e.g. animals, windblown objects
- B60W2554/404—Characteristics
- B60W2554/4045—Intention, e.g. lane change or imminent movement
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2555/00—Input parameters relating to exterior conditions, not covered by groups B60W2552/00, B60W2554/00
- B60W2555/60—Traffic rules, e.g. speed limits or right of way
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Automation & Control Theory (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Databases & Information Systems (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
上記実施形態の構成の一部を変更してもよい。以下、上記実施形態の構成の一部を変更した他の実施形態(変形例)について説明する。
Claims (6)
- 車両が走行する走行路を撮像した画像情報を取得する画像情報取得部(21)と、
前記画像情報に基づいて、道路標識(60)を認識する標識認識部(22)と、
前記画像情報に基づいて、前記走行路(70)の車線(81~83)を認識する車線認識部(23)と、
前記車線認識部により認識された車線に係る車線情報を時系列で記憶する記憶部(24)と、
前記標識認識部により認識された道路標識が、自車線に対応するか否かを判定する判定部(25)と、を備え、
前記判定部は、時系列で記憶された車線情報に基づいて、予め決められた期間に認識された車線のうち、前記道路標識が最もふさわしい車線を選択することにより、前記道路標識が自車線に対応するか否かを判定する画像認識装置(20)。 - 前記車線情報には、認識された各車線の位置情報が含まれ、
前記判定部は、前記道路標識の位置情報と各車線の位置情報とを比較することにより、前記道路標識が最もふさわしい車線を選択する請求項1に記載の画像認識装置。 - 前記各車線の位置情報は、自車両を基準とする相対的な位置であり、
前記判定部は、予め決められた期間に認識された車線のうち、前記画像情報から認識できない車線の位置情報を、自車両の移動量に基づいて補正し、補正した後、前記各車線の位置情報と前記道路標識の位置情報とを比較する請求項2に記載の画像認識装置。 - 前記判定部は、前記道路標識が自車線に対応するか否かの判定を、所定期間繰り返し実行し、最終的な判定結果を多数決で決定する請求項1~3のうちいずれか1項に記載の画像認識装置。
- 前記車線認識部は、前記画像情報に基づいて、車線の種類を認識し、
前記記憶部は、認識された各車線の種類を、前記車線情報に含ませて記憶し、
前記判定部は、前記道路標識の位置情報と各車線の位置情報とを比較する際、前記車線情報に含まれる前記各車線の種類に基づいて、前記道路標識に対応する車線として最もふさわしい車線が、自車線又は同一進行方向の隣接車線である場合、前記道路標識が自車線に対応すると判定する請求項1~4のうちいずれか1項に記載の画像認識装置。 - 画像認識装置により実行される画像認識方法において、
車両が走行する走行路を撮像した画像情報を取得する画像情報取得ステップ(S101)と、
前記画像情報に基づいて、道路標識を認識する標識認識ステップ(S101)と、
前記画像情報に基づいて、前記走行路の車線を認識する車線認識ステップ(S103,S201)と、
前記車線認識ステップにより認識された車線に係る車線情報を時系列で記憶する記憶ステップ(S204)と、
前記標識認識ステップにより認識された道路標識が、自車線に対応するか否かを判定する判定ステップ(S106~S108)と、を備え、
前記判定ステップでは、時系列で記憶された車線情報に基づいて、予め決められた期間に認識された車線のうち、前記道路標識が最もふさわしい車線を選択することにより、前記道路標識が自車線に対応するか否かを判定する画像認識方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020200350A JP7470024B2 (ja) | 2020-12-02 | 2020-12-02 | 画像認識装置及び画像認識方法 |
US17/538,723 US20220172491A1 (en) | 2020-12-02 | 2021-11-30 | Image recognition apparatus, driver assistance system and image recognition method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2020200350A JP7470024B2 (ja) | 2020-12-02 | 2020-12-02 | 画像認識装置及び画像認識方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2022088094A true JP2022088094A (ja) | 2022-06-14 |
JP7470024B2 JP7470024B2 (ja) | 2024-04-17 |
Family
ID=81751458
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020200350A Active JP7470024B2 (ja) | 2020-12-02 | 2020-12-02 | 画像認識装置及び画像認識方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20220172491A1 (ja) |
JP (1) | JP7470024B2 (ja) |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3435623B2 (ja) * | 1996-05-15 | 2003-08-11 | 株式会社日立製作所 | 交通流監視装置 |
JP2004206275A (ja) | 2002-12-24 | 2004-07-22 | Denso Corp | 自動運転制御システム |
EP2583263B1 (de) | 2010-06-15 | 2014-03-19 | Conti Temic Microelectronic GmbH | Verfahren zur fusion eines verkehrszeichenerkennungssystems und eines spurerkennungssystems eines kraftfahrzeugs |
JP5594246B2 (ja) * | 2011-07-20 | 2014-09-24 | 株式会社デンソー | 車線認識装置 |
JP6506625B2 (ja) * | 2015-05-29 | 2019-04-24 | 株式会社デンソー | 運転支援装置及び運転支援方法 |
JP2017102607A (ja) * | 2015-11-30 | 2017-06-08 | 株式会社デンソー | 運転支援装置 |
KR101843774B1 (ko) | 2016-05-18 | 2018-03-30 | 엘지전자 주식회사 | 차량 운전 보조 장치 및 차량 |
JP6838780B2 (ja) * | 2017-03-17 | 2021-03-03 | 日立Astemo株式会社 | 車両制御装置 |
JP6745294B2 (ja) | 2018-04-04 | 2020-08-26 | 本田技研工業株式会社 | 車両制御装置、車両制御方法、及びプログラム |
-
2020
- 2020-12-02 JP JP2020200350A patent/JP7470024B2/ja active Active
-
2021
- 2021-11-30 US US17/538,723 patent/US20220172491A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
JP7470024B2 (ja) | 2024-04-17 |
US20220172491A1 (en) | 2022-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107719233B (zh) | 车道偏离警告系统和与其相关联的方法 | |
EP1596322B1 (en) | Driving lane recognizer and driving lane recognizing method | |
JP5966965B2 (ja) | 車線境界線逸脱抑制装置及び車線境界線逸脱抑制方法 | |
JP6096723B2 (ja) | 走行区画線認識装置及び走行区画線認識プログラム | |
US9352746B2 (en) | Lane relative position estimation method and system for driver assistance systems | |
EP2960829A2 (en) | Lane boundary estimation device and lane boundary estimation method | |
KR101968349B1 (ko) | 영상 정보를 이용한 차선 경계 검출 방법 | |
JP5894201B2 (ja) | 境界線認識装置 | |
JP6911312B2 (ja) | 物体識別装置 | |
JP6139465B2 (ja) | 物体検出装置、運転支援装置、物体検出方法、および物体検出プログラム | |
WO2016159364A1 (ja) | 歩行者判定装置 | |
US20180005073A1 (en) | Road recognition apparatus | |
US20180012083A1 (en) | Demarcation line recognition apparatus | |
JP4937844B2 (ja) | 歩行者検出装置 | |
CN110555362A (zh) | 物体识别装置 | |
JP6165120B2 (ja) | 走行区画線認識装置 | |
JP5355209B2 (ja) | ナビゲーション装置、自車の走行車線の判定方法および判定プログラム | |
JP2016218539A (ja) | 車両の走路認識装置 | |
KR20160088986A (ko) | 소실점 기반의 양안시차를 이용한 차선 검출 방법 | |
KR20020053346A (ko) | 차선 모델링 시스템의 곡선로 인식방법 | |
US11314974B2 (en) | Detecting debris in a vehicle path | |
JP6608664B2 (ja) | 自車位置認識装置 | |
KR101595317B1 (ko) | 차량의 정밀 측위를 위한 노면 표시 검출 방법 및 그 시스템 | |
JP2022088094A (ja) | 画像認識装置及び画像認識方法 | |
US11749002B2 (en) | Lane line recognition apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230308 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20240130 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240228 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240312 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240405 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7470024 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |