JP2020067698A - 区画線検出装置及び区画線検出方法 - Google Patents
区画線検出装置及び区画線検出方法 Download PDFInfo
- Publication number
- JP2020067698A JP2020067698A JP2018198391A JP2018198391A JP2020067698A JP 2020067698 A JP2020067698 A JP 2020067698A JP 2018198391 A JP2018198391 A JP 2018198391A JP 2018198391 A JP2018198391 A JP 2018198391A JP 2020067698 A JP2020067698 A JP 2020067698A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- lane
- image
- lane marking
- pixel
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 65
- 238000005192 partition Methods 0.000 title abstract 12
- 238000012937 correction Methods 0.000 claims abstract description 126
- 238000004364 calculation method Methods 0.000 claims abstract description 17
- 238000003384 imaging method Methods 0.000 abstract description 2
- 238000012545 processing Methods 0.000 description 20
- 230000008859 change Effects 0.000 description 12
- 238000004891 communication Methods 0.000 description 8
- 238000010586 diagram Methods 0.000 description 8
- 238000000034 method Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- 230000011218 segmentation Effects 0.000 description 6
- 238000013527 convolutional neural network Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 239000000446 fuel Substances 0.000 description 3
- 238000002347 injection Methods 0.000 description 3
- 239000007924 injection Substances 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 240000004050 Pentaglottis sempervirens Species 0.000 description 2
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000007637 random forest analysis Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 238000013526 transfer learning Methods 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
- B62D—MOTOR VEHICLES; TRAILERS
- B62D15/00—Steering not otherwise provided for
- B62D15/02—Steering position indicators ; Steering position determination; Steering aids
- B62D15/025—Active steering aids, e.g. helping the driver by actively influencing the steering system after environment evaluation
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Transportation (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Electromagnetism (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
補正領域設定部32は、運転計画部35が設定した車両10の走行予定経路を参照して、車両10の走行予定経路が直近の所定期間内に車線変更を伴うものであるか否か判定する。そして補正領域設定部32は、操舵角センサ(図示せず)からプロセッサ23が受信した操舵角の絶対値が、所定の閾値よりも大きくなると、車両10が車線変更すると判定する。あるいは、補正領域設定部32は、測位情報受信機3により受信した車両10の現在位置情報とメモリ22に記憶されている地図情報とを参照して、車両10の現在位置における道路が直線であるか否か判定してもよい。そして補正領域設定部32は、車両10の現在位置における道路が直線である場合において、操舵角センサ(図示せず)からプロセッサ23が受信した操舵角の絶対値が、所定の閾値よりも大きくなると、車両10が車線変更すると判定してもよい。なお、所定期間は、例えば、車両10の走行予定経路における、車線変更中の区間を車両10が走行するのに要する期間とすることができる。あるいは、操舵角により示される車両10の回転方向が、車線を変更する方向と逆向きとなると、補正領域設定部32は、その所定期間が終了したと判定してもよい。
なお、運転計画部35は、複数の走行予定経路を生成してもよい。この場合、運転計画部35は、複数の走行予定経路のうち、車両10の加速度の絶対値の総和が最小となる経路を選択してもよい。
2 カメラ
3 測位情報受信機
4 電子制御装置(区画線検出装置)
5 車内ネットワーク
21 通信インターフェース
22 メモリ
23 プロセッサ
31 確信度算出部
32 補正領域設定部
33 補正部
34 区画線検出部
35 運転計画部
36 車両制御部
Claims (3)
- 車両に搭載された撮像部により得られた画像を、画素ごとに当該画素に写っている可能性のある物体ごとの確からしさを表す確信度を算出する識別器に入力することで、前記画像の画素ごとに、当該画素に写っている物体が車線区画線である確信度及び他の物体である確信度を算出する確信度算出部と、
前記車両が車線変更するときに、前記画像のうちの車線区画線が含まれると想定される範囲に補正領域を設定する補正領域設定部と、
前記補正領域に含まれる各画素について、前記車線区画線である確信度または前記他の物体である確信度を、前記車線区画線である確信度が前記他の物体である確信度に対して相対的に高くなるよう補正する補正部と、
前記画像の各画素のうち、車線区画線である確信度が前記他の物体である確信度よりも高い画素を検出し、検出した画素が並ぶ直線を車線区画線として検出する区画線検出部と、
を有する区画線検出装置。 - 前記補正領域設定部は、前記車両が車線変更するときに前記車両が横切る車線区画線と前記車両との位置関係に応じて前記画像上での前記補正領域の位置及び範囲を設定する、請求項1に記載の区画線検出装置。
- 車両に搭載された撮像部により得られた画像を、画素ごとに当該画素に写っている可能性のある物体ごとの確からしさを表す確信度を算出する識別器に入力することで、前記画像の画素ごとに、当該画素に写っている物体が車線区画線である確信度及び他の物体である確信度を算出し、
前記車両が車線変更するときに、前記画像のうちの車線区画線が含まれると想定される範囲に補正領域を設定し、
前記補正領域に含まれる各画素について、前記車線区画線である確信度または前記他の物体である確信度を、前記車線区画線である確信度が前記他の物体である確信度に対して相対的に高くなるよう補正し、
前記画像の各画素のうち、車線区画線である確信度が前記他の物体である確信度よりも高い画素を検出し、検出した画素が並ぶ直線を車線区画線として検出する、
区画線検出方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198391A JP7077910B2 (ja) | 2018-10-22 | 2018-10-22 | 区画線検出装置及び区画線検出方法 |
US16/658,753 US11157753B2 (en) | 2018-10-22 | 2019-10-21 | Road line detection device and road line detection method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018198391A JP7077910B2 (ja) | 2018-10-22 | 2018-10-22 | 区画線検出装置及び区画線検出方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020067698A true JP2020067698A (ja) | 2020-04-30 |
JP7077910B2 JP7077910B2 (ja) | 2022-05-31 |
Family
ID=70279666
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018198391A Active JP7077910B2 (ja) | 2018-10-22 | 2018-10-22 | 区画線検出装置及び区画線検出方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US11157753B2 (ja) |
JP (1) | JP7077910B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7340667B1 (ja) | 2022-08-25 | 2023-09-07 | 株式会社デンソーテン | 情報処理装置、情報処理方法およびプログラム |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102633140B1 (ko) * | 2018-10-23 | 2024-02-05 | 삼성전자주식회사 | 주행 정보를 결정하는 방법 및 장치 |
US10853671B2 (en) * | 2019-03-06 | 2020-12-01 | Dura Operating, Llc | Convolutional neural network system for object detection and lane detection in a motor vehicle |
CN111815997B (zh) * | 2020-06-20 | 2022-05-31 | 宁波工程学院 | 一种停车诱导方法、系统、智能终端及存储介质 |
TWI793477B (zh) * | 2020-12-04 | 2023-02-21 | 財團法人船舶暨海洋產業研發中心 | 船舶輔助校正系統及其運作方法 |
CN112528829B (zh) * | 2020-12-07 | 2023-10-24 | 中国科学院深圳先进技术研究院 | 一种基于视觉的非结构化道路的居中行驶方法 |
CN114037977B (zh) * | 2022-01-07 | 2022-04-26 | 深圳佑驾创新科技有限公司 | 道路灭点的检测方法、装置、设备及存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9081385B1 (en) * | 2012-12-21 | 2015-07-14 | Google Inc. | Lane boundary detection using images |
JP2016099719A (ja) * | 2014-11-19 | 2016-05-30 | 株式会社日本自動車部品総合研究所 | 走行区画線認識装置 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
ES2391556T3 (es) * | 2002-05-03 | 2012-11-27 | Donnelly Corporation | Sistema de detección de objetos para vehículo |
JP5088669B2 (ja) * | 2007-03-23 | 2012-12-05 | 株式会社デンソー | 車両周辺監視装置 |
JP6458384B2 (ja) * | 2014-07-24 | 2019-01-30 | 株式会社デンソー | 車線検出装置および車線検出方法 |
KR101621370B1 (ko) * | 2014-08-13 | 2016-05-17 | 고려대학교 산학협력단 | 도로에서의 차선 검출 방법 및 장치 |
JP6140658B2 (ja) * | 2014-08-20 | 2017-05-31 | 株式会社Soken | 走行区画線認識装置、走行区画線認識プログラム |
JP6165120B2 (ja) * | 2014-10-20 | 2017-07-19 | 株式会社Soken | 走行区画線認識装置 |
JP6462494B2 (ja) * | 2015-05-29 | 2019-01-30 | 株式会社デンソー | 運転支援装置及び運転支援方法 |
EP3567518B1 (en) * | 2018-05-08 | 2022-05-18 | Aptiv Technologies Limited | Lane marker recognition |
US11604944B2 (en) * | 2018-07-17 | 2023-03-14 | Nvidia Corporation | Regression-based line detection for autonomous driving machines |
-
2018
- 2018-10-22 JP JP2018198391A patent/JP7077910B2/ja active Active
-
2019
- 2019-10-21 US US16/658,753 patent/US11157753B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9081385B1 (en) * | 2012-12-21 | 2015-07-14 | Google Inc. | Lane boundary detection using images |
JP2016099719A (ja) * | 2014-11-19 | 2016-05-30 | 株式会社日本自動車部品総合研究所 | 走行区画線認識装置 |
Non-Patent Citations (1)
Title |
---|
柳川 博彦 外2名: "対象物間の関係を利用した自動車走行環境の理解", 電子情報通信学会技術研究報告, vol. Vol. 91, No. 438, PRU91-120, JPN6022014819, 24 January 1992 (1992-01-24), JP, pages 57 - 64, ISSN: 0004752999 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7340667B1 (ja) | 2022-08-25 | 2023-09-07 | 株式会社デンソーテン | 情報処理装置、情報処理方法およびプログラム |
JP2024030900A (ja) * | 2022-08-25 | 2024-03-07 | 株式会社デンソーテン | 情報処理装置、情報処理方法およびプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP7077910B2 (ja) | 2022-05-31 |
US11157753B2 (en) | 2021-10-26 |
US20200125861A1 (en) | 2020-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7077910B2 (ja) | 区画線検出装置及び区画線検出方法 | |
KR102483649B1 (ko) | 차량 위치 결정 방법 및 차량 위치 결정 장치 | |
JP5966747B2 (ja) | 車両走行制御装置及びその方法 | |
EP3154835A1 (en) | Top-down refinement in lane marking navigation | |
JP6911312B2 (ja) | 物体識別装置 | |
US11468691B2 (en) | Traveling lane recognition apparatus and traveling lane recognition method | |
US10554951B2 (en) | Method and apparatus for the autocalibration of a vehicle camera system | |
JP7095559B2 (ja) | 区画線検出装置及び区画線検出方法 | |
JP2017181476A (ja) | 車両位置検出装置、車両位置検出方法及び車両位置検出用コンピュータプログラム | |
KR102003387B1 (ko) | 조감도 이미지를 이용한 교통 장애물의 검출 및 거리 측정 방법, 교통 장애물을 검출하고 거리를 측정하는 프로그램을 저장한 컴퓨터 판독가능 기록매체 | |
JP7463997B2 (ja) | 車両制御装置、車両制御方法及び車両制御用コンピュータプログラム | |
JP7003972B2 (ja) | 距離推定装置、距離推定方法及び距離推定用コンピュータプログラム | |
JP2020076714A (ja) | 位置姿勢推定装置 | |
JP6174884B2 (ja) | 車外環境認識装置および車外環境認識方法 | |
JP2000099896A (ja) | 走行路検出装置、車両走行制御装置および記録媒体 | |
CN115131767A (zh) | 车道边界检测装置、车道边界检测方法及车道边界检测用计算机程序 | |
JP7528915B2 (ja) | 追跡装置、追跡方法及び追跡用コンピュータプログラム | |
JP7540455B2 (ja) | 車両制御装置、車両制御方法及び車両制御用コンピュータプログラム | |
CN113492850B (zh) | 倾斜角检测装置及控制装置 | |
JP7511992B2 (ja) | 車両支援装置 | |
CN114120701B (zh) | 一种泊车定位方法及装置 | |
JP7334489B2 (ja) | 位置推定装置及びコンピュータプログラム | |
US20240017748A1 (en) | Device, method, and computer program for lane determination | |
JP2022146384A (ja) | 物体検出装置 | |
JP2022150919A (ja) | 車両制御装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A711 Effective date: 20210224 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20210224 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210420 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220322 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220419 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220502 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7077910 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |