JP6607163B2 - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP6607163B2 JP6607163B2 JP2016199184A JP2016199184A JP6607163B2 JP 6607163 B2 JP6607163 B2 JP 6607163B2 JP 2016199184 A JP2016199184 A JP 2016199184A JP 2016199184 A JP2016199184 A JP 2016199184A JP 6607163 B2 JP6607163 B2 JP 6607163B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- marker
- image processing
- processing apparatus
- lane
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 239000003550 marker Substances 0.000 claims description 118
- 238000001514 detection method Methods 0.000 claims description 14
- 238000003384 imaging method Methods 0.000 claims description 12
- 230000000007 visual effect Effects 0.000 claims description 3
- 238000000034 method Methods 0.000 description 70
- 240000004050 Pentaglottis sempervirens Species 0.000 description 36
- 235000004522 Pentaglottis sempervirens Nutrition 0.000 description 36
- 239000000470 constituent Substances 0.000 description 9
- 230000006870 function Effects 0.000 description 9
- 230000000694 effects Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000004397 blinking Effects 0.000 description 2
- 238000002834 transmittance Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
- B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
- B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
- B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
- G06V20/588—Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R21/00—Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/20—Drawing from basic elements, e.g. lines or circles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/60—Analysis of geometric attributes
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/167—Driving aids for lane monitoring, lane changing, e.g. blind spot detection
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
- B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
- B60R2300/308—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene by overlaying the real scene, e.g. through a head-up display on the windscreen
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
- B60R2300/607—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
- B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
- B60R2300/804—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
- G06T2207/30256—Lane; Road marking
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Mechanical Engineering (AREA)
- Geometry (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
- Closed-Circuit Television Systems (AREA)
Description
[1.第1実施形態]
[1−1.画像処理装置1の構成]
画像処理装置1の構成を図1に基づき説明する。画像処理装置1は、車両に搭載される車載装置である。画像処理装置1を搭載する車両を以下では自車両とする。画像処理装置1はECUであり、画像処理装置1には撮像装置2と表示装置3とが接続されている。なお、ECUは、「Electronic Control Unit」の略であり、すなわち電子制御装置の略である。
画像処理装置1は、CPU、RAM、ROM、及びフラッシュメモリ等の半導体メモリを備えた周知のマイクロコンピュータを中心に構成される。画像処理装置1の各種機能は、CPUが非遷移的実体的記録媒体に格納されたプログラムを実行することにより実現される。この例では、半導体メモリが、プログラムを格納した非遷移的実体的記録媒体に該当する。また、このプログラムが実行されることで、プログラムに対応する方法が実行される。なお、画像処理装置1を構成するマイクロコンピュータの数は1つでも複数でもよい。
画像処理装置1が実行する画像処理について、図2及び図3のフローチャートを用いて説明する。画像処理は、自車両のイグニッションスイッチがオン状態の期間中、例えば1/15秒等の所定の時間間隔で実行される。
ステップ11では、画像処理装置1は、変数Nの初期値を0に設定する処理を行う。Nは自然数である。
以上詳述した第1実施形態によれば、以下の効果が得られる。
(1a)第1実施形態の画像処理装置1は、マーカ画像31が重畳された重畳画像を表示装置3に表示させる処理を行う。そのため、レーンマーカ30の位置を明瞭に示すことができる。したがって、ドライバは自車両とレーンマーカ30との位置関係を把握しやすくなる。また、例えばレーンマーカ30が一部欠けている、或いは夜間にレーンマーカ30が不明瞭である場合にも、マーカ画像31によってレーンマーカ30が補完されるため、ドライバはレーンマーカ30を視認しやすくなる。
[2−1.第1実施形態との相違点]
第2実施形態は、基本的な構成は第1実施形態と同様であるため、相違点について以下に説明する。なお、第1実施形態と同じ符号は、同一の構成を示すものであって、先行する説明を参照する。
第2実施形態の画像処理装置1が、図3に示す第1実施形態の重畳処理に代えて実行する重畳処理について、図8のフローチャートを用いて説明する。なお、図8におけるステップ41からステップ45の処理は、図3におけるステップ11からステップ15の処理と同様であるため、説明を一部簡略化している。
続くステップ50では、画像処理装置1が重畳描画処理を行う。重畳描画処理は、図3におけるステップ20、ステップ21及びステップ22の処理の同様である。
[2−3.効果]
以上詳述した第2実施形態によれば、前述した第1実施形態の効果を奏し、さらに、以下の効果を奏する。
以上、本開示の実施形態について説明したが、本開示は上述の実施形態に限定されることなく、種々変形して実施することができる。
Claims (5)
- 車両の周辺を撮像する撮像装置(2)から撮像画像を取得するように構成された画像取得部(1、S1)と、
前記画像取得部によって取得された前記撮像画像から、前記車両の走行路を規定するレーンマーカ(30)を検出するように構成された検出部(1、S3)と、
前記検出部によって検出された前記レーンマーカに前記レーンマーカの視認を支援するためのマーカ画像(31)が重畳するように、前記マーカ画像が重畳された前記撮像画像である重畳画像を表示装置(3)に表示させるように構成された表示処理部(1、S11〜S15、S41〜S45、S5)と、
前記車両が車線変更を行う状態であるか否かを判定する判定部(1、S47、S48)と、
を備え、
前記表示処理部は、前記判定部によって前記車両が車線変更を行う状態であると判定された場合、車線変更によって前記車両が越えることになると予想される前記レーンマーカに重畳する前記マーカ画像を表示しないように構成された、
画像処理装置(1)。 - 請求項1に記載の画像処理装置であって、
前記マーカ画像の表示態様を決定するように構成された決定部(1、S16〜S22、S46、S49、S50)を更に備え、
前記表示処理部は、前記決定部によって決定された表示態様に基づく前記重畳画像を前記表示装置に表示させるように構成された、画像処理装置。 - 請求項2に記載の画像処理装置であって、
前記決定部(1、S16〜S19、S46、S49)は、前記車両と前記レーンマーカとの距離を算出し、算出した距離に応じて前記マーカ画像の表示態様を変化させるように構成された、画像処理装置。 - 請求項3に記載の画像処理装置であって、
前記決定部は、前記算出した距離が一定以下である場合の前記マーカ画像の幅が、前記算出した距離が一定以下でない場合の前記マーカ画像の幅よりも広くなるように、前記マーカ画像の表示態様を変化させるように構成された、画像処理装置。 - 請求項2から請求項4までのいずれか1項に記載の画像処理装置であって、
前記決定部(1、S20〜S22、S50)は、前記検出部によって検出された前記レーンマーカの種類に応じて前記マーカ画像の表示態様を変化させるように構成された、画像処理装置。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016199184A JP6607163B2 (ja) | 2016-10-07 | 2016-10-07 | 画像処理装置 |
US16/339,613 US10926700B2 (en) | 2016-10-07 | 2017-10-02 | Image processing device |
DE112017005114.2T DE112017005114T5 (de) | 2016-10-07 | 2017-10-02 | Bildverarbeitungsvorrichtung |
PCT/JP2017/035816 WO2018066510A1 (ja) | 2016-10-07 | 2017-10-02 | 画像処理装置 |
CN201780061868.4A CN109844801A (zh) | 2016-10-07 | 2017-10-02 | 图像处理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016199184A JP6607163B2 (ja) | 2016-10-07 | 2016-10-07 | 画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018060459A JP2018060459A (ja) | 2018-04-12 |
JP6607163B2 true JP6607163B2 (ja) | 2019-11-20 |
Family
ID=61831831
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016199184A Active JP6607163B2 (ja) | 2016-10-07 | 2016-10-07 | 画像処理装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US10926700B2 (ja) |
JP (1) | JP6607163B2 (ja) |
CN (1) | CN109844801A (ja) |
DE (1) | DE112017005114T5 (ja) |
WO (1) | WO2018066510A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE112018004891T5 (de) * | 2017-09-01 | 2020-06-10 | Sony Corporation | Bildverarbeitungsvorrichtung, bildverarbeitungsverfahren, programm und mobiler körper |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3206184B2 (ja) * | 1993-02-22 | 2001-09-04 | いすゞ自動車株式会社 | 車線逸脱警報装置 |
JP4637408B2 (ja) | 2001-06-20 | 2011-02-23 | 株式会社デンソー | 車両周辺画像処理装置及び記録媒体 |
WO2005055189A1 (en) * | 2003-12-01 | 2005-06-16 | Volvo Technology Corporation | Perceptual enhancement displays based on knowledge of head and/or eye and/or gaze position |
US7526103B2 (en) * | 2004-04-15 | 2009-04-28 | Donnelly Corporation | Imaging system for vehicle |
JP4882285B2 (ja) * | 2005-06-15 | 2012-02-22 | 株式会社デンソー | 車両用走行支援装置 |
US8559675B2 (en) * | 2009-04-23 | 2013-10-15 | Panasonic Corporation | Driving support device, driving support method, and program |
JP6142784B2 (ja) * | 2013-11-27 | 2017-06-07 | 株式会社デンソー | 運転支援装置 |
JP6084598B2 (ja) * | 2014-11-17 | 2017-02-22 | 本田技研工業株式会社 | 標識情報表示システム及び標識情報表示方法 |
JP2016199184A (ja) | 2015-04-13 | 2016-12-01 | 株式会社タンクテック | タンクローリ |
-
2016
- 2016-10-07 JP JP2016199184A patent/JP6607163B2/ja active Active
-
2017
- 2017-10-02 DE DE112017005114.2T patent/DE112017005114T5/de active Pending
- 2017-10-02 CN CN201780061868.4A patent/CN109844801A/zh active Pending
- 2017-10-02 WO PCT/JP2017/035816 patent/WO2018066510A1/ja active Application Filing
- 2017-10-02 US US16/339,613 patent/US10926700B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20200039437A1 (en) | 2020-02-06 |
WO2018066510A1 (ja) | 2018-04-12 |
CN109844801A (zh) | 2019-06-04 |
DE112017005114T5 (de) | 2019-06-27 |
JP2018060459A (ja) | 2018-04-12 |
US10926700B2 (en) | 2021-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3125212B1 (en) | Vehicle warning device | |
WO2016002163A1 (ja) | 画像表示装置、画像表示方法 | |
JP5414588B2 (ja) | 車両運転支援用処理装置及び車両運転支援装置 | |
JP5966965B2 (ja) | 車線境界線逸脱抑制装置及び車線境界線逸脱抑制方法 | |
JP6307895B2 (ja) | 車両用周辺監視装置 | |
CN106660495B (zh) | 车辆用显示装置以及车辆用显示方法 | |
JP6457278B2 (ja) | 物体検出装置及び物体検出方法 | |
EP2928182B1 (en) | Onboard image processing system | |
JP6680170B2 (ja) | 運転支援装置及び運転支援方法 | |
JP7077616B2 (ja) | 表示制御装置および表示制御方法 | |
JP2009226978A (ja) | 車両用周囲監視装置 | |
JP2018097431A (ja) | 運転支援装置、運転支援システム及び運転支援方法 | |
JP6152261B2 (ja) | 車載用駐車枠認識装置 | |
JP2019012309A (ja) | 駐車枠検出装置及び駐車枠検出方法 | |
JP6607163B2 (ja) | 画像処理装置 | |
JP2009230225A (ja) | 車両用周囲監視装置 | |
JP6148848B2 (ja) | 車載画像処理装置 | |
WO2019155868A1 (ja) | 画像生成装置および画像生成方法 | |
JP6032141B2 (ja) | 走行路面標示検知装置および走行路面標示検知方法 | |
JP2017182139A (ja) | 判定装置、判定方法、および判定プログラム | |
JP2010184606A (ja) | 車両周辺表示装置 | |
JP2008042759A (ja) | 画像処理装置 | |
JP4715604B2 (ja) | 周辺画像表示装置 | |
JP2008230358A (ja) | 表示装置 | |
EP3396620B1 (en) | Display control device and display control method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180807 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190806 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190905 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190924 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20191007 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6607163 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |