JP2020060927A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2020060927A JP2020060927A JP2018191388A JP2018191388A JP2020060927A JP 2020060927 A JP2020060927 A JP 2020060927A JP 2018191388 A JP2018191388 A JP 2018191388A JP 2018191388 A JP2018191388 A JP 2018191388A JP 2020060927 A JP2020060927 A JP 2020060927A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- virtual target
- image
- unit
- camera
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 30
- 238000003745 diagnosis Methods 0.000 claims description 28
- 230000002159 abnormal effect Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 3
- 238000000034 method Methods 0.000 description 3
- 230000005856 abnormality Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000003702 image correction Methods 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
Images
Landscapes
- Image Input (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
ここで、「物標」とは、レーダ方式あるいは交通制御システムの分野において使用されている用語で、ターゲットに相当する用語である。
画像処理装置は、カメラで撮影されたカメラ画像の歪を補正して画像認識を行う画像認識部を備えており、この画像を補正する段階で故障が発生して、歪補正が正しくできない状態に陥っている場合には、画像認識部に異常が発生していると判定する必要がある。
すなわち、自車両に向かって接近する撮影対象物(例えば、車両前方の路肩にある物標)が存在する場合、その撮影対象物は、カメラで撮影されたカメラ画像を補正して作成された補正後の画像の中において、消失点から画像周辺部に向かって経時的に移動する画素群として表れる。また、自車両から遠ざかる撮影対象物(例えば、車両後方の路肩にある物標)が存在する場合、その撮影対象物は、補正した画像中において画像周辺部から消失点に向かって経時的に移動する画素群として表れる。
図1に本願の実施の形態1の構成を示す。
図1において、カメラ10は、車両上に取り付けられ、車両の前方、側方、または後方を撮影した画像のカメラ画像データD1を画像処理装置100に向けて出力する。カメラ画像データD1には、画面の各画素の輝度、色を示す数値(画素値)含まれている。画像処理装置100は、カメラ10が出力したカメラ画像データD1から、歩行者、他の車両、白線などの物標を検知し、検知した物標の画像上の位置、大きさなどの情報を検知結果として出力する。
画像認識部40は、画像データ付加部30から入力される画像データD3から、各種物標を検知し、検知した物標の画面上の位置および大きさを示す検知結果を出力する。画像認識部40は、カメラ画像データから検知する物標(歩行者、他の車両、白線など)に加えて、仮想物標を検知する。
故障診断処理は、カメラ10と画像処理装置100の起動より開始され、それらが停止するまで繰り返して実行される。
次に、仮想物標画像データ生成部60により、仮想物標位置指定部70により指定された画面上の位置に、指定された大きさの物標を描画した画像データ(仮想物標画像データ)を生成する(ステップS002)。
次に、画像認識部40によって、カメラ画像データに仮想物標画像データを付加した画像データに対して、物標(歩行者、他の車両、白線などの本来の物標と仮想物標)の検知を行い(ステップS004)、検知した物標の画面上の位置および大きさを示す検知結果を出力する(ステップS005)。
仮想物標画像データ生成部60で生成される仮想物標画像データを用いて故障の診断を行うため、カメラ画像に消失点がない場合においても故障の診断を行うことができる。そのため、故障の検出率を向上させることができる。
本願の実施の形態2について次に説明する。
この実施の形態2の構成は、実施の形態1に示した構成と同じである。異なるところは、画像認識部40において処理される画像データの画像処理領域をカメラ画像データによる画像領域と、仮想物標画像データによる画像領域とに区分しているところである。
すなわち、図4に示すように、画像領域画面の一部に、カメラ画像データ領域外に仮想物標の画像データを付加するための画素値のない領域(カメラ画像データによる画素値が0(ゼロ)の領域)を予め設けている。図4の(A)、(B)、(C)は、図2に示した画像の状態と同様の、各部における画像の状態を表している。
仮想物標の位置および大きさのデータは、実施の形態1と同様、仮想物標画像データ生成部60と故障診断部80にそれぞれ入力される。
仮想物標画像データ生成部で生成される仮想物標画像データを用いて故障の診断を行うため、カメラ画像に消失点がないときにおいても故障の診断を行うことができる。そのため、故障の検出率を向上することできる。
また、実施の形態1、2では、仮想物標の位置・大きさは固定していたが、仮想物標位置指定部70が仮想物標の位置および大きさを逐次変更して指定することにより、画面の一部の領域の物標が検知できなくなるという故障を検知することができる。
従って、例示されていない無数の変形例が、本願に開示される技術の範囲内において想定される。例えば、少なくとも1つの構成要素を変形する場合、追加する場合または省略する場合、さらには、少なくとも1つの構成要素を抽出し、他の実施の形態の構成要素と組み合わせる場合が含まれるものとする。
50 検知結果出力部、60 仮想物標画像データ生成部、70 仮想物標位置指定部、80 故障診断部、90 診断結果出力部、100 画像処理装置
Claims (5)
- カメラ画像データから物標を検知し、検知結果を出力する画像認識部と、前記画像認識部において認識される画像処理領域に仮想の物標の仮想物標画像データを生成する仮想物標画像データ生成部と、前記カメラ画像データに前記仮想物標画像データを付加して前記画像認識部に出力する画像データ付加部と、前記画像認識部の出力した仮想物標の検知結果と前記仮想物標画像データとを照合して前記画像認識部の故障の診断を行う故障診断部とを備えたことを特徴とする画像処理装置。
- 前記仮想物標画像データ生成部は、前記カメラ画像データの領域内に前記仮想物標画像データを生成することを特徴とする請求項1に記載の画像処理装置。
- 前記仮想物標画像データ生成部は、前記カメラ画像データの領域外に前記仮想物標画像データを生成することを特徴とする請求項1に記載の画像処理装置。
- 前記画像データ付加部は、前記カメラ画像データの画素値と前記仮想物標画像データの画素値を加算することを特徴とする請求項2または3に記載の画像処理装置。
- 前記仮想物標画像データ生成部は、前記仮想物標画像データの位置を逐次変更し得る仮想物標位置指定部を備えたことを特徴とする請求項1に記載の画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018191388A JP6698779B2 (ja) | 2018-10-10 | 2018-10-10 | 画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018191388A JP6698779B2 (ja) | 2018-10-10 | 2018-10-10 | 画像処理装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020060927A true JP2020060927A (ja) | 2020-04-16 |
JP6698779B2 JP6698779B2 (ja) | 2020-05-27 |
Family
ID=70220830
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018191388A Active JP6698779B2 (ja) | 2018-10-10 | 2018-10-10 | 画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6698779B2 (ja) |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012147140A (ja) * | 2011-01-11 | 2012-08-02 | Ricoh Co Ltd | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラム及び記録媒体 |
JP2013046092A (ja) * | 2011-08-22 | 2013-03-04 | Konica Minolta Business Technologies Inc | 画像処理システム |
JP2014178957A (ja) * | 2013-03-15 | 2014-09-25 | Nec Corp | 学習データ生成装置、学習データ作成システム、方法およびプログラム |
JP2016045716A (ja) * | 2014-08-22 | 2016-04-04 | 株式会社デンソー | 画像処理装置、及び画像処理装置の故障診断方法 |
JP2016085721A (ja) * | 2014-10-27 | 2016-05-19 | 株式会社デンソー | 画像処理装置 |
JP2017017635A (ja) * | 2015-07-06 | 2017-01-19 | 株式会社トランストロン | 故障診断装置 |
-
2018
- 2018-10-10 JP JP2018191388A patent/JP6698779B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012147140A (ja) * | 2011-01-11 | 2012-08-02 | Ricoh Co Ltd | 画像処理装置、画像形成装置、画像処理方法、画像処理プログラム及び記録媒体 |
JP2013046092A (ja) * | 2011-08-22 | 2013-03-04 | Konica Minolta Business Technologies Inc | 画像処理システム |
JP2014178957A (ja) * | 2013-03-15 | 2014-09-25 | Nec Corp | 学習データ生成装置、学習データ作成システム、方法およびプログラム |
JP2016045716A (ja) * | 2014-08-22 | 2016-04-04 | 株式会社デンソー | 画像処理装置、及び画像処理装置の故障診断方法 |
JP2016085721A (ja) * | 2014-10-27 | 2016-05-19 | 株式会社デンソー | 画像処理装置 |
JP2017017635A (ja) * | 2015-07-06 | 2017-01-19 | 株式会社トランストロン | 故障診断装置 |
Also Published As
Publication number | Publication date |
---|---|
JP6698779B2 (ja) | 2020-05-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109308481B (zh) | 识别装置 | |
US9592764B2 (en) | Redundant object detection for driver assistance systems | |
WO2018110605A1 (ja) | 画像処理装置、外界認識装置 | |
US10246038B2 (en) | Object recognition device and vehicle control system | |
JP6458579B2 (ja) | 画像処理装置 | |
US10597013B2 (en) | Driving assist device and driving assist method | |
WO2015104915A1 (ja) | 車載カメラ画像処理装置 | |
CN109311474A (zh) | 行人保护中的自主制动故障管理 | |
US10723347B2 (en) | Vehicle control device and vehicle control method | |
WO2017022496A1 (ja) | 運転者に支援画像を提示する装置及びその方法 | |
US11560174B2 (en) | Automatic steering control device | |
JP7270499B2 (ja) | 異常検出装置、異常検出方法、姿勢推定装置、および、移動体制御システム | |
TWI592883B (zh) | Image recognition system and its adaptive learning method | |
WO2016027408A1 (ja) | 画像処理装置、及び画像処理装置の故障診断方法 | |
WO2019181429A1 (ja) | 障害物認識支援装置、障害物認識支援方法、記憶媒体 | |
JP2010061375A (ja) | 物体認識装置及びプログラム | |
JP6698779B2 (ja) | 画像処理装置 | |
JP4772622B2 (ja) | 周辺監視システム | |
JP2002298299A (ja) | 車両の運転支援装置 | |
KR102485318B1 (ko) | 단안 영상 기반 추월 및 합류 차량 인식 시스템 및 방법 | |
JPH06130076A (ja) | 斜め後方走行車検出方法 | |
KR102299446B1 (ko) | 인식 고장 진단 장치 및 인식 고장 진단 방법 | |
JP6413645B2 (ja) | 操作入力装置 | |
JP2012178639A (ja) | 画像処理装置、駐車制御システム、及び、画像処理方法 | |
JP2022006260A (ja) | 煽り運転検知プログラム、煽り運転検知装置、煽り運転検知システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181010 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20190926 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191029 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191211 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20191211 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200407 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200428 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6698779 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |