JP5115171B2 - 車載用画像処理装置及び車載用画像表示装置 - Google Patents
車載用画像処理装置及び車載用画像表示装置 Download PDFInfo
- Publication number
- JP5115171B2 JP5115171B2 JP2007322236A JP2007322236A JP5115171B2 JP 5115171 B2 JP5115171 B2 JP 5115171B2 JP 2007322236 A JP2007322236 A JP 2007322236A JP 2007322236 A JP2007322236 A JP 2007322236A JP 5115171 B2 JP5115171 B2 JP 5115171B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- vehicle
- energy
- speed
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
ここで、画像中で速度を有する物体は、他車両や自転車あるいは人のように、運転者が自車両を運転する際に危険性があると認識すべきものであるので、画像縮小の際、それらが削除されないで画像中に残っていたり、縮小画像中で強調されたりすれば、運転者は、それらを画像中から容易に認識することができるので運転時の安全性を向上することができる。
このようにすると、画像取得手段(10)として、例えば、ステレオカメラ、単眼などを用い、それらによる移動ステレオ視、オプティカルフロー、画像の拡大率計算、物体トラッキングなど、カメラで取得した画像から画像処理により物体を抽出し、抽出した物体の位置の変化率から物体の速度を検出することができる。
[第1実施形態]
図1は、本発明が適用された車載用画像表示装置1の概略の構成を示すブロック図である。車載用画像表示装置1は、図1に示すように、車載用画像処理装置5及び表示装置50を備えている。
側後方カメラ10は、図示しない自車両周辺の画像を取得するための可視光画像を取得可能な小型広角CCDカメラであり、車両の側後方の画像を取得できるように自車両のバックミラーなどに取り付けられている。
(ア)側後方カメラ10で取得した画像中の画像エネルギを算出する。
(エ)他車両の絶対速度が所定の値よりも大きい場合に、他車両の占める画像領域の画像エネルギを他車両の占める画像領域の画像エネルギよりも高く設定する。
(カ)(オ)の処理で縮小した画像を表示装置50で表示させる。
次に図2〜図4に基づき画像処理部30で実行される処理について説明する。図2は、画像処理部30で実行される画像処理のメインルーチンの処理の流れを示すフローチャートであり、図3は、サブルーチンである画像エネルギ画像生成処理のフローチャートであり、図4は、サブルーチンである低画像エネルギ箇所削除処理のフローチャートである。
続くS120では、S115において生成された画像エネルギ画像に対して、低画像エネルギ箇所が削除され、縮小画像が得られる。低画像エネルギ箇所削除処理については後述する。
(画像エネルギ画像生成処理)
次に、図3に基づき、画像エネルギ画像生成処理について説明する。画像エネルギ画像生成処理では、S200においてベース画像エネルギパターン画像が生成される。例えば全領域で一律一定値の値を持つ画像や、格子模様などの一定パターンなど、エネルギ画像のベースとなる基本画像(ベース画像エネルギパターン画像)が生成される。
(低画像エネルギ箇所削除処理)
次に、図4に基づき、低画像エネルギ箇所削除処理について説明する。低画像エネルギ箇所削除処理では、S115(図2参照)の画像エネルギ画像生成処理で得られた画像エネルギ画像に対してまず、削減すべきライン(以下、このラインを「Seam」と呼ぶ。)の本数が算出される。
以上のような車載用画像表示装置1では、側後方カメラ10で取得された自車両後方の画像中の画像エネルギが算出され、算出された画像エネルギが所定の値より低い部分が削除されて画像が縮小される。
[他の実施形態]
以上、本発明の実施形態について説明したが、本発明は、本実施形態に限定されるものではなく、種々の態様を採ることができる。
(2)上記実施形態では、表示装置50は、自車両のバックミラー部分に、運転者が表示画面を視認可能となるように取り付けられているが、自車両の車室内の前部に装着されているカーナビゲーション装置の表示画面を用い、車両内に対して表示を行うようにしてもよい。
(3)上記実施形態では、画像エネルギ画像を生成するためにエッジ画像を生成していた(図3のS205参照)が、エッジに代わりに、縮小対象画像の特定にあわせて、他の関数を用いてもよい。具体的には、エッジ2乗関数、顕著性関数、ハリスコーナ関数、視線認識結果関数、顔認識結果関数、エントロピ関数、セグメンテーション関数あるいはHoG(Histogram of Gradientsの略)関数などの関数を用いてもよい。
(4)また側後方カメラ10は、可視光カメラの代わりに赤外線カメラであってもよい。赤外線カメラであれば、夜間など自車両の周囲が暗いときに人や自転車などを縮小画像中で強調表示する場合に有効である。
(5)上記実施形態では、画像の左右幅を縮小するよう、Seam方向は上下を想定したが、上下幅を縮小する場合は、Seam方向を左右に置き換えて適用できる。
Claims (7)
- 自車両周辺の画像を取得するための画像取得手段と、
前記画像取得手段で取得した前記画像中の前記自車両以外の物体の速度を検出する速度検出手段と、
前記画像取得手段で取得した前記画像中における線の粗密及び色のうち少なくともいずれか一方の変化量を示す画像エネルギを算出する画像エネルギ算出手段と、
前記画像エネルギ算出手段で算出した前記画像中の画像エネルギが所定の値より低い領域を抽出して削除することにより前記画像を縮小する画像縮小手段と、
を備え、
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記物体の速度に基づき、前記画像中で速度を有する前記物体の占める画像領域の画像エネルギの値を変化させることを特徴とする車載用画像処理装置。 - 請求項1に記載の車載用画像処理装置において、
前記速度検出手段は、前記自車両に対する前記画像中の物体の相対速度を検出可能に構成され、
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記画像中の物体の前記自車両に対する相対速度から前記物体と前記自車両とが接近しているか否かを判定し、前記物体と前記自車両とが接近していると判定した場合には、前記物体の占める画像領域の画像エネルギを前記物体の占める画像領域以外の領域の画像エネルギよりも高く設定することを特徴とする車載用画像処理装置。 - 請求項1又は請求項2に記載の車載用画像処理装置において、
前記速度検出手段は、前記画像中の物体の絶対速度を検出可能に構成され
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記画像中の物体の絶対速度が所定の値よりも大きい場合に、前記物体の占める画像領域の画像エネルギを前記物体の占める画像領域以外の領域の画像エネルギよりも高く設定することを特徴とする車載用画像処理装置。 - 請求項2又は請求項3に記載の車載用画像処理装置において、
前記速度検出手段は、車載レーダであることを特徴とする車載要画像処理装置。 - 請求項2又は請求項3に記載の車載用画像処理装置において、
前記速度検出手段は、
前記画像取得手段により取得した前記画像を画像処理することにより前記物体の速度を検出することを特徴とする車載用画像処理装置。 - 車載用の表示手段と、
請求項1〜請求項5の何れかに記載の車載用画像処理装置と、
前記車載用画像処理装置で縮小した画像を前記表示手段で表示させる表示制御手段と、
を備えたことを特徴とする車載用画像表示装置。 - 請求項6に記載の車載用画像表示装置において、
前記表示手段は、
前記自車両の後方視認用ミラー部分に、運転者が表示画面を視認可能となるように取り付けられていることを特徴とする車載用画像表示装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007322236A JP5115171B2 (ja) | 2007-12-13 | 2007-12-13 | 車載用画像処理装置及び車載用画像表示装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007322236A JP5115171B2 (ja) | 2007-12-13 | 2007-12-13 | 車載用画像処理装置及び車載用画像表示装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009147627A JP2009147627A (ja) | 2009-07-02 |
JP5115171B2 true JP5115171B2 (ja) | 2013-01-09 |
Family
ID=40917742
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007322236A Expired - Fee Related JP5115171B2 (ja) | 2007-12-13 | 2007-12-13 | 車載用画像処理装置及び車載用画像表示装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5115171B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102572707B1 (ko) | 2016-06-14 | 2023-08-30 | 주식회사 에이치엘클레무브 | 차량제어장치 및 차량제어방법 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4110561B2 (ja) * | 1998-12-24 | 2008-07-02 | マツダ株式会社 | 車両の障害物警報装置 |
JP3941926B2 (ja) * | 2002-03-12 | 2007-07-11 | 松下電器産業株式会社 | 車両周辺監視装置 |
JP4147470B2 (ja) * | 2003-02-25 | 2008-09-10 | 日本精機株式会社 | 路面表示方法およびその装置 |
JP3936683B2 (ja) * | 2003-08-04 | 2007-06-27 | 株式会社デンソー | 道路位置検出装置及びプログラム |
JP2006051850A (ja) * | 2004-08-10 | 2006-02-23 | Matsushita Electric Ind Co Ltd | 運転支援装置及び運転支援方法 |
JP4321483B2 (ja) * | 2005-04-12 | 2009-08-26 | 日本ビクター株式会社 | 空間解像度変換方法及び空間解像度変換プログラム |
JP4601505B2 (ja) * | 2005-07-20 | 2010-12-22 | アルパイン株式会社 | トップビュー画像生成装置及びトップビュー画像表示方法 |
US7574069B2 (en) * | 2005-08-01 | 2009-08-11 | Mitsubishi Electric Research Laboratories, Inc. | Retargeting images for small displays |
US7747107B2 (en) * | 2007-03-06 | 2010-06-29 | Mitsubishi Electric Research Laboratories, Inc. | Method for retargeting images |
-
2007
- 2007-12-13 JP JP2007322236A patent/JP5115171B2/ja not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102572707B1 (ko) | 2016-06-14 | 2023-08-30 | 주식회사 에이치엘클레무브 | 차량제어장치 및 차량제어방법 |
Also Published As
Publication number | Publication date |
---|---|
JP2009147627A (ja) | 2009-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3554062B1 (en) | Imaging apparatus | |
CN111247575B (zh) | 车辆驾驶辅助系统、方法及计算机可读取的存储介质 | |
CN107176165B (zh) | 车辆的控制装置 | |
EP3367366B1 (en) | Display control method and display control device | |
US8988525B2 (en) | System and method for providing guidance information to a driver of a vehicle | |
EP1504276B1 (en) | Object detection system for vehicle | |
JP6311646B2 (ja) | 画像処理装置、電子ミラーシステム、及び画像処理方法 | |
KR101433837B1 (ko) | 차량의 나이트-뷰 시스템 동작 방법 및 대응하는 나이트-뷰시스템 | |
KR101855940B1 (ko) | 차량용 증강현실 제공 장치 및 그 제어방법 | |
CN109204136B (zh) | 周边图像显示控制装置 | |
KR20180072139A (ko) | 차량 및 그 제어 방법 | |
CN107848465A (zh) | 具有盲区显示和警示系统的车辆视觉系统 | |
US10410514B2 (en) | Display device for vehicle and display method for vehicle | |
JP6460019B2 (ja) | 車両の制御装置 | |
JP5966513B2 (ja) | 車両の後側方撮影装置 | |
JP6355161B2 (ja) | 車両用撮像装置 | |
JP4962291B2 (ja) | 車載用画像処理装置及び車載用画像表示装置 | |
JP5115171B2 (ja) | 車載用画像処理装置及び車載用画像表示装置 | |
JP4952561B2 (ja) | 車載用画像処理装置及び車載用画像表示装置 | |
JP2009147628A (ja) | 車載用画像処理装置及び車載用画像表示装置 | |
US10864856B2 (en) | Mobile body surroundings display method and mobile body surroundings display apparatus | |
JP5831331B2 (ja) | 車両の後側方撮影装置 | |
JP6781035B2 (ja) | 撮像装置、画像処理装置、表示システム、および車両 | |
CN114693572A (zh) | 图像形成设备和图像形成方法 | |
JP2009146134A (ja) | 車載用車両画像処理装置及び車載用画像表示装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100318 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111117 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20111213 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120918 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121001 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20151026 Year of fee payment: 3 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |