JP5853947B2 - 暗視装置 - Google Patents
暗視装置 Download PDFInfo
- Publication number
- JP5853947B2 JP5853947B2 JP2012284577A JP2012284577A JP5853947B2 JP 5853947 B2 JP5853947 B2 JP 5853947B2 JP 2012284577 A JP2012284577 A JP 2012284577A JP 2012284577 A JP2012284577 A JP 2012284577A JP 5853947 B2 JP5853947 B2 JP 5853947B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- infrared
- luminance
- night vision
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B23/00—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices
- G02B23/12—Telescopes, e.g. binoculars; Periscopes; Instruments for viewing the inside of hollow bodies; Viewfinders; Optical aiming or sighting devices with means for image conversion or intensification
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
Description
ところで、暗視装置の撮像装置にて撮像される画像においては、歩行者などの検出対象物を、当該検出対象物の周辺よりも強調する(浮き立たせる)ことが求められる。
しかしながら、近年、車室内の温度上昇を抑制するために、自動車には、赤外線領域の波長の光をカットするウインドシールドが用いられている。このようなウインドシールドが用いられていると、撮像装置にて受光する検出対象物からの近赤外線の強さが低下し、撮像装置にて受光した光に基づいて生成される画像は、検出対象物が強調された画像とならないという課題が生じる。
そこで、本発明は、暗視装置において、検出対象物を強調した画像を生成することを目的とする。
本発明の暗視装置は、投光手段と、撮像手段と、輝度比判定手段と、投光制御手段とを備える。
よって、本発明の暗視装置にて撮像した画像に基づいて検出対象物を検出すれば、その検出対象物の検出性能を向上させることができる。換言すれば、本発明の暗視装置によれば、視認性を向上させつつ、検出対象物の検出性能を向上させることが可能な画像を撮像できる。
〈暗視装置〉
図1に示す暗視装置1は、自動車AMに搭載して用いられる、いわゆる車載用ナイトビジョンシステムである。以下、暗視装置1が搭載された自動車AMを自車両AMとも称す。
なお、投光装置10は、一台の投光器によって実現されていても良いし、複数台の投光器によって実現されていても良い。
スイッチセンサ群30は、自車両や暗視装置1の状態を表す各種情報を取得するスイッチやセンサ群であり、暗視スイッチ32と、照度センサ34と、ヘッドライトスイッチ36と、車速センサ38とを備えている。
本実施形態の撮像装置5では、互いに隣接する4つの受光素子にて検出した近赤外線の輝度値と可視光線の輝度値との和を一つの画素の輝度値とした複数の画素からなる画像を生成する。つまり、各画素は単色の色情報しか持たないため、各画素に対して周辺の画素から不足した色情報を集めることで色情報を補完する。
〈暗視ECU〉
暗視ECU50は、電源が切断されても記憶内容を保持する必要がある処理プログラムやデータを格納するROM52と、処理プログラムやデータを一時的に格納するRAM54と、ROM52やRAM54に記憶された処理プログラムに従って各種処理を実行するCPU56とを少なくとも有した周知のコンピュータを中心に構成されている。
〈ナイトビジョン処理〉
ナイトビジョン処理は、イグニッションスイッチがオンされるあるいは暗視スイッチがオンされる等のフラグにより起動される。
続いて、S220にて取得した画像信号に基づく画像を表示装置15に出力する(S230)。このS230により、表示装置15は、複数の画素を有した平面に規定空間PSが投影された画像を表示する。
ところで、S260での判定の結果、判定輝度比RRが規定閾値Th2以下であれば(S260:NO)、判定輝度比RRが規定輝度範囲内であるものとして、投光装置10から照射される近赤外線の強度を変更することなく、S210へと戻る。
このS270にて実行する投光制御では、判定輝度比RRが規定輝度範囲内となるまで低減させるべき近赤外線の強度の低減量を演算し、その演算した低減量が達成されるように予め規定された規定値ごとに段階的に変更する。なお、本実施形態において、段階的に変更とは、例えば、S210からS280の一連のサイクルを実行するごとに、規定値単位で低減させることである。
[実施形態の効果]
以上説明したように、本実施形態のナイトビジョン処理では、判定輝度比RRが規定輝度範囲を下回っている場合には、近赤外線の強さが増幅されるように投光装置10を制御する投光制御を実行する。一方、判定輝度比RRが規定輝度範囲を上回っている場合には、近赤外線の強さが低減されるように投光装置10を制御する投光制御を実行する。
よって、赤外線領域の波長の光をカットするウインドシールドが自車両AMに用いられている場合であっても、検出対象物からの近赤外線の輝度値と可視光線の輝度値との比率を規定輝度範囲内とすることができる。
このため、表示装置15に表示される画像において、当該画像を構成する画素の輝度値が急激に変化することを防止できる。したがって、表示装置15に表示された画像を視認した人物が違和感を覚えることを低減できる。
[その他の実施形態]
以上、本発明の実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、様々な態様にて実施することが可能である。
また、上記実施形態では、判定輝度値RRを、設定領域を構成する全ての画素における赤色輝度値の総和を、設定領域を構成する全ての画素における近赤外輝度値の総和で除することで導出していたが、判定輝度値RRの導出方法は、これに限るものではない。
Claims (7)
- 自動車に搭載される暗視装置(1)であって、
近赤外線領域の波長の光である近赤外線を発光し、自車両周辺の空間領域として予め規定された照射範囲に照射する投光手段(10)と、
近赤外線を通過する近赤外フィルタ、及び可視光領域の波長の光である可視光線を通過する可視光フィルタのいずれかを介して、前記照射範囲を含む自車両周辺の空間領域として規定された規定空間からの光を、モザイク状に配列された複数の受光素子のそれぞれが受光することで、それぞれが、前記近赤外線の輝度値、及び前記可視光線の輝度値を有した複数の画素からなる平面に前記規定空間を投影した画像を表す画像信号を取得する撮像手段(5)と、
前記撮像手段にて取得された画像信号によって表される画像の少なくとも一部に設定された領域であり、かつ、検出対象物が存在する可能性がある少なくとも一つの画素を含む領域を設定領域とし、前記設定領域を構成する画素における前記近赤外線の輝度値と前記可視光線の輝度値との比率である判定輝度比が、検出対象物が強調された像となる輝度値の比率の範囲として予め定められた規定輝度範囲内であるか否かを判定する輝度比判定を実行する輝度比判定手段(50,S220,S240〜S260)と、
前記輝度比判定手段での輝度比判定の結果、前記判定輝度比が前記規定輝度範囲を超えていれば、前記判定輝度比が前記規定輝度範囲内となるように前記投光手段が発光する近赤外線の強度を制御する投光制御を実行する投光制御手段(50,S270,S280)と
を備えることを特徴とする暗視装置。 - 前記照射範囲を自車両が進行する道路上の空間とし、
前記設定領域は、
前記撮像手段にて取得された画像信号によって表される画像において、前記道路上の空間における左右両脇の少なくとも一方である
ことを特徴とする請求項1に記載の暗視装置。 - 前記設定領域は、
前記撮像手段にて取得された画像信号によって表される画像において、前記自車両の水平方向に渡って設けられた帯状の領域である
ことを特徴とする請求項1に記載の暗視装置。 - 前記設定領域は、
前記撮像手段にて取得された画像信号によって表される画像の全領域である
ことを特徴とする請求項1に記載の暗視装置。 - 前記投光制御手段は、
前記判定輝度比が前記規定輝度範囲内となる前記近赤外線の強度を演算し、その演算した近赤外線の強度まで予め規定された規定値ごとに変更することを前記投光制御として実行する
ことを特徴とする請求項1から請求項4のいずれか一項に記載された暗視装置。 - 前記投光制御手段は、
前記投光手段が発光する近赤外線の強度を予め規定された規定値ごとに変更することを前記投光制御として実行する
ことを特徴とする請求項1から請求項4のいずれか一項に記載された暗視装置。 - 前記投光制御手段は、
前記判定輝度比が前記規定輝度範囲内となる前記近赤外線の強度を演算し、その演算した近赤外線の強度へと変更することを前記投光制御として実行する
ことを特徴とする請求項1から請求項4のいずれか一項に記載された暗視装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012284577A JP5853947B2 (ja) | 2012-12-27 | 2012-12-27 | 暗視装置 |
US14/654,693 US9497395B2 (en) | 2012-12-27 | 2013-12-12 | Night-vision device |
PCT/JP2013/007317 WO2014103223A1 (ja) | 2012-12-27 | 2013-12-12 | 暗視装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012284577A JP5853947B2 (ja) | 2012-12-27 | 2012-12-27 | 暗視装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2014127924A JP2014127924A (ja) | 2014-07-07 |
JP5853947B2 true JP5853947B2 (ja) | 2016-02-09 |
Family
ID=51020347
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012284577A Active JP5853947B2 (ja) | 2012-12-27 | 2012-12-27 | 暗視装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9497395B2 (ja) |
JP (1) | JP5853947B2 (ja) |
WO (1) | WO2014103223A1 (ja) |
Families Citing this family (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5783279B2 (ja) * | 2013-02-08 | 2015-09-24 | 株式会社デンソー | 画像処理装置 |
US10212355B2 (en) * | 2015-03-13 | 2019-02-19 | Thales Defense & Security, Inc. | Dual-mode illuminator for imaging under different lighting conditions |
JP6584103B2 (ja) * | 2015-03-18 | 2019-10-02 | キヤノン株式会社 | 撮像装置 |
KR101747603B1 (ko) * | 2016-05-11 | 2017-06-16 | 재단법인 다차원 스마트 아이티 융합시스템 연구단 | 컬러 나이트 비전 시스템 및 그 동작 방법 |
WO2018088804A1 (en) | 2016-11-08 | 2018-05-17 | Samsung Electronics Co., Ltd. | Electronic apparatus and control method thereof |
KR101938668B1 (ko) * | 2017-05-29 | 2019-01-15 | 엘지전자 주식회사 | 청소기 및 그 제어방법 |
WO2019039201A1 (ja) * | 2017-08-23 | 2019-02-28 | 日本精機株式会社 | 車両用表示装置 |
JP7252755B2 (ja) * | 2018-12-27 | 2023-04-05 | 株式会社小糸製作所 | アクティブセンサ、物体識別システム、車両、車両用灯具 |
JP6726324B1 (ja) * | 2019-01-17 | 2020-07-22 | オリンパス株式会社 | 撮像装置、画像合成方法、及び画像合成プログラム |
US20220305980A1 (en) * | 2019-09-11 | 2022-09-29 | Koito Manufacturing Co., Ltd. | Vehicle lamp system |
JPWO2021054276A1 (ja) | 2019-09-19 | 2021-03-25 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4011829B2 (ja) * | 2000-06-14 | 2007-11-21 | キヤノン株式会社 | 撮像装置及びその制御方法 |
JP4151571B2 (ja) | 2003-12-12 | 2008-09-17 | 日産自動車株式会社 | 車載用障害物検出装置 |
JP2007156832A (ja) | 2005-12-05 | 2007-06-21 | Fujitsu Ten Ltd | 車載用近赤外照射装置および車載用周辺監視装置 |
JP4779780B2 (ja) * | 2006-04-10 | 2011-09-28 | トヨタ自動車株式会社 | 画像表示装置 |
JP2008135856A (ja) * | 2006-11-27 | 2008-06-12 | Toyota Motor Corp | 物体認識装置 |
JP2010161459A (ja) * | 2009-01-06 | 2010-07-22 | Olympus Corp | 赤外線照射式撮像装置 |
JP2012027773A (ja) * | 2010-07-26 | 2012-02-09 | Toyota Central R&D Labs Inc | 擬似濃淡画像生成装置及びプログラム |
-
2012
- 2012-12-27 JP JP2012284577A patent/JP5853947B2/ja active Active
-
2013
- 2013-12-12 WO PCT/JP2013/007317 patent/WO2014103223A1/ja active Application Filing
- 2013-12-12 US US14/654,693 patent/US9497395B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20150350572A1 (en) | 2015-12-03 |
JP2014127924A (ja) | 2014-07-07 |
WO2014103223A1 (ja) | 2014-07-03 |
US9497395B2 (en) | 2016-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5853947B2 (ja) | 暗視装置 | |
JP5783279B2 (ja) | 画像処理装置 | |
JP5680573B2 (ja) | 車両の走行環境認識装置 | |
JP5742937B2 (ja) | 車両用視界支援装置 | |
JP5459154B2 (ja) | 車両用周囲画像表示装置及び方法 | |
JP5171723B2 (ja) | 障害物検知装置、および当該装置を搭載した車両 | |
WO2015190299A1 (ja) | 車両用照明装置 | |
JP4556777B2 (ja) | 夜間運転視界支援装置 | |
US11710291B2 (en) | Image recognition device and image recognition method | |
JP4927647B2 (ja) | 車両周辺監視装置 | |
JP2011087006A (ja) | 車両用表示装置 | |
JP5712821B2 (ja) | 撮影表示制御システム | |
KR101070050B1 (ko) | 복합 기능 카메라 모듈 | |
JP6168024B2 (ja) | 撮影画像表示装置、撮影画像表示方法および撮影画像表示プログラム | |
JP2013114536A (ja) | 安全支援装置、及び、安全支援方法 | |
JP6322723B2 (ja) | 撮像装置および車両 | |
JP2010128768A (ja) | 車両周辺監視装置 | |
JP7176447B2 (ja) | ライト監視装置 | |
JP6327388B2 (ja) | 撮影画像表示装置、撮影画像表示方法および撮影画像表示プログラム | |
JP2004172828A (ja) | 車両用暗視装置 | |
JP7244221B2 (ja) | 物体認識装置 | |
JP2007263704A (ja) | 視認不可能領域抽出装置、及び視覚支援装置 | |
JP6311826B2 (ja) | 撮影画像表示装置、撮影画像表示方法および撮影画像表示プログラム | |
WO2019177036A1 (ja) | 車両用映像システム | |
JP4882592B2 (ja) | 光抽出装置、光抽出方法及び距離計測システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150205 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20151110 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20151123 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5853947 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |