JP2015031564A - 付着物検出装置及び移動装置用機器制御システム - Google Patents

付着物検出装置及び移動装置用機器制御システム Download PDF

Info

Publication number
JP2015031564A
JP2015031564A JP2013160429A JP2013160429A JP2015031564A JP 2015031564 A JP2015031564 A JP 2015031564A JP 2013160429 A JP2013160429 A JP 2013160429A JP 2013160429 A JP2013160429 A JP 2013160429A JP 2015031564 A JP2015031564 A JP 2015031564A
Authority
JP
Japan
Prior art keywords
light
detection
image
windshield
image sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2013160429A
Other languages
English (en)
Inventor
平井 秀明
Hideaki Hirai
秀明 平井
伊藤 泉
Izumi Ito
泉 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2013160429A priority Critical patent/JP2015031564A/ja
Publication of JP2015031564A publication Critical patent/JP2015031564A/ja
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60SSERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
    • B60S1/00Cleaning of vehicles
    • B60S1/02Cleaning windscreens, windows or optical devices
    • B60S1/04Wipers or the like, e.g. scrapers
    • B60S1/06Wipers or the like, e.g. scrapers characterised by the drive
    • B60S1/08Wipers or the like, e.g. scrapers characterised by the drive electrically driven
    • B60S1/0818Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
    • B60S1/0822Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
    • B60S1/0833Optical rain sensor
    • B60S1/0844Optical rain sensor including a camera

Abstract

【課題】光学フィルタと画像センサとの間の高い位置精度が得やすい付着物検出装置を提供することを課題とする。【解決手段】光源部からの赤外光によって映し出されるフロントガラス上の雨滴等を、赤外光を選択的に透過させる光学フィルタ209を介して、多数のフォトダイオード206Cが二次元配列された画像センサで撮像し、その撮像画像に基づいて雨滴等を検出する検出処理を行う検出装置において、画像センサを構成し、かつ、光源部からフロントガラスを経由して入射してくる赤外光の光路上に存在する透明基層にフィルタ材料を付着させることで、前記光学フィルタ209が形成されている。【選択図】図16

Description

本発明は、車両、船舶、航空機等に用いられるガラス或いは一般建造物の窓ガラス等の光透過性部材上の付着物を検出する付着物検出装置、及び、その付着物検出装置の検出結果に基づいて移動装置の制御対象機器を制御する移動装置用機器制御システムに関する。
特許文献1には、車両のフロントガラスに付着した付着物を検出する付着物検出装置が開示されている。この付着物検出装置は、フロントガラスの内壁面側に配置される光源(光照射手段)によってフロントガラスに光を照射し、そのフロントガラス外壁面上の雨滴等の付着物を撮像装置によって撮影する。この撮像装置は、焦点がフロントガラスの位置よりも遠方に設定された撮像レンズと、撮像レンズの後段に配置される光学フィルタと、光学フィルタを透過した光を受光する2次元配置された複数の受光素子で構成された画像センサとを備えている。
前記特許文献1に開示の付着物検出装置において、光学フィルタは、画像センサとは別個に構成された透明なフィルタ基板上にフィルタ材料を付着させて形成されたものである。より具体的には、画像センサと対面する側のフィルタ基板面上に、ワイヤーグリッド構造の偏光フィルタ層を形成するとともに、その偏光フィルタ層の上に透明な充填材からなる平坦化層を介して分光フィルタ層を形成したものである。このようにして形成される光学フィルタは、撮像に用いる有効撮像領域外でスペーサにより支持した状態で有効撮像領域外の四辺領域をUV接着や熱圧着することにより、画像センサとの間に空隙をあけるようにして画像センサ上に取り付ける。また、前記特許文献1には、光学フィルタと画像センサとの間をUV接着剤で接合する方法も開示されている。
ところが、前記特許文献1に開示の付着物検出装置では、画像センサとは別個に構成される光学フィルタを、画像センサに取り付けて固定するものである。この場合、光学フィルタと画像センサとの位置精度(平行度等)は、スペーサの部品精度や接着剤量の精度などに大きく依存することになる。スペーサの部品精度や接着剤量の精度を上げるにも限界があることから、前記特許文献1に開示の付着物検出装置では、光学フィルタと画像センサとの位置精度(平行度等)を確保することが困難であるという問題があった。この取り付け精度が悪いと、得られる撮像画像の品質が劣化してしまうため、この問題を解消する方策が望まれている。
本発明は、以上の問題に鑑みなされたものであり、その目的とするところは、光学フィルタと画像センサとの間の高い位置精度が得やすい付着物検出装置及び移動装置用機器制御システムを提供することである。
前記目的を達成するために、本発明は、光透過性を有する板状部材に所定波長帯の光を照射する光照射手段と、前記光照射手段からの光によって映し出される前記板状部材上の検出対象物を、前記所定の波長帯の光を選択的に透過させる光学フィルタを介して、多数の受光素子が二次元配列された画像センサで撮像する撮像手段と、前記撮像手段が撮像した撮像画像に基づいて前記検出対象物を検出する検出処理を行う検出処理手段とを有する付着物検出装置において、前記画像センサを構成し、かつ、前記光照射手段から前記板状部材を経由して入射してくる光の光路上に存在する光透過材に、フィルタ材料を付着させることで、前記光学フィルタが形成されていることを特徴とする。
本発明によれば、画像センサを構成する光透過材それ自体にフィルタ材料を付着させることで光学フィルタが形成されるため、画像センサと光学フィルタとを別々に形成する場合よりも、光学フィルタと画像センサとの間の高い位置精度が得やすいという優れた効果が得られる。
実施形態における車載機器制御システムの概略構成を示す模式図である。 同車載機器制御システムにおける撮像ユニットを備えた付着物検出装置の概略構成を示す模式図である。 同撮像ユニットの光学系を説明するための説明図である。 光源部と撮像レンズとの間に遮光部材を設けた例を示す説明図である。 同撮像ユニットの概略構成を模式的に示した斜視図である。 (a)は、水平面に対するフロントガラスの傾斜角度が22°である車両に取り付けた状態の撮像ユニットを示す側面図である。(b)は、同図(a)の状態において雨滴が付着していない場合の撮像ユニットの光学系を示す説明図である。(c)は、同図(a)の状態において雨滴が付着している場合の撮像ユニットの光学系を示す説明図である。 (a)は、水平面に対するフロントガラスの傾斜角度が34°である車両に取り付けた状態の撮像ユニットを示す側面図である。(b)は、同図(a)の状態における撮像ユニットの光学系を示す説明図である。 同撮像ユニットの反射偏向プリズムを示す斜視図である。 同撮像ユニットの反射偏向プリズムの他の構成例を示す斜視図である。 変形例に係る反射偏向プリズムを示す斜視図である。 同反射偏向プリズムを用いた撮像ユニットの光学系を示す説明図である。 付着物検出用の撮像画像データに適用可能なカットフィルタのフィルタ特性を示すグラフである。 付着物検出用の撮像画像データに適用可能なバンドパスフィルタのフィルタ特性を示すグラフである。 車両検出用画像領域に対応したフィルタ領域と付着物検出用画像領域に対応したフィルタ領域とに区分される同撮像装置の光学フィルタの正面図である。 撮像画像データの画像例を示す説明図である。 実施形態における画像センサに設けられる1つの受光素子(一撮像画素)を拡大した断面を示す模式図である。 他の例に係る画像センサに設けられる1つの受光素子(一撮像画素)を拡大した断面を示す模式図である。 実施形態に係る画像センサ上の車両検出用画像領域及び付着物検出用画像領域と光学フィルタとの配置関係を示す説明図である。 同光学フィルタに設けられる第2の分光フィルタ層の透過率特性を示すグラフである。 他の例に係る画像センサ上の車両検出用画像領域及び付着物検出用画像領域と光学フィルタとの配置関係を示す説明図である。 車両検出用画像領域に対応する箇所に設けられるフィルタ部材の一例について、2×2の受光素子に対応した部分のみ図示した説明図である。 同フィルタ部材のR、G、B用の各分光フィルタ領域の透過率特性を示すグラフである。 車両検出用画像領域に対応する箇所に設けられるフィルタ部材の他の例について、2×2の受光素子に対応した部分のみ図示した説明図である。 車両検出用画像領域に対応する箇所に設けられるフィルタ部材の更に他の例について、2×2の受光素子に対応した部分のみ図示した説明図である。 (a)は、図10に示した変形例における反射偏向プリズムを用いて雨滴が付着している状態(曇りは付着していない状態)を撮像した撮像画像の一例を示す説明図である。(b)は、同反射偏向プリズムを用いて雨滴が付着しておりかつ曇りも付着している状態を撮像した撮像画像の一例を示す説明図である。 (a)は、雨滴を検出するための2フレームのうち、光源部を消灯させた状態の撮像画像の一例を示す説明図である。(b)は、雨滴を検出するための2フレームのうち、光源部を点灯させた状態の撮像画像の一例を示す説明図である。 実施形態におけるフロントガラス状態検出処理の流れを示すフローチャートである。 車両検出用画像領域の画像データからワイパー制御用やデフロスタ制御用のパラメータ検出を行うための処理の流れを示すフローチャートである。 フロントガラスが曇っている状態の撮像画像を示す説明図である。 フロントガラスが凍結している状態の撮像画像を示す説明図である。 付着物検出用画像領域の画像データからワイパー制御用やデフロスタ制御用のパラメータ検出を行うための処理の流れを示すフローチャートである。 フロントガラスの状態判定処理の流れを示すフローチャートである。 同状態判定処理の判定基準を示す表である。 同状態判定処理の結果に応じた指示処理の内容を示す表である。
以下、本発明に係る付着量検出装置を、移動装置である自動車等の車両に搭載される制御対象機器を制御する移動装置用機器制御システムとしての車載機器制御システムに用いる一実施形態について説明する。
本発明に係る付着量検出装置は、車載機器制御システムに限らず、例えば、撮像画像に基づいて光透過性板状部材に付着している検出対象物を検出する物体検出装置を利用するその他のシステムにも適用できる。
図1は、本実施形態における車載機器制御システムの概略構成を示す模式図である。
本車載機器制御システムは、自車両100に搭載された撮像装置で撮像した自車両進行方向前方領域(撮像領域)の撮像画像データを利用して、ヘッドランプの配光制御、ワイパーの駆動制御、デフロスタ制御、その他の車載機器(制御対象機器)の制御を行う。
本実施形態の車載機器制御システムに設けられる撮像手段としての撮像ユニット101は、走行する自車両100の進行方向前方領域を撮像領域として撮像するものであり、例えば、自車両100のフロントガラス105のルームミラー付近に設置される。撮像ユニット101で撮像された撮像画像データは、検出処理手段としての画像解析ユニット102に入力される。画像解析ユニット102は、撮像装置から送信されてくる撮像画像データを解析し、撮像画像データに自車両100の前方に存在する他車両の位置、方角、距離を算出したり、フロントガラス105に付着している雨滴や異物などの付着物を検出したり、撮像領域内に存在する路面上の白線(区画線)等の検出対象物を検出したりする。
また、本実施形態の自車両100には、外気温を検知するための外気温センサ111が設けられている。画像解析ユニット102は、必要に応じて外気温センサ111の検知結果を利用して、上述した各種検出を行う。本実施形態では、後述するように、フロントガラス105が凍結しているか否かを検出する際などに、外気温センサ111の検知結果が利用される。
画像解析ユニット102の算出結果は、ヘッドランプ制御ユニット103に送られる。ヘッドランプ制御ユニット103は、例えば、先行車両や対向車両の運転者の目に自車両100のヘッドランプの強い光が入射するのを避けて他車両の運転者の幻惑防止を行いつつ、自車両100の運転者の視界確保を実現する。その実現のために、具体的には、ヘッドランプ104のハイビームおよびロービームの切り替えを制御したり、ヘッドランプ104の部分的な遮光制御を行ったりする。
画像解析ユニット102の算出結果は、ワイパー制御ユニット106にも送られる。ワイパー制御ユニット106は、ワイパー107を制御して、自車両100のフロントガラス105に付着した雨滴や異物などの付着物を除去する。ワイパー制御ユニット106は、画像解析ユニット102が検出した付着物検出結果を受けて、ワイパー107を制御する制御信号を生成する。ワイパー制御ユニット106により生成された制御信号がワイパー107に送られると、自車両100の運転者の視界を確保するべく、ワイパー107を稼動させる。
また、画像解析ユニット102の算出結果は、車両走行制御ユニット108にも送られる。車両走行制御ユニット108は、画像解析ユニット102が検出した路端や白線の検出結果に基づいて、白線や路端によって区画されている車線領域から自車両100が外れている場合等に、自車両100の運転者へ警告を報知したり、自車両のハンドルやブレーキを制御するなどの走行支援制御を行ったりする。
また、車両走行制御ユニット108は、画像解析ユニット102が検出した道路標識の検出結果に基づいて、道路標識の情報と車両走行状態とを比較する。そして、例えば、自車両100の走行速度(車両走行状態)が制限速度(道路標識の情報)に近いと判断したら自車両100の運転者へ警告を報知したり、自車両100の走行速度が制限速度を超えていると判断したら自車両のブレーキを制御するなどの走行支援制御を行ったりする。
また、画像解析ユニット102の算出結果は、デフロスタ制御ユニット109にも送られる。デフロスタ制御ユニット109は、フロントガラス105の凍結や曇りの状態の検出結果に基づいて、デフロスタ110を制御する制御信号を生成する。デフロスタ制御ユニット109が生成した制御信号は、デフロスタ110に送られ、この制御信号に基づいてデフロスタ110はフロントガラス105を送風したり加熱したりするなどして、フロントガラス105の凍結や曇りの状態を改善させる動作を実行する。デフロスタ制御の詳しい内容は後述する。
図2は、撮像ユニット101に設けられる撮像部200を含む付着物検出装置300の概略構成を示す説明図である。
撮像部200は、主に、撮像レンズ204と、カバーガラス205と、2次元配置された画素アレイを有する画像センサ206を含んだセンサ基板207と、センサ基板207から出力されるアナログ電気信号(画像センサ206上の各受光素子が受光した受光量)をデジタル電気信号に変換した撮像画像データを生成して出力する信号処理部208とから構成されている。また、本実施形態においては、センサ基板207上に光源部210が実装されている。この光源部210は、フロントガラス105の内壁面(一方の面)側に配置され、外壁面(他方の面)に付着した付着物(以下、検出対象物が主に雨滴である場合を例に挙げて説明する。)を検出するためのものである。
本実施の形態では、撮像レンズ204の光軸が水平方向に一致するように撮像ユニット101を配置するが、これに限定されることはなく、水平方向(図2中のX方向)を基準とした特定方向に向けるような例であってもよい。撮像レンズ204は、例えば、複数のレンズで構成され、焦点がフロントガラス105の位置よりも遠方に設定されるものを用いる。撮像レンズ204の焦点位置は、例えば、無限遠又は無限遠とフロントガラス105との間に設定することができる。
画像センサ206は、センサ面を保護するカバーガラス205を透過した光を受光する2次元配置された複数の受光素子で構成され、受光素子(撮像画素)ごとに入射光を光電変換する機能を有する。後述の図等では画像センサ206の各画素を簡略化して描いているが、実際には画像センサ206は2次元配置された数十万個程度の画素で構成されている。画像センサ206としては、例えば、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)等を用いることができる。
信号処理部208は、画像センサ206で光電変換され、センサ基板207から出力されるアナログ電気信号(画像センサ206の各受光素子への入射光量)をデジタル電気信号に変換した撮像画像データを生成して出力する機能を有する。信号処理部208は、画像解析ユニット102と電気的に接続されている。信号処理部208は、センサ基板207を経由して画像センサ206から電気信号(アナログ信号)が入力されると、入力された電気信号から、画像センサ206上における各撮像画素の明るさ(輝度)を示すデジタル信号(撮像画像データ)を生成する。そして、この撮像画像データを、画像の水平・垂直同期信号とともに、後段の画像解析ユニット102へ出力する。
また、画像解析ユニット102は、撮像ユニット101の撮像動作を制御する機能や、撮像ユニット101から送信される撮像画像データを解析する機能を有する。画像解析ユニット102は、撮像ユニット101から送信された撮像画像データから、画像センサ206の撮像対象(自車両前方領域に存在する他車両等の物体や、フロントガラス105上に付着している雨滴、凍結、曇り等)ごとの最適な露光量を算出し、画像センサ206の撮像対象ごとに最適な露光量(本実施形態では露光時間)を設定する機能を有する。また、画像解析ユニット102は、露光量調整と連動しながら、光源部210の発光タイミングを調整する機能も有する。また、画像解析ユニット102は、撮像ユニット101から送信されてくる撮像画像データから、路面状態や道路標識などに関する情報を検出する機能を有する。また、画像解析ユニット102は、検出処理部102Aによって、フロントガラス105の状態(雨滴の付着、凍結、曇りなど)を検出する機能を有する。また、画像解析ユニット102は、撮像ユニット101から送信されてくる撮像画像データから、自車両の前方に存在する他車両の位置や方角、距離等を算出する機能を有する。また、画像解析ユニット102は、光量調整部102Bによって、光源部210が照射する光の量を調整する機能を有する。
図3は、本実施形態における撮像ユニット101の光学系を説明するための説明図である。
本実施形態の光源部210は、フロントガラス105上に付着した付着物(雨滴、凍結、曇り等)を検出するための照明光を照射するものである。本実施形態の光源部210は、その発光体としてのLEDを複数備えた構成となっている。このように発光体を複数具備することにより、発光体が1つである場合と比較して、フロントガラス105上の付着物を検出するための検出領域が広がり、フロントガラス105の状態変化の検出精度が向上する。
本実施形態では、LEDを画像センサ206と同じセンサ基板207上に実装されているので、これらを別々の基板上に実装する場合よりも基板枚数を減らすことができ、低コストを実現できる。また、LEDの配置方法は、図3中のY方向に沿って1列又は複数列に配置することで、後述するとおり、車両前方領域の画像が映し出される画像領域の下側に映し出されるフロントガラス画像を撮像するための照明を均一化することが可能となる。
光源部210は、光源部210が照射する光の光軸方向と撮像レンズ204の光軸方向とが予め所定の角度を有するように、センサ基板207上に配置されている。また、光源部210は、光源部210が照射する光によって照明されるフロントガラス105上において、その照明範囲が撮像レンズ204の画角範囲内(視野角の範囲内)となるように、配置されている。光源部210としては、発光ダイオード(LED)や半導体レーザ(LD)などを1又は2以上配置した構成を用いることができる。光源部210の発光波長としては、対向車の運転者や歩行者を眩惑しないように、可視光を避けることが好ましく、例えば、可視光よりも波長が長く、画像センサ206の受光感度が及ぶ波長範囲(例えば800〜1000nm程度の赤外光波長範囲)を用いる。光源部210の発光タイミングなどの駆動制御は、信号処理部208からの画像信号の取得と連動しながら、画像解析ユニット102を通じて行われる。
光源部210からの光は、フロントガラス105の外壁面上に付着した雨滴、夜露が凍結した凍結部分、湿気によるフロントガラス105の内壁面上の曇りなど、フロントガラス105の状態変化に伴って、そのフロントガラス105での反射光の状態が変化する。この反射光の状態の変化は、画像センサ206で撮像した撮像画像を解析することで把握することができる。
本実施形態では、光源部210を、画像センサ206と同じセンサ基板207上に実装しているが、画像センサ206とは別基板上に実装してもよい。
本実施形態の撮像ユニット101には、図3に示すように、光源部210からの光を反射させてフロントガラス105へ導く反射面221を備えた光学部材としての反射偏向プリズム220が設けられている。反射偏向プリズム220は、光源部210からの光を適切にフロントガラス105の内部に導くために、その一面がフロントガラス105の内壁面に密着するように配置されている。具体的には、反射偏向プリズム220に入射する光源部210からの光の入射角が所定範囲内で変化しても、光源部210から照射されて反射偏向プリズム220の反射面221で正反射した光のうち、フロントガラス105の外壁面上における雨滴(検出対象物)が付着していない非付着領域で正反射した正反射光が、画像センサ206に受光される関係が維持されるように、反射偏向プリズム220がフロントガラス105の内壁面に取り付けられる。
反射偏向プリズム220をフロントガラス105の内壁面に取り付ける際、これらの間に、透光性材料からなるジェルやシール材などの充填材を介在させて密着性を高めるのが好ましい。これにより、反射偏向プリズム220とフロントガラス105との間に空気層や気泡などが介在しないようにでき、これらの間で曇りが生じにくいようにしている。また、充填材の屈折率は、反射偏向プリズム220とフロントガラス105の中間屈折率であることが好ましい。これにより、充填材と反射偏向プリズム220との間、及び、充填材とフロントガラス105との間でのフレネル反射ロスを軽減できるからである。ここでいうフレネル反射とは、屈折率の異なる材料間で発生する反射のことである。
反射偏向プリズム220は、図3に示すように、光源部210からの入射光を反射面221で一回だけ正反射して、これをフロントガラス105の内壁面に向けて折り返す。折り返した光は、フロントガラス105の外壁面に対して入射角θ(θ≧約42°)となるように構成されている。この適切な入射角θは、空気とフロントガラス105の外壁面との間の屈折率差に起因して、フロントガラス105の内部においてその外壁面で全反射を起こす臨界角である。したがって、本実施形態では、フロントガラス105の外壁面に雨滴等の付着物が付着していない場合には、反射偏向プリズム220の反射面で折り返された光は、フロントガラス105の外壁面を透過することなく、すべて反射される。
一方、フロントガラス105の外壁面上に空気(屈折率1)とは異なる雨滴(屈折率1.38)などの付着物が付着すると、この全反射条件が崩れ、雨滴が付着している箇所では光がフロントガラス105の外壁面を透過する。したがって、フロントガラス105の外壁面に雨滴が付着していない非付着箇所については、その反射光が画像センサ206に受光されて高輝度な画像部分となる一方、雨滴が付着している付着箇所については、その反射光の光量が減り、画像センサ206に受光される光量が少なくなるので、低輝度な画像部分となる。したがって、撮像画像上においては、雨滴付着箇所と非雨滴付着箇所とのコントラストが得られる。
光源部210から照射される光の拡散成分が画像センサ206へ回り込んで入射して画像信号が劣化するのを抑制するために、図4のように、光源部210と撮像レンズ204との間に遮光部材230を設けてもよい。
図5は、本実施形態の撮像ユニット101の概略構成を模式的に示した斜視図である。
本実施形態の撮像ユニット101は、反射偏向プリズム220を固定支持し、フロントガラス105の内壁面に固定配置される第一支持部材としての第一モジュール101Aと、画像センサ206及びLED211が実装されたセンサ基板207、導光体215、撮像レンズ204を固定支持する第二支持部材としての第二モジュール101Bとから構成されている。
これらのモジュール101A,101Bは、回転連結機構240によって回動可能に連結されている。この回転連結機構240は、フロントガラス105の傾斜方向及び鉛直方向のいずれにも直交する方向(図3中紙面前後方向)に延びる回転軸241を有し、この回転軸241を中心にして、第一モジュール101Aと第二モジュール101Bとを相対回転させることができる。このように回動可能な構成としているのは、傾斜角度が異なるフロントガラス105に対して第一モジュール101Aが固定配置される場合でも、第二モジュール101Bの撮像部200の撮像方向を目標とする特定方向(本実施形態では水平方向)に向けることができるようにするためである。
このような構成を有する撮像ユニット101を自車両100に設置する際の作業手順は、以下のとおりである。
まず、第一モジュール101Aの反射偏向プリズム220の一面がフロントガラス105の内壁面に密着するように、第一モジュール101Aをフロントガラス105に固定する。この固定には、例えば、フロントガラス105に対して第一モジュール101Aを接着したり、フロントガラス105に予め固定されたフック等の機構部品に第一モジュール101Aを係合させたりする固定方法を採用できる。
次に、固定した第一モジュール101Aに対して回転連結機構240の回転軸241を中心に第二モジュール101Bを回転させる。そして、第二モジュール101Bの撮像部200の撮像方向が水平方向に一致するように第二モジュール101Bの角度調整を行い、第二モジュール101Bを自車両100に固定する。本実施形態では、第二モジュール101Bの外壁に固定配置された固定ピン242の可動範囲を第一モジュール101Aに形成されたガイド孔243によって規制することで、回転連結機構240の回転調整範囲、すなわち、第一モジュール101Aに対する第二モジュール101Bの角度調整範囲を制限している。回転連結機構240の回転調整範囲は、想定されるフロントガラス105の傾斜角度範囲に応じて適宜設定される。本実施形態では、フロントガラス105の傾斜角度範囲を約20°以上35°以下の範囲内に想定しているが、この範囲は本撮像ユニット101が搭載される車両の種類に応じて適宜変更される。
図6(a)は、水平面に対するフロントガラス105の傾斜角度θgが22°である車両に取り付けた状態の撮像ユニット101を示す側面図である。図6(b)は、図6(a)の状態において雨滴が付着していない場合の撮像ユニット101の光学系を示す説明図である。図6(c)は、図6(a)の状態において雨滴が付着している場合の撮像ユニット101の光学系を示す説明図である。
図7(a)は、水平面に対するフロントガラス105の傾斜角度θgが34°である車両に取り付けた状態の撮像ユニット101を示す側面図である。図7(b)は、図7(a)の状態における撮像ユニット101の光学系を示す説明図である。
光源部210からの光L1は、反射偏向プリズム220の反射面221で正反射され、その反射光L2はフロントガラス105の内壁面を透過する。フロントガラス105の外壁面に雨滴が付着していない場合は、その反射光L2は外壁面では全反射し、この反射光L3はフロントガラス105の内壁面を透過して撮像レンズ204に向けて光は進む。一方、フロントガラス105の外壁面に雨滴203が付着している場合、反射偏向プリズム220の反射面221で正反射した反射光L2は、その外壁面を透過する。このような系において、フロントガラス105の角度θgが変わると、第二モジュール101Bの姿勢を維持したまま(撮像方向を水平方向に固定したまま)、フロントガラス105の内壁面に固定される第二モジュール101Bの姿勢が変化し、反射偏向プリズム220がフロントガラス105と一体になって図中Y軸回りに回転することになる。
ここで、本実施形態における反射偏向プリズム220の反射面221とフロントガラス105の外壁面との配置関係は、回転連結機構240の回転調整範囲内において、常に、フロントガラス105の外壁面での全反射光L3が、フロントガラス状態変化検出用の画像センサ206の受光領域(以下「付着物検出用受光領域」という。)に受光される関係となっている。したがって、フロントガラス105の角度θgが変わっても、フロントガラス105の外壁面での全反射光L3が画像センサ206の付着物検出用受光領域に受光され、適切な雨滴検出を実現できる。
特に、本実施形態における配置関係は、回転連結機構240の回転調整範囲内において実質的にコーナーキューブの原理が成立するような関係となっている。そのため、フロントガラス105の角度θgが変わっても、フロントガラス105の外壁面での全反射光L3の光軸方向と水平面とのなす角度θは実質的に一定である。よって、画像センサ206の付着物検出用受光領域内におけるフロントガラス105の外壁面での全反射光L3の光軸が通過する箇所の変動を小さく抑えることができ、より適切な雨滴検出を実現できる。
反射偏向プリズム220の反射面221とフロントガラス105の外壁面との配置関係が互いに垂直な関係であればコーナーキューブの原理が成立するが、回転連結機構240の回転調整範囲内において実質的にコーナーキューブの原理が成立するのであれば、反射偏向プリズム220の反射面221とフロントガラス105の外壁面との配置関係は互いに垂直な関係である場合に限られない。反射偏向プリズム220の反射面221とフロントガラス105の外壁面との配置関係が互いに垂直な関係でなくても、反射偏向プリズム220の他の面(被入射面や出射面)の角度を調整することにより、フロントガラス105の傾斜角度θgが変わっても、撮像レンズへ向かう全反射光L3の光軸の角度θを略一定に保持することが可能である。
例えば、反射偏向プリズム220の反射面221とフロントガラス105の外壁面とのなす角を90°よりも大きくする場合、これに合わせて反射偏向プリズム220の出射面224と密着面222とのなす角も大きくすることにより、前記略一定にすることが可能となる。このとき、反射偏向プリズム220の反射面221とフロントガラス105の外壁面とのなす角を90°よりも大きくした角度分に対し、反射偏向プリズム220の出射面224と密着面222とのなす角をその2倍程度の角度だけ増分させるのが好ましい。また、この場合、反射偏向プリズム220の出射面224と被入射面223とが平行でなくなるが、必要な撮像レンズ204への射出角に合わせて適宜導光体の射出角を設計することにより、利用することができる。
また、上述したようにコーナーキューブの原理が成立する関係であれば、フロントガラス105の外壁面での全反射光L3の光軸方向と水平面とのなす角度θを実質的に一定とすることができるが、反射偏向プリズム220から射出する全反射光L3の射出位置が一定となるとは限らない。この射出位置が変わることで、全反射光L3の光軸が画像センサ206の付着物検出用受光領域を通過する箇所が変動し、安定した雨滴検出を阻害するおそれがある。
そのため、本実施形態においては、回転連結機構240の回転調整範囲内において、フロントガラス105の外壁面で正反射した正反射光L3を受光する画像センサ206の受光位置が予め決められた規定受光範囲内に維持されるように、回転連結機構240の回転中心の位置が工夫されている。具体的には、回転連結機構240の回転調整範囲内において、反射偏向プリズム220から射出する全反射光L3の射出位置が撮像部200の画角範囲内(視野角の範囲内)のほぼ定位置に維持されるように、回転連結機構240の回転軸241の位置が設定されている。回転連結機構240の回転軸241の具体的な位置としては、例えば、反射偏向プリズム220の反射面221を光L1の光軸が通る位置と、その正反射光L2の光軸がフロントガラス105の外壁面を通る位置との間に、回転軸241が位置するように配置するとよい。
このように、本実施形態によれば、フロントガラス105の傾斜角度に関わらず、フロントガラス105へ第一モジュール101Aを固定する作業工程と、撮像方向が水平方向に一致するように第二モジュール101Bを角度調整して固定する第二モジュール101Bの水平出しの作業工程という2つの作業工程により、撮像ユニット101の設置作業が完了する。
図8は、本実施形態の反射偏向プリズム220を示す斜視図である。
反射偏向プリズム220は、光源部210からの光が入射する被入射面223と、被入射面223から入射した光L1を反射させる反射面221と、フロントガラス105の内壁面と密着する密着面222と、フロントガラス105の外壁面で反射した反射光L3を撮像部200に向けて出射する出射面224とを備えている。本実施形態では、被入射面223と出射面224とは互いに平行な面となるように構成されているが、両者を非平行な面としてもよい。
反射偏向プリズム220の材料は、少なくとも光源部210からの光を透過させる材料であればよく、ガラスやプラスチックなどを用いることができる。本実施形態の光源部210からの光は赤外光であるため、反射偏向プリズム220の材料としては、可視光を吸収するような黒色系の材料を用いてもよい。可視光を吸収する材料を用いることにより、反射偏向プリズム220にLEDからの光(赤外光)以外の光(車外からの可視光など)が入射するのを抑制できる。
また、反射偏向プリズム220は、回転連結機構240の回転調整範囲内において、その反射面221で光源部210からの光を全反射させる全反射条件が満たされるように形成される。また、回転連結機構240の回転調整範囲内において反射面221で全反射させる条件を満たすことが難しい場合には、反射偏向プリズム220の反射面221に、アルミニウムなどの膜を蒸着させるなどして、反射ミラーを形成してもよい。
また、本実施形態では、反射面221が平面であるが、図9に示すように、反射面を凹面としたものでもよい。このような凹面状の反射面225を用いることで、反射面225に入射してくる拡散光束を平行化することができる。このことにより、フロントガラス105上での照度低下を抑制することが可能となる。
〔変形例〕
ここで、反射偏向プリズム220の一変形例について説明する。
図10は、変形例における反射偏向プリズム220を示す斜視図である。
図11は、変形例における反射偏向プリズム220を用いた撮像ユニット101の光学系を示す説明図である。
本変形例に係る反射偏向プリズム220は、導光体215から射出される光を、フロントガラス105の外壁面に付着している雨滴検出のみに使用するのではなく、例えば、フロントガラス105の内壁面に付着した曇り等の検出など、他の用途にも利用可能しようとするものである。
本変形例に係る反射偏向プリズム220は、導光体215から射出される光のうち、Y軸方向中央部分の光については、上述した実施形態と同様、被入射面223に入射し、反射面221で正反射してフロントガラス105の外壁面の雨滴非付着部分において全反射して画像センサ206に受光される。一方、Y軸方向両端部分の光については、被入射面223には入射せず、反射偏向プリズム220の反射ミラー面226で全反射する。この全反射光L4は、フロントガラス105の内壁面に向かう。フロントガラス105の内壁面に曇り等が付着していない場合、全反射光L4は、フロントガラス105の内壁面で反射するが、その正反射光L5は、回転連結機構240の回転調整範囲内において、常に、画像センサ206で受光されないように、構成されている。
フロントガラス105の内壁面に曇りが付着している場合、その曇り部分において全反射光L4が拡散反射し、その拡散反射光が画像センサ206に受光される。したがって、画像センサ206上の反射ミラー面226に対応する部分において一定以上の光量を受光した場合、曇りによる拡散反射光を受光したとして、フロントガラス105の内壁面の曇りを検出できる。
本変形例において、雨滴を検出するための反射面221等を有するプリズム部と、曇りを検出するための反射ミラー面226を有するミラー部とを一体部品で構成したが、別部品としてもよい。また、本変形例は、図10に示したように、プリズム部の両側にミラー部を配置した例であるが、これに限定されることはなく、プリズム部の一側のみにミラー部を配置したり、プリズム部の上部又は下部にミラー部を配置したりしてもよい。
次に、本実施形態における光学フィルタについて説明する。
フロントガラス105の外壁面上の雨滴を検出する際、光源部210からの赤外光を撮像部200で撮像するが、撮像部200の画像センサ206には、光源部210からの赤外光のほか、例えば太陽光などの赤外光を含む大光量の外乱光も入射し得る。よって、光源部210からの赤外光をこのような大光量の外乱光と区別するためには、光源部210の発光量を外乱光よりも十分に大きくする必要があるが、このような大発光量の光源部210を用いることは困難である場合が多い。
そこで、本実施形態においては、例えば、図12に示すように光源部210の発光波長よりも短い波長の光をカットするようなカットフィルタか、もしくは、図13に示すように透過率のピークが光源部210の発光波長とほぼ一致したバンドパスフィルタを介して、光源部210からの光を画像センサ206で受光するように構成する。これにより、光源部210の発光波長以外の光を除去して受光できるので、画像センサ206で受光される光源部210からの光量は、外乱光に対して相対的に大きくなる。その結果、大発光量の光源部210でなくても、光源部210からの光を外乱交と区別することが可能となる。
ただし、本実施形態においては、撮像画像データから、フロントガラス105上の雨滴を検出するだけでなく、先行車両や対向車両の検出や白線などの検出も行う。そのため、撮像画像全体について光源部210が照射する赤外光以外の波長帯を除去してしまうと、先行車両や対向車両の検出や白線の検出に必要な波長帯の光を画像センサ206で受光できず、これらの検出に支障をきたす。そこで、本実施形態では、撮像画像データの画像領域を、フロントガラス105上の雨滴等の付着物を検出するための付着物検出用画像領域と、先行車両や対向車両の検出や白線の検出を行うための車両検出用画像領域とに区分し、付着物検出用画像領域に対応する部分についてのみ光源部210が照射する赤外光以外の波長帯を除去するフィルタを配置している。
図14は、車両検出用画像領域に対応したフィルタ領域と付着物検出用画像領域に対応したフィルタ領域とに区分されるフィルタ配置図である。
図15は、撮像画像データの画像例を示す説明図である。
図15に示すように、車両検出用画像領域231は撮像画像上部2/3に対応し、付着物検出用画像領域232は撮像画像下部1/3に対応する。対向車両のヘッドランプ及び先行車両のテールランプ、白線、道路標識など、撮像領域(車両前方領域)の画像は、主に撮像画像上部に存在することが多く、撮像画像下部には自車両前方の直近路面や自車両100のボンネットの画像が存在するのが通常である。よって、対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の識別に必要な情報は撮像画像上部に集中しており、その識別において撮像画像下部の情報はあまり重要でない。よって、単一の撮像画像データから、対向車両や先行車両、白線、道路標識等の検出と雨滴203などの付着物の検出とを両立して行う場合には、図15に示すように、撮像画像下部を付着物検出用画像領域232とし、残りの撮像画像上部を車両検出用画像領域231とし、これに対応して光学フィルタを形成するのが好適である。
また、撮像領域内の下部に自車両のボンネットが入り込んでくる場合がある。この場合、自車両のボンネットで反射した太陽光や先行車両のテールランプなどが外乱光となり、これが撮像画像データに含まれることで対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の誤識別の原因となる。このような場合でも、本実施形態では、撮像画像下部に対応する箇所に図12に示したカットフィルタや図13に示したバンドパスフィルタが配置されているので、ボンネットで反射した太陽光や先行車両のテールランプなどの外乱光が除去される。よって、対向車両のヘッドランプ及び先行車両のテールランプ並びに白線の識別精度が向上する。
図16は、本実施形態における画像センサ206に設けられる1つの受光素子(一撮像画素)を拡大した断面を示す模式図である。
図示の画像センサ206は、一般的なCMOSセンサを例に挙げたものであり、その受光素子部分の断面は、入射側(図中上側)から順に、オンチップレンズ206A、光学フィルタ209、配線206B、フォトダイオード206Cが層状に配列されている。本実施形態における光学フィルタ209、すなわち、画像センサ206に入射する光の波長帯域を制限する機能を有する光学フィルタ209は、図16に示すように、オンチップレンズ206Aの下側の光透過性を有する光透過層である透明基層上に、フィルタ材料を蒸着等によって多層膜状に付着させて形成されている。このような光学フィルタ209は、いわゆるカラー用の画像センサにおけるカラーフィルタを形成する既存の製法を用いて作成することができる。
図17は、本実施形態における他の例に係る画像センサ206に設けられる1つの受光素子(一撮像画素)を拡大した断面を示す模式図である。
図17に示す例における光学フィルタ209は、オンチップレンズ206Aの上側に光透過性を有する光透過層である平坦化層206Dを設け、その平坦化層206Dの上にフィルタ材料を蒸着等によって多層膜状に付着させて形成されている。このような光学フィルタ209は、いわゆるカラー用の画像センサにおけるカラーフィルタを形成する既存の製法を用いて作成することができる。
図18は、本実施形態に係る画像センサ206上の車両検出用画像領域231及び付着物検出用画像領域232と光学フィルタとの配置関係を示す説明図である。
可視光領域の入射光は、車両検出用画像領域231において車両や白線の検出などに用いられ、赤外光領域の入射光は、付着物検出用画像領域232においてフロントガラスの雨滴等の付着物を検出する場合などに用いられる。本実施形態における光学フィルタ209は、上述したとおり、光源部210の発光波長以外の光を除去して受光して、雨滴等の付着物の検出精度を上げるために用いられるものである。したがって、光学フィルタ209は、付着物検出用画像領域232に対応する箇所にだけ設けられ、車両検出用画像領域231に対応する箇所には設けない。なお、車両検出用画像領域231に対応する箇所には必要に応じて、分光フィルタや偏光フィルタ等を設けてもよい。
上述したように、フロントガラス105上の液滴や凍結部分などで反射した赤外波長の光をそのまま検出しようとすると、赤外波長の光を照射する光源部210は、例えば太陽光など膨大な光量を持つ外乱光よりも照射する光を明るくしなければならないという問題がある。そこで、本実施形態では、光源部210の発光波長よりも短い波長の光をカットするようなフィルタか、もしくは透過率のピークを光源部210の発光波長とほぼ一致させたバンドパスフィルタからなる光学フィルタ209を、付着物検出用画像領域232に対応する箇所、具体的には、付着物検出用画像領域232に対応する画像センサ206の部分に設けている。本実施形態の光学フィルタ209は、図19に示すように、透過率のピークを光源部210の発光波長とほぼ一致させたバンドパスフィルタを採用する。これにより、光源部210の発光波長以外の外乱光を除去し、検出される光源部210の光量を相対的に大きくできる。
光学フィルタ209は、多層膜構造によって作製できる。多層膜構造とは、高屈折率と低屈折率の薄膜を交互に多層重ねた波長フィルタのことを指す。光の干渉を利用することで分光透過率を自由に設定でき、薄膜を多数層重ねることで、特定波長に対して100%近い反射率を得ることもできる。
本実施形態において、光学フィルタ209は、多層膜構造を採用しているので、任意の分光輝度特性を得ることができる。一般にカラーセンサなどに用いられるカラーフィルタはレジスト剤によって形成されているが、このようなレジスト剤では多層膜に比べ分光輝度特性のコントロールが困難である。本実施形態では、多層膜構造を用いることで、光学フィルタ209の透過波長帯域を光源部210の波長帯域に略一致させることを可能としている。
本実施形態においては、図18に示すように、付着物検出用画像領域232に対応する受光素子のすべてに光学フィルタ209を設けた例であるが、図20に示すように、付着物検出用画像領域232に対応する受光素子の一部、具体的には、光源部210からの光の光路領域と略一致する領域のみに、光学フィルタ209を設けてもよい。なお、光源部210からの光の光路領域と完全に一致する領域のみに光学フィルタ209を設けると、光学フィルタ209と光源部210との配置関係が厳格化しすぎてしまうので、多少のマージンを設けるのが好ましい。例えば、画像センサ206上における光源部210からの光スポットの輪郭よりも外側に所定のマージン分を負荷した領域(図20)のみに光学フィルタ209を設けるのが好ましい。
このような構成とすることで、付着物検出用画像領域232に対応する受光素子のうち、光学フィルタ209を設けていない受光素子については、車両検出用画像領域231と同様に、車両や白線の検出などに用いられることが可能となる。
車両検出用画像領域231でカラー画像を撮像する場合、2×2の受光素子ごとに、図21に示すようなフィルタ領域をもつフィルタ部材を、車両検出用画像領域231に対応する箇所に設けてもよい。このフィルタ部材は、上述した光学フィルタ209と同様の方法で作成してもよいし、従来のように画像センサ206とは別個に構成したものでもよい。
図21に示す例は、R、G、Bの各分光フィルタがベイヤ配列で配置されたフィルタ部材の例である。図21に示す例では、2×2の受光素子に対応する4つのフィルタ領域に対し、その対角に位置する2つのフィルタ領域にR用分光フィルタ領域とB用分光フィルタ領域とを配置し、残りの対角に位置する2つのフィルタ領域にG用分光フィルタ領域を配置したものである。ここで、これらのR、G、B用の各分光フィルタ領域は、図22に示すような透過率特性を有し、それぞれ、可視域の赤色(Red)、緑色(Green)、青色(Blue)の波長帯域の光を透過する。これにより、前方車両のテールランプの検出や標識検知など色情報に基づく情報が採取可能となる。
なお、車両検出用画像領域231に対応する箇所に設けるフィルタ部材としては、図21に示すものに限定されるものでなく、例えば、図23に示すように、図21に示したG用分光フィルタ領域の1つを非フィルタ領域(可視光帯域全体を透過させるフィルタ領域)としたものであってもよい。このような非フィルタ領域(図23中符号Cで示す領域)を設けることで、そこを分光フィルタ領域とした場合よりも光透過率が上がるため、例えば、光量が不足する夜間時の車両前方の画像が採取しやすくなる。
また、例えば、図24に示すように、図21に示したG用分光フィルタ領域の1つを、赤外光を選択的に透過させる赤外光用フィルタ領域としたものであってもよい。このような赤外光用フィルタ領域(図24中符号IRで示す領域)を設けることで、例えば投光する車両のヘッドライトに赤外光の光を加えることが可能となり、夜間時の障害物検知がしやすくなる。
図25(a)は、図10に示した変形例における反射偏向プリズム220を用いて雨滴が付着している状態(曇りは付着していない状態)を撮像した撮像画像の一例を示す説明図である。
図25(b)は、変形例における反射偏向プリズム220を用いて雨滴が付着しておりかつ曇りも付着している状態を撮像した撮像画像の一例を示す説明図である。
変形例における反射偏向プリズム220を用いる場合、付着物検出用画像領域232の左右方向中央部は、光源部210からの光L1のうち雨滴203が付着していないフロントガラス105の外壁面で正反射した光L3が受光されるので、その部分は高輝度なものとなる。また、付着物検出用画像領域232の左右方向中央部において、光源部210からの光L1のうち雨滴203が付着しているフロントガラス105の外壁面からの正反射光は受光されないので、その部分は低輝度なものとなる。
一方、付着物検出用画像領域232の左右方向両端部分は、光源部210からの正反射光L5を受光することがないので、図25(a)に示すように、常に低輝度な状態である。しかしながら、フロントガラス105の内壁面に曇りが生じると、これは微小な水滴が付着している状態と見なすことができ、その曇り箇所203’で拡散反射が発生する。この拡散反射光が受光される結果、図25(b)に示すように、曇りが発生していない箇所よりも、僅かながら輝度が高まる。
フロントガラス105の内壁面に曇りが付着していると、車両検出用画像領域231に映し出されるボンネット100aの輪郭箇所(エッジ)がぼやけて映し出される。これを利用して曇りの有無を検出することも可能である。
ここで、本実施形態のように光学フィルタ209を設ける場合でも、光学フィルタ209のバンドパス領域を透過する外乱光(光源部210の発行波長と同じ外部からの光)も存在するため、外乱光の影響を完全に除去することはできない。例えば、昼間は、太陽光の赤外波長成分が外乱光として影響するし、夜間は、対向車のヘッドライトに含まれる赤外波長成分が外乱光として影響する。このような外乱光があると、雨滴203を検出する際に誤検知を引き起こしてしまうおそれがある。例えば、雨滴203を検出するアルゴリズムとして、付着物検出用画像領域232において一定以上の輝度値変化が生じた箇所に雨滴が付着したと判断するアルゴリズムを採用する場合、外乱光の影響で輝度値がオフセットされて、雨滴の誤検出が発生し得る。
このような誤検出を防ぐ方法としては、例えば、光源部210の点灯を画像センサ206の露光タイミングと同期させる制御を行う方法が挙げられる。具体的には、光源部210の点灯時における撮像画像と光源部210の消灯時における撮像画像とを撮像し、付着物検出用画像領域232について、これらの差分画像を生成して、その差分画像に基づいて雨滴検出を行う。したがって、この方法では、雨滴を検出するために最低でも2フレーム分の撮像画像を使用することになる。
雨滴を検出するための2フレームのうちの一方のフレームは、図26(a)に示すように、光源部210を消灯させた状態で撮像されるものであり、他方のフレームは、図26(b)に示すように、光源部210を点灯させた状態で撮像されるものである。光源部210を消灯させた状態で撮像された付着物検出用画像領域232は、外乱光のみを映し出したものである。一方、光源部210を点灯させた状態で撮像された付着物検出用画像領域232は、外乱光と光源部210からの光を映し出したものである。したがって、これらのフレーム間の輝度差分を計算することで得られる輝度値(差分画像の画素値)は、外乱光が除外されたものとなる。よって、この差分画像に基づいて雨滴検出を行うことで、外乱光による誤検出を抑制できる。雨滴を検出するために光源部を点灯させるタイミング以外では、光源部210を消灯させておくと、消費電力の抑制につながるので好適である。
外乱光のうち、太陽光などは多少時間が経過しても大きな変化がないが、自車両100の走行中の対向車のヘッドライトなどは、わずかの時間経過で大きな変化が生じる場合がある。この場合、差分画像を得るための2つのフレームの時間的な間隔が開いていると、その間に外乱光の大きさが変わってしまい、差分画像を生成した際に、うまく外乱光をキャンセルできない可能性がある。このようなことを防ぐために、差分画像を得るための2つのフレームは連続するフレームであることが好ましい。
本実施形態においては、車両検出用画像領域231の画像情報を用いるために撮像される通常フレームでは、車両検出用画像領域231の輝度値に基づいた自動露光制御を行い、光源部210は消灯させておく。通常フレームを撮像している任意の合間に雨滴検知用の2つのフレームを連続して挿入する。この2つのフレームの撮像時において、露光制御は通常フレームの撮像時の自動露光制御ではなく、雨滴検知に適した露光制御を行う。
また、車両検出用画像領域231の画像情報を元に車両制御や配光制御等を行う場合には、撮像画像中央部の輝度値に合わせた自動露光制御(AEC)を行うのが通常であるが、雨滴を検出するための2フレームについては、雨滴検知に最適な露光制御を行うのが好ましい。なぜなら、雨滴を検出するための2フレームの撮像時にも自動露光制御を行うと、光源部210の点灯時のフレームと光源部210の消灯時のフレームとで、その露光時間が変わってしまう場合があるためである。2つのフレーム間で露光時間が変わると、それぞれのフレームに含まれる外乱光の輝度値分が変わってしまい、差分画像によって外乱光を適切にキャンセルできないおそれがあるからである。よって、雨滴を検出するための2フレームについては、例えば、露光時間が同じなるように露光制御を行うのがよい。
また、2フレームの露光時間を同じにせず、その露光時間の違いを画像処理によって補正した差分画像を生成する方法でもよい。具体的には、光源部210を点灯させたフレームの露光時間をTaとし、消灯させたフレームの露光時間をTbとしたとき、下記の式(1)〜(3)に示すように、点灯させたフレームの輝度値Yaと消灯させたフレームの輝度値Tbをそれぞれの露光時間で割った値の差分値Yrを計算する。このような補正した差分画像を使用することにより、2フレーム間で露光時間の違いがあっても、その影響を受けずに外乱光の影響を適切に取り除くことができる。
Ya = Ya/Ta ・・・(1)
Yb = Yb/Tb ・・・(2)
Yr = Ya − Yb ・・・(3)
また、2フレームの露光時間を同じにせず、その露光時間の違いに応じて光源部210の光照射強度を制御する方法でもよい。この方法では、露光時間が長いフレームについて光源部210の光照射強度を落とすようにすることで、露光時間の違いによる影響を受けずに、露光時間に違いがある2フレーム間の差分画像により外乱光の影響を適切に取り除くことができる。しかも、上述の画像処理による補正では処理負荷が大きいというデメリットがあるが、この方法によれば、画像処理による補正が不要となり、このようなデメリットはない。
また、一般に、光源部210の発光体として用いられているLED211は、温度変化によってその発光出力が変化するものであり、温度が上昇すると光源部210の発光出力が低下する。また、LED211は経年劣化によっても光量が低下していく。このように光源部210の出力変化があると、雨滴が付着していないのに輝度値変化があると認識されてしまい、雨滴の誤検出が生じ得る。このようなLED211の発光出力変化による影響を抑制するため、本実施形態では、LED211の発光出力変化が生じたか否かを適宜判断し、LED211の発光出力変化が生じたと判断したら、光源部210の発光出力を増加させる制御を行う。
次に、本実施形態におけるフロントガラス状態検出処理について説明する。
図27は、画像解析ユニット102中の検出処理部102Aが実行するフロントガラス状態検出処理の流れを示すフローチャートである。
光学フィルタ209を備える付着物検出用画像領域232は、光学フィルタ209を備えていない車両検出用画像領域231と比較して受光量が少ない。そのため、付着物検出用画像領域232の光量と車両検出用画像領域231の光量との間には大きな差がある。そのため、車両検出用画像領域231に適した撮像条件(露光量等)と、付着物検出用画像領域232に適した撮像条件との間には、大きな差がある。そこで、本実施形態では、車両検出用画像領域231の撮像用(車両等の検出用)と、付着物検出用画像領域232の撮像用(付着物検出用)とで、異なる露光量を用いる。
露光量の調整は、例えば、車両等の検出用については、車両検出用画像領域231に対応する画像センサ206の出力に基づいて自動露光調整を行い(S1)、付着物検出用については所定の固定露光量に調整する(S5)。露光量を変える場合、例えば露光時間を変えればよい。露光時間の変更は、例えば、画像センサ206が受光量を電気信号に変換する時間を画像解析ユニット102で制御することにより行うことができる。
車両検出用画像領域231は、車両周辺を撮像するが、車両周辺の照度は昼間の数万ルクスから夜間の1ルクス以下まで変化するため、その撮像シーンに応じて受光量が大きく変化する。よって、撮像シーンに応じて露光時間を適宜調整する必要がある。そのため、車両検出用画像領域231には、公知の自動露光制御で露光量の調整を行うのが好ましい。一方、付着物検出用画像領域232は、一定強度の光を照射する光源部210からの光を、透過率が既知である光学フィルタ209を通じて受光することで撮像されるものであり、受光量の変化が少ない。よって、付着物検出用画像領域232には、露光量の自動調整は行わず、固定露光時間で撮像することが可能である。固定露光時間を用いることで、露光量の制御時間の短縮化、露光量制御の簡素化が図れる。
本実施形態では、まず、車両検出用画像領域231についての露光調整を行った後(S1)、画像解析ユニット102にて車両検出用画像領域231の画像データが取得される(S2)。本実施形態において、車両検出用画像領域231の画像データは、後述するように、車両、白線、道路標識の検出などに用いられるだけでなく、ワイパー制御用やデフロスタ制御用なども用いられる。そのため、車両検出用画像領域231の画像データを取得した画像解析ユニット102は、ワイパー制御用やデフロスタ制御用のパラメータ検出を行い(S3)、これを所定の記憶領域に記録する(S4)。
図28は、車両検出用画像領域231の画像データからワイパー制御用やデフロスタ制御用のパラメータ検出を行うための処理の流れを示すフローチャートである。
本実施形態では、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、車両検出用画像領域231における輝度分散の値を用いる(S31)。また、本実施形態では、このパラメータとして、自車両100のボンネットと背景とのエッジ部分が検出できるように撮像領域を設定しておき、そのボンネットのエッジ抽出結果も用いる(S32)。
図29に示すようにフロントガラス105が曇ったり、図30に示すようにフロントガラス105が凍結したりすると、車両検出用画像領域231の画像は、輝度分散値が小さくなる。よって、車両検出用画像領域231における輝度分散値は、フロントガラス105が曇っているか又は凍結しているかの有無を検出するために有用である。また、フロントガラス105が曇ったり凍結したりすると、ボンネットのエッジ部分の抽出が困難となる。よって、ボンネットのエッジ部分を抽出できるか否かの情報も、フロントガラス105が曇っているか又は凍結しているかの有無を検出するために有用である。
続いて、今度は、付着物検出用画像領域232について、光源部210のパワーと光学フィルタ209の分光特性を踏まえた露光調整(露光時間の調整)が行われる(S5)。その後、画像解析ユニット102にて付着物検出用画像領域232の画像データが取得される(S6)。そして、画像解析ユニット102は、付着物検出用画像領域232の画像データから、ワイパー制御用やデフロスタ制御用のパラメータ検出を行い(S7)、これを所定の記憶領域に記録する(S8)。
図31は、付着物検出用画像領域232の画像データからワイパー制御用やデフロスタ制御用のパラメータ検出を行うための処理の流れを示すフローチャートである。
本実施形態では、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、付着物検出用画像領域232における輝度平均値を算出する(S71)。本実施形態では、フロントガラス105に、雨滴、曇り部分、凍結部分などが付着していると、付着物検出用画像領域232の輝度平均値が低下する。したがって、付着物検出用画像領域232の輝度平均値により、このような付着物が付着しているか否かを検出することができる。
また、本実施形態では、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、付着物検出用画像領域232における輝度分散値を算出する(S72)。小雨(雨滴のサイズが小さい面)の場合、付着物検出用画像領域232に写し出される雨滴の総面積が小さいため、フロントガラス105に付着物が付着していない状態と比較して輝度分散値はあまり変化しない。しかしながら、サイズの比較的大きな雨滴のフロントガラス105への付着数が増加すると、輝度分散値は小さくなる。これは、雨滴のボケ像が重なるためである。同様に、フロントガラス105が曇った場合や凍結した場合も、輝度分散値は小さくなる。したがって、付着物検出用画像領域232の輝度分散値により、フロントガラスに付着している付着物が小雨程度のものかどうかを検出することができる。
また、本実施形態では、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、付着物検出用画像領域232における付着物領域の占有率を算出する(S73)。ここでいう付着物領域とは、付着物検出用画像領域232において輝度平均値が規定値を超えている画素の数(画像の面積)の、付着物検出用画像領域232の全画素数(総面積)に対する比率である。曇り部分や凍結部分などは、この付着物領域の占有率が一般に大きいので、付着物検出用画像領域232の付着物領域の占有率により、フロントガラスに付着している付着物が小雨程度のものではなく、曇りや凍結なのかどうかを検出することができる。
また、本実施形態では、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、上述した輝度平均値、輝度分散値、付着物領域の占有率についての時間変化を検出する(S74〜S76)。この時間変化は、今回撮像した付着物検出用画像領域232の画像データに基づくものと、前回撮像した付着物検出用画像領域232の画像データに基づくものとの変化量を意味する。凍結や曇りなどは短時間で急激に増えるものではないが、フロントガラス105に付着するスプラッシュ(他車両等が跳ね上げた水しぶき等)は、短時間で急激に増えるものである。よって、付着物検出用画像領域232の輝度平均値、輝度分散値、付着物領域の占有率についての時間変化により、フロントガラスに付着している付着物がスプラッシュによるものかどうかを検出することができる。
以上のようにしてワイパー制御用やデフロスタ制御用に検出されるパラメータを記録したら、次に、フロントガラス105の状態判定処理を行う(S9)。
図32は、フロントガラス105の状態判定処理の流れを示すフローチャートである。
図33は、この状態判定処理の判定基準を示す表である。
フロントガラス105の状態判定処理では、まず、前記ステップS1において行われた車両検出用画像領域231についての自動露光調整により決定された露光時間が閾値A(例えば40ms)よりも短いか否かを判断する(S91)。この露光時間が閾値A以上のような非常に長い時間に設定される場合、これは撮像領域の光量が少ない夜間であると判定できる。よって、露光時間が閾値Aよりも短いか否かによって、撮像領域が昼間であるか夜間であるかを識別できる。
撮像領域が夜間である場合、車両検出用画像領域231の画像データから得られるパラメータ(輝度分散値、ボンネットのエッジ抽出結果)によるフロントガラス状態の判定精度は低いものとなる。よって、本実施形態では、夜間と判定された場合には、車両検出用画像領域231から得られるパラメータ(輝度分散値、ボンネットのエッジ抽出結果)を使用せず、付着物検出用画像領域232から得られるパラメータだけを使用して、フロントガラス105の状態判定を行う。
前記ステップS91において撮像領域が昼間である判定された場合、次に、車両検出用画像領域231の輝度分散値が閾値Bよりも大きいか否かを判断する(S92)。この判断結果は所定の記憶領域に記憶される。この閾値Bは、実験等により露光時間に応じたテーブルを用意しておき、それぞれの露光時間に応じて用いる閾値Bを決定するのが望ましい。
また、前記ステップS91において撮像領域が昼間である判定された場合、車両検出用画像領域231のボンネットのエッジ部分の抽出ができたか否かを判断する(S93)。この判断結果は所定の記憶領域に記憶される。ボンネットのエッジ部分の抽出は、例えば、ボンネットと背景とを含む画像領域について、画像の上下方向の隣接画素の輝度変化から、その水平エッジ成分の微分画像を形成し、予め記憶された水平エッジ成分の微分画像とのパターン比較し、各パターン比較の結果に基づいて検出した各部分それぞれのパターンマッチング誤差が所定の閾値以下の場合は、ボンネットのエッジ部分が検出できたと判定する。このエッジ部分の抽出ができる場合には、フロントガラス105に曇りや凍結やスプラッシュが起きていないと判定することができる。
次に、付着物検出用画像領域232から得られる各種パラメータについて判断する。
まず、付着物検出用画像領域232の輝度平均値が閾値Cよりも大きいか否かを判断する(S94)。この判断結果は所定の記憶領域に記憶される。上述したとおり、フロントガラス105に雨滴等が付着すると輝度平均値が下がる。例えば、付着物検出用画像領域232の輝度が1024階調であれば、ノイズ成分を除いた900(閾値C)よりも小さい輝度平均値が検出されたか否かを判断する。
また、付着物検出用画像領域232の輝度分散値が閾値Dよりも小さいか否かを判断する(S95)。この判断結果は所定の記憶領域に記憶される。例えば、付着物検出用画像領域232の輝度が1024階調であれば、輝度分散値が50(閾値D)よりも小さいとき、フロントガラス105が曇っている或いは凍結しているなどの判定を行うことができる。
また、付着物検出用画像領域232の輝度平均値の時間変化量が閾値Eよりも小さいか否かを判断する(S96)。この判断結果は所定の記憶領域に記憶される。例えば、前回撮像された付着物検出用画像領域232の輝度平均値が900以上であったものが、今回撮像された付着物検出用画像領域232では700未満であった場合など、輝度平均値の時間変化量が閾値E以上であるときにはスプラッシュが生じたものと判定することができる。
また、付着物検出用画像領域232の付着物領域の占有率が閾値Fよりも小さいか否かを判断する(S97)。この判断結果は所定の記憶領域に記憶される。例えば、光源部210から均一に照明がなされている場合、輝度平均値が900未満である領域が1/5(閾値F)を下回る場合には小雨であると判定し、1/5以上である場合にはそれ以外の付着物が付着していると判定することができる。
また、本実施形態においては、ワイパー制御用やデフロスタ制御用に検出されるパラメータとして、外気温センサ111の検知結果が用いられ、外気温センサ111が検知した外温度が閾値Gよりも大きいか否かを判断する(S98)。この判断結果は所定の記憶領域に記憶される。例えば、外気温が0度(閾値G)以下の場合、降雪もしくは凍結しているものと判定することができる。
以上のような各パラメータについての判断結果が得られたら、各パラメータの判断結果と図33に示す表との整合性から、フロントガラス105の状態判別を行う(S99)。この状態判別では、各パラメータの判断結果について重み付けを行うとよい。例えば、付着物検出用画像領域232に基づくパラメータおよび外気温についての重み付け係数を10とし、車両検出用画像領域231に基づくパラメータについての重み付け係数を5としておく。そして、各パラメータの判定結果として、異常なしとの差があるものを1とし、異常なしとの差がないときを0とする。その後、各パラメータの判定結果に重み付け係数をかけた総和について閾値判定を行う。これにより、各パラメータの判定結果が図33に示す表と完全一致する状態が存在しない場合でも、フロントガラス105の状態判定が可能となる。
また、付着物検出用画像領域232のパラメータについては異常なしと差がある場合、ワイパーを1回だけ動作させてから、再度、各パラメータについて状態判定を確認してもよい。
以上のようにしてフロントガラス105の状態判定結果が出たら、画像解析ユニット102は、次に、その状態判定結果に応じた処理、制御(ワイパー制御やデフロスタ制御など)を行うための指令を出す(S10)。この指令処理は、図34に示す表に応じて行われる。ワイパー制御は、ワイパー速度を3段階(遅、並、速)で制御するものであり、デフロスタ制御は、フロントガラス105の内壁に対して最大風量の温風を吹き付ける動作を行うか否かを制御するものである。
以上の説明では、光源部210から照射された光を反射させる反射面221を有する光学部材として、反射偏向プリズム220を用いる場合であったが、このような反射面221を有するミラー部材であってもよい。
以上に説明したものは一例であり、本発明は、次の態様毎に特有の効果を奏する。
(態様A)
光透過性を有するフロントガラス105等の板状部材に赤外光等の所定波長帯の光を照射する光源部210等の光照射手段と、前記光照射手段からの光によって映し出される前記板状部材上の雨滴等の検出対象物を、前記所定の波長帯の光を選択的に透過させる光学フィルタ209を介して、多数のフォトダイオード206C等の受光素子が二次元配列された画像センサ206で撮像する撮像ユニット101等の撮像手段と、前記撮像手段が撮像した撮像画像に基づいて前記検出対象物を検出する検出処理を行う検出処理部102A等の検出処理手段とを有する付着物検出装置において、前記画像センサ206を構成し、かつ、前記光照射手段から前記板状部材を経由して入射してくる光の光路上に存在する透明基層や平坦化層206D等の光透過材に、フィルタ材料を付着させることで、前記光学フィルタ209が形成されていることを特徴とする。
これによれば、画像センサ206を構成する光透過材それ自体にフィルタ材料を付着させることで光学フィルタ209が形成されるため、画像センサと光学フィルタとを別々に形成する場合よりも、光学フィルタと画像センサとの間の高い位置精度が得やすい。
(態様B)
前記態様Aにおいて、前記画像センサ206は、複数のオンチップレンズ206A等の微小レンズが二次元配列されたレンズアレイが前記光透過材からなる透明基層等の光透過層を介して前記多数の受光素子が設けられた基板207上に一体的に設けられたものであり、前記光学フィルタ209は、前記光透過層上に形成されていることを特徴とする。
これによれば、いわゆるカラー用の画像センサにおけるカラーフィルタを形成する既存の製法を用いて前記光学フィルタ209を作成することが可能となる。
(態様C)
前記態様Aにおいて、前記画像センサ206は、複数のオンチップレンズ206A等の微小レンズが二次元配列されたレンズアレイが前記多数の受光素子が設けられた基板207上に一体的に設けられたものであり、前記光学フィルタ209は、前記レンズアレイ上に平坦化層206D等の光透過材を付着させて平坦面を形成し、その平坦面上に前記フィルタ材料を付着させて形成されていることを特徴とする。
これによれば、画像センサ206の内部構造を変更することなく、前記光学フィルタ209を作成することができる。
(態様D)
前記態様A〜Cのいずれかの態様において、前記光学フィルタ209は、前記光照射手段から前記板状部材を経由して入射してくる光の前記光透過材上における光路領域と略一致する領域のみに前記フィルタ材料を付着させて形成されていることを特徴とする。
光照射手段からの光を受光しない受光素子は、検出処理に対する寄与度が小さく又は全く寄与しないので、このような受光素子に光学フィルタ209を通過させた光を受光させる必要性は少ない。むしろ、そのような受光素子に光学フィルタ209を通過させた光を受光させると、その受光素子を他の用途(例えば車両検出用画像領域231を構成する受光素子と同様の用途)に利用することが難しくなるので、デメリットもある。本態様によれば、このような受光素子の数を減らすことができるという利点がある。
(態様E)
撮像ユニット101等の撮像手段の撮像画像に基づいて自動車等の車両などの移動装置のフロントガラス105等の窓部材上の雨滴等の検出対象物を検出する付着物検出装置を備えた当該移動装置に搭載されているワイパー107やデフロスタ110等の制御対象機器を制御する車載機器制御システム等の移動装置用機器制御システムであって、前記付着物検出装置として用いられる前記態様A〜Dのいずれかの態様に係る付着物検出装置と、前記付着物検出装置により検出される検出対象物の検出結果に基づいて前記制御対象機器を制御する画像解析ユニット102、ワイパー制御ユニット106、デフロスタ制御ユニット109等の機器制御手段とを有することを特徴とする。
これによれば、検出対象物の高い検出結果に基づいて制御対象機器を制御できるので、制御対象機器の適切な制御が可能となる。
(態様F)
前記態様Eにおいて、前記機器制御手段は、前記移動装置の窓部材に付着した微小な検出対象物によって生じる曇りを除去するデフロスタ110等の曇り除去装置を制御するものであることを特徴とする。
これによれば、検出対象物の高い検出結果に基づいて、移動装置の窓部材の曇りを適切に除去することができる。
(態様G)
前記態様Eにおいて、前記機器制御手段は、前記移動装置の窓部材に付着した検出対象物を払拭するワイパー107等の払拭装置を制御するものであることを特徴とする。
これによれば、検出対象物の高い検出結果に基づいて、移動装置の窓部材に付着した付着物を適切に除去することができる。
(態様H)
前記態様Eにおいて、前記機器制御手段は、前記移動装置の窓部材に付着した検出対象物の凍結状態を解消するデフロスタ110等の凍結解消装置を制御するものであることを特徴とする。
これによれば、検出対象物の高い検出結果に基づいて、移動装置の窓部材の凍結状態を解消することができる。
100 自車両
101 撮像ユニット
102 画像解析ユニット
103 ヘッドランプ制御ユニット
104 ヘッドランプ
105 フロントガラス
106 ワイパー制御ユニット
107 ワイパー
108 車両走行制御ユニット
109 デフロスタ制御ユニット
110 デフロスタ
111 外気温センサ
200 撮像部
203 雨滴
204 撮像レンズ
205 カバーガラス
206 画像センサ
206A オンチップレンズ
206B 配線
206C フォトダイオード
206D 平坦化層
207 センサ基板
208 信号処理部
209 光学フィルタ
210 光源部
215 導光体
220 反射偏向プリズム
231 車両検出用画像領域
232 付着物検出用画像領域
特開2013−98817号公報

Claims (8)

  1. 光透過性を有する板状部材に所定波長帯の光を照射する光照射手段と、
    前記光照射手段からの光によって映し出される前記板状部材上の検出対象物を、前記所定の波長帯の光を選択的に透過させる光学フィルタを介して、多数の受光素子が二次元配列された画像センサで撮像する撮像手段と、
    前記撮像手段が撮像した撮像画像に基づいて前記検出対象物を検出する検出処理を行う検出処理手段とを有する付着物検出装置において、
    前記画像センサを構成し、かつ、前記光照射手段から前記板状部材を経由して入射してくる光の光路上に存在する光透過材に、フィルタ材料を付着させることで、前記光学フィルタが形成されていることを特徴とする付着物検出装置。
  2. 請求項1の付着物検出装置において、
    前記画像センサは、複数の微小レンズが二次元配列されたレンズアレイが前記光透過材からなる光透過層を介して前記多数の受光素子が設けられた基板上に一体的に設けられたものであり、
    前記光学フィルタは、前記光透過層上に形成されていることを特徴とする付着物検出装置。
  3. 請求項1の付着物検出装置において、
    前記画像センサは、複数の微小レンズが二次元配列されたレンズアレイが前記多数の受光素子が設けられた基板上に一体的に設けられたものであり、
    前記光学フィルタは、前記レンズアレイ上に光透過材を付着させて平坦面を形成し、その平坦面上に前記フィルタ材料を付着させて形成されていることを特徴とする付着物検出装置。
  4. 請求項1乃至3のいずれか1項に記載の付着物検出装置において、
    前記光学フィルタは、前記光照射手段から前記板状部材を経由して入射してくる光の前記光透過材上における光路領域と略一致する領域のみに前記フィルタ材料を付着させて形成されていることを特徴とする付着物検出装置。
  5. 撮像手段の撮像画像に基づいて移動装置の窓部材上の検出対象物を検出する付着物検出装置を備えた当該移動装置に搭載されている制御対象機器を制御する移動装置用機器制御システムであって、
    前記付着物検出装置として用いられる請求項1乃至4のいずれか1項に記載の付着物検出装置と、
    前記付着物検出装置により検出される検出対象物の検出結果に基づいて前記制御対象機器を制御する機器制御手段とを有することを特徴とする移動装置用機器制御システム。
  6. 請求項5の移動装置用機器制御システムにおいて、
    前記機器制御手段は、前記移動装置の窓部材に付着した微小な検出対象物によって生じる曇りを除去する曇り除去装置を制御するものであることを特徴とする移動装置用機器制御システム。
  7. 請求項5の移動装置用機器制御システムにおいて、
    前記機器制御手段は、前記移動装置の窓部材に付着した検出対象物を払拭する払拭装置を制御するものであることを特徴とする移動装置用機器制御システム。
  8. 請求項5の移動装置用機器制御システムにおいて、
    前記機器制御手段は、前記移動装置の窓部材に付着した検出対象物の凍結状態を解消する凍結解消装置を制御するものであることを特徴とする移動装置用機器制御システム。
JP2013160429A 2013-08-01 2013-08-01 付着物検出装置及び移動装置用機器制御システム Pending JP2015031564A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013160429A JP2015031564A (ja) 2013-08-01 2013-08-01 付着物検出装置及び移動装置用機器制御システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013160429A JP2015031564A (ja) 2013-08-01 2013-08-01 付着物検出装置及び移動装置用機器制御システム

Publications (1)

Publication Number Publication Date
JP2015031564A true JP2015031564A (ja) 2015-02-16

Family

ID=52517003

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013160429A Pending JP2015031564A (ja) 2013-08-01 2013-08-01 付着物検出装置及び移動装置用機器制御システム

Country Status (1)

Country Link
JP (1) JP2015031564A (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017017480A (ja) * 2015-06-30 2017-01-19 株式会社デンソー カメラ装置及び車載システム
JP2017191170A (ja) * 2016-04-12 2017-10-19 日立オートモティブシステムズ株式会社 車載光学装置および車載光学システム
CN111539891A (zh) * 2020-04-27 2020-08-14 高小翎 单张遥感图像的波段自适应除雾优化处理方法
WO2020217600A1 (ja) * 2019-04-26 2020-10-29 株式会社村田製作所 洗浄装置、洗浄装置を備える撮像ユニット、および洗浄方法

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017017480A (ja) * 2015-06-30 2017-01-19 株式会社デンソー カメラ装置及び車載システム
US10331963B2 (en) 2015-06-30 2019-06-25 Denso Corporation Camera apparatus and in-vehicle system capturing images for vehicle tasks
JP2017191170A (ja) * 2016-04-12 2017-10-19 日立オートモティブシステムズ株式会社 車載光学装置および車載光学システム
WO2017179331A1 (ja) * 2016-04-12 2017-10-19 日立オートモティブシステムズ株式会社 車載光学装置および車載光学システム
EP3444593A4 (en) * 2016-04-12 2019-11-20 Hitachi Automotive Systems, Ltd. OPTICAL DEVICE ON BOARD VEHICLE AND OPTICAL SYSTEM SHIPPED IN VEHICLE
US10850681B2 (en) 2016-04-12 2020-12-01 Hitachi Automotive Systems, Ltd. Vehicle-mounted optical device and vehicle-mounted optical system
WO2020217600A1 (ja) * 2019-04-26 2020-10-29 株式会社村田製作所 洗浄装置、洗浄装置を備える撮像ユニット、および洗浄方法
JPWO2020217600A1 (ja) * 2019-04-26 2021-06-10 株式会社村田製作所 洗浄装置、洗浄装置を備える撮像ユニット、および洗浄方法
JP7124886B2 (ja) 2019-04-26 2022-08-24 株式会社村田製作所 洗浄装置、洗浄装置を備える撮像ユニット、および洗浄方法
CN111539891A (zh) * 2020-04-27 2020-08-14 高小翎 单张遥感图像的波段自适应除雾优化处理方法

Similar Documents

Publication Publication Date Title
JP2014044196A (ja) 付着物検出装置、移動装置用機器制御システム及び移動装置
JP2014032174A (ja) 撮像装置、付着物検出装置、移動装置用機器制御システム及び移動装置
JP5846485B2 (ja) 付着物検出装置及び付着物検出方法
JP6468482B2 (ja) 撮像装置、物体検出装置及び移動体機器制御システム
JP6380843B2 (ja) 物体検出装置及びこれを備えた移動体機器制御システム並びに物体検出用プログラム
JP4326999B2 (ja) 画像処理システム
JP4327024B2 (ja) 画像処理システム
JP2013029451A (ja) 付着物検出装置及び付着物検出方法
JP2013190416A (ja) 付着物検出装置及びこれを用いた車載機器制御装置
JP2015052495A (ja) 導光体、物体検出装置
JP5656131B2 (ja) 撮像ユニット及びその設置方法
JP2014052364A (ja) 付着物検出装置、移動装置用機器制御システム及び移動装置
US9494685B2 (en) Light guide member, object detection apparatus, and vehicle
JP6555569B2 (ja) 画像処理装置、移動体機器制御システム及び画像処理用プログラム
JP2013031053A (ja) 撮像装置及びこれを備えた物体検出装置、並びに、光学フィルタ及びその製造方法
JP2015031564A (ja) 付着物検出装置及び移動装置用機器制御システム
JP6008238B2 (ja) 撮像装置、撮像装置の設置方法及び移動装置
JP2016146583A (ja) 撮像装置、移動体機器制御システム及びプログラム
JP2016200528A (ja) 物体検出装置、移動体機器制御システム及び物体検出用プログラム
JP6701542B2 (ja) 検出装置、移動体機器制御システム及び検出用プログラム
JP2017003531A (ja) 物体検出装置、物体除去動作制御システム、物体検出方法及び物体検出用プログラム
JP5672583B2 (ja) 撮像装置、付着物検出装置、移動装置用機器制御システム及び移動装置
JP2015169567A (ja) 付着物検出装置、移動体機器制御システム及び付着物検出用プログラム
JP5891723B2 (ja) 撮像方法および撮像ユニット
JP2016218046A (ja) 物体検出装置、物体除去動作制御システム、物体検出方法及び物体検出用プログラム