JP5656131B2 - 撮像ユニット及びその設置方法 - Google Patents
撮像ユニット及びその設置方法 Download PDFInfo
- Publication number
- JP5656131B2 JP5656131B2 JP2012276442A JP2012276442A JP5656131B2 JP 5656131 B2 JP5656131 B2 JP 5656131B2 JP 2012276442 A JP2012276442 A JP 2012276442A JP 2012276442 A JP2012276442 A JP 2012276442A JP 5656131 B2 JP5656131 B2 JP 5656131B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- imaging
- image
- wall surface
- light source
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/08—Mirrors
- G02B5/0816—Multilayer mirrors, i.e. having two or more reflecting layers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/21—Polarisation-affecting properties
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60S—SERVICING, CLEANING, REPAIRING, SUPPORTING, LIFTING, OR MANOEUVRING OF VEHICLES, NOT OTHERWISE PROVIDED FOR
- B60S1/00—Cleaning of vehicles
- B60S1/02—Cleaning windscreens, windows or optical devices
- B60S1/04—Wipers or the like, e.g. scrapers
- B60S1/06—Wipers or the like, e.g. scrapers characterised by the drive
- B60S1/08—Wipers or the like, e.g. scrapers characterised by the drive electrically driven
- B60S1/0818—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like
- B60S1/0822—Wipers or the like, e.g. scrapers characterised by the drive electrically driven including control systems responsive to external conditions, e.g. by detection of moisture, dirt or the like characterized by the arrangement or type of detection means
- B60S1/0833—Optical rain sensor
- B60S1/0844—Optical rain sensor including a camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
- B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
- B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
- B60R2011/0026—Windows, e.g. windscreen
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/41—Refractivity; Phase-affecting properties, e.g. optical path length
- G01N21/43—Refractivity; Phase-affecting properties, e.g. optical path length by measuring critical angle
- G01N2021/435—Sensing drops on the contact surface
Description
図42は、フロントガラスの傾斜角度が20°であるときに最適化されている撮像ユニットを、傾斜角度が20°であるフロントガラス105に対して設置した場合における、光源からの光がフロントガラス105の外壁面で反射する光路を示す説明図である。
図43は、フロントガラスの傾斜角度が20°であるときに最適化されている撮像ユニットを、傾斜角度が35°であるフロントガラス105に対して設置した場合における、光源からの光がフロントガラス105の外壁面で反射する光路を示す説明図である。
光源202から照射される光の一部はフロントガラス105の内壁面や外壁面で反射する。図42は、フロントガラス105の外壁面で反射する例である。このようにフロントガラス105の外壁面で反射した正反射光が雨滴検出用画像領域214に映し出されると、このような光強度の強い正反射光が外乱光となることで、雨滴Rdの検出精度が悪化する。そのため、光源202は、図41(a)に示したように雨滴Rdで反射した雨滴反射光が雨滴検出用画像領域214内に映し出され、かつ、フロントガラス105の外壁面で反射した正反射光は雨滴検出用画像領域214に映し出されないように、角度調整することが必要となる。
図45は、フロントガラス105の外壁面で正反射した正反射光が撮像部200に入射した場合の雨滴反射光とフロントガラスでの反射光との受光量を比較したグラフである。
フロントガラス105の外壁面で正反射した正反射光が撮像部200に入射しない場合、図44に示すように、フロントガラス105の内壁面や外壁面で反射した拡散反射光の一部が受光されるだけであり、その受光量は雨滴反射光の受光量に対して十分に少ないものとなっている。よって、この場合、雨滴を検出する際に高いS/N比を確保することができる。一方、フロントガラス105の外壁面で正反射した正反射光が撮像部200に入射する場合、図45に示すように、フロントガラス105の外壁面で反射した正反射光という強い光強度をもった外乱光が受光される。この受光量は雨滴反射光の受光量に対して多いものとなっているので、雨滴を検出する際に高いS/N比を確保することができない。
なお、本発明に係る撮像ユニットは、車載機器制御システムに限らず、他のシステムにも適用できる。
本車載機器制御システムは、自動車などの自車両100に搭載された撮像手段としての撮像装置で撮像した自車両進行方向前方領域(撮像領域)の撮像画像データを利用して、ヘッドランプの配光制御、ワイパーの駆動制御、その他の車載機器の制御を行うものである。
撮像ユニット101は、撮像部200と、光源202と、反射ミラー203とから構成されている。撮像ユニット101は自車両100のフロントガラス105の内壁面側に設置される。撮像部200及び光源202は、光源・撮像モジュール101Aに固定支持されており、反射ミラー203は、ミラーモジュール101Bに固定支持されている。本実施形態において、光源202及び反射ミラー203は、フロントガラス105の外壁面に付着した付着物(以下、付着物が雨滴である場合を例に挙げて説明する。)を検出するためのものである。
まず、ミラーモジュール101Bをフロントガラス105に固定する。この固定には、例えば、フロントガラス105に対してミラーモジュール101Bを接着したり、フロントガラス105に予め固定されたフック等の機構部品にミラーモジュール101Bを係合させたりする固定方法を採用できる。
図4(b)は、傾斜角度θgが35°であるフロントガラス105に対して本実施形態の撮像ユニット101を設置した場合に光源202から照射される光の光路を示す説明図である。
光源202の光照射方向は、回転連結機構101Cの回転調整範囲内で常にミラーモジュール101Bの反射ミラー203の反射面に向かうように、光源・撮像モジュール101Aに固定支持されている。本撮像ユニット101においては、フロントガラス105の傾斜角度が異なる場合でも、反射ミラー203で反射した光の方向(水平方向に対する方向)、すなわち、フロントガラス105の内壁面に入射する光の入射方向(水平方向に対する方向)は、一定方向を向くことになる。その結果、フロントガラス105の外壁面に付着する雨滴Rdで反射した光がフロントガラス105の内壁面から出射するときの出射方向(水平方向に対する方向)は、フロントガラス105の傾斜角度θgに関係なく、一定となる。
図9は、この構造例における撮像ユニットを別の角度から見たときの斜視図である。
本構造例の撮像ユニットは、光源202が図示しない発光部と発光部からの光を反射ミラー203へ導く導光射出部202Aとから構成されている。導光射出部202Aの射出端部から射出された光は、ミラーモジュール101Bに設置された反射ミラー203にて反射され、フロントガラス105の内壁面に入射し、その外壁面に付着した付着物にて反射した後、撮像部200にて受光される。ミラーモジュール101Bとフロントガラス105との固定には、先に述べたとおり、フロントガラス105に対してミラーモジュール101Bを接着したり、フロントガラス105に予め固定されたフック等の機構部品にミラーモジュール101Bを係合させたりする固定方法を採用できる。
撮像部200は、主に、撮像レンズ204と、光学フィルタ205と、2次元配置された画素アレイを有する画像センサ206を含んだセンサ基板207と、センサ基板207から出力されるアナログ電気信号(画像センサ206上の各受光素子が受光した受光量)をデジタル電気信号に変換した撮像画像データを生成して出力する信号処理部208とから構成されている。
図22は、撮像画像データの画像例を示す説明図である。
本実施形態の光学フィルタ205は、図10に示したように、前段フィルタ210と後段フィルタ220とを光透過方向に重ね合わせた構造となっている。前段フィルタ210は、図4に示すように、車両検出用画像領域213である撮像画像上部2/3に対応する箇所に配置される赤外光カットフィルタ領域211と、雨滴検出用画像領域214である撮像画像下部1/3に対応する箇所に配置される赤外光透過フィルタ領域212とに、領域分割されている。赤外光透過フィルタ領域212には、図19に示したカットフィルタや図20に示したバンドパスフィルタを用いる。
画像センサ206は、CCD(Charge Coupled Device)やCMOS(Complementary Metal Oxide Semiconductor)などを用いたイメージセンサであり、その受光素子にはフォトダイオード206Aを用いている。フォトダイオード206Aは、画素ごとに2次元的にアレイ配置されており、フォトダイオード206Aの集光効率を上げるために、各フォトダイオード206Aの入射側にはマイクロレンズ206Bが設けられている。この画像センサ206がワイヤボンディングなどの手法によりPWB(printed wiring board)に接合されてセンサ基板207が形成されている。
偏光フィルタ層222と分光フィルタ層223は、それぞれ、第1領域及び第2領域という2種類の領域が、画像センサ206上の1つのフォトダイオード206Aに対応して配置されたものである。これにより、画像センサ206上の各フォトダイオード206Aによって受光される受光量は、受光する光が透過した偏光フィルタ層222と分光フィルタ層223の領域の種類に応じて、偏光情報や分光情報等として取得することができる。
図28は、本実施形態における光学フィルタ205の層構成の一例を模式的に示す断面図である。
図28に示す光学フィルタ205は、雨滴検出用画像領域214が撮像画像下部に対応している場合に適用されるものである。この光学フィルタ205の後段フィルタ220は、車両検出用画像領域213に対応する車両検出用フィルタ部220Aと、雨滴検出用画像領域214に対応する雨滴検出用フィルタ部220Bとで、その層構成が異なっている。具体的には、車両検出用フィルタ部220Aは分光フィルタ層223を備えているのに対し、雨滴検出用フィルタ部220Bは分光フィルタ層223を備えていない。また、車両検出用フィルタ部220Aと雨滴検出用フィルタ部220Bとでは、その偏光フィルタ層222,225の構成が異なっている。
図29に示す光学フィルタ205は、雨滴検出用画像領域214が撮像画像上部と下部の両方に対応している場合に適用されるものである。この光学フィルタ205の前段フィルタ210は、車両検出用画像領域213に対応する箇所も雨滴検出用画像領域214に対応する箇所も同じ分光フィルタ層211’で構成されている。この分光フィルタ層211’としては、例えば、図30に示すように、400nm以上670nm以下の可視光帯域と、920nm以上960nm以下の赤外波長帯域とを選択的に透過させるフィルタ特性を有するものを用いることができる。なお、光源202の中心波長は940nmで、その半値全幅は10nmであることを前提としている。
図35(a)は、図34に示す符号A−Aで切断した光学フィルタ205の車両検出用フィルタ部220A及び画像センサ206を模式的に表した断面図である。
図35(b)は、図34に示す符号B−Bで切断した光学フィルタ205の車両検出用フィルタ部220A及び画像センサ206を模式的に表した断面図である。
なお、以下の説明では、図28に示した光学フィルタ205を用いる場合を例に挙げて説明する。
また、分光フィルタ層223の第1領域は、偏光フィルタ層222を透過可能な使用波長帯域に含まれる赤色波長帯(特定波長帯)の光のみを選択して透過させる赤色分光領域であり、分光フィルタ層223の第2領域は、波長選択を行わずに光を透過させる非分光領域である。そして、本実施形態においては、図34に一点鎖線で囲ったように、隣接する縦2つ横2つの合計4つの撮像画素(符号a、b、e、fの4撮像画素)によって撮像画像データの1画像画素が構成される。
また、図34に示す撮像画素bでは、光学フィルタ205の偏光フィルタ層222における垂直偏光領域(第1領域)と分光フィルタ層223の非分光領域(第2領域)を透過した光が受光される。したがって、撮像画素bは、垂直偏光成分Pにおける非分光(図34中符号Cで示す。)の光P/Cを受光することになる。
また、図34に示す撮像画素eでは、光学フィルタ205の偏光フィルタ層222における水平偏光領域(第2領域)と分光フィルタ層223の非分光領域(第2領域)を透過した光が受光される。したがって、撮像画素eは、水平偏光成分(図34中符号Sで示す。)における非分光Cの光S/Cを受光することになる。
図34に示す撮像画素fでは、光学フィルタ205の偏光フィルタ層222における垂直偏光領域(第1領域)と分光フィルタ層223の赤色分光領域(第1領域)を透過した光が受光される。したがって、撮像画素fは、撮像画素aと同様、垂直偏光成分Pにおける赤色波長帯Rの光P/Rを受光することになる。
また、より高い解像度である非分光の水平偏光成分画像を得ようとする場合、撮像画素eに対応する画像画素についてはこの撮像画素eで受光した非分光の水平偏光成分Sの情報をそのまま使用し、撮像画素a,b,fに対応する画像画素については、その周囲で非分光の水平偏光成分を受光する撮像画素eや撮像画素gなどの平均値を使用したり、撮像画素eと同じ値を使用したりしてもよい。
一方、差分偏光度画像は、分母にくるP偏光成分とS偏光成分との合計値がゼロ付近を示すのは、P偏光成分とS偏光成分のいずれかがゼロ付近を示す場合である。P偏光成分がゼロ付近を示す確率とS偏光成分がゼロ付近を示す確率は同等なので、差分偏光度画像は、P偏光成分もS偏光成分も平等に検出できる指標値画像であると言える。
本実施形態では、以上の比較から、偏光比画像ではなく差分偏光度画像を指標値画像として用いる。
また、赤外光カットフィルタ領域211に代えて、後段フィルタ220の雨滴検出用フィルタ部220Bに垂直偏光成分Pのみを透過させる分光フィルタ層を形成してもよい。この場合、前段フィルタ210には赤外光カットフィルタ領域211を形成する必要はない。
また、本実施形態の光学フィルタ205は、図34に示したように領域分割された偏光フィルタ層222及び分光フィルタ層223を有する後段フィルタ220が、前段フィルタ210よりも画像センサ206側に設けられているが、前段フィルタ210を後段フィルタ220よりも画像センサ206側に設けてもよい。
次に、本実施形態における先行車両及び対向車両の検出処理の流れについて説明する。
図36は、本実施形態における車両検出処理の流れを示すフローチャートである。
本実施形態の車両検出処理では、撮像部200が撮像した画像データに対して画像処理を施し、検出対象物であると思われる画像領域を抽出する。そして、その画像領域に映し出されている光源体の種類が2種類の検出対象物のいずれであるかを識別することで、先行車両、対向車両の検出を行う。
以下、本実施形態における白線検出処理について説明する。
本実施形態では、自車両が走行可能領域から逸脱するのを防止する目的で、検出対象物としての白線(区画線)を検出する処理を行う。ここでいう白線とは、実線、破線、点線、二重線等の道路を区画するあらゆる白線を含む。なお、黄色線等の白色以外の色の区画線などについても同様に検出可能である。
次に、本実施形態における雨滴検出処理について説明する。
本実施形態では、撮像部200が撮像した画像データのうち雨滴検出用画像領域214に対応する画像データを用いる。雨滴Rdからの反射光は、上述したように、垂直偏光成分Pをもつ高輝度なものであり、光学フィルタ205を通じて画像センサ206により受光される受光量が大きい。したがって、雨滴検出用画像領域214中から高輝度画像領域を抽出し、抽出された高輝度画像領域を雨滴の画像領域の候補領域として特定する。この高輝度画像領域の抽出には、上述した車両検出処理における高輝度画像領域抽出処理(ステップS3)と同様の処理を採用できる。
次に、本実施形態における光学フィルタ205の一変形例(以下、本変形例を「変形例1」という。)について説明する。
図37は、本変形例1における光学フィルタ205を透過して画像センサ206上の各フォトダイオード206Aで受光される受光量に対応した情報(各撮像画素の情報)の内容を示す説明図である。
図38(a)は、図37に示す符号A−Aで切断した光学フィルタ205及び画像センサ206を模式的に表した断面図である。
図38(b)は、図37に示す符号B−Bで切断した光学フィルタ205及び画像センサ206を模式的に表した断面図である。
本変形例1に係る光学フィルタ205は、車両検出用のフィルタ領域と雨滴検出用のフィルタ領域とを市松状パターンに領域分割し、これらの領域を撮像画像全体に分散配置した光学フィルタである。
また、図37に示す撮像画素b及び撮像画素eでは、光学フィルタ205の偏光フィルタ層225’(垂直偏光領域)と分光フィルタ層226’の非分光領域(第2領域)を透過した光が受光される。したがって、撮像画素bは、垂直偏光成分Pにおける非分光(図37中符号Cで示す。)の光P/Cを受光することになる。
なお、これらの撮像画像データでは、その画像画素の数が撮像画素数よりも少なくなるが、より高解像度の画像を得る際には、上述したような一般に知られる画像補間処理を用いてもよい。
また、非分光の垂直偏光成分画像は、上記実施形態と同様、白線や対向車両のヘッドランプの識別に使用することができる。
次に、本実施形態における光学フィルタ205の他の変形例(以下、本変形例を「変形例2」という。)について説明する。
図39は、本変形例2における光学フィルタ205を透過して画像センサ206上の各フォトダイオード206Aで受光される受光量に対応した情報(各撮像画素の情報)の内容を示す説明図である。
図40(a)は、図39に示す符号A−Aで切断した光学フィルタ205及び画像センサ206を模式的に表した断面図である。
図40(b)は、図39に示す符号B−Bで切断した光学フィルタ205及び画像センサ206を模式的に表した断面図である。
本変形例2に係る光学フィルタ205は、車両検出用のフィルタ領域と雨滴検出用のフィルタ領域とをストライプ状パターンに領域分割し、これらの領域を撮像画像全体に分散配置した光学フィルタである。
また、図39に示す撮像画素b及び撮像画素fでは、光学フィルタ205の偏光フィルタ層225’(垂直偏光領域)と分光フィルタ層226’の非分光領域(第2領域)を透過した光が受光される。したがって、撮像画素bは、垂直偏光成分Pにおける非分光Cの光P/Cを受光することになる。
なお、これらの撮像画像データでは、その画像画素の数が撮像画素数よりも少なくなるが、より高解像度の画像を得る際には、上述したような一般に知られる画像補間処理を用いてもよい。
また、非分光の垂直偏光成分画像は、上記実施形態と同様、白線や対向車両のヘッドランプの識別に使用することができる。
なお、ストライプ状パターンのストライプ方向は、光源202の光照射方向と、撮像部200の撮像方向とを含む仮想面(本変形例2では鉛直面となる。)に対して平行であるのがよい。この場合、雨滴Rdに照射された光の反射光(雨滴反射光)を、画像上の縦方向のいずれかの雨滴内の反射光を捉えることとなる。縦方向にストライプ方向を有することにより縦方向の赤外光情報を取り出す解像度が上がるため、雨滴の検出精度が上げられる。
(態様A)
予め決められた自車両前方領域等の撮像領域からフロントガラス105等の透明板状部材の外壁面に入射して該透明板状部材を透過した透過光を受光して該撮像領域の画像を撮像する撮像部200等の撮像手段と、光を照射する光源202とが、該透明板状部材の内壁面側に配置されるとともに、該光源からの光が該透明板状部材の外壁面に付着する雨滴Rd等の付着物で反射したときの反射光が上記撮像手段で受光されるように構成され、上記撮像領域の画像とともに該付着物の画像を撮像する撮像ユニット101において、上記光源から照射された光を反射させる反射ミラー203,203A,203B,203C,203Cを固定支持し、上記透明板状部材の内壁面上に固定配置されるミラーモジュール101Bと、上記光源及び上記撮像手段を固定支持し、該撮像手段の撮像方向Pが特定の方向を向くように上記透明板状部材の内壁面に対して固定配置される光源・撮像モジュール101Aと、上記ミラーモジュールと上記光源・撮像モジュールとを、反射ミラーで反射した上記光源からの光の上記透明板状部材の内壁面に対する入射面に直交する回転軸回りで相対回転可能に連結する回転連結機構101Cとを有することを特徴とする。
これによれば、当該撮像ユニット101の設置作業は、その撮像部200の撮像方向Pが特定の方向を向くように光源・撮像モジュール101Aを固定するとともに、ミラーモジュール101Bを透明板状部材に固定するという簡単な作業で済む。
しかも、透明板状部材の傾斜角度の違いによる、光源から照射されて反射ミラーで反射した光が透明板状部材の内壁面や外壁面で正反射する正反射光の振れ幅(撮像方向に対して直交する仮想面上を通る当該正反射光の位置の変化量)は狭いものとなるので、当該撮像ユニットが設置される透明板状部材の傾斜角度範囲が広くても、透明板状部材の内壁面や外壁面で反射した正反射光が撮像手段に入射しにくくなる。
なお、ミラーモジュールと光源・撮像モジュールとの相対位置を位置決めできる相対位置決め機構であれば、回転連結機構に限定されることはない。したがって、例えば、光源・撮像モジュールを、ミラーモジュールではなく、透明板状部材や透明板状部材を備えた製品壁部(車両の内壁等)などの別の部材に固定するような構成であってもよい。
上記態様Aにおいて、上記撮像手段の焦点は、上記透明板状部材の外壁面よりも遠方に設定されていることを特徴とする。
これによれば、撮像領域の画像と付着物の画像の両方を好適に撮像することができる。
上記態様A又はBにおいて、上記撮像手段は、受光素子206Aが2次元配置された撮像画素アレイで構成された画像センサ206により、光学フィルタ205を介して、上記透明板状部材を透過した撮像領域からの透過光と、該透明板状部材の外壁面に付着する付着物で反射した反射光とを、互いに異なるセンサ領域で受光するものであり、上記光源は、赤外光波長帯等の特定波長帯の光を照射するものであり、上記光学フィルタ205は、そのフィルタ領域の一部に、上記特定波長帯の光を選択的に透過させる第1フィルタ領域が形成され、そのフィルタ領域の他部に、上記撮像領域からの光を透過させる第2フィルタ領域が形成されていることを特徴とする。
これによれば、撮像領域の画像と付着物の画像の両方を好適に撮像することができる。
上記態様A〜Cのいずれかの態様において、上記撮像手段は、受光素子が2次元配置された撮像画素アレイで構成された画像センサにより、上記透明板状部材を透過した撮像領域からの透過光と、該透明板状部材の外壁面に付着する付着物で反射した正反射光とを、互いに異なるセンサ領域で受光するものであり、上記透明板状部材の内壁面の傾斜角度が所定角度範囲(20°以上35°以下の角度範囲等)内のいずれの角度であっても、上記透明板状部材の内壁面又は外壁面で反射する正反射光が、上記付着物で反射した反射光を受光するセンサ領域に入射しないように、構成されていることを特徴とする。
透明板状部材の内壁面や外壁面で反射した正反射光は、付着物で反射した反射光と同等以上の強い光強度を有するものであるため、付着物で反射した反射光に対して大きなノイズ成分となる。本態様によれば、このような大きなノイズ成分となる当該正反射光が、付着物で反射した反射光を受光するセンサ領域に入射しないので、当該ノイズ成分による付着物の検出精度の低下を抑制できる。
上記態様A〜Dのいずれかの態様において、上記透明板状部材の内壁面の傾斜角度が所定角度範囲(20°以上35°以下の角度範囲等)内のいずれの角度であっても、上記反射ミラーで反射した光の該透明板状部材の内壁面に入射する地点が一定となるように、構成されていることを特徴とする。
これによれば、透明板状部材の傾斜角度に関わらず、光源から照射されて反射ミラーで反射した光が透明板状部材の内壁面や外壁面で正反射する正反射光の振れ幅をほぼゼロにすることが可能となるので、安定した付着物の検出が可能となる。
上記態様A〜Eのいずれかの態様において、上記光源・撮像モジュールは、上記光源から照射される光の光路を変更する偏向プリズム202cや偏心配置したコリメートレンズ202b等の光路変更部材を有することを特徴とする。
これによれば、光源202を設置する基板と撮像手段の画像センサ206の基板とを容易に共通化することが可能となり、電装部品の簡素化の実現が容易となる。
上記態様A〜Fのいずれかの態様において、上記反射ミラーは、凹面ミラー203Aであることを特徴とする。
これによれば、反射ミラーで反射した光束に集束力を付与することができ、透明板状部材への入射角のばらつきを低減でき、付着物の検出性能を向上させることが可能となる。
上記態様A〜Gのいずれかの態様において、上記反射ミラーは、偏光ミラー203Bであることを特徴とする。
これによれば、透明板状部材を透過して付着物へ入射する光の偏光成分だけを、透明板状部材に向けて照射することが可能となり、透明板状部材の内壁面や外壁面で反射する光に含まれる偏光成分を低減できる。その結果、透明板状部材の内壁面や外壁面で反射する光によるノイズ成分を低減して、付着物の検出性能を向上させることが可能となる。
上記態様A〜Hのいずれかの態様において、上記撮像手段に受光されることで上記撮像領域の画像及び上記付着物の画像の少なくとも一方の画像のノイズ成分となる上記光源からの光を遮光する遮光部材203Dを、上記ミラーモジュール101B及び上記光源・撮像モジュール101Aの少なくとも一方に設けたことを特徴とする。
これによれば、反射ミラーの反射面で拡散反射した拡散成分が撮像手段に直接入射したり、反射ミラーの反射面での拡散成分が透明板状部材の内壁面や外壁面で正反射して撮像手段に入射したりするノイズ成分を低減できる。
上記態様A〜Iのいずれかの態様に係る撮像ユニット101の設置方法であって、上記ミラーモジュール101Bを上記透明板状部材の内壁面上に固定する前又は後に、上記光源・撮像モジュール101Aに固定支持された撮像手段の撮像方向Pが特定の方向を向くように、該光源・撮像モジュールを該透明板状部材の内壁面に対して固定することを特徴とする。
これによれば、当該撮像ユニット101を簡単な作業で設置することができる。
101 撮像ユニット
101A 光源・撮像モジュール
101B ミラーモジュール
101C 回転連結機構
101D 長穴部
101E ボルト部品
102 画像解析ユニット
103 ヘッドランプ制御ユニット
104 ヘッドランプ
105 フロントガラス
106 ワイパー制御ユニット
107 ワイパー
108 車両走行制御ユニット
200 撮像部
202 光源
202A 導光射出部
202a 発光部
202b コリメートレンズ
202c 偏向プリズム
203,203E 反射ミラー
203a 光吸収部材
203A 凹面ミラー
203B,203C 偏光ミラー
203D 遮光部材
204 撮像レンズ
205 光学フィルタ
206 画像センサ
207 センサ基板
208 信号処理部
210 前段フィルタ
211 赤外光カットフィルタ領域
212 赤外光透過フィルタ領域
213 車両検出用画像領域
214,214A,214B 雨滴検出用画像領域
220 後段フィルタ
220A 車両検出用フィルタ部
220B 雨滴検出用フィルタ部
221 フィルタ基板
222,225,225’ 偏光フィルタ層
223,226,226’ 分光フィルタ層
P 垂直偏光成分
S 水平偏光成分
Claims (11)
- 予め決められた撮像領域から透明板状部材の外壁面に入射して該透明板状部材を透過した透過光を受光して該撮像領域の画像を撮像する撮像手段と、光を照射する光源とが、該透明板状部材の内壁面側に配置されるとともに、該光源からの光が該透明板状部材の外壁面に付着する付着物で反射したときの反射光が上記撮像手段で受光されるように構成され、上記撮像領域の画像とともに該付着物の画像を撮像する撮像ユニットにおいて、
上記光源から照射された光を反射させる反射光学部材を固定支持し、上記透明板状部材の内壁面上に、該反射光学部材の反射面が該透明板状部材に対して固定されるように固定配置される反射光学モジュールと、
上記光源及び上記撮像手段を固定支持し、該撮像手段の撮像方向が特定の方向を向くように上記透明板状部材の内壁面に対して固定配置される光源・撮像モジュールと、
上記反射光学モジュールと上記光源・撮像モジュールとの相対位置を位置決めする相対位置決め機構とを有し、
上記撮像手段は、受光素子が2次元配置された撮像画素アレイで構成された画像センサにより、上記透明板状部材を透過した撮像領域からの透過光と、該透明板状部材の外壁面に付着する付着物で反射した正反射光とを、互いに異なるセンサ領域で受光するものであり、上記透明板状部材の内壁面の傾斜角度が所定角度範囲内のいずれの角度であっても、上記透明板状部材の内壁面又は外壁面で反射する正反射光が、上記付着物で反射した反射光を受光するセンサ領域に入射しないように、構成されていることを特徴とする撮像ユニット。 - 請求項1に記載の撮像ユニットにおいて、
上記透明板状部材の内壁面の傾斜角度が所定角度範囲内のいずれの角度であっても、上記反射光学部材で反射した光の該透明板状部材の内壁面に入射する地点が一定となるように、構成されていることを特徴とする撮像ユニット。 - 予め決められた撮像領域から透明板状部材の外壁面に入射して該透明板状部材を透過した透過光を受光して該撮像領域の画像を撮像する撮像手段と、光を照射する光源とが、該透明板状部材の内壁面側に配置されるとともに、該光源からの光が該透明板状部材の外壁面に付着する付着物で反射したときの反射光が上記撮像手段で受光されるように構成され、上記撮像領域の画像とともに該付着物の画像を撮像する撮像ユニットにおいて、
上記光源から照射された光を反射させる反射光学部材を固定支持し、上記透明板状部材の内壁面上に、該反射光学部材の反射面が該透明板状部材に対して固定されるように固定配置される反射光学モジュールと、
上記光源及び上記撮像手段を固定支持し、該撮像手段の撮像方向が特定の方向を向くように上記透明板状部材の内壁面に対して固定配置される光源・撮像モジュールと、
上記反射光学モジュールと上記光源・撮像モジュールとの相対位置を位置決めする相対位置決め機構とを有し、
上記透明板状部材の内壁面の傾斜角度が所定角度範囲内のいずれの角度であっても、上記反射光学部材で反射した光の該透明板状部材の内壁面に入射する地点が一定となるように、構成されていることを特徴とする撮像ユニット。 - 請求項1乃至3のいずれか1項に記載の撮像ユニットにおいて、
上記相対位置決め機構は、上記反射光学モジュールと上記光源・撮像モジュールとを、反射光学部材で反射した上記光源からの光の上記透明板状部材の内壁面に対する入射面に直交する回転軸回りで相対回転可能に連結する回転連結機構であることを特徴とする撮像ユニット。 - 請求項4の撮像ユニットにおいて、
上記回転連結機構の回転軸に対して直交する仮想面上で、上記反射光学部材の反射面端部のうち上記透明板状部材から離れた端部の位置を第一地点とし、該第一点を通るように引いた該透明板状部材の内壁面の法線における該内壁面との交点を第二点とし、上記撮像手段へ向かって該透明板状部材の内壁面から射出される光の射出点のうち最も該第二点から遠い地点を第三点としたとき、該第一点、該第二点及び該第三点を頂点とする長方形の領域内に上記回転連結機構の回転軸が位置するように構成されていることを特徴とする撮像ユニット。 - 請求項1乃至5のいずれか1項に記載の撮像ユニットにおいて、
上記光源・撮像モジュールは、上記光源から照射される光の光路を変更する光路変更部材を有することを特徴とする撮像ユニット。 - 請求項1乃至6のいずれか1項に記載の撮像ユニットにおいて、
上記反射光学部材は、反射ミラーであることを特徴とする撮像ユニット。 - 請求項1乃至7のいずれか1項に記載の撮像ユニットにおいて、
上記反射光学部材は、凹面ミラーであることを特徴とする撮像ユニット。 - 請求項1乃至8のいずれか1項に記載の撮像ユニットにおいて、
上記反射光学部材は、偏光ミラーであることを特徴とする撮像ユニット。 - 請求項1乃至9のいずれか1項に記載の撮像ユニットにおいて、
上記撮像手段に受光されることで上記撮像領域の画像及び上記付着物の画像の少なくとも一方の画像のノイズ成分となる上記光源からの光を遮光する遮光部材を、上記反射光学モジュール及び上記光源・撮像モジュールの少なくとも一方に設けたことを特徴とする撮像ユニット。 - 請求項1乃至10のいずれか1項に記載の撮像ユニットの設置方法であって、
上記反射光学モジュールを上記透明板状部材の内壁面上に固定する前又は後に、上記光源・撮像モジュールに固定支持された撮像手段の撮像方向が特定の方向を向くように、該光源・撮像モジュールを該透明板状部材の内壁面に対して固定することを特徴とする撮像ユニットの設置方法。
Priority Applications (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012276442A JP5656131B2 (ja) | 2012-02-13 | 2012-12-19 | 撮像ユニット及びその設置方法 |
US14/372,061 US20150054954A1 (en) | 2012-02-13 | 2013-02-12 | Imaging unit and method for installing the same |
PCT/JP2013/053783 WO2013122242A1 (en) | 2012-02-13 | 2013-02-12 | Imaging unit and method for installing the same |
BR112014020693A BR112014020693A2 (pt) | 2012-02-13 | 2013-02-12 | unidade de imagem e método para instalação da mesma |
CN201380009292.9A CN104136910B (zh) | 2012-02-13 | 2013-02-12 | 成像单元及其安装方法 |
EP13749832.5A EP2815228B1 (en) | 2012-02-13 | 2013-02-12 | Imaging unit and method for installing the same |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012028917 | 2012-02-13 | ||
JP2012028917 | 2012-02-13 | ||
JP2012276442A JP5656131B2 (ja) | 2012-02-13 | 2012-12-19 | 撮像ユニット及びその設置方法 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013190417A JP2013190417A (ja) | 2013-09-26 |
JP2013190417A5 JP2013190417A5 (ja) | 2014-07-10 |
JP5656131B2 true JP5656131B2 (ja) | 2015-01-21 |
Family
ID=48984350
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012276442A Expired - Fee Related JP5656131B2 (ja) | 2012-02-13 | 2012-12-19 | 撮像ユニット及びその設置方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20150054954A1 (ja) |
EP (1) | EP2815228B1 (ja) |
JP (1) | JP5656131B2 (ja) |
CN (1) | CN104136910B (ja) |
BR (1) | BR112014020693A2 (ja) |
WO (1) | WO2013122242A1 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150027543A (ko) * | 2013-09-04 | 2015-03-12 | 현대모비스 주식회사 | 라이다 센서 시스템 |
JP6424488B2 (ja) * | 2014-06-19 | 2018-11-21 | 日産自動車株式会社 | 物体検出装置及び物体検出方法 |
US9426377B2 (en) | 2014-10-03 | 2016-08-23 | Ricoh Company, Ltd. | Image capturing apparatus, image capturing method, storage medium, and device control system for controlling vehicle-mounted devices |
US9726604B2 (en) | 2014-11-12 | 2017-08-08 | Ricoh Company, Ltd. | Adhering detection apparatus, adhering substance detection method, storage medium, and device control system for controlling vehicle-mounted devices |
JP6468482B2 (ja) | 2014-11-26 | 2019-02-13 | 株式会社リコー | 撮像装置、物体検出装置及び移動体機器制御システム |
US9783128B2 (en) * | 2014-12-15 | 2017-10-10 | Trw Automotive U.S. Llc | Vehicle camera defogging vent with glare mitigation |
US9465987B1 (en) * | 2015-03-17 | 2016-10-11 | Exelis, Inc. | Monitoring and detecting weather conditions based on images acquired from image sensor aboard mobile platforms |
CN105491350B (zh) * | 2016-01-04 | 2018-12-14 | 烟台中正新技术有限公司 | 一种用于车辆行驶图像采集的摄像装置 |
JP7347612B1 (ja) | 2022-09-02 | 2023-09-20 | いすゞ自動車株式会社 | 車両制御装置及び車両制御方法 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6891563B2 (en) * | 1996-05-22 | 2005-05-10 | Donnelly Corporation | Vehicular vision system |
US6420975B1 (en) * | 1999-08-25 | 2002-07-16 | Donnelly Corporation | Interior rearview mirror sound processing system |
US6329925B1 (en) * | 1999-11-24 | 2001-12-11 | Donnelly Corporation | Rearview mirror assembly with added feature modular display |
EP1263626A2 (en) * | 2000-03-02 | 2002-12-11 | Donnelly Corporation | Video mirror systems incorporating an accessory module |
JP3727543B2 (ja) * | 2000-05-10 | 2005-12-14 | 三菱電機株式会社 | 画像表示装置 |
FR2854251B1 (fr) * | 2003-04-25 | 2005-11-04 | Tietronix Optics | Dispositif d'aide a la conduite |
JP4326999B2 (ja) | 2003-08-12 | 2009-09-09 | 株式会社日立製作所 | 画像処理システム |
US7718943B2 (en) * | 2004-09-29 | 2010-05-18 | Gentex Corporation | Moisture sensor for optically detecting moisture |
JP2007033400A (ja) * | 2005-07-29 | 2007-02-08 | Asmo Co Ltd | 表面付着物検出装置 |
JP5051874B2 (ja) * | 2006-01-11 | 2012-10-17 | 日東電工株式会社 | 積層フィルムの製造方法、積層フィルムの欠陥検出方法、積層フィルムの欠陥検出装置 |
US8698894B2 (en) * | 2006-02-07 | 2014-04-15 | Magna Electronics Inc. | Camera mounted at rear of vehicle |
US9022586B2 (en) * | 2006-03-28 | 2015-05-05 | Rosco, Inc. | Vehicular mirror having a camera for enhanced vision |
EP2217911B1 (en) * | 2007-11-15 | 2016-04-13 | Xtralis Technologies Ltd | Particle detection |
JP5441462B2 (ja) * | 2009-03-23 | 2014-03-12 | オムロンオートモーティブエレクトロニクス株式会社 | 車両用撮像装置 |
DE102010023593A1 (de) | 2010-06-12 | 2011-12-15 | Conti Temic Microelectronic Gmbh | Optische Vorrichtung mit einem bifokalen optischen Element und einem Spiegelelement |
JP5761143B2 (ja) | 2011-11-02 | 2015-08-12 | 株式会社リコー | 撮像ユニット、撮像ユニットを搭載した車両 |
-
2012
- 2012-12-19 JP JP2012276442A patent/JP5656131B2/ja not_active Expired - Fee Related
-
2013
- 2013-02-12 CN CN201380009292.9A patent/CN104136910B/zh active Active
- 2013-02-12 US US14/372,061 patent/US20150054954A1/en not_active Abandoned
- 2013-02-12 EP EP13749832.5A patent/EP2815228B1/en active Active
- 2013-02-12 WO PCT/JP2013/053783 patent/WO2013122242A1/en active Application Filing
- 2013-02-12 BR BR112014020693A patent/BR112014020693A2/pt not_active Application Discontinuation
Also Published As
Publication number | Publication date |
---|---|
US20150054954A1 (en) | 2015-02-26 |
EP2815228B1 (en) | 2017-07-05 |
CN104136910B (zh) | 2016-08-31 |
JP2013190417A (ja) | 2013-09-26 |
CN104136910A (zh) | 2014-11-05 |
BR112014020693A2 (pt) | 2019-04-02 |
EP2815228A1 (en) | 2014-12-24 |
EP2815228A4 (en) | 2015-10-07 |
WO2013122242A1 (en) | 2013-08-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5656131B2 (ja) | 撮像ユニット及びその設置方法 | |
JP6468482B2 (ja) | 撮像装置、物体検出装置及び移動体機器制御システム | |
JP5846485B2 (ja) | 付着物検出装置及び付着物検出方法 | |
EP3085073B1 (en) | Object detection apparatus, moving body device control system and program therefor | |
US9726604B2 (en) | Adhering detection apparatus, adhering substance detection method, storage medium, and device control system for controlling vehicle-mounted devices | |
JP4326999B2 (ja) | 画像処理システム | |
JP2013031054A (ja) | 撮像装置及びこれを備えた物体検出装置、並びに、光学フィルタ及びその製造方法 | |
US20140029008A1 (en) | Foreign substance detection device, moving body control system including foreign substance detection device, and moving body including moving body control system | |
US9426377B2 (en) | Image capturing apparatus, image capturing method, storage medium, and device control system for controlling vehicle-mounted devices | |
JP5936098B2 (ja) | 撮像装置及びこれを備えた物体検出装置、並びに、光学フィルタ | |
JP2013029451A (ja) | 付着物検出装置及び付着物検出方法 | |
JP2005195569A (ja) | 画像処理システム | |
US20160341848A1 (en) | Object detection apparatus, object removement control system, object detection method, and storage medium storing object detection program | |
JP6555569B2 (ja) | 画像処理装置、移動体機器制御システム及び画像処理用プログラム | |
JP5858327B2 (ja) | 撮像装置及びこれを備えた物体検出装置並びに偏光フィルタ | |
WO2016084359A1 (en) | Imaging device, object detector and mobile device control system | |
JP2016200528A (ja) | 物体検出装置、移動体機器制御システム及び物体検出用プログラム | |
JP2015031564A (ja) | 付着物検出装置及び移動装置用機器制御システム | |
JP2016146583A (ja) | 撮像装置、移動体機器制御システム及びプログラム | |
JP6701542B2 (ja) | 検出装置、移動体機器制御システム及び検出用プログラム | |
JP5891723B2 (ja) | 撮像方法および撮像ユニット | |
JP2015169567A (ja) | 付着物検出装置、移動体機器制御システム及び付着物検出用プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140526 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140526 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20140526 |
|
A975 | Report on accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A971005 Effective date: 20140613 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20140620 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20140819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20141031 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20141113 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5656131 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |