JP2005515930A - 車載型赤外線暗視装置 - Google Patents

車載型赤外線暗視装置 Download PDF

Info

Publication number
JP2005515930A
JP2005515930A JP2003563861A JP2003563861A JP2005515930A JP 2005515930 A JP2005515930 A JP 2005515930A JP 2003563861 A JP2003563861 A JP 2003563861A JP 2003563861 A JP2003563861 A JP 2003563861A JP 2005515930 A JP2005515930 A JP 2005515930A
Authority
JP
Japan
Prior art keywords
vehicle
image data
night vision
infrared
infrared night
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003563861A
Other languages
English (en)
Other versions
JP2005515930A5 (ja
JP4348527B2 (ja
Inventor
ヘルムート・エッガース
ゲルハルト・クルツ
ユルゲン・セーキルヒャー
トーマス・ヴォールゲムート
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Mercedes Benz Group AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG, Mercedes Benz Group AG filed Critical Daimler AG
Publication of JP2005515930A publication Critical patent/JP2005515930A/ja
Publication of JP2005515930A5 publication Critical patent/JP2005515930A5/ja
Application granted granted Critical
Publication of JP4348527B2 publication Critical patent/JP4348527B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/30Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/24Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view in front of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/106Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using night vision cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8053Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for bad weather conditions or night vision
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation

Abstract

本発明は、自動車の周囲を表す画像データを受信するために使用される赤外線カメラを備えた車載型赤外線暗視装置に関する。この装置はまた、赤外線カメラに接続され、提供された画像データからの連続画像部分が選択され、選択されたデータがディスプレイに再送信されるように、赤外線カメラによって提供された画像データを処理する画像処理ユニットを具備する。次いで、上記ディスプレイは、選択されたデータを完全にまたは殆ど完全に再生し、これにより、画像データの、他のさらなるどのような表示も再生されない。好ましくは、画像データの選択が、車両の速度、車両の周囲、または運転者に従って行われる。

Description

本発明は、車載型赤外線暗視装置および該装置を有する車両に関する。
特許文献1では、自動車内で情報を表示するための方法について開示しており、この開示の場合には、表示ユニット上に、車両内のデイライトカメラによって記録された画像から特定の関連性を有する部分のみが表示される。この場合、適切な画像データは、選択基準から始まる画像全体から選択される。ここでは、デイライトカメラによる写真内に映った交通標識の輪郭が選択基準としての働きをする。車両運転者に対して、簡単かつ理解できる交通標識の描写が、結果として、特に注意機能として表示される。
車載型暗視装置が、特許文献2および特許文献3に開示されている。
上記の特許文献には、たとえば800nmと2000nmとの間の波長を有する、不可視光線の周波数範囲内に感度を有するカメラが示されている。さらに、上記の文献では、偏光または無偏光赤外光を放射する、周囲を照らすための光源が示されている。周囲から反射した赤外光は、赤外線カメラによって捉えられ、たとえばヘッドアップディスプレイとして、車両運転者の視野内に配置された表示装置上に映される。この場合、赤外線カメラによって捉えられた画像データは、表示ユニットによって再生される。公知の車載型暗視装置は、ユーザにとって取り扱うことが困難であり、したがって余り有用なものとは言えない。
IR(赤外線)カメラとディスプレイとの間に介挿された画像処理ユニットを有する暗視装置も知られている。この場合、赤外線カメラの画像データは、表示される前に、実質的に雑音構成要素からの信号を除くための簡単な処理を施される。
独国特許出願公開第197 36 774 A1号明細書 独国特許発明第39 32 216 C2号明細書 独国特許出願公開第40 07 646 A1号明細書
本発明の目的は、運転者または車両乗員が、より良いと感じるあるいはより簡単に使用できかつより有用と感じる車載型赤外線暗視装置を提供し、このような車載型赤外線暗視装置が装備された車両を提供することである。
上記目的は、本発明によって、まず特許請求項1の特徴を有するまたは同様に特許請求項2の特徴による、車載型赤外線暗視装置によって達成され、請求項12の特徴を有する車両によって達成される。
本発明の有利な展開形態が、従属請求項の主題である。
本発明は、赤外線カメラによって捉えられ、自動車の周囲を表す画像データが、この赤外線カメラに接続された画像処理ユニットに送られることを前提とする。この画像処理ユニットは、制御ユニットによって制御できるように設計されており、この画像処理ユニットに送られた画像データのコヒーレントな領域が選択され、次いでこれらの選択されたデータが、画像処理ユニットに接続されたディスプレイ上に、フォーマットが満たされて再生される。
この場合、ディスプレイは、運転者の視野内に配置されるので、周囲を直接見ることを妨げる注意散漫になるものが全くまたは殆どなく、運転者はディスプレイに示されている選択された赤外線(IR)画像データに注意を向けることができる。赤外線カメラから受信され、画像処理ユニットおよびディスプレイにより視覚化された画像データは、光スペクトルの可視領域外にある周囲の熱の分散に関する情報を表す。これらの画像データは、赤外線カメラによって捉えることのできる可視光線の周波数範囲からのさらなる画像データによって補足され、その後、処理、再生することができる。
本出願人の本発明に基づく車載型赤外線(IR)暗視装置は、現在有効な交通制御について指摘しまたは想起させるための特許文献1に対応する交通標識ディスプレイという意味での情報ディスプレイとして、それ程意図したものではなく、むしろ主に、特に夜間にまたは眺めが良好でない天候状況で、自動車の運転者の視界を向上させるための働きをする。これに対応して視覚を向上させるこのような装置のディスプレイは、把握することが困難な現在の交通状況を、容易に理解できる方式で運転者に提供するという課題を有する。本発明が立脚しているこのような目的を実施するためには、昼光の範囲内で交通標識を認識することで知られている選択基準以外に、画像データを定義することが必要となる。したがって、本発明の範囲においては、赤外線(IR)画像内でコヒーレントな領域を選択するための、2つの新規な本発明による選択基準について記載する。1つの選択基準は、車両速度センサのセンサデータから導出され、一方、別の選択基準は、周囲を検出するためのセンサのセンサデータから導出される。
したがって、選択プロセスにより、即ち、ある部分を選択すること、つまり、画像処理ユニットに送られた画像データのコヒーレントな領域を選択することにより、まず第1に選択を行い、第2に上記部分のサイズ/フォーマットおよびディスプレイのサイズ/フォーマットによって決められた倍率係数を確定する。ここでは、再生される画像データは、ディスプレイのフォーマットに適応でき、ディスプレイフォーマットに相関していない選択された画像データの特定の部分は表示されなくなる。
受信された画像データを選択することにより、ユーザにとって特に関心のある画像データ、したがって特に関連性のある情報を含む受信された画像データの部分に、車載型赤外線暗視装置のユーザ、つまり車両の運転者または同乗者が、非常に容易に、効果的にアクセス可能となる。
ここでは、この車載型赤外線暗視装置には、リアルタイムでの画像処理を可能とする画像処理ユニットが装備されているので、捉えられて選択された赤外線画像データは、著しい時間損失なく再生でき、および/または著しい時間損失なく、選択を後に続く再生に適応させることができる。このことにより、自動車内で使用するのに必要な現在の状況を即時に表示させることが確実なものとなる。これにより、一方で、車載型赤外線暗視装置を介さずに直接可視光線スペクトル内において肉眼を通して、他方で、車載型赤外線暗視装置を介して、周囲の現在の情報をそれぞれ認識できるので、このような移動できる車載型赤外線暗視装置は、ユーザに非常に容認されるものとなる。周囲の視界が不十分である場合、たとえば夜間、薄暗がり、霧、または同様の状況の場合には、上記車載型赤外線暗視装置により、ユーザが、現在の状況を通して、簡単かつ便利な方式で、赤外線画像データに関連する拡大された部分と同じ周囲の状況を補い、それから、周囲の最適化された情報を得ることが可能となり、これにより、交通安全性が向上する。
本発明の好ましい実施形態によれば、車両速度を検出するために、制御ユニットに接続されたセンサが設けられる。画像データの選択サイズは、たとえばタコメーターに表示される検出速度により、車両の速度に応じて制御される。つまり、高速のためには小さい部分が選択され、ディスプレイ上には大きく拡大されて再生されることが好ましい。このことにより、さらに遠くにあって比較的高速に関連する自動車の前方の領域は、車載型赤外線暗視装置のディスプレイに再生され、高速の場合に関連しない車両の直前の領域は、再生されないことが確実となる。反対に、低速の場合には、画像処理に送られた画像データの大きな部分、またはしかるべき場合には、すべての画像データが、再生のためにディスプレイに運ばれてくるように、画像データの選択が実施される。このことにより、より低速の場合には、車両の前の近接している区間全体が広角レンズの方式で検出され、対応する熱情報で車載型赤外線暗視装置によって再生されることが確実となる。これにより、再生される画像データは、状況および速度に応じて選択される。このことにより、車載型赤外線暗視装置からの情報を、非常に信頼性が高く便利で分かりやすく使用することが可能となる。
画像処理ユニットが車両の周囲の検出されたデータに応じて画像データの選択を制御するように、制御ユニットに接続された、車両の周囲を検出するためのセンサが、車載型赤外線暗視装置に設けられることが特に有利であることが、証明されている。これにより、再生されるデータが、周囲の検出された状況に応じて記録されたデータから選択されることが可能となり、このことにより、運転者は、使用可能となった情報に一層効果的に注意を向けることができる。
たとえば、上記センサは車線を検出するのに適しており、その結果、たとえばこのセンサは、左側にまたは右側に曲がっている、まっすぐである、などを検出し、それに対応して画像データ、したがって再生される画像データを選択し、その結果、運転の行程に従って、右側に曲がっている場合には、送られた画像データの右側の部分が主に選択され、左側に曲がっている場合には、送られた画像データの左側の部分が選択され、まっすぐである場合には、画像データの中央の部分が選択され、次いでこれらのデータが再生される。車線に応じて画像データを選択することに加えて、選択された部分のサイズが、さらに速度に応じて選択されることが好ましい。このことにより、赤外線画像データの、車線および速度に応じて最適化された再生ができ、これにより、信頼性が高くユーザが効果的に注意を向けることのできる周囲の関連する情報各々が再生される。
その上、周囲の天候状況を検出し、その天候状況に応じて画像データの選択を制御するためのセンサを使用することが有意義であることが、証明されている。良好な、乾いた、または快晴の天候の場合には、小さい部分が選択され、湿った天候または雨の場合には、記録されたデータから再生されるべきデータの部分は、より大きい部分が選択され、凍った表面や降雪や霧がある場合には、さらに大きい部分が選択されることが効果的であることが、証明されている。このことにより、天候状況に応じて、したがって運転者に必要な異なる運転挙動に適応して、それぞれ関連するデータの部分がユーザにとって使用可能となり、したがって、ユーザは車両をできる限り安全に運転できることが確実となる。天候状況を検出するために特に適切なセンサとして、車両内に組み込まれかつそのセンサ信号が車両内のさまざまな他の装置に使用され得る、温度センサが設けられる。
さらに、時刻または昼夜の状況を検出するのに適しているという意味において、車両の周囲を検出するためのセンサを設計することが有意義であることが証明されており、これは、たとえば時計または外部灯光センサによって実施できる。このセンサは制御ユニットに接続され、制御ユニットは、温度または昼夜の状況に応じて、送られた画像データの部分がより小さくまたはより大きく選択されるという意味において、画像処理ユニットを制御する。特に、温度が高い場合や昼間には、小さい画像部分が選択され、暗い場合/夜間または温度が低い場合には、適宜、より大きな部分が選択される。
赤外線カメラと同じであり、画像処理ユニットと合わせて、取得している交通状況のタイプ、つまり町の状況、特に交差点やわき道、および/または田舎の道路や高速道路に関して、検出された画像信号を類別または分類する、周囲を検出するためのセンサ、たとえばカメラを設けることが、特に有意義であることが証明されている。次いで、この類別または分類を用いて、画像処理ユニットに送られたデータから、再生されるデータの部分について異なるサイズを選択し、特に田舎の道路やわき道の状況において、この部分を送られた画像データの右側の領域に移動させる。何故なら、特にこれらの交通状況においては、自転車やオートバイに乗っているひと、歩行者などに対して、特別な警戒が向けられるからである。反対に、高速道路の状況では、送られた画像データの中央の領域における部分の位置合わせを選択することが好ましい。部分の選択、したがって拡大した部分の選択をこのように採用することにより、状況に応じて、殆どまたは全く関連性のない複数の情報項目を含まない、必要な情報だけがユーザに提供されることが確実となる。これにより、ユーザの限られた注意が、十分にそして完全に重要な情報に向くことになり、これにより安全な運転挙動を確実にすることができる。
割り当てられた画像処理ユニットを備えたカメラに加えて、ナビゲーション装置によって、類別または分類することが有意義であることが証明されている。
車載型赤外線暗視装置には、ユーザが、1つ以上の選択基準、たとえば画像部分の倍率係数および/またはサイズ、および/または画像部分の位置を入力するための入力ユニットが設けられることが好ましい。これにより、ユーザは、これらの選択基準を制御ユニットを介して画像処理ユニットに送り、ユーザの要件または希望に従って車載型赤外線暗視装置の再生を制御することができる。特に、ユーザが、さまざまな選択基準、たとえば車両速度、温度、時刻、天候状況、または車線に対する選択に依存した測定値を、個々にまたは互いに組み合わせて選択することが可能となる。
さらに、車載型赤外線暗視装置が、ユーザの視線についての検出装置を有することも可能である。前記検出装置を用いて、ユーザは、画像処理ユニットに送られた赤外線画像データ内のこの部分を移動させることができる。この選択は、確認信号によって確立され、確認が更新されるまでそのままにされる。この確認は、たとえば検出装置自体によって検出された場合には、明滅することによって、またはキーもしくは音声入力を作動させることによって、実施できる。この場合、視線を検出するためにもっぱら公知の装置が使用される。このような例は、特許文献および専門誌に記載されている。このため、運転者または同乗者がいる領域を検出するカメラ装置を利用することが好ましく、可視光線領域内のその画像データは、視線を検出するという意味において評価される。たとえば、眼が右の方向に向いているかどうかが検出され、その結果、制御ユニットを用いて、赤外線画像データの選択部分を右に移動させ、左への視線がある場合には、画像作成ユニットに送られた赤外線画像データからの画像部分が左に移動される。したがって、車載型赤外線暗視装置は、ユーザにより目標とする方向が観察された周囲の領域を、適宜、選択し表示する。これにより、非常に情報量が多く有益なユーザ情報の提供が可能となる。
車両内に設けられ、かつ車両内で実施される他の装置、たとえば速度計、明暗センサ、タイマ、と併用されるセンサを特に用いた、本発明による車載型赤外線暗視装置を車両内に組み込むことにより、ユーザが、たとえば、暗闇、霧、薄暗がりなどの困難な状況下においても、非常に安全に車両を取り扱うことができる車両が作られる。このことは、車両の周囲に対する通常の視界に加えて、特にヘッドアップディスプレイの形で視野内のディスプレイ上に示すことにより、第2の視界、つまり近赤外線の周波数域にある不可視光線周囲に関する領域について、赤外線による視界が、特に運転者に提供されることによって達成される。
ヘッドアップディスプレイを形成することに加えて、大きなマトリクスディスプレイの形式のディスプレイが有意義であることも証明されており、このディスプレイは、赤外線画像データを表示することに加えて、たとえば車両速度、動作温度、周囲温度などの、車両に関連するさらなるデータも再生する。したがって、このディスプレイは、さらに、中央の車両の情報インストロメントパネルの機能を引き受け、これにより中央の車両の情報インストロメントパネルの代りとなる。
この場合、対数感度を有するCMOS赤外線カメラを使用することが好ましい。これは、前方に固定されて位置合わせされ、かつ直接隣接する画像処理ユニットを備えて、フロントガラスの上部領域に、好ましくは車両のルーフライナーに、固定して配置される。これらの赤外線(IR)カメラおよび画像処理ユニットは、これらと別の表示ユニットに接続される。表示ユニットは、表示される画像データがユーザの視野の中に入るように、車両内のインストロメントパネルの領域内に配置される。ユーザのための入力ユニットを含む制御ユニットは、車両の操作コンソール内に収容されることが好ましい。車両内に車載型赤外線暗視装置の構成部品をこのように配置することにより、操作が容易で、ユーザの注意をそらすことが殆どない配置ができるようになり、これにより安全性が確保される。

Claims (11)

  1. 自動車の周囲を表す画像データを記録するための赤外線カメラと、
    送られた前記画像データを表示するためのディスプレイと、
    前記赤外線カメラに接続され、該赤外線カメラから送られた前記画像データを処理するのに適した画像処理ユニットと、
    車載型赤外線暗視装置を制御するための制御ユニットと、を有し、
    コヒーレントな画像部分を表す画像データが、送られた前記画像データからの処理中に選択基準により選択され、前記選択された前記画像部分が、前記ディスプレイに表示するために送られる車載型赤外線暗視装置であって、
    車両速度を検出するためのセンサのデータに基づいて、前記選択基準がパラメータ化されることを特徴とする車載型赤外線暗視装置。
  2. 自動車の周囲を表す画像データを記録するための赤外線カメラと、
    送られた前記画像データを表示するためのディスプレイと、
    前記赤外線カメラに接続され、該赤外線カメラから送られた前記画像データを処理するのに適した画像処理ユニットと、
    車載型赤外線暗視装置を制御するための制御ユニットと、を有し、
    コヒーレントな画像部分を表す画像データが、送られた前記画像データからの処理中に選択基準により選択され、前記選択された前記画像部分が、前記ディスプレイに表示するために送られる車載型赤外線暗視装置であって、
    車両周囲を検出するためのセンサのデータに基づいて、前記選択基準がパラメータ化されることを特徴とする車載型赤外線暗視装置。
  3. 車両周囲を検出するための前記センサが、車線を検出するのに適しており、前記制御ユニットが、前記検出された前記車線に応じて前記選択基準をパラメータ化することを特徴とする請求項2に記載の車載型赤外線暗視装置。
  4. 車両周囲を検出するための前記センサが、天候状況を検出するのに適しており、前記制御ユニットが、前記検出された前記天候状況に応じて前記選択基準をパラメータ化することを特徴とする請求項2あるいは3に記載の車載型赤外線暗視装置。
  5. 車両周囲を検出するための前記センサが、時刻または昼夜状況を検出するのに適しており、前記制御ユニットが、前記検出された前記時刻または前記昼夜状況に応じて前記選択基準をパラメータ化することを特徴とする請求項2〜4のいずれか一項に記載の車載型赤外線暗視装置。
  6. 車両周囲を検出するための前記センサが、交通状況、特に町、田舎の道路、高速道路に関して前記検出された周囲を分類するのに適しており、前記制御ユニットが、前記検出され分類された前記交通状況に応じて前記選択基準をパラメータ化することを特徴とする請求項2〜5のいずれか一項に記載の車載型赤外線暗視装置。
  7. 前記制御ユニットは、ユーザが1つ以上の接続基準を入力するための入力ユニットに接続されることを特徴とする請求項1〜6のいずれか一項に記載の車載型赤外線暗視装置。
  8. 前記入力ユニットは、ユーザの視線を検出するためのセンサを有し、
    前記検出された前記視線が、前記選択を確立するために用いられることを特徴とする請求項7に記載の車載型赤外線暗視装置。
  9. 車載型赤外線暗視装置が、近赤外線により周囲を表示するための赤外光源を有することを特徴とする請求項1〜8のいずれか一項に記載の車載型赤外線暗視装置。
  10. 前記画像処理ユニットが、リアルタイムで前記画像データの処理を可能にすることを特徴とする請求項1〜9のいずれか一項に記載の車載型赤外線暗視装置。
  11. 請求項1〜10のいずれか一項に記載の車載型赤外線暗視装置を有する車両。
JP2003563861A 2002-01-28 2003-01-20 車載型赤外線暗視装置 Expired - Lifetime JP4348527B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE10203413A DE10203413C2 (de) 2002-01-28 2002-01-28 Automobiles Infrarot-Nachtsichtgerät
PCT/EP2003/000483 WO2003064213A1 (de) 2002-01-28 2003-01-20 Automobiles infrarot-nachtsichtgerät

Publications (3)

Publication Number Publication Date
JP2005515930A true JP2005515930A (ja) 2005-06-02
JP2005515930A5 JP2005515930A5 (ja) 2009-03-12
JP4348527B2 JP4348527B2 (ja) 2009-10-21

Family

ID=27588124

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003563861A Expired - Lifetime JP4348527B2 (ja) 2002-01-28 2003-01-20 車載型赤外線暗視装置

Country Status (6)

Country Link
US (1) US7312723B2 (ja)
EP (1) EP1470024B1 (ja)
JP (1) JP4348527B2 (ja)
AT (1) ATE298292T1 (ja)
DE (2) DE10203413C2 (ja)
WO (1) WO2003064213A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005266014A (ja) * 2004-03-16 2005-09-29 Tokyo Institute Of Technology 視覚障害者用画像認識装置、その方法及びプログラム

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10312546B3 (de) * 2003-03-21 2004-09-09 Audi Ag Kameravorrichtung für ein Fahrzeug und Verfahren zum Betreiben einer Kameravorrichtung
DE10321228B4 (de) * 2003-04-22 2007-01-11 Valeo Schalter Und Sensoren Gmbh Optisches Erfassungssystem für Fahrzeuge
DE10336329A1 (de) * 2003-08-07 2005-03-10 Bosch Gmbh Robert Verfahren und Vorrichtung zur Verbesserung der Sicht in einem Kraftfahrzeug
DE10346510B4 (de) * 2003-10-02 2007-11-15 Daimlerchrysler Ag Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug
DE10346484B4 (de) * 2003-10-02 2007-10-11 Daimlerchrysler Ag Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug
DE10346483B4 (de) * 2003-10-02 2007-11-22 Daimlerchrysler Ag Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug
DE10346508B4 (de) * 2003-10-02 2007-10-11 Daimlerchrysler Ag Vorrichtung zur Verbesserung der Sichtverhältnisse in einem Kraftfahrzeug
DE10359192A1 (de) * 2003-12-17 2005-07-14 Hella Kgaa Hueck & Co. Nachtsichtsystem für ein Kraftfahrzeug
DE102004024220B4 (de) * 2004-05-15 2012-10-18 Audi Ag Kraftfahrzeug mit einem Bildschirm zur Bildwiedergabe
DE102004026847A1 (de) * 2004-06-02 2005-12-22 Robert Bosch Gmbh Nachtsichtgerät für Kraftfahrzeuge
DE102004048347A1 (de) * 2004-10-01 2006-04-20 Daimlerchrysler Ag Fahrassistenzvorrichtung zur gegenüber dem Sichtfeld des Fahrers eines Kraftfahrzeugs positionsrichtigen Darstellung des weiteren Straßenverlaufs auf einem Fahrzeugdisplay
JP2006217447A (ja) * 2005-02-07 2006-08-17 Yazaki Corp 車両用表示装置
DE102005006287A1 (de) * 2005-02-11 2006-08-17 Bayerische Motoren Werke Ag Verfahren und Vorrichtung zum Überwachen des Umfelds eines Fahrzeugs
DE102005030838A1 (de) * 2005-07-01 2007-01-04 Siemens Ag Nightvisionsystem
DE102005055350A1 (de) * 2005-11-21 2007-05-24 Robert Bosch Gmbh Verfahren zur Steuerung der Gesichtsfeldgröße eines Videosystems und Videosystem für ein Kraftfahrzeug
US7601929B2 (en) * 2005-11-21 2009-10-13 Ford Global Technologies, Llc System for detecting an alignment of vehicle mounted sensors
DE102006010478A1 (de) 2006-03-07 2007-09-13 Robert Bosch Gmbh Verfahren und Anordnung zur Anzeige von Navigationshinweisen
DE102006029847A1 (de) * 2006-06-27 2008-01-03 Siemens Ag Nightvisionsystem
EP1912157A1 (en) * 2006-10-09 2008-04-16 MAGNETI MARELLI SISTEMI ELETTRONICI S.p.A. Digital image processing system for automatically representing surrounding scenes to the driver of a vehicle for driving assistance, and corresponding operating method
DE102006053108A1 (de) * 2006-11-10 2008-02-14 Audi Ag Einrichtung zum Beobachten des Umfeldes eines Fahrzeuges
US20080117031A1 (en) * 2006-11-21 2008-05-22 Kuo Ching Chiang Security system for an automotive vehicle
US7608825B2 (en) * 2006-12-14 2009-10-27 Sumitomo Electric Industries, Ltd. Image pickup device, vision enhancement apparatus, night-vision apparatus, navigation support apparatus, and monitoring apparatus
DE102007027756A1 (de) 2007-06-16 2008-12-18 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Unterstützung eines Fahrers eines Kraftfahrzeugs bei der Durchfahrt des Kraftfahrzeugs durch eine Engstelle und/oder zum Einhalten eines Sicherheitsabstandes zum Vorderfahrzeug
DE102009010121A1 (de) * 2008-06-11 2009-12-17 Volkswagen Ag Verfahren und Vorrichtung zur Darstellung von Assistenzinformation
AT509121A1 (de) 2009-12-14 2011-06-15 Giroszasz Monika Automobil mit ir-kamera
DE102010033786A1 (de) 2010-07-06 2012-01-12 Daimler Ag Verfahren zur Erfassung und Anzeige seitlich neben und seitlich hinter einem Fahrzeug befindlicher Bereiche und Fahrzeug mit mehreren Bilderfassungseinheiten zur Erfassung seitlich neben und seitlich hinter dem Fahrzeug befindlicher Bereiche
DE102012005400A1 (de) * 2012-03-16 2013-09-19 Connaught Electronics Ltd. Kamerasystem für ein Kraftfahrzeug, Kraftfahrzeug und Verfahren zum Betreiben eines Kamerasystems in einem Kraftfahrzeug
DE102014216008A1 (de) 2014-08-13 2016-02-18 Conti Temic Microelectronic Gmbh Steuervorrichtung, Serversystem und Fahrzeug
TWM557685U (zh) * 2017-06-27 2018-04-01 大陸商上海蔚蘭動力科技有限公司 駕駛輔助系統
US10688929B2 (en) 2017-06-27 2020-06-23 Shanghai XPT Technology Limited Driving assistance system and method of enhancing a driver's vision
US10958830B2 (en) 2018-05-24 2021-03-23 Magna Electronics Inc. Vehicle vision system with infrared LED synchronization
JP2022149449A (ja) * 2021-03-25 2022-10-06 本田技研工業株式会社 車両用表示制御装置、車両用表示制御装置の制御方法、およびプログラム

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07304473A (ja) * 1994-05-13 1995-11-21 Toyota Motor Corp 車両周辺画像データ記録装置
JPH10257482A (ja) * 1997-03-13 1998-09-25 Nissan Motor Co Ltd 車両周辺状況表示装置
JPH10302074A (ja) * 1997-04-25 1998-11-13 Chuo Spring Co Ltd ナンバープレートの位置検出装置
JP2000203338A (ja) * 1999-01-13 2000-07-25 Sony Corp 移動体の赤外線暗視装置
JP2001023095A (ja) * 1999-07-12 2001-01-26 Mazda Motor Corp 車両の周囲情報報知装置
JP2001171449A (ja) * 1999-12-14 2001-06-26 Mitsubishi Motors Corp 車線逸脱警報装置

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE3932216C3 (de) * 1989-09-27 2002-09-12 Bosch Gmbh Robert Beleuchtungseinrichtung für Fahrzeuge
DE4042730B4 (de) * 1990-03-10 2007-10-11 Daimlerchrysler Ag Anordnung zur Verbesserung der Sicht in Fahrzeugen
US5404225A (en) * 1992-02-07 1995-04-04 Lockheed Corporation Object detector
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
DE4336288C1 (de) * 1993-10-25 1995-03-30 Daimler Benz Ag Einrichtung zur Überwachung des Rück- bzw. Frontraumes eines einparkenden Kraftfahrzeugs
US5729016A (en) * 1994-04-12 1998-03-17 Hughes Aircraft Company Low cost night vision system for nonmilitary surface vehicles
US5414439A (en) * 1994-06-09 1995-05-09 Delco Electronics Corporation Head up display with night vision enhancement
DE19730414A1 (de) * 1997-07-16 1999-01-21 Opel Adam Ag Verfahren und Vorrichtung zur vorausschauenden Fahrbahnbeurteilung
DE19736774A1 (de) * 1997-08-23 1999-02-25 Bosch Gmbh Robert Verfahren zur Informationsanzeige in einem Kraftfahrzeug
DE19802220A1 (de) * 1998-01-22 1999-07-29 Bosch Gmbh Robert Anzeigevorrichtung
JP3864406B2 (ja) * 1999-01-26 2006-12-27 マツダ株式会社 車両の表示装置
DE19933505B4 (de) * 1999-07-16 2005-07-21 Bayerische Motoren Werke Ag Vorrichtung zum Erkennen und Darstellen von Fahrbahnverlauf und Hindernissen in der Bewegungsbahn von Kraftfahrzeugen
DE19937489B4 (de) * 1999-08-07 2009-07-09 Volkswagen Ag Verfahren zur Überwachung eines Fahrspurwechsels eines Kraftfahrzeuges
GB2353428A (en) 1999-08-20 2001-02-21 Bayerische Motoren Werke Ag Monitoring system for a vehicle
DE19940723A1 (de) * 1999-08-27 2001-03-08 Daimler Chrysler Ag Verfahren zur Anzeige eines perspektivischen Bildes und Anzeigevorrichtung für mindestens einen Insassen eines Fahrzeugs
DE19950033B4 (de) * 1999-10-16 2005-03-03 Bayerische Motoren Werke Ag Kameravorrichtung für Fahrzeuge
JP2001134772A (ja) * 1999-11-04 2001-05-18 Honda Motor Co Ltd 対象物認識装置
WO2001064481A2 (en) * 2000-03-02 2001-09-07 Donnelly Corporation Video mirror systems incorporating an accessory module
US6897892B2 (en) * 2000-10-13 2005-05-24 Alexander L. Kormos System and method for forming images for display in a vehicle
SE520042C2 (sv) 2000-10-26 2003-05-13 Autoliv Dev Anordning för förbättring av mörkersikten hos ett fordon såsom en bil
US6420704B1 (en) * 2000-12-07 2002-07-16 Trw Inc. Method and system for improving camera infrared sensitivity using digital zoom
US20020130953A1 (en) * 2001-03-13 2002-09-19 John Riconda Enhanced display of environmental navigation features to vehicle operator
US7024292B2 (en) * 2003-08-27 2006-04-04 Ford Motor Company Active night vision control system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07304473A (ja) * 1994-05-13 1995-11-21 Toyota Motor Corp 車両周辺画像データ記録装置
JPH10257482A (ja) * 1997-03-13 1998-09-25 Nissan Motor Co Ltd 車両周辺状況表示装置
JPH10302074A (ja) * 1997-04-25 1998-11-13 Chuo Spring Co Ltd ナンバープレートの位置検出装置
JP2000203338A (ja) * 1999-01-13 2000-07-25 Sony Corp 移動体の赤外線暗視装置
JP2001023095A (ja) * 1999-07-12 2001-01-26 Mazda Motor Corp 車両の周囲情報報知装置
JP2001171449A (ja) * 1999-12-14 2001-06-26 Mitsubishi Motors Corp 車線逸脱警報装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005266014A (ja) * 2004-03-16 2005-09-29 Tokyo Institute Of Technology 視覚障害者用画像認識装置、その方法及びプログラム

Also Published As

Publication number Publication date
DE10203413C2 (de) 2003-11-27
ATE298292T1 (de) 2005-07-15
US7312723B2 (en) 2007-12-25
EP1470024B1 (de) 2005-06-22
DE10203413A1 (de) 2003-08-14
US20040257442A1 (en) 2004-12-23
WO2003064213A1 (de) 2003-08-07
JP4348527B2 (ja) 2009-10-21
EP1470024A1 (de) 2004-10-27
DE50300682D1 (de) 2005-07-28

Similar Documents

Publication Publication Date Title
JP4348527B2 (ja) 車載型赤外線暗視装置
US11847836B2 (en) Vehicular control system with road curvature determination
US7924506B2 (en) Head-mounted display system
CN104163133B (zh) 使用后视镜位置的后视摄像机系统
JP2005515930A5 (ja)
US20100265345A1 (en) Vehicle based night-vision arrangement and method for operating the same
JP2007091186A (ja) 車両周囲状況の撮影表示方法および撮影表示システム
JP2006504166A (ja) 自動車用夜間視認システムの作動方法及び装置
JP2006176054A (ja) 車両用表示装置
Abel et al. Integration of night-vision and head-up display in vehicles

Legal Events

Date Code Title Description
RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20050225

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20051128

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20070710

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20070720

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071128

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080222

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080507

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080710

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081022

A524 Written submission of copy of amendment under article 19 pct

Free format text: JAPANESE INTERMEDIATE CODE: A524

Effective date: 20090120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090624

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090707

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120731

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4348527

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120731

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130731

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term