JP2012523053A - 少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法 - Google Patents
少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法 Download PDFInfo
- Publication number
- JP2012523053A JP2012523053A JP2012503981A JP2012503981A JP2012523053A JP 2012523053 A JP2012523053 A JP 2012523053A JP 2012503981 A JP2012503981 A JP 2012503981A JP 2012503981 A JP2012503981 A JP 2012503981A JP 2012523053 A JP2012523053 A JP 2012523053A
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- data
- image
- driver assistance
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/16—Anti-collision systems
- G08G1/164—Centralised systems, e.g. external to vehicles
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
- G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
- G08G1/0125—Traffic data processing
- G08G1/0133—Traffic data processing for classifying traffic situation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
Abstract
本発明は、少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法に関する。車両(12)の周囲の少なくとも一つの画像を捕捉することにより車両(12)の少なくとも一つの画像捕捉ユニット(20)によって発生した画像データを受信する据置き受信ユニット(30a〜30c)が設けられる。据置き処理ユニット(40)は、受信した画像データの少なくとも一部分を処理し、画像データに基づいて少なくとも一つのドライバー支援情報をもつドライバー支援データを発生し、発生したドライバー支援情報によって車両(12)において少なくとも一つのドライバー支援機能を発生できる。送信ユニット(30a〜30c)はドライバー支援データを車両(12)へ送信する。
【選択図】図1
【選択図】図1
Description
本発明は、少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法に関するものである。車両の少なくとも一つの画像捕捉ユニットによって、車両の周囲の少なくとも一つの画像が発生される。画像データに基いて、少なくとも一つのドライバー支援情報のドライバー支援情報が発生され、これにより車両においてドライバー支援機能が提供される。
自動車の場合、快適さ及び運転中の安全性を高めるため非常に多くのカメラに基くドライバー支援システムが知られている。かかるドライバー支援システムは、特に、意図しないレーン逸脱をドライバーに警告する(レーン逸脱警告−LDW)警告システムに関するもの或いは運転中に自分のレーンを保持する際にドライバーを支持するもの(レーン保持支持−LKS)に関する。さらに、長手方向車両制御(ACC)用、車両のヘッドライトから放出した光の光制御用、交通標識認識及び交通標識で特定された交差点交通規制用のドライバー支援システム、見通しの悪いスポットの警告システム、前方衝突警告機能又は制動機能を備えた距離測定システム、制動支援システム並びに追い越し支援システムは公知である。画像を捕捉するために、公知のドライバー支援システムは、通常、車両に搭載した車両カメラを使用している。有利には、これらのカメラは、インナーミラーの領域にけるウインドウの背後に設けられている。その他の位置に設けることも可能である。
公知の車両カメラは、好ましくは、複数の画像を画像シーケンスとして連続して捕捉するビデオカメラとして設計される。かかるカメラによって、道路の少なくとも一部領域における車両の前方の検出領域の画像が捕捉され、これらの画像に相応した画像データが発生される。そしてこれらの画像データは、対象体認識及び対象体仕分け用並びに複数の画像を通しての対象体の追跡用の適当なアルゴリズムによって処理される。関連する対象体として仕分けられさらに処理される対象体は、特に、対向車両や先を走る車両、車線、レーン上の障害物、レーン上の及び/又はレーンに近接した歩行者、交通標識、交通信号システム及び街燈のようなそれぞれのドライバー支援機能に関連した対象体である。
特許文献1 WO2008/019907A1には、ビデオに基くレーン情報装置のレーン情報を支持する又は置きかえるレーン情報を発生することによるドライバー支援用の方法及び装置が記載されて知られている。決められたレーン情報の信頼性のパラメータは確認され、そしてさらに少なくとも一つの別の車両のレーン情報が測定され、この情報は車両同士の通信システムを介して伝送される。
特許文献2 EP1016268B1には、自動車用のライト制御システムが記載され公知である。マイクロプロセッサーによって、少なくとも一つの画像が処理されて、対向車両のヘッドライト及び前を走行している車両のテールライトを検出しそして車両のヘッドライトの制御用の制御信号を決める。
特許文献3 WO2008/068837A1には、交通状況表示方法が記載されており公知であり、かかる方法により、ビデオシーケンスに関連して車両の位置を表示して交通の安全性を高めている。
車両におけるカメラに基くドライバー支援システムの場合には、車両内のスペースが限られているために、画僧データを処理しそしてドライバー支援機能を果たすためには単に比較的に小さな処理方法すなわち相対的に低い計算容量及び相対的に小さな記憶装置しか設けることができない。車両により多くの手段を設けるとコストが高くなる。そうすれば単に高品質のドライバー支援機能を設けることができるだけである。妥協策として、実際に設けられるドライバー支援機能は単に可能なドライバー支援機能に一部にのみ限定される。さらに、画像データを処理し画像情報を分析するのに必要なアルゴリズムは、車両及び車両周囲の特殊な状態に適合させなければならない。車両において既に確立しているシステムの場合、更新のために比較的複雑なソフトウエアの更新を実行する必要がある。
同様に、幾つかのドライバー支援機能を得るために画像データを処理する際に地域又は区域ごとの特徴を考慮するには、車両に地域ごとのデータセットを記憶する必要がある。さらに、これらのデータセットは規則的に更新しなければならない。
本発明の目的は、車両においてドライバー支援機能を行なうのに本の僅かな手段しか必要でない少なくとも一つのドライバー支援機能を行なうデータ処理システム及び方法を提供することにある。
上記目的は、請求項1の特徴とするデータ処理システム及び方法に関する独立請求項による方法によって達成される。本発明の有利な展開は従属請求項に特定されている。
車両から据置き処理ユニットへ画像データを伝送することにより、車両におけるドライバー支援機能を行なう処理経費は大幅に削減てきる。さらに、ドライバー支援機能を行なう際、車両からのさらなる情報及び車両からでない情報は容易に考慮されることができる。さらに、車両においてなされるドライバー支援機能は、容易に拡張及び減縮でき、単に所望の及び/又は単に同意したドライバー支援情報のみを、ドライバー支援データによって据置き処理ユニットから車両へ伝送する。特に、簡単に構成した画像捕捉ユニット、例えば簡単に構成したカメラ及び画像データを据置き受信ユニットへ伝送する簡単に構成した伝送ユニットを車両に組み込むことができる。このため、相対的に僅かなスペースが必要なだけで、カメラ及び伝送ユニット、或いはそれぞれ画像データを伝送する伝送ユニット及びドライバー支援データを受信する受信ユニットは車両における僅かなスペースのみを占め、そしてこれらの構成要素は、相対的に低いコストで非常に多くの車両に組み込むことができる。このようにして、位置依存ドライバー支援機能、特に車両が実際に位置している地域ごとの特徴を容易に考慮することができる。これらの地域ごとの特徴は特に、地域ごとに特有の交通標識及び/又は地域ごとに特有の交通案内システムに関わる。従って、車両の位置は、車両によって決めることができ、そして据置き受信ユニットに伝送され得、或は車両の位置は、据置き受信ユニットの位置を介して測定できる。
本発明の有利な実施形態では、車両に画像捕捉システムが設けられ、車両の周囲の領域を画像シーケンスとして表わす幾つかの画像を捕捉し、そして各捕捉した画像の表示に相応した画像データを発生する。さらに、画像の画像データの少なくとも一部を据置き受信ユニットへ送る車両伝送ユニットが設けられる。画像捕捉システムは、特に、例えばJPEG圧縮方法又はMP4圧縮方法を用いて圧縮した圧縮画像データを発生する。さらに、画像捕捉システムで捕捉した画像の細部の画像データのみを据置き受信ユニットへ伝送し、そして据置き処理ユニットで処理することができる。車両に設けられしかも車両内の又は車両上に配置するためモバイルユニット或いは車両ユニットとも呼ばれる構成要素と違って、据置きユニットは、少なくともそれらの動作中、特殊な地理的配置にある。特に、画像データの処理中及びドライバー支援データの発生中、据置きユニットはそれらのそれぞれの地理的配置にある。
画像捕捉システムは、特に毎秒10〜30個の画像を捕捉でき、それらの画像データを据置き受信ユニットへ伝送する。車両の伝送領域に位置した据置き受信ユニットト車両との間の伝送は好ましくは無線データ伝送、例えば公知のWLAN又はモバイル無線データ伝送リンクを介して行われる。代わりに、レーザー伝送リンクのような光学見通し線無線リンクが使用できる。
さらに、据置き伝送ユニットによって伝送されたドライバー支援データを受ける車両受信ユニットを設けることは有利である。車両から据置き受信ユニットへ伝送したデータと据置き伝送ユニットから車両受信ユニットへ伝送したデータとの両方について、車両のユーザー確認又はそれぞれ処理した画像データを出す車両へのこれらデータの割当てを保証する車両確認が行われる。さらに、有利には、受信したドライバー支援データを処理しそして人間−機械インターフェース(HMI)を介してドライバーに情報を出力する処理ユニットを車両に設けられる。代わりに、又は付加的に、処理ユニットは、受信したドライバー支援データに依存して車両の少なくとも一つの車両システムを制御できる。この車両システムは、特に、ライトシステム、制動システム、ステアリングシステム、駆動システム、安全システム及び/又は警告システムであることができる。その結果、支援システムは、車両の案内において積極的に介在でき、そして必要ならば危険な状態を避けたり危険の要因を軽減することができる。
さらに、据置き処理ユニットが受信した画像データの処理中に画像における対象体の存在を検知して仕分けし、そして仕分けした対象体に関連してドライバー支援データを発生する場合に有利である。対象体の存在を仕分けすることによって、交通状況及び危険要因と共に関連情報における結論を出すことができる。
さらに、据置き処理ユニットは、仕分けした対象体の画像位置及び/又は仕分けした対象体と車両との相対位置及び/又は世界座標系のような車両に依存しない座標系における仕分けした対象体の位置を測定することができる。このようにして、交通状況はさらに特定でき、また特定危険要因を測定できる。
さらに、画像捕捉システムは少なくとも一つのステレオカメラを備えているのが有利である。ステレオカメラの単一カメラの画像は、画像対の画像データとして車両伝送ユニットから据置き受信ユニットへそしてさらに据置き処理ユニットへ伝送され得る。据置き処理ユニットは、各画像対の画像における同じ対象体の存在を測定でき、それらの画像位置を特定でき、そしてこれらの画像位置に基いてステレオカメラ及び従って車両から対象体までの距離を特定できる。その結果、車両から対象体までの距離は相対的に正確に測定できる。
さらに、据置き受信ユニットは、車両からの画像データに加えて、別の情報をもつ付加的なデータを受信できる。この付加的な情報は特に、車両の現在の位置、車両の速度、車両の位置している区域の天候に関する情報、車両の領域における視界の状態の関する情報、車両のヘッドライトの調整した光の分散のような車両の設定及び/又は運転状態に関する情報、及び/又は検知した車線、対象体特に他の車両までの測定した距離のような車両センサーによって測定した情報を含むことができる。このようにして、ドライバー支援データを発生する多くの初期情報が利用でき、それでドライバー支援データに含まれたドライバー支援情報は比較的高い蓋然性で正しく決めることができ、及び/又は比較的低価格で決めることができる。
独立請求項の方法の特徴をもつ方法は、本発明によるデータ処理システムについて特定したものと同じ仕方で提供できる。
本発明の別の特徴及び利点は、添付図面について実施形態を参照して本発明を詳細に説明する以下の記載から得られる。
図1には、本発明の第1の実施形態によるドライバー支援システム10を概略斜視図で示している。道路16のレーン(車線)14に位置した車両12は、車両12の前方の道路16の領域の画像を捕捉するカメラ20を備え、かかるカメラ20は、車両12の内部ミラー18とウインドウシールドとの間において車両12のウインドウシールドの内側に設けられている。カメラ20の外側視線は、実線22、24で概略的に示されている。視線22、24間に入る楕円領域は、それぞれの距離においてカメラ20の検知領域を概略的に表わしている。車両12にはさらに、カメラ20によって得られた画像データを伝送する送信/受信ユニット26が設けられている。画像データは、据置きの送信/受信ユニット30aに伝送される。道路16に沿って、別の据置き送信/受信ユニットが設けられ、据置き送信/受信ユニット30b、30cが図1に例示されている。画像データは好ましくは、車両12の送信/受信ユニット26と据置き送信/受信ユニット30a〜30cのそれぞれとの間で圧縮形態で伝送される。送信/受信ユニット26、30a〜30cは送受信装置とも呼ばれる。
送信/受信ユニット30a〜30cで受信した画像データは、データ処理センター40における据置き処理ユニットに伝送され、そして好ましくは据置き処理ユニットの変換モジュール42において解かれ、種々のモジュール44、46に送られ、ドライバー支援機能を並列に及び/又は連続して発生させる。ここで、モジュール44、46によって、ドライバー支援システムに関連する対象体の出現が画像で検知でき、これらの画像は仕分けされ、そして適用できる場合には、幾つかの連続して得られた画像において追跡される。モジュール44、46によって発生したドライバー支援情報に基いて、車両12にドライバー支援機能を提供するために必要なドライバー支援情報をもつドライバー支援データが出力モジュール48において発生され、そして車両12の伝送範囲に位置した少なくとも一つの据置き送信/受信ユニット30a〜30cに伝送される。そしてドライバー支援データは、送信/受信ユニット30a〜30cから車両12に伝送される。車両12において、制御ユニット(図示していない)はドライバー支援データを処理して実行されることになるドライバー支援機能に関連してドライバー支援情報を、車両の構成要素を制御する制御ユニットへ送り及び/又は相応した情報を表示ユニットに出力し或いはスピーカーを介して車両12のドライバーに出力する。
図2には、本発明の第2の実施形態によるドライバー支援システムをブロック線図で示している。同じ構造又は同じ機能をもつ要素は同じ参照符号で表わしている。本発明の第2の実施形態では、車両12のカメラ20はステレオカメラとして構成され、カメラ20の各単一カメラは、捕捉時に一つの単一画像を発生し、同時に捕捉した画像は、画像対としてさらに処理される。捕捉した画像の画像データはカメラシステム20から変換モジュール52へ伝送され、かかる変換モジュールは画像データを圧縮し、そして付加的な情報をもつ別のデータを加える。画像データは特に、時刻印モジュール54で発生した時刻印を受ける。付加的な情報を備えたデータには、特に、方向指示器の作動、ヘッドライトの調節、後尾及び制動ライトの作動、ブレーキの作動について情報、並びに好ましくは車両母線(バス)を介して供給される別の車両データのような車両データが含まれる。さらに、位置決定モジュール58から変換モジュール52へは位置データが伝送され、位置決定モジュール58は好ましくは、車両12のナビゲーションシステムの一部である。付加的なデータすなわち時刻印、車両データ及び位置データは、画僧データと共に付加的なデータとして車両の送信/受信ユニット26へ伝送され、そして送信/受信ユニット26から通信ネットワーク30への無線データリンクを介して送信/受信ユニット30cへ伝送される。送信/受信ユニット30cから、受信データはデータ処理センター40へ伝送される。本発明の第1の実施形態と違って、データ処理センター40には付加的な記憶要素49が設けられ、この記憶要素においては、画像データが中間的に記憶される。好ましくは、記憶した画像データは、予め設定した時間の経過後、例えば一日経過した後、データを不変的に記憶するよう要求がなされない限り削除される。このことは、事故の画像が車両のカメラ20によって捕捉され、該画像が後の評価のために記憶されることになる場合に特に有効である。
伝送画像データの評価及びドライバー支援情報の発生は、それぞれのドライバー支援データによる発生したドライバー支援情報の車両12の送信/受信ユニット26への伝達と共に、図1に関して説明したものと同様にして行なわれる。受信したドライバー支援データは制御ユニット60へ送られ、制御ユニット60は、車両12の出力ユニットを介して出力するためにドライバー支援情報に相当した車両データを発生し、それらの車両データをモジュール56へ伝送する。加えて或いは代わりに、制御ユニット60は車両モジュール、例えば制動システム62の作動、ステアリングシステム64の作動、シートベルト引張駆動装置66の作動及びヘッドレスト駆動装置68の作動のための制御データを発生できる。
図3には、車両12とデータ処理センター40の据置き処理ユニットとの間でデータを発生し伝送する動作のシーケンスが例示されている。ステップS10において、カメラ20は画像データを発生し、該画像データはステップS12において圧縮される。この処理に並行して、車両データはステップS14において測定され、位置データはステップS16において測定され、時刻印を発生するためのデータはステップS18において測定され、そして車両12における別のデータ源のデータはステップS20において測定される。ステップS12において、画像データは圧縮され、ステップS14〜S20で測定した付加的なデータは変換される。画像データがステップS12において変換されと、カメラ20で発生した画像データの一部が選択されて伝送するために用意される。画像データは、ステップS24において付加的なデータと共に、車両12の送信/受信ユニット26から据置き送信/受信ユニット30cへ伝送され、据置き送信/受信ユニット30cはステップS30において送信データを受信する。受信した画像データ及び好ましくは送信した付加的なデータはステップS32において据置き処理ユニット40によって処理され、画像データはステップS34において解かれ、そしてステップS36において付加的なデータと共に分析される。画像データ又はそれぞれ画像データから決めた情報は、必要ならば送信した付加的な情報と共に、ドライバー支援情報を発生するモジュールに供給される。ステップS38において、これらのモジュールはドライバー支援情報を発生する。これらのモジュールは特に、レーン確認用、交通標識確認用、ライトコントロール用、対象体検知用、対象体確認用及びウインドウシールドにそれぞれ投影することで見難い対象体をドライバーが比較的見やすいようにするいわゆるナイトビジョン用の少なくとも一つのモジュールから成っている。基本的には、あらゆる公知のドライバー支援システム機能用及び将来のドライバー支援機能用のモジュールを提供することができ、ステップS38において車両12におけるそれぞれのドライバー支援機能に必要なそれぞれのドライバー支援情報を発生する。さらに、ドライバー支援情報をもつドライバー支援データが発生され、このドライバー支援データはステップS40において据置き伝送ユニット30cによって車両12の送信/受信ユニット26へ伝送される。
ステップS42において、車両12の送信/受信ユニット26はドライバー支援データを受信し、それらのドライバー支援データを情報モジュール、警告モジュール及び車両12のアクションモジュールに送り、これらのモジュールはステップS44においてドライバー支援データを処理し、そしてステップS46において人間−機械インターフェース(HMI)を介してドライバーへ相応した情報を出力すると共に、付加的に又は代わりに、ステップS48において車両の制動システム或いは車両のステアリングシステム又は車両の安全装置及び/又は車両のライトシステムの作動のような車両構成要素のアクションを開始させる。
本発明による記載したドライバー支援システムに必要な車両構成要素を、ほとんどスペースを必要としない簡単に構成した構成要素として構成することは特に有利であり、必要とされるスペースが相対的に小さいために、新しい車両に容易に組み込むことができると共に既存の車両に後付けすることもできる。また、必要なドライバー支援情報を発生するモジュールの更新はデータ処理センター40において容易に処理でき更新できる。その結果、必要に応じてこれらの機能に容易にアクセスできる。特に交通標識確認及びレーン確認用の領域特定、特に地域特定データも、据置き処理ユニット40に記憶でき、そして車両12の位置に関連したドライバー支援情報を発生するために用いることができる。
車両12から据置き受信ユニット30へ画像データを伝送するために、公知のモバイル無線ネットワーク、モバイル無線分野の無線LANや現在試験中のブロードバンドデータネットワークのような無線ラジオネットワークを使用することができる。代わりに又は付加的に、車両12と据置き受信/送信ユニット30cとの間でデータを伝送するために、光学視線無線リンク、データ処理センター40におけるソフトウエアモジュールの選択又は形態によって行われる。従って、交通標識、レーン及びその他の対象体の存在の評価は対象体認識について行われる。これに基づいて、例えばライト制御及び/又はその他の現在公知のドライバー支援機能における支援がもたらされ得る。しかし、記載したシステムは将来の応用に容易に拡張できる。好ましくは圧縮画像データへの変換である、カメラ20によって検知した画像データの変換は、適切な電子機器好ましくはマイクロプロセッサーによって実行され、これらのデータは送信/受信ユニット26へ伝送され、送信/受信ユニット26は、これらのデータを、適用できれば付加的なデータと共に据置き送信/受信ユニット30a〜30cへ伝送する。データ処理センサー40において、ドライバー支援機能は供給されそして法カテゴリ(モーダリティ)に応じて評価される。それに基づき、ドライバー支援情報が発生され、データの形態で、データ処理センター40から据置き送信/受信ユニット30a〜30cへそして据置き送信/受信ユニット30a〜30cから車両12の送信/受信ユニット26へ伝送される。車両12には、少なくとも一つの画像作成センサー20すなわち少なくとも一つのモノカメラが設けられる。カメラ20によって、好ましくは車両12の前方における道路の領域が捕捉される。発生したドライバー支援データによって発生したドライバー支援機能は、特に、ドライバーに対する一般情報及び/又は警告又はアクション(動作)情報を備えることができる。車両12の外側の画像情報を評価することによって、ドライバー支援機能を設けるために車両12に単に相対的に少ない資源が必要なだけである。同様に、対象体を仕分けするために比較データを記憶するのに車両12には記憶容量は全く必要でないかごく僅かでよい。データ処理センター40における画像データを処理及び評価することによって、地域依存のすなわちそれぞれ区域依存の画像確認を実行できる。さらに、据置き処理ユニット40はドライバー支援情報を発生する際に道路の方向の変更及び道路工事のような道路状態の変化を速やかに考慮し、そしてドライバー支援データを決める際に他の車両によって伝送された情報を考慮することは可能である。図2に関してすでに説明したように、据置き処理ユニット40に伝送した画像は、適切な記憶装置によって少なくとも制限された時間の間に記憶され得る。すでに記載した事故文書に加えて、画像から発生したドライバー支援情報は、記憶した画像によってチェックされ、例えば正しくないドライバー支援情報についてドライバーの適合性をもたらすようにできる。
供給された画像データからドライバー支援情報を発生するためのモジュールの更新及びモジュールの延長はデータ処理センター40において中央で実施できる。データ処理センター40において伝送された画像データから発生したドライバー支援情報及び/又は車両に伝送されたドライバー支援情報は、ドライバー支援機能、ソフトウエアライセンス及び/又は車両12に対して使用可能なソフトウエアモジュールに依存して限定され得る。かかる使用可能は例えば顧客識別及び/又は車両識別に基づくことができる。それぞれのドライバー支援機能はまた例えば一つの地域に空間的に限定され得る。従って、例えば、モジュール交通標識認識、ドイツ国はドライバーや顧客によって予約され得、それでデータ処理センター40は、データ処理センター40に送られてきた画像データに基づいてそれぞれのドライバー支援情報を発生し、そしてそれらの情報を車両12へ伝送する。これらの機能に基づいて、認識した交通標識における光学的及び/又は音響的情報をドライバーに対して出力する。加えて又は代わりに、伝送されたドライバー支援情報はさらに処理されて、例えばスピード違反の場合には警告機能を発生するシステムに送られ、或いは速度を制限するクルーズ制御装置に送られ得る。
車両カメラ20として、モノカメラ及びステレオカメラの両方を用いることができ、カラー画像又はグレースケール(無彩色)画像を捕捉する。これらのカメラは特に画像を捕捉する少なくとも一つのCMOSセンサー又は画像を捕捉するCCDセンサーを有する。
10:ドライバー支援システム
12:車両
14:レーン(車線)
16:道路
18:内部ミラー
20:カメラ
22、24:視線
26:送信/受信ユニット
30a、30b、30c:据置きの送信/受信ユニット
40:データ処理センター
42:据置き処理ユニットの変換モジュール
44、46:モジュール
48:出力モジュール
12:車両
14:レーン(車線)
16:道路
18:内部ミラー
20:カメラ
22、24:視線
26:送信/受信ユニット
30a、30b、30c:据置きの送信/受信ユニット
40:データ処理センター
42:据置き処理ユニットの変換モジュール
44、46:モジュール
48:出力モジュール
本発明は、少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法に関するものである。車両の少なくとも一つの画像捕捉ユニットによって、車両の周囲の少なくとも一つの画像が発生される。画像データに基いて、少なくとも一つのドライバー支援情報をもつドライバー支援データが発生され、これにより車両においてドライバー支援機能が提供される。
Claims (12)
- 少なくとも一つのドライバー支援機能を提供するデータ処理システムであって、
車両(12)の周囲の少なくとも一つの画像を捕捉することにより車両(12)の少なくとも一つの画像捕捉ユニット(20)によって発生した画像データを受信する少なくとも一つの据置き受信ユニット(30a〜30c)と、
受信した画像データの少なくとも一部分を処理し、画像データに基づいて少なくとも一つのドライバー支援情報をもつドライバー支援データを発生し、発生したドライバー支援情報によって車両(12)において少なくとも一つのドライバー支援機能を発生できる、少なくとも一つの据置き処理ユニット(40)と、
ドライバー支援データを車両(12)へ送信する少なくとも一つの送信ユニット(30a〜30c)と
を有して成ることを特徴とするデータ処理システム。 - 車両(12)の画像捕捉ユニット(20)が、車両(12)の周囲の領域を画像シーケンスとして表す幾つかの画像を捕捉し、各捕捉した画像に対する表示に相応した画像データを発生し、
また、車両送信ユニット(26)が画像の画像データの少なくとも一部分を据置き受信ユニット(30a〜30c)へ送信すること
を特徴とする請求項1記載のデータ処理システム。 - 車両受信ユニット(26)が据置き送信ユニット(30a〜30c)によって送信されたドライバー支援データを受信することを特徴とする請求項1又は2記載のデータ処理システム。
- 車両(12)に設けた処理ユニットが受信したドライバー支援データを処理し、そして人間−機械インターフェースを介して情報を出力し、及び/又は車両(12)の少なくとも一つの車両システムを制御することを特徴とする請求項3記載のデータ処理システム。
- 車両システムが、ライトシステム、制動システム、ステアリングシステム、駆動システム及び/又は警告システムを有することを特徴とする請求項4記載のデータ処理システム。
- 据置き処理ユニット(40)が、受信した画像データの処理中に、画像における対象体の表示を検知し仕分けし、そして仕分けした対象体に応じたドライバー支援データを発生することを特徴とする請求項1〜5のいずれか一項記載のデータ処理システム。
- 据置き処理ユニット(40)が、仕分けした対象体の画像位置及び/又は仕分けした対象体の車両(12)までの相対位置及び/又は車両に関係しない座標系における仕分けした対象体(12)の位置を決めることを特徴とする請求項6記載のデータ処理システム。
- 画像捕捉システムが少なくとも一つのステレオカメラ(20)を有し、ステレオカメラのシングルカメラの画像が、画像対の画像データとして車両送信ユニット(26)から据置き受信ユニット(30a〜30c)へ伝送されることを特徴とする請求項1〜7のいずれか一項記載のデータ処理システム。
- 据置き処理ユニット(40)が、各画像対の画像における同一対象体の表示を決め、それら画像の画像位置を決め、そして画像位置に基づいてステレオカメラ(20)までの対象体の距離を決めることを特徴とする請求項8記載のデータ処理システム。
- 据置き受信ユニット(30a〜30c)が、車両(12)からの画像データに加えて、別の情報をもつ付加的なデータを受信することを特徴とする請求項1〜9のいずれか一項記載のデータ処理システム。
- 別の情報が、車両(12)の現在の位置、速度、天候状態の情報、視角状態の情報、車両の(12)のヘッドライトの調整した光の分散のような車両(12)の設定及び又は動作状態の情報、及び/又は検知した車線、対象体特に他の車両までの測定した距離のような車両センサーで検知した情報を含むことを特徴とする請求項11記載のデータ処理システム。
- 少なくとも一つのドライバー支援機能を提供する方法であって、
車両(12)の周囲の少なくとも一つの画像を捕捉することにより車両(12)の少なくとも一つの画像捕捉ユニット(20)によって発生した画像データを、据置き受信ユニット(30a〜30c)で受信し、
受信した画像データの少なくとも一部分を据置き処理ユニット(40)で処理し、画像データに基づいて少なくとも一つのドライバー支援情報をもつドライバー支援データを発生し、
発生したドライバー支援情報によって車両(12)において少なくとも一つのドライバー支援機能を発生でき、
ドライバー支援データを送信ユニット(30a〜30c)を用いて車両(12)へ送信すること
を特徴とする方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102009016580.0 | 2009-04-06 | ||
DE102009016580A DE102009016580A1 (de) | 2009-04-06 | 2009-04-06 | Datenverarbeitungssystem und Verfahren zum Bereitstellen mindestens einer Fahrerassistenzfunktion |
PCT/EP2010/054381 WO2010115831A1 (de) | 2009-04-06 | 2010-03-31 | Datenverarbeitungssystem und verfahren zum bereitstellen mindestens einer fahrerassistenzfunktion |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012523053A true JP2012523053A (ja) | 2012-09-27 |
JP2012523053A5 JP2012523053A5 (ja) | 2013-04-04 |
Family
ID=42344504
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012503981A Pending JP2012523053A (ja) | 2009-04-06 | 2010-03-31 | 少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法 |
Country Status (6)
Country | Link |
---|---|
US (1) | US20120133738A1 (ja) |
EP (1) | EP2417594A1 (ja) |
JP (1) | JP2012523053A (ja) |
CN (1) | CN102378999A (ja) |
DE (1) | DE102009016580A1 (ja) |
WO (1) | WO2010115831A1 (ja) |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9959595B2 (en) | 2010-09-21 | 2018-05-01 | Mobileye Vision Technologies Ltd. | Dense structure from motion |
US9280711B2 (en) | 2010-09-21 | 2016-03-08 | Mobileye Vision Technologies Ltd. | Barrier and guardrail detection using a single camera |
US20130002873A1 (en) * | 2011-06-30 | 2013-01-03 | Magna Electronics Europe Gmbh & Co. Kg | Imaging system for vehicle |
DE102011081614A1 (de) * | 2011-08-26 | 2013-02-28 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Analysierung eines von einem Fahrzeug zu befahrenden Streckenabschnitts |
JP5782928B2 (ja) * | 2011-08-31 | 2015-09-24 | マツダ株式会社 | 車両用通信システムおよびこれに用いる情報提供装置 |
DE102011084275A1 (de) * | 2011-10-11 | 2013-04-11 | Robert Bosch Gmbh | Verfahren zum Betreiben eines Fahrerassistenzsystems und Verfahren zum Bearbeiten von Fahrzeugumfelddaten |
JP5727356B2 (ja) * | 2011-11-30 | 2015-06-03 | 日立オートモティブシステムズ株式会社 | 物体検知装置 |
EP2747056B1 (en) * | 2011-12-27 | 2017-12-06 | Honda Motor Co., Ltd. | Driving assistance system |
US8543254B1 (en) * | 2012-03-28 | 2013-09-24 | Gentex Corporation | Vehicular imaging system and method for determining roadway width |
DE102012107886A1 (de) * | 2012-08-27 | 2014-02-27 | Continental Teves Ag & Co. Ohg | Verfahren zur elektronischen Erkennung von Verkehrszeichen |
JP2014081831A (ja) * | 2012-10-17 | 2014-05-08 | Denso Corp | 画像情報を用いた車両用運転支援システム |
JP6109593B2 (ja) * | 2013-02-12 | 2017-04-05 | 富士フイルム株式会社 | 危険情報処理方法、装置及びシステム、並びにプログラム |
US9097551B2 (en) * | 2013-02-28 | 2015-08-04 | Here Global B.V. | Method and apparatus for processing location-based imaging and trace data |
US20140304635A1 (en) * | 2013-04-03 | 2014-10-09 | Ford Global Technologies, Llc | System architecture for contextual hmi detectors |
JP6251577B2 (ja) * | 2014-01-17 | 2017-12-20 | 矢崎エナジーシステム株式会社 | 車載情報記録装置 |
US9834207B2 (en) * | 2014-04-15 | 2017-12-05 | GM Global Technology Operations LLC | Method and system for detecting, tracking and estimating stationary roadside objects |
DE102014011329A1 (de) * | 2014-07-30 | 2016-02-04 | Audi Ag | Kraftfahrzeug und Verfahren zum Betreiben eines Fahrerassistenzsystem |
US10189405B2 (en) * | 2015-01-14 | 2019-01-29 | Yazaki North America, Inc. | Vehicular multi-purpose warning head-up display |
JP6535194B2 (ja) * | 2015-03-31 | 2019-06-26 | 株式会社デンソー | 車両制御装置、及び車両制御方法 |
DE102016105536A1 (de) * | 2016-03-24 | 2017-09-28 | Valeo Schalter Und Sensoren Gmbh | Verfahren zur Erfassung von wenigstens einem Objekt, Vorrichtung einer Sensoreinrichtung, Sensoreinrichtung und Fahrerassistenzsystem mit wenigstens einer Sensoreinrichtung |
DE102017208462A1 (de) * | 2017-05-18 | 2018-11-22 | Robert Bosch Gmbh | Verfahren und Vorrichtung zum Ermitteln von Betriebsdaten für ein automatisiertes Fahrzeug |
JP6662356B2 (ja) * | 2017-08-03 | 2020-03-11 | トヨタ自動車株式会社 | 車両制御装置 |
DE102017223431B4 (de) * | 2017-12-20 | 2022-12-29 | Audi Ag | Verfahren zum Assistieren eines Fahrers eines Kraftfahrzeugs bei einem Überholvorgang; Kraftfahrzeug; sowie System |
US20190208136A1 (en) * | 2017-12-29 | 2019-07-04 | Waymo Llc | High-speed image readout and processing |
DE102018208150B4 (de) * | 2018-05-24 | 2023-08-24 | Audi Ag | Verfahren und System zum Sicherstellen einer Echtzeitfähigkeit eines Fahrerassistenzsystems |
US11270525B2 (en) * | 2018-11-06 | 2022-03-08 | Alliance For Sustainable Energy, Llc | Automated vehicle occupancy detection |
DE102018219984B3 (de) | 2018-11-22 | 2020-03-26 | Volkswagen Aktiengesellschaft | Verfahren und System zum Unterstützen eines automatisiert fahrenden Fahrzeugs |
CN109614931B (zh) * | 2018-12-11 | 2021-01-01 | 四川睿盈源科技有限责任公司 | 车载路产巡检管控方法和系统 |
US20210191399A1 (en) * | 2019-12-23 | 2021-06-24 | Waymo Llc | Real-Time Adjustment Of Vehicle Sensor Field Of View Volume |
DE102022211145A1 (de) | 2022-10-20 | 2024-04-25 | Robert Bosch Gesellschaft mit beschränkter Haftung | Verfahren und Vorrichtung zum Erfassen einer Verkehrssituation |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005022578A (ja) * | 2003-07-04 | 2005-01-27 | Fuji Heavy Ind Ltd | 車両制動装置および車両制動方法 |
DE102006057741A1 (de) * | 2006-12-07 | 2007-09-06 | Siemens Restraint Systems Gmbh | System und Verfahren zum Bereitstellen von sicherheitsrelevanten Informationen |
US20070282519A1 (en) * | 2006-06-02 | 2007-12-06 | Ossama Emam | System and method for analyzing traffic disturbances reported by vehicles |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5990469A (en) | 1997-04-02 | 1999-11-23 | Gentex Corporation | Control circuit for image array sensors |
JP4118452B2 (ja) * | 1999-06-16 | 2008-07-16 | 本田技研工業株式会社 | 物体認識装置 |
DE10128792B4 (de) * | 2001-05-08 | 2005-06-09 | Daimlerchrysler Ag | Kollisionsschutz für Fahrzeuge |
DE10238936A1 (de) * | 2002-08-24 | 2004-03-04 | Robert Bosch Gmbh | Vorrichtung und Verfahren zur Steuerung wenigstens einer Systemkomponente eines informationstechnischen Systems |
DE10334203A1 (de) * | 2003-07-26 | 2005-03-10 | Volkswagen Ag | Verfahren zum Betrieb eines interaktiven Verkehrsabwicklungssystemes und interaktives Verkehrsabwicklungssystem selbst |
US20070115109A1 (en) * | 2005-09-01 | 2007-05-24 | Digital Recorders, Inc. | Security system and method for mass transit vehicles |
JP4743037B2 (ja) * | 2006-07-28 | 2011-08-10 | 株式会社デンソー | 車両検出装置 |
DE102006038018A1 (de) | 2006-08-14 | 2008-02-21 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Fahrerassistenz durch Erzeugung von Spurinformationen zur Unterstützung oder zum Ersatz von Spurinformationen einer videobasierten Spurinformationseinrichtung |
JP4454681B2 (ja) | 2006-12-05 | 2010-04-21 | 富士通株式会社 | 交通状況表示方法、交通状況表示システム、車載装置及びコンピュータプログラム |
JP5053776B2 (ja) * | 2007-09-14 | 2012-10-17 | 株式会社デンソー | 車両用視界支援システム、車載装置、及び、情報配信装置 |
-
2009
- 2009-04-06 DE DE102009016580A patent/DE102009016580A1/de active Pending
-
2010
- 2010-03-31 WO PCT/EP2010/054381 patent/WO2010115831A1/de active Application Filing
- 2010-03-31 CN CN2010800145640A patent/CN102378999A/zh active Pending
- 2010-03-31 US US13/263,225 patent/US20120133738A1/en not_active Abandoned
- 2010-03-31 EP EP10719923A patent/EP2417594A1/de not_active Withdrawn
- 2010-03-31 JP JP2012503981A patent/JP2012523053A/ja active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005022578A (ja) * | 2003-07-04 | 2005-01-27 | Fuji Heavy Ind Ltd | 車両制動装置および車両制動方法 |
US20070282519A1 (en) * | 2006-06-02 | 2007-12-06 | Ossama Emam | System and method for analyzing traffic disturbances reported by vehicles |
DE102006057741A1 (de) * | 2006-12-07 | 2007-09-06 | Siemens Restraint Systems Gmbh | System und Verfahren zum Bereitstellen von sicherheitsrelevanten Informationen |
Also Published As
Publication number | Publication date |
---|---|
WO2010115831A1 (de) | 2010-10-14 |
US20120133738A1 (en) | 2012-05-31 |
CN102378999A (zh) | 2012-03-14 |
EP2417594A1 (de) | 2012-02-15 |
DE102009016580A1 (de) | 2010-10-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2012523053A (ja) | 少なくとも一つのドライバー支援機能を提供するデータ処理システム及び方法 | |
KR101732983B1 (ko) | 차량용 리어 콤비네이션 램프 및 이를 포함하는 차량 | |
KR101741433B1 (ko) | 운전자 보조 장치 및 그 제어방법 | |
JP6317315B2 (ja) | 標識情報表示装置及び方法 | |
JP5172314B2 (ja) | ステレオカメラ装置 | |
CN107578644B (zh) | 用于运行包括信号源的交通基础设施单元的方法和设备 | |
US20200189459A1 (en) | Method and system for assessing errant threat detection | |
CN110786004B (zh) | 显示控制装置、显示控制方法及存储介质 | |
JP2020516100A (ja) | アラウンドビュー提供装置 | |
CN110574357B (zh) | 成像控制设备、用于控制成像控制设备的方法以及移动体 | |
US11731637B2 (en) | Driver assistance system | |
CN110023141B (zh) | 用于在车辆转弯时调整虚拟相机的朝向的方法和系统 | |
US11176826B2 (en) | Information providing system, server, onboard device, storage medium, and information providing method | |
JP7006235B2 (ja) | 表示制御装置、表示制御方法および車両 | |
KR20170142939A (ko) | 차량을 위한 미러 대체 시스템 | |
US20170178591A1 (en) | Sign display apparatus and method for vehicle | |
JP4848644B2 (ja) | 障害物認識システム | |
CN111587572A (zh) | 图像处理装置、图像处理方法和程序 | |
US10040395B2 (en) | Vehicular display control apparatus | |
CN114365208B (zh) | 驾驶辅助装置、驾驶辅助方法以及存储介质 | |
KR101822896B1 (ko) | 운전자 보조 장치 및 그 제어방법 | |
US20190161007A1 (en) | Unilluminated vehicle indication based on communication | |
WO2017061183A1 (ja) | ヒューマンインターフェース | |
KR101985496B1 (ko) | 차량 운전 보조장치 및 이를 포함하는 차량 | |
KR20170119224A (ko) | 차량용 디스플레이 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130215 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20130215 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20140507 |