JP2018537915A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2018537915A5 JP2018537915A5 JP2018527907A JP2018527907A JP2018537915A5 JP 2018537915 A5 JP2018537915 A5 JP 2018537915A5 JP 2018527907 A JP2018527907 A JP 2018527907A JP 2018527907 A JP2018527907 A JP 2018527907A JP 2018537915 A5 JP2018537915 A5 JP 2018537915A5
- Authority
- JP
- Japan
- Prior art keywords
- vehicle
- image data
- control device
- cameras
- signal processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Description
本発明は、ドライバー・アシスタント機能を実施するために、複数の車載カメラの画像データが、特に、第一及び第二カメラの画像データが処理される、車両のドライバー・アシスタント・システム用の制御装置、並びに、作動方法に関する。
車両用のドライバー・アシスタント・システムは、従来の技術より、原則的には、既知である。特に、一つの又は複数の車両に配置された車載カメラによって、車両周辺部の画像データを捕捉し、該捕捉された画像データを、制御装置を用いて処理し、画像処理に依存して、様々なドライバー・アシスタント機能を実現しているシステムが既知である。
例えば、フロントカメラ、即ち、好ましくは、車内の車両ガラスの内側に配置され、車両前方の車両周辺部の方向に向けられている車載カメラを用いて、前方の車両周辺部から画像データを捕捉し、該画像データを処理し、例えば、走行レーン・アシスタント、交通標識認識、ライト制御、オブジェクト・障害物認識と言ったドライバー・アシスタント機能を実現している。
また、バック走行用カメラ、即ち、例えば、車両後方に配置された車載カメラを用いて、車両の後方の領域の画像データを捕捉し、該画像データを処理し、例えば、後方の車両周辺部や、ハンドル操舵角に依存した車両軌道、障害物までの距離を表示するなどのドライバーをサポートするためのドライバー・アシスタント機能を実現している。
ドライバー・アシスタント機能に必要な画像処理とプログラムコードを実現、乃至、実施するためには、既知の如く、所謂「シグナルプロセッサ」、特に、所謂「デジタルシグナルプロセッサ(DSP)」が、採用される。車載カメラによって捕捉された画像データは、その際、例えば−該シグナルプロセッサやその他のコンポーネントと共に−制御装置内に配置されているメモリに保存されている適宜なプログラムコードを用いて、デジタルシグナルプロセッサによって、処理され、その結果に応じて、ドライバー・アシスタント・システムは−例えば、これも制御装置内に配置されていることができるマイクロコントローラの助けを借りて−車両の様々なコンポーネントを電子的に作動させることができる。
複数の車載カメラの様々なドライバー・アシスタント機能の実現のために中央制御装置が一つだけ使用されている場合、従来は、それに応じて、中央制御装置に、複数のシグナルプロセッサが配置されてきた。その際、各々のシグナルプロセッサは、複数の車載カメラのうちの一台のビデオシグナルを処理する役割を担っている。
本発明の本質的な課題は、複数の車載カメラの画像データが、様々なドライバー・アシスタント機能を実現するために処理される制御装置、乃至、ドライバー・アシスタント・システムのコストと寸法を節約することにある。
本発明の基本的なアイデアは、ドライバー・アシスタント・システムの一つの制御装置(ECU)において、シグナルプロセッサ(DSP)が、特に好ましくは、対応するプログラムコード乃至制御アルゴリズムによって、複数の車載カメラの画像データを処理する役割を担い、特に好ましくは、複数の車載カメラのうちの一台の画像データのみを選択的に処理すればよいと言うアイデアである。
車両のドライバー・アシスタント・システム用の本発明に係る制御装置(ECU)は、一つのシグナルプロセッサ、特に好ましくは、複数の車載カメラ、特に、第一及び第二車載カメラ(K1,K2)の画像データを処理するシグナルプロセッサ(DSP)を一つだけ有しているが、ここでは、該シグナルプロセッサは、車両のその時点における運転状態に応じて複数ある車載カメラのうち一つの、特に、第一車載カメラ(K1)のみの、乃至、第二車載カメラ(K2)のみの画像データを選択的に処理する様に構成されている。
本発明は、複数の車載カメラの画像データが、特に好ましくは、第一及び第二車載カメラ(K1,K2)の画像データが、ドライバー・アシスタント・システムの一つの制御装置(ECU)によって処理される車両のドライバー・アシスタント・システムを作動させる方法にも関するが、ここでは、該制御装置(ECU)のシグナルプロセッサによって、車両のその時点における運転状態に依存して、それぞれ、複数ある車載カメラ(K1,K2)のうち一つの画像データのみが処理される。
本発明のある好ましい実施形態によれば、複数のうちの第一車載カメラは、フロントカメラ(K1)であり、複数のうちの第二車載カメラは、バック走行用カメラ(K2)である。ここで言う、本発明においてそれに依存してシグナルプロセッサが、フロントカメラ乃至バック走行用カメラの何れか一方の画像データのみを処理する基準となる「車両の運転状態」とは、車両が前進しているのか、或いは、後進しているのかと言う情報である。この情報を、該シグナルプロセッサは、例えば、車両のバス(BUS)による接続を介して、例えば、その時点において、どのギヤが入っているのかに依存して受け取ることができる。この例において、該シグナルプロセッサが、車両が前進していると言う情報を得たとすると、該シグナルプロセッサは、好ましくは、フロントカメラ(K1)の画像データのみ、並びに、特に好ましくは、フロントカメラ(K1)に割り当てられているドライバー・アシスタント機能を実施するためのプログラムコードのみを処理する。反対、即ち、該シグナルプロセッサ(DSP)が、車両が後進していると言う情報を得たとすると、該シグナルプロセッサは、好ましくは、バック走行用カメラ(K2)の画像データのみ、並びに、特に好ましくは、バック走行用カメラ(K2)に割り当てられているドライバー・アシスタント機能を実施するためのプログラムコードのみを処理する。
本発明のある好ましい更なる実施形態によれば、複数の車載カメラのうちの一台の車載カメラは、複数の個別の車載カメラを包含する車両のカメラシステムである。この様なカメラシステムの一例としては、所謂「サラウンドビュー・カメラシステム」を挙げることができる。サラウンドビュー・カメラシステムは、従来の技術より、原則的には、既知である。この様なシステムでは、複数の−通常少なくとも四台の−車両に配置されたカメラによって、車両周辺部の異なる領域から画像データを捕捉し、全容画像、特に好ましくは、所謂「サラウンドビュー」−乃至、車両周辺部の上視図(トップヴュー、鳥瞰図)に統合される。この全容画像は、ドライバーのために、例えば、駐車マヌーバの際に、サポート的に、ディスプレー上に表示されることができる。この実施形態では、該シグナルプロセッサは、車両のその時点の運転状態に応じて、例えば、後進中や低速前進走行中(例えば、40、50乃至60km/h)は、画像データのみ、特に好ましくは、例えば、サラウンドビュー・カメラシステムなど、あるカメラシステムに帰属されているドライバー・アシスタント機能を実施するためのプログラムコードのみを処理し、他のケースでは、他の車載カメラ、乃至、他のカメラシステムの画像データとプログラムコードのみを処理する。
本発明は、本発明に係る制御装置(ECU)を包含する、及び/或いは、本発明に係る方法によって作動されるドライバー・アシスタント・システムにも関する。
以下、本発明を、図面1に示されている実施例に基づいて詳しく説明する。
図1の実施例によれば、本発明に係る制御装置(ECU)は、一つのシグナルプロセッサ(DSP)を包含している。このシグナルプロセッサ(DSP)は、好ましくは、アナログ画像データにおいて、例えば、アナログ・デジタル変換に関して用いられるデジタル・シグナルプロセッサ(DSP)である。該制御装置(ECU)は、更なるコンポーネント、特に好ましくは、その中に各々のドライバー・アシスタント機能用のシグナルプロセッサ(DSP)が実施するプログラムコードが保存されている保存手段、並びに、マイクロコントローラ、及び、ドライバー・アシスタント機能を実施するために必要なコンポーネントも包含している。
図1の実施例によれば、該シグナルプロセッサ(DSP)は、二台のカメラ(K1,.K2)の画像データを受信する。ここで、該制御装置(ECU)は、好ましくは、カメラ(K1,K2)のビデオシグナル用に少なくとも二つの入力部、例えば、LVDSビデオ入力端子を有して構成されている。特に、カメラ(K1,K2)が、複数のシングルカメラを包含するカメラシステムである場合、制御装置(ECU)は、対応する数のビデオ入力部を有して構成されることができるが、あるカメラシステムに帰属された運転状態になった場合は、該カメラシステムに帰属するカメラの画像データのみが処理される。
本実施例においては、シグナルプロセッサ(DSP)は、その時点の車両の運転状態に関する情報も、車両のバス(BUS)、例えば、車両のCANバス、LINKバス、及び/或いは、フレックスレイ・バスを介して受信する。
Claims (9)
- 複数の車載カメラの画像データを処理する役割を担うシグナルプロセッサ(DSP)を包含する車両のドライバー・アシスタント・システム用の制御装置であって、
該シグナルプロセッサ(DSP)が、車両のその時点の運転状態に依存して、複数の車載カメラのうちの一台の車載カメラのみの画像データを処理するように構成されていることを特徴とする車両のドライバー・アシスタント・システム用の制御装置(ECU)。 - 第一及び第二車載カメラ(K1,K2)の画像データを処理する役割を担うシグナルプロセッサ(DSP)を包含する車両のドライバー・アシスタント・システム用の制御装置であって、
該シグナルプロセッサ(DSP)が、車両のその時点の運転状態に依存して、第一車載カメラ(K1)のみの画像データ、又は第二車載カメラ(K2)のみの画像データを処理するように構成されていることを特徴とする車両のドライバー・アシスタント・システム用の制御装置(ECU)。 - 該複数の車載カメラのうちの一台の車載カメラが、一つのカメラシステムであることを特徴とする請求項1又は2に記載の制御装置。
- 該複数の車載カメラのうちの一台の車載カメラが、一つのサラウンドビュー・カメラシステムであることを特徴とする請求項1又は2に記載の制御装置。
- 複数の車載カメラの画像データが、ドライバー・アシスタント・システムの一つの制御装置(ECU)によって処理される車両のドライバー・アシスタント・システムを作動させる方法であって、
制御装置のシグナルプロセッサ(DSP)によって、車両のその時点の運転状態に依存して、複数の車載カメラのうちの一台の車載カメラのみの画像データが処理されることを特徴とする車両のドライバー・アシスタント・システムを作動させる方法。 - 第一及び第二車載カメラ(K1,K2)の画像データが、ドライバー・アシスタント・システムの一つの制御装置(ECU)によって処理される車両のドライバー・アシスタント・システムを作動させる方法であって、
制御装置のシグナルプロセッサ(DSP)によって、車両のその時点の運転状態に依存して、第一車載カメラ(K1)のみの画像データ又は第二車載カメラ(K2)のみの画像データが処理されることを特徴とする車両のドライバー・アシスタント・システムを作動させる方法。 - 該複数の車載カメラのうちの一台の車載カメラが、一つのカメラシステムであることを特徴とする請求項5又は6に記載の方法。
- 該複数の車載カメラのうちの一台の車載カメラが、一つのサラウンドビュー・カメラシステムであることを特徴とする請求項5又は6に記載の方法。
- 請求項1〜4のいずれか1項に記載の制御装置(ECU)を包含している、及び/又は、請求項5〜8のいずれか1項に記載の方法によって作動されることを特徴とするドライバー・アシスタント・システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102015015437.0 | 2015-12-02 | ||
DE102015015437.0A DE102015015437A1 (de) | 2015-12-02 | 2015-12-02 | Steuergerät und Verfahren für ein Fahrerassistenzsystem eines Fahrzeugs |
PCT/DE2016/200545 WO2017092750A1 (de) | 2015-12-02 | 2016-11-25 | Steuergerät und verfahren für ein fahrerassistenzsystem eines fahrzeugs |
Publications (4)
Publication Number | Publication Date |
---|---|
JP2018537915A JP2018537915A (ja) | 2018-12-20 |
JP2018537915A5 true JP2018537915A5 (ja) | 2020-11-12 |
JPWO2017092750A5 JPWO2017092750A5 (ja) | 2022-11-24 |
JP7303630B2 JP7303630B2 (ja) | 2023-07-05 |
Family
ID=57609642
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018527907A Active JP7303630B2 (ja) | 2015-12-02 | 2016-11-25 | 車両のドライバー・アシスタント・システム用の制御装置と方法 |
Country Status (8)
Country | Link |
---|---|
US (1) | US10745026B2 (ja) |
EP (1) | EP3383703B1 (ja) |
JP (1) | JP7303630B2 (ja) |
KR (1) | KR102609040B1 (ja) |
CN (1) | CN108290522B (ja) |
DE (2) | DE102015015437A1 (ja) |
ES (1) | ES2762922T3 (ja) |
WO (1) | WO2017092750A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113315961B (zh) * | 2021-05-26 | 2023-04-25 | 合众新能源汽车股份有限公司 | 用于透明a柱图像块映射的方法及装置 |
Family Cites Families (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE19825817C1 (de) * | 1998-06-09 | 1999-09-30 | Siemens Ag | Kraftfahrzeugsteuersystem |
DE10118903A1 (de) | 2001-04-18 | 2002-11-14 | Bosch Gmbh Robert | Mehrzweck-Fahrerassistenzsystem für ein Kraftfahrzeug |
JP3607994B2 (ja) | 2001-11-12 | 2005-01-05 | トヨタ自動車株式会社 | 車両用周辺監視装置 |
JP4059078B2 (ja) | 2002-12-26 | 2008-03-12 | 松下電器産業株式会社 | ナビゲーション装置 |
JP4171309B2 (ja) | 2003-01-10 | 2008-10-22 | 株式会社オートネットワーク技術研究所 | 車載カメラシステム |
DE10345013A1 (de) * | 2003-09-22 | 2005-04-14 | Volkswagen Ag | Verfahren und Vorrichtung zur Realisierung von Fahrerassistenz-Funktionen |
DE102004023128B4 (de) * | 2004-05-03 | 2018-07-12 | Volkswagen Ag | Vorrichtung und Verfahren zur Kontrolle von Diensten in einem Fahrzeug |
JP2006005451A (ja) | 2004-06-15 | 2006-01-05 | Mitsubishi Electric Corp | 車載監視装置 |
US7720580B2 (en) * | 2004-12-23 | 2010-05-18 | Donnelly Corporation | Object detection system for vehicle |
JP2007022176A (ja) * | 2005-07-13 | 2007-02-01 | Auto Network Gijutsu Kenkyusho:Kk | 車両周辺視認装置 |
DE102005055809A1 (de) * | 2005-11-15 | 2007-05-16 | Valeo Schalter & Sensoren Gmbh | Hybridsystem zur Fahrerassistenz für ein Kraftfahrzeug und Mastersteuerung hierfür |
JP4903426B2 (ja) | 2005-11-30 | 2012-03-28 | アイシン・エィ・ダブリュ株式会社 | 画像認識装置及び方法、並びに自車位置認識装置及び方法 |
US8004394B2 (en) * | 2006-11-07 | 2011-08-23 | Rosco Inc. | Camera system for large vehicles |
DE102007002197A1 (de) * | 2007-01-16 | 2008-07-17 | Siemens Ag | Gemeinsamer Kontroller für verschiedene Fahrerassistenzsysteme |
JP2009086788A (ja) | 2007-09-28 | 2009-04-23 | Hitachi Ltd | 車両周辺監視装置 |
WO2009119110A1 (ja) * | 2008-03-27 | 2009-10-01 | パナソニック株式会社 | 死角表示装置 |
KR101200070B1 (ko) * | 2008-11-28 | 2012-11-12 | 한국전자통신연구원 | 네트워크 시간표시정보를 삽입하거나 추출하기 위한 장치 및 방법 |
JP5182042B2 (ja) * | 2008-11-28 | 2013-04-10 | 富士通株式会社 | 画像処理装置、画像処理方法及びコンピュータプログラム |
US20100289631A1 (en) * | 2009-05-12 | 2010-11-18 | Ford Global Technologies, Llc | Dual-mode vehicle rear vision system |
DE102009041588A1 (de) * | 2009-09-15 | 2011-03-17 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Bereitstellen einer Vielzahl von Anwendungen durch einen digitalen Signalprozessor einer Fahrerassistenzeinrichtung in einem Fahrzeug, Fahrerassistenzeinrichtung und Fahrzeug mit einer Fahrerassistenzeinrichtung |
DE102010051205A1 (de) | 2010-11-12 | 2012-05-16 | Valeo Schalter Und Sensoren Gmbh | Verfahren zum Anzeigen von Bildern auf einer Anzeigeeinrichtung, Kamerasystem und Kraftfahrzeug mit einem Kamerasystem |
JP5938222B2 (ja) | 2012-02-07 | 2016-06-22 | 日立建機株式会社 | 運搬車両の周囲監視装置 |
JP6073075B2 (ja) | 2012-05-17 | 2017-02-01 | クラリオン株式会社 | 車載カメラシステム及びこれに用いる映像受信装置 |
CN202728085U (zh) * | 2012-07-03 | 2013-02-13 | 东风杭州汽车有限公司 | 安装有360度全息影像安全辅助系统的机动车 |
DE102014208663A1 (de) * | 2014-05-08 | 2015-11-12 | Conti Temic Microelectronic Gmbh | Vorrichtung und verfahren zur bereitstellung von informationsdaten zu einem in einem videobildstrom enthaltenen objekt einer fahrzeugumgebung |
DE102014116285B4 (de) | 2014-11-07 | 2021-11-11 | Connaught Electronics Ltd. | Verfahren zum Betreiben eines Kamerasystems, Kamerasystem und Kraftfahrzeug |
-
2015
- 2015-12-02 DE DE102015015437.0A patent/DE102015015437A1/de not_active Withdrawn
-
2016
- 2016-11-25 DE DE112016004780.0T patent/DE112016004780A5/de not_active Withdrawn
- 2016-11-25 EP EP16816577.7A patent/EP3383703B1/de active Active
- 2016-11-25 WO PCT/DE2016/200545 patent/WO2017092750A1/de active Application Filing
- 2016-11-25 CN CN201680070243.XA patent/CN108290522B/zh active Active
- 2016-11-25 JP JP2018527907A patent/JP7303630B2/ja active Active
- 2016-11-25 KR KR1020187015539A patent/KR102609040B1/ko active IP Right Grant
- 2016-11-25 ES ES16816577T patent/ES2762922T3/es active Active
- 2016-11-25 US US15/780,345 patent/US10745026B2/en active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9902323B2 (en) | Periphery surveillance apparatus and program | |
US10558221B2 (en) | Method for assisting in a parking operation for a motor vehicle, driver assistance system and a motor vehicle | |
JP6828501B2 (ja) | 駐車支援装置 | |
JP6510642B2 (ja) | 自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両 | |
EP3439920B1 (en) | Determining mounting positions and/or orientations of multiple cameras of a camera system of a vehicle | |
JP5182137B2 (ja) | 車両周辺表示装置 | |
JP2009298178A5 (ja) | ||
US11017245B2 (en) | Parking assist apparatus | |
WO2018150642A1 (ja) | 周辺監視装置 | |
CN109591703B (zh) | 一种汽车电子后视镜系统及其显示方法 | |
JP4665721B2 (ja) | 駐車支援システム | |
JP2017175182A (ja) | 情報処理装置 | |
JP5169912B2 (ja) | 駐車支援装置 | |
JP5083254B2 (ja) | 駐車結果表示システム | |
JP2010012838A (ja) | 駐車支援装置、及び駐車支援方法 | |
WO2019073909A1 (ja) | 牽引支援装置 | |
JP2018537915A5 (ja) | ||
JP2004252837A (ja) | 車両周辺表示装置および車両周辺表示プログラム | |
JP7303630B2 (ja) | 車両のドライバー・アシスタント・システム用の制御装置と方法 | |
WO2023054238A1 (ja) | 駐車支援装置 | |
JP7244562B2 (ja) | 移動体の制御装置及び制御方法並びに車両 | |
JP2009213063A (ja) | 監視装置 | |
JP2008030704A (ja) | 駐車支援装置 | |
JP2018171965A (ja) | 車両用画像表示装置及び画像処理方法 | |
JPWO2017092750A5 (ja) |