JP2017536621A - 自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両 - Google Patents

自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両 Download PDF

Info

Publication number
JP2017536621A
JP2017536621A JP2017523987A JP2017523987A JP2017536621A JP 2017536621 A JP2017536621 A JP 2017536621A JP 2017523987 A JP2017523987 A JP 2017523987A JP 2017523987 A JP2017523987 A JP 2017523987A JP 2017536621 A JP2017536621 A JP 2017536621A
Authority
JP
Japan
Prior art keywords
motor vehicle
road marking
road
assistance system
driver assistance
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017523987A
Other languages
English (en)
Other versions
JP6510642B2 (ja
Inventor
キアラン、ヒューズ
エンダ、ピーター、ワード
ブライアン、マイケル、トーマス、ダーガン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Connaught Electronics Ltd
Original Assignee
Connaught Electronics Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Connaught Electronics Ltd filed Critical Connaught Electronics Ltd
Publication of JP2017536621A publication Critical patent/JP2017536621A/ja
Application granted granted Critical
Publication of JP6510642B2 publication Critical patent/JP6510642B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/21Optical features of instruments using cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/12Mirror assemblies combined with other articles, e.g. clocks
    • B60R2001/1253Mirror assemblies combined with other articles, e.g. clocks with cameras, video cameras or video screens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Steering Control In Accordance With Driving Conditions (AREA)

Abstract

本発明は、自動車両(1)のドライバー支援システム(2)を作動させるための方法であって、自動車両(1)のほぼ隣及び/又は背後に位置される自動車両(1)の環境領域(11,12,14)の後方画像がドライバー支援システム(2)の少なくとも1つのカメラ(3,4)によって捉えられ、カメラが車両に設けられ、捉えられた後方画像に基づいて道路(17)の少なくとも1つの路面標示(19)が環境領域(11,12,14)内で認識される、方法に関する。

Description

本発明は、自動車両のドライバー支援システムを作動させるための方法であって、自動車両のほぼ隣及び/又は背後に位置される自動車両の環境領域の後方画像がドライバー支援システムの電子バックミラーの少なくとも1つのカメラによって捉えられ、後方画像が自動車両内の表示装置で表示される、方法に関する。また、本発明は、自動車両用のドライバー支援システム、及び、ドライバー支援システムを有する自動車両に関する。
自動車両のドライバー支援システムを作動させるための方法であって、自動車両のほぼ隣及び/又は背後に位置される自動車両の環境領域の後方画像がドライバー支援システムの電子バックミラーの少なくとも1つのカメラによって捉えられる、方法は、従来技術から知られている。したがって、電子バックミラーにおいて、後方画像は、例えば自動車両の従来のミラーの位置に配置されるカメラによって与えられて、表示装置、例えば1つ以上のディスプレイで出力される。ところで、光反射ミラーを有する従来のウイングミラーとは対照的に、自動車両の隣又は側方及び/又は背後の環境領域の画像は、自動車両内の表示装置でドライバーに対して表示される。通常、このとき、従来のミラーは省かれる。電子バックミラーは電子ミラー(eMirror)とも称される。電子バックミラーの更なる実施形態として、従来のウイングミラー又は従来の外部ミラーによって捉えられる環境を表示装置で表示する電子ウイングミラー又は電子外部ミラーが知られている。加えて、他の実施形態として、従来のバックミラーによって検出される環境を表示装置で表示する電子バックミラーが知られている。
本発明の目的は、電子ウイングミラーを特に効果的に使用できる方法、ドライバー支援システム、及び、自動車両を提供することである。
本発明によれば、この目的は、それぞれの独立特許請求項に係る特徴を有する方法によって、ドライバー支援システムによって、及び、自動車両によって解決される。
自動車両のドライバー支援システムを作動させるための本発明に係る方法では、自動車両のほぼ隣及び/又は背後に位置される自動車両の環境領域の後方画像がドライバー支援システムの電子バックミラーの少なくとも1つのカメラによって捉えられ、また、後方画像が自動車両内の表示装置で表示される。本発明によれば、捉えられた後方画像に基づいて道路上の少なくとも1つの路面標示が環境領域内で認識されることが提供される。
本発明に係る方法により、後方画像中で路面標示を認識することが可能になる。路面標示は、縦方向の標示であることが好ましい。特に、路面標示は道路の車線を境界付ける。路面標示は、同様に道路標示又は地面標示も、道路交通の交通エリアの表面上の色識別表示である。路面標示は、道路設備と関連付けられ、したがって道路とも関連付けられるとともに、交通案内に役立ち、様々な交通エリアの識別表示に役立ち、交通標識としての機能を果たす。したがって、特に、自動車両の側方の車線の画定は、路面標示よって行われる。路面標示は、道路境界線又は縁線及び/又は車線境界線又は実線又は安全線及び/又は車線分離帯を表すことができる。したがって、自動車両は、少なくとも1つの路面標示の付加的な認識によって更に確実に及び/又は更に正確に移動され得る。
好ましくは、後方画像は、反射ミラー無しに、したがって反射ミラーを用いることなく捉えられる。電子バックミラーは、従来のバックミラーの光反射ミラーに取って代わり、自動車両の側方のウイングミラー又は自動車両のヘッドライナーにあるバックミラーとなる。電子バックミラーは、前述した態様でカメラを用いてドライバーの背後に位置される自動車両の領域を捉え又は撮影するとともに、表示装置、例えばスクリーンを用いてカメラ画像をドライバーの視野内で与える。したがって、自動車両は、ドライバーに向けて光を反射する特定のサイドミラー又はバックミラーを有さない。特に、後方画像は電子的にのみ捉えられる。好ましくは、後方画像が電子ウイングミラーの少なくとも1つの側方カメラとして構成されるカメラによって捉えられ、また、後方画像が自動車両内の表示装置に表示されることが提供される。有利なのは側方カメラの使用である。これは、側方カメラが電子ウイングミラーに起因して既に存在するからである。
特に、少なくとも1つの認識された路面標示に基づいて自動車両の縦軸から少なくとも1つの路面標示までの側方距離が決定されることが提供される。側方距離によって、自動車両が道路の車線内にあるかどうかを決定することができる。更に、自動車両が車線内のいずれの位置に位置付けられているのかを決定できる。したがって、側方距離に基づいて、自動車両が車線から抜け出てしまったかどうか及び/又は自動車両がまさに車線を抜け出そうとしているかどうかを決定できる。そのため、自動車両の安全性を高めることができるのが有益である。
好ましくは、少なくとも1つの認識された路面標示に基づいて、自動車両が少なくとも1つの認識された路面標示に近づく側方速度が決定されることが提供される。したがって、側方速度は、自動車両がいずれの横断速度で少なくとも1つの認識された路面標示に近づくのかを表す。側方速度によって、自動車両が少なくとも1つの認識された路面標示に到達する又は該路面標示を横切るまでいずれの時間が残されているのかを決定できる。したがって、これにより、自動車両を車線内で特に安全に移動させることができる。
更に、決定された側方速度に応じて、自動車両により路面標示を横切るまでに残された時間が決定されることが提供される。この時間に基づき、例えば対応する操向動作により自動車両の走行方向を変えて路面標示を横切ること又は車線から抜け出ることを防止できるようにするために自動車両のドライバーに対していずれの時間が残されているのかを決定できる。したがって、この場合も先と同様に、車線にとどまることを特に確実に監視できるため、自動車両の移動における特に高い安全性が有利である。
好ましくは、少なくとも1つの認識された路面標示に基づいて道路の車線の数が決定されることが提供される。このようにすると、道路上の自動車両の位置をより正確に決定することができる。車線又は交通車線は、自動車両が一方向に走行するために利用できる領域を特定する。車線の幅は、例えば2.75メートルと3.75メートルとの間で異なる。車線は、大部分は、道路標示又は道路境界線又は車線境界線又は車線分離帯などの路面標示によって特定される。したがって、自動車両の安全な移動に寄与する道路に関する付加的な情報が有益である。
更なる進展では、少なくとも1つの認識された路面標示に基づいて、道路の少なくとも2つの車線に対する自動車両の現在位置が決定されることが提供される。その後、自動車両の現在位置を自動車両の他のユニットに与えることができる。したがって、現在位置のこの情報は、例えば、他の情報源、例えばセンサ又は他のカメラからのデータとそれぞれ比較されてもっともらしくされ得る。このように、現在位置を道路の少なくとも2つの車線に対して特に正確に及び/又は確実に決定できることが有益である。
更に、決定された自動車両の現在位置が自動車両のナビゲーション機器に与えられることが提供される。これは、ナビゲーション機器、特に全地球航法衛星システム(GNSS)を伴うナビゲーション機器が、通常は絶対GPSシステムを備え、したがって、±10メートルの位置精度を有するため、有益である。この精度は、決定された自動車両の現在位置に基づいて向上され得る。したがって、1つの決定された車線は、自動車両に正確に割り当てられ、したがって、ナビゲーション機器による向上されたナビゲーションをもたらすことができる。ナビゲーション機器は、決定された現在位置に関する情報に基づき、必要な運転操作について自動車両のドライバーに早期に知らせることができる。
更に、少なくとも1つの認識された路面標示に応じて、自動車両が少なくとも半自律的に操縦されることが好ましい。自動車両の少なくとも半自律的な操縦は、自動車両のドライバーを例えば操向介入及び/又は制動介入及び/又はドライブ装置への介入から解放できるという利点を有する。少なくとも半自律的な操縦によって、自動車両の安全性が向上し得る。また、ドライバーが操向介入も加速介入及び制動介入もいずれも実行しなければ、自動車両の完全に自律的な操縦をもたらすことができる。また、完全に自律的な運転又は操縦は、例えば人的なミス又は人的な不注意を排除できるため、自動車両の移動をより安全に行うことができるという利点も有する。
特に、少なくとも1つの認識された路面標示に応じて評価装置により車線から抜け出ることが自動車両のドライバーに警告されることが提供される。評価装置は、車線から抜け出ることを自動車両のドライバーに警告する車線逸脱警告システムの構成要素となり得る。本明細書中では、様々な光学システム及びコンピュータデバイスを使用でき、それらを用いて車線内の自動車両の位置が決定される。車線逸脱警告システムは、路面標示又は車線標示までの距離(車線と交差するまでの距離基準(DLC))を下回る際に警告し、車線と交差するまでの時間基準(TLC)を用いてこの不足分を事前に計算することができる。車線逸脱警告システムを様々な態様で実現することができる。したがって、自動車両がまさに路面標示を横切ろうとする可能性があれば、警告音及び/又はガタガタという音が発せられ、或いは、ステアリングホイールが振動される。このように、警告を音響的に及び/又は視覚的に及び/又は触覚的に行うことができる。意図しない車線からの抜け出しを防止するために、ドライバー支援システムによって操向介入が行われるようにすることもできる。
好ましくは、自動車両のほぼ前方に位置される自動車両の環境領域の前方画像が自動車両のフロントカメラによって与えられることが提供される。例えば、フロントカメラをバックミラーの背後又は自動車両のウインドシールドの背後に位置させることができ、また、フロントカメラを自動車両に対して前方に向けることができる。したがって、フロントカメラは、自動車両の前方にある又は自動車両の前方走行方向にある環境領域を捉える。前方画像の形態を成す道路に関する付加的な情報がフロントカメラによって与えられることが有益である。このようにすると、自動車両の環境を確実に捉えることができる。
更に、少なくとも1つの路面標示が前方画像に基づいて更に決定されることが提供される。前方画像に基づく路面標示の決定は、特に信頼できる認識をもたらす。したがって、後方画像に基づいて及び前方画像に基づいて少なくとも1つの路面標示を決定できる。これにより、前方画像の結果と後方画像の結果とを互いに比較してそれぞれ検証できるため、路面標示の誤った決定を回避できる。フロントカメラが自動車両の走行方向に向けられ、したがって、自動車両の現在の走行方向又は走行軌跡を予測することができる。走行軌跡に基づいて、例えば、それから自動車両が路面標示を横切る時期を予測できる。
好ましくは、道路の照明状況がドライバー支援システムによって取得され、また、後方画像及び/又は前方画像における取得された照明状況に応じて少なくとも1つの路面標示が認識されることが提供される。したがって、後方画像を例えば前方画像と融合させることができる。低い太陽及び/又は湿気に起因する道路の表面での反射又は鏡映により、例えば、前方画像に基づいて路面標示を認識することが困難になり得る。この場合には、後方画像を用いて路面標示を認識することができる。これは、フロントカメラとほぼ反対側に向けられ得る少なくとも1つの側方カメラを用いて後方画像が捉えられるため有益である。したがって、低い太陽は、このとき例えばフロントカメラへ向けて前方から輝かず、低い太陽は、少なくとも1つの側方カメラへ向けて背後から輝く。しかしながら、逆のケースを想定することもでき、すなわち、低い太陽が自動車両へ向けて背後から輝く場合、したがって、後方画像が路面標示を認識するのに不適切であると思われる場合には、前方画像を使用して路面標示をより良く認識できる。したがって、車線認識又は路面標示の認識を特に確実に及び/又は特に正確に行うことができる。つまり、照明状況は、太陽光の入射及び/又は他の交通関与物の光の入射及び/又は道路インフラ設備の光の入射を表す。
自動車両用の本発明に係るドライバー支援システムは、少なくとも1つのカメラと、本発明に係る方法を実行するようになっている評価装置とを含む。
評価装置は、ドライバー支援システムの別個の構成要素として存在することができ、又は、評価装置をカメラに組み込むことができる。
本発明に係る自動車両、特に乗用車は、本発明に係るドライバー支援システムを含む。
これに対応して、本発明に係る方法及びその利点に関して与えられる好ましい実施形態が、本発明に係るドライバー支援システム及び本発明に係る自動車両に適用される。
本発明の更なる特徴は、特許請求の範囲、図、及び、図の説明から明らかである。説明において前述した特徴及び特徴の組み合わせ、並びに、図の説明における及び/又は図のみに示される後述する特徴及び特徴の組み合わせは、本発明の範囲から逸脱することなく、それぞれに特定された組み合わせで使用できるだけでなく、他の組み合わせでも又は単独でも使用できる。したがって、図面に明示的に示されて説明されないが説明された実施とは別個の特徴の組み合わせにより生じて生み出され得る実施も本発明によって包含されて開示されると見なすことができる。
以下、概略図面に基づき、本発明の実施形態を更に詳しく説明する。
左側方カメラ、右側方カメラ、及び、フロントカメラを含むドライバー支援システムを伴う本発明に係る自動車両の一実施形態を概略平面図で示す。 概略的に示される道路上の本発明に係る自動車両を概略平面図で示す。 4つの車線を有する概略的に示される道路上の本発明に係る自動車両を概略平面図で示す。
図1には、本発明の一実施形態に係るドライバー支援システム2を伴う自動車両1の平面図が概略的に示される。ドライバー支援システム2は、本実施形態では、左側方カメラ3と右側方カメラ4とを含む。
また、ドライバー支援システム2は、評価装置5、表示装置6、ナビゲーション機器7、及び、フロントカメラ8を含む。
左側方カメラ3は、それが自動車両1の前方走行方向10とは反対の方向に向けられて自動車両1の左側環境領域11と自動車両1の後方環境領域12とを捉えるように自動車両1の左側9に取り付けられる。右側方カメラ4は、自動車両1の右側13に配置されるとともに、前方走行方向10とは反対の方向に向けられる。したがって、右側方カメラ4は、自動車両1の右側環境領域14及び後方環境領域12を捉える。
表示装置6は、自動車両1の運転室の前方領域に配置されるが、自動車両1内に任意に配置することもできる。表示装置6は1つ以上のスクリーンを含むことができる。したがって、左側方カメラ3の後方画像を例えば表示装置6の左側スクリーンに表示することができ、一方、右側方カメラ4の後方画像を表示装置6の右側スクリーンに表示することができる。
左側方カメラ3、右側方カメラ4、及び、表示装置6は共に、電子ミラー(eMirror)と称することもできる電子バックミラーを構成する。この電子バックミラーは、自動車両1のウイングミラーに代えて又は加えて使用することができる。したがって、電子バックミラーは、左側方カメラ3及び/又は右側方カメラ4を用いて左側環境領域11及び/又は後方環境領域12及び/又は右側環境領域14を捉えるとともに、この情報を表示装置6に与える。
図1の実施形態によれば、評価装置5は、自動車両1の中央に配置されるが、自動車両1内に任意に配置することができる。評価装置5は、例えば、自動車両1のコントローラであってもよい。評価装置5は、例えば、デジタル信号プロセッサを含む。ナビゲーション機器7も自動車両1内に任意に配置することができる。例えば、ナビゲーション機器7は、GPSシステム及び/又はGlonassシステム及び/又はGalileoシステム及び/又はBeidouシステムが属するグローバルナビゲーション衛星システム(GNSS)に基づく。
図1の実施形態によれば、フロントカメラ8は、自動車両1のバックミラーの背後に配置される。しかしながら、自動車両1の前方環境領域15を結果として捉えることができれば、フロントカメラ8を同様に自動車両1内に任意に配置することもできる。
左側方カメラ3、右側方カメラ4、評価装置5、表示装置6、ナビゲーション機器7、及び、フロントカメラ8は、データ転送のために自動車両1のバスシステム16によって互いに接続される。
左側方カメラ3及び/又は右側方カメラ4及び/又はフロントカメラ8は、CMOSカメラ或いはさもなければCCDカメラ又は任意の画像取得装置であってもよく、これにより、フロントカメラ8の後方画像及び/又は前方画像を与えることができる。左側方カメラ3及び/又は右側方カメラ4及び/又はフロントカメラ8は、一連のフレームを連続的に与えるビデオカメラであってもよい。
図1の実施形態によれば、自動車両1は、電子バックミラーを含み、従来のウイングミラーを含まず、電子バックミラーは、ミラーを用いて左側環境領域11及び/又は後方環境領域12及び/又は右側環境領域14を特に自動車両のドライバーに与える。しかしながら、自動車両1は、電子ウイングミラーに加えて従来のウイングミラーを備えることもできる。
図2は、道路17上の自動車両1を示す。道路17は車線18を有する。車線18は、路面標示19によって隣接する車線から分離される。左側方カメラ3は、左側環境領域11及び後方環境領域12にわたって延在する左側視野20を与える。これと同様に、右側方カメラ4は、右側環境領域14及び後方環境領域12にわたって少なくとも部分的に延在する右側視野21を与える。
このとき、左側視野20及び/又は右側視野21では、評価装置5によって路面標示19がそれぞれの後方画像に基づいて認識される。路面標示19に基づき、左側方距離22及び/又は右側方距離23を決定することができる。左側方距離22は、自動車両1の縦軸24から自動車両1の左側に配置される路面標示19まで垂直に延在する。右側方距離23は、縦軸24から自動車両1の右側に配置される路面標示19まで垂直に延在する。
図3は、4つの車線18を有する道路17上の自動車両1を示す。また、左側視野20及び右側視野21が示される。したがって、評価装置5は、路面標示19に基づいて左側方距離22及び/又は右側方距離23を決定するようになっている。左側方距離及び/又は右側方距離23に基づいて、路面標示19を横切るまで残る残存時間又はTTC(交差するまでの時間(Time to Crossing))を決定することができる。少なくとも1つの認識された路面標示は、例えば、車線18から抜け出ることを自動車両1のドライバーに警告する車線逸脱警告システム(LDW)に役立つ。例えば、ドライバーは、音響的に及び/又は視覚的に及び/又は触覚的に警告され得る。
更に、車線18のうちの少なくとも2つに対する自動車両1の−図3に示されるような−現在位置は、評価装置5によって決定され得る。この現在位置は、ドライバーのナビゲーション及び/又は自動車両1の少なくとも半自動のナビゲーションを支援するために、ナビゲーション機器7に伝えられ得る。
側方距離22,23が所定の限界値を下回れば、ドライバーの警告を出力することができる。
更に、それぞれが後方画像を与える右側方カメラ4及び/又は左側方カメラ3と、前方画像を与えるフロントカメラ8とをまとめて使用できる。このようにして、評価装置5により後方画像と前方画像とを互いに融合させて路面標示19を認識することができる。これに加えて又は代えて、道路17の照明状況を評価装置5により決定することができ、また、評価装置は、それに応じて路面標示19を認識するために後方画像及び/又は前方画像を使用できる。

Claims (15)

  1. 自動車両(1)のドライバー支援システム(2)を作動させるための方法であって、前記自動車両(1)のほぼ隣及び/又は背後に位置される前記自動車両(1)の環境領域(11,12,14)の後方画像が前記ドライバー支援システム(2)の電子バックミラーの少なくとも1つのカメラ(3,4)によって捉えられ、前記後方画像が前記自動車両(1)の表示装置(6)で表示される、方法において、捉えられた前記後方画像に基づいて道路(17)の少なくとも1つの路面標示(19)が前記環境領域(11,12,14)内で認識されることを特徴とする方法。
  2. 前記後方画像が反射ミラー無しに捉えられることを特徴とする請求項1に記載の方法。
  3. 少なくとも1つの認識された前記路面標示(19)に基づいて前記自動車両(1)の縦軸(24)から前記少なくとも1つの路面標示(19)までの側方距離(22,23)が決定されることを特徴とする請求項1又は請求項2に記載の方法。
  4. 少なくとも1つの認識された前記路面標示(19)に基づいて、前記自動車両(1)が少なくとも1つの認識された前記路面標示(19)に近づく側方速度が決定されることを特徴とする請求項1から3のいずれか一項に記載の方法。
  5. 決定された前記側方速度に応じて、前記自動車両(1)により前記路面標示(19)を横切るまでに残された時間が決定されることを特徴とする請求項4に記載の方法。
  6. 少なくとも1つの認識された前記路面標示(19)に基づいて前記道路(17)の車線(18)の数が決定されることを特徴とする請求項1から5のいずれか一項に記載の方法。
  7. 少なくとも1つの認識された前記路面標示(19)に基づいて、前記道路(17)の少なくとも2つの車線(18)に対する前記自動車両(1)の現在位置が決定されることを特徴とする請求項1から6のいずれか一項に記載の方法。
  8. 決定された前記自動車両(1)の前記現在位置が前記自動車両(1)のナビゲーション機器(7)に与えられることを特徴とする請求項7に記載の方法。
  9. 少なくとも1つの認識された前記路面標示(19)に応じて前記自動車両(1)が少なくとも半自律的に操縦されることを特徴とする請求項1から8のいずれか一項に記載の方法。
  10. 少なくとも1つの認識された前記路面標示(19)に応じて前記道路(17)の車線(18)から抜け出ることを前記自動車両(1)のドライバーが警告されることを特徴とする請求項1から9のいずれか一項に記載の方法。
  11. 前記自動車両(1)のほぼ前方に位置される前記自動車両(1)の環境領域(15)の前方画像が前記自動車両(1)のフロントカメラ(8)によって与えられることを特徴とする請求項1から10のいずれか一項に記載の方法。
  12. 前記少なくとも1つの路面標示(19)が前記前方画像に基づいて更に決定されることを特徴とする請求項11に記載の方法。
  13. 前記道路(17)の照明状況が前記ドライバー支援システム(2)によって取得され、前記後方画像及び/又は前記前方画像における取得された照明状況に応じて前記少なくとも1つの路面標示(19)が認識されることを特徴とする請求項11又は請求項12に記載の方法。
  14. カメラ(3,4)と、請求項1から13のいずれか一項に記載の方法を行うようになっている評価装置(5)とを有するドライバー支援システム(2)。
  15. 請求項14に記載のドライバー支援システム(2)を有する自動車両(1)。
JP2017523987A 2014-11-04 2015-11-03 自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両 Active JP6510642B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102014116037.1 2014-11-04
DE102014116037.1A DE102014116037A1 (de) 2014-11-04 2014-11-04 Verfahren zum Betreiben eines Fahrerassistenzsystems eines Kraftfahrzeugs, Fahrerassistenzsystem und Kraftfahrzeug
PCT/EP2015/075582 WO2016071332A1 (en) 2014-11-04 2015-11-03 Method for operating a driver assistance system of a motor vehicle, driver assistance system and motor vehicle

Publications (2)

Publication Number Publication Date
JP2017536621A true JP2017536621A (ja) 2017-12-07
JP6510642B2 JP6510642B2 (ja) 2019-05-08

Family

ID=54476954

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017523987A Active JP6510642B2 (ja) 2014-11-04 2015-11-03 自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両

Country Status (7)

Country Link
US (1) US20170313253A1 (ja)
EP (1) EP3215400B1 (ja)
JP (1) JP6510642B2 (ja)
KR (1) KR102004062B1 (ja)
CN (1) CN107206941A (ja)
DE (1) DE102014116037A1 (ja)
WO (1) WO2016071332A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6252252B2 (ja) 2014-02-28 2017-12-27 株式会社デンソー 自動運転装置
DE102016114693A1 (de) * 2016-08-09 2018-02-15 Connaught Electronics Ltd. Verfahren zum Unterstützen eines Fahrers eines Kraftfahrzeugs beim Führen des Kraftfahrzeugs, Fahrerassistenzsystem sowie Kraftfahrzeug
DE102016217489A1 (de) * 2016-09-14 2018-03-15 Robert Bosch Gmbh Verfahren und eine zugehörige Vorrichtung zur Führung eines Fortbewegungsmittels
US10773717B2 (en) * 2018-04-12 2020-09-15 Trw Automotive U.S. Llc Vehicle assist system
FR3084631B1 (fr) * 2018-07-31 2021-01-08 Valeo Schalter & Sensoren Gmbh Assistance a la conduite pour le controle longitudinal et/ou lateral d'un vehicule automobile
CN111750880A (zh) * 2019-03-29 2020-10-09 上海擎感智能科技有限公司 一种辅助停车方法及其装置
DE102019110364A1 (de) * 2019-04-18 2020-10-22 CloudMade Verfahren zum Unterstützen eines Fahrers beim Führen des Fahrzeugs durch Aktivieren eines Spurhalteassistenten in Abhängigkeit von einer Blickrichtung des Fahrers sowie Assistenzsystem
US11840147B2 (en) 2021-07-13 2023-12-12 Canoo Technologies Inc. System and method in data-driven vehicle dynamic modeling for path-planning and control
US11845428B2 (en) * 2021-07-13 2023-12-19 Canoo Technologies Inc. System and method for lane departure warning with ego motion and vision
US11908200B2 (en) 2021-07-13 2024-02-20 Canoo Technologies Inc. System and method in the prediction of target vehicle behavior based on image frame and normalization
US11891060B2 (en) 2021-07-13 2024-02-06 Canoo Technologies Inc. System and method in lane departure warning with full nonlinear kinematics and curvature
US11891059B2 (en) 2021-07-13 2024-02-06 Canoo Technologies Inc. System and methods of integrating vehicle kinematics and dynamics for lateral control feature at autonomous driving

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001116567A (ja) * 1999-10-20 2001-04-27 Matsushita Electric Ind Co Ltd 車載運転支援情報表示装置
JP2004145852A (ja) * 2002-08-27 2004-05-20 Clarion Co Ltd レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置
JP2005184395A (ja) * 2003-12-18 2005-07-07 Sumitomo Electric Ind Ltd 画像処理方法、画像処理システム、画像処理装置および撮影装置
JP2005346648A (ja) * 2004-06-07 2005-12-15 Denso Corp 視界支援装置およびプログラム
JP2006127384A (ja) * 2004-11-01 2006-05-18 Auto Network Gijutsu Kenkyusho:Kk 白線認識方法及び白線認識装置並びに白線認識システム
JP2008225822A (ja) * 2007-03-13 2008-09-25 Toyota Motor Corp 道路区画線検出装置
JP2008269399A (ja) * 2007-04-23 2008-11-06 Mazda Motor Corp 車両の車線逸脱警報装置
JP2010146136A (ja) * 2008-12-17 2010-07-01 Alpine Electronics Inc 車両モニタシステム
JP2012128714A (ja) * 2010-12-16 2012-07-05 Clarion Co Ltd 車両用周囲状況監視装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5670935A (en) * 1993-02-26 1997-09-23 Donnelly Corporation Rearview vision system for vehicle including panoramic view
JP3848898B2 (ja) * 2002-05-21 2006-11-22 アイシン精機株式会社 車線逸脱判定装置
DE102004045103A1 (de) * 2004-09-17 2006-03-30 Daimlerchrysler Ag Verfahren zum Erzeugen einer Spurverlasswarnung
DE102005025387A1 (de) * 2004-09-30 2006-05-04 Daimlerchrysler Ag Verfahren und Vorrichtung zur Fahrerwahrnung bzw. zum aktiven Eingreifen in die Fahrdynamik, falls ein Verlassen der Fahrspur droht
US8694195B2 (en) * 2007-12-04 2014-04-08 Volkswagen Ag Motor vehicle having a wheel-view camera and method for controlling a wheel-view camera system
JP5227065B2 (ja) * 2008-01-25 2013-07-03 株式会社岩根研究所 三次元機械地図、三次元機械地図生成装置、ナビゲーション装置及び自動運転装置
US8482486B2 (en) * 2009-04-02 2013-07-09 GM Global Technology Operations LLC Rear view mirror on full-windshield head-up display
JP5414588B2 (ja) * 2010-03-24 2014-02-12 株式会社東芝 車両運転支援用処理装置及び車両運転支援装置
US9090263B2 (en) * 2010-07-20 2015-07-28 GM Global Technology Operations LLC Lane fusion system using forward-view and rear-view cameras
CN201923014U (zh) * 2010-11-24 2011-08-10 宁波罗谊特电子科技有限公司 汽车安全监控装置
EP2858755B1 (en) * 2011-03-10 2017-09-20 dlhBowles Inc. Integrated automotive system, nozzle assembly and remote control method for cleaning an image sensor's lens
US9516277B2 (en) * 2012-05-02 2016-12-06 GM Global Technology Operations LLC Full speed lane sensing with a surrounding view system
DE102012207716A1 (de) * 2012-05-09 2013-11-14 Robert Bosch Gmbh Optisches Abtastsystem und optisches Abtastverfahren
US9109907B2 (en) * 2012-07-24 2015-08-18 Plk Technologies Co., Ltd. Vehicle position recognition apparatus and method using image recognition information
US9834143B2 (en) * 2013-05-23 2017-12-05 GM Global Technology Operations LLC Enhanced perspective view generation in a front curb viewing system
US10946798B2 (en) * 2013-06-21 2021-03-16 Magna Electronics Inc. Vehicle vision system

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001116567A (ja) * 1999-10-20 2001-04-27 Matsushita Electric Ind Co Ltd 車載運転支援情報表示装置
JP2004145852A (ja) * 2002-08-27 2004-05-20 Clarion Co Ltd レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置
JP2005184395A (ja) * 2003-12-18 2005-07-07 Sumitomo Electric Ind Ltd 画像処理方法、画像処理システム、画像処理装置および撮影装置
JP2005346648A (ja) * 2004-06-07 2005-12-15 Denso Corp 視界支援装置およびプログラム
JP2006127384A (ja) * 2004-11-01 2006-05-18 Auto Network Gijutsu Kenkyusho:Kk 白線認識方法及び白線認識装置並びに白線認識システム
JP2008225822A (ja) * 2007-03-13 2008-09-25 Toyota Motor Corp 道路区画線検出装置
JP2008269399A (ja) * 2007-04-23 2008-11-06 Mazda Motor Corp 車両の車線逸脱警報装置
JP2010146136A (ja) * 2008-12-17 2010-07-01 Alpine Electronics Inc 車両モニタシステム
JP2012128714A (ja) * 2010-12-16 2012-07-05 Clarion Co Ltd 車両用周囲状況監視装置

Also Published As

Publication number Publication date
EP3215400A1 (en) 2017-09-13
DE102014116037A1 (de) 2016-05-04
CN107206941A (zh) 2017-09-26
US20170313253A1 (en) 2017-11-02
KR20170076695A (ko) 2017-07-04
WO2016071332A1 (en) 2016-05-12
KR102004062B1 (ko) 2019-07-25
EP3215400B1 (en) 2020-06-24
JP6510642B2 (ja) 2019-05-08

Similar Documents

Publication Publication Date Title
JP6510642B2 (ja) 自動車両のドライバー支援システムを作動させるための方法、ドライバー支援システム、及び、自動車両
US11840251B2 (en) Image processing device
US9649936B2 (en) In-vehicle device, control method of in-vehicle device, and computer-readable storage medium
EP2896937B1 (en) Roadway projection system
US9507345B2 (en) Vehicle control system and method
US10144408B2 (en) System and method for assisting navigation of vehicle through traffic
JP4749958B2 (ja) 運転支援装置
CN110036426B (zh) 控制装置和控制方法
US20240059309A1 (en) Image processing device
US11987239B2 (en) Driving assistance device
US10169668B2 (en) Driving assistance apparatus and driving assistance method
US9836656B2 (en) Device for the expanded representation of a surrounding region of a vehicle
US10198642B2 (en) Method for a motor vehicle provided with a camera, device and system
JP6625480B2 (ja) 表示システム
JP2016197312A (ja) 運転支援表示装置
KR20210056501A (ko) 차량 차선 변경 보조 시스템 및 방법
US20210129751A1 (en) Side and rear reflection controller and side and rear reflection control method
CN112537295B (zh) 驾驶辅助装置
JP7484959B2 (ja) 車両用報知制御装置及び車両用報知制御方法
JP7484585B2 (ja) 車両の情報表示装置
US20230314158A1 (en) Vehicle drive assist apparatus
JP2022041286A (ja) 表示制御装置、表示制御方法及び表示制御プログラム
KR20210002286A (ko) 차로 가이드 장치 및 차로 가이드 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20180223

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180510

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181030

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181218

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190404

R150 Certificate of patent or registration of utility model

Ref document number: 6510642

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250