JP6990175B2 - 車両の車両周辺部における覆い隠された領域を割り出すための方法と装置 - Google Patents

車両の車両周辺部における覆い隠された領域を割り出すための方法と装置 Download PDF

Info

Publication number
JP6990175B2
JP6990175B2 JP2018516459A JP2018516459A JP6990175B2 JP 6990175 B2 JP6990175 B2 JP 6990175B2 JP 2018516459 A JP2018516459 A JP 2018516459A JP 2018516459 A JP2018516459 A JP 2018516459A JP 6990175 B2 JP6990175 B2 JP 6990175B2
Authority
JP
Japan
Prior art keywords
vehicle
concealed area
obstacle
assistant system
peripheral sensors
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018516459A
Other languages
English (en)
Other versions
JP2018537329A (ja
Inventor
フリーベ・マルクス
レーア・フェリックス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Conti Temic Microelectronic GmbH
Original Assignee
Conti Temic Microelectronic GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Conti Temic Microelectronic GmbH filed Critical Conti Temic Microelectronic GmbH
Publication of JP2018537329A publication Critical patent/JP2018537329A/ja
Application granted granted Critical
Publication of JP6990175B2 publication Critical patent/JP6990175B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、車両の車両周辺部における覆い隠された領域を割り出すための方法と装置、並びに、特に、ドライバー・アシスタント・システムの光学的周辺部センサー類の視野を制限する覆い隠された領域(以下:隠覆領域)が割り出されるドライバー・アシスタント・システムに関する。
車両は、車両の運転手を運転マヌーバの実施においてサポートするドライバー・アシスタント・システムを、ますます、装備するようになってきている。この様なドライバー・アシスタント・システムは、ドライバーに、車両の車両周辺部を光学的に示す表示手段を有している。車両周辺部のカメラ画像を作成する車載カメラは、これらの画像を、乃至、画像データを、ある表示手段上においてドライバーに対して表示するために、該画像データを、予め定められている投影面に投影するデータ処理ユニットに転送する。車載カメラや光学的センサーユニットの他、ドライバー・アシスタント・システムは、他の、周辺部センサー類、例えば、超音波センサー類も使用できる。
従来のドライバー・アシスタント・システムでは、車両周辺部内に、例えば、車両の近傍に駐車している他の車両などの障害物が現れた場合、車両周辺部の表示されている画像に障害となる画像歪みが生じる場合がある。この様な画像歪みは、ドライバー・アシスタント・システムの光学的周辺部センサー類の視野を制限する隠覆領域に起因するものである。
よって、本発明の課題は、車両の車両周辺部におけるこの様な隠覆領域を割り出すための方法及び装置を提供することである。
この課題は、本発明の請求項1記載の特徴を有する装置によって達成される。
それによれば、本発明は、
車両の車両周辺部をセンサー的に捕捉する周辺部センサー類、並びに、
該周辺部センサー類のセンサーデータを、車両の車両周辺部内における障害物を認識するために評価するデータ処理ユニット
を有する車両用のドライバー・アシスタント・システムであって、
認識された障害物に依存して、該車両の車両周辺部内の該障害物によって覆い隠され、該ドライバー・アシスタント・システムの光学的周辺部センサー類の視野を制限する隠覆領域を割り出すことを特徴する車両用のドライバー・アシスタント・システムを提供する。
この際、認識された障害物に起因する隠覆領域の割り出しは、好ましくは、ドライバー・アシスタント・システムの光学的周辺部センサーに対する該当する障害物の相対的位置に依存して、及び/或いは、該当する障害物の大きさに依存して実施される。
本発明に係るドライバー・アシスタント・システムのある可及的実施形態においては、該データ処理ユニットは、割り出された隠覆領域内の光学的周辺部センサー類に、特に、車載カメラに由来する画像センサーデータを処理する。
本発明に係るドライバー・アシスタント・システムのある可及的実施形態においては、割り出された隠覆領域は、データ処理ユニットによって、該画像センサーデータにフィルターをかけることによって処理される。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、該データ処理ユニットは、認識された障害物に起因する隠覆領域に、テクスチャー面を覆い被せる。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、該データ処理ユニットは、付加的に、画像描写のために使用した投影面に依存して、特に、静的で二次元の底面に依存して、乃至、三次元の椀状の投影面に依存して、認識された障害物に起因する隠覆領域を、算出する。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、認識された障害物に起因する隠覆領域に依存して、ドライバー・アシスタント・システムの光学的周辺部センサー類、特に、車載カメラを制御する制御回路も、想定されている。
本発明に係るドライバー・アシスタント・システムのある可及的実施形態においては、該制御回路は、その際、該隠覆領域に依存して、ドライバー・アシスタント・システムの複数の異なる光学的周辺部センサー類間における切り替えを実施する。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、該光学的周辺部センサー類は、予め定められている視野を有する車載カメラ、特に好ましくは、フィッシュアイ・カメラを備えている。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、該データ処理ユニットが、認識された障害物に起因する隠覆領域を、該当する光学的周辺部センサー類の視野に依存して算出する。
本発明に係るドライバー・アシスタント・システムのある更なる可及的実施形態においては、該データ処理ユニットが、認識された障害物に起因する隠覆領域を、認識された障害物と該車両との間の相対速度に依存して算出する。
本発明は、更に、特許請求項に記載の特徴を有する隠覆領域を割り出すための方法を実現する。
即ち、本発明は、以下のステップを有する車両の車両周辺部内の隠覆領域を割り出すための方法を実現する:
車両の車両周辺部内の障害物を認識するための車両の周辺部センサー類によって作成されるセンサーデータを評価するステップ、並びに
認識された障害物に依存した、障害物によって覆い隠され、車両の周辺部センサー類の視野を制限する隠覆領域の算出するステップ。
本発明に係る方法の可及的実施形態においては、該光学的周辺部センサー類に由来する画像センサーデータは、処理、特に、フィルター掛けされる。
本発明に係る方法の更なる可及的実施形態においては、認識された障害物に起因する隠覆領域は、テクスチャー面によって覆い被される。
本発明に係る方法の更なる可及的実施形態においては、認識された障害物に起因する隠覆領域は、画像描写に用いた二次元の、乃至、三次元の投影面に依存して算出される。
本発明に係る方法の更なる可及的実施形態においては、割り出された隠覆領域に依存して、光学的周辺部センサー類、特に、車載カメラが、制御される。
本発明に係る方法の更なる可及的実施形態においては、割り出された隠覆領域に依存して、複数の異なる光学的周辺部センサー類、特に、車載カメラ間における、切り替えが実施される。
本発明に係る方法の更なる可及的実施形態においては、認識された障害物に起因する隠覆領域は、該当する光学的周辺部センサー類の視野に依存して算出される。
本発明に係る方法の更なる可及的実施形態においては、認識された障害物に起因する隠覆領域は、認識された障害物と該車両との間の相対速度に依存して算出される。
以下、隠覆領域を割り出すための本発明に係るドライバー・アシスタント・システム、並びに、本発明に係る方法の可及的実施形態を、添付されている図を用いて詳細に説明する。
本発明に係るドライバー・アシスタント・システムの実施例の模式図である。 本発明に係るドライバー・アシスタント・システムの一つの実施形態を描写するためのブロック図である。 本発明に係るドライバー・アシスタント・システムの作動形態を説明するための模式図である。 車両の車両周辺部における隠覆領域を割り出すための本発明に係る方法の実施例を示すためのフローチャートである。 本発明に係る方法の更なる実施例を示すための更なるフローチャートである。
図1は、本発明に係るドライバー・アシスタント・システムを装備した車両Fを模式的に示している。示した実施例では、車両Fのボディの様々な側面に、車両Fの車両周辺部FUをセンサー的に捕捉する光学的周辺部センサー類が取り付けられている。光学的周辺部センサー類とは、例えば、車両周辺部の車両画像を供給する車載カメラ等のことである。図1に示された実施例では、該車両Fのドライバー・アシスタント・システム1は、四台の車載カメラ2-1,2-2,2-3,2-4を装備している。その際、第一車載カメラ2-1は、車両Fのボディの前方に取り付けられており、図1に示すような視野、乃至、視野領域FOV1を有している。更に、車両Fの車両ボディには、左右にそれぞれ一台の車両Fの側方の車両周辺部を光学的に捕捉する車載カメラが設けられている。車両Fの左側に設置されている車載カメラ2-2は、視野、乃至、視野領域FOV2を有している。右側の車載カメラ2-3は、車両Fの右側にある車両周辺部FUの一部を捕捉し、図1に示す如く、視野領域FOV3を有している。更に、車両Fの後方、乃至、リアにも視野領域FOV4を有する車載カメラ2-4が、設けられている。四台の光学的周辺部センサー類2-1から2-4は、ある可及的実施形態においては、比較的広い170°を超える視野領域FOVを有するフィッシュアイ・カメラであることもできる。図1において認識できる如く、該ドライバー・アシスタント・システム1の異なる車載カメラ2-iの視野領域、乃至、視野FOV(Field of View)は、重なり合うことができる。これら異なる車載カメラ2-iは、シグナル配線3-1,3-2,3-3,3-4、例えば、シグナル配線バスや車両バスを介して、ドライバー・アシスタント・システム1のデータ処理ユニット4と接続されている。シグナル配線3-iを介しては、センサーデータ、特に、カメラ画像が、データ処理ユニット4に伝送される。該データ処理ユニット4は、周辺部センサー類の、特に、図1に示した光学的周辺部センサー類、乃至、車載カメラ2-iのセンサーデータを、車両Fの車両周辺部内において、障害物Hを認識するために評価する。該データ処理ユニット4は、センサーデータのデータ評価を実施するプロセッサーを備えている。該センサーデータは、好ましくは、リアルタイムに処理される。光学的周辺部センサー類2-iに加え、ドライバー・アシスタント・システム1は、例えば、超音波センサー類など、周辺部センサー類も装備していることができる。これら更なる周辺部センサー類も、車両Fの車両周辺部に障害物Hを認識するためにデータ処理ユニット4によって処理されることができるセンサーデータを供給する。図1に示されている例では、車輌Fの車両周辺部には、例えば、壁や建物であることができる障害物H1,H2が、存在している。図1に示されている例では、障害物H1は、前方用車載カメラ2-1の視野領域FOV1内にある。第二障害物H2は、前方用視野領域2-1の視野領域内と、一部、左側用車載カメラ2-2の視野領域内にある。受信したセンサーデータを基に、車両周辺部内の障害物H1,H2が、認識される。これらセンサーデータは、図1に示されている車載カメラ2-iからの、及び/或いは、ドライバー・アシスタント・システム1の他の周辺部センサー類からのものである。その際、それぞれの障害物H-iの大きさ、乃至、広がりが、割り出される。大きさ、乃至、輪郭に依存して、データ処理ユニット4によって、障害物Hによってそれぞれ覆われ、ドライバー・アシスタント・システム1の光学的周辺部センサー、例えば、車載カメラ2-iの視野領域を制限する隠覆領域VBが、算出される。図1に示されている例では、障害物H1の極値的輪郭点P1に接する光線が、前方用車載カメラ2-1の視野領域FOV1を制限する隠覆領域VB1を定義する。同様に、障害物H2の極値的輪郭点P2に接する光線が、隠覆領域VB2を定義する。この第二隠覆領域VB2は、一方を、点P2を通る光線によって、他方を前方用車載カメラ2-1の視野領域FOV1の外側の線によって区画されている。障害物H2により、左側用車載カメラ2-2の視野領域FOV2を制限する更なる隠覆領域VB3も生じる。
ドライバー・アシスタント・システム1のデータ処理ユニット4は、可及的実施形態においては、割り出された隠覆領域VB内の光学的周辺部センサー類2-iに由来する画像センサーデータ、乃至、カメラ画像を処理する。ある可及的実施形態においては、隠覆領域VB内の画像センサーデータ、乃至、カメラ画像には、フィルターが掛けられる。更なる可及的実施形態においては、認識された障害物Hに起因する隠覆領域VBは、テクスチャー面によって覆い被される。
該ドライバー・アシスタント・システム1は、その上で車両Fの車両周辺部が、車両Fのドライバーに示される表示手段、乃至、ディスプレーを備えている。この際、カメラ画像は、二次元の基準面、乃至、椀状三次元の投影面に投影される。ある可及的実施形態においては、該データ処理ユニット4は、認識された障害物Hに起因する隠覆領域VBを、画像描写に用いる投影面に依存して算出する。
図2は、本発明に係るドライバー・アシスタント・システムの一つの実施形態を描写するためのブロック図を示している。該データ処理ユニット4は、周辺部センサー類より得たセンサーデータを、車両Fの車両周辺部内の障害物を認識するために評価する。その際、該周辺部センサー類は、光学的周辺部センサー類2-iの他に、ある可及的実施形態においては、それらのセンサーデータが、車両Fの車両周辺部FU内の障害物Hを認識するためにデータ処理ユニット4によって評価される更なる周辺部センサー類も、包含している。図2に示されているブロック図では、一例として、一つの車両Fの車両周辺部FU内の障害物Hを認識するためにセンサーデータを供給する更なる周辺部センサー5が、示されている。更に、該ドライバー・アシスタント・システム1は、図2に示されている実施例では、割り出された隠覆領域VBに依存して光学的周辺部センサー類、特に図2に示されている車載カメラ2-1から2-4を制御する制御回路6も有している。ある可及的実施形態においては、該制御ユニット6は、車載カメラ2-iによって作成された画像データストリームを、割り出された隠覆領域VBに依存して切り替える。その際、好ましくは、可能な限り小さな、乃至、狭い隠覆領域VBを有する該画像センサーデータ、乃至、カメラ画像が、データ処理ユニット4に直送される。図1に示されている例では、通常、前方右側の領域は、前方用のフロントカメラ2-1によって、センサー的に画像として捕捉され、対応する画像データが、該データ処理ユニット4に伝達される。障害物H1とその結果得られる隠覆領域VB1が認識された場合、該障害物H1は、右側用車載カメラ2-3の視野領域FOV3内では、隠覆領域VBの原因とはならないため、該ドライバー・アシスタント・システム1の制御ユニット6は、右側用車載カメラ2-3の画像データに切り換える。即ち、図1に示されているシナリオでは、右側用車載カメラ2-3が、その視野FOV1内に障害物H1があり、そこに隠覆領域VB1ができてしまっている前方用車載カメラ2-1よりも、クオリティ的により良い画像データを供給している。該データ処理ユニット4は、隠覆領域VBを算出する際に、ある可及的実施形態においては、該当する光学的周辺部センサー類、乃至、車載カメラ2-iの予め定められている視野FOVを考慮する。該車載カメラ2-iの視野、乃至、視角は、ある可及的実施形態においては、データ処理ユニット4のプロセッサーが、読み出した視野に依存して隠覆領域VBを算出するために、アクセスできるコンフィグレーション・メモリー内に保存されている。
図3は、本発明に係るドライバー・アシスタント・システム1の作動形態を説明するための更なる交通シナリオを示している。図3に示されている交通シチュエーションでは、車両Fは、速度Vで、道路を走行しているが、該車両Fに対しては、障害物H1となる他の車両が、対向して走ってきている。道路脇右側、例えば、車両Fの前方用車載カメラ2の視野領域FOV内には、障害物H2がある。障害物H2によって、車載カメラ2の視野FOV内において、隠覆領域VB2ができるが、この隠覆領域VB2は、車両Fの走行速度Vに依存して変化する。例えば建物などの固定的障害物H2とは異なり、他の障害物H1、即ち、対向して来る車両は、自ら相対的に車両Fに向かって動いてくる。車両H1は、前方用車載カメラ2の視野FOV内において、隠覆領域VB1を覆い隠すが、該隠覆領域VB1は、車両Fと車両H1との間の相対速度に依存している。ある可及的実施形態においては、ドライバー・アシスタント・システム1のデータ処理ユニット4は、認識された障害物H1,H2に起因する隠覆領域VB1,VB2を、認識された障害物と車両Fとの間の相対速度に依存して算出する。例えば、障害物H2の様な固定的障害物では、基となる相対速度は、車両Fの自己速度Vである。例えば、対向車両などの動いている障害物H1では、双方の車両間の相対速度が、先ず、センサーデータを基に割りだされ、続いて、隠覆領域VBが、割り出された相対速度に依存して、データ処理ユニット4によって算出される。ある可及的実施形態においては、該データ処理ユニット4は、各々の隠覆領域VB2の面積を近似的に算出する。例えば、対向して来る障害物H1の双方の面輪郭点P1A,P1Bが大きく離れている場合、これらによって覆い隠される領域VB1は、双方の輪郭点P1A,P1B間の間隔が小さい場合と比較して有意に大きい。即ち、対向して来る車両H1が、例えば、トラックの場合、覆い隠される領域VB1は、乗用車が、対向して来る場合と比較して有意に大きい。該当するカメラ2の視野FOV内の隠覆領域VBの面積が大きければ大きいほど、該当する車載カメラから供給される車両画像の画像クオリティは、大きく侵害される。ある可及的実施形態においては、ドライバー・アシスタント・システム1の制御ユニット6は、異なるカメラから供給される異なるカメラ画像ストリーム間で切り替える、乃至、加重することにより、該当するカメラの視野FOV内にある隠覆領域VBの大きさ、乃至、割合も考慮する。例えば、前方用車載カメラ2-1のカメラ画像内の隠覆領域VBの合計(VB1 + VB2)が、約50%にも達する場合、ある閾値以上では、できるだけ、車両Fの他の車載カメラから供給されるカメラ画像に切り替える。
図4は、車両Fの車両周辺部における隠覆領域VBを割り出すための本発明に係る方法の実施例を示すためのフローチャートを示している。
第一ステップS1において、車両Fの周辺部センサー類によって作成されるセンサーデータは、車両Fの車両周辺部内の障害物Hを認識するために評価される。これは、例えば、ドライバー・アシスタント・システム1のデータ処理ユニット4のプロセッサー、乃至、マイクロプロセッサーによって実施される。
第二ステップS2では、認識された障害物Hに依存して隠覆領域VB、乃至、隠覆面積が算出される。これら隠覆領域VBは、車両周辺部FU内の障害物Hに起因し、ドライバー・アシスタント・システム1の光学的周辺部センサー類の視野FOVを制限する。
図5は、本発明に係る方法の更なる実施例を示している。ある可及的実施形態においては、隠覆領域VBを割り出した後、光学的周辺部センサー類に由来するその中に割り出された隠覆領域VBがある画像センサーデータが、データ処理ユニット4、乃至、その他のユニットによって処理される。その際、その視野、乃至、視野領域内に、隠覆領域VBがある該当する光学的周辺部センサー類、乃至、車載カメラの画像データには、フィルターを掛けることができる。代案的には、カメラ画像内の割り出された隠覆領域には、テクスチャー面を覆い被せることも可能である。
更なる可及的実施形態においては、ステップS3において、ステップS2において割り出された、乃至、算出された隠覆領域VBに依存して光学的周辺部センサー類の制御、例えば、異なる周辺部センサー類の切り替えが、実施される。その際、割り出された隠覆領域VBの大きさ、乃至、その車載カメラの総視野FOVに対する割合も、考慮されることができる。
ある可及的実施形態においては、ステップS2では、認識された障害物Hに起因する隠覆領域VBが、該当する光学的周辺部センサー2-iの予めコンフィグレーションされた視野FOVに依存して算出される。更に、ステップS3では、隠覆領域VBの算出を、付加的に、認識された障害物Hと車両Fとの間の相対速度に依存して実施できる。
本発明に係るドライバー・アシスタント・システム1は、任意の車両、特に好ましくは、道路交通用車両において使用することができる。
ある可及的実施形態においては、本発明に係る方法によって割り出された隠覆領域VBを、ドライバー・アシスタント・システム1の他の機能用にも評価することができる。例えば、ある可及的アプリケーションにおいては、車載カメラ2-iの視野FOVにおける隠覆領域VBの割合から、ある道路上の交通密度を割り出すこともできる。例えば、車両Fが、三車線のアウトバーンの中央車線を走行している場合、交通密度が高い時には、車載カメラ2の視野FOVの大部分が、アウトバーン上を同方向に走行している他の車両によって覆い隠される。交通密度が高ければ高いほど、該道路上において、渋滞が、特に、車両事故による交通ボトルネックが、発生する確率も高くなる。即ち、カメラ2の視野FOV内の隠覆領域VBの割合が、該当する道路上のその時点における交通密度を示す尺度となる。この交通密度尺度は、ある可及的実施形態においては、該ドライバー・アシスタント・システム1の更なる機能用に、評価されることができる。

Claims (11)

  1. 車両(F)の車両周辺部をセンサー的に捕捉する周辺部センサー類(2)、並びに、
    該周辺部センサー類(2;5)のセンサーデータを、車両(F)の車両周辺部内における障害物(H)を認識するために評価するデータ処理ユニット(4)
    を有する車両(F)用のドライバー・アシスタント・システム(1)であって、
    認識された障害物(H)に依存して、該車両(F)の車両周辺部内の該障害物(H)によって覆い隠され、該ドライバー・アシスタント・システム(1)の光学的周辺部センサー類(2)の視野(FOV)を制限する隠覆領域(VB)を割り出す
    こと
    認識された障害物(H)に起因する隠覆領域(VB)の大きさに依存して、光学的周辺部センサー類(2)を、異なる光学的周辺部センサー類(2)間でより大きな隠覆領域(VB)を有する光学的周辺部センサー類(2)をより小さな隠覆領域(VB)を有する光学的周辺部センサー類(2)へ切り替えるように制御する制御回路(6)が設けられていること、及び
    前記データ処理ユニット(4)が、認識された障害物(H)に起因する隠覆領域(VB)を、認識された障害物(H)と車両(F)との間の相対速度に依存して算出すること
    を特徴する車両用のドライバー・アシスタント・システム。
  2. 該データ処理ユニット(4)が、割り出された隠覆領域(VB)内の光学的周辺部センサー類(2)に由来する画像センサーデータを処理することを特徴とする請求項1に記載のドライバー・アシスタント・システム。
  3. 該データ処理ユニット(4)が、認識された障害物(H)に起因する隠覆領域(VB)にテクスチャー面を覆い被せることを特徴とする請求項1に記載のドライバー・アシスタント・システム。
  4. 該データ処理ユニット(4)が、認識された障害物(H)に起因する隠覆領域(VB)を、画像描写のために使用した視野に依存して算出することを特徴とする先行請求項1から3のうち何れか一項に記載のドライバー・アシスタント・システム。
  5. 該光学的周辺部センサー類(2)が、予め定められている視野(FOV)を有する車載カメラを備えていることを特徴とする先行請求項1から4のうち何れか一項に記載のドライバー・アシスタント・システム。
  6. 該データ処理ユニット(4)が、認識された障害物(H)に起因する隠覆領域(VB)を、該当する光学的周辺部センサー類(2)の視野(FOV)に依存して算出することを特徴とする請求項5に記載のドライバー・アシスタント・システム。
  7. 以下のステップ:
    (a)車両(F)の周辺部センサー類によって作成されるセンサーデータを、車両(F)の車両周辺部内の障害物(H)を認識するために評価するステップ(S1);並びに、
    (b)認識された障害物(H)によって覆い隠され、車両(F)の光学的周辺部センサー類の視野(FOV)を制限する隠覆領域(VB)を、認識された障害物(H)に依存して算出するステップ(S2)
    を有し、認識された障害物(H)に起因する隠覆領域(VB)の大きさに依存して、車両(F)の光学的周辺部センサー類(2)を、異なる光学的周辺部センサー類(2)間でより大きな隠覆領域(VB)を有する光学的周辺部センサー類(2)をより小さな隠覆領域(VB)を有する光学的周辺部センサー類(2)へ切り替えるように制御すること、及び認識された障害物(H)に起因する隠覆領域(VB)が、認識された障害物(H)と車両(F)との間の相対速度に依存して算出されることを特徴とする車両(F)の車両周辺部内の隠覆領域(VB)を割り出すための方法。
  8. 算出された隠覆領域内の車両(F)の光学的周辺部センサー類(2)に由来するセンサーデータが、処理されることを特徴とする請求項に記載の方法。
  9. 認識された障害物(H)に起因する隠覆領域(VB)にテクスチャー面が覆い被されることを特徴とする請求項に記載の方法。
  10. 認識された障害物(H)に起因する隠覆領域(VB)が、画像描写のために使用した視野に依存して算出されることを特徴とする先行請求項からのうち何れか一項に記載の方法。
  11. 認識された障害物(H)に起因する隠覆領域(VB)が、該当する光学的周辺部センサー類(2)の視野(FOV)に依存して算出されることを特徴とする先行請求項から10のうち何れか一項に記載の方法。
JP2018516459A 2015-11-24 2016-10-24 車両の車両周辺部における覆い隠された領域を割り出すための方法と装置 Active JP6990175B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102015223176.3A DE102015223176A1 (de) 2015-11-24 2015-11-24 Verfahren und Vorrichtung zur Ermittlung von Verdeckungsbereichen in der Fahrzeugumgebung eines Fahrzeuges
DE102015223176.3 2015-11-24
PCT/DE2016/200489 WO2017088863A1 (de) 2015-11-24 2016-10-24 Verfahren und vorrichtung zur ermittlung von verdeckungsbereichen in der fahrzeugumgebung eines fahrzeuges

Publications (2)

Publication Number Publication Date
JP2018537329A JP2018537329A (ja) 2018-12-20
JP6990175B2 true JP6990175B2 (ja) 2022-01-12

Family

ID=57345631

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018516459A Active JP6990175B2 (ja) 2015-11-24 2016-10-24 車両の車両周辺部における覆い隠された領域を割り出すための方法と装置

Country Status (6)

Country Link
US (1) US10477102B2 (ja)
EP (1) EP3381185A1 (ja)
JP (1) JP6990175B2 (ja)
KR (1) KR102580476B1 (ja)
DE (2) DE102015223176A1 (ja)
WO (1) WO2017088863A1 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2016046642A (ja) * 2014-08-21 2016-04-04 キヤノン株式会社 情報処理システム、情報処理方法及びプログラム
JP2017114155A (ja) * 2015-12-21 2017-06-29 三菱自動車工業株式会社 運転支援装置
US10726278B2 (en) * 2016-09-30 2020-07-28 Samsung Electronics Co., Ltd. Method, device and system for providing notification information
DE102017122261A1 (de) * 2017-09-26 2019-03-28 Valeo Schalter Und Sensoren Gmbh Verfahren zum Überwachen eines Umgebungsbereiches eines Kraftfahrzeugs sowie Kamerasystem
DE102018203590A1 (de) 2018-03-09 2019-09-12 Conti Temic Microelectronic Gmbh Surroundview-System mit angepasster Projektionsfläche
DE102018108751B4 (de) 2018-04-12 2023-05-04 Motherson Innovations Company Limited Verfahren, System und Vorrichtung zum Erhalten von 3D-Information von Objekten
DE102018127468A1 (de) * 2018-11-05 2020-05-07 Valeo Schalter Und Sensoren Gmbh Verfahren zum Aktualisieren einer digitalen Umgebungskarte, elektronische Recheneinrichtung, Computerprogrammprodukt, Fahrerassistenzsystem, Kraftfahrzeug und Umgebungskartenaktualisierungssystem
DE102018220113A1 (de) * 2018-11-23 2020-05-28 Zf Friedrichshafen Ag Vorrichtung und Verfahren zum Erkennen einer Sensorblockade eines Umgebungssensors
US20210109523A1 (en) * 2019-10-10 2021-04-15 Waymo Llc Sensor field of view in a self-driving vehicle
CN110867083B (zh) * 2019-11-20 2021-06-01 浙江宇视科技有限公司 车辆监控方法、装置、服务器和机器可读存储介质
DE102021002295B3 (de) 2021-04-30 2022-09-22 Mercedes-Benz Group AG Verfahren zur Ermittlung und Ausgabe einer an eine Fahrsituation angepassten Fahrgeschwindigkeit
DE102021003870B4 (de) 2021-07-27 2023-05-04 Mercedes-Benz Group AG Verfahren zur Überprüfung einer vorgegebenen Geschwindigkeitsbegrenzung für Fahrzeuge auf einer Fahrbahn und Verfahren zur Unterstützung eines Fahrers
KR102343062B1 (ko) * 2021-08-05 2021-12-27 주식회사 인피닉 높이 차이를 가지는 센서들을 위한 제어 방법 및 이를 실행하기 위하여 기록매체에 기록된 컴퓨터 프로그램

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009070243A (ja) 2007-09-14 2009-04-02 Denso Corp 車両用視界支援システム、及び、情報配信装置
JP2009081666A (ja) 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
US20140347469A1 (en) 2013-05-23 2014-11-27 GM Global Technology Operations LLC Enhanced perspective view generation in a front curb viewing system

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU2006274421B2 (en) * 2005-07-26 2011-08-11 Macdonald, Dettwiler And Associates Inc. Traffic management system for a passageway environment
DE102006052779A1 (de) 2006-11-09 2008-05-15 Bayerische Motoren Werke Ag Verfahren zur Erzeugung eines Gesamtbilds der Umgebung eines Kraftfahrzeugs
JP2011134237A (ja) 2009-12-25 2011-07-07 Toshiba Alpine Automotive Technology Corp 車両用画像表示装置及び車両用画像表示方法
US9760092B2 (en) * 2012-03-16 2017-09-12 Waymo Llc Actively modifying a field of view of an autonomous vehicle in view of constraints
US9523984B1 (en) * 2013-07-12 2016-12-20 Google Inc. Methods and systems for determining instructions for pulling over an autonomous vehicle
DE102013019145B4 (de) * 2013-11-15 2016-12-22 Audi Ag Verfahren zum Betrieb eines Kraftfahrzeugs mit Umfeldsensoren und Kraftfahrzeug
DE102014208664A1 (de) * 2014-05-08 2015-11-12 Conti Temic Microelectronic Gmbh Verfahren und vorrichtung zum verzerrungsfreien anzeigen einer fahrzeugumgebung eines fahrzeuges
US10331142B2 (en) * 2016-09-18 2019-06-25 Eyedog Israel Ltd. Monitoring of vehicle passing maneuver
DE102017210081B4 (de) * 2017-06-14 2019-10-17 Elektrobit Automotive Gmbh Verfahren und Vorrichtung zum Bestimmen von nicht zu befahrenden Bereichen
US10466707B2 (en) * 2017-12-22 2019-11-05 X Development Llc Planning robot stopping points to avoid collisions

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009070243A (ja) 2007-09-14 2009-04-02 Denso Corp 車両用視界支援システム、及び、情報配信装置
JP2009081666A (ja) 2007-09-26 2009-04-16 Nissan Motor Co Ltd 車両用周辺監視装置および映像表示方法
US20140347469A1 (en) 2013-05-23 2014-11-27 GM Global Technology Operations LLC Enhanced perspective view generation in a front curb viewing system

Also Published As

Publication number Publication date
US20180316850A1 (en) 2018-11-01
WO2017088863A1 (de) 2017-06-01
KR20180085718A (ko) 2018-07-27
US10477102B2 (en) 2019-11-12
EP3381185A1 (de) 2018-10-03
DE112016004040A5 (de) 2018-06-28
DE102015223176A1 (de) 2017-05-24
JP2018537329A (ja) 2018-12-20
KR102580476B1 (ko) 2023-09-20

Similar Documents

Publication Publication Date Title
JP6990175B2 (ja) 車両の車両周辺部における覆い隠された領域を割り出すための方法と装置
US10163016B2 (en) Parking space detection method and device
CN106663193B (zh) 用于路缘检测和行人危险评估的系统和方法
US9507345B2 (en) Vehicle control system and method
JP6428713B2 (ja) 情報表示装置
US20110169957A1 (en) Vehicle Image Processing Method
EP1264734A2 (en) Vehicle surroundings monitoring apparatus
JP7247173B2 (ja) 画像処理方法及び装置
WO2015125590A1 (ja) 外界認識システム、車両、及びカメラの汚れ検出方法
US9849835B2 (en) Operating a head-up display of a vehicle and image determining system for the head-up display
JP7107931B2 (ja) 移動オブジェクトのレンジを推定する方法および装置
WO2017145549A1 (ja) 脇見見落とし注意システム及びコンピュータプログラム
CN109415018B (zh) 用于数字后视镜的方法和控制单元
WO2020187978A1 (en) Image processing system and method
WO2016120874A1 (en) Vision system
JP4930432B2 (ja) 車両用周辺監視装置
JPH1142989A (ja) 車両用後側方監視装置
EP3349201B1 (en) Parking assist method and vehicle parking assist system
US10864856B2 (en) Mobile body surroundings display method and mobile body surroundings display apparatus
EP3938245B1 (en) Driver assistance method and apparatus
JP5723561B2 (ja) 運転支援装置
CN112537295B (zh) 驾驶辅助装置
WO2017069038A1 (ja) 車載表示システム
WO2023218545A1 (ja) 表示制御装置および表示制御方法
JP6769187B2 (ja) 表示装置の表示方法及び表示装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190613

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20200703

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200715

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20201005

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210317

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20211110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20211203

R150 Certificate of patent or registration of utility model

Ref document number: 6990175

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150