JP7078587B2 - 走行支援システム、走行支援方法およびプログラム - Google Patents

走行支援システム、走行支援方法およびプログラム Download PDF

Info

Publication number
JP7078587B2
JP7078587B2 JP2019180642A JP2019180642A JP7078587B2 JP 7078587 B2 JP7078587 B2 JP 7078587B2 JP 2019180642 A JP2019180642 A JP 2019180642A JP 2019180642 A JP2019180642 A JP 2019180642A JP 7078587 B2 JP7078587 B2 JP 7078587B2
Authority
JP
Japan
Prior art keywords
vehicle
blind spot
approaching vehicle
moving body
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019180642A
Other languages
English (en)
Other versions
JP2021056873A (ja
Inventor
侑史 倉澤
卓磨 野口
圭一 水村
岳史 福田
剛 仲本
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Priority to JP2019180642A priority Critical patent/JP7078587B2/ja
Priority to CN202010951503.2A priority patent/CN112581792B/zh
Priority to US17/020,767 priority patent/US11554777B2/en
Priority to DE102020125061.4A priority patent/DE102020125061A1/de
Publication of JP2021056873A publication Critical patent/JP2021056873A/ja
Application granted granted Critical
Publication of JP7078587B2 publication Critical patent/JP7078587B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/095Predicting travel path or likelihood of collision
    • B60W30/0956Predicting travel path or likelihood of collision the prediction being responsive to traffic or environmental parameters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • G06V10/95Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G06V20/54Surveillance or monitoring of activities, e.g. for recognising suspicious objects of traffic, e.g. cars on the road, trains or boats
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/40Dynamic objects, e.g. animals, windblown objects
    • B60W2554/404Characteristics
    • B60W2554/4041Position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Traffic Control Systems (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

本発明は、走行を支援する走行支援システム、走行支援方法およびプログラムに関する。
特許文献1には、建物の門の内側付近に歩行者がいることが検出され、その門前に接近してくる車両の運転者に知らされる一方、門前に接近してくる車両が検出されて建物の門の内側付近にいる歩行者に知らされる歩行者飛び出し警報システムが記載されている。
特開2006-323666号公報
道路脇に車両が一時的に停止するなどにより、突発的に死角が生じるケースがある。そのような突発的に死角が生じた場合にも、そのことを車両の搭乗者に通知することが求められる。
本発明は、車両走行時に死角領域が発生したことを車両の搭乗者に通知する走行支援システム、走行支援方法およびプログラムを提供することを目的とする。
本発明に係る走行支援システムは、車両の走行を支援するサーバを含む走行支援システムであって、前記サーバは、車両の走行路上の静止物を認識する認識手段と、前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識手段により認識された前記静止物により発生する死角領域の有無を判定する判定手段と、前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定手段と、前記判定手段により前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定手段により特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知手段と、を備え、前記サーバは、前記接近車両を除く装置に構成されていることを特徴とする走行支援システム。
本発明に係る走行支援方法は、車両の走行を支援するサーバを含む走行支援システムにおいて実行される走行支援方法であって、前記サーバが、車両の走行路上の静止物を認識する認識工程と、前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識工程において認識された前記静止物により発生する死角領域の有無を判定する判定工程と、前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定工程と、前記判定工程において前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定工程において特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知工程と、を有し、前記サーバは、前記接近車両を除く装置に構成されていることを特徴とする。
本発明に係るプログラムは、車両の走行を支援する走行支援システムのサーバを、車両の走行路上の静止物を認識する認識手段、前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識手段により認識された前記静止物により発生する死角領域の有無を判定する判定手段、前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定手段、前記判定手段により前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定手段により特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知手段、として機能させるためのプログラムであり、前記サーバは、前記走行支援システムにおいて、前記接近車両を除く装置に構成されていることを特徴とする。
本発明によれば、死角領域が発生したことを車両の搭乗者に通知することができる。
走行支援システムの構成を示す図である。 車両の構成を示す図である。 携帯型端末のブロック構成を示す図である。 サーバのブロック構成を示す図である。 本実施形態の動作について説明するための図である。 車両において実行される処理を示すフローチャートである。 携帯型端末において実行される処理を示すフローチャートである。 サーバにおいて実行される処理を示すフローチャートである。 S302の障害物の認識処理を示すフローチャートである。 S306の死角領域の特定処理を示すフローチャートである。 サーバにおいて実行される処理を示すフローチャートである。 S608の警戒物の認識処理を示すフローチャートである。 S610の通知処理を示すフローチャートである。 死角領域の特定を説明するための図である。 障害物のモデル化を説明するための図である。 表示画面を示す図である。 サーバ以外の装置において実行される処理を示すフローチャートである。
以下、添付図面を参照して実施形態を詳しく説明する。尚、以下の実施形態は特許請求の範囲に係る発明を限定するものではなく、また実施形態で説明されている特徴の組み合わせの全てが発明に必須のものとは限らない。実施形態で説明されている複数の特徴のうち二つ以上の特徴が任意に組み合わされてもよい。また、同一若しくは同様の構成には同一の参照番号を付し、重複した説明は省略する。
[第1実施形態]
図1は、本実施形態における走行支援システムの構成を示す図である。走行支援システム100は、走行支援サービスを提供するサーバ101、サーバ101と接続された基地局113、117を含む。走行支援システム100は、車両104、105を含み、本実施形態では、車両104は四輪車両であり、車両105は鞍乗り型二輪車両である。しかしながら、車両104、105は、図1に示す車両タイプに限られない。例えば、両車両が四輪車両であっても良いし、鞍乗り型二輪車両であっても良い。もしくは、特殊用途向けの車両であっても良い。また、車両105は、二輪車両に限られず、例えば三輪の鞍乗り型車両であっても良い。携帯型端末106は、GPS機能を含む携帯型端末機能を備えた装置である。本実施形態では、車両105の搭乗者(運転者)が携帯型端末106として、例えばスマートフォンを保持し、そのスマートフォンはアタッチメント等で車両105に取り付けられている。また、携帯型端末106により実現される携帯型端末機能は、車両105に含まれていても良い。車両104は、基地局113との間での無線通信114を介して、サーバ101と相互に通信可能である。車両105、携帯型端末106は、基地局117との間での無線通信118を介して、サーバ101と相互に通信可能である。また、車両105と携帯型端末106の間では相互に通信可能であり、例えば、車両105は、携帯型端末106を介してサーバ101と通信可能である。そのため、本実施形態では、携帯型端末106を介さない車両105と基地局117の間の無線通信は行われていなくても良い。
本実施形態では、車両105は、建物や、信号機や路側機等の公共設備が存在する道路を走行しているケースを想定する。そのようなケースにおいて例えば、道路の脇に車両が一時的に停車すると、その停止車両のために、道路の脇道が車道から見て突発的な死角領域となることがあり得る。本実施形態では、そのような場合、道路を走行する車両105の搭乗者に対して、死角領域の発生を通知することができる。
図1の建物102は、例えば道路脇に存在する建物であり、公共設備103は、信号機や路側機等の公共設備である。建物102、公共設備103は、道路の脇道を監視する監視カメラ等の撮像部107、108を備えている。撮像部107で撮像された撮像データは、画像処理部110により画像処理され、ネットワーク(NW)115を介してサーバ101に送信される。また、撮像部108で撮像された撮像データは、画像処理部111により画像処理され、ネットワーク116を介してサーバ101に送信される。また、車両104は、外部環境を認識するためのカメラ等の撮像部109を備えており、撮像部109で撮像された撮像データは、画像処理部112により画像処理され、基地局113との間の無線通信114を介してサーバ101に送信される。画像処理部110、111、112の画像処理については後述する。
図2は、車両105のブロック構成を示す図である。上述したように、本実施形態では、車両105は、鞍乗り型二輪車両とする。ECU(Elecronic Control Unit)210は、車両105の各部を統括的に制御する。車両105は、例えば、スロットルバイワイヤ(throttle by wire)方式で走行制御が行われる構成であり、ECU210は、操舵部213のアクセス開度の電気信号を受けてスロットルバルブを開閉することにより、エンジンを含む駆動部211を制御する。制動部212は、ブレーキ機構を含む。センサ群214は、速度センサ、スロットルセンサ、大気圧センサ等の各種センサを含み、ECU210は、それらの検知信号を受信する。通知部215は、ランプ、LED等を含み、例えば、本実施形態では、死角領域が存在する方向を表示する点灯機構である。また、車両105は、携帯型端末106をアタッチメント等で車両105に取付可能に構成されても良い。
制御部200は、通信インタフェース(I/F)204を介して携帯型端末106との間での無線通信を実行可能なブロックである。なお、通信I/F204は、基地局117との間での無線通信が可能なように構成されても良い。制御部200は、制御部200内の動作を統括的に制御するプロセッサ201、メモリ202、通知制御部203、通信I/F204を含むコンピュータシステムである。本実施形態における車両105の動作は、例えば、プロセッサ201がメモリ202上でプログラムを実行することにより実現される。通知制御部203は、携帯型端末106から送信された通知制御データに基づいて、通知部215の制御をECU210に要求する。例えば、通知制御部203は、携帯型端末106から送信された通知制御データをECU210が処理可能な信号に変換し、ECU210に送信する。本実施形態では、通知とは、パネルへの表示、ランプの点灯、ハンドルの振動など車両105の搭乗者に対して認識させるための処理をいう。例えば、通知制御部203は、通知部215のランプを表示させるための通知制御データや、操舵部213のハンドルを振動させるための通知制御データをECU210が処理可能な信号に変換し、ECU210に送信する。また、制御部200は、USB等の記憶部216と接続可能である。車両105は、図2に示すブロック構成に限られず、例えば、車両105の機能に応じた機能ブロックを適宜含む。例えば、車両105は、車両105のGPS情報を取得するGPSと、そのGPS情報を外部に送信可能な車両情報送信部とを含むように構成しても良い。
図3は、携帯型端末106のブロック構成を示す図である。制御部300は、携帯型端末106を統括的に制御する。制御部300は、制御部300内の動作を統括的に制御するプロセッサ301、メモリ302、GPS情報送信部303、表示制御部304、通知制御データ送信部305を含むコンピュータシステムである。本実施形態における携帯型端末106の動作は、例えば、プロセッサ301がメモリ302上でプログラムを実行することにより実現される。GPS情報送信部303は、GPS314により取得されたGPS情報を通信I/F313を介して外部に送信する。表示制御部304は、表示部311での表示を制御する。通知制御データ送信部305は、サーバ101から送信された通知制御データに基づいて、車両105で用いられる通知制御データを生成し、通信I/F313を介して車両105へ送信する。
記憶部310は、携帯型端末106が動作するためのプログラムやデータ、および本実施形態の動作で必要なプログラムやデータを記憶する。例えば、サーバ101により提供されるアプリケーションが記憶部310に記憶される。例えば、携帯型端末106のユーザは、そのアプリケーションを起動し、設定画面上で、サーバ101への登録、車両105の制御部200とのペアリングを行う。表示部311は、例えばタッチパネルであり、携帯型端末106のユーザに対して、各種ユーザインタフェース画面を表示する。なお、本実施形態では、携帯型端末106のユーザは、車両105の搭乗者に対応する。操作部312は、ユーザからの操作を受付可能であり、ハードキー、タッチパネル上に表示されるソフトキーを含む。GPS(Global Positioning System)314は、携帯型端末106の現在位置を検出するための位置検出機構である。通信I/F313は、外部との無線通信118を可能とする。なお、通信I/F313は、通信距離が異なる複数の無線通信に対応するように構成されても良い。携帯型端末106は、図3に示すブロック構成に限られず、例えば、携帯型端末106の機能に応じた機能ブロックを適宜含む。
本実施形態では、車両105は鞍乗り型二輪車両であるとして説明するが、他のタイプの車両、例えば四輪車両であっても良い。その場合、図2の制御部200と図3の制御部300が四輪車両に一体的に構成されるようにしても良い。
図4は、サーバ101のブロック構成を示す図である。制御部400は、サーバ101を統括的に制御する。制御部400は、制御部400内の動作を統括的に制御するCPUやGPU等のプロセッサ401、メモリ402、撮像データ受信部403、画像認識部404、画像処理部405、死角領域特定部406、通知制御データ送信部407、基準画像データ取得部408、車両情報取得部409を含むコンピュータシステムである。本実施形態におけるサーバ101の動作は、例えば、プロセッサ401がメモリ402上でプログラムを実行することにより実現される。撮像データ受信部403は、建物102、公共設備103や車両104から送信された撮像データを受信する。本実施形態では、この撮像データには、例えば、停止車両を含む道路脇近辺の領域が撮像されている。画像認識部404は、例えば、クラス分類等の手法を用いて、撮像データ受信部403により受信された撮像データ上でオブジェクトを認識する。画像処理部405は、例えば、画像データ上のオブジェクトのモデル化を行う。画像処理部110、111、112は、画像処理部405と同様の画像処理を実行可能である。死角領域特定部406は、撮像データ受信部403により受信された撮像データに基づいて、例えば、道路脇の停止車両により発生した死角領域を特定する。通知制御データ送信部407は、死角領域特定部406による死角領域の特定結果に基づいて、後述する通知制御データを生成して携帯型端末106に送信する。
基準画像データ取得部408は、撮像データ受信部403により受信された撮像データに基づいて基準画像データを生成する。基準画像データとは、突発的な死角領域が発生していない状態を表す画像データであり、例えば上述のケースでいえば、停止車両が存在していない状態を表す撮像データである。基準画像データ取得部408は、定期的に、建物102、公共設備103、車両104の各撮像部から撮像データを収集し、歩行者や自転車等の移動体を認識し、それらを除外した画像データを基準画像データとして生成する。基準画像データ取得部408は、生成された基準画像データを基準画像データ421として記憶部420に格納する。基準画像データ取得部408が基準画像データの生成を定期的に行うことにより、基準画像データ421は定期的に更新されていく。その結果、図9で後述する障害物の認識の精度の低下を防ぐことができる。車両情報取得部409は、携帯型端末106のGPS情報送信部303により送信されたGPS情報を取得する。また、車両情報取得部409は、車両105の搭乗者によりアプリケーションを介して予め登録された車両105の車種や車高等の情報を取得可能である。
記憶部420は、サーバ101が動作するためのプログラムやデータ、および本実施形態の動作で必要なプログラムやデータを記憶する。また、記憶部420は、基準画像データ421、地図情報422を記憶する。基準画像データ421は、基準画像データ取得部408により取得された基準画像データである。地図情報422は、例えば地図データベースである。なお、地図情報422は、記憶部420内に構成されずに、外部のデータベースサーバから取得するようにしても良い。記憶部420は、他の情報を記憶しても良く、例えば、携帯型端末106のユーザ情報と、車両105の車両情報(車種等)とを互いに対応づけて記憶しても良い。
表示部430は、例えばディスプレイであり、サーバ101のユーザに対して、各種ユーザインタフェース画面を表示する。操作部431は、ユーザからの操作を受付可能であり、例えば、キーボードやポインティングデバイスである。通信I/F432は、基地局113、117、ネットワーク115、116との間の通信を可能とする。サーバ101は、図4に示すブロック構成に限られず、例えば、サーバ101の機能に応じた機能ブロックを適宜含む。例えば、凍結などの路面情報や気象情報のデータベースを含んでも良い。なお、図4では、サーバ101は1つの装置として示されているが、複数の装置で構成されても良い。即ち、本実施形態におけるサーバ101は、1つの装置でサーバ機能を提供する構成、複数の装置で連携してサーバ機能を提供する構成、を含む。
以下、図5を参照しながら、本実施形態の動作について説明する。図5(a)に示すように、車両501が道路上を矢印方向に走行している。また、道路に対して脇道509があり、道路と脇道のコーナー部分には、建物504が存在する。建物504には、コーナー部分を監視する監視カメラである撮像部505が設けられている。また、脇道の公共設備には、脇道部分を監視する監視カメラである撮像部506が設けられている。また、道路上を、車両501の他に、外部を認識するためのカメラ等の撮像部508が設けられた車両507が走行している。車両501は、図1の車両105に対応し、建物504は、建物102に対応する。また、撮像部505は図1の撮像部107に対応し、撮像部506は撮像部108に対応する。また、車両507は、図1の車両104に対応する。
図5(a)に示す状況において、道路脇には、停止車両502が一時的に停車している。ここで、図5(a)に示す状況から、車両501が矢印方向に進行し、図5(b)に示す状況となった場合を想定する。例えば、停止車両502の車高が車両501の搭乗者の目の位置よりも高い場合には、車両501の搭乗者から見て、線510で挟まれた停止車両502の奥側の領域は死角領域となる。そのような状況で、例えば、脇道509を自転車503が図5(a)および図5(b)に示すように移動してきた場合、停止車両502が存在しないときには、車両501の搭乗者から自転車503が見えていたのに対し、停止車両502により発生した死角領域のため、車両501の搭乗者から自転車503が見えなくなってしまう。
そこで、本実施形態では、撮像部505、506、508により撮像された撮像データに基づいて停止車両502が認識されると、車両501の搭乗者に対して、停止車両502により死角領域が発生している旨を通知する。そのような構成により、車両501の搭乗者に対して、突発的に発生した死角領域を意識させることができる。
図6は、車両105において実行される処理を示すフローチャートである。図6の処理は、例えば、プロセッサ201がメモリ202上でプログラムを実行することにより実現される。
S101において、プロセッサ201は、通知制御部203により、携帯型端末106から通知制御データを受信したか否かを判定する。ここで、通知制御データを受信していないと判定された場合、S101からの処理を繰り返す。一方、通知制御データを受信したと判定された場合、S102において、プロセッサ201は、通知制御部203により、通知制御データに基づいて通知部215に通知させるようECU210に要求する。例えば、携帯型端末106から送信された「左側に死角領域あり」を表すデータをECU210が処理可能な信号、例えば左側のLEDを点灯させる信号に変換し、ECU210に送信する。S102の後、S101からの処理を繰り返す。また、通知部215は、スピーカにより音声出力する構成やパネルに表示出力する構成であっても良く、その場合、携帯型端末106から送信されたデータに基づいて音声出力やメッセージ出力するようにしても良い。また、プロセッサ201は、通知制御部203により、通知制御データに基づいて操舵部213のハンドルを振動させるようECU210に要求するようにしても良い。
図7は、携帯型端末106において実行される処理を示すフローチャートである。図7の処理は、例えば、プロセッサ301がメモリ302上でプログラムを実行することにより実現される。
S201において、プロセッサ301は、GPS情報送信部303により、GPS314により取得されたGPS情報を、携帯型端末106もしくは車両105の識別情報とともにサーバ101へ送信する。本実施形態では、携帯型端末106のGPS情報が車両105のGPS情報として用いられる。また、車両105からGPS情報を受信してサーバ101へ送信するようにしても良い。
S202において、プロセッサ301は、通知制御データ送信部305により、サーバ101から通知制御データを受信したか否かを判定する。ここで、通知制御データを受信していないと判定された場合、S201からの処理を繰り返す。一方、通知制御データを受信したと判定された場合、S203に進む。
ここで、通知制御データについて説明する。通知制御データは、死角領域が車両105の進行方向に対していずれの方向に存在するかを示す情報であり、例えばパネル等への表示用データとして受信する。図16(a)の表示画面1600は、通知制御データにより表示される表示画面の一例を示す図である。携帯型端末106は、サーバ101から受信した通知制御データに基づいて、表示部311に表示画面1600を表示可能である。
表示画面1600では、表示領域1601が表示される。表示領域1601の車両1602は、車両105に対応し、死角領域が発生する際の車両105の仮想位置を示している。図16(a)では、車両105の進行方向左側に障害物1603による死角領域1604があることがグラフィカルに表示される。また、表示領域1605には、「まもなく、左方向に、障害物による死角領域があります!」といったメッセージが表示され、車両105の搭乗者に対して注意を促すことができる。
S203において、プロセッサ301は、通知制御データ送信部305により、サーバ101から受信した通知制御データから、車両105の通知部215で通知可能な通知制御データを生成し、車両105に送信する。例えば、車両105の通知部215が左方向と右方向のいずれかをLEDで通知する構成であれば、プロセッサ301は、通知制御データ送信部305により、サーバ101から受信した通知制御データから、「左方向」に対応するデータを通知制御データとして車両105に送信する。
S204において、プロセッサ301は、表示制御部304により、サーバ101から受信した通知制御データに基づいて、表示部311に表示させる。S204では、例えば、表示画面1600が表示される。S204の後、S201からの処理を繰り返す。
上記では、S203においてプロセッサ301が、サーバ101から受信した通知制御データから、車両105での制御に用いられる通知制御データを生成すると説明した。しかしながら、プロセッサ301は、サーバ101から受信した通知制御データを車両105に転送するようにしても良い。その場合、車両105の通知制御部203が、携帯型端末106から受信した通知制御データから、通知部215もしくは操舵部213により通知可能な通知制御データを生成する。
また、上記では、S204で表示を行うと説明したが、S204の処理を行わずに、S203の後、S201からの処理を繰り返すようにしても良い。また、S204での表示を行うか否かを車両105の搭乗者が携帯型端末106の表示部311に表示されるユーザインタフェース画面上で設定可能としても良い。そのような構成により、例えば、携帯型端末106が車両105にアタッチメントで取り付けられている場合には、S204で表示を行い、携帯型端末106が車両105の搭乗者のバッグ等に収納されている場合には、S204の表示を行わないといった表示制御を可能とすることができる。
図8は、サーバ101において実行される処理を示すフローチャートである。図8の処理は、例えば、プロセッサ401がメモリ402上でプログラムを実行することにより実現される。
S301において、プロセッサ401は、撮像データ受信部403により、撮像データを受信する。ここで、受信される撮像データは、車両105及び携帯型端末106で撮像された撮像データではなく、建物102の撮像部107で撮像された撮像データ、公共設備103の撮像部108で撮像された撮像データ、車両104の撮像部109で撮像された撮像データの少なくともいずれかである。
S302において、プロセッサ401は、画像認識部404により、障害物の認識を行い、S303において、障害物があるか否かを判定する。
図9は、S302の障害物の認識処理を示すフローチャートである。S401において、プロセッサ401は、基準画像データ421を記憶部420から取得する。S402において、プロセッサ401は、基準画像データ421と、S301で受信された撮像データとを比較し、S403において、比較の結果、差分があるか否かを判定する。例えば、所定サイズ(例えば所定の高さ)以上の、基準画像データ421にはない静止物体が撮像データにおいて認識された場合、差分があると判定する。若しくは、道路脇に停車している停止車両が撮像データにおいて認識された場合に、差分があると判定するようにしても良い。例えば、画像認識部404は、ナンバープレートを認識したオブジェクトで所定時間停止している車両を停止車両と認識するようにしても良い。
また、歩行者や自転車等の移動物に関しては判定対象から除外し、その認識処理を行わないようにしても良い。そのような構成により、判定処理をより効率化することができる。S403で差分があると判定された場合、S404で障害物ありと認識し、その認識結果をメモリ402等の記憶領域に格納する。一方、差分がないと判定された場合、障害物なしと認識し、その認識結果をメモリ402等の記憶領域に格納する。S404及びS405の後、図9の処理を終了する。
図8のS303において、プロセッサ401は、S302の障害物の認識結果に基づいて障害物があるか否かを判定し、障害物がないと判定された場合、S301からの処理を繰り返す。その際、一旦、S303で障害物ありと認識され且つ後段のS305で接近中の車両がないと判定され、再度S303で障害物がないと判定された場合には、S309において、プロセッサ401は、S304でモデル化したデータ等をクリアし、S301からの処理を繰り返す。なお、上記のケースとは、例えば、一時停車した停止車両が再び走行を開始したケースである。一方、障害物があると判定された場合、S304に進む。S304において、プロセッサ401は、画像処理部405により、障害物のモデル化を行う。
図15は、S304の障害物のモデル化を説明するための図である。図15(a)は、車両501が停止車両502に接近した様子を示す図である。画像処理部405は、画像認識部404の認識結果に基づいて、停止車両502の簡略化モデルを生成する。例えば、画像処理部405は、認識された停止車両502の凹凸形状から、最大車幅、最大車高、最大車長を求め、それらの値から直方体モデルを生成する。即ち、画像処理部405は、停止車両502の認識結果から、停止車両502の外接直方体モデルを生成する。
図15(b)の停止車両モデル1502は、図15(a)の停止車両502の水平方向の簡略化モデルである。また、図15(c)は、図15(a)を図中左から見た図であり、図15(d)は、図15(b)を図中左から見た図である。図15(d)の停止車両モデル1502は、図15(c)の停止車両502の垂直方向の簡略化モデルである。
S304で障害物のモデル化が行われた後、S305において、プロセッサ401は、車両情報取得部409により、障害物を含む所定のエリアに接近中の車両があるか否かを判定する。ここで、接近中の車両がないと判定された場合、S301からの処理を繰り返す。一方、接近中の車両があると判定された場合、S306に進む。S306において、プロセッサ401は、死角領域特定部406により、死角領域の特定を行う。
図10は、S306の死角領域の特定処理を示すフローチャートである。S501において、プロセッサ401は、車両501の車種や車高等の車両に関する情報に基づいて、車両501の搭乗者の目の高さに位置する点を推定する。ここで、車両501の車両に関する情報は、例えば、車両501の搭乗者から携帯型端末106のアプリケーションを介してサーバ101に予め登録されるようにしても良い。図15(b)及び図15(d)の車両モデル1501は、S501において推定された点を車両501のモデルとしたものである。図15(d)に示すように、車両モデル1501は、車両501の搭乗者の目の高さ1503に位置付けられている。
S502において、プロセッサ401は、死角領域の特定において用いられる着目点の初期位置を設定する。図15(a)の区間1520は、停止車両502を基準として車両501の走行上に定められた所定区間である。例えば、区間1520は、停止車両502から車幅方向に所定距離1521離れた走行経路上で、且つ、停止車両502の先端から後方に向かっての10mの区間である。なお、区間1520および所定距離1521は、車両502のサイズに応じて決定されるようにしても良い。S502では、区間1520の開始点(車両502から最も後方に離れた位置、上記の例での10m後方の位置)が着目点の初期位置として設定される。また、区間1520および所定距離1521は、車両501の状態、例えば速度に基づいて決定されても良い。例えば、車両501が閾値以上の速度で接近している場合には、区間1520をより短くする。そのことにより、S503~S509の処理の繰り返し回数をより少なくし、S308の通知の処理が行われるまでの時間をより短くすることができる。
S503において、プロセッサ401は、水平方向の死角領域を特定する。例えば、車両モデル1501から停止車両モデル1502に対して2本の接線1500を定め、それらの間の領域を水平方向の死角領域として特定する。S504において、プロセッサ401は、垂直方向の死角領域を特定する。例えば、車両モデル1501から停止車両モデル1502に対して2本の接線1510を定め、それらの間の領域を垂直方向の死角領域として特定する。
S505において、プロセッサ401は、特定された死角領域が条件を満たすか否かを判定する。例えば、2本の接線1500の成す角度および2本の接線1510の成す角度が両方ともに所定以上であれば、条件を満たすと判定する。また、例えば、2本の接線1500の成す角度および2本の接線の成す角度のいずれかが所定未満であれば、条件を満たさないと判定する。S505で条件を満たすと判定された場合、S506において、プロセッサ401は、死角領域が発生していると判定し、その判定結果をメモリ402等の記憶領域に格納する。一方、S505で条件を満たさないと判定された場合、S507において、プロセッサ401は、死角領域が発生していないと判定し、その判定結果をメモリ402等の記憶領域に格納する。S506及びS507の後、S508に進む。
S508において、プロセッサ401は、S502で設定された着目点の位置を車両501の進行方向へ所定距離分インクリメントし、S509において、インクリメントされた着目点の位置が区間1520内であるか否かを判定する。区間1520内であると判定された場合、S503からの処理を繰り返す。一方、区間1520内でないと判定された場合、即ち、車両502の先頭に対応する位置に到達した場合、図10の処理を終了する。
再び、図8を参照する。S307において、プロセッサ401は、S506もしくはS507で記憶領域に格納された判定結果に基づいて、死角領域が発生しているか否かを判定する。死角領域が発生していないと判定された場合、図8の処理を終了する。一方、死角領域が発生していると判定された場合、S308に進む。
S308において、プロセッサ401は、通知制御データ送信部407により、死角領域が発生している旨を車両105に通知するための通知制御データを生成し、携帯型端末106に送信する。ここで、生成される通知制御データは、例えば、操舵部213のハンドルを振動させるための制御データや、図16(a)の表示画面1600を表示するための表示データである。表示データの場合、表示領域1601で表示される画面は、例えば、図10の処理において2本の接線1500の成す角度が最も大きい状態に基づいて生成されるようにしても良い。S308の後、図8の処理を終了する。
図8の処理は、S301~S305と、S306~S308とで各々独立した処理として実行されても良い。例えば、S301~S305は、S305で接近中の車両があると判定された場合でも一定の時間間隔で繰り返すようにしても良い。
以上のように、本実施形態によれば、道路脇に一時的に停車している停止車両によって死角領域が突発的に発生していると判定される場合、その近辺に接近中の車両105に対して、死角領域の発生の旨を通知することができる。また、死角領域の発生の判定は、接近中の車両105のサイズに基づいて判定される。例えば、車両105が大型車両で車高が高く、停止車両の車高が低い場合には、接線1510間の角度が所定未満となり、図10のS505で死角領域の条件を満たさないと判定される。その場合には、車両105には通知は行われないので、不要な通知を行ってしまうことを防ぐことができる。
図8のS304で説明したように、本実施形態では、サーバ101のプロセッサ401が画像処理部405により、S301で取得した撮像データに基づいて簡略化モデルの生成を行っていた。ここで、簡略化モデルの生成をサーバ101以外で行うようにしても良い。例えば、建物102、公共設備103、車両104の画像処理部110、111、112で行うようにしても良い。
図17は、サーバ101以外の装置における処理を示すフローチャートである。図17の処理は、例えば、各画像処理部が構成された装置のプロセッサがメモリ上でプログラムを実行することにより実現される。
S901において、プロセッサは、基準画像データをサーバ101から取得する。例えば、建物102及び公共設備103のプロセッサは、所定の時刻にサーバ101から定期的に取得するようにしても良い。また、車両104のプロセッサは、例えば、建物102や公共設備103の近傍の交差点などで一時停止した際に基準画像データを取得するようにしても良い。
S902において、プロセッサは、撮像部により撮像された撮像データを取得する。ここでの撮像部は、例えば、建物102、公共設備103、車両104の撮像部107、108、109である。
S903において、プロセッサは、S901で取得された基準画像データと、S902で撮像された撮像データとを比較し、S904において、比較の結果、差分があるか否かを判定する。図9のS402と同様、道路脇に停車している停止車両が撮像データ上で認識された場合に、差分があると判定する。例えば、ナンバープレートを認識したオブジェクトで所定時間停止している車両を停止車両と認識する。一方、歩行者や自転車等の移動物に関しては、判定対象としない。S904で差分がないと認識された場合、S902からの処理を繰り返す。ここで、車両104については、一時停止から走行を再開している場合には、図17の処理を終了するようにしても良い。S904で差分があると認識された場合、S905において、プロセッサは、画像処理部により、障害物のモデル化を行う。S905で行われるモデル化の処理は、S304で行われるモデル化の処理と同様である。そして、S906において、プロセッサは、S905で生成された簡略化モデルをその位置情報とともにサーバ101に送信する。その後、図17の処理を終了する。S906で送信された簡略化モデルは、接近中の車両があった場合に、図8のS306における死角領域の特定処理で用いられる。
このように、サーバ101以外の装置で簡略化モデルを生成することにより、建物102、公共設備103、車両104からの撮像データの送信と比べ、より通信量を抑え、通信効率を向上させることができる。
[第2実施形態]
第1実施形態では、停止車両の近辺に接近中の車両105に対して死角領域の発生の旨を通知する構成を説明した。本実施形態では、さらに、死角領域内に自転車等の移動物が存在し且つ停止車両からの飛び出しのおそれがある場合には、その移動物の存在を車両105に対して通知する。以下、第2実施形態について、第1実施形態と異なる点について説明する。
図11は、サーバ101において実行される処理を示すフローチャートである。図11の処理は、例えば、プロセッサ401がメモリ402上でプログラムを実行することにより実現される。図11のS601~S607、S612は、図8のS301~S307、S309における説明と同じであるので、それらの説明を省略する。
S607で死角領域が発生していると判定された場合、S608において、プロセッサ401は、画像認識部404により、警戒物の認識を行い、S609において、警戒物があるか否かを判定する。
図12は、S608の警戒物の認識処理を示すフローチャートである。S701において、プロセッサ401は、S601取得された撮像データ上で移動体が認識されたか否かを判定する。移動体が認識されていないと判定された場合、S706において、プロセッサ401は、警戒物なしと認識し、その認識結果をメモリ402等の記憶領域に格納する。一方、移動体が認識されたと判定された場合、S703に進む。
S703において、プロセッサ401は、認識された移動体のサイズが所定サイズ以上であるか否かを判定する。例えば、認識された移動体の高さ方向のサイズについて所定以上であるか否かを判定するようにしても良い。S703で所定サイズ以上でないと判定された場合、S706に進む。一方、所定サイズ以上であると判定された場合、S704に進む。
S704において、プロセッサ401は、認識された移動体が所定の方向に移動しているか否かを判定する。例えば、プロセッサ401は、認識された移動体が脇道509を停止車両502の方向に移動しているか否かを判定する。S704で所定の方向に移動していないと判定された場合、S706に進む。一方、所定の方向に移動していると判定された場合、S705に進み、プロセッサ401は、警戒物ありと認識し、その認識結果をメモリ402等の記憶領域に格納する。S705及びS706の後、図12の処理を終了する。
図12の処理により、例えば、風に吹かれて移動している小さなビニール袋や、脇道509を停止車両502と反対方向に移動している歩行者は、警戒物として認識されないので、警戒物を適切に認識することができる。
図11のS609において、プロセッサ401は、S608の警戒物の認識結果に基づいて警戒物があるか否かを判定し、警戒物があると判定された場合、S610に進み、警戒物がないと判定された場合、S611に進む。S611は、図8のS308における説明と同じであるので、その説明を省略する。
図13は、S610の通知処理を示すフローチャートである。S801において、プロセッサ401は、認識された警戒物の挙動を分析し、S802において、警戒物からの死角領域の変化を取得する。
図14(a)は、警戒物からの死角領域の変化を説明するための図である。図14(a)は、自転車である移動体503が位置1401から位置1402まで移動している様子を示している。プロセッサ401は、死角領域特定部406により、移動体503の中心点から停止車両502の簡略化モデルに対して、図15(b)と同様に2本の接線を設定する。移動体503から見て、2本の接線に挟まれ且つ停止車両502の奥側の領域が死角領域となる。図14(a)では、移動体503が位置1401から位置1402まで移動するにつれて、接線1403が接線1404に変化していき、死角領域が広がっていく様子が示されている。つまり、プロセッサ401は、移動体503の速度から、移動体503からの死角領域の変化を取得することができる。
図14(b)は、車両501が位置1411から位置1412まで移動している様子を示している。プロセッサ401は、死角領域特定部406により、図15(b)で説明したように、車両501のモデルから停止車両502の簡略化モデルに対して、2本の接線を設定する。図14(b)では、車両501が位置1411から位置1412まで移動するにつれて、接線1413が接線1414に変化していき、死角領域が広がっていく様子が示されている。つまり、プロセッサ401は、車両501の速度から、車両501からの死角領域の変化を取得することができる。
S803において、プロセッサ401は、区間1520での車両501の移動による車両501からの死角領域の変化と、S802で取得された移動物503からの死角領域の変化とに基づいて、死角領域の重複が発生するか否かを判定する。プロセッサ401は、車両501が移動物503からの死角領域内に位置し、且つ、移動物503が車両501からの死角領域内に位置する場合に、死角領域の重複(相互死角領域)が発生すると判定する。例えば、車両501が位置1412に位置するときに移動体503が位置1402に位置する場合、移動体503は車両501からの死角領域内に位置し、車両501は移動体503からの死角領域内に位置する。その場合、死角領域の重複が発生すると判定する。一方、車両501が位置1412に位置するときに移動体503の位置がまだ位置1401である場合には、移動体503は車両501からの死角領域内に位置せず、車両501は移動体503からの死角領域内に位置しない。その場合、死角領域の重複が発生しないと判定する。S803で死角領域の重複が発生しないと判定された場合、S805に進む。S805は、図8のS308における説明と同じであるので、その説明を省略する。S803で死角領域の重複が発生すると判定された場合、S804に進む。
S804において、プロセッサ401は、通知制御データ送信部407により、死角領域が発生している旨を車両105に通知するための通知制御データを生成し、携帯型端末106に送信する。ここで生成される通知制御データについて、図16(b)を参照しながら説明する。
図16(b)は、S804により生成された通知制御データにより表示される表示画面1610の一例を示す図である。携帯型端末106は、サーバ101から受信した通知制御データに基づいて、表示部311に表示画面1610を表示可能である。
表示画面1610では、表示画面1600と同様に、表示領域1601が表示される。図16(b)では、図16(a)と異なり、警戒物1607とその移動方向1608がさらにグラフィカルに表示される。また、表示領域1606には、「まもなく、左方向に、障害物による死角領域があります!歩行者等に注意してください!」といったメッセージが表示され、車両105の搭乗者に対して歩行者の飛び出し等の可能性を認識させることができる。S804及びS805の後、図13の処理を終了する。
以上のように、本実施形態によれば、道路脇に一時的に停車している停止車両によって死角領域が突発的に発生し、且つ、その死角領域に歩行者等の移動体が存在すると判定される場合、その近辺に接近中の車両105に対して、死角領域の発生の旨および移動体への警戒を通知することができる。
また、本実施形態では、警戒物1607の存在を表示画面1610で表示させる例として説明したが、他の構成により、警戒物1607の存在を通知するようにしても良い。例えば、車両105の通知部215に警戒物1607の存在を示すLEDを設け、その点灯により、警戒物1607の存在を通知するようにしても良い。
また、図8の処理と図11の処理とを選択的に実行するよう、車両105の搭乗者によりアプリケーションを介して予め設定可能としても良い。
<実施形態のまとめ>
上記実施形態の走行支援システムは、車両の走行を支援するサーバを含む走行支援システム(100)であって、前記サーバ(101)は、車両の走行路上の障害物(502)を認識する認識手段(404、S302)と、前記障害物に接近する接近車両(501)を検出すると、前記認識手段により認識された前記障害物により発生する死角領域(510)を取得する取得手段(406、S306)と、前記取得手段により取得された前記死角領域の情報を前記接近車両に通知する通知手段(407、S308)と、を備え、前記サーバは、前記接近車両を除く装置に構成されていることを特徴とする。
そのような構成により、例えば、接近車両ごとに高価な検出デバイスを備えることなく、一時的に停車した車両により発生した死角領域を接近車両に通知することができる。
また、前記認識手段は、前記接近車両を除く装置に設けられている撮像手段(107、108、109)により撮像された撮像データに基づいて、前記障害物を認識することを特徴とする。また、前記接近車両を除く装置は、建物(102)、公共設備(103)、前記接近車両と異なる車両(104)の少なくともいずれかであることを特徴とする。
そのような構成により、例えば、建物、公共設備、四輪車両に設けられているカメラの撮像データに基づいて、一時的に停車した車両を認識することができる。
また、前記認識手段は、前記撮像データのオブジェクトが第1条件を満たす場合に、当該オブジェクトを前記障害物として認識することを特徴とする。また、前記第1条件は、前記オブジェクトのサイズが閾値以上であることを特徴とする。
そのような構成により、例えば、所定の車高以上の停止車両を障害物として認識することにより、障害物を適切に認識することができる。
また、前記通知手段は、前記死角領域の有無を前記接近車両に通知することを特徴とする。
そのような構成により、例えば、一時的に停車した車両により発生した死角領域の有無を接近車両に通知することができる。
また、前記死角領域に第2条件を満たす移動体を検出した場合、前記通知手段は、前記移動体の情報を前記接近車両に通知することを特徴とする。また、前記第2条件は、前記障害物により発生する前記接近車両と前記移動体との間に相互死角領域があることであることを特徴とする。
そのような構成により、例えば、移動体としての歩行者の飛び出しを警告通知することができる。
また、前記取得手段は、前記接近車両の仮想位置に基づいて、前記死角領域を取得することを特徴とする。
そのような構成により、例えば、接近車両が障害物の傍らを通過するであろう経路に基づいて、死角領域を取得することができる。
また、走行支援システムは、前記障害物のモデルを生成する生成手段(405、S304)、をさらに備え、前記取得手段は、前記接近車両の仮想位置から前記生成手段により生成された前記障害物のモデルに対して設定された接線を用いて、前記死角領域を取得することを特徴とする。また、前記障害物のモデルは、前記障害物の外郭を簡略化したモデルであることを特徴とする。
そのような構成により、例えば、一時的に停車した車両の外郭と、仮想位置にある接近車両とに基づいて、死角領域を取得することができる。
また、前記生成手段は、前記サーバと異なる装置に設けられていることを特徴とする。
そのような構成により、サーバと、サーバと異なる装置との間のデータ通信容量を低減することができる。
発明は上記の実施形態に制限されるものではなく、発明の要旨の範囲内で、種々の変形・変更が可能である。
100 走行支援システム: 101 サーバ: 102 建物: 103 公共設備: 104、105 車両: 106 携帯型端末: 200、300、400 制御部: 201、301、401 プロセッサ: 202、302、402 メモリ

Claims (16)

  1. 車両の走行を支援するサーバを含む走行支援システムであって、
    前記サーバは、
    車両の走行路上の静止物を認識する認識手段と、
    前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識手段により認識された前記静止物により発生する死角領域の有無を判定する判定手段と、
    前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定手段と、
    前記判定手段により前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定手段により特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知手段と、を備え、
    前記サーバは、前記接近車両を除く装置に構成されている、
    ことを特徴とする走行支援システム。
  2. 前記通知手段は、前記特定手段により前記死角領域内に存在する移動体が前記接近車両への通知対象となる移動体であると特定された場合と、前記特定手段により前記死角領域内に存在する移動体が前記接近車両への通知対象となる移動体であると特定されなかった場合との間で前記接近車両への通知を異ならせることを特徴とする請求項1に記載の走行支援システム。
  3. 前記特定手段は、前記死角領域内に存在し所定の方向に移動している移動体が前記接近車両への通知対象となる移動体であると特定することを特徴とする請求項1又は2に記載の走行支援システム。
  4. 前記認識手段は、前記接近車両を除く装置に設けられている撮像手段により撮像された撮像データに基づいて、前記静止物を認識することを特徴とする請求項1乃至3のいずれか1項に記載の走行支援システム。
  5. 前記接近車両を除く装置は、建物、公共設備、前記接近車両と異なる車両の少なくともいずれかであることを特徴とする請求項4に記載の走行支援システム。
  6. 前記認識手段は、前記撮像データのオブジェクトが第1条件を満たす場合に、当該オブジェクトを前記静止物として認識することを特徴とする請求項4又は5に記載の走行支援システム。
  7. 前記第1条件は、前記オブジェクトのサイズが閾値以上であることを特徴とする請求項6に記載の走行支援システム。
  8. 前記通知手段は、前記死角領域の有無を前記死角領域の情報として前記接近車両に通知することを特徴とする請求項1乃至7のいずれか1項に記載の走行支援システム。
  9. 前記死角領域に第2条件を満たす移動体を検出した場合、前記通知手段は、該移動体の情報を前記接近車両に通知することを特徴とする請求項1乃至8のいずれか1項に記載の走行支援システム。
  10. 前記第2条件は、前記接近車両と前記移動体との間に前記静止物を介した相互死角領域があることであることを特徴とする請求項9に記載の走行支援システム。
  11. 前記判定手段は、前記接近車両の仮想位置に基づいて、前記死角領域の有無を判定することを特徴とする請求項1乃至10のいずれか1項に記載の走行支援システム。
  12. 前記静止物のモデルを生成する生成手段、をさらに備え、
    前記判定手段は、前記接近車両の仮想位置から前記生成手段により生成された前記静止物のモデルに対して設定された接線を用いて、前記死角領域の有無を判定することを特徴とする請求項11に記載の走行支援システム。
  13. 前記静止物のモデルは、前記静止物の外郭を簡略化したモデルであることを特徴とする請求項12に記載の走行支援システム。
  14. 前記生成手段は、前記サーバと異なる装置に設けられていることを特徴とする請求項12又は13に記載の走行支援システム。
  15. 車両の走行を支援するサーバを含む走行支援システムにおいて実行される走行支援方法であって、
    前記サーバが、
    車両の走行路上の静止物を認識する認識工程と、
    前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識工程において認識された前記静止物により発生する死角領域の有無を判定する判定工程と、
    前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定工程と、
    前記判定工程において前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定工程において特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知工程と、を有し、
    前記サーバは、前記接近車両を除く装置に構成されている、
    ことを特徴とする走行支援方法。
  16. 車両の走行を支援する走行支援システムのサーバを、
    車両の走行路上の静止物を認識する認識手段、
    前記静止物に接近する接近車両を検出すると、前記接近車両の情報および前記静止物の情報に基づいて、前記認識手段により認識された前記静止物により発生する死角領域の有無を判定する判定手段、
    前記死角領域内に存在する移動体の情報に基づいて、前記死角領域内に存在する移動体、前記接近車両への通知対象となる移動体であると特定する特定手段、
    前記判定手段により前記死角領域があると判定されたことに基づいて、前記死角領域の情報および前記特定手段により特定された前記死角領域内の移動体の情報を前記接近車両に通知する通知手段、として機能させるためのプログラムであり、
    前記サーバは、前記走行支援システムにおいて、前記接近車両を除く装置に構成されている、
    ことを特徴とするプログラム。
JP2019180642A 2019-09-30 2019-09-30 走行支援システム、走行支援方法およびプログラム Active JP7078587B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2019180642A JP7078587B2 (ja) 2019-09-30 2019-09-30 走行支援システム、走行支援方法およびプログラム
CN202010951503.2A CN112581792B (zh) 2019-09-30 2020-09-11 行驶辅助系统、行驶辅助方法及计算机可读取存储介质
US17/020,767 US11554777B2 (en) 2019-09-30 2020-09-14 Travel support system, travel support method, and non-transitory computer-readable storage medium storing program
DE102020125061.4A DE102020125061A1 (de) 2019-09-30 2020-09-25 Fahrunterstützungssystem, fahrunterstützungsverfahren, programm und nicht flüchtiges computer-lesbares speichermedium, welches das programm speichert

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019180642A JP7078587B2 (ja) 2019-09-30 2019-09-30 走行支援システム、走行支援方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2021056873A JP2021056873A (ja) 2021-04-08
JP7078587B2 true JP7078587B2 (ja) 2022-05-31

Family

ID=74873349

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019180642A Active JP7078587B2 (ja) 2019-09-30 2019-09-30 走行支援システム、走行支援方法およびプログラム

Country Status (4)

Country Link
US (1) US11554777B2 (ja)
JP (1) JP7078587B2 (ja)
CN (1) CN112581792B (ja)
DE (1) DE102020125061A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116195245A (zh) * 2020-09-29 2023-05-30 索尼半导体解决方案公司 物体检测系统及物体检测方法
WO2022210492A1 (ja) 2021-03-30 2022-10-06 三菱ケミカル株式会社 ポリオルガノシロキサン含有重合体、組成物、及び成形体
JP7533372B2 (ja) 2021-06-17 2024-08-14 トヨタ自動車株式会社 情報処理装置、情報処理方法、及びプログラム
US12087143B2 (en) * 2022-06-21 2024-09-10 Toyota Jidosha Kabushiki Kaisha Notification system and notification method

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008041058A (ja) 2006-08-10 2008-02-21 Sumitomo Electric Ind Ltd 死角移動体を報知するための報知システム、画像処理装置、車載装置及び報知方法
JP2010079565A (ja) 2008-09-25 2010-04-08 Toyota Motor Corp 運転支援装置
US20160148513A1 (en) 2014-11-20 2016-05-26 Here Global B.V. Method and apparatus for providing line-of-sight obstruction notification for navigation

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3895225B2 (ja) * 2002-07-10 2007-03-22 本田技研工業株式会社 車両用警告システム
EP1799351B1 (en) * 2004-09-08 2018-01-31 Alfa Laval Corporate AB Centrifuge nozzle and method and apparatus for inserting said nozzle into a centrifuge bowl
JP4517393B2 (ja) * 2005-02-16 2010-08-04 株式会社デンソー 運転支援装置
JP2006323666A (ja) 2005-05-19 2006-11-30 Denso Corp 歩行者飛び出し警報システム
JP2010055157A (ja) * 2008-08-26 2010-03-11 Panasonic Corp 交差点状況認識システム
JP5475138B2 (ja) * 2010-09-08 2014-04-16 トヨタ自動車株式会社 移動物予測装置、仮想可動物予測装置、プログラム、移動物予測方法、及び仮想可動物予測方法
KR101240469B1 (ko) * 2010-11-23 2013-03-11 현대모비스 주식회사 객체 인식 시스템, 차량용 장애물 인식 시스템 및 차량용 장애물 인식 방법
WO2012131871A1 (ja) * 2011-03-28 2012-10-04 パイオニア株式会社 情報表示装置、制御方法、プログラム、及び記憶媒体
EP2743901B1 (en) * 2011-08-10 2018-10-31 Toyota Jidosha Kabushiki Kaisha Driving assistance device
US9842503B2 (en) * 2014-07-28 2017-12-12 Mitsubishi Electric Corporation Driving support apparatus and driving support method
US9718404B2 (en) * 2015-10-01 2017-08-01 Ford Global Technologies, LLCS Parking obstruction locator and height estimator
US10849496B2 (en) * 2016-10-11 2020-12-01 Mitsubishi Electric Corporation Motion sickness estimation device, motion sickness prevention device, and motion sickness estimation method
JP6790998B2 (ja) * 2017-04-28 2020-11-25 株式会社Soken 障害物検知装置および制御装置
US11787287B2 (en) * 2017-11-17 2023-10-17 Aisin Corporation Vehicle drive assist system, vehicle drive assist method, and vehicle drive assist program
JP7192443B2 (ja) * 2018-11-29 2022-12-20 トヨタ自動車株式会社 情報提供システム、サーバ、車載装置、車両、プログラム及び情報提供方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008041058A (ja) 2006-08-10 2008-02-21 Sumitomo Electric Ind Ltd 死角移動体を報知するための報知システム、画像処理装置、車載装置及び報知方法
JP2010079565A (ja) 2008-09-25 2010-04-08 Toyota Motor Corp 運転支援装置
US20160148513A1 (en) 2014-11-20 2016-05-26 Here Global B.V. Method and apparatus for providing line-of-sight obstruction notification for navigation

Also Published As

Publication number Publication date
US11554777B2 (en) 2023-01-17
CN112581792A (zh) 2021-03-30
US20210094541A1 (en) 2021-04-01
DE102020125061A1 (de) 2021-04-01
JP2021056873A (ja) 2021-04-08
CN112581792B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
JP7078587B2 (ja) 走行支援システム、走行支援方法およびプログラム
JP6940612B2 (ja) ニアクラッシュ判定システムおよび方法
US11567510B2 (en) Using classified sounds and localized sound sources to operate an autonomous vehicle
US20200398743A1 (en) Method and apparatus for learning how to notify pedestrians
JP7192443B2 (ja) 情報提供システム、サーバ、車載装置、車両、プログラム及び情報提供方法
JP2022520968A (ja) 視覚画像データを用いたオブジェクト属性の推定
US10640035B2 (en) Out-of-vehicle notification device
JP2006085285A (ja) 危険車両予測装置
JP2016095697A (ja) 注意喚起装置
JP2015026234A (ja) 車両後側方警報装置、車両後側方警報方法および立体物検出装置
JP7205695B2 (ja) 運転支援システム
JP2023171455A (ja) 経路予測装置、それを備えた車載装置、経路予測システム、経路予測方法、及びコンピュータプログラム
JP5924395B2 (ja) 周辺車両情報通知装置
KR20220077125A (ko) 정보 처리 장치, 및 정보 처리 시스템, 그리고 정보 처리 방법
JP2015118555A (ja) 対向車情報生成装置
JP2014044458A (ja) 車載機器、及び、危険報知方法
JP2007122201A (ja) 車両用道路形状検出装置
JP7044747B2 (ja) 走行支援システム、走行支援方法
US20220250657A1 (en) Autonomous vehicle interaction system
US11893889B2 (en) Travel assistance system, travel assistance method, and non-transitory computer-readable storage medium that stores program
US11645038B1 (en) Augmented reality head-up display for audio event awareness
US20230298469A1 (en) Apparatus and method for cooperative escape zone detection
US20230316925A1 (en) Notification device, notification method, and program
US20230394971A1 (en) Information provision server, information provision method, and recording medium storing program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200831

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20210103

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210125

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210727

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210810

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20211001

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220516

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220519

R150 Certificate of patent or registration of utility model

Ref document number: 7078587

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150