JP2017151798A - 道路異常警告システム及び車載機 - Google Patents

道路異常警告システム及び車載機 Download PDF

Info

Publication number
JP2017151798A
JP2017151798A JP2016034635A JP2016034635A JP2017151798A JP 2017151798 A JP2017151798 A JP 2017151798A JP 2016034635 A JP2016034635 A JP 2016034635A JP 2016034635 A JP2016034635 A JP 2016034635A JP 2017151798 A JP2017151798 A JP 2017151798A
Authority
JP
Japan
Prior art keywords
road
vehicle
information
abnormality
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016034635A
Other languages
English (en)
Other versions
JP6699230B2 (ja
Inventor
絢 早川
Aya Hayakawa
絢 早川
晃 諏訪
Akira Suwa
晃 諏訪
竹嶋 進
Susumu Takeshima
進 竹嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Electric Industries Ltd filed Critical Sumitomo Electric Industries Ltd
Priority to JP2016034635A priority Critical patent/JP6699230B2/ja
Priority to CN201780011879.1A priority patent/CN108701405B/zh
Priority to PCT/JP2017/003125 priority patent/WO2017145650A1/ja
Priority to DE112017000997.9T priority patent/DE112017000997T5/de
Priority to US16/074,509 priority patent/US10446026B2/en
Publication of JP2017151798A publication Critical patent/JP2017151798A/ja
Application granted granted Critical
Publication of JP6699230B2 publication Critical patent/JP6699230B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • G08G1/0141Measuring and analyzing of parameters relative to traffic conditions for specific applications for traffic information dissemination
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096708Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control
    • G08G1/096716Systems involving transmission of highway information, e.g. weather, speed limits where the received information might be used to generate an automatic action on the vehicle control where the received information does not generate an automatic action on the vehicle control
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/096741Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where the source of the transmitted information selects which information to transmit to each vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/164Centralised systems, e.g. external to vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)

Abstract

【課題】確度の高い障害物情報に基づいて、精度良く道路上の異常を運転者に警告すると共に、即時性に優れた異常予告情報に基づいて、道路上の異常を予告することができる道路異常警告システムを提供する。【解決手段】道路異常警告システムは、道路の画像データ及び位置情報を収集して道路上の障害物を検出し、障害物情報を提供する道路情報提供装置6と、障害物情報を受信し、道路上の異常を運転者に警告する複数の車載機1とを備える。第1の車載機1は、道路を撮像し、道路の画像に含まれるオブジェクトを検出する。車載機1は、オブジェクトが検出された場合、当該画像データ及び位置情報を道路情報提供装置6へ送信すると共に、道路上の異常を予告する異常予告情報を第2の車載機1へ送信する。第2の車載機1は、第1の車載機1から送信された異常予告情報を受信し、道路上の異常を予告する。【選択図】図1

Description

本発明は、道路の異常を運転者に警告する道路異常警告システム及び車載機に関する。
車両の挙動を示す情報を収集し、車両が特異な走行を行った特異走行箇所を検出する特異走行箇所検出装置が開示されている(例えば、特許文献1)。特異走行箇所検出装置によって特定された特異走行箇所の情報は、車両を走行する他の車両へ提供される。
特開2015−138316号公報
しかしながら、特許文献1においては、車両が特異な走行を行った特定走行箇所に関する情報が提供されるのみであり、道路上の落下物、陥没等、車両走行の障害となる具体的で確度の高い障害物情報を車両に提供することができないという問題がある。また、サーバを経由して特異走行箇所の情報が提供される構成であるため、当該情報の提供が遅延するという問題があった。
本発明の目的は、車車間通信によって得られる即時性に優れた異常予告情報に基づいて、道路上の異常を予告すると共に、道路情報提供装置から提供される確度の高い障害物情報に基づいて、精度良く道路上の異常を運転者に警告することができる道路異常警告システム及び車載機を提供することを目的とする。
本態様に係る道路異常警告システムは、道路を撮像して得られる画像データ及び該道路の位置情報を収集して道路上の障害物を検出し、障害物が検出された道路の位置を示す障害物情報を提供する道路情報提供装置と、該道路情報提供装置から提供される障害物情報を受信し、受信した障害物情報に基づいて、道路上の異常を運転者に警告する複数の車載機とを備える道路異常警告システムであって、第1の前記車載機は、車両から道路を撮像して得た画像データを取得する画像データ取得部と、道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、前記車両の位置を検出する位置検出部と、前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を前記道路情報提供装置へ送信する画像データ送信部と、前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を第2の前記車載機へ送信する予告情報送信部とを備え、前記第2の車載機は、前記第1の車載機から送信された異常予告情報を受信する予告情報受信部と、該予告情報受信部にて異常予告情報を受信した場合、道路上の異常を予告する異常予告部とを備える。
本態様に係る車載機は、車両から道路を撮像して得た画像データを取得する画像データ取得部と、道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、前記車両の位置を検出する位置検出部と、前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を外部装置へ送信する画像データ送信部と、前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を他の車両へ送信する予告情報送信部とを備える。
なお、本願は、このような特徴的な処理部を備える道路異常警告システム及び車載機として実現することができるだけでなく、かかる特徴的な処理をステップとする道路異常警告方法として実現したり、かかるステップをコンピュータに実行させるためのプログラムとして実現したりすることができる。また、道路異常警告システム及び車載機の一部又は全部を実現する半導体集積回路として実現したり、道路異常警告システム及び車載機を含むその他のシステムとして実現したりすることができる。
上記によれば、車車間通信によって得られる即時性に優れた異常予告情報に基づいて、道路上の異常を予告すると共に、道路情報提供装置から提供される確度の高い障害物情報に基づいて、精度良く道路上の異常を運転者に警告することができる道路異常警告システム及び車載機を提供することが可能となる。
本発明の実施形態1に係る道路異常警告システムの一構成例を示す模式図である。 車載機の一構成例を示すブロック図である。 道路情報提供装置の一構成例を示すブロック図である。 車載機の処理手順を示すフローチャートである。 異常予告情報の提供に係る処理手順を示すフローチャートである。 異常予告情報の提供に係る処理手順を示すフローチャートである。 オブジェクト検出及び障害物検出を示す模式図である。 異常予告に係る処理手順を示すフローチャートである。 実施形態2に係る異常予告情報の提供に係る処理手順を示すフローチャートである。
[本発明の実施形態の説明]
最初に本発明の実施態様を列記して説明する。また、以下に記載する実施形態の少なくとも一部を任意に組み合わせてもよい。
(1)本態様に係る道路異常警告システムは、道路を撮像して得られる画像データ及び該道路の位置情報を収集して道路上の障害物を検出し、障害物が検出された道路の位置を示す障害物情報を提供する道路情報提供装置と、該道路情報提供装置から提供される障害物情報を受信し、受信した障害物情報に基づいて、道路上の異常を運転者に警告する複数の車載機とを備える道路異常警告システムであって、第1の前記車載機は、車両から道路を撮像して得た画像データを取得する画像データ取得部と、道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、前記車両の位置を検出する位置検出部と、前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を前記道路情報提供装置へ送信する画像データ送信部と、前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を第2の前記車載機へ送信する予告情報送信部とを備え、前記第2の車載機は、前記第1の車載機から送信された異常予告情報を受信する予告情報受信部と、該予告情報受信部にて異常予告情報を受信した場合、道路上の異常を予告する異常予告部とを備える。
本態様に係る道路異常警告システムにあっては、車載機は、道路情報提供装置から提供される障害物情報を受信し、受信した障害物情報に基づいて、道路上にある障害物の位置を運転者に警告することができる。障害物は、道路を走行する車両の障害になる任意の有体物が含まれる。例えば障害物は、道路上の落下物、三角停止版、交通規制に係るバリケード、矢印案内板、カラーコーン(登録商標)等である。また、道路の陥没等、道路自体に生じた障害も障害物に含まれる。
しかし、道路情報提供装置は、道路を撮像して得られる画像データ及び位置情報を収集して道路上の障害物を検出する構成であるため、道路上に発生した障害物を即時に検出して障害物情報を提供することができない。
そこで、第1の車載機は、車両から道路を撮像して得た画像データを取得し、道路の画像に含まれるオブジェクトを検出する。ここで検出されるオブジェクトは、道路の画像に含まれる何らかの有体物であり、必ずしも障害物では無い。オブジェクト検出部による障害物の検出精度は、道路情報提供装置における障害物の検出精度よりも低い。オブジェクトが検出された場合、第1の車載機は、オブジェクトを含む画像データ及び車両の位置情報を道路情報提供装置へ送信すると共に、道路上の異常を予告する異常予告情報を他車両に搭載された第2の車載機へ送信する。
従って、第2の車載機は、道路情報提供装置から精度良く検出された障害物に係る障害物情報が提供される前に、確度は落ちるものの、即時性に優れた異常予告情報を受信することができる。そして、第2の車載機は、異常予告部によって、道路上の異常を運転者に予告することができる。
よって、車載機は、即時性に優れた異常予告情報に基づいて、道路上の異常を予告すると共に、障害物情報に基づいて、精度良く道路上の異常を運転者に警告することができる。
なお、態様(1)に係る画像データ送信部は、外部の道路情報提供装置との間で無線通信を行う無線機を備える構成であっても良いし、外部接続される無線機の動作を制御することによって、無線通信を行う構成であっても良い。無線機は、例えば、無線通信機能を有するスマートフォン、携帯電話機等の移動通信端末である。
また、態様(1)に係るオブジェクト検出部は、道路の撮像を行う撮像部側で行われ、その検出結果を取得する構成を含む。
更に、態様(2)に係る位置検出部は、位置情報そのものを取得する構成を含む。
更にまた、予告情報送信部及び予告情報受信部は、第1の車載機と、第2の車載機との間で車車間通信を行う通信機であるが、路側に設置された路側通信機を介して異常予告情報を送受信する構成も含まれる。
(2)前記第1の車載機は、前記道路情報提供装置から送信される障害物情報を受信する障害物情報受信部と、前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトが検出された位置と、受信した障害物情報が示す位置とが対応しているか否かを判定する判定部を備え、前記予告情報送信部は、前記判定部が否と判定した場合、異常予告情報を送信する構成が好ましい。
本態様にあっては、第1の車載機は、未だ障害物情報によって提供されていない可能性がある障害物を予告する情報として、異常予告情報を第2の車載機へ送信することができる。従って、障害物情報として提供済みの無意味な異常予告情報が送信されることを避けることができ、より確度の高い異常予告情報を他の車載機へ送信することができる。
なお、態様(2)に係る障害物情報受信部は、外部の道路情報提供装置との間で無線通信を行う無線機を備える構成であっても良いし、外部接続される無線機の動作を制御することによって、無線通信を行う構成であっても良い。無線機は、例えば、無線通信機能を有するスマートフォン、携帯電話機等の移動通信端末である。
また、画像データ等を送信する画像データ送信部と、障害物情報を受信する障害物情報受信部とは、共通の通信プロトコルによって無線通信を行う通信機であっても良いし、画像データ及び障害物情報を異なる通信プロトコル又は異なる通信機で受信する構成であっても良い。例えば、画像データ等を移動通信端末によって送信し、障害物情報を光ビーコン、電波ビーコン、電波放送受信機等で受信する構成であっても良い。
(3)前記位置検出部は、前記車両の位置を間欠的に検出しており、前記第1の車載機は、前記オブジェクトが検出された位置と、現在の位置とが所定距離以内であるか否か判定する距離判定部を備え、前記予告情報送信部は、前記距離判定部が前記所定距離以内であると判定した場合、異常予告情報を送信する構成が好ましい。
本態様にあっては、第1の車載機は、現在の車両の位置と、オブジェクトが検出された位置とが所定距離以内である場合、第2の車載機へ異常予告情報を送信する。従って、オブジェクトが検出された位置から遠く離れた位置を走行している車両に無意味な異常予告情報が送信されることを避けることができ、より確度の高い異常予告情報を他の車載機へ送信することができる。
(4)前記第1の車載機は、前記オブジェクトが検出された時点から所定時間が経過したか否かを判定する経過時間判定部を備え、前記予告情報送信部は、前記経過時間判定部が否と判定した場合、異常予告情報を送信する構成が好ましい。
本態様にあっては、第1の車載機は、オブジェクトが検出されてからの経過時間が所定時間以内である場合、第2の車載機へ異常予告情報を送信する。従って、オブジェクトが検出されてから長時間が経過した無意味な異常予告情報が送信されることを避けることができ、より確度の高い異常予告情報を他の車載機へ送信することができる。
(5)前記第1の車載機は、前記車両の挙動の異常を検出する挙動異常検出部を備え、前記予告情報送信部は、前記オブジェクト検出部にて前記オブジェクトが検出され、かつ前記挙動異常検出部にて前記車両の挙動の異常が検出された場合、異常予告情報を送信する構成が好ましい。
本態様にあっては、第1の車載機は、オブジェクトが検出され、かつ、車両の挙動の異常を検出した場合、第2の車載機へ異常予告情報を送信する。車両の挙動に移動があった場合、道路上に障害物が存在していた可能性が高い。従って、より確度の高い異常予告情報を送信することができる。
(6)本態様に係る車載機は、車両から道路を撮像して得た画像データを取得する画像データ取得部と、道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、前記車両の位置を検出する位置検出部と、前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を外部装置へ送信する画像データ送信部と、前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を他の車両へ送信する予告情報送信部とを備える。
本態様にあっては、態様(1)と同様、車載機は、即時性に優れた異常予告情報に基づいて、道路上の異常を予告するための異常予告情報を他車両へ送信することができる。
[本発明の実施形態の詳細]
本発明の実施形態に係る道路異常警告システム及び車載機の具体例を、以下に図面を参照しつつ説明する。なお、本発明はこれらの例示に限定されるものではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。
(実施形態1)
図1は、本発明の実施形態1に係る道路異常警告システムの一構成例を示す模式図である。道路異常警告システムは、複数の車両Cにそれぞれ搭載された車載機1、撮像部2、GPS受信機3、各種ECU4、表示部5と、外部サーバの道路情報提供装置6と、路側機7とを備える。車載機1は、道路情報提供装置6と無線通信を行うことができ、また他車両Cに搭載された車載機1と車車間通信を行うことができる。更に、車載機1は、路側機7と路車間通信を行うことができる。
図2は、車載機1の一構成例を示すブロック図である。車載機1は、例えば、該車載機1の各構成部の動作を制御するCPU(Central Processing Unit)等の制御部11を備えたコンピュータである。制御部11には、入力部12、車内通信部13、出力部14、サーバ通信部15、車車間通信部16、記憶部17、時計部18、及び路車間通信部19が接続されている。
入力部12には、撮像部2及びGPS受信機3が接続されている。
撮像部2は、車両Cが走行している道路を撮像し、撮像して得た画像データを車載機1へ出力する。車載機1の制御部11は、入力部12を介して、撮像部2から画像データを取得する。制御部11は、取得した画像データから、道路の画像に含まれるオブジェクトを検出することができる。車載機1の制御部11は、詳細な画像認識処理を実行せず、道路上に有体物らしきものをオブジェクトとして検出する(図7上図参照)。車載機1の処理負荷を小さくするためである。例えば、制御部11は、エッジ検出処理によって、オブジェクトを検出する。なお、詳細な画像認識処理による道路上の障害物の検出は、外部サーバの道路情報提供装置6で行われる。また、オブジェクトの検出処理は制御部11が行っても良いし、撮像部2側で行っても良い。撮像部2がオブジェクトの検出を行う場合、制御部11は、入力部12を介してオブジェクトの検出結果を取得する。
GPS受信機3は、例えばナビゲーション装置に搭載されており、GPS衛星と共にGPSシステムを構成している。GPS受信機3は、人工衛星からの電波を受信し、GPS衛生と車両Cとの距離ないし位置関係を示すGPS情報を車載機1へ出力する。制御部11は、入力部12を介してGPS受信機3からGPS情報を取得し、車両Cの位置を検出する。車両Cの位置は、例えば緯度及び経度で表される。なお、GPS受信機3は、必ずしもナビゲーション装置用のものである必要は無い。また、測位機能を有する図示しないスマートフォン等の移動通信端末と接続するインタフェースを車載機1に備え、制御部11は移動通信端末から位置情報を取得しても良い。移動通信端末は車内にあるため、当該位置情報は、車両Cの位置情報でもある。
車内通信部13は、車両Cに搭載された各種ECU4との間でCAN等の通信プロトコルに従って通信を行う通信機である。制御部11は、車内通信部13を介してECU4と通信を行い、車両Cの挙動に係るCAN情報を取得する。車両Cの挙動に係るCAN情報は、例えば、車両Cの速度、加速度、車両Cの旋回方向への回転角速度を示すヨーレート情報、ステアリングホイールの操舵角、操舵角速度、ABSシステムの動作状況、ブレーキ操作の内容、アクセル操作の内容等が挙げられる。制御部11は、これらの車両Cの挙動に係るCAN情報に基づいて、車両Cの挙動を特定することができ、急ブレーキ、急ハンドル等の車両Cの異常挙動を検出することができる。
出力部14には表示部5が接続されている。表示部5は、液晶ディスプレイ、有機ELディスプレイ、電子ペーパ等である。制御部11は、出力部14を介して道路の異常を示す警告表示情報を表示部5へ出力することによって、道路上に障害物があることを運転者に警告する。また、制御部11は、出力部14を介して、道路上に障害物が存在する可能性を予告する予告表示情報を表示部5へ出力することにより、障害物の存在を運転者へ予告する。
サーバ通信部15は、外部の道路情報提供装置6との間で無線通信を行う通信機である。サーバ通信部15は、例えば無線通信機能を有するスマートフォン等の移動通信端末に接続され、移動通信端末の動作を制御することによって、道路情報提供装置6との間で無線通信を行う。例えば、サーバ通信部15は、制御部11の制御に従って、道路を撮像して得た画像データ、道路を撮像した位置を示す位置情報等の情報を道路情報提供装置6へ送信する。また、道路情報提供装置6は、道路上の障害物の位置を示す障害物情報を、各車載機1へ無線送信しており、制御部11は、道路情報提供装置6から提供される障害物情報をサーバ通信部15にて受信する。
車車間通信部16は、他の車両Cに搭載された車載機1との間で車車間通信を行う通信回路である。車車間通信部16は、例えばIEEE802.11pをベースとした所定の通信プロトコルに従って、無線通信を行う。無線通信に利用する周波数も特に限定されるものでは無いが、5.9GHz、700GHz帯の周波数が挙げられる。制御部11は、道路の画像データからオブジェクトが検出され、車両Cが異常挙動を示した場合、異常予告情報を車車間通信部16にて他車両Cへ送信する。異常予告情報は、障害物らしきオブジェクトが検出されたときの道路の位置情報、オブジェクトが検出されたときの時刻情報等を含む。
記憶部17は、例えばEEPROM(Electrically Erasable Programmable ROM)等不揮発性メモリ、ハードディスク等の記憶装置であり、動的地図情報を記憶する。動的地図情報は、例えばカーナビゲーション装置を用いた経路案内に使用される地図情報と、道路上に発生した障害物の位置を示す位置情報を含む障害物情報とを有する。地図情報は、交差点に対応するノードの位置を示す情報、各ノードを接続するリンクに係る情報等を記憶している。ノードの位置は例えば、緯度及び経度によって表される。道路リンクは、隣接する2つの交差点の道路区間であり、車両Cが走行する道路を論理的に構成するものである。各道路リンクは、交差点に対応するノードによって接続され、道路網を論理的に構成する。障害物情報に含まれる位置情報は、例えば障害物の位置を示す緯度及び経度である。また、位置情報は、道路リンクの両端にあるノードの位置を起点にして、当該道路リンクにおける障害物の位置を相対的に示すものであっても良い。
また、記憶部17は、後述するように、障害物である可能があるオブジェクトが検出されたときの車両Cの位置を示す位置情報、当該オブジェクトが検出された時刻等を含む異常予告情報を記憶している。異常予告情報に含まれる位置情報も、障害物の位置情報と同様、緯度及び経度等である。
時計部18は、制御部11の制御に従って計時を行うクロックである。例えば、制御部11は、オブジェクトが検出された場合、時計部18から時刻情報を取得する。そして、制御部11は、時刻情報を画像データに付加する。また、制御部11は、当該時刻情報を、オブジェクトの位置情報と共に、異常予告情報として記憶部17に記憶する。また、時計部18は、オブジェクトが検出された場合、オブジェクトが検出された時点からの経過時間を計時する処理を行い、計時結果を制御部11に与える。
路車間通信部19は、路側機7との間で路車間通信を行う通信回路である。路車間通信部19は、車車間通信と同様の所定の通信プロトコルに従って、無線通信を行う。制御部11は、道路の画像データからオブジェクトが検出され、車両Cが異常挙動を示した場合、異常予告情報を路車間通信部19にて路側機7へ送信する。
路側機7は、路側制御部、路側通信部、路側記憶部、路側時計部を備える。各部の構成は、車載機1側の制御部11、路車間通信部19及び記憶部17と同様である。路側機7は、車載機1から送信された異常予告情報を路側通信部にて受信し、受信した異常予告情報を一時的に記憶部に記憶する。そして、異常予告情報には、障害物らしきオブジェクトが検出されたときの時刻情報が含まれており、路側機7は、当該時刻情報が示す時刻から所定時間が経過するまで、周辺を走行する車両Cへ異常予告情報を、路側通信部にて送信する。このように、車載機1は、路車間通信を用いて、異常予告情報を共有することができる。通常、障害物は移動しないため、車載機1は車車間通信にて異常予告情報を他車両Cの車載機1へ送信するよりも、定位置にある路側機7を介して他車両Cの車載機1へ送信した方がより効果的に異常予告情報を他車両Cに提供することができる。
なお、複数の路側機7で路路間通信を行うことによって、オブジェクトが検出された位置を中心とした所定距離範囲内で異常予告情報を共有し、共有した異常予告情報を周辺の車載機1へ送信しても良い。例えば、第1の路側機7は、車載機1から送信された異常予告情報を受信して記憶すると共に、第2の路側機7へ送信する。第2の路側機7は、第1の路側機7から送信された異常予告情報を受信して記憶し、その周辺を走行する車両Cの車載機1へ異常予告情報を送信する。このようにして、異常予告情報を路車間通信及び路路間通信を用いて共有することもできる。
図3は、道路情報提供装置6の一構成例を示すブロック図である。道路情報提供装置6は、例えば、CPU(Central Processing Unit)等のサーバ制御部61を備えたコンピュータである。サーバ制御部61には、バスを介して、通信部62及び道路情報蓄積部63を備える。
通信部62は、複数の車両Cに搭載された車載機1との間で通信を行う。例えば、通信部62は、道路上の障害物を検出するための情報として、車載機1から送信される道路の画像データ、道路が撮像された位置を示す位置情報等を受信する。当該画像データには時刻情報も含まれている。
サーバ制御部61は、受信した画像データの画像を解析することによって、道路上の障害物を識別ないし検出する。障害物の識別は、例えばディープラーニングによって行う。ディープラーニングは、機械学習の一種であり、画像を所定のクラスに分類するものである(図7下図参照)。道路情報提供装置6は、落下物、三角停止版、交通規制に係るバリケード、矢印案内板、カラーコーン(登録商標)、道路の陥没等の各種障害物の画像、車両C、道路上の文字等の非障害物の画像を大量に学習し、各障害物及び非障害物の特徴と、各特徴に対応するクラスとを学習結果として記憶している。サーバ制御部61は、受信した画像データと、学習結果とに基づいて、画像データに含まれるオブジェクトが属するクラスを特定する。クラスの特定によって、オブジェクトが障害物であるか否か、障害物の種類等が特定される。
道路情報蓄積部63は、ハードディスク等の記憶装置であり、複数の車両Cの車載機1から送信された画像データの解析によって得られた障害物に係る情報を蓄積している。具体的には、道路情報蓄積部63は、障害物の種類、障害物の位置情報等を対応付けて記憶している。サーバ制御部61は、このように複数台の車両Cから収集され、蓄積された障害物に係る情報を用いた統計処理によって、より精度良く、障害物の有無、障害物の種類、障害物の位置等を特定することができる。
図4は、車載機1の処理手順を示すフローチャートである。道路情報提供装置6は、道路地図情報を更新するための情報として、障害物情報を定期的に送信している。障害物情報は、道路上の障害物の位置、種類等を示している。車載機1の制御部11は、道路情報提供装置6から送信された障害物情報を受信し、動的地図情報を更新する(ステップS11)。そして、制御部11は、動的地図情報に基づく警告を行う(ステップS12)。具体的には、制御部11は、GPS情報を取得して現在の車両Cの位置を検出し、検出された車両Cの位置情報を用いて動的地図情を参照し、現在地及び目的地への走行経路上における障害物の有無、障害物の種類を特定する。障害物が特定された場合、制御部11は、障害物の存在を警告するための警告表示情報を、出力部14を介して表示部5へ出力し、道路の異常を警告する。
ステップS12の処理を終えた制御部11は、車車間通信による即時性に優れた異常予告情報を他車両Cへ提供する処理を実行する(ステップS13)。また、制御部11は、他車両Cから提供された異常予告情報に基づいて異常予告に係る処理を実行する(ステップS14)。ステップS14の処理を終えた制御部11は、処理をステップS11へ戻し、ステップS11〜ステップS14の処理を繰り返し実行する。
ステップS13に係る処理の詳細をサブルーチンの処理として説明する。
図5及び図6は、異常予告情報の提供に係る処理手順を示すフローチャート、図7は、オブジェクト検出及び障害物検出を示す模式図である。車載機1の制御部11は、道路を撮像して得た画像データを撮像部2から取得する(ステップS31)。そして、制御部11は、図7上図に示すように、画像データから、障害物らしきオブジェクトを検出する(ステップS32)。車載機1側では、エッジ検出等の軽負荷の処理によって、障害物らしきオブジェクトを検出し、詳細な画像認識処理は行わない。ステップS31及びステップS32を実行する制御部11は、態様(1)の画像データ取得部及びオブジェクト検出部として機能する。
次いで、制御部11は、車両Cの挙動に係るCAN情報を車内通信部13にて取得し(ステップS33)、所得したCAN情報に基づいて車両Cの挙動異常を検出する(ステップS34)。ステップS33及びステップS34の処理を実行する制御部11は、態様(1)の位置検出部として機能する。
そして、制御部11は、車両Cの挙動が異常であるか否かを判定する(ステップS35)。車両Cの挙動が異常であると判定した場合(ステップS35:YES)、制御部11は、GPS受信機3から、車両Cの位置に係るGPS情報を取得し(ステップS36)、車両Cの位置を検出する(ステップS37)。そして、オブジェクトが検出された位置情報、オブジェクトが検出された時刻等を含む異常予告情報を記憶する(ステップS38)。
次いで、制御部11は、オブジェクトが検出された画像データ、オブジェクトが検出された位置を示す位置情報等を、サーバ通信部15にて道路情報提供装置6へ送信する(ステップS39)。なお、ステップS39の処理を実行する制御部11は、態様(1)の画像データ送信部として機能する。
道路情報提供装置6のサーバ制御部61は、画像データ及び位置情報等を受信し(ステップS40)、受信した画像データに基づいて障害物の検出を行う(ステップS41)。具体的には、サーバ制御部61は、図7下図に示すように、画像データに含まれるオブジェクトのクラスを詳細に識別することによって、障害物の検出を行う。オブジェクトが、「車両」、「道路文字」等のクラスに該当するものと識別された場合、サーバ制御部61は、障害物は検出されなかったものとして処理する。オブジェクトが「落下物」等のクラスに該当するものと識別された場合、サーバ制御部61は、障害物が検出されたものとして処理する。
次いで、サーバ制御部61は、ステップS41にて障害物が検出された場合、障害物の種類、位置情報等を道路情報蓄積部63に蓄積する(ステップS42)。サーバ制御部61は、道路情報蓄積部63に蓄積された情報を用いて、定期的に障害物情報を生成し、生成された障害物情報を、各車両Cの車載機1へ送信する。
一方、ステップS39の処理を終えた車載機1の制御部11は、現在、異常予告情報を記憶しているか否かを判定する(ステップS43)。異常予告情報を記憶していないと判定した場合(ステップS43:NO)、制御部11は処理を終える。異常予告情報を記憶していると判定した場合(ステップS43:YES)、制御部11は、自車両Cで検出されたオブジェクトの位置が、動的地図の障害物の位置として掲載されているか否かを判定する(ステップS44)。つまり、制御部11は、自車両Cで検出されたオブジェクトの位置と、動的地図情報が示す障害物の位置とが対応しているか否かを判定する。ステップS44の処理を実行する制御部11は、態様(2)の判定部として機能する。
自車両Cで検出されたオブジェクトの位置が、動的地図の障害物の位置として掲載されていないと判定した場合(ステップS44:NO)、制御部11は、オブジェクト検出後、所定時間が経過したか否かを判定する(ステップS45)。ステップS45の処理を実行する制御部11は、態様(4)の経過時間判定部として機能する。
オブジェクト検出後、所定時間が経過していないと判定した場合(ステップS45:NO)、制御部11は、オブジェクトが検出された位置から所定距離移動したか否かを判定する(ステップS46)。つまり、制御部11は、オブジェクトが検出された位置と、現在の車両Cの位置とが所定距離以内にあるか否かを判定する。ステップS46の処理を実行する制御部11は、態様(3)の距離判定部に対応する。
オブジェクトが検出された位置が所定距離以内にあると判定した場合(ステップS46:NO)、制御部11は、オブジェクトが検出された道路の位置、検出された時刻等を示す異常予告情報を、車車間通信部16にて他車両Cへ送信する(ステップS47)。次いで、制御部11は、オブジェクトが検出された道路の位置、検出された時刻等を示す異常予告情報を、路車間通信部19にて路側機7へ送信し(ステップS48)、サブルーチンの処理を終える。路側機7は、車載機1から送信された異常予告情報を受信し、受信した異常予告情報を路側記憶部に記憶する。
自車両Cで検出されたオブジェクトの位置が、動的地図の障害物の位置として掲載されていると判定した場合(ステップS44:YES)、オブジェクト検出後、所定時間が経過したと判定した場合(ステップS45:YES)、オブジェクトが検出された位置が所定距離以内に無いと判定した場合(ステップS46:YES)、制御部11は、当該異常予告情報を消去し(ステップS49)、処理を終える。
ステップS14に係る処理の詳細をサブルーチンの処理として説明する。
図8は、異常予告に係る処理手順を示すフローチャートである。オブジェクトを検出した他車両Cの車載機1は、周辺の車両Cへ異常予告情報を送信する(ステップS71)。一方、異常予告情報を記憶した路側機7は、周辺の車両Cへ異常予告情報を送信する(ステップS72)。路側機7は、例えば、路側記憶部に記憶されたオブジェクトの検出時刻から所定時間が経過するまで、当該オブジェクトに係る異常予告情報を送信する。自車両Cの車載機1は、他車両Cから送信された異常予告情報又は路側機7から送信された異常予告情報を、車車間通信部16又は路車間通信部19にて受信する(ステップS73)。そして、制御部11は、異常予告情報が示す位置が現在地及び目的地への走行経路上にある場合、予告表示情報を表示部5へ出力することによって、障害物の存在を予告し(ステップS74)、サブルーチンに係る処理を終える。ステップS74の処理を実行する制御部11は、態様(1)の異常予告部として機能する。
このように構成された道路異常警告システム及び車載機1によれば、車車間通信によって得られる即時性に優れた異常予告情報に基づいて、道路上の異常を予告すると共に、道路情報提供装置6から提供される確度の高い障害物情報に基づいて、精度良く道路上の異常を運転者に警告することができる。
また、動的地図情報に障害物としての情報が無い位置でオブジェクトが検出された場合、異常予告情報を他車両Cへ送信するように構成されているため、無意味な異常予告情報が他車両Cへ送信されることを避けることができ、より確度の高い異常予告情報を提供することができる。
更に、現在の処理の位置と、オブジェクトが検出された位置とが所定距離以内である場合、異常予告情報を他車両Cへ送信するように構成されているため、無意味な異常予告情報が他車両Cへ送信されることを避けることができ、より確度の高い異常予告情報を提供することができる。
更にまた、オブジェクトが検出されてからの経過時間が所定時間以内である場合、異常予告情報を他車両Cへ送信するように構成されているため、オブジェクトが検出されてから長時間が経過した無意味な異常予告情報が他車両Cへ送信されることを避けることができ、より確度の高い異常予告情報を他車両Cへ提供することができる。
更にまた、オブジェクトが検出され、かつ、車両Cの挙動の異常を検出した場合、異常予告情報を他車両Cへ送信するように構成されているため、より確度の高い異常予告情報を他車両Cへ提供することができる。
(実施形態2)
実施形態2に係る道路異常警告システムの構成は実施形態1と同様であり、処理手順のみが異なるため、以下では主にかかる相違点を説明する。
図9は、実施形態2に係る異常予告情報の提供に係る処理手順を示すフローチャートである。制御部11は、実施形態1のステップS31〜ステップS34、ステップS36、ステップS37の処理を同様の処理をステップS231〜ステップS236にて実行する。
そして、制御部11は、車両Cの挙動が異常であるか否かを判定する(ステップS237)。車両Cの挙動が異常であると判定した場合(ステップS237:YES)、実施形態1のステップS38移行の処理を実行する。
車両Cの挙動が異常で無いと判定した場合(ステップS237:NO)、制御部11は、オブジェクトが検出されなかった位置が、動的地図の障害物の位置として掲載されているか否かを判定する(ステップS238)。具体的には、制御部11は、オブジェクトが検出されなかった位置と、動的地図情報が示す障害物の位置とが対応しているか否かを判定する。障害物として掲載されていると判定した場合(ステップS238:YES)、障害物が消失している旨を示す障害物消失情報を、サーバ通信部15にて道路情報提供装置6へ送信する(ステップS239)。
道路情報提供装置6のサーバ制御部61は、車載機1から送信された障害物消失情報を受信し(ステップS240)、受信した障害物消失情報を道路情報蓄積部63に蓄積する(ステップS241)。サーバ制御部61は、障害物消失情報を所定回数以上受信した場合、当該位置における障害物情報を削除する。
一方、ステップS238にて障害物として掲載されていないと判定した場合(ステップS238:NO)、又はステップS239の処理を終えた制御部11は、実施形態1のステップS43以降の処理を実行する。
実施形態2に係る道路情報提供システムにあっては、車載機1から送信される異常消失情報を蓄積し、蓄積した異常消失情報に基づいて、障害物情報を速やかに削除及び更新することができる。
1 車載機
2 撮像部
3 GPS受信機
4 ECU
5 表示部
6 道路情報提供装置
7 路側機
11 制御部
12 入力部
13 車内通信部
14 出力部
15 サーバ通信部
16 車車間通信部
17 記憶部
18 時計部
19 路車間通信部
61 サーバ制御部
62 通信部
63 道路情報蓄積部
C 車両

Claims (6)

  1. 道路を撮像して得られる画像データ及び該道路の位置情報を収集して道路上の障害物を検出し、障害物が検出された道路の位置を示す障害物情報を提供する道路情報提供装置と、該道路情報提供装置から提供される障害物情報を受信し、受信した障害物情報に基づいて、道路上の異常を運転者に警告する複数の車載機とを備える道路異常警告システムであって、
    第1の前記車載機は、
    車両から道路を撮像して得た画像データを取得する画像データ取得部と、
    道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、
    前記車両の位置を検出する位置検出部と、
    前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を前記道路情報提供装置へ送信する画像データ送信部と、
    前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を第2の前記車載機へ送信する予告情報送信部と
    を備え、
    前記第2の車載機は、
    前記第1の車載機から送信された異常予告情報を受信する予告情報受信部と、
    該予告情報受信部にて異常予告情報を受信した場合、道路上の異常を予告する異常予告部と
    を備える道路異常警告システム。
  2. 前記第1の車載機は、
    前記道路情報提供装置から送信される障害物情報を受信する障害物情報受信部と、
    前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトが検出された位置と、受信した障害物情報が示す位置とが対応しているか否かを判定する判定部を備え、
    前記予告情報送信部は、
    前記判定部が否と判定した場合、異常予告情報を送信する
    請求項1に記載の道路異常警告システム。
  3. 前記位置検出部は、前記車両の位置を間欠的に検出しており、
    前記第1の車載機は、
    前記オブジェクトが検出された位置と、現在の位置とが所定距離以内であるか否か判定する距離判定部を備え、
    前記予告情報送信部は、
    前記距離判定部が前記所定距離以内であると判定した場合、異常予告情報を送信する
    請求項1又は請求項2に記載の道路異常警告システム。
  4. 前記第1の車載機は、
    前記オブジェクトが検出された時点から所定時間が経過したか否かを判定する経過時間判定部を備え、
    前記予告情報送信部は、
    前記経過時間判定部が否と判定した場合、異常予告情報を送信する
    請求項1〜請求項3までのいずれか一項に記載の道路異常警告システム。
  5. 前記第1の車載機は、
    前記車両の挙動の異常を検出する挙動異常検出部を備え、
    前記予告情報送信部は、
    前記オブジェクト検出部にて前記オブジェクトが検出され、かつ前記挙動異常検出部にて前記車両の挙動の異常が検出された場合、異常予告情報を送信する
    請求項1〜請求項4までのいずれか一項に記載の道路異常警告システム。
  6. 車両から道路を撮像して得た画像データを取得する画像データ取得部と、
    道路の画像に含まれるオブジェクトを検出するオブジェクト検出部と、
    前記車両の位置を検出する位置検出部と、
    前記オブジェクト検出部にて前記オブジェクトが検出された場合、該オブジェクトを含む画像データ及び前記オブジェクトが検出されたときの前記車両の位置情報を外部装置へ送信する画像データ送信部と、
    前記オブジェクトが検出されたときの前記車両の位置情報を含み、道路上の異常を予告する異常予告情報を他の車両へ送信する予告情報送信部と
    を備える車載機。
JP2016034635A 2016-02-25 2016-02-25 道路異常警告システム及び車載機 Active JP6699230B2 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2016034635A JP6699230B2 (ja) 2016-02-25 2016-02-25 道路異常警告システム及び車載機
CN201780011879.1A CN108701405B (zh) 2016-02-25 2017-01-30 车载装置和道路异常警示系统
PCT/JP2017/003125 WO2017145650A1 (ja) 2016-02-25 2017-01-30 車載機及び道路異常警告システム
DE112017000997.9T DE112017000997T5 (de) 2016-02-25 2017-01-30 Fahrzeugvorrichtung und Straßenabnormalitäts-Alarmsystem
US16/074,509 US10446026B2 (en) 2016-02-25 2017-01-30 On-vehicle device and road abnormality alert system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016034635A JP6699230B2 (ja) 2016-02-25 2016-02-25 道路異常警告システム及び車載機

Publications (2)

Publication Number Publication Date
JP2017151798A true JP2017151798A (ja) 2017-08-31
JP6699230B2 JP6699230B2 (ja) 2020-05-27

Family

ID=59685427

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016034635A Active JP6699230B2 (ja) 2016-02-25 2016-02-25 道路異常警告システム及び車載機

Country Status (5)

Country Link
US (1) US10446026B2 (ja)
JP (1) JP6699230B2 (ja)
CN (1) CN108701405B (ja)
DE (1) DE112017000997T5 (ja)
WO (1) WO2017145650A1 (ja)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109979238A (zh) * 2017-12-28 2019-07-05 北京百度网讯科技有限公司 车道内障碍物提醒方法、装置及设备
JP2019114039A (ja) * 2017-12-22 2019-07-11 株式会社デンソー 異常検出装置
JP2020046228A (ja) * 2018-09-14 2020-03-26 株式会社リコー 計測装置、計測システムおよび車両
JP2020060813A (ja) * 2018-10-04 2020-04-16 トヨタ自動車株式会社 サーバ、情報処理方法およびプログラム
JP2020198018A (ja) * 2019-06-05 2020-12-10 Kddi株式会社 車両用物体識別装置、システムおよび方法
JP2021056878A (ja) * 2019-09-30 2021-04-08 本田技研工業株式会社 情報処理装置、情報処理方法、移動端末、記憶媒体及びプログラム
JP2021124794A (ja) * 2020-01-31 2021-08-30 ヤフー株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2022173318A (ja) * 2018-03-23 2022-11-18 パイオニア株式会社 地図データ構造、情報処理装置及び地図データ生成装置
US11796343B2 (en) 2017-11-27 2023-10-24 Mitsubishi Electric Corporation Map maintenance system and map maintenance method

Families Citing this family (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11403336B2 (en) 2005-10-26 2022-08-02 Cortica Ltd. System and method for removing contextually identical multimedia content elements
US20160321253A1 (en) 2005-10-26 2016-11-03 Cortica, Ltd. System and method for providing recommendations based on user profiles
US11386139B2 (en) 2005-10-26 2022-07-12 Cortica Ltd. System and method for generating analytics for entities depicted in multimedia content
US11620327B2 (en) 2005-10-26 2023-04-04 Cortica Ltd System and method for determining a contextual insight and generating an interface with recommendations based thereon
US20160085733A1 (en) 2005-10-26 2016-03-24 Cortica, Ltd. System and method thereof for dynamically associating a link to an information resource with a multimedia content displayed in a web-page
US10949773B2 (en) 2005-10-26 2021-03-16 Cortica, Ltd. System and methods thereof for recommending tags for multimedia content elements based on context
US10742340B2 (en) 2005-10-26 2020-08-11 Cortica Ltd. System and method for identifying the context of multimedia content elements displayed in a web-page and providing contextual filters respective thereto
US11604847B2 (en) 2005-10-26 2023-03-14 Cortica Ltd. System and method for overlaying content on a multimedia content element based on user interest
US9646005B2 (en) 2005-10-26 2017-05-09 Cortica, Ltd. System and method for creating a database of multimedia content elements assigned to users
US20140156901A1 (en) 2005-10-26 2014-06-05 Cortica Ltd. Computing device, a system and a method for parallel processing of data streams
US10848590B2 (en) 2005-10-26 2020-11-24 Cortica Ltd System and method for determining a contextual insight and providing recommendations based thereon
US8326775B2 (en) 2005-10-26 2012-12-04 Cortica Ltd. Signature generation for multimedia deep-content-classification by a large-scale matching system and method thereof
US11019161B2 (en) 2005-10-26 2021-05-25 Cortica, Ltd. System and method for profiling users interest based on multimedia content analysis
US11361014B2 (en) 2005-10-26 2022-06-14 Cortica Ltd. System and method for completing a user profile
US11216498B2 (en) 2005-10-26 2022-01-04 Cortica, Ltd. System and method for generating signatures to three-dimensional multimedia data elements
US11032017B2 (en) 2005-10-26 2021-06-08 Cortica, Ltd. System and method for identifying the context of multimedia content elements
US11537636B2 (en) 2007-08-21 2022-12-27 Cortica, Ltd. System and method for using multimedia content as search queries
US11195043B2 (en) 2015-12-15 2021-12-07 Cortica, Ltd. System and method for determining common patterns in multimedia content elements based on key points
WO2017105641A1 (en) 2015-12-15 2017-06-22 Cortica, Ltd. Identification of key points in multimedia data elements
US11113547B2 (en) * 2017-05-31 2021-09-07 Baidu Usa Llc Planning control in response to a driving obstruction during operation of an autonomous driving vehicle (ADV)
WO2019008581A1 (en) 2017-07-05 2019-01-10 Cortica Ltd. DETERMINATION OF DRIVING POLICIES
US11899707B2 (en) 2017-07-09 2024-02-13 Cortica Ltd. Driving policies determination
US10846544B2 (en) 2018-07-16 2020-11-24 Cartica Ai Ltd. Transportation prediction system and method
US11613261B2 (en) 2018-09-05 2023-03-28 Autobrains Technologies Ltd Generating a database and alerting about improperly driven vehicles
US10839694B2 (en) 2018-10-18 2020-11-17 Cartica Ai Ltd Blind spot alert
US20200133308A1 (en) 2018-10-18 2020-04-30 Cartica Ai Ltd Vehicle to vehicle (v2v) communication less truck platooning
US11270132B2 (en) 2018-10-26 2022-03-08 Cartica Ai Ltd Vehicle to vehicle communication and signatures
US11904863B2 (en) 2018-10-26 2024-02-20 AutoBrains Technologies Ltd. Passing a curve
US11392738B2 (en) 2018-10-26 2022-07-19 Autobrains Technologies Ltd Generating a simulation scenario
US10789535B2 (en) 2018-11-26 2020-09-29 Cartica Ai Ltd Detection of road elements
JP7192443B2 (ja) * 2018-11-29 2022-12-20 トヨタ自動車株式会社 情報提供システム、サーバ、車載装置、車両、プログラム及び情報提供方法
JP2020119560A (ja) * 2019-01-25 2020-08-06 シャープ株式会社 システム、システムの制御方法および情報提供サーバ
US11170647B2 (en) 2019-02-07 2021-11-09 Cartica Ai Ltd. Detection of vacant parking spaces
CN109823268A (zh) * 2019-02-19 2019-05-31 百度在线网络技术(北京)有限公司 一种危险道路行为告警方法、装置、服务器及系统
US11643005B2 (en) 2019-02-27 2023-05-09 Autobrains Technologies Ltd Adjusting adjustable headlights of a vehicle
US11285963B2 (en) 2019-03-10 2022-03-29 Cartica Ai Ltd. Driver-based prediction of dangerous events
US11694088B2 (en) 2019-03-13 2023-07-04 Cortica Ltd. Method for object detection using knowledge distillation
US11132548B2 (en) 2019-03-20 2021-09-28 Cortica Ltd. Determining object information that does not explicitly appear in a media unit signature
US12055408B2 (en) 2019-03-28 2024-08-06 Autobrains Technologies Ltd Estimating a movement of a hybrid-behavior vehicle
US11908242B2 (en) 2019-03-31 2024-02-20 Cortica Ltd. Efficient calculation of a robust signature of a media unit
US11488290B2 (en) 2019-03-31 2022-11-01 Cortica Ltd. Hybrid representation of a media unit
US11222069B2 (en) 2019-03-31 2022-01-11 Cortica Ltd. Low-power calculation of a signature of a media unit
US10776669B1 (en) 2019-03-31 2020-09-15 Cortica Ltd. Signature generation and object detection that refer to rare scenes
JP7192627B2 (ja) * 2019-04-04 2022-12-20 株式会社デンソー 落下物判別装置、運転支援システムおよび落下物判別方法
CN110033630A (zh) * 2019-04-23 2019-07-19 深圳成谷科技有限公司 用于道路施工的提示装置、路侧单元和提示系统
WO2021040060A1 (ko) * 2019-08-23 2021-03-04 엘지전자 주식회사 차량용 전자 장치 및 그의 동작 방법
US11704292B2 (en) 2019-09-26 2023-07-18 Cortica Ltd. System and method for enriching a concept database
CN110758354B (zh) * 2019-10-16 2020-07-17 安徽诺乐知识产权服务有限公司 基于大数据采集的车辆紧急制动执行系统
CN112767702A (zh) * 2019-10-21 2021-05-07 中移物联网有限公司 一种车辆违章拍摄与识别系统及识别方法
US11593662B2 (en) 2019-12-12 2023-02-28 Autobrains Technologies Ltd Unsupervised cluster generation
US11590988B2 (en) 2020-03-19 2023-02-28 Autobrains Technologies Ltd Predictive turning assistant
US11827215B2 (en) 2020-03-31 2023-11-28 AutoBrains Technologies Ltd. Method for training a driving related object detector
JP7363669B2 (ja) * 2020-05-15 2023-10-18 トヨタ自動車株式会社 情報処理装置、及び情報処理システム
CN111681420B (zh) * 2020-06-09 2022-09-13 阿波罗智联(北京)科技有限公司 路面信息检测方法、装置、设备和存储介质
CN112614342B (zh) * 2020-12-10 2022-08-30 大唐高鸿智联科技(重庆)有限公司 一种道路异常事件的预警方法、车载设备及路侧设备
CN115022370A (zh) * 2022-06-13 2022-09-06 长城汽车股份有限公司 一种路况信息上报方法、装置、设备、存储介质及车辆
JP2024011955A (ja) * 2022-07-15 2024-01-25 キヤノン株式会社 通知装置、通知方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007323117A (ja) * 2006-05-30 2007-12-13 Kenwood Corp 道路通信システム、移動体装置、および、移動体装置の情報処理方法
JP2008234044A (ja) * 2007-03-16 2008-10-02 Pioneer Electronic Corp 情報処理方法、車載装置および情報配信装置
JP2013122714A (ja) * 2011-12-12 2013-06-20 Denso Corp 警告システム、車両装置、及びサーバ
JP2014044584A (ja) * 2012-08-27 2014-03-13 Mitsubishi Motors Corp 運転支援装置
WO2014119196A1 (ja) * 2013-01-31 2014-08-07 日本電気株式会社 移動体通信装置、基地局、サーバ装置、移動体通信システム、移動体通信方法及びプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101388145B (zh) * 2008-11-06 2010-09-15 北京汇大基业科技有限公司 道路交通安全自动警示方法及装置
US9146898B2 (en) * 2011-10-27 2015-09-29 Magna Electronics Inc. Driver assist system with algorithm switching
WO2013065120A1 (ja) * 2011-11-01 2013-05-10 アイシン精機株式会社 障害物警報装置
EP2610778A1 (en) * 2011-12-27 2013-07-03 Harman International (China) Holdings Co., Ltd. Method of detecting an obstacle and driver assist system
US9852632B2 (en) * 2012-02-10 2017-12-26 Mitsubishi Electric Corporation Driving assistance device and driving assistance method
KR101912453B1 (ko) * 2012-02-17 2018-10-26 현대모비스 주식회사 장애물 검출 및 충돌 경보 장치 및 방법
JP5929936B2 (ja) 2014-01-21 2016-06-08 トヨタ自動車株式会社 特異走行箇所検出装置及び特異走行箇所検出方法
CN105216792A (zh) * 2014-06-12 2016-01-06 株式会社日立制作所 对周围环境中的障碍物目标进行识别跟踪的方法和设备
CN104077819B (zh) * 2014-06-17 2015-03-18 深圳前向启创数码技术有限公司 基于行车安全的远程监控方法及系统
CN105289870B (zh) 2014-07-31 2019-09-24 萨塔有限两合公司 喷枪的制造方法、喷枪、喷枪本体以及盖
JP6462328B2 (ja) * 2014-11-18 2019-01-30 日立オートモティブシステムズ株式会社 走行制御システム
US9679487B1 (en) * 2015-01-20 2017-06-13 State Farm Mutual Automobile Insurance Company Alert notifications utilizing broadcasted telematics data

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007323117A (ja) * 2006-05-30 2007-12-13 Kenwood Corp 道路通信システム、移動体装置、および、移動体装置の情報処理方法
JP2008234044A (ja) * 2007-03-16 2008-10-02 Pioneer Electronic Corp 情報処理方法、車載装置および情報配信装置
JP2013122714A (ja) * 2011-12-12 2013-06-20 Denso Corp 警告システム、車両装置、及びサーバ
JP2014044584A (ja) * 2012-08-27 2014-03-13 Mitsubishi Motors Corp 運転支援装置
WO2014119196A1 (ja) * 2013-01-31 2014-08-07 日本電気株式会社 移動体通信装置、基地局、サーバ装置、移動体通信システム、移動体通信方法及びプログラム

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11796343B2 (en) 2017-11-27 2023-10-24 Mitsubishi Electric Corporation Map maintenance system and map maintenance method
JP7051424B2 (ja) 2017-12-22 2022-04-11 株式会社デンソー 異常検出装置
JP2019114039A (ja) * 2017-12-22 2019-07-11 株式会社デンソー 異常検出装置
US10745028B2 (en) 2017-12-28 2020-08-18 Beijing Baidu Netcom Science Technology Co., Ltd. Method, apparatus and device for obstacle in lane warning
CN109979238A (zh) * 2017-12-28 2019-07-05 北京百度网讯科技有限公司 车道内障碍物提醒方法、装置及设备
JP2022173318A (ja) * 2018-03-23 2022-11-18 パイオニア株式会社 地図データ構造、情報処理装置及び地図データ生成装置
JP2020046228A (ja) * 2018-09-14 2020-03-26 株式会社リコー 計測装置、計測システムおよび車両
JP7206726B2 (ja) 2018-09-14 2023-01-18 株式会社リコー 計測装置、計測システムおよび車両
JP2020060813A (ja) * 2018-10-04 2020-04-16 トヨタ自動車株式会社 サーバ、情報処理方法およびプログラム
JP7056501B2 (ja) 2018-10-04 2022-04-19 トヨタ自動車株式会社 サーバ、情報処理方法およびプログラム
JP7140713B2 (ja) 2019-06-05 2022-09-21 Kddi株式会社 車両用物体識別装置、システムおよび方法
JP2020198018A (ja) * 2019-06-05 2020-12-10 Kddi株式会社 車両用物体識別装置、システムおよび方法
JP6997157B2 (ja) 2019-09-30 2022-02-04 本田技研工業株式会社 情報処理装置、情報処理方法及びプログラム
JP2021056878A (ja) * 2019-09-30 2021-04-08 本田技研工業株式会社 情報処理装置、情報処理方法、移動端末、記憶媒体及びプログラム
JP7041700B2 (ja) 2020-01-31 2022-03-24 ヤフー株式会社 情報処理装置、情報処理方法および情報処理プログラム
JP2021124794A (ja) * 2020-01-31 2021-08-30 ヤフー株式会社 情報処理装置、情報処理方法および情報処理プログラム

Also Published As

Publication number Publication date
DE112017000997T5 (de) 2018-11-22
US20190043274A1 (en) 2019-02-07
WO2017145650A1 (ja) 2017-08-31
US10446026B2 (en) 2019-10-15
CN108701405B (zh) 2021-08-24
JP6699230B2 (ja) 2020-05-27
CN108701405A (zh) 2018-10-23

Similar Documents

Publication Publication Date Title
JP6699230B2 (ja) 道路異常警告システム及び車載機
US9842496B1 (en) Broadcasting information related to hazards impacting vehicle travel
JP6841263B2 (ja) 走行計画生成装置、走行計画生成方法、及び制御プログラム
JP6552992B2 (ja) 情報処理装置、車載装置および情報処理方法
JP6537631B2 (ja) 予測装置、予測システム、予測方法および予測プログラム
JP6323249B2 (ja) 情報処理システム、端末装置、及びプログラム
JP2016095831A (ja) 運転支援システム及びセンタ
WO2019159494A1 (ja) 情報生成装置、情報生成方法、コンピュータプログラムおよび車載装置
WO2018116795A1 (ja) 運転支援システム及び運転支援装置
JP6375772B2 (ja) 通報システム、情報処理システム、サーバ装置、端末装置、及びプログラム
WO2019131075A1 (ja) 送信装置、点群データ収集システムおよびコンピュータプログラム
KR101850254B1 (ko) 커넥티드 카 환경을 지원하기 위한 차량간 통신 시스템
JP2019079454A (ja) 車両制御システム、機能通知装置、機能通知方法およびコンピュータプログラム
JPWO2020039798A1 (ja) 情報提供装置、情報提供方法、情報提供システム、コンピュータプログラム、及びデータ構造
JP6323248B2 (ja) 情報処理システム、端末装置、及びプログラム
JP2017123072A (ja) 運転支援装置及びコンピュータプログラム
JP2019121233A (ja) 車載用情報処理装置
JP2019079453A (ja) 情報生成システム、情報生成装置、情報生成方法およびコンピュータプログラム
CN115039158A (zh) 通信装置、车辆、程序和通信方法
EP4116676A1 (en) Electronic horizon for adas function
US20210314755A1 (en) Control method, communication terminal, and communication system
JP2016144076A (ja) 車両用通信機
CN115571144A (zh) 车辆的事故强度估计
JP2018077587A (ja) 車載通信装置、情報収集システム、コンピュータプログラム及び通信方法
Haupt et al. smartLDW: A smartphone-based local danger warning system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181022

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190709

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190827

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200128

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200316

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200331

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200413

R150 Certificate of patent or registration of utility model

Ref document number: 6699230

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250