JP6915512B2 - サーバ装置、故障車両推定方法および故障車両推定プログラム - Google Patents

サーバ装置、故障車両推定方法および故障車両推定プログラム Download PDF

Info

Publication number
JP6915512B2
JP6915512B2 JP2017228320A JP2017228320A JP6915512B2 JP 6915512 B2 JP6915512 B2 JP 6915512B2 JP 2017228320 A JP2017228320 A JP 2017228320A JP 2017228320 A JP2017228320 A JP 2017228320A JP 6915512 B2 JP6915512 B2 JP 6915512B2
Authority
JP
Japan
Prior art keywords
vehicle
information
vehicles
failure
captured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017228320A
Other languages
English (en)
Other versions
JP2019101502A (ja
Inventor
義博 大栄
義博 大栄
神丸 博文
博文 神丸
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Priority to JP2017228320A priority Critical patent/JP6915512B2/ja
Priority to US16/164,250 priority patent/US10853936B2/en
Priority to CN201811360056.2A priority patent/CN109835349B/zh
Publication of JP2019101502A publication Critical patent/JP2019101502A/ja
Application granted granted Critical
Publication of JP6915512B2 publication Critical patent/JP6915512B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0808Diagnosing performance data
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • G08G1/0133Traffic data processing for classifying traffic situation
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • G08G1/0141Measuring and analyzing of parameters relative to traffic conditions for specific applications for traffic information dissemination
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/20Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
    • G08G1/205Indicating the location of the monitored vehicles as destination, e.g. accidents, stolen, rental
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30236Traffic on road, railway or crossing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0816Indicating performance data, e.g. occurrence of a malfunction
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/20Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両の位置情報を収集するサーバ装置、故障車両推定方法および故障車両推定プログラムに関する。
特許文献1には、自車両の前方に位置する車両を撮像し、撮像画像から前方の車両後部ランプの点灯の有無を検出するとともに、撮像画像からナンバープレートに記載されたナンバーを認識して前方の車両を特定をする故障検出システムが開示されている。
特開2015−212133号公報
特許文献1の技術では、前方車両のナンバープレートのナンバーを撮像画像から読み取るが、カメラ性能、処理装置の解析能力、撮像距離および天候などの条件によっては、前方の車両後部ランプの点灯の有無を検出できても、前方車両のナンバープレートのナンバーを認識できず、故障車両を特定できないおそれがある。
本発明はこうした状況に鑑みてなされたものであり、その目的は、車外を撮像した画像から故障車両を容易に推定できる技術を提供することにある。
上記課題を解決するために、本発明のある態様のサーバ装置は、複数の車両から取得した車両ID情報および位置情報を含む車両情報と、複数の車両から取得した車外をカメラで撮像した画像または車外をカメラで撮像した画像から得られた車両の故障情報と、を記憶する記憶部と、車両の故障情報が得られた画像のカメラ位置の周辺に位置する車両を、記憶された車両情報にもとづいて特定する特定部と、特定した車両のなかから故障車両を推定する推定部と、推定した故障車両に関連付けられた端末装置に車両故障に関する情報を通知する通知部と、を備える。
この態様によると、車両のナンバープレートのナンバーを読み取れる高度なカメラ性能および処理装置の解析能力を必要とせず、車間距離および天候などの条件によって車両のナンバープレートのナンバーを読み取れなくても、故障車両を推定することが可能である。
特定部は、複数の車両にて車外をカメラで撮像した画像によって得られた故障情報ごとにカメラ位置の周辺に位置する車両を特定し、推定部は、複数の車両にて撮像した画像によって得られた故障情報ごとに特定された車両のなかから重複する車両を故障車両として推定してもよい。これにより、特定部により特定された複数の車両から、故障車両を絞り込むことができる。
本発明によれば、車外を撮像した画像から故障した車両を容易に推定できる技術を提供できる。
故障車両推定システムを示す概略図である。 故障車両推定システムの機能構成について説明するための図である。 推定部が故障車両を推定する処理について説明するための図である。 車両側の端末装置の故障検出処理について説明するためのフローチャートである。 サーバ装置の故障車両推定処理について説明するためのフローチャートである。
図1は、故障車両推定システム1を示す概略図である。故障車両推定システム1は、サーバ装置10および端末装置12により構成される。サーバ装置10および端末装置12はネットワークを介して接続される。
端末装置12は、車両に設けられ、車両の位置情報をサーバ装置10に周期的に送信する。また、端末装置12は、周辺にある他車両に故障が生じていることを検出した場合、他車両の故障情報を自車両の位置情報とともにサーバ装置10に送信する。
サーバ装置10は、複数の端末装置12から送信された複数の車両の位置情報を収集する。また、サーバ装置10は、端末装置12から送信された車両の故障情報と、収集した車両の位置情報とにもとづいて故障した車両を推定し、推定した車両の端末装置12に故障情報を通知する。
図2は、故障車両推定システム1の機能構成について説明するための図である。図2において、さまざまな処理を行う機能ブロックとして記載される各要素は、ハードウェア的には、回路ブロック、メモリ、その他のLSIで構成することができ、ソフトウェア的には、メモリにロードされたプログラムなどによって実現される。したがって、これらの機能ブロックがハードウェアのみ、ソフトウェアのみ、またはそれらの組合せによっていろいろな形で実現できることは当業者には理解されるところであり、いずれかに限定されるものではない。
端末装置12は、画像取得部22、位置取得部24、解析部26および車両側通信部28を備える。画像取得部22は、車両に設けられたカメラ20から車両周辺の車外を撮像した撮像画像およびその時刻を取得する。カメラ20は、車両前方に限らず、車両左右方向、車両後方を撮像する。
位置取得部24は、GPS(Global Positioning System)を利用して車両の位置情報およびその時刻を取得する。位置取得部24は、例えばナビゲーション装置から車両の位置情報およびその時刻を取得する。
解析部26は、車両周辺の撮像画像を解析して、他車両の存在を検出し、他車両に故障が発生しているか検出する。解析部26は、他車両の外観上に見える形で表れた故障を検出し、例えば、車両前後のライトの不点灯、外装部品の欠落、オイル漏れなどを検出する。例えば、他車両のテールライトやブレーキライトのいずれか一方が点灯し、他方が不点灯であることが撮像画像から抽出された場合、解析部26は他車両の後方のライトが故障したと検出する。例えばライトの不点灯を検出する処理は、車両のナンバープレートのナンバーを読み取れる高度なカメラ性能および処理装置の解析能力を必要とせず、処理負荷が低く、容易に検出することができる。また、車間距離および天候などの条件が良くなくても、ライトの不点灯は検出しやすい。
解析部26は、他車両の故障を検出した場合、故障情報を生成する。故障情報は、検出した故障の種類を示す情報と、故障車両の画像を撮像した時刻とを含む。
車両側通信部28は、車両ID、自車両の位置情報およびその時刻を周期的にサーバ装置10に送信する。これにより、サーバ装置10は車両の位置情報を含む車両情報を収集して、各車両の位置を把握できる。
車両側通信部28は、解析部26から故障情報を受け取った場合、他車両の故障情報と、故障情報に含まれる時刻での自車両の位置情報とをサーバ装置10に送信する。これにより、サーバ装置10は、故障車両の画像を撮像した時刻とその位置から、周辺に位置する車両を特定できる。端末装置12が画像解析を実行して故障情報をサーバ装置10に送信することで、端末装置12が撮像画像をサーバ装置10に送信してサーバ装置10が撮像画像を解析する場合と比べて、通信データ量を抑えることができる。車両側通信部28は、車両を駐車したとき、すなわちイグニッションスイッチをオフした際に故障情報をサーバ装置10に送信してよい。
自車両が故障車両を追従している場合、解析部26が故障車両を所定の周期で検出し、車両側通信部28は、同じ故障車両の故障情報をサーバ装置10に周期的に送信する。また、自車両の周辺に位置する他車両の状況が変化し、サーバ装置10が故障車両を推定しやすくなる。
サーバ装置10は、取得部30、記憶部32、特定部34、推定部36および通知部38を備える。取得部30は、複数の端末装置12から車両情報を収集するとともに、複数の端末装置12から故障情報も取得する。
記憶部32は、複数の車両の端末装置12から取得した車両情報を記憶し、複数の車両の端末装置12から取得した故障情報を記憶する。記憶部32は、車両情報として、車両ID、車両の位置情報およびその時刻を関連付けて記憶する。また記憶部32は、予め登録されている車両IDとその車両の端末装置12のアドレスを記憶しており、通知部38の通知に利用される。記憶部32は、故障情報として、故障情報を送信した車両の車両ID、故障の種類、故障時の位置情報およびその時刻を記憶する。
特定部34は、車両の故障情報が得られた位置、すなわち故障情報が得られた画像を撮像したカメラ20の位置の周辺に位置する車両を、記憶された車両情報にもとづいて特定する。特定部34は、故障情報に含まれる位置情報から所定の範囲内、例えば30メートル以内に位置する車両を、記憶された車両情報から特定する。所定の範囲は、一般的な車間距離、GPSの精度、位置情報の送信周期などによって設定される。
特定部34は、複数の車両の端末装置12から取得した故障情報ごとに、故障情報が得られた位置の周辺に位置する車両を特定する。複数の車両から得られた故障情報を用いることで、故障車両の周辺の状況が変化しているため、故障車両を精度良く探し当てることができる。
特定部34が、故障情報が得られた位置の周辺に位置する車両を特定できない場合、すなわち、撮像された故障車両が記憶部32に登録された車両ではない場合、記憶部32に故障情報を破棄させる。
推定部36は、特定部34により特定された車両のなかから故障車両を推定する。特定部34により特定された車両が1台であれば、すなわち、故障情報が得られた位置の周辺にある車両が1台であれば、推定部36は、その特定された車両を故障車両として推定する。
また、特定部34により特定された車両が複数台あれば、推定部36は、複数の車両から得られた故障情報を用いて故障車両を絞り込む。推定部36は、複数の車両の端末装置12から得られた故障情報ごとに特定された車両のなかから、所定回数以上重複する車両を故障車両としてよい。例えば、推定部36は、端末装置12から得た故障情報ごとに特定部34が特定した故障車両の候補に5回以上表れた車両を故障車両とする。これにより、特定部34により特定された複数の車両から、故障車両を絞り込むことができる。
また、推定部36は、複数の車両から得られた複数の故障情報について、故障情報に含まれる故障の種類と位置情報およびその時刻にもとづいて、同じ故障車両に対する故障情報であるか関連付けて、故障車両を推定してよい。例えば、故障の種類が一致し、位置情報および時刻が所定の基準範囲内にある場合は、推定部36は同じ故障車両に対する故障情報であると判定し、少なくとも故障の種類が一致しない場合は、推定部36は同じ故障車両に対する故障情報でないと判定する。これにより、複数の車両から得られた故障情報を同じ故障車両に対する情報であると関連付けることができる。同じ故障車両の故障情報であると判定された場合、推定部36は、複数の車両に得られた故障情報ごとに特定された車両のなかから重複する車両を故障車両として推定する。
通知部38は、推定部36により推定された故障車両の車両IDに関連付けられた端末装置12に車両故障に関する情報を通知する。車両故障に関する情報には、故障の種類を示す情報と、故障を修理するための案内情報とが含まれる。故障を修理するための案内情報として、車両のサポートセンターや整備工場の情報が示される。このように、車両のナンバープレートを読み取れる高度な画像解析装置を各車両に搭載しなくても、撮像位置の周辺に位置する車両から故障車両を推定して故障車両の運転者に通知することが可能である。
なお、記憶部32が車両IDに関連付けて運転者の携帯端末のアドレスを記憶している場合、通知部38は、車両故障に関する情報を運転者の携帯端末に送信する。
図3は、推定部36が故障車両を推定する処理について説明するための図である。図3は道路を走行中の車両を上空から見た状態を示す。図3(a)において、車両Cの解析部26が撮像画像から車両Bの故障を検出し、車両側通信部28が車両Bの故障情報および撮像時の自車両の位置情報をサーバ装置10に送信する。サーバ装置10では、記憶部32が取得した故障情報および位置情報を記憶し、特定部34は車両Cの周辺に位置する車両A、車両B、車両Dを特定する。複数の車両が特定されているため、推定部36は、車両Cからの故障情報だけでは故障車両を絞り込めない。
図3(b)において、車両Fの解析部26が撮像画像から車両Bの故障を検出し、車両側通信部28が車両Bの故障情報および撮像時の自車両の位置情報をサーバ装置10に送信する。サーバ装置10では、記憶部32が取得した故障情報および位置情報を記憶し、特定部34は車両Fの周辺に位置する車両A、車両B、車両Eを特定する。推定部36は、車両Cから得た故障情報と、車両Fから得た故障情報とが同じ故障車両に対するものであるか、故障情報に含まれる故障の種類と位置情報およびその時刻にもとづいて判定し、故障の種類が同じで位置情報およびその時刻が近いため、同じ故障車両に対する故障情報であると判定する。推定部36は、車両Aと車両Bが故障車両の候補車両であると推定するが、まだ1台には絞り込めない。
図3(c)において、車両Gの解析部26が撮像画像から車両Bの故障を検出し、車両側通信部28が車両Bの故障情報および撮像時の自車両の位置情報をサーバ装置10に送信する。サーバ装置10では、記憶部32が取得した故障情報および位置情報を記憶し、特定部34は車両Gの周辺に位置する車両B、車両Hを特定する。推定部36は、車両Cおよび車両Fから得た故障情報と、車両Gから得た故障情報とが同じ故障車両に対すると判定する。記憶部32は、車両C、車両F、車両Gから得た故障情報ごとに特定された車両のなかから重複する1台の車両Bを故障車両として推定する。このように、複数の車両の故障情報を用いることで、故障情報を検出した車両の周辺の状況が変わり、故障車両を絞り込むことができる。
図4は、車両側の端末装置12の故障検出処理について説明するためのフローチャートである。画像取得部22は、車外をカメラ20で撮像した撮像画像を周期的に取得する(S10)。位置取得部24は、自車両の位置情報を周期的に取得し(S12)、車両側通信部28はサーバ装置10に自車両の位置情報を所定の周期で送信する。
解析部26は、撮像画像を解析して、撮像画像に故障車両が含まれるか検出する(S14)。撮像画像上に故障車両がない場合(S16のN)、本処理を終える。撮像画像上に故障車両が有る場合(S16のY)、解析部26は故障情報を生成し、車両側通信部28は、故障情報と、撮像画像が得られたときの位置情報とをサーバ装置10に送信する。
図5は、サーバ装置10の故障車両推定処理について説明するためのフローチャートである。記憶部32は、端末装置12から得られた故障情報およびその位置情報を記憶する(S20)。また、記憶部32は、故障情報とは別に、複数の端末装置12から得られた車両の位置情報を車両情報として記憶する。
特定部34は、故障情報が得られたカメラ位置の周辺に位置する車両を、記憶された車両情報にもとづいて特定する(S22)。推定部36は、特定部34に特定された車両のなかから故障車両を絞れたか判定する(S24)。
推定部36が故障車両を1台に絞れない場合(S24のN)、ステップ20に戻ってサーバ装置10はさらなる故障情報の取得を待つ。複数の故障情報によって特定された車両の車両IDを比べて、重複する車両が1台に絞られた場合(S24のY)、推定部36はその重複する1台の車両を故障車両であると推定し、通知部38は、推定した故障車両に関連付けられた端末装置12に車両故障に関する情報を通知する(S26)。このように、故障車両を検出した撮像位置の周辺に位置する車両から故障車両を推定して通知することが可能である。
なお実施例はあくまでも例示であり、各構成要素の組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。
端末装置12の解析部26は、故障車両の車種を推定して、故障車両の車種を示す特徴情報を故障情報に含めてよい。特徴情報は、例えば、トラック、オフロード車、セダン、ワゴン車などに大別する情報である。また、解析部26は、故障車両のナンバープレートのナンバーを読み取れた場合、故障情報にナンバーの情報を含めてよい。このように、故障情報に、故障車両のナンバー情報や特徴情報が含まれてよい。記憶部32は、予め登録された車両IDと特徴情報およびナンバー情報を記憶しており、特定部34は、故障情報に含まれる特徴情報およびナンバー情報も用いて故障情報が得られた位置の周辺に位置する車両を特定する。
また、実施例では、車両側の端末装置12にて撮像画像を解析して車両の故障を検出する態様を示したが、この態様に限られず、画像解析をサーバ装置10で実行してもよい。この変形例では、端末装置12が撮像画像と撮像した位置情報とその時刻を周期的にサーバ装置10に送信し、サーバ装置10の記憶部32が複数の車両から取得した車外をカメラ20で撮像した撮像画像を記憶する。そして、サーバ装置10の解析部が、記憶された撮像画像から故障車両を検出し、故障情報を記憶部32が記憶する。後の処理は実施例と同様である。
1 故障車両推定システム、 10 サーバ装置、 12 端末装置、 20 カメラ、 22 画像取得部、 24 位置取得部、 26 解析部、 28 車両側通信部、 30 取得部、 32 記憶部、 34 特定部、 36 推定部、 38 通知部。

Claims (4)

  1. 複数の車両から取得した車両ID情報と前記車両の位置情報と前記位置情報を取得した位置取得時刻とを含む車両情報と、車外をカメラで撮像した画像または車外をカメラで撮像した画像から得られた故障車両の故障情報と、を記憶する記憶部と、
    前記故障車両の前記故障情報が得られた画像を撮像した前記車両の周辺に位置する車両を、記憶された前記車両情報にもとづいて特定する特定部と、
    特定した前記他車両のなかから前記故障車両を推定する推定部と、
    推定した前記故障車両に関連付けられた端末装置に車両故障に関する情報を通知する通知部と、を備え、
    前記記憶部は、車外をカメラで撮像した画像または前記故障情報を送信した前記車両の車両ID情報に関連付けて、前記車両の位置情報および前記位置取得時刻を記憶し、
    前記特定部は、複数の前記車両にて車外をカメラで撮像した画像によって得られた前記故障情報ごとに時刻単位で前記車両の周辺に位置する前記他車両を特定し、
    前記推定部は、複数の前記車両にて撮像した画像によって得られた前記故障情報ごとに特定された前記他車両のなかから重複する前記他車両を前記故障車両として推定することを特徴とするサーバ装置。
  2. 車外をカメラで撮像した画像から前記故障車両の故障情報を検出する解析部をさらに備えることを特徴とする請求項1に記載のサーバ装置。
  3. 複数の車両から取得した車両ID情報と前記車両の位置情報と前記位置情報を取得した位置取得時刻とを含む車両情報と、車外をカメラで撮像した画像または車外をカメラで撮像した画像から得られた故障車両の故障情報と、を記憶する記憶ステップと、
    前記故障車両の前記故障情報が得られた画像を撮像した前記車両の周辺に位置する車両を、記憶された前記車両情報にもとづいて特定する特定ステップと、
    特定した前記他車両のなかから前記故障車両を推定する推定ステップと、
    推定した前記故障車両に関連付けられた端末装置に車両故障に関する情報を通知する通知ステップと、を含み、
    前記記憶ステップでは、車外をカメラで撮像した画像または前記故障情報を送信した前記車両の車両ID情報に関連付けて、前記車両の位置情報および前記位置取得時刻を記憶し、
    前記特定ステップでは、複数の前記車両にて車外をカメラで撮像した画像によって得られた前記故障情報ごとに時刻単位で前記車両の周辺に位置する前記他車両を特定し、
    前記推定ステップでは、複数の前記車両にて撮像した画像によって得られた前記故障情報ごとに特定された前記他車両のなかから重複する前記他車両を前記故障車両として推定することを特徴とする故障車両推定方法。
  4. 複数の車両から取得した車両ID情報と前記車両の位置情報と前記位置情報を取得した位置取得時刻とを含む車両情報と、車外をカメラで撮像した画像または車外をカメラで撮像した画像から得られた故障車両の故障情報と、を記憶する記憶ステップと、
    前記故障車両の前記故障情報が得られた画像を撮像した前記車両の周辺に位置する車両を、記憶された前記車両情報にもとづいて特定する特定ステップと、
    特定した前記他車両のなかから前記故障車両を推定する推定ステップと、
    推定した前記故障車両に関連付けられた端末装置に車両故障に関する情報を通知する通知ステップと、をコンピュータに実行させ
    前記記憶ステップでは、車外をカメラで撮像した画像または前記故障情報を送信した前記車両の車両ID情報に関連付けて、前記車両の位置情報および前記位置取得時刻を記憶し、
    前記特定ステップでは、複数の前記車両にて車外をカメラで撮像した画像によって得られた前記故障情報ごとに時刻単位で前記車両の周辺に位置する前記他車両を特定し、
    前記推定ステップでは、複数の前記車両にて撮像した画像によって得られた前記故障情報ごとに特定された前記他車両のなかから重複する前記他車両を前記故障車両として推定することを特徴とする故障車両推定プログラム。
JP2017228320A 2017-11-28 2017-11-28 サーバ装置、故障車両推定方法および故障車両推定プログラム Active JP6915512B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2017228320A JP6915512B2 (ja) 2017-11-28 2017-11-28 サーバ装置、故障車両推定方法および故障車両推定プログラム
US16/164,250 US10853936B2 (en) 2017-11-28 2018-10-18 Failed vehicle estimation system, failed vehicle estimation method and computer-readable non-transitory storage medium
CN201811360056.2A CN109835349B (zh) 2017-11-28 2018-11-15 故障车辆推断系统及其推断方法、以及非临时性存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017228320A JP6915512B2 (ja) 2017-11-28 2017-11-28 サーバ装置、故障車両推定方法および故障車両推定プログラム

Publications (2)

Publication Number Publication Date
JP2019101502A JP2019101502A (ja) 2019-06-24
JP6915512B2 true JP6915512B2 (ja) 2021-08-04

Family

ID=66633372

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017228320A Active JP6915512B2 (ja) 2017-11-28 2017-11-28 サーバ装置、故障車両推定方法および故障車両推定プログラム

Country Status (3)

Country Link
US (1) US10853936B2 (ja)
JP (1) JP6915512B2 (ja)
CN (1) CN109835349B (ja)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6915512B2 (ja) * 2017-11-28 2021-08-04 トヨタ自動車株式会社 サーバ装置、故障車両推定方法および故障車両推定プログラム
KR102597409B1 (ko) * 2017-12-04 2023-11-02 현대자동차주식회사 시스템에서 운전자 모니터링 방법 및 장치
EP3739550A4 (en) * 2018-01-11 2021-09-29 Pioneer Corporation INFORMATION RECORDING DEVICE, INFORMATION RECORDING METHOD, AND INFORMATION RECORDING PROGRAM
JP7236677B2 (ja) * 2019-12-25 2023-03-10 パナソニックIpマネジメント株式会社 通信装置および通信方法
CN111862383A (zh) * 2020-07-08 2020-10-30 上海擎感智能科技有限公司 车辆异常的辅助提示方法、系统、移动终端及存储介质
JP7415835B2 (ja) * 2020-08-03 2024-01-17 トヨタ自動車株式会社 制御装置、車両、プログラム及び制御方法
CN114724272A (zh) * 2021-01-06 2022-07-08 华为技术有限公司 一种车辆检测方法和车辆检测装置
US11875611B2 (en) * 2021-08-03 2024-01-16 GM Global Technology Operations LLC Remote observation and reporting of vehicle operating condition via V2X communication

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0776737B2 (ja) * 1988-10-21 1995-08-16 富士重工業株式会社 車輌診断システム
CA2199999A1 (en) * 1997-03-14 1998-09-14 Peter Johann Kielland Parking regulation enforcement system
JP2002243591A (ja) * 2001-02-22 2002-08-28 Mitsubishi Electric Corp 車両用故障診断装置
JP2003256998A (ja) * 2002-03-01 2003-09-12 Hitachi Ltd 車両制御装置
JP2009251968A (ja) * 2008-04-07 2009-10-29 Toyota Motor Corp 緊急通報システム、通信管理サーバー、及び車載情報通信装置
CN101306686A (zh) * 2008-06-03 2008-11-19 奇瑞汽车股份有限公司 汽车远程诊断控制系统
US8576069B2 (en) * 2009-10-22 2013-11-05 Siemens Corporation Mobile sensing for road safety, traffic management, and road maintenance
JP5479956B2 (ja) * 2010-03-10 2014-04-23 クラリオン株式会社 車両用周囲監視装置
US8862315B2 (en) * 2011-09-23 2014-10-14 Omnitracs, Llc Systems and methods for processing operational gear data of a vehicle
US8977423B2 (en) * 2012-05-23 2015-03-10 Snap-On Incorporated Methods and systems for providing vehicle repair information
US8793046B2 (en) * 2012-06-01 2014-07-29 Google Inc. Inferring state of traffic signal and other aspects of a vehicle's environment based on surrogate data
US9117371B2 (en) * 2012-06-22 2015-08-25 Harman International Industries, Inc. Mobile autonomous surveillance
JP5863968B2 (ja) * 2012-07-03 2016-02-17 クラリオン株式会社 車載環境認識装置
US9424696B2 (en) * 2012-10-04 2016-08-23 Zonar Systems, Inc. Virtual trainer for in vehicle driver coaching and to collect metrics to improve driver performance
US9665997B2 (en) * 2013-01-08 2017-05-30 Gordon*Howard Associates, Inc. Method and system for providing feedback based on driving behavior
JP2014241102A (ja) * 2013-06-12 2014-12-25 本田技研工業株式会社 他車両状態配信システム及び他車両状態配信サーバ
US8946990B1 (en) * 2013-11-08 2015-02-03 Nissan North America, Inc. Vehicle headlight detection system
US9598012B2 (en) * 2014-03-11 2017-03-21 Toyota Motor Engineering & Manufacturing North America, Inc. Surroundings monitoring system for a vehicle
US9652900B2 (en) * 2014-03-27 2017-05-16 Jet Optoelectronics Co., Ltd. Vehicle monitoring system
JP6281483B2 (ja) 2014-04-17 2018-02-21 株式会社デンソー 故障検出システム、情報処理装置、及び車両搭載装置
JP6700752B2 (ja) * 2015-12-01 2020-05-27 キヤノン株式会社 位置検出装置、位置検出方法及びプログラム
EP4345791A3 (en) * 2015-12-01 2024-05-01 Genetec Inc. Peer-to-peer virtual chalking
US10062290B2 (en) * 2015-12-16 2018-08-28 Ford Global Technologies, Llc Convoy vehicle look-ahead
EP3193305B1 (en) * 2016-01-12 2018-09-12 Continental Automotive GmbH Method and device for displaying a front-view of a vehicle's surrounding and respective vehicle
KR101795249B1 (ko) * 2016-05-02 2017-11-07 현대자동차주식회사 차량 및 그것의 주행 안전 지원 방법
US20180147986A1 (en) * 2016-06-30 2018-05-31 Faraday&Future Inc. Method and system for vehicle-based image-capturing
US20200013242A1 (en) * 2016-09-29 2020-01-09 Panasonic Intellectual Property Management Co., Ltd. Sensor failure detection device and control method for same
US10121376B2 (en) * 2016-10-05 2018-11-06 Ford Global Technologies, Llc Vehicle assistance
US10417841B2 (en) * 2017-01-12 2019-09-17 Donald James Remboski Faster new feature launch
US10399106B2 (en) * 2017-01-19 2019-09-03 Ford Global Technologies, Llc Camera and washer spray diagnostic
JP6846624B2 (ja) * 2017-02-23 2021-03-24 パナソニックIpマネジメント株式会社 画像表示システム、画像表示方法及びプログラム
WO2018179305A1 (ja) * 2017-03-31 2018-10-04 本田技研工業株式会社 走行経路提供システムおよびその制御方法、並びにプログラム
US10336254B2 (en) * 2017-04-21 2019-07-02 Ford Global Technologies, Llc Camera assisted vehicle lamp diagnosis via vehicle-to-vehicle communication
US10789727B2 (en) * 2017-05-18 2020-09-29 Panasonic Intellectual Property Corporation Of America Information processing apparatus and non-transitory recording medium storing thereon a computer program
JP6855968B2 (ja) * 2017-07-20 2021-04-07 トヨタ自動車株式会社 情報処理装置、情報処理方法及び情報処理システム
US10155477B1 (en) * 2017-08-21 2018-12-18 Mcleanics Technology Corporation Vehicle light detector device (VLDD)
JP7043755B2 (ja) * 2017-08-29 2022-03-30 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、及び、移動体
JP7257737B2 (ja) * 2017-09-05 2023-04-14 ソニーグループ株式会社 情報処理装置、自己位置推定方法、及び、プログラム
JP6915512B2 (ja) * 2017-11-28 2021-08-04 トヨタ自動車株式会社 サーバ装置、故障車両推定方法および故障車両推定プログラム
US10732640B2 (en) * 2018-04-13 2020-08-04 Blackberry Limited System and method for preforming differential analysis of vehicles
US11573574B2 (en) * 2018-08-30 2023-02-07 Canon Kabushiki Kaisha Information processing apparatus, information processing method, information processing system, and storage medium
JP6791925B2 (ja) * 2018-09-28 2020-11-25 株式会社Subaru 車両制御装置、プログラム

Also Published As

Publication number Publication date
US10853936B2 (en) 2020-12-01
JP2019101502A (ja) 2019-06-24
CN109835349B (zh) 2022-03-25
US20190164267A1 (en) 2019-05-30
CN109835349A (zh) 2019-06-04

Similar Documents

Publication Publication Date Title
JP6915512B2 (ja) サーバ装置、故障車両推定方法および故障車両推定プログラム
JP6281483B2 (ja) 故障検出システム、情報処理装置、及び車両搭載装置
JP7218535B2 (ja) 交通違反車両識別システム及びサーバ
JP6971020B2 (ja) 異常検出装置および異常検出方法
WO2015053335A1 (ja) 駐車車両検出装置、車両管理システム及び制御方法
EP3140777B1 (en) Method for performing diagnosis of a camera system of a motor vehicle, camera system and motor vehicle
JP7135904B2 (ja) 交通管理システム及びその制御方法
US11475679B2 (en) Road map generation system and road map generation method
US20200097741A1 (en) Training image selection system
JP2016031648A (ja) 車載機器
WO2015182147A1 (ja) ステレオカメラ装置およびステレオカメラ装置を設置した車両
JP2019067201A (ja) 車両捜索システム、車両捜索方法、ならびに、それに用いられる車両およびプログラム
JP4692000B2 (ja) 旅行時間算出システム、および旅行時間算出方法
KR20050095807A (ko) 번호판 인식을 이용한 속력위반차량 검색시스템 및 그 방법
CN112435479B (zh) 目标物体违章检测方法、装置、计算机设备及系统
JP4762830B2 (ja) 周辺監視システム
WO2019139084A1 (ja) 通知装置及び車載機
JP2010107435A (ja) 地物位置認識装置
JP6989347B2 (ja) 車両状態判定装置、車両状態判定システム、車両状態判定方法、及び、車両状態判定プログラム
JP2018072011A (ja) 自車位置判定方法及び自車位置判定システム
JP2017116321A (ja) 車載ステレオカメラ用のキャリブレーション装置
KR101242075B1 (ko) 전용차로 단속방법 및 장치
JP7488685B2 (ja) 道路状況特定装置および車両システム
US20230064634A1 (en) Abnormality notification system
KR101294285B1 (ko) 도로 위치기반 적응형 영상 및 차량정보 수집 시스템 및 방법

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20210219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20210330

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210525

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210615

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210628

R151 Written notification of patent or utility model registration

Ref document number: 6915512

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151