JP2020154369A - Obstacle information management device, obstacle information management method, and obstacle information management program - Google Patents

Obstacle information management device, obstacle information management method, and obstacle information management program Download PDF

Info

Publication number
JP2020154369A
JP2020154369A JP2019049489A JP2019049489A JP2020154369A JP 2020154369 A JP2020154369 A JP 2020154369A JP 2019049489 A JP2019049489 A JP 2019049489A JP 2019049489 A JP2019049489 A JP 2019049489A JP 2020154369 A JP2020154369 A JP 2020154369A
Authority
JP
Japan
Prior art keywords
vehicle
information
obstacle
information management
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019049489A
Other languages
Japanese (ja)
Inventor
規夫 倉重
Norio Kurashige
規夫 倉重
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Priority to JP2019049489A priority Critical patent/JP2020154369A/en
Publication of JP2020154369A publication Critical patent/JP2020154369A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

To provide an obstacle information management device, obstacle information management method, and obstacle information management program for correctly obtaining a travel hindrance factor which gives an influence on traveling of a vehicle.SOLUTION: A vehicle travel information acquisition section 42 of an obstacle information management device 200 acquires vehicle travel information including a travel speed and position information of a vehicle. An abnormality determination section 44 determines an abnormality of an operation state of the vehicle based on the vehicle travel information. An image acquisition section 48 acquires an image obtained by imaging the periphery of the vehicle. An obstacle extraction section 50 extracts an obstacle to be a hindrance to traveling of the vehicle from the image. An obstacle information management section 54 manages information related to the abnormality of the operation state and information related to the obstacle in association with the position information.SELECTED DRAWING: Figure 2

Description

本発明は、車両走行時の障害物に関する情報を管理する技術に関する。 The present invention relates to a technique for managing information on obstacles during vehicle traveling.

自動車を運転する際、対向車、路上駐車車両、人、自転車、電信柱などの障害物との衝突を回避するために、車両を路肩に寄せたり、減速するなどの制御を行う必要がある。自動車の運転をより容易で安全なものにするためには障害物が存在しないことが理想である。路上の障害物を移動または除去する施策を取ることによって、より効率的で低消費エネルギーであり、安全であり、移動時間が短縮される車社会を実現することが期待される。 When driving a car, it is necessary to control the vehicle to move to the shoulder or decelerate in order to avoid collision with obstacles such as oncoming vehicles, parked vehicles on the road, people, bicycles, and telephone poles. Ideally, there should be no obstacles to make driving a car easier and safer. By taking measures to move or remove obstacles on the road, it is expected to realize a motorized society that is more efficient, consumes less energy, is safer, and shortens travel time.

特許文献1には、障害物の誤検知を防止する障害物検知装置が開示されている。特許文献1に記載の障害物検知装置は、予め定めた継続時間にわたって停止しているオブジェクトを障害物として検知し、車両の走行パターンが不自然である場合、道路の管理者に対して障害物の対応を促すための通知を出力する。 Patent Document 1 discloses an obstacle detection device that prevents false detection of an obstacle. The obstacle detection device described in Patent Document 1 detects an object that has stopped for a predetermined duration as an obstacle, and when the traveling pattern of the vehicle is unnatural, the obstacle to the road administrator. Output a notification to prompt the response of.

特開2017−33479号公報Japanese Unexamined Patent Publication No. 2017-33479

車両走行の障害物を除去する際、従来は様々な走行支障要因の調査を高精度ではあるが高い費用で行ったり、低コストではあるが限定した走行支障要因の調査や予測にもとづいて障害物除去などを行い、確度の低い結果に繋がっていた。 When removing obstacles to vehicle driving, conventional investigations of various driving obstacle factors are performed with high accuracy but at high cost, and obstacles are investigated and predicted based on low cost but limited driving obstacle factors. Removal was performed, leading to low-accuracy results.

実際の道路環境では、同じ障害物でも車両走行に影響を与える度合は一定ではなく、車両や歩行者などの交通量、大型車や商業車の割合、駐車頻度、道幅、道路傾斜、カーブにおける曲線半径などの要素が複雑に組み合わさり、影響度に変化を与える。例えば電信柱は自動車走行における障害物の一つであるが、直線と急カーブでは対向車とすれ違う時の減速の度合いが異なる。また、電信柱が多いエリアであっても、交通量が多くかつ常時商業車両が停車する頻度が高いなどの場合、電信柱の除去効果がどの程度あるかを具体的に評価することが難しいといった問題点があった。また、より正確な評価結果を導き出すために走行支障要因として未知のものがあるかどうかも十分に解析できていないのが実情である。 In the actual road environment, the degree of influence on vehicle running is not constant even with the same obstacle, traffic volume such as vehicles and pedestrians, ratio of large vehicles and commercial vehicles, parking frequency, road width, road slope, curve in curve Factors such as radius are intricately combined to change the degree of influence. For example, a telephone pole is one of the obstacles in driving a car, but the degree of deceleration when passing an oncoming vehicle differs between a straight line and a sharp curve. In addition, even in areas with many utility poles, it is difficult to specifically evaluate how effective the removal of utility poles is when there is heavy traffic and commercial vehicles stop frequently at all times. There was a problem. In addition, in order to derive more accurate evaluation results, it is not possible to sufficiently analyze whether or not there are unknown factors that hinder driving.

本発明はこうした状況に鑑みてなされたものであり、その目的は、車両走行に影響を与える走行支障要因をより正確に把握することのできる障害物情報管理技術を提供することにある。 The present invention has been made in view of such a situation, and an object of the present invention is to provide an obstacle information management technique capable of more accurately grasping a driving obstacle factor affecting vehicle running.

上記課題を解決するために、本発明のある態様の障害物情報管理装置(200)は、車両の走行速度および位置情報を含む車両走行情報を取得する車両走行情報取得部(42)と、前記車両走行情報にもとづいて前記車両の運転状況の異常性を判定する異常性判定部(44)と、前記車両の周囲を撮影した画像を取得する画像取得部(48)と、前記画像から前記車両の走行の支障となる障害物を抽出する障害物抽出部(50)と、前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報と関連付けて管理する障害物情報管理部(54)と、を備える。 In order to solve the above problems, the obstacle information management device (200) according to an aspect of the present invention includes a vehicle travel information acquisition unit (42) that acquires vehicle travel information including vehicle travel speed and position information, and the above. An abnormality determination unit (44) that determines an abnormality in the driving condition of the vehicle based on vehicle traveling information, an image acquisition unit (48) that acquires an image of the surroundings of the vehicle, and the vehicle from the image. An obstacle extraction unit (50) that extracts obstacles that hinder the driving of the vehicle, and an obstacle information management unit (54) that manages information on the abnormality of the driving situation and information on the obstacle in association with the position information. ) And.

本発明の別の態様は、障害物情報管理方法である。この方法は、車両の走行速度および位置情報を含む車両走行情報を取得する車両走行情報取得ステップと、前記車両走行情報から前記車両の運転状況の異常性を判定する異常性判定ステップと、前記車両の周囲を撮影した画像を取得する画像取得ステップと、前記画像から前記車両の走行の支障となる障害物を抽出する障害物抽出ステップと、前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報と関連付けて管理する障害物情報管理ステップと、を備える。 Another aspect of the present invention is an obstacle information management method. This method includes a vehicle traveling information acquisition step of acquiring vehicle traveling information including vehicle traveling speed and position information, an abnormality determination step of determining an abnormality in the driving condition of the vehicle from the vehicle traveling information, and the vehicle. An image acquisition step of acquiring an image of the surroundings of the vehicle, an obstacle extraction step of extracting an obstacle that hinders the running of the vehicle from the image, information on the abnormality of the driving situation, and information on the obstacle. It is provided with an obstacle information management step for managing the vehicle in association with the location information.

なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。 It should be noted that any combination of the above components and the conversion of the expression of the present invention between methods, devices, systems, recording media, computer programs and the like are also effective as aspects of the present invention.

本発明によれば、車両走行に影響を与える走行支障要因をより正確に把握することができる。 According to the present invention, it is possible to more accurately grasp the driving obstacle factors that affect the running of the vehicle.

実施の形態に係る走行情報管理装置の構成図である。It is a block diagram of the traveling information management device which concerns on embodiment. 実施の形態に係る障害物情報管理装置の構成図である。It is a block diagram of the obstacle information management apparatus which concerns on embodiment. 図2の障害物情報管理装置による障害物情報管理手順を説明するフローチャートである。It is a flowchart explaining the obstacle information management procedure by the obstacle information management apparatus of FIG.

実施の形態の車両走行支援システムは、複数の車両に設けられる走行情報管理装置100と、サーバに設けられる障害物情報管理装置200を含む。複数の車両側の走行情報管理装置100と、サーバ側の障害物情報管理装置200は無線通信によって互いにデータをやりとりすることができ、車両の走行情報と道路の障害物情報を紐付けて管理するIoT(Internet of Things)システムが構築される。障害物情報管理装置200はサーバでなく、車両用の機器として構成されてもよい。 The vehicle traveling support system of the embodiment includes a traveling information management device 100 provided in a plurality of vehicles and an obstacle information management device 200 provided in a server. The travel information management device 100 on the vehicle side and the obstacle information management device 200 on the server side can exchange data with each other by wireless communication, and manage the vehicle travel information and the road obstacle information in association with each other. An IoT (Internet of Things) system is constructed. The obstacle information management device 200 may be configured as a device for a vehicle instead of a server.

図1は、実施の形態に係る走行情報管理装置100の構成図である。走行情報管理装置100は、車両に搭載されるカーナビゲーションシステムまたはドライブレコーダなどの車両用機器の機能の一部として、あるいは車両の運転手や同乗者が車両に持ち込んで使用する携帯電話や携帯端末の機能の一部として実装される。 FIG. 1 is a configuration diagram of a travel information management device 100 according to an embodiment. The travel information management device 100 is a mobile phone or mobile terminal used as a part of a function of a vehicle device such as a car navigation system or a drive recorder mounted on a vehicle, or brought into a vehicle by a vehicle driver or a passenger. Implemented as part of the functionality of.

位置情報取得部10は、GPS(Global Positioning System)などの位置情報センサから車両の位置情報を取得する。車両速度取得部12は、車速センサまたは加速度センサまたはCAN(Controller Area Network)などの車載ネットワークから車両の走行速度や加速度を取得する。車両速度取得部12は、位置情報取得部10により取得された位置情報の変化から車両の走行速度および加速度を計算してもよい。運転操作取得部14は、アクセル操作、ブレーキ操作、ハンドル操作などの運転操作情報を取得する。アクセル操作情報、ブレーキ操作情報はストロークセンサから取得し、ハンドル操作情報はステアリングセンサなどから取得することができる。通信部20は、車両の位置情報、車両の走行速度または加速度を含む車両走行情報を障害物情報管理装置200に送信する。通信部20は、車両の位置情報、運転操作情報を含む車両走行情報を障害物情報管理装置200に送信してもよい。 The position information acquisition unit 10 acquires the position information of the vehicle from a position information sensor such as GPS (Global Positioning System). The vehicle speed acquisition unit 12 acquires the traveling speed and acceleration of the vehicle from a vehicle speed sensor, an acceleration sensor, or an in-vehicle network such as CAN (Controller Area Network). The vehicle speed acquisition unit 12 may calculate the traveling speed and acceleration of the vehicle from the change in the position information acquired by the position information acquisition unit 10. The driving operation acquisition unit 14 acquires driving operation information such as accelerator operation, brake operation, and steering wheel operation. Accelerator operation information and brake operation information can be acquired from the stroke sensor, and steering wheel operation information can be acquired from the steering sensor and the like. The communication unit 20 transmits vehicle traveling information including vehicle position information, vehicle traveling speed or acceleration to the obstacle information management device 200. The communication unit 20 may transmit vehicle traveling information including vehicle position information and driving operation information to the obstacle information management device 200.

画像取得部16は、カメラにより撮影された車両の周囲の画像を取得する。車両にカメラが複数台設けられてもよく、画像取得部16は、車両の前方、側方、後方の画像を含め、全周囲の画像を取得してもよい。図示しない符号化部により、撮影された車両周囲画像は符号化される。通信部20が、障害物情報管理装置200から運転状況の異常を知らせる異常信号を受信した場合、通信部20は、車両周囲画像の符号化データを障害物情報管理装置200に送信する。画像取得部16は、車両周囲画像の符号化データを障害物情報管理装置200に常時送信し、障害物情報管理装置200が運転状況の異常を知らせる異常信号に応じて画像処理を行う形態であってもよい。 The image acquisition unit 16 acquires an image of the surroundings of the vehicle taken by the camera. A plurality of cameras may be provided in the vehicle, and the image acquisition unit 16 may acquire an image of the entire surroundings including images of the front, side, and rear of the vehicle. The captured vehicle surrounding image is encoded by a coding unit (not shown). When the communication unit 20 receives an abnormality signal notifying the abnormality of the driving situation from the obstacle information management device 200, the communication unit 20 transmits the coded data of the vehicle surrounding image to the obstacle information management device 200. The image acquisition unit 16 constantly transmits the coded data of the vehicle surrounding image to the obstacle information management device 200, and the obstacle information management device 200 performs image processing in response to an abnormality signal notifying the abnormality of the driving situation. You may.

通信部20は、上述した各種情報を障害物情報管理装置200に送信する他に、障害物情報管理装置200から障害物情報を取得する。通知部18は、障害物情報をディスプレイに表示したり、音声で出力することで運転手や同乗者に通知する。 In addition to transmitting the various information described above to the obstacle information management device 200, the communication unit 20 acquires obstacle information from the obstacle information management device 200. The notification unit 18 notifies the driver and passengers by displaying obstacle information on a display or outputting it by voice.

走行情報管理装置100は、車両の位置情報や目的地までの経路情報に応じて障害物情報管理装置200から取得する障害物情報を利用して、目的地に到着する予想時間を再計算したり、障害物を回避する経路を提案することができる。 The travel information management device 100 recalculates the estimated time to arrive at the destination by using the obstacle information acquired from the obstacle information management device 200 according to the position information of the vehicle and the route information to the destination. , Can propose a route to avoid obstacles.

図2は、実施の形態に係る障害物情報管理装置200の構成図である。障害物情報管理装置200は、車両と通信可能なサーバの機能の一部として実装される。サーバは複数の車両と通信可能であり、障害物情報管理装置200は、ある車両から車両走行情報と車両周囲画像を取得して、障害物情報を抽出し、別の車両に障害物情報を送信することもできる。 FIG. 2 is a configuration diagram of the obstacle information management device 200 according to the embodiment. The obstacle information management device 200 is implemented as part of the function of a server capable of communicating with the vehicle. The server can communicate with a plurality of vehicles, and the obstacle information management device 200 acquires vehicle traveling information and a vehicle surrounding image from one vehicle, extracts the obstacle information, and transmits the obstacle information to another vehicle. You can also do it.

車両走行情報取得部42は、通信部40により走行情報管理装置100から受信された車両走行情報を取得する。車両走行情報には車両の位置情報と、車両の走行速度情報または運転操作情報のいずれか、または双方が含まれる。車両走行情報取得部42は、各車両の車両走行情報を走行履歴として車両走行情報記録部62に記録する。 The vehicle travel information acquisition unit 42 acquires vehicle travel information received from the travel information management device 100 by the communication unit 40. Vehicle traveling information includes vehicle position information and / or driving speed information and / or driving operation information of the vehicle. The vehicle travel information acquisition unit 42 records the vehicle travel information of each vehicle as a travel history in the vehicle travel information recording unit 62.

異常性判定部44は、車両走行情報取得部42により取得された車両走行情報にもとづいて車両の運転状況の異常性を判定する。たとえば、異常性判定部44は、車両走行速度から所定の閾値以上の減速または加速がなされたことが判定された場合、車両の運転状況が異常であると判定する。所定の閾値以上の減速または加速とは、所定期間、例えば2秒間に車両速度が例えば20km/hなどの所定値以上に減速されたまたは加速されたか、あるいは加速度センサにより、急ブレーキまたは急発進と判定される所定値以上の加速度(減速度)が検出されたことを指す。異常性判定部44は、運転操作情報から所定の閾値以上のアクセル操作量、ブレーキ操作量、またはハンドル操作量がなされたことが判定された場合、車両の運転状況が異常であると判定する。異常性判定部44は、ハザードランプの点灯や、車両の停止、後退挙動などにより、車両の運転状況が異常であると判定してもよい。異常性判定部44は、ハンドル操作量と減速/加速の組み合わせによって、路上駐車車両を回避する場合などの運転状況の異常性を判定してもよい。所定の閾値は車両の運転者によって異なる値を設定可能であり、運転者の運転操作の癖を反映させて、過剰に異常性を判定することを避ける設定を行うなど、異常性判定の精度を高めることができる。 The abnormality determination unit 44 determines the abnormality of the driving condition of the vehicle based on the vehicle travel information acquired by the vehicle travel information acquisition unit 42. For example, when it is determined from the vehicle traveling speed that the vehicle has been decelerated or accelerated by a predetermined threshold value or more, the abnormality determination unit 44 determines that the driving condition of the vehicle is abnormal. Deceleration or acceleration above a predetermined threshold means that the vehicle speed has been decelerated or accelerated to a predetermined value such as 20 km / h or more in a predetermined period, for example, 2 seconds, or sudden braking or sudden start is performed by an acceleration sensor. It means that the acceleration (deceleration) above the determined predetermined value is detected. When it is determined from the driving operation information that the accelerator operation amount, the brake operation amount, or the steering wheel operation amount is equal to or larger than a predetermined threshold value, the abnormality determination unit 44 determines that the driving condition of the vehicle is abnormal. The anomaly determination unit 44 may determine that the driving condition of the vehicle is abnormal due to the lighting of the hazard lamp, the stoppage of the vehicle, the reverse behavior, and the like. The abnormality determination unit 44 may determine the abnormality of the driving situation such as when avoiding a parked vehicle on the road by the combination of the steering wheel operation amount and the deceleration / acceleration. The predetermined threshold value can be set differently depending on the driver of the vehicle, and the accuracy of the abnormality judgment can be improved by making a setting that reflects the driver's driving operation habits and avoids excessively judging the abnormality. Can be enhanced.

また、異常性判定部44は、車両走行情報記録部62に走行履歴として記録された車両の通常走行時の車両走行情報を参照し、車両走行情報取得部42により取得された現在の車両走行情報が通常走行時の車両走行情報とは所定の閾値を超えて異なる場合、車両の運転状況が異常であると判定する。たとえば、走行速度について通常走行時の加速や減速を超えた場合、異常性判定部44は運転状況が異常であると判定する。また、運転者によってアクセル操作、ブレーキ操作、ハンドル操作が異なるが、通常走行時の操作量を超える運転操作がなされた場合、異常性判定部44は運転状況が異常であると判定する。 Further, the abnormality determination unit 44 refers to the vehicle travel information during normal travel of the vehicle recorded as the travel history in the vehicle travel information recording unit 62, and the current vehicle travel information acquired by the vehicle travel information acquisition unit 42. Is different from the vehicle traveling information during normal traveling by exceeding a predetermined threshold value, it is determined that the driving condition of the vehicle is abnormal. For example, when the traveling speed exceeds the acceleration or deceleration during normal traveling, the abnormality determination unit 44 determines that the driving condition is abnormal. Further, although the accelerator operation, the brake operation, and the steering wheel operation differ depending on the driver, when the driving operation exceeds the operation amount during normal driving, the abnormality determination unit 44 determines that the driving condition is abnormal.

異常性判定部44によって運転状況の異常性が判定された場合、通信部40は異常信号を走行情報管理装置100に送信する。走行情報管理装置100は、異常信号を障害物情報管理装置200から受信すると、画像取得部16により取得された車両周囲画像を障害物情報管理装置200に送信する。異常性判定部44により運転状況の異常性が判定された場合に限り、走行情報管理装置100から障害物情報管理装置200に車両周囲画像が送信することで、処理量と通信量を抑えて節電することができる。 When the abnormality determination unit 44 determines that the driving condition is abnormal, the communication unit 40 transmits an abnormality signal to the traveling information management device 100. When the travel information management device 100 receives the abnormality signal from the obstacle information management device 200, the travel information management device 100 transmits the vehicle surrounding image acquired by the image acquisition unit 16 to the obstacle information management device 200. Only when the abnormality determination unit 44 determines that the driving condition is abnormal, the driving information management device 100 transmits the vehicle surrounding image to the obstacle information management device 200, thereby suppressing the processing amount and the communication amount to save power. can do.

画像取得部48は、通信部40により走行情報管理装置100から受信された車両周囲画像の符号化データを取得する。図示しない復号部により、車両周囲画像の符号化データは復号され、画像記録部64に記録される。 The image acquisition unit 48 acquires the coded data of the vehicle surrounding image received from the travel information management device 100 by the communication unit 40. The encoded data of the vehicle surrounding image is decoded by the decoding unit (not shown) and recorded in the image recording unit 64.

標識検出部46は、画像記録部64に記録された車両周囲画像を参照して、交通信号機や道路標識など車両走行に関する標識を検出する。標識検出部46は、車両走行に関する標識が検出された場合、異常性判定部44に対して、車両走行に関する標識が検出された後の所定期間内は、車両の運転状況の異常性を判定しないように指示する。所定期間は標識の種別に応じて時間を設定する。たとえば交通信号機であれば、信号の色が変わる間隔が信号機の設置場所と時間帯によって決められていることが多いため、信号の色が切り替わる時間間隔を所定時間として設定してもよい。一時停止標識や速度制限標識であれば、標識のある場所、例えば一時停止標識の前後5mを通過するのに要する時間を所定期間として設定してもよい。これにより、車両が交通信号、一時停止標識、速度制限標識などにより、車両を一時停止したり、減速しなければならない状況を誤って運転状況の異常であると判定することを回避することができる。 The sign detection unit 46 detects signs related to vehicle travel, such as traffic signals and road signs, with reference to the vehicle surrounding image recorded in the image recording unit 64. When the sign related to vehicle running is detected, the sign detecting unit 46 does not determine the abnormality of the driving condition of the vehicle to the abnormality determining unit 44 within a predetermined period after the sign related to vehicle running is detected. Instruct. The predetermined period is set according to the type of sign. For example, in the case of a traffic signal, the interval at which the color of the signal changes is often determined by the location and time zone of the signal, so the time interval at which the color of the signal changes may be set as a predetermined time. If it is a stop sign or a speed limit sign, the time required to pass a place with the sign, for example, 5 m before and after the stop sign may be set as a predetermined period. As a result, it is possible to avoid erroneously determining a situation in which the vehicle must stop or decelerate due to a traffic signal, a stop sign, a speed limit sign, or the like as an abnormality in the driving situation. ..

障害物抽出部50は、画像記録部64に記録された車両周囲画像から車両の走行の支障となる障害物を、パターンマッチングなどの画像認識技術を用いて抽出する。走行支障要因となる障害物はたとえば路上駐車している車両、電信柱、対向車、歩行者、自転車、雨天時の水たまり、道路工事現場、落下物、崖崩れなどである。障害物抽出部50はパターンマッチング用の辞書を備え、画像記録部64に記録された車両周囲画像と辞書とを照合してこれらの障害物を抽出する。障害物抽出部50が有するパターンマッチング用の辞書の種類に応じて、抽出する障害物の種類は異なる。また、障害物抽出部50は、画像上において、抽出した障害物が所定の領域、例えば、画像の上部や左右端部を除く領域において抽出された場合に、車両の走行の支障となると判定する。 The obstacle extraction unit 50 extracts obstacles that hinder the running of the vehicle from the vehicle surrounding image recorded in the image recording unit 64 by using an image recognition technique such as pattern matching. Obstacles that hinder driving include, for example, vehicles parked on the street, telephone poles, oncoming vehicles, pedestrians, bicycles, puddles in the rain, road construction sites, falling objects, landslides, and the like. The obstacle extraction unit 50 includes a dictionary for pattern matching, and extracts these obstacles by collating the vehicle surrounding image recorded in the image recording unit 64 with the dictionary. The type of obstacle to be extracted differs depending on the type of the pattern matching dictionary of the obstacle extraction unit 50. Further, the obstacle extraction unit 50 determines that when the extracted obstacle is extracted in a predetermined area on the image, for example, an area other than the upper part and the left and right ends of the image, it hinders the running of the vehicle. ..

走行軌跡予測部52は、車両走行情報取得部42から車両走行情報を受け取り、車両走行情報にもとづいて車両周囲画像上の車両の走行予測軌跡を予測する。たとえば、車両の走行速度、走行方向、ハンドル操作量などの情報にもとづいて車両が走行する軌跡を画像上で予測することができる。走行軌跡予測部52は、例えば、ハンドル操作量がゼロである場合、車両が直進すると判断し、車両前方を撮像した車両周囲画像上の、中央の所定部分を車両が走行する軌跡として予測する。このとき、画像の所定部分とは車両の車幅や画像の画角、車両に設けられるカメラの取付け角度により異なるため、各車両ごとに設定されることが好ましい。走行軌跡予測部52は、また、ハンドル操作量に応じて、車両が右方向または左方向に進行すると判断し、ハンドル操作量に応じた画像上の所定部分を車両が走行する軌跡として予測する。走行軌跡予測部52は、走行速度から、所定の距離を車両の移動範囲として予測してもよく、位置情報の推移から車両の走行方向を予測してもよい。走行軌跡予測部52は、障害物抽出部50に対して、走行予測軌跡上もしくはその近傍にある物体を車両の走行の支障となる障害物として抽出するように指示する。これにより、たとえば、車両周囲画像に路上駐車車両、歩行者、自転車などが抽出されても、走行予測軌跡上もしくはその近傍にない場合は、走行の支障とはならないことから、誤って障害物として抽出されることを防止することができる。 The travel locus prediction unit 52 receives vehicle travel information from the vehicle travel information acquisition unit 42, and predicts the vehicle travel prediction locus on the vehicle surrounding image based on the vehicle travel information. For example, the trajectory of the vehicle can be predicted on the image based on information such as the vehicle's traveling speed, traveling direction, and steering wheel operation amount. For example, when the amount of steering wheel operation is zero, the traveling locus prediction unit 52 determines that the vehicle is going straight, and predicts a predetermined central portion of the vehicle surrounding image of the front of the vehicle as the traveling locus of the vehicle. At this time, since the predetermined portion of the image differs depending on the vehicle width of the vehicle, the angle of view of the image, and the mounting angle of the camera provided on the vehicle, it is preferable to set it for each vehicle. The traveling locus prediction unit 52 also determines that the vehicle travels to the right or left depending on the amount of steering wheel operation, and predicts a predetermined portion on the image according to the amount of steering wheel operation as the trajectory on which the vehicle travels. The traveling locus prediction unit 52 may predict a predetermined distance as the moving range of the vehicle from the traveling speed, or may predict the traveling direction of the vehicle from the transition of the position information. The traveling locus prediction unit 52 instructs the obstacle extraction unit 50 to extract an object on or near the traveling prediction locus as an obstacle that hinders the traveling of the vehicle. As a result, for example, even if a vehicle parked on the road, a pedestrian, a bicycle, etc. is extracted from the vehicle surrounding image, if it is not on or near the travel prediction trajectory, it does not hinder the travel, so it is mistakenly regarded as an obstacle. It can be prevented from being extracted.

障害物情報管理部54は、異常性判定部44から運転状況の異常性に関する情報を受け取り、障害物抽出部50から障害物に関する情報を受け取り、車両走行情報取得部42から車両位置情報を受け取る。障害物情報管理部54は、運転状況の異常性に関する情報および障害物に関する情報を車両位置情報に関連付けて障害物情報を生成し、障害物情報記録部60に記録して管理する。言い換えると、障害物情報管理部54は、運転状況が異常であることを示した場合に、運転状況の異常性と、発生した位置情報と、抽出された障害物情報と、を紐付けて記録し、管理する。抽出された障害物情報とは、運転状況が異常となる要因情報であり、路上駐車車両、電信柱、歩行者などの情報である。これらの障害物情報を、画像ではなくラベル付けされた障害物情報とすることで、障害物情報記録部60の記録容量を抑制することができる。通信部40は、障害物情報管理部54により生成された障害物情報を走行情報管理装置100に送信する。 The obstacle information management unit 54 receives information on the abnormality of the driving situation from the abnormality determination unit 44, receives information on the obstacle from the obstacle extraction unit 50, and receives vehicle position information from the vehicle traveling information acquisition unit 42. The obstacle information management unit 54 generates obstacle information by associating information on abnormalities in driving conditions and information on obstacles with vehicle position information, and records and manages the obstacle information in the obstacle information recording unit 60. In other words, when the obstacle information management unit 54 indicates that the driving condition is abnormal, the obstacle information management unit 54 records the abnormality of the driving condition, the generated position information, and the extracted obstacle information in association with each other. And manage. The extracted obstacle information is information on factors that cause abnormal driving conditions, such as information on vehicles parked on the street, telephone poles, and pedestrians. By using these obstacle information as labeled obstacle information instead of an image, the recording capacity of the obstacle information recording unit 60 can be suppressed. The communication unit 40 transmits the obstacle information generated by the obstacle information management unit 54 to the travel information management device 100.

ここで、運転状況の異常性に関する情報は、たとえば減速、急ブレーキなどの異常運転情報であり、障害物に関する情報は、たとえば走行支障要因となる路上駐車車両、歩行者などの障害物の種別情報や、対向車とのすれ違い困難、学生の集団登校など推測される走行支障の説明情報である。このような情報を蓄積することで、車両の走行に支障となる障害物をマッピングした地図情報を生成することができる。 Here, the information regarding the abnormality of the driving situation is, for example, abnormal driving information such as deceleration and sudden braking, and the information regarding obstacles is, for example, information on the types of obstacles such as road parked vehicles and pedestrians that cause driving obstacles. It is also information on driving obstacles that are presumed to be difficult to pass by oncoming vehicles and group attendance of students. By accumulating such information, it is possible to generate map information that maps obstacles that hinder the running of the vehicle.

日時情報取得部56は、運転状況の異常性が判定された時の日時情報を取得し、障害物情報管理部54に与える。天候情報取得部58は、運転状況の異常性が判定された時の天候情報を取得し、障害物情報管理部54に与える。障害物情報管理部54は、障害物情報にさらに日時情報および天候情報を関連付け、障害物情報記録部60に記録し、管理してもよい。 The date / time information acquisition unit 56 acquires the date / time information when the abnormality of the driving situation is determined and gives it to the obstacle information management unit 54. The weather information acquisition unit 58 acquires the weather information when the abnormality of the driving condition is determined and gives it to the obstacle information management unit 54. The obstacle information management unit 54 may further associate the obstacle information with the date and time information and the weather information, record the information in the obstacle information recording unit 60, and manage the information.

たとえば、学校の通学路では登下校時には学生などの人の集団が道路まではみ出して歩行し、走行の妨げになることがあるが、障害物情報に日時情報を関連付けることで、特定の時間帯に通学路を通過する車両に、人の集団が歩いている可能性を障害物情報として提供することが可能になる。言い換えると、車両の減速などの運転状況の異常性の発生と、発生した位置情報と、発生した日時情報と、その要因である「人の集団」という障害物情報と、を紐付けてマッピングした地図情報を提供することができる。また、雨天時には道路の特定の場所に水たまりが生じ、走行に支障を与えることがあるが、障害物情報に天候情報を関連付けることで、雨天など特定の天候の場合、水たまりが生じる特定の場所を通過する車両に前もって水たまりがある可能性を障害物情報として提供することが可能になる。 For example, on the school road, a group of students and other people may walk off the road and hinder driving when going to and from school, but by associating obstacle information with date and time information, it is possible to set a specific time zone. It becomes possible to provide the possibility that a group of people is walking as obstacle information to a vehicle passing through a school road. In other words, the occurrence of abnormalities in driving conditions such as deceleration of the vehicle, the location information where it occurred, the date and time information where it occurred, and the obstacle information called "group of people", which is the cause, were mapped in association with each other. Map information can be provided. Also, in rainy weather, a puddle may occur in a specific place on the road, which may hinder driving. However, by associating the obstacle information with the weather information, in the case of specific weather such as rainy weather, a specific place where a puddle occurs It is possible to provide obstacle information as to the possibility that a passing vehicle has a puddle in advance.

障害物情報管理部54は、車両走行情報取得部42が取得した各車両の位置情報にもとづいて、各車両の現在位置または目的地までの経路上の障害物情報を障害物情報記録部60から検索する。通信部40は、障害物情報管理部54により検索された障害物情報を各車両の走行情報管理装置100に送信する。ある車両が遭遇した障害物の情報を同じ場所を通過する別の車両に提供することができるため、障害物の存在を知らない別の車両の運転手に注意を促したり、事前に警告することができる。 The obstacle information management unit 54 obtains obstacle information on the route to the current position or destination of each vehicle from the obstacle information recording unit 60 based on the position information of each vehicle acquired by the vehicle traveling information acquisition unit 42. Search for. The communication unit 40 transmits the obstacle information searched by the obstacle information management unit 54 to the traveling information management device 100 of each vehicle. To alert or warn the driver of another vehicle who is unaware of the presence of the obstacle, as it can provide information about obstacles encountered by one vehicle to another vehicle passing through the same location. Can be done.

また、障害物情報記録部60に蓄積される障害物情報は、道路管理者に提供して道路インフラの整備計画に活用することもできる。道路管理者は、障害物情報記録部60に蓄積される障害物情報に基づいて、車両の走行の障害となっている障害物を特定して、インフラの整備計画に活用する。道路管理者は、例えば、車両の減速が頻繁に発生している道路において、その要因となる障害物情報、たとえば特定の電信柱の存在を認識することができる。また、どの電信柱が車両の走行の支障になる場合が多く、どの電信柱が車両の走行に支障とならない場合が多いかなどの詳細な情報を認識することができる。 In addition, the obstacle information accumulated in the obstacle information recording unit 60 can be provided to the road manager and used for the road infrastructure development plan. Based on the obstacle information accumulated in the obstacle information recording unit 60, the road manager identifies obstacles that are obstacles to the running of the vehicle and utilizes them in the infrastructure development plan. The road manager can recognize, for example, obstacle information that causes the deceleration of the vehicle frequently, for example, the presence of a specific telephone pole. In addition, it is possible to recognize detailed information such as which telephone poles often hinder the running of the vehicle and which telegraph poles often do not hinder the running of the vehicle.

図3は、本実施の形態の障害物情報管理装置200による障害物情報管理手順を説明するフローチャートである。 FIG. 3 is a flowchart illustrating an obstacle information management procedure by the obstacle information management device 200 of the present embodiment.

車両走行情報取得部42は、各車両の走行情報管理装置100から車両走行情報を受信する(S10)。 The vehicle travel information acquisition unit 42 receives vehicle travel information from the travel information management device 100 of each vehicle (S10).

標識検出部46は、画像記録部64に既に記録された車両周囲画像に車両走行に関する標識があるかどうかを判定する(S12)。標識が検出された場合(S12のY)、所定期間の経過を待ち(S14)、所定期間の経過後、ステップS10に戻る。標識が検出されなかった場合(S12のN)、ステップS16に進む。このように、標識検出部46によって標識が検出された場合は、所定期間内は異常性判定部44により運転状況の異常性が判定されることはない。標識検出部46は、障害物情報管理装置200に必須の構成要素ではなく、ステップS10にて車両走行情報を受信した後、ステップS16に進んでもよい。 The sign detection unit 46 determines whether or not there is a sign related to vehicle running in the vehicle surrounding image already recorded in the image recording unit 64 (S12). When the sign is detected (Y in S12), the elapse of the predetermined period is waited (S14), and after the elapse of the predetermined period, the process returns to step S10. If no sign is detected (N in S12), the process proceeds to step S16. In this way, when the sign is detected by the sign detection unit 46, the abnormality determination unit 44 does not determine the abnormality of the driving condition within a predetermined period. The sign detection unit 46 is not an essential component of the obstacle information management device 200, and may proceed to step S16 after receiving vehicle travel information in step S10.

異常性判定部44は、走行情報管理装置100から受信された車両走行情報にもとづいて運転状況の異常性を判定する(S16)。運転状況の異常性が判定されなかった場合(S18のN)、ステップS10に戻る。運転状況の異常性が判定された場合(S18のY)、ステップS20に進む。 The abnormality determination unit 44 determines the abnormality of the driving situation based on the vehicle travel information received from the travel information management device 100 (S16). If the abnormality of the driving condition is not determined (N in S18), the process returns to step S10. When the abnormality of the driving condition is determined (Y in S18), the process proceeds to step S20.

画像取得部48は、走行情報管理装置100から車両周囲画像を受信し、画像記録部64に記録する(S20)。 The image acquisition unit 48 receives the vehicle surrounding image from the travel information management device 100 and records it in the image recording unit 64 (S20).

走行軌跡予測部52は、受信された車両走行情報にもとづいて車両周囲画像上の車両の走行予測軌跡を予測する(S22)。走行軌跡予測部52は、障害物情報管理装置200に必須の構成要素ではなく、ステップS20にて車両周囲画像を受信した後、ステップS24に進んでもよい。 The travel locus prediction unit 52 predicts the travel prediction locus of the vehicle on the vehicle surrounding image based on the received vehicle travel information (S22). The traveling locus prediction unit 52 is not an essential component of the obstacle information management device 200, and may proceed to step S24 after receiving the vehicle surrounding image in step S20.

障害物抽出部50は、車両周囲画像から、走行予測軌跡上もしくは画像の所定の領域内にある物体を車両の走行の支障となる障害物として抽出する(S24)。 The obstacle extraction unit 50 extracts an object on the travel prediction trajectory or within a predetermined region of the image from the vehicle surrounding image as an obstacle that hinders the vehicle's travel (S24).

障害物情報管理部54は、運転状況の異常性に関する情報および走行支障要因となる障害物に関する情報を車両位置情報と関連付けた障害物情報を生成し、障害物情報記録部60に蓄積して管理する(S26)。 The obstacle information management unit 54 generates obstacle information in which information on abnormalities in driving conditions and information on obstacles that cause driving obstacles are associated with vehicle position information, and stores and manages the information in the obstacle information recording unit 60. (S26).

障害物情報管理部54は、生成された障害物情報を走行情報管理装置100に送信することで障害物に遭遇した車両の運転者に障害物情報を通知する他、各車両の走行経路上の障害物情報を障害物情報記録部60から検索し、各車両の走行情報管理装置100に送信することで他の車両の運転者に前もって障害物情報を提供する(S28)。 The obstacle information management unit 54 notifies the driver of the vehicle that has encountered the obstacle by transmitting the generated obstacle information to the travel information management device 100, and also on the travel route of each vehicle. Obstacle information is searched from the obstacle information recording unit 60 and transmitted to the traveling information management device 100 of each vehicle to provide obstacle information to drivers of other vehicles in advance (S28).

以上説明したように、本実施の形態の障害物情報管理装置200によれば、各車両から位置情報、車速情報、運転操作情報、運転状況の異常性が判定された地点で撮影した車両周囲画像を取得し、運転状況の異常性と画像から認識される障害物などを紐付けて障害物情報として管理し、運転者や管理者に障害物情報を提供することができる。 As described above, according to the obstacle information management device 200 of the present embodiment, the vehicle surrounding image taken from each vehicle at the position where the position information, the vehicle speed information, the driving operation information, and the abnormality of the driving situation are determined. Can be obtained, and the anomaly of the driving situation and the obstacle recognized from the image can be linked and managed as obstacle information, and the obstacle information can be provided to the driver and the manager.

障害物情報を提供された管理者は、障害物情報を解析することで、より正確な障害物の除去効果を事前に把握する事ができ、より効率的で低コストな道路インフラの整備を実施することができる。例えば電信柱をなくすための電線地中化を実施する際、電線埋設時の交通改善効果を具体的に評価するとともに、取得した画像から電線埋設時の外観を想定することもできる。また、電信柱に付随する電線、変圧器等のインフラの置き換え場所を確保することが容易かどうかも画像から推察することができるため、複数の要因が複雑に絡む電線地中化のメリット、デメリットをより具体的、直感的に把握することができるようになる。 By analyzing the obstacle information, the manager who is provided with the obstacle information can grasp the more accurate obstacle removal effect in advance, and implement more efficient and low-cost road infrastructure development. can do. For example, when undergrounding an electric wire to eliminate utility poles, it is possible to specifically evaluate the traffic improvement effect when the electric wire is buried and to estimate the appearance when the electric wire is buried from the acquired image. In addition, since it is possible to infer from the image whether it is easy to secure a replacement place for infrastructure such as electric wires and transformers attached to utility poles, the advantages and disadvantages of undergrounding electric wires in which multiple factors are complicatedly involved. Will be able to grasp more concretely and intuitively.

また、運転状況が異常になる要因として抽出した障害物情報を道路拡張工事や無電信柱化などのインフラ整備に活用したり、抽出した障害物情報を各車両に道路ごとの走行支障要因情報として報知することで、スムースな走行の支援を行うことができる。 In addition, obstacle information extracted as a factor that causes abnormal driving conditions can be used for infrastructure development such as road expansion work and no telephone poles, and the extracted obstacle information can be used for each vehicle as driving obstacle factor information for each road. By notifying, it is possible to support smooth driving.

以上、本発明を実施の形態をもとに説明した。実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。 The present invention has been described above based on the embodiments. Embodiments are examples, and it is understood by those skilled in the art that various modifications are possible for each of these components and combinations of each processing process, and that such modifications are also within the scope of the present invention. ..

障害物情報管理装置200の機能の少なくとも一部を車両の走行情報管理装置100に設けることもできる。たとえば異常性判定部44を走行情報管理装置100に設けて、走行情報管理装置100が運転状況の異常性を判定した場合に、走行情報管理装置100から障害物情報管理装置200に車両走行情報と車両周囲画像を送信するように構成してもよい。このように障害物情報管理装置200の機能の少なくとも一部を車両の走行情報管理装置100に設ける場合、通信部20が通信する情報は適宜変更され、または通信部の一部の機能が省略される。 At least a part of the functions of the obstacle information management device 200 can be provided in the vehicle travel information management device 100. For example, when an abnormality determination unit 44 is provided in the travel information management device 100 and the travel information management device 100 determines an abnormality in the driving situation, the travel information management device 100 sends the vehicle travel information to the obstacle information management device 200. It may be configured to transmit a vehicle surrounding image. When at least a part of the functions of the obstacle information management device 200 is provided in the vehicle traveling information management device 100 in this way, the information communicated by the communication unit 20 is appropriately changed, or some functions of the communication unit are omitted. To.

障害物情報管理装置200の機能を、車両に搭載してもよい。このとき障害物情報管理装置200は、位置情報取得部10および車両速度取得部12を含んで構成される車両走行情報取得部42と、異常性判定部44と、画像取得部16を含んで構成される画像取得部48と、障害物抽出部50と、障害物情報管理部54と、を含んで構成される。運転操作取得部14や標識検出部46など、上述した機能をさらに含んで構成されてもよい。 The function of the obstacle information management device 200 may be mounted on the vehicle. At this time, the obstacle information management device 200 includes a vehicle traveling information acquisition unit 42 including a position information acquisition unit 10 and a vehicle speed acquisition unit 12, an abnormality determination unit 44, and an image acquisition unit 16. The image acquisition unit 48, the obstacle extraction unit 50, and the obstacle information management unit 54 are included. The above-mentioned functions such as the driving operation acquisition unit 14 and the sign detection unit 46 may be further included.

車両の運転者の音声を車両走行情報に含めて走行情報管理装置100から障害物情報管理装置200に送信し、障害物情報管理装置200の異常性判定部44が「電柱(電信柱)がじゃまだな」、「危ないなあ」、「ぶつかる!」などの運転者の発話を分析して運転状況の異常性を判定してもよい。運転者の心拍数などの生体情報や運転者の顔画像を車両走行情報に含めてもよい。異常性判定部44が運転者の生体情報や顔画像にもとづいて運転者の緊張度合いを推定し、運転状況の異常性を判定することができる。 The voice of the driver of the vehicle is included in the vehicle travel information and transmitted from the travel information management device 100 to the obstacle information management device 200, and the abnormality determination unit 44 of the obstacle information management device 200 says "telephone pole (telephone pole) is jammed". You may determine the anomaly of the driving situation by analyzing the driver's utterances such as "not yet", "dangerous", and "crash!". Biological information such as the driver's heart rate and the driver's face image may be included in the vehicle driving information. The abnormality determination unit 44 can estimate the degree of tension of the driver based on the driver's biological information and the facial image, and determine the abnormality of the driving situation.

なお、実施の形態で説明した各装置の機能構成はハードウェア資源またはソフトウェア資源により、あるいはハードウェア資源とソフトウェア資源の協働により実現できる。ハードウェア資源としてプロセッサ、ROM、RAM、その他のLSIを利用できる。ソフトウェア資源としてオペレーティングシステム、アプリケーション等のプログラムを利用できる。 The functional configuration of each device described in the embodiment can be realized by hardware resources or software resources, or by collaboration between hardware resources and software resources. Processors, ROMs, RAMs, and other LSIs can be used as hardware resources. Programs such as operating systems and applications can be used as software resources.

10 位置情報取得部、 12 車両速度取得部、 14 運転操作取得部、 16 画像取得部、 18 通知部、 20 通信部、 40 通信部、 42 車両走行情報取得部、 44 異常性判定部、 46 標識検出部、 48 画像取得部、 50 障害物抽出部、 52 走行軌跡予測部、 54 障害物情報管理部、 56 日時情報取得部、 58 天候情報取得部、 60 障害物情報記録部、 62 車両走行情報記録部、 64 画像記録部、 100 走行情報管理装置、 200 障害物情報管理装置。 10 Position information acquisition unit, 12 Vehicle speed acquisition unit, 14 Driving operation acquisition unit, 16 Image acquisition unit, 18 Notification unit, 20 Communication unit, 40 Communication unit, 42 Vehicle travel information acquisition unit, 44 Abnormality determination unit, 46 Marker Detection unit, 48 image acquisition unit, 50 obstacle extraction unit, 52 travel locus prediction unit, 54 obstacle information management unit, 56 date and time information acquisition unit, 58 weather information acquisition unit, 60 obstacle information recording unit, 62 vehicle travel information Recording unit, 64 image recording unit, 100 driving information management device, 200 obstacle information management device.

Claims (9)

車両の走行速度および位置情報を含む車両走行情報を取得する車両走行情報取得部と、
前記車両走行情報にもとづいて前記車両の運転状況の異常性を判定する異常性判定部と、
前記車両の周囲を撮影した画像を取得する画像取得部と、
前記画像から前記車両の走行の支障となる障害物を抽出する障害物抽出部と、
前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報と関連付けて管理する障害物情報管理部と、を備えることを特徴とする障害物情報管理装置。
A vehicle travel information acquisition unit that acquires vehicle travel information including vehicle travel speed and position information,
An abnormality determination unit that determines an abnormality in the driving condition of the vehicle based on the vehicle traveling information,
An image acquisition unit that acquires an image of the surroundings of the vehicle,
An obstacle extraction unit that extracts obstacles that hinder the running of the vehicle from the image,
An obstacle information management device comprising: an obstacle information management unit that manages information on anomalies in operating conditions and information on obstacles in association with the position information.
前記異常性判定部は、前記車両走行情報から、所定期間内における前記車両の閾値以上の減速または加速が検出された場合、前記車両の運転状況が異常であると判定することを特徴とする請求項1に記載の障害物情報管理装置。 The claim is characterized in that the abnormality determination unit determines that the driving condition of the vehicle is abnormal when deceleration or acceleration equal to or higher than the threshold value of the vehicle is detected from the vehicle travel information within a predetermined period. Item 1. Obstacle information management device according to item 1. 前記車両走行情報は、前記車両のアクセル操作量、ブレーキ操作量、およびハンドル操作量の少なくとも一つを含む運転操作情報をさらに含み、
前記異常性判定部は、前記運転操作情報から前記車両の閾値以上のアクセル操作量、ブレーキ操作量、およびハンドル操作量の少なくとも一つが検出された場合、前記車両の運転状況が異常であると判定することを特徴とする請求項1に記載の障害物情報管理装置。
The vehicle traveling information further includes driving operation information including at least one of an accelerator operation amount, a brake operation amount, and a steering wheel operation amount of the vehicle.
When at least one of the accelerator operation amount, the brake operation amount, and the steering wheel operation amount equal to or higher than the threshold value of the vehicle is detected from the driving operation information, the abnormality determination unit determines that the driving condition of the vehicle is abnormal. The obstacle information management device according to claim 1, wherein the obstacle information management device is provided.
前記車両の通常走行時の前記車両走行情報を走行履歴として記録する車両走行情報記録部をさらに備え、
前記異常性判定部は、前記車両走行情報記録部に記録された前記通常走行時の前記車両走行情報と、前記車両走行情報取得部により取得された前記車両走行情報とが所定の閾値を超えて異なる場合、前記車両の運転状況が異常であると判定する請求項1に記載の障害物情報管理装置。
Further provided with a vehicle travel information recording unit that records the vehicle travel information during normal travel of the vehicle as a travel history.
In the abnormality determination unit, the vehicle travel information during normal driving recorded in the vehicle travel information recording unit and the vehicle travel information acquired by the vehicle travel information acquisition unit exceed a predetermined threshold value. The obstacle information management device according to claim 1, wherein if they are different, it is determined that the driving condition of the vehicle is abnormal.
日時情報を取得する日時情報取得部および天候情報を取得する天候情報取得部の少なくとも一つをさらに備え、
前記障害物情報管理部は、前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報の他にさらに前記日時情報および前記天候情報の少なくとも一つに関連づけて管理することを特徴とする請求項1から4のいずれかに記載の障害物情報管理装置。
It also has at least one of the date and time information acquisition unit for acquiring date and time information and the weather information acquisition unit for acquiring weather information.
The obstacle information management unit is characterized in that it manages information on the abnormality of the driving situation and information on the obstacle in association with at least one of the date and time information and the weather information in addition to the position information. The obstacle information management device according to any one of claims 1 to 4.
前記画像上の前記車両の走行軌跡を予測する走行軌跡予測部をさらに備え、
前記障害物抽出部は、予測された前記走行軌跡上またはその近傍にある物体を、前記車両の走行の支障となる障害物として抽出することを特徴とする請求項1から5のいずれかに記載の障害物情報管理装置。
A traveling locus prediction unit for predicting the traveling locus of the vehicle on the image is further provided.
The obstacle extraction unit according to any one of claims 1 to 5, wherein the obstacle extraction unit extracts an object on or near the predicted traveling locus as an obstacle that hinders the traveling of the vehicle. Obstacle information management device.
前記画像から車両走行に関する標識を検出する標識検出部をさらに備え、
前記異常性判定部は、前記標識が検出された後の所定期間内において、前記車両の運転状況の異常性を判定しないことを特徴とする請求項1から6のいずれかに記載の障害物情報管理装置。
A sign detection unit for detecting a sign related to vehicle running from the image is further provided.
The obstacle information according to any one of claims 1 to 6, wherein the abnormality determination unit does not determine an abnormality in the driving condition of the vehicle within a predetermined period after the sign is detected. Management device.
車両の走行速度および位置情報を含む車両走行情報を取得する車両走行情報取得ステップと、
前記車両走行情報から前記車両の運転状況の異常性を判定する異常性判定ステップと、
前記車両の周囲を撮影した画像を取得する画像取得ステップと、
前記画像から前記車両の走行の支障となる障害物を抽出する障害物抽出ステップと、
前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報と関連付けて管理する障害物情報管理ステップと、を備えることを特徴とする障害物情報管理方法。
A vehicle travel information acquisition step for acquiring vehicle travel information including vehicle travel speed and position information,
An abnormality determination step for determining an abnormality in the driving condition of the vehicle from the vehicle traveling information,
An image acquisition step of acquiring an image of the surroundings of the vehicle, and
An obstacle extraction step of extracting an obstacle that hinders the running of the vehicle from the image,
An obstacle information management method comprising: an obstacle information management step for managing information on anomalies in operating conditions and information on obstacles in association with location information.
車両の走行速度および位置情報を含む車両走行情報を取得する車両走行情報取得ステップと、
前記車両走行情報から前記車両の運転状況の異常性を判定する異常性判定ステップと、
前記車両の周囲を撮影した画像を取得する画像取得ステップと、
前記画像から前記車両の走行の支障となる障害物を抽出する障害物抽出ステップと、
前記運転状況の異常性に関する情報および前記障害物に関する情報を前記位置情報と関連付けて管理する障害物情報管理ステップと、をコンピュータに実行させることを特徴とする障害物情報管理プログラム。
A vehicle travel information acquisition step for acquiring vehicle travel information including vehicle travel speed and position information,
An abnormality determination step for determining an abnormality in the driving condition of the vehicle from the vehicle traveling information,
An image acquisition step of acquiring an image of the surroundings of the vehicle, and
An obstacle extraction step of extracting an obstacle that hinders the running of the vehicle from the image,
An obstacle information management program comprising causing a computer to execute an obstacle information management step of managing information on anomalies in operating conditions and information on obstacles in association with location information.
JP2019049489A 2019-03-18 2019-03-18 Obstacle information management device, obstacle information management method, and obstacle information management program Pending JP2020154369A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019049489A JP2020154369A (en) 2019-03-18 2019-03-18 Obstacle information management device, obstacle information management method, and obstacle information management program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019049489A JP2020154369A (en) 2019-03-18 2019-03-18 Obstacle information management device, obstacle information management method, and obstacle information management program

Publications (1)

Publication Number Publication Date
JP2020154369A true JP2020154369A (en) 2020-09-24

Family

ID=72558994

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019049489A Pending JP2020154369A (en) 2019-03-18 2019-03-18 Obstacle information management device, obstacle information management method, and obstacle information management program

Country Status (1)

Country Link
JP (1) JP2020154369A (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114565903A (en) * 2022-02-25 2022-05-31 阿波罗智联(北京)科技有限公司 Abnormal data identification method and device, equipment, medium and product

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011151479A (en) * 2010-01-19 2011-08-04 Aisin Seiki Co Ltd Vehicle surrounding monitoring device
JP2014232508A (en) * 2013-05-30 2014-12-11 トヨタ自動車株式会社 Avoidance track prediction device
JP2017062583A (en) * 2015-09-24 2017-03-30 株式会社デンソー Danger information notification system, server and computer program
JP2017138694A (en) * 2016-02-02 2017-08-10 ソニー株式会社 Picture processing device and picture processing method
JP2018005261A (en) * 2016-06-27 2018-01-11 株式会社リコー Feedback device, feedback method, and program
JP2018081536A (en) * 2016-11-17 2018-05-24 三菱電機株式会社 Operation support system, operation support method, and program
JP2018105967A (en) * 2016-12-26 2018-07-05 パイオニア株式会社 Map data structure and obstacle determination device
JP2018149869A (en) * 2017-03-10 2018-09-27 株式会社デンソーテン Drive assisting device and drive assisting method

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011151479A (en) * 2010-01-19 2011-08-04 Aisin Seiki Co Ltd Vehicle surrounding monitoring device
JP2014232508A (en) * 2013-05-30 2014-12-11 トヨタ自動車株式会社 Avoidance track prediction device
JP2017062583A (en) * 2015-09-24 2017-03-30 株式会社デンソー Danger information notification system, server and computer program
JP2017138694A (en) * 2016-02-02 2017-08-10 ソニー株式会社 Picture processing device and picture processing method
JP2018005261A (en) * 2016-06-27 2018-01-11 株式会社リコー Feedback device, feedback method, and program
JP2018081536A (en) * 2016-11-17 2018-05-24 三菱電機株式会社 Operation support system, operation support method, and program
JP2018105967A (en) * 2016-12-26 2018-07-05 パイオニア株式会社 Map data structure and obstacle determination device
JP2018149869A (en) * 2017-03-10 2018-09-27 株式会社デンソーテン Drive assisting device and drive assisting method

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114565903A (en) * 2022-02-25 2022-05-31 阿波罗智联(北京)科技有限公司 Abnormal data identification method and device, equipment, medium and product
CN114565903B (en) * 2022-02-25 2023-08-18 阿波罗智联(北京)科技有限公司 Abnormal data identification method and device, equipment, medium and product

Similar Documents

Publication Publication Date Title
US9824588B2 (en) Electronic device, control method for electronic device, and control program for electronic device
US10166934B2 (en) Capturing driving risk based on vehicle state and automatic detection of a state of a location
JP4396597B2 (en) Dangerous reaction point recording system and driving support system
JP6537631B2 (en) Prediction device, prediction system, prediction method and prediction program
US11205342B2 (en) Traffic information processing device
JP2007164671A (en) Device for deciding approaching obstacle and system for warning collision with obstacle
JP7135904B2 (en) Traffic management system and its control method
EP3996063A1 (en) Safety performance evaluation device, safety performance evaluation method, information processing device, and information processing method
KR20170119842A (en) Apparatus and method for controlling autonomous driving vehicle
US11644324B2 (en) Dangerous place identification device, map data, dangerous place identification method, and program
CN114387785A (en) Safety management and control method and system based on intelligent highway and storable medium
CN114450732A (en) Monitoring center, monitoring system and method
CN112368707A (en) Rapid identification of dangerous or damaged objects in the surroundings of a vehicle
JP2023171455A (en) Route prediction device, in-vehicle device therewith, route prediction system, route prediction method, and computer program
CN111915914B (en) Vehicle driving assistance system and method, and corresponding computer-readable storage medium
JP2012069051A (en) In-vehicle operation recording device
CN112185170A (en) Traffic safety prompting method and road monitoring equipment
JP2020154369A (en) Obstacle information management device, obstacle information management method, and obstacle information management program
WO2022070426A1 (en) Information processing device, image transmission system, and information processing method
CN115092126A (en) Vehicle control device, vehicle control method, and computer-readable storage medium
JP5200990B2 (en) Driving assistance device
JP6634961B2 (en) Driving support device
JP2019175492A (en) Predictor, prediction system, prediction method, and prediction program
CN113487909B (en) Bend opposite vehicle early warning method and system based on voiceprint recognition
US11893889B2 (en) Travel assistance system, travel assistance method, and non-transitory computer-readable storage medium that stores program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20211029

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20220915

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20221004

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20221130

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20230404