JP2021026554A - 走行支援方法、道路撮影画像収集方法、および路側装置 - Google Patents

Abstract

【課題】ＩＴＳ通信の負荷を著しく増大させることなく、注目事象を検知して危険回避動作を行う制御の負荷を軽減して、自動運転車両の走行制御を適切に支援できるようにする。【解決手段】道路の対象区間の通行を終了した車両１に搭載された情報提供元の車載端末４が、対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、対象区間の終点に位置する終点側の路側機６に送信し、終点側の路側機６が、注目事象に関する撮影画像および付加情報を、対象区間の始点に位置する始点側の路側機６に送信し、始点側の路側機６が、注目事象に関する撮影画像および付加情報を、対象区間の通行を開始する車両に搭載された情報提供先の車載端末に送信し、情報提供先の車載端末が、注目事象に関する撮影画像および付加情報に基づいて、自車両の走行制御に関係する処理を行う。【選択図】図２

Description

本発明は、車両の走行制御を支援する走行支援方法、道路の撮影画像を収集する道路撮影画像収集方法、および車両の走行制御を支援し、または道路の撮影画像を収集する路側装置に関するものである。

近年、ＩＴＳ（Intelligent Transport System：高度道路交通システム）を利用した安全運転支援無線システムが実用化されている。また、近年、自動運転車の走行を支援する自動走行システムの実用化に向けた検討が進められており、特に自動走行システムにＩＴＳ通信を適用するための検討も行われている。このような自動走行システムにＩＴＳ通信を適用し、車両同士の通信（車車間通信）や、道路に設置された路側機と車両との間の通信（路車間通信）を利用して、道路状況などの様々な情報を交換することで、自動運転車両の走行制御を支援することができる。

このような道路状況などの情報の交換により自動運転車両の走行制御を支援することに関連するものとして、ユーザが場所を指定すると、その場所を走行している車両に搭載されたカメラ（ドライブレコーダ）による撮影画像を収集して、その撮影画像をユーザに提示する技術が知られている（特許文献１参照）。また、車両に搭載されたカメラによる撮影画像に基づいて走行関連情報、すなわち、車両の周囲の交通状況や異常事象（落石など）を検出して、その走行関連情報を車車間通信で他車両に送信する技術が知られている（特許文献２参照）。

特開２０１７−１８２７５７号公報 特開２００１−２８３３８１号公報

さて、道路に発生した注目事象、例えば、道路上の障害物や交通事故の発生状況などに関する情報を、先に通行した車両で取得して、その情報を、後から通行する別の車両に提供することが考えられる。このようにすると、その車両では注目事象を予測しながら走行することができることから、危険回避動作を行う制御の負荷を軽減することができ、特に自動運転車両の走行制御を適切に支援することができる。この場合、注目事象に関する情報とし、特許文献１に開示された技術のように、車両に搭載されたカメラの撮影画像を送信することが考えられる。

しかしながら、ＩＴＳ通信（車車間通信）は、多数の端末間の情報交換を行うものであり、データ量が少ない情報の送受信を前提としている。このため、特許文献２に開示された技術のように、小容量の文字情報からなる走行関連情報を送信するには、ＩＴＳ通信を利用することができる。一方、特許文献１に開示された技術のように、走行中の車両からデータ量が多い撮影画像を送信する場合、ＩＴＳ通信の負荷が著しく増大するために望ましくないという問題があった。

そこで、本発明は、ＩＴＳ通信の負荷を著しく増大させることなく、事前に注目事象を検知して危険回避動作を行う制御の負荷を軽減して、自動運転車両の走行制御を適切に支援することができる走行支援方法、道路撮影画像収集方法、および路側装置を提供することを主な目的とする。

本発明の走行支援方法は、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置が、前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、前記路側装置が、前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、直接または別の路側装置を介して送信し、前記情報提供先の車載装置が、前記注目事象に関する撮影画像および付加情報に基づいて、自車両の走行制御に関係する処理を行う構成とする。

また、本発明の道路撮影画像収集方法は、道路の対象区間の通行を終了した車両に搭載された車載装置が、前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、前記路側装置が、前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信し、前記サーバ装置が、前記注目事象に関する撮影画像および付加情報を蓄積し、ユーザからの地点を指定した閲覧要求に応じて、指定された地点における前記注目事象に関する撮影画像および付加情報をユーザに提示する構成とする。

また、本発明の路側装置は、車載装置と通信を行う路車間通信部と、プロセッサと、を備え、前記プロセッサは、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、前記路車間通信部により直接または別の路側装置を介して送信する構成とする。

また、本発明の路側装置は、車載装置と通信を行う路車間通信部と、プロセッサと、を備え、前記プロセッサは、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信する構成とする。

本発明によれば、対象区間を通行した車両が検知した注目事象に関する撮影画像および付加情報を、路側装置を経由して、その後に対象区間を通行する車両に提供して、その車両の走行制御を支援することができる。これにより、ＩＴＳ通信の負荷を著しく増大させることなく、事前に危険事象を検知して危険回避動作を行う制御の負荷を軽減すると共に、自動運転車両の安全走行を適切に支援することができる。

第１実施形態に係る走行支援システムの全体構成図 第１実施形態に係る走行支援システムの概要を示す説明図 第１実施形態に係るカメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図 第１実施形態に係る車両１で行われる注目地点接近判定処理の概要を示す説明図 第１実施形態に係る車両１および路側機６の概略構成を示すブロック図 第１実施形態に係る車両１および路側機６で行われる処理の手順を示すシーケンス図 第２実施形態に係る走行支援システムの概要を示す説明図 第２実施形態に係るカメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図 第２実施形態に係る路側機６で行われる反対車線画像合成処理の概要を示す説明図 第２実施形態に係る車両１および路側機６の概略構成を示すブロック図 第２実施形態に係る車両および路側機６で行われる処理の手順を示すシーケンス図 第３実施形態に係る走行支援システムの概要を示す説明図 第３実施形態に係るカメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図 第３実施形態に係る車両１および路側機６の概略構成を示すブロック図 第３実施形態に係る車両および路側機６で行われる処理の手順を示すシーケンス図 第４実施形態に係る走行支援システムの概要を示す説明図 第４実施形態に係る車両１、路側機６、およびサーバ８の概略構成を示すブロック図 第４実施形態に係る車両１、路側機６、およびサーバ８で行われる処理の手順を示すシーケンス図

前記課題を解決するためになされた第１の発明は、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置が、前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、前記路側装置が、前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、直接または別の路側装置を介して送信し、前記情報提供先の車載装置が、前記注目事象に関する撮影画像および付加情報に基づいて、自車両の走行制御に関係する処理を行う構成とする。

これによると、対象区間を通行した車両が検知した注目事象に関する撮影画像および付加情報を、路側装置を経由して、その後に対象区間を通行する車両に提供して、その車両の走行制御を支援することができる。これにより、ＩＴＳ通信の負荷を著しく増大させることなく、事前に注目事象を検知して危険回避動作を行う制御の負荷を軽減すると共に、自動運転車両の走行制御を適切に支援することができる。

また、第２の発明は、前記付加情報は、車両が現在位置する区間の区間情報、車両の進行方向に関する情報、注目事象の内容に関する情報、注目事象検知時の車両の地図上における位置情報、注目事象が発生した地点の撮影画像上における位置情報、および注目事象検知時の時間情報を含む構成とする。

これによると、注目事象の発生状況を適切に把握することができる。

また、第３の発明は、前記情報提供先の車載装置が、前記注目事象に関する撮影画像と現時点の撮影画像との類似性に基づいて、自車両が前記注目事象の発生地点に接近していることを判定する構成とする。

これによると、衛星電波の状態が悪いために衛星測位で取得する位置情報の精度が低い場合でも、自車両が注目地点に接近していることを精度よく判定することができる。この場合、撮影画像から移動物を除去した背景画像の類似性に基づいて判定を行うと、より一層精度を高めることができる。

また、第４の発明は、前記情報提供先の車載装置が、自車両が前記注目事象の発生地点に接近していると判定した場合に、危険回避動作指示を走行制御装置に出力する構成とする。

これによると、危険回避動作を走行制御装置に適切に行わせることができる。

また、第５の発明は、前記情報提供元の車載装置が、前記注目事象に関する撮影画像および付加情報を、前記対象区間の終点に位置する終点側の路側装置に送信し、前記終点側の路側装置が、前記注目事象に関する撮影画像および付加情報を、前記対象区間の始点に位置する始点側の路側装置に送信し、前記始点側の路側装置が、前記注目事象に関する撮影画像および付加情報を、前記情報提供先の車載装置に送信する構成とする。

これによると、２つの路側装置の間を対象区間として、今まで対象区間を通行した車両の車載装置から、対象区間内で発生した注目事象に関する撮影画像および付加情報を確実に取得することができ、また、これから対象区間に進入する車両の車載装置に、注目事象に関する撮影画像および付加情報を確実に提供することができる。

また、第６の発明は、前記情報提供元の車載装置は、前記対象区間を第１方向に通行する車両に搭載されたものであり、前記情報提供先の車載装置は、前記対象区間を前記第１方向とは逆の第２方向に通行する車両に搭載されたものであり、前記路側装置が、前記第１方向に通行する前記情報提供元の車載装置から取得した前記撮影画像において遮蔽物の手前側に写る移動物の撮影画像を抽出し、過去に前記第２方向に通行した車両の車載装置から取得した第２方向の撮影画像上の前記移動物の位置を算出し、算出された位置に基づいて前記移動物の撮影画像を前記第２方向の撮影画像に重畳した合成画像を生成し、前記合成画像を前記注目事象に関する撮影画像として前記情報提供先の車載装置に送信する構成とする。

これによると、遮蔽物（例えば停車車両）に遮られて見通し外となった移動物（例えば歩行者）が仮想的に見える状態の合成画像が車載装置に提供されるため、移動物の状況に基づいて、移動物との衝突事故を回避する適切な走行制御を行うことができる。

また、第７の発明は、前記注目事象は、交通事故であり、前記路側装置が、前記情報提供元の車載装置から取得した前記注目事象に関する撮影画像および付加情報を自装置に蓄積し、最新の前記注目事象に関する撮影画像および付加情報の他に、それ以前の前記注目事象に関する撮影画像および付加情報も前記情報提供先の車載装置に送信する構成とする。

これによると、交通事故が頻繁に発生する地点において、過去の交通事故の状況に基づいて、交通事故を回避する適切な走行制御を行うことができる。

また、第８の発明は、道路の対象区間の通行を終了した車両に搭載された車載装置が、前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、前記路側装置が、前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信し、前記サーバ装置が、前記注目事象に関する撮影画像および付加情報を蓄積し、ユーザからの地点を指定した閲覧要求に応じて、指定された地点における前記注目事象に関する撮影画像および付加情報をユーザに提示する構成とする。

これによると、各地点の撮影画像を、定点カメラがある場合と同様に収集することができる。また、ユーザが地点を指定することで、その地点の撮影画像がユーザに提示されるため、所要の地点の過去の状況を確認することができる。

また、第９の発明は、車載装置と通信を行う路車間通信部と、プロセッサと、を備え、前記プロセッサは、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、前記路車間通信部により直接または別の路側装置を介して送信する構成とする。

これによると、対象区間を通行した車両が検知した注目事象に関する撮影画像および付加情報を、その後に対象区間を通行する車両に提供して、その車両の走行制御を支援することができる。これにより、注目事象を検知して危険回避動作を行う制御の負荷を軽減すると共に、自動運転車両の走行制御を適切に支援することができる。

また、第１０の発明は、前記路車間通信部は、自装置が前記対象区間の終点に位置する場合には、前記注目事象に関する撮影画像および付加情報を、前記情報提供元の車載装置から受信し、自装置が前記対象区間の始点に位置する場合には、前記注目事象に関する撮影画像および付加情報を、前記情報提供先の車載装置に送信する構成とする。

これによると、２つの路側装置の間を対象区間として、今まで対象区間を通行した車両の車載装置から、対象区間内で発生した注目事象に関する撮影画像および付加情報を確実に取得することができ、また、これから対象区間に進入する車両の車載装置に、注目事象に関する撮影画像および付加情報を確実に提供することができる。

また、第１１の発明は、前記路車間通信部は、前記対象区間を第１方向に通行する車両に搭載された前記情報提供元の車載装置から、前記注目事象に関する撮影画像および付加情報を受信し、前記対象区間を前記第１方向とは逆の第２方向に通行する車両に搭載された前記情報提供先の車載装置に、前記注目事象に関する撮影画像および付加情報を送信し、前記プロセッサは、前記第１方向に通行する前記情報提供元の車載装置から取得した前記撮影画像において遮蔽物の手前側に写る移動物の撮影画像を抽出し、過去に前記第２方向に通行した車両の車載装置から取得した第２方向の撮影画像上の前記移動物の位置を算出し、算出された位置に基づいて前記移動物の撮影画像を前記第２方向の撮影画像に重畳した合成画像を生成し、前記合成画像を前記注目事象に関する撮影画像として前記情報提供先の車載装置に送信する構成とする。

これによると、遮蔽物（例えば停車車両）に遮られて見通し外となった移動物（例えば歩行者）が仮想的に見える状態の合成画像が車載装置に提供されるため、移動物の状況に基づいて、移動物との衝突事故を回避する適切な走行制御を行うことができる。

また、第１２の発明は、前記注目事象は、交通事故であり、前記プロセッサは、前記情報提供元の車載装置から取得した前記注目事象に関する撮影画像および付加情報を自装置の記憶手段に蓄積し、最新の前記注目事象に関する撮影画像および付加情報の他に、前記記憶手段に蓄積されたそれ以前の前記注目事象に関する撮影画像および付加情報も前記情報提供先の車載装置に送信する構成とする。

これによると、交通事故が頻繁に発生する地点において、過去の交通事故の状況に基づいて、交通事故を回避する適切な走行制御を行うことができる。

また、第１３の発明は、車載装置と通信を行う路車間通信部と、プロセッサと、を備え、前記プロセッサは、道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信する構成とする。

これによると、各地点の撮影画像を、定点カメラがある場合と同様に収集することができる。

以下、本発明の実施の形態を、図面を参照しながら説明する。

（第１実施形態）
図１は、第１実施形態に係る走行支援システムの全体構成図である。

この走行支援システムは、車両１（自動運転車両）の走行を支援するものであり、車両１に搭載されるカメラ２、センサ３、車載端末４（車載装置）、および自動運転ＥＣＵ５（移動制御装置、走行制御装置）と、道路に設置される路側機６（路側装置）と、を備えている。

カメラ２は、車両１の前方を撮影する。センサ３は、レーダー、ライダー、加速度センサ、ジャイロセンサ、舵角センサ、速度センサなどである。自動運転ＥＣＵ５は、センサ３の出力に基づいて、車両１の周囲の障害物を検知し、また、車両１の状態を検出して、自車両１の走行を制御する。

車載端末４および路側機６の間ではＩＴＳ通信が行われる。このＩＴＳ通信は、ＩＴＳ（Intelligent Transport System：高度道路交通システム）を利用した安全運転支援無線システムで採用されている周波数帯（例えば７００ＭＨｚ帯や５．８ＧＨｚ帯）を利用した無線通信である。このＩＴＳ通信では、車両１の位置情報などの所要の情報を含むメッセージを送受信する。

なお、このＩＴＳ通信のうち、車載端末４同士の間で行われるものを車車間通信、路側機６と車載端末４との間で行われるものを路車間通信とそれぞれ呼称する。また、車載端末４および路側機６は、歩行者端末（図示せず）との間でＩＴＳ通信（歩車間通信、路歩間通信）を行うことができる。

車載端末４は、ＩＴＳ通信（車車間通信）により他の車載端末４との間で、位置情報などを含むメッセージを送受信して、車両１同士の衝突の危険性を判定し、衝突の危険性がある場合には、運転者に対する注意喚起動作を行う。なお、注意喚起動作は、車載端末４と接続されたカーナビゲーション装置（図示せず）を用いて行うとよい。また、車載端末４は、ＩＴＳ通信（歩車間通信）により歩行者端末との間でメッセージを送受信して、歩行者と車両１との衝突の危険性を判定する。

路側機６は、ＩＴＳ通信（路車間通信、路歩間通信）により、自装置の周辺に位置する車両１や歩行者の存在を、車載端末４や歩行者端末に通知する。これにより、見通し外の交差点における右左折の際の衝突を防止することができる。なお、路側機６では、この他に、交通情報を車載端末４や歩行者端末に配信する。

また、路側機６と車載端末４との間では、ＷｉＦｉ（登録商標）などの無線ＬＡＮ通信が行われる。また、路側機６同士の間では、専用の路側ネットワーク（有線または無線）やセルラー通信などによるネットワークを介して通信（路路間通信）が行われる。

次に、第１実施形態に係る走行支援システムの概要について説明する。図２は、走行支援システムの概要を示す説明図である。図３は、カメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図である。図４は、車両１で行われる注目地点接近判定処理の概要を示す説明図である。

図２に示すように、路側機６は、道路の適所、例えば交差点に設置される。本実施形態では、２台の路側機６の間の道路を対象区間とする。図２に示す例では、２台の路側機６が道路に設置されているが、３台以上の路側機６が道路に設置される場合、２台の路側機６の間の対象区間を連続して複数設定することができる。この場合、終点側の路側機６は、次の対象区間の始点に位置する始点側の路側機６となる。

対象区間を通行する車両１では、カメラ２が車両１の前方を撮影し、車載端末４が、カメラ２の撮影画像に基づいて、車両１の前方の道路上に発生した注目事象を検知する（注目事象検知処理）。ここで、注目事象とは、車両１の安全な通行の支障となる可能性がある物体や状態であり、例えば、道路上に存在する障害物（例えば、タイヤ、シートなどの車両落下物）や、路面に形成された車両によるスリップの痕跡や、路面に発生した陥没などである。また、車両１の左側を通行する自転車や自動二輪なども、例えば車両１の左折時に事故の原因となる可能性があるため、注目事象に含めてもよい。さらに、右折する車両、速度が所定値以上の車両、走行位置が不安定な車両なども、車両１との事故の原因となる可能性があるため、注目事象に含めてもよい。

このとき、車載端末４は、撮影画像に基づいて、その注目事象の内容も判別する。例えば、車載端末４は、注目物体（落下物など）を検知した場合には、その注目物体の種類を判別する。また、車載端末４は、注目事象を検知すると、注目地点、すなわち、注目事象が発生した地点、例えば、事故が発生した地点や、障害物（車両の落下物など）が存在する地点の撮影画像上の位置情報（画像座標系における座標値）を取得する。

また、車載端末４は、注目事象を検知すると、注目事象情報を生成する。この注目事象情報は、注目事象検知時点の撮影画像の付加情報として、ドライブレコーダを構成するメモリ１４に格納される。この注目事象情報には、自車両１が現在位置する区間の区間情報、自車両１の進行方向に関する情報、注目事象の内容（障害物の種類など）に関する情報、注目事象検知時の車両１の位置情報（緯度，経度）、注目地点（注目事象が発生した地点）の撮影画像上の位置情報、および注目事象検知時の時間情報が含まれる。なお、区間情報は、車両１が対象区間を通行する際に、対象区間の始点に位置する始点側の路側機６から取得すればよい。

図３に示す例は、注目事象として、道路上に落下物（タイヤ）が存在する場合であり、図３（Ａ）に示す時点では、車両１の前方の道路上に障害物がない状況が撮影されているが、図３（Ｂ）に示す時点では、道路上に落下物が存在する状況が撮影され、図３（Ｃ）に示す時点では、注目地点を通り過ぎて、車両１の前方の道路上に障害物がない状況が撮影されている。

また、図２に示すように、対象区間を通行した車両１では、自車両１が対象区間の終点の近傍に到達すると、車載端末４が、注目事象検知時点の撮影画像および注目事象情報を、対象区間の終点に位置する終点側の路側機６に送信する。

終点側の路側機６は、車載端末４から受信した注目事象検知時点の撮影画像および注目事象情報を、対象区間の始点に位置する始点側の路側機６に送信する。

始点側の路側機６は、終点側の路側機６から受信した注目事象検知時点の撮影画像および注目事象情報を、対象区間を通行しようとする車両１の車載端末４に送信する。

対象区間を通行しようとする車両１では、車載端末４は、始点側の路側機６から受信した注目事象検知時点の撮影画像および注目事象情報に基づいて危険回避動作を指示し、自動運転ＥＣＵ５は、車載端末４からの危険回避動作の指示に応じて走行制御を行う。

このとき、図４に示すように、車載端末４は、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像と、注目事象検知時点の撮影画像とに基づいて、自車両１が注目地点の近くに到達したか否かを判定する（注目地点接近判定処理）。

この判定処理では、現時点の撮影画像から背景画像が抽出される。また、車載端末４は、注目事象検知時点の撮影画像から背景画像を抽出する（背景画像抽出処理）。そして、現時点の撮影画像から抽出した背景画像と、注目事象検知時点の撮影画像から抽出した背景画像とを比較して両者が一致するか否か、すなわち、両者の類似度が所定値より高くなるか否かを判定することにより、自車両１が注目地点の近くに到達したか否かが判定される（画像マッチング処理）。なお、自車両１が注目地点に近づくのに応じて、画像の類似度が徐々に高くなり、類似度が所定値より高くなった時点で、自車両１が注目地点の近くに到達したものと判定される。

このように本実施形態では、車両１や歩行者などの移動物を除去した背景画像の類似度で同一地点の撮影画像を判別するため、衛星電波の状態が悪いために測位部で取得する位置情報の精度が低い場合でも、自車両１が注目地点の近くに到達したことを精度よく判定することができる。

車載端末４は、自車両１が注目地点の近くに到達すると、自動運転ＥＣＵ５に危険回避動作指示を出力する。自動運転ＥＣＵ５は、車載端末４からの危険回避動作指示に基づいて走行制御を行う。これにより、車両１に搭載されたセンサ３の検出結果や、カメラ２の撮影画像に対する画像認識結果に基づくリアルタイムな障害物検知に先だって、車両１の前方に注目地点がある、すなわち、車両の落下物や事故車両などの障害物が存在することを予測しながら走行制御を行うことができる。例えば、早期に障害物を迂回するように車両１の走行を制御するため、障害物との衝突の回避を安全に確実に円滑に行うことができる。

なお、背景画像抽出処理では、センサ３の出力に基づく障害物の検知結果や、カメラ２の撮影画像に対する動体検知の検知結果に基づいて、撮影画像における障害物や移動物の領域を検出して、その障害物や移動物の領域を除去した背景画像が生成される。画像マッチング処理では、例えば、テンプレートマッチングなどの公知の方法を採用すればよい。

また、注目地点接近判定処理では、注目事象検知時の車両１の位置情報（緯度，経度）を参考にするとよい。

また、本実施形態では、注目事象検知時点の撮影画像から背景画像を抽出する処理（背景画像抽出処理）を車載端末４が行うようにしたが、この注目事象検知時点の撮影画像は、路側機６から車載端末４に提供されるものであるため、事前に、注目事象検知時点の撮影画像に対する背景画像抽出処理を路側機６が行うようにしてもよい。これにより、車載端末４の処理負荷を軽減することができる。

次に、第１実施形態に係る車両１および路側機６の概略構成について説明する。図５は、車両１および路側機６の概略構成を示すブロック図である。

車載端末４は、ＩＴＳ通信部１１（車車間通信部、第１の路車間通信部）と、無線ＬＡＮ通信部１２（第２の路車間通信部）と、測位部１３と、メモリ１４と、プロセッサ１５と、を備えている。

ＩＴＳ通信部１１は、ＩＴＳ通信（車車間通信）により、メッセージをブロードキャストで他の車載端末４に送信し、また、他の車載端末４から送信されるメッセージを受信する。また、ＩＴＳ通信部１１は、ＩＴＳ通信（路車間通信）により、メッセージを路側機６に送信し、また、路側機６から送信されるメッセージを受信する。特に本実施形態では、ＩＴＳ通信部１１は、衝突危険性判定に関係する情報を送受信する。

無線ＬＡＮ通信部１２は、ＷｉＧｉｇ（登録商標）やＷｉＦｉ（登録商標）などの無線ＬＡＮ通信により、メッセージを路側機６に送信し、また、路側機６から送信されるメッセージを受信する。特に本実施形態では、無線ＬＡＮ通信部１２は、撮影画像およびその付加情報を送受信する。

測位部１３は、ＧＰＳ（Global Positioning System）、ＱＺＳＳ（Quasi-Zenith Satellite System）などの衛星測位システムにより自装置の位置を測定して、自装置の位置情報（緯度、経度）を取得する。

メモリ１４は、地図情報や、プロセッサ１５で実行されるプログラムなどを記憶する。

プロセッサ１５は、メモリ１４に記憶されたプログラムを実行することで走行支援に係る各種の処理を行う。本実施形態では、プロセッサ１５が、ドライブレコーダ処理、注目事象検知処理、および注目地点接近判定処理を行う。

ドライブレコーダ処理では、プロセッサ１５が、カメラ２の撮影画像をメモリ１４に格納する録画を行う。

注目事象検知処理では、プロセッサ１５が、カメラ２による撮影画像に基づいて、車両１の前方の道路上に発生した注目事象を検知して、注目事象情報を生成する。

注目地点接近判定処理では、プロセッサ１５が、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像と、注目事象検知時点の撮影画像とに基づいて、自車両１が注目地点の近くに到達したか否かを判定する。本実施形態では、現時点の撮影画像から抽出した背景画像と、注目事象検知時点の撮影画像から抽出した背景画像とを比較して両者が一致するか否か、すなわち、両者の類似度が所定値より高くなるか否かを判定することにより、自車両１が注目地点の近くに到達したか否かが判定される。

自動運転ＥＣＵ５は、操舵ＥＣＵ３１、駆動ＥＣＵ３２、および制動ＥＣＵ３３と接続され、センサ３の検出結果に基づいて、操舵ＥＣＵ３１、駆動ＥＣＵ３２、および制動ＥＣＵ３３を制御して、車両１の自動運転（自律走行）を実現する。

ここで、操舵ＥＣＵ３１は、自車両１の操舵機構を制御するものであり、駆動ＥＣＵ３２は、自車両１の駆動機構（エンジンや電動モータなど）を制御するものであり、制動ＥＣＵ３３は、自車両１の制動機構を制御するものである。

なお、自動運転には、運転者を必要としない自律走行と、運転者の運転を支援する運転支援とがあり、自律走行と運転支援との２つのモードを切り替えることができるようにしてもよい。運転支援の場合、衝突の危険性がある場合に、運転者に対する注意喚起が必要であり、例えば、カーナビゲーションにおいて、車載端末４の制御に基づいて、音声出力および画像表示の機能を用いて、運転者に対する注意喚起動作を実施する。

路側機６は、ＩＴＳ通信部２１（第１の路車間通信部）と、無線ＬＡＮ通信部２２（第２の路車間通信部）と、路路間通信部２３（第３の通信部）と、メモリ２４と、プロセッサ２５と、を備えている。

ＩＴＳ通信部２１は、ＩＴＳ通信（路車間通信）により、メッセージをブロードキャストで車載端末４に送信し、また、車載端末４から送信されるメッセージを受信する。特に本実施形態では、ＩＴＳ通信部２１は、衝突危険性判定に関係する情報を送受信する。

無線ＬＡＮ通信部２２は、ＷｉＦｉ（登録商標）などの無線ＬＡＮ通信により、車載端末４から送信されるメッセージを受信し、また、受信したメッセージを車載端末４に送信する。特に本実施形態では、無線ＬＡＮ通信部２２は、撮影画像およびその付加情報を送受信する。

路路間通信部２３は、専用の路側ネットワーク（有線または無線）、またはセルラー通信などによるネットワークを介して、隣り合う路側機６と通信を行う。

メモリ２４は、プロセッサ２５で実行されるプログラムなどを記憶する。

プロセッサ２５は、メモリ２４に記憶されたプログラムを実行することで各種の処理を行う。本実施形態では、プロセッサ２５が、情報転送処理、および情報配信処理を行う。

情報転送処理では、プロセッサ２５が、車載端末４から送信されたメッセージに含まれる注目事象情報、特に区間情報に基づいて、転送先として、対象区間の始点に位置する始点側の路側機６を選択し、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを、路路間通信部２３から始点側の路側機６に送信する制御を行う。

情報配信処理では、プロセッサ２５が、終点側の路側機６から送信されるメッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得してメモリ２４に格納し、その注目事象検知時点の撮影画像および注目事象情報を含むメッセージを、路路間通信部２３から周辺を通過する車載端末４に送信する制御を行う。

次に、第１実施形態に係る車両１および路側機６で行われる処理の手順について説明する。図６は、車両１および路側機６で行われる処理の手順を示すシーケンス図である。

対象区間を先に通行した車両１では、カメラ２が自車両１の前方を撮影する。そして、車載端末４のプロセッサ１５が、注目事象として、前方の道路上にある障害物（落下物）を検知すると、注目事象情報を生成して、その注目事象情報を、撮影画像の付加情報として、ドライブレコーダを構成するメモリ１４に格納する。

次に、車載端末４のプロセッサ１５は、測位部１３の測位結果に基づいて、自車両１が対象区間の終点に到達したことを検知すると、メモリ１４から、注目事象発生時の撮影画像および注目事象情報を取得する。そして、車載端末４の無線ＬＡＮ通信部１２が、注目事象発生時の撮影画像および注目事象情報を含むメッセージを、対象区間の終点に位置する終点側の路側機６に送信する。

終点側の路側機６では、無線ＬＡＮ通信部２２が、車載端末４から送信されたメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象情報、特に区間情報に基づいて、転送先として、対象区間の始点に位置する始点側の路側機６を選択する。そして、路路間通信部２３が、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを始点側の路側機６に送信する。

始点側の路側機６では、路路間通信部２３が、終点側の路側機６から送信されるメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得してメモリ２４に格納する。そして、無線ＬＡＮ通信部２２が、注目地点の注目事象発生時点の撮影画像および注目事象情報を含むメッセージを、周辺を通過する車載端末４に送信する。

後から対象区間を通行する車両１では、車載端末４の無線ＬＡＮ通信部１２が、始点側の路側機６から送信されるメッセージを受信すると、車載端末４のプロセッサ１５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得してメモリ１４に格納する。そして、車載端末４のプロセッサ１５が、注目事象検知時点の撮影画像に基づいて、事故を回避するための危険回避動作（減速や迂回など）を選択する（危険回避動作選択処理）。

次に、車載端末４のプロセッサ１５が、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像と、注目地点の事故時点の撮影画像とに基づいて、自車両１が注目地点の近くに到達したか否かを判定する（注目地点接近判定処理）。

そして、自車両１が注目地点の近くに到達した場合には、プロセッサ１５が、自動運転ＥＣＵ５に危険回避動作指示を出力する。自動運転ＥＣＵ５は、車載端末４からの危険回避動作指示に基づいて、障害物を回避するように走行制御を行う。

（第２実施形態）
次に、第２実施形態について説明する。なお、ここで特に言及しない点は前記の実施形態と同様である。図７は、第２実施形態に係る走行支援システムの概要を示す説明図である。図８は、カメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図である。図９は、路側機６で行われる反対車線画像合成処理の概要を示す説明図である。

図７に示すように、道路に停車中の車両の陰から歩行者が飛び出すと、車両１は歩行者をよける余裕がないため、車両１が歩行者に衝突する事故が起きる。一方、道路に停車中の車両の陰に隠れて見えない歩行者も、反対車線を走行する対向車両からは見え、その対向車両のカメラ２では、停車車両の手前側に歩行者が写る撮影画像を得ることができる。

図８に示す例は、反対車線に停車中の車両の手前に歩行者がいる場合である。この場合、反対車線を走行する対向車両からは歩行者が停車中の車両の陰に隠れて見えないため、停車中の車両の陰から歩行者が急に現れることで、その歩行者が反対車線を走行する車両と衝突する危険性がある。

そこで、本実施形態では、対象区間の端に位置する路側機６が、静止した遮蔽物（停車車両など）の陰に隠れて見えない移動物（歩行者など）が存在するという見通し外情報を、反対車線を第１方向（図７参照）に通行した対向車両から取得して、その見通し外情報を、対象区間を第１方向とは逆の第２方向（図７参照）に通行しようとする車両の車載端末４に提供する。情報提供先の車両では、自動運転ＥＣＵ５により、飛び出す歩行者を避けるように走行制御が行われる。

図９に示すように、路側機６は、対象区間を通行した車両から取得した注目事象検知時点の撮影画像および注目事象情報に基づいて、反対車線から注目地点（障害物が存在する地点）を撮影した撮影画像に移動物画像を合成した合成画像を生成する（反対車線画像合成処理）。

具体的には、まず、メッセージに含まれる注目事象検知時点の撮影画像から、移動物（歩行者など）と、反対車線から見た場合に移動物を遮蔽する位置関係にある遮蔽物とを検知する。ここで、移動物は歩行者、自転車、および動物などである。また、遮蔽物は停車車両などである。

また、メッセージに含まれる注目事象情報、特に注目事象検知時点の車両の位置情報に基づいて、自装置に蓄積された対象区間の撮影画像の中から、反対車線から注目地点を撮影した撮影画像を逆方向撮影画像として選択する。このとき、撮影時刻が最も新しい撮影画像、すなわち、直前に通行した車両で撮影された撮影画像で、かつ、遮蔽物が写っている撮影画像を選択する。

そして、メッセージに含まれる注目事象情報、特に注目事象検知時点の撮影画像上の障害物の位置情報に基づいて、注目事象検知時点の撮影画像から障害物、特に移動物の領域を切り出して移動物画像を取得する。次に、移動物の向きが実際の向きになるように、移動物画像を左右反転して反転移動物画像を生成する。なお、本実施形態では、移動物画像を左右反転する画像処理を行うようにしたが、移動物画像に対する画像処理は反転に限られない。また、反転などの画像処理を移動物画像に施さないようにしてもよい。また、反転に加えて他の画像処理（例えば回転など）を移動物画像に施すようにしてもよい。

次に、注目事象検知時点の撮影画像上の障害物の位置情報に基づいて、逆方向撮影画像に反転移動物画像を重畳した合成画像を生成する。このとき、逆方向撮影画像上の移動物の位置を算出し、算出された位置に基づいて反転移動物画像を逆方向撮影画像に重畳する。これにより、逆方向撮影画像内の遮蔽物に重なり合うように反転移動物画像が重畳される。なお、逆方向撮影画像に反転移動物画像を重畳する際に、反転移動物画像が遮蔽物の大きさと整合するように、反転移動物画像を拡大縮小するようにしてもよい。

また、車載端末４は、カメラ２から出力されてドライブレコーダを構成するメモに１４に蓄積された現時点の撮影画像と、注目地点（注目事象が発生した地点）の注目事象検知時点の撮影画像とに基づいて、自車両が注目地点の近くに到達したか否かを判定する（注目地点接近判定処理）。このとき、車載端末４は注目事象検知時点の撮影画像として、路側機６において生成した合成画像に基づいて、注目地点接近判定処理を行う。

次に、第２実施形態に係る車両および路側機６の概略構成について説明する。図１０は、車両１および路側機６の概略構成を示すブロック図である。

車両１の構成は、第１実施形態（図５）と同様である。

路側機６は、前記の実施形態と概ね同様であるが、プロセッサ２５が、情報転送処理および情報配信処理の他に、反対車線画像合成処理を行う。この処理では、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報に基づいて、反対車線から注目地点（障害物が存在する地点）を撮影した撮影画像に移動物画像を合成した合成画像を生成する。

次に、第２実施形態に係る車両および路側機６で行われる処理の手順について説明する。図１１は、車両および路側機６で行われる処理の手順を示すシーケンス図である。

対象区間を第１方向に走行する車両１では、カメラ２が自車両の前方を撮影する。そして、車載端末４のプロセッサ１５が、注目事象として、自車両の前方に障害物があることを検知すると、注目事象情報を生成して、その注目事象情報を、撮影画像の付加情報として、ドライブレコーダを構成するメモリ１４に格納する。

次に、車載端末４のプロセッサ１５は、測位部１３の測位結果に基づいて、自車両が対象区間の終点に到達したことを検知すると、メモリ１４から、注目事象発生時の撮影画像および注目事象情報を取得する。そして、車載端末４の無線ＬＡＮ通信部１２が、注目事象発生時の撮影画像および注目事象情報を含むメッセージを、対象区間の終点に位置する終点側の路側機６に送信する。

路側機６では、無線ＬＡＮ通信部２２が、車載端末４から送信されたメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報に基づいて、反対車線から注目地点（障害物が存在する地点）を撮影した撮影画像に移動物画像を合成した合成画像を生成する（反対車線画像合成処理）。

次に、無線ＬＡＮ通信部２２が、合成画像および注目事象情報を含むメッセージを、周辺の車載端末４に送信する。

対象区間を第２方向に通行する車両１では、車載端末４の無線ＬＡＮ通信部１２が、路側機６から送信されるメッセージを受信すると、車載端末４のプロセッサ１５が、メッセージに含まれる注目地点の事故時点の撮影画像および注目事象情報を取得してメモリ１４に格納する。そして、車載端末４のプロセッサ１５が、注目地点の事故時点の撮影画像に基づいて、事故を回避するための危険回避動作（減速や迂回など）を選択する。

次に、車載端末４のプロセッサ１５が、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像と、注目地点の事故時点の撮影画像とに基づいて、自車両が注目地点の近くに到達したか否かを判定する（注目地点接近判定処理）。

そして、自車両が注目地点の近くに到達した場合には、プロセッサ１５が、自動運転ＥＣＵ５に危険回避動作指示を出力する。自動運転ＥＣＵ５は、車載端末４からの危険回避動作指示に基づいて走行制御を行う。

（第３実施形態）
次に、第３実施形態について説明する。なお、ここで特に言及しない点は前記の実施形態と同様である。図１２は、第３実施形態に係る走行支援システムの概要を示す説明図である。図１３は、カメラ２の撮影画像および車載端末４が生成する注目事象情報を示す説明図である。

図１２に示すように、車両１では、カメラ２が車両の前方を撮影し、車載端末４が、カメラ２による撮影画像に基づいて、車両の前方の道路上に発生した注目事象を検知して、注目事象情報を生成する（注目事象検知処理）。本実施形態では、注目事象として、自車両が事故を起こしたことを検知する。また、注目事象として、自車両が事故寸前の状態、例えば、車道に飛び出した歩行者と衝突しそうな状態になったことを検知する。

図１３に示す例は、注目事象として、歩行者の飛び出しによる衝突事故が発生した場合であり、図１３（Ａ）に示す時点では、車両の前方の道路上に障害物がない状況が撮影されているが、図１３（Ｂ）に示す時点では、撮影画像に、歩行者が車道に飛び出す状況が撮影され、図１３（Ｃ）に示す時点では、撮影画像に、歩行者に自車両が衝突して歩行者が転倒した状況が撮影されている。この場合、注目事象検知時点の撮影画像として、図１３（Ｂ），（Ｃ）に示す時点の撮影画像が、終点側の路側機６にアップロードされる。

また、図１２に示すように、終点側の路側機６は、車載端末４から受信した注目事象検知時点の撮影画像および注目事象情報を、対象区間の始点に位置する始点側の路側機６に送信する。

始点側の路側機６は、終点側の路側機６から受信した注目事象検知時点の撮影画像および注目事象情報を、自装置に蓄積する。そして、注目事象検知時点の撮影画像および注目事象情報を、対象区間を通行しようとする車両の車載端末４に送信する。

対象区間を通行しようとする車両では、車載端末４は、始点側の路側機６から受信した注目事象検知時点の撮影画像および注目事象情報に基づいて危険回避動作（減速や迂回など）を指示し、自動運転ＥＣＵ５は、車載端末４からの危険回避動作の指示に応じて走行制御を行う。

なお、本実施形態では、注目事象検知時点（事故発生時点）の撮影画像を、その後に対象区間を通行する車両に提供して、その車両の走行制御を支援するようにしたが、注目事象検知時点の撮影画像を路側機６からサーバにアップロードして、自動運転車両の走行制御に用いられるＡＩ（人工知能）の強化学習用データとして利用するようにしてもよい。また、サーバに蓄積された注目事象検知時点の撮影画像をユーザ端末に配信するようにしてもよい。

次に、第３実施形態に係る車両１および路側機６の概略構成について説明する。図１４は、車両１および路側機６の概略構成を示すブロック図である。

車両１は、第１実施形態（図５参照）と概ね同様であるが、特に本実施形態では、車載端末４のプロセッサ１５が、注目事象検知処理として、センサ３（加速度センサなど）の出力に基づいて自車両が事故を起こしたことを検知する。また、プロセッサ１５が、カメラ２の撮影画像やセンサ３の出力に基づいて自車両が事故寸前の状態を検知する。そして、注目事象検知時点の撮影画像がメモリ１４に格納される。

路側機６は、第１実施形態（図５参照）と概ね同様であるが、特に本実施形態では、プロセッサ２５が、自装置が始端側となる対象区間の終端側の別の路側機６から取得した注目事象検知時点の撮影画像および注目事象情報を取得してメモリ２４に蓄積する（撮影画像蓄積処理）。なお、蓄積された撮影画像および注目事象情報は所定期間保持される。また、撮影画像を大量に蓄積するために大容量の記憶デバイスを設けるようにしてもよい。

次に、第３実施形態に係る車両および路側機６で行われる処理の手順について説明する。図１５は、車両および路側機６で行われる処理の手順を示すシーケンス図である。

対象区間を先に通行した車両１では、カメラ２が自車両１の前方を撮影する。そして、車載端末４のプロセッサ１５が、自車両に注目事象（事故や事故寸前の状態）が発生したことを検知すると、注目事象情報を生成して、その注目事象情報を、撮影画像の付加情報として、ドライブレコーダを構成するメモリ１４に格納する。

次に、車載端末４のプロセッサ１５は、測位部１３の測位結果に基づいて、自車両が対象区間の終点の近傍に到達したことを検知すると、メモリ１４から、注目事象発生時の撮影画像および注目事象情報を取得する。そして、車載端末４の無線ＬＡＮ通信部１２が、注目事象発生時の撮影画像および注目事象情報を含むメッセージを、対象区間の終点に位置する終点側の路側機６に送信する。

終点側の路側機６では、無線ＬＡＮ通信部２２が、車載端末４から送信されたメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象情報、特に区間情報に基づいて、通知先として、対象区間の始点に位置する始点側の路側機６を選択する。そして、路路間通信部２３が、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを始点側の路側機６に送信する。

始点側の路側機６では、路路間通信部２３が、終点側の路側機６から送信されるメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得してメモリ２４に蓄積する。そして、無線ＬＡＮ通信部２２が、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを、周辺を通過する車載端末４に送信する。このとき、過去の所定期間内における注目事象検知時点の撮影画像および注目事象情報がメモリ２４に蓄積されており、最新の注目事象検知時点の撮影画像および注目事象情報の他に、それ以前の注目事象検知時点の撮影画像および注目事象情報も車載端末４に送信される。

後から対象区間を通行する車両１では、車載端末４の無線ＬＡＮ通信部１２が、始点側の路側機６から送信されるメッセージを受信すると、車載端末４のプロセッサ１５が、メッセージに含まれる注目地点の事故時点の撮影画像および注目事象情報を取得してメモリ１４に格納する。そして、車載端末４のプロセッサ１５が、注目地点の事故時点の撮影画像に基づいて、事故を回避するための危険回避動作（減速や迂回など）を選択する。

次に、車載端末４のプロセッサ１５が、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像と、注目地点の事故時点の撮影画像とに基づいて、注目地点接近判定処理を行う。この処理では、現時点の撮影画像から背景画像を抽出する（背景抽出処理）。次に、その背景画像と、注目事象検知時点の撮影画像から抽出した背景画像とを比較して両者が一致するか否か、すなわち、両者の類似度が所定値より高くなるか否かを判定することにより、自車両が注目地点の近くに到達したか否かを判定する。

そして、自車両が注目地点の近くに到達した場合には、プロセッサ１５が、自動運転ＥＣＵ５に危険回避動作指示を出力する。自動運転ＥＣＵ５は、車載端末４からの危険回避動作指示に基づいて走行制御を行う。

（第４実施形態）
次に、第４実施形態について説明する。なお、ここで特に言及しない点は前記の実施形態と同様である。図１６は、第４実施形態に係る走行支援システムの概要を示す説明図である。

本実施形態では、前記の実施形態と同様に、対象区間を通行する車両において、カメラ２が車両の前方を撮影し、車載端末４が、カメラ２による撮影画像に基づいて、車両の前方の道路上に発生した注目事象を検知する。例えば、車載端末４は、停車車両の陰から飛び出した歩行者が自車両と衝突する事故が発生したことを検知する。そして、車載端末４は、注目事象検知時点の撮影画像および注目事象情報を、対象区間の終点に位置する終点側の路側機６に送信する。

また、本実施形態では、前記の実施形態と同様に、終点側の路側機６において、車載端末４から受信した注目事象検知時点の撮影画像および注目事象情報を、対象区間の始点に位置する始点側の路側機６に送信する。次に、始点側の路側機６が、対象区間を通行しようとする車両の車載端末４に、注目事象検知時点の撮影画像および注目事象情報を送信する。そして、車両において、注目事象検知時点の撮影画像に基づいて自車両が注目地点の近くに到達したことを判定して、自動運転ＥＣＵ５に早期に危険回避動作を開始させる。

一方、本実施形態では、前記の実施形態と異なり、対象区間の終点に位置する終点側の路側機６は、まず、注目事象を検知した車両から、注目事象検知時点の撮影画像および注目事象状態を取得し、その後、対象区間を別の車両が通行する度に、その車両から、注目地点の撮影画像を取得する。

サーバ８（サーバ装置）は、対象区間の終点に位置する終点側の路側機６から、まず、注目事象検知時点の撮影画像および注目事象状態を取得し、その後、注目地点の撮影画像を取得する。これにより、サーバ８は、注目事象が発生している最中の撮影画像を始めとして、撮影時刻が少しずつずれた注目地点の撮影画像を収集することができる。このため、定点カメラ（固定カメラ）がない地点でも、注目事象（事故など）が発生した現場の状況を監視者が確認することができる。

また、サーバ８は、管理者が操作するユーザ端末９（ユーザ装置）からのアクセス（閲覧要求）に応じて、管理者が指定した地点の撮影画像をユーザ端末９に配信する。このとき、ユーザ端末９では、地図上に、過去に事故が発生した地点を表すアイコンが表示される。管理者がアイコンを操作することで地点を指定すると、指定された地点の撮影画像が表示される。

なお、本実施形態では、車載端末４が、自車両が注目地点の近くに到達したか否かを判定して、自車両が注目地点の近くに到達した際に撮影された撮影画像、すなわち、注目地点の現時点の撮影画像を、路側機６にアップロードするようにしたが、車載端末４が、注目地点に限らず対象区間内の全ての撮影画像を路側機６にアップロードして、路側機６が、位置情報や画像マッチングなどにより、対象区間内の注目地点の撮影画像を抽出するようにしてもよい。

また、注目地点に限らず対象区間内の全ての撮影画像を収集するようにしてもよい。これにより、地図で道路上の任意の地点を指定することで、その地点の最近の撮影画像を表示させることで、道路上の任意の地点の最近の状況を確認することができる。例えば、認知症の高齢者や迷子などの人物を捜索する用途に利用することができる。また、例えば、防犯や防災などの用途にも利用することができる。さらに、特定の時間帯にのみ対象区間内の全ての撮影画像が収集されるようにしてもよい。例えば、児童の登下校時間帯にのみ対象区間内の全ての撮影画像が収集されることにより、登下校時の児童の見守りの用途に利用することができる。

また、対象区間内の全ての撮影画像を収集するようにすると、画像マッチングおよび位置情報に基づいて、注目事象（事故など）が発生する以前の注目地点の撮影画像を取得することができる。これにより、注目事象が発生する前後の現場の状況を監視者が確認することができる。

次に、第４実施形態に係る車両１、路側機６、およびサーバ８の概略構成について説明する。図１７は、車両１、路側機６、およびサーバ８の概略構成を示すブロック図である。

車両１の構成は、第１実施形態（図５参照）と同様である。

路側機６は、前記の実施形態と概ね同様であるが、ＩＴＳ通信部２１、無線ＬＡＮ通信部２２および路路間通信部２３の他に、ネットワーク通信部２６を備えている。このネットワーク通信部２６は、ネットワークを介してサーバ８との間で通信を行う。

サーバ８は、ネットワーク通信部４１と、メモリ４２と、プロセッサ４３と、を備えている。

ネットワーク通信部４１は、ネットワークを介して路側機６と通信を行う。また、ネットワーク通信部４１は、監視者が操作するユーザ端末９とネットワークを介して通信を行う。

メモリ４２は、路側機６から収集した各地点の撮影画像を蓄積する。また、メモリ４２は、プロセッサ４３で実行されるプログラムなどを記憶する。なお、撮影画像を大量に蓄積するために大容量の記憶デバイスを設けるようにしてもよい。

プロセッサ４３は、メモリ４２に記憶されたプログラムを実行することで各種の処理を行う。本実施形態では、プロセッサ４３が、地点画像合成処理、監視地図生成処理および撮影画像表示処理を行う。

地点画像合成処理では、プロセッサ４３が、路側機６から収集した各地点の撮影画像を、地点ごとに撮影時刻順に並べて合成する。

監視地図生成処理では、プロセッサ４３が、注目地点の位置情報に基づいて、注目地点を表すアイコンを地図上に重畳した画面情報を生成する。この画面情報は、通信部からユーザ端末９に送信されて、ユーザ端末９において、各地点を表すアイコンを地図上に重畳した画面が表示される。監視者は、アイコンを操作することで地点を指定することができる。

撮影画像表示処理では、プロセッサ４３が、監視者が指定した地点の撮影画像をメモリ４２から取得して、指定地点の現在の撮影画像を表示（再生）する画面情報を生成する。この画面情報は、ネットワーク通信部４１からユーザ端末９に送信されて、ユーザ端末９において、撮影画像を表示する画面が表示される。

なお、本実施形態では、地点ごとの撮影画像を合成するようにしたが、地点ごとの撮影画像を合成せずに、監視者が指定した地点の撮影画像を撮影時刻にしたがって順次再生するようにしてもよい。

また、本実施形態では、監視者が指定した地点の撮影画像を再生するようにしたが、同一地点で形態（歩行者事故、自転車事故など）が異なる複数の注目事象（事故および事故寸前の状態）が発生している場合には、事故の形態ごとに撮影画像を分類して、監視者が指定した形態の撮影画像を再生するようにしてもよい。

次に、第４実施形態に係る車両１、路側機６、およびサーバ８で行われる処理の手順について説明する。図１８は、車両１、路側機６、およびサーバ８で行われる処理の手順を示すシーケンス図である。

対象区間を先に通行した車両１では、車載端末４のプロセッサ１５が、自車両に注目事象（事故や事故寸前の状態）が発生したことを検知すると、注目事象情報を生成して、その注目事象情報を、撮影画像の付加情報として、ドライブレコーダを構成するメモリ１４に格納する。

次に、車載端末４のプロセッサ１５は、測位部１３の測位結果に基づいて、自車両が対象区間の終点の近傍に到達したことを検知すると、ドライブレコーダを構成するメモリ１４から、注目事象発生時の撮影画像および注目事象情報を取得する。そして、車載端末４の無線ＬＡＮ通信部１２が、注目事象発生時の撮影画像および注目事象情報を含むメッセージを、対象区間の終点に位置する終点側の路側機６に送信する。

終点側の路側機６では、無線ＬＡＮ通信部２２が、車載端末４から送信されたメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象情報、特に区間情報に基づいて、通知先として、対象区間の始点に位置する始点側の路側機６を選択する。そして、路路間通信部２３が、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを始点側の路側機６に送信する。また、ネットワーク通信部２６が、注目事象検知時点の撮影画像および注目事象情報を含む注目地点報告をサーバ８に送信する。

始点側の路側機６では、路路間通信部２３が、終点側の路側機６から送信されるメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得する。そして、無線ＬＡＮ通信部２２が、注目事象検知時点の撮影画像および注目事象情報を含むメッセージを、周辺を通過する車載端末４に送信する。

後から対象区間を通行する車両１では、車載端末４の無線ＬＡＮ通信部１２が、始点側の路側機６から送信されるメッセージを受信すると、車載端末４のプロセッサ１５が、メッセージに含まれる注目事象検知時点の撮影画像から背景画像を抽出する（背景抽出処理）。また、カメラ２から出力されてドライブレコーダを構成するメモリ１４に蓄積された現時点の撮影画像から背景画像を抽出する（背景抽出処理）。

次に、車載端末４のプロセッサ１５が、注目地点接近判定処理を開始する。この処理では、現時点の撮影画像から抽出した背景画像と、注目事象検知時点の撮影画像から抽出した背景画像とを比較して両者が一致するか否か、すなわち、両者の類似度が所定値より高くなるか否かを判定する。そして、現時点の撮影画像の中から該当する撮影画像、すなわち、注目地点の現時点の撮影画像が見つかると、プロセッサ１５が、その撮影画像の付加情報として注目事象情報を、ドライブレコーダを構成するメモリ１４に格納する。

次に、車載端末４のプロセッサ１５が、測位部１３の測位結果に基づいて、自車両が対象区間の終点に到達したことを検知すると、注目地点の撮影画像をメモリ１４から取得する。そして、無線ＬＡＮ通信部１２が、注目地点の撮影画像を含むメッセージを、対象区間の終点に位置する終点側の路側機６に送信する。

なお、本実施形態では、車載端末４において注目地点画像探索処理を行うようにしたが、対象区間の全ての撮影画像を路側機６に提供して、路側機６において注目地点画像探索処理を行うようにしてもよい。

終点側の路側機６では、無線ＬＡＮ通信部２２が、車載端末４から送信されたメッセージを受信すると、プロセッサ２５が、メッセージに含まれる注目事象検知時点の撮影画像および注目事象情報を取得する。そして、ネットワーク通信部２６が、注目事象検知時点の撮影画像および注目事象情報を含む注目地点報告のメッセージをサーバ８に送信する。

サーバ８では、ネットワーク通信部４１が、路側機６から送信される注目地点通行報告のメッセージを受信すると、プロセッサ４３が、注目地点通行報告のメッセージに含まれる注目地点の撮影画像および注目事象情報をメモリ４２に蓄積する。このとき、プロセッサ４３が、地点ごとに撮影画像を撮影時刻順に並べて合成してメモリ４２に格納する（画像合成処理）。次に、注目地点の位置情報に基づいて、注目地点を表すアイコンを地図上に重畳する（監視地図生成処理）。監視者が、サーバ８に接続されたユーザ端末９において、画面表示された地図上のアイコンを操作して注目地点を指定すると、プロセッサ４３が、指定された注目地点の撮影画像をメモリ４２から取得して、現在の注目地点の撮影画像を再生する画面を生成してユーザ端末９に表示する（画像再生処理）。

ところで、前記の実施形態では、ある車両から別の車両に情報を提供する場合に、路車間の間接通信により路側機６を介したある車両から別の車両に情報を送信するようにしたが、車車間の直接通信（ＩＴＳ通信）と路車間の間接通信（無線ＬＡＮ通信）とを切り替えるようにしてもよい。所定の条件の場合に、直接通信を選択し、それ以外の場合は間接通信を選択するようにしてもよい。例えば、過去に危険行動（飛び出しなど）をとった人物（危険人物）に関する歩行者情報は、緊急性が高いため、車車間の直接通信で周辺の車載端末４に送信する。一方、工事や渋滞などに関する道路情報などは、緊急性が低いため、路車間の間接通信で周辺の車載端末４に路側機６を介して送信する。

また、車車間の直接通信（ＩＴＳ通信）と路車間の間接通信（無線ＬＡＮ通信）とを同時に利用するようにしてもよい。これは、特に緊急性が高い場合、例えば緊急車両（救急車など）の場合に、通信の安定性を高めることができる。

また、前記の実施形態では、対象区間を通行した車両で取得した撮影画像および注目事象情報を、その後に対象区間を通行する車両に提供するようにしたが、路側機６のカメラ２で周辺（例えば交差点）を撮影することで取得した撮影画像および注目事象情報を車両に提供するようにしてもよい。この場合、車両の進行方向の先にある路側機６が収集した注目事象情報を、車両の進行方向の手前側にある路側機６を経由して車両に提供すればよい。これにより、進行方向の先の道路（例えば交差点）の状況を事前に把握することができる。

また、ドライブレコーダおよび画像配信の機能を搭載した車両が長時間通行しない場合、道路の状況を長時間収集できなくなる。そこで、ドライブレコーダ機能を搭載した車両が通行しない状態が所定時間継続すると、路側機６の情報処理を開始するようにする。
この場合、車両がドライブレコーダおよび画像配信の機能を搭載していることを表す情報を路側機６に通知するようにするとよい。これにより、ドライブレコーダおよび画像配信の機能を搭載した車両を路側機６が検知することができる。路側機６では、この情報を受信したら、注目事象の検知および注目事象情報（撮影画像を含む）の送信の処理を停止すればよい。

あるいは、ドライブレコーダおよび画像配信の機能を搭載したドローンなどの飛行型ロボット、または歩行型ロボットなどを路側機６の周辺に配置し、当該飛行型ロボットまたは歩行型ロボットが上記情報の収集および配信などを行ってもよい。さらに、車両に搭載したドライブレコーダでは撮影が困難である場合（例えば、自車両の直ぐ左側後方に自転車や自動二輪が走行しており、自車両の後方にドライブレコーダおよび画像配信の機能を搭載した車両が存在しない場合など）においては、路側機６あるいは飛行型ロボット、歩行型ロボットなどが上記情報の収集および配信を行ってもよい。

また、収集した注目事象情報を、例えばサーバなどに集約して分析を行い、該当箇所付近にいる車両などに事前に通知することも可能である。これにより、事故が発生しやすい場所については、事故件数が多いことだけでなく、例えば事故の種類または発生原因に関する情報についても事前に通知することが可能となる。

また、危険と思われる行動に結びつく注目事象情報を検知した場合、例えば、所定値以上の車両の速度、所定値以下の車間距離などを検知した場合には、すぐに警察などに通知されるようにしてもよい。これにより、例えば、飲酒運転や煽り運転などの危険な行動の抑制が可能となる。

以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。

本発明に係る走行支援方法、道路撮影画像収集方法、および路側装置は、注目事象を検知して危険回避動作を行う制御の負荷を軽減すると共に、自動運転車両の走行制御を適切に支援することができる効果を有し、車両の走行制御を支援する走行支援方法、道路の撮影画像を収集する道路撮影画像収集方法、および車両の走行制御を支援し、または道路の撮影画像を収集する路側装置などとして有用である。

１ 車両
２ カメラ
３ センサ
４ 車載端末（車載装置）
５ 自動運転ＥＣＵ（走行制御装置）
６ 路側機（路側装置）
８ サーバ（サーバ装置）
９ ユーザ端末（ユーザ装置）
１１ ＩＴＳ通信部
１２ 無線ＬＡＮ通信部
１３ 測位部
１４ メモリ
１５ プロセッサ
２１ ＩＴＳ通信部
２２ 無線ＬＡＮ通信部
２３ 路路間通信部
２４ メモリ
２５ プロセッサ
２６ ネットワーク通信部
３１ 操舵ＥＣＵ
３２ 駆動ＥＣＵ
３３ 制動ＥＣＵ
４１ ネットワーク通信部
４２ メモリ
４３ プロセッサ

Claims (13)

1. 道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置が、
   前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、
   前記路側装置が、
   前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、直接または別の路側装置を介して送信し、
   前記情報提供先の車載装置が、
   前記注目事象に関する撮影画像および付加情報に基づいて、自車両の走行制御に関係する処理を行うことを特徴とする走行支援方法。
2. 前記付加情報は、
   車両が現在位置する区間の区間情報、車両の進行方向に関する情報、注目事象の内容に関する情報、注目事象検知時の車両の地図上における位置情報、注目事象が発生した地点の撮影画像上における位置情報、および注目事象検知時の時間情報を含むことを特徴とする請求項１に記載の走行支援方法。
3. 前記情報提供先の車載装置が、
   前記注目事象に関する撮影画像と現時点の撮影画像との類似性に基づいて、自車両が前記注目事象の発生地点に接近していることを判定することを特徴とする請求項１に記載の走行支援方法。
4. 前記情報提供先の車載装置が、
   自車両が前記注目事象の発生地点に接近していると判定した場合に、危険回避動作指示を走行制御装置に出力することを特徴とする請求項３に記載の走行支援方法。
5. 前記情報提供元の車載装置が、
   前記注目事象に関する撮影画像および付加情報を、前記対象区間の終点に位置する終点側の路側装置に送信し、
   前記終点側の路側装置が、
   前記注目事象に関する撮影画像および付加情報を、前記対象区間の始点に位置する始点側の路側装置に送信し、
   前記始点側の路側装置が、
   前記注目事象に関する撮影画像および付加情報を、前記情報提供先の車載装置に送信することを特徴とする請求項１に記載の走行支援方法。
6. 前記情報提供元の車載装置は、前記対象区間を第１方向に通行する車両に搭載されたものであり、
   前記情報提供先の車載装置は、前記対象区間を前記第１方向とは逆の第２方向に通行する車両に搭載されたものであり、
   前記路側装置が、
   前記第１方向に通行する前記情報提供元の車載装置から取得した前記撮影画像において遮蔽物の手前側に写る移動物の撮影画像を抽出し、過去に前記第２方向に通行した車両の車載装置から取得した第２方向の撮影画像上の前記移動物の位置を算出し、算出された位置に基づいて前記移動物の撮影画像を前記第２方向の撮影画像に重畳した合成画像を生成し、
   前記合成画像を前記注目事象に関する撮影画像として前記情報提供先の車載装置に送信することを特徴とする請求項１に記載の走行支援方法。
7. 前記注目事象は、交通事故であり、
   前記路側装置が、
   前記情報提供元の車載装置から取得した前記注目事象に関する撮影画像および付加情報を自装置に蓄積し、
   最新の前記注目事象に関する撮影画像および付加情報の他に、前記自装置に蓄積されたそれ以前の前記注目事象に関する撮影画像および付加情報も前記情報提供先の車載装置に送信することを特徴とする請求項１に記載の走行支援方法。
8. 道路の対象区間の通行を終了した車両に搭載された車載装置が、
   前記対象区間を通行中に注目事象を検知すると、その注目事象に関する撮影画像および付加情報を、路側装置に送信し、
   前記路側装置が、
   前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信し、
   前記サーバ装置が、
   前記注目事象に関する撮影画像および付加情報を蓄積し、
   ユーザからの地点を指定した閲覧要求に応じて、指定された地点における前記注目事象に関する撮影画像および付加情報をユーザに提示することを特徴とする道路撮影画像収集方法。
9. 車載装置と通信を行う路車間通信部と、
   プロセッサと、
   を備え、
   前記プロセッサは、
   道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、
   前記注目事象に関する撮影画像および付加情報を、前記対象区間の通行を開始する車両に搭載された情報提供先の車載装置に、前記路車間通信部により直接または別の路側装置を介して送信することを特徴とする路側装置。
10. 前記路車間通信部は、
    自装置が前記対象区間の終点に位置する場合には、前記注目事象に関する撮影画像および付加情報を、前記情報提供元の車載装置から受信し、
    自装置が前記対象区間の始点に位置する場合には、前記注目事象に関する撮影画像および付加情報を、前記情報提供先の車載装置に送信することを特徴とする請求項９に記載の路側装置。
11. 前記路車間通信部は、
    前記対象区間を第１方向に通行する車両に搭載された前記情報提供元の車載装置から、前記注目事象に関する撮影画像および付加情報を受信し、
    前記対象区間を前記第１方向とは逆の第２方向に通行する車両に搭載された前記情報提供先の車載装置に、前記注目事象に関する撮影画像および付加情報を送信し、
    前記プロセッサは、
    前記第１方向に通行する前記情報提供元の車載装置から取得した前記撮影画像において遮蔽物の手前側に写る移動物の撮影画像を抽出し、過去に前記第２方向に通行した車両の車載装置から取得した第２方向の撮影画像上の前記移動物の位置を算出し、算出された位置に基づいて前記移動物の撮影画像を前記第２方向の撮影画像に重畳した合成画像を生成し、
    前記合成画像を前記注目事象に関する撮影画像として前記情報提供先の車載装置に送信することを特徴とする請求項９に記載の路側装置。
12. 前記注目事象は、交通事故であり、
    前記プロセッサは、
    前記情報提供元の車載装置から取得した前記注目事象に関する撮影画像および付加情報を自装置の記憶手段に蓄積し、
    最新の前記注目事象に関する撮影画像および付加情報の他に、前記記憶手段に蓄積されたそれ以前の前記注目事象に関する撮影画像および付加情報も前記情報提供先の車載装置に送信することを特徴とする請求項９に記載の路側装置。
13. 車載装置と通信を行う路車間通信部と、
    プロセッサと、
    を備え、
    前記プロセッサは、
    道路の対象区間の通行を終了した車両に搭載された情報提供元の車載装置において、前記対象区間を通行中に検知した注目事象に関する撮影画像および付加情報を、前記路車間通信部により前記情報提供元の車載装置から受信すると、
    前記注目事象に関する撮影画像および付加情報を、サーバ装置に送信することを特徴とする路側装置。

Images