JP7832016B2 - 車載装置および管理システム - Google Patents

Description

本発明は、車載装置および管理システムに関する。

従来、車両に搭載されたドライブレコーダで撮影した映像をサーバ装置へアップロードする管理システムがある。たとえば、かかる管理システムでは、ドライブレコーダで衝撃を検知した場合に、サーバ装置へアップロードした映像を予め設定した宛先へ送信する（例えば、特許文献１参照）。

特開２０１０－１０８３５１号公報

しかしながら、従来技術では、一旦すべての映像をサーバ装置へアップロードしておく必要があり、アップロードするデータ量を削減するうえで改善の余地があった。

本発明は、上記に鑑みてなされたものであって、アップロードするデータ量を削減することができる車載装置、管理システムおよびアップロード方法を提供することを目的とする。

上述した課題を解決し、目的を達成するために、本発明に係る車載装置は、車両に関する情報を所定周期で外部装置へアップロードする車載装置であって、前記車両で撮影された画像情報から対象領域をトリミングしたトリミング情報を外部装置へアップロードするプロセッサを備える。

本発明によれば、アップロードするデータ量を削減することができる。

図１は、管理システムの概要を示す図である。 図２は、アップロード方法の概要を示す図である。 図３は、車載装置のブロック図である。 図４は、圧縮ファイルの模式図である。 図５は、トリミング情報の一例を示す図である。 図６は、管理装置のブロック図である。 図７は、車載装置が実行する処理手順を示すフローチャートである。

以下、添付図面を参照して、本願の開示する車載装置、管理システムおよびアップロード方法の実施形態を詳細に説明する。なお、以下に示す実施形態により本発明が限定されるものではない。

まず、図１および図２を用いて、実施形態に係る車載装置、管理システムおよびアップロード方法の概要について説明する。図１は、管理システムの概要を示す図である。図２は、アップロード方法の概要を示す図である。

図１に示すように、実施形態に係る管理システムＳは、例えば運転者の安全運転、エコ運転などといった運転に関して各種解析を行うシステムである。また、たとえば、管理システムＳは、タクシー、トラック等の配送車両を提供する配送業者、その他、営業車両を有する事業者に導入される。

図１に示すように、実施形態に係る管理システムＳは、管理装置１０と、車載装置５０とを備える。車載装置５０は、例えば、通信機能を備えたドライブレコーダである。

車載装置５０は、車両Ｃの走行状態に関する走行情報と、車両Ｃで撮影された画像情報と含む車両情報を管理装置１０へアップロードする。なお、画像情報は、たとえば、車両Ｃの前方を撮影した画像に関する情報であるが、車両Ｃの周囲や、車両Ｃの内部（たとえば、運転席）を撮像した画像に関する情報であってもよい。

また、走行情報は、例えば、車両Ｃに設けられた各種センサによって検出された情報である。例えば、走行情報には、車両Ｃの位置情報や、車速情報、加速度情報、ステアリング情報等が含まれる。

管理装置１０は、各車載装置５０から取得した車両情報を解析することで、各車両Ｃの現在の状況や、運転者の運転を評価する。なお、例えば、管理装置１０は、インターネットや携帯電話回線網等のネットワークを介したクラウドサービスを提供するクラウドサーバとして構成される。

また、図１に示すように、管理装置１０は、運転者端末１００や管理者端末２００とネットワークを介して接続される。運転者端末１００は、各車両Ｃの運転者が所有する端末であり、図１に示す例では、スマートフォンである。

管理者端末２００は、各車両Ｃの運行状況等を管理する管理者が所有する端末であり、図１に示す例では、ノート型ＰＣ（Personal Computer）である。たとえば、管理者端末２００は、管理装置１０から通知される情報を表示することで、各車両Ｃの現在の状況や、各運転者に対する評価結果等を管理者へ通知する。

ここで、図１を用いて、実施形態に係る情報処理の概要について説明する。たとえば、管理装置１０は、車載装置５０から所定周期で車両情報を取得し（ステップＳ１）、取得した車両情報を解析する（ステップＳ２）。たとえば、管理装置１０では、各車両情報に基づき、各車両Ｃの現在の状況や運転者の運転評価等を行う。

つづいて、管理装置１０は、各車両Ｃの現在の状況（たとえば、車両Ｃの現在地、走行ルート）や運転評価に関する評価結果を管理者端末２００へ通知する（ステップＳ３）。

たとえば、管理装置１０では、これらステップＳ１～Ｓ３の処理を周期的に行い、たとえば、業務終了時など任意のタイミングで解析結果（たとえば、運転評価の結果）を運転者端末１００へ通知する（ステップＳ４）。

このような管理システムＳにおいて、車両Ｃで撮影された映像をすべてアップロードすると、データ量や通信費用の観点から好ましくない。そこで、実施形態に係るアップロード方法では、映像に代えて静止画像をアップロードすることとし、さらに、アップロードする静止画像に対する車載装置５０の処理負荷の軽減を図ることとした。

具体的には、実施形態に係るアップロード方法では、静止画像をトリミングすることで、アップロードする静止画像のデータ量の削減を図ることした。さらに、実施形態に係るアップロード方法では、通常、ドライブレコーダの映像記録用に用いられる圧縮ファイルのキーフレームをトリミングすることで、たとえば、別途、アップロード用に静止画像を用意する処理を削減することができる。

たとえば、図２に示すように、まず、実施形態に係るアップロード方法では、カメラから入力される画像情報に対し映像圧縮を行う。たとえば、映像圧縮は、フレーム間予測で行われる圧縮方法であり、フレームすべての情報を保持した１枚のキーフレーム（Ｉフレーム）と、キーフレームまたは前回のフレームとの間の差分を表現した複数毎のＰフレームとからなる圧縮ファイルを生成することで行われる。

また、実施形態に係るアップロード方法では、たとえば、上記キーフレームに対し画像認識処理を行う（ステップＳ１２）。たとえば、ここでの画像認識処理は、キーフレームに映る対象物（たとえば、前方車両など）を認識するための処理である。

つづいて、実施形態に係るアップロード方法では、圧縮ファイルにおけるキーフレームから画像認識処理で認識された対象物が映る対象範囲のトリミングを行い（ステップＳ１３）、トリミングの結果得られるトリミング情報をアップロードする（ステップＳ１４）。

つまり、実施形態に係るアップロード方法では、キーフレームにおいて対象物が映る範囲の情報をアップロードし、キーフレームにおいて対象物が映らない範囲の情報についてはアップロードしない。

また、実施形態に係るアップロード方法では、画像情報を圧縮保存するための映像圧縮に用いられるキーフレームをアップロードの対象とする。そのため、例えば、アップロード用に画像情報を別途準備するなどといった処理を削減することができる。

つまり、実施形態に係るアップロード方法によれば、アップロードする静止画像をトリミングすることで、データ量の削減を図ることができ、さらに、かかる静止画像についてはキーフレームを用いることで、アップロードに関する処理負荷の軽減を図ることができる。

次に、図３を用いて、車載装置５０の構成例について説明する。図３は、車載装置５０のブロック図である。図３に示すように、車載装置５０は、通信部５１と、撮像部５２と、記憶部５３と、制御部（プロセッサ）５４とを備える。また、車載装置５０は、センサ群６１および表示部６２に接続される。

センサ群６１は、たとえば、車両Ｃの走行状態を検出する各種センサを含む。かかる各種センサ６１は、車速センサ、ブレーキセンサ、舵角センサ、加速度センサ、位置センサ、障害物検出センサ等が含まれる。

表示部６２は、車両Ｃに搭載されたタッチパネルディスプレイである。たとえば、表示部６２は、車載装置５０から入力される映像を表示する。なお、表示部６２は、スピーカを有し、車載装置５０から入力される音声を出力するようにしてもよい。

通信部５１は、たとえば、例えばＮＩＣ（Network Interface Card）等によって実現される。通信部５１は、所定の通信ネットワークに双方向通信可能に接続され、管理装置１０等との間で情報の送受信を行う。

撮像部５２は、各種撮像素子を備え、車両Ｃの周囲を撮像する。なお、車載装置５０は、車内（たとえば、ドライバ）を撮像する撮像部５２を有する構成としてもよい。

記憶部５３は、たとえば、不揮発性メモリやデータフラッシュ、ハードディスクドライブといった記憶デバイスで構成される記憶部であり、撮像部５２およびセンサ群６１から入力される各種情報を記憶する。

制御部５４は、取得部５５と、アップロード部５６と、トリミング処理部５７とを備え、たとえば、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ハードディスクドライブ、入出力ポートなどを有するコンピュータや各種の回路を含む。

コンピュータのＣＰＵは、たとえば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部５４の取得部５５、アップロード部５６およびトリミング処理部５７として機能する。

取得部５５は、撮像部５２によって撮影された画像情報およびセンサ群６１から入力される各種運転情報を含む車両情報を取得する。また、取得部５５は、取得した車両情報を記憶部５３へ格納する。

また、取得部５５は、複数の画像情報を前後の差分に基づいて圧縮した圧縮ファイルを生成し、記憶部５３へ格納する。図４は、圧縮ファイルの模式図である。図４に示すように、たとえば、圧縮ファイルＦは、一枚のＩフレーム（キーフレーム）と、複数枚のＰフレームによって構成される。

Ｉフレームは、フレームすべての情報を保持したフレームであり、Ｐフレームは、前フレームからの差分の情報を保持したフレームである。すなわち、圧縮ファイルＦは、フレーム間で情報を圧縮したファイルである。取得部５５は、圧縮ファイルＦを生成することで、記憶部５３へ格納する画像情報のデータ量を削減することができる。

図３の説明に戻り、アップロード部５６について説明する。アップロード部５６は、取得部５５によって取得された車両情報を所定の周期で管理装置１０へアップロードする。この際、アップロード部５６は、アップロードする画像情報については、後述するトリミング処理部５７によって生成されたトリミング情報をアップロードする。

アップロード部５６がアップロードタイミングでアップロードする車両情報として、前回アップロード後に新たに得られた走行情報およびトリミング情報が含まれる。

また、アップロード部５６は、管理装置１０から要求された場合に、管理装置１０から指定された種別および期間の車両情報を管理装置１０に対しアップロードする。この場合、たとえば、アップロード部５６は、管理装置１０から指定された期間に撮影された映像を管理装置１０に対しアップロードする。

すなわち、アップロード部５６は、走行情報についてすべての期間の情報をアップロードし、画像情報についてはアップロードタイミングにおいて撮影された静止画像をアップロードする。

そして、アップロード部５６は、たとえば、管理装置１０から要求された場合に、指定された期間の映像を管理装置１０へアップロードする。この際、たとえば、アップロード部５６は、たとえば、管理装置１０からの要求によってはトリミング前のキーフレーム（キーフレームに関するすべての情報）を管理装置１０へアップロードするようにしてもよい。このように、キーフレーム全体をアップロードすることによって、管理装置１０あるいは管理者はキーフレーム全体を把握することができる。

トリミング処理部５７は、車両Ｃで撮影された画像情報から対象領域をトリミングしたトリミング情報を生成する。たとえば、トリミング処理部５７は、取得部５５からキーフレームを受け取り、受け取ったキーフレームに対する画像認識処理によって対象領域を決定する。

ここで、図５を用いて、トリミング処理部５７による処理の具体例について説明する。図５は、トリミング情報の一例を示す図である。なお、ここでは、車内を撮影した画像情報からトリミング情報を生成する場合について説明するが、車外を撮影した画像情報からトリミング情報を生成することも可能である。また、ここでは、対象物としてドライバを例に挙げて説明するが、対象物の設定は任意に変更可能である。

たとえば、図５に示すように、トリミング処理部５７は、キーフレームＩに対する画像認識処理によって、対象物（ここではドライバ）を認識する。トリミング処理部５７は、対象物が映る領域を対象領域ＴＲとして設定し、当該対象領域ＴＲをトリミングしたトリミング情報Ｔを生成する。

つまり、トリミング情報Ｔは、キーフレームＩから対象領域ＴＲ以外の領域に関する情報は除外した情報である。そのため、トリミング情報Ｔをアップロードすることによって、キーフレームＩ全体をアップロードする場合に比べて、アップロードするデータ量を削減することができる。なお、たとえば、キーフレームＩに対象物が映っていないと判定した場合、キーフレームＩに関するアップロード処理をスキップし、対象物が映っていない旨を通知する。

なお、たとえば、次のアップロード周期までに複数のキーフレームＩが存在する場合、所定の条件に基づき、１枚のキーフレームＩを選択したうえで、トリミング情報Ｔを生成するようにしてもよい。ここでの所定の条件とは、たとえば、キーフレームＩの中で対象物が最も綺麗に映っていることなどが挙げられる。

つづいて、図６を用いて管理装置１０の構成例について説明する。図６に示すように、実施形態に係る管理装置１０は、通信部２０と、記憶部３０と、制御部４０とを備える。

通信部２０は、たとえば、例えばＮＩＣ（Network Interface Card）等によって実現される。通信部２０は、所定の通信ネットワークに双方向通信可能に接続され、車載装置５０等との間で情報の送受信を行う。

記憶部３０は、たとえば、不揮発性メモリやデータフラッシュ、ハードディスクドライブといった記憶デバイスで構成される記憶部である。図６に示すように、記憶部３０は、
車両情報データベース３１と、解析結果データベース３２とを有する。

車両情報データベース３１は、各車載装置５０から取得した車両情報を格納するデータベースである。解析結果データベース３２は、各車載装置５０から取得した車両情報に対する解析結果を格納するデータベースである。

制御部４０は、取得部４１と、解析部４２と、要求部４３とを備え、たとえば、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）、ハードディスクドライブ、入出力ポートなどを有するコンピュータや各種の回路を含む。

コンピュータのＣＰＵは、たとえば、ＲＯＭに記憶されたプログラムを読み出して実行することによって、制御部４０の取得部４１、解析部４２および要求部４３として機能する。

取得部４１は、各車載装置５０から各車両Ｃの車両情報を所定周期で取得し、また、後述する要求部４３による要求に基づいて車載装置５０からアップロードされた車両情報を取得する。取得部４１は、取得した車両情報を車両情報データベース３１へ格納する。

解析部４２は、取得部４１によって取得された車両情報を解析する。たとえば、解析部４２は、各車両Ｃまたはドライバの現在の状況を解析する。また、たとえば、解析部４２は、解析の一環として各車両Ｃの運転者による運転を評価する。

たとえば、解析部４２による解析結果は、解析結果データベース３２に格納されるとともに、管理者端末２００（図１参照）へも通知される。

要求部４３は、解析部４２による解析結果に基づき、車載装置５０に対し車両情報を要求する。なお、要求部４３は、解析部４２による解析結果を通知した管理者端末２００から指定された情報種別および期間の車両情報を車載装置５０に対し要求するようにしてもよく、自律的に車両情報を要求するようにしてもよい。自律的に車両情報を要求する場合、例えば、車両情報が所定の条件を満たしているか否かを判定し、当該条件に紐づいた車両情報を車載装置５０に対し要求する。

次に、図７を用いて、実施形態に係る車載装置５０が実行する処理手順について説明する。図７は、車載装置５０が実行する処理手順を示すフローチャートである。

図７に示すように、車載装置５０は、映像圧縮を行い（ステップＳ１０１）、キーフレームＩに対すル画像認識を行う（ステップＳ１０２）。つづいて、車載装置５０は、キーフレームＩに対する画像認識の結果に基づき、対象領域ＴＲを設定したうえでトリミングを行う（ステップＳ１０３）。

そして、車載装置５０は、キーフレームＩをトリミングしたトリミング情報をアップロードする（ステップＳ１０４）。そして、車載装置５０は、処理を終了する。

上述したように、実施形態に係る車載装置５０は、車両Ｃに関する車両情報を所定周期で管理装置１０（外部装置の一例）へアップロードする車載装置であって、車両Ｃで撮影された画像情報から対象領域をトリミングしたトリミング情報Ｔを管理装置１０へアップロードする制御部５４（プロセッサの一例）を備える。したがって、実施形態に係る車載装置５０によれば、アップロードするデータ量を削減することができる。

ところで、上述した実施形態では、管理装置１０が各車載装置５０から車両情報を集約するサーバ、あるいは、クラウドシステムである場合について説明したが、これに限定されるものではない。管理装置１０の一部あるいはすべての機能を車載装置５０に設けることにしてもよい。

さらなる効果や変形例は、当業者によって容易に導き出すことができる。このため、本発明のより広範な態様は、以上のように表しかつ記述した特定の詳細および代表的な実施形態に限定されるものではない。したがって、添付の特許請求の範囲およびその均等物によって定義される総括的な発明の概念の精神または範囲から逸脱することなく、様々な変更が可能である。

１０ 管理装置
３１ 車両情報データベース
３２ 解析結果データベース
４１ 取得部
４２ 解析部
４３ 要求部
５０ 車載装置
５２ 撮像部
５３ 記憶部
５４ 制御部
５５ 取得部
５６ アップロード部
５７ トリミング処理部
１００ 運転者端末
２００ 管理者端末
Ｃ 車両
Ｆ 圧縮ファイル
Ｉ キーフレーム
Ｓ 管理システム
Ｔ トリミング情報
ＴＲ 対象領域

Claims (3)

1. 車両で撮影された画像情報から対象領域をトリミングしたトリミング情報を所定周期で外部装置へアップロードするプロセッサ
   を備え、
   前記プロセッサは、
   前記画像情報から、Ｉフレームおよび複数のＰフレームを含む圧縮ファイルを生成し、
   前記圧縮ファイルを記憶媒体に記録しつつ、前記圧縮ファイルの生成過程で生じる前記Ｉフレームに対する画像認識処理によって対象物が映る前記対象領域を認識し、
   前記Ｉフレームから前記対象領域をトリミングした前記トリミング情報を生成し、
   生成した前記トリミング情報を前記外部装置へアップロードする、車載装置。
2. 前記プロセッサは、
   前記トリミング情報をアップロード後、前記外部装置による要求に応じて、前記外部装置から指定された期間の前記トリミング情報、または、トリミング前の前記画像情報をアップロードする、
   請求項１に記載の車載装置。
3. 請求項１または２に記載の車載装置と、
   前記車載装置からアップロードされた情報を集約して管理する管理装置と
   を備える、管理システム。