JP6503692B2

JP6503692B2 - 画像送信装置、画像取得方法、および画像取得プログラム

Info

Publication number: JP6503692B2
Application number: JP2014223047A
Authority: JP
Inventors: 正善星屋; 智之津田; 公嗣磯谷; 宗三井
Original assignee: Transtron Inc
Current assignee: Transtron Inc
Priority date: 2014-10-31
Filing date: 2014-10-31
Publication date: 2019-04-24
Anticipated expiration: 2034-10-31
Also published as: JP2016092531A

Description

本発明は、画像送信装置、画像取得方法、および画像取得プログラムに関する。

近年、物品の輸送や娯楽等のため、車両が利用される機会は多く、車両運転を安全に行うことはますます重要になっている。このため、車両運転中の安全を確保するための様々な技術が開発されている。

例えば、カメラと他のセンサとを備えた複数の車両が、通常の時に、または、要求時に、または、他の車両、乗員またはサービスセンタによってそうするように要求された時に、イメージおよび他のデータを収集するシステムが知られている。イメージは、サービスセンタでの記憶装置スペースを浪費せずにサービスセンタまたは他の車両に選択的に送信されるように、車両内に永久的に記憶され、サービスセンタでのディレクトリ内に索引付けされても良い（例えば、特許文献１参照）。

ハードディスクに、撮影経路の異なる複数の動画ファイル、動画索引テーブル及びリンク索引テーブルが格納される映像検索装置が知られている。この映像検索装置では、映像モニタ上に表示される地図の道路をマウスで指定すると、道路網のリンクが特定される。リンク索引テーブルにより、特定されたリンクの動画ファイルを検索し、マウスで指定した点の座標を動画索引テーブルに照合して、フレーム番号を検索する。検索されたフレーム番号から動画を再生する（例えば、特許文献２参照）。

特開２００４−２９００１号公報特開２００９−２１２９５９号公報

上記のように車両に搭載された撮影装置で撮影された画像は、事故原因などを解析するための情報等として活用されることがある。例えば、画像や音声を自動的に記録する車載装置で得られた画像を、可搬型の記録媒体に記録することが考えられる。このとき、画像を利用する場合には、記録媒体を車載装置から取り外した後に、パーソナルコンピュータで読み込みを行うなどの方法を用いることが考えられる。しかしながら、可搬型の記録媒体から画像を読み取る方法では、読み取りに時間がかかるとともに、必要な時に画像を検索できず、不便である。また、ＣｏｍｐｕｔｅｒＴｅｌｅｐｈｏｎｙＩｎｔｅｇｒａｔｉｏｎ（ＣＴＩ）技術を用い、ネットワークを利用して、ドライブレコーダによる画像をクラウド上に保存することが考えられるが、以下の問題がある。すなわち、クラウド上への保存のために、不必要な画像を含めて全て情報通信網を利用して送信すると、通信費用が高額となる。また、不必要な画像を含めて全てクラウド上に保存しようとすると、ストレージ費用も高額となる。このように、撮影装置が遠隔にある場合、特に撮影された画像の量が多い場合には、所望の画像を迅速に利用できないことがある。

ひとつの側面によれば、本発明の目的は、撮影装置が遠方にある場合にも、撮影された所望の画像を、迅速に利用できるようにすることである。

ひとつの態様である画像送信装置は、記録処理部と、送信部とを有する。記録処理部は、撮影装置により撮影される動画像を示す画像信号の第１の時間に対応する画像信号を符号化した第１の動画情報を記憶装置に記録する処理を行う。また、送信部は、所定事象の発生が検出された場合に、画像信号の、所定事象の検出時刻を含み第１の時間の長さよりも短い第２の時間に対応する画像信号を符号化して生成される第２の動画情報を、無線通信網を介して接続される情報処理装置に送信する。この画像送信装置において、所定事象は、白線逸脱と車間距離異常とを含み、白線逸脱の発生の検出及び車間距離異常の検出は、撮影画像により撮影される動画像に基づいて行う。

ひとつの実施形態によれば、撮影装置が遠方にある場合にも、撮影された所望の画像を、迅速に利用できる。

一実施の形態による画像取得システムの一例を示す図である。一実施の形態による画像取得システムのハードウエア構成の一例を示す図である。一実施の形態による車載システムのハードウエア構成の一例を示す図である。一実施の形態による車載コンピュータの機能的な構成の一例を示すブロック図である。一実施の形態によるセンサ情報の一例を示す図である。一実施の形態による発生情報の一例を示す図である。一実施の形態による作業情報の一例を示す図である。一実施の形態による発生項目の一例を示す図である。一実施の形態による所定事象の一例を説明する図である。一実施の形態による作業情報の入力処理の一例を説明する図である。一実施の形態による作業情報入力画面の一例を示す図である。一実施の形態による運行情報の一例を示す図である。一実施の形態によるフル画像記録情報の一例を示す図である。一実施の形態による静止画送信情報の一例を示す図である。一実施の形態によるミニ動画送信情報の一例を示す図である。一実施の形態によるセンタシステムの機能的な構成の一例を示すブロック図（その１）である。一実施の形態によるセンタシステムの機能的な構成の一例を示すブロック図（その２）である。一実施の形態による取得指示画面の一例を示す図である。一実施の形態によるインデックス情報の一例を示す図である。一実施の形態による取得指示画像情報の一例を示す図である。一実施の形態による車載システムにおける画像記録処理の一例を示すフローチャート（その１）である。一実施の形態による車載システムにおける画像記録処理の一例を示すフローチャート（その２）である。一実施の形態による車載システムにおけるミニ動画情報生成処理を示すフローチャートである。一実施の形態による車載システムにおける出力画像生成処理を示すフローチャートである。一実施の形態によるセンタシステムにおける画像受け付けおよび画像要求の処理を示すフローチャートである。一実施の形態によるセンタシステムにおける画像取得指示処理を示す図（その１）である。一実施の形態によるセンタシステムにおける画像取得指示処理を示す図（その２）である。標準的なコンピュータのハードウエア構成の一例を示すブロック図である。

以下、一実施の形態による画像取得システム１００について図面を参照しながら説明する。図１は、本実施の形態による画像取得システムの一例を示す図である。図１に示すように、画像取得システム１００は、車載システム１、管理者端末１１０、センタシステム１２０を有している。車載システム１とセンタシステム１２０とは、通信網７２を介して接続される。通信網７２は、情報の授受が行われる無線通信網であり、例えば、３ｒｄＧｅｎｅｒａｔｉｏｎ（３Ｇ）回線等の携帯電話通信網であるが、インターネットなどでもよい。管理者端末１１０は、センタシステム１２０と、通信網７４を介して接続される。通信網７４は、有線または無線の通信網であり、インターネットとしてもよい。

車載システム１は、車両３０に備えられる。車載システム１は、車載装置３、車両の周囲の動画像を撮影する撮影装置、および、車両の運行状況に関連する計測値を検出する各種センサを有する。車載装置３は、記録処理部７５および送信部８０を有する。以下の説明では、画像送信装置として、車載装置３を例として説明される。

記録処理部７５は、例えば、車載装置３で撮影された動画像を示す動画像信号の第１の時間に対応する画像信号を符号化して生成される第１の動画情報を記憶装置７７に記録する処理を行う。第１の動画情報は、動画像信号が取得される間、順次生成され、記憶される。フル動画情報は、第１の動画情報の一例である。記憶装置７７は、例えば、車載装置３に内蔵される記憶装置、可搬型記録媒体、外部記憶装置などの記憶装置である。

送信部８０は、動画像信号から生成される第２の動画情報を出力する。第２の動画情報は、例えば、車両の事故の原因となる可能性が高い事象として予め定められた所定事象の発生が検出された場合に、画像信号の、所定事象の検出時刻を含み上述の第１の長さよりも短い第２の時間に対応する画像信号を符号化して生成される。ミニ動画情報は、第２の動画情報の一例である。所定事象の詳細は、後述される。

送信部８０は、車両に備えられた撮影装置により撮影される動画像の予め決められたタイミングにおける静止画像を示す静止画情報と、静止画情報を識別する静止画識別情報とを出力する。また、送信部８０は、各種センサから取得した計測値等に基づき生成される、車両の挙動を示す車両挙動情報を、センタシステム１２０に出力するようにしてもよい。所定事象動画識別情報や静止画識別情報は、車両挙動情報の一部を含むようにしてもよい。出力される情報の詳細については、後述される。なお、記録処理部７５、送信部８０は、例えば、車載装置３に備えられた演算処理装置が、所定の制御プログラムを読み込み実行することによって実現される機能である。

車載装置３は、センタシステム１２０との通信や各種センサ、撮影装置の動作を制御するための演算処理を行うコンピュータ等を有する。車載装置３は、車両挙動情報を、例えば定期的に、または、所定事象が発生した場合に、または、作業に関する情報の入力があった場合に、センタシステム１２０に出力する。所定事象とは、事故の原因となる可能性が高い事象として予め定められた事象である。所定事象には、車両の運転者の覚醒度の低下を示す車両の挙動が含まれる。運転者の覚醒度が低下している状態とは、例えば、居眠り、ナルコレプシ等の身体的疾患を有する状態など、運転者が運転を継続するのが危険な状態、または危険な予兆がある状態である。

上記のように、本実施の形態による画像取得システム１００では、車両３０に備えられた車載システム１で動画像が撮影され、動画像を示す動画像信号が生成される。この動画像は、例えば、車両３０の運行中、常時撮影されることが好ましい。生成された動画像信号の第１の時間分の動画像信号に対応する第１の動画情報が生成される。第１の時間は、例えば１０秒である。このとき、例えば、第１の動画情報は、ＭｏｖｉｎｇＰｉｃｔｕｒｅＥｘｐｅｒｔｓＧｒｏｕｐ（ＭＰＥＧ）等の手法を用いた符号化により生成され、例えば可搬型記録媒体に記録される。

本実施の形態では、第１の動画情報に対応する動画像を、フル動画ということがある。第１の動画情報を、フル動画情報ということがある。第１の動画情報を識別する第１の動画識別情報をフル動画識別情報ということがある。フル動画情報は、車両の運行中常時記録され、記録媒体の容量を超えると、古いほうから上書きされることが好ましい。記憶装置７７としてＳＤカードを用いる場合、記録可能時間は、例えば１００時間以上等の時間が想定される。なお、フル動画は、第１のフレームレート（例えば、１０〜３０フレーム毎秒）で第１の解像度（例えば、１２８０×７２０画素）を有する動画としてもよい。

また、一般的に車両の事故の原因となる可能性が高い事象として予め定められた所定事象の発生が検出された場合に、所定事象動画像情報が生成され出力される。所定事象動画像情報は、所定事象の検出時刻を含む上述の第１の時間よりも短い第２の時間に対応する画像信号に基づき生成される。第２の動画情報に対応する動画像を、以下、ミニ動画ということがある。以下、第２の動画情報を、ミニ動画情報ということがある。ミニ動画は、例えば、フル動画の第１のフレームレートよりも低い第２のフレームレート、または第１の解像度よりも低い第２の解像度を用いた動画像としてもよい。第２の時間は、フル動画の第１の時間より短い時間であって、所定事象の発生状況が確認可能である時間（例えば、検出時刻の前後数秒など）が好ましい。なお、ミニ動画情報は、Ｍｏｔｉｏｎ−ＪｏｉｎｔＰｈｏｔｏｇｒａｐｈｉｃＥｘｐｅｒｔｓＧｒｏｕｐ（ＪＰＥＧ）、ＭＰＥＧ等の手法により生成される。ミニ動画情報は、例えばセンタシステム１２０へ、無線通信網を介して出力される。このとき、ミニ動画と所定事象の発生とを対応付ける所定事象動画識別情報（以下、ミニ動画識別情報ということがある）が、ミニ動画情報と共に出力される。

さらに、動画像信号に基づき、例えば所定時間毎等、予め決められたタイミングでの静止画像に対応する静止画情報が生成される。予め決められたタイミングとは、例えば、一定時間毎（例えば数分毎など）のタイミングなどとしてもよい。このタイミングは、例えば、車載システム１の初期設定時に、あるいは、車両３０の運行前などに設定しておくことが好ましい。例えば、車両３０の速度が速いときには短い時間間隔、遅いときには、速度が速いときよりも短い時間間隔、など、車速に応じて可変のタイミングに自動的に設定されるようにしてもよい。静止画情報は、例えばＪＰＥＧ等の手法を用いて生成される。静止画情報は、静止画情報を識別する静止画識別情報と共に、例えばセンタシステム１２０へ、無線通信網を介して出力される。

なお、フル動画識別情報、ミニ動画識別情報、静止画識別情報は、それぞれ、後述する車両３０の運行状況を示す運行情報を含むようにしてもよい。ミニ動画識別情報、静止画識別情報は、フル動画識別情報によりフル動画情報のいずれか少なくとも一つを特定する特定情報を含むことがこのましい。特定情報は、例えば、動画像取得時の日時などとすることができる。フル動画情報は、センタシステム１２０から出力要求があると、センタシステム１２０へ出力される。

センタシステム１２０は、車載システム１から受信した車両挙動情報を蓄積した、車両の運行状況を示す運行情報を記憶する。運行情報は、蓄積された車両挙動情報の全てを指すこともあるし、一つ一つの情報を指すこともある。運行情報は、車両３０の走行中に計測される車両３０の運行状況を示す複数の運行情報のうちのひとつであってもよい。なお、車両挙動情報と運行情報とを、説明の都合上、互いに区別して記載することがあるが、運行情報は、車両挙動情報が蓄積された情報である。よって、車両挙動情報は、運行情報の一例である。

図２は、一実施の形態による画像取得システム１００のハードウエア構成の一例を示す図である。センタシステム１２０は、車載通信サーバ１２３、データサーバ１２５、ウエブサーバ１２７を有している。車載通信サーバ１２３、データサーバ１２５、ウエブサーバ１２７は、互いに接続され、情報の授受を行う情報処理装置である。車載通信サーバ１２３は、車載システム１との間で、通信網７２を介して情報の授受を行う。データサーバ１２５は、運行情報や、車載システム１から出力される画像情報の記憶処理を制御する情報処理装置である。ウエブサーバ１２７は、通信網７４を介する管理者端末１１０との通信を制御する情報処理装置である。通信網７４は、例えば、インターネットなど、有線または無線による公衆回線通信網である。管理者端末１１０は、必ずしも備えられなくてもよく、管理者端末１１０で行う処理を、センタシステム１２０の例えばウエブサーバ１２７で行うようにしてもよい。また、車載通信サーバ１２３、データサーバ１２５、ウエブサーバ１２７の処理を一台の情報処理装置で行うようにしてもよい。

図３は、一実施の形態による車載システムのハードウエア構成の一例を示す図である。図３に示すように、車載システム１は、車載装置３、アンテナ３１、車速センサ３３、エンジン回転センサ３５、温度センサ３７、ＣａｒＡｒｅａＮｅｔｗｏｒｋ（ＣＡＮ）３９を有している。

車載装置３は、車載コンピュータ５、スピーカ７、カメラ９、ジャイロセンサ１１、加速度センサ１３、ＧｌｏｂａｌＰｏｓｉｔｉｏｎｉｎｇＳｙｓｔｅｍ（ＧＰＳ）１５、メディア駆動部１７を有している。また、車載装置３は、入力部１９、第１通信部２１、第２通信部２３、第３通信部２５、メモリ２７、表示部２９を有している。

車載コンピュータ５は、車載装置３や、各種センサの動作を制御する情報処理装置である。車載コンピュータ５は、例えばプロセッサ６を有している。車載コンピュータ５は、予め例えばメモリ２７などに記録された制御プログラムをプロセッサ６が読み込み、実行することにより、車載システム１の動作を制御するようにしてもよい。

アンテナ３１は、例えばＧＰＳ１５のための信号の受信を行うアンテナである。車速センサ３３は、車両３０の速度を検出する検出装置である。エンジン回転センサ３５は、車両３０のエンジン回転を検出する検出装置である。温度センサ３７は、車両３０の車内あるいは貨物室等の温度を検出する検出装置である。ＣＡＮ３９は、ワイパの動きなどの情報を車載装置３に出力する装置である。

スピーカ７は、例えば警告音などの音声を出力する装置である。カメラ９は、例えば車両の前方、側方など周囲の画像を撮影する装置である。カメラ９は、複数台備えられ、例えば車両を俯瞰する画像を生成するなどの変形は可能である。ジャイロセンサ１１は、車両３０の傾きを検出する検出装置である。加速度センサ１３は、車両３０の例えば３次元の加速度を検出する装置である。ＧＰＳ１５は、例えばアンテナ３１を介して衛星からの信号を受信することにより、現在の位置（緯度、経度）を取得する装置である。メディア駆動部１７は、例えば、ＳｅｃｕｒｅＤｉｓｉｔａｌｍｅｍｏｒｙｃａｒｄ（ＳＤカード）１８などの記録媒体を駆動し、情報の読み出しおよび書き込みを行う装置である。

入力部１９は、例えば、タッチパネル、スイッチ、ボタン等、情報の入力を受け付ける装置である。第１通信部２１は、例えば３Ｇ回線による通信を行う装置である。第２通信部２３は、例えば、無線ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ（ＬＡＮ）による通信を行う通信装置である。第３通信部２５は、例えばＢｌｕｅｔｈｏｏｔｈ（登録商標）などによる近距離通信を行う通信装置である。メモリ２７は、ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ（ＲＡＭ）等の記憶装置である。表示部２９は、液晶表示装置など、情報を表示する表示装置である。これら車載システムのハードウエア構成要素は、一般的な構成の一例であり上記センサ等を全て具備する必要がないことは言うまでもない。

図４は、一実施の形態による車載コンピュータの機能的な構成の一例を示すブロック図である。図４に示すように、車載コンピュータ５は、ＩｎｐｕｔＯｕｔｐｕｔ（ＩＯ）制御部５１、通信制御部５３、メモリ制御部５５、ＨｕｍａｎＭａｃｈｉｎｅＩｎｔｅｒｆａｃｅ（ＨＭＩ）制御部５７を有している。車載コンピュータ５は、画像処理部６１、第１画像記録部６２、第２画像記録部６３、画像抽出部６４、トリガ検知部６５、運行管理制御部６７を有している。図４に示した各機能ブロックは、例えば、車載コンピュータ５において、プロセッサ６が、所定の制御プログラムを読み込み、実行することにより実現される。また、機能ブロックの少なくとも一部が、半導体集積回路等のハードウエアとして構成されてもよい。

ＩＯ制御部５１は、車載コンピュータ５の入出力を制御する。通信制御部５３は、第１通信部２１〜第３通信部２５による通信を制御する。通信制御部５３は、情報を送受信する際に一時的にデータが書き込まれる送信バッファや受信バッファを含むようにしてもよい。通信制御部５３は、送信部の一例である。メモリ制御部５５は、メモリ２７への情報の書き込み読み出しを制御する。ＨＭＩ制御部５７は、入力部１９、表示部２９とプロセッサ６との間の情報の授受を制御する。

画像処理部６１は、カメラ９で撮影された画像に基づき生成された例えばＹＵＶ形式の動画像信号を受け付け、各ブロックに出力するなどの処理を行う。また、画像処理部６１は、受け付けた動画像信号を、順次メモリ２７に記憶させる。これにより、メモリ２７には、例えば、予め決められた時間分の画像信号が繰り返し記憶される。

第１画像記録部６２は、画像処理部６１から出力される動画像信号をＭＰＥＧ等の方式によりフル動画情報に変換し、例えばＳＤカード１８に記録する。例えば、ＳＤカード１８には、第１の長さ分の時間の動画像信号を変換したフル動画情報が複数、記録されるようにしてもよい。夫々のフル動画情報には、例えば、撮影時の車両の位置、撮影日時等を示すフル動画識別情報を共に記録させるようにすることが好ましい。第１画像記録部６２は、記録処理部の一例である。

第２画像記録部６３は、カメラ９で撮影された動画像信号に基づき、ＪＰＥＧ等の方式により画像情報を生成する。生成された画像情報は、通信制御部５３の送信バッファに一時的に格納され、通信網７２を介して、例えばセンタシステム１２０に送信される。このとき第２画像記録部６３は、画像情報を識別する識別情報として、例えば撮影の日時、撮影時の車両の位置等を、画像情報と共に記録することが好ましい。なお、第２画像記録部６３は、ミニ動画情報、ミニ動画識別情報、静止画情報、および静止画識別情報を生成し、通信制御部５３を介して、例えばセンタシステム１２０へ送信する。

画像抽出部６４は、例えば、カメラ９で撮影された画像において、２値化や特徴量抽出などの処理を行い、得られた情報に基づき、ナンバプレートや白線を認識するなどの画像認識処理を行う機能を有しても良い。また、画像抽出部６４は、センタシステム１２０から画像出力要求を取得した場合に、画像出力要求に応じた日時の画像を含む動画情報を、ＳＤカード１８に記録されたフル動画情報から抽出し、通信制御部５３を介してセンタシステム１２０に送信する。画像出力要求を行う際に生成される出力要求情報については後述する。

トリガ検知部６５は、各種センサや、画像認識の結果に基づき、所定事象の発生をトリガとして検出し、運行管理制御部６７に出力する。所定事象は、例えば、後述する白線逸脱、車間距離異常、急ブレーキ、急加速、急ハンドルなどである。このときトリガ検知部６５は、例えば、画像処理部６１で認識されたナンバプレートの大きさに基づき、車間距離を検出する。ナンバプレートは全国統一の大きさであることから、画像処理部６１で認識されたナンバプレートの大きさと、カメラ９の画角とから、車間距離を算出することができる。なお、トリガ検知部６５は、例えばレーダによる計測値など、他の方法で車間距離を算出することで、所定事象の発生を検出するようにしてもよい。その場合、車両３０には、必要な検出器が備えられる。

運行管理制御部６７は、センタシステム１２０との情報の送受信を行う。このとき運行管理制御部６７は、センタシステム１２０へ出力する情報の生成を行う。例えば運行管理制御部６７は、カメラ９、ＧＰＳ１５、温度センサ３７、ＣＡＮ３９等からの計測値の取得、取得した計測値、または所定事象や作業情報の入力に基づく車両挙動情報の生成、およびセンタシステム１２０への出力を行う。センタシステム１２０へ出力する車両挙動情報の詳細については、後述される。また、運行管理制御部６７は、車速センサ３３による車速の検出、エンジン回転センサ３５によるエンジン回転等の検出、および検出値の記憶などの制御を行う。

一例として、カメラ９から取得した画像に基づき、画像情報を生成して出力する際の情報の流れとしては、以下のようになる。第１画像記録部６２は、画像処理部６１から受け付けた画像信号に基づき、例えばＭＰＥＧ等の手法を用いてフル動画情報を生成し、メディア駆動部１７を介してＳＤカード１８に記録させる。

ミニ動画情報を出力する場合、画像処理部６１は、カメラ９から、ＩＯ制御部５１が受け付けた画像信号を第２画像記録部６３に出力する。第２画像記録部６３は、受け付けた画像信号に基づき例えばＭｏｔｉｏｎ−ＪＰＥＧなどの手法によりミニ動画情報を生成し、通信制御部５３に出力する。通信制御部５３は、例えば、一時的に送信バッファに記録されたミニ動画情報を、第１通信部２１などを介してセンタシステム１２０へ送信させる。

静止画情報を出力する場合、画像処理部６１は、カメラ９から、ＩＯ制御部５１が受け付けた画像信号を第２画像記録部６３に出力する。第２画像記録部６３は、画像処理部６１から受け付けた画像信号に基づき、例えばＪＰＥＧなどの手法を用いて静止画情報を生成し、通信制御部５３に出力する。通信制御部５３は、例えば、一時的に送信バッファに記録された静止画情報を、第１通信部２１などを介してセンタシステム１２０へ送信させる。

運行管理制御部６７は、各センサからの計測値に基づきセンサ情報１５１などの車両挙動情報を生成し、通信制御部５３、および、第１通信部２１または第２通信部２３を介してセンタシステム１２０に出力する。なお、車載システム１からセンタシステム１２０へ出力される車両挙動情報は、例えば、後述するセンサ情報１５１、発生情報１５３、作業情報１５５を含む。センサ情報１５１、発生情報１５３、作業情報１５５の一部は、適宜、フル動画情報、ミニ動画情報、または静止画情報に対応付けられる。詳細は後述される。

以下、センサ情報１５１、発生情報１５３、作業情報１５５について説明する。センサ情報１５１、発生情報１５３、作業情報１５５は、車両挙動情報である。図５は、一実施の形態によるセンサ情報の一例を示す図である。図６は、一実施の形態による発生情報の一例を示す図である。図７は、一実施の形態による作業情報の一例を示す図である。

図５に示すように、センサ情報１５１は、車載システム１において、各センサで取得された情報を含んでいる。センサ情報１５１は、車両番号、データ区分、日時、位置（緯度・経度）、車速、エンジン回転数、Ｇセンサ値、ジャイロ値、ＣＡＮ値、車間距離などを有している。車両番号は、車両に固有の識別番号である。データ区分は、車両挙動情報のうちのデータの種類を示す区分であり、センサ情報１５１の場合は「センサ情報」であることを示す情報である。

日時は、センサ情報１５１が取得された日時であり、例えば車載コンピュータ５のプロセッサ６に内蔵の計時機能を用いて取得される。位置は、センサ情報１５１が取得された際の車両の緯度経度であり、例えばアンテナ３１およびＧＰＳ１５を介して取得される。車速は、センサ情報１５１が取得された日時において車速センサ３３から取得された車両の速度である。エンジン回転数は、センサ情報１５１が取得された日時において、エンジン回転センサ３５から取得されたエンジンの回転数である。Ｇセンサ値は、センサ情報１５１が取得された日時において、加速度センサ１３から取得された加速度値である。ジャイロ値は、センサ情報１５１が取得された日時においてジャイロセンサ１１から取得された、角速度などを示す値である。ＣＡＮ値は、ＣＡＮ３９において検出される検出値であり、例えば、車両３０におけるワイパの使用状況を示す。車間距離は、車間距離検出部６２により算出される車間距離である。

センサ情報１５１は、図５に記載のセンサ情報以外のセンサからの値を含むようにしてもよい。センサ情報１５１は、上記のように、例えば一定時間毎に各種センサから取得した計測値の情報であり、一定時間毎に出力される。さらにセンサ情報１５１は、作業情報、発生情報が取得された際、または、出力する情報を一時的に格納している送信バッファに空きがなくなった場合等に、センタシステム１２０に出力されるようにしてもよい。あるいは、センサ情報１５１は、ＳＤカード１８などに蓄積され、運行が終了した後などにＳＤカード１８をセンタシステム１２０で読み込むことにより、センタシステム１２０で受け付けられるようにしてもよい。

図６に示すように、発生情報１５３は、危険な運転に関係する所定事象の発生を示す情報である。発生情報１５３は、車両番号、データ区分、日時、発生項目を有している。データ区分は、発生情報１５３の場合「発生情報」であることを示す情報である。発生項目は、例えば、図８に示す発生項目１５９に含まれる、所定事象の種類を示す情報である。発生情報１５３は、トリガ検知部６５が所定事象の発生を検出すると、運行管理制御部６７で生成されて出力される。発生情報１５３は、ＳＤカード１８に記憶され、センタシステム１２０によりＳＤカード１８から読み込まれるようにしてもよい。

図８は、一実施の形態による発生項目の一例を示す図である。発生項目１５９は、白線逸脱、車間距離異常、急ブレーキ、急加速、急ハンドルを有している。発生情報１５３は、例えば、発生項目１５９に示した項目の状況が観測された場合、センタシステム１２０に出力されるようにしてもよい。本実施の形態において、発生情報１５３は、後述するミニ動画情報と共にセンタシステム１２０に出力されることが好ましい。

図９は、一実施の形態による所定事象の一例を説明する図である。図９において、車両３０が自車両であるとする。図９は、車両３０が、２本の白線１６７、白線１６８で示された車線を走行中であることを示している。車両３０の前方には他車両１６３が走行し、後方には他車両１６５が走行しているとする。このとき、距離ａ１は、車両３０の進行方向左側の白線１６７との距離であり、距離ａ２は、右側の白線１６８との距離である。また、車間距離ｂは、車両３０と他車両１６３との距離である。矢印ｃは、車両３０が、矢印ｃの方向に急に進む急発進を示している。矢印ｄは、急激な減速が行われる急ブレーキを示している。矢印ｅは、急に進行方向が変更される急ハンドルを示している。

白線逸脱は、例えば、距離ａ１と距離ａ２との差が所定以上になる状態、あるいは、白線１６７、白線１６８のいずれかを踏み越えてしまう状態などをいう。白線逸脱は、例えば、カメラ９で撮影された画像に基づき、車載コンピュータ５の画像処理部６１で認識された白線の位置に基づき判定される。画像を用いて白線逸脱を判定する場合、例えば、カメラによって得た画像を所定のテンプレートと比較して相関演算を行い、相関の高いテンプレート位置を白線位置として検出する技術を用いて、白線が検出されるようにしてもよい。そして、車載コンピュータ５の画像処理部６１は、検出した白線の画像上の位置から、距離ａ１、距離ａ２を算出し、白線逸脱を判定するようにしてもよい。

車間距離異常は、例えば、前方の車両との車間距離ｂが、所定距離以下の状態である。車間距離ｂは、上述のように、カメラ９で撮影された画像に基づき、車載コンピュータ５で算出されるようにしてもよい。別の方法として、例えば、専用のミリ波レーダなどを用いて車間距離ｂが検出されるようにしてもよい。

急ブレーキ、急加速は、例えば加速度センサ１３で検出された加速度が所定の範囲である場合としてもよい。急ハンドルは、例えばジャイロセンサ１１からの出力値が所定の範囲である場合としてもよい。

図７は、作業情報１５５の一例を示す図である。作業情報１５５は、車両の運転者が行った作業に関する情報である。作業情報１５５は、車両番号、データ区分、日時、作業項目を有している。以下、作業情報の取得方法について説明する。

図１０は、一実施の形態による作業情報の入力処理の一例を説明する図である。図１１は、一実施の形態による作業情報入力画面の一例を示す図である。図１０に示すように、作業情報入力時は、車載装置３における車載コンピュータ５の通信制御部５３、メモリ制御部５５、ＨＭＩ制御部５７、運行管理制御部６７の機能が用いられる。また、第１通信部２１、メモリ２７、表示部２９、入力部１９が用いられる。

また、車載装置３には、表示装置１９１、入力キー１９３、テンキー１９５が備えられているとする。表示装置１９１は、情報を表示する装置であり、例えば液晶表示装置である。表示装置１９１は、情報を入力する機能を有するタッチパネルであってもよい。入力キー１９３は、例えば、各キーに処理が関連付けられたファンクションキーである。入力キー１９３のうちのひとつは、例えば作業情報の入力開始処理に関連付けられているとしてもよい。テンキー１９５は、数字を入力するためのキーである。

入力部１９は、例えば入力キー１９３、テンキー１９５などの押下を受け付ける。ＨＭＩ制御部５７は、入力部１９が受け付けたキーの押下に対応付けられた処理を認識し、対応する情報を出力する。また、ＨＭＩ制御部５７は、例えば運行管理制御部６７から入力された情報を変換して、表示部２９に表示させる。メモリ制御部５５は、メモリ２７への情報の読み書きを制御する。運行管理制御部６７は、入力部１９、ＨＭＩ制御部５７を介して入力された作業情報に基づき、上述した作業情報１５５を生成する。また、運行管理制御部６７は、作業情報の入力が完了したことを示す情報をＨＭＩ制御部５７に出力する。通信制御部５３は、第１通信部２１を介してセンタシステム１２０に、生成された作業情報１５５を送信する。

例えば入力キー１９３の押下により作業情報の入力が開始された場合には、図１１に示すように、表示装置１９１に、選択項目一覧２０１が表示されるようにしてもよい。例えば、テンキー１９５で「４」のキーが押下されると、「休憩」が開始されたことが認識され、表示例２０３が表示される。このとき、運行管理制御部６７は、作業情報１５５として「休憩開始」を示す情報を生成し、センタシステム１２０に送信する。他の項目の場合も同様に、押下されたキーに応じて作業情報が入力される。以上のようにして、作業情報１５５が取得される。表示例２０３に示すように、作業情報として、例えば、「荷積」、「荷卸」に対応するキーが押下されることにより、車両３０が荷物を積載しているか否かを示す情報が入力される。なお、作業情報１５５は、ＳＤカード１８に書き込まれることが好ましい。センタシステム１２０は、ＳＤカード１８から作業情報１５５を読み取ることにより受け付けるようにしてもよい。

運行情報２０７の一例についてさらに説明する。図１２は、一実施の形態による運行情報の一例を示す図である。図１２に示すように、運行情報２０７は、例えば同一の車両番号を持つセンサ情報１５１、発生情報１５３、作業情報１５５を、時系列に蓄積した情報とすることができる。センタシステム１２０では、受け付けたセンサ情報１５１、発生情報１５３、作業情報１５５をデータサーバ１２５に時系列に蓄積することにより、運行情報２０７を生成するようにしてもよい。また、センサ情報１５１、発生情報１５３、作業情報１５５は、車載システム１において、ＳＤカード１８に時系列に蓄積され、運行情報２０７として記憶されるようにしてもよい。

次に、車載システム１で生成され、車載システム１により記憶され、あるいはセンタシステム１２０に送信される画像情報を含むデータの構成について説明する。図１３は、フル画像記録情報の一例を示す図である。フル画像記録情報２１０は、車載システム１の例えば第１画像記録部６２で生成され、例えばＳＤカード１８に記録される情報の一例である。

図１３に示すように、フル画像記録情報２１０は、車両番号、データ区分（フル動画）、日時、位置（緯度・経度）、画像（フル動画情報）を有している。ここで、フル画像記録情報２１０は、センサ情報１５１と画像（フル動画情報）を備える例でもよい。例えば、フル画像記録情報２１０は、フル動画の第１の時間に対応するフル動画情報７８を有していることが好ましい。フル動画情報は、例えばＩフレームから次のＩフレームまでに対応する動画情報とするようにしてもよい。フル画像記録情報２１０は、例えば、第１画像記録部６２で生成される。

次に、車載システム１からセンタシステム１２０へ出力される画像情報について説明する。図１４は、静止画送信情報２１２の一例を示す図である。図１４に示すように、静止画送信情報２１２は、車両番号、データ区分、日時、位置、画像（静止画情報）を含んでいる。データ区分は、静止画送信情報２１２の場合、「静止画」に対応する静止画情報であることを示す情報である。画像は、カメラ９で取得された画像信号から生成した例えば静止画情報８４である。静止画送信情報２１２は、所定事象の発生が検知されると、第２画像記録部６３により生成され、発生情報１５３と共に出力されることが好ましい。静止画送信情報２１２は、センタシステム１２０では、例えば、画像情報１３３として記録される。

図１５は、ミニ動画送信情報２１４の一例を示す図である。図１５に示すように、ミニ動画送信情報２１４は、車両番号、データ区分、日時、位置、画像を含んでいる。データ区分は、ミニ動画送信情報２１４の場合、「ミニ動画」に対応するミニ動画情報であることを示す情報である。画像は、例えば、カメラ９で取得された画像信号から生成されたミニ動画情報８２である。ミニ動画送信情報２１４は、例えば、第２画像記録部６３により生成される。ミニ動画送信情報２１４は、センタシステム１２０では、例えば、画像情報１３３として記録される。

次に、センタシステム１２０の機能的な構成について説明する。図１６、図１７は、一実施の形態によるセンタシステムの機能的な構成の一例を示すブロック図である。図１６に示すように、センタシステム１２０は、車載通信サーバ１２３、データサーバ１２５、ウエブサーバ１２７を有している。図１６において、矢印により運行情報、画像情報の記録処理での情報の流れが示されている。センタシステム１２０は、全体として、情報処理装置の一例とすることができる。

車載通信サーバ１２３は、車載システム１から出力された車両挙動情報、画像情報等の情報を受信し、データサーバ１２５に出力する（矢印５０１、５０３）。データサーバ１２５は、運行情報１３１、画像情報１３３を記憶している。データサーバ１２５は、受け付けた情報を適宜記憶するとともに、記憶した情報を読み出す処理を行う。例えば、データサーバ１２５は、受け付けた情報がセンサ情報１５１、発生情報１５３、作業情報１５５など車両挙動情報の場合、運行情報１３１に記憶させる。例えば、データサーバ１２５は、受け付けた情報が、フル画像記録情報２１０、静止画送信情報２１２、ミニ動画送信情報２１４など画像情報を含む場合、画像情報１３３に記憶させる。車両毎に記憶された車両挙動情報を、運行情報ということがある。センタシステム１２０は、例えば外部に備えられたメディア駆動装置によりＳＤカード１８等から情報を読み込むことで、運行情報を受け付けるようにしてもよい。

運行情報１３１は、車載装置３から、センサ情報１５１、発生情報１５３、作業情報１５５が、例えば時系列に記憶された運行情報２０７を含む情報である。画像情報１３３は、車載装置３からミニ動画送信情報２１４、静止画送信情報２１２、後述する取得指示画像情報２３７として受け付けたミニ動画情報１４１、静止画情報１４３、フル動画情報１４５などを含む。

ウエブサーバ１２７は、画像取得指示部１７１、画面生成部１７３を有している。画面生成部１７３は、取得指示画面１７５、画像表示画面１７７などを生成する。画像取得指示部１７１は、データサーバ１２５に記憶された画像情報１３１に基づき、車載装置３に送信させる画像の取得に関する指示を行う。

図１７には、矢印により、センタシステム１２０が車載システム１から画像を取得する処理における情報の流れが示されている。図１７に示すように、まず、例えば管理者端末１１０から取得指示画面を表示させるための要求が発生する場合を考える。画面生成部１７３は、管理者端末１１０からの取得指示画面１７５の表示要求を受け付け（矢印５１１）、画像取得指示部１７１に受け付けた要求を出力する（矢印５１２）。画像取得指示部１７１は、運行情報１３１、画像情報１３３から対応する運行情報と画像情報とを取得する（矢印５１３、５１４）。画像取得指示部１７１は、取得した情報を、画面生成部１７３へ出力する（矢印５１５）。画面生成部１７３は、受け付けた運行情報１３１、画像情報１３３を用いて、取得指示画面１７５を生成し、管理者端末１１０へ出力する（矢印５１６）。

管理者端末１１０で、取得指示画面１７５を介して入力された画像取得指示が画像取得指示部１７１に出力される（矢印５１１）。画像取得指示は、例えば、選択されたミニ動画位置２２６などを含む。画像取得指示を受け付けると、画像取得指示部１７１は、受け付けた画像取得指示に応じて、出力要求情報として、後述するインデックス情報２３５を生成する。画像取得指示部１７１では、車載通信サーバ１２３を介して、車載システム１にインデックス情報２３５を送信する（矢印５１７、５１８）。

車載システム１では、例えば画像抽出部６４が、ＳＤカード１８からインデックス情報２３５に対応するフル動画情報を抽出し、後述する取得指示画像情報２３７としてセンタシステム１２０へ出力する（矢印５１９）。センタシステム１２０では、ウエブサーバ１２７が取得指示画像情報２３７を受け付けると（矢印５２０、５２１）、画面生成部１７３は、取得指示画像情報２３７に含まれる画像情報を用いて画像表示画面１７７を生成し（矢印５２２、５２３）、管理者端末１１０に出力する（矢印５２４）。管理者端末１１０では、受け付けた画像表示画面１７７を表示する。画像表示画面１７７としては、取得したフル動画のみを再生させる画面としてもよい。また、後述する取得指示画面２２０において、画像取得を要求した地点に表示を行うような形態でもよい。

図１８は、取得指示画面の一例を示す図である。図１８は、取得指示画面の一例として取得指示画面２２０を示している。取得指示画面２２０には、地図上に静止画位置２２２、画像種別表示２２４、ミニ動画位置２２６、画像種別表示２２８などが表示されている。矢印２２９は、車両３０の走行軌跡を示している。

画像種別表示２２４は、例えば、車両３０がこの地点を走行していたときに撮影された画像の種別を示す表示である。画像種別表示２２４は、例えば静止画そのものとしてもよい。ミニ動画種別表示２２８は、車両３０が動画位置２２６を走行していたときに撮影された画像の種別を示す表示である。画像種別表示２２８は、例えばクリックすると動画の再生が始まるような表示を行ってもよい。画像識別情報２３０は、ミニ動画位置２２６におけるミニ動画の識別情報である。画像識別情報２３０は、車両の識別番号と、画像取得日時を含んでいる。

画像種別表示２２４において、例えば静止画位置２２２の地点をクリックする等、選択操作が行われると、画像種別表示２２４の撮影時を含むフル動画を取得する画像取得指示が取得されるようにしてもよい。取得された画像取得指示は、例えば、後述するインデックス情報２３５が、車載システム１に送信される。車載システム１は、ＳＤカード１８から画像を抽出し、後述する取得指示画像情報２３７として出力する。

図１９は、インデックス情報２３５の一例を示す図である。インデックス情報２３５は、所望の日時のフル動画を取得する指示を含む出力要求情報の一例であり、センタシステム１２０から車載システム１に送信される。

図２０は、取得指示画像情報２３７の一例を示す図である。図２０に示すように、取得指示画像情報２３７は、車両番号とフル動画の日時を含むインデックス情報２３５に、フル動画の画像（例えば、フル動画情報１４５）を付加した情報となる。

以下、フローチャートを参照しながら、本実施の形態による画像取得方法の処理についてさらに説明する。図２１、図２２は、車載システム１における画像記録処理の一例を示すフローチャートである。図１７に示すように、車載装置３の画像処理部６１は、例えば、カメラ９での撮影が開始され、画像処理部６１により、フル動画情報の記録が開始できる状態になるまで待機する（Ｓ３０１：ＮＯ）。記録が開始されると（Ｓ３０１：ＹＥＳ）、第１画像記録部６２は、例えばＳＤカード１８に、記録開始マーカを付与する（Ｓ３０２）。

画像処理部６１は、カメラ９による画像信号を取得する（Ｓ３０３）。この画像信号の取得は、例えばカメラ９による撮影が継続している間、永続的に行われる。画像処理部６１は、例えば車載装置３のメモリ２７に、カメラ９による画像信号を記録させる処理を開始する（Ｓ３０４）。メモリ２７では、空き領域がなくなった場合、先に記録されたデータから順に消去され、新しいデータが上書き保存される。メモリ２７には、例えば、最大数十秒の画像信号が記録されるようにしてもよい。

第１画像記録部６２は、取得した画像信号から、例えばＭＰＥＧの手法による動画圧縮用のＩフレームを生成する（Ｓ３０５）。第１画像記録部６２は、ＳＤカード１８に、Ｉフレームの記録を行う（Ｓ３０６）。

図２２に示すように、第１画像記録部６２は、カメラ９の画像信号より、動画圧縮用のＰフレームを生成する（Ｓ３１１）。第１画像記録部６２は、ＳＤカード１８に、Ｐフレーム情報の記録を行う（Ｓ３１２）。

第１画像記録部６２は、Ｉフレーム切替え時間、すなわち第１の時間に到達したか否か判定し、到達していない場合、Ｓ３１１に戻って処理を繰り返す（Ｓ３１３：ＮＯ）。この処理により、一つのフル動画情報１４５が記録される。このとき、フル画像記録情報２１０が生成される。Ｉフレーム切替え時間に到達した場合（Ｓ３１３：ＹＥＳ）、第１画像記録部６２は、運行管理制御部６７により、センサ情報１５１を送信バッファに記録させる（Ｓ３１４）。第１画像記録部６２は、静止画記録時間に到達したか否か判定し、到達していない場合（Ｓ３１５：ＮＯ）、Ｓ３０５に戻って処理を繰り返す。到達した場合（Ｓ３１５：ＹＥＳ）、第２画像記録部６３は、メモリ２７から画像信号を読み出し、静止画像情報を生成する（Ｓ３１６）。第２画像記録部６３は、静止画情報を運行管理制御部６７へ出力する。運行管理制御部６７は、静止画像情報に対応する車両挙動情報を例えばＳＤカード１８から読み出して静止画送信情報２１２を生成し、送信バッファに一時的に記憶させるとともに、通信制御部５３により、センタシステム１２０に送信する（Ｓ３１７）。

図２３は、車載システム１におけるミニ動画情報生成処理を示すフローチャートである。図２３に示すように、車載システム１では、トリガ検知部６５は、所定事象が検知されるまで待機する（Ｓ３２１：ＮＯ）。所定事象が検知されると（Ｓ３２１：ＹＥＳ）、第２画像記録部６３は、メモリ２７に必要な画像信号が記録されるまで所定時間待ち合わせる（Ｓ３２２）。第２画像記録部６３は、メモリ２７から、所定事象の検知前後の第２の時間の画像を取得し（Ｓ３３３）、符号化を行うことにより、ミニ動画情報を生成する（Ｓ３３４）。運行管理制御部６７は、第２画像記録部６３で生成されたミニ動画情報に応じた車両挙動情報を例えばＳＤカード１８から読み出し、ミニ動画送信情報２１４を生成する。ミニ動画送信情報２１４は、送信バッファに一時的に記録され、通信制御部５３を介してセンタシステム１２０に送信される（Ｓ３３５）。

図２４は、車載システム１における出力画像生成処理を示すフローチャートである。図２４に示すように、センタシステム１２０から画像の出力要求があるまで、画像抽出部６４は待機する（Ｓ３４１：ＮＯ）。画像の出力要求情報としてインデックス情報２３５を受け付けると（Ｓ３４１：ＹＥＳ）、画像抽出部６４は、インデックス情報２３５に基づき、対応する日時に応じたフル動画情報をＳＤカード１８から抽出する（Ｓ３４２）。運行管理制御部６７は、抽出されたフル動画情報に基づき取得指示画像情報２３７を生成し、センタシステム１２０へ出力する（Ｓ３４３）。

図２５は、センタシステム１２０における画像受け付けおよび画像要求の処理を示すフローチャートである。図２５に示すように、車載通信サーバ１２３は、車載装置３との間の通信を確立する（Ｓ３５１）。このとき、例えば、車載装置３の電源がオンでない場合、センタシステム１２０から車載装置３の電源をオンさせる指示を与えて車載装置３を起動させるシステムを備えるようにしてもよい。

車載通信サーバ１２３は、車載装置３からのデータ受信ポーリングがあった場合（Ｓ３５２：ＹＥＳ）、受信データ種別を判定する（Ｓ３５３）。受信データ種別が車両挙動情報の場合（Ｓ３５３：車両挙動情報）、データサーバ１２５は、受け付けた情報を運行情報１３１へ記録し（Ｓ３５４）、処理をＳ３５６に進める。受け付けた情報が画像情報の場合（Ｓ３５３：画像情報）、データサーバ１２５は、受け付けた情報を画像情報１３３に記録し（Ｓ３５５）、処理をＳ３５６に進める。

車載通信サーバ１２３は、データ受信ポーリングが例えば所定時間確認できない場合（Ｓ３５２：ＮＯ）、処理をＳ３５６に進める。

車載通信サーバ１２３は、データ送信ポーリングを例えばウエブサーバ１２７から受け付けた場合（Ｓ３５６：ＹＥＳ）、車載システム１に、画像の出力を要求する出力要求情報を送信する（Ｓ３５７）。車載通信サーバ１２３は、例えば所定時間データ送信ポーリングを確認できない場合（Ｓ３５６：ＮＯ）、Ｓ３５２から処理を繰り返す。

図２６、図２７は、センタシステム１２０における画像取得指示処理を示す図である。図２６に示すように、ウエブサーバ１２７では、画面生成部１７３が、運行情報２０７に基づき、取得指示画面１７５の地図部分と車両の軌跡を含む走行軌跡情報を生成する。走行軌跡情報に含まれる地図部分で取得された、静止画送信情報２１２、ミニ動画送信情報２１４がある場合、画像情報１３３から対応する静止画情報１４３、ミニ動画情報１４１を取得する。画面生成部１７３は、走行軌跡情報および取得した画像情報に基づき取得指示画面１７５を生成する（Ｓ３７３）。画面生成部１７３は、生成した取得指示画面１７５を、利用端末、例えば管理者端末１１０に出力する（Ｓ３７４）。

画面生成部１７３は、管理者端末１１０から取得指示がない場合（Ｓ３７５：ＮＯ）、所定時間経過するまで判定を繰り返し（ステップ３７６：ＮＯ）、所定時間経過すると（Ｓ３７６：ＹＥＳ）、処理を終了する。

画面生成部１７３は、取得指示を受け付けると（Ｓ３７５：ＹＥＳ）、取得すべきフル動画に対応するインデックス情報２３５を生成し、車載システム１へ送信する（Ｓ３７７）。

図２７に示すように、センタシステム１２０は、車載通信サーバ１２３を介して画像の取得がされない場合（Ｓ３８１：ＮＯ）、所定時間経過するまでＳ３８１の判定を繰り返す（Ｓ３８２：ＮＯ）。所定時間経過すると（Ｓ３８２：ＹＥＳ）センタシステム１２０は、処理を終了する。

Ｓ３８１で、画像の取得が完了すると（Ｓ３８１：ＹＥＳ）、画面生成部１７３は、取得したフル動画情報に基づき画像表示画面１７７を生成し（Ｓ３８３）、管理者端末１１０に送信する（Ｓ３８４）。管理者端末１１０では、取得を要求したフル動画が表示されることになる。

以上詳細に説明したように、画像取得システム１００は、車載システム１、センタシステム１２０を有する。画像取得システム１００は、管理者端末１１０を有するようにしてもよい。車載システム１の車載装置３は、記録処理部７５と送信部８０とを有する。記録処理部７５は、車両３０に備えられたカメラ９により撮影される動画像を示す画像信号の第１の時間分の画像信号を符号化したフル動画情報を、例えばＳＤカード１８に記憶させる。送信部８０は、車両の事故の原因となる可能性が高い事象として予め定められた所定事象の発生が検出された場合に、画像信号の、所定事象の検出時刻を含み第１の長さよりも短い第２の時間に対応する画像信号を符号化して生成されるミニ動画情報を出力する。

このとき、センタシステム１２０は、ミニ動画情報１４１を受け付けるとともに、例えば管理者端末１１０に、例えば取得指示画面２２０を表示させ、ミニ動画情報１４１が利用可能であることを示す。

これにより、車載システム１では、ＳＤカード１８に記憶される画像がフル動画情報の記憶に一本化される。すなわち、画像の情報としてはフル動画情報のみが、ＳＤカード１８に記憶される。また、所定事象に対応するミニ動画情報は、センタシステム１２０に送信される。送信は、ミニ動画情報が生成されると直ちに行われるようにしてもよい。また、車載装置３の送信バッファに新たな情報が記憶できなくなったときに行われるようにしてもよい。

これにより、撮影装置が遠方にある場合にも、撮影された所望の画像を、迅速に利用できる。また、画像情報を可搬型記録媒体に記録させて、例えば運行後などにセンタに記録媒体を持ち込み、情報を読み取ることにより、所定事象の発生に対応する画像を取得する必要がない。また、ミニ動画情報は、例えば車両３０の運行中であっても自動的にセンタシステム１２０に出力される。よって、センタシステム１２０は、効率よく画像を取得することができる。また、事故後の火災などによって、車載装置３が消失してしまったような場合にも、センタシステム１２０にミニ動画情報が記憶されている可能性を残すことができる。

さらに、ミニ画像情報により生成される画像は、第１の長さよりも短い第２の長さであり、確認に要する時間が少なくて済む。これにより、センタシステム１２０で例えば車両３０の運行管理に従事する管理者の作業時間を削減でき、人件費を削減できる効果がある。

また、フル動画情報は、第１の解像度で第１のフレームレートを用いた動画情報であり、ミニ動画情報は、第１のフレームレートよりも低い第２のフレームレートまたは第１の解像度よりも低い第２の解像度のいずれか少なくとも一方を用いた動画情報としてもよい。

これにより、センタシステム１２０に送信する情報の情報量を低減させることができ、通信コストの削減が可能である。また、センタシステム１２０側で画像情報１３３として記録する場合に、記録容量を低減させることができ、情報の記録に要するコストを低減できる。なお、フレームレートが低いことは、画像の確認をさらに迅速にさせる効果もある。

ミニ動画情報は、ミニ動画情報と所定事象の発生とを対応付けるミニ動画識別情報とともに、センタシステム１２０に送信される。これにより、センタシステム１２０側では、ミニ動画識別情報を用いて、ミニ動画情報が利用であることを示す情報を生成することができる。

車載装置３では、例えばＳＤカード１８に、フル動画情報と共に、フル動画識別情報を記憶させる。このフル動画識別情報は、ミニ動画識別情報に基づき生成される出力要求情報が示すフル動画情報を特定するために用いられる。これにより、センタシステム１２０側から、必要なフル動画情報を指定して通信網７２を介して取得することが可能になる。また、ミニ動画識別情報を用いて出力要求を行うことで、所定事象の発生ポイントを指定して、関係するフル動画情報を取得することが可能になる。

フル動画識別情報、およびミニ動画識別情報は、それぞれ車両の運行状況を示す運行情報を含む。これにより、車載システム１の機能として従来から存在するセンサの計測値を有効利用できるという効果がある。また、センタシステム１２０で画像の出力要求を行う際に、要求する画像を、車両３０の運行の日時、位置、所定事象の発生地点など種々の指定方法により要求できる。

車載システム１は、画像信号を符号化して生成される、動画像の予め決められたタイミングにおける静止画像を示す静止画情報をさらに出力する。センタシステム１２０は、静止画情報を受け付け、管理者端末１１０などにより表示させることができる。このように、所定事象の発生とは対応しない、例えば所定時間毎の静止画を利用可能であることで、ミニ動画では把握しきれない状況を画像で確認することが可能となる。例えば、大型車に自転車が衝突した状況などで、加速度の変化が検出されない場合等、所定事象としては検出されないが危険な状況を、静止画で確認し、さらに静止画に基づいてフル動画で確認するといった運用も可能になる。また、静止画像であることから、センタシステム１２０への送信に必要なコスト、センタシステム１２０での記録に必要なコストは低く抑えられる。

静止画情報は、静止画情報を識別するための静止画識別情報とともに、無線の通信網７２を介してセンタシステム１２０に送信される。これにより、センタシステム１２０では、静止画識別情報を用いて、静止画情報が利用可能であることを示す情報を出力することができる。このとき、静止画識別情報は、静止画像情報に応じたフル動画像情報を特定するための特定情報を有する。これにより、センタシステム１２０では、静止画識別情報を用いて、対応するフル動画情報の出力要求を車載システム１へ行うことが可能になる。

センタシステム１２０では、フル動画情報の出力要求を車載装置３に出力する前に、車載装置３の電源状態を取得し、電源がオフである場合、電源をオンさせる要求を出力するようにしてもよい。このようにすることで、センタシステム１２０は、所望のフル動画情報を取得することが可能になる。

車載システム１では、カメラ９からの画像信号は、例えば秒単位の長さで繰り返し記録すればよい。これは、記憶領域の効率的な利用につながる。また、通信網７２としては、上述のように、短距離無線通信網でもよい。これにより、例えば、事故現場において携帯型情報処理装置などにより、必要な画像を取得するなどの利用も可能である。

さらに、ＳＤカード１８には、常時動画像が記録されるため、必要な場合には、例えば複数のフル動画情報を時系列にセンタシステム１２０に送信するなど、ライブ映像としての利用も可能である。このため、例えば、車載装置３においてライブ映像送信用の符号化装置を備え、センタシステム１２０側に復号化装置を備えるなどの変形を行うようにしてもよい。このとき、例えばフレームレートを適宜車載装置３側で、またはセンタシステム１２０側から車載装置３へ指示を送るなどして設定するような変形も考えられる。

ここで、上記実施の形態による画像取得方法の動作をコンピュータに行わせるために共通に適用されるコンピュータの例について説明する。図２８は、標準的なコンピュータのハードウエア構成の一例を示すブロック図である。図２８に示すように、コンピュータ４００は、ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ（ＣＰＵ）４０２、メモリ４０４、入力装置４０６、出力装置４０８、外部記憶装置４１２、媒体駆動装置４１４、ネットワーク接続装置４１８等がバス４１０を介して接続されている。

ＣＰＵ４０２は、コンピュータ４００全体の動作を制御する演算処理装置である。メモリ４０４は、コンピュータ４００の動作を制御するプログラムを予め記憶したり、プログラムを実行する際に必要に応じて作業領域として使用したりするための記憶部である。メモリ４０４は、例えばＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ（ＲＡＭ）、ＲｅａｄＯｎｌｙＭｅｍｏｒｙ（ＲＯＭ）等である。入力装置４０６は、コンピュータの使用者により操作されると、その操作内容に対応付けられている使用者からの各種情報の入力を取得し、取得した入力情報をＣＰＵ４０２に送付する装置であり、例えばキーボード装置、マウス装置などである。出力装置４０８は、コンピュータ４００による処理結果を出力する装置であり、表示装置などが含まれる。例えば表示装置は、ＣＰＵ４０２により送付される表示データに応じてテキストや画像を表示する。

外部記憶装置４１２は、例えば、ハードディスクなどの記憶装置であり、ＣＰＵ４０２により実行される各種制御プログラムや、取得したデータ等を記憶しておく装置である。媒体駆動装置４１４は、可搬型記録媒体４１６に書き込みおよび読み出しを行うための装置である。ＣＰＵ４０２は、可搬型記録媒体４１６に記録されている所定の制御プログラムを、媒体駆動装置４１４を介して読み出して実行することによって、各種の制御処理を行うようにすることもできる。可搬型記録媒体４１６は、例えばＣｏｍｐａｃｔＤｉｓｃ（ＣＤ）−ＲＯＭ、ＤｉｇｉｔａｌＶｅｒｓａｔｉｌｅＤｉｓｃ（ＤＶＤ）、ＵｎｉｖｅｒｓａｌＳｅｒｉａｌＢｕｓ（ＵＳＢ）メモリ等である。ネットワーク接続装置４１８は、有線または無線により外部との間で行われる各種データの授受の管理を行うインタフェース装置である。バス４１０は、上記各装置等を互いに接続し、データのやり取りを行う通信経路である。

上記実施の形態による画像取得方法をコンピュータに実行させるプログラムは、例えば外部記憶装置４１２に記憶させる。ＣＰＵ４０２は、外部記憶装置４１２からプログラムを読み出し、メモリ４０４を利用してプログラムを実行することで、画像取得の動作を行なう。このとき、まず、画像取得の処理をＣＰＵ４０２に行わせるための制御プログラムを作成して外部記憶装置４１２に記憶させておく。そして、入力装置４０６から所定の指示をＣＰＵ４０２に与えて、この制御プログラムを外部記憶装置４１２から読み出させて実行させるようにする。また、このプログラムは、可搬型記録媒体４１６に記憶するようにしてもよい。

なお、本発明は、以上に述べた実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の構成または実施形態を採ることができる。例えば、上記に説明した画像取得システム１００の構成、およびフローチャートの処理順は、上記に限定されない。同様の作用、効果を奏する変形は可能である。車載システム１では、運行終了後も、車載システム１の電源を例えば所定時間毎に起動させるように設定することで、車両３０の運行時間にかかわらずセンタシステム１２０から必要なフル動画情報を取得できるようにしてもよい。

上記の説明では、画像送信装置の一例として、車載装置３の例を説明したが、これに限定されない。撮影装置と、撮影装置で撮影される画像を受け付ける情報処理装置とが無線通信で接続される例であれば、適用が可能である。例えば、建物、工場などの関し装置としても適用が可能である。このとき、所定事象は、例えば、関し対象の通常の動作と異なる動作として、個別に規定されることが好ましい。所定事象の検出方法についても、個別に設定されることが好ましい。また、車両の識別情報など車両に対応する各情報は、例えば撮影装置の識別情報、撮影装置の位置などに適宜変更することが好ましい。

１車載システム
３車載装置
５車載コンピュータ
６プロセッサ
７スピーカ
９カメラ
１１ジャイロセンサ
１３加速度センサ
１５ＧＰＳ
１７メディア駆動部
１８ＳＤカード
１９入力部
２１第１通信部
２３第２通信部
２５第３通信部
２７メモリ
２９表示部
３０車両
３１アンテナ
３３車速センサ
３５エンジン回転センサ
３７温度センサ
３９ＣＡＮ
５１ＩＯ制御部
５３通信制御部
５５メモリ制御部
５７ＨＭＩ制御部
６１画像処理部
６２第１画像記録部
６３第２画像記録部
６４画像抽出部
６５トリガ検知部
６７運行管理制御部
７２通信網
７４通信網
７５記録処理部
７７記憶装置
７８フル動画情報
８０送信部
８２ミニ動画情報
８４静止画情報
１００画像取得システム
１１０管理者端末
１２０センタシステム
１２３車載通信サーバ
１２５データサーバ
１２７ウエブサーバ
１３１運行情報
１３３画像情報
１３５判定部
１４１ミニ動画情報
１４３静止画情報
１４５フル動画情報
１５１センサ情報
１５２画像（フル動画情報）
１５３発生情報
１５５作業情報
１５９発生項目
１６３他車両
１６５他車両
１６７、１６８白線
１７１画像取得指示部
１７３画面生成部
１７５取得指示画面
１７７画像表示画面
１８１特定時間情報
１９１表示装置
１９３入力キー
１９５テンキー
２０１選択項目一覧
２０３表示例
２１０フル画像記録情報
２１２静止画送信情報
２１４ミニ動画送信情報
２２０取得指示画面
２２２静止画位置
２２４画像種別表示
２２６ミニ動画位置
２２８画像種別表示
２３０画像識別情報
２３５インデックス情報
２３７取得指示画像情報
２２９、５０１、５０３、５１１〜５２４矢印
４００コンピュータ
４０２ＣＰＵ
４０４メモリ
４０６入力装置
４０８出力装置
４１０バス
４１２外部記憶装置
４１４媒体駆動装置
４１６可搬型記録媒体
４１８ネットワーク接続装置

Claims

画像送信装置から送信される動画情報を受け付ける情報処理装置が行う画像取得方法であって、
前記画像送信装置は、撮影装置により撮影される動画像を示す画像信号の第１の時間に対応する画像信号を符号化した第１の動画情報を記憶装置に記録すると共に、所定事象の発生が検出された場合に、前記画像信号の、前記所定事象の検出時刻を含み前記第１の時間の長さよりも短い第２の時間に対応する画像信号を符号化して生成される第２の動画情報を、無線通信網を介して接続される情報処理装置に送信し、
前記画像取得方法は、前記情報処理装置が、
前記第２の動画情報を、前記画像送信装置より無線通信網を介して受け付け、
前記第２の動画情報が利用可能であることを示す情報を出力し、
前記画像信号を符号化して生成される、前記動画像の予め決められたタイミングにおける静止画像を示す静止画情報を、前記静止画情報を識別するための静止画識別情報とともに、前記画像送信装置より無線通信網を介してさらに受け付け、
前記静止画情報が利用可能であることを示す情報を出力し、
前記静止画情報が利用可能であることを示す情報は、前記静止画情報に対応する第１の動画情報の前記静止画識別情報に基づく取得指示を受け付ける取得指示画面を表示させる情報を有し、
前記画像取得方法は、さらに、前記情報処理装置が、
前記取得指示を受け付けると、前記画像送信装置に前記静止画情報に対応する第１の動画情報を出力させる出力要求情報を出力し、
前記出力要求情報を出力する前に、前記画像送信装置の電源状態を取得し、
前記画像送信装置の電源がオフである場合、前記電源をオンさせる要求を出力する
ことを特徴とする画像取得方法。
前記第２の動画情報は、前記第２の動画情報と前記所定事象の発生とを対応付ける所定事象動画識別情報とともに、前記画像送信装置より無線通信網を介して受け付けられる
ことを特徴とする請求項１に記載の画像取得方法。
前記第２の動画情報が利用可能であることを示す情報は、前記第２の動画情報に対応する第１の動画情報の前記所定事象動画識別情報に基づく取得指示を受け付ける取得指示画面を表示させる情報を有し、
前記情報処理装置が、さらに、前記取得指示を受け付けると、前記画像送信装置に前記第２の動画情報に対応する第１の動画情報を出力させる出力要求情報を出力する、
ことを特徴とする請求項２に記載の画像取得方法。
前記情報処理装置が、さらに、前記所定事象動画識別情報に基づく取得指示により、前記第２の動画情報に対応する第１の動画情報を出力させる出力要求情報を用いて特定された第１の動画情報を受け付ける
ことを特徴とする請求項３に記載の画像取得方法。
前記第２の動画情報が利用可能であることを示す情報は、前記検出時刻における前記撮影装置の位置を含む地図上に前記第２の動画情報に対応する画像と、前記撮影装置の識別情報と、前記検出時刻を示す日時情報と、利用可能な画像が所定事象動画であることを示す情報を表示させる情報を含む
ことを特徴とする請求項１から請求項４のいずれか一項に記載の画像取得方法。
前記情報処理装置が、さらに、前記静止画情報に対応する第１の動画情報を出力させる出力要求を用いて特定された第１の動画情報を受けつける
ことを特徴とする請求項１に記載の画像取得方法。
前記静止画情報が利用可能であることを示す情報は、前記タイミングにおける前記撮影装置が備えられる撮影装置の位置を含む地図上に前記静止画情報に対応する画像と、前記撮影装置の識別情報と、前記タイミングを示す日時情報と、利用可能な画像が静止画であることを示す情報を表示させる情報を含む
ことを特徴とする請求項１から請求項６のいずれか一項に記載の画像取得方法。
前記第１の動画情報は、第１の解像度で第１のフレームレートを用いた動画情報であり、
前記第２の動画情報は、前記第１のフレームレートよりも低い第２のフレームレートまたは前記第１の解像度よりも低い第２の解像度のいずれか少なくとも一方を用いた動画情報である
ことを特徴とする請求項１から請求項７のいずれか一項に記載の画像取得方法。
画像送信装置から送信される動画情報の受け付けをコンピュータに行わせる画像取得プログラムであって、
前記画像送信装置は、撮影装置により撮影される動画像を示す画像信号の第１の時間に対応する画像信号を符号化した第１の動画情報を記憶装置に記録すると共に、所定事象の発生が検出された場合に、前記画像信号の、前記所定事象の検出時刻を含み前記第１の時間の長さよりも短い第２の時間に対応する画像信号を符号化して生成される第２の動画情報を、無線通信網を介して接続される情報処理装置に送信し、
前記画像取得プログラムは、
前記第２の動画情報を、前記画像送信装置より無線通信網を介して受け付け、
前記第２の動画情報が利用可能であることを示す情報を出力し、
前記画像信号を符号化して生成される、前記動画像の予め決められたタイミングにおける静止画像を示す静止画情報を、前記静止画情報を識別するための静止画識別情報とともに、前記画像送信装置より無線通信網を介してさらに受け付け、
前記静止画情報が利用可能であることを示す情報を出力する
処理を前記コンピュータに実行させ、
前記静止画情報が利用可能であることを示す情報は、前記静止画情報に対応する第１の動画情報の前記静止画識別情報に基づく取得指示を受け付ける取得指示画面を表示させる情報を有し、
前記画像取得プログラムは、さらに、
前記取得指示を受け付けると、前記画像送信装置に前記静止画情報に対応する第１の動画情報を出力させる出力要求情報を出力し、
前記出力要求情報を出力する前に、前記画像送信装置の電源状態を取得し、
前記画像送信装置の電源がオフである場合、前記電源をオンさせる要求を出力する
処理を前記コンピュータに実行させる、
画像取得プログラム。