JP5142904B2 - データ収集システム - Google Patents

Description

本発明は撮像手段により撮像した画像データや録音手段により録音した音声データを用いて、検索対処物の検索に用いるための比較用データを補充することが可能なデータ収集システムに関する。

車両に搭載して用いるいわゆるドライブレコーダーは、さまざまなものが提案されている。このようなドライブレコーダーにより記録したデータは、交通事故発生時等において、その前後における周辺状況等を記録する上で有用であり好適に用いられている。このようなドライブレコーダーは交通事故により車両が破損してしまったり、発火してしまった場合であっても、ドライブレコーダーから記録データが抽出可能であることが望まれている。このようなドライブレコーダーとしては、例えば特許文献１に開示されているようなドライブレコーダーが知られている。
特開２００６−１６８７１７号公報

現在普及している大部分のドライブレコーダーは、交通事故発生時の前後における画像データや音声データのみを記録するいわゆるトリガー記録方式が採用されている。ドライブレコーダーにおける撮像手段や録音手段は、常時画像データや音声データを記録しているため、ほとんどのデータが使用されないまま破棄されているのが現状である。

また、実際にドライブレコーダーが装着されている車両は、トラックやバス、タクシー等のいわゆる運転業務のプロフェッショナルが運転する車両であることが多いため、ドライブレコーダーによるデータの記録機会はきわめて少なく、ほとんどのデータは有効利用されていないという課題がある。

そこで本願発明は、データ収集端末がトリガー記録時以外において収集した画像データや音声データをデータ収集管理局に集積し、日常生活において有用なデータを収集することが可能なデータ収集システムを提供することを目的としている。

本願発明は、撮像手段と、録音手段と、位置情報を取得する位置情報取得手段と、時間情報を取得する時間情報取得手段と、前記撮像手段により撮像された画像データおよび前記録音手段により録音された録音データを一時的に記憶する第１記憶手段と、使用者が操作することにより、前記第１記憶手段に記憶されている画像データおよび録音データを予め定められた所要範囲にわたって抽出するデータ抽出スイッチと、前記第１記憶手段から抽出された画像データおよび録音データからなる抽出データを比較させるための比較用データおよび抽出データ比較プログラムが予め記憶されていると共に、前記抽出データを記憶可能な第２記憶手段と、前記抽出データを、予め設定されたデータ収集管理局に送信可能であると共に、前記データ収集管理局から送信される比較用データが受信可能な通信手段と、前記撮像手段、前記録音手段、前記位置情報取得手段、前記時間情報取得手段、前記第１記憶手段、前記第２記憶手段および前記通信手段の動作をそれぞれ制御する制御部と、を有し、使用者が前記データ抽出スイッチを押下することによって、前記制御部が前記第１記憶手段から画像データおよび音声データからなる抽出データを抽出した後、前記抽出データを前記抽出データ比較プログラムに基づいて、互いの類似度を判断する処理と、前記比較用データと前記抽出データとが、前記抽出データ比較プログラム内において予め定められている類似度を有していない場合には、前記制御部は、前記データ抽出スイッチが押下された時点において前記位置情報取得手段が取得した位置情報および前記時間情報取得手段が取得した時間情報を前記抽出データに追加して比較用データ追加候補データを生成する処理と、当該比較用データ追加候補データを前記第２記憶手段に記憶させる処理をそれぞれ実行し、前記比較用データと前記抽出データとが、前記抽出データ比較プログラム内において予め定められている類似度を有している場合には、前記制御部は、前記データ抽出スイッチが押下された時点において前記位置情報取得手段が取得した位置情報および前記時間情報取得手段が取得した時間情報を前記抽出データに追加して比較用データ追加候補データを生成する処理と、当該比較用データ追加候補データを前記第２記憶手段に記憶させる処理と、前記比較用データ追加候補データを前記データ収集管理局に送信する処理と、をそれぞれ実行するデータ収集端末と、前記データ収集端末と通信可能な通信手段と、前記データ収集端末から送信された第１の記録用画像データから特定情報を抽出する特定情報抽出プログラムと、前記抽出された特定情報を比較するための比較用データとが予め記憶されている記憶手段と、前記特定情報抽出プログラムに基づいて前記第１の記録用画像データから特定情報を抽出すると共に、抽出した特定情報が前記比較用データを含むか否かを確認する特定情報確認手段と、前記通信手段と、前記記憶手段と、前記特定情報確認手段の動作をそれぞれ制御する制御手段と、を有すると共に、前記特定情報確認手段が前記比較用データ追加候補データ内に比較用データを含んでいることが確認できなかった場合には、前記制御手段は、前記比較用データ追加候補データに対する処理を一旦終了し、前記特定情報確認手段が前記比較用データ追加候補データ内に前記比較用データを含んでいることを確認した場合には、前記制御手段は、前記通信手段から前記データ収集端末に特定情報確認の通知を行うと共に、前記比較用データ追加候補データを比較用データ追加用データとして前記データ収集端末に送信する処理を実行するデータ収集管理局と、を具備し、前記データ収集管理局から特定情報確認の通知と、比較用データ追加用データとを受信した前記データ収集端末は、前記制御部により前記第２記憶手段に記憶されている比較用データに前記比較用データ追加用データを追加する処理を実行することを特徴とするデータ収集システムである。

本発明にかかるデータ収集システムによれば、データ収集端末が収集したデータを効率的に使用することができ、身の回りにおける有用なデータベースである比較用データを構築することができる。このような比較用データに基づいてデータ収集端末が収集したデータを必要に応じて比較用データに追加することができるので、比較データにおける時間データや収集位置データを最新の状態に維持することが可能になる。このような比較用データに基づけば、探し物や、インフラの整備状況等の管理において好都合である。

以下、本発明にかかるデータ収集システムの実施形態について、図面に基づいて説明する。図１は、本実施形態におけるデータ収集システムの概略構成を示すブロック図である。図２は、本実施形態におけるデータ収集管理局の概略構成を示すブロック図である。

本実施形態におけるデータ収集システム１００は、既存の捜索対象に関する画像データまたは画像データおよび音声データにより構成される比較用データに常時新しいデータを追加することにより、日常生活において有用な情報網を構築することが可能なものである。本実施形態におけるデータ収集システム１００は、単数または複数の車両に搭載されたデータ収集端末１０と、データ収集端末１０と通信可能に設けられたデータ収集管理局５０とにより構成されている。データ収集端末１０から収集されたデータのうち、一部のデータはデータ収集管理局５０に送信され、データ収集管理局５０において既存の比較用データとの比較を行い、所定の類似度を有しているデータであった場合には、通信手段によりデータ収集端末１０に再配布することで、比較用データが常時最新状態にすることが可能であることを特徴としている。

以下に、データ収集端末１０とデータ収集管理局５０について説明を行う。本実施形態においては、データ収集端末１０により収集されたデータの流れに沿ってデータ収集端末１０とデータ収集管理局５０の説明を行うことにより、データ収集システム１００の説明を行うことにする。

本実施形態におけるデータ収集端末１０は、図１に示すように、撮像手段であるカメラ２０と、録音手段であるマイク２２と、位置情報取得手段であるＧＰＳ装置２４と、時間情報取得手段である時計２６と、これらを収容する本体部３０とに収容され、カメラ２０およびマイク２２より収集された画像データおよび音声データをＧＰＳ装置２４による位置情報と時計２６による時間情報と合わせて記憶する第１記憶手段であるランダムアクセスメモリー３２と、本体部３０に設けられ、使用者が押下した際に、ランダムアクセスメモリー３２の画像データおよび音声データを予め設定された所要の範囲にわたって抽出するデータ抽出スイッチ３４と、外部との通信手段３６と、カメラ２０、マイク２２、ランダムアクセスメモリー３２、データ抽出スイッチ３４および通信手段３６の動作と、第2の記憶手段である記憶部４４の動作をそれぞれ制御するＣＰＵ４２と、を有している。
制御部４０はＣＰＵ４２と記憶部４４とにより構成されている。

本実施形態におけるカメラ２０は、光学レンズとイメージセンサとにより構成されている。カメラ２０は通信ケーブルを介してデータ収集端末１０の本体部３０に接続されている。カメラ２０が撮像した画像データおよびマイク２２が記録した録音データは、本体部３０に内蔵されているランダムアクセスメモリー３２に記憶される。画像データについては、フレーム毎にＧＰＳ装置２４が検出した撮像位置等の情報と、時計２６が検出した撮像時間情報とが付加された状態で、音声データについては、時計２６が検出した録音時間情報が付加された状態で記憶される。ランダムアクセスメモリー３２の記憶容量は、カメラ２０が撮像した画像データの容量と、データ抽出スイッチ３４の操作によりデータを抽出する範囲に対応した十分余裕のある容量が確保されているのは当然である。

ランダムアクセスメモリー３２には、カメラ２０により撮像された画像データが時系列に沿って順次記憶される画像データ領域３２ａと、マイク２２により録音された音声データが時系列的に沿って順次記憶される音声データ領域３２ｂとを有している。本実施形態においては１つのランダムアクセスメモリー３２を、画像データ領域３２ａと音声データ領域３２ｂとに区分して用いているが、画像データと音声データのそれぞれに対して個別のランダムアクセスメモリーを設けることももちろんできる。
画像データ領域３２ａおよび音声データ領域３２ｂにカメラ２０からの画像データおよびマイク２２からの音声データを次々と記憶させると、それぞれの領域３２ａ，３２ｂの記憶可能容量が減少し、やがて新しいデータを記憶させることができなくなる。このような状態においては、新たに記憶させるべき画像データおよび音声データは、それぞれの領域３２ａ，３２ｂ内において最も記憶させた時間の古いデータに用いている記憶領域に上書きする処理を行っている。このように本実施形態においては、ランダムアクセスメモリー３２をいわゆるリングバッファ状にして用いている。

本実施形態における制御部４０の記憶部４４には、ランダムアクセスメモリー３２の画像データ領域３２ａおよび音声データ領域３２ｂからデータを送信させる際の条件であるデータ抽出範囲条件ＣＨＪおよびデータ収集装置１０の制御プログラムＰＧＭが予め記憶されている。データ抽出条件ＤＣＪは、ランダムアクセスメモリー３２に記憶されている画像データおよび音声データを記憶部４４に記憶させるタイミングを規定するトリガー条件ＴＧＪと、トリガー条件ＴＧＪを満たしたタイミングを基準位置として、基準位置の前後における画像データおよび音声データの抽出範囲を規定するデータ抽出範囲条件ＣＨＪと、を少なくとも含んでいる。
以下に、各条件について詳細に説明する。

本実施形態におけるトリガー条件ＴＧＪは、車両に配設された加速度検出手段や衝撃検出手段により検出された加速度および衝撃値や、ステアリング操作の回転加速度等により構成される車両の挙動データの値が、設定値を超えた場合にトリガーを発生するように構成されている。また、使用者が入力手段および設定ソフト（共に図示せず）を用いてトリガー条件ＴＧＪを任意の設定値に変更することも可能である。

データ抽出範囲条件ＣＨＪは、上記のトリガー条件ＴＧＪにより規定された条件を満たしたタイミングを基準位置として、基準位置を含み基準位置の前後における画像データおよび音声データの抽出範囲を規定するためのものである。本実施形態においては基準位置の前後それぞれ数秒間をデータ抽出範囲に設定している。本実施形態におけるデータ抽出範囲は、基準位置の前後（トリガー発生タイミングの前後）においてそれぞれ同じ時間幅に設定しているが、基準位置の前後のいずれかに重要な情報が存在することが予想される場合等においては、基準位置の前後においてデータを抽出する時間の範囲を異ならせる設定にしてもよい。データ抽出範囲条件ＣＨＪについても、使用者が設定ソフトを用いて任意の条件に設定することが可能である。

カメラ２０およびマイク２２により撮像された画像データおよび音声データは、前述のとおり、一旦ランダムアクセスメモリー３２に記憶される。車両に装着された車両挙動検出センサによる車両の挙動データの値が、トリガー条件ＴＧＪを満たすと、ＣＰＵ４２がトリガーを発生し、ランダムアクセスメモリー３２から抽出すべきデータの基準位置が決定する。画像データおよび音声データは、時間情報が付与された状態でランダムアクセスメモリー３２に記憶されているので、基準位置が決定すれば、データ抽出範囲条件ＣＨＪにより、基準位置を含む前後の所要時間の範囲にわたってランダムアクセスメモリー３２内の画像データおよび音声データが抽出される。抽出された画像データおよび音声データは、それぞれに対応する位置情報と時間情報と共にトリガー条件抽出データＴＣＤとして順次記憶部４４に記録されることになる。以上の処理は、いわゆる通常のトリガー記録方法である。

本実施形態におけるデータ収集装置１０は、制御部４０の記憶部４４に予め設定されているトリガー条件ＴＧＪ以外においても、ランダムアクセスメモリー３２に記憶させている画像データおよび音声データを抽出することができる。具体的には、データ収集装置１０が搭載されている車両の乗員である使用者（主に運転手）が本体部３０に配設されたデータ抽出スイッチ３４を操作し、データ抽出スイッチ３４が押下された際に、予め記憶部４４に記憶されている抽出条件ＣＪに基づいてランダムアクセスメモリー３２から画像データおよび音声データを抽出することが可能に設定されている。
本実施形態における記憶部４４には、抽出条件の他にも、抽出したデータを比較するための比較用データＨＤおよび抽出データＣＤと比較用データの類似度を求める抽出データ比較プログラムＰＧＭ２が予め記憶されている。記憶部４４には不揮発型のメモリー（例えばハードディスク装置や半導体メモリー）が好適に用いられる。

使用者が車両運行中において外部状況の異変に気がついた場合や、使用者が予め知っている捜索対象物に似ている対象物に気が付いた場合等に、使用者がデータ抽出スイッチ３４を押下すると、制御部４０のＣＰＵ４２にランダムアクセスメモリー３２内の画像データおよび音声データを抽出するデータ抽出指示が送信される。ＣＰＵ４２がデータ抽出指示を受信すると、ＣＰＵ４２は、記憶部４４に記憶されている抽出条件ＣＪに沿ってランダムアクセスメモリー３２から画像データと音声データをそれぞれ抽出する。続いてＣＰＵ４２は、抽出データＣＤを構成する画像データと音声データのそれぞれに、データ抽出スイッチ３４が押下された時点においてＧＰＳ装置２４および時計２６がそれぞれ取得した位置情報と時間情報とを追加することにより、比較用データ追加候補データＨＴＤを生成する。これに続いてＣＰＵ４２は、比較用データ追加候補データＨＴＤを記憶部４４に記憶させる。

さらにＣＰＵ４２は、抽出データ比較プログラムＰＧＭ２に基づいて、抽出データＣＤのうちの画像データと記憶部４４に予め記憶されている比較用データＨＤと比較を行い、互いの画像データの類似度を算出する。
抽出データＣＤの画像データと比較用データＨＤとの比較を行う際には、抽出データＣＤの画像データを構成するフレームデータのうち、最も比較用データの構図と近い構図であるフレームデータを用いている。本実施形態においては、抽出データＣＤの画像データのフレームデータと比較用データＨＤとの類似度は、公知の画像処理方法に基づいてフレームデータのピクセル、輝度、彩度等の一致度に基づいて類似度を予め設定した指標によって表現している。

記憶部４４には予め抽出データＣＤをデータ収集管理局５０に送信するか否かを判断するための類似度閾値ＲＩが記憶されているので、抽出データ比較プログラムＰＧＭ２に基づいて算出された抽出データＣＤと比較用データＨＤとの類似度が類似度閾値ＲＩを超えていた場合には、通信手段３６を介して予め設定されたデータ収集管理局５０に記憶部４４に記憶させておいた比較用データ追加候補データＨＴＤを送信する処理を実行する。これに対して、抽出データＣＤと比較用データＨＤとの類似度が類似度閾値ＲＩを超えていない場合には、特別な処理は行われず、抽出データＣＤに対する処理は一旦終了されることになる。

データ収集管理局５０は、図２に示すように、単数または複数のデータ収集端末１０と通信可能な通信手段５２と、データ収集端末１０から送信されてきたデータから予め指定されている特定情報を抽出するための特定情報抽出プログラムＰＧＭ３が記憶されていて、かつ、新たなデータが記憶可能な記憶手段５４と、特定情報抽出プログラムＰＧＭ３により抽出された特定情報が予め記憶手段５４に記憶されている比較用データを含むか否かを確認する特定情報確認手段と、通信手段５２、記憶手段５４、特定情報確認手段の動作を制御する制御手段であるＣＰＵ５６と、を有している。本実施形態における特定情報確認手段はＣＰＵ５６により実現されている。

データ収集管理局５０は、データ収集端末１０から送信され、記憶手段５４に記憶された比較用データ追加候補データＨＴＤについて、データ収集端末１０において行った画像データ処理よりもさらに詳細にデータの分析を行う。具体的には、データ収集管理局５０の特定情報確認手段（ＣＰＵ５６）が、画像処理プログラムである特定情報抽出プログラムＰＧＭ３に基づいて、記憶手段５４に予め記憶されている特定情報ＴＪ（比較用データの具体的な内容）が比較用データ追加候補データＨＴＤに含まれているか否かについての確認を行う。ここでも公知の画像処理方法を採用することができるが、データ収集端末１０においてなされた画像処理方法よりもさらに詳細な画像処理方法によって画像処理を行う。これにより、特定情報ＴＪに対して比較用データ追加候補データＨＴＤが似ているか否かといった類似度による判断ではなく、比較用データ追加候補データＨＴＤ内に特定情報ＴＪが含まれているか否かといった、厳密な判断をすることができる。

データ収集管理局５０の特定情報確認手段であるＣＰＵ５６において、比較用データ追加候補データＨＴＤ内に特定情報ＴＪが含まれていると判断された場合には、ＣＰＵ５６は、比較用データ追加候補データＨＴＤを比較用データ追加データＴＤとして、通信手段５２を介してデータ収集管理局５０に通信可能な全てのデータ収集端末１０にデータ配信を行う処理を実行する。
これに対して、比較用データ追加候補データＨＴＤ内に特定情報が含まれていないと判断された場合には、ＣＰＵ５６は、比較用データ追加候補データＨＴＤを送信してきたデータ収集端末１０のみに対して、送信されてきた比較用データ追加候補データＨＴＤには、特定情報が含まれていなかった旨が通知される。

データ収集管理局５０から比較用データ追加データＴＤが送信された場合、データ収集端末１０のＣＰＵ４２は、記憶部４４に記憶されている比較用データＨＤに比較用データ追加データＴＤを追加し、記憶部４４に記憶されている比較用データ追加候補データＨＴＤを削除する処理を実行する。記憶部４４の比較用データＨＤに比較用データ追加データＴＤを追加するまでの間とこれ以降におけるカメラ２０およびマイク２２によるデータ収集は継続して行われている。
これに対し、データ収集管理局５０から、比較用データ追加候補データＨＴＤには特定情報が含まれていなかった旨が通知されたデータ収集端末１０においては、特別な処理は行われず、カメラ２０およびマイク２２によるデータ収集が継続して行われる。

以上に説明した処理を繰り返し実行することにより、使用者がデータ抽出スイッチ３４を操作することにより収集された抽出データＣＤは、データ収集端末１０において比較用データＨＤとの類似度を算出し、比較用データＨＤにある程度類似する抽出データＣＤ（画像データおよび音声データ）のみをデータ収集管理局５０に比較用データ追加候補データＨＴＤとして送信し、データ収集管理局５０においてさらに詳細に比較用データ追加候補データＨＴＤを画像解析し、比較用データ追加候補データＨＴＤに比較用データＨＤにおける特定情報ＴＪが含まれている場合のみに、比較用データＨＤに既に含まれているデータの補助的なデータとなる比較用データ追加データＴＤとしてデータ収集端末１０に送信され、各々のデータ収集端末１０内の記憶部４４における比較用データＨＤに比較用データ追加データＴＤを追加処理することで、信頼性の高い比較用データＨＤを構築することができる。
このように、比較用データＨＤを随時更新することができるため、それぞれのデータ収集端末１０における抽出データＣＤの類似度の判断材料が増えることになり、データ収集端末１０における類似度の判断精度も向上するため、データ収集管理局５０の負担を大幅に軽減させることができる。すなわち、データ収集システム１００を簡易な構成にすることができるため、データ収集システム１００の提供コストを安価にすることが可能になる。

これに対して、データ収集管理局５０において、比較用データ追加候補データＨＴＤ内に特定情報が含まれていないと判断された場合には、データ収集端末１０にはその旨の通知が届くだけであり、記憶部４４に記憶させてある比較用データ追加候補データＨＴＤに対して特別な処理がなされないが、このような比較用データ追加候補データＨＴＤは、たまたまデータ収集端末１０において比較用データＨＤと類似するという画像解析結果が得られただけであり、使用者が単に必要であると判断して収集されたデータである可能性がある。このような比較用データ追加候補データＨＴＤは、使用者により通信手段３６を介して再度データ収集管理局５０に比較用データ追加候補データＨＴＤを送信して、比較用データＨＤにおける新規データとして追加することを検討してもよい。

以上に、本願発明にかかるデータ収集端末１０およびこれを用いたデータ収集システム１００について実施形態に基づいて詳細に説明してきたが、本願発明は以上に示した実施形態に限定されるものではない。例えば、以上の実施形態においては、抽出データＣＤは画像データと音声データとにより構成されているが、データ収集端末１０およびデータ収集管理局５０においては、抽出データＣＤと比較用データＨＤとの類似度または一致度を判断する際に画像データのみを用いて判断しているが、画像データのみならず音声データを含めて比較用データＨＤと抽出データＣＤとの類似度および一致度を判断してもよいのはもちろんである。音声データを用いる場合には、データ収集端末１０におけるＣＰＵ４２にかかる負荷が高くなりすぎてしまうため、データ収集管理局５０においてのみ採用することが好適である。
抽出データＣＤを音声データを含めて比較用データＨＤとの類似度および一致度を判断する場合には、音声データの周波数特性（ソナグラム）を公知の手法を用いて解析することにより、音声データとしての類似度や一致度を判断することができる。

また、以上の実施形態においては、使用者がデータ抽出スイッチ３４を操作して収集した抽出データＣＤは、比較用データＨＤとの類似度や一致度について解析されることにより、比較用データＨＤに追加するか否かについて判断されているが、使用者が新たに比較用データＨＤに追加すべきデータとして抽出スイッチ３４を操作した場合においてランダムアクセスメモリー３２から抽出された抽出データＣＤは、比較用データＨＤに対して何ら類似することがなくなる。このように、抽出データＣＤが比較用データＨＤと類似度が全くないと判断された場合（または、データ収集端末１０において判断された類似度が予め設定されている閾値以下である場合）においては、その抽出データＣＤを新規追加用データとして記憶部４４に記憶させておくこともできる。この新規追加用データは、直ちにデータ収集管理局５０に送信してもよいし、後に使用者により通信手段３６を介して記憶部４４からデータ収集管理局５０に送信するようにしてもよいのはもちろんである。

また、以上の実施形態においては、トリガー条件ＴＧＪによりランダムアクセスメモリー３２から抽出されたトリガー条件抽出データＴＣＤと、使用者による抽出スイッチ３４の操作によりランダムアクセスメモリー３２から抽出された比較用データ追加候補データＨＴＤと比較用データ追加データＴＤを制御部４０の記憶部４４に記憶させる形態について説明しているが、これらのデータは、記憶部４４とは別体に設けたられた可搬式の記録媒体に記憶させておくことももちろん可能である。この構成を採用することにより、データ収集端末１０から以上のデータを抽出する際には、直接可搬式の記録媒体を直接データ収集端末１０から取り出すことで対応することができるため、データ通信手段を使用する必要がなくなり、データ通信時における電力使用量等のランニングコストを低下させることができるため好都合である。

本実施形態におけるデータ収集システムの概略構成を示すブロック図である。 本実施形態におけるデータ収集管理局の概略構成を示すブロック図である。

符号の説明

１０ データ収集端末
２０ カメラ
２２ マイク
２４ ＧＰＳ装置
２６ 時計
３０ 本体部
３２ ランダムアクセスメモリー
３２ａ 画像データ領域
３２ｂ 音声データ領域
３４ データ抽出スイッチ
３６ 通信手段
４０ 制御部
４２ ＣＰＵ
４４ 記憶部
５０ データ収集管理局
５２ 通信手段
５４ 記憶手段
５６ 制御手段
１００ データ収集システム
ＤＣＪ データ抽出条件
ＴＧＪ トリガー条件
ＣＨＪ データ抽出範囲条件
ＰＧＭ 制御プログラム
ＴＣＤ トリガー条件抽出データ
ＣＪ 抽出条件
ＨＤ 比較用データ
ＰＧＭ２ 抽出データ比較プログラム
ＣＤ 抽出データ
ＨＴＤ 比較用データ追加候補データ
ＲＩ 類似度閾値
ＰＧＭ３ 特定情報抽出プログラム
ＴＪ 特定情報
ＴＤ 比較用データ追加データ

Claims (1)

1. 撮像手段と、
   録音手段と、
   位置情報を取得する位置情報取得手段と、
   時間情報を取得する時間情報取得手段と、
   前記撮像手段により撮像された画像データおよび前記録音手段により録音された録音データを一時的に記憶する第１記憶手段と、
   使用者が操作することにより、前記第１記憶手段に記憶されている画像データおよび録音データを予め定められた所要範囲にわたって抽出するデータ抽出スイッチと、
   前記第１記憶手段から抽出された画像データおよび録音データからなる抽出データを比較させるための比較用データおよび抽出データ比較プログラムが予め記憶されていると共に、前記抽出データを記憶可能な第２記憶手段と、
   前記抽出データを、予め設定されたデータ収集管理局に送信可能であると共に、前記データ収集管理局から送信される比較用データが受信可能な通信手段と、
   前記撮像手段、前記録音手段、前記位置情報取得手段、前記時間情報取得手段、前記第１記憶手段、前記第２記憶手段および前記通信手段の動作をそれぞれ制御する制御部と、を具備すると共に、
   使用者が前記データ抽出スイッチを印加することによって、前記制御部が前記第１記憶手段から画像データおよび音声データからなる抽出データを抽出した後、前記抽出データを前記抽出データ比較プログラムに基づいて、互いの類似度を判断する処理と、
   前記比較用データと前記抽出データとが、前記抽出データ比較プログラム内において予め定められている類似度を有していない場合には、前記制御部は、前記データ抽出スイッチが印加された時点において前記位置情報取得手段が取得した位置情報および前記時間情報取得手段が取得した時間情報を前記抽出データに追加して比較用データ追加候補データを生成する処理と、当該比較用データ追加候補データを前記第２記憶手段に記憶させる処理をそれぞれ実行し、
   前記比較用データと前記抽出データとが、前記抽出データ比較プログラム内において予め定められている類似度を有している場合には、前記制御部は、前記データ抽出スイッチが印加された時点において前記位置情報取得手段が取得した位置情報および前記時間情報取得手段が取得した時間情報を前記抽出データに追加して比較用データ追加候補データを生成する処理と、当該比較用データ追加候補データを前記第２記憶手段に記憶させる処理と、前記比較用データ追加候補データを前記データ収集管理局に送信する処理と、をそれぞれ実行するデータ収集端末と、
   前記データ収集端末と通信可能な通信手段と、
   前記データ収集端末から送信された第１の記録用画像データから特定情報を抽出する特定情報抽出プログラムと、前記抽出された特定情報を比較するための比較用データとが予め記憶されている記憶手段と、
   前記特定情報抽出プログラムに基づいて前記第１の記録用画像データから特定情報を抽出すると共に、抽出した特定情報が前記比較用データを含むか否かを確認する特定情報確認手段と、
   前記通信手段と、前記記憶手段と、前記特定情報確認手段の動作をそれぞれ制御する制御手段と、を具備すると共に、
   前記特定情報確認手段が前記比較用データ追加候補データ内に比較用データを含んでいることが確認できなかった場合には、前記制御手段は、前記比較用データ追加候補データに対する処理を一旦終了し、
   前記特定情報確認手段が前記比較用データ追加候補データ内に前記比較用データを含んでいることを確認した場合には、前記制御手段は、前記通信手段から前記データ収集端末に特定情報確認の通知を行うと共に、前記比較用データ追加候補データを比較用データ追加用データとして前記データ収集端末に送信する処理を実行するデータ収集管理局と、
   を有し、
   前記データ収集管理局から特定情報確認の通知と、比較用データ追加用データとを受信した前記データ収集端末は、前記制御部により前記第２記憶手段に記憶されている比較用データに前記比較用データ追加用データを追加する処理を実行することを特徴とするデータ収集システム。

Images