JP2019185237A - 解析システム - Google Patents

Abstract

【課題】解析精度を向上することができる解析システムを提供することを目的とする。【解決手段】解析システム１は、移動体Ｖに搭載され、当該移動体Ｖの移動に伴って撮像された当該移動体Ｖの外部の画像を表す第１画像データ、及び、移動体Ｖの外部の画像が撮像された位置を表す第１位置データを含む第１解析用データを収集する移動体解析データ収集装置１０と、移動体解析データ収集装置１０によって収集された第１解析用データに基づいて、第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析するデータ解析装置２０とを備える。【選択図】図１

Description

本発明は、解析システムに関する。

従来の解析システムとして、例えば、特許文献１には、集計装置が開示されている。この集計装置は、第１〜第３の撮影装置によって撮影された画像データに基づいて、店舗付近の通行人の人数、店舗へ入店する人数、店舗内において商品を購入する人数を検出し、それぞれ検出した人数を所定の時間単位別に集計する。

特開２００７−０１１７２３号公報

ところで、上述のような解析システムは、例えば、解析精度の向上の点で更なる改善の余地がある。

本発明は、上記の事情に鑑みてなされたものであって、解析精度を向上することができる解析システムを提供することを目的とする。

上記目的を達成するために、本発明に係る解析システムは、移動体に搭載され、当該移動体の移動に伴って撮像された当該移動体の外部の画像を表す第１画像データ、及び、前記移動体の外部の画像が撮像された位置を表す第１位置データを含む第１解析用データを収集する移動体解析データ収集装置と、前記移動体解析データ収集装置によって収集された前記第１解析用データに基づいて、前記第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析するデータ解析装置とを備えることを特徴とする。

また、上記解析システムでは、前記データ解析装置は、前記第１画像データが表す複数の画像から人物の属性を特定可能である当該人物の特徴点を含む画像を抽出し、当該抽出した画像に基づいて当該画像に含まれる人物の属性を解析するものとすることができる。

また、上記解析システムでは、前記移動体解析データ収集装置は、さらに、前記移動体の内部の画像を表す第２画像データ、及び、前記移動体の内部の画像が撮像された位置を表す第２位置データを含む第２解析用データを収集し、前記データ解析装置は、さらに、前記移動体解析データ収集装置によって収集された前記第２解析用データに基づいて、前記第２画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析するものとすることができる。

また、上記解析システムでは、路上に設置された固定体に搭載され、当該固定体に搭載された状態で撮像された当該固定体の外部の画像を表す第３画像データ、及び、前記固定体の外部の画像が撮像された位置を表す第３位置データを含む第３解析用データを収集する固定体解析データ収集装置を備え、前記データ解析装置は、さらに、前記固定体解析データ収集装置によって収集された前記第３解析用データに基づいて、前記第３画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析するものとすることができる。

また、上記解析システムでは、前記移動体は、予め定められた経路を繰り返し走行するものであるものとすることができる。

また、上記解析システムでは、前記データ解析装置は、当該データ解析装置によって解析された解析結果を表す解析結果データを蓄積する記憶部を含むものとすることができる。

また、上記解析システムでは、前記データ解析装置によって解析される人物の属性は、性別、年齢、体格、社会的地位、嗜好、又は、行動志向を含むものとすることができる。

本発明に係る解析システムは、データ解析装置によって第１解析用データに基づいて第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析することができる。この場合に、解析システムは、第１解析用データを構成する第１画像データ、及び、第１位置データを、移動体に搭載された移動体解析データ収集装置によって移動体の移動に伴って収集することができる。この結果、この解析システムは、データ解析装置による解析に用いることができる第１解析用データの収集量を相対的に多く確保することができるので、解析精度を向上することができる、という効果を奏する。

図１は、実施形態１に係る解析システムの概略構成を表すブロック図である。 図２は、実施形態１に係る解析システムにおいて解析され加工された解析結果データの一例を表す模式図である。 図３は、実施形態１に係る解析システムにおける処理の一例を表すフローチャート図である。 図４は、実施形態２に係る解析システムの概略構成を表すブロック図である。 図５は、実施形態３に係る解析システムの概略構成を表すブロック図である。

以下に、本発明に係る実施形態を図面に基づいて詳細に説明する。なお、この実施形態によりこの発明が限定されるものではない。また、下記実施形態における構成要素には、当業者が置換可能かつ容易なもの、あるいは実質的に同一のものが含まれる。

［実施形態１］
図１に示す本実施形態の解析システム１は、移動体解析データ収集装置としての記録装置１０と、データ解析装置としての解析装置２０とを備え、解析装置２０によって解析された解析結果データをクライアント端末ＣＬに提供するシステムである。本実施形態の解析装置２０は、記録装置１０によって収集される画像に基づいて人物の属性、及び、当該属性が特定された人物の人流を解析する。そしてこの場合に、解析システム１は、解析装置２０による解析に用いる解析用データを収集するための装置として、移動体Ｖに搭載された記録装置１０を活用することで、解析精度の向上を図ったものである。以下、各図を参照して解析システム１の構成について詳細に説明する。

記録装置１０は、解析装置２０による解析に用いる第１解析用データを収集するものである。第１解析用データは、画像を表す第１画像データ、及び、当該画像が撮像された位置を表す第１位置データを含むデータである。本実施形態の記録装置１０は、移動体Ｖに搭載される。記録装置１０が搭載される移動体Ｖは、典型的には、路面を走行する車両であり、例えば、自家用車、レンタカー、シェアリングカー、ライドシェアカー、バス、タクシー、トラック、輸送車、作業車等のいずれであってもよい。記録装置１０は、典型的には、複数の移動体Ｖにそれぞれ搭載される。つまり、本実施形態の解析システム１は、複数の移動体Ｖにそれぞれ搭載された複数の記録装置１０を備え、当該複数の記録装置１０から解析用データを収集することが可能である。複数の記録装置１０の少なくとも一部は、予め定められた経路を繰り返し走行する車両、例えば、路線バスや長距離輸送用トラック等に搭載されることが好ましい。そして、記録装置１０は、第１解析用データとして、移動体Ｖの移動に伴って撮像された当該移動体Ｖの外部の画像を表す第１画像データ、及び、移動体Ｖの外部の画像が撮像された位置を表す第１位置データを収集する。記録装置１０は、例えば、移動体Ｖに搭載されるいわゆるドライブレコーダ等の車載機器を用いることができるがこれに限らない。

具体的には、記録装置１０は、外部カメラ１１と、位置情報測定器１２と、データ入出力部１３と、制御部１４とを備える。

外部カメラ１１は、移動体Ｖの外部の画像を撮像する外部撮像装置である。外部カメラ１１は、移動体Ｖの移動に伴って当該移動体Ｖの外部の画像を撮像し、当該移動体Ｖの外部の画像を表す第１画像データを収集する。外部カメラ１１は、典型的には、移動体Ｖの外部の動画像を撮像する。外部カメラ１１は、解析システム１による解析対象である人物、ここでは、移動体Ｖの外部の路上に位置する人物を撮像可能な画角となるように移動体Ｖに設置される。外部カメラ１１は、移動体Ｖから路上の人物をより好適に撮像可能なように、移動体Ｖの前部、側部、後部、屋根部等に複数設けられてもよい。外部カメラ１１は、単眼カメラであってもよいし、ステレオカメラであってもよい。また、外部カメラ１１が撮像する画像は、モノクロであってもよいしカラーであってもよい。外部カメラ１１は、制御部１４と通信可能に接続されており、収集した第１画像データを制御部１４に出力する。

位置情報測定器１２は、移動体Ｖの現在位置を測定する測位器である。位置情報測定器１２は、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ））衛星から送信される電波を受信するＧＰＳ受信器等を用いることができる。位置情報測定器１２は、ＧＰＳ衛星から送信される電波を受信し移動体Ｖの現在位置を表す情報としてＧＰＳ情報（緯度経度座標）を取得することで、移動体Ｖの外部の画像が撮像された位置を表す第１位置データを収集する。位置情報測定器１２は、制御部１４と通信可能に接続されており、収集した第１位置データを制御部１４に出力する。

データ入出力部１３は、記録装置１０とは異なる機器と当該記録装置１０との間で各種データを入出力するものである。本実施形態のデータ入出力部１３は、記録装置１０とは異なる機器である解析装置２０に対して、第１解析用データを出力可能である。データ入出力部１３は、例えば、ネットワークを介した通信（有線、無線を問わない）によって、記録装置１０とは異なる機器との間でデータを入出力する構成であってもよい。また、データ入出力部１３は、例えば、スロット部を有し当該スロット部に差し込まれた記録媒体を介して、記録装置１０とは異なる機器との間でデータを入出力する構成であってもよい。ここで、記録媒体は、例えば、スロット部を介して記録装置１０に脱着可能なメモリ（リムーバブルメディア）である。記録媒体は、例えば、様々な形式のメモリカード、例えばＳＤカードなどを用いることができるがこれに限らない。

制御部１４は、記録装置１０の各部を統括的に制御するものである。制御部１４は、第１解析用データを収集するための種々の演算処理を実行する。制御部１４は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等の中央演算処理装置、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、及び、インターフェースを含む周知のマイクロコンピュータを主体とする電子回路を含んで構成される。制御部１４は、外部カメラ１１、位置情報測定器１２、データ入出力部１３等の各部と通信可能に接続され、各部との間で相互に各種信号、データを授受可能である。

より具体的には、制御部１４は、記憶部１４Ａ、及び、処理部１４Ｂを含んで構成される。記憶部１４Ａ、及び、処理部１４Ｂは、各部との間で相互に各種信号、データを授受可能である。記憶部１４Ａは、処理部１４Ｂでの各種処理に必要な条件や情報、制御部１４で実行する各種プログラムやアプリケーション、制御データ等が格納されている。記憶部１４Ａは、第１解析用データを、収集した時刻等と共に記憶することができる。言い換えれば、第１解析用データは、当該データを収集した時刻を表す時刻データやその他のデータも含む。記憶部１４Ａは、例えば、処理部１４Ｂによる処理の過程で生成される各種データを一時的に記憶することもできる。記憶部１４Ａは、処理部１４Ｂ、データ入出力部１３等によってこれらのデータが必要に応じて読み出される。記憶部１４Ａは、例えば、ハードディスク、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、光ディスクなどの比較的に大容量の記憶装置、あるいは、ＲＡＭ、フラッシュメモリ、ＮＶＳＲＡＭ（Ｎｏｎ Ｖｏｌａｔｉｌｅ Ｓｔａｔｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などのデータを書き換え可能な半導体メモリであってもよい。処理部１４Ｂは、各種入力信号等に基づいて、記憶部１４Ａに記憶されている各種プログラムを実行し、当該プログラムが動作することにより各部に出力信号を出力し各種機能を実現するための種々の処理を実行する。処理部１４Ｂは、外部カメラ１１、位置情報測定器１２の動作を制御し、第１画像データ、第１位置データを含む第１解析用データを収集する処理を実行する。また、処理部１４Ｂは、データ入出力部１３を介したデータの入出力に関わる処理を実行する。処理部１４Ｂは、例えば、第１解析用データを、データ入出力部１３を介して解析装置２０に出力する処理を実行する。

解析装置２０は、記録装置１０によって収集された第１解析用データを解析し、解析結果を表す解析結果データをクライアント端末ＣＬに提供するものである。解析装置２０、及び、クライアント端末ＣＬは、ネットワーク上に実装されるいわゆるクラウドサービス型の装置（クラウドサーバ）を構成してもよいし、ネットワークから切り離されたいわゆるスタンドアローン型の装置を構成してもよい。解析装置２０は、記録装置１０によって収集された第１解析用データに基づいて、当該第１解析用データを構成する第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する。本実施形態の解析装置２０は、当該人物の属性を表す人物属性データ、及び、当該属性が特定された人物の人流を表す属性別人流データを生成する。そして、解析装置２０は、人物属性データ、及び、属性別人流データを含む解析結果データをクライアント端末ＣＬに提供する。

解析装置２０は、第１解析用データに基づいて人物の属性、及び、人物の人流を解析するための種々の演算処理を実行する。解析装置２０は、ＣＰＵ等の中央演算処理装置、ＲＯＭ、ＲＡＭ、及び、インターフェースを含む周知のマイクロコンピュータを主体とする電子回路を含んで構成される。解析装置２０は、既知のＰＣやワークステーションなどのコンピュータシステムに下記で説明する種々の処理を実現させるアプリケーションをインストールすることで構成することもできる。

具体的には、解析装置２０は、データ入出力部２１と、記憶部２２と、処理部２３とを備える。データ入出力部２１、記憶部２２、及び、処理部２３は、各部との間で相互に各種信号、データを授受可能である。

データ入出力部２１は、解析装置２０とは異なる機器と当該解析装置２０との間で各種データを入出力するものである。本実施形態のデータ入出力部２１は、解析装置２０とは異なる機器である記録装置１０から第１解析用データを入力可能である。さらに、本実施形態のデータ入出力部２１は、解析装置２０とは異なる機器であるクライアント端末ＣＬに対して解析結果データを出力可能である。データ入出力部２１は、データ入出力部１３と同様に、例えば、ネットワークを介した通信（有線、無線を問わない）によって、解析装置２０とは異なる機器との間でデータを入出力する構成であってもよい。同様に、データ入出力部２１は、例えば、スロット部を有し当該スロット部に差し込まれた記録媒体を介して、解析装置２０とは異なる機器との間でデータを入出力する構成であってもよい。

記憶部２２は、処理部２３での各種処理に必要な条件や情報、処理部２３で実行する各種プログラムやアプリケーション、制御データ等が格納されている。記憶部２２は、データ入出力部２１によって入力された第１解析用データを記憶することができる。記憶部２２は、例えば、処理部２３による処理の過程で生成される各種データを一時的に記憶することもできる。記憶部２２は、データ入出力部２１、処理部２３等によってこれらのデータが必要に応じて読み出される。記憶部２２は、例えば、ハードディスク、ＳＳＤ、光ディスクなどの比較的に大容量の記憶装置、あるいは、ＲＡＭ、フラッシュメモリ、ＮＶＳＲＡＭなどのデータを書き換え可能な半導体メモリであってもよい。

より具体的には、記憶部２２は、機能概念的に、解析対象データベース（以下、「解析対象ＤＢ」と略記する。）２２Ａ、解析参照データベース（以下、「解析参照ＤＢ」と略記する。）２２Ｂ、及び、解析結果データベース（以下、「解析結果ＤＢ」と略記する。）２２Ｃを含んで構成される。

解析対象ＤＢ２２Ａは、処理部２３による解析対象データである第１解析用データ（第１画像データ、第１位置データ、時刻データ等）を蓄積しデータベース化して記憶する部分である。記録装置１０からデータ入出力部２１に入力された第１解析用データは、この解析対象ＤＢ２２Ａに記憶される。

解析参照ＤＢ２２Ｂは、処理部２３による第１解析用データの解析の際に参照する解析参照データを蓄積しデータベース化して記憶する部分である。解析参照データは、例えば、地図参照データ、属性予測参照データ等を含む。地図参照データは、第１位置データ等に基づいて移動体Ｖの位置、言い換えれば、移動体Ｖの外部の画像が撮像された位置を特定する際に参照する地図を表すデータである。属性予測参照データは、第１画像データが表す画像に含まれる人物の属性の推定等に参照するデータである。属性予測参照データについては、後で詳細に説明する。解析参照データは、処理部２３によって第１解析用データの解析の際に参照される。

解析結果ＤＢ２２Ｃは、処理部２３による第１解析用データの解析結果を表す解析結果データを蓄積しデータベース化して記憶する部分である。解析結果データは、例えば、第１画像データが表す画像に含まれる人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データ等を含む。解析結果データは、処理部２３によって所望の形式に加工されて、データ入出力部２１からクライアント端末ＣＬに出力、提供される。

なお、解析対象ＤＢ２２Ａ、解析参照ＤＢ２２Ｂ、解析結果ＤＢ２２Ｃに記憶される各種データは、いわゆるビッグデータ（ｂｉｇ ｄａｔａ）として活用することができる。

処理部２３は、各種入力信号等に基づいて、記憶部２２に記憶されている各種プログラムを実行し、当該プログラムが動作することにより第１解析用データを解析するための種々の処理を実行する。また、処理部２３は、解析結果データを所望の形式に加工する処理を実行する。また、処理部２３は、データ入出力部２１を介したデータの入出力に関わる処理を実行する。処理部２３は、例えば、所望の形式に加工された解析結果データを、データ入出力部２１を介してクライアント端末ＣＬに出力する処理を実行する。

より具体的には、処理部２３は、機能概念的に、データ前処理部２３Ａ、データ解析処理部２３Ｂ、及び、データ加工処理部２３Ｃを含んで構成される。

データ前処理部２３Ａは、解析対象データである第１解析用データに対して種々の前処理を施す部分である。データ前処理部２３Ａは、前処理として、例えば、解析対象ＤＢ２２Ａから解析対象データとなる第１解析用データを読み出し、当該第１解析用データに含まれる第１画像データが表す動画像から静止画像を切り出す処理を実行する。また、データ前処理部２３Ａは、前処理として、例えば、切り出した当該静止画像と、解析対象データとなる第１解析用データに含まれる第１位置データが表す位置とを紐付する処理を実行する。また、データ前処理部２３Ａは、前処理として、種々の公知の画像処理技術を用いて、切り出した静止画像から人物を検出し抽出する。また、データ前処理部２３Ａは、第１画像データが表す複数の画像から当該人物の特徴点を含む画像を抽出する処理を実行する。ここで、当該人物の特徴点とは、画像に含まれる人物において当該人物の属性を特定可能な部位である。当該人物の特徴点とは、例えば、当該人物の表情が現われる顔、しぐさ・ジェスチャが現れる手足、アクセサリ等が装着されやすい傾向にある位置等の部位である。本実施形態の第１画像データは、移動体Ｖに搭載された記録装置１０によって当該移動体Ｖの移動に伴って収集されたものであるため、同一の人物に対して異なる角度から撮像した画像が多数含まれる可能性が高い。このことを利用し、データ前処理部２３Ａは、移動体Ｖの移動に伴って異なる角度から撮像された多数の画像から、人物の属性特定に用いることができる当該人物の特徴点が写った画像を抽出することで、人物の属性特定に用いるデータをできる限り多数確保する。

データ解析処理部２３Ｂは、データ前処理部２３Ａによって前処理が施された第１解析用データに基づいて、第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する部分である。ここでは、データ解析処理部２３Ｂは、例えば、種々の公知の人工知能（Ａｒｔｉｆｉｃｉａｌ Ｉｎｔｅｌｌｉｇｅｎｃｅ）技術や深層学習（Ｄｅｅｐ Ｌｅａｒｎｉｎｇ）技術を用いて第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する処理を実行可能に構成される。

本実施形態のデータ解析処理部２３Ｂは、データ前処理部２３Ａによって第１画像データから抽出された人物の特徴点を含む画像に基づいて、当該画像に含まれる人物の属性を解析する。データ解析処理部２３Ｂは、例えば、解析参照ＤＢ２２Ｂに記憶されている属性予測参照データ（解析参照データ）と、データ前処理部２３Ａによって第１画像データから抽出された画像に含まれる人物の特徴点とに基づいて、当該人物の属性を解析する。ここで、属性予測参照データは、人工知能技術や深層学習技術を用いた様々な手法によって、画像に含まれる人物の特徴点等に応じて推定可能な当該人物の属性を学習した結果が反映される情報である。言い換えれば、属性予測参照データは、画像に含まれる人物の特徴点等に基づいて人物の属性を推定するために、人工知能技術や深層学習技術を用いた様々な手法を用いてデータベース化されたデータである。この属性予測参照データは、逐次更新可能である。属性予測参照データは、例えば、データ解析処理部２３Ｂによる解析結果を表す解析結果データ（人物属性データ）自体を学習のためのデータとすることもできる。

データ解析処理部２３Ｂによって解析される人物の属性としては、典型的には、当該人物の外観の特徴点から解析可能な事項、例えば、当該人物の性別、年齢、体格、社会的地位、嗜好、又は、行動志向等を含む。ここで、性別とは、男性、女性の別を表す属性である。年齢とは、生まれてから現在（その時）までの年月の長さを表す属性である。体格とは、身長、体重、各種寸法等を表す属性である。社会的地位とは、職業（自営業、ビジネスマン、警官、学生、無職、アルバイト）、年収、身分、同行者等を表す属性である。嗜好とは、服装・所持品・ファッションの傾向（カジュアル志向、エレガント志向、ブランド志向、高級志向、ファストファッション志向）、趣味（スポーツ／サブカルチャー／アウトドア／美容等）等を表す属性である。行動志向とは、その時点での気分、興味関心（やりたいこと、行きたいところ）等を表す属性である。つまりここでは、データ解析処理部２３Ｂは、人物の属性として、性別、年齢、体格、社会的地位、嗜好、行動志向等を推定する。

データ解析処理部２３Ｂは、属性予測参照データを参照して、画像に含まれる人物の特徴点に対応する属性（性別、年齢、体格、社会的地位、嗜好、又は、行動志向）を抽出し、抽出した属性を当該画像に映り込んだ人物の属性であるものと推定する。データ解析処理部２３Ｂは、例えば、画像に含まれる人物の特徴点である顔の表情、手足のしぐさ・ジェスチャ、装着されているアクセサリや洋服等に応じて、属性予測参照データを参照し、当該特徴点にあう属性をマッチングし、当該人物の性別、年齢、体格、社会的地位、嗜好、行動志向等の属性を推定する。

そしてさらに、データ解析処理部２３Ｂは、人物の属性が特定された画像データに紐付された位置データに基づいて、上記のようにして属性が特定された人物の人流を解析する処理を実行する。データ解析処理部２３Ｂは、例えば、解析対象ＤＢ２２Ａから、人物の属性が特定された第１画像データに紐付された第１位置データを読み出す。そして、データ解析処理部２３Ｂは、解析参照ＤＢ２２Ｂに記憶されている地図参照データ（解析参照データ）と、読み出した第１位置データとに基づいて、当該属性が特定された人物の人流を解析する。例えば、データ解析処理部２３Ｂは、地図参照データを参照して、当該第１位置データに基づいて当該画像が撮像された位置を特定する。そして、データ解析処理部２３Ｂは、当該第１位置データが表す位置に基づいて、属性が特定された人物の位置を特定し、これを時系列で並べることで人流を特定する。データ解析処理部２３Ｂによって解析される人物の人流は、典型的には、当該人物の各時間帯における分布、移動方向、移動速度、動きの始点・終点等によって表される。つまりここでは、データ解析処理部２３Ｂは、属性が特定された人物の人流として、当該人物の各時間帯における分布、移動方向、移動速度、動きの始点・終点等を推定する。

データ解析処理部２３Ｂは、第１解析用データを解析した解析結果データとして、上記のように解析した人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データを生成する。そして、データ解析処理部２３Ｂは、生成した人物属性データ、及び、属性別人流データを含む解析結果データを解析結果ＤＢ２２Ｃに蓄積しデータベース化して記憶させる。

データ加工処理部２３Ｃは、データ解析処理部２３Ｂによって解析された解析結果データを所望の形式に加工する処理を実行する部分である。データ加工処理部２３Ｃは、解析結果データに含まれる人物属性データ、属性別人流データを所望の形式に加工する。データ加工処理部２３Ｃは、例えば、図２に例示するように、人物属性データ、属性別人流データを含む解析結果データを、いつ、どこに、どんな属性の人が何人いたか等を地図上にプロットしたものや各種グラフ、ダイヤグラム等に加工する。そして、処理部２３は、データ加工処理部２３Ｃによって所望の形式に加工された解析結果データを、データ入出力部２１を介してクライアント端末ＣＬに出力する処理を実行する。クライアント端末ＣＬは、解析装置２０から提供された解析結果データを、例えば、商圏調査、マーケティング、広告、防災・都市計画等の各種用途にて利用可能とする端末である。クライアント端末ＣＬは、例えば、ノート型ＰＣ、デスクトップ型ＰＣ、タブレット型ＰＣ、スマートフォン、携帯端末等によって構成される。

次に、図３のフローチャート図を参照し解析システム１における処理の一例を説明する。

まず、記録装置１０は、移動体Ｖの移動に伴って第１画像データ、第１位置データを含む第１解析用データを収集する（ステップＳ１）。

次に、記録装置１０は、収集した第１解析用データを、データ入出力部１３を介して出力し、解析装置２０のデータ入出力部２１を介して解析装置２０に入力する（ステップＳ２）。解析装置２０に入力された第１解析用データは、解析対象ＤＢ２２Ａに記憶される。

次に、解析装置２０のデータ前処理部２３Ａは、解析対象ＤＢ２２Ａに記憶されている第１解析用データに対して、上述したような種々の前処理を施す（ステップＳ３）。

次に、解析装置２０のデータ解析処理部２３Ｂは、データ前処理部２３Ａによって前処理が施された第１解析用データに基づいて、第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する（ステップＳ４）。

そして、データ解析処理部２３Ｂは、解析結果データとして、人物属性データ、及び、属性別人流データを生成し、解析結果ＤＢ２２Ｃに蓄積しデータベース化して記憶させる（ステップＳ５）。

次に、解析装置２０のデータ加工処理部２３Ｃは、クライアント端末ＣＬ等からの要求に応じて、解析結果ＤＢ２２Ｃに記憶されている解析結果データ（人物属性データ、属性別人流データ）を、図２に例示したような所望の形式に加工する（ステップＳ６）。

そして、解析装置２０の処理部２３は、データ加工処理部２３Ｃによって所望の形式に加工された解析結果データを、データ入出力部２１を介してクライアント端末ＣＬに出力、提供し（ステップＳ７）、一連の処理を終了する。

以上で説明した解析システム１は、解析装置２０によって第１解析用データに基づいて第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析することができる。この場合に、解析システム１は、第１解析用データを構成する第１画像データ、及び、第１位置データを、移動体Ｖに搭載された記録装置１０によって移動体Ｖの移動に伴って収集することができる。この構成により、この解析システム１は、記録装置１０が移動体Ｖによって路上を移動しながら第１解析用データを収集することで、例えば、路上に固定されたデータ収集装置によって第１解析用データを収集する場合と比較して、第１解析用データの収集量を飛躍的に多く確保することができる。また、この解析システム１は、第１画像データが記録装置１０によって移動体Ｖの移動に伴って収集されたものであるため、同一の人物に対して異なる角度から撮像した画像を表す第１画像データを多数収集することができる。この結果、この解析システム１は、解析装置２０による解析に用いることができる第１解析用データの収集量を相対的に多く確保することができるので、解析精度を向上することができる。

また、解析システム１は、例えば、特定のアプリケーション、記入式のアンケート、特定の人物がまとめた資料等を用いて解析用データを収集するような場合と比較して、データの収集対象となる地域に現実に存在する人物から無作為で属性に偏りの少ない第１解析用データを収集することができる。この点でも、この解析システム１は、解析精度を向上することができる。また、解析システム１は、例えば、個人が所有る携帯端末等から直接的に解析用データを収集するような場合と比較して、相対的に高い匿名性が確保された第１解析用データを収集することができる。これにより、解析システム１は、個人情報保護の観点で、相対的に匿名性の高い解析結果データを得ることができる。

以上で説明した解析システム１は、記録装置１０によって移動体Ｖの移動に伴って異なる角度から撮像された多数の画像から、人物の属性特定に用いることができる当該人物の特徴点を含む画像を抽出することで、人物の属性特定に用いることができるデータをできる限り多数確保することができる。この結果、この解析システム１は、さら解析精度を向上することができる。

また、以上で説明した解析システム１は、記録装置１０が搭載される移動体Ｖとして、予め定められた経路を繰り返し走行するものが含まれることが好ましい。この場合、解析システム１は、定められた経路を繰り返し走行する移動体Ｖに搭載された記録装置１０によって、同一の地域において異なる時間帯の第１解析用データを効率的に多数収集することができ、この点でも解析精度を向上することができる。

また、以上で説明した解析システム１は、解析結果データを蓄積する記憶部２２（解析結果ＤＢ２２Ｃ）を含んで構成されるので、例えば、当該解析結果データをビッグデータとして活用し易くすることができる。

一例として、以上で説明した解析システム１は、第１画像データが表す画像に含まれる人物の属性として、性別、年齢、体格、社会的地位、嗜好、行動志向等を推定するので、当該解析結果データを商圏調査、マーケティング、広告、防災・都市計画等の様々な用途で活用することができる。

［実施形態２］
実施形態２に係る解析システムは、第２解析用データも踏まえた解析を行う点で実施形態１とは異なる。以下では、上述した実施形態と同様の構成要素には共通の符号が付されるとともに、共通する構成、作用、効果については、重複した説明はできるだけ省略する（以下同様）。

図４に示す本実施形態に係る解析システム２０１は、記録装置１０にかえて移動体解析データ収集装置としての記録装置２１０を備える点で上述の解析システム１と異なる。解析システム２０１のその他の構成は、当該解析システム１と略同様の構成である。記録装置２１０は、外部カメラ１１、位置情報測定器１２、データ入出力部１３、制御部１４に加えて、さらに、内部カメラ２１５を備える点で上述の記録装置１０と異なる。記録装置２１０のその他の構成は、当該記録装置１０と略同様の構成である。

本実施形態の記録装置２１０は、解析装置２０による解析に用いる解析用データとして第１解析用データに加えて、さらに、第２解析用データを収集するものである。第２解析用データは、移動体Ｖの内部の画像を表す第２画像データ、及び、当該移動体Ｖの内部の画像が撮像された位置を表す第２位置データを含むデータである。記録装置２１０は、第２解析用データとして、当該第２画像データ、及び、当該第２位置データを収集する。当該第２画像データは、上述の内部カメラ２１５によって収集される。

内部カメラ２１５は、移動体Ｖの内部、すなわち、車内の画像を撮像する内部撮像装置である。内部カメラ２１５は、当該移動体Ｖの内部の画像を撮像し、当該移動体Ｖの内部の画像を表す第２画像データを収集する。内部カメラ２１５は、典型的には、移動体Ｖの内部の動画像を撮像する。内部カメラ２１５は、解析システム２０１による解析対象である人物、ここでは、移動体Ｖの車内の乗客等を撮像可能な画角となるように移動体Ｖに設置される。内部カメラ２１５は、移動体Ｖの内部の人物をより好適に撮像可能なように、移動体Ｖの内部の天井部等に複数設けられてもよい。内部カメラ２１５は、単眼カメラであってもよいし、ステレオカメラであってもよい。また、内部カメラ２１５が撮像する画像は、モノクロであってもよいしカラーであってもよい。制御部１４は、この内部カメラ２１５とも通信可能に接続され、相互に各種信号、データを授受可能である。内部カメラ２１５は、収集した第２画像データを制御部１４に出力する。

そして、位置情報測定器１２は、第１位置データに加えて、移動体Ｖの内部の画像が撮像された位置を表す第２位置データも収集する。位置情報測定器１２は、第１位置データに加えて、収集した第２位置データも制御部１４に出力する。

処理部１４Ｂは、第１解析用データを収集する処理に加え、内部カメラ２１５、位置情報測定器１２の動作を制御し、第２画像データ、第２位置データを含む第２解析用データを収集する処理を実行する。また、記憶部１４Ａは、第２解析用データを、収集した時刻等と共に記憶することができる。言い換えれば、第２解析用データは、第１解析用データと同様に、当該データを収集した時刻を表す時刻データやその他のデータも含む。そして、データ入出力部１３は、解析装置２０に対して、第１解析用データに加えて、第２解析用データも出力可能である。処理部１４Ｂは、第２解析用データを、データ入出力部１３を介して解析装置２０に出力する処理を実行する。

そして、本実施形態の解析装置２０は、記録装置２１０によって収集された第１解析用データに加えて、第２解析用データも解析し、解析結果を表す解析結果データをクライアント端末ＣＬに提供する。

データ入出力部２１は、記録装置２１０から、第１解析用データに加えて、第２解析用データを入力可能である。また、解析対象ＤＢ２２Ａは、第１解析用データに加えて、処理部２３による解析対象データである第２解析用データ（第２画像データ、第２位置データ、時刻データ等）も蓄積しデータベース化して記憶する。記録装置２１０からデータ入出力部２１に入力された第２解析用データは、この解析対象ＤＢ２２Ａに記憶される。また、解析参照ＤＢ２２Ｂに記憶されている解析参照データは、処理部２３によって第２解析用データの解析の際にも参照される。

データ前処理部２３Ａは、解析対象データである第２解析用データに対して、第１解析用データと同様に種々の前処理を施す。そして、データ解析処理部２３Ｂは、データ前処理部２３Ａによって前処理が施された第２解析用データに基づいて、第２画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する。データ解析処理部２３Ｂは、上述した第１解析用データに対する解析と同様に第２解析用データの解析を行い、解析結果データとして、第２画像データが表す画像に含まれる人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データを生成する。解析結果ＤＢ２２Ｃは、第１解析用データの解析結果を表す解析結果データと同様に、データ解析処理部２３Ｂによる第２解析用データの解析結果を表す解析結果データも蓄積しデータベース化して記憶する。当該解析結果データは、第２画像データが表す画像に含まれる人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データ等を含む。そして、データ加工処理部２３Ｃは、上記と同様に、当該解析結果データに含まれる人物属性データ、属性別人流データを所望の形式に加工する。そして、処理部２３は、データ加工処理部２３Ｃによって所望の形式に加工された解析結果データを、データ入出力部２１を介してクライアント端末ＣＬに出力、提供する。

以上で説明した解析システム２０１は、解析システム１と同様に、解析装置２０による解析に用いることができる第１解析用データの収集量を相対的に多く確保することができるので、解析精度を向上することができる。

その上でさらに、以上で説明した解析システム２０１は、記録装置２１０によって移動体Ｖの内部の画像を表す第２画像データ、及び、これに対応する第２位置データを含む第２解析用データも収集し、解析装置２０による解析に用いることができる。この結果、解析システム２０１は、移動体Ｖが走行する路上の人物だけでなく移動体Ｖの内部の人物（乗客）の属性や人流を踏まえた解析結果データを得るができ、解析精度をさらに向上することができる。これにより、解析システム２０１は、例えば、当該解析結果データを、バスやタクシーの乗客の属性、乗降位置、乗降前後の人流分析やバスやタクシーの運行・配車の効率化等の用途でも活用することができる。

［実施形態３］
実施形態３に係る解析システムは、第３解析用データも踏まえた解析を行う点で実施形態２とは異なる。

図５に示す本実施形態に係る解析システム３０１は、移動体Ｖに搭載された記録装置２１０の他に、固定体Ｆに搭載された固定体解析データ収集装置としての記録装置３１０を備える点で上述の解析システム２０１と異なる。解析システム３０１のその他の構成は、当該解析システム２０１と略同様の構成である。

本実施形態の記録装置３１０は、路上に設置された固定体Ｆに搭載されるものであり、搭載対象が固定体Ｆである点で上述の記録装置１０（図１参照）や記録装置２１０と異なる。この記録装置３１０の構成は、上述の記録装置１０と略同様の構成であるので、その説明を省略する。このため、以下では、記録装置３１０の各構成は、適宜図１の記録装置１０の構成を参照する。

ここで、本実施形態の記録装置３１０が搭載される固定体Ｆは、路上に据え付けられ固定されたものである。固定体Ｆは、例えば、バス停留所、デジタルサイネージ、自動販販売機、標識、電柱等であってもよいし、記録装置３１０を設置するために設けられた専用の構造体であってもよい。

そして、本実施形態の記録装置３１０は、解析装置２０による解析に用いる解析用データとして、さらに、第３解析用データを収集するものである。第３解析用データは、固定体Ｆに搭載された状態で撮像された当該固定体Ｆの外部の画像を表す第３画像データ、及び、当該固定体Ｆの外部の画像が撮像された位置を表す第３位置データを含むデータである。記録装置３１０は、第３解析用データとして、当該第３画像データ、及び、当該第３位置データを収集する。当該第３画像データは、上述の外部カメラ１１（図１参照）によって収集される。

この場合、外部カメラ１１は、解析システム１による解析対象である人物、ここでは、固定体Ｆの外部の路上の人物を撮像可能な画角となるように固定体Ｆに設置される。外部カメラ１１は、固定体Ｆの外部の路上の人物をより好適に撮像可能なように、固定体Ｆに複数設けられてもよい。外部カメラ１１は、収集した第３画像データを制御部１４に出力する。

そして、位置情報測定器１２（図１参照）は、固定体Ｆの外部の画像が撮像された位置を表す第３位置データを収集する。位置情報測定器１２は、収集した第３位置データを制御部１４に出力する。

処理部１４Ｂ（図１参照）は、外部カメラ１１、位置情報測定器１２の動作を制御し、第３画像データ、第３位置データを含む第３解析用データを収集する処理を実行する。また、記憶部１４Ａ（図１参照）は、第３解析用データを、収集した時刻等と共に記憶することができる。言い換えれば、第３解析用データは、第１解析用データ等と同様に、当該データを収集した時刻を表す時刻データやその他のデータも含む。そして、データ入出力部１３（図１参照）は、解析装置２０に対して、第３解析用データを出力可能である。処理部１４Ｂは、第３解析用データを、データ入出力部１３を介して解析装置２０に出力する処理を実行する。

そして、本実施形態の解析装置２０は、記録装置２１０によって収集された第１解析用データ、第２解析用データに加えて、記録装置３１０よって収集された第３解析用データも解析し、解析結果を表す解析結果データをクライアント端末ＣＬに提供する。

データ入出力部２１は、第１解析用データ、第２解析用データに加えて、記録装置３１０から、第３解析用データを入力可能である。また、解析対象ＤＢ２２Ａは、第１解析用データ、第２解析用データに加えて、処理部２３による解析対象データである第３解析用データ（第３画像データ、第３位置データ、時刻データ等）も蓄積しデータベース化して記憶する。記録装置３１０からデータ入出力部２１に入力された第３解析用データは、この解析対象ＤＢ２２Ａに記憶される。また、解析参照ＤＢ２２Ｂに記憶されている解析参照データは、処理部２３によって第３解析用データの解析の際にも参照される。

データ前処理部２３Ａは、解析対象データである第３解析用データに対して、第１解析用データ、第２解析用データと同様に種々の前処理を施す。そして、データ解析処理部２３Ｂは、データ前処理部２３Ａによって前処理が施された第３解析用データに基づいて、第３画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する。データ解析処理部２３Ｂは、上述した第１解析用データ、第２解析用データに対する解析と同様に第３解析用データの解析を行い、解析結果データとして、第３画像データが表す画像に含まれる人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データを生成する。解析結果ＤＢ２２Ｃは、第１解析用データ、第２解析用データの解析結果を表す解析結果データと同様に、データ解析処理部２３Ｂによる第３解析用データの解析結果を表す解析結果データも蓄積しデータベース化して記憶する。当該解析結果データは、第３画像データが表す画像に含まれる人物の属性を表す人物属性データ、及び、属性が特定された人物の人流を表す属性別人流データ等を含む。そして、データ加工処理部２３Ｃは、上記と同様に、当該解析結果データに含まれる人物属性データ、属性別人流データを所望の形式に加工する。そして、処理部２３は、このデータ加工処理部２３Ｃによって所望の形式に加工された解析結果データを、データ入出力部２１を介してクライアント端末ＣＬに出力、提供する。

以上で説明した解析システム３０１は、解析システム１、２０１と同様に、解析装置２０による解析に用いることができる第１解析用データの収集量を相対的に多く確保することができるので、解析精度を向上することができる。

また、以上で説明した解析システム３０１は、解析システム２０１と同様に、移動体Ｖが走行する路上の人物だけでなく移動体Ｖの内部の人物（乗客）の属性や人流を踏まえた解析結果データを得るができ、解析精度をさらに向上することができる。

その上でさらに、以上で説明した解析システム３０１は、記録装置３１０によって固定体Ｆの外部の画像を表す第３画像データ、及び、これに対応する第３位置データを含む第３解析用データも収集し、解析装置２０による解析に用いることができる。この結果、解析システム３０１は、路上の人物を解析するために用いる解析用データとして、固定体Ｆに搭載された記録装置３１０によって収集された第３解析用データも加えることができる。したがって、解析システム３０１は、解析精度をさらに向上することができる。

なお、上述した本発明の実施形態に係る解析システムは、上述した実施形態に限定されず、特許請求の範囲に記載された範囲で種々の変更が可能である。本実施形態に係る解析システムは、以上で説明した各実施形態、変形例の構成要素を適宜組み合わせることで構成してもよい。

以上で説明した解析システム１、２０１、３０１は、解析に用いる解析用データとして、さらに、特定のアプリケーション、記入式のアンケート、特定の人物がまとめた資料等を用いて取集したデータも用いてもよい。

以上で説明した制御部１４、解析装置２０は、各部が別体に構成され、当該各部が各種の電気信号を相互に授受可能に接続されることで構成されてもよく、一部の機能が他の制御装置によって実現されてもよい。また、以上で説明したプログラム、アプリケーション、各種データ等は、適宜、更新されてもよいし、解析システム１、２０１、３０１に対して任意のネットワークを介して接続されたサーバに記憶されていてもよい。以上で説明したプログラム、アプリケーション、各種データ等は、例えば、必要に応じてその全部又は一部をダウンロードすることも可能である。また、例えば、制御部１４、解析装置２０が備える処理機能については、その全部又は任意の一部を、例えば、ＣＰＵ等及び当該ＣＰＵ等にて解釈実行されるプログラムにて実現してもよく、また、ワイヤードロジック等によるハードウェアとして実現してもよい。

１、２０１、３０１ 解析システム
１０、２１０ 記録装置（移動体解析データ収集装置）
２０ 解析装置（データ解析装置）
１４Ａ、２２ 記憶部
３１０ 記録装置（固定体解析データ収集装置）
Ｆ 固定体
Ｖ 移動体

Claims (7)

1. 移動体に搭載され、当該移動体の移動に伴って撮像された当該移動体の外部の画像を表す第１画像データ、及び、前記移動体の外部の画像が撮像された位置を表す第１位置データを含む第１解析用データを収集する移動体解析データ収集装置と、
   前記移動体解析データ収集装置によって収集された前記第１解析用データに基づいて、前記第１画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析するデータ解析装置とを備えることを特徴とする、
   解析システム。
2. 前記データ解析装置は、前記第１画像データが表す複数の画像から人物の属性を特定可能である当該人物の特徴点を含む画像を抽出し、当該抽出した画像に基づいて当該画像に含まれる人物の属性を解析する、
   請求項１に記載の解析システム。
3. 前記移動体解析データ収集装置は、さらに、前記移動体の内部の画像を表す第２画像データ、及び、前記移動体の内部の画像が撮像された位置を表す第２位置データを含む第２解析用データを収集し、
   前記データ解析装置は、さらに、前記移動体解析データ収集装置によって収集された前記第２解析用データに基づいて、前記第２画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する、
   請求項１又は請求項２に記載の解析システム。
4. 路上に設置された固定体に搭載され、当該固定体に搭載された状態で撮像された当該固定体の外部の画像を表す第３画像データ、及び、前記固定体の外部の画像が撮像された位置を表す第３位置データを含む第３解析用データを収集する固定体解析データ収集装置を備え、
   前記データ解析装置は、さらに、前記固定体解析データ収集装置によって収集された前記第３解析用データに基づいて、前記第３画像データが表す画像に含まれる人物の属性、及び、当該属性が特定された人物の人流を解析する、
   請求項１乃至請求項３のいずれか１項に記載の解析システム。
5. 前記移動体は、予め定められた経路を繰り返し走行するものである、
   請求項１乃至請求項４のいずれか１項に記載の解析システム。
6. 前記データ解析装置は、当該データ解析装置によって解析された解析結果を表す解析結果データを蓄積する記憶部を含む、
   請求項１乃至請求項５のいずれか１項に記載の解析システム。
7. 前記データ解析装置によって解析される人物の属性は、性別、年齢、体格、社会的地位、嗜好、又は、行動志向を含む、
   請求項１乃至請求項６のいずれか１項に記載の解析システム。

Images