JP2009129006A - Image analysis apparatus and image analysis system - Google Patents
Image analysis apparatus and image analysis system Download PDFInfo
- Publication number
- JP2009129006A JP2009129006A JP2007300628A JP2007300628A JP2009129006A JP 2009129006 A JP2009129006 A JP 2009129006A JP 2007300628 A JP2007300628 A JP 2007300628A JP 2007300628 A JP2007300628 A JP 2007300628A JP 2009129006 A JP2009129006 A JP 2009129006A
- Authority
- JP
- Japan
- Prior art keywords
- data
- image
- analysis
- composite
- image analysis
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
Abstract
Description
本発明は、画像解析装置及び画像解析システムに関する。 The present invention relates to an image analysis apparatus and an image analysis system.
従来、カメラで撮影された画像データに関する情報を生成する構成が知られている。例えば、画像データを管理するための分類情報や、画像データの画像を診断するための診断情報を生成する構成が考えられている(例えば、特許文献1,2参照)。
2. Description of the Related Art Conventionally, a configuration for generating information related to image data captured by a camera is known. For example, the structure which produces | generates the classification information for managing image data, and the diagnostic information for diagnosing the image of image data is considered (for example, refer
また、監視用カメラで撮影された画像データに関する情報を生成する構成も知られている。例えば、監視目的で撮影された画像データを画像解析して侵入物体の有無、撮影画像内の人数等の情報を生成する構成が考えられている(例えば、特許文献3,4参照)。 In addition, a configuration for generating information related to image data photographed by a monitoring camera is also known. For example, a configuration is conceivable in which image data captured for monitoring purposes is subjected to image analysis to generate information such as the presence or absence of an intruding object and the number of people in the captured image (for example, see Patent Documents 3 and 4).
ここで、図6を参照して、監視目的で撮影された画像データを解析して解析データを生成する従来の画像監視システムを説明する。図6に、従来の画像監視システム2の構成を示す。
Here, with reference to FIG. 6, a conventional image monitoring system that analyzes image data taken for monitoring purposes and generates analysis data will be described. FIG. 6 shows a configuration of a conventional
図6に示すように、画像監視システム2は、カメラ10と、画像解析装置20Aと、表示端末30と、を備えて構成され、画像解析装置20Aと表示端末30とが通信ネットワークNを介して通信接続される。
As shown in FIG. 6, the
画像解析装置20Aは、制御部21Aと、入力部22と、RAM(Random Access Memory)23と、通信部24と、記憶部25と、を備えて構成される。RAM23は、揮発性のメモリである。記憶部25は、フラッシュメモリ、HDD(Hard Disk Drive)等の不揮発性のメモリである。
The
画像解析装置20Aにおいて、カメラ10で撮影された画像信号が入力部22を介して(周期的に)取得され、制御部21Aにより、その画像信号が画像データ41に変換されてRAM23に格納される。そして、制御部21Aにより、RAM23内の画像データ41を入力データとして目的の画像解析が実行され、その解析結果である解析データ42が生成されてRAM23に格納される。
In the
そして、制御部21Aにより、RAM23内の画像データ41が記憶部25の画像データ群44Aに含められて記憶される。画像データ群44Aは、撮影時間が異なる複数の画像データ41を含む。画像データ群44Aは、個々の画像データ41を識別可能なよう、画像番号等の情報を付与し管理される。
Then, the
また、制御部21Aにより、RAM23内の解析データ42が記憶部25のテキストファイルあるいはデータベース等の解析データ群45に含められて記憶される。解析データ群45は、複数の画像データ41にそれぞれ対応する複数の解析データ42を含む。解析データ群45の記憶の際、解析に用いた画像データ41と解析データ42との紐付けが可能なよう、前記画像番号等の情報を付与し、後に、画像データと関連する解析データとの検索が可能なよう準備される。
Further, the
また、表示端末30から通信ネットワークNを介して送信される、ライブ(リアルタイム)の画像データ、解析データ、あるいは過去の履歴画像データ、履歴解析データ等の情報の要求に応じて、制御部21Aにより、RAM23に格納されたライブの画像データ41、解析データ42、あるいは記憶部25に記憶された画像データ群44A中の画像データ、解析データ群45中の解析データが表示端末30に送信されて提供される。そして、表示端末30において、受信した各データに基づき、ライブの画像、解析結果、履歴画像、履歴解析結果等が表示される。
しかし、従来の画像監視システム2では、解析の状況をリアルタイムに見る必要があるアプリケーションを実行する場合に、表示端末30が、画像データ41と解析データ42との2つの情報を取得する必要がある。これらの2つの情報を別々に取得する場合、その整合(画像データ41とその解析データ42との対応関係が一致)を確保する必要があり、その実装が煩雑であった。これを回避する手段として、画像解析装置20A上において、予め画像データ41上に解析データの結果を、目に見える形で編集して要求元の表示端末30に提供することが考えられる。この場合、画像解析装置20Aの編集処理に要する負荷が増大すること、解析データ42を用いた自由な編集が困難であること、またオリジナルの画像データ41を表示端末30側で利用できない問題があった。
However, in the conventional
同様に、表示端末30にて、過去の解析結果を表示するアプリケーションを実行する場合に、所望の画像データ41に該当する解析データ42を、解析データ群45からその都度検索する作業が必要であり、この作業が画像解析装置20Aにとって負担となっていた。また、データ管理の観点から、古くなった画像データ群44Aと解析データ群45との整合をとって削除することは、処理が煩雑であった。
Similarly, when an application that displays past analysis results is executed on the
上記のように、画像データ41と解析データ42とを別のものとして管理することは、
1)当該データ検索にかかる負担が発生する。
2)データ整合性確保が難しい。
というおそれがあった。
As described above, managing the
1) A burden on the data search occurs.
2) It is difficult to ensure data consistency.
There was a fear.
本発明の課題は、画像データとその解析データとを提供するにあたり、余分な負担を発生させず、データ整合性を確保し、解析データを用いた多様性のあるアプリケーションを外部機器に実現させる画像解析装置及び画像解析システムを提供することである。 SUMMARY OF THE INVENTION An object of the present invention is to provide image data and analysis data thereof without generating an extra burden, ensuring data consistency, and realizing various applications using analysis data on an external device. An analysis apparatus and an image analysis system are provided.
上記課題を解決するため、請求項1に記載の発明の画像解析装置は、
記憶手段と、
画像データを画像解析して解析データを生成し、当該解析データを前記画像データに合成して合成データを生成し、当該生成した合成データを前記記憶手段に記憶する制御手段と、を備える。
In order to solve the above-described problem, an image analysis apparatus according to
Storage means;
Image data is analyzed to generate analysis data, the analysis data is combined with the image data to generate composite data, and the control unit stores the generated composite data in the storage unit.
請求項2に記載の発明は、請求項1に記載の画像解析装置において、
外部機器と通信する通信手段を備え、
前記制御手段は、前記生成された少なくとも一つの合成データを含む合成データ群を前記記憶手段に記憶し、当該記憶手段に記憶された合成データ群のうち指定された合成データを前記通信手段を介して前記外部機器に送信する。
The invention according to
A communication means for communicating with an external device;
The control means stores a composite data group including the generated at least one composite data in the storage means, and specifies designated composite data among the composite data groups stored in the storage means via the communication means. To the external device.
請求項3に記載の発明は、請求項2に記載の画像解析装置において、
前記制御手段は、前記生成された合成データを前記通信手段を介して前記外部機器に送信する。
The invention according to claim 3 is the image analysis apparatus according to
The control means transmits the generated composite data to the external device via the communication means.
請求項4に記載の発明の画像解析システムは、
請求項2又は3に記載の画像解析装置と、
前記外部機器と、を備え、
前記制御手段は、前記外部機器から送信される合成データの要求に応じて前記通信手段を介して合成データを要求元の外部機器に送信する。
An image analysis system according to a fourth aspect of the present invention provides:
The image analysis apparatus according to
The external device,
The control unit transmits the composite data to the requesting external device via the communication unit in response to a request for the composite data transmitted from the external device.
請求項1に記載の発明によれば、画像データとその解析データとを含む合成データを管理でき、余分な負担を低減でき、画像データと解析データとのデータ整合性を確保でき、解析データを用いた多様性のあるアプリケーションを外部機器に実現できる。 According to the first aspect of the present invention, composite data including image data and analysis data thereof can be managed, an extra burden can be reduced, data consistency between the image data and analysis data can be ensured, and analysis data can be saved. The diverse applications used can be realized on external devices.
請求項2に記載の発明によれば、記憶手段に記憶された合成データ群から合成データを外部機器に提供でき、解析データの検索手続きを不要にでき、画像解析装置の負担を軽減できる。 According to the second aspect of the present invention, the synthesized data can be provided to the external device from the synthesized data group stored in the storage means, the analysis data search procedure can be eliminated, and the burden on the image analyzing apparatus can be reduced.
請求項3に記載の発明によれば、ライブの合成データを外部機器に提供できる。 According to the third aspect of the present invention, live composite data can be provided to an external device.
請求項4に記載の発明によれば、外部機器の要求に応じた合成データを外部機器に提供できる。 According to the fourth aspect of the present invention, it is possible to provide the external device with composite data according to the request of the external device.
以下、図面を参照して、本発明に係る実施の形態について説明する。但し、発明の範囲は図示例に限定されない。 Hereinafter, embodiments of the present invention will be described with reference to the drawings. However, the scope of the invention is not limited to the illustrated examples.
先ず、図1及び図2を参照して、本実施の形態の装置構成を説明する。図1に、本実施の形態の画像解析システムとしての画像監視システム1を示す。
First, the apparatus configuration of the present embodiment will be described with reference to FIGS. 1 and 2. FIG. 1 shows an
本実施の形態の画像監視システム1は、被写体を撮影して画像解析を行い、その被写体の画像と解析結果とを表示するシステムである。画像監視システム1は、例えば、駅のプラットホームを撮影し、その撮影画像内の人数や倒れている人の有無等を解析し、その解析結果を画像とともに表示してユーザに監視させるシステムとする。
The
図1に示すように、画像監視システム1は、カメラ10と、画像解析装置20と、外部機器としての表示端末30とを備えて構成され、画像解析装置20と表示端末30とが通信ネットワークNを介して通信接続されている。
As shown in FIG. 1, the
カメラ10は、画像解析装置20に接続され、被写体を撮影してその被写体の画像信号を生成して出力するカメラである。カメラ10は、画像を周期的に撮影して画像信号を出力する。
The
画像解析装置20は、カメラ10から入力された画像信号を画像データに変換し画像解析して解析データを生成し、画像データと解析データとを合成する。また、画像解析装置20は、合成データを合成データ群として記憶し、ライブ又は過去の履歴の合成データを出力する。
The
表示端末30は、表示部、通信部及び制御部(図示略)を備える。表示端末30の制御部は、通信部を介してライブ又は過去の履歴の合成データを画像解析装置20に要求し、受信した合成データの画像データの画像を解析データの画像とともに表示部に表示する。
The
通信ネットワークNは、例えばLAN(Local Area Network)とするが、これに限定されるものではなく、WAN(Wide Area Network)等としてもよい。 The communication network N is, for example, a LAN (Local Area Network), but is not limited thereto, and may be a WAN (Wide Area Network) or the like.
次いで、図2を参照して、画像解析装置20の内部構成を説明する。図2に、画像解析装置20の内部構成を示す。
Next, the internal configuration of the
図2に示すように、画像解析装置20は、制御手段としてのCPU(Central Processing Unit)21と、入力部22と、RAM23と、通信手段としての通信部24と、記憶手段としての記憶部25と、を備えて構成され、各部がバス26を介して接続されている。
As shown in FIG. 2, the
CPU21は、画像解析装置20の各部を中央制御する。CPU21は、記憶部25に記憶されたシステムプログラム及びアプリケーションプログラムの中から指定されたプログラムを読み出し、そのプログラムをRAM23に展開し、展開されたプログラムとの協働で各種処理を実行する。
The
CPU21は、記憶部25に記憶された合成データ生成プログラムとの協働で、後述する図4に示すように、カメラ10で撮影された画像データ41の画像を解析して解析データ42を生成し、画像データ41及び解析データ42を合成して合成データ43を生成してRAM23に格納し、合成データ43を合成データ群44に含めて記憶部25に記憶する。
The
また、CPU21は、記憶部25に記憶された合成データ提供プログラムとの協働で、表示端末30から合成データの要求があると、ライブの合成データの要求がある場合に、RAM23に格納された合成データ43を要求元の表示端末30に送信し、履歴の合成データの要求がある場合に、記憶部25に記憶された合成データ群44のうち指定された合成データ43を要求元の表示端末30に送信する。
Further, in cooperation with the composite data providing program stored in the
入力部22は、カメラ10と通信接続されて画像信号が入力されるインタフェースである。入力部22は、例えば、カメラ10と通信ケーブルを介する有線式の入力部とするが、これに限定されるものではなく、無線式の入力部としてもよい。
The
RAM23は、揮発性のメモリであり、各種データ及び各種プログラムを格納するワークエリアを有する。特に、RAM23には、後述する画像データ41及び解析データ42が格納される。
The
通信部24は、通信ネットワークNに接続され、NIC(Network Interface Card)、モデム等により構成される。通信部24は、通信ネットワークN上の表示端末30等の外部機器と情報を送受信する。
The
記憶部25は、不揮発性のメモリであり、フラッシュメモリ、HDDなどにより構成され、情報を読み書き可能に記憶する。記憶部25は、後述する合成データ群44、合成データ送信プログラム及び合成データ提供プログラムを記憶する。
The
次に、図3及び図4を参照して、画像監視システム1の動作を説明する。図3に、合成データ生成処理及び合成データ提供処理の流れを示す。図4に、合成データ群44生成の手順を示す。
Next, the operation of the
画像解析装置20において、合成データ生成処理、合成データ提供処理が実行される。合成データ生成処理は、カメラ10で撮影された画像データを画像解析しその解析結果としての解析データを含む合成データを生成及び管理する処理である。合成データ提供処理は、画像解析装置20の外部機器(ここでは、表示端末30)からの要求に対応し、合成データを提供する処理である。
In the
画像解析装置20において、例えば、電源オン操作や、図示しない操作部を介して合成データ生成処理実行の操作入力が受け付けられたこと等をトリガとして、記憶部25から読み出されてRAM23に適宜展開された合成データ生成プログラムと、CPU21との協働で合成データ生成処理が実行される。
In the
図3に示すように、先ず、カメラ10で撮影された1画像の画像信号が入力部22を介して入力され、その画像信号が画像データ41に変換されてRAM23に格納されて取り込まれる(ステップS11)。そして、RAM23に格納された画像データが画像解析されて解析データ42が生成され、解析データ42がRAM23に格納される(ステップS12)。ステップS12は、例えば、画像データ41の画像内の人数や倒れている人の有無等を解析し、その解析結果を解析データ42として生成する。
As shown in FIG. 3, first, an image signal of one image taken by the
そして、RAM23に格納された画像データ41及び解析データ42が合成されて合成データ43が生成されてRAM23に格納される(ステップS13)。ステップS13において、図4に示すように、画像データ41及び解析データ42が一つの合成データ43に合成される。合成データ43は、例えば、JPEG(Joint PhotographicExperts Group)方式の画像データであり、実画像データ部43Aとヘッダ部43Bとを含むものとする。
Then, the
ヘッダ部43Bは、画像データの各種属性データを含み、またCOMセグメント43B1を含む。COMセグメント43B1は、アプリケーションが自由に使用できるよう開放されているデータ領域である。例えば、画像データ41がJPEG方式であり、又はJPEG方式に変換され、JPEG方式の画像データのCOMセグメント43B1に解析データ42が格納されて合成データ43が生成される。また、ステップS13において、任意の画像データ41及び解析データ42から成る合成データ43を後述する合成データ群44から検索可能なよう、画像番号等の識別情報が合成データ43に付与されてRAM23に格納される。
The
そして、RAM23に格納された1つの合成データ43が、少なくとも一つの合成データからなる合成データ群44に含められて記憶部25に記憶され(ステップS14)、ステップS11に移行される。また、ステップS14において、合成データ43が画像番号とともに合成データ群44に含められる。
Then, one
また、ステップS11〜S14の処理は、所定周期ごとに繰り返し実行される。この周期に応じて、合成データ43のフレームレートが決まる。例えば、合成データ43がおよそ5〜10[fps]で生成されるとすると、連続した合成データ43の再生により、不連続なモーションの画像再生が可能である。合成データ43がおよそ30[fps]で取得されるとすると、連続した合成データ43の再生により、動画再生が可能である。
Moreover, the process of step S11-S14 is repeatedly performed for every predetermined period. The frame rate of the
次いで、合成データ提供処理を説明する。画像解析装置20において、例えば、電源オン操作や、図示しない操作部を介して合成データ提供処理実行の操作入力が受け付けられたこと等をトリガとして、記憶部25から読み出されてRAM23に適宜展開された合成データ提供プログラムと、CPU21との協働で合成データ提供処理が実行される。
Next, the composite data providing process will be described. In the
先ず、通信部24を介して表示端末30から、合成データ43の要求が受信されたか否かが判別される(ステップS21)。合成データ43の要求が受信されていない場合(ステップS21;NO)、ステップS21に移行される。合成データ43の要求が受信された場合(ステップS21;YES)、受信した要求内容が、ライブ(リアルタイム)の合成データの要求であるか、履歴の合成データの要求であるかが判別される(ステップS22)。
First, it is determined whether a request for the
受信した要求内容が、ライブの合成データの要求である場合(ステップS22;ライブ)、RAM23に格納された1つの合成データ43が読み出され、通信部24によりその合成データが要求元の表示端末30に送信され(ステップS23)、ステップS21に移行される。ステップS23に対応して、表示端末30において、ライブの合成データ43が画像解析装置20から受信され、合成データ43の画像データと解析データ42とが分離されて、ライブの画像データ41の画像が解析データ42の画像とともに表示部(図示略)に表示される。
When the received request content is a request for live composite data (step S22; live), one
受信した要求内容が、履歴の合成データの要求である場合(ステップS22;履歴)、記憶部25に記憶された合成データ群44のうちの指定された画像番号に対応する合成データ43が読み出され、履歴の合成データとして通信部24により通信ネットワークNを介して要求元の表示端末30に送信され(ステップS24)、ステップS21に移行される。表示端末30から送信される履歴の合成データの要求には、要求対象の画像番号を指定する指定情報が含まれるものとする。ステップS24に対応して、表示端末30において、履歴の合成データ43が画像解析装置20から受信され、合成データ43の画像データと解析データ42とが分離されて、履歴の画像データ41の画像が解析データ42の画像とともに表示部(図示略)に表示される。
When the received request content is a request for history composite data (step S22; history), the
なお、合成データ43をRAM23に格納して、ライブの合成データとして用いる構成としたが、これに限定されるものではない。例えば、合成データ生成処理のステップS13において合成データ43をRAM23に格納する処理を割愛し、合成データ提供処理のステップS23において合成データ群44のうち最新の合成データ43をライブの合成データ43として表示端末30に送信する構成としてもよい。
The
以上、本実施の形態によれば、画像データ41とその画像データ41を解析した解析データ42とを含む合成データ43を生成し、合成データ43を合成データ群44として記憶部25に記憶する。このため、合成データ生成後のデータの扱いが簡素化され、従来の利用時に発生していた、画像データに紐付く解析データの検索に要する処理負担が軽減できる。また、物理的に管理が分かれた2つの情報間の整合を維持するためには、複雑な仕組みの準備と、処理的負担が発生するが、画像データと解析データとを合成することで、これらの整合を確保するための労力を不要にできる。さらに、画像データに解析データが合成されていることで、表示端末30のアプリケーションがそのデータ構造を理解していれば、解析データを利用した多様な表現が可能となる。
As described above, according to the present embodiment, the
また、本実施の形態では、合成データ43をRAM23に格納してライブの合成データとして表示端末30に送信する。このため、RAM23に格納されたライブの合成データ43を表示端末30に提供でき、データ取得の手続きを簡単にでき、通信ネットワークNを介した通信手順を軽減できる。より具体的に述べると、表示端末30からライブの画像データ41とその画像データ41に関する解析データ42とを、画像解析装置から取得するケースにおいて、従来の方法では、表示端末30が次の2ステップを要する。
1)表示端末30がライブの画像データを入手する。
2)表示端末30が解析データを入手する。
一方、本実施の形態では、次の1ステップで完了する。
1)表示端末30がライブの合成データ(画像データ及び解析データが含まれる)を入手する。
In the present embodiment, the synthesized
1) The
2) The
On the other hand, in this embodiment, the process is completed in the following one step.
1) The
また、合成データ43を合成データ群44に含めて記憶部25に記憶し、記憶部25に保存された合成データ群44から指定された合成データ43を表示端末30に送信する。このため、記憶部25に記憶された合成データ群44から履歴の合成データ43を表示端末30に提供でき、解析データの検索手続きを不要にでき、画像解析装置の負担を軽減できる。具体的に述べると、表示端末30から過去の履歴の画像データと解析データとを取得するケースにおいて、従来の方法では、画像解析装置が次の2ステップを要する。
1)指定された画像データを提供する。
2)指定された解析データを検索し、提供する。
一方、本実施の形態では、次の1ステップで完了する。
1)指定された合成データ(画像データ及び対応する解析データが含まれる)を提供する。
Further, the
1) Provide specified image data.
2) Search and provide the specified analysis data.
On the other hand, in this embodiment, the process is completed in the following one step.
1) Provide designated composite data (including image data and corresponding analysis data).
また、合成データ43を合成データ群44に含めて記憶部25に記憶する。このため、データ管理を簡略化でき、画像解析装置20の負担を軽減できる。より具体的に述べると、画像解析装置20上のリソース(記憶部25:メモリ、ハードディスク等)の記憶領域は有限である。従って連続動作を要求される環境に於いては、あるタイミングで古い情報(画像データやそれに関する解析データ)を削除する必要がある。従来の方法では、画像解析装置が次の2ステップを要する。
1)最古の画像データを、記憶領域より削除する。
2)対応する解析データを検索し、これを記憶領域より削除する。
一方、本実施の形態では、次の1ステップで完了する。
1)最古の合成データ(画像データ及び解析データが含まれる)を、記憶部25の合成データ群44より削除する。
Further, the
1) The oldest image data is deleted from the storage area.
2) Search corresponding analysis data and delete it from the storage area.
On the other hand, in this embodiment, the process is completed in the following one step.
1) The oldest composite data (including image data and analysis data) is deleted from the
また、画像データ41とその画像データ41を解析した解析データ42とを含む合成データ43を表示端末30に送信する。このため、利用者側のデータ管理を簡略化できる。より具体的に述べると、表示端末30のように、画像解析装置から取得した画像データ(画像データ及び解析データから成る合成データ)を利用する側で、これらを保存管理するケースを考える。従来の方法であれば、次の仕組みを必要とした。
1)画像データの管理。
2)対応する解析データの管理。
3)1)と2)の関連を管理し、検索を可能とする仕組み。
一方、本実施の形態では、次の仕組みで管理が実現する。
1)画像データ(画像及び解析データから成る合成データ)の管理。
2)利用時に、画像データと解析データを分離する仕組み。
Further, the
1) Image data management.
2) Management of corresponding analysis data.
3) A mechanism that manages the relationship between 1) and 2) and enables search.
On the other hand, in the present embodiment, management is realized by the following mechanism.
1) Management of image data (composite data composed of images and analysis data).
2) A mechanism for separating image data and analysis data when used.
(変形例)
図5を参照して、上記実施の形態の変形例を説明する。本変形例は、上記実施の形態と画像データの画像解析方法が異なる例である。図5(a)に、人物行動解析・侵入解析の一例を示す。図5(b)に、混雑・人流解析の一例を示す。図5(c)に、車番解析・ラベル解析の一例を示す。図5(d)に、人物識別・マーケティングツールの一例を示す。図5(e)に、工場の検査工程の一例を示す。図5(f)に、赤外線カメラを用いた温度解析の一例を示す。図5(g)に、医療関連画像解析の一例を示す。図5(h)に、画像解析基本データの一例を示す。
(Modification)
A modification of the above embodiment will be described with reference to FIG. This modification is an example in which the image analysis method for image data is different from the above embodiment. FIG. 5A shows an example of human behavior analysis / intrusion analysis. FIG. 5B shows an example of congestion / human flow analysis. FIG. 5C shows an example of vehicle number analysis / label analysis. FIG. 5D shows an example of a person identification / marketing tool. FIG. 5E shows an example of a factory inspection process. FIG. 5F shows an example of temperature analysis using an infrared camera. FIG. 5G shows an example of medical-related image analysis. FIG. 5H shows an example of image analysis basic data.
上記実施の形態では、カメラ10を駅のプラットホームの撮影用に設置し、画像データ41の撮影画像内の人物の人数と倒れている人の有無とを解析する構成であったが、これに限定されるものではない。また、撮影場所は、駅のプラットホームに限定されるものではない。
In the above embodiment, the
また、例えば、図5(a)に示すように、撮影画像内の人物行動や侵入を解析する人物行動解析・侵入解析の構成としてもよい。この場合、解析データとしては、人間の位置、サイズ、姿勢、移動方向、衣服の色、人数等のうち少なくとも1つを含み、さらに時刻等を含むものとしてもよい。「人物行動解析・侵入解析」の解析データを用いれば、例えば、連続する画像データ群の中に記録されている検出された人間の座標を用いて、その軌跡を可視化することができる。また、画像データ群のなかで特徴的な姿勢として記録されているもの、例えば転倒、屈み込みを含む画像データ(合成データ)だけ抽出することができる。同様に、移動方向に着目して逆行等の状態を含む画像データ(合成データ)だけ抽出することができる。 Further, for example, as shown in FIG. 5A, a configuration of a human behavior analysis / intrusion analysis for analyzing a human behavior or intrusion in a captured image may be adopted. In this case, the analysis data may include at least one of a human position, size, posture, movement direction, clothing color, number of people, and the like, and may further include time and the like. If the analysis data of “personal behavior analysis / intrusion analysis” is used, for example, the trajectory can be visualized using detected human coordinates recorded in a continuous image data group. Further, only image data recorded as a characteristic posture in the image data group, for example, image data (synthetic data) including falling and bending can be extracted. Similarly, it is possible to extract only image data (synthetic data) including a state such as retrograde focusing on the moving direction.
また、図5(b)に示すように、撮影画像内の人物の混雑状態や人物の流れを解析する「混雑・人流解析」を行う構成としてもよい。この場合、解析データとしては、人物の算出人数、立ち止まっている人数、人物の移動方向、直近の1時間の平均人数、状況を表現するキーワード(混み始め、大混雑など)等のうち少なくとも1つを含み、さらに時刻等を含むものとしてもよい。「混雑・人流解析」の解析データを用いれば、例えば、撮影画像から得られる情報のみならず、直近の1時間の平均人数というような過去の情報を同時に利用することができる。 Further, as shown in FIG. 5B, a configuration may be adopted in which “congestion / human flow analysis” is performed to analyze the congestion state of the person in the captured image and the flow of the person. In this case, the analysis data includes at least one of the calculated number of people, the number of people who are stopped, the direction of movement of the people, the average number of people in the last hour, the keyword expressing the situation (such as the start of congestion, large congestion), etc. It is good also as what contains time etc. further. If analysis data of “congestion / human flow analysis” is used, for example, not only information obtained from a captured image but also past information such as the average number of people in the most recent hour can be used at the same time.
また、図5(c)に示すように、撮影画像内の自動車等の車両の解析や撮影画像内のラベルを解析する「車番解析・ラベル解析」を行う構成としてもよい。この場合、解析データとしては、読み出した文字列(車番、ラベルの文字等)、車両の車種、カラー等のうち少なくとも1つを含み、さらに時刻等を含むものとしてもよい。「車番解析・ラベル解析」の解析データを用いれば、例えば、解析データと証拠写真との整合が即座に可能である。 Further, as shown in FIG. 5C, a configuration may be used in which “vehicle number analysis / label analysis” is performed to analyze a vehicle such as an automobile in a captured image and analyze a label in the captured image. In this case, the analysis data may include at least one of the read character string (vehicle number, label character, etc.), vehicle type, color, and the like, and may further include time and the like. By using the analysis data of “vehicle number analysis / label analysis”, for example, the analysis data and the evidence photo can be immediately matched.
また、図5(d)に示すように、撮影画像内の人物の識別や人物の傾向等を解析する「人物識別・マーケティングツール」の解析を行う構成としてもよい。この場合、解析データとしては、人物の特徴(めがね有無、年齢、性別等)、個人識別のための特徴量データ等のうち少なくとも1つを含み、さらに時刻等を含むものとしてもよい。「人物識別・マーケティングツール」の解析データを用いれば、例えば、解析データを用いて画像データを自動分類することが可能である。 Further, as shown in FIG. 5D, a configuration may be adopted in which analysis of a “person identification / marketing tool” for analyzing a person in the captured image, a person tendency, and the like is performed. In this case, the analysis data may include at least one of personal characteristics (presence / absence of glasses, age, gender, etc.), characteristic data for personal identification, and the like, and may further include time and the like. If the analysis data of “person identification / marketing tool” is used, for example, it is possible to automatically classify image data using the analysis data.
また、図5(e)に示すように、工場の撮影画像内のFA(Factory Automation)品質や検査に関する解析をする「FA品質検査」の解析を行う構成としてもよい。この場合、解析データとしては、検査結果(OK/NG等)、不良点数、不良理由(ごみ等)、不良の座標、サイズ等のうち少なくとも1つを含むものとしてよい。「FA品質検査」の解析データを用いれば、例えば、解析データの座標、サイズ等を用いて、不良箇所として記録された部分を自動的に拡大表示して見せることが可能である。 Further, as shown in FIG. 5 (e), a configuration may be adopted in which an analysis of “FA quality inspection” for analyzing FA (Factory Automation) quality and inspection in a photographed image of a factory is performed. In this case, the analysis data may include at least one of the inspection result (OK / NG, etc.), the number of defects, the reason for the defect (dust, etc.), the coordinates of the defect, the size, and the like. If analysis data of “FA quality inspection” is used, it is possible to automatically enlarge and display a portion recorded as a defective portion using the coordinates, size, etc. of the analysis data.
また、図5(f)に示すように、撮影画像内の対象物の温度解析をする「赤外線カメラを用いた温度解析」を行う構成としてもよい。この場合、解析データとしては、対象物である人物座標、サイズ、温度等のうち少なくとも1つを含み、さらに時刻等を含むものとしてもよい。「赤外線カメラを用いた温度解析」の解析データを用いれば、例えば、温度分布に実測値を重ねて表示することで具体的な値を即座に視認することが可能である。 Further, as shown in FIG. 5 (f), it may be configured to perform “temperature analysis using an infrared camera” for analyzing the temperature of an object in a captured image. In this case, the analysis data may include at least one of human coordinates, size, temperature, and the like, which are objects, and may further include time and the like. If analysis data of “temperature analysis using an infrared camera” is used, for example, it is possible to immediately recognize a specific value by displaying the measured value superimposed on the temperature distribution.
また、図5(g)に示すように、医療用の撮影画像内の解析をする「医療関連画像解析」を行う構成としてもよい。この場合、解析データとしては、部位(肺、胃、頭部等)、解析結果(問題有無等)、注意箇所(注意箇所の座標、大きさ)等のうち少なくとも1つを含み、さらに個人情報(氏名、年齢等)、時刻等を含むものとしてもよい。「医療関連画像解析」の解析データを用いれば、例えば、解析によって得られたデータ(解析結果等)と、システムの別系統から入力された付加情報(個人情報等)とを合わせて画像データに格納することで、画像データと個人情報との整合性が確保できる。また、例えば、注意箇所を自動的に拡大表示して見せることが可能である。 Further, as shown in FIG. 5G, a “medical-related image analysis” for analyzing a medical photographed image may be performed. In this case, the analysis data includes at least one of a part (lung, stomach, head, etc.), an analysis result (problem presence / absence, etc.), a caution location (coordinates and size of the caution location), and personal information. (Name, age, etc.), time, etc. may be included. If analysis data of “medical-related image analysis” is used, for example, data obtained by analysis (analysis result, etc.) and additional information (personal information, etc.) input from another system of the system are combined into image data. By storing, consistency between the image data and the personal information can be ensured. In addition, for example, it is possible to automatically enlarge and show the caution area.
また、図5(h)に示すように、「人物行動解析・侵入解析」、「混雑・人流解析」等の他の画像解析方法で更にあればいいデータ(基本データ)を解析する「画像解析基本データ」の解析を行う構成としてもよい。この場合、解析データとしては、撮影画像の平均輝度値、RGBの平均値等の少なくとも一つを含むものとしてよい。「画像解析基本データ」の解析データを用いれば、例えば、前述の様々な画像解析を行う際に算出される、基本データを解析データとして保存することで、これらの解析データを上位層で再利用できる。 In addition, as shown in FIG. 5 (h), “image analysis that analyzes further data (basic data) by other image analysis methods such as“ human behavior analysis / intrusion analysis ”,“ congestion / human flow analysis ”, etc. It may be configured to analyze “basic data”. In this case, the analysis data may include at least one of the average luminance value of the captured image, the average value of RGB, and the like. Using the analysis data of “Image analysis basic data”, for example, by saving the basic data calculated as the above-mentioned various image analysis as analysis data, these analysis data can be reused in higher layers. it can.
なお、上記実施の形態及び変形例における記述は、本発明に係る画像解析装置及び画像解析システムの一例であり、これに限定されるものではない。 Note that the descriptions in the above-described embodiments and modifications are examples of the image analysis apparatus and the image analysis system according to the present invention, and the present invention is not limited thereto.
その他、上記実施の形態及び変形例における画像解析装置及び画像解析システムの細部構成及び詳細動作に関しても、本発明の趣旨を逸脱しない範囲で適宜変更可能である。 In addition, the detailed configuration and detailed operation of the image analysis apparatus and the image analysis system in the above-described embodiments and modifications can be changed as appropriate without departing from the spirit of the present invention.
1,2 画像監視システム
10 カメラ
20,20A 画像解析装置
21 CPU
21A 制御部
22 入力部
23 RAM
24 通信部
25 記憶部
26 バス
30 表示端末
N 通信ネットワーク
1, 2
24
Claims (4)
画像データを画像解析して解析データを生成し、当該解析データを前記画像データに合成して合成データを生成し、当該生成した合成データを前記記憶手段に記憶する制御手段と、を備える画像解析装置。 Storage means;
Image analysis comprising image analysis of image data to generate analysis data, synthesis of the analysis data with the image data to generate synthesis data, and storage of the generated synthesized data in the storage unit apparatus.
前記制御手段は、前記生成された少なくとも一つの合成データを含む合成データ群を前記記憶手段に記憶し、当該記憶手段に記憶された合成データ群のうち指定された合成データを前記通信手段を介して前記外部機器に送信する請求項1に記載の画像解析装置。 A communication means for communicating with an external device;
The control means stores a composite data group including the generated at least one composite data in the storage means, and specifies designated composite data among the composite data groups stored in the storage means via the communication means. The image analysis apparatus according to claim 1, wherein the image analysis apparatus transmits the image to the external device.
前記外部機器と、を備え、
前記制御手段は、前記外部機器から送信される合成データの要求に応じて前記通信手段を介して合成データを要求元の外部機器に送信する画像解析システム。 The image analysis apparatus according to claim 2 or 3,
The external device,
The control means is an image analysis system for transmitting composite data to a requesting external device via the communication means in response to a request for composite data transmitted from the external device.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007300628A JP2009129006A (en) | 2007-11-20 | 2007-11-20 | Image analysis apparatus and image analysis system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007300628A JP2009129006A (en) | 2007-11-20 | 2007-11-20 | Image analysis apparatus and image analysis system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009129006A true JP2009129006A (en) | 2009-06-11 |
Family
ID=40819900
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007300628A Pending JP2009129006A (en) | 2007-11-20 | 2007-11-20 | Image analysis apparatus and image analysis system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009129006A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017120657A (en) * | 2017-03-09 | 2017-07-06 | 株式会社ニコン | Information management device, data analysis device, signal apparatus, server, information management system, and program |
US10977938B2 (en) | 2010-08-06 | 2021-04-13 | Nikon Corporation | Signal control apparatus and signal having the same |
-
2007
- 2007-11-20 JP JP2007300628A patent/JP2009129006A/en active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10977938B2 (en) | 2010-08-06 | 2021-04-13 | Nikon Corporation | Signal control apparatus and signal having the same |
JP2017120657A (en) * | 2017-03-09 | 2017-07-06 | 株式会社ニコン | Information management device, data analysis device, signal apparatus, server, information management system, and program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9560323B2 (en) | Method and system for metadata extraction from master-slave cameras tracking system | |
JP6814673B2 (en) | Movement route prediction device and movement route prediction method | |
JP5730518B2 (en) | Specific person detection system and specific person detection method | |
US20160014378A1 (en) | Identifying spatial locations of events within video image data | |
US8495188B2 (en) | Sensor information management system, sensor information management method, and computer-readable storage medium | |
WO2018037631A1 (en) | Tracking assistance device, tracking assistance system and tracking assistance method | |
JP2009169768A (en) | Information processor and program | |
US20110096994A1 (en) | Similar image retrieval system and similar image retrieval method | |
TW201108124A (en) | Coding scheme for identifying spatial locations of events within video image data | |
WO2018122895A1 (en) | Image processing device, image processing method, image processing program, and image monitoring system | |
JP6203188B2 (en) | Similar image search device | |
JP2009123196A (en) | Image retrieval device | |
JP6381265B2 (en) | Information processing apparatus, display method, and program | |
CN108289201B (en) | Video data processing method and device and electronic equipment | |
JP6788235B1 (en) | Information management system, information management method | |
JP6234146B2 (en) | RECORDING CONTROL DEVICE, RECORDING CONTROL METHOD, AND PROGRAM | |
EP3975133A1 (en) | Processing of images captured by vehicle mounted cameras | |
US11979660B2 (en) | Camera analyzing images on basis of artificial intelligence, and operating method therefor | |
JP2006093955A (en) | Video processing apparatus | |
JP2008016896A (en) | Monitoring apparatus and monitoring method | |
JP2009129006A (en) | Image analysis apparatus and image analysis system | |
JP2006332789A (en) | Video photographing method, apparatus, and program, and storage medium for storing the program | |
US11042274B2 (en) | Extracting demonstrations from in-situ video content | |
JP6747603B2 (en) | Monitoring support device and monitoring support system | |
JP2022036825A (en) | Image processing device, image processing method, and program |