JPWO2013157265A1 - 画像処理システム、受信装置、画像送信装置、画像処理方法、受信側画像処理方法、及び、画像送信方法 - Google Patents

Abstract

撮像装置の処理負荷を低減し、撮像装置における誤検出を効率良く判定する画像処理システム、画像判定装置、撮像装置及び画像判定方法を提供する。撮像装置（１１０）において、第１検出部（１１２）が検出した検出画像を含む送信サンプルを送信サンプル制御部（１１４）の制御に従って、送受信部（１１５）からサーバ（１５０）に送信する。サーバ（１５０）では、第２検出部（１５２）が撮像装置（１１０）から送信された検出画像に対して、第１検出部（１１２）よりも多くのリソースを必要とする検出処理を行い、これにより得られた第２検出スコアに基づいて、当該検出画像が誤検出であるか否かを判定する。送信頻度決定部（１５５）が誤検出頻度の高い撮像装置に送信頻度を高めるよう送信頻度制御情報を生成し、送受信部（１５１）が送信頻度制御情報を撮像装置（１１０）に送信する。

Description

本発明は、撮像した画像から所望のデータを抽出する画像処理システム、サーバ装置、撮像装置及び画像判定方法に関する。

近年、カメラ等の撮像装置により撮像した画像から、所望のデータを抽出する画像処理技術に対するニーズが高まっている。例えば、監視カメラに映った人物の顔を検出し、検出した顔から目、口、髪などの特徴を示すパラメータを抽出し、抽出されたパラメータと予め用意されたこれらのパラメータとを照合して、監視カメラに映った人物の年齢または性別等の情報を取得することが想定される。

このような画像処理技術を応用した技術として、遠隔検針システムが特許文献１に開示されている。図１は、特許文献１に開示の遠隔検針システムの構成を示すブロック図である。図１において、遠隔検針システムは、遠隔検針装置１０と検針センタ２０とを備えている。

遠隔検針装置１０は、メータ１の指針表示２を撮像する撮像手段１１と、撮像手段１１が撮像した原画像Ａから指針値パターンＣを作成し、指針値Ｄを認識するパターン認識手段１２と、その認識結果が妥当か否かを判定する判定手段１３と、その判定結果に基づいて、所定の検針データを通信路３を介して検針センタ２０へ送信する通信手段１５とを備えている。

判定手段１３が認識結果を妥当と判定した場合、遠隔検針装置１０は、指針値Ｄを検針データとして送信し、判定手段１３が少なくとも指針値の一部桁について認識結果を妥当と判定しなかった場合、遠隔検針装置１０は、その判定結果Ｆ、原画像Ａ、及び、指針値パターンＣ、またはこれらの中間画像Ｂを指針データとして送信する。

検針センタ２０は、指針値又は画像データ等の所定の検針データを、所定の通信路３を介して受信する通信手段２１と、遠隔検針装置１０から受信した原画像Ａ、中間画像Ｂ、または、指針値パターンＣから少なくとも遠隔検針装置１０において認識結果が妥当と判定されなかった桁の指針値Ｅを認識する第２パターン認識手段２２と、第２パターン認識手段２２による認識結果が妥当か否かを判定する第２判定手段２３と、通信手段２１が受信した指針値Ｄと第２パターン認識手段２２が認識した指針値Ｅを記録する検針結果記録手段２４とを備えている。

上記遠隔検針システムによれば、遠隔検針装置が指針値を認識できない場合、または誤認識した場合においても、検針センタ等の遠隔地から正しく指針値を認識することができる。

特開２００２−２４８２８号公報

しかしながら、上述した特許文献１に開示の遠隔検針システムでは、画像を撮像する撮像装置（上記の遠隔検針装置に相当）における画像データの認識判定の処理が簡易であるため、カメラ側の処理負荷が増大せずに済むが、例えば、監視カメラに映った人物の顔を検出するような場合に、誤検出したか否かを判定するには高度な処理が必要となり、撮像装置の処理負荷が増大するという問題がある。

本発明の目的は、撮像装置の処理負荷を低減し、撮像装置における誤検出を効率良く判定する画像処理システム、サーバ装置、撮像装置及び画像判定方法を提供することである。

本発明の画像処理システムは、撮像素子から画像を入力する撮像手段と、入力された前記画像から所望の画像領域を検出する第１検出手段と、検出された前記画像領域のうち、第１検出スコアの低い方から順に帯域分の画像領域を選択する送信サンプル制御手段と、選択された前記画像領域を送信する送信手段と、を有する撮像装置と、前記撮像装置から送信された前記画像領域に対して、前記第１検出手段よりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段と、を有するサーバ装置と、を具備する構成を採る。

本発明のサーバ装置は、撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段と、誤検出と判定された頻度が所定の頻度以上となる撮像装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定手段と、生成された前記送信頻度制御情報を前記撮像装置に送信する送信手段と、を具備する構成を採る。

本発明のサーバ装置は、撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段と、前記撮像装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定手段と、生成された前記誤検出領域情報を前記撮像装置に送信する送信手段と、を具備する構成を採る。

本発明の撮像装置は、撮像素子から画像を入力する撮像手段と、入力された前記画像から所望の画像領域を検出する第１検出手段と、検出された前記画像領域のうち、第１検出スコアの低い方から順に帯域分の画像領域を選択する送信サンプル制御手段と、選択された前記画像領域を送信する送信手段と、を具備する構成を採る。

本発明の画像判定方法は、撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出工程と、誤検出と判定された頻度が所定の頻度以上となる撮像装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定工程と、を具備するようにした。

本発明の画像判定方法は、撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出工程と、前記撮像装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定工程と、を具備するようにした。

本発明によれば、撮像装置の処理負荷を低減し、撮像装置における誤検出を効率良く判定することができる。

特許文献１に開示の遠隔検針システムの構成を示すブロック図 本発明の実施の形態１に係る画像監視システムの構成を示すブロック図 検出サンプルの説明に供する図 カメラ毎に送信頻度を設定する様子を示す図 本発明の実施の形態２に係る画像監視システムの構成を示すブロック図 本発明の実施の形態２に係る送信サンプル制御部の動作説明に供する図 撮像装置の他の構成を示すブロック図 サーバの他の構成を示すブロック図

以下、本発明の実施の形態について、図面を参照して詳細に説明する。ただし、実施の形態において、同一の機能を有する構成には、同一符号を付し、重複する説明は省略する。

（実施の形態１）
図２は、本発明の実施の形態１に係る画像監視システム１００の構成を示すブロック図である。以下、図２を用いて画像監視システム１００の構成について説明する。図２において、画像監視システム１００は撮像装置１１０とサーバ１５０とから構成されている。ただし、図２では、撮像装置を１つしか明示していないが、実際には、複数の撮像装置がサーバと接続しているものとする。

撮像装置１１０は、カメラ部１１１、第１検出部１１２、第１記憶部１１３、送信サンプル制御部１１４及び送受信部１１５を備えている。カメラ部１１１は、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子から画像を入力し、入力した画像を第１検出部１１２に出力する。

第１検出部１１２は、カメラ部１１１から出力された画像から、例えば、矩形の領域からなる検出枠にて所望の領域を検出し、検出した画像（以下、「検出画像」という）及びその検出スコア（尤度）を検出サンプルとして第１記憶部１１３に出力する。ここで、所望の領域としては、例えば、人物の顔モデルに類似した画像領域などが想定される。また、検出サンプルには、検出枠の位置を示す検出位置（検出枠の１つの頂点の座標及び縦横の長さ）、検出枠を識別する検出ＩＤが含まれる場合がある。

第１記憶部１１３は、第１検出部１１２から出力された検出サンプルを記憶すると共に、記憶した所定期間分の検出サンプルを送信サンプル制御部１１４に出力する。

送信サンプル制御部１１４は、第１記憶部１１３から出力された所定期間分の検出サンプルのうち、検出スコアが低い方から帯域分の検出サンプルを選択し、選択した検出サンプルに対応する送信サンプルを送受信部１１５に出力する。なお、送信サンプルは、対応する検出サンプルのうち、少なくとも検出画像を含み、検出スコア、検出位置、検出ＩＤのいずれか、または全てを含む場合もある。送信サンプル制御部１１４は、送受信部１１５から送信頻度制御情報が出力された場合、送信頻度制御情報が指示する送信頻度に応じた数の検出サンプルを選択し、選択した検出サンプルに対応する送信サンプルを送受信部１１５に出力する。

送受信部１１５は、送信サンプル制御部１１４から出力された送信サンプルをサーバ１５０に送信する。また、サーバ１５０から送信された送信頻度制御情報を送信サンプル制御部１１４に出力する。

サーバ１５０は、送受信部１５１、第２検出部１５２、通知部１５３、第２記憶部１５４及び送信頻度決定部１５５を備えている。送受信部１５１は、撮像装置１１０から送信された送信サンプルを受信し、受信した送信サンプルを第２検出部１５２に出力する。また、送受信部１５１は、送信頻度決定部１５５から出力された送信頻度制御情報を撮像装置１１０に送信する。

第２検出部１５２は、送受信部１５１から出力された送信サンプルに対して、撮像装置１１０の第１検出部１１２よりもメモリなどのリソースを多く必要とする検出処理（例えば、第１検出部１１２とは異なる次元の特徴量を検出する処理）を行い、検出スコアを求める。ここで、第１検出部１１２よりもリソースを多く必要とする検出処理としては、第１検出部１１２より高精度な検出結果が得られる処理である。第２検出部１５２は、求めた検出スコアが所定の閾値未満となる送信サンプルを誤検出と判定し、撮像装置毎に誤検出と判定した頻度（単位時間当たりの回数）を計測する。第２検出部１５２は、撮像装置毎に誤検出と判定した頻度（誤検出頻度）及び撮像装置を特定するＩＤを第２記憶部１５４に出力し、また、誤検出頻度の高い撮像装置を特定するＩＤを通知部１５３に出力する。

通知部１５３は、第２検出部１５２から出力されたＩＤを管理者に通知する。

第２記憶部１５４は、第２検出部１５２から出力された撮像装置毎の誤検出頻度及び撮像装置のＩＤを記憶する。第２記憶部１５４は、既に記憶している誤検出頻度の高い撮像装置と第２検出部１５２から出力された誤検出頻度の高い撮像装置とが一致した場合、この撮像装置のＩＤを送信頻度決定部１５５に出力する。ここで、誤検出頻度が高いとは、誤検出頻度が所定の閾値以上であることを意図する。また、第２記憶部１５４は、設置直後の撮像装置、学習モデル更新直後の撮像装置、及び、学習サンプル収集中の撮像装置についても、これらの撮像装置を特定するＩＤを送信頻度決定部１５５に出力する。

送信頻度決定部１５５は、第２記憶部１５４から出力されたＩＤが示す撮像装置に対して、送信サンプルの送信頻度を高める送信頻度制御情報を生成して、送受信部１５１に出力する。これにより、複数の撮像装置間においてより多くの送信サンプルの収集が望まれる撮像装置に優先的に帯域を割り当てることができる。また、このとき、限られた帯域を複数の撮像装置間で共用するため、送信頻度決定部１５５は、誤検出頻度の少ない撮像装置を第２記憶部１５４から読み出し、読み出した撮像装置に対して送信サンプルの送信頻度を低くする送信頻度制御情報を生成する。このように、送信頻度決定部１５５は、複数の撮像装置に対して、誤検出頻度に応じた送信頻度の制御を行い、送信サンプル数を増減させる。

次に、上述した画像監視システム１００の動作について説明する。まず、撮像装置１１０では、カメラ部１１１によって撮像された画像から所望の領域及びその検出スコアが第１検出部１１２において検出される。

検出画像及びその検出スコアを含む検出サンプルは第１記憶部１１３に記憶され、図３に示すように、所定期間分の検出サンプルＤＳ_Ａ，ＤＳ_Ｂ，・・・，ＤＳ_Ｋ（ここでは、Ｋ＝Ｄとする）が送信サンプル制御部１１４に出力される。

所定期間分の検出サンプルＤＳ_Ａ，ＤＳ_Ｂ，・・・，ＤＳ_Ｄのうち、検出スコアが低い方から帯域分（ここでは、３個の送信サンプルを送信可能とする）の検出サンプルＤＳ_Ｂ，ＤＳ_Ｃ，ＤＳ_Ｄ（ただし、検出スコアはＳ_Ｂ＜Ｓ_Ｃ＜Ｓ_Ｄ＜Ｓ_Ａとする）が送信サンプル制御部１１４において選択され、選択された検出サンプルＤＳ_Ｂ，ＤＳ_Ｃ，ＤＳ_Ｄに対応する送信サンプルＳＳ_Ｂ，ＳＳ_Ｃ，ＳＳ_Ｄが送受信部１１５を介してサーバ１５０に送信される。

このように、検出スコアの低い検出画像を優先的にサーバ１５０に送信することにより、サーバ１５０が誤検出の可能性の高い検出画像に対して、より高精度な検出を行うことができる。

サーバ１５０では、撮像装置１１０から送信された送信サンプルＳＳ_Ｂ，ＳＳ_Ｃ，ＳＳ_Ｄに対して、第１検出部１１２よりもリソースを多く必要とする検出処理が第２検出部１５２によって行われ、検出スコアが求められる。第２検出部１５２では、求められた検出スコアが所定の閾値未満となる送信サンプルが誤検出と判定され、撮像装置毎に誤検出と判定した頻度が計測される。

第２記憶部１５４では、既に記憶している誤検出頻度の高い撮像装置と第２検出部１５２から出力された誤検出頻度の高い撮像装置とが一致した場合、この撮像装置のＩＤが送信頻度決定部１５５に出力される。このように、第２検出部１５２から出力された誤検出頻度の高い撮像装置が既に記憶されていることを確認することにより、継続して誤検出が生じている撮像装置を特定することができる。

送信頻度決定部１５５では、第２記憶部１５４によって特定されたＩＤが示す撮像装置に対して、送信サンプルの送信頻度を高める送信頻度制御情報が生成される。また、誤検出頻度の少ない撮像装置のＩＤが第２記憶部１５４から読み出され、読み出された撮像装置に対して送信サンプルの送信頻度を低くする送信頻度制御情報が生成される。

送信頻度決定部１５５によって生成された送信頻度制御情報は、送受信部１５１を介して撮像装置１１０に送信される。

撮像装置１１０の送信サンプル制御部１１４では、サーバ１５０から送信された送信頻度制御情報を取得し、取得した送信頻度制御情報が指示する送信頻度に応じた数の検出サンプルが選択され、選択された検出サンプルに対応する送信サンプルが送受信部１１５を介してサーバ１５０に送信される。

このように、複数の撮像装置に対して、誤検出の頻度に応じて、送信頻度を制御し、限られた帯域内で送信サンプル数を増減させることにより、サーバ１５０が検出画像の誤検出判定をより高精度に行うことができる。例えば、図４（ａ）を参照するに、送信頻度制御前において、カメラ１〜３が送信サンプルをそれぞれ３枚サーバに送信していたものとする。ここで、カメラ１は、送信サンプルが誤検出と判定されたとし、カメラ２は、長期間にわたって誤検出と判定されなかったとし、カメラ３は、学習モデル更新直後とする。このような場合において、送信頻度決定部１５５はカメラ１とカメラ３の送信頻度を高く設定し、カメラ２の送信頻度を低く設定する。この結果、送信頻度制御後において、図４（ｂ）に示すように、カメラ１及びカメラ３は送信サンプルをそれぞれ４枚送信し、カメラ２は送信サンプルを１枚送信するようになる。

このように、実施の形態１によれば、撮像装置の第１検出部において検出された検出画像のうち、検出スコアの低い検出画像を優先的にサーバに送信し、サーバの第２検出部が撮像装置によって送信された検出画像に対して、第１検出部よりもリソースを必要とする検出処理を行い、これによって求められた検出スコアに基づいて、当該検出画像が誤検出であるか否かを判定し、誤検出頻度の高い撮像装置に送信頻度を高めるよう指示する。これにより、送信頻度を高くするよう指示された撮像装置は、検出画像を多く送信し、サーバが検出画像の誤検出判定をより高精度に行うことができるので、撮像装置の処理負荷を低減し、誤検出頻度の高い撮像装置からの検出画像を精度良く検証することができる。

（実施の形態２）
図５は、本発明の実施の形態２に係る画像監視システム２００の構成を示すブロック図である。以下、図５を用いて画像監視システム２００の構成について説明する。ただし、図５が図２と異なる点は、撮像装置において、送信サンプル制御部１１４を送信サンプル制御部２１１に変更し、また、サーバにおいて、第２記憶部１５４を削除し、第２検出部１５２を第２検出部２５１に変更し、送信頻度決定部１５５を誤検出領域決定部２５２に変更した点である。

送信サンプル制御部２１１は、第１記憶部１１３から出力された所定期間分の検出サンプルのうち、検出スコアが低い方から帯域分の検出サンプルを選択し、選択した検出サンプルに対応する送信サンプルを送受信部１１５に出力する。また、送信サンプル制御部２１１は、送受信部１１５から誤検出領域情報が出力された場合、誤検出領域情報が指示する領域の検出サンプルを第１記憶部１１３から読み出し、読み出した検出サンプルに対応する送信サンプルを送受信部１１５に出力する。

第２検出部２５１は、送受信部１５１から出力された送信サンプルに対して、撮像装置２１０の第１検出部１１２よりもメモリなどのリソースを多く必要とする検出処理を行い、検出スコアを求める。第２検出部２５１は、求めた検出スコアが所定の閾値未満となる送信サンプルを誤検出と判定し、誤検出と判定された送信サンプルの検出位置と誤検出領域決定部２５２に出力する。

誤検出領域決定部２５２は、第２検出部２５１から出力された検出位置に基づいて、入力画像全体を複数の領域に分割した領域毎に、誤検出判定された送信サンプルの数を計測する。誤検出領域決定部２５２は、所定の数が計測された領域を示す誤検出領域情報を生成して、送受信部１５１に出力する。なお、誤検出領域決定部２５２は、撮像装置２１０に対して送信サンプルの送信頻度を高くする指示（送信頻度制御情報）を誤検出領域情報と共に送受信部１５１に出力してもよい。

なお、カメラが複数ある場合は、カメラ毎に入力画像全体を複数の領域に分割し、分割した領域毎に、誤検出判定された送信サンプルの数を計測するようにしてもよい。誤検出領域決定部２５２は、カメラ毎に所定の数が計測された領域を示す誤検出領域情報を生成して、送受信部１５１に出力する。

次に、上述した画像監視システム２００の送信サンプル制御部２１１の動作について図６を用いて説明する。図６は、所定期間に入力された画像における検出枠１〜６を示している。ここでは、説明の都合上、異なる入力画像における検出枠を同一入力画像上に示し、入力画像全体を６つの領域（ａ〜ｆ）に分割した例を示している。

送信サンプル制御部２１１は、初期設定時及びサーバ２５０から誤検出領域情報を受信しない場合、図６に示す入力画像全体から検出スコアの低い検出画像を均等に選択する。ここでは、送信サンプル数を３とし、検出枠１，３，６が選択されるものとする。なお、複数の検出画像が近接している場合には、一つの検出画像を選択する。具体的には、図６において、検出枠２，３，５のうち、検出枠３の検出スコアが最も低い場合、検出枠３が選択される。

また、送信サンプル制御部２１１は、サーバ２５０から誤検出領域情報（ここでは、領域ｂを示す）を受信した場合、誤検出領域情報が示す領域ｂの検出枠を送信サンプル数分選択する。具体的には、送信サンプル数を３とした場合、誤検出領域情報が領域ｂを示しているため、検出枠２，３，５が選択される。ただし、誤検出領域情報が示す領域に送信サンプル数以上の検出枠がある場合には、検出スコアの低い検出枠から順に選択される。また、誤検出領域情報が示す領域に送信サンプル数未満の検出枠しかない場合には、送信サンプル数を満たすために、入力画像全体から検出スコアの低い検出枠が選択される。

このように、実施の形態２によれば、撮像装置の第１検出部において検出された検出画像のうち、検出スコアの低い検出画像を優先的にサーバに送信し、サーバの第２検出部が撮像装置によって送信された検出画像に対して、第１検出部よりもリソースを必要とする検出処理を行い、これによって求められた検出スコアに基づいて、当該検出画像が誤検出であるか否かを判定し、撮像装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を送信するよう撮像装置に指示する。これにより、撮像装置は、誤検出領域情報によって指示された領域の画像をサーバに送信し、サーバが検出画像の誤検出判定をより高精度に行うことができるので、誤検出と判定された領域を精度良く検証することができる。

以上、実施の形態について説明した。

なお、上記各実施の形態では、撮像装置１１０（２１０）の第１記憶部１１３から所定期間分の検出サンプルを送信サンプル制御部１１４（２１１）に送信する場合について説明したが、図７に示す構成としてもよい。図７では、第１記憶部１１３は、第１検出部１１２から出力された検出サンプル（例えば、ＤＳ_Ａ，ＤＳ_Ｂ，ＤＳ_Ｃ，ＤＳ_Ｄ）を記憶し、記憶した検出サンプルのうち、検出ＩＤ及び検出スコアを含む検出リストを送信サンプル制御部１１４に出力し、記憶した検出サンプル（ＤＳ_Ａ，ＤＳ_Ｂ，ＤＳ_Ｃ，ＤＳ_Ｄ）に対応する送信サンプル（ＳＳ_Ａ，ＳＳ_Ｂ，ＳＳ_Ｃ，ＳＳ_Ｄ）を送受信部に出力する。なお、検出リストは、検出ＩＤと検出スコアとを組みとし、例えば、（ＩＤ_Ａ，Ｓ_Ａ），（ＩＤ_Ｂ，Ｓ_Ｂ），（ＩＤ_Ｃ，Ｓ_Ｃ），（ＩＤ_Ｄ，Ｓ_Ｄ）を検出リストとする。

送信サンプル制御部１１４は、第１記憶部１１３から出力された検出リストから送信サンプルリスト（例えば、２個の送信サンプルを送信可能な場合、ＩＤ_Ａ，ＩＤ_Ｂ）を生成して、送受信部１１５に出力する。

送受信部１１５は、送信サンプル制御部１１４から出力された送信サンプルリスト（ＩＤ_Ａ，ＩＤ_Ｂ）に該当する送信サンプル（ＳＳ_Ａ，ＳＳ_Ｂ）を第１記憶部１１３から出力された送信サンプル（ＳＳ_Ａ，ＳＳ_Ｂ，ＳＳ_Ｃ，ＳＳ_Ｄ）から選択し、サーバに送信する。

また、上記実施の形態１では、サーバ１５０が送信頻度決定部１５５を備え、上記実施の形態２では、サーバ２５０が誤検出領域決定部２５１を備える場合について説明したが、本発明はこれに限らない。例えば、図８に示すように、第２検出部１５２において、検出スコアが閾値未満となる頻度が高い送信サンプルを求め、この送信サンプルを送信した撮像装置を特定するＩＤを通知部１５３に通知するようにしてもよい。

このように、撮像装置の第１検出部に比べ、リソースをより多く必要とする検出処理をサーバの第２検出部が行うことにより、撮像装置の処理負荷を低減し、撮像装置における誤検出を効率良く判定することができる。

なお、上記各実施の形態では、画像監視システム、サーバ装置、撮像装置及び画像判定方法について述べたが、本発明を用いて画像監視以外の用途のシステム、例えば画像から人物または顔を検出することにより、店舗内の来店者の動向を分析するシステム、工場内での作業員の作業分析を行う画像処理システム等を構築することも可能である。

また、カメラ部としては防犯用途の監視カメラであってもよいし、防犯用途以外のネットワークカメラであってもよい。

また、撮像装置１１０とサーバ１５０は、有線のネットワークで接続されてもよいし、無線のネットワークで接続されていてもよい。

２０１２年４月１８日出願の特願２０１２−０９４５３８の日本出願に含まれる明細書、図面及び要約書の開示内容は、すべて本願に援用される。

本発明にかかる画像処理システム、サーバ装置、撮像装置及び画像判定方法は、撮像装置の処理負荷を低減し、撮像装置における誤検出を効率良く判定するのに好適である。

１１０、２１０ 撮像装置
１１１ カメラ部
１１２ 第１検出部
１１３ 第１記憶部
１１４、２１１ 送信サンプル制御部
１１５、１５１ 送受信部
１５０、２５０ サーバ
１５２、２５１ 第２検出部
１５３ 通知部
１５４ 第２記憶部
１５５ 送信頻度決定部
２５２ 誤検出領域決定部

本発明は、撮像した画像から所望のデータを抽出する画像処理システム、受信装置、画像送信装置、画像処理方法、受信側画像処理方法、及び、画像送信方法に関する。

本発明の画像処理システムは、画像から所望の画像領域を検出する第１検出部と、検出された前記画像領域を選択する送信サンプル制御部と、選択された前記画像領域を送信する送信部と、を有する画像送信装置と、前記画像送信装置から送信された前記画像領域に対して、前記第１検出部よりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、を有する受信装置と、を具備する構成を採る。

本発明の受信装置は、装置から送信された画像領域に対して、前記装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、誤検出と判定された頻度が所定の頻度以上となる装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定部と、生成された前記送信頻度制御情報を前記装置に送信する送信部と、を具備する構成を採る。
また、本発明の受信装置は、画像送信装置から送信された画像領域に対して、前記画像送信装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、前記画像送信装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定部と、生成された前記誤検出領域情報を前記画像送信装置に送信する送信部と、を具備する構成を採る。

本発明の画像送信装置は、画像から所望の画像領域を検出する第１検出部と、検出された前記画像領域のうち、第１検出スコアに基づいて画像領域を選択する送信サンプル制御部と、選択された前記画像領域を送信する送信部と、を具備する構成を採る。

本発明の画像処理方法は、画像から所望の画像領域を検出する第１検出ステップと、検出された前記画像領域を選択する送信サンプル制御ステップと、選択された前記画像領域を送信する送信ステップと、を有する画像送信ステップと、前記画像領域に対して、前記第１検出ステップよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、を有する受信側画像処理ステップと、を具備する構成を採る。

本発明の受信側画像処理方法は、画像送信ステップによって送信された画像領域に対して、前記画像送信ステップにおける前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、誤検出と判定された頻度が所定の頻度以上となる装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定ステップと、生成された前記送信頻度制御情報を前記装置に送信する送信ステップと、を具備する構成を採る。
また、本発明の受信側画像処理方法は、装置から送信された画像領域に対して、前記装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、前記装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定ステップと、生成された前記誤検出領域情報を前記装置に送信する送信ステップと、を具備する構成を採る。

本発明の画像送信方法は、画像から所望の画像領域を検出する第１検出ステップと、検出された前記画像領域のうち、第１検出スコアに基づいて画像領域を選択する送信サンプル制御ステップと、選択された前記画像領域を送信する送信ステップと、を具備する構成を採る。

本発明の一態様に係る画像処理システムは、画像から所望の画像領域を検出する第１検出部と、検出された前記画像領域を選択する送信サンプル制御部と、選択された前記画像領域を送信する送信部と、を有する画像送信装置と、前記画像送信装置から送信された前記画像領域に対して、前記第１検出部よりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、を有する受信装置と、を具備する構成を採る。

本発明の一態様に係る受信装置は、装置から送信された画像領域に対して、前記装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、誤検出と判定された頻度が所定の頻度以上となる装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定部と、生成された前記送信頻度制御情報を前記装置に送信する送信部と、を具備する構成を採る。
また、本発明の受信装置は、画像送信装置から送信された画像領域に対して、前記画像送信装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出部と、前記画像送信装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定部と、生成された前記誤検出領域情報を前記画像送信装置に送信する送信部と、を具備する構成を採る。

本発明の一態様に係る画像送信装置は、画像から所望の画像領域を検出する第１検出部と、検出された前記画像領域のうち、第１検出スコアに基づいて画像領域を選択する送信サンプル制御部と、選択された前記画像領域を送信する送信部と、を具備する構成を採る。

本発明の一態様に係る画像処理方法は、画像から所望の画像領域を検出する第１検出ステップと、検出された前記画像領域を選択する送信サンプル制御ステップと、選択された前記画像領域を送信する送信ステップと、を有する画像送信ステップと、前記画像領域に対して、前記第１検出ステップよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、を有する受信側画像処理ステップと、を具備する構成を採る。

本発明の一態様に係る受信側画像処理方法は、画像送信ステップによって送信された画像領域に対して、前記画像送信ステップにおける前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、誤検出と判定された頻度が所定の頻度以上となる装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定ステップと、生成された前記送信頻度制御情報を前記装置に送信する送信ステップと、を具備する構成を採る。
また、本発明の受信側画像処理方法は、装置から送信された画像領域に対して、前記装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出ステップと、前記装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定ステップと、生成された前記誤検出領域情報を前記装置に送信する送信ステップと、を具備する構成を採る。

本発明の一態様に係る画像送信方法は、画像から所望の画像領域を検出する第１検出ステップと、検出された前記画像領域のうち、第１検出スコアに基づいて画像領域を選択する送信サンプル制御ステップと、選択された前記画像領域を送信する送信ステップと、を具備する構成を採る。

Claims (8)

1. 撮像素子から画像を入力する撮像手段と、
   入力された前記画像から所望の画像領域を検出する第１検出手段と、
   検出された前記画像領域のうち、第１検出スコアの低い方から順に帯域分の画像領域を選択する送信サンプル制御手段と、
   選択された前記画像領域を送信する送信手段と、
   を有する撮像装置と、
   前記撮像装置から送信された前記画像領域に対して、前記第１検出手段よりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段、
   を有するサーバ装置と、
   を具備する画像処理システム。
2. 撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段と、
   誤検出と判定された頻度が所定の頻度以上となる撮像装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定手段と、
   生成された前記送信頻度制御情報を前記撮像装置に送信する送信手段と、
   を具備するサーバ装置。
3. 前記送信頻度決定手段は、誤検出と判定された頻度が所定の頻度以上の前記画像領域が過去に誤検出と判定されていた場合、前記送信頻度を決定する請求項２に記載のサーバ装置。
4. 撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出手段と、
   前記撮像装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定手段と、
   生成された前記誤検出領域情報を前記撮像装置に送信する送信手段と、
   を具備するサーバ装置。
5. 誤検出と判定された頻度が所定の頻度以上となる撮像装置を管理者に通知する通知手段を具備する請求項２又は請求項４に記載のサーバ装置。
6. 撮像素子から画像を入力する撮像手段と、
   入力された前記画像から所望の画像領域を検出する第１検出手段と、
   検出された前記画像領域のうち、第１検出スコアの低い方から順に帯域分の画像領域を選択する送信サンプル制御手段と、
   選択された前記画像領域を送信する送信手段と、
   を具備する撮像装置。
7. 撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出工程と、
   誤検出と判定された頻度が所定の頻度以上となる撮像装置に対して送信頻度を決定し、決定された前記送信頻度を示す送信頻度制御情報を生成する送信頻度決定工程と、
   を具備する画像判定方法。
8. 撮像装置から送信された画像領域に対して、前記撮像装置における前記画像領域の検出に用いられたリソースよりも多くのリソースを必要とする検出処理を行い、検出した第２検出スコアが所定の閾値未満となる前記画像領域を誤検出と判定する第２検出工程と、
   前記撮像装置における入力画像全体を複数の領域に分割した領域毎に、誤検出と判定された検出画像の数を計測し、所定の数が計測された領域を決定し、決定された領域を示す誤検出領域情報を生成する誤検出領域決定工程と、
   を具備する画像判定方法。
   

Images