JP2005267389A - 動画像解析システム及びその装置 - Google Patents

動画像解析システム及びその装置 Download PDF

Info

Publication number
JP2005267389A
JP2005267389A JP2004080771A JP2004080771A JP2005267389A JP 2005267389 A JP2005267389 A JP 2005267389A JP 2004080771 A JP2004080771 A JP 2004080771A JP 2004080771 A JP2004080771 A JP 2004080771A JP 2005267389 A JP2005267389 A JP 2005267389A
Authority
JP
Japan
Prior art keywords
image sensor
moving image
sensor device
processing
image analysis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2004080771A
Other languages
English (en)
Inventor
Mitsuyo Hasegawa
充世 長谷川
Maki Miura
真樹 三浦
Seiichi Kakinuma
成一 柿沼
Yasuo Sumita
恭雄 簾田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujitsu Ltd
Original Assignee
Fujitsu Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujitsu Ltd filed Critical Fujitsu Ltd
Priority to JP2004080771A priority Critical patent/JP2005267389A/ja
Priority to US10/948,759 priority patent/US20050206742A1/en
Publication of JP2005267389A publication Critical patent/JP2005267389A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】 本発明は、全ての画像センサ装置またはセンタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる動画像解析システム及びその装置を提供することを目的とする。
【解決手段】 ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムにおいて、センタ装置は各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知し、各画像センサ装置は、高速の動画像解析であるリアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速で高精度の動画像解析である高精度処理を依頼する。
【選択図】 図４

Description

本発明は、動画像解析システム及びその装置に関し、複数の画像センサ装置それぞれで動画像解析を行う動画像解析システム及びその装置に関する。
図１は、交通監視、侵入者監視等の監視用途に用いられる動画像解析システムの一例のシステム構成図を示す。同図中、複数の画像センサ装置１０１〜１０ｎそれぞれはカメラで撮像した動画像データについて各種センシング処理を行い、センシング処理で得られた処理結果情報をＩＰネットワーク等のネットワーク１２を経由して監視センタ１４に設置されたセンタ装置１６に通知する。
図２は、従来の画像センサ装置の一例の機能ブロック図を示す。同図中、カメラ２０で撮像された動画像は検知トリガ検出処理部２１に供給され、ここで検知トリガを検出する。検知トリガ検出処理部２１は検知トリガを検出すると、動画像を画像センシング処理部２２に供給して動画像のセンシング処理を行う。検知結果送信処理部２３ではセンシング処理の処理結果である検知情報をネットワーク１２に送出する。
図３は、従来のセンタ装置の一例の機能ブロック図を示す。同図中、各画像センサ装置１０１〜１０ｎからネットワーク１２を通してセンタ装置１６に対し送信された検知情報は検知結果受信処理部２５で受信され、検知結果保存処理部２６に供給される。検知結果保存処理部２６は受信した検知情報を送信元の画像センサ装置毎に検知情報保存部２７に保存する。
また、従来の遠隔監視システムとして、例えば特許文献１，２に記載のものがある。特許文献１には、監視端末装置で監視対象を監視して異常検出時に画像データを監視センタ装置に転送して表示するシステムで、異常時には正常時より解像度を高くすることが記載されている。
特許文献２には、ネットワークを介して印刷データのやり取りを行う画像処理装置で、自装置にて処理できない作業を他の装置に割り振って処理が滞ることを回避し、画像処理の作業効率を向上させることが記載されている。
特開平１１−７５１７６号公報 特開２００２−１３５５０８号公報
画像センサ装置１０１〜１０ｎは屋外に設置される場合も多く、この場合、耐環境性や小型軽量を求められるため汎用的なパーソナルコンピュータではなく専用装置として設計されている。このため、リアルタイムにセンシング処理を行なう場合には、センシング処理にある程度の時間を要する。このため、センシング事象が多発した場合を想定して、高速であるが精度の低いセンシング処理のアルゴリズムが使用されている。
このため、センシング事象の発生頻度が低く処理能力に余裕がある場合にも、センシング事象が多発した場合に合わせた高速アルゴリズムを使用することになり、より時間のかかる高精度アルゴリズムであれば検知可能な入力画像に対して、検知無しあるいは特定不可となる可能性があるという問題があった。
近年は高性能のパーソナルコンピュータが開発されているが、多地点に配備する画像センサ装置１０１〜１０ｎのハードウェア性能を上げるとコストアップにつながり、また、先に述べた耐環境性にも問題があるため、画像センサ装置１０１〜１０ｎは、その時点で最高速のパーソナルコンピュータの処理性能に比べて処理性能で劣る。画像センサ装置１０１〜１０ｎは画像センサ装置同士でも疎通可能なネットワークに接続されているにもかかわらず、単純に自装置の検知結果をセンタ装置に通知するだけで全ての画像センサ装置のトータル能力が生かせていないという問題があった。
一方、センタ装置１６は設置環境が整備された監視センタ１４に置かれる場合が多く、高性能なコンピュータを設置することができるにもかかわらず、各画像センサ装置１０１〜１０ｎからの通知結果の受信・保存・管理といった簡単な処理にとどまっているという問題があった。
本発明は、上記の点に鑑みなされたものであり、全ての画像センサ装置またはセンタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる動画像解析システム及びその装置を提供することを目的とする。
請求項１に記載の発明は、ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムにおいて、
センタ装置は各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知し、
各画像センサ装置は、高速の動画像解析であるリアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速で高精度の動画像解析である高精度処理を依頼することにより、
全ての画像センサ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知することができる。
請求項２に記載の発明では、各画像センサ装置は、前記リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することにより、
センタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる。
請求項３に記載の発明は、ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムの画像センサ装置において、
前記センタ装置から報知されるセンシング事象発生頻度が低い画像センサ装置のアドバタイズデータを受信して保持するアドバタイズデータ保持手段と、
高速の動画像解析を行うリアルタイム処理手段と、
低速で高精度の動画像解析を行う高精度処理手段と、
前記リアルタイム処理手段でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速の動画像解析である高精度処理を依頼する依頼手段を有し、
請求項４に記載の発明は、ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムのセンタ装置において、
各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知する報知手段を有することにより、
全ての画像センサ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知することができる。
請求項５に記載の発明は、リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することにより、
センタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる。
請求項１に記載の発明によれば、全ての画像センサ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知することができる。
請求項２に記載の発明によれば、センタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる。
請求項３，４に記載の発明によれば、全ての画像センサ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知することができる。
請求項５に記載の発明によれば、センタ装置の能力を生かし高精度の動画像解析によりセンシング事象を検知できる。
以下、図面に基づいて本発明の実施形態について説明する。
図４は、本発明の画像センサ装置の一実施形態の機能ブロック図を示す。画像センサ装置１０１〜１０ｎは同一構成である。同図中、カメラ３０で撮像された動画像は検知トリガ検出処理部３２に供給され、ここで検知トリガを検出する。検知トリガ検出処理部３２は検知トリガを検知処理スイッチ部３４に供給する。
検知処理スイッチ部３４は、検知トリガつまりセンシング事象の発生頻度が所定値より高い場合には、高速の動画像解析を行うリアルタイム処理の画像センシング処理部３６に動画像を供給し、センシング事象の発生頻度が所定値より低い場合には、低速の高精度の動画像解析を行う高精度処理の画像センシング処理部３８に動画像を供給する。
画像センシング処理部３６で動画像のリアルタイム処理を行ってセンシング結果が確定しないとき、高精度処理依頼判定部４０は、アドバタイズ受信処理部４２に格納されているアドバタイズ情報から代理処理を依頼する画像センサ装置を選出する。そして、高精度処理依頼送信部４４に選出した画像センサ装置に対し低速の高精度処理の代理処理依頼と共に動画像を送信させる。なお、アドバタイズ受信処理部４２にはセンタ装置１６から報知された、現在センシング事象の発生頻度が低い画像センサ装置のアドレスであるアドバタイズ情報が格納されている。
画像センシング処理部３６で得られたセンシング処理結果としての検知情報は高精度処理依頼判定部４０から検知結果送信処理部４６，ネットワーク１２を通してセンタ装置１６に送信され、画像センシング処理部３８で得られた検知情報は検知結果送信処理部４６からネットワーク１２を通してセンタ装置１６に送信される。
また、高精度処理依頼受信部４８は、ネットワーク１２から自装置宛の高精度処理の代理処理依頼と共に動画像を受信し、この動画像を画像センシング処理部３８に供給して高精度処理を実行させる。
図５は、本発明のセンタ装置の第１実施形態の機能ブロック図を示す。同図中、画像センサ装置１０１〜１０ｎからネットワーク１２を通してセンタ装置１６に対し送信された検知情報は検知結果受信処理部５０で受信され、検知結果保存処理部５２に供給される。検知結果保存処理部５２は受信した検知情報を送信元の画像センサ装置毎に検知情報保存部５４に保存する。
検知結果受信処理部５０で受信された検知情報は検知頻度統計処理部５６に供給され、検知頻度統計処理部５６は画像センサ装置毎にセンシング事象通知頻度の統計を取り、得られた統計情報を統計情報保存部５８に保存する。
アドバタイズデータ作成処理部６０は、統計情報保存部５８の統計情報から、画像センサ装置毎にセンシング事象発生頻度が所定の閾値より低い時間帯（曜日，時間）を特定し、定期的に現在センシング事象の発生頻度が閾値より低くＣＰＵ負荷の低い画像センサ装置を選択し、選択した画像センサ装置のアドレスを報知するアドバタイズデータを作成する。このアドバタイズデータはアドバタイズデータ送信処理部６２から定期的にネットワーク１２に送出され、全ての画像センサ装置１０１〜１０ｎに報知される。
図６に、本発明の動画像解析システムの一実施形態の動作シーケンスを示す。同図中、センタ装置１６は、定期的にネットワーク１２を介して全ての画像センサ装置１０１〜１０ｎにアドバタイズデータを報知する。
画像センサ装置１０２の画像センシング処理部３６で動画像のリアルタイム処理を行ってセンシング結果が確定しないとき、画像センサ装置１０２はアドバタイズデータに基づいて画像センサ装置１０ｎ−１に対し低速の高精度処理の代理処理依頼と共に動画像を送信する。画像センサ装置１０ｎ−１はこの動画像に対し低速の高精度処理を行い、その検知情報をネットワーク１２を通してセンタ装置１６に通知する。
図７は、本発明の画像センサ装置の一実施形態の詳細機能ブロック図を示す。同図中、図４と同一部分には同一符号を付す。図７において、画像センサ装置１０１〜１０ｎは同一構成である。同図中、撮像範囲が固定されたカメラ３０で撮像された動画像は検知トリガ検出処理部３２に供給される。検知トリガ検出処理部３２は撮像された画像の変化を検知トリガとして検出し、検知処理スイッチ部３４に供給する。また、動画像を画像バッファ３３に格納する。
検知処理スイッチ部３４は、トリガ頻度判定部３４ａとスイッチ部３４ｂから構成されている。トリガ頻度判定部３４ａは検知トリガつまりセンシング事象の発生頻度を所定値と比較し、発生頻度が所定値より高い場合には、動画像を高速のリアルタイム処理を行う画像センシング処理部３６で処理するようスイッチ部３４ｂを通して指示し、センシング事象の発生頻度が所定値より低い場合には、動画像を低速の高精度処理を行う画像センシング処理部３８で処理するようスイッチ部３４ｂを通して指示する。
画像センシング処理部３６，３８それぞれは、パターンマッチング処理候補切出部３６ａ，３８ａとパターンマッチング処理部３６ｂ，３８ｂから構成されている。パターンマッチング処理候補切出部３６ａ，３８ａは画像バッファ３３から読み出された動画像から動きのある部分をパターンマッチング処理の候補として切出すが、パターンマッチング処理候補切出部３６ａの出力する候補数は例えば１〜２パターンであるのに対し、パターンマッチング処理候補切出部３８ａの出力する候補数は例えば１０パターンである。
パターンマッチング処理部３６ｂ，３８ｂは、パターンマッチング処理候補切出部３６ａ，３８ａから供給される各候補について複数のテンプレートとパターンマッチングする。テンプレートとしては、検知対象物の例えば人間の画像、検知対象物以外の犬、猫等の画像である。
ここで、パターンマッチング処理部３６ｂの用意しているテンプレートは例えば数パターンであるのに対し、パターンマッチング処理部３８ｂの用意しているテンプレートは例えば数１０パターンである。このため、画像センシング処理部３６は高速のリアルタイム処理を行い、画像センシング処理部３８は低速の高精度処理を行うことになる。
画像センシング処理部３６で動画像のリアルタイム処理を行ってセンシング結果が確定しないとき、高精度処理依頼判定部４０は、リアルタイム処理失敗通知部４５からネットワーク１２を介してセンタ装置１６に失敗通知を行う。これと共に、アドバタイズ受信処理部４２にアドバタイズ情報として格納されている現在センシング事象の発生頻度が低い画像センサ装置から乱数等を用いて代理処理を依頼する画像センサ装置をランダムに選出する。そして、高精度処理依頼送信部４４にネットワーク１２を介して選出した画像センサ装置に対し低速の高精度処理の代理処理依頼と共に動画像を送信させる。
なお、センタ装置１６が高精度処理依頼受信部と高精度処理の画像センシング処理部を有する場合には、センタ装置１６に対し低速の高精度処理の代理処理依頼と共に動画像を送信させる場合もある。
画像センシング処理部３６で得られたセンシング処理結果としての検知情報は高精度処理依頼判定部４０から検知結果送信処理部４６，ネットワーク１２を通してセンタ装置１６に送信され、画像センシング処理部３８で得られた検知情報は検知結果送信処理部４６からネットワーク１２を通してセンタ装置１６に送信される。
また、高精度処理依頼受信部４８は、ネットワーク１２から自装置宛の高精度処理の代理処理依頼と共に動画像を受信し、この動画像を画像センシング処理部３８に供給して高精度処理を実行させる。
図８は、本発明のセンタ装置の第２実施形態の機能ブロック図を示す。同図中、図５と同一部分には同一符号を付す。図８において、画像センサ装置１０１〜１０ｎからネットワーク１２を通してセンタ装置１６に対し送信された検知情報は検知結果受信処理部５０で受信され、検知結果保存処理部５２に供給される。検知結果保存処理部５２は受信した検知情報を送信元の画像センサ装置毎に検知情報保存部５４に保存する。
検知情報保存部５４における検知情報保存フォーマットを図９に示す。図９では画像センサ装置毎に、事象発生時刻と、処理依頼中であるかどうかを示す結果確定フラグと、対象物を検知したかどうか等の検知結果が格納される。
検知結果受信処理部５０で受信された検知情報は検知頻度統計処理部５６に供給され、検知頻度統計処理部５６は画像センサ装置毎にセンシング事象通知頻度の統計を取り、得られた統計情報を統計情報保存部５８に保存する。
アドバタイズデータ作成処理部６０は、統計情報保存部５８の統計情報から、画像センサ装置毎にセンシング事象発生頻度が所定の閾値より低い時間帯（曜日，時間）を特定し、定期的に現在センシング事象の発生頻度が閾値より低くＣＰＵ負荷の低い画像センサ装置を選出し、選出した画像センサ装置のアドレスとその有効期限を報知するアドバタイズデータを作成する。このアドバタイズデータはアドバタイズデータ送信処理部６２から定期的にネットワーク１２に送出され、全ての画像センサ装置１０１〜１０ｎに報知される。
図１０に、センタ装置１６が送信するアドバタイズデータのフォーマットを示す。先頭のＵＤＰ（Ｕｓｅｒ Ｄａｔａｇｒａｍ Ｐｒｏｔｏｃｏｌ）ヘッダ部には、到達可能なマルチキャストアドレスと、システム内の他のアプリケーションで使用されていない宛先ポート番号を含む。これに続いて、代理処理情報の総数と、総数分の代理処理情報が記載されている。各代理処理情報は画像センサ装置のＩＰアドレスと有効期限から構成されている。有効期限は統計情報保存部５８の統計情報から決定され、アドバタイズデータの送信周期以下の値とされている。
また、高精度処理依頼受信部６４は、ネットワーク１２から自装置宛の高精度処理の代理処理依頼と共に動画像を受信し、この動画像を画像センシング処理部６６に供給して高精度処理を実行させる。画像センシング処理部６６で得られた検知情報は検知結果保存処理部５２に供給され、依頼元の画像センサ装置毎に検知情報保存部５４に保存される。
図１１（Ａ），（Ｂ）は、本発明の画像センサ装置が実行する処理のフローチャートを示す。図１１（Ａ）において、ステップＳ１０でカメラ３０より動画像を入力する。検知トリガ検出処理部３２はステップＳ１２で画像の変化があるか否かを判別し、画像の変化があればステップＳ１４に進んで、検知処理スイッチ部３４によりセンシング事象の発生頻度が所定値より高く高速のリアルタイム処理が必要か否かを判別する。
リアルタイム処理が必要な場合、ステップＳ１６でパターンマッチング処理候補切出部３６ａは画像バッファ３３から読み出された動画像から動きのある部分（少数）をパターンマッチング処理の候補として切出し、ステップＳ１８でパターンマッチング処理部３６ｂは各候補について少数のテンプレートとパターンマッチングする。
この後、ステップＳ２０の判別でリアルタイム処理によるセンシング結果が確定しない、つまり検知対象物が不明の場合、ステップＳ２２で高精度処理依頼判定部４０はアドバタイズ情報を参照して代理処理を依頼する画像センサ装置を選出し、ステップＳ２４で高精度処理依頼送信部４４は選出した画像センサ装置に対し低速の高精度処理の代理処理依頼と動画像を送信する。また、ステップＳ２０の判別でリアルタイム処理によるセンシング結果が確定し検知対象物を検知した場合にはステップＳ２５で検知結果送信処理部４６は検知情報をセンタ装置１６に送信する。
一方、ステップＳ１４で高速のリアルタイム処理が不要と判断された場合、または高精度処理依頼受信部４８がステップＳ２６でネットワーク１２から自装置宛の高精度処理の代理処理依頼と共に動画像を受信した場合にはステップＳ２８に進む。ステップＳ２８ではパターンマッチング処理候補切出部３８ａは画像バッファ３３から読み出された動画像から動きのある部分（多数）をパターンマッチング処理の候補として切出し、ステップＳ３０でパターンマッチング処理部３８ｂは各候補について多数のテンプレートとパターンマッチングする。そして、ステップＳ３２の判別でリアルタイム処理によるセンシング結果が確定し検知対象物を検知した場合、またはセンシング結果が確定しない場合にはステップＳ２５で検知結果送信処理部４６は検知情報またはセンシング結果をセンタ装置１６に送信する。
図１１（Ｂ）において、アドバタイズ受信処理部４２はステップＳ３４でアドバタイズデータをネットワーク１２から受信すると、ステップＳ３６で受信したアドバタイズデータで既存のアドバタイズ情報を更新する。
図１２（Ａ），（Ｂ）は、本発明のセンタ装置が実行する処理のフローチャートを示す。図１２（Ａ）において、検知結果受信処理部５０はステップＳ４０で画像センサ装置１０１〜１０ｎからの検知情報を受信する。ステップＳ４２で検知結果保存処理部５２は受信した検知情報を送信元の画像センサ装置毎に検知情報保存部５４に保存する。また、ステップＳ４４で検知頻度統計処理部５６は画像センサ装置毎にセンシング事象通知頻度の統計を取り、得られた統計情報を統計情報保存部５８に保存する。
図１２（Ｂ）において、ステップＳ４６でアドバタイズタイマがタイムアウトすると、ステップＳ４８でアドバタイズデータ作成処理部６０は統計情報保存部５８の統計情報から、画像センサ装置毎にセンシング事象発生頻度が所定の閾値より低い時間帯（曜日，時間）を特定し、定期的に現在センシング事象の発生頻度が閾値より低くＣＰＵ負荷の低い画像センサ装置を選出する。
次にステップＳ５０でアドバタイズデータ作成処理部６０は選出した画像センサ装置の台数が所定値Ｘ未満か否かを判別する。ここで、画像センサ装置の総数をｎとしたとき所定値Ｘは例えばｎ／２とする。画像センサ装置の台数が所定値Ｘ未満であるとステップＳ５２で選出した画像センサ装置のＩＰアドレスを代理処理情報に記載したアドバタイズデータを作成し、画像センサ装置の台数が所定値Ｘ以上であるとステップＳ５４で代理処理情報の総数を０としたアドバタイズデータ（画像センサ装置のＩＰアドレスを代理処理情報に記載しない）を作成する。この後、ステップＳ５６でアドバタイズデータ送信処理部６２から作成したアドバタイズデータをネットワーク１２に送出する。
このように、画像センサ装置の台数が所定値Ｘ以上の場合に画像センサ装置のＩＰアドレスを代理処理情報に記載しないのは、多数の画像センサ装置から少数の画像センサ装置に代理処理依頼が集中すると依頼を受けた少数の画像センサ装置で処理が滞るので、これを避けるためである。
なお、アドバタイズ受信処理部４２が請求項記載のアドバタイズデータ保持手段に対応し、画像センシング処理部３６がリアルタイム処理手段に対応し、画像センシング処理部３８が高精度処理手段に対応し、高精度処理依頼送信部４４が依頼手段に対応し、検知結果保存処理部５２，検知頻度統計処理部５６，アドバタイズデータ作成処理部６０，アドバタイズデータ送信処理部６２が報知手段に対応し、検知処理スイッチ部３４がスイッチ手段に対応する。
（付記１）
ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムにおいて、
センタ装置は各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知し、
各画像センサ装置は、高速の動画像解析であるリアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速で高精度の動画像解析である高精度処理を依頼することを特徴とする動画像解析システム。
（付記２）
付記１記載の動画像解析システムにおいて、
前記各画像センサ装置は、前記リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することを特徴とする動画像解析システム。
（付記３）
ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムの画像センサ装置において、
前記センタ装置から報知されるセンシング事象発生頻度が低い画像センサ装置のアドバタイズデータを受信して保持するアドバタイズデータ保持手段と、
高速の動画像解析を行うリアルタイム処理手段と、
低速で高精度の動画像解析を行う高精度処理手段と、
前記リアルタイム処理手段でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速の動画像解析である高精度処理を依頼する依頼手段を
有することを特徴とする画像センサ装置。
（付記４）
ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムのセンタ装置において、
各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知する報知手段を
有することを特徴とするセンタ装置。
（付記５）
付記３記載の画像センサ装置において、
前記リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することを特徴とする画像センサ装置。
（付記６）
付記３または４記載の画像センサ装置において、
自装置でのセンシング事象の発生頻度が所定値より低いとき前記リアルタイム処理手段を動作させ、前記発生頻度が所定値より高いとき前記高精度処理手段を動作させるスイッチ手段を
有することを特徴とする画像センサ装置。
（付記７）
付記６記載の画像センサ装置において、
前記リアルタイム処理手段は、前記動画像から切出した少数の候補と少数のテンプレートとのパターンマッチングを行い、
前記高精度処理手段は、前記動画像から切出した多数の候補と多数のテンプレートとのパターンマッチングを行うことを特徴とする画像センサ装置。
（付記８）
付記４記載のセンタ装置において、
低速で高精度の動画像解析を行う高精度処理手段を
有することを特徴とするセンタ装置。
本発明の動画像解析システムは、動画像解析によりセンシング事象として車両を検知する交通監視システム、駐車場の監視システム等に利用できる。
交通監視、侵入者監視等の監視用途に用いられる動画像解析システムの一例のシステム構成図である。 従来の画像センサ装置の一例の機能ブロック図である。 従来のセンタ装置の一例の機能ブロック図である。 本発明の画像センサ装置の一実施形態の機能ブロック図である。 本発明のセンタ装置の第１実施形態の機能ブロック図である。 本発明の動画像解析システムの一実施形態の動作シーケンスである。 本発明の画像センサ装置の一実施形態の詳細機能ブロック図である。 本発明のセンタ装置の第２実施形態の機能ブロック図である。 検知情報保存フォーマットを示す図である。 アドバタイズデータのフォーマットを示す図である。 本発明の画像センサ装置が実行する処理のフローチャートである。 本発明のセンタ装置が実行する処理のフローチャートである。
符号の説明
１０１〜１０ｎ 画像センサ装置
１２ ネットワーク
１４ 監視センタ
１６ センタ装置
３０ カメラ
３２ 検知トリガ検出処理部
３４ 検知処理スイッチ部
３６，３８ 画像センシング処理部
４０ 高精度処理依頼判定部
４２ アドバタイズ受信処理部
４４ 高精度処理依頼送信部
４６ 検知結果送信処理部
５０ 検知結果受信処理部
５２ 検知結果保存処理部
５４ 検知情報保存部
５６ 検知頻度統計処理部
５８ 統計情報保存部
６０ アドバタイズデータ作成処理部
６２ アドバタイズデータ送信処理部

Claims (5)

  1. ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムにおいて、
    センタ装置は各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知し、
    各画像センサ装置は、高速の動画像解析であるリアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速で高精度の動画像解析である高精度処理を依頼することを特徴とする動画像解析システム。
  2. 請求項１記載の動画像解析システムにおいて、
    前記各画像センサ装置は、前記リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することを特徴とする動画像解析システム。
  3. ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムの画像センサ装置において、
    前記センタ装置から報知されるセンシング事象発生頻度が低い画像センサ装置のアドバタイズデータを受信して保持するアドバタイズデータ保持手段と、
    高速の動画像解析を行うリアルタイム処理手段と、
    低速で高精度の動画像解析を行う高精度処理手段と、
    前記リアルタイム処理手段でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置を選択し低速の動画像解析である高精度処理を依頼する依頼手段を
    有することを特徴とする画像センサ装置。
  4. ネットワークに接続された複数の画像センサ装置それぞれで撮像した動画像の動画像解析を行ってセンシング事象を検知し、前記ネットワークを介してセンタ装置に検知情報を通知し管理する動画像解析システムのセンタ装置において、
    各画像センサ装置からの通知頻度を記録して統計的にセンシング事象発生頻度が低い画像センサ装置を求めアドバタイズデータとして全ての画像センサ装置に報知する報知手段を
    有することを特徴とするセンタ装置。
  5. 請求項３記載の画像センサ装置において、
    前記リアルタイム処理でセンシング事象を検知できない場合に受信したアドバタイズデータに基づいて特定の画像センサ装置または前記センタ装置を選択し前記高精度処理を依頼することを特徴とする画像センサ装置。
JP2004080771A 2004-03-19 2004-03-19 動画像解析システム及びその装置 Pending JP2005267389A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2004080771A JP2005267389A (ja) 2004-03-19 2004-03-19 動画像解析システム及びその装置
US10/948,759 US20050206742A1 (en) 2004-03-19 2004-09-24 System and apparatus for analyzing video

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004080771A JP2005267389A (ja) 2004-03-19 2004-03-19 動画像解析システム及びその装置

Publications (1)

Publication Number Publication Date
JP2005267389A true JP2005267389A (ja) 2005-09-29

Family

ID=34985795

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004080771A Pending JP2005267389A (ja) 2004-03-19 2004-03-19 動画像解析システム及びその装置

Country Status (2)

Country Link
US (1) US20050206742A1 (ja)
JP (1) JP2005267389A (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102118629B (zh) * 2011-03-30 2014-04-09 上海美琦浦悦通讯科技有限公司 基于监控平台的网络视频监控服务质量保障系统及方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6172605B1 (en) * 1997-07-02 2001-01-09 Matsushita Electric Industrial Co., Ltd. Remote monitoring system and method
JP2000270330A (ja) * 1999-03-18 2000-09-29 Fujitsu Ltd 映像配信システム及び映像配信方法
US6999613B2 (en) * 2001-12-28 2006-02-14 Koninklijke Philips Electronics N.V. Video monitoring and surveillance systems capable of handling asynchronously multiplexed video
JP2004032459A (ja) * 2002-06-27 2004-01-29 Hitachi Ltd 監視システム、およびこれに用いるコントローラと監視端末
JP3801137B2 (ja) * 2003-01-21 2006-07-26 コニカミノルタホールディングス株式会社 侵入物体検出装置
JP3800217B2 (ja) * 2003-10-10 2006-07-26 コニカミノルタホールディングス株式会社 監視システム

Also Published As

Publication number Publication date
US20050206742A1 (en) 2005-09-22

Similar Documents

Publication Publication Date Title
US20120243730A1 (en) Collaborative camera services for distributed real-time object analysis
TWI495355B (zh) 射頻識別標籤之時間及空間的定位
US8661123B2 (en) Managed device, device management apparatus, and device management system
JP2006209457A (ja) センサデータ処理方式
WO2020129610A1 (ja) 検知装置、検知方法、および、検知プログラム
JP2005267389A (ja) 動画像解析システム及びその装置
EP1380931A2 (en) Network system, information processor and electronic apparatus
US8004697B2 (en) Method and system for adaptive control of IOT operation cycling
US8671297B2 (en) Returning from power saving mode upon receiving a packet other than switch inhibiting packets classified as having interval shorter than switch waiting time to power saving mode
US20120047241A1 (en) Apparatus, system, and method of managing an image forming device, and medium storing control program
US11258991B2 (en) Video processing request system for converting synchronous video processing task requests to asynchronous video processing requests
EP4071728A1 (en) Artificial intelligence model integration and deployment for providing a service
US11652836B2 (en) Non-transitory computer-readable storage medium, detection method, and information processing device
JP2010198111A (ja) メタデータ抽出サーバ、メタデータ抽出方法およびプログラム
JP2022185634A (ja) 端末装置、情報処理装置、情報処理方法、情報処理プログラムおよび情報処理システム
CN114302100A (zh) 一种视频分析方法、装置、电子设备和存储介质
CN112203155B (zh) 一种取流方法、系统及设备
JP2010061399A (ja) 機器管理装置、機器管理システム、機器監視方法、機器監視プログラム、及びそのプログラムを記録した記録媒体
JP2008051599A (ja) 通信制御方法及びこれを用いたレーダシステム
KR20200080025A (ko) 프로그램 리팩토링 온라인 서비스 방법 및 장치
Hu et al. Towards reliable online services analyzing mobile sensor big data
US20220303340A1 (en) Information processing device, information processing method, and nontransitory computer readable storage medium
JP2013115566A (ja) 撮像装置、撮像装置の制御方法及びプログラム
WO2021260969A1 (ja) ネットワークの制御方法、および、データ処理システム
US11050838B2 (en) Data from a source device to a data requester

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060509

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090413

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090421

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090818