JP2009171296A - 映像ネットワークシステム及び映像データ管理方法 - Google Patents

映像ネットワークシステム及び映像データ管理方法 Download PDF

Info

Publication number
JP2009171296A
JP2009171296A JP2008007934A JP2008007934A JP2009171296A JP 2009171296 A JP2009171296 A JP 2009171296A JP 2008007934 A JP2008007934 A JP 2008007934A JP 2008007934 A JP2008007934 A JP 2008007934A JP 2009171296 A JP2009171296 A JP 2009171296A
Authority
JP
Japan
Prior art keywords
video
search
camera
information
network system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008007934A
Other languages
English (en)
Other versions
JP5213105B2 (ja
Inventor
Atsushi Hiroike
敦 廣池
Tatsuhiko Kagehiro
達彦 影広
Naoto Akira
直人 秋良
Kunihiko Higashimura
邦彦 東村
Takehiro Urano
雄大 浦野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Ltd
Original Assignee
Hitachi Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hitachi Ltd filed Critical Hitachi Ltd
Priority to JP2008007934A priority Critical patent/JP5213105B2/ja
Priority to CN2009100016066A priority patent/CN101489116B/zh
Priority to US12/350,512 priority patent/US9277165B2/en
Publication of JP2009171296A publication Critical patent/JP2009171296A/ja
Application granted granted Critical
Publication of JP5213105B2 publication Critical patent/JP5213105B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
    • G06F16/786—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654—Details concerning communication with a camera
    • G08B13/19656—Network used to communicate with a camera, e.g. WAN, LAN, Internet
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19663—Surveillance related processing done local to the camera
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665—Details related to the storage of video surveillance data
    • G08B13/19671—Addition of non-video data, i.e. metadata, to video stream
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678—User interface
    • G08B13/1968—Interfaces for setting up or customising the system
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678—User interface
    • G08B13/19682—Graphic User Interface [GUI] presenting system data to the user, e.g. information on a screen helping a user interacting with an alarm system
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

【課題】情報のリアルタイム性及び履歴情報の保管及び検索を両立させる、システム及びネットワークの負荷の増大を抑制し、システムのスケーラビリティを向上させる。
【解決手段】映像を撮影する複数のカメラと、前記カメラによって撮影された映像を表示するモニタ装置とを備える映像ネットワークシステムであって、前記カメラによって撮影された映像の検索用情報を生成する情報生成装置と、前記カメラによって撮影された映像を検索する検索装置と、を備え、前記情報生成装置は、前記カメラによって撮影された映像を取得し、前記取得した映像から検索用情報を生成し、前記生成された検索用情報を前記検索装置に送信し、前記検索装置は、前記情報生成装置から受信した検索用情報を記憶装置に格納し、前記格納が行われたことを前記モニタ装置に通知することを特徴とする。
【選択図】図１

Description

本発明は、複数のカメラを備える映像ネットワークシステムに関する。
ＷｅｂカメラなどのＩＰ接続可能な撮像装置が普及することにより、ＩＰネットワークを利用した広域・大規模監視システムを構築することが可能となった。一方、ハードディスク装置の低価格化・大規模化は、監視システムが撮像した映像を長時間蓄積することを可能としている。現在、これらの蓄積映像中から所望のデータを検索するための検索技術の必要性が高まっている。
映像を検索するための技術としては、画像特徴量に基く類似検索技術が存在する。本技術では、検索対象となる映像のフレーム画像より、色合い・形状等の情報を数値列として表現した画像特徴量を抽出し、これを検索用の情報としてデータベースに格納する。検索時には、ユーザによって選択された画像から抽出された画像特徴量と、データベースに格納された画像特徴量との間で、ベクトル空間中での距離が評価され、その距離が小さいものを類似した画像と判定され、検索結果として返される。
ＩＰネットワークを利用した広域・大規模監視システム上で、類似検索技術を実現しようとする場合、多数のカメラから取得された映像から前述した検索用情報（画像特徴量）を生成し、データベースに格納することが必要となる。従って、画像特徴量の抽出、画像特徴量のデータベースへの格納に関わる演算量が増大する。このため、検索システムのこれらの処理に関わる演算量を低減する必要がある。
また、安価な市販品のカメラには十分な演算リソースが搭載されることは少ないので、カメラが負荷が大きい処理を実行することは困難である。
さらに、動画像による映像ネットワークシステムでは、情報のリアルタイム性及び履歴情報の保管及び検索を両立させることが必要となる。
本発明の代表的な一例を示せば以下の通りである。すなわち、映像を撮影する複数のカメラと、前記カメラによって撮影された映像を表示するモニタ装置とを備える映像ネットワークシステムであって、前記カメラによって撮影された映像の検索用情報を生成する情報生成装置と、前記カメラによって撮影された映像を検索する検索装置と、を備え、前記情報生成装置は、前記カメラによって撮影された映像を取得し、前記取得した映像から検索用情報を生成し、前記生成された検索用情報を前記検索装置に送信し、前記検索装置は、前記情報生成装置から受信した検索用情報を記憶装置に格納し、前記格納が行われたことを前記モニタ装置に通知することを特徴とする。
本発明により、検索システムの負荷増大を抑制し、システムのスケーラビリティを向上させることができる。また、履歴情報とリアルタイム情報をシームレスに検索する技術が可能となる。
次に、本発明の実施の形態について、図面を参照して説明する。
＜第１の実施の形態＞
図１は、本発明の第１の実施の形態の映像ネットワークシステムの構成を示すブロック図である。
第１の実施の形態の映像ネットワークシステムは、複数のカメラ１、センタ側システム２、監視モニタ装置３、ネットワーク４及び登録計算機５を備える。
カメラ１は、レンズを含む光学系、映像を電気信号に変換する撮像部及びネットワークインターフェースを備える。例えば、カメラ１は、ＩＰネットワークに直接接続可能なＩＰカメラを用いることができる。カメラ１は、撮影対象領域に設置され、撮影対象領域の映像を撮影し、撮影された映像データを登録用計算機５に送る。
登録用計算機５は、プロセッサ、メモリ、記憶装置及びネットワークインターフェースを備える計算機である。登録用計算機５は、画像登録プログラム１００（図２参照）を実行することによって、カメラ１によって撮影された映像データから画像特徴量を抽出する。抽出される画像特徴量の抽出は動き検出、顔検出の技術が用いられ、予め定められた動きや、予め定められた顔を撮影された映像データから抽出してもよい。さらに、登録用計算機５は、画像登録プログラム１００を実行することによって、撮影された映像データから低精細度の映像データ（サムネイルデータ）を生成する。そして、抽出された画像特徴量及び生成された低精細度映像データはネットワーク４を介して検索サーバ２１に送られる。
図には、１台の登録用計算機５を図示したが、複数の登録用計算機５が備わってもよい。また、１台の登録用計算機５に接続されるカメラの数は、登録用計算機５に備わるリソースの容量によって任意に選択することができる。
センタ側システム２は、少なくとも一台の検索サーバ２１及び映像蓄積サーバ２２を備える。
検索サーバ２１は、プロセッサ、メモリ、記憶装置及びネットワークインターフェースを備える計算機であり、カメラ１によって撮影された映像データの画像特徴量及び低精細度映像データを記憶装置に格納する。そして、検索サーバ２１は、監視モニタ装置３からの検索要求に基づいて、映像蓄積サーバ２２に蓄積された映像データの特徴量を検索し、検索結果（映像データの識別子及び低精細度映像データ）を監視モニタ装置３に返信する。なお、複数の検索サーバ２１が、検索サーバ群を構成してもよい。また、検索サーバ２１は、ネットワーク４に対して映像データの転送帯域を制御する信号を送信してもよい。
映像蓄積サーバ２２は、プロセッサ、メモリ、記憶装置及びネットワークインターフェースを備える計算機であり、映像蓄積サーバプログラム２２０（図２参照）を実行する。すなわち、映像蓄積サーバ２２は、登録用計算機５に対して高精細度画像要求を送信し、カメラ１によって撮影された映像（動画）データを取得し、取得した映像データを記憶装置に格納する。また、映像蓄積サーバ２２は、監視モニタ装置３からの要求に基づいて、格納されている映像データを監視モニタ装置３に送信する。図には、１台の映像蓄積サーバ２２を図示したが、複数の映像蓄積サーバ２２が備わってもよい。
監視モニタ装置３は、プロセッサ、メモリ、ネットワークインターフェース、操作部、及び表示部を備え、本映像ネットワークシステムの運用者が操作する計算機である。監視モニタ装置３は、複数のカメラ１によって撮影された映像データから選択された又は全ての映像データを表示部（画面）に表示する。
例えば、監視モニタ装置３は、運用者が入力した検索要求を映像蓄積サーバ２２に送信し、当該検索要求と検索結果とを表示する。さらに、検索結果に対応する映像データ（高精細度データ）を監視モニタ装置３から取得し、取得した映像データを表示する。
また、監視モニタ装置３は、カメラ１が撮影した映像データから抽出した画像特徴量が、予め定めた所定の条件に合致した場合、当該条件に合致した映像データを撮影したカメラ１からの映像データ（高精細度データ）をリアルタイムで表示する。なお、撮影領域に設置された他のセンサ（例えば、赤外線センサ）を用いて、高精細度映像データの表示条件を判定してもよい。図には、１台の監視モニタ装置３を図示したが、複数の監視モニタ装置３が備わってもよい。
カメラ１、検索サーバ２１、映像蓄積サーバ２２及び監視モニタ装置３は、ネットワーク４を介して接続されている。例えば、ネットワーク４は、ＴＣＰ／ＩＰパケットを転送可能なＩＰネットワークを用いることができる。
図２は、本発明の第１の実施の形態の映像ネットワークシステムの映像配信処理を示す説明図である。
登録用計算機５は、画像登録プログラム１００を実行する。画像登録プログラム１００では、映像取得スレッド１１０、映像配信スレッド１２０、検索用情報登録スレッド１４０（図３参照）の三つのスレッドが並列に実行される。なお、各スレッドは繰り返し実行される。
映像蓄積サーバ２２は、映像蓄積サーバプログラム２２０を実行する。映像蓄積サーバプログラム２２０は繰り返し実行される。
まず、映像取得スレッド１１０の処理について説明する。
映像取得スレッド１１０では、カメラ１の撮像素子１１が取得した映像データを取得して、メモリに設けられたバッファにフレーム画像として画像データを格納する（１１１）。
次に、バッファに格納されたフレーム画像を用いて、フレーム画像系列上における各画素値の平均値を画素値とする背景画像を計算する。そして、背景画像を新たに計算された背景画像に更新する（１１２）。
次に、フレーム画像と背景画像の差を画素値とする背景差分画像を計算する。そして、計算された背景差分画像及びフレーム画像をスレッド間通信１３０によって送信されるデータに設定する（１１３）。
その後、映像配信スレッド１２０は、スレッド間通信（１３０）によって、フレーム画像を取得する。
検索用情報登録スレッド１２０では、映像蓄積サーバ２２からの要求を受信すると（１２１）、スレッド間通信１３０によって送信されたデータから最新のフレーム画像を取得し（１２２）、取得したフレーム画像を映像蓄積サーバに送信する（１２３）。
次に、映像蓄積サーバ２２によって実行される映像蓄積サーバプログラム２２０について説明する。
映像蓄積サーバ２２は、所定のタイミングで（例えば、所定の時間間隔で、他のシステムによってイベントが検出されたときに）、登録用計算機５に対して高精細度画像要求を送信する（２２１）。そして、カメラ１によって撮影された映像データを取得すると（２２２）、取得した映像データの時間間隔を調整し、取得した映像データを記憶装置に格納する（２２３）。この映像データの時間間隔の調整は、登録用計算機５から取得した映像データに付された情報（例えば、当該映像データのフレームレート）を参照して、映像蓄積サーバ２２に記録される形式のフレームレートに合わせた映像データの形式に変換して、変換された映像データを記録する。なお、映像データのフレームレートを高レートから低レートに変換する場合は、余剰なフレームを削除すればよい。一方、映像データのフレームレートを低レートから高レートに変換する場合は、前後の画像を不足するフレームとするか、不足するフレームを補完してもよい。
このように時間間隔が調整された映像データを記憶装置に格納するので、異なるフレームレートの画像データを統一した形式で格納することができる。
図３は、本発明の第１の実施の形態の映像ネットワークシステムの検索用情報登録処理の概要を示す説明図である。
まず、映像取得スレッド１１０の処理は、図２で前述したものと同じである。
検索用情報登録スレッド１４０では、スレッド間通信１３０によって送られたデータ（フレーム画像、背景差分画像）を取得すると（１４１）、イベント検出処理１４２（図４）によってイベントを検出する。そして、イベントが検出されない場合は（１４３で”Ｎ”）、ステップ１４１に戻り、次の画像を取得する。一方、イベントが検出された場合は（１４３で”Ｙ”）、画像特徴量を抽出する（１４４）。
その後、抽出された特徴量及び原映像データの識別子を含む検索用情報登録要求（図５の２００１）を検索サーバ２１に送る（１４５）。なお、検索用情報登録要求には、原映像データの識別子ではなく、原映像データを撮影したカメラ１の識別子を含んでもよい。そして、検索サーバ２１から検索用情報の登録確認通知を受信すると（１４６）、ステップ１４１に戻り、次の画像を取得する。
次に、検索サーバ２１によって実行される検索サーバプログラム２１０について説明する。
検索サーバ２１は、登録用計算機５から検索用情報登録要求を受信した場合に（２１１）、受信した検索用情報（画像特徴量及び映像データの識別子）を記憶装置に格納する（２１２）。その後、登録用計算機５に、検索用情報の登録確認通知を送る（２１３）。なお、図５で後述するように、登録用計算機５は、検索用情報の格納後に、登録イベント通知を監視モニタ装置３に送る。
図４は、本発明の第１の実施の形態の映像ネットワークシステムの検索用情報登録処理の詳細を示すフローチャートである。
検索用情報登録スレッド処理は、まず、スレッド間通信１３０によって送られたフレーム画像及び背景差分画像を取得すると（１００１）、取得した画像からイベントを検出する（１００２）。具体的には、背景差分画像の画素値の２乗和を求め、求められた２乗和と所定の閾値とを比較することによって、動き成分の有無を判定する。その結果、求められた画素値の２乗和が大きい（動き成分が存在する）場合には、イベントが検出されたと判定する。
なお、動き成分の有無によらず、顔検出を用いてイベントを検出してもよい。顔検出の方法は、ステップ１００３で後述する方法を用い、予め登録された顔と一致する顔が画像中に検出された場合に、イベントが検出されたと判定してもよい。
そして、イベントが検出されない場合は、ステップ１００１に戻り、次の画像を取得する。一方、イベントが検出された場合は、イベントが検出されたフレーム画像から画像特徴量を検出するために、ステップ１００３に進む。このように、特徴量の検出前に、動き成分の有無によってイベントを検出することによって、演算量が大きい画像特徴検出処理を頻繁に実行する必要がなくなり、全体として演算量を抑制することができる。
ステップ１００３では、イベントが検出されたフレーム画像から顔領域を検出する。顔検出は、オープンソースのライブラリである”ＯｐｅｎＣＶ”を用いることができる。この”ＯｐｅｎＣＶ”はインテル社のホームページが詳しい。
そして、１以上の顔領域が検出された場合に（１００４で”Ｙ”）、検出された各顔領域の画像特徴量を抽出する（１００５）。顔領域の画像特徴量の検出は、エッジパターン特徴量を用いるとよい。エッジパターン特徴量を抽出するために、まず、予め複数特徴的なエッジパターンを設定する。そして、顔画像を格子状に構図分割を行い、各領域内に含まれるエッジパターン数を数える。数えられたエッジパターン数のヒストグラムを生成し、予め設定されたエッジパターン数を次元とする多次元ベクトルを生成することによって、顔画像特徴量を生成する。なお、顔に固有の目、鼻及び／又は口等の部分に着目して、顔画像特徴量を生成してもよい。
次に、イベントが検出されたフレーム画像から移動体領域を検出する（１００６）。移動体検出には、フレーム間差分法及び／又は背景差分法を用いることができる。フレーム間差分法は、１〜数フレーム前の画像と現在のフレーム画像の差を求め、移動体の領域を検出する。背景差分法は、現在のフレーム画像と予め作成しておいた背景の画像との差を求め、移動体の領域を検出する。
そして、１以上の移動体領域が検出された場合に（１００７で”Ｙ”）、検出された各移動体領域の画像特徴量を抽出する（１００８）。移動体領域の画像特徴量を求めるためには、色情報に基づいた全体画像特徴量を検出領域から抽出するとよい。具体的には、検出領域に対して格子状に構図分割を行い、分割された各領域の色ヒストグラムを生成する。そして、色ヒストグラムから生成される多次元ベクトルを、全体画像特徴量として用いる。なお、色情報ではなく輝度値及び明度値等の情報、又は、色、輝度値及び明度値を組み合わせたものを用いてもよい。
その後、１以上の顔領域又は１以上の移動体領域が検出されたか否かを判定する（１００９）。その結果、顔領域及び移動体領域のいずれも検出されない場合に（１００９で”Ｎ”）、検出されたイベントは無効と判定し、画像特徴量を登録することなく、ステップ１００１に戻り、次の画像を取得する。一方、１以上の顔領域又は１以上の移動体領域のいずれかが検出された場合に（１００９で”Ｙ”）、各領域の画像特徴量を含む検索用情報登録要求（図５の２００１）を検索サーバ２１に送信する（１０１０）。
このように、動き成分によってイベントが検出されても、顔領域及び／又は移動体領域が検出されず、画像特徴量が抽出されない場合は、検索サーバ２１に検索情報登録要求を送らないので、検索システムの負荷を抑制することができる。
図４に示した検索用情報登録処理では、顔領域及び移動体領域を検出したが、顔領域又は移動体領域の一方を検出して、検出された領域の画像特徴量を抽出してもよい。
図５は、本発明の第１の実施の形態の映像ネットワークシステムの動作を示す説明図である。
登録用計算機５は、カメラ１が取得した画像にイベントが検出されると、検索サーバ２１に検索用情報登録要求２００１を送信する。
検索サーバ２１は、登録用計算機５から検索用情報登録要求２００１を受信した場合に（図４の２１１）、受信した検索用情報を記憶装置に格納する（図４の２１２）。その後、登録用計算機５に、登録イベント通知２００２を監視モニタ装置３に送り、新たにデータが登録されたことを登録データの識別子とともに通知する。
監視モニタ装置３は、受信した検索用情報に関する映像データの重要度を判定し、受信した検索用情報に関する映像データが重要であると判定した場合は、映像データの識別子を含む映像配信要求を映像蓄積サーバ２２に送信する。
映像蓄積サーバ２２は、映像配信要求を受信した場合に、受信した映像データの識別子に対応するカメラ１の最新映像を、要求元の監視モニタ装置３に送信する（２００３）。
監視モニタ装置３は、映像蓄積サーバ２２から受信した映像データを動画像として表示する。
前述したように、本発明の第１の実施の形態では、登録用計算機５は、カメラ１によって撮影された映像から検索用情報を生成し、前記生成された検索用情報を検索サーバ２１に送信する。検索サーバは、登録用計算機５から受信した検索用情報を記憶装置に格納し、格納が行われたことをイベントとして監視モニタ装置３に送信する。また、映像蓄積サーバ２２は、所定のタイミングで、カメラ１が取得した映像データを登録用計算機５に要求する。登録用計算機５は、映像蓄積サーバ２２からの要求に従って、カメラ１によって撮影された映像を送信する。
よって、複数のカメラを含む映像ネットワークシステムにおいて、適切な負荷分散を図ることができる。このような負荷分散によって、カメラの数が増加してもシステムを構成する各装置（サーバ、計算機）を増加することによって、システムの負荷及びネットワークの負荷が逼迫することがなく、システムのスケーラビリティを向上させることができる。
また、高精細度の動画像データを監視モニタ装置３に必要に応じて配信するので、ネットワークの負荷の増大を抑制することができる。さらに、映像蓄積サーバ２２が、高精細度の動画像データの映像蓄積サーバ２２への送信タイミングを制御するので、ネットワークの負荷の増大を抑制することができる。
また、監視モニタ装置３は、検索サーバ２１から受信した検索用情報に関連する映像の要否（重要度）を判定し、受信した検索用情報に関連する映像が必要と判定した場合に、映像蓄積サーバ２２に当該検索用情報に関連する映像を要求する。映像蓄積サーバ２２は、監視モニタ装置３からの映像配信要求に従って、要求された映像データを要求元の監視モニタ装置３に送信する。監視モニタ装置３は、映像蓄積サーバ２２から取得した映像データを表示する。
よって、ネットワークの負荷を増大させることなく、履歴情報（過去の映像データ）とリアルタイム情報（現在の映像データ）とをシームレスに検索及び表示することができる。
さらに、カメラ側の登録用計算機５で顔検出、移動体検出によって検索対象となるフレーム画像を絞り込むので、検索サーバに集まる情報を抑制し、検索サーバ２１の負荷を軽減することができる。
さらに、カメラ側の登録用計算機５で画像特徴量を抽出するので、検索サーバ２１の負荷を軽減することができる。
さらに、カメラ１が取得した映像データを処理する登録用計算機５をカメラ１と別個に設けたので、カメラ１に高度な機能を必要とせず、低機能かつ低価格な市販品のカメラを用いてシステムを構成することができる。
＜第２の実施の形態＞
図６は、本発明の第２の実施の形態の映像ネットワークシステムの構成を示すブロック図である。
第２の実施の形態は、前述した第１の実施の形態と異なり、登録用計算機５を備えない。第２の実施の形態では、カメラ１に備わる映像処理部が、第１の実施の形態の登録用計算機５と同じ機能をする。
具体的には、第２の実施の形態の映像ネットワークシステムは、複数のカメラ１、センタ側システム２、監視モニタ装置３及びネットワーク４を備える。
カメラ１は、レンズを含む光学系、映像を電気信号に変換する撮像部、撮影された映像データを処理する映像処理部及びネットワークインターフェースを備える。例えば、カメラ１は、ＩＰネットワークに直接接続可能なＩＰカメラを用いることができる。カメラ１は、撮影対象領域に設置され、撮影対象領域の映像を撮影し、映像蓄積サーバ２２からの高精細度画像の要求に基づいて、撮影された映像データをネットワーク４を介して映像蓄積サーバ２２に送る。
また、カメラ１の映像処理部は、プロセッサ及びメモリを備え、撮影された映像データから画像特徴量を抽出する。抽出される画像特徴量の抽出は動き検出、顔検出の技術が用いられ、予め定められた動きや、予め定められた顔が撮影された映像データから抽出される。さらに、カメラ１の映像処理部は、撮影された映像データから低精細度の映像データを生成する。そして、抽出された画像特徴量及び生成された低精細度映像データはネットワーク４を介して検索サーバ２１に送られる。
すなわち、前述した第１の実施の形態の登録用計算機５に代わって、カメラ１の映像処理部が画像登録プログラム１００（図２、図３参照）を実行する。
センタ側システム２及び監視モニタ装置３は、前述した第１の実施の形態（図６）と同じである。なお、第２の実施の形態の映像蓄積サーバ２２は、カメラ１に対して高精細度画像要求を送信する。
カメラ１、検索サーバ２１、映像蓄積サーバ２２及び監視モニタ装置３は、ネットワーク４を介して接続されている。例えば、ネットワーク４は、ＴＣＰ／ＩＰパケットを転送可能なＩＰネットワークを用いることができる。
前述したように、本発明の第２の実施の形態では、カメラ１が登録用計算機５の機能を含めた（カメラ１の映像処理部で登録用計算機５と同じ処理をする）ので、前述した第１の実施の形態より処理をさらに分散化することができ、システムのスケーラビリティを向上させることができる。
本発明の第１の実施の形態の映像ネットワークシステムの構成を示すブロック図である。 本発明の第１の実施の形態の映像ネットワークシステムの映像配信処理を示す説明図である。 本発明の第１の実施の形態の映像ネットワークシステムの検索用情報登録処理の概要を示す説明図である 本発明の第１の実施の形態の映像ネットワークシステムの検索用情報登録処理の詳細を示すフローチャートである。 本発明の第１の実施の形態の映像ネットワークシステムの動作を示す説明図である。 本発明の第２の実施の形態の映像ネットワークシステムの構成を示すブロック図である。
符号の説明
１ カメラ
２ センタ側システム
２１ 検索サーバ
２２ 映像蓄積サーバ
３ 監視モニタ装置
４ ネットワーク
５ 登録用計算機

Claims (12)

  1. 映像を撮影する複数のカメラと、前記カメラによって撮影された映像を表示するモニタ装置とを備える映像ネットワークシステムであって、
    前記カメラによって撮影された映像の検索用情報を生成する情報生成装置と、
    前記カメラによって撮影された映像を検索する検索装置と、を備え、
    前記情報生成装置は、前記カメラによって撮影された映像を取得し、前記取得した映像から検索用情報を生成し、前記生成された検索用情報を前記検索装置に送信し、
    前記検索装置は、前記情報生成装置から受信した検索用情報を記憶装置に格納し、前記格納された検索用情報を前記モニタ装置に送信することを特徴とする映像ネットワークシステム。
  2. 前記映像ネットワークシステムは、さらに、前記カメラによって撮影された映像を格納する映像蓄積装置を備え、
    前記モニタ装置は、前記検索用装置から受信した検索用情報に基づいて、前記検索用情報に関連する映像の要否を判定し、前記検索用情報に関連する映像が必要と判定した場合に、前記映像蓄積装置に当該検索用情報に関連する映像を要求し、
    前記映像蓄積装置は、前記モニタ装置からの映像の要求に従って、要求された映像データを要求元の前記モニタ装置に送信し、
    前記モニタ装置は、前記映像蓄積装置から取得した映像データを表示することを特徴とする請求項１に記載の映像ネットワークシステム。
  3. 前記映像ネットワークシステムは、さらに、前記カメラによって撮影された映像を格納する映像蓄積装置を備え、
    前記映像蓄積装置は、所定のタイミングで、前記カメラによって撮影された映像を前記情報生成装置に要求し、
    前記情報生成装置は、前記映像蓄積装置からの要求に従って、前記カメラによって撮影された映像を送信することを特徴とする請求項１に記載の映像ネットワークシステム。
  4. 前記映像蓄積装置は、前記情報生成装置から取得した映像に付された情報に基づいて、前記情報生成装置から取得した映像の時間間隔を調整した後に、前記取得した映像を記憶装置に格納することを特徴とする請求項３に記載の映像ネットワークシステム。
  5. 前記情報生成装置は、前記カメラによって撮影された映像から動き成分を検出し、前記動き成分が検出されない場合に、前記検索用情報を前記検索装置に送信しないことを特徴とする請求項１に記載の映像ネットワークシステム。
  6. 前記情報生成装置は、前記カメラによって撮影された映像から顔領域画像を検出し、前記顔領域画像が検出されない場合に、前記検索用情報を前記検索装置に送信しないことを特徴とする請求項１に記載の映像ネットワークシステム。
  7. 前記情報生成装置は、
    前記カメラによって撮影された映像から顔領域を検出し、前記検出された顔領域の画像特徴量を抽出し、
    前記カメラによって撮影された映像から移動体領域を検出し、前記検出された移動体領域の画像特徴量を抽出し、
    前記抽出された画像特徴量を前記検索用情報とすることを特徴とする請求項５又は６に記載の映像ネットワークシステム。
  8. 前記情報生成装置は、
    前記カメラによって撮影された映像から動き成分が検出された場合に、前記顔領域及び前記移動体領域を検出し、
    前記動き成分が検出されても、前記顔領域及び前記移動体領域のいずれも検出されない場合に、前記検索用情報を前記検索装置に送信しないことを特徴とする請求項７に記載の映像ネットワークシステム。
  9. 前記情報生成装置は、前記複数のカメラの一部と接続され、前記接続されたカメラによって撮影された映像の検索用情報を生成することを特徴とする請求項１に記載の映像ネットワークシステム。
  10. 前記情報生成装置は、前記カメラの各々と一体に構成され、前記一体に構成されたカメラによって撮影された映像の検索用情報を生成することを特徴とする請求項１に記載の映像ネットワークシステム。
  11. 映像を撮影する複数のカメラと、前記カメラによって撮影された映像を検索する検索装置と、前記カメラによって撮影された映像の検索用情報を生成する情報生成装置と、前記カメラによって撮影された映像を表示するモニタ装置と、を備える映像ネットワークシステムにおける映像データ管理方法であって、
    前記情報生成装置は、前記映像蓄積装置からの要求に従って、前記カメラによって撮影された映像を送信し、
    前記情報生成装置は、さらに、前記カメラによって撮影された映像を取得し、前記取得した映像から検索用情報を生成し、前記生成された検索用情報を前記検索装置に送信し、
    前記検索装置は、前記情報生成装置から受信した検索用情報を格納し、前記検索用情報を格納したことを前記モニタ装置に通知し、
    前記モニタ装置は、前記検索用装置から受信した通知に基づいて、前記検索用情報に関連する映像を表示することを特徴とする映像データ管理方法。
  12. 映像を撮影する複数のカメラと、前記カメラによって撮影された映像を検索する検索装置と、前記カメラによって撮影された映像の検索用情報を生成する情報生成装置と、前記カメラによって撮影された映像を格納する映像蓄積装置と、前記カメラによって撮影された映像を表示するモニタ装置と、を備える映像ネットワークシステムにおける映像データ管理方法であって、
    前記映像蓄積装置は、所定のタイミングで、前記カメラによって撮影された映像を前記情報生成装置に要求し、
    前記情報生成装置は、前記映像蓄積装置からの要求に従って、前記カメラによって撮影された映像を送信し、
    前記情報生成装置は、さらに、前記カメラによって撮影された映像を取得し、前記取得した映像から検索用情報を生成し、前記生成された検索用情報を前記検索装置に送信し、
    前記検索装置は、前記情報生成装置から受信した検索用情報を格納し、前記格納された検索用情報を前記モニタ装置に送信し、
    前記モニタ装置は、前記検索用装置から受信した検索用情報に基づいて、前記検索用情報に関連する映像の要否を判定し、前記検索用情報に関連する映像が必要と判定した場合に、前記映像蓄積装置に当該検索用情報に関連する映像を要求し、
    前記映像蓄積装置は、前記モニタ装置からの映像の要求に従って、要求された映像データを要求元の前記モニタ装置に送信し、
    前記モニタ装置は、前記映像蓄積装置から取得した映像データを表示することを特徴とする映像データ管理方法。
JP2008007934A 2008-01-17 2008-01-17 映像ネットワークシステム及び映像データ管理方法 Active JP5213105B2 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2008007934A JP5213105B2 (ja) 2008-01-17 2008-01-17 映像ネットワークシステム及び映像データ管理方法
CN2009100016066A CN101489116B (zh) 2008-01-17 2009-01-05 影像网络系统以及影像数据管理方法
US12/350,512 US9277165B2 (en) 2008-01-17 2009-01-08 Video surveillance system and method using IP-based networks

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008007934A JP5213105B2 (ja) 2008-01-17 2008-01-17 映像ネットワークシステム及び映像データ管理方法

Publications (2)

Publication Number Publication Date
JP2009171296A true JP2009171296A (ja) 2009-07-30
JP5213105B2 JP5213105B2 (ja) 2013-06-19

Family

ID=40876570

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008007934A Active JP5213105B2 (ja) 2008-01-17 2008-01-17 映像ネットワークシステム及び映像データ管理方法

Country Status (3)

Country Link
US (1) US9277165B2 (ja)
JP (1) JP5213105B2 (ja)
CN (1) CN101489116B (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9141184B2 (en) 2010-08-27 2015-09-22 Hitachi Kokusai Electric Inc. Person detection system
JP2015186113A (ja) * 2014-03-25 2015-10-22 株式会社日立国際電気 情報通信システム及び情報通信方法
JP2018093324A (ja) * 2016-12-01 2018-06-14 株式会社日立製作所 映像監視システム、映像監視システムの制御方法および映像監視装置
JP2019169843A (ja) * 2018-03-23 2019-10-03 キヤノン株式会社 映像記録装置、映像記録方法およびプログラム

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100601933B1 (ko) * 2003-11-18 2006-07-14 삼성전자주식회사 사람검출방법 및 장치와 이를 이용한 사생활 보호방법 및 시스템
KR100885734B1 (ko) * 2007-12-17 2009-02-26 한국전자통신연구원 영상정보 처리 시스템 및 방법
US9639740B2 (en) 2007-12-31 2017-05-02 Applied Recognition Inc. Face detection and recognition
CN102016882B (zh) 2007-12-31 2015-05-27 应用识别公司 利用脸部签名来标识和共享数字图像的方法、系统和计算机程序
US9721148B2 (en) 2007-12-31 2017-08-01 Applied Recognition Inc. Face detection and recognition
CN101646070B (zh) * 2009-07-30 2012-09-19 杭州联图科技有限公司 一种新型智能安防监控方法及其专用设备
US8575328B2 (en) 2010-12-14 2013-11-05 The United States Of America, As Represented By The Secretary Of Agriculture Formicidae (ant) control using double-stranded RNA constructs
US9552376B2 (en) 2011-06-09 2017-01-24 MemoryWeb, LLC Method and apparatus for managing digital files
US8548207B2 (en) 2011-08-15 2013-10-01 Daon Holdings Limited Method of host-directed illumination and system for conducting host-directed illumination
US9202105B1 (en) 2012-01-13 2015-12-01 Amazon Technologies, Inc. Image analysis for user authentication
JP2013192154A (ja) * 2012-03-15 2013-09-26 Omron Corp 監視装置、信頼度算出プログラム、および信頼度算出方法
US8766914B2 (en) * 2012-06-26 2014-07-01 Intel Corporation Method and apparatus for measuring audience size for a digital sign
JP2015164031A (ja) * 2014-01-30 2015-09-10 株式会社リコー 画像表示システム
US20170200068A1 (en) * 2014-06-18 2017-07-13 Trax Technology Solutions Pte. Ltd. Method and a System for Object Recognition
US10402777B2 (en) 2014-06-18 2019-09-03 Trax Technology Solutions Pte Ltd. Method and a system for object recognition
US10915618B2 (en) 2014-08-28 2021-02-09 Facetec, Inc. Method to add remotely collected biometric images / templates to a database record of personal information
US10698995B2 (en) 2014-08-28 2020-06-30 Facetec, Inc. Method to verify identity using a previously collected biometric image/data
US10803160B2 (en) 2014-08-28 2020-10-13 Facetec, Inc. Method to verify and identify blockchain with user question data
US11256792B2 (en) 2014-08-28 2022-02-22 Facetec, Inc. Method and apparatus for creation and use of digital identification
US10614204B2 (en) 2014-08-28 2020-04-07 Facetec, Inc. Facial recognition authentication system including path parameters
CA3186147A1 (en) 2014-08-28 2016-02-28 Kevin Alan Tussy Facial recognition authentication system including path parameters
CN105574506B (zh) * 2015-12-16 2020-03-17 深圳市商汤科技有限公司 基于深度学习和大规模集群的智能人脸追逃系统及方法
US20170254876A1 (en) * 2016-03-07 2017-09-07 Symbol Technologies, Llc Arrangement for, and method of, sensing targets with improved performance in a venue
USD987653S1 (en) 2016-04-26 2023-05-30 Facetec, Inc. Display screen or portion thereof with graphical user interface
CN108733821A (zh) * 2018-05-22 2018-11-02 武汉微创光电股份有限公司 一种监控视频截图的分发与展示方法及系统
US10936178B2 (en) 2019-01-07 2021-03-02 MemoryWeb, LLC Systems and methods for analyzing and organizing digital photos and videos
JP7360841B2 (ja) * 2019-08-09 2023-10-13 株式会社日立ソリューションズ Ｘ線画像処理システムおよびその方法、そのプログラム
JP7482011B2 (ja) * 2020-12-04 2024-05-13 株式会社東芝 情報処理システム
CN112907206B (zh) * 2021-02-07 2024-06-04 中国工商银行股份有限公司 一种基于视频对象识别的业务审核方法、装置及设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247566A (ja) * 2000-11-30 2002-08-30 Matsushita Electric Ind Co Ltd 画像受信装置、画像送信装置および画像伝送システム
JP2003030243A (ja) * 2001-07-16 2003-01-31 Canon Inc 画像配信システム及び情報処理装置及びそれらの方法
JP2003134435A (ja) * 2001-10-30 2003-05-09 Matsushita Electric Ind Co Ltd 映像データ送信方法及び映像データ受信方法、並びに映像監視システム
JP2005045550A (ja) * 2003-07-22 2005-02-17 Sony Corp 撮像装置、その撮像システムおよび方法
JP2006086991A (ja) * 2004-09-17 2006-03-30 Fuji Photo Film Co Ltd 監視カメラシステム、および監視カメラシステムの制御装置、並びに制御方法
JP2006174285A (ja) * 2004-12-17 2006-06-29 Fuji Xerox Co Ltd 画像処理装置、画像処理方法及びそのプログラム
JP2007020057A (ja) * 2005-07-11 2007-01-25 Matsushita Electric Ind Co Ltd 相互通信監視装置、相互通信監視方法および相互通信監視プログラム

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5012522A (en) * 1988-12-08 1991-04-30 The United States Of America As Represented By The Secretary Of The Air Force Autonomous face recognition machine
US5917958A (en) * 1996-10-31 1999-06-29 Sensormatic Electronics Corporation Distributed video data base with remote searching for image data features
CA2199999A1 (en) * 1997-03-14 1998-09-14 Peter Johann Kielland Parking regulation enforcement system
US6185314B1 (en) * 1997-06-19 2001-02-06 Ncr Corporation System and method for matching image information to object model information
US7131136B2 (en) * 2002-07-10 2006-10-31 E-Watch, Inc. Comprehensive multi-media surveillance and response system for aircraft, operations centers, airports and other commercial transports, centers and terminals
US6970183B1 (en) * 2000-06-14 2005-11-29 E-Watch, Inc. Multimedia surveillance and monitoring system including network configuration
US6583813B1 (en) * 1998-10-09 2003-06-24 Diebold, Incorporated System and method for capturing and searching image data associated with transactions
JP3607566B2 (ja) 2000-04-07 2005-01-05 日本電信電話株式会社 多地点情報監視装置および方法
US6504479B1 (en) * 2000-09-07 2003-01-07 Comtrak Technologies Llc Integrated security system
US8564661B2 (en) * 2000-10-24 2013-10-22 Objectvideo, Inc. Video analytic rule detection system and method
US9892606B2 (en) * 2001-11-15 2018-02-13 Avigilon Fortress Corporation Video surveillance system employing video primitives
US20030108334A1 (en) * 2001-12-06 2003-06-12 Koninklijke Philips Elecronics N.V. Adaptive environment system and method of providing an adaptive environment
US7436887B2 (en) * 2002-02-06 2008-10-14 Playtex Products, Inc. Method and apparatus for video frame sequence-based object tracking
US7369685B2 (en) * 2002-04-05 2008-05-06 Identix Corporation Vision-based operating method and system
US6975346B2 (en) * 2002-06-27 2005-12-13 International Business Machines Corporation Method for suspect identification using scanning of surveillance media
US7382896B2 (en) * 2002-08-13 2008-06-03 Hitachi Kokusai Electric Inc. Object detection method and apparatus which perform object detection using set parameters
JP4568009B2 (ja) * 2003-04-22 2010-10-27 パナソニック株式会社 カメラ連携による監視装置
US20040233983A1 (en) * 2003-05-20 2004-11-25 Marconi Communications, Inc. Security system
US7280753B2 (en) * 2003-09-03 2007-10-09 Canon Kabushiki Kaisha Display apparatus, image processing apparatus, and image processing system
US20050177859A1 (en) * 2004-02-09 2005-08-11 Valentino Henry Iii Video surveillance system and methods of use and doing business
JP4789511B2 (ja) * 2004-06-04 2011-10-12 キヤノン株式会社 状況モニタリング装置及び状況モニタリングシステム
US20050285941A1 (en) * 2004-06-28 2005-12-29 Haigh Karen Z Monitoring devices
US7746378B2 (en) * 2004-10-12 2010-06-29 International Business Machines Corporation Video analysis, archiving and alerting methods and apparatus for a distributed, modular and extensible video surveillance system
US7760908B2 (en) * 2005-03-31 2010-07-20 Honeywell International Inc. Event packaged video sequence
US20060238616A1 (en) * 2005-03-31 2006-10-26 Honeywell International Inc. Video image processing appliance manager
US9363487B2 (en) * 2005-09-08 2016-06-07 Avigilon Fortress Corporation Scanning camera-based video surveillance system
JP2007241377A (ja) * 2006-03-06 2007-09-20 Sony Corp 検索システム、撮像装置、データ保存装置、情報処理装置、撮像画像処理方法、情報処理方法、プログラム
US20070257986A1 (en) * 2006-05-05 2007-11-08 Ivanov Yuri A Method for processing queries for surveillance tasks
US7907750B2 (en) * 2006-06-12 2011-03-15 Honeywell International Inc. System and method for autonomous object tracking
US7791466B2 (en) * 2007-01-12 2010-09-07 International Business Machines Corporation System and method for event detection utilizing sensor based surveillance
WO2008103929A2 (en) * 2007-02-23 2008-08-28 Johnson Controls Technology Company Video processing systems and methods
US7460149B1 (en) * 2007-05-28 2008-12-02 Kd Secure, Llc Video data storage, search, and retrieval using meta-data and attribute data in a video surveillance system
US8204273B2 (en) * 2007-11-29 2012-06-19 Cernium Corporation Systems and methods for analysis of video content, event notification, and video content provision

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002247566A (ja) * 2000-11-30 2002-08-30 Matsushita Electric Ind Co Ltd 画像受信装置、画像送信装置および画像伝送システム
JP2003030243A (ja) * 2001-07-16 2003-01-31 Canon Inc 画像配信システム及び情報処理装置及びそれらの方法
JP2003134435A (ja) * 2001-10-30 2003-05-09 Matsushita Electric Ind Co Ltd 映像データ送信方法及び映像データ受信方法、並びに映像監視システム
JP2005045550A (ja) * 2003-07-22 2005-02-17 Sony Corp 撮像装置、その撮像システムおよび方法
JP2006086991A (ja) * 2004-09-17 2006-03-30 Fuji Photo Film Co Ltd 監視カメラシステム、および監視カメラシステムの制御装置、並びに制御方法
JP2006174285A (ja) * 2004-12-17 2006-06-29 Fuji Xerox Co Ltd 画像処理装置、画像処理方法及びそのプログラム
JP2007020057A (ja) * 2005-07-11 2007-01-25 Matsushita Electric Ind Co Ltd 相互通信監視装置、相互通信監視方法および相互通信監視プログラム

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9141184B2 (en) 2010-08-27 2015-09-22 Hitachi Kokusai Electric Inc. Person detection system
JP2015186113A (ja) * 2014-03-25 2015-10-22 株式会社日立国際電気 情報通信システム及び情報通信方法
JP2018093324A (ja) * 2016-12-01 2018-06-14 株式会社日立製作所 映像監視システム、映像監視システムの制御方法および映像監視装置
JP2019169843A (ja) * 2018-03-23 2019-10-03 キヤノン株式会社 映像記録装置、映像記録方法およびプログラム
JP7118679B2 (ja) 2018-03-23 2022-08-16 キヤノン株式会社 映像記録装置、映像記録方法およびプログラム

Also Published As

Publication number Publication date
CN101489116B (zh) 2012-07-18
CN101489116A (zh) 2009-07-22
US9277165B2 (en) 2016-03-01
US20090185784A1 (en) 2009-07-23
JP5213105B2 (ja) 2013-06-19

Similar Documents

Publication Publication Date Title
JP5213105B2 (ja) 映像ネットワークシステム及び映像データ管理方法
US8280108B2 (en) Image processing system, image processing method, and computer program
WO2020094091A1 (zh) 一种图像抓拍方法、监控相机及监控系统
WO2020057355A1 (zh) 一种三维建模的方法及其装置
US8150103B2 (en) Background modeling with feature blocks
JP6682550B2 (ja) 連続オートフォーカスのためのシステムおよび方法
US20110050901A1 (en) Transmission apparatus and processing apparatus
TWI405150B (zh) 視訊移動偵測方法及使用該方法之非暫時性電腦可讀取媒體和攝影機
JP6077655B2 (ja) 撮影システム
CN104883548B (zh) 监控视频人脸抓取处理方法及其系统
TWI407386B (zh) 影像自動追蹤之監控方法
CN113228626B (zh) 视频监控系统和方法
CN112422909B (zh) 一种基于人工智能的视频行为分析管理系统
CN107770486A (zh) 事件搜索设备和系统
JP5693147B2 (ja) 撮影妨害検知方法、妨害検知装置及び監視カメラシステム
JP6437217B2 (ja) 画像出力装置、画像管理システム、画像処理方法及びプログラム
CN205883437U (zh) 一种视频监控系统
JP2015228564A (ja) 監視カメラシステム
JP5865584B2 (ja) 特定人物検知システムおよび検知方法
CN111800604A (zh) 基于枪球联动检测人形和人脸数据的方法及装置
TWI503759B (zh) 人臉偵測之雲端智慧監視系統
JP2012242970A (ja) 画像処理装置及びその制御方法
JP2008141700A (ja) 監視システム、監視方法、及びプログラム
KR100480520B1 (ko) 영상 전송 방법 및 상기 방법을 이용하는 네트워크 카메라시스템
CN112233228B (zh) 基于无人机的城市三维重建方法、装置及存储介质

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120309

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120702

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120710

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120904

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121023

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121212

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130129

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130221

R150 Certificate of patent or registration of utility model

Ref document number: 5213105

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160308

Year of fee payment: 3