JP2002112253A - ネットワーク化した監視／管制システム及び方法 - Google Patents
ネットワーク化した監視／管制システム及び方法Info
- Publication number
- JP2002112253A JP2002112253A JP2001194713A JP2001194713A JP2002112253A JP 2002112253 A JP2002112253 A JP 2002112253A JP 2001194713 A JP2001194713 A JP 2001194713A JP 2001194713 A JP2001194713 A JP 2001194713A JP 2002112253 A JP2002112253 A JP 2002112253A
- Authority
- JP
- Japan
- Prior art keywords
- control system
- surveillance
- video signal
- digital video
- compressed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 15
- 238000000605 extraction Methods 0.000 claims abstract description 24
- 238000001514 detection method Methods 0.000 claims abstract description 16
- 230000004044 response Effects 0.000 claims abstract description 11
- 230000033001 locomotion Effects 0.000 claims description 45
- 238000012544 monitoring process Methods 0.000 claims description 37
- 239000013598 vector Substances 0.000 claims description 14
- 230000002159 abnormal effect Effects 0.000 claims description 3
- 230000000386 athletic effect Effects 0.000 claims description 3
- 239000000284 extract Substances 0.000 abstract description 3
- 230000000694 effects Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 230000003190 augmentative effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 4
- 230000037023 motor activity Effects 0.000 description 4
- 230000008901 benefit Effects 0.000 description 3
- 239000003086 colorant Substances 0.000 description 3
- 230000006855 networking Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 230000009471 action Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000008521 reorganization Effects 0.000 description 2
- DFUSDJMZWQVQSF-XLGIIRLISA-N (2r)-2-methyl-2-[(4r,8r)-4,8,12-trimethyltridecyl]-3,4-dihydrochromen-6-ol Chemical compound OC1=CC=C2O[C@@](CCC[C@H](C)CCC[C@H](C)CCCC(C)C)(C)CCC2=C1 DFUSDJMZWQVQSF-XLGIIRLISA-N 0.000 description 1
- VBRBNWWNRIMAII-WYMLVPIESA-N 3-[(e)-5-(4-ethylphenoxy)-3-methylpent-3-enyl]-2,2-dimethyloxirane Chemical compound C1=CC(CC)=CC=C1OC\C=C(/C)CCC1C(C)(C)O1 VBRBNWWNRIMAII-WYMLVPIESA-N 0.000 description 1
- 241001504453 Sylviidae Species 0.000 description 1
- 235000012545 Vaccinium macrocarpon Nutrition 0.000 description 1
- 235000002118 Vaccinium oxycoccus Nutrition 0.000 description 1
- 244000291414 Vaccinium oxycoccus Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 239000011436 cob Substances 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 235000004634 cranberry Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- JCCNYMKQOSZNPW-UHFFFAOYSA-N loratadine Chemical compound C1CN(C(=O)OCC)CCC1=C1C2=NC=CC=C2CCC2=CC(Cl)=CC=C21 JCCNYMKQOSZNPW-UHFFFAOYSA-N 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000013139 quantization Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000005070 sampling Methods 0.000 description 1
- 230000011664 signaling Effects 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/738—Presentation of query results
- G06F16/739—Presentation of query results in form of a video summary, e.g. the video summary being a video sequence, a composite still image or having synthesized frames
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
- G06F16/7854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using shape
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
- G06F16/786—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
- G06F16/7864—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using domain-transform features, e.g. DCT or wavelet transform coefficients
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
- H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
- H04N21/4385—Multiplex stream processing, e.g. multiplex stream decrypting
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
- H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Library & Information Science (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computational Linguistics (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
(57)【要約】 （修正有）
【課題】従来システムではセキュリティイベントの検出
が十分でない。 【解決手段】監視／管制システムは、圧縮されたディジ
タルビデオ信号から低レベル特徴を動的に抽出するため
の特徴抽出装置と、該特徴抽出装置に接続されて低レベ
ルの特徴をコンテンツ記述子として符号化する記述エン
コーダを含む。該記述エンコーダにはイベント検出器が
接続されてコンテンツ記述子からセキュリティイベント
を検出する。更に、制御信号プロセッサがイベント検出
器に接続され、セキュリティイベントの検出に応答し制
御信号を発生する。
が十分でない。 【解決手段】監視／管制システムは、圧縮されたディジ
タルビデオ信号から低レベル特徴を動的に抽出するため
の特徴抽出装置と、該特徴抽出装置に接続されて低レベ
ルの特徴をコンテンツ記述子として符号化する記述エン
コーダを含む。該記述エンコーダにはイベント検出器が
接続されてコンテンツ記述子からセキュリティイベント
を検出する。更に、制御信号プロセッサがイベント検出
器に接続され、セキュリティイベントの検出に応答し制
御信号を発生する。
Description
【０００１】
【発明の属する技術分野】本発明は、一般に、監視シス
テムに関し、特にセキュリティイベントに関する情報を
捕捉し且つ記憶し、ネットワークを用いてこれらイベン
トに応答する監視システムに関する。なお、本願は、２
０００年５月１７日付けで出願された米国特許願Ｓｅ
ｒ．Ｎｏ．０９／５７３−４６７の一部継続出願であ
る。
テムに関し、特にセキュリティイベントに関する情報を
捕捉し且つ記憶し、ネットワークを用いてこれらイベン
トに応答する監視システムに関する。なお、本願は、２
０００年５月１７日付けで出願された米国特許願Ｓｅ
ｒ．Ｎｏ．０９／５７３−４６７の一部継続出願であ
る。
【０００２】
【従来の技術】動画圧縮標準化グループＭＰＥＧ（Movi
ng Picture Expert Group）は、画像（ビデオ）及び音
声（オーディオ）情報をデジタル圧縮フォーマットで高
い品質且つ効率の良い符号化を行う際に用いられる標準
規格群である。例えば、静止画像の符号化のためのＭＰ
ＥＧ−１、動画像（ビデオ）の符号化のためのＭＰＥＧ
−２、マルチメディア符号化に関するＭＰＥＧ−４のよ
うな幾つかのＭＰＥＧ規格が存在する。
ng Picture Expert Group）は、画像（ビデオ）及び音
声（オーディオ）情報をデジタル圧縮フォーマットで高
い品質且つ効率の良い符号化を行う際に用いられる標準
規格群である。例えば、静止画像の符号化のためのＭＰ
ＥＧ−１、動画像（ビデオ）の符号化のためのＭＰＥＧ
−２、マルチメディア符号化に関するＭＰＥＧ−４のよ
うな幾つかのＭＰＥＧ規格が存在する。
【０００３】コンテンツの記述ＭＰＥＧ委員会により極
く最近行われている規格化は、正式名では「マルチメデ
ィアコンテント記述インタフェース（Multimedia Conte
nt Description Interface）」と称するＭＰＥＧ−７で
ある。この規格、即ち、ＭＰＥＧ−７においては、種々
な種類もしくは形式のマルチメディアコンテンツを記述
するのに使用することができる記述子及び記述スキーム
（ＤＳ）の集まりを具現化することが計画されている。
なお、ここで言う記述子及び記述スキームは、特定のユ
ーザにとって関心のある内容の高速且つ効率的な検索を
可能にするものである。
く最近行われている規格化は、正式名では「マルチメデ
ィアコンテント記述インタフェース（Multimedia Conte
nt Description Interface）」と称するＭＰＥＧ−７で
ある。この規格、即ち、ＭＰＥＧ−７においては、種々
な種類もしくは形式のマルチメディアコンテンツを記述
するのに使用することができる記述子及び記述スキーム
（ＤＳ）の集まりを具現化することが計画されている。
なお、ここで言う記述子及び記述スキームは、特定のユ
ーザにとって関心のある内容の高速且つ効率的な検索を
可能にするものである。
【０００４】なお、これと関連して肝要なのは、ＭＰＥ
Ｇ−７規格は従来の符号化規格に取って代わるものでは
なく、従来の規格表現上に構築されるものであることを
念頭に置かれることである。また、この規格は、コンテ
ンツが記憶されるフォーマットには関与しない。
Ｇ−７規格は従来の符号化規格に取って代わるものでは
なく、従来の規格表現上に構築されるものであることを
念頭に置かれることである。また、この規格は、コンテ
ンツが記憶されるフォーマットには関与しない。
【０００５】ＭＰＥＧ−７の主たる用途は、サーチ及び
検索での使用であると期待される。単純な用途もしくは
アプリケーション環境においては、ユーザは特定のオブ
ジェクトの幾つかの属性を指定する。この低レベルの表
示においては、これら属性は、上記特定のオブジェクト
のテクスチャ、動きもしくは運動及び形状を記述する記
述子を含むことができる。一層高レベルの表示を得るた
めには、幾つかの低レベル記述子を組合せた手の混んだ
記述スキームが考えられ得る。
検索での使用であると期待される。単純な用途もしくは
アプリケーション環境においては、ユーザは特定のオブ
ジェクトの幾つかの属性を指定する。この低レベルの表
示においては、これら属性は、上記特定のオブジェクト
のテクスチャ、動きもしくは運動及び形状を記述する記
述子を含むことができる。一層高レベルの表示を得るた
めには、幾つかの低レベル記述子を組合せた手の混んだ
記述スキームが考えられ得る。
【０００６】従来の受信部１００が図１に示してある。
受信及び復号は２つの基本的な段階で行われる。第１の
段階においては、圧縮されたビデオデータから特徴が抽
出され、第２の段階では、抽出された特徴を用いてビデ
オの再構築もしくは再編成が行われる。
受信及び復号は２つの基本的な段階で行われる。第１の
段階においては、圧縮されたビデオデータから特徴が抽
出され、第２の段階では、抽出された特徴を用いてビデ
オの再構築もしくは再編成が行われる。
【０００７】第１の復号段階では、デマルチプレクサ
（demux）１１０が圧縮されたビットストリーム１０１
を受ける。該デマルチプレクサは、受信したビットスト
リームのパケットに同期し、ビットストリームのビデオ
部分、オーディオ部分及びデータ部分を一次ビットスト
リーム１０２に分離する。この時点では依然として圧縮
されている１次ビットストリームはメモリコントローラ
１３０を用いて共有メモリ装置１２０に送られる。フロ
ントエンド パーサ１４０は、圧縮されたビットストリ
ームをパース（解析）する。このパーサ１４０は、ビッ
トストリームの高レベルのシンタックス（構文）、例え
ば、ＭＰＥＧ−２規格でスライスレイヤより上のシンタ
ックスを抽出する機能を有する。
（demux）１１０が圧縮されたビットストリーム１０１
を受ける。該デマルチプレクサは、受信したビットスト
リームのパケットに同期し、ビットストリームのビデオ
部分、オーディオ部分及びデータ部分を一次ビットスト
リーム１０２に分離する。この時点では依然として圧縮
されている１次ビットストリームはメモリコントローラ
１３０を用いて共有メモリ装置１２０に送られる。フロ
ントエンド パーサ１４０は、圧縮されたビットストリ
ームをパース（解析）する。このパーサ１４０は、ビッ
トストリームの高レベルのシンタックス（構文）、例え
ば、ＭＰＥＧ−２規格でスライスレイヤより上のシンタ
ックスを抽出する機能を有する。
【０００８】上記レベルより低いレイヤーもしくはレベ
ルのビットはシンボル プロセッサ１５０に転送され
る。このシンボル プロセッサ１５０は主に、可変長復
号（ＶＬＤ）動作を行う。ＭＰＥＧビットストリームで
は、例えば、運動ベクトル及び離散コサイン変換（ＤＣ
Ｔ）係数が可変長コードによって、マクロブロックコー
ド等のような他の情報と共に符号化されている。
ルのビットはシンボル プロセッサ１５０に転送され
る。このシンボル プロセッサ１５０は主に、可変長復
号（ＶＬＤ）動作を行う。ＭＰＥＧビットストリームで
は、例えば、運動ベクトル及び離散コサイン変換（ＤＣ
Ｔ）係数が可変長コードによって、マクロブロックコー
ド等のような他の情報と共に符号化されている。
【０００９】第２の復号段階において、付加的なブロッ
クを取り込んでビデオ信号を再編成する。シンボルプロ
セッサから、抽出されたマクロブロック及び運動ベクト
ル情報がアドレス発生部１６０に送られ、ＤＣＴ情報
は、逆離散コサイン変換部、即ちＩＤＣＴ部１７０に送
られる。
クを取り込んでビデオ信号を再編成する。シンボルプロ
セッサから、抽出されたマクロブロック及び運動ベクト
ル情報がアドレス発生部１６０に送られ、ＤＣＴ情報
は、逆離散コサイン変換部、即ちＩＤＣＴ部１７０に送
られる。
【００１０】アドレス発生器１６０は、メモリ装置１２
０にビデオデータを書き込んだり該メモリ装置１２０か
らデータを読み取ったりするためのメモリアドレスを発
生する機能を有する。該アドレス発生器は、予測モー
ド、現在ブロック位置及び運動ベクトル値のような情報
に大きく依存する。これら情報の幾つかは、運動補償装
置１８０に転送され、該運動補償装置１８０はメモリ装
置から読み出されたデータとＩＤＣＴ部１７０から受け
取ったデータとを結合する機能を有する。
０にビデオデータを書き込んだり該メモリ装置１２０か
らデータを読み取ったりするためのメモリアドレスを発
生する機能を有する。該アドレス発生器は、予測モー
ド、現在ブロック位置及び運動ベクトル値のような情報
に大きく依存する。これら情報の幾つかは、運動補償装
置１８０に転送され、該運動補償装置１８０はメモリ装
置から読み出されたデータとＩＤＣＴ部１７０から受け
取ったデータとを結合する機能を有する。
【００１１】モード内予測（intra mode prediction）
の場合には、メモリから読み取られるデータは予測情報
であるので、メモリから読み出すデータが無い場合が有
り得る。再編成されたデータは、運動補償装置１８０か
らメモリ１２０に書き込まれる。このデータを表示すべ
き時点になると、表示プロセッサ１９０が当該データを
読み込んで必要となり得る付加的な処理を行う。ユーザ
インタフェース１９５はメモリコントローラ１３０との
相互作用で、限定された位置アクセスを実現する。
の場合には、メモリから読み取られるデータは予測情報
であるので、メモリから読み出すデータが無い場合が有
り得る。再編成されたデータは、運動補償装置１８０か
らメモリ１２０に書き込まれる。このデータを表示すべ
き時点になると、表示プロセッサ１９０が当該データを
読み込んで必要となり得る付加的な処理を行う。ユーザ
インタフェース１９５はメモリコントローラ１３０との
相互作用で、限定された位置アクセスを実現する。
【００１２】ネットワーク化今や、コンピュータ技術
は、家庭や企業を通し多くのインテリジェントな電子デ
バイスをネットワーク化することができる程充分に低コ
ストで実現できる。現在ではまた、ワールド ワイド ウ
ェブ（World Wide Web：ＷＷＷ）を利用してデバイス間
でディジタルデータをオーディオ、画像及びビデオの形
態で転送したり、相互にデータ情報を共有することも可
能である。
は、家庭や企業を通し多くのインテリジェントな電子デ
バイスをネットワーク化することができる程充分に低コ
ストで実現できる。現在ではまた、ワールド ワイド ウ
ェブ（World Wide Web：ＷＷＷ）を利用してデバイス間
でディジタルデータをオーディオ、画像及びビデオの形
態で転送したり、相互にデータ情報を共有することも可
能である。
【００１３】ユニバーサル プラグ アンド プレイ（Uni
versal Plug and Play：ＵＰＮＰ）が、ネットワーク化
されるデバイスに対し使用が容易で汎用性があり規格に
基づく接続を実現する上でイニシアティブを取ってい
る。ＵＰＮＰは、パーソナルコンピュータ、即ちＰＣ、
ディジタル装置及び無線装置をネットワーク化するため
の構成要素である。ＵＰＮＰは、家庭、企業並びにウエ
ブ（Web）接続が可能なあらゆる箇所でネットワーク化
されたデバイス間でのデータの制御及び転送を行うため
にＴＣＰ／ＩＰ及び上記 Web 或るいはその他の単純な
制御プロトコル（Simple Control Protocol：ＳＣＰ）
を用いる。
versal Plug and Play：ＵＰＮＰ）が、ネットワーク化
されるデバイスに対し使用が容易で汎用性があり規格に
基づく接続を実現する上でイニシアティブを取ってい
る。ＵＰＮＰは、パーソナルコンピュータ、即ちＰＣ、
ディジタル装置及び無線装置をネットワーク化するため
の構成要素である。ＵＰＮＰは、家庭、企業並びにウエ
ブ（Web）接続が可能なあらゆる箇所でネットワーク化
されたデバイス間でのデータの制御及び転送を行うため
にＴＣＰ／ＩＰ及び上記 Web 或るいはその他の単純な
制御プロトコル（Simple Control Protocol：ＳＣＰ）
を用いる。
【００１４】ＵＰＮＰは、特別なコンフィギュレーショ
ン要することなくネットワーク内で動作するように企図
されている。即ち、ＵＰＮＰは、ネットワークを動的に
結合したり、インターネットプロトコル（Internet Pro
tocol：ＩＰ）アドレスを得たり、要求に応じ当該ＵＰ
ＮＰ自体及びその能力を公示したり、ネットワーク内の
他のデバイスの存在及び能力に関し学習したりすること
ができるデバイスである。また、このＵＰＮＰは、ネッ
トワークの結合に加え、不所望な状態を何ら残すことな
くネットワークから離脱することができるデバイスであ
る。
ン要することなくネットワーク内で動作するように企図
されている。即ち、ＵＰＮＰは、ネットワークを動的に
結合したり、インターネットプロトコル（Internet Pro
tocol：ＩＰ）アドレスを得たり、要求に応じ当該ＵＰ
ＮＰ自体及びその能力を公示したり、ネットワーク内の
他のデバイスの存在及び能力に関し学習したりすること
ができるデバイスである。また、このＵＰＮＰは、ネッ
トワークの結合に加え、不所望な状態を何ら残すことな
くネットワークから離脱することができるデバイスであ
る。
【００１５】セキュリティ システム（安全保護システ
ム）従来の殆どの監視システムにおいては、屋内及び屋
外の場面もしくはシーンについてのビデオを得るのに閉
回路テレビジョン（ＣＣＴＶ）方式を採用している。こ
の種のセキュリティ システムにおいては、典型的に、
保安作業員が同時に観察可能なようにビデオをモニタ上
に表示したり、後で再生して観察するために微速度モー
ドでビデオを記録したりする。
ム）従来の殆どの監視システムにおいては、屋内及び屋
外の場面もしくはシーンについてのビデオを得るのに閉
回路テレビジョン（ＣＣＴＶ）方式を採用している。こ
の種のセキュリティ システムにおいては、典型的に、
保安作業員が同時に観察可能なようにビデオをモニタ上
に表示したり、後で再生して観察するために微速度モー
ドでビデオを記録したりする。
【００１６】このような方法には由々しい制限が存在す
る。第１に、人間がビデオ監視のような作業において処
理することができる可視情報の量には限界がある。時間
が経てば、有意味なセキュリティ イベントが容易に見
過ごされ得る。また、多数のビデオを観察しなければな
らない場合には、監視の有効性が低減する。事後的に分
析するために記録されたビデオでは実時間ベースでの関
与が不可能である。加えて、ビデオ記録の容量には限界
があり、更に故障の可能性がある。
る。第１に、人間がビデオ監視のような作業において処
理することができる可視情報の量には限界がある。時間
が経てば、有意味なセキュリティ イベントが容易に見
過ごされ得る。また、多数のビデオを観察しなければな
らない場合には、監視の有効性が低減する。事後的に分
析するために記録されたビデオでは実時間ベースでの関
与が不可能である。加えて、ビデオ記録の容量には限界
があり、更に故障の可能性がある。
【００１７】一般に、ビデオは、組織化もしくは体系化
されておらず、またインデックスも付けられていない。
有意味なセキュリティイベントを探知するための効果的
な手段無しでは、保安作業員が総ての稼動中のカメラか
らの出力を監視したり或るいは記録することはコスト的
に見合わない。セキュリティイベントを大雑把に検出す
るためにビデオ運動検出を利用することができる。例え
ば、保安領域内でのあらゆる運動を有意味なイベントと
見做すことができる。しかしながら、複雑な場面、即ち
シーンにおいては、非常に単純な運動検出スキームでは
不充分である。
されておらず、またインデックスも付けられていない。
有意味なセキュリティイベントを探知するための効果的
な手段無しでは、保安作業員が総ての稼動中のカメラか
らの出力を監視したり或るいは記録することはコスト的
に見合わない。セキュリティイベントを大雑把に検出す
るためにビデオ運動検出を利用することができる。例え
ば、保安領域内でのあらゆる運動を有意味なイベントと
見做すことができる。しかしながら、複雑な場面、即ち
シーンにおいては、非常に単純な運動検出スキームでは
不充分である。
【００１８】米国特許第５,５９４,８４２号明細書に
は、群運動ベクトルを用いてイベントを検出する監視シ
ステムが記述されている。また、米国特許第６,０３１,
５８２号明細書には、運動ベクトルに対応する信号強度
差を用いてイベントを検出する監視システムが記述され
ている。
は、群運動ベクトルを用いてイベントを検出する監視シ
ステムが記述されている。また、米国特許第６,０３１,
５８２号明細書には、運動ベクトルに対応する信号強度
差を用いてイベントを検出する監視システムが記述され
ている。
【００１９】米国特許第６,０６４,３０３号明細書に
は、疑わしい或るいは特色を表していないイベントを検
出するために周囲環境を監視するパーソナルコンピュー
タ（ＰＣ）ベースの家庭用セキュリティシステム（保安
システム）が記述されている。或る閾イベントが検出さ
れると、このシステムは付加的なイベントに対し緻密な
監視を行う。このようにして、累積された検出イベント
が或る閾値を越えると、セキュリティシステムは適当な
対処活動を行う。このシステムは、パターン認識により
音響及びビデオイベントを検出する。音響イベントは、
予め記録されているファイルを用い、高速フーリエ変換
で処理され、時間の関数として種々な離散的な特性周波
数を有する振幅に変換され、他方、検出されたビデオイ
ベントは、運動（大きさ及び持続期間）、光のコントラ
ストの変化及び明暗の変化で表される。個々のイベント
は、関連の重大度を有する。応答は、予め記録されてい
るメッセージを用い関連の番号の電話設備を用いて行わ
れる。
は、疑わしい或るいは特色を表していないイベントを検
出するために周囲環境を監視するパーソナルコンピュー
タ（ＰＣ）ベースの家庭用セキュリティシステム（保安
システム）が記述されている。或る閾イベントが検出さ
れると、このシステムは付加的なイベントに対し緻密な
監視を行う。このようにして、累積された検出イベント
が或る閾値を越えると、セキュリティシステムは適当な
対処活動を行う。このシステムは、パターン認識により
音響及びビデオイベントを検出する。音響イベントは、
予め記録されているファイルを用い、高速フーリエ変換
で処理され、時間の関数として種々な離散的な特性周波
数を有する振幅に変換され、他方、検出されたビデオイ
ベントは、運動（大きさ及び持続期間）、光のコントラ
ストの変化及び明暗の変化で表される。個々のイベント
は、関連の重大度を有する。応答は、予め記録されてい
るメッセージを用い関連の番号の電話設備を用いて行わ
れる。
【００２０】米国特許第５,６６６,１５７号明細書に
は、或る領域の実像を、第１の解像レベルの電子的ビデ
オ信号に変換するためのビデオカメラを有する異常検出
／監視システムが記述されている。このシステムは、上
記領域内に存在する個々人の運動を標本化するための手
段を備えている。標本化された運動のビデオ信号は、犯
罪意図を有する人物を表す既知の運動特性と電子的に比
較される。その上で、犯罪意図のレベルを決定し、適当
な警報信号を発生する。
は、或る領域の実像を、第１の解像レベルの電子的ビデ
オ信号に変換するためのビデオカメラを有する異常検出
／監視システムが記述されている。このシステムは、上
記領域内に存在する個々人の運動を標本化するための手
段を備えている。標本化された運動のビデオ信号は、犯
罪意図を有する人物を表す既知の運動特性と電子的に比
較される。その上で、犯罪意図のレベルを決定し、適当
な警報信号を発生する。
【００２１】ＭＰＥＧ−７文書ＩＳＯ／ＩＥＣ ＪＴＣ
１／ＳＣ２９／ＷＧ１１／Ｎ２８６１、「ＭＰＥＧ−７
Applications Document v.9」（１９９９年７月発行）
には、カメラが要注意領域を監視し何らかのイベントが
生じた場合に活動をトリガする監視システムが開示され
ている。このシステムでは、情報を有していない或るい
は限られた情報しか有していないデータベースを構築
し、時間の経過と共にビデオデータベース及びメタデー
タを形成する。（「エンコーダ」側での）メタコンテン
ツの抽出及び（「デコーダ」側での）メタデータの利用
においては同じデータベースを用いるものとしている。
１／ＳＣ２９／ＷＧ１１／Ｎ２８６１、「ＭＰＥＧ−７
Applications Document v.9」（１９９９年７月発行）
には、カメラが要注意領域を監視し何らかのイベントが
生じた場合に活動をトリガする監視システムが開示され
ている。このシステムでは、情報を有していない或るい
は限られた情報しか有していないデータベースを構築
し、時間の経過と共にビデオデータベース及びメタデー
タを形成する。（「エンコーダ」側での）メタコンテン
ツの抽出及び（「デコーダ」側での）メタデータの利用
においては同じデータベースを用いるものとしている。
【００２２】しかしながら、多くの安全保護用途におい
ては、実時間ベースでのイベントの解析が要求される。
上記のＭＰＥＧ−７ Applications Document では、ど
のようにして実時間パフォーマンスを達成するかに関す
る情報は与えられていない。更にまた、高速で信頼性が
あり且つ正確なイベント検出を達成するために抽出しな
ければならない実際のメタデータについては規定がな
い。最後に、この文書には、抽出装置及び他のネットワ
ーク化したデバイスの動作に関し何ら言うべきものがな
い。
ては、実時間ベースでのイベントの解析が要求される。
上記のＭＰＥＧ−７ Applications Document では、ど
のようにして実時間パフォーマンスを達成するかに関す
る情報は与えられていない。更にまた、高速で信頼性が
あり且つ正確なイベント検出を達成するために抽出しな
ければならない実際のメタデータについては規定がな
い。最後に、この文書には、抽出装置及び他のネットワ
ーク化したデバイスの動作に関し何ら言うべきものがな
い。
【００２３】従って、上述のようにビデオ符号化及びネ
ットワーク化技術を利用する改良された監視システムを
実現することが望ましい。
ットワーク化技術を利用する改良された監視システムを
実現することが望ましい。
【００２４】
【発明の概要】本発明は、圧縮されたディジタルビデオ
信号から低レベルの特徴を動的に抽出する特徴抽出装置
と、上記特徴抽出装置に接続されて上記低レベルの特徴
をコンテンツ記述子として符号化する記述エンコーダを
含む監視／管制システムを提供するものである。上記シ
ステムはまた、上記記述エンコーダに接続されて、上記
コンテンツ記述子からセキュリティイベントを検出する
ためのイベント検出器と、上記イベント検出器に接続さ
れて、セキュリティイベントの検出に応答し制御信号を
発生するための制御信号プロセッサとを含む。
信号から低レベルの特徴を動的に抽出する特徴抽出装置
と、上記特徴抽出装置に接続されて上記低レベルの特徴
をコンテンツ記述子として符号化する記述エンコーダを
含む監視／管制システムを提供するものである。上記シ
ステムはまた、上記記述エンコーダに接続されて、上記
コンテンツ記述子からセキュリティイベントを検出する
ためのイベント検出器と、上記イベント検出器に接続さ
れて、セキュリティイベントの検出に応答し制御信号を
発生するための制御信号プロセッサとを含む。
【００２５】本システムは、更に、互いにネットワーク
により接続された電話器、パーソナルコンピュータ及び
ビデオレコーダを含む。該ネットワークは、上記制御信
号を搬送するための低周波帯域幅のネットワークと、上
記圧縮されたディジタルビデオ信号及び上記コンテンツ
記述子を搬送するための高周波帯域幅のネットワークと
を含む。メモリ装置は、上記圧縮されたディジタルビデ
オ信号、上記コンテンツ記述子、上記制御信号、ユーザ
入力及びユーザのコンフィギュレーション オプション
を記憶する。
により接続された電話器、パーソナルコンピュータ及び
ビデオレコーダを含む。該ネットワークは、上記制御信
号を搬送するための低周波帯域幅のネットワークと、上
記圧縮されたディジタルビデオ信号及び上記コンテンツ
記述子を搬送するための高周波帯域幅のネットワークと
を含む。メモリ装置は、上記圧縮されたディジタルビデ
オ信号、上記コンテンツ記述子、上記制御信号、ユーザ
入力及びユーザのコンフィギュレーション オプション
を記憶する。
【００２６】本監視／管制システムは、更に、上記特徴
抽出装置に接続されて上記圧縮ディジタルビデオ信号か
ら運動ベクトル並びにマクロブロック及びＤＣＴ係数を
抽出するシンボルプロセッサを具備すると共に上記メモ
リ装置に接続されて、上記圧縮されたディジタルビデオ
信号及び上記コンテンツ記述子を含む圧縮された出力デ
ィジタルビデオ信号を発生するためのビットストリーム
プロセッサを具備する。
抽出装置に接続されて上記圧縮ディジタルビデオ信号か
ら運動ベクトル並びにマクロブロック及びＤＣＴ係数を
抽出するシンボルプロセッサを具備すると共に上記メモ
リ装置に接続されて、上記圧縮されたディジタルビデオ
信号及び上記コンテンツ記述子を含む圧縮された出力デ
ィジタルビデオ信号を発生するためのビットストリーム
プロセッサを具備する。
【００２７】
【発明の実施の形態】ネットワーク化した監視／管制シ
ステム 図２は、本発明による監視／管制システム３００を備え
たネットワーク２００を示す。このシステムは、１個ま
たは複数個のディジタルビデオカメラ２０１乃至２０
２、モニタ（テレビジョン：ＴＶ）２０３及びリモート
コントローラ２０３’、ビデオレコーダ（ＶＣＲ）２０
４、電話器２０５、無線電話器２０６、記憶装置（ＨＤ
Ｄ）２０７、パーソナルコンピュータ２０８、汎用ディ
スク装置（ＤＶＤ−ＲＷ）２０９及び遠隔場所のパーソ
ナルコンピュータ（ＰＣ）２１０から構成されている。
上記装置２０１乃至２１０及び監視／管制システム３０
０は、ネットワークを介して相互に通信することができ
る。ここで、ネットワークは、例えば、ローカルインタ
ネット２１１及び広域インタネット２１２並びに無線区
間２１３を含むことができる。
ステム 図２は、本発明による監視／管制システム３００を備え
たネットワーク２００を示す。このシステムは、１個ま
たは複数個のディジタルビデオカメラ２０１乃至２０
２、モニタ（テレビジョン：ＴＶ）２０３及びリモート
コントローラ２０３’、ビデオレコーダ（ＶＣＲ）２０
４、電話器２０５、無線電話器２０６、記憶装置（ＨＤ
Ｄ）２０７、パーソナルコンピュータ２０８、汎用ディ
スク装置（ＤＶＤ−ＲＷ）２０９及び遠隔場所のパーソ
ナルコンピュータ（ＰＣ）２１０から構成されている。
上記装置２０１乃至２１０及び監視／管制システム３０
０は、ネットワークを介して相互に通信することができ
る。ここで、ネットワークは、例えば、ローカルインタ
ネット２１１及び広域インタネット２１２並びに無線区
間２１３を含むことができる。
【００２８】ネットワークの動作 動作中、ネットワークは、低周波帯域幅の制御信号及び
高周波帯域幅のデータメッセージ或るいはビデオコンテ
ンツを搬送する。
高周波帯域幅のデータメッセージ或るいはビデオコンテ
ンツを搬送する。
【００２９】制御信号 制御信号は、ＵＰＮＰ、電力線、家庭用プラグ、電話回
線或るいは他の何らかのプロトコルを用いて装置間で転
送することができる。これら制御信号は、両立性のある
異なった装置をして他の装置の制御を可能にすると共
に、これら制御信号は、装置間で共有したり通信したり
することができる。例えば、制御信号を用いてカメラ２
０１乃至２０２をオン／オフ制御したり、カメラを（上
下或るいは左右に）動かしてズームイン或るいはズーム
アウトすることができる。メッセージは自動的に発生し
たり或るいはユーザによって発生することができる。例
えば、カメラを周期的にオン／オフすることができる
し、或るいはユーザがリモートコントローラ２０３’、
ＰＣ（ローカルコンピュータ２０８或るいは遠隔コンピ
ュータ２０９）、ＶＣＲ２０４、ＤＶＤ２０９或るいは
ＴＶを用いてカメラを制御することができる。同様にし
て、パーソナルコンピュータ（ＰＣ）或るいは電話器を
用いて制御信号を他の装置や消費者の電子デバイス、例
えばＶＣＲやＤＶＤに送ることができる。
線或るいは他の何らかのプロトコルを用いて装置間で転
送することができる。これら制御信号は、両立性のある
異なった装置をして他の装置の制御を可能にすると共
に、これら制御信号は、装置間で共有したり通信したり
することができる。例えば、制御信号を用いてカメラ２
０１乃至２０２をオン／オフ制御したり、カメラを（上
下或るいは左右に）動かしてズームイン或るいはズーム
アウトすることができる。メッセージは自動的に発生し
たり或るいはユーザによって発生することができる。例
えば、カメラを周期的にオン／オフすることができる
し、或るいはユーザがリモートコントローラ２０３’、
ＰＣ（ローカルコンピュータ２０８或るいは遠隔コンピ
ュータ２０９）、ＶＣＲ２０４、ＤＶＤ２０９或るいは
ＴＶを用いてカメラを制御することができる。同様にし
て、パーソナルコンピュータ（ＰＣ）或るいは電話器を
用いて制御信号を他の装置や消費者の電子デバイス、例
えばＶＣＲやＤＶＤに送ることができる。
【００３０】ビデオ信号 ビデオ信号は、ネットワーク２１１を介しＩＥＥＥ−３
９４規格に従い伝送することができる。カメラがオン状
態にある時には、ビデオをモニタ上にフルウインドウ或
るいは映像内映像（ＰＩＰ）ウインドウとして表示する
ことができる。該ビデオはまた、ＶＣＲ、ＤＶＤ或るい
はＨＤＤ（ハードディスクドライブ）で記録することも
可能である。ビデオ情報は、将来の操作及び観察の目的
で、例えば、ＭＰＥＧ−７コンテンツベースの記述子の
ような高レベルのメタデータを含むように符号化され
る。この符号化は、カメラ内で行うこともできるし、或
るいはパーソナルコンピュータもしくはＰＣまたは監視
／管制システム３００で行うことも可能である。ＰＣは
またコード変換を行うことができる。即ち、該ＰＣは、
ビデオ情報をＭＰＥＧ−２またはＭＰＥＧ−４から、可
能ならば低いビットレート、低い空間解像度或るいはＮ
ＴＳＣフォーマットで他のより望ましい符号化された情
報に変換することができる。符号化されたビデオ情報
は、ＶＣＲ、ＤＶＤ或るいはＨＤＤに記録することがで
きる。符号化に就いては追って詳細に説明する。
９４規格に従い伝送することができる。カメラがオン状
態にある時には、ビデオをモニタ上にフルウインドウ或
るいは映像内映像（ＰＩＰ）ウインドウとして表示する
ことができる。該ビデオはまた、ＶＣＲ、ＤＶＤ或るい
はＨＤＤ（ハードディスクドライブ）で記録することも
可能である。ビデオ情報は、将来の操作及び観察の目的
で、例えば、ＭＰＥＧ−７コンテンツベースの記述子の
ような高レベルのメタデータを含むように符号化され
る。この符号化は、カメラ内で行うこともできるし、或
るいはパーソナルコンピュータもしくはＰＣまたは監視
／管制システム３００で行うことも可能である。ＰＣは
またコード変換を行うことができる。即ち、該ＰＣは、
ビデオ情報をＭＰＥＧ−２またはＭＰＥＧ−４から、可
能ならば低いビットレート、低い空間解像度或るいはＮ
ＴＳＣフォーマットで他のより望ましい符号化された情
報に変換することができる。符号化されたビデオ情報
は、ＶＣＲ、ＤＶＤ或るいはＨＤＤに記録することがで
きる。符号化に就いては追って詳細に説明する。
【００３１】ユーザは、記録後、記録されているセキュ
リティイベントに高速且つ効率的にアクセスするため
に、ビデオブラウザ（閲覧ソフトウエア）を用いてビデ
オを点検することができる。例えば、ユーザが一週間留
守にして家のビデオを記録して置いた場合には、ユーザ
は家に近付く人物を含む場面のみを観察するだけで良
く、その他の有意味なセキュリティイベントを含まない
何百時間分ものビデオを観察する必要はない。
リティイベントに高速且つ効率的にアクセスするため
に、ビデオブラウザ（閲覧ソフトウエア）を用いてビデ
オを点検することができる。例えば、ユーザが一週間留
守にして家のビデオを記録して置いた場合には、ユーザ
は家に近付く人物を含む場面のみを観察するだけで良
く、その他の有意味なセキュリティイベントを含まない
何百時間分ものビデオを観察する必要はない。
【００３２】セキュリティイベントの検出に応答して、
本システムは、電話器に対する制御信号を用い、警察、
消防署或るいは緊急機関のような適切な非常対処機関に
ダイヤルすることができる。本システムはまた、イベン
トの性質に依存し他の任意適当な電話番号を選択するこ
とも可能である。更にまた、第３世代（３Ｇ）のセル方
式電話器（携帯電話）が利用可能である場合には、カメ
ラの出力をそのまま、３Ｇ電話器と通信可能な電話設備
に送ることができる。
本システムは、電話器に対する制御信号を用い、警察、
消防署或るいは緊急機関のような適切な非常対処機関に
ダイヤルすることができる。本システムはまた、イベン
トの性質に依存し他の任意適当な電話番号を選択するこ
とも可能である。更にまた、第３世代（３Ｇ）のセル方
式電話器（携帯電話）が利用可能である場合には、カメ
ラの出力をそのまま、３Ｇ電話器と通信可能な電話設備
に送ることができる。
【００３３】監視／管制システムの概要 図３は、監視／管制システム（以降、ＳＣＳとも称す
る）３００の主たる構成要素を示す。本監視／管制シス
テムもしくはＳＣＳは、記述エンコーダ３２０及びイベ
ント検出器３３０に接続されたビデオ受信／復号／表示
器（「デコーダ」）を備えている。また、追って詳細に
説明するように、記述エンコーダ３２０及びイベント検
出器３３０は相互に接続されている。制御信号プロセッ
サ３４０がイベント検出器の出力端に接続されている。
復号器、即ちデコーダはユーザ入力３０５を受け付けて
ＳＣＳのコンフィギュレーションを設定する。ここで、
受け付けることができる入力の種類並びにＳＣＳの動作
に対する該入力の影響について詳細に説明する。図１に
示したシステムの場合と同様に、圧縮されたディジタル
入力ビットストリーム３０１は、ビデオデコーダ３１０
により受け取られる。ＳＣＳの出力３０９は、表示可能
なビデオデータストリーム、制御信号及び増補もしくは
拡張ビットストリームを含むことができる。制御信号発
生器は、検出されたセキュリティイベントに応答して制
御信号３４１を発生する。この場合の１つの利点は、増
補もしくは拡張ビットストリームがセキュリティイベン
トを検出するのに有用な情報を含んでいることである。
る）３００の主たる構成要素を示す。本監視／管制シス
テムもしくはＳＣＳは、記述エンコーダ３２０及びイベ
ント検出器３３０に接続されたビデオ受信／復号／表示
器（「デコーダ」）を備えている。また、追って詳細に
説明するように、記述エンコーダ３２０及びイベント検
出器３３０は相互に接続されている。制御信号プロセッ
サ３４０がイベント検出器の出力端に接続されている。
復号器、即ちデコーダはユーザ入力３０５を受け付けて
ＳＣＳのコンフィギュレーションを設定する。ここで、
受け付けることができる入力の種類並びにＳＣＳの動作
に対する該入力の影響について詳細に説明する。図１に
示したシステムの場合と同様に、圧縮されたディジタル
入力ビットストリーム３０１は、ビデオデコーダ３１０
により受け取られる。ＳＣＳの出力３０９は、表示可能
なビデオデータストリーム、制御信号及び増補もしくは
拡張ビットストリームを含むことができる。制御信号発
生器は、検出されたセキュリティイベントに応答して制
御信号３４１を発生する。この場合の１つの利点は、増
補もしくは拡張ビットストリームがセキュリティイベン
トを検出するのに有用な情報を含んでいることである。
【００３４】ネットワーク化した装置２０１乃至２１０
が改良されたセキュリティ動作を行うのを可能にするた
めに、本発明のシステムは、記述エンコーダ３２０を用
いて特徴の抽出を行う。記述エンコーダは、出力ビット
ストリームを拡張（増補）するためにコンテンツの記述
を発生する。増補もしくは拡張ビットストリームは元の
入力ビットストリーム３０１を含むことができる。
が改良されたセキュリティ動作を行うのを可能にするた
めに、本発明のシステムは、記述エンコーダ３２０を用
いて特徴の抽出を行う。記述エンコーダは、出力ビット
ストリームを拡張（増補）するためにコンテンツの記述
を発生する。増補もしくは拡張ビットストリームは元の
入力ビットストリーム３０１を含むことができる。
【００３５】イベント検出器３３０は、抽出された特徴
を用いて、高レベルのコンテンツを発生し、デコーダ３
１０にセキュリティイベントを表す信号を供給する。制
御信号プロセッサ３４０は、セキュリティイベントに応
答して制御信号を発生し、この制御信号は、ネットワー
ク装置２０１乃至２１０に伝送される。
を用いて、高レベルのコンテンツを発生し、デコーダ３
１０にセキュリティイベントを表す信号を供給する。制
御信号プロセッサ３４０は、セキュリティイベントに応
答して制御信号を発生し、この制御信号は、ネットワー
ク装置２０１乃至２１０に伝送される。
【００３６】図４は、監視／管制システム、即ちＳＣＳ
３００をより詳細に示す図である。本発明のＳＣＳは、
図１の再生システムとは、内部動作及び出力に関して異
なる。図４に示してある点線は、従来のビデオ再生シス
テムには存在しない構成要素に対する接続を示してい
る。
３００をより詳細に示す図である。本発明のＳＣＳは、
図１の再生システムとは、内部動作及び出力に関して異
なる。図４に示してある点線は、従来のビデオ再生シス
テムには存在しない構成要素に対する接続を示してい
る。
【００３７】ＳＣＳ３００は、多重分離器もしくはデマ
ルチプレクサ（ｄｅｍｕｘ）４１０と、メモリ装置５０
０及びメモリコントローラ４３０と、フロントエンドパ
ーサ４４０と、シンボル（記号）プロセッサ４５０とを
含んでいる。これらシステム構成要素は、第１段階の復
号中、特徴の抽出４５５に用いられる。
ルチプレクサ（ｄｅｍｕｘ）４１０と、メモリ装置５０
０及びメモリコントローラ４３０と、フロントエンドパ
ーサ４４０と、シンボル（記号）プロセッサ４５０とを
含んでいる。これらシステム構成要素は、第１段階の復
号中、特徴の抽出４５５に用いられる。
【００３８】また、本システムは、アドレス発生器４６
０、逆離散コサイン変換部、即ち逆ＤＣＴ（ＩＤＣＴ）
４７０、運動補償装置４８０及び表示プロセッサ４９０
を備えている。これら構成要素は、第２段階の復号中に
イメージもしくは像の再編成（再生）及び表示４０２を
発生するのに用いられる。尚、後述する或る種の動作モ
ードにおいては、従来の受信部とは対照的に、第２段階
の復号中に用いられる叙上の構成要素をオフにして全メ
モリ帯域幅及び処理優先度を特徴の抽出及び第１段階の
復号に割当てることができる。
０、逆離散コサイン変換部、即ち逆ＤＣＴ（ＩＤＣＴ）
４７０、運動補償装置４８０及び表示プロセッサ４９０
を備えている。これら構成要素は、第２段階の復号中に
イメージもしくは像の再編成（再生）及び表示４０２を
発生するのに用いられる。尚、後述する或る種の動作モ
ードにおいては、従来の受信部とは対照的に、第２段階
の復号中に用いられる叙上の構成要素をオフにして全メ
モリ帯域幅及び処理優先度を特徴の抽出及び第１段階の
復号に割当てることができる。
【００３９】内部動作への切り換えは、特徴抽出装置４
１０及びＭＰＥＧ−７記述エンコーダ３２０の動作の結
果として行われる。特徴抽出装置４５５は本明細書で説
明する動的特徴抽出を実行する。運動ベクトル情報、Ｄ
ＣＴ係数及び形状情報を含む低レベルのデータはシンボ
ル（記号）プロセッサ４５０から特徴抽出装置４５５に
転送される。
１０及びＭＰＥＧ−７記述エンコーダ３２０の動作の結
果として行われる。特徴抽出装置４５５は本明細書で説
明する動的特徴抽出を実行する。運動ベクトル情報、Ｄ
ＣＴ係数及び形状情報を含む低レベルのデータはシンボ
ル（記号）プロセッサ４５０から特徴抽出装置４５５に
転送される。
【００４０】後述するように、この低レベルデータは、
サーチ及び検索に有用であるＭＰＥＧ−７記述子に写像
することができる。この写像（マッピング）は、記述エ
ンコーダ３２０によって行われる。また、該エンコーダ
は、フロント エンド パーサ４４０及びシステム デマ
ルチプレクサ４１０から情報を受けることができる。
サーチ及び検索に有用であるＭＰＥＧ−７記述子に写像
することができる。この写像（マッピング）は、記述エ
ンコーダ３２０によって行われる。また、該エンコーダ
は、フロント エンド パーサ４４０及びシステム デマ
ルチプレクサ４１０から情報を受けることができる。
【００４１】好適な実施の形態においては、エンコーダ
は、選択された規格、例えば、ＭＰＥＧ−７規格に従っ
て記述スキームを実体化（instantiate）する。尚、他
の規格に応じて他の形式のエンコーダもを使用可能であ
ることは理解されたい。規格に従っての符号化で、装置
２０１乃至２１０間の相互動作が可能になる。記述スキ
ームはイベント検出器３３０に転送される。抽出された
データも、メモリコントローラ４３０を介してメインメ
モリ装置５００に転送することができる。
は、選択された規格、例えば、ＭＰＥＧ−７規格に従っ
て記述スキームを実体化（instantiate）する。尚、他
の規格に応じて他の形式のエンコーダもを使用可能であ
ることは理解されたい。規格に従っての符号化で、装置
２０１乃至２１０間の相互動作が可能になる。記述スキ
ームはイベント検出器３３０に転送される。抽出された
データも、メモリコントローラ４３０を介してメインメ
モリ装置５００に転送することができる。
【００４２】イベント検出器３３０は、セキュリティイ
ベントを検出し、検出されたイベントをシステムの他の
構成要素、特に、制御信号プロセッサ３４０に信号で報
知する。ユーザ入力３０５は、個人情報及びオプション
入力３０５に対しシステムのコンフィギュレーションを
設定するのに用いられる。ここで個人情報には、例え
ば、職場、携帯電話、ページャ、ｅ−メイルアドレス、
警察署、消防署、救急機関のような接触先電話番号、接
触の優先度、即ち、ｅ−メイルを先に送り、特定の時間
内に応答がない場合には警察署に電話するとか或るいは
総ての接触先に報知する等の接触優先順位、日／時のカ
ストマイズ、例えば、ＶＣＲ、ＤＶＤ、ＴＶ、ＰＣ、モ
ニタ等のビデオ出力を送るための作業場所を呼出して６
ｐｍ以前にはｅ−メイルを送り、６ｐｍ以後には携帯電
話を呼出す等の日／時カストマイズ情報を含む。
ベントを検出し、検出されたイベントをシステムの他の
構成要素、特に、制御信号プロセッサ３４０に信号で報
知する。ユーザ入力３０５は、個人情報及びオプション
入力３０５に対しシステムのコンフィギュレーションを
設定するのに用いられる。ここで個人情報には、例え
ば、職場、携帯電話、ページャ、ｅ−メイルアドレス、
警察署、消防署、救急機関のような接触先電話番号、接
触の優先度、即ち、ｅ−メイルを先に送り、特定の時間
内に応答がない場合には警察署に電話するとか或るいは
総ての接触先に報知する等の接触優先順位、日／時のカ
ストマイズ、例えば、ＶＣＲ、ＤＶＤ、ＴＶ、ＰＣ、モ
ニタ等のビデオ出力を送るための作業場所を呼出して６
ｐｍ以前にはｅ−メイルを送り、６ｐｍ以後には携帯電
話を呼出す等の日／時カストマイズ情報を含む。
【００４３】図５に示すように、本発明のセキュリティ
システムのメモリ５００は、４種類のビデオデータ、即
ち、元の圧縮されたビットストリーム（ＢＳ）５１０の
総てもしくは一部分、関心のあるビデオを再編成した
り、その概要を作成するために選択されたフレーム（セ
キュリティフレーム）５２０、記述スキーム（ＤＳ）５
３０及びユーザ入力（ＵＩ）５４０を記憶する。このメ
モリはまたイベント検出器により出力される制御信号
（ＣＳ）５０１並びに上述したようコンフィギュレーシ
ョンに関するユーザオプション（ＵＰ）５０２を記憶す
る。
システムのメモリ５００は、４種類のビデオデータ、即
ち、元の圧縮されたビットストリーム（ＢＳ）５１０の
総てもしくは一部分、関心のあるビデオを再編成した
り、その概要を作成するために選択されたフレーム（セ
キュリティフレーム）５２０、記述スキーム（ＤＳ）５
３０及びユーザ入力（ＵＩ）５４０を記憶する。このメ
モリはまたイベント検出器により出力される制御信号
（ＣＳ）５０１並びに上述したようコンフィギュレーシ
ョンに関するユーザオプション（ＵＰ）５０２を記憶す
る。
【００４４】本発明のシステムはまた、特徴抽出能力を
有することに加えて、ビットストリーム プロセッサ４
９１を介し拡張ビットストリーム４０１を出力すること
ができる。該ビットストリーム プロセッサは、このデ
ータを、メモリコントローラを介してメイン メモリ装
置から受け取る。出力ビットストリームは、圧縮された
コンテンツ、即ち、元のビットストリーム３０１、コン
テンツのサマリ（要約）及びコンテンツの記述を含むこ
とができる。ビットストリーム プロセッサは、この情
報をコンテンツが存在する場所から遠隔のユーザに対し
伝送したりネットワークを介して記録装置に電送するの
に適した仕方でフォーマット化する。
有することに加えて、ビットストリーム プロセッサ４
９１を介し拡張ビットストリーム４０１を出力すること
ができる。該ビットストリーム プロセッサは、このデ
ータを、メモリコントローラを介してメイン メモリ装
置から受け取る。出力ビットストリームは、圧縮された
コンテンツ、即ち、元のビットストリーム３０１、コン
テンツのサマリ（要約）及びコンテンツの記述を含むこ
とができる。ビットストリーム プロセッサは、この情
報をコンテンツが存在する場所から遠隔のユーザに対し
伝送したりネットワークを介して記録装置に電送するの
に適した仕方でフォーマット化する。
【００４５】コンテンツ及び（または）その対応の記述
を出力する目的は、ユーザに対して、信号で伝送された
セキュリティイベントを遡及的に追跡するのを容易にす
る情報を提供するためである。上記の記述は、コンテン
ツ内のキーポイントの高速検索に使用することができ
る。
を出力する目的は、ユーザに対して、信号で伝送された
セキュリティイベントを遡及的に追跡するのを容易にす
る情報を提供するためである。上記の記述は、コンテン
ツ内のキーポイントの高速検索に使用することができ
る。
【００４６】ネットワークを介して伝送される実際の制
御信号３４１は、制御信号プロセッサ３４０によって発
生される。該制御信号プロセッサは、イベント検出器か
らセキュリティイベントが検出された旨の報告を受け、
ユーザのオプション情報を参照し、対応のネットワーク
装置に適切な制御信号を発生する機能を有する。
御信号３４１は、制御信号プロセッサ３４０によって発
生される。該制御信号プロセッサは、イベント検出器か
らセキュリティイベントが検出された旨の報告を受け、
ユーザのオプション情報を参照し、対応のネットワーク
装置に適切な制御信号を発生する機能を有する。
【００４７】制御信号の種類は、３つの範疇、即ち、
（ｉ）ユーザ入力として与えられる保安接触情報、（i
i）カメラの運動、切換及び操作並びに記録、電話発呼
のような活動データ等の装置制御パラメータ及び（ii
i）例えば、ＨＤＤ２０７に対する拡張ビットストリー
ム４０１の伝送及び電話器２０５或るいはＰＣ２１０へ
の適切な電話番号の送出等のルーチング（経過指定）情
報に分類することができる。
（ｉ）ユーザ入力として与えられる保安接触情報、（i
i）カメラの運動、切換及び操作並びに記録、電話発呼
のような活動データ等の装置制御パラメータ及び（ii
i）例えば、ＨＤＤ２０７に対する拡張ビットストリー
ム４０１の伝送及び電話器２０５或るいはＰＣ２１０へ
の適切な電話番号の送出等のルーチング（経過指定）情
報に分類することができる。
【００４８】システム動作本発明の監視／管制システ
ム、即ちＳＣＳ３００は、圧縮されたディジタルビデオ
信号から動的に特徴、即ち特徴を抽出する。これら特徴
を用いてセキュリティイベントを検出し、対処活動もし
くはアクションを自動的に開始することができる。
ム、即ちＳＣＳ３００は、圧縮されたディジタルビデオ
信号から動的に特徴、即ち特徴を抽出する。これら特徴
を用いてセキュリティイベントを検出し、対処活動もし
くはアクションを自動的に開始することができる。
【００４９】本システムの１つの大きな特徴は、他の装
置との動作両立性にある。この動作両立性は、ビデオの
コンテンツを配送し再生するのに標準の圧縮技術を用い
且つコンテンツを記述し、検索しアクセスするのに標準
の記述スキーム（ＤＳ）を用いることにより実現するこ
とができる。本発明のＳＣＳはイベントのステータスに
依存し、数多の異なったモードで動作可能である。
置との動作両立性にある。この動作両立性は、ビデオの
コンテンツを配送し再生するのに標準の圧縮技術を用い
且つコンテンツを記述し、検索しアクセスするのに標準
の記述スキーム（ＤＳ）を用いることにより実現するこ
とができる。本発明のＳＣＳはイベントのステータスに
依存し、数多の異なったモードで動作可能である。
【００５０】部分復号−出力を伴わないイベントのサー
チ 第１のモードにおいては、受信した圧縮ビットストリー
ムは本発明の監視／管制システム、即ちＳＣＳによりパ
ース（解析）されて部分的に復号される。この「部分復
号」とは、第１段階の復号動作を含むだけの復号と定義
される。このモードにおいては、ビデオを再編成するた
めの第２段階の復号は不能である。換言するならば、こ
の部分復号モードにおいては、従来の受信システムとは
異なり、アドレスの発生も行わなければ逆ＤＣＴの計算
も行われず、また運動補償も行わなければ、勿論のこと
表示も行われない。即ち、第２段の復号化は側路される
のである。このモードにおけるＳＣＳの主たる目的は、
圧縮されたビデオ信号から抽出された特徴によりセキュ
リティイベントをサーチすることである。
チ 第１のモードにおいては、受信した圧縮ビットストリー
ムは本発明の監視／管制システム、即ちＳＣＳによりパ
ース（解析）されて部分的に復号される。この「部分復
号」とは、第１段階の復号動作を含むだけの復号と定義
される。このモードにおいては、ビデオを再編成するた
めの第２段階の復号は不能である。換言するならば、こ
の部分復号モードにおいては、従来の受信システムとは
異なり、アドレスの発生も行わなければ逆ＤＣＴの計算
も行われず、また運動補償も行わなければ、勿論のこと
表示も行われない。即ち、第２段の復号化は側路される
のである。このモードにおけるＳＣＳの主たる目的は、
圧縮されたビデオ信号から抽出された特徴によりセキュ
リティイベントをサーチすることである。
【００５１】表示が行われないので、全メモリ帯域幅
を、部分復号並びに特徴の抽出、符号化及びイベントの
検出専用に割り当てることができる。その結果、このモ
ードにおいて、本システムは、圧縮された入力ビットス
トリームの選択された要素（エレメンツ）を効率良く処
理してコンテンツについての低レベル及び高レベルの情
報を抽出することが可能である。部分復号で、比較的短
時間内に有意味な特徴を抽出できる。例えば、数時間分
のビデオを、数分或いはそれより短い時間内で処理する
ことが可能である。
を、部分復号並びに特徴の抽出、符号化及びイベントの
検出専用に割り当てることができる。その結果、このモ
ードにおいて、本システムは、圧縮された入力ビットス
トリームの選択された要素（エレメンツ）を効率良く処
理してコンテンツについての低レベル及び高レベルの情
報を抽出することが可能である。部分復号で、比較的短
時間内に有意味な特徴を抽出できる。例えば、数時間分
のビデオを、数分或いはそれより短い時間内で処理する
ことが可能である。
【００５２】この目的に有用である抽出されたビットス
トリーム要素の例としては、ビットストリーム内の運動
ベクトル、ＤＣＴ係数及び映像／マクロブロック符号が
挙げられる。これら要素はシンボル プロセッサ４５０
及びフロントエンドパーサ４４０から出力される。更
に、副ビットストリームから情報を抽出することも可能
である。この種の情報はシステムのデマルチプレクサ
（ｄｅｍｕｘ）４１０から出力される。この種のデータ
の一例として、ＭＰＥＧ−７メタデータがあり、日時ス
タンプ情報のようなコンテンツに関する注釈情報を含む
ことができる。
トリーム要素の例としては、ビットストリーム内の運動
ベクトル、ＤＣＴ係数及び映像／マクロブロック符号が
挙げられる。これら要素はシンボル プロセッサ４５０
及びフロントエンドパーサ４４０から出力される。更
に、副ビットストリームから情報を抽出することも可能
である。この種の情報はシステムのデマルチプレクサ
（ｄｅｍｕｘ）４１０から出力される。この種のデータ
の一例として、ＭＰＥＧ−７メタデータがあり、日時ス
タンプ情報のようなコンテンツに関する注釈情報を含む
ことができる。
【００５３】ビットストリームを部分的に復号して情報
を抽出することにより得られる利点は、比較的短い時間
内に特徴を収集しセキュリティイベントを検出すること
ができる点にある。この部分復号モードは、特記すべき
イベントが未だ検出されていない場合の受動的監視に対
して最も良好に適用可能である。
を抽出することにより得られる利点は、比較的短い時間
内に特徴を収集しセキュリティイベントを検出すること
ができる点にある。この部分復号モードは、特記すべき
イベントが未だ検出されていない場合の受動的監視に対
して最も良好に適用可能である。
【００５４】全復号−イベントの検出または連続表示出
力 第１段階の部分復号モードとは対照的に、第２のモード
は、分析中のビデオを再編成してローカル表示装置に出
力する点で第１のモードと異なる。この全復号モードに
おいては、部分復号モードについて述べたのと同じ仕方
で特徴を抽出しコンテンツ記述子として符号化する。し
かしながら、この特徴抽出はビデオデータの表示と同時
に行われる。言い換えるならば、ビデオを再生しながら
であるので、特徴の抽出及び符号化は動的、即ちダイナ
ミックであると言える。
力 第１段階の部分復号モードとは対照的に、第２のモード
は、分析中のビデオを再編成してローカル表示装置に出
力する点で第１のモードと異なる。この全復号モードに
おいては、部分復号モードについて述べたのと同じ仕方
で特徴を抽出しコンテンツ記述子として符号化する。し
かしながら、この特徴抽出はビデオデータの表示と同時
に行われる。言い換えるならば、ビデオを再生しながら
であるので、特徴の抽出及び符号化は動的、即ちダイナ
ミックであると言える。
【００５５】この動作モードは、単一または複数のカメ
ラを備え単一または複数のビットストリームがＳＣＳに
入力され常に信号が表示されるシステムに対して適用可
能である。表示装置は単一であっても或いは複数であっ
ても良い。多数のカメラを用い然も表示装置が少数であ
る場合には、本ＳＣＳは、ビットストリームを再編成
し、再編成したビットストリームを表示するように制御
を行うことができる。主要な点は、ビデオを再編成し且
つ表示しながら圧縮されたビデオ信号を分析することで
ある。カメラ及び表示装置がそれぞれ１台しか設けられ
ていない特殊事例においては、本ＳＣＳは、セキュリテ
ィイベントの検出で全符号化モードに入ることができ
る。
ラを備え単一または複数のビットストリームがＳＣＳに
入力され常に信号が表示されるシステムに対して適用可
能である。表示装置は単一であっても或いは複数であっ
ても良い。多数のカメラを用い然も表示装置が少数であ
る場合には、本ＳＣＳは、ビットストリームを再編成
し、再編成したビットストリームを表示するように制御
を行うことができる。主要な点は、ビデオを再編成し且
つ表示しながら圧縮されたビデオ信号を分析することで
ある。カメラ及び表示装置がそれぞれ１台しか設けられ
ていない特殊事例においては、本ＳＣＳは、セキュリテ
ィイベントの検出で全符号化モードに入ることができ
る。
【００５６】混成複合 第３のモードにおいては、圧縮されたビットストリーム
を可能最高のビットレートで受信し処理しつつ、ビット
ストリームの部分復号が行われる。部分的に復号された
ビットストリームは、メモリ装置５００に格納される。
同時に、ビデオを表示することができるように、メモリ
装置に格納されている復号されたビットストリームから
第２段階の再編成が行われる。特徴を抽出し符号化イベ
ントを検出するのに要する期間中、フレーム レートを
例えば毎秒１５フレーム或るいはそれ以下に減少して、
より多くのシステムリソース（資源）が特徴抽出、符号
化及びイベント検出に利用可能になるようにすることが
できる。
を可能最高のビットレートで受信し処理しつつ、ビット
ストリームの部分復号が行われる。部分的に復号された
ビットストリームは、メモリ装置５００に格納される。
同時に、ビデオを表示することができるように、メモリ
装置に格納されている復号されたビットストリームから
第２段階の再編成が行われる。特徴を抽出し符号化イベ
ントを検出するのに要する期間中、フレーム レートを
例えば毎秒１５フレーム或るいはそれ以下に減少して、
より多くのシステムリソース（資源）が特徴抽出、符号
化及びイベント検出に利用可能になるようにすることが
できる。
【００５７】このモードの典型的な応用例においては、
ビデオから特徴を連続的に抽出する。セキュリティイベ
ントが検出されると、該イベントの分析のためにより多
くのシステムリソースが必要となり得る。この場合に
は、復号用リソースには低い優先度が与えられ、それに
より、充分ではあるが低い時間的解像度のビデオ信号を
表示したり記録したり或いは伝送するのに充分なリソー
スを与えることができる。
ビデオから特徴を連続的に抽出する。セキュリティイベ
ントが検出されると、該イベントの分析のためにより多
くのシステムリソースが必要となり得る。この場合に
は、復号用リソースには低い優先度が与えられ、それに
より、充分ではあるが低い時間的解像度のビデオ信号を
表示したり記録したり或いは伝送するのに充分なリソー
スを与えることができる。
【００５８】これらモードの何れにおいても重要な点
は、選択された規格に従うメタデータが利用可能な圧縮
データから抽出されることである。ここで、利用可能な
データは、圧縮されたビットストリームから抽出される
低レベルの特徴或るいは副データストリームからの情報
だけあっても良く、完全な或るいは完全ではない何らか
のＭＰＥＧ−７メタデータを含んでいる。このようにし
て他の装置との動作両立性が達成される。
は、選択された規格に従うメタデータが利用可能な圧縮
データから抽出されることである。ここで、利用可能な
データは、圧縮されたビットストリームから抽出される
低レベルの特徴或るいは副データストリームからの情報
だけあっても良く、完全な或るいは完全ではない何らか
のＭＰＥＧ−７メタデータを含んでいる。このようにし
て他の装置との動作両立性が達成される。
【００５９】特徴の抽出 圧縮されたビットストリームからの特徴の抽出は、多く
の文献に報告されている。この種の抽出の主たる利点
は、デマルチプレクサ、パーサ及びシンボルプロセッサ
の出力に依拠することにより逆ＤＣＴの計算を回避でき
るという理由から計算が単純であるという点に見られ
る。シンボルプロセッサの出力には、運動ベクトル情報
及びＤＣＴ係数が含まれる。
の文献に報告されている。この種の抽出の主たる利点
は、デマルチプレクサ、パーサ及びシンボルプロセッサ
の出力に依拠することにより逆ＤＣＴの計算を回避でき
るという理由から計算が単純であるという点に見られ
る。シンボルプロセッサの出力には、運動ベクトル情報
及びＤＣＴ係数が含まれる。
【００６０】このような抽出に最も応じ易い特徴は、
色、輝度（ルミナンス）及び運動である。また、特徴抽
出装置４５５の出力は、記述子の値を実体化する記述エ
ンコーダ３２０にも送られる点に留意されたい。実体化
された記述子（description instantiations）は、次い
で、イベント検出器３３０で用いられる。
色、輝度（ルミナンス）及び運動である。また、特徴抽
出装置４５５の出力は、記述子の値を実体化する記述エ
ンコーダ３２０にも送られる点に留意されたい。実体化
された記述子（description instantiations）は、次い
で、イベント検出器３３０で用いられる。
【００６１】ルミナンス及びカラー：Ｉ−フレームで
は、シンボルプロセッサ４５０の出力には、ブロックの
ルミナンス及びクロミナンスの「ｄｃ（直流）」値が含
まれていることに注目されたい。従って、Ｉ−フレーム
の「ｄｃ画像」は、シンボルプロセッサ４５０の出力を
用いて容易に構成することができる。ｄｃ画像を用いて
場面の変化を如何に検出するかに関しては周知である。
また、ｄｃ画像から、主たるカラー（主色）、カラーヒ
ストグラム、コンパクトカラー、ＧＯＦ／ＧＯＰカラー
ヒストグラム、カラー組成ヒストグラム、カラーのレイ
アウト等々のようなカラー記述子を決定することも可能
である。例えば、下に掲げた表１における主色記述子の
バイナリ構文を参照されたい。
は、シンボルプロセッサ４５０の出力には、ブロックの
ルミナンス及びクロミナンスの「ｄｃ（直流）」値が含
まれていることに注目されたい。従って、Ｉ−フレーム
の「ｄｃ画像」は、シンボルプロセッサ４５０の出力を
用いて容易に構成することができる。ｄｃ画像を用いて
場面の変化を如何に検出するかに関しては周知である。
また、ｄｃ画像から、主たるカラー（主色）、カラーヒ
ストグラム、コンパクトカラー、ＧＯＦ／ＧＯＰカラー
ヒストグラム、カラー組成ヒストグラム、カラーのレイ
アウト等々のようなカラー記述子を決定することも可能
である。例えば、下に掲げた表１における主色記述子の
バイナリ構文を参照されたい。
【００６２】
【表１】
【００６３】ＭＰＥＧ圧縮ビデオ信号では、ＹＵＶまた
はＹｃｒＣｂ、カラー量子化、即ち、ビンの数、色閾値
の初期値等々に対する色空間デフォルト値は、主カラー
数もしくは主色数の場合と同様に特徴抽出装置自体によ
って決定され点に留意されるべきである。その場合、信
頼度、色値及び百分率は、マクロブロックの色のｄｃ値
を用いて、当該マクロブロックに属するそれぞれのピク
セルの色と同様に画像自体から決定される。このことか
ら、主色をシンボルプロセッサ４５０の出力からどのよ
うにして決定できるかがおおよそ理解されるであろう。
はＹｃｒＣｂ、カラー量子化、即ち、ビンの数、色閾値
の初期値等々に対する色空間デフォルト値は、主カラー
数もしくは主色数の場合と同様に特徴抽出装置自体によ
って決定され点に留意されるべきである。その場合、信
頼度、色値及び百分率は、マクロブロックの色のｄｃ値
を用いて、当該マクロブロックに属するそれぞれのピク
セルの色と同様に画像自体から決定される。このことか
ら、主色をシンボルプロセッサ４５０の出力からどのよ
うにして決定できるかがおおよそ理解されるであろう。
【００６４】Ｐ−フレームからｄｃ画像を得るために
は、シンボルプロセッサの出力を異なった仕方で処理し
なければならない。この処理は、マクロブロックが通常
予測的に符号化されているために異なってくる。ｄｃ成
分を得るために、ＤＣＴ領域で運動の補償を行う方法、
例えば、米国特許願第０８／７４２,１２４号明細書「D
igital video decoder and method of decoding a vide
o signal」に記載されている方法のような方法を用いる
ことができる。この場合の計算オーバヘッドは、逆ＤＣ
Ｔの計算に要するオーバヘッドよりも相当に低い。
は、シンボルプロセッサの出力を異なった仕方で処理し
なければならない。この処理は、マクロブロックが通常
予測的に符号化されているために異なってくる。ｄｃ成
分を得るために、ＤＣＴ領域で運動の補償を行う方法、
例えば、米国特許願第０８／７４２,１２４号明細書「D
igital video decoder and method of decoding a vide
o signal」に記載されている方法のような方法を用いる
ことができる。この場合の計算オーバヘッドは、逆ＤＣ
Ｔの計算に要するオーバヘッドよりも相当に低い。
【００６５】運動： 圧縮された領域で運動の特徴は、
比較的容易に抽出することができる。その理由は、運動
について補償が行われたフレームの場合、シンボルプロ
セッサの出力には、各マクロブロック毎に運動ベクトル
が含まれているからである。運動ベクトルからの特徴抽
出には幾つかの試みが提案されている。例えば、米国特
許願第０９／２３６,８３８号明細書「Method of featu
re extraction of video sequences」を参照されたい。
比較的容易に抽出することができる。その理由は、運動
について補償が行われたフレームの場合、シンボルプロ
セッサの出力には、各マクロブロック毎に運動ベクトル
が含まれているからである。運動ベクトルからの特徴抽
出には幾つかの試みが提案されている。例えば、米国特
許願第０９／２３６,８３８号明細書「Method of featu
re extraction of video sequences」を参照されたい。
【００６６】圧縮領域において決定することができるＭ
ＰＥＧ−７運動記述子には、運動アクティビティ（活動
度）、カメラの運動、運動軌跡及びパラメトリック運動
が含まれる。下に掲げる表２に示すような運動活動度記
述子のバイナリ表示構文を参照されたい。
ＰＥＧ−７運動記述子には、運動アクティビティ（活動
度）、カメラの運動、運動軌跡及びパラメトリック運動
が含まれる。下に掲げる表２に示すような運動活動度記
述子のバイナリ表示構文を参照されたい。
【００６７】
【表２】
【００６８】上に示した総ての欄のパラメータは、シン
ボルプロセッサから出力される運動ベクトルから容易に
算出することができる。例えば、強度パラメータは、運
動ベクトルの大きさの標準偏差を最初に計算し次いで該
標準偏差を３ビット値に量子化することにより算出され
る。
ボルプロセッサから出力される運動ベクトルから容易に
算出することができる。例えば、強度パラメータは、運
動ベクトルの大きさの標準偏差を最初に計算し次いで該
標準偏差を３ビット値に量子化することにより算出され
る。
【００６９】メタデータ符号化器 ＭＰＥＧ−２またはＭＰＥＧ−４には、取り扱い易いビ
ットストリームを発生するのに使用しなければならない
良好に規格化されたエンコーダ構造がある。適合点は、
プロフィル／レベル定義に基づいている。即ち、ＭＰＥ
Ｇ−２Main Profile＠High Level（ＭＰ＠ＨＬ）エンコ
ーダは、映像のサイズ、データ レート等々の点で制限
されている。しかしながら、運動の評価を行わなければ
ならない幾つかのブロック、ＤＣＴを行う必要のあるブ
ロック等々が存在することが知られている。ベース及び
エンハンスメント レイヤを符号化しなければならない
スケーラビリティ プロフィルの１つで動作している場
合には、エンコーダの構造をどのように変更する必要が
あるかは知られている。これは、規格により明瞭に定義
されている。
ットストリームを発生するのに使用しなければならない
良好に規格化されたエンコーダ構造がある。適合点は、
プロフィル／レベル定義に基づいている。即ち、ＭＰＥ
Ｇ−２Main Profile＠High Level（ＭＰ＠ＨＬ）エンコ
ーダは、映像のサイズ、データ レート等々の点で制限
されている。しかしながら、運動の評価を行わなければ
ならない幾つかのブロック、ＤＣＴを行う必要のあるブ
ロック等々が存在することが知られている。ベース及び
エンハンスメント レイヤを符号化しなければならない
スケーラビリティ プロフィルの１つで動作している場
合には、エンコーダの構造をどのように変更する必要が
あるかは知られている。これは、規格により明瞭に定義
されている。
【００７０】ＭＰＥＧ−７において、実体化記述スキー
ムはＭＰＥＧ−７エンコーダと同様である。しかしなが
ら、多くの異なった型式のメタデータには広汎な記述ス
キームが所属する。各種のデータを如何に作成するかは
特殊であり、規格によって特定されていない。ＭＰＥＧ
−７にとっては、記述スキームをどのように実体化する
かに関して特定するのは恐らく無理であり、然もこれは
規格の規範的な部分であるので、ＭＰＥＧ−７エンコー
ダについての構造規格は存在しないと言える。従って、
各ＤＳはケースバイケースで実体化しなければならず、
特定のアプリケーションの範囲内で有意味になることが
できる。
ムはＭＰＥＧ−７エンコーダと同様である。しかしなが
ら、多くの異なった型式のメタデータには広汎な記述ス
キームが所属する。各種のデータを如何に作成するかは
特殊であり、規格によって特定されていない。ＭＰＥＧ
−７にとっては、記述スキームをどのように実体化する
かに関して特定するのは恐らく無理であり、然もこれは
規格の規範的な部分であるので、ＭＰＥＧ−７エンコー
ダについての構造規格は存在しないと言える。従って、
各ＤＳはケースバイケースで実体化しなければならず、
特定のアプリケーションの範囲内で有意味になることが
できる。
【００７１】ここで重要な点は、汎用のＭＰＥＧ−７エ
ンコーダは、特定の目的或るいは用途が念頭に無い場合
には有意味でないことである。ここで、目的とするとこ
ろは、改良されたコンテンツベースでのアクセスを達成
することであり、従って、本発明のＳＣＳが実体化する
記述スキーム並びに本システムに独特な実体化方法（in
stantiation method）について以下に説明する。
ンコーダは、特定の目的或るいは用途が念頭に無い場合
には有意味でないことである。ここで、目的とするとこ
ろは、改良されたコンテンツベースでのアクセスを達成
することであり、従って、本発明のＳＣＳが実体化する
記述スキーム並びに本システムに独特な実体化方法（in
stantiation method）について以下に説明する。
【００７２】ここで、明らかにしておきたいもう１つの
点は、本発明のセキュリティシステムは他の装置との動
作両立性を達成するためにメタデータを符号化すること
である。この他の装置との動作両立性が必要なければ、
ＭＰＥＧ−７規格に従ってメタデータを符号化する必要
はない。即ち、システムは単に、それ自身が所有する内
部的で且つ該特定のシステムだけが理解する記述子及び
記述スキームを使用するだけで良い。この場合には、増
補もしくは拡張ビットストリームをも出力する必要はな
い。
点は、本発明のセキュリティシステムは他の装置との動
作両立性を達成するためにメタデータを符号化すること
である。この他の装置との動作両立性が必要なければ、
ＭＰＥＧ−７規格に従ってメタデータを符号化する必要
はない。即ち、システムは単に、それ自身が所有する内
部的で且つ該特定のシステムだけが理解する記述子及び
記述スキームを使用するだけで良い。この場合には、増
補もしくは拡張ビットストリームをも出力する必要はな
い。
【００７３】記述スキームインスタンシエータ(記述ス
キーム実体化モジュール)の詳細 記述スキーム（ＤＳ）は、記述子の容器と考えることが
できる。また、記述スキームは、各種の記述子を組織化
するデータ構造であると見ることもできる。これと関連
して、ＭＰＥＧ−７マルチメディア記述スキーム ワー
キング ドラフト（Multimedia Description Scheme Wor
king draft）から抜粋した付録Ａに記述されているＭＰ
ＥＧ−７ビデオセグメント記述スキーム（ＤＳ）の用語
上の意味について参照されたい。
キーム実体化モジュール)の詳細 記述スキーム（ＤＳ）は、記述子の容器と考えることが
できる。また、記述スキームは、各種の記述子を組織化
するデータ構造であると見ることもできる。これと関連
して、ＭＰＥＧ−７マルチメディア記述スキーム ワー
キング ドラフト（Multimedia Description Scheme Wor
king draft）から抜粋した付録Ａに記述されているＭＰ
ＥＧ−７ビデオセグメント記述スキーム（ＤＳ）の用語
上の意味について参照されたい。
【００７４】記述子に関する箇所で述べている色（カラ
ー）及び運動記述子がビデオセグメントＤＳ（VideoSeg
ment ＤＳ）でどのように取り上げられているかについ
て述べておき度い。この場合、記述スキームは、先に述
べたように構成記述子の各々を決定することにより実体
化（instantiate）することができる。ビデオセグメン
トＤＳ（VideoSegment ＤＳ）は、圧縮領域もしくは定
義域での特徴の抽出により実体化することが可能である
ことに留意されたい。このように、ビデオセグメントＤ
Ｓは、個々の記述子をそれ自体で使用することを可能に
すると共に、ここで述べている監視アプリケーションを
可能にする他の記述子と組合せて使用することを許容す
る。
ー）及び運動記述子がビデオセグメントＤＳ（VideoSeg
ment ＤＳ）でどのように取り上げられているかについ
て述べておき度い。この場合、記述スキームは、先に述
べたように構成記述子の各々を決定することにより実体
化（instantiate）することができる。ビデオセグメン
トＤＳ（VideoSegment ＤＳ）は、圧縮領域もしくは定
義域での特徴の抽出により実体化することが可能である
ことに留意されたい。このように、ビデオセグメントＤ
Ｓは、個々の記述子をそれ自体で使用することを可能に
すると共に、ここで述べている監視アプリケーションを
可能にする他の記述子と組合せて使用することを許容す
る。
【００７５】ビデオセグメントＤＳは、コンテンツの構
造上の特性を記述するＭＰＥＧ−７規格のＤＳの一例で
ある。他のこの種のＤＳには、セグメントＤＳ及びその
子供、例えば運動領域ＤＳ（Moving Region ＤＳ）等々
が含まれる。他のＤＳには、要約ＤＳ（Summary ＤＳ）
により可能化される要約（summarization）のようなア
プリケーションを強調するＤＳがある。
造上の特性を記述するＭＰＥＧ−７規格のＤＳの一例で
ある。他のこの種のＤＳには、セグメントＤＳ及びその
子供、例えば運動領域ＤＳ（Moving Region ＤＳ）等々
が含まれる。他のＤＳには、要約ＤＳ（Summary ＤＳ）
により可能化される要約（summarization）のようなア
プリケーションを強調するＤＳがある。
【００７６】ウエイトＤＳ（Weight ＤＳ）は、記述ス
キームにおける各種記述子の相対重み付けを表す。従っ
て、相対重み付けは、要求に応じＭＰＥＧ−７ＤＳイン
スタンシエータで実体化することができる。エンティテ
ィ関連グラフＤＳ（Entity-Relation Graph ＤＳ）は、
異なったエンティティ間における関係を表現する。シン
ボルプロセッサの出力は、「よりアクティブである」、
「最もアクティブである」、「より高速である」、「よ
り大きい」、「より新しい」等々のような関係の同定も
しくは識別を可能にする。従って、このクラスの対応の
エンティティ関係グラフは圧縮された定義域において実
体化することができる。
キームにおける各種記述子の相対重み付けを表す。従っ
て、相対重み付けは、要求に応じＭＰＥＧ−７ＤＳイン
スタンシエータで実体化することができる。エンティテ
ィ関連グラフＤＳ（Entity-Relation Graph ＤＳ）は、
異なったエンティティ間における関係を表現する。シン
ボルプロセッサの出力は、「よりアクティブである」、
「最もアクティブである」、「より高速である」、「よ
り大きい」、「より新しい」等々のような関係の同定も
しくは識別を可能にする。従って、このクラスの対応の
エンティティ関係グラフは圧縮された定義域において実
体化することができる。
【００７７】時間ＤＳ（Time ＤＳ）、メディア ロケー
タＤＳ（Media Locator ＤＳ）、グリッド（Grids）及
びヒストグラム（Histograms）のような基本的なＤＳが
ある。これらＤＳは総てのＤＳに適用可能であり、従っ
て基本的に重要である。エンコーダ３２０に組み込まれ
ているシンボル プロセッサ４５０の出力を処理するこ
とで、これら記述子スキームの総てを複製することがで
きる。例えば、圧縮されたビットストリーム内に存在す
るタイム スタンプ情報を用いて、監視アプリケーショ
ンに対し非常に重要な特徴である時間ＤＳ（Time Ｄ
Ｓ）を副次的に生成する、即ち複製することができる。
タＤＳ（Media Locator ＤＳ）、グリッド（Grids）及
びヒストグラム（Histograms）のような基本的なＤＳが
ある。これらＤＳは総てのＤＳに適用可能であり、従っ
て基本的に重要である。エンコーダ３２０に組み込まれ
ているシンボル プロセッサ４５０の出力を処理するこ
とで、これら記述子スキームの総てを複製することがで
きる。例えば、圧縮されたビットストリーム内に存在す
るタイム スタンプ情報を用いて、監視アプリケーショ
ンに対し非常に重要な特徴である時間ＤＳ（Time Ｄ
Ｓ）を副次的に生成する、即ち複製することができる。
【００７８】ＭＰＥＧ−７はまた、テキスト記述（注釈
ＤＳ）、概念上のアスペクト（例えば、意味論的記述ス
キーム）、コンテンツの本来的性質（例えば、モデルＤ
Ｓ）を表現する「高レベル」のＤＳをも含む。
ＤＳ）、概念上のアスペクト（例えば、意味論的記述ス
キーム）、コンテンツの本来的性質（例えば、モデルＤ
Ｓ）を表現する「高レベル」のＤＳをも含む。
【００７９】要するに、システム デマルチプレクサ１
１０、フロントエンドパーサ４４０及びシンボル プロ
セッサ４５０が提供する情報を用いて強力な記述スキー
ムの部分集合をインスタンシエート（instantiate）、
即ち実体化することが可能である。
１０、フロントエンドパーサ４４０及びシンボル プロ
セッサ４５０が提供する情報を用いて強力な記述スキー
ムの部分集合をインスタンシエート（instantiate）、
即ち実体化することが可能である。
【００８０】セキュリティイベントの検出 自動的なセキュリティイベントの検出には、低レベル情
報からの高レベル情報の推測が行われる。と言うのは、
直接且つ自動的に得ることができるのは低レベルの情報
だけだからである。単純な例として、保安領域に侵入す
る侵入者の検出について考察してみる。保安領域を監視
している観察者は、当該領域のセマンチックな、即ち高
レベルの特徴における変化に注目することにより侵入者
を直ちに検出し得ることは言うまでもない。他方、本発
明の自動セキュリティイベント検出システムは、排他的
にカメラによって捕捉されるオーディオ−ビデオ情報の
自動処理に依拠する。カメラからのオーディオ−ビデオ
情報（信号）は、色、運動、音量等々のような低レベル
の特徴しか含んでおらず、標識の付いた保安領域や侵入
者のような意味論的情報は含んでいない。しかしなが
ら、一般に、侵入者の侵入のような意味論的イベント
は、カメラにより捕捉されるオーディオ−ビデオシーン
の低レベルの特徴に対し直接的なインパクトを与える。
報からの高レベル情報の推測が行われる。と言うのは、
直接且つ自動的に得ることができるのは低レベルの情報
だけだからである。単純な例として、保安領域に侵入す
る侵入者の検出について考察してみる。保安領域を監視
している観察者は、当該領域のセマンチックな、即ち高
レベルの特徴における変化に注目することにより侵入者
を直ちに検出し得ることは言うまでもない。他方、本発
明の自動セキュリティイベント検出システムは、排他的
にカメラによって捕捉されるオーディオ−ビデオ情報の
自動処理に依拠する。カメラからのオーディオ−ビデオ
情報（信号）は、色、運動、音量等々のような低レベル
の特徴しか含んでおらず、標識の付いた保安領域や侵入
者のような意味論的情報は含んでいない。しかしなが
ら、一般に、侵入者の侵入のような意味論的イベント
は、カメラにより捕捉されるオーディオ−ビデオシーン
の低レベルの特徴に対し直接的なインパクトを与える。
【００８１】上述の単純な例においては、保安領域の運
動アクテビティ（活動度）は、侵入者が存在しない場合
は零である。と言うのは、このシーンもしくは場面には
運動する客体、即ちオブジェクトが存在しないからであ
る。侵入者が侵入すると直ちに、運動アクテビティが急
激に増加する。侵入者が去ると、運動アクテビティは再
び通常の低レベルに戻り、この低レベルに留どまる。こ
の場合には、オーディオ−ビデオシーンの運動特徴だけ
で、侵入の開始及び終わりを検出するのに充分である。
同様に、侵入者の顔が捕らえられると、場面のテクスチ
ャに変化が生じ、場面に顔の存在が表示される。また、
この場合には、侵入により音量を大きくすることができ
よう。
動アクテビティ（活動度）は、侵入者が存在しない場合
は零である。と言うのは、このシーンもしくは場面には
運動する客体、即ちオブジェクトが存在しないからであ
る。侵入者が侵入すると直ちに、運動アクテビティが急
激に増加する。侵入者が去ると、運動アクテビティは再
び通常の低レベルに戻り、この低レベルに留どまる。こ
の場合には、オーディオ−ビデオシーンの運動特徴だけ
で、侵入の開始及び終わりを検出するのに充分である。
同様に、侵入者の顔が捕らえられると、場面のテクスチ
ャに変化が生じ、場面に顔の存在が表示される。また、
この場合には、侵入により音量を大きくすることができ
よう。
【００８２】キーポイント、即ち重要な点は、捕捉され
たオーディオ−ビデオ情報の低レベルの特徴における変
化で屡々、場面の意味論的内容に変化が生ずることであ
る。なお、保安領域内への侵入者の侵入は、イベントの
単なる一例であることは言うまでもない。本発明のシス
テムは、このような単純なイベントに制限されるもので
はなく、低レベルの特徴を用いて検出することできるあ
らゆるイベントに適用可能である。
たオーディオ−ビデオ情報の低レベルの特徴における変
化で屡々、場面の意味論的内容に変化が生ずることであ
る。なお、保安領域内への侵入者の侵入は、イベントの
単なる一例であることは言うまでもない。本発明のシス
テムは、このような単純なイベントに制限されるもので
はなく、低レベルの特徴を用いて検出することできるあ
らゆるイベントに適用可能である。
【００８３】本発明のシステムはまた、予め記録されて
いるオーディオ−ビデオ情報からイベントを検出するこ
とも可能である。このような「事後的」監視も保安シス
テムにおいては有価値である。
いるオーディオ−ビデオ情報からイベントを検出するこ
とも可能である。このような「事後的」監視も保安シス
テムにおいては有価値である。
【００８４】イベント検出器３３０における低レベル特
徴の他の特定の利用例として、イベントが終了したこと
（例えば、侵入者がカメラの視野から去ったこと）を観
察し、このようなイベントを生起せしめた客体もしくは
オブジェクトのパラメトリックな運動を抽出することで
ある。ここでパラメトリックな運動とは、ＭＰＥＧ−７
によって採用されているビデオ記述子である。このパラ
メトリック運動を用いて、カメラ２０１乃至２０２の位
置を自動的にイベントを追跡するよう調節することがで
きる。イベントを検出したのと同じカメラで、当該イベ
ントを追跡し続けることが不可能である場合には、パラ
メトリック運動を用いて他の要所要所に配置されたカメ
ラを選択することもできる。
徴の他の特定の利用例として、イベントが終了したこと
（例えば、侵入者がカメラの視野から去ったこと）を観
察し、このようなイベントを生起せしめた客体もしくは
オブジェクトのパラメトリックな運動を抽出することで
ある。ここでパラメトリックな運動とは、ＭＰＥＧ−７
によって採用されているビデオ記述子である。このパラ
メトリック運動を用いて、カメラ２０１乃至２０２の位
置を自動的にイベントを追跡するよう調節することがで
きる。イベントを検出したのと同じカメラで、当該イベ
ントを追跡し続けることが不可能である場合には、パラ
メトリック運動を用いて他の要所要所に配置されたカメ
ラを選択することもできる。
【００８５】最も広い意味において、本発明の監視シス
テムの目的は、正常な状態から異常な状態を識別するこ
とにある。侵入者の例をとれば、状態の変化が音響及び
運動の活動度、即ちアクテビティにより識別され、この
場合正常な状態のオーディオ−ビデオ特徴は実質的に零
である。しかしながら、殆どの実際上の保安用途におい
て、正常の状態は零ではない。これを、便宜上、非零正
常状態（ＮＺ−ＮＳ）監視と称する。
テムの目的は、正常な状態から異常な状態を識別するこ
とにある。侵入者の例をとれば、状態の変化が音響及び
運動の活動度、即ちアクテビティにより識別され、この
場合正常な状態のオーディオ−ビデオ特徴は実質的に零
である。しかしながら、殆どの実際上の保安用途におい
て、正常の状態は零ではない。これを、便宜上、非零正
常状態（ＮＺ−ＮＳ）監視と称する。
【００８６】非零正常状態監視もしくはＮＺ−ＮＳ監視
を説明するための第１の例として、静止していたり運動
している人々、自転車に乗っている者、自動車、バス及
びトラック並びに非常に複雑なオーディオもしくは音響
信号が存在する交通領域を観察するために取り付けられ
ているカメラを考える。ＭＰＥＧ−７記述子を用いデー
タの学習で、事故、暴行、交通違反等々のようなセキュ
リティイベントを抽出することが可能である。ＮＺ−Ｎ
Ｓ監視はまた、混雑している商店等で万引きの検出や誤
魔化しの検出に使用することもできる。本システムはま
た、自動化された製造設備でコンベアベルト上の不合格
部品を検出したり何らかの機械から出る煙りや奇妙な雑
音を検出するのにも有用である。
を説明するための第１の例として、静止していたり運動
している人々、自転車に乗っている者、自動車、バス及
びトラック並びに非常に複雑なオーディオもしくは音響
信号が存在する交通領域を観察するために取り付けられ
ているカメラを考える。ＭＰＥＧ−７記述子を用いデー
タの学習で、事故、暴行、交通違反等々のようなセキュ
リティイベントを抽出することが可能である。ＮＺ−Ｎ
Ｓ監視はまた、混雑している商店等で万引きの検出や誤
魔化しの検出に使用することもできる。本システムはま
た、自動化された製造設備でコンベアベルト上の不合格
部品を検出したり何らかの機械から出る煙りや奇妙な雑
音を検出するのにも有用である。
【００８７】制御信号プロセッサ 制御信号プロセッサ、即ちＣＳＰ３４０は、イベント検
出器３３０からの割込みを受けて、図２のネットワーク
に接続されている他の装置に対し適当な制御信号を発生
する。このような制御信号で、セキュリティイベントを
検出している場合にはテレビジョン上に現れるＰＩＰウ
インドウを発生したり、電話番号をダイヤルしたりまた
予め記録されているメッセージを再生したり、或るいは
ｅ−メイルを送ったり、或るいはパーソナルコンピュー
タ上にウインドウを立ち上がらせてカメラの１つからの
映像を表示したりすることができる。また、このような
制御信号はユーザの選択したオプションに従いカストマ
イズすることが可能である。更にまた、応答活動の順序
に優先度を割り当てることもできる。
出器３３０からの割込みを受けて、図２のネットワーク
に接続されている他の装置に対し適当な制御信号を発生
する。このような制御信号で、セキュリティイベントを
検出している場合にはテレビジョン上に現れるＰＩＰウ
インドウを発生したり、電話番号をダイヤルしたりまた
予め記録されているメッセージを再生したり、或るいは
ｅ−メイルを送ったり、或るいはパーソナルコンピュー
タ上にウインドウを立ち上がらせてカメラの１つからの
映像を表示したりすることができる。また、このような
制御信号はユーザの選択したオプションに従いカストマ
イズすることが可能である。更にまた、応答活動の順序
に優先度を割り当てることもできる。
【００８８】応用シナリオ例 ローカルな監視用途においては、ＳＣＳ３００はモニタ
／ＴＶ及び記録装置にビデオ内容を供給する。これによ
りイベントが検出され、警報が起動され、電話設備を介
して関連の人に接触が取られる。ユーザはまた、リモー
トコントローラのような他の両立性のある装置を介して
カメラを制御することもできる。遠隔監視用途例におい
ては、ＳＣＳ３００は上述のローカル（局所的）監視シ
ステムの総ての活動行うと共にそれに加えて外部監視を
も行う。この外部監視及び管制は遠隔パーソナルコンピ
ュータ２１０を用いて行うことができる。
／ＴＶ及び記録装置にビデオ内容を供給する。これによ
りイベントが検出され、警報が起動され、電話設備を介
して関連の人に接触が取られる。ユーザはまた、リモー
トコントローラのような他の両立性のある装置を介して
カメラを制御することもできる。遠隔監視用途例におい
ては、ＳＣＳ３００は上述のローカル（局所的）監視シ
ステムの総ての活動行うと共にそれに加えて外部監視を
も行う。この外部監視及び管制は遠隔パーソナルコンピ
ュータ２１０を用いて行うことができる。
【００８９】商業上の用途においては、本システムを採
用することにより、２０の異なった領域を観察するのに
２０個のモニタを設ける必要性を効果的に排除すること
ができる。即ち、ＣＳＰ３４０は、検出されたイベント
に依存し監視すべき場面もしくはシーンを自動的に選択
することができる。加えて、記録すべきビデオの量を、
異常なイベントだけを記録することにより大きく減少す
ることが可能である。
用することにより、２０の異なった領域を観察するのに
２０個のモニタを設ける必要性を効果的に排除すること
ができる。即ち、ＣＳＰ３４０は、検出されたイベント
に依存し監視すべき場面もしくはシーンを自動的に選択
することができる。加えて、記録すべきビデオの量を、
異常なイベントだけを記録することにより大きく減少す
ることが可能である。
【００９０】以上、本発明を単なる例として好適な実施
例と関連し説明したが、本発明の精神及び範囲内で種々
な他の適応や変更が可能であることは理解されるべきで
ある。このような変更は、本発明の範囲に包摂されるも
のであることを付記する。
例と関連し説明したが、本発明の精神及び範囲内で種々
な他の適応や変更が可能であることは理解されるべきで
ある。このような変更は、本発明の範囲に包摂されるも
のであることを付記する。
【図１】 従来のビデオ受信器のブロックダイヤグラム
である。
である。
【図２】 本発明の監視／管制システムを含むネットワ
ークのブロックダイヤグラムである。
ークのブロックダイヤグラムである。
【図３】 圧縮されたビデオ信号からセキュリティイベ
ントを検出し信号で報知するための監視／管制システム
の概略ブロックダイヤグラムである。
ントを検出し信号で報知するための監視／管制システム
の概略ブロックダイヤグラムである。
【図４】 図３に示した監視／管制システムの詳細ブロ
ックダイヤグラムである。
ックダイヤグラムである。
【図５】 図４に示した監視／管制システムのメモリ装
置のブロックダイヤグラムである。
置のブロックダイヤグラムである。
───────────────────────────────────────────────────── フロントページの続き (71)出願人 597067574 201 ＢＲＯＡＤＷＡＹ， ＣＡＭＢＲＩ ＤＧＥ， ＭＡＳＳＡＣＨＵＳＥＴＴＳ 02139， Ｕ．Ｓ．Ａ. (72)発明者 アンソニー・ヴェトロ アメリカ合衆国、ニューヨーク州、ステー トン・アイランド、レジス・ドライブ 113 (72)発明者 アジェイ・ディヴァカラン アメリカ合衆国、ニュージャージー州、デ ンヴィル、コブ・ロード 20 (72)発明者 ハイファン・スン アメリカ合衆国、ニュージャージー州、ク ランベリー、キングレット・ドライブ・サ ウス 61 (72)発明者 浅井 光太郎 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 西川 博文 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 関口 俊一 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 村上 篤道 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 (72)発明者 守屋 芳美 東京都千代田区丸の内二丁目２番３号 三 菱電機株式会社内 Ｆターム(参考） 5C054 AA00 CH01 DA06 EA07 EG01 FC13 FF01 GB05 HA18 5C059 MA00 MA23 NN01 RB02 RC00 SS06 SS13 SS26 UA02 UA05 UA38 5C087 AA02 AA03 AA24 AA25 AA28 BB12 BB13 BB21 BB32 BB65 BB72 DD03 DD20 EE06 EE11 FF01 FF02 FF17 FF19 FF22 GG02 GG07 GG18 GG55
Claims (16)
- 【請求項１】 監視／管制システムにおいて、 圧縮さ
れたディジタルビデオ信号から低レベルの特徴を抽出す
る特徴抽出装置と、 前記特徴抽出装置に接続されて前
記低レベルの特徴をコンテンツ記述子として符号化する
記述エンコーダと、 前記記述エンコーダに接続されて、前記コンテンツ記述
子からセキュリティイベントを検出するためのイベント
検出器と、 前記イベント検出器に接続されて、セキュ
リティイベントの検出に応答し制御信号を発生するため
の制御信号プロセッサとを含むことを特徴とする監視／
管制システム。 - 【請求項２】 請求項１に記載の監視／管制システムに
おいて、更に、互いにネットワークにより接続された電
話器、パーソナルコンピュータ及びビデオレコーダを含
むことを特徴とする監視／管制システム。 - 【請求項３】 請求項１に記載の監視／管制システムに
おいて、前記ネットワークが、前記制御信号を搬送する
ための低周波帯域幅のネットワークと、前記圧縮された
ディジタルビデオ信号及び前記コンテンツ記述子を搬送
するための高周波帯域幅のネットワークとを含むことを
特徴とする監視／管制システム。 - 【請求項４】 請求項１に記載の監視／管制システムに
おいて、更に、前記圧縮されたディジタルビデオ信号、
前記コンテンツ記述子、前記制御信号、ユーザ入力及び
ユーザのコンフィギュレーション オプションを記憶す
るメモリ装置を含むことを特徴とする監視／管制システ
ム。 - 【請求項５】 請求項１に記載の監視／管制システムに
おいて、更に、前記特徴抽出装置に接続されて前記圧縮
ディジタルビデオ信号から運動ベクトル並びにマクロブ
ロック及びＤＣＴ係数を抽出するシンボルプロセッサを
具備していることを特徴とする監視／管制システム。 - 【請求項６】 請求項４に記載の監視／管制システムに
おいて、更に、前記メモリ装置に接続されて、前記圧縮
されたディジタルビデオ信号及び前記コンテンツ記述子
を含む圧縮された出力ディジタルビデオ信号を発生する
ためのビットストリームプロセッサを含むことを特徴と
する監視／管制システム。 - 【請求項７】 請求項６に記載の監視／管制システムに
おいて、前記圧縮された出力ディジタルビデオ信号がネ
ットワークを介し遠隔ビデオ受信部に伝送されることを
特徴とする監視／管制システム。 - 【請求項８】 請求項１に記載の監視／管制システムに
おいて、コンテンツ記述子がビデオ符号化規格に従って
符号化されることを特徴とする監視／管制システム。 - 【請求項９】 請求項１に記載の監視／管制システムに
おいて、エンコーダが、コンテンツ記述子に従い、圧縮
された入力ディジタルビデオ信号の要約を生成すること
を特徴とする監視／管制システム。 - 【請求項１０】 請求項９に記載の監視／管制システム
において、圧縮入力ディジタルビデオ信号の前記要約が
メモリ装置に記憶されることを特徴とする監視／管制シ
ステム。 - 【請求項１１】 請求項１に記載の監視／管制システム
において、前記コンテンツ記述子が、前記圧縮入力ディ
ジタルビデオ信号における運動活動度に準拠することを
特徴とする監視／管制システム。 - 【請求項１２】 請求項１に記載の監視／管制システム
において、更に、少なくとも１つのカメラ、モニタ、ビ
デオレコーダ、電話器、記憶装置、パーソナルコンピュ
ータ、汎用ディスク（ＤＶＤ）及び遠隔パーソナルコン
ピュータとを含み、前記総ての装置がネットワークによ
り互いに接続されて制御信号により操作されることを特
徴とする監視／管制システム。 - 【請求項１３】 請求項１に記載の監視／管制システム
において、前記制御信号が保安関連情報、装置制御パラ
メータ及びルーチング情報を含むことを特徴とする監視
／管制システム。 - 【請求項１４】 請求項１に記載の監視／管制システム
において、前記圧縮されたディジタルビデオ信号におけ
る正常な非零状態を異常非零状態から識別しセキュリテ
ィイベントを検出することを特徴とする監視／管制シス
テム。 - 【請求項１５】 請求項１に記載の監視／管制システム
において、制御信号がそれぞれ優先度を有することを特
徴とする監視／管制システム。 - 【請求項１６】 セキュリティイベントに対し応答する
方法において、 圧縮されたディジタルビデオ信号から低レベルの特徴を
動的に抽出し、 前記低レベルの特徴をコンテンツ記述子として符号化
し、前記コンテンツ記述子からセキュリティイベントを
検出し、 前記セキュリティイベントの検出に応答して制御信号を
発生することを含むことを特徴とする方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US09/612876 | 2000-07-10 | ||
| US09/612,876 US6646676B1 (en) | 2000-05-17 | 2000-07-10 | Networked surveillance and control system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002112253A true JP2002112253A (ja) | 2002-04-12 |
| JP4601868B2 JP4601868B2 (ja) | 2010-12-22 |
Family
ID=24454971
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2001194713A Expired - Lifetime JP4601868B2 (ja) | 2000-07-10 | 2001-06-27 | ネットワーク化した監視／管制システム及び方法 |
Country Status (6)
| Country | Link |
|---|---|
| US (1) | US6646676B1 (ja) |
| EP (1) | EP1173020B1 (ja) |
| JP (1) | JP4601868B2 (ja) |
| CN (1) | CN1338873A (ja) |
| DE (1) | DE60102627D1 (ja) |
| HK (1) | HK1041754A1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015513731A (ja) * | 2012-02-24 | 2015-05-14 | ゼットティーイー コーポレイション | ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム |
Families Citing this family (160)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2341161A1 (en) * | 1998-01-12 | 1999-07-15 | Raytheon Company | Apparatus and method for selection of circuit in multi-circuit communications device |
| US7228429B2 (en) | 2001-09-21 | 2007-06-05 | E-Watch | Multimedia network appliances for security and surveillance applications |
| US20080201505A1 (en) * | 2003-01-08 | 2008-08-21 | Monroe David A | Multimedia data collection device for a host with a single available input port |
| US7023913B1 (en) | 2000-06-14 | 2006-04-04 | Monroe David A | Digital security multimedia sensor |
| US7057647B1 (en) | 2000-06-14 | 2006-06-06 | E-Watch, Inc. | Dual-mode camera system for day/night or variable zoom operation |
| US6853302B2 (en) | 2001-10-10 | 2005-02-08 | David A. Monroe | Networked personal security system |
| US6970183B1 (en) * | 2000-06-14 | 2005-11-29 | E-Watch, Inc. | Multimedia surveillance and monitoring system including network configuration |
| US7131136B2 (en) | 2002-07-10 | 2006-10-31 | E-Watch, Inc. | Comprehensive multi-media surveillance and response system for aircraft, operations centers, airports and other commercial transports, centers and terminals |
| US7634662B2 (en) | 2002-11-21 | 2009-12-15 | Monroe David A | Method for incorporating facial recognition technology in a multimedia surveillance system |
| US20030067542A1 (en) * | 2000-10-13 | 2003-04-10 | Monroe David A. | Apparatus for and method of collecting and distributing event data to strategic security personnel and response vehicles |
| US6545601B1 (en) * | 1999-02-25 | 2003-04-08 | David A. Monroe | Ground based security surveillance system for aircraft and other commercial vehicles |
| US6518881B2 (en) * | 1999-02-25 | 2003-02-11 | David A. Monroe | Digital communication system for law enforcement use |
| US6461872B1 (en) * | 1999-11-17 | 2002-10-08 | General Electric Company | Poly(1,4-ethylene-2-piperazone) composition, method for production of a poly(1,4-ethylene-2-piperazone) composition, TCE-detecting method and sensor |
| JP3677192B2 (ja) * | 2000-04-19 | 2005-07-27 | シャープ株式会社 | 画像処理装置 |
| US20020120780A1 (en) * | 2000-07-11 | 2002-08-29 | Sony Corporation | Two-staged mapping for application specific markup and binary encoding |
| BR0107329A (pt) * | 2000-10-17 | 2002-08-27 | Koninkl Philips Electronics Nv | Processo de codificação para codificar um elemento de descrição de uma instância de um esquema tipo xml, processo de decodificação para decodificar um fragmento compreendendo um conteúdo e uma sequência de informação de identificação, codificador para codificar um elemento de descrição de uma instância de um esquema tipo xml, decodificador para decodificar um fragmento compreendendo um conteúdo e uma sequência de informação de identificação, sistema de transmissão, sinal para transmissão através de uma rede de transmissão, e, tabela destinada a ser usada em um codificador |
| US7398275B2 (en) * | 2000-10-20 | 2008-07-08 | Sony Corporation | Efficient binary coding scheme for multimedia content descriptions |
| US7868912B2 (en) | 2000-10-24 | 2011-01-11 | Objectvideo, Inc. | Video surveillance system employing video primitives |
| US8711217B2 (en) | 2000-10-24 | 2014-04-29 | Objectvideo, Inc. | Video surveillance system employing video primitives |
| US8564661B2 (en) | 2000-10-24 | 2013-10-22 | Objectvideo, Inc. | Video analytic rule detection system and method |
| US20050146605A1 (en) * | 2000-10-24 | 2005-07-07 | Lipton Alan J. | Video surveillance system employing video primitives |
| US9892606B2 (en) | 2001-11-15 | 2018-02-13 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
| US7839926B1 (en) | 2000-11-17 | 2010-11-23 | Metzger Raymond R | Bandwidth management and control |
| US7698450B2 (en) | 2000-11-17 | 2010-04-13 | Monroe David A | Method and apparatus for distributing digitized streaming video over a network |
| US20020104094A1 (en) * | 2000-12-01 | 2002-08-01 | Bruce Alexander | System and method for processing video data utilizing motion detection and subdivided video fields |
| US20020080238A1 (en) * | 2000-12-27 | 2002-06-27 | Nikon Corporation | Watching system |
| US8478824B2 (en) * | 2002-02-05 | 2013-07-02 | Portauthority Technologies Inc. | Apparatus and method for controlling unauthorized dissemination of electronic mail |
| US20050025291A1 (en) * | 2001-03-12 | 2005-02-03 | Vidius Inc. | Method and system for information distribution management |
| US7681032B2 (en) | 2001-03-12 | 2010-03-16 | Portauthority Technologies Inc. | System and method for monitoring unauthorized transport of digital content |
| US20020171734A1 (en) * | 2001-05-16 | 2002-11-21 | Hiroshi Arakawa | Remote monitoring system |
| JP2003087772A (ja) * | 2001-09-10 | 2003-03-20 | Fujitsu Ltd | 画像制御装置 |
| US20030071902A1 (en) * | 2001-10-11 | 2003-04-17 | Allen Paul G. | System, devices, and methods for switching between video cameras |
| EP1311124A1 (en) * | 2001-11-13 | 2003-05-14 | Matsushita Electric Industrial Co., Ltd. | Selective protection method for images transmission |
| US20030110297A1 (en) * | 2001-12-12 | 2003-06-12 | Tabatabai Ali J. | Transforming multimedia data for delivery to multiple heterogeneous devices |
| EP2202648A1 (en) * | 2002-04-12 | 2010-06-30 | Mitsubishi Denki Kabushiki Kaisha | Hint information describing method for manipulating metadata |
| IL162879A0 (en) | 2002-07-05 | 2005-11-20 | Dmatek Ltd | A method and system for effectively performing event detection in a large number of concurrent imagesequences |
| US7453906B2 (en) * | 2002-09-19 | 2008-11-18 | Microsoft Corporation | Systems and methods for providing automatic network optimization with application variables |
| US7257644B2 (en) * | 2002-09-19 | 2007-08-14 | Microsoft Corporation | Systems and methods for providing presence tracking in a distributed computing system |
| US20040086152A1 (en) * | 2002-10-30 | 2004-05-06 | Ramakrishna Kakarala | Event detection for video surveillance systems using transform coefficients of compressed images |
| US20040135879A1 (en) * | 2003-01-03 | 2004-07-15 | Stacy Marco A. | Portable wireless indoor/outdoor camera |
| US20050134685A1 (en) * | 2003-12-22 | 2005-06-23 | Objectvideo, Inc. | Master-slave automated video-based surveillance system |
| US7005981B1 (en) * | 2003-05-27 | 2006-02-28 | The United States Of America As Represented By The Secretary Of The Army | Method and apparatus for the extraction and compression of surveillance information to facilitate high performance data fusion in distributed sensor systems |
| US7577199B1 (en) * | 2003-06-19 | 2009-08-18 | Nvidia Corporation | Apparatus and method for performing surveillance using motion vectors |
| US20050101250A1 (en) * | 2003-07-10 | 2005-05-12 | University Of Florida Research Foundation, Inc. | Mobile care-giving and intelligent assistance device |
| KR100941139B1 (ko) * | 2003-09-15 | 2010-02-09 | 엘지전자 주식회사 | 유피엔피(UPnP) 기반 네트워크의 미디어 스트리밍 파라미터 설정 방법 |
| KR101015811B1 (ko) * | 2003-09-23 | 2011-02-22 | 엘지전자 주식회사 | UPnP 기반의 미디어 콘텐츠 재생을 제어하는 전자기기 및 그 방법 |
| NZ536913A (en) * | 2003-12-03 | 2006-09-29 | Safehouse Internat Inc | Displaying graphical output representing the topographical relationship of detectors and their alert status |
| US20050163345A1 (en) * | 2003-12-03 | 2005-07-28 | Safehouse International Limited | Analysing image data |
| GB2408878B (en) * | 2003-12-03 | 2009-08-12 | Safehouse Internat Inc | Recording a sequence of images |
| US7664292B2 (en) * | 2003-12-03 | 2010-02-16 | Safehouse International, Inc. | Monitoring an output from a camera |
| AU2004233453B2 (en) * | 2003-12-03 | 2011-02-17 | Envysion, Inc. | Recording a sequence of images |
| US20050151846A1 (en) * | 2004-01-14 | 2005-07-14 | William Thornhill | Traffic surveillance method and system |
| KR20050077672A (ko) * | 2004-01-30 | 2005-08-03 | 엘지전자 주식회사 | 미디어 파일 중계 서비스 방법 및 시스템 |
| US7697026B2 (en) * | 2004-03-16 | 2010-04-13 | 3Vr Security, Inc. | Pipeline architecture for analyzing multiple video streams |
| US7663661B2 (en) * | 2004-03-16 | 2010-02-16 | 3Vr Security, Inc. | Feed-customized processing of multiple video streams in a pipeline architecture |
| US7672370B1 (en) | 2004-03-16 | 2010-03-02 | 3Vr Security, Inc. | Deep frame analysis of multiple video streams in a pipeline architecture |
| US7664183B2 (en) * | 2004-03-16 | 2010-02-16 | 3Vr Security, Inc. | Correlation processing among multiple analyzers of video streams at stages of a pipeline architecture |
| US7616782B2 (en) * | 2004-05-07 | 2009-11-10 | Intelliview Technologies Inc. | Mesh based frame processing and applications |
| AU2005272046B2 (en) * | 2004-06-30 | 2009-02-05 | Pelco, Inc. | Method and apparatus for detecting motion in MPEG video streams |
| GB0416667D0 (en) * | 2004-07-27 | 2004-08-25 | Crimelocator Ltd | Apparatus and method for capturing and transmitting images of a scene |
| US20060044394A1 (en) * | 2004-08-24 | 2006-03-02 | Sony Corporation | Method and apparatus for a computer controlled digital camera |
| DE102004040941A1 (de) * | 2004-08-24 | 2006-03-09 | Macrosystem Digital Video Ag | Bildgebende Sicherheitsüberwachungsvorrichtung |
| AR048477A1 (es) * | 2004-11-19 | 2006-05-03 | Alusud Argentina S R L | Pico vertedor del tipo empleado en botellas contenedoras de sustancias liquidas con grado de viscosidad variable |
| US9082456B2 (en) | 2005-01-31 | 2015-07-14 | The Invention Science Fund I Llc | Shared image device designation |
| US20060184553A1 (en) * | 2005-02-15 | 2006-08-17 | Matsushita Electric Industrial Co., Ltd. | Distributed MPEG-7 based surveillance servers for digital surveillance applications |
| US20060236375A1 (en) * | 2005-04-15 | 2006-10-19 | Tarik Hammadou | Method and system for configurable security and surveillance systems |
| DE102005019153A1 (de) * | 2005-04-25 | 2007-06-06 | Robert Bosch Gmbh | Verfahren und System zum Verarbeiten von Daten |
| US8964054B2 (en) | 2006-08-18 | 2015-02-24 | The Invention Science Fund I, Llc | Capturing selected image objects |
| US9451200B2 (en) | 2005-06-02 | 2016-09-20 | Invention Science Fund I, Llc | Storage access technique for captured data |
| US9621749B2 (en) | 2005-06-02 | 2017-04-11 | Invention Science Fund I, Llc | Capturing selected image objects |
| US9191611B2 (en) | 2005-06-02 | 2015-11-17 | Invention Science Fund I, Llc | Conditional alteration of a saved image |
| US20070222865A1 (en) | 2006-03-15 | 2007-09-27 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Enhanced video/still image correlation |
| US9942511B2 (en) | 2005-10-31 | 2018-04-10 | Invention Science Fund I, Llc | Preservation/degradation of video/audio aspects of a data stream |
| US9967424B2 (en) | 2005-06-02 | 2018-05-08 | Invention Science Fund I, Llc | Data storage usage protocol |
| US8233042B2 (en) * | 2005-10-31 | 2012-07-31 | The Invention Science Fund I, Llc | Preservation and/or degradation of a video/audio data stream |
| US8253821B2 (en) | 2005-10-31 | 2012-08-28 | The Invention Science Fund I, Llc | Degradation/preservation management of captured data |
| US9167195B2 (en) | 2005-10-31 | 2015-10-20 | Invention Science Fund I, Llc | Preservation/degradation of video/audio aspects of a data stream |
| US9076208B2 (en) | 2006-02-28 | 2015-07-07 | The Invention Science Fund I, Llc | Imagery processing |
| US8681225B2 (en) | 2005-06-02 | 2014-03-25 | Royce A. Levien | Storage access technique for captured data |
| US20070090972A1 (en) * | 2005-06-10 | 2007-04-26 | Monroe David A | Airborne digital video recorder |
| US8508607B2 (en) * | 2005-09-06 | 2013-08-13 | Its-7 | Method and system for a programmable camera for configurable security and surveillance systems |
| US20070058717A1 (en) * | 2005-09-09 | 2007-03-15 | Objectvideo, Inc. | Enhanced processing for scanning video |
| US20070150565A1 (en) | 2005-12-22 | 2007-06-28 | Arun Ayyagari | Surveillance network system |
| JP4730663B2 (ja) * | 2006-03-20 | 2011-07-20 | 富士フイルム株式会社 | 遠隔制御装置、遠隔制御システムおよび遠隔制御方法 |
| JP4742394B2 (ja) * | 2006-03-24 | 2011-08-10 | 富士フイルム株式会社 | 遠隔制御装置、方法、プログラムおよびシステム |
| US8762395B2 (en) | 2006-05-19 | 2014-06-24 | Oracle International Corporation | Evaluating event-generated data using append-only tables |
| US8131696B2 (en) * | 2006-05-19 | 2012-03-06 | Oracle International Corporation | Sequence event processing using append-only tables |
| US7961088B2 (en) * | 2006-08-18 | 2011-06-14 | Cattail Technologies, Inc. | Asset monitoring system and portable security system therefor |
| CN101287091B (zh) * | 2007-04-10 | 2010-11-24 | 华为技术有限公司 | 一种实现因特网协议电视业务的系统、装置和方法 |
| TW200924534A (en) * | 2007-06-04 | 2009-06-01 | Objectvideo Inc | Intelligent video network protocol |
| US8249141B1 (en) | 2007-07-13 | 2012-08-21 | Sprint Spectrum L.P. | Method and system for managing bandwidth based on intraframes |
| US8428360B2 (en) * | 2007-11-01 | 2013-04-23 | International Business Machines Corporation | System and method for real-time new event detection on video streams |
| US20100153146A1 (en) * | 2008-12-11 | 2010-06-17 | International Business Machines Corporation | Generating Generalized Risk Cohorts |
| US20090195382A1 (en) * | 2008-01-31 | 2009-08-06 | Sensormatic Electronics Corporation | Video sensor and alarm system and method with object and event classification |
| FR2932054B1 (fr) * | 2008-06-03 | 2010-08-13 | Thales Sa | Systeme de videosurveillance intelligent reconfigurable dynamiquement |
| US8922659B2 (en) | 2008-06-03 | 2014-12-30 | Thales | Dynamically reconfigurable intelligent video surveillance system |
| US8013730B2 (en) * | 2008-07-29 | 2011-09-06 | Honeywell International Inc. | Customization of personal emergency features for security systems |
| US9141862B2 (en) * | 2008-09-26 | 2015-09-22 | Harris Corporation | Unattended surveillance device and associated methods |
| US8301443B2 (en) | 2008-11-21 | 2012-10-30 | International Business Machines Corporation | Identifying and generating audio cohorts based on audio data input |
| US8041516B2 (en) * | 2008-11-24 | 2011-10-18 | International Business Machines Corporation | Identifying and generating olfactory cohorts based on olfactory sensor input |
| US8749570B2 (en) * | 2008-12-11 | 2014-06-10 | International Business Machines Corporation | Identifying and generating color and texture video cohorts based on video input |
| US8190544B2 (en) | 2008-12-12 | 2012-05-29 | International Business Machines Corporation | Identifying and generating biometric cohorts based on biometric sensor input |
| US20100153174A1 (en) * | 2008-12-12 | 2010-06-17 | International Business Machines Corporation | Generating Retail Cohorts From Retail Data |
| US8417035B2 (en) * | 2008-12-12 | 2013-04-09 | International Business Machines Corporation | Generating cohorts based on attributes of objects identified using video input |
| US20100153147A1 (en) * | 2008-12-12 | 2010-06-17 | International Business Machines Corporation | Generating Specific Risk Cohorts |
| US20100153597A1 (en) * | 2008-12-15 | 2010-06-17 | International Business Machines Corporation | Generating Furtive Glance Cohorts from Video Data |
| US8219554B2 (en) * | 2008-12-16 | 2012-07-10 | International Business Machines Corporation | Generating receptivity scores for cohorts |
| US20100153180A1 (en) * | 2008-12-16 | 2010-06-17 | International Business Machines Corporation | Generating Receptivity Cohorts |
| US8493216B2 (en) | 2008-12-16 | 2013-07-23 | International Business Machines Corporation | Generating deportment and comportment cohorts |
| US11145393B2 (en) | 2008-12-16 | 2021-10-12 | International Business Machines Corporation | Controlling equipment in a patient care facility based on never-event cohorts from patient care data |
| US20100153133A1 (en) * | 2008-12-16 | 2010-06-17 | International Business Machines Corporation | Generating Never-Event Cohorts from Patient Care Data |
| US9544379B2 (en) | 2009-08-03 | 2017-01-10 | Wolfram K. Gauglitz | Systems and methods for event networking and media sharing |
| US10574614B2 (en) | 2009-08-03 | 2020-02-25 | Picpocket Labs, Inc. | Geofencing of obvious geographic locations and events |
| US20110135170A1 (en) * | 2009-12-09 | 2011-06-09 | Capso Vision, Inc. | System and method for display speed control of capsule images |
| WO2011112316A1 (en) * | 2010-03-09 | 2011-09-15 | Telegent Systems, Inc. | Adaptive video decoding circuitry and techniques |
| US10318877B2 (en) | 2010-10-19 | 2019-06-11 | International Business Machines Corporation | Cohort-based prediction of a future event |
| US9131163B2 (en) | 2012-02-07 | 2015-09-08 | Stmicroelectronics S.R.L. | Efficient compact descriptors in visual search systems |
| US9344724B2 (en) * | 2012-06-25 | 2016-05-17 | Verint Americas Inc. | System and method for improved video operations |
| US10373470B2 (en) | 2013-04-29 | 2019-08-06 | Intelliview Technologies, Inc. | Object detection |
| KR102192704B1 (ko) * | 2013-10-22 | 2020-12-17 | 엘지전자 주식회사 | 영상 출력 장치 |
| US20150161452A1 (en) | 2013-12-11 | 2015-06-11 | Echostar Technologies, Llc | Home Monitoring and Control |
| US9900177B2 (en) | 2013-12-11 | 2018-02-20 | Echostar Technologies International Corporation | Maintaining up-to-date home automation models |
| US9769522B2 (en) | 2013-12-16 | 2017-09-19 | Echostar Technologies L.L.C. | Methods and systems for location specific operations |
| US9723393B2 (en) | 2014-03-28 | 2017-08-01 | Echostar Technologies L.L.C. | Methods to conserve remote batteries |
| CA2847707C (en) | 2014-03-28 | 2021-03-30 | Intelliview Technologies Inc. | Leak detection |
| US10943357B2 (en) | 2014-08-19 | 2021-03-09 | Intelliview Technologies Inc. | Video based indoor leak detection |
| US9824578B2 (en) | 2014-09-03 | 2017-11-21 | Echostar Technologies International Corporation | Home automation control using context sensitive menus |
| US9989507B2 (en) | 2014-09-25 | 2018-06-05 | Echostar Technologies International Corporation | Detection and prevention of toxic gas |
| US9511259B2 (en) | 2014-10-30 | 2016-12-06 | Echostar Uk Holdings Limited | Fitness overlay and incorporation for home automation system |
| US9983011B2 (en) | 2014-10-30 | 2018-05-29 | Echostar Technologies International Corporation | Mapping and facilitating evacuation routes in emergency situations |
| US10577912B2 (en) | 2014-11-12 | 2020-03-03 | Helmerich & Payne Technologies, Llc | System and method for measuring characteristics of cuttings and fluid front location during drilling operations with computer vision |
| CA2967771A1 (en) | 2014-11-12 | 2016-05-19 | Covar Applied Technologies, Inc. | System and method for inhibiting or causing automated actions based on person locations estimated from multiple video sources |
| US20160182249A1 (en) * | 2014-12-19 | 2016-06-23 | EchoStar Technologies, L.L.C. | Event-based audio/video feed selection |
| US9967614B2 (en) | 2014-12-29 | 2018-05-08 | Echostar Technologies International Corporation | Alert suspension for home automation system |
| CN107533711A (zh) | 2015-01-05 | 2018-01-02 | 佩克波奇有限公司 | 控制与移动目标相关联的媒体共享和聚集的漫游地理围栏的使用 |
| US9729989B2 (en) | 2015-03-27 | 2017-08-08 | Echostar Technologies L.L.C. | Home automation sound detection and positioning |
| US9946857B2 (en) | 2015-05-12 | 2018-04-17 | Echostar Technologies International Corporation | Restricted access for home automation system |
| US9948477B2 (en) | 2015-05-12 | 2018-04-17 | Echostar Technologies International Corporation | Home automation weather detection |
| US9960980B2 (en) | 2015-08-21 | 2018-05-01 | Echostar Technologies International Corporation | Location monitor and device cloning |
| US10984363B2 (en) * | 2015-09-04 | 2021-04-20 | International Business Machines Corporation | Summarization of a recording for quality control |
| US9996066B2 (en) | 2015-11-25 | 2018-06-12 | Echostar Technologies International Corporation | System and method for HVAC health monitoring using a television receiver |
| US10101717B2 (en) | 2015-12-15 | 2018-10-16 | Echostar Technologies International Corporation | Home automation data storage system and methods |
| US9798309B2 (en) | 2015-12-18 | 2017-10-24 | Echostar Technologies International Corporation | Home automation control based on individual profiling using audio sensor data |
| US10091017B2 (en) | 2015-12-30 | 2018-10-02 | Echostar Technologies International Corporation | Personalized home automation control based on individualized profiling |
| US10060644B2 (en) | 2015-12-31 | 2018-08-28 | Echostar Technologies International Corporation | Methods and systems for control of home automation activity based on user preferences |
| US10073428B2 (en) | 2015-12-31 | 2018-09-11 | Echostar Technologies International Corporation | Methods and systems for control of home automation activity based on user characteristics |
| US10685542B2 (en) | 2016-04-26 | 2020-06-16 | Sensormatic Electronics, LLC | System and method for monitoring a premises based on parsed codec data |
| US9882736B2 (en) | 2016-06-09 | 2018-01-30 | Echostar Technologies International Corporation | Remote sound generation for a home automation system |
| US10294600B2 (en) | 2016-08-05 | 2019-05-21 | Echostar Technologies International Corporation | Remote detection of washer/dryer operation/fault condition |
| US10049515B2 (en) | 2016-08-24 | 2018-08-14 | Echostar Technologies International Corporation | Trusted user identification and management for home automation systems |
| US11025942B2 (en) | 2018-02-08 | 2021-06-01 | Samsung Electronics Co., Ltd. | Progressive compressed domain computer vision and deep learning systems |
| US10897627B2 (en) * | 2019-01-11 | 2021-01-19 | Western Digital Technologies, Inc. | Non-volatile memory system including a partial decoder and event detector for video streams |
| US11064194B2 (en) | 2019-10-31 | 2021-07-13 | Western Digital Technologies, Inc. | Encoding digital videos using controllers of data storage devices |
| US11622091B2 (en) * | 2019-10-31 | 2023-04-04 | Genetec Inc. | Facilitating video monitoring of at least one location |
| US10841645B1 (en) | 2019-12-09 | 2020-11-17 | Western Digital Technologies, Inc. | Storage system and method for video frame segregation to optimize storage |
| US11562018B2 (en) | 2020-02-04 | 2023-01-24 | Western Digital Technologies, Inc. | Storage system and method for optimized surveillance search |
| US11301705B2 (en) | 2020-02-27 | 2022-04-12 | Western Digital Technologies, Inc. | Object detection using multiple neural network configurations |
| US11328511B2 (en) | 2020-03-13 | 2022-05-10 | Western Digital Technologies, Inc. | Storage system and method for improved playback analysis |
| CN112082915B (zh) * | 2020-08-28 | 2024-05-03 | 西安科技大学 | 一种即插即用型大气颗粒物浓度检测装置及检测方法 |
| US11069225B1 (en) | 2020-11-30 | 2021-07-20 | Motorola Solutions, Inc. | System and method for delaying an alert based on suspicious activity detection |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08194714A (ja) * | 1995-01-13 | 1996-07-30 | Matsushita Electric Ind Co Ltd | 圧縮動画像の検索方法および装置 |
| JP2000069442A (ja) * | 1998-08-24 | 2000-03-03 | Sharp Corp | 動画システム |
| JP2000078563A (ja) * | 1998-09-03 | 2000-03-14 | Sony Corp | 被写体認識装置及び自動追尾装置 |
Family Cites Families (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| GB9206651D0 (en) | 1992-03-26 | 1992-05-06 | Solid State Logic Ltd | Video processing |
| US5666157A (en) | 1995-01-03 | 1997-09-09 | Arc Incorporated | Abnormality detection and surveillance system |
| US5684715A (en) * | 1995-06-07 | 1997-11-04 | Canon Information Systems, Inc. | Interactive video system with dynamic video object descriptors |
| US5969755A (en) * | 1996-02-05 | 1999-10-19 | Texas Instruments Incorporated | Motion based event detection system and method |
| JP3631868B2 (ja) | 1996-12-20 | 2005-03-23 | 株式会社東芝 | 動きベクトル検出装置および方法 |
| JPH10276359A (ja) * | 1997-03-31 | 1998-10-13 | Sony Corp | 追尾装置および追尾方法 |
| US6097429A (en) * | 1997-08-01 | 2000-08-01 | Esco Electronics Corporation | Site control unit for video security system |
| US6064303A (en) | 1997-11-25 | 2000-05-16 | Micron Electronics, Inc. | Personal computer-based home security system |
| US6618507B1 (en) * | 1999-01-25 | 2003-09-09 | Mitsubishi Electric Research Laboratories, Inc | Methods of feature extraction of video sequences |
| US6424370B1 (en) * | 1999-10-08 | 2002-07-23 | Texas Instruments Incorporated | Motion based event detection system and method |
| US6570496B2 (en) * | 2000-04-04 | 2003-05-27 | Rick A. Britton | Networks and circuits for alarm system operations |
| JP2001333389A (ja) * | 2000-05-17 | 2001-11-30 | Mitsubishi Electric Research Laboratories Inc | ビデオ再生システムおよびビデオ信号処理方法 |
-
2000
- 2000-07-10 US US09/612,876 patent/US6646676B1/en not_active Expired - Lifetime
-
2001
- 2001-06-27 JP JP2001194713A patent/JP4601868B2/ja not_active Expired - Lifetime
- 2001-07-02 DE DE60102627T patent/DE60102627D1/de not_active Expired - Lifetime
- 2001-07-02 EP EP01116003A patent/EP1173020B1/en not_active Expired - Lifetime
- 2001-07-09 CN CN01122827A patent/CN1338873A/zh active Pending
-
2002
- 2002-05-03 HK HK02103364.0A patent/HK1041754A1/zh unknown
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH08194714A (ja) * | 1995-01-13 | 1996-07-30 | Matsushita Electric Ind Co Ltd | 圧縮動画像の検索方法および装置 |
| JP2000069442A (ja) * | 1998-08-24 | 2000-03-03 | Sharp Corp | 動画システム |
| JP2000078563A (ja) * | 1998-09-03 | 2000-03-14 | Sony Corp | 被写体認識装置及び自動追尾装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015513731A (ja) * | 2012-02-24 | 2015-05-14 | ゼットティーイー コーポレイション | ユニバーサルプラグアンドプレイに基づくビデオ監視を実現する方法、装置及びシステム |
Also Published As
| Publication number | Publication date |
|---|---|
| EP1173020B1 (en) | 2004-04-07 |
| EP1173020A2 (en) | 2002-01-16 |
| CN1338873A (zh) | 2002-03-06 |
| HK1041754A1 (zh) | 2002-07-19 |
| JP4601868B2 (ja) | 2010-12-22 |
| DE60102627D1 (de) | 2004-05-13 |
| US6646676B1 (en) | 2003-11-11 |
| EP1173020A3 (en) | 2002-07-31 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4601868B2 (ja) | ネットワーク化した監視／管制システム及び方法 | |
| US20060013495A1 (en) | Method and apparatus for processing image data | |
| JP3738631B2 (ja) | 画像検索システムおよび画像検索方法 | |
| US20120195363A1 (en) | Video analytics with pre-processing at the source end | |
| US20080267290A1 (en) | Coding Method Applied to Multimedia Data | |
| JP2003061030A (ja) | 記録済みビデオデータの境界を検出するシステムおよび方法 | |
| JP2018129790A (ja) | 録画したビデオを再生するための方法およびシステム | |
| JP2008505562A (ja) | Ｍｐｅｇビデオストリーム内の動きを検出する方法及び装置 | |
| CN104935886A (zh) | 一种基于sopc的室内智能视频监控系统 | |
| CN101448146A (zh) | 视频监控系统中的前端设备及前端设备中的信号处理方法 | |
| KR20070007330A (ko) | 단색 프레임 검출 방법 및 대응 장치 | |
| EP1446957A1 (en) | Feature extraction and detection of events and temporal variations in activity in video sequences | |
| CN111277800A (zh) | 监控视频编码及播放方法、装置、电子设备及存储介质 | |
| US20040205825A1 (en) | Video distribution method and video distribution system | |
| US20070285519A1 (en) | Method For Transferring Image Signals And System Using The Method | |
| JP4770875B2 (ja) | 画像特徴データ生成装置、画像特徴判定装置および画像検索システム | |
| CN201303397Y (zh) | 一种高清晰度数字视频服务器终端 | |
| JP2002133558A (ja) | 監視用信号の通信方法、及び監視用信号通信装置 | |
| KR100937418B1 (ko) | 부재중 메시지 저장 기능을 갖는 ｐｖｒ 장치 및 그 방법 | |
| JP2007180970A (ja) | 映像処理装置及び監視カメラシステム | |
| Georis et al. | IP-distributed computer-aided video-surveillance system | |
| US20050041734A1 (en) | Video coding | |
| JP2006018831A (ja) | 画像検索システムおよび画像検索方法 | |
| Desurmont et al. | A generic flexible and robust approach for intelligent real-time video-surveillance systems | |
| WO2023022207A1 (ja) | 管理システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080523 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100630 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100727 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100820 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100928 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100929 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131008 Year of fee payment: 3 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 4601868 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| EXPY | Cancellation because of completion of term |