ES2288610T3 - Procesamiento y sistema para la deteccion eficaz de eventos en un gran numero de secuencias de imagenes simultaneas. - Google Patents
Procesamiento y sistema para la deteccion eficaz de eventos en un gran numero de secuencias de imagenes simultaneas. Download PDFInfo
- Publication number
- ES2288610T3 ES2288610T3 ES03735950T ES03735950T ES2288610T3 ES 2288610 T3 ES2288610 T3 ES 2288610T3 ES 03735950 T ES03735950 T ES 03735950T ES 03735950 T ES03735950 T ES 03735950T ES 2288610 T3 ES2288610 T3 ES 2288610T3
- Authority
- ES
- Spain
- Prior art keywords
- image
- server
- flow
- images
- image acquisition
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
- 238000012545 processing Methods 0.000 title claims abstract description 81
- 238000001514 detection method Methods 0.000 title claims abstract description 69
- 238000000034 method Methods 0.000 claims abstract description 53
- 238000000605 extraction Methods 0.000 claims abstract description 10
- 230000005540 biological transmission Effects 0.000 claims abstract description 9
- 230000033001 locomotion Effects 0.000 claims description 30
- 238000004891 communication Methods 0.000 claims description 11
- 230000003068 static effect Effects 0.000 claims description 8
- 230000001815 facial effect Effects 0.000 claims description 6
- 239000000779 smoke Substances 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims 9
- 230000035582 behavioral recognition Effects 0.000 claims 2
- 238000012544 monitoring process Methods 0.000 abstract description 5
- 230000015572 biosynthetic process Effects 0.000 abstract 1
- 230000033764 rhythmic process Effects 0.000 abstract 1
- 238000005516 engineering process Methods 0.000 description 14
- 238000009434 installation Methods 0.000 description 6
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 238000001914 filtration Methods 0.000 description 5
- 150000001875 compounds Chemical class 0.000 description 3
- 238000012423 maintenance Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000005111 flow chemistry technique Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 101100118004 Arabidopsis thaliana EBP1 gene Proteins 0.000 description 1
- 101150052583 CALM1 gene Proteins 0.000 description 1
- 102100025580 Calmodulin-1 Human genes 0.000 description 1
- 101100459256 Cyprinus carpio myca gene Proteins 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 238000012300 Sequence Analysis Methods 0.000 description 1
- 101150091339 cam-1 gene Proteins 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000005206 flow analysis Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19639—Details of the system layout
- G08B13/19652—Systems using zones in a single scene defined for different treatment, e.g. outer zone gives pre-alarm, inner zone gives alarm
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/19656—Network used to communicate with a camera, e.g. WAN, LAN, Internet
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19665—Details related to the storage of video surveillance data
- G08B13/19667—Details realated to data compression, encryption or encoding, e.g. resolution modes for reducing data volume to lower transmission bandwidth or memory requirements
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19678—User interface
- G08B13/1968—Interfaces for setting up or customising the system
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/62—Extraction of image or video features relating to a temporal dimension, e.g. time-based feature extraction; Pattern tracking
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Software Systems (AREA)
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Alarm Systems (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Aiming, Guidance, Guns With A Light Source, Armor, Camouflage, And Targets (AREA)
Abstract
Procedimiento para su utilización en la realizacióProcedimiento para su utilización en la realización de detección de eventos y seguimiento de objetosn de detección de eventos y seguimiento de objetos en flujos de imágenes, utilizando un sistema, est en flujos de imágenes, utilizando un sistema, está formado mediante una serie de dispositivos adquiá formado mediante una serie de dispositivos adquisición de imágenes, cada uno instalado en el camposición de imágenes, cada uno instalado en el campo donde se ha de detectar un evento y conectado a u donde se ha de detectar un evento y conectado a una estación central a través de una red de datos, na estación central a través de una red de datos, comprendiendo el procedimiento: procesar un formatcomprendiendo el procedimiento: procesar un formato digital de un flujo de imágenes, que consiste eno digital de un flujo de imágenes, que consiste en una o más imágenes, para detectar características una o más imágenes, para detectar características, que son parámetros relacionados con los atributo, que son parámetros relacionados con los atributos de los objetos en dicho flujo de imágenes, y, bas de los objetos en dicho flujo de imágenes, y, basado en estas características, realizar la deteccisado en estas características, realizar la detección de los eventos y el seguimiento de los objetos,ón de los eventos y el seguimiento de los objetos, caracterizándose el procedimiento por el hecho de caracterizándose el procedimiento por el hecho de que: cada uno de los dispositivos adquisición de que: cada uno de los dispositivos adquisición de imágenes está preprogramado para funcionar con un imágenes está preprogramado para funcionar con un servidor de procesamiento de imágenes en dicha estservidor de procesamiento de imágenes en dicha estación central sobre la base de distribución de algación central sobre la base de distribución de algoritmos de procesamiento de imágenes entre eldispooritmos de procesamiento de imágenes entre el dispsitivo de adquisición de imágenes y el servidor, eositivo de adquisición de imágenes y el servidor, stando controlado el dispositivo de adquisición deestando controlado el dispositivo de adquisición d imágenes mediante el servidor para aplicar una exe imágenes mediante el servidor para aplicar una etracción de características de bajo nivel al formaxtracción de características de bajo nivel al formto digital del flujo de imágenes, comprendiendo diato digital del flujo de imágenes, comprendiendo dcha extracción de características de bajo nivel elicha extracción de características de bajo nivel e análisis de un marco y la identificación de dichol análisis de un marco y la identificación de dich marco como un evento que genera, a partir de dicho marco como un evento que genera, a partir de dico flujo de imágenes, un flujo de características cho flujo de imágenes, un flujo de características orrespondiente a dicho marco, y la transmisión de correspondiente a dicho marco, y la transmisión dedicho flujo de características al servidor de proc dicho flujo de características al servidor de proesamiento de imágenes a través de la red de datos,cesamiento de imágenes a través de la red de datos siempre que las características superen un límite, siempre que las características superen un límit correspondiente, determinado de manera dinámica me correspondiente, determinado de manera dinámica ediante dicho servidor de procesamiento de imágenemediante dicho servidor de procesamiento de imágens; con lo cual el flujo de características indicates; con lo cual el flujo de características indicaivo del marco identificado como que contiene posibtivo del marco identificado como que contiene posilemente un evento se configura para un procesamienblemente un evento se configura para un procesamieto adicional de alto nivel mediante dicho servidornto adicional de alto nivel mediante dicho servido de procesamiento de imágenes, para realizar así lr de procesamiento de imágenes, para realizar así a detección del evento y el seguimiento del objetola detección del evento y el seguimiento del objet en el flujo de características indicativo de dicho en el flujo de características indicativo de dicos flujos de imágenes. hos flujos de imágenes.
Description
Procesamiento y sistema para la detección eficaz
de eventos en un gran número de secuencias de imágenes
simultáneas.
La presente invención se refiere al campo de
procesamiento de vídeo. Más particularmente, la invención se
refiere a un procedimiento y a un sistema para obtener un
conocimiento con sentido, en tiempo real, a partir de una
pluralidad de secuencias de imágenes comprimidas simultáneas,
mediante el procesamiento efectivo de un gran número de secuencias
de imágenes de entrada simultáneas y/o características derivadas de
las imágenes adquiridas.
Se han gastado muchos esfuerzos para mejorar la
capacidad de extraer datos con sentido a partir de imágenes
capturadas mediante cámaras de vídeo y estáticas. Estas habilidades
se han estado utilizando en varias aplicaciones, tales como
aplicaciones para consumidores, industriales, médicas y de negocios.
Muchas cámaras están desplegadas en las calles, aeropuertos,
escuelas, bancos, oficinas, residencias, como medidas de seguridad
estándar. Estas cámaras se utilizan para permitir que un operador
visualice eventos de seguridad a distancia en tiempo real, o para
registrar y analizar un evento de seguridad en un momento
posterior.
La introducción de las nuevas tecnologías está
cambiando la industria de vigilancia de vídeo en nuevas direcciones
que mejoran de manera significativa la funcionalidad de estos
sistemas. Se utilizan varios algoritmos de procesamiento para las
aplicaciones de tiempo real y las autónomas. Estos algoritmos están
implementados sobre un rango de plataformas desde el software puro
al hardware puro, dependiendo de la aplicación. Sin embargo, estas
plataformas están usualmente diseñadas de manera simultánea un
número relativamente pequeño de secuencias de imágenes de entrada,
debido a los recursos informáticos sustanciales requeridos para el
procesamiento de las imágenes. Además, la mayoría de los sistemas
de procesamiento de imágenes comunes están diseñados para procesar
solamente datos de imágenes no comprimidas, tal como el sistema
descrito en la patente US-6.188.381. Los ambientes
de vídeo de red modernos requieren una capacidad de procesamiento
eficiente de un gran número de flujos de vídeo comprimidos,
obtenidas a partir de una pluralidad de fuentes de imágenes.
Las demandas operativas en aumento, así como las
restricciones de coste crearon la necesidad de la automatización de
la detección de eventos. Estas soluciones de detección de eventos
proporciona un alto nivel de detección, ahorran trabajo humano,
reemplazan otros tipos de sensores y disminuyen los índices de
falsas alarmas.
Aunque están disponibles soluciones
convencionales para la detección automática de intrusos,
identificación de placas de matrícula, reconocimiento facial,
detección de violaciones de tráfico, y otras aplicaciones basadas
en las imágenes, usualmente soportan pocas fuentes de vídeo
simultáneas, utilizando plataformas de hardware caras que requieren
una instalación de campo, lo que implica unos altos costes de
instalación, de mantenimiento y de actualización.
Los sistemas de vigilancia convencionales
utilizan tecnología de red de vídeo digital y detección automática
de eventos. La red de vídeo digital se implementa mediante el
desarrollo de la tecnología de compresión de vídeo digital y la
disponibilidad de redes de base IP. Los estándares de compresión,
tales como MPEG-4 y formatos similares, permiten
transmitir imágenes de alta calidad con un ancho de banda
relativamente estrecho.
Un factor de limitación importante cuando se
utiliza redes de vídeo digital es el requerimiento de ancho de
banda. Debido a que es demasiado caro la transmisión de todas las
cámaras todo el tiempo, las redes están diseñadas para transmitir
datos de manera simultánea, solamente desde unas pocas cámaras. La
transmisión de datos solamente desde cámaras que capturan eventos
importantes en cualquier momento dado es crucial para establecer una
red de vía digital eficiente y con un coste efectivo.
Las tecnologías de detección de eventos basadas
en vídeo automático son efectivas para este propósito. Esta
tecnología consiste en una serie de algoritmos que pueden analizar
las imágenes de la cámara en tiempo real y proporcionan una
notificación de un evento especial, si se produce. Las soluciones
de detección de eventos disponibles de manera simultánea utilizan
procedimientos de procesamiento de imágenes convencionales, que
requieren unos recursos de procesamiento importantes. Además, sitúan
una fuente de procesamiento fija (usualmente un procesador) por
cada entrada de cámara. Por lo tanto, estos sistemas proporcionan
un pobre rendimiento debido a la limitación de los recursos o son
extremadamente caros.
Como resultado, las necesidades de
instalaciones de vigilancia digital a gran escala, es decir, una
detección fiable, utilización de un ancho de banda efectivo,
definición de eventos flexible, diseño a gran escala y coste, no
pueden satisfacerse por parte de ninguna de las soluciones de
detección de eventos automáticas actuales.
Procedimientos de detección de movimiento en
vídeo (VMD) se describen como por ejemplo, en la patente US
6.349.114, WO 02/37429, en la publicación de la solicitud de la
patente US 2002/041.626, en la publicación de la solicitud de
patente 2002/054.210, en WO 01/63937, en EP 1110609, en EP 1173020,
en la patente US 6.384.862, en la patente US 6.188.381, en la
patente US 6.130.707, y en la patente US 6.069.655. Sin embargo,
todo los procedimientos descritos anteriormente no han
proporcionado todavía soluciones satisfactorias al problema de
obtener de manera efectiva un conocimiento con sentido, en tiempo
real, a partir de una pluralidad de secuencias de imágenes
simultáneas.
Un sistema de vigilancia de vídeo en red, en el
que los dispositivos de adquisición de imágenes realizan un
seguimiento completo del objeto y detección de los eventos se
conoce partir de:
Meyer M, Hötter M, Ohnmacht T: "A New System
for Video-Based Detection of Moving Objects and its
Integration into Digital Networks"; Actas del 30º Anual 1996
Conferencia Internacional Carnahan sobre Tecnología de Securidad,
Lexington KY, US, 2 al 4 de octubre, 1996; IEEE, Nueva York, US.
Es un objetivo de la presente invención
proporcionar un procedimiento y un sistema para obtener un
conocimiento con sentido, a partir de secuencias de imágenes
simultáneas, en tiempo real.
Es otro objetivo de la presente invención
proporcionar un procedimiento de un sistema para obtener
conocimiento con sentido, a partir de una pluralidad de secuencias
de imágenes simultáneas, que tengan un coste efectivo.
Es otro objetivo de la presente invención
proporcionar un procedimiento y un sistema para obtener un
conocimiento con sentido, a partir de una pluralidad de secuencias
de imágenes simultáneas, con una cantidad reducida de recursos de
ancho de banda.
También es otro objetivo de la presente
invención proporcionar un procedimiento y un sistema para obtener
conocimiento con sentido, a partir de una pluralidad de secuencias
de imágenes simultáneas, presidenciable, y que tenga una alta
sensibilidad en ambientes ruidosos.
También es otro objetivo de la presente
invención proporcionar un procedimiento y un sistema para obtener
conocimiento con sentido, a partir una pluralidad de secuencias de
imágenes simultáneas, con unos costes de instalación y mantenimiento
reducidos.
Otros objetivos y ventajas de medición se harán
evidentes a lo largo de la descripción.
Aunque en esta descripción se describen
principalmente videocámaras, un experto en la materia reconocerá que
la intención se extiende a cualquier fuente de imágenes apropiada,
tal como cámaras estáticas, imágenes generadas por ordenador, datos
de vídeo grabados previamente, y similares, y que fuentes de
imágenes se han de considerar de manera equivalente. De una manera
similar, los términos vídeo y flujo de vídeo, se han de construir de
manera amplia para incluir secuencias de vídeo, imágenes fijas,
gráficos generados por ordenador, o cualquier otra secuencia de
imágenes provista o convertida a un formato electrónico que se puede
procesar mediante un ordenador.
La presente invención se dirige a un
procedimiento para realizar la detección de eventos y el
seguimiento de objetos en flujos de imágenes. Una serie de
dispositivos adquisición de imágenes está instalado en el campo, de
manera que cada dispositivo comprende un procesador programable
local para convertir el flujo de imágenes adquiridas, que consiste
en una o más imágenes, en un formato digital, y un codificador
local, para generar características a partir del flujo de imágenes.
Las características son parámetros que están relacionados con los
atributos de los objetos en el flujo de imágenes. Cada dispositivo
transmite un flujo de características, siempre que el número y el
tipo de características superen un límite correspondiente. Cada
dispositivo de adquisición de imágenes está conectado a una red de
datos a través de un canal de comunicación de datos
correspondiente. Un servidor de procesamiento de imágenes conectado
a la red de datos determina el límite y los procesos del flujo de
características. Siempre que el servidor recibe las características
desde un codificador local a través de su correspondiente canal de
comunicación de datos y la red de datos, el servidor tiene
indicaciones relacionados con los eventos en los flujos de imágenes
mediante el procesamiento del flujo de características y la
transmisión de las indicaciones a un operador.
El codificador local puede ser un codificador
compuesto, que es un codificador local que también comprueben de
circuitos para comprimir el flujo de imágenes. El codificador
compuesto poder funcionar en un primer modo, durante el cual genera
y transmite las características al servidor, y en un segundo modo,
durante el cual transmite al servidor, además de las
características, por lo menos una porción del flujo de imágenes en
un nivel de comprensión deseado, según los comandos enviados desde
el servidor. Preferiblemente, cada codificador compuesto está
controlado mediante un comando enviado desde el servidor, para
funcionar en su primer modo. Mientras el servidor recibe las
características desde un codificador compuesto, ese codificador
compuesto se controla mediante un comando enviado desde el servidor,
para funcionar en su segundo modo. El servidor tiene indicaciones
relacionados con los eventos en los flujos de imágenes mediante el
procesamiento del flujo de características, y transmite las
indicaciones y/o sus correspondientes flujos de imágenes a un
operador.
Siempre que se desee uno o más flujos de
imágenes comprimidas que contienen eventos, éstos se decodifica en
mediante la estación del operador, y los flujos de imágenes
decodificadas se transmite a la pantalla de un operador, para su
visionado. Los flujos de imágenes comprimidas obtenidos mientras su
codificador local funciona en su segundo modo se pueden grabar.
Preferiblemente, los recursos de procesamiento
de imágenes adicionales, en el servidor, están localizados de manera
dinámica en canales de comunicación de datos que reciben los flujos
de imágenes. Flujos de características obtenidos mientras funciona
en el primer modo pueden comprender solamente una porción de la
imagen.
Se puede generar un polígono gráfico que
abarca un objeto de interés, estando dentro del marco de una imagen
o un AOI (área de interés) en la imagen mediante el servidor y se
muestra un operador para su visionado. Además, el servidor puede
generar un trazo gráfico que indica la historia del movimiento de
un objeto de interés, que está en el interior del marco de una
imagen o un AOI en la imagen.
El flujo de imágenes se puede seleccionar a
partir del grupo de imágenes que comprende flujos de vídeo,
imágenes estáticas, imágenes generadas por ordenador, y datos de
vídeo digitales y analógicos pregrabados, o flujos de vídeo,
comprimidos utilizando el formato MPEG. El codificador poder
utilizar una resolución de marcos diferentes durante su
funcionamiento en cada modo.
Preferiblemente, las características pueden
incluir características de movimiento, color, porciones de la
imagen, datos del borde e información relacionada con la
frecuencia.
El servidor puede realizar, utilizando un flujo
de características recibido desde el codificador local de por lo
menos un dispositivo de adquisición de imágenes, una más de las
siguientes operaciones y/o cualquier combinación de las mismas:
- -
- reconocimiento de placas de matrícula (LPR);
- -
- reconocimiento facial (FR);
- -
- detección de violaciones de las reglas de tráfico;
- -
- reconocimiento de comportamiento;
- -
- detección de incendios;
- -
- detección de flujo de tráfico;
- -
- detección de humo.
La presente invención también se dirige a un
sistema para realizar la detección de eventos y el seguimiento de
objetos en flujos de imágenes, que comprende:
a) una serie de dispositivos adquisición de
imágenes, instalados en un campo, incluyendo cada uno de los
cuales:
- a.1)
- un procesador programable local para convertir el flujo de imágenes adquirido, en un formato digital;
- a.2)
- un codificador local, para generar, a partir del flujo de imágenes, características, que es son parámetros relacionados con los atributos de los objetos en el flujo de imágenes, y para transmitir un flujo de características, siempre que las características y movimiento superen un límite correspondiente;
b) una red de datos, a la cual cada dispositivo
de adquisición de imágenes está conectado a través de un canal de
comunicación de datos correspondiente;
c) y;
d) un servidor de procesamiento de imágenes
conectado a la red de datos, siendo capaz el servidor de determinar
el límite, de obtener indicaciones relacionadas con los eventos en
los flujos de imágenes mediante el procesamiento del flujo de
características, y de transmitir las indicaciones a un operador.
El sistema también puede comprender una pantalla
de operador, para recibir y visualizar uno o más flujos de imágenes
que contienen eventos, así como un grabador de vídeo de red para
grabar uno o más flujos de imágenes, obtenidos mientras su
codificador local funciona en su primer modo.
Las anteriores y otras características y
ventajas de la invención se entenderán mejor a través de la
siguiente realizaciones preferidas de la misma, con referencia a
los dibujos adjuntos, de los cuales:
La figura 1 muestra esquemáticamente la
estructura de un sistema de vigilancia que comprende una pluralidad
de cámaras conectadas a una red de datos, según la realización
preferida de la invención;
\newpage
La figura 2 muestra la utilización de AOIs (área
de interés) para designar áreas donde se realizará la detección de
eventos y para reducir el uso de los recursos del sistema, según una
realización preferida de la invención; y
Las figuras 3A a 3C muestran la generación de un
objeto de interés y su rastro de movimiento, según una realización
preferida de la invención.
Se puede conseguir un ahorro significativo en
los recursos del sistema mediante la aplicación de nuevas técnicas
de reducción de datos, propuestas mediante la presente invención. En
una situación donde miles de cámaras están conectadas a un único
servidor, solamente un pequeño número de cámaras adquieren realmente
eventos importantes que se han de analizar. Un sistema a gran
escala puede funcionar adecuadamente solamente si tiene la capacidad
de identificar las entradas que pueden contener información útil y
realizar un procesamiento adicional solamente sobre estas entradas.
Este mecanismo de filtrado requiere unos recursos de procesamiento y
ancho de banda mínimos, de manera que es posible aplicarlo de
manera simultánea sobre un gran número de flujos de imágenes. La
presente invención propone este mecanismo de filtrado, llamada
tecnología de procesamiento de imágenes simultáneas de manera
masiva (MCIP) que se basa en el análisis de secuencias de imágenes
de entrada y/o flujos de características, derivadas a partir de las
imágenes adquiridas, de las capacidades de detección de imágenes
automáticas en un ambiente de red de vídeo digital a gran
escala.
La tecnología MCIP combina diversas tecnologías
tales como la reducción de datos a gran escala, diseño de un
servidor efectivo y algoritmos de procesamiento de imágenes
optimizados, ofreciendo así una plataforma que se dirige
principalmente al mercado de la seguridad y que no compite con las
soluciones convencionales, particularmente con el vasto número de
usuarios potenciales. MCIP es una solución en red para la detección
de eventos en instalaciones distribuidas está diseñada para redes
de vigilancia de vídeo digital a gran escala que soportan de manera
simultánea miles de entradas de cámara, distribuidas de manera
arbitraria en un área geográfica grande y con un rendimiento en
tiempo real. La tecnología MCIP utiliza un único procedimiento de
transmisión característico que consume un ancho de banda estrecha,
mientras mantiene una alta sensibilidad y probabilidad de detección.
La tecnología MCIP es una solución basada en un servidor que es
compatible con los sistemas de grabación de vídeo digital y
monitorización y realiza algoritmos de detección complejos, reduce
el mantenimiento de campo y proporciona una escalabilidad mejorada,
una alta disponibilidad, un bajo costo por canal y utilidades de
copia de seguridad. El mismo sistema proporciona, de manera
simultánea, múltiples aplicaciones tales como VMD, LPR y FR. Además,
se pueden asociar diferentes aplicaciones de detección con la misma
cámara.
La tecnología MCIP está compuesto de una
plataforma de servidor con varias aplicaciones, codificadores de
cámara (internos o externos a la Cámara), un grabador de vídeo de
red (NVR) y una estación de operador. El servidor contiene un
ordenador que incluye componentes de hardware y software del
propietario. La tecnología MCIP está basada en la distribución de
algoritmos de procesamiento de imágenes entre la extracción
característica de bajo nivel, que se realiza mediante los
codificadores están situados en el campo (es decir, en la
proximidad de una cámara), y aplicaciones de procesamiento de alto
nivel, que se realizan mediante un servidor central remoto que
recoge y analiza estas características.
El sistema MCIP descrita a continuación
soluciona no solamente el problema del ancho de banda, sino que
también reduce la carga del servidor y utiliza un único tipo de
flujos de datos (no un flujo de vídeo digital), y realiza
procesamiento efectivo para detectar eventos en tiempo real, en un
ambiente de vigilancia de vídeo a gran escala.
Un elemento importante en la tecnología MCIP es
la reducción de datos, que se consigue mediante la distribución de
los algoritmos de procesamiento de las imágenes. Como todas las
fuentes de vídeo, que requieren la detección de eventos, que
transmiten de manera simultánea, el ancho de banda de la red
requerido se reduce mediante la generación de un flujo de
características de ancho de banda reducido en la proximidad de cada
cámara. Para detectar y rastrear objetos en movimiento en fuentes de
vídeo transmitidas de manera digital mediante el análisis de la
característica del ancho de banda reducido transmitido, no hay
ninguna necesidad de transmitir flujos de vídeo completos, sino
solamente datos parciales, que contienen información en relación
con a los objetos en movimiento.
Haciendo esto, se utiliza un ancho de banda de
datos significativamente más pequeño, se reducen las demandas de
ancho de banda de la red y de la potencia de procesamiento de la
detección de eventos. Además, si solamente se han de detectar la
forma, el tamaño, la dirección del movimiento y la velocidad, no
hay necesidad de transmitir datos relacionados con su intensidad o
color, y así, se consigue una reducción adicional del ancho de
banda. Otra optimización del ancho de banda si el codificador en el
lado de la transmisión filtra todo los movimientos que están por
debajo de un límite de movimiento, determinado por el servidor
central remoto. Este límite puede ser el nivel AC de un objeto en
movimiento, la distancia del movimiento o cualquier combinación de
las mismas, y se puede determinar y cambiar de manera dinámica,
según los atributos de la imagen adquirida, tales como la
resolución, AOI, nivel de comprensión, etc. Los objetos en
movimiento están por debajo del límite se consideran como ruido o
como movimientos sin interés.
Un procedimiento para extraer características es
modificar ligeramente y degradar los compresores de vídeo de base
temporal existentes, estaban diseñados originalmente para trasmitir
vídeo digital. Las características también se pueden generar
mediante un algoritmo de extracción de características específico
(tal como cualquier algoritmo de generación de vectores del
movimiento) que no esté relacionado con el algoritmo de compresión
de vídeo. Cuando se trabaja en este modo de ancho de banda reducido,
los flujos de salida de estos codificadores son definitivamente no
un flujo de vídeo y por lo tanto no se pueden usar mediante
cualquier parte de recepción para producir imágenes de vídeo.
La figura 1 muestra esquemáticamente la
estructura de un sistema de vigilancia que comprende una pluralidad
de cámaras conectadas a una red de datos, según una realización
preferida de la invención. El sistema 100 comprende n fuentes de
imágenes (en este ejemplo, n cámaras, CAM1, ..., CAMn), cada una de
las cuales está conectada a un codificador digital ENCj, para
convertir las imágenes adquiridas mediante ENCj en un formato
digital comprimido. Cada codificador digital ENCj está conectado a
una red de datos digital 101 en un punto por ejemplo y es capaz de
transmitir datos, que pueden ser un flujo de características de
ancho de banda reducido o un flujo de vídeo comprimido completo,
mediante su canal correspondiente Cj. La red de datos 101 recoge
los datos transmitidos desde todos los canales y los envía al
servidor MCIP 102, a través de un bus de datos 103. El servidor
MCIP 102 procesan los datos recibidos de cada canal y controla una
o más cámaras que transmiten cualquier combinación de flujo de
características de ancho de banda reducido y de flujo de vídeo
comprimido completo, que se pueden analizar mediante el servidor
MCIP 102 en tiempo real, o grabarse mediante el NVR 104 y
analizarse mediante el servidor MCIP 102 posteriormente. Una
estación de operador 105 está también conectada al servidor MCIP
102, para la monitorización en tiempo real de los flujos de vídeo
comprimido completos. La estación de operador 105 puede controlar
manualmente el funcionamiento del servidor MCIP 102, siempre que se
desee.
El servidor MCIP (procesamiento de imágenes
simultáneas de manera masiva) está conectado a las fuentes de
imágenes (representados como cámaras en el dibujo, pero que pueden
ser también cualquier fuente de imágenes, tales como vídeos de
cinta, cámaras estáticas, cámaras de vídeo, imágenes o gráficos
generados por ordenador, y similares) a través de un bus de datos
103 y la red 101, y recibe las características o imágenes en un
formato comprimido. En el sentido más amplio, esta es cualquier
tipo de red, con o sin cables. Las imágenes se pueden comprimir
utilizando cualquier tipo de compresión. En la práctica, se
utilizan redes de base IP, así como esquemas de compresión se
utilizan DCT, Cliente de Video-LAN (VLC, que es un
reproductor multimedia muy portable para diferentes formatos de
audio y vídeo, así como Digital Versatile Discs (DVDs), Video
Compact Discs (VCDs), y diferentes protocolos de flujos, descritos
en el documento WO 01/63937) y técnicas de estimación de movimiento
tales como MPEG.
El sistema 100 utiliza un módulo de equilibrio
de carga opcional, que permite escalar fácilmente el número de
entradas que se pueden procesar y también crea la capacidad de
eliminar un único punto de fallo, creando servidores MCIP de copia
de seguridad. El sistema 100 también tiene un componente de
configuración que se utiliza para definir el tipo de procesamiento
que se ha de realizar para cada entrada y la destinación de los
resultados de procesamiento. La destinación podrá ser otro
ordenador, una dirección de correo electrónico, una aplicación de
monitorización, o cualquier otro dispositivo que pueda recibir
mensajes de texto y/o visuales.
El sistema puede conectarse opcionalmente con
una base de datos externa para ayudar al procesamiento de las
imágenes. Por ejemplo, una base de datos de sospechosos,
automóviles robados, de números de placas de matrícula se puede
utilizar para identificar vehículos.
La figura 2 muestra la utilización de AOIs (área
de interés) para reducir la utilización de los recursos del
sistema, según una realización preferida de la invención. Un AOI es
un polígono (en esta figura, un hexágono) que encierra el área
donde se realizará la detección. Los rectángulos indican el tamaño
del objeto estimado a diferentes distancias de la Cámara. En este
ejemplo la escena de interés comprende la detección del movimiento
de una persona en un campo (mostrado en el primer rectángulo). Se
puede utilizar en la unidad de filtrado para decidir si se requiere
un procesamiento adicional. En este caso, la unidad de filtrado
examina los datos característicos. El flujo de características se
analiza para determinar si suficientes características
significativas están en el interior del AOI. Si el número de
características que están situadas en el interior del AOI y
comprenden cambios, supera el límite, entonces éste marco se designa
como que contiene posiblemente un evento y se transfiere para un
procesamiento adicional. En caso contrario, el marco se elimina y no
se realiza ningún procesamiento adicional.
El servidor MCIP reciben el flujo de
características de ancho de banda reducido (este flujo de
características no es un flujo de vídeo en absoluto, y por lo tanto,
no se podrá reconstruir a partir de la misma ninguna imagen que se
puede visualizar) de todos las fuentes de vídeo se requieren la
detección del evento. Cuando se detecta un evento en un flujo de
ancho de banda reducido que se transmite desde una fuente de vídeo
específica, el servidor central puede ordenar que esta fuente de
vídeo cambio su modo de funcionamiento a un modo de flujo de vídeo,
en el cual esa fuente de vídeo puede funcionar como un codificador
decidió regular y transmite una flujo de vídeo estándar, que puede
ser decodificado por el servidor o por cualquier parte receptora
para su observación, grabación, procesamiento adicional o cualquier
otro propósito. Opcionalmente, el decodificador de vídeo también
continúa transmitiendo el flujo de características al mismo
tiempo.
Trabajando según este esquema, la mayoría de las
fuentes de vídeo permanecen en el modo de ancho de banda reducido,
mientras se transmite un flujo de datos de un ancho de banda
estrecho, aunque suficiente para detectar eventos con una alta
resolución e índice de marcos en el servidor MCIP. Solamente una
porción muy pequeña de las fuentes (en las que se detecta un
evento) se controlan para trabajar de manera simultánea en el modo
de flujo de vídeo Esto provoca un ancho de banda de red total que es
significativamente menor que el ancho de banda de red requerido
para transmitir de manera simultánea desde todas las fuentes de
vídeo.
Por ejemplo, si una instalación de vigilancia de
vídeo convencional que utiliza 1000 cámaras, se necesita un ancho
de banda de aproximadamente 500 Kbp/s por cada cámara, para
transmitir a una calidad adecuada. En el modo de ancho de banda
reducido, solamente se requiere aproximadamente 5 Kbp/s por cada
cámara, para la transmisión de información relacionada con los
objetos en movimiento con la misma resolución e índice de marcos.
Por lo tanto, toda las cámaras que trabajan en este modo están
utilizando un ancho de banda total de 5 Kps/s x 1000 = 5 Mbp/s.
Asumiendo que en un estado estacionario los objetos sospechosos
aparecen en un 1% de las cámaras (10 cámaras) y que trabajan de
modo de flujo de vídeo, se requiere un ancho de banda extra de 10 x
500 Kbp/s = 5 Mbp/s. Así, el ancho de banda de red requerido total
utilizando la solución propuesta por la presente invención es de 10
Mbp/s. Un ancho de banda de red requerido total de 500 Mbp/s se
consumirían mediante los sistemas convencionales, si todas las 1000
cámaras transmitieran de manera simultánea flujos de vídeo.
La solución propuesta puede ser aplicable no
solamente para la detección y el seguimiento de objetos en
movimiento de alto nivel en cámaras en vivo, sino también en vídeo
grabado. Grandes cantidades de metraje de vídeo se graban mediante
muchos sistemas de vigilancia. Para detectar eventos de interés en
este vídeo grabado, son necesarias capacidades de procesamiento
masivo. Mediante la conversión del vídeo grabado, ya sea digital o
analógico, a un flujo de ancho de banda reducido según las técnicas
descritas anteriormente, la detección de los eventos es mucho más
fácil, con menores requerimientos de procesamiento y un
funcionamiento más rápido.
El sistema propuesto la presente invención
comprende los siguientes componentes:
1. Uno o más servidores MCIP.
2. Uno o más codificadores de vídeo de modo
dual, que se pueden operar en un modo de ancho de banda reducido o
en un modo de flujo de vídeo, según instrucciones remotas.
3. Una red digital, LAN o WAN, IP u otra, que
establece comunicación entre los componentes del sistema.
4. Una o más estaciones de operador, mediante
las cuales los operadores pueden definir criterios de eventos y
otros parámetros del sistema y dirigir eventos en tiempo real.
5. Un grabador de vídeo de red opcional (NVR),
que puede grabar y reproducir, bajo demanda, cualquier fuente de
vídeo seleccionada que esté disponible en la red.
A continuación hay una lista parcial de tipos de
aplicaciones de procesamiento de imágenes que se pueden implementar
de una manera muy efectiva utilizando el procedimiento propuesto
mediante la presente invención:
Detección de movimiento de vídeo - para
aplicaciones de interior y exterior. Esta aplicación se utiliza
comúnmente para detectar intrusos en zonas protegidas. Se desea
ignorar interferencias tales como árboles en movimiento, polvo y
animales. En esta realización de la presente invención se manipulan
imágenes de entrada en el nivel de flujo para filtrar ciertas
imágenes y cambios en las imágenes. Ejemplos de estos filtros son
movimientos por debajo de un límite predeterminado, tamaño o
velocidad relacionados, que se filtran todos preferiblemente
aplicados en AOIs, reduciendo así de manera significativa la
cantidad de recursos del sistema requeridos para un procesamiento
adicional. Como sistema está basado en un servidor y no hay
necesidad de instalación de equipo en el campo (excepto la cámara),
esta solución es muy atractiva para aplicaciones de bajo
presupuesto, tal como en el mercado residencial.
Detección excepcional de objetos
estáticos - esta aplicación se utiliza para detectar objetos
estáticos donde estos objetos pueden requerir una alarma. A modo de
ejemplo, estos objetos pueden comprender una bolsa no atendida en
el aeropuerto, un vehículo detenido en una autopista, una persona
detenida en un sitio protegido, y similares. En esta realización, la
presente invención manipula las imágenes de entrada en el nivel de
flujo y examina los vectores de movimiento en las AOIs. Los objetos
que dejan de moverse se procesan adicionalmente.
Reconocimiento de placas de matrícula -
esta aplicación se utiliza para el control de acceso de vehículos,
la detección de automóviles robados o sospechosos, y la
automatización de aparcamientos. En esta realización, es posible
detectar automóviles deseados utilizando miles o más cámaras
instaladas en el campo, proporcionando así una solución de detección
práctica.
Reconocimiento facial - esta aplicación
se desea para verificación o dispositivo de detección biométrica,
para tareas tales como localización de criminales o terroristas y
para propósitos de control de acceso de personal. Utilizando esta
realización, se ofrece una capacidad de reconocimiento facial en
muchas cámaras en el campo. Esta es una herramienta muy útil para
grandes instalaciones tales como aeropuertos y vigilancia
pública.
Detección de humo y llamas - esta
aplicación se utiliza para detección de fuego. Utilizando esta
realización de la invención, todos los sitios equipados con cámaras
pueden recibir este servicio además de otras aplicaciones sin
ninguna instalación de detectores de humo o llamas.
\newpage
Violaciones de tráfico - esta aplicación
detecta una pluralidad de violaciones de tráfico, tales como cruce
con luz roja, cruce de la línea de separación, aparcamiento o
detención en zonas prohibidas, o similares. Utilizando esta
realización, esta funcionalidad se puede aplicar para muchas cámaras
situadas a lo largo de carreteras e intersecciones, optimizando así
de manera significativa del trabajo policial.
Análisis del flujo de tráfico - esta
aplicación es útil para centros de tráfico mediante la detección de
manera automática de centros de tráfico y regulares, tales como
obstáculos al tráfico, accidentes, tráfico demasiado lento o
demasiado rápido o demasiado congestionado, y similares. Utilizando
esta realización, los centros de tráfico poder utilizar muchas
cámaras situadas tal como se deseen en la zona de cobertura para
proporcionar un nivel de control significativamente mejor.
Seguimiento de un vehículo o persona
sospechosa - esta aplicación se utiliza para seguir objetos de
interés. Es necesaria para perseguir a un ladrón a un automóvil de
escape, localizar a un sospechoso que corre, y más. Utilizando esta
realización, esta funcionalidad con cualquier cámara o cámaras
seleccionadas en el campo.
Debe indicarse que cada una de esas aplicaciones
o con su combinación se pueden considerar como una realización
separada de la invención, mientras se utilice la estructura básica
aquí contemplada, aunque las realizaciones específicas pueden
utilizar componentes especializados. La selección de estos
componentes y la combinación de las características y las
aplicaciones aquí previstas es una materia de elección técnica que
quedará clara para los expertos en la materia.
Las figuras 3A a 3C muestran la generación de
un objeto de interés y su rastro de movimiento, según una
realización preferida de la invención. La figura 3A es una imagen de
una AOI seleccionada (en este ejemplo, una zona alargada, en la cual
está prohibida la presencia de cualquier persona), en la cual el
servidor MCIP 102 genera un objeto, que está determinado según los
parámetros de tamaño y movimiento predefinidos, recibidos desde el
codificador correspondiente. El objeto abarca el cuerpo de una
persona, que penetra en la zona prohibida y que camina desde la
derecha hacia la izquierda. Los parámetros movimiento se actualizan
de manera continua, de manera que se sigue el centro del objeto. El
servidor MCIP 102 genera un trazo (línea sólida) que proporciona una
indicación gráfica en relación con su movimiento en la zona
prohibida. La figura 3B es una imagen de la misma AOI seleccionada,
en la cual el servidor MCIP 102 genera el objeto y el trazo (línea
sólida) que proporciona una indicación gráfica relacionada con su
movimiento dentro de la zona prohibida desde la izquierda hacia la
derecha, y más cercana a la cámara. La figura 3C es una imagen de la
misma AOI seleccionada, en la que el servidor MCIP 102 genera el
objeto y el trazo (línea sólida) que proporciona una indicación
gráfica relacionada con su movimiento en el interior de la zona
prohibida desde la derecha a la izquierda, y más cercana a la
cámara. La filtración realizada por el codificador correspondiente
evita la generación de movimientos de fondos, tales como las copas
de los árboles y la vegetación más baja, que se consideran ruido de
fondo.
Los ejemplos y la descripción anteriores se han
proporcionado, por supuesto, solamente por motivos de ilustración, y
no están pensados para limitar la invención de ninguna manera. Tal
como apreciará el experto en la materia, la invención se podrá
realizar en una gran variedad de maneras, utilizando más de una
técnica de las descritas anteriormente, todo ello sin apartarse el
ámbito de la invención.
Claims (39)
1. Procedimiento para su utilización en la
realización de detección de eventos y seguimiento de objetos en
flujos de imágenes, utilizando un sistema, está formado mediante una
serie de dispositivos adquisición de imágenes, cada uno instalado
en el campo donde se ha de detectar un evento y conectado a una
estación central a través de una red de datos, comprendiendo el
procedimiento: procesar un formato digital de un flujo de imágenes,
que consiste en una o más imágenes, para detectar características,
que son parámetros relacionados con los atributos de los objetos en
dicho flujo de imágenes, y, basado en estas características,
realizar la detección de los eventos y el seguimiento de los
objetos, caracterizándose el procedimiento por el hecho de
que:
cada uno de los dispositivos adquisición de
imágenes está preprogramado para funcionar con un servidor de
procesamiento de imágenes en dicha estación central sobre la base de
distribución de algoritmos de procesamiento de imágenes entre el
dispositivo de adquisición de imágenes y el servidor, estando
controlado el dispositivo de adquisición de imágenes mediante el
servidor para aplicar una extracción de características de bajo
nivel al formato digital del flujo de imágenes, comprendiendo dicha
extracción de características de bajo nivel el análisis de un marco
y la identificación de dicho marco como un evento que genera, a
partir de dicho flujo de imágenes, un flujo de características
correspondiente a dicho marco, y la transmisión de dicho flujo de
características al servidor de procesamiento de imágenes a través de
la red de datos, siempre que las características superen un límite
correspondiente, determinado de manera dinámica mediante dicho
servidor de procesamiento de imágenes;
con lo cual el flujo de características
indicativo del marco identificado como que contiene posiblemente un
evento se configura para un procesamiento adicional de alto nivel
mediante dicho servidor de procesamiento de imágenes, para realizar
así la detección del evento y el seguimiento del objeto en el flujo
de características indicativo de dichos flujos de imágenes.
2. Procedimiento según la reivindicación 1, en
el que dichas características en dicho flujo de características
desde el dispositivo de adquisición de imágenes son parámetros
relacionados con el movimiento de los objetos en dicho flujo de
imágenes, con lo cual el servidor de procesamiento de imágenes puede
seguir objetos en movimiento en el campo.
3. Procedimiento según la reivindicación 1 ó 2,
en el que el dispositivo de adquisición de imágenes también
comprende circuitos para comprimir el flujo de imágenes, siendo
capaz dicho dispositivo de adquisición de imágenes de funcionar en
un primer modo, durante la cual genera y transmite el flujo de
características al servidor, y en un segundo modo, durante el cual
transmite ha dicho servidor, además de dicho flujo de
características, por lo menos una porción de dicho flujo de
imágenes en un nivel de comprensión desea, según los comandos
enviados desde dichos servidor.
4. procedimiento según la reivindicación 3, que
también comprende controlar cada dispositivo de adquisición de
imágenes mediante un comando enviado desde dicho servidor, para
funcionar en su primer modo;
mientras el servidor recibe flujos de
características desde el dispositivo de adquisición de imágenes:
a) controlar que el dispositivo de adquisición
de imágenes, mediante un comando enviado desde dicho servidor,
funciona en su segundo modo; y
b) obtener indicaciones relacionadas con eventos
en dichos flujos de imágenes mediante dicho procesamiento de alto
nivel, mediante dicho servidor, dicho flujo de características, y
transmitir dichas indicaciones y/o sus correspondientes flujos de
imágenes a un operador.
5. Procedimiento según la reivindicación 1, 2 ó
3, que también comprende decodificar uno o más flujos de imágenes
comprimidas que contienen eventos mediante dicho servidor, y
transmitir los flujos de imágenes de codificadas a la pantalla de
un operador para su visionado.
6. Procedimiento según la reivindicación 3, que
también comprende grabar uno o más flujos de imágenes comprimidas
obtenidas mientras su dispositivo de adquisición de imágenes
asociado funciona en su segundo modo.
7. Procedimiento según la reivindicación 1, 2 ó
3, que también comprende asignar de manera dinámica recursos de
procesamiento de imágenes adicionales, en el servidor, a canales de
comunicación de datos que reciben los flujos de imágenes.
8. Procedimiento según la reivindicación 3, en
el que uno o más flujos de características obtenidas mientras el
dispositivo de adquisición de imágenes funciona en el primer modo,
comprenden solamente una porción de la imagen.
9. Procedimiento según la reivindicación 7, que
también comprende generar y visualizar un polígono gráfico que
abarca un objeto de interés, que está en el interior del marco de
una imagen o un área de interés (AOI) en dicha imagen.
10. Procedimiento según la reivindicación 9, que
también comprende generar y visualizar un trazo gráfico indica la
historia de un objeto de interés, que está en el marco de una imagen
o un AOI en dicha imagen.
11. Procedimiento según la reivindicación 1, 2 ó
3, en el que el flujo de imágenes se selecciona a partir de las
imágenes que comprenden flujos de vídeo, imágenes estáticas,
imágenes generadas por ordenador, y datos de vídeo digital o
analógico grabados previamente.
12. Procedimiento según la reivindicación 1, 2 ó
3, en el que los flujos de imágenes son flujos de vídeo,
comprimidos utilizando el formato MPEG.
13. Procedimiento según la reivindicación 3, en
el que durante cada modo, el dispositivo de adquisición de imágenes
utiliza una resolución y un índice de marcos diferentes.
14. Procedimiento según la reivindicación 1 ó 3,
en el que las características se seleccionan entre el grupo
siguiente:
- características de movimiento;
- color;
- porción de la imagen;
- datos del borde; y
- información relacionada con la frecuencia.
15. Procedimiento según la reivindicación 1, 2 ó
3, en el que dicho procesamiento de alto nivel realizado por el
servidor, comprende una o más de las siguientes operaciones y/o
cualquier combinación de las mismas:
- reconocimiento de placas de matrícula
(LPR);
- reconocimiento facial (FR);
- detección de violaciones de las reglas de
tráfico;
- reconocimiento de comportamiento;
- detección de incendios;
- detección de flujo de tráfico;
- detección de humo;
utilizando el flujo de características, recibido
desde por lo menos uno de los dispositivos adquisición de imágenes
a través de su canal de comunicación de datos.
16. Procedimiento para su uso en la realización
de detección de eventos y seguimiento de objetos en flujos de
imágenes que utilizan un sistema formado por una serie de
dispositivos de adquisición de imágenes, cada uno instalado en el
campo donde se detecta un evento y conectado a una estación central
a través de una red de datos, comprendiendo el procedimiento el
procesamiento de un formato digital de un flujo de imágenes, que
consiste en una o más imágenes, para detectar características, que
son parámetros relacionados con los atributos de los objetos que en
dicho flujo de imágenes, y, basados en estas características, que
realizan la detección de eventos y el seguimiento de objetos,
estando caracterizado el procedimiento por el hecho de
que:
Dicha estación central comprende un servidor de
procesamiento de imágenes preprogramado para funcionar con cada uno
de los dispositivos adquisición de imágenes sobre la base de la
distribución de algoritmos de procesamiento de imágenes entre el
dispositivo de adquisición de imágenes y el servidor, estando
programado el servidor para determinar de manera dinámica un valor
límite para cada característica que está asociada con los eventos
que se han de detectar y que se extraen mediante la pluralidad de
dispositivos adquisición de imágenes, para controlar un modo
operativo del dispositivo de adquisición de imágenes, y para
responder a un flujo de características, generado mediante un
dispositivo de adquisición de imágenes a partir de un flujo de
imágenes adquiridas, para procesar el flujo de características para
realizar la detección de eventos y el seguimiento de objetos en
dicho flujo de características indicativo de una imagen adquirida
mediante el dispositivo de adquisición de imágenes y para comunicar
los resultados de dicha detección de eventos y dicho seguimiento de
objetos a un operador.
17. Programa informático que comprende medios de
código de programa informático para realizar el procedimiento de la
reivindicación 1 o la reivindicación 16, cuando dicho programa
funciona en un ordenador.
18. Programa informático según la reivindicación
17 grabado en un medio que puede ser leído por un ordenador.
19. Sistema para su utilización en la
realización de detección de eventos y el seguimiento de objetos en
flujos de imágenes, comprendiendo el sistema unos dispositivos
adquisición de imágenes que se instalan en el campo donde se ha de
realizar la detección de eventos, estando configurados los
dispositivos de adquisición de imágenes para conectarse a una
estación central a través de una red de datos mediante un canal de
comunicación de datos correspondiente, estando caracterizado
el sistema por el hecho de que los dispositivos adquisición de
imágenes están preprogramados para funcionar con un servidor de
procesamiento de imágenes en dicha estación central sobre la base
de la distribución de algoritmos de procesamiento de imágenes entre
el dispositivo de adquisición de imágenes y el servidor,
comprendiendo el dispositivo de adquisición de imágenes un
procesador programable local para convertir un flujo de imágenes
adquiridas a un formato digital; y un extractor de características
para realizar un procesamiento de bajo nivel del formato digital del
flujo de imágenes adquiridas, comprendiendo dicha extracción de
características de bajo nivel el análisis de un marco y la
identificación de dicho marco como que contiene posiblemente un
evento y la generación de un flujo de características
correspondiente que corresponde a dicho marco y que transmite dicho
flujo de características al servidor de procesamiento de imágenes,
siempre que las características excedan un límite correspondiente
determinado de manera dinámica mediante el servidor de
procesamiento de imágenes; provocando la transmisión del flujo de
características desde el dispositivo de adquisición de imágenes que
dicho servidor de procesamiento de imágenes realice un procesamiento
de alto nivel adicional del flujo de características recibido para
realizar la detección de eventos y el seguimiento de objetos en el
flujo de características indicativo de dichos flujos de imágenes y
que transmite los resultados del mismo a un operador.
20. Sistema según la reivindicación 19, que
también comprende:
dicha red de datos, a la cual cada dispositivo
de adquisición de imágenes está conectado a través de un canal de
comunicación de datos correspondiente; y
dicho servidor de procesamiento de imágenes
conectado a dicha red de datos.
21. Sistema según la reivindicación 19 ó 20, en
el que el dispositivo de adquisición de imágenes también comprende
circuitos para comprimir el flujo de imágenes, siendo capaz dicho
dispositivo de adquisición de imágenes de funcionar en un primer
modo, durante el cual genera y transmite las características al
servidor, y en un segundo modo, durante el cual transmite a dicho
servidor, además de dichas características, por lo menos una porción
de dicho flujo de imágenes en un nivel de comprensión deseado según
los comandos enviados desde dicho servidor.
22. Sistema según la reivindicación 19 ó 20, que
también comprende una pantalla de operador, para recibir uno o más
flujos de imágenes que son decodificados por el servidor y que
contienen eventos.
23. Sistema según la reivindicación 21, que
también comprende un grabador de vídeo de red para grabar uno o más
flujos de imágenes, obtenidos mientras su dispositivo de adquisición
de imágenes asociado funciona en su primer modo.
24. Sistema según la reivindicación 19 ó 20, en
el cual el servidor es capaz de situar de manera dinámica recursos
de procesamiento de imágenes adicionales en los canales de
comunicación de datos que reciben los flujos de imágenes.
25. sistema según la reivindicación 21, en el
cual uno o más flujos de imágenes obtenidas mientras funciona el
dispositivo de adquisición de imágenes en el primer modo, comprende
solamente una porción de la imagen que corresponde a una área de
interés (AOI) deseada.
26. Sistema según la reivindicación 19 ó 20, en
el cual el servidor también comprende medios de procesamiento para
generar y visualizar un polígono gráfico que abarca un objeto de
interés, estando dentro del marco de una imagen o un área de
interés (AOI) en dicha imagen.
27. Sistema según la reivindicación 25, en el
cual el servidor también comprende medios de procesamiento para
generar y visualizar un trazo gráfico la historia del movimiento de
un objeto de interés, que está en el interior del marco de una
imagen o un área de interés (AOI) en dicha imagen.
28. Sistema según la reivindicación 19 ó 20, en
el cual el flujo de imágenes se selecciona entre el grupo de
imágenes que comprenden flujos de vídeo, imágenes estáticas,
imágenes generadas por ordenador, y restos de vídeo digital o
analógico pregrabados.
29. Sistema según la reivindicación 19 ó 20, en
el que los flujos de imágenes son flujos de vídeo, comprimidos
utilizando el formato MPEG.
30. Sistema según la reivindicación 21, en el
que durante cada modo, el dispositivo de adquisición de imágenes
utiliza una resolución y un índice de marcos diferentes.
31. Sistema según la reivindicación 19 ó 20, en
el que las características se seleccionan entre el grupo
siguiente:
- características de movimiento;
- color;
- porción de la imagen;
- datos del borde; y
- información relacionada con la frecuencia.
32. Procedimiento según la reivindicación 19 ó
20, en el que servidor comprende medios de procesamiento para
realizar una o más de las siguientes operaciones y/o cualquier
combinación de las mismas:
- reconocimiento de placas de matrícula
(LPR);
- reconocimiento facial (FR);
- detección de violaciones de las reglas de
tráfico;
- reconocimiento de comportamiento;
- detección de incendios;
- detección de flujo de tráfico;
- detección de humo;
utilizando el flujo de características, recibido
desde por lo menos uno de los dispositivos adquisición de imágenes
a través de su canal de comunicación de datos.
33. Programa informático que comprende medios de
código de programa informático, que cuando funciona en un
ordenador, funciona como el sistema de la reivindicación 19.
34. Programa informático según la reivindicación
33 grabado en un medio que puede ser leído por un ordenador.
35. Sistema para su utilización en la
realización de detección de eventos y seguimiento de objetos en
flujos de imágenes, comprendiendo el sistema un servidor de
procesamiento de imágenes configurado para conectarse a través de
una red de datos a una serie de dispositivos y adquisición de
imágenes, cada uno situado en un campo donde se ha de realizar la
detección de los eventos, y se caracteriza por el hecho de
que: el servidor de procesamiento de imágenes esta preprogramado
para funcionar con cada uno de los dispositivos de adquisición de
imágenes sobre la base de la distribución de algoritmos de
procesamiento de imágenes entre el dispositivo de adquisición de
imágenes y el servidor, estando programado el servidor de
procesamiento de imágenes para determinar un límite correspondiente
para cada característica que está asociada con un evento que se
detecta y se extrae mediante los dispositivos adquisición de
imágenes, para controlar un modo operativo del dispositivo de
adquisición de imágenes, y para responder a un flujo de
características, generado por el dispositivo de adquisición de
imágenes, para procesar el flujo de características para realizar la
detección de eventos y el seguimiento de objetos en dicho flujo de
características indicativo de una imagen adquirida mediante el
dispositivo de adquisición de imágenes y para comunicar los
resultados de dicha detección de eventos y dicho seguimiento de
objetos a un operador.
36. Programa informático que comprende medios de
código de un programa informático que, cuando funcionan un
ordenador, funciona como el servidor de procesamiento de imágenes de
la reivindicación 35.
37. Programa informático según la reivindicación
36 grabado en un medio que se puede leer con un ordenador.
38. Procedimiento según una cualquiera de las
reivindicaciones 1 al 15, en el que el mismo flujo de
características resultante de la extracción de características de
bajo nivel permite diferentes tipos de dicho procesamiento de alto
nivel mediante la aplicación de diferentes algoritmos al mismo flujo
de características.
39. Procedimiento según la reivindicación 16, en
el que dicho procesamiento de alto nivel comprende la aplicación
del mismo flujo de características resultante de los diferentes
algoritmos de la extracción de características de bajo nivel de
manera simultánea múltiples aplicaciones.
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US39420502P | 2002-07-05 | 2002-07-05 | |
| US394205P | 2002-07-05 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| ES2288610T3 true ES2288610T3 (es) | 2008-01-16 |
Family
ID=30115689
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| ES03735950T Expired - Lifetime ES2288610T3 (es) | 2002-07-05 | 2003-07-03 | Procesamiento y sistema para la deteccion eficaz de eventos en un gran numero de secuencias de imagenes simultaneas. |
Country Status (15)
| Country | Link |
|---|---|
| US (1) | US8004563B2 (es) |
| EP (1) | EP1459544B1 (es) |
| JP (1) | JP2006514757A (es) |
| KR (1) | KR20050082442A (es) |
| CN (1) | CN100348041C (es) |
| AT (1) | ATE364299T1 (es) |
| AU (1) | AU2003237579A1 (es) |
| BR (1) | BR0312458A (es) |
| CA (1) | CA2525690C (es) |
| DE (1) | DE60314223D1 (es) |
| ES (1) | ES2288610T3 (es) |
| HK (1) | HK1082578A1 (es) |
| IL (1) | IL162879A0 (es) |
| RU (1) | RU2005102819A (es) |
| WO (1) | WO2004006184A2 (es) |
Families Citing this family (77)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8564661B2 (en) | 2000-10-24 | 2013-10-22 | Objectvideo, Inc. | Video analytic rule detection system and method |
| US8711217B2 (en) | 2000-10-24 | 2014-04-29 | Objectvideo, Inc. | Video surveillance system employing video primitives |
| US20050146605A1 (en) | 2000-10-24 | 2005-07-07 | Lipton Alan J. | Video surveillance system employing video primitives |
| US7868912B2 (en) * | 2000-10-24 | 2011-01-11 | Objectvideo, Inc. | Video surveillance system employing video primitives |
| US9892606B2 (en) | 2001-11-15 | 2018-02-13 | Avigilon Fortress Corporation | Video surveillance system employing video primitives |
| US7424175B2 (en) | 2001-03-23 | 2008-09-09 | Objectvideo, Inc. | Video segmentation using statistical pixel modeling |
| US7577199B1 (en) * | 2003-06-19 | 2009-08-18 | Nvidia Corporation | Apparatus and method for performing surveillance using motion vectors |
| US20070274687A1 (en) * | 2004-03-01 | 2007-11-29 | Koninklijke Philips Electronics, N.V. | Video Signal Encoder, A Video Signal Processor, A Video Signal Distribution System And Methods Of Operation Therefor |
| JP4584674B2 (ja) * | 2004-10-29 | 2010-11-24 | 富士通株式会社 | 画像センサ装置および画像センサシステム |
| JP2006129152A (ja) * | 2004-10-29 | 2006-05-18 | Konica Minolta Holdings Inc | 撮像装置および画像配信システム |
| WO2006049501A2 (en) * | 2004-11-01 | 2006-05-11 | Ultrawaves Design Holding B.V. | Flexible surveillance network system |
| WO2007044044A2 (en) * | 2004-12-21 | 2007-04-19 | Sarnoff Corporation | Method and apparatus for tracking objects over a wide area using a network of stereo sensors |
| EP1834486A1 (en) * | 2004-12-24 | 2007-09-19 | Ultrawaves design holding B. V. | Intelligent distributed image processing |
| JP4449782B2 (ja) * | 2005-02-25 | 2010-04-14 | ソニー株式会社 | 撮像装置および画像配信方法 |
| WO2006109162A2 (en) * | 2005-04-15 | 2006-10-19 | Emitall Surveillance S.A. | Distributed smart video surveillance system |
| US20060244837A1 (en) * | 2005-04-28 | 2006-11-02 | Lucas Ekeroth | Thermal imaging device |
| WO2007022011A2 (en) * | 2005-08-12 | 2007-02-22 | Core Memory Circuits Llc | System and process for capturing processing, compressing, and displaying image information |
| JP2007228337A (ja) * | 2006-02-24 | 2007-09-06 | Olympus Corp | 画像撮影装置 |
| EP2013817A2 (en) | 2006-04-17 | 2009-01-14 | Objectvideo, Inc. | Video segmentation using statistical pixel modeling |
| JP2007334623A (ja) * | 2006-06-15 | 2007-12-27 | Toshiba Corp | 顔認証装置、顔認証方法、および入退場管理装置 |
| CA2656446A1 (en) * | 2006-06-30 | 2008-01-03 | Ultrawaves Design Holding B.V. | Surveillance method and system using object based rule checking |
| WO2008038288A2 (en) * | 2006-09-28 | 2008-04-03 | Soniclynx Ltd. | System and method for reducing power consumption in a detection system |
| US8218821B2 (en) | 2007-01-23 | 2012-07-10 | Pips Technology, Inc. | Video preprocessing of image information for character recognition |
| US8218822B2 (en) | 2007-05-14 | 2012-07-10 | Pips Technology, Inc. | Apparatus and method for recognizing the state of origin of a vehicle license plate |
| WO2008149925A1 (ja) * | 2007-06-08 | 2008-12-11 | Nikon Corporation | 撮像装置、画像表示装置、プログラム |
| US8013738B2 (en) | 2007-10-04 | 2011-09-06 | Kd Secure, Llc | Hierarchical storage manager (HSM) for intelligent storage of large volumes of data |
| WO2009045218A1 (en) | 2007-10-04 | 2009-04-09 | Donovan John J | A video surveillance, storage, and alerting system having network management, hierarchical data storage, video tip processing, and vehicle plate analysis |
| US8275647B2 (en) | 2007-12-27 | 2012-09-25 | Genesys Telecommunications Laboratories, Inc. | Method for assembling a business process and for orchestrating the process based on process beneficiary information |
| US9241094B2 (en) * | 2008-03-18 | 2016-01-19 | Intel Corporation | Capturing event information using a digital video camera |
| US9251423B2 (en) | 2008-03-21 | 2016-02-02 | Intel Corporation | Estimating motion of an event captured using a digital video camera |
| US9256789B2 (en) | 2008-03-21 | 2016-02-09 | Intel Corporation | Estimating motion of an event captured using a digital video camera |
| US9019381B2 (en) * | 2008-05-09 | 2015-04-28 | Intuvision Inc. | Video tracking systems and methods employing cognitive vision |
| EP2230629A3 (en) * | 2008-07-16 | 2012-11-21 | Verint Systems Inc. | A system and method for capturing, storing, analyzing and displaying data relating to the movements of objects |
| CN101436348B (zh) * | 2008-12-22 | 2014-04-23 | 北京中星微电子有限公司 | 电子警察系统以及应用于电子警察系统的信息识别方法 |
| US20100246890A1 (en) * | 2009-03-26 | 2010-09-30 | Microsoft Corporation | Detection of objects in images |
| CN101909148A (zh) * | 2009-06-05 | 2010-12-08 | 鸿富锦精密工业（深圳）有限公司 | 摄影机 |
| EP2452489B1 (en) * | 2009-07-08 | 2020-06-17 | Honeywell International Inc. | Systems and methods for managing video data |
| US8558862B2 (en) * | 2009-09-28 | 2013-10-15 | Lifesize Communications, Inc. | Videoconferencing using a precoded bitstream |
| US8866901B2 (en) * | 2010-01-15 | 2014-10-21 | Honda Elesys Co., Ltd. | Motion calculation device and motion calculation method |
| US9183560B2 (en) | 2010-05-28 | 2015-11-10 | Daniel H. Abelow | Reality alternate |
| US8976856B2 (en) * | 2010-09-30 | 2015-03-10 | Apple Inc. | Optimized deblocking filters |
| TW201222430A (en) * | 2010-11-25 | 2012-06-01 | Hon Hai Prec Ind Co Ltd | Method for detecting objects and a corresponding control computer |
| US9615064B2 (en) * | 2010-12-30 | 2017-04-04 | Pelco, Inc. | Tracking moving objects using a camera network |
| IL210427A0 (en) * | 2011-01-02 | 2011-06-30 | Agent Video Intelligence Ltd | Calibration device and method for use in a surveillance system for event detection |
| JP5769468B2 (ja) * | 2011-03-30 | 2015-08-26 | キヤノン株式会社 | 物体検出システム及び物体検出方法 |
| US9134714B2 (en) * | 2011-05-16 | 2015-09-15 | Osram Sylvania Inc. | Systems and methods for display of controls and related data within a structure |
| US9031948B1 (en) * | 2011-07-06 | 2015-05-12 | Shawn B. Smith | Vehicle prediction and association tool based on license plate recognition |
| US8768009B1 (en) | 2011-07-26 | 2014-07-01 | Shawn B. Smith | Locating persons of interest based on license plate recognition information |
| US20130057693A1 (en) * | 2011-09-02 | 2013-03-07 | John Baranek | Intruder imaging and identification system |
| EP3176729A1 (en) * | 2011-09-06 | 2017-06-07 | Intel Corporation | Analytics assisted encoding |
| US10769913B2 (en) * | 2011-12-22 | 2020-09-08 | Pelco, Inc. | Cloud-based video surveillance management system |
| JP2013200706A (ja) * | 2012-03-26 | 2013-10-03 | Hitachi Information & Telecommunication Engineering Ltd | 入退連動システム |
| US9254363B2 (en) | 2012-07-17 | 2016-02-09 | Elwha Llc | Unmanned device interaction methods and systems |
| US20140025233A1 (en) | 2012-07-17 | 2014-01-23 | Elwha Llc | Unmanned device utilization methods and systems |
| CN103576848B (zh) * | 2012-08-09 | 2016-07-13 | 腾讯科技（深圳）有限公司 | 手势操作方法和手势操作装置 |
| WO2014061181A1 (ja) | 2012-10-18 | 2014-04-24 | 日本電気株式会社 | カメラシステム |
| EP2995079A4 (en) * | 2013-05-10 | 2017-08-23 | Robert Bosch GmbH | System and method for object and event identification using multiple cameras |
| CN104346895A (zh) * | 2013-08-02 | 2015-02-11 | 北京市劳动保护科学研究所 | 安全预警系统 |
| US10104394B2 (en) | 2014-01-31 | 2018-10-16 | Here Global B.V. | Detection of motion activity saliency in a video sequence |
| WO2015198299A1 (en) | 2014-06-26 | 2015-12-30 | Agent Video Intelligence Ltd. | System and method for management of data transmission in a communication network |
| US10803143B2 (en) * | 2015-07-30 | 2020-10-13 | Siemens Healthcare Gmbh | Virtual biopsy techniques for analyzing diseases |
| CN105635678A (zh) * | 2015-12-30 | 2016-06-01 | 成都移动魔方科技有限公司 | 一种快速安全监控数据处理方法 |
| CN105554464A (zh) * | 2015-12-30 | 2016-05-04 | 成都移动魔方科技有限公司 | 一种企业智能监控方法 |
| CN105611251A (zh) * | 2015-12-30 | 2016-05-25 | 成都移动魔方科技有限公司 | 一种实时安全监控方法 |
| JP6583688B2 (ja) * | 2016-05-27 | 2019-10-02 | 三井金属アクト株式会社 | 画像情報認証システム |
| ITUA20164102A1 (it) * | 2016-06-14 | 2017-12-14 | Stefano Nasti | Procedimento e apparecchiatura per la produzione, gestione ed archiviazione di sequenze di immagini ad alta risoluzione a bassa occupazione di risorse di rete |
| US9916493B2 (en) | 2016-08-03 | 2018-03-13 | At&T Intellectual Property I, L.P. | Method and system for aggregating video content |
| EP3340105A1 (en) * | 2016-12-21 | 2018-06-27 | Axis AB | Method for and apparatus for detecting events |
| US10509788B2 (en) * | 2016-12-30 | 2019-12-17 | Dev Gupta | Systems and methods for lossy data compression using key artifacts and dynamically generated cycles |
| US10691950B2 (en) * | 2017-03-10 | 2020-06-23 | Turing Video, Inc. | Activity recognition method and system |
| CN106997461B (zh) | 2017-03-28 | 2019-09-17 | 浙江大华技术股份有限公司 | 一种烟火检测方法及装置 |
| JP6878091B2 (ja) * | 2017-03-31 | 2021-05-26 | キヤノン株式会社 | 画像処理装置、画像処理方法、及びプログラム |
| US11475671B2 (en) | 2017-05-26 | 2022-10-18 | Turing Video | Multiple robots assisted surveillance system |
| US11501519B2 (en) | 2017-12-13 | 2022-11-15 | Ubiqisense Aps | Vision system for object detection, recognition, classification and tracking and the method thereof |
| US10599947B2 (en) | 2018-03-09 | 2020-03-24 | Ricoh Co., Ltd. | On-demand visual analysis focalized on salient events |
| US10733451B2 (en) | 2018-05-10 | 2020-08-04 | Avigilon Corporation | Automatic license plate recognition system and method therefor |
| CN110087099B (zh) * | 2019-03-11 | 2020-08-07 | 北京大学 | 一种保护隐私的监控方法和系统 |
Family Cites Families (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| DE3842356A1 (de) * | 1988-12-16 | 1990-06-28 | Martin Spies | System zum feststellen einer bewegung bzw. einer veraenderung im ueberwachungsbereich mehrerer fernsehkameras |
| JPH09130783A (ja) * | 1995-10-31 | 1997-05-16 | Matsushita Electric Ind Co Ltd | 分散映像監視装置 |
| US6384862B1 (en) * | 1997-03-12 | 2002-05-07 | Telefoaktiebolaget L M Ericsson | Imaging system and method for interactive control of image quality |
| CN1156171C (zh) * | 1997-04-07 | 2004-06-30 | 松下电器产业株式会社 | 提高处理效率的图象声音处理装置 |
| US6760061B1 (en) * | 1997-04-14 | 2004-07-06 | Nestor Traffic Systems, Inc. | Traffic sensor |
| US6130707A (en) * | 1997-04-14 | 2000-10-10 | Philips Electronics N.A. Corp. | Video motion detector with global insensitivity |
| US6069655A (en) * | 1997-08-01 | 2000-05-30 | Wells Fargo Alarm Services, Inc. | Advanced video security system |
| US6188381B1 (en) * | 1997-09-08 | 2001-02-13 | Sarnoff Corporation | Modular parallel-pipelined vision system for real-time video processing |
| US6064303A (en) * | 1997-11-25 | 2000-05-16 | Micron Electronics, Inc. | Personal computer-based home security system |
| US6546119B2 (en) | 1998-02-24 | 2003-04-08 | Redflex Traffic Systems | Automated traffic violation monitoring and reporting system |
| US6266369B1 (en) * | 1998-06-09 | 2001-07-24 | Worldgate Service, Inc. | MPEG encoding technique for encoding web pages |
| US6493041B1 (en) * | 1998-06-30 | 2002-12-10 | Sun Microsystems, Inc. | Method and apparatus for the detection of motion in video |
| JP2002535894A (ja) * | 1999-01-12 | 2002-10-22 | コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ | カメラ動きパラメータを推定する方法 |
| JP2000295600A (ja) * | 1999-04-08 | 2000-10-20 | Toshiba Corp | 監視装置 |
| JP2001045465A (ja) * | 1999-07-29 | 2001-02-16 | Nec Eng Ltd | 遠隔監視方式 |
| EP1107609A1 (en) | 1999-12-02 | 2001-06-13 | STMicroelectronics S.r.l. | Method of processing motion vectors histograms to detect interleaved or progressive picture structures |
| JP2003533906A (ja) | 2000-02-24 | 2003-11-11 | サーノフ コーポレイション | 圧縮ビデオ解析 |
| US6646676B1 (en) * | 2000-05-17 | 2003-11-11 | Mitsubishi Electric Research Laboratories, Inc. | Networked surveillance and control system |
| US20050146605A1 (en) * | 2000-10-24 | 2005-07-07 | Lipton Alan J. | Video surveillance system employing video primitives |
| FR2816427B1 (fr) | 2000-11-03 | 2003-10-24 | France Telecom | Dispositif et procede de controle d'acces par traitement d'image |
| US7219364B2 (en) * | 2000-11-22 | 2007-05-15 | International Business Machines Corporation | System and method for selectable semantic codec pairs for very low data-rate video transmission |
| JP2003087772A (ja) * | 2001-09-10 | 2003-03-20 | Fujitsu Ltd | 画像制御装置 |
-
2003
- 2003-07-03 DE DE60314223T patent/DE60314223D1/de not_active Expired - Lifetime
- 2003-07-03 EP EP03735950A patent/EP1459544B1/en not_active Expired - Lifetime
- 2003-07-03 JP JP2004519140A patent/JP2006514757A/ja active Pending
- 2003-07-03 RU RU2005102819/09A patent/RU2005102819A/ru not_active Application Discontinuation
- 2003-07-03 KR KR1020057000175A patent/KR20050082442A/ko not_active Application Discontinuation
- 2003-07-03 AT AT03735950T patent/ATE364299T1/de not_active IP Right Cessation
- 2003-07-03 WO PCT/IL2003/000555 patent/WO2004006184A2/en active IP Right Grant
- 2003-07-03 IL IL16287903A patent/IL162879A0/xx unknown
- 2003-07-03 ES ES03735950T patent/ES2288610T3/es not_active Expired - Lifetime
- 2003-07-03 AU AU2003237579A patent/AU2003237579A1/en not_active Abandoned
- 2003-07-03 BR BR0312458-4A patent/BR0312458A/pt not_active IP Right Cessation
- 2003-07-03 CN CNB038158248A patent/CN100348041C/zh not_active Expired - Fee Related
- 2003-07-03 US US10/501,949 patent/US8004563B2/en active Active
- 2003-07-03 CA CA2525690A patent/CA2525690C/en not_active Expired - Lifetime
-
2006
- 2006-03-03 HK HK06102807A patent/HK1082578A1/xx not_active IP Right Cessation
Also Published As
| Publication number | Publication date |
|---|---|
| WO2004006184A3 (en) | 2004-03-18 |
| RU2005102819A (ru) | 2005-08-20 |
| BR0312458A (pt) | 2005-04-19 |
| EP1459544A2 (en) | 2004-09-22 |
| CA2525690C (en) | 2014-12-02 |
| CN100348041C (zh) | 2007-11-07 |
| DE60314223D1 (de) | 2007-07-19 |
| ATE364299T1 (de) | 2007-06-15 |
| AU2003237579A1 (en) | 2004-01-23 |
| US8004563B2 (en) | 2011-08-23 |
| US20050036659A1 (en) | 2005-02-17 |
| HK1082578A1 (en) | 2006-06-09 |
| KR20050082442A (ko) | 2005-08-23 |
| JP2006514757A (ja) | 2006-05-11 |
| CN1666528A (zh) | 2005-09-07 |
| CA2525690A1 (en) | 2004-01-15 |
| EP1459544B1 (en) | 2007-06-06 |
| WO2004006184A2 (en) | 2004-01-15 |
| IL162879A0 (en) | 2005-11-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| ES2288610T3 (es) | Procesamiento y sistema para la deteccion eficaz de eventos en un gran numero de secuencias de imagenes simultaneas. | |
| US11875665B2 (en) | Augmented reality of a building | |
| US20070268367A1 (en) | Video Surveillance With Satellite Communication Access | |
| US20040143602A1 (en) | Apparatus, system and method for automated and adaptive digital image/video surveillance for events and configurations using a rich multimedia relational database | |
| US10248870B2 (en) | Traffic-counting system and method thereof | |
| KR20220000172A (ko) | 엣지 컴퓨팅 기반 보안 감시 서비스 제공 장치, 시스템 및 그 동작 방법 | |
| KR102108547B1 (ko) | 지하철 역사에서 nvr 백업 및 복구 시스템 및 방법 | |
| WO2019099321A1 (en) | Collaborative media collection analysis | |
| US11470285B2 (en) | Method and system for monitoring portal to detect entry and exit | |
| KR20220000216A (ko) | 딥러닝 분산 처리 기반 지능형 보안 감시 서비스 제공 장치 | |
| KR102397839B1 (ko) | Ａｉ 영상 자율 센서의 영상 분석 기반 캡션 센서 장치 및 그 동작 방법 | |
| KR20220064213A (ko) | 보안 감시 장치의 동작 프로그램 | |
| CN112839198A (zh) | 一种基于大数据处理的景区安防监控方法及监控系统 | |
| KR20220031258A (ko) | 상담 이벤트에 대응되는 학습 데이터 기반 능동형 보안관제 서비스 제공 방법 | |
| KR20190106436A (ko) | 대심도(大深度) 복층터널 영상 유고(有故) 감지를 위한 시스템 및 그 방법 | |
| Ilić | The Integration of Artificial Intelligence and Computer Vision in Large-Scale Video Surveillance of Railway Stations | |
| KR20220064482A (ko) | 보안 감시 챗봇 서비스 제공 프로그램 | |
| KR20220064471A (ko) | 캡션 데이터 기반 보안 감시 서비스 제공 프로그램 | |
| KR20220064214A (ko) | 보안 감시 장치의 동작 프로그램 기록매체 | |
| KR20220064472A (ko) | 캡션 데이터 기반 보안 감시 서비스 제공 프로그램 기록매체 | |
| KR20200093476A (ko) | 지하철 역사의 셔터 제어시 cctv 카메라와 경광등과 스피커 연동 시스템 및 방법 | |
| KR20220064483A (ko) | 보안 감시 챗봇 서비스 프로그램 기록매체 | |
| KR20220064476A (ko) | Ａｉ영상자율센서에 기반한 영상분석 보안 감시 챗봇 서비스 제공방법 | |
| KR20220064203A (ko) | 로컬 감시 네트워크 보안 감시 장치의 동작 방법 | |
| KR20220064215A (ko) | 캡션 데이터 기반 보안 감시 서비스 제공 방법 |