RU2265531C2 - System to provided safety and monitoring of mobile objects - Google Patents

System to provided safety and monitoring of mobile objects Download PDF

Info

Publication number
RU2265531C2
RU2265531C2 RU2003124372/11A RU2003124372A RU2265531C2 RU 2265531 C2 RU2265531 C2 RU 2265531C2 RU 2003124372/11 A RU2003124372/11 A RU 2003124372/11A RU 2003124372 A RU2003124372 A RU 2003124372A RU 2265531 C2 RU2265531 C2 RU 2265531C2
Authority
RU
Russia
Prior art keywords
target
signal
video camera
mobile
video
Prior art date
Application number
RU2003124372/11A
Other languages
Russian (ru)
Other versions
RU2003124372A (en
Inventor
С.Т. Иванченко (RU)
С.Т. Иванченко
Иль Александрович Канн (US)
Илья Александрович Канн
К.В. Лунин (RU)
К.В. Лунин
А.С. Малистов (RU)
А.С. Малистов
Я.Я. Петричкович (RU)
Я.Я. Петричкович
А.А. Солохин (RU)
А.А. Солохин
В.П. Сомиков (RU)
В.П. Сомиков
А.В. Хамухин (RU)
А.В. Хамухин
Original Assignee
Закрытое акционерное общество "ЭЛВИИС"
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Закрытое акционерное общество "ЭЛВИИС" filed Critical Закрытое акционерное общество "ЭЛВИИС"
Priority to RU2003124372/11A priority Critical patent/RU2265531C2/en
Publication of RU2003124372A publication Critical patent/RU2003124372A/en
Application granted granted Critical
Publication of RU2265531C2 publication Critical patent/RU2265531C2/en

Links

Images

Landscapes

  • Alarm Systems (AREA)

Abstract

FIELD: transport engineering; automatic security devices.
SUBSTANCE: proposed system contains video camera adapted for getting video signal of target, computer with memory and signal receive/transmit device, all connected by local data processing network. Transponder is provided made for storing and transmitting own individual identification signal corresponding to mobile object or its owner to receive/transmit device. Signal receive/transmit device is made for receiving said identification signal. Moreover, system includes target identification device, data base, movable video camera and observation terminal. Target identification device is connected through hardware-software interface with said video camera and signal receive/transmit device. Data base is implemented on computer with memory with prerecorded descriptions of individual parameters of mobile objects to be monitored, identification signals corresponding to mobile objects to be monitored and description of alarm situations. Movable video camera is made for aimed at target depending of control signal received from target identification device. Observation terminal is adapted for information of operator and for reception of control commands from operator. Data base is made accessible from movable video camera and from target identification device with possibility of recording new information received from movable video camera. Target identification device is made for analyzing the signals received from video camera adapted for getting video signal of target and from signal receive/transmit device and, basing of received information, recognition of alarm situation, determination of target according to preset algorithm with use of data stored in base and transmitting corresponding control signal to movable video camera for guidance on target and alarm signal to observation terminal. Movable video camera is made for getting video signal with image of target suitable for further analysis and transmitting of said video signal for storing in data base.
EFFECT: provision of effective automatic monitoring of mobile objects on territory covered by security devices under any weather conditions and all day round.
12 cl, 2 dwg

Description

Область техникиTechnical field

Настоящее изобретение относится к области технических систем обеспечения безопасности и мониторинга и более точно касается системы обеспечения безопасности и мониторинга мобильных объектов.The present invention relates to the field of technical security systems and monitoring, and more specifically relates to a security system and monitoring of mobile objects.

Уровень техникиState of the art

Из уровня техники известны автоматизированные (аппаратно-программные) системы и способы обеспечения безопасности и мониторинга. Наиболее часто такие системы используются для обеспечения безопасности определенной охраняемой территории, мониторинга окружающей среды и контроля движения мобильных объектов, в частности транспортных средств. Известны автоматизированные (аппаратно-программные) системы контроля автотранспортных средств, основанные на принципах распознавания образов, которые содержат видеокамеры, компьютеры идентификации автотранспортного средства, каждый из которых соединен с соответствующей видеокамерой, и сервер для управления и поиска автотранспортного средства в базе данных, связанный с указанными компьютерами посредством локальной вычислительной сети.The prior art automated (hardware-software) systems and methods for ensuring security and monitoring are known. Most often, such systems are used to ensure the security of a certain protected area, to monitor the environment and control the movement of mobile objects, in particular vehicles. Automated (hardware-software) systems for monitoring vehicles are known, based on the principles of pattern recognition that contain video cameras, vehicle identification computers, each of which is connected to a corresponding video camera, and a server for managing and searching a vehicle in a database associated with these computers through a local area network.

Известна из патента РФ 2137203 система контроля за движением автотранспортных средств, которая включает передвижной контрольный пункт, множество стационарных зон контроля, каждая из которых представляет собой условный прямоугольник, охватывающий определенный локальный участок дороги, коммутационные устройства, установленные около дороги на заданном расстоянии от указанного прямоугольника. В каждой зоне контроля установлены видеокамеры, светильники, разделитель полос и направлений движения. Система также содержит аппаратно-программный комплекс, установленный на передвижном контрольном пункте. Комплекс включает компьютеры идентификации транспортного средства, с которыми посредством коммутационных устройств соединяются на определенное время видеокамеры, сервер для управления и поиска транспортных средств в базе данных, локальную вычислительную сеть, систему видеонаблюдения, соединяемую с видеокамерой через коммутационное устройство, систему телефонной связи, систему телекоммуникационной связи. Данная система позволяет с определенной погрешностью выявлять отдельные мобильные объекты поиска в контролируемых зонах и регистрировать их. Ограничениями данной системы являются ограниченность контролируемых зон (камеры установлены неподвижно и имеют ограниченный угол обзора), статичность камер. Кроме того, данная система не предусматривает возможности высокоточного автоматизированного распознавания ситуации в зоне контроля. Отсутствует дублирование работы отдельных элементов системы, поэтому точность распознавания ограничена. Отсутствует возможность сохранения в памяти системы изображения повышенной четкости для последующего анализа.The system for monitoring the movement of vehicles, which includes a mobile checkpoint, many stationary control zones, each of which is a conditional rectangle covering a certain local section of the road, switching devices installed near the road at a given distance from the specified rectangle, is known from RF patent 2137203. In each control zone, video cameras, lamps, a separator of lanes and directions of movement are installed. The system also contains a hardware-software complex installed at a mobile checkpoint. The complex includes vehicle identification computers with which video cameras are connected through switching devices for a certain time, a server for controlling and searching vehicles in the database, a local area network, a video surveillance system connected to the video camera through a switching device, a telephone communication system, and a telecommunication system . This system allows with a certain error to identify individual mobile search objects in controlled areas and register them. The limitations of this system are the limited control zones (cameras are fixed and have a limited viewing angle), and the cameras are static. In addition, this system does not provide for the possibility of high-precision automated recognition of the situation in the control zone. There is no duplication of the work of individual elements of the system, so the recognition accuracy is limited. There is no way to save high-definition images in the system memory for subsequent analysis.

Известна из патента РФ 2196358 система сигнализации и управления транспортным парком, контроля за состоянием подвижных объектов и их перемещением в реальном масштабе времени, охраны стационарных и мобильных объектов, а также мониторинга окружающей среды. Система содержит выполненные с возможностью связи диспетчерский центр и аппаратуру потребителя, содержащую бортовой компьютер, интерфейс, процессор, аналого-цифровой преобразователь видеосигналов, запоминающее устройство, цифроаналоговый преобразователь аудиосигналов, преобразователь видеосигналов, группу охранных датчиков, клавиатуру, модем, телекамеру видеоконтроля, аудиосистему, телемонитор, блок автономного питания. Диспетчерский пункт включает компьютер дифференциальной коррекции координат наблюдаемых объектов, сервер контроля охраняемых объектов, компьютеры средств связи, компьютерную сеть, модемы, трансиверы с антеннами, блок питания, задающие генераторы, звуковой сигнализатор, исполнительный блок дверей, сигнальные габаритные лампы. Данная система позволяет контролировать охраняемую территорию за счет получения и обработки сигнала с датчиков и видеокамеры. Возможно дублирование работы датчиков и видеокамеры для повышения точности распознавания. Не предусмотрено сохранение и анализ изображений охраняемых объектов повышенной точности.The system for signaling and controlling a fleet of vehicles, monitoring the status of moving objects and their movement in real time, protecting stationary and mobile objects, and also monitoring the environment is known from RF patent 2196358. The system comprises a communication center and consumer equipment, comprising an on-board computer, an interface, a processor, an analog-to-digital video signal converter, a storage device, a digital-to-analog audio signal converter, a video signal converter, a group of security sensors, a keyboard, a modem, a video monitoring camera, an audio system, a television monitor , autonomous power supply unit. The control room includes a computer for differential correction of the coordinates of the observed objects, a server for monitoring protected objects, communication equipment computers, a computer network, modems, transceivers with antennas, a power supply unit, oscillators, an audio signaling device, an executive door unit, and marker lamps. This system allows you to control the protected area by receiving and processing a signal from sensors and video cameras. It is possible to duplicate the operation of sensors and video cameras to increase recognition accuracy. The preservation and analysis of images of protected objects of high accuracy is not provided.

Известна из патента РФ 21222239 система контроля за состоянием подвижных объектов и их перемещением. Система содержит диспетчерский центр и аппаратуру потребителя, включающую навигационный приемник с антенной, трансивер с антенной, клавиатуру и модем, связанный с трансивером, телекамеру видеоконтроля, аудиосистему и телемонитор, в систему входит бортовой компьютер, связанный с процессором, аналого-цифровым преобразователем видеосигналов, цифроаналоговыми преобразователями аудиосигналов и видеосигналов, запоминающее устройство, телекамеру видеоконтроля и телемонитор. К интерфейсу бортового компьютера подключены также охранные датчики. Диспетчерский центр связан с аппаратурой потребителя через антенну трансивера посредством радиоканала. Питающие входы навигационного приемника, модема, трансивера, бортового компьютера, телекамеры видеоконтроля, телемонитора и охранных датчиков подключены к блоку автономного питания. Данная система позволяет контролировать мобильные объекты, ее схемное выполнение позволяет оперативно перепрограммировать и изменять порядок функционирования блоков и всей системы в зависимости от выполняемых ею функций. Система имеет сложную конфигурацию, что обуславливает достаточно высокую стоимость и эксплуатационные расходы. Не предусмотрено сохранение и анализ изображений охраняемых объектов повышенной точности.Known from the patent of the Russian Federation 21222239, a system for monitoring the state of moving objects and their movement. The system contains a dispatch center and consumer equipment, including a navigation receiver with an antenna, a transceiver with an antenna, a keyboard and a modem connected to a transceiver, a video control camera, an audio system and a television monitor, the system includes an on-board computer connected to a processor, an analog-to-digital video signal converter, and digital-to-analogue converters of audio and video signals, a storage device, a video monitoring camera and a television monitor. Security sensors are also connected to the on-board computer interface. The dispatch center is connected to consumer equipment through the antenna of the transceiver via a radio channel. The power inputs of the navigation receiver, modem, transceiver, on-board computer, video monitoring camera, television monitor and security sensors are connected to an autonomous power supply unit. This system allows you to control mobile objects, its circuit design allows you to quickly reprogram and change the functioning of the blocks and the entire system depending on the functions performed by it. The system has a complex configuration, which leads to a fairly high cost and operating costs. The preservation and analysis of images of protected objects of high accuracy is not provided.

Известна система по патенту США 5504482, которая содержит диспетчерский центр и аппаратуру потребителя, включающую навигационный приемник с антенной, трансивер с антенной, видеокамеру контроля, аудиосистему и телемонитор, в систему входит бортовой компьютер. Система также имеет достаточно сложную конфигурацию и не позволяет получать, хранить и анализировать изображения повышенной точности.A known system according to US patent 5504482, which contains a dispatch center and consumer equipment, including a navigation receiver with an antenna, a transceiver with an antenna, a control camera, an audio system and a television monitor, includes an on-board computer. The system also has a rather complicated configuration and does not allow receiving, storing and analyzing images of high accuracy.

Наиболее близкой к заявленному техническому решению является известная из патента РФ 2175920 система безопасности, навигации и мониторинга транспортных средств, содержащая аппаратуру потребителя, включающую в себя навигационный приемник с антенной, работающий по сигналам спутниковых радионавигационных систем и обеспечивающий, в том числе, геодезическую точность определения координат объектов, трансивер с антенной, реализующий сотовую, транкинговую либо спутниковую радиосвязь с диспетчерским центром, выполненным с возможностями дифференциальной коррекции координат контролируемых объектов и отображения их местоположения и идентификационных параметров на электронной карте-схеме местности, бортовой компьютер, содержащий интерфейс, процессор, запоминающее устройство, аналого-цифровой преобразователь и два цифроаналоговых преобразователя, выходы которых подключены соответственно к входу аудиосистемы и к первому входу телемонитора, второй вход которого подключен к первому выходу телекамеры видеоконтроля, второй выход которой соединен через аналого-цифровой преобразователь с соответствующим входом интерфейса, один из выходов которого связан с управляющим входом навигационного приемника, выход которого подключен к одному из входов интерфейса, а также набор охранных датчиков, в качестве которых используются да тчики несанкционированного воздействия на охраняемый объект, датчики контроля параметров окружающей среды и технических параметров охраняемого объекта, модем, реализующий в зависимости от типа используемой радиосвязи протоколы обмена данными сотовой, транкинговой либо спутниковой сетей связи, первый вход которого соединен с одним из выходов интерфейса, а первый выход - с входом трансивера, второй вход модема связан с соответствующим выходом интерфейса, а второй выход - с входом трансивера, а также блок ручного ввода данных, выход которого связан с соответствующим входом интерфейса, один из выходов которого связан с процессором, а другой выход - с запоминающим устройством, при этом выходы процессора и запоминающего устройства подключены к соответствующим входам интерфейса, отличающаяся тем, что в состав аппаратуры потребителя введены дополнительно абонентский приемник, входящий в состав пейджинговой сети связи общего пользования, транспондерная карточка, блок дистанционного считывания с антенной, выполненный с возможностью считывания идентификационного кода, зафиксированного в цифровой памяти транспондерной карточки, на поверхности которой нанесены защищенные специальным покрытием одноразового применения, например краской, секретные коды, становящиеся визуально доступными только при стирании защитного покрытия, а также индикатор режима работы охранных датчиков, первый вход которого связан с первым выходом блока дистанционного считывания, и узел блокирования функциональных органов охраняемого объекта, при этом входящий в состав бортового компьютера интерфейс выполнен с двумя дополнительными входами и с двумя дополнительными выходами, первый дополнительный выход интерфейса соединен с входом узла блокирования функциональных органов охраняемого объекта, второй дополнительный выход интерфейса подключен ко второму входу индикатора режима работы охранных датчиков, первый дополнительный вход интерфейса соединен со вторым выходом блока дистанционного считывания, а второй дополнительный вход - с выходом абонентского приемника, вход которого соединен по радиоэфиру с операторским блоком передачи данных, входящим в состав пейджинговой сети связи общего пользования.Closest to the claimed technical solution is the vehicle safety, navigation and monitoring system known from RF patent 2175920, which contains consumer equipment, including a navigation receiver with an antenna, operating on the basis of satellite radio navigation systems and providing, inter alia, geodetic accuracy of determining coordinates facilities, a transceiver with an antenna that implements cellular, trunking or satellite radio communications with a control center made with diffe potential correction of coordinates of controlled objects and display of their location and identification parameters on an electronic map-scheme of the area, an on-board computer containing an interface, a processor, a storage device, an analog-to-digital converter and two digital-to-analog converters, the outputs of which are connected respectively to the input of the audio system and to the first input a television monitor, the second input of which is connected to the first output of the video control camera, the second output of which is connected through an analog-to-digital converter An indicator with a corresponding interface input, one of whose outputs is connected to the control input of the navigation receiver, the output of which is connected to one of the interface inputs, as well as a set of security sensors, which are used as sensors of unauthorized influence on the protected object, sensors for monitoring environmental parameters and technical parameters of the protected facility, a modem that implements cellular, trunking or satellite data exchange protocols depending on the type of radio used communication, the first input of which is connected to one of the outputs of the interface, and the first output is connected to the input of the transceiver, the second input of the modem is connected to the corresponding output of the interface, and the second output is connected to the input of the transceiver, as well as the manual data input unit, the output of which is connected to the corresponding input interface, one of the outputs of which is connected to the processor, and the other output is connected to a storage device, while the outputs of the processor and storage device are connected to the corresponding inputs of the interface, characterized in that In addition, a subscriber receiver, which is part of the paging public communication network, a transponder card, a remote reading unit with an antenna, configured to read an identification code recorded in the digital memory of the transponder card, on the surface of which is coated with a special one-time coating, for example, paint, is introduced , secret codes that become visually accessible only when the protective coating is erased, as well as an indicator of the operating mode early sensors, the first input of which is connected to the first output of the remote reading unit, and the blocking unit of the functional organs of the protected object, while the interface included in the on-board computer is made with two additional inputs and two additional outputs, the first additional output of the interface is connected to the input of the blocking unit functional organs of the protected object, the second additional output of the interface is connected to the second input of the indicator of the operating mode of the security sensors, the first additional The actual input of the interface is connected to the second output of the remote reading unit, and the second additional input is connected to the output of the subscriber receiver, the input of which is connected by radio to the operator data transmission unit, which is part of the paging public communication network.

В данной системе в отличие от описанных выше известных систем предусмотрены технические средства эффективного противодействия несанкционированному воздействию на охраняемый объект, в частности краже или угону автомобиля. Кроме того, обеспечивается возможность опознавания системой владельца объекта по типу "свой-чужой" и блокирования движения автомобиля в случае несанкционированного проникновения в него злоумышленника. Одновременно сохраняются все другие функциональные возможности, присущие системам подобного типа, а именно высокоточная навигация объекта, в том числе видеонаблюдение, дистанционное тестирование аппаратуры, мониторинг окружающей среды и внутреннего состояния объекта. Предложенная система характеризуется расширенными функциональными возможностями, что предопределяет более широкую область ее практического использования.In this system, in contrast to the known systems described above, technical means are provided for effective counteraction to unauthorized influence on the protected object, in particular theft or theft of a car. In addition, it is possible for the system to recognize the owner of the object by the type of friend or foe and block the movement of the car in case of unauthorized penetration of an attacker into it. At the same time, all other functionalities inherent in systems of this type are retained, namely, high-precision navigation of the object, including video surveillance, remote testing of equipment, monitoring of the environment and the internal state of the object. The proposed system is characterized by advanced functional capabilities, which predetermines a wider area of its practical use.

Вместе с тем, данная система, использующая аппаратуру спутникового наведения, характеризуется значительной сложностью конфигурации, что обуславливает ее достаточно высокую стоимость и высокие эксплуатационные расходы. Положительный эффект достигнут за счет применения большого числа функциональных элементов, работающих последовательно в функциональной цепочке. Это приводит к тому, что ухудшаются показатели наработки системы на отказ, что в системах обеспечения безопасности крайне нежелательно. Система не позволяет получать изображения охраняемых объектов повышенной четкости и увеличенные изображения для сохранения в памяти и автоматизированного анализа для принятия решения.At the same time, this system using satellite-guided equipment is characterized by significant configuration complexity, which leads to its rather high cost and high operating costs. A positive effect was achieved through the use of a large number of functional elements working sequentially in a functional chain. This leads to the deterioration of the system operating time to failure, which is extremely undesirable in security systems. The system does not allow obtaining images of protected objects of high definition and enlarged images for storing in memory and automated analysis for decision making.

Сущность изобретенияSUMMARY OF THE INVENTION

В основу настоящего изобретения положена техническая задача создать такую систему автоматизированного обеспечения безопасности и мониторинга мобильных объектов, которая обеспечивала бы высокоточное наблюдение за мобильными объектами на охраняемой территории с обеспечением дублирования и возможности дополнительного опознавания системой объекта и/или его владельца по принципу "свой-чужой" и которая помимо распознавания, слежения и регистрации объектов обеспечивала бы выполнение дополнительно следующих функций: распознавание и классификацию объектов по определенным признакам в различных условиях освещенности, оперативный поиск объекта по задаваемым параметрам, распознавание ситуации по действиям объектов, с возможностью слежения за такими объектами, сохранения в памяти системы изображения, пригодного для последующего анализа и выдачи сигнала тревоги.The present invention is based on the technical task of creating such a system of automated security and monitoring of mobile objects, which would provide high-precision monitoring of mobile objects in a protected area with duplication and the possibility of additional recognition by the system of the object and / or its owner on the basis of the "friend or foe" and which in addition to recognition, tracking and registration of objects would provide the following additional functions: recognition and classification ssifikatsiyu objects according to certain features in different light conditions, operational search facility predeterminable parameters, recognition of the situation by the actions of objects with a possibility for tracking such objects stored in the memory of the imaging system, suitable for subsequent analysis and issuing an alarm.

Указанная техническая задача решена за счет того, что предложена система обеспечения безопасности и мониторинга мобильных объектов, содержащая, по меньшей мере, одну видеокамеру, приспособленную для получения видеосигнала цели, по меньшей мере, одно вычислительное устройство с памятью и, по меньшей мере, одно устройство приема/передачи сигнала, связанные посредством локальной вычислительной сети, и, по меньшей мере, один транспондер, хранящий и способный передавать на устройство приема/передачи сигнала собственный индивидуальный идентификационный сигнал, соответствующий конкретному охраняемому мобильному объекту или его надлежащему владельцу, причем устройство приема/передачи сигнала приспособлено для приема указанного идентификационного сигнала, которая согласно изобретению дополнительно содержит, по меньшей мере, одно устройство распознавания цели, соединенное через аппаратно-программный интерфейс с видеокамерой и устройством приема/передачи сигнала, по меньшей мере, одну реализованную на вычислительном устройстве с памятью базу данных с заранее записанными в нее описаниями индивидуальных параметров мобильных объектов, подлежащих мониторингу, идентификационными сигналами, отвечающими соответствующим мобильным объектам, подлежащим мониторингу, и описаниями тревожных ситуаций, причем база данных выполнена с возможностью доступа к ней с видеокамеры и с устройства распознавания цели и записи в нее новой информации, получаемой с видеокамеры, по меньшей мере, одну подвижную видеокамеру, выполненную с возможностью наведения на цель в зависимости от получаемого от устройства распознавания цели управляющего сигнала, и, по меньшей мере, один терминал наблюдения, приспособленный для информирования оператора и получения от него управляющих команд, причем устройство распознавания цели приспособлено для анализа сигналов, поступающих от видеокамеры и от устройства приема/передачи сигнала с возможностью на их основе распознавания тревожной ситуации и определения цели в соответствии с заданным алгоритмом с использованием хранящейся в базе данных информации, и приспособлено для выдачи соответствующего управляющего сигнала на подвижную видеокамеру для наведения на цель и сигнала тревоги на терминал наблюдения, а подвижная видеокамера выполнена с возможностью получения видеосигнала с изображением цели, пригодного для дальнейшего анализа, и его передачи для хранения в базу данных.The specified technical problem is solved due to the fact that a security system and monitoring of mobile objects is proposed, comprising at least one video camera adapted to receive a target video signal, at least one computing device with memory and at least one device signal reception / transmission connected via a local area network, and at least one transponder that stores and is able to transmit its own individual identifier to the signal reception / transmission device an identification signal corresponding to a particular protected mobile object or its proper owner, wherein the signal receiving / transmitting device is adapted to receive said identification signal, which according to the invention further comprises at least one target recognition device connected via a hardware-software interface to a video camera and a signal receiving / transmitting device, at least one database with a pre-recorded on a computing device with memory and descriptions of the individual parameters of the mobile objects to be monitored, identification signals corresponding to the corresponding mobile objects to be monitored, and descriptions of alarm situations, the database being configured to access it from a video camera and from a target recognition device and record new information into it obtained from the video camera, at least one movable video camera configured to aim at the target depending on the received from the recognition device whether there is a control signal, and at least one observation terminal, adapted to inform the operator and receive control commands from him, and the target recognition device is adapted to analyze signals coming from the video camera and from the signal receiving / transmitting device with the possibility of recognition based on them alarm situation and target determination in accordance with a given algorithm using the information stored in the database, and is adapted to issue the appropriate control signal to Vision video camera for targeting and alarm surveillance for the terminal, and the mobile video camera is configured to obtain the video signal with the image of targets suitable for further analysis, and it is transferred for storage in the database.

Предпочтительно, предложенная система дополнительно содержит множество транспондеров с собственными идентификационными сигналами, причем общее число транспондеров в системе соответствует количеству мобильных объектов, подлежащих мониторингу, и каждый собственный идентификационный сигнал транспондера отвечает определенному мобильному объекту или его надлежащему владельцу. Устройство распознавания цели реализовано программно в вычислительном устройстве с памятью, а индивидуальные параметры мобильных объектов выбраны из группы, включающей: отношение длины и ширины, форму, цвет, номерной регистрационный знак.Preferably, the proposed system further comprises a plurality of transponders with their own identification signals, wherein the total number of transponders in the system corresponds to the number of mobile objects to be monitored, and each own transponder identification signal corresponds to a specific mobile object or its proper owner. The target recognition device is implemented in software in a computing device with memory, and the individual parameters of mobile objects are selected from the group including: the ratio of length and width, shape, color, license plate number.

Преимущественно, подвижная видеокамера выполнена с возможностью поворота в вертикальной и горизонтальной плоскости и/или изменения фокусного расстояния и/или изменения диафрагмы и/или настройки на фокус для обеспечения наведения на цель. Система дополнительно содержит датчик обнаружения цели, связанный с устройством распознавания цели, причем устройство распознавания цели приспособлено для анализа сигнала от датчика обнаружения цели. В качестве датчика обнаружения цели использовано устройство, выбранное из группы, включающей: инфракрасные камеры, термовизорные камеры, радиолокационные устройства, датчик перемещения. Устройство распознавания цели выполнено с возможностью вычислять вектор скорости, текущую координату нахождения цели, формировать и передавать на подвижную видеокамеру соответствующий управляющий сигнал для обеспечения наведения подвижной видеокамеры на цель. Устройство распознавания цели выполнено с возможностью передачи управляющего сигнала на подвижную видеокамеру по последовательному каналу связи.Advantageously, the movable video camera is configured to rotate in the vertical and horizontal plane and / or change the focal length and / or change the aperture and / or focus setting to provide guidance to the target. The system further comprises a target detection sensor coupled to the target recognition device, the target recognition device adapted to analyze a signal from the target detection sensor. As a target detection sensor, a device selected from the group consisting of: infrared cameras, thermal imaging cameras, radar devices, a displacement sensor is used. The target recognition device is configured to calculate the velocity vector, the current coordinate of finding the target, generate and transmit to the mobile video camera the corresponding control signal to ensure that the moving video camera is aimed at the target. The target recognition device is configured to transmit a control signal to the mobile video camera via a serial communication channel.

Предпочтительно, предложенная система характеризуется тем, что заданный алгоритм обеспечивает анализ видеосигнала от видеокамеры и идентификационного сигнала, полученного устройством приема/передачи сигнала, следующим образом: по видеосигналу выбирают множество индивидуальных параметров мобильного объекта, по полученному устройством приема/передачи сигнала от транспондера индивидуальному идентификационному сигналу в базе данных ищут множество индивидуальных параметров, соответствующих мобильному объекту с указанным индивидуальным идентификационным сигналом, сравнивают найденные в базе и данных индивидуальные параметры с множеством индивидуальных параметров, выбранных по видеосигналу, в случае их несовпадения формируют соответствующий сигнал тревоги. Заданный алгоритм обеспечивает также анализ видеосигнала от видеокамеры в соответствии с описанием тревожной ситуации, выбранной из группы, включающей яркость, размер, длительность нахождения в контролируемой зоне, скорость и направление перемещения, количество людей в мобильном объектеPreferably, the proposed system is characterized in that the predetermined algorithm provides an analysis of the video signal from the video camera and the identification signal received by the signal receiving / transmitting device as follows: a plurality of individual parameters of a mobile object are selected from the video signal, and an individual identification signal received from the signal receiving / transmitting device from the transponder in the database look for a lot of individual parameters corresponding to the mobile object with the specified individual nym identification signal, compared results in the database and data with individual parameters of a plurality of individual parameters of the selected video signal in case of mismatch is formed corresponding to the alarm. The specified algorithm also provides analysis of the video signal from the video camera in accordance with the description of the alarm situation selected from the group including brightness, size, duration of stay in the controlled area, speed and direction of movement, number of people in the mobile object

Предпочтительно, в качестве вычислительного устройства с памятью использован персональный компьютер.Preferably, a personal computer is used as a computing device with memory.

Подробное описание изобретенияDETAILED DESCRIPTION OF THE INVENTION

Настоящее изобретение будет понятно специалисту из приведенного ниже более подробного описания настоящего изобретения, а также конкретного неограничивающего примера его реализации со ссылками на фигуры чертежей, на которых:The present invention will be clear to the specialist from the following more detailed description of the present invention, as well as a specific non-limiting example of its implementation with reference to the figures of the drawings, in which:

- фиг.1 изображает общую функциональную схему конкретного примера системы обеспечения безопасности согласно настоящему изобретению;- figure 1 depicts a General functional diagram of a specific example of a security system according to the present invention;

- фиг.2 изображает схематически систему обеспечения безопасности согласно конкретному неограничивающему примеру реализации настоящего изобретения.- figure 2 depicts schematically a security system according to a specific non-limiting example implementation of the present invention.

Однотипные устройства обозначены на фигурах чертежа одинаковыми позициями.The same type of device is indicated in the figures by the same reference numbers.

На фиг.1 представлена общая функциональная схема конкретного примера системы обеспечения безопасности согласно настоящему изобретению. Система состоит из взаимосвязанных устройств, соединенных электрически или по радиоканалу по правилам, известным в данной области техники. Отдельные устройства, выполняющие сходные функции в системе, для удобства анализа на схеме объединены в логические блоки. Данное разбиение на логические блоки является условным и сделано для удобства анализа системы и не ограничивает сущность изобретения.Figure 1 presents a General functional diagram of a specific example of a security system according to the present invention. The system consists of interconnected devices connected electrically or over a radio channel according to the rules known in the art. Separate devices that perform similar functions in the system are combined into logical blocks for ease of analysis in the circuit. This division into logical blocks is conditional and made for the convenience of system analysis and does not limit the essence of the invention.

Блок анализа фона и обнаружения целей обозначен на фиг.1 позицией 1. Блок 1 представляет собой набор видеокамер и иных устройств, предназначенных для обнаружения целей, использующих для этого различные физические принципы. В качестве таких устройств могут использоваться: цветные видеокамеры 11 (например, WAT-220, представлена на российском рынке фирмой Watec), черно-белые видеокамеры 12 (например, WAT-902H, фирмы Watec), инфракрасные камеры 13 (например, TVC200ML, ф. ЦНИИ «Электрон»), термовизорные камеры 14 (например, ТВ-04 Кст, ф. НТПП "НИИЦТП"), радиолокационные устройства 15 (например, РЛС «ORWELL», ф. ГУП НПЦ «ЭЛВИС»), датчики 16 движения и определения координаты нахождения цели (например, типа 525D, представлены на российском рынке фирмой Paradox). Блок 1 может включать различное количество и комбинацию перечисленных выше устройств в зависимости от конкретных потребностей пользователей системы, а также от условий эксплуатации. В простейшем варианте он включает одну черно-белую видеокамеру. Основной функцией устройств блока 1 является получение видеосигнала с изображением мобильного объекта, попавшего в охраняемую зону (в частности, в зону контроля видеокамеры), и иных сигналов, фиксирующих появление мобильных объектов в охраняемой зоне. Устройства могут устанавливаться с обеспечением дублирования работы друг друга и взаимного перекрытия зон контроля для обеспечения повышенной надежности работы системы. Устройства блока 1 электрически связаны через интерфейс (например, типа «композитный видеосигнал» или Ethernet) с блоком 2 распознавания целей, определения координат, параметров целей и анализа ситуаций. Устройства Блока 1 приспособлены передавать получаемые видеосигналы с изображением мобильного объекта, а также иные сигналы распознавания цели (например, сигнал срабатывания датчика) на Блок 2. Блок 2 содержит устройство 21 распознавания цели, которое предназначено для определения координат и параметров целей, анализа ситуаций, которое может быть реализовано в виде специализированного вычислительного устройства (например, промышленного компьютера на основе модулей стандарта РС-104 с использованием процессора «Мультикор») или на базе универсального персонального компьютера (например, с процессором «Интел Пентиум»), снабженного программным обеспечением, позволяющим получать и приводить в цифровую форму информацию от устройств анализа фона и обнаружения целей; запоминать и отслеживать состояние фона, в том числе его изменения (время суток, состояние атмосферы - ясно, облачно, осадки, время года и состояние покрова); вычислять вектор скорости, текущую координату нахождения цели; сохранять в запоминающем устройстве в базе данных распознанные параметры цели. Данное программное обеспечение является типовым в данной области (например, на базе ОС «Windows»). Блок 2 распознавания целей, определения координат, параметров целей и анализа ситуаций соединен электрически через интерфейс (например, RS-485) с Блоком 3, который включает одну или более подвижных управляемых видеокамер. Блок 2 приспособлен за счет использования программного обеспечения, например типового в данной области, для выдачи управляющих команд и передачи координаты и вектор скорости цели на Блок 3. Блок 2 также выполнен с возможностью управления подвижными видеокамерами 31 Блока 3 по последовательному каналу связи за счет применения, например, типового программного обеспечения. Блок 2 также приспособлен для анализа сигналов, получаемых от устройств Блока 1 в соответствии с заданным алгоритмом с использованием информации, хранящейся в Базе данных Блока 4, с которым Блок 2 соединен. Блок 2 приспособлен для выдачи в зависимости от распознаваемой ситуации сигнала тревоги на терминалы 51 наблюдения, анализа результатов и управления системой. Блок 2 выполнен с возможностью выдачи сигнала тревоги на терминалы 51 и сигнала управления видеокамерами 31. Блок 3 может содержать различное число подвижных управляемых видеокамер 31 различного типа (например, WV-CS854 ф. Panasonic), приспособленных для выполнения следующих функций в соответствии с полученной от Блока 2 управляющей командой: поворот в вертикальной и горизонтальной плоскости; изменение фокусного расстояния; настройка на фокус; изменение диафрагмы или скорости работы затвора. Подвижные видеокамеры Блока 3 приспособлены для получения детального укрупненного изображения цели при наведении на нее, используемого для дополнительного распознавания параметров цели или детального сопровождения цели по требованию оператора системы. Подвижные видеокамеры Блока 3 связаны через интерфейс (например, RS-485) с блоком 4, представляющим собой вычислительную машину с запоминающим устройством (например, персональный компьютер). В данном запоминающем устройстве создана база данных с возможностью хранения данных видеоархива. В качестве базы данных может быть использована типовая база данных или база данных, специально созданная по известным правилам специалистам в области баз данных. База данных Блока 4 выполнена с возможностью автоматического пополнения и хранения информации обо всех распознанных целях, распознанных ситуациях, параметрах цели, времени возникновения и пропадания целей, фотографии целей, фрагментов видеоархива, отражающих все действия цели при ее нахождении в зоне контроля видеосистемы. Укрупненные изображения, полученные подвижными видеокамерами Блока 3 в виде оцифрованных фотографий, могут храниться в базе данных Блока 4. Данные фотографии могут быть использованы в дальнейшем для изучения ситуации специалистом и/или оператором. Блок 4 электрически и логически через типовой программный интерфейс связан с Блоком 2 распознавания цели, предназначенным для определения координат, параметров целей и анализа ситуаций. Блок 4 и Блок 2 связаны с обеспечением возможности передачи данных друг другу. Блок 4 также связан электрически с Блоком 5 терминалов наблюдения, предназначенным для анализа результатов и управления системой и включающим один или несколько терминалов 51 наблюдения. Терминалы 51 наблюдения представляют собой один или несколько персональных компьютеров, объединенных сетями связи. Терминалы 51 наблюдения, предназначенные для анализа результатов и управления системой, выполнены, приспособлены для обеспечения оператора возможностью наблюдать за происходящим в зоне контроля системы (зона наблюдения устройств анализа фона и обнаружения целей) и управления системой. Это достигается за счет использования, например, типового монитора (цветного или черно-белого) и типового программного обеспечения. Терминалы 51 выполнены с возможностью наблюдения ситуации на экране и доступа оператора к управлению системой через клавиатуру или другой специализированный интерфейс типа человек-компьютер (например, джойстик).The background analysis and target detection unit is indicated in FIG. 1 by 1. The unit 1 is a set of cameras and other devices designed to detect targets using various physical principles. Such devices can be used: color video cameras 11 (for example, WAT-220, available on the Russian market by Watec), black and white video cameras 12 (for example, WAT-902H, from Watec), infrared cameras 13 (for example, TVC200ML, f Central Research Institute "Electron"), thermal imaging cameras 14 (for example, TV-04 Kst, f. NTPP NIITsTP), radar devices 15 (for example, radar "ORWELL", f. GUP SPC "ELVIS"), motion sensors 16 and determining the coordinates of finding the target (for example, type 525D, presented on the Russian market by Paradox). Block 1 may include a different number and combination of the above devices depending on the specific needs of users of the system, as well as on operating conditions. In the simplest version, it includes one black and white video camera. The main function of the devices of unit 1 is to obtain a video signal with the image of a mobile object that has fallen into a protected area (in particular, into the control zone of a video camera), and other signals recording the appearance of mobile objects in a protected area. Devices can be installed with duplication of each other's work and mutual overlapping of control zones to ensure increased reliability of the system. The devices of block 1 are electrically connected through an interface (for example, of the type “composite video signal” or Ethernet) with block 2 of target recognition, determination of coordinates, target parameters, and situation analysis. The devices of Block 1 are adapted to transmit the received video signals with the image of a mobile object, as well as other target recognition signals (for example, a sensor response signal) to Block 2. Block 2 contains a target recognition device 21, which is designed to determine the coordinates and parameters of targets, analyze situations, which can be implemented as a specialized computing device (for example, an industrial computer based on modules of the RS-104 standard using the Multicor processor) or on the basis of a universal ersalnogo personal computer (e.g., processor "Intel Pentium") equipped with software that allows receive and drive the digitized information from the background analysis devices and detection purposes; remember and track the state of the background, including its changes (time of day, state of the atmosphere - clear, cloudy, precipitation, season, and state of cover); calculate the velocity vector, the current coordinate of finding the target; save recognized parameters of the target to the database. This software is typical in this area (for example, based on the "Windows" OS). Block 2 recognition of goals, determining coordinates, parameters of goals and analysis of situations is connected electrically via an interface (for example, RS-485) with Block 3, which includes one or more movable controlled cameras. Block 2 is adapted through the use of software, for example, typical in this area, for issuing control commands and transmitting the coordinates and velocity vector of the target to Block 3. Block 2 is also configured to control movable video cameras 31 of Block 3 via a serial communication channel through the use of for example, sample software. Block 2 is also adapted to analyze the signals received from the devices of Block 1 in accordance with a predetermined algorithm using the information stored in the Database of Block 4 with which Block 2 is connected. Block 2 is adapted for issuing, depending on the recognized situation, an alarm signal to terminals 51 for monitoring, analyzing results, and controlling the system. Block 2 is configured to issue an alarm to the terminals 51 and a control signal of the video cameras 31. Block 3 may contain a different number of movable controlled video cameras 31 of various types (for example, Panasonic WV-CS854 f. Panasonic), adapted to perform the following functions in accordance with received from Block 2 by the management team: rotation in the vertical and horizontal plane; change in focal length; focus setting; Changing the aperture or shutter speed. The mobile cameras of Unit 3 are adapted to obtain a detailed enlarged image of the target when hovering over it, used for additional recognition of target parameters or for detailed tracking of the target at the request of the system operator. Block 3 mobile cameras are connected via an interface (for example, RS-485) to block 4, which is a computer with a storage device (for example, a personal computer). This storage device has a database with the ability to store video archive data. As a database, a typical database or a database specially created according to well-known rules by specialists in the field of databases can be used. The database of Block 4 is made with the possibility of automatically replenishing and storing information about all recognized goals, recognized situations, parameters of the target, time of occurrence and loss of goals, photographs of targets, video archive fragments reflecting all actions of the target when it is in the control zone of the video system. The enlarged images received by the mobile cameras of Unit 3 in the form of digitized photographs can be stored in the database of Unit 4. These photos can be used in the future to study the situation by a specialist and / or operator. Block 4 is electrically and logically through a typical program interface connected to Block 2 target recognition, designed to determine the coordinates, parameters of targets and analysis of situations. Block 4 and Block 2 are associated with the possibility of transmitting data to each other. Block 4 is also electrically connected to the block 5 of the observation terminals, intended for analysis of results and control of the system and includes one or more terminals 51 of the observation. Monitoring terminals 51 are one or more personal computers connected by communication networks. Monitoring terminals 51 for analyzing the results and controlling the system are made and adapted to provide the operator with the opportunity to observe what is happening in the control zone of the system (observation zone of background analysis and target detection devices) and control the system. This is achieved through the use of, for example, a typical monitor (color or black and white) and typical software. The terminals 51 are configured to observe the situation on the screen and access the operator to control the system through a keyboard or other specialized interface such as a human computer (for example, a joystick).

В зависимости от стоящих перед системой по настоящему изобретению задач можно выбрать различную конкретную конфигурацию системы. В частности, логические блоки 2, 4 и 5 системы могут быть реализованы на различных аппаратных средствах. Блоки 2, 4 и 5 могут быть реализованы на одном специализированном вычислительном устройстве (например, промышленного компьютера на основе модулей стандарта PC-104 с использованием процессора «Мультикор») или на одном персональном компьютере (например, на базе процессора «Интел Пентиум») в виде специально запрограммированных областей памяти. Блоки 2, 4 и 5 могут быть выполнены также на базе распределенной сетевой системы, представляющей собой комбинацию специализированных вычислительных устройств и персональных компьютеров (с мониторами или без мониторов).Depending on the tasks facing the system of the present invention, various specific system configurations can be selected. In particular, logical units 2, 4, and 5 of the system can be implemented on various hardware. Blocks 2, 4, and 5 can be implemented on one specialized computing device (for example, an industrial computer based on modules of the PC-104 standard using the Multicore processor) or on one personal computer (for example, based on the Intel Pentium processor) as specially programmed memory areas. Blocks 2, 4 and 5 can also be made on the basis of a distributed network system, which is a combination of specialized computing devices and personal computers (with or without monitors).

Блок 6 состоит из одного или нескольких устройств приема/передачи сигнала, показанных на фигуре 1 позицией 6. Устройства 61 приема/передачи сигнала приспособлены для выдачи сигнала запроса на транспондеры и получения сигналов ответа от транспондеров, обозначенных на фиг.1 позицией 71, объединенных в условный блок 7. Транспондерами оборудованы мобильные объекты, подлежащие мониторингу. Транспондеры могут устанавливаться непосредственно на мобильных объектах (стационарно) или могут храниться у надлежащих пользователей данных мобильных объектов (водителей). Транспондеры 71 приспособлены для приема сигнала запроса и передачи собственного индивидуального идентификационного сигнала (или кода) на одно или несколько устройств 61 приема/передачи сигнала. Собственный индивидуальный идентификационный сигнал (код) заранее записан в транспондер. Устройство 61 приема/передачи сигнала приспособлено принимать индивидуальные сигналы (коды), передаваемые транспондерами.Block 6 consists of one or more signal receiving / transmitting devices, shown at 6 in FIG. 1. The signal receiving and transmitting devices 61 are adapted to transmit a request signal to transponders and receive response signals from transponders, indicated in FIG. 1 by 71, combined conditional block 7. Mobile objects subject to monitoring are equipped with transponders. Transponders can be installed directly on mobile objects (stationary) or can be stored by appropriate users of these mobile objects (drivers). Transponders 71 are adapted to receive a request signal and transmit their own individual identification signal (or code) to one or more signal receiving / transmitting devices 61. Own individual identification signal (code) is pre-recorded in the transponder. The signal receiving / transmitting device 61 is adapted to receive individual signals (codes) transmitted by transponders.

Транспондеры (один или одновременно несколько), попадая в зону действия антенны устройства приема/передачи сигнала, получают запрос и выдают каждый свой индивидуальный идентификационный сигнал (код), при этом делая это одновременно и один раз. Повторная выдача индивидуального идентификационного кода транспондера возможна после выхода транспондера из поля действия антенны устройств 61. Устройство 61 приема/передачи сигнала принимает индивидуальные идентификационный коды всех транспондеров и передает их в блок 2, а именно в устройство распознавания цели (базу данных). При этом количество одновременно считываемых кодов транспондеров, расстояние на котором происходит считывание и время за которое происходит считывание зависят от конкретных типов устройств 61 приема/передачи сигнала и транспондеров.Transponders (one or several at the same time), falling into the coverage area of the antenna of the signal receiving / transmitting device, receive a request and issue each individual identification signal (code), while doing this simultaneously and once. Repeated issuance of an individual transponder identification code is possible after the transponder leaves the field of operation of the antenna of the devices 61. The signal receiving / transmitting device 61 receives the individual identification codes of all transponders and transmits them to block 2, namely to the target recognition device (database). Moreover, the number of simultaneously readable transponder codes, the distance at which the reading takes place and the time for which the reading takes place, depend on the specific types of signal receiving / transmitting devices 61 and transponders.

В устройстве распознавания цели Блока 2 с использованием информации, хранящейся в базе данных, происходит сравнение всех получаемых индивидуальных идентификационных кодов транспондеров с имеющимися в базе данных. Из базы данных выбираются параметры целей, соответствующие индивидуальным идентификационным кодам транспондеров. Эти характеристики или параметры цели сравниваются с параметрами цели, получаемыми по видеосигналам, получаемым от видеокамер Блока 1 и Блока 3. Происходит сопоставление параметров целей. В случае несоответствия параметров целей, получаемых от видеокамер Блока 1 и Блока 3, характеристикам целей, соответствующим индивидуальным идентификационным кодам транспондеров, занесенным в базу данных, - система выдает соответствующее сообщение (сигнал тревоги) на терминалы 51 наблюдения Блока 5.In the target recognition device of Block 2, using the information stored in the database, all received individual transponder identification codes are compared with those in the database. From the database, target parameters are selected that correspond to the individual identification codes of the transponders. These characteristics or target parameters are compared with the target parameters obtained from the video signals received from the cameras of Block 1 and Block 3. The target parameters are compared. If the parameters of the targets received from the cameras of Block 1 and Block 3 do not match the characteristics of the targets corresponding to the individual identification codes of the transponders recorded in the database, the system issues a corresponding message (alarm) to the monitoring terminals 51 of Block 5.

В качестве устройства 61 приема/передачи сигналов может использоваться, например, считыватель карт MX 5375, представленный на российском рынке фирмой HID Corp. или считыватель EL-RFID-S фирмы ЭЛВИИС или др. В качестве транспондера может использоваться карта IQ1431 фирмы HID Corp. или транспондер EL-RFID-T фирмы ЭЛВИИС и др.As the device 61 of the reception / transmission of signals can be used, for example, a card reader MX 5375, presented on the Russian market by HID Corp. or an EL-RFID-S reader from ELVIIS or others. The IQ1431 card from HID Corp. can be used as a transponder. or an EL-RFID-T transponder from ELVIIS et al.

В общем случае настоящее изобретение охватывает различные комбинации и варианты аппаратно-программной реализации устройств 21 распознавания цели, терминалов 51 наблюдения, устройств 61 приема/передачи сигналов и транспондеров 71. Конкретная аппаратно-программная реализация выбирается, исходя их требований к системе в соответствии с правилами известными специалисту в данной области техники.In general, the present invention encompasses various combinations and hardware and software implementations of target recognition devices 21, observation terminals 51, signal receiving / transmitting devices 61, and transponders 71. A particular hardware and software implementation is selected based on their system requirements in accordance with known rules specialist in the art.

Система обеспечения безопасности и мониторинга мобильных объектов будет понятна специалисту в данной области из приведенного ниже описания работы конкретного неограничивающего примера реализации такой системы, которое ведется со ссылкой на фиг.2 чертежей. Данный пример системы согласно настоящему изобретению приведен для иллюстрации и не ограничивает совокупность существенных признаков настоящего изобретения.The security system and monitoring of mobile objects will be clear to a person skilled in the art from the following description of the operation of a specific non-limiting example of the implementation of such a system, which is carried out with reference to figure 2 of the drawings. This example system according to the present invention is illustrative and does not limit the set of essential features of the present invention.

Система по настоящему конкретному примеру реализации изобретения включает две стационарные видеокамеры 81 типа WAT-220 и одну инфракрасную (ИК) камеру 82 типа TVC200ML в качестве устройств анализа фона и обнаружения целей, универсальный персональный компьютер 84 с процессором «Интел Пентиум», оперативно-запоминающим устройством объемом 256 КБайт и твердым диском объемом 20 Мбайт, с соответствующим типовым программным обеспчением в качестве устройства распознавания цели, предназначенного для определения координат и параметров целей, анализа ситуаций. В памяти данного персонального компьютера размещена база данных, на данном компьютере реализован терминал наблюдения для анализа результатов и управления системой оператором. В систему также входит подвижная управляемая видеокамера 83 типа WV-CS854. Персональный компьютер через аппаратно-программный интерфейс RS-485 соединен с видеокамерами 81, ИК-камерой 82 и подвижной видеокамерой 83. Система также содержит одно устройство 85 приема/передачи сигнала, связанное через аппаратно-программный интерфейс с компьютером 64, и множество (по числу мобильных объектов) транспондеров 86 (на фиг.2 показано 5 транспондеров).The system of this particular embodiment of the invention includes two stationary video cameras 81 of the WAT-220 type and one infrared (IR) camera 82 of the TVC200ML type as background analysis and target detection devices, a universal personal computer 84 with an Intel Pentium processor, a random access memory 256 KB and 20 MB hard drive, with the corresponding standard software as a target recognition device, designed to determine the coordinates and parameters of targets, analyze the situation tions. A database is located in the memory of this personal computer, an observation terminal is implemented on this computer to analyze the results and control the system by the operator. The system also includes a mobile controlled camcorder 83 type WV-CS854. A personal computer is connected via a hardware-software interface RS-485 to video cameras 81, an infrared camera 82, and a movable video camera 83. The system also includes one signal receiving / transmitting device 85 connected via a hardware-software interface to a computer 64, and a plurality (in number mobile objects) transponders 86 (figure 2 shows 5 transponders).

Работа системы происходит следующим образом. Видеокамеры 81 и ИК-камера 82 формируют изображения двух частей общей видеосцены работы системы. При этом изображения частей видеосцены могут соприкасаться одной стороной (или быть независимы), образуя совокупную видеосцену, на которой функционирует система. ИК-камера 82 может образовывать отдельную видеосцену или формировать совокупное изображение вместе с видеокамерами 81. Такое использование видеокамер позволяет формировать изображение при дневном освещении по изображению видеокамер 81, а ночью по изображению камеры 82. Изображения через интерфейс транслируются в компьютер 84. Компьютер 84 в соответствии с программным обеспечением на базе оперативной системы «Windows» производит преобразование композитного аналогового видеосигнала, получаемого от камер, в цифровую форму и производит обработку изображения, а именно осуществляет следующие действия: производит анализ фона, обнаруживает цели, производит распознавание целей и ситуаций, определяет параметры целей, их координаты, запоминает траектории движения, передает результаты распознавания в базу данных, привязывая события ко времени, записывает видеосигнал в сжатом или необработанном виде в память компьютера в виде файлов, адрес которых располагается в базе данных, таким образом видеосигнал связывается с событиями, информация о которых расположена в базе данных. Координаты целей передаются на подвижную видеокамеру 83 в виде совокупности целеуказаний с учетом прогнозирования нахождения целей в момент наведения камеры на цели. В компьютере 84 проводится также оцифровка видеоизображения подвижной видеокамеры 83, изображение может транслироваться на экран компьютера, один из кадров заносится в базу данных как детальная фотография цели. Изображение передается на обработку с целью распознавания цели и ее параметров по ее детальному изображению с помощью алгоритмов статического распознавания, известных специалисту в данной области. Изображения видеокамер могут проецироваться на план или карту объекта, введенную и запомненную системой в памяти компьютера в виде областей карты, покрытых изображениями видеокамер. Распознанные объекты в виде мнемознаков, соответствующих конкретному типу цели, проецируются в реальном времени на карту или план объекта в соответствии с координатой их нахождения. Оператор при необходимости может замаскировать любую произвольную часть (или произвольное количество частей) изображения или части карты объекта, в то же время внутри маски могут быть сформированы освобожденные от маски области изображения. При этом события, происходящие в области маски, системой игнорируются. На изображении также могут быть сформированы одна или произвольное количество областей, подлежащих повышенной охране, т.н. области аларма. Эти области могут быть произвольной формы, возможно имеющие внутри себя области произвольной формы, не являющейся зоной аларма. Каждой зоне аларма может быть присвоено название, время и дата работы, тип параметра объекта или ситуации. При возникновении факта попадания объекта в зону аларма с заданными параметрами в заданное время или возникновении запрограммированной ситуации система выдаст на терминал оператора системы соответствующее сообщение. Оператор, активизировав аларм, автоматически получает на экран изображение события, вызвавшего аларм, независимо от того происходит оно сейчас или произошло ранее за некоторое время. Возникновение аларма заносится как событие в базу данных. Оператор системы может, при необходимости, дать указание системе следить за выбранной им целью или за несколькими целями, указанными произвольно по изображению, или выбрав несколько объектов с определенными параметрами (например, имеющих самую большую скорость перемещения или всех объектов одного типа или цвета или т.п.). При этом система автоматически поочередно будет выводить на экран изображения целей, передаваемые подвижной видеокамерой 83 в детальном виде. Видеокамера 83 может наводиться для считывания, например, индивидуального номерного знака мобильного объекта, подлежащего мониторингу.The system operates as follows. Video cameras 81 and an infrared camera 82 form images of two parts of the overall video scene of the system. Moreover, the images of parts of the video scene can touch one side (or be independent), forming the aggregate video scene on which the system operates. The IR camera 82 can form a separate video scene or form an aggregate image together with video cameras 81. This use of video cameras allows you to create an image in daylight from the image of video cameras 81, and at night from the image of camera 82. Images are transmitted via an interface to computer 84. Computer 84 in accordance with software based on the Windows operating system, it converts the composite analog video signal received from cameras into digital form and processes in the image, namely, it performs the following actions: it analyzes the background, detects goals, recognizes goals and situations, determines the parameters of the goals, their coordinates, remembers the motion paths, transfers the recognition results to the database, attaching events to time, records the video signal in compressed or raw form in the computer's memory in the form of files whose address is located in the database, thus the video signal is associated with events whose information is located in the database. The coordinates of the targets are transmitted to the mobile video camera 83 in the form of a set of target designations taking into account the prediction of the location of targets at the time the camera is aimed at the target. Computer 84 also digitizes the video image of the mobile video camera 83, the image can be broadcast on a computer screen, one of the frames is entered into the database as a detailed photograph of the target. The image is transmitted for processing in order to recognize the target and its parameters from its detailed image using static recognition algorithms known to a person skilled in the art. Images of video cameras can be projected onto a plan or map of an object entered and stored by the system in the computer's memory in the form of map areas covered with images of video cameras. Recognized objects in the form of mnemonic signs corresponding to a particular type of target are projected in real time onto a map or plan of the object in accordance with the coordinate of their location. The operator, if necessary, can mask any arbitrary part (or an arbitrary number of parts) of the image or part of the map of the object, at the same time, image areas freed from the mask can be formed inside the mask. In this case, events occurring in the mask area are ignored by the system. One or an arbitrary number of areas subject to increased protection, so-called, can also be formed on the image. alarm area. These areas may be of arbitrary shape, possibly having within themselves areas of arbitrary shape that are not an alarm zone. Each alarm zone can be assigned a name, time and date of operation, type of parameter of the object or situation. If an object occurs in the alarm zone with the specified parameters at a specified time or when a programmed situation occurs, the system will issue a corresponding message to the terminal of the system operator. The operator, having activated the alarm, automatically receives an image of the event that caused the alarm on the screen, regardless of whether it is happening now or has happened earlier for some time. An alarm occurs as an event in the database. The system operator can, if necessary, instruct the system to monitor the target that he has chosen, or the several goals specified arbitrarily in the image, or by selecting several objects with certain parameters (for example, having the highest speed of movement or all objects of the same type or color, etc.) P.). In this case, the system will automatically alternately display on the screen images of targets transmitted by the mobile video camera 83 in a detailed form. The video camera 83 may be guided to read, for example, the individual license plate number of the mobile object to be monitored.

Оператор может обучить систему распознаванию новых типов целей. Для этого он на изображении многократно указывает на изображение конкретной цели и вводит его название. При этом происходит обучение системы распознаванию конкретной новой цели.The operator can train the system to recognize new types of targets. To do this, he repeatedly indicates the image of a specific target in the image and enters its name. In this case, the system is trained to recognize a specific new target.

Одновременно с этим транспондеры 86, которыми оборудованы мобильные объекты, подлежащие мониторингу, попадая в зону действия антенны устройства 85 приема/передачи сигнала, принимают от него сигнал-запрос и передают в ответ свои индивидуальные идентификационные коды, которые считываются устройством 85 и передаются на компьютер 68. В компьютере 64 происходит выборка из базы данных параметров целей, соответствующих индивидуальному идентификационному коду, полученному от транспондера. Происходит сравнение параметров целей, выбранных из базы данных на соответствие параметрам целей, полученным при распознавании изображения целей, получаемых от видеокамер 81, 82 и 83. В случае обнаружения несоответствия выдается сообщение (сигнал тревоги) на монитор компьютера 84.At the same time, transponders 86, which are equipped with mobile objects to be monitored, falling into the antenna coverage area of the signal receiving / transmitting device 85, receive a request signal from it and transmit their individual identification codes in response, which are read by the device 85 and transmitted to the computer 68 In computer 64, a selection is made from the database of target parameters corresponding to the individual identification code received from the transponder. A comparison is made of the target parameters selected from the database for compliance with the target parameters obtained when the target image received from the cameras 81, 82 and 83 is recognized. In case of discrepancy, a message (alarm) is displayed on the computer monitor 84.

Промышленная применимостьIndustrial applicability

Система согласно настоящему изобретению предназначена, главным образом, для использования в системах безопасности и мониторинга. Система может быть реализована как на базе специализированных устройств (видеокамер высокого разрешения, специализированных радиолокационных устройств, датчиков перемещения и вычислительных комплексов), так и на базе типовых телевизионных камер и компьютеров общего назначения. В зависимости от комплектации системы, а также от обеспечения дублирования работы отдельных устройств можно добиваться требуемой надежности и уровня контроля за мобильными объектами, находящимися на охраняемой территории. Использование специализированного оборудования и обеспечение дублирования повышает качество и надежность работы и приводит к увеличению стоимости системы.The system of the present invention is intended primarily for use in security and monitoring systems. The system can be implemented both on the basis of specialized devices (high-resolution video cameras, specialized radar devices, displacement sensors and computer systems), and on the basis of standard television cameras and general-purpose computers. Depending on the configuration of the system, as well as on ensuring duplication of the operation of individual devices, it is possible to achieve the required reliability and level of control over mobile objects located in the protected area. Using specialized equipment and ensuring duplication increases the quality and reliability of work and leads to an increase in the cost of the system.

Система обеспечения безопасности и мониторинга мобильных объектов согласно настоящему изобретению позволяет эффективно осуществлять автоматизированный мониторинг мобильных объектов на охраняемой территории при различных погодных условиях и времени суток с высокой степенью надежности, распознавать запрограммированные тревожные ситуации, выдавать сигналы тревоги и фиксировать тревожную ситуацию в виде видеозаписи, пригодной для дальнейшего анализа специалистом.The security system and monitoring of mobile objects according to the present invention allows to effectively carry out automated monitoring of mobile objects in a protected area under various weather conditions and time of day with a high degree of reliability, to recognize programmed alarm situations, to issue alarms and record an alarm situation in the form of a video suitable for further analysis by a specialist.

Claims (12)

1. Система обеспечения безопасности и мониторинга мобильных объектов, содержащая, по меньшей мере, одну видеокамеру, приспособленную для получения видеосигнала цели, по меньшей мере, одно вычислительное устройство с памятью и, по меньшей мере, одно устройство приема/передачи сигнала, связанные посредством локальной вычислительной сети, а также, по меньшей мере, один транспондер, выполненный с возможностью хранения и передачи на устройство приема/передачи сигнала собственного индивидуального идентификационного сигнала, соответствующего конкретному охраняемому мобильному объекту или его надлежащему владельцу, причем устройство приема/передачи сигнала выполнено с возможностью приема указанного идентификационного сигнала, отличающаяся тем, что содержит, по меньшей мере, одно устройство распознавания цели, соединенное через аппаратно-программный интерфейс с упомянутой видеокамерой и устройством приема/передачи сигнала, по меньшей мере, одну реализованную на вычислительном устройстве с памятью базу данных с заранее записанными в нее описаниями индивидуальных параметров мобильных объектов, подлежащих мониторингу, идентификационными сигналами, отвечающими соответствующим мобильным объектам, подлежащим мониторингу, и описаниями тревожных ситуаций, по меньшей мере, одну подвижную видеокамеру, выполненную с возможностью наведения на цель в зависимости от получаемого от устройства распознавания цели управляющего сигнала, и, по меньшей мере, один терминал наблюдения, приспособленный для информирования оператора и получения от него управляющих команд, причем база данных выполнена с возможностью доступа к ней с подвижной видеокамеры и с устройства распознавания цели и записи в нее новой информации, получаемой с подвижной видеокамеры, устройство распознавания цели выполнено с возможностью анализа сигналов, поступающих от видеокамеры, приспособленной для получения видеосигнала цели, и от устройства приема/передачи сигнала, распознавания на их основе тревожной ситуации, определения цели в соответствии с заданным алгоритмом с использованием хранящейся в базе данных информации и выдачи соответствующего управляющего сигнала на подвижную видеокамеру для наведения на цель и сигнала тревоги на терминал наблюдения, а подвижная видеокамера выполнена с возможностью получения видеосигнала с изображением цели, пригодного для дальнейшего анализа, и его передачи для хранения в базу данных.1. A security system and monitoring of mobile objects, comprising at least one video camera adapted to receive a video signal of a target, at least one computing device with memory and at least one signal receiving / transmitting device, connected via a local a computer network, as well as at least one transponder, configured to store and transmit to the device receiving / transmitting a signal of its own individual identification signal corresponding to specific protected mobile object or its proper owner, and the device receiving / transmitting a signal is configured to receive the specified identification signal, characterized in that it contains at least one target recognition device connected via a hardware-software interface to the said camera and the receiving device / signal transmission, at least one implemented on a computing device with memory database with pre-recorded descriptions of individual parameters ditch mobile objects to be monitored, identification signals corresponding to the corresponding mobile objects to be monitored, and descriptions of alarm situations, at least one movable video camera configured to aim at the target depending on the control signal received from the target recognition device, and, at least one monitoring terminal adapted to inform the operator and receive control commands from him, the database being configured to access pa to it from a moving video camera and from a target recognition device and recording new information received from a moving video camera into it, the target recognition device is configured to analyze signals coming from a video camera adapted to receive a target video signal, and from a signal receiving / transmitting device, recognizing the alarm situation on their basis, determining the target in accordance with a given algorithm using the information stored in the database and issuing the corresponding control signal to the mobile a video camera for aiming at the target and an alarm signal at the monitoring terminal, and the mobile video camera is configured to receive a video signal with an image of a target suitable for further analysis and transmit it for storage in a database. 2. Система по п.1, отличающаяся тем, что дополнительно содержит транспондеры с собственными идентификационными сигналами, причем общее число транспондеров в системе соответствует количеству мобильных объектов, подлежащих мониторингу, а каждый собственный идентификационный сигнал транспондера отвечает определенному мобильному объекту или его надлежащему владельцу.2. The system according to claim 1, characterized in that it further comprises transponders with their own identification signals, the total number of transponders in the system corresponding to the number of mobile objects to be monitored, and each own identification signal of the transponder corresponds to a specific mobile object or its proper owner. 3. Система по п.1 или 2, отличающаяся тем, что устройство распознавания цели реализовано программно в вычислительном устройстве с памятью.3. The system according to claim 1 or 2, characterized in that the target recognition device is implemented programmatically in a computing device with memory. 4. Система по п.1 или 2, отличающаяся тем, что индивидуальные параметры мобильных объектов выбраны из группы, включающей отношение длины и ширины, форму, цвет, номерной регистрационный знак.4. The system according to claim 1 or 2, characterized in that the individual parameters of the mobile objects are selected from the group including the ratio of length and width, shape, color, license plate number. 5. Система по п.1 или 2, отличающаяся тем, что подвижная видеокамера выполнена с возможностью поворота в вертикальной и горизонтальной плоскостях и/или изменения фокусного расстояния, и/или изменения диафрагмы, и/или настройки на фокус для обеспечения наведения на цель.5. The system according to claim 1 or 2, characterized in that the movable video camera is arranged to rotate in the vertical and horizontal planes and / or change the focal length and / or change the aperture and / or adjust the focus to provide guidance to the target. 6. Система по п.1, отличающаяся тем, что дополнительно содержит датчик обнаружения цели, связанный с устройством распознавания цели, причем устройство распознавания цели выполнено с возможностью анализа сигнала от датчика обнаружения цели.6. The system according to claim 1, characterized in that it further comprises a target detection sensor associated with the target recognition device, the target recognition device configured to analyze a signal from the target detection sensor. 7. Система по п.6, отличающаяся тем, что в качестве датчика обнаружения цели использовано устройство, выбранное из группы, включающей инфракрасные камеры, термовизорные камеры, радиолокационные устройства, датчик перемещения.7. The system according to claim 6, characterized in that a device selected from the group including infrared cameras, thermal imaging cameras, radar devices, a displacement sensor is used as a target detection sensor. 8. Система по п.6 или 7, отличающаяся тем, что устройство распознавания цели выполнено с возможностью вычисления вектора скорости и текущей координаты нахождения цели, а также формирования и передачи на подвижную видеокамеру соответствующего управляющего сигнала для обеспечения наведения подвижной видеокамеры на цель.8. The system according to claim 6 or 7, characterized in that the target recognition device is configured to calculate the velocity vector and the current coordinate of finding the target, as well as generating and transmitting to the mobile video camera the corresponding control signal to ensure that the mobile video camera is aimed at the target. 9. Система по п.8, отличающаяся тем, что устройство распознавания цели выполнено с возможностью передачи управляющего сигнала на подвижную видеокамеру по последовательному каналу связи.9. The system of claim 8, wherein the target recognition device is configured to transmit a control signal to the mobile video camera via a serial communication channel. 10. Система по п.8 или 9, отличающаяся тем, что устройство распознавания цели выполнено с возможностью анализа видеосигнала от видеокамеры, приспособленной для получения видеосигнала цели, и выбора по нему индивидуальных параметров мобильного объекта, анализа идентификационного сигнала, полученного устройством приема/передачи сигнала от транспондера, и выбора по нему индивидуальных параметров, соответствующих мобильному объекту с указанным индивидуальным идентификационным сигналом, сравнения найденных в базе данных индивидуальных параметров с индивидуальными параметрами, выбранными по видеосигналу, и формирования в случае их несовпадения соответствующего сигнала тревоги.10. The system according to claim 8 or 9, characterized in that the target recognition device is configured to analyze a video signal from a video camera adapted to receive a video signal from a target and select individual parameters of a mobile object from it, analyze an identification signal received by a signal receiving / transmitting device from the transponder, and the selection of individual parameters corresponding to the mobile object with the specified individual identification signal, comparing the individual parameters found in the database ametrov with individual parameters selected by the video signal and generating in case of mismatch the corresponding alarm signal. 11. Система по п.10, отличающаяся тем, что устройство распознавания цели выполнено с возможностью анализа видеосигнала от видеокамеры, приспособленной для получения видеосигнала цели, в соответствии с описаниями тревожной ситуации, выбранными из группы, включающей яркость, размер, длительность нахождения в контролируемой зоне, скорость и направление перемещения, количество людей в мобильном объекте.11. The system of claim 10, wherein the target recognition device is configured to analyze a video signal from a video camera adapted to receive a video signal of a target in accordance with descriptions of an alarm situation selected from the group including brightness, size, and duration of stay in a controlled area , speed and direction of movement, the number of people in the mobile object. 12. Система по п.1, отличающаяся тем, что в качестве вычислительного устройства с памятью использован персональный компьютер.12. The system according to claim 1, characterized in that a personal computer is used as a computing device with memory.
RU2003124372/11A 2003-08-07 2003-08-07 System to provided safety and monitoring of mobile objects RU2265531C2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2003124372/11A RU2265531C2 (en) 2003-08-07 2003-08-07 System to provided safety and monitoring of mobile objects

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2003124372/11A RU2265531C2 (en) 2003-08-07 2003-08-07 System to provided safety and monitoring of mobile objects

Publications (2)

Publication Number Publication Date
RU2003124372A RU2003124372A (en) 2005-02-10
RU2265531C2 true RU2265531C2 (en) 2005-12-10

Family

ID=35208435

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2003124372/11A RU2265531C2 (en) 2003-08-07 2003-08-07 System to provided safety and monitoring of mobile objects

Country Status (1)

Country Link
RU (1) RU2265531C2 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2508449C1 (en) * 2012-11-08 2014-02-27 Общество с ограниченной ответственностью Конструкторское бюро аппаратуры связи "Марс" Mine communication system
RU2595532C1 (en) * 2015-03-11 2016-08-27 Федеральное государственное унитарное предприятие федеральный научно-производственный центр "Производственное объединение "Старт" им. М.В. Проценко" (ФГУП ФНПЦ ПО "Старт" им. М.В. Проценко") Radar system for protection of areas with small-frame video surveillance system and optimum number of security guards
RU2642522C1 (en) * 2015-06-26 2018-01-25 Чайна Юниверсити Оф Майнинг Энд Текнолоджи High-accuracy method with use of double label for moving targets position fixing in mine
US11226203B2 (en) 2017-03-31 2022-01-18 Commonwealth Scientific And Industrial Research Organisation Low cost INS

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2508449C1 (en) * 2012-11-08 2014-02-27 Общество с ограниченной ответственностью Конструкторское бюро аппаратуры связи "Марс" Mine communication system
RU2595532C1 (en) * 2015-03-11 2016-08-27 Федеральное государственное унитарное предприятие федеральный научно-производственный центр "Производственное объединение "Старт" им. М.В. Проценко" (ФГУП ФНПЦ ПО "Старт" им. М.В. Проценко") Radar system for protection of areas with small-frame video surveillance system and optimum number of security guards
RU2642522C1 (en) * 2015-06-26 2018-01-25 Чайна Юниверсити Оф Майнинг Энд Текнолоджи High-accuracy method with use of double label for moving targets position fixing in mine
US11226203B2 (en) 2017-03-31 2022-01-18 Commonwealth Scientific And Industrial Research Organisation Low cost INS
RU2768087C2 (en) * 2017-03-31 2022-03-23 Коммонвелт Сайентифик Энд Индастриал Рисерч Организейшн Underground mining vehicle and method for its orientation

Also Published As

Publication number Publication date
RU2003124372A (en) 2005-02-10

Similar Documents

Publication Publication Date Title
US11733370B2 (en) Building radar-camera surveillance system
US11645904B2 (en) Drone-augmented emergency response services
US7889232B2 (en) Method and system for surveillance of vessels
CN107483889A (en) The tunnel monitoring system of wisdom building site control platform
US20180218582A1 (en) Monitoring an Area using Multiple Networked Video Cameras
US7535353B2 (en) Surveillance system and surveillance method
JP2003506806A (en) Surveillance system and related improvements
RU2268497C2 (en) System and method for automated video surveillance and recognition of objects and situations
WO2014031563A2 (en) System and method for neighborhood-scale vehicle monitoring
KR101365762B1 (en) Moving pattern analyzing method for chased license plate number and integrated control system
US11860645B1 (en) Unmanned vehicle security guard
CN107360394A (en) More preset point dynamic and intelligent monitoring methods applied to frontier defense video monitoring system
RU2595532C1 (en) Radar system for protection of areas with small-frame video surveillance system and optimum number of security guards
KR101780929B1 (en) Image surveillence system for moving object
KR20190050113A (en) System for Auto tracking of moving object monitoring system
JPH09130781A (en) Broad area supervisory equipment
RU2265531C2 (en) System to provided safety and monitoring of mobile objects
KR101639068B1 (en) A system of providing ward's images of security cameras by using GIS data
RU36315U1 (en) Security system and monitoring of mobile objects
KR101599614B1 (en) Integrated type vehicle monitoring system using video
RU2542873C1 (en) System for technical surveillance of protected area
WO2020242467A1 (en) Synchronized beacon criminal activity deterrent
CN115115951A (en) Ship monitoring method, system, equipment and computer readable storage medium
EP3893524A1 (en) Hierarchical architecture of a security system for restricted areas of a site
RU36912U1 (en) AUTOMATED VIDEO SURVEILLANCE SYSTEM AND RECOGNITION OF OBJECTS AND SITUATIONS

Legal Events

Date Code Title Description
HE4A Change of address of a patent owner
QB4A Licence on use of patent

Free format text: LICENCE

Effective date: 20110422

QB4A Licence on use of patent

Free format text: PLEDGE

Effective date: 20120412

QZ41 Official registration of changes to a registered agreement (patent)

Free format text: PLEDGE FORMERLY AGREED ON 20120412

Effective date: 20130221

QZ41 Official registration of changes to a registered agreement (patent)

Free format text: PLEDGE FORMERLY AGREED ON 20120412

Effective date: 20150129

QC41 Official registration of the termination of the licence agreement or other agreements on the disposal of an exclusive right

Free format text: PLEDGE FORMERLY AGREED ON 20120412

Effective date: 20150428

PC43 Official registration of the transfer of the exclusive right without contract for inventions

Effective date: 20161024

QB4A Licence on use of patent

Free format text: LICENCE FORMERLY AGREED ON 20210316

Effective date: 20210316