RU2682315C1 - Method of tv camera installed on a tilt-turning platform - Google Patents

Method of tv camera installed on a tilt-turning platform Download PDF

Info

Publication number
RU2682315C1
RU2682315C1 RU2018122297A RU2018122297A RU2682315C1 RU 2682315 C1 RU2682315 C1 RU 2682315C1 RU 2018122297 A RU2018122297 A RU 2018122297A RU 2018122297 A RU2018122297 A RU 2018122297A RU 2682315 C1 RU2682315 C1 RU 2682315C1
Authority
RU
Russia
Prior art keywords
video
block
unit
objects
alarms
Prior art date
Application number
RU2018122297A
Other languages
Russian (ru)
Inventor
Ярослав Ярославович Петричкович
Станислав Юрьевич Миллер
Владимир Владимирович Самойлов
Original Assignee
Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС")
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС") filed Critical Акционерное общество Научно-производственный центр "Электронные вычислительно-информационные системы" (АО НПЦ "ЭЛВИС")
Priority to RU2018122297A priority Critical patent/RU2682315C1/en
Application granted granted Critical
Publication of RU2682315C1 publication Critical patent/RU2682315C1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00—Burglar, theft or intruder alarms
    • G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)

Abstract

FIELD: video surveillance systems; data processing.
SUBSTANCE: invention relates to the field of video surveillance and object recognition.
EFFECT: technical result is the creation of a method of video shooting by a camera mounted on a pan-tilt-turn platform, due to the use of a calculator built into the camera, which controls the movement of the tilt-turn platform along a given route, while forming a single panoramic video image, and also identifies and recognizes objects in each frame of the video image.
3 cl, 1 dwg

Description

Настоящие изобретения относятся к области видеонаблюдения и распознавания объектов, а именно, к способам видеосъемки телекамерой, установленной на наклонно-поворотной платформе, и может применяться в системах видеонаблюдения.The present invention relates to the field of video surveillance and object recognition, and in particular, to methods of video recording by a television camera mounted on a tilt-swivel platform, and can be used in video surveillance systems.

В настоящее время при осуществлении сканирования (видеосъемки) территории, известные из уровня техники телекамеры с удаленным управлением направлением видеосъемки и увеличением, циклически «обходят» позиции видеосъемки, предварительно заданные оператором, останавливаются в каждой позиции на заданное время, при этом транслируют видеоизображение, сформированное в этой позиции, с выбранным увеличением. Данный способ видеосъемки является стандартным и используется практически во всех существующих моделях купольных поворотных телекамер.At present, when scanning (filming), territories known from the prior art of the camera with remote control of the filming direction and magnification cyclically “bypass” the filming positions previously set by the operator, stop at each position for a predetermined time, and the video image generated in this position, with the selected increase. This method of video shooting is standard and is used in almost all existing models of dome rotary cameras.

Преимуществом способа видеосъемки в предварительно заданных позициях является возможность охватить большую территорию видеосъемки и получить изображения в каждой позиции с хорошей детализацией. Недостатком данного способа является наличие слепой зоны во всех позициях кроме текущей и постоянное изменение фона сцены, что затрудняет анализ видеоизображения видеоаналитическими автоматическими методами и оператором. Кроме того, в режиме осуществления видеосъемки в предварительно заданных позициях сложно распознать медленные изменения сцены видеосъемки за короткий временной интервал нахождения телекамеры в каждой позиции. Для устранения этих недостатков используют внешний вычислитель, который полностью управляет телекамерой. Однако, использование внешнего вычислителя серьезно увеличивает нагрузку на каналы передачи данных от телекамеры к вычислителю, и повышает требования к вычислительной мощности вычислителя, вследствие необходимости выполнения с помощью него кодирования и раскодирования видеопотока. Вдобавок некоторые алгоритмы видеоаналитики не работают или плохо работают с предварительно сжатым видеопотоком по причине наличия на видеоизображении невидимых глазу, но присутствующих артефактах сжатия.An advantage of the video shooting method in predefined positions is the ability to cover a large video shooting area and obtain images in each position with good detail. The disadvantage of this method is the presence of a blind zone in all positions except the current one and a constant change in the background of the scene, which complicates the analysis of the video image by automatic video analytic methods and the operator. In addition, in the video recording mode in the predetermined positions, it is difficult to recognize slow changes in the video recording scene for a short time interval when the camera is in each position. To eliminate these shortcomings, an external computer is used that fully controls the camera. However, the use of an external computer seriously increases the load on the data transmission channels from the camera to the computer, and increases the computing power requirements of the computer, due to the need to perform encoding and decoding of the video stream with it. In addition, some video analytics algorithms do not work or work poorly with a pre-compressed video stream due to the presence of invisible to the eye video compression artifacts on the video image.

Наиболее близким к заявленному изобретению является способ видеосъемки поворотной телекамерой, описанный в патенте CN 106331653, в котором формируют видеоизображение при движении камеры по заранее заданному маршруту с остановками, в заранее заданных позициях. В этих позициях маршрута производят захват кадров видеопотока. Во внешнем вычислителе из захваченных кадров формируют единое изображение. На следующем проходе по заранее заданному маршруту осуществляют обновление изображения. Таким образом, во внешнем вычислителе формируют видеопоток с низкой частотой кадров. Частота кадров итогового видеопотока определяется скоростными возможностями поворотной телекамеры и вычислительными возможностями внешнего вычислителя. Для большого круга задач по организации видеонаблюдения на стационарных объектах такой частоты кадров достаточно. Данный способ выбран в качестве прототипа заявленного изобретения.Closest to the claimed invention is a video method of a rotary camera described in patent CN 106331653, in which a video image is formed when the camera moves along a predetermined route with stops at predetermined positions. In these positions of the route capture frames of the video stream. In an external computer, a single image is formed from the captured frames. On the next pass along a predetermined route, the image is updated. Thus, a video stream with a low frame rate is formed in an external computer. The frame rate of the final video stream is determined by the speed capabilities of the PTZ camera and the computing capabilities of an external computer. For a wide range of tasks for the organization of video surveillance at stationary objects, such a frame rate is enough. This method is selected as a prototype of the claimed invention.

Недостатком способа видеосъемки прототипа заявленного изобретения является требуемая высокая мощность внешних вычислителей, а также высокое качество и пропускная способность канала передачи данных от телекамеры до внешнего вычислителя, что усложняет конструкцию телекамеры и способ ее функционирования, и соответственно, удорожает их.The disadvantage of the method of filming a prototype of the claimed invention is the required high power of external computers, as well as the high quality and bandwidth of the data channel from the camera to the external computer, which complicates the design of the camera and the way it operates, and accordingly, increases their cost.

Техническим результатом заявленного изобретения является создание более простого и дешевого способа видеосъемки телекамерой, установленной на наклонно-поворотной платформе, за счет использования встроенного в телекамеру вычислителя, который управляет движением наклонно-поворотной платформы по заданному маршруту, при этом формирует единое панорамное видеоизображение, а также выявляет и распознает объекты на каждом кадре видеоизображения.The technical result of the claimed invention is the creation of a simpler and cheaper method of video shooting with a camera mounted on a tilt-and-pan platform, by using the computer built-in to the camera, which controls the movement of the pan-and-tilt platform along a given route, while forming a single panoramic video image, and also reveals and recognizes objects in each frame of the video image.

Поставленный технический результат достигнут путем создания способа видеосъемки телекамерой, установленной на наклонно-поворотной платформе, в которомThe technical result achieved is achieved by creating a method of video recording with a television camera mounted on an inclined-rotary platform, in which

- задают, в блоке 6 формирования маршрута, набор положений наклонно-поворотной платформы 12;- set, in block 6 the formation of the route, a set of positions of the inclined-rotary platform 12;

- формируют, с помощью блока 6 формирования маршрута, сигналы управления трансфокатором 11, последовательность сигналов управления движением наклонно-поворотной платформой 12 по заданным положениям, сигналы включения или выключения блока 2 вычитания фона, координаты 30 текущего положения наклонно-поворотной платформы 12, а также сигналы сохранения видеокадров в блоке 3 накопления фона в соответствии с текущим положением наклонно-поворотной платформы 12;- form, using the route forming unit 6, the zoom control signals 11, the sequence of motion control signals of the pan-and-tilt platform 12 at predetermined positions, the on / off signals of the background subtraction unit 2, the coordinates 30 of the current position of the pan-and-tilt platform 12, as well as the signals storing video frames in the background accumulation unit 3 in accordance with the current position of the pan-tilt platform 12;

- формируют, с помощью видеосенсора 1, основной видеопоток и передают его блок 3 накопления фона, блок 2 вычитания фона, блок 4 наложения маски, блок 7 наложения служебной видеоинформации;- form, using the video sensor 1, the main video stream and transmit it to the background accumulation unit 3, the background subtraction unit 2, the mask overlay unit 4, the service video information overlay unit 7;

- сохраняют, с помощью блока 3 накопления фона, видеокадры и соответствующие им положения наклонно-поворотной платформы 12 по сигналам захвата кадра, поступающим от блока 6 формирования маршрута и передают их в блок 2 вычитания фона;- save, using the background accumulation unit 3, the video frame and the corresponding positions of the inclined-rotary platform 12 according to the frame capture signals coming from the route forming unit 6 and transmit them to the background subtraction unit 2;

- формируют, с помощью блока 2 вычитания фона, разностную маску текущего видеокадра, полученного от видеосенсора 1, и предшествующего видеокадра, полученного от блока 3 накопления фона, в соответствии с данными о текущем положении наклонно-поворотной платформы 12, полученными от блока 6 формирования маршрута, и передают разностную маску в блок 4 наложения маски;- form, using the background subtracting unit 2, a difference mask of the current video frame received from the video sensor 1 and the previous video frame received from the background accumulating unit 3, in accordance with the data on the current position of the pan-and-tilt platform 12 received from the route forming unit 6 , and transmit the difference mask to block 4 overlay mask;

- формируют, с помощью блока 4 наложения маски, видеокадр с наложенной разностной маской, в областях с выявленным движением накладываем маску таким образом, чтобы данная область была выделена, как зона, где потенциально может находиться целевой объект, остальную часть кадра выделяем как зону, предположительно, не содержащую целевых объектов, и передают полученный видеокадр в блок 5 распознавания объектов;- form, using block 4 masking, video frames with a superimposed differential mask, in the areas with the detected movement we apply the mask so that this area is highlighted as a zone where the target object could potentially be located, we select the rest of the frame as a zone, presumably that does not contain target objects, and transmit the resulting video frame to block 5 recognition of objects;

- распознают, с помощью блока 5 распознавания объектов, объекты на видеокадрах и передают данные распознанных объектов и их параметры в блок 8 принятия решения/формирования метаданных;- recognize, using the block 5 recognition of objects, objects on video frames and transmit the data of the recognized objects and their parameters in block 8 decision / metadata generation;

- принимают решение о выделении или игнорировании объекта, с помощью блока 8 принятия решения и формирования метаданных, на основе данные распознанных объектов и их параметров, полученных от блока 5 распознавания оценок соответствия объекта, при этом, в случае принятия решения о выделении объекта, формируют потоки метаданных распознанных объектов на основе координат текущего положения наклонно-поворотной платформы 12, полученных от блока 6 формирования маршрута и передают сформированные потоки метаданных распознанных объектов в блок 10 формирования тревог, блок 7 наложения служебной видеоинформации и блок 15 коммуникаций;- decide on the allocation or ignoring of the object, using decision block 8 and the formation of metadata, based on the data of the recognized objects and their parameters received from the recognition unit 5 recognition of conformity estimates of the object, in this case, in the case of a decision on the allocation of the object, form flows metadata of recognized objects based on the coordinates of the current position of the pan-tilt platform 12 received from the route forming unit 6 and transmit the generated metadata streams of recognized objects to the block 10 f rmirovaniya alarms, the block 7 and the video overlay service communication unit 15;

- накладывают на распознанные объекты рамки и служебную визуальную информацию об объекте, с помощью блока 7 наложения служебной видеоинформации, на основе потоков метаданных распознанных объектов, и передают метаданные с наложенными рамками и служебной визуальной информацией об объекте в видеокодек 9;- superimpose on the recognized objects frames and service visual information about the object, using the block 7 overlay service video information based on the metadata streams of recognized objects, and transmit metadata with superimposed frames and service visual information about the object in the video codec 9;

- формируют заданное количество сжатых с заданным разрешением видеопотоков, с помощью видеокодека 9, в соответствии с заданным режимом работы телекамеры и передают сжатые видеопотоки в блок 13 формирования видеопотоков;- form a predetermined number of compressed video streams with a given resolution, using the video codec 9, in accordance with a predetermined mode of operation of the camera and transmit the compressed video streams to the video stream generation unit 13;

- формируют, с помощью блока 13 формирования видеопотоков, сжатые видеопотоки для трансляции потребителю в виде потоков протокола RTSP, которые передают в блок 15 коммуникаций;- form, using the block 13 the formation of video streams, compressed video streams for broadcast to the consumer in the form of streams of the RTSP protocol, which are transmitted to the block 15 communications;

- формируют сигналы тревоги, с помощью блока 10 формирования тревог, на основе метаданных распознанных объектов и заданных тревожных линий и зон, и передают сигналы тревоги в блок 15 коммуникаций;- generate alarms using the block 10 generating alarms based on the metadata of recognized objects and the specified alarm lines and zones, and transmit alarms to the block 15 communications;

- формируют сигналы управления фокусным расстоянием объектива с помощью трансфокатора 11;- form the control signals of the focal length of the lens using zoom 11;

- осуществляют, с помощью блока 16 поддержки протокола ONVIF, взаимодействие с внешними объектами 17 по протоколу ONVIF;- carry out, using the ONVIF protocol support unit 16, interact with external objects 17 via the ONVIF protocol;

- осуществляют управление телекамерой, с помощью WEB-интерфейса 14;- control the camera using the WEB-interface 14;

- осуществляют взаимодействие телекамеры с внешними объектами, с помощью блока 15 коммуникаций.- carry out the interaction of the camera with external objects using block 15 communications.

В предпочтительном варианте осуществления способа формируют сигналы тревоги, выбранные из набора сигналов тревог, содержащего тревоги типа объект пересек линию, объект появился в зоне, объект пропал в зоне, объект зашел в зону, объект вышел из зоны, объект слишком долго находится в зоне.In a preferred embodiment of the method, alarms are generated that are selected from a set of alarms containing alarms such as the object crossed the line, the object appeared in the zone, the object disappeared in the zone, the object entered the zone, the object left the zone, the object has been in the zone for too long.

В предпочтительном варианте осуществления способа формируют, с помощью блока 6 формирования маршрута, случайную последовательность сигналов управления движением наклонно-поворотной платформой по заданным положениям.In a preferred embodiment of the method, a random sequence of motion control signals of the tilting-swivel platform at predetermined positions is formed using the route forming unit 6.

Для лучшего понимания заявленного изобретения далее приводится его подробное описание с соответствующими графическими материалами.For a better understanding of the claimed invention the following is a detailed description with the corresponding graphic materials.

Фиг. 1. Общая функциональная схема способа видеосъемки телекамерой, установленной на наклонно-поворотной платформе, выполненная согласно изобретению.FIG. 1. General functional diagram of a method of filming a television camera mounted on a tilt-swivel platform, made according to the invention.

Элементы:Items:

1 - видеосенсор;1 - video sensor;

2 - блок вычитания фона;2 - background subtraction unit;

3 - блок накопления фона;3 - background accumulation unit;

4 - блок наложения маски;4 - block overlay mask;

5 - блок распознавания объектов;5 - block recognition of objects;

6 - блок формирования маршрута;6 - block forming the route;

7 - блок наложения служебной видеоинформации;7 - block overlay service video information;

8 - блок принятия решения и формирования метаданных;8 - block decision making and the formation of metadata;

9 - видеокодек;9 - video codec;

10 - блок формирования тревог;10 - block forming alarms;

11 - трансфокатор;11 - zoom;

12 - наклонно-поворотная платформа;12 - tilt-swivel platform;

13 - блок формирования видеопотоков;13 is a block for the formation of video streams;

14 - WEB-интерфейс;14 - WEB-interface;

15 - блок коммуникаций;15 - communication unit;

16 - блок поддержки протокола ONVIF (Open Network Video Interface Forum - форум открытого сетевого видеоинтерфейса);16 - ONVIF protocol support unit (Open Network Video Interface Forum - open network video interface forum);

17 - внешние объекты;17 - external objects;

18-21 - основной видеопоток;18-21 - the main video stream;

22 - видеокадры и соответствующие им положения наклонно-поворотной платформы;22 - video frames and the corresponding position of the pan-tilt platform;

23 - разностная маска;23 - difference mask;

24 - видеокадр;24 - video frame;

25 - сигналы включения или выключения блока вычитания фона;25 - signals to turn on or off the background subtraction unit;

26 - сигналы сохранения видеокадров в блоке 3 накопления фона;26 - signals to save video frames in block 3 of the accumulation of the background;

27 - данные распознанных объектов;27 - data of recognized objects;

28 - сигналы обратной связи;28 - feedback signals;

29 - потоки метаданных;29 - metadata streams;

30 - координаты текущего положения наклонно-поворотной платформы;30 - coordinates of the current position of the pan-tilt platform;

31 - метаданные с наложенными рамками и служебной визуальной информацией об объекте;31 - metadata with superimposed frames and official visual information about the object;

32 - потоки метаданных;32 - metadata streams;

33 - потоки метаданных;33 - metadata streams;

34 - координаты текущего положения наклонно-поворотной платформы34 - coordinates of the current position of the pan-tilt platform

35 - сигналы управления трансфокатором;35 - zoom control signals;

36 - сигналы управления наклонно-поворотной платформой;36 - control signals of the pan-tilt platform;

37 - видеопотоки с различными разрешениями;37 - video streams with different resolutions;

38 - сигналы тревог;38 - alarms;

39 - видеопотоки по протоколу RTPS (Real Time Streaming Protocol - протокол обработки данных в реальном масштабе времени);39 - video streams using RTPS (Real Time Streaming Protocol - real-time data processing protocol);

40 - сигналы управления телекамерой через WEB-интерфейс;40 - camera control signals via the WEB interface;

41 - данные по протоколу ONVIF;41 - data on the ONVIF protocol;

42 - сигналы управления телекамерой через WEB-интерфейс;42 - camera control signals via the WEB interface;

43 - данные по протоколу ONVIF;43 - data on the ONVIF protocol;

44 - данные взаимодействия телекамеры с внешними объектами.44 - data from the interaction of the camera with external objects.

Рассмотрим функционирование заявленного способа видеосъемки телекамерой, установленной на наклонно-поворотной платформе (фиг. 1).Consider the operation of the claimed method of filming a television camera mounted on a tilt-swivel platform (Fig. 1).

Задают, в блоке 6 формирования маршрута, маршрут перемещения телекамеры в виде набора положений наклонно-поворотной платформы и трансфокатора.In the block 6 of the formation of the route, the movement route of the television camera is set in the form of a set of positions of the pan-tilt platform and zoom.

С помощью блока 6 формирования маршрута управляют движением телекамеры по заданным положениям и формируют случайную последовательность сигналов управления, для предотвращения выявления закономерностей перемещения телекамеры по маршруту потенциальным злоумышленником. С помощью блока 6 формирования маршрута формируют сигналы 35 управления трансфокатором 11, и сигналы 36 управления наклонно-поворотной платформой 12, и на основе сигналов 28 обратной связи формирует сигналы 25 включения или выключения блока 2 вычитания фона, координаты 30 текущего положения наклонно-поворотной платформы 12, а также сигналы 26 сохранения видеокадров в блоке 3 накопления фона в соответствии с текущим положением наклонно-поворотной платформы 12.Using the block 6 of the formation of the route control the movement of the camera at predetermined positions and form a random sequence of control signals to prevent the detection of patterns of movement of the camera along the route by a potential attacker. Using the route forming unit 6, the zoom control signals 35 are generated 11 and the pan-tilt platform control signals 36, and based on the feedback signals 28, the background subtracting unit 2 is turned on or off 25 and the coordinate 30 of the current position of the pan-tilt platform 12 , as well as signals 26 for saving video frames in the background accumulating unit 3 in accordance with the current position of the pan-tilt platform 12.

С помощью видеосенсора 1 формируют основной видеопоток 18, 19, 20, 21, который передают в блок 3 накопления фона, блок 2 вычитания фона, блок 4 наложения маски и блок 7 наложения служебной видеоинформации.Using the video sensor 1, the main video stream 18, 19, 20, 21 is formed, which is transmitted to the background accumulation unit 3, the background subtraction unit 2, the mask overlay unit 4 and the service video information overlay unit 7.

Сохраняют в блоке 3 накопления фона, видеокадры и соответствующие им положения наклонно-поворотной платформы по сигналам 26 захвата видеокадра, поступающим от блока 6 формирования маршрута и передают их 22 в блок 2 вычитания фона.The background accumulations, video frames and the corresponding positions of the pan-tilt platform are stored in the block 3 according to the video frame capture signals 26 received from the route generating unit 6 and transmitted 22 to the background subtracting unit 2.

С помощью блока 2 вычитания фона формируют разностную маску текущего, полученного 20 от видеосенсора 1 и предшествующего, полученного 22 от блока 3 накопления фона, видеокадров в соответствии с данными о текущем положении наклонно-поворотной платформы, поступающими 26 от блока 6 формирования маршрута, и передают 23 полученную разностную маску в блок 4 наложения маски.Using the background subtraction unit 2, a difference mask is formed of the current one received 20 from the video sensor 1 and the previous one received 22 from the background accumulation unit 3, video frames in accordance with the data on the current position of the pan-and-tilt platform, received 26 from the route forming unit 6, and transmitted 23 received differential mask in block 4 overlay mask.

С помощью блока 4 наложения маски формируют видеокадр для блока 5 распознавания объектов. В областях с выявленным движением накладываем маску таким образом, чтобы данная область была выделена, как зона, где потенциально может находиться целевой объект, остальную часть кадра выделяем как зону, предположительно не содержащую целевых объектов. Полученный таким образом видеокадр передают 24 в блок 5 распознавания объектов.Using block 4 overlay masks form a video frame for block 5 recognition of objects. In areas with detected movement, we apply a mask in such a way that this area is highlighted as a zone where the target object can potentially be located, and the rest of the frame is selected as a zone supposedly not containing target objects. The video frame thus obtained is transmitted 24 to the object recognition unit 5.

С помощью блока 5 распознавания объектов распознают объекты на видеокадрах, используя различные алгоритмы. Данные распознанных объектов и их параметры передают 27 в блок 8 принятия решения/формирования метаданных.Using the block 5 recognition of objects recognize objects on video frames using various algorithms. The data of the recognized objects and their parameters are transmitted 27 to the block 8 decision / metadata generation.

С помощью блока 8 принятия решения и формирования метаданных на основе полученных 27 от блока 5 данных распознанных объектов и их параметров, принимают решение о выделении или игнорировании объекта. В случае принятия решения о выделении объекта, на основании относительных координат текущего положения наклонно-поворотной платформы, полученных 30 от блока 6 формирования маршрута, формируют потоки метаданных распознанных объектов. Сформированные таким образом потоки метаданных 29, 32, 33 передают в блок 10 формирования тревог, блок 7 наложения служебной видеоинформации и блок 15 коммуникаций.Using decision block 8 and the formation of metadata based on the data 27 of the recognized objects and their parameters received from block 5, a decision is made to select or ignore the object. In the event that a decision is made to allocate an object, based on the relative coordinates of the current position of the pan-tilt platform received 30 from the route forming unit 6, metadata streams of recognized objects are generated. The metadata streams thus formed 29, 32, 33 are transmitted to the alarm generation unit 10, the service video information overlay unit 7, and the communication unit 15.

С помощью блока 7 наложения служебной видеоинформации на основе полученных 29 метаданных, накладывают на распознанные объекты рамки и служебную визуальную информацию об объекте и передают метаданные 31 с наложенными рамками и служебной визуальной информацией об объекте в видеокодек 9.Using block 7, the overlay of service video information based on the received 29 metadata is applied to the recognized objects frames and service visual information about the object and transmit metadata 31 with the superimposed frames and service visual information about the object in the video codec 9.

С помощью видеокодека 9 формируют один или несколько видеопотоков 37 с различными разрешениями, в соответствии с заданным режимом работы. Полученные таким образом, сжатые видеопотоки 37 передают на вход блока 13 формирования видеопотоков.Using the video codec 9 form one or more video streams 37 with different resolutions, in accordance with a given mode of operation. Thus obtained, the compressed video streams 37 are transmitted to the input of the block 13 the formation of video streams.

С помощью блока 13 формирования видеопотоков подготавливают сжатые видеопотоки к трансляции потребителю по протоколу RTSP. Видеопотоков может быть несколько, с различными разрешениями. Сформированные видеопотоки 39 по протоколу RTPS передают в блок 15 коммуникаций.Using block 13 of the formation of video streams prepare compressed video streams for broadcast to the consumer using the RTSP protocol. There can be several video streams with different resolutions. The generated video streams 39 are transmitted via RTPS to the communication unit 15.

С помощью блока 10 формирования тревог, на основе поступающих в него метаданных 32 распознанных объектов и заданных тревожных линий и зон, формируют следующие виды сигналов тревоги: типа объект пересек линию, объект появился в зоне, объект пропал в зоне, объект зашел в зону, объект вышел из зоны, объект слишком долго находится в зоне. Сформированные сигналы 38 тревог передают в блок 15 коммуникаций.Using block 10 for generating alarms, based on the metadata of 32 recognized objects and given alarm lines and zones, it generates the following types of alarms: such as an object crossed a line, an object appeared in a zone, an object disappeared in a zone, an object entered a zone, an object out of the zone, the object is too long in the zone. The generated alarm signals 38 are transmitted to the communication unit 15.

С помощью трансфокатора 11 формируют сигналы управления фокусным расстоянием объектива. Таким образом можно или более детально рассматривать сцену при увеличении фокусного расстояния объектива или захватывать более общий план при уменьшении фокусного расстояния.Using zoom 11 form the control signals of the focal length of the lens. Thus, you can either look at the scene in more detail with an increase in the focal length of the lens or capture a more general plan while decreasing the focal length.

С помощью блока 16 поддержки протокола ONVIF осуществляют взаимодействие 41, 44 через блок 15 коммуникаций с внешними объектами 17 по протоколу ONVIF передачи данных.Using the ONVIF protocol support unit 16, an interaction 41, 44 is carried out through the communication unit 15 with external objects 17 via the ONVIF data transfer protocol.

С помощью WEB-интерфейса 14 осуществляют управления 40, 42 телекамерой.Using the WEB-interface 14 control 40, 42 of the camera.

С помощью блока 15 коммуникаций осуществляют взаимодействие 44 телекамеры с внешними объектами.Using the communication unit 15, 44 cameras interact with external objects.

Хотя описанный выше вариант выполнения изобретения был изложен с целью иллюстрации заявленного изобретения, специалистам ясно, что возможны разные модификации, добавления и замены, не выходящие из объема и смысла заявленного изобретения, раскрытого в прилагаемой формуле изобретения.Although the embodiment described above has been set forth to illustrate the claimed invention, it is clear to those skilled in the art that various modifications, additions and substitutions are possible without departing from the scope and meaning of the claimed invention disclosed in the attached claims.

Claims (19)

1. Способ видеосъемки телекамерой, установленной на наклонно-поворотной платформе, в котором1. The method of video shooting with a camera mounted on a tilt-swivel platform, in which - задают в блоке 6 формирования маршрута набор положений наклонно-поворотной платформы 12;- set in block 6 the formation of the route a set of positions of the inclined-rotary platform 12; - формируют с помощью блока 6 формирования маршрута сигналы управления трансфокатором 11, последовательность сигналов управления движением наклонно-поворотной платформой 12 по заданным положениям, сигналы включения или выключения блока 2 вычитания фона, координаты 30 текущего положения наклонно-поворотной платформы 12, а также сигналы сохранения видеокадров в блоке 3 накопления фона в соответствии с текущим положением наклонно-поворотной платформы 12;- generate, using the route forming unit 6, zoom control signals 11, a sequence of motion control signals of the pan-and-tilt platform 12 at predetermined positions, on / off signals of the background subtracting unit 2, coordinates 30 of the current position of the pan-and-tilt platform 12, as well as video frame saving signals in the block 3 of the accumulation of the background in accordance with the current position of the inclined-rotary platform 12; - формируют с помощью видеосенсора 1 основной видеопоток и передают его блок 3 накопления фона, блок 2 вычитания фона, блок 4 наложения маски, блок 7 наложения служебной видеоинформации;- form the main video stream using the video sensor 1 and transmit its background accumulation unit 3, background subtraction unit 2, mask overlay unit 4, service video information overlay unit 7; - сохраняют с помощью блока 3 накопления фона видеокадры и соответствующие им положения наклонно-поворотной платформы 12 по сигналам захвата кадра, поступающим от блока 6 формирования маршрута, и передают их в блок 2 вычитания фона;- save using the background frame accumulation unit 3 of the video frame and the corresponding positions of the inclined-rotary platform 12 according to the frame capture signals coming from the route formation unit 6, and transfer them to the background subtraction unit 2; - формируют с помощью блока 2 вычитания фона разностную маску текущего видеокадра, полученного от видеосенсора 1, и предшествующего видеокадра, полученного от блока 3 накопления фона, в соответствии с данными о текущем положении наклонно-поворотной платформы 12, полученными от блока 6 формирования маршрута, и передают разностную маску в блок 4 наложения маски;- form using the background subtracting unit 2 a difference mask of the current video frame received from the video sensor 1 and the previous video frame received from the background accumulating unit 3, in accordance with the data on the current position of the inclined-rotary platform 12 received from the route forming unit 6, and transmit the difference mask in block 4 overlay mask; - формируют с помощью блока 4 наложения маски видеокадр с наложенной разностной маской, в областях с выявленным движением накладывают маску таким образом, чтобы данная область была выделена как зона, где потенциально может находиться целевой объект, остальную часть кадра выделяют как зону, предположительно, не содержащую целевых объектов, и передают полученный видеокадр в блок 5 распознавания объектов;- form using masking unit 4 masks of video frames with a superimposed difference mask, mask in such areas with detected motion so that this area is highlighted as a zone where the target object could potentially be located, the rest of the frame is selected as a zone, presumably not containing target objects, and transmit the resulting video frame to block 5 recognition of objects; - распознают с помощью блока 5 распознавания объектов объекты на видеокадрах и передают данные распознанных объектов и их параметры в блок 8 принятия решения/формирования метаданных;- using the block 5 recognition of objects, they recognize objects on video frames and transmit the data of recognized objects and their parameters to block 8 decision / metadata generation; - принимают решение о выделении или игнорировании объекта с помощью блока 8 принятия решения и формирования метаданных на основе данных распознанных объектов и их параметров, полученных от блока 5 распознавания оценок соответствия объекта, при этом в случае принятия решения о выделении объекта формируют потоки метаданных распознанных объектов на основе координат текущего положения наклонно-поворотной платформы 12, полученных от блока 6 формирования маршрута, и передают сформированные потоки метаданных распознанных объектов в блок 10 формирования тревог, блок 7 наложения служебной видеоинформации и блок 15 коммуникаций;- decide on the allocation or ignoring of the object using decision block 8 and the formation of metadata based on the data of the recognized objects and their parameters received from the block 5 recognition of conformity assessment of the object, while in the case of a decision on the allocation of the object form metadata flows of recognized objects on based on the coordinates of the current position of the inclined-rotary platform 12 received from the route forming unit 6, and the generated metadata streams of the recognized objects are transmitted to the block 10 alarms alarms, block 7 overlay service video information and block 15 communications; - накладывают на распознанные объекты рамки и служебную визуальную информацию об объекте с помощью блока 7 наложения служебной видеоинформации на основе потоков метаданных распознанных объектов и передают метаданные с наложенными рамками и служебной визуальной информацией об объекте в видеокодек 9;- superimpose on the recognized objects the frames and service visual information about the object using the block 7 overlay service video information based on the metadata streams of the recognized objects and transmit metadata with superimposed frames and service visual information about the object in the video codec 9; - формируют заданное количество сжатых с заданным разрешением видеопотоков с помощью видеокодека 9 в соответствии с заданным режимом работы телекамеры и передают сжатые видеопотоки в блок 13 формирования видеопотоков;- form a predetermined number of compressed video streams with a given resolution using the video codec 9 in accordance with a predetermined camera operating mode and transmit the compressed video streams to the video stream generation unit 13; - формируют с помощью блока 13 формирования видеопотоков сжатые видеопотоки для трансляции потребителю в виде потоков протокола RTSP, которые передают в блок 15 коммуникаций;- using compressed video streams forming unit 13, compressed video streams are formed for transmission to the consumer in the form of RTSP protocol streams, which are transmitted to communication unit 15; - формируют сигналы тревоги с помощью блока 10 формирования тревог на основе метаданных распознанных объектов и заданных тревожных линий и зон и передают сигналы тревоги в блок 15 коммуникаций;- generate alarms using the block 10 generating alarms based on the metadata of recognized objects and the specified alarm lines and zones and transmit alarms to the block 15 communications; - формируют сигналы управления фокусным расстоянием объектива с помощью трансфокатора 11;- form the control signals of the focal length of the lens using zoom 11; - осуществляют с помощью блока 16 поддержки протокола ONVIF взаимодействие с внешними объектами 17 по протоколу ONVIF;- using the block 16 supporting the ONVIF protocol, interact with external objects 17 via the ONVIF protocol; - осуществляют управление телекамерой с помощью WEB-интерфейса 14;- control the camera using the WEB-interface 14; - осуществляют взаимодействие телекамеры с внешними объектами с помощью блока 15 коммуникаций.- carry out the interaction of the camera with external objects using block 15 communications. 2. Способ по п. 1, отличающийся тем, что формируют сигналы тревоги, выбранные из набора сигналов тревог, содержащего тревоги типа объект пересек линию, объект появился в зоне, объект пропал в зоне, объект зашел в зону, объект вышел из зоны, объект слишком долго находится в зоне.2. The method according to p. 1, characterized in that they generate alarms selected from a set of alarms containing alarms of the type the object crossed the line, the object appeared in the zone, the object disappeared in the zone, the object entered the zone, the object left the zone, the object too long in the zone. 3. Способ по п. 1, отличающийся тем, что формируют с помощью блока 6 формирования маршрута случайную последовательность сигналов управления движением наклонно-поворотной платформой по заданным положениям.3. The method according to claim 1, characterized in that a random sequence of motion control signals of the tilting-swivel platform at predetermined positions is formed using the route forming unit 6.
RU2018122297A 2018-06-19 2018-06-19 Method of tv camera installed on a tilt-turning platform RU2682315C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2018122297A RU2682315C1 (en) 2018-06-19 2018-06-19 Method of tv camera installed on a tilt-turning platform

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2018122297A RU2682315C1 (en) 2018-06-19 2018-06-19 Method of tv camera installed on a tilt-turning platform

Publications (1)

Publication Number Publication Date
RU2682315C1 true RU2682315C1 (en) 2019-03-19

Family

ID=65805899

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2018122297A RU2682315C1 (en) 2018-06-19 2018-06-19 Method of tv camera installed on a tilt-turning platform

Country Status (1)

Country Link
RU (1) RU2682315C1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050947A1 (en) * 2008-03-03 2011-03-03 Videoiq, Inc. Video camera having relational video database with analytics-produced metadata
US20140050455A1 (en) * 2012-08-20 2014-02-20 Gorilla Technology Inc. Correction method for object linking across video sequences in a multiple camera video surveillance system
RU2565243C1 (en) * 2013-07-11 2015-10-20 Панасоник Корпорэйшн Device for assisting tracking, system for assisting tracking and method of assisting tracking
RU2632473C1 (en) * 2016-09-30 2017-10-05 ООО "Ай Ти Ви групп" Method of data exchange between ip video camera and server (versions)
GB2550509A (en) * 2015-02-20 2017-11-22 Panasonic Ip Man Co Ltd Tracking assistance device, tracking assistance system, and tracking assistance method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110050947A1 (en) * 2008-03-03 2011-03-03 Videoiq, Inc. Video camera having relational video database with analytics-produced metadata
US20140050455A1 (en) * 2012-08-20 2014-02-20 Gorilla Technology Inc. Correction method for object linking across video sequences in a multiple camera video surveillance system
RU2565243C1 (en) * 2013-07-11 2015-10-20 Панасоник Корпорэйшн Device for assisting tracking, system for assisting tracking and method of assisting tracking
GB2550509A (en) * 2015-02-20 2017-11-22 Panasonic Ip Man Co Ltd Tracking assistance device, tracking assistance system, and tracking assistance method
RU2632473C1 (en) * 2016-09-30 2017-10-05 ООО "Ай Ти Ви групп" Method of data exchange between ip video camera and server (versions)

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Хамухин А.В. Высокоэффективные алгоритмы семантической обработки видеоизображений и управления приборными комплексами технического зрения, Диссертация, 05.13.01 - Системный анализ, управление и обработка информации (информационно-вычислительное обеспечение), Том 1, Москва, 2016. *

Similar Documents

Publication Publication Date Title
US8451329B2 (en) PTZ presets control analytics configuration
US9509900B2 (en) Camera control method, and camera control device for same
KR100883632B1 (en) System and method for intelligent video surveillance using high-resolution video cameras
KR101120131B1 (en) Intelligent Panorama Camera, Circuit and Method for Controlling thereof, and Video Monitoring System
US10334150B2 (en) Camera system and method of tracking object using the same
JP2007158860A (en) Photographing system, photographing device, image switching device, and data storage device
WO2014084996A2 (en) Window blanking for pan/tilt/zoom camera
KR101096157B1 (en) watching apparatus using dual camera
KR20130130544A (en) Method and system for presenting security image
KR102282470B1 (en) Camera apparatus and method of object tracking using the same
US20110255590A1 (en) Data transmission apparatus and method, network data transmission system and method using the same
US20180213185A1 (en) Method and system for monitoring a scene based on a panoramic view
CN114913471A (en) Image processing method and device and readable storage medium
KR20150019230A (en) Method and apparatus for tracking object using multiple camera
RU2682315C1 (en) Method of tv camera installed on a tilt-turning platform
US11936920B2 (en) Method and system for transmitting a video stream
JP2018107587A (en) Monitoring system
RU2686154C1 (en) Television camera and method of generating panoramic image and recognition of objects on it
RU182656U1 (en) CAMERA FOR FORMING A PANORAMIC VIDEO IMAGE AND RECOGNITION OF OBJECTS ON IT
KR20180017329A (en) Image Pickup Apparatus
CA3142213A1 (en) Control system and method
KR20160074811A (en) Cctv monitoring system for detecting event occurrence using virtual line and method thereof
KR20180134114A (en) Real Time Video Surveillance System and Method
KR100278989B1 (en) Closed Circuit Monitoring Apparatus and Method
KR102492679B1 (en) Apparatus and method for generating object analysis based monitoring image and recording medium for performing the method

Legal Events

Date Code Title Description
QB4A Licence on use of patent

Free format text: LICENCE FORMERLY AGREED ON 20210615

Effective date: 20210615