RU2719328C1 - System for automatic creation of scenario video clip with preset object or group of objects presence in frame - Google Patents

System for automatic creation of scenario video clip with preset object or group of objects presence in frame Download PDF

Info

Publication number
RU2719328C1
RU2719328C1 RU2019144215A RU2019144215A RU2719328C1 RU 2719328 C1 RU2719328 C1 RU 2719328C1 RU 2019144215 A RU2019144215 A RU 2019144215A RU 2019144215 A RU2019144215 A RU 2019144215A RU 2719328 C1 RU2719328 C1 RU 2719328C1
Authority
RU
Russia
Prior art keywords
unit
data
video data
scenario
frame
Prior art date
Application number
RU2019144215A
Other languages
Russian (ru)
Inventor
Антон Владимирович Роженков
Сергей Сергеевич Клюев
Денис Евгеньевич Калиниченко
Дмитрий Вячеславович Гуричев
Original Assignee
Общество с ограниченной ответственностью "ФАН ЭДИТОР"
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Общество с ограниченной ответственностью "ФАН ЭДИТОР" filed Critical Общество с ограниченной ответственностью "ФАН ЭДИТОР"
Priority to RU2019144215A priority Critical patent/RU2719328C1/en
Application granted granted Critical
Publication of RU2719328C1 publication Critical patent/RU2719328C1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment

Abstract

FIELD: data processing.
SUBSTANCE: invention relates to systems for creating a scenario video clip. System comprises a capturing unit which includes a primary video data recording device, an information storage module including a unit for storing primary video data, a unit for identifying a given object or group of objects in primary video data, unit for inputting information on a given object or group of objects for identification thereof, unit for extracting relevant video data with presence in a frame of a given object or group of objects, a unit for processing relevant video data, a scenario template including a set of data for operation of the capturing unit, a unit for extracting relevant video data and a unit for processing relevant video data, wherein each primary video data recording device from the capturing unit operates according to the scenario template data, wherein the relevant video data extraction unit includes software, which enables to cut video clips with presence of a predetermined object in the frame from primary video data by the marks set by the identification unit and the script template data, wherein the relevant video data processing unit includes software which enables to generate scenario video clips using the relevant data generated by the extraction unit and the script template data, the information storage module further includes a storage unit for storing relevant video data, a unit for storing scenario templates, a unit for storing scenario video clips, a stationary shooting area with an additional identification unit, a movable shooting area from a given motion path, with an additional identification unit.
EFFECT: technical result is enabling automatic creation of scenario video clip with preset object presence in frame.
10 cl, 1 dwg

Description

Система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.A system for automatically creating a scenario video with the presence of a given object or group of objects in the frame.

Изобретение относится к системам создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов за счет системы идентификации. Система предназначена для формирования видеоролика, снятого в местах оказания развлекательных услуг, проведения культурно-массовых и спортивных мероприятий, с изначально заданным сценарием. Цель создания видеороликов - сохранение впечатлений от участия в соревнованиях, от посещения определенного места, повышение популярности места, на территории которого был создан видеоролик.The invention relates to systems for creating a scenario video with the presence in the frame of a given object or group of objects due to the identification system. The system is designed to form a video shot in places of entertainment services, cultural and sporting events, with the original script. The purpose of creating videos is to preserve the impressions of participating in competitions, from visiting a certain place, increasing the popularity of the place in whose territory the video was created.

Настоящее изобретение является техническим развитием системы для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов (Патент RU2683499C1), содержащей: блок съемки, включающий, по крайней мере, одно устройство записи первичных видеоданных; модуль хранения информации, включающий блок для хранения первичных видеоданных; блок идентификации заданного объекта или группы объектов в первичных видеоданных; блок ввода информации о заданном объекте или группе объектов для их идентификации; блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных; блок обработки релевантных видеоданных; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения релевантных видеоданных и блока обработки релевантных видеоданных, причем каждое устройство записи первичных видеоданных из блока съемки работает по данным сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре; причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров; причем блок обработки релевантных видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы; при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов. Блок обработки релевантных видеоданных может быть выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона. Блок идентификации может включать электронное устройство с уникальным идентификатором. Система может дополнительно содержать блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети. Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи и/или с возможностью выбора сценарного шаблона. Блок съемки может дополнительно включать телеметрическую систему. Система может формировать сценарный видеоролик в режиме реального времени.The present invention is the technical development of a system for automatically creating a scenario video with the presence of a given object or group of objects with the possibility of automatically creating a scenario video with the presence of a given object or group of objects in the frame (Patent RU2683499C1), comprising: a shooting unit including at least , one primary video recorder; an information storage module including a unit for storing primary video data; an identification unit for a given object or group of objects in the primary video data; a unit for inputting information about a given object or group of objects for their identification; a block for extracting relevant video data with the presence of a given object or group of objects, and relevant video data means video fragments with the presence of a given object in the frame, cut out according to marks set by the identification unit from the primary video data; a block for processing relevant video data; at least one scenario template including a data set for the operation of the shooting unit, the relevant video data extraction unit, and the relevant video data processing unit, each primary video data recording device from the shooting unit working according to the scenario template data, in which the scenario template data regarding the operation of the block shooting are data specifying, in particular, the plan of the frame, the depth of field, the geometry of the frame, the field of view of the lens, camera movement, approximation and removal of a given object in the frame; moreover, the relevant video data extraction unit includes software that allows you to cut video fragments with the presence of a given object in the frame from the primary video data according to the labels set by the identification unit and the scenario template data, in which the data of the scenario template in terms of generating relevant video data is the data that specify in particular, the location of a given object in the frame, the length of the video clip, the number of video clips, frame synchronization; moreover, the processing unit for relevant video data includes software that allows you to create scenario videos using the relevant data generated by the extraction unit and the data of the scenario template, in which the data of the scenario template in terms of the operation of the processing unit are, in particular, data specifying the type of editing, rhythm editing, the duration of the installation episode, the sequence of plans and frames, color correction, the concentration of attention in the frame at certain objects of shooting, adding graphic special effects, combining the frame with the telemetry system data; wherein the information storage module further includes a storage unit for relevant video data, a storage unit for scenario templates, a storage unit for scenario videos. The relevant video data processing unit may be configured to generate scenario videos based on the relevant video data and scenario template data. The identification unit may include an electronic device with a unique identifier. The system may further comprise a scenario video transmission unit, at least in one of the following ways: online broadcasting, recording to a medium, transmission via the Internet, in particular via social networks. The information input unit may be configured to select a method for transmitting a scenario video by a transmission unit and / or with the option of selecting a scenario template. The survey unit may further include a telemetry system. The system can generate a scenario video in real time.

В данную систему заложены возможности дальнейших совершенствований, связанных с адаптацией к конкретным мероприятиям, связанным, в частности, с подвижными спортивными играми, развлечениями, состязаниями, например, с набирающими популярность картинговыми заездами. Кроме того, известная система не учитывает в полной мере желание пользователя влиять на создание видеороликов.This system contains opportunities for further improvements related to adaptation to specific events related, in particular, with outdoor sports games, entertainment, competitions, for example, with the increasing popularity of karting races. In addition, the known system does not fully take into account the desire of the user to influence the creation of videos.

Задачей изобретения являлось совершенствование известной системы – устранение вышеуказанных недостатков.The objective of the invention was to improve the well-known system - the elimination of the above disadvantages.

Технический результат – оптимизация (сокращение вычислительного ресурса) процесса создания видеоролика и расширение возможностей пользователя влиять на конечный результат.The technical result is the optimization (reduction of the computing resource) of the video creation process and the expansion of the user's ability to influence the final result.

Указанная задача решается системой для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, содержащей: блок съемки, включающий, по крайней мере, одно устройство записи первичных видеоданных; модуль хранения информации, включающий блок для хранения первичных видеоданных; блок идентификации заданного объекта или группы объектов в первичных видеоданных; блок ввода информации о заданном объекте или группе объектов для их идентификации; блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных; блок обработки релевантных видеоданных; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения релевантных видеоданных и блока обработки релевантных видеоданных, причем каждое устройство записи первичных видеоданных из блока съемки работает по данным сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре; причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров; причем блок обработки релевантных видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы; при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов, которая, согласно предложению содержит: по меньшей мере, одну стационарную зону съёмки с дополнительным блоком идентификации, фиксирующим время участия пользователя в кадре или дающим команду на отсчёт количества времени участия пользователя в кадре, задаваемое в настройках; по меньшей мере, одну подвижную зону съёмки с заданной траекторий движения, с дополнительным блоком идентификации, фиксирующим время участия пользователя в кадре или дающим команду на отсчёт количества времени участия пользователя в кадре, задаваемое в настройках, при этом дополнительный блок идентификации подвижной зоны съёмки связан с устройствами идентификации пользователя, размещёнными по траектории движения.This problem is solved by the system for automatically creating a scenario video with the presence of a given object or group of objects with the ability to automatically create a scenario video with the presence of a given object or group of objects in the frame, containing: a shooting unit including at least one primary video recording device ; an information storage module including a unit for storing primary video data; an identification unit for a given object or group of objects in the primary video data; a unit for inputting information about a given object or group of objects for their identification; a block for extracting relevant video data with the presence of a given object or group of objects, and relevant video data means video fragments with the presence of a given object in the frame, cut out according to marks set by the identification unit from the primary video data; a block for processing relevant video data; at least one scenario template including a data set for the operation of the shooting unit, the relevant video data extraction unit, and the relevant video data processing unit, each primary video data recording device from the shooting unit working according to the scenario template data, in which the scenario template data regarding the operation of the block shooting are data specifying, in particular, the plan of the frame, the depth of field, the geometry of the frame, the field of view of the lens, camera movement, approximation and removal of a given object in the frame; moreover, the relevant video data extraction unit includes software that allows you to cut video fragments with the presence of a given object in the frame from the primary video data according to the labels set by the identification unit and the scenario template data, in which the data of the scenario template in terms of generating relevant video data is the data that specify in particular, the location of a given object in the frame, the length of the video clip, the number of video clips, frame synchronization; moreover, the processing unit for relevant video data includes software that allows you to create scenario videos using the relevant data generated by the extraction unit and the data of the scenario template, in which the data of the scenario template in terms of the operation of the processing unit are, in particular, data specifying the type of editing, rhythm editing, the duration of the installation episode, the sequence of plans and frames, color correction, the concentration of attention in the frame at certain objects of shooting, adding graphic special effects, combining the frame with the telemetry system data; wherein the information storage module further includes a storage unit for relevant video data, a storage unit for scenario templates, a storage unit for scenario videos, which, according to the proposal, comprises: at least one stationary shooting area with an additional identification unit, fixing the time of user participation in the frame or giving a command on the countdown of the amount of time of user participation in the frame, specified in the settings; at least one movable shooting zone with a given path of movement, with an additional identification unit, fixing the time of user participation in the frame or giving a command to count the amount of time the user takes part in the frame, specified in the settings, while the additional block for identifying the moving shooting zone is associated with user identification devices placed along the trajectory of movement.

Как и в прототипе блок обработки релевантных видеоданных может быть выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона.As in the prototype, the relevant video data processing unit can be configured to generate scenario videos based on the relevant video data and scenario template data.

Блок идентификации может включать электронное устройство с уникальным идентификатором.The identification unit may include an electronic device with a unique identifier.

Система может дополнительно содержать блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.The system may further comprise a scenario video transmission unit, at least in one of the following ways: online broadcasting, recording to a medium, transmission via the Internet, in particular via social networks.

Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи и/или с возможностью выбора сценарного шаблона.The information input unit may be configured to select a method for transmitting a scenario video by a transmission unit and / or with the option of selecting a scenario template.

Блок съемки может дополнительно включать телеметрическую систему.The survey unit may further include a telemetry system.

Система может формировать сценарный видеоролик в режиме реального времени.The system can generate a scenario video in real time.

В качестве идентификатора применена (как предпочтительный вариант) RFID-метка.An RFID tag is used as an identifier (as a preferred option).

В качестве устройств идентификации пользователя, размещённых по траектории движения целесообразно использовать IR-датчики.It is advisable to use IR sensors as user identification devices located along the motion path.

Предложенное изобретение поясняется графическим материалом.The proposed invention is illustrated by graphic material.

На чертеже представлена общая схема системы автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.The drawing shows a General diagram of a system for automatically creating a scenario video with the presence in the frame of a given object or group of objects.

Под термином «сценарный шаблон» в данном описании понимается набор данных для работы определенных блоков системы, которые определяют сюжет и художественный стиль сценарного видеоролика.The term “scenario template” in this description refers to a set of data for the operation of certain blocks of the system that determine the plot and artistic style of the scenario video.

Под термином «заданный объект» в данном описании подразумевается движущийся объект, который интересен потребителю и присутствие которого он хочет запечатлеть в видеоролике. Это может быть сам потребитель, если цель сценарного видеоролика, например, является сохранение впечатлений от полученной развлекательной услуги. Это может быть машина, когда территорией оказания развлекательных услуг является гоночная трасса. Это может быть участник соревнований, например в случае проведения спортивных мероприятий. The term "predetermined object" in this description means a moving object that is interesting to the consumer and whose presence he wants to capture in the video. It may be the consumer himself, if the purpose of the scenario video, for example, is to preserve the impressions of the received entertainment services. It can be a car when the territory of entertainment services is a race track. This may be a competitor, for example in the case of sporting events.

Под термином «потребитель» в данном описании понимается человек, который получает определенным способом готовый сценарный видеоролик, сформированный предложенной системой.The term "consumer" in this description refers to a person who receives in a certain way a ready-made scenario video generated by the proposed system.

Предложенная система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов содержит следующие блоки:The proposed system for automatically creating a scenario video with the presence of a given object or group of objects in the frame contains the following blocks:

Блок сьемки (1), включающий, по крайней мере, одно устройство записи первичных видеоданных. В качестве устройств первичных видеоданных возможно использование стандартных видеокамер, видеокамер с разным фокусным расстоянием, управляемых видеокамер, в том числе установленных на беспилотных летательных аппаратах с дистанционным управлением. Преимущественно блок сьемки содержит множество видеокамер различного вида, которые работают по данным сценарного шаблона. К данным сценарного шаблона в части работы блока съемки относятся, в частности, данные, задающие план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре и др. Блок съемки может дополнительно включать телеметрическую систему. В состав телеметрической системы, как правило, включены датчики, установленные на заданном объекте и формирующие данные о его состоянии. Например, в случае авто и мотогонок телеметрическая система включает датчики, установленные на транспортном средстве и пилоте, которые в ходе заезда фиксируют данные состояния транспортного средства (скорость передвижения, расход топлива, время прохождения пути и др.) и пилота (например сердечный ритм). Наличие динамики данных телеметрической системы в итоговом сценарном видеоролике определенно повышает интерес потребителя к нему и его зрелищность.The shooting unit (1), including at least one primary video recorder. As primary video data devices, it is possible to use standard video cameras, video cameras with different focal lengths, controllable video cameras, including those installed on unmanned aerial vehicles with remote control. Advantageously, the shooting unit contains a plurality of video cameras of various kinds, which operate according to the scenario template. The scenario template data regarding the operation of the shooting unit includes, in particular, data specifying the frame plan, depth of field, frame geometry, field of view of the lens, camera movement, approximation and removal of a given object in the frame, etc. The shooting unit may additionally include a telemetry system . The telemetry system, as a rule, includes sensors installed on a given object and generating data on its state. For example, in the case of cars and motor races, the telemetry system includes sensors mounted on the vehicle and the pilot, which during the check-in record the state of the vehicle (speed, fuel consumption, travel time, etc.) and the pilot (for example, heart rate). The presence of the dynamics of the telemetry system data in the final scenario video definitely increases the consumer’s interest in it and its entertainment.

Блок ввода информации (2) о заданном объекте для его идентификации. Преимущественно блок ввода информации содержит интерфейс, с помощью которого пользователь предложенной системы вводит данные, позволяющие идентифицировать заданный объект. Например, это может быть ФИО человека, профиль в социальной сети, логин. Блок ввода информации может быть выполнен с возможностью выбора сценарного шаблона. Преимущественно система включает множество сценарных шаблонов и потребитель имеет возможность выбрать тот, который ему более интересен в плане сюжета, художественного стиля и цены. Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика потребителю. Способы могут быть различными, в частности, онлайн трансляция сценарного видеоролика, запись сценарного видеоролика на носитель (флешкарту, диск), передача сценарного видеоролика через интернет и социальные сети.Information input unit (2) about a given object for its identification. Advantageously, the information input unit comprises an interface with which a user of the proposed system enters data allowing identification of a given object. For example, it can be a person’s full name, social network profile, login. The information input unit may be configured to select a scenario template. Mostly the system includes many scenario templates and the consumer has the opportunity to choose the one that is more interesting to him in terms of plot, artistic style and price. The information input unit may be configured to select a method for transmitting a scenario video to a consumer. The methods can be various, in particular, online broadcasting of a scenario video, recording of a scenario video on a medium (flash card, disk), transfer of a scenario video via the Internet and social networks.

Блок идентификации (3) заданного объекта в первичных видеоданных. Блок идентификации включает устройства и программное обеспечение, которые позволяют распознавать и определять местоположение заданного объекта на первичных видеоданных и ставить определенные метки. Работа данного блока может быть основана на различных способах идентификации заданного объекта. В частности, блок идентификации может включать электронное устройство с уникальным идентификатором, беспроводная связь с которым позволяет определять местоположение заданного объекта. Примером такого электронного устройства может быть электронный браслет, который надевают человеку. В случае мотогоночных соревнований такое электронное устройство устанавливают на машине. Другим примером такого электронного устройства может быть личный телефон заданного человека, на который заранее устанавливают специальную программу. Определив координаты заданного объекта в определенный момент времени, блок идентификации ставит метки на первичных видеоданных, снятых в данный момент времени камерами, в зоне которых были расположены данные координаты. Работа блока идентификации может быть также основана на идентификации личности по биометрическим параметрам в первичных видеоданных.The identification unit (3) of a given object in the primary video data. The identification unit includes devices and software that allow you to recognize and determine the location of a given object on the primary video data and put certain labels. The operation of this unit can be based on various methods of identifying a given object. In particular, the identification unit may include an electronic device with a unique identifier, wireless communication with which allows you to determine the location of a given object. An example of such an electronic device may be an electronic bracelet worn by a person. In the event of motorcycle racing, such an electronic device is installed on the machine. Another example of such an electronic device may be a personal telephone of a given person, on whom a special program is pre-installed. Having determined the coordinates of a given object at a certain point in time, the identification unit puts marks on the primary video data taken at a given moment in time by cameras in the area of which these coordinates were located. The operation of the identification unit can also be based on identification of a person by biometric parameters in the primary video data.

Блок извлечения релевантных видеоданных (4) с присутствием в кадре заданного объекта включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона, вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных. К данным сценарного шаблона в части формирования релевантных видеоданных, в частности, относятся данные, которые задают местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров и др. The relevant video data extraction unit (4) with the presence of a given object in the frame includes software that allows you to cut video fragments with the specified object in the frame from the primary video data using the labels set by the identification unit and the script template data. The scenario template data regarding the formation of relevant video data, in particular, includes data that sets the location of a given object in a frame, the length of a video fragment, the number of video clips, frame synchronization, etc.

Блок обработки релевантных видеоданных (5), включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона. К данным сценарного шаблона в части работы блока обработки (5), в частности, относятся: данные задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы и др.The relevant video data processing unit (5) includes software that allows the generation of scenario videos using the relevant data generated by the extraction unit and the scenario template data. The scenario template data regarding the processing unit operation (5), in particular, include: data specifying the type of editing, installation rhythm, duration of the editing episode, sequence of plans and frames, color correction, concentration of attention in the frame at certain shooting objects, adding special graphic effects, combination of a frame with telemetry system data, etc.

Модуль хранения информации, представляет собой одно или несколько устройств, например серверов. Модуль хранения информации содержит несколько блоков, в том числе блок хранения первичных видеоданных (6), блок хранения релевантных видеоданных (7), блок хранения сценарных шаблонов (8), блок хранения сценарных видеороликов (9).An information storage module is one or more devices, such as servers. The information storage module contains several blocks, including a primary video data storage unit (6), a relevant video data storage unit (7), scenario template storage unit (8), scenario video storage unit (9).

Предложенная система может дополнительно содержать блок передачи сценарных видеороликов (10). Блок передачи выполнен с возможностью передачи готового сценарного видеоролика потребителю, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.The proposed system may further comprise a script video transmission unit (10). The transmission unit is configured to transmit the finished scenario video to the consumer by at least one of the following methods: online broadcasting, recording to media, transmission via the Internet, in particular via social networks.

Система также содержит стационарную зону съёмки (или несколько таких зон) с дополнительным блоком идентификации (11), по меньшей мере, одну подвижную зону съёмки с заданной траекторий движения, с дополнительным блоком идентификации (12), связанный с устройствами идентификации пользователя (13), размещёнными по траектории движения. Подвижные зоны съёмки подразумевают зону работы, например, движущегося аттракциона (карусели, обозреватели и т.п.), трассу для спортивных заездов и т.д. The system also contains a stationary shooting zone (or several such zones) with an additional identification unit (11), at least one moving shooting zone with a given path of movement, with an additional identification unit (12) associated with user identification devices (13), placed along the trajectory of movement. Movable shooting areas mean a working area, for example, a moving attraction (carousels, observers, etc.), a track for sports rides, etc.

Блоки, входящие в предложенную систему, взаимодействуют на различных этапах и передают информацию друг другу посредством различных технологий: кабеля, интернета, беспроводного соединения и др. По необходимости на определенных этапах информация шифруется для ее сохранности и недоступности его для неавторизированных пользователей системы.The blocks included in the proposed system interact at different stages and transmit information to each other through various technologies: cable, Internet, wireless connection, etc. If necessary, at certain stages the information is encrypted for its safety and inaccessibility to unauthorized users of the system.

Предложенная система работает следующим образом.The proposed system works as follows.

Потребитель или пользователь системы через блок ввода информации (2) вводит данные о заданном объекте и при возможности выбирает способ передачи ему готового сценарного видеоролика. Если предложенная система содержит несколько сценарных шаблонов, то пользователь выбирает интересный ему сценарный шаблон из какого-то множества. Блок съемки (1) формирует первичные видеоданные в зоне нахождения заданного объекта в соответствии с данными сценарного шаблона и передает информацию в блок хранения первичных видеоданных (6). Блок идентификации (3) получает от блока ввода (2) информацию, необходимую для идентификации заданного объекта, распознает и определяет местоположение заданного объекта на первичных видеоданных и ставит определенные метки. Далее блок извлечения (4) по меткам и в соответствии с данными сценарного шаблона формирует набор релевантных видеоданных с присутствием в кадре заданного объекта, которые передает в блок хранения релевантных видеоданных (7). Далее блок обработки (5) монтирует сценарные видеоролик, используя релевантные данные, сформированные блоком извлечения (4), и данные сценарного шаблона, и сохраняет готовый сценарный видеоролик в блоке хранения сценарных видеороликов (9). Далее блок передачи (10) передает готовый сценарный видеоролик потребителю выбранным способом.The consumer or user of the system through the information input unit (2) enters data on the specified object and, if possible, selects the method of transferring the finished scenario video to it. If the proposed system contains several scenario templates, then the user selects a scenario template of interest to him from some set. The shooting unit (1) generates primary video data in the area of the specified object in accordance with the data of the scenario template and transmits information to the primary video data storage unit (6). The identification unit (3) receives from the input unit (2) the information necessary to identify a given object, recognizes and determines the location of a given object on the primary video data and puts certain labels. Next, the extraction unit (4) by labels and in accordance with the scenario template data forms a set of relevant video data with the presence of a given object in the frame, which transmits to the storage unit of relevant video data (7). Next, the processing unit (5) mounts the scenario video using the relevant data generated by the extraction unit (4) and the scenario template data, and stores the finished scenario video in the scenario video storage unit (9). Next, the transmission unit (10) transmits the finished scenario video to the consumer in the selected manner.

Дополнительно пользователь может идентифицироваться в блоке (11) стационарной зоны съёмки и в блоке (12) подвижной зоны съёмки, тем самым обеспечив целевое включение в создаваемый ролик указанных зон и временных отрезков.Additionally, the user can be identified in the block (11) of the stationary shooting zone and in the block (12) of the moving shooting zone, thereby ensuring targeted inclusion of these zones and time intervals into the created movie.

Устройство и работа предложенной системы описана с учетом присутствия в кадре одного заданного объекта. В случае, когда заданных объектов несколько, устройство и работа предложенной системы принципиально не меняется. The device and operation of the proposed system is described taking into account the presence of one given object in the frame. In the case when there are several defined objects, the device and operation of the proposed system does not fundamentally change.

Предложенная система может быть выполнена с возможностью формирования сценарного видеоролика в режиме онлайн, что особенно актуально при трансляции спортивных и иных мероприятий.The proposed system can be configured to generate a scenario video online, which is especially true when broadcasting sports and other events.

Работа системы на примере решения «karting» (картинг):The operation of the system on the example of the solution "karting" (karting):

1. Пользователь, имея, например, браслет с RFID-идентификатором (далее «браслет») проходит регистрацию на тач-панели, где вводит свой номер телефона, получает в ответ код подтверждения идентификации в виде SMS, затем, при верном вводе кода подтверждения, прикладывает «браслет» к специальному считывающему устройству (далее — «считыватель»), связывая тем самым выданный ему «браслет» со своим персональным аккаунтом на «портале» («браслет» необходим только на период пользования системой «karting» и после загрузки ролика в личный кабинет не требуется. В последующие случаи использования системы у этого же пользователя может быть другой «браслет»). В ответ на процедуру регистрации через тач-панель, на время работы алгоритма, система получает от портала объект с мета-информацией о пользовательском видео, с которым, по завершении создания видеоролика будет связан реальный видео-контент.1. A user having, for example, a bracelet with an RFID identifier (hereinafter “bracelet”) passes registration on the touch panel, where he enters his phone number, receives an identification confirmation code in the form of SMS, then, when the verification code is entered correctly, attaches a “bracelet” to a special reader (hereinafter referred to as the “reader”), thereby linking the “bracelet” issued to it with its personal account on the “portal” (a “bracelet” is only necessary for the period of use of the “karting” system and after downloading the clip in no personal account required I. In subsequent cases of using the system, the same user may have another “bracelet”). In response to the registration procedure through the touch panel, while the algorithm is running, the system receives an object from the portal with meta-information about the user’s video, with which, after the video is created, the real video content will be associated.

2. Пользователь последовательно проходит несколько зон для съёмки персональных видео фрагментов, из которых система в автоматическом режиме создаст персональный видеоролик.2. The user sequentially goes through several zones for shooting personal video fragments, from which the system will automatically create a personal video clip.

Данные зоны условно можно разделить на два типа:These zones can be conditionally divided into two types:

1. Стационарные.1. Stationary.

К стационарным зонам относятся зоны «зеркало» и «подиум». Суть присутствия пользователя в этих зонах заключается в том, что у каждой зоны есть свой «считыватель» (блок идентификации (11) или (12), прикосновение «браслетом» к которому фиксирует время участия пользователя в кадре и передаёт его на основной блок идентификации 3. Далее следуют, исходя из алгоритма работы зоны, оповещающие пользователя о совершении действий события, например, отображение на экране зоны информационного контента, объясняющего принцип взаимодействия и его порядок или включение  и выключение световых приборов, расположенных в зоне, повествующих о начале и конце записи видео фрагмента, который в последствии попадет в итоговый видео ролик пользователя. Данная процедура длится фиксированное количество времени, задаваемое в настройках.The stationary zones include the “mirror” and “podium” zones. The essence of the user’s presence in these zones is that each zone has its own “reader” (identification unit (11) or (12), the touch of a “bracelet” on which fixes the time of user participation in the frame and transfers it to the main identification unit 3 Next, based on the algorithm of the zone’s operation, informing the user about the event’s actions, for example, displaying information content on the zone’s screen explaining the interaction principle and its order or turning on and off the light fixtures, s in the zone, telling about the beginning and end of the recording portion of video, which later falls in the final user's video clip. This procedure lasts for a fixed amount of time, defined in the settings.

2. Подвижные.2. Movable.

К подвижным зонам относится непосредственно картинг (автомобиль, далее — «карт»), на котором пользователь может перемещаться по трассе. «Карт» также снабжён «считывателем» и пользователь также активирует считыватель прикосновением браслета. Для фиксации зон съёмки, расположенных на трассе картинга, «считыватель» «карта» снабжён датчиками, которые получают сигнал от специальных устройств, (IR-датчиков 13), расположенных на трассе. После активирования «считывателя» «браслетом» пользователь совершает заезд на «карте» по трассе. В момент движения пользователя «считыватель» «карта» фиксирует временные метки и формирует объект состояния заезда, который передаёт в блок (4) для анализа и вычисления видео фрагментов после получения специального сигнала.Moving areas include karting directly (a car, hereinafter referred to as “kart”), on which the user can move along the track. The "card" is also equipped with a "reader" and the user also activates the reader with the touch of a bracelet. To fix the shooting zones located on the go-kart track, the “card reader” is equipped with sensors that receive a signal from special devices (IR sensors 13) located on the track. After activating the "reader" with the "bracelet", the user makes a race on the "map" along the highway. At the moment of the user’s movement, the “reader” “card” fixes the time stamps and forms an object of the state of arrival, which passes to block (4) for analysis and calculation of video fragments after receiving a special signal.

После прохода пользователя по зонам съёмки происходит финальное действие пользователя — прикладывание «браслета» к финишному «считывателю». После этой процедуры система фиксирует завершение действий пользователя, опрашивает «считыватель» карта» в ответ от него получает объект состояния заезда. На этом этапе в базе данных в системе имеется полный набор информации о заезде конкретного пользователя (конкретного браслета), связанный с мета-информацией из личного кабинета пользователя на портале.After the user passes through the shooting zones, the final action of the user occurs - applying a “bracelet” to the finish “reader”. After this procedure, the system records the completion of user actions, polls the "reader" card "in response from it receives an object of the state of arrival. At this stage, the database in the system has a complete set of information about the arrival of a specific user (specific bracelet) associated with meta-information from the user's personal account on the portal.

Claims (25)

1. Система для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, содержащая:1. A system for automatically creating a scenario video with the presence of a given object or group of objects in the frame with the ability to automatically create a scenario video with the presence of a given object or group of objects in the frame, containing: блок съемки, включающий, по крайней мере, одно устройство записи первичных видеоданных;a shooting unit including at least one primary video recorder; модуль хранения информации, включающий блок для хранения первичных видеоданных;an information storage module including a unit for storing primary video data; блок идентификации заданного объекта или группы объектов в первичных видеоданных;an identification unit for a given object or group of objects in the primary video data; блок ввода информации о заданном объекте или группе объектов для их идентификации;a unit for inputting information about a given object or group of objects for their identification; блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных;a block for extracting relevant video data with the presence of a given object or group of objects, and relevant video data means video fragments with the presence of a given object in the frame, cut out according to marks set by the identification unit from the primary video data; блок обработки релевантных видеоданных;a block for processing relevant video data; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения релевантных видеоданных и блока обработки релевантных видеоданных,at least one scenario template including a data set for operation of a shooting unit, a relevant video data extraction unit, and a relevant video data processing unit, причем каждое устройство записи первичных видеоданных из блока съемки работает по данным сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре;moreover, each primary video data recording device from the shooting unit operates according to the scenario template data, in which the scenario template data regarding the operation of the shooting unit are data specifying, in particular, the frame plan, depth of field, frame geometry, field of view of the lens, camera movement, approximation and deleting the specified object in the frame; причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров;moreover, the relevant video data extraction unit includes software that allows you to cut video fragments with the presence of a given object in the frame from the primary video data according to the labels set by the identification unit and the scenario template data, in which the data of the scenario template in terms of generating relevant video data is the data that specify in particular, the location of a given object in the frame, the length of the video clip, the number of video clips, frame synchronization; причем блок обработки релевантных видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы;moreover, the processing unit for relevant video data includes software that allows you to create scenario videos using the relevant data generated by the extraction unit and the data of the scenario template, in which the data of the scenario template in terms of the operation of the processing unit are, in particular, data specifying the type of editing, rhythm editing, the duration of the installation episode, the sequence of plans and frames, color correction, the concentration of attention in the frame at certain objects of shooting, adding graphic special effects, combining the frame with the telemetry system data; при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов,wherein the information storage module further includes a storage unit for relevant video data, a storage unit for scenario templates, a storage unit for scenario videos, отличающаяся тем, что дополнительно содержит:characterized in that it further comprises: по меньшей мере, одну стационарную зону съёмки с дополнительным блоком идентификации, фиксирующим время участия пользователя в кадре или дающим команду на отсчёт количества времени участия пользователя в кадре, задаваемого в настройках;at least one stationary shooting zone with an additional identification unit, fixing the time of user participation in the frame or giving a command to count down the amount of time the user participated in the frame specified in the settings; по меньшей мере, одну подвижную зону съёмки с заданной траекторией движения, с дополнительным блоком идентификации, фиксирующим время участия пользователя в кадре или дающим команду на отсчёт количества времени участия пользователя в кадре, задаваемого в настройках;at least one movable shooting zone with a given path of movement, with an additional identification unit, fixing the time of user participation in the frame or giving a command to count down the amount of time of user participation in the frame specified in the settings; при этом дополнительный блок идентификации подвижной зоны съёмки связан с устройствами идентификации пользователя, размещёнными по траектории движения.at the same time, an additional unit for identifying the mobile shooting zone is connected with user identification devices placed along the motion path. 2. Система по п. 1, отличающаяся тем, что блок обработки релевантных видеоданных выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона.2. The system according to claim 1, characterized in that the processing unit for the relevant video data is configured to generate scenario videos based on the relevant video data and the scenario template data. 3. Система по п. 1, отличающаяся тем, что блок идентификации включает электронное устройство с уникальным идентификатором.3. The system according to claim 1, characterized in that the identification unit includes an electronic device with a unique identifier. 4. Система по п. 1, отличающаяся тем, что дополнительно содержит блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.4. The system according to claim 1, characterized in that it further comprises a script video transmission unit, at least in one of the following ways: online broadcasting, recording to a medium, transmission via the Internet, in particular via social networks. 5. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи.5. The system according to claim 1, characterized in that the information input unit is configured to select a method for transmitting a scenario video by a transmission unit. 6. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора сценарного шаблона.6. The system according to claim 1, characterized in that the information input unit is configured to select a scenario template. 7. Система по п. 1, отличающаяся тем, что блок съемки дополнительно включает телеметрическую систему.7. The system according to claim 1, characterized in that the shooting unit further includes a telemetry system. 8. Система по п. 1, отличающаяся тем, что выполнена с возможностью формирования сценарного видеоролика в режиме реального времени.8. The system according to claim 1, characterized in that it is configured to generate a scenario video in real time. 9. Система по п. 1, отличающаяся тем, что в качестве идентификатора применена RFID-метка.9. The system according to claim 1, characterized in that an RFID tag is used as an identifier. 10. Система по п. 1, отличающаяся тем, что в качестве устройств идентификации пользователя, размещённых по траектории движения, применены IR-датчики. 10. The system according to claim 1, characterized in that IR sensors are used as user identification devices arranged along the motion path.
RU2019144215A 2019-12-26 2019-12-26 System for automatic creation of scenario video clip with preset object or group of objects presence in frame RU2719328C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2019144215A RU2719328C1 (en) 2019-12-26 2019-12-26 System for automatic creation of scenario video clip with preset object or group of objects presence in frame

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2019144215A RU2719328C1 (en) 2019-12-26 2019-12-26 System for automatic creation of scenario video clip with preset object or group of objects presence in frame

Publications (1)

Publication Number Publication Date
RU2719328C1 true RU2719328C1 (en) 2020-04-17

Family

ID=70277743

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2019144215A RU2719328C1 (en) 2019-12-26 2019-12-26 System for automatic creation of scenario video clip with preset object or group of objects presence in frame

Country Status (1)

Country Link
RU (1) RU2719328C1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023106953A1 (en) * 2021-12-09 2023-06-15 Общество с ограниченной ответственностью "ФАН ЭДИТОР" System for automatically creating a scenario video clip

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050285943A1 (en) * 2002-06-21 2005-12-29 Cutler Ross G Automatic face extraction for use in recorded meetings timelines
US20060177139A1 (en) * 2005-02-04 2006-08-10 Dts Az Research, Llc Digital intermediate (di) processing and distribution with scalable compression in the post-production of motion pictures
US20080288913A1 (en) * 2005-04-19 2008-11-20 Technische Universitaet Muenchen Software Cinema
RU129679U1 (en) * 2013-01-18 2013-06-27 Общество с ограниченной ответственностью "Фэт-Фри Групп" SYSTEM OF INTERACTIVE CREATION OF FILM PRODUCTS
US20150340068A1 (en) * 2013-02-14 2015-11-26 Bazelevs Innovacii Automatic shooting and editing of a video

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050285943A1 (en) * 2002-06-21 2005-12-29 Cutler Ross G Automatic face extraction for use in recorded meetings timelines
US20060177139A1 (en) * 2005-02-04 2006-08-10 Dts Az Research, Llc Digital intermediate (di) processing and distribution with scalable compression in the post-production of motion pictures
US20080288913A1 (en) * 2005-04-19 2008-11-20 Technische Universitaet Muenchen Software Cinema
RU129679U1 (en) * 2013-01-18 2013-06-27 Общество с ограниченной ответственностью "Фэт-Фри Групп" SYSTEM OF INTERACTIVE CREATION OF FILM PRODUCTS
US20150340068A1 (en) * 2013-02-14 2015-11-26 Bazelevs Innovacii Automatic shooting and editing of a video

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023106953A1 (en) * 2021-12-09 2023-06-15 Общество с ограниченной ответственностью "ФАН ЭДИТОР" System for automatically creating a scenario video clip

Similar Documents

Publication Publication Date Title
RU2683499C1 (en) System for automatic creation of scenario video clip with preset object or group of objects presence in frame
CN207817749U (en) A kind of system for making video
CN103620600B (en) Method and apparatus for enabling virtual tags
US5872887A (en) Personal video, and system and method of making same
US8341525B1 (en) System and methods for collaborative online multimedia production
CN102290082B (en) Method and device for processing brilliant video replay clip
CN107547359A (en) Tourist attractions information service system based on LBS Yu AR technologies
US20220036091A1 (en) System, method and device operable to produce a video
CN111177451A (en) Tourist attraction photo album automatic generation system and method based on face recognition
CN104067317A (en) System and method for visualizing synthetic objects withinreal-world video clip
US11748398B2 (en) Systems and methods for generating targeted media content
US20210042347A1 (en) Systems and methods for generating targeted media content
EP2896210A2 (en) Media content distribution
RU2719328C1 (en) System for automatic creation of scenario video clip with preset object or group of objects presence in frame
WO2023106953A1 (en) System for automatically creating a scenario video clip
RU2748581C1 (en) System for automatic generation of scripted video clip with presence of defined object or group of objects on screen
CN114629950B (en) Intelligent tourism service method, storage medium and server
Brown et al. The TV studio production handbook
US20130251332A1 (en) Method and system for the automatic recording of a moving subject
CN109242748A (en) A kind of photographic method based on Internet of Things
CN110478909B (en) Information display method, information display device, vehicle and machine-readable medium
CN116630099A (en) Tourist attraction tour method and device
US11803617B1 (en) System and method to increase confidence of roadway object recognition through gamified distributed human feedback
KR102161772B1 (en) System for providing travle information and system thereof
CN111542799B (en) Computer-implemented method for customizing interactivity