RU2672307C2 - Method (options) for systematization of video data production process and system (options) - Google Patents
Method (options) for systematization of video data production process and system (options) Download PDFInfo
- Publication number
- RU2672307C2 RU2672307C2 RU2013135912A RU2013135912A RU2672307C2 RU 2672307 C2 RU2672307 C2 RU 2672307C2 RU 2013135912 A RU2013135912 A RU 2013135912A RU 2013135912 A RU2013135912 A RU 2013135912A RU 2672307 C2 RU2672307 C2 RU 2672307C2
- Authority
- RU
- Russia
- Prior art keywords
- video data
- data
- production
- video
- production operation
- Prior art date
Links
- 238000004519 manufacturing process Methods 0.000 title claims abstract description 514
- 238000000034 method Methods 0.000 title claims abstract description 62
- 238000004458 analytical method Methods 0.000 claims description 14
- 238000004891 communication Methods 0.000 claims description 14
- 238000013500 data storage Methods 0.000 claims description 14
- 239000012634 fragment Substances 0.000 claims description 8
- 239000007788 liquid Substances 0.000 claims description 5
- 238000012545 processing Methods 0.000 abstract description 9
- 230000000694 effects Effects 0.000 abstract description 4
- 239000000126 substance Substances 0.000 abstract 1
- 238000003860 storage Methods 0.000 description 16
- 230000008520 organization Effects 0.000 description 13
- 238000013479 data entry Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 5
- 208000001613 Gambling Diseases 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000007726 management method Methods 0.000 description 4
- 239000000463 material Substances 0.000 description 4
- 238000003908 quality control method Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000008034 disappearance Effects 0.000 description 2
- 238000009776 industrial production Methods 0.000 description 2
- 229910052500 inorganic mineral Inorganic materials 0.000 description 2
- 239000011707 mineral Substances 0.000 description 2
- 238000005065 mining Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000008439 repair process Effects 0.000 description 2
- 208000031501 Emergencies Diseases 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 239000004566 building material Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000002950 deficient Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000008450 motivation Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
- G06F16/44—Browsing; Visualisation therefor
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
- G05B19/0423—Input/output
- G05B19/0425—Safety, monitoring
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
- G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
- G05B19/0426—Programming the control sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/60—Information retrieval; Database structures therefor; File system structures therefor of audio data
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/23614—Multiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
- H04N21/2365—Multiplexing of several video streams
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Automation & Control Theory (AREA)
- Signal Processing (AREA)
- General Factory Administration (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
ОБЛАСТЬ ТЕХНИКИFIELD OF TECHNOLOGY
Изобретение относится к области обработки, хранения, разметки и поиска видеоданных в системах видео наблюдения /1/, /2/. Изобретение позволяет производить разметку видеоданных с использованием данных производственного процесса, а так же реализовать быстрый поиск объекта (человека, изделия или транспортного средства) в видеоархиве по данным производственного процесса.The invention relates to the field of processing, storage, markup and search for video data in video surveillance systems / 1 /, / 2 /. The invention allows marking up video data using data from the production process, as well as to realize a quick search for an object (person, product or vehicle) in the video archive according to the production process.
Изобретение может быть использовано для решения таких задач как разметка (построение индекса) видеоархива, поиск видеоданных, обнаружение нарушений производственного процесса с автоматическим уведомлением пользователей, контроль качества и сроков выполнения работ, расследование причин брака продукции, определение ключевых показателей эффективности персонала, сбор статических данных о производственных процессе, выгрузка видеозаписей из видеоархива, содержащих документальную информацию о производственном процессе.The invention can be used to solve such problems as marking up (building an index) a video archive, searching for video data, detecting production process violations with automatic notification of users, monitoring the quality and timing of work, investigating the causes of product defects, identifying key performance indicators for personnel, collecting static data about production process, uploading videos from the video archive containing documentary information about the production process.
Изобретение может формировать данные для центра технологического мониторинга (центра контроля качества, службы безопасности) организации в реальном масштабе времени для предотвращения браков, срывов планов производства и возникновения угрозы жизнедеятельности исполнителя.The invention can generate data for the technological monitoring center (quality control center, security service) of the organization in real time to prevent marriage, disruption of production plans and the occurrence of a life threat to the performer.
Изобретение может быть использовано для оказания удаленной технической поддержки, обучения персонала, предоставления результатов заказчику, размещения видео на корпоративном сайте в целях PR, разрешения споров с контрагентами и сотрудниками.The invention can be used to provide remote technical support, staff training, providing results to the customer, posting videos on a corporate website for PR purposes, resolving disputes with contractors and employees.
Изобретение может быть использовано для автоматического и полуавтоматического тегирования видео, то есть добавления текстовых тегов, ключевых слов, численных данных и другой аннотации к видео.The invention can be used for automatic and semi-automatic tagging of videos, that is, adding text tags, keywords, numerical data and other annotations to the video.
Изобретение может работать в локальных и глобальных сетях, на выделенных или облачных серверах, а так же может быть встроено непосредственно в видеокамеру, видеосервер, видеорегистратор и мобильное устройство в виде аппаратного и/или программного обеспечения.The invention can work in local and global networks, on dedicated or cloud servers, and can also be integrated directly into a video camera, video server, video recorder and mobile device in the form of hardware and / or software.
Изобретение может быть использовано для предоставления различных сервисов в сети Интернет через браузер и/или мобильные устройства, в том числе сервисы обеспечения видеонаблюдения, видеозаписи, контроля производства, управления компании, мотивации и обучения персонала, взаимодействия с клиентами и PR.The invention can be used to provide various services on the Internet through a browser and / or mobile devices, including video surveillance, video recording, production control, company management, staff motivation and training, customer interaction and PR.
Изобретение может быть использовано в таких отраслях как промышленное производство, добыча и переработка полезных ископаемых, энергетика, сельское хозяйство, автомобильный ремонт, общественное питание, жилищно-коммунальное хозяйство и социальная инфраструктура.The invention can be used in industries such as industrial production, mining and processing of minerals, energy, agriculture, car repair, catering, housing and communal services and social infrastructure.
Изобретение может быть использовано для анализа розничных продаж (ритейл-анализа), контроля логистических операций (например, складов и почтовых сортировочных узлов) и контроля процессов в игорном бизнесе (казино, азартные игры, игровые автоматы, гемблинг (gambling).The invention can be used to analyze retail sales (retail analysis), control logistics operations (for example, warehouses and mail sorting nodes) and control processes in the gambling business (casinos, gambling, slot machines, gambling).
Изобретение может быть использовано в системах видеонаблюдения, построенных с применением стандартов и/или рекомендаций Открытого форума интерфейсов сетевого видео (Open Network Video Interface Forum, ONVIF, www.onvif.org). Альянса совместимости физической безопасности (Physical Security Interoperability Alliance, PSIA, www.psiaalliance.org) или Общего протокола оповещений (Common Alerting Protocol, CAP, http://docs.oasis-open.org/emer gency/сар/).The invention can be used in video surveillance systems built using the standards and / or recommendations of the Open Network Video Interface Forum, ONVIF, www.onvif.org. Physical Security Interoperability Alliance (PSIA, www.psiaalliance.org) or the Common Alerting Protocol (CAP, http://docs.oasis-open.org/emer gency / sar /).
Изобретение может быть интегрировано с производственным оборудованием, корпоративной системой бизнес-аналитики (Business Intelligence, BI), системой управления ресурсами предприятия (Enterprise Resource Planning, ERP) и системой управления контентом (Content Management System, CMS).The invention can be integrated with manufacturing equipment, a corporate business intelligence system (Business Intelligence, BI), an enterprise resource management system (Enterprise Resource Planning, ERP), and a content management system (CMS).
ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИBACKGROUND OF THE INVENTION
Система видеонаблюдения, как правило, включает одну или несколько видеокамер, хранилище видеоданных (видеосервер, систему архивирования видео или видеорегистратор) и рабочее место оператора /1/, /2/. Потоковые видеоданные получают с видеокамер, записывают в хранилище видеоданных и отображают на рабочем месте оператора.A video surveillance system, as a rule, includes one or several video cameras, a video data storage (video server, video archiving system or video recorder) and the operator’s workstation / 1 /, / 2 /. Streaming video data is received from video cameras, recorded in the video data storage and displayed at the operator’s workplace.
Средства поиска видеоданных являются неотъемлемой частью практически любой системы видеонаблюдения. Современные хранилища видеоданных позволяют быстро находить и воспроизводить отдельные фрагменты записанного видео по запросу пользователя. Эта возможность произвольного (прямого) доступа к видеоданным реализуется за счет построения разметки видеоданных или индекса. Индекс представляет собой справочную таблицу (lookup table), формирующую взаимосвязь меток с адресами соответствующих им видеоданных. Индекс существенно сокращает время доступа к видеоданным, записанным в хранилище, для их последующей обработки пользователем или компьютером.Video search tools are an integral part of almost any video surveillance system. Modern storage of video data allows you to quickly find and play individual fragments of the recorded video at the request of the user. This possibility of arbitrary (direct) access to video data is realized through the construction of video markup or index. An index is a lookup table that forms the relationship of labels with the addresses of their corresponding video data. The index significantly reduces the time of access to the video data recorded in the repository for their subsequent processing by the user or computer.
Временной индекс устанавливает взаимосвязь между временной шкалой и видеоданными, то есть позволяет хранилищу быстро находить видеоданные по заданным дате и времени.The time index establishes the relationship between the timeline and video data, that is, it allows the store to quickly find video data by a given date and time.
Событийный индекс содержит таблицу событий и позволяет хранилищу быстро находить видеоданные по заданным событиям, таким как срабатывание детектора движения или других датчиков, подключенных к системе видеонаблюдения.The event index contains a table of events and allows the store to quickly find video data for specified events, such as the operation of a motion detector or other sensors connected to a video surveillance system.
Видеоаналитика, то есть средства видеоанализа, на основе алгоритмов машинного зрения, может быть источником событий для построения индекса. Например, видеоаналитика позволяет определять такие события, как движение человека в заданном направлении, появление или исчезновение предмета /4/.Video analytics, that is, video analysis tools, based on machine vision algorithms, can be a source of events for building an index. For example, video analytics allows you to determine events such as a person’s movement in a given direction, the appearance or disappearance of an object / 4 /.
Индекс может содержать дополнительную информацию об объекте, распознанным видеоаналитикой, для последующего поиска видеоданных. Например, индекс может содержать регистрационный знак автомобиля, рост человека, цвет одежды, признаки лица.The index may contain additional information about the object recognized by video analytics for the subsequent search for video data. For example, the index may contain a car registration plate, a person’s height, clothing color, and facial features.
Как правило, индексы строят в реальном масштабе времени по мере поступления видеоданных в хранилище от видеокамер наблюдения. Затем индексы используют при обработке запросов пользователей, осуществляющих поиск информации в хранилище видеоданных.As a rule, indexes are built in real time as video data arrives in storage from surveillance cameras. Then, the indices are used in processing requests from users searching for information in the video data warehouse.
Онлайн-сервисы хранения видео, такие как YouTube (http://youtube.com/) и Vimeo (http://vimeo.com/), тоже используют различные индексы, например, индексы по издателям видео и по ключевым словам. Данные сервисы позволяет обратиться к видеофрагменту по гиперссылке и проиграть видео в браузере или на мобильном устройстве.Online video storage services such as YouTube (http://youtube.com/) and Vimeo (http://vimeo.com/) also use different indexes, such as indexes for video publishers and keywords. These services allow you to access the video clip via a hyperlink and play the video in a browser or on a mobile device.
Онлайн-сервисы видеонаблюдения, такие как DropCam (http://dropcam.com/) и iVideon (http://ivideon.com/), позволяют принимать видеоданные с видеокамер наблюдения пользователей и транслировать эти видеоданные в браузер или на мобильное устройство.Online surveillance services, such as DropCam (http://dropcam.com/) and iVideon (http://ivideon.com/), allow you to receive video data from user surveillance cameras and broadcast these video data to a browser or mobile device.
Ограничением существующих систем видеонаблюдения и хранения является то, что видео не связано с производственным процессом. Пользователь должен вручную выбирать видеокамеру для мониторинга производственного процесса. Пользователь должен вручную просматривать многочасовые фрагменты видео, чтобы найти в нем нужное событие производства. Пользователь не может мгновенно проанализировать видеоданные, которые привязаны к интересующей его производственной операции.A limitation of existing video surveillance and storage systems is that video is not associated with the production process. The user must manually select a video camera to monitor the production process. The user must manually view the many-hour fragments of the video to find the desired production event in it. The user cannot instantly analyze video data that is tied to the production operation of interest to him.
При этом видео содержит массу полезной информации для управления организацией и производством, например, для обнаружения нарушений производственного процесса, контроля качества и сроков выполнения работ, расследования причин брака продукции, определение ключевых показателей эффективности персонала, повышения производительности труда.At the same time, the video contains a lot of useful information for managing the organization and production, for example, to detect violations of the production process, quality control and deadlines, investigate the causes of defective products, identify key performance indicators for personnel, and increase labor productivity.
Сегодня системы видеонаблюдения используются преимущественно службой безопасности организации и практически не используется другими сотрудниками организации. Технологический потенциал системы видеонаблюдения для приложений управления организацией и производством процессом сегодня не раскрыт.Today, video surveillance systems are mainly used by the organization’s security service and are practically not used by other employees of the organization. The technological potential of a video surveillance system for organization and production process management applications has not been revealed today.
В рамках настоящего изобретения термин «производственный процесс» обозначает процесс создания любых продуктов и услуг с участием человека в организации, а так же процесс по обслуживания инфраструктуры и материально-технической базы. Например, производственным процессом является промышленное производство строительных материалов, добыча и переработка полезных ископаемых, обслуживание оборудования электростанции, кормление животных на ферме, сервисное обслуживание и ремонт автомобиля, изготовление продуктов питания на фабрике, оказание медицинской помощи в больнице, проведение лабораторной работы в учебном заведении, обслуживание клиентов в отделении магазина, банка или парикмахерской, сортировка почтовых отправлений на почте, организация азартных игр в казино и др.In the framework of the present invention, the term "production process" means the process of creating any products and services with the participation of people in the organization, as well as the process of maintaining the infrastructure and material and technical base. For example, the production process is the industrial production of building materials, mining and processing of minerals, maintenance of power plant equipment, feeding animals on a farm, service and car repairs, food production in a factory, medical assistance in a hospital, laboratory work in an educational institution, customer service at a store, bank or hairdresser, sorting mail by mail, organizing gambling in a casino et al.
Одной из причин ограниченного применения систем видеонаблюдения для задач управления производственным процессом является отсутствие связи между видеоданными и данными производственного процесса. В организациях не формируются ссылки и не строится индекс, позволяющих сотруднику организации быстро найти видеоданные, соответствующие выбранным производственной операцией, исполнителю, изделию, номеру заказа или другим параметрам производственного процесса.One of the reasons for the limited use of video surveillance systems for the control of the production process is the lack of communication between the video data and the production process data. The organizations do not form links and do not build an index that allows an employee of the organization to quickly find video data that matches the selected production operation, artist, product, order number or other parameters of the production process.
Прототипом выбрана система видеонаблюдения, например, сервисы iVideon компании ЗАО «Мобильные видеорешения» /3/.A video surveillance system was chosen as a prototype, for example, iVideon services of Mobile Video Solutions CJSC / 3 /.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙBRIEF DESCRIPTION OF THE DRAWINGS
Фиг.1. Одна из схем реализации способа разметки видеоданных производственного процесса.Figure 1. One of the schemes for implementing the method of marking video data of the production process.
Фиг.2. Пример видеоданных производственного процесса, отображающих исполнителя, производственное оборудование и исполнительское (пользовательское) устройство ввода.Figure 2. An example of video data of a production process displaying a performer, production equipment, and a performer (user) input device.
Фиг.3. Пример пользовательского интерфейса исполнительское (пользовательское) устройство ввода.Figure 3. Example user interface executive (user) input device.
Фиг.4. Пример отчета о выполнении операцией производственного процесса.Figure 4. An example of a report on the implementation of an operation of a production process.
Фиг.5. Примеры начальных данных о зонах обслуживания видеокамер производства в виде плана производственного помещения и в виде таблицы соответствия видеокамер и производственных операций.Figure 5. Examples of initial data on service areas of production video cameras in the form of a production room plan and in the form of a table of correspondence between video cameras and production operations.
Фиг.6 Пример временного индекса видеоархива, полученного при помощи предлагаемого способа..6 An example of a temporary index of a video archive obtained using the proposed method ..
Фиг.7. Одна из схем реализации способа разметки видеоданных производственного процесса с использованием штрих кода.7. One of the schemes for implementing the method for marking up video data of a production process using a bar code.
КРАТКОЕ ОПИСАНИЕSHORT DESCRIPTION
Заявлены способы систематизации видеоданных производственного процесса. Способ, согласно первого варианта включает следующие шаги:Declared methods of organizing video data of the production process. The method according to the first embodiment includes the following steps:
- вводят данные о соответствии между, одной или более зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операции;- enter data on the correspondence between one or more service areas (surveillance areas) of the video source (video camera) and at least one workplace for the production operation;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;- form a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
- получают данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более рабочее место этой производственной операции;- receive data on the production operation from one or more data input devices on the production operation, containing at least the values of one or more identifiers and one or more workplaces of this production operation;
- на основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию;- based on the data obtained in the previous steps, one or more video data sources are identified in the service area of which the above production operation is currently being performed;
- формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.- form, one or more links establishing a link between the video data of the identified video source in the service area of which the production operation is performed, and one or more identifiers from among the varieties of identifiers of this production operation indicated in the list.
Способ систематизации видеоданных производственного процесса согласно второго варианта включает, включает следующие шаги:The method for organizing video data of the production process according to the second embodiment includes, includes the following steps:
- вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции;- enter data on the correspondence between at least one service area (observation area) of the video source (video camera) and at least one data input device about the production operation;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;- form a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
- получают данные производственной операции от одного или нескольких устройств ввода данных о производственной операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более место этой производственной операции;- receive production operation data from one or more input devices about the production operation containing at least the values of one or more identifiers and one or more places of this production operation;
- на основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию;- based on the data obtained in the previous steps, one or more video data sources are identified in the service area of which the above production operation is currently being performed;
- формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.- form, one or more links establishing a link between the video data of the identified video source in the service area of which the production operation is performed, and one or more identifiers from among the varieties of identifiers of this production operation indicated in the list.
Ввод данных о соответствии между, по крайней мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции может быть выполнен предварительно до начала выполнения производственного процесса.Data entry about the correspondence between at least one service area (observation area) of the video source (video camera) and at least one place of the production operation can be performed before the start of the production process.
Данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции могут дополнительно содержать время начала, продолжительность и/или время окончания этой производственной операции.Data on a production operation from one or more input devices of data on a production operation may further comprise a start time, a duration and / or an end time for this production operation.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены идентификаторы места выполнения производственной операции, идентификаторы исполнительского (пользовательского) оборудования, идентификаторы исполнителя, изделия, заказа, товара, услуги (продукта производственного процесса), посылки, контейнера, транспортного средства и/или технологической операции.In the list of identifiers (in the index) of video data, identifiers of the place where the production operation was performed, identifiers of the performing (user) equipment, identifiers of the executor, product, order, product, service (product of the production process), parcel, container, vehicle and / or technological operations.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены так же данные о производственном процессе, например, показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.In the list of identifiers (in the index) of the video data can also be added data on the production process, for example, the readings of devices, such as scales, thermometers, liquid flow meters.
Ввод начальных данных о зоне обслуживания видеокамеры можно выполнять путем назначения типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.Entering initial data on the coverage area of the camcorder can be done by assigning the type of production equipment that is located in the coverage area of the camcorder.
Ввод начальных данных о зоне обслуживания видеокамеры можно выполнять путем назначения типа производственных операций, которые выполняют в зоне обслуживания видеокамеры.Entering initial data on the coverage area of the camcorder can be done by assigning the type of production operations that are performed in the coverage area of the camcorder.
Ввод начальных данных о зоне обслуживания видеокамерой можно выполнять на этапе планирования производственной операции.Entering the initial data on the coverage area with a video camera can be performed at the planning stage of a production operation.
Ввод начальных данных о зоне обслуживания видеокамерой можно выполнять непосредственно перед началом производственной операции.Entering the initial data on the service area of the camcorder can be performed immediately before the start of the production operation.
Ввод начальных данных о производственной операции можно выполнять заранее, например, на этапе формирования плана производства.Entering initial data on a production operation can be done in advance, for example, at the stage of generating a production plan.
Ввод начальных данных о производственной операции можно выполнять в процессе производства.Entering initial data on a production operation can be performed during the production process.
Ввод начальных данных о производственной операции может выполнять исполнитель производственной операции.The input of the production operation can be entered by the executor of the production operation.
Ввод начальных данных о производственной операции может выполнять сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.Entry of initial data on a production operation can be performed by an employee of the production planning department, the head of the contractor or the customer of the production.
Ввод начальных данных о производственной операции может выполняться автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.Entry of initial data on the production operation can be performed automatically based on the signals of the production equipment without the direct participation of the contractor.
Зоны обслуживания можно задавать в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры, и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.Service areas can be set in the form of a table of links, which establishes the relationship between the service area of the camera and each identifier of the number of identifiers of this production operation indicated in the list.
Ссылку можно формировать динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.The link can be generated dynamically at the request of the user based on data on the production operation and / or video analysis events and data on the coverage area of the camera.
Заявлены системы разметки видеоданных производственного процесса для реализации заявленных способов,Declared systems for marking video data of a production process for implementing the claimed methods,
Система, согласно первого варианта, включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает:The system, according to the first embodiment, includes a computer system, a video source, a data input device about a production operation, moreover, the computer system includes:
- один или более процессоров,- one or more processors,
- устройство для хранения данных,- a device for storing data,
- одну или более программ;- one or more programs;
причем одна или более программ хранится на устройстве для хранения данных и исполняются на одном или более процессоре, причем одна или более программ включают инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций, по крайней мере, следующий:moreover, one or more programs are stored on the device for storing data and executed on one or more processors, moreover, one or more programs include instructions for controlling a computer system that implements the claimed method, and the set of instructions, at least the following:
- вводить начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операции;- enter the initial data on the correspondence between at least one service area (surveillance area) of the video data source (video camera) and at least one workplace for the production operation;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;- enter a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
- получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;- receive data on production operations coming from one or more input devices for data on production operations;
- выявить один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;- identify one or more sources of video data in the service area of which the production operation takes place;
- формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.- generate at least one link that establishes the connection of the video data from the above video source in the service area of which the production operation is performed, and the identifier of this production operation.
Система, согласно второго варианта, включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает:The system, according to the second embodiment, includes a computer system, a video source, a data input device about a production operation, moreover, the computer system includes:
- один или более процессоров,- one or more processors,
- устройство для хранения данных,- a device for storing data,
- одну или более программ;- one or more programs;
Одна или более программ может хранится на устройстве для хранения данных и исполняются на одном или более процессоре,One or more programs may be stored on a data storage device and executed on one or more processors,
Одна или более программ включает инструкции для управления компьютерной системой, реализующей заявленный способ,One or more programs includes instructions for controlling a computer system that implements the claimed method,
причем набор инструкций, по крайней мере, следующий:wherein the set of instructions is at least as follows:
- вводить начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции- enter the initial data on the correspondence between at least one service area (observation area) of the video source (video camera) and at least one device for inputting data on the production operation
- получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;- receive data on production operations coming from one or more input devices for data on production operations;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;- enter a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
- выявить один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;- identify one or more sources of video data in the service area of which the production operation takes place;
- формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.- generate at least one link that establishes the connection of the video data from the above video source in the service area of which the production operation is performed, and the identifier of this production operation.
Устройство ввода данных о производственной операции может быть стационарным или мобильным.A data entry device for a manufacturing operation may be stationary or mobile.
Устройство ввода данных о производственной операции может располагаться удаленно или может быть встроено в производственное оборудование.The input device for the production operation can be located remotely or can be integrated into the production equipment.
Устройство ввода данных о производственной операции может быть реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного и/или персонального устройства.A device for inputting data on a production operation can be implemented on the basis of a standard or specialized computer, workstation, tablet computer, mobile and / or personal device.
Устройство ввода данных о производственной операции может быть выполнено как считыватель радиочастотных меток RFID (Radio-frequency identification), NFC (Near field communication) или подобное.The input device for the production operation can be performed as a reader of radio frequency tags RFID (Radio-frequency identification), NFC (Near field communication) or the like.
Устройство ввода данных о производственной операции может быть выполнено как считыватель одно- и/или двумерных штриховых кодов.The input device for the production operation can be performed as a reader of one- and / or two-dimensional barcodes.
Устройство ввода данных о производственной операции может использовать вышеуказанный источник видеоданных или дополнительный источник видеоданных для автоматического распознавания идентификаторов изделий, посылок, контейнеров, грузовых автомобилей, вагонов.A data entry device for a manufacturing operation may use the above video source or an additional video source to automatically recognize product identifiers, parcels, containers, trucks, wagons.
В системе может использоваться дополнительно детектор движения или детектор присутствия человека в обслуживаемой зоне для формирования данных о производственном процессе и/или проверки их подлинности.The system can additionally use a motion detector or a detector of human presence in the served area to generate data on the production process and / or verify their authenticity.
Ссылки могут быть комбинированными.Links can be combined.
Устройство ввода данных о производственной операции может использовать голосовые команды и/или жесты исполнителя.The input device for the production operation can use voice commands and / or gestures of the performer.
Устройство ввода данных о производственной операции может быть выполнено в виде программного или аппаратного модуля видеоанализа.The input device for the production operation can be made in the form of a software or hardware module for video analysis.
Ссылка может быть гиперссылкой.The link may be a hyperlink.
Ссылка может быть сформирована из ранее записанных видеоданных. Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:The link may be formed from previously recorded video data. A link to video data may contain one or a combination of parameters from the following list:
- уникальная символьная последовательность,- a unique character sequence,
- гиперссылка,- hyperlink
- унифицированный идентификатор ресурса (URI),Unified Resource Identifier (URI)
- идентификатор источника видеоданных,- video source identifier,
- идентификатор зоны обслуживания источника видеоданных,- identifier of the service area of the video source,
- временная метка начала производственной операции,- timestamp of the beginning of the production operation,
- временная метка окончания производственной операции,- timestamp of the end of the production operation,
- идентификатор производственной операции,- identifier of the production operation,
- идентификатор исполнителя,- artist identifier,
- идентификатор производимого изделия,- identifier of the manufactured product,
- идентификатор выполняемого заказа;- identifier of the order being executed;
- номер обрабатываемого объекта;- number of the processed object;
- номер партии обрабатываемых объектов.- batch number of processed objects.
ПОДРОБНОЕ ОПИСАНИЕDETAILED DESCRIPTION
Настоящее изобретение направлено на устранение описанной проблемы, препятствующей широкому применению системы видеонаблюдения для задач управления производственным процессом. Изобретение позволяет сформировать ссылку на видеоданные, связанные с событием производственной операцией или иным событием производственного процесса, а так же построить индекс видеоданных на основе операций или событий, таких как начало и конец производственной операции, приход или уход исполнителя на/с рабочего места, приход или уход заказчика, поступление изделия или материалов.The present invention is aimed at eliminating the described problem that impedes the widespread use of video surveillance systems for the tasks of controlling the production process. The invention allows you to create a link to the video data associated with the event of a production operation or other event of the production process, as well as build an index of video data based on operations or events, such as the beginning and end of a production operation, the arrival or departure of the artist to / from the workplace, the arrival or customer care, receipt of the product or materials.
Ссылку на видеоданные производственной операции формируют на основе данных о производственных операциях и зонах обслуживания (зоне наблюдения) видеокамер.A link to the video data of the production operation is formed on the basis of data on production operations and service areas (surveillance area) of the cameras.
Наряду с видеокамерой наблюдения, используют устройство ввода данных о сценарии производственного процесса, что позволяет разметить видеоданные с учетом событий производственного процесса.Along with the surveillance video camera, a data input device about the script of the production process is used, which allows marking up video data taking into account the events of the production process.
К индексу видеоданных, поступающих с видеокамеры, добавлен идентификатор производственной операции, возможно происходящей рядом с этой видеокамерой или в зоне наблюдения этой видеокамеры. В индекс видеоданных может быть добавленные идентификаторы исполнителя, изделия, заказа, а так же иные данные о производственном процессе. Например, в индекс могут записываться измерения показаний приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.To the index of video data coming from the video camera, the identifier of the production operation, possibly occurring next to this video camera or in the surveillance area of this video camera, has been added. The video data index can contain added identifiers of the contractor, product, order, as well as other data on the production process. For example, measurements can be recorded in the index of instrument readings, such as a balance, a thermometer, and liquid flow meters.
Техническим результатом настоящего изобретения является повышение эффективности использования камер видеонаблюдения для контроля производственного процесса в реальном масштабе времени, ускорение и повышение точности поиска видеоданных, содержащих изображение одного или множества исполнителей, производственной операции, производственного оборудования, изделия, заказчика.The technical result of the present invention is to increase the efficiency of using CCTV cameras to control the production process in real time, accelerating and improving the accuracy of the search for video data containing an image of one or many performers, production operations, production equipment, products, customers.
Известные способы и устройства не позволяют достичь заявленный технический результат.Known methods and devices do not allow to achieve the claimed technical result.
Для достижения заявленного технического результата предлагается способы систематизации видеоданных производственного процесса, включающие следующие шаги:To achieve the claimed technical result, we propose methods for organizing video data of the production process, including the following steps:
Вводят начальные данные о зоне обслуживания (зоне наблюдения) видеокамеры, размещенных на производстве. Зону обслуживания характеризуют ее геоположением, (местоположением) размером и геометрией зоны обзора. Согласно первого варианта вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операцииEnter the initial data on the service area (surveillance area) of the camera located at the factory. The service area is characterized by its geolocation, (location) size and geometry of the viewing area. According to the first option, data is entered on the correspondence between at least one service area (observation area) of the video source (video camera) and at least one workstation for the production operation
Согласно второго варианта вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции;According to the second option, data is entered on the correspondence between at least one service area (observation area) of the video data source (video camera) and at least one data input device about the production operation;
Далее формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;Next, form a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
Получают данные о технологической (производственной) операции от одного или нескольких устройств ввода данных о технологической (производственной) операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более рабочее место этой производственной операции.Receive data on the technological (production) operation from one or more data input devices about the technological (production) operation, containing at least the values of one or more identifiers and one or more workplaces of this production operation.
На основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию. Это определяют путем сравнения известного места выполнения производственной операции с данными о зоне обслуживания, по крайней мере, одного источника видеоданных.Based on the data obtained in the previous steps, one or more video data sources are identified in the service area of which the above production operation is currently being performed. This is determined by comparing the known location of the production operation with the data on the service area of at least one video source.
Формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.One or more links are formed that establish a link between the video data of the identified video source in the service area of which the production operation is performed and one or more identifiers from among the varieties of identifiers of this production operation indicated in the list.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания зоны обслуживания видеокамеры на плане производственного помещения. Зона обслуживания видеокамеры может быть задана при помощи точки, многоугольника или любой другой геометрической фигуры, характеризующей зону обслуживания видеокамеры.Entering initial data on the coverage area of the video camera can occur by setting the coverage area of the video camera on the floor plan. The service area of the video camera can be set using a point, a polygon, or any other geometric shape that characterizes the service area of the video camera.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания идентификаторов оборудования или идентификаторов рабочих мест, находящихся в зоне обслуживания этой видеокамеры.Input of initial data on the coverage area of the video camera can occur by setting the identifiers of equipment or identifiers of workplaces located in the coverage area of this video camera.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания идентификаторов производственных операций, осуществляемых в зоне обслуживания этой видеокамеры.Entering initial data on the service area of the video camera can occur by setting the identifiers of production operations carried out in the service area of this video camera.
Ввод данных о соответствии между по крайней мере одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции может быть выполнен предварительно до начала выполнения производственного процесса.Entering data on the correspondence between at least one service area (observation area) of the video source (video camera) and at least one place of the production operation can be performed before the start of the production process.
Данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции могут дополнительно содержать время начала, продолжительность и/или время окончания этой производственной операции.Data on a production operation from one or more input devices of data on a production operation may further comprise a start time, a duration and / or an end time for this production operation.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены так же данные о производственном процессе, например, показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.In the list of identifiers (in the index) of the video data can also be added data on the production process, for example, the readings of devices, such as scales, thermometers, liquid flow meters.
Ввод начальных данных о зоне обслуживания видеокамеры выполняют путем назначения идентификатора или типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.Entering the initial data on the coverage area of the video camera is performed by assigning an identifier or type of production equipment that is located in the coverage area of the video camera.
Ввод начальных данных о зоне обслуживания видеокамеры выполняют путем назначения типа производственных операций, которые выполняют в этой зоне. Ввод начальных данных о зоне обслуживания видеокамерой выполняют на этапе планирования производственной операции.Entering the initial data on the coverage area of the camera is performed by assigning the type of production operations that are performed in this area. The input of the initial data on the service area by the video camera is performed at the planning stage of the production operation.
Зоны обслуживания могут быть заданы в виде таблицы, которая устанавливает взаимосвязь между видеокамерой и производственным оборудованием, типом производственной операции, производственным заказом, типом изделия, исполнителем или другой сущностью производственного процесса. Таблица может содержать идентификаторы видеокамер и идентификаторы вышеуказанных сущностей производственного процесса.Service areas can be defined in the form of a table that establishes the relationship between the video camera and the production equipment, type of production operation, production order, type of product, contractor or other essence of the production process. The table may contain identifiers of cameras and identifiers of the above entities of the production process.
Зоны обслуживания задают в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры, и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.Service areas are set in the form of a table of links, which establishes the relationship between the service area of the camera and each identifier of the number of identifiers of this production operation indicated in the list.
Ссылку формируют динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.The link is generated dynamically at the request of the user based on data on the production operation and / or video analysis events and data on the coverage area of the camera.
Ввод начальных данных о производственной операции и/или о зоне обслуживания видеокамерой выполняют заранее, например, на этапе планирования производственной операций, на этапе формирования плана производства или непосредственно перед начальном этой производственной операции.Entering the initial data on the production operation and / or the service area by the video camera is performed in advance, for example, at the planning stage of the production operations, at the stage of formation of the production plan or immediately before the initial production operation.
Ввод начальных данных о производственной операции может также выполнен в процессе производства.Entering initial data on a production operation can also be performed during the production process.
Ввод начальных данных о производственной операции может выполнять исполнитель производственной операции, сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.The input of the production operation can be entered by the executor of the production operation, an employee of the production planning department, the head of the executor, or the customer of the production.
Например, исполнитель производственной операции может считывать идентификатор рабочего места, например, штрих код или радиочастотную метку при помощи специального считывателя. Полученный идентификатор, согласно настоящему изобретению, может быть использован для автоматического определения видеокамеры, в зоне обслуживания которой осуществляется производственная операция.For example, the executor of a production operation can read the identifier of the workplace, for example, a barcode or radio frequency tag using a special reader. The obtained identifier, according to the present invention, can be used to automatically determine the video camera in the service area of which the production operation is carried out.
Ввод начальных данных о производственной операции может выполняться автоматически на основе сигналов производственного оборудования без прямого участия человека.Entry of initial data on the production operation can be performed automatically based on the signals of the production equipment without the direct participation of a person.
Например, производственное оборудование может автоматически считывать идентификатор изделия, контейнера или транспортного средства (номер грузового автомобиля, номер вагона).For example, production equipment can automatically read the identifier of a product, container, or vehicle (truck number, car number).
Видеоданные из источника видеоданных могут быть записаны в устройстве хранения, например, на жестком диске, сетевом хранилище, видеорегистраторе или в вирутализированном хранилище, таком как Amazon Glacier (http://en.wikipedia.org/wiki/Amazon_Glacier) или аналогичном.Video data from a video source can be recorded in a storage device, for example, a hard disk, network storage, video recorder, or virtualized storage such as Amazon Glacier (http://en.wikipedia.org/wiki/Amazon_Glacier) or the like.
Видеоданные из источника видеоданных могут быть отображены на устройстве отображения пользователю, например, на мониторе компьютера или экране мобильного устройства.Video data from a video source can be displayed on a display device to a user, for example, on a computer monitor or on the screen of a mobile device.
Данные о производственной операции могут быть записаны в устройство хранения.Data about the production operation can be recorded in the storage device.
Ссылка может быть записана в индекс видеоданных на устройстве хранения для последующего поиска видеоданных с использованием различных запросов, например, по запросу идентификатора производственной операции, исполнителя, изделия, номера заказа, времени выполнения операции.The link can be recorded in the video data index on the storage device for subsequent search for video data using various queries, for example, upon request of the identifier of a production operation, artist, product, order number, time of operation.
Идентификатор производственной операции может назначаться программным обеспечением компьютерной системы и содержать цифры или иные символы.The identifier of a manufacturing operation may be assigned by computer system software and may contain numbers or other characters.
Вместо идентификатора производственной операции можно использовать идентификатор (номер) заказа, исполнителя, изделия или материала.Instead of the identifier of the production operation, you can use the identifier (number) of the order, contractor, product or material.
Идентификатор производственной операции может быть составным, то есть включать идентификаторы исполнителя, изделия, заказа или материала.The identifier of a production operation can be composite, that is, include the identifiers of the contractor, product, order or material.
Перечень разновидностей идентификаторов для разметки может быть запрограммирован разработчиком, и набор программных инструкций может не включать этого шага.The list of identifier types for markup can be programmed by the developer, and the set of program instructions may not include this step.
Заявлено два варианта системы разметки видеоданных производственного процесса для реализации настоящего изобретения.Declared two variants of a system for marking video data of a production process for implementing the present invention.
Система включает вычислительное устройство, источник видеоданных, устройство ввода данных о производственной операции. Вычислительное устройство включает: - компьютер, содержащий один или более процессоров, - устройство для хранения данных, - одну или более программ. Указанную одну или более программу хранят на устройстве для хранения данных и исполняют на одном или более процессоре. Указанная программа включают инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций, по крайней мере, следующий:The system includes a computing device, a video source, a data input device about a production operation. A computing device includes: - a computer containing one or more processors, - a device for storing data, - one or more programs. The specified one or more programs are stored on a data storage device and executed on one or more processors. The specified program includes instructions for controlling a computer system that implements the claimed method, and a set of instructions, at least the following:
- согласно первого варианта, на первом шаге - вводят начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции;- according to the first option, at the first step - enter the initial data on the correspondence between at least one service area (surveillance area) of the video source (video camera) and at least one place of the production operation;
- согласно второго варианта на первом шаге- вводят начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции- according to the second option, at the first step, initial data is entered on the correspondence between at least one service area (observation area) of the video data source (camera) and at least one device for inputting data on the production operation
- на втором шаге получают данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;- at the second step, receive data on production operations coming from one or more input devices for data on production operations;
- на третьем шаге выявляют один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;- at the third step, one or more source of video data is identified in the service area of which a production operation is taking place;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;- enter a list of varieties of identifiers for markup, by which later it will be possible to systematize video data;
- формируют, по крайней мере, одну ссылку, устанавливающую связь фрагмента (portion) видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.- form at least one link that establishes the relationship of the fragment (portion) of the video data from the above video source in the service area of which the production operation is performed, and the identifier of this production operation.
Устройство ввода данных о производственной операции может быть стационарным или мобильнымThe operation data input device may be stationary or mobile
Устройство ввода данных о производственной операции может располагаться непосредственно на месте производства. В этом случае ввод данных осуществляет исполнитель производственной операции или другой назначенный сотрудник на рабочем месте выполнения операции.The input device for the production operation can be located directly at the production site. In this case, data entry is carried out by the executor of the production operation or another appointed employee at the workplace of the operation.
Устройство ввода данных о производственной операции может располагаться удаленно. В этом случае ввод данных осуществляет сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства, другой назначенный сотрудник.The input device for the production operation can be located remotely. In this case, data entry is carried out by an employee of the production planning department, the head of the contractor or the customer of the production, and another appointed employee.
Устройство ввода данных о производственной операции может быть мобильным. Например, начальник цеха может использовать мобильное устройство ввода данных о производственных операциях в различных точках цеха.The operation data input device may be mobile. For example, a shop manager can use a mobile data entry device for production operations at various points in the shop.
Источником видеоданных может быть ГР-видеокамера, IP-видеосервер (видеокодер), медиасервер такой как Wowza (http://wowza.com/) или визуализированный («облачный») сервис видеонаблюдения, такой как iVideon (http://iVideon.com/).The video source can be a GR video camera, an IP video server (video encoder), a media server such as Wowza (http://wowza.com/) or a visualized (“cloud”) video surveillance service such as iVideon (http://iVideon.com /).
Источником видеоданных может быть аналоговая камера или камера машинного зрения с интерфейсом GigE Vision (Gigabit Ethernet Vision), USB (Universal Serial Bus) или HD-SDI (High Definition Serial Digital Interface).HcT04HHK0M видеоданных может быть видеокамера, встроенная в мобильное устройство исполнителя. При этом видеоданные о производственной операции и/или месте осуществления этой производственной операции могут вводиться через это мобильное устройство.The video source can be an analog camera or a computer vision camera with a GigE Vision (Gigabit Ethernet Vision), USB (Universal Serial Bus) or HD-SDI (High Definition Serial Digital Interface) .HcT04HHK0M video data can be a video camera built into the mobile device of the artist. In this case, video data on the production operation and / or the location of the implementation of this production operation can be entered through this mobile device.
Устройство ввода данных о производственной операции может быть встроено в производственное оборудование. В этом случае ввод данных осуществляют автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.A production data input device may be integrated into the production equipment. In this case, data entry is carried out automatically based on the signals of production equipment without the direct participation of the contractor.
Устройство ввода данных о производственной операции может представлять собой сенсорную панель или кнопочную панель, при помощи которой исполнитель подает сигнал о начале и об окончании производственной операции.The input device for the production operation can be a touch panel or keypad, with which the contractor sends a signal about the beginning and end of the production operation.
Устройства ввода данных о производственной операции может быть так же использовано для ввода дополнительных данных о технологической операции, например, идентификатора исполнителя, изделия, номера заказа и других данных производственного процесса и других.Devices for inputting data on a production operation can also be used to enter additional data on a technological operation, for example, an identifier of an executor, a product, an order number and other data of a production process and others.
Устройства ввода данных о производственной операции может быть реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного устройства, персонального устройства.Data entry devices for production operations can be implemented on the basis of a standard or specialized computer, workstation, tablet computer, mobile device, personal device.
Устройство ввода данных о производственной операции может представлять собой считыватель радиочастотных меток RFED (Radio-frequency identification), NFC (Near field communication), а так же считыватель штриховых кодов («баркодов», QR-кодов и прочих). Например, считыватель таких меток может использоваться на производстве, на складе, в логистическом центре торговой сети, в сортировочном узле почты для отслеживания компонентов, изделий, товаров, грузов или посылок по идентификатору. Считыватель меток используют для формирования ссылки на видео, содержащее объект с меткой - идентификатором. Полученный идентификатор может быть использован для разметки видеоархива и поиска объектов в нем.The input device for the production operation can be a reader of radio frequency tags RFED (Radio-frequency identification), NFC (Near field communication), as well as a reader of barcodes ("barcodes", QR codes and others). For example, a reader of such marks can be used in production, in a warehouse, in a logistics center of a distribution network, in a mail sorting unit to track components, products, goods, goods, or parcels by identifier. A tag reader is used to form a link to a video containing an object with a tag - identifier. The resulting identifier can be used to mark up the video archive and search for objects in it.
Устройство ввода данных о производственной операции представляет собой считыватель одно- и/или двумерных штриховых кодов для формирования данных о производственном процессе и/или проверки их подлинности.The device for inputting data on a production operation is a reader of one- and / or two-dimensional barcodes for generating data on a production process and / or verifying its authenticity.
В некоторых реализациях настоящего изобретения в качестве идентификатора производственной операции или объекта производства могут использоваться комбинированные метки с использованием нескольких технологий, описанных выше, или других подходящих технологий, которые будут изобретены позже.In some implementations of the present invention, combined labels may be used as an identifier for a manufacturing operation or production facility using several of the technologies described above or other suitable technologies that will be invented later.
Устройство ввода данных о производственной операции использует голосовые команды и/или жесты исполнителяThe operation data input device uses voice commands and / or executor gestures
Ссылка может быть гиперссылкой.The link may be a hyperlink.
Ссылка может указывать на фрагменты ранее записанных видеоданных для получения архивного видео, а так же указывать на источник видеоданных для получения «живого» видео (видео в реальном масштабе времени) в процессе производственной операции.The link may indicate fragments of previously recorded video data for receiving archived video, as well as point to the source of video data for receiving “live” video (real-time video) during the production operation.
Ссылка на видеоданные может быть сформирована по запросу пользователю в ручном, полуавтоматическом или автоматическом режиме.The link to the video data can be generated at the request of the user in manual, semi-automatic or automatic mode.
Устройство ввода данных о производственной операции может представлять собой программный и/или аппаратный модули видеоанализа. При этом данные о производственной операции формируют на основе результатов работы видеоаналитики (видеоанализа). Могут быть использованы детекторы присутствия (отсутствия) человека на месте, в обслуживаемой зоне, детекторы входа (выхода) человека в зону производственной операции, появления (исчезновения) изделия, движения в зону производственной операции.The input device for the production operation can be a software and / or hardware video analysis module. At the same time, data on the production operation is formed on the basis of the results of the video analytics (video analysis). Detectors of the presence (absence) of a person at a place, in a serviced area, detectors of a person’s entry (exit) into a production operation zone, appearance (disappearance) of a product, movement into a production operation zone can be used.
Ввод данных о производственной операции может осуществляться заранее, например, в режиме формирования плана производства, или в реальном масштабе времени - в процессе производства.Data input about the production operation can be carried out in advance, for example, in the mode of formation of the production plan, or in real time in the production process.
Модули видеоанализа могут быть использованы для контроля производственной операции. Например, в случае обнаружения активности в зоне производственной операции при отсутствии в то время, когда по графику производственной операции никаких действий происходить не должно, уведомляют исполнителя, технолога или иных назначенных для контроля сотрудников организации о начале незапланированной операции. В случае отсутствия активности в зоне производственной операции, когда по графику запланирована производственная операция, уведомляют сотрудников организации о наличии несоответствия плановых и фактических работ.Video analysis modules can be used to monitor production operations. For example, if activity is detected in the area of the production operation when there is no activity at the time when the schedule of the production operation should not take place, notify the contractor, technologist or other employees of the organization appointed to control the start of an unplanned operation. If there is no activity in the zone of the production operation, when the production operation is planned according to the schedule, they inform the employees of the organization about the discrepancy between the planned and actual work.
На основе радиосигналов, поступающих с персональных устройств или иных радиочастотных идентификаторов может быть определено местоположение исполнителей производственной операции.Based on the radio signals coming from personal devices or other radio frequency identifiers, the location of the performers of the production operation can be determined.
Видеозапись производиться в событийном режиме. Начало записи может производиться в момент начала производственной операции или по детектору движения, а окончание записи - по окончанию операции. В некоторых случаях видеозапись производят в непрерывном режиме.Video recording is made in event mode. The beginning of the recording can be made at the moment of the beginning of the production operation or by the motion detector, and the end of the recording - at the end of the operation. In some cases, video recording is continuous.
Компьютерная система дополнительно может отображать записанные видеоданные и связанные с ними идентификаторы производственных операций, исполнителей, изделий и иную технологическую информацию на устройстве отображения.The computer system can additionally display recorded video data and associated identifiers of production operations, performers, products and other technological information on the display device.
Ссылку, устанавливающую связь между записанными видеоданными, от источника видеоданных, и данными о производственной операции, полученными от источника данных о производственных операциях, сохраняют на устройстве хранения, например, на компьютере, сервере, видеорегистраторе, сетевом или облачном хранилище.The link establishing the connection between the recorded video data from the video data source and the production operation data received from the production operation data source is stored on a storage device, for example, a computer, server, DVR, network or cloud storage.
Ссылка может храниться в базе данных любого типа, в документах, веб-страницах.The link can be stored in a database of any type, in documents, web pages.
Ссылка может представлять собой гиперссылку, унифицированный идентификатор ресурса (Uniform Resource Identifier, URI), комбинацию идентификатора видеокамеры и временной метки, идентификатор производственной операции, идентификатор видеозаписи, имя файла (например, в контейнере МР4, MKV, OGV, WMA), содержащую видеозапись производственной операции.The link may be a hyperlink, a Uniform Resource Identifier (URI), a combination of a video camera identifier and a time stamp, a production operation identifier, a video identifier, a file name (for example, in an MP4, MKV, OGV, WMA container) containing a video of the production operations.
Ссылка может представлять собой гиперссылку на источник потокового видео, например, источник передающий видеоданные по протоколам RTSP (Real Time Streaming Protocol), RTMP (Real Time Messaging Protocol), HLS (HTTP Live Streaming) и DASH (Dynamic Adaptive Streaming over HTTP).The link can be a hyperlink to a streaming video source, for example, a source transmitting video data via RTSP (Real Time Streaming Protocol), RTMP (Real Time Messaging Protocol), HLS (HTTP Live Streaming) and DASH (Dynamic Adaptive Streaming over HTTP).
Ссылка может формироваться динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоаналитики и данных о зоне обслуживания видеокамеры.The link can be generated dynamically at the request of the user based on data on the production operation and / or video analytics events and data on the camera’s service area.
Видеоданные производственной операции могут отображаться на устройстве отображения, например, на мониторе сотрудника организации, в веб-браузере, на мобильном устройстве.The video data of the production operation can be displayed on a display device, for example, on a monitor of an organization employee, in a web browser, on a mobile device.
Согласно настоящему изобретению, описанный метод может быть использован для контроля производственного процесса как в оперативном режиме (в реальном масштабе времени по ходу производственной операции), так и в ретроспективном режиме (после завершения производственной операции).According to the present invention, the described method can be used to control the production process both in the operational mode (in real time during the production operation) and in retrospective mode (after the completion of the production operation).
В оперативном режиме, ссылка на видеоданные может быть передана пользователю, например, специалисту отдела контроля качества, в момент начала производственной операции для контроля этой операции. Пользователь может проанализировать только что записанное видео с момента начало производственной операции, а так же живое видео, поступающее в реальном масштабе времени с места производства.In the online mode, a link to the video data can be transferred to the user, for example, a specialist of the quality control department, at the time of the start of the production operation to control this operation. The user can analyze the just recorded video from the moment the production operation begins, as well as live video coming in real time from the place of production.
Если пользователю необходимо просмотреть текущее статус производственной операции, то вместо ссылки на записанные видеоданные, может передаваться ссылка на поток видеоданных непосредственно от источника видеоданных (камеры).If the user needs to view the current status of the production operation, then instead of a link to the recorded video data, a link to the video stream directly from the video source (camera) can be transmitted.
В ретроспективном режиме, ссылка на видеоданные может быть включена в результаты поиска по архиву событий производства или в отчет о производственном процессе. Такая ссылка позволяет пользователю быстро начать просмотр видеоданных, связанных с выбранной производственной операций.In retrospective mode, a link to video data can be included in search results in an archive of production events or in a report on the production process. Such a link allows the user to quickly start viewing video data associated with the selected production operations.
Например, пользователь может просматривать в браузере Интернет список производственных операций, где были нарушены плановые сроки выполнения операции, и быстро анализировать видеозаписи, содержащие эти производственные операции.For example, a user can view in the Internet browser a list of production operations where the planned dates for the operation were violated, and quickly analyze videos that contain these production operations.
Настоящее изобретение может быть использовано совместно с существующими онлайн-сервисам видеонаблюдения и видеохранения, например, YouTube (http://voutube.com/), DropCam (http://dropcam.com/), iVideon. (http://ivideon.com/).The present invention can be used in conjunction with existing online video surveillance and video storage services, for example, YouTube (http://voutube.com/), DropCam (http://dropcam.com/), iVideon. (http://ivideon.com/).
Система разметки видеоданных производственного процесса для реализации настоящего изобретения включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает: один или более процессоров, устройство для хранения данных, одну или более программ; где одна или более программ хранятся на устройстве для хранения данных и исполняются на одном или более процессоре, причем одна или более программ включают инструкции. Инструкции предназначены для управления компьютерной системой, реализующей заявленный способ. Набор инструкций следующий:A system for marking video data of a production process for implementing the present invention includes a computer system, a video source, a data input device for a production operation, the computer system including: one or more processors, a data storage device, one or more programs; where one or more programs are stored on a data storage device and executed on one or more processors, wherein one or more programs include instructions. The instructions are intended to control a computer system that implements the claimed method. The set of instructions is as follows:
Вводить начальные данные о зоне обслуживания, характеризующейся геоположением (месторасположением) и зоной обзора, по крайней мере, одного источника видеоданных.Enter the initial data on the service area, characterized by geolocation (location) and the field of view of at least one video source.
Получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях.Receive data on production operations coming from one or more input devices for data on production operations.
Определить, один или более идентификаторов источника видеоданных, в зоне обслуживания которого происходит производственная операция путем сравнения известного места выполнения производственной операции с данными о зоне обслуживания, по крайней мере, одного источника видеоданных.Determine one or more identifiers of the source of the video data in the service area of which the production operation takes place by comparing the known place of the production operation with the data about the service area of at least one video source.
Формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеопределенного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.Generate at least one link linking the video data from the above-defined video source in the service area of which the production operation is performed and the identifier of this production operation.
Компьютерная система может осуществлять запись видеоданных в непрерывном режиме или в событийном режиме, когда осуществляется производственная операция.A computer system can record video data in a continuous mode or in an event mode when a production operation is carried out.
Компьютерная система может осуществлять запись данных о производственных операциях, причем записываем данные могут быть использованы как индекс видеоданных для последующего поиска.A computer system can record data on production operations, and record the data can be used as an index of video data for subsequent search.
Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка: уникальная символьная последовательность, гиперссылка, унифицированный идентификатор ресурса (URI), идентификатор источника видеоданных, идентификатор зоны обслуживания источника видеоданных, временная метка начала производственной операции, временная метка окончания производственной операции, идентификатор производственной операции, идентификатор исполнителя, идентификатор производимого изделия, идентификатор выполняемого заказа.A link to video data may contain one or a combination of parameters from the following list: a unique character sequence, a hyperlink, a unified resource identifier (URI), a video source identifier, a video source service area identifier, a timestamp for the start of a production operation, a timestamp for the end of a production operation, an identifier for a production operations, identifier of the executor, identifier of the manufactured product, identifier of the order being executed.
Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:A link to video data may contain one or a combination of parameters from the following list:
- уникальная символьная последовательность,- a unique character sequence,
- гиперссылка,- hyperlink
- унифицированный идентификатор ресурса (URI),Unified Resource Identifier (URI)
- идентификатор источника видеоданных,- video source identifier,
- идентификатор зоны обслуживания источника видеоданных,- identifier of the service area of the video source,
- временная метка начала производственной операции,- timestamp of the beginning of the production operation,
- временная метка окончания производственной операции,- timestamp of the end of the production operation,
- идентификатор производственной операции,- identifier of the production operation,
- идентификатор исполнителя,- artist identifier,
- идентификатор производимого (обрабатываемого) изделия,- identifier of the manufactured (processed) product,
- идентификатор выполняемого заказа;- identifier of the order being executed;
- номер обрабатываемого объекта;- number of the processed object;
- номер партии обрабатываемых объектов.- batch number of processed objects.
Источник видеоданных и устройство ввода данных о производственной операции могут быть объединены в одно устройство. В этом случае взаимосвязь зоны обслуживания источника видеоданных и устройство ввода данных о производственной операции может быть заранее настроен производителем данного объединенного устройства.The video source and the data input device for the production operation can be combined into one device. In this case, the relationship between the service area of the video source and the input device for production data can be pre-configured by the manufacturer of this combined device.
Источником видеоданных может быть поворотная видеокамера (PTZ), а зону обслуживания видеокамеры уточняют, в т.ч. автоматически, после каждого изменения положения поворотной видеокамеры. Поворотная видеокамера может быть настроена на точки производства при помощи заранее запрограммированных позиций.The source of video data can be a PTZ video camera, and the service area of the video camera is specified, including automatically, after each change of position of the PTZ camera. The PTZ camera can be adjusted to production points using pre-programmed positions.
Ссылки, устанавливающие связь между записанными видеоданными и этапами производственной операцией можно хранить на вспомогательной компьютерной системе.Links establishing a link between the recorded video data and the steps of the production operation can be stored on an auxiliary computer system.
В качестве источника видеоданных может выступать одно из следующих устройств: видеокамера, видеорегистратор, видеосервер, видеокодер или другое подходящее.One of the following devices can act as a source of video data: a video camera, a video recorder, a video server, a video encoder, or other suitable device.
В качестве источника видеоданных может быть видеокамера, встроенная в мобильное устройство исполнителя, причем видеоданные о производственной операции и/или месте осуществления этой производственной операции могут вводиться через это мобильное устройство.The source of the video data may be a video camera integrated in the mobile device of the performer, wherein video data on the production operation and / or the location of the production operation can be input through this mobile device.
Идентификатор производственной операции может быть как уникальным, так и неуникальным. Например, в качестве неуникального уникального идентификатора может быть использовать код обслуживания оборудования или тип производимого изделия.The identifier of a production operation can be either unique or non-unique. For example, a non-unique identifier may be the equipment service code or the type of product being manufactured.
В описанной реализации настоящего изобретения можно использовать специальное программное обеспечения (приложение) для производственного оборудование и персонального мобильного устройства, которое регистрирует данные о технологических операциях и реализует обратную связь с исполнителем. Например, специальное программное обеспечения может отображать запланированные производственные операции и информировать исполнителя путем подачи звукового сигнала в случае, если исполнитель забыл подать сигнал о начале или завершении операции.In the described implementation of the present invention, it is possible to use special software (application) for production equipment and a personal mobile device that records data on technological operations and implements feedback from the performer. For example, special software can display planned production operations and inform the performer by sounding in case the performer forgot to give a signal about the beginning or end of the operation.
Компьютерная система может быть виртуализирована или быть «облачной», то есть, не ограничена реализацией, физической конфигурацией или географическим положением аппаратного обеспечения.A computer system can be virtualized or cloud-based, that is, not limited to the implementation, physical configuration, or geographic location of the hardware.
Компьютерная система может быть может записывать видеоданные в событийном режиме по сигналу от источника данных о производственным процессе.A computer system may be able to record video data in event mode by a signal from a data source about a manufacturing process.
Компьютерная система может использовать детектор движения и/или видеоаналитику для более точного индексирования и поиска видеоданных о производственном процессе. При этом детектор движения и/или видеоаналитика могут быть встроены в видеокамеру, либо работать на сервере.A computer system can use a motion detector and / or video analytics to more accurately index and search for video data on the manufacturing process. In this case, the motion detector and / or video analytics can be built into the video camera, or work on the server.
Например, детектор движения и/или видеоаналитика может быть использована для обнаружения фактов несоответствия производственного плана и фактической ситуации на производстве.For example, a motion detector and / or video analytics can be used to detect inconsistencies in the production plan and the actual situation in the workplace.
ПРИМЕРЫ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯMODES FOR CARRYING OUT THE INVENTION
На фиг.1 представлена одна из схем реализации способа разметки видеоданных производственного процесса. Видеокамера видеонаблюдения 11 установлена для наблюдения за производственным процессом. В зоне обслуживания видеокамеры и места производственной операции 16 находится производственное оборудование 18 и люди, исполнители этого процесса, 17. Видеоданные поступает с видеокамеры по каналу связи 12 на сервер обработки и хранения 13. На этапе конфигурирования настоящей системы, вводят начальные данные о зоне обслуживания видеокамеры, в результате чего видеокамера привязывается к конкретному производственному оборудованию или месту производственной операции. Устройство ввода данных о производственной операции 15 может быть стационарно зафиксированным в зоне производственной операции, а так же может быть удаленным и/или мобильным (переносимым). По ходу эксплуатации системы, исполнитель 17 или иной сотрудник организации вводит данные о начале и окончании производственной операции, которые поступают по каналу связи 14 на сервер обработки и хранения 13. Сервер 13 записывает одновременно полученные видеоданные и данные о производственных операциях.Figure 1 presents one of the schemes for implementing the method of marking video data of the production process.
Данные о начале и об окончании производственной операции могут быть введены по ходу производства или заранее, во время планирования производства.Data on the beginning and end of the production operation can be entered during production or in advance, during production planning.
Сервер 13 индексирует видеоданные на основе событий производственного процесса, получаемых от устройства ввода данных о производственной операции 15 и/или от производственного оборудования 18.The server 13 indexes the video data based on the events of the production process received from the data input device about the
Камера 11 и/или сервер 18 осуществляют аналитическую обработку видеоданных камеры 11. В случае обнаружения движения людей в зоне обслуживания видеокамеры 16 без ввода данных о начале производственной операции, то сервер формирует сообщение для исполнителя 17 о необходимости ввести эти данные. Такое голосовое сообщение может передано через устройство ввода 15 или громкоговорящую связь.The
В случае отсутствия движения в зоне обслуживания видеокамеры 16 свыше установленного времени, сервер может автоматически сформировать метку видеоданных об окончании производственной операции, причем метка может соответствовать моменту времени самого последнего движения в зоне 16.If there is no movement in the service area of the
Удаленный пользователь 112 через свое рабочее место 111 может подключиться по каналу связи 110 к серверу 13 для получения отчетов и видеоданных о производственных операциях. Удаленный пользователь 112 может быть менеджер организации, сотрудник центра технической поддержки, сотрудник центра технологического мониторинга (контроля качества), обучающий персонал.Remote user 112 through his workstation 111 can connect via communication channel 110 to server 13 to receive reports and video data on production operations. Remote user 112 may be an organization manager, an employee of a technical support center, an employee of a center for technological monitoring (quality control), and training personnel.
Каналы связи 12, 14 и 110 могут быть проводными или беспроводными, частными (private) или общего пользования (public).
Технический результат настоящего изобретения в данном случае достигается следующим образом.The technical result of the present invention in this case is achieved as follows.
Сервер формируют следующие отчеты для пользователя 112: 1) производственные операции (выполняемые, законченные, невыполненные, задержанные); 2) исполнители с указанием числа выполненных и невыполненных операций в установленный срок; 3) изделия (заказы) с указанием числа изготовленных или неизготовленных изделий (заказов) в установленный срок.The server generates the following reports for user 112: 1) production operations (performed, completed, outstanding, delayed); 2) performers indicating the number of completed and outstanding transactions within the prescribed period; 3) products (orders) indicating the number of manufactured or unprepared products (orders) in a timely manner.
Отчет содержит гиперссылки, позволяющие удаленному пользователю 112 просмотреть видеоданные по каждым производственной операции, исполнителю, изделию (заказу).The report contains hyperlinks that allow the remote user 112 to view the video data for each production operation, artist, product (order).
Кроме этого удаленный пользователь 112 получает сообщение на экране своего рабочего места 111 о начале и об окончании производственной операции. Пользователь может просмотреть «живое» в видео с установленных видеокамер, где происходит выбранная им производственная операция, а так же просмотреть записанное видео, соответствующее выбранным им производственной операции.In addition, the remote user 112 receives a message on the screen of his workplace 111 about the beginning and end of the production operation. The user can view the “live” video from the installed cameras where the production operation he has chosen takes place, as well as view the recorded video corresponding to the production operation he has chosen.
Удаленный пользователь 112 имеет средства голосовой связи с исполнителем 17, которые позволяет пользователю оперативно связаться с исполнителем и сообщить о выявленных производственных проблемах или ошибок исполнителя. Средства голосовой связи могут быть встроены в устройство ввода данных о производственной операции 15, в производственное оборудование 18 и в рабочее место удаленного пользователя 111.The remote user 112 has voice communications with the
В одной реализации изобретения, пользователю 112 передается ссылка на видеоданные, записанные на сервере 13.In one implementation of the invention, a user is sent a link to the video data recorded on the server 13.
В другой реализации изобретения пользователю 112 передается ссылка на видеоданные, содержащие происходящую производственную операцию и передаваемые непосредственно с видеокамеры 11 минуя подсистему записи сервера 13.In another implementation of the invention, the user 112 is sent a link to the video data containing the ongoing production operation and transmitted directly from the
Производственное оборудование 18 может выполнять функции устройства ввода данных о производственной операции 15, передавая данные о начале и об окончании операции по каналу связи 19.
Пример видеоданных, полученных с видеокамеры 11 представлен на рис.2.An example of video data received from
Пример графического интерфейса пользователя (GUI) устройство ввода данных 15 представлен на фиг.3.An example of a graphical user interface (GUI)
Пример отчетов о производственном процессе, отображаемых на рабочем месте удаленного пользователя 11, представлен на фиг.4.An example of reports on the production process displayed on the workplace of the
Пример начальных данных о зонах обслуживания видеокамер представлен на фиг.5.An example of initial data on the coverage areas of the cameras is presented in Fig.5.
Пример индекса видеоархива, представлен на фиг.6.An example of a video archive index is shown in FIG. 6.
На фиг.2 представлен пример видеоданных производственного процесса, отображающих исполнителя 17, производственное оборудование 18 и устройство ввода данных о производственной операции 15.Figure 2 presents an example of video data of the production process, displaying the
На фиг.3 представлен пример пользовательского интерфейса устройства ввода данных о производственной операции. Настоящий интерфейс может быть реализовано на базе планшетного компьютера с сенсорным экраном. Интерфейс задержит следующие элементы:Figure 3 presents an example of the user interface of the input device for the production operation. This interface can be implemented on the basis of a tablet computer with a touch screen. The interface will delay the following elements:
Перечень изделий и производственных операций 31 содержит список запланированных производственных операций, а так же список незапланированных операций, которые должен выполнять исполнитель 17 на месте производства производственной операции 16. Текущая (выполняемая) операция выделена цветом.The list of products and
Фотография и текстовый идентификатор исполнителя 32 указаны для того чтобы избежать ошибки идентификации исполнителя 17.The photograph and text identifier of the
Фотография и текстовый идентификатор места производственной операции 33 указаны для того чтоб избежать ошибки идентификации места производственной операции 16.The photo and text identifier of the place of
Описание производственной операции 34 содержит информацию, полезную для исполнителя при выполнении производственной операции, например, особенности технологического процесса, контрольные показания измерительных приборов.Description of the production operation 34 contains information useful to the performer when performing the production operation, for example, features of the process, control readings of measuring instruments.
Кнопка начала производственной операции 35 позволяет сформировать временную метку и ссылку на видеоданные начала производственной операции.The start button of the
Кнопка окончания производственной операции 36 позволяет сформировать временную метку и ссылку на видеоданные окончания производственной операции.The
Кнопка экстренного вызова 37 позволяет исполнителю оперативно связаться с центром технической поддержки в случае возникновении проблемы.
Схема или фотография изделия (заказа, клиента) 38 позволяет исполнителю проконтролировать корректность вводимой информации и выполнение производственной операции.The diagram or photograph of the product (order, customer) 38 allows the contractor to verify the correctness of the information entered and the production operation.
Кнопка выбора места операции 39 позволяет выбрать место производственной операции в том случае, когда настоящее устройство ввода данных является мобильным (переносным). Если устройство стационарно, то кнопка 39 не требуется.The button for selecting the location of the
Кнопка 310 позволяет открыть окно ввода текста и позволяет исполнителю ввести комментарии о проделанных работах.
На фиг.4 представлен пример отчета о производственном процессе для руководителя организации, полученного при помощи компьютерной системы фиг.1. Отчет включает:Figure 4 presents an example of a report on the production process for the head of the organization obtained using the computer system of figure 1. The report includes:
Линейный график числа запланированных и выполненных заказов (производственных операций, изготовленных изделий) 41. Верхняя линия соответствует числу запланированных задач, а нижняя - выполненных. Руководитель может указать любую точку графика выполненных заказов и просмотреть список этих заказов, как показано в таблице 43.A linear graph of the number of planned and completed orders (production operations, manufactured products) 41. The top line corresponds to the number of planned tasks, and the bottom to completed ones. The manager can indicate any point on the schedule of completed orders and view a list of these orders, as shown in table 43.
Круговая диаграмма задержки заказов 42 показывает число заказов, выпаленных в срок, задержанных на 1 час, задержанных на 2 часа, задержанных на 3 и более часов. Руководитель может щелкнуть по любому сектору круговой диаграммы 42 и просмотреть список заказов, соответствующей сектору, как показано в таблице 43.The pie chart of order delays 42 shows the number of orders dispatched on time, delayed by 1 hour, delayed by 2 hours, delayed by 3 or more hours. The manager can click on any sector of the pie chart 42 and view the list of orders corresponding to the sector, as shown in table 43.
Таблица качества и сроков выполнения заказов 43 содержит порядковый номер заказа (производственной операции), идентификатор исполнителя, качество выполнения заказа, опоздание и ссылок на видео выполнения заказа. Каждый элемент таблицы является гиперссылкой, которая позволяет верифицировать указанные данные. Номер и содержание заказа определяют на этапе планирования. Исполнителя, время начала и время окончания работа над заказом определяют при помощи системы на фиг.1. Качество работ определяет специалист службы качества на основе видеоданных по ссылке, сформированной системой. Руководитель может выбрать для просмотра видео, содержащие каждую конкретную заданную операцию и просмотреть ее, воспользовавшись ссылкой «СМОТРЕТЬ», сформированной системой.The table of quality and terms of execution of orders 43 contains the serial number of the order (production operation), the identifier of the contractor, the quality of the order, lateness and links to the video of the order. Each element of the table is a hyperlink that allows you to verify the specified data. The number and contents of the order are determined at the planning stage. Contractor, start time and end time work on the order is determined using the system in figure 1. The quality of work is determined by a quality service specialist based on video data using a link formed by the system. The manager can choose to view videos containing each specific predetermined operation and view it using the “VIEW” link generated by the system.
На фиг.5 представлен пример начальных данных о зоне обслуживания видеокамеры. Начальные данные содержат план производственного помещения 51, графическое обозначение зон обслуживания видеокамер 52-53 и таблицу соответствия идентификаторов видеокамер и идентификаторов производственных операций 54. Таблица 54 может формировать вручную пользователем или автоматически на основе плана 51. План 51 или таблица 54 позволяют автоматически определить идентификатор видеокамеры, в зоне которой происходит заданная производственная операция.Figure 5 presents an example of initial data on the coverage area of the camera. The initial data contains a plan of the
На фиг.6 представлен пример временного индекса архива. Пример содержит индекс для двух видеокамер 61 и 64. В зоне обслуживания видеокамеры 61 происходят производственные операции 62 и 63. В зоне обслуживания видеокамеры 64 происходят производственные операции 65 и 66.Figure 6 presents an example of a temporary archive index. The example contains an index for two cameras 61 and 64. In the service area of the camera 61, production operations 62 and 63 take place. In the service area of the camera 64, production operations 65 and 66 take place.
На фиг.7 представлена одна из схем реализации способа разметки видеоданных производственного процесса с использованием штрихкода. Конвейер 70 сортировочного узла почты или логистического центра доставляет посылку 71 с меткой в виде штрихкода на место производственной операции 74 со другим штрикодом. Местом производственной операции может быть, например, рабочий стол или в контейнер. Место производственной операции 74 находится в зоне обслуживания видеокамеры 72. Устройством ввода данных о производственной операции является ручной считыватель штрихкодов 73, ассоциированным с исполнителем. К компьютерной системе 75 подключены видеокамера 72 и считыватель штрих-кодов 73. К этой же компьютерной системе могут быть подключены другие видеокамеры и считыватели штрихкодов, которые не показаны на фиг.7. Введены данные о соответствии зоны действия видеокамеры 72 и местом производственной операции 74. В перечень разновидностей идентификаторов включены: 1) идентификатор камеры; 2) идентификатор исполнителя (имеющий однозначную связь со считывателем штрих-кодов 73); 3) идентификатор посылок; 4) идентификатор места производственной операции.Figure 7 presents one of the implementation schemes of a method for marking video data of a production process using a barcode. The conveyor 70 of the mail sorting center or logistics center delivers the parcel 71 with a barcode label to the place of production operation 74 with a different barcode. The place of production can be, for example, a desktop or in a container. The place of production operation 74 is located in the service area of the video camera 72. The input device for the production operation is a hand-held barcode reader 73 associated with the performer. A video camera 72 and a barcode reader 73 are connected to the computer system 75. Other video cameras and barcode readers that are not shown in FIG. 7 can be connected to the same computer system. Data has been entered on the correspondence of the coverage area of the video camera 72 and the place of production operation 74. The list of identifiers includes: 1) camera identifier; 2) the identifier of the artist (having a unique relationship with the barcode reader 73); 3) parcel identifier; 4) the identifier of the place of production.
Компьютерная система содержит дисковую подсистему хранения и записывает видеоданные, поступающее с видеокамеры 72 и данных о производственном процессе, поступающее со считывателя штрих-кодов 73.The computer system contains a disk storage subsystem and records video data coming from a video camera 72 and data on a production process coming from a barcode reader 73.
Исполнитель считывает при помощи считывателя штрих-кодов 73 идентификатор места производственный операции 74. Компьютерная система автоматически определяет видеокамеру 72, в зоне обслуживания которой осуществляется производственная операция на основе ранее введенных данных о соответствии зоны действия видеокамеры 72 и идентификатора места производственной операции 7). Компьютерная система фиксирует связь между видеокамерой 72 (местом производственной операции) и считывателем штрих-кодов 73 (исполнителем).The contractor reads, using a barcode reader 73, the location identifier of the production operation 74. The computer system automatically determines the video camera 72 in the service area of which the production operation is based on previously entered data on the correspondence of the coverage of the video camera 72 and the location identifier of the production operation 7). The computer system fixes the connection between the video camera 72 (the place of the production operation) and the barcode reader 73 (executor).
Если исполнитель забывает считать идентификатор места производственной операции, то компьютерная система может автоматически информировать исполнителя по громкоговорящей связи после обнаружения движения в зоне действия видеокамеры 72.If the contractor forgets to read the identifier of the place of the production operation, the computer system can automatically inform the contractor via speakerphone after detecting movement in the coverage area of the video camera 72.
Если в компьютерной системе зарегистрирован план работ исполнителей для данного места производственной операции, то компьютерная система может автоматически идентифицировать исполнителя на основе этого плана.If an executor’s work plan for a given place of a production operation is registered in a computer system, the computer system can automatically identify an executor based on this plan.
Исполнитель считывает при помощи считывателя штрих-кодов 73 идентификатор посылки 71. Компьютерная система автоматически определяет видеокамеру 72, в зоне обслуживания которой осуществляется производственная операция на основе связи, зафиксированной на предшествующем шаге.The contractor reads the parcel identifier 71 using the barcode reader 73. The computer system automatically determines the video camera 72, in the service area of which the production operation is carried out on the basis of the communication recorded at the previous step.
Технический результат настоящего изобретения в данном случае достигается следующим образом.The technical result of the present invention in this case is achieved as follows.
Компьютерная система формирует ссылку на видеоданные, поступающие с видеокамеры 72, которая содержат: 1) идентификатор видеокамеры; 2) идентификатор места производственной операции; 3) идентификатор исполнителя, ассоциированный с ручным сканером штрих-кодов; 4) дата и время производственной операции; 5) идентификатор посылки. Полученная ссылка записывает в индекс видеоархива компьютерной системы.The computer system generates a link to the video data coming from the video camera 72, which contains: 1) the identifier of the video camera; 2) the identifier of the place of production; 3) the identifier of the artist associated with a handheld barcode scanner; 4) the date and time of the production operation; 5) parcel identifier. The resulting link is written to the index of the video archive of the computer system.
Местом производственной операции может быть контейнер для посылок. Если штрих-код контейнера размещается наверху, то идентификатор места производственной операции (идентификатор контейнера) может быть получен компьютерной системой в автоматическом режиме путем считывания штрих-кода с контейнера через видеокамеру 72.The place of production may be a container for parcels. If the barcode of the container is placed at the top, then the identifier of the place of production (container identifier) can be obtained by the computer system in an automatic mode by reading the barcode from the container through the video camera 72.
Изобретение промышленно применимо, поскольку использует промышленно изготовленные и промышленно применимые ресурсы.The invention is industrially applicable because it uses industrially manufactured and industrially applicable resources.
Хотя данное изобретение описано примером его реализации, это описание не является ограничивающим, но приведено лишь для иллюстрации и лучшего понимания существа изобретения, объем которого определяется прилагаемой формулой изобретения.Although this invention is described by an example of its implementation, this description is not limiting, but is provided only to illustrate and better understand the essence of the invention, the scope of which is determined by the attached claims.
СПИСОК ЛИТЕРАТУРЫ.BIBLIOGRAPHY.
1. Дамьяновски В., CCTV. Библия видеонаблюдения. Цифровые и сетевые технологии, ООО «Ай-Эс-Эс Пресс», 2006, 478 с, ISBN: 5-87049-260-21. Damjanowski V., CCTV. Bible CCTV. Digital and Network Technologies, LLC "IS-ES Press", 2006, 478 s, ISBN: 5-87049-260-2
2. Fredrik Nilsson, Intelligent Network Video: Understanding Modern Video Surveillance Systems, CRC Press, 2008, ISBN-10: 14200615692. Fredrik Nilsson, Intelligent Network Video: Understanding Modern Video Surveillance Systems, CRC Press, 2008, ISBN-10: 1420061569
3. Сервис «iVideon» компании ЗАО «Мобильные видеорежения» http://ivideon.ru/3. Service "iVideon" of the company "Mobile Video Respect" CJSC http://ivideon.ru/
4. Птицын Н.В., Видеоаналитика, 2013, http://svnesis.ru/technology/videoanalitika4. Ptitsyn N.V., Video analytics, 2013, http://svnesis.ru/technology/videoanalitika
Claims (138)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
RU2013135912A RU2672307C2 (en) | 2013-07-31 | 2013-07-31 | Method (options) for systematization of video data production process and system (options) |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
RU2013135912A RU2672307C2 (en) | 2013-07-31 | 2013-07-31 | Method (options) for systematization of video data production process and system (options) |
Publications (2)
Publication Number | Publication Date |
---|---|
RU2013135912A RU2013135912A (en) | 2015-02-10 |
RU2672307C2 true RU2672307C2 (en) | 2018-11-13 |
Family
ID=53281601
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
RU2013135912A RU2672307C2 (en) | 2013-07-31 | 2013-07-31 | Method (options) for systematization of video data production process and system (options) |
Country Status (1)
Country | Link |
---|---|
RU (1) | RU2672307C2 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2746652C1 (en) * | 2020-06-22 | 2021-04-19 | Общество с ограниченной ответственностью "Норд Вижен Интелледженс Солюшенс" | Modular system to control process safety and technological processes |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11064175B2 (en) | 2019-12-11 | 2021-07-13 | At&T Intellectual Property I, L.P. | Event-triggered video creation with data augmentation |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001054399A3 (en) * | 2000-01-20 | 2001-12-27 | Koninkl Philips Electronics Nv | Multi-modal video target acquisition and re-direction system and method |
US20060177119A1 (en) * | 2002-10-25 | 2006-08-10 | Mcpheely Bernard M | Digital diagnosti video system for manufacturing and industrial process |
US20090009601A1 (en) * | 2006-03-27 | 2009-01-08 | Ke Li | Logistics monitoring and tracking method and system |
WO2011123741A2 (en) * | 2010-04-01 | 2011-10-06 | Sealed Air Corporation (Us) | Automated monitoring and control of safety in a production area |
US20120036500A1 (en) * | 2006-06-02 | 2012-02-09 | Rockwell Automation Technologies, Inc. | Change management methodologies for industrial automation and information systems |
US20120299727A1 (en) * | 2011-05-27 | 2012-11-29 | Illinois Tool Works Inc. | System and method for monitoring, controlling, and improving productivity and safety conditions of automated machinery |
RU2484529C1 (en) * | 2012-03-21 | 2013-06-10 | Общество с ограниченной ответственностью "Синезис" | Method of ranking video data |
-
2013
- 2013-07-31 RU RU2013135912A patent/RU2672307C2/en active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001054399A3 (en) * | 2000-01-20 | 2001-12-27 | Koninkl Philips Electronics Nv | Multi-modal video target acquisition and re-direction system and method |
US20060177119A1 (en) * | 2002-10-25 | 2006-08-10 | Mcpheely Bernard M | Digital diagnosti video system for manufacturing and industrial process |
US20090009601A1 (en) * | 2006-03-27 | 2009-01-08 | Ke Li | Logistics monitoring and tracking method and system |
US20120036500A1 (en) * | 2006-06-02 | 2012-02-09 | Rockwell Automation Technologies, Inc. | Change management methodologies for industrial automation and information systems |
WO2011123741A2 (en) * | 2010-04-01 | 2011-10-06 | Sealed Air Corporation (Us) | Automated monitoring and control of safety in a production area |
US20120299727A1 (en) * | 2011-05-27 | 2012-11-29 | Illinois Tool Works Inc. | System and method for monitoring, controlling, and improving productivity and safety conditions of automated machinery |
RU2484529C1 (en) * | 2012-03-21 | 2013-06-10 | Общество с ограниченной ответственностью "Синезис" | Method of ranking video data |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
RU2746652C1 (en) * | 2020-06-22 | 2021-04-19 | Общество с ограниченной ответственностью "Норд Вижен Интелледженс Солюшенс" | Modular system to control process safety and technological processes |
WO2021262030A1 (en) * | 2020-06-22 | 2021-12-30 | Общество с ограниченной ответственностью "Норд Вижен Интелледженс Солюшенс" | Modular system for monitoring production safety and technical procedures |
Also Published As
Publication number | Publication date |
---|---|
RU2013135912A (en) | 2015-02-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9536570B2 (en) | Method and system for systematization of production-process video data | |
US10337962B2 (en) | Visible audiovisual annotation of infrared images using a separate wireless mobile device | |
US10229375B2 (en) | Monitoring recurring activities and locations of workers | |
Liu et al. | RFID-enabled real-time production management system for Loncin motorcycle assembly line | |
GB2539769A (en) | System for inventory management | |
US9633326B2 (en) | Load distribution and consolidation tracking system | |
US20180349832A1 (en) | Automatic floor-level retail operation decisions using video analytics | |
AU2020243577B2 (en) | Distributed logbook for anomaly monitoring | |
Tran et al. | Indoor positioning systems can revolutionise digital lean | |
CN114266514A (en) | Informationized intelligent warehousing management method and system | |
Yuan et al. | Radio frequency identification–enabled monitoring and evaluating in the discrete manufacturing process | |
RU2672307C2 (en) | Method (options) for systematization of video data production process and system (options) | |
Muhić et al. | Proposal of a Model for Smart Waste Management System Using IoT Camera and AI for Real-time QR Code Objects Recognition | |
US10671972B2 (en) | Automated zone location characterization | |
Machado et al. | Real-Time Logistic Monitoring: System Prototype Overview | |
CN112035876A (en) | Agricultural input product market supervision method and system | |
KR20200088003A (en) | Inventory control system based on nfc and mobile app and its method | |
US11176501B2 (en) | Methods and systems to track relocation status | |
JP2012221292A (en) | Information management device, control method of information management device, and control program of information management device | |
US20220284381A1 (en) | Logistics Method for a Product Supply and Distribution Chain | |
US20230010844A1 (en) | Enterprise resource planning system and method | |
Ćwikła | Manufacturing data acquisition in non-automated production systems | |
Gomes et al. | Radio-Frequency Identification Traceability System Implementation in the Packaging Section of an Industrial Company | |
Roh et al. | Smart-Tracking Systems Development with QR-Code and 4D-BIM for Progress Monitoring of a Steel-Plant Blast-Furnace Revamping Project in Korea | |
Barry et al. | Information management and related technology |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
HZ9A | Changing address for correspondence with an applicant |