WO2016159926A1 - Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов - Google Patents

Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов Download PDF

Info

Publication number
WO2016159926A1
WO2016159926A1 PCT/UA2016/000038 UA2016000038W WO2016159926A1 WO 2016159926 A1 WO2016159926 A1 WO 2016159926A1 UA 2016000038 W UA2016000038 W UA 2016000038W WO 2016159926 A1 WO2016159926 A1 WO 2016159926A1
Authority
WO
WIPO (PCT)
Prior art keywords
signal
sources
signals
switching
user
Prior art date
Application number
PCT/UA2016/000038
Other languages
English (en)
French (fr)
Inventor
Борис Евгеньевич ПАНЧЕНКО
Original Assignee
Борис Евгеньевич ПАНЧЕНКО
ПЕЧЕНЮК, Дмитрий Андреевич
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Борис Евгеньевич ПАНЧЕНКО, ПЕЧЕНЮК, Дмитрий Андреевич filed Critical Борис Евгеньевич ПАНЧЕНКО
Publication of WO2016159926A1 publication Critical patent/WO2016159926A1/ru

Links

Definitions

  • the invention relates to the field of telecommunications technology and can be used in the development of real-time synchronized routing devices with subsequent switching (switching) of analog or digital input signals (hereinafter simply signals) with a packet, i.e. periodically discrete structure.
  • This type of signal is used in the field of communications, in television and video networks, surveillance systems and real-time computer networks, etc.
  • Such a situation can occur when, for example, a significant number of pre-unsynchronized signal sources are used that are turned on at different points in time. This is due to the need to use different types of sources, including from different manufacturers.
  • the invention considers a situation where during the switching from signal to signal, the integrity of signal packets is critical. Each time with unsynchronized switching, the first packets of the switched-on signal are destroyed.
  • Typical examples are the source signal from a television camera, the VGA signal of a computer, or the signal of a television broadcast system in which the packet is a video frame. Destruction of video frames during switching of such signals is an unacceptable situation.
  • the prototype of the proposed method is the switching principle proposed in the patent of Ukraine N ° UA 2010/103313 from 10.10.13.
  • This solution addresses a technical problem that has all of the above features.
  • a new technical result has also been obtained here, which consists in synchronized switching of an unlimited number of previously unsynchronized sources. But this method does not show how a significant number of signals are routed to the switching device. Without solving this issue, the industrial operation of the prototype method is complicated.
  • the objective of the invention is to develop an alternative method of automated selective routing of a significant number of digital signals, which simultaneously provides new technical capabilities: automated routing to a switching point of a signal selected from an arbitrary number of signals, synchronized switching of digital signals from an arbitrary number of pre-unsynchronized sources, multi-user operation mode, unlimited scaling of the source system (increase e or reduction of their number) during operation, as well as an arbitrary topology of the location of the sources.
  • a situation is considered where the location of sources in a large territory can be situational and change over a short time — that is, in spite of the continuous operation of the system, such replacements of the source layout can occur frequently. This is important when serving such large-scale events as modern exhibitions, multi-species sports competitions, reconstruction of historical battles, city holidays, etc.
  • the method is based on the idea of selective signal routing, first to the switching location, and after switching to the user's location.
  • All known switching devices for example, television signal switches, are designed for a small number of sources - expensive professional television cameras. And therefore, the process of visualization and selection of signals is localized in one place - on the switching console. This concept is unacceptable when the number of signals exceeds 100, and especially 1000 sources.
  • the method considers only two approaches to signal synchronization - either constant artificial synchronization of the entire source system due to clock pulses from the switching system, or automated selective synchronization of the selected signal relative to the previous one due to the automated buffering of only these two signals. Moreover, only these methods make it possible to build a multi-user concept of the said system.
  • the first technique cannot be used in a situation when it is necessary to combine sources having an external synchronization interface in a single system, as well as sources that do not have such an interface. This problem often arises when you need to combine a combination of external cameras reduced signal surveillance and professional television cameras. To synchronize such source systems, a selective automated buffering method is non-alternative.
  • the method that is claimed differs from the known ones in that, thanks to the automated switching control system (ACS), which is installed on the switching device system (CC) or, in the particular case of the hierarchical system topology on the central switching device (CCU), the processes of switching and routing in space source locations are shared. Only the signal selected by him, which has just replaced the previous signal, is transported to the user. Moreover, such transportation is carried out only thanks to one logical line of the path (logical signal conductor, hereinafter LLT).
  • ACS automated switching control system
  • CC switching device system
  • CCU central switching device
  • This approach can significantly minimize the path load and use the connection topology of all signal sources and the AC (user workstation) only in accordance with two well-known principles: a network or its special case - a hierarchy (in the form of a tree). If in the form of a tree, then the beginning is focused on the Central Control Commission, and by branches and foliage - on the sources. And if the network - then without the definition of the Central Control Commission.
  • CMs are separate switches that are minimally sufficient to fulfill user requests.
  • the UK performs the following processes: turning on or off any LLT that are connected to the UK (state of the semaphore key), automated buffering and synchronization of the selected signal relative to the previous signal (in the case when it is impossible to use the general artificial synchronization of all sources), switching the selected signal relative to the previous one and multiplying the signal source but.
  • the multi-user mode of operation of the system is supported by the propagation of signals in accordance with user requests, as well as their transit through the UK (if necessary), depending on the control signal. This is due to the many LLTs combined into one physical channel (FC) of the path, which is connected to the AC according to the “input-output” scheme.
  • FC physical channel
  • the MC is directly (or relatively close) connected to one or several signal sources (according to the “star” scheme), or to free nodes of branch intersection in the hierarchical arrangement of sources or links in Networks (if sources are not located in these nodes for one reason or another).
  • Switching (or, first, automated buffering and synchronization with respect to the previous signal) can be performed either on the AC, which is directly connected to the previous source, or on the AC, which is directly connected to the selected source (depending on which of these sources is lower in the cascade, if they are located on the same line), or on the intersection line of the corresponding paths - that is, on the “nodal” CC. Switching can be carried out only in the state of UK “openly”. In the same state should be all further CCs on the segment of the path to the current user. This sequence of actions over a relatively short period of time compared with a pause during packets (for example, no more than 1-2 ms for a standard video frame) fell by the ACS. In a particular case, in some network nodes other devices are located - the so-called routers, which have the property of only a traffic light key, and not a criminal code.
  • LLTs can also be used as channels for switching with the digital effect of not only two signals “previous - next” scheme, and an increased number of next signals aggregated according to the “several pictures in a picture” scheme.
  • Routing to users of selected switched relative to previous signals is carried out thanks to one LLT signal. And the direct delivery of any signal to any user via any FC is carried out after registering the sources and their location topology due to the distribution of LLTs, automated multiplexing and state management of semaphore keys on each LLT.
  • the ACS processes the redefinition of this distribution in real time. Or he informs the user that in the current implementation the possibilities of adding new users are exhausted: without physical expansion of the path, as well as expansion of the reserves of semaphore keys on new LLTs and on each UK, it will be impossible to serve new users.
  • ACS also determines and displays the need for the establishment of additional network links if local path congestion occurs.
  • the location of the management company can be used in accordance with the hierarchical topology, when several sources are connected to each management company and the user's workplace is placed on it. Nevertheless, this CC has such a clone of the ACS that controls only signals from those sources that are directly connected to it: its user has no need to select other signals. Users of the CMS, which is attached to the beginning of the hierarchy of the source system, have the opportunity to select a signal from any source. This supports multicast routing and switching.
  • a separate task of the proposed method is the visualization of the selected signals.
  • the user is not satisfied that the event that is being observed on the monitor took place some time earlier than the moment of observation, and therefore the selection of the signal at the moment of observation does not lead to the appearance of switching from signal to signal in the program at the same moment of the event, real-time mode for making decisions regarding source selection is critical. Therefore, to make a real-time decision regarding the choice of a signal from a significant number of signals, combined paths and combined LLT were used - for real-time routing to the user's workplace of the signals selected for the resulting program, full-stream signal formats (3G, 4G, 5G, etc. .d.). And for the simultaneous visualization of a significant number of signals, compression, an analog transportation format, or other multiplexing methods were used.
  • the principle of signal grouping with a small number of signals in a group is used, which can naturally be placed on monitors (four or nine each) and routed to the user to visualize only a few groups.
  • a memory buffer is installed on each CC for the permanent recording of a certain finite time interval of the signal according to the principle “first entered - first exited” - “FIFO” (for buffering a 1, 3, 10 minute interval or more), constant removing this segment if it remains unclaimed and replacing it with a new one.
  • the corresponding time markers of the selected signal packet are used in the control signal.
  • the property of the control signal is applied to the switching point in real time. Therefore, switching to the selected and recorded in the buffer signal is carried out from the selected packet. And further playback of the selected signal from the memory buffer occurs without the process of removing it, until the moment of switching to another signal, which is reproduced from another buffer.
  • the formation of the final program in this case is carried out according to the principle of deferred time. Moreover, it becomes possible to accumulate requests from a significant number of remote users, for example, from the Internet in a separate server installed on each CC. This creates an advanced multi-user mode with a delayed time for the formation of programs.
  • each CC can perform the following additional operations: converting the analog signal to digital, real-time compression and deep compression of the digital signal, filtering the high-sweat signal and thereby converting it to low-stream without compression, multiplexing a group of signals with the addition of a new signal to it and further relaying the updated group, emulating external synchronization using buffering for those sources that do not have an external synchronization interface, the correction of the clock pulse to use the synchronization of all sources by the method of forced general synchronization in case of attenuation due to the remote location of the sources.
  • FIG. 1 is a diagram illustrating signal routing with a network topology and advanced multi-user mode of operation.
  • FIG. 2 is a diagram illustrating signal routing with the hierarchy topology and group multi-user mode of operation.
  • the number 1 denotes - K of the resulting program signals, 2 - the CMS and CC, which are shown as the same type, 3 - sources, 4 - user keyboards, the number of which is K, 5 - paths.
  • - memory buffer - a kind of digital random access memory, the volume of which is a multiple of one signal packet, for example, one frame for a television signal; the total volume of one or another buffer can range from one packet to an arbitrary set of packets, depending on the purpose of its use.
  • SAUK Automated Switching Control System
  • the program code can be developed by an external group of specialists or by the user himself, but is maintained and developed during operation, as a rule, at the initiative of the user; this program code in automatic or semi-automatic (i.e., with the participation of the user) mode performs control functions - sends a set of control signals to certain processes and devices involved in the method, and also analyzes the set of response signals, and then generates a new one set of control signals; - signal (incoming signal) - a serial digital stream that the source synthesizes, for example, a professional television camera, for example, SDI (Serial Digital Interface), HD-SDI, 3G-SDI, etc .; since the technology is constantly changing terminology and synthesis technology, this term is used here.
  • SDI Serial Digital Interface
  • a sync pulse is a minimally sufficient signal that artificially synchronizes the progress of signal packets from each source; the difference in the traditional use of the clock pulse is that it is synthesized by some central device, to which sources are connected according to the “star” scheme.
  • the ACS is constantly expected from the source selection device, which leads to the appearance of the control signal and the execution of certain processes in real time.
  • CC switching device
  • keyboard - in the general sense, the set of panels for pressing (in the traditional sense - keys), each of which gives the user the opportunity to order not the signal number (which is not convenient for the enlarged source system), but also to choose according to the visualized content displayed on the panel (pictures ) signal (video frame, “frame in frame”, “freeze frame”, etc.); the diagrams are shown at 4;
  • path - a generalized channel for the movement of signals from sources to one or another output, the diagram shows lines from inputs to outputs - position 5;
  • FC physical channel
  • W optical fiber or other space
  • LLT for example, frequency carriers, etc.
  • LLT logical path line
  • the stated switching concept allows to significantly reduce the cost of servicing the system as a whole and each channel.

Abstract

В формуле заявлен способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов в связи с их коммутацией, причем структура сигнала - пакетная, то есть периодически-дискретная. Способ обеспечивает выборочную маршрутизацию для последующей транспортировки и после выборочного синхронизированного переключения цифровых сигналов от значительного числа источников. Рассматривается ситуация, когда возможность предварительной синхронизации источников отсутствует. Это обусловлено потребностью использования увеличенного числа сигналов, а потому потребностью использования разных источников с произвольными параметрами структуры сигналов (частоты хода пакетов, длительности пакетов, постоянства периода хода пакетов и т.п.) и от разных производителей. Обеспечивается также и многопользовательский режим маршрутизации. Способ позволяет оптимизировать затраты на разворот и постоянный редизайн системы в случае, когда расположение источников на значительной территории может ситуативно и на протяжении короткого отрезка времени изменяться. Таким образом, не смотря на длительную эксплуатацию системы, такие изменения в расположении могут происходить много раз, а число источников сигналов ничем не ограничено.

Description

СПОСОБ АВТОМАТИЗИРОВАННОЙ МНОГОПРОГРАММНОЙ
ВЫБОРОЧНОЙ МАРШРУТИЗАЦИИ ЦИФРОВЫХ СИГНАЛОВ
Изобретение относится к области телекоммуникационной техники и может быть использовано при разработке устройств синхронизированной в реальном времени маршрутизации с последующей коммутацией (переключением) аналоговых или цифровых входящих сигналов (в дальнейшем - просто сигналов) с пакетной, т.е. периодически-дискретной структурой. Такой тип сигналов используется в области связи, в телевизионных и видео сетях, системах наблюдения и компьютерных сетях реального времени и т.д.
Все термины и специализированы названия, которые не являются общеизвестными, сведены в отдельный словарь и приведены в завершающей части описания.
Рассматривается коммутация и дальнейшая маршрутизация сигналов с пакетной, т.е. периодически-дискретной структурой, а именно сигналов с кадровой структурой, в каждом из которых моменты начала движения пакетов происходили по случайному принципу. Т.е., начало существования этих сигналов не синхронизировано - не синхронизированы все фазы движения пакетов. При этом структура каждого сигнала, а также параметры движения пакетов в каждом из сигналов (длительности пакетов, частота хода пакетов, постоянство периода хода пакетов и т.п.) могут иметь как произвольные, так и строго заданные и постоянные значения.
Такая ситуация может происходить тогда, когда, например, используется значительное число заранее несинхронизированных источников сигналов, включаемых в разные моменты времени. Это обусловлено потребностью использования разных типов источников, в том числе и от разных производителей.
В изобретении рассматривается ситуация, когда во время переключения с сигнала на сигнал критической является целостность пакетов сигнала. Каждый раз при несинхронизированном переключении разрушаются первые пакеты включенного сигнала. Типичными примерами является исходный сигнал из телевизионной камеры, VGA-сигнал компьютера или сигнал телевизионной вещательной системы, в которых пакетом является видеокадр. Разрушение видеокадров во время переключения таких сигналов является недопустимой ситуацией.
Существует несколько известных способов синхронизации, которые заключаются в том, что благодаря принудительной синхронизации всех источников синхроимпульсами, или благодаря одновременной цифровой буферизации пакетов всех сигналов, или благодаря автоматизированной выборочной буферизации лишь выбранного сигнала относительно предыдущего синхронизируются моменты начала хода пакета аналоговых или цифровых сигналов. А после этого процесса, за время паузы, т.е. за время перехода на следующий пакет, обеспечивается синхронизированное переключение. На упомянутых принципах построены известные устройства для коммутации видеосигналов - коммутирующие пульты от компаний "Сони" (как например, модель DFS-700), "Панасоник" (модель МХ-70), "Teleview" (модель DSC 655) или пульты от фирмы "Датавидео".
Тем не менее все способы имеют один существенный недостаток - ограниченное число сигналов, которые подлежат маршрутизации с последующей коммутацией. Во многих из перечисленных способов существует линейная связь между числом сигналов и себестоимостью синхронизации. И потому принципы коммутации, положенные в основу указанных устройства, не дают возможности независимого масштабирования числа источников, сигналы от которых поддерживают эти устройства.
Прототипом заявляемого способа является принцип коммутации, предложенный в патенте Украины N° UA 2010/103313 от 10.10.13. В этом решении рассмотрена техническая проблема, которая обладает всеми указанными выше признаками. Здесь также получен новый технический результат, который заключается в синхронизированной коммутации неограниченного числа предварительно несинхронизированных источников. Но в этом способе не показано, каким образом осуществляется маршрутизация значительного числа сигналов к устройству коммутации. Без решения этого вопроса промышленная эксплуатация способа- прототипа осложнена.
Задачей изобретения является разработка альтернативного способа автоматизированной выборочной маршрутизации значительного числа цифровых сигналов, который одновременно обеспечивает новые технические возможности: автоматизированную маршрутизацию к точке коммутации сигнала, выбранного из произвольного числа сигналов, синхронизированное переключение цифровых сигналов от произвольного числа заранее несинхронизированных источников, многопользовательский режим работы, неограниченное масштабирование системы источников (увеличение или уменьшение их числа) во время эксплуатации, а также произвольную топологию расположения источников. Рассмотрена ситуация, когда расположение источников на значительной территории может ситуативно и на протяжении непродолжительного времени изменяться - т.е., не смотря на продолжительную эксплуатацию системы, такие замены схемы расположения источников могут происходить часто. Это важно при обслуживании таких масштабных событий, как современные выставки, многовидовые спортивные соревнования, реконструкции исторических баталий, праздники городов и т.д.
В основу способа положена идея выборочной маршрутизации сигнала сначала к локации коммутации, а после переключения - к локации пользователя. Все известные устройства коммутации, например, коммутаторы телевизионных сигналов, рассчитаны на незначительное число источников - дорогостоящих профессиональных телевизионных камер. И потому процесс визуализации и выбора сигналы локализованы в одном месте - на пульте коммутации. Эта концепция является неприемлемой, когда число сигналов превышает 100, а тем более - 1000 источников.
Некоторые упомянутые методы синхронизации сигналов дают возможность отделить в пространстве расположения источников процесс выбора сигнала от процесса коммутации. Однако одновременное осмысление пользователем даже 50 сигналов в реальном времени является практически невозможным. Поэтому зачастую решения принимается пользователем с учетом естественного упорядочения групп источников в соответствии с территорией события, которое обслуживается. Практика обслуживания числа источников, превышающих 50, доказывает, что их обзор и осмысление осуществляется только по группам. Такие группы пользователь создает в соответствии с признаком их естественного расположения на мониторе - по 4 или по 9 источников на каждом. Каждая такая группа обрабатывается или последовательно на протяжении определенных отрезков времени продолжительности события, или параллельно несколькими пользователями.
Таким образом, для решения поставленной технической задачи в способе рассматриваются лишь два подхода к синхронизации сигналов - либо постоянная искусственная синхронизация всей системы источников благодаря синхроимпульсам из системы коммутации, либо автоматизированная выборочная синхронизация выбираемого сигнала относительно предыдущего благодаря автоматизированной буферизации только этих двух сигналов. Причем, только эти методы дают возможность построить еще и многопользовательскую концепцию работы упомянутой системы. Однако, первая методика не может быть использована в ситуации, когда необходимо объединять в одной системе источники, имеющие интерфейс внешней синхронизации, а также источники, которые такого интерфейса не имеют. Такая задача часто возникает при потребности объединения совокупности видеокамер внешнего наблюдения со сниженными характеристиками сигнала и профессиональных телевизионных камер. Для синхронизации таких систем источников безальтернативным является способ выборочной автоматизированной буферизации.
Способ, который заявляется, отличается от известных тем, что благодаря системе автоматизированного управления коммутацией (САУК), которая установлена на системе устройств коммутации (УК) или в частном случае иерархической топологии системы на центральном устройстве коммутации (ЦУК), процессы коммутации и маршрутизации в пространстве расположения источников разделяются. К пользователю транспортируется лишь выбранный им сигнал, который только что заменил предыдущий сигнал. Причем, такая транспортировка осуществляется лишь благодаря одной логической линии тракта (логического проводника сигнала, в дальнейшем ЛЛТ).
Такой подход позволяет существенно минимизировать загрузку тракта и использовать топологию соединения всех источников сигналов и УК (рабочего места пользователя) лишь в соответствии с двумя известными принципами: сетью или ее частным случаем - иерархией (в виде дерева). Если в виде дерева, то начало ориентировано на ЦУК, а ветвями и листвой - на источники. А если сетью - то без определения ЦУК.
УК - это отделенные коммутаторы, минимально достаточные для выполнения запросов пользователей. В соответствии с этими запросами, а также управляющими сигналами от САУК (иной тип вспомогательного сигнала, отличного от входящего сигнала) УК осуществляет следующие процессы: включение-отключение любой ЛЛТ, которые соединены с УК (состояние ключа-семафора), автоматизированную буферизацию и синхронизацию выбранного сигнала относительно предыдущего сигнала (в случае, когда невозможно использовать общую искусственную синхронизацию всех источников), коммутацию выбранного сигнала относительно предыдущего и размножение сигнала источника. Таким образом, многопользовательский режим работы системы поддерживается размножением сигналов в соответствии с запросами пользователей, а также их транзитом сквозь УК (если это необходимо) в зависимости от управляющего сигнала. Это происходит благодаря множеству ЛЛТ, объединенных в один физический канал (ФК) тракта, который присоединен к УК по схеме «вход-выход».
УК непосредственно (или относительно близко) присоединяется к одному или к нескольким источникам сигналов (по схеме «звезда»), или к свободным узлам пересечения ветвей в иерархической схеме расположения источников или звеньев в сети (если в этих узлах из тех или иных соображений не размещены источники). После поступления от пользователя к САУК соответствующего запроса на сигнал, определяется локация коммутации и маршрут выбранного сигнала к локации коммутации. Коммутация (или сначала автоматизированная буферизация и синхронизация относительно предыдущего сигнала) может осуществляться или на УК, который непосредственно соединен с предыдущим источником, или на УК, который непосредственно соединен с выбранным источником (в зависимости от того, который из этих источников находится ниже по каскаду, если они расположены на одной линии), или на линии пересечения соответствующих путей - т.е., на «узловом» УК. Коммутация может осуществиться лишь в состоянии УК «открыто». В этом же состоянии должны находиться и все дальнейшие УК на отрезке пути к текущему пользователю. Эту последовательность действий на протяжении относительно малого промежутка времени по сравнению с паузой в ходе пакетов (например, не более 1-2 мс для видеокадра стандарта «пал») отслеживает САУК. В частном случае в некоторых узлах сети размещаются иные устройства - так называемые маршрутизаторы, которые обладают свойством только ключа-светофора, а не УК.
Развитием заявляемого способа является расширенная конфигурация УК. На таком УК может быть установлен клон САУК. И потому на любом из таких УК в произвольный момент времени работы системы может быть создано рабочее место нового пользователя. Поскольку теоретически число пользователей ничем не ограничено, решающим фактором является разрешающая способность реализации способа. К произвольному пользователю, который расположен в произвольной локации пространства системы, по его произвольному запросу на протяжении всего времени работы доставляется лишь запрошенный сигнал. Эта концепция предоставляет возможность коммутации любого зарегистрированного в системе сигнала на любой иной. Таким образом осуществляется расширенный многопользовательский режим работы системы. Поэтому при расширенном режиме ЦУК и УК имеют лишь условное (логическое) различие.
На каждом УК удаленно включаются и выключаются дополнительные опции клона САУК, которые предоставляют возможность пользователю осуществлять во время коммутации не только замену одних отрезков сигналов на другие («жесткую склейку»), а й в соответствии с управляющим сигналом загружать определенные выполняемые программные коды переходов от предыдущего сигнала на текущий с определенным цифровым эффектом. А также дистанционно управлять параметрами такого перехода - продолжительностью выполнения и т.п. Причем, в зависимости от ресурсов УК, благодаря которым обслуживаются запросы множества пользователей (число ЛЛТ, которые входят в УК и выходят из него, число буферов памяти для синхронизации и т.д.), ЛЛТ могут использоваться и как каналы для коммутации с цифровым эффектом не только двух сигналов по схеме «предыдущий - следующий», а увеличенного числа следующих сигналов, агрегированных по схеме «несколько картинок в картинке».
Маршрутизация к пользователям выбранных коммутируемых относительно предыдущих сигналов осуществляется благодаря одной ЛЛТ сигнала. А непосредственную доставку любого сигнала к любому пользователю по любому ФК осуществляется после регистрации источников и их топологии расположения благодаря распределению ЛЛТ, автоматизированному мультиплексированию и управлению состоянием ключей-семафоров на каждом из ЛЛТ. Когда возникает потребность изменения конфигурации носителей ЛЛТ (частот генераторов или лазеров и т.д.), САУК отрабатывает переопределение этого распределения в режиме реального времени. Или сообщает пользователю, что в текущей реализации возможностей добавления новых пользователей исчерпана: без физического расширения тракта, а также расширения резервов ключей-семафоров на новых ЛЛТ и на каждом УК будет невозможно обслужить новых пользователей. САУК также определяет и отображает потребность в установлении дополнительных звеньев сети, если возникает локальная перегрузка тракта.
В частном случае может быть использовано расположения УК в соответствии с иерархической топологией, когда к каждому УК присоединено несколько источников и на нем размещено рабочее место пользователя. Тем не менее это УК имеет такой клон САУК, который управляет только сигналами от тех источников, которые непосредственно присоединены к нему: его пользователь не имеет потребности выбирать иные сигналы. Пользователи же ЦУК, которое присоединено к началу иерархии системы источников, имеют возможность избирать сигнал от любого источника. Этим поддерживается режим групповой многопрограммной маршрутизации и коммутации.
В другом частном случае в качестве топологии соединения УК и источников используют несколько деревьев, объединенных между собой благодаря соединению нескольких ветвей. Пользователи УК не имеют возможности выбирать сигналы от источников, присоединенных к другим УК, а пользователи ЦУК, которые присоединены к началам каждой иерархии системы источников, имеют возможность выбирать сигнал от любого источника. Очевидно также, что непосредственно с любым УК несколько источников могут соединяться в соответствии с топологией «звезда».
Отдельная задача заявляемого способа - визуализация выбираемых сигналов. Когда пользователя на устраивает, что событие, которое наблюдается на мониторе, состоялась некоторое время ранее момента наблюдения, и потому выбор сигнала в момент наблюдения не приводит к появлению переключения от сигнала на сигнал в программе в этот же момент события, режим реального времени для принятии решения относительно выбора источника является критичным. Поэтому для принятия в реальном времени решения относительно выбора сигнала от значительного числа сигналов, использованы комбинированные тракты и комбинированные ЛЛТ - для маршрутизации в реальном времени к рабочему месту пользователя выбранных для результирующей программы сигналов использованы полно-потоковые форматы сигнала (3G, 4G, 5G и т.д.). А для одновременной визуализации значительного числа сигналов использована компрессия, аналоговый формат транспортировки или иные способы мультиплексирования.
Для одновременного осмысления пользователем содержания события использован принцип группировки сигналов с незначительным числом сигналов в группе, которое естественном образом можно расположить на мониторах (по четыре или по девять) и осуществить маршрутизацию к пользователю для визуализации лишь нескольких групп.
Для систем со средним числом источников, которое можно обслужить, например, благодаря 3-5 оптоволоконным трактам (как правило это 50 - 100 сигналов на каждом ФК) для их одновременной визуализации целесообразно использование таких алгоритмов компрессии, которые работают лишь с реальным временем на сжатие и восстановление сигнала.
Для одновременной же маршрутизации до рабочего места пользователя значительного числа сигналов с целью их одновременной коллективной визуализации (от 1000 и выше) целесообразно использовать алгоритмы глубокой компрессии, которые предоставляют возможность значительно уплотнить тракт и одновременно транспортировать увеличенное число сигналов, но со значительным превышением реального времени на процесс сжатия и восстановление сигнала. Для решения вопроса компенсации утраченного реального времени используются буферы памяти.
На каждом УК установлен буфер памяти для постоянной записи некоторого конечного отрезка времени сигнала по принципу «первый вошел - первый вышел» - «FIFO» (для буферизации 1-но, 3-х, 10-ти минутного отрезка или более), постоянного удаления этого отрезка, если он остался не востребованным и замены его новым. Во время выбора события, которое состоялось некоторое время до момента его визуализации (тем не менее, оно доступно в буфере), в управляющем сигнале используются соответствующие временные маркеры выбранного пакета сигнала. А также используется свойство управляющего сигнала подаваться к месту коммутации в реальном времени. Поэтому коммутация на выбранный и записанный в буфере сигнал осуществляется от выбранного пакета. А дальнейшее воспроизведение выбранного сигнала из буфера памяти происходит уже без процесса изъятия его, вплоть до момента переключения на другой сигнал, который воспроизводится из другого буфера.
Поэтому формирование итоговой программы при этом осуществляется по принципу отложенного времени. Причем возникает возможность накопления запросов от значительного числа удаленных пользователей, например, из сети Интернет в отдельном сервере, установленном на каждом УК. Этим создается расширенный многопользовательский режим с отложенным временем формирования программ.
В системе одновременной визуализации сигналов от значительного числа источников для осуществления выбора нет возможности вводить на клавиатуре соответствующий номер сигнала со значительным числом цифр, которым оперирует САУК. А также нет возможности использовать клавиатуру с увеличенным числом клавиш. Достаточно визуально выбрать клавишу благодаря вмонтированному в нее устройству визуализации (мини-экране) и активизировать ее нажатием. Причем, для исключения ошибки клавиша выполнена не в стиле «легкое прикосновение», а в стиле «пиано» - нажатие на клавишу выполнено с определенным усилием. Также предусмотрена загрузка в клавишный мини-экран текущей группы сигналов для мониторинга, а в дальнейшем - удаление этой группы и загрузка иной.
Важным свойством заявляемого способа является то, что каждый УК согласно ситуативной потребности может выполнять следующие дополнительные операции: преобразование аналогового сигнала в цифровой, компрессию с учетом реального времени и глубинную компрессию цифрового сигнала, фильтрацию высоко-потового сигнала и тем самым преобразование его в низко-потоковый без компрессии, мультиплексирование группы сигналов с добавлением нового сигнала к ней и дальнейшую ретрансляцию обновленной группы, эмуляцию внешней синхронизации с использованием буферизации для тех источников, которые не имеют интерфейса внешней синхронизации, коррекцию синхроимпульса для использования синхронизации всех источников методом принудительной общей синхронизации в случае его затухания по причине отдаленного расположения источников. На фиг. 1 приведена схема, иллюстрирующая маршрутизацию сигнала с топологией «сеть» и расширенный многопользовательский режим работы. На фиг. 2 приведена схема, иллюстрирующая маршрутизацию сигнала с топологией «иерархия» и групповой многопользовательский режим работы.
На схемах цифрой 1 обозначено - К результирующих программных сигналов, 2 - ЦУК и УК, которые показаны как однотипные, 3 - источники, 4 - клавиатуры пользователей, число которых равняется К, 5 - тракты.
Для снижения загруженности чертежа условно показанные лишь несколько трактов, где имеются ввиду все возможные комбинации. Тут также не показаны направления прохождения сигналов, управляющих сигналов и запросов пользователей как очевидные.
В материалах заявки используются следующие термины и категории:
- буфер памяти - разновидность цифровой оперативной памяти, объем которой кратный одному пакету сигнала, например, одному кадру для телевизионного сигнала; общий объем того или другого буфера может составлять от одного пакета до произвольного множества пакетов, в зависимости от цели его использования.
буферизация входящего сигнала (в цифровом формате) - классический процесс побайтной записи пакетов в буфер памяти и побайтного же его считывания; процесс считывания не зависит от процесса записи, потому начинать считывание можно как сразу же с началом процесса записи, так и после того, как записан, например, предпоследний байт,
система автоматизированного управления коммутацией (САУК) классическая совокупность логических операций, построенных в виде программного кода того или иного формата и размещенных в цифровом хранилище; программный код может разрабатывается сторонней группой специалистов или самим пользователем, но поддерживается и развивается в процессе эксплуатации, как правило, по инициативе пользователя; этот программный код в автоматическом или полуавтоматическом (т.е., при участии пользователя) режиме выполняет управляющие функции - посылает совокупность управляющих сигналов к тем или иным процессам и устройствам, задействованным в способе, а также анализирует совокупность сигналов-откликов, после чего генерирует новую совокупность управляющих сигналов; - сигнал (входящий сигнал) - последовательный цифровой поток, который синтезирует источник, например профессиональная телевизионная камера, например, SDI (Serial Digital Interface), HD-SDI, 3G-SDI и т.д.; поскольку в технике идет постоянная смена терминологий и технологий синтеза, здесь использован этот термин.
- управляющий сигнал - вспомогательной внутренний сигнал в системе от
САУК, минимально достаточный относительно объема информации, которая пересылается им для управления процессами в режиме реального времени.
синхроимпульс - минимально достаточный сигнал, который искусственно синхронизирует ход пакетов сигналов из каждого источника; отличие в традиционном использовании синхроимпульса заключается в том, что его синтезирует некоторое центральное устройство, к которому по схеме «звезда» присоединен источники.
запрос от пользователя - минимально достаточный сигнал, постоянно ожидаемы САУК от устройства выбора источника, который приводит к появлению управляющего сигнала и выполнения тех или иных процессов в режиме реального времени.
- устройство коммутации (УК) - обособленный коммутатор, минимально достаточный для выполнения в соответствии с управляющим сигналом от САУК всех процессов в системе источников; может развиваться и наращивается пользователем самостоятельно.
клавиатура - в общем понимании совокупность панелей для нажатия (в традиционном понимании - клавиши), каждая из которых дает пользователю возможность заказывать не номер сигнала (что не удобно для увеличенной системы источников), а и выбирать в соответствии с воспроизводимой на панели визуализируемого содержания (картинки) сигнала (видеокадр, «кадр в кадре», «стоп-кадр» и т.д.); на схемах показано позицией 4;
тракт - обобщенный канал движения сигналов от источников до того или другого выхода, на схеме показано линиями от входов до выходов - позиция 5;
- физический канал (ФК) - электронное, оптоволоконное или иное пространство (волновод), которое: вмещает в себе множество (100 и выше) ЛЛТ (например, частотных носителей и т.д.), занимает незначительный объем пространства (от несколько десятых миллиметра до 1 см в поперечном сечении) и позволяет транспортировку всех сигналов системы.
- логическая линия тракта (ЛЛТ) - логически выделенная часть ФК для транспортировки одного сигнала.
- ключ-семафор - устройство, которое в электронном, оптоволоконном или ином ФК в зависимости от управляющего сигнала открывает или запирает любую ЛЛТ.
пользователь (режиссер в случае телевизионной коммутации) - специалист, который осуществляет монтаж в реальном времени программы, избирая те или другие сигналы (видеосигналы от телекамер в случае телевизионной коммутации), на схеме не показано.
Изложенная концепция коммутации позволяет существенно снизить себестоимость обслуживания системы в целом и каждого канала.

Claims

ФОРМУЛА ИЗОБРЕТЕНИЯ
1. Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов в связи с их коммутацией, причем сигналов с пакетной, то есть периодически-дискретной структурой, в которых моменты начала движения пакетов от всех источников сигналов искусственно синхронизируются одновременно во всех источниках или синхронизируется коммутация предварительно несинхронизированных сигналов путем автоматизированной буферизации выбранных сигналов, тем самым обеспечивается синхронизированное переключение с одного сигнала на другой, а расположение этих источников может ситуативно и в течение непродолжительного периода времени меняться, причем в течение значительного периода времени такие перемены расположения могут происходить много раз, а число источников сигналов ничем не ограничено, отличающийся тем, что благодаря системе автоматизированного управления коммутацией осуществляется маршрутизация и доставка к каждому пользователю, которых произвольное число, только выбранного сигнала и потому уже удаленно коммутированного относительно предыдущего сигнала, причем только благодаря одной логической линии тракта, в котором источники сигналов, устройства коммутации и рабочие места пользователей соединены между собой на произвольных территориях, а соединение всех источников сигналов, всех устройств коммутации и всех рабочих мест пользователей осуществляется в соответствии с топологией «сеть»;
2. Способ в соответствии с пунктом 1 , отличающийся тем, что процесс коммутации, а также дальнейшей маршрутизации и доставки выбранного сигнала происходит по запросу пользователей в зависимости от определенного системой автоматизированного управления коммутацией пути следования выбранного сигнала относительно предыдущего, причем с каждым источником и с каждым узлом сети непосредственно, то есть в относительной близости, соединены устройства коммутации, на каждом из которых может быть установлен клон системы автоматизированного управления коммутацией, причем в соответствии с запросами пользователей любой клон системы автоматизированного управления коммутацией с помощью управляющего сигнала на любом устройстве коммутации удаленно осуществляет - включения-отключения текущей логической линии тракта, т.е. состояние ключа-семафора, автоматизированную буферизацию и синхронизацию выбранного сигнала относительно предыдущего сигнала и последующую их коммутацию, причем коммутация осуществляется на уровне источника предыдущего сигнала, источника выбранного сигнала или на уровне узла звена сети, если источник не находится в узле звена сети, а также размножение сигналов, если устройство коммутации непосредственно соединено с одним или несколькими источниками; в результате замена выбранного каждым пользователем сигнала происходит на уровне удаленных устройств коммутации, к каждому пользователю в течение всего времени работы системы попадает только вновь выбранный сигнал, для любого пользователя поддерживается возможность переключения с любого зарегистрированного в системе сигнала на любой, в том числе и на сигнал от источника, не имеющего интерфейса для принудительной предварительной синхронизации, а рабочее место пользователя может быть расположено на любом устройстве коммутации, причем общее число рабочих мест пользователей не зависит от числа устройств коммутации, а ограничено только разрешающей способностью реализации способа.
3. Способ в соответствии с пунктом 2, отличающийся тем, что в некоторых узлах сети располагаются устройства, обладающие только свойством ключа-семафора - включения-отключения текущей логической линии тракта;
4. Способ в соответствии с пунктом 2, отличающийся тем, что непосредственную доставку любого сигнала к пользователю система осуществляет только после регистрации источников и только по какой-либо одной логической линии физического канала тракта, причем распределение логических линий, их мультиплексирование и управление состоянием ключей-семафоров на каждой из логических линий тракта осуществляется автоматически; а когда вникает потребность изменения конфигурации носителей логических линий - частот генераторов или лазеров и т.д., система автоматизированного управления отрабатывает переопределение распределения в режиме реального времени или сообщает пользователю, что в конкретной реализации без расширения физических каналов тракта, дополнительных звеньев сети и резервов семафоров на новых логических линиях тракта возможность добавления новых пользователей исчерпана.
5. Способ в соответствии с пунктом 2, отличающийся тем, что на каждом устройстве коммутации удаленно включаются и выключаются дополнительные опции клона системы автоматизированного управления коммутацией, предоставляющие возможность пользователю осуществлять при коммутации не только замену одних отрезков сигналов на другие, но и в соответствии с управляющим сигналом загружать выполняемые программные коды перехода с предыдущего сигнала на выбранный с определенным цифровым эффектом, а также дистанционно управлять параметрами такого перехода - продолжительностью выполнения и т.п.; причем, в зависимости от вычислительных ресурсов устройства коммутации относительно числа пользователей, каналы для пользователей могут временно использоваться и как каналы для коммутации с цифровым эффект не только двух сигналов по принципу «предыдущий - следующий», а увеличенного числа выбранных сигналов, объединенных в интегрированный;
6. Способ в соответствии с пунктом 1, отличающийся тем, что в частном случае расположение устройств коммутации и источников осуществляется по топологии «иерархия», то есть в виде дерева, ориентированного ветвями и листьями к источникам и устройствам коммутации, а в корне установлено центральное устройство коммутации, когда к каждому устройству коммутации присоединены несколько источников и на нем также размещено рабочее место пользователя, однако устройства коммутации имеют такие клоны системы автоматизированного управления коммутацией, что его пользователи управляют только источниками, непосредственно связанными с ними и не имеют возможности выбирать другие сигналы, и лишь пользователи центрального устройства коммутации имеют возможность выбирать сигнал от любого источника;
7. Способ в соответствии с пунктом 6, отличающийся тем, что непосредственно с каждым устройством коммутации соединяться несколько источников сигналов в соответствии с топологией «звезда»;
8. Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов в связи с их коммутацией, причем сигналов с пакетной, то есть периодически-дискретной структурой, в которых моменты начала движения пакетов от всех источников сигналов искусственно синхронизируются одновременно во всех источниках или синхронизируется коммутация предварительно несинхронизированных сигналов путем автоматизированной буферизации выбранных сигналов, тем самым обеспечивается синхронизированное переключение с одного сигнала на другой, а расположение этих источников может ситуативно и в течение непродолжительного периода времени меняться, причем в течение значительного периода времени такие перемены расположения могут происходить много раз, число источников сигналов ничем не ограничено и режим реального времени для принятия решения по выбору источника является критическим, отличающийся тем, что для принятия в реальном времени решения о выборе сигнала из произвольного числа сигналов использованы комбинированные физические каналы и комбинированные логические линии тракта - для транспортировки в реальном времени к рабочему месту пользователя выбранного сигнала использован полно-потоковый формат сигнала, а для одновременной визуализации произвольного числа сигналов использована компрессия, аналоговый формат транспортировки или иные методы мультиплексирования;
9. Способ в соответствии с пунктом 8, отличающийся тем, что для одновременной визуализации сигналов от значительного числа источников использованы алгоритмы компрессии, работающие только с реальным временем на сжатие и восстановления сигнала.
10. Способ в соответствии с пунктом 8, отличающийся тем, что для одновременного осмысления пользователем содержания многих одновременных событий использован принцип группировки сигналов с незначительным числом сигналов в группе, которое естественным образом можно расположить на мониторах - по четыре или по девять, а потому использован принцип маршрутизации и дальнейшей доставки к пользователю для визуализации только нескольких групп сигналов.
11. Способ в соответствии с пунктом 8, отличающийся тем, что в системе одновременной визуализации сигналов от значительного числа источников для осуществления выбора пользователю достаточно визуально выбрать клавишу благодаря встроенному в ней устройству визуализации - мини-экрану - и активизировать эту клавишу, причем, для исключения ошибки активация выполняется не принципом касания, а с определенным усилием; причем в клавиатуре предусмотрена возможность загрузки определенной текущей группы сигналов для их мониторинга и выбора, а в дальнейшем - удаление этой группы сигналов и загрузки иной группы.
12. Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов в связи с их коммутацией, причем сигналов с пакетной, то есть периодически-дискретной структурой, а именно сигналов с кадровой структурой, источники которых для дальнейшей корректной коммутации могут быть синхронизированы тем или иным способом, а расположение этих источников может ситуативно и в течение непродолжительного периода времени меняться, а в течение значительного периода времени такие переменах расположения могут происходить много раз, а число источников может быть ничем не ограничено, а режим реального времени для принятии решения по выбору источника является критическим, отличается тем, что на каждом устройстве коммутации установлен буфер памяти для постоянной записи некоторого конечного отрезка времени сигнала, а также постоянного удаления этого отрезка, если он остался невостребованным, и замены его новым; причем при выборе записи события, которое произошло некоторым временем ранее, однако запись которого доступна в буфере памяти, в управляющем сигнале используются соответствующие временные маркеры выбранного пакета-кадра сигнала; при этом осуществляется коммутация выбранного сигнала от маркированного пакета-кадра, а последующее воспроизведение выбранного сигнала из буфера памяти происходит без процесса удаления сигнала из буфера до момента переключения на другой сигнал, который, в свою очередь, восстанавливается из другого буфера памяти.
13. Способ в соответствии с пунктом 12, отличающийся тем, что для одновременной транспортировки на рабочее место пользователя значительного числа сигналов с целью одновременной визуализации использован алгоритм глубокой компрессии, который предоставляет возможность значительно уплотнить тракт и одновременно транспортировать увеличенное число сигналов, но со значительным превышением реального времени на процессы сжатия и восстановления сигнала, а формирование программы осуществляется по принципу выполнения «отложенных заказов», причем накопление запросов от значительного числа удаленных пользователей осуществляется в обособленном при каждом устройстве коммутации сервере;
14. Способ в соответствии с пунктом 12, отличающийся тем, что каждое устройство коммутации в соответствии с ситуативной необходимостью выполняет дополнительные операции: преобразование аналогового сигнала в цифровой, компрессию с учетом реального времени и глубинную компрессию цифрового сигнала, фильтрацию высоко-потового цифрового сигнала без сжатия и тем самым превращение его в низко-потоковый, мультиплексирование группы сигналов с добавлением нового сигнала и последующей ретрансляции обновленной группы, эмуляцию внешней синхронизации для тех источников, которые не имеют интерфейса внешней синхронизации, а также коррекцию синхроимпульса в случае его затухания по причине существенного удаления источников.
PCT/UA2016/000038 2015-03-31 2016-03-31 Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов WO2016159926A1 (ru)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
UA201502982 2015-03-31
UAA201502982 2015-03-31

Publications (1)

Publication Number Publication Date
WO2016159926A1 true WO2016159926A1 (ru) 2016-10-06

Family

ID=57007359

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/UA2016/000038 WO2016159926A1 (ru) 2015-03-31 2016-03-31 Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов

Country Status (1)

Country Link
WO (1) WO2016159926A1 (ru)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020141400A1 (en) * 2001-04-02 2002-10-03 Demartino Kevin A. Wide area multi-service communications network based on dynamic channel switching
US20090109334A1 (en) * 2007-10-29 2009-04-30 Imagenics Co., Ltd. Video switcher and video switching method
US20110317022A1 (en) * 2009-08-17 2011-12-29 Jianhua Cao Method and apparatus for live capture image-live streaming camera
UA103313C2 (ru) * 2010-09-15 2013-10-10 Борис Евгеньевич Панченко Способ автоматизированной цифровой многопрограммной мультисигнальной коммутации

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020141400A1 (en) * 2001-04-02 2002-10-03 Demartino Kevin A. Wide area multi-service communications network based on dynamic channel switching
US20090109334A1 (en) * 2007-10-29 2009-04-30 Imagenics Co., Ltd. Video switcher and video switching method
US20110317022A1 (en) * 2009-08-17 2011-12-29 Jianhua Cao Method and apparatus for live capture image-live streaming camera
UA103313C2 (ru) * 2010-09-15 2013-10-10 Борис Евгеньевич Панченко Способ автоматизированной цифровой многопрограммной мультисигнальной коммутации

Similar Documents

Publication Publication Date Title
JP2018050275A (ja) サーバにおいてマルチビットレートストリーミングメディアをアダプティブに提供するための方法及び装置
CN108924582A (zh) 视频录制方法、计算机可读存储介质及录播系统
US8793728B1 (en) Systems and methods for processing a traffic log having an optional-promotion log entry
JP2007053668A (ja) 動画配信システムおよび動画配信サーバー
US11792449B2 (en) System and method for controlling data stream modifications
JP3828053B2 (ja) 受信されたマルチメディアデータを保存するバッファの容量を可変できるマルチメディアデータ復元装置及び方法
JP2006222942A (ja) 映像合成装置、映像合成方法及び映像合成プログラム
US10897655B2 (en) AV server and AV server system
CN106797342B (zh) 视频网络
US11455228B2 (en) Non-linear management of real time sequential data in cloud instances via time constraints
US5745185A (en) Method of synchronization of a digital video signal and device for application of the method
WO2016159926A1 (ru) Способ автоматизированной многопрограммной выборочной маршрутизации цифровых сигналов
CN116112720A (zh) 一种基于ptp网络同步的超高清音视频同步系统
JP6626696B2 (ja) 受信装置、マニフェスト更新方法、及びプログラム
JP2009165058A (ja) 番組送出システムおよび番組送出方法
US9386330B1 (en) Systems and methods for determining a time period remaining until a live production system changes states
JP4629330B2 (ja) 映像蓄積配信装置および映像配信システム
JP2018029236A (ja) 映像パケット切替装置及び方法
CN106533869A (zh) 数据转发方法及装置、电子设备
JPH08242255A (ja) 等時性保証型連続メディア伝送装置及び等時性保証型連続メディア伝送方法
Hac et al. Buffer control scheme in multimedia synchronization
US10887636B2 (en) AV server system and AV server
Panchenko et al. NEW TOOLS OF CYBERNETICS, INFORMATICS, COMPUTER ENGINEERING, AND SYSTEMS ANALYSIS: ROUTING AND SWITCHING A SIGNIFICANT NUMBER OF TELEVISION SIGNALS COVERING LARGE AREAS.
Panchenko et al. Routing and switching a significant number of television signals covering large areas
WO2022269723A1 (ja) 同期制御を行う通信システム、その同期制御方法、受信サーバ及び同期制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16773591

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16773591

Country of ref document: EP

Kind code of ref document: A1