RU2491759C2 - Multiplexer and multiplexing method - Google Patents

Multiplexer and multiplexing method Download PDF

Info

Publication number
RU2491759C2
RU2491759C2 RU2011142267/08A RU2011142267A RU2491759C2 RU 2491759 C2 RU2491759 C2 RU 2491759C2 RU 2011142267/08 A RU2011142267/08 A RU 2011142267/08A RU 2011142267 A RU2011142267 A RU 2011142267A RU 2491759 C2 RU2491759 C2 RU 2491759C2
Authority
RU
Russia
Prior art keywords
multiplexing
input
information
service
codestream
Prior art date
Application number
RU2011142267/08A
Other languages
Russian (ru)
Inventor
Чжихай СЯ
Бинь ЛИНЬ
Чжибин ЧЭНЬ
Лицян СЕ
Original Assignee
ЗетТиИ Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ЗетТиИ Корпорейшн filed Critical ЗетТиИ Корпорейшн
Application granted granted Critical
Publication of RU2491759C2 publication Critical patent/RU2491759C2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation
    • H04N7/52Systems for transmission of a pulse code modulated video signal with one or more other pulse code modulated signals, e.g. an audio signal or a synchronizing signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Time-Division Multiplex Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

FIELD: information technology.
SUBSTANCE: described is a multiplexer and a multiplexing method, wherein the method includes adaptively identifying and buffering an incoming code stream; according to the type of the incoming code stream, extracting multiplexing sub-frames in the incoming multiplexing frame from the buffered incoming code stream or constructing the multiplexing sub-frames based on incoming audio/video data; according to service management configuration information, performing a service allocation on the multiplexing sub-frames, allocating the multiplexing sub-frames to corresponding multiplexing frames and storing them in a given buffer; and obtaining the multiplexing sub-frames from said given buffer, constructing the multiplexing frame according to multiplexing configuration information and converting the generated multiplexing frame to a multiplexing code stream for outputting.
EFFECT: reduced risk of error code or malfunction due to combined use of a plurality of multiplexers since a one-piece device is used.
10 cl, 10 dwg

Description

Область техникиTechnical field

Настоящее изобретение относится к области мобильного мультимедийного вещания, а именно, к устройству мультиплексирования и способу мультиплексирования.The present invention relates to the field of mobile multimedia broadcasting, namely, to a multiplexing device and a multiplexing method.

Уровень техникиState of the art

В настоящее время во всем мире параллельно существует множество промышленных стандартов мобильного мультимедийного вещания (мобильного телевидения), при этом "китайское мобильное мультимедийное вещание" (China Mobile Multimedia Brodcasting, CMMB) представляет собой промышленный стандарт мобильного телевидения, независимо разработанный в КНР и получивший всеобщее признание. Этот стандарт включает множество частей, среди которых:Currently, around the world, there are many parallel industry standards for mobile multimedia broadcasting (mobile television), while China Mobile Multimedia Broadcasting (CMMB) is an industry standard for mobile television independently developed in China and has been universally recognized. . This standard includes many parts, including:

второй раздел "Мультиплексирование" определяет структуру подкадра мультиплексирования видео/аудиоинформации, данных и информации управления, при этом структура кадра мультиплексирования в системе мобильного мультимедийного вещания образована множеством подкадров мультиплексирования;the second section "Multiplexing" defines the structure of a subframe for multiplexing video / audio information, data and control information, wherein the structure of a multiplexing frame in a mobile multimedia broadcasting system is formed by a plurality of multiplexing subframes;

"Руководство по реализации мультиплексирования" представляет собой руководство по применению, описывающее реализацию мультиплексирования, которое определяет спецификацию устройства мультиплексирования, выводящего пакетный мультиплексированный поток (Packaged Multiplexing Stream, PMS);The “Multiplexing Implementation Guide” is an application manual describing a multiplexing implementation that defines a specification of a multiplexing device outputting a Packaged Multiplexing Stream (PMS);

в разделе 8 "Технические требования к мультиплексору и способы измерений" определены технические требования и способы измерений для разработки, производства, применения, измерений и технического обслуживания мультиплексора мобильного мультимедийного вещания.Section 8, “Technical requirements for the multiplexer and measurement methods,” defines the technical requirements and measurement methods for the development, production, use, measurement, and maintenance of the mobile multimedia broadcast multiplexer.

Однако существующие устройства мультиплексирования имеют недостатки, такие как симплексное функционирование и другие.However, existing multiplexing devices have disadvantages, such as simplex operation and others.

Сущность изобретенияSUMMARY OF THE INVENTION

Техническая задача, для решения которой предназначено настоящее изобретение, - предложить устройство мультиплексирования и способ мультиплексирования, которые решают проблему, заключающуюся в том, что для множества различных типов входных кодовых потоков, с целью осуществления их совместного применения, в существующих стандартах мобильного телевидения необходимо использовать множество мультиплексоров. При этом упомянутые устройство и способ согласно настоящему изобретению реализуют симплексное устройство мультиплексирования, единым образом мультиплексирующее множество различных типов входных кодовых потоков.The technical problem for which the present invention is intended is to propose a multiplexing device and a multiplexing method that solve the problem that for many different types of input code streams, in order to implement their joint application, it is necessary to use many multiplexers. Moreover, the aforementioned device and method according to the present invention implement a simplex multiplexing device that uniquely multiplexes many different types of input code streams.

Для решения описанной выше задачи в настоящем изобретении предложено устройство мультиплексирования, включающее:To solve the above problems, the present invention provides a multiplexing device, including:

модуль адаптивной идентификации входного потока, который конфигурирован для адаптивной идентификации типа входного кодового потока и буферизации входного кодового потока;an adaptive input stream identification module that is configured for adaptively identifying an input code stream type and buffering an input code stream;

модуль формирования служб, который конфигурирован для извлечения подкадров мультиплексирования кадра мультиплексирования из буферизованного входного кодового потока в соответствии с типом входного кодового потока или для формирования подкадров мультиплексирования из входной аудио- и видеоинформации;a service generating module that is configured to extract the multiplexing subframes of the multiplexing frame from the buffered input codestream in accordance with the type of input codestream or to generate the multiplexing subframes from the input audio and video information;

модуль управления службами, который конфигурирован для распределения служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, для назначения подкадров мультиплексирования соответствующим кадрам мультиплексирования и для сохранения упомянутых подкадров мультиплексирования в заданном буфере; иa service control module that is configured to distribute services among the multiplexing subframes in accordance with the service control configuration information, for assigning the multiplexing subframes to the respective multiplexing frames and for storing said multiplexing subframes in a predetermined buffer; and

модуль формирования кадра мультиплексирования, который конфигурирован для получения подкадров мультиплексирования из упомянутого заданного буфера, формирования кадра мультиплексирования в соответствии с конфигурационной информацией мультиплексирования, и для преобразования сформированного кадра мультиплексирования в мультиплексированный кодовый поток для вывода.a multiplexing frame generating module, which is configured to receive multiplexing subframes from said predetermined buffer, generating a multiplexing frame in accordance with the multiplexing configuration information, and for converting the generated multiplexing frame to a multiplexed code stream for output.

Предпочтительно, упомянутое устройство мультиплексирования также включает модуль хранения, который конфигурирован для хранения подкадров мультиплексирования, получаемых модулем формирования служб, в виде локального файла с информацией службы или для хранения локального файла с информацией службы, формируемого пользователем; соответственно, упомянутый модуль управления службами также конфигурирован для извлечения файла с информацией службы, хранимого в модуле хранения, в соответствии с конфигурационной информацией управления службами, а также для указания модулю формирования кадра мультиплексирования формировать кадр мультиплексирования путем мультиплексирования упомянутого файла с информацией службы.Preferably, said multiplexing device also includes a storage module that is configured to store the multiplexing subframes received by the service generating unit as a local file with service information or to store a local file with service information generated by the user; accordingly, said service control module is also configured to retrieve a service information file stored in the storage module in accordance with the service control configuration information, and also to instruct the multiplexing frame forming module to generate a multiplexing frame by multiplexing said file with the service information.

Предпочтительно, упомянутое устройство мультиплексирования также включает:Preferably, said multiplexing device also includes:

модуль синхронизации, который конфигурирован для обеспечения стандартной информации синхронизации для упомянутого модуля формирования служб, модуля управления службами и модуля формирования кадра мультиплексирования; иa synchronization module that is configured to provide standard synchronization information for said service generation unit, a service management unit, and a multiplexing frame generation unit; and

консоль, которая конфигурирована для обеспечения конфигурационной информации, необходимой для мультиплексирования, для конфигурирования информации управления, которую используют при мультиплексировании и/или ремультиплексировании, для конфигурирования параметров работы устройства мультиплексирования и для контроля рабочего состояния устройства мультиплексирования, для упомянутых модуля формирования служб, модуля управления службами и модуля формирования кадра мультиплексирования.a console that is configured to provide the configuration information necessary for multiplexing, to configure the control information used in multiplexing and / or remultiplexing, to configure the operation parameters of the multiplexing device, and to monitor the operating state of the multiplexing device, for the aforementioned services generation module, the services management module and a multiplexing frame forming unit.

Предпочтительно, упомянутый модуль адаптивной идентификации входного потока конфигурирован для извлечения информации о характерных точках из входного кодового потока м сравнения информации о характерных точках с библиотекой характерных точек, хранимой в модуле адаптивной идентификации входного потока, с целью адаптивной идентификации типа входного кодового потока.Preferably, said adaptive input stream identification module is configured to extract feature point information from the input code stream and compare feature point information with a feature point library stored in the adaptive input stream identification module to adaptively identify the type of input code stream.

Упомянутый входной кодовый поток может включать кодовый поток транспортного протокола реального времени (Real-time Transport Protocol, RTP) и/или пакетный мультиплексированный поток (PMS);Said input codestream may include a Real-time Transport Protocol (RTP) codestream and / or a packet multiplexed stream (PMS);

Упомянутый выходной мультиплексированный кодовый поток может представлять собой кодовый поток PMS или кодовый поток протокола Интернета (Internet Protocol, IP).Said output multiplexed code stream may be a PMS code stream or an Internet Protocol (IP) code stream.

В настоящем изобретении предложен также способ мультиплексирования, включающий:The present invention also provides a multiplexing method, including:

адаптивную идентификацию и буферизацию входного кодового потока;adaptive identification and buffering of the input code stream;

извлечение подкадров мультиплексирования входного кадра мультиплексирования из буферизованного входного кодового потока в соответствии с типом входного кодового потока, или формирование подкадров мультиплексирования на основе входной аудио- и видеоинформации;extracting the multiplexing subframes of the input multiplexing frame from the buffered input codestream in accordance with the type of input codestream, or generating multiplexing subframes based on the input audio and video information;

осуществление распределения служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, назначение подкадров мультиплексирования в соответствующий кадр мультиплексирования и сохранение упомянутых подкадров мультиплексирования в заданном буфере; иperforming the distribution of services among the multiplexing subframes in accordance with the service control configuration information, assigning the multiplexing subframes to the corresponding multiplexing frame, and storing said multiplexing subframes in a predetermined buffer; and

получение подкадров мультиплексирования из упомянутого заданного буфера, формирование кадра мультиплексирования в соответствии с конфигурационной информацией мультиплексирования и преобразование сформированного кадра мультиплексирования в мультиплексированный кодовый поток для вывода.obtaining multiplexing subframes from said predetermined buffer, generating a multiplexing frame in accordance with the multiplexing configuration information, and converting the generated multiplexing frame to a multiplexed code stream for output.

Предпочтительно, упомянутый способ также включает:Preferably, said method also includes:

хранение получаемых подкадров мультиплексирования в виде локального файла с информацией службы, или хранение локального файла с информацией службы, формируемого пользователем; назначение хранимого файла с информацией службы в соответствии с конфигурационной информацией управления службами в процессе формирования кадра мультиплексирования, и мультиплексирование файла с информацией службы для формирования кадра мультиплексирования.storing the received multiplexing subframes in the form of a local file with service information, or storing a local file with service information generated by the user; the purpose of the stored file with the service information in accordance with the configuration information of the service control in the process of forming the multiplexing frame, and multiplexing the file with the service information to form the multiplexing frame.

Предпочтительно, упомянутый шаг адаптивной идентификации и буферизации входного кодового потока включает извлечение информации о характерных точках из входного кодового потока и сравнение информации о характерных точках с библиотекой характерных точек, хранимой в модуле адаптивной идентификации входного потока, с целью адаптивной идентификации типа входного кодового потока.Preferably, said step of adaptively identifying and buffering the input code stream includes extracting characteristic point information from the input code stream and comparing the characteristic point information with the characteristic point library stored in the adaptive identification module of the input stream to adaptively identify the type of input code stream.

Упомянутая информация о характерных точках, извлекаемая и получаемая из входного кодового потока, представляет собой информацию заголовков пакетов.The referenced feature point information retrieved and obtained from the input codestream is packet header information.

Упомянутый входной кодовый поток может включать кодовый поток транспортного протокола реального времени (RTP) и/или пакетный мультиплексированный поток (PMS).Said input codestream may include a real-time transport protocol (RTP) codestream and / or a packet multiplexed stream (PMS).

Упомянутый выходной мультиплексированный кодовый поток может представлять собой кодовый поток PMS или кодовый поток протокола Интернета (IP).Said output multiplexed codestream may be a PMS codestream or Internet Protocol (IP) codestream.

Поскольку реализована схема с адаптивным вводом и управлением службами, устройство мультиплексирования и способ мультиплексирования настоящего изобретения реализуют мультиплексирование различных типов входных кодовых потоков с использованием одного устройства, вместо применения двух типов мультиплексоров для реализации соответствующей обработки входных потоков различных служб. С другой стороны, осуществляется экономия на стоимости производства и техническом обслуживании станции, а также упрощается использование интерфейсного устройства; также, поскольку применяется симплексное устройство, снижен риск ошибочного кода или отказов, который присутствует при совместном использовании множества мультиплексоров. Кроме того, в настоящем изобретении предложена также схема хранения служб, удобная для реализации функций пользовательских настроек. Использование адаптивной схемы также позволяет сократить денежные затраты пользователя.Since a circuit with adaptive input and control of services is implemented, the multiplexing device and multiplexing method of the present invention implement multiplexing of various types of input code streams using a single device, instead of using two types of multiplexers to implement appropriate processing of input streams of various services. On the other hand, savings are made on the cost of production and maintenance of the station, and the use of an interface device is also simplified; also, since a simplex device is used, the risk of erroneous code or failures that is present when sharing multiple multiplexers is reduced. In addition, the present invention also provides a service storage scheme convenient for implementing user settings functions. The use of an adaptive scheme also reduces the cost of the user.

Краткое описание чертежейBrief Description of the Drawings

Фиг.1 представляет собой блок-схему сценария совместного применения существующего мультиплексора и ремультиплексора;Figure 1 is a block diagram of a scenario for the joint use of an existing multiplexer and remultiplexer;

Фиг.2 представляет собой блок-схему сценария применения устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения;FIG. 2 is a flowchart of an application scenario of a multiplexing apparatus performing mixed multiplexing in accordance with an embodiment of the present invention;

Фиг.3 представляет собой блок-схему структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения;Figure 3 is a block diagram of the structure of a multiplexing device performing mixed multiplexing, in accordance with an embodiment of the present invention;

Фиг.4 представляет собой блок-схему улучшенной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения;4 is a block diagram of an improved structure of a multiplexing apparatus performing mixed multiplexing in accordance with an embodiment of the present invention;

Фиг.5 представляет собой блок-схему еще одной улучшенной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения;5 is a block diagram of another improved structure of a multiplexing device performing mixed multiplexing, in accordance with an embodiment of the present invention;

Фиг.6 представляет собой блок-схему аппаратной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения;6 is a block diagram of the hardware structure of a multiplexing device performing mixed multiplexing, in accordance with an embodiment of the present invention;

Фиг.7 представляет собой блок-схему программной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения;7 is a block diagram of the software structure of a multiplexing device performing mixed multiplexing, in accordance with an embodiment of the present invention;

Фиг.8 представляет собой блок-схему алгоритма способа смешанного мультиплексирования в соответствии с примером осуществления настоящего изобретения.Fig. 8 is a flowchart of a mixed multiplexing method in accordance with an embodiment of the present invention.

Фиг.9 представляет собой блок-схему алгоритма для конкретной реализации способа смешанного мультиплексирования в соответствии с вариантом осуществления настоящего изобретения;9 is a flowchart for a specific implementation of a mixed multiplexing method in accordance with an embodiment of the present invention;

Фиг.10 представляет собой блок-схему еще одного сценария применения устройства мультиплексирования, выполняющего смешанное мультиплексирование, в соответствии с вариантом осуществления настоящего изобретения.10 is a block diagram of yet another application scenario of a multiplexing apparatus performing mixed multiplexing in accordance with an embodiment of the present invention.

Предпочтительные варианты осуществления настоящего изобретенияPreferred Embodiments of the Present Invention

Для пояснения целей, технической схемы и преимуществ настоящего изобретения далее оно будет описано более подробно со ссылкой на приложенные чертежи.To explain the objectives, technical scheme and advantages of the present invention, it will now be described in more detail with reference to the attached drawings.

На существующем уровне техники недостатки устройства мультиплексирования заключаются в следующих аспектах:At the current level of technology, the disadvantages of the multiplexing device are in the following aspects:

(1) Функционирование устройства мультиплексирования является симплексным.(1) The operation of the multiplexing device is simplex.

Существующие устройства мультиплексирования могут представлять собой исключительно мультиплексоры, принимающие симплексный входной поток от аудио/видеокодера (или другого сервера служб данных); или могут представлять собой ремультиплексоры, принимающие симплексный входной поток от других мультиплексоров. Существующие устройства мультиплексирования разделены на независимые устройства, работающие независимо на основе различных входных потоков, что не позволяет эффективно использовать характеристики устройств обоих типов (аудио/видеокодера и мультиплексора) с одним и тем же выходным потоком для осуществления интеграции, при этом необходимо добавлять отдельное устройство мультиплексирования для выходных данных этих двух типов устройств, и, как следствие, стоимость эксплуатации и технического обслуживания возрастает.Existing multiplexing devices can only be multiplexers that receive simplex input from an audio / video encoder (or other data services server); or may be remultiplexers receiving a simplex input stream from other multiplexers. Existing multiplexing devices are divided into independent devices that operate independently on the basis of different input streams, which does not allow efficient use of the characteristics of devices of both types (audio / video encoder and multiplexer) with the same output stream for integration, and it is necessary to add a separate multiplexing device for the output of these two types of devices, and as a result, the cost of operation and maintenance increases.

На фиг.1 показана блок-схема сценария совместного применения мультиплексора и ремультиплексора, используемых на существующем уровне техники для мультиплексирования выходного кодового потока PMS. На фиг.1 удаленный мультиплексор 101 пересылает мультиплексированные аудио/видеоданные в приемник 103 через спутник 102, при этом приемник 103 подает кодовые потоки PMS в ремультиплексор 107; локальный мультиплексор 106 подает кодовый поток PMS в ремультиплексор 107 после мультиплексирования локального аудио/видеопотока транспортного протокола реального времени (RTP) и локального потока данных RTP через локальный аудио/видеокодер 104 и локальный сервер 105 данных; и ремультиплексор 107 ремультиплексирует множество входных кодовых потоков PMS для вывода унифицированного кодового потока PMS. Кодовый поток PMS передают в беспроводной приемный терминал 110 с помощью передатчика 109 после модуляции модулятором 108.Figure 1 shows a block diagram of a scenario for the joint use of a multiplexer and a remultiplexer used in the existing art for multiplexing an output PMS codestream. 1, the remote multiplexer 101 sends the multiplexed audio / video data to the receiver 103 via satellite 102, while the receiver 103 supplies the PMS code streams to the remux 10; the local multiplexer 106 supplies the PMS code stream to the remultiplexer 107 after multiplexing the local real-time transport protocol (RTP) audio / video stream and the local RTP data stream through the local audio / video encoder 104 and the local data server 105; and a remultiplexer 107 remultiplexes the plurality of input PMS code streams to output a unified PMS code stream. The PMS codestream is transmitted to the wireless receiving terminal 110 by a transmitter 109 after modulation by a modulator 108.

(2) Простота применения ограничена вследствие использования различных устройств мультиплексирования, которые необходимо соответствующим образом конфигурировать.(2) Ease of use is limited due to the use of various multiplexing devices that need to be configured accordingly.

В сценарии применения, изображенном на фиг.1, два типа устройств мультиплексирования - мультиплексор и ремультиплексор - способны нормально функционировать только взаимодействуя друг с другом, однако при этом подобное взаимодействие может быть нарушено множеством различных факторов, и следовательно, имеется повышенный риск получения ошибочного кода или отказа.In the application scenario depicted in FIG. 1, two types of multiplexing devices - a multiplexer and a remultiplexer - are able to function normally only by interacting with each other, however, this interaction can be disrupted by many different factors, and therefore, there is an increased risk of receiving an erroneous code or failure.

(3) Существующие мультиплексоры неспособны хранить информацию службы в виде локального файла, они также неспособны считывать локальный файл для преобразования его в информацию службы для вывода посредством мультиплексирования, что не позволяет удовлетворить требования некоторых пользователей о возможности пользовательской настройки.(3) Existing multiplexers are unable to store the service information in the form of a local file, they are also unable to read the local file to convert it into service information for output by multiplexing, which does not satisfy the requirements of some users regarding the possibility of customization.

Для случая, когда требуется совместное применение множества мультиплексоров и ремультиплексоров для вывода окончательных кадров мультиплексирования, если мультиплексирование реализуют в рамках существующего стандарта китайского мобильного мультимедийного вещания (СММВ), и если присутствует множество типов входных кодовых потоков, в настоящем изобретении предложено устройство мультиплексирования, выполняющее смешанное мультиплексирование, и соответствующий способ мультиплексирования, и для случая с множеством типов входных кодовых потоков (например, кодовый поток RTP и кодовый поток PMS), сначала адаптивно идентифицируют типы входных кодовых потоков и затем буферизуют их в соответствии с упомянутыми типами, затем получают соответствующие подкадры мультиплексирования для различных типов кодовых потоков, и эти подкадры мультиплексирования назначают заданному кадру мультиплексирования для осуществления мультиплексирования в соответствии с конфигурационной информацией консоли с целью вывода кодового потока PMS, отвечающего спецификации СММВ. Настоящее изобретение также позволяет хранить входную информацию службы в виде локального файла с информацией службы, а также позволяет преобразовывать упомянутый файл с информацией службы в мультиплексированный кодовый поток PMS для вывода.For the case where the combined use of multiple multiplexers and remultiplexers is required to output the final frames of multiplexing, if the multiplexing is implemented within the existing standard of Chinese mobile multimedia broadcasting (SMMV), and if there are many types of input code streams, the present invention provides a multiplexing device that performs mixed multiplexing, and the corresponding multiplexing method, and for the case with many types of input codes output streams (e.g., RTP codestream and PMS codestream), first adaptively identify the types of input codestreams and then buffer them according to the mentioned types, then obtain the corresponding multiplexing subframes for various types of codestreams, and these multiplexing subframes are assigned to a given multiplexing frame for multiplexing in accordance with the configuration information of the console with the aim of outputting the PMS code stream that meets the CMSM specification. The present invention also allows you to store the input information of the service in the form of a local file with service information, and also allows you to convert the aforementioned file with service information in a multiplexed PMS code stream for output.

На фиг.2 показан сценарий применения устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения. На фиг.2 устройство 300 мультиплексирования, согласно настоящему изобретению, может принимать множество типов входных кодовых потоков от множества кодеров 201 и множества мультиплексоров 202 и после адаптивного приема множества типов входных кодовых потоков выводить кодовый поток PMS, отвечающий стандарту СММВ, в модулятор 108 после мультиплексирования множества типов кодовых потоков, при этом информацию службы передают в приемный терминал 110 посредством приемника 109 после модуляции модулятором 108.Figure 2 shows the application scenario of a multiplexing device performing mixed multiplexing in accordance with an embodiment of the present invention. 2, a multiplexing device 300 according to the present invention can receive a plurality of input codestream types from a plurality of encoders 201 and a plurality of multiplexers 202, and after adaptively receiving a plurality of input codestream types, output a CMMS standard PMS codestream to a modulator 108 after multiplexing many types of code streams, with the service information being transmitted to the receiving terminal 110 by the receiver 109 after modulation by the modulator 108.

На фиг.3 показана блок-схема структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения, при этом данное устройство 300 мультиплексирования, включает:Figure 3 shows a block diagram of the structure of a multiplexing device performing mixed multiplexing in accordance with an embodiment of the present invention, while this multiplexing device 300 includes:

модуль 301 адаптивной идентификации входного потока, который конфигурирован для идентификации типа входного кодового потока и для буферизации входного кодового потока;adaptive input stream identification module 301, which is configured to identify the type of input code stream and to buffer the input code stream;

модуль 302 формирования служб, который конфигурирован для извлечения подкадров мультиплексирования кадра мультиплексирования из буферизованного входного кодового потока в соответствии с типом входного кодового потока или для формирования подкадров мультиплексирования из входной аудио/видео информации;a service generating unit 302, which is configured to extract the multiplexing subframes of the multiplexing frame from the buffered input codestream in accordance with the type of input codestream, or to generate multiplexing subframes from the input audio / video information;

модуль 303 управления службами, который конфигурирован для распределения служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, для назначения подкадров мультиплексирования в соответствующий кадр мультиплексирования и для сохранения упомянутых подкадров мультиплексирования в заданном буфере; иa service control module 303, which is configured to distribute services among the multiplexing subframes in accordance with the service control configuration information, for assigning the multiplexing subframes to the corresponding multiplexing frame and for storing said multiplexing subframes in a predetermined buffer; and

модуль 304 формирования кадра мультиплексирования, который конфигурирован для получения кадра мультиплексирования из упомянутого заданного буфера, формирования кадра мультиплексирования в соответствии с конфигурационной информацией мультиплексирования и для преобразования сформированного кадра мультиплексирования в мультиплексированный кодовый поток для вывода.a multiplexing frame generating unit 304, which is configured to receive a multiplexing frame from said predetermined buffer, generating a multiplexing frame in accordance with the multiplexing configuration information, and for converting the generated multiplexing frame to a multiplexed code stream for output.

На фиг.4 показана блок-схема улучшенной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения. Это устройство мультиплексирования может также включать модуль 305 хранения, который конфигурирован для хранения подкадров мультиплексирования, получаемых модулем формирования служб, в виде локального файла с информацией службы или для хранения локального файла с информацией службы, формируемого пользователем;4 is a block diagram of an improved structure of a multiplexing apparatus performing mixed multiplexing in accordance with an embodiment of the present invention. This multiplexing device may also include a storage module 305, which is configured to store the multiplexing subframes received by the service generating module as a local file with service information or to store a local file with service information generated by the user;

упомянутый модуль 303 управления службами конфигурирован также для распределения файла с информацией службы, хранимого в модуле 305 хранения, в соответствии с конфигурационной информацией управления службами, а также для указания модулю 304 формирования кадра мультиплексирования мультиплексировать файл с информацией службы с целью формирования кадра мультиплексирования и для вывода мультиплексированного кодового потока. Мультиплексированный кодовый поток, показанный на фиг.3 и фиг.4, может представлять собой кодовый поток PMS или кодовый поток IP.said service control unit 303 is also configured to distribute a service information file stored in the storage unit 305 in accordance with the service control configuration information, and also to instruct the multiplexing frame forming unit 304 to multiplex the service information file for generating a multiplexing frame and for outputting multiplexed code stream. The multiplexed code stream shown in FIG. 3 and FIG. 4 may be a PMS code stream or an IP code stream.

На фиг.5 показана блок-схема еще одной улучшенной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения.5 is a block diagram of yet another improved structure of a multiplexing apparatus performing mixed multiplexing in accordance with an embodiment of the present invention.

Устройство 300 мультиплексирования может также включать модуль 306 синхронизации, который конфигурирован для предоставления стандартной информации синхронизации упомянутому модулю 302 формирования служб, модулю 303 управления службами и модулю 304 формирования кадра мультиплексирования с целью осуществления временной синхронизации между упомянутыми модулями, и для обеспечения согласованности временных меток в мультиплексированной информации.Multiplexing device 300 may also include a synchronization module 306, which is configured to provide standard synchronization information to said service generation module 302, service control module 303, and multiplexing frame generation module 304 for the purpose of timing synchronization between said modules, and to ensure consistency of time stamps in the multiplexed information.

Данное устройство мультиплексирования может также включать консоль 307 на базе устройства мультиплексирования, показанного на фиг.3 и фиг.4, при этом упомянутая консоль 307 конфигурирована для обеспечения конфигурационной информации, необходимой для мультиплексирования, а также для конфигурирования информации управления, используемой для мультиплексирования и/или ремультиплексирования, для конфигурирования параметров работы устройства мультиплексирования и для контроля рабочего состояния устройства мультиплексирования для упомянутых модуля 302 формирования служб, модуля 303 управления службами и модуля 304 формирования кадра мультиплексирования.This multiplexing device may also include a console 307 based on the multiplexing device shown in FIG. 3 and FIG. 4, said console 307 being configured to provide configuration information necessary for multiplexing, as well as to configure control information used for multiplexing and / or remultiplexing, for configuring the operation parameters of the multiplexing device and for monitoring the operating state of the multiplexing device for said s of the module 302 of the formation of services, module 303 of the service control and module 304 of the formation of the multiplexing frame.

В описанном выше устройстве мультиплексирования, показанном на фиг.3-5, упомянутый модуль 302 формирования служб, модуль 303 управления службами и модуль 304 формирования кадра мультиплексирования могут образовывать центральный процессорный модуль.In the multiplexing apparatus described above, shown in FIGS. 3-5, said service generating unit 302, the service managing unit 303 and the multiplexing frame generating unit 304 may form a central processing unit.

При реализации аппаратного обеспечения устройства мультиплексирования в данном варианте осуществления настоящего изобретения устройство может включать модуль адаптивной идентификации входного потока, центральный процессорный модуль, консоль и модуль вывода, при этомWhen implementing the hardware of the multiplexing device in this embodiment of the present invention, the device may include an adaptive input stream identification module, a central processor module, a console, and an output module, wherein

модуль адаптивной идентификации входного потока способен обнаруживать и принимать информацию службы, поступающую от аудио/видеокодера или от сервера службы данных, или входную информацию службы PMS, формируемую мультиплексором, в одно и то же время. Модуль адаптивной идентификации входного потока способен адаптивно идентифицировать и различать (различение может также выполняться вручную), что поступает на внешний вход - данные аудио/видеокодирования или служба данных или входной поток PMS, формируемый мультиплексором, и буферизовать все упомянутые типы входных кодовых потоков. Помимо аппаратной реализации настоящее изобретение способно также реализовывать виртуальный модуль адаптивной идентификации входного потока с помощью входного интерфейса и центрального процессорного модуля посредством программной обработки.the adaptive input stream identification module is capable of detecting and receiving service information coming from an audio / video encoder or from a data service server, or PMS input information generated by a multiplexer, at the same time. The adaptive input stream identification module is capable of adaptively identifying and distinguishing (distinguishing can also be performed manually), which is transmitted to an external input - audio / video encoding data or data service or PMS input stream generated by the multiplexer and to buffer all the mentioned types of input code streams. In addition to the hardware implementation, the present invention is also capable of realizing a virtual module for adaptive identification of an input stream using an input interface and a central processing unit through software processing.

Центральный процессорный модуль способен реализовывать функции программного модуля формирования служб, управления службами, формирования кадра мультиплексирования, управления вводом/выводом, управления хранением и т.п. Упомянутый центральный процессорный модуль может формировать кадр мультиплексирования, отвечающий стандарту СММВ, раздел 2, на основе входной информации службы с помощью модуля адаптивной идентификации входного потока или на основе информации службы из файла с информацией службы, хранимого в модуле хранения, в соответствии с информацией управления, конфигурируемой консолью для центрального процессорного модуля, а также формировать и выводить пакет PMS, отвечающий стандарту СММВ, в соответствии с конфигурационной информацией кадра мультиплексирования посредством модуля вывода или выводить IP-пакеты в соответствии с конфигурацией пользователя. В то же время упомянутый центральный процессорный модуль может передавать информацию о рабочем состоянии данного устройства мультиплексирования на консоль для сведения пользователя.The central processor module is capable of implementing the functions of a software module for generating services, managing services, generating a multiplexing frame, managing input / output, storage management, and the like. The said central processing unit may form a multiplexing frame conforming to the CMMB standard, section 2, based on the service input information using the adaptive input stream identification module or on the basis of the service information from the service information file stored in the storage module, in accordance with the control information, configurable console for the central processor module, as well as generate and output the PMS package that meets the CMMB standard, in accordance with the configuration information of the mule frame tipleksirovaniya by O module or output the IP-packets according to the user configuration. At the same time, said central processing unit can transmit information about the operational status of this multiplexing device to the console for user information.

Консоль конфигурирует информацию управления, используемую в процессе мультиплексирования/ремультиплексирования, конфигурирует параметры работы устройства смешанного мультиплексирования, и контролирует рабочее состояние устройства мультиплексирования, выполняющего смешанное мультиплексирование, для центрального процессорного модуля.The console configures the control information used in the multiplexing / remultiplexing process, configures the operation parameters of the mixed multiplexing device, and monitors the operating state of the multiplexing device performing the mixed multiplexing for the central processing unit.

Модуль синхронизации предоставляет информацию синхронизации, отвечающую стандарту СММВ, в центральный процессорный модуль, при этом упомянутый модуль синхронизации может представлять собой модуль глобальной системы позиционирования (Global Positionin System, GPS), предоставляющий сигнал синхронизации GPS в устройство мультиплексирования.The synchronization module provides synchronization information conforming to the CMMB standard to a central processor module, wherein said synchronization module may be a Global Positionin System (GPS) module providing a GPS synchronization signal to a multiplexing device.

Модуль хранения хранит информацию службы, извлекаемую упомянутым центральным процессорным модулем, при этом он хранит информацию службы в виде локального файла с информацией службы в соответствии с конфигурационной информацией консоли, и в то же время модуль хранения может также хранить файл программы и конфигурационную информацию.The storage module stores service information retrieved by the central processor module, while it stores the service information in the form of a local file with service information in accordance with the configuration information of the console, and at the same time, the storage module can also store the program file and configuration information.

Предпочтительно, аппаратно реализованная структура устройства мультиплексирования, показанная на фиг.6, включает: входной модуль, сформированный из электрически программируемой вентильной матрицы 601 (Field-Programmable Gate Array) и интерфейса 602 Fast Ethernet, центральный процессорный модуль 603, состоящий из блока центрального процессора (CPU), памяти и флэш-памяти, модуль 604 синхронизации, реализованный с помощью GPS-модуля, модуль 605 хранения, состоящий из контроллера жесткого диска и жесткого диска, консоль, состоящую из персонального компьютера 606 и выходного интерфейса 608 - асинхронного последовательного интерфейса (Asynchronous Serial Interface, ASI). FPGA 601, интерфейс 602 Fast Ethernet, входной интерфейс 607 ASI, а также модуль управления вводом/выводом, управляемый блоком центрального процессора, реализуют виртуальный модуль адаптивной идентификации входного потока и адаптивный классифицирующий буфер для информации служб из интерфейса ASI или порта Ethernet.Preferably, the hardware-based structure of the multiplexing device shown in FIG. 6 includes: an input module formed from an electrically programmable gate array 601 (Field-Programmable Gate Array) and a Fast Ethernet interface 602, a central processing unit 603 consisting of a central processing unit ( CPU), memory and flash memory, a synchronization module 604 implemented using a GPS module, a storage module 605 consisting of a hard disk controller and a hard disk, a console consisting of a personal computer 606 and an output o 608 - Asynchronous Serial Interface (ASI). The FPGA 601, 602 Fast Ethernet interface, ASI input 607, and an I / O control module controlled by the CPU block implement a virtual adaptive input stream identification module and adaptive classification buffer for service information from the ASI or Ethernet port.

На фиг.7 показана блок-схема программной структуры устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения. Программная структура данного устройства мультиплексирования включает модуль 701 формирования служб, модуль 702 управления службами, модуль 703 формирования кадров мультиплексирования, модуль 704 управления вводом/выводом, модуль 705 управления хранением и модуль 706 консоли, при этом7 shows a block diagram of the software structure of a multiplexing device performing mixed multiplexing in accordance with an embodiment of the present invention. The program structure of this multiplexing device includes a service generation module 701, a service management module 702, a multiplexing frame generation module 703, an input / output control module 704, a storage management module 705, and a console module 706,

упомянутый модуль 701 формирования служб реализует извлечение подкадров мультиплексирования из входного кадра мультиплексирования или формирование подкадров мультиплексирования на основе входной аудио/видеоинформации;said service generating module 701 implements extracting multiplexing subframes from an input multiplexing frame or generating multiplexing subframes based on input audio / video information;

упомянутый модуль 702 управления службами реализует распределение служб из модуля формирования служб, или хранимых локально, по кадрам мультиплексирования в соответствии с конфигурацией консоли и способом управления службами;said service control module 702 implements the distribution of services from the service generation module, or stored locally, among the multiplexing frames in accordance with the console configuration and the service control method;

упомянутый модуль 703 формирования кадра мультиплексирования реализует формирование кадра мультиплексирования на основе стандарта СММВ в соответствии с информацией управления, предоставляемой консолью;said multiplexing frame forming module 703 implements multiplexing frame generation based on the CMSM standard in accordance with control information provided by the console;

упомянутый модуль 704 управления вводом/выводом реализует управление вводом/выводом в программном и аппаратном обеспечении и способен образовывать виртуальный адаптивный интерфейс ввода.said input / output control module 704 implements input / output control in software and hardware and is capable of forming a virtual adaptive input interface.

На фиг.8 показана блок-схема алгоритма способа смешанного мультиплексирования в соответствии с вариантом осуществления настоящего изобретения. Данный способ мультиплексирования включает следующие шаги:FIG. 8 is a flowchart of a mixed multiplexing method in accordance with an embodiment of the present invention. This multiplexing method includes the following steps:

первый шаг, на котором входные кодовые потоки адаптивно идентифицируют и буферизуют;a first step in which the input code streams are adaptively identified and buffered;

если выполняют адаптивную идентификацию, может осуществляться извлечение характерной точки информации службы и информация заголовков пакетов, при этом извлекаемую характерную точку сравнивают с библиотекой характерных точек модуля адаптивной идентификации входного потока, и затем - после упомянутого сравнения - классифицируют и буферизуют. Извлекаемая характерная точка информации службы может быть получена с помощью извлечения информации заголовков пакетов. Упомянутый входной кодовый поток может представлять собой кодовый поток RTP или кодовый поток PMS.if adaptive identification is performed, the characteristic point of the service information and the packet header information can be extracted, while the extracted characteristic point is compared with the characteristic point library of the adaptive identification module of the input stream, and then, after said comparison, they are classified and buffered. The extracted characteristic point of service information can be obtained by extracting packet header information. Said input codestream may be an RTP codestream or a PMS codestream.

Второй шаг, на котором подкадры мультиплексирования кадра мультиплексирования извлекают из буферизованного кодового потока в соответствии с типом входного кодового потока, или из входной аудио/видеоинформации формируют подкадры мультиплексирования;The second step, in which the multiplexing subframes of the multiplexing frame are extracted from the buffered code stream in accordance with the type of input code stream, or multiplexing subframes are formed from the input audio / video information;

упомянутые подкадры мультиплексирования могут представлять собой подкадры мультиплексирования, отвечающие стандарту мультиплексирования СММВ. Если данное устройство мультиплексирования применяют в системе с другими стандартами, подкадры мультиплексирования могут также быть подкадрами мультиплексирования соответствующих стандартов, например, подкадрами DVB-H.said multiplexing subframes may be multiplexing subframes conforming to the CMMB multiplexing standard. If this multiplexing device is used in a system with other standards, the multiplexing subframes may also be multiplexing subframes of the respective standards, for example, DVB-H subframes.

Третий шаг, на котором осуществляют распределение служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, при этом подкадры мультиплексирования назначают в соответствующий кадр мультиплексирования и буферизуют в заданный буфер;A third step is the distribution of services among the multiplexing subframes in accordance with the service control configuration information, wherein the multiplexing subframes are assigned to the corresponding multiplexing frame and buffered to a predetermined buffer;

при осуществлении упомянутого распределения, связанного с управлением службами, формируемые подкадры мультиплексирования могут назначаться в соответствующий кадр мультиплексирования в соответствии с конфигурацией консоли с применением способа N-мерной таблицы.in the implementation of the above-mentioned distribution associated with the management of services, the generated multiplexing subframes can be assigned to the corresponding multiplexing frame in accordance with the configuration of the console using the N-dimensional table method.

Четвертый шаг, на котором подкадры мультиплексирования получают из упомянутого заданного буфера и формируют кадр мультиплексирования в соответствии с конфигурационной информацией мультиплексирования, при этом формируемый кадр мультиплексирования преобразуют в мультиплексированный кодовый поток для вывода.The fourth step is where the multiplexing subframes are obtained from said predetermined buffer and a multiplexing frame is generated in accordance with the multiplexing configuration information, wherein the generated multiplexing frame is converted into a multiplexed code stream for output.

При формировании кадра мультиплексирования необходимо сформировать кадр мультиплексирования 0 и заголовок кадра мультиплексирования, отвечающие стандарту мультиплексирования СММВ, в соответствии с конфигурацией консоли. При выводе может применяться FPGA для разделения кадра мультиплексирования и упаковки его в пакеты PMS или IP. Упомянутый мультиплексированный кодовый поток является кодовым потоком PMS или кодовым потоком IP.When forming the multiplexing frame, it is necessary to form the multiplexing frame 0 and the header of the multiplexing frame, corresponding to the CMMB multiplexing standard, in accordance with the configuration of the console. At the output, FPGA can be used to split the multiplexing frame and pack it into PMS or IP packets. Said multiplexed codestream is a PMS codestream or an IP codestream.

На фиг.9 показана блок-схема конкретной реализации способа смешанного мультиплексирования в соответствии с вариантом осуществления настоящего изобретения.FIG. 9 is a flowchart of a specific implementation of a mixed multiplexing method in accordance with an embodiment of the present invention.

Шаг 901, модуль адаптивной идентификации входного потока принимает входную информацию службы, извлекает характерную точку входной информации службы и сравнивает упомянутые характерные точки с библиотекой адаптивного сравнения, а также буферизует упомянутые характерные точки; модуль адаптивной идентификации входного потока одновременно принимает поток PMS, передаваемый спутником в локальный мультиплексор через удаленный мультиплексор, а также потоки данных RTP локального аудио/видеокодера и сервера данных.Step 901, the adaptive input stream identification module receives the service input information, extracts a characteristic point of the service input information and compares said characteristic points with an adaptive comparison library, and also buffers said characteristic points; the adaptive input stream identification module simultaneously receives the PMS stream transmitted by the satellite to the local multiplexer via the remote multiplexer, as well as the RTP data streams of the local audio / video encoder and data server.

Шаг 902, модуль формирования служб извлекает входную информацию службы, успешно прошедшую упомянутое сравнение, для формирования подкадра;Step 902, the service generation module extracts service input information that has successfully passed said comparison to form a subframe;

шаг 903, модуль управления службами сохраняет подкадры мультиплексирования, полученные от модуля формирования служб или из памяти (а именно, из модуля хранения), в заданном буфере в соответствии с информацией консоли;step 903, the service control module stores the multiplexing subframes received from the service generation unit or from memory (namely, from the storage unit) in a predetermined buffer in accordance with the console information;

шаг 904, модуль формирования кадра мультиплексирования получает подкадры мультиплексирования из буфера или от модуля управления службами и формирует кадр мультиплексирования, отвечающий стандарту мультиплексирования СММВ, в соответствии с конфигурационной информацией консоли;step 904, the multiplexing frame-forming module receives the multiplexing subframes from the buffer or from the service control module and generates a multiplexing frame that meets the CMSM multiplexing standard in accordance with the console configuration information;

шаг 905, модуль формирования подкадра мультиплексирования (электрически программируемая вентильная матрица, FPGA) разделяет кадр мультиплексирования и упаковывает его в пакеты PMS или IP, посредством чего осуществляет вывод кодового потока PMS или кодового потока IP.step 905, the multiplexing subframe generating module (electrically programmable gate array, FPGA) splits the multiplexing frame and packs it into PMS or IP packets, thereby outputting the PMS codestream or IP codestream.

При этом после шага 902 может быть также осуществлен шаг 906, и подкадры мультиплексирования сохраняют в памяти в виде файла с информацией службы; на шаге 903 осуществляют распределение служб с помощью модуля управления службами для файла с информацией службы в памяти, который хранят в заданном буфере.In this case, after step 902, step 906 may also be performed, and the multiplexing subframes are stored in memory as a file with service information; in step 903, services are distributed using the service control module for a file with service information in memory that is stored in a predetermined buffer.

На фиг.10 показан еще один пример сценария конкретного применения устройства мультиплексирования, выполняющего смешанное мультиплексирование в соответствии с вариантом осуществления настоящего изобретения. Данное устройство 300 мультиплексирования может одновременно принимать поток PMS, передаваемый от удаленного мультиплексора 101 через спутник 105 в локальный мультиплексор, а также потоки данных RTP локального аудио/видеокодера 104 и сервера 105 данных, при этом сначала входной кодовый поток адаптивно сравнивают с буфером; а затем модуль формирования служб извлекает входную информацию службы, успешно прошедшую сравнение, для формирования подкадров мультиплексирования в соответствии с фоновой конфигурацией, и затем модуль управления службами хранит подкадры мультиплексирования, получаемые от модуля формирования служб, в заданном буфере в соответствии с конфигурационной информацией консоли; наконец, модуль формирования кадра мультиплексирования получает подкадры мультиплексирования из буфера, формирует подкадры мультиплексирования, отвечающие стандарту мультиплексирования СММВ, в соответствии с конфигурационной информацией консоли и выводит поток PMS, отвечающий стандарту СММВ.Figure 10 shows another example of a specific application scenario of a multiplexing device performing mixed multiplexing in accordance with an embodiment of the present invention. This multiplexing device 300 can simultaneously receive a PMS stream transmitted from a remote multiplexer 101 via satellite 105 to a local multiplexer, as well as RTP data streams of the local audio / video encoder 104 and data server 105, with the input code stream being adaptively compared with a buffer; and then, the service generation module extracts the input information of the service that has been successfully compared to form the multiplexing subframes in accordance with the background configuration, and then the service management module stores the multiplexing subframes received from the service generation module in a predetermined buffer in accordance with the console configuration information; finally, the multiplexing frame-forming module receives the multiplexing subframes from the buffer, generates the multiplexing subframes corresponding to the CMSM multiplexing standard in accordance with the console configuration information and outputs a PMS stream complying with the CMSB standard.

Поскольку реализована адаптивная схема ввода и управления службами, устройство мультиплексирования и способ мультиплексирования настоящего изобретения реализуют мультиплексирование различных типов входных кодовых потоков с использованием одного устройства, вместо применения двух типов мультиплексоров для реализации соответствующей обработки входных данных различных служб. С одной стороны, достигается снижение стоимости производства и технического обслуживания станции, а также упрощается использование интерфейсного устройства; с другой стороны, поскольку применяют симплексное устройство, снижен риск получения ошибочного кода или отказов, который присутствует при совместном использовании множества мультиплексоров. Кроме того, в настоящем изобретении предложена также схема хранения служб, удобная для реализации функций пользовательских настроек. Использование адаптивной схемы также позволяет сократить денежные затраты пользователя.Since an adaptive service input and control scheme is implemented, the multiplexing device and the multiplexing method of the present invention implement multiplexing of various types of input code streams using a single device, instead of using two types of multiplexers to implement the corresponding input processing of various services. On the one hand, a reduction in the cost of production and maintenance of the station is achieved, and the use of an interface device is also simplified; on the other hand, since a simplex device is used, the risk of receiving an erroneous code or failures, which is present when sharing a plurality of multiplexers, is reduced. In addition, the present invention also provides a service storage scheme convenient for implementing user settings functions. The use of an adaptive scheme also reduces the user's cash costs.

Специалистам в данной области техники должно быть очевидно, что все части шагов описанного выше способа могут быть реализованы посредством программы с помощью подачи команд соответствующему аппаратному обеспечению, при этом упомянутые программы могут храниться на одном машиночитаемом носителе, например, в памяти "только для чтения" (Read-Only Memory, ROM), на магнитном или оптическом диске и т.п. Опционально, для реализации всех частей шагов описанных выше вариантов осуществления настоящего изобретения может применяться одна или более интегральных схем. Соответственно, каждый модуль/блок в описанных вариантах осуществления настоящего изобретения может иметь форму аппаратного обеспечения, или форму программного обеспечения. Настоящее изобретение не ограничено никакой конкретной комбинацией аппаратного и программного обеспечения.It will be apparent to those skilled in the art that all parts of the steps of the method described above can be implemented by means of a program by issuing instructions to the appropriate hardware, while said programs can be stored on a single computer-readable medium, for example, in read-only memory ( Read-Only Memory, ROM), on a magnetic or optical disk, etc. Optionally, one or more integrated circuits may be used to implement all parts of the steps of the above embodiments of the present invention. Accordingly, each module / unit in the described embodiments of the present invention may take the form of hardware, or a form of software. The present invention is not limited to any particular combination of hardware and software.

Несмотря на то, что настоящее изобретение описано на примере конкретных вариантов его осуществления, специалистами в настоящей области техники могут быть осуществлены всевозможные соответствующие модификации или изменения без выхода за рамки настоящего изобретения. Все подобные модификации или изменения попадают в рамки настоящего изобретения и приложенной формулы изобретения.Despite the fact that the present invention is described by the example of specific variants of its implementation, specialists in the art can make any possible appropriate modifications or changes without going beyond the scope of the present invention. All such modifications or changes fall within the scope of the present invention and the appended claims.

Промышленная применимостьIndustrial applicability

В настоящем изобретении предложено устройство мультиплексирования и способ мультиплексирования, в которых принята адаптивная схема ввода и управления службами, при этом реализовано мультиплексирование различных типов входных кодовых потоков с использованием одного устройства, вместо применения двух типов мультиплексоров для реализации соответствующей обработки входных данных различных служб. С одной стороны, достигается снижение стоимости производства и технического обслуживания станции, а также упрощается использование интерфейсного устройства; с другой стороны, поскольку применяют симплексное устройство, снижен риск получения ошибочного кода или отказов, который присутствует при совместном использовании множества мультиплексоров. Кроме того, в настоящем изобретении предложена также схема хранения служб, удобная для реализации функции пользовательских настроек. Использование адаптивной схемы позволяет также сократить денежные затраты пользователя.The present invention provides a multiplexing device and a multiplexing method that adopts an adaptive service input and control scheme, and implements the multiplexing of various types of input code streams using a single device, instead of using two types of multiplexers to implement the corresponding input processing of various services. On the one hand, a reduction in the cost of production and maintenance of the station is achieved, and the use of an interface device is also simplified; on the other hand, since a simplex device is used, the risk of receiving an erroneous code or failures, which is present when sharing a plurality of multiplexers, is reduced. In addition, the present invention also provides a service storage scheme convenient for implementing a user settings function. The use of an adaptive scheme also reduces the user's cash costs.

Claims (10)

1. Устройство мультиплексирования, включающее
модуль адаптивной идентификации входного потока, который конфигурирован для адаптивной идентификации типа входного кодового потока и буферизации входного кодового потока;
модуль формирования служб, который конфигурирован для извлечения подкадров мультиплексирования входного кадра мультиплексирования из буферизованного входного кодового потока в соответствии с типом входного кодового потока или для формирования подкадров мультиплексирования из входной аудиоинформации и видеоинформации;
модуль управления службами, который конфигурирован для распределения служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, для назначения подкадров мультиплексирования соответствующему кадру мультиплексирования и для сохранения упомянутых подкадров мультиплексирования в заданном буфере; и
модуль формирования кадра мультиплексирования, который конфигурирован для получения подкадров мультиплексирования из упомянутого буфера, для формирования кадра мультиплексирования в соответствии с конфигурационной информацией мультиплексирования и для преобразования сформированных кадров мультиплексирования в мультиплексированный кодовый поток для вывода.
1. The multiplexing device, including
an adaptive input stream identification module that is configured for adaptively identifying an input code stream type and buffering an input code stream;
a service generating unit that is configured to extract the multiplexing subframes of the input multiplexing frame from the buffered input codestream in accordance with the type of input codestream, or to generate the multiplexing subframes from the input audio and video information;
a service control module that is configured to distribute services among the multiplexing subframes in accordance with the service control configuration information, for assigning the multiplexing subframes to the corresponding multiplexing frame and for storing said multiplexing subframes in a predetermined buffer; and
a multiplexing frame generating module, which is configured to receive multiplexing subframes from said buffer, for generating a multiplexing frame in accordance with the multiplexing configuration information and for converting the generated multiplexing frames to a multiplexed code stream for output.
2. Устройство по п.1, также включающее модуль хранения, при этом
упомянутый модуль хранения конфигурирован для хранения подкадров мультиплексирования, полученных модулем формирования служб, в виде локального файла с информацией службы, или для хранения локального файла с информацией службы, формируемого пользователем;
упомянутый модуль управления службами также конфигурирован для извлечения файла с информацией службы, хранимого в модуле хранения, в соответствии с конфигурационной информацией управления службами, а также для указания модулю формирования кадра мультиплексирования мультиплексировать файл с информацией службы для формирования кадра мультиплексирования.
2. The device according to claim 1, further comprising a storage module, wherein
said storage module is configured to store the multiplexing subframes received by the service generating module in the form of a local file with service information, or to store a local file with service information generated by the user;
said service control module is also configured to retrieve a service information file stored in the storage module in accordance with the service control configuration information, and also to instruct the multiplexing unit to multiplex the service information file to form the multiplexing frame.
3. Устройство по п.1, также включающее
модуль синхронизации, который конфигурирован для обеспечения стандартной информации синхронизации для упомянутого модуля формирования служб, модуля управления службами и модуля формирования кадра мультиплексирования; и
консоль, которая конфигурирована для обеспечения конфигурационной информации, необходимой для мультиплексирования, для конфигурирования информации управления, используемой при мультиплексировании и/или ремультиплексировании, для конфигурирования параметров работы устройства мультиплексирования и для контроля рабочего состояния устройства мультиплексирования в отношении упомянутых модуля формирования служб, модуля управления службами и модуля формирования кадра мультиплексирования.
3. The device according to claim 1, also including
a synchronization module that is configured to provide standard synchronization information for said service generation unit, a service management unit, and a multiplexing frame generation unit; and
a console that is configured to provide the configuration information necessary for multiplexing, for configuring control information used in multiplexing and / or remultiplexing, for configuring the operation parameters of the multiplexing device, and for monitoring the operational status of the multiplexing device with respect to the aforementioned service generating unit, the service management unit, and multiplexing frame forming unit.
4. Устройство по любому из пп.1-3, в котором
упомянутый модуль адаптивной идентификации входного потока конфигурирован для извлечения информации о характерных точках из входного кодового потока и сравнения информации о характерных точках с библиотекой характерных точек, хранимой в модуле адаптивной идентификации входного потока, для адаптивной идентификации типа входного кодового потока.
4. The device according to any one of claims 1 to 3, in which
said adaptive input stream identification module is configured to extract characteristic point information from the input code stream and compare characteristic point information with a characteristic point library stored in the adaptive input stream identification module for adaptive identification of the input code stream type.
5. Устройство по любому из пп.1-3, в котором
упомянутый входной кодовый поток включает кодовый поток транспортного протокола реального времени (RTP) и/или пакетный мультиплексированный поток (PMS); и
упомянутый выходной мультиплексированный кодовый поток представляет собой кодовый поток PMS или кодовый поток протокола Интернета (IP).
5. The device according to any one of claims 1 to 3, in which
said input codestream includes a real-time transport protocol (RTP) codestream and / or a packet multiplexed stream (PMS); and
said output multiplexed codestream is a PMS codestream or Internet Protocol (IP) codestream.
6. Способ мультиплексирования, включающий
адаптивную идентификацию и буферизацию входного кодового потока;
извлечение подкадров мультиплексирования входного кадра мультиплексирования из буферизованного входного кодового потока в соответствии с типом входного кодового потока или формирование подкадров мультиплексирования из входной аудиоинформации и видеинформации;
осуществление распределения служб по подкадрам мультиплексирования в соответствии с конфигурационной информацией управления службами, назначение подкадров мультиплексирования соответствующему кадру мультиплексирования и сохранение упомянутых подкадров мультиплексирования в заданном буфере; и
получение подкадров мультиплексирования из упомянутого буфера, формирование кадра мультиплексирования в соответствии с конфигурационной информацией мультиплексирования и преобразование сформированных кадров мультиплексирования в мультиплексированный кодовый поток для вывода.
6. The method of multiplexing, including
adaptive identification and buffering of the input code stream;
extracting multiplexing subframes of the input multiplexing frame from the buffered input codestream in accordance with the type of input codestream, or generating multiplexing subframes from the input audio and video information;
performing the distribution of services among the multiplexing subframes in accordance with the service control configuration information, assigning the multiplexing subframes to the corresponding multiplexing frame, and storing said multiplexing subframes in a predetermined buffer; and
receiving multiplexing subframes from said buffer, generating a multiplexing frame in accordance with the multiplexing configuration information, and converting the generated multiplexing frames to a multiplexed code stream for output.
7. Способ по п.6, также включающий
хранение полученных подкадров мультиплексирования в виде локального файла с информацией службы или хранение локального файла с информацией службы, формируемого пользователем; распределение хранимого файла с информацией службы в соответствии с конфигурационной информацией управления службами при формировании кадра мультиплексирования, и мультиплексирование файла с информацией службы для формирования кадра мультиплексирования.
7. The method according to claim 6, also including
storing the received multiplexing subframes in the form of a local file with service information or storing a local file with service information generated by the user; distribution of the stored file with the service information in accordance with the configuration information of the service control when forming the multiplexing frame, and multiplexing the file with the service information to form the multiplexing frame.
8. Способ по п.6 или 7, в котором
упомянутый шаг адаптивной идентификации и буферизации входного кодового потока включает извлечение информации о характерных точках из входного кодового потока и сравнение информации о характерных точках с библиотекой характерных точек, хранимой в модуле адаптивной идентификации входного потока, для адаптивной идентификации типа входного кодового потока.
8. The method according to claim 6 or 7, in which
said step of adaptive identification and buffering of the input code stream includes extracting information about the characteristic points from the input code stream and comparing the information about the characteristic points with the library of characteristic points stored in the adaptive identification module of the input stream for adaptive identification of the type of the input code stream.
9. Способ по п.8, в котором
упомянутая информация о характерных точках, извлекаемая из входного кодового потока, представляет собой информацию заголовков пакетов.
9. The method of claim 8, in which
said characteristic point information extracted from the input codestream is packet header information.
10. Способ по п.6 или 7, в котором
упомянутый входной кодовый поток включает кодовый поток транспортного протокола реального времени (RTP) и/или пакетный мультиплексированный поток (PMS); и
упомянутый выходной мультиплексированный кодовый поток представляет собой кодовый поток PMS или кодовый поток протокола Интернета (IP).
10. The method according to claim 6 or 7, in which
said input codestream includes a real-time transport protocol (RTP) codestream and / or a packet multiplexed stream (PMS); and
said output multiplexed codestream is a PMS codestream or Internet Protocol (IP) codestream.
RU2011142267/08A 2009-12-16 2010-06-18 Multiplexer and multiplexing method RU2491759C2 (en)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN200910258143.1 2009-12-16
CN 200910258143 CN101754024B (en) 2009-12-16 2009-12-16 Multiplexing device and multiplexing method
PCT/CN2010/074101 WO2010149000A1 (en) 2009-12-16 2010-06-18 Multiplexer and multiplexing method

Publications (1)

Publication Number Publication Date
RU2491759C2 true RU2491759C2 (en) 2013-08-27

Family

ID=42480290

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2011142267/08A RU2491759C2 (en) 2009-12-16 2010-06-18 Multiplexer and multiplexing method

Country Status (3)

Country Link
CN (1) CN101754024B (en)
RU (1) RU2491759C2 (en)
WO (1) WO2010149000A1 (en)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102014299B (en) * 2010-11-05 2014-07-16 中兴通讯股份有限公司 Method and device for realizing multi-frequency point multiplexing of paths of data
CN101977286B (en) * 2010-11-30 2012-09-26 福州大学 Digital television program replacing device
CN102111215A (en) * 2010-12-23 2011-06-29 中兴通讯股份有限公司 Method and device for synchronizing configuration data
CN103974088B (en) * 2013-01-28 2017-05-10 杭州海康威视数字技术股份有限公司 Data reuse method and system
CN113724717B (en) * 2020-05-21 2023-07-14 成都鼎桥通信技术有限公司 Vehicle-mounted audio processing system and method, vehicle-mounted controller and vehicle

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0550843B1 (en) * 1991-12-24 1999-08-11 General Instrument Corporation Statistical multiplexer for a multichannel image compression system and demultiplexer
RU2208297C2 (en) * 1999-06-25 2003-07-10 Самсунг Электроникс Ко., Лтд. Channel coding and multiplexing device and method for code-division multiple access communication system
WO2004093454A1 (en) * 2003-04-17 2004-10-28 Thomson Licensing Converter and method for converting digital signals received in the form of modulated multiplexed signals
RU77527U1 (en) * 2008-06-11 2008-10-20 Закрытое акционерное общество "НТЦ РИССА НАУЧНО-ПРОИЗВОДСТВЕННОЕ ПРЕДПРИЯТИЕ" FLEXIBLE MULTIPLEXOR

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1148020C (en) * 2000-11-02 2004-04-28 北京算通数字技术研究中心有限公司 Data injection method for broadcast system integrating digital video-audio broadcast with data broadcast
JP4979362B2 (en) * 2006-12-12 2012-07-18 日本放送協会 Re-transmission device, re-transmission method, and re-transmission program
CN101267571B (en) * 2008-04-23 2011-05-25 中兴通讯股份有限公司 A reuse device and method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0550843B1 (en) * 1991-12-24 1999-08-11 General Instrument Corporation Statistical multiplexer for a multichannel image compression system and demultiplexer
RU2208297C2 (en) * 1999-06-25 2003-07-10 Самсунг Электроникс Ко., Лтд. Channel coding and multiplexing device and method for code-division multiple access communication system
WO2004093454A1 (en) * 2003-04-17 2004-10-28 Thomson Licensing Converter and method for converting digital signals received in the form of modulated multiplexed signals
RU77527U1 (en) * 2008-06-11 2008-10-20 Закрытое акционерное общество "НТЦ РИССА НАУЧНО-ПРОИЗВОДСТВЕННОЕ ПРЕДПРИЯТИЕ" FLEXIBLE MULTIPLEXOR

Also Published As

Publication number Publication date
CN101754024B (en) 2012-01-11
WO2010149000A1 (en) 2010-12-29
CN101754024A (en) 2010-06-23

Similar Documents

Publication Publication Date Title
EP3000215B1 (en) Live media processing and streaming service
EP3086558B1 (en) Transmission method, reception method, transmitting device, and receiving device
US9544641B2 (en) Hybrid transmission method through MMT packet format extension
US20200236410A1 (en) Transmitting device, receiving device, transmitting method and receiving method
US8891963B2 (en) Hybrid signal router
JP6302274B2 (en) Transmitting apparatus and receiving apparatus
WO2019160714A1 (en) Distribution and playback of media content
US10327000B2 (en) Transmitting method for transmitting a plurality of packets including header information including divided data information and a value of an invalidated fragment counter
US8938546B2 (en) Data retrieval in a two-way network
KR20160139020A (en) Broadcast and broadband hybrid service with mmt and dash
RU2491759C2 (en) Multiplexer and multiplexing method
CN102265535A (en) Method and apparatus for streaming multiple scalable coded video content to client devices at different encoding rates
US20100262999A1 (en) Systems and methods for accessing selected packetized programming streams
US11722714B2 (en) Transmitting method, receiving method, transmitting device and receiving device
US10750228B2 (en) System and method for operating a transmission network
US20150201253A1 (en) Methods and apparatus for universal presentation timeline alignment
CN104254000B (en) A kind of video data handling procedure and device
KR101941781B1 (en) Method and Apparatus for Receiving 8K Broadcasting based on MMT
EP2834737B1 (en) A media content processing/distribution system
KR102226834B1 (en) Transcoding method, apparatus and computer-readable medium for compatibility from mpeg-ts stream to ip packet based on atsc 3.0 by generating clock signal
US11824751B2 (en) System and method for controlling distribution of media content in a distributed system
US20220070387A1 (en) Systems and methods for down-sampled video routing
KR102119210B1 (en) Transcoding method, apparatus and computer-readable medium for compatibility from mpeg-ts stream to ip packet based on atsc 3.0
KR20160149144A (en) MMT apparatus and method for processing media data
US7983251B2 (en) Broadcasting service transmission/reception method and apparatus for providing fast access to broadcasting service

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20160619