KR100925507B1 - Contents streaming system and contents streaming method - Google Patents

Contents streaming system and contents streaming method Download PDF

Info

Publication number
KR100925507B1
KR100925507B1 KR1020070107668A KR20070107668A KR100925507B1 KR 100925507 B1 KR100925507 B1 KR 100925507B1 KR 1020070107668 A KR1020070107668 A KR 1020070107668A KR 20070107668 A KR20070107668 A KR 20070107668A KR 100925507 B1 KR100925507 B1 KR 100925507B1
Authority
KR
South Korea
Prior art keywords
manager
audio
data
content
streaming
Prior art date
Application number
KR1020070107668A
Other languages
Korean (ko)
Other versions
KR20080051043A (en
Inventor
박춘서
이용주
정진환
김정근
민옥기
김학영
김명준
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20080051043A publication Critical patent/KR20080051043A/en
Application granted granted Critical
Publication of KR100925507B1 publication Critical patent/KR100925507B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2389—Multiplex stream processing, e.g. multiplex stream encrypting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00—Traffic control in data switching networks
    • H04L47/10—Flow control; Congestion control
    • H04L47/24—Traffic characterised by specific attributes, e.g. priority or QoS
    • H04L47/2416—Real-time traffic
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/22—Parsing or analysis of headers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266—Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • H04N21/2662—Controlling the complexity of the video stream, e.g. by scaling the resolution or bitrate of the video stream based on the client capabilities

Abstract

본 발명은 콘텐츠 전송 시스템 및 콘텐츠 전송 방법에 관한 것으로, 콘텐츠 스트리밍 전송 환경에 따라 콘텐츠 스트리밍 동작을 관리하는 스트리밍 서비스 제어 관리기와, 입력 데이터를 받아들여 역 다중화 작업을 수행하는 역 다중화기 관리기와, 네트워크 상태가 불량한 경우에, I Frame Only Play 모드 또는 Audio Only Play 모드로 변환하여, 콘텐츠를 적응적으로 변환하는 작업을 수행하는 콘텐츠 적응 관리기와, 상기 콘텐츠 적응 관리기를 통해 적응된 데이터를 입력받아 재 다중화 작업을 수행하는 재 다중화기 관리기를 구성하여, 네트워크 상태 변화에 따라 콘텐츠를 스트리밍 하는 방법을 달리하여, 네트워크 상황에 적합한 스트리밍 전송을 지원할 수 있다.The present invention relates to a content delivery system and a content delivery method, a streaming service control manager for managing content streaming operations according to a content streaming delivery environment, a demultiplexer manager for receiving input data and performing demultiplexing operation, and a network In a bad state, the content adaptation manager converts the content to the I Frame Only Play mode or the Audio Only Play mode, and converts the content adaptively, and receives and adapts the multiplexed data through the content adaptation manager. By configuring a re-multiplexer manager that performs a task, it is possible to support streaming transmission suitable for a network situation by changing a method of streaming content according to a change in network status.

역다중화, 재다중화, 적응형 컨텐츠 전송, 스트리밍 서비스, 트랜스 코딩 Demultiplexing, Remultiplexing, Adaptive Content Delivery, Streaming Services, Transcoding

Description

콘텐츠 전송 시스템 및 콘텐츠 전송 방법{CONTENTS STREAMING SYSTEM AND CONTENTS STREAMING METHOD}Content delivery system and content delivery method {CONTENTS STREAMING SYSTEM AND CONTENTS STREAMING METHOD}

본 발명은, 콘텐츠 전송 시스템 및 콘텐츠 전송 방법에 관한 것이다.The present invention relates to a content delivery system and a content delivery method.

본 발명은 정보통신부 및 정보통신연구진흥원의 IT신성장동력핵심기술개발사업의 일환으로 수행한 연구로부터 도출된 것이다[과제관리번호: 2005-S-405-02, 과제명: 차세대 인터넷 서버 기술 개발].The present invention is derived from the research conducted as part of the IT new growth engine core technology development project of the Ministry of Information and Communication and the Ministry of Information and Communication Research and Development. .

일반적으로, 스트리밍 서비스를 지원하는 시스템에서 스트리밍 전송 상태가 악화하는 경우에, 스트리밍 서비스를 지속적으로 제공하는데 어려움을 겪게 된다.In general, when a streaming transmission state deteriorates in a system supporting a streaming service, it is difficult to continuously provide a streaming service.

종래의 기술에 따르면, 트랜스 코딩 작업을 수행하는데 있어서, 역 다중화와 재 다중화는 비용이 많이 들기 때문에 여러 사용자에게 동시에 스트리밍 서비스를 지원하는데 한계가 있다. 또한, 네트워크 상태가 불량한 경우에는, 스트리밍 서비스를 자체를 지원하지 못하는 경우가 발생할 수 있다.According to the prior art, since demultiplexing and remultiplexing are expensive in performing a transcoding operation, there is a limit in supporting streaming services to multiple users at the same time. In addition, when the network condition is poor, it may occur that the streaming service itself does not support.

본 발명의 일 목적은, 멀티미디어 스트리밍 전송 서비스 시스템에서 스트리밍 전송 환경의 변화에 따라 콘텐츠를 적응적으로 변환하여 스트리밍 하는 방법을 제공하는 데 있다.One object of the present invention is to provide a method for adaptively converting and streaming content according to a change in a streaming transmission environment in a multimedia streaming transmission service system.

또한, 본 발명의 다른 목적은, 스트리밍 전송 환경이 악화하는 경우에, 적응적으로 콘텐츠를 변환하여 실시간으로 끊임없이 스트리밍 서비스를 제공하는 데 있다.Another object of the present invention is to provide a streaming service continuously in real time by adaptively converting content when a streaming transmission environment deteriorates.

또한, 본 발명의 또 다른 목적은, 스트리밍 서비스 이용에 따른 비용을 줄이고 동시에 여러 사용자에게 콘텐츠를 제공할 수 있는 방법을 제공하는 데 있다.In addition, another object of the present invention is to provide a method for reducing the cost of using a streaming service and simultaneously providing content to multiple users.

상기의 목적을 달성하기 위하여, 본 발명에 따른 콘텐츠 전송 시스템은, 콘텐츠 스트리밍 전송 환경에 따라 콘텐츠 스트리밍 동작을 관리하는 스트리밍 서비스 제어 관리기; 입력 데이터를 받아들여 역 다중화 작업을 수행하는 역 다중화기 관리기; 네트워크 상태가 불량한 경우에, I Frame Only Play 모드 또는 Audio Only Play 모드로 변환하여, 콘텐츠를 적응적으로 변환하는 작업을 수행하는 콘텐츠 적응 관리기; 및 상기 콘텐츠 적응 관리기를 통해 적응된 데이터를 입력받아 재 다중화 작업을 수행하는 재 다중화기 관리기를 포함한다.In order to achieve the above object, a content delivery system according to the present invention, a streaming service control manager for managing a content streaming operation according to the content streaming transmission environment; A demultiplexer manager that accepts input data and performs demultiplexing operations; A content adaptation manager for converting the content to the I Frame Only Play mode or the Audio Only Play mode and adaptively converting the content when the network condition is poor; And a remultiplexer manager configured to receive the adapted data through the content adaptation manager and perform remultiplexing.

한편, 상기의 목적을 달성하기 위하여, 본 발명에 따른 콘텐츠 전송 방법은, 스트리밍 서비스 제어 관리기가, 스트리밍 서비스가 시작됨에 따라 Normal Play Mode인가를 확인하는 1 단계; 상기 확인 결과 Normal Play Mode이면, 입력되는 데이터를 곧바로 출력하여 클라이언트에게 전송하는 2 단계; 상기 확인 결과 Normal Play Mode가 아니면, 콘텐츠를 오디오 데이터와 비디오 데이터, PAT 정보 및 PMT 정보로 구분하기 위하여 역 다중화기 관리기를 호출하는 3 단계; 콘텐츠를 적응적으로 변환하기 위하여 콘텐츠 적응 관리기를 호출하는 4 단계; 및 상기 콘텐츠 적응 관리기에 의해 적응적으로 변환된 데이터를 재 다중화하기 위하여 재 다중화기 관리기를 호출하는 5 단계를 포함한다.On the other hand, in order to achieve the above object, the content transmission method according to the present invention, the streaming service control manager, the step of confirming whether the normal play mode as the streaming service starts; If the check result is a normal play mode, step 2 of directly outputting data to be transmitted to the client; Invoking a demultiplexer manager to classify content into audio data, video data, PAT information, and PMT information, if it is not the normal play mode; Invoking a content adaptation manager to adaptively convert content; And invoking a remultiplexer manager to remultiplex the data adaptively converted by the content adaptation manager.

상술한 본 발명에 의한 효과는 다음과 같다.The effects of the present invention described above are as follows.

첫째, 네트워크 상태 변화에 따라 콘텐츠를 스트리밍 하는 방법을 달리하여, 네트워크 상황에 적합한 스트리밍 전송을 지원할 수 있다.First, it is possible to support streaming transmission suitable for the network situation by varying the method of streaming content according to the change of network status.

둘째, 스트리밍 전송 상태가 I Frame Only 모드인 경우에 I Frame만 추출하여 재 다중화함으로써, 네트워크 환경이 변화하더라고 스트리밍 전송을 원활하게 유지시켜 준다.Second, when the streaming transmission status is I Frame Only mode, only I frame is extracted and re-multiplexed to maintain streaming transmission smoothly even if the network environment changes.

셋째, 스트리밍 전송 단계가 Audio Only Play 모드인 경우에, PCR 정보를 새로 계산하는 모듈을 사용하지 않고, 기존의 PCR 정보를 수정하여 사용함으로써 재 다중화에 소요되는 시간을 줄일 수 있다.Third, when the streaming transmission step is the Audio Only Play mode, the time required for remultiplexing can be reduced by modifying and using existing PCR information without using a module for newly calculating PCR information.

상술한 목적, 특징들 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 더욱 분명해 질 것이다. 이하 첨부된 도면을 참조하여 본 발명에 따른 다양한 실시예들을 상세히 설명한다. 또한, 본 발명의 요지를 흐리게 할 우려가 있다고 판단되는 공지기술에 대하여서는 그 상세한 설명을 생략하도록 한다.The above objects, features and advantages will become more apparent from the following detailed description taken in conjunction with the accompanying drawings. Hereinafter, various embodiments of the present disclosure will be described in detail with reference to the accompanying drawings. In addition, the detailed description thereof will be omitted for the known technology which is considered to blur the gist of the present invention.

도 1을 참조하여, 본 발명에 따른 콘텐츠 전송 시스템의 구성에 대하여 상세히 설명하면 다음과 같다. 더욱 구체적으로, 도 1은, 네트워크 환경 변화에 따른 적응형 콘텐츠 전송 시스템의 구성도를 도시한다.Referring to Figure 1, the configuration of the content delivery system according to the present invention will be described in detail. More specifically, FIG. 1 illustrates a configuration diagram of an adaptive content delivery system according to a change in network environment.

도 1에 도시된 바와 같이, 본 발명에 따른 콘텐츠 전송 시스템은, 콘텐츠 스트리밍 전송 환경에 따라 모든 콘텐츠 스트리밍 동작을 전체적으로 관리하기 위한 스트리밍 서비스 제어 관리기(100), 입력 데이터(예를 들어, MPEG TS(Transfort Stream) 데이터)를 받아들여 역 다중화 작업을 처리하는 역 다중화기 관리기(101), 네트워크 상태가 일정 수준 이하로 악화하는 경우에 I Frame Only Play 모드 또는 Audio Only Play 모드로 변화하여, 이에 따라 콘텐츠를 적응적으로 변환하는 작업을 수행하는 컨텐츠 적응 관리기(102) 및 콘텐츠 적응 관리기(102)를 통해 적응된 데이터를 입력받아 재 다중화 작업을 하는 재 다중화기 관리기(103)를 포함한다.As shown in FIG. 1, the content delivery system according to the present invention includes a streaming service control manager 100 for managing all content streaming operations according to a content streaming transmission environment, and input data (eg, MPEG TS ( The demultiplexer manager 101 which accepts the Transfort Stream data) and processes the demultiplexing operation, and changes to the I Frame Only Play mode or the Audio Only Play mode when the network condition deteriorates to a certain level or less. The content adaptation manager 102 performs an operation of adaptively converting the data, and the remultiplexer manager 103 receives the adapted data through the content adaptation manager 102 and performs the remultiplexing operation.

이하에서는, 상기 본 발명에 따른 콘텐츠 전송 시스템을 구성하는 각 구성요소들(100, 101, 102, 103) 각각의 수행 과정을 상세히 설명하도록 한다.Hereinafter, the process of performing each of the components 100, 101, 102, and 103 constituting the content delivery system according to the present invention will be described in detail.

도 2를 참조하여, 상기 스트리밍 제어 관리기(100)의 수행 과정을 상세히 설명하도록 한다.With reference to FIG. 2, the performance of the streaming control manager 100 will be described in detail.

본 발명에서, 상기 스트리밍 서비스 제어 관리기(100)는, 콘텐츠 전송 상태에 따라 콘텐츠 스트리밍 서비스를 제어하는 관리기로서, 네트워크 상태가 양호할 때는 입력되는 MPEG TS 데이터를 바로 출력하여 스트리밍 전송 서비스를 제공하고, 네트워크 상태가 불량할 때는 콘텐츠를 적응적으로 변환하여 출력하기 위한 모듈들을 호출하는 기능을 수행한다.In the present invention, the streaming service control manager 100 is a manager for controlling the content streaming service according to the content transmission state, when the network condition is good, and outputs the streaming MPEG TS data directly to provide a streaming transmission service, When the network condition is bad, the module calls the modules for adaptively converting and outputting content.

먼저, 상기 스트리밍 서비스 제어 관리기(100)는, 스트리밍 전송 상태가 Normal Play Mode 상태인지 확인한다(200).First, the streaming service control manager 100 checks whether the streaming transmission state is a normal play mode state (200).

상기 확인 결과 Normal Play Mode 상태이면, 상기 스트리밍 서비스 제어 관리기(100)는, 입력되는 데이터를 적응적으로 변환하지 않고 바로 출력한다(201, 202).If the check result is in the Normal Play Mode state, the streaming service control manager 100 directly outputs the input data without adaptively converting the data (201, 202).

한편, 상기 확인 결과 Normal Play Mode 상태가 아니라면, 상기 스트리밍 서비스 제어 관리기(100)는, 콘텐츠를 적응적으로 변환하기 위한 작업을 수행하기 위하여 다음의 단계들을 수행한다.On the other hand, if the check result is not in the Normal Play Mode state, the streaming service control manager 100 performs the following steps to perform a task for adaptively converting the content.

먼저, 상기 스트리밍 서비스 제어 관리기(100)는, PAT(Program Association Table) 정보, PMT(Program Map Table) 정보, 비디오 정보 및 오디오 정보를 파싱하기 위하여, 역 다중화기 관리기(101)를 호출하는 과정을 수행한다(203).First, the streaming service control manager 100 performs a process of calling the demultiplexer manager 101 to parse program association table (PAT) information, program map table (PMT) information, video information, and audio information. Perform (203).

다음으로, 상기 스트리밍 서비스 제어 관리기(100)는, 콘텐츠를 적응적으로 변환하는 작업을 수행하기 위하여, 콘텐츠 적응 관리기(102)를 호출한다(204).Next, the streaming service control manager 100 calls the content adaptation manager 102 to perform the task of adaptively converting the content (204).

마지막으로, 상기 스트리밍 서비스 제어 관리기(100)는, 콘텐츠 전송 상태에 따라 비디오 데이터와 오디오 데이터에 대한 재 다중화 작업을 하기 위하여, 재 다중화기 관리기(103)를 호출한다(205).Finally, the streaming service control manager 100 calls the remultiplexer manager 103 to perform remultiplexing on the video data and the audio data according to the content transmission state (205).

그리고, 상기 스트리밍 서비스 제어 관리기(100)는, 상기 201 단계에서 출력된 데이터 또는 상기 205 단계에서 출력되는 데이터를 스트리밍 전송한다(202).In operation 202, the streaming service control manager 100 streams the data output in step 201 or the data output in step 205.

도 3을 참조하여, 상기 역 다중화 관리기(101)의 수행 과정을 상세히 설명하도록 한다.Referring to FIG. 3, the process of performing the demultiplexing manager 101 will be described in detail.

본 발명에서, 상기 역 다중화 관리기(101)는, 입력되는 MPEG TS 데이터를 분석하여 PAT 정보와 PMT 정보를 각각 파싱하여 저장하고, 비디오 데이터와 오디오 데이터를 각각 역 다중화하여 TS 단위로 각각 리스트를 유지한 뒤, 소정 단위로 묶어서 출력하여 콘텐츠 적응 관리기(102)에게 전달한다. 상기 저장된 PAT 정보와 PMT 정보의 값은, 재 다중화기 관리기(103)에게 전달되어 사용된다. 여기에서, 상기 역 다중화기 관리기(101)는, 데이터 출력 단위를 하나의 액세스 단위인 1 AU(Access Unit)로 역 다중화하여, 콘텐츠 적응 관리기(102)에게 전송한다.In the present invention, the demultiplexing manager 101 analyzes the input MPEG TS data, parses and stores the PAT information and the PMT information, respectively, and demultiplexes the video data and the audio data, respectively, and maintains the list in TS units. After that, the data is bundled and output to the content adaptation manager 102 in a predetermined unit. The values of the stored PAT information and PMT information are transferred to and used by the remultiplexer manager 103. Here, the demultiplexer manager 101 demultiplexes the data output unit into one access unit (AU), which is one access unit, and transmits the demultiplexer manager 101 to the content adaptation manager 102.

먼저, 상기 역 다중화 관리기(101)는, TS 사이즈만큼 하나의 TS을 읽어오는 과정을 수행한 뒤, 읽어들인 TS을 파싱한다(300).First, the demultiplexing manager 101 performs a process of reading a single TS by a TS size and then parses the read TS (300).

그리고, 상기 역 다중화 관리기(101)는, PAT인지 확인하여 PAT이면 PAT 정보를 저장하고, PAT가 아니면 PMT인지 확인하여 PMT이면 PMT 정보를 저장한다(301). 그리고, 상기 역 다중화 관리기(101)는, 읽어들인 TS 패킷이 PAT 및 PMT가 아니라면, TS 패킷에 페이로드가 있는지 확인하여 페이로드는 없고 TS 패킷을 구성하는 어뎁테이션(adaptation) 필드만 있는 경우는 단계 300으로 리턴한다(302).The demultiplexing manager 101 checks whether the PAT is PAT and stores PAT information if it is PAT, and if it is not PAT, stores PMT information if it is PMT (301). If the read TS packet is not PAT and PMT, the demultiplexing manager 101 checks whether there is a payload in the TS packet, and there is no payload, but only an adaptation field constituting the TS packet. Return to step 300 (302).

다음으로, 상기 역 다중화 관리기(101)는, PES(Packetized Elementarty Stream) 헤더를 찾고, 오디오 스트림인지 또는 비디오 스트림인지를 체크한다(303).Next, the demultiplexing manager 101 finds a packetized elementarty stream (PES) header and checks whether it is an audio stream or a video stream (303).

상기 역 다중화 관리기(101)는, 오디오 스트림인지 확인하는 과정(304)을 수행하여, 오디오 스트림이면 오디오 관리 리스트에 1 AU 단위로 TS 패킷을 저장하는 과정(305)을 수행하고, 오디오 스트림이 아니면 비디오 관리 리스트에 1 AU 단위로 TS 패킷을 저장하는 과정(306)을 수행한다.The demultiplexing manager 101 performs a process 304 of checking whether the audio stream is an audio stream, and if the audio stream is an audio stream, stores the TS packet in a unit of 1 AU in the audio management list (305). A process 306 of storing TS packets in units of 1 AU in the video management list is performed.

상기 결과가 1 AU 단위가 될 때까지 상술한 과정(300~306)을 반복하고, 1 AU 단위의 패킷을 저장하면 1 AU 단위로 구성된 패킷을 출력한다(307).The above process (300 ~ 306) is repeated until the result is 1 AU unit, and if a packet of 1 AU unit is stored, a packet composed of 1 AU unit is output (307).

도 4를 참조하여, 상기 콘텐츠 적응 관리기(102)의 수행 과정을 상세히 설명하도록 한다.Referring to FIG. 4, the performance of the content adaptation manager 102 will be described in detail.

본 발명에서, 상기 콘텐츠 적응 관리기(102)는, 역 다중화 관리기 (101) 에서 역 다중화된 비디오 데이터와 오디오 데이터를 AU단위로 입력받아, 스트리밍 전송 상태가 I Frame Only 상태라면 비디오 데이터에 대해서 I Frame 만 추출하는 작업을 수행하여 추출된 I Frame 비디오와 오디오 데이터를 출력하고, 스트리밍 전송 상태가 Audio Only Play 상태라면 비디오 데이터와 오디오 데이터를 즉시 출력하여, 재 다중화기 관리기(103)에게 전달한다.In the present invention, the content adaptation manager 102 receives the demultiplexed video data and the audio data from the demultiplexing manager 101 in AU units, and if the streaming transmission state is I Frame Only state, the I frame for the video data. Only the extraction process is performed to output the extracted I Frame video and audio data, and if the streaming transmission state is Audio Only Play state, the video data and audio data are immediately output and transmitted to the remultiplexer manager 103.

먼저, 상기 콘텐츠 적응 관리기(102)는, 역 다중화기 관리기(101)로부터 파싱한 비디오 데이터 또는 오디오 데이터를 각각 1 AU 단위로 입력받는다(400).First, the content adaptation manager 102 receives 400 video or audio data parsed from the demultiplexer 101 in units of 1 AU, respectively (400).

다음으로, 상기 콘텐츠 적응 관리기(102)는, 상기 입력받은 데이터가 오디오 스트림인지 확인한다(401).Next, the content adaptation manager 102 checks whether the received data is an audio stream (401).

상기 확인 결과 오디오 스트림이면, 상기 콘텐츠 적응 관리기(102)는, 오디오 데이터를 즉시 출력한다(402). 또는 상기 확인 결과오디오 스트림이 아니면, 상기 콘텐츠 적응 관리기(102)는, I Frame을 찾아 I Frame인 경우만 I Frame 비디오 데이터를 반환한다(403).If the result of the check is an audio stream, the content adaptation manager 102 immediately outputs the audio data (402). Alternatively, if the result of the check is not an audio stream, the content adaptation manager 102 finds an I frame and returns I frame video data only when it is an I frame (403).

도 5를 참조하여, 상기 재 다중화기 관리기(103)의 수행 과정을 상세히 설명하도록 한다.Referring to FIG. 5, the performance of the remultiplexer manager 103 will be described in detail.

본 발명에서, 상기 재 다중화기 관리기(103)는, 비디오 데이터와 오디오 데이터가 입력되면, 스트리밍 전송 상태가 I Frame Only Play 인지 Audio Only Play 모드인지에 따라 각각 상이한 동작을 수행한다. 먼저, 상기 재 다중화기 관리기(103)는, I Frame Only Play 모드 또는 Audio Only Play 모드 상태인 경우에는, 입력된 데이터를 AU 단위로 리스트에 매달아 관리하게 된다. 다음으로, 상기 재 다중화기 관리기(103)는, 저장된 리스트에서 비디오 AU와 오디오 AU가 모두 2개 이상이 존재할 때까지 기다린다. 2개 이상이 존재하면 마지막 비디오와 오디오 AU 하나씩을 제외한 나머지를 역 다중화 대상에 포함시킨다. 그리고, 상기 재 다중화기 관리기(103)는, 스트리밍 전송 모드가 Audio Only Play 상태인 경우에는, 비디오 패킷은 버리고 오디오 패킷만을 선택하고, PCR(Program clock reference) 정보를 가진 TS는 PCR을 새로 생성하지 않고 기존의 PCR 을 가진 TS에서 헤더 정보만을 수정하여 재사용한다.In the present invention, when the video data and the audio data are input, the re-multiplexer manager 103 performs different operations depending on whether the streaming transmission state is I Frame Only Play or Audio Only Play mode. First, when the I multiplexer manager 103 is in the I Frame Only Play mode or the Audio Only Play mode, the re-multiplexer manager hangs and manages the input data in a list in AU units. Next, the remultiplexer manager 103 waits until there are at least two video AUs and two audio AUs in the stored list. If more than one is present, the demultiplexing target includes all but one of the last video and audio AUs. When the streaming transmission mode is in the Audio Only Play state, the re-multiplexer manager 103 discards the video packet and selects only the audio packet, and the TS having the program clock reference (PCR) information does not generate a new PCR. Instead, only header information is modified and reused in TS with existing PCR.

먼저, 상기 재 다중화기 관리기(103)는, 콘텐츠 적응 관리기(102)로부터 비디오 또는 오디오를 소정 단위(예를 들어, 1AU 단위)로 입력받는다(500).First, the remultiplexer manager 103 receives a video or audio from the content adaptation manager 102 in a predetermined unit (for example, 1AU unit) (500).

다음으로, 상기 재 다중화기 관리기(103)는, 상기 입력된 하나의 AU을 리스트에 저장시킨다(501). 그리고, 상기 재 다중화기 관리기(103)는, 스트리밍 전송 상태가 I Frame Only Play Mode 인지를 확인한다(502).Next, the remultiplexer manager 103 stores the input AU in a list (501). The remultiplexer manager 103 checks whether the streaming transmission state is I Frame Only Play Mode (502).

상기 확인 결과 I Frame Only Play 모드이면, 상기 재 다중화기 관리기(103)는, 재 다중화할 수 있는 AU가 존재하는지 확인한다(503). 상기 확인 결과 재 다중화할 수 있는 AU가 존재하는 경우에, 상기 재 다중화기 관리기(103)는, AU 리스트에서 비디오 TS 또는 오디오 TS을 추출하여, 스트리밍할 리스트에 추가하고(504). 상기 추출된 비디오 TS 또는 오디오 TS를 전송한다(505). 한편, 상기 결과 재 다중화할 수 있는 AU가 존재하지 않는 경우에, 상기 재 다중화기 관리기(103)는, 본 발명에 따른 과정을 종료한다.If the check result is the I Frame Only Play mode, the remultiplexer manager 103 checks whether there is an AU that can be remultiplexed (503). If there is an AU that can be re-multiplexed as a result of the confirmation, the re-multiplexer manager 103 extracts the video TS or audio TS from the AU list and adds it to the list to be streamed (504). The extracted video TS or audio TS is transmitted (505). On the other hand, if there is no AU that can be remultiplexed as a result, the remultiplexer manager 103 ends the process according to the present invention.

한편, 상기 확인 결과 I Frame Only Play 모드가 아니면, 상기 재 다중화기 관리기(103)는, AU 리스트에서 추출하는 과정을 수행한다(506). 그리고, 상기 재 다중화기 관리기(103)는, PCR 필드를 가진 TS 인가를 확인한다(507). 상기 확인 결과 PCR 필드를 가진 TS이면, 상기 재 다중화기 관리기(103)는, PCR 값을 가진 TS 헤더 정보를 수정하는 과정을 수행한다(508). 한편, 상기 확인 결과 PCR 필드를 가진 TS가 아니면, 상기 재 다중화기 관리기(103)는, 오디오 TS와 PCR TS를 스트리밍할 리스트에 추가하는 과정을 수행하고(509). 상술한 505 단계를 수행한다. 또한, 상기 재 다중화기 관리기(103)는, 상기 508 단계 이후에 상기 509 단계를 차례대로 수행한다.On the other hand, if the check result is not the I Frame Only Play mode, the re-multiplexer manager 103 performs a process of extracting from the AU list (506). The re-multiplexer manager 103 checks whether the TS having the PCR field is applied (507). If the check result is a TS having a PCR field, the remultiplexer manager 103 performs a process of modifying TS header information having a PCR value (508). On the other hand, if it is determined that the TS having the PCR field, the re-multiplexer manager 103 performs the process of adding the audio TS and the PCR TS to the list to be streamed (509). The above-described step 505 is performed. In addition, the re-multiplexer manager 103 performs the step 509 sequentially after the step 508.

이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로, 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.The present invention described above is capable of various substitutions, modifications, and changes without departing from the technical spirit of the present invention for those skilled in the art to which the present invention pertains. It is not limited by the drawings.

도 1은, 본 발명에 따른 콘텐츠 전송 시스템의 전체적인 구성을 설명하는 도면.BRIEF DESCRIPTION OF DRAWINGS Fig. 1 is a diagram for explaining the overall configuration of a content delivery system according to the present invention.

도 2는, 본 발명에 따른 스트리밍 서비스 제어 관리기의 수행 과정을 설명하는 도면.2 is a diagram illustrating a process of executing a streaming service control manager according to the present invention.

도 3은, 본 발명에 따른 역 다중화기 관리기의 수행 과정을 설명하는 도면.3 is a view for explaining a process of performing a demultiplexer manager according to the present invention.

도 4는, 본 발명에 따른 콘텐츠 적응 관리기의 수행 과정을 설명하는 도면.4 is a diagram illustrating a process of executing a content adaptation manager according to the present invention.

도 5는, 본 발명에 따른 재 다중화기 관리기의 수행 과정을 설명하는 도면.5 is a view for explaining the execution process of the re-multiplexer manager according to the present invention.

<도면의 주요부분에 대한 부호의 설명><Description of the symbols for the main parts of the drawings>

100 : 스트리밍 서비스 제어 관리기100: streaming service control manager

101 : 역 다중화기 관리기101: Demultiplexer Manager

102 : 콘텐츠 적응 관리기102: Content Adaptation Manager

103 : 재 다중화기 관리기103: Remultiplexer Manager

Claims (9)

콘텐츠 스트리밍 전송 환경에 따라 콘텐츠 스트리밍 동작을 관리하는 스트리밍 서비스 제어 관리기;A streaming service control manager managing content streaming operation according to a content streaming transmission environment; 입력 데이터를 받아들여 역 다중화 작업을 수행하는 역 다중화기 관리기;A demultiplexer manager that accepts input data and performs demultiplexing operations; 상기 역 다중화기 관리기에 의해 역 다중화된 비디오 데이터 및 오디오 데이터를 입력받아, I Frame Only Play 모드라면 상기 비디오 데이터에서 I Frame만 추출하여 I Frame 비디오 데이터와 오디오 데이터를 출력하고, Audio Only Play 모드라면 비디오 데이터와 오디오 데이터를 출력하는 콘텐츠 적응 관리기; 및Receives the demultiplexed video data and audio data by the demultiplexer manager and outputs I frame video data and audio data by extracting only I frame from the video data in I Frame Only Play mode, and in Audio Only Play mode. A content adaptation manager for outputting video data and audio data; And 상기 콘텐츠 적응 관리기를 통해 적응된 데이터를 입력받아 재 다중화 작업을 수행하는 재 다중화기 관리기를 포함하는 콘텐츠 전송 시스템.And a remultiplexer manager configured to receive the adapted data through the content adaptation manager and perform remultiplexing. 제 1 항에 있어서, 상기 스트리밍 서비스 제어 관리기는,The method of claim 1, wherein the streaming service control manager, 네트워크 상태가 양호한 경우에는 입력된 데이터를 바로 출력하여 스트리밍 전송 서비스를 제공하고, 네트워크 상태가 불량한 경우에는 상기 I Frame Only Play 모드 또는 Audio Only Play 모드로 변환하여 출력하기 위한 모듈을 포함하는 콘텐츠 전송 시스템.A content transmission system including a module for outputting the input data immediately when the network state is good and providing a streaming transmission service, and when the network state is poor, converting the output to the I Frame Only Play mode or the Audio Only Play mode. . 제 1 항에 있어서, 상기 역 다중화기 관리기는,The apparatus of claim 1, wherein the demultiplexer manager comprises: 입력된 데이터를 분석하여 PAT 정보 및 PMT 정보를 각각 파싱하여 저장하고, 비디오 데이터와 오디오 데이터를 액세스 단위인 1 AU(Access Unit) 단위로 상기 콘텐츠 적응 관리기로 출력하는 콘텐츠 전송 시스템.And analyzing the input data, parsing and storing PAT information and PMT information, respectively, and outputting video data and audio data to the content adaptation manager in units of one access unit (AU). 삭제delete 제 1 항에 있어서, 상기 재 다중화기 관리기는,The method of claim 1, wherein the re-multiplexer manager, 비디오 데이터 및 오디오 데이터가 입력되는 경우에, 스트리밍 전송 상태에 따라 I Frame Only Play 모드이면, 재 다중화할 수 있는 AU(Access Unit)가 존재하는지 확인하여 AU가 존재하는 경우에는 AU 리스트에서 비디오 데이터 또는 오디오 데이터를 추출하여 스트리밍할 리스트에 추가하여 추출된 비디오 데이터 또는 오디오 데이터를 재 다중화하여 전송하고, I Frame Only Play 모드가 아니면, AU 리스트에서 추출하여 PCR(Program clock reference) 필드를 가진 TS(Transfort Stream)인가를 확인하고, 상기 PCR 필드를 가진 TS이면 PCR 값을 가진 TS 헤더 정보를 수정하여 오디오 데이터와 PCR 값을 가진 TS를 스트리밍 할 리스트에 추가한 후 추출된 상기 PCR 값을 가진 TS 데이터 또는 오디오 데이터를 재 다중화하여 전송하는 콘텐츠 전송 시스템.When video data and audio data are input, in I Frame Only Play mode according to the streaming transmission state, check whether there is an access unit (AU) that can be re-multiplexed, and if there is an AU, the video data or Extract the audio data and add it to the list to be streamed to re-multiplex the extracted video data or audio data, and if not in I Frame Only Play mode, extract from the AU list and have a PCR (Program clock reference) field with TS Stream), and if the TS having the PCR field, modify the TS header information having the PCR value, add the TS having the audio data and the PCR value to the list to be streamed, and then extract the TS data having the PCR value or Content delivery system for remultiplexing and transmitting audio data. 삭제delete 역 다중화기 관리기가, TS(Transfort Stream) 패킷 크기만큼 하나의 TS 얻어서 TS 을 파싱하는 1 단계;A first step of the demultiplexer manager parsing the TS by obtaining one TS by the size of a transport stream (TS) packet; 상기 파싱된 결과로서 PAT 정보 및 PMT 정보를 각각 확인하여 저장하는 2 단계;Checking and storing PAT information and PMT information as a result of parsing; 상기 파싱된 결과가 PAT 정보 또는 PMT 정보가 아닌 경우, TS 패킷에 페이로드가 있는지 확인하여 페이로드는 없고 TS 패킷을 구성하는 어뎁테이션(adaptation) 필드만 있는 경우는 상기 1 단계로 리턴하는 3 단계;If the parsed result is not the PAT information or the PMT information, check whether the TS packet has a payload, and return to step 1 if there is no payload and only an adaptation field constituting the TS packet. ; PES 헤더를 찾아 오디오 스트림인지 비디오 스트림인지 확인하는 4 단계;Finding a PES header to determine whether it is an audio stream or a video stream; 상기 4 단계의 확인 결과, 오디오 스트림이면 오디오 관리 리스트에 1 AU(Access Unit) 단위로 TS 패킷을 저장하고, 상기 4 단계의 확인 결과가 오디오 스트리밍이 아니면 비디오 관리 리스트에 1 AU 단위로 패킷을 저장하는 5 단계; 및If the check result of step 4 is an audio stream, TS packets are stored in an audio management list in units of 1 AU (Access Unit). If the check result of step 4 is not audio streaming, the packets are stored in a video management list in units of 1 AU. 5 steps to do; And 상기 저장된 결과 1 AU 단위의 패킷이 저장되면, 하나의 AU 패킷을 출력하는 6 단계를 포함하는 콘텐츠 전송 방법.And outputting one AU packet when the packet stored in units of 1 AU is stored as the result. 컨텐츠 적응 관리기가, 역 다중화기 관리기에 의해 파싱된 비디오 데이터 또는 오디오 데이터를 입력받는 1 단계;A step of the content adaptation manager receiving video data or audio data parsed by the demultiplexer manager; 상기 입력받은 오디오 데이터가 오디오 스트림인지 확인하는 2 단계;Determining whether the received audio data is an audio stream; 상기 확인 결과 오디오 스트림이면 오디오 데이터를 출력하여 재 다중화기 관리기에 전달하고, 상기 확인 결과 오디오 스트림이 아니면 I Frame만 찾는 3 단계; 및Outputting audio data to the remultiplexer manager if the audio stream is the result of the confirmation, and finding only an I frame if the audio stream is not the result of the audio stream; And 상기 찾은 I Frame 경우만 상기 비디오 데이터에서 I Frame만 추출하여 I Frame 비디오 데이터를 출력하여 반환하는 4 단계를 포함하는 콘텐츠 전송 방법.And extracting only I frames from the video data and outputting and outputting I Frame video data only in the case of the found I Frame. 재 다중화기 관리기가, 콘텐츠 적응 관리기로부터 비디오 데이터 또는 오디오 데이터를 1 AU(Access Unit) 단위로 입력받는 1 단계;A step of the re-multiplexer manager receiving video data or audio data from the content adaptation manager in units of one access unit (AU); 상기 입력된 하나의 AU을 리스트에서 관리하는 2 단계;Managing two input AUs in a list; 스트리밍 전송 상태가 I Frame Only Play 모드인지 확인하는 3 단계;Checking whether the streaming transmission state is in the I Frame Only Play mode; 상기 3 단계의 확인 결과, I Frame Only Play 모드이면 재 다중화할 수 있는 AU가 존재하는지 확인하는 4 단계;A fourth step of confirming whether an AU capable of re-multiplexing exists in the I Frame Only Play mode as a result of the checking in step 3; 상기 4 단계의 확인 결과, 재 다중화할 수 있는 AU가 존재하는 경우에, AU 리스트에서 비디오 데이터 또는 오디오 데이터를 추출하여 스트리밍할 리스트에 추가하는 5 단계;A fifth step of extracting video data or audio data from the AU list and adding it to the list to be streamed if there is an AU that can be re-multiplexed as a result of the checking in step 4; 상기 추출된 비디오 데이터 또는 오디오 데이터를 재 다중화하여 전송하는 6 단계;Re-multiplexing and transmitting the extracted video data or audio data; 상기 3 단계의 확인 결과, I Frame Only Play 모드가 아니면, AU 리스트에서 추출하는 7 단계;A seventh step of extracting from the AU list, if not in the I Frame Only Play mode; PCR(Program clock reference) 필드를 가진 TS인가를 확인하는 8 단계;8 steps to confirm whether the TS has a PCR (Program clock reference) field; 상기 PCR 필드를 가진 TS이면, PCR 값을 가진 TS 헤더 정보를 수정하는 9 단계; 및A step 9 of modifying TS header information having a PCR value if the TS has the PCR field; And 오디오 데이터와 PCR 값을 가진 TS를 스트리밍 할 리스트에 추가하는 10 단계를 포함하는 콘텐츠 전송 방법.10. The method of claim 1, further comprising adding a TS having audio data and PCR values to a list to be streamed.
KR1020070107668A 2006-12-04 2007-10-25 Contents streaming system and contents streaming method KR100925507B1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020060121409 2006-12-04
KR20060121409 2006-12-04

Publications (2)

Publication Number Publication Date
KR20080051043A KR20080051043A (en) 2008-06-10
KR100925507B1 true KR100925507B1 (en) 2009-11-05

Family

ID=39806186

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070107668A KR100925507B1 (en) 2006-12-04 2007-10-25 Contents streaming system and contents streaming method

Country Status (1)

Country Link
KR (1) KR100925507B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101164858B1 (en) 2008-10-22 2012-07-11 한국전자통신연구원 Apparatus and method for conversion of digital broadcasting contents based on program protection information

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030035525A (en) * 2001-10-31 2003-05-09 삼성전자주식회사 System and method of network adaptive real- time multimedia streaming
US20050076136A1 (en) * 2002-09-17 2005-04-07 Samsung Electronics Co., Ltd. Apparatus and method for streaming multimedia data

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20030035525A (en) * 2001-10-31 2003-05-09 삼성전자주식회사 System and method of network adaptive real- time multimedia streaming
US20050076136A1 (en) * 2002-09-17 2005-04-07 Samsung Electronics Co., Ltd. Apparatus and method for streaming multimedia data

Also Published As

Publication number Publication date
KR20080051043A (en) 2008-06-10

Similar Documents

Publication Publication Date Title
US8218651B1 (en) System and method for splicing
US8555328B2 (en) Information provisioning apparatus and information provisioning method
KR100440687B1 (en) System for transceiving information of digital cable broadcast and method thereof
US7376155B2 (en) Method and apparatus for delivery of metadata synchronized to multimedia contents
US8510783B2 (en) Video on demand transmission/reception method and system using divided transport stream
US9032462B2 (en) Method for transmitting/receiving internet-based content and transmitter/receiver using same
KR101789633B1 (en) Apparatus and method for transmitting and receiving contents based on internet
EP3127287B1 (en) Signaling and operation of an mmtp de-capsulation buffer
US20160007056A1 (en) Method for transmitting/receiving internet-based content and transmitter/receiver using same
US20200177515A1 (en) Apparatus for transmitting broadcast signal, apparatus for receiving broadcast signal, method for transmitting broadcast signal and method for receiving broadcast signal
US7349395B2 (en) System, method, and computer program product for parsing packetized, multi-program transport stream
US20100262492A1 (en) Method and arrangement relating to a media structure
WO2017116419A1 (en) Method and apparatus for metadata insertion pipeline for streaming media
CN102625154A (en) Transport stream multiplexing method, program receiver, server and system
US20150373076A1 (en) Method for transmitting/receiving internet-based content and transmitter/receiver using same
US20050185676A1 (en) Multi access unit transport packetization method of MPEG4 sync layer packet and multi access unit transport packet
US20090245346A1 (en) Method and apparatus for generating and processing packet
EP3096525A1 (en) Communication apparatus, communication data generation method, and communication data processing method
KR100925507B1 (en) Contents streaming system and contents streaming method
KR20130084971A (en) Apparatus and method for transmitting and receiving contents based on internet
US20080240155A1 (en) System, method, and device for media stream transport re-encapsulation/tagging
CN110753234A (en) Real-time conversion method for converting national standard PS stream into RTMP live stream
JP2009290794A (en) Transport stream generating apparatus, transport stream generating method, content distribution server and control method of content distribution server
US20100205290A1 (en) Medium resource reservation method, service package information obtaining method and apparatus
US9172914B1 (en) Using EQAM video de-jitter memory for processing M-CMTS DEPI PSP priority queues

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120919

Year of fee payment: 18