KR20190101340A - Apparatus and method for receiving a multimedia data packet - Google Patents

Apparatus and method for receiving a multimedia data packet Download PDF

Info

Publication number
KR20190101340A
KR20190101340A KR1020190102211A KR20190102211A KR20190101340A KR 20190101340 A KR20190101340 A KR 20190101340A KR 1020190102211 A KR1020190102211 A KR 1020190102211A KR 20190102211 A KR20190102211 A KR 20190102211A KR 20190101340 A KR20190101340 A KR 20190101340A
Authority
KR
South Korea
Prior art keywords
information
layer
packet
data packet
media
Prior art date
Application number
KR1020190102211A
Other languages
Korean (ko)
Other versions
KR102060410B1 (en
Inventor
황승오
서덕영
박경모
이용헌
송재연
Original Assignee
삼성전자주식회사
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사, 경희대학교 산학협력단 filed Critical 삼성전자주식회사
Priority to KR1020190102211A priority Critical patent/KR102060410B1/en
Publication of KR20190101340A publication Critical patent/KR20190101340A/en
Application granted granted Critical
Publication of KR102060410B1 publication Critical patent/KR102060410B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866Management of end-user data
    • H04N21/25891Management of end-user data being end-user preferences
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L47/00Traffic control in data switching networks
    • H04L47/70Admission control; Resource allocation
    • H04L47/80Actions related to the user profile or the type of traffic
    • H04L47/805QOS or priority aware
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2362Generation or processing of Service Information [SI]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2383Channel coding or modulation of digital bit-stream, e.g. QPSK modulation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2385Channel allocation; Bandwidth allocation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2387Stream processing in response to a playback request from an end-user, e.g. for trick-play
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/239Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests
    • H04N21/2393Interfacing the upstream path of the transmission network, e.g. prioritizing client content requests involving handling client requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/24Systems for the transmission of television signals using pulse code modulation

Abstract

The present invention relates to a method of receiving multimedia data packets. The method includes the following steps of: receiving data packets; and decoding the data packets. The data packets include a header and media data. The header includes classifier information for per-class QoS and label information for per-flow QoS. The classifier information provides a QoS class related with priority over the transmission of the data packets. The label information indicates an identifier of a flow to which the data packets belong. The flow is a data stream with a reserved network resource. The classifier information and the label information are generated on a layer between an upper protocol layer for providing the media data and a lower protocol layer which is a network layer. The layer provides a function for delivering information related with the media data provided from the upper protocol layer to the lower protocol layer by abstracting the information.

Description

멀티미디어 데이터 패킷을 수신하는 방법 및 장치{APPARATUS AND METHOD FOR RECEIVING A MULTIMEDIA DATA PACKET}Method and apparatus for receiving multimedia data packet {APPARATUS AND METHOD FOR RECEIVING A MULTIMEDIA DATA PACKET}

본 발명은 멀티미디어 데이터 패킷을 수신하는 방법 및 장치에 관한 것으로서, 특히 QoS 방식에 따라 적응적으로 멀티미디어 데이터 패킷을 수신하는 방법 및 장치에 관한 것이다.The present invention relates to a method and apparatus for receiving a multimedia data packet, and more particularly, to a method and apparatus for adaptively receiving a multimedia data packet according to a QoS scheme.

멀티미디어 서비스란 화상전화와 같은 대화형 서비스, 주문형 비디오(Video On Demand: VOD) 서비스와 같은 스트리밍 서비스와, 멀티캐스트 및 브로드캐스트 서비스등의 서비스를 말한다. 실시간 멀티미디어 서비스는 서비스의 형태에 따라 대화형 서비스, 인터랙티브 서비스, 스트리밍 서비스로 나눌 수 있다. 또한, 실시간 멀티미디어 서비스는 참여하는 사용자의 수에 따라 유니캐스트, 멀티캐스트, 브로드캐스트로 나눌 수도 있다. Multimedia services refer to services such as interactive services such as video telephony, streaming services such as video on demand (VOD) services, and multicast and broadcast services. Real-time multimedia services can be divided into interactive services, interactive services, and streaming services, depending on the type of service. In addition, the real-time multimedia service may be divided into unicast, multicast, and broadcast according to the number of users participating.

멀티 미디어 서비스를 제공하기 위하여 네트워크에서 QoS(Quality of Service)를 제공하는 방식은 크게 BE(Best Effort) 방식, 클래스 별 QoS(per class QoS) 방식, 플로우 별 QoS(per flow QoS) 방식으로 나눌 수 있다.  In order to provide multimedia services, a method of providing a quality of service (QoS) in a network can be broadly classified into a BE (best effort) method, a per class QoS (QoS) method, and a per flow QoS (QoS) method. have.

BE 방식은 QoS를 위해 아무 지원을 하지 않는 것을 의미한다. The BE scheme means no support for QoS.

클래스 별 QoS 방식은 패킷마다 중요도를 달리하여 네트워크 중간에서 중요도에 따라 처리하는 방식이다. 즉, 클래스 별 QoS 방식은 해당 패킷이 어떤 플로우에 속하느냐와 상관 없이 해당 패킷의 중요도, 즉, 우선 순위에 따라 QoS 제어를 하는 방식이다. 클래스 별 QoS 방식을 지원하기 위해서는 송신측과 수신측 간의 자원 예약이 필요가 없다. 참고로, 상기 우선 순위에는 손실 우선 순위(loss priority), 지연 우선 순위(delay priority) 등이 있다.The QoS method by class is a method of processing according to importance in the middle of the network by varying the importance of each packet. That is, the QoS method for each class is a method of controlling QoS according to the importance of the packet, that is, the priority, regardless of which flow the packet belongs to. In order to support class-specific QoS schemes, resource reservation between a sender and a receiver is not necessary. For reference, the priority includes a loss priority, a delay priority, and the like.

*플로우 별 QoS 방식은 스트림(stream)별로 자원을 예약하는 방식이다. 즉, 플로우 별로 자원(예를 들어, 비트 레이트, 버퍼 상태) 또는 QoS(지연, 손실율 등)을 예약하는 방식이다. 여기서, 플로우란 하나의 서비스를 위해 필요한 스트림을 말한다. 예를 들어, 주문형 비디오 서비스를 제공하기 위해 필요한 비디오 스트림, 오디오 스트림, 및 텍스트 스트림이 각각 별개의 플로우가 된다.* Quality method by flow is a method of reserving resources for each stream. That is, a method of reserving a resource (eg, bit rate, buffer state) or QoS (delay, loss rate, etc.) for each flow. Here, the flow refers to a stream required for one service. For example, the video stream, audio stream, and text stream required to provide on-demand video services become separate flows.

IEEE 802.16 (WiBRO, WIMAX), LTE(Long Term Evolution)는 물론이고, 3GPP의 UMTS(3G)에서도 클래스 별 QoS 방식과 플로우 별 QoS 방식을 지원하는 것으로 표준화되어 있다. 그러나, 상기 QoS 방식을 사용하기 위해서는 상위 계층인 미디어 계층과 하위 계층인 네트워크간 인터페이스가 필요하다.In addition to IEEE 802.16 (WiBRO, WIMAX) and Long Term Evolution (LTE), the UMTS (3G) of 3GPP is standardized to support QoS by class and QoS by flow. However, in order to use the QoS scheme, an interface between a media layer, which is a higher layer, and a network, which is a lower layer, is required.

MPEG(Moving Picture Experts Group)-2와 H.264를 이용하거나 특히 스케일러블 비디오 부호화(Scalable Video Coding: SVC)를 이용할 때 비디오 패킷마다 패킷 별 중요도는 서로 다르다. 비디오 서비스의 QoS를 효과적으로 제어하기 위해서는 이러한 패킷 별 중요도의 차이가 식별될 수 있어야 한다. IPv6에서는 패킷 별 중요도를 식별하기 위하여 패킷 스위칭 방식에서는 IPv6 헤더에서 5 인자(5 turples: 수신자 주소, 송신자 주소, 수신자 내 해당 서비스의 포트번호, 송신기 내의 해당 서비스의 포트번호, 사용하는 프로토콜)를 읽은 이후 다시 비디오 패킷의 페이로드에서 패킷의 중요도를 식별하는 헤더 데이터를 읽어야 한다. 이러한 방식은 패킷마다 처리 시간이 많이 걸릴 뿐만 아니라 프로토콜 계층의 독립성을 위반하게 한다. The importance of each packet is different for each video packet when using Moving Picture Experts Group (MPEG) -2 and H.264 or in particular, scalable video coding (SVC). In order to effectively control the QoS of the video service, such a difference in importance of each packet must be identified. In IPv6, in order to identify the importance of each packet, the packet switching method reads 5 parameters (5 turples: recipient address, sender address, port number of corresponding service in receiver, port number of corresponding service in transmitter, and protocol used) in IPv6 header. Afterwards, the payload of the video packet must read header data that identifies the importance of the packet. This approach not only takes much processing time per packet, but also violates the protocol layer independence.

즉, 라우터에서는 패킷의 IP 헤더만 읽고 패킷의 처리가 가능하여야 하는데 그렇지 못하게 된다. In other words, the router should read only the IP header of the packet and process the packet.

그런데 패킷 별 중요도가 쉽게 식별될 수 있으면 라우터에서 QoS(Quality of Service) 제어가 원활하게 수행될 수 있다. 일 예로, 네트워크 상태가 나쁠 경우 상기 패킷 별 중요도에 따라 중요하지 않은 패킷부터 버릴 수 있다. However, if the importance of each packet can be easily identified, quality of service (QoS) control can be smoothly performed in the router. For example, if the network condition is bad, packets that are not important may be discarded according to the importance of each packet.

한편, 현재 표준화가 진행 중인 스케일러블 비디오 부호화(Scalable Video Coding: SVC) 기술이나 멀티-뷰 비디오 부호화(Multi-view Video Coding: MVC) 기술은 H.264/AVC(Advanced Video Coding) 표준에 기초하고 있다. 그리고 부호화된 데이터의 비트열의 구성에 있어서도 H.264/AVC의 네트워크 추상 계층 단위(Network Abstraction Layer Unit: NALU)의 포맷이 사용된다. Meanwhile, scalable video coding (SVC) technology or multi-view video coding (MVC) technology, which is currently being standardized, is based on the H.264 / Advanced Video Coding (AVC) standard. have. The format of the network abstraction layer unit (NALU) of H.264 / AVC is also used in the configuration of the bit string of the encoded data.

도 1은 H.264/AVC에 있어서의 비디오 코딩 계층(또는 동영상 부호화 처리층, Video Coding Layer: VCL)과 네트워크 추상 계층(NAL)을 설명하는 도면이다.1 is a view for explaining a video coding layer (or video coding layer (VCL)) and a network abstraction layer (NAL) in H.264 / AVC.

H.264/AVC 에서는 동영상 부호화 처리 자체를 다루는 비디오 코딩 계층(Video Coding Layer: VCL)(110)과 상기 부호화된 정보를 전송하고 저장하는 하위 시스템(130) 사이에 네트워크 추상 계층(Network Abstraction Layer: NAL)(120)이 정의되어 있어서, 비디오 코딩 계층(VCL)과 네트워크 추상 계층(NAL)이 분리되어 있다. In H.264 / AVC, a Network Abstraction Layer (VCL) 110 between a video coding layer (VCL) 110 that handles the video encoding process itself and a subsystem 130 that transmits and stores the encoded information. NAL) 120 is defined so that the video coding layer (VCL) and the network abstraction layer (NAL) are separated.

VCL에서 생성된 부호화 데이터(111)를 H.264/AVC 파일 포맷(131), RTP(Real-time Transport Protocol)(133), 또는 MPEG-2 시스템(135)과 같은 하위 시스템의 비트열로 매핑하기 위하여, NAL(120)에서는 상기 VCL에서 생성된 부호화 데이터(111), 및 파라미터 세트 또는 SEI(Supplemental Enhancement Information) 등(113)의 정보를 NAL 단위(NAL Unit: NALU)로 처리한다.Map encoded data 111 generated in the VCL to a bit string of a sub-system such as H.264 / AVC file format 131, Real-time Transport Protocol (RTP) 133, or MPEG-2 system 135 In order to do this, the NAL 120 processes the encoded data 111 generated in the VCL and information of a parameter set or Supplemental Enhancement Information (SEI) and the like 113 in a NAL unit (NALU).

상기 NAL 단위는 VCL NAL 단위(123)와 비(non) VCL NAL 단위(125)로 나뉜다. 상기 VCL NAL 단위(123)는 상기 VCL에서 생성된 부호화 데이터(111)에 해당하는 NAL 단위이며, 상기 비 VCL NAL 단위(125)는 파라미터 세트 또는 SEI 등(113)의 정보에 해당하는 NAL 단위이다. The NAL unit is divided into a VCL NAL unit 123 and a non VCL NAL unit 125. The VCL NAL unit 123 is a NAL unit corresponding to the encoded data 111 generated in the VCL, and the non-VCL NAL unit 125 is a NAL unit corresponding to information of a parameter set or SEI 113. .

상기 NAL 단위는 기본적으로 NAL 헤더와, VCL에서 동영상 압축의 결과로 생성된 데이터 부분인 RBSP(Raw Byte Sequence Payload)를 포함한다.The NAL unit basically includes a NAL header and a raw byte sequence payload (RBSP), which is a data portion generated as a result of video compression in the VCL.

도 2는 NAL 단위의 포맷을 설명하는 도면이다.2 is a diagram illustrating a format in NAL units.

도 2를 참조하면, NAL 단위(200)는 NAL 헤더(210)와 NAL 페이로드(240)를 포함한다.Referring to FIG. 2, the NAL unit 200 includes a NAL header 210 and a NAL payload 240.

NAL 헤더(210)는 일반적으로 1 내지 5 바이트의 크기를 갖는다. NAL 헤더(210)는 NAL 단위의 종류를 지시하기 위한 NALU 유형(Type) 정보(220)와 NALU 페이로드에 포함되는 압축된 원본 데이터의 계층을 식별하기 위한 계층 식별 정보(Layer Identification Information)(230)를 포함한다. NAL header 210 generally has a size of 1 to 5 bytes. The NAL header 210 includes NALU type information 220 for indicating the type of NAL unit and layer identification information 230 for identifying a layer of compressed original data included in the NALU payload. ).

상기 NALU 유형 정보(220)는 1 비트의 고정 비트(F) 필드(221), 참조 픽쳐인지 여부를 표시하는 플래그인 2 비트의 NRI(nal_ref_idc) 필드(222), NAL 단위의 종류를 표시하는 식별자인 5 비트의 NALU Type 필드(223)를 포함한다. The NALU type information 220 includes a 1-bit fixed bit (F) field 221, a 2-bit NRI (nal_ref_idc) field 222 which is a flag indicating whether or not it is a reference picture, and an identifier indicating the type of a NAL unit. 5 bits NALU Type field 223 is included.

상기 계층 식별 정보(230)는 예를 들어, 우선순위, 공간계층화 레벨, 시간계층화 레벨, 및/또는 품질계층화 레벨의 조합을 포함할 수 있다. 즉, 상기 계층 식별 정보(230)는 압축된 원본 데이터의 계층을 식별할 수 있도록 우선 순위를 나타내기 위한 8 비트의 Priority(프라이어리티) 필드(P)(231), 공간 계층화 레벨을 나타내기 위한 3 내지 8 비트의 Dependency_id(디펜던시 아이디) 필드(D)(232), 시간 계층화 레벨을 나타내기 위한 3 내지 8 비트의 Temporal_level(템포럴 레벨) 필드(T)(233), 및/또는 품질계층화 레벨을 나타내기 위한 2 내지 8 비트의 Quality_level(퀄리티 레벨) 필드(Q)(234)를 포함할 수 있다.The layer identification information 230 may include, for example, a combination of priority, spatial layering level, temporal layering level, and / or quality layering level. That is, the layer identification information 230 is an 8-bit Priority field (P) 231 for indicating priority to identify a layer of compressed original data, and for indicating a spatial layering level. 3-8 bits Dependency_id field (D) 232, 3-8 bits Temporal_level (Temporal Level) field (T) 233 to indicate temporal layering level, and / or quality It may include a Quality_level (Q) field 234 of 2 to 8 bits to indicate the layering level.

참고로 상기 NALU의 포맷은 MVC(Multi-view Video Coding)에서도 동일하게 이용된다. 다만, MVC에서는 NAL 헤더에 NALU 유형 정보(220)와 함께 상기 계층 식별 정보(230) 대신 뷰(View)를 식별하기 위한 뷰 식별 정보(View Identification Information)가 포함될 수 있다.For reference, the format of the NALU is equally used in MVC (Multi-view Video Coding). However, in MVC, view identification information for identifying a view instead of the layer identification information 230 may be included in the NAL header together with the NALU type information 220.

상술한 현재의 SVC 또는 MVC에 따른 NAL 단위 포맷에 의하면, NAL 단위의 계층이나 뷰를 식별하기 위해서는 NAL 헤더의 계층 식별 정보(230)나 뷰 식별 정보를 모두 파싱(parsing)하여야 한다. 특히, 계층 식별 정보(230)는 4 바이트 이하의 크기를 가지며, NAL 헤더(210)의 파싱을 통해 P(231), D(232), T(233), Q(234)의 값을 모두 알아야만, 해당 NAL 단위가 속한 계층을 판별할 수 있다. 하지만, NAL 헤더(210)의 P(231), D(232), T(233), Q(234)값을 알기 위하여 NAL 헤더(210)를 모두 파싱하는 것은 프로세서에 부담을 주며 시스템의 비용을 증가시키는 원인이 될 수 있다.According to the NAL unit format according to the current SVC or MVC described above, in order to identify a layer or a view of the NAL unit, both the layer identification information 230 and the view identification information of the NAL header must be parsed. In particular, the layer identification information 230 has a size of 4 bytes or less, and all the values of P (231), D (232), T (233), and Q (234) must be known through parsing of the NAL header 210. The layer to which the corresponding NAL unit belongs can be determined. However, parsing all of the NAL header 210 to know the values of P (231), D (232), T (233), and Q (234) of the NAL header 210 burdens the processor and increases the cost of the system. It can cause an increase.

또한, NAL 헤더(210)에는 NRI 필드(222) 및 Priority 필드(P)(231)를 비롯하여 상기 D(232), T(233), Q(234)와 같은 계층 식별 정보(230)와 같이 패킷의 중요도를 식별할 수 있는 다양한 정보들을 포함하는데, 이 정보들 간의 관계가 정의되어 있지 않으므로 이를 활용하는데 어려움이 있다. 예를 들어 계층 식별 정보 D(232), T(233), Q(234)에 관하여, D(232)의 값으로 ‘1’을 갖는 패킷과 T(233)의 값으로 ‘1’을 갖는 패킷이 존재할 때, 부호 과정의 예측 관계에 대한 이해(understanding)가 없을 경우, 상기 두 패킷의 우선순위 상의 우열을 구분할 수 없다. In addition, the NAL header 210 includes a NRI field 222 and a Priority field (P) 231 as well as packets such as layer identification information 230 such as the D 232, the T 233, and the Q 234. It contains a variety of information that can identify the importance of the, because there is no relationship between the information is difficult to use it. For example, with respect to the layer identification information D 232, T 233, and Q 234, a packet having '1' as the value of D 232 and a packet having '1' as the value of T 233. In this case, if there is no understanding of the predictive relationship of the coding process, the superiority and priority of the two packets cannot be distinguished.

또한, 현재의 네트워크 추상 계층(NAL)은 오직 비디오 서비스에 국한되어 설계되어 있다. 따라서, 오디오, 비디오, 텍스트, 사용자 인터페이스와 같이 다양한 미디어 구성요소가 결합되는 향후의 미디어 서비스를 위하여, 미디어 구성요소의 종류에 관계없이 추상화(abstraction)가 가능한 미디어 추상화 계층의 도입이 필요하다. In addition, the current network abstraction layer (NAL) is designed only for video services. Therefore, for future media services in which various media components such as audio, video, text, and user interface are combined, it is necessary to introduce a media abstraction layer capable of abstraction regardless of the type of media component.

본 발명은 멀티미디어 서비스 제공 시 적응적인 멀티미디어 서비스를 수신하기 위한 방법 및 장치를 제공한다.The present invention provides a method and apparatus for receiving an adaptive multimedia service when providing a multimedia service.

또한, 본 발명은 다양한 미디어 요소를 추상화 함으로써 응용계층의 정보를 하위 네트워크 계층에서 활용할 수 있도록 하는 미디어 추상 계층을 제공한다.In addition, the present invention provides a media abstraction layer that enables the lower network layer to utilize information of an application layer by abstracting various media elements.

또한, 본 발명의 바람직한 실시예에 따른 미디어 추상화 계층에서는 MPEG 레벨에서의 이해를 바탕으로 하위 계층을 위한 구체적인 중요도 정보를 제공한다. In addition, the media abstraction layer according to the preferred embodiment of the present invention provides specific importance information for the lower layer based on the understanding at the MPEG level.

또한, 본 발명의 바람직한 실시예에 따른 미디어 추상화 계층을 통해 생성된 정보를 IP 헤더에 포함시킴으로써 하위 계층에서의 간단한 처리만으로 필요한 정보에의 접근이 용이하게 한다.In addition, the information generated through the media abstraction layer according to the preferred embodiment of the present invention is included in the IP header, thereby facilitating access to necessary information by simple processing in a lower layer.

본 발명의 일 실시 예에 따른 멀티미디어 데이터 패킷을 수신하기 위한 방법은, 데이터 패킷을 수신하는 과정과, 상기 데이터 패킷을 디코딩하는 과정을 포함하며, 상기 데이터 패킷은 헤더 및 미디어 데이터를 포함하고, 상기 헤더는 클래스 별(per-class) QoS를 위한 구분자(classifier) 정보 및 플로우 별(per-flow) QoS를 위한 라벨(label) 정보를 포함하고, 상기 구분자 정보는 상기 데이터 패킷의 전송 우선순위에 관련된 QoS 클래스를 제공하며, 상기 라벨 정보는 상기 데이터 패킷이 속하는 플로우의 식별자를 지시하고, 상기 플로우는 네트워크 자원이 예약된 데이터 스트림이며, 상기 구분자 정보 및 상기 라벨 정보의 생성은 상기 미디어 데이터를 제공하는 상위 프로토콜 레이어 및 네트워크 레이어인 하위 프로토콜 레이어 사이의 레이어에서 수행되며, 상기 레이어는 상기 상위 프로토콜 레이어에서 제공된 상기 미디어 데이터에 관련된 정보를 추상화하여, 상기 하위 프로토콜 레이어로 전달하는 기능을 제공한다.A method for receiving a multimedia data packet according to an embodiment of the present invention may include receiving a data packet and decoding the data packet, wherein the data packet includes a header and media data. The header includes classifier information for per-class QoS and label information for per-flow QoS, the identifier information relating to the transmission priority of the data packet. Provide a QoS class, wherein the label information indicates an identifier of a flow to which the data packet belongs, the flow is a data stream to which network resources are reserved, and the generation of the identifier information and the label information provides the media data. Is performed in a layer between an upper protocol layer and a lower protocol layer that is a network layer. Followed by abstraction information associated with the media data supplied from the higher protocol layer, and provides a function of transmitting to the lower protocol layer.

본 발명의 일 실시 예에 따른 멀티미디어 데이터 패킷을 수신하는 장치는, 프로세서; 및 상기 프로세서의 제어에 따라 데이터 패킷을 수신하는 수신기를 포함하고, 상기 데이터 패킷은 헤더 및 미디어 데이터를 포함하고, 상기 헤더는 클래스 별(per-class) QoS를 위한 구분자(classifier) 정보 및 플로우 별(per-flow) QoS를 위한 라벨(label) 정보를 포함하고, 상기 구분자 정보는 상기 데이터 패킷의 전송 우선순위에 관련된 QoS 클래스를 제공하며, 상기 라벨 정보는 상기 데이터 패킷이 속하는 플로우를 식별하기 위해 사용되고, 상기 플로우는 네트워크 자원이 예약된 데이터 스트림이며, 상기 구분자 정보 및 상기 라벨 정보의 생성은 상기 미디어 데이터를 제공하는 상위 프로토콜 레이어 및 네트워크 레이어인 하위 프로토콜 레이어 사이의 레이어에서 수행되며, 상기 레이어는 상기 상위 프로토콜 레이어에서 제공된 상기 미디어 데이터에 관련된 정보를 추상화하여, 상기 하위 프로토콜 레이어로 전달하는 기능을 제공한다.An apparatus for receiving a multimedia data packet according to an embodiment of the present invention, a processor; And a receiver configured to receive a data packet under control of the processor, wherein the data packet includes a header and media data, and the header includes classifier information and per flow information for per-class QoS. (per-flow) includes label information for QoS, the identifier information providing a QoS class related to the transmission priority of the data packet, the label information to identify the flow to which the data packet belongs. The flow is a data stream for which network resources are reserved, and the generation of the identifier information and the label information is performed at a layer between an upper protocol layer that provides the media data and a lower protocol layer that is a network layer. Related to the media data provided by the higher protocol layer The information abstraction, there is provided a function of transmitting to the lower protocol layer.

본 발명의 바람직한 실시예에에 따른 대표적인 효과는 다음과 같다.Representative effects according to a preferred embodiment of the present invention are as follows.

본 발명의 바람직한 실시예에서는 모든 멀티 미디어 데이터에 적용 가능한 미디어 추상화 계층을 제공하여 미디어 데이터의 중요도 또는 우선 순위, 자원 예약 상태, 네트워크 상태나 또는 사용자의 요구 조건을 반영하여 멀티 미디어 서비스를 제공할 수 있다.In a preferred embodiment of the present invention, by providing a media abstraction layer applicable to all multimedia data, the multimedia service can be provided by reflecting the importance or priority of the media data, resource reservation status, network status, or user requirements. have.

본 발명의 바람직한 실시예에 따라 간소화된 헤더 구조는 IP 패킷을 수신한 장치가 플로우 라벨에 해당하는 필드들을 매번 파싱하지 않아도 되게 하므로, 수신 장치의 효율적 자원 활용이 가능하다.According to a preferred embodiment of the present invention, the simplified header structure does not require the device that receives the IP packet to parse fields corresponding to the flow label every time, thereby enabling efficient resource utilization of the receiving device.

도 1은 H.264/AVC에 있어서의 비디오 코딩 계층과 네트워크 추상 계층을 설명하는 도면,
도 2는 NAL 단위의 포맷을 설명하는 도면,
도 3은 본 발명의 바람직한 실시예에 따른 송신측의 구성을 설명하는 도면,
도 4는 본 발명의 바람직한 실시예에 따른 MAL 정보를 IP 패킷에 포함하는 방식을 설명하는 도면,
도 5는 본 발명의 바람직한 실시예에 따른 MAL 정보를 포함하는 IP 패킷 헤더의 구조를 설명하는 도면,
도 6은 본 발명의 바람직한 실시예에 따른 네트워크 엔터티 장치의 구성을 설명하는 도면,
도 7은 본 발명의 바람직한 실시예에 따른 수신측 장치를 설명하는 도면이다.
1 is a diagram for explaining a video coding layer and a network abstraction layer in H.264 / AVC;
2 is a diagram for explaining a format in NAL units;
3 is a diagram illustrating a configuration of a transmitting side according to a preferred embodiment of the present invention;
4 is a view for explaining a method of including MAL information in an IP packet according to an embodiment of the present invention;
5 is a view for explaining the structure of an IP packet header including MAL information according to a preferred embodiment of the present invention;
6 is a view for explaining the configuration of a network entity device according to an embodiment of the present invention;
7 is a diagram illustrating a receiving side apparatus according to a preferred embodiment of the present invention.

하기에서 본 발명을 설명함에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로써 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.In the following description of the present invention, detailed descriptions of well-known functions or configurations will be omitted if it is determined that the detailed description of the present invention may unnecessarily obscure the subject matter of the present invention. In addition, terms to be described below are terms defined in consideration of functions in the present invention, and may be changed according to the intention or custom of a user or an operator. Therefore, the definition should be made based on the contents throughout the specification.

상세한 설명에 앞서 본 발명의 기본 개념을 설명한다.Prior to detailed description, the basic concepts of the present invention will be described.

본 발명의 바람직한 실시예에서는 비디오 데이터를 위한 표준들인 MPEG-4/AVC(Advanced Video Coding, H.264), SVC(Scalable Video Coding), MVC(Multi-view Video Coding) 등에서 사용하고 있는 네트워크 추상화 계층(Network Abstraction Layer: NAL)의 개념을 보완하고 이를 비디오 데이터뿐 아니라 다른 미디어(오디오, 그래픽, 문자 등) 데이터에 서비스에 적용한다. In the preferred embodiment of the present invention, a network abstraction layer used in MPEG-4 / AVC (Advanced Video Coding (H.264), Scalable Video Coding (SVC), Multi-view Video Coding (MVC), etc.), which are standards for video data. It complements the concept of Network Abstraction Layer (NAL) and applies it to services not only video data but also other media (audio, graphics, text, etc.) data.

도 2에서 설명한 바와 같이 설명한 바와 같이 기존의 NAL 헤더(210)에는 비디오 패킷의 중요도를 표시하는 다양한 정보가 포함되어 있다. 또한, SVC에서 사용되는 NAL 헤더에는 시간적 계층, 공간적 계층, 품질 계층을 인식할 수 있는 계층 인식 정보(230)가 포함되어 있고, MVC에서 사용되는 NAL 헤더에는 뷰(view) 번호를 나타내는 정보가 포함되어 있다. As described with reference to FIG. 2, the existing NAL header 210 includes various information indicating the importance of a video packet. In addition, the NAL header used in the SVC includes layer recognition information 230 that can recognize a temporal layer, a spatial layer, and a quality layer, and the NAL header used in the MVC includes information indicating a view number. It is.

상기 NAL 헤더에 포함되는 정보들은 상위 프로토콜 계층에서 하위 프로토콜 계층으로 전달되는 하향(top-down) 인터페이스에서 추상화되어 생성되는 정보들로서 해당 패킷의 중요도를 나타낼 수 있어서, 상기 정보들에 따라 네트워크 상태 또는 단말의 상태에 따라 적응적으로 패킷 서비스가 제공될 수 있다.The information included in the NAL header is information generated by being abstracted from a top-down interface transferred from an upper protocol layer to a lower protocol layer and may indicate the importance of a corresponding packet. According to the state of the packet service can be adaptively provided.

본 발명은 상기 NAL의 개념을 모든 미디어에 확장하기 위하여 “미디어 구분자(classifier)”와 “라벨”이라는 식별자(identifier)를 정의한다. 본 발명에서 상기 “미디어 구분자”는 미디어가 갖는 우선순위 정보를 하위 프로토콜 계층에서 미디어에 대한 구체적인 이해 없이 활용 가능하도록 추상화된 우선순위 정보를 제공하는 기능을 담당한다. 상기 “라벨”은 각각의 스트림(예를 들어, 비디오 스트림 또는 오디오 스트림 등)을 구별하기 위한 식별자이다.The present invention defines the identifier "media classifier" and "label" in order to extend the concept of the NAL to all media. In the present invention, the "media separator" is responsible for providing abstracted priority information so that priority information of the media can be utilized without specific understanding of the media in the lower protocol layer. The "label" is an identifier for distinguishing each stream (for example, a video stream or an audio stream).

또한, 본 발명에서는 전송할 미디어 데이터에 관련된 정보를 추상화하는 하향(Top-down) 인터페이스인 미디어 추상화 계층(Media Abstraction Layer; MAL)을 제안한다. 이하의 설명에서 상기 MAL 에서 추상화된 데이터 관련 정보는 MAL 정보라고 칭해질 수 있다.In addition, the present invention proposes a Media Abstraction Layer (MAL), which is a top-down interface that abstracts information related to media data to be transmitted. In the following description, data related information abstracted from the MAL may be referred to as MAL information.

한편, 본 발명에서 송신 장치(서버 또는 단말)는 상기 MAL 정보를 생성하여 패킷의 헤더에 포함하여 송신하고, 네트워크 엔터티(라우터 또는 기지국 등)는 상기 MAL 정보를 이용하여 패킷의 중요도 또는 자원 예약 상태를 식별하고 그에 따라 패킷을 송신할 수 있다. Meanwhile, in the present invention, the transmitting apparatus (server or terminal) generates the MAL information and includes the packet in the header of the packet and transmits the packet. And transmit the packet accordingly.

도 3은 본 발명의 바람직한 실시예에 따른 송신측의 구성을 설명하는 도면이다. 3 is a diagram illustrating a configuration of a transmitting side according to a preferred embodiment of the present invention.

상기 송신측은 멀티미디어 서비스를 제공하는 서버가 될 수 있다.The transmitting side may be a server that provides a multimedia service.

송신 장치(300)는 미디어 데이터 공급부(301), 본 발명을 위한 특유의 구성인 미디어 추상화 계층부(302), 패킷 생성부(303)를 포함한다. The transmission device 300 includes a media data supply unit 301, a media abstraction layer unit 302, which is a unique configuration for the present invention, and a packet generator 303.

미디어 추상화 계층부(302)는 하나의 IP 패킷을 미디어 데이터 공급부(301)로부터 전달 받고(308), MAL 정보를 생성하여 패킷 생성부(303)로 전달한다(310). 그리고, 상기 미디어 추상화 계층부(302)는 상기 미디어 데이터 공급부(301)로부터 전달 받은 상기 IP 패킷을 상기 패킷 생성부(303)로 전달한다(309).The media abstraction layer unit 302 receives one IP packet from the media data supply unit 301 (308), generates MAL information, and delivers it to the packet generator 303 (310). The media abstraction layer unit 302 transmits the IP packet received from the media data supply unit 301 to the packet generator 303 (309).

이 때, 미디어 추상화 계층부(302)에서 생성되는 해당 미디어 데이터에 대한 MAL 정보는 미디어 구분자 정보 및 라벨 정보를 포함할 수 있다. 상술한 바와 같이, 상기 미디어 구분자 정보는 하위 네트워크에서 상기 미디어 패킷의 추상화된 중요도 정보를 인식하는 데 사용될 수 있고, 상기 라벨 정보는 하위 네트워크가 상기 패킷을 식별하는 데 사용될 수 있다. At this time, the MAL information on the media data generated by the media abstraction layer unit 302 may include media identifier information and label information. As described above, the media identifier information may be used to recognize abstracted importance information of the media packet in a lower network, and the label information may be used for the lower network to identify the packet.

패킷 생성부(303)는 미디어 추상화 계층부(302)부터 상기 수신한 MAL 정보(310)와 IP 패킷(309)를 이용하여 패킷을 생성하고, 상기 생성된 패킷을 네트워크(313)를 통하여 전송한다(311). 상기 MAL 정보 내 포함된 미디어 구분자 정보 및 라벨 정보는 IP 패킷의 헤더 또는 다른 하위 프로토콜의 패킷 헤더에 포함될 수 있다.The packet generator 303 generates a packet using the received MAL information 310 and the IP packet 309 from the media abstraction layer unit 302, and transmits the generated packet through the network 313. (311). Media identifier information and label information included in the MAL information may be included in a header of an IP packet or a packet header of another lower protocol.

상기 도 3의 구성에 따라 패킷을 송신하는 경우를 예를 들어 설명하면 다음과 같다. An example of transmitting a packet according to the configuration of FIG. 3 will be described below.

먼저, MAL에서 생성되는 미디어 구분자를 이용하는 클래스 별 QoS 방식을 설명한다. First, the QoS method for each class using the media identifier generated in the MAL will be described.

오디오 데이터 스트림의 미디어 구분자가 1, 문자 데이터 스트림의 미디어 구분자가 2, 비디오 데이터 스트림의 미디어 구분자가 3으로, 서버와 단말간에 미리 약속(또는 설정)되었다고 가정한다. 또한, 상기 미디어 구분자가 설정된 스트림에 대한 우선 순위도 송신측, 네트워크 엔터티, 수신측 사이에서 약속되었다고 가정한다. Assume that the media identifier of the audio data stream is 1, the media identifier of the character data stream is 2, and the media identifier of the video data stream is 3, and the server and the terminal are previously promised (or set). It is also assumed that the priority for the stream in which the media separator is set is also promised between the transmitting side, the network entity, and the receiving side.

이 경우, 송신측에서 비디오 데이터 패킷을 송신하고자 하면 해당 패킷에 미디어 구분자 정보를 3으로 설정하여 패킷을 생성하여 송신한다. 네트워크 엔터티(예를 들어, 라우터)는 상기 수신한 패킷의 미디어 구분자 정보(즉, 3)를 통하여 상기 수신한 패킷의 QoS 클래스를 인식할 수 있다. 이후, 상기 네트워크 엔터티는 네트워크 상태와 QoS 클래스의 포워딩 정책을 고려하여 패킷의 포워딩 여부를 결정할 수 있다. In this case, when the transmitting side wants to transmit a video data packet, the packet is generated and transmitted by setting media identifier information to 3 in the packet. The network entity (eg, a router) may recognize the QoS class of the received packet through the media identifier information (ie, 3) of the received packet. Thereafter, the network entity may determine whether to forward the packet in consideration of the network state and the forwarding policy of the QoS class.

다음으로 상기 MAL에서 생성되는 라벨 정보를 이용하는 플로우 별(즉, 스트림 별) QoS 방식을 설명한다. Next, a flow-based (ie, stream-specific) QoS scheme using label information generated in the MAL will be described.

오디오 데이터 스트림의 라벨이 1, 문자 데이터 스트림의 라벨이 2, 비디오 데이터 스트림의 라벨이 3으로, 서버와 단말간에 미리 약속(또는, 설정)되었다고 가정한다. Assume that the label of the audio data stream is 1, the label of the text data stream is 2, and the label of the video data stream is 3, and the appointment is set in advance (or set) between the server and the terminal.

이 경우, 송신측에서 비디오 데이터 패킷을 송신하고자 하면, 해당 패킷에 라벨 정보를 3으로 설정하여 패킷을 생성하여 송신한다. 그러면 네트워크 엔터티(예를 들어, 라우터)는 상기 수신한 패킷의 라벨 정보(즉, 3)를 통하여 상기 수신한 패킷의 중요도, 우선 순위 또는 자원 예약 정보 등을 인식할 수 있다. 이후, 상기 네트워크 엔터티는 네트워크 상태와 상기 수신한 패킷의 중요도, 우선 순위 또는 자원 예약 정보를 고려하여 패킷을 송신할 수 있다. In this case, when the transmitting side wants to transmit the video data packet, the packet is set and the label information is set to 3 to generate and transmit the packet. Then, the network entity (for example, the router) may recognize the importance, priority, or resource reservation information of the received packet through the label information (ie, 3) of the received packet. Thereafter, the network entity may transmit the packet in consideration of network status and importance, priority, or resource reservation information of the received packet.

상기 데이터 스트림 별 라벨과 상기 라벨에 따른 중요도, 우선 순위 또는 자원 예약 정보 등은 송신측과 수신측, 그리고 네트워크 엔터티 간의 호 설정 과정에서 설정될 수 있을 것이다. The label for each data stream and the importance, priority, or resource reservation information according to the label may be set in a call setup process between a transmitter, a receiver, and a network entity.

이하에서는 본 발명에서 제안하는 미디어 추상화 계층 정보인 MAL 정보에 대하여 설명한다.Hereinafter, MAL information which is media abstraction layer information proposed by the present invention will be described.

MAL 정보는 하위 계층의 네트워크 엔터티가 해당 미디어의 추상화된 QoS 클래스를 구분할 수 있도록 하기 위한 미디어 구분자 정보와, 데이터 패킷의 손실 중요도 및 지연 중요도, 우선 순위, 또는 자원 예약 정보를 인식할 수 있도록 하기 위한 정보를 라벨(즉, 꼬리표)의 형식으로 패킷에 포함된다. 한편, 본 발명에서 제안하는 MAL 정보 포맷이 기존의 다른 프로토콜 표준, 예를 들어, IP 헤더, TCP(Transmission Control Protocol) 및 UDP(User Datagram Protocol) 헤더, RTP 헤더 프로토콜과 함께 사용할 수 있다. The MAL information is used to allow the lower-level network entities to recognize the abstracted QoS class of the media and to recognize the loss and delay importance, priority, or resource reservation information of the data packet. The information is included in the packet in the form of a label (ie tag). Meanwhile, the MAL information format proposed by the present invention may be used together with other existing protocol standards, for example, an IP header, a transmission control protocol (TCP) and a user datagram protocol (UDP) header, and an RTP header protocol.

상기 MAL 정보를 이용하여 미디어 서비스를 제공하기 위해서는 송수신측 네트워크 간 호 설정 과정이 필요하다. 즉, 상기 호 설정 과정을 통하여 각 네트워크 엔터티들은 라벨 값이 의미하는 바를 상호 약속하게 된다. In order to provide a media service using the MAL information, a call setup process between the transmitting and receiving network is required. That is, through the call establishment process, each network entity mutually promises what the label value means.

각 라벨 값이 의미하는 값을 정리한 테이블을 라벨 테이블(Label Table, LT)라고 한다. 방송 망과 같이 송수신측 네트워크 간의 호설정 과정이 불가능한 경우, MPEG-2 시스템의 PMT(Program Map Tables)와 같이 주기적인 시간 간격으로 LT를 전송하는 방법을 사용할 수 있다.The table that summarizes the values of each label value is called a label table (LT). If a call setup process between a transmitting and receiving network such as a broadcasting network is impossible, a method of transmitting LT at periodic time intervals such as Program Map Tables (PMT) of the MPEG-2 system may be used.

한편, 본 발명의 바람직한 실시예에서 MAL 정보는 클래스 별 QoS 방식을 위한 미디어 구분자 포맷과 스트림 별 QoS 방식을 위한 라벨 포맷으로 구분된다.Meanwhile, in a preferred embodiment of the present invention, the MAL information is divided into a media separator format for class QoS scheme and a label format for stream QoS scheme.

클래스 별 QoS 방식의 경우, 송신측과 수신측 간의 서비스 제공을 위한 자원 예약 과정 없이, 손실율 및 전송 지연에 대한 요구사항을 기반으로 해당 미디어를 추상화하고 이를 구분자의 형식으로 포함한다. In case of the QoS method for each class, the media is abstracted based on the requirements for the loss rate and the transmission delay and included in the form of a delimiter without a resource reservation process for providing a service between a transmitter and a receiver.

예를 들어, 하나의 미디어 서비스가 하나의 비디오 스트림과 오디오 스트림 그리고 자막 지원을 위한 텍스트 스트림으로 구성되는 경우, MAL에서는 각 스트림의 전송 지연 및 손실 요구사항에 따라 QoS 클래스를 추상화 하여 이를 구분하기 위한 형식으로 미디어 구분자 값을 결정한다. 선택적으로, 비디오 스트림보다 오디오 스트림의 중요도가 더 높을 수 있다. 후술되는 도 4에서 설명되는 것과 같이 이 때의 미디어 구분자 값은 IPv4 헤더의 TOS(Type Of Service) 필드 또는 IPv6 헤더의 TC(Traffic Class) 필드에 삽입될 수 있다. 일 예로, 상기 미디어 구분자 값의 크기를 2 비트로 설정하였다면 11, 10, 01, 00의 순서대로 패킷 별 중요도를 차별화한다. 즉, 오디오 패킷에는 11, 텍스트 패킷에는 10, 비디오 패킷에는 01의 미디어 구분자 값을 삽입할 수 있다. For example, if one media service consists of one video stream, audio stream, and text stream for subtitle support, the MAL abstracts the QoS class according to the transmission delay and loss requirements of each stream. Format determines the media separator value. Optionally, the audio stream may be of higher importance than the video stream. As described later in FIG. 4, the media identifier value at this time may be inserted into a TOS (Type Of Service) field of the IPv4 header or a TC (Traffic Class) field of the IPv6 header. For example, if the size of the media identifier value is set to 2 bits, the importance of each packet is differentiated in the order of 11, 10, 01, 00. That is, a media identifier value of 11 can be inserted in an audio packet, 10 in a text packet, and 01 in a video packet.

다음으로 단일 스트림을 구성하는 다수의 서브 스트림에 대하여 서로 다른 미디어 구분자를 적용하는 예는 다음과 같다. Next, an example of applying different media separators to a plurality of sub streams constituting a single stream is as follows.

SVC와 같이 비디오 스트림을 서로 다른 우선순위의 계층으로 구분할 수 있는 경우, 3개의 계층(기본 계층, 고급 1계층, 고급 2계층)에 대하여 기본 계층은 중요도가 높고, 다른 계층보다 우선 도착이 보장되어야 하므로 전송 지연과 패킷 손실이 작은 QoS 클래스를 할당한다. 고급 1계층과 고급 2계층은 각각 기본 계층 보다 낮은 등급의 QoS 클래스를 할당 한다. 상술된 예제와 같이 미디어 구분자의 크기를 2bit로 설정하였다면 기본 계층은 11, 고급 1계층은 10, 고급 2계층은 01로 QoS 클래스를 차별화 한다.If video streams can be divided into layers of different priorities, such as SVCs, then the base layer must be of high importance for the three layers (base layer, advanced 1 layer, and advanced 2 layer), and priority arrival must be guaranteed over other layers. Therefore, the QoS class is assigned with low transmission delay and packet loss. The high layer 1 and the high layer 2 each allocate a lower class of QoS than the base layer. As shown in the above example, if the size of the media identifier is set to 2 bits, the QoS class is differentiated into 11 for the base layer, 10 for the high layer 1, and 01 for the high layer 2.

플로우 별 QoS 방식의 경우, 스트림 별로 자원 예약이 이루어지며 이를 위하여 해당 플로우에 라벨 정보를 포함한다. 일 예로, 라벨 값이 1로 설정된 플로우에 대해서는 300kbps의 자원이 예약되었다고 가정할 때, 송신측에서 생성되어 패킷에 포함된 라벨 값이 1이고, 네트워크 엔터티에서 상기 패킷에 포함된 라벨 값을 확인한 경우, 호 설정 과정에서 전달 받은 LT와 상기 패킷의 라벨 값을 이용하여 라벨 값 1에 해당하는 300kbps의 자원을 사용하여 해당 플로우를 송신하게 된다. 선택적으로, 이 경우 현재 가용한 자원도 함께 고려될 수 있다. In the case of the flow-based QoS scheme, resource reservation is made for each stream and for this purpose, label information is included in the corresponding flow. For example, assuming that a resource of 300 kbps is reserved for a flow having a label value of 1, a label value generated in a sender and included in a packet is 1, and the network entity checks a label value included in the packet. In this case, the flow is transmitted using a resource of 300kbps corresponding to the label value 1 using the LT received in the call setup process and the label value of the packet. Optionally, in this case, the resources currently available may also be considered.

선택적으로, 상기 자원 예약은 세션 별로도 이루어 질 수 있다. 즉, 송수신 네트워크 간의 호 설정 시에 라벨 스위칭을 지원하기 위하여 자원 예약이 이루어진 단위가 스트림 단위 인지 또는 세션 단위 인지에 따라서, 스트림 단위 또는 세션 단위로 라벨 정보가 구성될 수도 있다.Optionally, the resource reservation may also be made for each session. That is, label information may be configured in stream units or session units according to whether a resource reservation is made in a stream unit or a session unit to support label switching when establishing a call between a transmission and reception network.

또한, 상기 자원 예약 과정 및 라벨 정보 설정은 송신측과 수신측 간의 호 설정 과정에서 미리 약속될 수 있다. 참고로 네트워크 엔터티에서 멀티 프로토콜 라벨 스위칭 (Multi Protocol Label Switching: MPLS)을 지원할 때, 본 발명의 라벨 포맷을 상기 MPLS에서 지원하는 라벨 포맷과의 호환성을 갖도록 구성할 수도 있다. 이 경우 수신측이 MPLS 방식의 라벨과 호환성을 가지는 본 발명의 라벨을 인식할 수 있다면 SVC에서 정의된 기존의 NAL 헤더는 전송하지 않아도 무방하다. 또한 기존의 RTP 헤더, UDP 헤더의 내용 중에 하나의 세션 동안 변하지 않는 정보는 라벨에 포함시킬 수 있다. 상기 라벨 스위칭이란 3rd 계층 패킷을 2nd 계층에서 라우팅하는 기술로서, 데이터 패킷에 IP 주소 대신 별도의 라벨을 부가하여 상기 부가된 라벨을 이용하여 스위칭을 구현함으로써 고속 스위칭이 가능하도록 한 방식이다.In addition, the resource reservation process and label information setting may be promised in advance in a call setup process between a transmitter and a receiver. For reference, when the network entity supports Multi Protocol Label Switching (MPLS), the label format of the present invention may be configured to be compatible with the label format supported by the MPLS. In this case, if the receiver can recognize the label of the present invention that is compatible with the label of the MPLS scheme, the existing NAL header defined in the SVC may not be transmitted. In addition, the information that does not change during one session among the contents of the existing RTP header and UDP header can be included in the label. The label switching is a technique for routing 3rd layer packets in a 2nd layer. In this case, a label is added to a data packet instead of an IP address to implement switching using the added label to enable high-speed switching.

이하에서는 상기 MAL 정보를 송신하는 방식에 대하여 설명한다.Hereinafter, a method of transmitting the MAL information will be described.

도 4는 본 발명의 바람직한 실시예에 따른 MAL 정보를 IP 패킷에 포함하는 방식을 설명하는 도면이다.4 is a diagram illustrating a method of including MAL information in an IP packet according to an embodiment of the present invention.

본 발명의 바람직한 실시예에서 정의한 MAL 정보 포맷에서는 MAL 패킷을 위한 가상 헤더가 정의된다. 상기 가상 헤더에 포함된 내용은 하위 계층의 패킷 헤더(일 예로 IP 패킷 헤더)에 포함되기 위한 것이며, 상기 가상 헤더(420)는 내부적으로 미디어 구분자 헤더(421)와 라벨 헤더(422)로 구분된다. In the MAL information format defined in the preferred embodiment of the present invention, virtual headers for MAL packets are defined. Content included in the virtual header is to be included in a packet header (for example, an IP packet header) of a lower layer, and the virtual header 420 is internally divided into a media identifier header 421 and a label header 422. .

상기 미디어 구분자 헤더(421)는 하위 계층이 클래스 별 QoS 방식을 사용할 때 적용될 수 있으며, 그 길이는 시스템 설정에 따라 달라질 수 있다. 하위 계층의 클래스 별 QoS 프로토콜과의 호환을 고려하면, 3 내지 6 비트(bit) 정도가 바람직하다. 미디어 구분자 헤더(421)는 IPv4 헤더(410)의 TOS 필드(411)에 삽입되거나, IPv6 헤더(430)의 TC 필드(431)에 삽입될 수 있다. The media identifier header 421 may be applied when a lower layer uses a QoS scheme for each class, and its length may vary according to system configuration. In consideration of compatibility with the QoS protocol of each lower layer, about 3 to 6 bits are preferable. The media identifier header 421 may be inserted into the TOS field 411 of the IPv4 header 410 or inserted into the TC field 431 of the IPv6 header 430.

라벨 헤더(422)는 하위 계층이 플로우 별 QoS 방식을 사용할 때 적용될 수 있다. 총 8 비트 크기의 라벨 헤더(422) 는 라벨의 번호를 포함하는 7 비트와 필요시 확장을 위한 확장 플래그 비트 1 비트로 구성된다. 상기 라벨 헤더(422)는 IPv4 헤더(410)의 확장 헤더(extended IP header)(413)에 삽입되거나, IPv6 헤더(430)의 플로우 라벨(flow label) 필드(433)에 삽입될 수 있다.The label header 422 may be applied when the lower layer uses a flow-based QoS scheme. A total of 8 bit sized label header 422 is composed of 7 bits including the number of the label and 1 bit of the extension flag bit for extension if necessary. The label header 422 may be inserted into an extended IP header 413 of the IPv4 header 410 or inserted into a flow label field 433 of the IPv6 header 430.

도 5는 본 발명의 바람직한 실시예에 따른 MAL 정보를 포함하는 IP 패킷 헤더의 구조를 설명하는 도면이다.5 is a diagram illustrating a structure of an IP packet header including MAL information according to a preferred embodiment of the present invention.

도 5에서 설명되는 예는 실시간 미디어 스트림에 적용하기 위하여 복수의 패킷 들 중 UDP 헤더와 RTP 헤더에서 동일하게 반복되는 부분을 제거하고 이러한 정보를 LT에 포함시킴으로써 헤더를 간략화하는 방식을 나타낸다. 참조 번호 510, 530, 540은 IPv4 패킷이며, 참조 번호 550은 IPv6 패킷인데, 각각의 패킷에서 UDP 헤더 및 RTP 헤더를 간략화하여 라벨 정보를 생성하는 예를 나타낸다.The example illustrated in FIG. 5 illustrates a method of simplifying a header by removing an identically repeated portion of a UDP header and an RTP header among a plurality of packets to be applied to a real time media stream, and including this information in the LT. Reference numerals 510, 530, and 540 denote IPv4 packets, and reference numeral 550 denotes IPv6 packets, and an example of generating label information by simplifying a UDP header and an RTP header in each packet.

참조번호 510은 주문형 비디오 서비스와 같은 실시간 미디어 데이터의 전송을 위한 미디어 패킷을 나타낸다. 참조 번호 560은 UDP 헤더를 나타내고, 참조 번호 570은 RTP 헤더를 나타낸다.Reference numeral 510 denotes a media packet for the transmission of real-time media data, such as an on-demand video service. Reference numeral 560 denotes a UDP header and reference numeral 570 denotes an RTP header.

실시간 미디어 서비스의 경우 하나의 세션 당 통상적으로 매 초마다 수십 또는 수백의 패킷들이 전송되는데, 실시간 미디어 스트림의 특성상 송신되는 미디어 패킷의 헤더들에는 하나의 세션 동안 전송되는 패킷마다 동일하게 반복되는 필드들이 포함된다. 참조 번호 511, 512, 514, 515, 518, 519, 520 필드들은 매 패킷마다 동일하게 반복되는 필드들이고, 참조 번호 513, 516(또는 533, 542, 552), 517의 필드들은 매 패킷마다 달라지는 필드인데(물론, 경우에 따라서는 동일하거나 다른 필드와 중복될 수도 있다), 이 필드들에 대한 자세한 설명은 본 발명의 본질을 흐릴 수 있으므로 생략한다. In the case of real-time media services, tens or hundreds of packets are typically transmitted every second per session. Due to the characteristics of a real-time media stream, headers of media packets transmitted have identically repeated fields for each packet transmitted during a session. Included. Fields 511, 512, 514, 515, 518, 519, and 520 are the same fields repeated every packet, and fields 513, 516 (or 533, 542, 552) and 517 are different for each packet. (Of course, in some cases, may be the same or overlap with other fields), a detailed description of these fields will be omitted since it may obscure the nature of the present invention.

주목될 필드는 참조 번호 520의 NALH 필드로서 이는 NAL 헤더(header)를 나타내며, 도 2에서 설명된 바와 같이 NAL 헤더에는 패킷의 중요도, 또는 우선 순위를 표시하는 정보가 포함된다. The field to be noted is the NALH field at 520, which represents a NAL header, and as described in FIG. 2, the NAL header includes information indicating the importance or priority of the packet.

*참조 번호 530의 패킷에서는, 참조 번호 520 패킷의 UDP 헤더(560) 및 RTP 헤더(570)에서 동일하게 반복되는 필드들(511, 512, 514, 515, 518, 519, 520)이 모아져 하나의 라벨 정보(플로우 라벨 필드)(531)로 삽입되고, 패킷마다 달라질 수 있는 필드들(513, 516, 517)은 상기 플로우 라벨 필드(531(라벨 필드 541과 비슷)) 뒤에 배열된다.In the packet of reference number 530, fields 511, 512, 514, 515, 518, 519, and 520 that are identically repeated in the UDP header 560 and the RTP header 570 of the reference number 520 packet are collected and Inserted into the label information (flow label field) 531, the fields 513, 516, 517, which can vary from packet to packet, are arranged after the flow label field 531 (similar to label field 541).

참조 번호 530의 패킷에서 Length 필드(532)는 IP 헤더 내에 포함된 Length 필드(미도시)와 중복된다. 따라서 상기 Length 필드(532)는 생략이 가능하다. 또한, TS 필드(534)는 Time Stamp(타임 스탬프)로서, 미디어 데이터(535: 미디어 데이터 521, 535, 543 및 553도 비슷)의 생성이 주기적이라면 Time Stamp 정보는 수신측에서의 계산에 의하여 알 수 있고 따라서 생략이 가능하다. In the packet 530, the Length field 532 overlaps with a Length field (not shown) included in the IP header. Therefore, the Length field 532 can be omitted. In addition, the TS field 534 is a time stamp. If the generation of the media data 535 (also similar to the media data 521, 535, 543, and 553) is periodic, the time stamp information can be known by calculation at the receiving end. Therefore, it can be omitted.

참조 번호 540 패킷은 상기 참조 번호 530 패킷에서 중복된 Length 필드(532) 및 수신측에서 계산 가능한 TS 필드(534)가 생략된 패킷 것을 나타낸다. The reference numeral 540 packet indicates that the duplicated Length field 532 and the TS field 534 that can be calculated by the receiving side are omitted from the reference number 530 packet.

참조 번호 550 패킷은 IPv6 패킷을 도시한 것인데, IPv6 헤더(551)에는 24비트 길이의 flow label(플로우 라벨) 필드가 있으며, 이 필드를 이용함으로써 IPv6 헤더에 본 발명의 MAL 정보를 포함시킬 수 있다. The reference number 550 packet illustrates an IPv6 packet. In the IPv6 header 551, there is a 24-bit flow label field. By using this field, the MAL information of the present invention can be included in the IPv6 header. .

기존의 간소화되지 않은 헤더를 이용할 경우 수신측에서는 모든 필드들을 파싱해야 하나 상기 도 5와 같이 헤더를 간소화할 경우 플로우 라벨에 해당하는 필드들을 매번 파싱할 필요가 없다는 이점이 있다.When using the existing non-simplified header, the receiving side should parse all the fields. However, when the header is simplified as shown in FIG. 5, the fields corresponding to the flow labels do not need to be parsed every time.

지금까지 본 발명에서 정의한 MAL 정보에 대하여 설명하였다. 이러한 MAL 정보를 이용하면 미디어 스트림에 관한 이해 없이 추상화된 중요도 또는 우선 순위 등을 이용하여 클래스 별 QoS 및 플로우 별 QoS를 보장하는 서비스를 제공할 수 있다. The MAL information defined in the present invention has been described so far. Using such MAL information, it is possible to provide a service that guarantees QoS by class and QoS by flow using abstracted importance or priority without understanding media stream.

MPEG 기술에서는 미디어의 중요도 또는 우선순위 정보를 이해하고 이를 활용하여 포워딩을 수행하는 네트워크 엔터티를 미디어 인식 네트워크 요소(Media Aware Network Element: MANE)라고 한다. 이하에서도 “MANE”라는 용어를 사용하여 설명한다. In MPEG technology, a network entity that understands the importance or priority information of media and performs the forwarding using the media is called a media aware network element (MANE). Hereinafter, description will be made using the term “MANE”.

이하에서는 상기 본 발명에 따른 네트워크 엔터티, 즉, MANE의 동작을 설명한다.Hereinafter, the operation of the network entity, that is, MANE according to the present invention will be described.

예를 들어, 라우터, IEEE 802 시리즈의 MAC(Media Access Control) 계층, 3GPP의 BMSC(Broadcast Multicast Service Center)와 같이 수신한 미디어 패킷을 포워딩(forwading)하는 네트워크 엔터티는 MAL 정보에 포함되는 미디어 구분자 정보에 따라 패킷의 중요도 별로 적응적으로 포워딩할 수 있는 MANE(Media Aware Network Element)로 동작할 수 있다. 일 예로 DiffServ(Differentiated Service; 차별화 서비스) 라우팅 방식을 사용하는 라우터에서는 데이터가 버퍼를 초과하면 우선 순위가 낮은 패킷부터 버리게 된다. 이를 위하여 MAL 정보의 미디어 구분자 값을 확인하게 된다. For example, a network entity that forwards a received media packet, such as a router, a media access control (MAC) layer of IEEE 802 series, and a broadcast multicast service center (BMSC) of 3GPP, may use media identifier information included in MAL information. As a result, it can operate as a MANA (Media Aware Network Element) that can adaptively forward the packet according to the importance of the packet. For example, in a router using a DiffServ (Differentiated Service) routing method, if a data exceeds the buffer, the low priority packet is discarded. To this end, the media identifier value of the MAL information is checked.

클래스 별 QoS 방식의 경우, 상기 네트워크 엔터티는 수신한 패킷이 어떤 서비스에 속하는 패킷인지와 무관하게 IP 헤더에 포함되어 있는 중요도 정보, 즉, 미디어 구분자 값을 이용하여 패킷을 적응적으로 처리한다. 일 예로, 오디오 패킷의 미디어 구분자 값이 11, 기본계층 비디오 패킷 미디어 구분자 값이 10, 고급 1계층 비디오 패킷의 미디어 구분자 값이 01, 고급 2계층 비디오 패킷의 미디어 구분자 값이 00으로 수신된 경우에, 상기 네트워크 엔터티가 네트워크 상태 또는 라우터 버퍼의 초과로 인하여 상기 패킷들 중 어느 하나를 버려야 할 경우, 상기 네트워크 엔터티는 상기 미디어 구분자 값에 따라 패킷을 버리게 된다. 즉, 고급 2계층 비디오 패킷, 고급 1계층 비디오 패킷, 기본 계층 비디오 패킷, 마지막으로 오디오 패킷 순으로 패킷들을 버리게 된다. 예를 들어, IEEE 802.11e 표준에서는 IP 헤더에 쓰여있는 중요도 정보에 따라 정해진 큐(Queue)에 패킷을 넣는다. 보통 4단계로 우선순위가 설정되며 해당 큐 별로 큐를 빠져나가는 패킷의 속도와 패킷 손실을 처리하는 방식에 차이가 있을 수 있다.In the case of a class-specific QoS scheme, the network entity adaptively processes a packet using importance information included in an IP header, that is, a media identifier value, regardless of which service the received packet belongs to. For example, if a media delimiter value of an audio packet is 11, a base layer video packet media delimiter value is 10, a media delimiter value of an advanced 1 layer video packet is 01, and a media delimiter value of an advanced 2 layer video packet is 00. When the network entity needs to discard any one of the packets due to network condition or overflow of the router buffer, the network entity discards the packet according to the media identifier value. That is, packets are discarded in the order of the high layer 2 video packet, the high layer 1 video packet, the base layer video packet, and finally the audio packet. For example, in the IEEE 802.11e standard, a packet is put in a queue determined according to importance information written in an IP header. Normally, priority is set in four steps, and there may be a difference in the method of handling the packet loss and the speed of the packet leaving the queue for each queue.

플로우 별 QoS 방식의 경우, 미디어 식별자인 라벨 값을 확인하고 상기 라벨 값에 따라 미리 결정된 자원을 이용하여 QoS(비트 율과 손실 율 및 지연 등)를 지원한다. 상기 미리 결정된 자원의 결정은 해당 네트워크 엔터티에 스트림 별로 미리 저장된 자원 예약 테이블을 검색하여 해당 라벨에 대응하는 자원에 따라 결정될 수 있다. 일 예로 IEEE 802.16에서 오디오 스트림에 대한 QoS가 UGS(Unsolicited Guaranteed Service)로 정해져 있다면, 그에 따라 미리 결정된 QoS 요건을 보장한다. 따라서, 상기 자원 예약 테이블은 해당 서비스가 끝날 때까지 네트워크 엔터티에 보관된다. 즉, 송신측으로부터 패킷이 수신되면 해당 패킷의 라벨을 확인하여, 해당 라벨의 스트림의 QoS 요건을 자원 예약 테이블에서 검색하여 그에 따른 자원에 따라 서비스가 제공된다. In the flow-based QoS scheme, a label value, which is a media identifier, is identified and QoS (bit rate, loss rate, delay, etc.) is supported by using a predetermined resource according to the label value. The determination of the predetermined resource may be determined according to a resource corresponding to the corresponding label by searching a resource reservation table stored in advance for each stream in the corresponding network entity. For example, if the QoS for the audio stream is set to Unsolicited Guaranteed Service (UGS) in IEEE 802.16, a predetermined QoS requirement is guaranteed accordingly. Therefore, the resource reservation table is stored in the network entity until the corresponding service ends. That is, when a packet is received from the transmitter, the label of the packet is checked, the QoS requirement of the stream of the label is searched in the resource reservation table, and a service is provided according to the resource accordingly.

도 6은 본 발명의 바람직한 실시예에 따른 네트워크 엔터티 장치의 구성을 설명하는 도면이다.6 is a diagram illustrating a configuration of a network entity device according to a preferred embodiment of the present invention.

MANE(600)의 포워딩 정책 결정부(609)가 송신측으로부터 패킷을 수신하면(606) 포워딩 정책에 따라 패킷을 적응적으로 포워딩한다(610). 상기 포워딩 정책은 수신한 패킷의 MAL 정보에 포함된 미디어 구분자 값에 따라 달라진다.When the forwarding policy decision unit 609 of the MANE 600 receives the packet from the transmitting side (606), it adaptively forwards the packet according to the forwarding policy (610). The forwarding policy depends on the media identifier value included in the MAL information of the received packet.

상기 MANE(600)가 서비스 클래스 별 QoS를 지원하는 경우, 해당 패킷의 미디어 구분자 값의 클래스를 확인하고 그에 따라 해당 패킷의 포워딩 여부를 결정한다. 한편, 상기 MANE(600)가 플로우 별(즉, 스트림 별) QoS를 지원하는 경우에는, 라벨 값을 확인하고, 자원 예약 테이블(602)에 저장된 해당 라벨에 할당된 자원을 확인하고(조회-605, 조회 결과 수신-611), 가용 자원 판단부(604)의 가용 자원 정보를 확인하고(조회-608, 조회 결과 수신-607) 가용한 자원 내에서 포워딩 정책을 결정하여 패킷을 포워딩한다(710).When the MANE 600 supports QoS for each service class, the MANE 600 checks the class of the media identifier value of the corresponding packet and determines whether to forward the corresponding packet accordingly. On the other hand, if the MANE 600 supports QoS per flow (i.e., stream), the label value is checked, and the resource allocated to the corresponding label stored in the resource reservation table 602 is checked (query-605). In operation 710, the server determines the available resource information of the available resource determination unit 604 (query-608, receives the inquiry result-607), and determines a forwarding policy in the available resources to forward the packet (710). .

이하에서는 본 발명의 실시예에 따라 수신측의 동작을 간단히 설명한다.Hereinafter, the operation of the receiving side according to an embodiment of the present invention will be briefly described.

도 7은 본 발명의 바람직한 실시예에 따른 수신측 장치를 설명하는 도면이다.7 is a diagram illustrating a receiving side apparatus according to a preferred embodiment of the present invention.

도 7에 의해 예시되는 수신측 장비는 일 예로서, 사용자 단말(User Equipment) 장치가 될 수 있다.The receiving side equipment illustrated by FIG. 7 may be, for example, a user equipment.

수신측 장치(700)는 각 스트림 별로 복호기(702)를 구비한다. 또한 상기 수신측 장치(700)는 신호를 수신하는 수신기(72)와 상기 복호기(702)를 제어하는 제어기(704)를 구비한다. 상기 복호기(700)는 필요한 만큼의 버퍼(미도시)를 확보한다. The receiving side apparatus 700 includes a decoder 702 for each stream. The receiving device 700 also has a receiver 72 for receiving signals and a controller 704 for controlling the decoder 702. The decoder 700 secures as many buffers (not shown) as necessary.

상기 제어기(706)은 상기 수신기(702)로 수신한 패킷에 라벨이 포함되어 있다면 상기 라벨을 확인하고 해당 패킷에 맞는 복호기를 확인할 수 있다. 또한, 상기 제어기(706)은 상기 수신기(702)로 수신한 패킷에 라벨이 없다면 TCP 또는 UDP 헤더를 읽어서 미디어 패킷의 복호를 위한 복호기를 확인할 수 있다.If the packet received by the receiver 702 includes a label, the controller 706 may check the label and identify a decoder suitable for the packet. Also, if the packet received by the receiver 702 does not have a label, the controller 706 may read a TCP or UDP header to identify a decoder for decoding the media packet.

상기 도 3 내지 도 7이 예시하는 구성, 동작 또는 신호의 흐름도는 본 발명의 권리범위를 한정하기 위한 목적이 아님을 유의해야 한다. 즉, 상기 도 3 내지 도 7이 설명하는 구성과 동작들은 각기 장치에서 동작하는 구성을 예시하는 것일 뿐이며, 반드시 모든 과정이 포함되어야 구현 가능함을 한정하거나, 개별적으로 수행되어야만 함을 한정하지 않는다. It should be noted that the flow chart of the configuration, operation or signal illustrated in FIGS. 3 to 7 is not intended to limit the scope of the present invention. That is, the configurations and operations described with reference to FIGS. 3 to 7 merely illustrate configurations that operate in the apparatus, and do not necessarily limit the implementation to be performed by all the processes or to be performed separately.

앞서 설명한 동작들은 해당 프로그램 코드를 저장한 메모리 장치를 송신측 장치, 수신측 장치 또는 MANE 와 같은 네트워크 엔터티 장치 내의 임의의 구성부에 구비함으로써 실현될 수 있다. 즉, 송신측 장치, 수신측 장치 또는 MANE 와 같은 네트워크 엔터티 장치의 구성부는 메모리 장치 내에 저장된 프로그램 코드를 읽어서 실행하는 프로세서 혹은 CPU(Central Processing Unit)에 의해 구현될 수 있다.The above-described operations can be realized by providing a memory device storing the corresponding program code to any component in a network entity device such as a transmitting device, a receiving device or a MANE. That is, a component of a network entity device such as a sender device, a receiver device, or a MANE may be implemented by a processor or a central processing unit (CPU) that reads and executes program codes stored in a memory device.

한편 본 발명의 상세한 설명에서는 구체적인 실시 예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.Meanwhile, in the detailed description of the present invention, specific embodiments have been described, but various modifications are possible without departing from the scope of the present invention. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the scope of the following claims, but also by the equivalents of the claims.

Claims (6)

방송 송신 장치가 데이터 패킷을 수신하기 위한 방법에 있어서,
데이터 패킷을 수신하는 과정과,
상기 데이터 패킷을 디코딩하는 과정을 포함하며,
상기 데이터 패킷은 헤더 및 미디어 데이터를 포함하고,
상기 헤더는 클래스 별(per-class) QoS를 위한 구분자(classifier) 정보 및 플로우 별(per-flow) QoS를 위한 라벨(label) 정보를 포함하고,
상기 구분자 정보는 상기 데이터 패킷의 전송 우선순위에 관련된 QoS 클래스를 제공하며,
상기 라벨 정보는 상기 데이터 패킷이 속하는 플로우의 식별자를 지시하고, 상기 플로우는 네트워크 자원이 예약된 데이터 스트림이며,
상기 구분자 정보 및 상기 라벨 정보의 생성은 상기 미디어 데이터를 제공하는 상위 프로토콜 레이어 및 네트워크 레이어인 하위 프로토콜 레이어 사이의 레이어에서 수행되며, 상기 레이어는 상기 상위 프로토콜 레이어에서 제공된 상기 미디어 데이터에 관련된 정보를 추상화하여, 상기 하위 프로토콜 레이어로 전달하는 기능을 제공하는 방법.
In the method for the broadcast transmission device to receive a data packet,
Receiving a data packet,
Decoding the data packet;
The data packet includes a header and media data,
The header includes classifier information for per-class QoS and label information for per-flow QoS.
The delimiter information provides a QoS class related to the transmission priority of the data packet,
The label information indicates an identifier of a flow to which the data packet belongs, the flow is a data stream to which network resources are reserved;
The generation of the delimiter information and the label information is performed in a layer between an upper protocol layer that provides the media data and a lower protocol layer that is a network layer, and the layer abstracts information related to the media data provided by the upper protocol layer. Providing a function for delivering to the lower protocol layer.
제1항에 있어서,
상기 데이터 패킷은 상기 플로우에 대한 비트율 정보를 포함하는 방법.
The method of claim 1,
The data packet includes bit rate information for the flow.
제1항에 있어서,
상기 데이터 패킷은 버퍼 상태 정보를 포함하는 방법.
The method of claim 1,
The data packet comprises buffer status information.
데이터 패킷을 수신하는 방송 수신 장치에 있어서,
프로세서; 및
상기 프로세서의 제어에 따라 데이터 패킷을 수신하는 수신기를 포함하고,
상기 데이터 패킷은 헤더 및 미디어 데이터를 포함하고,
상기 헤더는 클래스 별(per-class) QoS를 위한 구분자(classifier) 정보 및 플로우 별(per-flow) QoS를 위한 라벨(label) 정보를 포함하고,
상기 구분자 정보는 상기 데이터 패킷의 전송 우선순위에 관련된 QoS 클래스를 제공하며,
상기 라벨 정보는 상기 데이터 패킷이 속하는 플로우를 식별하기 위해 사용되고, 상기 플로우는 네트워크 자원이 예약된 데이터 스트림이며,
상기 구분자 정보 및 상기 라벨 정보의 생성은 상기 미디어 데이터를 제공하는 상위 프로토콜 레이어 및 네트워크 레이어인 하위 프로토콜 레이어 사이의 레이어에서 수행되며, 상기 레이어는 상기 상위 프로토콜 레이어에서 제공된 상기 미디어 데이터에 관련된 정보를 추상화하여, 상기 하위 프로토콜 레이어로 전달하는 기능을 제공하는 장치.
In the broadcast receiving device for receiving a data packet,
A processor; And
A receiver for receiving a data packet under control of the processor,
The data packet includes a header and media data,
The header includes classifier information for per-class QoS and label information for per-flow QoS.
The delimiter information provides a QoS class related to the transmission priority of the data packet,
The label information is used to identify a flow to which the data packet belongs, the flow is a data stream to which network resources are reserved;
The generation of the delimiter information and the label information is performed in a layer between an upper protocol layer that provides the media data and a lower protocol layer that is a network layer, and the layer abstracts information related to the media data provided by the upper protocol layer. And providing a function for delivering to the lower protocol layer.
제4항에 있어서,
상기 데이터 패킷은 상기 플로우에 대한 비트율 정보를 포함하는 장치.
The method of claim 4, wherein
And the data packet includes bit rate information for the flow.
제4항에 있어서,
상기 데이터 패킷은 버퍼 상태 정보를 포함하는 장치.
The method of claim 4, wherein
And the data packet includes buffer status information.
KR1020190102211A 2019-08-21 2019-08-21 Apparatus and method for receiving a multimedia data packet KR102060410B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190102211A KR102060410B1 (en) 2019-08-21 2019-08-21 Apparatus and method for receiving a multimedia data packet

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190102211A KR102060410B1 (en) 2019-08-21 2019-08-21 Apparatus and method for receiving a multimedia data packet

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020180141808A Division KR102014882B1 (en) 2018-11-16 2018-11-16 Apparatus and method for tranmitting a multimedia data packet

Publications (2)

Publication Number Publication Date
KR20190101340A true KR20190101340A (en) 2019-08-30
KR102060410B1 KR102060410B1 (en) 2019-12-30

Family

ID=67776533

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190102211A KR102060410B1 (en) 2019-08-21 2019-08-21 Apparatus and method for receiving a multimedia data packet

Country Status (1)

Country Link
KR (1) KR102060410B1 (en)

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100693723B1 (en) 2004-09-30 2007-03-12 주식회사 케이티 Method for cotrolling Qulity of Service in IPv6 and system thereof

Also Published As

Publication number Publication date
KR102060410B1 (en) 2019-12-30

Similar Documents

Publication Publication Date Title
JP6353120B2 (en) Method and apparatus for transmitting multimedia data packets
KR102127702B1 (en) Interface apparatus and method for transmitting and receiving media data
KR101757771B1 (en) Apparatus and method for tranmitting a multimedia data packet using cross layer optimization
US9036630B2 (en) Method and apparatus for transmitting data packet of multimedia service using media characteristics
US11316799B2 (en) Method and apparatus for transmitting a multimedia data packet using cross-layer optimization
KR102107514B1 (en) Method and apparatus for managing dynamic que in broadcasting system
KR20130119885A (en) Methods of transporting mmt packet for in-network adaptation of layered video
KR102060410B1 (en) Apparatus and method for receiving a multimedia data packet
KR102014882B1 (en) Apparatus and method for tranmitting a multimedia data packet
Ahmed et al. Delivering of MPEG-4 multimedia content over next generation Internet
US20060087970A1 (en) Method for encoding a multimedia content

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant