KR101343877B1 - 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치 - Google Patents

순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치 Download PDF

Info

Publication number
KR101343877B1
KR101343877B1 KR1020120066602A KR20120066602A KR101343877B1 KR 101343877 B1 KR101343877 B1 KR 101343877B1 KR 1020120066602 A KR1020120066602 A KR 1020120066602A KR 20120066602 A KR20120066602 A KR 20120066602A KR 101343877 B1 KR101343877 B1 KR 101343877B1
Authority
KR
South Korea
Prior art keywords
error correction
forward error
packet
data
time
Prior art date
Application number
KR1020120066602A
Other languages
English (en)
Inventor
하호진
임창훈
Original Assignee
한라대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한라대학교산학협력단 filed Critical 한라대학교산학협력단
Priority to KR1020120066602A priority Critical patent/KR101343877B1/ko
Priority to US13/585,334 priority patent/US20130346831A1/en
Application granted granted Critical
Publication of KR101343877B1 publication Critical patent/KR101343877B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/61—Network physical structure; Signal processing
    • H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
    • H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/27—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes using interleaving techniques
    • H—ELECTRICITY
    • H03—ELECTRONIC CIRCUITRY
    • H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
    • H03M13/00—Coding, decoding or code conversion, for error detection or error correction; Coding theory basic assumptions; Coding bounds; Error probability evaluation methods; Channel models; Simulation or testing of codes
    • H03M13/35—Unequal or adaptive error protection, e.g. by providing a different level of protection according to significance of source information or by adapting the coding according to the change of transmission channel characteristics
    • H03M13/356—Unequal error protection [UEP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates

Abstract

본 발명은 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치에 관한 것으로, 순방향 오류정정 패킷 생성방법은 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하는 단계와; 상기 각 시간 계층에 대하여 순방향 오류정정 데이터를 할당하는 단계; 및 상기 각 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성하는 단계;를 포함한다.
본 발명에 따르면 시간 계층 단위로 순방향 오류정정 데이터를 할당함으로써 전체 데이터를 수신하지 않고도 순방향 오류정정이 가능하고, 그 결과 지연을 최소화할 수 있다. 또한, 각 시간 계층에 대하여 비디오 데이터와 순방향 오류정정 데이타 간에 인터리빙을 적용함으로써, 버스트 에러에 강인한 이점이 있다.

Description

순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치 {Method of generating forward error correction packet and server and client apparatus employing the same}
본 발명은 스케일러블 비디오 코딩에 관한 것으로서, 더욱 상세히는 스케일러블 비디오 스트리밍을 위한 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치에 관한 것이다.
비디오를 네트워크로 전송하는 방식에는 다운로드 방식과 스트리밍 방식이 있다.
다운로드 방식은 일정한 비디오의 파일을 사용자의 컴퓨터에 미리 다운받아서 재생하는 방식으로, 실시간 미디어 전송 개념에는 적합하지 않다.
반면, 비디오 스트리밍 기술은 사용자가 미디어 콘텐츠를 선택한 순간 실행되는, 실시간 전송에 기반을 두고 있기 때문에 인터넷 방송 등의 다양한 응용분야가 존재한다.
비디오 스트리밍은 실시간으로 이루어져야 하기 때문에 일반적으로 지연과 손실에 민감하며 서비스에 필요한 최소의 대역폭을 보장해 주어야 한다.
그러나, 현재의 최선 노력(Best-Effort) 전송 방식 기반 인터넷은 인터넷상에서의 비디오 스트리밍에 대한 어떠한 서비스 품질도 보장하지 못한다. 이는 네트워크를 통하여 실시간으로 비디오를 전송할 때, 네트워크 상황에 따라 패킷이 손실될 가능성이 있다는 것을 의미한다. 따라서 패킷 손실이 일어나는 네트워크에서의 비디오의 품질을 향상시킬 수 있는 방법에 대한 연구가 많이 수행되어 왔다.
실시간 비디오 스트리밍은 지연에 민감하기 때문에 패킷 손실이 발생하더라도 비디오 화질을 최대한 유지할 수 있는 에러 컨트롤 방법들을 필요로 한다. 패킷 손실을 처리하는 기술은 대표적으로 자동 재전송 요구(ARQ; Automatic Retransmission reQuest)와 순방향 오류정정 방법(FEC; Forward Error Correction)을 들 수 있다. ARQ는 손실된 패킷의 재전송으로 인하여, 네트워크 전송량을 증가시키고, 이로 인하여 과다 전송으로 인한 손실을 발생시키기 때문에 비디오 스트림 서비스에 적합하지 않다. 반면, FEC는 부가(redundant) 패킷을 추가하여 손실을 복원하기 때문에 재전송이나 피트백의 추가적인 전송을 필요로 하지 않는다. 그러나, 부가 패킷으로 인한 지연이 발생하게 된다.
FEC는 비트 레벨과 바이트 레벨에서 수행될 수 있다. 바이트 레벨 FEC는 하나의 심볼이 바이트(byte)이고, 패킷 레벨 FEC는 하나의 심볼이 패킷이다. 일반적으로 바이트 레벨 FEC는 물리 계층(physical layer)과 전송 계층(transport layer)에서 일반적으로 수행된다. 반면, 패킷 레벨 FEC는 손실된 패킷에 대한 재전송의 요구 없이 손실된 패킷의 복원이 가능하기 때문에 주로 실시간 서비스나 멀티캐스팅 서비스에 주로 사용된다.
특히, 비디오 실시간 응용 서비스에서, 패킷 레벨 FEC는 엔드 유저(end user)단의 패킷 손실로 인한 화질 열화를 개선하기 위해서, 주로 비균등오류보호(UEP; unequal error protection)라는 알고리즘과 같이 애플리케이션 레벨(application level)에서 사용된다. 즉 화질 열화에 큰 영향을 미치는 패킷에는 좀더 많은 부가 패킷을 할당함으로써, 효과적으로 화질을 개선하게 된다.
다양한 채널 환경에서, 비트율을 조절하면서, 다양한 화질을 제공할 수 있는 스케일러블 비디오 부호화에 대한 요구가 증가하고 있다. 최근, ISO/IEC Moving Picture Experts Group(MPEG)과 ITU-T Video Coding Expert Group(VCEG)에 의해서 H.264를 기반으로 한 새로운 스케일러블 비디오 부호화(SVC; Scalable Video Coding)에 대한 표준화가 진행되었다. SVC는 공간적, 시간적, 화질적 스케일러빌러티를 제공하기 위해서, 하나의 기본 계층과 시간적(temporal), 공간적(spatial), 화질적(quality) 향상을 줄 수 있는 다수의 상위계층으로 구성된 비트스트림을 만들 수 있다. 전체 비트 스트림을 모두 수신할 경우, 가장 높은 해상도의 화질을 얻을 수 있다. 만약 채널 환경이 좋지 않을 경우, 다양한 시간적, 공간적 해상도를 가질 수 있도록, 일부 비트스트림을 수신하여 디코딩할 수 있는 장점이 있다.
그러나, SVC 비트스트림은 다양한 네트워크 환경에 적응할 수 있는 반면, 불안한 네트워크 상황 하에서는 패킷 손실로부터 강인한 전송을 하는 데는 여전히 많은 어려움이 존재한다.
한편, 데이터의 인터리빙 기술은 일반적으로 비디오 스트리밍 기술에서 패킷 손실로 인한 화질 열화를 최소화하기 위해서 많이 사용된다. 기존의 연속적인 비디오 패킷들을 일정거리로 분리함으로써, 패킷 손실로 인한 화질열화를 퍼트리는(scatter or disperse) 결과를 갖게 된다. 하지만, 인터리빙으로 인한 지연 또한 발생하게 되므로 응용분야가 제한될 수 있다.
도 1은 스케일러블 비디오 코딩에 있어서 시간적 스케일러빌러티(temporal scalability)와 화질적 스케일러빌러티(quality scalability)를 주기 위한 MCTF(Motion Compensated Temporal Filtering) 구조를 나타낸다. 하나의 GOP(Group Of Picture)는 8개의 프레임으로 구성되고, 각 프레임은 시간 계층(TL) 및 화질 계층(QL)을 갖는다. TL에 따라서 재생되는 프레임율(frame rate)이 변화된다. 도 1은 4개의 TL을 갖는 계층적 예측 구조를 예를 들어 보여주고 있다.
도 1을 참조하면, TL0 만을 재생하는 경우 0, 8, 16 등의 프레임만이 재생된다. TL0, TL1을 재생하는 경우, 0 4, 8, 16, 32 등의 프레임이 재생된다. TL0, TL1, TL2을 재생하는 경우, 0, 2, 4, 6, 8, 10, 12, 14, 16... 등의 프레임이 재생된다. TL0, TL1, TL2, TL3을 재생하는 경우, 0, 1, 2, 3, 4, 5, ... 등의 연속된 비디오 프레임들이 재생된다.
도 2는 도 1에 도시된 MCTF 구조에 근거한 스케일러블 비디오 프레임의 전송 순서를 보여준다.
상기와 같은 구조에는 시간 계층이 낮을수록, 패킷 손실로 인한 화질 열화에 큰 영향을 미치게 된다. 왜냐하면, TL1의 손실시, TL1의 프레임을 참조하는 시간 계층에 속한 프레임들의 손실이 화질 열화에 영향을 주기 때문이다.
또한, 수신단에서는 전체의 프레임을 모두 받아야 FEC 복호화를 수행할 수 있으므로, 이로 인하여 지연이 발생하게 되고, 결과적으로 화질 열화를 초래하게 된다.
본 발명은 상기한 종래의 문제점을 해결하기 위한 것으로서, 본 발명의 목적은 계층적 구조를 갖는 스케일러블 비디오 코딩에 있어서 FEC(Forward Error Correction) 패킷의 복호화시 발생하는 지연을 최소화시킬 수 있는 FEC 패킷 생성방법과 이를 적용하는 서버와 클라이언트 장치를 제공하는 것이다.
상기와 같은 본 발명의 목적을 달성하기 위하여, 본 발명의 실시예에 따른 순방향 오류정정 패킷 생성방법은, 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하는 단계와; 상기 각 시간 계층에 대하여 순방향 오류정정 데이터를 할당하는 단계; 및 상기 각 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성하는 단계를 포함하여 이루어지는 것을 특징으로 한다.
상기와 같은 본 발명의 목적을 달성하기 위하여, 본 발명의 실시예에 따른 스케일러블 비디오 스트리밍을 제공하는 서버는, 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하고, 상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하고, 상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성하는 순방향 오류정정 패킷 생성부; 및 상기 전송패킷을 클라이언트 장치로 전송하는 통신부를 포함하여 구성되는 것을 특징으로 한다.
상기와 같은 본 발명의 목적을 달성하기 위하여, 본 발명의 실시예에 따른 스케일러블 비디오 데이터를 수신하는 클라이언트 장치는, 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하고, 상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하고, 상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 생성된 전송패킷으로 이루어지는 스케일러블 비디오 비트스트림을 수신하는 통신부; 및 상기 스케일러블 비디오 비트스트림에 포함된 시간 계층 단위로 FEC 복호화 및 스케일러블 비디오 복호화를 수행하는 디코더를 포함하여 구성되는 것을 특징으로 한다.
상기 클라이언트 장치는 상기 시간 계층 단위로 FEC 부호화 및 스케일러블 비디오 부호화를 수행하는 인코더를 더 포함할 수 있다.
본 발명에 따르면 시간 계층 단위로 순방향 오류정정 데이터를 할당함으로써 전체 데이터를 수신하지 않고도 순방향 오류정정이 가능하고, 그 결과 지연을 최소화할 수 있다. 또한, 각 시간 계층에 대하여 비디오 데이터와 순방향 오류정정 데이타 간에 인터리빙을 적용함으로써, 버스트 에러에 강인한 이점이 있다.
도 1은 스케일러블 비디오 코딩에 있어서 시간적 스케일러빌러티를 제공하기 위한 MCTF 구조를 나타낸 실시예.
도 2는 도 1에 도시된 MCTF 구조에 근거한 스케일러블 비디오 프레임의 전송 순서를 보여주는 실시예.
도 3은 계층적 구조를 갖는 스케일러블 비디오 데이터의 FEC 패킷을 할당하기 위한 알고리즘을 설명하는 실시예.
도 4는 본 발명의 실시예에 따른 FEC 패킷 구조.
도 5는 본 발명의 다른 실시예에 따른 FEC 패킷 구조.
도 6은 본 발명의 실시예에 따른 순방향 오류정정 패킷 생성장치의 구성을 나타낸 블럭도.
도 7은 본 발명의 실시예에 따른 FEC 패킷 생성장치를 포함하는 서버 및 클라이언트를 갖는 통신시스템의 개략적인 구성을 나타내는 블록도.
이하, 본 발명의 실시예들을 첨부된 도면을 참조하여 더욱 상세하게 설명한다. 첨부된 도면을 참조하여 설명함에 있어, 동일하거나 대응하는 구성요소는 동일한 도면번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다.
도 3은 계층적 구조를 갖는 스케일러블 비디오 데이터의 FEC(Forward Error Correction) 패킷을 할당하기 위한 2차원(2D) FEC 할당 알고리즘을 설명하는 실시예이다. 여기서, T(0)는 시간 계층 0를 의미하고, T(TL-1)은 시간 계층의 최대값을 의미하는 것으로서, 도 1의 3을 의미한다. SU(t,q)는 시간 계층 t에서 화질 계층 q에 해당되는 비디오 데이터로서, 스케일러블 유니트(SU; scalable unit)를 의미한다. k(t,q)는 시간 계층 t에서 화질 계층 q에 할당된 FEC 데이터를 의미한다. h(t,q)는 SU(t,q)에 대해서 k(t,q)가 할당됨으로써 증가하는 값을 의미하며 패킷 사이즈를 구성하는 값이다.
도 3에 도시된 알고리즘에 따르면, 각 스케일러블 유니트인 SU(t,q)의 중요도에 따라서 FEC를 차분적으로 할당한다. 여기서, SU(t,q)의 중요도는 해당 데이터의 손실시 에러 전파에 미치는 영향을 고려하여 결정된다. 또한, 각 SU(t,q)에 대해서 할당된 FEC 리던던시(redundancy)에 대해서 FEC 부호화를 수행한다.
한편, 도 3에 도시된 알고리즘에서는 인터리빙의 장점을 얻기 위해서 FEC 부호화된 패킷을 전송하는 것이 아니라, 세로로 패킷을 구성한다. 이와 같이 전송되는 패킷의 구성이 세로로 구성되기 때문에 버스트 에러(burst error)로 인한 비디오 데이터의 손실을 막을 수 있다.
도 4는 본 발명의 실시예에 따른 FEC 패킷 구조를 설명하는 도면으로서, 시간 계층 t에서 FEC 데이터 k(t,q)를 품질 계층 q에 대해서 할당함으로써, 각 시간 계층의 복호화시 지연을 최소화하면서 화질을 향상시킬 수 있다. 이 경우, 기존 알고리즘과 비교해 볼 때, 패킷 사이즈(PS)는 동일하고, 패킷 갯수(PN)는 감소할 수 있다. 이와 같이 FEC 패킷을 구성하는 경우, 스케일러블 비디오 디코더에서는 해당 시간 계층만 수신하면 복호화가 가능하므로 지연이 최소화될 수 있다.
도 4를 참조하면, 시간 계층이 제3 복수 개의 스케일러블 유니트(SU)로 구성되는 경우, 각 스케일러블 유니트에 할당되는 순방향 오류정정 데이터의 크기가 낮은 스케일러블 유니트에서부터 높은 스케일러블 유니트의 순서로 즉, 중요도의 순서로 감소함을 알 수 있다.
도 4에 도시된 FEC 패킷 구조에서는, 하나의 시간 계층에 있어서 각 스케일러블 유니트간에 인터리빙이 행해진다. 이 경우, 하나의 전송 패킷에는 FEC 데이터만 포함되거나, 비디오 데이터만 포함되거나, FEC 데이터와 비디오 데이터가 모두 포함될 수 있다.
도 5는 본 발명의 다른 실시예에 따른 FEC 패킷 구조를 설명하는 도면으로서, FEC 복호화시 발생되는 지연을 최소화할 수 있도록 FEC 데이터가 각 시간 계층에 할당된다.
도 5를 참조하면, 각 시간 계층에 할당되는 순방향 오류정정 데이터의 크기는 낮은 시간 계층(TL1)에서부터 높은 시간 계층(TL4)의 순서로 감소함을 알 수 있다.
도 5에 도시된 FEC 패킷 구조에서는, 하나의 시간 계층에 있어서 FEC 데이터와 비디오 데이터간에 인터리빙이 행해진다. 이 경우, 하나의 전송 패킷에는 FEC 데이터와 비디오 데이터가 모두 포함될 수 있다.
도 6은 본 발명의 실시예에 따른 순방향 오류정정 패킷 생성장치의 구성을 나타낸 블록도로서, 시간계층 생성부(610), 오류정정데이터 할당부(630) 및 인터리빙부(650)를 포함할 수 있다. 각 구성요소는 적어도 하나 이상의 모듈로 일체화되어 적어도 하나 이상의 프로세서(미도시)로 구현될 수 있다.
도 6을 참조하면, 시간 계층 생성부(610)는 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹(Group of Picture)에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성한다. 이때, 바람직하게는 MCTF를 적용할 수 있으나, 이에 한정되는 것은 아니다.
오류정정데이터 할당부(630)는 시간 계층에 대하여 순방향 오류정정 데이터를 할당한다. 일 실시예에 따르면, 각 시간 계층에 할당되는 순방향 오류정정 데이터의 크기는 낮은 시간 계층에서부터 높은 시간 계층 순서로 감소하는 것이 바람직하다. 다른 실시예에 따르면, 시간 계층이 제3 복수 개의 스케일러블 유니트로 구성되는 경우, 각 스케일러블 유니트에 할당되는 순방향 오류정정 데이터의 크기는 낮은 스케일러블 유니트에서부터 높은 스케일러블 유니트 순서로 감소하는 것이 바람직하다.
인터리빙부(650)는 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성한다. 일 실시예에 따르면, 각 시간 계층에 있어서, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 순방향 오류정정 데이터를 인터리빙하여 전송패킷을 생성할 수 있다. 다른 실시예에 따르면, 각 시간 계층에 있어서, 복수 개의 스케일러블 유니트 간을 인터리빙하여 전송패킷을 생성할 수 있다.
도 7은 본 발명의 실시예에 따른 FEC 패킷 생성부를 포함하는 서버 및 클라이언트 장치를 갖는 통신시스템의 개략적인 구성을 나타내는 도면으로서, 서버(710)는 FEC 패킷 생성부(713)를 포함하는 인코더와 통신부(715)를 포함할 수 있고, 클라이언트 장치(730)는 인코더(733)와 디코더(735) 중 적어도 하나와 통신부(737)를 포함할 수 있다. 여기서, 서버(710)는 스케일러블 비디오 비트스트림을 저장하는 메모리(미도시)를 더 구비할 수 있다. 클라이언트 장치의 예로는 모바일 단말 혹은 TV, MP3 플레이어 등을 포함하는 방송장치를 들 수 있으나, 여기에 한정되는 것은 아니다.
도 7을 참조하면, 서버(710)에 있어서, FEC 패킷 생성부(713)는 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하고, 상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하고, 상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성한다.
통신부(715)는 FEC 패킷 생성부(713)로부터 제공되는 전송패킷을 포함하는 비트스트림을 클라이언트 장치로 전송하거나, 저장 용도로 외부의 기기로 제공할 수 있다.
통신부(715)는 무선 인터넷, 무선 인트라넷, 무선 전화망, 무선 랜(LAN), 와이파이(Wi-Fi), 와이파이 다이렉트(WFD, Wi-Fi Direct), 3G(Generation), 4G(4 Generation), 블루투스(Bluetooth), 적외선 통신(IrDA, Infrared Data Association), RFID(Radio Frequency Identification), UWB(Ultra WideBand), 지그비(Zigbee), NFC(Near Field Communication)와 같은 무선 네트워크 또는 유선 전화망, 유선 인터넷과 같은 유선 네트워크를 통해 외부의 멀티미디어 기기와 데이터를 송수신할 수 있도록 구성된다.
한편, 클라이언트 장치(730)에 있어서, 인코더(733)는 상기 시간 계층 단위로 FEC 부호화 및 스케일러블 비디오 부호화를 수행하여 스케일러블 비디오 비트스트림을 생성한다.
디코더(735)는 수신된 상기 스케일러블 비디오 비트스트림에 포함된 시간 계층 단위로 FEC 복호화 및 스케일러블 비디오 복호화를 수행한다.
통신부(737)는 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하고, 상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하고, 상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 생성된 전송패킷으로 이루어지는 스케일러블 비디오 비트스트림을 수신한다. 클라이언트 장치(730)의 통신부(737)는 서버(710)의 통신부(715)와 유사하게 구성될 수 있다.
다른 실시예에 따르면, 서버(710) 내에 인코더를, 클라이언트 장치(730) 내에 디코더를 구비할 수 있다. 또 다른 실시예에 따르면, 클라이언트 장치는 인코더 및 디코더 모두를 구비할 수 있다.
상기 실시예에 따른 방법은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다. 또한, 상술한 본 발명의 실시예들에서 사용될 수 있는 데이터 구조, 프로그램 명령, 혹은 데이터 파일은 컴퓨터로 읽을 수 있는 기록매체에 다양한 수단을 통하여 기록될 수 있다. 컴퓨터로 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 저장 장치를 포함할 수 있다. 컴퓨터로 읽을 수 있는 기록매체의 예로는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 컴퓨터로 읽을 수 있는 기록매체는 프로그램 명령, 데이터 구조 등을 지정하는 신호를 전송하는 전송 매체일 수도 있다. 프로그램 명령의 예로는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다.
이상에서 설명한 본 발명에 따른 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치는 상기한 실시예에 한정되지 않고, 이하의 특허청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양하게 변경하여 실시할 수 있는 범위까지 그 기술적 정신이 있다.
610: 시간계층 생성부 630: 오류정정데이터 할당부
650: 인터리빙부 710: 서버
713: FEC 패킷 생성부 715: 통신부
730: 클라이언트 장치 733: 인코더
735: 디코더 737: 통신부

Claims (8)

  1. 제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하는 단계와;
    상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하는 단계; 및
    상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성하는 단계;
    를 포함하여 이루어지는 것을 특징으로 하는 순방향 오류정정 패킷 생성방법.
  2. 제1 항에 있어서, 상기 제2 복수 개의 시간 계층은 MCTF에 의해 생성되는 것을 특징으로 하는 순방향 오류정정 패킷 생성방법.
  3. 제1 항에 있어서, 상기 시간 계층에 할당되는 순방향 오류정정 데이터의 크기는 낮은 시간 계층에서부터 높은 시간 계층 순서로 감소하는 것을 특징으로 하는 순방향 오류정정 패킷 생성방법.
  4. 제1 항에 있어서, 상기 시간 계층이 제3 복수 개의 스케일러블 유니트로 구성되는 경우, 상기 각 스케일러블 유니트에 할당되는 순방향 오류정정 데이터의 크기는 낮은 스케일러블 유니트에서부터 높은 스케일러블 유니트 순서로 감소하는 것을 특징으로 하는 순방향 오류정정 패킷 생성방법.
  5. 제1 항에 있어서, 상기 시간 계층이 각각 비디오 데이터와 이에 대응하는 품질 데이터로 이루어지는 제3 복수 개의 스케일러블 유니트로 구성되는 경우, 복수 개의 스케일러블 유니트 간을 인터리빙하여 상기 전송패킷을 생성하는 것을 특징으로 하는 순방향 오류정정 패킷 생성방법.
  6. 스케일러블 비디오 스트리밍을 제공하는 서버에 있어서,
    제1 복수 개의 프레임으로 이루어지는 하나의 픽쳐그룹에 대하여 시간적 스케일러빌러티를 제공하기 위하여 제2 복수 개의 시간 계층을 생성하고, 상기 시간 계층에 대하여 순방향 오류정정 데이터를 할당하고, 상기 시간 계층에 대하여, 적어도 하나의 프레임으로 이루어지는 비디오 데이터와 상기 순방향 오류정정 데이터 중 적어도 하나를 인터리빙하여 전송패킷을 생성하는 순방향 오류정정 패킷 생성부; 및
    상기 전송패킷을 클라이언트 장치로 전송하는 통신부;
    를 포함하여 구성되는 것을 특징으로 하는 서버.
  7. 삭제
  8. 삭제
KR1020120066602A 2012-06-21 2012-06-21 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치 KR101343877B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120066602A KR101343877B1 (ko) 2012-06-21 2012-06-21 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치
US13/585,334 US20130346831A1 (en) 2012-06-21 2012-08-14 Method of generating forward error correction packet and server and client apparatus employing the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120066602A KR101343877B1 (ko) 2012-06-21 2012-06-21 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치

Publications (1)

Publication Number Publication Date
KR101343877B1 true KR101343877B1 (ko) 2013-12-20

Family

ID=49775501

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120066602A KR101343877B1 (ko) 2012-06-21 2012-06-21 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치

Country Status (2)

Country Link
US (1) US20130346831A1 (ko)
KR (1) KR101343877B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116233503A (zh) * 2023-01-17 2023-06-06 深圳大学 用于视频传输的增强前向纠错的方法、介质及相关设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107592540B (zh) 2016-07-07 2020-02-11 腾讯科技（深圳）有限公司 一种视频数据处理方法及装置
US11150839B2 (en) * 2019-12-19 2021-10-19 Western Digital Technologies, Inc. Host and method for interleaving data in a storage system for enhanced quality of service
US11221950B2 (en) * 2019-12-19 2022-01-11 Western Digital Technologies, Inc. Storage system and method for interleaving data for enhanced quality of service

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100835134B1 (ko) 2006-08-22 2008-06-04 한국과학기술원 순방향 오류정정 복호화 방법 및 복호화기.

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100835134B1 (ko) 2006-08-22 2008-06-04 한국과학기술원 순방향 오류정정 복호화 방법 및 복호화기.

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116233503A (zh) * 2023-01-17 2023-06-06 深圳大学 用于视频传输的增强前向纠错的方法、介质及相关设备
CN116233503B (zh) * 2023-01-17 2023-08-18 深圳大学 用于视频传输的增强前向纠错的方法、介质及相关设备

Also Published As

Publication number Publication date
US20130346831A1 (en) 2013-12-26

Similar Documents

Publication Publication Date Title
US11350114B2 (en) Signaling for addition or removal of layers in video coding
JP5746392B2 (ja) モバイルデバイスからワイヤレスディスプレイにコンテンツを送信するシステムおよび方法
KR101065237B1 (ko) 베이스 레이어와 인핸스먼트 레이어 사이에서의 멀티미디어 데이터 재구성
US9357248B2 (en) Method and apparatus for adaptive bit rate content delivery
US10116970B1 (en) Video distribution, storage, and streaming over time-varying channels
US20110268175A1 (en) Differential protection of a live scalable media
KR102170717B1 (ko) 멀티미디어 서비스를 위한 비트 에러율을 이용한 레이트 어댑테이션 방법 및 그 장치
JP2008523689A (ja) 単層符号化を使用する無線ビデオストリーミング及び優先順位付けされたストリーミング
US10148990B2 (en) Video streaming resource optimization
KR101343877B1 (ko) 순방향 오류 정정 패킷 생성방법과 이를 이용한 서버와 클라이언트 장치
JP2017520940A5 (ja) レイヤードコード化コンテンツを多重化する方法および装置
Fiandrotti et al. Traffic prioritization of H. 264/SVC video over 802.11 e ad hoc wireless networks
Al-Jobouri et al. Protecting H. 264/AVC data-partitioned video streams over broadband WiMAX
KR101663769B1 (ko) 실시간 부호화 되는 스케일러블 비디오를 다중 송신그룹으로 보내기 위한 소스 버퍼링을 수행하는 시스템 및 방법
Liu et al. A dynamic hybrid UXP/ARQ method for scalable video transmission
Go et al. A systematic reallocation and prioritization scheme for error-resilient transmission of video packets
Quinlan et al. ALD: adaptive layer distribution for scalable video
Bakhshali et al. QoE optimization of video multicast with heterogeneous channels and playback requirements
KR101388591B1 (ko) 순방향 오류정정 패킷 할당방법 및 장치, 및 이를 채용한 서버 및 클라이언트 장치
Yang et al. An adaptive multi-layer low-latency transmission scheme for H. 264 based screen sharing system
KR20110051733A (ko) 비디오 스트리밍을 위한 네트워크 적응형 가변 스트림 계층화 장치 및 방법
Nazir et al. Rate adaptive selective segment assignment for reliable wireless video transmission
Fujii et al. Digital cinema over optical network-status of super hd development
Yu et al. Time utility function based packet scheduling algorithm for streaming scalable media
Mobasher et al. Cross layer image optimization (CLIO) for wireless video transmission over 802.11 ad multi-gigabit channels

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161125

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171124

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20181128

Year of fee payment: 6