KR20090030779A - 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법 - Google Patents

데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법 Download PDF

Info

Publication number
KR20090030779A
KR20090030779A KR1020070096319A KR20070096319A KR20090030779A KR 20090030779 A KR20090030779 A KR 20090030779A KR 1020070096319 A KR1020070096319 A KR 1020070096319A KR 20070096319 A KR20070096319 A KR 20070096319A KR 20090030779 A KR20090030779 A KR 20090030779A
Authority
KR
South Korea
Prior art keywords
priority information
frame
priority
intra frame
information
Prior art date
Application number
KR1020070096319A
Other languages
English (en)
Inventor
권재철
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020070096319A priority Critical patent/KR20090030779A/ko
Publication of KR20090030779A publication Critical patent/KR20090030779A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/127—Prioritisation of hardware or computational resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Abstract

본 발명은 데이터 분할 방식을 이용한 저지연 인트라 프레임(Intra Frame) 부호화 방법에 관한 것이다.
이러한 본 발명에 따르면, 디지털 멀티미디어 영상을 송신하는 송신장치가 인트라 프레임을 재생하기 위한 최소한의 정보를 갖는 제1 우선순위 정보와 상기 기초영상을 보정하는 다수의 제n-1 우선순위 정보로 분할하여 생성하고, 이를 우선순위에 따른 마커를 삽입하여 전달한다. 그리고 이를 수신한 수신장치는 상기 제1 우선순위 정보를 우선적으로 디코딩하여 기초영상으로 출력하고, 상기 제n-1 우선순위 정보를 마커 검출에 의한 우선순위에 따라 상기 기초영상에 오버레이 시킨다.
본 발명의 실시 예에 따르면 인트라 프레임을 분할하여, 생성된 프레임을 디코딩하여 재생할 수 있는 최소한의 정보로 구성하여 우선적으로 전송함으로써 인트라 프레임의 지연시간을 줄일 수 있다.
Figure P1020070096319
인트라 프레임, 마커, 인코딩, 디코딩, 비트스트림

Description

데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화 방법{A Low Delay Intra-frame Coding Method using data partition}
본 발명은 데이터 분할 방식을 이용한 저지연 인트라 프레임(Intra Frame) 부호화 방법에 관한 것이다. 특히 본 발명은 영상전화나 영상회의와 같은 양방향 영상통신에서 종단간 지연(end-to-end delay)을 줄이기 위한 인트라 프레임 송수신 장치 및 그 방법에 관한 것이다.
영상 전송기술이 급속이 발전함에 따라 사용자들에게 고품질의 다양한 영상서비스 들이 제공되고 있으며, 이러한 영상 서비스에서는 화질이나 대역폭, 서비스 품질 등의 문제가 주된 이슈로 고려되었다. 그리고, 네트워크에서 제공하는 대역폭이 커지고, 프로세싱 능력이 뛰어난 영상 코덱칩, 대형 디스플레이 등의 주변 환경이 발전함에 따라 고품질 대화면 비디오 환경에서의 사용자 체감지연이 중요한 체감품질(Quality of Experience, QoE) 요소로 작용하고 있다.
특히, 영상전화나 영상회의와 같은 실시간 양방향 영상통신에서의 종단간 지연(end-to-end delay)은 사용자의 체감품질에 중요한 영향을 미친다. 양방향 영상통신에서 발생하는 지연은 여러 가지 요소에 의해 발생되지만 큰 이유 중의 하나는 첫번째 프레임인 인트라 프레임(이하, I-프레임)이 디코딩되는 시간이 늦기 때문이다.
일반적으로 영상을 인코딩 하는 방식은 I-프레임(Infa Frame), P-프레임 (Predictive Frame) 및 B-프레임(Bidirectional Frame)이 있으며, 양방향 영상통신에서는 지연을 줄이기 위해 대부분 양방향 예측을 하는 B-프레임은 사용하지 않는다.
I-프레임은 독립적인 프레임으로 다른 이미지들의 참조 없이 스스로 압축과 복원할 수 있는 프레임으로서, 제작 중 데이터 스트림의 어느 위치에든 올 수 있으며, 데이터의 임의 접근이 가능하다. 이러한 I-프레임은 원본 소스로부터 직접 압축되어 온 전체화면으로 화질이 좋은 특징이 있지만, 그에 따른 정보량도 큰 단점이 있다.
P-프레임은 전후 프레임간의 변화량을 토대로 인코딩 또는 디코딩을 수행한다. 즉, 연속되는 이미지들 사이에서 전체 이미지가 바뀌는 것이 아니라 이미지의 블록들이 옆으로 이동한 점에 착안하여, 이전의 I-프레임 정보와 이전의 P-프레임의 정보를 이용하여 인코딩과 디코딩을 수행한다. 따라서, I-프레임에 비해 상대적으로 용량이 작다.
전술한 바와 같이 I-프레임에서 발생되는 정보량은 매우 크기 때문에 채널 대역폭이 제한된 고정 속도형 서비스(Constant bit rate, CBR) 전송에서는 I-프레임 전송에 많은 시간을 할애하게 된다. 특히, 양방향 영상통신에서의 송신장치는 데이터 전송지연을 고려해야 하기 때문에 정보량이 큰 I-프레임을 부호화하면 그 이후에 나타날 몇 개의 프레임을 스킵하고, 그 다음 프레임들을 P-프레임으로 부호화하는 것이 일반적이다.
종래의 방법을 통한 I-프레임 인코딩 및 디코딩에 걸리는 시간을 예를 들면 다음과 같다.
여기서 송신장치가 I-프레임을 인코딩하여 네트워크 전송에 걸리는 시간은 0으로 가정하며, 수신장치는 한 프레임의 디코딩이 끝나면 즉각 디스플레이가 가능하다고 가정한다.
Figure 112007068621419-PAT00001
상기 표에서의 x는 부호화되지 않고 스킵된 프레임이고, "^"는 첫번째 I-프레임을 디스플레이 할 수 있는 시점으로서 디코더는 제 6프레임 시간이 되서야 비로서 I-프레임을 디코딩하여 디스플레이 할 수 있다.
이처럼 종래의 I-프레임 인코딩 및 디코딩에서는 송신장치가 한 프레임의 모든 매크로 블럭을 I-모드로 인코딩하여 전송하면, 수신장치에서는 I-프레임 정보가 모두 수신될 때까지 기다렸다가 I-프레임 정보의 수신이 끝나면 그제서야 I-프레임을 디코딩하여 디스플레이하는 방법을 사용하고 있다. 이때, 수신장치에서 I-프레임을 모두 디코딩하기 전까지 사용자 화면에는 아무 것도 디스플레이 되지 않기 때 문에 사용자는 그 지연시간만큼 더 기다려야 첫번째 프레임을 화면으로 볼 수 있고, 이는 영상을 디스플레이하는 시간이 지연되어 사용자의 체감품질이 떨어지는 문제점이 있다.
따라서 본 발명은 상기 문제점을 해결하기 위한 것으로 I-프레임을 인코딩하고 디코딩하는 과정으로부터 발생되는 전송지연을 줄일 수 있는 송수신장치와 그 송수신방법을 제공하기 위한 것이다.
전술한 기술 과제를 해결하기 위한 본 발명의 실시 예에 따른 송신장치는,
외부로부터 입력되는 영상신호를 인트라 프레임으로 인코딩하는 인코딩부; 상기 인트라 프레임의 DCT(Discrete cosine transform) 계수정보를 우선순위에 따라 복수의 우선순위 계수로 분리하는 계수 분리부; 상기 복수의 우선순위 계수와 헤더 정보를 이용하여 제1 우선순위 정보와 하나이상의 제n-1 우선순위 정보로 분할된 복수의 우선순위 정보를 생성하는 데이터 분할부; 및 상기 하나이상의 제n-1 우선순위 정보에 우선순위 정보간을 연결하는 마커를 삽입하는 마커 삽입부를 포함한다.
그리고, 상기 분할된 복수의 우선순위 정보를 다중화하여 네트워크를 통해 송신하는 비트스트림 다중화부를 더 포함한다.
한편, 본 발명의 실시 예에 따른 송신장치가 인트라 프레임을 송신하는 방법은,
a) 외부로부터 입력되는 영상신호를 인트라 프레임으로 인코딩하는 단계; b) 상기 인트라 프레임을 우선순위에 따라서 기초영상을 재생하기 위한 최소한의 정보 를 갖는 제1 우선순위 정보와 상기 기초영상에 오버레이하는 하나이상의 제n-1 우선순위 정보로 분할하여 생성하는 단계; c) 상기 하나이상의 제n-1 우선순위 정보에 마커를 삽입하는 단계; 및 d) 상기 분할된 복수의 우선순위 정보를 다중화하여 전송하는 송신하는 단계를 포함한다.
한편, 본 발명의 실시 예에 따른 수신장치는,
네트워크를 통하여 수신되는 비트스트림을 역다중화하여 분할된 인트라 프레임을 획득하고, 상기 분할된 인트라 프레임에 해당하는 디코더로 각각 전달하는 비트스트림 역다중화부; 상기 분할된 인트라 프레임 중 제1 우선순위 정보를 디코딩하는 제1 우선순위 정보 디코더; 상기 분할된 인트라 프레임 중 제n-1 우선순위 정보의 마커를 검출하여 분할된 인트라 프레임을 우선순위대로 제n-1 우선순위 정보 디코더에 전달하는 마커 검출부; 상기 제n-1 우선순위 정보를 디코딩하는 제n-1 우선순위 정보 디코더; 및 상기 제1 우선순위 정보를 재생하고, 이후 순차적으로 제n-1 우선순위 정보를 오버레이시키는 재생 프레임 버퍼부를 포함한다.
한편, 본 발명의 실시 예에 따른 수신장치가 인트라 프레임을 수신하는 방법은,
a) 네트워크를 통하여 수신되는 비트스트림을 역다중화하여 분할된 인트라 프레임을 획득하고, 상기 분할된 인트라 프레임이 제1 우선순위 정보인지 판단하는 단계; b) 제 a) 단계에서의 판단결과 상기 제1 우선순위 정보인 경우 제1 우선순위 정보 디코더로 전달하는 단계; c) 상기 제1 우선순위 정보를 디코딩하여 인트라 프레임의 기초영상을 생성하는 단계; 및 d) 상기 생성된 인트라 프레임의 기초영상을 재생하는 단계를 포함한다.
그리고, e) 제 a) 단계에서의 판단결과 상기 제1 우선순위 정보가 아닌 경우 제n-1 우선순위 정보를 마커 검출부로 전달하는 단계; f) 상기 n-1 우선순위 정보의 마커를 검출하여 분할된 인트라 프레임을 우선순위대로 제n-1 우선순위 정보 디코더에 전달하는 단계; g) 상기 제n-1 우선순위 정보를 디코딩하여 오버레이 영상을 생성하는 단계; 및 h) 상기 생성된 오버레이 영상을 상기 우선순위에 따라 재생하는 단계를 더 포함한다.
전술한 구성에 의하여 본 발명은 I-프레임을 우선순위 별로 분할하여 전송하고, 상기 우선순위 별로 재생함으로써 I-프레임의 전송지연시간을 단축하는 특징이 있다. 특히, 실시간으로 스트림되는 영상 전송에서 I-프레임의 전송지연을 효과적으로 줄임으로써 사용자의 체감품질을 향상시키는 효과가 있다.
아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다. 또한, 명세서에 기재된 "…부", "…기", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
이제 본 발명의 실시 예에 따른 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화 방법에 대하여 도면을 참고로 하여 상세하게 설명한다.
도 1은 본 발명의 실시 예에 따른 송신장치를 나타낸 블록 구성도이다.
첨부된 도 1을 참조하면, 본 발명의 실시 예에 다른 송신장치(100)는 I-프레임 인코더(110), P-프레임 인코더(120), 계수 분리부(130), 데이터 분할부(140), 마커 삽입부(150) 및 비트스트림 다중화부(160)를 포함하고, 외부로부터 입력되는 영상신호의 I-프레임을 우선순위별로 분할하여 인코딩한 후 전송하는 기능을 가진다.
I-프레임 인코더(110)는 외부로부터 입력되는 영상신호를 I-프레임으로 인코딩 하여 계수 분리부(130)로 전달한다. 이때 영상신호는 촬영을 통하여 생성된 영상이나 외부로부터 수신된 디지털 저작물일 수 있다.
P-프레임 인코더(120)는 외부로부터 입력되는 영상신호를 P-프레임으로 인코딩하여 비트스트림 다중화부(160)로 전달한다.
계수 분리부(130)는 I-프레임 인코더(110)로부터 전달된 I-프레임에 대하여 DCT(Discrete cosine transform) 계수정보를 우선순위에 따라 분리하여 복수의 우 선순위 계수를 생성한 후 데이터 분할부(140)로 전달한다.
데이터 분할부(140)는 수신된 상기 복수의 우선순위 계수를 토대로 헤더 정보를 이용한 데이터 분할(Data partition) 기법을 적용하여 우선순위 정보를 분할하여 생성한다. 이때, 생성되는 우선순위정보는 계수 분리부(130)에서 분리된 계수 우선순위에 따라 분할되거나, 상기 분리된 계수 우선순위를 참조로 데이터 분할기가 우선순위를 재구성할 수 있다. 그럼, 도 2를 통하여 우선순위 정보를 구체적으로 설명한다.
도 2는 본 발명의 실시 예에 따른 8x8 DOC 계수에 대한 우선순위를 나타낸 참고도이다.
첨부된 도2를 살펴보면, 본 발명의 실시 예에 따른 8x8 DOC 계수에 대하여 4개로 분할된 우선순위 정보가 있으나 이에 한정되지 않으며, 여기서 분할되는 데이터 단위는 제n 우선순위 정보를 하나의 단위로 한다.
도 2의 본 발명의 실시 예에 따른 우선순위 정보의 구성을 예로 들면 다음과 같다.
제 1 우선순위 정보는 디코딩하여 기초영상을 재생할수 있는 필수정보로서 프레임 헤더, 제어 정보, 움직임 벡터, DCT DC 계수 등을 포함한다. 그리고, 제 2 우선순위 정보는 DCT 저주파 AC 계수, 제 3 우선순위 정보는 DCT 중간주파 AC 계수 및 제 4 우선순위 정보는 DCT 고주파 AC 계수로 각각 구성할 수 있다. 즉, 데이터 분할 기법은 UEP(unequal protection)을 위한 기법으로서 압축된 영상 정보를 중요한 정보(제1 우선순위 정보)와 덜 중요한 정보(제n-1 우선순위 정보)로 나누고 중 요한 정보를 우선적으로 재생시키고, 순차적인 데이터들의 오버레이를 통하여 영상의 질을 보정하여 영상데이터의 전송지연을 단축시키는 특징을 갖는다. 이때, 상기 제n-1 우선순위 정보들은 AC 저주파에서 고주파 순으로 계수 분리하여 우선순위를 생성할 수 있으며, 그 수는 한정되지 않는다.
마커 삽입부(150)는 데이터 분할부(140)에서 생성한 다수의 우선순위 정보에 각각 마커를 삽입하여 데이터 분할된 I-프레임 비트스트림을 생성한다. 이때, 마커는 이전 프레임의 끝단과 본 프레임의 상단을 연결하여 우선순위로 분할된 프레임을 연결하는 역할을 한다.
비트스트림 다중화부(160)는 I-프레임과 P-프레임 정보를 다중화하여 네트워크를 통해 수신장치로 전송한다. 이때, 마커 삽입부(150)에서 완성된 I-프레임의 비트스트림은 I-프레임 전송을 위하여 스킵되는(skipped) 프레임 시간에 전송할 수 있다.
한편, 도 3을 통하여 본 발명의 실시 예에 따른 수신장치를 설명하도록 한다.
도 3은 본 발명의 실시 예에 따른 수신장치를 나타낸 블록 구성도이다.
첨부된 도 3을 참조하면, 본 발명의 실시 예에 따른 수신장치(200)는 비트스트림 역다중화부(210), 제1 우선순위 정보 디코더(220), 마커 검출부(230), P-프레임 디코더(240), 제n-1 우선순위 정보 디코더(250), 및 재생 프레임 버퍼부(260)를 포함한다.
비트스트림 역다중화부(210)는 네트워크를 통해 수신된 비트스트림을 역다중 화하여 분할된 I-프레임과 P-프레임을 각각 해당 디코더로 전달한다. 이때, 데이터 분할된 I-프레임은 헤더정보를 확인하여 제1 우선순위 정보일 경우는 제1 우선순위 정보 디코더(220)로 전달하고, 제n-1 우선순위 정보일 경우는 마커 검출부(230)로 전송한다.
제1 우선순위 정보 디코더(220)는 I-프레임의 제1 우선순위 정보를 디코딩하여 재생 프레임 버퍼부(260)로 전송한다.
마커 검출부(230)는 I-프레임의 제n-1 우선순위 정보 마커를 검출하여 우선순위대로 제n-1 우선순위 정보 디코더(250)전달한다.
제n-1 우선순위 정보 디코더(250)는 마커 검출부(230)로부터 수신한 I-프레임의 제n-1 우선순위 정보를 순차적으로 디코딩하여 재생 프레임 버퍼부(260)로 전달한다. 즉, I-프레임의 제n-1 우선순위 정보는 상기 I-프레임의 제1 우선순위 정보에 이어서 우선순위에 따라 순차적으로 I-프레임에 오버레이된다.
P-프레임 디코더(240)는 수신된 P-프레임을 디코딩하여 재상 프레임 버퍼부(260)로 전송한다.
재생 프레임 버퍼부(260)는 각 디코더로부터 재생될 프레임을 저장하고, 디스플레이장치로 영상 재생하는 기능을 갖는 일종의 버퍼이다. 특히, 제1 우선순위 정보 디코더(220)로부터 I-프레임의 제1 우선순위 정보를 수신하면 우선적으로 영상 재생을 하고, 이후 I-프레임의 제n-1 우선순위 정보들의 우선순위에 따라 순차적으로 오버레이시킨다. 즉, I-프레임의 제1 우선순위 정보를 통하여 I-프레임의 초기영상을 우선적으로 재생하고, 이후 순차적인 오버레이를 통하여 영상을 보정함 으로써, I-프레임이 의도하는 영상을 완성할 수 있다. 결국, 오버레이는 I-프레임 정보가 끝날 때까지 계속되며, 이후 P-프레임 정보가 들어오면 재생 프레임 버퍼부(260)는 P-프레임 정보로 업데이트된다.
한편, 도 4를 통하여 본 발명의 실시 예에 따른 I-프레임 디스플레이 시간을 설명하도록 한다.
도 4는 본 발명의 실시 예에 따른 I-프레임 디스플레이 시간을 나타낸 예시도이다.
첨부된 도 4를 살펴보면, 본 발명의 실시 예에 따른 송신장치(100)는 I-프레임의 각 우선순위 정보를 I-프레임의 정보량으로 인해 스킵되는 다른 프레임 시간 동안 전송한다. 이때, I-프레임이 제1 기준프레임 시간(#1)에 우선순위 별로 부호화된다고 가정하면, I-프레임의 부호화가 끝날 때까지는 어떠한 정보도 전송하지 않고 있다가, I-프레임에 대한 부호화가 완료되면 데이터 분할 방법에 의해 우선순위 정보 단위로 분할되어 스킵된 제2 내지 제5 기준프레임시간(#2~#5)에 전송된다.
한편, 본 발명의 실시 예에 따른 수신장치(200)는 I-프레임의 제1 우선순위 정보를 수신하면 이를 제3 기준프레임 시간(#3)에 디코딩하여, 제4 기준프레임 시간(#4)에 재생한다. 이때 제1 우선순위 정보는 I-프레임에 대한 가장 기본적인 정보만을 포함하고 있으므로 디코더는 저화질의 기초영상을 만들게 된다. 그리고, 이후 제2,3,4 우선순위 정보가 수신되는 대로 디코딩하여 제1 우선순위 정보에 의해 만들어진 기초영상에 차례로 더해 오버레이(overlay) 시킨다. 그러면 우선순위 정보가 더해질 때마다 고화질로 보정되는 영상이 재생되고, I-프레임에 대한 모든 정 보가 디코딩 되고나면 완전한 I-프레임 영상이 재생된다.
종래의 방법에서는 I-프레임을 모두 수신한 후 재생을 함으로써 제8 기준프레임 시간에 재생되지만, 본 발명의 실시 예에 따라 I-프레임을 우선순위 별로 분할하여 전송하는 방법은 제4 기준프레임 시간에 재생함으로써 I-프레임의 전송지연시간을 단축하는 특징이 있다. 그리고 이는, 실시간으로 스트림되는 영상 전송시 전송지연을 효과적으로 줄임으로써 사용자의 체감품질을 향상시키는 효과가 있다.
한편, 도 5를 통하여 본 발명의 실시 예에 따른 송신장치가 I-프레임을 인코딩하여 전송하는 방법을 설명하도록 한다.
도 5는 본 발명의 실시 예에 따른 송신장치가 I-프레임을 인코딩하여 전송하는 방법을 나타낸 흐름도이다.
첨부된 도 5를 참조하면, 본 발명의 실시 예에 따른 송신장치(100)는 외부로부터 I-프레임으로 인코딩될 영상 프레임이 입력되면(S501), 상기 입력된 영상 프레임을 인코딩하고(S502), 발생된 DCT 계수에 따라 복수의 우선순위 계수로 분리한다(S503). 그리고, 상기 복수의 우선순위 계수로 분리된 I-프레임에 헤더 정보를 이용하여 복수로 분할된 우선순위 정보를 생성한다(S504). 이때 송신장치(100)의 데이터 분할부(140)는 수신장치(200)에서 우선적으로 디코딩되어 I-프레임의 기초영상을 생성할 수 있도록 영상 재생의 필수정보를 갖는 하나의 제1 우선순위 정보와 상기 기초영상에 오버레이하는 하나이상의 제n-1 우선순위 정보를 생성한다. 그리고, 상기 생성된 제n-1 우선순위 정보에 각각 마커를 삽입하여 분할된 프레임을 우선순위에 맞추어 연결할 수 있도록 한다(S505).
송신장치(100)는 상기 분할된 I-프레임의 우선순위 정보들을 비트스트림 다중화하여(S506), I-프레임 전송을 위해 스킵되는 프레임시간에 네트워크로 전송한다(S507).
한편, 도 6을 통하여 본 발명의 실시 예에 따른 수신장치가 I-프레임을 디코딩하여 재생하는 방법을 설명하도록 한다.
도 6은 본 발명의 실시 예에 따른 수신장치가 I-프레임을 디코딩하여 재생하는 방법을 나타낸 흐름도이다.
첨부된 도 6을 참조하면, 본 발명의 실시 예에 따른 수신장치(200)는 네트워크를 통하여 비트스트림을 수신하여(S601), 역다중화한다(S602). 그리고, 상기 역다중화한 프레임이 분할된 I-프레임이면 제1 우선순위 정보인지 판단하고(S603), 상기 판단결과 제1 우선순위 정보일 경우는 디코딩하여 재생 프레임 버퍼부(260)에 업데이트 함으로써(S604), I-프레임의 기초영상으로 재생한다(S607).
그런데, 상기 S603단계에서 분할된 I-프레임이 제1 우선순위 정보가 아닌 경우는 제n-1 순위에 따른 마커를 검출하여(S605), 순차적으로 디코딩하고 재생 프레임 버퍼부(260)에 오버레이 함으로써(S606), 상기 I-프레임의 기초영상을 보정한 화면으로 재생한다(S607).
이상에서는 본 발명의 실시 예에 대하여 설명하였으나, 본 발명은 상기한 실시 예에만 한정되는 것은 아니며 그 외의 다양한 변경이 가능하다.
예컨데, 도 4 및 도 5에 도시한 본 발명의 실시 예에서는 I-프레임의 부호화가 끝나고 나서 데이터 분할을 하는 것을 실시 예로 들었으나, 슬라이스나 GoB(group of block) 단위의 부호화가 끝나고 나서 데이터 분할 수 있다. 그러면, I-프레임에 대한 우선순위 정보의 전송이 도 4 및 도 5에 예시한 것보다 더 빨리 일어나는 이점이 있다.
이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.
도 1은 본 발명의 실시 예에 따른 송신장치를 나타낸 블록 구성도이다.
도 2는 본 발명의 실시 예에 따른 8x8 DOC 계수에 대한 우선순위를 나타낸 예시도이다.
도 3은 본 발명의 실시 예에 따른 수신장치를 나타낸 블록 구성도이다.
도 4는 본 발명의 실시 예에 따른 I-프레임 디스플레이 시간을 나타낸 예시도이다.
도 5는 본 발명의 실시 예에 따른 송신장치가 I-프레임을 인코딩하여 전송하는 방법을 나타낸 흐름도이다.
도 6은 본 발명의 실시 예에 따른 수신장치가 I-프레임을 디코딩하여 재생하는 방법을 나타낸 흐름도이다.

Claims (16)

  1. 외부로부터 입력되는 영상신호를 인트라 프레임으로 인코딩하는 인코딩부;
    상기 인트라 프레임의 DCT(Discrete cosine transform) 계수정보를 우선순위에 따라 복수의 우선순위 계수로 분리하는 계수 분리부;
    상기 복수의 우선순위 계수와 헤더 정보를 이용하여 제1 우선순위 정보와 하나이상의 제n-1 우선순위 정보로 분할된 복수의 우선순위 정보를 생성하는 데이터 분할부; 및
    상기 하나이상의 제n-1 우선순위 정보에 우선순위 정보간을 연결하는 마커를 삽입하는 마커 삽입부
    를 포함하는 저지연 인트라 프레임 송신장치.
  2. 제 1 항에 있어서,
    상기 분할된 복수의 우선순위 정보를 다중화하여 네트워크를 통해 송신하는 비트스트림 다중화부를 더 포함하는 것을 특징으로 하는 저지연 인트라 프레임 송신장치.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 계수 분리부는,
    DCT DC 계수와 DCT AC 계수로 분리되며, 상기 DCT AC 계수는 저주파에서 고 주파순으로 우선순위가 분리되는 것을 특징으로 하는 저지연 인트라 프레임 송신장치.
  4. 제 3 항에 있어서,
    상기 제1 우선순위 정보는,
    프레임 헤더, 제어 정보, 움직임 벡터, DCT DC 계수 중 어느 하나를 포함하는 것을 특징으로 하는 저지연 인트라 프레임 송신장치.
  5. 제 3 항에 있어서,
    상기 제n-1 우선순위 정보는,
    상기 제1 우선순위 정보에 순차적으로 오버레이 하여, 상기 기초영상을 보정하는 것을 특징으로 하는 저지연 인트라 프레임 송신장치.
  6. 제 3 항에 있어서,
    상기 마커는,
    우선순위에 따른 자신의 이전순위 프레임의 끝단과 자신의 프레임 상단을 연결하도록 식별하는 기능을 갖는 것을 특징으로 하는 저지연 인트라 프레임 송신장치.
  7. 디지털 멀티미디어 영상을 송신하는 송신장치가 인트라 프레임을 송신하는 방법에 있어서,
    a) 외부로부터 입력되는 영상신호를 인트라 프레임으로 인코딩하는 단계;
    b) 상기 인트라 프레임을 우선순위에 따라서 기초영상을 재생하기 위한 최소한의 정보를 갖는 제1 우선순위 정보와 상기 기초영상에 오버레이하는 하나이상의 제n-1 우선순위 정보로 분할하여 생성하는 단계;
    c) 상기 제n-1 우선순위 정보에 마커를 삽입하는 단계; 및
    d) 상기 분할한 우선순위 정보를 다중화하여 전송하는 송신하는 단계
    를 포함하는 인트라 프레임 송신 방법.
  8. 제 7 항에 있어서,
    상기 b) 단계 이전에,
    e) 상기 a) 단계에서 인코딩된 인트라 프레임의 DCT(Discrete cosine transform) 계수정보를 우선순위에 따라 복수의 우선순위 계수로 분리하는 단계를 더 포함하는 것을 특징으로 하는 인트라 프레임 송신 방법.
  9. 제 7 항 또는 제 8 항에 있어서,
    상기 b) 단계에서 최소한의 정보는,
    프레임 헤더, 제어 정보, 움직임 벡터, DCT DC 계수 중 어느 하나를 포함하는 것을 특징으로 하는 인트라 프레임 송신 방법.
  10. 제 9 항에 있어서,
    상기 d) 단계는,
    상기 인트라 프레임 송신을 위해 스킵되는 프레임시간에 전송하는 것을 특징으로 하는 인트라 프레임 송신 방법.
  11. 네트워크를 통하여 수신되는 비트스트림을 역다중화하여 분할된 인트라 프레임을 획득하고, 상기 분할된 인트라 프레임에 해당하는 디코더로 각각 전달하는 비트스트림 역다중화부;
    상기 분할된 인트라 프레임 중 제1 우선순위 정보를 디코딩하는 제1 우선순위 정보 디코더;
    상기 분할된 인트라 프레임 중 제n-1 우선순위 정보의 마커를 검출하여 분할된 인트라 프레임을 우선순위대로 제n-1 우선순위 정보 디코더에 전달하는 마커 검출부;
    상기 제n-1 우선순위 정보를 디코딩하는 제n-1 우선순위 정보 디코더; 및
    상기 제1 우선순위 정보를 재생하고, 이후 순차적으로 제n-1 우선순위 정보를 오버레이시키는 재생 프레임 버퍼부
    를 포함하는 저지연 인트라 프레임 수신장치.
  12. 제 11 항에 있어서,
    상기 비트스트림 역다중화부는,
    분할된 인트라 프레임의 헤더정보를 확인하여 제1 우선순위 디코더와 제n-1 우선순위 정보를 판단하는 것을 특징으로 하는 인트라 프레임 수신장치.
  13. 제 11 항에 있어서,
    상기 마커 검출부는,
    상기 제n-1 우선순위 정보의 마커를 각각 검출하여 우선순위대로 프레임간을 연결하는 것을 특징으로 하는 인트라 프레임 수신장치.
  14. 제 11 항에 있어서,
    상기 제1 우선순위 정보 디코더는,
    상기 제1 우선순위 정보를 디코딩하여 인트라 프레임의 기초영상을 생성하는 것을 특징으로 하는 인트라 프레임 수신장치.
  15. 디지털 멀티미디어 영상을 수신하는 수신장치가 인트라 프레임을 수신하는 방법에 있어서,
    a) 네트워크를 통하여 수신되는 비트스트림을 역다중화하여 분할된 인트라 프레임을 획득하고, 상기 분할된 인트라 프레임이 제1 우선순위 정보인지 판단하는 단계;
    b) 제 a) 단계에서의 판단결과 상기 제1 우선순위 정보인 경우 제1 우선순위 정보 디코더로 전달하는 단계;
    c) 상기 제1 우선순위 정보를 디코딩하여 인트라 프레임의 기초영상을 생성하는 단계; 및
    d) 상기 생성된 인트라 프레임의 기초영상을 재생하는 단계
    를 포함하는 인트라 프레임 수신방법.
  16. 제 15 항에 있어서,
    상기 a) 단계에서의 판단결과 상기 제1 우선순위 정보가 아닌경우,
    e) 상기 제n-1 우선순위 정보를 마커 검출부로 전달하는 단계;
    f) 상기 n-1 우선순위 정보의 마커를 검출하여 분할된 인트라 프레임을 우선순위대로 제n-1 우선순위 정보 디코더에 전달하는 단계;
    g) 상기 제n-1 우선순위 정보를 디코딩하여 오버레이 영상을 생성하는 단계; 및
    h) 상기 생성된 오버레이 영상을 상기 우선순위에 따라 재생하는 단계
    를 더 포함하는 인트라 프레임 수신방법.
KR1020070096319A 2007-09-21 2007-09-21 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법 KR20090030779A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070096319A KR20090030779A (ko) 2007-09-21 2007-09-21 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070096319A KR20090030779A (ko) 2007-09-21 2007-09-21 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법

Publications (1)

Publication Number Publication Date
KR20090030779A true KR20090030779A (ko) 2009-03-25

Family

ID=40697029

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070096319A KR20090030779A (ko) 2007-09-21 2007-09-21 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법

Country Status (1)

Country Link
KR (1) KR20090030779A (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012023833A2 (en) * 2010-08-19 2012-02-23 Samsung Electronics Co., Ltd. Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
WO2016076515A1 (ko) * 2014-11-13 2016-05-19 삼성전자 주식회사 영상의 주파수 특성 정보를 포함하는 메타 데이터를 생성하는 방법 및 장치
KR20180043112A (ko) * 2016-10-19 2018-04-27 차성웅 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012023833A2 (en) * 2010-08-19 2012-02-23 Samsung Electronics Co., Ltd. Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
WO2012023833A3 (en) * 2010-08-19 2012-05-03 Samsung Electronics Co., Ltd. Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
US8661152B2 (en) 2010-08-19 2014-02-25 Samsung Electronics Co., Ltd Method and apparatus for reducing deterioration of a quality of experience of a multimedia service in a multimedia system
WO2016076515A1 (ko) * 2014-11-13 2016-05-19 삼성전자 주식회사 영상의 주파수 특성 정보를 포함하는 메타 데이터를 생성하는 방법 및 장치
US10417766B2 (en) 2014-11-13 2019-09-17 Samsung Electronics Co., Ltd. Method and device for generating metadata including frequency characteristic information of image
KR20180043112A (ko) * 2016-10-19 2018-04-27 차성웅 가상 현실을 실현하는 사용자 장치가 컨텐츠를 제공하는 외부 장치와 연동하도록 하는 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체

Similar Documents

Publication Publication Date Title
JP5770345B2 (ja) ビデオデータをストリーミングするためのビデオ切替え
KR101944565B1 (ko) 비디오 인코딩 및 디코딩시의 레이턴시 저감 기법
EP3038367B1 (en) Streaming encoded video data
CN107852515B (zh) 视频流传输方法、装置、存储介质以及视频会议系统
US6674477B1 (en) Method and apparatus for processing a data series including processing priority data
EP2601790B1 (en) Signaling attributes for network-streamed video data
US9843844B2 (en) Network streaming of media data
KR100711635B1 (ko) 화상 부호화 방법
KR20060024416A (ko) 압축된 비디오의 고속 채널 변경을 가능하게 하기 위한인코딩 방법 및 장치
JP2016092837A (ja) 映像圧縮装置、映像再生装置および映像配信システム
KR20090030779A (ko) 데이터 분할 방식을 이용한 저지연 인트라 프레임 부호화방법
KR100780844B1 (ko) 다시점 화상 복호화기, 다시점 화상 데이터 처리 시스템,다시점 화상 데이터 처리 방법 및 이를 수행하는프로그램을 기록한 기록매체
Yoshitome et al. A flexible video CODEC system for super high resolution video
Murugan Multiplexing H. 264 video with AAC audio bit streams, demultiplexing and achieving lip synchronization during playback
KR20130053444A (ko) 비디오 구성요소들을 멀티플렉싱하기 위한 데이터의 시그널링
Murugan Multiplexing H. 264/AVC Video with MPEG-AAC Audio

Legal Events

Date Code Title Description
WITN Withdrawal due to no request for examination