KR101014667B1 - 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법 - Google Patents

스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법 Download PDF

Info

Publication number
KR101014667B1
KR101014667B1 KR1020040037690A KR20040037690A KR101014667B1 KR 101014667 B1 KR101014667 B1 KR 101014667B1 KR 1020040037690 A KR1020040037690 A KR 1020040037690A KR 20040037690 A KR20040037690 A KR 20040037690A KR 101014667 B1 KR101014667 B1 KR 101014667B1
Authority
KR
South Korea
Prior art keywords
image
pixel value
encoding
bits
decoded
Prior art date
Application number
KR1020040037690A
Other languages
English (en)
Other versions
KR20050112588A (ko
Inventor
김해광
Original Assignee
삼성전자주식회사
세종대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사, 세종대학교산학협력단 filed Critical 삼성전자주식회사
Priority to KR1020040037690A priority Critical patent/KR101014667B1/ko
Priority to US11/076,012 priority patent/US8194748B2/en
Priority to CNB2005100721646A priority patent/CN100448294C/zh
Priority to EP05253233A priority patent/EP1601204A1/en
Publication of KR20050112588A publication Critical patent/KR20050112588A/ko
Application granted granted Critical
Publication of KR101014667B1 publication Critical patent/KR101014667B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H04N19/36—Scalability techniques involving formatting the layers as a function of picture distortion after decoding, e.g. signal-to-noise [SNR] scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

8 비트 이상의 동영상 데이터의 스케일러블 인코딩, 디코딩 장치 및 그 방법이 개시된다. 본 발명에 따라 스케일러블 동영상 인코더는, 원 영상의 픽셀값을 소정의 비트로 클리핑하는 픽셀값 클리핑부; 상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 기본계층 인코더; 상기 인코딩된 영상을 디코딩한 기본계층 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확장하는 픽셀값 확장부; 및 상기 원 영상에서 상기 픽셀값 확장된 복호영상을 빼서 만든 향상계층 영상을 소정의 인코딩 방법에 따라 인코딩하는 향상계층 인코더를 포함하는 것을 특징으로 한다. 이에 의해, 8 비트 동영상 인코딩 및 디코딩 기술을 이용하여 n 비트의 동영상을 신축적으로 인코딩하여 저장 및 전송하고, 이를 디코딩하여 재생할 수 있다.

Description

스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법 {Video encoding, decoding apparatus and method}
도 1은 동영상 데이터를 구성하는 프레임을 도시한 도면,
도 2는 동영상 인코더의 블록도,
도 3은 동영상 디코더의 블록도,
도 4는 본 발명에 따른 스케일러블 동영상 인코더의 블록도,
도 5는 픽셀값 클리핑부에서 n 비트 픽셀값을 8 비트 데이터로 만드는 것을 도시한 도면,
도 6은 픽셀값 확장부에서 8 비트 픽셀값을 n 비트 데이터로 만드는 것을 도시한 도면,
도 7은 본 발명에 따른 스케일러블 동영상 디코더의 블록도,
도 8은 본 발명에 따른 스케일러블 동영상 인코딩 방법의 플로우차트,
도 9는 본 발명에 따른 스케일러블 동영상 디코딩 방법의 플로우차트이다.
본 발명은 동영상 데이터의 스케일러블 인코딩 및 디코딩에 관한 것으로, 보 다 상세하게는 8 비트 이상의 동영상 데이터의 스케일러블 인코딩, 디코딩 장치 및 그 방법에 관한 것이다.
종래의 MPEG-2, MPEG-4, JVT 등의 동영상 부호화 기술들은 8비트 픽셀로 구성된 동영상의 부호화 방법에 대하여 기술하고 있고, MPEG-4에서는 8 보다 큰 n 비트 픽셀로 구성된 동영상을 DCT 계수의 동적 범위 확장, 인트라 DC 예측 테이블 확장 등의 방법을 사용하여 n 비트의 동영상을 인코딩 및 디코딩하는 방법을 개시하고 있다. 그러나, 이러한 종래의 방법은 12비트 픽셀의 동영상의 경우, 공간 영역에서 움직임 예측과 보상 등을 위한 12비트 기반의 복잡한 연산과, 주파수 공간 에서 16(12+4) 비트의 연산이 필요하게 되어, 종래의 8비트 기반 동영상 부호기와 복호기와는 매우 상이한 복잡한 복호기와 부호기를 필요로 하게 된다. 또한 종래의 방법은 비트 길이를 기반으로 하는 신축적인 인코딩 및 디코딩을 지원하지 않는다.
따라서, 본 발명이 이루고자 하는 기술적 과제는, 종래의 8 비트 픽셀값을 갖는 동영상의 인코딩 및 디코딩 기술을 이용하여, 8 비트 이상의 픽셀값을 갖는 동영상을 신축적으로 인코딩하고 디코딩하는 장치 및 방법을 제공하는 것이다.
상기 기술적 과제는 본 발명에 따라, 원 영상의 픽셀값을 소정의 비트로 클리핑하는 픽셀값 클리핑부; 상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 기본계층 인코더; 상기 인코딩된 영상을 디코딩한 기본계층 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확 장하는 픽셀값 확장부; 및 상기 원 영상에서 상기 픽셀값 확장된 복호영상을 빼서 만든 향상계층 영상을 소정의 인코딩 방법에 따라 인코딩하는 향상계층 인코더를 포함하는 것을 특징으로 하는 스케일러블 동영상 인코더에 의해 달성된다.
상기 픽셀값 클리핑부는, 상기 원 영상의 픽셀값의 최상위 비트(MSB)에서부터 상기 소정의 비트 개수만큼을 잘라내어 상기 소정의 비트의 픽셀값으로 만드는 것이 바람직하다.
상기 픽셀값 확장부는, 상기 복호영상 저장부로부터 디코딩된 영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상과 동일한 비트수로 확장하는 것이 바람직하다.
또한, 상기 기본계층 인코더와 향상계층 인코더는 8 비트 단위의 동영상 인코딩 방법들 중 어느 한가지 방법을 사용하는 인코더인 것이 바람직하다.
또한, 상기 기술적 과제는 원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 수신하여 디코딩하는 기본계층 디코더; 상기 원영상에서 상기 기본계층 비트 스트림이 디코딩된 영상을 픽셀값 확장한 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 디코딩하는 향상계층 디코더; 및 상기 디코딩된 기본계층 영상을 입력받아, 그 픽셀값을 상기 원 영상의 비트수와 동일하게 확장하는 픽셀값 확장부를 포함하는 것을 특징으로 하는 스케일러블 동영상 디코더에 의해서도 달성된다.
상기 향상계층 디코더에서 디코딩된 영상과 상기 픽셀값 확장부에서 출력된 영상을 합쳐 출력하는 가산부를 더 포함하는 것이 바람직하다.
한편, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 (a) 원 영상의 픽셀값을 소정의 비트로 클리핑하는 단계; (b) 상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 단계; (c) 상기 인코딩된 영상을 디코딩한 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확장하는 단계; 및 (d) 상기 원 영상에서 상기 픽셀값 확장된 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법에 의해서도 달성된다.
또한, 본 발명의 다른 분야에 따르면, 상기 기술적 과제는 (a) 원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 수신하여 디코딩하는 단계; (b) 상기 원영상에서 기본계층 비트 스트림이 디코딩된 영상을 픽셀값 확장한 복호영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 디코딩하는 단계; 및 (c) 상기 디코딩된 기본계층 영상을 입력받아, 그 픽셀값을 상기 원 영상의 비트수와 동일하게 확장하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 디코딩 방법에 의해서도 달성된다.
또한, (d) 상기 디코딩된 향상계층영상과 상기 확장된 기본계층영상을 합쳐 출력하는 단계를 더 포함하는 것이 바람직하다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대해 상세히 설명한다.
도 1은 동영상을 구성하는 동영상 프레임을 도시한 도면이다.
동영상 데이터의 인코딩 및 디코딩은 움직임 예측(motion prediction) 기술을 기반으로 이루어진다. 예측은 시간 축을 기준으로 과거 프레임을 참조하거나 과거 프레임과 미래 프레임을 모두 참조하는 방식으로 수행된다. 현재 프레임을 부호화하거나 복호화하는데 참조되는 프레임을 참조 프레임이라고 한다. 그리고, 블록 기반 동영상 인코딩에서 동영상을 구성하는 하나의 정지영상(프레임)은 매크로블럭과 매크로블럭을 구성하는 서브블럭으로 나누어져, 블록단위로 움직임이 예측되고 인코딩이 수행된다.
도 1을 참조하면, 동영상 데이터는 일련의 정지영상으로 구성되어 있으며, 정지영상들은 GOP(Group of Picture) 단위로 구분되어 있다. 정지영상 하나하나를 프레임이라 한다. 하나의 GOP에는 I 프레임(110), P 프레임(120), B(130) 프레임 형태가 포함된다. I 프레임(110)은 참조 영상을 사용하지 않고 자체적으로 인코딩되는 프레임이며, P 프레임(120)과 B 프레임(130)은 참조 영상을 사용하여 움직임 추정 및 보상을 수행하여 인코딩되는 프레임이다.
도 2는 일반적인 동영상 인코더의 블록도이다.
동영상 인코더는 움직임 추정부(Motion Estimator, 210), 움직임 보상부(Motion Compensator, 220), DCT 수행부(230), 양자화부(Quantizer, 240), 엔트로피 코딩부(250), 역양자화부(260), IDCT 수행부(270), 참조영상 저장부(280) 및 다중화부(multiplexer, 290)를 구비한다.
움직임 추정부(210)는 현재 프레임의 매크로 블록의 움직임 예측치를 참조 프레임에서 찾아 그 움직임의 차이를 움직임 벡터로써 출력한다. 즉, 찾고자 하는 매크로 블록을 참조 프레임의 소정의 탐색영역내에서 탐색하여, 가장 유사한 매크로 블록을 찾아 그 이동정도를 움직임 벡터로써 출력한다. 움직임 보상부(220)는 구해진 움직임 벡터에 해당하는 예측 매크로 블럭을 참조 프레임으로부터 얻는다.
원 영상 프레임의 매크로 블록에서 움직임 보상이 수행된 참조 영상 프레임의 예측 매크로 블록을 빼서 그 차이를 DCT 수행부(230)에서 DCT하고, 그 DCT 계수가 양자화부(240)에 의해서 양자화되어 엔트로피 코딩부(250)를 거쳐 텍스쳐 정보로 출력된다. 이 텍스쳐 정보는 움직임 벡터와 함께 다중화부(290)에서 다중화되어 인코딩된 비트 스트림을 구성한다. I 프레임의 경우, 움직임 예측 및 움직임 보상없이 원 영상 프레임이 매크로 블록을 DCT 수행부(230)에서 DCT하고, 그 DCT 계수가 양자화부(240)에 의해서 양자화되어 엔트로피 코딩부(250)를 거친후 텍스쳐 정보로 인코딩된 비트 스트림을 구성한다.
원 영상 프레임의 매크로 블록에서 움직임 보상된 참조영상 프레임의 매크로 블록을 뺀 것을 잔차(residual)이라고 하는데 인코딩시의 데이터량을 줄이기 위해서 이 잔차값을 부호화한다. 양자화 과정에서 에러가 발생하므로, 비트 스트림으로 만들어지는 동영상 데이터에는 DCT 및 양자화 과정에서 발생한 에러가 포함되어 있다.
그리고 참조 영상을 얻기 위해, 양자화된 잔차 신호는 역양자화부(260)와 IDCT 수행부(270)를 거쳐 움직임 예측 및 보상이 수행된 영상과 합쳐져 참조 영상 저장부(280)에 저장된다. I 프레임의 경우, 움직임 보상없이 역양자화부(260)와 IDCT 수행부(270)를 거쳐 참조영상 저장부(280)에 저장된다. 그러면, 참조영상 저장부(280)에 저장된 참조영상은 원 영상에서 DCT 및 양자화 과정에서 발생한 부호화 에러를 포함한 영상이 된다.
즉, 원 영상을 A 라고 하고, 움직임 추정과 보상이 수행되어 예측된 영상을 B 라고 하면 DCT 수행부(230)는 원 영상과 예측된 영상과의 차이인 A-B를 입력받아 DCT를 수행한다. 그리고 양자화 과정에서 에러성분(E)이 발생하여 엔트로피 코딩부(250)를 거쳐 출력되는 비트 스트림은 (A-B)+E 가 된다. 그리고 참조영상 저장부(280)는 (A-B)+E와 예측된 영상 B를 더하여 저장하므로 원 영상에서 에러가 포함된 영상인 A+E를 참조영상으로 저장한다.
도 3은 일반적인 동영상 디코더의 블록도이다.
동영상 디코더는 움직임 보상부(310), IDCT 수행부(320), 역양자화부(330), 엔트로피 디코딩부(340), 참조영상 저장부(350) 및 역다중화부(360)를 구비한다.
인코딩된 동영상 비트스트림은 역다중화부(360)에서 움직임 벡터와 텍스쳐 정보로 분리되며, 움직임 벡터는 움직임 보상부(310)로 입력된다. 이와 함께 텍스쳐 정보는 엔트로피 코딩부(340)와 역양자화부(330) 및 IDCT 수행부(320)를 거쳐 디코딩된다. 움직임 보상부(310)는 참조영상 저장부(350)로부터 참조영상 정보와 인코더로부터 움직임 벡터 정보를 수신하여 예측 영상을 만들어 출력하면, 이 영상과 디코딩된 영상이 합쳐져서 디스플레이 된다.
도 4는 본 발명에 따른 스케일러블 동영상 인코더의 블록도이다.
스케일러블 동영상 인코더는 기본계층 인코더(410)와 향상계층 인코더(420), 그리고 픽셀값 클리핑부(430) 및 픽셀값 확장부(440)를 구비한다.
입력되는 원 동영상의 어떤 비트의 동영상일 수도 있고, 기본계층 인코더(410)와 향상계층 인코더(420)도 어떤 비트를 처리하는 인코더일 수도 있으나, 본 실시예에서는 n 비트 동영상을 8 비트로 처리하는 스케일러블 코딩에 대하여 설명한다. n 비트의 원 영상은 픽셀값 클리핑부(430)에 의해 8 비트 영상으로 변환되며, 이 8 비트 동영상은 일반적인 8 비트 동영상 인코딩 방법에 의해 인코딩을 수행하는 기본계층 인코더(410)에 의해 인코딩 된다.
그리고, 기본계층 인코더(410)에서의 인코딩 과정시에 움직임 추정 및 보상에 사용하기 위해 디코딩된 영상은 참조영상 저장부에 입력되며, 또한 향상 계층 비트 스트림을 만들기 위해 픽셀값 확장부(440)로 입력되어 원 영상의 비트수와 동일하게 n 비트로 확장된다. 이렇게 확장된 영상을 원 영상에서 빼서 향상계층 인코더(420)로 전달한다. 향상계층 인코더(420)도 일반적인 8비트 동영상 인코더로서 움직임 예측에 기초하여 인코딩을 수행한다. 본 실시예에서, 기본계층 인코더(410)와 향상계층 인코더(420)는 MPEG-1, MPEG-2, MPEG-4, H.264 등의 인코더를 사용할 수 있다.
도 5는 픽셀값 클리핑부에서 n 비트 픽셀값을 8 비트 데이터로 만드는 것을 도시한 도면이다.
n 비트 픽셀값을 8 비트로 만들기 위해서 n 비트 픽셀값의 상위 8 비트만을 클리핑하여 8 비트 픽셀로 만든다. 즉, 8 비트 클리핑에 의해 원 영상 픽셀값의 최상위 비트(Most Significant Bit, MSB) 8 비트로 구성되는 8 비트 픽셀을 만든다.
도 6은 픽셀값 확장부에서 8 비트 픽셀값을 n 비트 데이터로 만드는 것을 도시한 도면이다.
8 비트 데이터를 n 비트로 확장하기 위해서, 8 비트 데이터를 n 비트 데이터의 상위 8 비트로 옮기고, 나머지 비트는 0 으로 채운다. 이렇게 하여 8 비트 픽셀값을 n 비트의 픽셀로 만들 수 있다.
도 7은 본 발명에 따른 스케일러블 동영상 디코더의 블록도이다.
스케일러블 동영상 디코더는 기본계층 디코더(710)와 향상계층 디코더(720), 픽셀값 확장부(730) 및 가산부(740)를 구비한다.
본 실시예에서의 기본계층 디코더(710)와 향상계층 디코더(720)는 일반적인 8 비트 동영상 디코더인, MPEG-1, MPEG-2, MPEG-4, H.264 등의 디코더를 사용할 수 있다.
인코딩된 기본계층 비트 스트림을 입력받아 기본계층 디코더(710)는 8 비트 동영상을 만들고, 참조 영상 저장부에 저장하며, 또한 디코딩된 8 비트 동영상을 n 비트 동영상으로 만들기 위해서 픽셀값 확장부(730)로 출력한다. 픽셀값 확장부(730)는 8 비트 데이터를 n 비트 데이터로 변환한다. 변환하는 것은 도 6을 참조하여 상술한 바와 같다.
향상계층 디코더(720)는 상기 도 4를 참조하여 설명한 바에 의해 만들어진 향상계층 비트 스트림을 수신하여 움직임 예측에 기초하여 디코딩을 수행한다. 가산부(740)는 픽셀값 확장부(730)에 의해 만들어진 영상과, 향상계층 디코더(720)에서 출력된 영상을 합하여 n 비트 영상을 출력한다. 경우에 따라서 기본계층 디코더(710)에 의해 디코딩된 영상만이 디코딩될 수도 있다. 즉, 네트워크의 상태가 좋지 않거나, 에러가 많이 발생한 경우에는 화질은 다소 떨어지나 기본계층의 비트 스트림만을 디코딩하여 출력할 수 있다. 따라서 스케일러블 디코딩이 가능하다.
도 8은 본 발명에 따른 스케일러블 동영상 인코딩 방법의 플로우차트이다.
우선, 원 영상의 픽셀값을 디코더가 처리하는 비트의 픽셀로 만든다(S810). 여기에서는 일예로 8 비트 디코더를 사용하였으므로 8 비트로 클리핑한다. 그리고, 클리핑하는 방법의 일예로 도 5를 참조하여 상술한 바와 같다. 원 영상의 픽셀값의 최상위 비트(MSB)에서부터 8 비트를 잘라내어 8 비트의 픽셀값으로 만든다.
그리고, 이 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 출력한다(S820). 인코딩 방법은 손실부호화 방법이 될 수 있다. 다음으로, 상기 인코딩된 영상을 디코딩한다(S830). 이 디코딩된 영상을 입력받아 그 픽셀값을 원 영상의 비트수로 확장한다(S840). 이 경우에는, 디코딩된 영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상과 동일한 비트수로 확장한다. 그리고, 원 영상에서 픽셀값 확장된 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 출력한다(S850).
도 9는 본 발명에 따른 스케일러블 동영상 디코딩 방법의 플로우차트이다.
원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트 림을 수신하여 디코딩하여 디코딩된 기본 계층 영상을 얻는다(S910). 그리고, 향상계층 비트 스트림도 수신하여 디코딩하여 디코딩된 향상 계층 영상을 얻는다(S920).
디코딩된 향상계층 영상을 입력받아, 그 픽셀값을 원 영상의 비트수로 확장한다(S930). 확장하는 방법은 상술한 바와 같다. 그리고, 이렇게 디코딩된 기본계층 영상과 향상계층 영상을 합쳐 출력한다(S940). 네트워크의 상태가 좋지 않거나 수신된 비트 스트림의 에러가 많은 경우에는 화질은 조금 떨어지지만 기본계층 영상만을 디코딩하여 출력할 수 있다.
한편, 전술한 스케일러블 동영상 인코딩 방법 및 디코딩 방법은 컴퓨터 프로그램으로 작성 가능하다. 상기 프로그램을 구성하는 코드들 및 코드 세그먼트들은 당해 분야의 컴퓨터 프로그래머에 의하여 용이하게 추론될 수 있다. 또한, 상기 프로그램은 컴퓨터가 읽을 수 있는 정보저장매체(computer readable media)에 저장되고, 컴퓨터에 의하여 읽혀지고 실행됨으로써 스케일러블 동영상 인코딩 방법 및 디코딩 방법을 구현한다. 상기 정보저장매체는 자기 기록매체, 광 기록매체, 및 캐리어 웨이브 매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
전술한 바와 같이 본 발명에 따르면, 8 비트 동영상 인코딩 및 디코딩 기술을 이용하여 n 비트의 동영상을 신축적으로 인코딩하여 저장 및 전송하고, 이를 디코딩하여 재생할 수 있다.

Claims (17)

  1. 원 영상의 픽셀값을 소정의 비트로 클리핑하는 픽셀값 클리핑부;
    상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 기본계층 인코더;
    상기 인코딩된 영상을 디코딩한 기본계층 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확장하는 픽셀값 확장부; 및
    상기 원 영상에서 상기 픽셀값 확장된 복호영상을 빼서 만든 향상계층 영상을 소정의 인코딩 방법에 따라 인코딩하는 향상계층 인코더를 포함하는 것을 특징으로 하는 스케일러블 동영상 인코더.
  2. 제1항에 있어서, 상기 픽셀값 클리핑부는
    상기 원 영상의 픽셀값의 최상위 비트(MSB)에서부터 상기 소정의 비트 개수만큼을 잘라내어 상기 소정의 비트의 픽셀값으로 만드는 것을 특징으로 하는 스케 일러블 동영상 인코더.
  3. 제1항에 있어서, 상기 픽셀값 확장부는
    상기 디코딩된 기본계층영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상과 동일한 비트수로 확장하는 것을 특징으로 하는 스케일러블 동영상 인코더.
  4. 제1항에 있어서,
    상기 기본계층 인코더와 향상계층 인코더는 8 비트 단위의 동영상 인코딩 방법들 중 어느 한가지 방법을 사용하는 인코더인 것을 특징으로 하는 스케일러블 동영상 인코더.
  5. 원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 수신하여 디코딩하는 기본계층 디코더;
    상기 원영상에서 상기 기본계층 비트 스트림이 디코딩된 영상을 픽셀값 확장한 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 디코딩하는 향상계층 디코더; 및
    상기 디코딩된 기본계층 영상을 입력받아, 그 픽셀값을 상기 원 영상의 비트수와 동일하게 확장하는 픽셀값 확장부를 포함하는 것을 특징으로 하는 스케일러블 동영상 디코더.
  6. 제5항에 있어서,
    상기 향상계층 디코더에서 디코딩된 영상과 상기 픽셀값 확장부에서 출력된 영상을 합쳐 출력하는 가산부를 더 포함하는 것을 특징으로 하는 스케일러블 동영상 디코더.
  7. 제5항에 있어서, 상기 픽셀값 확장부는
    상기 기본계층 디코더로부터 디코딩된 영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상의 비트수로 확장하는 것을 특징으로 하는 스케일러블 동영상 디코더.
  8. 제5항에 있어서,
    상기 기본계층 디코더와 향상계층 디코더는 8 비트 디코더인 것을 특징으로 하는 스케일러블 동영상 디코더.
  9. (a) 원 영상의 픽셀값을 소정의 비트로 클리핑하는 단계;
    (b) 상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 단계;
    (c) 상기 인코딩된 영상을 디코딩한 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확장하는 단계; 및
    (d) 상기 원 영상에서 상기 픽셀값 확장된 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법.
  10. 제9항에 있어서, 상기 (a) 단계는
    상기 원 영상의 픽셀값의 최상위 비트(MSB)에서부터 상기 소정의 비트 개수만큼을 잘라내어 상기 소정의 비트의 픽셀값으로 만드는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법.
  11. 제9항에 있어서, 상기 (d) 단계는
    상기 디코딩된 영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상과 동일한 비트수로 확장하는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법.
  12. 제9항에 있어서,
    상기 소정의 비트는 8 비트이며, 상기 (b) 단계의 인코딩은 8 비트 단위의 인코딩 방법들 중 어느 하나를 사용하는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법.
  13. (a) 원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 수신하여 디코딩하는 단계;
    (b) 상기 원영상에서 기본계층 비트 스트림이 디코딩된 영상을 픽셀값 확장한 복호영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 디코딩하는 단계; 및
    (c) 상기 디코딩된 기본계층 영상을 입력받아, 그 픽셀값을 상기 원 영상의 비트수와 동일하게 확장하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 디코딩 방법.
  14. 제13항에 있어서,
    (d) 상기 디코딩된 향상계층영상과 상기 확장된 기본계층영상을 합쳐 출력하는 단계를 더 포함하는 것을 특징으로 하는 스케일러블 동영상 디코딩 방법.
  15. 제13항에 있어서, 상기 (c) 단계는
    상기 (a) 단계에서 디코딩된 영상을 입력받아 최상위 비트(MSB)에서부터 차례로 나열하고 나머지 비트는 0으로 채워 넣어, 상기 원 영상과 동일한 비트수로 확장하는 것을 특징으로 하는 스케일러블 동영상 디코딩 방법.
  16. (a) 원 영상의 픽셀값을 소정의 비트로 클리핑하는 단계;
    (b) 상기 클리핑된 영상을 입력받아 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하는 단계;
    (c) 상기 인코딩된 영상을 디코딩한 영상을 입력받아 그 픽셀값을 상기 원 영상과 동일한 비트수로 확장하는 단계; 및
    (d) 상기 원 영상에서 상기 픽셀값 확장된 영상을 빼서 소정의 인코딩 방법에 따라 인코딩하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 인코딩 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
  17. (a) 원 영상의 픽셀값을 소정의 비트로 클리핑한 후, 클리핑된 영상을 움직임 예측에 기초한 소정의 인코딩 방법에 따라 인코딩하여 만들어진 기본계층 비트 스트림을 수신하여 디코딩하는 단계;
    (b) 상기 원영상에서 기본계층 비트 스트림이 디코딩된 영상을 픽셀값 확장한 복호영상을 빼서 소정의 인코딩 방법에 따라 인코딩하여 만들어진 향상계층 비트 스트림을 디코딩하는 단계; 및
    (c) 상기 디코딩된 기본계층 영상을 입력받아, 그 픽셀값을 상기 원 영상의 비트수와 동일하게 확장하는 단계를 포함하는 것을 특징으로 하는 스케일러블 동영상 디코딩 방법을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체.
KR1020040037690A 2004-05-27 2004-05-27 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법 KR101014667B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020040037690A KR101014667B1 (ko) 2004-05-27 2004-05-27 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
US11/076,012 US8194748B2 (en) 2004-05-27 2005-03-10 Apparatus for scalable encoding/decoding of moving image and method thereof
CNB2005100721646A CN100448294C (zh) 2004-05-27 2005-05-25 可扩展的运动图像编码/解码设备及其方法
EP05253233A EP1601204A1 (en) 2004-05-27 2005-05-26 Apparatus for scalable encoding/decoding of moving image and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040037690A KR101014667B1 (ko) 2004-05-27 2004-05-27 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20050112588A KR20050112588A (ko) 2005-12-01
KR101014667B1 true KR101014667B1 (ko) 2011-02-16

Family

ID=34941458

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040037690A KR101014667B1 (ko) 2004-05-27 2004-05-27 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법

Country Status (4)

Country Link
US (1) US8194748B2 (ko)
EP (1) EP1601204A1 (ko)
KR (1) KR101014667B1 (ko)
CN (1) CN100448294C (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013147455A1 (ko) * 2012-03-29 2013-10-03 엘지전자 주식회사 인터 레이어 예측 방법 및 이를 이용하는 장치

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101014667B1 (ko) 2004-05-27 2011-02-16 삼성전자주식회사 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
US7953152B1 (en) 2004-06-28 2011-05-31 Google Inc. Video compression and encoding method
KR100738076B1 (ko) 2004-09-16 2007-07-12 삼성전자주식회사 웨이블렛 변환장치 및 그 방법과 이를 채용한 스케일러블영상부호화 장치 및 그 방법과 스케일러블 영상복호화 장치및 그 방법
KR101352978B1 (ko) * 2006-01-16 2014-01-28 고려대학교 산학협력단 향상된 계층간 참조 영상 지정, 복호 방법 및 그 장치
CN101083768B (zh) * 2006-06-02 2010-04-14 三星电子株式会社 处理视频数据的编码器和编码方法及解码器和解码方法
CN101083769B (zh) * 2006-06-02 2011-05-25 三星电子株式会社 处理n比特视频数据的编/解码器和编/解码方法
FR2906433B1 (fr) * 2006-09-22 2009-02-27 Canon Kk Procedes et dispositifs de codage et de decodage d'images, programme d'ordinateur les mettant en oeuvre et support d'informaton permettant de les mettre en oeuvre
KR101267178B1 (ko) * 2006-09-30 2013-05-24 톰슨 라이센싱 비디오에 대하여 색 인핸스먼트 계층을 인코딩 및 디코딩하기 위한 방법 및 디바이스
US8428129B2 (en) * 2006-12-14 2013-04-23 Thomson Licensing Method and apparatus for encoding and/or decoding video data using enhancement layer residual prediction for bit depth scalability
US8737474B2 (en) * 2007-06-27 2014-05-27 Thomson Licensing Method and apparatus for encoding and/or decoding video data using enhancement layer residual prediction for bit depth scalability
KR101366249B1 (ko) 2007-06-28 2014-02-21 삼성전자주식회사 스케일러블 영상 부호화장치 및 방법과 그 영상 복호화장치및 방법
US8208560B2 (en) * 2007-10-15 2012-06-26 Intel Corporation Bit depth enhancement for scalable video coding
CN101828401B (zh) * 2007-10-16 2013-07-17 汤姆森许可贸易公司 用于比特深度缩放的伪像去除的方法和设备
KR101574068B1 (ko) * 2008-12-26 2015-12-03 삼성전자주식회사 영상 처리 방법 및 장치
US20110317773A1 (en) * 2010-06-24 2011-12-29 Worldplay (Barbados) Inc. Method for downsampling images
JP5612214B2 (ja) * 2010-09-14 2014-10-22 サムスン エレクトロニクス カンパニー リミテッド 階層的映像符号化及び復号化のための方法及び装置
JP6041555B2 (ja) * 2012-06-29 2016-12-07 キヤノン株式会社 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
GB2509705B (en) * 2013-01-04 2016-07-13 Canon Kk Encoding and decoding methods and devices, and corresponding computer programs and computer readable media
KR20160061172A (ko) 2014-11-21 2016-05-31 삼성전자주식회사 디코더, 상기 디코더를 포함하는 디코딩 시스템, 및 상기 디코더의 동작 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000025386A (ko) * 1998-10-10 2000-05-06 윤종용 동영상 부호화/복호화 방법 및 장치
US6493387B1 (en) 2000-04-10 2002-12-10 Samsung Electronics Co., Ltd. Moving picture coding/decoding method and apparatus having spatially scalable architecture and signal-to-noise ratio scalable architecture together
EP1601204A1 (en) 2004-05-27 2005-11-30 Daeyang Foundation Apparatus for scalable encoding/decoding of moving image and method thereof

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2126467A1 (en) * 1993-07-13 1995-01-14 Barin Geoffry Haskell Scalable encoding and decoding of high-resolution progressive video
US6957350B1 (en) * 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
US6173013B1 (en) * 1996-11-08 2001-01-09 Sony Corporation Method and apparatus for encoding enhancement and base layer image signals using a predicted image signal
WO1999056472A1 (en) 1998-04-24 1999-11-04 Rockwell Science Center, Llc N-bit video coder and method of extending an 8-bit mpeg video coder
EP0967801A1 (en) 1998-06-26 1999-12-29 Deutsche Thomson-Brandt Gmbh Method and apparatus for multistandard video data acquisition
JP2001332978A (ja) 2000-05-18 2001-11-30 Sony Corp データストリーム変換装置とその方法、可変長符号化データストリーム生成装置とその方法、および、カメラシステム
US6697521B2 (en) * 2001-06-15 2004-02-24 Nokia Mobile Phones Ltd. Method and system for achieving coding gains in wavelet-based image codecs
KR20040054746A (ko) * 2001-10-26 2004-06-25 코닌클리케 필립스 일렉트로닉스 엔.브이. 공간 스케일가능 압축 방법 및 장치
US7072394B2 (en) * 2002-08-27 2006-07-04 National Chiao Tung University Architecture and method for fine granularity scalable video coding
KR100556838B1 (ko) * 2002-09-17 2006-03-10 엘지전자 주식회사 미세단위 신축형 부호화 및 복호화 장치와 방법
US7313814B2 (en) * 2003-04-01 2007-12-25 Microsoft Corporation Scalable, error resilient DRM for scalable media
US20050259729A1 (en) * 2004-05-21 2005-11-24 Shijun Sun Video coding with quality scalability

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20000025386A (ko) * 1998-10-10 2000-05-06 윤종용 동영상 부호화/복호화 방법 및 장치
US6493387B1 (en) 2000-04-10 2002-12-10 Samsung Electronics Co., Ltd. Moving picture coding/decoding method and apparatus having spatially scalable architecture and signal-to-noise ratio scalable architecture together
EP1601204A1 (en) 2004-05-27 2005-11-30 Daeyang Foundation Apparatus for scalable encoding/decoding of moving image and method thereof

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013147455A1 (ko) * 2012-03-29 2013-10-03 엘지전자 주식회사 인터 레이어 예측 방법 및 이를 이용하는 장치

Also Published As

Publication number Publication date
US20050265442A1 (en) 2005-12-01
CN1703091A (zh) 2005-11-30
CN100448294C (zh) 2008-12-31
EP1601204A1 (en) 2005-11-30
KR20050112588A (ko) 2005-12-01
US8194748B2 (en) 2012-06-05

Similar Documents

Publication Publication Date Title
KR101014667B1 (ko) 스케일러블 동영상 인코딩, 디코딩 장치 및 그 방법
KR100657268B1 (ko) 컬러 영상의 신축적 부호화, 복호화 방법 및 장치
JP5620109B2 (ja) 動きベクトル推定方法、動きベクトル推定装置、ビデオエンコーダ、ビデオデコーダ及びデコーディング方法
JP4908180B2 (ja) 動画像符号化装置
KR101608426B1 (ko) 영상의 인트라 예측 부호화/복호화 방법 및 그 장치
KR100694137B1 (ko) 동영상 부호화 장치, 동영상 복호화 장치, 및 그 방법과,이를 구현하기 위한 프로그램이 기록된 기록 매체
KR20060088461A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
JP2002315004A (ja) 画像符号化方法及び装置、画像復号方法及び装置、並びに画像処理システム
KR20040047977A (ko) 공간적으로 스케일가능한 압축
KR102218696B1 (ko) 영상 변환 부호화/복호화 방법 및 장치
KR20070096979A (ko) 스위칭 픽쳐를 이용한 동영상 비트스트림 부호화 및 복호화방법 및 장치
US20050265444A1 (en) Moving image encoding/decoding apparatus and method
KR101375667B1 (ko) 영상의 부호화, 복호화 방법 및 장치
JP2007266749A (ja) 符号化方法
KR100728011B1 (ko) 영상 부호화 및 복호화 장치와, 그 방법, 및 이를 수행하기위한 프로그램이 기록된 기록 매체
US20070025438A1 (en) Elastic storage
KR20080084890A (ko) 동영상 부호화 및 재생 방법 및 장치
JP2007266750A (ja) 符号化方法
KR20060069227A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
JP3776735B2 (ja) 画像予測復号化方法，画像予測復号化装置，画像予測符号化方法，画像予測符号化装置，及びデータ記憶媒体
JP2009065714A (ja) 動画像符号化装置および動画像符号化方法
WO2011122659A1 (ja) 符号化装置および復号装置
KR20060059770A (ko) 영상신호의 엔코딩/디코딩시에 영상블록을 위한 모션벡터를베이스 레이어 픽처의 모션벡터로부터 유도하는 방법 및장치
JP2006180173A (ja) 動画像符号化装置、動画像符号化方法、動画像復号化装置及び動画像復号化方法
JP2004312689A (ja) Ｍｐｅｇビデオ復号化方法及びｍｐｅｇビデオ復号化器

Legal Events

Date Code Title Description
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20140128

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150129

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20160128

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20170125

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee