KR100564967B1 - 동영상 디코더 및 이를 이용한 디코딩 방법 - Google Patents

동영상 디코더 및 이를 이용한 디코딩 방법 Download PDF

Info

Publication number
KR100564967B1
KR100564967B1 KR1020020060232A KR20020060232A KR100564967B1 KR 100564967 B1 KR100564967 B1 KR 100564967B1 KR 1020020060232 A KR1020020060232 A KR 1020020060232A KR 20020060232 A KR20020060232 A KR 20020060232A KR 100564967 B1 KR100564967 B1 KR 100564967B1
Authority
KR
South Korea
Prior art keywords
motion vector
image frame
image
motion
error
Prior art date
Application number
KR1020020060232A
Other languages
English (en)
Other versions
KR20040029809A (ko
Inventor
정영안
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020020060232A priority Critical patent/KR100564967B1/ko
Publication of KR20040029809A publication Critical patent/KR20040029809A/ko
Application granted granted Critical
Publication of KR100564967B1 publication Critical patent/KR100564967B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]

Abstract

본 발명은 IMT2000 무선 통신 시스템에서 동영상 비트스트림을 디코딩할 때 발생되는 움직임 벡터를 보정하도록하여 디코더에서 복원된 영상의 화질을 개선할 수 있는 동영상 디코더 및 이를 이용한 디코딩 방법을 개시한다. 개시된 본 발명은 압축된 동영상 비트스트림을 수신하여 가변장복호화(VLD) 하는 단계; 상기 가변장 복호화된 영상 데이터로부터 움직임 벡터를 추출하여 에러 여부를 판별하는 단계; 상기 움직임 벡터가 디코딩될 영상 프레임 내로 모두 제한되었는지와 에러로 인하여 영상 프레임 외부에 이탈된 움직임 벡터가 존재하는지를 판단하는 단계; 상기 움직임 벡터에 에러가 발생하는 경우에는 보정한 다음, 그렇지 않은 경우에는 그대로 움직임 벡터를 움직임 보상기에 전송하는 단계; 및 상기 움직임 벡터에서 보상된 움직임 벡터와 역 DCT에서 변환된 영상 신호를 가산기에서 합하여 동영상을 디스플레이하는 단계;를 포함하는 것을 특징으로 한다.
동영상, 비트스트림, DCT, 양자화, 디코딩, 에러

Description

동영상 디코더 및 이를 이용한 디코딩 방법{MOVING PICTURE DECODER AND METHOD FOR DECODING USING THE SAME}
도 1은 종래 기술에 따른 동영상 디코더의 구조를 도시한 블록도.
도 2는 종래 기술에 따른 인코더에서의 움직임 벡터와 디코더에서의 움직임 벡터를 도시한 도면.
도 3은 본 발명에 따른 동영상 디코더의 구조를 도시한 블록도.
도 4는 본 발명에 따라 움직임 벡터를 보정하여 동영상을 디코딩하는 방법을 나타낸 플로챠트.
도 5는 본 발명에 따른 인코더에서의 움직임 벡터와 디코더에서의 움직임 벡터를 도시한 도면.
*도면의 주요 부분에 대한 부호의 설명*
21: 버퍼부 23: VLD
25: 에러 감지/복원부 27: 역양자화부
29: 역DCT 30: 디스플레이부
31: 가산기 32: 움직임 보상기(Motion Compensation)
33: 보정기 35: 영상 프레임 메모리
본 발명은 동영상 디코딩 방법에 관한 것으로, 보다 구체적으로는 압축되어 수신되는 동영상 비트스트림을 디코딩할 때, 채널 에러로 인하여 발생되는 움직임 벡터 오류들을 영상 프레임 이내로 보정함으로써 디스플레이되는 영상의 화질을 개선할 수 있는 동영상 디코더 및 이를 이용한 디코딩 방법에 관한 것이다.
현재, 그리고 미래의 통신 환경은 유선과 무선의 영역 구분이나, 지역 국가의 구분을 초월할 만큼 급변하고 있으며, 특히 IMT-2000 등으로 대별되는 미래 통신환경은 영상과 음성은 물론 사용자가 필요로 하는 다양한 정보를 실시간으로,또는 종합적으로 제공하는 환경으로 구축되어 가는 추세이다.
또한, 개인 휴대 통신 시스템의 발달은 현재 셀룰러폰이나 PCS등에서도 단순히 음성 통신만을 수행하던 차원에서 벗어나서 문자 정보의 전송은 물론, 개인 휴대 통신 단말기를 이용해서 무선으로 인터넷에 접속하거나, TV에서나 보던 동영상들을 송신할 수 있도록 개발되어지고 있다.
특히, 동영상을 디지털 데이터로 가공하여 실시간으로 전송하고 또 이 것을 수신하여 디스플레이하는 디지털 텔레비전 시스템과, 실시간으로 전송되는 동영상을 IMT2000을 이용한 개인 휴대 단말기등에서는 필수적인 요소로 자리 잡아 가고 있는 실정이다.
이것은 종래에는 휴대 단말기가 사람의 음성만을 송수신하도록 되어 있었으나, 멀티 미디어의 개발과 디지털 정보처리 기술의 발달로 인하여 음성, 영상등 다 양한 정보들을 송신할 수 있게 되었다.
이와 같은 기술이 상용화될 수 있었던 것은 무엇보다도 아날로그 영상 신호를 양자화, 가변장복호화등 특수한 디지털 처리를 한 다음, 이를 디지털 정보에 포함시켜 송신하고, 수신되는 단말기에서는 이를 반대로 디코딩함으로써 빠른 전송 속도와 보다 풍부한 정보량을 송수시 하도록한 동영상 압축기술의 발달이 크게 기여하였다.
최근 디지털 신호처리 기술의 발전에 힘입어 제한된 대역폭의 전송 채널을 통해 많은 양의 동영상 정보를 압축, 전송하는 방식들이 개발되어 왔으나, 전송 채널상의 오류가 발생하면 복원 영상의 화질이 크게 저하되는 문제가 생긴다.
이때 제한된 대역폭을 최대한으로 이용하기 위해 오류 정정 부호를 사용하지 않고, 정상적으로 복원된 주변의 정보들로부터 잃어버린 정보를 보완하여 원 영상에 가깝게 복구하는 오류 은폐 기법들이 연구되고 있다.
특히 MPEG(Moving Picture Experts Group)과 같은 경우 에러(error)가 발생하면 다음 동기 신호인 슬라이스 헤더를 찾을 때까지의 모든 정보를 손실하게 된다. 또한, 움직임 보상 부호화기법을 이용하기 때문에 손상된 부분의 영향이 이후 계속된 여러 장의 프레임에 걸쳐 계속된다.
본 발명은 비디오 데이터의 빠른 엔코딩과 화질개선을 가능하게 할 수 있는 하드웨어 엑셀레이터 구조에 최적화된 모션 판단값과 인드라 모드 압축 알고리듬을 적용한 IMT-2000 화상단말기이다. 무선화상 통신을 위하여 일반적으로 사용되어지는 엠펙(MPEG) 압축 방식의 모션 판단 값은 가장 많은 계산량을 가지며 화질과 비 트(bit)량에 직접적인 영향을 미치므로 매우 중요하다고 할 수 있다.
따라서 모션 판단 값에 관한 많은 연구가 끊임없이 이루어 졌으며, 최근에는 모션 판단 값을 다이아몬드 서치 패턴(diamond search pattern)을 이용하여 풀 서치(full search)와 거의 비슷한 화질과 비트 량을 가지며 가장 범용적으로 쓰이는 트리 스텝 서치(three step search) 방식이 사용되고 있다.
도 1은 종래 기술에 따른 동영상 디코더의 구조를 도시한 블록도이다.
도 1에 도시된 바와 같이, 부호화된 영상 데이터가 비트스트림(bit stream) 형태로 디코더부에 들어오면 이를 원래의 영상으로 복원하기 위하여 인코더에서 행해지는 부호화와 반대로 복호화가 이루어진다.
따라서, 압축된 비트스트림을 복호화하는 디코더는 일정한 비트스트림의 데이터 양을 임시적으로 저장하는 버퍼부(1)와, 상기 버퍼부(1)에 저장되어 있는 비트스트림을 영상으로 재현하기 위하여 디코딩 작업을 하는 가변장복호화기(Variable Length Decoding :VLD 3)와, 상기 가변장복호화기(3)로부터 디코딩된 비트스트림에서 에러 검출, 움직임 벡터 복원 및 영상 재현을 위한 에러 감지/복원부(5)와, 상기 에러 감지/복원부(5)에서 영상 재현을 위한 영상 데이터는 엔코더에서 실시한 압축 방식의 반대로 진행하기 위하여 역양자화와 역이산여현변환을 실시하는 역양자화부(Inverse Quantization:7)와 역DCT(Inverse Discrete Cosine Transform: 9), 상기 에러 감지/복원부(5)에서 복원한 움직임 벡터를 보상하기 위한 움직임 보상기(Motion Compensation: MC 12)와, 동영상을 디스플레이하는 디스플레이부(10)로부터 이전 영상들을 저장하는 영상 프레임 메모리(15)로 구성되어 있다.
상기와 같은 구조를 갖는 디코더에 의하여 압축된 동영상이 재현되는 과정을 다음과 같다.
아날로그 영상 신호를 엔코더(encoder)에서 이상여현변화(Discrete Cosine Transform), 양자화(Quantization)를 거쳐 가변장복호화된 영상 프레임 신호가 압축된 비트스트림(bit stream) 상태로 디코더(decoder)에 수신되면, 먼저 이를 임시적으로 저장하기 위하여 상기 버퍼부(1)에 저장된다. 상기 버퍼부(1)에 저장된 압축된 동영상 비트스트림은 상기 가변장복호화기(3)에서 압축된 비트스트림의 값, 길이 등을 이차원부호화로 변환시킨 후에 에러 검출 및 이의 대응을 위하여 상기 에러 감지/복원부(5)에서 움직임 벡터 값과 에러(error) 여부를 감지한다.
그런 다음, 상기 에러 감지/복원부(5)로부터 인가되는 압축 영상을 엔코더(encoder)에서 압축할 때와 반대 방향으로 다시 복원 과정을 거친다. 상기 역양자화부(7)에서 역스캔 및 역 양자화된 다음, 역 이산여현변환기(IDCT: 9)에서 IDCT 변환을 실시한다.
이렇게 역이산여현변환(Inverse Discrete Cosine Transform)이 이루어진 영상 신호를 가산기(11)에 입력시키는데, 상기 가산기(11)에서는 복원하는 영상 프레임이 처음 시작하는 인트라 모드(Intra Mode) 영상인가, 이전 영상 프레임이 존재하는 인터 모드 영상인가를 파악한 다음, 인트라 모드 영상인 경우에는 움직임 벡터가 없으므로 바로 상기 디스플레이부(10)에서 영상을 재현한다.
그리고, 인터 모드로 판단된 경우에는 움직임 벡터가 존재하므로 압축된 비 트스트림으로부터 상기 에러 감지/복원부(5)에서 움직임 벡터를 추출한 후 이를 보상하기 위하여 움직임 보상기(Motion Compensation: 12)로 움직임 벡터를 전송한다.
상기 움직임 보상기(12)에서는 상기 디스플레이부(10)에서 재현되는 이전 영상 프레임을 저장하는 상기 영상 프레임 메모리(15)로부터 상기 에러 감지/복원부(5)에서 추출된 움직임 벡터의 차를 구하여 디코딩된 영상을 보상한다.
그러므로 상기 움직임 보상기(12)에서 이전 영상 프레임으로부터 현재 움직임 벡터 값을 뺀 차를 상기 가산기(11)에 전송하고, 압축된 비트스트림이 이전 영상 프레임이 존재하는 인터 모드(Inter mode)인 경우에는 상기 역DCT된 값과 합하여 영상을 재현하게 된다.
상기에서 복원되는 영상 프레임은 각각의 매크로 블록 단위로 구분되어 있는데, 각각의 매크로 블록의 데이터들은 디코딩되면서 움직임 벡터를 포함하고 있고, 이러한 움직임 벡터들은 일정한 방향을 지시하고 있다. 동영상 압축 기술은 이러한 움직임 벡터를 이용하여 이전 영상 프레임의 매크로 블록을 가져와 현재 영상 프레임을 복원하는 방식을 취하여 압축률을 줄인다.
도 2는 종래 기술에 따른 인코더에서의 움직임 벡터와 디코더에서의 움직임 벡터를 도시한 도면이다.
도 2에 도시된 바와 같이, 일반적으로 IMT2000에서 사용되는 영상 프레임의 크기는 세로 128, 가로 160개의 매크로 블록으로 구분되는 크기의 영상 프레임을 압축하고 디코딩한다.
수신되는 압축 영상 프레임이 인터 모드인 경우에는 매크로 블록 각각에 움직임 벡터가 존재하고, 이러한 움직입 벡터를 가변장복호화를 한 후 추출해 내어 현재 동영상 프레임을 재현할 때 보다 깨끗한 화질을 디스플레이하기 위하여 움직임 벡터 보상 기술을 사용한다.
도 2의 (a)에서와 같이, 먼저 엔코더 측에서 영상을 압축할 때 영상 프레임의 바깥으로 나가는 움직임 벡터을 영상 프레임 안쪽으로 제한하도록 하여 디코더에서 복원할 때 움직임 백터터가 영상 프레임 내로부터 보상될 수 있도록 하여 재현시 발생하는 오류를 줄이도록 하였다.
그러나, IMT2000과 같은 무선 통신 시스템에서 동영상을 송수신할 때 불가피하게 다중경로를 통하여 전송되므로 채널 비트 에러가 발생할 확률이 높다. 도 2의 (b)에서와 같이 영상 프레임의 매크로 블록 단위로 엔코더에서 움직임 벡터가 제한된 영상 데이터에서 채널 에러가 발생하여 영상 프레임 내로 제한되지 않는 움직임 벡터가 다수개 발생한 것을 나타냈다.
상기와 같이 매크로 블록의 움직임 벡터가 영상 프레임 내로 제한되지 않는 경우에는 복원하고자하는 영상 프레임 외부에 존재하는 잘못된 영상을 참조하여 화질 품위를 떨어뜨리거나, 에러에 의한 움직임 벡터 방향으로 참조할 영상이 존재하지 않아 영상 재현을 위한 디코딩 작업이 구동되지 않는 문제가 발생한다.
본 발명은, 압축된 동영상 비트스트림을 무선망을 이용하여 전송하여 이를 디코딩하여 영상을 재현할 때 영상 프레임 외부로 발생된 움직임 벡터의 에러들을 영상 프레임 내로 제한하는 보정을 한 후 움직임 벡터 보상을 하도록 하여 디코딩에 의한 화질을 개선할 수 있는 동영상 디코더 및 이를 이용한 디코딩 방법을 제공함에 그 목적이 있다.
상기한 목적을 달성하기 위한, 본 발명에 따른 동영상 디코딩 방법은,
압축된 동영상 비트스트림을 수신하여 가변장복호화(VLD) 하는 단계;
상기 가변장 복호화된 영상 데이터로부터 움직임 벡터를 추출하여 에러 여부를 판별하는 단계;
상기 움직임 벡터가 디코딩될 영상 프레임 내로 모두 제한되었는지와 에러로 인하여 영상 프레임 외부에 이탈된 움직임 벡터가 존재하는지를 판단하는 단계;
상기 움직임 벡터에 에러가 발생하는 경우에는 보정한 다음, 그렇지 않은 경우에는 그대로 움직임 벡터를 움직임 보상기에 전송하는 단계; 및
상기 움직임 벡터에서 보상된 움직임 벡터와 역 DCT에서 변환된 영상 신호를 가산기에서 합하여 동영상을 디스플레이하는 단계;를 포함하는 것을 특징으로 한다.
여기서, 상기 움직임 벡터들이 영상 프레임에 포함되는 기준은 픽쳐 타입 정보, GOB 정보, 매크로 블록 또는 블록 단위 정보 중 어느 하나를 선택하여 판단하고, 상기 움직임 벡터들이 영상 프레임 외부에 존재하는 경우에는 에러가 발생한 것으로 판단하여 디코딩되는 영상 프레임 내로 움직임 벡터를 제한하는 것을 특징으로 한다.
또한, 본 발명의 다른 실시예에 의한 동영상 디코더는,
압축된 동영상 비트스트림을 가변장 복호화하는 VLD;
상기 VLD에서 가변장 복호화된 비트 스트림을 감지하여 움직임 벡터와 영상 프레임을 복원하는 에러 감지/복원부;
상기 에러 감지/복원부에서 감지된 영상 프레임의 비트스트림을 영양자화하는 역양자화부;
상기 역양자화부로부터 역 양자화된 영상 데이터를 역 이산여현변환하는 역DCT;
상기 에러 감지/복원부에서 추출된 움직임 벡터들중 에러가 발생한 경우 이를 일정한 영역으로 제한하기 위한 보정기;
상기 보정기로부터 제한된 움직임 벡터들을 보상하기 위한 움직임 보상기;
상기 움직임 보상기에서 영상을 보상하도록 이전 영상 프레임을 제공하는 영상 프레임 메모리부; 및
상기 역DCT에서 얻어지는 영상 데이터와 상기 움직임 보상기에서 얻어지는 보상값을 이용하여 영상을 복원하는 복원 영상 프레임부를 포함하는 것을 특징으로 한다.
여기서, 상기 보정기에서는 움직임 벡터들을 영상 프레임의 픽쳐 타입 정보, GOB 정보, 매크로 블록 , 블록 정보 중에서 어느 하나를 선택하여 움직임 벡터들이 영상 프레임 내부에 포함되도록 제한하고, 상기 움직임 보상기는 영상 프레임의 블록들 내부로 제한된 움직임 벡터들 기준으로 상기 영상 프레임 메모리로부터인가 받은 이전 영상 프레임의 블록들과 비교하여 움직임 보상을 하는 것을 특징으로 한다.
본 발명에 의하면, IMT2000에서 사용되는 동영상 전송시에 채널 에러로 인하여 발생하는 움직임 벡터 에러를 움직임 벡터 보상전에 보정한 후, 디코딩되는 영상 프레임을 보상함으로써 양질의 화면 품위를 유지할 수 있는 이점이 있다.
이하, 첨부한 도면에 의거하여 본 발명의 바람직한 실시 예를 자세히 설명하도록 한다.
도 3은 본 발명에 따른 동영상 디코더의 구조를 도시한 블록도이다.
도 3에 도시된 바와 같이, 압축된 비트스트림을 복호화하는 디코더는 일정한 비트스트림의 데이터 양을 임시적으로 저장하는 버퍼부(21)와, 상기 버퍼부(21)에 저장되어 있는 비트스트림을 영상으로 재현하기 위하여 디코딩 작업을 하는 가변장복호화기(Variable Length Decoding :VLD 23)와, 상기 가변장복호화기(23)로부터 디코딩된 비트스트림에서 에러 검출, 움직임 벡터 복원 및 영상 재현을 위한 에러 감지/복원부(25)와, 상기 에러 감지/복원부(25)에서 영상 재현을 위한 영상 데이터는 엔코더에서 실시한 압축 방식의 반대로 진행하기 위하여 역양자화와 역이산여현변환을 실시하는 역양자화부(Inverse Quantization: 27)와 역DCT(Inverse Discrete Cosine Transform: 29), 상기 에러 감지/복원부(25)에서 복원한 움직임 벡터들이 디코딩되는 영상 프레임 내부로 제한되지 않았는지를 검사하여 영상 프레임 내부로 제한하는 보정기(33)와, 상기 보정기(33)에서 영상 프레임 내로 제한된 움직임 벡터를 이용하여 움직임 보상을 하기 위한 움직임 보상기(Motion Compensation: MC 32)와, 동영상을 디스플레이하는 디스플레이부(30)로부터 이전 영상들을 저장하는 영상 프레임 메모리(35)로 구성되어 있다.
상기와 같은 구조를 갖는 디코더에 의하여 압축된 동영상이 재현되는 과정은 상기 도 1에서 설명한 방법과 유사하므로 이하 구별되는 부분을 중심으로 설명한다.
상기 가변장복호화기(23)를 거친 압축 비트스트림의 움직임 벡터와 영상 복원을 하기 위한 데이터들을 추출되는데, 역양자화 및 역DCT되는 현재 영상 프레임이 인터 모드인 경우에는 이전 영상 프레임이 존재하므로 움직임 벡터가 존재한다.
그러므로 인터 모드에서는 영상 프레임을 디스플레이하기 위하여 움직임 벡터 보상을 하는데, 무선 송수신 도중 채널 에러로 인하여 움직임 벡터에 에러가 발생하는 경우 움직임 벡터 보상을 하더라도 화질 품위가 떨어지는 문제가 있다.
따라서, 상기 에러 감지/복원부에서 추출되는 움직임 벡터를 분석하여 엔코딩 작업에서 영상 프레임 내로 제한되었던 움직임 벡터가 채널 에러로 인하여 영상 프레임 밖으로 오류가 발생한 경우 영상 프레임 내로 상기 보정기(33)에서 보정을 한 다음, 보정된 움직임 벡터를 상기 움직임 보상기(32)에 전송한다.
상기와 같이 디코딩되는 영상 프레임 외부 방향을 갖는 에러 움직임 벡터를 영상 프레임 내부로 모두 제한 함으로써 채널 에러로 인한 재현되는 영상의 에러를 최소화하였다.
상기 보정기(33)에서 영상 프레임 내로 보정된 움직임 벡터를 움직임 보상기(Motion Compensation: 32)로 전송하여 움직임 벡터 보상을 실시한다. 상기 움직임 보상기(32)에서는 상기 디스플레이부(30)에서 재현되는 이전 영상 프레임을 저장하는 상기 영상 프레임 메모리(35)로부터 상기 보정기(32)에서 보정된 움직임 벡터와의 차를 구하여 디코딩된 영상을 보상한다.
도 4는 본 발명에 따라 움직임 벡터를 보정하여 동영상을 디코딩하는 방법을 나타낸 플로챠트이다.
도 4에 도시된 바와 같이, 디코더에서 압축된 동영상 비트스트림을 버퍼부에서 임시적으로 저장한 후, 가변장복호화기에서 비트스트림을 가변장 복호화 한 다음(S301), 디코딩되는 영상 프레임이 인터 모드인 경우에는 움직임 벡터를 추출하여 디코딩한다(S302).
그런 다음, 상기 움직임 벡터를 움직임 보상기에 전송하여 보상을 하기 전에 움직임 벡터의 오류 발생에 의하여 디코딩되는 영상 프레임 범위를 넘어선 움직임 벡터가 존재하는지를 보정기에서 판단한다(S303).
상기 보정기에서 판단된 움직임 벡터들이 디코딩되는 영상 프레임의 범위를 벗어난 경우에는 상기 디코딩되는 영상 프레임 이내로 움직임 벡터를 제한한 다음(S305), 움직임 보상기에 전송하여 움직임 벡터 보상을 실시한다(S304).
그리고, 상기 보정기에서 판단된 움직임 벡터들이 엔코더에서 움직임 벡터를 제한한 것과 같이 디코딩되는 영상 프레임 내에 모두 존재하는 경우에는 에러가 발생하지 않은 것으로 보고 상기 움직임 보상기에 움직임 벡터를 전송하여 움직임 보상을 실시한다(S304).
그러므로 상기 움직임 보상기에는 상기 보정기에서 영상 프레임 내로 제한되 어진 움직임 벡터 또는 에러 발생이 없는 것으로 판단된 움직임 벡터를 기준으로 영상 프레임 메모리에 저장된 이전 영상 프레임과의 차를 구하여 역 DCT된 영상 프레임과 합하여 영상을 재현한다(S306).
상기 보정기에서 움직임 벡터들이 영상 프레임 내부에 포함되는지 여부등은 영상 비트스트림에 함께 제공된 픽쳐 타입, GOB 정보, 매크로 블록 또는 블록 단위 정보들중 어느 하나를 선택하여 판단한다.
바람직하게는 매크로 블록 단위로 움직임 벡터가 표시되므로 매크로 블록 정보를 이용하여 에러 여부를 판단한다.
도 5는 본 발명에 따른 인코더에서의 움직임 벡터와 디코더에서의 움직임 벡터를 도시한 도면이다.
도 5에 도시된 바와 같이, 수신되는 압축 영상 프레임이 인터 모드인 경우에는 매크로 블록 각각에 움직임 벡터가 존재하고, 이러한 움직임 벡터는 가변장복호화를 한 후, 매크로 블록 단위로 추출해 내어 현재 디코딩할 동영상 프레임의 범위내로 제한되었는지를 판단한다.
도 5의 (a)에서는 디코더에 수신된 동영상 비트스트림에 에러가 발생한 경우를 나타내었다. 엔코더 측에서 영상이 압축될 때 움직임 벡터를 영상 프레임 내로 모두 제한하였으나 전송도중에서 발생하는 에러로 인하여 움직임 벡터들이 영상 프레임 외부로 이탈된 상태를 도시하였다.
이와 같이 에러로 인하여 움직임 벡터가 영상 프레임 내에 존재하지 않게되면 참조될 영상중에서 다른 영상을 참조하거나 영상 프레임 외부에 영상이 존재하지 않는 경우에는 디코더 작업이 정지하게 되는 문제가 발생한다.
하지만, 도 5의 (b)에서와 같이 보정기를 통하여 에러로 인하여 영상 프레임 외부로 이탈된 움직임 벡터는 모두 영상 프레임 내부로 제한함으로써 에러로 인한 화질 저하를 최소화할 수 있게된다.
보다 정확하게는 에러가 없이 엔코더에서 제한된 움직임 벡터를 그대로 사용하여 디코딩하면 좋겠지만, 에러의 발생은 필연적으로 발생하는 것이므로 에러에 의한 영상 품질의 저하와 디코딩 작업 중단과 같은 문제를 개선하기 위하여 영상 프레임 내로 제한시켰다.
이상에서 자세히 설명된 바와 같이, 본 발명은 동영상 송수신 도중에 발생되는 채널 에러로 인하여 디코딩 과정에서 발생되는 움직임 벡터 오류를 보정한 다음 움직임 벡터를 보상하여 영상을 재현함으로써 화질 향상 및 디코딩 과정에서 발생되는 에러를 효율적으로 줄일 수 있는 효과가 있다.
아울러, 디코딩 과정에서 발생되는 에러를 보정해 줌으로써 랜덤하게 발생하는 많은 에러 영상을 안정적으로 디스플레이할 수 있는 이점이 있다.
본 발명은 상기한 실시 예에 한정되지 않고, 이하 청구 범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변경 실시가 가능할 것이다.

Claims (6)

  1. 압축된 동영상 비트스트림을 수신하여 가변장복호화(VLD)하는 단계;
    상기 가변장 복호화된 영상 데이터로부터 움직임 벡터를 추출하여 에러 여부를 판별하는 단계;
    상기 움직임 벡터가 디코딩될 영상 프레임의 외부에 존재하는지를 판단하는 단계;
    상기 움직임 벡터가 영상 프레임의 외부에 존재하는 경우 상기 디코딩될 영상 프레임 내로 움직임 벡터를 제한하는 보정을 한 후 움직임 보상기로 전송하고, 상기 움직임 벡터가 영상 프레임 내에 모두 존재하는 경우 그대로 움직임 보상기에 전송하는 단계; 및
    상기 움직임 보상기에서 상기 전송된 움직임 벡터를 기준으로 이전 영상 프레임과의 차를 구하여 역 DCT에서 변환된 영상 신호를 가산기에서 합하여 동영상을 디스플레이하는 단계;를 포함하는 것을 특징으로 하는 동영상 디코딩 방법.
  2. 제 1 항에 있어서,
    상기 움직임 벡터들이 영상 프레임에 포함되는 기준은 픽쳐 타입 정보, GOB 정보, 매크로 블록 또는 블록 단위 정보 중 어느 하나를 선택하여 판단하는 것을 특징으로 하는 동영상 디코딩 방법.
  3. 삭제
  4. 압축된 동영상 비트스트림을 가변장 복호화하는 가변장복호화부(VLD);
    상기 가변장복호화부에서 가변장 복호화된 비트 스트림을 감지하여 움직임 벡터와 영상 프레임을 복원하는 에러 감지/복원부;
    상기 에러 감지/복원부에서 감지된 영상 프레임의 비트스트림을 역양자화하는 역양자화부;
    상기 역양자화부로부터 역 양자화된 영상 데이터를 역 이산여현변환하는 역DCT;
    상기 에러 감지/복원부에서 추출된 움직임 벡터들중 에러가 발생한 경우 이를 디코딩될 영상 프레임의 블록들 내부로 제한하기 위한 보정기;
    상기 이전 영상 프레임을 제공하는 영상 프레임 메모리부;
    상기 영상 프레임의 블록들 내부로 제한된 움직임 벡터를 기준으로 상기 영상 프레임 메모리로부터 전달받은 이전 영상 프레임의 블록들과 비교하여 움직임 보상을 수행하는 움직임 보상기;
    상기 역DCT에서 얻어지는 영상 데이터와 상기 움직임 보상기에서 얻어지는 보상값을 이용하여 영상을 복원하는 복원 영상 프레임부를 포함하는 것을 특징으로 하는 동영상 디코더.
  5. 제 4 항에 있어서,
    상기 보정기에서는 움직임 벡터들을 영상 프레임의 픽쳐 타입 정보, GOB 정보, 매크로 블록 , 블록 정보 중에서 어느 하나를 선택하여 움직임 벡터들이 영상 프레임 내부에 포함되도록 제한하는 것을 특징으로 하는 동영상 디코더.
  6. 삭제
KR1020020060232A 2002-10-02 2002-10-02 동영상 디코더 및 이를 이용한 디코딩 방법 KR100564967B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020020060232A KR100564967B1 (ko) 2002-10-02 2002-10-02 동영상 디코더 및 이를 이용한 디코딩 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020020060232A KR100564967B1 (ko) 2002-10-02 2002-10-02 동영상 디코더 및 이를 이용한 디코딩 방법

Publications (2)

Publication Number Publication Date
KR20040029809A KR20040029809A (ko) 2004-04-08
KR100564967B1 true KR100564967B1 (ko) 2006-03-28

Family

ID=37331164

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020020060232A KR100564967B1 (ko) 2002-10-02 2002-10-02 동영상 디코더 및 이를 이용한 디코딩 방법

Country Status (1)

Country Link
KR (1) KR100564967B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100676772B1 (ko) * 2005-07-08 2007-02-01 주식회사 텔레칩스 휴대용 기기에 적용된 ｄ―ｖｏｐ 디코딩이 가능한 엠펙-4디코더

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10313459A (ja) * 1996-10-23 1998-11-24 Texas Instr Inc <Ti> ブロックを用いた動き補償によるビデオ信号の復号方法 及び装置
US5905535A (en) * 1994-10-10 1999-05-18 Thomson Multimedia S.A. Differential coding of motion vectors using the median of candidate vectors
JP2000102018A (ja) * 1998-09-25 2000-04-07 Oki Electric Ind Co Ltd 動画像復号方法及び装置
JP2001251632A (ja) * 1999-12-27 2001-09-14 Toshiba Corp 動きベクトル検出方法および装置並びに動きベクトル検出プログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5905535A (en) * 1994-10-10 1999-05-18 Thomson Multimedia S.A. Differential coding of motion vectors using the median of candidate vectors
JPH10313459A (ja) * 1996-10-23 1998-11-24 Texas Instr Inc <Ti> ブロックを用いた動き補償によるビデオ信号の復号方法 及び装置
JP2000102018A (ja) * 1998-09-25 2000-04-07 Oki Electric Ind Co Ltd 動画像復号方法及び装置
JP2001251632A (ja) * 1999-12-27 2001-09-14 Toshiba Corp 動きベクトル検出方法および装置並びに動きベクトル検出プログラム

Also Published As

Publication number Publication date
KR20040029809A (ko) 2004-04-08

Similar Documents

Publication Publication Date Title
JP3923898B2 (ja) 画像符号化方法及び装置
KR101867461B1 (ko) 동화상 예측 부호화 장치, 동화상 예측 부호화 방법, 동화상 예측 부호화 프로그램, 동화상 예측 복호 장치, 동화상 예측 복호 방법, 및 동화상 예측 복호 프로그램
US20060120449A1 (en) Method of coding and decoding moving picture
US6040875A (en) Method to compensate for a fade in a digital video input sequence
KR100564967B1 (ko) 동영상 디코더 및 이를 이용한 디코딩 방법
KR20040031949A (ko) 동영상 인코딩 및 디코딩 방법
US7386050B2 (en) Fast half-pel searching method on the basis of SAD values according to integer-pel search and random variable corresponding to each macro block
KR100627494B1 (ko) 동영상 부호화기 및 이를 이용한 부호화 방법
KR20040047045A (ko) 동영상 디코딩 방법
KR100543607B1 (ko) 동영상 디코딩 방법
KR100557047B1 (ko) 동영상 디코딩 방법
KR20040039808A (ko) 움직임 벡터 예측 방법
KR20030065694A (ko) 시공간적 정보를 이용한 인트라 프레임의 에러 은닉방법
KR100590328B1 (ko) 동영상 디코더 및 이를 이용한 디코딩 방법
KR20040035013A (ko) 동영상 디코딩 방법
KR100557118B1 (ko) 동영상 디코더 및 이를 이용한 디코딩 방법
KR20040039809A (ko) 동영상 부호화기 및 이를 이용한 부호화 방법
KR20040031948A (ko) 동영상 디코딩 방법
JP4485409B2 (ja) 動画像復号装置
KR20060043120A (ko) 영상 신호의 인코딩 및 디코딩 방법
KR20040034188A (ko) 동영상 디코딩 방법
KR100627493B1 (ko) 동영상 부호화기 및 이를 이용한 부호화 방법
KR20050026110A (ko) 동영상 디코더 및 디코딩 방법
KR100669621B1 (ko) 동영상 디코더의 참조 영상 변경 제어방법
KR20040039807A (ko) 컴퓨터를 이용한 영상 디코딩 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20091230

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee