KR101423655B1 - 필드 픽쳐 부호화/복호화 장치 및 그 방법 - Google Patents

필드 픽쳐 부호화/복호화 장치 및 그 방법 Download PDF

Info

Publication number
KR101423655B1
KR101423655B1 KR1020080024972A KR20080024972A KR101423655B1 KR 101423655 B1 KR101423655 B1 KR 101423655B1 KR 1020080024972 A KR1020080024972 A KR 1020080024972A KR 20080024972 A KR20080024972 A KR 20080024972A KR 101423655 B1 KR101423655 B1 KR 101423655B1
Authority
KR
South Korea
Prior art keywords
field
image
reference field
selecting
input image
Prior art date
Application number
KR1020080024972A
Other languages
English (en)
Other versions
KR20090099786A (ko
Inventor
김대희
조대성
최웅일
김현문
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020080024972A priority Critical patent/KR101423655B1/ko
Priority to US12/382,001 priority patent/US8355589B2/en
Priority to PCT/KR2009/001280 priority patent/WO2009116756A2/en
Priority to EP09723145A priority patent/EP2279623A4/en
Publication of KR20090099786A publication Critical patent/KR20090099786A/ko
Application granted granted Critical
Publication of KR101423655B1 publication Critical patent/KR101423655B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/58—Motion compensation with long-term prediction, i.e. the reference frame for a current frame not being the temporally closest one
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/187—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a scalable video layer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

필드 픽쳐 부호화/복호화 장치 및 그 방법을 개시한다. 필드 픽쳐 부호화 방법은 입력 영상에 대한 참조 필드를 선택하고, 상기 선택된 참조 필드에 대한 디인터레이싱을 통하여 예측 영상을 생성하고, 그리고, 상기 예측 영상을 이용하여 상기 입력 영상에 대한 예측 부호화를 수행하는 단계를 포함한다.
디인터레이싱(deinterlacing), 필드 픽쳐 부호화, 계층 부호화

Description

필드 픽쳐 부호화/복호화 장치 및 그 방법{METHOD AND APPARATUS FOR FIELD PICTURE CODING AND DECODING}
본 발명은 동영상 부호화/복호화에 관한 것으로서, 특히 비월 주사 방식의 동영상에서 필드 픽쳐 부호화/복호화 장치 및 그 방법에 관한 것이다.
일반적으로, 동영상 부호화는 전송 대역폭을 감소시키고, 부호화 효율을 개선하기 위하여 움직임 보상에 따른 예측 부호화를 사용한다.
비월 주사 방식의 동영상은 한 프레임의 영상이 서로 다른 시간에 샘플링 되며, 샘플이 한 라인마다 번갈아 가며 반복된다. 서로 다른 시간에 샘플링 된 영상을 각각 탑 필드(Top field)와 바텀 필드(Bottom)라고 하며, 각 필드를 하나의 픽쳐(picture)로 간주할 수 있다.
이러한 비월 주사 방식의 동영상 부호화/복호화 역시, 부호화 효율을 개선하고 계층 부호화 시 역방향 및 순방향 호환성을 제공할 수 있는 부호화/복호화 장치 및 방법이 요구된다.
본 발명은 비월 주사 방식의 동영상 부호화/복호화 장치 및 방법을 제공한다.
본 발명은 부호화 효율을 개선하고 계층 부호화 시 역방향 및 순방향 호환성을 제공할 수 있는 부호화/복호화 장치 및 방법을 제공한다.
본 발명의 일 실시예에서, 부호화 방법은 입력 영상에 대한 참조 필드를 선택하고, 상기 선택된 참조 필드에 대한 디인터레이싱을 통하여 예측 영상을 생성하고, 그리고, 상기 예측 영상을 이용하여 상기 입력 영상에 대한 예측 부호화를 수행하는 단계를 포함한다.
본 발명의 일 실시예에서, 부호화 장치는 현재 입력 영상에 대한 참조 필드를 선택하는 참조 영상 선택부와, 상기 선택된 참조 영상에 대한 디인터레이싱을 수행하여 가상 필드를 생성하는 가상 필드 생성부 및 부호화 효율에 따라서 상기 가상 필드를 예측 부호화를 위한 예측 영상으로 제공하는 모드 선택부를 포함한다.
본 발명의 일 실시예에서, 복호화 장치는 수신 비트스트림을 복호화하여 참조 필드 인덱스를 복원하는 복호화부 및 상기 참조 필드 인덱스에 대응하는 참조 필드에 대한 디인터레이싱을 수행하여 예측 복원 영상을 생성하는 예측 복원 영상 생성부를 포함한다.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도면을 참조하여 상세하게 설명한다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치의 구성을 설명하기 위한 블록도이다.
도 1을 참조하면, 동영상 부호화 장치는 DCT부(101), 양자화부(103), 엔트로피 부호화부(105), 역양자화부(107), IDCT부(109), 필드 픽쳐 저장부(111) 및 예측 영상 생성부예측영상 제공부(113)를 포함한다.
이때, 동영상 부호화 장치는 입력 영상과 예측 영상을 이용하여 예측 부호화를 수행한다.
일 실시예에서, 입력되는 영상 데이터는 필드 픽쳐 단위로 구성될 수 있다.
DCT부(101)는 입력 영상 데이터의 공간 중복성을 얻기 위한 이산 코사인변환(Discrete Cosine Transform, DCT)을 수행한다.
양자화부(103)는 이산 코사인 변환된 영상 데이터를 양자화한다.
엔트로피 부호화부(105)는 양자화부(103)에 의하여 양자화된 영상 데이터를 엔트로피 부호화한다.
역양자화부(107)는 양자화된 영상 데이터를 역양자화한다.
IDCT부(109)는 역양자화된 영상 데이터를 역 이산 코사인 변환하여 영상 데이터를 복원한다.
필드 픽쳐 저장부(111)는 복원된 영상 데이터를 필드 단위로 저장한다.
예측 영상 생성부(113)는 현재 입력 영상과 필드 픽쳐 저장부(111)에 저장된 이전 필드의 영상 데이터를 이용하여 움직임 보상을 수행하거나 디인터레이 싱(Deinterlacing)을 수행하여 예측 영상을 생성한다.
일 실시예에서, 예측 영상 생성부(113)는 ME/MC부(115), 디인터레이싱부(117) 및 모드 선택부(119)를 포함하여 구성될 수 있다.
ME/MC부(115)는 입력 영상과 필드 픽쳐 저장부(111)에 저장된 이전 필드의 영상 데이터를 이용하여 움직임 벡터(Motion Vector, MV)를 추정하고, 추정된 움직임 벡터를 이용하여 움직임 보상(Motion Compensation, MC)을 수행한다.
디인터레이싱부(117)는 입력 영상과 필드 픽쳐 저장부(111)에 저장된 이전 필드의 참조 영상 데이터를 이용하여 디인터레이싱을 수행한다.
모드 선택부(119)는 부호화 효율에 따라서 ME/MC부(115)에 의하여 움직임 보상된 예측 영상을 출력하거나, 디인터레이싱부(117)에 의하여 디인터레이싱된 예측 영상을 출력한다.
일 실시예에서, 모드 선택부(119)는 움직임이 적은 영역에 대한 참조 영상을 디인터레이싱된 영상으로 선택할 수 있다. 이때, 디인터레이싱은 필드를 구성하는 매크로 블록 단위로 수행될 수 있다. 이와 같이, 디인터레이싱된 매크로 블록을 예측 영상으로 사용하면 비월 주사 방식에 적합한 예측 영상의 선택이 가능하고, 움직임이 적은 영역에 대한 부호화 효율이 증가할 수 있다.
이하, 디인터레이싱부(117)에 의하여 디인터레이싱된 예측 영상을 출력하는 모드를 디인터레이싱 모드라 정의한다.
도 2는 본 발명의 실시예에 따른 디인터레이싱부의 구성을 설명하기 위한 블록도이다.
도 2를 참조하면, 디인터레이싱부는 참조 필드 선택부(201), 가상 필드 생성부(203) 및 가상 필드 저장부(205)를 포함하여 구성될 수 있다.
참조 필드 선택부(201)는 이전 시간 구간에서 저장된 참조 필드로부터 디인터레이싱을 수행하기 위한 복수의 참조 필드를 선택한다.
일반적인 디인터레이싱은 프레임 단위로 참조 픽쳐를 선택하기 때문에 두개의 필드를 가지고 하나의 프레임을 만드는 과정이다., 인접한 두 개의 프레임에서 두 개의 필드를 고려하여 디인터레이싱을 수행한다. 따라서, 본 발명의 일 실시예에서, 영상 데이터는 필드 단위로 저장되기 때문에, 참조 필드 선택부(201)는 현재 필드에서 시간축상 인접한 2개의 필드를 참조 필드로 선택 할 수 있다. 이때, 2개의 참조 필드는 픽처단위로 설정된 참조 필드인 주참조 필드와 시간 축 상에서 현재 필드와 가까운 방향으로 인접한 필드가 보조 참조 필드가 선택된다. 디인터레이싱을 위한 참조 비율에 따라서 주 참조 필드와 보조 참조 필드로 구분된다.
가상 필드 생성부(203)는 선택된 주 참조 필드와 보조 참조 필드를 이용하여 디인터레이싱을 수행함으로써 가상 필드를 생성한다.
이때, 가상 필드 생성부(203)는 참조 필드를 이용하여 매크로 블록 단위로 가상 필드를 생성한다.할 수 있다.
가상 필드 저장부(205)는 가상 필드 생성부(203)에 의하여 생성된 가상 필드를 저장한다. 가상 필드 저장부(205)에 저장된 가상 필드는 모드 선택에 따라서 예측 영상으로 제공된다.
도 3은 주 참조 필드가 현재 필드로부터 시간축 상으로 바로 이전 필드 이 며 탑 필드일 경우에 참조 필드 및 가상 필드간의 관계를 설명하기 위한 일예이다.
도 3을 참조하면, 참조 필드 선택부(201)는 현재 필드(307)와 가장 가까운 제1 참조 필드(303)를 주 참조 필드로 선택한다. 이때, 현재 필드(307)는는 탑 필드이이므로고, 제1 참조 필드(303)는 현재 필드(307)와 반대 극성인 바텀 필드이다. 또한, 참조 필드 선택부(201)는 디인터레이싱을 위하여 시간축 상으로 현재 필드(307)와 가깝고가장 가까운 동일한 극성을 갖는 제2 참조 필드(301)를 보조 참조 필드로 선택한다.
가상 필드 생성부(203)는 제1 참조 필드(303)와 제2 참조 필드(301)를 이용하여 예측 부호화를 위한 가상 필드(305)를 생성한다. 도 3에서, 숫자는 디인터레이싱을 위한 필터 계수의 예를 나타낸다. 이때, 필터 계수는 주 참조 필드, 보조 참조 필드, 필드 내 매크로 블록 위치에 따라서 다양하게 설정될 수 있다.
도 4는 주 참조 필드가 현재 필드로부터 시간축 상으로 바로 이전 필드 이며 바텀 필드일 경우에 참조 필드 및 가상 필드간의 관계를 설명하기 위한 다른 예이다.
도 4에서, 도 3과의 차이점은 현재 필드(407) 및 보조 참조 필드(401)가 바텀 필드이고, 주 참조 필드(403)가 탑 필드인 것이다.
전술한 바와 마찬가지로, 가상 필드 생성부(203)는 주 참조 필드(403) 및 보조 참조 필드(401)를 이용하여 예측 부호화를 위한 가상 필드(405)를 생성한다.
도 5는 멀티플 레퍼런스(Multiple Reference)를 사용하는 경우에 있어서, 주 참조 필드가 시간축 상으로 바로 이전의 필드가 아니며 현재 필드와 극성이 반 대인 예를 나타낸다.
도 5를 참조하면, 복수의 후보 필드 중 주 참조 필드(505)는 시간축 상으로 현재 필드(501)의 바로 이전의 필드가 아니며, 현재 필드(501)는 탑 필드이고 주 참조 필드(505)는 바텀 필드임을 알 수 있다. 또한, 디인터레이싱을 수행하기 위한 보조 참조 필드(503)는 주 참조 필드(505) 보다 시간축 상으로 현재 필드(501)에 가까우면서, 주참조 필드에 인접한 탑 필드임을 알 수 있다.
이때, 현재 필드와 주 참조 필드의 극성이 같은 경우에는, 화소의 위치가 반대 극성인 경우와 같이 어긋나지 않기 때문에, 디인터레이싱 모드는 수행되지 않는다.
도 6은 도5에서, 참조 필드 및 가상 필드간의 관계를 설명하기 위한 도면이다.
도 6에서, 현재 필드(501)는 탑 필드이다. 그리고, 주 참조 필드(505)는 현재 필드(501)와의 거리가 3이상이며, 현재 필드(501)와 다른 극성이다. 보조 참조 필드(503)는 현재 필드(501)와 같은 극성이며, 주 참조 필드(505)보다 시간축 상으로 현재 필드에 가깝고, 주참조 필드(505)의 인접 필드이다.이다. 가상 필드 생성부(203)는 주 참조 필드(501) 및 보조 참조 필드(503)를 이용하여 가상 필드(507)를 생성한다.
도 7은 멀티플 레퍼런스(Multiple Reference)를 사용하는 경우에 있어서, 주 참조 필드가 시간축 상으로 바로 이전의 필드가 아니며 현재 필드와 극성이 반대인 다른 예를 나타낸다.
도 7을 참조하면, 복수의 후보 필드 중 주 참조 필드(605)는 시간축 상으로 현재 필드(601)의 바로 이전의 필드가 아니며, 현재 필드(601)는 바텀 필드이고 주 참조 필드(605)는 탑 필드임을 알 수 있다. 또한, 디인터레이싱을 수행하기 위한 보조 참조 필드(603)는 주 참조 필드(605) 보다 시간축 상으로 현재 필드(601)에 가까우면서, 주참조 필드에 인접한 바텀 필드임을 알 수 있다.
이때, 현재 필드와 주 참조 필드의 극성이 같은 경우에는, 화소의 위치가 반대 극성인 경우와 같이 어긋나지 않기 때문에, 디인터레이싱 모드는 수행되지 않는다.
도 8은 도7에서, 참조 필드 및 가상 필드간의 관계를 설명하기 위한 도면이다.
도 8에서, 현재 필드(601)는 바텀 필드이다. 그리고, 주 참조 필드(605)는 현재 필드(601)와의 거리가 3이상이며, 현재 필드(601)와 다른 극성이다. 보조 참조 필드(603)는 현재 필드(501)와 같은 극성이며, 주 참조 필드(605)보다 시간축 상으로 현재 필드에 가깝고, 주참조 필드(605)의 인접 필드이다.이다. 가상 필드 생성부(203)는 주 참조 필드(601) 및 보조 참조 필드(603)를 이용하여 가상 필드(607)를 생성한다.
도 9는 본 발명의 일 실시예에 따른 필드 픽쳐 부호화 방법에서 디인터레이싱 모드를을 설명하기 위한 흐름도이다.
먼저, 현재 입력 영상 데이터는 움직임이 적은 영역으로서, 움직임 보상이 아닌 디인터레이싱에 의한 예측 영상을 가정한다.
단계 S901에서, 필드 픽쳐 부호화 장치는 이전 시간 구간에 저장된 복수주참조 필드와 그에 따른 보조 의 참조 필드를 선택한다.
이때, 주 참조 필드와 그에 따른 보조 참조 필드의 선택은 상기 도 3, 도 4, 도 5, 도 7에서 설명한 방법 중 어느 한 방법으로 선택될 수 있다.
이때, 참조 필드는 현재 필드에서 시간축상 가장 가까운 2개의 필드를 참조 필드로 선택 할 수 있다. 또한, 참조 필드는 참조 정도에 따라서 주 참조 필드와 보조 참조 필드로 구분된다.
단계 S903에서, 필드 픽쳐 부호화 장치는 참조 필드에 대한 디인터레이싱을 통하여 예측 영상을 생성한다. 즉, 필드 픽쳐 부호화 장치는 참조 필드를 이용하여 가상 필드를 생성하고, 생성된 가상 필드를 예측 영상으로 선택한다.
이때, 필드 픽쳐 부호화 장치는 참조 필드의 해당 매크로 블록을 이용하여 가상의 매크로 블록을 생성할 수 있다생성한다.. 따라서, 예측 부호화를 위한 예측 영상은 가상 필드 또는 가상 매크로 블록이 될 수 있다.
단계 S905에서, 필드 픽쳐 부호화 장치는 현재 입력 영상과 예측 영상을 이용하여 예측 부호화를 수행한다.
일 실시예에서, 필드 픽쳐 부호화 장치는 참조 필드 인덱스를 부호화하여 복호화단으로 전송한다. 따라서, 복호화단은 참조 필드 인덱스를 이용하여 상기한 부호화 과정에 대응하는 복호화를 수행할 수 있다.
도 10은 계층 부호화를 수행하는 필드 픽쳐 부호화 장치의 구성을 설명하기 위한 블록도이다.
도 10을 참조하면, 계층 부호화를 수행하는 필드 픽쳐 부호화 장치는 기본 계층의 부호화를 수행하는 기본 계층 부호화부(미 도시 함) 및 상위 계층 부호화부(1000)를 포함한다.
기본 계층 부호화부는 기본적인 화질이 보장되는 비트스트림을 생성하여 복호화단으로 전송한다.
상위 계층 부호화부(1000)는 기본 계층 부호화부의 출력 비트스트림으로부터 복원된 복원 영상과 입력 영상간의 차이를 나타내는 잔차(residue) 영상을 부호화하여 복호화단으로 전송한다.
상위 계층 부호화부(1000)는 DCT부(1001), 양자화부(1003), 엔트로피 부호화부(1005), 역양자화부(1007), IDCT부(1009), 필드 픽쳐 저장부(1011) 및 예측영상 제공부예측 잔차 영상 생성부(1013)를 포함한다.
DCT부(10101)는 입력 잔차 영상의 공간 중복성을 얻기 위한 이산 코사인변환(Discrete Cosine Transform, DCT)을 수행한다.
양자화부(1003)는 이산 코사인 변환된 잔차 영상을 양자화한다.
엔트로피 부호화부(1005)는 양자화부(1003)에 의하여 양자화된 잔차 영상을 엔트로피 부호화한다.
역양자화부(1007)는 양자화된 잔차 영상을 역양자화한다.
IDCT부(1009)는 역양자화된 잔차 영상을 역 이산 코사인 변환하여 잔차 영상을 복원한다.
필드 픽쳐 저장부(1011)는 복원된 잔차 영상을 필드 단위로 저장한다.
예측 영상 제공부예측 잔차 영상 생성부(1013)는 현재 입력 잔차 영상과 필드 픽쳐 저장부(1011)에 저장된 이전 필드의 잔차 영상을 이용하여 움직임 보상을 수행하거나 디인터레이싱(Deinterlacing)을 수행하여 예측 잔차 영상을 생성한다.
일 실시예에서, 예측 영상 제공부예측 잔차 영상 생성부(1013)는 부호화 효율에 따라서 움직임 추정 및 움직임 보상된 예측 잔차 영상을 출력하거나, 디인터레이싱된 예측 잔차 영상을 출력할 수 있다.
또한, 예측 영상 제공부예측 잔차 영상 생성부(1013)는 잔차 영상에 대한 예측 잔차 영상을 제공하는 점을 제외하면, 도 1의 예측 영상 제공부(113)와 유사한 기능을 수행한다. 따라서, 참조 잔차 필드의 선택 및 가상 잔차 필드의 생성 방법은 상기한 참조 필드의 선택 및 가상 필드 생성 방법을 이용할 수 있다.
도 11은 상위 계층 부호화부의 필드 픽쳐 부호화 방법에서 디인터레이싱 모드를을 설명하기 위한 흐름도이다.
먼저, 현재 입력 레지듀 영상은 움직임이 적은 영역에 대한 레지듀 영상으로 가정한다. 따라서, 예측 영상은 디인터레이싱에 의한 예측 영상이 된다.
단계 S1101에서, 상위 계층 부호화부(1000)는 기본 계층 부호화부의 출력 비트스트림으로부터 복원된 복원 영상과 입력 영상간의 차이를 나타내는 잔차 영상을 입력 받는다.
단계 S1103에서, 상위 계층 부호화부(1000)는 이전 시간 구간에 저장된 잔차 필드 중 복수의주 참조 잔차 필드와 그에 따른 보조 잔차 참조 레지듀 필드를 선택한다.
이때, 참조 레지듀 필드는 현재 필드에서 시간축상 가장 가까운 2개의 필드를 참조 레지듀 필드로 선택 할 수 있다. 또한, 참조 레지듀 필드는 참조 정도에 따라서 주 참조 레지듀 필드와 보조 참조 레지듀 필드로 구분된다.
단계 S1105에서, 상위 계층 부호화부(1000)는 참조 잔차 필드를 이용하여 가상의 잔차 필드를 생성한다. 이때, 가상 잔차 필드는 잔차 영상의 예측 부호화를 위한 예측 잔차 영상이다.
이때, 상위 계층 부호화부(1000)는 참조 잔차 필드의 해당 매크로 블록을 이용하여 가상의 매크로 블록을 을생성한다. 생성할 수 있다. 따라서, 예측 부호화를 위한 예측 영상은 가상 레지듀 필드 또는 가상 매크로 블록이 될 수 있다.
단계 S1107에서, 상위 계층 부호화부(1000)는 현재 입력 잔차 영상과 예측 잔차 영상을 이용하여 예측 부호화를 수행한다.
일 실시예에서, 상위 계층 부호화부(1000)는 참조 잔차 필드 인덱스를 부호화하여 복호화단으로 전송한다. 따라서, 복호화단은 참조 잔차 필드 인덱스를 이용하여 부호화 과정에 대응하는 복호화를 수행할 수 있다.
계층 부호화를 수행하는 필드 픽쳐 부호화 장치 및 상위 계층 부호화부의 필드 픽쳐 부호화 방법에 따르면, 다양한 동영상 포맷을 지원하기 위한 계층 부호화 방식에서 부호화 효율을 높일 수 있다.
즉, 기본 계층 부호화는 종래의 비월 주사 방식의 부호화를 수행하고, 상위 계층 부호화는 상기한 필드 픽쳐 부호화 방법을 이용함으로써, 계층 부호화 시 역방향 및 순방향 호환성을 제공할 수 있다.
도 12는 본 발명의 실시예에 따른 필드 픽쳐 복호화 장치의 구성을 설명하기 위한 블록도이다.
도 12를 참조하면, 필드 픽쳐 복호화 장치는 엔트로피 복호화부(1201), 역양자화부(1203), IDCT부(1205), 및 예측 복원 영상 생성부(1207)를 포함한다.
엔트로피 복호화부(1201)는 수신 비트스트림을 엔트로피 복호화한다. 이때, 수신 비트스트림은 움직임 벡터 또는 참조 필드 인덱스를 포함하며, 엔트로피 복호화부(1201)는 움직임 벡터 또는 참조 필드 인덱스를 예측 복원 영상 생성부(1207)로 제공한다.
역양자화부(1203)는 엔트로피 복호화된 비트스트림을 역양자화한다.
IDCT부(1205)는 역양자화된 비트스트림을 역 이산 코사인 변환하여 영상 데이터를 복원한다.
예측 복원 영상 생성부(1207)는 움직임 벡터 또는 참조 필드 인덱스를 이용하여 예측 복호화를 위한 예측 복원 영상을 생성한다.
예측 복원 영상 생성부(1207)는 수신 비트스트림이 디인터레이싱에 의하여 예측 부호화된 경우에는 이에 대응하는 예측 복원 영상을 생성한다.
즉, 예측 복원 영상 생성부(1207)는 이전 시간에 복원된 필드 중 참조 필드 인덱스에 대응하는 주 참조 필드를 선택하고, 선택된 주 참조 필드에 따른 를 이용하여 보조 참조 필드를 선택하여, 가상 필드를 생성한다. 이때, 가상 필드는 예측 복호화를 위한 예측 복원 영상이 된다.
참조 필드 인덱스는 부호화단에서 전송된 것이기 때문에, 이전 시간에 복원 된 참조 필드 중 상기 수신 비트스트림과 시간축 상으로 가장 인접한 복수의 참조 필드에 대응한다. 주 참조 필드의 시간축 상의 위치에 따라 보조 참조 필드가 선택되어 진다.
참조 필드 인덱스가 주 참조 필드로 현재 필드에 가장 가까운 필드를 지시할 경우에는 해당 주 참조 필드가 현재 필드와 반대 극성의 참조 필드이다. 따라서, 보조 참조 필드는 현재 필드에서 두 번째로 가까운 필드로써 현재 필드와 동일한 극성을 갖는다.
참조 필드 인덱스가 주 참조 필드로 필드 픽쳐 저장부 안의 가장 가까운 필드가 아닌 임의의 필드이고 현재 필드와 극성이 다른 필드를 지시할 경우에는, 보조 필드는 주 참조 필드보다 현재 필드에 시간축으로 가깝고, 주 참조 필드의 인접 필드가 선택되며 현재 필드와 동일한 극성을 갖는다.
참조 필드 인덱스가 주 참조 필드로 현재 필드와 동일한 극성의 필드를 지시할 경우에는 디인터레이싱 모드는 수행되지 않는다.
필드 픽쳐 부호화/복호화 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다.
그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.
도 1은 본 발명의 일 실시예에 따른 동영상 부호화 장치의 구성을 설명하기 위한 블록도이다.
도 2는 본 발명의 실시예에 따른 디인터레이싱부의 구성을 설명하기 위한 블록도이다.
도 3은 참조 필드 및 가상 필드간의 관계를 설명하기 위한 일예이다.
도 4는 참조 필드 및 가상 필드간의 관계를 설명하기 위한 다른 예이다.
도 5는 멀티플 레퍼런스(Multiple Reference)를 사용하는 경우에 있어서, 주 참조 필드가 시간축 상으로 바로 이전의 필드가 아니며 현재 필드와 극성이 반대인 예를 나타낸다.
도 6은 도5에서, 참조 필드 및 가상 필드간의 관계를 설명하기 위한 도면이다.
도 7은 멀티플 레퍼런스(Multiple Reference)를 사용하는 경우에 있어서, 주 참조 필드가 시간축 상으로 바로 이전의 필드가 아니며 현재 필드와 극성이 반대인 다른 예를 나타낸다.
도 8은 도7에서, 참조 필드 및 가상 필드간의 관계를 설명하기 위한 도면이다.
도 9는 본 발명의 일 실시예에 따른 필드 픽쳐 부호화 방법에서 디인터레이싱 모드를을 설명하기 위한 흐름도이다.
도 10은 계층 부호화를 수행하는 필드 픽쳐 부호화 장치의 구성을 설명하기 위한 블록도이다.
도 11은 상위 계층 부호화부의 필드 픽쳐 부호화 방법에서 디인터레이싱 모드를을 설명하기 위한 흐름도이다.
도 12는 본 발명의 실시예에 따른 필드 픽쳐 복호화 장치의 구성을 설명하기 위한 블록도이다.

Claims (16)

  1. 입력 영상에 대한 복수의 후보 필드로부터 참조 필드를 선택하는 단계;
    상기 선택된 참조 필드에 대한 디인터레이싱을 통하여 예측 영상을 생성하는 단계; 및
    상기 예측 영상을 이용하여 상기 입력 영상에 대한 예측 부호화를 수행하는 단계
    를 포함하고,
    상기 입력 영상에 대한 복수의 후보 필드로부터 참조 필드를 선택하는 단계는,
    상기 복수의 후보 필드로부터 하나의 주 참조 필드를 선택하는 단계; 및
    상기 주 참조 필드에 인접한 하나의 보조 참조 필드를 선택하는 단계
    를 포함하는 필드 픽쳐 부호화 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 보조 참조 필드는,
    상기 입력 영상과 시간축 상으로 상기 주 참조 필드 보다 가까운 필드인,
    필드 픽쳐 부호화 방법.
  4. 제1항에 있어서,
    상기 복수의 후보 필드로부터 하나의 주 참조 필드를 선택하는 단계는,
    상기 입력 영상과 시간축 상으로 가장 인접한 필드를 상기 주 참조 필드로 선택하는 단계
    를 포함하고,
    상기 주 참조 필드에 인접한 하나의 보조 참조 필드를 선택하는 단계는,
    상기 입력 영상과 시간축 상에서 두 번째로 가까운 필드를 상기 보조 참조 필드로 선택하는 단계
    를 포함하는 필드 픽쳐 부호화 방법.
  5. 제1항에 있어서,
    상기 입력 영상은,
    계층 부호화를 위한 잔차 영상인,
    필드 픽쳐 부호화 방법.
  6. 입력 영상에 대한 복수의 후보 필드로부터 참조 필드를 선택하는 참조 영상 선택부;
    상기 선택된 참조 영상에 대한 디인터레이싱을 수행하여 가상 필드를 생성하는 가상 필드 생성부; 및
    부호화 효율에 따라서 상기 가상 필드를 예측 부호화를 위한 예측 영상으로 제공하는 모드 선택부
    를 포함하고,
    상기 참조 영상 선택부는,
    상기 복수의 후보 필드로부터 하나의 주 참조 필드를 선택하고, 상기 주 참조 필드에 인접한 하나의 보조 참조 필드를 선택하는
    필드 픽쳐 부호화 장치.
  7. 제6항에 있어서,
    상기 보조 참조 필드는,
    상기 입력 영상과 시간축 상에서 상기 주 참조 필드 보다 가까운 필드인,
    필드 픽쳐 부호화 장치.
  8. 제6항에 있어서,
    상기 주 참조 필드는,
    상기 입력 영상과 시간축 상으로 가장 인접한 필드이고,
    상기 보조 참조 필드는,
    상기 입력 영상과 시간축 상에서 두 번째로 가까운 필드인,
    필드 픽쳐 부호화 장치.
  9. 제6항에 있어서,
    상기 가상 필드 생성부는,
    상기 주 참조 필드 및 상기 보조 참조 필드를 이용하여 가상 필드를 생성하는,
    필드 픽쳐 부호화 장치.
  10. 제6항에 있어서,
    상기 입력 영상은,
    계층 부호화를 위한 잔차 영상인,
    필드 픽쳐 부호화 장치.
  11. 제6항에 있어서,
    상기 모드 선택부는,
    예측부호화를 위하여, 이전 필드의 영상 데이터를 이용하여 추정된 움직임 벡터를 이용하여 움직임 보상이 수행된 예측 영상을 출력하는 움직임 예측 모드, 및 디인터레이싱된 예측 영상을 출력하는 디인터레이싱 모드 중에서 어느 하나의 모드를 선택하여 예측영상을 제공하는,
    필드 픽쳐 부호화 장치.
  12. 수신 비트스트림을 복호화하여 참조 필드 인덱스를 복원하는 복호화부; 및
    상기 참조 필드 인덱스에 대응하는 참조 필드에 대한 디인터레이싱을 수행하여 예측 복원 영상을 생성하는 예측 복원 영상 생성부
    를 포함하고,
    상기 참조 필드는 주 참조 필드로서 선택되는 필드, 및 상기 주 참조 필드에 인접한, 보조 참조 필드로서 선택되는 필드
    를 포함하는 필드 픽쳐 복호화 장치.
  13. 삭제
  14. 제12항에 있어서,
    상기 보조 참조 필드는,
    상기 수신 비트스트림에 대응하는 현재 필드와 시간축 상으로 상기 주 참조 필드 보다 가까운 필드인,
    필드 픽쳐 복호화 장치.
  15. 제12항에 있어서,
    상기 예측 복원 영상 생성부는,
    상기 참조 필드 인덱스가 상기 수신 비트스트림에 대응하는 현재 필드와 시간축 상으로 가장 인접한 필드를 지시하는 경우에는, 상기 현재 필드와 두 번째로 가까운 필드를 보조 참조 필드로 선택하는,
    필드 픽쳐 복호화 장치.
  16. 제12항에 있어서,
    상기 수신 비트스트림은,
    계층 부호화를 위한 잔차 영상에 대응하는 비트스트림인,
    필드 픽쳐 복호화 장치.
KR1020080024972A 2008-03-18 2008-03-18 필드 픽쳐 부호화/복호화 장치 및 그 방법 KR101423655B1 (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020080024972A KR101423655B1 (ko) 2008-03-18 2008-03-18 필드 픽쳐 부호화/복호화 장치 및 그 방법
US12/382,001 US8355589B2 (en) 2008-03-18 2009-03-05 Method and apparatus for field picture coding and decoding
PCT/KR2009/001280 WO2009116756A2 (en) 2008-03-18 2009-03-16 Method and apparatus for field picture coding and decoding
EP09723145A EP2279623A4 (en) 2008-03-18 2009-03-16 PROCESS AND DEVICE FOR PARTIAL BODY DECODING AND DECO9 DECODING

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080024972A KR101423655B1 (ko) 2008-03-18 2008-03-18 필드 픽쳐 부호화/복호화 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20090099786A KR20090099786A (ko) 2009-09-23
KR101423655B1 true KR101423655B1 (ko) 2014-07-29

Family

ID=41089010

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080024972A KR101423655B1 (ko) 2008-03-18 2008-03-18 필드 픽쳐 부호화/복호화 장치 및 그 방법

Country Status (4)

Country Link
US (1) US8355589B2 (ko)
EP (1) EP2279623A4 (ko)
KR (1) KR101423655B1 (ko)
WO (1) WO2009116756A2 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100244290B1 (ko) 1997-09-09 2000-02-01 구자홍 저속 전송에서의 동영상을 위한 디블록킹 필터링 방법
JP2013102295A (ja) * 2011-11-07 2013-05-23 Canon Inc 画像符号化方法、画像符号化装置及びプログラム、画像復号方法、画像復号装置及びプログラム
US9015857B2 (en) * 2011-11-14 2015-04-21 Wave Systems Corp. Security systems and methods for encoding and decoding digital content
US9047489B2 (en) * 2011-11-14 2015-06-02 Wave Systems Corp. Security systems and methods for social networking
GB2503656B (en) * 2012-06-28 2014-10-15 Canon Kk Method and apparatus for compressing or decompressing light field images
US9516330B2 (en) * 2013-02-06 2016-12-06 Broadcom Corporation Virtual field buffer based decoding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5175618A (en) * 1990-10-31 1992-12-29 Victor Company Of Japan, Ltd. Compression method for interlace moving image signals
US20050053292A1 (en) 2003-09-07 2005-03-10 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
KR20070026409A (ko) * 2004-03-12 2007-03-08 톰슨 라이센싱 비월 디지털 비디오 데이터를 엔코딩하기 위한 방법
US20070230578A1 (en) 2006-04-04 2007-10-04 Qualcomm Incorporated Apparatus and method of enhanced frame interpolation in video compression

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5317397A (en) * 1991-05-31 1994-05-31 Kabushiki Kaisha Toshiba Predictive coding using spatial-temporal filtering and plural motion vectors
EP0665691A3 (de) * 1994-01-26 1996-03-13 Siemens Ag Verfahren zur Minimierung der zeitlichen Verzögerung bei der Übertragung bewegter Bilder mit niedrigen Datenraten.
US20060209954A1 (en) * 2005-03-16 2006-09-21 Limin Wang Method and apparatus for providing a rate control for interlace coding
KR101378185B1 (ko) 2006-07-11 2014-03-26 톰슨 라이센싱 가상 참조 픽처를 사용하는 방법 및 장치

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5175618A (en) * 1990-10-31 1992-12-29 Victor Company Of Japan, Ltd. Compression method for interlace moving image signals
US20050053292A1 (en) 2003-09-07 2005-03-10 Microsoft Corporation Advanced bi-directional predictive coding of interlaced video
KR20070026409A (ko) * 2004-03-12 2007-03-08 톰슨 라이센싱 비월 디지털 비디오 데이터를 엔코딩하기 위한 방법
US20070230578A1 (en) 2006-04-04 2007-10-04 Qualcomm Incorporated Apparatus and method of enhanced frame interpolation in video compression

Also Published As

Publication number Publication date
EP2279623A4 (en) 2011-09-07
US8355589B2 (en) 2013-01-15
WO2009116756A2 (en) 2009-09-24
WO2009116756A3 (en) 2011-03-10
KR20090099786A (ko) 2009-09-23
EP2279623A2 (en) 2011-02-02
US20090238482A1 (en) 2009-09-24

Similar Documents

Publication Publication Date Title
KR100760258B1 (ko) 범용적 다시점 동영상 부호화/복호화 장치 및 방법
JP5174581B2 (ja) 順方向予測インターレース映像フレームのフィールド用の動きベクトルの予測
JP5026602B2 (ja) インターレース・ビデオの符号化および復号
KR101083870B1 (ko) 인터레이스형 비디오의 최신 양방향 예측 코딩
KR101442608B1 (ko) 영상을 효율적으로 부호화/복호화하는 방법 및 장치
US8619854B2 (en) Scalable video encoding and decoding method using switching pictures and apparatus thereof
JP6432662B2 (ja) 映像符号化装置、映像符号化方法及びプログラム
JP2007180981A (ja) 画像符号化装置、画像符号化方法、及び画像符号化プログラム
US20160100180A1 (en) Method and apparatus for processing video signal
KR101423655B1 (ko) 필드 픽쳐 부호화/복호화 장치 및 그 방법
JP2005510984A (ja) デジタルビデオコンテンツのためのピクチャレベルの適応フレーム／フィールド符号化
US8085844B2 (en) Signaling reference frame distances
JP2006279917A (ja) 動画像符号化装置、動画像復号装置及び動画像伝送システム
JPH07212761A (ja) 階層符号化装置及び階層復号化装置
WO2007043613A1 (ja) 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム、および動画像復号化プログラム
KR101445791B1 (ko) 움직임 벡터 변환을 이용한 비월 주사 영상 부호화/복호화방법 및 장치
KR100587952B1 (ko) 좌우영상의 비대칭적 크기로의 축소에 의한 보상을 수행하는 영상 부호화/복호화 장치 및 그 방법
KR20030001758A (ko) 움직임 및 시차 보상을 갖는 입체영상의 부호화/복호화장치 및 그 방법
KR20160005027A (ko) 비디오 신호 처리 방법 및 장치
JP2019097076A (ja) 映像符号化装置及び映像復号装置
JP2018032913A (ja) 映像符号化装置、プログラム及び方法、並びに、映像復号装置、プログラム及び方法、並びに、映像伝送システム
JP2007088833A (ja) 符号化装置及び復号装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee