KR19980080014A - 양방향으로 예측된 비디오 객체면과 같은 디지털비디오 화상의 코딩을 위한 방법 및 장치 - Google Patents
양방향으로 예측된 비디오 객체면과 같은 디지털비디오 화상의 코딩을 위한 방법 및 장치 Download PDFInfo
- Publication number
- KR19980080014A KR19980080014A KR1019980007630A KR19980007630A KR19980080014A KR 19980080014 A KR19980080014 A KR 19980080014A KR 1019980007630 A KR1019980007630 A KR 1019980007630A KR 19980007630 A KR19980007630 A KR 19980007630A KR 19980080014 A KR19980080014 A KR 19980080014A
- Authority
- KR
- South Korea
- Prior art keywords
- field
- bot
- current
- macroblock
- motion vector
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/649—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding the transform being applied to non rectangular image segments
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/112—Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
- H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/563—Motion estimation with padding, i.e. with filling of non-object values in an arbitrarily shaped picture block or region for estimation purposes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/583—Motion compensation with overlapping blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/63—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using sub-band based transform, e.g. wavelets
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
양방향으로 예측된 비디오 객체면(bi-directionally predicted video object planes; B-VOPs)과 같은 디지털 비디오 화상의 코딩을 위한 시스템, 특히 B-VOP 및/또는 B-VOP를 코드화 하는데 사용된 기준 화상이 인터레이스드 코드화된다. 미래 앵커 화면의 필드 예측된 매크로블록과 상호 위치한 B-VOP 매크로블록에 대해, 직접 모드 예측은 4개의 필드 동작 벡터를 계산하고 예측 매크로블록을 발생시킴으로서 이루어진다. 4개의 필드 동작 벡터 및 그 기준 필드는, 현재 B-VOP 필드 및 앵커(anchor) 필드 사이의 (1)현재 매크로블록의 코딩 벡터의 오프셋 텀(offset term), (2)2개의 미래 앵커 화면 필드 동작 벡터, (3)상호 위치한 미래 앵커 매크로블록의 2개의 필드 동작 벡터에 의해 사용된 기준 필드 및 (4)필드 기간내에서의 시간상의 간격으로부터 결정된다. 추가로, 현재 MB에 대한 코딩 모드 결정 과정은, 현재 MB의 상부 및 하부 필드에서 얻어지는 절대차(SAD)의 최소합에 따라서, 전방, 후방, 또는 평균 필드 코딩 모드를 선택한다.
Description
본 발명은 양방향으로 예측된 비디오 객체면(bi-directionally predicted video object planes; B-VOPs)과 같은 디지털 비디오 화상의 코딩을 위한 방법 및 장치를 제공하고, 특히 B-VOP 및/또는 B-VOP를 코드화 하는데 사용된 기준 화상이 인터레이스드 코드화된다.
본 발명은 특히 다양한 멀티미디어 어플리케이션을 이용하는데 적당하고, 참고로 1997년 7월 스톡홀롬에 발표된 제목MPEG-4 Video Verification Model Version 8.0로서 서류번호 ISO/IEC/JTC1/SC29/WGQQ N1796에 기술된 MPEG-4 검증모델 8.0 표준(MPEG-4 VM 8.0)에 적합하다.
MPEG-2 표준은 MPEG-4 표준에 앞서고, 참고로 1994년 3월 25일 제목 Information Technology - Generic Coding ov Moving Pictures and Associated Audio, Recommendation H.262,로서 서류 ISO/IEC 13818-2에 기술되어 있다.
MPEG-4는 디지털 음성-영상 데이터의 통신, 억세스, 조작을 위해 유연한 체계 및 코딩수단(coding tool)의 오픈 세트를 제공하는 코딩 표준이다. 이러한 툴은 형상의 넓은 범위를 지지한다. MPEG-4의 유연한 구조는, 데이터베이스 브라우징(browsing), 정보 검색, 및 대화식의 통신과 같이, 컴퓨터, 원격통신, 및 오락(즉, TV 및 필름)에 요구되는 어플리케이션을 위해 코딩수단의 다양한 조합 및 그기에 대응하는 기능성을 지지한다.
멀티미디어 환경에 있어서, MPEG-4는 비디오 데이터를 효과적으로 저장, 전송 및 조작하는 표준화된 핵심 기술을 제공한다. MPEG-4는 압축, 객체 가변성, 시공간 가변성, 및 에러 복구성을 효과적으로 이룬다.
MPEG-4 비디오 VM 코더/디코더(코덱)는 동작 보상을 가지는 블록 및 객체 기준의 복합 디코더이다. 겹치는 블록-동작 보상을 이용하여, 텍스처(Texture)는 8×8 이산 코사인 변환(Discrete Cosine Transformation; DCT)으로 엔코드화된다. 객체형태는 알파맵(alpha map)으로 표현되어지고, CAE(Content-based Arithmetic Encoding) 알고리즘 또는 수정된 DCT 코더를 이용하여 엔코드화된다. 코더는 컴퓨터 그래픽으로 알려진 바와 같이, 스프라이트(sprite)를 다룰 수 있다. 웨이브렛(wavelet) 및 스프라이트 코딩과 같은, 다른 코딩 방법은 또한 특정 응용에 사용될 수도 있다.
동작 보상된 텍스처 코딩은 비디오 코딩에 대해 널리 공지된 접근법이고, 3단계 과정으로 모델화될 수 있다. 제 1단계는, 동작 추정 및 보상(ME/MC) 및 2차원 공간 변환을 포함하는 신호의 처리이다. ME/MC 및 공간 변환의 목적은, 양자화 및 엔트로피 코딩의 비율-왜곡 작업의 복잡성을 강제로 최소화하기 위해, 비디오 시퀀스에서 시공간 상호관계를 이용하는 것이다. ME/MC에 대한 가장 일반적인 기술은 블록 매칭이었고, 가장 일반적인 공간 변환은 DCT였다.
그러나, MB가 자체 인터레이스드 코드화되고 혹은 인터레이스드 코드화된 기준 화상을 사용할 때, B-VOPs내에서 매크로블록(macroblocks; MBs)의 ME/MC에 대해 특정 관계가 발생한다.
특히, B-VOP내에서 MB에 대해 동작 벡터(MV) 프레딕터(predictor)를 제공하기 위한 효과적인 기술을 가지는 것이 바람직하다. B-VOP내에서 필드(field) 코드화된 MB의 직접 모드 코딩에 대한 효과적인 기술을 가지는 것이 또한 바람직하다. 더욱이, 가장 효과적인 코딩을 할 수 있는 기준 화상을 선택하기 위해, 필드 코드화된 B-VOP내에서 MB에 대한 코딩 모드 결정 과정을 가지는 것이 바람직하다.
본 발명은 상기 장점 및 다른 장점을 가지는 시스템을 제공한다.
도 1은 본 발명에 따른 비디오 객체면(VOP) 코딩 및 디코딩 과정의 설명도이다.
도 2는 본 발명에 따른 엔코더의 블록도이다.
도 3은 반픽셀(half-pixel) 검색에 대한 보간 체계(interpolation scheme)를 도시한 것이다.
도 4는 본 발명에 따라서, 인터레이스드 코드화된 B-VOP의 상부 필드의 직접 모드 코딩을 도시한 것이다.
도 5는 본 발명에 따라서, 인터레이스드 코드화된 B-VOP의 하부 필드의 직접 모드 코딩을 도시한 것이다.
도 6은 본 발명에 따라서, 적응화 프레임/필드 예측 체계에 있어서 픽셀 라인의 재정렬을 도시한 것이다.
도 7은 본 발명에 따른 디코더의 블록도이다.
도 8은 본 발명에 따른 매크로블록층 구조를 도시한 것이다.
본 발명에 따라서, 양방향으로 예측된 비디오 객체면(B-VOP)에서 현재 화상(예컨대, 매크로블록)과 같은 디지털 비디오 화상의 코딩을 위한 방법 및 장치가 제공되고, 특히 현재 화상을 코드화하는데 사용된 현재 화상 및/또는 기준 화상은 인터레이스드 코드화된다.
본 발명의 제1 측면에 있어서, 비디오 화상의 시퀀스내에서, 상부 및 하부 필드를 가지는 매크로블록(MB)과 같이, 현재 양방향으로 예측된 필드 코드화된 화상에 직접 모드 동작 벡터(MVs)를 제공한다. 상부 및 하부 필드를 가지는 과거의 필드 코드화된 기준 화상, 및 상부 및 하부 필드를 가지는 미래의 필드 코드화된 기준 화상이 결정된다. 미래의 화상은 과거의 화상을 사용하여 예측되어, 미래의 화상의 상부 필드의 전방 MV인 MVtop는 상기 과거 화상의 상부 또는 하부 필드중 하나를 참조한다. 참조되는 필드는 미래 화상의 상부 필드에서 MB에 대한 최적-결합 MB를 포함한다.
MV는 과거의 화상을 참조하지만, 과거의 화상으로부터 미래의 화상이 예측되기 때문에, 이 MV는 전방(forward)MV라고 명명된다. 연상 기호와 같이, 대응하는 MV의 방향의 반대로 예측방향이 생각될 수도 있다.
비슷하게, 미래 화상의 하부 필드의 전방 동작 벡터인 MVbot는 과거 화상의 상부 또는 하부 필드 중 하나를 참조한다. 전방 및 후방 MVs는, 미래 화상의 대응하는 필드의 전방 MV를 스케일링(scaling)함에 의해 현재 화상의 상부 및/또는 하부 필드를 예측하기 위해 결정된다.
특히, 현재 화상의 상부 필드를 예측하기 위한 전방 동작 벡터인 MVf,top는 공식 MVf,top= (MVtop* TRB,top)/TRD,top+MVD이고, 여기에서 MVD는 검색 영역에 대한 델타(delta) 동작 벡터이고, TRB,top는 MVtop에 의해 참조되는 현재 화상의 상부 필드 및 과거 화상의 필드 사이의 일시적인 공간에 대응하고, TRD.top는 MVtop에 의해 참조되는 미래 화상의 상부 필드 및 과거 화상의 필드 사이의 일시적인 공간에 대응한다. 일시적인 공간은 디스플레이되는 화상에서의 프레임율과 관련있을 수도 있다.
비슷하게, 현재 화상의 하부 필드를 예측하기 위한 전방 동작 벡터인 MVf,bot는 공식 MVf,bot= (MVbot* TRB,bot)/TRD,bot+ MVD에 따라 결정되고, 여기에서, MVD는 델타 동작 벡터이고, TRB.bot는 MVbot에 의해 참조되는 현재 화상의 하부 필드 및 과거 화상의 필드 사이의 일시적인 공간에 대응하고, TRD,bot는 MVbot에 의해 참조되는 미래 MB의 하부 필드 및 과거 MB의 필드 사이의 일시적인 공간에 대응한다.
현재 MB의 상부 필드를 예측하기 위한 후방 동작 벡터인 MVb,top은, 델타 동작 벡터 MVD=0일 때, MVb,top=((TRB,top)*MVtop)/TRD,top이고, 또는 MVD≠0일 때, MVb,top=MVf,top-MVtop인 방정식에 따라 결정된다.
현재 MB의 하부 필드를 예측하기 위한 후방 동작 벡터인 MVb,bot는, 델타 동작 벡터 MVD=0일 때, MVb,bot=((TRB,bot-TRD,bot)*MVbot)/TRD,bot이고, 또는 MVD≠0일 때, MVb,bot=MVf,bot-MVbot인 방정식에 따라 결정된다.
대응하는 디코더가 또한 제공된다.
본 발명의 다른 측면에 있어서, 디지털 비디오 MBs의 시퀀스내에서 상부 및 하부 필드를 가지는 현재 예측된 필드 코드화된 MB에 대한 코딩 모드를 선택하기 위한 방법이 제공된다. 코딩 코드는, 기준 MB가 디스플레이 정렬에서 일시적으로 현재 MB의 이후에서는 후방 모드일 수도 있고, 기준 MB가 현재 MB의 이전에서는 전방 모드일 수도 있고, 선행 및 종속하는 기준 MBs의 평균이 사용된다. 본 방법은 절대차 에러의 전방 합을 결정하는 단계를 포함하고, 과거 기준 MB에 관련있는 현재 MB에 대한 SADforward,field는 전방 코딩 모드에 일치한다. SADforward,field는 과거 기준 MB에서 현재 MB 및 최적-결합 MB 간의 픽셀(pixel) 광도의 에러를 나타낸다. 미래 기준 MB와 관계있는 현재 MB에 대한 SADbackward,field인 절대차 에러의 후방 합은 후방 코딩 모드에 일치하여 또한 결정된다. SADbackward,field는 미래 기준 MB에서 현재 MB 및 최적-결합 MB의 사이의 픽셀 광도값의 에러를 나타낸다.
절대차 에러의 평균합인, 과거 및 미래 참조 MBs의 평균과 관계있는 현재 MB에 대한 SADaverage,field는 평균 코딩 모드에 일치하고, 또한 결정된다. SADaverage,field는, 현재 MB 및 과거와 미래 기준 MBs의 최적-결합 MBs의 평균인 MB 사이의 픽셀 광도값의 에러를 나타낸다.
코딩 모드는 SADs의 최소값에 따라서 선택된다. 각 코딩 모드의 필요한 MVs의 수를 설명하는 바이어스 텀(bias terms)은 코딩 모드 선택 과정으로 분해될 수도 있다.
SADforward,field, SADbackward,field, 및 SADaverage,field는 상부 및 하부 필드간의 구성기간을 합함에 의해 결정된다.
(실시예)
양방향으로 예측된 비디오 객체면(B-VOP)에서 매크로블록(MB)과 같은 디지털 비디오 화상의 코딩하기 위한 방법 및 장치가 제공되고, 특히 MB 및/또는 MB를 코드하는데 사용된 기준 화상은 인터레이스드 코드화된다. 본 체계는, 필요한 전방 및 후방 PMVs를 포함하는 필드 코드화된 현재 MB의 상부 및 하부 필드 뿐만 아니라 프레임 코드화된 MBs에 대한 예측 동작 벡터(PMV)를 선택하기 위한 방법을 제공한다. 필드 코드화된 MB에 대한 직접 코딩 모드가 또한 제공되며, 또 코딩 결정 과정은 최적 모드를 선택하기 위해 절대차 기간의 합의 최소치를 이용한다.
도 1은 본 발명에 따른 비디오 객체면(VOP) 코딩 및 디코딩 과정의 설명도이다. 프레임(105)은, 정사각형의 전면(前面) 요소(107), 타원형의 전면 요소(108), 배경경치 요소(109)로 구성되는 3개의 화면 요소 포함한다. 프레임(115)에 있어서, 요소들은 세그먼테이션 마스크(segmentation mask)를 사용하여 VOP(117)는 정사각형의 전면 요소(108)를 나타내고, VOP(118)는 타원형의 전면 요소(108)을 나타내고, VOP(119)는 배경경치 요소(109)를 나타내도록 VOP로 지정된다. VOP는 변형될 수 있고, VOPs의 연속은 비디오 객체로서 알려져 있다. 전체 직사각형의 비디오 프레임이 또한 1개의 VOP로 고려될 수도 있다. 따라서, VOP란 용어는 여기에서 변형 및 비변형(예컨대, 직사각형) 화상 영역 형태를 나타내는 것으로 사용될 것이다. 세그먼테이션 마스크는 공지된 기술을 이용하여 얻어지고, ITU-R 601 광도 데이터의 것과 비슷한 형식를 가진다. 각 픽셀은 비디오 프레임에서 확실한 경계에 속하는 것으로 식별된다.
프레임(105) 및 프레임(115)으로부터의 VOP 데이터는 엔코딩 기능을 분리하는데 공급된다. 특히, VOPs(117, 118 및 119)는 각각 엔코더(137, 138 및 139)에서 형태, 동작 및 텍스처의 엔코딩을 거친다. 형태 코딩으로, 2진 및 그레이 스케일(gray scale)형태 정보가 엔코드화된다. 동작 코딩으로, 형태 정보가 프레임내에서 동작 추정을 이용하여 엔코드화된다. 텍스처 코딩으로, DCT와 같은 공간 변환은 압축을 위해 코드화된 가변길이일 수 있는 변환 계수를 얻기 위해 수행된다.
코드화된 VOP 데이터는 채널(145)로의 전송을 위해 멀티플렉서(140; MUX)에서 결합된다. 대신에, 데이터는 저장매체에 저장될 수도 있다. 수신된 코드환된 VOP 데이터는 디멀티플렉서(150; DEMUX)에서 분리되어 분리된 VOPs(117-119)는 디코드되고 복구된다. 프레임(155, 165 및 175)은, VOPs(117, 118 및 119)가 각각 디코드되고 복구되며, 따라서 예컨대, 비디오 라이브러리(170; library)와 접속하는 합성기(160)를 이용하여 개별적으로 조작될 수 있다는 것을 나타낸다.
합성기는, 맞추어진 화상을 제공하기 위해 수신된 데이터를 사용자가 편집하도록 하는 사용자의 가정에 있는 개인용 컴퓨터와 같은 장치일 수도 있다. 예컨대, 사용자의 개인용 비디오 라이브러리(170)는 수신된 VOPs와 다른 앞서 저장된 VOP(178; 예컨대, 원(圓))를 포함할 수도 있다. 사용자는 사각형의 VOP(117)를 원형의 VOP(178)로 대체하는 프레임(185)을 합성할 수도 있다. 따라서 프레임(185)은 수신된 VOPs(118, 119) 및 국부적으로 저장된 VOP(178)로 구성된다.
다른 예에 있어서, 배경 VOP(109)는 사용자가 선택한 배경으로 대체될 수도 있다. 예컨대, 텔레비젼 뉴스 방송을 볼 때, 아나운서가 뉴스 스튜디오와 같은 배경으로부터 분리되는 VOP로서 코드화될 수도 있다. 사용자는 주식시세 또는 날씨정보 채널과 같이, 다른 라이브러리(170) 또는 다른 텔레비젼 프로그램에서 배경을 선택할 수 있다. 따라서, 사용자는 비디오 편집자같이 작동시킬 수 있다.
비디오 라이브러리(170)는 또한 채널(145)을 매개로 수신된 VOPs를 저장할 수도 있고, 인터네트와 같은 네트워크를 매개로 VOPs 및 다른 화상 요소를 억세스할 수도 있다. 일반적으로, 비디오 세션(video session)은 단일 VOP 또는 일련의 VOPs로 구성된다.
도 1의 비디오 객체 코딩 및 디코딩 과정은, 개인용 컴퓨터게임, 가상현실, 그래픽 사용자 인터페이스, 화상회의, 인터네트 어플리케이션등을 포함하는 오락, 상업 및 교육 어플리케이션을 할수 있게 한다. 특히, 본 발명에 따라 인터레이스드 코드화된 VOPs를 가진 ME/MC의 능력은 더 큰 가능성을 제공한다.
도 2는 본 발명에 따른 엔코더의 블록도이다. 엔코더는 예측-코드화된 VOPs(P-VOPs) 및 양방향으로 코드화된 VOPs(B-VOPs)를 사용하는데 적당하다.
P-VOPs는 인트라-프레임 모드(intra-frame mode) 또는 인터-프레임 모드(inter-frame mode)를 사용하여 개별적으로 코드화될 수도 있는 다수의 매크로블록을 포함할 수도 있다. 인트라-프레임(INTRA) 코딩으로, 매크로블록(MB)는 다른 MB를 참조하지 않고 코드화된다. 인터-프레임(INTER) 코딩으로, MB는 전방 예측으로 공지된 모드에서 시간적으로 후의 프레임에 대해서 별도로 코드화된다. 시간적으로 후의 프레임은 앵커 프레임 또는 기준 프레임으로 알려져 있다. 앵커 프레임(예컨대, VOP)은 B-VOP가 아니고, P-VOP이거나 I-VOP이어야 한다. I-VOP는 예측 코드화되지 않은 자체적인(예컨대, 인트라-코드화된) 블록을 포함한다.
전방 예측으로, 현재 MB는 앵커 프레임에서 MBs의 검색 영역에 비교되어 최선 매치(match)를 결정한다. 후방 MV로서 알려진 대응하는 동작 벡터(MV)는 최선 매치 MB에 관하여 현재 MB의 치환을 기술한다. 추가로, P-VOPs에 대한 개선된 예측 모드가 이용될 수도 있고, 동작 보상이 16x16 MBs보다는 8x8로 수행된다. 더욱이, P-VOP MBs로 코드화된 인트라-프레임 및 인터-프레임은 프레임 모드 또는 필드 모드로 코드화될 수도 있다.
B-VOPs는, 모든 인터-프레임 기술인 후방 예측, 양방향 예측, 및 직접모드뿐만 아니라 P-VOPs에 관해서 상기 기술된 바와 같이 전방 예측 모드를 사용할 수 있다. 비록 변할 가능성은 있지만, 현재 B-VOPs는 MPEG-4 VM 8.0하에서 MBs로 코드화된 인트라-프레임을 이용하지 않는다. 앵커 프레임(예컨대, VOP)은 B-VOP가 아니고 P-VOP이거나 I-VOP이어야 한다.
B-VOPs의 후방 예측으로, 현재 MB가 시간적으로 앞선 앵커 프레임에서 MBs의 검색영역에 비교되어 최선 매치를 결정한다. 전방 MV로 알려진 대응하는 MV는 최선 매치 MB에 대하여 현재 MB의 상대적인 치환을 기술한다. B-VOP MB의 양방향 예측으로, 현재 MB가 시간적으로 앞선 앵커 프레임 및 시간적으로 후의 앵커 프레임에서 MBs의 검색영역에 비교되어 최선 매치 MBs를 결정한다. 전방 및 후방 MVs는 최선 매치 MBs에 대하여 현재 MB의 치환을 기술한다. 추가로, 평균 화상은 현재 MB를 엔코딩하는데 사용하기 위해 최선 매치 MBs에서 얻어진다.
B-VOPs의 직접 모드 예측으로, 다음의 P-VOP에서 배열된 MB가 8x8 개선된 예측 모드를 사용할 때, MV는 8x8로 유도된다. P-VOP에서 8x8블록의 MV가 선형적으로 스캐일되어 최선 매치 블록을 찾기 위한 검색을 할 필요없이 B-VOP에서 블록에 대한 MV를 유도한다.
일반적으로 (200)에 나타낸 엔코더는, 형태 코더(210), 동작 추정 기능(220), 동작 보상 기능(230), 및 텍스처 코더(240)를 포함하여 터미널(205)에서 입력된 비디오 픽셀 데이터를 수신한다. 동작 추정 기능(220), 동작 보상 기능(230), 텍스처 코더(240) 및 형태 코더(210)는 또한 변형의 MPEG-4 파라메타 VOP와 같이, 터미널(207)에서 입력된 VOP 형태 정보를 수신한다. 이 파라메타가 제로일 때, VOP는 사각형의 형태를 가지고 따라서 형태 코더(210)은 사용되지 않는다.
복원된 앵커 VOP 기능(250)은 동작 추정 기능(220) 및 동작 보상 기능(230)에서 사용하기 위한 복원된 앵커 VOP를 제공한다. 현재 VOP가 감산기(260)에서 동작 보상된 이전의 VOP로부터 감산되어 텍스처 코더(240)에서 엔코드되는 나머지를 제공한다. 텍스처 코더(240)는 DCT를 수행하여 텍스처 정보(예컨대, 변환 계수)를 멀티플렉서(280; MUX)로 제공한다. 텍스처 코더(240)는 또한 가산기(270)에서 동작 보상기(230)로부터의 출력과 가산되는 정보를 앞서 복원된 VOP 기능(250)의 입력으로서 제공한다.
동작 정보(예컨대, 동작 벡터)는 동작 추정 기능(220)으로부터 MUX(280)로 제공되고, VOP의 형태를 나타내는 형태 정보는 형태 코딩 기능(210)으로부터 MUX(280)로 제공된다. MUX(280)는, 데이터 채널의 다음 통신을 위해 일치하는 다중화된 데이터 스트림을 버퍼(290)로 제공한다.
엔코더로 입력되는 픽셀 데이터는 YUV 4:2:0 형식을 가질 수도 있다. VOP는 완만한 직사각형으로 표현된다. 완만한 직사각형의 상부 좌측 좌표는 완전한 직사각형의 상부 좌측 좌표보다 크지 않은 가장 근접한 짝수로 둥글게 되어 있다. 따라서, 색도 성분에서의 완만한 직사각형의 상부 좌측 좌표는 광도 성분의 1/2이다.
도 3은 반픽셀(half-pixel) 검색을 위한 보간 체계를 도시한다. 동작 추정 및 동작 보상(ME/MC)은, 일반적으로 현재 비디오 프레임의 블록(예컨대, 현재 블록)과 기준 프레임의 검색영역에서의 블록(예컨대, 예측된 블록 또는 기준 블록)의 결합을 포함한다. 예측(P) 코드화된 화상에 대해서, 기준 블록은 앞선 프레임이다. 양방향으로 예측(B) 코드화된 화상에 대해서, 전후프레임에서 예측된 블록이 사용될 수도 있다. 현재 블록에 대한 예측된 블록의 치환은 수평(x) 및 수직(y) 성분을 가지는 동작 벡터(MV)이다. MV 성분의 양의 값은 예측된 블록이 현재 블록의 우측, 아래라는 것을 나타낸다.
동작 보상된 다른 블록은, 현재 블록의 픽셀값에서 예측된 블록의 픽셀값을 일일이 감산하여 형성된다. 다음으로, 텍스처 코딩이 다른 블록상에서 수행된다. 다른 블록의 코드화된 MV 및 코드화된 텍스처 정보는 디코더로 전송된다. 다음으로, 디코더는, MV에 따라서 예측된 블록에 양자화된 다른 블록을 부가하여 근사한 현재 블록을 재구성한다. ME/MC에 대한 블록은 16x16 프레임 블록(매크로블록), 8x8 블록 또는 16x8 필드 블록일 수 있다.
MV의 정확성은 반픽셀에서 설정된다. 정수의 1/2인 x 또는 y에 대하여 p(i+x,j+y)가 정의 되도록 보간법이 앵커 프레임상에서 사용되어야 한다. 보간법은 도 3에 나타낸 바와 같이 수행된다. 정수 픽셀 위치는 A, B, C 및 D로 나타내어진 바와 같이 기호+로 표현된다. 반픽셀 위치는 a, b, c 및 d로 나타내어진 바와 같이 원으로 나타내어 진다. 도시된 바와 같이, a=A, b=(A+B)//2, c=(A+C)//2, 및 d=(A+B+C+d)//4이고 여기에서 //는 버림 나눗셈을 의미한다. 더욱이 보간법의 상세한 설명은, Eifrig등에 의해 1997년 7월 21에 출원된 U.S. 특허 번호 08/897,847호, 제목 Motion Estimation and Compensation of Video Object Planes for Interlaced Digital Video 뿐만 아니라 앞서 참조된 MPEG-4 VM 8.0에 설명되어 있다.
도 6은 본 발명에 따라서, 적응화 프레임/필드 예측 체계에서 픽셀 라인의 재정렬을 도시한 것이다. 개선된 예측기술의 제 1측면에 있어서, 적응화 기술은, 16x16 픽셀의 현재 매크로블록이 그대로 ME/MC 코드화되어야 하는지, 또는 8x8 픽셀로 각각 4개의 블록으로 분리되어 개별적으로 ME/MC 코드화되어야 하는지를 결정하거나, 필드를 기초로한 동작 추정이 이용되어 MB의 픽셀 라인이 2개의 16x8 필드 블록에서 동일한 필드 라인을 그룹화하여 재정렬되고, 각 16x8 블록은 개별적으로 ME/MC 코드화되어야 하는지를 결정하는데 사용된다.
필드 모드 16x16 매크로블록(MB)은 일반적으로 (600)에 나타내어 진다. MB는 짝수 라인(602, 604, 606, 608, 610, 612, 614 및 616) 및 홀수 라인(603, 605, 607, 609, 611, 613, 615 및 617)으로 이루어진다. 짝수 및 홀수 라인은 끼워지고, 상부 및 하부(또는 제 1 및 제 2) 필드를 각각 형성한다.
화상(600)내의 픽셀 라인이 치환되고 동일한 필드 광도 블록을 형성하여, 일반적으로 (650)에서 나타내어진 MB가 형성된다. (645)로 나타내어진 화살표는 라인(602~617)의 재정렬을 나타낸다. 예컨대, MB(600)의 제 1라인인 짝수 라인(602)은 또한 MB(650)의 제 1라인이다. 짝수 라인(604)은 MB(650)에서 제 2라인으로 재정렬된다. 유사하게, 짝수 라인(606, 608, 610, 612, 614 및 616)은 각각 MB(650)의 제 3라인에서 제 8라인까지로 재정렬된다. 따라서, 16x8 광도 영역(680)은 짝수 라인을 가지도록 형성된다. 유사하게, 홀수 라인(603, 605, 607, 609, 611, 613, 615 및 617)은 16x8 영역(685)을 형성한다.
P-VOPs를 위한 MC 모드를 선택하기 위한 결정 과정은 다음과 같다. 프레임 모드 비디오에 대해서, 단일 16x16 MB 예컨대, SAD16(MVx,MVy), 및 4개의 8x8 블록 예컨대, SAD8(MVx1,MVy1),SAD8(MVx2,MVy2),SAD8(MVx3,MVy3), 및 SAD8(MVx4,MVy4)에 대하여 절대차의 합(SAD)을 먼저 구한다.
만약이면, 8x8 예측을 선택하고, 그렇지 않으면, 16x16 예측을 선택한다. 상수129는 Nb/2+1로부터 얻어지고, Nb는 MB에서 투명하지 않은 픽셀의 수이다.
인터레이스드(interlaced) 비디오에 대해서, SADtop(MVx_top, MVy_top), SADbottom(MVx_bottom,MVy_bottom)을 구하고, 여기에서 (MVx_top,MVy_top) 및 (MVx_bottom,MVy_bottom)는 상부(짝수) 및 하부(홀수) 필드에 대한 동작 벡터(MV)이다. 다음으로, 필드 반샘플(half-sample) 검색으로부터 가장 작은 SAD(예컨대, SADtop및 SADbottom)를 가지는 기준 필드를 선택한다.
전체 예측 모드 결정은, (a) SAD16(MVx,MVy), (b), (C) SADtop(MVx_top,MVy_top) + SADbottom(MVx_bottom,MVy_bottom)+65 의 최소치가 선택의 기초가된다. 만약 (a)가 최소치이면, 16x16 예측이 이용되고, (b)가 최소치이면, 8x8 동작 보상(개선된 예측모드)가 사용되고, (C)가 최소치이면, 필드가 기초가 된 동작 추정이 이용된다. 상수65는 Nb/4+1로부터 얻어진다.
만약 8x8 예측이 선택되면, 4개의 8x8 광도 블록에 대해 4개의 MVs가 존재한다(즉, 각 8x8 블록에 대해 1개의 MV). 2개의 색도 블록에 대한 MV는는 4개의 MVs의 평균을 구하고 그 평균값을 2로 나누어 얻어진다. 8x8 광도 블록에 대한 각 MV는 반픽셀 정확성을 가지기 때문에, 색도 블록에 대한 MV는 16픽셀의 값을 가질 수도 있다. 아래의 표 1은, 16개 픽셀의 전환을 색도 MVs에 대한 반픽셀의 값으로 기입한 것이다. 예컨대, 0에서 2/16은 0으로 라운드(round)되고, 3/16에서 13/16은 1/2로 라운드되고, 14/16 및 15/16은 2/2=1로 라운드된다.
표 1
1/16픽셀의 값 | 0 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 | 9 | 10 | 11 | 12 | 13 | 14 | 15 |
1/2 픽셀의 값 | 0 | 0 | 0 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 1 | 2 | 2 |
필드 예측으로, 2개의 16x8 블록에 대한 2개의 MVs가 있다. 광도 예측은 아래와 같이 발생된다. MB의 짝수 라인(예컨대, 라인(602, 604, 606, 608, 610, 612, 614 및 616))은 열거된 기준 필드를 이용하여 상부 필드 MV에 의해 정의된다. MV는, 완전한 픽셀 수직 치환은 수직 MV 좌표의 짝수 정수값에 일치하고, 반픽셀 수직 치환은 홀수 정수값으로 표시되도록 프레임 좌표에 명기된다. 반픽셀 수직 오차가 명기될 때, 오직 동일한 기준 필드내의 라인으로부터 픽셀이 결합된다.
2개의 색도 블록에 대한 MV는, 각 성분을 2로 분할하고, 라운딩함(rounding)으로서 광도 MV로부터 유도된다. 수평 성분은 모든 소수값을 반픽셀 오프셋(offset)로 맵핑(mapping)함으로서 라운드된다. 수직 MV 성분은 정수이고 결과 색도 MV 수직 성분은 정수로 라운드된다. 만약 2로 분할한 결과가 비정수값이라면, 인접한 홀수 정수로 라운드된다. 홀수 정수값이 동일한 필드의 라인 사이의 수직 보간을 나타낸다는 것을 주시하라.
진행된 예측 기술의 제 2측면은 광도 블록에 대해 MC에 중복되고, MPEG-4 VM 8.0 및 Eifrig 등 앞서 언급된 출원서에서 더욱 상세히 설명된다.
지금부터, B-VOPs에 대한 특정 코딩 기술을 설명하고자 한다. B-VOPs와 같은 인터코드화된 VOP에 대해서, 4개의 예측 모드가 있다(즉, 직접 모드, 보간(예컨대, 평균 또는 양방향) 모드, 후방 모드, 전방 모드). 뒤쪽 3개의 모드는 비직접 모드이다. 전방 또는 후방 예측은 단일방향예측으로 알려진다. B-VOP의 예측된 블록은 각 모드에 대해 다르게 결정된다. 더욱이, B-VOP의 블록 및 앵커 블록은 점진적으로(예컨대, 프레임) 코드화되거나 인터레이스드(예컨대, 필드) 코드화될 수도 있다.
단일 B-VOP는 다른 모드로 예측되는 다른 MBs를 가질 수 있다. B-VOP는 양방향으로 예측된 블록이 포함될 수도 있지만, 이것이 필수적이지는 않다. 이와 대조적으로, P-VOPs 및 I-VOPs로 양방향 예측된 MBs는 사용되지 않는다.
비직접 모드 B-VOP MBs에 대해서, MVs는 다르게 코드화된다. 전방 및 양방향 모드에서 전방 MVs와, 후방 및 양방향 모드에서 후방 MVs에 대해서, 동일한 줄에서 현재 MB에 바로 우선하는 MB의 동일한 타입(same-type)MV(예컨대, 전방 또는 후방)가 프레딕터(predictor)로서 이용된다. 이것은, 래스터 정렬(raster order), 일반적으로 전송 정렬에서 바로 선행하는 MB와 동일하다. 그러나, 래스터 정렬이 전송 정렬과 다르다면, 전송 정렬에서 바로 선행하는 MB의 MVs는 MBs를 저장하고 재정렬할 필요 및 디코더에서 MVs와 일치함을 피하는데 사용된다.
동일한 타입의 MV를 사용하고, 전송 정렬을 추정함은 래스터 정렬과 동일하고, 래스터 정렬은 왼쪽에서 오른쪽, 상부에서 하부로 되고, 왼쪽 이웃하는 MB의 전방 MV는 B-VOP의 현재 MB의 전방 MV에 대한 프레딕터로서 사용된다. 유사하게, 왼쪽 이웃하는 MB의 후방 MV는 B-VOP의 현재 MB의 후방 MV에 대한 프레딕터로서 사용된다. 다음으로, 현재 MB의 MVs는 프레딕터를 사용하여 다르게 엔코드화된다. 즉, 현재 MB에 대해 결정되는 MV와 프레딕터간의 차이가 동작 벡터의 차이로서 디코더로 전송된다. 디코더에서, 현재 MB의 MV는 PMV 및 다른 MV를 복구하고 부가함으로서 결정된다.
현재 MB의 경우에는 VOP의 왼쪽 모서리에 위치되고, 현재 MB에 대한 프레딕터는 0으로 설정된다.
인터레이스드 코드화된 B-VOPs에 대해서, 상부 및 하부 필드 각각은 4개의 MVs 전체에 대한 2개의 조합된 예측 동작 벡터를 가진다. 전송 정렬에서, 4개의 예측 MVs는 앞선 앵커 MB의 상부 필드 전방과 하부 필드 전방, 및 다음 앵커 MB의 상부 필드 후방과 하부 필드 후방으로 표현된다. 현재 MB 및 전방 MB, 및/또는 현재 MB 및 후방 MB는, 현재 MB의 ME/MC 코딩에 대해 사용되지 않는 1개 혹은 그 이상의 중간 화상에 의해 분리될 수도 있다. B-VOPs는 INTRA 코드화된 MBs를 포함하지 않으므로 B-VOP에서의 각 MB는 ME/MC 코드화될 것이다. 전방 및 후방 앵커 MBs는 P-VOP 또는 I-VOP으로부터 일 수도 있고 프레임 또는 필드 코드화될 수도 있다.
인터레이스되고, 비직접 모드 B-VOP MBs인 4개의 가능한 예측 동작 벡터(PMVs)가 아래의 표 2에 나타내어져 있다. 표 2의 제 1열은 예측 기능을 나타내고, 제 2열은 PMV에 대한 지정자를 나타낸다. 이 PMVs는 아래의 표 3에 나타낸 바와 같이 다른 MB 예측 모드에 대해서 이용된다.
표 2
예측 기능 | PMV 타입 |
상부 필드, 전방 | 0 |
하부 필드, 전방 | 1 |
상부 필드, 후방 | 2 |
하부 필드, 후방 | 3 |
표 3
매크로블록 모드 | PMV 타입으로 사용된 |
프레임, 전방 | 0 |
프레임, 후방 | 2 |
프레임, 양방향 | 0, 2 |
필드, 전방 | 0, 1 |
필드, 후방 | 2, 3 |
필드, 양방향 | 0, 1, 2, 3 |
예컨대, 표 3은, 전방 예측 모드(예컨대, 필드, 전방)를 가진 현재 필드 모드 MB에 대해, 상부 필드 전방(0) 및 하부 필드 전방(1) 동작 벡터 프레딕터 사용된 것을 나타낸다.
차동 코딩에 사용된 후에, 현재 MB의 동작 벡터는 전송 정렬에서 다음의 MB에 대한 PMVs가 된다. 선행하는 행의 말단부에서 MB의 MVs는 현재 행의 초기부에서 MB의 MVs와 비슷하지 않기 때문에, PMVs는 MBs의 각 행의 초기부에서 0으로 재설정된다. 프레딕터는 또한 직접 모드 MBs로 사용되지 않는다. 지나간 MBs에 대해, PMVs는 최종치를 보유한다.
B-VOP의 직접 모드 코딩으로, 벡터 차분이 전송되지 않는다. 대신에, 전방 및 후방 MVs는, 단일 델타 MV(single delta MV)에 의한 보정으로서 디코더에서 시간상으로 다음의 P-VOP MB의 MVs로부터 바로 계산되며 예측되지는 않는다. MV 데이터가 전송되지 않기 때문에 이 기술은 효과적이다.
표 4는, PMVs가 선행 및 현재 MB 타입을 기초로 한 현재 B-VOP MB의 동작 벡터를 코드화하는데 사용되는 것을 요약한다. B-VOPs에 대하여, 예측 동작 벡터의 정렬, pmv[]는 0에서 3까지(예컨대, pmv[0], pmv[1], pmv[2] 및 pmv[3]) 색인되어 제공될 수도 있다. 인덱스(index) pmv[]는 전송되지 않지만, 디코더는 pmv[] 인덱스를 결정하여 디코드화되는 MV 코딩 타입 특정 벡터에 따라 이용할 수 있다. B-VOP MB를 코딩한 후에, PMVs 벡터의 일부는 현재 MB의 동작 벡터와 동일하게 갱신된다. 제 1, 2 또는 4 PMVs는 현재 MB와 조합된 MVs의 수에 의존하여 갱신된다.
예컨대, 전방 필드 예측된 MB는 2개의 동작 벡터를 가지고, pmv[0]은 상부 필드, 전방에 대한 PMV이고, pmv[1]는 하부 필드, 전방에 대한 PMV이다. 후방에 대하여, 필드 예측된 MB, pmv[2]는 상부 필드 후방에 대한 PMV이고, pmv[3]는 하부 필드, 후방에 대한 PMV이다. 양방향에 대하여, 필드 예측된 MB, pmv[0]는 상부 필드, 전방에 대한 PMV이고, pmv[1]은 하부 필드, 전방에 대한 PMV이며, pmv[2]는 상부 필드, 후방에 대한 PMV이고, pmv[3]는 하부 필드, 후방에 대한 PMV이다. 전방 또는 후방 예측된 프레임 모드 B-VOP MB에 대하여, 오직 1개의 MV가 존재하므로 전방에 대해서는 pmv[0]만이 이용되고, 후방에 대해서는 pmv[2]가 이용된다. 평균(예컨대, 양방향) 예측된 프레임 모드 B-VOP MB에 대하여, 2개의 MVs 즉, 전방 MV에 대한 pmv[0], 후방 MV에 대한 pmv[2]가 존재한다. 행에서 나타낸 갱신하기 위한 pmv[]는 1개, 2개 또는 4개의 MVs가 갱신되는지를 나타낸다.
표 4는 단지 현재 MB에 대한 예측 MV를 선택하기 위해 본 발명의 기술을 실시하기 위한 속기 표기인 것으로 평가될 것이다. 그러나, 본 체계는 여러 가지 다른 방법으로 표현될 수도 있다.
인트라 블록 DC 적응화 예측은 dct_type의 값에도 불구하고, MPEG-4 VM 8.0에 기술된 바와 같은 동일한 알고리즘을 이용할 수 있다. 인트라 블록 적응화 AC 예측은 계수의 제 1행이 상기 코드화된 블록으로 복사된 것일 때를 제외하고 MPEG-4 VM 8.0에서 기술된 바와 같이 수행된다. 이 동작은 단지 dct_type이 현재 MB 및 상기 블록에 대한 동일한 값을 가지면 허락된다. 만약 dct_type이 다르다면, AC 예측은 단지 블록으로부터 제 1열을 좌측으로 복사함에 의해 발생할 수 있다. 좌측 블록이 없다면, AC 프레딕터에 대해 0가 사용된다.
도 4는 본 발명에 따라 인터레이스드 코드화된 B-VOP의 상부 필드의 직접 모드 코딩을 도시한 것이다. 진행중인 직접 코딩 모드는, 미래 앵커 화면내의 MB가 동일한 관련있는 위치(예컨대, 상호 위치(co-sited))일 때마다, 현재 MB가 (1) 16x16 (프레임) MB, (2) 인트라 MB 또는 (3) 8x8 (개선된 예측) MB로 코드화되는 것처럼 현재 매크로블록에 대해 사용된다.
직접 모드 예측은, 상호 위치 미래 앵커 화면 MB는 인터레이스드 MB와 같이 코드화될 때마다 겹쳐진다. 만약, 현재 MB의 바이어스된 SAD가 모든 B-VOP MB 프레딕터의 최소치라면 현재 MB를 코드화하는데 직접 모드가 사용될 것이다. 인터레이스드 코드화된 MB에 대한 직접 모드는 현재 MB의 상부 및 하부 필드에 대해 개별적으로 예측 MB를 형성한다. 양방향 필드 동작 보상된 MB의 4개의 필드 동작 벡터(MVs; 예컨대, 상부 필드 전방, 하부 필드 전방, 상부 필드 후방, 및 하부 필드 후방)는 미래 앵커 화면의 대응하는 MB의 각 MVs로부터 바로 계산된다.
본 기술은, 획득된 검색이 뚜렷이 감소하고 전송된 MV 데이터의 양이 감소하기 때문에, 효율적이다. 일단 MVs 및 기준 필드가 결정되면, 현재 MB는 양방향 필드 예측된 MB로 간주된다. 오직 1개의 델타 동작 벡터(양필드에 사용된)는 필드 예측된 MB에 대한 비트스트림(bitstream)내에서 발생한다.
현재 MB의 상부 필드에 대한 예측은 미래 앵커 화면(P-VOP이거나, MV=0를 가진 I-VOP일 수 있다)의 MB의 상부 필드 MV 및 미래 앵커 MB의 상부 필드의 대응하는 MV에 의해 선택되는 선행의 앵커 화면의 과거 기준 필드를 기초로 한다. 즉, 현재 MB에 대응하여 위치되는 미래 앵커 화면의 상부 필드 MB는 과거 앵커 화면의 상부 또는 하부 필드 중 하나에서 최선 매치 MB를 가진다. 다음으로, 이 최선 매치 MB는 현재 MB의 상부 필드에 대한 앵커 MB로서 사용된다.
MB 기초에 의해 MB상에 상호 위치한 미래 앵커 MV가 주어진 델타 동작 벡터 MVD를 결정하는데 철처한 검색이 이루어진다.
현재 MB의 하부 필드에 대한 동작 벡터는, 과거 앵커 화면의 상부 또는 하부 필드에서 최선 매치 MB를 차례로 참조하는 미래 앵커 MB의 대응하여 위치한 하부 필드의 MV를 이용하여 유사하게 결정된다.
본래, 상부 필드 동작 벡터는, (a) 대응하여 위치한 미래 앵커 MB의 상부 필드로부터 얻어진 픽셀과, (b) 대응하여 위치한 미래 앵커 MB의 상부 필드 MV에 의해 참조된 과거 앵커 필드로부터의 픽셀의 평균인 MB 프레딕터를 구성하는데 이용된다. 유사하게, 하부 필드 동작 벡터는 (a) 대응하여 위치한 미래 앵커 MB의 하부 필드로부터 얻어진 픽셀과, (b) 대응하여 위치한 미래 앵커 MB의 하부 필드 MV에 의해 참조되는 과거 앵커 필드로부터의 픽셀의 평균인 MB 프레딕터를 구성하는데 이용된다.
도 3에 나타낸 바와 같이, 현재 B-VOP MB(420)은 상부 필드(430) 및 하부 필드(425)를 포함하고, 과거 앵커 VOP MB(400)은 상부 필드(410) 및 하부 필드(405)를 포함하며, 미래 앵커 VOP MB(440)은 상부 필드(450) 및 하부 필드(445)를 포함한다.
동작 벡터 MVtop는 과거 앵커 MB(400)에서 최선 매치 MB를 지시하는 미래 앵커 MB(440)의 상부 필드(450)에 대한 전방 동작 벡터이다. 비록 MVtop는 선행 화상(예컨대, 시간상으로는 후방)을 참조하고 있지만, 미래 앵커 VOP(440)가 과거 앵커 VOP(400)에 대하여 시간상으로 전방이기 때문에 MVtop는 전방 MV이다. 예로서, MVtop은 과거 앵커 MB(400)의 하부 필드(405)를 참조하지만, 상부(410) 또는 하부(405) 필드 중 1개가 참조될 수 있다. MVf,top는 현재 MB의 상부 필드의 전방 MV이고, MVb,top는 현재 MB의 상부 필드의 후방 MV이다. 픽셀 데이터는, 양방향 예측된 MB에 대해 디코더에서 MVb,top및 MVf,top에 의해 식별되는 미래 및 과거 앵커 화상에서 픽셀 데이터를 평균하고, 전송된 나머지를 평균화된 화상에 합함으로서 유도된다.
상부 필드에 대한 동작 벡터는 아래와 같이 계산된다.
MVf,top=(TRB,top*MVtop)/TRD,top+MVD;
MVb,top=((TRB,top-TRD,top)*MVtop)/TRD,Iif MVD=0; and
MVb,top=(MVf,top-MVtop) if MVD≠0.
MVD는 델타(delta), 또는 오프셋(offset), 동작 벡터이다. 동작 벡터는 2차원이다. 추가로, 동작 벡터는 완전한 반픽셀 루마(luma) 동작 벡터이다. 슬래쉬/는 소수점 이하를 버리는 정수 나눗셈을 나타낸다. 또한, 미래 앵커 VOP는 필드 직접 모드에 대해 항상 P-VOP이다. 미래 앵커가 I-VOP이었다면, MV는 0이고 16x16 진행중인 직접 모드였어야 한다. TRB,top는, 이 예에서 하부 필드(405)인 과거 기준 필드(예컨대, 상부 또는 하부)와 현재 B-VOP(420)의 상부 필드(430) 사이의 필드에서 시간상의 간격이다. TRD,top는 이 예에서 하부 필드(405)인 과거 기준 필드(예컨대, 상부 또는 하부)와 미래 상부 기준 필드(450) 사이의 시간상의 간격이다.
도 5는 본 발명에 따른 인터레이스드 코드화된 B-VOP의 하부 필드의 직접 모드 코딩을 도시한 것이다. 소스(source)가 인터레이스드 비디오는 상부 필드 첫째 및 하부 필드 첫째를 가질 수 있다. 하부 필드 제 1형식은 도 4 및 도 5에 나타내어져 있다. 구성요소의 참조번호는 도 4와 유사하다. 여기에서, 동작 벡터 MVbot는, 과거 앵커 MB(400)에서 최선 매치 MB를 지시하는 미래 앵커 매크로블록(MB)의 하부 필드(445)에 대한 전방 동작 벡터이다. 예컨대, MVbot는 과거 앵커 MB(400)의 하부 필드(405)를 참조하지만, 상부(410) 또는 하부(405) 필드가 이용될 수 있다. MVf,bot및 MVb,bot는 각각 전방 및 후방 동작 벡터이다.
하부 필드에 대한 동작 벡터는 상부 필드 동작 벡터와 유사한 방법으로 계산되며, 아래와 같다.
MVf,bot=(TRB,bot*MVbot)/TRD,bot+MVD;
MVb,bot=((TRB,bot-TRD,bot)*MVbot)/TRD,Iif MVD=0; and
MVb,bot=(MVf,bot-MVbot) if MVD≠0.
TRb,bot는, 이 예에서 하부 필드(405)인 과거 기준 필드(예컨대, 상부 또는 하부)와 현재 B-VOP(420)의 하부 필드간의 시간상의 간격이다. TRD,bot는, 이 예에서 하부 필드(405)인 과거 기준 필드(예컨대, 상부 또는 하부)와 미래 하부 기준 필드(445)간의 시간상의 간격이다.
도 4 및 도 5의, TRB,top, TRD,top, TRB,bot및 TRD,bot는 단지 현재 필드, 기준 필드 및 프레임 시간 기준 뿐만 아니라 현재 비디오가 상부 필드 제 1 또는 하부 필드 제 1에 있는지에도 의존한다. 특히
TRD,topor TRD,bot=2*(TRfuture-TRpast)+δ; 및
TRB,topor TRB,bot-2*(TRcurrent-TRpast)+δ;
여기에서 TRfuture, TRcurrent, 및 TRpast는 미래, 현재 및 과거 프레임의 프레임의 넘버(number)이고, 디스플레이 정렬에 있어서, 필드 사이의 시간상의 간격의 추가 정정 δ가 아래의 표 5에 주어진다. δ는 필드 기간의 단위이다.
예컨대, 제 1열의 마지막 행에서 1은 미래 앵커 필드는 상부 필드이고, 참조된 필드는 하부 필드인 것을 나타낸다. 이것은 도 4에 나타내어져 있다. 제 2열의 마지막 행에서 1은 미래 앵커 필드는 하부 필드이고, 참조된 필드는 또한 하부 필드인 것을 나타낸다. 이것은 도 5에 나타내어져 있다.
표 5 - 시간의 정정, δ
참조된 필드 | 하부 필드 첫째 | 상부 필드 첫째 | |||
미래 앵커=상부 | 미래 앵커=하부 | 상부 필드δ | 하부 필드δ | 상부 필드δ | 하부 필드δ |
상부 | 상부 | 0 | -1 | 0 | 1 |
상부 | 하부 | 0 | 0 | 0 | 0 |
하부 | 상부 | 1 | -1 | -1 | 1 |
하부 | 하부 | 1 | 0 | -1 | 0 |
효율적인 코딩을 위해, 적절한 코딩 모드 결정 과정이 필요하다. 지적한 바와 같이, B-VOPs에 대해서, MB는, (1)직접 코딩, (2)16x16 동작 보상된(전방, 후방 및 평균화된 모드를 포함한다), 또는 (3)필드 동작 보상(전방, 후방 및 평균화된 모드를 포함한다)을 이용하여 코드화될 수 있다. 현재 MB의 프레임 또는 필드 직접 코딩은 대응하는 미래 앵커 MB가 프레임 또는 필드 직접 코드화될 때 각각 이용된다.
B-VOPs에서 필드 동작 보상된 MB에 대해서, 디코드된 앵커 화면에 관하여 최소 광도 반픽셀 SADs를 기초로 전방, 후방 또는 평균화된 모드로 MB를 코드화하는데 결정이 이루어진다. 특히, 7개의 바이어스된 SAD는 아래와 같이 계산된다.
(1)SADdirect+b1, (2)SADforward+b2, (3)SADbackward+b2,
(4)SADaverage+b3, (5)SADforward,field+b3,
(6)SADbackward,field+b3, 및 (7)SADaverage,field+b4,
여기에서 아랫 첨자는 직접 모드, 전방 동작 예측, 후방 동작 예측, 평균(즉, 보간된 또는 양방향의) 동작 예측, 프레임 모드(즉, 위치상으로 진행하는) 및 필드 모드(즉, 위치상으로 겹쳐진)를 나타낸다. 상기 필드 SADs(즉, SADforward,field, SADbackward,field, 및 SADaverage,field)는 그 자신의 기준 필드 및 동작 벡터를 각각 가지는 상부 및 하부 필드 SADs의 합이다. 특히, SADforward,field=SADforward,top field+SADforward,bottom field; SADbackward,field=SADbackward,top field+SADbackward,bottom field; 및 SADaverage,field=SADaverage,top field+SADaverage,bottom field.
SADdirect는 최적 집접 모드 예측이고, SADforward는 전방(과거) 기준으로부터의 최적 16x16 예측이고, SADbackward는 후방(미래) 기준으로부터의 최적 16x16 예측이고, SADaverage는 최적 전방 및 최적 후방 기준의 각 픽셀당 평균에 의해 형성된 최적 16x16 예측이고, SADforward,field는 전방(과거) 기준으로부터의 최적 필드 예측이고, SADbackward,field는 후방(미래) 기준으로부터의 최적 필드 예측이고, SADaverage,field는 최적 전방 및 최적 후방 기준의 각 픽셀당 평균에 의해 형성된 최적 필드 예측이다.
bi는 보다 뛰어난 동작 벡터를 필요로 하는 예측모드를 설명하기 위해, 아래의 표 6에서 정의된 바와 같은 바이어스 값이다.
표 6
모드 | 동작 벡터의 수 | bi | 바이어스 | 값 |
직접 | 1 | b1 | -(Nb/2+1) | -129 |
프레임, 전방 | 1 | b2 | 0 | 0 |
프레임, 후방 | 1 | b2 | 0 | 0 |
프레임, 평균 | 2 | b3 | (Nb/4+1) | 65 |
필드, 전방 | 2 | b3 | (Nb/4+1) | 65 |
필드, 후방 | 2 | b3 | (Nb/4+1) | 65 |
필드, 평균 | 4 | b4 | (Nb/2+1) | 129 |
직접 모드에 대한 음의 바이어스는 진보하는 비디오에 대한 MPEG-4에 모순되지 않고, 상대적으로 더 건너뛴 MBs일 수 있다.
도 7은 본 발명에 따른 디코더의 블록도이다. 일반적으로 (700)으로 나타낸 디코더는 도 2의 엔코더로부터 전송된 엔코드화된 데이터 신호를 수신하고 디코드하는데 사용될 수 있다. 엔코드화된 비디오 화상 데이터 및 별도로 엔코드화된 동작 벡터(MV)는 터미널(740)에서 수신되고 디멀티플렉서(742; DEMUX)로 제공된다. 엔코드화된 비디오 화상 데이터는 예측 에러 신호(예컨대, 나머지)로서 DCT 전송 계수로 엔코드화된다.
형태 디코딩 기능(744)은, VOP가 동작 보상 기능(750) 및 VOP 복원 기능(752)에 교대로 제공되는 형태 정보를 복구하는 변형 형태를 가질 때 데이터를 처리한다. 텍스처 디코딩 기능(746)은 전송 계수상의 역 DCT를 수행하여 나머지 정보를 복구한다. INTRA 코드화된 매크로블록(MBs)에 대해서, 픽셀 정보는 바로 복구되어 VOP 복원 기능(752)에 제공된다.
INTER 코드화된 블록 및 MBs에 대해서, B-VOPs에서의 것과 같이, 텍스처 디코딩 기능(746)으로부터 복원된 VOP 기능(752)으로 제공된 픽셀 정보는 현재 MB 및 기준 화상간의 나머지를 표현한다. 기준 화상은 전방 또는 후방 MV에 의해 지시되는 단일 앵커 MB로부터의 픽셀 데이터일 수도 있다.
교대로, 보간된(예컨대, 평균화된) MB에 대해서, 기준 화상은 2개의 기준 MBs, 예컨대 1개의 과거 앵커 MB 및 1개의 미래 앵커 MB로부터 픽셀 데이터의 평균이다. 이 경우에 있어서, 디코더는 현재 MB 픽셀 데이터를 복구하기 전에 후방 및 전방 MVs에 따라 평균화된 픽셀 데이터를 계산해야 한다.
INTER 코드화된 블록 및 MBs에 대해서, 동작 디코딩 기능(748)은 엔코드화된 MV 데이터를 처리하여 차분의 MVs를 복구하여 동작 보상 기능(750) 및 RAM과 같은 동작 벡터 메모리(749)로 제공한다. 동작 보상 기능(750)은 차분의 MV 데이터를 수신하고 본 발명에 따라서 기준 동작 벡터(예컨대, 프레딕터 동작 벡터, 또는 PMV)를 결정한다. PMV는 코딩 모드(예컨대, 전방, 후방, 양방향, 또는 직접)에 따라서 결정된다.
일단 동작 보상 기능(750)이 전체 기준 MV를 결정하고 현재 MB의 차분의 MV를 합하면, 현재 MB의 전체 MV가 이용될 수 있다. 따라서, 동작 보상 기능(750)은 RAM과 같은 VOP 메모리(754)로부터 앵커 프레임 최선 매치 데이터를 복구할 수 있고 현재 MB를 복원하기 위해 앵커 프레임 픽셀 데이터를 VOP 복원 기능에 제공할 수 있다.
복구되거나 계산된 최선 매치 데이터는, 디코드된 현재 MB 또는 블록을 얻기위해 VOP 복원 기능(752)에서 픽셀 나머지로 더해진다. 복원된 블록은 비디오 출력 신호로서 출력되고 또한 VOP 메모리(754)에 제공되어 새로운 앵커 프레임 데이터를 제공한다. B-VOP MB에 대한 앵커 프레임은 프리젠테이션 정렬에서 시간상으로 미래 프레임 또는 필드일 수도 있기 때문에, 적절한 비디오 데이터의 완충 능력은 프레임 전송 및 프리젠테이션(presentation) 정렬에 의존하여 필요할 수도 있다.
도 8은 본 발명에 따른 MB 패킷 구조를 나타낸 것이다. 구조는 B-VOPs에 적적하고, 디코더에 의해 수신된 데이터의 형식을 나타낸다. 패킷은 편의를 위해 4개의 행으로 나타내어진다. 패킷은 상부 열부터 시작하여 왼쪽에서 오른쪽으로 직렬로 전송된다. 제 1열(810)은 필드 first_shape_code, MVD_shape, CR, ST 및 BAC를 포함한다. 제 2열(830)은 필드 MODB 및 MBTYPE를 포함한다. 제 3열(850)은 필드 CBPB, DQUANT, Interlaced_information, MVDf, MVDb, 및 MVDB를 포함한다. 제 4열은 CODA, CBPBA, Alpha Block Data 및 Block Data를 포함한다. 상기 각 필드는 MPEG-4 VM 8.0에 따라 정의된다.
first_shape_code는 MB가 VOP의 경계 박스내에 있는지 아닌지를 나타낸다. CR은 Binary Alpha Blocks에 대한 변환율을 나타낸다. ST는 수직 또는 수평 스캔 정렬을 나타낸다. BAC는 2진 산술 코드워드(codeword)에 속한다.
MB의 모드를 나타내는 MODB, B-VOP에서의 모든 코드화된 MB에 제공된다. 다른 동작 벡터(MVDf, MVDb, 또는 MVDB) 및 CBPB는, MODB에 의해 표시되면, 건네진다. 매크로블록 타입은 MBTYPE에 의해 지시되고, 또한 동작 벡터 모드(MVDs) 및 양자화(DQUANT)를 알린다. 인터레이스드 모드에서, MB당 4개의 MVs이상일 수 있다. MBTYPE는 코딩 타입 예컨대, 전방, 후방, 양방향 또는 직접을 나타낸다. CBPB는 B-타입 매크로블록에 대한 코드화된 블록 패턴이다. CBPBA는 CBPB가 가지는 4개의 비트의 최대를 제외한 CBPB로서 유사하게 정의된다. DQUANT는 양자화기의 값에서의 변화를 정의한다.
제 3열(850)에서의 필드 Interlaced_information는 MB가 인터레이스드 코드화되는지 아닌지를 나타내고, 현재 MB 또는 블록의 코딩 모드를 디코더에 통고하는 필드 MV 기준 데이터를 제공한다. 상기 디코더는 현재 MB에 대한 MV의 계산에 이 정보를 이용한다. Interlaced_information 필드는, 디코더에서 MV 메모리(749) 또는 다른 메모리에서 요구되는 다음의 사용을 위해 저장될 수도 있다.
도 6과 관련하여 상기 언급된 바와 같이, Interlaced_information 필드는 또한 필드 코드화된 MB내의 상부 및 하부 필드 픽셀 라인이 인터레이스드 정렬로부터 재정렬되는지 아닌지를 나타내는 플랙(flag) dct_type를 포함할 수도 있다.
나타내어진 MB 층구조는 VOP_prediction_type ==10일 때 사용된다. 만약 COD가 가장 최근에 디코드된 I- 또는 P-VOP에서 MB에 대하여 건너뛰어진(COD==1)를 나타낸다면 B-VOP에서 상호 위치한 MB도 또한 건너뛰어진다. 즉, 비트스트림내에 어떠한 정보도 포함되지 않는다.
MVDf는 시간상으로 이전 기준 VOP(I- 또는 P-VOP)에 대하여 B-VOP내의 MB의 동작 벡터이다. 수평 성분에 대한 가변길이 코드워드 다음에 수직 성분에 대한 가변길이 코드워드가 따르도록 구성되어 있다. 1의 field_prediction 및 전방 또는 보간의 MBTYPE를 가진 인터레이스드 B-VOP MB에 대하여, MVDf는 과거 앵커 VOP를 참조하는 필드 동작 벡터(하부 필드에 의해 추종된 상부 필드)의 쌍을 나타낸다.
MVDb는 시간상으로 다음의 기준 VOP(I- 또는 P-VOP)에 대해서 B-VOP에서 MB의 동작 벡터이다. 수평 성분에 대한 가변길이 코드워드 다음에 수직 성분에 대한 가변길이 코드워드가 따르도록 구성된다.1의 field_prediction 및 후방 또는 보간의 MBTYPE을 가진 인터레이스드 B-VOP에 대해서, MVDb는 미래 앵커 VOP를 참조하는 필드 MVs(하부 필드에 의해 추종된 상부 필드)의 쌍을 나타낸다.
만약 직접 모드가 MODB 및 MBTYPE에 의해 지시되면, MVDB는 B-VOPs에 있고, 각 벡터의 수직 성분에 대한 가변길이 코드워드에 의해 추종된 수평 성분에 대한 가변길이 코드워드로 구성된다. MVDBs는 델타 벡터를 표현하고, 델타 벡터는 스케일링 P-VOP MB 동작 벡터에 의해 얻어진 B-VOP MB 동작 벡터를 수정하는데 사용된다.
CODA는 그레이 스케일 형태 코딩에 관련된다.
도 8에 나타내어진 배열은 그 한 예일 뿐이고, 디코더에 관련된 정보를 통신하기 위한 다양한 다른 배열은 본 명세서에서 기술된 것과 명백히 같은 것이다.
본 발명에 따라 사용하기 위한 비트스트림 신택스(bitstream syntax) 및 MB 층 신택스는 MPEG-4 VM 8.0뿐만 아니라 앞서 참조된 Eifrig등에 의한 출원서에 기술되어 있다.
따라서, 특히, 현재 MB가 필드 코드화되거나, 및/또는 앵커 MB가 필드 코드화될 때, 본 발명은 B-VOP에서 현재 MB를 엔코딩하기 위한 체계를 제공하는 것으로 볼 수 있다. 최적 모드를 선택하기 위해 절대차 기간의 합의 최소치를 이용하는 코딩 결정 과정에 더하여, 필드 코드화된 MB에 대한 직접 코딩에 대한 체계가 제공된다. 예측 동작 벡터(PMV)는 프레임 코드화된 MBs에 뿐만 아니라 필요한 전방 및 후방 PMVs를 포함하여 필드 코드화된 현재 MB의 상부 및 하부 필드에 제공된다.
본 발명은 여러 가지 실시예에 관해서 기술되었지만, 본 명세서에 기술된 것은, 청구항에서 밝혀진 바와 같이 본 발명의 취지 및 범위를 벗어나지 않는 다양한 응용 및 수정이 가능할 수도 있다.
Claims (27)
- 일련의 디지털 비디오 화상에 있어서,상부와 하부 필드를 갖춘 과거 필드 코드화된 기준 화상 및 상부와 하부 필드를 갖춘 미래 필드 코드화된 기준 화상을 결정하는 단계와;미래 화상의 대응하는 필드의 전방 동작 벡터를 스케일링함으로서 현재 화상의 상부 및 하부 필드 중 적어도 1개를 예측하기 위해 전방 및 후방 동작 벡터를 결정하는 단계를 구비하여 구성되고;상기 미래 화상의 상부 필드의 전방 동작 벡터인 MVtop는 상기 과거 화상의 상부 및 하부 필드 중 1개를 참조하고, 상기 미래 화상의 하부 필드의 전방 동작 벡터인 MVbot는 상기 과거 화상의 상부 및 하부 필드 중 1개를 참조하는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 1항에 있어서, 상기 현재 화상의 상부 필드를 예측하기 위한 전방 동작 벡터인 MVf,top는 공식 (MVtop*TRB,top)/TRD,top+MVD에 의해서 결정되고;TRB,top는 MVtop에 의해 참조되는 현재 화상의 상부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,TRD,top는 MVtop에 의해 참조되는 미래 화상의 상부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,MVD는 델타 동작 벡터인것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 2항에 있어서, MVf,top는 소수점 이하를 버리는 정수 나눗셈을 이용하여 결정되고;MVtop및 MVbot는 정수 할프-루마 펠(half-luma pel) 동작 벡터인 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 2항에 있어서, TRB,top및 TRD,top는 상기 현재 필드 코드화된 화상이 상부 필드 첫째인지 하부 필드 첫째인지를 설명하는 시간의 보정을 구체화하는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 1항에 있어서, 현재 화상의 하부 필드를 예측하기 위한 전방 동작 벡터인 MVf,bot는 공식(MVbot*TRB,bot)/TRD,bot+MVD에 의해서 결정되고;TRB,bot는 MVbot에 의해 참조되는 현재 화상의 하부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,TRD,bot는 MVbot에 의해 참조되는 미래 화상의 하부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,MVD는 델타 동작 벡터인 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 5항에 있어서, MVf,bot는 소수점 이하를 버리는 정수 나눗셈을 이용하여 결정되고;MVtop및 MVbot는 정수 할프-루마 펠(half-luma pel) 동작 벡터인 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 5항에 있어서, TRB,bot및 TRD,bot는 상기 현재 필드 코드화된 화상이 상부 필드 첫째인지 하부 필드 첫째인지를 설명하는 시간의 보정을 구체화하는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 1항에 있어서, 현재 화상의 상부 필드를 예측하기 위한 후방 동작 벡터인 MVb,top는 공식(a)MVb,top=((TRB,top-TRD,top)*MVtop)/TRD,top및 (b)MVb,top=MVf,top-MVtop중 어느 1개에 의하여 결정되고;TRB,top는 MVtop에 의해 참조되는 현재 화상의 상부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,TRD,top는 MVtop에 의해 참조되는 미래 화상의 상부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,MVf,top는 현재 화상의 상부 필드를 예측하기 위한 전방 동작 벡터인 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 8항에 있어서, 델타 동작 벡터 MVD=0 일 때 상기 공식(a)이 선택되고, MVD≠0 일 때 상기 공식(b)이 선택되는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 1항에 있어서, 현재 화상의 하부 필드를 예측하기 위한 후방 동작 벡터인 MVb,bot는 공식(a)MVb,bot=((TRB,bot-TRD,bot)*MVbot)/TRD,bot및 (b)MVb,bot=MVf,bot-MVbot중 어느 1개에 의하여 결정되고;TRB,bot는 MVbot에 의해 참조되는 현재 화상의 하부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,TRD,bot는 MVbot에 의해 참조되는 미래 화상의 하부 필드 및 과거 화상의 필드간의 시간상의 간격에 대응하고,MVf,bot는 현재 화상의 하부 필드를 예측하기 위한 전방 동작 벡터인 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 10항에 있어서, 델타 동작 벡터 MVD=0 일 때 상기 공식(a)이 선택되고, MVD≠0 일 때 상기 공식(b)이 선택되는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 일련의 디지털 비디오 화상에 있어서,과거 기준 매크로블록에 관련하여 현재 매크로블록에 대해 절대차 에러의 전방 합이고 전방 코딩 모드에 대응하는 SADforward,field를 결정하는 단계와;미래 기준 매크로블록에 관련하여 현재 매크로블록에 대해 절대차 에러의 후방 합이고 후방 코딩 모드에 대응하는 SADbackward,field를 결정하는 단계와;상기 과거 및 미래 기준 매크로블록의 평균에 관련하여 현재 매크로블록에 대해 절대차 에러의 평균 합이고 평균 코딩 모드에 대응하는 SADaverage,field를 결정하는 단계; 및상기 SADs의 최소치에 의하여 상기 코딩 모드를 선택하는 단계를 구비하여 구성된 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 12항에 있어서, 각 코딩 모드의 획득된 동작 벡터의 수를 설명하는 대응하는 바이어스 텀(bias terms)을 가진 상기 SADs의 각 합의 최소치에 의하여 상기 코딩 모드를 선택하는 단계를 더 구비하여 구성된 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 12항에 있어서, 과거 기준 매크로블록의 상부 필드에 관련하여 현재 매크로블록의 상부 필드에 대한 절대차의 합(a) 및 과거 기준 매크로블록의 하부 필드에 관련하여 현재 매크로블록의 하부 필드에 대한 절대차의 합(b)에 의하여 SADforward,field가 결정되는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 12항에 있어서, 미래 기준 매크로블록의 상부 필드에 관련하여 현재 매크로블록의 상부 필드에 대한 절대차의 합(a) 및 미래 기준 매크로블록의 하부 필드에 관련하여 현재 매크로블록의 하부 필드에 대한 절대차의 합(b)에 의하여 SADbackward,field가 결정되는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 제 12항에 있어서, 과거 및 미래 기준 매크로블록의 상부 필드의 평균에 관련하여 현재 매크로블록의 상부 필드에 대한 절대차의 합(a) 및 과거 및 미래 기준 매크로블록의 하부 필드의 평균에 관련하여 현재 매크로블록의 하부 필드에 대한 절대차의 합(b)에 의하여 SADaverage,field가 결정되는 것을 특징으로 하는 상부 및 하부 필드를 갖춘 현재 양방향으로 예측된 필드 코드화된 화상에 대한 직접 모드 동작 벡터를 계산하기 위한 방법.
- 과거 매크로블록의 상부 및 하부 중 어느 1개를 참조하는 미래 매크로블록의 상부 필드의 전방 동작 벡터인 MVtop와,상기 과거 매크로블록의 상부 및 하부 필드 중 어느 1개를 참조하는 미래 매크로블록의 하부 필드의 전방 동작 벡터인 MVbot를 복구하기 위한 수단; 및미래 매크로블록의 대응하는 필드의 전방 동작 벡터를 스케일링(scaling)함으로서 현재 매크로블록의 상부 및 하부 필드 중 적어도 1개를 예측하기 위한 전방 및 후방 동작 벡터를 결정하기 위한 수단을 구비하여 구성되고;상부 및 하부 필드를 갖춘 과거 필드 코드화된 기준 매크로블록 및 상부 및 하부 필드를 갖춘 미래 필드 코드화된 기준 매크로블록을 이용하여 현재 매크로블록이 양방향으로 예측되는 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 17항에 있어서, 공식(MVtop*TRB,top)/TRD,top+MVD에 의하여 현재 매크로블록의 상부 필드를 예측하기 위한 전방 동작 벡터인 MVf,top을 결정하기 위한 수단을 더 구비하여 구성되고;TRB,top는 MVtop에 의해 참조되는 현재 매크로블록의 상부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고, TRD,top는 MVtop에 의해 참조되는 미래 매크로블록의 상부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하며, MVD는 델타 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 18항에 있어서, MVf,top는 소수점 이하를 버리는 정수 나눗셈을 이용하여 결정되고;MVtop및 MVbot는 정수 할프-루마 펠(half-luma pel) 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 18항에 있어서, TRB,top및 TRD,top는 상기 현재 필드 코드화된 화상이 상부 필드 첫째인지 하부 필드 첫째인지를 설명하는 시간의 보정을 구체화하는 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 17항에 있어서, 현재 매크로블록의 하부 필드를 예측하기 위한 전방 동작 벡터인 MVf,bot을 공식(MVbot*TRB,bot)/TRD,bot+MVD에 의해서 결정하기 위한 수단을 더 구비하여 구성되고;TRB,bot는 MVbot에 의해 참조되는 현재 매크로블록의 하부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,TRD,bot는 MVbot에 의해 참조되는 미래 매크로블록의 하부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,MVD는 델타 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 21항에 있어서, MVf,bot는 소수점 이하를 버리는 정수 나눗셈을 이용하여 결정되고;MVtop및 MVbot는 정수 할프-루마 펠(half-luma pel) 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 21항에 있어서, TRB,bot및 TRD,bot는 상기 현재 필드 코드화된 화상이 상부 필드 첫째인지 하부 필드 첫째인지를 설명하는 시간의 보정을 구체화하는 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 17항에 있어서, 현재 매크로블록의 상부 필드를 예측하기 위한 후방 동작 벡터인 MVb,top는 공식(a)MVb,top=((TRB,top-TRD,top)*MVtop)/TRD,top및 (b)MVb,top=MVf,top-MVtop중 어느 1개에 의하여 결정되고;TRB,top는 MVtop에 의해 참조되는 현재 매크로블록의 상부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,TRD,top는 MVtop에 의해 참조되는 미래 매크로블록의 상부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,MVf,top는 현재 매크로블록의 상부 필드를 예측하기 위한 전방 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 24항에 있어서, 델타 동작 벡터 MVD=0 일 때 상기 공식(a)을 선택하기 위한 수단과;MVD≠0 일 때 상기 공식(b)을 선택하기 위한 수단을 더 구비하여 구성된 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 17항에 있어서, 현재 매크로블록의 하부 필드를 예측하기 위한 후방 동작 벡터인 MVb,bot는 공식(a)MVb,bot=((TRB,bot-TRD,bot)*MVbot)/TRD,bot및 (b)MVb,bot=MVf,bot-MVbot중 어느 1개에 의하여 결정되고;TRB,bot는 MVbot에 의해 참조되는 현재 매크로블록의 하부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,TRD,bot는 MVbot에 의해 참조되는 미래 매크로블록의 하부 필드 및 과거 매크로블록의 필드간의 시간상의 간격에 대응하고,MVf,bot는 현재 매크로블록의 하부 필드를 예측하기 위한 전방 동작 벡터인 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
- 제 26항에 있어서, 델타 동작 벡터 MVD=0 일 때 상기 공식(a)을 선택하기 위한 수단과;MVD≠0 일 때 상기 공식(b)을 선택하기 위한 수단을 더 구비하여 구성된 것을 특징으로 하는 수신된 비트스트림(bitstream)으로부터 일련의 디지털 비디오 매크로블록내에 상부 및 하부 필드를 가진 직접 모드 현재 필드 코드화된 매크로블록을 복구하기 위한 디코더.
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US4012097P | 1997-03-07 | 1997-03-07 | |
US60/040,120 | 1997-03-07 | ||
US4224597P | 1997-03-31 | 1997-03-31 | |
US60/042,245 | 1997-03-31 | ||
US8/944,118 | 1997-10-06 | ||
US08/944,118 US5991447A (en) | 1997-03-07 | 1997-10-06 | Prediction and coding of bi-directionally predicted video object planes for interlaced digital video |
Publications (1)
Publication Number | Publication Date |
---|---|
KR19980080014A true KR19980080014A (ko) | 1998-11-25 |
Family
ID=27365664
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1019980007630A KR19980080014A (ko) | 1997-03-07 | 1998-03-07 | 양방향으로 예측된 비디오 객체면과 같은 디지털비디오 화상의 코딩을 위한 방법 및 장치 |
Country Status (10)
Country | Link |
---|---|
US (2) | US5991447A (ko) |
EP (1) | EP0863674B1 (ko) |
JP (1) | JPH1175191A (ko) |
KR (1) | KR19980080014A (ko) |
CN (1) | CN1312934C (ko) |
AU (1) | AU724796B2 (ko) |
BR (1) | BR9800848A (ko) |
CA (1) | CA2230562C (ko) |
NO (1) | NO980949L (ko) |
TW (1) | TW362334B (ko) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100367619B1 (ko) * | 2001-03-16 | 2003-01-10 | 엘지전자 주식회사 | H.26l에서의 b 픽쳐 모드 결정 방법 |
KR20030024411A (ko) * | 2001-09-18 | 2003-03-26 | 엘지전자 주식회사 | H.26l에서의 b 픽쳐 코딩 방법 |
KR20040008562A (ko) * | 2002-07-18 | 2004-01-31 | 엘지전자 주식회사 | 모션벡터 연산 방법 |
Families Citing this family (171)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69530908T2 (de) * | 1994-12-20 | 2004-05-19 | Matsushita Electric Industrial Co., Ltd., Kadoma | Verfahren und Vorrichtung zur Bildkodierung |
WO1998042134A1 (en) * | 1997-03-17 | 1998-09-24 | Mitsubishi Denki Kabushiki Kaisha | Image encoder, image decoder, image encoding method, image decoding method and image encoding/decoding system |
US6404813B1 (en) * | 1997-03-27 | 2002-06-11 | At&T Corp. | Bidirectionally predicted pictures or video object planes for efficient and flexible video coding |
SG65064A1 (en) | 1997-04-09 | 1999-05-25 | Matsushita Electric Ind Co Ltd | Image predictive decoding method image predictive decoding apparatus image predictive coding method image predictive coding apparatus and data storage media |
KR100251051B1 (ko) * | 1997-07-14 | 2000-04-15 | 윤종용 | 임의 형상 부호화 방법 |
DE19730305A1 (de) * | 1997-07-15 | 1999-01-21 | Bosch Gmbh Robert | Verfahren zur Erzeugung eines verbesserten Bildsignals bei der Bewegungsschätzung von Bildsequenzen, insbesondere eines Prädiktionssignals für Bewegtbilder mit bewegungskompensierender Prädiktion |
US6535530B1 (en) * | 1997-07-23 | 2003-03-18 | Matsushita Electric Industrial Co., Ltd. | Apparatus and method for demultiplexing multiplexed data |
JPH1169356A (ja) * | 1997-08-25 | 1999-03-09 | Mitsubishi Electric Corp | 動画像符号化方式及び動画像復号方式 |
KR100535631B1 (ko) * | 1997-09-29 | 2006-07-10 | 주식회사 팬택앤큐리텔 | 적응적 비월주사 모양정보 부호화/복호화 장치및 방법 |
KR100535632B1 (ko) * | 1997-10-17 | 2006-04-12 | 주식회사 팬택앤큐리텔 | 적응적으로 보더링하는 모양정보 부호화/복호화 장치 및 방법 |
KR100281462B1 (ko) * | 1998-03-30 | 2001-02-01 | 전주범 | 격행 부호화에서 이진 형상 신호의 움직임 벡터 부호화 방법 |
US6408029B1 (en) | 1998-04-02 | 2002-06-18 | Intel Corporation | Method and apparatus for simplifying real-time data encoding |
US7046734B2 (en) * | 1998-04-02 | 2006-05-16 | Intel Corporation | Method and apparatus for performing real-time data encoding |
US6904174B1 (en) * | 1998-12-11 | 2005-06-07 | Intel Corporation | Simplified predictive video encoder |
US6310919B1 (en) | 1998-05-07 | 2001-10-30 | Sarnoff Corporation | Method and apparatus for adaptively scaling motion vector information in an information stream decoder |
EP0955609B1 (en) * | 1998-05-07 | 2003-07-30 | Sarnoff Corporation | Decoding compressed image information |
US6563953B2 (en) | 1998-11-30 | 2003-05-13 | Microsoft Corporation | Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock |
US6983018B1 (en) | 1998-11-30 | 2006-01-03 | Microsoft Corporation | Efficient motion vector coding for video compression |
US6192080B1 (en) * | 1998-12-04 | 2001-02-20 | Mitsubishi Electric Research Laboratories, Inc. | Motion compensated digital video signal processing |
US6445386B1 (en) | 1999-01-15 | 2002-09-03 | Intel Corporation | Method and apparatus for stretch blitting using a 3D pipeline |
US6591398B1 (en) | 1999-02-12 | 2003-07-08 | Sony Corporation | Multiple processing system |
US6621936B1 (en) | 1999-02-12 | 2003-09-16 | Sony Corporation | Method and apparatus for spatial class reduction |
US6418548B1 (en) | 1999-02-12 | 2002-07-09 | Sony Corporation | Method and apparatus for preprocessing for peripheral erroneous data |
US6519369B1 (en) | 1999-02-12 | 2003-02-11 | Sony Corporation | Method and apparatus for filter tap expansion |
US6499060B1 (en) | 1999-03-12 | 2002-12-24 | Microsoft Corporation | Media coding for loss recovery with remotely predicted data units |
JP4224748B2 (ja) * | 1999-09-13 | 2009-02-18 | ソニー株式会社 | 画像符号化装置および画像符号化方法、画像復号装置および画像復号方法、記録媒体、並びに画像処理装置 |
US6522785B1 (en) | 1999-09-24 | 2003-02-18 | Sony Corporation | Classified adaptive error recovery method and apparatus |
US6754371B1 (en) * | 1999-12-07 | 2004-06-22 | Sony Corporation | Method and apparatus for past and future motion classification |
FI116819B (fi) | 2000-01-21 | 2006-02-28 | Nokia Corp | Menetelmä kuvien lähettämiseksi ja kuvakooderi |
SE521970C2 (sv) * | 2000-02-16 | 2003-12-23 | Protan Invest Ltd | Kabel-TV-system som alstrar logiska signaler baserat på jämförelse mellan detekterade energinivåer i systemet och en referenssignal |
KR100368301B1 (ko) * | 2000-06-26 | 2003-01-24 | 김상용 | 동영상 메일 시스템 및 방법 |
US7023491B2 (en) * | 2001-02-28 | 2006-04-04 | Thomson Licensing | Method and device for displaying frozen pictures on video display device |
JP2004532540A (ja) * | 2001-03-05 | 2004-10-21 | インタービデオインコーポレイテッド | 誤り耐性のある符号化のためのシステム及び方法 |
US7266150B2 (en) | 2001-07-11 | 2007-09-04 | Dolby Laboratories, Inc. | Interpolation of video compression frames |
US6975680B2 (en) * | 2001-07-12 | 2005-12-13 | Dolby Laboratories, Inc. | Macroblock mode decision biasing for video compression systems |
CN1484922A (zh) * | 2001-11-06 | 2004-03-24 | 松下电器产业株式会社 | 运动图像编码方法及运动图像解码方法 |
US20030099294A1 (en) * | 2001-11-27 | 2003-05-29 | Limin Wang | Picture level adaptive frame/field coding for digital video content |
ES2610430T3 (es) | 2001-12-17 | 2017-04-27 | Microsoft Technology Licensing, Llc | Codificación por omisión de macrobloques |
CN101448162B (zh) * | 2001-12-17 | 2013-01-02 | 微软公司 | 处理视频图像的方法 |
JP4114859B2 (ja) * | 2002-01-09 | 2008-07-09 | 松下電器産業株式会社 | 動きベクトル符号化方法および動きベクトル復号化方法 |
US7088773B2 (en) * | 2002-01-17 | 2006-08-08 | Sony Corporation | Motion segmentation system with multi-frame hypothesis tracking |
US7003035B2 (en) | 2002-01-25 | 2006-02-21 | Microsoft Corporation | Video coding methods and apparatuses |
CN101431679B (zh) * | 2002-03-04 | 2011-08-10 | 松下电器产业株式会社 | 图像编码方法及图像编码装置 |
JP2004088722A (ja) * | 2002-03-04 | 2004-03-18 | Matsushita Electric Ind Co Ltd | 動画像符号化方法および動画像復号化方法 |
EP1347649A1 (en) * | 2002-03-18 | 2003-09-24 | Lg Electronics Inc. | B picture mode determining method and apparatus in video coding system |
KR100508798B1 (ko) | 2002-04-09 | 2005-08-19 | 엘지전자 주식회사 | 쌍방향 예측 블록 예측 방법 |
US7620109B2 (en) * | 2002-04-10 | 2009-11-17 | Microsoft Corporation | Sub-pixel interpolation in motion estimation and compensation |
AU2003235174A1 (en) | 2002-04-19 | 2003-11-03 | Matsushita Electric Industrial Co., Ltd | Method for calculating motion vector |
ES2576629T3 (es) * | 2002-04-19 | 2016-07-08 | Panasonic Intellectual Property Corporation Of America | Método de cálculo de vectores de movimiento |
KR100491530B1 (ko) | 2002-05-03 | 2005-05-27 | 엘지전자 주식회사 | 모션 벡터 결정 방법 |
US20040001546A1 (en) * | 2002-06-03 | 2004-01-01 | Alexandros Tourapis | Spatiotemporal prediction for bidirectionally predictive (B) pictures and motion vector prediction for multi-picture reference motion compensation |
US7280700B2 (en) | 2002-07-05 | 2007-10-09 | Microsoft Corporation | Optimization techniques for data compression |
CN100553338C (zh) | 2002-07-15 | 2009-10-21 | 株式会社日立制作所 | 动态图像编码方法 |
KR100865034B1 (ko) | 2002-07-18 | 2008-10-23 | 엘지전자 주식회사 | 모션 벡터 예측 방법 |
US7154952B2 (en) | 2002-07-19 | 2006-12-26 | Microsoft Corporation | Timestamp-independent motion vector prediction for predictive (P) and bidirectionally predictive (B) pictures |
US7302105B2 (en) * | 2002-07-22 | 2007-11-27 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, and methods therefor |
EP1422946A4 (en) * | 2002-07-26 | 2008-04-02 | Matsushita Electric Ind Co Ltd | MOVING IMAGE PROCEDURE, MOVABLE IMAGE DECODING METHOD AND RECORD MEDIUM |
JP3977716B2 (ja) | 2002-09-20 | 2007-09-19 | 株式会社東芝 | 動画像符号化/復号化方法及び装置 |
KR100506864B1 (ko) | 2002-10-04 | 2005-08-05 | 엘지전자 주식회사 | 모션벡터 결정방법 |
EP1408694A1 (en) * | 2002-10-07 | 2004-04-14 | Matsushita Electric Industrial Co., Ltd. | Direct mode motion vector calculation |
JP4070104B2 (ja) * | 2002-10-16 | 2008-04-02 | 独立行政法人情報通信研究機構 | 動画像符号化復号方法及び動画像符号化装置並びに動画像復号装置 |
BRPI0306684B1 (pt) * | 2002-11-01 | 2018-03-13 | Godo Kaisha Ip Bridge 1 | Método e aparelho de codificação de um sinal de imagem e método e aparelho de decodificação de um sinal de imagem |
US20040091047A1 (en) * | 2002-11-11 | 2004-05-13 | Sony Corporation | Method and apparatus for nonlinear multiple motion model and moving boundary extraction |
JP4462823B2 (ja) * | 2002-11-20 | 2010-05-12 | ソニー株式会社 | 画像信号の処理装置および処理方法、それに使用される係数データの生成装置および生成方法、並びに各方法を実行するためのプログラム |
KR100557576B1 (ko) * | 2002-12-10 | 2006-03-03 | 엘지전자 주식회사 | 픽쳐 모션벡터 예측방법 |
US7515156B2 (en) * | 2003-01-08 | 2009-04-07 | Hrl Laboratories, Llc | Method and apparatus for parallel speculative rendering of synthetic images |
US8824553B2 (en) | 2003-05-12 | 2014-09-02 | Google Inc. | Video compression method |
KR100548372B1 (ko) | 2003-07-05 | 2006-02-02 | 엘지전자 주식회사 | 휴대폰의 이미지를 이용한 잠금 제어방법 |
US10554985B2 (en) | 2003-07-18 | 2020-02-04 | Microsoft Technology Licensing, Llc | DC coefficient signaling at small quantization step sizes |
US7738554B2 (en) | 2003-07-18 | 2010-06-15 | Microsoft Corporation | DC coefficient signaling at small quantization step sizes |
US7426308B2 (en) | 2003-07-18 | 2008-09-16 | Microsoft Corporation | Intraframe and interframe interlace coding and decoding |
US20050013498A1 (en) | 2003-07-18 | 2005-01-20 | Microsoft Corporation | Coding of motion vector information |
US7574063B2 (en) * | 2003-07-23 | 2009-08-11 | Canon Kabushiki Kaisha | Image coding method and apparatus |
US7317839B2 (en) * | 2003-09-07 | 2008-01-08 | Microsoft Corporation | Chroma motion vector derivation for interlaced forward-predicted fields |
US7724827B2 (en) * | 2003-09-07 | 2010-05-25 | Microsoft Corporation | Multi-layer run level encoding and decoding |
US8064520B2 (en) * | 2003-09-07 | 2011-11-22 | Microsoft Corporation | Advanced bi-directional predictive coding of interlaced video |
US7577198B2 (en) * | 2003-09-07 | 2009-08-18 | Microsoft Corporation | Number of reference fields for an interlaced forward-predicted field |
US7567617B2 (en) | 2003-09-07 | 2009-07-28 | Microsoft Corporation | Predicting motion vectors for fields of forward-predicted interlaced video frames |
US8085844B2 (en) * | 2003-09-07 | 2011-12-27 | Microsoft Corporation | Signaling reference frame distances |
CN1225127C (zh) | 2003-09-12 | 2005-10-26 | 中国科学院计算技术研究所 | 一种用于视频编码的编码端/解码端双向预测方法 |
US20050058202A1 (en) * | 2003-09-17 | 2005-03-17 | Fernandes Felix C. | Transcoders and methods |
FR2860678A1 (fr) * | 2003-10-01 | 2005-04-08 | Thomson Licensing Sa | Procede de codage differentiel |
US20050100098A1 (en) * | 2003-10-23 | 2005-05-12 | Gong-Sheng Lin | Highly integrated mpeg-4 video decoding unit |
JP2005151391A (ja) * | 2003-11-19 | 2005-06-09 | Toshiba Corp | 動画像符号化方法、動画像符号化装置およびプログラム |
US8861602B2 (en) * | 2004-06-22 | 2014-10-14 | Broadcom Corporation | Motion vector reconstruction in an entropy decoder |
US9743078B2 (en) | 2004-07-30 | 2017-08-22 | Euclid Discoveries, Llc | Standards-compliant model-based video encoding and decoding |
US8902971B2 (en) | 2004-07-30 | 2014-12-02 | Euclid Discoveries, Llc | Video compression repository and model reuse |
US9578345B2 (en) | 2005-03-31 | 2017-02-21 | Euclid Discoveries, Llc | Model-based video encoding and decoding |
US9532069B2 (en) | 2004-07-30 | 2016-12-27 | Euclid Discoveries, Llc | Video compression repository and model reuse |
CN103179400B (zh) * | 2004-10-07 | 2016-10-05 | 日本电信电话株式会社 | 视频编码方法及装置、视频解码方法及装置 |
US8634413B2 (en) | 2004-12-30 | 2014-01-21 | Microsoft Corporation | Use of frame caching to improve packet loss recovery |
US8908766B2 (en) * | 2005-03-31 | 2014-12-09 | Euclid Discoveries, Llc | Computer method and apparatus for processing image data |
US9077960B2 (en) | 2005-08-12 | 2015-07-07 | Microsoft Corporation | Non-zero coefficient block pattern coding |
US8233535B2 (en) | 2005-11-18 | 2012-07-31 | Apple Inc. | Region-based processing of predicted pixels |
US20070116117A1 (en) * | 2005-11-18 | 2007-05-24 | Apple Computer, Inc. | Controlling buffer states in video compression coding to enable editing and distributed encoding |
US8295343B2 (en) | 2005-11-18 | 2012-10-23 | Apple Inc. | Video bit rate control method |
US8031777B2 (en) * | 2005-11-18 | 2011-10-04 | Apple Inc. | Multipass video encoding and rate control using subsampling of frames |
US8780997B2 (en) * | 2005-11-18 | 2014-07-15 | Apple Inc. | Regulation of decode-side processing based on perceptual masking |
WO2007081139A1 (en) * | 2006-01-09 | 2007-07-19 | Lg Electronics Inc. | Inter-layer prediction method for video signal |
US7889789B2 (en) * | 2006-04-07 | 2011-02-15 | Microsoft Corporation | Making interlace frame level coding mode decisions |
JP5155157B2 (ja) | 2006-05-12 | 2013-02-27 | パナソニック株式会社 | 動画像復号化装置 |
US8238442B2 (en) * | 2006-08-25 | 2012-08-07 | Sony Computer Entertainment Inc. | Methods and apparatus for concealing corrupted blocks of video data |
CN102176751B (zh) | 2006-12-27 | 2013-12-25 | 松下电器产业株式会社 | 运动图像解码装置及运动图像解码方法 |
JP2010517426A (ja) | 2007-01-23 | 2010-05-20 | ユークリッド・ディスカバリーズ・エルエルシー | オブジェクトアーカイブシステムおよび方法 |
JP2010517427A (ja) | 2007-01-23 | 2010-05-20 | ユークリッド・ディスカバリーズ・エルエルシー | 個人向けのビデオサービスを提供するシステムおよび方法 |
JP4886850B2 (ja) * | 2007-06-28 | 2012-02-29 | パナソニック株式会社 | 画像処理装置、画像処理方法、プログラム |
US8254455B2 (en) | 2007-06-30 | 2012-08-28 | Microsoft Corporation | Computing collocated macroblock information for direct mode macroblocks |
FR2923125B1 (fr) * | 2007-10-29 | 2010-10-22 | Assistance Tech Et Etude De Ma | Procede et systeme d'estimation de mouvement futur d'elements d'image a partir du mouvement passe dans un codeur video |
US8385404B2 (en) | 2008-09-11 | 2013-02-26 | Google Inc. | System and method for video encoding using constructed reference frame |
US8326075B2 (en) | 2008-09-11 | 2012-12-04 | Google Inc. | System and method for video encoding using adaptive loop filter |
US8325796B2 (en) | 2008-09-11 | 2012-12-04 | Google Inc. | System and method for video coding using adaptive segmentation |
JP5567021B2 (ja) | 2008-10-07 | 2014-08-06 | ユークリッド・ディスカバリーズ・エルエルシー | 特徴を基礎とするビデオ圧縮 |
US8189666B2 (en) | 2009-02-02 | 2012-05-29 | Microsoft Corporation | Local picture identifier and computation of co-located information |
US9621892B2 (en) * | 2009-12-18 | 2017-04-11 | Sony Corporation | Emulation of Bi predicted pictures using adjacent pictures for improved video |
US9036692B2 (en) * | 2010-01-18 | 2015-05-19 | Mediatek Inc. | Motion prediction method |
EP2534841B1 (en) * | 2010-04-22 | 2017-11-29 | HFI Innovation Inc. | Motion vector prediction method |
US9532059B2 (en) | 2010-10-05 | 2016-12-27 | Google Technology Holdings LLC | Method and apparatus for spatial scalability for video coding |
US8611415B1 (en) | 2010-11-15 | 2013-12-17 | Google Inc. | System and method for coding using improved motion estimation |
US8891626B1 (en) | 2011-04-05 | 2014-11-18 | Google Inc. | Center of motion for encoding motion fields |
US8693547B2 (en) | 2011-04-06 | 2014-04-08 | Google Inc. | Apparatus and method for coding using motion vector segmentation |
US8780996B2 (en) | 2011-04-07 | 2014-07-15 | Google, Inc. | System and method for encoding and decoding video data |
US8781004B1 (en) | 2011-04-07 | 2014-07-15 | Google Inc. | System and method for encoding video using variable loop filter |
US8638854B1 (en) | 2011-04-07 | 2014-01-28 | Google Inc. | Apparatus and method for creating an alternate reference frame for video compression using maximal differences |
US9154799B2 (en) | 2011-04-07 | 2015-10-06 | Google Inc. | Encoding and decoding motion via image segmentation |
US8780971B1 (en) | 2011-04-07 | 2014-07-15 | Google, Inc. | System and method of encoding using selectable loop filters |
US8804819B1 (en) | 2011-04-19 | 2014-08-12 | Google Inc. | Method and apparatus for encoding video using data frequency |
US8705620B1 (en) | 2011-04-28 | 2014-04-22 | Google Inc. | Method and apparatus for encoding anchor frame by encoding features using layers |
US9749638B1 (en) | 2011-04-28 | 2017-08-29 | Google Inc. | Method and apparatus for encoding video with dynamic quality improvement |
US8989256B2 (en) | 2011-05-25 | 2015-03-24 | Google Inc. | Method and apparatus for using segmentation-based coding of prediction information |
CN103797795B (zh) | 2011-07-01 | 2017-07-28 | 谷歌技术控股有限责任公司 | 用于运动矢量预测的方法和设备 |
WO2013023287A1 (en) | 2011-08-16 | 2013-02-21 | Destiny Software Productions Inc. | Script-based video rendering |
US8885706B2 (en) | 2011-09-16 | 2014-11-11 | Google Inc. | Apparatus and methodology for a video codec system with noise reduction capability |
CN104041041B (zh) | 2011-11-04 | 2017-09-01 | 谷歌技术控股有限责任公司 | 用于非均匀运动向量栅格的运动向量缩放 |
US9247257B1 (en) | 2011-11-30 | 2016-01-26 | Google Inc. | Segmentation based entropy encoding and decoding |
US9014265B1 (en) | 2011-12-29 | 2015-04-21 | Google Inc. | Video coding using edge detection and block partitioning for intra prediction |
US8908767B1 (en) | 2012-02-09 | 2014-12-09 | Google Inc. | Temporal motion vector prediction |
US9262670B2 (en) | 2012-02-10 | 2016-02-16 | Google Inc. | Adaptive region of interest |
US9094681B1 (en) | 2012-02-28 | 2015-07-28 | Google Inc. | Adaptive segmentation |
US9131073B1 (en) | 2012-03-02 | 2015-09-08 | Google Inc. | Motion estimation aided noise reduction |
WO2013162980A2 (en) | 2012-04-23 | 2013-10-31 | Google Inc. | Managing multi-reference picture buffers for video data coding |
US9609341B1 (en) | 2012-04-23 | 2017-03-28 | Google Inc. | Video data encoding and decoding using reference picture lists |
US9172970B1 (en) | 2012-05-29 | 2015-10-27 | Google Inc. | Inter frame candidate selection for a video encoder |
US9014266B1 (en) | 2012-06-05 | 2015-04-21 | Google Inc. | Decimated sliding windows for multi-reference prediction in video coding |
US11317101B2 (en) | 2012-06-12 | 2022-04-26 | Google Inc. | Inter frame candidate selection for a video encoder |
US9344729B1 (en) | 2012-07-11 | 2016-05-17 | Google Inc. | Selective prediction signal filtering |
US9380298B1 (en) | 2012-08-10 | 2016-06-28 | Google Inc. | Object-based intra-prediction |
US9288484B1 (en) | 2012-08-30 | 2016-03-15 | Google Inc. | Sparse coding dictionary priming |
US9369732B2 (en) | 2012-10-08 | 2016-06-14 | Google Inc. | Lossless intra-prediction video coding |
US9756346B2 (en) | 2012-10-08 | 2017-09-05 | Google Inc. | Edge-selective intra coding |
US9485515B2 (en) | 2013-08-23 | 2016-11-01 | Google Inc. | Video coding using reference motion vectors |
US9210432B2 (en) | 2012-10-08 | 2015-12-08 | Google Inc. | Lossless inter-frame video coding |
US9503746B2 (en) | 2012-10-08 | 2016-11-22 | Google Inc. | Determine reference motion vectors |
US9407915B2 (en) | 2012-10-08 | 2016-08-02 | Google Inc. | Lossless video coding with sub-frame level optimal quantization values |
US9225979B1 (en) | 2013-01-30 | 2015-12-29 | Google Inc. | Remote access encoding |
US9210424B1 (en) | 2013-02-28 | 2015-12-08 | Google Inc. | Adaptive prediction block size in video coding |
US9300906B2 (en) | 2013-03-29 | 2016-03-29 | Google Inc. | Pull frame interpolation |
US9756331B1 (en) | 2013-06-17 | 2017-09-05 | Google Inc. | Advance coded reference prediction |
US9313493B1 (en) | 2013-06-27 | 2016-04-12 | Google Inc. | Advanced motion estimation |
EP2854405A1 (en) | 2013-09-26 | 2015-04-01 | Thomson Licensing | Method and apparatus for encoding and decoding a motion vector representation in interlaced video using progressive video coding tools |
US9774881B2 (en) | 2014-01-08 | 2017-09-26 | Microsoft Technology Licensing, Llc | Representing motion vectors in an encoded bitstream |
US9942560B2 (en) | 2014-01-08 | 2018-04-10 | Microsoft Technology Licensing, Llc | Encoding screen capture data |
US9749642B2 (en) | 2014-01-08 | 2017-08-29 | Microsoft Technology Licensing, Llc | Selection of motion vector precision |
US10091507B2 (en) | 2014-03-10 | 2018-10-02 | Euclid Discoveries, Llc | Perceptual optimization for model-based video encoding |
US10097851B2 (en) | 2014-03-10 | 2018-10-09 | Euclid Discoveries, Llc | Perceptual optimization for model-based video encoding |
WO2015138008A1 (en) | 2014-03-10 | 2015-09-17 | Euclid Discoveries, Llc | Continuous block tracking for temporal prediction in video encoding |
US9392272B1 (en) | 2014-06-02 | 2016-07-12 | Google Inc. | Video coding using adaptive source variance based partitioning |
US9578324B1 (en) | 2014-06-27 | 2017-02-21 | Google Inc. | Video coding using statistical-based spatially differentiated partitioning |
US9286653B2 (en) | 2014-08-06 | 2016-03-15 | Google Inc. | System and method for increasing the bit depth of images |
US9153017B1 (en) | 2014-08-15 | 2015-10-06 | Google Inc. | System and method for optimized chroma subsampling |
US10102613B2 (en) | 2014-09-25 | 2018-10-16 | Google Llc | Frequency-domain denoising |
US9807416B2 (en) | 2015-09-21 | 2017-10-31 | Google Inc. | Low-latency two-pass video coding |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0484140A2 (en) * | 1990-10-31 | 1992-05-06 | Victor Company Of Japan, Ltd. | Compression method of interlace moving image signals |
WO1992010061A2 (en) * | 1990-12-03 | 1992-06-11 | The Trustees Of Columbia University In The City Of New York | Systems and methods for coding even fields of interlaced video sequences |
US5198901A (en) * | 1991-09-23 | 1993-03-30 | Matsushita Electric Corporation Of America | Derivation and use of motion vectors in a differential pulse code modulation system |
JPH0591500A (ja) * | 1991-07-30 | 1993-04-09 | Sony Corp | 画像信号の高能率符号化及び復号化装置 |
KR940006412A (ko) * | 1992-06-26 | 1994-03-23 | 오오가 노리오 | 화상신호 부호화, 복호화 방법 및 화상신호 기록매체 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5317397A (en) * | 1991-05-31 | 1994-05-31 | Kabushiki Kaisha Toshiba | Predictive coding using spatial-temporal filtering and plural motion vectors |
TW199257B (ko) * | 1991-07-30 | 1993-02-01 | Sony Co Ltd | |
US5809270A (en) * | 1992-06-30 | 1998-09-15 | Discovision Associates | Inverse quantizer |
JP3210082B2 (ja) * | 1992-07-14 | 2001-09-17 | キヤノン株式会社 | 符号化装置及びその方法 |
US5815646A (en) * | 1993-04-13 | 1998-09-29 | C-Cube Microsystems | Decompression processor for video applications |
US5448310A (en) * | 1993-04-27 | 1995-09-05 | Array Microsystems, Inc. | Motion estimation coprocessor |
US5598514A (en) * | 1993-08-09 | 1997-01-28 | C-Cube Microsystems | Structure and method for a multistandard video encoder/decoder |
KR0126871B1 (ko) * | 1994-07-30 | 1997-12-29 | 심상철 | 양방향 이동벡터 추정을 위한 고속 블럭정합 방식 |
KR0159559B1 (ko) * | 1994-10-31 | 1999-01-15 | 배순훈 | 디지탈 화상의 적응적인 후처리 방법 |
US5691771A (en) * | 1994-12-29 | 1997-11-25 | Sony Corporation | Processing of redundant fields in a moving picture to achieve synchronized system operation |
US5761398A (en) * | 1995-12-26 | 1998-06-02 | C-Cube Microsystems Inc. | Three stage hierarchal motion vector determination |
US5801778A (en) * | 1996-05-23 | 1998-09-01 | C-Cube Microsystems, Inc. | Video encoding with multi-stage projection motion estimation |
US5793895A (en) * | 1996-08-28 | 1998-08-11 | International Business Machines Corporation | Intelligent error resilient video encoder |
-
1997
- 1997-10-06 US US08/944,118 patent/US5991447A/en not_active Ceased
-
1998
- 1998-02-25 CA CA002230562A patent/CA2230562C/en not_active Expired - Lifetime
- 1998-02-27 EP EP98103446.5A patent/EP0863674B1/en not_active Expired - Lifetime
- 1998-03-04 TW TW087103123A patent/TW362334B/zh active
- 1998-03-05 NO NO980949A patent/NO980949L/no not_active Application Discontinuation
- 1998-03-06 AU AU57400/98A patent/AU724796B2/en not_active Ceased
- 1998-03-06 BR BR9800848-0A patent/BR9800848A/pt not_active IP Right Cessation
- 1998-03-07 CN CNB2004100682026A patent/CN1312934C/zh not_active Expired - Lifetime
- 1998-03-07 KR KR1019980007630A patent/KR19980080014A/ko active IP Right Grant
- 1998-03-09 JP JP10098040A patent/JPH1175191A/ja active Pending
-
2001
- 2001-11-19 US US09/995,997 patent/USRE38563E1/en not_active Expired - Lifetime
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0484140A2 (en) * | 1990-10-31 | 1992-05-06 | Victor Company Of Japan, Ltd. | Compression method of interlace moving image signals |
WO1992010061A2 (en) * | 1990-12-03 | 1992-06-11 | The Trustees Of Columbia University In The City Of New York | Systems and methods for coding even fields of interlaced video sequences |
JPH0591500A (ja) * | 1991-07-30 | 1993-04-09 | Sony Corp | 画像信号の高能率符号化及び復号化装置 |
US5198901A (en) * | 1991-09-23 | 1993-03-30 | Matsushita Electric Corporation Of America | Derivation and use of motion vectors in a differential pulse code modulation system |
KR940006412A (ko) * | 1992-06-26 | 1994-03-23 | 오오가 노리오 | 화상신호 부호화, 복호화 방법 및 화상신호 기록매체 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100367619B1 (ko) * | 2001-03-16 | 2003-01-10 | 엘지전자 주식회사 | H.26l에서의 b 픽쳐 모드 결정 방법 |
KR20030024411A (ko) * | 2001-09-18 | 2003-03-26 | 엘지전자 주식회사 | H.26l에서의 b 픽쳐 코딩 방법 |
KR20040008562A (ko) * | 2002-07-18 | 2004-01-31 | 엘지전자 주식회사 | 모션벡터 연산 방법 |
Also Published As
Publication number | Publication date |
---|---|
CN1312934C (zh) | 2007-04-25 |
EP0863674A2 (en) | 1998-09-09 |
EP0863674A3 (en) | 2002-12-18 |
NO980949D0 (no) | 1998-03-05 |
EP0863674B1 (en) | 2014-03-26 |
CA2230562A1 (en) | 1998-09-07 |
JPH1175191A (ja) | 1999-03-16 |
CN1620145A (zh) | 2005-05-25 |
AU5740098A (en) | 1998-09-10 |
AU724796B2 (en) | 2000-09-28 |
BR9800848A (pt) | 1999-11-23 |
USRE38563E1 (en) | 2004-08-10 |
US5991447A (en) | 1999-11-23 |
CA2230562C (en) | 2005-12-20 |
TW362334B (en) | 1999-06-21 |
NO980949L (no) | 1998-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR19980080014A (ko) | 양방향으로 예측된 비디오 객체면과 같은 디지털비디오 화상의 코딩을 위한 방법 및 장치 | |
US6005980A (en) | Motion estimation and compensation of video object planes for interlaced digital video | |
AU728469B2 (en) | Intra-macroblock DC and AC coefficient prediction for interlaced digital video | |
US6483874B1 (en) | Efficient motion estimation for an arbitrarily-shaped object | |
US7356081B1 (en) | Bidirectionally predicted pictures or video object planes for efficient and flexible video coding | |
JP4148549B2 (ja) | モード信号符号化装置 | |
JP3778721B2 (ja) | 動画像符号化方法および装置 | |
JP2000023193A (ja) | 画像符号化方法及び装置、画像復号方法及び装置、並びに提供媒体 | |
JPH11298906A (ja) | 映像信号符号化装置 | |
JP2002532029A (ja) | ビデオ圧縮のための効率的マクロブロックヘッダ符号化 | |
JP2000023194A (ja) | 画像符号化方法及び装置、画像復号方法及び装置、並びに提供媒体 | |
JP3440830B2 (ja) | 画像符号化装置及び方法、並びに記録媒体 | |
USRE38564E1 (en) | Motion estimation and compensation of video object planes for interlaced digital video | |
AU728756B2 (en) | Motion estimation and compensation of video object planes for interlaced digital video | |
AU758254B2 (en) | Padding of video object planes for interlaced digital video | |
Chen et al. | Coding of an arbitrarily shaped interlaced video in MPEG-4 | |
Monaco et al. | Low-bit-rate video coding using an adaptive partially connected motion model | |
MXPA98001810A (en) | Prediction and coding of planes of the object of video of prediccion bidireccional for digital video entrelaz | |
KR19990013990A (ko) | 이미지 압축 | |
Shum et al. | Video Compression Techniques | |
MXPA98001809A (en) | Estimation and compensation of the movement of planes of the video object for digital video entrelaz |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
NORF | Unpaid initial registration fee |