KR20180006961A - 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치 - Google Patents

비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치 Download PDF

Info

Publication number
KR20180006961A
KR20180006961A KR1020177035893A KR20177035893A KR20180006961A KR 20180006961 A KR20180006961 A KR 20180006961A KR 1020177035893 A KR1020177035893 A KR 1020177035893A KR 20177035893 A KR20177035893 A KR 20177035893A KR 20180006961 A KR20180006961 A KR 20180006961A
Authority
KR
South Korea
Prior art keywords
motion vector
control point
affine
difference value
determining
Prior art date
Application number
KR1020177035893A
Other languages
English (en)
Other versions
KR102297921B1 (ko
Inventor
홍 장
하이타오 양
Original Assignee
후아웨이 테크놀러지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 후아웨이 테크놀러지 컴퍼니 리미티드 filed Critical 후아웨이 테크놀러지 컴퍼니 리미티드
Publication of KR20180006961A publication Critical patent/KR20180006961A/ko
Application granted granted Critical
Publication of KR102297921B1 publication Critical patent/KR102297921B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/521Processing of motion vectors for estimating the reliability of the determined motion vectors or motion vector field, e.g. for smoothing the motion vector field or for correcting motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • H04N19/137Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/53Multi-resolution motion estimation; Hierarchical motion estimation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • H04N19/54Motion estimation other than block-based using feature points or meshes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/57Motion estimation characterised by a search window with variable size or shape
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computing Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치를 제공한다. 비디오 픽쳐 코딩 방법은, 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하는 단계; 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계; 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계 - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 단계를 포함한다. 이런 방식으로, 코딩 복잡도가 감소될 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 적절한 크기의 픽쳐 서브블록이 선택된다.

Description

비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치
본 출원은 중국 특허청에 2015년 5월 15일에 출원된 중국 특허출원 제201510249484.8호("VIDEO PICTURE CODING METHOD, VIDEO PICTURE DECODING METHOD, CODING DEVICE, AND DECODING DEVICE")에 대해 우선권을 주장하는 바이며, 그 전체 내용이 원용에 의해 본 명세서에 포함된다.
본 발명은 비디오 픽쳐 처리 분야에 관한 것으로, 상세하게는 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 디코딩 장치에 관한 것이다.
인터넷 기술이 빠르게 발전하고 사람들의 물질적 및 정신적 문화가 더욱 풍요로워짐에 따라, 인터넷 상의 비디오 애플리케이션에 대한 수요, 특히 고화질 비디오 애플리케이션에 대한 수요가 커지고 있다. 하지만, 고화질 비디오의 데이터량이 매우 크므로, 대역폭이 제한된 인터넷 상에서 고화질 비디오가 전송될 수 있도록 고화질 비디오의 압축 코딩의 문제를 먼저 해결할 필요가 있다. 현재, 2개의 국제 기구, 즉 국제 표준화 기구(International Organization for Standardization, "ISO")/국제전기기술위원회(International Electrotechnical Commission, "IEC") 산하의 동화상 전문가 그룹(Motion Picture Experts Group, "MPEG")과 국제전기통신연합-전기통신 표준화부문(International Telecommunication Union-Telecommunication standardization sector, "ITU-T") 산하의 비디오 코딩 전문가 그룹(Video Coding Experts Group, "VCEG")이 국제 비디오 코딩 표준을 개발을 목표로 하고 있다. 1986년에 설립된 MPEG은 멀티미디어 분야에서 관련 표준을 개발하는 데 전념하고 있다. 여기서, 이들 표준은 스토리지, 브로드캐스트와 텔레비전, 또는 인터넷이나 무선 네트워크 상의 스트리밍 매체 등에 주로 적용된다. ITU-T는 비디오폰과 화상회의 애플리케이션과 같은 실시간 비디오 통신 분야에 관한 비디오 코딩 표준을 주로 개발하고 있다.
지난 수십 년 동안, 다양한 애플리케이션에 관한 국제 비디오 코딩 표준이 성공적으로 개발되어 왔으며, 이들 표준은 주로 비디오 콤팩트 디스크(Video Compact Disc, "VCD")에 적용되는 MPEG-1 표준, 디지털 다기능 디스크(Digital Video Disc, DVD) 및 디지털 비디오 방송(Digital Video Broadcasting, DVB)에 적용되는 MPEG-2 표준, 화상회의에 적용되는 H.261 표준, H.263 표준, 및 H.264 표준, 임의의 형태로 객체의 코딩을 가능하게 하는 MPEGB-4 표준, 최신 고효율 비디오 코딩(High Efficiency Video Coding, "HEVC") 표준을 포함하고 있다.
최신 비디오 코딩 표준(HEVC)과 비교하여, 회전 또는 스케일링 움직임 모델을 포함하는 시퀀스의 경우에는, 선형적으로 변화하는 움직임 벡터 필드(linearly changing motion vector field)에 기반하는 움직임 보상 예측 기술이 코딩 효율을 크게 향상시킬 수 있다. 아핀 변환에 기반하는 기존의 움직임 보상 예측 기술에서는, 픽쳐 블록의 아핀 변환 파라미터가 획득된 후에, 픽쳐 블록 내 각각의 화소의 움직임 벡터가 계산될 필요가 있고, 각각의 화소의 움직임 벡터에 따라 움직임 보상 예측이 수행되며, 그에 따라 각각의 화소의 움직임 보상 예측 신호가 획득된다. 픽쳐 블록 내의 움직임 벡터의 각각의 화소가 서로 다를 수 있으므로, 화소에 대해 움직임 벡터에 따라 서로 다른 연산이 수행될 필요가 있다. 화소 기반의 움직임 보상 예측의 복잡도가 매우 높다. 관련 기술에서는 코딩/디코딩 복잡도를 줄이기 위해, 픽쳐 블록을 픽쳐 서브블록으로 분할하고, 각각의 픽쳐 서브블록의 움직임 벡터를 획득한 다음, 각각의 픽쳐 서브블록의 움직임 보상 예측 신호를 획득하는 것을 추가적으로 시도하고 있다.
하지만, 이 관련 기술에서는, 픽쳐 서브블록의 크기가 고정된다. 픽쳐 서브블록이 지나치게 작으면, 코딩/디코딩 복잡도가 비교적 높아진다. 픽쳐 서브블록이 과도하게 크면, 코딩/디코딩 효율이 저하된다.
본 발명은 적절한 크기의 픽쳐 서브블록을 선택함으로써 코딩/디코딩 복잡도를 줄이면서도 코딩/디코딩 효율을 개선할 수 있는 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치를 제공한다.
제1 양태에 따르면, 비디오 픽쳐 코딩 방법이 제공된다. 상기 비디오 픽쳐 코딩 방법은, 아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하는 단계; 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계; 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하는 단계 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 단계를 포함한다.
제1 양태를 참조하여, 제1 양태의 가능한 제1 구현에서, 상기 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하는 단계는, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계; 및 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계를 포함한다. 여기서, 상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재한다.
제1 양태의 가능한 제1 구현을 참조하여, 제1 양태의 가능한 제2 구현에서, 상기 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계는, 상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계; 및 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하는 단계를 포함한다.
상기 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계는, 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계; 및 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하는 단계를 포함한다.
제1 양태의 가능한 제2 구현을 참조하여, 제1 양태의 가능한 제3 구현에서, 상기 비디오 픽쳐 코딩 방법은, 상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하는 단계를 더 포함한다. 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는, 상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하는 단계를 포함한다.
상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는, 상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하는 단계를 포함한다.
제1 양태의 가능한 제2 구현을 참조하여, 제1 양태의 가능한 제4 구현에서, 상기 비디오 픽쳐 코딩 방법은, 상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하는 단계를 더 포함한다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는, 상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하는 단계; 및 상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하는 단계를 포함한다.
상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는, 상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하는 단계; 및 상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하는 단계를 포함한다.
제1 양태의 가능한 제2 구현을 참조하여, 제1 양태의 가능한 제5 구현에서, 상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계, 및 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -; 상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계; 상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및 상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하는 단계를 포함한다.
제1 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제6 구현에서, 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계를 포함한다.
제1 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제7 구현에서, 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계를 포함한다.
제1 양태의 가능한 제1 내지 제7 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제8 구현에서, 상기 제1 제어점과 상기 제3 제어점은 동일한 화소이다.
제1 양태의 가능한 제1 내지 제8 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제9 구현에서, 상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점이다.
제1 양태의 가능한 제7 구현을 참조하여, 제1 양태의 가능한 제10 구현에서, 상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4이다.
제1 양태, 또는 제1 양태의 가능한 제1 내지 제10 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제11 구현에서, 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계는, 사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하는 단계; 또는 상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계를 포함한다. 여기서, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
제1 양태, 또는 제1 양태의 가능한 제1 내지 제11 구현 중 어느 하나를 참조하여, 제1 양태의 가능한 제12 구현에서, 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 단계는, 상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하는 단계; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하는 단계; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하는 단계; 및 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하는 단계를 포함한다.
제1 양태의 가능한 제12 구현을 참조하여, 제1 양태의 가능한 제13 구현에서, 상기 비디오 픽쳐 코딩 방법은, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하는 단계를 더 포함한다. 여기서, 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
제1 양태의 가능한 제13 구현을 참조하여, 제1 양태의 가능한 제14 구현에서, 상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
제2 양태에 따르면, 비디오 픽쳐 디코딩 방법이 제공된다. 상기 비디오 픽쳐 디코딩 방법은, 아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하는 단계; 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계; 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하는 단계 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계를 포함한다.
제2 양태를 참조하여, 제2 양태의 가능한 제1 구현에서, 상기 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하는 단계는, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계; 및 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계를 포함한다. 여기서, 상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재한다.
제2 양태의 가능한 제1 구현을 참조하여, 제2 양태의 가능한 제2 구현에서, 상기 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계는, 상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계; 및 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하는 단계를 포함한다.
상기 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계는, 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계; 및 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하는 단계를 포함한다.
제2 양태의 가능한 제2 구현을 참조하여, 제2 양태의 가능한 제3 구현에서, 상기 비디오 픽쳐 디코딩 방법은, 상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하는 단계를 더 포함한다. 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는, 상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하는 단계를 포함한다.
상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는, 상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하는 단계를 포함한다.
제2 양태의 가능한 제2 구현을 참조하여, 제2 양태의 가능한 제4 구현에서, 상기 비디오 픽쳐 디코딩 방법은, 상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하는 단계를 더 포함하다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는, 상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하는 단계; 및 상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하는 단계를 포함한다.
상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는, 상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하는 단계; 및 상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하는 단계를 포함한다.
제2 양태의 가능한 제2 구현을 참조하여, 제2 양태의 가능한 제5 구현에서, 상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이다.
상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계, 및 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -; 상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계; 상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및 상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하는 단계를 포함한다.
제2 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제6 구현에서, 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계를 포함한다.
제2 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제7 구현에서, 상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계를 포함한다.
제2 양태의 가능한 제1 내지 제7 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제8 구현에서, 상기 제1 제어점과 상기 제3 제어점은 동일한 화소이다.
제2 양태의 가능한 제1 내지 제8 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제9 구현에서, 상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점이다.
제2 양태의 가능한 제7 구현을 참조하여, 제2 양태의 가능한 제10 구현에서, 상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4이다.
제2 양태, 또는 제2 양태의 가능한 제1 내지 제10 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제11 구현에서, 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계는, 사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하는 단계; 또는 상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계를 포함한다. 여기서, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
제2 양태, 또는 제2 양태의 가능한 제1 내지 제11 구현 중 어느 하나를 참조하여, 제2 양태의 가능한 제12 구현에서, 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계는, 상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하는 단계; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하는 단계; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하는 단계; 및 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하는 단계를 포함한다.
제2 양태의 가능한 제12 구현을 참조하여, 제2 양태의 가능한 제13 구현에서, 상기 비디오 픽쳐 디코딩 방법은, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하는 단계를 더 포함한다. 여기서, 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
제2 양태의 가능한 제13 구현을 참조하여, 제2 양태의 가능한 제14 구현에서, 상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
제3 양태에 따르면, 코딩 장치가 제공된다. 상기 코딩 장치는, 아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하도록 구성된 제1 결정 모듈; 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈; 상기 제1 결정 모듈에 의해 결정된 상기 움직임 벡터 차분값, 상기 제2 결정 모듈에 의해 결정된 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하도록 구성된 제3 결정 모듈 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및 상기 제3 결정 모듈에 의해 결정된 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하도록 구성된 코딩 모듈을 포함한다.
제3 양태를 참조하여, 제3 양태의 가능한 제1 구현에서, 상기 제1 결정 모듈은 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재한다.
제3 양태의 가능한 제1 구현을 참조하여, 제3 양태의 가능한 제2 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고; 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하며; 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
제3 양태의 가능한 제2 구현을 참조하여, 제3 양태의 가능한 제3 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하며; 상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하도록 구성된다.
제3 양태의 가능한 제2 구현을 참조하여, 제3 양태의 가능한 제4 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하고; 상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하며; 상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하고; 상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하며; 상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하도록 구성된다.
제3 양태의 가능한 제2 구현을 참조하여, 제3 양태의 가능한 제5 구현에서, 상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이다.
상기 제1 결정 모듈은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -; 상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하도록 구성된다.
제3 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제6 구현에서, 상기 제3 결정 모듈은 구체적으로, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
제3 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제7 구현에서,
상기 제3 결정 모듈은 구체적으로, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
제3 양태의 가능한 제1 내지 제7 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제8 구현에서, 상기 제1 제어점과 상기 제3 제어점은 동일한 화소이다.
제3 양태의 가능한 제1 내지 제8 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제9 구현에서, 상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점이다.
제3 양태의 가능한 제7 구현을 참조하여, 제3 양태의 가능한 제10 구현에서, 상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4이다.
제3 양태, 또는 제3 양태의 가능한 제1 내지 제10 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제11 구현에서, 상기 제2 결정 모듈은 구체적으로, 사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
제3 양태, 또는 제3 양태의 가능한 제1 내지 제11 구현 중 어느 하나를 참조하여, 제3 양태의 가능한 제12 구현에서, 상기 코딩 모듈은 구체적으로, 상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하고; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하도록 구성된다.
제3 양태의 가능한 제12 구현을 참조하여, 제3 양태의 가능한 제13 구현에서, 상기 코딩 장치는, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈을 더 포함한다. 여기서, 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
제3 양태의 가능한 제13 구현을 참조하여, 제1 양태의 가능한 제14 구현에서, 상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
제4 양태에 따르면, 디코딩 장치가 제공된다. 상기 디코딩 장치는, 아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하도록 구성된 제1 결정 모듈; 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈; 상기 제1 결정 모듈에 의해 결정된 상기 움직임 벡터 차분값, 상기 제2 결정 모듈에 의해 결정된 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하도록 구성된 제3 결정 모듈 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및 상기 제3 결정 모듈에 의해 결정된 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하도록 구성된 디코딩 모듈을 포함한다.
제4 양태를 참조하여, 제4 양태의 가능한 제1 구현에서, 상기 제1 결정 모듈은 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재한다.
제4 양태의 가능한 제1 구현을 참조하여, 제4 양태의 가능한 제2 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고; 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하며; 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
제4 양태의 가능한 제2 구현을 참조하여, 제4 양태의 가능한 제3 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하며; 상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하도록 구성된다.
제4 양태의 가능한 제2 구현을 참조하여, 제4 양태의 가능한 제4 구현에서, 상기 제1 결정 모듈은 구체적으로, 상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하고; 상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하며; 상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하고; 상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하며; 상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하도록 구성된다.
제4 양태의 가능한 제2 구현을 참조하여, 제4 양태의 가능한 제5 구현에서, 상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이다.
상기 제1 결정 모듈은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -; 상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하도록 구성된다.
제4 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제6 구현에서, 상기 제3 결정 모듈은 구체적으로, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
제4 양태의 가능한 제3 내지 제5 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제7 구현에서, 상기 제3 결정 모듈은 구체적으로, 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
제4 양태의 가능한 제1 내지 제7 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제8 구현에서, 상기 제1 제어점과 상기 제3 제어점은 동일한 화소이다.
제4 양태의 가능한 제1 내지 제8 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제9 구현에서, 상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점이다.
제4 양태의 가능한 제7 구현을 참조하여, 제4 양태의 가능한 제10 구현에서, 상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4이다.
제4 양태, 또는 제4 양태의 가능한 제1 내지 제10 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제11 구현에서, 상기 제2 결정 모듈은 구체적으로, 사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
제4 양태, 또는 제4 양태의 가능한 제1 내지 제11 구현 중 어느 하나를 참조하여, 제4 양태의 가능한 제12 구현에서, 상기 디코딩 모듈은 구체적으로, 상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하고; 상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하도록 구성된다.
제4 양태의 가능한 제12 구현을 참조하여, 제4 양태의 가능한 제13 구현에서, 상기 디코딩 장치는, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈을 더 포함한다. 여기서, 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
제4 양태의 가능한 제13 구현을 참조하여, 제4 양태의 가능한 제14 구현에서, 상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
전술한 기술적 해결책에 기초하여, 본 발명의 장치 실시예의 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩에 따르면, 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기가 아핀 픽쳐 블록의 움직임 벡터 차분값, 아핀 픽쳐 블록의 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 결정된다. 이런 방식으로, 코딩/디코딩 복잡도가 줄어들 수 있으면서 또한 코딩/디코딩 효율이 향상될 수 있도록, 코딩/디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
이하, 본 발명의 실시예의 기술적 해결책을 보다 명확하게 설명하기 위해, 본 발명의 실시예를 설명하는 데 필요한 첨부 도면에 대해 간략히 설명한다. 명백히, 다음의 설명의 첨부 도면은 본 발명의 일부 실시예를 나타낼 뿐이며, 당업자라면 창의적인 노력 없이 이들 첨부 도면으로부터 다른 도면을 여전히 도출해낼 수 있을 것이다.
도 1은 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 개략적인 흐름도이다.
도 2는 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 다른 개략적인 흐름도이다.
도 3은 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 또 다른 개략적인 흐름도이다.
도 4는 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 또 다른 개략적인 흐름도이다.
도 5는 본 발명의 일 실시예에 따른 아핀 픽쳐 블록과 제어점의 개략도이다.
도 6은 본 발명의 일 실시예에 따른 아핀 픽쳐 블록 내의 3개의 중첩하지 않는 화소의 개략도이다.
도 7은 본 발명의 일 실시예에 따른 아핀 픽쳐 블록의 다른 개략도이다.
도 8은 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 또 다른 개략적인 흐름도이다.
도 9는 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 또 다른 개략적인 흐름도이다.
도 10은 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 또 다른 개략적인 흐름도이다.
도 11은 본 발명의 일 실시예에 따른 아핀 픽쳐 블록의 또 다른 개략도이다.
도 12는 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 개략적인 흐름도이다.
도 13은 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 다른 개략적인 흐름도이다.
도 14는 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 또 다른 개략적인 흐름도이다.
도 15는 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 또 다른 개략적인 흐름도이다.
도 16은 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 또 다른 개략적인 흐름도이다.
도 17은 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 또 다른 개략적인 흐름도이다.
도 18은 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 또 다른 개략적인 흐름도이다.
도 19는 본 발명의 일 실시예에 따른 코딩 장치의 개략적인 블록도이다.
도 20은 본 발명의 일 실시예에 따른 코딩 장치의 다른 개략적인 블록도이다.
도 21은 본 발명의 일 실시예에 따른 디코딩 장치의 개략적인 블록도이다.
도 22는 본 발명의 일 실시예에 따른 디코딩 장치의 다른 개략적인 블록도이다.
도 23은 본 발명의 다른 실시예에 따른 코딩 장치의 개략적인 블록도이다.
도 24는 본 발명의 다른 실시예에 따른 디코딩 장치의 개략적인 블록도이다.
이하, 본 발명의 실시예의 첨부 도면을 참조하여 본 발명의 실시예의 기술적 해결책에 대해 명확하고 완전하게 설명한다. 명백히, 설명되는 실시예는 본 발명의 실시예의 전부가 아니라 일부에 불과하다. 창작적인 노력 없이 본 발명의 실시예에 기반하여 당업자에 의해 획득되는 다른 모든 실시예는 본 발명의 보호 범위에 속할 것이다.
도 1은 본 발명의 일 실시예에 따른 비디오 픽쳐 코딩 방법의 개략적인 흐름도이다. 도 1에 도시된 비디오 픽쳐 코딩 방법은 코딩 장치, 예를 들어 인코더에 의해 수행될 수 있다. 구체적으로, 도 1에 도시된 바와 같이, 비디오 픽쳐 코딩 방법(1000)은 다음의 단계를 포함한다.
S1100. 아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정한다.
S1200. 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정한다.
S1300. 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정한다. 여기서, 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소이다.
S1400. 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다.
구체적으로, 코딩 장치는 결정된 제어점에 따라 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고, 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며, 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다.
따라서, 본 발명의 본 실시예에 따른 비디오 픽쳐 코딩 방법에서, 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 줄어들 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
본 발명의 본 실시예에서, 아핀(Affine) 픽쳐 블록은 모든 단위의 움직임 벡터가 동일한 아핀 모델, 예를 들어 동일한 파라미터, 예를 들어 파라미터의 동일한 그룹을 나타낼 수 있는 동일한 아핀 모델을 따르는 픽쳐 블록이라고 이해해야 한다. 이 단위는 화소의 그룹, 예를 들어 화소일 수 있거나, 또는 1×3 또는 2×4와 같은 블록 구조일 수 있다. 본 발명에서는 이에 대해 제한하지 않는다.
본 발명의 본 실시예에서, 아핀 움직임 보상(Affine Motion Compensation, "Affine-MC") 픽쳐 서브블록은 아핀 블록을 분할하여 획득되고 움직임 보상 예측을 수행하는 데 사용되는 픽쳐 서브블록이고, 아핀-MC 블록은 동일한 크기 또는 상이한 크기를 가질 수 있다고 이해해야 한다. 본 발명에서는 이에 대해 제한하지 않는다.
본 발명의 본 실시예에서, 어느 중첩하지 않는 화소가 아핀 블록의 움직임 벡터 차분값을 결정하기 위한 제어점으로서 선택될 수 있다고 또한 이해해야 한다. 본 발명에서는 이에 대해 제한하지 않는다.
바람직하게는, 도 2에 도시된 바와 같이, S1100은 다음의 단계를 포함한다.
S1101. 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정한다.
S1102. 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정한다.
제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
본 발명의 본 실시예에서, 움직임 벡터 차분값의 제1 성분은 움직임 벡터 차분값의 수평 성분이고, 움직임 벡터 차분값의 제2 성분은 움직임 벡터 차분값의 수직 성분이라고 이해해야 한다.
본 발명의 본 실시예에서, 제1, 제2, 제3, 및 제4는 화소를 구별하기 위한 것일 뿐이며, 본 발명의 보호 범위에 대한 어떠한 제한으로 해석되지 말아야 한다는 것 역시 이해해야 한다. 예를 들어, 제1 제어점은 제2 제어점이라고도 할 수 있으며, 제2 제어점은 제1 제어점이 될 수 있다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제3 제어점은 동일한 화소이다. 즉, 선택된 제어점의 개수가 3이고, 3개의 제어점 중 하나가 다른 2개의 제어점 중 하나의 제어점으로서 동일한 수평선 상에 위치하며, 2개의 제어점 중 나머지 제어점으로서 동일한 수직선 상에 위치한다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점은 아핀 블록의 꼭지점이다. 하나의 아핀 블록의 4개의 꼭지점이 각각 좌측 상부 모서리의 꼭지점, 좌측 하부 모서리의 꼭지점, 우측 상부 모서리의 꼭지점, 및 우측 하부 모서리의 꼭지점으로서 표시된다고 가정하면, 2개의 직교 방향에 위치하는 어떤 3개의 꼭지점이 아핀 블록의 움직임 벡터 차분값을 결정하기 위해 선택될 수 있다. 예를 들어, 좌측 상부 모서리의 꼭지점, 좌측 하부 모서리의 꼭지점, 우측 상부 모서리의 꼭지점이 선택될 수 있거나, 또는 좌측 상부 모서리의 꼭지점, 우측 상부 모서리의 꼭지점, 및 우측 하부 모서리의 꼭지점이 선택될 수 있다. 본 발명에서는 이에 대해 제한하지 않는다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점의 움직임 벡터의 2개 방향의 성분 중 어느 한 방향의 성분 간의 차분값이 아핀 블록의 움직임 벡터 차분값의 제1 성분으로서 결정될 수 있고, 제3 제어점과 제4 제어점의 움직임 벡터의 2개의 방향의 성분 중 어느 한 방향의 성분 간의 차이가 아핀 블록의 움직임 벡터 차분값의 제2 성분으로서 결정될 수 있거나; 또는 코딩 복잡도와 코딩 효율을 위한 실제 요구사항에 따라, 제1 제어점과 제2 제어점의 움직임 벡터의 2개 방향의 성분의 2개의 차분값이 제1 성분으로서 선택되어 결정될 수 있고, 제3 제어점과 제4 제어점의 움직임 벡터의 2개 방향의 성분의 2개의 차분값 간의 수치 값이 제2 성분으로서 선택되어 결정될 수 있다. 본 발명에서는 이에 대해 제한하지 않는다.
선택적으로, 도 3에 도시된 바와 같이, S1101은 구체적으로 다음의 단계를 포함한다.
S1103. 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정한다.
S1104. 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정한다.
따라서, 도 4에 도시된 바와 같이, S1102는 구체적으로 다음의 단계를 포함한다.
S1105. 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정한다.
S1106. 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정한다.
즉,
Figure pct00001
Figure pct00002
가 위치
Figure pct00003
에서 화소의 움직임 벡터의 수평 성분과 수직 성분을 나타내기 위해 사용되면, 수식 (1) 및 수식 (2)에 따라 아핀 블록의 움직임 벡터 차분값이 결정될 수 있다.
Figure pct00004
Figure pct00005
여기서, max는 최대값을 나타내고,
Figure pct00006
은 아핀 블록의 움직임 벡터 차분값의 수평 성분을 나타내고,
Figure pct00007
은 아핀 블록의 움직임 벡터 차분값의 수직 성분을 나타내며,
Figure pct00008
는 제1 제어점과 제2 제어점 간의 제1 수평 거리를 나타내고,
Figure pct00009
는 제3 제어점과 제4 제어점 간의 제1 수직 거리를 나타낸다.
본 발명의 본 실시예에서, 선택적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터가 결정될 수 있고, 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있다.
따라서, S1103은 구체적으로, 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계이다.
S1105는 구체적으로, 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계이다.
전술한 과정의 시퀀스 번호가 실행 시퀀스를 의미하지 않는다고 이해해야 한다. 프로세스의 실행 시퀀스가 기능 및 프로세스의 내부 로직에 따라 결정되어야 하고, 본 발명의 실시예의 구현 과정에 대한 어떠한 제한으로 해석되지 말아야 한다.
본 발명의 본 실시예에서, 선택적으로, 아핀 변환 모델이 종래 기술의 6-파라미터 아핀 변환 모델일 수 있거나, 또는 4-파라미터 또는 2-파라미터 아핀 변환 모델일 수 있다. 6-파라미터 아핀 변환 모델에서는,
Figure pct00010
가 현재 픽처 내의 화소
Figure pct00011
의 좌표이고,
Figure pct00012
가 기준 픽쳐 내에 있으면서 또한 화소
Figure pct00013
에 매칭되는 화소
Figure pct00014
의 좌표이며,
Figure pct00015
Figure pct00016
는 아핀 변환 파라미터라고 추정한다. 아핀 변환 파라미터가 알려져 있으면, 기준 픽쳐 내의 화소
Figure pct00017
의 위치
Figure pct00018
가 획득될 수 있고, 따라서 화소의 예측 신호가 기준 화면으로부터 획득될 수 있다.
Figure pct00019
Figure pct00020
일반적으로, 아핀 변환 파라미터는 픽쳐 블록 내의 일부 화소의 움직임 벡터에 따라 계산을 통해 획득될 수 있고, 움직임 벡터의 수평 성분과 수직 성분은 각각 수식 (5)와 수식 (6)으로 나타낼 수 있다.
Figure pct00021
Figure pct00022
각각 수식 (7)과 수식 (8)로 나타낸 바와 같이, 좌표가 (x, y)인 화소의 움직임 벡터의 수평 성분과 수직 성분을 얻기 위해, 수식 (3)이 수식 (5)에 대입되ㅁ며 수식 (4)는 수식 (6)에 대입된다.
Figure pct00023
Figure pct00024
수식 (1)과 수식 (2)가 각각 수식 (9)와 수식 (10)으로 변환될 수 있도록, 수식 (7)이 수식 (1)에 대입되고, 수식 (8)이 수식 (2)에 대입된다.
Figure pct00025
Figure pct00026
아핀 변환 파라미터(
Figure pct00027
Figure pct00028
), 및 제어점 간의 거리를 결정함으로써, 아핀 블록의 움직임 벡터 차분값의 제1 성분과 제2 성분이 결정될 수 있다.
4-파라미터 아핀 변환 모델 또는 2-파라미터 아핀 변환 모델이 사용되는 경우, 움직임 벡터 차분값을 결정하기 위한 방법은 6-파라미터 아핀 변환 모델이 사용된 경우의 결정 방법과 기본적으로 동일하다고 이해해야 한다. 간략화를 위해, 여기서는 세부사항에 대해 다시 설명하지 않는다.
본 발명의 본 실시예에서, 선택적으로, 코딩 과정 동안, 아핀 변환 파라미터는 이 모델의 움직임 보상 예측 신호가 최적인지 여부를 판정하기 위해 각각의 계수를 반복적으로 계산함으로써, 예를 들어 계수 a에 1을 더함으로써 획득될 수 있다. 또는, 아핀 변환 파라미터는 인접한 아핀 블록의 아핀 변환 계수에 따라 미분을 통해 획득될 수 있다. 하지만, 본 발명은 이에 제한되지 않는다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터가 결정될 수 있다.
따라서, S1103은 구체적으로, 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하는 단계; 및 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하는 단계이다.
S1105은 구체적으로, 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하는 단계; 및 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하는 단계이다.
구체적으로, 제어점의 움직임 벡터는 직접 결정될 수 있다. 움직임 벡터의 성분 간의 차분값을 계산함으로써, 아핀 블록의 움직임 벡터 차분값의 제1 성분과 제2 성분은 직접 획득될 수 있다.
예를 들어, 도 5는 본 발명의 일 실시예에 따른 아핀 픽쳐 블록과 제어점의 개략도이다. 2개의 제어점(A, B)는 동일한 수평선 상에 있고, 거리
Figure pct00029
를 가진다. 2개의 제어점(C, D)는 동일한 수직선 상에 있고, 거리
Figure pct00030
를 가진다. 제어점(A, B, C, D)의 움직임 벡터가 알려져 있으면, 아핀 블록의 움직임 벡터 차분값의 제1 성분과 제2 성분은 수식 (11)과 수식 (12)에 따라 결정될 수 있다.
Figure pct00031
Figure pct00032
본 발명의 본 실시예에서, 선택적으로, 제어점(A, C)은 동일한 화소일 수 있다.
본 발명의 본 실시예에서, 선택적으로, 제어점(A, B, C, D)은 아핀 블록의 꼭지점일 수 있다. 이 경우에, 제어점(A)와 제어점(B) 사이의 거리는 아핀 블록의 폭(W)이고, 제어점(C)와 제어점(D) 사이의 거리는 아핀 블록의 높이(H)이다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
S1103과 S1105은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계; 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하는 단계이다.
구체적으로, A, B, 및 C가 픽쳐 블록 내의 임의의 3개의 중첩하지 않는 화소라고 가정하면, 도 6에 3개의 화소의 위치가 도시되어 있으며, 3개의 화소의 움직임 벡터는 각각
Figure pct00033
,
Figure pct00034
, 및
Figure pct00035
이다. 화소 A와 화소 B 사이의 가로 방향의 거리가
Figure pct00036
이고, 세로 방향의 거리는
Figure pct00037
이다. 화소 A와 화소 C 사이의 가로 방향의 거리가
Figure pct00038
이고, 세로 방향의 거리는
Figure pct00039
이다. 가로 방향에서 화소 B와 화소 C 사이의 거리가
Figure pct00040
이고, 세로 방향의 거리는
Figure pct00041
이다. 가로 방향에서 인접한 2개의 화소의 움직임 벡터의 수평 성분 차분값은 각각
Figure pct00042
Figure pct00043
이고, 세로 방향에서 인접한 2개의 화소의 움직임 벡터의 수직 성분 차분값은 각각
Figure pct00044
Figure pct00045
이라고 추정된다. 픽쳐 블록 내의 움직임 벡터가 선형적으로 변하기 때문에,
Figure pct00046
,
Figure pct00047
,
Figure pct00048
, 및
Figure pct00049
은 화소(A, B, C)의 움직임 벡터를 결정함으로써 결정될 수 있다. 이런 방식으로, 픽쳐 블록 내의 인접한 화소의 움직임 벡터 차분값이 결정될 수 있고, 구체적으로 수식 (13) 내지 수식 (16)에 따라 결정될 수 있다.
Figure pct00050
Figure pct00051
Figure pct00052
Figure pct00053
또는, 수식 (13)과 수식 (14) 그리고 수식 (17)과 수식 (18)에 따라 결정될 수 있다.
Figure pct00054
Figure pct00055
본 발명의 본 실시예에서, 선택적으로, 코딩 장치는 움직임 추정 검색을 수행함으로써 모든 제어점의 움직임 벡터를 획득할 수 있고; 인접한 픽쳐 블록으로부터 모든 제어점의 움직임 벡터를 획득할 수 있으며; 아핀 변환 모델에 따라 모든 제어점의 움직임 벡터를 계산할 수 있고; 움직임 추정 검색을 수행함으로써 일부 제어점의 움직임 벡터를 획득하고, 인접한 픽쳐 블록으로부터 다른 제어점의 움직임 벡터를 획득할 수 있으며; 아핀 움직임 추정 검색을 수행함으로써 일부 제어점의 움직임 벡터를 획득하고, 아핀 변환 모델에 따른 계산을 통해 다른 제어점의 움직임 벡터를 획득할 수 있거나; 또는 인접한 픽쳐 블록으로부터 일부 제어점의 움직임 벡터를 획득하고, 아핀 변환 모델에 따라 다른 제어점의 움직임 벡터를 계산할 수 있다. 하지만, 본 발명은 이에 제한되지 않는다.
선택적으로, S1200에서, 사전 설정된 제3 값이 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정될 수 있거나; 또는 아핀 픽쳐 블록의 움직임 벡터 정밀도는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 결정될 수 있다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
구체적으로, 아핀 블록의 움직임 벡터의 값이 정수일 수 있다. 이때, 움직임 벡터는 정수-화소 정밀도(integer-pixel precision)이다. 즉, 화소 정밀도가 1이다. 또는, 움직임 벡터의 값이 정수가 아닐 수 있다. 이때, 모션 벡터는 1/2, 1/4 또는 1/8과 같은 정밀도를 포함하여 서브 픽셀 정밀도(sub-pixel precision)이다. 도 7은 4×4 픽쳐 블록을 나타낸다. 여기서,
Figure pct00056
는 정수-화소 위치에서의 화소를 나타내고, 캡쳐된 픽쳐는 정수-화소 위치에서만 화소를 가진다. O은 1/2 정밀도 위치에서의 화소를 나타내고, 정수-화소 위치의 화소를 보간함으로써 획득될 필요가 있다. 다른 정밀도 위치에서의 화소의 값은 정수-화소 정밀도 위치에서의 화소 또는 1/2 정밀도 위치에서의 화소를 추가적으로 보간함으로써 획득될 필요가 있다. 현재 화소의 움직임 벡터가 정수라면, 움직임 벡터는 기준 화면에서의
Figure pct00057
의 위치를 가리킨다. 현재 화소의 움직임 벡터가 1/2 정밀도이면, 움직임 벡터는 기준 화면에서의 O의 위치를 가리킨다.
아핀 블록의 움직임 벡터 정밀도는 아핀 블록 내의 모든 화소의 움직임 벡터의 가장 높은 정밀도이다. 아핀 블록의 움직임 벡터 정밀도, 예를 들어 정수-화소 정밀도, 또는 1/2, 1/4, 1/8, 또는 1/16와 같은 정밀도가 사전 설정될 수 있다. 또는, 움직임 벡터 정밀도는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 결정될 수 있다. 예를 들어, 인접한 픽쳐가 비교적 매끄러우면, 현재 아핀 블록 역시 비교적 매끄럽다고 예측될 수 있다. 따라서, 1/8 또는 1/16 정밀도와 같은 더 높은 움직임 벡터 정밀도가 선택될 수 있다. 매끄럽지 않으면, 정수-화소 정밀도 또는 1/2 정밀도와 같은 더 낮은 움직임 벡터 정밀도가 선택될 수 있다. 획득된 정밀도는
Figure pct00058
로 표시된다.
선택적으로, 도 8에 도시된 바와 같이, S1300은 구체적으로 다음의 단계를 포함한다.
S1301. 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
S1302. 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
구체적으로, 일반적으로 획득된 움직임 벡터 차분값(
Figure pct00059
,
Figure pct00060
)이 비교적 작은데, 이는 각각의 화소의 움직임 벡터의 정밀도가 지나치게 높다는 것, 예를 들어 1/32 또는 1/64이라는 것을 나타낸다. 지나치게 높은 모션 벡터 정밀도는 비디오의 압축 효율에 거의 기여하지 않으며, 엄청난 양의 계산을 유발한다. 따라서, 각각의 아핀-MC 블록의 움직임 벡터 정밀도가
Figure pct00061
에 도달한 것을 보장하기 위해, 아핀 블록은 이전에 얻은 추정 움직임 벡터 정밀도(
Figure pct00062
)에 따라 복수의 아핀-MC 블록으로 분할된다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점 간의 수평 거리가
Figure pct00063
이고, 제3 제어점과 제4 제어점 간의 수직 거리가
Figure pct00064
라고 가정하면, 또한 아핀-MC 블록의 폭이
Figure pct00065
이고 아핀-MC 블록의 높이가
Figure pct00066
라고 가정하면,
Figure pct00067
Figure pct00068
는 수식 (19)에 따라 결정될 수 있다.
Figure pct00069
Figure pct00070
이 수식은 다음의 수식과 같다.
Figure pct00071
Figure pct00072
본 발명의 본 실시예에서, 선택적으로, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점이 아핀 블록의 꼭지점인 경우, 제1 제어점과 제2 제어점 간의 수평 거리는 아핀 블록의 폭(
Figure pct00073
)이고, 제3 제어점과 제4 제어점 간의 수직 거리는 아핀 블록의 높이(
Figure pct00074
)이다. 이 경우에, 아핀-MC 블록의 폭(
Figure pct00075
)와 높이(
Figure pct00076
)는 수식 (20)에 따라 결정될 수 있다.
Figure pct00077
Figure pct00078
이 수식은 다음 수식과 같다.
Figure pct00079
Figure pct00080
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점이 인접한 제어점이고, 제3 제어점과 제4 제어점이 인접한 제어점인 경우, 제1 제어점과 제2 제어점 간의 제1 수평 거리는 1이고, 즉 제1 제어점은 정수 개수의 화소만큼 제2 제어점과 떨어져 있고; 제3 제어점과 제4 제어점 간의 제1 수직 거리는 1이며, 즉 제3 제어점은 정수 개수의 화소만큼 제4 제어점과 떨어져 있다. 이 경우에, 수식 (19)는 수식 (21)로 단순화시킬 수 있다.
Figure pct00081
Figure pct00082
이 수식은 다음 수식과 같다.
Figure pct00083
Figure pct00084
따라서, 본 발명의 본 실시예에 따른 비디오 픽쳐 코딩 방법에서, 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이러한 방식으로, 코딩 과정에서 적절한 크기의 화상 서브 블록이 선택되므로, 코딩 복잡성이 감소될 수 있으면서 또한 코딩 효율이 개선될 수 있고, 아핀 변환에서의 움직임 보상 예측 효율이 유지된다.
선택적으로, 도 9에 도시된 바와 같이, S1300은 다음의 단계를 포함한다.
S1303. 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나; 또는
움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
S1304. 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나; 또는
움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
구체적으로, 코딩 과정에서의 하드웨어 구현의 경우, 아핀-MC 블록의 폭와 높이에 대해 하한이 설정될 수 있다. 계산된 폭 또는 높이가 사전 설정된 하한보다 작은 경우, 사전 설정된 하한은 아핀-MC 블록의 폭이나 높이로서 결정된다. 바람직하게는, 하한은 4로 설정될 수 있지만, 실제 요구사항에 따라 다른 수치 값으로도 설정될 수 있다. 예를 들어, 폭의 하한이 2로 설정될 수 있고, 높이의 지정된 값은 3으로 설정되거나; 또는 폭의 하한이 1로 설정되고, 높이의 지정된 값은 2로 설정된다. 본 발명에서는 이에 대해 제한하지 않는다.
선택적으로, 도 10에 도시된 바와 같이, S1400은 다음의 단계를 포함한다.
S1401. 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정한다.
S1402. 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정한다.
S1403. 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정한다.
S1404. 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩한다.
본 발명의 본 실시예에서, 각각의 아핀-MC 블록이 복수의 화소를 포함할 수 있으며, 화소의 움직임 벡터가 각각의 아핀-MC로부터 아핀-MC 블록의 움직임 벡터로서 선택될 필요가 있음을 이해해야 한다.
선택적으로, S1401에서, 아핀-MC 블록의 중심 위치에 있는 화소의 움직임 벡터가 아핀-MC 블록의 움직임 벡터로서 선택될 수 있고; 아핀-MC 블록 내의 모든 화소의 움직임 벡터의 평균값이 아핀-MC 블록의 움직임 벡터로서 사용될 수 있거나; 또는 좌측 아핀-MC 블록의 상부 모서리에 있는 화소의 움직임 벡터가 아핀-MC 블록의 움직임 벡터로서 선택될 수 있다. 하지만, 본 발명은 이에 제한되지 않는다.
본 발명의 본 실시예에서, 선택적으로, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호가 필터링되고, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
본 발명의 본 실시예에서, 선택적으로, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
구체적으로, 도 11에 도시된 바와 같이, 굵은 실선의 블록이 아핀 블록을 나타내고, 얇은 실선의 블록이 아핀-MC 블록을 나타내며, 쇄선의 블록이 인접한 아핀-MC 블록의 경계에 있는 화소를 나타내고, 십자(cross)는 화소를 나타낸다. 도 11의 쇄선 블록의 영역이 아핀-MC 블록의 경계에 있는 2개의 행이나 2개의 열의 인접한 아핀-MC 블록의 화소를 포함하거나, 또는 1개의 행 또는 하나의 열, 또는 아핀-MC 블록의 경계에 있는 3개의 행 또는 3개의 열을 포함할 수 있다. 인접한 아핀-MC 블록의 움직임 벡터가 서로 다를 수 있기 때문에, 기준 픽쳐로부터 획득된 예측 신호가 기준 픽쳐에서 인접하지 않는다. 이는 인접한 아핀-MC 블록의 경계에서 예측 신호의 불연속성을 초래하며, 따라서 잔차의 불연속성을 초래하며, 잔차의 코딩 효율에 영향을 미친다. 따라서, 아핀-MC 블록의 경계에서 움직임 보상 예측 신호를 필터링하는 것을 고려한다.
복원되는 신호는 일반적으로, 복원된 잔차 신호를 움직임 보상 예측 신호에 더함으로써 획득된다. 일반적으로, 손실 코딩이 잔차 신호에 사용된다. 이는 복원된 잔차 신호와 원래의 잔차 신호 간의 왜곡을 초래한다. 인접한 아핀-MC 블록의 경계에 있는 화소의 왜곡 방향이 일치하지 않을 수 있다. 예를 들어, 제1 아핀-MC 블록의 우측 화소가 왜곡으로 인해 커지고, 인접한 우측 아핀-MC 블록의 좌측 화소가 왜곡으로 인해 작아진다. 이는 아핀-MC 블록의 복원된 픽셀의 경계에 있는 픽셀 값의 불연속성을 초래하고, 주관적 및 객관적인 효과를 손상시킨다. 따라서, 복원되는 신호는 필터링될 필요가 있다.
본 발명의 본 실시예에서, 선택적으로, 경계 영역에 있는 픽셀값이 더 매끄럽게 바뀔 수 있도록, 저역통과 필터를 이용하여 필터링이 수행될 수 있다. 예를 들어, 가우스 필터(Gauss filter)를 이용하여 필터링이 수행된다. 하지만, 본 발명은 이에 제한되지 않는다.
본 발명의 본 실시예에서, 선택적으로, 중첩 블록 움직임 보상(Overlapped block motion compensation, "OBMC") 방법을 이용하여 필터링이 수행될 수 있다. 필터링될 화소에 인접한 아핀-MC 블록의 움직임 벡터를 이용하여 필터링될 화소에 대해 움직임 보상 예측이 수행되고, 획득되는 움직임 보상 예측 신호 및 필터링될 화소의 움직임 벡터를 이용하여 획득되는 움직임 보상 예측 신호에 대해 가중 평균이 수행됨으로써, 최종 움직임 보상 예측 신호를 획득한다.
종래 기술에 비해 본 발명의 본 실시예의 유리한 효과를 더 잘 입증하기 위해, 본 발명의 본 실시예의 방법과 종래 기술의 방법이 코딩을 수행하기 위해 사용되는 경우의 LDP 테스트 구조가 코딩 복잡도와 코딩 효율을 테스트하기 위해 사용된다. 그 결과를 표 1에 나타냈다.
(표 1)
Figure pct00085
표 1에서 알 수 있는 바와 같이, 본 발명의 본 실시예의 비디오 픽쳐 코딩 방법을 이용함으로써 코딩 효율을 향상시키면서 코딩 시간을 줄일 수 있다.
따라서, 본 발명의 본 실시예에 따른 비디오 픽쳐 코딩 방법에서, 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 감소될 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
이하, 도 1 내지 도 11을 참조하여 본 발명의 본 실시예에 따른 비디오 픽쳐 코딩 방법에 대해 자세히 설명한다. 이하, 도 12 내지 도 18을 참조하여 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법에 대해 자세히 설명한다. 디코더의 관련된 연산이 기본적으로 인코더의 연산과 일치함을 유의해야 한다. 중복을 피하기 위하여, 여기서는 세부사항에 대해 다시 설명하지 않는다.
도 12는 본 발명의 일 실시예에 따른 비디오 픽쳐 디코딩 방법의 개략적인 흐름도이다. 도 12에 도시된 비디오 픽쳐 디코딩 방법은 디코딩 장치, 예를 들어 디코더에 의해 수행될 수 있다. 구체적으로, 도 12에 도시된 바와 같이, 비디오 픽쳐 디코딩 방법(2000)은 다음의 단계를 포함한다.
S2100. 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정한다.
S2200. 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정한다.
S2300. 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정한다. 여기서, 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소이다.
S2400. 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다.
구체적으로, 디코딩 장치가 결정된 제어점에 따라 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고, 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며, 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다.
따라서, 본 발명의 본 실시예에 따른 비디오 픽쳐 디코딩 방법에서, 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
바람직하게는, 도 13에 도시된 바와 같이, S2100은 다음의 단계를 포함한다.
S2101. 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정한다.
S2102. 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정한다.
제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
본 발명의 본 실시예에서, 움직임 벡터 차분값의 제1 성분이 움직임 벡터 차분값의 수평 성분이며, 움직임 벡터 차분값의 제2 성분이 움직임 벡터 차분값의 수직 성분이라고 이해해야 한다.
선택적으로, 도 14에 도시된 바와 같이, S2101은 구체적으로 다음의 단계를 포함한다.
S2103. 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정한다.
S2104. 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정한다.
따라서, 도 15에 도시된 바와 같이, S2102은 구체적으로 다음의 단계를 포함한다.
S2105. 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정한다.
S2106. 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정한다.
본 발명의 본 실시예에서, 선택적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터가 결정될 수 있고, 아핀 픽쳐 블록 내의 화소가 동일한 아핀 변환 파라미터를 가지고 있다.
따라서, S2103은 구체적으로, 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계이다.
S2105는 구체적으로, 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계이다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터가 결정될 수 있다.
따라서, S2103은 구체적으로, 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하는 단계; 및 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하는 단계이다.
S2105는 구체적으로, 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하는 단계; 및 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하는 단계이다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
S2103과 S2105은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계; 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하는 단계이다.
본 발명의 본 실시예에서, 선택적으로, 디코딩 장치는 비트 스트림을 파싱함으로써 모든 제어점의 움직임 벡터를 획득할 수 있고; 인접한 픽쳐 블록으로부터 모든 제어점의 움직임 벡터를 획득할 수 있으며; 아핀 변환 모델에 따라 모든 제어점의 움직임 벡터를 계산할 수 있고; 비트 스트림을 파싱함으로써 일부 제어점의 움직임 벡터를 획득하고, 인접한 픽쳐 블록로부터 다른 제어점의 움직임 벡터를 획득할 수 있으며; 비트 스트림을 파싱함으로써 일부 제어점의 움직임 벡터를 획득하고, 아핀 변환 모델에 따라 계산을 통해 다른 제어점의 움직임 벡터를 획득할 수 있거나; 또는 인접한 픽쳐 블록으로부터 일부 제어점의 움직임 벡터를 획득하고, 아핀 변환 모델에 따라 다른 제어점의 움직임 벡터를 계산할 수 있다. 하지만, 본 발명은 이에 제한되지 않는다.
선택적으로, S2200에서, 사전 설정된 제3 값이 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정될 수 있거나; 또는 아핀 픽쳐 블록의 움직임 벡터 정밀도가 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 결정된다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
선택적으로, 도 16에 도시된 바와 같이, S2300은 구체적으로 다음의 단계를 포함한다.
S2301. 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
S2302. 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
선택적으로, 도 17에 도시된 바와 같이, S2300은 다음의 단계를 포함한다.
S2303. 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나; 또는
움직임 벡터 차분값의 수평 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
S2304. 움직임 벡터 차분값의 수직 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나; 또는
움직임 벡터 차분값의 수직 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정한다.
선택적으로, 도 18에 도시된 바와 같이, S2400은 다음의 단계를 포함한다.
S2401. 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정한다.
S2402. 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정한다.
S2403. 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 결정한다.
S2404. 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩한다.
본 발명의 본 실시예에서, 선택적으로, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호가 필터링되고, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
본 발명의 본 실시예에서, 선택적으로, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다. 따라서, 본 발명의 본 실시예에 따른 비디오 픽쳐 디코딩 방법에서, 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
선택적으로, 본 발명의 디코딩 방법은 또한,
아핀 픽쳐 블록의 움직임 벡터 차분값 및 아핀 픽쳐 블록의 움직임 벡터 정밀도를 획득하기 위해 비트 스트림을 파싱하는 단계 - 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -;
움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계 - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계일 수 있다.
또는, 디코딩 방법은,
아핀 픽쳐 블록 정보를 획득하기 위해 비트 스트림을 파싱하는 단계;
아핀 픽쳐 블록 정보에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계; 및
아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계일 수 있다.
이러한 방식에서, 디코더는 재계산하지 않고 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하기 위해, 인코더에 의해 디코더에 송신되는 파라미터를 직접 사용하며, 계산 복잡도를 추가적으로 줄일 수 있다.
이하, 도 19와 도 20을 참조하여 본 발명의 일 실시예에 따른 코딩 장치에 대해 상세하게 설명한다. 도 19에 도시된 바와 같이, 코딩 장치(10)는,
아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하도록 구성된 제1 결정 모듈(11);
아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈(12);
제1 결정 모듈(11)에 의해 결정된 움직임 벡터 차분값, 제2 결정 모듈(12)에 의해 결정된 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하도록 구성된 제3 결정 모듈(13) - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
제3 결정 모듈(13)에 의해 결정된 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행하도록 구성된 코딩 모듈(14)을 포함한다.
구체적으로, 코딩 장치는 결정된 제어점에 따라 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고, 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며, 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다.
따라서, 본 발명의 본 실시예에 따른 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 줄어들 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(11)은 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(11)은 구체적으로, 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고; 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정하며; 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(11)은 구체적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하며; 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(11)은 구체적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터를 결정하고; 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하며; 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하고; 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하며; 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
제1 결정 모듈(11)은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제3 결정 모듈(13)은 구체적으로, 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제3 결정 모듈(13)은 구체적으로,
움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제3 제어점은 동일한 화소이다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점은 아핀 픽쳐 블록의 꼭지점이다.
본 발명의 본 실시예에서, 선택적으로, 사전 설정된 제1 값은 4이거나, 및/또는 사전 설정된 제2 값은 4이다.
본 발명의 본 실시예에서, 선택적으로, 제2 결정 모듈(12)는 구체적으로, 사전 설정된 제3 값을 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
본 발명의 본 실시예에서, 선택적으로, 코딩 모듈(14)은 구체적으로, 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 도 20에 도시된 바와 같이, 코딩 장치(10)는,
각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈(15)을 더 포함한다. 여기서, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
본 발명의 본 실시예에서, 선택적으로, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
본 발명의 본 실시예에 따른 코딩 장치(10)는 본 발명의 본 실시예의 비디오 픽쳐 코딩 방법(1000)을 상응하게 수행할 수 있고, 코딩 장치(10) 내의 이들 모듈의 전술한 동작과 다른 동작 및/또는 기능은 개별적으로 도 1 내지 도 11의 방법의 대응하는 절차를 구현하기 위한 것이라고 이해해야 한다. 간략화를 위해, 여기서는 세부사항에 대해 다시 설명하지 않는다.
따라서, 본 발명의 본 실시예에 따른 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 이 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 감소될 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
이하, 도 21과 도 22를 참조하여 본 발명의 일 실시예에 따른 디코딩 장치에 대해 상세하게 설명한다. 도 21에 도시된 바와 같이, 디코딩 장치(20)는,
아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하도록 구성된 제1 결정 모듈(21);
아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈(22);
제1 결정 모듈(21)에 의해 결정된 움직임 벡터 차분값, 제2 결정 모듈(22)에 의해 결정된 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하도록 구성된 제3 결정 모듈(23) - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
제3 결정 모듈(23)에 의해 결정된 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하도록 구성된 디코딩 모듈(24)을 포함한다.
구체적으로, 디코딩 장치가 결정된 제어점에 따라 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고, 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며, 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 결정된 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다.
따라서, 본 발명의 본 실시예에 따른 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(21)은 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(21)은 구체적으로, 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고; 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정하며; 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(21)은 구체적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하며; 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 결정 모듈(21)은 구체적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터를 결정하고; 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하며; 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하고; 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하며; 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
제1 결정 모듈(21)은 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제3 결정 모듈(23)은 구체적으로, 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 제3 결정 모듈(23)은 구체적으로,
움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다
본 발명의 본 실시예에서, 선택적으로, 제1 제어점과 제3 제어점은 동일한 화소이다.
본 발명의 본 실시예에서, 선택적으로, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점은 아핀 픽쳐 블록의 꼭지점이다.
본 발명의 본 실시예에서, 선택적으로, 사전 설정된 제1 값은 4이거나, 및/또는 사전 설정된 제2 값은 4이다.
본 발명의 본 실시예에서, 선택적으로, 제2 결정 모듈(22)은 구체적으로, 사전 설정된 제3 값을 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
본 발명의 본 실시예에서, 선택적으로, 디코딩 모듈(24)는 구체적으로, 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하도록 구성된다.
본 발명의 본 실시예에서, 선택적으로, 도 22에 도시된 바와 같이, 디코딩 장치(20)는,
각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈(25)를 더 포함한다. 여기서, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
본 발명의 본 실시예에서, 선택적으로, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
본 발명의 본 실시예에 따른 디코딩 장치(20)가 본 발명의 실시예의 비디오 픽쳐 디코딩 방법(2000)를 상응하게 수행할 수 있고, 디코딩 장치(20) 내의 모듈의 전술한 동작과 다른 동작 및/또는 기능이 도 12 내지 도 18의 방법의 대응하는 절차를 개별적으로 구현하기 위한 것이라고 이해해야 한다. 간략화를 위해, 여기서는 세부사항에 대해 다시 설명하지 않는다.
따라서, 본 발명의 본 실시예에 따른 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 이 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
도 23에 도시된 바와 같이, 본 발명의 일 실시예는 코딩 장치(30)를 더 제공한다. 코딩 장치(30)는 프로세서(31), 메모리(32), 및 버스 시스템(33)을 포함한다. 프로세서(31)와 메모리(32)는 버스 시스템(33)에 의해 연결된다. 메모리(32)는 명령을 저장하도록 구성된다. 프로세서(31)는 메모리(32)에 저장된 명령을 실행하도록 구성된다. 코딩 장치(30)의 메모리(32)는 프로그램 코드를 저장하고, 프로세서(31)는 메모리(32)에 저장된 프로그램 코드를 호출함으로써, 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고; 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며; 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고 - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 동작을 수행할 수 있다.
따라서, 본 발명의 본 실시예에 따른 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 줄어들 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
본 발명의 본 실시예에서, 프로세서(31)가 중앙처리장치(Central Processing Unit, CPU)일 수 있거나, 또는 프로세서(31)는 다른 범용 프로세서, 디지털 신호 프로세서(DSP), 주문형 반도체(ASIC), 필드 프로그래머블 게이트 어레이(FPGA), 또는 다른 프로그램 가능한 로직 장치, 디스크리트 게이트(discrete gate) 또는 트랜지스터 로직 장치, 또는 독립된 하드웨어 컴포넌트 등일 수 있다고 이해해야 한다. 범용 프로세서는 마이크로프로세서일 수 있거나, 또는 프로세서는 임의의 기존 프로세서, 또는 이와 유사한 것일 수 있다.
메모리(32)는 읽기 전용 메모리 및 랜덤 액세스 메모리를 포함할 수 있고, 프로세서(31)에 명령과 데이터를 제공한다. 메모리(32) 중 일부는 비휘발성 랜덤 액세스 메모리를 더 포함할 수 있다. 예를 들어, 메모리(32)는 장치 유형에 관한 정보를 추가로 저장하고 있을 수 있다.
버스 시스템(33)은 데이터 버스 외에도 전력 버스, 제어버스, 및 상태 신호 버스 등을 더 포함할 수 있다. 하지만, 명확한 설명을 위해, 도면에는 다양한 버스가 버스 시스템(33)로서 표시되어 있다.
구현 과정에서, 전술한 방법의 각각의 단계는 프로세서(31) 내의 하드웨어의 통합 로직 회로 또는 소프트웨어의 형태의 명령을 이용하여 완료될 수 있다. 본 발명의 실시예를 참조하여 개시되는 방법의 단계가 하드웨어 프로세서에 의해 직접 수행될 수 있거나, 또는 프로세서 내의 하드웨어와 소프트웨어 모듈의 조합을 이용하여 수행될 수 있다. 소프트웨어 모듈은 당해 분야에서 성숙한 저장 매체, 예컨대 랜덤 액세스 메모리, 플래쉬 메모리, 읽기 전용 메모리, 프로그램 가능한 롬(programmable ROM), 전자적으로 삭제가능한 프로그램가능 메모리(electrically erasable programmable memory), 또는 레지스터에 위치할 수 있다. 저장 매체는 메모리(32)에 위치한다. 프로세서(31)는 메모리(32) 내의 정보를 판독하고, 프로세서(31)의 하드웨어와 함께 전술한 방법의 단계를 완료하다. 중복을 피하기 위하여, 여기서는 세부사항에 대해 다시 설명하지 않는다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값; 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정하며; 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하며; 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터; 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하며; 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하고; 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하며; 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
프로세서(31)는 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로,
움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 제1 제어점과 제3 제어점은 동일한 화소이다.
선택적으로, 일 실시예에서, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점은 아핀 픽쳐 블록의 꼭지점이다.
선택적으로, 일 실시예에서, 사전 설정된 제1 값은 4이거나, 및/또는 사전 설정된 제2 값은 4이다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 사전 설정된 제3 값을 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
선택적으로, 일 실시예에서, 프로세서(31)는 구체적으로, 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(31)는 추가적으로, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된다. 여기서, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
선택적으로, 일 실시예에서, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
본 발명의 본 실시예에 따른 코딩 장치(30)는 본 발명의 실시예의 코딩 장치(10)에 대응할 수 있고, 본 발명의 실시예에 따른 방법(1000)를 수행하는 대응하는 엔티티에 대응할 수 있으며, 코딩 장치(30) 내의 모듈의 전술한 동작과 다른 동작 및/또는 기능이 개별적으로 도 1 내지 도 11의 방법의 대응하는 절차를 구현하기 위한 것이라고 이해해야 한다. 간략화를 위해, 여기서는 세부사항에 대해 다시 설명하지 않는다.
따라서, 본 발명의 본 실시예에 따른 코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 코딩 처리를 수행한다. 이런 방식으로, 코딩 복잡도가 감소될 수 있으면서 또한 코딩 효율이 향상될 수 있도록, 코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
도 24에 도시된 바와 같이, 본 발명의 일 실시예는 디코딩 장치(40)를 더 제공한다. 디코딩 장치(40)는 프로세서(41), 메모리(42), 및 버스 시스템(43)을 포함한다. 프로세서(41)와 메모리(42)는 버스 시스템(43)에 의해 연결된다. 메모리(42)는 명령을 저장하도록 구성된다. 프로세서(41)은 메모리(42)에 저장된 명령을 실행하도록 구성된다. 디코딩 장치(40)의 메모리(42)는 프로그램 코드를 저장하고, 프로세서(41)는 메모리(42)에 저장된 프로그램 코드를 호출함으로써, 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하고; 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하며; 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고 - 제어점은 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 동작을 수행할 수 있다.
따라서, 본 발명의 본 실시예에 따른 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 결정된 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 이 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
본 발명의 본 실시예에서, 프로세서(41)는 중앙처리장치(Central Processing Unit, CPU)일 수 있거나, 또는 프로세서(41)는 다른 범용 프로세서, 디지털 신호 프로세서(DSP), 주문형 반도체(ASIC), 필드 프로그래머블 게이트 어레이(FPGA), 또는 다른 프로그램 가능한 로직 장치, 디스크리트 게이트(discrete gate) 또는 트랜지스터 로직 장치, 또는 독립된 하드웨어 컴포넌트 등일 수 있다고 이해해야 한다. 범용 프로세서는 마이크로프로세서일 수 있거나, 또는 프로세서는 임의의 기존 프로세서, 또는 이와 유사한 것일 수 있다.
메모리(42)는 읽기 전용 메모리 및 랜덤 액세스 메모리를 포함할 수 있고, 프로세서(41)에 명령과 데이터를 제공한다. 메모리(42) 중 일부는 비휘발성 랜덤 액세스 메모리를 더 포함할 수 있다. 예를 들어, 메모리(42)는 장치 유형에 관한 정보를 추가로 저장하고 있을 수 있다.
버스 시스템(43)은 데이터 버스 외에도 전력 버스, 제어버스, 및 상태 신호 버스 등을 더 포함할 수 있다. 하지만, 명확한 설명을 위해, 도면에는 다양한 버스가 버스 시스템(43)으로서 표시되어 있다.
구현 과정에서, 전술한 방법의 각각의 단계가 프로세서(41) 내의 하드웨어의 통합 로직 회로 또는 소프트웨어의 형태의 명령을 이용하여 완료될 수 있다. 본 발명의 실시예를 참조하여 개시되는 방법의 단계는 하드웨어 프로세서에 의해 직접 수행될 수 있거나, 또는 프로세서 내의 하드웨어와 소프트웨어 모듈의 조합을 이용하여 수행될 수 있다. 소프트웨어 모듈은 당해 분야에서 성숙한 저장 매체, 예컨대 랜덤 액세스 메모리, 플래쉬 메모리, 읽기 전용 메모리, 피롬(programmable ROM), 이피롬, 또는 레지스터에 위치할 수 있다. 저장 매체는 메모리(42)에 위치한다. 프로세서(41)는 메모리(42) 내의 정보를 판독하고, 프로세서(41)의 하드웨어와 함께 전술한 방법의 단계를 완료한다. 중복을 피하기 위하여, 여기서는 세부사항에 대해 다시 설명하지 않는다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제1 성분을 결정하고; 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 움직임 벡터 차분값의 제2 성분을 결정하도록 구성된다.
여기서, 제1 제어점과 제2 제어점 간에는 제1 수평 거리가 존재하고, 제3 제어점과 제4 제어점 간에는 제1 수직 거리가 존재한다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 제1 제어점과 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고; 제1 수평 성분 차분값과 제1 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제1 성분으로서 결정하며; 제3 제어점과 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고; 제2 수평 성분 차분값과 제2 수직 성분 차분값 중 큰 값을 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -; 아핀 변환 파라미터와 제1 수평 거리에 따라 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하며; 아핀 변환 파라미터와 제1 수직 거리에 따라 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 제1 제어점의 움직임 벡터, 제2 제어점의 움직임 벡터, 제3 제어점의 움직임 벡터, 및 제4 제어점의 움직임 벡터를 결정하고; 제1 제어점의 움직임 벡터의 수평 성분과 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제1 수평 성분 차분값으로서 결정하며; 제1 제어점의 움직임 벡터의 수직 성분과 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제1 수직 성분 차분값으로서 결정하고; 제3 제어점의 움직임 벡터의 수평 성분과 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 제2 수평 성분 차분값으로서 결정하며; 제3 제어점의 움직임 벡터의 수직 성분과 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 제2 수직 성분 차분값으로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 제1 제어점과 제2 제어점은 인접한 2개의 화소이고, 제3 제어점과 제4 제어점은 인접한 2개의 화소이다.
프로세서(41)는 구체적으로, 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 제1 화소, 제2 화소, 및 제3 화소는 중첩하지 않는 화소임 -; 제1 화소와 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며; 제1 화소와 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고; 제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 제3 화소의 움직임 벡터, 제2 수평 거리, 제2 수직 거리, 제3 수평 거리, 및 제3 수직 거리에 따라 제1 수평 성분 차분값, 제1 수직 성분 차분값, 제2 수평 성분 차분값, 및 제2 수직 성분 차분값을 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고; 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로,
움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 이 비율을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제1 성분에 대한 움직임 벡터 정밀도와 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 사전 설정된 제1 값을 가로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 이 비율을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는 움직임 벡터 차분값의 제2 성분에 대한 움직임 벡터 정밀도와 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 사전 설정된 제2 값을 세로 방향에서 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된다.
선택적으로, 일 실시예에서, 제1 제어점과 제3 제어점은 동일한 화소이다.
선택적으로, 일 실시예에서, 제1 제어점, 제2 제어점, 제3 제어점, 및 제4 제어점은 아핀 픽쳐 블록의 꼭지점이다.
선택적으로, 일 실시예에서, 사전 설정된 제1 값은 4이거나, 및/또는 사전 설정된 제2 값은 4이다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 사전 설정된 제3 값을 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된다. 여기서, 인접한 픽쳐 블록은 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록이다.
선택적으로, 일 실시예에서, 프로세서(41)는 구체적으로, 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며; 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 결정하고; 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하도록 구성된다.
선택적으로, 일 실시예에서, 프로세서(41)는 추가적으로, 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된다. 여기서, 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소이다.
선택적으로, 일 실시예에서, 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 복원된 신호는 움직임 보상 예측 신호와 복원된 잔차 신호의 합이다.
본 발명의 본 실시예에 따른 디코딩 장치(40)는 본 발명의 실시예의 디코딩 장치(20)에 대응할 수 있고, 본 발명의 실시예에 따른 방법(2000)을 수행하는 대응하는 엔티티에 대응할 수 있으며, 디코딩 장치(40) 내의 모듈의 전술한 동작과 다른 동작 및/또는 기능이 도 12 내지 도 18의 방법의 대응하는 절차를 개별적으로 구현하기 위한 것이라고 이해해야 한다. 간략화를 위해, 여기서는 세부사항에 대해 다시 설명하지 않는다.
따라서, 본 발명의 본 실시예에 따른 디코딩 장치는 아핀 픽쳐 블록의 결정된 움직임 벡터 차분값, 움직임 벡터 정밀도, 및 제어점 간의 거리에 따라 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하고, 이 크기에 따라 아핀 픽쳐 블록에 대해 디코딩 처리를 수행한다. 이런 방식으로, 디코딩 복잡도가 감소될 수 있으면서 또한 디코딩 효율이 향상될 수 있도록, 디코딩 과정에서 적절한 크기의 픽쳐 서브블록이 선택된다.
전체 명세서에서 언급된 "일 실시예" 또는 "하나의 실시예"가 실시예와 관련된 특정한 기능, 구조, 또는 특성이 본 발명의 실시예 중 적어도 하나에 포함된다는 것을 의미하지 않는다고 이해해야 한다. 따라서, 명세서 전체를 통하여 나타나는 "일 실시예에서" 또는 "일 실시예에서"는 동일한 실시예를 지칭하는 것이 아니다. 또한, 하나 이상의 실시예에서 이들 특정한 기능, 구조, 또는 특성이 어떤 적절한 방식을 이용하여 조합될 수 있다.
전술한 프로세스의 시퀀스 번호가 본 발명의 다양한 실시예의 실행 시퀀스를 의미하지 않는다고 이해해야 한다. 이 프로세스의 실행 시퀀스는 기능 및 프로세스의 내부 로직에 따라 결정되어야 하며, 본 발명의 실시예의 구현 과정에 대한 어떠한 제한으로 해석해서는 안된다.
또한, 본 명세서에서는 용어 "시스템" 및 "네트워크"가 혼용되어 사용될 수 있다. 본 명세서에서의 용어 "및/또는"은 연관된 객체를 설명하기 위한 연관 관계만을 설명할 뿐이며 3가지 관계가 존재할 수 있다는 것을 나타낸다. 예를 들어, A 및/또는 B는 3가지 경우, 즉 A만 존재하는 경우, A와 B 양자가 존재하는 경우, 그리고 B만 존재하는 경우를 나타낼 수 있다. 또한, 달리 명시하지 않는다면, 본 명세서의 문자 "/"는 일반적으로 연관된 객체 간의 "또는(or)" 관계를 나타낸다.
본 출원의 본 실시예에서, "A에 대응하는 B"는 B가 A와 연관된 것을 나타내며, B가 A에 따라 결정될 수 있다고 이해해야 한다. 하지만, B에 따라 A를 결정하는 것이 B가 A에 따라서만 결정된다는 것을 의미하지는 않는데, 즉 B 역시 A에 따라 및/또는 다른 정보에 따라 결정될 수 있다고 또한 이해해야 한다.
당업자라면 본 명세서에서 공개되는 실시예에서 설명된 예와 함께 유닛과 알고리즘 단계가 전자 하드웨어, 컴퓨터 소프트웨어, 또는 이들의 조합에 의해 구현될 수 있다는 것을 알 수 있을 것이다. 하드웨어와 소프트웨어 간의 호환성을 명확히 설명하기 위해, 이상에서는 각각의 예의 구성과 단계가 대체로 기능에 따라 설명되었다. 이들 기능이 하드웨어에 의해 수행되는지 또는 소프트웨어에 의해 수행되는지 여부는 구체적인 적용 및 기술적 해결방안의 설계 제한 조건에 따라 달라진다. 각각의 구체적인 적용을 위해 설명되는 기능을 구현하기 위해 당업자는 다른 방법을 사용할 수 있지만, 이러한 구현이 본 발명의 범위를 벗어나는 것으로 간주해서는 안된다.
편리하면서도 단순하게 설명하기 위해, 전술한 시스템, 장치, 그리고 유닛의 세부적인 동작 프로세스에 대해서는, 전술한 방법 실시예의 대응하는 프로세스를 참조할 수 있으며, 세부사항에 대해서는 여기서 다시 설명하지 않는다는 것을 당업자는 명확하게 이해할 수 있을 것이다.
본 출원에서 제공되는 몇몇 실시예에서, 공개된 시스템, 장치, 및 방법은 다른 방식으로 구현될 수 있다고 이해하여야 한다. 예를 들어, 전술한 장치 실시예는 단지 예일 뿐이다. 예를 들어, 유닛 구분은 단지 논리적 기능 구분일 뿐, 실제 구현에서는 이와는 다르게 구분될 수 있다. 예를 들어, 복수의 유닛 또는 컴포넌트는 다른 시스템으로 결합되어 있거나 통합되어 있을 수 있거나, 또는 몇몇 특징은 무시되거나 수행되지 않을 수도 있다. 또한, 표시되거나 논의된 상호 연결 또는 직접 연결 또는 통신 연결은 일부 인터페이스를 이용하여 구현될 수 있다. 이들 장치나 유닛 간의 간접 연결 또는 통신 연결은 전자적 형태, 기계적 형태, 또는 다른 형태로 구현될 수도 있다.
별도의 부분으로 설명된 유닛은 물리적으로 분리되어 있거나 또는 분리되어 있지 않을 수 있고, 유닛으로서 표시되는 부분은 물리적 유닛이거나 또는 물리적 유닛이 아닐 수 있으며, 하나의 위치에 놓여 있을 수 있거나, 또는 복수의 네트워크 유닛 상에 분산되어 있을 수 있다. 본 실시예의 해결수단의 목적을 달성하기 위해, 유닛 중 일부 또는 전부가 실제 요구사항에 따라 선택될 수 있다.
또한, 본 발명의 실시예의 기능 유닛은 하나의 처리 유닛으로 통합되어 있을 수 있거나, 또는 각각의 유닛이 물리적으로 단독으로 존재할 수도 있거나, 또는 2개 이상의 유닛이 하나의 유닛으로 통합되어 있을 수 있다.
통합 유닛이 소프트웨어 기능 유닛의 형태로 구현되고 독립된 상품으로서 판매되거나 사용되는 경우, 통합 유닛은 컴퓨터 판독가능 저장매체에 저장되어 있을 수 있다. 이러한 이해를 바탕으로, 본 발명의 기술적 해결책은 본질적으로, 또는 종래 기술에 기여하는 부분은, 또는 기술적 해결책의 일부는 소프트웨어 제품의 형태로 구현될 수 있다. 소프트웨어 제품은 저장 매체에 저장되며, 컴퓨터 장치(개인용 컴퓨터, 서버, 또는 네트워크 장치일 수 있음)가 본 발명의 실시예에서 설명되는 방법의 단계의 전부 또는 일부를 수행하도록 지시하는 여러 명령을 포함하고 있다. 전술한 저장 매체는 프로그램 코드를 저장할 수 있는 임의의 저장 매체, 예를 들어 USB 플래쉬 드라이브, 착탈식 하드디스크, 읽기 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크, 또는 광 디스크를 포함한다.
전술한 설명은 단지 본 발명의 특정한 구현일 뿐이지만, 본 발명의 보호 범위을 제한하려고 하는 것은 아니다. 당업자가 본 발명에서 개시되는 기술적인 보호범위 내에서 즉시 파악할 수 있는 어떠한 변경이나 대체도 본 발명의 보호 범위에 속할 것이다. 따라서, 본 발명의 보호 범위는 특허 청구 범위의 보호 범위에 따른다.

Claims (60)

  1. 비디오 픽쳐 코딩 방법으로서,
    아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하는 단계;
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계;
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하는 단계 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
    상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 단계
    를 포함하는 비디오 픽쳐 코딩 방법.
  2. 제1항에 있어서,
    상기 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하는 단계는,
    동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계; 및
    동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계
    를 포함하고,
    상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재하는, 비디오 픽쳐 코딩 방법.
  3. 제2항에 있어서,
    상기 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계는,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계; 및
    상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하는 단계
    를 포함하고,
    상기 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계는,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계; 및
    상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  4. 제3항에 있어서,
    상기 비디오 픽쳐 코딩 방법은,
    상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하는 단계 - 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -
    를 더 포함하고,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는,
    상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하는 단계
    를 포함하며,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  5. 제3항에 있어서,
    상기 비디오 픽쳐 코딩 방법은,
    상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하는 단계
    를 더 포함하고,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는,
    상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하는 단계; 및
    상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하는 단계
    를 포함하며,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하는 단계; 및
    상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  6. 제3항에 있어서,
    상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이며;
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계, 및 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -;
    상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계;
    상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및
    상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  7. 제4항 내지 제6항 중 어느 한 항에 있어서,
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  8. 제4항 내지 제6항 중 어느 한 항에 있어서,
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  9. 제2항 내지 제8항 중 어느 한 항에 있어서,
    상기 제1 제어점과 상기 제3 제어점은 동일한 화소인, 비디오 픽쳐 코딩 방법.
  10. 제2항 내지 제9항 중 어느 한 항에 있어서,
    상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점인, 비디오 픽쳐 코딩 방법.
  11. 제8항에 있어서,
    상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4인, 비디오 픽쳐 코딩 방법.
  12. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계는,
    사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하는 단계; 또는
    상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계 - 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록임 -
    를 포함하는, 비디오 픽쳐 코딩 방법.
  13. 제1항 내지 제12항 중 어느 한 항에 있어서,
    상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하는 단계는,
    상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하는 단계;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하는 단계;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하는 단계; 및
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하는 단계
    를 포함하는, 비디오 픽쳐 코딩 방법.
  14. 제13항에 있어서,
    각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하는 단계 - 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소임 -
    를 더 포함하는 비디오 픽쳐 코딩 방법.
  15. 제14항에 있어서,
    상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합인, 비디오 픽쳐 코딩 방법.
  16. 비디오 픽쳐 디코딩 방법으로서,
    아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하는 단계;
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계;
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하는 단계 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
    상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계
    를 포함하는 비디오 픽쳐 디코딩 방법.
  17. 제16항에 있어서,
    상기 아핀 픽쳐 블록의 움직임 벡터 차분값을 결정하는 단계는,
    동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계; 및
    동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계
    를 포함하고,
    상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재하는, 비디오 픽쳐 디코딩 방법.
  18. 제17항에 있어서,
    상기 동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하는 단계는,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계; 및
    상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하는 단계
    를 포함하고,
    상기 동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하는 단계는,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계; 및
    상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  19. 제18항에 있어서,
    상기 비디오 픽쳐 디코딩 방법은,
    상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하는 단계 - 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -
    를 더 포함하고,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는,
    상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하는 단계
    를 포함하며,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  20. 제18항에 있어서,
    상기 비디오 픽쳐 디코딩 방법은,
    상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하는 단계
    를 더 포함하고,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계는,
    상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하는 단계; 및
    상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하는 단계
    를 포함하며,
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하는 단계; 및
    상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  21. 제18항에 있어서,
    상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이며;
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하는 단계, 및 상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하는 단계는,
    제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하는 단계 - 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -;
    상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하는 단계;
    상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하는 단계; 및
    상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  22. 제19항 내지 제21항 중 어느 한 항에 있어서,
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  23. 제19항 내지 제21항 중 어느 한 항에 있어서,
    상기 움직임 벡터 차분값, 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록의 크기를 결정하는 단계는,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계; 및
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  24. 제17항 내지 제23항 중 어느 한 항에 있어서,
    상기 제1 제어점과 상기 제3 제어점은 동일한 화소인, 비디오 픽쳐 디코딩 방법.
  25. 제17항 내지 제24항 중 어느 한 항에 있어서,
    상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점인, 비디오 픽쳐 디코딩 방법.
  26. 제23항에 있어서,
    상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4인, 비디오 픽쳐 디코딩 방법.
  27. 제16항 내지 제26항 중 어느 한 항에 있어서,
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계는,
    사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하는 단계; 또는
    상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하는 단계 - 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록임 -
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  28. 제16항 내지 제27항 중 어느 한 항에 있어서,
    상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하는 단계는,
    상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하는 단계;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하는 단계;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하는 단계; 및
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하는 단계
    를 포함하는, 비디오 픽쳐 디코딩 방법.
  29. 제28항에 있어서,
    각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하는 단계 - 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소임 -
    를 더 포함하는 비디오 픽쳐 디코딩 방법.
  30. 제29항에 있어서,
    상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합인, 비디오 픽쳐 디코딩 방법.
  31. 코딩 장치로서,
    아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하도록 구성된 제1 결정 모듈;
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈;
    상기 제1 결정 모듈에 의해 결정된 상기 움직임 벡터 차분값, 상기 제2 결정 모듈에 의해 결정된 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하도록 구성된 제3 결정 모듈 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
    상기 제3 결정 모듈에 의해 결정된 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 코딩 처리를 수행하도록 구성된 코딩 모듈
    을 포함하는 코딩 장치.
  32. 제31항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하고;
    동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하도록 구성되고,
    상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재하는, 코딩 장치.
  33. 제32항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고;
    상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하며;
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고;
    상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된, 코딩 장치.
  34. 제33항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -;
    상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하며;
    상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하도록 구성된, 코딩 장치.
  35. 제33항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하고;
    상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하며;
    상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하고;
    상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하며;
    상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하도록 구성된, 코딩 장치.
  36. 제33항에 있어서,
    상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이며;
    상기 제1 결정 모듈은 구체적으로,
    제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -;
    상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며;
    상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고;
    상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하도록 구성된, 코딩 장치.
  37. 제34항 내지 제36항 중 어느 한 항에 있어서,
    상기 제3 결정 모듈은 구체적으로,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된, 코딩 장치.
  38. 제34항 내지 제36항 중 어느 한 항에 있어서,
    상기 제3 결정 모듈은 구체적으로,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된, 코딩 장치.
  39. 제32항 내지 제38항 중 어느 한 항에 있어서,
    상기 제1 제어점과 상기 제3 제어점은 동일한 화소인, 코딩 장치.
  40. 제32항 내지 제39항 중 어느 한 항에 있어서,
    상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점인, 코딩 장치.
  41. 제38항에 있어서,
    상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4인, 코딩 장치.
  42. 제31항 내지 제41항 중 어느 한 항에 있어서,
    상기 제2 결정 모듈은 구체적으로,
    사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는
    상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성되고, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록인, 코딩 장치.
  43. 제31항 내지 제42항 중 어느 한 항에 있어서,
    상기 코딩 모듈은 구체적으로,
    상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하고;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 코딩하도록 구성된, 코딩 장치.
  44. 제43항에 있어서,
    각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈 - 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소임 -
    을 더 포함하는 코딩 장치.
  45. 제44항에 있어서,
    상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합인, 코딩 장치.
  46. 디코딩 장치로서,
    아핀 픽쳐 블록(affine picture block)의 움직임 벡터 차분값(motion vector difference)을 결정하도록 구성된 제1 결정 모듈;
    상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성된 제2 결정 모듈;
    상기 제1 결정 모듈에 의해 결정된 상기 움직임 벡터 차분값, 상기 제2 결정 모듈에 의해 결정된 상기 움직임 벡터 정밀도, 및 상기 아핀 픽쳐 블록 내의 제어점 간의 거리에 따라 상기 아핀 픽쳐 블록 내의 아핀 움직임 보상 픽쳐 서브블록(affine motion compensation picture subblock)의 크기를 결정하도록 구성된 제3 결정 모듈 - 상기 제어점은 상기 움직임 벡터 차분값을 결정하기 위해 사용되는 화소임 -; 및
    상기 제3 결정 모듈에 의해 결정된 상기 아핀 움직임 보상 픽쳐 서브블록의 크기에 따라 상기 아핀 픽쳐 블록에 대해 디코딩 처리를 수행하도록 구성된 디코딩 모듈
    을 포함하는 디코딩 장치.
  47. 제46항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    동일한 수평선 상에 위치하는 제1 제어점과 제2 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제1 성분을 결정하고;
    동일한 수직선 상에 위치하는 제3 제어점과 제4 제어점의 움직임 벡터 간의 차분값에 따라 상기 움직임 벡터 차분값의 제2 성분을 결정하도록 구성되고,
    상기 제1 제어점과 상기 제2 제어점 간에는 제1 수평 거리가 존재하고, 상기 제3 제어점과 상기 제4 제어점 간에는 제1 수직 거리가 존재하는, 디코딩 장치.
  48. 제47항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 제1 제어점과 상기 제2 제어점의 움직임 벡터 간의 제1 수평 성분 차분값과 제1 수직 성분 차분값을 결정하고;
    상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제1 성분으로서 결정하며;
    상기 제3 제어점과 상기 제4 제어점의 움직임 벡터 간의 제2 수평 성분 차분값과 제2 수직 성분 차분값을 결정하고;
    상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값 중 큰 값을 상기 움직임 벡터 차분값의 제2 성분으로서 결정하도록 구성된, 디코딩 장치.
  49. 제48항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 아핀 픽쳐 블록 내의 화소의 아핀 변환 파라미터를 결정하고 - 여기서, 상기 아핀 픽쳐 블록 내의 화소는 동일한 아핀 변환 파라미터를 가지고 있음 -;
    상기 아핀 변환 파라미터와 상기 제1 수평 거리에 따라 상기 제1 수평 성분 차분값과 상기 제1 수직 성분 차분값을 결정하며;
    상기 아핀 변환 파라미터와 상기 제1 수직 거리에 따라 상기 제2 수평 성분 차분값과 상기 제2 수직 성분 차분값을 결정하도록 구성된, 디코딩 장치.
  50. 제48항에 있어서,
    상기 제1 결정 모듈은 구체적으로,
    상기 제1 제어점의 움직임 벡터, 상기 제2 제어점의 움직임 벡터, 상기 제3 제어점의 움직임 벡터, 및 상기 제4 제어점의 움직임 벡터를 결정하고;
    상기 제1 제어점의 움직임 벡터의 수평 성분과 상기 제2 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제1 수평 성분 차분값으로서 결정하며;
    상기 제1 제어점의 움직임 벡터의 수직 성분과 상기 제2 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제1 수직 성분 차분값으로서 결정하고;
    상기 제3 제어점의 움직임 벡터의 수평 성분과 상기 제4 제어점의 움직임 벡터의 수평 성분 간의 차분값을 상기 제2 수평 성분 차분값으로서 결정하며;
    상기 제3 제어점의 움직임 벡터의 수직 성분과 상기 제4 제어점의 움직임 벡터의 수직 성분 간의 차분값을 상기 제2 수직 성분 차분값으로서 결정하도록 구성된, 디코딩 장치.
  51. 제48항에 있어서,
    상기 제1 제어점과 상기 제2 제어점은 인접한 2개의 화소이고, 상기 제3 제어점과 상기 제4 제어점은 인접한 2개의 화소이며;
    상기 제1 결정 모듈은 구체적으로,
    제1 화소의 움직임 벡터, 제2 화소의 움직임 벡터, 및 제3 화소의 움직임 벡터를 결정하고 - 여기서, 상기 제1 화소, 상기 제2 화소, 및 상기 제3 화소는 중첩하지 않는 화소임 -;
    상기 제1 화소와 상기 제2 화소 간의 제2 수평 거리와 제2 수직 거리를 결정하며;
    상기 제1 화소와 상기 제3 화소 간의 제3 수평 거리와 제3 수직 거리를 결정하고;
    상기 제1 화소의 움직임 벡터, 상기 제2 화소의 움직임 벡터, 상기 제3 화소의 움직임 벡터, 상기 제2 수평 거리, 상기 제2 수직 거리, 상기 제3 수평 거리, 및 상기 제3 수직 거리에 따라 상기 제1 수평 성분 차분값, 상기 제1 수직 성분 차분값, 상기 제2 수평 성분 차분값, 및 상기 제2 수직 성분 차분값을 결정하도록 구성된, 디코딩 장치.
  52. 제49항 내지 제51항 중 어느 한 항에 있어서,
    상기 제3 결정 모듈은 구체적으로,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된, 디코딩 장치.
  53. 제49항 내지 제51항 중 어느 한 항에 있어서,
    상기 제3 결정 모듈은 구체적으로,
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 크거나 같은 경우, 상기 비율을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제1 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수평 거리의 곱의 비율이 사전 설정된 제1 값보다 작은 경우, 상기 사전 설정된 제1 값을 가로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하고;
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 크거나 같은 경우, 상기 비율을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하거나, 또는
    상기 움직임 벡터 차분값의 제2 성분에 대한 상기 움직임 벡터 정밀도와 상기 제1 수직 거리의 곱의 비율이 사전 설정된 제2 값보다 작은 경우, 상기 사전 설정된 제2 값을 세로 방향에서 상기 아핀 움직임 보상 픽쳐 서브블록의 길이로서 결정하도록 구성된, 디코딩 장치.
  54. 제47항 내지 제53항 중 어느 한 항에 있어서,
    상기 제1 제어점과 상기 제3 제어점은 동일한 화소인, 디코딩 장치.
  55. 제47항 내지 제54항 중 어느 한 항에 있어서,
    상기 제1 제어점, 상기 제2 제어점, 상기 제3 제어점, 및 상기 제4 제어점은 상기 아핀 픽쳐 블록의 꼭지점인, 디코딩 장치.
  56. 제53항에 있어서,
    상기 사전 설정된 제1 값은 4이거나, 및/또는 상기 사전 설정된 제2 값은 4인, 디코딩 장치.
  57. 제46항 내지 제56항 중 어느 한 항에 있어서,
    상기 제2 결정 모듈은 구체적으로,
    사전 설정된 제3 값을 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도로서 결정하거나; 또는
    상기 아핀 픽쳐 블록에 인접한 픽쳐 블록의 특징에 따라 상기 아핀 픽쳐 블록의 움직임 벡터 정밀도를 결정하도록 구성되고, 상기 인접한 픽쳐 블록은 상기 아핀 픽쳐 블록에 공간적으로 인접하거나 및/또는 시간적으로 인접한 픽쳐 블록인, 디코딩 장치.
  58. 제46항 내지 제57항 중 어느 한 항에 있어서,
    상기 디코딩 모듈은 구체적으로,
    상기 아핀 움직임 보상 픽쳐 서브블록 내의 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터를 결정하고;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 벡터에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호를 결정하며;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 움직임 보상 예측 신호에 따라 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호(prediction residual signal)를 결정하고;
    상기 각각의 아핀 움직임 보상 픽쳐 서브블록의 예측 잔차 신호를 디코딩하도록 구성된, 디코딩 장치.
  59. 제58항에 있어서,
    각각의 아핀 움직임 보상 픽쳐 서브블록의 경계 화소의 신호를 필터링하도록 구성된 필터링 모듈 - 상기 경계 화소는 각각의 아핀 움직임 보상 픽쳐 서브블록의 경계에 있는 하나 이상의 행의 화소임 -
    을 더 포함하는 디코딩 장치.
  60. 제59항에 있어서,
    상기 경계 화소의 신호는 움직임 보상 예측 신호 및/또는 복원된 신호를 포함하고, 상기 복원된 신호는 상기 움직임 보상 예측 신호와 복원된 잔차 신호의 합인, 디코딩 장치.
KR1020177035893A 2015-05-15 2016-03-30 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치 KR102297921B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201510249484.8A CN106303543B (zh) 2015-05-15 2015-05-15 视频图像编码和解码的方法、编码设备和解码设备
CN201510249484.8 2015-05-15
PCT/CN2016/077784 WO2016184261A1 (zh) 2015-05-15 2016-03-30 视频图像编码和解码的方法、编码设备和解码设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020197031419A Division KR102148804B1 (ko) 2015-05-15 2016-03-30 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치

Publications (2)

Publication Number Publication Date
KR20180006961A true KR20180006961A (ko) 2018-01-19
KR102297921B1 KR102297921B1 (ko) 2021-09-02

Family

ID=57319464

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020207024140A KR102257653B1 (ko) 2015-05-15 2016-03-30 비디오 픽처 코딩 방법, 비디오 픽처 디코딩 방법, 코딩 장치, 및 디코딩 장치
KR1020177035893A KR102297921B1 (ko) 2015-05-15 2016-03-30 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치
KR1020197031419A KR102148804B1 (ko) 2015-05-15 2016-03-30 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020207024140A KR102257653B1 (ko) 2015-05-15 2016-03-30 비디오 픽처 코딩 방법, 비디오 픽처 디코딩 방법, 코딩 장치, 및 디코딩 장치

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020197031419A KR102148804B1 (ko) 2015-05-15 2016-03-30 비디오 픽쳐 코딩 방법, 비디오 픽쳐 디코딩 방법, 코딩 장치, 및 디코딩 장치

Country Status (14)

Country Link
US (4) US10390036B2 (ko)
EP (2) EP4033765A1 (ko)
JP (4) JP6978944B2 (ko)
KR (3) KR102257653B1 (ko)
CN (2) CN109005407B (ko)
AU (1) AU2016264380B2 (ko)
CA (1) CA2985868C (ko)
ES (1) ES2900232T3 (ko)
HK (1) HK1244984A1 (ko)
MX (2) MX2017014652A (ko)
MY (1) MY183126A (ko)
RU (1) RU2689426C1 (ko)
SG (1) SG11201709418UA (ko)
WO (1) WO2016184261A1 (ko)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019194506A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 인터 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019194507A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 움직임 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019199127A1 (ko) * 2018-04-12 2019-10-17 삼성전자 주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
WO2019199067A1 (ko) * 2018-04-13 2019-10-17 엘지전자 주식회사 비디오 처리 시스템에서 인터 예측 방법 및 장치
WO2019209026A1 (ko) * 2018-04-24 2019-10-31 엘지전자 주식회사 비디오 코딩 시스템에서 인터 예측 방법 및 장치
WO2019231256A1 (ko) * 2018-05-30 2019-12-05 엘지전자 주식회사 어파인 움직임 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
WO2019235819A1 (ko) * 2018-06-04 2019-12-12 엘지전자 주식회사 비디오 신호를 처리하기 위한 방법 및 장치
WO2020055161A1 (ko) * 2018-09-12 2020-03-19 엘지전자 주식회사 영상 코딩 시스템에서 서브 블록 단위의 움직임 예측에 기반한 영상 디코딩 방법 및 장치
WO2020117013A1 (ko) * 2018-12-06 2020-06-11 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
WO2020141935A1 (ko) * 2019-01-03 2020-07-09 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
WO2020141910A1 (ko) * 2019-01-02 2020-07-09 엘지전자 주식회사 화면간 예측을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105163116B (zh) * 2015-08-29 2018-07-31 华为技术有限公司 图像预测的方法及设备
CN108965871B (zh) 2015-09-29 2023-11-10 华为技术有限公司 图像预测的方法及装置
CN107027040B9 (zh) * 2016-01-29 2020-08-28 华为技术有限公司 一种去除块效应的滤波方法及装置
CN109804630A (zh) * 2016-10-10 2019-05-24 夏普株式会社 对视频数据编码执行运动补偿的系统以及方法
CN108271023B (zh) 2017-01-04 2021-11-19 华为技术有限公司 图像预测方法和相关设备
CN109391814B (zh) * 2017-08-11 2023-06-06 华为技术有限公司 视频图像编码和解码的方法、装置及设备
US10609384B2 (en) * 2017-09-21 2020-03-31 Futurewei Technologies, Inc. Restriction on sub-block size derivation for affine inter prediction
CN117014604A (zh) * 2017-09-28 2023-11-07 三星电子株式会社 编码方法和装置以及解码方法和装置
US20200236385A1 (en) * 2017-10-03 2020-07-23 Nec Corporation Video coding device, video decoding device, video coding method, video decoding method and program
JPWO2019069602A1 (ja) * 2017-10-03 2020-09-10 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、プログラムおよび映像システム
WO2019072210A1 (en) * 2017-10-13 2019-04-18 Huawei Technologies Co., Ltd. RESTRICTION ON SUB-BLOCK SIZE DEDUCTION FOR AFFINE INTERPREDITION
CN109729352B (zh) * 2017-10-27 2020-07-21 华为技术有限公司 确定仿射编码块的运动矢量的方法和装置
EP3499882A1 (en) * 2017-12-13 2019-06-19 Industrial Technology Research Institute Method and image processing apparatus for video coding
US20190208211A1 (en) * 2018-01-04 2019-07-04 Qualcomm Incorporated Generated affine motion vectors
US10757417B2 (en) * 2018-01-20 2020-08-25 Qualcomm Incorporated Affine motion compensation in video coding
EP3741121A1 (en) * 2018-02-14 2020-11-25 Huawei Technologies Co., Ltd. Adaptive interpolation filter
WO2019199152A1 (ko) * 2018-04-14 2019-10-17 엘지전자 주식회사 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
WO2019234598A1 (en) 2018-06-05 2019-12-12 Beijing Bytedance Network Technology Co., Ltd. Interaction between ibc and stmvp
CN116347099A (zh) 2018-06-19 2023-06-27 北京字节跳动网络技术有限公司 没有运动矢量预测截断的选择的运动矢量差精度
US10999596B2 (en) * 2018-06-19 2021-05-04 Qualcomm Incorporated Unification of affine motion field derivation and affine motion compensation
CN112385210B (zh) * 2018-06-20 2023-10-20 寰发股份有限公司 用于视频编解码的帧间预测的方法及装置
WO2019244117A1 (en) 2018-06-21 2019-12-26 Beijing Bytedance Network Technology Co., Ltd. Unified constrains for the merge affine mode and the non-merge affine mode
GB2589223B (en) 2018-06-21 2023-01-25 Beijing Bytedance Network Tech Co Ltd Component-dependent sub-block dividing
US11070813B2 (en) * 2018-06-29 2021-07-20 Intel Corporation Global motion estimation and modeling for accurate global motion compensation for efficient video processing or coding
US11758175B2 (en) * 2018-06-30 2023-09-12 B1 Institute Of Image Technology, Inc Image encoding/decoding method and apparatus
KR20210024487A (ko) * 2018-07-01 2021-03-05 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 효율적인 아핀 병합 모션 벡터 유도
KR102606146B1 (ko) 2018-07-02 2023-11-23 후아웨이 테크놀러지 컴퍼니 리미티드 모션 벡터 예측 방법 및 관련 장치
WO2020009449A1 (ko) * 2018-07-02 2020-01-09 엘지전자 주식회사 어파인 예측을 이용하여 비디오 신호를 처리하기 위한 방법 및 장치
WO2020031061A2 (en) * 2018-08-04 2020-02-13 Beijing Bytedance Network Technology Co., Ltd. Mvd precision for affine
KR20210046679A (ko) * 2018-08-27 2021-04-28 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 부호화 장치, 복호 장치, 부호화 방법 및 복호 방법
CN116647696A (zh) 2018-09-06 2023-08-25 Lg电子株式会社 图像解码方法、图像编码方法、存储介质和发送方法
CN116033150A (zh) * 2018-09-08 2023-04-28 北京字节跳动网络技术有限公司 不同视频块尺寸的仿射模式计算
CN110891176B (zh) * 2018-09-10 2023-01-13 华为技术有限公司 基于仿射运动模型的运动矢量预测方法及设备
TW202025737A (zh) * 2018-09-19 2020-07-01 大陸商北京字節跳動網絡技術有限公司 仿射模式中自適應運動矢量分辨率的快速算法
WO2020060344A1 (ko) * 2018-09-21 2020-03-26 엘지전자 주식회사 영상 신호를 처리하기 위한 방법 및 장치
US10834417B2 (en) * 2018-09-21 2020-11-10 Tencent America LLC Method and apparatus for video coding
EP3854078A1 (en) * 2018-09-21 2021-07-28 InterDigital VC Holdings, Inc. Translational and affine candidates in a unified list
CN110944206B (zh) 2018-09-23 2023-05-26 北京字节跳动网络技术有限公司 涉及仿射运动的一般应用
WO2020063599A1 (zh) * 2018-09-24 2020-04-02 华为技术有限公司 图像预测方法、装置以及相应的编码器和解码器
CN110944196B (zh) 2018-09-24 2023-05-30 北京字节跳动网络技术有限公司 简化的基于历史的运动矢量预测
WO2020070730A2 (en) * 2018-10-06 2020-04-09 Beijing Bytedance Network Technology Co., Ltd. Size restriction based on affine motion information
CN111010569B (zh) 2018-10-06 2023-02-28 北京字节跳动网络技术有限公司 Bio中的时间梯度计算的改善
WO2020094049A1 (en) 2018-11-06 2020-05-14 Beijing Bytedance Network Technology Co., Ltd. Extensions of inter prediction with geometric partitioning
CN112970262B (zh) 2018-11-10 2024-02-20 北京字节跳动网络技术有限公司 三角预测模式中的取整
JP2022028089A (ja) * 2018-12-17 2022-02-15 ソニーグループ株式会社 画像符号化装置、画像符号化方法、画像復号装置、および画像復号方法
CN111355961B (zh) * 2018-12-24 2023-11-03 华为技术有限公司 一种帧间预测的方法和装置
WO2020135368A1 (zh) * 2018-12-24 2020-07-02 华为技术有限公司 一种帧间预测的方法和装置
US11627335B2 (en) 2018-12-28 2023-04-11 Samsung Electronics Co., Ltd. Methods and apparatuses for encoding and decoding motion vector difference using sequence MMVD information
WO2020140862A1 (en) * 2018-12-30 2020-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditional application of inter prediction with geometric partitioning in video processing
EP3895429A4 (en) * 2019-01-31 2022-08-10 Beijing Bytedance Network Technology Co., Ltd. CONTEXT FOR CODE AN ADAPTIVE MOTION VECTOR RESOLUTION IN AFFINE MODE
US11134262B2 (en) 2019-02-28 2021-09-28 Tencent America LLC Method and apparatus for video coding
JP7026064B2 (ja) * 2019-03-11 2022-02-25 Kddi株式会社 画像復号装置、画像復号方法及びプログラム
WO2020181507A1 (zh) * 2019-03-12 2020-09-17 北京大学 图像处理的方法与装置
US11394993B2 (en) 2019-03-13 2022-07-19 Tencent America LLC Method and apparatus for affine inter prediction with small subblocks
US11343525B2 (en) 2019-03-19 2022-05-24 Tencent America LLC Method and apparatus for video coding by constraining sub-block motion vectors and determining adjustment values based on constrained sub-block motion vectors
WO2020233662A1 (en) * 2019-05-21 2020-11-26 Beijing Bytedance Network Technology Co., Ltd. Syntax signaling for optical-flow based inter coding
US11153598B2 (en) 2019-06-04 2021-10-19 Tencent America LLC Method and apparatus for video coding using a subblock-based affine motion model
US11330287B2 (en) 2019-06-28 2022-05-10 Tencent America LLC Method and apparatus for video coding
CN110636301B (zh) * 2019-09-18 2021-08-03 浙江大华技术股份有限公司 仿射预测方法、计算机设备和计算机可读存储介质
KR20220065879A (ko) * 2019-09-30 2022-05-20 후아웨이 테크놀러지 컴퍼니 리미티드 Dct 기반 보간 필터의 사용
CN115336272A (zh) * 2020-03-20 2022-11-11 北京达佳互联信息技术有限公司 基于空间邻域的仿射运动导出
WO2022026888A1 (en) * 2020-07-30 2022-02-03 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatuses for affine motion-compensated prediction refinement
CN113313628B (zh) * 2021-06-29 2023-02-03 河南工业大学 基于仿射变换和均值像素法的环状编码点鲁棒性识别方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997017797A2 (en) * 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5654771A (en) * 1995-05-23 1997-08-05 The University Of Rochester Video compression system using a dense motion vector field and a triangular patch mesh overlay model
DE69630643T2 (de) * 1995-08-29 2004-10-07 Sharp Kk Videokodierungsvorrichtung
JP3426092B2 (ja) * 1996-09-12 2003-07-14 シャープ株式会社 動画像符号化装置における動き補償フレーム間予測方法
US6775415B1 (en) * 1999-05-25 2004-08-10 George Mason University Fractal image compression using reinforcement learning
JP3681342B2 (ja) * 2000-05-24 2005-08-10 三星電子株式会社 映像コーディング方法
KR100359115B1 (ko) 2000-05-24 2002-11-04 삼성전자 주식회사 영상 코딩 방법
JP4355319B2 (ja) * 2002-01-24 2009-10-28 株式会社日立製作所 動画像復号化方法
US7408986B2 (en) * 2003-06-13 2008-08-05 Microsoft Corporation Increasing motion smoothness using frame interpolation with motion analysis
KR100631777B1 (ko) 2004-03-31 2006-10-12 삼성전자주식회사 다 계층의 모션 벡터를 효율적으로 압축하는 방법 및 장치
KR100586882B1 (ko) * 2004-04-13 2006-06-08 삼성전자주식회사 모션 스케일러빌리티를 지원하는 코딩 방법 및 장치
JP4340968B2 (ja) * 2004-05-07 2009-10-07 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
KR101003105B1 (ko) * 2008-01-29 2010-12-21 한국전자통신연구원 어파인 변환 기반의 움직임 보상을 이용한 비디오 부호화 및 복호화 방법 및 장치
JP4544334B2 (ja) 2008-04-15 2010-09-15 ソニー株式会社 画像処理装置および画像処理方法
WO2011070730A1 (ja) * 2009-12-07 2011-06-16 日本電気株式会社 映像符号化装置および映像復号装置
DK2559246T3 (en) 2010-04-13 2016-09-19 Ge Video Compression Llc Fusion of sample areas
CN102547261B (zh) * 2010-12-24 2016-06-15 上海电机学院 一种分形图像编码方法
CN102611884B (zh) 2011-01-19 2014-07-09 华为技术有限公司 图像编解码方法及编解码设备
US20140307798A1 (en) * 2011-09-09 2014-10-16 Newsouth Innovations Pty Limited Method and apparatus for communicating and recovering motion information
WO2013068564A1 (en) * 2011-11-11 2013-05-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Effective wedgelet partition coding using spatial prediction
EP3657796A1 (en) 2011-11-11 2020-05-27 GE Video Compression, LLC Efficient multi-view coding using depth-map estimate for a dependent view
US9769473B2 (en) * 2012-06-08 2017-09-19 Apple Inc. Predictive video coder with low power reference picture transformation
CN104704827B (zh) * 2012-11-13 2019-04-12 英特尔公司 用于下一代视频的内容自适应变换译码
RU2533852C2 (ru) * 2012-12-26 2014-11-20 Корпорация "САМСУНГ ЭЛЕКТРОНИКС Ко., Лтд." Способ кодирования/декодирования многоракурсной видеопоследовательности на основе адаптивной компенсации локальных различий яркости при межкадровом предсказании (варианты)
KR102121558B1 (ko) 2013-03-15 2020-06-10 삼성전자주식회사 비디오 이미지의 안정화 방법, 후처리 장치 및 이를 포함하는 비디오 디코더
JP6399433B2 (ja) * 2013-05-31 2018-10-03 サン パテント トラスト 画像符号化方法、画像復号方法、画像符号化装置及び画像復号装置
EP3022899A4 (en) * 2013-07-15 2016-08-03 Microsoft Technology Licensing Llc COMPRESSION OF IMAGE SET BASED ON CHARACTERISTICS
US9258446B2 (en) * 2013-10-16 2016-02-09 Fuji Xerox Co., Ltd. Image processing apparatus
US10554965B2 (en) * 2014-08-18 2020-02-04 Google Llc Motion-compensated partitioning
CN112087630B (zh) 2014-09-30 2022-04-08 华为技术有限公司 图像预测方法、装置、解码器及存储介质
CN104363451B (zh) * 2014-10-27 2019-01-25 华为技术有限公司 图像预测方法及相关装置
US20160316220A1 (en) * 2015-04-21 2016-10-27 Microsoft Technology Licensing, Llc Video encoder management strategies
JP7105706B2 (ja) * 2019-01-16 2022-07-25 三菱電機株式会社 パワーモジュール

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO1997017797A2 (en) * 1995-10-25 1997-05-15 Sarnoff Corporation Apparatus and method for quadtree based variable block size motion estimation

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Han Huang et al., "Affine SKIP and DIRECT modes for efficient video coding", 2012 Visual Communications and Image Processing, 2012.11.27.* *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11323696B2 (en) 2018-04-01 2022-05-03 Lg Electronics Inc. Image coding method based on affine motion prediction, and device for same
WO2019194507A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 움직임 예측에 기반한 영상 코딩 방법 및 그 장치
US11611744B2 (en) 2018-04-01 2023-03-21 Lg Electronics Inc. Image coding method based on affine motion prediction, and device for same
WO2019194506A1 (ko) * 2018-04-01 2019-10-10 엘지전자 주식회사 어파인 인터 예측에 기반한 영상 코딩 방법 및 그 장치
WO2019199127A1 (ko) * 2018-04-12 2019-10-17 삼성전자 주식회사 부호화 방법 및 그 장치, 복호화 방법 및 그 장치
US11509925B2 (en) 2018-04-12 2022-11-22 Samsung Electronics Co.. Ltd. Method and device for video encoding and video decoding motion vector information
US11601643B2 (en) 2018-04-13 2023-03-07 Lg Electronics Inc. Method and apparatus for inter prediction in video processing system
WO2019199067A1 (ko) * 2018-04-13 2019-10-17 엘지전자 주식회사 비디오 처리 시스템에서 인터 예측 방법 및 장치
US11102478B2 (en) 2018-04-13 2021-08-24 Lg Electronics Inc. Method and apparatus for inter prediction in video processing system
US11943470B2 (en) 2018-04-24 2024-03-26 Lg Electronics Inc. Method and apparatus for inter prediction in video coding system
US11622125B2 (en) 2018-04-24 2023-04-04 Lg Electronics Inc. Method and apparatus for inter prediction in video coding system
WO2019209026A1 (ko) * 2018-04-24 2019-10-31 엘지전자 주식회사 비디오 코딩 시스템에서 인터 예측 방법 및 장치
US11109058B2 (en) 2018-04-24 2021-08-31 Lg Electronics Inc. Method and apparatus for inter prediction in video coding system
WO2019231256A1 (ko) * 2018-05-30 2019-12-05 엘지전자 주식회사 어파인 움직임 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치
WO2019235819A1 (ko) * 2018-06-04 2019-12-12 엘지전자 주식회사 비디오 신호를 처리하기 위한 방법 및 장치
WO2020055161A1 (ko) * 2018-09-12 2020-03-19 엘지전자 주식회사 영상 코딩 시스템에서 서브 블록 단위의 움직임 예측에 기반한 영상 디코딩 방법 및 장치
US11228783B2 (en) 2018-09-12 2022-01-18 Lg Electronics Inc. Image decoding method and apparatus based on motion prediction in sub-block unit in image coding system
US10904561B2 (en) 2018-09-12 2021-01-26 Lg Electronics Inc. Image decoding method and apparatus based on motion prediction in sub-block unit in image coding system
US11616975B2 (en) 2018-09-12 2023-03-28 Lg Electronics Inc. Image decoding method and apparatus based on motion prediction in sub-block unit in image coding system
US11889106B2 (en) 2018-09-12 2024-01-30 Lg Electronics Inc. Image decoding method and apparatus based on motion prediction in sub-block unit in image coding system
US11528484B2 (en) 2018-12-06 2022-12-13 Lg Electronics Inc. Method and apparatus for processing video signal on basis of inter prediction
WO2020117013A1 (ko) * 2018-12-06 2020-06-11 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치
WO2020141910A1 (ko) * 2019-01-02 2020-07-09 엘지전자 주식회사 화면간 예측을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치
WO2020141935A1 (ko) * 2019-01-03 2020-07-09 엘지전자 주식회사 인터 예측을 기반으로 비디오 신호를 처리하기 위한 방법 및 장치

Also Published As

Publication number Publication date
AU2016264380A1 (en) 2017-12-14
US11949908B2 (en) 2024-04-02
US20180070102A1 (en) 2018-03-08
KR20190122914A (ko) 2019-10-30
WO2016184261A1 (zh) 2016-11-24
BR112017024467A2 (pt) 2018-07-24
RU2689426C1 (ru) 2019-05-28
US10887618B2 (en) 2021-01-05
CN109005407A (zh) 2018-12-14
MY183126A (en) 2021-02-15
CA2985868C (en) 2022-11-29
AU2016264380B2 (en) 2018-10-18
JP6978944B2 (ja) 2021-12-08
JP2020174373A (ja) 2020-10-22
SG11201709418UA (en) 2017-12-28
MX2017014652A (es) 2018-04-11
JP7260620B2 (ja) 2023-04-18
KR102257653B1 (ko) 2021-05-27
CN109005407B (zh) 2023-09-01
JP2023089084A (ja) 2023-06-27
US20210105502A1 (en) 2021-04-08
KR102297921B1 (ko) 2021-09-02
ES2900232T3 (es) 2022-03-16
US20190335196A1 (en) 2019-10-31
KR20200102541A (ko) 2020-08-31
US20230077431A1 (en) 2023-03-16
EP3291557A4 (en) 2018-03-28
CN106303543B (zh) 2018-10-30
EP3291557A1 (en) 2018-03-07
CN106303543A (zh) 2017-01-04
US10390036B2 (en) 2019-08-20
KR102148804B1 (ko) 2020-08-27
US11490115B2 (en) 2022-11-01
JP6978552B2 (ja) 2021-12-08
CA2985868A1 (en) 2016-11-24
EP3291557B1 (en) 2021-11-03
EP4033765A1 (en) 2022-07-27
JP2018520558A (ja) 2018-07-26
MX2020011278A (es) 2020-11-13
HK1244984A1 (zh) 2018-08-17
JP2022010251A (ja) 2022-01-14

Similar Documents

Publication Publication Date Title
JP7260620B2 (ja) 動画像符号化方法、動画像復号化方法、符号化装置および復号化装置
CN110754089B (zh) 减少360度视频中的接缝伪影
CN108600749B (zh) 图像预测的方法及设备
CN101167369B (zh) 帧速率上转换应用中的经内插帧解块方法及装置
JP2020529811A (ja) ビデオ画像符号化および復号方法、装置、およびデバイス
JP2014060805A (ja) ビデオ画像の刈り取り方法及び装置
WO2017005141A1 (zh) 参考图像编码和解码的方法、编码设备和解码设备
BR112017024467B1 (pt) Método de codificação de imagem de vídeo, método de decodificação de imagem de vídeo, dispositivo de codificação, e dispositivo de decodificação
RU2808688C2 (ru) Способ и устройство предсказания изображения
RU2771955C2 (ru) Устройство, оборудование, способ кодирования и декодирования видеоизображений

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
A107 Divisional application of patent
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL NUMBER: 2019101003517; TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20191024

Effective date: 20210114

E902 Notification of reason for refusal
GRNO Decision to grant (after opposition)
GRNT Written decision to grant