KR20240005233A - 인코딩 및 디코딩 방법, 장치 및 그 기기 - Google Patents

인코딩 및 디코딩 방법, 장치 및 그 기기 Download PDF

Info

Publication number
KR20240005233A
KR20240005233A KR1020237045155A KR20237045155A KR20240005233A KR 20240005233 A KR20240005233 A KR 20240005233A KR 1020237045155 A KR1020237045155 A KR 1020237045155A KR 20237045155 A KR20237045155 A KR 20237045155A KR 20240005233 A KR20240005233 A KR 20240005233A
Authority
KR
South Korea
Prior art keywords
block
prediction value
value
current block
sub
Prior art date
Application number
KR1020237045155A
Other languages
English (en)
Inventor
팡둥 천
Original Assignee
항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드 filed Critical 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Publication of KR20240005233A publication Critical patent/KR20240005233A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

본 발명은 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하며, 상기 방법은, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다. 본 발명의 기술적 해결수단을 통해, 인코딩 성능을 향상시킬 수 있다.

Description

인코딩 및 디코딩 방법, 장치 및 그 기기{ENCODING AND DECODING METHOD AND APPARATUS, AND DEVICE THEREFOR}
본 발명은 인코딩 및 디코딩 기술 분야에 관한 것으로, 특히는 인코딩 및 디코딩 방법, 장치 및 그 기기에 관한 것이다.
공간을 절약하는 목적에 도달하기 위해, 비디오 이미지는 모두 인코딩을 거친 후 송신되고, 완전한 비디오 인코딩 방법은 예측, 변환, 양자화, 엔트로피 인코딩, 필터링 등 과정을 포함할 수 있다. 여기서, 예측 인코딩은 인트라 인코딩 및 인터 인코딩을 포함할 수 있고, 인터 인코딩은 비디오 시간 영역의 상관성을 이용하여, 이미 인코딩된 이미지에 가까운 픽셀을 사용하여 현재 이미지의 픽셀을 예측하여, 비디오 시간 영역 중복을 효과적으로 제거하는 목적을 달성시킨다.
인터 인코딩에 있어서, 움직임 벡터(Motion Vector, MV)를 사용하여 현재 프레임 비디오 이미지의 현재 블록과 참조 프레임 비디오 이미지의 참조 블록 사이의 상대 변위를 가리킬 수 있다. 예를 들면, 현재 프레임의 비디오 이미지 A와 참조 프레임의 비디오 이미지 B에 매우 강한 시간 영역 상관성이 존재하고, 비디오 이미지 A의 이미지 블록 A1(현재 블록)을 송신해야 할 경우, 비디오 이미지 B에서 움직임 검색하여, 이미지 블록 A1과 가장 매칭되는 이미지 블록 B1(즉 참조 블록)을 찾을 수 있으며, 이미지 블록 A1과 이미지 블록 B1 사이의 상대 변위를 결정하고, 상기 상대 변위는 즉 이미지 블록 A1의 움직임 벡터이다.
인코딩단은 움직임 벡터를 디코딩단에 송신하는 것으로, 이미지 블록 A1을 디코딩단에 송신하는 것이 아니며, 디코딩단은 움직임 벡터 및 이미지 블록 B1에 따라 이미지 블록 A1을 획득할 수 있다. 물론, 움직임 벡터가 차지하는 비트 수는 이미지 블록 A1이 차지하는 비트 수보다 훨씬 적기에 상기 방식은 대량의 비트 지출을 절감할 수 있다.
기존의 방식에서, 현재 블록이 단방향 블록일 경우, 현재 블록의 움직임 정보를 획득한 후, 상기 움직임 정보에 따라 인코딩/디코딩을 진행함으로써, 인코딩 성능을 향상시킬 수 있다. 그러나, 현재 블록이 양방향 블록일 경우, 현재 블록의 양방향 움직임 정보를 획득한 후, 양방향 움직임 정보에 따라 두개의 상이한 방향에서 온 예측 이미지를 획득할 수 있으며, 두개의 상이한 방향에서 온 예측 이미지는 흔히 거울 대칭의 관계가 존재하고, 현재 인코딩 프레임워크에서 이러한 특징을 충분하게 이용하여 중복을 부가적으로 제거하지 않았다. 즉, 양방향 블록에 대한 응용 시나리오는 현재 인코딩 성능이 비교적 떨어지는 등 문제가 존재한다.
본 발명은 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하여, 인코딩 성능을 향상시킬 수 있다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 적어도, 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하는 것; 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않으며, 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 상기 현재 블록에 대응되는 상기 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 가중치가 동일한 것; 및 현재 블록의 폭 값, 높이 값 및 면적 값이 모두 한정 범위 내에 있는 것; 중의 조건을 동시에 만족하며;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계; 및
상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값을 결정하고, 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값에 따라 상기 서브 블록의 타깃 예측 값을 결정하는 단계를 포함할 수 있다.
상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 4x4 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록 중의 각각의 4x4 블록에 대해, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수직 방향 속도를 결정하는 단계;
상기 4x4 블록의 수평 방향 속도 및 상기 4x4 블록의 수직 방향 속도에 따라 상기 4x4 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계를 포함할 수 있다.
상기 현재 블록의 움직임 정보는 제1 움직임 벡터 및 제1 참조 프레임 인덱스, 제2 움직임 벡터 및 제2 참조 프레임 인덱스를 포함하고;
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계는,
상기 제1 움직임 벡터 및 상기 제1 참조 프레임 인덱스에 따라 상기 서브 블록의 제1 원래 예측 값을 결정하고, 상기 제2 움직임 벡터 및 상기 제2 참조 프레임 인덱스에 따라 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계를 포함할 수 있다.
상기 제1 움직임 벡터 및 상기 제1 참조 프레임 인덱스에 따라 상기 서브 블록의 제1 원래 예측 값을 결정하고, 상기 제2 움직임 벡터 및 상기 제2 참조 프레임 인덱스에 따라 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계는,
제1 움직임 벡터에 기반하여 제1 참조 프레임 인덱스에 대응되는 제1 참조 프레임에서 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 예측 값에 기반하여 상기 제1 원래 예측 값을 결정하는 단계; 및
제2 움직임 벡터에 기반하여 제2 참조 프레임 인덱스에 대응되는 제2 참조 프레임에서 제2 참조 블록을 결정하고, 상기 제2 참조 블록의 예측 값에 기반하여 상기 제2 원래 예측 값을 결정하는 단계를 포함하고;
상기 제1 참조 블록의 예측 값은 상기 제1 참조 블록 중심 영역의 예측 값 및 상기 제1 참조 블록 가장자리 영역의 예측 값을 포함하고, 상기 제1 참조 블록 중심 영역의 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제1 참조 블록 가장자리 영역의 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 복사하여 얻은 것이고; 상기 제2 참조 블록의 예측 값은 상기 제2 참조 블록 중심 영역의 예측 값 및 상기 제2 참조 블록 가장자리 영역의 예측 값을 포함하며, 상기 제2 참조 블록 중심 영역의 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이고, 상기 제2 참조 블록 가장자리 영역의 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것일 수 있다.
상기 제1 참조 블록의 가장자리 영역은 상기 중심 영역 이외의 상하좌우 각 1행 1열의 영역이고, 상기 제1 참조 블록 가장자리 영역의 예측 값은 제1 참조 프레임에서 상기 제1 참조 블록 가장자리 영역에 가장 가까운 완전 픽셀 값에 대해 복사하여 얻은 것이며; 상기 제2 참조 블록의 가장자리 영역은 상기 중심 영역 이외의 상하좌우 각 1행 1열의 영역이고, 상기 제2 참조 블록 가장자리 영역의 예측 값은 제2 참조 프레임에서 상기 제2 참조 블록 가장자리 영역에 가장 가까운 완전 픽셀 값에 대해 복사하여 얻은 것일 수 있다.
상기 현재 블록이 1개의 서브 블록을 포함할 경우, 상기 서브 블록은 현재 블록 자체이고, 상기 현재 블록이 복수 개의 서브 블록을 포함할 경우, 상기 복수 개의 서브 블록의 움직임 정보는 상기 현재 블록의 움직임 정보와 동일할 수 있다.
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계는,
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값을 결정하고, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계를 포함하고,
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수직 방향 속도를 결정하는 단계는,
상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값에 따라 상기 4x4 블록의 수직 방향 속도를 결정하는 단계를 포함하며,
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계는,
상기 4x4 블록의 제1 예측 값, 상기 4x4 블록의 제2 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계를 포함할 수 있다.
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값을 결정하는 단계는,
상기 4x4 블록이 상기 제1 참조 블록에서 대응되는 6x6 블록을 결정하고, 상기 제1 참조 블록의 상기 제1 원래 예측 값에 따라 상기 6x6 블록의 예측 값을 획득하고, 상기 6x6 블록의 예측 값을 상기 4x4 블록의 상기 제1 예측 값으로 결정하는 단계; 및
상기 4x4 블록이 상기 제2 참조 블록에서 대응되는 6x6 블록을 결정하고, 상기 제2 참조 블록의 상기 제2 원래 예측 값에 따라 상기 6x6 블록의 예측 값을 획득하고, 상기 6x6 블록의 예측 값을 상기 4x4 블록의 상기 제2 예측 값으로 결정하는 단계를 포함할 수 있다.
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 4x4 블록의 수평 방향 속도및 수직 방향 속도를 결정하는 단계는,
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수평 방향 기울기 합의 자기 상관 계수 S1, 상기 4x4 블록의 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수 S2, 상기 4x4 블록의 시간 영역 예측 값 차분값과 수평 방향 기울기 합의 상호 상관 계수 S3, 상기 4x4 블록의 수직 방향 기울기 합의 자기 상관 계수 S5, 상기 4x4 블록의 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수 S6을 결정하는 단계; 및
상기 S1, 상기 S2, 상기 S3, 상기 S5 및 상기 S6에 따라 상기 4x4 블록의 수평 방향 속도 및 수직 방향 속도를 결정하는 단계를 포함하고;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 S1, S2, S3, S5 및 S6을 결정하는 단계는,
상기 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 4x4 블록의 수평 방향 기울기 합, 상기 4x4 블록의 수직 방향 기울기 합, 상기 4x4 블록의 시간 영역 예측 값 차분값을 결정하는 단계; 및
상기 수평 방향 기울기 합, 상기 수직 방향 기울기 합, 상기 시간 영역 예측 값 차분값에 따라, 상기 4x4 블록의 상기 S1, 상기 4x4 블록의 상기 S2, 상기 4x4 블록의 상기 S3, 상기 4x4 블록의 상기 S5, 상기 4x4 블록의 상기 S6을 결정하는 단계를 포함할 수 있다.
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 4x4 블록의 수평 방향 속도를 결정하는 단계는,
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 결정함 상기 4x4 블록의 수평 방향 기울기 합의 자기 상관 계수 S1, 상기 4x4 블록의 시간 영역 예측 값 차분값과 수평 방향 기울기 합의 상호 상관 계수 S3을 결정하는 단계; 및 상기 S1, 속도 임계값, 상기 S3에 따라 상기 4x4 블록의 수평 방향 속도를 결정하는 단계를 포함하고; 상기 속도 임계값은 2의 M 제곱이고, M은 양의 정수이며;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 4x4 블록의 수직 방향 속도를 결정하는 단계는,
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 4x4 블록의 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수 S2, 상기 4x4 블록의 수직 방향 기울기 합의 자기 상관 계수 S5, 상기 4x4 블록의 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수 S6을 결정하는 단계; 및 상기 S2, 상기 S5, 상기 S6, 속도 임계값 및 상기 4x4 블록의 수평 방향 속도에 따라 상기 4x4 블록의 수직 방향 속도를 결정하는 단계를 포함하고, 상기 속도 임계값은 2의 M 제곱이고, M은 양의 정수이며;
상기 4x4 블록의 수평 방향 속도 및 상기 4x4 블록의 수직 방향 속도에 따라 상기 4x4 블록의 예측 보상 값을 획득하는 단계는,
제1 원래 예측 값, 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 상기 4x4 블록의 수평 방향 기울기 및 상기 4x4 블록의 수직 방향 기울기를 결정하고, 상기 4x4 블록의 수평 방향 속도, 상기 4x4 블록의 수직 방향 속도, 상기 4x4 블록의 수평 방향 기울기 및 상기 4x4 블록의 상기 수직 방향 기울기에 따라, 상기 4x4 블록의 예측 보상 값을 획득하는 단계를 포함할 수 있다.
상기 현재 블록에 포함되는 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 현재 서브 블록이 특정 조건을 만족하는지의 여부를 판정하고, 특정 조건을 만족하면, 양방향 광학 흐름에 기반하여 상기 서브 블록에 대해 예측 보상을 진행하는 과정을 스킵하며, 상기 양방향 광학 흐름에 기반하여 상기 서브 블록에 대해 예측 보상을 진행하는 과정은, 상기 서브 블록에 대해, 상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계; 및 상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값을 결정하고, 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값에 따라 상기 서브 블록의 타깃 예측 값을 결정하는 단계를 포함할 수 있다.
상기 서브 블록의 SAD 값과 하나의 서브 블록 임계값의 관계에 따라 양방향 광학 흐름에 기반하여 상기 서브 블록에 대해 예측 보상을 진행하는 과정을 스킵할 지의 여부를 결정하고; 상기 서브 블록의 SAD 값은 제1 예측 블록 수직 2배 다운샘플링한 후의 예측 값과 제2 예측 블록 수직 2배 다운샘플링한 후의 예측 값의 절대차이 값의 합이며; 상기 제1 예측 블록은 현재 블록의 제1 움직임 벡터에 따라 상기 제1 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록이고, 상기 제2 예측 블록은 현재 블록의 제2 움직임 벡터에 따라 상기 제2 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록일 수 있다.
상기 현재 블록이 양방향 예측을 사용하고, 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 현재 블록에 대응되는 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것은, 현재 프레임의 디스플레이 시퀀스 번호가 POC이고, 현재 블록에 대응되는 두 개의 참조 프레임의 디스플레이 시퀀스 번호가 각각 POC0 및 POC1이면, 두 개의 참조 프레임의 방향이 상이하며, (POC- POC0)*(POC- POC1)<0과 동등하며, 두 개의 참조 프레임과 현재 프레임의 거리가 동일하고, (POC- POC0)의 값은 (POC1- POC)의 값에 동등하고;
현재 블록에 대응되는 두 개의 참조 프레임의 가중치가 동일한 것은, 현재 프레임은 프레임 레벨 가중치 예측 방법을 활성화하도록 허용하고, 현재 프레임의 두 개의 가중치는 완전히 동일하며; 및 현재 블록은 블록 레벨 가중치 예측 방법 BCW 활성화하도록 허용하고, 현재 블록의 두 개의 가중치는 완전히 동일하며;
현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않는 것은, 현재 블록이 Affine 모드 및 SBTMVP 모드를 사용하지 않는 것을 포함하고; Affine 모드는 아핀 움직임 모델 모드이며, SBTMVP 모드는 시간 영역에서 전체 블록의 움직임 정보를 획득하는 모드이고;
상기 현재 블록의 폭 값, 높이 값 및 면적 값이 모두 한정 범위 내에 있는 것은,
현재 블록의 폭이 8보다 크거나 같고, 현재 블록의 높이가 8보다 크거나 같으며, 현재 블록의 폭과 높이의 곱셈이 128보다 크거나 같은 것을 포함할 수 있다.
개시되는 일 실시예에 따른 디코딩 장치는, 상기 디코딩 방법을 수행도록 구성된다.
개시되는 일 실시예에 따른 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 비디오 디코딩 기기는,
상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
상기 프로세서는 기계 실행 가능한 명령을 실행하여, 제1항 내지 제14항 중 어느 한 항에 따른 디코딩 방법을 구현한다.
개시되는 일 실시예에 따른 전자 기기는, 프로세서; 프로세서에 의해 실행 가능한 명령이 저장된 메모리를 포함하고,상기 프로세서는 상기 디코딩 방법의 단계를 수행하도록 구성된다.
개시되는 일 실시예에 따른 명령이 저장된 비휘발성 저장 매체는, 상기 명령이 프로세서에 의해 실행될 경우 상기 디코딩 방법를 구현한다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 적어도, 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 조건을 만족하며;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 적어도, 현재 블록의 폭이 8보다 크거나 같고, 현재 블록의 높이가 8보다 크거나 같으며, 현재 블록의 폭과 높이의 곱셈이 128보다 크거나 같은 조건을 만족하며;
스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하는 것; 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않으며, 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 상기 현재 블록에 대응되는 상기 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 가중치가 동일한 것; 및 현재 블록의 폭 값, 높이 값 및 면적 값이 모두 한정 범위 내에 있는 것; 중의 조건을 동시에 만족하며;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 적어도, 현재 블록의 폭이 8보다 크거나 같고, 현재 블록의 높이가 8보다 크거나 같으며, 현재 블록의 폭과 높이의 곱셈이 128보다 크거나 같은 것; 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 것; 중의 조건을 동시에 만족하며;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 적어도, 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 상기 현재 블록에 대응되는 상기 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 중의 조건을 만족하며;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
개시되는 일 실시예에 따른 디코딩 방법은,
상기 디코딩 방법은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하고,
현재 블록이 양방향 광학 흐름 모드를 활성화하지 않는 경우, 현재 블록이 적어도, 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하는 것; 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않으며, 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 상기 현재 블록에 대응되는 상기 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 가중치가 동일한 것; 및 현재 블록의 폭 값, 높이 값 및 면적 값이 모두 한정 범위 내에 있는 것; 중의 적어도 하나조건을 만족하지 않으며;
현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않는 것은, 현재 블록이 Affine 모드를 사용하지 않는 것; 현재 블록이 SBTMVP 모드를 사용하지 않는 것을 포함하고;
상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
상기 현재 블록의 하나 또는 복수의 서브 블록 중의 각각의 서브 블록에 대해, 상기 서브 블록의 타깃 예측 값을 결정하고, 상기 현재 블록에 포함되는 모든 서브 블록의 타깃 예측 값에 따라 상기 현재 블록의 예측 값을 결정하는 단계를 포함하고,
상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함한다.
개시되는 일 실시예에 따른 디코딩 장치는, 상기 디코딩 방법을 수행도록 구성된다.
개시되는 일 실시예에 따른 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 비디오 디코딩 기기는,
상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
상기 프로세서는 기계 실행 가능한 명령을 실행하여, 상기 디코딩 방법을 구현한다.
개시되는 일 실시예에 따른 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 비디오 디코딩 장치는,
상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
상기 프로세서는 기계 실행 가능한 명령을 실행하여, 상기 디코딩 방법을 구현한다.
개시되는 일 실시예에 따른 명령이 저장된 비휘발성 저장 매체는, 상기 명령이 프로세서에 의해 실행될 경우 상기 디코딩 방법을 구현한다.
본 발명은 인코딩 및 디코딩 방법을 제공하는 바, 상기 방법은, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해,
상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계;
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
본 발명은 인코딩 및 디코딩 장치를 제공하며, 상기 장치는 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 상기 장치는,
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 제1 결정 모듈;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하고; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 제2 결정 모듈;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 제1 획득 모듈; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 제2 획득 모듈을 포함한다.
본 발명은 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 인코딩단 기기를 제공하며, 상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고; 상기 프로세서는 기계 실행 가능한 명령을 실행하여, 현재 블록의 특징 정보가 특정 조건을 만족하면, 하기의 단계를 수행하여 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하는 바, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 구현한다.
본 발명은 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 디코딩단 기기를 제공하며, 상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고; 상기 프로세서는 기계 실행 가능한 명령을 실행하여, 현재 블록의 특징 정보가 특정 조건을 만족하면, 하기의 단계를 수행하여 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하는 바, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 구현한다.
상기 기술적 해결수단으로부터 보면, 본 발명의 실시예에 있어서, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정할 수 있고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도 및 수직 방향 속도를 결정하고, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하며, 예측 보상 값에 따라 타깃 예측 값을 획득한다. 상기 방식은 광학 흐름법에 기반하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반한다.
본 발명의 실시예의 기술적 해결수단을 더욱 분명하게 설명하기 위해, 이해 본 발명의 실시예의 서술에 필요한 도면을 간단하게 소개하는 바, 아래에서 설명되는 도면은 단지 본 발명에 기재된 일부 실시예로서, 본 기술분야의 통상의 기술자에게 있어서 본 발명의 실시예의 이러한 도면에 따라 다른 도면을 획득할 수도 있음은 자명하다.
도 1a는 본 발명의 일 실시형태에 따른 보간의 모식도이다.
도 1b는 본 발명의 일 실시형태에 따른 비디오 인코딩 프레임워크의 모식도이다.
도 2는 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 방법의 흐름도이다.
도 3은 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 방법의 흐름도이다.
도 4는 본 발명의 일 실시형태에 따른 현재 블록의 서브 블록에 대응되는 참조 블록의 모식도이다.
도 5는 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 장치의 구조도이다.
도 6은 본 발명의 일 실시형태에 따른 디코딩단 기기의 하드웨어 구조도이다.
도 7은 본 발명의 일 실시형태에 따른 인코딩단 기기의 하드웨어 구조도이다.
본 발명의 실시예에서 사용되는 용어는 단지 특정 실시예를 설명하기 위한 목적일 뿐, 본 발명을 한정하려는 것이 아니다. 본 발명 및 청구보호범위에서 사용되는 단수 형태의 “일”, “상기” 및 “해당”은 문맥 상에서 다른 의미를 명확하게 나타내지 않는 한, 복수의 형태를 포함하도록 의도된다. 더 이해해야 할 것은, 본문에 사용되는 용어 “및/또는”은 하나 또는 다수의 관련된 열거 항목을 포함하는 임의의 또는 모든 가능한 조합을 의미한다. 이해해야 할 것은, 본 발명의 실시예는 용어 제1, 제2, 제3 등을 사용하여 다양한 정보를 설명할 수 있지만, 이러한 정보는 이러한 용어에 한정되는 것이 아니다. 이러한 용어는 단지 동일한 유형의 정보를 서로 구분하기 위한 것이다. 예를 들어, 본 발명의 범위를 벗어나지 않는 경우, 제1 정보는 제2 정보로도 지칭될 수 있고, 유사하게, 제2 정보도 제1 정보로 지칭될 수 있다. 언어 환경에 따르면, 사용되는 단어 “만약”은 “...일 때” 또는 “...일 경우” 또는 “에 응답하여 결정한다”로 해석될 수 있다.
본 발명의 실시예에서 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하는 바, 하기와 같은 개념에 관련될 수 있다.
인트라 예측과 인터 예측(intra prediction and inter prediction) 기술: 인트라 예측은, 비디오 공간 영역의 상관성을 이용하는 것이며, 현재 이미지의 코딩된 블록의 픽셀을 사용하여 현재 픽셀을 예측하여 비디오 공간 영역 중복을 제거하는 목적에 달성한다. 인터 예측은 비디오 시간 영역의 상관성을 이용하는 것이며, 비디오 시퀀스에는 일반적으로 비교적 강한 시간 영역 상관성이 포함되므로, 인접한 인코딩된 이미지 픽셀을 사용하여 현재 이미지의 픽셀을 예측하여, 비디오 시간 영역 중복을 효과적으로 제거하는 목적에 달성할 수 있다. 비디오 인코딩 표준 인터 예측 부분은 모두 블록 기반의 움직임 보상 기술을 사용하였으며, 원리는 현재 이미지의 각각의 픽셀 블록이 이전의 코딩된 이미지에서 하나의 최적 매칭 블록을 찾는 것이며, 상기 과정은 움직임 추정(Motion Estimation, ME)으로 지칭된다.
움직임 벡터(Motion Vector, MV): 인터 인코딩에서, 움직임 벡터를 사용하여 현재 인코딩 블록과 이의 참조 이미지 중 최적 매칭 블록 사이의 상대 변위를 나타낼 수 있다. 각각의 분할된 블록은 모두 디코딩단으로 전송되는 상응한 움직임 벡터를 가지며, 각각의 블록의 움직임 벡터에 대해 독립적인 인코딩 및 전송을 수행할 경우, 특히 작은 사이즈의 블록으로 분할할 경우, 상당히 많은 비트가 소모되어야 한다. 움직임 벡터의 인코딩에 사용되는 비트 수를 감소시키기 위해, 인접한 이미지 블록 사이의 공간 상관성을 이용하여, 인접한 인코딩된 블록의 움직임 벡터에 따라 현재 인코딩할 블록의 움직임 벡터를 예측한 다음, 예측 차이에 대해 인코딩을 수행한다. 이로써, 움직임 벡터를 나타내는 비트 수를 효과적으로 감소시킬 수 있다. 현재 블록의 움직임 벡터에 대한 인코딩 과정에서, 우선 인접한 인코딩된 블록의 움직임 벡터를 사용하여 현재 블록의 움직임 벡터를 예측한 다음, 움직임 벡터의 예측값(MVP, Motion Vector Prediction)과 움직임 벡터의 실제 추정값 사이의 차분값(MVD, Motion Vector Difference)에 대해 인코딩을 수행함으로써, MV의 인코딩 비트 수를 효과적으로 감소시킨다.
움직임 정보(Motion Information): 움직임 벡터는 현재 이미지 블록과 특정된 참조 이미지 블록의 위치 오프셋을 표시하므로, 이미지 블록을 지향하는 정보를 정확하게 획득하기 위해, 움직임 벡터 외에도 참조 프레임 이미지의 인덱스 정보로 어느 참조 프레임 이미지를 사용할 것인지 표시해야 한다. 비디오 인코딩 기술에서, 현재 프레임 이미지에 대해 일반적으로 하나의 참조 프레임 이미지 리스트를 구축할 수 있으며, 참조 프레임 이미지 인덱스 정보는 현재 이미지 블록이 참조 프레임 이미지 리스트 중 몇 번째 참조 프레임 이미지를 사용하였는지 표시한다. 이밖에, 많은 인코딩 기술은 또한 복수의 참조 이미지 리스트를 지원하므로, 하나의 인덱스값을 사용하여 어느 참조 이미지 리스트를 사용하였는지 표시할 수 있으며, 이 인덱스값은 참조 방향으로 지칭될 수 있다. 비디오 인코딩 기술에서, 움직임 벡터, 참조 프레임 인덱스, 참조 방향과 같은 움직임과 관련된 정보를 움직임 정보로 통칭할 수 있다.
보간(Interpolation): 현재 움직임 벡터가 비정수 픽셀 정밀도이면, 대응되는 참조 프레임으로부터 기존의 픽셀 값을 직접 복제할 수 없으며, 필요한 픽셀 값은 보간을 통해서만 획득된다. 도 1a에 도시된 바와 같이, 1/2 픽셀의 오프셋인 픽셀 값 Y1/2를 얻으려면, 주변에 있는 기존의 픽셀 값 X는 보간을 통해 획득해야 한다. N개의 탭을 가진 보간 필터를 사용하려면, 주변에 N개의 전체 픽셀은 보간을 통해 획득해야 한다. 탭의 개수 N이 8이면, 이고, 는 필터 계수이고, 즉 가중 계수이다.
움직임 보상: 움직임 보상은 보간 또는 복제를 통해 현재 블록의 모든 픽셀 값을 획득하는 과정이다.
비디오 인코딩 프레임워크: 도 1b에 도시된 바와 같이, 비디오 인코딩 프레임워크을 사용하여 본 발명의 실시예의 인코딩단 처리 프로세스를 구현할 수 있으며, 이밖에, 비디오 디코딩 프레임의 모식도는 도 1b와 유사하기에 여기서 더이상 서술하지 않는다. 또한 비디오 디코딩 프레임을 사용하여 본 발명의 실시예의 디코딩단 처리 프로세스를 구현할 수 있다. 구체적으로, 비디오 인코딩 프레임워크 및 비디오 디코딩 프레임에는, 인트라 예측, 움직임 추정/움직임 보상, 참조 이미지 버퍼, 인 루프 필터링, 재구성, 변환, 양자화, 역변환, 역 양자화, 엔트로피 인코더 등 모듈이 포함될 수 있다. 인코딩단에서 이러한 모듈 사이의 배합을 통해, 인코딩단 처리 프로세스를 구현할 수 있고, 디코딩단에서 이러한 모듈 사이의 배합을 통해, 디코딩단 처리 프로세스를 구현할 수 있다.
기존의 방식에서, 현재 블록이 양방향 블록일 경우(즉 현재 블록은 양방향 예측의 블록을 사용함), 두개의 상이한 방향에서 온 예측 이미지에 흔히 거울 대칭의 관계가 존재하고, 현재 인코딩 프레임워크에서 이러한 특징을 충분하게 이용하여 중복을 부가적으로 제거하지 않았기에, 인코딩 성능이 상대적으로 떨어지는 등 문제가 존재한다. 상기 발견에 대해, 본 발명의 실시예에 있어서, 현재 블록이 양방향 블록일 경우, 광학 흐름법에 기반한 예측 신호 조절 방식을 제기하여, 원래 움직임 정보에 기반하여 원래 예측 값을 획득하고, 원래 예측 값에 기반하여 광학 흐름 방정식을 통해 현재 블록의 예측 보상 값을 획득하고, 상기 예측 보상 값과 원래 예측 값에 기반하여 현재 블록의 타깃 예측 값을 획득할 수 있다. 상기 방식은 광학 흐름법에 기반하여 현재 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반하며, 즉 인코딩 성능 및 인코딩 효율을 향상시킬 수 있다.
아래에 다수의 구체적인 실시예를 결부하여, 본 발명의 인코딩 및 디코딩 방법에 대해 상세하게 설명한다.
실시예 1: 도 2에 도시된 바와 같이, 인코딩 및 디코딩 방법의 흐름 모식도이고, 상기 방법은 디코딩단 또는 인코딩단에 적용될 수 있으며, 상기 방법은 하기의 단계를 수행하는 것을 통해 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득한다. 현재 블록에 대해 하기의 단계를 수행하면, 현재 블록의 타깃 예측 값을 획득할 수 있고; 현재 블록이 적어도 하나의 서브 블록으로 분할되면, 현재 블록의 각각의 서브 블록에 대하여 하기의 단계를 수행하여, 현재 블록의 서브 블록의 타깃 예측 값을 획득할 수 있는 바, 상기 방법은 하기의 단계를 포함한다.
단계 201: 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정한다.
예시적으로, 현재 블록은 양방향 블록(즉 현재 블록은 양방향 예측 블록을 사용함)일 수 있고, 즉 현재 블록에 대응되는 움직임 정보는 양방향 움직임 정보이고, 이 양방향 움직임 정보는 두개의 상이한 방향의 움직임 정보를 포함할 수 있으며, 이 두개의 상이한 방향의 움직임 정보를 제1 단일 방향 움직임 정보 및 제2 단일 방향 움직임 정보라고 칭한다. 제1 단일 방향 움직임 정보는 제1 참조 프레임에 대응될 수 있고, 상기 제1 참조 프레임은 현재 블록이 위치한 현재 프레임의 전면에 위치하고; 제2 단일 방향 움직임 정보는 제2 참조 프레임에 대응될 수 있으며, 상기 제2 참조 프레임은 현재 블록이 위치한 현재 프레임의 후면에 위치할 수 있다.
예시적으로, 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보; 시퀀스 레벨 스위치 제어 정보 중 하나 또는 여러 가지를 포함할 수 있지만 이에 한하지 않는다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
특징 정보가 움직임 정보 속성을 포함하고, 움직임 정보 속성이 하기의 적어도 한 가지 상황에 부합될 경우, 움직임 정보 속성이 특정 조건을 만족하는 것으로 결정하는 바, 1. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며; 2. 현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며; 3. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하며; 4. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일하며; 5. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값보다 작다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
상황 5에 대해, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값을 획득해야 하며, 상기 차이 값을 획득하기 위해, 하기의 방식을 사용할 수 있는 바, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하며; 제1 예측 블록의 다운샘플링한 후의 예측 값과 제2 예측 블록의 다운샘플링한 후의 예측 값의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다. 또는, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하고; 제1 예측 블록의 예측 값과 제2 예측 블록의 예측 값의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
특징 정보가 예측 모드 속성을 포함하고, 예측 모드 속성이 인트라 인터 병합 예측에 기반한 병합 모드, 및/또는, 대칭 움직임 벡터 차이 모드를 사용하지 않는다면, 예측 모드 속성이 특정 조건을 만족하는 것으로 결정한다.
특징 정보가 시퀀스 레벨 스위치 제어 정보를 포함하고, 상기 시퀀스 레벨 스위치 제어 정보가 현재 블록 양방향 광학 흐름 모드를 사용하도록 허용하면, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족하는 것으로 결정한다.
특징 정보가 사이즈 정보를 포함하고, 사이즈 정보는 폭 값, 높이 값 및 면적 값 중 적어도 하나를 포함하며, 사이즈 정보 중의 폭 값, 높이 값 및 면적 값 중 적어도 하나가 상응한 임계값 조건을 만족할 경우, 사이즈 정보는 특정 조건을 만족한다. 예시적으로, 사이즈 정보가 하기의 상황의 적어도 한 가지에 부합될 경우, 사이즈 정보가 특정 조건을 만족하는 것으로 결정하는 바, 현재 블록의 폭 값이 제1 임계값보다 크거나 같고, 현재 블록의 폭 값이 제2 임계값보다 작거나 같으며; 현재 블록의 높이 값이 제3 임계값보다 크거나 같고, 현재 블록의 높이 값이 제4 임계값보다 작거나 같으며; 현재 블록의 면적 값이 제5 임계값보다 크거나 같고, 현재 블록의 면적 값이 제6 임계값보다 작거나 같다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
예시적으로, 제1 임계값은 제2 임계값보다 작을 수 있고, 제1 임계값 및 제2 임계값은 모두 2의 양의 정수의 거듭제곱이며, 이에 대해 제1 임계값 및 제2 임계값은 모두 한정하지 않고, 예를 들면, 제1 임계값은 8일 수 있고, 제2 임계값은 128일 수 있다. 제3 임계값은 제4 임계값보다 작을 수 있고, 제3 임계값 및 제4 임계값도 2의 양의 정수의 거듭제곱이며, 이에 대해 제3 임계값 및 제4 임계값은 모두 한정하지 않고, 예를 들면, 제3 임계값은 8일 수 있고, 제4 임계값은 128일 수 있다. 제5 임계값은 제6 임계값보다 작을 수 있고, 제5 임계값 및 제6 임계값도 2의 양의 정수의 거듭제곱이며, 이에 대해 제5 임계값 및 제6 임계값은 모두 한정하지 않고, 예를 들면, 제5 임계값은 64(즉 8*8)일 수 있고, 제6 임계값은 16384(즉 128*128)일 수 있다. 물론, 상기 임계값은 단지 예시로서, 이러한 임계값에 대해 한정하지 않는다.
예시적으로, 특징 정보는 움직임 정보 속성, 예측 모드 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보 중 하나 또는 복수를 포함할 수 있다. 특징 정보가 움직임 정보 속성을 포함하면, 움직임 정보 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있고; 특징 정보가 예측 모드 속성을 포함하면, 예측 모드 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있으며; 특징 정보가 사이즈 정보를 포함하면, 사이즈 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있으며; 특징 정보가 시퀀스 레벨 스위치 제어 정보를 포함하면, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다.
특징 정보가 움직임 정보 속성, 예측 모드 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보 중 적어도 두 가지를 포함할 경우, 예를 들면, 특징 정보가 움직임 정보 속성 및 예측 모드 속성을 포함하는 것을 예로 들면, 움직임 정보 속성이 특정 조건을 만족하고 예측 모드 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다. 또 예를 들면, 특징 정보가 움직임 정보 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보를 포함하면, 움직임 정보 속성이 특정 조건을 만족하고, 사이즈 정보가 특정 조건을 만족하며, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다. 물론, 상기 과정은 몇 가지 예시로서, 이를 한정하지 않는다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계 - 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - ; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하는 단계 - 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - 를 포함할 수 있지만 이에 한하지 않는다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록에 대응되는 제1 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이고, 제1 참조 블록의 크기가 N*N이며, N은 M보다 클 수 있고, 예컨대 M은 4이고 N은 6이다. 제1 참조 블록을 중심 영역 및 가장자리 영역으로 분할할 수 있고, 제1 참조 블록의 중심 영역은 제1 참조 블록의 중심점을 중심으로, 크기가 M*M인 영역을 가리키며; 제1 참조 블록의 가장자리 영역은 제1 참조 블록에서 중심 영역 이 외의 다른 영역을 가리킨다. 제1 참조 블록의 중심 영역에 대해, 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며; 제1 참조 블록의 가장자리 영역에 대해, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록에 대응되는 제2 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이며, 제2 참조 블록의 크기는 N*N이면, N은 M보다 클 수 있고, 예컨대 M은 4이고 N은 6이다. 제2 참조 블록을 중심 영역 및 가장자리 영역으로 분할할 수 있고, 제2 참조 블록의 중심 영역은 제2 참조 블록의 중심점을 중심으로, 크기가 M*M인 영역을 가리키며; 제2 참조 블록의 가장자리 영역은, 제2 참조 블록에서 중심 영역 이외의 다른 영역을 가리킨다. 제2 참조 블록의 중심 영역에 대하여, 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며; 제2 참조 블록의 가장자리 영역에 대하여, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계를 포함할 수 있지만 이에 한하지 않으며, 상기 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하며 상기 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록에 대응되는 제1 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이면, 제1 참조 블록의 크기는 M*M일 수 있다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록에 대응되는 제2 참조 블록을 결정할 수 있으며, 현재 블록의 크기가 M*M이면, 제2 참조 블록의 크기는 M*M일 수 있다.
단계 202: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도를 결정한다.
예시적으로, 수평 방향 속도는 현재 블록이 참조 프레임에서 서브 블록(즉 현재 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수평 방향(즉 X 방향) 속도를 가리킨다. 또는, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록(즉 현재 블록의 서브 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수평 방향(즉 X 방향) 속도를 가리킨다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계는, 하기의 방식을 포함하지만 이에 한하지 않는다.
방식 1: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정한다. 이어서, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
방식 2: 제1 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다. 제1 기설정 조건을 만족하지 않으면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정하고; 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
예시적으로, 제1 기설정 조건은 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5)에 기반하여 결정된다.
방식 3: 제2 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다. 제2 기설정 조건을 만족하지 않으면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정하고; 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
예시적으로, 제2 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다.
단계 203: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 속도를 결정한다.
예시적으로, 수직 방향 속도는, 현재 블록이 참조 프레임에서 서브 블록(즉 현재 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수직 방향(즉 Y 방향) 속도를 가리킨다. 또는, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록(즉 현재 블록의 서브 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수직 방향(즉 Y 방향) 속도를 가리킨다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계는 하기의 방식을 포함하지만 이에 한하지 않는다.
방식 1: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정한다. 이어서, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다.
방식 2: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 절단 처리를 진행하지 않은 비절단 수평 방향 속도를 획득하고, 상기 비절단 수평 방향 속도에 따라 수직 방향 속도를 결정한다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정할 수 있다. 이어서, 자기 상관 계수(S1), 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 비절단 수평 방향 속도를 결정하고, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 비절단 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
방식 3: 제3 기설정 조건을 만족할 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 이어서, 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 제3 기설정 조건을 만족하지 않을 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 이어서, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
예시적으로, 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
단계 202 및 단계 203에서, 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있고; 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정한다.
예시적으로, 상호 상관 계수(S2)는 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이에 위치할 수 있고; 상호 상관 계수(S6)는 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이에 위치할 수 있다.
예를 들면, 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값으로 업데이트하고; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제2 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S2)를 제2 상호 상관 계수 임계값으로 업데이트하며; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 크거나 같고, 제2 상호 상관 계수 임계값보다 작거나 같으면, 상호 상관 계수(S2) 불변을 유지한다.
제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값으로 업데이트하고; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제4 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S6)를 제4 상호 상관 계수 임계값으로 업데이트하며; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 크거나 같고, 제4 상호 상관 계수 임계값보다 작거나 같으면, 상호 상관 계수(S6) 불변을 유지한다.
예시적으로, 제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다. 물론, 상기는 단지 제1 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다. 물론, 상기는 단지 제2 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, 속도 임계값은 2의 M 제곱이고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 물론, 상기는 단지 속도 임계값의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, BD(bit depth)는 비트 깊이이고, 각가의 색도 또는 밝기 픽셀 값에 필요한 비트 폭을 표시한다.
단계 204: 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득한다.
예시적으로, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계는, 제1 원래 예측 값, 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하는 단계, 수평 방향 속도, 수직 방향 속도, 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 예측 보상 값을 획득하는 단계를 포함하지만 이에 한하지 않는다.
예시적으로, 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값이다. 물론, 상기는 단지 기울기 우측 시프트 수의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
단계 205: 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 타깃 예측 값을 획득한다.
예시적으로, 상기 방법이 현재 블록의 타깃 예측 값을 획득하기 위한 것이면, 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보에 따라 상기 현재 블록에 대응되는 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 상기 현재 블록에 대응되는 제2 원래 예측 값을 결정한다. 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 현재 블록에 대응되는 수평 방향 속도를 결정하고, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 현재 블록에 대응되는 수직 방향 속도를 결정한다. 이어서, 수평 방향 속도 및 수직 방향 속도에 따라 상기 현재 블록에 대응되는 예측 보상 값을 획득하고, 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 상기 현재 블록에 대응되는 타깃 예측 값을 획득한다. 이로써, 상기 현재 블록에 대응되는 타깃 예측 값을 성공적으로 획득한다.
예시적으로, 현재 블록을 적어도 하나의 서브 블록으로 분할하고, 상기 방법이 현재 블록의 각각의 서브 블록의 타깃 예측 값을 획득하는 것이면, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 각각의 서브 블록에 대하여, 상기 서브 블록의 제1 단일 방향 움직임 정보(현재 블록의 제1 단일 방향 움직임 정보와 동일함)에 따라 상기 서브 블록에 대응되는 제1 원래 예측 값을 결정하고, 상기 서브 블록의 제2 단일 방향 움직임 정보(현재 블록의 제2 단일 방향 움직임 정보와 동일함)에 따라 상기 서브 블록에 대응되는 제2 원래 예측 값을 결정한다. 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 서브 블록에 대응되는 수평 방향 속도를 결정하고, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 서브 블록에 대응되는 수직 방향 속도를 결정한다. 이어서, 수평 방향 속도 및 수직 방향 속도에 따라 상기 서브 블록에 대응되는 예측 보상 값을 획득하고, 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 상기 서브 블록에 대응되는 타깃 예측 값을 획득한다.
이로써, 상기 서브 블록에 대응되는 타깃 예측 값을 성공적으로 획득한다. 상기 현재 블록의 각각의 서브 블록의 타깃 예측 값을 얻은 후, 실제 상에서 상기 현재 블록의 타깃 예측 값을 얻은 것이다.
상기 기술적 해결수단으로부터 보면, 본 발명의 실시예에 있어서, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정할 수 있고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도 및 수직 방향 속도를 결정하고, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하며, 예측 보상 값에 따라 타깃 예측 값을 획득한다. 상기 방식은 광학 흐름법에 기반하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반한다.
실시예 2: 본 발명의 실시예는 인코딩 및 디코딩 방법을 공개하였으며, 디코딩단 또는 인코딩단에 응용될 수 있고, 도 3에 도시된 바와 같이, 인코딩 및 디코딩 방법의 흐름 모식도이다. 예시적으로, 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 각각의 서브 블록에 대하여 단계를 수행하여, 현재 블록의 각각의 서브 블록의 타깃 예측 값을 획득할 수 있다.
단계 301: 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보(즉 현재 블록의 서브 블록의 제1 단일 방향 움직임 정보)에 따라 서브 블록의 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보(즉 현재 블록의 서브 블록의 제2 단일 방향 움직임 정보)에 따라 서브 블록의 제2 원래 예측 값을 결정한다.
예시적으로, 현재 블록이 양방향 블록(즉 현재 블록은 양방향 예측 블록을 사용함)이면, 현재 블록에 대응되는 양방향 움직임 정보를 획득할 수 있고, 상기 획득 방식에 대해서 한정하지 않는다. 이 양방향 움직임 정보는 두개의 상이한 방향의 움직임 정보를 포함하고, 두개의 상이한 방향의 움직임 정보를 제1 단일 방향 움직임 정보(예컨대 제1 움직임 벡터 및 제1 참조 프레임 인덱스) 및 제2 단일 방향 움직임 정보(예컨대 제2 움직임 벡터 및 제2 참조 프레임 인덱스)로 칭한다. 제1 단일 방향 움직임 정보에 기반하면 제1 참조 프레임(예컨대 참조 프레임 0)을 결정할 수 있고, 제1 참조 프레임은 현재 블록이 위치한 현재 프레임의 전면에 위치하며; 제2 단일 방향 움직임 정보에 기반하면 제2 참조 프레임(예컨대 참조 프레임 1)을 결정할 수 있고, 제2 참조 프레임은 현재 블록이 위치한 현재 프레임의 후면에 위치한다.
예시적으로, 현재 블록의 각각의 서브 블록에 대하여, 상기 서브 블록의 제1 단일 방향 움직임 정보는 현재 블록의 제1 단일 방향 움직임 정보와 동일하고, 상기 서브 블록의 제2 단일 방향 움직임 정보는 현재 블록의 제2 단일 방향 움직임 정보와 동일하다.
예시적으로, 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보 중 한 가지 또는 여러 가지를 포함할 수 있고; 시퀀스 레벨 스위치 제어 정보는, 특징 정보가 특정 조건을 만족하는 것에 관련되며, 단계 201을 참조 가능하기에, 여기서 더 설명하지 않는다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 서브 블록의 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 서브 블록의 제2 원래 예측 값을 결정하는 단계는, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 참조 블록을 결정하며, 상기 제2 참조 블록의 제2 원래 예측 값을 결정하는 단계를 포함할 수 있다. 제1 원래 예측 값 및 제2 원래 예측 값의 결정 방식에 대해서는, 단계 201을 참조 가능하기에, 여기서 더 설명하지 않는다.
단계 302: 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다. 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다.
단계 303: 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1)(후속적으로 자기 상관 계수(S1)로 칭함), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2)(후속적으로 상호 상관 계수(S2)로 칭함), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)(후속적으로 상호 상관 계수(S3)로 칭함), 수직 방향 기울기 합의 자기 상관 계수(S5)(후속적으로 자기 상관 계수(S5)로 칭함), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)(후속적으로 상호 상관 계수(S6)로 칭함)를 결정한다.
단계 304: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정한다.
단계 305: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
단계 306: 수평 방향 속도 및 수직 방향 속도에 따라 현재 블록의 서브 블록의 예측 보상 값을 획득한다.
단계 307: 현재 블록의 서브 블록의 제1 원래 예측 값, 현재 블록의 서브 블록의 제2 원래 예측 값 및 현재 블록의 서브 블록의 예측 보상 값에 따라, 현재 블록의 서브 블록의 타깃 예측 값을 획득한다.
예시적으로, 단계 301 내지 단계 307의 흐름은 실시예 1을 참조 가능하고, 여기서 더 설명하지 않는다.
실시예 3: 인코딩단/디코딩단은 현재 블록의 특징 정보가 특정 조건을 만족하는 지의 여부를 판정해야 한다. 만약 만족하면, 본 발명의 실시예의 기술적 해결수단을 사용하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 이 기술적 해결수단은 양방향 광학 흐름 모드로 칭할 수도 있다. 만약 만족하지 않으면, 본 발명에서 제공하는 타깃 예측 값 획득 방식을 사용하지 않는다.
특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있다.
실시예 4: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있다.
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않는다.
예시적으로, 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않는 것은, 현재 블록이 Affine 모드 또는 SBTMVP 모드를 사용하지 않는 것을 포함할 수 있으며; Affine 모드는 아핀 움직임 모델 모드를 사용하고, SBTMVP(subblock-based temporal motion vector prediction) 모드는 시간 영역에서 전체 블록의 움직임 정보를 획득하는 모드이다. 현재 블록이 Affine 모드 또는 SBTMVP 모드를 사용할 경우, 현재 블록 내부의 각 하나의 서브 블록의 움직임 정보는, 완전히 상이할 수 있으며, 따라서, 현재 블록은 Affine 모드 또는 SBTMVP 모드를 사용하지 않을 수 있다.
실시예 5: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있으며;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않고;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하다.
실시예 6: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않으며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하며;
현재 블록은 CIIP 모드(인트라 인터 병합 예측에 기반한 병합 모드, combine intra inter prediction mode)를 사용하지 않는다.
실시예 7: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않고;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일으며;
현재 블록은 SMVD(Symmetric Motion Vector Difference, 대칭 움직임 벡터 차이) 모드를 사용하지 않고, SMVD모드에서 양방향 움직임 정보 중의 두개의 MVD는 대칭되며, 즉 단지 인코딩 그 중의 하나의 움직임 벡터 차이 MVD만 인코딩해야 하고, 다른 한 움직임 벡터 차이는 음의 MVD이다.
실시예 8: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
시퀀스 레벨 스위치 제어 정보는 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허락하는 것이며, 다시 말해, 시퀀스 레벨 제어는 양방향 광학 흐름 모드가 활성화되도록 허용하고, 즉 시퀀스 레벨 제어 스위치가 온되면, 현재 블록이 양방향 광학 흐름 모드의 사용을 허용한다는 것을 표시하며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않으며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하다.
실시예 9: 상기 실시예 3 내지 실시예 8 중 임의의 하나의 조건 “현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것”을, “현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것, 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일한 것”으로 보정한다.
예를 들면, 현재 프레임의 디스플레이 시퀀스 번호가 POC이고, 현재 블록에 대응되는 두개의 참조 프레임의 디스플레이 시퀀스 번호가 각각 POC0 및 POC1이면, 두개의 참조 프레임의 방향은 상이하고,(POC- POC0)*(POC- POC1)<0와 동등하며, 두개의 참조 프레임과 현재 프레임의 거리는 동일하고,(POC- POC0)의 값은(POC1- POC)의 값에 동등하다.
실시예 10: 특징 정보가 적어도 하기의 조건을 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
시퀀스 레벨 스위치 제어 정보는 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허락하는 것이며, 다시 말해, 시퀀스 레벨 제어는 양방향 광학 흐름 모드가 활성화되도록 허용하고, 즉 시퀀스 레벨 제어 스위치가 온되면, 현재 블록이 양방향 광학 흐름 모드의 사용을 허용한다는 것을 표시한다.
실시예 11: 특징 정보가 적어도 하기의 조건을 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값 TH_SAD보다 작을 수 있다. 예시적으로, 하기의 방식을 사용하여 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값을 획득할 수 있다.
방식 1: 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 예측 블록을 획득하며; 제1 예측 블록의 예측 값과 제2 예측 블록의 예측 값의 SAD에 따라(Sum of Absolute Difference, 절대 차이 값의 합), 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
방식 1에 있어서, 예측 값의 차이 값은 제1 예측 블록의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록의 예측 값(후속적으로 pred1으로 기재함)의 SAD이고, 즉 pred0 및 pred1 중의 모든 픽셀의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서, pred0(i,j)는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며, pred1(i,j)는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시한다.
방식 2: 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 예측 블록을 획득하며; 제1 예측 블록의 다운샘플링한 후의 예측 값(즉 제1 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)과 제2 예측 블록의 다운샘플링한 후의 예측 값(즉 제2 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
방식 2에 있어서, 예측 값의 차이 값은 제1 예측 블록의 다운샘플링 N배 후의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록의 다운샘플링 N배 후의 예측 값(후속적으로 pred1로 기재함)의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서,pred0(i,j)는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며,pred1(i,j)는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시하며, N은 양의 정수이고, 바람직하게 2이다.
실시예 12: 상기 실시예에 있어서, 현재 블록의 사이즈 정보는 한정 범위 내에 있으며, 하기의 상황의 한 가지일 수 있다.
*상황 1: 현재 블록의 폭 값은 제1 구간[Wmin, Wmax]의 범위 내에 있고; 현재 블록의 높이 값은 제2 구간[Hmin, Hmax]의 범위 내에 있으며; Wmin, Wmax, Hmin, Hmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Wmin은 8이고, Wmax는 128이며, Hmin은 8이고, Hmax는 128이다.
현재 블록의 면적 값은 제3 구간[Smin, Smax]의 범위 내에 있고; Smin, Smax는 모두 2의 양의 정수의 거듭제곱이며; 예를 들면, Smin은 64이고, Smax는 128*128=16384이다.
상기 실시예에 있어서, [a, b]는 a보다 크거나 같고, b보다 작거나 같은 것을 표시한다.
상황 2: 현재 블록의 폭 값은 제1 구간[Wmin, Wmax]의 범위 내에 있고; Wmin, Wmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Wmin은 8이고, Wmax는 128이다.
상황 3: 현재 블록의 높이 값은 제2 구간[Hmin, Hmax]의 범위 내에 있으며; Hmin, Hmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Hmin은 8이고, Hmax는 128이다.
예시적으로, 하기의 임의의 한 가지 조건을 만족하면, 현재 블록에 대응되는 두개의 참조 프레임의 가중치는 동일하다.
조건 1: 현재 블록은 상이한 가중치를 허용하는 방법을 사용하지 않는다.
조건 2: 현재 블록은 상이한 가중치를 허용하는 방법(예컨대 블록 레벨 가중치 예측 방법 BCW(Bi-prediction with CU based weighting) 활성화함)을 사용하고, 현재 블록의 두개의 가중치는 완전히 동일하다.
조건 3: 현재 블록이 위치한 현재 프레임은 상이한 가중치의 방법을 사용하지 않는다.
조건 4: 현재 블록이 위치한 현재 프레임은 상이한 가중치의 방법(예컨대 프레임 레벨 가중치 예측 방법 활성화함)을 사용하고, 현재 프레임의 두개의 가중치는 완전히 동일하다.
실시예 13: 인코딩단/디코딩단은 현재 블록의 제1 단일 방향 움직임 정보에 따라 서브 블록의 제1 원래 예측 값을 결정해야 하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 서브 블록의 제2 원래 예측 값을 결정한다. 예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하며; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 참조 블록을 결정하며, 상기 제2 참조 블록의 제2 원래 예측 값을 결정한다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하며; 제1 참조 블록의 중심 영역의 제1 원래 예측값 은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하고; 제2 참조 블록의 중심 영역의 제2 원래 예측 값는 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
도 4에 도시된 바와 같이, 서브 블록의 크기가 4*4이고, 제1 참조 블록의 크기가 6*6이면, 제1 참조 블록의 중심 영역은, 제1 참조 블록의 중심점을 중심으로 하고, 크기가 4*4인 영역을 가리키며, 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 이에 대해 설명하지 않는다. 제1 참조 블록의 가장자리 영역은, 제1 참조 블록에서 중심 영역 외의 다른 영역(즉 중심 영역 외에, 상하좌우 각 1행 1열의 영역)을 가리키고, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이며, 도 4에서, 제1 참조 프레임 중의 픽셀 포인트의 픽셀 값을 제1 참조 블록의 가장자리 영역에 복사한다. 물론, 도 4는 단지 하나의 예시로서, 다른 픽셀 포인트의 픽셀 값을 이용하여 복사할 수도 있다.
물론, 상기 방식에서, 제1 참조 블록의 가장자리 영역에 대해, 제1 참조 프레임에서 가장 가까운 완전 픽셀 값을 복사하여 획득함으로써, 별도의 보간 과정을 생략하여, 별도의 참조 픽셀을 접근하는 것을 간접적으로 방지할 수 있다.
제2 참조 블록의 중심 영역의 제2 원래 예측 값, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값에 관하여, 제2 원래 예측 값의 획득 과정은 제1 원래 예측 값의 획득 과정을 참조 가능하기에, 여기서 더 설명하지 않는다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하며, 제1 참조 블록의 제1 원래 예측 값은 모두 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하며, 제2 참조 블록의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 예를 들면, 서브 블록의 크기가 4*4이고, 제1 참조 블록의 크기가 4*4이며, 제2 참조 블록의 크기가 4*4이면, 제1 참조 블록의 모든 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제2 참조 블록의 모든 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다.
실시예 14: 서브 블록의 제1 원래 예측 값 및 서브 블록의 제2 원래 예측 값을 얻은 후, 인코딩단/디코딩단 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다. 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있고. 예를 들면, 공식(1)을 통해 수평 방향 기울기 합을 결정하고, 공식(2)를 통해 수직 방향 기울기 합을 결정하며, 공식(3)을 통해 시간 영역 예측 값 차분값을 결정한다.
(1)
(2)
(3)
예시적으로, 는 수평 방향 기울기를 표시하고, 는 수직 방향 기울기를 표시하며, 공식(1) 내지 공식(3) 중의 하기의 파라미터에 대해, , , 및 는 방식(4) 및 공식(5)를 통해 결정할 수 있다.
(4)
(5)
는 수평 방향 기울기 합을 표시하고, 는 수직 방향 기울기 합을 표시하며, 는 시간 영역 예측 값 차분값을 표시한다.
는 서브 블록의 제1 원래 예측 값을 표시하고, 는 서브 블록의 제2 원래 예측 값을 표시한다. 서브 블록의 크기가 4*4라면, 실시예 13을 참조하면, 는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 크기가 6*6인 제1 참조 블록의 제1 원래 예측 값이며, 는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값이거나, 크기가 6*6인 제2 참조 블록의 제2 원래 예측 값이며, 는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값인 것을 예로 든다. 는 좌표 (i,j)의 픽셀 값을 표시하고, 예컨대 는 제1 참조 블록에서 좌표 (i,j)의 픽셀 값이며, 서브 블록의 제1 원래 예측 값에 대응되고, 는 제2 참조 블록에서 좌표 (i,j)의 픽셀 값을 표시하며, 서브 블록의 제2 원래 예측 값에 대응된다.
na는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자 na는 5와 (BD-7) 중의 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값일 수 있다. nb는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자 nb는 8과 (BD-4) 중의 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값일 수 있다. shift1은 기울기 우측 시프트 수를 표시할 수 있고, 기울기 우측 시프트 수 shift1은 2와 (14-BD) 중의 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값일 수 있다.
≫는 우측 이동을 표시하고, 예컨대 ≫ na는 우측으로 na만큼 이동하는 것을 표시하는 바, 즉, 2의 na 제곱으로 나눈다. ≫ nb는 우측으로 nb만큼 이동하는 것을 표시하는 바, 다시 말해, 2의 nb 제곱을 나눈다. ≫ shift1은 우측으로 shift1만큼 이동하는 것을 표시하는 바, 즉, 2의 shift1 제곱으로 나눈다.
BD(bit depth)는 비트 깊이일 수 있고, 각가의 색도 또는 밝기 픽셀 값에 필요한 비트 폭을 표시할 수 있다. 예를 들면, BD는 10 또는 8일 수 있고, 통상적인 상황 하에서, BD는 이미 알고 있는 값일 수 있다.
실시예 15: 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 얻은 후, 인코딩단/디코딩단은 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1)(후속적으로 자기 상관 계수(S1)로 칭함), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2)(후속적으로 상호 상관 계수(S2)로 칭함), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)(후속적으로 상호 상관 계수(S3)로 칭함), 수직 방향 기울기 합의 자기 상관 계수(S5)(후속적으로 자기 상관 계수(S5)로 칭함), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)(후속적으로 상호 상관 계수(S6)로 칭함)를 결정할 수도 있다. 예를 들면, 하기의 공식을 통해 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 결정할 수 있다.
는 수평 방향 기울기 합을 표시하고, 는 수직 방향 기울기 합을 표시하며, 는 시간 영역 예측 값 차분값을 표시한다.
서브 블록의 크기가 4*4이면, Ω는 4*4서브 블록에 대응되는 윈도우를 표시하거나, 또는, Ω는 4*4서브 블록 주변의 6*6윈도우를 표시한다. Ω 중의 각각의 좌표 (i,j)점에 대해, 우선 상기 실시예를 통해 , 및 를 결정할 수 있고, 이어서, , 및 에 따라, S1, S2, S3, S5, S6을 결정한다.
실시예 16: 상호 상관 계수(S2) 및 상호 상관 계수(S6)를 얻은 후, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이로 제한할 수 있고, 예를 들면, 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값으로 업데이트할 수 있고, 상호 상관 계수(S2)가 제2 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S2)를 제2 상호 상관 계수 임계값으로 업데이트할 수 있다. 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이로 제한할 수 있고, 예를 들면, 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값으로 업데이트할 수 있고, 상호 상관 계수(S6)가 제4 상호 상관 계수 임계값보다 크다면, 상호 상관 계수(S6)를 제4 상호 상관 계수 임계값으로 업데이트할 수 있고; 제1 상호 상관 계수 임계값이 제2 상호 상관 계수 임계값보다 작으면, 제3 상호 상관 계수 임계값은 제4 상호 상관 계수 임계값보다 작을 수 있다.
예시적으로, 상호 상관 계수(S2) 및 상호 상관 계수(S6)에 대해 크기 제한을 진행하여, 중간 결과가 오버플로우되는 것을 방지하며, 비트 폭이 규정된 범위를 벗어나지 않도록 한다. -(1≪THS2)는 제1 상호 상관 계수 임계값을 표시하고, 1≪THS2는 제2 상호 상관 계수 임계값을 표시하며, -(1≪THS6)은 제3 상호 상관 계수 임계값을 표시하고, 1≪THS6은 제4 상호 상관 계수 임계값을 표시한다. 예를 들면, 비트 폭이 32 비트를 벗어나는 것을 방지하기 위해, THS2는 25일 수 있고, THS6은 27일 수 있다. 물론, 상기 수치는 단지 하나의 예시로서, 이를 한정하지 않는다.
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이다. 따라서, 공식(11)은 S2가 보다 -(1≪THS2)작으면, S2는 -(1≪THS2)이고, S2가 (1≪THS2)보다 크면, S2는 (1≪THS2)이고, 아니면, S2는 불변을 유지한다는 것을 표시한다. 마찬가지로, 공식(12)는 S6이 -(1≪THS6)보다 작으면, S6은 -(1≪THS2)이고, S6이 (1≪THS2)보다 크면, S6은 (1≪THS2)이고, 아니면, S6은 불변을 유지한다는 것을 표시한다. ≪는 좌측 이동을 표시한다.
실시예 17: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다. 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있고, 하기의 공식에 시사된 바와 같이, 상기 파라미터 수평 방향 속도를 결정하는 단계에 기반한 예시이다.
(13)
상기 공식에 있어서, S1>0이 성립되면, 이고, S1>0 이 성립되지 않으면, 이다. 는 수평 방향 속도를 표시하고, 는 속도 임계값을 표시하며, 즉 수평 방향 속도 를 와 사이로 제한하기 위한 것이며, 즉 수평 방향 속도 는 보다 크거나 같고, 수평 방향 속도 는 보다 작거나 같다. 속도 임계값 은 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면, 또는 , BD는 비트 깊이이다.
는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자 는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다. 는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자 는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다. 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다.
제1 증폭 인자 및 제2 증폭 인자 는 모두 경험에 따라 구성될 수 있고, 제2 증폭 인자 는 제1 증폭 인자 보다 클 수 있다. 제1 증폭 인자 및 제2 증폭 인자 는 수평 방향 속도 의 값의 구간을 확대하고, 예를 들면, 가 3이고, 는 8이면, 수평 방향 속도의 값의 구간을 8배로 확대할 수 있고, 가 4이고, 가 16이면, 수평 방향 속도 의 값의 구간을 16배로 확대할 수 있으며, 이렇게 유추한다.
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, 는 x이고, 상기 내용을 종합해보면, 가 보다 크고, 보다 작으면, 수평 방향 속도 는 이다.
예를 들면, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다, 하기의 공식에 시사된 바와 같다.
(14)
상기 공식에서 보아낼 수 있는 바, 성립되면, 이고, 성립되지 않으면, 0이다.
는 수직 방향 속도를 표시하고, 는 수평 방향 속도를 표시하며, 는 속도 임계값을 표시하고, 수직 방향 속도를 과 사이로 제한하며, 즉 수직 방향 속도는 보다 크거나 같고, 수직 방향 속도는 보다 작거나 같다. 속도 임계값 는 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면, 또는 이고, BD는 비트 깊이이다.
는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다. 는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다. 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다.
제1 증폭 인자 및 제2 증폭 인자 는 모두 경험에 따라 구성될 수 있고, 제2 증폭 인자 는 제1 증폭 인자 보다 클 수 있다. 제1 증폭 인자 및 제2 증폭 인자 는 수직 방향 속도의 값의 구간을 확대하고, 예를 들면, 가 3이고, 는 8이면, 수직 방향 속도의 값의 구간을 8배 확대할 수 있고, 는 4이고, 는 16이면, 수직 방향 속도의 값의 구간을 16배 확대할 수 있으며 이렇게 유추한다.
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, 는 x이고, 상기 내용을 종합해보면, 가 보다 크고, 보다 작으면, 수직 방향 속도 는 이다.
예시적으로, 상기 공식에 있어서, , 이다.
실시예 18: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다. 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있고, 하기의 공식에 시사된 바와 같이, 상기 파라미터 수평 방향 속도를 결정하는 단계에 기반한 예시이다.
(15)
공식(15)와 공식(13)을 비교하면, 앞의 부호를 제거하였고, 다른 내용은 공식(13)과 동일하며, 각 파라미터의 의미도 공식(13)과 동일하며, 여기서 더 설명하지 않는다.
예를 들면, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다, 하기의 공식에 시사된 바와 같이.
(16)
공식(16)과 공식(14)를 비교하면, 앞의 부호를 제거하였고, 다른 내용은 공식(14)와 동일하며, 각 파라미터의 의미도 공식(14)와 동일하기에, 여기서 더 설명하지 않는다.
실시예 19: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다.
예를 들면, 제1 기설정 조건을 만족하면, 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제1 기설정 조건을 만족하지 않으면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제1 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다, 하기의 공식에 시사된 바와 같이:
제1 기설정 조건을 만족할 경우,
(17)
제1 기설정 조건을 만족하지 않을 경우,
(18)
상기 제1 기설정 조건은 를 포함할 수 있고, |.|는 값의 절대치를 표시하며, k는 임계값이고, 임의로 설정 가능하며, 예컨대 8로 설정한다. 공식(17) 중의 은 가 0인지의 여부를 판정하는 것을 표시한다.
제1 기설정 조건을 만족할 경우, 성립되면, 이고, 성립되지 않으면, 이다. 수평 방향 속도를 표시하며, 는 속도 임계값을 표시하고, 는 제1 증폭 인자를 표시하고, 는 제2 증폭 인자를 표시하며, 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다.
Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, 는 x이고, 상기 내용을 종합해보면, 가 보다 크고, 보다 작으면, 수평 방향 속도 는 이다.
제1 기설정 조건을 만족하지 않을 경우, 공식(18)과 공식(13)은 동일하기에, 여기서 더 설명하지 않는다.
실시예 20: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다.
예를 들면, 제2 기설정 조건을 만족하면, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제2 기설정 조건을 만족하지 않으면 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제2 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다, 하기의 공식에 시사된 바와 같이: 제2 기설정 조건을 만족할 경우, 이고,
(19)
제2 기설정 조건을 만족하지 않을 경우,
(20)
제2 기설정 조건을 만족할 경우, 우선 , , 에 따라 를 결정하고, 구체적인 결정 방식은 상기 공식을 참조 바라며, 이어서, 성립되면, , 성립되지 않으면, 이다. 는 수평 방향 속도를 표시하며, 는 속도 임계값을 표시하고, 는 제1 증폭 인자를 표시하고, 는 제2 증폭 인자를 표시하며, 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다.
상기 공식에 있어서, Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, 는 x이고, 상기 내용을 종합해보면, 이 보다 크고, 보다 작으면, 수평 방향 속도 는 일 수 있다.
제2 기설정 조건을 만족하지 않을 경우, 공식(20)과 공식(13)은 동일하기에, 여기서 더 설명하지 않는다.
상기 제2 기설정 조건은 를 포함하지만 이에 한하지 않고, |.|는 값의 절대치를 표시하며, k는 임계값이고, 임의로 설정 가능하며, 예컨대 8로 설정한다. 물론, 이 제2 기설정 조건은 단지 하나의 예시로서, 이를 한정하지 않는다.
실시예 21: 실시예 19에 대해, 제1 기설정 조건을 만족하지 않을 경우, 수평 방향 속도의 결정 공식은 공식(15)로 변하고, 실시예 20에 대해, 제2 기설정 조건을 만족하지 않을 경우, 수평 방향 속도의 결정 공식은 공식(15)로 변한다.
실시예 22: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 비절단 수평 방향 속도를 결정하고, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 상기 비절단 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
하기의 공식에 시사된 바와 같이:
(21)
(22)
상기 공식에서 보아낼 수 있는 바, 성립되면, , 성립되지 않으면, 0이다. 상기 실시예 중의 와 비교하면, 본 실시예에서, 속도 임계값 으로 수평 방향 속도를 와 사이로 제한하지 않았으며, 따라서, 를 비절단 수평 방향 속도로 칭하고, 즉 절단 처리를 진행하지 않으며, 다시 말해, 이 비절단 수평 방향 속도는 와 사이로 제한되지 않았다.
*상기 공식에서 보아낼 수 있는 바, 이 성립되면, 이고, 이 성립되지 않으면, 0이다.
는 수직 방향 속도를 표시하고, 는 비절단 수평 방향 속도를 표시하며, 는 속도 임계값을 표시하고, 는 제1 증폭 인자를 표시하고, 는 제2 증폭 인자를 표시하며, 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다. Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, 는 x이고, 상기 내용을 종합해보면, 가 보다 크고, 보다 작으면, 수직 방향 속도 는 이다.
예시적으로, 상기 공식에 있어서, , 이다.
실시예 23: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 제3 기설정 조건을 만족할 경우, 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 제3 기설정 조건을 만족하지 않을 경우, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 예시적으로, 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
하기의 공식에 시사된 바와 같이: 제3 기설정 조건을 만족할 경우,
(23)
제3 기설정 조건을 만족하지 않을 경우,
*(24)
예시적으로, 제3 기설정 조건은 가 또는 이면, 즉 는 최소치 또는 최대치일 수 있다.
제3 기설정 조건을 만족할 경우, 성립되면, , 성립되지 않으면, 0이다. 예시적으로, 는 수직 방향 속도를 표시하고, 는 속도 임계값을 표시하고, 는 제1 증폭 인자를 표시하고, 는 제2 증폭 인자를 표시하며, 는 우측 이동을 표시하고, 는 끝수를 잘라버리는 것이다. Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서, 는 a이고, 는 b이며, ， 는 x이고, 상기 내용을 종합해보면, 가 보다 크고, 보다 작으면, 수직 방향 속도 는 일 수 있다.
제3 기설정 조건을 만족하지 않을 경우, 공식(24)와 공식(14)는 동일하기에, 여기서 더 설명하지 않는다.
실시예 24: 실시예 23에 대해, 제3 기설정 조건을 만족하지 않을 경우, 수직 방향 속도의 결정 공식은 공식(16)으로 변경된다.
실시예 25: 상기 실시예에 있어서, 제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 즉 ; 또는, 제1 증폭 인자 는 1과 (BD-11) 중 큰 값일 수 있으며, 즉 이다. 물론, 상기는 단지 제1 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. 제2 증폭 인자 는 8과 (BD-4) 중 작은 값이거나, 즉 ；; 또는, 제2 증폭 인자 는 4와 (BD-8) 중 큰 값일 수 있으며, 즉 이다. 물론, 상기는 단지 제2 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. 속도 임계 값은 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면, 또는 이다. 물론, 상기는 단지 속도 임계값의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
제1 증폭 인자를 1과 (BD-11) 중 큰 값으로 설정하면, 기울기의 자기 상관 계수 및 상호 상관 계수의 우측 시프트 수를 감소시킬 수 있고, 자기 상관 계수 및 상호 상관 계수에 필요한 비트 폭(정밀도를 보존함)을 증가시킨다. 제2 증폭 인자를 4와 (BD-8) 중 큰 값으로 설정하면, 기울기의 자기 상관 계수 및 상호 상관 계수의 우측 시프트 수를 감소시킬 수 있고, 자기 상관 계수 및 상호 상관 계수에 필요한 비트 폭(정밀도를 보존함)을 증가시킨다. 속도 임계값를 으로 설정하면, 수평 방향 속도 및 수직 방향 속도 에 필요한 비트 폭(정밀도를 보존함)을 증가시킬 수 있다.
실시예 26: 인코딩단/디코딩단이 수평 방향 속도 및 수직 방향 속도를 얻은 후, 수평 방향 속도 및 수직 방향 속도에 따라 현재 블록의 서브 블록의 예측 보상 값을 획득할 수 있는 바, 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하고, 수평 방향 속도, 수직 방향 속도, 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 예측 보상 값을 획득한다.
예를 들면, 인코딩단/디코딩단은 하기의 공식으로 현재 블록의 서브 블록의 예측 보상 값 을 획득할 수 있다.
(25)
예시적으로, 는 수평 방향 기울기를 표시하고, 는 수직 방향 기울기를 표시하며, 상기 공식 중의 하기의 파라미터, , , 및 에 대해, 하기의 방식을 통해 이러한 파라미터를 결정할 수도 있다.
(26)
(27)
는 좌표의 픽셀 값을 표시하고, 는 제1 참조 블록 중 좌표의 픽셀 값을 표시하며, 서브 블록의 제1 원래 예측 값에 대응되고, 는 제2 참조 블록 중 좌표의 픽셀 값을 표시하며, 서브 블록의 제2 원래 예측 값에 대응된다. 예를 들면, 는 서브 블록의 제1 원래 예측 값을 표시하고, 는 서브 블록의 제2 원래 예측 값을 표시한다. 서브 블록의 크기가 4*4이면, 는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 또는 크기가 6*6인 제1 참조 블록의 제1 원래 예측 값이고, 는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값이거나, 또는 크기가 6*6인 제2 참조 블록의 제2 원래 예측 값이며, 는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값인 것을 예로 든다.
는 수평 방향 속도를 표시하며, 는 수직 방향 속도를 표시하고, 는 우측 이동을 표시하고, rnd는 round이며, 라운딩 조작을 표시하고, 은 기울기 우측 시프트 수를 표시하고, 은 우측으로 을 이동하는 것을 표시한다. 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값일 수 있고, 즉 shift1=max( 2, 14BD)이거나, 또는, 은 6과 (BD-6) 중 큰 값일 수 있으며, 즉 shift1=max(6, BD-6)이다. 물론, 상기는 단지 기울기 우측 시프트 수의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. shift1을 6과 (BD-6) 중 큰 값으로 설정하는 것을 통해, 기울기의 우측 시프트 수를 증가시킬 수 있으며, 기울기에 필요한 비트 폭(정밀도를 보존함)을 감소한다. BD는 비트 깊이를 표시하는 바, 즉 밝기 값에 필요한 비트 폭이며, 일반적으로 10 또는 8이다.
실시예 27: 인코딩단/디코딩단은 현재 블록의 서브 블록의 제1 원래 예측 값, 현재 블록의 서브 블록의 제2 원래 예측 값 및 현재 블록의 서브 블록의 예측 보상 값에 따라, 현재 블록의 서브 블록의 타깃 예측 값을 획득할 수 있다. 예를 들면, 인코딩단/디코딩단은 하기의 공식을 통해 현재 블록의 서브 블록의 타깃 예측 값을 획득할 수 있다.
(28)
상기 공식에 있어서, 는 서브 블록의 제1 원래 예측 값을 표시하고, 는 서브 블록의 제2 원래 예측 값을 표시하며, 는 서브 블록의 예측 보상 값을 표시하고, 는 우측 이동을 표시하며, 는 우측으로 shift를 이동하는 것을 표시한다.
예시적으로, , , BD는 비트 깊이를 표시한다.
물론, 상기 방식은 단지 서브 블록의 타깃 예측 값을 획득하는 예시로서, 이를 한정하지 않는다.
실시예 28: 현재 블록이 복수의 서브 블록으로 분할될 경우, 상기 실시예를 사용하여, 각각의 서브 블록의 타깃 예측 값을 결정할 수 있으며, 즉 현재 블록의 각각의 서브 블록에 대하여(예컨대 4*4크기의 서브 블록) 예측 신호의 조절을 진행함으로써, 각각의 서브 블록의 타깃 예측 값을 얻는다. 본 실시예에서, 타깃 조건을 만족할 경우, 어느 한 서브 블록의 조절 신호 과정이 사전에 스킵될 수도 있으며, 다시 말해, 상기 실시예의 방식을 사용하지 않고 서브 블록의 타깃 예측 값을 결정할 수 있다.
예를 들면, 현재 블록은 서브 블록 1, 서브 블록 2, 서브 블록 3 및 서브 블록 4로 분할되고, 인코딩단/디코딩단은 먼저 상기 실시예의 방식을 사용하여 서브 블록 1의 타깃 예측 값을 결정하며, 그 다음 상기 실시예의 방식을 사용하여 서브 블록 2의 타깃 예측 값을 결정하고, 타깃 조건을 만족하면, 인코딩단/디코딩단은 상기 실시예의 방식을 더는 사용하지 않고 서브 블록 3의 타깃 예측 값 및 서브 블록 4의 타깃 예측 값을 결정할 수 있으며, 즉 서브 블록 3 및 서브 블록 4의 신호 조절 과정이 사전에 스킵된다.
예시적으로, 현재 블록의 두개의 서브 블록의 예측 값의 차이 값이 모두 어느 한 임계값 TH_SUB_SAD보다 작을 경우, 타깃 조건을 만족하는 것을 결정할 수 있고, 잔여 서브 블록의 신호 조절 과정이 사전에 스킵된다. 예를 들면, 서브 블록 1의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작고, 서브 블록 2의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작으면, 타깃 조건을 만족하는 것으로 결정하고, 잔여 서브 블록(즉 서브 블록 3 및 서브 블록 4)의 신호 조절 과정이 사전에 스킵된다.
또 예를 들면, 현재 블록은 복수의 서브 블록으로 분할되고, 각각의 서브 블록에 대해, 인코딩단/디코딩단은 상기 실시예의 방식을 사용하여 상기 서브 블록의 타깃 예측 값을 결정하기 전에, 타깃 조건을 만족하는 지의 여부를 판정한다. 타깃 조건을 만족하면, 상기 실시예의 방식을 사용하지 않고 상기 서브 블록의 타깃 예측 값을 결정하며, 즉 상기 서브 블록의 신호 조절 과정이 사전에 스킵된다. 타깃 조건을 만족하지 않으면, 상기 실시예의 방식을 사용하여 상기 서브 블록의 타깃 예측 값을 결정할 수 있다.
예시적으로, 상기 서브 블록의 예측 값의 차이 값이 어느 한 임계값 TH_SUB_SAD보다 작을 경우, 타깃 조건을 만족하는 것으로 결정할 수 있고, 상기 서브 블록의 신호 조절 과정이 사전에 스킵된다. 예를 들면, 서브 블록 1의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작으면, 타깃 조건을 만족하는 것으로 결정하고, 서브 블록 1의 신호 조절 과정이 사전에 스킵된다.
예시적으로, 서브 블록의 예측 값의 차이 값을 결정하기 위해, 하기의 방식을 사용하여 구현할 수 있다.
방식 1: 예측 값의 차이 값은 제1 예측 블록(즉 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 서브 블록에 대응되는 제1 예측 블록을 획득함)의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록(현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 서브 블록에 대응되는 제2 예측 블록을 획득함) 예측 값(후속적으로 pred1로 기재함)의 SAD일 수 있으며, 즉 pred0 및 pred1 중 모든 픽셀의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서, 는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며, 는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시한다.
방식 2, 예측 값의 차이 값은 제1 예측 블록의 다운샘플링 N배한 후의 예측 값(pred0으로 기재하며, 즉 제1 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)과 제2 예측 블록의 다운샘플링 N배한 후의 예측 값(pred1로 기재하며, 즉 제2 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)의 SAD일 수도 있다. 예를 들면, 하기의 공식을 통해 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있고, 는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며, 는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시하며, N은 양의 정수이고, 바람직하게 2이다.
실시예 29:
상기 방법과 동일한 발명 구상에 기반하여, 본 발명의 실시예는 인코딩 및 디코딩 장치를 더 제공하고, 인코딩단 또는 디코딩단에 응용되며, 상기 장치는 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 도 5에 도시된 바와 같이, 상기 장치의 구조도이며, 상기 장치는,
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 제1 결정 모듈(51);
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하고; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 제2 결정 모듈(52);
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 제1 획득 모듈(53);
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 제2 획득 모듈(54)을 포함한다.
예시적으로, 상기 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보; 시퀀스 레벨 스위치 제어 정보 중 하나 또는 복수를 포함할 수 있지만 이에 한하지 않는다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 움직임 정보 속성을 포함하고, 상기 움직임 정보 속성이 하기의 상황 중 적어도 하나에 부합될 경우, 상기 움직임 정보 속성이 특정 조건을 만족하는 것으로 결정하는 바,
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것;
상기 현재 블록은 복수의 서브 블록을 포함하고, 상기 복수의 서브 블록의 움직임 정보가 모두 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값보다 작은 것이다.
상기 제1 결정 모듈(51)은 또한, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하고;
상기 제1 예측 블록의 다운샘플링한 후의 예측 값과 상기 제2 예측 블록의 다운샘플링한 후의 예측 값의 SAD에 따라, 상기 제1 참조 프레임과 상기 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 예측 모드 속성을 포함하고, 상기 예측 모드 속성이 인트라 인터 병합 예측에 기반한 병합 모드, 및/또는, 대칭 움직임 벡터 차이 모드를 사용하지 않는다면, 상기 예측 모드 속성이 특정 조건을 만족하는 것으로 결정한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 시퀀스 레벨 스위치 제어 정보를 포함하고, 상기 시퀀스 레벨 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하면, 상기 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족하는 것으로 결정한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 사이즈 정보를 포함하고, 상기 사이즈 정보가 하기의 상황 중 적어도 하나에 부합될 경우, 상기 사이즈 정보가 특정 조건을 만족하는 것으로 결정하는 바, 상기 현재 블록의 폭 값이 제1 임계값보다 크거나 같고, 상기 현재 블록의 폭 값이 제2 임계값보다 작거나 같으며; 상기 현재 블록의 높이 값이 제3 임계값보다 크거나 같고, 상기 현재 블록의 높이 값이 제4 임계값보다 작거나 같으며; 상기 현재 블록의 면적 값이 제5 임계값보다 크거나 같고, 상기 현재 블록의 면적 값이 제6 임계값보다 작거나 같다.
상기 제1 결정 모듈(51)은 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정할 경우 구체적으로,
상기 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하며; 여기서, 상기 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이고; 상기 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 상기 제2 참조 블록의 제2 원래 예측 값을 결정하며; 여기서, 상기 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정할 경우 구체적으로, 제1 기설정 조건을 만족할 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하며; 제1 기설정 조건은 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5)에 기반하여 결정된다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정할 경우 구체적으로, 제2 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상기 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하며; 여기서, 상기 제2 기설정 조건은 상기 상호 상관 계수(S2), 상기 자기 상관 계수(S5)에 기반하여 결정된다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정할 경우 구체적으로, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 절단 처리를 진행하지 않은 비절단 수평 방향 속도를 획득하고, 상기 비절단 수평 방향 속도에 따라 수직 방향 속도를 결정한다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정할 경우 구체적으로, 제3 기설정 조건을 만족할 경우, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상기 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정하며; 여기서, 상기 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
상기 상호 상관 계수(S2)는 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이에 위치한다.
상기 상호 상관 계수(S6)는 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이에 위치한다.
제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이며; 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이며; 속도 임계값은 2의 M 제곱이고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이며; 여기서, BD는 비트 깊이이다.
상기 제1 획득 모듈(53)은 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득할 경우 구체적으로, 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하고, 상기 수평 방향 속도, 상기 수직 방향 속도, 상기 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 상기 예측 보상 값을 획득하며; 여기서, 상기 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값이며, BD는 비트 깊이이다.
본 발명의 실시예에서 제공하는 디코딩단 기기는, 하드웨어 차원에서 말하자면, 그 하드웨어 아키텍처 모식도는 구체적으로 도 6을 참조 가능하다. 프로세서(61) 및 기계 판독 가능한 저장 매체(62)를 포함하고, 상기 프로세서(61)에 의해 실행되는 기계 실행 가능한 명령이 상기 기계 판독 가능한 저장 매체(62)에 저장되며; 상기 프로세서(61)는 기계 실행 가능한 명령을 실행하여, 본 발명의 상기 구현예에 공개된 방법을 수행한다. 예를 들면, 프로세서는 기계 실행 가능한 명령을 실행하여, 하기의 단계를 구현한다.
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
본 발명의 실시예에서 제공하는 인코딩단 기기는, 하드웨어 차원에서 말하자면, 그 하드웨어 아키텍처 모식도는 구체적으로 도 7을 참조 가능하다. 프로세서(71) 및 기계 판독 가능한 저장 매체(72)를 포함하고, 상기 프로세서(71)에 의해 실행되는 기계 실행 가능한 명령이 상기 기계 판독 가능한 저장 매체(72)에 저장되며; 상기 프로세서(71)는 기계 실행 가능한 명령을 실행하여, 본 발명의 상기 구현예에 공개된 방법을 구현한다. 예를 들면, 프로세서는 기계 실행 가능한 명령을 실행하여, 하기의 단계를 구현한다.
현재 블록의 특징 정보가 특정 조건을 만족하면, 단계 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
상기 방법과 동일한 발명 구상에 기반하여, 본 발명의 실시예는 기계 판독 가능한 저장 매체를 더 제공하며, 상기 기계 판독 가능한 저장 매체에 복수의 컴퓨터 명령이 저장되고, 상기 컴퓨터 명령이 프로세서에 의해 실행될 경우, 본 발명의 상기 구현예에서 공개된 인코딩 및 디코딩 방법을 구현할 수 있다. 여기서, 상기 기계 판독 가능한 저장 매체는 임의의 전자, 자성, 광학, 또는 다른 물리적 저장 장치일 수 있고, 예를 들어 실행 명령, 데이터 등 정보를 포함 또는 저장할 수 있다. 예를 들면, 기계 판독 가능한 저장 매체는 RAM(Radom Access Memory, 랜덤 액세스 메모리), 휘발성 메모리, 비휘발성 메모리, 플래시 메모리, 메모리 드라이버(예컨대 하드 드라이버), 솔리드 스테이트 드라이브, 임의의 유형의 메모리 디스크(예컨대 CD, dvd 등)이거나, 또는 유사한 저장 매체, 또는 이들의 조합일 수 있다.
상기 실시예에서 서술되는 시스템, 장치, 모듈 또는 유닛은 컴퓨터 칩 또는 엔티티로 구현되거나, 어떠한 기능을 구비하는 제품으로 구현될 수 있다. 하나의 대표적인 구현은 컴퓨터이고, 컴퓨터의 형식은 개인 컴퓨터, 랩톱, 셀룰러 폰, 카메라 폰, 스마트 폰, 개인 정보 단말기, 미디어 플레이어, 내비게이션 기기, 이메일 송수신기, 태블릿 PC, 웨어러블 기기 또는 이러한 기기 중의 임의의 몇 가지 기기의 조합일 수 있다.
설명의 편의를 위해, 상기 장치를 설명할 경우 기능에 따라 여러 가지 유닛으로 나누어 각각 설명한다. 물론, 본 발명을 실시함에 있어서 각 유닛의 기능을 동일하거나 복수의 소프트웨어 및/또는 하드웨어에서 구현시킬 수 있다.
본 분야의 통상의 기술자는 본 발명의 실시예가 방법, 시스템 또는 컴퓨터 프로그램 제품을 제공한다는 것을 알고 있다. 본 발명은 완전한 하드웨어 실시예, 완전한 소프트웨어 실시예, 또는 소프트웨어 및 하드웨어를 결합한 실시예의 형태를 사용할 수 있다. 또한 본 발명의 실시예는 컴퓨터 사용 가능 프로그램 코드가 포함된 하나 또는 복수의 컴퓨터 사용 가능 저장 매체(마그네틱 디스크 장치, CD-ROM, 광학 메모리 등을 포함하지만 이에 한하지 않음)에서 구현되는 컴퓨터 프로그램 제품의 형태를 사용할 수 있다.
본 발명은 본 발명의 실시예에 따른 방법, 기기(시스템) 및 컴퓨터 프로그램 제품의 흐름도 및/또는 블록도를 참조하여 설명되었다. 컴퓨터 프로그램 명령에 의해 흐름도 및/또는 블록도 중의 각 흐름 및/또는 블록, 및 흐름도 및/또는 블록도 중의 흐름 및/또는 블록의 결합을 구현하는 것으로 이해해야 할 것이다. 이러한 컴퓨터 프로그램 명령은 범용 컴퓨터, 전용 컴퓨터, 내장형 프로세서 또는 다른 프로그램 가능 데이터 처리 기기의 프로세서에 제공되어, 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기의 프로세서에 의해 실행된 명령이 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현하는 장치를 생성하도록 하는 하나의 기계를 생성할 수 있다. 또한, 이러한 컴퓨터 프로그램 명령은 또한 특정 방식으로 작업하기 위해 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기를 유도하는 컴퓨터 판독 가능 메모리에 저장되어, 상기 컴퓨터 판독 가능 메모리에 저장된 명령이 명령 장치를 포함하는 제조품을 생성하도록 할 수 있으며, 상기 명령 장치는 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현한다.
이러한 컴퓨터 프로그램 명령은 또한 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기에 로딩되어, 컴퓨터 또는 다른 프로그램 가능 기기에서 컴퓨터 구현 처리를 생성하기 위한 일련의 동작 단계를 수행하도록 함으로써, 컴퓨터 또는 다른 프로그램 가능 기기에서 실행하는 명령에 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현하기 위한 단계를 제공한다. 상술한 내용은 본 발명의 바람직한 실시예일 뿐 본 발명의 보호범위는 이에 한정되지 않는다. 당업자에게 있어서 본 발명은 다양한 변경 및 변화가 존재할 수 있다. 본 발명의 사상과 원리 내에 진행된 임의의 보정, 등가 대체, 개선 등은 모두 반드시 본 발명의 청구범위 내에 속해야 한다.

Claims (11)

  1. 디코딩 방법으로서,
    현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계를 포함하되, 여기서, 현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 동시에 만족하는 조건은 적어도 현재 블록의 폭 값이 8보다 크거나 같고, 높이 값이 8보다 크거나 같으며, 폭 - 높이 승적이 128보다 크거나 같고, 현재 블록이 CIIP모드를 사용하지 않으며, 현재 블록이 대칭 움직임 벡터 차이 모드를 사용하지 않는 것을 포함하고,
    상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 단계는,
    상기 현재 블록은 하나 또는 복수의 서브 블록을 포함하고, 상기 현재 블록이 포함하는 하나 또는 복수의 서브 블록에 대해 상기 서브 블록의 타깃 예측 값을 결정하며, 상기 현재 블록이 포함하는 모든 서브 블록의 타깃 예측 값에 기반하여 상기 현재 블록의 예측 값을 결정하는 단계를 포함하되, 여기서, 상기 서브 블록의 타깃 예측 값을 결정하는 단계는, 상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 포함하며,
    상기 방법은,
    현재 블록이 포함하는 하나 또는 복수의 서브 블록에 대해 현재 서브 블록의 특징 정보가 특정 조건을 만족하는지 여부를 판단하고, 특정 조건을 만족하면 상기 서브 블록에 대해 양방향 광학 흐름에 기반한 예측 보상을 진행하는 과정을 스킵하는 단계를 더 포함하되,
    상기 서브 블록의 SAD 값과 하나의 서브 블록 임계값의 관계에 따라 양방향 광학 흐름에 기반하여 상기 서브 블록에 대해 예측 보상을 진행하는 과정을 스킵할 지의 여부를 결정하고,
    여기서 상기 서브 블록의 SAD 값은 제1 예측 블록 수직 2배 다운샘플링한 후의 예측 값과 제2 예측 블록 수직 2배 다운샘플링한 후의 예측 값의 절대차이 값의 합이며; 상기 제1 예측 블록은 현재 블록의 제1 움직임 벡터에 따라 상기 제1 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록이고, 상기 제2 예측 블록은 현재 블록의 제2 움직임 벡터에 따라 상기 제2 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록인 것을 특징으로 하는 디코딩 방법.
  2. 제1항에 있어서,
    상기 서브 블록의 타깃 예측 값을 결정하는 단계는,
    상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계; 및
    상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값을 결정하고, 상기 서브 블록에서 각각의 4x4 블록의 타깃 예측 값에 따라 상기 서브 블록의 타깃 예측 값을 결정하는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  3. 제2항에 있어서,
    상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 4x4 블록의 타깃 예측 값을 결정하는 단계는,
    상기 서브 블록 중의 각각의 4x4 블록에 대해, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계;
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수직 방향 속도를 결정하는 단계;
    상기 4x4 블록의 수평 방향 속도 및 상기 4x4 블록의 수직 방향 속도에 따라 상기 4x4 블록의 예측 보상 값을 획득하는 단계; 및
    상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  4. 제1항에 있어서,
    상기 현재 블록이 1개의 서브 블록을 포함할 경우, 상기 서브 블록은 현재 블록 자체이고, 상기 현재 블록이 복수 개의 서브 블록을 포함할 경우, 상기 복수 개의 서브 블록의 움직임 정보는 상기 현재 블록의 움직임 정보와 동일한 것을 특징으로 하는 디코딩 방법.
  5. 제3항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계는,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값을 결정하고, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값에 따라, 상기 4x4 블록의 수평 방향 속도를 결정하는 단계를 포함하고,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 수직 방향 속도를 결정하는 단계는,
    상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값에 따라 상기 4x4 블록의 수직 방향 속도를 결정하는 단계를 포함하며,
    상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계는,
    상기 4x4 블록의 제1 예측 값, 상기 4x4 블록의 제2 예측 값 및 상기 4x4 블록의 예측 보상 값에 따라, 상기 4x4 블록의 타깃 예측 값을 획득하는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  6. 제5항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라, 상기 4x4 블록의 제1 예측 값 및 상기 4x4 블록의 제2 예측 값을 결정하는 단계는,
    상기 4x4 블록이 제1 참조 블록에서 대응되는 6x6 블록을 결정하고, 상기 제1 참조 블록의 상기 제1 원래 예측 값에 따라 상기 6x6 블록의 예측 값을 획득하고, 상기 6x6 블록의 예측 값을 상기 4x4 블록의 상기 제1 예측 값으로 결정하는 단계; 및
    상기 4x4 블록이 제2 참조 블록에서 대응되는 6x6 블록을 결정하고, 상기 제2 참조 블록의 상기 제2 원래 예측 값에 따라 상기 6x6 블록의 예측 값을 획득하고, 상기 6x6 블록의 예측 값을 상기 4x4 블록의 상기 제2 예측 값으로 결정하는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  7. 제1항에 있어서,
    현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 동시에 만족하는 조건은 적어도 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하는 것; 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않으며, 현재 블록이 CIIP 모드를 사용하지 않고, 현재 블록이 SMVD 모드를 사용하지 않는 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 방향이 상이하며, 상기 현재 블록에 대응되는 상기 두 개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 현재 블록이 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두 개의 참조 프레임의 가중치가 동일한 것; 및 현재 블록의 폭 값이 8보다 크거나 같고, 현재 블록의 높이 값이 8보다 크거나 같으며, 현재 블록의 면적 값이 128보다 크거나 같은 것을 포함하는 것을 특징으로 하는 디코딩 방법.
  8. 디코딩 장치로서,
    상기 장치는 제1 결정 모듈, 제2 결정 모듈, 제1 획득 모듈, 제2 획득 모듈 및 스킵 모듈을 포함하고,
    상기 제1 결정 모듈은 현재 블록에 대해 양방향 광학 흐름 모드를 활성화하는 것으로 결정되면, 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하는 것에 사용되고 - 여기서, 현재 블록이 양방향 광학 흐름 모드를 활성화할 경우, 현재 블록이 동시에 만족하는 조건은 적어도 현재 블록의 폭 값이 8보다 크거나 같고, 높이 값이 8보다 크거나 같으며, 폭 - 높이 승적이 128보다 크거나 같고, 현재 블록이 CIIP모드를 사용하지 않으며, 현재 블록이 대칭 움직임 벡터 차이 모드를 사용하지 않는 것을 포함함 -,
    상기 제1 결정 모듈은 상기 현재 블록에 대해 양방향 광학 흐름 모드에 기반한 움직임 보상을 진행하고, 상기 현재 블록은 하나 또는 복수의 서브 블록을 포함할 경우, 상기 현재 블록이 포함하는 하나 또는 복수의 서브 블록에 대해 상기 서브 블록의 타깃 예측 값을 결정하며, 상기 현재 블록이 포함하는 모든 서브 블록의 타깃 예측 값에 기반하여 상기 현재 블록의 예측 값을 결정하는 것에 사용되고,
    상기 제1 결정 모듈은 상기 현재 블록의 예측 값을 결정할 경우, 상기 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값을 결정하고;
    상기 제2 결정 모듈은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수평 방향 속도를 결정하고, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 상기 서브 블록의 수직 방향 속도를 결정하며;
    상기 제1 획득 모듈은 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록의 예측 보상 값을 획득하고;
    상기 제2 획득 모듈은 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하며,
    상기 스킵 모듈은 상기 장치는 현재 블록이 포함하는 하나 또는 복수의 서브 블록에 대해 현재 서브 블록의 특징 정보가 특정 조건을 만족하는지 여부를 판단하고, 특정 조건을 만족하면 상기 서브 블록에 대해 양방향 광학 흐름에 기반한 예측 보상을 진행하는 과정을 스킵하고,
    상기 스킵 모듈은 구체적으로 상기 서브 블록의 SAD 값과 하나의 서브 블록 임계값의 관계에 따라 양방향 광학 흐름에 기반하여 상기 서브 블록에 대해 예측 보상을 진행하는 과정을 스킵할 지의 여부를 결정하는 것에 사용되며,
    여기서 상기 서브 블록의 SAD 값은 제1 예측 블록 수직 2배 다운샘플링한 후의 예측 값과 제2 예측 블록 수직 2배 다운샘플링한 후의 예측 값의 절대차이 값의 합이며; 상기 제1 예측 블록은 현재 블록의 제1 움직임 벡터에 따라 상기 제1 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록이고, 상기 제2 예측 블록은 현재 블록의 제2 움직임 벡터에 따라 상기 제2 참조 프레임에서 획득한, 상기 서브 블록과 대응되는 예측 블록인 것을 특징으로 하는 디코딩 장치.
  9. 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 비디오 디코딩 기기로서,
    상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
    상기 프로세서는 기계 실행 가능한 명령을 실행하여, 제1항 내지 제7항 중 어느 한 항에 따른 디코딩 방법을 구현하는 것을 특징으로 하는 비디오 디코딩 기기.
  10. 전자 기기로서,
    프로세서;
    프로세서에 의해 실행 가능한 명령이 저장된 메모리를 포함하고,
    상기 프로세서는 제1항 내지 제7항 중 어느 한 항에 따른 디코딩 방법의 단계를 수행하도록 구성되는 것을 특징으로 하는 전자 기기.
  11. 명령이 저장된 비휘발성 저장 매체로서,
    상기 명령이 프로세서에 의해 실행될 경우 제1항 내지 제7항 중 어느 한 항에 따른 디코딩 방법을 구현하는 것을 특징으로 하는 비휘발성 저장 매체.
KR1020237045155A 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기 KR20240005233A (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN201910544562.5 2019-06-21
CN201910544562.5A CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
KR1020217038634A KR102620203B1 (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기
PCT/CN2020/096600 WO2020253730A1 (zh) 2019-06-21 2020-06-17 一种编解码方法、装置及其设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020217038634A Division KR102620203B1 (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Publications (1)

Publication Number Publication Date
KR20240005233A true KR20240005233A (ko) 2024-01-11

Family

ID=70220964

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020237045155A KR20240005233A (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기
KR1020217038634A KR102620203B1 (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Family Applications After (1)

Application Number Title Priority Date Filing Date
KR1020217038634A KR102620203B1 (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Country Status (8)

Country Link
US (1) US20220232242A1 (ko)
EP (1) EP3989576A4 (ko)
JP (2) JP7334272B2 (ko)
KR (2) KR20240005233A (ko)
CN (30) CN111031318B (ko)
CA (1) CA3139466A1 (ko)
MX (1) MX2021015977A (ko)
WO (2) WO2020253730A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111031318B (zh) * 2019-06-21 2020-12-29 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN112135145B (zh) * 2019-11-14 2022-01-25 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
WO2023172002A1 (ko) * 2022-03-11 2023-09-14 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008048235A (ja) * 2006-08-18 2008-02-28 Sony Corp 可変長符号の復号化方法および復号化装置
JP2008289134A (ja) * 2007-04-20 2008-11-27 Panasonic Corp 符号化レート変換装置、集積回路、符号化レート変換方法、及びプログラム
CN100493194C (zh) * 2007-05-17 2009-05-27 上海交通大学 用于视频感兴趣区域编解码的泄漏运动补偿方法
EP2557795A4 (en) * 2010-04-06 2015-07-08 Samsung Electronics Co Ltd METHOD AND APPARATUS FOR ENCODING A VIDEO AND METHOD AND APPARATUS FOR DECODING A VIDEO
WO2014054267A1 (ja) * 2012-10-01 2014-04-10 パナソニック株式会社 画像符号化装置及び画像符号化方法
CN104427345B (zh) * 2013-09-11 2019-01-08 华为技术有限公司 运动矢量的获取方法、获取装置、视频编解码器及其方法
US10531093B2 (en) * 2015-05-25 2020-01-07 Peking University Shenzhen Graduate School Method and system for video frame interpolation based on optical flow method
WO2017036399A1 (en) * 2015-09-02 2017-03-09 Mediatek Inc. Method and apparatus of motion compensation for video coding based on bi prediction optical flow techniques
US10375413B2 (en) * 2015-09-28 2019-08-06 Qualcomm Incorporated Bi-directional optical flow for video coding
CN114827599A (zh) * 2016-02-03 2022-07-29 Oppo广东移动通信有限公司 运动图像解码装置、编码装置、以及预测图像生成装置
WO2017133661A1 (en) * 2016-02-05 2017-08-10 Mediatek Inc. Method and apparatus of motion compensation based on bi-directional optical flow techniques for video coding
CN114466193A (zh) * 2016-03-16 2022-05-10 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
US10939105B2 (en) * 2016-03-25 2021-03-02 Panasonic Intellectual Property Management Co., Ltd. Methods and apparatuses for encoding and decoding video using signal dependent adaptive quantization
US20170339405A1 (en) * 2016-05-20 2017-11-23 Arris Enterprises Llc System and method for intra coding
JP6938612B2 (ja) * 2016-07-12 2021-09-22 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートＥｌｅｃｔｒｏｎｉｃｓ Ａｎｄ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｒｅｓｅａｒｃｈ Ｉｎｓｔｉｔｕｔｅ 画像復号方法、画像符号化方法、及び非一時的なコンピュータ可読の記録媒体
CN117615147A (zh) * 2016-07-14 2024-02-27 三星电子株式会社 视频解码方法及其装置以及视频编码方法及其装置
CN116582668A (zh) * 2016-08-11 2023-08-11 Lx 半导体科技有限公司 图像编码/解码方法以及图像数据的发送方法
CN106454378B (zh) * 2016-09-07 2019-01-29 中山大学 一种基于变形运动模型的帧率上转换视频编码方法及系统
KR102499139B1 (ko) * 2016-09-21 2023-02-13 삼성전자주식회사 이미지를 표시하는 전자 장치 및 그 제어 방법
CN110115032B (zh) * 2016-12-22 2021-07-20 联发科技股份有限公司 用于视频编解码的运动细化的方法以及装置
US10931969B2 (en) * 2017-01-04 2021-02-23 Qualcomm Incorporated Motion vector reconstructions for bi-directional optical flow (BIO)
US10523964B2 (en) * 2017-03-13 2019-12-31 Qualcomm Incorporated Inter prediction refinement based on bi-directional optical flow (BIO)
WO2018174618A1 (ko) * 2017-03-22 2018-09-27 한국전자통신연구원 참조 블록을 사용하는 예측 방법 및 장치
CN116708831A (zh) * 2017-04-24 2023-09-05 Sk电信有限公司 编解码视频数据的方法、发送编码视频数据比特流的方法
KR102409430B1 (ko) * 2017-04-24 2022-06-15 에스케이텔레콤 주식회사 움직임 보상을 위한 옵티컬 플로우 추정 방법 및 장치
CA3065492C (en) * 2017-05-17 2022-06-14 Kt Corporation Method and device for video signal processing
US10904565B2 (en) * 2017-06-23 2021-01-26 Qualcomm Incorporated Memory-bandwidth-efficient design for bi-directional optical flow (BIO)
CN117478884A (zh) * 2017-07-03 2024-01-30 Vid拓展公司 用于视频编解码的设备、方法
WO2019045427A1 (ko) * 2017-08-29 2019-03-07 에스케이텔레콤 주식회사 양방향 옵티컬 플로우를 이용한 움직임 보상 방법 및 장치
WO2019074273A1 (ko) * 2017-10-10 2019-04-18 한국전자통신연구원 인터 예측 정보를 사용하는 방법 및 장치
WO2019117640A1 (ko) * 2017-12-14 2019-06-20 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
MX2021004715A (es) * 2018-11-05 2021-06-04 Beijing Bytedance Network Tech Co Ltd Interpolacion para interprediccion con refinamiento.
CN112565784B (zh) * 2018-12-28 2022-05-27 杭州海康威视数字技术股份有限公司 一种编解码方法及其设备
BR112021012366B1 (pt) * 2019-01-15 2022-03-22 Lg Electronics Inc Método de decodificação de uma imagem realizado por um aparelho de decodificação, método de codificação de uma imagem realizado por um aparelho de codificação e mídia de armazenamento digital legível por computador não transitória
WO2020166897A1 (ko) * 2019-02-14 2020-08-20 엘지전자 주식회사 Dmvr 기반의 인터 예측 방법 및 장치
WO2020185427A1 (en) * 2019-03-11 2020-09-17 Alibaba Group Holding Limited Inter prediction methods for coding video data
WO2020184848A1 (ko) * 2019-03-13 2020-09-17 엘지전자 주식회사 Dmvr 기반의 인터 예측 방법 및 장치
WO2020187198A1 (en) * 2019-03-17 2020-09-24 Beijing Bytedance Network Technology Co., Ltd. Prediction refinement based on optical flow
WO2020197083A1 (ko) * 2019-03-22 2020-10-01 엘지전자 주식회사 Dmvr 및 bdof 기반의 인터 예측 방법 및 장치
US11140409B2 (en) * 2019-03-22 2021-10-05 Lg Electronics Inc. DMVR and BDOF based inter prediction method and apparatus thereof
CN111031318B (zh) * 2019-06-21 2020-12-29 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US11509910B2 (en) * 2019-09-16 2022-11-22 Tencent America LLC Video coding method and device for avoiding small chroma block intra prediction
US20210092404A1 (en) * 2019-09-20 2021-03-25 Qualcomm Incorporated Reference picture constraint for decoder side motion refinement and bi-directional optical flow
US11563980B2 (en) * 2020-04-02 2023-01-24 Qualcomm Incorporated General constraint information syntax in video coding
US11611778B2 (en) * 2020-05-20 2023-03-21 Sharp Kabushiki Kaisha Systems and methods for signaling general constraint information in video coding

Also Published As

Publication number Publication date
JP2022534240A (ja) 2022-07-28
CN113411606A (zh) 2021-09-17
CN113596481A (zh) 2021-11-02
CN113613020A (zh) 2021-11-05
CN113411597A (zh) 2021-09-17
CN113411604A (zh) 2021-09-17
CN113596481B (zh) 2022-07-01
CN113596477B (zh) 2022-07-01
CN113596478B (zh) 2022-04-26
CN113411598B (zh) 2022-05-31
CN113411599B (zh) 2022-05-31
CN113411603A (zh) 2021-09-17
CN113596478A (zh) 2021-11-02
CN113747175A (zh) 2021-12-03
JP7334272B2 (ja) 2023-08-28
CN111031318B (zh) 2020-12-29
CN113411607B (zh) 2022-05-31
CN113411600B (zh) 2022-05-31
CN113411597B (zh) 2022-05-27
CN113411608B (zh) 2022-05-31
CN113411608A (zh) 2021-09-17
CN113596480A (zh) 2021-11-02
JP2023156444A (ja) 2023-10-24
WO2020253730A1 (zh) 2020-12-24
CN113411593B (zh) 2022-05-27
CN113411593A (zh) 2021-09-17
CN113411596A (zh) 2021-09-17
CA3139466A1 (en) 2020-12-24
CN113596476B (zh) 2022-07-01
CN113596476A (zh) 2021-11-02
EP3989576A1 (en) 2022-04-27
CN113411610B (zh) 2022-05-27
CN112118455B (zh) 2022-05-31
CN113411600A (zh) 2021-09-17
CN113411609B (zh) 2022-05-31
CN113411599A (zh) 2021-09-17
CN113411602A (zh) 2021-09-17
CN113411607A (zh) 2021-09-17
CN111031318A (zh) 2020-04-17
MX2021015977A (es) 2022-02-10
CN113709503A (zh) 2021-11-26
WO2020253769A1 (zh) 2020-12-24
CN113596479A (zh) 2021-11-02
CN113411596B (zh) 2022-05-31
CN113411595B (zh) 2022-05-31
CN113411594B (zh) 2022-05-31
CN113596480B (zh) 2022-08-12
CN113411606B (zh) 2022-07-01
CN113596477A (zh) 2021-11-02
CN113411601A (zh) 2021-09-17
CN113411601B (zh) 2022-05-31
CN113411605B (zh) 2022-05-31
CN112118455A (zh) 2020-12-22
CN113411598A (zh) 2021-09-17
KR102620203B1 (ko) 2023-12-29
CN113411610A (zh) 2021-09-17
CN113411603B (zh) 2022-03-25
CN113411609A (zh) 2021-09-17
CN113411602B (zh) 2022-05-31
KR20220003027A (ko) 2022-01-07
US20220232242A1 (en) 2022-07-21
CN113411605A (zh) 2021-09-17
CN113411604B (zh) 2022-05-31
EP3989576A4 (en) 2022-08-31
CN113613021A (zh) 2021-11-05
CN113411595A (zh) 2021-09-17
CN113411594A (zh) 2021-09-17

Similar Documents

Publication Publication Date Title
KR102620203B1 (ko) 인코딩 및 디코딩 방법, 장치 및 그 기기
KR20220050228A (ko) 인코딩 및 디코딩 방법, 장치 및 이의 기기

Legal Events

Date Code Title Description
A107 Divisional application of patent
E902 Notification of reason for refusal