KR20220003027A - 인코딩 및 디코딩 방법, 장치 및 그 기기 - Google Patents

인코딩 및 디코딩 방법, 장치 및 그 기기 Download PDF

Info

Publication number
KR20220003027A
KR20220003027A KR1020217038634A KR20217038634A KR20220003027A KR 20220003027 A KR20220003027 A KR 20220003027A KR 1020217038634 A KR1020217038634 A KR 1020217038634A KR 20217038634 A KR20217038634 A KR 20217038634A KR 20220003027 A KR20220003027 A KR 20220003027A
Authority
KR
South Korea
Prior art keywords
value
block
current block
original
prediction
Prior art date
Application number
KR1020217038634A
Other languages
English (en)
Other versions
KR102620203B1 (ko
Inventor
팡둥 천
Original Assignee
항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드 filed Critical 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Priority to KR1020237045155A priority Critical patent/KR20240005233A/ko
Publication of KR20220003027A publication Critical patent/KR20220003027A/ko
Application granted granted Critical
Publication of KR102620203B1 publication Critical patent/KR102620203B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/577—Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

본 발명은 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하며, 상기 방법은, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다. 본 발명의 기술적 해결수단을 통해, 인코딩 성능을 향상시킬 수 있다.

Description

인코딩 및 디코딩 방법, 장치 및 그 기기
본 발명은 인코딩 및 디코딩 기술 분야에 관한 것으로, 특히는 인코딩 및 디코딩 방법, 장치 및 그 기기에 관한 것이다.
공간을 절약하는 목적에 도달하기 위해, 비디오 이미지는 모두 인코딩을 거친 후 송신되고, 완전한 비디오 인코딩 방법은 예측, 변환, 양자화, 엔트로피 인코딩, 필터링 등 과정을 포함할 수 있다. 여기서, 예측 인코딩은 인트라 인코딩 및 인터 인코딩을 포함할 수 있고, 인터 인코딩은 비디오 시간 영역의 상관성을 이용하여, 이미 인코딩된 이미지에 가까운 픽셀을 사용하여 현재 이미지의 픽셀을 예측하여, 비디오 시간 영역 중복을 효과적으로 제거하는 목적을 달성시킨다.
인터 인코딩에 있어서, 움직임 벡터(Motion Vector, MV)를 사용하여 현재 프레임 비디오 이미지의 현재 블록과 참조 프레임 비디오 이미지의 참조 블록 사이의 상대 변위를 가리킬 수 있다. 예를 들면, 현재 프레임의 비디오 이미지 A와 참조 프레임의 비디오 이미지 B에 매우 강한 시간 영역 상관성이 존재하고, 비디오 이미지 A의 이미지 블록 A1(현재 블록)을 송신해야 할 경우, 비디오 이미지 B에서 움직임 검색하여, 이미지 블록 A1과 가장 매칭되는 이미지 블록 B1(즉 참조 블록)을 찾을 수 있으며, 이미지 블록 A1과 이미지 블록 B1 사이의 상대 변위를 결정하고, 상기 상대 변위는 즉 이미지 블록 A1의 움직임 벡터이다.
인코딩단은 움직임 벡터를 디코딩단에 송신하는 것으로, 이미지 블록 A1을 디코딩단에 송신하는 것이 아니며, 디코딩단은 움직임 벡터 및 이미지 블록 B1에 따라 이미지 블록 A1을 획득할 수 있다. 물론, 움직임 벡터가 차지하는 비트 수는 이미지 블록 A1이 차지하는 비트 수보다 훨씬 적기에 상기 방식은 대량의 비트 지출을 절감할 수 있다.
기존의 방식에서, 현재 블록이 단방향 블록일 경우, 현재 블록의 움직임 정보를 획득한 후, 상기 움직임 정보에 따라 인코딩/디코딩을 진행함으로써, 인코딩 성능을 향상시킬 수 있다. 그러나, 현재 블록이 양방향 블록일 경우, 현재 블록의 양방향 움직임 정보를 획득한 후, 양방향 움직임 정보에 따라 두개의 상이한 방향에서 온 예측 이미지를 획득할 수 있으며, 두개의 상이한 방향에서 온 예측 이미지는 흔히 거울 대칭의 관계가 존재하고, 현재 인코딩 프레임워크에서 이러한 특징을 충분하게 이용하여 중복을 부가적으로 제거하지 않았다. 즉, 양방향 블록에 대한 응용 시나리오는 현재 인코딩 성능이 비교적 떨어지는 등 문제가 존재한다.
본 발명은 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하여, 인코딩 성능을 향상시킬 수 있다.
본 발명은 인코딩 및 디코딩 방법을 제공하는 바, 상기 방법은, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해,
상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계;
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
본 발명은 인코딩 및 디코딩 장치를 제공하며, 상기 장치는 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 상기 장치는,
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 제1 결정 모듈;
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하고; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 제2 결정 모듈;
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 제1 획득 모듈; 및
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 제2 획득 모듈을 포함한다.
본 발명은 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 인코딩단 기기를 제공하며, 상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고; 상기 프로세서는 기계 실행 가능한 명령을 실행하여, 현재 블록의 특징 정보가 특정 조건을 만족하면, 하기의 단계를 수행하여 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하는 바, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 구현한다.
본 발명은 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 디코딩단 기기를 제공하며, 상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고; 상기 프로세서는 기계 실행 가능한 명령을 실행하여, 현재 블록의 특징 정보가 특정 조건을 만족하면, 하기의 단계를 수행하여 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하는 바, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 구현한다.
상기 기술적 해결수단으로부터 보면, 본 발명의 실시예에 있어서, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정할 수 있고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도 및 수직 방향 속도를 결정하고, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하며, 예측 보상 값에 따라 타깃 예측 값을 획득한다. 상기 방식은 광학 흐름법에 기반하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반한다.
본 발명의 실시예의 기술적 해결수단을 더욱 분명하게 설명하기 위해, 이해 본 발명의 실시예의 서술에 필요한 도면을 간단하게 소개하는 바, 아래에서 설명되는 도면은 단지 본 발명에 기재된 일부 실시예로서, 본 기술분야의 통상의 기술자에게 있어서 본 발명의 실시예의 이러한 도면에 따라 다른 도면을 획득할 수도 있음은 자명하다.
도 1a는 본 발명의 일 실시형태에 따른 보간의 모식도이다.
도 1b는 본 발명의 일 실시형태에 따른 비디오 인코딩 프레임워크의 모식도이다.
도 2는 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 방법의 흐름도이다.
도 3은 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 방법의 흐름도이다.
도 4는 본 발명의 일 실시형태에 따른 현재 블록의 서브 블록에 대응되는 참조 블록의 모식도이다.
도 5는 본 발명의 일 실시형태에 따른 인코딩 및 디코딩 장치의 구조도이다.
도 6은 본 발명의 일 실시형태에 따른 디코딩단 기기의 하드웨어 구조도이다.
도 7은 본 발명의 일 실시형태에 따른 인코딩단 기기의 하드웨어 구조도이다.
본 발명의 실시예에서 사용되는 용어는 단지 특정 실시예를 설명하기 위한 목적일 뿐, 본 발명을 한정하려는 것이 아니다. 본 발명 및 청구보호범위에서 사용되는 단수 형태의 “일”, “상기” 및 “해당”은 문맥 상에서 다른 의미를 명확하게 나타내지 않는 한, 복수의 형태를 포함하도록 의도된다. 더 이해해야 할 것은, 본문에 사용되는 용어 “및/또는”은 하나 또는 다수의 관련된 열거 항목을 포함하는 임의의 또는 모든 가능한 조합을 의미한다. 이해해야 할 것은, 본 발명의 실시예는 용어 제1, 제2, 제3 등을 사용하여 다양한 정보를 설명할 수 있지만, 이러한 정보는 이러한 용어에 한정되는 것이 아니다. 이러한 용어는 단지 동일한 유형의 정보를 서로 구분하기 위한 것이다. 예를 들어, 본 발명의 범위를 벗어나지 않는 경우, 제1 정보는 제2 정보로도 지칭될 수 있고, 유사하게, 제2 정보도 제1 정보로 지칭될 수 있다. 언어 환경에 따르면, 사용되는 단어 “만약”은 “...일 때” 또는 “...일 경우” 또는 “에 응답하여 결정한다”로 해석될 수 있다.
본 발명의 실시예에서 인코딩 및 디코딩 방법, 장치 및 그 기기를 제공하는 바, 하기와 같은 개념에 관련될 수 있다.
인트라 예측과 인터 예측(intra prediction and inter prediction) 기술: 인트라 예측은, 비디오 공간 영역의 상관성을 이용하는 것이며, 현재 이미지의 코딩된 블록의 픽셀을 사용하여 현재 픽셀을 예측하여 비디오 공간 영역 중복을 제거하는 목적에 달성한다. 인터 예측은 비디오 시간 영역의 상관성을 이용하는 것이며, 비디오 시퀀스에는 일반적으로 비교적 강한 시간 영역 상관성이 포함되므로, 인접한 인코딩된 이미지 픽셀을 사용하여 현재 이미지의 픽셀을 예측하여, 비디오 시간 영역 중복을 효과적으로 제거하는 목적에 달성할 수 있다. 비디오 인코딩 표준 인터 예측 부분은 모두 블록 기반의 움직임 보상 기술을 사용하였으며, 원리는 현재 이미지의 각각의 픽셀 블록이 이전의 코딩된 이미지에서 하나의 최적 매칭 블록을 찾는 것이며, 상기 과정은 움직임 추정(Motion Estimation, ME)으로 지칭된다.
움직임 벡터(Motion Vector, MV): 인터 인코딩에서, 움직임 벡터를 사용하여 현재 인코딩 블록과 이의 참조 이미지 중 최적 매칭 블록 사이의 상대 변위를 나타낼 수 있다. 각각의 분할된 블록은 모두 디코딩단으로 전송되는 상응한 움직임 벡터를 가지며, 각각의 블록의 움직임 벡터에 대해 독립적인 인코딩 및 전송을 수행할 경우, 특히 작은 사이즈의 블록으로 분할할 경우, 상당히 많은 비트가 소모되어야 한다. 움직임 벡터의 인코딩에 사용되는 비트 수를 감소시키기 위해, 인접한 이미지 블록 사이의 공간 상관성을 이용하여, 인접한 인코딩된 블록의 움직임 벡터에 따라 현재 인코딩할 블록의 움직임 벡터를 예측한 다음, 예측 차이에 대해 인코딩을 수행한다. 이로써, 움직임 벡터를 나타내는 비트 수를 효과적으로 감소시킬 수 있다. 현재 블록의 움직임 벡터에 대한 인코딩 과정에서, 우선 인접한 인코딩된 블록의 움직임 벡터를 사용하여 현재 블록의 움직임 벡터를 예측한 다음, 움직임 벡터의 예측값(MVP, Motion Vector Prediction)과 움직임 벡터의 실제 추정값 사이의 차분값(MVD, Motion Vector Difference)에 대해 인코딩을 수행함으로써, MV의 인코딩 비트 수를 효과적으로 감소시킨다.
움직임 정보(Motion Information): 움직임 벡터는 현재 이미지 블록과 특정된 참조 이미지 블록의 위치 오프셋을 표시하므로, 이미지 블록을 지향하는 정보를 정확하게 획득하기 위해, 움직임 벡터 외에도 참조 프레임 이미지의 인덱스 정보로 어느 참조 프레임 이미지를 사용할 것인지 표시해야 한다. 비디오 인코딩 기술에서, 현재 프레임 이미지에 대해 일반적으로 하나의 참조 프레임 이미지 리스트를 구축할 수 있으며, 참조 프레임 이미지 인덱스 정보는 현재 이미지 블록이 참조 프레임 이미지 리스트 중 몇 번째 참조 프레임 이미지를 사용하였는지 표시한다. 이밖에, 많은 인코딩 기술은 또한 복수의 참조 이미지 리스트를 지원하므로, 하나의 인덱스값을 사용하여 어느 참조 이미지 리스트를 사용하였는지 표시할 수 있으며, 이 인덱스값은 참조 방향으로 지칭될 수 있다. 비디오 인코딩 기술에서, 움직임 벡터, 참조 프레임 인덱스, 참조 방향과 같은 움직임과 관련된 정보를 움직임 정보로 통칭할 수 있다.
보간(Interpolation): 현재 움직임 벡터가 비정수 픽셀 정밀도이면, 대응되는 참조 프레임으로부터 기존의 픽셀 값을 직접 복제할 수 없으며, 필요한 픽셀 값은 보간을 통해서만 획득된다. 도 1a에 도시된 바와 같이, 1/2 픽셀의 오프셋인 픽셀 값 Y1/2를 얻으려면, 주변에 있는 기존의 픽셀 값 X는 보간을 통해 획득해야 한다. N개의 탭을 가진 보간 필터를 사용하려면, 주변에 N개의 전체 픽셀은 보간을 통해 획득해야 한다. 탭의 개수 N이 8이면,
Figure pct00001
이고,
Figure pct00002
는 필터 계수이고, 즉 가중 계수이다.
움직임 보상: 움직임 보상은 보간 또는 복제를 통해 현재 블록의 모든 픽셀 값을 획득하는 과정이다.
비디오 인코딩 프레임워크: 도 1b에 도시된 바와 같이, 비디오 인코딩 프레임워크을 사용하여 본 발명의 실시예의 인코딩단 처리 프로세스를 구현할 수 있으며, 이밖에, 비디오 디코딩 프레임의 모식도는 도 1b와 유사하기에 여기서 더이상 서술하지 않는다. 또한 비디오 디코딩 프레임을 사용하여 본 발명의 실시예의 디코딩단 처리 프로세스를 구현할 수 있다. 구체적으로, 비디오 인코딩 프레임워크 및 비디오 디코딩 프레임에는, 인트라 예측, 움직임 추정/움직임 보상, 참조 이미지 버퍼, 인 루프 필터링, 재구성, 변환, 양자화, 역변환, 역 양자화, 엔트로피 인코더 등 모듈이 포함될 수 있다. 인코딩단에서 이러한 모듈 사이의 배합을 통해, 인코딩단 처리 프로세스를 구현할 수 있고, 디코딩단에서 이러한 모듈 사이의 배합을 통해, 디코딩단 처리 프로세스를 구현할 수 있다.
기존의 방식에서, 현재 블록이 양방향 블록일 경우(즉 현재 블록은 양방향 예측의 블록을 사용함), 두개의 상이한 방향에서 온 예측 이미지에 흔히 거울 대칭의 관계가 존재하고, 현재 인코딩 프레임워크에서 이러한 특징을 충분하게 이용하여 중복을 부가적으로 제거하지 않았기에, 인코딩 성능이 상대적으로 떨어지는 등 문제가 존재한다. 상기 발견에 대해, 본 발명의 실시예에 있어서, 현재 블록이 양방향 블록일 경우, 광학 흐름법에 기반한 예측 신호 조절 방식을 제기하여, 원래 움직임 정보에 기반하여 원래 예측 값을 획득하고, 원래 예측 값에 기반하여 광학 흐름 방정식을 통해 현재 블록의 예측 보상 값을 획득하고, 상기 예측 보상 값과 원래 예측 값에 기반하여 현재 블록의 타깃 예측 값을 획득할 수 있다. 상기 방식은 광학 흐름법에 기반하여 현재 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반하며, 즉 인코딩 성능 및 인코딩 효율을 향상시킬 수 있다.
아래에 다수의 구체적인 실시예를 결부하여, 본 발명의 인코딩 및 디코딩 방법에 대해 상세하게 설명한다.
실시예 1: 도 2에 도시된 바와 같이, 인코딩 및 디코딩 방법의 흐름 모식도이고, 상기 방법은 디코딩단 또는 인코딩단에 적용될 수 있으며, 상기 방법은 하기의 단계를 수행하는 것을 통해 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득한다. 현재 블록에 대해 하기의 단계를 수행하면, 현재 블록의 타깃 예측 값을 획득할 수 있고; 현재 블록이 적어도 하나의 서브 블록으로 분할되면, 현재 블록의 각각의 서브 블록에 대하여 하기의 단계를 수행하여, 현재 블록의 서브 블록의 타깃 예측 값을 획득할 수 있는 바, 상기 방법은 하기의 단계를 포함한다.
단계 201: 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정한다.
예시적으로, 현재 블록은 양방향 블록(즉 현재 블록은 양방향 예측 블록을 사용함)일 수 있고, 즉 현재 블록에 대응되는 움직임 정보는 양방향 움직임 정보이고, 이 양방향 움직임 정보는 두개의 상이한 방향의 움직임 정보를 포함할 수 있으며, 이 두개의 상이한 방향의 움직임 정보를 제1 단일 방향 움직임 정보 및 제2 단일 방향 움직임 정보라고 칭한다. 제1 단일 방향 움직임 정보는 제1 참조 프레임에 대응될 수 있고, 상기 제1 참조 프레임은 현재 블록이 위치한 현재 프레임의 전면에 위치하고; 제2 단일 방향 움직임 정보는 제2 참조 프레임에 대응될 수 있으며, 상기 제2 참조 프레임은 현재 블록이 위치한 현재 프레임의 후면에 위치할 수 있다.
예시적으로, 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보; 시퀀스 레벨 스위치 제어 정보 중 하나 또는 여러 가지를 포함할 수 있지만 이에 한하지 않는다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
특징 정보가 움직임 정보 속성을 포함하고, 움직임 정보 속성이 하기의 적어도 한 가지 상황에 부합될 경우, 움직임 정보 속성이 특정 조건을 만족하는 것으로 결정하는 바, 1. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며; 2. 현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며; 3. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하며; 4. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일하며; 5. 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값보다 작다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
상황 5에 대해, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값을 획득해야 하며, 상기 차이 값을 획득하기 위해, 하기의 방식을 사용할 수 있는 바, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하며; 제1 예측 블록의 다운샘플링한 후의 예측 값과 제2 예측 블록의 다운샘플링한 후의 예측 값의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다. 또는, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하고; 제1 예측 블록의 예측 값과 제2 예측 블록의 예측 값의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
특징 정보가 예측 모드 속성을 포함하고, 예측 모드 속성이 인트라 인터 병합 예측에 기반한 병합 모드, 및/또는, 대칭 움직임 벡터 차이 모드를 사용하지 않는다면, 예측 모드 속성이 특정 조건을 만족하는 것으로 결정한다.
특징 정보가 시퀀스 레벨 스위치 제어 정보를 포함하고, 상기 시퀀스 레벨 스위치 제어 정보가 현재 블록 양방향 광학 흐름 모드를 사용하도록 허용하면, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족하는 것으로 결정한다.
특징 정보가 사이즈 정보를 포함하고, 사이즈 정보는 폭 값, 높이 값 및 면적 값 중 적어도 하나를 포함하며, 사이즈 정보 중의 폭 값, 높이 값 및 면적 값 중 적어도 하나가 상응한 임계값 조건을 만족할 경우, 사이즈 정보는 특정 조건을 만족한다. 예시적으로, 사이즈 정보가 하기의 상황의 적어도 한 가지에 부합될 경우, 사이즈 정보가 특정 조건을 만족하는 것으로 결정하는 바, 현재 블록의 폭 값이 제1 임계값보다 크거나 같고, 현재 블록의 폭 값이 제2 임계값보다 작거나 같으며; 현재 블록의 높이 값이 제3 임계값보다 크거나 같고, 현재 블록의 높이 값이 제4 임계값보다 작거나 같으며; 현재 블록의 면적 값이 제5 임계값보다 크거나 같고, 현재 블록의 면적 값이 제6 임계값보다 작거나 같다. 물론, 상기는 단지 몇 가지 구현예로서, 이를 한정하지 않는다.
예시적으로, 제1 임계값은 제2 임계값보다 작을 수 있고, 제1 임계값 및 제2 임계값은 모두 2의 양의 정수의 거듭제곱이며, 이에 대해 제1 임계값 및 제2 임계값은 모두 한정하지 않고, 예를 들면, 제1 임계값은 8일 수 있고, 제2 임계값은 128일 수 있다. 제3 임계값은 제4 임계값보다 작을 수 있고, 제3 임계값 및 제4 임계값도 2의 양의 정수의 거듭제곱이며, 이에 대해 제3 임계값 및 제4 임계값은 모두 한정하지 않고, 예를 들면, 제3 임계값은 8일 수 있고, 제4 임계값은 128일 수 있다. 제5 임계값은 제6 임계값보다 작을 수 있고, 제5 임계값 및 제6 임계값도 2의 양의 정수의 거듭제곱이며, 이에 대해 제5 임계값 및 제6 임계값은 모두 한정하지 않고, 예를 들면, 제5 임계값은 64(즉 8*8)일 수 있고, 제6 임계값은 16384(즉 128*128)일 수 있다. 물론, 상기 임계값은 단지 예시로서, 이러한 임계값에 대해 한정하지 않는다.
예시적으로, 특징 정보는 움직임 정보 속성, 예측 모드 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보 중 하나 또는 복수를 포함할 수 있다. 특징 정보가 움직임 정보 속성을 포함하면, 움직임 정보 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있고; 특징 정보가 예측 모드 속성을 포함하면, 예측 모드 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있으며; 특징 정보가 사이즈 정보를 포함하면, 사이즈 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있으며; 특징 정보가 시퀀스 레벨 스위치 제어 정보를 포함하면, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다.
특징 정보가 움직임 정보 속성, 예측 모드 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보 중 적어도 두 가지를 포함할 경우, 예를 들면, 특징 정보가 움직임 정보 속성 및 예측 모드 속성을 포함하는 것을 예로 들면, 움직임 정보 속성이 특정 조건을 만족하고 예측 모드 속성이 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다. 또 예를 들면, 특징 정보가 움직임 정보 속성, 사이즈 정보, 시퀀스 레벨 스위치 제어 정보를 포함하면, 움직임 정보 속성이 특정 조건을 만족하고, 사이즈 정보가 특정 조건을 만족하며, 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족할 경우, 특징 정보가 특정 조건을 만족하는 것을 표시할 수 있다. 물론, 상기 과정은 몇 가지 예시로서, 이를 한정하지 않는다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계 - 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - ; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하는 단계 - 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - 를 포함할 수 있지만 이에 한하지 않는다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록에 대응되는 제1 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이고, 제1 참조 블록의 크기가 N*N이며, N은 M보다 클 수 있고, 예컨대 M은 4이고 N은 6이다. 제1 참조 블록을 중심 영역 및 가장자리 영역으로 분할할 수 있고, 제1 참조 블록의 중심 영역은 제1 참조 블록의 중심점을 중심으로, 크기가 M*M인 영역을 가리키며; 제1 참조 블록의 가장자리 영역은 제1 참조 블록에서 중심 영역 이 외의 다른 영역을 가리킨다. 제1 참조 블록의 중심 영역에 대해, 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며; 제1 참조 블록의 가장자리 영역에 대해, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록에 대응되는 제2 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이며, 제2 참조 블록의 크기는 N*N이면, N은 M보다 클 수 있고, 예컨대 M은 4이고 N은 6이다. 제2 참조 블록을 중심 영역 및 가장자리 영역으로 분할할 수 있고, 제2 참조 블록의 중심 영역은 제2 참조 블록의 중심점을 중심으로, 크기가 M*M인 영역을 가리키며; 제2 참조 블록의 가장자리 영역은, 제2 참조 블록에서 중심 영역 이외의 다른 영역을 가리킨다. 제2 참조 블록의 중심 영역에 대하여, 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며; 제2 참조 블록의 가장자리 영역에 대하여, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계를 포함할 수 있지만 이에 한하지 않으며, 상기 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하며 상기 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록에 대응되는 제1 참조 블록을 결정할 수 있고, 현재 블록의 크기가 M*M이면, 제1 참조 블록의 크기는 M*M일 수 있다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록에 대응되는 제2 참조 블록을 결정할 수 있으며, 현재 블록의 크기가 M*M이면, 제2 참조 블록의 크기는 M*M일 수 있다.
단계 202: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도를 결정한다.
예시적으로, 수평 방향 속도는 현재 블록이 참조 프레임에서 서브 블록(즉 현재 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수평 방향(즉 X 방향) 속도를 가리킨다. 또는, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록(즉 현재 블록의 서브 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수평 방향(즉 X 방향) 속도를 가리킨다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계는, 하기의 방식을 포함하지만 이에 한하지 않는다.
방식 1: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정한다. 이어서, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
방식 2: 제1 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다. 제1 기설정 조건을 만족하지 않으면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정하고; 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
예시적으로, 제1 기설정 조건은 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5)에 기반하여 결정된다.
방식 3: 제2 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다. 제2 기설정 조건을 만족하지 않으면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)를 결정하고; 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정한다.
예시적으로, 제2 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다.
단계 203: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 속도를 결정한다.
예시적으로, 수직 방향 속도는, 현재 블록이 참조 프레임에서 서브 블록(즉 현재 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수직 방향(즉 Y 방향) 속도를 가리킨다. 또는, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록(즉 현재 블록의 서브 블록에 대응되는 참조 프레임의 서브 블록에 위치함)에 대응되는 수직 방향(즉 Y 방향) 속도를 가리킨다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계는 하기의 방식을 포함하지만 이에 한하지 않는다.
방식 1: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정한다. 이어서, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다.
방식 2: 제1 원래 예측 값 및 제2 원래 예측 값에 따라 절단 처리를 진행하지 않은 비절단 수평 방향 속도를 획득하고, 상기 비절단 수평 방향 속도에 따라 수직 방향 속도를 결정한다.
예시적으로, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정할 수 있다. 이어서, 자기 상관 계수(S1), 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 비절단 수평 방향 속도를 결정하고, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 비절단 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
방식 3: 제3 기설정 조건을 만족할 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 이어서, 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 제3 기설정 조건을 만족하지 않을 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 이어서, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
예시적으로, 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
단계 202 및 단계 203에서, 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있고; 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정한다.
예시적으로, 상호 상관 계수(S2)는 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이에 위치할 수 있고; 상호 상관 계수(S6)는 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이에 위치할 수 있다.
예를 들면, 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값으로 업데이트하고; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제2 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S2)를 제2 상호 상관 계수 임계값으로 업데이트하며; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 크거나 같고, 제2 상호 상관 계수 임계값보다 작거나 같으면, 상호 상관 계수(S2) 불변을 유지한다.
제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값으로 업데이트하고; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제4 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S6)를 제4 상호 상관 계수 임계값으로 업데이트하며; 제1 원래 예측 값, 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라 얻은 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 크거나 같고, 제4 상호 상관 계수 임계값보다 작거나 같으면, 상호 상관 계수(S6) 불변을 유지한다.
예시적으로, 제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다. 물론, 상기는 단지 제1 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다. 물론, 상기는 단지 제2 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, 속도 임계값은 2의 M 제곱이고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 물론, 상기는 단지 속도 임계값의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
예시적으로, BD(bit depth)는 비트 깊이이고, 각가의 색도 또는 밝기 픽셀 값에 필요한 비트 폭을 표시한다.
단계 204: 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득한다.
예시적으로, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계는, 제1 원래 예측 값, 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하는 단계, 수평 방향 속도, 수직 방향 속도, 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 예측 보상 값을 획득하는 단계를 포함하지만 이에 한하지 않는다.
예시적으로, 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값이다. 물론, 상기는 단지 기울기 우측 시프트 수의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
단계 205: 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 타깃 예측 값을 획득한다.
예시적으로, 상기 방법이 현재 블록의 타깃 예측 값을 획득하기 위한 것이면, 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보에 따라 상기 현재 블록에 대응되는 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 상기 현재 블록에 대응되는 제2 원래 예측 값을 결정한다. 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 현재 블록에 대응되는 수평 방향 속도를 결정하고, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 현재 블록에 대응되는 수직 방향 속도를 결정한다. 이어서, 수평 방향 속도 및 수직 방향 속도에 따라 상기 현재 블록에 대응되는 예측 보상 값을 획득하고, 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 상기 현재 블록에 대응되는 타깃 예측 값을 획득한다. 이로써, 상기 현재 블록에 대응되는 타깃 예측 값을 성공적으로 획득한다.
예시적으로, 현재 블록을 적어도 하나의 서브 블록으로 분할하고, 상기 방법이 현재 블록의 각각의 서브 블록의 타깃 예측 값을 획득하는 것이면, 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 각각의 서브 블록에 대하여, 상기 서브 블록의 제1 단일 방향 움직임 정보(현재 블록의 제1 단일 방향 움직임 정보와 동일함)에 따라 상기 서브 블록에 대응되는 제1 원래 예측 값을 결정하고, 상기 서브 블록의 제2 단일 방향 움직임 정보(현재 블록의 제2 단일 방향 움직임 정보와 동일함)에 따라 상기 서브 블록에 대응되는 제2 원래 예측 값을 결정한다. 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 서브 블록에 대응되는 수평 방향 속도를 결정하고, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 상기 서브 블록에 대응되는 수직 방향 속도를 결정한다. 이어서, 수평 방향 속도 및 수직 방향 속도에 따라 상기 서브 블록에 대응되는 예측 보상 값을 획득하고, 제1 원래 예측 값, 제2 원래 예측 값 및 예측 보상 값에 따라 상기 서브 블록에 대응되는 타깃 예측 값을 획득한다.
이로써, 상기 서브 블록에 대응되는 타깃 예측 값을 성공적으로 획득한다. 상기 현재 블록의 각각의 서브 블록의 타깃 예측 값을 얻은 후, 실제 상에서 상기 현재 블록의 타깃 예측 값을 얻은 것이다.
상기 기술적 해결수단으로부터 보면, 본 발명의 실시예에 있어서, 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정할 수 있고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 속도 및 수직 방향 속도를 결정하고, 수평 방향 속도 및 수직 방향 속도에 따라 예측 보상 값을 획득하며, 예측 보상 값에 따라 타깃 예측 값을 획득한다. 상기 방식은 광학 흐름법에 기반하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득함으로써, 하드웨어 구현의 친화성을 향상시켜, 인코딩 성능의 향상을 동반한다.
실시예 2: 본 발명의 실시예는 인코딩 및 디코딩 방법을 공개하였으며, 디코딩단 또는 인코딩단에 응용될 수 있고, 도 3에 도시된 바와 같이, 인코딩 및 디코딩 방법의 흐름 모식도이다. 예시적으로, 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 각각의 서브 블록에 대하여 단계를 수행하여, 현재 블록의 각각의 서브 블록의 타깃 예측 값을 획득할 수 있다.
단계 301: 현재 블록의 특징 정보가 특정 조건을 만족하면, 현재 블록의 제1 단일 방향 움직임 정보(즉 현재 블록의 서브 블록의 제1 단일 방향 움직임 정보)에 따라 서브 블록의 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보(즉 현재 블록의 서브 블록의 제2 단일 방향 움직임 정보)에 따라 서브 블록의 제2 원래 예측 값을 결정한다.
예시적으로, 현재 블록이 양방향 블록(즉 현재 블록은 양방향 예측 블록을 사용함)이면, 현재 블록에 대응되는 양방향 움직임 정보를 획득할 수 있고, 상기 획득 방식에 대해서 한정하지 않는다. 이 양방향 움직임 정보는 두개의 상이한 방향의 움직임 정보를 포함하고, 두개의 상이한 방향의 움직임 정보를 제1 단일 방향 움직임 정보(예컨대 제1 움직임 벡터 및 제1 참조 프레임 인덱스) 및 제2 단일 방향 움직임 정보(예컨대 제2 움직임 벡터 및 제2 참조 프레임 인덱스)로 칭한다. 제1 단일 방향 움직임 정보에 기반하면 제1 참조 프레임(예컨대 참조 프레임 0)을 결정할 수 있고, 제1 참조 프레임은 현재 블록이 위치한 현재 프레임의 전면에 위치하며; 제2 단일 방향 움직임 정보에 기반하면 제2 참조 프레임(예컨대 참조 프레임 1)을 결정할 수 있고, 제2 참조 프레임은 현재 블록이 위치한 현재 프레임의 후면에 위치한다.
예시적으로, 현재 블록의 각각의 서브 블록에 대하여, 상기 서브 블록의 제1 단일 방향 움직임 정보는 현재 블록의 제1 단일 방향 움직임 정보와 동일하고, 상기 서브 블록의 제2 단일 방향 움직임 정보는 현재 블록의 제2 단일 방향 움직임 정보와 동일하다.
예시적으로, 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보 중 한 가지 또는 여러 가지를 포함할 수 있고; 시퀀스 레벨 스위치 제어 정보는, 특징 정보가 특정 조건을 만족하는 것에 관련되며, 단계 201을 참조 가능하기에, 여기서 더 설명하지 않는다.
예시적으로, 현재 블록의 제1 단일 방향 움직임 정보에 따라 서브 블록의 제1 원래 예측 값을 결정하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 서브 블록의 제2 원래 예측 값을 결정하는 단계는, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 참조 블록을 결정하며, 상기 제2 참조 블록의 제2 원래 예측 값을 결정하는 단계를 포함할 수 있다. 제1 원래 예측 값 및 제2 원래 예측 값의 결정 방식에 대해서는, 단계 201을 참조 가능하기에, 여기서 더 설명하지 않는다.
단계 302: 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다. 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다.
단계 303: 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1)(후속적으로 자기 상관 계수(S1)로 칭함), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2)(후속적으로 상호 상관 계수(S2)로 칭함), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)(후속적으로 상호 상관 계수(S3)로 칭함), 수직 방향 기울기 합의 자기 상관 계수(S5)(후속적으로 자기 상관 계수(S5)로 칭함), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)(후속적으로 상호 상관 계수(S6)로 칭함)를 결정한다.
단계 304: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정한다.
단계 305: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
단계 306: 수평 방향 속도 및 수직 방향 속도에 따라 현재 블록의 서브 블록의 예측 보상 값을 획득한다.
단계 307: 현재 블록의 서브 블록의 제1 원래 예측 값, 현재 블록의 서브 블록의 제2 원래 예측 값 및 현재 블록의 서브 블록의 예측 보상 값에 따라, 현재 블록의 서브 블록의 타깃 예측 값을 획득한다.
예시적으로, 단계 301 내지 단계 307의 흐름은 실시예 1을 참조 가능하고, 여기서 더 설명하지 않는다.
실시예 3: 인코딩단/디코딩단은 현재 블록의 특징 정보가 특정 조건을 만족하는 지의 여부를 판정해야 한다. 만약 만족하면, 본 발명의 실시예의 기술적 해결수단을 사용하여 현재 블록 또는 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 이 기술적 해결수단은 양방향 광학 흐름 모드로 칭할 수도 있다. 만약 만족하지 않으면, 본 발명에서 제공하는 타깃 예측 값 획득 방식을 사용하지 않는다.
특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있다.
실시예 4: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있다.
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않는다.
예시적으로, 현재 블록이 서브 블록 움직임 정보 모드를 사용하지 않는 것은, 현재 블록이 Affine 모드 또는 SBTMVP 모드를 사용하지 않는 것을 포함할 수 있으며; Affine 모드는 아핀 움직임 모델 모드를 사용하고, SBTMVP(subblock-based temporal motion vector prediction) 모드는 시간 영역에서 전체 블록의 움직임 정보를 획득하는 모드이다. 현재 블록이 Affine 모드 또는 SBTMVP 모드를 사용할 경우, 현재 블록 내부의 각 하나의 서브 블록의 움직임 정보는, 완전히 상이할 수 있으며, 따라서, 현재 블록은 Affine 모드 또는 SBTMVP 모드를 사용하지 않을 수 있다.
실시예 5: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있으며;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않고;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하다.
실시예 6: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않으며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하며;
현재 블록은 CIIP 모드(인트라 인터 병합 예측에 기반한 병합 모드, combine intra inter prediction mode)를 사용하지 않는다.
실시예 7: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않고;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일으며;
현재 블록은 SMVD(Symmetric Motion Vector Difference, 대칭 움직임 벡터 차이) 모드를 사용하지 않고, SMVD모드에서 양방향 움직임 정보 중의 두개의 MVD는 대칭되며, 즉 단지 인코딩 그 중의 하나의 움직임 벡터 차이 MVD만 인코딩해야 하고, 다른 한 움직임 벡터 차이는 음의 MVD이다.
실시예 8: 특징 정보가 하기의 조건을 동시에 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
시퀀스 레벨 스위치 제어 정보는 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허락하는 것이며, 다시 말해, 시퀀스 레벨 제어는 양방향 광학 흐름 모드가 활성화되도록 허용하고, 즉 시퀀스 레벨 제어 스위치가 온되면, 현재 블록이 양방향 광학 흐름 모드의 사용을 허용한다는 것을 표시하며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이하며, 다시 말하자면, 현재 블록에 대응되는 하나의 참조 프레임은 현재 프레임 전에 위치하고, 현재 블록에 대응되는 다른 한 참조 프레임은 현재 프레임 후에 위치하며;
현재 블록의 사이즈 정보(예컨대 폭 값, 높이 값, 면적 값 등)는 한정 범위 내에 있고;
현재 블록은 복수의 서브 블록을 포함하고, 복수의 서브 블록의 움직임 정보가 모두 동일하며, 다시 말하자면, 현재 블록의 각각의 서브 블록의 움직임 정보는 완전히 동일한 바, 즉 현재 블록은 서브 블록 움직임 정보 모드를 사용하지 않으며;
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일하다.
실시예 9: 상기 실시예 3 내지 실시예 8 중 임의의 하나의 조건 “현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것”을, “현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것, 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일한 것”으로 보정한다.
예를 들면, 현재 프레임의 디스플레이 시퀀스 번호가 POC이고, 현재 블록에 대응되는 두개의 참조 프레임의 디스플레이 시퀀스 번호가 각각 POC0 및 POC1이면, 두개의 참조 프레임의 방향은 상이하고,(POC- POC0)*(POC- POC1)<0와 동등하며, 두개의 참조 프레임과 현재 프레임의 거리는 동일하고,(POC- POC0)의 값은(POC1- POC)의 값에 동등하다.
실시예 10: 특징 정보가 적어도 하기의 조건을 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
시퀀스 레벨 스위치 제어 정보는 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허락하는 것이며, 다시 말해, 시퀀스 레벨 제어는 양방향 광학 흐름 모드가 활성화되도록 허용하고, 즉 시퀀스 레벨 제어 스위치가 온되면, 현재 블록이 양방향 광학 흐름 모드의 사용을 허용한다는 것을 표시한다.
실시예 11: 특징 정보가 적어도 하기의 조건을 만족할 경우, 현재 블록의 특징 정보가 특정 조건을 만족하는 것으로 결정한다.
현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값 TH_SAD보다 작을 수 있다. 예시적으로, 하기의 방식을 사용하여 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값을 획득할 수 있다.
방식 1: 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 예측 블록을 획득하며; 제1 예측 블록의 예측 값과 제2 예측 블록의 예측 값의 SAD에 따라(Sum of Absolute Difference, 절대 차이 값의 합), 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
방식 1에 있어서, 예측 값의 차이 값은 제1 예측 블록의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록의 예측 값(후속적으로 pred1으로 기재함)의 SAD이고, 즉 pred0 및 pred1 중의 모든 픽셀의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서, pred0(i,j)는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며, pred1(i,j)는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시한다.
Figure pct00003
방식 2: 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 예측 블록을 획득하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 예측 블록을 획득하며; 제1 예측 블록의 다운샘플링한 후의 예측 값(즉 제1 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)과 제2 예측 블록의 다운샘플링한 후의 예측 값(즉 제2 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)의 SAD에 따라, 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
방식 2에 있어서, 예측 값의 차이 값은 제1 예측 블록의 다운샘플링 N배 후의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록의 다운샘플링 N배 후의 예측 값(후속적으로 pred1로 기재함)의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서,pred0(i,j)는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며,pred1(i,j)는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시하며, N은 양의 정수이고, 바람직하게 2이다.
Figure pct00004
실시예 12: 상기 실시예에 있어서, 현재 블록의 사이즈 정보는 한정 범위 내에 있으며, 하기의 상황의 한 가지일 수 있다.
상황 1: 현재 블록의 폭 값은 제1 구간[Wmin, Wmax]의 범위 내에 있고; 현재 블록의 높이 값은 제2 구간[Hmin, Hmax]의 범위 내에 있으며; Wmin, Wmax, Hmin, Hmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Wmin은 8이고, Wmax는 128이며, Hmin은 8이고, Hmax는 128이다.
현재 블록의 면적 값은 제3 구간[Smin, Smax]의 범위 내에 있고; Smin, Smax는 모두 2의 양의 정수의 거듭제곱이며; 예를 들면, Smin은 64이고, Smax는 128*128=16384이다.
상기 실시예에 있어서, [a, b]는 a보다 크거나 같고, b보다 작거나 같은 것을 표시한다.
상황 2: 현재 블록의 폭 값은 제1 구간[Wmin, Wmax]의 범위 내에 있고; Wmin, Wmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Wmin은 8이고, Wmax는 128이다.
상황 3: 현재 블록의 높이 값은 제2 구간[Hmin, Hmax]의 범위 내에 있으며; Hmin, Hmax는 모두 2의 양의 정수의 거듭제곱이고; 예를 들면, Hmin은 8이고, Hmax는 128이다.
예시적으로, 하기의 임의의 한 가지 조건을 만족하면, 현재 블록에 대응되는 두개의 참조 프레임의 가중치는 동일하다.
조건 1: 현재 블록은 상이한 가중치를 허용하는 방법을 사용하지 않는다.
조건 2: 현재 블록은 상이한 가중치를 허용하는 방법(예컨대 블록 레벨 가중치 예측 방법 BCW(Bi-prediction with CU based weighting) 활성화함)을 사용하고, 현재 블록의 두개의 가중치는 완전히 동일하다.
조건 3: 현재 블록이 위치한 현재 프레임은 상이한 가중치의 방법을 사용하지 않는다.
조건 4: 현재 블록이 위치한 현재 프레임은 상이한 가중치의 방법(예컨대 프레임 레벨 가중치 예측 방법 활성화함)을 사용하고, 현재 프레임의 두개의 가중치는 완전히 동일하다.
실시예 13: 인코딩단/디코딩단은 현재 블록의 제1 단일 방향 움직임 정보에 따라 서브 블록의 제1 원래 예측 값을 결정해야 하고, 현재 블록의 제2 단일 방향 움직임 정보에 따라 서브 블록의 제2 원래 예측 값을 결정한다. 예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값
Figure pct00005
을 결정하며; 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 현재 블록의 서브 블록에 대응되는 제2 참조 블록을 결정하며, 상기 제2 참조 블록의 제2 원래 예측 값
Figure pct00006
을 결정한다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값
Figure pct00007
을 결정하며; 제1 참조 블록의 중심 영역의 제1 원래 예측
Figure pct00008
값 은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값
Figure pct00009
은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값
Figure pct00010
을 결정하고; 제2 참조 블록의 중심 영역의 제2 원래 예측 값
Figure pct00011
는 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값
Figure pct00012
은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
도 4에 도시된 바와 같이, 서브 블록의 크기가 4*4이고, 제1 참조 블록의 크기가 6*6이면, 제1 참조 블록의 중심 영역은, 제1 참조 블록의 중심점을 중심으로 하고, 크기가 4*4인 영역을 가리키며, 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 이에 대해 설명하지 않는다. 제1 참조 블록의 가장자리 영역은, 제1 참조 블록에서 중심 영역 외의 다른 영역(즉 중심 영역 외에, 상하좌우 각 1행 1열의 영역)을 가리키고, 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이며, 도 4에서, 제1 참조 프레임 중의 픽셀 포인트의 픽셀 값을 제1 참조 블록의 가장자리 영역에 복사한다. 물론, 도 4는 단지 하나의 예시로서, 다른 픽셀 포인트의 픽셀 값을 이용하여 복사할 수도 있다.
물론, 상기 방식에서, 제1 참조 블록의 가장자리 영역에 대해, 제1 참조 프레임에서 가장 가까운 완전 픽셀 값을 복사하여 획득함으로써, 별도의 보간 과정을 생략하여, 별도의 참조 픽셀을 접근하는 것을 간접적으로 방지할 수 있다.
제2 참조 블록의 중심 영역의 제2 원래 예측 값, 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값에 관하여, 제2 원래 예측 값의 획득 과정은 제1 원래 예측 값의 획득 과정을 참조 가능하기에, 여기서 더 설명하지 않는다.
예를 들면, 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 제1 참조 블록의 제1 원래 예측 값을 결정하며, 제1 참조 블록의 제1 원래 예측 값은 모두 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 제2 참조 블록의 제2 원래 예측 값을 결정하며, 제2 참조 블록의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다. 예를 들면, 서브 블록의 크기가 4*4이고, 제1 참조 블록의 크기가 4*4이며, 제2 참조 블록의 크기가 4*4이면, 제1 참조 블록의 모든 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이고, 제2 참조 블록의 모든 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 보간하여 얻은 것이다.
실시예 14: 서브 블록의 제1 원래 예측 값 및 서브 블록의 제2 원래 예측 값을 얻은 후, 인코딩단/디코딩단 서브 블록의 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있다. 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값, 제1 증폭 인자 및 제2 증폭 인자에 따라, 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 결정할 수 있고. 예를 들면, 공식(1)을 통해 수평 방향 기울기 합을 결정하고, 공식(2)를 통해 수직 방향 기울기 합을 결정하며, 공식(3)을 통해 시간 영역 예측 값 차분값을 결정한다.
Figure pct00013
(1)
Figure pct00014
(2)
Figure pct00015
(3)
예시적으로,
Figure pct00016
는 수평 방향 기울기를 표시하고,
Figure pct00017
는 수직 방향 기울기를 표시하며, 공식(1) 내지 공식(3) 중의 하기의 파라미터에 대해,
Figure pct00018
,
Figure pct00019
,
Figure pct00020
및
Figure pct00021
는 방식(4) 및 공식(5)를 통해 결정할 수 있다.
Figure pct00022
(4)
Figure pct00023
(5)
Figure pct00024
는 수평 방향 기울기 합을 표시하고,
Figure pct00025
는 수직 방향 기울기 합을 표시하며,
Figure pct00026
는 시간 영역 예측 값 차분값을 표시한다.
Figure pct00027
는 서브 블록의 제1 원래 예측 값을 표시하고,
Figure pct00028
는 서브 블록의 제2 원래 예측 값을 표시한다. 서브 블록의 크기가 4*4라면, 실시예 13을 참조하면,
Figure pct00029
는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 크기가 6*6인 제1 참조 블록의 제1 원래 예측 값이며,
Figure pct00030
는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값이거나, 크기가 6*6인 제2 참조 블록의 제2 원래 예측 값이며,
Figure pct00031
는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나,
Figure pct00032
는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값인 것을 예로 든다.
Figure pct00033
는 좌표 (i,j)의 픽셀 값을 표시하고, 예컨대
Figure pct00034
는 제1 참조 블록에서 좌표 (i,j)의 픽셀 값이며, 서브 블록의 제1 원래 예측 값에 대응되고,
Figure pct00035
는 제2 참조 블록에서 좌표 (i,j)의 픽셀 값을 표시하며, 서브 블록의 제2 원래 예측 값에 대응된다.
na는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자 na는 5와 (BD-7) 중의 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값일 수 있다. nb는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자 nb는 8과 (BD-4) 중의 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값일 수 있다. shift1은 기울기 우측 시프트 수를 표시할 수 있고, 기울기 우측 시프트 수 shift1은 2와 (14-BD) 중의 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값일 수 있다.
≫는 우측 이동을 표시하고, 예컨대
Figure pct00036
≫ na는 우측으로 na만큼 이동하는 것을 표시하는 바, 즉, 2의 na 제곱으로 나눈다. ≫ nb는 우측으로 nb만큼 이동하는 것을 표시하는 바, 다시 말해, 2의 nb 제곱을 나눈다. ≫ shift1은 우측으로 shift1만큼 이동하는 것을 표시하는 바, 즉, 2의 shift1 제곱으로 나눈다.
BD(bit depth)는 비트 깊이일 수 있고, 각가의 색도 또는 밝기 픽셀 값에 필요한 비트 폭을 표시할 수 있다. 예를 들면, BD는 10 또는 8일 수 있고, 통상적인 상황 하에서, BD는 이미 알고 있는 값일 수 있다.
실시예 15: 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값을 얻은 후, 인코딩단/디코딩단은 수평 방향 기울기 합, 수직 방향 기울기 합, 시간 영역 예측 값 차분값에 따라, 수평 방향 기울기 합의 자기 상관 계수(S1)(후속적으로 자기 상관 계수(S1)로 칭함), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2)(후속적으로 상호 상관 계수(S2)로 칭함), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3)(후속적으로 상호 상관 계수(S3)로 칭함), 수직 방향 기울기 합의 자기 상관 계수(S5)(후속적으로 자기 상관 계수(S5)로 칭함), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)(후속적으로 상호 상관 계수(S6)로 칭함)를 결정할 수도 있다. 예를 들면, 하기의 공식을 통해 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 결정할 수 있다.
Figure pct00037
Figure pct00038
는 수평 방향 기울기 합을 표시하고,
Figure pct00039
는 수직 방향 기울기 합을 표시하며,
Figure pct00040
는 시간 영역 예측 값 차분값을 표시한다.
서브 블록의 크기가 4*4이면, Ω는 4*4서브 블록에 대응되는 윈도우를 표시하거나, 또는, Ω는 4*4서브 블록 주변의 6*6윈도우를 표시한다. Ω 중의 각각의 좌표 (i,j)점에 대해, 우선 상기 실시예를 통해
Figure pct00041
,
Figure pct00042
및
Figure pct00043
를 결정할 수 있고, 이어서,
Figure pct00044
,
Figure pct00045
및
Figure pct00046
에 따라, S1, S2, S3, S5, S6을 결정한다.
실시예 16: 상호 상관 계수(S2) 및 상호 상관 계수(S6)를 얻은 후, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이로 제한할 수 있고, 예를 들면, 상호 상관 계수(S2)가 제1 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S2)를 제1 상호 상관 계수 임계값으로 업데이트할 수 있고, 상호 상관 계수(S2)가 제2 상호 상관 계수 임계값보다 크면, 상호 상관 계수(S2)를 제2 상호 상관 계수 임계값으로 업데이트할 수 있다. 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이로 제한할 수 있고, 예를 들면, 상호 상관 계수(S6)가 제3 상호 상관 계수 임계값보다 작으면, 상호 상관 계수(S6)를 제3 상호 상관 계수 임계값으로 업데이트할 수 있고, 상호 상관 계수(S6)가 제4 상호 상관 계수 임계값보다 크다면, 상호 상관 계수(S6)를 제4 상호 상관 계수 임계값으로 업데이트할 수 있고; 제1 상호 상관 계수 임계값이 제2 상호 상관 계수 임계값보다 작으면, 제3 상호 상관 계수 임계값은 제4 상호 상관 계수 임계값보다 작을 수 있다.
예시적으로, 상호 상관 계수(S2) 및 상호 상관 계수(S6)에 대해 크기 제한을 진행하여, 중간 결과가 오버플로우되는 것을 방지하며, 비트 폭이 규정된 범위를 벗어나지 않도록 한다. -(1≪THS2)는 제1 상호 상관 계수 임계값을 표시하고, 1≪THS2는 제2 상호 상관 계수 임계값을 표시하며, -(1≪THS6)은 제3 상호 상관 계수 임계값을 표시하고, 1≪THS6은 제4 상호 상관 계수 임계값을 표시한다. 예를 들면, 비트 폭이 32 비트를 벗어나는 것을 방지하기 위해, THS2는 25일 수 있고, THS6은 27일 수 있다. 물론, 상기 수치는 단지 하나의 예시로서, 이를 한정하지 않는다.
Figure pct00047
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이다. 따라서, 공식(11)은 S2가 보다
Figure pct00048
-(1≪THS2)작으면, S2는
Figure pct00049
-(1≪THS2)이고, S2가 (1≪THS2)보다 크면, S2는 (1≪THS2)이고, 아니면, S2는 불변을 유지한다는 것을 표시한다. 마찬가지로, 공식(12)는 S6이 -(1≪THS6)보다 작으면, S6은 -(1≪THS2)이고, S6이 (1≪THS2)보다 크면, S6은 (1≪THS2)이고, 아니면, S6은 불변을 유지한다는 것을 표시한다. ≪는 좌측 이동을 표시한다.
실시예 17: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다. 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있고, 하기의 공식에 시사된 바와 같이, 상기 파라미터 수평 방향 속도를 결정하는 단계에 기반한 예시이다.
Figure pct00050
(13)
상기 공식에 있어서, S1>0이 성립되면,
Figure pct00051
이고, S1>0 이 성립되지 않으면,
Figure pct00052
이다.
Figure pct00053
는 수평 방향 속도를 표시하고,
Figure pct00054
는 속도 임계값을 표시하며, 즉 수평 방향 속도
Figure pct00055
를
Figure pct00056
와
Figure pct00057
사이로 제한하기 위한 것이며, 즉 수평 방향 속도
Figure pct00058
는
Figure pct00059
보다 크거나 같고, 수평 방향 속도
Figure pct00060
는
Figure pct00061
보다 작거나 같다. 속도 임계값
Figure pct00062
은 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면,
Figure pct00063
또는
Figure pct00064
, BD는 비트 깊이이다.
Figure pct00065
는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자
Figure pct00066
는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다.
Figure pct00067
는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자
Figure pct00068
는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다.
Figure pct00069
는 우측 이동을 표시하고,
Figure pct00070
는 끝수를 잘라버리는 것이다.
제1 증폭 인자
Figure pct00071
및 제2 증폭 인자
Figure pct00072
는 모두 경험에 따라 구성될 수 있고, 제2 증폭 인자
Figure pct00073
는 제1 증폭 인자
Figure pct00074
보다 클 수 있다. 제1 증폭 인자
Figure pct00075
및 제2 증폭 인자
Figure pct00076
는 수평 방향 속도
Figure pct00077
의 값의 구간을 확대하고, 예를 들면,
Figure pct00078
가 3이고,
Figure pct00079
는 8이면, 수평 방향 속도
Figure pct00080
의 값의 구간을 8배로 확대할 수 있고,
Figure pct00081
가 4이고,
Figure pct00082
가 16이면, 수평 방향 속도
Figure pct00083
의 값의 구간을 16배로 확대할 수 있으며, 이렇게 유추한다.
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00084
는 a이고,
Figure pct00085
는 b이며,
Figure pct00086
는 x이고, 상기 내용을 종합해보면,
Figure pct00087
가
Figure pct00088
보다 크고,
Figure pct00089
보다 작으면, 수평 방향 속도
Figure pct00090
는
Figure pct00091
이다.
예를 들면, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다, 하기의 공식에 시사된 바와 같다.
Figure pct00092
(14)
상기 공식에서 보아낼 수 있는 바,
Figure pct00093
성립되면,
Figure pct00094
이고,
Figure pct00095
성립되지 않으면,
Figure pct00096
0이다.
Figure pct00097
는 수직 방향 속도를 표시하고,
Figure pct00098
는 수평 방향 속도를 표시하며,
Figure pct00099
는 속도 임계값을 표시하고, 수직 방향 속도를
Figure pct00100
과
Figure pct00101
사이로 제한하며, 즉 수직 방향 속도는
Figure pct00102
보다 크거나 같고, 수직 방향 속도는
Figure pct00103
보다 작거나 같다. 속도 임계값
Figure pct00104
는 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면,
Figure pct00105
또는
Figure pct00106
이고, BD는 비트 깊이이다.
Figure pct00107
는 제1 증폭 인자를 표시할 수 있고, 제1 증폭 인자
Figure pct00108
는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이다.
Figure pct00109
는 제2 증폭 인자를 표시할 수 있고, 제2 증폭 인자
Figure pct00110
는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이다.
Figure pct00111
는 우측 이동을 표시하고,
Figure pct00112
는 끝수를 잘라버리는 것이다.
제1 증폭 인자
Figure pct00113
및 제2 증폭 인자
Figure pct00114
는 모두 경험에 따라 구성될 수 있고, 제2 증폭 인자
Figure pct00115
는 제1 증폭 인자
Figure pct00116
보다 클 수 있다. 제1 증폭 인자
Figure pct00117
및 제2 증폭 인자
Figure pct00118
는 수직 방향 속도
Figure pct00119
의 값의 구간을 확대하고, 예를 들면,
Figure pct00120
가 3이고,
Figure pct00121
는 8이면, 수직 방향 속도
Figure pct00122
의 값의 구간을 8배 확대할 수 있고,
Figure pct00123
는 4이고,
Figure pct00124
는 16이면, 수직 방향 속도
Figure pct00125
의 값의 구간을 16배 확대할 수 있으며 이렇게 유추한다.
Clip3(a, b, x)는 하기와 같은 것을 표시하는 바, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00126
는 a이고,
Figure pct00127
는 b이며,
Figure pct00128
는 x이고, 상기 내용을 종합해보면,
Figure pct00129
가
Figure pct00130
보다 크고,
Figure pct00131
보다 작으면, 수직 방향 속도
Figure pct00132
는
Figure pct00133
이다.
예시적으로, 상기 공식에 있어서,
Figure pct00134
,
Figure pct00135
이다.
실시예 18: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다. 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있고, 하기의 공식에 시사된 바와 같이, 상기 파라미터 수평 방향 속도를 결정하는 단계에 기반한 예시이다.
Figure pct00136
(15)
공식(15)와 공식(13)을 비교하면,
Figure pct00137
앞의 부호를 제거하였고, 다른 내용은 공식(13)과 동일하며, 각 파라미터의 의미도 공식(13)과 동일하며, 여기서 더 설명하지 않는다.
예를 들면, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정할 수 있다, 하기의 공식에 시사된 바와 같이.
Figure pct00138
(16)
공식(16)과 공식(14)를 비교하면,
Figure pct00139
앞의 부호를 제거하였고, 다른 내용은 공식(14)와 동일하며, 각 파라미터의 의미도 공식(14)와 동일하기에, 여기서 더 설명하지 않는다.
실시예 19: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다.
예를 들면, 제1 기설정 조건을 만족하면, 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제1 기설정 조건을 만족하지 않으면, 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제1 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다, 하기의 공식에 시사된 바와 같이:
제1 기설정 조건을 만족할 경우,
Figure pct00140
(17)
제1 기설정 조건을 만족하지 않을 경우,
Figure pct00141
(18)
상기 제1 기설정 조건은
Figure pct00142
를 포함할 수 있고, |.|는 값의 절대치를 표시하며, k는 임계값이고, 임의로 설정 가능하며, 예컨대 8로 설정한다. 공식(17) 중의
Figure pct00143
은
Figure pct00144
Figure pct00145
가 0인지의 여부를 판정하는 것을 표시한다.
제1 기설정 조건을 만족할 경우,
Figure pct00146
성립되면,
Figure pct00147
이고,
Figure pct00148
성립되지 않으면,
Figure pct00149
이다. 수평 방향 속도를 표시하며,
Figure pct00150
는 속도 임계값을 표시하고,
Figure pct00151
는 제1 증폭 인자를 표시하고,
Figure pct00152
는 제2 증폭 인자를 표시하며,
Figure pct00153
는 우측 이동을 표시하고,
Figure pct00154
는 끝수를 잘라버리는 것이다.
Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00155
는 a이고,
Figure pct00156
는 b이며,
Figure pct00157
는 x이고, 상기 내용을 종합해보면,
Figure pct00158
가
Figure pct00159
보다 크고,
Figure pct00160
보다 작으면, 수평 방향 속도
Figure pct00161
는
Figure pct00162
이다.
제1 기설정 조건을 만족하지 않을 경우, 공식(18)과 공식(13)은 동일하기에, 여기서 더 설명하지 않는다.
실시예 20: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수평 방향 속도를 결정할 수 있다.
예를 들면, 제2 기설정 조건을 만족하면, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제2 기설정 조건을 만족하지 않으면 자기 상관 계수(S1), 속도 임계값, 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정할 수 있다. 제2 기설정 조건은 상호 상관 계수(S2), 자기 상관 계수(S5)에 기반하여 결정된다, 하기의 공식에 시사된 바와 같이: 제2 기설정 조건을 만족할 경우,
Figure pct00163
이고,
Figure pct00164
(19)
제2 기설정 조건을 만족하지 않을 경우,
Figure pct00165
(20)
제2 기설정 조건을 만족할 경우, 우선
Figure pct00166
,
Figure pct00167
,
Figure pct00168
에 따라
Figure pct00169
를 결정하고, 구체적인 결정 방식은 상기 공식을 참조 바라며, 이어서,
Figure pct00170
성립되면,
Figure pct00171
,
Figure pct00172
성립되지 않으면,
Figure pct00173
이다.
Figure pct00174
는 수평 방향 속도를 표시하며,
Figure pct00175
는 속도 임계값을 표시하고,
Figure pct00176
는 제1 증폭 인자를 표시하고,
Figure pct00177
는 제2 증폭 인자를 표시하며,
Figure pct00178
는 우측 이동을 표시하고,
Figure pct00179
는 끝수를 잘라버리는 것이다.
상기 공식에 있어서, Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00180
는 a이고,
Figure pct00181
는 b이며,
Figure pct00182
는 x이고, 상기 내용을 종합해보면,
Figure pct00183
이
Figure pct00184
보다 크고,
Figure pct00185
보다 작으면, 수평 방향 속도
Figure pct00186
는
Figure pct00187
일 수 있다.
제2 기설정 조건을 만족하지 않을 경우, 공식(20)과 공식(13)은 동일하기에, 여기서 더 설명하지 않는다.
상기 제2 기설정 조건은
Figure pct00188
를 포함하지만 이에 한하지 않고, |.|는 값의 절대치를 표시하며, k는 임계값이고, 임의로 설정 가능하며, 예컨대 8로 설정한다. 물론, 이 제2 기설정 조건은 단지 하나의 예시로서, 이를 한정하지 않는다.
실시예 21: 실시예 19에 대해, 제1 기설정 조건을 만족하지 않을 경우, 수평 방향 속도의 결정 공식은 공식(15)로 변하고, 실시예 20에 대해, 제2 기설정 조건을 만족하지 않을 경우, 수평 방향 속도의 결정 공식은 공식(15)로 변한다.
실시예 22: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 자기 상관 계수(S1), 상호 상관 계수(S3), 제1 증폭 인자 및 제2 증폭 인자에 따라 비절단 수평 방향 속도를 결정하고, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 상기 비절단 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다.
하기의 공식에 시사된 바와 같이:
Figure pct00189
(21)
Figure pct00190
(22)
상기 공식에서 보아낼 수 있는 바,
Figure pct00191
성립되면,
Figure pct00192
,
Figure pct00193
성립되지 않으면,
Figure pct00194
0이다. 상기 실시예 중의
Figure pct00195
와 비교하면, 본 실시예에서, 속도 임계값
Figure pct00196
으로 수평 방향 속도를
Figure pct00197
와
Figure pct00198
사이로 제한하지 않았으며, 따라서,
Figure pct00199
를 비절단 수평 방향 속도로 칭하고, 즉 절단 처리를 진행하지 않으며, 다시 말해, 이 비절단 수평 방향 속도
Figure pct00200
는
Figure pct00201
와
Figure pct00202
사이로 제한되지 않았다.
상기 공식에서 보아낼 수 있는 바,
Figure pct00203
이 성립되면,
Figure pct00204
이고,
Figure pct00205
이 성립되지 않으면,
Figure pct00206
0이다.
Figure pct00207
는 수직 방향 속도를 표시하고,
Figure pct00208
는 비절단 수평 방향 속도를 표시하며,
Figure pct00209
는 속도 임계값을 표시하고,
Figure pct00210
는 제1 증폭 인자를 표시하고,
Figure pct00211
는 제2 증폭 인자를 표시하며,
Figure pct00212
는 우측 이동을 표시하고,
Figure pct00213
는 끝수를 잘라버리는 것이다. Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00214
는 a이고,
Figure pct00215
는 b이며,
Figure pct00216
는 x이고, 상기 내용을 종합해보면,
Figure pct00217
가
Figure pct00218
보다 크고,
Figure pct00219
보다 작으면, 수직 방향 속도
Figure pct00220
는
Figure pct00221
이다.
예시적으로, 상기 공식에 있어서,
Figure pct00222
,
Figure pct00223
이다.
실시예 23: 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6)를 얻은 후, 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6) 중 하나 또는 복수에 따라, 현재 블록의 서브 블록이 참조 프레임에서 서브 블록에 대응되는 수직 방향 속도를 결정한다.
예를 들면, 제3 기설정 조건을 만족할 경우, 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 제3 기설정 조건을 만족하지 않을 경우, 상호 상관 계수(S2), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 수평 방향 속도, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정한다. 예시적으로, 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
하기의 공식에 시사된 바와 같이: 제3 기설정 조건을 만족할 경우,
Figure pct00224
(23)
제3 기설정 조건을 만족하지 않을 경우,
Figure pct00225
(24)
예시적으로, 제3 기설정 조건은
Figure pct00226
가
Figure pct00227
또는
Figure pct00228
이면, 즉
Figure pct00229
는 최소치 또는 최대치일 수 있다.
제3 기설정 조건을 만족할 경우,
Figure pct00230
성립되면,
Figure pct00231
,
Figure pct00232
성립되지 않으면,
Figure pct00233
0이다. 예시적으로,
Figure pct00234
는 수직 방향 속도를 표시하고,
Figure pct00235
는 속도 임계값을 표시하고,
Figure pct00236
는 제1 증폭 인자를 표시하고,
Figure pct00237
는 제2 증폭 인자를 표시하며,
Figure pct00238
는 우측 이동을 표시하고,
Figure pct00239
는 끝수를 잘라버리는 것이다. Clip3(a, b, x)는 하기와 같은 것을 표시하며, x가 a보다 작으면, Clip3(a, b, x)=a이고; x가 b보다 크면, Clip3(a, b, x)=b이며; x가 a보다 크거나 같고 b보다 작거나 같으면, Clip3(a, b, x)=x이며, 상기 공식에 있어서,
Figure pct00240
는 a이고,
Figure pct00241
는 b이며,
Figure pct00242
，
Figure pct00243
Figure pct00244
는 x이고, 상기 내용을 종합해보면,
Figure pct00245
Figure pct00246
가
Figure pct00247
보다 크고,
Figure pct00248
보다 작으면, 수직 방향 속도
Figure pct00249
는
Figure pct00250
일 수 있다.
제3 기설정 조건을 만족하지 않을 경우, 공식(24)와 공식(14)는 동일하기에, 여기서 더 설명하지 않는다.
실시예 24: 실시예 23에 대해, 제3 기설정 조건을 만족하지 않을 경우, 수직 방향 속도의 결정 공식은 공식(16)으로 변경된다.
실시예 25: 상기 실시예에 있어서, 제1 증폭 인자
Figure pct00251
는 5와 (BD-7) 중 작은 값이거나, 즉
Figure pct00252
; 또는, 제1 증폭 인자
Figure pct00253
는 1과 (BD-11) 중 큰 값일 수 있으며, 즉
Figure pct00254
이다. 물론, 상기는 단지 제1 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. 제2 증폭 인자
Figure pct00255
는 8과 (BD-4) 중 작은 값이거나, 즉
Figure pct00256
；; 또는, 제2 증폭 인자
Figure pct00257
는 4와 (BD-8) 중 큰 값일 수 있으며, 즉
Figure pct00258
이다. 물론, 상기는 단지 제2 증폭 인자의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. 속도 임계 값
Figure pct00259
은 2의 M 제곱일 수 있고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이다. 예를 들면,
Figure pct00260
또는
Figure pct00261
이다. 물론, 상기는 단지 속도 임계값의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다.
제1 증폭 인자
Figure pct00262
를 1과 (BD-11) 중 큰 값으로 설정하면, 기울기의 자기 상관 계수 및 상호 상관 계수의 우측 시프트 수를 감소시킬 수 있고, 자기 상관 계수 및 상호 상관 계수에 필요한 비트 폭(정밀도를 보존함)을 증가시킨다. 제2 증폭 인자
Figure pct00263
를 4와 (BD-8) 중 큰 값으로 설정하면, 기울기의 자기 상관 계수 및 상호 상관 계수의 우측 시프트 수를 감소시킬 수 있고, 자기 상관 계수 및 상호 상관 계수에 필요한 비트 폭(정밀도를 보존함)을 증가시킨다. 속도 임계값
Figure pct00264
를
Figure pct00265
으로 설정하면, 수평 방향 속도
Figure pct00266
및 수직 방향 속도
Figure pct00267
에 필요한 비트 폭(정밀도를 보존함)을 증가시킬 수 있다.
실시예 26: 인코딩단/디코딩단이 수평 방향 속도
Figure pct00268
및 수직 방향 속도
Figure pct00269
를 얻은 후, 수평 방향 속도
Figure pct00270
및 수직 방향 속도
Figure pct00271
에 따라 현재 블록의 서브 블록의 예측 보상 값을 획득할 수 있는 바, 예를 들면, 서브 블록의 제1 원래 예측 값, 서브 블록의 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하고, 수평 방향 속도
Figure pct00272
, 수직 방향 속도
Figure pct00273
, 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 예측 보상 값을 획득한다.
예를 들면, 인코딩단/디코딩단은 하기의 공식으로 현재 블록의 서브 블록의 예측 보상 값
Figure pct00274
을 획득할 수 있다.
Figure pct00275
(25)
예시적으로,
Figure pct00276
는 수평 방향 기울기를 표시하고,
Figure pct00277
는 수직 방향 기울기를 표시하며, 상기 공식 중의 하기의 파라미터,
Figure pct00278
,
Figure pct00279
,
Figure pct00280
및
Figure pct00281
에 대해, 하기의 방식을 통해 이러한 파라미터를 결정할 수도 있다.
Figure pct00282
(26)
Figure pct00283
(27)
Figure pct00284
는 좌표
Figure pct00285
의 픽셀 값을 표시하고,
Figure pct00286
는 제1 참조 블록 중 좌표
Figure pct00287
의 픽셀 값을 표시하며, 서브 블록의 제1 원래 예측 값에 대응되고,
Figure pct00288
는 제2 참조 블록 중 좌표
Figure pct00289
의 픽셀 값을 표시하며, 서브 블록의 제2 원래 예측 값에 대응된다. 예를 들면,
Figure pct00290
는 서브 블록의 제1 원래 예측 값을 표시하고,
Figure pct00291
는 서브 블록의 제2 원래 예측 값을 표시한다. 서브 블록의 크기가 4*4이면,
Figure pct00292
는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나, 또는 크기가 6*6인 제1 참조 블록의 제1 원래 예측 값이고,
Figure pct00293
는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값이거나, 또는 크기가 6*6인 제2 참조 블록의 제2 원래 예측 값이며,
Figure pct00294
는 크기가 4*4인 제1 참조 블록의 제1 원래 예측 값이거나,
Figure pct00295
는 크기가 4*4인 제2 참조 블록의 제2 원래 예측 값인 것을 예로 든다.
Figure pct00296
는 수평 방향 속도를 표시하며,
Figure pct00297
는 수직 방향 속도를 표시하고,
Figure pct00298
는 우측 이동을 표시하고, rnd는 round이며, 라운딩 조작을 표시하고,
Figure pct00299
은 기울기 우측 시프트 수를 표시하고,
Figure pct00300
은 우측으로
Figure pct00301
을 이동하는 것을 표시한다. 기울기 우측 시프트 수
Figure pct00302
는 2와 (14-BD) 중 큰 값일 수 있고, 즉 shift1=max( 2, 14BD)이거나, 또는,
Figure pct00303
은 6과 (BD-6) 중 큰 값일 수 있으며, 즉 shift1=max(6, BD-6)이다. 물론, 상기는 단지 기울기 우측 시프트 수의 예시로서, 이를 한정하지 않으며 경험에 따라 구성될 수 있다. shift1을 6과 (BD-6) 중 큰 값으로 설정하는 것을 통해, 기울기의 우측 시프트 수를 증가시킬 수 있으며, 기울기에 필요한 비트 폭(정밀도를 보존함)을 감소한다. BD는 비트 깊이를 표시하는 바, 즉 밝기 값에 필요한 비트 폭이며, 일반적으로 10 또는 8이다.
실시예 27: 인코딩단/디코딩단은 현재 블록의 서브 블록의 제1 원래 예측 값, 현재 블록의 서브 블록의 제2 원래 예측 값 및 현재 블록의 서브 블록의 예측 보상 값에 따라, 현재 블록의 서브 블록의 타깃 예측 값을 획득할 수 있다. 예를 들면, 인코딩단/디코딩단은 하기의 공식을 통해 현재 블록의 서브 블록의 타깃 예측 값
Figure pct00304
을 획득할 수 있다.
Figure pct00305
(28)
상기 공식에 있어서,
Figure pct00306
는 서브 블록의 제1 원래 예측 값을 표시하고,
Figure pct00307
는 서브 블록의 제2 원래 예측 값을 표시하며,
Figure pct00308
는 서브 블록의 예측 보상 값을 표시하고,
Figure pct00309
는 우측 이동을 표시하며,
Figure pct00310
는 우측으로 shift를 이동하는 것을 표시한다.
예시적으로,
Figure pct00311
,
Figure pct00312
, BD는 비트 깊이를 표시한다.
물론, 상기 방식은 단지 서브 블록의 타깃 예측 값을 획득하는 예시로서, 이를 한정하지 않는다.
실시예 28: 현재 블록이 복수의 서브 블록으로 분할될 경우, 상기 실시예를 사용하여, 각각의 서브 블록의 타깃 예측 값을 결정할 수 있으며, 즉 현재 블록의 각각의 서브 블록에 대하여(예컨대 4*4크기의 서브 블록) 예측 신호의 조절을 진행함으로써, 각각의 서브 블록의 타깃 예측 값을 얻는다. 본 실시예에서, 타깃 조건을 만족할 경우, 어느 한 서브 블록의 조절 신호 과정이 사전에 스킵될 수도 있으며, 다시 말해, 상기 실시예의 방식을 사용하지 않고 서브 블록의 타깃 예측 값을 결정할 수 있다.
예를 들면, 현재 블록은 서브 블록 1, 서브 블록 2, 서브 블록 3 및 서브 블록 4로 분할되고, 인코딩단/디코딩단은 먼저 상기 실시예의 방식을 사용하여 서브 블록 1의 타깃 예측 값을 결정하며, 그 다음 상기 실시예의 방식을 사용하여 서브 블록 2의 타깃 예측 값을 결정하고, 타깃 조건을 만족하면, 인코딩단/디코딩단은 상기 실시예의 방식을 더는 사용하지 않고 서브 블록 3의 타깃 예측 값 및 서브 블록 4의 타깃 예측 값을 결정할 수 있으며, 즉 서브 블록 3 및 서브 블록 4의 신호 조절 과정이 사전에 스킵된다.
예시적으로, 현재 블록의 두개의 서브 블록의 예측 값의 차이 값이 모두 어느 한 임계값 TH_SUB_SAD보다 작을 경우, 타깃 조건을 만족하는 것을 결정할 수 있고, 잔여 서브 블록의 신호 조절 과정이 사전에 스킵된다. 예를 들면, 서브 블록 1의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작고, 서브 블록 2의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작으면, 타깃 조건을 만족하는 것으로 결정하고, 잔여 서브 블록(즉 서브 블록 3 및 서브 블록 4)의 신호 조절 과정이 사전에 스킵된다.
또 예를 들면, 현재 블록은 복수의 서브 블록으로 분할되고, 각각의 서브 블록에 대해, 인코딩단/디코딩단은 상기 실시예의 방식을 사용하여 상기 서브 블록의 타깃 예측 값을 결정하기 전에, 타깃 조건을 만족하는 지의 여부를 판정한다. 타깃 조건을 만족하면, 상기 실시예의 방식을 사용하지 않고 상기 서브 블록의 타깃 예측 값을 결정하며, 즉 상기 서브 블록의 신호 조절 과정이 사전에 스킵된다. 타깃 조건을 만족하지 않으면, 상기 실시예의 방식을 사용하여 상기 서브 블록의 타깃 예측 값을 결정할 수 있다.
예시적으로, 상기 서브 블록의 예측 값의 차이 값이 어느 한 임계값 TH_SUB_SAD보다 작을 경우, 타깃 조건을 만족하는 것으로 결정할 수 있고, 상기 서브 블록의 신호 조절 과정이 사전에 스킵된다. 예를 들면, 서브 블록 1의 예측 값의 차이 값이 임계값 TH_SUB_SAD보다 작으면, 타깃 조건을 만족하는 것으로 결정하고, 서브 블록 1의 신호 조절 과정이 사전에 스킵된다.
예시적으로, 서브 블록의 예측 값의 차이 값을 결정하기 위해, 하기의 방식을 사용하여 구현할 수 있다.
방식 1: 예측 값의 차이 값은 제1 예측 블록(즉 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 서브 블록에 대응되는 제1 예측 블록을 획득함)의 예측 값(후속적으로 pred0으로 기재함)과 제2 예측 블록(현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 서브 블록에 대응되는 제2 예측 블록을 획득함) 예측 값(후속적으로 pred1로 기재함)의 SAD일 수 있으며, 즉 pred0 및 pred1 중 모든 픽셀의 SAD이다. 예를 들면, 하기의 공식으로 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있으며, 상기 공식에 있어서,
Figure pct00313
는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며,
Figure pct00314
는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시한다.
Figure pct00315
방식 2, 예측 값의 차이 값은 제1 예측 블록의 다운샘플링 N배한 후의 예측 값(pred0으로 기재하며, 즉 제1 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)과 제2 예측 블록의 다운샘플링 N배한 후의 예측 값(pred1로 기재하며, 즉 제2 예측 블록의 예측 값을 다운샘플링한 후, 예측 값을 얻음)의 SAD일 수도 있다. 예를 들면, 하기의 공식을 통해 제1 참조 프레임과 제2 참조 프레임의 예측 값의 차이 값을 결정할 수 있고,
Figure pct00316
는 pred0의 제i 열이고, 제j 행의 pred0 예측 값이며,
Figure pct00317
는 pred1의 제i 열이고, 제j 행의 pred1 예측 값이며, n은 픽셀 총수이고, abs(x)는 x의 절대치이며, H는 높이 값을 표시하고, W는 폭 값을 표시하며, N은 양의 정수이고, 바람직하게 2이다.
Figure pct00318
실시예 29:
상기 방법과 동일한 발명 구상에 기반하여, 본 발명의 실시예는 인코딩 및 디코딩 장치를 더 제공하고, 인코딩단 또는 디코딩단에 응용되며, 상기 장치는 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 도 5에 도시된 바와 같이, 상기 장치의 구조도이며, 상기 장치는,
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 제1 결정 모듈(51);
상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하고; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 제2 결정 모듈(52);
상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 제1 획득 모듈(53);
상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 제2 획득 모듈(54)을 포함한다.
예시적으로, 상기 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보; 시퀀스 레벨 스위치 제어 정보 중 하나 또는 복수를 포함할 수 있지만 이에 한하지 않는다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 움직임 정보 속성을 포함하고, 상기 움직임 정보 속성이 하기의 상황 중 적어도 하나에 부합될 경우, 상기 움직임 정보 속성이 특정 조건을 만족하는 것으로 결정하는 바,
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것;
상기 현재 블록은 복수의 서브 블록을 포함하고, 상기 복수의 서브 블록의 움직임 정보가 모두 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일한 것;
상기 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값보다 작은 것이다.
상기 제1 결정 모듈(51)은 또한, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하고;
상기 제1 예측 블록의 다운샘플링한 후의 예측 값과 상기 제2 예측 블록의 다운샘플링한 후의 예측 값의 SAD에 따라, 상기 제1 참조 프레임과 상기 제2 참조 프레임의 예측 값의 차이 값을 획득한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 예측 모드 속성을 포함하고, 상기 예측 모드 속성이 인트라 인터 병합 예측에 기반한 병합 모드, 및/또는, 대칭 움직임 벡터 차이 모드를 사용하지 않는다면, 상기 예측 모드 속성이 특정 조건을 만족하는 것으로 결정한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 시퀀스 레벨 스위치 제어 정보를 포함하고, 상기 시퀀스 레벨 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하면, 상기 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족하는 것으로 결정한다.
상기 제1 결정 모듈(51)은 또한, 상기 특징 정보가 상기 사이즈 정보를 포함하고, 상기 사이즈 정보가 하기의 상황 중 적어도 하나에 부합될 경우, 상기 사이즈 정보가 특정 조건을 만족하는 것으로 결정하는 바, 상기 현재 블록의 폭 값이 제1 임계값보다 크거나 같고, 상기 현재 블록의 폭 값이 제2 임계값보다 작거나 같으며; 상기 현재 블록의 높이 값이 제3 임계값보다 크거나 같고, 상기 현재 블록의 높이 값이 제4 임계값보다 작거나 같으며; 상기 현재 블록의 면적 값이 제5 임계값보다 크거나 같고, 상기 현재 블록의 면적 값이 제6 임계값보다 작거나 같다.
상기 제1 결정 모듈(51)은 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정할 경우 구체적으로,
상기 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하며; 여기서, 상기 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이고; 상기 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 상기 제2 참조 블록의 제2 원래 예측 값을 결정하며; 여기서, 상기 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것이다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정할 경우 구체적으로, 제1 기설정 조건을 만족할 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하며; 제1 기설정 조건은 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5)에 기반하여 결정된다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정할 경우 구체적으로, 제2 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상기 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하며; 여기서, 상기 제2 기설정 조건은 상기 상호 상관 계수(S2), 상기 자기 상관 계수(S5)에 기반하여 결정된다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정할 경우 구체적으로, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 절단 처리를 진행하지 않은 비절단 수평 방향 속도를 획득하고, 상기 비절단 수평 방향 속도에 따라 수직 방향 속도를 결정한다.
상기 제2 결정 모듈(52)은 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정할 경우 구체적으로, 제3 기설정 조건을 만족할 경우, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하고; 상기 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정하며; 여기서, 상기 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정된다.
상기 상호 상관 계수(S2)는 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이에 위치한다.
상기 상호 상관 계수(S6)는 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이에 위치한다.
제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이며; 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이며; 속도 임계값은 2의 M 제곱이고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이며; 여기서, BD는 비트 깊이이다.
상기 제1 획득 모듈(53)은 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득할 경우 구체적으로, 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하고, 상기 수평 방향 속도, 상기 수직 방향 속도, 상기 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 상기 예측 보상 값을 획득하며; 여기서, 상기 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값이며, BD는 비트 깊이이다.
본 발명의 실시예에서 제공하는 디코딩단 기기는, 하드웨어 차원에서 말하자면, 그 하드웨어 아키텍처 모식도는 구체적으로 도 6을 참조 가능하다. 프로세서(61) 및 기계 판독 가능한 저장 매체(62)를 포함하고, 상기 프로세서(61)에 의해 실행되는 기계 실행 가능한 명령이 상기 기계 판독 가능한 저장 매체(62)에 저장되며; 상기 프로세서(61)는 기계 실행 가능한 명령을 실행하여, 본 발명의 상기 구현예에 공개된 방법을 수행한다. 예를 들면, 프로세서는 기계 실행 가능한 명령을 실행하여, 하기의 단계를 구현한다.
현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
본 발명의 실시예에서 제공하는 인코딩단 기기는, 하드웨어 차원에서 말하자면, 그 하드웨어 아키텍처 모식도는 구체적으로 도 7을 참조 가능하다. 프로세서(71) 및 기계 판독 가능한 저장 매체(72)를 포함하고, 상기 프로세서(71)에 의해 실행되는 기계 실행 가능한 명령이 상기 기계 판독 가능한 저장 매체(72)에 저장되며; 상기 프로세서(71)는 기계 실행 가능한 명령을 실행하여, 본 발명의 상기 구현예에 공개된 방법을 구현한다. 예를 들면, 프로세서는 기계 실행 가능한 명령을 실행하여, 하기의 단계를 구현한다.
현재 블록의 특징 정보가 특정 조건을 만족하면, 단계 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계; 상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행한다.
상기 방법과 동일한 발명 구상에 기반하여, 본 발명의 실시예는 기계 판독 가능한 저장 매체를 더 제공하며, 상기 기계 판독 가능한 저장 매체에 복수의 컴퓨터 명령이 저장되고, 상기 컴퓨터 명령이 프로세서에 의해 실행될 경우, 본 발명의 상기 구현예에서 공개된 인코딩 및 디코딩 방법을 구현할 수 있다. 여기서, 상기 기계 판독 가능한 저장 매체는 임의의 전자, 자성, 광학, 또는 다른 물리적 저장 장치일 수 있고, 예를 들어 실행 명령, 데이터 등 정보를 포함 또는 저장할 수 있다. 예를 들면, 기계 판독 가능한 저장 매체는 RAM(Radom Access Memory, 랜덤 액세스 메모리), 휘발성 메모리, 비휘발성 메모리, 플래시 메모리, 메모리 드라이버(예컨대 하드 드라이버), 솔리드 스테이트 드라이브, 임의의 유형의 메모리 디스크(예컨대 CD, dvd 등)이거나, 또는 유사한 저장 매체, 또는 이들의 조합일 수 있다.
상기 실시예에서 서술되는 시스템, 장치, 모듈 또는 유닛은 컴퓨터 칩 또는 엔티티로 구현되거나, 어떠한 기능을 구비하는 제품으로 구현될 수 있다. 하나의 대표적인 구현은 컴퓨터이고, 컴퓨터의 형식은 개인 컴퓨터, 랩톱, 셀룰러 폰, 카메라 폰, 스마트 폰, 개인 정보 단말기, 미디어 플레이어, 내비게이션 기기, 이메일 송수신기, 태블릿 PC, 웨어러블 기기 또는 이러한 기기 중의 임의의 몇 가지 기기의 조합일 수 있다.
설명의 편의를 위해, 상기 장치를 설명할 경우 기능에 따라 여러 가지 유닛으로 나누어 각각 설명한다. 물론, 본 발명을 실시함에 있어서 각 유닛의 기능을 동일하거나 복수의 소프트웨어 및/또는 하드웨어에서 구현시킬 수 있다.
본 분야의 통상의 기술자는 본 발명의 실시예가 방법, 시스템 또는 컴퓨터 프로그램 제품을 제공한다는 것을 알고 있다. 본 발명은 완전한 하드웨어 실시예, 완전한 소프트웨어 실시예, 또는 소프트웨어 및 하드웨어를 결합한 실시예의 형태를 사용할 수 있다. 또한 본 발명의 실시예는 컴퓨터 사용 가능 프로그램 코드가 포함된 하나 또는 복수의 컴퓨터 사용 가능 저장 매체(마그네틱 디스크 장치, CD-ROM, 광학 메모리 등을 포함하지만 이에 한하지 않음)에서 구현되는 컴퓨터 프로그램 제품의 형태를 사용할 수 있다.
본 발명은 본 발명의 실시예에 따른 방법, 기기(시스템) 및 컴퓨터 프로그램 제품의 흐름도 및/또는 블록도를 참조하여 설명되었다. 컴퓨터 프로그램 명령에 의해 흐름도 및/또는 블록도 중의 각 흐름 및/또는 블록, 및 흐름도 및/또는 블록도 중의 흐름 및/또는 블록의 결합을 구현하는 것으로 이해해야 할 것이다. 이러한 컴퓨터 프로그램 명령은 범용 컴퓨터, 전용 컴퓨터, 내장형 프로세서 또는 다른 프로그램 가능 데이터 처리 기기의 프로세서에 제공되어, 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기의 프로세서에 의해 실행된 명령이 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현하는 장치를 생성하도록 하는 하나의 기계를 생성할 수 있다. 또한, 이러한 컴퓨터 프로그램 명령은 또한 특정 방식으로 작업하기 위해 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기를 유도하는 컴퓨터 판독 가능 메모리에 저장되어, 상기 컴퓨터 판독 가능 메모리에 저장된 명령이 명령 장치를 포함하는 제조품을 생성하도록 할 수 있으며, 상기 명령 장치는 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현한다.
이러한 컴퓨터 프로그램 명령은 또한 컴퓨터 또는 다른 프로그램 가능 데이터 처리 기기에 로딩되어, 컴퓨터 또는 다른 프로그램 가능 기기에서 컴퓨터 구현 처리를 생성하기 위한 일련의 동작 단계를 수행하도록 함으로써, 컴퓨터 또는 다른 프로그램 가능 기기에서 실행하는 명령에 흐름도의 하나의 흐름 또는 복수 개의 흐름 및/또는 블록도의 하나의 블록 또는 복수 개의 블록 중 지정된 기능을 구현하기 위한 단계를 제공한다. 상술한 내용은 본 발명의 바람직한 실시예일 뿐 본 발명의 보호범위는 이에 한정되지 않는다. 당업자에게 있어서 본 발명은 다양한 변경 및 변화가 존재할 수 있다. 본 발명의 사상과 원리 내에 진행된 임의의 보정, 등가 대체, 개선 등은 모두 반드시 본 발명의 청구범위 내에 속해야 한다.

Claims (20)

  1. 인코딩 및 디코딩 방법으로서,
    현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하기 위해,
    상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하며; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계;
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계;
    상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계; 및
    상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 단계를 수행하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  2. 제1항에 있어서,
    상기 특징 정보는 움직임 정보 속성; 예측 모드 속성; 사이즈 정보; 시퀀스 레벨 스위치 제어 정보 중 하나 또는 다수를 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  3. 제2항에 있어서,
    상기 특징 정보가 상기 움직임 정보 속성을 포함하고, 상기 움직임 정보 속성이,
    상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 방향이 상이한 것;
    상기 현재 블록은 복수의 서브 블록을 포함하고, 상기 복수의 서브 블록의 움직임 정보가 모두 동일한 것;
    상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임의 가중치가 동일한 것;
    상기 현재 블록은 양방향 예측을 사용하고, 상기 현재 블록에 대응되는 두개의 참조 프레임과 현재 프레임의 거리가 동일한 것; 및
    상기 현재 블록은 양방향 예측을 사용하고, 현재 블록에 대응되는 두개의 참조 프레임의 예측 값의 차이 값이 기설정 임계값보다 작은 것; 중 적어도 한 가지 상황에 부합될 경우, 상기 움직임 정보 속성이 특정 조건을 만족하는 것으로 결정하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  4. 제3항에 있어서,
    상기 방법은,
    상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 참조 프레임에서 제1 예측 블록을 획득하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 참조 프레임에서 제2 예측 블록을 획득하는 단계;
    상기 제1 예측 블록의 다운샘플링한 후의 예측 값과 상기 제2 예측 블록의 다운샘플링한 후의 예측 값의 SAD에 따라, 상기 제1 참조 프레임과 상기 제2 참조 프레임의 예측 값의 차이 값을 획득하는 단계를 더 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  5. 제2항에 있어서,
    상기 특징 정보가 상기 예측 모드 속성을 포함하고, 상기 예측 모드 속성이 인트라 인터 병합 예측에 기반한 병합 모드, 및/또는, 대칭 움직임 벡터 차이 모드를 사용하지 않는다면, 상기 예측 모드 속성이 특정 조건을 만족하는 것으로 결정하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  6. 제2항에 있어서,
    상기 특징 정보가 상기 시퀀스 레벨 스위치 제어 정보를 포함하고, 상기 시퀀스 레벨 스위치 제어 정보가 상기 현재 블록이 양방향 광학 흐름 모드를 사용하도록 허용하면, 상기 시퀀스 레벨 스위치 제어 정보가 특정 조건을 만족하는 것으로 결정하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  7. 제2항에 있어서,
    상기 특징 정보가 상기 사이즈 정보를 포함하고, 상기 사이즈 정보가 폭 값 및 높이 값을 포함하며, 상기 사이즈 정보가,
    상기 현재 블록의 폭 값이 제1 임계값보다 크거나 같고, 상기 현재 블록의 폭 값이 제2 임계값보다 작거나 같으며;
    상기 현재 블록의 높이 값이 제3 임계값보다 크거나 같고, 상기 현재 블록의 높이 값이 제4 임계값보다 작거나 같으며;
    상기 현재 블록의 면적 값이 제5 임계값보다 크거나 같고, 상기 현재 블록의 면적 값이 제6 임계값보다 작거나 같은 상황 중의 적어도 하나를 만족할 경우, 상기 사이즈 정보는 특정 조건을 만족하는 것으로 결정하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  8. 제1항에 있어서,
    상기 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 단계는,
    상기 현재 블록의 제1 단일 방향 움직임 정보에 기반하여, 제1 참조 프레임에서 제1 참조 블록을 결정하고, 상기 제1 참조 블록의 제1 원래 예측 값을 결정하는 단계 - 상기 제1 참조 블록의 중심 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제1 참조 블록의 가장자리 영역의 제1 원래 예측 값은 제1 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - ;
    상기 현재 블록의 제2 단일 방향 움직임 정보에 기반하여, 제2 참조 프레임에서 제2 참조 블록을 결정하고, 상기 제2 참조 블록의 제2 원래 예측 값을 결정하는 단계 - 상기 제2 참조 블록의 중심 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값에 대해 보간을 진행하여 얻은 것이며, 상기 제2 참조 블록의 가장자리 영역의 제2 원래 예측 값은 제2 참조 프레임 중의 픽셀 값을 복사하여 얻은 것임 - 를 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  9. 제1항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계는,
    제1 기설정 조건을 만족할 경우, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하는 단계;
    상호 상관 계수(S2), 속도 임계값, 상호 상관 계수(S6), 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하는 단계를 포함하고,
    상기 제1 기설정 조건은 상호 상관 계수(S2), 수직 방향 기울기 합의 자기 상관 계수(S5)에 기반하여 결정되는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  10. 제1항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하는 단계는,
    제2 기설정 조건을 만족하면, 제1 원래 예측 값 및 제2 원래 예측 값에 따라 수평 방향 기울기 합의 자기 상관 계수(S1), 수평 방향 기울기 합과 수직 방향 기울기 합의 상호 상관 계수(S2), 시간 영역 예측 값 차분값 수평 방향 기울기 합의 상호 상관 계수(S3), 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하는 단계;
    상기 자기 상관 계수(S1), 상호 상관 계수(S2), 상호 상관 계수(S3), 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수평 방향 속도를 결정하는 단계를 포함하고,
    상기 제2 기설정 조건은 상기 상호 상관 계수(S2), 상기 자기 상관 계수(S5)에 기반하여 결정되는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  11. 제1항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계는,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 절단 처리를 진행하지 않은 비절단 수평 방향 속도를 획득하고, 상기 비절단 수평 방향 속도에 따라 수직 방향 속도를 결정하는 단계를 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  12. 제1항에 있어서,
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계는,
    제3 기설정 조건을 만족할 경우, 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 기울기 합의 자기 상관 계수(S5), 시간 영역 예측 값 차분값과 수직 방향 기울기 합의 상호 상관 계수(S6)를 결정하는 단계;
    상기 자기 상관 계수(S5), 상호 상관 계수(S6), 속도 임계값, 제1 증폭 인자 및 제2 증폭 인자에 따라 수직 방향 속도를 결정하는 단계를 포함하고,
    상기 제3 기설정 조건은 상기 수평 방향 속도에 기반하여 결정되는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  13. 제9항, 제10항 또는 제12항에 있어서,
    상기 방법은,
    상기 상호 상관 계수(S2)는 제1 상호 상관 계수 임계값과 제2 상호 상관 계수 임계값 사이에 위치하는 단계;
    상기 상호 상관 계수(S6)는 제3 상호 상관 계수 임계값과 제4 상호 상관 계수 임계값 사이에 위치하는 단계를 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  14. 제9항, 제10항 또는 제12항에 있어서,
    상기 제1 증폭 인자는 5와 (BD-7) 중 작은 값이거나, 또는, 1과 (BD-11) 중 큰 값이며;
    상기 제2 증폭 인자는 8과 (BD-4) 중 작은 값이거나, 또는, 4와 (BD-8) 중 큰 값이며;
    상기 속도 임계값은 2의 M 제곱이고, M은 13과 BD의 차분값이거나, 또는, 5와 (BD-7) 중 큰 값이며; D는 비트 깊이인 것을 특징으로 하는 인코딩 및 디코딩 방법.
  15. 제1항에 있어서,
    상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 단계는,
    상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 기울기 우측 시프트 수에 따라, 수평 방향 기울기 및 수직 방향 기울기를 결정하는 단계;
    상기 수평 방향 속도, 상기 수직 방향 속도, 상기 수평 방향 기울기 및 상기 수직 방향 기울기에 따라, 상기 예측 보상 값을 획득하는 단계를 포함하고,
    상기 기울기 우측 시프트 수는 2와 (14-BD) 중 큰 값이거나, 또는, 6과 (BD-6) 중 큰 값이며, BD는 비트 깊이인 것을 특징으로 하는 인코딩 및 디코딩 방법.
  16. 제1항 내지 제15항 중 어느 한 항에 있어서,
    상기 현재 블록이 적어도 하나의 서브 블록으로 분할되면, 상기 현재 블록의 각각의 서브 블록에 대하여, 상기 방법은,
    상기 서브 블록의 제1 단일 방향 움직임 정보에 따라 상기 서브 블록의 제1 원래 예측 값을 결정하는 단계;
    상기 서브 블록의 제2 단일 방향 움직임 정보에 따라 상기 서브 블록의 제2 원래 예측 값을 결정하는 단계;
    상기 서브 블록의 제1 원래 예측 값 및 상기 서브 블록의 제2 원래 예측 값에 따라 상기 서브 블록에 대응되는 수평 방향 속도, 상기 서브 블록에 대응되는 수직 방향 속도를 결정하는 단계;
    상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 상기 서브 블록에 대응되는 예측 보상 값을 획득하는 단계; 및
    상기 서브 블록의 제1 원래 예측 값, 상기 서브 블록의 제2 원래 예측 값 및 상기 서브 블록에 대응되는 예측 보상 값에 따라 상기 서브 블록의 타깃 예측 값을 획득하는 단계를 더 포함하는 것을 특징으로 하는 인코딩 및 디코딩 방법.
  17. 인코딩 및 디코딩 장치로서,
    상기 장치는 현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록 또는 상기 현재 블록의 서브 블록의 타깃 예측 값을 획득하고, 상기 장치는,
    현재 블록의 특징 정보가 특정 조건을 만족하면, 상기 현재 블록의 제1 단일 방향 움직임 정보에 따라 제1 원래 예측 값을 결정하고, 상기 현재 블록의 제2 단일 방향 움직임 정보에 따라 제2 원래 예측 값을 결정하는 제1 결정 모듈;
    상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수평 방향 속도를 결정하고; 상기 제1 원래 예측 값 및 상기 제2 원래 예측 값에 따라 수직 방향 속도를 결정하는 단계 제2 결정 모듈;
    상기 수평 방향 속도 및 상기 수직 방향 속도에 따라 예측 보상 값을 획득하는 제1 획득 모듈; 및
    상기 제1 원래 예측 값, 상기 제2 원래 예측 값 및 상기 예측 보상 값에 따라 타깃 예측 값을 획득하는 제2 획득 모듈을 포함하는 것을 특징으로 하는 인코딩 및 디코딩 장치.
  18. 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 인코딩단 기기로서,
    상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
    상기 프로세서는 기계 실행 가능한 명령을 실행하여, 제1항 내지 제16항 중 어느 한 항에 따른 방법을 구현하는 것을 특징으로 하는 인코딩단 기기.
  19. 프로세서 및 기계 판독 가능한 저장 매체를 포함하는 디코딩단 기기로서,
    상기 기계 판독 가능한 저장 매체에 상기 프로세서에 의해 실행되는 기계 실행 가능한 명령이 저장되어 있고;
    상기 프로세서는 기계 실행 가능한 명령을 실행하여, 제1항 내지 제16항 중 어느 한 항에 따른 방법을 구현하는 것을 특징으로 하는 디코딩단 기기.
  20. 컴퓨터 명령이 저장되는 기계 판독 가능한 저장 매체로서,
    상기 컴퓨터 명령이 프로세서에 의해 실행될 경우 제1항 내지 제16항 중 어느 한 항에 따른 방법을 구현하는 것을 특징으로 하는 기계 판독 가능한 저장 매체.
KR1020217038634A 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기 KR102620203B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020237045155A KR20240005233A (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN201910544562.5 2019-06-21
CN201910544562.5A CN112118455B (zh) 2019-06-21 2019-06-21 一种编解码方法、装置及其设备
PCT/CN2020/096600 WO2020253730A1 (zh) 2019-06-21 2020-06-17 一种编解码方法、装置及其设备

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020237045155A Division KR20240005233A (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Publications (2)

Publication Number Publication Date
KR20220003027A true KR20220003027A (ko) 2022-01-07
KR102620203B1 KR102620203B1 (ko) 2023-12-29

Family

ID=70220964

Family Applications (2)

Application Number Title Priority Date Filing Date
KR1020237045155A KR20240005233A (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기
KR1020217038634A KR102620203B1 (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Family Applications Before (1)

Application Number Title Priority Date Filing Date
KR1020237045155A KR20240005233A (ko) 2019-06-21 2020-06-17 인코딩 및 디코딩 방법, 장치 및 그 기기

Country Status (8)

Country Link
US (1) US20220232242A1 (ko)
EP (1) EP3989576A4 (ko)
JP (2) JP7334272B2 (ko)
KR (2) KR20240005233A (ko)
CN (30) CN111031318B (ko)
CA (1) CA3139466A1 (ko)
MX (1) MX2021015977A (ko)
WO (2) WO2020253730A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023172002A1 (ko) * 2022-03-11 2023-09-14 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111031318B (zh) * 2019-06-21 2020-12-29 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
CN112135145B (zh) * 2019-11-14 2022-01-25 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备

Family Cites Families (45)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008048235A (ja) * 2006-08-18 2008-02-28 Sony Corp 可変長符号の復号化方法および復号化装置
JP2008289134A (ja) * 2007-04-20 2008-11-27 Panasonic Corp 符号化レート変換装置、集積回路、符号化レート変換方法、及びプログラム
CN100493194C (zh) * 2007-05-17 2009-05-27 上海交通大学 用于视频感兴趣区域编解码的泄漏运动补偿方法
EP2557795A4 (en) * 2010-04-06 2015-07-08 Samsung Electronics Co Ltd METHOD AND APPARATUS FOR ENCODING A VIDEO AND METHOD AND APPARATUS FOR DECODING A VIDEO
WO2014054267A1 (ja) * 2012-10-01 2014-04-10 パナソニック株式会社 画像符号化装置及び画像符号化方法
CN104427345B (zh) * 2013-09-11 2019-01-08 华为技术有限公司 运动矢量的获取方法、获取装置、视频编解码器及其方法
US10531093B2 (en) * 2015-05-25 2020-01-07 Peking University Shenzhen Graduate School Method and system for video frame interpolation based on optical flow method
WO2017036399A1 (en) * 2015-09-02 2017-03-09 Mediatek Inc. Method and apparatus of motion compensation for video coding based on bi prediction optical flow techniques
US10375413B2 (en) * 2015-09-28 2019-08-06 Qualcomm Incorporated Bi-directional optical flow for video coding
CN114827599A (zh) * 2016-02-03 2022-07-29 Oppo广东移动通信有限公司 运动图像解码装置、编码装置、以及预测图像生成装置
WO2017133661A1 (en) * 2016-02-05 2017-08-10 Mediatek Inc. Method and apparatus of motion compensation based on bi-directional optical flow techniques for video coding
CN114466193A (zh) * 2016-03-16 2022-05-10 联发科技股份有限公司 视频编码的样式基础的运动向量推导之方法及装置
US10939105B2 (en) * 2016-03-25 2021-03-02 Panasonic Intellectual Property Management Co., Ltd. Methods and apparatuses for encoding and decoding video using signal dependent adaptive quantization
US20170339405A1 (en) * 2016-05-20 2017-11-23 Arris Enterprises Llc System and method for intra coding
JP6938612B2 (ja) * 2016-07-12 2021-09-22 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートＥｌｅｃｔｒｏｎｉｃｓ Ａｎｄ Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｒｅｓｅａｒｃｈ Ｉｎｓｔｉｔｕｔｅ 画像復号方法、画像符号化方法、及び非一時的なコンピュータ可読の記録媒体
CN117615147A (zh) * 2016-07-14 2024-02-27 三星电子株式会社 视频解码方法及其装置以及视频编码方法及其装置
CN116582668A (zh) * 2016-08-11 2023-08-11 Lx 半导体科技有限公司 图像编码/解码方法以及图像数据的发送方法
CN106454378B (zh) * 2016-09-07 2019-01-29 中山大学 一种基于变形运动模型的帧率上转换视频编码方法及系统
KR102499139B1 (ko) * 2016-09-21 2023-02-13 삼성전자주식회사 이미지를 표시하는 전자 장치 및 그 제어 방법
CN110115032B (zh) * 2016-12-22 2021-07-20 联发科技股份有限公司 用于视频编解码的运动细化的方法以及装置
US10931969B2 (en) * 2017-01-04 2021-02-23 Qualcomm Incorporated Motion vector reconstructions for bi-directional optical flow (BIO)
US10523964B2 (en) * 2017-03-13 2019-12-31 Qualcomm Incorporated Inter prediction refinement based on bi-directional optical flow (BIO)
WO2018174618A1 (ko) * 2017-03-22 2018-09-27 한국전자통신연구원 참조 블록을 사용하는 예측 방법 및 장치
CN116708831A (zh) * 2017-04-24 2023-09-05 Sk电信有限公司 编解码视频数据的方法、发送编码视频数据比特流的方法
KR102409430B1 (ko) * 2017-04-24 2022-06-15 에스케이텔레콤 주식회사 움직임 보상을 위한 옵티컬 플로우 추정 방법 및 장치
CA3065492C (en) * 2017-05-17 2022-06-14 Kt Corporation Method and device for video signal processing
US10904565B2 (en) * 2017-06-23 2021-01-26 Qualcomm Incorporated Memory-bandwidth-efficient design for bi-directional optical flow (BIO)
CN117478884A (zh) * 2017-07-03 2024-01-30 Vid拓展公司 用于视频编解码的设备、方法
WO2019045427A1 (ko) * 2017-08-29 2019-03-07 에스케이텔레콤 주식회사 양방향 옵티컬 플로우를 이용한 움직임 보상 방법 및 장치
WO2019074273A1 (ko) * 2017-10-10 2019-04-18 한국전자통신연구원 인터 예측 정보를 사용하는 방법 및 장치
WO2019117640A1 (ko) * 2017-12-14 2019-06-20 엘지전자 주식회사 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
MX2021004715A (es) * 2018-11-05 2021-06-04 Beijing Bytedance Network Tech Co Ltd Interpolacion para interprediccion con refinamiento.
CN112565784B (zh) * 2018-12-28 2022-05-27 杭州海康威视数字技术股份有限公司 一种编解码方法及其设备
BR112021012366B1 (pt) * 2019-01-15 2022-03-22 Lg Electronics Inc Método de decodificação de uma imagem realizado por um aparelho de decodificação, método de codificação de uma imagem realizado por um aparelho de codificação e mídia de armazenamento digital legível por computador não transitória
WO2020166897A1 (ko) * 2019-02-14 2020-08-20 엘지전자 주식회사 Dmvr 기반의 인터 예측 방법 및 장치
WO2020185427A1 (en) * 2019-03-11 2020-09-17 Alibaba Group Holding Limited Inter prediction methods for coding video data
WO2020184848A1 (ko) * 2019-03-13 2020-09-17 엘지전자 주식회사 Dmvr 기반의 인터 예측 방법 및 장치
WO2020187198A1 (en) * 2019-03-17 2020-09-24 Beijing Bytedance Network Technology Co., Ltd. Prediction refinement based on optical flow
WO2020197083A1 (ko) * 2019-03-22 2020-10-01 엘지전자 주식회사 Dmvr 및 bdof 기반의 인터 예측 방법 및 장치
US11140409B2 (en) * 2019-03-22 2021-10-05 Lg Electronics Inc. DMVR and BDOF based inter prediction method and apparatus thereof
CN111031318B (zh) * 2019-06-21 2020-12-29 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及其设备
US11509910B2 (en) * 2019-09-16 2022-11-22 Tencent America LLC Video coding method and device for avoiding small chroma block intra prediction
US20210092404A1 (en) * 2019-09-20 2021-03-25 Qualcomm Incorporated Reference picture constraint for decoder side motion refinement and bi-directional optical flow
US11563980B2 (en) * 2020-04-02 2023-01-24 Qualcomm Incorporated General constraint information syntax in video coding
US11611778B2 (en) * 2020-05-20 2023-03-21 Sharp Kabushiki Kaisha Systems and methods for signaling general constraint information in video coding

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
CHEN and Fangdong And WANG, Li, "Non-CE9: Modified enabling condition for DMVR and BDOF", JVET of ITU-T and ISO/IEC, JVET-N0162-v2(2019.03.19.)* *
CHEN, Jianle Et.Al., "Algorithm Description for Versatile Video Coding and Test Model 5 (VTM 5)", JVET of ITU-T and ISO/IEC, JVET-N1002-v2(2019.06.11.)* *
C-Y LAI ET AL, "CE9-1.2 and CE9-1.4: BDOF early termination", JVET of ITU-T and ISO/IEC, JVET-O0055-v1(2019.06.18.)* *
HEN and Chun-Chia Et al., "CE4-related: Reduction of interactions between bi-prediction codingtools", JVET of ITU-T and ISO/IEC, JVET-N0086-v1(2019.03.19.)* *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023172002A1 (ko) * 2022-03-11 2023-09-14 현대자동차주식회사 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체

Also Published As

Publication number Publication date
JP2022534240A (ja) 2022-07-28
CN113411606A (zh) 2021-09-17
CN113596481A (zh) 2021-11-02
CN113613020A (zh) 2021-11-05
CN113411597A (zh) 2021-09-17
CN113411604A (zh) 2021-09-17
CN113596481B (zh) 2022-07-01
CN113596477B (zh) 2022-07-01
CN113596478B (zh) 2022-04-26
CN113411598B (zh) 2022-05-31
CN113411599B (zh) 2022-05-31
CN113411603A (zh) 2021-09-17
CN113596478A (zh) 2021-11-02
CN113747175A (zh) 2021-12-03
JP7334272B2 (ja) 2023-08-28
CN111031318B (zh) 2020-12-29
CN113411607B (zh) 2022-05-31
CN113411600B (zh) 2022-05-31
CN113411597B (zh) 2022-05-27
CN113411608B (zh) 2022-05-31
CN113411608A (zh) 2021-09-17
CN113596480A (zh) 2021-11-02
JP2023156444A (ja) 2023-10-24
WO2020253730A1 (zh) 2020-12-24
CN113411593B (zh) 2022-05-27
CN113411593A (zh) 2021-09-17
CN113411596A (zh) 2021-09-17
CA3139466A1 (en) 2020-12-24
CN113596476B (zh) 2022-07-01
CN113596476A (zh) 2021-11-02
EP3989576A1 (en) 2022-04-27
CN113411610B (zh) 2022-05-27
KR20240005233A (ko) 2024-01-11
CN112118455B (zh) 2022-05-31
CN113411600A (zh) 2021-09-17
CN113411609B (zh) 2022-05-31
CN113411599A (zh) 2021-09-17
CN113411602A (zh) 2021-09-17
CN113411607A (zh) 2021-09-17
CN111031318A (zh) 2020-04-17
MX2021015977A (es) 2022-02-10
CN113709503A (zh) 2021-11-26
WO2020253769A1 (zh) 2020-12-24
CN113596479A (zh) 2021-11-02
CN113411596B (zh) 2022-05-31
CN113411595B (zh) 2022-05-31
CN113411594B (zh) 2022-05-31
CN113596480B (zh) 2022-08-12
CN113411606B (zh) 2022-07-01
CN113596477A (zh) 2021-11-02
CN113411601A (zh) 2021-09-17
CN113411601B (zh) 2022-05-31
CN113411605B (zh) 2022-05-31
CN112118455A (zh) 2020-12-22
CN113411598A (zh) 2021-09-17
KR102620203B1 (ko) 2023-12-29
CN113411610A (zh) 2021-09-17
CN113411603B (zh) 2022-03-25
CN113411609A (zh) 2021-09-17
CN113411602B (zh) 2022-05-31
US20220232242A1 (en) 2022-07-21
CN113411605A (zh) 2021-09-17
CN113411604B (zh) 2022-05-31
EP3989576A4 (en) 2022-08-31
CN113613021A (zh) 2021-11-05
CN113411595A (zh) 2021-09-17
CN113411594A (zh) 2021-09-17

Similar Documents

Publication Publication Date Title
KR20220003027A (ko) 인코딩 및 디코딩 방법, 장치 및 그 기기
KR20220050228A (ko) 인코딩 및 디코딩 방법, 장치 및 이의 기기

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
A107 Divisional application of patent
GRNT Written decision to grant