KR20220138001A - 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기 - Google Patents

디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기 Download PDF

Info

Publication number
KR20220138001A
KR20220138001A KR1020227032543A KR20227032543A KR20220138001A KR 20220138001 A KR20220138001 A KR 20220138001A KR 1020227032543 A KR1020227032543 A KR 1020227032543A KR 20227032543 A KR20227032543 A KR 20227032543A KR 20220138001 A KR20220138001 A KR 20220138001A
Authority
KR
South Korea
Prior art keywords
current block
inter prediction
filtering
prediction filtering
augmented
Prior art date
Application number
KR1020227032543A
Other languages
English (en)
Inventor
샤오챵 차오
Original Assignee
항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드 filed Critical 항조우 힉비젼 디지털 테크놀로지 컴퍼니 리미티드
Publication of KR20220138001A publication Critical patent/KR20220138001A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/147—Data rate or code amount at the encoder output according to rate distortion criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Steroid Compounds (AREA)
  • Error Detection And Correction (AREA)

Abstract

본 출원은 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기를 제공하는 바, 당해 디코딩 방법은: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계; 만약 상기 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키면, 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는 단계; 만약 상기 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리키면, 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는 단계를 포함한다.

Description

디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기
본 출원은 인코딩/디코딩 기술 분야에 관한 것으로, 특히, 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기에 관한 것이다.
공간 절약의 목적에 도달하기 위해, 비디오 이미지는 모두 인코딩 후에 전송된 것이며, 완전한 비디오 인코딩 방법은 예측, 변환, 양자화, 엔트로피 인코딩, 필터링 등 과정을 포함할 수 있으며, 예측 과정은 인트라 예측 및 인터 예측을 포함할 수 있다. 인터 예측을 포함할 수 있다. 인터 예측은 비디오 시간 영역의 상관성을 이용하여, 인접된 이미 인코딩된 이미지의 픽셀을 이용하여 현재 이미지의 픽셀을 예측하여 비디오 시간 영역 리던던시를 제거하는 목적을 달성한다. 인트라 예측은 인접 블록 사이에 강한 공간 영역 관련성이 존재하는 것을 고려하여, 주변의 이미 재구성된 픽셀을 참조 픽셀로 이용하여 현재 인코딩되지 않은 블록에 대해 예측을 수행하는 바, 원본값에 대해 인코딩을 수행하지 않고 잔차값에 대해서만 후속의 인코딩 처리를 수행하여 공간 영역의 리던던시를 효과적으로 제거하여 압축 효율을 현저하게 향상시켰다.
인터 예측 필터링 및 증강 인터 예측 필터링은 인터 예측의 두 가지 기술을 구현하는 바, 주로 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속성 문제를 제거한다. 하지만, 어떻게 인터 예측 필터링 또는 증강 인터 예측 필터링을 이용하여 인터 예측을 구현할 것인가는 현재로서는 적합한 해결수단이 없으며, 인코딩 성능이 낮은 문제가 존재한다.
본 출원은 디코딩단에 응용되는 디코딩 방법을 제공하는 바, 상기 방법은: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 포함한다.
본 출원은 인코딩단에 응용되는 인코딩 방법을 제공하는 바, 상기 방법은: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하는 단계 - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는, 만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -;를 포함한다.
본 출원은 인코딩단 또는 디코딩단에 응용되는 인코딩/디코딩 방법을 제공하는 바, 상기 방법은: 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분(chroma component)에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하는 단계를 포함한다.
본 출원은 디코딩단에 응용되는 디코딩 장치를 제공하는 바, 상기 장치는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하기 위한 획득 모듈; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻고; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻기 위한 처리 모듈을 포함한다.
본 출원은 인코딩단에 응용되는 인코딩 장치를 제공함으로써, 상기 장치는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하기 위한 인코딩 모듈 - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는, 만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -; 상기 현재 블록의 비트스트림 데이터를 송신하기 위한 송신 모듈을 포함한다.
본 출원은 인코딩단 또는 디코딩단에 응용되는 인코딩/디코딩 장치를 제공하는 바, 상기 장치는: 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻기 위한 처리 모듈; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하기 위한 결정 모듈을 포함한다.
본 출원은 디코딩단 기기를 제공하는 바, 프로세서 및 기계 판독 가능 저장 매체를 포함하되, 상기 기계 판독 가능 저장 매체에는 상기 프로세서에 의해 아래 단계를 구현하기 위한 기계 실행 가능 명령을 실행하는 바, 상기 단계는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계; 또는, 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 포함한다.
본 출원은 인코딩단 기기를 제공하는 바, 프로세서 및 기계 판독 가능 저장 매체를 포함하되, 상기 기계 판독 가능 저장 매체에는 상기 프로세서에 의해 아래 단계를 구현하기 위한 기계 실행 가능 명령을 수행하되, 상기 단계는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하는 단계 - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리킴; 또는, 만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리거나 -; 또는, 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 포함한다.
상술한 기술적 해결방안으로부터 알 수 있는 바와 같이, 본 출원의 실시예에서, 인터 예측 필터링 및 증강 인터 예측 필터링의 플래그를 디커플링하여, 즉 인터 예측 필터링 이네이블 플래그를 통해 인터 예측 필터링 사용을 허락하는지 여부를 나타내고, 증강 인터 예측 필터링 이네이블 플래그를 통해 증강 인터 예측 필터링 사용을 허락하는지 여부를 나타냄으로써, 인터 예측 필터링 또는 증강 인터 예측 필터링을 유효하게 이용하여 인터 인코딩을 구현하며, 인코딩/디코딩 복잡도에 변화가 발생하지 않는 상황 하에 인코딩 성능을 향상시킬 수 있다.
도 1a는 본 출원의 한 실시 방식 중의 비디오 인코딩 프레임워크의 모식도이다;
도 1b는 본 출원의 한 실시 방식 중의 파티션 트리의 모식도이다;
도 2a는 본 출원의 한 실시 방식 중의 디코딩 방법의 흐름도이다;
도 2b는 본 출원의 한 실시 방식 중의 인코딩 방법의 흐름도이다;
도 2c는본 출원의 한 실시 방식 중의 인코딩/디코딩 방법의 흐름도이다;
도 3은 본 출원의 다른 한 실시 방식 중의 인코딩/디코딩 방법의 흐름도이다;
도 4는 본 출원의 한 실시 방식 중의 인터 예측 필터링을 포함한 디코딩 과정 모식도이다;
도 5는 본 출원의 한 실시 방식 중의 현재 블록과 참조 픽셀의 위치 관계 모식도이다;
도 6a는 본 출원의 한 실시 방식 중의 디코딩 장치의 구조도이다;
도 6b는 본 출원의 한 실시 방식 중의 인코딩 장치의 구조도이다;
도 6c는 본 출원의 한 실시 방식 중의 인코딩/디코딩 장치의 구조도이다;
도 7a는 본 출원의 한 실시 방식 중의 디코딩단 기기의 하드웨어 구조도이다;
도 7b는 본 출원의 한 실시 방식 중의 인코딩단 기기의 하드웨어 구조도이다.
본 출원에서 사용되는 용어는 단지 특정 실시예들을 설명하기 위한 것이며, 본 출원을 제한하려고 의도되는 것은 아니다. 본 출원 및 첨부된 청구항들에서 사용되는 단수 형태들('a', 'said' 및 'the')은 문맥이 다른 의미들을 명확히 표시하지 않는 한 대다수의 형태를 포함하는 것으로 또한 의도된다. 또한 본 명세서에서 사용된 용어 "및/ 또는 "은 하나 이상의 연관된 나열된 항목의 임의의 또는 모든 가능한 조합을 지칭하고 포함하는 것으로 이해되어야 한다. 비록 본 개시에서 "제1", "제2", "제3" 등 용어를 사용하여 여러 가지 정보를 설명할 수 있으나 이러한 정보는 이러한 용어에 한정되지 말아야 한다는 것을 이해해야 한다. 이러한 용어는 단지 동일한 유형의 정보를 서로 구별하기 위한 것이다. 예를 들어, 본 개시의 범위를 벗어나지 않을 경우, 제1 정보가 제2 정보로 불릴 수도 있고, 유사하게, 제2 정보는 제1 정보로 불릴 수도 있다. 또한, 문맥에 따라, 본 명세서에서 사용되는 바와 같은 단어 "~한 경우(if)"는 "~할 때(when)" 또는 "~할 시(upon)" 또는 "결정에 응답하여"로서 해석될 수 있다.
본 기술 분야의 통상의 기술자들이 본 출원의 해결 방안을 더 잘 이해할 수 있도록 하기 위하여 이하 기술 용어에 대해 간단히 설명한다.
비디오 인코딩 프레임워크: 도 1a를 참조하면, 비디오 인코딩 프레임워크를 사용하여 본 출원의 실시예의 인코딩단 처리 프로세스를 구할 수 있으며, 비디오 디코딩 프레임워크의 모식도는 도 1a와 유사할 수 있으며, 여기서 더 이상 설명하지 않으며, 비디오 디코딩 프레임워크를 이용하여 본 출원의 실시예의 디코딩단 처리 프로세스를 구현할 수 있다. 비디오 인코딩 프레임워크 및 비디오 디코딩 프레임워크에: 예측, 움직임 추정/움직임 보상, 참조 이미지 버퍼, 인루프 필터링, 재구성, 변환, 양자화, 역변환, 역양자화, 엔트로피 인코더 등 모듈을 포함할 수 있으며 이에 한정되지 않는다. 인코딩단에서 이러한 모듈 사이의 협력을 통해 인코딩단의 처리 프로세스를 구현할 수 있으며, 디코딩단에서 이러한 모듈 사이의 협력을 통해 디코딩단의 처리 프로세스를 구현할 수 있다.
예시적으로, 비디오 인코딩 과정에서, 예측 과정은 인트라 예측 및 인터 예측을 포함할 수 있다. 인트라 예측은 인접 블록 사이의 강한 공간 영역 상관성을 고려하여, 주변의 이미 재구성된 픽셀을 참조 픽셀로 이용하고, 현재 인코딩되지 않은 블록에 대해 예측을 수행하여, 원본값에 대해 인코딩을 수행하는 것이 아니라 오직 잔차값에 대해서만 후속의 인코딩 처리를 수행하여, 공간 영역 상의 리던던시를 효과적으로 제거하고, 압축 효율을 현저하게 향상시킨다. 이 외에, 인터 예측은 비디오 시간 영역의 상관성을 이용하여, 인접된 이미 인코딩된 이미지의 픽셀을 사용하여 현재 이미지의 픽셀을 예측함으로써, 비디오 시간 영역 리던던시의 제거 목적을 달성한다.
예시적으로, 비디오 인코딩 과정에서, 변환은 공간 영역 내의 픽셀 형식으로 설명된 이미지를 변환 영역의 이미지로 전환시키는 것을 뜻하며, 변환 계수의 형식으로 나타낸다. 대다수의 이미지에는 모두 비교적 많은 평평한 영역 및 천천히 변하는 영역이 포함되기 때문에, 적당한 변환 과정은 이미지 에너지가 공간 영역에서 분산 및 분포되도록 하고, 변환 영역에서의 상대적으로 집중된 분포로 전환되록 함으로써, 신호 사이의 주파수 영역 상관성을 제거할 수 있고, 양자화 과정과 협력하여 비트스트림 데이터를 효과적으로 압축할 수 있다.
예시적으로, 엔트로피 인코딩은 정보 엔트로피의 원리에 따라 무손실 인코딩 방식을 수행한, 비디오 압축의 마지막 처리 모듈에 처한, 일련의 비디오 시퀀스를 나타내는 요소 부호를 하나의 전송 또는 저장하기 위한 이진법 비트스트림 데이터로 전환하는 것을 가리킨다. 입력된 요소 부호에는 양자화된 변환 계수, 움직임 벡터 정보, 예측 모드 정보, 변환 양자화 관련 문법 등이 포함될 수 있다. 엔트로피 인코딩 모듈의 출력 데이터가 바로 원본 비디오의 압축된 최종의 비트스트림 데이터이다. 엔트로피 인코딩은 이러한 비디오 요소 부호의 통계 리던던시를 효과적으로 제거함으로써, 비디오 인코딩 압축 효율을 확보하는 중요한 툴 중의 하나이다.
예시적으로, 루프 필터링은 이미지의 블록 효과 또는 이미지 효과가 별로인 등 문제점을 줄이고, 이미지 질량을 개선한다. 예를 들어, 루프 필터링은 디블록킹 필터링(Deblocking filter), SAO(Sample Adaptive Offset)필터링, ALF(Adaptive Loop Filter)필터링, CCALF(Cross 내지 Component Adaptive Loop Filter)필터링 등을 포함할 수 있으나 이에 한정되지 않는다.
움직임 벡터(Motion Vector, MV): 인터 예측 과정에서, 움직임 벡터를 사용하여 현재 비디오 픽처의 현재 블록과 참조 비디오 픽처의 참조 블록 사이의 상대적 변위를 나타낼 수 있다. 각 분할된 분할의 블록은 모두 상응한 움직임 벡터를 디코딩단에 전송하며, 만약 각 블록의 움직임 벡터에 대해 독립적인 인코딩 및 전송, 특히 작은 사이즈의 대량의 블록으로 분할하면, 상당히 많은 비트를 소모하게 된다. 움직임 벡터를 인코딩하기 위한 비트수를 줄이기 위해 인접 블록 사이의 공간 상관성을 이용하여, 인접된 이미 인코딩된 블록의 움직임 벡터에 기반하여 현재 인코딩될 블록의 움직임 벡터에 대해 예측을 수행한 다음, 예측 차이에 대해 인코딩을 수행함으로써, 이러한 방법으로 움직임 벡터를 나타내는 비트수를 효과적으로 낮출 수 있다. 예시적으로, 현재 블록의 움직임 벡터에 대해 인코딩을 수행하는 과정에서, 먼저 인접된 이미 인코딩된 블록의 움직임 벡터를 이용하여 현재 블록의 움직임 벡터를 예측한 다음, 당해 움직임 벡터의 예측값(MVP, Motion Vector Prediction)과 움직임 벡터의 실제 추정값 사이의 차이값(MVD, MotionVector Difference)에 대해 인코딩을 수행함으로써, 움직임 벡터의 인코딩 비트수를 효과적으로 낮출 수 있다.
움직임 정보(Motion Information): 움직임 벡터가 현재 블록과 특정 참조 블록 사이의 위치 변위를 나타내므로, 참조 블록의 정보를 정확하게 획득하기 위해, 움직임 벡터 외에도, 참조 픽처의 인덱스 정보를 통해 현재 블록이 어느 참조 픽처를 사용하는지를 나타낸다. 비디오 인코딩 기술 중, 현재 픽처에 대해, 일반적으로 하나의 참조 픽처 리스트를 구축할 수 있는바, 참조 픽처 인덱스 정보는 현재 블록이 참조 픽처 리스트 중의 몇 번째 참조 픽처를 사용하였는지를 나타낸다. 이 외에, 많은 인코딩 기술은 또한 복수 개의 참조 픽처 리스트를 지원하므로, 하나의 인덱스값을 이용하여 어느 참조 픽처 리스트를 사용하였는지를 나타낼 수도 있는 바, 이 인덱스값은 참조 방향으로 지칭될 수 있다. 상술한 바와 같이, 비디오 인코딩 기술 중, 움직임 벡터, 참조 픽처 인덱스, 참조 방향 등 움직임과 상관되는 정보를 모두 움직임 정보라고 지칭할 수 있다
일반 인터 모드, 스킵 모드(Skip) 및 다이렉트 모드(Direct): 인터 예측 과정에서, 인터 예측 모드를 이용하여 현재 블록에 대해 예측을 수행할 수 있는 바, 인터 예측 모드에는 일반 인터 모드, 스킵 모드 및 다이렉트 모드 등이 포함될 수 있다.
스킵 모드는 일종의 인터 예측 모드로서, 인코딩단은 잔차 정보를 전송할 필요가 없고, 전송MVD도 전송할 필요가 없으며, 오직 움직임 정보의 인덱스만 전송하면 된다. 디코딩단은 움직임 정보의 인덱스에 대한 해석(parsing)을 통해, 현재 블록의 움직임 정보를 도출하고, 움직임 정보를 획득한 후, 움직임 정보를 이용하여 예측값을 결정하고, 예측값을 직접 재구성값으로 이용할 수 있다.
다이렉트 모드는 일종의 인터 예측 모드인 바, 인코딩단은 잔차 정보를 전송해야 하지만, MVD를 전송할 필요는 없으며, 오직 움직임 정보의 인덱스만 전송하면 된다. 디코딩단은 움직임 정보의 인덱스에 대한 해석을 통해, 현재 블록의 움직임 정보를 도출하고, 움직임 정보를 얻은 후, 움직임 정보를 이용하여 예측값을 결정하고, 예측값에 잔차값을 합하여 재구성값을 얻을 수 있다.
일반 인터 모드는 일종의 인터 예측 모드인 바, 스킵 모드 및 다이렉트 모드의 다른 점은, 일반 인터 모드에서의 작성은 전송 움직임 정보의 인덱스, MVD 및 잔차 정보 등 내용의 전송을 필요로 하는 것이다. 하지만 스킵 모드 또는 다이렉트 모드에서는, 현재 블록의 움직임 정보는 시간 영역 또는 공간 영역의 특정 인접된 블록의 움직임 정보를 재사용하는 바, 예컨대, 주변의 복수 개의 블록의 움직임 정보 집합으로부터, 하나의 움직임 정보를 선택하여 현재 블록의 움직임 정보로 이용하는 것이다. 따라서, 스킵 모드 또는 다이렉트 모드에서, 하나의 인덱스값만 인코딩해야 하는 것은 현재 블록이 움직임 정보 집합 중의 어느 움직임 정보를 사용하는지를 나타내고, 스킵 모드와 다이렉트 모드 사이의 차이점은: 스킵 모드는 인코딩 잔차를 필요로 하지 않지만, 다이렉트 모드는 인코딩 잔차를 필요로 하는 것이다. 알수 있다시피, 스킵 모드 또는 다이렉트 모드는 움직임 정보의 인코딩 오브헤드를 대대적으로 절약할 수 있다.
다이렉트 모드에서, 여러 가지 인터 예측 모드를 이용하여 어떻게 인터 예측값을 생성할 것인가를 결정할 수 있는바, 예를 들어, 보통 다이렉트 모드, 서브 블록 모드, MMVD 모드(merge with motion vector difference), CIIP 모드(combine inter intra prediciton mode), TPM 모드(triangular prediction mode), GEO 모드(Geometrical Partitioning)이다. 서브 블록 모드는 Affine(아핀) 모드 또는 SbTMVP(subblock-based temporal motion vector prediction) 모드일 수 있다.
보통 다이렉트 모드에 대해, 후보 움직임 정보 리스트로부터 하나의 움직임 정보를 선택하여, 당해 움직임 정보에 기반하여 현재 블록의 예측값을 생성할 수 있다. 당해 후보 움직임 정보 리스트에는: 공간 영역 인접 블록 후보 움직임 정보, 시간 영역 인접 블록 후보 움직임 정보, 공간 영역 비인접 블록 후보 움직임 정보, 기존 움직임 정보에 기반하여 조합을 수행하여 획득된 움직임 정보, 디폴드 움직임 정보 등이 포함된다. 물론, 후보 움직임 정보 리스트에는 HMVP(History based Motion Vector Prediction) 및/또는 MVAP 등 움직임 정보를 포함할 수 있으며, 이에 대해 한정하지 않는다.
MMVD 모드에 대해, MMVD 모드는 UMVE(Ultimate Motion Vector Expression) 모드로도 지칭할 수 있는바, 보통 다이렉트 모드의 후보 움직임 정보 리스트에 기반하여, 보통 다이렉트 모드의 후보 움직임 정보 리스트로부터 움직임 정보를 선택하여 기준 움직임 정보로 이용하고, 테이블 조회 방법을 통해 움직임 정보 차이를 획득한다. 기준 움직임 정보 및 움직임 정보 차이에 기반하여 최종의 움직임 정보를 획득하고, 당해 최종의 움직임 정보에 기반하여 현재 블록의 예측값을 생성한다. MMVD 모드/UMVE 모드는 이미 생성된 후보 움직임 기초 상에 변위를 수행함으로써, 더 나은 후보 움직임을 얻는다.
Affine 모드는, 보통 다이렉트 모드와 유사한 바, 마찬가지로 후보 움직임 정보 리스트로부터 하나의 움직임 정보를 선택하여, 당해 움직임 정보에 기반하여 현재 블록의 예측값을 생성한다. 보통 다이렉트 모드와 다른 점은, 보통 다이렉트 모드의 후보 움직임 정보 리스트의 움직임 정보는 2 매개변수의 평이 움직임 벡터이고, Affine 모드의 후보 움직임 정보 리스트의 움직임 정보는 4 매개변수의 Affine움직임 정보이거나, 또는 6 매개변수의 Affine움직임 정보, 또는 8 매개변수의 Affine움직임 정보이다.
SbTMVP 모드에 대해, 시간 영역 참조 픽처에서, 특정 블록의 움직임 정보를 직접 재사용할 수 있으며, 이 움직임 정보에 기반하여 현재 블록의 예측값을 생성하되, 당해 블록 내의 각 서브 블록의 움직임 정보는 상이할 수 있다.
CIIP 모드에 대해, 인트라 예측값 및 인터 예측값을 결합하여 현재 블록의 새로운 예측값을 획득하며, CIIP 모드도 인터 예측 필터링 모드로 지칭될 수 있는바, 즉 본문 중의 인터 예측 필터링은, 후속적으로 인터 예측 필터링으로 지칭한다.
인터 예측 필터링 중, 어떻게 인터 예측값을 획득할 것인가 하는 것은, 보통 다이렉트 모드의 움직임 정보에 기반하여 인터 예측값을 획득하는 것일 수도 있고, TPM 모드/GEO 모드의 움직임 정보에 기반하여 인터 예측값을 획득하는 것일 수도 있으며, SbTMVP 모드의 움직임 정보에 기반하여 인터 예측값을 획득하는 것일 수도 있으며, 이에 대해 한정하지 않는다. 인터 예측 필터링 중, 어떻게 인트라 예측값을 획득할 것인가 하는 것은, Plane 모드, DC 모드, 임의의 각도 모드 등을 사용하여 인트라 예측값을 획득하는 것일 수 있다.
TPM 모드에 대해, 하나의 블록을 두 개의 삼각 서브 블록(45도 및 135도 두 가지 삼각 서브 블록이 존재함)으로 분할하고, 이 두 개의 삼각 서브 블록은 상이한 단방향 움직임 정보를 구비하며, TPM 모드는 오직 예측 과정에만 사용되고, 후속의 변환, 양자화 과정에 영향주지 않으며, 여기에서의 단방향 움직임 정보도 직접 후보 움직임 정보 리스트로부터 획득된 것이다.
GEO 모드에 대해, GEO 모드와 TPM 모드는 유사하며, 오로지 분할 모양만 다르다. GEO 모드는 하나의 정사각형 블록을 임의의 모양의 두 개의 서브 블록(TPM의 두 개의 삼각 서브 블록의 모양 이외의 임의의 기타 모양), 예컨대 하나의 삼각 서브 블록, 하나의 오각형 서브 블록으로 분할하거나; 또는, 하나의 삼각 서브 블록, 하나의 사변형 서브 블록으로 분할하거나; 또는, 두 개의 사다리꼴 서브 블록 등으로 분할할 수 있으며, 이 분할 모양에 대해 제한하지 않는다. GEO 모드에 의해 분할된 이 두 개의 서브 블록은 상이한 단방향 움직임 정보를 구비한다.
플래그 코딩(flag coding): 비디오 코딩에는, 많은 모드가 존재한다. 특정 블록에 대해, 가능하게 이 중의 하나의 모드를 사용한다. 어느 모드를 사용할 것인지를 나타내기 위해, 각 블록은 인코딩에 대응하는 플래그를 통해 표기되어야 한다. 예컨대, 인코딩단에 대해, 인코딩단 결책을 통해, 당해 플래그의 값을 결정한 다음, 플래그의 값에 대해 인코딩을 수행하여 디코딩단에 전달한다. 디코딩단에 대해, 플래그의 값을 해석하는 것을 통해 대응 모드를 활성화할 것인지를 결정한다.
플래그의 코딩 과정에서, 상위 수준 문법(High-Level Syntax)을 통해 플래그의 코딩을 구현하고, 상위 수준 문법은 특정 모드의 활성화를 허락할 것인지를 나타내는 데에 사용될 수 있는바, 즉 상위 수준 문법을 통해 특정 모드의 활성화를 허락하거나, 또는 특정 모드의 활성화를 금지할 수 있다.
예시적으로, 상위 수준 문법은 시퀀스 매개변수 집합 상위 수준 문법, 또는 픽처 매개변수 집합 상위 수준 문법, 또는 슬라이스 헤더 상위 수준 문법, 또는 픽처 헤더 상위 수준 문법일 수 있으며, 이 상위 수준 문법에 대해 제한하지 않는다.
시퀀스 매개변수 집합(SPS, sequence parameter set)의 상위 수준 문법에 대해, 전체 비디오 시퀀스(즉 멀티픽처 비디오 이미지)에 특정 모드(툴/방법)의 활성화를 허락하는지를 결정하는 플래그가 존재한다. 예를 들어, 만약 플래그의 값이 A(예컨대 값1 등)이면, 비디오 시퀀스는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하거나; 또는, 만약 플래그의 값이 B(예컨대 값0 등)이면, 비디오 시퀀스는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하지 않는다.
이미지 매개변수 집합(PPS, picture parameter set)의 상위 수준 문법에 대해, 특정 픽처(예컨대 비디오 이미지) 내에 특정 모드(툴/방법)의 활성화를 허락하는 것을 결정하는 플래그가 존재한다. 만약 플래그의 값이 A이면, 비디오 이미지는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하고; 만약 플래그의 값이 B이면, 비디오 이미지는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하지 않는다.
픽처 헤더(picture header)의 상위 수준 문법에 대해, 특정 픽처 헤더에 특정 모드(툴/방법)의 활성화를 허락하는 플래그가 존재한다. 만약 플래그의 값이 A이면, 픽처 헤더는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하고; 만약 플래그의 값이 B이면, 픽처 헤더는 당해 플래그에 대응하는 모드를 활성화하는 것을 허락하지 않는다. 예시적으로, 픽처 헤더에 저장된 것은 단지 현재 픽처에 대한 공동 정보인 바, 예를 들어, 픽처에 복수 개의 슬라이스(slice)가 포함될 경우, 복수 개의 slice는 픽처 헤더 중의 정보를 함께 사용할 수 있다.
슬라이스 헤더(Slice header)의 상위 수준 문법에 대해, 특정 slice에 특정 모드(툴/방법)의 활성화를 허락하는 플래그가 존재한다. 만약 플래그의 값이 A이면, slice는 당해 플래그에 대응하는 모드의 활성화를 허락하고; 만약 플래그의 값이 B이면, slice는 당해 플래그에 대응하는 모드의 활성화를 허락하지 않는다. 예시적으로, 한 픽처는 하나의 slice 또는 복수 개의 slice를 포함할 수 있고, 슬라이스 헤더(Slice header)의 상위 수준 문법에 대해, 각 slice에 설정된 상위 수준 문법이다.
파티션 트리: 도 1b를 참조하면, QT(Quad-tree), BT(binary-tree), EQT(Extended Quad-tree) 및 비분할 등 네 가지 분할 유형을 사용하여 현재 블록에 대해 분할을 수행하기에, 파티션 트리 유형은 QT, BT, EQT 또는 비분할일 수 있다. 예시적으로, QT 분할은 현재 블록을 QT 분할하여 네 개의 사이즈가 동일한 서브 블록을 얻고, 각 서브 블록의 너비 및 높이는 모두 현재 블록의 절반이다.
BT 분할은 현재 블록을BT 분할하여, 두 개의 사이즈가 동일한 서브 블록을 얻고, BT 분할은 또한 수평 BT 분할(BT_HOR) 및 수직 BT 분할(BT_VER)로 나뉜다. 만약 수평 BT 분할이면, 현재 블록은 수평 분할에 의해 두 개의 서브 블록으로 분할되되, 각 서브 블록의 너비와 현재 블록의 너비는 일치하며, 각 서브 블록의 높이는 현재 블록의 높이의 절반이다. 만약 수직 BT 분할이면, 현재 블록은 수직 분할에 의해 두 개의 서브 블록으로 분할되되, 각 서브 블록의 너비는 현재 블록의 너비의 절반이다, 각 서브 블록의 높이와 현재 블록의 높이는 일치하다.
EQT 분할은 현재 블록을 QT 분할하여, 네 개의 서브 블록을 얻지만, 네 개의 서브 블록의 사이즈는 동일하지 않고, EQT 분할은 또한 수평 확장 QT 분할(EQT_HOR) 및 수직 확장 QT 분할(EQT_VER)로 나뉜다. 만약 EQT_HOR이면, 사이즈가 M*N인 현재 블록은 두 개의 M*(N/4) 및 두 개의 (M/2)*(N/2)의 서브 블록으로 분할되며; 만약 EQT_VER이면, 사이즈가 M*N인 현재 블록은 두 개의 (M/4)*N 및 두 개의 (M/2)*(N/2)의 서브 블록으로 분할된다.
하드웨어적 구현을 고려하여, 2*N 및 N*2의 색도 성분에 대해, 하드웨어 구현의 대가가 크므로, 분할 시, 색도 성분에 2*N 및 N*2의 블록이 나타나는 것을 피해야 한다. 하나의 블록이 한 가지 분할 유형(QT, BT 또는 EQT)을 사용하면 2*N 또는 N*2의 색도 성분이 생성되며, 이 블록의 휘도 성분(luma component)은 계속해서 분할되어, 여러 개의 휘도 서브 성분을 생성하되, 색도 성분은 비분할되어 하나의 색도 성분을 생성한다. 이러한 경우, 휘도 성분의 파티션 트리 유형과 색도 성분의 파티션 트리 유형은 일치하지 않는 바, 즉 휘도 성분의 파티션 트리 유형은 (QT, BT 또는 EQT)이고, 색도 성분의 파티션 트리 유형은 비분할이다.
비율 왜곡 최적화(Rate-Distortion Optimized): 인코딩 효율을 평가하는 데에는 두 가지 지표: 비트율 및 PSNR(Peak Signal to Noise Ratio)가 있는 바, 비트 스트림이 작을 수록 압축율이 더 크고, PSNR이 클수록 재구성 이미지 질량이 더 좋으며, 모드 선택 시, 판별 수학식은 실제로 양자에 대한 종합 평가이다. 예를 들어, 모드에 대응하는 대가: J(mode)＝D＋λ*R, 여기서, D는 Distortion(왜곡)을 나타내고, 일반적으로 SSE를 사용하여 가늠을 수행할 수 있으며, SSE는 재구성 이미지 블록과 소스 이미지의 차이값의 평균 제곱 합을 나타내고 ; λ는 라그랑주 승수이고, R은 당해 모드에서의 이미지 블록 인코딩에 필요한 실제 비트수이며, 인코딩 모드 정보, 움직임 정보, 잔차 등 필요한 비트 총 합을 포함한다. 모드 선택 시, 만약 RDO 원칙을 사용하여 인코딩 모드에 대해 비교하고 결책하면, 일반적으로 인코딩 성능의 최적화를 확보할 수 있다.
관련 기술에서, 인터 예측 필터링 및 증강 인터 예측 필터링 등 인터 예측을 구현하는 기술을 제출하여, 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역의 불연속 문제를 소거하였다. 하지만, 증강 인터 예측 필터링은 오직 휘도 성분에만 사용되고, 색도 성분에는 사용되지 않으므로, 색도 성분에는 여전히 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제가 존재하는 바, 인코딩 성능이 낮다. 이 외에, 하나의 상위 수준 문법을 통해 인터 예측 필터링 및 증강 인터 예측 필터링이 활성화되었는지를 나타내는 바, 즉, 하나의 상위 수준 문법을 통해 동시에 인터 예측 필터링 및 증강 인터 예측 필터링을 활성화하는 것을 제어하거나, 또는, 하나의 상위 수준 문법을 통해 동시에 인터 예측 필터링 및 증강 인터 예측 필터링을 비활성화하는 것을 제어하여, 인터 예측 필터링 및 증강 인터 예측 필터링 각각 따로따로의 제어를 구현할 수 없고, 보다 유연한 선택을 지원하지 못하여, 인코딩 성능의 저하를 초래한다.
상기 발견에 대해, 가능한 실시 방식에서, 인터 예측 필터링 및 증강 인터 예측 필터링을 제각기 제어, 즉 하나의 상위 수준 문법을 통해 인터 예측 필터링이 활성화(인터 예측 필터링을 활성화 또는 인터 예측 필터링을 비활성화)되었는지를 나타내고, 다른 하나의 상위 수준 문법을 통해 증강 인터 예측 필터링이 활성화(증강 인터 예측 필터링을 활성화 또는 증강 인터 예측 필터링을 비활성화)되었는지를 나타냄으로써, 보다 유연한 선택을 지원하고 인코딩 성능을 향상시킨다.
다른 가능한 실시 방식에서, 증강 인터 예측 필터링을 이용하여 색도 성분에 대해 처리를 수행, 즉, 증강 인터 예측 필터링을 이용하여 휘도 성분과 색도 성분에 대해 처리를 수행함으로써, 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제를 제거, 예컨대 색도 성분의 공간 영역 불연속성 문제를 제거하고, 인코딩 성능을 향상시킨다.
다른 가능한 실시 방식에서, 인터 예측 필터링 및 증강 인터 예측 필터링을 제각기 제어, 즉 하나의 상위 수준 문법을 통해 인터 예측 필터링이 활성화(예컨데 인터 예측 필터링을 활성화 또는 인터 예측 필터링을 비활성화)되었는지를 나타내고, 다른 하나의 상위 수준 문법을 통해 증강 인터 예측 필터링이 활성화(예컨데 증강 인터 예측 필터링을 활성화 또는 증강 인터 예측 필터링을 비활성화)되었는지를 나타냄으로써, 보다 유연한 선택을 지원하고 인코딩 성능을 향상시킨다. 나아가, 증강 인터 예측 필터링을 활성화할 경우, 증강 인터 예측 필터링을 이용하여 색도 성분에 대해 처리를 수행, 즉, 증강 인터 예측 필터링을 이용하여 휘도 성분과 색도 성분에 대해 처리를 수행함으로써, 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제를 제거, 예컨대 색도 성분의 공간 영역 불연속성 문제를 제거하고, 인코딩 성능을 향상시킨다.
예시적으로, 본 출원의 실시예에서의 인터 예측 필터링 및 증강 인터 예측 필터링은 인터 예측 과정에 대한 필터링 기술일 수 있으나, 도 1a 중의 루프 필터링(예컨대 디블록킹 필터링, SAO필터링, ALF필터링, CCALF필터링 등)은 아니다. 인터 예측 필터링은 인터 예측 과정에서, 인터 예측 필터링 기술을 이용하여 인터 예측값에 대해 필터링 처리를 수행하는 것을 가리키는 바, 인터 예측 필터링은 연합 다이렉트 모드와 인트라 예측 모드(UDIP, Unite Direct and Intra Mode Prediction)로 지칭할 수도 있다. 증강 인터 예측 필터링은 인터 예측 과정에서, 증강 인터 예측 필터링 기술을 이용하여 인터 예측값에 대해 필터링 처리를 수행하는 것을 가리키는 바, 증강 인터 예측 필터링은 증강 연합 다이렉트 모드와 인트라 예측 모드(EUDIP, Enhance Unite Direct and Intra Mode Prediction)로 지칭할 수도 있다.
이하 몇 개의 구체적인 실시예와 결부하여, 본 출원의 실시예의 디코딩 방법, 인코딩 방법에 대해 설명한다.
실시예 1: 도 2a는 디코딩 방법의 흐름 모식도를 도시하는 바, 당해 방법은 디코딩단에 응용될 수 있으며 아래와 같은 단계를 포함한다:
단계 211, 만약 인터 예측 필터링 이네이블 플래그가 현재 만약 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석한다.
예시적으로, 만약 인터 예측 필터링 이네이블 플래그가 현재 만약 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석한다.
예시적으로, 만약 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 단계 212를 수행하고; 만약 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 단계 213를 수행하며; 만약 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 단계 214를 수행한다.
이에 기반하여, 단계 211전에, 먼저 비트스트림 데이터(즉 상위 수준 문법의 비트스트림 데이터임)로부터 인터 예측 필터링 이네이블 플래그를 해석할 수 있는바, 인터 예측 필터링 이네이블 플래그는 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하거나, 또는, 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는 것을 나타낸다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 현재 블록이 인터 예측 필터링 조건을 충족시키는지를 판단한다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키지 않으면, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링도 수행하지 않고, 증강 인터 프레임 예측 필터링도 수행하지 않는다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하고, 인터 예측 필터링 아이디에 기반하여 현재 블록의 필터링 유형을 결정하고 또한 상응한 처리를 수행한다.
예시적으로, 현재 블록이 인터 예측 필터링 조건을 충족시키면: 만약 현재 블록의 인터 예측 모드가 다이렉트 모드, 및/또는, 현재 블록이 사이즈 제한 조건을 충족시키면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정한다.
예시적으로, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석한 후, 또한 당해 인터 예측 필터링 아이디에 기반하여 현재 블록의 필터링 유형을 결정할 수 있다. 예를 들어, 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 인터 예측 필터링 아이디가 제1 값일 경우, 당해 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 필터링하지 않는 것인 것을 가리키는 바, 즉 현재 블록의 필터링 유형이 필터링하지 않는 것으로 결정한다. 인터 예측 필터링 아이디가 제2 값일 경우, 당해 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키는 바, 즉 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 결정한다. 인터 예측 필터링 아이디가 제3 값일 경우, 당해 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리키는 바, 즉 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 결정한다.
제1 값, 제2 값 및 제3 값은 경험에 따라 결정될 수 있으며, 이에 대해 한정하지 않는다, 예를 들어, 제1 값은 0, 제2 값은 10, 제3 값은 11일 수 있으며, 물론, 상술한 값은 단지 예시일 뿐이다.
단계 212, 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는다.
예시적으로, 현재 블록에 대해 인터 예측 필터링 처리를 수행할 경우, 현재 블록의 인터 예측값 및 현재 블록의 인트라 예측값을 획득할 수 있으며, 당해 인터 예측값 및 당해 인트라 예측값에 기반하여 현재 블록의 타깃 예측값을 결정할 수 있다.
가능한 실시 방식에서, 현재 블록은 휘도 성분과 색도 성분을 포함하되, 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여, 휘도 성분의 타깃 예측값을 얻거나; 또는, 색도 성분에 대해 인터 예측 필터링 처리를 수행하여, 색도 성분의 타깃 예측값을 얻을 수 있거나 ; 또는, 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 색도 성분에 대해 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있다.
단계 213, 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는다.
예시적으로, 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 현재 블록의 인터 예측값 및 현재 블록 외부 주변의 이미 재구성된 픽셀의 재구성값(예컨대 현재 블록 외부 좌측 한 열의 재구성값, 및/또는, 상측 한 행의 재구성값)을 획득하고, 당해 인터 예측값 및 당해 재구성값에 기반하여 현재 블록의 타깃 예측값을 결정할 수 있다.
가능한 실시 방식에서, 현재 블록은 휘도 성분과 색도 성분을 포함하고, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻거나; 또는, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻거나; 또는, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있다.
예시적으로, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계는: 색도 성분의 인터 예측값 및 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고, 색도 성분의 인터 예측값 및 당해 색도 재구성값에 기반하여 색도 성분의 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다.
예시적으로, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻는 단계는: 휘도 성분의 인터 예측값 및 휘도 성분 외부 주변의 이미 재구성된 픽셀의 휘도 재구성값을 획득하고, 휘도 성분의 인터 예측값 및 당해 휘도 재구성값에 기반하여 휘도 성분의 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다
가능한 실시 방식에서, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계는: 만약 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계를 포함할 수 있다. 나아가, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것을 포함할 수 있으며 이에 한정되지 않는다.
단계 214, 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 타깃 예측값으로 결정한다.
예시적으로, 현재 블록에 대해 필터링 처리를 수행하지 않을 경우, 현재 블록의 인터 예측값을 획득하고, 현재 블록의 인터 예측값을 현재 블록의 타깃 예측값으로 결정하되, 인터 예측값에 대해 필터링 처리할 필요가 없다.
실시예 2: 도 2b를 참조하면, 이는 인코딩 방법의 흐름 모식도로서, 인코딩단에 응용될 수 있으며, 당해 방법은:
단계 221, 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 필터링 유형에 기반하여 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩한다.
예시적으로, 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 필터링 유형에 기반하여 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩한다.
예시적으로, 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 당해 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키거나; 또는, 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 당해 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키거나; 또는, 만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 당해 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 필터링하지 않는 것임을 가리킨다.
이에 기반하여, 단계 221전에, 인코딩단은 먼저 비트스트림 데이터(즉 상위 수준 문법의 비트스트림 데이터)에서 인터 예측 필터링 이네이블 플래그를 인코딩할 수 있으며, 인터 예측 필터링 이네이블 플래그는 현재 블록이 인터 예측 필터링을 사용하는 것을 허락, 또는, 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는 것을 나타낸다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 현재 블록이 인터 예측 필터링 조건을 충족시키는지를 판단한다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키지 않으면, 현재 블록의 비트스트림 데이터에서 현재 블록의 인터 예측 필터링 아이디를 인코딩하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링을 수행하지 않고, 현재 블록에 대해 증강 인터 예측 필터링도 수행하지 않는다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 현재 블록의 비트스트림 데이터에서 현재 블록의 인터 예측 필터링 아이디를 인코딩, 예컨대, 현재 블록의 필터링 유형에 기반하여 현재 블록의 비트 스트림에서 인터 예측 필터링 아이디를 인코딩하는 단계는.
예시적으로, 현재 블록이 인터 예측 필터링 조건을 충족시킬 경우, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드이거나, 및/또는, 현재 블록이 사이즈 제한 조건을 충족시키면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다.
예시적으로, 현재 블록의 필터링 유형에 기반하여 현재 블록의 비트 스트림에서 인터 예측 필터링 아이디를 인코딩하는 단계는, 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 인코딩단은 현재 블록의 필터링 유형이 필터링하지 않는 것일 경우, 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 제1 값으로 인코딩하고, 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 필터링하지 않는 것을 가리키는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다. 현재 블록의 필터링 유형이 인터 예측 필터링일 경우, 인코딩단은 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 제2 값으로 인코딩하고, 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리킨다. 현재 블록의 필터링 유형이 증강 인터 예측 필터링일 경우, 인코딩단은 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 제3 값으로 인코딩하고, 인터 예측 필터링 아이디가 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킨다. 제1 값, 제2 값 및 제3 값은 경험에 의해 설정할 수 있으며, 이에 대해 한정하지 않는 바, 예를 들어, 제1 값은 0, 제2 값은 10, 제3 값은 11일 수 있다.
가능한 실시 방식에서, 현재 블록의 필터링 유형에 기반하여 현재 블록의 비트 스트림에서 인코딩 인터 예측 필터링 아이디를 인코딩하는 단계 전에, 이하의 방식을 사용하여 현재 블록의 필터링 유형을 결정한다: 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 제1 타깃 예측값을 얻고; 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 제2 타깃 예측값을 얻고; 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 제3 타깃 예측값으로 결정할 수 있다. 나아가, 제1 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 제2 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 제3 타깃 예측값에 대응하는 비율 왜곡 코스트 값에 기반하여 현재 블록의 필터링 유형을 결정할 수 있다.
예를 들어, 만약 제1 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 결정할 수 있다. 만약 제2 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 결정할 수 있다. 만약 제3 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 현재 블록의 필터링 유형이 필터링하지 않는 것으로 결정할 수 있다.
예시적으로, 현재 블록에 대해 인터 예측 필터링 처리를 수행할 경우, 현재 블록의 인터 예측값 및 현재 블록의 인트라 예측값을 획득할 수 있으며, 당해 인터 예측값 및 당해 인트라 예측값에 기반하여 현재 블록의 제1 타깃 예측값을 결정할 수 있다.
예를 들어, 현재 블록은 휘도 성분과 색도 성분을 포함하고, 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여 휘도 성분의 제1 타깃 예측값을 얻거나; 또는, 색도 성분에 대해 인터 예측 필터링 처리를 수행하여 색도 성분의 제1 타깃 예측값을 얻거나; 또는, 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여 휘도 성분의 제1 타깃 예측값을 얻고, 색도 성분에 대해 인터 예측 필터링 처리를 수행하여 색도 성분의 제1 타깃 예측값을 얻을 수 있다.
예시적으로, 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 현재 블록의 인터 예측값 및 현재 블록 외부 주변의 이미 재구성된 픽셀의 재구성값(예컨대 현재 블록 외부 좌측 한 열의 재구성값, 및/또는, 상측 한 행의 재구성값)을 획득하고, 당해 인터 예측값 및 당해 재구성값에 기반하여 현재 블록의 제2 타깃 예측값을 결정할 수 있다.
예를 들어, 현재 블록은 휘도 성분과 색도 성분을 포함하고, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻거나; 또는, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻거나; 또는, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻고, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻을 수 있다.
색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻는 단계는, 색도 성분의 인터 예측값 및 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고, 색도 성분의 인터 예측값 및 당해 색도 재구성값에 기반하여 색도 성분의 제2 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다.
휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻은 단계는, 휘도 성분의 인터 예측값 및 휘도 성분 외부 주변의 이미 재구성된 픽셀의 휘도 재구성값을 획득하고, 휘도 성분의 인터 예측값 및 당해 휘도 재구성값에 기반하여 휘도 성분의 제2 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다.
색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계는 이하의 방식: 만약 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻는 방식을 포함할 수 있으며 이에 대해 한정하지 않는다. 나아가, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것을 포함할 수 있으며 이에 대해 한정하지 않는다.
예시적으로, 현재 블록에 대해 필터링 처리를 수행하지 않을 경우, 현재 블록의 인터 예측값을 획득할 수 있으며, 현재 블록의 인터 예측값을 현재 블록의 제3 타깃 예측값으로 결정하고, 인터 예측값에 대해 필터링 처리를 수행할 필요가 없다.
단계 222, 디코딩단에 현재 블록에 대한 비트스트림 데이터를 전송하되, 당해 비트스트림 데이터에는 인터 예측 필터링 아이디가 포함되고, 당해 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 인터 예측 필터링, 또는, 현재 블록의 필터링 유형이 증강 인터 예측 필터링, 또는, 현재 블록의 필터링 유형이 필터링하지 않는 것을 가리킨다.
실시예 3: 도 2c를 참조하면, 이는 인코딩/디코딩 방법의 흐름 모식도인 바, 인코딩단 또는 디코딩단에 응용될 수 있으며, 인코딩단은 당해 방법을 통해 인코딩 프로세스를 구현하고, 디코딩단은 당해 방법을 통해 디코딩 프로세스를 구현할 수 있는바, 당해 방법은 아래와 같은 단계를 포함할 수 있다:
단계 231, 만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는다.
단계 232, 색도 성분의 타깃 예측값에 기반하여 현재 블록의 타깃 예측값을 얻는다.
예시적으로, 현재 블록은 휘도 성분과 색도 성분을 포함하고, 만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻고, 색도 성분의 타깃 예측값에 기반하여 현재 블록의 타깃 예측값을 결정한다. 또는, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻고, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 색도 성분의 타깃 예측값 및 휘도 성분의 타깃 예측값에 기반하여 현재 블록의 타깃 예측값을 결정한다.
예시적으로, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계는: 색도 성분의 인터 예측값 및 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고, 색도 성분의 인터 예측값 및 당해 색도 재구성값에 기반하여 색도 성분의 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 대해 한정하지 않는다.
예시적으로, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻는 단계는: 휘도 성분의 인터 예측값 및 휘도 성분 외부 주변의 이미 재구성된 픽셀의 휘도 재구성값을 획득하고, 휘도 성분의 인터 예측값 및 당해 휘도 재구성값에 기반하여 휘도 성분의 타깃 예측값을 결정하는 단계를 포함할 수 있으며 이에 한정되지 않는다.
예시적으로, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계는: 만약 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻는 단계를 포함할 수 있으나 이에 한정되지 않는다. 나아가, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것을 포함할 수 있으며 이에 한정되지 않는다.
상술한 해결 방안에 기초하여, 본 출원의 실시예에서, 증강 인터 예측 필터링을 이용하여 색도 성분에 대해 처리를 수행, 즉 증강 인터 예측 필터링를 이용하여 휘도 성분과 색도 성분에 대해 처리를 수행함으로써, 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제를 제거하고, 색도 성분의 공간 영역 불연속성 문제를 제거하고, 인코딩 성능을 향상시킬 수 있다.
실시예 4: 인코딩단은 상위 수준 문법을 먼저 획득할 수 있는바, 당해 상위 수준 문법에는 인터 예측 필터링 이네이블 플래그가 포함될 수 있으며, 이 획득 방식에 대해 제한하지 않으며, 인터 예측 필터링 이네이블 플래그를 얻을 수만 있으면 된다. 인터 예측 필터링 이네이블 플래그는 시퀀스 매개변수 집합 플래그, 또는, 이미지 매개변수 집합 플래그, 또는, 슬라이스 헤더 플래그, 또는, 픽처 헤더 플래그일 수 있으며, 이 플래그의 상위 수준 문법 유형에 대해 제한하지 않는다.
인터 예측 필터링 이네이블 플래그는 인터 예측 필터링를 사용하는 것을 허락하거나, 또는, 인터 예측 필터링을 사용하는 것을 허락하지 않는다. 예를 들어, 인터 예측 필터링 이네이블 플래그의 값이 A(예컨대 수치 1)일 경우, 인터 예측 필터링의 사용을 허락하며, 인터 예측 필터링 이네이블 플래그의 값이 B(예컨대 수치 0)일 경우, 인터 예측 필터링의 사용을 허락하지 않는다.
예시적으로, 만약 인터 예측 필터링 이네이블 플래그가 인터 예측 필터링을 사용하는 것을 허락하면, 인코딩단/디코딩단이 현재 블록에 대해 처리를 수행할 때, 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하는 것을 결정한다. 만약 인터 예측 필터링 이네이블 플래그가 인터 예측 필터링을 사용하는 것을 허락하지 않으면, 현재 블록에 대해 처리를 수행할 때, 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는 것을 결정한다.
상술한 바와 같이, 인코딩단/디코딩단이 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하거나, 또는 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는 것을 알 수 있다.
상술한 과정에 기초하여, 도 3을 참조하면, 본 출원의 실시예에서 제출한 인코딩/디코딩 방법은 아래 내용을 포함할 수 있다:
단계 301, 인코딩단이 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하는지를 판단한다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않으면, 현재 블록의 비트스트림 데이터에서 현재 블록의 인터 예측 필터링 아이디를 인코딩하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링을 수행하지 않고, 현재 블록에 대해 증강 인터 예측 필터링도 수행하지 않는다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 단계 302를 수행한다.
단계 302, 인코딩단이 현재 블록이 인터 예측 필터링 조건을 충족시키는지 여부를 판단한다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키지 않으면, 현재 블록의 비트스트림 데이터에서 현재 블록의 인터 예측 필터링 아이디를 인코딩하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링을 수행하지 않고, 현재 블록에 대해 증강 인터 예측 필터링도 수행하지 않는다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 단계 303을 수행한다.
현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하는 과정은, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드이거나, 및/또는, 현재 블록이 사이즈 제한 조건을 충족시키면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하는 것을 포함할 수 있으며 이에 대해 한정하지 않는다.
가능한 실시 방식에서, 인터 예측 모드는 일반 인터 모드, 스킵 모드 및 다이렉트 모드 등을 포함할 수 있으며 이에 한정되지 않고, 이 기초 상에, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드이면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하고, 아니면, 현재 블록이 인터 예측 필터링 조건을 충족시키지 않는 것을 결정할 수 있다. 또는, 만약 현재 블록의 인터 예측 모드가 일반 인터 모드도 아니고, 스킵 모드도 아닐 경우, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하고, 만약 현재 블록의 인터 예측 모드가 일반 인터 모드 또는 스킵 모드일 경우, 현재 블록이 인터 예측 필터링 조건을 충족시키지 않는 것을 결정할 수 있다.
예시적으로, 다이렉트 모드는 보통 다이렉트 모드, Affine 모드, SbTMVP 모드, UMVE 모드, 인터 예측 필터링 모드, TPM 모드, GEO 모드 등을 포함할 수 있으며 이에 한정되지 않는다. 이 기초 상에, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드 하의 인터 예측 필터링 모드이면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정할 수 있고, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드 하의 인터 예측 필터링 모드가 아니면, 현재 블록이 인터 예측 필터링 조건을 충족시키지 않는 것으로 결정할 수 있다. 또는, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드 하의 UMVE 모드도 아니고, 다이렉트 모드 하의 Affine 모드도 아니면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정할 수 있고, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드 하의 UMVE 모드 또는 Affine 모드이면, 현재 블록이 인터 예측 필터링 조건을 충족시키지 않는 것을 결정할 수 있다.
다른 가능한 실시 방식에서, 만약 현재 블록이 사이즈 제한 조건을 충족시키면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정하고, 만약 현재 블록이 사이즈 제한 조건을 충족시키지 않으면, 현재 블록이 인터 예측 필터링 조건을 충족시키지 않는 것을 결정한다.
현재 블록이 사이즈 제한 조건을 충족시키는 것은, 현재 블록의 너비가 제1 수치보다 작거나 같고(경험에 따라 설정할 수 있으며, 이에 대해 한정하지 않는 바, 예컨대 64, 128 등임), 현재 블록의 높이가 제2 수치보다 작거나 같고(경험에 따라 설정할 수 있으며, 이에 대해 한정하지 않는 바, 예컨대 64, 128 등임), 현재 블록의 면적이 제3 수치보다 크거나 같은(경험에 따라 설정할 수 있으며, 이에 대해 한정하지 않는 바, 예컨대 64, 128 등임) 것을 포함할 수 있으며 이에 한정되지 않는다. 물론, 상술한 것은 단지 예시일 뿐, 이에 대해 한정하지 않는다.
예를 들어, 만약 현재 블록의 너비가 64보다 작거나 같고, 현재 블록의 높이가 64보다 작거나 같고, 또한 현재 블록의 면적(즉 너비*높이)이 64보다 크거나 같으면, 현재 블록이 사이즈 제한 조건을 충족시키는 것을 결정할 수 있다.
다른 가능한 실시 방식에서, 만약 현재 블록의 인터 예측 모드가 다이렉트 모드(예컨대 다이렉트 모드 하의 인터 예측 필터링 모드)이고, 또한 현재 블록이 사이즈 제한 조건을 충족시키면, 현재 블록이 인터 예측 필터링 조건을 충족시키는 것을 결정한다.
단계 303, 인코딩단이 현재 블록의 필터링 유형을 결정한다. 현재 블록의 필터링 유형이 필터링하지 않는 것이거나, 또는, 현재 블록의 필터링 유형이 인터 예측 필터링이거나, 또는, 현재 블록의 필터링 유형이 증강 인터 예측 필터링일 수 있다.
현재 블록의 필터링 유형을 결정하는 구체적인 방식은, 상술한 실시예 2를 참조할 수 있으며, 여기서 더 이상 설명하지 않는다.
예시적으로, 현재 블록은 휘도 성분과 색도 성분을 포함할 수 있고, 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻거나; 또는, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻거나; 또는, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻고, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻을 수 있다.
예시적으로, 색도 성분에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 만약 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분에 대해 증강 인터 예측 필터링 처리를 수행할 수 있고, 만약 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키지 못하면, 색도 성분에 대해 증강 인터 예측 필터링 처리를 수행하는 것을 금지한다. 나아가, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것을 포함할 수 있으며 이에 대해 한정하지 않는다.
가능한 실시 방식에서, 만약 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하면, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는 것으로 결정하고, 만약 색도 성분과 휘도 성분이 상이한 파티션 트리 유형에 속하면, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키지 않는 것으로 결정한다.
예시적으로, 만약 적어도 이하의 하나의 조건을 충족시키면, 색도 성분과 휘도 성분이 상이한 파티션 트리 유형에 속하는 것으로 결정하고, 아니면, 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것으로 결정한다:
현재 블록이 QT 파티션 트리 유형이고, 현재 블록의 너비 또는 높이가 기설정된 수치 A(예컨대 8)와 같다;
현재 블록이 BT_VER 파티션 트리 유형이고, 현재 블록의 너비가 기설정된 수치 B(예컨대 8)와 같다;
현재 블록이 BT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 기설정된 수치 C(예컨대 8)와 같다;
현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 너비가 기설정된 수치 D(예컨대 16)와 같다;
현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 높이가 기설정된 수치 E(예컨대 8)와 같다;
현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 기설정된 수치 F(예컨대 16)와 같다;
현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 너비가 기설정된 수치 G(예컨대 8)와 같다.
단계 304, 인코딩단은 인터 예측 필터링 이네이블 플래그 및 현재 블록의 필터링 유형에 기반하여 현재 블록의 인터 예측 필터링 아이디를 결정한다. 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키고; 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리키며; 만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 인터 예측 필터링 아이디는 현재 블록의 필터링 유형이 필터링하지 않는 것임을 가리킨다.
단계 305, 인코딩단은 현재 블록의 비트스트림 데이터에서 당해 인터 예측 필터링 아이디를 인코딩한다.
예시적으로, 인터 예측 필터링 아이디의 결정 및 인코딩 과정은, 상술한 실시예 2를 참조하고, 여기서 더 이상 설명하지 않는다.
단계 306, 인코딩단은 현재 블록의 비트스트림 데이터를 디코딩단에 전송한다.
예시적으로, 현재 블록의 비트스트림 데이터에, 인터 예측 필터링 아이디를 포함할 뿐만 아니라, 기타 현재 블록과 관련된 내용도 포함할 수 있는바, 예컨대 움직임 정보와 관련된 내용, 재구성값과 관련된 내용 등을 포함할 수 있으며, 이에 대해 한정하지 않는다.
예시적으로, 상술한 과정은 인코딩단 흐름을 소개하였고, 디코딩단 흐름에 대해, 이하 내용을 더 포함할 수 있다(그림에 미도시):
단계 307, 디코딩단이 비트스트림 데이터를 수신한 후, 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하는지를 판단한다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않으면, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링을 수행하지 않고, 현재 블록에 대해 증강 인터 예측 필터링도 수행하지 않는다.
만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 단계 308를 수행한다.
단계 308, 디코딩단이 현재 블록이 인터 예측 필터링 조건을 충족시키는지 여부를 판단한다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키지 않으면, 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하는 것을 금지, 즉 현재 블록에 대해 인터 예측 필터링을 수행하지 않고, 현재 블록에 대해 증강 인터 예측 필터링도 수행하지 않는다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 단계 309를 수행한다.
단계 309, 디코딩단은 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석한다.
단계 310, 디코딩단은 당해 인터 예측 필터링 이네이블 플래그 및 당해 인터 예측 필터링 아이디에 기반하여 현재 블록의 필터링 유형을 결정한다.
예시적으로, 필터링 유형의 결정 과정, 상술한 실시예 1을 참조할 수 있으며, 여기서 더 이상 설명하지 않는다.
예시적으로, 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 단계 311을 수행하고; 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 단계 312를 수행하고; 만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 단계 313을 수행한다.
단계 311, 디코딩단이 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는다.
단계 312, 디코딩단이 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는다.
가능한 실시 방식에서, 현재 블록은 휘도 성분과 색도 성분을 포함하고, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻을 수 있거나; 또는, 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있거나; 또는, 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 또한 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있거나.
단계 313, 디코딩단이 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 타깃 예측값으로 결정한다.
단계 311, 또는 단계 312, 또는 단계 313에 기초하여, 디코딩단은 현재 블록의 타깃 예측값을 얻을 수 있고, 현재 블록의 타깃 예측값에 기초하여 현재 블록의 재구성값을 결정할 수 있으며, 이 결정 과정에 대해 제한하지 않는다.
이 외에, 상술한 기술 수단은 증강 인터 예측 필터링을 이용하여 색도 성분에 대해 처리를 수행, 즉 증강 인터 예측 필터링를 이용하여 휘도 성분과 색도 성분에 대해 처리를 수행함으로써, 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제를 제거, 예컨대 색도 성분의 공간 영역 불연속성 문제를 제거하고, 인코딩 성능을 향상시킬 수 있다.
본 출원의 실시예에서, 증강 인터 예측 필터링은 색도 성분을 지원할 수 있는바, 예를 들어, 증강 인터 예측 필터링 조건을 충족시키는 색도 성분에 대해, 증강 인터 예측 필터링 기술을 이용하여 색도 성분에 대해 처리를 수행한다.
예시적으로, 인코딩단에 대해, 만약 인터 예측 필터링 이네이블 플래그(인터 예측 필터링 이네이블 플래그로도 지칭하며, 후속적으로 interpf_enable_flag로 표기하거나, 또는 udip_enable_flag로도 표기할 수 있음)가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 또한, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 인코딩단은 RDO의 방식을 통해, 필터링하지 않는 것, 인터 예측 필터링 및 증강 인터 예측 필터링 중 하나의 필터링 유형을 선택하고, 또한 당해 필터링 유형에 대응하는 인터 예측 필터링 아이디를 인코딩, 즉 비트스트림 데이터에 의해 당해 인터 예측 필터링 아이디를 운반한다.
예시적으로, 디코딩단에 대해, 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하고, 또한, 현재 블록이 인터 예측 필터링 조건을 충족시키면, 디코딩단은 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하고, 당해 인터 예측 필터링 아이디에 기반하여 현재 블록의 필터링 유형을 결정한다. 만약 필터링 유형이 인터 예측 필터링이면, 디코딩단은 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 타깃 예측값을 얻는다. 만약 필터링 유형이 증강 인터 예측 필터링이면, 디코딩단은 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 타깃 예측값을 얻는다. 만약 필터링 유형이 필터링하지 않는 것이면, 디코딩단은 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 타깃 예측값으로 결정한다.
실시예 5: 증강 인터 예측 필터링은 색도 성분을 지원하는 바, 예를 들어, 모든 색도 성분에 대해 증강 인터 예측 필터링을 수행할 수도 있고, 증강 인터 예측 필터링 조건을 충족시키는 색도 성분에 대해 증강 인터 예측 필터링을 수행할 수도 있다.
실시예 5에서, 인코딩단은 인터 예측 필터링 이네이블 플래그(interpf_enable_flag)를 획득할 수 있다. 인코딩단은 비트스트림 데이터를 통해 인터 예측 필터링 이네이블 플래그를 디코딩단에 전송하여, 디코딩단이 인터 예측 필터링 이네이블 플래그를 획득하도록 한다. 이 기초 상에, 인터 예측 필터링 이네이블 플래그를 통해 인터 예측 필터링 및 증강 인터 예측 필터링이 활성화되었는지를 제어할 수 있다. 예를 들어, 인터 예측 필터링 이네이블 플래그의 값이 A(예컨대 1)인 경우, 인터 예측 필터링 및 증강 인터 예측 필터링을 활성화하는 것을 제어할 수 있고, 인터 예측 필터링 이네이블 플래그의 값이 B(예컨대 0)인 경우, 인터 예측 필터링 및 증강 인터 예측 필터링을 비활성화하는 것을 제어할 수 있다. 후속의 실시예에서, 값 A가 1이고, 값 B가 0인 것을 예로 들어 설명한다.
인코딩단에 대해, 먼저 interpf_enable_flag의 값을 결정하여, 만약 interpf_enable_flag의 값이 1이면, 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락한다. 만약 interpf_enable_flag의 값이 0이면, 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락하지 않는다. 나아가, 만약 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락하면, 인코딩단은 현재 블록이 인터 예측 필터링 조건을 충족시키는지 여부를 판단할 수 있다.
만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 인코딩단은 RDO의 방식을 통해, 필터링하지 않는 것, 인터 예측 필터링 및 증강 인터 예측 필터링 중 하나의 필터링 유형을 선택하여, 당해 필터링 유형을 현재 블록의 필터링 유형으로 이용하고, 당해 필터링 유형에 대응하는 인터 예측 필터링 아이디를 인코딩하는 바, 즉 비트스트림 데이터에 의해 당해 인터 예측 필터링 아이디를 운반한다.
예시적으로, 인코딩단은 RDO의 방식을 통해, 필터링하지 않는 것, 인터 예측 필터링 및 증강 인터 예측 필터링 중 하나의 필터링 유형을 선택할 경우, 이하의 방식을 사용할 수 있다: 인코딩단이 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 제1 타깃 예측값을 얻고; 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 제2 타깃 예측값을 얻으며; 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 제3 타깃 예측값으로 결정한다. 만약 제1 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 필터링 유형을 인터 예측 필터링으로 결정한다. 만약 제2 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 필터링 유형을 증강 인터 예측 필터링으로 결정한다. 만약 제3 타깃 예측값에 대응하는 비율 왜곡 코스트 값이 최소 비율 왜곡 코스트 값이면, 필터링 유형을 필터링하지 않는 것으로 결정한다.
인코딩단이 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 제1 타깃 예측값을 얻을 경우, 인코딩단은 현재 블록의 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여 휘도 성분의 제1 타깃 예측값을 얻고, 현재 블록의 색도 성분에 대해 인터 예측 필터링 처리를 수행하여 색도 성분의 제1 타깃 예측값을 얻을 수 있다.
인코딩단이 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 제2 타깃 예측값을 얻을 경우, 인코딩단은 현재 블록의 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 제2 타깃 예측값을 얻고, 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻을 수 있다.
인코딩단이 현재 블록의 색도 성분에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 인코딩단은 먼저 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는지를 판단하여, 만약 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 인코딩단은 당해 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 제2 타깃 예측값을 얻을 수 있다.
예시적으로, 인코딩단이 당해 필터링 유형에 대응하는 인터 예측 필터링 아이디를 인코딩할 경우, 테이블 1을 참조할 수 있으며, 만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 인코딩 인터 예측 필터링 아이디의 첫 번째 비트는 0이고. 만약 현재 블록의 필터링 유형이 인터 예측 필터링 또는 증강 인터 예측 필터링이면, 인코딩 인터 예측 필터링 아이디의 첫 번째 비트는 1이며, 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 인코딩 인터 예측 필터링 아이디의 두 번째 비트는 0이고, 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 인코딩 인터 예측 필터링 아이디의 두 번째 비트는 1이다.
Figure pct00001
테이블 1에서 알수 있다시피, 만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 인터 예측 필터링 아이디는 0이고, "필터링하지 않는 것”에 대응하는 필터링 방식 인덱스는0이다. 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 인터 예측 필터링 아이디는 10이고, "인터 예측 필터링”에 대응하는 필터링 방식 인덱스는 1이다. 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 인터 예측 필터링 아이디는 11이고, "증강 인터 예측 필터링”에 대응하는 필터링 방식 인덱스는 2이다.
디코딩단에 대해, 비트스트림 데이터로부터 interpf_enable_flag의 값을 해석하고, 만약 interpf_enable_flag의 값이 1이면, 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락한다. 만약 interpf_enable_flag의 값이0이면, 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락하지 않는다. 나아가, 만약 현재 블록이 인터 예측 필터링 및 증강 인터 예측 필터링을 사용하는 것을 허락하면, 디코딩단은 현재 블록이 인터 예측 필터링 조건을 충족시키는지 여부를 판단한다. 만약 현재 블록이 인터 예측 필터링 조건을 충족시키면, 디코딩단은 현재 블록의 비트스트림 데이터로부터 현재 블록의 인터 예측 필터링 아이디를 해석하고, 인터 예측 필터링 아이디에 기반하여 현재 블록의 필터링 유형을 결정할 수 있다.
예를 들어, 테이블 1을 참조하면, 디코딩단은 인터 예측 필터링 아이디의 첫 번째 비트를 인코딩하여, 만약 첫 번째 비트가 0, 즉 인터 예측 필터링 아이디가 0이면, 현재 블록의 필터링 유형이 필터링하지 않는 것으로 결정하고, 만약 첫 번째 비트가 0(첫 번째 비트가 1)이 아니면, 인터 예측 필터링 아이디의 두 번째 비트를 디코딩하고, 만약 두 번째 비트가 0, 즉 인터 예측 필터링 아이디가 10이면, 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 결정하고, 만약 두 번째 비트가 0(두 번째 비트가 1)이 아니면, 즉 인터 예측 필터링 아이디가 11이면, 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 결정한다.
테이블 1에서 알수 있다시피, 만약 인터 예측 필터링 아이디가 0이면, 필터링 방식 인덱스를 0으로 결정하고, 당해 필터링 방식 인덱스 0에 대응하는 필터링 유형을 필터링하지 않는 것으로 결정한다. 만약 인터 예측 필터링 아이디가 10이면, 필터링 방식 인덱스를 1로 결정하고, 당해 필터링 방식 인덱스1에 대응하는 필터링 유형을 인터 예측 필터링으로 결정한다. 만약 인터 예측 필터링 아이디가 11이면, 필터링 방식 인덱스를 2로 결정하고, 당해 필터링 방식 인덱스2에 대응하는 필터링 유형을 증강 인터 예측 필터링으로 결정한다.
만약 현재 블록의 필터링 유형이 필터링하지 않는 것이면, 디코딩단은 현재 블록에 대해 필터링 처리를 수행하지 않고, 현재 블록의 인터 예측값을 타깃 예측값으로 결정할 수 있다. 만약 현재 블록의 필터링 유형이 인터 예측 필터링이면, 디코딩단은 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻고, 만약 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 디코딩단은 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는다.
디코딩단이 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻을 경우, 디코딩단은 현재 블록의 휘도 성분에 대해 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 현재 블록의 색도 성분에 대해 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있다.
디코딩단이 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻을 경우, 디코딩단은 현재 블록의 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 휘도 성분의 타깃 예측값을 얻고, 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있다.
디코딩단이 현재 블록의 색도 성분에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 디코딩단은 먼저 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는지를 판단하여, 만약 당해 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 디코딩단은 당해 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 색도 성분의 타깃 예측값을 얻을 수 있다.
상술한 실시예에서, 인코딩단 및 디코딩단에 대해, 현재 블록이 충족시키는 인터 예측 필터링 조건은, 현재 블록이 Direct 모드(비 Skip 모드 및 비 일반 인터 모드)이고, 또한 현재 블록이 UMVE 모드 또는 AFFINE 모드를 사용하지 않고, 또한, 현재 블록이 사이즈 제한 조건을 충족시키는 것을 포함할 수 있으며 이에 한정되지 않는다.
상술한 실시예에서, 인코딩단 및 디코딩단에 대해, 모든 색도 성분에 대해 증강 인터 예측 필터링을 수행할 수도 있고, 증강 인터 예측 필터링 조건을 충족시키는 색도 성분에 대해 증강 인터 예측 필터링을 수행할 수도 있는바, 예컨대 색도 성분과 휘도 성분이 동일한 파티션 트리 유형에 속하는 것일 경우, 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는 것이다.
실시예 6: 실시예 1 내지 실시예 5의 임의의 실시예에서, 인코딩단/디코딩단이 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는 것에 관해, 이하 인터 예측 필터링(interpf)의 구현 과정에 대해 설명한다. 인터 예측 필터링은 Direct 모드에 응용될 수 있고, Direct 모드에서 인터 예측값을 얻고, 또한 인트라 예측 모드를 이용하여 인트라 예측값을 얻고, 최후에 인터 예측값 및 인트라 예측값을 가중하여 최종의 타깃 예측값을 얻음으로써, 인터 예측 필터링은 인터 예측으로 인한 예측 블록과 주변의 픽셀 사이의 공간 영역 불연속 문제를 제거할 수 있다.
도 4를 참조하면, 이는 인터 예측 필터링을 포함한 디코딩 과정 모식도인 바, 여기서 디코딩단의 디코딩 과정을 예로 들어 설명하되, 인코딩단의 인코딩 과정은 이와 유사하다. 인터 예측 필터링은 인터 예측 과정과 재구성 과정 사이에서 수행되며, 인터 예측 필터링은 주로 Direct 모드(비Skip 모드 및 비일반 인터 모드)의 현재 블록에 대한 것이고, 또한 당해 현재 블록은 UMVE 모드를 사용하지 않거나 또는 당해 블록은 현재 블록 AFFINE 모드를 사용하지 않는다.
만약 현재 블록에 대해 인터 예측 필터링을 이용해야 할 경우, 먼저 인터 예측 모드를 이용하여 현재 블록의 인터 예측값을 획득하고, 인트라 예측 모드를 이용하여 현재 블록의 인트라 예측값을 획득한 다음에, 당해 인터 예측값 및 당해 인트라 예측값에 기반하여 현재 블록의 타깃 예측값을 결정하고, 현재 블록의 타깃 예측값에 기초하여 재구성 과정을 완성한다. 만약 현재 블록에 대해 인터 예측 필터링을 이용할 필요가 없을 경우, 먼저 인터 예측 모드를 이용하여 현재 블록의 인터 예측값을 획득하고, 다음에, 현재 블록의 인터 예측값을 현재 블록의 타깃 예측값으로 결정하고, 현재 블록의 타깃 예측값에 기초하여 재구성 과정을 완성한다.
예시적으로, 현재 블록의 각 픽셀위치에 대해, 인터 예측 모드를 이용하여 당해 픽셀위치의 인터 예측값을 획득하고, 또한 인트라 예측 모드(예를 들어, Plane 모드, DC 모드, 임의의 각도의 모드 등이며, 이 인트라 예측 모드에 대해 제한하지 않음)를 사용하여 당해 픽셀위치의 인트라 예측값을 획득할 수 있으며, 당해 픽셀위치의 인터 예측값 및 당해 픽셀위치의 인트라 예측값에 대해 가중 연산을 수행하여 당해 픽셀위치의 타깃 예측값을 얻은 다음에, 현재 블록의 모든 픽셀위치의 타깃 예측값을 함께 조합하면 현재 블록의 타깃 예측값을 얻을 수 있다.
가능한 실시 방식에서, 현재 블록의 각 픽셀위치에 대해, Plane 모드를 이용하여 당해 픽셀위치의 인트라 예측값을 획득한다고 가정할 경우, 이하의 수학식을 이용하여 당해 픽셀위치의 인트라 예측값을 획득할 수 있다:
Pred_Q(x,y) = (Pred_V(x,y) + Pred_H(x,y)+1)>>2
Pred_V(x,y) = ((h-1-y)*Recon(x,-1) + (y+1)*Recon(-1,h) + (h>>1))>>log2(h)
Pred_H(x,y) = ((w-1-x)*Recon(-1,y) + (x+1)*Recon(w,-1) + (w>>1))>>log2(w)
상술한 수학식에서, Pred_Q(x,y)는 픽셀위치(x,y)의 인트라 예측값을 나타내고, w 및 h는 현재 블록의 너비 및 높이이고, x 및 y는 현재 블록 내의 상대 좌표이고, Recon(x,y)는 현재 블록 주변의 이미 재구성된 픽셀값이다.
가능한 실시 방식에서, 현재 블록의 각 픽셀위치에 대해, 인터 예측값(Pred_inter) 및 인트라 예측값(pred_Q)에 기초하여 5:3 가중을 수행하여 당해 픽셀위치의 타깃 예측값을 얻되, 물론, 5:3은 단지 하나의 예시일 뿐, 기타 가중 계수를 사용할 수 있다. 예를 들어, 이하의 수학식을 이용하여 당해 픽셀위치의 타깃 예측값을 얻을 수 있다:
Pred(x,y) = (Pred_inter(x,y)*5 + Pred_Q(x,y)*3 + 4)>>3
상술한 수학식에서, Pred(x,y)는 픽셀위치(x,y)의 타깃 예측값을 나타낼 수 있고, Pred_inter(x,y)는 픽셀위치(x,y)의 인터 예측값을 나타낼 수 있으며, Pred_Q(x,y)는 픽셀위치(x,y)의 인트라 예측값을 나타낼 수 있다.
실시예 7: 실시예 1 내지 실시예 5의 임의의 실시예에서, 인코딩단/디코딩단이 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 현재 블록의 타깃 예측값을 얻는 것에 대해, 이하 증강 인터 예측 필터링(enhance interpf)의 구현 과정에 대해 설명한다. 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행할 경우, 현재 블록의 인터 예측값 및 현재 블록 외부 주변의 이미 재구성된 픽셀의 재구성값(예컨대 현재 블록 외부 좌측 한 열의 재구성값, 및/또는, 상측 한 행의 재구성값)을 획득할 수 있으며, 당해 인터 예측값 및 당해 재구성값에 기반하여 현재 블록의 타깃 예측값을 결정할 수 있다.
증강 인터 예측 필터링은 인트라 예측 필터링(intra prediction filter, IPF)에서 비롯되고, 인트라 예측 필터링을 인터 예측 필터링에 도입하는 것을 통해 현재 블록에 대해 증강 인터 예측 필터링을 수행함으로써, 움직임 보상 후의 노이즈 및 불연속성을 효과적으로 제거할 수 있다. 증강 인터 예측 필터링이 인트라 예측 필터링에서 비롯되므로, 따라서, 인트라 예측 필터링과 관련되는 내용을 먼저 소개하고, 인트라 예측 필터링은 1비트를 사용하여 현재 블록에 대해 인트라 예측 필터링을 사용하는 것을 허락하는지를 나타낼 수 있고, RDO 단계에서 현재 블록에 대해 인트라 예측 필터링을 사용해야 하는지 여부를 결정할 수 있다. 또한, 인트라 예측 필터링 기술은 현재 블록의 인트라 예측 모드에 기반하여 참조 픽셀을 선택해야 하는 바, 이하 세 가지 경우로 나뉠수 있다.
경우 1: DC 모드, Plane 모드 및 Bilinear 모드에 대해, 좌측의 한 열의 재구성 픽셀 및 상측의 한 행의 재구성 픽셀을 이용하여 참조 픽셀로 이용하고, 3-탭 필터를 이용하여, 예컨대 이하의 수학식을 이용하여 인트라 예측 필터링을 수행할 수 있다:
Figure pct00002
상술한 수학식에서,
Figure pct00003
이고,
Figure pct00004
는 필터링 후의 인트라 예측값이고,
Figure pct00005
는 전통적인 인트라 예측 모드에 의해 얻은 인트라 예측값이며,
Figure pct00006
및
Figure pct00007
는 필터링 계수이고, N은 현재 블록의 사이즈이다.
경우 2: HPM 중의 수직 예측 모드(예컨대 모드3 내지 모드18)에 대해, 좌측의 한 열의 재구성 픽셀을 사용하여 참조 픽셀로 이용하고, 2-탭 필터, 예를 들어, 이하의 수학식을 이용하여 인트라 예측 필터링을 수행할 수 있다:
Figure pct00008
상술한 수학식에서,
Figure pct00009
이고,
Figure pct00010
는 필터링 후의 인트라 예측값일 수 있고,
Figure pct00011
는 전통적인 인트라 예측 모드에 의해 얻은 인트라 예측값일 수 있으며,
Figure pct00012
및
Figure pct00013
는 필터링 계수일 수 있고, N은 현재 블록의 사이즈이다.
경우 3: HPM 중의 수평 예측 모드(예컨대 모드19 내지 모드32)대해, 상측의 한 행의 재구성 픽셀을 사용하여 참조 픽셀로 이용하고, 2-탭 필터, 예를 들어, 이하의 수학식을 이용하여 인트라 예측 필터링을 수행할 수 있다:
Figure pct00014
상술한 수학식에서,
Figure pct00015
이고,
Figure pct00016
는 필터링 후의 인트라 예측값일 수 있고,
Figure pct00017
는 전통적인 인트라 예측 모드에 의해 얻은 인트라 예측값일 수 있으며,
Figure pct00018
및
Figure pct00019
는 필터링 계수일 수 있고, N은 현재 블록의 사이즈이다.
예시적으로, 경우 1, 경우 2 및 경우 3에 대해, 부동 소수점 연산을 피하기 위해, 필터링 계수를 고정 소수점 처리할 수 있는바, 예컨대 경우 1의 인트라 예측 필터링 수학식에 대해, 이하의 수학식으로 대체할 수도 있는바, 이하의 수학식에서, F(x) 및 F(y)는 고정 소수점 처리 후의 계수, 즉
Figure pct00020
및
Figure pct00021
를 F(x) 및 F(y)로 전환하는 바, 경우 2 및 경우 3과 유사하며, 여기서 더 이상 설명하지 않는다.
Figure pct00022
예시적으로, F(x) 및 F(y)는 필터링 계수(즉 확대한 후의 필터 계수)일 수 있으며, 테이블 2를 참조하면, 필터링 계수의 하나의 예시를 보여주는 바, 당해 필터링 계수와 블록 사이즈 및 거리 참조 픽셀의 거리는 모두 관계가 있다. 테이블 2에서, 예측 블록 사이즈는 현재 블록의 너비 또는 높이를 나타내고, 거리 참조 픽셀의 거리는 예측거리를 나타내며, 테이블 2 중의 최대 예측거리는10으로 설정하고, 실제 응용에서, 최대 예측거리는 더 클 수 있으며, 이에 대해 한정하지 않는다.
Figure pct00023
예를 들어, 도 5를 참조하면, 현재 블록의 제1 행 제3 열의 픽셀위치 A에 대해, 참조 픽셀이 좌측의 한 열의 재구성 픽셀이라고 가정하면, 픽셀위치 A와 참조 픽셀의 거리는 3이고, 현재 블록의 사이즈가 4*4라고 가정하면, 필터링 계수는 2이며, 현재 블록의 사이즈가 8*8이라고 가정하면, 필터링 계수는 14이고, 현재 블록의 사이즈가 16*16라고 가정하면, 필터링 계수는 19이고, 현재 블록의 사이즈가 32*32라고 가정하면, 필터링 계수는 21이고, 이과 같이 유추한다. 기타 픽셀위치에 대해, 필터링 계수의 결정 방식과 픽셀위치 A의 필터링 계수의 결정 방식은 유사하며, 여기서 더 이상 설명하지 않는다.
예시적으로, 인트라 예측 필터링을 인터 예측 필터링에 도입하는 것을 통해, 현재 블록에 대해 증강 인터 예측 필터링을 수행, 즉 인터 예측 필터링 중에 한 가지 필터링 방식, 즉 증강 인터 예측 필터링을 새로 추가할 수 있으며, 증강 인터 예측 필터링은 인코딩/디코딩 복잡도에 변화가 발생하지 않는 경우, 인코딩 성능을 향상시킬 수 있다. 하나의 인터 예측 필터링 아이디를 사용하여 증강 인터 예측 필터링을 사용하는지 여부를 나타낼 수 있으며, 계속해서 하나의 인덱스 아이디를 통해 선택된 필터링 유형을 나타내야 한다.
도 4를 참조하면, 이는 증강 인터 예측 필터링을 포함한 디코딩 과정 모식도로서, 여기서 디코딩단의 디코딩 과정을 예로 들어 설명하되, 인코딩단의 인코딩 과정은 이와 유사하다. 증강 인터 예측 필터링은 인터 예측 과정과 재구성 과정 사이에서 수행되며, 증강 인터 예측 필터링은 주로Direct 모드(비Skip 모드 및 비일반 인터 모드)의 현재 블록에 대한 것이며, 또한 당해 현재 블록은 UMVE 모드를 사용하지 않거나 또는 AFFINE 모드를 사용하지 않는다.
만약 현재 블록에 대해 증강 인터 예측 필터링을 사용해야 할 경우, 먼저 인터 예측 모드를 이용하여 현재 블록의 인터 예측값을 획득하고, 현재 블록 외부 주변의 이미 재구성된 픽셀의 재구성값(예컨대 현재 블록 외부 좌측 한 열의 재구성값, 및/또는, 상측 한 행의 재구성값)을 획득한다. 다음에, 당해 인터 예측값 및 당해 재구성값에 기반하여 현재 블록의 타깃 예측값을 결정하고, 현재 블록의 타깃 예측값에 기초하여 재구성 과정을 완성한다. 예를 들어, 상술한 경우 3 중의 수학식을 이용하여 구현하는 원리는 유사하므로, 이에 대해 한정하지 않는다.
예시적으로, 상술한 실시예 1 내지 실시예 7는 단독으로 구현할 수도 있고, 조합되어 구현할 수도 있다. 예를 들어, 실시예 1 및 실시예 2는 조합되어 구현할 수 있고, 실시예 1 및 실시예 3은 조합되어 구현할 수 있으며, 실시예 2 및 실시예 3은 조합되어 구현할 수 있고, 실시예 3 및 실시예 5는 조합되어 구현할 수 있으며, 실시예 1 및 실시예 6, 실시예 7는 조합되어 구현할 수 있다. 물론, 상술한 것은 단지 예시일 뿐, 이 실시예 사이의 조합 방식에 대해 제한하지 않는다.
상술한 방법과 동일한 신청 구상에 기초하여, 본 출원은 실시예 디코딩단에 응용되는 디코딩 장치를 더 제공하는 바, 도 6a에 되시된 바와 같이 이는 상기 장치의 구조도이며, 상기 장치는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하기 위한 획득 모듈(611); 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻고; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻기 위한 처리 모듈(612)을 포함한다.
상기 획득 모듈(611)은 또한: 비트스트림 데이터로부터 인터 예측 필터링 이네이블 플래그를 해석하고, 상기 인터 예측 필터링 이네이블 플래그는 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하거나, 또는, 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는다.
예시적으로, 만약 상기 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 상기 인터 예측 필터링 아이디가 제1 값일 경우, 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 필터링하지 않는 것을 가리키고; 상기 인터 예측 필터링 아이디가 제2 값일 경우, 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키고; 상기 인터 예측 필터링 아이디가 제3 값일 경우, 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킨다.
상기 현재 블록은 휘도 성분과 색도 성분을 포함하고, 상기 처리 모듈(612)은 상기 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻을 경우 구체적으로: 상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻거나; 또는, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 거나; 또는, 상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻고, 또한 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는다.
상기 처리 모듈(612)이 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻을 경우 구체적으로: 상기 색도 성분의 인터 예측값 및 상기 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고; 상기 색도 성분의 인터 예측값 및 상기 색도 재구성값에 기반하여 상기 색도 성분의 타깃 예측값을 결정한다.
상술한 방법과 동일한 신청 구상에 기초하여, 본 출원은 실시예 인코딩단에 응용되는 인코딩 장치를 더 제공하는 바, 예컨대 도 6b에 도시된 바와 같이, 이는 상기 장치의 구조도이며, 상기 장치는: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하기 위한 처리 모듈(621) - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리킴; 또는, 만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -; 상기 현재 블록의 비트스트림 데이터를 송신하기 위한 송신 모듈(622)을 포함한다.
상기 처리 모듈(621)은 또한: 비트스트림 데이터에서 인터 예측 필터링 이네이블 플래그를 인코딩하되; 여기서, 상기 인터 예측 필터링 이네이블 플래그현재 블록이 인터 예측 필터링을 사용하는 것을 허락하거나, 또는, 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하지 않는다.
상기 처리 모듈(621)은 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩할 경우 구체적으로: 만약 상기 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하는 것을 허락하면, 현재 블록의 필터링 유형이 필터링하지 않는 것일 경우, 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 제1 값으로 인코딩하고; 현재 블록의 필터링 유형이 인터 예측 필터링일 경우, 상기 현재 블록의 비트스트림 데이터에서 인코딩 인터 예측 필터링 아이디를 제2 값으로 인코딩하며; 현재 블록의 필터링 유형이 증강 인터 예측 필터링일 경우, 현재 블록의 비트스트림 데이터에서 인코딩 인터 예측 필터링 아이디를 제3 값으로 인코딩한다.
상기 처리 모듈(621)은 또한: 상기 현재 블록에 대하여 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제1 타깃 예측값을 얻고; 상기 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제2 타깃 예측값을 얻고; 상기 현재 블록에 대해 필터링 처리를 수행하지 않고, 상기 현재 블록의 인터 예측값을 제3 타깃 예측값으로 결정하며; 상기 제1 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 상기 제2 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 상기 제3 타깃 예측값에 대응하는 비율 왜곡 코스트 값에 기반하여, 상기 현재 블록의 필터링 유형을 결정한다.
상기 현재 블록은 휘도 성분과 색도 성분을 포함하고, 상기 처리 모듈(621)이 상기 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제2 타깃 예측값을 얻을 경우 구체적으로: 상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 제2 타깃 예측값을 얻거나; 또는, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻거나; 또는, 상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 제2 타깃 예측값을 얻고, 또한 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻는다.
상기 처리 모듈(621)이 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻을 경우 구체적으로: 색도 성분의 인터 예측값 및 상기 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고; 상기 색도 성분의 인터 예측값 및 상기 색도 재구성값에 기반하여 색도 성분의 제2 타깃 예측값을 결정한다.
상술한 방법과 동일한 신청 구상에 기초하여, 본 출원은 실시예는 인코딩/디코딩 장치를 더 제공하는 바, 디코딩단 또는 인코딩단에 응용되며, 도 6c에 도시된 것은 상기 장치의 구조도이며, 상기 장치는: 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻기 위한 처리 모듈(631); 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻기 위한 결정 모듈(632)을 포함한다.
상기 처리 모듈(631)은 구체적으로: 만약 상기 현재 블록의 상기 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 바; 여기서, 상기 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는 것은, 상기 현재 블록의 색도 성분과 상기 현재 블록의 휘도 성분이 동일한 파티션 트리 유형에 속하는 것을 포함하되 이에 한정되지 않는다.
상기 처리 모듈(631)은 구체적으로: 색도 성분의 인터 예측값 및 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하고; 상기 색도 성분의 인터 예측값 및 상기 색도 재구성값에 기반하여 상기 색도 성분의 타깃 예측값을 결정한다.
상기 처리 모듈(631)은 또한: 상기 현재 블록의 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻고; 상기 결정 모듈(632)은 구체적으로: 상기 색도 성분의 타깃 예측값과 상기 휘도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정한다.
본 출원의 실시예에서 제공하는 디코딩단 기기(예시적으로, 디코딩단 기기는 비디오 디코딩단일 수 있음)는, 하드웨어 관점에서, 그 하드웨어 아키텍처 모식도는 구체적으로 도 7a를 참조할 수 있는바, 프로세서(711) 및 기계 판독 가능 저장 매체(712)를 포함한다. 상기 기계 판독 가능 저장 매체(712)에는 상기 프로세서(711)에 의해 수행 가능한 기계 실행 가능 명령이 저장되어 있다. 상기 프로세서(711)는 기계 실행 가능 명령을 수행하여 본 출원의 상술한 예시의 방법을 구현한다. 예를 들어, 프로세서는 기계 실행 가능 명령을 수행하여 이하의 단계: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계; 만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 구현한다.
또는, 프로세서는 기계 실행 가능 명령을 실행하여 이하의 단계: 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 구현한다.
본 출원의 실시예에서 제공하는 인코딩단 기기(예시적으로, 인코딩단 기기는 비디오 인코딩단일 수 있음)는, 하드웨어 관점에서, 그 하드웨어 아키텍처 모식도는 구체적으로 도 7b를 참조할 수 있는바, 프로세서(721) 및 기계 판독 가능 저장 매체(722)를 포함한다. 상기 기계 판독 가능 저장 매체(722)는 상기 프로세서(721)에 의해 실행 가능한 기계 실행 가능 명령을 저장한다. 상기 프로세서(721)는 기계 실행 가능 명령을 수행하여 본 출원의 상술한 예시의 방법을 구현한다. 예를 들어, 프로세서는 기계 실행 가능 명령을 수행하여 이하의 단계: 만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하는 단계 - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는, 만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -;를 구현한다. 또는, 프로세서는 기계 실행 가능 명령을 수행하여 이하의 단계: 만약 현재 블록에 대해 증강 인터 예측 필터링을 활성화하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 구현한다.
상술한 방법과 동일한 신청 구상에 기초하여, 본 출원의 실시예에서 촬영 기기를 더 제공하는 바, 당해 촬영 기기는 상술한 임의의 실시예 중의 인코딩 장치 및/또는 디코딩 장치를 포함할 수 있다.
상술한 방법과 동일한 신청 구상에 기초하여, 본 출원의 실시예는 기계 판독 가능 저장 매체를 더 제공하는 바, 상기 기계 판독 가능 저장 매체에는 여러 개의 컴퓨터 명령이 저장되어 있으며, 상기 컴퓨터 명령이 프로세서에 의해 실행 될 경우, 본 출원의 상술한 예시의 디코딩 방법, 또는 인코딩 방법, 또는 인코딩/디코딩 방법을 구현하며, 이에 대해 한정하지 않는다.
위의 실시예들에서 설명된 시스템들, 장치들, 모듈들, 또는 유닛들은 컴퓨터 칩들 또는 엔티티들에 의해 구현되거나, 특정 기능들을 갖는 제품들에 의해 구현될 수 있다. 전형적인 구현 장치는 컴퓨터이고, 컴퓨터의 특정 형태는 개인용 컴퓨터, 랩톱 컴퓨터, 셀룰러 폰, 카메라 폰, 스마트 폰, 개인 휴대 정보 단말(personal digital assistant), 미디어 플레이어, 내비게이션 디바이스, 이메일 송수신기 디바이스, 게임 콘솔, 태블릿 컴퓨터, 웨어러블 디바이스, 또는 이러한 디바이스들 중 임의의 것의 조합일 수 있다.
설명의 편리를 위해, 상기 장치를 설명할 때 기능을 다양한 유닛으로 나누어 각각 설명한다. 물론, 본 발명을 구현할 때 각 유닛의 기능을 동일한 하나 또는 복수의 소프트웨어 및/또는 하드웨어에서 구현할 수 있다. .
본 기술분야의 통상의 기술자라면 본 발명의 실시예가 방법, 시스템, 또는 컴퓨터 프로그램 제품으로서 제공될 수 있음을 이해해야 한다. 따라서, 본 발명은 하드웨어 실시예, 소프트웨어 실시예, 또는 소프트웨어와 하드웨어를 결합한 실시예 형태를 사용할 수 있다. 또한, 본 발명의 실시예는 컴퓨터 사용 가능 프로그램 코드가 포함된 하나 또는 복수의 컴퓨터 사용 가능 저장 매체(자기 디스크 메모리, CD-ROM 및 광 메모리 등을 포함하지만 이에 제한되지 않음)에서 구현되는 컴퓨터 프로그램 제품의 형태를 사용할 수 있다.
본 기술분야의 통상의 기술자는 본 발명에 대해 다양한 변경 및 변형을 진행할 수 있다. 본 발명의 사상 및 원칙 내에서 이루어진 임의의 수정, 등가적 대체, 개선 등은 모두 본 발명의 특허청구범위 내에 포함되어야 한다.

Claims (19)

  1. 디코딩단에 응용되는 디코딩 방법으로서,
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계;
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계;
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  2. 제1항에 있어서, 상기 현재 블록에는 휘도 성분과 색도 성분이 포함되고, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻는 단계는,
    상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻는 단계; 또는,
    상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계; 또는,
    상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻고; 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  3. 제2항에 있어서, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계는,
    만약 상기 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계 - 상기 색도 성분이 증강 인터 예측 필터링 조건을 충족시키는 것은 상기 색도 성분과 상기 휘도 성분이 동일한 파티션 트리 유형에 속함 -;를 포함하는 것을 특징으로 하는 디코딩 방법.
  4. 제3항에 있어서, 상기 색도 성분과 상기 휘도 성분이 동일한 파티션 트리 유형에 속하는 것은, 상기 현재 블록이:
    현재 블록이 QT 파티션 트리 유형이고, 현재 블록의 너비 또는 높이가 8과 같은 것;
    현재 블록이 BT_VER 파티션 트리 유형이고, 현재 블록의 너비가 8과 같은 것;
    현재 블록이 BT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 8과 같은 것;
    현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 너비가 16과 같은 것;
    현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 높이가 8과 같은 것;
    현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 16과 같은 것;
    현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 너비가 8과 같은 것 중 어느 하나를 충족시키지 않는 것을 포함하는 것을 특징으로 하는 디코딩 방법.
  5. 제2항에 있어서, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계는,
    상기 색도 성분의 인터 예측값 및 상기 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하는 단계;
    상기 색도 성분의 인터 예측값 및 상기 색도 재구성값에 기반하여 상기 색도 성분의 타깃 예측값을 결정하는 단계를 포함하는 것을 특징으로 하는 디코딩 방법.
  6. 인코딩단에 응용되는 인코딩 방법으로서,
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하는 단계 - 만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는,
    만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -;를 포함하는 것을 특징으로 하는 인코딩 방법.
  7. 제6항에 있어서, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하기 전에,
    상기 현재 블록에 대하여 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제1 타깃 예측값을 얻는 단계;
    상기 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제2 타깃 예측값으로 결정하는 단계;
    상기 현재 블록에 대해 필터링 처리를 수행하지 않고 상기 현재 블록의 인터 예측값을 현재 블록의 제3 타깃 예측값으로 결정하는 단계;
    상기 제1 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 상기 제2 타깃 예측값에 대응하는 비율 왜곡 코스트 값, 상기 제3 타깃 예측값에 대응하는 비율 왜곡 코스트 값에 기반하여 상기 현재 블록의 필터링 유형을 결정하는 단계를 더 포함하는 것을 특징으로 하는 인코딩 방법.
  8. 제7항에 있어서, 상기 현재 블록에는 휘도 성분과 색도 성분이 포함되고, 상기 현재 블록에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 제2 타깃 예측값을 얻는 단계는,
    상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 제2 타깃 예측값을 얻는 단계; 또는,
    상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻는 단계; 또는,
    상기 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 제2 타깃 예측값을 얻고; 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻는 단계를 포함하는 것을 특징으로 하는 인코딩 방법.
  9. 제8항에 있어서, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 제2 타깃 예측값을 얻는 단계는,
    상기 색도 성분의 인터 예측값 및 상기 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하는 단계;
    상기 색도 성분의 인터 예측값 및 상기 색도 재구성값에 기반하여 상기 색도 성분의 제2 타깃 예측값을 획득하는 단계 포함하는 것을 특징으로 하는 인코딩 방법.
  10. 인코딩단 또는 디코딩단에 응용되는 인코딩/디코딩 방법으로서,
    만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계;
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하는 단계를 포함하는 것을 특징으로 하는 인코딩/디코딩 방법.
  11. 제10항에 있어서, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻은 단계는,
    만약 상기 현재 블록의 상기 색도 성분이 증강 인터 예측 필터링 조건을 충족시키면, 상기 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계 - 상기 색도 성분이 증강 인터 예측 필터링 조건을 만족시키는 것은, 상기 색도 성분과 상기 현재 블록의 휘도 성분이 동일한 파티션 트리 유형에 속함 -;를 포함하는 것을 특징으로 하는 인코딩/디코딩 방법.
  12. 제11항에 있어서, 상기 색도 성분과 상기 휘도 성분이 동일한 파티션 트리 유형에 속하는 것은, 상기 현재 블록이:
    현재 블록이 QT 파티션 트리 유형이고, 현재 블록의 너비 또는 높이가 8과 같은 것;
    현재 블록이 BT_VER 파티션 트리 유형이고, 현재 블록의 너비가 8과 같은 것;
    현재 블록이 BT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 8과 같은 것;
    현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 너비가 16과 같은 것;
    현재 블록이 EQT_VER 파티션 트리 유형이고, 현재 블록의 높이가 8과 같은 것;
    현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 높이가 16과 같은 것;
    현재 블록이 EQT_HOR 파티션 트리 유형이고, 현재 블록의 너비가 8과 같은 것 중 어느 하나를 충족시키지 않는 것을 특징으로 하는 인코딩/디코딩 방법.
  13. 제10항 또는 제11항에 있어서, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻은 단계는,
    상기 색도 성분의 인터 예측값 및 상기 색도 성분 외부 주위의 이미 재구성된 픽셀의 색도 재구성값을 획득하는 단계;
    상기 인터 예측값 및 상기 색도 재구성값에 기반하여 상기 색도 성분의 타깃 예측값을 획득하는 단계를 포함하는 것을 특징으로 하는 인코딩/디코딩 방법.
  14. 제10항에 있어서,
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계 전에, 상기 현재 블록의 휘도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 휘도 성분의 타깃 예측값을 얻는 단계를 더 포함하고;
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계는, 상기 색도 성분의 타깃 예측값과 상기 휘도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하는 단계를 포함하는 것을 특징으로 하는 인코딩/디코딩 방법.
  15. 디코딩단에 응용되는 디코딩 장치로서,
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하기 위한 획득 모듈;
    처리 모듈로서,
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻고;
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻기 위한 처리 모듈을 포함하는 것을 특징으로 하는 디코딩 장치.
  16. 인코딩단에 응용되는 인코딩 장치로서,
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하기 위한 인코딩 모듈 -
    만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는,
    만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -;
    상기 현재 블록의 비트스트림 데이터를 송신하기 위한 송신 모듈을 포함하는 것을 특징으로 하는 인코딩 장치.
  17. 인코딩단 또는 디코딩단에 응용되는 인코딩/디코딩 장치로서,
    만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면, 상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻기 위한 처리 모듈;
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하기 위한 결정 모듈을 포함하는 것을 특징으로 하는 인코딩/디코딩 장치.
  18. 디코딩단 기기로서,
    기계 실행 가능 명령이 저장된 기계 판독 가능 저장 매체;
    상기 기계 실행 가능 명령을 실행하여 이하의 단계를 구현하기 위한 프로세서:
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허용하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 비트스트림 데이터로부터 상기 현재 블록의 인터 예측 필터링 아이디를 해석하는 단계 -
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻음;
    만약 상기 인터 예측 필터링 아이디가 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링인 것을 가리키면, 상기 현재 블록에 대해 증강 인터 예측 필터링 처리를 수행하여 상기 현재 블록의 타깃 예측값을 얻음 -;
    또는, 상기 기계 실행 가능 명령을 실행하여 아래의 단계를 구현하기 위한 프로세서:
    만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면,
    상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계;
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 얻는 단계;를 포함하는 것을 특징으로 하는 디코딩단 기기.
  19. 인코딩단 기기로서,
    기계 실행 가능 명령이 저장된 기계 판독 가능 저장 매체;
    상기 기계 실행 가능 명령을 실행하여 이하의 단계를 구현하기 위한 프로세서를 포함하되, 상기 단계는,
    만약 인터 예측 필터링 이네이블 플래그가 현재 블록이 인터 예측 필터링을 사용하도록 허락하고, 상기 현재 블록이 인터 예측 필터링 조건을 충족시키면, 상기 현재 블록의 필터링 유형에 기반하여 상기 현재 블록의 비트스트림 데이터에서 인터 예측 필터링 아이디를 인코딩하는 단계 -
    만약 상기 현재 블록의 필터링 유형이 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 인터 예측 필터링임을 가리키거나; 또는,
    만약 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링이면, 상기 인터 예측 필터링 아이디는 상기 현재 블록의 필터링 유형이 증강 인터 예측 필터링임을 가리킴 -;
    또는, 만약 현재 블록에 대해 증강 인터 예측 필터링을 사용하는 것을 결정하면,
    상기 현재 블록의 색도 성분에 대하여 증강 인터 예측 필터링 처리를 수행하여 상기 색도 성분의 타깃 예측값을 얻는 단계;
    상기 색도 성분의 타깃 예측값에 기반하여 상기 현재 블록의 타깃 예측값을 결정하는 단계 -;를 포함하는 것을 특징으로 하는 인코딩단 기기.
KR1020227032543A 2020-03-25 2021-03-23 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기 KR20220138001A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
CN202010220367.XA CN113452998B (zh) 2020-03-25 2020-03-25 一种解码、编码、编解码方法、装置及其设备
CN202010220367.X 2020-03-25
PCT/CN2021/082476 WO2021190518A1 (zh) 2020-03-25 2021-03-23 解码、编码、编解码方法、装置及其设备

Publications (1)

Publication Number Publication Date
KR20220138001A true KR20220138001A (ko) 2022-10-12

Family

ID=77806911

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020227032543A KR20220138001A (ko) 2020-03-25 2021-03-23 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기

Country Status (7)

Country Link
EP (1) EP4099693A4 (ko)
JP (1) JP7483921B2 (ko)
KR (1) KR20220138001A (ko)
CN (2) CN113452998B (ko)
AU (1) AU2021243003B2 (ko)
TW (1) TWI784452B (ko)
WO (1) WO2021190518A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024077573A1 (zh) * 2022-10-13 2024-04-18 Oppo广东移动通信有限公司 编解码方法、编码器、解码器、码流以及存储介质

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7970219B2 (en) * 2004-12-30 2011-06-28 Samsung Electronics Co., Ltd. Color image encoding and decoding method and apparatus using a correlation between chrominance components
CA2819401C (en) * 2011-02-10 2020-02-11 Sony Corporation Image processing device and image processing method
KR101941348B1 (ko) * 2012-07-02 2019-01-22 소니 주식회사 고효율 비디오 인코더를 위한 샘플 적응성 오프셋에서의 디커플링 강화
WO2015002444A1 (ko) * 2013-07-01 2015-01-08 삼성전자 주식회사 필터링을 수반한 비디오 부호화 및 복호화 방법 및 그 장치
CN112887737B (zh) * 2014-01-03 2024-04-02 康普英国有限公司 用于hevc扩展处理的条件解析扩展语法
WO2017035831A1 (en) * 2015-09-06 2017-03-09 Mediatek Inc. Adaptive inter prediction
US11503286B2 (en) * 2016-11-28 2022-11-15 Electronics And Telecommunications Research Institute Method and device for filtering
CN109587479B (zh) * 2017-09-29 2023-11-10 华为技术有限公司 视频图像的帧间预测方法、装置及编解码器
JP2021010046A (ja) 2017-10-06 2021-01-28 シャープ株式会社 画像符号化装置及び画像復号装置
CN107896330B (zh) * 2017-11-29 2019-08-13 北京大学深圳研究生院 一种用于帧内和帧间预测的滤波方法
CN108124154B (zh) * 2017-12-28 2020-04-24 北京数码视讯科技股份有限公司 帧间预测模式的快速选择方法、装置及电子设备
CN116366842A (zh) * 2018-03-09 2023-06-30 韩国电子通信研究院 使用样点滤波的图像编码/解码方法和设备
CN112055965A (zh) 2018-04-04 2020-12-08 日本放送协会 预测图像校正装置、图像编码装置、图像解码装置以及程序
US10448025B1 (en) * 2018-05-11 2019-10-15 Tencent America LLC Method and apparatus for video coding
CN110650349B (zh) * 2018-06-26 2024-02-13 中兴通讯股份有限公司 一种图像编码方法、解码方法、编码器、解码器及存储介质
KR20210124213A (ko) 2019-02-08 2021-10-14 파나소닉 인텔렉츄얼 프로퍼티 코포레이션 오브 아메리카 부호화 장치, 복호 장치, 부호화 방법, 및 복호 방법
CN110351568A (zh) * 2019-06-13 2019-10-18 天津大学 一种基于深度卷积网络的视频环路滤波器
CN111083474A (zh) * 2019-12-03 2020-04-28 咪咕文化科技有限公司 帧间预测的滤波方法、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
EP4099693A4 (en) 2023-08-02
EP4099693A1 (en) 2022-12-07
JP7483921B2 (ja) 2024-05-15
AU2021243003B2 (en) 2024-01-11
AU2021243003A1 (en) 2022-11-03
TW202139703A (zh) 2021-10-16
WO2021190518A1 (zh) 2021-09-30
JP2023518593A (ja) 2023-05-02
TWI784452B (zh) 2022-11-21
CN114007082B (zh) 2022-12-23
CN113452998A (zh) 2021-09-28
CN113452998B (zh) 2022-05-31
CN114007082A (zh) 2022-02-01

Similar Documents

Publication Publication Date Title
US10999597B2 (en) Image encoding method and image decoding method
US20190200010A1 (en) Method and apparatus for setting reference picture index of temporal merging candidate
US11523133B2 (en) Image encoding method using a skip mode, and a device using the method
KR20190016982A (ko) 인트라 예측 정보 부호화 방법 및 장치
KR20190016989A (ko) 영상 복호화 방법 및 장치
MX2014003707A (es) Metodo y aparato para la decodificacion del modo de prediccion intra.
JP2023531010A (ja) 符号化・復号方法、装置及びその機器
KR20220138001A (ko) 디코딩, 인코딩, 인코딩/디코딩 방법, 장치 및 그 기기
CN113170176A (zh) 视频编码器、视频解码器及相应方法

Legal Events

Date Code Title Description
A201 Request for examination