KR20220124287A - Video encoding and decoding method and apparatus - Google Patents
Video encoding and decoding method and apparatus Download PDFInfo
- Publication number
- KR20220124287A KR20220124287A KR1020227029747A KR20227029747A KR20220124287A KR 20220124287 A KR20220124287 A KR 20220124287A KR 1020227029747 A KR1020227029747 A KR 1020227029747A KR 20227029747 A KR20227029747 A KR 20227029747A KR 20220124287 A KR20220124287 A KR 20220124287A
- Authority
- KR
- South Korea
- Prior art keywords
- coding unit
- current
- values
- samples
- prediction
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 65
- 239000011159 matrix material Substances 0.000 claims abstract description 86
- 238000001914 filtration Methods 0.000 claims description 93
- 230000003044 adaptive effect Effects 0.000 claims description 37
- 238000004590 computer program Methods 0.000 claims description 16
- 238000013139 quantization Methods 0.000 claims description 7
- 239000000523 sample Substances 0.000 description 111
- 238000010586 diagram Methods 0.000 description 34
- 238000000638 solvent extraction Methods 0.000 description 8
- 238000005192 partition Methods 0.000 description 4
- 230000000903 blocking effect Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000000470 constituent Substances 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000013074 reference sample Substances 0.000 description 1
- 230000008685 targeting Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
- H04N19/126—Details of normalisation or weighting functions, e.g. normalisation matrices or variable uniform quantisers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/96—Tree coding, e.g. quad-tree coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Reduction Or Emphasis Of Bandwidth Of Signals (AREA)
Abstract
본 개시는 인코딩 및 디코딩 방법 및 장치를 제공한다. 상기 디코딩 방법은 현재 예측 블록의 예측된 샘플 행렬을 획득하는 단계, 및 상기 예측된 샘플 행렬에 따라 재구성된 샘플 행렬을 획득하는 단계를 포함하고, 상기 예측된 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득된다.The present disclosure provides an encoding and decoding method and apparatus. The decoding method includes obtaining a predicted sample matrix of a current prediction block, and obtaining a reconstructed sample matrix according to the predicted sample matrix, wherein values of elements of the predicted sample matrix are the values of the current image. obtained according to values of samples in the filtered reconstructed sample matrix.
Description
본 발명은 비디오 인코딩(encoding) 및 디코딩(decoding) 분야에 관한 것으로, 구체적으로, 인트라 예측 모드(intra prediction mode)에서의 인트라 블록 카피(intra block copy: IBC)에 관한 것이다.The present invention relates to the field of video encoding and decoding, and more particularly, to intra block copy (IBC) in an intra prediction mode.
비디오 인코딩 및 디코딩 방법에서, 이미지는 통상 복수의 이미지 블록들(image blocks)로 분할되고, 이후 각각의 이미지 블록이 인코딩 또는 디코딩된다. 각각의 이미지 블록에 대해, 예측(prediction), 변환(transformation), 양자화(quantization), 및 엔트로피 인코딩(entropy encoding)이 수행된다. 예측 단계는, 이전에 인코딩된 이미지 블록들의 재구성된(reconstructed) 픽셀들(이 픽셀들은 참조 픽셀들(reference pixels)로 지칭됨)의 값들을 이용하여 예측값들(predicted values)을 획득하기 위해, 인코딩될 현재 이미지 블록을 예측하는 것이며, 이후에 상기 현재 이미지 블록의 실제값들과 예측값들 간의 차이값들을 비트스트림(bitstream)으로 인코딩한다. 디코딩 시에, 디코더(decoder)도 또한, 이전에 디코딩된 이미지 블록들의 재구성된 픽셀들의 값들을 이용하여 예측값들을 획득하기 위해, 디코딩될 현재 이미지 블록을 예측해야 하며, 이후에 상기 비트스트림으로부터 디코딩된 상기 차이값들을 상기 예측값들에 가산하여 디코딩된 이미지 블록의 재구성된 값들(reconstructed values)을 획득한다. 인코딩과 디코딩 간의 일관성을 보장하기 위해, 코덱(codec)은 예측 수행 시 동일한 참조 픽셀들 및 동일한 예측 방법을 이용해야 한다. 많은 구체적인 예측 방법들이 있으며, 인코더(encoder)는 현재 이미지 블록에 따라 예측 방법을 선택한 후, 디코더가 동일한 예측 방법을 이용하여 현재 블록을 예측할 수 있도록, 선택된 예측 방법에 관한 정보를 비트스트림에 추가하여 선택된 예측 방법을 디코더에 알려 준다.In a video encoding and decoding method, an image is usually divided into a plurality of image blocks, and then each image block is encoded or decoded. For each image block, prediction, transformation, quantization, and entropy encoding are performed. The prediction step encodes to obtain predicted values using values of reconstructed pixels of previously encoded image blocks (these pixels are referred to as reference pixels). Predicting a current image block to be become, and then encoding difference values between actual values and predicted values of the current image block into a bitstream. Upon decoding, the decoder also has to predict the current image block to be decoded, in order to obtain prediction values using the values of the reconstructed pixels of the previously decoded image blocks, which are then decoded from the bitstream. The difference values are added to the prediction values to obtain reconstructed values of a decoded image block. To ensure consistency between encoding and decoding, a codec must use the same reference pixels and the same prediction method when performing prediction. There are many specific prediction methods, and after the encoder selects a prediction method according to the current image block, information about the selected prediction method is added to the bitstream so that the decoder can predict the current block using the same prediction method. Inform the decoder of the selected prediction method.
비디오 인코딩 및 디코딩에 이용하기 위한 인트라 예측 모드에서의 향상된 인트라 블록 카피 방법이 필요하다.There is a need for an improved intra block copy method in intra prediction mode for use in video encoding and decoding.
본 개시의 예시적 실시예에 따르면, 현재 예측 블록(prediction block)의 예측된 샘플 행렬(predicted sample matrix)을 획득하는 단계; 및 상기 예측된 샘플 행렬에 따라 재구성된 샘플 행렬을 획득하는 단계를 포함하고, 상기 예측된 샘플 행렬의 요소들(elements)의 값들은 현재 이미지의 필터링된(filtered) 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되는, 디코딩 방법이 제공된다.According to an exemplary embodiment of the present disclosure, there is provided a method comprising: obtaining a predicted sample matrix of a current prediction block; and obtaining a reconstructed sample matrix according to the predicted sample matrix, wherein values of elements of the predicted sample matrix are values of samples in a filtered reconstructed sample matrix of a current image. A decoding method is provided, obtained according to
본 개시는 비디오 인코딩 및 디코딩에 이용하기 위한 인트라 예측 모드에서의 향상된 인트라 블록 카피 방법을 제공한다.This disclosure provides an improved intra block copy method in intra prediction mode for use in video encoding and decoding.
도 1a는 이미지를 최대 코딩 유닛들(maximum coding units)로 분할하는 단계 및 상기 코딩 유닛들의 개략도를 도시한다.
도 1b는 QT(쿼드 트리(Quad Tree)) 분할, BT(이진 트리(Binary Tree)) 분할, 및 EQT(확장 쿼드 트리(Extend Quad Tree)) 분할을 도시한다.
도 2는 인트라 블록 카피 모드의 개략도를 도시한다.
도 3은 본 발명의 실시예에 따른 디코딩 방법의 흐름도를 도시한다.
도 4는, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된(predictively-compensated) 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링(deblocking filtering) 및 샘플 적응적 오프셋(sample adaptive offset)을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다.
도 5는, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다.
도 6은, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다.
도 7은 본 발명의 실시예에 따른 디코딩 장치의 블록도를 도시한다.
도 8은 본 발명의 실시예에 따른 인코딩 방법의 흐름도를 도시한다.
도 9는 필터링 블록(filtering block)의 경계(boundary)의 샘플들의 개략도를 도시한다.
도 10은 본 발명의 실시예에 따른 인코딩 장치의 블록도를 도시한다.
도 11은 본 발명의 실시예에 따른 디코딩 방법의 흐름도를 도시한다.
도 12는 본 발명의 실시예에 따른 디코딩 장치의 블록도를 도시한다.1a shows a step of partitioning an image into maximum coding units and a schematic diagram of said coding units;
1B shows QT (Quad Tree) partitioning, BT (Binary Tree) partitioning, and EQT (Extend Quad Tree) partitioning.
2 shows a schematic diagram of an intra block copy mode.
3 shows a flowchart of a decoding method according to an embodiment of the present invention.
4 shows that the filtered reconstructed sample matrix is deblocking on decoded predictively-compensated samples in the current largest coding unit, and predictively-compensated samples of the decoded largest coding unit. When including samples obtained by performing filtering and sample adaptive offset, a schematic diagram in which reference blocks are located at different positions is shown.
5 shows samples for which a filtered reconstructed sample matrix is obtained by performing deblocking filtering on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. When including samples obtained by performing deblocking filtering and sample adaptive offset on , the reference blocks show a schematic diagram in different positions.
6 is a sample obtained by performing sample adaptive offset on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit, for which a filtered reconstructed sample matrix is obtained. When including , it shows a schematic diagram in which reference blocks are in different positions.
7 is a block diagram of a decoding apparatus according to an embodiment of the present invention.
8 shows a flowchart of an encoding method according to an embodiment of the present invention.
9 shows a schematic diagram of samples of the boundary of a filtering block.
10 is a block diagram of an encoding apparatus according to an embodiment of the present invention.
11 shows a flowchart of a decoding method according to an embodiment of the present invention.
12 is a block diagram of a decoding apparatus according to an embodiment of the present invention.
본 개시의 예시적 실시예에 따르면, 현재 예측 블록의 예측된 샘플 행렬을 획득하는 단계; 및 상기 예측된 샘플 행렬에 따라 재구성된 샘플 행렬을 획득하는 단계를 포함하고, 상기 예측된 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되는, 디코딩 방법이 제공된다.According to an exemplary embodiment of the present disclosure, there is provided a method comprising: obtaining a predicted sample matrix of a current prediction block; and obtaining a reconstructed sample matrix according to the predicted sample matrix, wherein values of elements of the predicted sample matrix are obtained according to values of samples in a filtered reconstructed sample matrix of a current image. this is provided
컴퓨터 프로그램들이 저장된 메모리; 및 상기 컴퓨터 프로그램들의 실행 시 상술된 디코딩 방법을 수행하는 프로세서를 포함하는, 디코딩 장치가 제공된다.a memory in which computer programs are stored; and a processor that performs the above-described decoding method upon execution of the computer programs, wherein the decoding apparatus is provided.
현재 프레임(frame)이 화면 콘텐트(screen content)인지 여부에 따라 인코딩될 상기 현재 프레임에 대해 디블로킹 필터링을 이용할지 여부를 지시하는 식별자(identifier)를 결정하는 단계; 및 상기 식별자를 비트스트림 내에 추가하는 단계를 포함하는, 인코딩 방법이 제공된다.determining an identifier indicating whether to use deblocking filtering for the current frame to be encoded according to whether the current frame is screen content; and adding the identifier into the bitstream.
컴퓨터 프로그램들이 저장된 메모리; 및 상기 컴퓨터 프로그램들의 실행 시 상술된 인코딩 방법을 수행하는 프로세서를 포함하는, 인코딩 장치가 제공된다.a memory in which computer programs are stored; and a processor for performing the above-described encoding method when the computer programs are executed.
현재 코딩 유닛이 화면 콘텐트인지 여부에 따라 상기 현재 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행할지 여부를 결정하는 단계; 및 상기 결정의 결과에 따라, 디블로킹-필터링된(deblocking-filtered) 재구성된 샘플들을 획득하기 위해, 상기 현재 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하는 단계를 포함하는, 디코딩 방법이 제공된다.determining whether to perform deblocking filtering on prediction-compensated samples of the current coding unit according to whether the current coding unit is picture content; and performing deblocking filtering on the prediction-compensated samples of the current coding unit to obtain deblocking-filtered reconstructed samples according to the result of the determination. , a decoding method is provided.
컴퓨터 프로그램들이 저장된 메모리; 및 상기 컴퓨터 프로그램들의 실행 시 상술된 디코딩 방법을 수행하는 프로세서를 포함하는, 디코딩 장치가 제공된다.a memory in which computer programs are stored; and a processor that performs the above-described decoding method upon execution of the computer programs, wherein the decoding apparatus is provided.
컴퓨터에 의해 실행될 때, 상기 컴퓨터로 하여금 상술된 방법들을 수행하도록 하는, 비일시적 컴퓨터 판독가능 명령어들(non-transitory computer readable instructions)을 저장하는 컴퓨터 판독가능 저장 매체(computer readable storage medium)가 제공된다.There is provided a computer readable storage medium storing non-transitory computer readable instructions that, when executed by a computer, cause the computer to perform the methods described above. .
이하에서, 본 개시의 다양한 예들이 첨부 도면을 참조하여 보다 상세히 설명될 것이다. 그러나, 본 개시는 상이한 형태들을 가질 수 있으며 본 명세서에서 설명되는 실시예들에 제한되는 것으로 이해되어서는 안 된다. 본 개시와 무관한 부분들(parts)은 명확성을 위해 생략될 수 있다. 도면 전체에 걸쳐, 동일한 참조 번호들은 동일 또는 유사한 요소들(elements), 특징들(features), 및 구조들(structures)을 묘사하는 데 이용된다는 것에 유의해야 한다.Hereinafter, various examples of the present disclosure will be described in more detail with reference to the accompanying drawings. However, the present disclosure may take different forms and should not be construed as limited to the embodiments described herein. Parts irrelevant to the present disclosure may be omitted for clarity. It should be noted that throughout the drawings, the same reference numbers are used to describe the same or similar elements, features, and structures.
이하의 설명에서 사용되는 용어들 및 어휘는 그 문자 그대로의 의미들에 제한되는 것이 아니라, 오직 본 발명을 명확하고 일관되게 이해될 수 있도록 하는 데 이용되는 것이다. 따라서, 본 발명이 속하는 기술분야의 숙련된 자들은 본 발명의 예시적 실시예들에 대한 이하의 설명이 단지 예시의 목적으로 제공될 뿐, 청구범위 및 그 균등물에 의해 정의되는, 본 발명을 제한하고자 한 것이 아님을 이해해야 할 것이다.The terms and vocabulary used in the following description are not limited to their literal meanings, but are used only to enable a clear and consistent understanding of the present invention. Accordingly, those skilled in the art will appreciate that the following description of exemplary embodiments of the present invention is provided for purposes of illustration only, and that the present invention is defined by the claims and their equivalents. It should be understood that this is not intended to be limiting.
단수 형태인 "a" 및 "an"은, 문맥상 명확히 달리 지시되지 않는 한, 복수 형태의 언급을 포함한다는 것을 이해해야 할 것이다.It will be understood that the singular forms "a" and "an" include reference to the plural form, unless the context clearly dictates otherwise.
도 1a는 이미지를 최대 코딩 유닛들(maximum coding units)로 분할하는 단계 및 상기 코딩 유닛들의 개략도를 도시한다. 도 1a의 좌측 도면에 도시된 바와 같이, 이미지(100)는 일련의 최대 코딩 유닛들로 분할되고, 각각의 최대 코딩 유닛은 래스터 스캔(raster scan) 순서에 따라 차례로 디코딩된다. 하나의 최대 코딩 유닛은 단일 코딩 유닛이거나 또는 쿼드트리 파티션 구조(quadtree partition structure)를 갖는 4개의 보다 작은 코딩 유닛들로 분할될(split) 수 있다. 도 1a의 우측 도면에 도시된 바와 같이, 최대 코딩 유닛(110)은, QT(쿼드 트리(Quad Tree)) 분할, BT(이진 트리(Binary Tree)) 분할, 및 EQT(확장 쿼드 트리(Extend Quad Tree)) 분할과 같은, 기본 블록 분할 구조에 따라 보다 작은 코딩 유닛들로 분할될 수 있다.1a shows a step of partitioning an image into maximum coding units and a schematic diagram of said coding units; As shown in the left diagram of FIG. 1A , the
도 1b는 QT(쿼드 트리) 분할, BT(이진 트리) 분할, 및 EQT(확장 쿼드 트리) 분할을 도시한다. 도 1b를 참조하면, QT는 코딩 유닛(115)을 4개의 코딩 유닛들로 분할한다. BT는 코딩 유닛(120)을 좌측 및 우측 코딩 유닛들 2개로 분할할 수 있거나, 또는 BT는 코딩 유닛(130)을 상측 및 하측 코딩 유닛들 2개로 분할할 수 있다. EQT는 2개(수평 및 수직)의 I-형 분할 모드들을 포함하며 코딩 유닛을 4개의 코딩 유닛들로 분할한다. 예를 들면, 도 1b에 도시된 바와 같이, EQT_VER은 코딩 유닛(140)을 4개의 코딩 유닛들로 분할하고, EQT_HOR은 코딩 유닛(150)을 4개의 코딩 유닛들로 분할한다. 예측 유닛(prediction unit)은, 상기 코딩 유닛으로부터 분할된, 휘도 예측 블록(luminance prediction block) 및 상응하는 색차 예측 블록(chrominance prediction block)을 포함한다. 상기 코딩 유닛의 코딩 유닛 유형이 'I_2M_2N', 'I_2M_hN', 'I_2M_nU', 'I_2M_nD', 'I_hM_2N', 'I_nL_2N', 또는 'I_nR_2N'인 경우, 상기 코딩 유닛의 예측 유형은 일반적인 인트라 예측(normal intra prediction)이며, 상기 코딩 유닛이 포함하는 상기 예측 블록들의 예측 유형은 일반적인 인트라 예측이다. 이와 달리, 상기 코딩 유닛 유형이 'IBC_2M_2N'인 경우, 상기 코딩 유닛의 예측 유형은 인트라 블록 카피(intra block copy)이며, 상기 코딩 유닛에 포함된 상기 예측 블록들의 예측 유형은 인트라 블록 카피이다. 이와 달리, 상기 코딩 유닛의 예측 유형이 인터 예측(inter prediction)인 경우, 상기 코딩 유닛에 포함된 상기 예측 유닛들 및 예측 블록들의 예측 유형은 인터 예측이다.1B shows a QT (quad tree) partition, a BT (binary tree) partition, and an EQT (extended quad tree) partition. Referring to FIG. 1B , the QT divides the
텍스트 및 그래픽과 같은, 화면 콘텐트 시퀀스들(screen content sequences)에 대해, 동일 프레임 내에 많은 반복되는 텍스처들(repeated textures)이 있는데, 즉, 강한 공간 상관관계(spatial correlation)가 있다. 현재 블록의 인코딩 시 현재 프레임의 이전에 인코딩된 영역이 참조될 수 있는 경우, 코딩 효율은 크게 향상될 수 있다(화면 이미지들의 강한 공간 상관관계의 특성을 목표로 함). 현재 프레임의 인코딩된 블록들을 참조하고 현재 블록의 예측값에 이용되는, 이 기법은 인트라 블록 카피(intra block copy: IBC)로 지칭된다.For screen content sequences, such as text and graphics, there are many repeated textures within the same frame, ie there is a strong spatial correlation. If a previously encoded region of the current frame can be referenced in the encoding of the current block, the coding efficiency can be greatly improved (targeting the property of strong spatial correlation of screen images). This technique, which refers to the encoded blocks of the current frame and is used for the prediction value of the current block, is referred to as intra block copy (IBC).
도 2는 인트라 블록 카피 모드의 개략도를 도시한다. 인트라 블록 카피의 예측 블록들이 현재 인코딩된 이미지 프레임의 재구성된 블록을 이용하여 생성된다는 것을 제외하고, 인트라 블록 카피는 인터 이미지 예측과 유사하다. 예를 들면, 인트라 블록 카피(IBC)에서, 현재 블록(210)은, 현재 블록(210)에 앞서 이전에 처리되고 동일 프레임 내에 위치한, 참조 블록(220)을 이용하여 예측된다.2 shows a schematic diagram of an intra block copy mode. An intra block copy is similar to inter image prediction, except that the predictive blocks of the intra block copy are generated using the reconstructed blocks of the currently encoded image frame. For example, in intra block copy (IBC), the
디블로킹 필터링(deblocking filtering: DBF)은 블로킹 효과를 감소시키는 데 이용된다. 샘플 적응적 오프셋(sample adaptive offset: SAO)은 링잉 효과(ringing effect)를 개선하는 데 이용된다. 이들 두 필터들은 비디오의 주관적(subjective) 및 객관적(objective) 품질을 효과적으로 향상시킬 수 있다.Deblocking filtering (DBF) is used to reduce the blocking effect. A sample adaptive offset (SAO) is used to improve the ringing effect. These two filters can effectively improve the subjective and objective quality of the video.
일 실시예에서, IBC-예측된(IBC-predicted) 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링되지 않은(unfiltered) 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득된다. 필터링되지 않은 재구성된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋 처리가 수행되지 않을 수 있는데, 이는 예측되는 샘플들의 값들의 큰 왜곡을 초래할 것이며, 이에 따라 IBC를 이용할 때 예측 블록들의 품질 및 코딩 효율이 저하된다. 다시 말하면, 필터링되지 않은 재구성된 샘플들이 인트라 블록 카피(IBC)를 이용한 예측 프로세스를 위한 참조 샘플들로 이용될 때, 예측/코딩 효율이 저하될 수 있다.In one embodiment, values of elements of an IBC-predicted sample matrix are obtained according to values of samples in an unfiltered reconstructed sample matrix of the current image. Deblocking filtering and sample adaptive offset processing may not be performed on unfiltered reconstructed samples, which will result in large distortion of the values of predicted samples, and thus the quality and coding of predictive blocks when using IBC efficiency is lowered. In other words, when unfiltered reconstructed samples are used as reference samples for a prediction process using intra block copy (IBC), prediction/coding efficiency may be degraded.
인트라 블록 카피(IBC)에 따른 예측을 수행할 때 예측 효율을 향상시키기 위해, 본 개시는, IBC-예측된 샘플 행렬의 요소들의 값들이 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되어, 이에 따라 화면 콘텐트의 이미지 코딩 효율을 더 향상시키는, 인트라 블록 카피 방법을 제공한다.In order to improve prediction efficiency when performing prediction according to intra block copy (IBC), the present disclosure provides that the values of elements of an IBC-predicted sample matrix depend on values of samples in the filtered reconstructed sample matrix of the current image. To provide an intra block copy method, which is obtained, thereby further improving image coding efficiency of screen content.
도 3은 본 개시의 실시예에 따른 디코딩 방법의 흐름도를 도시한다. 상기 방법은 다음의 단계들을 포함한다: 현재 예측 블록의 예측된 샘플 행렬을 획득하는 단계(S301); 및 상기 예측된 샘플 행렬에 따라 재구성된 샘플 행렬을 획득하는 단계로서, 상기 예측된 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되는 단계(S302). 이런 식으로, 현재 이미지의 필터링된 재구성된 샘플 행렬을 IBC를 위한 참조 샘플로 이용하여, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다.3 shows a flowchart of a decoding method according to an embodiment of the present disclosure. The method includes the following steps: obtaining a predicted sample matrix of a current prediction block (S301); and obtaining a reconstructed sample matrix according to the predicted sample matrix, wherein values of the elements of the predicted sample matrix are obtained according to values of samples in the filtered reconstructed sample matrix of the current image (S302). In this way, by using the filtered reconstructed sample matrix of the current image as a reference sample for IBC, distortion of values of predicted samples can be reduced, the quality of prediction blocks using IBC can be improved, and coding Efficiency can be improved.
상기 예측된 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득될 수 있다. 휘도 예측 샘플 행렬(luminance predicted sample matrix)의 요소들의 값들은 상기 현재 이미지의 전체 픽셀 정밀도(full pixel precision)의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들을 이용하여 획득될 수 있으며, 색차 예측 샘플 행렬(chrominance predicted sample matrix)의 요소들의 값들은 상기 현재 이미지의 1/2 정확도의 필터링된 재구성된 색차 샘플 행렬 내의 샘플들의 값들을 이용하여 획득될 수 있다.Values of the elements of the predicted sample matrix may be obtained according to values of samples in the filtered reconstructed sample matrix of the current image. Values of elements of a luminance predicted sample matrix may be obtained using values of samples in a filtered reconstructed sample matrix of full pixel precision of the current image, wherein the chrominance predicted sample matrix Values of elements of (chrominance predicted sample matrix) may be obtained using values of samples in the filtered reconstructed chrominance sample matrix with 1/2 accuracy of the current image.
일 실시예에 따르면, 상기 필터링된 재구성된 샘플 행렬은 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 수 있다. 상기 예측-보상된 샘플들은 예측된 샘플들과 잔차 샘플들의 합을 이용하여 획득될 수 있다. 이런 식으로, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다.According to an embodiment, the filtered reconstructed sample matrix is deblocking filtered and sample adaptive for decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. Samples obtained by performing the offset may be included. The prediction-compensated samples may be obtained using a sum of predicted samples and residual samples. In this way, distortion of values of predicted samples can be reduced, quality of prediction blocks using IBC can be improved, and coding efficiency can be improved.
도 4는, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다. 도 4에, 5x5 최대 코딩 유닛들이 예로서 도시되어 있다.4 shows that the filtered reconstructed sample matrix performs deblocking filtering and sample adaptive offset on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. shows a schematic diagram in which reference blocks are in different positions when including samples obtained by In Fig. 4, 5x5 maximum coding units are shown as an example.
예를 들면, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 다음의 상황들(situations) 중 적어도 하나가 존재할 수 있다. 도 4의 좌측 도면(410)에 도시된 바와 같이, 현재 블록(431)의 블록 벡터에 의해 지목된 참조 블록(441)이 완전히 현재 최대 코딩 유닛 외부에 위치하는 경우(즉, 참조 블록(441)이 현재 블록(431)을 포함하는 현재 최대 코딩 유닛 외부에 위치하고, 참조 블록(441)이 이전에 디코딩된 최대 코딩 유닛 내부에 위치하는 경우), 예측된 샘플 행렬의 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 4의 중앙 도면(420)에 도시된 바와 같이, 현재 블록(432)의 블록 벡터에 의해 지목된 참조 블록(442)의 일부가 현재 최대 코딩 유닛의 외부에(즉, 디코딩된 최대 코딩 유닛 내부에) 위치하고 참조 블록(442)의 나머지 일부가 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다. 도 4의 우측 도면(430)에 도시된 바와 같이, 현재 블록(433)의 블록 벡터에 의해 지목된 참조 블록(443)이 완전히 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다.For example, the filtered reconstructed sample matrix performs deblocking filtering and sample adaptive offset on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. When including the samples obtained by doing so, at least one of the following situations may exist. As shown in the left diagram 410 of FIG. 4 , when the
다른 실시예에 따르면, 상기 필터링된 재구성된 샘플 행렬은 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 수 있다. 이런 식으로, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다.According to another embodiment, the filtered reconstructed sample matrix includes samples obtained by performing deblocking filtering on decoded prediction-compensated samples within the current largest coding unit, and prediction-compensation of the decoded largest coding unit. Samples obtained by performing deblocking filtering and sample adaptive offset on the sampled samples may be included. In this way, distortion of values of predicted samples can be reduced, quality of prediction blocks using IBC can be improved, and coding efficiency can be improved.
도 5는, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다.5 shows samples for which a filtered reconstructed sample matrix is obtained by performing deblocking filtering on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. When including samples obtained by performing deblocking filtering and sample adaptive offset on , the reference blocks show a schematic diagram in different positions.
예를 들면, 상기 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 다음의 상황들 중 적어도 하나가 존재한다. 도 5의 좌측 도면(510)에 도시된 바와 같이, 현재 블록(531)의 블록 벡터에 의해 지목된 참조 블록(541)이 완전히 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 5의 중앙 도면(520)에 도시된 바와 같이, 현재 블록(532)의 블록 벡터에 의해 지목된 참조 블록(542)의 일부가 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하고 참조 블록(542)의 나머지 일부가 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 5의 우측 도면(533)에 도시된 바와 같이, 현재 블록(533)의 블록 벡터에 의해 지목된 참조 블록(543)이 완전히 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들의 값들에 따라 획득된다.For example, samples for which the filtered reconstructed sample matrix is obtained by performing deblocking filtering on decoded prediction-compensated samples in the current largest coding unit, and the prediction-compensated sample of the decoded largest coding unit When including samples obtained by performing deblocking filtering and sample adaptive offset on s, at least one of the following situations exists. As shown in the left diagram 510 of FIG. 5 , the
일 실시예에 따르면, 재구성된 샘플들의 값들은 디블로킹-필터링되거나 또는 디블로킹-필터링되지 않을 수 있는데, 이는, 코드 스트림(code stream)으로부터 획득되는, 프레임 레벨에서의 디블로킹 필터링을 이용할지 여부의 식별자에 의해 지시된다. 따라서, 예를 들면, 상기 디코딩 방법은 현재 프레임에 대한 디블로킹 필터링을 이용할지 여부를 지시하는 식별자를 상기 코드 스트림으로부터 획득하는(acquiring) 단계를 더 포함한다. 예를 들면, 0은 디코딩될 상기 현재 프레임 내의 어떤 블록도 디블로킹 필터링을 이용하지 않음을 지시하고, 1은 디코딩될 상기 현재 프레임 내의 모든 블록들이 디블로킹 필터링을 이용함을 지시한다.According to an embodiment, the values of the reconstructed samples may be deblocking-filtered or not deblocking-filtered, whether to use deblocking filtering at the frame level, obtained from a code stream indicated by the identifier of Thus, for example, the decoding method further includes acquiring, from the code stream, an identifier indicating whether to use deblocking filtering for the current frame. For example, 0 indicates that no blocks in the current frame to be decoded use deblocking filtering, and 1 indicates that all blocks in the current frame to be decoded use deblocking filtering.
일 실시예에 따르면, 상기 식별자가 상기 현재 프레임에 대해 디블로킹 필터링을 이용하지 않음을 지시하는 경우(즉, 상기 식별자가 0인 경우), 상기 필터링된 재구성된 샘플 행렬은 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함한다. 이런 식으로, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다.According to an embodiment, when the identifier indicates not to use deblocking filtering for the current frame (ie, when the identifier is 0), the filtered reconstructed sample matrix is within the current largest coding unit. decoded prediction-compensated samples, and samples obtained by performing sample adaptive offset on prediction-compensated samples of the decoded largest coding unit. In this way, distortion of values of predicted samples can be reduced, quality of prediction blocks using IBC can be improved, and coding efficiency can be improved.
도 6은, 필터링된 재구성된 샘플 행렬이 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 참조 블록들이 상이한 위치들에 있는 개략도를 도시한다.6 is a sample obtained by performing sample adaptive offset on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit, for which a filtered reconstructed sample matrix is obtained. When including , it shows a schematic diagram in which reference blocks are in different positions.
예를 들면, 상기 필터링된 재구성된 샘플 행렬이 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 다음의 상황들 중 적어도 하나가 존재한다. 도 6의 좌측 도면(610)에 도시된 바와 같이, 현재 블록(641)의 블록 벡터에 의해 지목된 참조 블록(651)이 완전히 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 6의 중앙 도면(620)에 도시된 바와 같이, 현재 블록(642)의 블록 벡터에 의해 지목된 참조 블록(652)의 일부가 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하고, 참조 블록(652)의 나머지 일부가 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다. 도 6의 우측 도면(630)에 도시된 바와 같이, 현재 블록(643)의 블록 벡터에 의해 지목된 참조 블록(653)이 완전히 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 예측된 샘플 행렬의 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다.For example, the filtered reconstructed sample matrix performs a sample adaptive offset on decoded prediction-compensated samples in the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. When including acquired samples, at least one of the following situations exists. As shown in the left diagram 610 of FIG. 6 , the
디블로킹 필터링이 현재 프레임에 적용되는지 여부를 지시하는 정보가 이용될 수 있다. 예를 들면, 0 또는 1을 갖는 식별자가 디블로킹 필터링을 지시하는 데 이용될 수 있다. 상기 식별자가 현재 프레임에 대해 디블로킹 필터링을 이용함을 지시할 때(예를 들면, 상기 식별자가 1일 때), 2개의 상황들이 존재한다.Information indicating whether deblocking filtering is applied to the current frame may be used. For example, an identifier with 0 or 1 may be used to indicate deblocking filtering. When the identifier indicates to use deblocking filtering for the current frame (eg, when the identifier is 1), two situations exist.
일 실시예에 따르면, 상기 식별자가 현재 프레임에 대해 디블로킹 필터리을 이용함을 지시할 때(예를 들면, 상기 식별자가 1일 때), 상기 필터링된 재구성된 샘플 행렬은 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함한다. 상술된 바와 같이, 이런 식으로, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다. 디블로킹 필터링은 프레임 레벨에서 이용되지만, 상기 현재 최대 코딩 유닛 내의 코딩 유닛들은 디블로킹 필터링을 이용하지 않을 수 있다.According to an embodiment, when the identifier indicates to use deblocking filtering for the current frame (eg, when the identifier is 1), the filtered reconstructed sample matrix is decoded within the current largest coding unit. and samples obtained by performing deblocking filtering and sample adaptive offset on the prediction-compensated samples of the decoded largest coding unit. As described above, in this way, distortion of values of predicted samples can be reduced, quality of prediction blocks using IBC can be improved, and coding efficiency can be improved. Deblocking filtering is used at the frame level, but coding units within the current largest coding unit may not use deblocking filtering.
상술된 바와 같이, 예를 들면, 상기 필터링된 재구성된 샘플 행렬이 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들, 및 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 다음의 상황들 중 적어도 하나가 존재한다. 도 4의 좌측 도면(410)에 도시된 바와 같이, 현재 블록(431)의 블록 벡터에 의해 지목된 참조 블록(441)이 완전히 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 4의 중앙 도면(420)에 도시된 바와 같이, 현재 블록(432)의 블록 벡터에 의해 지목된 참조 블록(442)의 일부가 상기 현재 최대 코딩 유닛의 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하고 참조 블록(442)의 나머지 일부가 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다. 도 4의 우측 도면(430)에 도시된 바와 같이, 현재 블록(433)의 블록 벡터에 의해 지목된 참조 블록(443)이 완전히 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들의 값들에 따라 획득된다.As described above, for example, the filtered reconstructed sample matrix deblocks on decoded prediction-compensated samples within the current largest coding unit, and prediction-compensated samples of the decoded largest coding unit. When including samples obtained by performing filtering and sample adaptive offset, at least one of the following situations exists. As shown in the left diagram 410 of FIG. 4 , the
다른 실시예에 따르면, 상기 식별자가 현재 프레임에 대해 디블로킹 필터링을 이용함을 지시할 때(예를 들면, 상기 식별자가 1일 때), 상기 필터링된 재구성된 샘플 행렬은 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함한다. 상술된 바와 같이, 이런 식으로, 예측된 샘플들의 값들의 왜곡이 감소될 수 있고, IBC를 이용한 예측 블록들의 품질이 향상될 수 있으며, 코딩 효율이 향상될 수 있다.According to another embodiment, when the identifier indicates to use deblocking filtering for the current frame (eg, when the identifier is 1), the filtered reconstructed sample matrix is decoded within the current largest coding unit. Samples obtained by performing deblocking filtering on prediction-compensated samples, and samples obtained by performing deblocking filtering and sample adaptive offset on prediction-compensated samples of the decoded largest coding unit do. As described above, in this way, distortion of values of predicted samples can be reduced, quality of prediction blocks using IBC can be improved, and coding efficiency can be improved.
상술된 바와 같이, 예를 들면, 상기 필터링된 재구성된 샘플 행렬이 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들, 및 상기 디코딩된 최대 코딩 유닛의 예측 보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함할 때, 다음의 상황들 중 적어도 하나가 존재한다. 도 5의 좌측 도면(510)에 도시된 바와 같이, 현재 블록(531)의 블록 벡터에 의해 지목된 참조 블록(541)이 완전히 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 5의 중앙 도면(520)에 도시된 바와 같이, 현재 블록(532)의 블록 벡터에 의해 지목된 참조 블록(542)의 일부가 상기 현재 최대 코딩 유닛 외부에(즉, 상기 디코딩된 최대 코딩 유닛 내부에) 위치하고 참조 블록(542)의 나머지 일부가 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들의 값들에 따라 획득된다. 도 5의 우측 도면(533)에 도시된 바와 같이, 현재 블록(533)의 블록 벡터에 의해 지목된 참조 블록(543)이 완전히 상기 현재 최대 코딩 유닛 내부에 위치하는 경우, 상기 예측된 샘플 행렬의 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들의 값들에 따라 획득된다.As described above, for example, the filtered reconstructed sample matrix is obtained by performing deblocking filtering on decoded prediction-compensated samples within the current maximum coding unit, and the decoded maximum coding unit. When including samples obtained by performing deblocking filtering and sample adaptive offset on prediction compensated samples of a unit, at least one of the following situations exists. As shown in the left diagram 510 of FIG. 5 , the
도 7은 본 개시의 실시예에 따른 디코딩 장치의 블록도를 도시한다. 디코딩 장치(700)는 컴퓨터 프로그램들이 저장된 메모리(701), 및 상기 컴퓨터 프로그램들의 실행 시 상술된 디코딩 방법들을 수행하는 프로세서(702)를 포함한다. 이와 같은 장치는 예측된 샘플들의 값들의 왜곡을 감소시키고, IBC를 이용한 예측 블록들의 품질을 향상시키고, 코딩 효율을 향상시킬 수 있다.7 is a block diagram of a decoding apparatus according to an embodiment of the present disclosure. The
도 8은 본 개시의 실시예에 따른 인코딩 방법의 흐름도를 도시한다. 본 실시예는, 상술된 바와 같이, 프레임 레벨에서 디블로킹 필터링을 이용할지 여부의 식별자를 획득하는 방법에 관한 것이다. 상기 방법은 인코딩될 현재 프레임이 화면 콘텐트인지 여부에 따라 인코딩될 상기 현재 프레임에 대해 디블로킹 필터링을 이용할지 여부를 지시하는 식별자를 결정하는 단계(단계 S801); 및 상기 식별자를 코드 스트림에 기입하는 단계(단계 S802)를 포함한다. 이런 식으로, 코딩 효율이 향상될 수 있다.8 shows a flowchart of an encoding method according to an embodiment of the present disclosure. This embodiment relates to a method for obtaining an identifier of whether to use deblocking filtering at the frame level, as described above. The method includes: determining an identifier indicating whether to use deblocking filtering for the current frame to be encoded according to whether the current frame to be encoded is screen content (step S801); and writing the identifier into the code stream (step S802). In this way, coding efficiency can be improved.
상기 화면 콘텐트는, 컴퓨터 또는 모바일 단말과 같은, 디바이스의 이미지 표시 유닛으로부터 직접 캡처된, 컴퓨터 그래픽, 텍스트 이미지들, 자연 이미지와 그래픽 및 캐릭터의 혼합물의 이미지들, 및 컴퓨터-생성 애니메이션 이미지들 등과 같은, 이미지이다. 이와 같은 화면 콘텐트는, 데스크탑 협업(desktop collaboration), 데스크탑 공유 및 클라우드 게임들 등과 같은, 애플리케이션 시나리오들에서 공통적이다. 화면 콘텐트 이미지와 카메라에 의해 캡처된 자연 이미지 간의 주요한 차이점은 화면 콘텐트 이미지는 노이즈가 없고 이산적 톤들(discrete tones) 및 선명한 에지들(sharp edges)을 가지는 반면, 자연 이미지는 통상 노이즈를 포함하고 연속적 톤들(continuous tones) 및 복잡한 텍스처들(complex textures)을 가진다는 것이다. 이미지가 화면 콘텐트인지 여부를 결정하기 위한 계산 방법은 다음의 방법들 중 하나이거나 또는 다른 방법일 수 있으며, 본 명세서에 제한되지 않는다. 하나의 가능한 구현은 인코딩 전에 각 프레임에 대한 해시 테이블(hash table)을 구성하고, 각 해시값에 대해, 상기 값이 2개 이상의 블록들의 존재에 상응하는지 여부를 계산하는 것이며, 상기 상황의 발생 가능성이 특정 문턱값(threshold)보다 클 때, 현재 프레임은 화면 콘텐트로 간주된다. 다른 가능한 구현은 인코딩 전에 각 프레임과 소벨 연산자(sobel operator)를 컨볼루션하는(convolve) 것이며, 전체 프레임의 계산된 소벨 값이 특정 문턱값보다 클 때, 현재 프레임은 화면 콘텐트로 간주된다.The screen content may include computer graphics, text images, images of a mixture of natural images and graphics and characters, and computer-generated animated images, etc., captured directly from an image display unit of a device, such as a computer or mobile terminal. , is an image. Such screen content is common in application scenarios, such as desktop collaboration, desktop sharing and cloud games. The main difference between a screen content image and a natural image captured by a camera is that a screen content image is noiseless and has discrete tones and sharp edges, whereas a natural image usually contains noise and is continuous It has continuous tones and complex textures. The calculation method for determining whether the image is screen content may be one of the following methods or another method, but is not limited herein. One possible implementation is to construct a hash table for each frame before encoding, and for each hash value, calculate whether the value corresponds to the presence of two or more blocks, the probability of occurrence of the above situation When greater than this certain threshold, the current frame is considered screen content. Another possible implementation is to convolve each frame with a sobel operator before encoding, and when the calculated Sobel value of the entire frame is greater than a certain threshold, the current frame is considered as screen content.
일 실시예에 따르면, 단계(S801)는 인코딩될 현재 프레임이 화면 콘텐트인 경우, 상기 식별자가 상기 현재 프레임에 대해 디블로킹 필터링을 이용하지 않음을 지시하도록 설정(예를 들면, 상기 식별자가 0으로 설정)되거나, 또는 인코딩될 현재 프레임이 화면 콘텐트가 아닌 경우, 상기 식별자가 상기 현재 프레임에 대해 디블로킹 필터링을 이용함을 지시하도록 설정(예를 들면, 상기 식별자가 1로 설정)되는 것을 포함한다.According to an embodiment, in step S801, when the current frame to be encoded is screen content, the identifier is set to indicate that deblocking filtering is not used for the current frame (eg, the identifier is set to 0). set) or, when the current frame to be encoded is not screen content, the identifier is set to indicate to use deblocking filtering for the current frame (eg, the identifier is set to 1).
일 실시예에 따르면, 상기 인코딩 방법은, 상기 식별자에 기초하여, 인코딩된 상기 현재 프레임의 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행할지 여부를 결정하는 단계를 더 포함한다. 상기 식별자가 현재 프레임에 대해 디블로킹 필터링을 이용하지 않음을 지시할 때(예를 들면, 상기 식별자가 0일 때), 상기 현재 프레임의 필터링 블록들에 대해 디블로킹 필터링이 이용되지 않으며, 상기 식별자가 현재 프레임에 대해 디블로킹 필터링을 이용함을 지시할 때(예를 들면, 상기 식별자가 1일 때), 상기 현재 프레임의 필터링 블록들에 대해 디블로킹 필터링을 이용할지 여부가 결정된다.According to an embodiment, the encoding method further comprises determining, based on the identifier, whether to perform deblocking filtering on the encoded prediction-compensated samples of the current frame. When the identifier indicates not to use deblocking filtering for the current frame (eg, when the identifier is 0), deblocking filtering is not used for filtering blocks of the current frame, and the identifier indicates to use deblocking filtering for the current frame (eg, when the identifier is 1), it is determined whether to use deblocking filtering for filtering blocks of the current frame.
일 실시예에 따르면, 상기 식별자에 기초하여, 인코딩될 상기 현재 프레임의 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행할지 여부를 결정하는 단계는 필터링 블록의 경계(boundary)의 필터 강도(filter strength)를 계산하는 단계를 포함하며, 상기 필터링 블록의 상기 경계의 상기 필터 강도를 계산하는 단계는 다음의 단계들 중 적어도 하나를 포함한다. 상기 경계가 필터링되어야 한다고 결정되는 경우, (p0-q0)의 절대값이 제1 파라미터의 4배보다 크거나 같은 경우, 상기 필터 강도는 0이며, 여기서 p0는 상기 경계의 좌측 또는 상측의 제1 샘플이고, q0는 상기 경계의 우측 또는 하측의 제1 샘플이며, 상기 제1 파라미터는 양자화 파라미터(quantization parameter) 및 비트 깊이(bitdepth)에 따라 계산되거나, 상기 경계의 평활도(smoothness)가 6일 때, (p0-p1)의 절대값이 제2 파라미터의 1/4보다 작거나 같고 (q0-q1)의 절대값이 상기 제2 파라미터의 1/4보다 작거나 같으며 (p0-p3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같고 (q0-q3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같으며 (p0-q0)의 절대값이 상기 제1 파라미터보다 작은 경우, 상기 필터 강도는 4이며, 여기서 p1은 상기 경계의 좌측 또는 상측의 제2 샘플이고, q1은 상기 경계의 우측 또는 하측의 제2 샘플이며, p3은 상기 경계의 좌측 또는 상측의 제4 샘플이고, q3은 상기 경계의 우측 또는 하측의 제4 샘플이며, 상기 제2 파라미터는 상기 양자화 파라미터 및 상기 비트 깊이에 따라 계산되거나, 또는 상기 경계의 평활도가 5일 때, p0이 p1과 같고 q0이 q1과 같으며 (p2-q2)의 절대값이 상기 제1 파라미터보다 작은 경우, 상기 필터 강도는 3이며, 여기서 p2는 상기 경계의 좌측 또는 상측의 제3 샘플이고 q2는 상기 경계의 우측 또는 하측의 제3 샘플이다.According to an embodiment, the determining whether to perform deblocking filtering on the prediction-compensated samples of the current frame to be encoded, based on the identifier, comprises a filter strength of a boundary of a filtering block. strength), wherein calculating the filter strength of the boundary of the filtering block includes at least one of the following steps. When it is determined that the boundary should be filtered, if the absolute value of (p0-q0) is greater than or equal to 4 times the first parameter, the filter strength is 0, where p0 is the first to the left or above the boundary. sample, q0 is a first sample to the right or lower side of the boundary, and the first parameter is calculated according to a quantization parameter and a bit depth, or when the smoothness of the boundary is 6 , the absolute value of (p0-p1) is less than or equal to 1/4 of the second parameter and the absolute value of (q0-q1) is less than or equal to 1/4 of the second parameter and the absolute value of (p0-p3) The value is less than or equal to 1/2 of the second parameter and the absolute value of (q0-q3) is less than or equal to 1/2 of the second parameter, and the absolute value of (p0-q0) is greater than the first parameter. When small, the filter strength is 4, where p1 is the second sample to the left or above the boundary, q1 is the second sample to the right or below the boundary, and p3 is the fourth sample to the left or above the boundary sample, q3 is a fourth sample to the right or below the boundary, and the second parameter is calculated according to the quantization parameter and the bit depth, or when the smoothness of the boundary is 5, p0 is equal to p1 and q0 is equal to q1 and the absolute value of (p2-q2) is less than the first parameter, the filter strength is 3, where p2 is the third sample to the left or above the boundary and q2 is to the right or above the boundary This is the third sample at the bottom.
도 9는 필터링 블록의 경계의 샘플들의 개략도를 도시한다. 도 9에서 흑색 굵은 선은 필터링 블록의 경계의 특정 세그먼트를 나타낸다. 상기 필터링 블록의 상기 경계의 양측의 8개 샘플들은 각각 p0, p1, p2, p3 및 q0, q1, q2, q3으로 표시되어 있는데, 즉, p0은 상기 경계의 좌측 또는 상측의 제1 샘플이고, p1은 상기 경계의 좌측 또는 상측의 제2 샘플이며, p2는 상기 경계의 좌측 또는 상측의 제3 샘플이고, p3은 상기 경계의 좌측 또는 상측의 제4 샘플이며, q0은 상기 경계의 우측 또는 하측의 제1 샘플이고, q1은 상기 경계의 우측 또는 하측의 제2 샘플이며, q2는 상기 경계의 우측 또는 하측의 제3 샘플이고, q3은 상기 경계의 우측 또는 하측의 제4 샘플이다. 상기 필터링 블록의 각 경계에 대해, 상기 경계가 필터링되어야 하는지 여부가 결정된다. 상기 경계가 필터링되어야 하는 경우, 상기 경계의 각 세그먼트의 필터 강도가 계산되고, 상기 경계의 세그먼트의 필터 강도에 따라 디블로킹 필터링이 수행된다. 그렇지 않은 경우, 보상된 샘플의 값은 직접 디블로킹-필터링된 샘플의 값으로 취해진다.9 shows a schematic diagram of samples of the boundary of a filtering block. In Fig. 9, a black bold line indicates a specific segment of the boundary of the filtering block. 8 samples on both sides of the boundary of the filtering block are denoted as p0, p1, p2, p3 and q0, q1, q2, q3, respectively, that is, p0 is the first sample to the left or above the boundary, p1 is the second sample to the left or above the boundary, p2 is the third sample to the left or above the boundary, p3 is the fourth sample to the left or above the boundary, and q0 is the right or below the boundary is the first sample of , q1 is the second sample to the right or below the boundary, q2 is the third sample to the right or below the boundary, and q3 is the fourth sample to the right or below the boundary. For each boundary of the filtering block, it is determined whether the boundary should be filtered. When the boundary is to be filtered, the filter strength of each segment of the boundary is calculated, and deblocking filtering is performed according to the filter strength of the segment of the boundary. Otherwise, the value of the compensated sample is taken directly as the value of the deblocking-filtered sample.
예를 들면, 상기 경계의 디블로킹 필터 강도 Bs의 유도 과정은 다음과 같다. 상기 경계의 필터 강도 Bs의 값이 클수록, 상기 필터 강도가 커진다. Bs가 0인 것은 필터링이 없음을 나타낸다.For example, the derivation process of the deblocking filter strength Bs of the boundary is as follows. The larger the value of the filter strength Bs of the boundary, the greater the filter strength. Bs equal to 0 indicates no filtering.
필터링이 필요하다고 결정되는 경우, (p0-q0)의 절대값이 제1 파라미터의 4배보다 크거나 같은 경우, Bs는 0이며, 여기서 상기 제1 파라미터는 양자화 파라미터(quantization parameter: QP) 및 비트 깊이에 따라 계산된다. 그렇지 않은 경우, 상기 경계의 필터 강도 Bs를 계산하는 과정은 다음과 같다.When it is determined that filtering is required, if the absolute value of (p0-q0) is greater than or equal to 4 times the first parameter, Bs is 0, wherein the first parameter is a quantization parameter (QP) and a bit It is calculated according to the depth. Otherwise, the process of calculating the filter strength Bs of the boundary is as follows.
(1) 상기 경계의 평활도 fS를 계산하는 단계:(1) calculating the smoothness fS of the boundary:
(p0-p1)의 절대값이 제2 파라미터보다 작은 경우, 상기 경계의 좌측/상측 평활도는 2만큼 증가되며, 상기 제2 파라미터는 상기 양자화 파라미터 및 상기 비트 깊이에 따라 계산된다. (p0-p2)의 절대값이 상기 제2 파라미터보다 작은 경우, 상기 경계의 좌측/상측 평활도는 1만큼 더 증가된다. 우측/하측 평활도는 유사하게 획득된다. 상기 경계의 평활도 fS는 상기 좌측/상측 평활도와 상기 우측/하측 평활도의 합과 같다.When the absolute value of (p0-p1) is smaller than the second parameter, the left/top smoothness of the boundary is increased by 2, and the second parameter is calculated according to the quantization parameter and the bit depth. When the absolute value of (p0-p2) is smaller than the second parameter, the left/top smoothness of the boundary is further increased by one. Right/bottom smoothness is obtained similarly. The smoothness fS of the boundary is equal to the sum of the left/upper smoothness and the right/lower smoothness.
(2) 상기 경계의 평활도 fS의 값에 따라 Bs를 획득하는 단계:(2) obtaining Bs according to the value of the smoothness fS of the boundary:
fS가 6일 때, (p0-p1)의 절대값이 상기 제2 파라미터의 1/4보다 작거나 같고 (q0-q1)의 절대값이 상기 제2 파라미터의 1/4보다 작거나 같으며 (p0-p3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같고 (q0-q3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같으며 (p0-q0)의 절대값이 상기 제1 파라미터보다 작은 경우, Bs는 4이며, 그렇지 않은 경우, Bs는 3이다.When fS is 6, the absolute value of (p0-p1) is less than or equal to 1/4 of the second parameter and the absolute value of (q0-q1) is less than or equal to 1/4 of the second parameter ( The absolute value of p0-p3) is less than or equal to 1/2 of the second parameter and the absolute value of (q0-q3) is less than or equal to 1/2 of the second parameter and the absolute value of (p0-q0) is less than the first parameter, Bs is 4; otherwise, Bs is 3.
fS가 5일 때, p0이 p1과 같고 q0이 q1과 같으며 (p2-q2)의 절대값이 상기 제1 파라미터보다 작은 경우, Bs는 3이며, 그렇지 않은 경우, Bs는 2이다.When fS is 5, if p0 is equal to p1 and q0 is equal to q1 and the absolute value of (p2-q2) is less than the first parameter, Bs is 3, otherwise, Bs is 2.
도 10은 본 개시의 실시예에 따른 인코딩 장치의 블록도를 도시한다. 인코딩 장치(1000)는 컴퓨터 프로그램들이 저장된 메모리(1001), 및 상기 컴퓨터 프로그램들의 실행 시 상술된 인코딩 방법을 수행하는 프로세서(1002)를 포함한다. 상기 인코딩 장치는 코딩 효율을 향상시킬 수 있다.10 is a block diagram of an encoding apparatus according to an embodiment of the present disclosure. The
도 11은 본 개시의 실시예에 따른 디코딩 방법의 흐름도를 도시한다. 상기 방법은 블록 레벨에서 디블로킹 필터링을 이용할지 여부에 관한 것이다. 상기 방법은 현재 코딩 유닛이 화면 콘텐트인지 여부에 따라 상기 현재 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행할지 여부를 결정하는 단계(S1101), 및 상기 결정의 결과에 따라, 디블로킹-필터링된 재구성된 샘플들을 획득하기 위해 상기 현재 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하는 단계(S1102)를 포함한다. 이런 식으로, 디코딩된 이미지의 품질이 향상될 수 있다.11 shows a flowchart of a decoding method according to an embodiment of the present disclosure. The method relates to whether to use deblocking filtering at the block level. The method includes determining whether to perform deblocking filtering on the prediction-compensated samples of the current coding unit according to whether the current coding unit is picture content (S1101), and according to the result of the determination, performing deblocking filtering on the prediction-compensated samples of the current coding unit to obtain blocking-filtered reconstructed samples (S1102). In this way, the quality of the decoded image can be improved.
일 실시예에 따르면, 단계(S1101)는, 현재 디코딩된 블록이 화면 콘텐트가 아닌 경우, 상기 현재 디코딩된 블록의 재구성된 샘플들의 값들에 대해 디블로킹 필터링을 이용함을 결정하는 단계, 또는, 현재 디코딩된 블록이 화면 콘텐트인 경우, 상기 현재 디코딩된 블록의 재구성된 샘플들의 값들에 대해 디블로킹 필터링을 이용하지 않음을 결정하는 단계 중 적어도 하나를 포함한다.According to an embodiment, the step S1101 includes, when the currently decoded block is not screen content, determining to use deblocking filtering for values of reconstructed samples of the currently decoded block, or, the current decoding and determining not to use deblocking filtering on values of reconstructed samples of the currently decoded block when the block is screen content.
상기 현재 코딩 유닛은 최대 디코딩 블록이거나 아니면 디코딩 블록일 수 있으며, 이는 본 명세서에 제한되지 않는다.The current coding unit may be a largest decoding block or a decoding block, which is not limited herein.
상기 현재 디코딩된 블록이 화면 콘텐트인지 여부를 결정하기 위한 계산 방법은 다음의 방법들 중 하나이거나 또는 다른 방법일 수 있으며, 본 명세서에 제한되지 않는다. 하나의 가능한 구현은 상기 현재 디코딩된 블록과 소벨 연산자를 컨볼루션하는 것이며, 상기 현재 디코딩된 블록의 계산된 소벨 값이 특정 문턱값보다 클 때, 상기 현재 디코딩된 블록은 화면 콘텐트이다. 다른 가능한 구현은 상기 현재 디코딩된 블록의 히스토그램(histogram)을 계산하는 것이며, 상기 현재 디코딩된 블록의 샘플값 유형들의 계산된 수가 특정 문턱값보다 작을 때, 상기 현재 디코딩된 블록은 화면 콘텐트이다.A calculation method for determining whether the currently decoded block is picture content may be one of the following methods or another method, and is not limited herein. One possible implementation is to convolve the currently decoded block with a Sobel operator, and when the calculated Sobel value of the currently decoded block is greater than a certain threshold, the currently decoded block is the picture content. Another possible implementation is to calculate a histogram of the currently decoded block, wherein when the calculated number of sample value types of the currently decoded block is less than a certain threshold, the currently decoded block is the picture content.
도 12는 본 개시의 실시예에 따른 디코딩 장치의 블록도를 도시한다. 디코딩 장치(1200)는 컴퓨터 프로그램들이 저장된 메모리(1201), 및 상기 컴퓨터 프로그램들의 실행 시 도 11을 참조하여 설명된 상기 디코딩 방법을 수행하는 프로세서(1202)를 포함한다. 상기 디코딩 장치는 디코딩된 이미지의 품질을 향상시킬 수 있다.12 is a block diagram of a decoding apparatus according to an embodiment of the present disclosure. The
본 개시는 또한, 컴퓨터에 의해 실행될 때, 상기 컴퓨터로 하여금 상술된 방법들을 수행하도록 하는 비일시적 컴퓨터 판독가능 명령어들(non-transitory computer readable instructions)을 저장하는 컴퓨터 판독가능 저장 매체(computer readable storage medium)를 제공한다.The present disclosure also relates to a computer readable storage medium storing non-transitory computer readable instructions that, when executed by a computer, cause the computer to perform the methods described above. ) is provided.
본 명세서에서 설명되는 예시적 실시예들은 제한하고자 한 것이 아니다. 본 명세서에서 일반적으로 설명되고 도면들에 도시된 바와 같은 본 개시의 측면들(aspects)은 다양한 상이한 구성들로 배치(arranged), 대체(replaced), 조합(combined), 분리(separated), 및 설계될(designed) 수 있으며, 이들 모두는 본 명세서에서 고려된 것이다. 또한, 각 도면에 도시된 특징들(features)은, 문맥상 달리 지시되지 않는 한, 서로 조합하여 이용될 수 있다. 따라서, 도면들은 일반적으로 하나 이상의 전체 실시예들의 구성 부분(constituent part)으로 간주되어야 하지만, 도시된 특징들 모두가 각각의 실시예에 필수적인 것은 아님을 이해해야 할 것이다.The exemplary embodiments described herein are not intended to be limiting. Aspects of the present disclosure as generally described herein and shown in the drawings are arranged, replaced, combined, separated, and designed in a variety of different configurations. designed, all of which are contemplated herein. Also, features shown in each figure may be used in combination with each other, unless the context indicates otherwise. Accordingly, while the drawings are generally to be regarded as a constituent part of one or more overall embodiments, it is to be understood that not all illustrated features are essential to each embodiment.
이상 본 개시는 특정 구현들을 참조하여 예시 및 설명되었지만, 본 개시가 속하는 기술분야의 숙련된 자들이라면 청구범위에 의해 정의된 바와 같은 본 개시의 사상 및 범위를 벗어나지 않고 다양한 변경 및 변형이 이루어질 수 있음을 이해할 것이다.Although the present disclosure has been illustrated and described with reference to specific implementations, various changes and modifications may be made by those skilled in the art to which the present disclosure pertains without departing from the spirit and scope of the present disclosure as defined by the claims. will understand
Claims (15)
상기 예측된 샘플 행렬에 따라 재구성된(reconstructed) 샘플 행렬을 획득하는 단계를 포함하고,
상기 예측된 샘플 행렬의 요소들(elements)의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되는, 디코딩 방법.
obtaining a predicted sample matrix of a current prediction block; and
obtaining a reconstructed sample matrix according to the predicted sample matrix,
and values of elements of the predicted sample matrix are obtained according to values of samples in a filtered reconstructed sample matrix of a current image.
상기 현재 예측 블록을 포함하는 현재 최대 코딩 유닛(current maximum coding unit) 내의 디코딩된(decoded) 예측-보상된(predictively-compensated) 샘플들; 및 디코딩된 최대 코딩 유닛(decoded maximum coding unit)의 예측-보상된 샘플들에 대해 디블로킹 필터링(deblocking filtering) 및 샘플 적응적 오프셋(sample adaptive offset)을 수행하여 획득된 샘플들을 포함하는, 디코딩 방법.
The method of claim 1, wherein the filtered reconstructed sample matrix comprises:
decoded prediction-compensated samples within a current maximum coding unit containing the current prediction block; and samples obtained by performing deblocking filtering and sample adaptive offset on prediction-compensated samples of a decoded maximum coding unit. .
상기 현재 예측 블록의 블록 벡터에 의해 지목된 참조 블록이 완전히 상기 현재 최대 코딩 유닛 외부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 상기 샘플들의 값들에 따라 획득되고,
상기 현재 예측 블록의 상기 블록 벡터에 의해 지목된 상기 참조 블록의 일부는 상기 현재 최대 코딩 유닛 외부에 위치하고 상기 참조 블록의 나머지 일부는 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 상기 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들의 값들에 따라 획득되며,
상기 현재 예측 블록의 상기 블록 벡터에 의해 지목된 상기 참조 블록이 완전히 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들의 값들에 따라 획득되는, 디코딩 방법.
3. The method of claim 2,
When the reference block pointed to by the block vector of the current prediction block is completely outside the current largest coding unit, the values of the elements of the predicted sample matrix are all the prediction-compensated values of the decoded largest coding unit. is obtained according to the values of the samples obtained by performing deblocking filtering and sample adaptive offset on the samples,
When a part of the reference block pointed to by the block vector of the current prediction block is located outside the current largest coding unit and the other part of the reference block is located inside the current largest coding unit, Some of the values of the elements are obtained according to values of the samples obtained by performing deblocking filtering and sample adaptive offset on the prediction-compensated samples of the decoded largest coding unit, and the predicted sample matrix the remaining part of the values of the elements of , are obtained according to the values of the decoded prediction-compensated samples in the current largest coding unit,
When the reference block pointed to by the block vector of the current prediction block is completely located inside the current largest coding unit, the values of the elements of the predicted sample matrix are all the decoded prediction within the current largest coding unit. - a decoding method, obtained according to the values of the compensated samples.
현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들; 및
디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함하는, 디코딩 방법.
The method of claim 1, wherein the filtered reconstructed sample matrix comprises:
samples obtained by performing deblocking filtering on decoded prediction-compensated samples within the current largest coding unit; and
A decoding method comprising samples obtained by performing deblocking filtering and sample adaptive offset on prediction-compensated samples of a decoded largest coding unit.
상기 현재 예측 블록의 블록 벡터에 의해 지목된 참조 블록이 완전히 상기 현재 최대 코딩 유닛 외부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 상기 샘플들의 값들에 따라 획득되고,
상기 현재 예측 블록의 상기 블록 벡터에 의해 지목된 상기 참조 블록의 일부는 상기 현재 최대 코딩 유닛 외부에 위치하고 상기 참조 블록의 나머지 일부는 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링 및 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 샘플들의 값들에 따라 획득되며,
상기 현재 예측 블록의 상기 블록 벡터에 의해 지목된 상기 참조 블록이 완전히 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하여 획득된 상기 샘플들의 값들에 따라 획득되는, 디코딩 방법.
5. The method of claim 4,
When the reference block pointed to by the block vector of the current prediction block is completely outside the current largest coding unit, the values of the elements of the predicted sample matrix are all the prediction-compensated values of the decoded largest coding unit. is obtained according to the values of the samples obtained by performing deblocking filtering and sample adaptive offset on the samples,
When a part of the reference block pointed to by the block vector of the current prediction block is located outside the current largest coding unit and the other part of the reference block is located inside the current largest coding unit, Some of the values of the elements are obtained according to values of samples obtained by performing deblocking filtering and sample adaptive offset on the prediction-compensated samples of the decoded largest coding unit, The remaining part of the values of the elements are obtained according to values of samples obtained by performing deblocking filtering on the decoded prediction-compensated samples in the current largest coding unit,
When the reference block pointed to by the block vector of the current prediction block is completely located inside the current largest coding unit, the values of the elements of the predicted sample matrix are all the decoded prediction within the current largest coding unit. - A decoding method, obtained according to values of the samples obtained by performing deblocking filtering on compensated samples.
현재 최대 코딩 유닛 내의 디코딩된 예측-보상된 샘플들; 및
디코딩된 최대 코딩 유닛의 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들을 포함하는, 디코딩 방법.
The method of claim 1, wherein the filtered reconstructed sample matrix comprises:
decoded prediction-compensated samples within the current largest coding unit; and
A decoding method comprising samples obtained by performing sample adaptive offset on prediction-compensated samples of a decoded largest coding unit.
상기 현재 예측 블록의 블록 벡터에 의해 지목된 참조 블록이 완전히 상기 현재 최대 코딩 유닛 외부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고,
상기 현재 예측 블록의 상기 블록 벡터에 의해 지목된 상기 참조 블록의 일부는 상기 현재 최대 코딩 유닛 외부에 위치하고 상기 참조 블록의 나머지 일부는 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 일부는 상기 디코딩된 최대 코딩 유닛의 상기 예측-보상된 샘플들에 대해 샘플 적응적 오프셋을 수행하여 획득된 샘플들의 값들에 따라 획득되고, 상기 예측된 샘플 행렬의 상기 요소들의 값들의 나머지 일부는 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들의 값들에 따라 획득되며,
상기 블록 벡터에 의해 지목된 상기 참조 블록이 완전히 상기 현재 최대 코딩 유닛 내부에 위치할 때, 상기 예측된 샘플 행렬의 상기 요소들의 값들은 모두 상기 현재 최대 코딩 유닛 내의 상기 디코딩된 예측-보상된 샘플들의 값들에 따라 획득되는, 디코딩 방법.
7. The method of claim 6,
When the reference block pointed to by the block vector of the current prediction block is completely outside the current largest coding unit, the values of the elements of the predicted sample matrix are all the prediction-compensated values of the decoded largest coding unit. is obtained according to values of samples obtained by performing a sample adaptive offset on the samples,
When a part of the reference block pointed to by the block vector of the current prediction block is located outside the current largest coding unit and the other part of the reference block is located inside the current largest coding unit, Some of the values of the elements are obtained according to values of samples obtained by performing sample adaptive offset on the prediction-compensated samples of the decoded largest coding unit, and the values of the elements of the predicted sample matrix The remaining parts of s are obtained according to the values of the decoded prediction-compensated samples in the current largest coding unit,
When the reference block pointed to by the block vector is completely located inside the current largest coding unit, the values of the elements of the predicted sample matrix are all of the decoded prediction-compensated samples in the current largest coding unit. A decoding method obtained according to the values.
상기 컴퓨터 프로그램들의 실행 시 디코딩 방법을 수행하는 프로세서를 포함하되, 상기 방법은:
현재 예측 블록의 예측된 샘플 행렬을 획득하는 단계; 및
상기 예측된 샘플 행렬에 따라 재구성된 샘플 행렬을 획득하는 단계를 포함하는, 디코딩 장치로서,
상기 예측된 샘플 행렬의 요소들의 값들은 현재 이미지의 필터링된 재구성된 샘플 행렬 내의 샘플들의 값들에 따라 획득되는, 디코딩 장치.
a memory in which computer programs are stored, and
a processor for performing a decoding method upon execution of the computer programs, the method comprising:
obtaining a predicted sample matrix of the current prediction block; and
A decoding apparatus comprising: obtaining a reconstructed sample matrix according to the predicted sample matrix,
and values of elements of the predicted sample matrix are obtained according to values of samples in a filtered reconstructed sample matrix of a current image.
상기 식별자를 비트스트림(bitstream) 내에 추가하는 단계를 포함하는, 인코딩 방법.
determining, according to whether the current frame to be encoded is screen content, an identifier indicating whether to use deblocking filtering for the current frame to be encoded; and
and adding the identifier into a bitstream.
인코딩될 상기 현재 프레임이 화면 콘텐트인 경우, 상기 식별자가 인코딩될 상기 현재 프레임에 대해 디블로킹 필터링을 이용하지 않음을 지시하는 단계; 또는
인코딩될 상기 현재 프레임이 화면 콘텐트가 아닌 경우, 상기 식별자가 상기 현재 프레임에 대해 디블로킹 필터링을 이용함을 지시하는 단계를 포함하는, 인코딩 방법.
The method of claim 9, wherein determining the identifier comprises:
when the current frame to be encoded is screen content, the identifier indicates that deblocking filtering is not used for the current frame to be encoded; or
if the current frame to be encoded is not screen content, indicating that the identifier uses deblocking filtering for the current frame.
상기 식별자에 기초하여, 인코딩될 상기 현재 프레임의 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행할지 여부를 결정하는 단계를 더 포함하는, 인코딩 방법.
10. The method of claim 9,
determining, based on the identifier, whether to perform deblocking filtering on prediction-compensated samples of the current frame to be encoded.
경계가 필터링되어야 한다고 결정되는 경우, (p0-q0)의 절대값이 제1 파라미터의 4배보다 크거나 같을 때, 필터 강도를 0으로 결정하는 단계로서, p0은 상기 경계의 좌측 또는 상측의 제1 샘플이고, q0은 상기 경계의 우측 또는 하측의 제1 샘플이며, 상기 제1 파라미터는 양자화 파라미터(quantization parameter) 및 비트 깊이(bitdepth)에 따라 계산되는, 단계;
상기 경계의 평활도(smoothness)가 6일 때, (p0-p1)의 절대값이 제2 파라미터의 1/4보다 작거나 같고 (q0-q1)의 절대값이 상기 제2 파라미터의 1/4보다 작거나 같으며 (p0-p3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같고 (q0-q3)의 절대값이 상기 제2 파라미터의 1/2보다 작거나 같으며 상기 (p0-q0)의 절대값이 상기 제1 파라미터보다 작은 경우, 상기 필터 강도를 4로 결정하는 단계로서, p1은 상기 경계의 좌측 또는 상측의 제2 샘플이고, q1은 상기 경계의 우측 또는 하측의 제2 샘플이며, p3은 상기 경계의 좌측 또는 상측의 제4 샘플이고, q3은 상기 경계의 우측 또는 하측의 제4 샘플이며, 상기 제2 파라미터는 상기 양자화 파라미터 및 상기 비트 깊이에 따라 계산되는, 단계; 및
상기 경계의 상기 평활도가 5일 때, p0가 p1과 같고 q0가 q1과 같으며 (p2-q2)의 절대값이 상기 제1 파라미터보다 작은 경우, 상기 필터 강도를 3으로 결정하는 단계로서, p2는 상기 경계의 좌측 또는 상측의 제3 샘플이고 q2는 상기 경계의 우측 또는 하측의 제3 샘플인 단계를 포함하는, 인코딩 방법.
The method of claim 11 , wherein determining whether to perform the deblocking filtering comprises:
When it is determined that the boundary should be filtered, when the absolute value of (p0-q0) is greater than or equal to 4 times the first parameter, determining the filter strength to be 0, wherein p0 is the second of the left or upper side of the boundary. 1 sample, q0 is a first sample to the right or below the boundary, wherein the first parameter is calculated according to a quantization parameter and a bitdepth;
When the smoothness of the boundary is 6, the absolute value of (p0-p1) is less than or equal to 1/4 of the second parameter and the absolute value of (q0-q1) is greater than 1/4 of the second parameter. less than or equal to and the absolute value of (p0-p3) is less than or equal to 1/2 of the second parameter and the absolute value of (q0-q3) is less than or equal to 1/2 of the second parameter, and the (p0) -q0) is less than the first parameter, determining the filter strength as 4, wherein p1 is a second sample on the left or above the boundary, and q1 is the second sample on the right or below the boundary. 2 samples, p3 is a fourth sample on the left or above the boundary, q3 is a fourth sample on the right or below the boundary, and the second parameter is calculated according to the quantization parameter and the bit depth. ; and
When the smoothness of the boundary is 5, when p0 is equal to p1, q0 is equal to q1, and the absolute value of (p2-q2) is less than the first parameter, determining the filter strength as 3, p2 is the third sample to the left or above the boundary and q2 is the third sample to the right or below the boundary.
상기 컴퓨터 프로그램들의 실행 시 인코딩 방법을 수행하는 프로세서를 포함하되, 상기 방법은:
인코딩될 현재 프레임이 화면 콘텐트인지 여부에 따라, 인코딩될 상기 현재 프레임에 대해 디블로킹 필터링을 이용할지 여부를 지시하는 식별자를 결정하는 단계; 및
상기 식별자를 비트스트림 내에 추가하는 단계를 포함하는, 인코딩 장치.
a memory in which computer programs are stored, and
A processor for performing an encoding method upon execution of the computer programs, the method comprising:
determining, according to whether the current frame to be encoded is screen content, an identifier indicating whether to use deblocking filtering for the current frame to be encoded; and
and adding the identifier into a bitstream.
상기 결정의 결과에 따라, 디블로킹-필터링된 재구성된 샘플들을 획득하기 위해 상기 현재 코딩 유닛의 상기 예측-보상된 샘플들에 대해 디블로킹 필터링을 수행하는 단계를 포함하는, 디코딩 방법.
determining whether to perform deblocking filtering on prediction-compensated samples of the current coding unit according to whether the current coding unit is picture content; and
performing deblocking filtering on the prediction-compensated samples of the current coding unit to obtain deblocking-filtered reconstructed samples according to the result of the determination.
상기 현재 디코딩된 블록이 화면 콘텐트가 아닌 경우, 상기 현재 디코딩된 블록의 상기 재구성된 샘플들의 값들에 대해 디블로킹 필터링을 이용함을 결정하는 단계; 또는
상기 현재 디코딩된 블록이 화면 콘텐트인 경우, 상기 현재 디코딩된 블록의 상기 재구성된 샘플들의 값들에 대해 디블로킹 필터링을 이용하지 않음을 결정하는 단계 중 적어도 하나를 포함하는, 디코딩 방법.
15. The method of claim 14, wherein determining whether to use deblocking filtering on values of reconstructed samples of the currently decoded block according to whether the currently decoded block is picture content comprises:
determining to use deblocking filtering for values of the reconstructed samples of the currently decoded block when the currently decoded block is not picture content; or
and when the currently decoded block is picture content, determining not to use deblocking filtering for values of the reconstructed samples of the currently decoded block.
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010188807.8 | 2020-03-17 | ||
| CN202010188807.8A CN113411584A (en) | 2020-03-17 | 2020-03-17 | Video coding and decoding method and device |
| PCT/KR2021/003211 WO2021187855A1 (en) | 2020-03-17 | 2021-03-16 | Method and apparatus for video encoding and decoding |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20220124287A true KR20220124287A (en) | 2022-09-13 |
| KR102585236B1 KR102585236B1 (en) | 2023-10-05 |
Family
ID=77677197
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020227029747A KR102585236B1 (en) | 2020-03-17 | 2021-03-16 | Video encoding and decoding methods and devices |
Country Status (4)
| Country | Link |
|---|---|
| EP (1) | EP4122198A4 (en) |
| KR (1) | KR102585236B1 (en) |
| CN (1) | CN113411584A (en) |
| WO (1) | WO2021187855A1 (en) |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160072181A (en) * | 2013-10-14 | 2016-06-22 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | Features of intra block copy prediction mode for video and image coding and decoding |
| JP2018530955A (en) * | 2015-09-08 | 2018-10-18 | 聯發科技股▲ふん▼有限公司Ｍｅｄｉａｔｅｋ Ｉｎｃ． | Intra block copy mode decoded picture buffer method and system |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101310536B (en) * | 2005-09-27 | 2010-06-02 | 高通股份有限公司 | Video encoding method enabling highly efficient partial decoding of H.264 and other transform coded information |
| US8879635B2 (en) * | 2005-09-27 | 2014-11-04 | Qualcomm Incorporated | Methods and device for data alignment with time domain boundary |
| WO2012150849A2 (en) * | 2011-05-04 | 2012-11-08 | 한국전자통신연구원 | Video encoding/decoding method using error resilient loop filter, and signaling method thereof |
| TWI577191B (en) * | 2011-11-03 | 2017-04-01 | 太陽專利信託 | Filtering of blocks coded in the pulse code modulation mode |
| US9538200B2 (en) * | 2012-01-19 | 2017-01-03 | Qualcomm Incorporated | Signaling of deblocking filter parameters in video coding |
| CN109889853A (en) * | 2019-02-26 | 2019-06-14 | 北京大学深圳研究生院 | A kind of block-eliminating effect filtering method, system, equipment and computer-readable medium |
| CN114640845B (en) * | 2021-02-23 | 2023-02-28 | 杭州海康威视数字技术股份有限公司 | Encoding and decoding method, device and equipment thereof |
-
2020
- 2020-03-17 CN CN202010188807.8A patent/CN113411584A/en active Pending
-
2021
- 2021-03-16 EP EP21772159.6A patent/EP4122198A4/en active Pending
- 2021-03-16 WO PCT/KR2021/003211 patent/WO2021187855A1/en unknown
- 2021-03-16 KR KR1020227029747A patent/KR102585236B1/en active IP Right Grant
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160072181A (en) * | 2013-10-14 | 2016-06-22 | 마이크로소프트 테크놀로지 라이센싱, 엘엘씨 | Features of intra block copy prediction mode for video and image coding and decoding |
| JP2018530955A (en) * | 2015-09-08 | 2018-10-18 | 聯發科技股▲ふん▼有限公司Ｍｅｄｉａｔｅｋ Ｉｎｃ． | Intra block copy mode decoded picture buffer method and system |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2021187855A1 (en) | 2021-09-23 |
| EP4122198A4 (en) | 2024-04-24 |
| CN113411584A (en) | 2021-09-17 |
| EP4122198A1 (en) | 2023-01-25 |
| KR102585236B1 (en) | 2023-10-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN114586370B (en) | Method, apparatus and medium for using chroma quantization parameters in video encoding and decoding | |
| AU2015206771B2 (en) | Intra block copy prediction with asymmetric partitions and encoder-side search patterns, search ranges and approaches to partitioning | |
| CN111988606B (en) | Deblocking filtering method, corresponding encoding device and storage medium | |
| JP2019071632A (en) | Method for deblocking block of video sample | |
| JP2022526664A (en) | Parameter derivation in cross-component mode | |
| US10542271B2 (en) | Method and apparatus for major color index map coding | |
| US20110261880A1 (en) | Boundary adaptive intra prediction for improving subjective video quality | |
| WO2021110116A1 (en) | Prediction from multiple cross-components | |
| KR20130102603A (en) | Apparatus and method of sample adaptive offset for video coding | |
| CN114402609A (en) | Chroma quantization parameter in video coding and decoding | |
| US11159814B2 (en) | Image coding/decoding method, coder, decoder, and storage medium | |
| CN114009033A (en) | Method and apparatus for signaling symmetric motion vector difference mode | |
| KR20160146590A (en) | Image encoding method and image decoding method and apparatus using adaptive deblocking filtering | |
| US11991399B2 (en) | Apparatus and method for de-blocking filtering | |
| JP2021519018A (en) | Image processing devices and methods for performing efficient deblocking | |
| KR20230145002A (en) | Image decoding method and apparatus using inter picture prediction | |
| KR102585236B1 (en) | Video encoding and decoding methods and devices | |
| KR20210070368A (en) | Video image element prediction method and apparatus, computer storage medium | |
| EP3598759B1 (en) | Systems and methods for deblocking filtering | |
| CN113395520B (en) | Decoding prediction method, device and computer storage medium | |
| KR20210099125A (en) | Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and computer program | |
| RU2815738C2 (en) | Determination of chromaticity coding mode using matrix-based intra-frame prediction | |
| WO2023197998A1 (en) | Extended block partition types for video coding | |
| KR102586198B1 (en) | Image decoding method and apparatus using inter picture prediction |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A302 | Request for accelerated examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |