KR20210106547A - 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체 - Google Patents

디코딩 예측 방법, 장치 및 컴퓨터 저장 매체 Download PDF

Info

Publication number
KR20210106547A
KR20210106547A KR1020217023381A KR20217023381A KR20210106547A KR 20210106547 A KR20210106547 A KR 20210106547A KR 1020217023381 A KR1020217023381 A KR 1020217023381A KR 20217023381 A KR20217023381 A KR 20217023381A KR 20210106547 A KR20210106547 A KR 20210106547A
Authority
KR
South Korea
Prior art keywords
reference pixel
point
pixel point
decoding
determining
Prior art date
Application number
KR1020217023381A
Other languages
English (en)
Inventor
준옌 훠
옌주오 마
슈아이 완
푸쩡 양
씬웨이 리
Original Assignee
광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드 filed Critical 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드
Publication of KR20210106547A publication Critical patent/KR20210106547A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

본 출원의 실시예는 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체를 개시하며, 상기 디코딩 예측 방법은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하는 단계; 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계; 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하는 단계; 및 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계를 포함한다.

Description

디코딩 예측 방법, 장치 및 컴퓨터 저장 매체
본 출원의 실시예는 비디오 코딩 및 디코딩의 기술 분야에 관한 것으로, 특히 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체(decoding prediction method and apparatus, and computer storage medium)에 관한 것이다.
비디오 디스플레이 품질에 대한 사람들의 요구 사항이 증가함에 따라, 고화질 및 초 고화질 비디오 등과 같은 새로운 비디오 애플리케이션이 등장한다. H.265/고효율 비디오 코딩(High Efficiency Video Coding, HEVC)은 현재 최신 국제 비디오 압축 표준이고, H.265/HEVC의 압축 성능은 이전 세대의 비디오 코딩 표준 H.264/고효율 비디오 코딩(Advanced Video Coding, AVC)보다 약 50% 높지만, 여전히 비디오 애플리케이션, 특히 초고화질 및 가상 현실(Virtual Reality, VR) 등 새로운 비디오 애플리케이션의 신속한 발전의 수요를 만족시킬 수 없다.
국제 통신 연합 전기 통신 표준화 섹터(International Telecommunication Union Telecommunication Standardization Sector, ITU-T)의 비디오 코딩 전문가 그룹 및 국제 표준화 기구 (International Standardization Organization, ISO)/국제 전기 기술 위원회(International Electrotechnical Commission, IEC)의 동화상 전문가 그룹은 차세대의 비디오 코딩 표준을 제정하기 위해 2015년에 연합 동화상 연구팀(Joint Video Exploration Team, JVET)을 설립하였다. 공동 탐사 시험 모델(Joint Exploration Test Model, JEM)은 범용 참조 소프트웨어 플랫폼이며, 상기 플랫폼을 기반으로 상이한 코딩 도구가 검증된다. 차세대 비디오 코딩 표준은 2018년 4월 JVET에서 다용도 비디오 부호화(Versatile Video Coding, VVC)로 공식적으로 명명되었으며, 상응하는 테스트 모델은 VVC 테스트 모델(Versatile Video Coding Test Model, VTM)이다. JEM 및 VTM 참조 소프트웨어에서는, 선형 모델을 기반으로 한 코딩 및 디코딩 예측 방법이 통합되어, 상기 선형 모델을 통해 현재 디코딩될 블록의 휘도 구성 요소에 따라 색도 구성 요소를 예측한다. 그러나 선형 모델을 구성할 때, 인접 기준 픽셀에 의해 형성된 인접 기준 픽셀 서브 세트가 그다지 합리적이지 않음으로 인해, 검색 복잡도가 상대적으로 높아지고, 비디오 이미지의 디코딩 예측 성능이 저하된다.
이를 고려하여, 본 출원의 실시예는 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체를 제공할 것을 소망하고, 인접 기준 픽셀 서브 세트에서의 인접 기준 픽셀은 중요성 및 분산성을 고려할 뿐만 아니라, 인접 기준 픽셀 서브 세트에서의 픽셀 수도 적음으로써, 검색의 복잡도를 저하시키고, 비디오 이미지 디코딩의 예측 성능을 향상시킴으로써, 비트 레이트를 저하시킨다.
본 출원의 실시예의 기술방안은 다음과 같이 구현될 수 있다.
제1 측면에 있어서, 본 출원의 실시예는 디코딩 예측 방법을 제공하며, 상기 디코딩 예측 방법은,
디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하는 단계;
상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계;
상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하는 단계; 및
상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계를 포함한다.
제2 측면에 있어서, 본 출원의 실시예는 디코딩 예측 장치를 제공하고, 상기 디코딩 예측 장치는 획득 유닛, 결정 유닛, 선택 유닛 및 디코딩 유닛을 포함하며,
상기 획득 유닛은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하도록 구성되며;
상기 결정 유닛은, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성되며;
상기 선택 유닛은, 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하도록 구성되며;
상기 디코딩 유닛은, 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하도록 구성된다.
제3 측면에 있어서, 본 출원의 실시예는 디코딩 예측 장치를 제공하고, 상기 디코딩 예측 장치는 메모리 및 프로세서를 포함하며;
상기 메모리는, 상기 프로세서에서 작동 가능한 컴퓨터 프로그램을 저장하기 위한 것이며;
상기 프로세서는, 상기 컴퓨터 프로그램이 작동될 때, 제1 측면에 따른 디코딩 예측 방법의 단계를 실행하기 위한 것이다.
제4 측면에 있어서, 본 출원의 실시예는 컴퓨터 저장 매체를 제공하며, 상기 컴퓨터 저장 매체에는 디코딩 예측 프로그램이 저장되고, 상기 디코딩 예측 프로그램은 적어도 하나의 프로세서에 의해 실행될 때 제1 측면의 디코딩 예측 방법의 단계를 구현한다.
본 출원의 실시예는 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체를 제공하여, 먼저 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하고; 그 다음 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하며; 다음으로 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하며; 마지막으로 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하며; 상기 인접 기준 픽셀 서브 세트에서 인접 기준 픽셀 포인트의 선택이 중요성 및 분산성을 고려하기 때문에, 상기 인접 기준 픽셀 서브 세트에 기반하여 형성된 모델 파라미터는 비교적 정확하므로, 비디오 이미지 디코딩의 예측 성능이 향상되도록 할 수 있으며; 또한 상기 인접 기준 픽셀 서브 세트에서의 픽셀 수가 비교적 적음으로써, 또한 검색의 복잡도를 저하시키고, 비디오 이미지 디코딩의 예측 성능을 항상시킴으로써, 비트 레이트를 저하시킨다.
도 1a 내지 도 1c는 각각 관련 기술방안에서 비디오 이미지 샘플링 포맷의 구조 모식도이다.
도 2a 및 도 2b는 각각 관련 기술방안에서 디코딩 블록의 제1 이미지 구성 요소 인접 기준값 및 제2 이미지 구성 요소 인접 기준값의 샘플링 모식도이다.
도 3은 관련 기술방안에서 디코딩 블록이 최대 값 및 최소 값에 기반하여 예측 모델을 형성하는 구조 모식도이다.
도 4a 및 도 4b는 각각 관련 기술방안에서 제공되는 스퀘어 디코딩 블록 및 넌 스퀘어(non-square) 디코딩 블록이 인접 기준 픽셀 포인트를 선택하는 구조 모식도이다.
도 5a 및 도 5b는 각각 관련 기술방안에서 제공되는 종래 기술방안 및 L0138 제안에 따라 인접 기준 픽셀 포인트를 선택하는 구조 모식도이다.
도 6은 본 출원의 실시예에서 제공되는 비디오 코딩 시스템의 구성 블록도 모식도이다.
도 7은 본 출원의 실시예에서 제공되는 다른 비디오 디코딩 시스템의 구성 블록도 모식도이다.
도 8은 본 출원의 실시예에서 제공되는 디코딩 예측 방법의 흐름 모식도이다.
도 9는 본 출원의 실시예에서 제공되는 디코딩될 블록의 상부 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 구조 모식도이다.
도 10은 본 출원의 실시예에 따라 제공되는 디코딩될 블록 좌측 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 구조 모식도이다.
도 11은 본 출원의 실시예에서 제공되는 다른 디코딩될 블록 상부 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 다른 구조 모식도이다.
도 12는 본 출원의 실시예에서 제공되는 또 다른 디코딩될 블록 상부 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 다른 하나의 구조 모식도이다.
도 13은 본 출원의 실시예에서 제공되는 또 다른 디코딩될 블록 상부 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 또 다른 구조 모식도이다.
도 14는 본 출원의 실시예에서 제공되는 또 다른 디코딩될 블록 상부 측면 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 또 다른 구조 모식도이다.
도 15는 본 출원의 실시예에서 제공되는 디코딩 예측 장치의 구성 구조 모식도이다.
도 16은 본 출원의 실시예에서 제공한 디코딩 예측 장치의 구체적인 하드웨어 구조 모식도이다.
본 출원의 실시예의 특징 및 기술적 내용을 더욱 상세하게 이해하기 위해, 아래에 도면을 결합하여 본 출원의 실시예의 구현을 상세히 반복 설명하며, 첨부된 도면은 다만 참조로 설명을 위한 것이며, 본 출원의 실시예를 한정하려는 것은 아니다.
비디오 이미지에서, 제1 이미지 구성 요소, 제2 이미지 구성 요소 및 제3 이미지 구성 요소는 일반적으로 디코딩 블록을 나타내기 위해 채택되며; 여기서, 세 가지 이미지 구성 요소는 각각 휘도 구성 요소, 블루 색도 구성 요소 및 레드 색도 구성 요소이며, 구체적으로, 휘도 구성 요소는 일반적으로 부호 Y로 표시되고, 블루 색도 구성 요소는 일반적으로 부호 Cb로 표시되며, 레드 색도 구성 요소는 일반적으로 부호 Cr을 사용하여 표시된다.
본 출원의 실시예에서, 제1 이미지 구성 요소는 휘도 구성 요소(Y)일 수 있고, 제2 이미지 구성 요소는 블루 색도 구성 요소(Cb)일 수 있으며, 제3 이미지 구성 요소는 레드 그로마 구성 요소(Cr)일 수 있지만, 본 출원의 실시예에서 이에 대해 구체적으로 한정하지 않는다. 현재 일반적으로 사용되는 샘플링 포맷은 YCbCr 포맷이고, YCbCr 포맷은 각각 도 1a 내지 도 1c에 도시된 바와 같이 아래의 타입을 포함하며, 여기서, 도면에서의 엑스(X)는 제1 이미지 구성 요소 샘플링 포인트를 나타내고, 원(○)은 제2 이미지 구성 요소 또는 제3 이미지 구성 요소 샘플링 포인트를 나타낸다. YCbCr 포맷은 다음의 포맷을 포함한다.
4:4:4 포맷에 있어서, 도 1a에 도시된 바와 같이, 제2 이미지 구성 요소 또는 제3 이미지 구성 요소가 다운 샘플링되지 않음을 나타내며; 이는 각 스캔 라인에서의 4개의 연속적인 픽셀 포인트마다 제1 이미지 구성 요소의 4개의 샘플링 샘플, 제2 이미지 구성 요소의 4개의 샘플링 샘플 및 제3 이미지 구성 요소의 4개의 샘플링 샘플을 추출하는 것이다.
4:2:2 포맷에 있어서, 도 1b에 도시된 바와 같이, 제1 이미지 구성 요소가 제2 이미지 구성 요소 또는 제3 이미지 구성 요소에 비해 2:1의 수평 샘플링을 수행하고, 수직 다운 샘플링이 없음을 나타내며; 이는 각 스캔 라인에서의 4개의 연속적인 픽셀 포인트마다 제1 이미지 구성 요소의 4개의 샘플링 샘플, 제2 이미지 구성 요소의 2개의 샘플링 샘플 및 제3 이미지 구성 요소의 2개의 샘플링 샘플을 추출하는 것이다.
4:2:0 포맷에 있어서, 도 1c에 도시된 바와 같이, 제1 이미지 구성 요소가 제2 이미지 구성 요소 또는 제3 이미지 구성 요소에 비해 2:1의 수평 다운 샘플링 및 2:1의 수직 다운 샘플링을 수행함을 나타내며; 이는 수평 스캔 라인 및 수직 스캔 라인에서의 2개의 연속적인 픽셀 포인트마다 제1 이미지 구성 요소의 2개의 샘플링 샘플, 제2 이미지 구성 요소의 하나의 샘플링 샘플 및 제2 이미지 구성 요소의 하나의 샘플링 샘플을 추출하는 것이다.
비디오 이미지가 YCbCr가 4:2:0인 포맷을 채택할 경우, 비디오 이미지의 제1 이미지 구성 요소가 2N×2N 크기의 디코딩 블록이면, 대응되는 제2 이미지 구성 요소 또는 제3 이미지 구성 요소는 N×N 크기의 디코딩 블록이며, 여기서 N은 디코딩 블록의 사이드 길이이다. 본 출원의 실시예에서, 아래에 4:2:0 포맷을 예로 들어 설명하지만, 본 출원의 실시예의 기술방안은 다른 샘플 포맷에도 마찬가지로 적용된다.
차세대 비디오 코딩 표준 H.266에서는, 코딩 및 디코딩 성능을 추가로 향상시키기 위해, 크로스 컴포넌트 예측(Cross-component Prediction, CCP)에 대해 확장 개선을 수행하여, 크로스 컴포넌트 선형 모델 예측(Cross-component Linear Model Prediction, CCLM)을 제안하였다. H.266에서는, CCLM은 제1 이미지 구성 요소로부터 제2 이미지 구성 요소까지, 제1 이미지 구성 요소로부터 제3 이미지 구성 요소까지, 제2 이미지 구성 요소와 제3 이미지 구성 요소 간의 예측을 구현하며, 이하 제1 이미지 구성 요소로부터 제2 이미지 구성 요소까지의 예측을 예를 들어 설명하지만, 본 출원의 실시예의 기술방안은 다른 이미지 구성 요소의 예측에도 마찬가지로 적용될 수 있다.
이해할 수 있는 것은, 제1 이미지 구성 요소와 제2 이미지 구성 요소 간의 중복을 줄이기 위해, VTM에서 CCLM의 예측 모델을 사용하며, 이때 제1 이미지 구성 요소 및 제2 이미지 구성 요소는 동일한 디코딩 블록이고, 상기 제2 이미지 구성 요소는 동일한 디코딩 블록의 제1 이미지 구성 요소 재구성된 값에 기반하여 예측되며, 예를 들어 공식(1)에 도시된 예측 모델을 사용한다.
Figure pct00001
(1)
여기서,
Figure pct00002
,
Figure pct00003
는 디코딩 블록에서 픽셀 포인트의 위치 좌표를 나타내고,
Figure pct00004
는 수평 방향을 나타내며,
Figure pct00005
는 수직 방향을 나타내고,
Figure pct00006
는 디코딩 블록에서 위치 좌표가
Figure pct00007
인 픽셀 포인트에 대응되는 제2 이미지 구성 요소 예측값을 나타내며,
Figure pct00008
는 동일한 디코딩 블록에서(다운 샘플링 후) 위치 좌표가
Figure pct00009
인 픽셀 포인트에 대응되는 제1 이미지 구성 요소 재구성된 값을 나타내고,
Figure pct00010
및
Figure pct00011
는 상기 예측 모델의 모델 파라미터이다.
모델 파라미터
Figure pct00012
및
Figure pct00013
를 형성하는 방식은 복수 개이며, 최소 제곱으로 평가하는 회귀 구성 방식일 수 있고, 최대 값과 최소 값의 형성 방식일 수도 있으며, 심지어 다른 형성 방식일 수도 있으며, 본 출원의 실시예는 이에 대해 구체적으로 한정하지 않는다. 아래에 각각 최소 제곱에 기반하는 회귀 형성 방식 및 최대 값과 최소 값의 형성 방식을 예를 들어 설명한다.
VCC에서는, 처음에는 최소 제곱에 기반하는 회귀 형성 모델 파라미터의 유도 방법을 수락하였으며, 구체적으로, 디코딩 블록 주위의 제1 이미지 구성 요소 인접 기준값 및 제2 이미지 구성 요소 인접 기준값의 회귀 오차를 최소화하는 것을 통해 유도하여 획득할 수 있으며, 예들 들어 공식 (2)에 도시된
Figure pct00014
및
Figure pct00015
와 같다.
Figure pct00016
(2)
여기서,
Figure pct00017
은 다운 샘플링 후 좌측 사이드 및 상부 사이드에 대응되는 제1 이미지 구성 요소 인접 기준값을 나타내고,
Figure pct00018
은 좌측 사이드 및 상부 사이드에 대응되는 제2 이미지 구성 요소 인접 기준값을 나타내며, N은 제2 이미지 구성 요소 디코딩 블록의 사이드 길이이고,
Figure pct00019
이다. 도 2a 및 도 2b를 참조하면, 관련 기술방안에서 디코딩 블록의 제1 이미지 구성 요소 인접 기준값 및 제2 이미지 구성 요소 인접 기준값의 샘플링 모식도를 각각 도시하며; 여기서, 도 2a에서는, 굵은 큰 블록은 제1 이미지 구성 요소 디코딩 블록(21)을 강조하여 나타내기 위한 것이고, 회색 실선 원은 제1 이미지 구성 요소 디코딩 블록(21)의 인접 기준값(
Figure pct00020
)을 나타내기 위한 것이며; 도 2b에서는, 굵은 큰 블록은 제2 이미지 구성 요소 디코딩 블록(22)을 강조하여 나타내기 위한 것이고, 회색 실선 원은 제2 이미지 구성 요소 디코딩 블록(22)의 인접 기준값(
Figure pct00021
)을 나타내기 위한 것이다. 도 2a는 2N×2N 크기의 제1 이미지 구성 요소 디코딩 블록(21)을 도시하고, 4:2:0 포맷의 비디오 이미지의 경우, 2N×2N 크기의 제1 이미지 구성 요소에 대응되는 제2 이미지 구성 요소의 크기는 N×N이며, 도 2b에서의 22에 도시된 바와 같으며; 즉, 도 2a 및 도 2b는 동일한 디코딩 블록에 대해 제1 이미지 구성 요소 샘플링 및 제2 이미지 구성 요소 샘플링을 각각 수행하여 획득된 디코딩 블록 모식도이다.
VCC에서는, 최근에 간략화된 모델 파라미터의 유도 방법을 수락하였으며, 구체적으로, 최대의 제1 이미지 구성 요소 인접 기준값 및 최소의 제1 이미지 구성 요소 인접 기준값을 검색하는 것을 통해, "두 점이 하나의 라인을 결정하는" 원리에 따라 모델 파라미터를 유도할 수 있으며, 예를 들어 공식 (3)에 도시된
Figure pct00022
및
Figure pct00023
와 같다.
Figure pct00024
(3)
여기서,
Figure pct00025
및
Figure pct00026
는 다운 샘플링 후 좌측 사이드 및 상부 사이드에 대응되는 제1 이미지 구성 요소 인접 기준값에서 검색하여 획득된 최대 값 및 최소 값을 나타내고,
Figure pct00027
및
Figure pct00028
는
Figure pct00029
및
Figure pct00030
에 대응되는 위치의 기준 픽셀 포인트에 대응되는 제2 이미지 구성 요소 인접 기준값을 나타낸다. 도 3을 참조하면, 관련 기술방안에서 디코딩 블록이 최대 값 및 최소 값에 기반하여 예측 모델을 형성하는 구조 모식도를 도시하며; 여기서, 횡좌표는 디코딩 블록의 제1 이미지 구성 요소 인접 기준값을 나타내고, 종좌표는 디코딩 블록의 제2 이미지 구성 요소 인접 기준값을 나타내며,
Figure pct00031
,
Figure pct00032
,
Figure pct00033
및
Figure pct00034
에 따라, 공식 (3)을 통해 모델 파라미터
Figure pct00035
및
Figure pct00036
를 계산하여 획득할 수 있고, 구축된 예측 모델은
Figure pct00037
이며; 여기서 L은 디코딩 블록에서 하나의 픽셀 포인트에 대응되는 제1 이미지 구성 요소 재구성된 값을 나타내고, C는 디코딩 블록에서 상기 픽셀 포인트에 대응되는 제2 이미지 구성 요소 예측값을 나타낸다.
CCLM에서 인접 기준 픽셀 포인트 세트의 형성을 위해, 종래 기술에는 여러 가지 경우가 존재하며, 아래에 이에 대해 각각 설명한다.
(a) 디코딩 블록의 형태에 대해 구별을 수행하는 경우에 있어서,
도 4a를 참조하면, 관련 기술방안에서 제공되는 스퀘어 디코딩 블록에서 인접 기준 픽셀 포인트를 선택하는 구조 모식도를 도시하며; 도 4a에 도시된 바와 같이, 상기 디코딩 블록은 스퀘어 디코딩 블록이고, 상기 디코딩 블록의 좌측 사이드 및 상부 사이드에 대응되는 모든 인접 픽셀 포인트는 모두 기준 픽셀 포인트로 사용될 수 있으며; 제1 이미지 구성 요소에 대해 먼저 다운 샘플링을 수행해야 하므로, 다운 샘플링 후 제1 이미지 구성 요소와 제2 이미지 구성 요소는 동일한 해상도를 갖는다. 도 4a에서는, 회색 실선 원은 스퀘어 디코딩 블록에 의해 선택된 인접 기준 픽셀 포인트를 나타내기 위한 것이다.
도 4b를 참조하면, 관련 기술방안에서 제공되는 넌 스퀘어 디코딩 블록에서 인접 기준 픽셀 포인트를 선택하는 구조 모식도를 도시하며; 도 4b에 도시된 바와 같이, 상기 디코딩 블록은 넌 스퀘어 디코딩 블록이고, 상기 디코딩 블록의 너비 및 높이는 동일하지 않다. 한편으로, 제1 이미지 구성 요소에 대해 먼저 다운 샘플링을 수행해야 하므로, 다운 샘플링 후 제1 이미지 구성 요소와 제2 이미지 구성 요소는 동일한 해상도를 가지며; 다른 한편으로, 상기 디코딩 블록의 긴 사이드에 대응되는 인접 픽셀 포인트에 대해 추가적인 다운 샘플링을 수행해야 하므로, 긴 사이드에서 획득된 인접 기준 픽셀 포인트 개수가 짧은 사이드의 인접 기준 픽셀 포인트 개수와 동일하도록 한다. 도 4b에서는, 회색 실선 원은 넌 스퀘어 디코딩 블록에 의해 선택된 인접 기준 픽셀 포인트를 나타내기 위한 것이다.
(b) 디코딩 블록 좌측 사이드 또는 상부 사이드에 대응되는 인접 픽셀 포인트의 존재성을 구별하는 경우에 있어서,
디코딩 블록 좌측 사이드 및 상부 사이드에 대응되는 인접 픽셀 포인트가 모두 사용 가능할 경우, 상부 사이드에 인접한 행의 픽셀 포인트와 좌측 사이드에 인접한 열의 인접 픽셀 포인트는 모두 인접 기준 픽셀 포인트로 사용될 수 있으며;
디코딩 블록 좌측 사이드 또는 상부 사이드에 대응되는 인접 픽셀 포인트 중 하나의 사이드만 사용 가능할 경우, 유효 사이드에 대응되는 인접 픽셀 포인트를 인접 기준 픽셀 포인트로 사용할 수 있으며;
디코딩 블록 좌측 사이드 및 상부 사이드에 대응되는 인접 픽셀 포인트가 모두 사용 불가할 경우, 인접 기준 픽셀 포인트는 존재하지 않으며, 모델 파라미터(
Figure pct00038
)를 0으로 설정하고, 모델 파라미터(
Figure pct00039
)를 제2 이미지 구성 요소의 중간 값(512)으로 설정하며, 즉 디코딩 블록 내의 모든 픽셀 포인트에 대응되는 제2 이미지 구성 요소 예측값은 모두 512이다.
설명해야 할 것은, N을 제2 이미지 구성 요소 디코딩 블록 짧은 사이드의 길이로 정의하면, 디코딩 블록 좌측 사이드 및 상부 사이드에 대응되는 인접 픽셀 포인트가 모두 사용 가능할 경우, CCCL에서 총 2N 개의 인접 기준 픽셀 포인트가 사용될 수 있다. 또한, 특별한 설명 이외에, 아래는 모두 디코딩 블록 좌측 사이드 및 상부 사이드에 대응되는 인접 픽셀 포인트가 모두 사용 가능할 경우에 대해 설명한 것이다.
(c) 인접 기준 픽셀 서브 세트(샘플 축소)의 방안에 있어서,
CCLM의 모델 파라미터를 계산하는 과정에서, 필요한 연산 복잡도는 CCLM을 위한 인접 기준 픽셀 포인트의 개수와 정비례한다. 이로써, 연산 복잡도를 줄이기 위해, JVET 제12차 회의의 L0138에서는 디코딩될 블록에 대응되는 제2 이미지 구성 요소 블록의 크기에 기반하여 CCML을 위한 인접 기준 픽셀 포인트 개수를 줄이는 기술 방안을 제안하였다. 표 1을 참조하면, 관련 기술방안에서 제공되는 디코딩될 블록에 대응되는 제2 이미지 구성 요소 블록의 크기와 인접 기준 픽셀 포인트 개수 간의 관계 표를 도시한다. 표 1에서는, N1은 종래 기술방안에서 CCLM을 위한 인접 기준 픽셀 포인트 개수이고, N2는 L0138 제안에서 제공된 샘플 축소 후 CCLM을 위한 인접 기준 픽셀 포인트 개수이다. 구체적으로, L0138 제안에서의 샘플 축소 방법은 종래 기술방안에서 인접 기준 픽셀 포인트를 획득한 후 다운 샘플링하여 획득하는 것이다.
Figure pct00040
(d) 인접 기준 픽셀 포인트의 다운 샘플링 방안에 있어서,
넌 스퀘어 디코딩 블록의 경우, VTM에서 긴 사이드에 대한 다운 샘플링 방안(도 4b에 도시된 바와 같이)을 제공하였다. 전술한 L0138 제안과 같이, 상기 제안에서 추가로 샘플 축소된 다운 샘플링 세트를 제안하였다.
L0138 제안에서, 다운 샘플링 과정에서 인접 기준 픽셀 포인트의 선택은 디코딩 예측 성능에 영향을 미칠 수 있고, VTM에서 디폴트된 다운 샘플링 방안에 따라 획득된 인접 기준 픽셀 포인트 서브 세트에 대응되는 디코딩 예측 성능은 그다지 이상적이지 않으므로, L0138 제안은 다운 샘플링 시 다른 인접 기준 픽셀 포인트 서브 세트를 채택할 수 있는 선택 방안을 제안하였다. 구체적으로, VTM에서 사용된 종래 기술방안에서는, 넌 스퀘어 디코딩 블록의 긴 사이드에 대해 다운 샘플링을 수행할 경우, 디코딩 블록 상부 사이드에 대응되는 인접 행의 픽셀 포인트의 경우 가장 좌측 가장자리부터 포인트의 선택이 시작되고, 좌측사이드에 대응되는 인접 열의 픽셀 포인트의 경우 가장 상부 가장자리부터 포인트의 선택이 시작되며; L0138 제안에서는 종래 기술방안의 반대쪽 가장자리부터 포인트를 선택하는 방안을 제안하였고, 구체적으로 도 5a 및 도 5b에 도시된 포인트를 선택하는 구조 예를 참조할 수 있다.
도 5a를 참조하면, 관련 기술방안에서 제공되는 종래 기술방안이 인접 기준 픽셀 포인트를 선택하는 구조 모식도를 도시하며; 도 5a에 도시된 바와 같이, 상기 디코딩 블록 긴 사이드에 대응되는 인접 행의 픽셀 포인트의 경우 가장 좌측 가장자리의 픽셀 포인트로부터 포인트 샘플링의 선택이 시작되며; 도 5b를 참조하면, 관련 기술방안에서 제공되는 L0138 제안은 인접 기준 픽셀 포인트를 선택하는 구조 모식도를 도시하며; 도 5b에 도시된 바와 같이, 상기 디코딩 블록 긴 사이드에 대응되는 인접 행의 픽셀 포인트의 경우 가장 우측 가장자리의 픽셀 포인트로부터 포인트 샘플링의 선택이 시작되며; 여기서 샘플링 간격은 종래 기술방안과 동일하며, 본 출원의 실시예에서는 더이상 반복하여 설명하지 않는다. L0138 제안의 포인트 선택 방안을 이용하면, 모든 인접 기준점 픽셀의 값의 범위는 CCLM의 모델 파라미터 계산에서 전면적으로 커버될 수 있지만, 각 인접 기준 픽셀 포인트의 중요성을 고려하지 않았으므로, 개수가 제한된 전제 하에서, 긴 사이드의 전반적인 특성이 여전히 최대한으로 표현되지 않을 수 있다.
관련 기술방안에서, 한편으로 연산 복잡도를 고려할 때, VTM에서는 2N 개의 포인트에서 최대 제1 이미지 구성 요소 인접 기준값 및 최소 제1 이미지 구성 요소 인접 기준값을 검색하는 것을 수락하였지만, “두 포인트가 하나의 라인을 결정하는” 원칙에 따라 모델 파라미터(공식(3)을 참조)를 유도한다. 상기 방안은 두 개의 인접 기준 픽셀 포인트만 이용하므로, 최소 제곱에 기반하는 회귀 구성 모델 파라미터의 연산에 비해 복잡도가 대폭 감소되며; 하지만 상기 방안은 여전히 많이 복잡하며, 이는 주로 인접 기준 픽셀 포인트 세트 내에서 최대 값 및 최소 값을 결정해야 하므로, 이로써 최대 값 및 최소 값을 결정하려면 4N 회의 비교 연산 작업을 실행해야 하기 때문이다. 디코딩 블록의 길이가 길수록, CCLM을 위한 인접 기준 픽셀 포인트 개수가 더욱 많아져, 최대 값 및 최소 값을 결정하기 위한 검색 횟수도 더 많아지므로, 상기 방안의 연산 복잡도가 여전히 높다. 다른 한편으로 예측 정확도를 고려하면, 최대 값 및 최소 값을 검색하는 과정에서, 검색으로 획득된 픽셀 포인트와 현재 디코딩 블록의 연관 관계가 낮으면, 상기 픽셀 포인트가 불량 포인트인 것으로 결정할 수 있다. 이로써, 검색으로 획득된 두 개의 픽셀 포인트에 불량 포인트가 포함되면, 예측 모델에 대해 상대적으로 큰 모델 오차를 초래할 수 있다. 따라서, 최대 값 및 최소 값에 기반한 형성 모델 파라미터의 방법은 상대적으로 복잡도가 낮지만, 로버스트성이 떨어지므로, 디코딩 예측 성능이 저하되도록 한다.
이에 기반하여, 현재 최신의 L0138 제안은 인접 기준 픽셀 서브 세트의 개념을 제안하였으며, 상기 단점을 개선하여, 인접 기준 픽셀 포인트 개수를 감소시킬 뿐만 아니라, 연산 복잡도가 추가로 저하되도록 하였으며; 또한 적절한 위치의 픽셀 포인트(도 5b에 도시된 바와 같이)를 선택하는 것을 통해, 디코딩 예측 성능이 약간 향상되었지만, 상기 방안은 여전히 향상될 여지가 존재한다.
코딩 및 디코딩 예측 성능을 향상시키기 위해, 본 출원의 실시예는 디코딩 예측 방법을 제공하고, 상기 디코딩될 블록 중 적어도 하나의 사이드의 중심점을 기준점으로 하는 것을 통해, 기설정된 샘플링 개수에 따라 선택될 기준 픽셀 포인트 위치를 결정하여, 중요성 및 분산성을 고려하여 선택된 인접 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트에 입력하며; 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하며; 이로써, 상기 인접 기준 픽셀 서브 세트에 기반하여 형성된 모델 파라미터가 더욱 정확하므로, 디코딩 예측 성능이 향상되도록 할 수 있으며; 또한 상기 인접 기준 픽셀 서브 세트에서의 픽셀 수가 적음으로써, 검색의 복잡도를 저하시킴으로써, 비트 레이트를 저하시킨다. 아래에 도면을 결합하여 본 출원의 각 실시예에 상세하게 설명한다.
도 6을 참조하면, 본 출원의 실시예는 비디오 코딩 시스템의 구성 블록도 예를 도시하며; 도 6에 도시된 바와 같이, 상기 비디오 코딩 시스템(600)은 변환 및 양자화(601), 인트라 프레임 추정(602), 인트라 프레임 예측(603), 움직임 보상(604), 움직임 추정(605), 역변환 및 역 양자화(606), 필터 제어 분석(607), 디 블로킹 필터링 및 샘플 적응 오프셋(Sample Adaptive 0ffset, SAO) 필터링(608), 헤더 정보 코딩 및 컨텍스트 기반 적응 이진 산술 코딩(Context-based Adaptive Binary Arithmatic Coding, CABAC)(609) 및 디코딩된 이미지 캐시(610) 등과 같은 부재를 포함하며; 입력된 원본 비디오 신호의 경우, 코딩 트리 유닛(Coding Tree Unit, CTU)을 할당하는 것을 통해 비디오 코딩 블록을 획득할 수 있으며, 인트라 프레임 또는 인터 프레임 예측 후 획득된 잔여 픽셀 정보는 변환 및 양자화(601)를 통해 상기 비디오 코딩 블록에 대해 변환을 수행하고, 잔여 정보를 픽셀 도메인으로부터 변환 도메인으로 변환하는 것을 포함하며, 획득된 변환 계수에 대해 양자화를 수행하여, 비트 레이트를 추가로 감소시키며; 인트라 프레임 추정(602) 및 인트라 프레임 예측(603)은 상기 비디오 코딩 블록에 대해 인트라 프레임 예측을 수행하기 위한 것이며; 정확히, 인트라 프레임 추정(602) 및 인트라 프레임 예측(603)은 상기 비디오 코딩 블록을 코딩하는데 사용될 인트라 프레임 예측 모드를 결정하기 위한 것이며; 움직임 보상(604) 및 움직임 추정(605)은 시간 예측 정보를 제공하기 위해 수신된 비디오 코딩 블록이 하나 또는 복수 개의 기준 프레임에서의 하나 또는 복수 개의 블록에 대한 인터 프레임 예측 코딩을 실행하기 위한 것이며; 움직임 추정(605)에서 수행되는 움직임 추정은 움직임 벡터를 생성하는 과정이고, 상기 움직임 벡터는 상기 비디오 코딩 블록의 움직임을 추정할 수 있으며, 그 다음, 움직임 보상(604)은 움직임 추정(605)에 의해 결정된 움직임 벡터에 기반하여 움직임 보상을 수행하며; 인트라 프레임 예측 모드를 결정한 후, 인트라 프레임 예측(603)은 또한 선택된 인트라 프레임 예측 데이터를 헤더 정보 코딩 및 CABAC(609)에 제공하기 위한 것이고, 움직임 추정(605)은 계산하여 결정된 움직임 벡터 데이터도 헤더 정보 코딩 및 CABAC(609)에 송신하며; 또한, 역변환 및 역 양자화(606)는 상기 비디오 코딩 블록의 재구성에 사용되고, 픽셀 도메인에서 잔여 블록을 재구성하며, 상기 재구성된 잔여 블록은 필터 제어 분석(607) 및 디 블로킹 필터링 및 SAO 필터링(608)을 통해 블록 아티팩트를 제거한 다음, 상기 재구성된 잔여 블록을 디코딩 이미지 캐시(610)의 프레임에서의 예측 블록에 추가하여, 재구성된 비디오 코딩 블록을 생성하는데 사용되며; 헤더 정보 코딩 및 CABAC(609)는 다양한 코딩 파라미터 및 양자화된 변환 계수를 코딩하기 위한 것이고, CABAC에 기반한 코딩 알고리즘에서, 컨텍스트 콘텐츠는 인접한 코딩 블록에 기반할 수 있으며, 결정된 인트라 프레임 예측 모드를 코딩하여 지시하여, 상기 비디오 신호의 비트 스트림을 출력하는데 사용되며; 디코딩 이미지 캐시(610)는 재구성된 비디오 코딩 블록을 저장하기 위한 것이며, 예측 기준에 사용된다. 비디오 이미지 코딩이 수행됨에 따라, 새로운 재구성된 비디오 코딩 블록을 계속 생성하며, 이러한 재구성된 비디오 코딩 블록은 디코딩 이미지 캐시(610)에 모두 저장될 수 있다.
도 7을 참조하면, 본 출원의 실시예에서 제공한 비디오 디코딩 시스템의 구성 블록도 예를 도시하며; 도 7에 도시된 바와 같이, 상기 비디오 디코딩 시스템(700)은 헤더 정보 디코딩 및 CABAC 디코딩(701), 역변환 및 역 양자화(702), 인트라 프레임 예측(703), 움직임 보상(704), 디 블로킹 필터링 및 SAO 필터링(705) 및 디코딩 이미지 캐시(706) 등 부재를 포함하며; 입력된 비디오 신호는 도 6의 코딩 처리를 거친 후, 상기 비디오 신호의 비트 스트림을 출력하며; 상기 비트 스트림은 비디오 디코딩 시스템(700)에 입력되고, 먼저 헤더 정보 및 CABAC 디코딩(701)을 통해, 디코딩된 변환 계수를 획득하기 위한 것이며; 상기 변환 계수는 역 변환 및 역 양자화(702)를 통해 처리되어, 픽셀 도메인에서 잔여 블록을 생성하는데 용이하며; 인트라 프레임 예측(703)은 결정된 인트라 프레임 예측 모드 및 현재 프레임 또는 픽처로부터의 이전 디코딩 블록의 데이터에 기반하여 현재 비디오 디코딩 블록의 예측 데이터를 생성하는데 사용될 수 있으며; 움직임 보상(704)은 움직임 벡터 및 다른 관련 신택스 요소를 분석하여 비디오 디코딩 블록을 위한 예측 정보를 결정하고, 상기 예측 정보를 사용하여 현재 디코딩되고 있는 비디오 디코딩 블록의 예측 블록을 생성하며; 역 변환 및 역 양자화(702)로부터의 잔여 블록과 인트라 프레임 예측(703) 또는 움직임 보상(704)에 의해 생성된 대응되는 예측 블록을 합산하는 것을 통해, 디코딩된 비디오 블록을 형성하며; 상기 디코딩된 비디오 신호는 상기 디 블로킹 필터링 및 SAO 필터링(705)을 통해 블록 아티팩트를 제거하여, 비디오 품질을 개선시킬 수 있으며; 다음, 디코딩된 비디오 블록을 디코딩 이미지 캐시(706)에 저장하고, 디코딩 이미지 캐시(706)는 후속 인트라 프레임 예측 또는 움직임 보상을 위한 기준 이미지를 저장하고, 이와 동시에 비디오 신호를 출력하는데도 사용되며, 즉 복원된 원본 비디오 신호를 획득한다.
본 출원의 실시예는 주로 도 6에 도시된 인트라 프레임 예측(603) 부분 및 도 7에 도시된 인트라 프레임 예측(703) 부분에 적용되며; 즉, 본 출원의 실시예는 코딩 시스템에 적용될 수 있을 뿐만 아니라, 디코딩 시스템에도 적용될 수 있지만, 본 출원의 실시예는 이에 대해 구체적으로 한정하지 않는다.
상기 도 6 또는 도 7에 도시된 응용 시나리오 예에 기반하여, 도 8을 참조하면, 본 출원의 실시예에서 제공되는 디코딩 예측 방법의 흐름 모식도를 도시하며, 상기 디코딩 예측 방법은 다음의 단계를 포함할 수 있다.
단계 S801에 있어서, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득한다.
단계 S802에 있어서, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정한다.
단계 S803에 있어서, 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성한다.
단계 S804에 있어서, 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행한다.
설명해야 할 것은, 디코딩될 블록은 현재 제2 이미지 구성 요소 예측 또는 제3 이미지 구성 요소 예측이 수행될 디코딩 블록이다. 디코딩될 블록 중 적어도 하나의 사이드는 디코딩될 블록의 상부 사이드를 가리킬 수 있고, 디코딩될 블록의 좌측 사이드를 가리킬 수도 있으며, 디코딩될 블록의 상부 사이드 및 좌측 사이드를 가리킬 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
더 설명해야 할 것은, 기준점은 상기 적어도 하나의 사이드의 중심점일 수 있고, 상기 적어도 하나의 사이드의 중심점 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치일 수도 있으며, 또한 상기 적어도 하나의 사이드의 중심점 우측에 위치하는 제1 기준 픽셀 포인트 위치일 수 있으며, 심지어 또한 상기 적어도 하나의 사이드의 다른 기준 픽셀 포인트 위치일 수 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
본 출원의 실시예에서, 본 출원의 실시예의 디코딩 예측 방법은 마찬가지로 코딩 시스템에 적용될 수 있으며, 코딩 시스템에서 인접 기준 픽셀 서브 세트를 형성하는 것을 통해, 비디오 이미지의 코딩 예측 성능을 향상시킬 수 있고, 코딩 압축 효율을 향상시켜, 코딩 비트율을 절약한다. 아래에 다만 디코딩 시스템에서 인접 기준 픽셀 서브 세트를 형성하는 것을 예를 들어 설명한다.
본 출원의 실시예에서, 먼저 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하고; 그 다음 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하며; 다음으로 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하며; 마지막으로 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하며; 본 출원의 실시예에서 더 이상 디코딩될 블록의 상부 사이드 또는 좌측 사이드에 인접하는 모든 기준 픽셀 포인트를 디코딩 예측에 참여시키는 검색 연산이 아니라, 중요성 및 분산성을 고려하는 전제 하 에서, 적절한 위치의 인접 기준 픽셀을 선택하여 인접 기준 픽셀 서브 세트를 구성하므로, 상기 인접 기준 픽셀 서브 세트에서의 픽셀 수가 적어져, 검색의 복잡도를 저하시킬 뿐만 아니라, 또한 디코딩 예측 성능을 향상시킴으로써, 비트 레이트를 저하시킬 수 있다.
일부 실시예에 있어서, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하는 단계는,
상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점을 결정하는 단계 - 상기 적어도 하나의 사이드의 중심점을 상기 기준점으로 사용함 - 를 포함한다.
일부 실시예에 있어서, 상기 기준점이 상기 적어도 하나의 사이드의 중심점일 경우, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하는 단계는,
상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 우측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하는 단계를 포함한다.
설명해야 할 것은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트의 중요성이 이에 대응되는 위치와 관련됨을 고려하여, 인접 기준 픽셀 서브 세트에서의 기준 픽셀 포인트가 전체 인접한 사이드의 특성을 나타낼 수 있도록 하기 위해, 상기 사이드의 중앙 위치의 기준 픽셀 포인트를 최대한으로 선택하여, 중요성이 비교적 낮은 포인트(예를 들어 상기 사이드의 양쪽 가장자리에서의 기준 픽셀 포인트)를 제거해야 한다. 본 출원의 실시예에서, 디코딩될 블록 상부 사이드를 예로 들어 설명하면, 중간 위치의 우측 또는 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 사이드의 기준점으로 사용할 수 있다.
예시적으로, 도 9를 참조하면, 본 출원의 실시예에서 제공되는 디코딩될 블록 상부 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 구조 모식도를 도시한다. 도 9에 도시된 바와 같이, 디코딩될 블록의 상부 사이드에 분포된 모든 기준 픽셀 포인트의 경우, 상기 사이드의 중심점을 중심(예를 들어 도 9에서 도시된 점선 위치)으로서 선택하고, 상기 중심을 기준점으로 사용하여 기준 픽셀 포인트의 선택을 수행한다. 상기 디코딩 블록 상부의 사이드 길이가 16이고, 기설정된 샘플링 개수가 4이면, 샘플링 간격 Δ가 16/4=4인 것을 획득할 수 있다. 이로써, 상부 사이드의 길이가 16이므로, 중심점이 7과 8 사이인 것으로 결정할 수 있으며, 즉, 중심점은 7로 선택할 수 있고, 8로 선택할 수도 있으며; 도 9에서는, 8을 기준점으로 선택하는 것을 예를 들면, 기설정된 샘플링 개수가 4이므로, 선택될 기준 픽셀 포인트 위치(예를 들어 도 9에서 회색 포인트로 도시됨)가 2, 6, 10 및 14인 것으로 결정할 수 있으며; 이러한 기준 픽셀 포인트 위치에 따라 이에 대응되는 기준 픽셀 포인트를 선택할 수 있어, 이러한 포인트로 인접 기준 픽셀 서브 세트를 구성할 수 있다.
일부 실시예에 있어서, 상기 기준점이 상기 적어도 하나의 사이드의 중심점일 경우, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하는 단계는,
상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 하부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 상부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하는 단계를 포함한다.
설명해야 할 것은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트의 중요성이 이에 대응되는 위치와 관련됨을 고려하여, 인접 기준 픽셀 서브 세트에서의 기준 픽셀 포인트가 전체 인접한 사이드의 특성을 나타낼 수 있도록 하기 위해, 상기 사이드의 중앙 위치의 기준 픽셀 포인트를 최대한으로 선택하여, 중요성이 비교적 낮은 포인트(예를 들어 상기 사이드의 양쪽 가장자리에서 기준 픽셀 포인트)를 제거해야 한다. 본 출원의 실시예에서, 디코딩될 블록 좌측 사이드를 예로 들어 설명하면, 중간 위치의 하부 또는 상부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 사이드의 기준점으로 사용할 수 있다.
예시적으로, 도 10을 참조하면, 본 출원의 실시예에서 제공되는 디코딩될 블록 좌측 사이드에 대응되는 인접 기준 픽셀 서브 세트를 선택하는 구조 모식도를 도시한다. 도 10에 도시된 바와 같이, 디코딩될 블록의 좌측 사이드에 분포된 모든 기준 픽셀 포인트의 경우, 상기 사이드의 중심점을 중심(예를 들어 도 10에서 도시된 점선 위치)으로서 선택하고, 상기 중심을 기준점으로 사용하여 기준 픽셀 포인트의 선택을 수행한다. 상기 디코딩 블록 상부의 사이드 길이가 8이고, 기설정된 샘플링 개수가 2이면, 샘플링 간격 Δ가 8/2=4인 것을 획득할 수 있다. 이로써, 좌측 사이드의 길이가 8이므로, 중심점이 3과 4 사이인 것으로 결정할 수 있으며, 즉, 중심점은 3으로 선택할 수 있고, 4로 선택할 수도 있으며; 도 10에서는, 4를 기준점으로 선택하는 것을 예를 들면, 기설정된 샘플링 개수가 2이므로, 선택될 기준 픽셀 포인트 위치(예를 들어 도 10에서 회색 포인트로 도시됨)가 2 및 6인 것으로 결정할 수 있으며; 이러한 기준 픽셀 포인트 위치에 따라 이에 대응되는 기준 픽셀 포인트를 선택할 수 있어, 이러한 포인트로 인접 기준 픽셀 서브 세트를 구성할 수 있다.
실제 응용에서, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 사이드 길이가 2의 정수배이기 때문에, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 중간 위치는 두 포인트 사이에 위치한다. 도 9의 예에서, 중간 위치의 우측에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용하지만; 본 출원의 실시예에서는 도 11에 도시된 구조 예에 도시된 바와 같이, 중간 위치의 좌측에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용할 수도 있다. 도 11에서는, 중간 위치의 좌측에 위치하는 첫 번째 픽셀 포인트(예를 들어 도 11에서의 3)를 상기 사이드의 중심점으로 사용하고, 기설정된 샘플링 개수가 2이므로, 선택될 기준 픽셀 포인트 위치(예를 들어 도 11에서 회색 포인트로 도시됨)가 1 및 5인 것으로 결정할 수 있으며, 이러한 기준 픽셀 포인트 위치에 따라 이에 대응되는 기준 픽셀 포인트를 선택하여, 이러한 포인트로 인접 기준 픽셀 서브 세트를 구성할 수도 있다. 따라서, 본 출원의 실시예에서, 디코딩될 블록의 상부 사이드의 경우, 중간 위치의 우측에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용할 수 있고, 중간 위치의 좌측에 있는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용할 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않으며; 또한, 디코딩될 블록의 좌측 사이드의 경우, 중간 위치의 하부에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용할 수 있을 뿐만 아니라, 중간 위치의 상부에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용할 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
별도의 설명 외에, 아래에 디코딩될 블록의 상부 사이드를 예를 들어 설명하지만, 본 출원의 실시예의 예측 방법은 디코딩될 블록의 좌측 사이드, 심지어는 디코딩될 블록의 다른 사이드에 마찬가지로 적용된다.
이해할 수 있는 것은, 디코딩될 블록 좌측 사이드 또는 상부 사이드에 인접 기준 픽셀 포인트의 존재성을 고려하지 않으면, 또한 공식 (4) 및 공식 (5)에 따라 인접 기준 픽셀 서브 세트의 형성을 수행할 수 있다.
Figure pct00041
(4)
Figure pct00042
(5)
여기서, Δ는 샘플링 간격을 나타내고, length는 디코딩될 블록의 상부 사이드에 인접한 행의 기준 픽셀 포인트의 개수, 또는 디코딩될 블록의 좌측 사이드에 인접한 열의 기준 픽셀 포인트의 개수를 나타내며, N2는 디코딩될 블록에 의해 형성될 것으로 소망하는 인접 기준 픽셀 포인트 개수(일반적으로, 좌측 사이드 및 상부 사이드는 각각 1/2이지만, 본 출원의 실시예는 구체적으로 한정하지 않음)를 나타내고, shift는 기준 픽셀 포인트를 선택하는 시작점 위치를 나타낸다. 여기서, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 중간 위치가 두 포인트 사이에 위치할 때, 중간 위치의 우측에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용하면, 시작점 위치는
Figure pct00043
이며; 중간 위치의 좌측에 위치하는 첫 번째 픽셀 포인트를 상기 사이드의 중심점으로 사용하면, 시작점 위치는
Figure pct00044
이다.
예시적으로, 도 9에 도시된 상부 사이드를 예로 들면, length는 16이며, N2는 8이며, 좌측 사이드 및 상부 사이드가 각각 1/2이면, 즉 상부 사이드의 기설정된 샘플링 개수가 4이면,
Figure pct00045
및
Figure pct00046
는 공식(4) 및 공식(5)에 따라 각각 계산되어 획득되고, 즉 2를 시작점 위치로 하고, 4를 샘플링 간격으로 하여, 먼저 선택될 기준 픽셀 포인트 위치를 결정할 수 있으며, 예를 들어 2, 6, 10 및 14임으로써, 대응되는 기준 픽셀 포인트를 선택하여, 인접 기준 픽셀 서브 세트를 구성할 수 있다. 여기서, 유의해야 할 것은, 좌측 사이드에 대응되는 기설정된 샘플링 개수 및 상부 사이드에 대응되는 기설정된 샘플링 개수는 동일할 수 있고, 상이할 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
또한, 본 출원의 실시예는 표 2에 도시된 바와 같이 기설정된 샘플링 개수를 결정하기 위한 방안을 더 제공한다. 이로써, 본 출원의 실시예에서는 또한 표 2에서의 N2'로 N2를 대체할 수 있으며, 이를 상기 공식(4) 및 공식(5)에 대입하여 계산하여, 구성된 인접 기준 픽셀 서브 세트가 더욱 정확하도록 한다. 이로써 디코딩 예측 성능을 향상시킨다.
표 2를 참조하면, 본 출원의 실시예에서 제공되는 디코딩될 블록에 대응되는 제2 이미지 구성 요소 블록의 크기와 인접 기준 픽셀 포인트 개수 간의 관계 표를 도시한다. 표 2에서는, N은 디코딩될 블록 짧은 사이드의 길이를 나타내고, N1은 종래 기술방안에서 제공되는 인접 기준 픽셀 포인트 개수를 나타내며, N2는 L0138 제안에서 제공되는 인접 기준 픽셀 포인트 개수이고, N2'는 본 출원의 실시예에서 제공되는 인접 기준 픽셀 포인트 개수를 나타낸다. 표 2에 따르면, 디코딩될 블록 짧은 사이드의 길이가 4보다 작거나 같을 때, 인접 기준 픽셀 서브 세트에는 4개의 기준 픽셀 포인트가 포함될 수 있으며; 디코딩될 블록 짧은 사이드의 길이가 4보다 클 때, 인접 기준 픽셀 서브 세트에는 8 개의 기준 픽셀 포인트가 포함될 수 있다.
Figure pct00047
일부 실시예에 있어서, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
상기 기설정된 샘플링 개수 및 상기 적어도 하나의 사이드의 길이에 기반하여, 제1 샘플링 간격을 계산하여 획득하는 단계; 및
상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계를 포함한다.
선택적으로, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하는 단계;
상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하는 단계; 및
상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계를 포함한다.
선택적으로, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하는 단계;
상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하는 단계; 및
상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계를 포함한다.
설명해야 할 것은, 기설정된 샘플링 개수 및 디코딩될 블록의 사이드의 길이에 따라, 상기 사이드에 대응되는 제1 샘플링 간격을 획득할 수 있다. 또한, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 사이드 길이는 2의 정수 배이기 때문에, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 중간 위치는 모두 두 포인트 사이에 위치하며, 이때 획득된 중심점 값은 정수가 아니고, 획득된 기준 픽셀 포인트 위치도 정수가 아니며; 그러나 디코딩될 블록 좌측 사이드 또는 상부 사이드의 사이드 길이가 2의 정수 배가 아니면, 디코딩될 블록 좌측 사이드 또는 상부 사이드의 중간 위치는 두 포인트 사이에 위치하지 않으며, 이때 획득된 중심점 값은 정수이고, 계산하여 획득된 기준 픽셀 포인트 위치도 정수이며; 즉, 계산하여 획득된 중심점 값은 정수일 수 있고, 정수가 아닐 수도 있으며; 이에 대응되게, 획득된 기준 픽셀 포인트 위치는 정수일 수 있고, 정수가 아닐 수도 있으며; 본 출원의 실시예에서 구체적으로 한정하지 않는다.
이로써, 획득된 중심점 값이 정수일 때, 이에 대응되게, 획득된 기준 픽셀 포인트 위치도 정수이며, 이때 직접 계산하여 획득된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 사용할 수 있으며; 계산하여 획득된 중심점 값이 정수가 아닐 때, 이에 대응되게, 계산하여 획득된 기준 픽셀 포인트 위치도 정수가 아니며, 이때 라운딩 업 또는 라운딩 다운을 통해 선택될 기준 픽셀 포인트 위치를 결정할 수 있다.
예를 들어, 도 11에 도시된 상부 사이드를 예로 들면, 기설정된 샘플링 개수가 2개이고, 상부 사이드의 길이가 8이면, 제1 샘플링 간격이 4인 것으로 결정할 수 있다. 상부 사이드의 길이가 8이므로, 상부 사이드의 중간 위치는 두 포인트 사이에 위치한다. 기준 픽셀 포인트 배열은 0부터 시작하여 7에서 종료되기 때문에, 계산을 통해 상부 사이드의 중심점 실제 위치가 3.5인 것을 획득할 수 있으며; 제1 샘플링 간격이 4이기 때문에, 중심점의 좌우 양측에서 각각 4/2 개의 포인트를 이동하면, 기준점 위치가 1.5 및 5.5인 것을 계산하여 획득할 수 있으며; 이때 중심점 값의 좌측에 위치하는 기준 픽셀 포인트 위치를 라운딩 다운하여, 하나의 선택될 기준 픽셀 포인트 위치가 1인 것을 획득할 수 있으며, 중심점 값의 우측에 위치하는 기준 픽셀 포인트 위치를 라운딩 업하면, 다른 선택될 기준 픽셀 포인트 위치가 6인 것을 획득할 수 있으며; 상기 디코딩 예측 방법은 도 12에 도시된 바와 같이 라운딩 아웃 방안으로 지칭될 수도 있으며; 이로써, 1 및 6 위치에 대응되는 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성할 수 있다. 또한, 기준점 위치가 1.5 및 5.5인 것으로 계산되어 획득될 때, 또한 중심점 값의 좌측에 위치하는 기준 픽셀 포인트 위치를 라운딩 업하여, 하나의 선택될 기준 픽셀 포인트 위치가 2인 것을 획득할 수 있으며, 중심점 값의 우측에 위치하는 기준 픽셀 포인트 위치를 라운딩 다운하면, 다른 선택될 기준 픽셀 포인트 위치가 5인 것을 획득할 수 있으며; 상기 디코딩 예측 방법은 도 13에 도시된 바와 같이 라운딩인 방안으로 지칭될 수도 있으며; 이로써, 2 및 5 위치에 대응되는 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성할 수 있다.
일부 실시예에 있어서, 상기 제1 샘플링 간격을 계산하여 획득한 후, 상기 디코딩 예측 방법은,
상기 제1 샘플링 간격에 대해 조정을 수행하여, 제2 샘플링 간격을 획득하는 단계; 및
상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계를 더 포함한다.
일부 실시예에 있어서, 상기 제2 샘플링 간격을 획득한 후, 상기 디코딩 예측 방법은,
상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 기준점의 좌측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하고, 상기 제2 샘플링 간격에 따라 상기 기준점의 우측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계를 더 포함한다.
설명해야 할 것은, 제1 샘플링 간격을 계산하여 획득한 후, 또한 제1 샘플링 간격을 미세 조정할 수 있으며, 예를 들어 제1 샘플링 간격에 대해 1을 더하거나 1을 빼는 동작을 수행하여, 제2 샘플링 간격을 획득한다. 예를 들어, 제1 샘플링 간격이 4이면, 조정된 제2 샘플링 간격은 3 또는 5일 수 있다. 본 출원의 실시예에서, 제1 샘플링 간격의 조정의 경우, 작은 범위(예를 들어, 1을 더하거나 1을 뺌)의 조정을 수행할 수 있지만, 조정 범위의 구체적인 설정에 대해, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
또한, 디코딩될 블록의 적어도 하나의 기준점을 결정한 후, 제1 샘플링 간격 또는 제2 샘플링 간격에 대해 균일하게 샘플링을 수행할 수 있으며; 제1 샘플링 간격 및 제2 샘플링 간격에 따라 균일하게 샘플링을 수행할 수도 있으며, 샘플링 후 결정된 선택될 기준 픽셀 포인트 위치는 기준점의 양측에 대칭되게 분포될 수 있고, 비대칭으로 분포될 수도 있으며; 본 출원의 실시예에서 구체적으로 한정하지 않는다.
일부 실시예에 있어서, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 기설정된 샘플링 개수에 따라 상기 기준점에 근접한 연속적인 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계 - 상기 기준점은 상기 선택될 기준 픽셀 포인트 위치의 중간에 위치함 - 를 포함한다.
설명해야 할 것은, 인접 기준 픽셀 포인트에서 디코딩될 블록의 제1 이미지 구성 요소 재구성된 값과 관련된 것이 중간 위치의 기준 픽셀 포인트이기 때문에, 중간 위치에 근접한 연속적인 기설정된 샘플링 개수의 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 사용할 수 있고, 상기 디코딩 예측 방법은 도 14에 도시된 바와 같이 중간 위치의 연속 포인트 선택 방안으로 지칭될 수 있으며; 이로써, 2, 3 및 4에 대응되는 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성할 수 있다.
이해할 수 있는 것은, 디코딩될 블록 상부 사이드 또는 좌측 사이드에 인접한 행/열의 기준 픽셀 포인트 위치는 0부터 시작하여 넘버링하면, 본 실시예에서 구성된 인접 기준 픽셀 서브 세트에서 인접 기준 픽셀 포인트 개수 및 대응되는 선택될 기준 픽셀 포인트 위치는 도 3에 도시된 바와 같다.
Figure pct00048
본 실시예에서는, 중간 위치에 근접한 연속적인 기설정된 샘플링 개수의 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 사용하여, 인접 기준 픽셀 서브 세트를 구성하며; 상기 인접 기준 픽셀 서브 세트에 따라 예측 디코딩을 수행하고, L0138 제안의 기초 위에 여전히 비트 레이트를 저하시킬 수 있고, 디코딩 이득을 향상시킴으로써, 디코딩 예측 성능이 향상되도록 할 수 있다.
일부 실시예에 있어서, 상기 디코딩될 블록은 스퀘어 디코딩 블록 또는 넌 스퀘어 디코딩 블록을 포함한다.
더 나아가, 일부 실시예에 있어서, 상기 디코딩될 블록이 넌 스퀘어 디코딩 블록일 경우, 상기 디코딩 예측 방법은,
상기 디코딩될 블록의 적어도 하나의 사이드의 길이에 기반하여, 상기 디코딩될 블록의 긴 사이드 및 상기 긴 사이드에 대응되는 제3 샘플링 간격을 결정하는 단계; 및
상기 긴 사이드의 종료 위치에 대응되는 기준 픽셀 포인트를 삭제하고, 기준 픽셀 포인트가 삭제된 긴 사이드에 대해 기설정된 오프셋에 따라 초기 오프셋을 수행하여, 오프셋된 기준 픽셀 포인트 위치를 시작점으로 사용하며, 상기 제3 샘플링 간격에 따라 기준 픽셀 포인트가 삭제된 긴 사이드에 대해 샘플링을 수행하여, 상기 긴 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정한다.
설명해야 할 것은, 본 출원의 실시예는 스퀘어 디코딩 블록에 적용될 수 있을 뿐만 아니라, 넌 스퀘어 디코딩 블록에 적용될 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
더 설명해야 할 것은, 디코딩될 블록이 넌 스퀘어 디코딩 블록일 경우, 디코딩될 블록 좌측 사이드 또는 상부 사이드에는 하나의 긴 사이드 및 하나의 짧은 사이드가 반드시 존재하며; 긴 사이드와 짧은 사이드 간의 비례에 따라, 긴 사이드에 대응되는 제3 샘플링 간격을 획득할 수 있다. 긴 사이드에 대해 샘플링을 수행하기 전, 상기 긴 사이드의 종료 위치에 대응되는 기준 픽셀 포인트를 먼저 삭제한 다음, 기준 픽셀 포인트가 삭제된 긴 사이드에 대해 기설정된 오프셋에 따라 초기 오프셋을 수행하여, 오프셋된 기준 픽셀 포인트 위치를 시작점으로 사용한 다음, 기준 픽셀 포인트가 삭제된 긴 사이드에 대해 샘플링을 수행하여, 상기 긴 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정한다. 본 출원의 실시예에서, 기설정된 오프셋은 제3 샘플링 간격의 1/2일 수 있고, 다른 값일 수도 있으며, 본 출원의 실시예에서 구체적으로 한정하지 않는다.
예시적으로, 관련 기술방안에서, 넌 스퀘어 디코딩 블록의 긴 사이드에 대해 기준 픽셀 포인트 샘플링을 수행하는 단계는 도 4b에 도시된 바와 같다. 도 4b에서는, 긴 사이드와 짧은 사이드 간의 비례에 따라, 제3 샘플링 간격이 4인 것을 결정할 수 있으며; 긴 사이드는 좌측의 첫 번째 기준 픽셀 포인트 위치를 시작점으로 사용한 다음, 제3 샘플링 간격에 따라 짧은 사이드의 인접 기준 픽셀 포인트 개수와 동일한 기준 픽셀 포인트를 선택한다. 이 경우 샘플링된 기준 픽셀 포인트가 좌측에 위치하도록 하므로, 전체 긴 사이드의 특성을 커버할 수 없으며; 따라서, 본 실시예에서는, 넌 스퀘어 디코딩 블록의 긴 사이드에 대해 먼저 초기 오프셋을 수행하여, 샘플링된 기준 픽셀 포인트가 전체 긴 사이드의 특성을 커버할 수 있도록 한다. 예를 들어 기설정된 오프셋은 제3 샘플링 간격의 1/2이고, 즉 기설정된 오프셋은 2이며, 다시 말해, 본 실시예에서 샘플링은 2를 시작점으로 하여 수행되므로, 구성된 인접 기준 픽셀 서브 세트는 전체 긴 사이드의 특성을 더욱 잘 커버할 수 있다.
일부 실시예에 있어서, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
상기 적어도 하나의 사이드의 시작 위치 및 종료 위치에 각각 대응되는 기준 픽셀 포인트를 삭제하여, 제2 인접 기준 픽셀 세트를 획득하는 단계; 및
상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 인접 기준 픽셀 세트에 기반하여, 기설정된 샘플링 개수에 따라 선택될 기준 픽셀 포인트 위치를 결정하는 단계를 포함한다.
설명해야 할 것은, 본 출원의 실시예는 직접 디코딩될 블록 좌측 사이드 또는 상부 사이드의 중심점에 기반하여 기준 픽셀 포인트를 선택하여, 인접 기준 픽셀 포인트를 구성할 수 있으며; 본 출원의 실시예는 또한 디코딩될 블록 좌측 사이드/상부 사이드에 대응되는 시작 위치 및 종료 위치(예를 들어, 상부 사이드의 경우, 시작 위치는 좌측 가장자리 위치이고, 종료 위치는 우측 가장자리 위치이며; 좌측 사이드의 경우, 시작 위치는 상부 가장자리 위치이고, 종료 위치는 아래쪽 가장자리 위치임)에 각각 대응되는 기준 픽셀 포인트를 먼저 삭제할 수 있어, 중간 부분의 기준 픽셀 포인트를 보류하며, 그 다음 선택된 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성한다.
더 설명해야 할 것은, 기설정된 샘플링 개수는 임의의 값일 수 있으며; 일반적으로, 기설정된 샘플링 개수가 표 2에 도시된 N1보다 작으면 되지만; 본 출원의 실시예는 기설정된 샘플링 개수가 N2 또는 N2'인 것에 한정되지 않는다. 기설정된 샘플링 개수가 표 2에 도시된 N1보다 작기 때문에, 기준 픽셀 포인트의 검색 복잡도를 저하시켜, 디코딩 예측 성능을 향상시킬 수 있다. 구체적으로, 상기 공식(4) 및 공식(5)에서의 Δ 및 shift 값을 변경하는 것을 통해, 상이한 시작점 및 샘플링 간격으로 선택될 기준 픽셀 포인트 위치를 결정하는 것을 구현할 수 있음으로써, 대응되는 기준 픽셀 포인트를 선택하여, 인접 기준 픽셀 서브 세트를 구성할 수 있다.
일부 실시예에 있어서, 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계는,
상기 인접 기준 픽셀 서브 세트에 기반하여, 모델 파라미터를 결정하는 단계;
상기 모델 파라미터에 따라, 예측 모델을 구축하는 단계 - 상기 예측 모델은 상기 디코딩될 블록에서 각 픽셀 포인트에 대응되는 제1 이미지 구성 요소와 제2 이미지 구성 요소 간의 예측 관계를 나타내기 위한 것임 - ; 및
상기 예측 모델에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계를 포함한다.
설명해야 할 것은, 인접 기준 픽셀 서브 세트를 획득한 후, 모델 파라미터
Figure pct00049
및
Figure pct00050
를 형성할 수 있으며; 이로써, 상기 공식(1)에 따라 예측 모델을 구축할 수 있으며; 예측 모델에 따라, 상기 디코딩될 블록에 대해 예측 디코딩을 수행할 수 있다. 인접 기준 픽셀 서브 세트에 포함된 인접 기준 픽셀 포인트는 중요성 및 분산성을 고려하므로, 형성된 모델 파라미터가 더욱 정확해지도록 함으로써, 디코딩 예측 성능을 더욱 향상시킴으로써, 비트 레이터를 저하시킨다.
상기 실시예에서는 디코딩 예측 방법을 제공하며, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하며; 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하며; 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하며; 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하며; 인접 기준 픽셀 서브 세트에서의 인접 기준 픽셀은 중요도 및 분산성을 고려할 뿐만 아니라, 인접 기준 픽셀 서브 세트에서의 픽셀 수가 적기 때문에, 검색의 복잡도를 저하시키고, 비디오 이미지 디코딩의 예측 성능을 향상시킴으로써, 비트 레이트를 저하시킨다.
상기 도 8에 도시된 기술방안과 동일한 발명 사상에 기반하여, 도 15를 참조하면, 본 출원의 실시예는 디코딩 예측 장치(150)의 구성 구조 모식도를 도시한다. 상기 디코딩 예측 장치(150)는 획득 유닛(1501), 결정 유닛(1502), 선택 유닛(1503) 및 디코딩 유닛(1504)을 포함할 수 있으며, 여기서,
상기 획득 유닛(1501)은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하도록 구성되며;
상기 결정 유닛(1502)은, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성되며;
상기 선택 유닛(1503)은, 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하도록 구성되며;
상기 디코딩 유닛(1504)은, 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하도록 구성된다.
상기 방안에서, 상기 결정 유닛(1502)은 구체적으로, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 우측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 또는 상기 중간 위치의 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하도록 구성된다.
상기 방안에서, 상기 결정 유닛(1502)은 구체적으로, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 하부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 또는 상기 중간 위치의 상부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하도록 구성된다.
상기 방안에서, 도 15를 참조하면, 상기 디코딩 예측 장치(150)는, 상기 기설정된 샘플링 개수 및 상기 적어도 하나의 사이드의 길이에 기반하여, 제1 샘플링 간격을 계산하여 획득하도록 구성된 계산 유닛(1505)을 더 포함하며;
상기 결정 유닛(1502)은 구체적으로, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된다.
상기 방안에서, 상기 계산 유닛(1505)은 또한, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하고; 상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하도록 구성되며;
상기 결정 유닛(1502)은 구체적으로, 상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측에 있는 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성된다.
상기 방안에서, 상기 계산 유닛(1505)은 또한, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하고; 상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하도록 구성되며;
상기 결정 유닛(1502)은 구체적으로, 상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성된다.
상기 방안에서, 도 15를 참조하면, 상기 디코딩 예측 장치(150)는, 상기 제1 샘플링 간격에 대해 조정을 수행하여, 제2 샘플링 간격을 획득하도록 구성된 조정 유닛(1506)을 더 포함하며;
상기 결정 유닛(1502)은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된다.
상기 방안에서, 상기 결정 유닛(1502)은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 기준점의 좌측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하고, 상기 제2 샘플링 간격에 따라 상기 기준점의 우측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된다.
상기 방안에서, 상기 결정 유닛(1502)은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 기설정된 샘플링 개수에 따라 상기 기준점에 근접한 연속적인 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성되며, 상기 기준점은 상기 선택될 기준 픽셀 포인트 위치의 중간에 위치한다.
상기 방안에서, 상기 디코딩될 블록은 스퀘어 디코딩 블록 또는 넌 스퀘어 디코딩 블록을 포함한다.
상기 방안에서, 상기 획득 유닛(1501)은 또한, 상기 적어도 하나의 사이드의 시작 위치 및 종료 위치에 각각 대응되는 기준 픽셀 포인트를 삭제하여, 제2 인접 기준 픽셀 세트를 획득하도록 구성되며;
상기 결정 유닛(1502)은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 인접 기준 픽셀 세트에 기반하여, 기설정된 샘플링 개수에 따라 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된다.
상기 방안에서, 도 15를 참조하면, 상기 디코딩 예측 장치(150)는, 상기 인접 기준 픽셀 서브 세트에 기반하여, 모델 파라미터를 결정하며; 상기 모델 파라미터에 따라, 예측 모델을 구축하도록 구성된 구축 유닛(1507) - 상기 예측 모델은 상기 디코딩될 블록에서 각 픽셀 포인트에 대응되는 제1 이미지 구성 요소와 제2 이미지 구성 요소 간의 예측 관계를 나타내기 위한 것임 - 을 더 포함하며;
상기 디코딩 유닛(1504)은 구체적으로, 상기 예측 모델에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하도록 구성된다.
이해할 수 있는 것은, 본 실시예에 있어서, “유닛”은 부분 회로, 부분 프로세서, 부분 프로그램 또는 소프트웨어 등일 수 있으며, 물론 모듈일 수도 있고, 비모듈 방식일 수도 있다는 것이다. 또한, 본 실시예에서의 각 구성 부분은 하나의 처리 유닛 중에 통합될 수 있거나, 각 유닛이 단독적 및 물리적으로 존재할 수도 있으며, 2개 이상의 유닛이 하나의 유닛에 통합될 수도 있다. 상기 통합된 유닛은 하드웨어 또는 소프트웨어 기능 모듈의 형태로 구현될 수 있고, 소프트웨어 기능 모듈의 형태로 구현될 수도 있다.
상기 통합된 유닛은 독립된 제품으로서 판매되거나 사용되는 것이 아닌 소프트웨어 기능 모듈의 형태로 구현될 경우, 하나의 컴퓨터 판독 가능 저장 매체에 저장될 수 있으며, 이러한 이해에 기반하여, 본 실시예의 기술방안은 본질적으로, 또는 종래 기술에 기여하는 부분이거나 상기 기술방안의 전부 또는 일부는 소프트웨어 제품의 형태로 구현될 수 있으며, 상기 컴퓨터 소프트웨어 제품은 하나의 저장 매체에 저장되며, 하나의 컴퓨터 기기(개인용 컴퓨터, 서버, 또는 네트워크 기기 등일 수 있음) 또는 프로세서(processor)로 하여금 본 실시예에서 설명한 방법의 전부 또는 일부 단계를 실행하도록 하는 몇 개의 명령어를 포함한다. 전술한 저장 매체는 U 디스크, 모바일 디스크, 판독 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크 또는 광 디스크 등 프로그램 코드를 저장할 수 있는 여러 가지 매체를 포함한다.
따라서, 본 실시예는 컴퓨터 저장 매체를 제공하며, 상기 컴퓨터 저장 매체에는 디코딩 예측 프로그램이 저장되고, 상기 디코딩 예측 프로그램은 적어도 하나의 프로세서에 의해 실행될 때 상기 도 8에 도시된 기술방안의 디코딩 예측 방법의 단계를 구현한다.
상기 디코딩 예측 장치(150)의 구성 및 컴퓨터 저장 매체에 기반하여, 도 16을 참조하면, 본 출원의 실시예에서 제공한 디코딩 예측 장치(150)의 구체적인 하드웨어 구조 예를 도시하였고, 네트워크 인터페이스(1601), 메모리(1602) 및 프로세서(1603)를 포함할 수 있으며; 각 컴포넌트는 버스 시스템(1604)을 통해 서로 연결된다. 이해할 수 있는 것은, 버스 시스템(1604)은 이러한 컴포넌트 간의 연결 통신을 구현하기 위한 것이다. 버스 시스템(1604)은 데이터 버스를 포함하며, 그 외에, 전원 버스, 제어 버스 및 상태 신호 버스를 더 포함한다. 그러나 설명의 명확성을 위해, 도 16에서 다양한 버스는 모두 버스 시스템(1604)으로 표기된다. 여기서, 네트워크 인터페이스(1601)는, 다른 외부 네트워크 요소 사이에서 정보를 송수신하는 과정에서, 신호를 수신 및 송신하기 위한 것이며;
메모리(1602)는, 프로세서(1603) 상에서 작동될 수 있는 컴퓨터 프로그램을 저장하기 위한 것이며;
프로세서(1603)는, 상기 컴퓨터 프로그램에서 작동될 때,
디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하는 것;
상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 것;
상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하는 것; 및
상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 것을 실행하기 위한 것이다.
이해할 수 있는 것은, 본 출원의 실시예에서의 메모리(1602)는 휘발성 메모리 또는 비 휘발성 메모리일 수 있으며, 또는 휘발성 메모리 및 비 휘발성 메모리를 포함할 수 있다. 여기서, 비 휘발성 메모리는 판독 전용 메모리(Read-Only Memory, ROM), 프로그래머블 판독 전용 메모리(Programmable ROM, PROM), 소거 가능 프로그래머블 판독 전용 메모리(Erasable PROM, EPROM), 전기적 소거 가능 판독 전용 프로그래머블 메모리(Electrically EPROM, EEPROM) 또는 플래시 메모리일 수 있다. 휘발성 메모리는 외부 쾌속 캐시 역할을 하는 랜덤 액세스 메모리(Random Access Memory, RAM)일 수 있다. 한정적이 아닌 예시적인 설명을 통해, 다양한 형태의 RAM이 사용 가능하며, 예를 들어, 정적 랜덤 액세스 메모리(Static RAM, SRAM), 동적 랜덤 액세스 메모리(Dynamic RAM, DRAM), 동기식 동적 랜덤 액세스 메모리(Synchronous DRAM, SDRAM), 더블 데이터 레이트 싱크로너스 동적 랜덤 액세스 메모리(Double Data Rate SDRAM, DDRSDRAM), 향상된 동기식 동적 랜덤 액세스 메모리(Enhanced SDRAM, ESDRAM), 동기식 연결 동적 랜덤 액세스 메모리(Synchlink DRAM, SLDRAM) 및 직접 메모리 버스 랜덤 액세스 메모리(Direct Rambus RAM, DRRAM)이다. 본문에 설명된 시스템 및 방법의 메모리(1602)는 이들 및 임의의 다른 적합한 유형의 메모리를 포함하지만 이에 한정되지 않는다.
프로세서(1603)는 신호 처리 기능을 구비한 집적 회로 칩일 수 있다. 구현 과정에서, 상기 디코딩 예측 방법의 각 단계는 프로세서(1603)에서의 하드웨어의 집적 논리 회로 또는 소프트웨어 형태의 명령어에 의해 완료될 수 있다. 상기 프로세서(1603)는 범용 프로세서, 디지털 신호 프로세서(Digital Signal Processor, DSP), 주문형 집적 회로(Application Specific Integrated Circuit, ASIC), 필드 프로그래머블 게이트 어레이(Field Programmable Gate Array, FPGA) 또는 다른 프로그래머블 논리 소자, 개별 게이트 또는 트랜지스터 논리 소자, 개별 하드웨어 어셈블리일 수 있다. 본 발명의 실시예에서 개시된 각 방법, 단계 및 논리 블록도는 구현 또는 실행될 수 있다. 범용 프로세서는 마이크로 프로세서 또는 임의의 일반적인 프로세서 등일 수도 있다. 본 발명의 실시예를 결합하여 개시된 방법의 단계는, 하드웨어로 구현된 디코딩 프로세서에 의해 직접 실행 및 완료되거나, 디코딩 프로세서에서의 하드웨어 및 소프트웨어 모듈의 조합에 의해 실행 및 완료될 수 있다. 소프트웨어 모듈은 랜덤 액세스 메모리, 플래시 메모리, 판독 전용 메모리, 프로그래머블 판독 전용 메모리 또는 전기적 소거 가능 프로그래머블 메모리, 레지스터 등 본 기술 분야에서 널리 알려진 저장 매체에 위치할 수 있다. 상기 저장 매체는 메모리(1602)에 위치하고, 프로세서(1603)는 메모리(1602)에서의 정보를 판독한 후 하드웨어와 결합하여 상기 디코딩 예측 방법의 단계들을 마무리한다.
이해할 수 있는 것은, 본문에서 설명된 이러한 실시예는 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로 코드 또는 이들의 조합으로 구현될 수 있다는 것이다. 하드웨어 구현에 대해서, 처리 유닛은 하나 또는 복수 개의 응용 주문형 집적 회로(Application Specific Integrated Circuits, ASIC), 디지털 신호 프로세서(Digital Signal Processor, DSP), 디지털 신호 처리 기기(DSP Device, DSPD), 프로그래머블 논리 기기(Programmable Logic Device, PLD), 현장 프로그래머블 게이트 어레이(Field-Programmable Gate Array, FPGA), 범용 프로세서, 제어기, 마이크로 제어기, 마이크로 프로세서, 본 출원에서 설명된 기능을 수행하기 위한 다른 전자 유닛 또는 조합 중에서 구현될 수 있다.
소프트웨어 구현의 경우, 본문에서 설명된 기능을 수행하는 모듈(예를 들어, 과정, 함수 등)을 통해 본문에서 설명된 기술을 구현할 수 있다. 소프트웨어 코드는 메모리에 저장되고 프로세서를 통해 수행될 수 있다. 메모리는 프로세서에서 또는 프로세서 외부에서 구현될 수 있다.
선택적으로, 다른 실시예로서, 프로세서(1603)는 또한 상기 컴퓨터 프로그램을 작동할 때, 상기 도 8에 도시된 기술방안의 상기 디코딩 예측 방법의 단계를 실행하도록 구성된다.
설명해야 할 것은, 본 출원의 실시예에 기재된 기술방안 사이는, 충돌되지 않는 한, 임의로 조합될 수 있다.
이상의 설명은 다만 본 발명의 구체적인 실시형태일 뿐이고, 본 발명의 보호 범위는 이에 한정되지 않는다. 본 발명이 속하는 기술 분야의 통상의 기술자라면, 본 발명에서 개시된 기술적 범위 내의 변화 또는 교체가 모두 본 출원의 보호 범위 내에 속해야 함을 쉽게 알 수 있을 것이다. 따라서, 본 출원의 보호범위는 특허 청구범위의 보호범위를 기준으로 해야 한다.
본 출원의 실시예는, 먼저 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하고; 그 다음 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하며; 다음으로 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하며; 마지막으로 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하며; 상기 인접 기준 픽셀 서브 세트에서 인접 기준 픽셀 포인트의 선택이 중요성 및 분산성을 고려하기 때문에, 상기 인접 기준 픽셀 서브 세트에 기반하여 형성된 모델 파라미터는 비교적 정확하므로, 비디오 이미지 디코딩의 예측 성능이 향상되도록 할 수 있으며; 또한 상기 인접 기준 픽셀 서브 세트에서의 픽셀 수가 비교적 적음으로써, 또한 검색의 복잡도를 저하시키고, 비디오 이미지 디코딩의 예측 성능을 항상시킴으로써, 비트 레이트를 저하시킨다.

Claims (26)

  1. 디코딩 예측 방법으로서,
    디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하는 단계;
    상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계;
    상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하는 단계; 및
    상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  2. 제1항에 있어서,
    상기 기준점이 상기 적어도 하나의 사이드의 중심점일 경우, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하는 단계는,
    상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 우측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  3. 제1항에 있어서,
    상기 기준점이 상기 적어도 하나의 사이드의 중심점일 경우, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하는 단계는,
    상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 하부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 상부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  4. 제1항에 있어서,
    상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
    상기 기설정된 샘플링 개수 및 상기 적어도 하나의 사이드의 길이에 기반하여, 제1 샘플링 간격을 계산하여 획득하는 단계; 및
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  5. 제4항에 있어서,
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
    상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하는 단계;
    상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하는 단계; 및
    상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  6. 제4항에 있어서,
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
    상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하는 단계;
    상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하는 단계; 및
    상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  7. 제4항에 있어서,
    상기 제1 샘플링 간격을 계산하여 획득한 후, 상기 디코딩 예측 방법은,
    상기 제1 샘플링 간격에 대해 조정을 수행하여, 제2 샘플링 간격을 획득하는 단계; 및
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계
    를 더 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  8. 제7항에 있어서,
    상기 제2 샘플링 간격을 획득한 후, 상기 디코딩 예측 방법은,
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 기준점의 좌측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하고, 상기 제2 샘플링 간격에 따라 상기 기준점의 우측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계
    를 더 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  9. 제1항에 있어서,
    상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 기설정된 샘플링 개수에 따라 상기 기준점에 근접한 연속적인 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하는 단계 - 상기 기준점은 상기 선택될 기준 픽셀 포인트 위치의 중간에 위치함 -
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  10. 제1항 내지 제9항 중 어느 한 항에 있어서,
    상기 디코딩될 블록은 스퀘어 디코딩 블록 또는 넌 스퀘어(non square) 디코딩 블록을 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  11. 제1항에 있어서,
    상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하는 단계는,
    상기 적어도 하나의 사이드의 시작 위치 및 종료 위치에 각각 대응되는 기준 픽셀 포인트를 삭제하여, 제2 인접 기준 픽셀 세트를 획득하는 단계; 및
    상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 인접 기준 픽셀 세트에 기반하여, 기설정된 샘플링 개수에 따라 선택될 기준 픽셀 포인트 위치를 결정하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  12. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계는,
    상기 인접 기준 픽셀 서브 세트에 기반하여, 모델 파라미터를 결정하는 단계;
    상기 모델 파라미터에 따라, 예측 모델을 구축하는 단계 - 상기 예측 모델은 상기 디코딩될 블록에서 각 픽셀 포인트에 대응되는 제1 이미지 구성 요소와 제2 이미지 구성 요소 간의 예측 관계를 나타내기 위한 것임 - ; 및
    상기 예측 모델에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하는 단계
    를 포함하는 것을 특징으로 하는,
    디코딩 예측 방법.
  13. 디코딩 예측 장치로서,
    상기 디코딩 예측 장치는 획득 유닛, 결정 유닛, 선택 유닛 및 디코딩 유닛을 포함하며,
    상기 획득 유닛은, 디코딩될 블록의 적어도 하나의 사이드에 인접하는 기준 픽셀 포인트를 획득하여, 제1 인접 기준 픽셀 세트를 획득하도록 구성되며;
    상기 결정 유닛은, 상기 적어도 하나의 사이드로부터 하나의 기준점을 결정하고, 기설정된 샘플링 개수에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성되며;
    상기 선택 유닛은, 상기 선택될 기준 픽셀 포인트 위치에 기반하여, 상기 제1 인접 기준 픽셀 세트로부터 상기 선택될 기준 픽셀 포인트 위치에 대응되는 기준 픽셀 포인트를 선택하고, 선택하여 얻은 기준 픽셀 포인트를 인접 기준 픽셀 서브 세트로 구성하도록 구성되며;
    상기 디코딩 유닛은, 상기 인접 기준 픽셀 서브 세트에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  14. 제13항에 있어서,
    상기 결정 유닛은 구체적으로, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 우측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 좌측에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  15. 제13항에 있어서,
    상기 결정 유닛은 구체적으로, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점이 2개의 기준 픽셀 포인트 사이의 중간 위치에 위치하면, 상기 중간 위치의 하부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하거나, 상기 중간 위치의 상부에 위치하는 첫 번째 기준 픽셀 포인트 위치를 상기 적어도 하나의 사이드의 기준점으로 사용하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  16. 제13항에 있어서,
    상기 디코딩 예측 장치는, 상기 기설정된 샘플링 개수 및 상기 적어도 하나의 사이드의 길이에 기반하여, 제1 샘플링 간격을 계산하여 획득하도록 구성된 계산 유닛을 더 포함하며;
    상기 결정 유닛은 구체적으로, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  17. 제16항에 있어서,
    상기 계산 유닛은 또한, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하고; 상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하도록 구성되며; 상기 결정 유닛은 구체적으로, 상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  18. 제16항에 있어서,
    상기 계산 유닛은 또한, 상기 적어도 하나의 사이드의 길이에 기반하여, 상기 적어도 하나의 사이드의 중심점 값을 계산하여 획득하고; 상기 중심점 값 및 제1 샘플링 간격에 따라, 기준 픽셀 포인트 위치를 계산하여 획득하도록 구성되며; 상기 결정 유닛은 구체적으로, 상기 중심점 값이 정수가 아닐 경우, 상기 중심점 값의 좌측의 기준 픽셀 포인트 위치를 라운딩 업하고, 라운딩 업된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하며; 상기 중심점 값의 우측의 기준 픽셀 포인트 위치를 라운딩 다운하고, 라운딩 다운된 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  19. 제16항에 있어서,
    상기 디코딩 예측 장치는, 상기 제1 샘플링 간격에 대해 조정을 수행하여, 제2 샘플링 간격을 획득하도록 구성된 조정 유닛을 더 포함하며;
    상기 결정 유닛은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 샘플링 간격에 따라 상기 적어도 하나의 사이드에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  20. 제19항에 있어서,
    상기 결정 유닛은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제1 샘플링 간격에 따라 상기 기준점의 좌측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하고, 상기 제2 샘플링 간격에 따라 상기 기준점의 우측에 대응되는 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  21. 제13항에 있어서,
    상기 결정 유닛은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 기설정된 샘플링 개수에 따라 상기 기준점에 근접한 연속적인 기준 픽셀 포인트 위치를 선택될 기준 픽셀 포인트 위치로 결정하도록 구성되며, 상기 기준점은 상기 선택될 기준 픽셀 포인트 위치의 중간에 위치하는 것을 특징으로 하는,
    디코딩 예측 장치.
  22. 제13항 내지 제21항 중 어느 한 항에 있어서,
    상기 디코딩될 블록은 스퀘어 디코딩 블록 또는 넌 스퀘어 디코딩 블록을 포함하는 것을 특징으로 하는,
    디코딩 예측 장치.
  23. 제13항에 있어서,
    상기 획득 유닛은 또한, 상기 적어도 하나의 사이드의 시작 위치 및 종료 위치에 각각 대응되는 기준 픽셀 포인트를 삭제하여, 제2 인접 기준 픽셀 세트를 획득하도록 구성되며;
    상기 결정 유닛은 또한, 상기 적어도 하나의 사이드의 중심점을 기준점으로 사용하고, 상기 제2 인접 기준 픽셀 세트에 기반하여, 기설정된 샘플링 개수에 따라 선택될 기준 픽셀 포인트 위치를 결정하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  24. 제13항 내지 제23항 중 어느 한 항에 있어서,
    상기 디코딩 예측 장치는, 상기 인접 기준 픽셀 서브 세트에 기반하여, 모델 파라미터를 결정하며; 상기 모델 파라미터에 따라, 예측 모델을 구축하도록 구성된 구축 유닛 - 상기 예측 모델은 상기 디코딩될 블록에서 각 픽셀 포인트에 대응되는 제1 이미지 구성 요소와 제2 이미지 구성 요소 간의 예측 관계를 나타내기 위한 것임 - 을 더 포함하며;
    상기 디코딩 유닛은 구체적으로, 상기 예측 모델에 기반하여, 상기 디코딩될 블록에 대해 예측 디코딩을 수행하도록 구성된 것을 특징으로 하는,
    디코딩 예측 장치.
  25. 디코딩 예측 장치로서,
    메모리 및 프로세서를 포함하며;
    상기 메모리는, 상기 프로세서에서 작동 가능한 컴퓨터 프로그램을 저장하기 위한 것이며;
    상기 프로세서는, 상기 컴퓨터 프로그램을 작동할 경우, 제1항 내지 제12항 중 어느 한 항에 따른 디코딩 예측 방법의 단계를 실행하기 위한 것임을 특징으로 하는,
    디코딩 예측 장치.
  26. 컴퓨터 저장 매체로서,
    상기 컴퓨터 저장 매체에는 디코딩 예측 프로그램이 저장되고, 상기 디코딩 예측 프로그램이 적어도 하나의 프로세서에 의해 실행될 때, 제1항 내지 제12항 중 어느 한 항에 따른 디코딩 예측 방법의 단계를 실행하기 위한 것임을 특징으로 하는,
    컴퓨터 저장 매체.
KR1020217023381A 2018-12-25 2018-12-25 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체 KR20210106547A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/123657 WO2020132908A1 (zh) 2018-12-25 2018-12-25 解码预测方法、装置及计算机存储介质

Publications (1)

Publication Number Publication Date
KR20210106547A true KR20210106547A (ko) 2021-08-30

Family

ID=71126759

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020217023381A KR20210106547A (ko) 2018-12-25 2018-12-25 디코딩 예측 방법, 장치 및 컴퓨터 저장 매체

Country Status (14)

Country Link
US (6) US11297313B2 (ko)
EP (1) EP3829167A4 (ko)
JP (1) JP7481332B2 (ko)
KR (1) KR20210106547A (ko)
CN (8) CN116456082A (ko)
AU (1) AU2018454766A1 (ko)
BR (1) BR112021006547A2 (ko)
CA (2) CA3222255A1 (ko)
IL (1) IL281399A (ko)
MX (1) MX2021003940A (ko)
PH (1) PH12021550515A1 (ko)
SG (1) SG11202102435VA (ko)
WO (1) WO2020132908A1 (ko)
ZA (1) ZA202101726B (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20210108397A (ko) 2019-01-02 2021-09-02 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드 예측 디코딩 방법, 장치 및 컴퓨터 저장 매체
US11665351B2 (en) 2021-06-30 2023-05-30 Tencent America LLC Method and apparatus for video coding
CN116737607B (zh) * 2023-08-16 2023-11-21 之江实验室 样本数据缓存方法、系统、计算机设备和存储介质

Family Cites Families (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7813432B2 (en) * 2004-12-30 2010-10-12 Intel Corporation Offset buffer for intra-prediction of digital video
TWI401972B (zh) 2009-06-23 2013-07-11 Acer Inc 時間性錯誤隱藏方法
US9736486B2 (en) * 2010-02-08 2017-08-15 Nokia Technologies Oy Apparatus, a method and a computer program for video coding
CN102215396A (zh) * 2010-04-09 2011-10-12 华为技术有限公司 一种视频编解码方法和系统
KR101772459B1 (ko) * 2010-05-17 2017-08-30 엘지전자 주식회사 신규한 인트라 예측 모드
WO2011149265A2 (en) * 2010-05-25 2011-12-01 Lg Electronics Inc. New planar prediction mode
CN107682702B (zh) 2010-09-30 2020-08-11 太阳专利托管公司 图像解码方法、图像解码装置
US20120163457A1 (en) 2010-12-28 2012-06-28 Viktor Wahadaniah Moving picture decoding method, moving picture coding method, moving picture decoding apparatus, moving picture coding apparatus, and moving picture coding and decoding apparatus
CN102611885B (zh) * 2011-01-20 2014-04-30 华为技术有限公司 一种编解码方法和装置
US10034018B2 (en) 2011-09-23 2018-07-24 Velos Media, Llc Decoded picture buffer management
US9280835B2 (en) 2011-10-18 2016-03-08 Nokia Technologies Oy Method for coding and an apparatus based on a DC prediction value
GB2498550B (en) 2012-01-19 2016-02-24 Canon Kk Method and device for processing components of an image for encoding or decoding
CN103220506B (zh) 2012-01-19 2015-11-25 华为技术有限公司 一种编解码方法和设备
CN102547296B (zh) 2012-02-27 2015-04-01 开曼群岛威睿电通股份有限公司 移动估计加速电路、移动估计方法及环路滤波加速电路
GB2501518A (en) * 2012-04-27 2013-10-30 Canon Kk Encoding and Decoding an Image Comprising Blocks of Pixels Including Selecting the Prediction Mode of Prediction Units
US9667942B2 (en) * 2012-11-20 2017-05-30 Qualcomm Incorporated Adaptive luminance compensation in three dimensional video coding
JP6005572B2 (ja) * 2013-03-28 2016-10-12 Kddi株式会社 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、およびプログラム
CN110225356B (zh) * 2013-04-08 2024-02-13 Ge视频压缩有限责任公司 多视图解码器
CN104125463A (zh) 2013-04-26 2014-10-29 华为技术有限公司 一种图像预测编码方法及图像编码器
CN105474639B (zh) * 2013-07-10 2018-08-07 凯迪迪爱通信技术有限公司 视频编码装置、视频解码装置、视频系统、视频编码方法、视频解码方法以及程序
US10129542B2 (en) 2013-10-17 2018-11-13 Futurewei Technologies, Inc. Reference pixel selection and filtering for intra coding of depth map
CN106688238B (zh) * 2013-10-17 2019-12-17 华为技术有限公司 改进后的深度图帧内编码的参考像素点选择和滤波
WO2015100515A1 (en) * 2013-12-30 2015-07-09 Qualcomm Incorporated Simplification of segment-wise dc coding of large prediction blocks in 3d video coding
KR102425577B1 (ko) * 2014-06-18 2022-07-26 삼성전자주식회사 휘도차를 보상하기 위한 인터 레이어 비디오 부호화 방법 및 그 장치, 비디오 복호화 방법 및 그 장치
WO2016067557A1 (ja) * 2014-10-31 2016-05-06 日本電気株式会社 予測画像生成装置および予測画像生成方法
WO2016182317A1 (ko) * 2015-05-12 2016-11-17 삼성전자 주식회사 인트라 예측을 수행하는 영상 복호화 방법 및 그 장치 및 인트라 예측을 수행하는 영상 부호화 방법 및 그 장치
US10887597B2 (en) * 2015-06-09 2021-01-05 Qualcomm Incorporated Systems and methods of determining illumination compensation parameters for video coding
KR20180019092A (ko) * 2015-06-16 2018-02-23 엘지전자 주식회사 영상 코딩 시스템에서 조도 보상에 기반한 블록 예측 방법 및 장치
US20160373742A1 (en) * 2015-06-18 2016-12-22 Qualcomm Incorporated Intra prediction and intra mode coding
KR102460912B1 (ko) * 2015-07-08 2022-10-28 인터디지털 매디슨 페턴트 홀딩스 에스에이에스 교차 평면 필터링을 이용한 향상된 크로마 코딩
US10200719B2 (en) * 2015-11-25 2019-02-05 Qualcomm Incorporated Modification of transform coefficients for non-square transform units in video coding
US10390021B2 (en) * 2016-03-18 2019-08-20 Mediatek Inc. Method and apparatus of video coding
EP3453174A1 (en) * 2016-05-06 2019-03-13 VID SCALE, Inc. Method and system for decoder-side intra mode derivation for block-based video coding
US10397569B2 (en) * 2016-06-03 2019-08-27 Mediatek Inc. Method and apparatus for template-based intra prediction in image and video coding
US10368107B2 (en) * 2016-08-15 2019-07-30 Qualcomm Incorporated Intra video coding using a decoupled tree structure
US10326986B2 (en) * 2016-08-15 2019-06-18 Qualcomm Incorporated Intra video coding using a decoupled tree structure
WO2018062921A1 (ko) * 2016-09-30 2018-04-05 엘지전자 주식회사 영상 코딩 시스템에서 블록 분할 및 인트라 예측 방법 및 장치
US10880570B2 (en) * 2016-10-05 2020-12-29 Qualcomm Incorporated Systems and methods of adaptively determining template size for illumination compensation
US10880546B2 (en) * 2016-10-11 2020-12-29 Lg Electronics Inc. Method and apparatus for deriving intra prediction mode for chroma component
US10477240B2 (en) * 2016-12-19 2019-11-12 Qualcomm Incorporated Linear model prediction mode with sample accessing for video coding
EP4072134A1 (en) * 2016-12-27 2022-10-12 Samsung Electronics Co., Ltd. Video affine mode encoding method and device therefor, and decoding method and device therefor
US11277635B2 (en) * 2017-03-17 2022-03-15 Vid Scale, Inc. Predictive coding for 360-degree video based on geometry padding
WO2018236028A1 (ko) * 2017-06-21 2018-12-27 엘지전자(주) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
US11190799B2 (en) * 2017-06-21 2021-11-30 Lg Electronics Inc. Intra-prediction mode-based image processing method and apparatus therefor
WO2019009546A1 (ko) * 2017-07-04 2019-01-10 엘지전자 주식회사 인터 예측 기반의 영상 처리 방법 및 이를 위한 장치
US20200145649A1 (en) * 2017-07-10 2020-05-07 Lg Electronics Inc. Method and apparatus for reducing noise in frequency-domain in image coding system
GB2567249A (en) * 2017-10-09 2019-04-10 Canon Kk New sample sets and new down-sampling schemes for linear component sample prediction
GB2567861A (en) 2017-10-27 2019-05-01 Sony Corp Image data encoding and decoding
US11722694B2 (en) 2018-01-26 2023-08-08 Interdigital Vc Holdings, Inc. Method and apparatus for video encoding and decoding based on a linear model responsive to neighboring samples
US10523948B2 (en) * 2018-02-05 2019-12-31 Tencent America LLC Method and apparatus for video coding
US10462483B1 (en) * 2018-04-26 2019-10-29 Tencent America LLC Method and apparatus for video coding
US10609402B2 (en) * 2018-05-02 2020-03-31 Tencent America LLC Method and apparatus for prediction and transform for small blocks
AU2019292471A1 (en) 2018-06-30 2021-01-28 Guangdong Oppo Mobile Telecommunications Corp., Ltd. Merge mode-based inter-prediction method and apparatus
US11128872B2 (en) * 2018-07-16 2021-09-21 Qualcomm Incorporated Position dependent intra prediction combination with wide angle intra prediction
US10491893B1 (en) * 2018-08-29 2019-11-26 Tencent America LLC Method and apparatus for multi-line intra prediction
KR20200028856A (ko) 2018-09-07 2020-03-17 김기백 인트라 예측을 이용한 영상 부호화/복호화 방법 및 장치
IL307586A (en) 2018-09-21 2023-12-01 Guangdong Oppo Mobile Telecommunications Corp Ltd A method for encoding/decoding image signals and a device therefor
IL304953A (en) 2018-09-21 2023-10-01 Guangdong Oppo Mobile Telecommunications Corp Ltd A method of encoding/decoding image signals and a device therefor
KR20230169407A (ko) * 2018-10-05 2023-12-15 후아웨이 테크놀러지 컴퍼니 리미티드 인트라 예측 방법 및 디바이스
IL281823B2 (en) 2018-10-12 2024-01-01 Guangdong Oppo Mobile Telecommunications Corp Ltd A method for encoding/decoding an image signal and a device for it
US11197005B2 (en) * 2018-11-08 2021-12-07 Qualcomm Incorporated Cross-component prediction for video coding
US11178396B2 (en) * 2018-11-14 2021-11-16 Tencent America LLC Constrained intra prediction and unified most probable mode list generation
CA3085391C (en) * 2018-11-23 2023-10-24 Lg Electronics Inc. Method for decoding image on basis of cclm prediction in image coding system, and device therefor

Also Published As

Publication number Publication date
CN113068025B (zh) 2023-05-12
CA3113787A1 (en) 2020-07-02
ZA202101726B (en) 2022-07-27
CN116614622A (zh) 2023-08-18
EP3829167A1 (en) 2021-06-02
US20220182609A1 (en) 2022-06-09
CN113068026A (zh) 2021-07-02
CN112470468A (zh) 2021-03-09
US11785208B2 (en) 2023-10-10
US20230308643A1 (en) 2023-09-28
US11683477B2 (en) 2023-06-20
EP3829167A4 (en) 2021-08-11
BR112021006547A2 (pt) 2021-07-06
JP7481332B2 (ja) 2024-05-10
CA3113787C (en) 2024-02-13
MX2021003940A (es) 2021-05-27
CA3222255A1 (en) 2020-07-02
US20220182608A1 (en) 2022-06-09
CN113068026B (zh) 2023-05-05
US20220182610A1 (en) 2022-06-09
US11297313B2 (en) 2022-04-05
CN116456083A (zh) 2023-07-18
CN116456084A (zh) 2023-07-18
US11683478B2 (en) 2023-06-20
AU2018454766A1 (en) 2021-04-08
CN116456082A (zh) 2023-07-18
IL281399A (en) 2021-04-29
US20220182611A1 (en) 2022-06-09
SG11202102435VA (en) 2021-04-29
JP2022520295A (ja) 2022-03-30
US20210243431A1 (en) 2021-08-05
WO2020132908A1 (zh) 2020-07-02
US11677936B2 (en) 2023-06-13
PH12021550515A1 (en) 2022-02-21
CN116456081A (zh) 2023-07-18
CN113068025A (zh) 2021-07-02

Similar Documents

Publication Publication Date Title
US11683477B2 (en) Prediction method for decoding and apparatus, and computer storage medium
CN111355951A (zh) 视频解码方法、装置及解码设备
JP2023113887A (ja) 予測デコーディング方法、装置及びコンピュータ記憶媒体
US11812057B2 (en) Intra prediction method and device, and computer storage medium
WO2020056767A1 (zh) 视频图像分量的预测方法、装置及计算机存储介质
RU2781240C1 (ru) Способ и устройство предсказания для декодирования и компьютерный носитель данных
KR20230079049A (ko) 비디오 코딩에서의 크로스-컴포넌트 리니어 모델 (cclm) 모드에 대한 고정된 비트 심도 프로세싱

Legal Events

Date Code Title Description
A201 Request for examination