KR20220112668A

KR20220112668A - 이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체

Info

Publication number: KR20220112668A
Application number: KR1020217043209A
Authority: KR
Inventors: 슈아이 완; 옌주오 마; 준옌 훠; 하이씬 왕; 푸쩡 양
Original assignee: 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드
Priority date: 2019-12-19
Filing date: 2019-12-19
Publication date: 2022-08-11
Also published as: JP2023510666A; US11477465B2; EP3955574B1; US11770542B2; CN113439440A; WO2021120122A1; US20220070476A1; EP3955574A4; CN113891082B; CN113891082A; EP3955574A1; US20230007279A1

Abstract

본 출원의 실시예는 이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체를 개시하고, 상기 방법은, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계 - 상기 인접 참조 샘플 세트에는 적어도 하나의 참조 샘플 값이 포함됨 - ; 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계; 상기 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계; 및 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계를 포함한다.

Description

이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체

본 출원의 실시예는 이미지 처리 기술분야에 관한 것으로서, 특히 이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체(IMAGE COMPONENT PREDICTION METHOD, ENCODER, DECODER, AND STORAGE MEDIUM)에 관한 것이다.

사람들이 비디오 디스플레이 품질에 대한 요구가 향상됨에 따라, 고화질 및 초고화질 비디오 등 새로운 비디오 응용 형태가 생성되었다. H.265/고효율 비디오 코딩(High Efficiency Video Coding, HEVC)은 이미 비디오 응용의 쾌속 발전의 요구를 만족시킬 수 없으므로, 연합 비디오 연구팀(Joint Video Exploration Team, JVET)은 차세대 비디오 코딩 표준 H.266/다용도 비디오 부호화(Versatile Video Coding, VVC)를 제기하였고, 이에 상응한 테스트 모델은 VVC의 참고 소프트웨어 테스트 플랫폼(VVC Test Model, VTM)이다.

H.266/VVC에서, 현재 매트릭스에 기반한 인트라 프레임 예측(Matrix-based Intra Prediction, MIP) 기술이 수락되었다. 상기 기술은 인트라 프레임 휘도 블록 카테고리의 상이함에 대해, 인트라 프레임 휘도 예측 과정에 상이한 개수의 MIP 예측 모드를 추가하였다. MIP 예측의 과정에서, 유도 과정은 또한 휘도 블록 카테고리와 관련되므로, 유도 과정이 비교적 번거롭고, 병행 처리에 유리하지 않으며, 또한, 복잡도를 추가하였다.

본 출원의 실시예는 이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체를 제공하고, 매트릭스 곱셈 입력 샘플의 유도 과정을 간략화할 수 있고, 또한 시간 복잡도를 줄일 수 있다.

본 출원의 실시예의 기술방안은 아래와 같이 구현될 수 있다.

제1 측면에 있어서, 본 출원의 실시예는 이미지 요소 예측 방법을 제공하고, 인코더에 적용되며, 상기 방법은,

현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계 - 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함함 - ;

상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계;

상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계; 및

상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계를 포함한다.

제2 측면에 있어서, 본 출원의 실시예는 이미지 요소 예측 방법을 제공하고, 디코더에 적용되며, 상기 방법은,

제3 측면에 있어서, 본 출원의 실시예는 인코더를 제공하고, 상기 인코더는 제1 결정 유닛, 제1 버퍼링 유닛과 제1 예측 유닛을 포함하고; 여기서,

제1 결정 유닛은, 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고, 여기서, 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함되며;

제1 버퍼링 유닛은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며;

제1 결정 유닛은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고;

제1 예측 유닛은, 상기 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득하도록 구성된다.

제4 측면에 있어서, 본 출원의 실시예는 인코더를 제공하고, 상기 인코더는 제1 메모리와 제1 프로세서를 포함하고; 여기서,

제1 메모리는, 제1 프로세서에서 작동 가능한 컴퓨터 프로그램을 저장하는데 사용되고;

제1 프로세서는, 상기 컴퓨터 프로그램이 작동될 경우, 제1 측면에 따른 이미지 요소 예측 방법을 실행하는데 사용된다.

제5 측면에 있어서, 본 출원의 실시예는 디코더를 제공하고, 상기 디코더는 제2 결정 유닛, 제2 버퍼링 유닛과 제2 예측 유닛을 포함하며; 여기서,

제2 결정 유닛은, 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고; 여기서, 인접 참조 샘플 세트에는 적어도 하나의 참조 샘플 값이 포함되며;

제2 버퍼링 유닛은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되고;

제2 결정 유닛은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되며;

제2 예측 유닛은, 상기 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득하도록 구성된다.

제6 측면에 있어서, 본 출원의 실시예는 디코더를 제공하고, 상기 디코더는 제2 메모리와 제2 프로세서를 포함하며; 여기서,

제2 메모리는, 제2 프로세서 상에서 작동 가능한 컴퓨터 프로그램을 저장하는데 사용되고;

제2 프로세서는, 상기 컴퓨터 프로그램이 작동될 경우, 제2 측면에 따른 이미지 요소 예측 방법을 실행하는데 사용된다.

제7 측면에 있어서, 본 출원의 실시예는 컴퓨터 저장 매체를 제공하고, 상기 컴퓨터 저장 매체에는 이미지 요소 예측 프로그램이 저장되어 있고, 상기 이미지 요소 예측 프로그램은 제1 프로세서에 의해 실행될 때 제1 측면에 따른 이미지 요소 예측 방법을 구현하고, 또는 제2 프로세서에 의해 실행될 때 제2 측면에 따른 상기의 이미지 요소 예측 방법을 구현한다.

본 출원의 실시예는 이미지 요소 예측 방법, 인코더, 디코더 및 저장 매체를 제공하여, 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 것을 통해, 인접 참조 샘플 세트와 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하고; 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하며; 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득한다. 이로써, 본 출원의 실시예의 방안은 현재 블록 카테고리를 판단할 필요가 없으므로, 시간 복잡도를 줄이고, 하트웨어 구현에 유리하며; 또한, 입력 참조 샘플 값 세트 및 제1 기설정 계산 모델에 따라 입력 샘플 매트릭스를 결정할 수 있고, 이때 매트릭스 곱셈 입력 샘플의 유도 과정도 간략화되어, 입력 샘플 매트릭스의 유도 과정이 통합되도록 하며, 본 출원의 실시예의 방안은 현재 블록 카테고리에 의존하지 않아도, 병행 처리를 구현할 수 있어, 계산 복잡도를 줄인다.

도 1은 본 출원의 실시예에서 제공한 비디오 코딩 시스템의 구성 블록 예시도이다.
도 2는 본 출원의 실시예에서 제공한 비디오 디코딩 시스템의 구성 블록 예시도이다.
도 3은 본 출원의 실시예에서 제공한 이미지 요소 예측 방법의 흐름 예시도이다.
도 4a는 본 출원의 실시예에서 제공한 참조 픽셀 위치의 구조 예시도이다.
도 4b는 본 출원의 실시예에서 제공한 참조 픽셀 다운 샘플링 처리의 구조 예시도이다.
도 5a는 관련 기술방안에서 제공한 버퍼 영역이 충진된 구조 예시도이다.
도 5b는 관련 기술방안에서 제공한 버퍼 영역이 충진된 다른 구조 예시도이다.
도 5c는 본 출원의 실시예에서 제공한 버퍼 영역이 충진된 또 다른 구조 예시도이다.
도 6a는 관련 기술방안에서 제공한 입력 샘플을 결정하는 구조 예시도이다.
도 6b는 본 출원의 실시예에서 제공한 입력 샘플을 결정하는 다른 구조 예시도이다.
도 7은 본 출원의 실시예에서 제공한 이미지 요소 예측 방법의 다른 흐름 예시도이다.
도 8은 본 출원의 실시예에서 제공한 예측 값을 생성하는 구조 예시도이다.
도 9는 본 출원의 실시예에서 제공한 인코더의 조성의 구조 예시도이다.
도 10은 본 출원의 실시예에서 제공한 인코더의 구체적인 하트웨어 구조 예시도이다.
도 11은 본 출원의 실시예에서 제공한 디코더의 조성의 구조 예시도이다.
도 12는 본 출원의 실시예에서 제공한 디코더의 구체적인 하트웨어 구조 예시도이다.

본 출원의 실시예의 특징과 기술적 내용을 더욱 상세하게 이해하기 위해, 아래에 첨부 도면을 결합하여 본 출원의 실시예의 구현에 대해 상세히 설명하며, 첨부된 도면은 다만 설명의 참조를 위한 것일 뿐, 본 출원의 실시예를 한정하려는 것은 아니다.

비디오 이미지에서, 일반적으로 제1 이미지 요소, 제2 이미지 요소와 제3 이미지 요소를 사용하여 코딩 블록(Coding Block, CB)을 표시하고; 여기서, 이러한 세 개의 이미지 요소는 각각 하나의 휘도 요소, 하나의 블루 색도 요소와 하나의 레드 색도 요소이고, 구체적으로, 휘도 요소는 통상적으로 부호 Y를 사용하여 표시되고, 블루 색도 요소는 통상적으로 부호 Cb 또는 U를 사용하여 표시되고, 레드 색도 요소는 통상적으로 부호 Cr 또는 V를 사용하여 표시되며; 이로써, 비디오 이미지는 YCbCr 의 포맷으로 표시될 수 있고, YUV 포맷으로 표시될 수도 있다.

본 출원의 실시예에 있어서, 제1 이미지 요소는 휘도 요소일 수 있고, 제2 이미지 요소는 블루 색도 요소일 수 있고, 제3 이미지 요소는 레드 색도 요소일 수 있으나, 본 출원의 실시예에서는 구체적으로 한정하지 않는다.

MIP 기술에서, MIP에 의해 예측된 입력 데이터는, 현재 블록의 이전 행의 참조 픽셀과 왼쪽 열의 참조 픽셀, 현재 블록에 적용되는 MIP 예측 모드(modeId로 표시할 수 있음), 현재 블록의 너비와 높이 정보 및 전치 필요 여부 등을 포함할 수 있고; MIP에 의해 예측된 출력 데이터는, 현재 블록의 예측 값을 포함할 수 있다. 여기서, MIP의 예측 과정은 구체적으로, MIP 핵심 파라미터 구성, 참조 픽셀 획득, 입력 샘플 구축 및 예측 값 생성의 네 개의 단계로 나눌 수 있다. 이러한 네 개의 단계를 거친 후, 현재 블록의 예측 값을 얻을 수 있다.

그러나, MIP 예측 과정에서, 입력 샘플을 구축하는 단계에 대해, 상기 단계는 휘도 블록 카테고리(mipSizeId로 표시할 수 있음)와 밀접하게 관련되어야 하므로, 즉 상이한 휘도 블록 카테고리의 경우, 상이한 입력 샘플 유도 방식을 사용하여 입력 샘플 매트릭스를 얻으므로, 유도 과정이 비교적 번거롭도록 하고, 특히 휘도 블록 카테고리(mipSizeId)가 0이거나 1일 경우, 입력 샘플 매트릭스에서 p[0]와 p[x]의 유도 방식은 차이가 존재하므로, 병행 처리에 유리하지 않고; 또한, 휘도 블록 카테고리의 상이함에 대해, 인트라 프레임 휘도 예측 과정에 상이한 개수의 MIP 예측 모드를 추가하고, 각 MIP 예측 모드에 대해 휘도 예측을 수행할 때 모두 한 번의 휘도 블록 카테고리의 판단을 실행해야 하므로, 복잡도를 더 추가한다.

본 출원의 실시예는 이미지 요소 예측 방법을 제공하여, 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하고, 인접 참조 샘플 세트에는 적어도 하나의 참조 샘플 값이 포함되며; 인접 참조 샘플 세트와 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하고; 다음 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하며; 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득한다. 이로써, 본 출원의 실시예의 방안은 현재 블록 카테고리를 판단할 필요가 없으므로, 시간 복잡도를 줄이고, 하트웨어 구현에 유리하며; 또한, 입력 참조 샘플 값 세트 및 제1 기설정 계산 모델에 따라 입력 샘플 매트릭스를 결정할 수 있고, 이때 매트릭스 곱셈 입력 샘플의 유도 과정도 간략화되어, 입력 샘플 매트릭스의 유도 과정이 통합되도록 하며, 본 출원의 실시예의 방안은 현재 블록 카테고리에 의존하지 않아도, 병행 처리를 구현할 수 있어여, 계산 복잡도를 줄인다.

아래에 도면을 결합하여 본 출원의 각 실시예를 설명한다.

도 1을 참조하면, 본 출원의 실시예에서 제공한 비디오 코딩 시스템의 조성 블록도 예를 도시하고; 도 1에 도시된 바와 같이, 상기 비디오 코딩 시스템(100)은, 변환과 양자화 유닛(101), 인트라 프레임 추정 유닛(102), 인트라 프레임 예측 유닛(103), 움직임 보상 유닛(104), 움직임 추정 유닛(105), 역변환과 역 양자화 유닛(106), 필터 제어 분석 유닛(107), 필터링 유닛(108), 코딩 유닛(109)과 디코딩 이미지 버퍼링 유닛(110) 등을 포함하며, 여기서, 필터링 유닛(108)은 디블로킹 필터링 및 샘플 적응 오프셋(Sample Adaptive 0ffset, SAO) 필터링을 구현할 수 있으며, 코딩 유닛(109)은 헤드 정보 코딩 및 콘텍스트에 기반한 적응적 2진 산술 코딩(Context-based Adaptive Binary Arithmatic Coding, CABAC)을 구현할 수 있다. 입력된 원본 비디오 신호에 대해, 코딩 트리 블록(Coding Tree Unit, CTU)의 할당을 통해 하나의 비디오 코딩 블록을 얻을 수 있고, 다음 인트라 프레임 또는 인터 프레임 예측을 거친 후 얻은 잔차 픽셀 정보에 대해 변환과 양자화 유닛(101)을 통해 상기 비디오 코딩 블록을 변환하며, 잔차 정보를 픽셀 도메인으로부터 변환 도메인으로 변환하고, 얻은 변환 계수를 양자화하는 것을 포함하며, 비트 레이트를 추가적으로 감소시킬 수 있으며; 인트라 프레임 추정 유닛(102)과 인트라 프레임 예측 유닛(103)은 상기 비디오 코딩 블록에 대해 인트라 프레임 예측을 수행하기 위한 것이며; 명확하게, 인트라 프레임 추정 유닛(102)과 인트라 프레임 예측 유닛(103)은 상기 비디오 코딩 블록을 코딩하는데 사용될 인트라 프레임 예측 모드를 결정하기 위한 것이며; 움직임 보상 유닛(104)과 움직임 추정 유닛(105)은 수신된 비디오 코딩 블록이 하나 또는 복수 개의 참조 프레임에서의 하나 또는 복수 개의 블록에 대한 인터 프레임 예측 코딩을 실행하여 시간 예측 정보를 제공하기 위한 것이며; 움직임 추정 유닛(105)에 의해 실행된 움직임 추정은 움직임 벡터를 생성하는 과정이고, 상기 움직임 벡터는 상기 비디오 코딩 블록의 움직임을 추정할 수 있으며, 다음 움직임 보상 유닛(104)이 움직임 추정 유닛(105)에 의해 결정된 움직임 벡터에 기반하여 움직임 보상을 실행하고; 인트라 프레임 예측 모드를 결정한 후, 인트라 프레임 예측 유닛(103)은 또한 선택된 인트라 프레임 예측 데이터를 코딩 유닛(109)에 제공하는데 사용되고, 또한 움직임 추정 유닛(105)은 계산하여 결정된 움직임 벡터 데이터도 코딩 유닛(109)에 송신하며; 또한, 역변환과 역 양자화 유닛(106)은 상기 비디오 코딩 블록의 재구축에 사용되며, 픽셀 도메인에서 잔차 블록을 재구축하고, 상기 재구축 잔차 블록은 필터 제어 분석 유닛(107)과 필터링 유닛(108)을 통해 블록 효과 아티팩트를 제거하며, 다음 상기 재구축된 잔차 블록을 디코딩 이미지 버퍼링 유닛(110)의 프레임에서의 하나의 예측성 블록에 추가하여, 재구축을 거친 비디오 코딩 블록을 생성하는 데 사용되고; 코딩 유닛(109)은 각 코딩 파라미터 및 양자화된 변환 계수를 코딩하는데 사용되고, CABAC에 기반한 코딩 알고리즘에서, 컨텍스트 내용은 인접 코딩 블록에 기반하여, 결정된 인트라 프레임 예측 모드의 정보를 코딩 지시하여, 상기 비디오 신호의 비트 스트림을 출력하는데 사용될 수 있으며; 디코딩 이미지 버퍼링 유닛(110)은 재구축된 비디오 코딩 블록을 저장하는데 사용되고, 예측 참조에 사용된다. 비디오 이미지 코딩의 수행에 따라, 새로운 재구축된 비디오 코딩 블록이 부단히 생성되고, 이러한 재구축된 비디오 코딩 블록은 모두 디코딩 이미지 버퍼링 유닛(110)에 저장된다.

도 2를 참조하면, 본 출원의 실시예에서 제공한 비디오 디코딩 시스템의 조성 블록도 예를 도시하고; 도 2에 도시된 바와 같이, 상기 비디오 디코딩 시스템(200)은 디코딩 유닛(201), 역변환과 역 양자화 유닛(202), 인트라 프레임 예측 유닛(203), 움직임 보상 유닛(204), 필터링 유닛(205)과 디코딩 이미지 버퍼링 유닛(206) 등을 포함하며, 여기서, 디코딩 유닛(201)은 헤드 정보 디코딩 및 CABAC 디코딩을 구현할 수 있고, 필터링 유닛(205)은 디블로킹 필터링 및 SAO 필터링을 구현할 수 있다. 입력된 비디오 신호가 도 1의 코딩 처리를 거친 후, 상기 비디오 신호의 비트 스트림을 출력하고; 상기 비트 스트림은 비디오 디코딩 시스템(200)에 입력되고, 먼저 디코딩 유닛(201)을 거친 후, 디코딩된 변환 계수를 얻으며; 상기 변환 계수에 대해 역변환과 역 양자화 유닛(202)을 통해 처리를 수행하여, 픽셀 도메인에서 잔차 블록을 생성하도록 하며; 인트라 프레임 예측 유닛(203)은 결정된 인트라 프레임 예측 모드와 현재 프레임 또는 사진으로부터의 이전에 디코딩 블록을 거친 데이터에 기반하여 현재 비디오 디코딩 블록의 예측 데이터를 생성하는데 사용될 수 있고; 움직임 보상 유닛(204)은 움직임 벡터와 다른 연관된 신택틱 요인을 파싱하는 것을 통해 비디오 디코딩 블록을 위한 예측 정보를 결정하고, 상기 예측 정보를 사용하여 디코딩 중인 비디오 디코딩 블록의 예측성 블록을 생성하며; 역변환과 역 양자화 유닛(202)으로부터의 잔차 블록과 인트라 프레임 예측 유닛(203) 또는 움직임 보상 유닛(204)에 의해 생성된 대응되는 예측성 블록에 대해 합을 구하는 것을 통해, 디코딩된 비디오 블록을 형성하며; 상기 디코딩된 비디오 신호는 필터링 유닛(205)을 통해 블록 효과 아티팩트를 제거하여, 비디오 품질을 향상시키며; 다음 디코딩을 거친 비디오 블록을 디코딩 이미지 버퍼링 유닛(206)에 저장하고, 디코딩 이미지 버퍼링 유닛(206)은 향후 인트라 프레임 예측 또는 움직임 보상을 위한 참조 이미지를 저장하며, 동시에 비디오 신호의 출력에도 사용되고, 즉 복원된 원시 비디오 신호를 얻는다.

본 출원의 실시예에서의 이미지 요소 예측 방법은, 도 1에 도시된 인트라 프레임 예측 유닛(103) 부분과 도 2에 도시된 인트라 프레임 예측 유닛(203) 부분에 주로 적용된다. 즉, 본 출원의 실시예에서의 이미지 요소 예측 방법은, 비디오 코딩 시스템에 적용될 수 있을 뿐만 아니라, 비디오 디코딩 시스템에 적용될 수도 있으며, 심지어 비디오 코딩 시스템과 비디오 디코딩 시스템에 동시에 적용될 수도 있으나, 본 출원의 실시예는 구체적으로 한정하지 않는다. 더 설명해야 할 것은, 상기 이미지 요소 예측 방법이 인트라 프레임 예측 유닛(103) 부분에 적용될 때, “현재 블록”은 구체적으로 인트라 프레임 예측에서의 현재 코딩 블록을 가리키고; 상기 이미지 요소 예측 방법이 인트라 프레임 예측 유닛(203) 부분에 적용될 때, “현재 블록”은 구체적으로 인트라 프레임 예측에서의 현재 디코딩 블록을 가리킨다.

상기 도 1 또는 도 2의 적용 시나리오 예에 기반하여, 도 3을 참조하면, 이는 본 출원의 실시예에서 제공한 이미지 요소 예측 방법의 흐름 예시도를 도시한다. 도 3에 도시된 바와 같이, 상기 방법은 아래와 같은 단계를 포함할 수 있다.

단계 S301에 있어서, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하고, 여기서, 상기 인접 참조 샘플 세트에는 적어도 하나의 참조 샘플 값이 포함된다.

설명해야 할 것은, 비디오 이미지는 복수 개의 이미지 블록으로 할당될 수 있고, 각 현재 코딩될 이미지 블록은 코딩 블록으로 지칭될 수 있다. 여기서, 각 코딩 블록은 제1 이미지 요소, 제2 이미지 요소와 제3 이미지 요소를 포함할 수 있고; 현재 블록은 비디오 이미지에서 현재 제1 이미지 요소, 제2 이미지 요소 또는 제3 이미지 요소 예측을 수행할 코딩 블록이다.

여기서, 현재 블록이 제1 이미지 요소 예측을 수행하고, 제1 이미지 요소가 휘도 요소인 것으로 가정하면, 즉 예측될 이미지 요소가 휘도 요소이면, 현재 블록은 휘도 블록으로 지칭될 수도 있고; 또는, 현재 블록이 제2 이미지 요소 예측을 수행하고, 제2 이미지 요소가 색도 요소인 것으로 가정하면, 즉 예측될 이미지 요소가 색도 요소이면, 현재 블록은 색도 블록으로 지칭될 수도 있다.

더 설명해야할 것은, 현재 블록에 대해, 좌측 인접 영역, 좌측 아래 인접 영역, 상부 인접 영역과 우측 상부 인접 영역이 모두 유효 영역일 때, 인접 참조 샘플 세트는 현재 블록의 좌측 인접 영역과 상부 인접 영역에서의 참조 픽셀로부터 필터링하여 얻은 것일 수 있고, 현재 블록에서의 좌측 인접 영역과 좌측 아래 인접 영역에서의 참조 픽셀로부터 필터링하여 얻은 것일 수도 있으며, 또한 현재 블록의 상부 인접 영역과 우측 상부 인접 영역에서의 참조 픽셀로부터 필터링하여 얻은 것일 수 있으나, 본 출원의 실시예에서는 구체적으로 한정하지 않는다.

일부 실시예에 있어서, 단계 S301의 경우, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,

상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하는 단계 - 상기 현재 블록의 적어도 하나의 변은 상부 변, 우측 상부 변, 좌측 변과 좌측 아래 변 중 적어도 하나를 포함함 - ; 및

획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계를 포함할 수 있다.

여기서, 현재 블록의 적어도 하나의 변은 상부 변(윗 행으로 지칭할 수도 있음)일 수 있고, 우측 상부 변(오른쪽 윗 행으로 지칭할 수도 있음)일 수도 있으며, 또한, 좌측 변(왼쪽 열으로 지칭할 수도 있음) 또는 좌측 아래 변(왼쪽 아래 열으로 지칭할 수도 있음)일 수도 있으며; 심지어 또한 두 개의 변의 조합, 예를 들어 상부 변과 좌측 변일 수 있으나; 본 출원의 실시예는 한정하지 않는다.

더 나아가, 일부 실시예에 있어서, 현재 블록의 적어도 하나의 변이 좌측 변 및 상부 변 중 적어도 하나이면, 단계 S301에 있어서, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,

상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하는 단계 - 상기 현재 블록의 적어도 하나의 변은 상부 변 및 좌측 변 중 적어도 하나를 포함함 - ; 및

여기서, 현재 블록의 적어도 하나의 변은 현재 블록의 좌측 변 및 현재 블록의 상부 변 중 적어도 하나를 포함할 수 있고; 즉 현재 블록의 적어도 하나의 변은 현재 블록의 상부 변을 가리킬 수 있고, 현재 블록의 좌측 변을 가리킬 수도 있으며, 심지어 또한, 현재 블록의 상부 변과 좌측 변을 가리킬 수 있으나, 본 출원의 실시예는 구체적으로 한정하지 않는다.

더 나아가, 일부 실시예에 있어서, 단계 S301에 대해, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,

상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀에 대해 제1 필터링 처리를 수행하여, 상기 적어도 하나의 변과 인접한 참조 샘플 값을 결정하는 단계; 및

결정된 참조 샘플 값에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 조성하는 단계를 포함할 수 있다.

더 나아가, 일부 실시예에 있어서, 상기 방법은 또한,

상기 제1 필터링 처리는 다운 샘플링 필터링 처리 또는 저역 필터링 처리를 포함하는 단계를 포함할 수 있다.

설명해야 할 것은, 좌측 인접 영역과 상부 인접 영역이 전부 유효 영역일 때, 이때 인접 참조 샘플 세트는 현재 블록의 좌측 변과 인접한 참조 픽셀 및 현재 블록의 상부 변과 인접한 참조 픽셀로부터 필터링하여 얻은 것일 수 있고, 좌측 인접 영역이 유효 영역이고, 상부 인접 영역이 무효 영역일 때, 이때 인접 참조 샘플 세트는 현재 블록의 좌측 변과 인접한 참조 픽셀로부터 필터링하여 얻은 것일 수 있고; 좌측 인접 영역이 무효 영역이고, 상부 인접 영역이 유효 영역일 때, 이때 인접 참조 샘플 세트는 현재 블록의 상부 변과 인접한 참조 픽셀로부터 필터링하여 얻은 것일 수 있다. 여기서 필터링은 다운 샘플링 필터링 처리일 수 있고, 저역 필터링 처리일 수도 있으며, 본 출원의 실시예는 구체적으로 한정하지 않는다.

실제 응용에서, 현재 블록을 예측할 때, 현재 블록의 윗 블록과 왼쪽 블록은 모두 이미 코딩된 것이고; MIP 기술의 참조 픽셀은 현재 블록의 이전 행과 인접한 참조 픽셀의 재구축 값과 현재 블록의 왼쪽 열과 인접한 참조 픽셀의 재구축 값일 수 있다. 이때, 현재 블록의 참조 픽셀은 현재 블록의 상부 변에 대응되는 참조 픽셀과 좌측 변에 대응되는 참조 픽셀을 획득하여 얻은 것일 수 있다. 도 4a에 도시된 바와 같이, 이는 본 출원의 실시예에서 제공한 참조 픽셀의 위치 예시도를 도시한다. 도 4a에서, 좌측 인접 영역과 상부 인접 영역은 전부 유효 영역이고; 여기서, 현재 블록의 상부 변에 대응되는 참조 픽셀은 그레이로 충진된 픽셀이고, refT로 표시할 수 있고; 현재 블록의 좌측 변에 대응되는 참조 픽셀이 사선으로 충진된 픽셀이고, refL로 표시할 수 있으면, 현재 블록의 참조 픽셀은 refT와 refL을 포함할 수 있고, 인접 참조 샘플 세트는 refT와 refL을 필터링하는 것을 통해 얻은 것이다. 여기서, 특히 유의해야할 것은, 무효 위치(예를 들어 이미지의 경계)에 대해, 기존의 인트라 프레임 예측 기술에서 참조 픽셀 획득과 동일한 방법을 사용하여 충진할 수 있다.

MIP 기술에 대해, 현재 블록의 크기는 현재 블록을 세 타입으로 할당할 수 있고, mipSizeId으로 현재 블록의 카테고리를 기록할 수 있다 구체적으로, 상이한 카테고리의 현재 블록에 대해, 인접 참조 샘플 세트에 포함되는 샘플링 포인트 개수와 매트릭스 곱셈 출력 샘플링 포인트 개수는 상이하다.

현재 블록이 4×4인 이미지 블록이고, 이때 mipSizeId=0인 것으로 가정하면, 입력된 참조 픽셀 세트는 각 변을 위해 두 개의 픽셀 포인트를 추출하며, 매트릭스 곱셈 입력 샘플 포인트 개수가 네 개이면, 4×4인 MIP 예측 블록을 출력하며;

현재 블록이 4×N, N×4 또는 8×8인 이미지 블록(여기서, N=8,16,32,64)이고, 이때 mipSizeId=1인 것으로 가정하면, 입력된 참조 픽셀 세트는 각 변을 위해 네 개의 픽셀 포인트를 추출하고, 매트릭스 곱셈 입력 샘플 포인트의 개수는 여덟 개이면, 4×4인 MIP 예측 블록을 출력하고;

현재 블록이 다른 크기의 이미지 블록이고, 이 때 mipSizeId=2인 것으로 가정하면, 입력된 참조 픽셀 세트는 각 변을 위해 네 개의 픽셀 포인트를 추출하고, 매트릭스 곱셈 입력 샘플 포인트 개수가 일곱 개이면, 8×8인 MIP 예측 블록을 출력한다.

이로써, 현재 블록의 너비와 높이의 합이 매트릭스 곱셈 입력 샘플 포인트 개수보다 크므로, 입력 샘플 포인트 개수의 샘플 값을 얻기 위해, 이때 또한 획득된 참조 픽셀(refT와 refL을 포함)에 대해 다운 샘플링 처리를 수행하여, 인접 참조 샘플 세트를 얻는다.

더 나아가, 일부 실시예에 있어서, 상기 획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,

상기 현재 블록의 적어도 하나의 변에 기반하여, 참조 픽셀의 샘플링 위치를 결정하는 단계; 및

획득된 참조 픽셀로부터 상기 샘플 위치에 대응되는 참조 샘플 값을 추출하여, 추출하여 얻은 파라미터 샘플 값으로 상기 인접 참조 샘플 세트를 조성하는 단계를 포함할 수 있다.

더 나아가, 상기 현재 블록의 적어도 하나의 변에 기반하여, 참조 픽셀의 샘플링 위치를 결정하는 단계는,

상기 현재 블록의 적어도 하나의 변에 대해 다운 샘플링 처리를 수행하여, 상기 샘플 위치를 결정하는 단계를 포함할 수 있다.

설명해야 할 것은, 현재 블록의 각 참조 변(상부 변과 좌측 변을 포함함)에서 boundarySize 개의 참조 샘플을 각각 샘플링해야 하고, boundarySize의 값은 현재 블록의 카테고리(mipSizeId)와 관련된다.

구체적으로, 참조 픽셀(refS)에 대해, 참조 픽셀 개수(즉 현재 블록의 변의 길이)는 nTbS이고; 이때 다운 샘플링되어야할 참조 픽셀 개수는 boundarySize이다. 여기서, 각 참조 변의 샘플링 레이트는 bDwn로 표시될 수 있고, 공식 (1)에 따라 bDwn을 계산할 수 있다. 또한, 참조 픽셀(refS)에서, 각 bDwn 개의 참조 픽셀에 대해 평균 작업을 수행하여, 얻은 평균값을 참조 샘플링(redS)에서의 하나의 샘플링 포인트로 사용하며, 공식 (2)에 따라 redS를 계산할 수 있다. 여기서, S는 각각 W와 H에 의해 대체될 수 있고, 여기서, W는 상부 변을 표시하고, H는 좌측 변을 표시한다.

(1)

(2)

공식 (1)과 공식 (2)의 다운 샘플링 처리를 거친 후, 현재 블록의 상부 변 참조 픽셀(refT)에 대해 다운 샘플링 처리를 수행하여 얻은 상부 변 참조 샘플링(redT) 및 현재 블록의 좌측 변 참조 픽셀(refL)에 대해 다운 샘플링 처리를 수행하여 얻은 좌측 변 참조 샘플링(redL)과 같은 두 개 부분의 참조 샘플을 얻을 수 있고; 도 4b에 도시된 바와 같다. 도 4b에서, 4×4인 현재 블록을 예로 들면, 좌측 변에서 다운 샘플링 처리를 수행하여 얻은 redL은 두 개의 참조 픽셀, 즉 참조 픽셀 1과 참조 픽셀 2를 포함하고; 상부 변에서 다운 샘플링 처리를 수행하여 얻은 redT는 두 개의 참조 픽셀, 즉 참조 픽셀 3과 참조 픽셀 4를 포함하고; 이로부터, 현재 블록의 인접 참조 샘플 세트는 네 개의 참조 픽셀을 포함한다.

MIP 기술에서, 현재 블록의 카테고리(mipSizeId)를 획득하는 것 외에, 또한 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값(BitDepth로 표시할 수 있음)을 획득해야 한다. 예측될 이미지 요소가 휘도 요소인 것으로 가정하면, 현재 블록의 휘도 비트 깊이를 얻을 수 있고; 또는, 예측될 이미지 요소가 색도 요소인 것으로 가정하면, 현재 블록의 색도 비트 깊이를 획득할 수 있음으로써, 현재 블록의 기설정 파라미터 값을 얻을 수 있다.

더 나아가, 일부 실시예에 있어서, 단계 S301에 있어서, 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계는,

상기 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값을 획득하는 단계; 및

1을 2진 값으로 전환하고, 상기 2진 값에 대해 상기 비트 깊이 값에서 1을 빼는 시프트 처리를 수행하여, 상기 기설정 파라미터 값을 얻는 단계를 포함할 수 있다.

즉, 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값(BitDepth)을 획득한 후, 기설정 파라미터 값은 1<<(BitDepth-1)로 표시될 수 있다.

이로써, 현재 블록의 인접 참조 샘플 세트 및 기설정 파라미터 값을 얻은 후, 버퍼링하여, 입력 참조 샘플 값 세트를 구축할 수 있다.

단계 S302에 있어서, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축한다.

설명해야 할 것은, 인접 참조 샘플 세트를 얻은 후, 먼저 하나의 초기 입력 참조 샘플 값 세트를 구축할 수 있고; 다음 초기 버퍼 영역의 마지막에 하나의 비트를 추가하여, 기설정 파라미터 값을 버퍼링함으로써, 입력 참조 샘플 값 세트를 얻으므로, 향후 입력 샘플 매트릭스를 구축하는 데 편리하다.

일부 실시예에 있어서, 단계 S302에 있어서, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계는,

상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계; 및

상기 초기 입력 참조 샘플 값 세트 이후의 데이터 유닛을 사용하여, 상기 기설정 파라미터 값을 버퍼링하여, 상기 입력 참조 샘플 값 세트를 얻는 단계를 포함할 수 있다.

더 나아가, 초기 입력 참조 샘플 값 세트의 구축에 대해, 인코더측과 디코더측에서의 구축 방식은 구별되며, 주로 전치 처리 지시 플래그(isTransposed로 표시할 수 있음)의 결정 방식과 관련된다.

인코더측에 적용될 때, 일부 실시예에 있어서, 상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계는,

비율 왜곡 최적화의 방식을 이용하여, 전치 처리 지시 플래그의 값을 결정하는 단계;

상기 전치 처리 지시 플래그의 값이 0일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 상기 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계; 또는,

상기 전치 처리 지시 플래그의 값이 1일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 상기 버퍼 영역에 대해 전치 처리를 수행하여, 전치된 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계를 포함할 수 있다.

설명해야 할 것은, 비율 왜곡 최적화(Rate Distortion Optimization, RDO)의 방식을 이용하여, 전치 처리 지시 플래그의 값을 결정할 수 있고; 예를 들어 전치 처리 수행된 제1 대가 값과 전치 처리 수행되지 않은 제2 대가 값을 각각 계산하고; 제1 대가 값이 제2 대가 값보다 작으면, 이때 전치 처리 지시 플래그의 값을 1로 결정하고, 이때 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 또는 인접 참조 샘플 세트에서 좌측 변에 대응되는 참조 샘플 값을 상부 변에 대응되는 참조 샘플 값에 저장하기 전, 전치 처리를 수행해야 하고; 제1 대가 값이 제2 대가 값보다 작지 않으면, 전치 처리 지시 플래그의 값을 0으로 결정하고, 이때 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 또는 인접 참조 샘플 세트에서 좌측 변에 대응되는 참조 샘플 값을 상부 변에 대응되는 참조 샘플 값에 저장한 후, 전치 처리를 수행할 필요가 없다.

더 설명해야 할 것은, 인코더측에서, 또한 결정된 전치 처리 지시 플래그의 값을 비트 스트림에 기록하여, 향후 디코더측에서 해석 처리를 수행하도록 한다.

디코더측에 적용될 때, 일부 실시예에 있어서, 상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계는,

비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하는 단계;

설명해야 할 것은, 디코더측에서, 비트 스트림을 해석하는 것을 통해, 전치 처리 지시 플래그의 값을 직접 획득할 수 있고; 다음 전치 처리 지시 플래그의 값에 따라, 버퍼 영역에 대해 전치 처리를 수행할지 여부를 결정한다.

즉, 전치 처리 지시 플래그(isTransposed)의 값을 결정한 후, 버퍼 영역을 pTemp으로 표시할 수 있는 것으로 가정하면, isTransposed가 0일 때, pTemp에서 먼저 상부 변에 대응되는 모든 참조 픽셀 redT를 저장하고, 다음 redT가 전부 저장된 후의 다음 비트에, 좌측 변에 대응되는 모든 참조 픽셀 redL를 계속 저장하며; 도 5a에 도시된 바와 같이, 4×4인 현재 블록을 예로 들면, redL은 참조 픽셀 1과 참조 픽셀 2를 포함하고, redT는 참조 픽셀 3과 참조 픽셀 4를 포함하며; 이로써, pTemp에서 버퍼링 순서는 참조 픽셀 3, 참조 픽셀 4, 참조 픽셀 1과 참조 픽셀 2의 순서이고; 상부 변에 대응되는 참조 픽셀이 좌측 변에 대응되는 참조 픽셀에 전부 저장되기 전이므로, 전치할 필요가 없으며, 얻은 버퍼 영역은, 초기 입력 참조 샘플 값 세트이다.

isTransposed가 1일 때, pTemp에 좌측 변에 대응되는 모든 참조 픽셀 redL을 먼저 저장하고, 다음 redL이 전부 저장된 후의 다음 비트에서, 상부 변에 대응되는 모든 참조 픽셀 redT를 계속 저장하며; 도 5b에 도시된 바와 같이, 여전히 4×4인 현재 블록을 예로 들면, redL은 참조 픽셀 1과 참조 픽셀 2를 포함하고, redT는 참조 픽셀 3과 참조 픽셀 4를 포함하며; 이로써, pTemp에서의 버퍼링 순서는 참조 픽셀 1, 참조 픽셀 2, 참조 픽셀 3과 참조 픽셀 4의 순서이고; 상부 변에 대응되는 참조 픽셀이 좌측 변에 대응되는 참조 픽셀에 전부 저장된 후이므로, 전치를 수행해야 하고, 다음 전치된 버퍼 영역을 초기 입력 참조 샘플 값 세트로 결정한다.

이와 같이, 초기 입력 참조 샘플 값 세트를 얻은 후, 초기 입력 참조 샘플 값 세트 이후에 하나의 데이터 유닛을 확장할 수 있으며, 상기 데이터 유닛은 기설정 파라미터 값을 버퍼링하는데 사용되고, 즉 1<<(BitDepth-1)인 것을 저장하는데 사용되며, 도 5c에 도시된 바와 같이; 도 5c에서, 여전히 4×4인 현재 블록을 예로 들면, 초기 입력 참조 샘플 값 세트는 네 개의 값을 저장하며, 즉 참조 픽셀 다운 샘플링 수행된 참조 샘플 값을 저장하며; 본 출원의 실시예에서, 입력 참조 샘플 값 세트는 다섯 개의 값을 저장하며, 네 개의 참조 픽셀이 다운 샘플링 수행된 참조 샘플 값 이외에, 하나의 기설정 파라미터 값을 추가로 저장한다.

단계 S303에 있어서, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정한다.

설명해야 할 것은, 입력 샘플은 매트릭스 곱셈 연산을 수행해야 하는 매트릭스 벡터이다. 현재의 방안은 초기 버퍼 영역(pTemp으로 표시), 현재 블록 카테고리(mipSizeId로 표시), 예측될 이미지 요소에 대응되는 비트 깊이 값(BitDepth로 표시)과 입력 샘플 개수로 결정되며, 입력 샘플 매트릭스에서 제x 입력 샘플 값(P[x]로 표시)을 최종적으로 획득한다. 여기서, mipSizeId=0 또는 1일 때, pTemp의 0 번째 위치의 샘플 값에서 1<<(BitDepth-1)인 것을 빼서 P[0]으로 사용하며, 다음 다른 위치의 각 위치에 대응되는 샘플 값에서 pTemp의 0 번째 위치의 값을 빼고 [x]로 사용하며; 구체적으로 아래와 같다.

(3)

mipSizeId=2일 때, 초기 버퍼 영역(pTemp)의 첫 번째 위치는 무시할 수 있고, 다음 다른 위치의 각 위치에 대응되는 샘플 값에서 0 번째 위치에 대응되는 샘플 값을 빼고, 이전의 위치에 저장하며, 구체적으로 아래와 같다.

(4)

도 6a에 도시된 바와 같이, 여전히 4×4인 현재 블록을 예로 들면, 초기 버퍼 영역은 네 개의 값을 저장하지만, 입력 샘플 개수는 네 개이고, 이때 공식 (3) 또는 공식 (4)에 따라 네 개의 입력 샘플 값을 결정할 수 있으며, p[x]로 표시하고, x=0,1,2,3이며; 이로써 1×4인 입력 샘플 매트릭스를 조성한다. 그러나 현재의 방안에서, 매트릭스 곱셈 입력 샘플의 유도 과정이 현재 블록 카테고리(mipSizeId)와 관련되므로, 유도 과정이 비교적 번거로워 지고, 일정한 복잡도를 구비하며; mipSizeId=0 또는 1인 경우, p[0]와 p[i]인 계산 공식은 상이하며, 병행 처리에 유리하지 않다.

본 출원의 실시예에 있어서, 초기 버퍼 영역을 입력 참조 샘플 값 세트로 확장하고, 1<<(BitDepth-1)인 것을 저장할 수 있으며; 이와 같이 입력 샘플을 구현 가능한 유도 과정은 현재 블록 카테고리(mipSizeId)와 다시 관련되지 않으므로, 매트릭스 곱셈 입력 샘플의 유도 과정을 통합하고; 입력 샘플은 다만 입력 참조 샘플 값 세트(여전히 pTemp로 표시)와 입력 샘플 개수를 통해 결정될 수 있어, 입력 샘플 매트릭스에서 제i 입력 샘플 값(p[i]로 표시)을 획득한다.

구체적으로, 일부 실시예에 있어서, 단계 S303에 있어서, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계는,

상기 입력 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 0 번째 위치에 대응되는 샘플 값에 따라, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계 - i는 0보다 크거나 같고 N보다 작은 양의 정수이고, N은 상기 입력 샘플 매트릭스에 포함되는 원소 개수를 나타냄 - ; 및

계산하여 얻은 N 개의 입력 샘플 값에 따라, 상기 입력 샘플 매트릭스를 조성하는 단계를 포함할 수 있다.

더 나아가, 일부 실시예에 있어서, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계는,

상기 제1 기설정 계산 모델을 이용하여 빼기 연산을 수행하여, 상기 제i 입력 샘플 값을 얻는 단계를 포함할 수 있다.

더 나아가, 일부 실시예에 있어서, 상기 방법은 또한,

상기 빼기 연산의 빼어지는 수를 상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계; 및

상기 빼기 연산의 빼는 수를 상기 참조 샘플 값 세트에서의 0 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계를 포함할 수 있다.

즉, 현재 블록의 모든 카테고리에 있어서, 모두 입력 참조 샘플 값 세트에서의 첫 번째 위치를 무시할 수 있고, 즉 제 0 위치에 대응되는 샘플 값을 무시할 수 있고; 다음 다른 위치의 각 위치에 대응되는 샘플 값에서 제0 위치에 대응되는 샘플 값을 빼고, 이전의 위치에 저장하며; 여기서, 제1 기설정 계산 모델은 아래의 공식과 같다.

(5)

여기서, i=0,1,…, N-1이며, N은 입력 샘플 개수(inSize로 표시할 수도 있음)이고, 입력 샘플 개수는 입력 샘플 매트릭스에 포함되는 원소 개수이며; pTemp[0]은 제0 위치에 대응되는 샘플 값을 나타내고, pTemp[i+1]는 제i+1 위치에 대응되는 샘플 값을 나타내고, p[i]는 제i 입력 샘플 값을 나타내며; 이로써, N 개의 입력 샘플 값을 얻은 후, 입력 샘플 매트릭스를 조성할 수 있고; 도 6b에 도시된 바와 같이, 여전히 4×4인 현재 블록을 예로 들면, 입력 참조 샘플 값 세트는 다섯 개의 값을 저장하지만, 입력 샘플 개수는 네 개이므로, 이때 현재 블록의 모든 카테고리에 있어서, 모두 공식 (5)에 따라 네 개의 입력 샘플 값을 결정할 수 있고, p[i]로 나타내며, i=0,1,2,3이고; 이로써 1×4인 입력 샘플 매트릭스를 조성한다.

단계 S304에 있어서, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득한다.

설명해야 할 것은, 입력 샘플 매트릭스를 얻은 후, MIP 예측 블록의 적어도 하나의 픽셀의 일시적인 예측 값을 먼저 계산할 수 있고; 다음 순차적으로 클리핑 처리, 전치 처리와 업샘플링 처리 등을 거쳐, 현재 블록의 예측 블록을 최종적으로 획득한다.

더 설명해야 할 것은, 예측될 이미지 요소가 휘도 요소인 것으로 가정하면, 현재 블록은 현재 휘도 블록일 수 있고, 최종적으로 현재 휘도 블록의 휘도 예측 블록을 얻을 수 있으며, 상기 휘도 예측 블록에 적어도 하나의 픽셀의 휘도 예측 값을 제공하고; 또는, 예측될 이미지 요소가 색도 요소인 것으로 가정하면, 현재 블록은 현재 색도 블록일 수 있고, 최종적으로 현재 색도 블록의 색도 예측 블록을 얻을 수 있으며, 상기 색도 예측 블록에 적어도 하나의 픽셀의 색도 예측 값을 제공하며; 본 출원의 실시예는 어떤 한정도 하지 않는다.

일부 실시예에 있어서, 단계 S304에 있어서, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계는, 도 7에 도시된 바와 같으며, 상기 단계는 아래와 같은 단계를 포함할 수 있다.

단계 S401에 있어서, 입력 샘플 매트릭스에 따라, 현재 블록의 MIP 예측 블록을 획득하고, 여기서, MIP 예측 블록은 현재 블록에서 적어도 일부 픽셀 위치의 예측 샘플 값을 얻는다.

설명해야 할 것은, 입력 샘플 매트릭스를 얻은 후, 또한 현재 블록에 대응되는 가중 매트릭스(mWeight로 표시), 시프트 인자(sW로 표시)와 편이 인자(fO로 표시)를 획득할 수 있고; 다음 도 8에 도시된 바와 같이, 제2 기설정 계산 모델을 이용하여 MIP 예측 블록(predMip로 표시)에서 적어도 하나의 픽셀의 일시적인 예측 값을 계산하여, MIP 예측 블록을 얻을 수 있다.

더 나아가, 일부 실시예에 있어서, 단계 S401에 대해, 상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,

상기 현재 블록에 대응되는 가중 매트릭스, 시프트 인자와 편이 인자를 획득하는 단계; 및

제2 기설정 계산 모델을 이용하여 상기 입력 샘플 매트릭스와 상기 가중 매트릭스, 상기 시프트 인자 및 상기 편이 인자에 대해 매트릭스 곱셈 처리를 수행하여, 상기 MIP 예측 블록을 계산하여 얻는 단계를 포함할 수 있다.

즉, 인코더 또는 디코더에서, 가중 매트릭스 표를 미리 구축하고, 상기 가중 매트릭스 표는 인코더 또는 디코더에 저장된다. 이로써, 현재 블록 카테고리(mipSizeId)와 MIP 예측 모드(modeId)에 따라, 표를 검색하는 방식을 통해 현재 블록에 사용되어야 할 가중 매트릭스(mWeight[x][y])를 결정할 수 있다.

또한, 인코더 또는 디코더에는, 또한 표 1에 표시된 바와 같은 시프트 인자 표; 및 표 2에 표시된 바와 같은 편이 인자 표가 미리 구축된다. 또한 상기 시프트 인자 표와 편이 인자 표도 인코더 또는 디코더에 저장된다. 이로써, 현재 블록 카테고리(mipSizeId)와 MIP 예측 모드(modeId)에 따라, 표를 검색하는 방식을 통해 현재 블록에 사용되어야 할 시프트 인자(sW)와 편이 인자(fO)를 결정할 수도 있다.

이로써, 현재 블록 카테고리(mipSizeId)와 MIP 예측 모드(modeId)를 획득한 후, 표를 검색하는 방식을 이용하여 가중 매트릭스(mWeight[x][y]), 시프트 인자(sW)와 편이 인자(fO)를 결정할 수 있고, 즉 MIP 예측 블록(predMip[x][y])을 계산할 수 있다. 여기서, 제2 기설정 계산 모델은 아래와 같다.

(6)

여기서, [x][y]는 픽셀 포인트의 위치 좌표를 나타내고, x는 수평 방향을 나타내고, y는 수직 방향을 나타내며; inSize는 입력 샘플 개수를 나타내고, predSize는 MIP 예측 블록(predMip)의 변의 길이를 나타낸다. 여기서, predSize는 다만 현재 블록 카테고리(mipSizeId)와 관련되고; mipSizeId=0 또는 1일 때, 출력된 MIP 예측 블록이 4×4이므로, predSize는 4와 같고; mipSizeId=2일 때, 출력된 MIP 예측 블록이 8×8이므로, predSize는 8과 같다. 이와 같이, 상기 공식 (6)에 따라, MIP 예측 블록(predMip)에서 적어도 하나의 픽셀의 일시적인 예측 값을 계산하여, MIP 예측 블록을 얻을 수 있다.

단계 S402에 있어서, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 클리핑 처리를 수행하여, 상기 현재 블록의 MIP 예측 블록을 획득한다.

설명해야 할 것은, MIP 예측 블록에서 적어도 하나의 픽셀의 일시적인 예측 값을 얻은 후, MIP 예측 블록에서 적어도 하나의 픽셀의 일시적인 예측 값에 대해 클리핑 처리를 수행할 수 있다. 구체적으로, 일시적인 예측 값이 0보다 작으면, 0으로 설정할 수 있고; 일시적인 예측 값이 (1<<BitDepth)-1보다 크면, (1<<BitDepth)-1로 설정할 수 있음으로써; 예측 값의 범위가 0과 (1<<BitDepth)-1 사이에 클리핑되도록 할 수 있다.

이로써, MIP 예측 블록에 대해 클리핑 처리를 수행한 후, MIP 예측 블록에서 적어도 하나의 픽셀의 예측 값을 얻을 수 있고, 예측 값의 범위는 0과 (1<<BitDepth)-1 사이에 위치하며; 다음 전치된 심볼 비트(isTransposed)에 따라 전치 처리가 필요한지 여부를 결정하여, 최종적인 MIP 예측 블록을 결정한다.

단계 S403에 있어서, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단한다.

단계 S404에 있어서, 판단 결과가 “예”일 때, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 전치 처리를 수행하고, 전치된 MIP 예측 블록을 현재 블록의 MIP 예측 블록으로 결정한다.

단계 S405에 있어서, 판단 결과가 “아니오”일 때, 상기 MIP 예측 블록을 상기 현재 블록의 MIP 예측 블록으로 결정한다.

단계 S406에 있어서, MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 동일한지 여부를 판단한다.

인코더측에 적용될 때, 일부 실시예에 있어서, 단계 S403에 대해, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계는,

비율 왜곡 최적화의 방식을 이용하여, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 제1 대가 값과 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 제2 대가 값을 각각 계산하는 단계;

상기 제1 대가 값이 상기 제2 대가 값보다 작을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 것으로 결정하는 단계; 또는,

상기 제1 대가 값이 상기 제2 대가 값보다 작지 않을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 것으로 결정하는 단계를 포함할 수 있다.

디코더측에 적용될 때, 일부 실시예에 있어서, 단계 S403에 있어서, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계는,

비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하는 단계; 및

상기 전치 처리 지시 플래그의 값에 따라, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계를 포함할 수 있다.

설명해야 할 것은, 전치 처리 지시 플래그는 isTransposed로 표시되고, isTransposed의 값에 따라 MIP 예측 블록에 대해 전치 처리를 수행해야 할지 여부를 판단할 수 있다. 구체적으로, 인코더측에서, 제1 대가 값이 제2 대가 값보다 작을 때, isTransposed의 값을 1로 설정하므로, MIP 예측 블록에 대해 전치 처리를 수행해야 하는 것으로 결정할 수 있고; 또는, 제1 대가 값이 제2 대가 값보다 작지 않으면, isTransposed의 값을 0으로 설정하므로, 상기 MIP 예측 블록에 대해 전치 처리를 수행할 필요가 없는 것으로 결정할 수 있다. 디코더측에서는, 비트 스트림을 해석하는 것을 통해 전치 처리 지시 플래그의 값을 획득할 수 있고; isTransposed의 값이 1인 것으로 해석하면, MIP 예측 블록에 대해 전치 처리를 수행해야 하는 것으로 결정할 수 있고; 또는, isTransposed의 값이 0인 것으로 해석하면, MIP 예측 블록에 대해 전치 처리를 수행할 필요가 없는 것으로 결정할 수 있다.

더 구체적으로, isTransposed가 0일 때, MIP 예측 블록이 전치 처리가 필요 없는 것을 나타내고, 이때 MIP 예측 블록(predMip)을 직접 사용하여 향후 단계를 수행할 수 있고, 즉 단계 S406을 실행하며, MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 동일한지 여부를 판단하며; isTransposed가 0일 때, MIP 예측 블록이 전치 처리가 필요한 것을 나타내고, 이때 아래와 같은 공식을 채택하여 전치 처리를 수행할 수 있다.

(7)

이로써, 공식 (7)에 따라, MIP 예측 블록에 대해 전치 처리를 수행한 후, 전치된 MIP 예측 블록을 획득할 수 있고, 전치된 MIP 예측 블록을 MIP 예측 블록으로 설정하고, 다음 마찬가지로 단계 S406을 실행하며, 즉 MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 동일한지 여부를 판단한다.

단계 S407에 있어서, 상기 MIP 예측 블록의 사이즈와 상기 현재 블록의 사이즈가 상이할 때, 상기 MIP 예측 블록에 대해 제2 필터링 처리를 수행하여, 상기 현재 블록의 예측 블록을 획득한다.

단계 S408에 있어서, 상기 MIP 예측 블록의 사이즈와 상기 현재 블록의 사이즈가 동일할 때, 상기 현재 블록의 예측 블록을 상기 MIP 예측 블록과 동일하게 설정하며; 여기서, 상기 예측 블록은 상기 현재 블록에서 전부 픽셀 위치의 예측 샘플 값을 포함한다.

더 나아가, 제2 필터링 처리는 업샘플링 필터링 처리 또는 저역 필터링 처리를 포함할 수 있다.

설명해야 할 것은, MIP 예측 블록을 얻은 후, MIP 예측 블록의 사이즈가, 4×4인 MIP 예측 블록과 8×8인 MIP 예측 블록만 포함하므로; 현재 블록의 사이즈와 MIP 예측 블록의 사이즈는 동일할 수 있고, 상이할 수도 있으며; 즉, MIP 예측 블록에 대응되는 샘플 값은 현재 블록을 충진하지 못할 수도 있어, 최종적인 예측 값을 생성하기 위해 MIP 예측 블록에 대해 업샘플링 작업을 수행해야 할 수 있고, 즉 MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 동일한지 여부를 판단하는 것을 통해, MIP 예측 블록에 대해 업샘플링 처리를 수행할지 여부를 결정한다.

구체적으로, MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 동일할 때, 즉 MIP 예측 블록의 너비와 높이가 모두 현재 블록과 동일할 때, MIP 예측 블록에 대해 업샘플링 처리를 수행할 필요가 없는 것을 나타내며, 이때 MIP 예측 블록을 현재 블록에 직접 충진할 수 있고, 즉 충진된 현재 블록 내에는 빈 픽셀 포인트가 없고, 이때 현재 블록에서 각 픽셀의 예측 값은 직접 MIP 예측 블록에서 각 픽셀의 예측 값으로 설정될 수 있으며, 아래와 같다.

(8)

여기서, [x][y]는 픽셀 포인트의 위치 좌표를 나타내고, x는 수평 방향을 나타내고, y는 수직 방향을 나타내며; predSamples[x][y]는 현재 블록에서 위치 좌표([x][y])의 픽셀 포인트에 대응되는 예측 값을 나타내며, predMip[x][y]는 MIP 예측 블록에서 위치 좌표([x][y])의 픽셀 포인트에 대응되는 예측 값을 나타낸다. 이와 같이, 공식 (8)에 따라, MIP 예측 블록(predMip[x][y])을 현재 블록의 예측 블록(predSamples[x][y])으로 직접 사용할 수 있다.

MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 상이할 때, 즉 MIP 예측 블록의 너비와 높이 중 하나가 현재 블록과 상이할 때, MIP 예측 블록에 대해 업샘플링 처리를 수행해야 하는 것을 나타내고, 업샘플링 처리를 수행한 후, 현재 블록의 예측 블록을 획득할 수 있다,

구체적으로, 일부 실시예에 있어서, 단계 S407에 있어서, 제2 필터링 처리가 업샘플링 필터링 처리일 때, 상기 방법은 또한,

상기 현재 블록에 대응되는 수평 업샘플링 인자와 수직 업샘플링 인자를 결정하는 단계; 및

상기 MIP 예측 블록, 상기 수평 업샘플링 인자와 상기 수직 업샘플링 인자에 따라, 제3 기설정 계산 모델을 이용하여 상기 현재 블록에서 충진될 픽셀 위치의 예측 값을 결정하여, 상기 현재 블록의 예측 블록을 얻는 단계 - 상기 충진될 픽셀 위치는 상기 현재 블록에서 상기 MIP 예측 블록의 픽셀 위치의 픽셀 위치와 상이함 - 를 포함할 수 있다.

설명해야 할 것은, MIP 예측 블록의 사이즈와 현재 블록의 사이즈가 상이할 때, 충진된 현재 블록 내에 빈 픽셀 포인트가 존재하면, MIP 예측 블록(predMip[x][y])에 대해 선형 보간 방식을 이용하여 업샘플링을 수행해야 한다.

여기서, MIP 예측 블록의 너비와 높이가 모두 predSize이고, 현재 블록의 너비가 nTbW이고, 현재 블록의 높이가 nTbH인 것으로 가정하면; MIP 예측 블록의 변의 길이(predSize)와 현재 블록의 너비(nTbW)에 따라, 수평 업샘플링 인자(upHor로 표시)를 계산하여 얻을 수 있고; 마찬가지로 MIP 예측 블록의 변의 길이(predSize)와 현재 블록의 높이(nTbH)에 따라, 수직 업샘플링 인자(upVer로 표시)를 계산하여 얻을 수 있으며; 구체적인 계산 공식은 아래와 같다.

(9)

MIP 예측 블록이 현재 블록을 충진할 수 없으므로, 이때 수평 업샘플링 인자(upHor)와 수직 업샘플링 인자(upVer)에 따라 현재 블록을 충진해야 하고, 즉 업샘플링 작업을 수행해야 하며, 대응되는 위치를 충진하는 방식은 아래와 같다.

(10)

여기서, x=0, 1, ..., nTbW-1이고 ; y=0, 1, …, nTbH-1이다.

여기서, 업샘플링 처리의 구체적인 방식은, 먼저 상부 변 참조 픽셀(refT)을 현재 블록의 이전 행의 대응 위치(predSamples[x][-1])에 충진하고, 다음 좌측 변 참조 픽셀(refL)을 현재 블록의 왼쪽 열의 대응 위치(predSamples[-1][y])에 충진하며; 공식 (10)에 따라, 현재 블록에서의 충진될 픽셀 위치에 대해, 예를 들어 대응 위치의 예측 값 사이의 빈 위치를 채우는 것일 수 있거나, 참조 픽셀과 대응 위치의 예측 값 사이의 빈 위치를 충진하는 등일 수도 있고, 먼저 수평 보간을 수행하고, 다음 수직 보간을 수행하여, 현재 블록의 업샘플링 결과(predSamples[x][y])를 최종적으로 얻을 수 있고, 상기 predSamples[x][y]는 바로 현재 블록이 MIP 예측 모드에 따라 얻은 예측 값이다.

본 출원의 실시예에 있어서, 상기 이미지 요소 예측 방법이 인코더 측에 적용될 때, 상기 이미지 요소 예측 방법을 이용하여 현재 블록에서 적어도 하나의 픽셀의 예측 값을 계산할 수 있고, 다음 현재 블록에서 적어도 하나의 픽셀의 참값과 예측 값 사이의 차이 값에 따라 적어도 하나의 픽셀에 대응되는 잔차를 계산할 수 있고, 계산하여 얻은 잔차를 비트 스트림에 작성하고; 또한, 전치 처리 지시 플래그(isTransposed)를 얻은 후, isTransposed의 값을 비트 스트림에 작성해야 하며; 다음 상기 비트 스트림이 인코더 측으로부터 디코더 측으로 전송되므로; 대응되게, 상기 이미지 요소 예측 방법이 디코더 측에 적용될 때, 비트 스트림을 해석하는 것을 통해 isTransposed의 값을 결정할 수 있고, 다음 전치 처리를 수행할지 여부를 결정하며; 또한, 상기 이미지 요소 예측 방법을 이용하여 현재 블록에서 적어도 하나의 픽셀의 예측 값을 계산할 수 있고, 다음 또한 비트 스트림을 해석하는 것을 통해 적어도 하나의 픽셀에 대응되는 잔차를 직접 획득할 수 있고, 현재 블록에서 적어도 하나의 픽셀의 예측 값과 잔차에 따라, 현재 블록에서 적어도 하나의 픽셀의 참값을 얻을 수 있다.

본 실시예는 이미지 요소 예측 방법을 제공하고, 인코더 또는 디코더에 적용된다. 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하며, 인접 참조 샘플 세트에는 적어도 하나의 참조 샘플 값이 포함되며; 인접 참조 샘플 세트와 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하고; 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하며; 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득한다. 이로써, 본 출원의 실시예의 방안은 현재 블록 카테고리의 판단을 수행할 필요가 없으므로, 시간 복잡도를 저하시키고, 하드웨어 구현에 유리하며; 또한, 입력 참조 샘플 값 세트 및 제1 기설정 계산 모델에 따라 입력 샘플 매트릭스를 결정할 수 있고, 이때 매트릭스 곱셈 입력 샘플의 유도 과정도 간략화하여, 입력 샘플 매트릭스의 유도 과정이 통합되도록 하며, 본 출원의 실시예의 방안은 현재 블록 카테고리에 의존하지 않아도, 병행 처리를 구현할 수 있어, 계산 복잡도를 저하시킬 수 있다.

전술한 실시예와 동일한 발명 구상에 기반하여, 도 9를 참조하면, 본 출원의 실시예에서 제공한 인코더(90)의 구성의 구조 예시도를 나타낸다. 도 9에 도시된 바와 같이, 상기 인코더(90)는, 제1 결정 유닛(901), 제1 버퍼링 유닛(902)과 제1 예측 유닛(903)을 포함할 수 있고, 여기서,

제1 결정 유닛(901)은, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고, 여기서, 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함하며;

제1 버퍼링 유닛(902)은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며;

제1 결정 유닛(901)은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고;

제1 예측 유닛(903)은, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성된다.

상기 방안에 있어서, 도 9를 참조하면, 인코더(90)는 또한, 상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하도록 구성된 제1 획득 유닛(904) - 상기 현재 블록의 적어도 하나의 변은 상부 변, 우측 상부 변, 좌측 변과 좌측 아래 변 중 적어도 하나를 포함함 - ; 및

상기 현재 블록의 인접 참조 샘플 세트를 결정하도록 구성된 제1 결정 유닛(901)을 포함할 수 있다.

상기 방안에 있어서, 도 9를 참조하면, 인코더(90)는 또한, 상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀에 대해 제1 필터링 처리를 수행하여, 상기 적어도 하나의 변과 인접한 참조 샘플 값을 결정하도록 구성된 제1 처리 유닛(905); 및

결정된 참조 샘플 값에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 조성하도록 구성된 제1 결정 유닛(901)을 포함할 수 있다.

상기 방안에 있어서, 상기 제1 필터링 처리는 다운 샘플링 필터링 처리 또는 저역 필터링 처리를 포함한다.

상기 방안에 있어서, 제1 획득 유닛(904)은 또한, 상기 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값을 획득하도록 구성되고;

제1 처리 유닛(905)은 또한, 1을 2진 값으로 전환하고, 상기 2진 값에 대해 상기 비트 깊이 값에서 1을 빼는 시프트 처리를 수행하여, 상기 기설정 파라미터 값을 얻도록 구성된다.

상기 방안에 있어서, 제1 버퍼링 유닛(902)은, 상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻고; 상기 초기 입력 참조 샘플 값 세트 이후의 데이터 유닛을 사용하여, 상기 기설정 파라미터 값을 버퍼링하여, 상기 입력 참조 샘플 값 세트를 얻도록 구성된다.

상기 방안에 있어서, 제1 결정 유닛(901)은 또한, 비율 왜곡 최적화의 방식을 이용하여, 전치 처리 지시 플래그의 값을 결정하도록 구성되고;

제1 버퍼링 유닛(902)은, 구체적으로 상기 전치 처리 지시 플래그의 값이 0일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 상기 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하도록 구성되고; 또는, 상기 전치 처리 지시 플래그의 값이 1일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 상기 버퍼 영역에 대해 전치 처리를 수행하여, 전치된 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하도록 구성된다.

상기 방안에 있어서, 도 9를 참조하면, 인코더(90)는 또한, 상기 입력 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 0 번째 위치에 대응되는 샘플 값에 따라, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하도록 구성된 제1 계산 유닛(906) - i는 0보다 크거나 같고 N보다 작은 양의 정수이고, N은 상기 입력 샘플 매트릭스에 포함되는 원소 개수를 나타냄 - ; 및

계산하여 얻은 N 개의 입력 샘플 값에 따라, 상기 입력 샘플 매트릭스를 조성하도록 구성된 제1 결정 유닛(901)을 포함할 수 있다.

상기 방안에 있어서, 제1 계산 유닛(906)은, 구체적으로 상기 제1 기설정 계산 모델을 이용하여 빼기 연산을 수행하여, 상기 제i 입력 샘플 값을 얻도록 구성된다.

상기 방안에 있어서, 제1 계산 유닛(906)은, 구체적으로 상기 빼기 연산의 빼어지는 수를 상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 동일하게 설정하고; 상기 빼기 연산의 빼는 수를 상기 참조 샘플 값 세트에서의 0 번째 위치에 대응되는 샘플 값과 동일하게 설정하도록 구성된다.

상기 방안에 있어서, 제1 획득 유닛(904)은 또한, 상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하도록 구성되고, 여기서, 상기 MIP 예측 블록은 상기 현재 블록에서 적어도 일부 픽셀 위치의 예측 샘플 값을 포함하며;

제1 처리 유닛(905)은 또한, 상기 MIP 예측 블록의 너비와 높이 중 하나가 상기 현재 블록과 상이할 때, 상기 MIP 예측 블록에 대해 제2 필터링 처리를 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성되고; 또는, 상기 MIP 예측 블록의 너비와 높이가 모두 상기 현재 블록과 동일할 때, 상기 현재 블록의 예측 블록을 상기 MIP 예측 블록과 동일하게 설정하도록 구성되며; 여기서, 상기 예측 블록에는 상기 현재 블록에서 전부 픽셀 위치의 예측 샘플 값이 포함된다.

상기 방안에 있어서, 제1 획득 유닛(904)은, 구체적으로 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 클리핑 처리를 수행하여, 상기 현재 블록의 MIP 예측 블록을 획득하도록 구성된다.

상기 방안에 있어서, 도 9를 참조하면, 인코더(90)는 또한, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하고; 판단 결과가 “예”일 때, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 전치 처리를 수행하고, 전치된 MIP 예측 블록을 상기 현재 블록의 MIP 예측 블록으로 결정하도록 구성되는 제1 판단 유닛(907)을 포함할 수 있다.

상기 방안에 있어서, 제1 계산 유닛(906)은 또한, 비율 왜곡 최적화의 방식을 이용하여, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 제1 대가 값과 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 제2 대가 값을 각각 계산하도록 구성되고;

제1 판단 유닛(907)은, 구체적으로 상기 제1 대가 값이 상기 제2 대가 값보다 작을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 것으로 결정하고; 상기 제1 대가 값이 상기 제2 대가 값보다 작지 않을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 것으로 결정하도록 구성된다.

상기 방안에 있어서, 상기 제2 필터링 처리는 업샘플링 필터링 처리 또는 저역 필터링 처리를 포함한다.

상기 방안에 있어서, 제1 획득 유닛(904)은 또한, 상기 현재 블록에 대응되는 가중 매트릭스, 시프트 인자와 편이 인자를 획득하도록 구성되고;

제1 계산 유닛(906)은 또한, 제2 기설정 계산 모델을 이용하여 상기 입력 샘플 매트릭스와 상기 가중 매트릭스, 상기 시프트 인자 및 상기 편이 인자에 대해 매트릭스 곱셈 처리를 수행하여, 상기 MIP 예측 블록을 계산하여 얻도록 구성된다.

상기 방안에 있어서, 상기 제2 필터링 처리가 업샘플링 필터링 처리일 때, 제1 결정 유닛(901)은 또한, 상기 현재 블록에 대응되는 수평 업샘플링 인자와 수직 업샘플링 인자를 결정하도록 구성되고;

제1 계산 유닛(906)은 또한, 상기 MIP 예측 블록, 상기 수평 업샘플링 인자와 상기 수직 업샘플링 인자에 따라, 제3 기설정 계산 모델을 이용하여 상기 현재 블록에서 충진될 픽셀 위치의 예측 값을 결정하여, 상기 현재 블록의 예측 블록을 얻도록 구성되고, 여기서, 상기 충진될 픽셀 위치는 상기 현재 블록에서 상기 MIP 예측 블록의 픽셀 위치의 픽셀 위치와 상이하다.

이해할 수 있는 것은, 본 출원의 실시예에 있어서, “유닛”은 부분 회로, 부분 프로세서, 부분 프로그램 또는 소프트웨어 등등일 수 있고, 물론 모듈일 수도 있고, 또한 비모듈식일 수도 있다. 또한, 본 실시예에서의 각 구성 부분은 하나의 처리 유닛 중에 통합될 수 있거나, 각 유닛이 단독적 및 물리적으로 존재할 수도 있으며, 또는 2개 이상의 유닛이 하나의 유닛에 통합될 수 있다. 상기 통합된 유닛은 하드웨어의 형태를 채택하여 구현될 수 있으며, 소프트웨어 기능 모듈의 형태를 채택하여 구현될 수도 있다.

상기 통합된 유닛은 독립된 제품으로서 판매되거나 사용되는 것이 아닌 소프트웨어 기능 모듈의 형태로 구현될 경우, 하나의 컴퓨터 판독 가능 저장 매체에 저장될 수 있으며, 이러한 이해에 기반하여, 본 실시예의 기술방안은 본질적으로 또는 기존 기술에 기여하는 부분이나 상기 기술방안의 전부 또는 일부는 소프트웨어 제품의 형태로 구현될 수 있으며, 상기 컴퓨터 소프트웨어 제품은 하나의 저장 매체에 저장되며, 하나의 컴퓨터 기기(개인용 컴퓨터, 서버, 또는 네트워크 기기 등) 또는 프로세서(processor)로 하여금 본 실시예에서 설명한 방법의 전부 또는 일부 단계를 실행하도록 하는 몇 개의 명령어를 포함한다. 전술한 저장 매체는 U 디스크, 모바일 디스크, 판독 전용 메모리(Read-Only Memory, ROM), 랜덤 액세스 메모리(Random Access Memory, RAM), 자기 디스크 또는 광 디스크 등 프로그램 코드를 저장할 수 있는 여러 가지 매체를 포함한다.

따라서, 본 출원의 실시예는 컴퓨터 저장 매체를 제공하고, 인코더(90)에 적용되며, 상기 컴퓨터 저장 매체에는 이미지 요소 예측 프로그램이 저장되어 있고, 상기 이미지 요소 예측 프로그램이 제1 프로세서에 의해 실행될 때 상기 실시예의 어느 하나에 따른 이미지 요소 예측 방법을 구현한다.

상기 인코더(90)의 조성 및 컴퓨터 저장 매체에 기반하여, 도 10을 참조하면, 본 출원의 실시예에서 제공한 인코더(90)의 구체적인 하트웨어 구조를 도시하였고, 제1 통신 인터페이스(1001), 제1 메모리(1002)와 제1 프로세서(1003)를 포함할 수 있고; 각 컴포넌트는 제1 버스 시스템(1004)을 통해 서로 연결된다. 이해할 수 있는 것은, 제1 버스 시스템(1004)은 이러한 컴포넌트 간의 연결 통신을 구현하기 위한 것이다. 제1 버스 시스템(1004)은 데이터 버스 외에도, 전원 버스, 제어 버스 및 상태 신호 버스를 더 포함한다. 다만 명확한 설명을 위해, 도 10에서 각 다양한 버스는 모두 제1 버스 시스템(1004)으로 표기된다. 여기서,

제1 통신 인터페이스(1001)는, 다른 외부 네트워크 요소 사이에서 송수신을 하는 과정에서, 신호를 수신 및 송신하기 위한 것이며;

제1 메모리(1002)는, 제1 프로세서(1003) 상에서 작동될 수 있는 컴퓨터 프로그램을 저장하기 위한 것이며;

제1 프로세서(1003)는, 상기 컴퓨터 프로그램이 작동될 경우,

이해할 수 있는 것은, 본 출원의 실시예에서의 제1 메모리(1002)는 휘발성 메모리 또는 비 휘발성 메모리일 수 있으며, 또는 휘발성 메모리 및 비 휘발성 메모리를 포함할 수 있다는 것이다. 여기서, 비 휘발성 메모리는 판독 전용 메모리(Read-Only Memory, ROM), 프로그래머블 판독 전용 메모리(Programmable ROM, PROM), 소거 가능 프로그래머블 판독 전용 메모리(Erasable PROM, EPROM), 전기적 소거 가능 판독 전용 프로그래머블 메모리(Electrically EPROM, EEPROM) 또는 플래시 메모리일 수 있다. 휘발성 메모리는 외부 쾌속 캐시 역할을 하는 랜덤 액세스 메모리(Random Access Memory, RAM)일 수 있다. 한정적이 아닌 예시적인 설명을 통해, 많은 형태의 RAM이 사용 가능하며, 예를 들어, 정적 랜덤 액세스 메모리(Static RAM, SRAM), 동적 랜덤 액세스 메모리(Dynamic RAM, DRAM), 동기식 동적 랜덤 액세스 메모리(Synchronous DRAM, SDRAM), 더블 데이터 레이트 동기식 동적 랜덤 액세스 메모리(Double Data Rate SDRAM, DDRSDRAM), 향상된 동기식 동적 랜덤 액세스 메모리(Enhanced SDRAM, ESDRAM), 동기식 연결 동적 랜덤 액세스 메모리(Synchlink DRAM, SLDRAM) 및 직접 메모리 버스 랜덤 액세스 메모리(Direct Rambus RAM, DRRAM)이다. 본 출원에서 설명한 시스템 및 방법의 제1 메모리(1002)는 이러한 메모리 및 다른 임의의 적합한 타입의 메모리를 포함하지만 이에 한정되지 않는다.

제1 프로세서(1003)는 신호의 처리 능력을 갖는 집적 회로 칩일 수 있다. 구현 과정에서, 상기 방법의 각 단계는 제1 프로세서(1003) 내의 하드웨어의 집적 논리 회로 또는 소프트웨어 형태의 명령에 의해 완료될 수 있다. 상기 프로세서(1003)는 범용 프로세서, 디지털 신호 프로세서(Digital Signal Processor, DSP), 주문형 집적 회로(Application Specific Integrated Circuit, ASIC), 현장 프로그래머블 게이트 어레이(Field Programmable Gate Array, FPGA) 또는 다른 프로그래머블 논리 장치, 분리형 게이트 또는 트랜지스터 논리 장치, 분리형 하드웨어 컴포넌트일 수 있다. 본 출원의 실시예에서 개시된 각 방법, 단계 및 논리 블록도는 구현되거나 실행될 수 있다. 범용 프로세서는 마이크로 프로세서 또는 임의의 일반적인 프로세서 등일 수도 있다. 본 출원의 실시예를 결합하여 개시된 방법의 단계는, 하드웨어 디코딩 프로세서로 직접 반영되어 실행 및 완료될 수 있거나, 디코딩 프로세서에서의 하드웨어 및 소프트웨어 모듈의 조합에 의해 실행 및 완료될 수 있다. 소프트웨어 모듈은 랜덤 액세스 메모리, 플래시 메모리, 판독 전용 메모리, 프로그래머블 판독 전용 메모리 또는 전기적 소거 가능 프로그래머블 메모리, 레지스터 등 본 기술 분야에서 널리 알려진 저장 매체에 위치할 수 있다. 상기 저장 매체는 제1 메모리(1002)에 위치하고, 제1 프로세서(1003)는 제1메모리(1002)의 정보를 판독하며, 이 하드웨어와 결합하여 상기 방법의 단계를 완료한다.

이해할 수 있는 것은, 본 출원에서 설명된 이러한 실시예는 하드웨어, 소프트웨어, 펌웨어, 미들웨어, 마이크로 코드 또는 이들의 조합으로 구현될 수 있다. 하드웨어 구현에 대해서, 처리 유닛은 하나 또는 복수 개의 응용 주문형 집적 회로(Application Specific Integrated Circuits, ASIC), 디지털 신호 프로세서(Digital Signal Processor, DSP), 디지털 신호 처리 기기(DSP Device, DSPD), 프로그래머블 논리 기기(Programmable Logic Device, PLD), 현장 프로그래머블 게이트 어레이(Field-Programmable Gate Array, FPGA), 범용 프로세서, 제어기, 마이크로 제어기, 마이크로 프로세서, 본 출원에서 설명된 기능을 수행하기 위한 기타 전자 유닛 또는 조합 중에서 구현될 수 있다. 소프트웨어 구현의 경우, 본 출원에서 설명된 기능을 실행하는 모듈(예를 들어 과정, 함수 등)을 통해 본 출원에서 설명된 기술을 구현할 수 있다. 소프트웨어 코드는 메모리에 저장되고 프로세서를 통해 실행될 수 있다. 메모리는 프로세서에서 또는 프로세서 외부에서 구현될 수 있다.

선택 가능하게, 다른 실시예로서, 제1 프로세서(1003)는 상기 컴퓨터 프로그램이 작동될 경우, 전술한 실시예의 어느 하나에 따른 이미지 요소 예측 방법을 구현한다.

본 실시예는 인코더를 제공하고, 상기 인코더는 제1 결정 유닛, 제1 버퍼링 유닛과 제1 예측 유닛을 포함할 수 있고; 여기서, 제1 결정 유닛은 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고; 제1 버퍼링 유닛은 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며; 제1 결정 유닛은 또한 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고; 제1 예측 유닛은 상기 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득하도록 구성되며; 이로써, 매트릭스 곱셈 입력 샘플의 유도 과정을 간략화하여, 입력 샘플 매트릭스의 유도 과정이 통합되도록 할 뿐만 아니라; 현재 블록 카테고리를 판단할 필요가 없으므로, 시간 복잡도를 저하시키고, 하드웨어 구현에 유리하다.

전술한 실시예와 동일한 발명 구상에 기반하여, 도 11을 참조하면, 본 출원의 실시예는 디코더(1100)의 구성의 예시도를 도시한다. 도 11에 도시된 바와 같이, 상기 디코더(1100)는, 제2 결정 유닛(1101), 제2 버퍼링 유닛(1102)과 제2 예측 유닛(1103)을 포함할 수 있고, 여기서,

제2 결정 유닛(1101)은, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고, 여기서, 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함하며;

제2 버퍼링 유닛(1102)은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며;

제2 결정 유닛(1101)은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고;

제2 예측 유닛(1103)은, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성된다.

상기 방안에 있어서, 도 11을 참조하면, 디코더(1100)는 또한, 상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하도록 구성된 제2 획득 유닛(904) - 상기 현재 블록의 적어도 하나의 변은 상부 변, 우측 상부 변, 좌측 변과 좌측 아래 변 중 적어도 하나를 포함함 - ; 및

상기 현재 블록의 인접 참조 샘플 세트를 결정하도록 구성된 제2 결정 유닛(1101)을 포함할 수 있다.

상기 방안에 있어서, 도 11을 참조하면, 디코더(1100)는 또한, 상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀에 대해 제1 필터링 처리를 수행하여, 상기 적어도 하나의 변과 인접한 참조 샘플 값을 결정하도록 구성된 제2 처리 유닛(1105); 및

결정된 참조 샘플 값에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 조성하도록 구성된 제2 결정 유닛(1101)을 포함할 수 있다.

상기 방안에 있어서, 제2 획득 유닛(1104)은 또한, 상기 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값을 획득하도록 구성되고;

제2 처리 유닛(1105)은 또한, 1을 2진 값으로 전환하고, 상기 2진 값에 대해 상기 비트 깊이 값에서 1을 빼는 시프트 처리를 수행하여, 상기 기설정 파라미터 값을 얻도록 구성된다.

상기 방안에 있어서, 제2 버퍼링 유닛(1102)은, 상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻고; 상기 초기 입력 참조 샘플 값 세트 이후의 데이터 유닛을 사용하여, 상기 기설정 파라미터 값을 버퍼링하여, 상기 입력 참조 샘플 값 세트를 얻도록 구성된다.

상기 방안에 있어서, 도 11을 참조하면, 디코더(1100)는 또한, 비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하도록 구성된 해석 유닛(1106); 및

구체적으로 상기 전치 처리 지시 플래그의 값이 0일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 상기 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하고; 또는, 상기 전치 처리 지시 플래그의 값이 1일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 상기 버퍼 영역에 대해 전치 처리를 수행하여, 전치된 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하도록 구성된 제2 버퍼링 유닛(1102)을 포함할 수 있다.

상기 방안에 있어서, 도 11을 참조하면, 디코더(1100)는 또한, 상기 입력 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 0 번째 위치에 대응되는 샘플 값에 따라, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하도록 구성된 제2 계산 유닛(1107) - i는 0보다 크거나 같고 N보다 작은 양의 정수이고, N은 상기 입력 샘플 매트릭스에 포함되는 원소 개수를 나타냄 - ; 및

계산하여 얻은 N 개의 입력 샘플 값에 따라, 상기 입력 샘플 매트릭스를 조성하도록 구성된 제2 결정 유닛(1101)을 포함할 수 있다.

상기 방안에 있어서, 제2 계산 유닛(1107)은, 구체적으로 상기 제1 기설정 계산 모델을 이용하여 빼기 연산을 수행하여, 상기 제i 입력 샘플 값을 얻도록 구성된다.

상기 방안에 있어서, 제2 계산 유닛(1107)은, 구체적으로 상기 빼기 연산의 빼어지는 수를 상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 동일하게 설정하고; 상기 빼기 연산의 빼는 수를 상기 참조 샘플 값 세트에서의 0 번째 위치에 대응되는 샘플 값과 동일하게 설정하도록 구성된다.

상기 방안에 있어서, 제2 획득 유닛(1104)은 또한, 상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하도록 구성되고, 여기서, 상기 MIP 예측 블록은 상기 현재 블록에서 적어도 일부 픽셀 위치의 예측 샘플 값을 포함하며;

제2 처리 유닛(1105)은 또한, 상기 MIP 예측 블록의 너비와 높이 중 하나가 상기 현재 블록과 상이할 때, 상기 MIP 예측 블록에 대해 제2 필터링 처리를 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성되고; 또는, 상기 MIP 예측 블록의 너비와 높이가 모두 상기 현재 블록과 동일할 때, 상기 현재 블록의 예측 블록을 상기 MIP 예측 블록과 동일하게 설정하도록 구성되며; 여기서, 상기 예측 블록에는 상기 현재 블록에서 전부 픽셀 위치의 예측 샘플 값이 포함된다.

상기 방안에 있어서, 제2 획득 유닛(1104)은, 구체적으로 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 클리핑 처리를 수행하여, 상기 현재 블록의 MIP 예측 블록을 획득하도록 구성된다.

상기 방안에 있어서, 도 11을 참조하면, 디코더(1100)는 또한, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하고; 판단 결과가 “예”일 때, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 전치 처리를 수행하고, 전치된 MIP 예측 블록을 상기 현재 블록의 MIP 예측 블록으로 결정하도록 구성되는 제2 판단 유닛(1108)을 포함할 수 있다.

상기 방안에 있어서, 해석 유닛(1106)은, 비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하도록 구성되고;

제2 판단 유닛(1108)은, 구체적으로 상기 전치 처리 지시 플래그의 값에 따라, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하도록 구성된다.

상기 방안에 있어서, 제2 획득 유닛(1104)은 또한, 상기 현재 블록에 대응되는 가중 매트릭스, 시프트 인자와 편이 인자를 획득하도록 구성되고;

제2 계산 유닛(1107)은 또한, 제2 기설정 계산 모델을 이용하여 상기 입력 샘플 매트릭스와 상기 가중 매트릭스, 상기 시프트 인자 및 상기 편이 인자에 대해 매트릭스 곱셈 처리를 수행하여, 상기 MIP 예측 블록을 계산하여 얻도록 구성된다.

상기 방안에 있어서, 제2 결정 유닛(1101)은 또한, 상기 현재 블록에 대응되는 수평 업샘플링 인자와 수직 업샘플링 인자를 결정하도록 구성되고;

제2 계산 유닛(1107)은 또한, 상기 MIP 예측 블록, 상기 수평 업샘플링 인자와 상기 수직 업샘플링 인자에 따라, 제3 기설정 계산 모델을 이용하여 상기 현재 블록에서 충진될 픽셀 위치의 예측 값을 결정하여, 상기 현재 블록의 예측 블록을 얻도록 구성되고, 여기서, 상기 충진될 픽셀 위치는 상기 현재 블록에서 상기 MIP 예측 블록의 픽셀 위치의 픽셀 위치와 상이하다.

이해할 수 있는 것은, 본 실시예에서, “유닛”은 부분 회로, 부분 프로세서, 부분 프로그램 또는 소프트웨어 등등 일 수 있으며, 당연히 모듈일 수도 있고, 또한 비모듈식일 수도 있다. 또한, 본 실시예에서의 각 구성 부분은 하나의 처리 유닛 중에 통합될 수 있거나, 각 유닛이 단독적 및 물리적으로 존재할 수도 있으며, 또는 2개 이상의 유닛이 하나의 유닛에 통합될 수 있다. 상기 통합된 유닛은 하드웨어의 형태를 채택하여 구현될 수 있으며, 소프트웨어 기능 모듈의 형태를 채택하여 구현될 수도 있다.

상기 통합된 유닛은 소프트웨어 기능 모듈의 형태로 구현되고 독립적인 제품으로 판매되거나 사용되지 않는 경우, 컴퓨터 판독 가능한 저장 매체에 저장될 수 있다. 이러한 이해에 기반하여, 본 실시예에서는 컴퓨터 저장 매체를 제공하고, 디코더(1100)에 적용되며, 상기 컴퓨터 저장 매체에는 이미지 요소 예측 프로그램이 저장되어 있고, 상기 이미지 요소 예측 프로그램이 제2 프로세서에 의해 실행될 때 상기 실시예의 임의의 하나의 이미지 요소 예측 방법을 구현한다.

상기 디코더(1100)의 조성 및 컴퓨터 저장 매체에 기반하여, 도 12를 참조하면, 본 출원의 실시예에서 제공한 디코더(1100)의 구체적인 하드웨어 구조를 도시하고, 제2 통신 인터페이스(1201), 제2 메모리(1202)와 제2 프로세서(1203)를 포함할 수 있고; 각 컴포넌트는 제2 버스 시스템(1204)을 통해 서로 연결된다. 제2 버스 시스템(1204)은 이러한 부품 사이의 연결 통신을 구현하기 위한 것임을 이해할 수 있다. 제2 버스 시스템(1204)은 데이터 버스를 포함하며, 그 외에, 전원 버스, 제어 버스 및 상태 신호 버스를 더 포함한다. 그러나 설명의 명확성을 위해, 도 12에서 다양한 버스를 제2 버스 시스템(1204)으로 표기하였다. 여기서,

제2 통신 인터페이스(1201)는, 다른 외부 네트워크 요소 사이에서 송수신을 하는 과정에서, 신호를 수신 및 송신하기 위한 것이며;

제2 메모리(1202)는, 제2 프로세서(1203) 상에서 작동될 수 있는 컴퓨터 프로그램을 저장하기 위한 것이며;

제2 프로세서(1203)는, 상기 컴퓨터 프로그램이 작동될 경우,

선택 가능하게, 다른 실시예로서, 제2 프로세서(1203)는 상기 컴퓨터 프로그램이 작동될 경우, 전술한 실시예의 어느 하나에 따른 이미지 요소 예측 방법을 구현한다.

이해할 수 있는 것은, 제2 메모리(1202)와 제1 메모리(1002)의 하드웨어 기능이 유사하고, 제2 프로세서(1203)와 제1 프로세서(1003)의 하드웨어 기능이 유사하며; 여기서 더이상 설명하지 않는다.

본 실시예는 디코더를 제공하고, 상기 디코더는 제2 결정 유닛, 제2 버퍼링 유닛과 제2 예측 유닛을 포함할 수 있고; 여기서, 제2 결정 유닛은 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고; 제2 버퍼링 유닛은 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며; 제2 결정 유닛은 또한 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고; 제2 예측 유닛은 상기 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득하도록 구성되며; 이로써, 매트릭스 곱셈 입력 샘플의 유도 과정을 간략화하여, 입력 샘플 매트릭스의 유도 과정이 통합되도록 할 뿐만 아니라; 현재 블록 카테고리를 판단할 필요가 없으므로, 시간 복잡도를 저하시켜, 하드웨어 구현에 유리하다.

설명해야 할 것은, 본 출원에서, 용어 “포함” 또는 이의 임의의 다른 변형은 비배타적인 포함을 포함하도록 의도됨으로써, 일련의 요소를 포함하는 프로세스, 방법, 물품 또는 장치로 하여금 이러한 요소를 포함하도록 할 뿐만 아니라, 명시적으로 열거되지 않은 다른 요소를 포함하도록 할 수도 있으며, 또는 이러한 프로세스, 방법, 물품, 또는 장치에 고유한 요소를 포함하도록 한다. 더 많은 한정이 없는 경우, 어구 “하나의……을 포함하다”에 의해 정의된 요소는, 상기 요소를 포함하는 과정, 방법, 물품 또는 장치에 다른 동일한 요소가 존재한다는 것을 배제하지 않는다.

상기 본 출원의 실시예의 번호는 다만 설명을 위한 것일 뿐, 실시예의 우열을 나타내는 것은 아니다.

본 발명에서 제공한 몇 개의 방법 실시예에서 언급된 방법은, 충돌되지 않는 경우 임의로 조합되어, 새로운 방법 실시예를 얻을 수 있다.

본 발명에서 제공한 몇 개의 제품 실시예에서 언급된 특징은, 충돌되지 않는 경우 임의로 조합되어, 새로운 제품 실시예를 얻을 수 있다.

본 발명에서 제공한 몇 개의 방법 또는 기기 실시예에서 언급된 특징은, 충돌되지 않는 경우 임의로 조합되어, 새로운 방법 실시예 또는 기기 실시예를 얻을 수 있다.

이상의 설명은 다만 본 발명의 구체적인 실시 형태일뿐이고, 본 발명의 보호 범위는 이에 한정되지 않으며, 본 발명이 속하는 기술 분야의 통상의 기술자라면, 본 발명에서 개시된 기술적 범위 내의 변화 또는 교체가 모두 본 출원의 보호 범위 내에 속해야 함을 쉽게 알 수 있을 것이다. 따라서, 본 출원의 보호범위는 청구범위의 보호범위를 기준으로 해야 한다.

본 출원의 실시예에 있어서, 현재 블록의 인접 참조 샘플 세트 및 현재 블록에 대응되는 기설정 파라미터 값을 결정하고; 인접 참조 샘플 세트와 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하고; 다음 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하며; 입력 샘플 매트릭스에 따라 현재 블록에 대해 이미지 요소 예측을 수행하여, 현재 블록의 예측 블록을 획득한다. 이로써, 본 출원의 실시예의 방안은 현재 블록 카테고리를 판단할 필요가 없으므로, 시간 복잡도를 저하시키고, 하트웨어 구현에 유리하며; 또한, 입력 참조 샘플 값 세트 및 제1 기설정 계산 모델에 따라 입력 샘플 매트릭스를 결정할 수 있고, 이로써 매트릭스 곱셈 입력 샘플의 유도 과정도 간략화되어, 입력 샘플 매트릭스의 유도 과정이 통합되도록 하므로, 본 출원의 실시예의 방안은 현재 블록 카테고리에 의존하지 않아도, 병행 처리를 구현할 수 있어, 계산 복잡도를 줄일 수 있다.

Claims

이미지 요소 예측 방법으로서,
인코더에 적용되고,
상기 이미지 요소 예측 방법은,
현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계 - 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함함 - ;
상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계;
상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계; 및
상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제1항에 있어서,
상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,
상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하는 단계 - 상기 현재 블록의 적어도 하나의 변은 상부 변, 우측 상부 변, 좌측 변과 좌측 아래 변 중 적어도 하나를 포함함 - ; 및
획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제2항에 있어서,
상기 획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,
상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀에 대해 제1 필터링 처리를 수행하여, 상기 적어도 하나의 변과 인접한 참조 샘플 값을 결정하는 단계; 및
결정된 참조 샘플 값에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 조성하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제3항에 있어서,
상기 제1 필터링 처리는 다운 샘플링 필터링 처리 또는 저역 필터링 처리를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제1항에 있어서,
상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계는,
상기 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값을 획득하는 단계; 및
1을 2진 값으로 전환하고, 상기 2진 값에 대해 상기 비트 깊이 값에서 1을 빼는 시프트 처리를 수행하여, 상기 기설정 파라미터 값을 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제1항에 있어서,
상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계는,
상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계; 및
상기 초기 입력 참조 샘플 값 세트 이후의 하나의 데이터 유닛을 사용하여, 상기 기설정 파라미터 값을 버퍼링하여, 상기 입력 참조 샘플 값 세트를 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제6항에 있어서,
상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계는,
비율 왜곡 최적화의 방식을 이용하여, 전치 처리 지시 플래그의 값을 결정하는 단계;
상기 전치 처리 지시 플래그의 값이 0일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 상기 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계; 또는
상기 전치 처리 지시 플래그의 값이 1일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 상기 버퍼 영역에 대해 전치 처리를 수행하여, 전치된 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제1항에 있어서,
상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계는,
상기 입력 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 0 번째 위치에 대응되는 샘플 값에 따라, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계 - i는 0보다 크거나 같고 N보다 작은 양의 정수이고, N은 상기 입력 샘플 매트릭스에 포함되는 원소 개수를 나타냄 - ; 및
계산하여 얻은 N 개의 입력 샘플 값에 따라, 상기 입력 샘플 매트릭스를 조성하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제8항에 있어서,
상기 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계는,
상기 제1 기설정 계산 모델을 이용하여 빼기 연산을 수행하여, 상기 제i 입력 샘플 값을 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제9항에 있어서,
상기 이미지 요소 예측 방법은,
상기 빼기 연산의 빼어지는 수를 상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계; 및
상기 빼기 연산의 빼는 수를 상기 참조 샘플 값 세트에서의 0 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계를 더 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제1항 내지 제10항 중 어느 한 항에 있어서,
상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계는,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계 - 상기 MIP 예측 블록은 상기 현재 블록에서 적어도 일부 픽셀 위치의 예측 샘플 값을 포함함 - ;
상기 MIP 예측 블록의 너비와 높이 중 하나가 상기 현재 블록과 상이할 때, 상기 MIP 예측 블록에 대해 제2 필터링 처리를 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계; 또는
상기 MIP 예측 블록의 너비와 높이가 모두 상기 현재 블록과 동일할 때, 상기 현재 블록의 예측 블록을 상기 MIP 예측 블록과 동일하게 설정하는 단계 - 상기 예측 블록에는 상기 현재 블록에서 전부 픽셀 위치의 예측 샘플 값이 포함됨 - 를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제11항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 MIP 예측 블록에서의 예측 샘플 값에 대해 클리핑 처리를 수행하여, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제11항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계; 및
판단 결과가 “예”일 때, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 전치 처리를 수행하고, 전치된 MIP 예측 블록을 상기 현재 블록의 MIP 예측 블록으로 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제13항에 있어서,
상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계는,
비율 왜곡 최적화의 방식을 이용하여, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 제1 대가 값과 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 제2 대가 값을 각각 계산하는 단계;
상기 제1 대가 값이 상기 제2 대가 값보다 작을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하는 것으로 결정하는 단계; 또는
상기 제1 대가 값이 상기 제2 대가 값보다 작지 않을 때, 상기 MIP 예측 블록에 대해 전치 처리를 수행하지 않는 것으로 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제11항에 있어서,
상기 이미지 요소 예측 방법은,
상기 제2 필터링 처리가 업샘플링 필터링 처리 또는 저역 필터링 처리를 포함하는 단계를 더 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제11항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 현재 블록에 대응되는 가중 매트릭스, 시프트 인자와 편이 인자를 획득하는 단계; 및
제2 기설정 계산 모델을 이용하여 상기 입력 샘플 매트릭스와 상기 가중 매트릭스, 상기 시프트 인자 및 상기 편이 인자에 대해 매트릭스 곱셈 처리를 수행하여, 상기 MIP 예측 블록을 계산하여 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제15항에 있어서,
상기 제2 필터링 처리가 업샘플링 필터링 처리일 때, 상기 이미지 요소 예측 방법은,
상기 현재 블록에 대응되는 수평 업샘플링 인자와 수직 업샘플링 인자를 결정하는 단계; 및
상기 MIP 예측 블록, 상기 수평 업샘플링 인자와 상기 수직 업샘플링 인자에 따라, 제3 기설정 계산 모델을 이용하여 상기 현재 블록에서 충진될 픽셀 위치의 예측 값을 결정하여, 상기 현재 블록의 예측 블록을 얻는 단계 - 상기 충진될 픽셀 위치는 상기 현재 블록에서 상기 MIP 예측 블록의 픽셀 위치의 픽셀 위치와 상이함 - 를 더 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
이미지 요소 예측 방법으로서,
디코더에 적용되고,
상기 이미지 요소 예측 방법은,
현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계 - 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함함 - ;
상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계;
상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계; 및
상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제18항에 있어서,
상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,
상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀을 획득하는 단계 - 상기 현재 블록의 적어도 하나의 변은 상부 변, 우측 상부 변, 좌측 변과 좌측 아래 변 중 적어도 하나를 포함함 - ; 및
획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제19항에 있어서,
상기 획득된 참조 픽셀에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 결정하는 단계는,
상기 현재 블록의 적어도 하나의 변과 인접한 참조 픽셀에 대해 제1 필터링 처리를 수행하여, 상기 적어도 하나의 변과 인접한 참조 샘플 값을 결정하는 단계; 및
결정된 참조 샘플 값에 따라, 상기 현재 블록의 인접 참조 샘플 세트를 조성하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제20항에 있어서,
상기 제1 필터링 처리는 다운 샘플링 필터링 처리 또는 저역 필터링 처리를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제18항에 있어서,
상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하는 단계는,
상기 현재 블록의 예측될 이미지 요소에 대응되는 비트 깊이 값을 획득하는 단계; 및
1을 2진 값으로 전환하고, 상기 2진 값에 대해 상기 비트 깊이 값에서 1을 빼는 시프트 처리를 수행하여, 상기 기설정 파라미터 값을 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제18항에 있어서,
상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하는 단계는,
상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계; 및
상기 초기 입력 참조 샘플 값 세트 이후의 하나의 데이터 유닛을 사용하여, 상기 기설정 파라미터 값을 버퍼링하여, 상기 입력 참조 샘플 값 세트를 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제23항에 있어서,
상기 인접 참조 샘플 세트를 버퍼링하여, 초기 입력 참조 샘플 값 세트를 얻는 단계는,
비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하는 단계;
상기 전치 처리 지시 플래그의 값이 0일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장하기 전, 상기 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계; 또는,
상기 전치 처리 지시 플래그의 값이 1일 때, 버퍼 영역 내에서, 상기 인접 참조 샘플 세트에서 상부 변에 대응되는 참조 샘플 값을 좌측 변에 대응되는 참조 샘플 값에 저장한 후, 상기 버퍼 영역에 대해 전치 처리를 수행하여, 전치된 버퍼 영역을 상기 초기 입력 참조 샘플 값 세트로 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제18항에 있어서,
상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하는 단계는,
상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 0 번째 위치에 대응되는 샘플 값에 따라, 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계 - i는 0보다 크거나 같고 N보다 작은 양의 정수이고, N은 상기 입력 샘플 매트릭스에 포함된 원소 개수를 나타냄 - ; 및
계산하여 얻은 N 개의 입력 샘플 값에 따라, 상기 입력 샘플 매트릭스를 조성하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제25항에 있어서,
상기 제1 기설정 계산 모델을 이용하여 제i 입력 샘플 값을 계산하는 단계는,
상기 제1 기설정 계산 모델을 이용하여 빼기 연산을 수행하여, 상기 제i 입력 샘플 값을 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제26항에 있어서,
상기 이미지 요소 예측 방법은,
상기 빼기 연산의 빼어지는 수를 상기 참조 샘플 값 세트에서의 i+1 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계; 및
상기 빼기 연산의 빼는 수를 상기 참조 샘플 값 세트에서의 0 번째 위치에 대응되는 샘플 값과 동일하게 설정하는 단계를 더 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제18항 내지 제27항 중 어느 한 항에 있어서,
상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계는,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계 - 상기 MIP 예측 블록은 상기 현재 블록에서 적어도 일부 픽셀 위치의 예측 샘플 값을 포함함 - ;
상기 MIP 예측 블록의 너비와 높이 중 하나가 상기 현재 블록과 상이할 때, 상기 MIP 예측 블록에 대해 제2 필터링 처리를 수행하여, 상기 현재 블록의 예측 블록을 획득하는 단계; 또는,
상기 MIP 예측 블록의 너비와 높이가 모두 상기 현재 블록과 동일할 때, 상기 현재 블록의 예측 블록을 상기 MIP 예측 블록과 동일하게 설정하는 단계 - 상기 예측 블록에는 상기 현재 블록에서 전부 픽셀 위치의 예측 샘플 값이 포함됨 - 를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제28항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 MIP 예측 블록에서의 예측 샘플 값에 대해 클리핑 처리를 수행하여, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제28항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계; 및
판단 결과가 “예”일 때, 상기 MIP 예측 블록에서의 예측 샘플 값에 대해 전치 처리를 수행하고, 전치된 MIP 예측 블록을 상기 현재 블록의 MIP 예측 블록으로 결정하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제30항에 있어서,
상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계는,
비트 스트림을 해석하여, 전치 처리 지시 플래그의 값을 획득하는 단계; 및
상기 전치 처리 지시 플래그의 값에 따라, 상기 MIP 예측 블록에 대해 전치 처리를 수행할지 여부를 판단하는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제28항에 있어서,
상기 이미지 요소 예측 방법은,
상기 제2 필터링 처리가 업샘플링 필터링 처리 또는 저역 필터링 처리를 포함하는 단계를 더 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제28항에 있어서,
상기 입력 샘플 매트릭스에 따라, 상기 현재 블록의 MIP 예측 블록을 획득하는 단계는,
상기 현재 블록에 대응되는 가중 매트릭스, 시프트 인자와 편이 인자를 획득하는 단계; 및
제2 기설정 계산 모델을 이용하여 상기 입력 샘플 매트릭스와 상기 가중 매트릭스, 상기 시프트 인자 및 상기 편이 인자에 대해 매트릭스 곱셈 처리를 수행하여, 상기 MIP 예측 블록을 계산하여 얻는 단계를 포함하는 것을 특징으로 하는
이미지 요소 예측 방법.
제32항에 있어서,
상기 제2 필터링 처리가 업샘플링 필터링 처리일 때, 상기 이미지 요소 예측 방법은,
상기 현재 블록에 대응되는 수평 업샘플링 인자와 수직 업샘플링 인자를 결정하는 단계; 및
상기 MIP 예측 블록, 상기 수평 업샘플링 인자와 상기 수직 업샘플링 인자에 따라, 제3 기설정 계산 모델을 이용하여 상기 현재 블록에서 충진될 픽셀 위치의 예측 값을 결정하여, 상기 현재 블록의 예측 블록을 얻는 단계를 더 포함하고,
상기 충진될 픽셀 위치는 상기 현재 블록에서 상기 MIP 예측 블록의 픽셀 위치의 픽셀 위치와 상이한 것을 특징으로 하는
이미지 요소 예측 방법.
인코더로서,
상기 인코더는 제1 결정 유닛, 제1 버퍼링 유닛 및 제1 예측 유닛을 포함하고;
상기 제1 결정 유닛은, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고, 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함하며;
상기 제1 버퍼링 유닛은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며;
상기 제1 결정 유닛은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고;
상기 제1 예측 유닛은, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성되는 것을 특징으로 하는
인코더.
인코더로서,
상기 인코더는 제1 메모리와 제1 프로세서를 포함하고;
상기 제1 메모리는, 상기 제1 프로세서 상에서 작동 가능한 컴퓨터 프로그램을 저장하기 위한 것이고;
상기 제1 프로세서는, 상기 컴퓨터 프로그램이 작동될 경우, 제1항 내지 제17항 중 어느 한 항에 따른 이미지 요소 예측 방법의 단계를 실행하기 위한 것임을 특징으로 하는
인코더.
디코더로서,
상기 디코더는 제2 결정 유닛, 제2 버퍼링 유닛 및 제2 예측 유닛을 포함하고;
상기 제2 결정 유닛은, 현재 블록의 인접 참조 샘플 세트 및 상기 현재 블록에 대응되는 기설정 파라미터 값을 결정하도록 구성되고, 상기 인접 참조 샘플 세트는 적어도 하나의 참조 샘플 값을 포함하며;
상기 제2 버퍼링 유닛은, 상기 인접 참조 샘플 세트와 상기 기설정 파라미터 값을 버퍼링하여, 입력 참조 샘플 값 세트를 구축하도록 구성되며;
상기 제2 결정 유닛은 또한, 상기 입력 참조 샘플 값 세트에 따라, 제1 기설정 계산 모델을 이용하여 입력 샘플 매트릭스를 결정하도록 구성되고;
상기 제2 예측 유닛은, 상기 입력 샘플 매트릭스에 따라 상기 현재 블록에 대해 이미지 요소 예측을 수행하여, 상기 현재 블록의 예측 블록을 획득하도록 구성되는 것을 특징으로 하는
디코더.
디코더로서,
상기 디코더는 제2 메모리와 제2 프로세서를 포함하고;
상기 제2 메모리는, 상기 제2 프로세서 상에서 작동 가능한 컴퓨터 프로그램을 저장하기 위한 것이고;
상기 제2 프로세서는, 상기 컴퓨터 프로그램이 작동될 경우, 제8항 내지 제34항 중 어느 한 항에 따른 이미지 요소 예측 방법의 단계를 실행하기 위한 것임을 특징으로 하는
디코더.
컴퓨터 저장 매체로서,
상기 컴퓨터 저장 매체에는 이미지 요소 예측 프로그램이 저장되고, 상기 이미지 요소 예측 프로그램이 제1 프로세서에 의해 실행될 때 제1항 내지 제17항 중 어느 한 항에 따른 이미지 요소 예측 방법, 또는 제2 프로세서에 의해 실행될 때 제18항 내지 제34항 중 어느 한 항에 따른 이미지 요소 예측 방법을 구현하는 것을 특징으로 하는
컴퓨터 저장 매체.