KR20220038690A

KR20220038690A - 인트라 모드에서 예측 샘플 필터링을 위한 가중 인자들

Info

Publication number: KR20220038690A
Application number: KR1020227003001A
Authority: KR
Inventors: 훙빈 류; 리 장; 카이 장; 지정 쉬; 웨 왕
Original assignee: 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드; 바이트댄스 아이엔씨
Priority date: 2019-08-14
Filing date: 2020-08-14
Publication date: 2022-03-29
Also published as: EP3997872A1; US11533477B2; JP2022544764A; CN114287133A; EP3997872A4; US20220159242A1; JP2024016282A; WO2021027928A1

Abstract

규칙에 따라 비디오의 현재 비디오 블록의 샘플들의 이웃 샘플들에 대한 가중 인자들을 도출하는 단계; 및 현재 비디오 블록과 비디오의 코딩된 표현 사이의 변환을 수행하는 단계를 포함하는 비디오 프로세싱 방법이 제공되고, 여기서 규칙은, 현재 비디오 블록이 플래너 모드 또는 DC 모드를 사용하여 코딩되는 경우에, 가중 인자들이 현재 비디오 블록의 샘플들의 위치들 또는 현재 비디오 블록의 치수 중 적어도 하나로부터 결정된다는 것을 지정하며, 여기서 현재 비디오 블록은 이웃 샘플들을 현재 비디오 블록의 예측 신호와 결합시키는 PDPC 방법을 사용하여 개선된 예측 신호를 생성하고, 여기서 샘플의 예측 신호의 가중 인자는 샘플의 대응하는 이웃 샘플들의 가중 인자들에 기초하여 결정된다.

Description

인트라 모드에서 예측 샘플 필터링을 위한 가중 인자들

관련 출원의 상호 참조

파리 협약에 따른 적용 가능한 특허법 및/또는 규칙들에 따라, 본 출원은 2019년 8월 14일에 출원된 국제 특허 출원 제PCT/CN2019/100615호에 대한 우선권 및 그 이익을 적시에 주장하기 위해 이루어졌다. 법에 따른 모든 목적들을 위해, 앞서 언급된 출원의 전체 개시는 본 출원의 개시의 일부로서 참고로 포함된다.

기술 분야

이 문서는 비디오 및 이미지 코딩 및 디코딩 기술들에 관한 것이다.

디지털 비디오는 인터넷 및 다른 디지털 통신 네트워크들에서 가장 많은 대역폭 사용을 차지한다. 비디오를 수신하고 디스플레이할 수 있는 연결된 사용자 디바이스들의 수가 증가함에 따라, 디지털 비디오 사용에 대한 대역폭 수요가 계속 증가할 것으로 예상된다.

개시된 기술들은 인트라 예측 샘플 필터링을 사용하여 비디오 코딩 또는 디코딩을 수행하기 위해 비디오 또는 이미지 디코더 또는 인코더 실시예들에 의해 사용될 수 있다.

일 예시적인 양태에서, 비디오 프로세싱 방법이 개시된다. 이 방법은 규칙에 따라 비디오의 현재 비디오 블록의 샘플들의 이웃 샘플들에 대한 가중 인자들을 도출하는 단계; 및 현재 비디오 블록과 비디오의 코딩된 표현 사이의 변환을 수행하는 단계를 포함하고, 여기서 규칙은, 현재 비디오 블록이 플래너(planar) 모드 또는 DC 모드를 사용하여 코딩되는 경우에, 가중 인자들이 현재 비디오 블록의 샘플들의 위치들 또는 현재 비디오 블록의 치수 중 적어도 하나로부터 결정된다는 것을 지정하며, 여기서 현재 비디오 블록은 이웃 샘플들을 현재 비디오 블록의 예측 신호와 결합시키는 위치 의존적 인트라 예측(position dependent intra prediction, PDPC) 방법을 사용하여 현재 비디오 블록의 개선된 예측 신호를 생성하고, 여기서 샘플의 예측 신호의 가중 인자는 샘플의 대응하는 이웃 샘플들의 가중 인자들에 기초하여 결정된다.

또 다른 예시적인 양태에서, 위에서 설명된 방법은 프로세서를 포함하는 비디오 인코더 장치에 의해 구현될 수 있다.

또 다른 예시적인 양태에서, 위에서 설명된 방법은 프로세서를 포함하는 비디오 디코더 장치에 의해 구현될 수 있다.

또 다른 예시적인 양태에서, 이러한 방법들은 프로세서 실행 가능 명령어들의 형태로 구체화되고 컴퓨터 판독 가능 프로그램 매체에 저장될 수 있다.

이들 및 다른 양태들이 본 문서에서 더 설명된다.

도 1는 인코더 블록 다이어그램의 예를 도시한다.
도 2는 67 개의 인트라 예측 모드의 예를 도시한다.
도 3a 및 도 3b는 광각 인트라 예측(wide-angular intra prediction)을 위한 참조 샘플들의 예들을 도시한다.
도 4는 45도 초과의 방향들의 경우의 불연속성의 문제를 예시한다.
도 5a 내지 도 5d는 참조 샘플들의 정의들을 예시한다.
도 6은 4x8 및 8x4 블록들의 분할 예를 도시한다.
도 7은 4x8, 8x4 및 4x4를 제외한 모든 블록들의 분할 예를 도시한다.
도 8은 α와 β의 도출에 사용되는 샘플들의 위치들의 예들을 도시한다.
도 9는 대응하는 루마 영역으로부터의 DM 도출을 위한 'CR' 위치의 예를 도시한다.
도 10은 예측 방향을 따라 관여된 이웃 샘플들의 예들을 도시한다.
도 11a 및 도 11b는 본 문서에 설명된 기술들을 구현하는 데 사용되는 하드웨어 플랫폼의 예들의 블록 다이어그램들이다.
도 12 및 도 13은 예시적인 비디오 프로세싱 방법들에 대한 플로차트들이다.

본 문서는 압축 해제되거나 디코딩된 디지털 비디오 또는 이미지들의 품질을 개선시키기 위해 이미지 또는 비디오 비트스트림들의 디코더에 의해 사용될 수 있는 다양한 기술들을 제공한다. 간결함을 위해, 본 명세서에서 "비디오"라는 용어는 픽처들의 시퀀스(전통적으로 비디오라고 불림) 및 개별 이미지들 둘 모두를 포함하는 데 사용된다. 게다가, 비디오 인코더는 또한 추가의 인코딩에 사용되는 디코딩된 프레임들을 재구성하기 위해 인코딩 프로세스 동안 이러한 기술들을 구현할 수 있다.

섹션 표제들은 이해의 편의를 위해 본 문서에서 사용되며 실시예들 및 기술들을 대응하는 섹션들로 제한하지 않는다. 이에 따라, 한 섹션으로부터의 실시예들은 다른 섹션들로부터의 실시예들과 결합될 수 있다.

1. 요약

이 문서는 비디오 코딩 기술들에 관한 것이다. 구체적으로, 이는 이미지/비디오 코딩에서의 인트라 예측에 관한 것이다. 이는 HEVC와 같은 기존의 비디오 코딩 표준, 또는 완성될 표준(다목적 비디오 코딩(Versatile Video Coding))에 적용될 수 있다. 이는 또한 미래의 비디오 코딩 표준들 또는 비디오 코덱에 적용 가능할 수 있다.

2. 배경

비디오 코딩 표준들은 주로 잘 알려진 ITU-T 및 ISO/IEC 표준들의 개발을 통해 발전해 왔다. ITU-T는 H.261 및 H.263 표준들을 만들었고, ISO/IEC는 MPEG-1 및 MPEG-4 Visual 표준들을 만들었으며, 두 조직은 공동으로 H.262/MPEG-2 Video 및 H.264/MPEG-4 AVC(Advanced Video Coding) 및 H.265/HEVC 표준들을 만들었다. H.262 이후로, 비디오 코딩 표준들은 시간 예측과 변환 코딩이 활용되는 하이브리드 비디오 코딩 구조를 기반으로 한다. HEVC 이후의 미래의 비디오 코딩 기술들을 탐구하기 위해, 2015년에 VCEG와 MPEG에 의해 공동으로 JVET(Joint Video Exploration Team)가 설립되었다. 그 이후로, 많은 새로운 방법들이 JVET에 의해 채택되었고 JEM(Joint Exploration Model)이라는 참조 소프트웨어에 추가되었다. 2018년 4월에, HEVC에 비해 50% 비트레이트 감소를 목표로 하는 VVC 표준에 대해 연구하기 위해 VCEG(Q6/16)와 ISO/IEC JTC1 SC29/WG11(MPEG) 간의 협력 하에 JVET(Joint Video Expert Team)가 만들어졌다.

VVC 초안의 최신 버전, 즉 Versatile Video Coding (Draft 6)은 http://phenix.it-sudparis.eu/jvet/doc_end_user/documents/15_Gothenburg/wg11/JVET-O2001-v14.zip에서 찾아볼 수 있다.

VTM이라는 이름의 VVC의 최신 참조 소프트웨어는 https://vcgit.hhi.fraunhofer.de/jvet/VVCSoftware_VTM/tags/VTM-5.2에서 찾아볼 수 있다.

2.1 컬러 공간 및 크로마 서브샘플링

컬러 모델(또는 컬러 시스템)이라고도 하는, 컬러 공간은 컬러들의 범위를 숫자들의 튜플들로서, 전형적으로 3 개 또는 4 개의 값 또는 컬러 성분(예를 들면, RGB)으로서 간단히 설명하는 추상 수학적 모델이다. 기본적으로 말하면, 컬러 공간은 좌표계와 서브 공간의 정교화이다.

비디오 압축의 경우, 가장 자주 사용되는 컬러 공간들은 YCbCr 및 RGB이다. YCBCR 또는 Y'CBCR이라고도 기술되는, YCbCr, Y'CbCr 또는 Y Pb/Cb Pr/Cr은 비디오 및 디지털 사진 시스템들에서 컬러 이미지 파이프라인의 일부로서 사용되는 컬러 공간들의 계열이다. Y'은 루마 성분이고, CB와 CR은 청색 차이 및 적색 차이 크로마 성분들이다. Y'(프라임을 가짐)은 루미넌스인 Y와 구별되며, 감마 보정된 RGB 원색들에 기초하여 광 강도가 비선형적으로 인코딩된다는 것을 의미한다.

크로마 서브샘플링은, 루미넌스에 대해서보다 컬러 차이들에 대한 인간 시각 시스템의 더 낮은 예민성을 이용하여, 루마 정보에 대해서보다 크로마 정보에 대해 더 낮은 분해능을 구현하는 것에 의해 이미지들을 인코딩하는 방식이다.

2.1.1 4:4:4

3 개의 Y'CbCr 성분 각각은 동일한 샘플 레이트를 가지며, 따라서 크로마 서브샘플링이 없다. 이 방식은 때때로 고급 필름 스캐너들 및 영화 포스트 제작에서 사용된다.

2.1.2 4:2:2

2 개의 크로마 성분은 루마의 샘플 레이트의 절반으로 샘플링된다, 즉 수평 크로마 분해능이 반으로 준다. 이것은 시각적 차이가 거의 또는 전혀 없이 압축되지 않은 비디오 신호의 대역폭을 1/3만큼 감소시킨다.

2.1.3 4:2:0

4:2:0에서는, 수평 샘플링이 4:1:1에 비해 2배이지만, Cb 및 Cr 채널들이 이 방식에서 각각의 교호 라인에서만 샘플링되므로, 수직 분해능이 반으로 준다. 따라서 데이터 레이트는 동일하다. Cb와 Cr은 각각 수평으로 및 수직으로 둘 모두에서 2의 인자로 서브샘플링된다. 상이한 수평 및 수직 위치(siting)를 갖는, 4:2:0 방식들의 세 가지 변형이 있다.

MPEG-2에서, Cb와 Cr은 수평으로 함께 배치된다(cosited). Cb와 Cr은 수직 방향으로 픽셀들 사이에 배치된다(중간에 배치됨).

JPEG/JFIF, H.261 및 MPEG-1에서, Cb와 Cr은 중간에, 즉 교호 루마 샘플들 사이의 중간에 배치된다.

4:2:0 DV에서, Cb와 Cr은 수평 방향으로 함께 배치된다. 수직 방향에서, 이들은 교호 라인들에 함께 배치된다.

2.2 전형적인 비디오 코덱의 코딩 흐름

도 1은 3 개의 인루프 필터링 블록, 즉 디블로킹 필터(DF), 샘플 적응적 오프셋(SAO) 및 ALF를 포함하는 VVC의 인코더 블록 다이어그램의 예를 도시한다. 미리 정의된 필터들을 사용하는 DF와 달리, SAO 및 ALF는, 제각기, 오프셋을 가산하는 것 및 유한 임펄스 응답(FIR) 필터를 적용하는 것에 의해 원래 샘플들과 재구성된 샘플들 간의 평균 제곱 오차들을 감소시키기 위해 현재 픽처의 원래 샘플들을 활용하며, 코딩된 부가 정보는 오프셋들 및 필터 계수들을 시그널링한다. ALF는 각각의 픽처의 마지막 프로세싱 스테이지에 위치하며, 이전 스테이지들에 의해 생성되는 아티팩트들을 잡아내어 수정하려고 하는 툴이라고 볼 수 있다.

2.3 67 개의 인트라 예측 모드를 갖는 인트라 모드 코딩

자연 비디오에 제시되는 임의의 에지 방향들을 캡처하기 위해, 방향성 인트라 모드들의 수가, HEVC에서 사용되는 바와 같은 33 개로부터 65 개로 확장된다. 추가적인 방향성 모드들은 도 2에서 적색 점선 화살표들로서 묘사되며, 플래너 및 DC 모드들은 동일하게 유지된다. 이러한 보다 조밀한 방향성 인트라 예측 모드들은 모든 블록 크기들에 대해 그리고 루마 및 크로마 인트라 예측들 둘 모두에 대해 적용된다.

종래의 각도 인트라 예측 방향들은 도 2에 도시된 바와 같이 시계 방향으로 45도부터 -135도까지 정의된다. VTM2에서, 여러 종래의 각도 인트라 예측 모드들은 정사각형이 아닌 블록들에 대해 광각 인트라 예측 모드들로 적응적으로 대체된다. 대체된 모드들은 원래 방법을 사용하여 시그널링되고 파싱 이후에 광각 모드들의 인덱스들에 재매핑된다. 인트라 예측 모드들의 총수는 변함이 없으며, 즉 67개이며, 인트라 모드 코딩도 변함이 없다.

HEVC에서, 모든 인트라 코딩된 블록은 정사각형 형상을 가지며, 그의 측면 각각의 길이는 2의 거듭제곱이다. 따라서, DC 모드를 사용하여 인트라 예측자를 생성하기 위해 나눗셈 연산들이 필요하지 않다. VVV2에서, 블록들은 일반적인 경우에 블록마다 나눗셈 연산의 사용을 필요로 하는 직사각형 형상을 가질 수 있다. DC 예측을 위한 나눗셈 연산을 피하기 위해, 긴 쪽 측면만이 정사각형이 아닌 블록들의 평균을 계산하는 데 사용된다

도 2는 67 개의 인트라 예측 모드의 예를 도시한다.

2.4 정사각형이 아닌 블록들에 대한 광각 인트라 예측

종래의 각도 인트라 예측 방향들은 시계 방향으로 45도부터 -135도까지 정의된다. VTM2에서, 여러 종래의 각도 인트라 예측 모드들은 정사각형이 아닌 블록들에 대해 광각 인트라 예측 모드들로 적응적으로 대체된다. 대체된 모드들은 원래 방법을 사용하여 시그널링되고 파싱 이후에 광각 모드들의 인덱스들에 재매핑된다. 특정 블록에 대한 인트라 예측 모드들의 총수는 변함이 없으며, 즉 67개이며, 인트라 모드 코딩도 변함이 없다.

도 3a 및 도 3b는 광각 인트라 예측을 위한 참조 샘플들의 예들을 도시한다.

이러한 예측 방향들을 지원하기 위해, 도 3a 및 도 3b에 도시된 바와 같이 길이가 2W+1인 상단 참조와 길이가 2H+1인 좌측 참조가 정의된다.

광각 방향 모드에서 대체된 모드의 모드 번호는 블록의 종횡비에 의존한다. 대체된 인트라 예측 모드들은 표 2-1에 예시되어 있다.

[표 2-1]

광각 모드들로 대체된 인트라 예측 모드들

도 4는 45도 초과의 방향들의 경우의 불연속성의 문제를 예시한다.

도 4에 도시된 바와 같이, 2 개의 수직으로 인접한 예측된 샘플은 광각 인트라 예측의 경우에 2 개의 인접하지 않은 참조 샘플을 사용할 수 있다. 따라서, 저역 통과 참조 샘플 필터 및 측면 평활화(side smoothing)가 증가된 갭

의 부정적인 영향을 감소시키기 위해 광각 예측에 적용된다.

2.5 위치 의존적 인트라 예측 결합

VTM2에서, 플래너 모드의 인트라 예측 결과들은 위치 의존적 인트라 예측 결합(PDPC) 방법에 의해 더 수정된다. PDPC는 필터링된 경계 참조 샘플들을 사용하는 HEVC 스타일 인트라 예측과 필터링되지 않은 경계 참조 샘플들의 결합을 호출하는 인트라 예측 방법이다. PDPC는 시그널링 없이 다음과 같은 인트라 모드들, 즉 플래너, DC, 수평, 수직, 좌측 하단 각도 모드 및 그의 8개의 인접 각도 모드, 및 우측 상단 각도 모드 및 그의 8개의 인접 각도 모드에 적용된다.

내부 예측 샘플 pred(x,y)는 인트라 예측 모드(DC, 플래너, 각도)를 사용하여 예측되고, 다음과 같이 최종 예측 샘플 pred(x,y)을 생성하기 위해 방정식에 따른 참조 샘플들의 선형 결합이 더 적용될 수 있으며:

여기서

는, 제각기, 현재 샘플 (x, y)의 상단과 좌측에 위치한 참조 샘플들을 나타내고,

은 현재 블록의 좌측 상단 코너에 위치하는 참조 샘플을 나타낸다.

PDPC가 DC, 플래너, 수평 및 수직 인트라 모드들에 적용되는 경우, HEVC DC 모드 경계 필터 또는 수평/수직 모드 에지 필터들의 경우에는 필요한 추가적인 경계 필터들이 필요하지 않다.

도 5a 내지 도 5d는 다양한 예측 모드들에 걸쳐 적용되는 PDPC에 대한 참조 샘플들 (

　및

)의 정의를 예시한다. 예측 샘플 pred (x’, y’)은 예측 블록 내의 (x’, y’)에 위치한다. 참조 샘플 R ₍ _x, _-1)의 좌표 x는 x = x’ + y’ + 1에 의해 주어지고, 참조 샘플 R _(-1 _,y) 의 좌표 y도 유사하게 y = x’ + y’ + 1에 의해 주어진다.

도 5a 내지 도 5d는 대각선 및 인접 각도 인트라 모드들에 적용되는 PDPC에 의해 사용되는 샘플들의 예시적인 정의를 도시한다. 도 5a는 대각선 우측 상단 모드 예를 도시한다. 도 5b는 대각선 좌측 하단 모드 예를 도시한다. 도 5c는 인접 대각선 우측 상단 모드 예를 도시한다. 도 5d는 인접 대각선 좌측 하단 모드 예를 도시한다.

PDPC 가중치들은 예측 모드들에 의존하며 표 2-2에 나와 있다.

[표 2-2]

예측 모드들에 따른 PDPC 가중치들의 예

VVC 초안 6에서의 PDPC에 대한 상세한 설명은 다음과 같다.

8.4.5.2.5 일반적인 인트라 샘플 예측

이 프로세스에 대한 입력들은 다음과 같다:

- 현재 픽처의 좌측 상단 샘플을 기준으로 현재 변환 블록의 좌측 상단 샘플을 지정하는 샘플 위치 (　xTbCmp,　yTbCmp　),

- 인트라 예측 모드를 지정하는 변수 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 코딩 블록 폭을 지정하는 변수 nCbW,

- 코딩 블록 높이를 지정하는 변수 nCbH,

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

이 프로세스의 출력들은 예측된 샘플들 predSamples[ x ][ y ](단, x　=　0..nTbW　-　1,　y　=　0..nTbH　-　1)이다.

변수들 refW 및 refH는 다음과 같이 도출된다:

- IntraSubPartitionsSplitType이 ISP_NO_SPLIT와 동일하거나 cIdx가 0과 동일하지 않은 경우, 다음이 적용된다:

- 그렇지 않은 경우( IntraSubPartitionsSplitType이 ISP_NO_SPLIT와 동일하지 않고 cIdx가 0과 동일한 경우 ), 다음이 적용된다:

인트라 예측 참조 라인 인덱스를 지정하는 변수 refIdx는 다음과 같이 도출된다:

8.4.5.2.6 절에 명시된 바와 같은 광각 인트라 예측 모드 매핑 프로세스는 predModeIntra, nTbW, nTbH 및 cIdx를 입력들로 하고 수정된 predModeIntra를 출력으로 하여 호출된다.

변수 refFilterFlag는 다음과 같이 도출된다:

- predModeIntra가 다음 값들, 즉 0, -14, -12, -10, -6, 2, 34, 66, 72, 76, 78, 80 중 하나와 동일한 경우, refFilterFlag는 1과 동일하게 설정된다.

- 그렇지 않은 경우, refFilterFlag는 0과 동일하게 설정된다.

참조 샘플들 p[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)의 생성의 경우, 다음과 같은 순서의 단계들이 적용된다:

1. 8.4.5.2.7 절에 명시된 바와 같은 참조 샘플 이용 가능성 표시 프로세스는 샘플 위치 ( xTbCmp, yTbCmp ), 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-　refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

2. 적어도 하나의 샘플 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)가 "인트라 예측에 이용 가능하지 않음"으로 표시되어 있을 때, 8.4.5.2.8 절에 명시된 바와 같은 참조 샘플 대체 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 수정된 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

3. 8.4.5.2.9 절에 명시된 바와 같은 참조 샘플 필터링 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 변환 블록 폭 nTbW 및 높이 nTbH, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 필터 플래그 refFilterFlag, 필터링되지 않은 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 p[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

predModeIntra에 따른 인트라 샘플 예측 프로세스는 다음과 같이 적용된다:

- predModeIntra가 INTRA_PLANAR와 동일한 경우, 8.4.5.2.10 절에 명시된 대응하는 인트라 예측 모드 프로세스는 변환 블록 폭 nTbW, 및 변환 블록 높이 nTbH 및 참조 샘플 어레이 p를 입력들로 하여 호출되고, 출력은 예측된 샘플 어레이 predSamples이다.

- 그렇지 않고, predModeIntra가 INTRA_DC와 동일한 경우, 8.4.5.2.11 절에 명시된 대응하는 인트라 예측 모드 프로세스는 변환 블록 폭 nTbW, 변환 블록 높이 nTbH, 인트라 예측 참조 라인 인덱스 refIdx, 및 참조 샘플 어레이 p를 입력들로 하여 호출되고, 출력은 예측된 샘플 어레이 predSamples이다.

- 그렇지 않고, predModeIntra가 INTRA_LT_CCLM, INTRA_L_CCLM 또는 INTRA_T_CCLM과 동일한 경우, 8.4.5.2.13 절에 명시된 대응하는 인트라 예측 모드 프로세스는 인트라 예측 모드 predModeIntra, (　xTbCmp,　yTbCmp　)와 동일하게 설정된 샘플 위치 ( xTbC, yTbC ), 변환 블록 폭 nTbW 및 높이 nTbH, 컬러 성분 인덱스 cIdx, 및 참조 샘플 어레이 p를 입력들로 하여 호출되고, 출력은 예측된 샘플 어레이 predSamples이다.

- 그렇지 않은 경우, 8.4.5.2.12 절에 명시된 대응하는 인트라 예측 모드 프로세스는 인트라 예측 모드 predModeIntra, 인트라 예측 참조 라인 인덱스 refIdx, 변환 블록 폭 nTbW, 변환 블록 높이 nTbH, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 코딩 블록 폭 nCbW 및 높이 nCbH, 참조 필터 플래그 refFilterFlag, 컬러 성분 인덱스 cIdx, 및 참조 샘플 어레이 p를 입력들로 하고, 예측 샘플 어레이 predSamples를 출력들로 하여 호출된다.

다음 조건들 모두가 참일 때, 8.4.5.2.14 절에 명시된 위치 의존적 예측 샘플 필터링 프로세스는 인트라 예측 모드 predModeIntra, 변환 블록 폭 nTbW, 변환 블록 높이 nTbH, 예측된 샘플들 predSamples[　x　][　y　](단, x　=　0..nTbW　-　1, y　=　0..nTbH　-　1), 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 샘플들 p[　x　][　y　](단, x　=　-1, y　=　-1..refH　-　1이고 x　=　0..refW　-　1, y　=　-1임), 및 컬러 성분 인덱스 cIdx를 입력들로 하여 호출되고, 출력은 수정된 예측된 샘플 어레이 predSamples이다:

- nTbW가 4보다 크거나 같고 nTbH가 4보다 크거나 같거나 cIdx가 0과 동일하지 않다

- refIdx가 0과 동일하거나 cIdx가 0과 동일하지 않다

- BdpcmFlag[　xTbCmp　][　xTbCmp　]가 0과 동일하다

- 다음 조건들 중 하나가 참이다:

- predModeIntra가 INTRA_PLANAR와 동일하다

- predModeIntra가 INTRA_DC와 동일하다

- predModeIntra가 INTRA_ANGULAR18보다 작거나 같다

- predModeIntra가 INTRA_ANGULAR50보다 작거나 같다

8.4.5.2.14 위치 의존적 인트라 예측 샘플 필터링 프로세스

이 프로세스에 대한 입력들은 다음과 같다:

- 인트라 예측 모드 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 참조 샘플들 폭을 지정하는 변수 refW,

- 참조 샘플들 높이를 지정하는 변수 refH,

- 예측된 샘플들 predSamples[ x ][ y ](단, x　=　0..nTbW　-　1,　y　=　0..nTbH　-　1),

- 이웃 샘플들 p[　x　][　y　](단, x　=　-1,　y　=　-1..refH　-　1이고　x　=　0..refW　-　1,　y　=　-1임),

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

이 프로세스의 출력들은 수정된 예측된 샘플들 predSamples[ x ][ y ](단, x　=　0..nTbW　-　1,　y　=　0..nTbH　-　1)이다.

cIdx의 값에 따라, 함수 clip1Cmp는 다음과 같이 설정된다:

- cIdx가 0과 동일한 경우, clip1Cmp는 Clip1_Y와 동일하게 설정된다.

- 그렇지 않은 경우, clip1Cmp는 Clip1_C와 동일하게 설정된다.

변수 nScale은 다음과 같이 도출된다:

- predModeIntra가 INTRA_ANGULAR50보다 큰 경우, nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbH　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR18보다 작은 경우, nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbW　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

- 그렇지 않은 경우, nSacle은 (　(　Log2(　nTbW　) + Log2(　nTbH　)　-　2　)　　>>　　2　)로 설정된다.

참조 샘플 어레이들 mainRef[　x　] 및 sideRef[　y　](단, x　=　0..refW　-　1이고 y = 0..refH　-　1임)는 다음과 같이 도출된다:

변수들 refL[　x　][　y　], refT[　x　][　y　], wT[　y　], wL[　x　] 및 wTL[　x　][　y　](단, x　=　0..nTbW　-　1,　y　=0..nTbH　-　1)는 다음과 같이 도출된다:

- predModeIntra가 INTRA_PLANAR 또는 INTRA_DC와 동일한 경우, 다음이 적용된다:

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR18 또는 INTRA_ANGULAR50과 동일한 경우, 다음이 적용된다:

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR18보다 작고 nScale이 0보다 크거나 같은 경우, 다음과 같은 순서의 단계들이 적용된다:

1. 변수들 dXInt[ y ] 및 dX[ x ][ y ]는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

2. 변수들 refL[　x　][　y　], refT[　x　][　y　], wT[　y　], wL[　x　] 및 wTL[　x　][　y　]는 다음과 같이 도출된다:

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR50보다 크고 nScale이 0보다 크거나 같은 경우, 다음과 같은 순서의 단계들이 적용된다:

1. 변수들 dYInt[　x　] 및 dY[　x　][　y　] 는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

- 그렇지 않은 경우, refL[　x　][　y　], refT[　x　][　y　], wT[　y　], wL[　x　] 및 wTL[　x　][　y　]는 모두 0과 동일하게 설정된다.

수정된 예측된 샘플들 predSamples[　x　][　y　](단, x　=　0..nTbW　-　1,　y　=0..nTbH　-　1)의 값들은 다음과 같이 도출된다:

2.6 인트라 서브블록 분할(ISP)

JVET-M0102에서, 루마 인트라 예측된 블록들을, 표 1에 나와 있는 바와 같은, 블록 크기 치수들에 따라 수직으로 또는 수평으로 2 개 또는 4 개의 서브파티션으로 분할하는 ISP가 제안된다. 도 6 및 도 7은 두 가지 가능성의 예들을 도시한다. 모든 서브파티션들은 최소 16 개의 샘플을 갖는다는 조건을 충족시킨다.

[표 1]

블록 크기에 따른 서브파티션 수.

도 6은 4x8 및 8x4 블록들의 분할 예를 도시한다.

도 7은 4x8, 8x4 및 4x4를 제외한 모든 블록들의 분할 예를 도시한다.

이러한 서브파티션들 각각에 대해, 인코더에 의해 송신되는 계수들을 엔트로피 디코딩하고 이어서 이들을 역양자화 및 역변환하는 것에 의해 잔차 신호가 생성된다. 이어서, 서브파티션이 인트라 예측되고, 최종적으로 예측 신호에 잔차 신호를 가산하는 것에 의해 대응하는 재구성된 샘플들이 획득된다. 따라서, 각각의 서브파티션의 재구성된 값들은 다음 서브파티션의 예측을 생성하는 데 이용 가능할 것이며, 이는 프로세스를 반복하는 등을 할 것이다. 모든 서브파티션들은 동일한 인트라 모드를 공유한다.

인트라 모드 및 이용되는 분할에 기초하여, 정상 순서 및 역 순서이라고 지칭되는, 두 가지 상이한 부류의 프로세싱 순서가 사용된다. 정상 순서에서, 프로세싱될 첫 번째 서브파티션은 CU의 좌측 상단 샘플을 포함하고 이어서 아래쪽으로(수평 분할) 또는 오른쪽으로(수직 분할) 계속되는 서브파티션이다. 그 결과, 서브파티션들 예측 신호들을 생성하는 데 사용되는 참조 샘플들은 라인들의 왼쪽 측면과 위쪽 측면에만 위치한다. 반면에, 역 프로세싱 순서는 CU의 좌측 하단 샘플을 포함하는 서브파티션에서 시작하여 위쪽으로 계속되거나 또는 CU의 우측 상단 샘플을 포함하는 서브파티션에서 시작하여 왼쪽으로 계속된다

2.7 양자화된 잔차 도메인 BDPCM

JVET-N0413에서는, 양자화된 잔차 도메인 BDPCM(이후부터 RBDPCM으로 표기됨)이 제안된다. 인트라 예측은 인트라 예측과 유사한 예측 방향(수평 또는 수직 예측)에서의 샘플 복사에 의해 전체 블록에 대해 행해진다. 잔차는 양자화되고, 양자화된 잔차와 그의 예측자(수평 또는 수직) 양자화된 값 사이의 델타가 코딩된다. M(행) × N(열) 크기의 블록에 대해,

을 위쪽 또는 좌측 블록 경계 샘플들로부터의 필터링되지 않은 샘플들을 사용하여 수평으로(예측된 블록을 가로질러 좌측 이웃 픽셀 값을 라인 단위로 복사하는 것) 또는 수직으로(상단 이웃 라인을 예측된 블록에서의 각각의 라인에 복사하는 것) 인트라 예측을 수행한 후의 예측 잔차라고 하자.

이 잔차

의 양자화된 버전을 나타낸다고 하고, 여기서 잔차는 원래 블록 값과 예측된 블록 값 간의 차이이다. 이어서 블록 DPCM이 양자화된 잔차 샘플들에 적용되어, 요소들

를 갖는 수정된 M × N 어레이

을 결과한다. 수직 BDPCM이 시그널링될 때:

수평 예측의 경우, 유사한 규칙들이 적용되고, 잔차 양자화된 샘플들은 다음과 같이 획득된다:

잔차 양자화된 샘플들

는 디코더로 송신된다.

디코더 측에서, 위의 계산들이 반대로 행해져

을 생성한다. 수직 예측 경우에,

수평 경우에,

역양자화된 잔차들

는 인트라 블록 예측 값들에 가산되어 재구성된 샘플 값들을 생성한다.

이 방식의 주요 이점은 역 DPCM이 계수들이 파싱될 때 계수 파싱 동안 예측자를 단순히 가산하는 것으로 즉각적으로 행해질 수 있거나 또는 파싱 이후에 수행될 수 있다는 것이다.

변환 스킵은 양자화된 잔차 도메인 BDPCM에서 항상 사용된다.

2.8 교차 성분 선형 모델 예측(CCLM)

교차 성분 중복성을 감소시키기 위해, 교차 성분 선형 모델(CCLM) 예측 모드가 VTM4에서 사용되며, 이에 대해 다음과 같이 선형 모델을 사용하는 것에 의해 동일한 CU의 재구성된 루마 샘플들에 기초하여 크로마 샘플들이 예측되며:

여기서 pred_C(i,j)는 CU에서의 예측된 크로마 샘플들을 나타내고, rec_L(i,j)는 동일한 CU의 다운샘플링된 재구성된 루마 샘플들을 나타낸다. 선형 모델 파라미터 α 및 β는 다운샘플링된 이웃 루마 샘플 세트 내부의 최소 샘플 값과 최대 샘플 값을 갖는 루마 샘플인 2 개의 샘플 및 이들의 대응하는 크로마 샘플들로부터의 루마 값들과 크로마 값들 사이의 관계로부터 도출된다. 선형 모델 파라미터들 α 및 β는 다음 방정식들에 따라 획득된다.

여기서 Y_a 및 X_a는 최대 루마 샘플 값을 갖는 루마 샘플의 루마 값과 크로마 값을 나타낸다. 그리고 X_b 및 Y_b는, 제각기, 최소 루마 샘플 값을 갖는 루마 샘플의 루마 값과 크로마 값을 나타낸다. 도 8은 CCLM 모드에 관여되는 현재 블록의 샘플 및 좌측 샘플과 위쪽 샘플의 위치의 예를 도시한다.

도 8은 α와 β의 도출에 사용되는 샘플들의 위치들의 예들을 도시한다. 파라미터 α를 계산하는 나눗셈 연산은 룩업 테이블로 구현된다. 테이블을 저장하는 데 필요한 메모리를 감소시키기 위해, diff 값(최댓값과 최솟값 간의 차이) 및 파라미터 α는 지수 표기법으로 표현된다. 예를 들어, diff는 4-비트 유효 부분과 지수로 근사화된다. 결과적으로, 1/diff에 대한 테이블은 다음과 같이 유효 숫자(significand)의 16 개의 값에 대한 16 개의 요소로 축소된다.

DivTable [　] = { 0, 7, 6, 5, 5, 4, 4, 3, 3, 2, 2, 1, 1, 1, 1, 0 }

이것은 계산의 복잡도는 물론 필요한 테이블들을 저장하는 데 필요한 메모리 크기 둘 모두를 감소시키는 이점이 있을 것이다.

위쪽 템플릿과 좌측 템플릿은 함께 선형 모델 계수들을 계산하는 데 사용될 수 있는 것 외에도, 이들은 또한, LM_A 모드 및 LM_L 모드라고 하는, 다른 2 개의 LM 모드에서 대안적으로 사용될 수 있다.

LM_A 모드에서는, 위쪽 템플릿만이 선형 모델 계수들을 계산하는 데 사용된다. 보다 많은 샘플들을 얻기 위해, 위쪽 템플릿이 (W+H)로 확장된다. LM_L 모드에서는, 좌측 템플릿만이 선형 모델 계수들을 계산하는 데 사용된다. 보다 많은 샘플들을 얻기 위해, 좌측 템플릿이 (H+W)로 확장된다.

정사각형이 아닌 블록의 경우, 위쪽 템플릿은 W+W로 확장되고, 좌측 템플릿은 H+H로 확장된다.

4:2:0 비디오 시퀀스들에 대한 크로마 샘플 위치들을 매칭시키기 위해, 수평 방향 및 수직 방향 둘 모두에서 2:1 다운샘플링 비율을 달성하도록 두 가지 유형의 다운샘플링 필터가 루마 샘플들에 적용된다. 다운샘플링 필터의 선택은 SPS 레벨 플래그에 의해 지정된다. 2 개의 다운샘플링 필터는 다음과 같으며, 제각기, "type-0" 및 "type-2" 내용에 대응한다.

상부 참조 라인이 CTU 경계에 있을 때 다운샘플링된 루마 샘플들을 만들기 위해 단지 하나의 루마 라인(인트라 예측에서의 일반 라인 버퍼)이 사용된다는 점에 유의한다.

현재 VVC 설계에 따르면, PDPC는 루마 샘플들에 기초하여 CCLM 모드에서 생성되는 예측 블록에 더 적용된다.

이 파라미터 계산은 디코딩 프로세스의 일부로서 수행되며, 인코더 탐색 동작이 아니다. 그 결과, α 및 β 값들을 디코더에 전달하기 위해 신택스가 사용되지 않는다.

크로마 인트라 모드 코딩의 경우, 크로마 인트라 모드 코딩을 위해 총 8 개의 인트라 모드가 허용된다. 이러한 모드들은 5 개의 전통적인 인트라 모드와 3 개의 교차 성분 선형 모델 모드(CCLM, LM_A 및 LM_L)를 포함한다. 크로마 모드 코딩은 대응하는 루마 블록의 인트라 예측 모드에 직접 의존한다. I 슬라이스들에서 루마 및 크로마 성분들에 대한 개별 블록 분할 구조가 가능하기 때문에, 하나의 크로마 블록이 다수의 루마 블록들에 대응할 수 있다. 따라서, 크로마 DM 모드의 경우, 현재 크로마 블록의 중앙 위치를 커버하는 대응하는 루마 블록의 인트라 예측 모드가 직접 상속된다.

2.9 크로마 인트라 예측 모드들

크로마 인트라 모드 코딩의 경우, CCLM(cross-component linear model)이 인에이블되는지 여부에 따라 크로마 인트라 모드 코딩에 대해 총 8 개 또는 5 개의 인트라 모드가 허용된다. 이러한 모드들은 5 개의 전통적인 인트라 모드와 3 개의 교차 성분 선형 모델 모드( IntraPredModeC가, 제각기, 81, 82, 83으로 설정됨)를 포함한다.

2.9.1 DM 모드

크로마 직접 모드(Direct Mode) 또는 도출된 모드(Derived Mode)(DM)에서, 크로마 인트라 예측 모드를 도출하기 위해 동일 위치(co-located) 루마 블록의 예측 모드가 사용된다.

첫째로, 인트라 예측 모드 lumaIntraPredMode가 도출된다:

동일 위치 루마 블록이 MIP 모드로 코딩되는 경우, lumaIntraPredMode는 플래너 모드와 동일하게 설정된다.

그렇지 않고, 동일 위치 루마 블록이 IBC 모드 또는 팔레트 모드로 코딩되는 경우, lumaIntraPredMode는 DC 모드와 동일하게 설정된다.

그렇지 않은 경우, lumaIntraPredMode는 크로마 블록의 중앙의 대응하는 루마 샘플을 커버하는 동일 위치 루마 블록의 인트라 예측 모드와 동일하게 설정된다. 예가 도 9에 묘사되어 있다.

둘째로, 인트라 크로마 예측 모드(IntraPredModeC로 표기됨)는 다음 표에서 굵은 기울임꼴로 강조 표시된 바와 같이 lumaIntraPredMode에 따라 도출된다. 4와 동일한 intra_chroma_pred_mode가 DM 모드를 지칭한다는 점에 유의한다.

VVC에서, 이중 트리로 인해, 하나의 크로마 블록이 다수의 CU들을 커버하는 루마 영역에 대응할 수 있다는 점에 유의한다. 예를 들어, 도 9에서, 크로마 블록의 회색 영역은 5 개의 CU를 커버하는 루마 영역에 대응한다. DM 모드를 도출할 때, 5 개의 CU 중 하나만이 검사되며, 이는 도 9에 묘사된 바와 같은 "CR"이다.

도 9는 대응하는 루마 영역으로부터의 DM 도출을 위한 'CR' 위치의 예를 도시한다.

[표 8-2]

cclm_mode_flag, cclm_mode_idx, intra_chroma_pred_mode 및 lumaIntraPredMode에 따른 IntraPredModeC[ xCb ][ yCb ]의 사양

마지막으로, 픽처의 컬러 포맷이 4:2:2인 경우, IntraPredModeC는 DM 모드에 대한 다음 표에 따라 추가로 수정된다.

chroma_format_idc가 2와 동일할 때 크로마 인트라 예측 모드 X로부터 모드 Y로의 4:2:2 매핑 프로세스의 사양.

3. 실시예들에 의해 해결되는 기술적 문제들의 예들

PDPC는 다음과 같은 문제점들을 갖는다:

1. 플래너 모드 또는 DC 모드에서, 이웃 샘플들에 대한 가중 인자들(예를 들면, wL, wT 및 wLT)은 플래너 및 DC 모드에서 정의되지 않은 예측 각도에 의존한다.

2. PDPC가 CCLM 모드에 대해 인에이블되지만, 이웃 샘플들 및 이웃 샘플들에 적용되는 가중치들 및 선형 모델을 사용하여 루마 블록으로부터 생성되는 크로마 예측 신호를 어떻게 선택할지는 정의되어 있지 않다.

3. "predModeIntra가 INTRA_ANGULAR50보다 작거나 같을" 때 PDPC가 인에이블된다. 우측 상단 광각 모드들의 경우, PDPC가 디스에이블된다. 따라서, PDPC가 특정 광각 모드들에 대해 디스에이블되며, 이는 불합리할 수 있다.

4. 기술들 및 실시예들의 목록

아래의 리스트는 일반 개념들을 설명하기 위한 예들로서 간주되어야 한다. 이러한 항목들이 좁은 의미로 해석되어서는 안 된다. 게다가, 이러한 항목들은 임의의 방식으로 조합될 수 있다.

블록(CU/PU/TU/CB/PB/TB 등)의 폭과 높이가, 제각기, W와 H이고, predSamples(x, y)가 위치 (x, y)에서의 예측된 샘플 값을 나타내며, x = 0...W - 1, y = 0… H - 1이라고 가정한다. (x, y)는 블록의 좌측 상단 샘플을 기준으로 샘플의 좌표이고, x와 y는, 제각기, 샘플의 수평 및 수직 위치이다. R(x, y)는 이웃 샘플들(예를 들면, 재구성된 이웃 샘플들, 또는 특정 필터링 프로세스에 의해 수정되는 재구성된 이웃 샘플들)을 나타내고, x = -1, y = -1...refH - 1이고 x = 0...refW - 1, y = -1이며, 여기서 refH 및 refW는 참조 이웃 샘플들의 높이 및 폭이다. maxTbSize가 최대 변환 블록 크기, 예를 들면, 32 또는 64이고, wL[x], wT[y]가, 제각기, 좌측 이웃 샘플들 및 위쪽 이웃 샘플들의 가중 인자들이라고 하자. 함수 Log2( N )이 N의 밑이 2인 로그라고 하자.

1. 플래너 모드 또는/및 DC 모드에서, PDPC에서의 이웃 샘플들의 가중 인자들이 블록의 치수(들)(예를 들면, W로 표기되는 폭 또는/및 H로 표기되는 높이) 또는/및 필터링될 샘플의 위치에만 의존할 수 있다는 것이 제안된다.

a. 일 예에서, 위치 (x, y)에 있는 샘플에 대해, 위쪽 이웃 샘플(예를 들면, R_{(x, -1)})의 가중 인자는 wT[y] = N1　　>>　　(　(　y　　<<　　N2　)　　>>　　nScale　)로서 정의될 수 있고, 여기서 nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이고 N1, N2, N3 및 N4는 음이 아닌 정수들이다.

b. 일 예에서, 위치 (x, y)에 있는 샘플에 대해, 좌측 이웃 샘플(예를 들면, R_{(-1, y)})의 가중 인자는 wL[x] = N1 >> ( ( x << N2 ) >> nScale )로서 정의될 수 있고, 여기서 nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이다.

c. 일 예에서, 위치 (x, y)에 있는 샘플에 대해, 좌측 상단 이웃 샘플(예를 들면, R_{(-1, -1)})의 가중 인자는 0과 동일하게 설정될 수 있다.

d. N1, N2, N3 및 N4는 음이 아닌 정수들이다. 예를 들어, N1 = 32, N2 = 1, N3 = 2, 그리고 N4 = 2이다.

2. PDPC를 적용할지 여부 및/또는 어떻게 적용할지는 현재 블록이 CCLM 모드들(예컨대, LM, LM-T, LM-L)로 코딩되어 있는지 여부에 의존할 수 있다.

a. PDPC는 CCLM 모드들에서 적용되지 않을 수 있다.

b. 대안적으로, PDPC는 CCLM 모드들과 함께 적용될 수 있으며, 여기서 루마 블록들로부터 생성되는 예측 신호, 및 크로마 이웃 샘플들은 최종 예측 크로마 블록을 도출하는 데 활용된다. 이웃 크로마 샘플들 및/또는 가중 인자들의 선택은 다음과 같이 정의될 수 있다:

i. 일 예에서, 이웃 크로마 샘플들을 선택하는 방법 및/또는 이웃 크로마 샘플들의 가중 인자들을 결정하는 방법은 미리 정의된 모드(예를 들면, 플래너 모드)에서의 방법과 동일할 수 있다.

ii. 대안적으로, 대응하는 루마 블록이 각도 예측 모드들(예를 들면, 광각 예측 모드들, 또는 수직 모드 또는 수평 모드를 더 포함함) 또는 플래너 모드 또는 DC 모드와 같은 인트라 예측 모드로 코딩될 때, 그러한 인트라 예측 모드는 이웃 크로마 샘플들을 선택하고 이웃 크로마 샘플들의 가중 인자들을 결정하는 데 사용될 수 있다.

1. 일 예에서, 대응하는 루마 블록은 대응하는 루마 영역(예를 들면, 도 9에서의 회색 영역)이 커버하는 코딩 유닛들/예측 유닛들/변환 유닛들 중 하나이다.

a. 일 예에서, 대응하는 루마 블록은 중앙 크로마 샘플(예컨대, 도 9에서의 CR)의 대응하는 루마 샘플을 커버하는 코딩 유닛들/예측 유닛들/변환 유닛들이다.

iii. 대안적으로, 대응하는 루마 블록이 각도 예측 모드들(예를 들면, 광각 예측 모드들, 또는 수직 모드 또는 수평 모드를 더 포함함) 또는 플래너 모드 또는 DC 모드와 같은 인트라 예측 모드로 코딩될 때, 그러한 인트라 예측 모드는 이웃 크로마 샘플들을 선택하고 이웃 크로마 샘플들의 가중 인자들을 결정하는 데 사용될 수 있다.

c. 대안적으로, PDPC는 루마 블록들로부터 생성되는 예측 신호 및 재구성된 크로마 이웃 샘플들을 사용하는 대신에 도출된 크로마 이웃 샘플들을 갖는 CCLM 코딩된 블록들에 적용될 수 있다.

i. 일 예에서, 이웃 크로마 샘플들은 CCLM 프로세스에서 도출되는 선형 모델을 사용하는 것에 의해 대응하는 루마 블록의 이웃 루마 샘플들로부터 도출될 수 있다.

d. 대안적으로, 대응하는 루마 블록에서의 대응하는 재구성된 루마 샘플들은 크로마 샘플들을 예측하기 위해 사용되기 전에 PDPC에 의해 필터링될 수 있다.

i. 일 예에서, 재구성된 루마 샘플들을 필터링할 때, 이웃 샘플들을 선택하는 방법 및/또는 이웃 루마 샘플들의 가중 인자들을 결정하는 방법은 미리 정의된 모드(예를 들면, 플래너 모드)에서의 방법과 동일할 수 있다.

ii. 대안적으로, 이웃 샘플들을 선택하는 방법 및/또는 이웃 루마 샘플들의 가중 인자들을 결정하는 방법은 루마 블록의 인트라 예측 모드에 의존할 수 있다.

1. 일 예에서, 루마 블록이 각도 예측 모드들(광각 예측 모드들, 또는 수직 모드 또는 수평 모드를 포함함) 또는 플래너 모드 또는 DC 모드와 같은 인트라 예측 모드로 코딩될 때, 그러한 인트라 예측 모드는 이웃 루마 샘플들을 선택하고 이웃 루마 샘플들의 가중 인자들을 결정하는 데 사용될 수 있다.

3. PDPC를 적용할지 여부 및/또는 어떻게 적용할지는 현재 블록이 광각 인트라 예측 모드들로 코딩되어 있는지 여부에 의존할 수 있다.

a. PDPC는 광각 인트라 예측 모드들을 갖는 블록들에 적용될 수 있다.

i. 일 예에서, PDPC는 일부 특정(전부는 아님) 광각 인트라 예측 모드들을 갖는 블록들에 적용될 수 있다.

b. PDPC는 광각 인트라 예측 모드들을 갖는 블록들에 적용되지 않을 수 있다.

4. PDPC가 블록에 적용될 수 있는지 여부는 위쪽 이웃 샘플들 및 좌측 이웃 샘플들(예를 들면, 방정식 (2-1)에서의 R_{(-1, y)}및 R_{(x, -1)}) 둘 모두가 인트라 예측 방향을 따라 "관여"되는지 여부에 의존할 수 있다. 예를 들어, 인트라 예측 프로세스에서, 샘플이 좌측/위쪽 이웃 샘플(분수 위치에 위치할 수 있음)로부터 예측되는 것으로 가정한다. 시작점이 좌측/위쪽 이웃 샘플인 반직선(half-line)이 인트라 예측 방향을 따라 그려지며, 반직선이 위쪽/좌측 이웃 행/열을 가로지르는 경우, 위쪽 이웃 샘플들과 좌측 이웃 샘플들 둘 모두는 샘플에 대해 인트라 예측 방향을 따라 "관여"되어 있다고 말해진다. R_{(-1, -1)}이 항상 좌측 이웃 샘플 또는 위쪽 이웃 샘플로 간주될 수 있지만 둘 다로 간주될 수는 없다는 점에 유의한다.

a. 일 예에서, 인트라 예측 방향은 각도 인트라 예측 모드로서 정의될 수 있다.

i. 일 예에서, 인트라 예측 방향은 수직 또는/및 수평 예측 방향을 제외할 수 있다.

ii. 일 예에서, 인트라 예측 방향은 DC 및/또는 플래너 모드를 제외할 수 있다.

iii. 일 예에서, 인트라 예측 방향은 광각 인트라 예측 모드를 제외할 수 있다.

b. 일 예에서, 블록의 적어도 N 개의 샘플(예를 들면, N = 1)을 예측하기 위해 인트라 예측 방향을 따라 위쪽 이웃 샘플들 및 좌측 이웃 샘플들 둘 모두가 "관여"되어 있는 경우, PDPC가 적용될 수 있다. PDPC가 인에이블되어 있는 예가 도 10(a) 및 도 10(b)에 도시되어 있다.

i. 대안적으로, 게다가, 2 개의 이웃 샘플이 블록의 임의의 샘플들을 예측하기 위한 인트라 예측 프로세스에 "관여"되지 않는 경우, PDPC가 적용되지 않을 수 있으며, 예가 도 10(c) 및 도 10(d)에 도시되어 있다.

도 10은 예측 방향을 따라 관여된 이웃 샘플들의 예들을 도시한다.

5. PDPC를 인에이블 또는 디스에이블시킬지는 컬러 성분에 의존할 수 있다.

a. 일 예에서, PDPC가 루마 컬러 성분(예를 들면, YCbCr 컬러 포맷에서의 Y; RGB 컬러 포맷에서의 G)에 대해서는 인에이블될 수 있지만, 적어도 하나의 크로마 컬러 성분(예를 들면, YCbCr 컬러 포맷에서의 Cb 및/또는 Cr; RGB 컬러 포맷에서의 B 및/또는 R)에 대해서는 디스에이블될 수 있다.

6. 필터링 프로세스가 하나의 최종 예측 샘플을 도출하기 위해 몇 개의 샘플들을 도출해야 하는지를 수반하는 것에 기초하여, PDPC의 여러 방법들이 허용될 수 있다.

a. 일 예에서, 하나의 최종 예측 샘플은 하나 또는 다수의 좌측 이웃 샘플(필터링되거나 필터링되지 않음) 및 예를 들면, 정상적인 인트라 예측 프로세스로부터 획득되는 내부 예측 값들(예를 들면, 방정식 2-1에서의 pred(x,y))에 따라 도출될 수 있다.

b. 일 예에서, 하나의 최종 예측 샘플은 하나 또는 다수의 위쪽 이웃 샘플들(필터링되거나 필터링되지 않음) 및 예를 들면, 정상적인 인트라 예측 프로세스로부터 획득되는 내부 예측 값들(예를 들면, 방정식 2-1에서의 pred(x,y))에 따라 도출될 수 있다.

c. 어느 PDPC 방법이 블록에 적용되어야 하는지는 코딩된 정보에 의존할 수 있다:

i. 블록 치수

ii. 블록 형상

iii. 블록 폭과 높이 사이의 비

iv. 비디오 유닛에서 시그널링되는 인덱스 또는 플래그들

7. PDPC가 블록에 적용될 수 있는지 여부는 블록 치수 및/또는 블록 형상(정사각형 또는 비정사각형)에 의존할 수 있다.

a. 일 예에서, 정사각형이 아닌 블록들의 경우, PDPC가 디스에이블될 수 있다.

b. 일 예에서, PDPC를 인에이블 또는 디스에이블시킬지는 블록 폭과 블록 높이 사이의 비에 의존할 수 있다.

c. 블록 크기가 작을 때 PDPC가 허용되지 않을 수 있다.

i. 일 예에서, 블록의 폭이 임계치 T(예를 들면, T=2, 4)보다 작거나 같을 때, PDPC가 허용되지 않을 수 있다.

ii. 일 예에서, 블록의 높이가 임계치 T(예를 들면, T=2, 4)보다 작거나 같을 때, PDPC가 허용되지 않을 수 있다.

iii. 일 예에서, 블록 내의 루마 샘플들의 수가 임계치 T(예를 들면, 16, 32, 64)보다 작거나 같을 때, PDPC가 허용되지 않을 수 있다.

d. 블록 크기가 클 때 PDPC가 허용되지 않을 수 있다.

i. 일 예에서, 블록의 폭이 임계치 T(예를 들면, T=32)보다 크거나 같을 때, PDPC가 허용되지 않을 수 있다.

ii. 일 예에서, 블록의 높이가 임계치 T(예를 들면, T=32)보다 크거나 같을 때, PDPC가 허용되지 않을 수 있다.

iii. 일 예에서, 블록 내의 루마 샘플들의 수가 임계치 T(예를 들면, 1024)보다 크거나 같을 때, PDPC가 허용되지 않을 수 있다.

e. PDPC를 인에이블 또는 디스에이블시킬지는 상이한 컬러 성분들에 대해 독립적으로 결정될 수 있다.

5. 실시예

새로 추가된 부분들은 굵은 기울임꼴로 강조 표시되며 삭제된 부분들은 이중 대괄호들로 표시된다(예를 들면, [[a]]는 문자 "a"의 삭제를 나타낸다).

5.1 일 예

이것은 글머리 기호 1의 예이다.

8.4.5.2.14 위치 의존적 인트라 예측 샘플 필터링 프로세스

이 프로세스에 대한 입력들은 다음과 같다:

- 인트라 예측 모드 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 참조 샘플들 폭을 지정하는 변수 refW,

- 참조 샘플들 높이를 지정하는 변수 refH,

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

cIdx의 값에 따라, 함수 clip1Cmp는 다음과 같이 설정된다:

- 그렇지 않은 경우, clip1Cmp는 Clip1_C와 동일하게 설정된다.

변수 nScale은 다음과 같이 도출된다:

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR18보다 작고 INTRA_PLANAR과 동일하지 않으며 INTRA_DC와 동일하지 않은 경우 , nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbW　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

3. 변수들 dXInt[ y ] 및 dX[ x ][ y ]는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

4. 변수들 refL[　x　][　y　], refT[　x　][　y　], wT[　y　], wL[　x　] 및 wTL[　x　][　y　]는 다음과 같이 도출된다:

3. 변수들 dYInt[　x　] 및 dY[　x　][　y　] 는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

대안적으로, 위쪽 라인들은 다음과 같이 대체될 수 있다:

변수 nScale은 다음과 같이 도출된다:

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR18보다 작고 INTRA_DC보다 큰 경우, nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbW　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

- 그렇지 않고, predModeIntra가 INTRA_PLANAR 또는 INTRA_DC 또는 INTRA_ANGULAR18 또는 INTRA_ANGULAR50과 동일한 경우 , nSacle은 (　(　Log2(　nTbW　) + Log2(　nTbH　)　-　2　)　　>>　　2　)로 설정된다.

5.2 일 예

이것은 글머리 기호 2 및 글머리 기호 3의 예이다.

8.4.5.2.5 일반적인 인트라 샘플 예측

이 프로세스에 대한 입력들은 다음과 같다:

- 인트라 예측 모드를 지정하는 변수 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 코딩 블록 폭을 지정하는 변수 nCbW,

- 코딩 블록 높이를 지정하는 변수 nCbH,

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

변수들 refW 및 refH는 다음과 같이 도출된다:

변수 refFilterFlag는 다음과 같이 도출된다:

- 그렇지 않은 경우, refFilterFlag는 0과 동일하게 설정된다.

4. 8.4.5.2.7 절에 명시된 바와 같은 참조 샘플 이용 가능성 표시 프로세스는 샘플 위치 ( xTbCmp, yTbCmp ), 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-　refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

5. 적어도 하나의 샘플 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)가 "인트라 예측에 이용 가능하지 않음"으로 표시되어 있을 때, 8.4.5.2.8 절에 명시된 바와 같은 참조 샘플 대체 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 수정된 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

6. 8.4.5.2.9 절에 명시된 바와 같은 참조 샘플 필터링 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 변환 블록 폭 nTbW 및 높이 nTbH, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 필터 플래그 refFilterFlag, 필터링되지 않은 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 p[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

- refIdx가 0과 동일하거나 cIdx가 0과 동일하지 않다

- BdpcmFlag[　xTbCmp　][　xTbCmp　]가 0과 동일하다

- 다음 조건들 중 하나가 참이다:

- predModeIntra가 INTRA_PLANAR와 동일하다

- predModeIntra가 INTRA_DC와 동일하다

- predModeIntra가 INTRA_ANGULAR18보다 작거나 같다

- predModeIntra가 INTRA_ANGULAR50보다 [[작거나]] 크거나 같고 INTRA_LT_CCLM보다 작다.

5.4 일 예

이것은 글머리 기호 4의 예이다.

8.4.5.2.5 일반적인 인트라 샘플 예측

이 프로세스에 대한 입력들은 다음과 같다:

- 인트라 예측 모드를 지정하는 변수 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 코딩 블록 폭을 지정하는 변수 nCbW,

- 코딩 블록 높이를 지정하는 변수 nCbH,

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

변수들 refW 및 refH는 다음과 같이 도출된다:

변수 refFilterFlag는 다음과 같이 도출된다:

- 그렇지 않은 경우, refFilterFlag는 0과 동일하게 설정된다.

7. 8.4.5.2.7 절에 명시된 바와 같은 참조 샘플 이용 가능성 표시 프로세스는 샘플 위치 ( xTbCmp, yTbCmp ), 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-　refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

8. 적어도 하나의 샘플 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)가 "인트라 예측에 이용 가능하지 않음"으로 표시되어 있을 때, 8.4.5.2.8 절에 명시된 바와 같은 참조 샘플 대체 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 수정된 참조 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

9. 8.4.5.2.9 절에 명시된 바와 같은 참조 샘플 필터링 프로세스는 인트라 예측 참조 라인 인덱스 refIdx, 변환 블록 폭 nTbW 및 높이 nTbH, 참조 샘플 폭 refW, 참조 샘플 높이 refH, 참조 필터 플래그 refFilterFlag, 필터링되지 않은 샘플들 refUnfilt[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임), 및 컬러 성분 인덱스 cIdx를 입력들로 하고, 참조 샘플들 p[　x　][　y　](단, x　=　-1　-　refIdx, y　=　-1　-　refIdx..refH　-　1이고 x　=　-refIdx..refW　-　1, y　=　-1　-　refIdx임)를 출력으로 하여 호출된다.

- refIdx가 0과 동일하거나 cIdx가 0과 동일하지 않다

- BdpcmFlag[　xTbCmp　][　xTbCmp　]가 0과 동일하다

- predModeIntra가 INTRA_LT_CCLM보다 작다

[[다음 조건들 중 하나가 참이다:

- predModeIntra가 INTRA_PLANAR와 동일하다

- predModeIntra가 INTRA_DC와 동일하다

- predModeIntra가 INTRA_ANGULAR18보다 작거나 같다

- predModeIntra가 INTRA_ANGULAR50보다 작거나 같다]]

8.4.5.2.14 위치 의존적 인트라 예측 샘플 필터링 프로세스

이 프로세스에 대한 입력들은 다음과 같다:

- 인트라 예측 모드 predModeIntra,

- 변환 블록 폭을 지정하는 변수 nTbW,

- 변환 블록 높이를 지정하는 변수 nTbH,

- 참조 샘플들 폭을 지정하는 변수 refW,

- 참조 샘플들 높이를 지정하는 변수 refH,

- 현재 블록의 컬러 성분을 지정하는 변수 cIdx.

cIdx의 값에 따라, 함수 clip1Cmp는 다음과 같이 설정된다:

- 그렇지 않은 경우, clip1Cmp는 Clip1_C와 동일하게 설정된다.

변수 nScale은 다음과 같이 도출된다:

- predModeIntra가 다음 값들 중 하나와 동일한 경우, nScale은 (　(　Log2(　nTbW　) + Log2(　nTbH　)　-　2　)　　>>　　2　)로 설정된다.

- INTRA_PLANAR

- INTRA_DC

- INTRA_ANGULAR18

- INTRA_ANGULAR50

- 그렇지 않고, predModeIntra가 INTRA_ANGULAR34 [[INTRA_ANGULAR50]]보다 [큰 경우] 크거나 같은 경우 , nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbH　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

- 그렇지 않은 경우, [[predModeIntra가 INTRA_ANGULAR18보다 크거나 작은 경우]], nScale은, 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여, Min(　2,　Log2(　nTbW　)　-　Floor(　Log2(　3　*　invAngle　-　2　)　)　+　8　)과 동일하게 설정된다.

- [[그렇지 않은 경우, nSacle은 (　(　Log2(　nTbW　) + Log2(　nTbH　)　-　2　)　　>>　　2　)로 설정된다.]]

nScale이 0보다 작은 경우, 이 프로세스가 종료된다.

5. 변수들 dXInt[ y ] 및 dX[ x ][ y ]는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

6. 변수들 refL[　x　][　y　], refT[　x　][　y　], wT[　y　], wL[　x　] 및 wTL[　x　][　y　]는 다음과 같이 도출된다:

5. 변수들 dYInt[　x　] 및 dY[　x　][　y　] 는 intraPredMode에 따라 8.4.5.2.12 절에 명시된 바와 같은 invAngle을 사용하여 다음과 같이 도출된다:

도 11a는 비디오 프로세싱 장치(1100)의 블록 다이어그램이다. 장치(1100)는 본 명세서에 설명된 방법들 중 하나 이상을 구현하는 데 사용될 수 있다. 장치(1100)는 스마트폰, 태블릿, 컴퓨터, IoT(Internet of Things) 수신기 등에 구체화될 수 있다. 장치(1100)는 하나 이상의 프로세서(1102), 하나 이상의 메모리(1104) 및 비디오 프로세싱 하드웨어(1106)를 포함할 수 있다. 프로세서(들)(1102)는 본 문서에 설명된 하나 이상의 방법을 구현하도록 구성될 수 있다. 메모리(메모리들)(1104)는 본 명세서에 설명된 방법들 및 기술들을 구현하는 데 사용되는 데이터 및 코드를 저장하는 데 사용될 수 있다. 비디오 프로세싱 하드웨어(1106)는, 하드웨어 회로로, 본 문서에 설명된 일부 기술들을 구현하는 데 사용될 수 있다. 일부 실시예들에서, 하드웨어(1106)는 적어도 부분적으로 프로세서들(1102), 예를 들면, 그래픽 코프로세서 내에 있을 수 있다.

도 11b는 개시된 기술들이 구현될 수 있는 비디오 프로세싱 시스템의 블록 다이어그램의 다른 예이다. 도 11b는 본 명세서에 개시된 다양한 기술들이 구현될 수 있는 예시적인 비디오 프로세싱 시스템(2400)을 도시하는 블록 다이어그램이다. 다양한 구현들은 시스템(2400)의 컴포넌트들의 일부 또는 전부를 포함할 수 있다. 시스템(2400)은 비디오 콘텐츠를 수신하기 위한 입력(2402)을 포함할 수 있다. 비디오 콘텐츠는 원시 또는 압축되지 않은 포맷, 예를 들면, 8 또는 10 비트 다중 성분 픽셀 값들로 수신될 수 있거나, 또는 압축된 또는 인코딩된 포맷으로 되어 있을 수 있다. 입력(2402)은 네트워크 인터페이스, 주변기기 버스 인터페이스, 또는 스토리지 인터페이스를 나타낼 수 있다. 네트워크 인터페이스의 예들은 이더넷, PON(passive optical network) 등과 같은 유선 인터페이스들 및 Wi-Fi 또는 셀룰러 인터페이스들과 같은 무선 인터페이스들을 포함한다.

시스템(2400)은 본 문서에 설명된 다양한 코딩 또는 인코딩 방법들을 구현할 수 있는 코딩 컴포넌트(2404)를 포함할 수 있다. 코딩 컴포넌트(2404)는 비디오의 코딩된 표현을 생성하기 위해 입력(2402)으로부터 코딩 컴포넌트(2404)의 출력으로의 비디오의 평균 비트레이트를 감소시킬 수 있다. 따라서 코딩 기술들은 때때로 비디오 압축 또는 비디오 트랜스코딩 기술들이라고 불린다. 코딩 컴포넌트(2404)의 출력은 저장되거나, 컴포넌트(2406)에 의해 표현된 바와 같은, 연결된 통신을 통해 전송될 수 있다. 입력(2402)에 수신되는 비디오의 저장된 또는 통신된 비트스트림(또는 코딩된) 표현은 디스플레이 인터페이스(2410)로 송신되는 픽셀 값들 또는 디스플레이 가능한 비디오를 생성하기 위해 컴포넌트(2408)에 의해 사용될 수 있다. 비트스트림 표현으로부터 사용자가 볼 수 있는 비디오를 생성하는 프로세스는 때때로 비디오 압축 해제라고 불린다. 게다가, 특정 비디오 프로세싱 동작들이 "코딩" 동작들 또는 툴들이라고 지칭되지만, 코딩 툴들 또는 동작들이 인코더에서 사용되고 코딩의 결과들을 반대로 하는 대응하는 디코딩 툴들 또는 동작들은 디코더에 의해 수행될 것임이 이해될 것이다.

주변기기 버스 인터페이스 또는 디스플레이 인터페이스의 예들은 USB(universal serial bus) 또는 HDMI(high definition multimedia interface) 또는 Displayport 등을 포함할 수 있다. 스토리지 인터페이스들의 예들은 SATA(serial advanced technology attachment), PCI, IDE 인터페이스 등을 포함한다. 본 문서에서 설명되는 기술들은 디지털 데이터 프로세싱 및/또는 비디오 디스플레이를 수행할 수 있는 모바일 폰들, 랩톱들, 스마트폰들 또는 다른 디바이스들과 같은 다양한 전자 디바이스들에서 구체화될 수 있다.

일부 실시예들에서, 이 특허 문서에서 논의된 비디오 프로세싱 방법들은 도 11a 또는 도 11b와 관련하여 설명된 바와 같은 하드웨어 플랫폼에서 구현되는 장치를 사용하여 구현될 수 있다.

개시된 기술의 일부 실시예들은 비디오 프로세싱 툴 또는 모드를 인에이블시키기로 의사 결정 또는 결정하는 것을 포함한다. 예에서, 비디오 프로세싱 툴 또는 모드가 인에이블될 때, 인코더는 비디오 블록의 프로세싱에서 툴 또는 모드를 사용하거나 구현할 것이지만, 툴 또는 모드의 사용에 기초하여 결과적인 비트스트림을 반드시 수정하는 것은 아닐 수 있다. 즉, 비디오 블록으로부터 비디오의 비트스트림 표현으로의 변환은 의사 결정 또는 결정에 기초하여 비디오 프로세싱 툴 또는 모드가 인에이블될 때 이를 사용할 것이다. 다른 예에서, 비디오 프로세싱 툴 또는 모드가 인에이블될 때, 디코더는 비디오 프로세싱 툴 또는 모드에 기초하여 비트스트림이 수정되었다는 지식을 사용하여 비트스트림을 프로세싱할 것이다. 즉, 비디오의 비트스트림 표현으로부터 비디오 블록으로의 변환은 의사 결정 또는 결정에 기초하여 인에이블된 비디오 프로세싱 툴 또는 모드를 사용하여 수행될 것이다.

개시된 기술의 일부 실시예들은 비디오 프로세싱 툴 또는 모드를 디스에이블시키기로 의사 결정 또는 결정을 내리는 것을 포함한다. 예에서, 비디오 프로세싱 툴 또는 모드가 디스에이블될 때, 인코더는 비디오 블록을 비디오의 비트스트림 표현으로 변환하는 데 툴 또는 모드를 사용하지 않을 것이다. 다른 예에서, 비디오 프로세싱 툴 또는 모드가 디스에이블될 때, 디코더는 의사 결정 또는 결정에 기초하여 디스에이블된 비디오 프로세싱 툴 또는 모드를 사용하여 비트스트림이 수정되지 않았다는 지식을 사용하여 비트스트림을 프로세싱할 것이다.

본 문서에서, "비디오 프로세싱"이라는 용어는 비디오 인코딩, 비디오 디코딩, 비디오 압축 또는 비디오 압축 해제를 지칭할 수 있다. 예를 들어, 비디오의 픽셀 표현으로부터 대응하는 비트스트림 표현으로 또는 그 반대로 변환하는 동안 비디오 압축 알고리즘들이 적용될 수 있다. 현재 비디오 블록의 비트스트림 표현은, 예를 들어, 신택스에 의해 정의된 바와 같이, 비트스트림 내에서 동일 위치에 있거나 상이한 위치들에 분산되는 비트들에 대응할 수 있다. 예를 들어, 매크로블록은 변환되고 코딩된 오차 잔차 값들의 관점에서 그리고 또한 비트스트림 내의 헤더들 및 다른 필드들 내의 비트들을 사용하여 인코딩될 수 있다.

다양한 기술들 및 실시예들은 이하의 조항 기반 포맷을 사용하여 설명될 수 있다. 제1 세트의 조항들은 이전 섹션에서의 개시된 기술들의 특정 특징들 및 양태들을 설명한다.

다음 조항들은 이전 섹션에 나열된 항목들(예를 들면, 항목 1)에서 설명된 추가적인 기술들과 함께 구현될 수 있다.

1. 비디오 프로세싱 방법(예를 들면, 도 12에 도시된 방법(1200))으로서, 비디오의 현재 비디오 블록과 현재 비디오 블록의 코딩된 표현 사이의 변환을 위해, 셀프 코딩 모드(self-coding mode)를 사용하여 변환을 위해 이웃 샘플들에 적용되는 가중 인자를 결정하는 단계(1202) - 가중 인자는 현재 비디오 블록의 크기 또는 가중 인자가 적용되는 샘플 위치에 의해 완전히 정의됨 -, 및 결정에 기초하여 변환을 수행하는 단계(1204) - 셀프 코딩 모드는 플래너 코딩 모드 또는 직류(DC) 코딩 모드를 포함함 - 를 포함하는, 방법.

2. 조항 1의 방법으로서, 샘플 위치는 (x, y)이고, 이웃 샘플들 위쪽에 있는 이웃 샘플들에 대한 가중 인자는 wT[y] = N1 >> ( ( y << N2 ) >> nScale )이며, nScale = ( ( Log2( W ) + Log2( H ) - N3 ) >> N4 )이고, N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.

3. 조항 1의 방법으로서, 샘플 위치는 (x, y)이고, 좌측 이웃 샘플들인 이웃 샘플들에 대한 가중 인자는 wL[x] = N1 >> ( ( x << N2 ) >> nScale )이며, nScale = ( ( Log2( W ) + Log2( H ) - N3 ) >> N4 )이고, N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.

4. 조항 1의 방법으로서, 샘플 위치는 (x, y)이고 좌측 상단 위치에 있는 이웃 샘플들의 가중 인자는 0인, 방법.

5. 조항 1 내지 조항 4 중 어느 조항의 방법으로서, N1 = 32이거나, N2 = 1이거나, N3 =2이거나, N4 = 2인, 방법.

다음 해결책들은 이전 섹션에 나열된 항목들(예를 들면, 항목 2, 항목 3, 항목 4 및 항목 7)에서 설명된 추가적인 기술들과 함께 구현될 수 있다.

6. 비디오 프로세싱 방법으로서, 비디오의 현재 비디오 블록과 현재 비디오 블록의 코딩된 표현 사이의 변환 동안, 변환을 위해 현재 비디오 블록에 사용되는 코딩 모드를 사용하는 규칙에 기초하여 셀프 코딩 모드가 현재 비디오 블록에 적용되는지 여부를 결정하는 단계; 및 결정에 기초하여 변환을 수행하는 단계를 포함하는, 방법.

7. 조항 6의 방법으로서, 코딩 모드는 교차 성분 선형 모델(CCLM)을 포함하는, 방법.

8. 조항 7의 방법으로서, 규칙은 CCLM이 사용되는 경우에 셀프 코딩 모드를 디스에이블시키도록 지정하는, 방법.

9. 조항 7의 방법으로서, 규칙은 CCLM이 사용되는 경우에 셀프 코딩 모드를 인에이블시키도록 지정하는, 방법.

10. 조항 9의 방법으로서, 제2 규칙은 셀프 코딩 기반 변환 동안 사용될 참조 샘플들의 위치들을 더 지정하는, 방법.

11. 조항 10의 방법으로서, 제2 규칙은 플래너 코딩 모드에서 사용되는 참조 샘플들의 위치들과 동일한 위치들을 사용하도록 지정하는, 방법.

12. 조항 10의 방법으로서, 제2 규칙은 셀프 코딩이 현재 비디오 블록의 변환 동안 예측된 루마 샘플들 또는 도출된 크로마 이웃 샘플들을 사용한다는 것을 지정하는, 방법.

13. 조항 6의 방법으로서, 코딩 모드는 광각 인트라 예측 모드를 포함하는, 방법.

14. 조항 6의 방법으로서, 규칙은 광각 인트라 예측 모드가 사용되는 경우에 셀프 코딩 모드를 디스에이블시키도록 지정하는, 방법.

15. 조항 6의 방법으로서, 규칙은 광각 인트라 예측 모드가 사용 중인 것으로 인해 셀프 코딩을 인에이블시키도록 지정하는, 방법.

16. 조항 6의 방법으로서, 코딩 모드는 현재 비디오 블록의 인트라 예측 동안 위쪽 또는 좌측 샘플들이 관여되는지 여부에 의해 정의되는, 방법.

17. 조항 16의 방법으로서, 인트라 예측은 각도 인트라 예측 모드를 포함하는, 방법.

18. 조항 6의 방법으로서, 코딩 모드는 현재 비디오 블록의 높이 또는 폭 또는 현재 비디오 블록의 형상에 대응하는, 방법.

19. 조항 18의 방법으로서, 규칙은 현재 비디오 블록이 정사각형이 아닌 형상을 갖는 것으로 인해 셀프 코딩 모드가 디스에이블된다는 것을 지정하는, 방법.

다음 조항들은 이전 섹션에 나열된 항목들(예를 들면, 항목 5)에서 설명된 추가적인 기술들과 함께 구현될 수 있다.

20. 비디오 프로세싱 방법으로서, 비디오의 현재 비디오 블록과 현재 비디오 블록의 코딩된 표현 사이의 변환 동안, 현재 비디오 블록의 성분을 사용하는 규칙에 기초하여 셀프 코딩 모드가 현재 비디오 블록에 적용되는지 여부를 결정하는 단계; 및 결정에 기초하여 변환을 수행하는 단계를 포함하는, 방법.

21. 조항 20의 방법으로서, 규칙은 현재 비디오 블록이 루마 블록인 것으로 인해 셀프 코딩 모드를 인에이블시키도록 정의하는, 방법.

22. 조항 20의 방법으로서, 규칙은 현재 비디오 블록이 크로마 블록인 것으로 인해 셀프 코딩 모드를 디스에이블시키도록 정의하는, 방법.

다음 해결책들은 이전 섹션에 나열된 항목들(예를 들면, 항목 6)에서 설명된 추가적인 기술들과 함께 구현될 수 있다.

23. 비디오 프로세싱 방법으로서, 비디오의 현재 비디오 블록과 현재 비디오 블록의 코딩된 표현 사이의 변환 동안, 규칙에 기초하여 다수의 셀프 코딩 모드들을 현재 비디오 블록에 적용하도록 결정하는 단계; 및 다수의 셀프 코딩 모드들을 적용한 결과를 이용하여 변환을 수행하는 단계를 포함하는, 방법.

24. 조항 23의 방법으로서, 다수의 셀프 코딩 모드들은 필터링된 또는 필터링되지 않은 좌측 이웃 샘플들에 기초한 코딩 모드를 포함하는, 방법.

25. 조항 23의 방법으로서, 다수의 셀프 코딩 모드들은 필터링된 또는 필터링되지 않은 위쪽 이웃 샘플들에 기초한 코딩 모드를 포함하는, 방법.

26. 조항 23 내지 조항 25 중 어느 조항의 방법으로서, 규칙은 현재 비디오 블록의 치수 또는 현재 비디오 블록의 형상 또는 현재 비디오 블록의 높이와 폭의 비 또는 코딩된 표현에서 시그널링되는 플래그를 포함하는 코딩된 정보에 기초하는, 방법.

27. 상기의 조항들 중 어느 조항의 방법으로서, 셀프 코딩 모드는 위치 의존적 인트라 예측 결합(PDPC) 모드를 포함하는, 방법.

28. 조항 1 내지 조항 27 중 어느 조항의 방법으로서, 변환은 비디오를 코딩된 표현으로 인코딩하는 것을 포함하는, 방법.

29. 조항 1 내지 조항 27 중 어느 조항의 방법으로서, 변환은 코딩된 표현을 디코딩하여 비디오의 픽셀 값들을 생성하는 것을 포함하는, 방법.

30. 조항 1 내지 조항 27 중 하나 이상의 조항에 기재된 방법을 구현하도록 구성된 프로세서를 포함하는 비디오 디코딩 장치.

31. 조항 1 내지 조항 27 중 하나 이상의 조항에 기재된 방법을 구현하도록 구성된 프로세서를 포함하는 비디오 인코딩 장치.

32. 컴퓨터 코드가 저장되어 있는 컴퓨터 프로그램 제품으로서, 코드는, 프로세서에 의해 실행될 때, 프로세서로 하여금 조항 1 내지 조항 27 중 어느 조항에 기재된 방법을 구현하게 하는, 컴퓨터 프로그램 제품.

33. 본 문서에 설명된 방법, 장치 또는 시스템.

제2 세트의 조항들은 이전 섹션, 예를 들어, 예시적인 구현 1에 개시된 기술들의 특정 특징들 및 양태들을 설명한다.

1. 비디오 프로세싱 방법(예를 들면, 도 13에 도시된 방법(1300))으로서, 규칙에 따라 비디오의 현재 비디오 블록의 샘플들의 이웃 샘플들에 대한 가중 인자들을 도출하는 단계(1302); 및 현재 비디오 블록과 비디오의 코딩된 표현 사이의 변환을 수행하는 단계(1304)를 포함하며, 규칙은, 현재 비디오 블록이 플래너 모드 또는 DC 모드를 사용하여 코딩되는 경우에, 가중 인자들이 현재 비디오 블록의 샘플들의 위치들 또는 현재 비디오 블록의 치수 중 적어도 하나로부터 결정된다는 것을 지정하며, 현재 비디오 블록은 이웃 샘플들을 현재 비디오 블록의 예측 신호와 결합시키는 위치 의존적 인트라 예측(PDPC) 방법을 사용하여 현재 비디오 블록의 개선된 예측 신호를 생성하고, 샘플의 예측 신호의 가중 인자는 샘플의 대응하는 이웃 샘플들의 가중 인자들에 기초하여 결정되는, 방법.

2. 조항 1의 방법으로서, 규칙은, 샘플 위치 (x, y)에 대해, 위쪽 이웃 샘플들에 대한 가중 인자가 wT[y] = N1　　>>　　(　(　y　　<<　　N2　)　　>>　　nScale　)이라는 것을 지정하고, nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이고 N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.

3. 조항 2의 방법으로서, 위쪽 이웃 샘플들은 위치 (x, -1)을 포함하는, 방법.

4. 조항 1의 방법으로서, 규칙은, 샘플 위치 (x, y)에 대해, 좌측 이웃 샘플들에 대한 가중 인자가 wL[x] = N1 >> ( ( x << N2 ) >> nScale )이라는 것을 지정하고, nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이고 N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.

5. 조항 4의 방법으로서, 좌측 이웃 샘플들은 위치 (-1, y)를 포함하는, 방법.

6. 조항 1의 방법으로서, 규칙은, 샘플 위치 (x, y)에 대해, 좌측 상단 이웃 샘플에 대한 가중 인자가 0이라는 것을 지정하는, 방법.

7. 조항 6의 방법으로서, 좌측 상단 이웃 샘플의 위치는 (-1, -1)인, 방법.

8. 조항 2 내지 조항 5 중 어느 조항의 방법으로서, N1 = 32이거나, N2 = 1이거나, N3 =2이거나, N4 = 2인, 방법.

9. 조항 1 내지 조항 8 중 어느 조항의 방법으로서, 변환을 수행하는 단계는 현재 비디오 블록으로부터 코딩된 표현을 생성하는 단계를 포함하는, 방법.

10. 조항 1 내지 조항 8 중 어느 조항의 방법으로서, 변환을 수행하는 단계는 코딩된 표현으로부터 현재 비디오 블록을 생성하는 단계를 포함하는, 방법.

11. 조항 1 내지 조항 10 중 어느 하나 이상의 조항에 기재된 방법을 구현하도록 구성된 프로세서를 포함하는 비디오 프로세싱 장치.

12. 프로그램 코드를 저장하는 컴퓨터 판독 가능 매체로서, 프로그램 코드는, 실행될 때, 프로세서로 하여금 조항 1 내지 조항 10 중 어느 하나 이상의 조항에 기재된 방법을 구현하게 하는, 컴퓨터 판독 가능 매체.

본 문서에 설명된 개시된 및 다른 해결책들, 예들, 실시예들, 모듈들 및 기능 동작들은 디지털 전자 회로로, 또는 본 문서에 개시된 구조 및 그의 구조적 등가물을 포함한, 컴퓨터 소프트웨어, 펌웨어, 또는 하드웨어로, 또는 이들 중 하나 이상의 조합으로 구현될 수 있다. 개시된 및 다른 실시예들은 하나 이상의 컴퓨터 프로그램 제품으로서, 즉 데이터 프로세싱 장치에 의해 실행하기 위해 또는 데이터 프로세싱 장치의 동작을 제어하기 위해 컴퓨터 판독 가능 매체에 인코딩된 컴퓨터 프로그램 명령어들의 하나 이상의 모듈로서 구현될 수 있다. 컴퓨터 판독 가능 매체는 머신 판독 가능 저장 디바이스, 머신 판독 가능 저장 기판, 메모리 디바이스, 머신 판독 가능 전파 신호를 실현하는 조성물(composition of matter), 또는 이들 중 하나 이상의 조합일 수 있다. “데이터 프로세싱 장치"라는 용어는, 예로서, 프로그래밍 가능 프로세서, 컴퓨터, 또는 다수의 프로세서들 또는 컴퓨터들을 포함한, 데이터를 프로세싱하기 위한 모든 장치들, 디바이스들, 및 머신들을 포괄한다. 장치들은, 하드웨어 외에도, 문제의 컴퓨터 프로그램을 위한 실행 환경을 생성하는 코드, 예를 들면, 프로세서 펌웨어, 프로토콜 스택, 데이터베이스 관리 시스템, 운영 체제, 또는 이들 중 하나 이상의 조합을 구성하는 코드를 포함할 수 있다. 전파 신호는 인공적으로 생성된 신호, 예를 들면, 적합한 수신기 장치로 전송하기 위한 정보를 인코딩하기 위해 생성되는 머신 생성(machine-generated) 전기, 광학, 또는 전자기 신호이다.

컴퓨터 프로그램(프로그램, 소프트웨어, 소프트웨어 애플리케이션, 스크립트 또는 코드라고도 함)은, 컴파일되는(compiled) 또는 인터프리트되는(interpreted) 언어를 포함한, 임의의 형태의 프로그래밍 언어로 작성될 수 있고, 독립형 프로그램(stand-alone program)으로서 또는 모듈, 컴포넌트, 서브루틴 또는 컴퓨팅 환경에서 사용하기에 적절한 다른 유닛으로서를 포함하여, 임의의 형태로 배포(deploy)될 수 있다. 컴퓨터 프로그램이 파일 시스템에서의 파일에 반드시 대응하는 것은 아니다. 프로그램은 다른 프로그램들 또는 데이터(예를 들면, 마크업 언어 문서에 저장된 하나 이상의 스크립트)를 보유하는 파일의 일 부분에, 문제의 프로그램에 전용된 단일 파일에, 또는 다수의 통합 파일들(coordinated files)(예를 들면, 하나 이상의 모듈, 서브 프로그램(sub program), 또는 코드 부분(portion of code)을 저장하는 파일들)에 저장될 수 있다. 컴퓨터 프로그램은 하나의 컴퓨터에서 또는 하나의 사이트에 위치하거나 다수의 사이트들에 걸쳐 분산되고 통신 네트워크에 의해 상호연결되는 다수의 컴퓨터들에서 실행되도록 배포될 수 있다.

본 문서에 설명된 프로세스들 및 논리 흐름들은 입력 데이터에 대해 작동하여 출력을 생성하는 것에 의해 기능들을 수행하기 위해 하나 이상의 컴퓨터 프로그램을 실행하는 하나 이상의 프로그래밍 가능 프로세서에 의해 수행될 수 있다. 프로세스들 및 논리 흐름들이 또한 특수 목적 로직 회로, 예를 들면, FPGA(field programmable gate array) 또는 ASIC(application specific integrated circuit)에 의해 수행될 수 있고, 장치들이 또한 이들로서 구현될 수 있다.

컴퓨터 프로그램의 실행에 적합한 프로세서들은, 예로서, 범용 및 특수 목적 마이크로프로세서들 둘 모두, 및 임의의 종류의 디지털 컴퓨터의 임의의 하나 이상의 프로세서를 포함한다. 일반적으로, 프로세서는 판독 전용 메모리 또는 랜덤 액세스 메모리 또는 둘 모두로부터 명령어들 및 데이터를 수신할 것이다. 컴퓨터의 필수 요소들은 명령어들을 수행하기 위한 프로세서 및 명령어들과 데이터를 저장하기 위한 하나 이상의 메모리 디바이스이다. 일반적으로, 컴퓨터는 또한 데이터를 저장하기 위한 하나 이상의 대용량 저장 디바이스, 예를 들면, 자기, 자기 광학 디스크들, 또는 광학 디스크들을 포함할 것이거나, 또는 이들로부터 데이터를 수신하거나 이들로 데이터를 전송하도록 동작 가능하게 결합될 것이거나, 또는 둘 모두일 것이다. 그렇지만, 컴퓨터가 그러한 디바이스들을 가질 필요는 없다. 컴퓨터 프로그램 명령어들과 데이터를 저장하기에 적합한 컴퓨터 판독 가능 매체는, 예로서, 반도체 메모리 디바이스, 예를 들면, EPROM, EEPROM, 및 플래시 메모리 디바이스; 자기 디스크, 예를 들면, 내장형 하드 디스크 또는 이동식 디스크; 자기 광학 디스크; 및 CD ROM과 DVD-ROM 디스크를 포함한, 모든 형태의 비휘발성 메모리, 매체 및 메모리 디바이스를 포함한다. 프로세서 및 메모리는 특수 목적 로직 회로에 의해 보완되거나 그에 통합될 수 있다.

본 특허 문서가 많은 구체적 사항들을 포함하지만, 이들은 임의의 주제의 범위 또는 청구될 수 있는 것의 범위에 대한 제한으로서 해석되어서는 안되며, 오히려 특정 기술들의 특정의 실시예들에 특정적일 수 있는 특징들에 대한 설명으로서 해석되어야 한다. 개별적인 실시예들의 맥락에서 본 특허 문서에 설명되는 특정한 특징들이 또한 단일 실시예에서 조합하여 구현될 수 있다. 이와 달리, 단일 실시예의 맥락에서 설명되는 다양한 특징들이 또한 다수의 실시예들에서 개별적으로 또는 임의의 적합한 하위 조합으로 구현될 수 있다. 더욱이, 특징들이 특정 조합들로 기능하는 것으로 위에서 설명되고 심지어 처음에 그 자체로서 청구될 수 있지만, 청구된 조합으로부터의 하나 이상의 특징이 일부 경우에 그 조합으로부터 제거될 수 있고, 청구된 조합은 하위 조합 또는 하위 조합의 변형에 관한 것일 수 있다.

유사하게, 동작들이 도면에서 특정의 순서로 묘사되지만, 이것은, 바람직한 결과들을 달성하기 위해, 그러한 동작들이 도시된 특정의 순서로 또는 순차적 순서로 수행되어야 하거나, 모든 예시된 동작들이 수행되어야 하는 것을 요구하는 것으로 이해되어서는 안 된다. 더욱이, 본 특허 문서에 설명된 실시예들에서 다양한 시스템 컴포넌트들의 분리가 모든 실시예들에서 그러한 분리를 요구하는 것으로서 이해되어서는 안 된다.

단지 몇 가지 구현들 및 예들이 설명되고 다른 구현들, 향상들 및 변형들이 이 특허 문서에 설명되고 예시된 것에 기초하여 이루어질 수 있다.

Claims

비디오 프로세싱 방법으로서,
규칙에 따라 비디오의 현재 비디오 블록의 샘플들의 이웃 샘플들에 대한 가중 인자들을 도출하는 단계; 및
상기 현재 비디오 블록과 상기 비디오의 코딩된 표현 사이의 변환을 수행하는 단계
를 포함하며,
상기 규칙은, 상기 현재 비디오 블록이 플래너 모드 또는 DC 모드를 사용하여 코딩되는 경우에, 상기 가중 인자들이 상기 현재 비디오 블록의 샘플들의 위치들 또는 상기 현재 비디오 블록의 치수 중 적어도 하나로부터 결정된다는 것을 지정하며,
상기 현재 비디오 블록은 상기 이웃 샘플들을 상기 현재 비디오 블록의 예측 신호와 결합시키는 위치 의존적 인트라 예측(PDPC) 방법을 사용하여 상기 현재 비디오 블록의 개선된 예측 신호를 생성하고,
샘플의 예측 신호의 가중 인자는 상기 샘플의 대응하는 이웃 샘플들의 가중 인자들에 기초하여 결정되는, 방법.
제1항에 있어서, 상기 규칙은, 샘플 위치 (x, y)에 대해, 위쪽 이웃 샘플들에 대한 가중 인자가 wT[y] = N1　　>>　　(　(　y　　<<　　N2　)　　>>　　nScale　)이라는 것을 지정하고, nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이고 N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.
제2항에 있어서, 상기 위쪽 이웃 샘플들은 위치 (x, -1)을 포함하는, 방법.
제1항에 있어서, 상기 규칙은, 샘플 위치 (x, y)에 대해, 좌측 이웃 샘플들에 대한 가중 인자가 wL[x] = N1 >> ( ( x << N2 ) >> nScale )이라는 것을 지정하고, nScale = (　(　Log2(　W　) + Log2(　H　)　-　N3　)　　>>　　N4　)이고 N1, N2, N3 및 N4는 음이 아닌 정수들인, 방법.
제4항에 있어서, 상기 좌측 이웃 샘플들은 위치 (-1, y)를 포함하는, 방법.
제1항에 있어서, 상기 규칙은, 샘플 위치 (x, y)에 대해, 좌측 상단 이웃 샘플에 대한 가중 인자가 0이라는 것을 지정하는, 방법.
제6항에 있어서, 상기 좌측 상단 이웃 샘플의 위치는 (-1, -1)인, 방법.
제2항 내지 제5항 중 어느 한 항에 있어서, N1 = 32이거나, N2 = 1이거나, N3 =2이거나, N4 = 2인, 방법.
제1항 내지 제8항 중 어느 한 항에 있어서, 상기 변환을 수행하는 상기 단계는 상기 현재 비디오 블록으로부터 상기 코딩된 표현을 생성하는 단계를 포함하는, 방법.
제1항 내지 제8항 중 어느 한 항에 있어서, 상기 변환을 수행하는 상기 단계는 상기 코딩된 표현으로부터 상기 현재 비디오 블록을 생성하는 단계를 포함하는, 방법.
제1항 내지 제10항 중 어느 한 항에 기재된 방법을 구현하도록 구성된 프로세서를 포함하는 비디오 프로세싱 장치.
프로그램 코드를 저장하는 컴퓨터 판독 가능 매체로서, 상기 프로그램 코드는, 실행될 때, 프로세서로 하여금 제1항 내지 제10항 중 어느 한 항에 기재된 방법을 구현하게 하는, 컴퓨터 판독 가능 매체.