KR20220032634A - 인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치 - Google Patents

인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치 Download PDF

Info

Publication number
KR20220032634A
KR20220032634A KR1020227005925A KR20227005925A KR20220032634A KR 20220032634 A KR20220032634 A KR 20220032634A KR 1020227005925 A KR1020227005925 A KR 1020227005925A KR 20227005925 A KR20227005925 A KR 20227005925A KR 20220032634 A KR20220032634 A KR 20220032634A
Authority
KR
South Korea
Prior art keywords
mode
intra
chroma block
modes
mapped
Prior art date
Application number
KR1020227005925A
Other languages
English (en)
Inventor
만-슈 치앙
치아-밍 차이
치-웨이 수
Original Assignee
에이치에프아이 이노베이션 인크.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에이치에프아이 이노베이션 인크. filed Critical 에이치에프아이 이노베이션 인크.
Publication of KR20220032634A publication Critical patent/KR20220032634A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

비디오 인코더 또는 디코더를 위한 비디오 처리 방법은 4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록의 입력 데이터를 수신하는 단계, 상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하는 단계, 상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하는 단계, 상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드를 광각 인트라 예측 매핑으로 선택적으로 대체하는 단계, 광각 인트라 예측 매핑 후 상기 매핑된 인트라 모드에 따라 인트라 예측자를 도출하는 단계, 및 상기 인트라 예측자에 따라 상기 현재 크로마 블록을 인코딩 또는 디코딩하는 단계를 포함한다. 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55이다.

Description

인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치
관련 출원에 대한 상호 참조
본 발명은 2019년 8월 6일에 출원된 발명의 명칭이 "상이한 블록 비율들에 대한 인트라 예측 모드 매핑(Intra prediction mode mapping for different block ratios)"인 미국 가특허 출원 일련 번호 62/883,149에 대한 우선권을 주장한다. 상기 미국 가특허 출원은 이로써 그 전체 내용이 인용에 의해 포함된다.
발명의 분야
본 발명은 인트라 예측에 의해 비디오 데이터를 인코딩 또는 디코딩하는 것에 관한 것이다. 특히, 본 발명은 인트라 예측 모드 매핑에 의해 도출된 인트라 예측자들을 사용하여 비디오 데이터를 인코딩 및 디코딩하는 것에 관한 것이다.
고효율 비디오 코딩(High Efficiency Video Coding, HEVC)은 JCT-VC(Joint Collaborative Team on Video Coding)에 의해 개발된 새로운 국제 비디오 코딩 표준이다. HEVC는 하이브리드 블록 기반 모션 보상 DCT(Discrete Cosine Transform)와 같은 변환 코딩 아키텍처에 기초한다. 코딩 유닛(CU)이라고 불리는, HEVC에서의 압축을 위한 기본 유닛은 2Nx2N 정사각형 블록이고, 각각의 CU는 미리 정의된 최소 크기에 도달할 때까지 4개의 더 작은 CU로 재귀적으로 분할될 수 있다. 각각의 CU는 1개, 2개, 또는 4개의 다수의 예측 유닛(PU)을 포함한다. 각각의 PU는 HEVC에서 인트라 예측 또는 인터 예측에 의해 코딩된다. 인터 예측에 의해 코딩된 각각의 PU에 대해, 1개 또는 2개의 시간 복원된 참조 픽처가 모션 보상된 예측자를 생성하기 위해 사용된다. HEVC에는 스킵(Skip) 모드, 병합(Merge) 모드, 및 AMVP(Advance Motion Vector Prediction) 모드를 포함한 3개의 상이한 인터 예측 모드가 있다. 인트라 예측은 초기 픽처를 생성하는 데 또는 랜덤 액세스를 위해 또는 오류 전파의 경감을 위해 I-픽처 또는 I-블록들을 주기적으로 삽입하기 위해 유용하다. 인트라 예측은 픽처 내의 또는 픽처 영역 내의 평활 영역, 수직선 또는 에지, 수평선 또는 에지, 대각선 또는 에지와 같은 픽처 내의 공간적 특징들을 이용하도록 설계된다. 인트라 예측은 모션 또는 장면 변화가 많은 영역들에도 유용하다. 인트라 예측에 의해 코딩될 PU는 처리된 이웃 블록들 내의 샘플들에 의존한다. 예를 들어, 비디오 픽처 또는 픽처 영역 내의 블록들이 상부에서 하부로 그리고 좌측에서 우측으로 한 행씩 순차적으로 처리되면, 현재 블록의 상부의 이웃 블록들과 좌측의 이웃 블록들이 현재 블록 내의 샘플들을 예측하기 위한 인트라 예측자를 형성하기 위해 사용될 수 있다.
HEVC 표준은 33개의 각도 모드, DC 모드, 및 평면 모드를 포함한 35개의 인트라 예측 모드를 지원한다. 도 1은 HEVC 표준에서 지원되는 33개의 각도 인트라 예측 모드에 대한 예측 방향들을 예시하는데, 여기서 H는 수평 모드를 표현하고 V는 수직 모드를 표현한다. 33개의 각도 인트라 예측 모드는 H, H+1~H+8, H-1~H-7, V, V+1~V+8, V-1~V-8로 표현된다. 인트라 예측에 의해 코딩된 또는 코딩될 현재 블록에 대한 인트라 예측자가 인트라 평활화 필터, 인트라 예측 및 인트라 그래디언트 필터를 포함한 3개의 단계에 의해 생성된다. 도 2는 현재 블록에 대한 인트라 예측자를 도출하기 위해 인트라 평활화 필터에 의해 필터링된 예시적인 참조 샘플들을 예시한다. 현재 블록(20)에 대한 인트라 예측자를 계산하기 전에 전처리 단계로서 현재 블록(20)의 참조 샘플들(22)에 평활화 필터 동작이 적용된다. 평활화 필터 동작은 저역 통과 특성을 갖는 FIR(Finite Impulse Response) 인트라 평활화 필터 [1 2 1] >> 2를 현재 블록(20)의 좌측 이웃 열과 상부 이웃 행에 속하는 참조 샘플들(22)에 적용하는 것에 대응한다. 평활화 필터 동작은 FIR 필터를 적용하는 것에 의해 인트라 예측 모드들 중 일부에 의해 도입된 불연속성을 저감시킨다. 이 평활화 필터 동작은 인트라 예측 모드와 현재 블록의 크기에 따라 적응적으로 적용된다.
인트라 예측의 두 번째 단계는 35개의 인트라 예측 모드 중에서 선택된 하나의 인트라 예측 모드에 따라 이웃 참조 샘플들로부터 인트라 예측자를 도출하는 것이다. 인트라 예측 모드는 인코더에 의해 결정되고 비트스트림에서 시그널링되어 대응하는 디코더가 비트스트림으로부터 인트라 예측 모드를 파싱할 수 있다. 각도 모드가 선택될 때 선택된 각도 모드의 예측 방향에 따라 참조 샘플들로부터 샘플들을 외삽하는 것에 의해 현재 블록 내의 각각의 샘플의 값이 예측된다. 평면 모드가 선택될 때 이웃 블록들의 경계 샘플들로부터 도출된 수평 및 수직 평활 그래디언트를 갖는 진폭 표면을 가정하여 현재 블록 내의 각각의 샘플의 값이 계산된다. DC 모드가 선택될 때 현재 블록의 각각의 샘플들의 값은 참조 샘플들의 평균이다.
세 번째 단계에서 현재 블록의 좌측 경계와 상부 경계에 있는 샘플들에 인트라 그래디언트 필터가 적용된다. 인트라 그래디언트 필터를 적용하는 개념은 인트라 예측의 품질을 개선하기 위해 인트라 예측 방향을 따라 그래디언트 정보를 이용하는 것이다. 도 3a는 수직 방향 모드 또는 수평 방향 모드에 의해 예측된 예측자에 인트라 그래디언트 필터링을 적용하는 것을 예시한다. 도 3a에서, 예측 픽셀 Pij는 행 i 및 열 j의 예측자를 나타내고, AL은 현재 블록의 좌측 상부 코너에 있는 복원된 샘플을 표현하고, Li는 현재 블록의 좌측 이웃 열에 있는 복원된 샘플을 표현한다. 인트라 그래디언트 필터를 적용한 후 수학식 1에 의해 각각의 예측 픽셀 Pij에 대한 최종 예측 픽셀 P'ij가 계산된다.
Figure pct00001
여기서 α는 0에서 1까지의 분수이고 수평 변위 j에 따라 선택되는데, 예를 들어, j=0일 때 α=1/2, j=1일 때 α=1/4이다. 수평 모드에 의해 예측된 현재 블록에 대해서는, 각각의 예측 픽셀 Pij에 대한 최종 예측 픽셀 P'ij가 수학식 2에 의해 계산된다.
Figure pct00002
여기서 Aj는 상부 행 내의 복원된 샘플이다. 방향 모드들 v+1~v+8 및 h+1~h+8에 대해서는, 복원된 샘플 Li 또는 Aj를 대체하기 위해 인트라 예측의 방향을 따라 복원된 샘플 Li 또는 Aj의 대응하는 참조 샘플 RLi 또는 RAj가 먼저 획득된다. 대응하는 참조 샘플 RLi 또는 RAj가 정수 픽셀의 위치에 있지 않을 때 그것을 생성하기 위해 현재 블록의 상부 행 또는 좌측 열에 있는 정수 픽셀들의 보간이 적용된다. 도 3b는 v+1~v+8 방향 모드들에 대해 인트라 그래디언트 필터를 적용하는 예를 예시한다. 수학식 3에 따라 각각의 예측 픽셀 Pij로부터 최종 예측 픽셀 P'ij가 계산된다.
Figure pct00003
수직 모드와 유사하게, α는 0에서 1까지의 분수이고 인트라 예측의 방향과 수평 변위 j에 따라 선택된다. h+1~h+8 방향 모드들에 대해서는, 수학식 4에 따라 각각의 예측 픽셀 Pij로부터 최종 예측 픽셀 P'ij가 계산되고, 여기서 α는 0에서 1까지의 분수이고 인트라 예측의 방향과 수직 변위 i에 따라 선택된다.
Figure pct00004
인트라 그래디언트 필터는 모든 방향 모드 v+1 ~ v+8 및 h+1~h+8에서 적용될 수 있지만, 인트라 그래디언트 필터는 인트라 예측 모드가 HEVC 표준에서 DC, 수평, 또는 수직 모드인 경우에만 적용된다. 선택된 인트라 예측 모드가 DC 모드인 경우 현재 블록의 첫 번째 행과 첫 번째 열의 샘플들이 인트라 그래디언트 필터에 의해 필터링된다. 선택된 인트라 예측 모드가 수평 모드인 경우 첫 번째 행의 샘플들이 인트라 그래디언트 필터에 의해 필터링되고, 선택된 인트라 예측 모드가 수직 모드인 경우 첫 번째 열의 샘플들이 인트라 그래디언트 필터에 의해 필터링된다.
MPM 리스트 생성 HEVC 표준에서 지원되는 35개의 인트라 예측 모드 중, 3개의 인트라 예측 모드가 현재 블록에 대한 현재 인트라 예측 모드를 예측하기 위한 최고 확률 모드(Most Probable Mode, MPM)들로서 간주된다. 3개의 MPM에는 좌측 이웃 블록과 상부 이웃 블록의 주변 인트라 예측 모드들이 포함된다. 2개의 이웃 인트라 예측 모드가 동일한 방향 모드이거나, 2개의 이웃 인트라 예측 모드 중 하나만이 이용 가능하고 방향 모드인 경우, 이 이웃 방향 모드 바로 옆에 있는 2개의 방향도 3개의 MPM에 포함된다. DC 모드 및 평면 모드는 또한 좌측 또는 상부 이웃 인트라 예측 모드가 방향성이 아닌 경우, 또는 이웃 블록들이 이용 가능하지 않거나 인트라 예측으로 코딩되지 않은 경우 MPM들로 간주된다. 현재 인트라 예측 모드가 3개의 MPM 중 하나와 동일한지 여부를 지시하기 제1 MPM 플래그가 시그널링되고, 그렇다면, 3개의 MPM 중 어느 것이 선택되었는지를 지시하기 위해 다른 플래그가 송신되고; 제1 MPM 플래그가 거짓이면, 현재 인트라 예측 모드는 비-MPM 모드이고 5-비트 고정 길이 코드워드를 사용하여 명시적으로 시그널링된다.
도 1에 도시된 33개의 각도 모드는 더 많은 또는 더 적은 각도 모드를 갖는 일반적인 경우로 확장될 수 있고, 여기서 각도 모드들 각각은 모드 H+k 또는 모드 V+k로 표현될 수 있고, 여기서 H는 수평 모드의 방향을 표현하고, V는 수직 모드의 방향을 표현하고, k=0, +-1, +-2, .. +-K이다. 인트라 예측을 위한 65개의 각도 모드의 예가 도 4에 도시되어 있고, 여기서 k는 -16 내지 16이다. 모드 H-16 및 모드 V-16은 동일한 모드이고, 여기서 이 모드는 현재 블록의 좌측 상부 코너를 가리키는 예측 방향을 나타낸다. 도 4는 HEVC 표준의 원래의 33개의 각도 모드 사이에 추가 32개의 각도 모드를 갖는 65개의 각도 인트라 예측 모드를 예시한다. 도 4에서의 65개의 각도 모드는 블록의 좌측 경계에서 하부에서 상부로 모드 H+16 내지 H-15와 블록의 상부 경계에서 좌측에서 우측으로 모드 V-16 내지 V+16을 포함한다. 이들 더 조밀한 방향 인트라 예측 모드들은 모든 블록 크기에 그리고 루마 및 크로마 성분들 양쪽 모두에 대해 적용될 수 있다.
광각 인트라 예측 매핑(Wide-Angle Intra Prediction Mapping) 곧 다가올 신흥 비디오 코딩 표준 VVC(Versatile Video Coding)는 다양한 비-정사각형 블록 파티션들을 지원한다. 따라서 광각 인트라 예측(WAIP) 모드 매핑은 비-정사각형 블록들에 대한 인트라 예측을 개선하기 위해 개발되었다. 몇몇 종래의 각도 인트라 예측 모드들은 WAIP 모드 매핑 프로세스 후에 수정된 인트라 예측 모드들로 적응적으로 대체된다. 종래의 각도 인트라 예측 방향들은 시계 방향으로 45도에서 -135도까지 정의된다. 특정 원래의 인트라 예측 모드들은 인트라 예측을 위한 WAIP 모드 매핑 후 수정된 인트라 예측 모드들로 대체될 것이지만, 원래의 인트라 예측 모드 인덱스는 여전히 비디오 인코더에 의해 시그널링된다. 대응하는 비디오 디코더는 원래의 인트라 예측 모드 인덱스들을 파싱하고 이들 원래의 인트라 예측 모드 인덱스를 수정된 인트라 예측 모드들로 다시 매핑한다. 따라서 인트라 예측 모드들의 총수는 변함없고 인트라 모드 코딩 방법도 여전히 변함없다. WAIP 모드 매핑을 지원하기 위해, 길이가 2W+1인 상부 참조 샘플들과 길이가 2H+1인 좌측 참조 샘플들이 도 5a 및 도 5b에서 정의된다. 도 5a에서, 현재 블록(52)은 모드 2의 각도보다 큰 각도를 갖는 좌측 참조 샘플에 의해 예측될 수 있다. 도 5b에서, 현재 블록(54)은 모드 66의 각도보다 큰 각도를 갖는 상부 참조 샘플에 의해 예측될 수 있다. 원래의 인트라 예측 모드들을 대체하기 위해 사용되는 수정된 인트라 예측 모드들의 수는 블록의 종횡비에 따라 달라진다. 종횡비는 블록의 폭 대 높이 비율을 표현한다. 각각의 종횡비에 대응하는 수정된 인트라 예측 모드들로 대체될 각도 인트라 예측 모드들이 표 1에 예시되어 있다.
Figure pct00005
WAIP 모드 매핑 프로세스의 입력들은 인트라 예측 모드를 특정하는 변수 predModeIntra, 폭을 특정하는 변수 nW, 높이를 특정하는 변수 nH, 및 컬러 성분을 특정하는 변수 cIdx를 포함한다. WAIP 모드 매핑 프로세스의 출력은 수정된 인트라 예측 모드 predModeIntra이다. ISP(Intra Sub-Partition) 모드가 현재 블록을 코딩하는 데 사용되거나 현재 블록에 대한 변수 cIdx가 0과 동등하지 않으면 변수 nW 및 nH는 변환 블록 폭 nTbW 및 변환 블록 높이 nTbH와 동등하다. 그렇지 않으면, 변수 nW 및 nH는 코딩 블록 폭 nCbW 및 코딩 블록 높이 nCbH와 동등하다. 현재 블록이 크로마 블록일 때 변수 cIdx는 0과 동등하지 않은 반면 현재 블록이 루마 블록일 때 변수 cIdx는 0과 동등하다. 그 후 abs(Log2(nW/nH))에 의해 2개의 변수 nW 및 nH에 따라 변수 whRatio가 도출된다. WAIP 모드 매핑 프로세스는 다음 3개의 조건: nW가 nH보다 큰 것, predModeIntra가 2와 동등하거나 그보다 큰 것, 및 predModeIntra가 (whRatio > 1) ? (8 + 2*whRatio) : 8보다 작은 것 모두가 참인지를 체크하는 것을 포함한다. 위의 3개의 조건이 모두가 참이면 수정된 인트라 예측 모드 predModeIntra는 (predModeIntra + 65)와 동등하게 설정된다. 그렇지 않으면, WAIP 모드 매핑 프로세스는 다음 3개의 조건: nH가 nW보다 큰 것, predModeIntra가 66과 동등하거나 그보다 작은 것, 및 predModeIntra가 (whRatio > 1) ? (60 - 2*whRatio) : 60보다 큰 것이 참인지를 추가로 체크한다. 위의 3개의 조건이 모두가 참이면 수정된 인트라 예측 모드 predModeIntra는 (predModeIntra - 67)과 동등하게 설정된다.
인트라 예측에서 코딩된 또는 코딩될 비디오 데이터를 처리하기 위한 비디오 인코딩 또는 디코딩 방법 또는 장치가 비디오 코딩 시스템에서 구현된다. 상기 비디오 코딩 시스템의 실시예들은 4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록과 연관된 입력 데이터를 수신한다. 상기 비디오 코딩 시스템은 상기 현재 크로마 블록이 다이렉트 모드(DM)에 의해 코딩된 또는 코딩될 것인지를 결정하고, 상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하고, 그 후 상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑한다. 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55이다. 상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드는 WAIP 모드 매핑으로 선택적으로 대체된다. WAIP 모드 매핑 후 상기 매핑된 인트라 모드에 따라 상기 현재 크로마 블록에 대한 인트라 예측자가 도출되고, 상기 인트라 예측자에 따라 상기 현재 크로마 블록이 인코딩 또는 디코딩된다.
일 실시예에서, 모드 57의 상기 매핑된 인트라 모드는 상기 현재 크로마 블록의 폭 대 높이 비율이 1:4일 때 좌측 하부 코너를 가리키는 예측 방향에 대응하고, 그 후 모드 57의 상기 매핑된 인트라 모드는 WAIP 모드 매핑 후 모드 -10으로 대체된다. 다른 실시예에서, 모드 55의 상기 매핑된 인트라 모드는 상기 현재 크로마 블록의 폭 대 높이 비율이 1:8일 때 좌측 하부 코너를 가리키는 예측 방향에 대응하고, 그 후 모드 55의 상기 매핑된 인트라 모드는 WAIP 모드 매핑 후 모드 -12로 대체된다.
상기 현재 크로마 블록은 DM에 의해 인코딩 또는 디코딩되고, 상기 루마 블록은 상기 현재 크로마 블록의 동위치 블록이다. 일 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:4일 때 57, 18, 44, 50, 및 56이다. 다른 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:8일 때 55, 18, 46, 50, 및 54이다. 다른 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:16일 때 53, 18, 48, 50, 및 52이다.
일 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 2:1일 때 8, 18, 38, 50, 및 7이다. 다른 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 4:1일 때 12, 18, 24 50, 및 11이다. 다른 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 8:1일 때 14, 18, 22, 50, 및 13이다. 또 다른 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 16:1일 때 16, 18, 20, 50, 및 15이다.
WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:2일 때 모드 61 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:4일 때 모드 57 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:8일 때 모드 55 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:16일 때 모드 53 내지 66이고,
WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 2:1일 때 모드 2 내지 7이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 4:1일 때 모드 2 내지 11이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 8:1일 때 모드 2 내지 13이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 16:1일 때 모드 2 내지 15이다.
일부 실시예들에서, 상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하는 단계는 매핑 테이블을 룩업하는 것에 의해 실행되고, 상기 매핑 테이블은 폭 대 높이 비율에 관계없이 DM으로 코딩된 또는 코딩될 모든 크로마 블록들에 대해 사용된다. 일 실시예에서, 상기 매핑 테이블을 룩업하는 것에 의해 모드 61 또는 모드 62의 상기 루마 모드는 모드 57에 매핑되고 모드 57 또는 58의 상기 루마 모드는 모드 55에 매핑된다. 일 실시예에 따라 모드 2 내지 7의 루마 모드는 제각기 모드 61 내지 66에 매핑된다.
본 개시의 양태들은 또한 4:2:2 컬러 포맷에 의해 코딩된 현재 픽처에서 코딩되거나 인트라 예측에 의해 코딩된 또는 코딩될 현재 크로마 블록과 연관된 입력 데이터를 수신하고, 상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하고, 상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하고, 상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드를 WAIP 모드 매핑으로 선택적으로 대체하고, WAIP 모드 매핑 후 상기 매핑된 인트라 모드에 따라 인트라 예측자를 도출하고, 상기 인트라 예측자에 따라 상기 현재 크로마 블록을 인코딩 또는 디코딩하기 위한 비디오 코딩 시스템에서의 장치를 제공한다. 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55이다.
본 개시의 양태들은 또한 장치의 처리 회로로 하여금 4:2:2 컬러 포맷으로 코딩된 현재 픽처에서 인트라 예측에 의해 현재 크로마 블록의 비디오 데이터를 인코딩 또는 디코딩하게 하기 위한 프로그램 명령어들을 저장하는 비일시적 컴퓨터 판독가능 매체를 제공한다. 동위치 루마 블록의 루마 모드가 매핑된 인트라 모드에 매핑되고, 여기서 상기 루마 모드가 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55이다. 제안된 크로마 모드 매핑은 좌측 하부 코너를 가리키는 크로마 블록에 대한 매핑된 인트라 모드가 크로마 블록에 대해 임의의 가능한 매핑된 인트라 모드와는 별개의 모드임을 보장한다. 특정 실시예들에 대한 다음 설명을 검토하면 본 발명의 다른 양태들 및 특징들이 본 기술분야의 통상의 기술자들에게 명백해질 것이다.
다음의 도면들을 참조하여 예들로서 제안된 본 개시의 다양한 실시예들이 상세히 설명될 것이고, 도면들에서 같은 번호들은 같은 요소들을 참조한다.
도 1은 HEVC 표준에서 지원되는 33개의 각도 인트라 예측 모드를 예시한다.
도 2는 현재 블록에 대한 인트라 예측자를 도출하기 위해 인트라 평활화 필터에 의해 필터링된 예시적인 참조 샘플들을 예시한다.
도 3a는 인트라 예측에서 수직 모드에 의해 예측된 예측자에 인트라 그래디언트 필터링을 적용하는 것을 예시한다.
도 3b는 인트라 예측에서 각도 모드에 의해 예측된 예측자에 인트라 그래디언트 필터링을 적용하는 것을 예시한다.
도 4는 65개의 각도 인트라 예측 모드의 예를 예시한다.
도 5a 및 도 5b는 2개의 예시적인 직사각형 블록에 적용되는 광각 인트라 예측을 위한 참조 샘플들을 예시한다.
도 6a 및 도 6b는 루마 및 크로마 성분들에 대한 인트라 모드 도출을 보여주는 단순화된 블록도들을 예시한다.
도 7a는 4:2:2 컬러 포맷으로 코딩된 정사각형 루마 블록을 예시하고; 도 7b는 종래의 크로마 모드 매핑 방법에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시하고; 도 7c는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시한다.
도 8a는 4:2:2 컬러 포맷으로 코딩된 1:2의 폭 대 높이 비율을 갖는 루마 블록을 예시하고; 도 8b는 종래의 크로마 모드 매핑 방법에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시하고; 도 8c는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시한다.
도 9a는 4:2:2 컬러 포맷으로 코딩된 1:4의 폭 대 높이 비율을 갖는 루마 블록을 예시하고; 도 9b는 종래의 크로마 모드 매핑 방법에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시하고; 도 9c는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 대응하는 크로마 블록을 예시한다.
도 10a는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 1:16의 폭 대 높이 비율을 갖는 크로마 블록을 예시하고; 도 10b는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 2:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시하고; 도 10c는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 4:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시하고; 도 10d는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 8:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시하고; 도 10e는 본 발명의 실시예에 따른 크로마 모드 매핑에 의해 도출된 매핑된 인트라 모드들을 갖는 16:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시한다.
도 11은 본 발명의 실시예에 따른 예시적인 비디오 처리 방법을 예시하는 흐름도이다.
도 12는 본 발명의 실시예들에 따른 비디오 처리 방법을 포함하는 비디오 인코딩 시스템에 대한 예시적인 시스템 블록도를 예시한다.
도 13은 본 발명의 실시예들에 따른 비디오 처리 방법을 포함하는 비디오 디코딩 시스템에 대한 예시적인 시스템 블록도를 예시한다.
본 명세서의 도면들에서 일반적으로 기술되고 예시된 바와 같은, 본 발명의 모듈들 및 컴포넌트들은 매우 다양한 상이한 구성들로 배열 및 설계될 수 있음을 쉽게 이해할 것이다. 따라서, 도면들에 표현된 바와 같은, 본 발명의 시스템들 및 방법들의 실시예들에 대한 다음의 보다 상세한 설명은, 청구된 바와 같은, 본 발명의 범위를 제한하기 위해 의도된 것이 아니고, 단지 본 발명의 선택된 실시예들을 대표하는 것이다.
본 명세서 전체에 걸쳐 "실시예", "일부 실시예들", 또는 유사한 표현에 대한 언급은 실시예들과 관련하여 기술된 특정 특징, 구조, 또는 특성이 본 발명의 적어도 하나의 실시예에 포함될 수 있음을 의미한다. 따라서, 본 명세서 전체에 걸쳐 다양한 곳들에서 "실시예에서" 또는 "일부 실시예들에서"라는 문구들의 출현은 반드시 모두가 동일한 실시예를 언급하는 것은 아니고, 이들 실시예는 개별적으로 또는 하나 이상의 다른 실시예와 함께 구현될 수 있다. 더욱이, 기술된 특징들, 구조들, 또는 특성들은 하나 이상의 실시예에서 임의의 적합한 방식으로 조합될 수 있다. 그러나, 관련 기술 분야의 숙련자는 본 발명이 특정 세부 사항들 중 하나 이상이 없이도, 또는 다른 방법들, 컴포넌트들 등과 함께 실시될 수 있음을 인식할 것이다. 다른 예들에서, 본 발명의 양태들을 모호하게 하는 것을 피하기 위해 잘 알려진 구조들, 또는 동작들은 상세하게 도시되거나 설명되지 않는다.
도 6a 및 도 6b는 4:2:2 컬러 포맷으로 루마 및 크로마 성분들에 대한 인트라 모드 도출을 예시하는 단순화된 블록도들을 예시한다. 도 6a에 도시된 바와 같이, 루마 블록의 루마 모드는 루마 블록에 대한 최종 인트라 모드를 생성하기 위해 광각 인트라 예측(WAIP) 모드 매핑 모듈(62)에 의해 처리된다. 루마 블록의 루마 모드는 해당 루마 모드가 MPM들 중 하나에 속하는지에 따라 MPM 시그널링 또는 고정 길이 시그널링에 의해 비디오 비트스트림에서 시그널링된다. 루마 블록의 폭 대 높이 비율에 기초하여, 표 1에 열거된 모드들만이 WAIP 모드 매핑 후 대응하는 광각 모드들로 대체될 것이다. 도 6b에 도시된 바와 같이, 크로마 블록에 대해 다이렉트 모드(DM)가 선택되면, 대응하는 루마 모드이 크로마 블록에 대한 매핑된 인트라 모드를 생성하도록 4:2:2 크로마 인트라 모드 매핑 모듈(64)에 의해 변환된다. 대응하는 루마 인트라 모드는 크로마 블록의 동위치 루마 블록에 대한 비디오 비트스트림에서 시그널링되거나 그로부터 파싱된다. 그 후 매핑된 인트라 모드는 크로마 블록에 대한 최종 인트라 모드를 생성하도록 WAIP 모드 매핑 모듈(66)에 의해 처리된다. 크로마 블록이 DM에 의해 코딩되어 있지 않으면, 크로마 블록의 크로마 인트라 모드가 결정되고 그 후 크로마 블록에 대한 최종 인트라 모드를 생성하도록 WAIP 모드 매핑 모듈(66)에 의해 처리된다. 크로마 인트라 모드는 WAIP 모드 매핑 후 최종 인트라 모드 대신 비디오 비트스트림에서 시그널링된다. 크로마 블록의 폭 대 높이 비율에 기초하여, 표 1에 열거된 인트라 모드들만이 WAIP 모드 매핑 후 대응하는 광각 모드들로 대체될 것이다. WAIP 모드 매핑 후 루마 블록 또는 크로마 블록에 대한 최종 인트라 모드는 인트라 예측자를 생성하기 위해 사용된다.
1/2와 동등한 비율을 갖는 크로마 블록들에 대한 인트라 모드 매핑 크로마에 대한 인트라 모드 매핑은 4:2:2 컬러 포맷이 선택될 때 다이렉트 모드(DM)에서 코딩된 또는 코딩될 크로마 블록에 대한 크로마 인트라 모드를 도출하기 위해 사용된다. 구체적으로 말하면, 인트라 모드 매핑은 대응하는 루마 블록의 인트라 예측 모드를 크로마 블록에 대한 크로마 인트라 모드로 변환한다. 인트라 예측 모드는 크로마 블록에 대응하는 루마 블록에 대한 시그널링된 루마 인트라 예측 모드이다. 표 2 및 표 3은 HEVC 범위 확장 및 VTM-5.0에 대해 제각기 인트라 모드 매핑에서 사용되는 인트라 모드 매핑 테이블들이고, 여기서 VTM-5.0은 VVC 드래프트 5의 소프트웨어이다. HEVC 범위 확장 및 VTM-5.0에 대해 제각기 인트라 예측에서 사용되는 33개의 인트라 각도 모드와 65개의 인트라 각도 모드가 있다. 표 2 및 표 3에서, modeIdx는 크로마에 대한 인트라 모드 매핑 전 대응하는 루마 블록에 대한 인트라 예측 모드를 지시하고, IntraPredModeC는 4:2:2 컬러 포맷의 크로마 블록에 대한 매핑된 인트라 예측 모드를 지시한다. 4:2:2 컬러 포맷의 비-정사각형 크로마 블록들을 처리하기 위해서는, 크로마에 대한 인트라 모드 매핑 후 인트라 예측을 개선하여 IntraPredModeC를 수정된 인트라 예측 모드로 추가 변경하기 위해 WAIP 모드 매핑이 또한 사용된다.
Figure pct00006
Figure pct00007
도 7a는 정사각형 루마 블록의 예를 예시하고 도 7b는 VTM5.0에서 정의된 표 3에 따라 도출된 몇몇 매핑된 모드들을 갖는 4:2:2 컬러 포맷의 대응하는 크로마 블록을 예시한다. 루마 블록이 1:1과 동등한 폭 대 높이 비율을 가지므로, 대응하는 크로마 블록은 1:2와 동등한 폭 대 높이 비율을 갖는다. 크로마 블록에 대한 일부 예시적인 블록 크기들은 64x128, 32x64, 16x32, 8x16, 및 4x8 샘플들이다. 크로마 블록의 크로마 인트라 예측 모드를 도출하기 위해서는, 매핑 테이블에 따라 대응하는 루마 인트라 예측 모드 modeIdx로부터 크로마 블록에 대한 매핑된 인트라 예측 모드 IntraPredModeC가 먼저 도출된다. 그 후 폭 대 높이 비율에 따라 수정된 인트라 예측 모드에 추가로 매핑하기 위해 WAIP 모드 매핑 프로세스가 IntraPredModeC에 선택적으로 적용된다. 수정된 인트라 예측 모드는 크로마 블록에 대한 예측 샘플들을 생성하기 위해 사용된다. 도 7a 및 도 7b에 도시된 바와 같이, 66과 동등한 modeIdx가 60에 매핑되고, 8과 동등한 modeIdx가 2에 매핑되고, 34와 동등한 modeIdx가 40에 매핑된다. 모드 2와 모드 7 사이의 임의의 modeIdx에 대해, 매핑된 인트라 예측 모드 IntraPredModeC는 항상 2이다.
Figure pct00008
도 7c는 VTM6.0에서 정의된 표 4에 따라 도출된 몇몇 매핑된 모드들을 갖는 4:2:2 컬러 포맷의 대응하는 크로마 블록을 예시한다. 표 4에 따라 그리고 도 7c에 도시된 바와 같이, modeIdx가 2와 동등할 때 매핑된 인트라 예측 모드 IntraPredModeC는 61과 동등하고, modeIdx가 7과 동등할 때 매핑된 인트라 예측 모드 IntraPredModeC는 66과 동등하다. WAIP 모드 매핑 프로세스에 기초하여, 매핑된 인트라 예측 모드 IntraPredModeC가 61과 66 사이의 임의의 모드와 동등할 때, WAIP 모드 매핑 프로세스는 IntraPredModeC를 -6과 -1 사이의 모드에 매핑한다. 예를 들어, 크로마 블록의 IntraPredModeC가 61과 동등하고 크로마 CB 폭과 크로마 CB 높이의 비율이 1:2일 때, 인트라 예측 모드는 모드 -6으로 대체된다. 도 7c에 도시된 바와 같이, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 1/2의 비율을 갖는 크로마 블록에 대한 매핑된 인트라 모드들은 제각기 모드 61, 18, 40, 50, 및 60이다. 이들 매핑된 인트라 모드 중, 좌측 하부 코너에서의 매핑된 인트라 모드만이 WAIP 모드 매핑 프로세스 후 모드 -6으로 대체된다. 나머지 매핑된 모드들은 WAIP 모드 매핑 후 여전히 변함없다.
1/4와 동등한 비율을 갖는 크로마 블록들에 대한 인트라 모드 매핑 도 8a는 4:2:2 컬러 포맷에 대해 1:2와 동등한 폭 대 높이 비율을 갖는 루마 블록의 예를 예시하고 도 8b 및 도 8c는 1:4와 동등한 폭 대 높이 비율을 갖는 대응하는 크로마 블록들을 예시한다. 예를 들어, 도 8b 또는 도 8c에서 크로마 블록의 크기는 16x64, 8x32, 또는 4x16 샘플들이다. 도 8b에 도시된 크로마 블록에 대한 매핑된 인트라 모드들은 VTM6.0에서 정의된 표 4에 따라 4:2:2 크로마 인트라 모드 매핑으로부터 도출된다. 도 8b에 도시된 바와 같이 좌측 하부 코너의 크로마 블록에 대한 매핑된 인트라 모드들 및 우측 상부 코너에서의 매핑된 인트라 모드들은 모두 56과 동등하다는 점에 유의한다. 1:4와 동등한 폭 대 높이 비율을 갖는 크로마 블록에 대해, 광각 모드 변환 후 최종 인트라 모드는 이 모드가 우측 상부 코너에 대응하므로 IntraPreModeC가 56과 동등할 때 여전히 56이다. 본 발명의 실시예들은 1:4와 동등한 폭 대 높이 비율을 갖는 크로마 블록들에 대해 좌측 하부 코너에서 그리고 우측 상부 코너에서 매핑된 인트라 모드들을 구별하기 위해 크로마에 대한 4:2:2 인트라 모드 매핑을 수정한다. 크로마에 대한 수정된 4:2:2 인트라 모드 매핑 테이블의 실시예가 표 5에 나타내어져 있다. 표 5에 나타내어진 바와 같은 매핑 테이블은 DM으로 코딩된 또는 코딩될 모든 크로마 블록들에 대해 사용되는데, 다시 말해서, 이 매핑 테이블은 모든 종류의 폭 대 높이 비율들에 대한 것이다. 표 4와 비교하여, 표 5에서 대부분의 매핑된 인트라 모드들 IntraPredModeC는 볼드체의 숫자들을 제외하고는 변함없다. 도 8c에 도시된 크로마 블록에 대한 매핑된 인트라 모드들은 본 발명의 실시예에 따른 수정된 4:2:2 모드 매핑 테이블로부터 도출된다. 좌측 하부 코너에서의 도 8c에 도시된 크로마 블록에 대한 매핑된 인트라 모드는 57이고, 이는 우측 상부 코너에서의 매핑된 인트라 모드와는 별개의 모드이다. DM에 의해 코딩된 1:4와 동등한 폭 대 높이 비율을 갖는 크로마 블록에 대해, 대응하는 루마 모드 modeIdx가 61과 동등할 때, 매핑된 인트라 예측 모드 IntraPreModeC는 57이다. WAIP 모드 매핑은 1:4와 동등한 폭 대 높이 비율을 갖는 크로마 블록에 대해 모드 57과 모드 66 사이의 임의의 매핑된 인트라 모드를 모드 -10 내지 -1로 변환한다. 인코더와 디코더 양쪽 모두에서, 모드 57의 매핑된 인트라 예측 모드는 광각 모드 변환 후 모드 -10으로 대체되고, 인트라 예측에서 모드 -10에 따라 크로마 블록에 대한 인트라 예측자가 도출된다. 도 8c에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 1/4의 비율을 갖는 크로마 블록에 대한 매핑된 인트라 모드들은 제각기 모드 57, 18, 44, 50, 및 56이다. 이들 매핑된 인트라 모드 중, 좌측 하부 코너에서의 매핑된 인트라 모드만이 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 광각 모드로 대체되고, 나머지 매핑된 모드들은 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 여전히 변함없다.
Figure pct00009
1/8과 동등한 비율을 갖는 크로마 블록들에 대한 인트라 모드 매핑 1/4의 폭 대 높이 비율을 갖는 크로마 블록들과 유사하게, 1/8의 폭 대 높이 비율을 갖는 크로마 블록에 대한 예측 방향이 좌측 하부 코너를 가리키고 있을 때, 매핑된 인트라 예측 모드(54)는 종래의 크로마 모드 매핑 방법에 따른 우측 상부 코너를 가리키는 예측 방향에 대한 매핑된 인트라 예측 모드와 동일하다. 표 5에 나타내어진 바와 같은 수정된 4:2:2 모드 매핑 테이블도 1/8의 폭 대 높이 비율을 갖는 크로마 블록들에 대한 이러한 단점을 해결하였다. 도 9a는 4:2:2 컬러 포맷으로 코딩된 1/4와 동등한 폭 대 높이 비율을 갖는 루마 블록의 예를 예시하고; 도 9b 및 도 9c는 1/8과 동등한 폭 대 높이 비율을 갖는 대응하는 크로마 블록들을 예시한다. 예를 들어, 도 9b 또는 도 9c에서 크로마 블록의 크기는 8x64 또는 4x32 샘플들이다. 도 9b에 도시된 크로마 블록에 대한 매핑된 인트라 모드들은 VTM6.0에서 정의된 표 4에 따라 4:2:2 크로마 모드 매핑으로부터 도출된다. 도 9b에서, 좌측 하부 코너 및 우측 상부 코너의 크로마 블록에 대한 매핑된 인트라 모드들은 양쪽 모두 54이다. 도 9c에 도시된 크로마 블록에 대한 매핑된 인트라 모드들은 본 발명의 실시예에 따른 수정된 4:2:2 크로마 인트라 모드 매핑으로부터 도출된다. 도 9c에서, 예측 방향이 좌측 하부 코너를 가리키고 있을 때, 크로마 블록에 대한 매핑된 인트라 모드는 55이고, 이는 이 크로마 블록에 대한 다른 모든 가능한 매핑된 인트라 모드들에 비해 별개의 모드이다. 크로마 블록에 대한 인트라 예측자를 도출하기 위한 최종 인트라 모드는 예측 방향이 좌측 하부 코너를 가리키고 있을 때 광각 모드 변환 후 -12이다. WAIP 모드 매핑으로 대체될 매핑된 인트라 모드들은 1:8의 폭 대 높이 비율을 갖는 크로마 블록들에 대해 모드 55 내지 66이다. 매핑된 인트라 모드 55 내지 66은 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 -12 내지 -1로 변환된다. 도 9c에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 1/8의 비율을 갖는 크로마 블록에 대한 매핑된 인트라 모드들은 제각기 모드 55 18, 46, 50, 및 54이다. 이들 매핑된 인트라 모드 중, 좌측 하부 코너에서의 매핑된 인트라 모드만이 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 -2로 대체되고, 나머지 매핑된 모드들은 WAIP 모드 매핑 후 여전히 변함없다.
다른 비율들을 갖는 크로마 블록들에 대한 인트라 모드 매핑 본 발명의 일부 실시예들은 또한 다른 폭 대 높이 비율들을 갖는 크로마 블록들에 대한 인트라 모드 매핑을 고려한다. 예에서, 도 10a는 1:16과 동등한 폭 대 높이 비율을 갖는 크로마 블록을 예시한다. 크로마 블록의 예시적인 크기는 64x4 샘플들이다. 도 10a에 도시된 바와 같이. 1:16과 동등한 폭 대 높이 비율을 갖는 크로마 블록에 대해, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 매핑된 인트라 모드들은 제각기 모드 53, 18, 48, 50, 및 52이다. WAIP 모드 매핑으로 대체될 매핑된 인트라 모드들은 폭 대 높이 비율이 1:16일 때 모드 53 내지 66이고, 이들 매핑된 인트라 모드들은 제각기 모드 -14 내지 -1로 대체된다. 좌측 하부 코너에서의 매핑된 인트라 모드만이 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 -14로 대체된다. 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 나머지 매핑된 인트라 모드들은 광각 모드들이 아니므로, 이들 모드는 WAIP 모드 매핑에 의해 변경되지 않는다.
도 10b는 2:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시하는데, 예를 들어, 크로마 블록의 블록 크기는 128x64, 64x32, 32x16, 16x8, 또는 8x4 샘플들이다. 4:2:2 컬러 포맷의 대응하는 루마 블록의 폭 대 높이 비율은 4:1인데, 예를 들어, 대응하는 루마 블록의 블록 크기는 128x32, 64x16, 32x8, 또는 16x4 샘플들이다. 도 10b에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 크로마 블록에 대한 매핑된 인트라 모드들은 제각기 모드 8, 18, 38, 50, 및 7이다. WAIP 모드 매핑으로 대체될 매핑된 인트라 모드들은 폭 대 높이 비율이 2:1일 때 모드 2 내지 7이고, 이들 매핑된 인트라 모드들은 모드 67 내지 72로 대체된다. 도 10b에 도시된 이들 매핑된 인트라 모드 중, 우측 상부 코너에서의 것만이 광각 모드에 속하므로, 우측 상부 코너에서의 매핑된 인트라 모드는 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 72로 대체된다.
도 10c는 4:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시하는데, 예를 들어, 크로마 블록의 블록 크기는 128x32, 64x16, 32x8, 또는 16x4 샘플들이다. 4:2:2 컬러 포맷의 대응하는 루마 블록의 폭 대 높이 비율은 8:1이다. 도 10c에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 크로마 블록에 대한 매핑된 인트라 모드들은 제각기 모드 12, 18, 24, 50, 및 11이다. WAIP 모드 매핑으로 변환될 매핑된 인트라 모드들은 폭 대 높이 비율이 4:1일 때 모드 2 내지 11이고, 이들 매핑된 인트라 모드들은 모드 67 내지 76으로 대체된다. 우측 상부 코너에서의 매핑된 인트라 모드는 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 76으로 대체된다.
도 10b 및 도 10c와 유사하게, 도 10d 및 도 10e는 제각기 8:1 및 16:1의 폭 대 높이 비율을 갖는 크로마 블록을 예시한다. 예를 들어, 도 10d에서의 크로마 블록의 블록 크기는 64x8 또는 32x4 샘플들인 반면, 도 10e에서의 크로마 블록의 블록 크기는 64x4 샘플들이다. 도 10d에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 크로마 블록에 대한 매핑된 인트라 모드들은 모드 14, 18, 22, 50, 및 13이다. WAIP 모드 매핑으로 변환될 매핑된 인트라 모드들은 폭 대 높이 비율이 8:1일 때 모드 2 내지 13이다. 그 후 우측 상부 코너에서의 매핑된 인트라 모드는 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 78로 대체된다. 도 10e에 도시된 바와 같은 실시예에서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서의 크로마 블록에 대한 매핑된 인트라 모드들은 모드 16, 18, 20, 50, 및 15이다. WAIP 모드 매핑으로 변환될 매핑된 인트라 모드들은 폭 대 높이 비율이 16:1일 때 모드 2 내지 15이다. 그 후 우측 상부 코너에서의 매핑된 인트라 모드는 인트라 예측자 생성을 위한 WAIP 모드 매핑 후 모드 80으로 대체된다.
대표적인 예시적인 흐름도 도 11은 본 발명의 실시예들에 따른 다이렉트 모드(DM)에 의해 코딩된 또는 코딩될 현재 크로마 블록을 처리하기 위한 비디오 처리 방법을 예시하는 흐름도이다. 단계 S1102에서는 비디오 인코더 또는 디코더가 4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록의 입력 데이터를 수신한다. 단계 S1104에서는, 현재 크로마 블록에 대해 동위치 루마 블록의 루마 모드가 결정된다. 단계 S1106에서는 비디오 인코더 또는 디코더가 루마 모드를 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑한다. 본 발명의 다양한 실시예들에서, 좌측 하부 코너에서의 매핑된 인트라 모드는 임의의 폭 대 높이 비율에 대해 좌측 상부 코너에서의 매핑된 인트라 모드와는 항상 별개의 모드이다. 하나의 특정 실시예에서, 루마 모드가 모드 61일 때 매핑된 인트라 모드는 모드 57이다. 예를 들어, 1:4의 폭 대 높이 비율을 갖는 현재 크로마 블록에 대해, 모드 61의 루마 모드는 좌측 하부 코너를 가리키는 예측 방향에 대응하고, 좌측 하부 코너에서의 매핑된 인트라 모드는 모드 57이고, 이는 좌측 상부 코너에 대한 매핑된 인트라 모드 56과는 상이하다. 다른 예에서, 1:8의 폭 대 높이 비율을 갖는 현재 크로마 블록에 대해, 모드 57의 루마 모드는 좌측 하부 코너를 가리키는 예측 방향에 대응하고, 좌측 하부 코너에서의 매핑된 인트라 모드는 모드 55이고, 이는 좌측 상부 코너에 대한 매핑된 인트라 모드 54와는 상이하다. 단계 S1108에서는, 비디오 인코더 또는 디코더가 현재 크로마 블록의 폭 대 높이 비율에 따라 매핑된 인트라 모드가 WAIP 모드 매핑으로 대체되어야 하는지 체크한다. 단계 S1108에 대한 대답이 "예"이면, 단계 S1110에서 매핑된 인트라 모드는 WAIP 모드 매핑으로 대체되고, 예를 들어, 모드 57의 매핑된 인트라 모드는 현재 크로마 블록의 폭 대 높이 비율이 1:4일 때 모드 -10으로 대체되고, 또는 모드 55의 매핑된 인트라 모드는 현재 크로마 블록의 폭 대 높이 비율이 1:8일 때 모드 -12로 대체된다. 단계 S1110에서의 WAIP 모드 매핑 후, 단계 S1112에서 대체된 매핑된 인트라 모드를 사용하여 현재 크로마 블록에 대한 인트라 예측자를 도출한다. 단계 S1108에 대한 대답이 "아니오"이면, 단계 S1112에서 매핑된 인트라 모드를 직접 사용하여 현재 크로마 블록에 대한 인트라 예측자를 도출한다. 단계 S1114에서는, 비디오 인코더 또는 디코더가 단계 S1112에서 도출된 인트라 예측자에 따라 현재 크로마 블록을 인코딩 또는 디코딩한다.
루마 및 크로마에 대한 인트라 모드의 상대 방향을 유사하게 유지 본 발명의 일부 다른 실시예들은 크로마 성분을 코딩하기 위해 DM이 선택될 때 루마 및 크로마 성분에 대한 인트라 예측 모드들의 상대 방향을 유사하게 유지한다. 예를 들어, 인트라 예측 모드의 방향이 동위치 루마 코딩 블록(CB)에 대해 좌측 하부 코너로부터일 때 - 이는 폭 대 높이 비율이 2와 동등할 때 모드 8임 -, 그 방향이 크로마 CB에 대해 좌측 하부 코너로부터인 인트라 예측 모드를 사용하는 것이 바람직하다. 이 예에서, 크로마 CB에 대한 인트라 예측 모드는 폭 대 높이 비율이 1/2와 동등할 때 모드 -6이다. 종래의 DM 코딩에 비해, DM이 선택될 때 동위치 루마 CB의 인트라 예측 모드는 크로마 CB에 대한 인트라 예측 모드에 직접 할당된다. 크로마 블록에 대한 인트라 예측 모드는 WAIP 모드 매핑에 의해 크로마 CB 폭 및 높이에 따라 변경된다. 인트라 예측 모드는 WAIP 모드 매핑 후 인트라 예측을 수행하기 위해 사용된다. 본 발명의 실시예들은 인트라 모드 매핑을 적용하여 루마 및 크로마 성분들에 대한 인트라 예측 모드의 상대 방향들을 유사하게 만든다.
일 실시예에서, 인트라 모드 매핑은 다음 조건들 중 적어도 하나에 적용된다. 일 조건에서, 크로마 분리 트리(Chroma Separate Tree, CST)가 사용되고 크로마 DM이 선택되고, 루마 및 크로마 블록들의 폭 대 높이 비율이 상이하면 루마 및 크로마 성분들에 대한 상대 방향들이 상이하다. 크로마 분리 트리가 사용될 때 크로마 CB들 및 루마 CB들은 상이한 분할 트리들에 있다. 다른 조건에서, 참조 이웃 블록과 현재 블록의 폭 대 높이 비율이 상이하면 MPM 리스트를 생성하기 위해 참조 블록과 현재 블록에 대한 상대 방향들이 상이하다.
이전 실시예들에서는, WAIP 모드 매핑 전에 인트라 모드 매핑이 적용되지만, 일부 다른 실시예들에서는, WAIP 모드 매핑 후에 인트라 모드 매핑이 적용된다.
인트라 모드 매핑의 일부 실시예들에서는, 동위치 또는 참조 블록의 폭 대 높이 비율이 현재 블록의 폭 대 높이 비율보다 클 때 현재 블록에 대한 인트라 예측 모드가 수직 방향에 가깝다. 일 실시예에서, 하나의 변수 DiffLogRatio는 abs(log2(ratioWH1))-abs(log2(ratioWH2))로서 정의되고, 여기서 ratioWH1은 동위치 또는 참조 블록에 대한 폭 대 높이 비율이고 ratioWH2는 현재 블록에 대한 폭 대 높이 비율이다. 이 실시예에서는, 표 3이 재귀적으로 직접 룩업되고 표 3을 사용한 후에 매번 DiffLogRatio가 1씩 감소된다. 이 재귀적 룩업 동작들은 다음 조건들 중 적어도 하나가 충족될 때 중지된다. 조건 1은 룩업 전의 모드가 룩업 후의 모드와 동일할 때 충족된다. 조건 2는 DiffLogRatio가 0과 동등할 때 충족된다.
다른 실시예에서는, 1:2와 동등한 폭 및 높이 비율을 갖는 크로마 블록이 DM으로 코딩되고, 동위치 루마 블록의 루마 인트라 모드가 모드 34이다. 루마 인트라 모드의 예측 방향은 좌측 상부 코너를 가리키고 있다. 크로마 블록에 대해 모드 34를 직접 사용하는 대신에, 이 실시예에 따르면 크로마 블록에 대해 모드 40이 사용된다.
다른 실시예에서는, 동위치 또는 참조 블록에 대한 폭 대 높이 비율이 현재 블록에 대한 폭 대 높이 비율보다 작을 때 인트라 모드 매핑을 적용하여 현재 블록에 대한 인트라 예측 모드를 수평 방향에 가깝게 만든다. 하나의 변수 DiffLogRatio는 abs(log2(ratioWH1)) - abs(log2(ratioWH2))로서 정의되고, 여기서 ratioWH1은 동위치 또는 참조 블록에 대한 폭 대 높이 비율이고 ratioWH2는 현재 블록에 대한 폭 대 높이 비율이다. 이 실시예는 표 3을 재귀적으로 직접 룩업하고 표 3을 룩업한 후에 매번 DiffLogRatio가 1씩 감소된다. 이 재귀적 룩업 동작들은 다음 조건들 중 적어도 하나가 충족될 때 중지된다. 제1 조건은 룩업 전의 모드가 룩업 후의 모드와 동일할 때 충족된다. 제2 조건은 변수 DiffLogRatio가 0과 동등할 때 충족된다. 원래의 인트라 예측 모드와 인트라 모드 매핑 후의 인트라 예측 모드 간의 차이(diffPredMode)가 획득된다. 인트라 예측 모드는 원래의 인트라 예측 모드와 diffPredMode를 입력으로 하여 변경될 수 있다. 원래의 인트라 예측 모드의 모드 수가 수직 방향의 모드 수보다 작으면, 인트라 예측 모드는 원래의 인트라 예측 - diffPredMode로 설정되고; 그렇지 않고 원래의 인트라 예측 모드의 모드 수가 수직 방향의 모드 수보다 크면, 인트라 예측 모드는 원래의 인트라 예측 + diffPredMode로 설정된다.
다른 실시예에서, 인트라 예측 모드는 인트라 모드 매핑 후에 방향 모드들의 범위로 제한된다. 예를 들어, 방향 모드들의 범위는 총 35개의 인트라 예측 모드에 대해 [2, 33] 또는 총 67개의 인트라 예측 모드에 대해 [2, 65]이다. 또 다른 실시예에서, 현재 블록의 인트라 예측 모드는 현재 블록에 대한 광각 모드들의 범위로 제한된다. 다른 실시예에서, 인트라 모드 매핑은 각도 모드들에 대해서만 사용되고 평면 및 DC 모드들과 같은 비-각도 모드들에 대해서는 사용되지 않는다.
일부 실시예들에서, 인트라 모드 매핑 후의 인트라 예측 모드가 임의의 디폴트 크로마 모드와 동등하지 않은지 확인하기 위한 체크가 요구된다. 예를 들어, 디폴트 크로마 모드들은 CCLM(Cross-Component Linear Model), CCLM_LEFT, 및 CCLM_TOP, 수평 모드, 수직 모드, 및 대각선 모드와 같은 선형 모델(LM) 패밀리 모드들 중 하나 또는 이들의 조합을 포함한다. 인트라 예측 모드가 디폴트 크로마 모드들 중 하나와 동등하면 인트라 예측 모드 + 1 또는 인트라 예측 모드 - 1과 같은 인접 인트라 예측 모드가 대신 사용된다. 이전 실시예들에서의 CB의 단위는 TB의 단위로 대체될 수 있다.
대표적인 블록도들 도 12는 본 발명의 비디오 처리 방법들 중 하나 이상을 구현하는 비디오 인코더(1200)에 대한 예시적인 시스템 블록도를 예시한다. 현재 크로마 블록이 다이렉트 모드(DM)에 따라 이웃 복원된 샘플들에 의해 인코딩되어야 한다. 현재 크로마 블록은 4:2:2 컬러 포맷으로 코딩된 현재 픽처 내에 있다. 인트라 예측 모듈(1210)은 현재 크로마 블록의 동위치 루마 블록의 루마 모드를 결정한다. 루마 모드는 표 5에 나타내어진 바와 같은 매핑 테이블과 같은 매핑 테이블에 따라 매핑된 인트라 모드에 매핑된다. 본 발명의 실시예들에 따라 루마 모드가 모드 61일 때 매핑된 인트라 모드는 모드 57이고 루마 모드가 모드 57일 때 매핑된 인트라 모드는 모드 55이다. 인트라 예측 모듈(1210)은 현재 크로마 블록의 폭 대 높이 비율에 기초하여 매핑된 인트라 모드를 WAIP 모드 매핑으로 선택적으로 대체한다. 인트라 예측 모듈(1210)은 WAIP 모드 매핑 후 매핑된 인트라 모드에 따라 현재 크로마 블록의 참조 샘플들로부터 인트라 예측자를 생성한다. 인터 예측 모듈(1212)은 인터 예측에 의해 코딩될 블록들에 대해 모션 추정(ME) 및 모션 보상(MC)을 수행하여 다른 픽처 또는 픽처들로부터의 비디오 데이터에 기초한 인터 예측자들을 제공한다. 인트라 예측 모듈(1210) 또는 인터 예측 모듈(1212)은 선택된 예측자를 가산기 모듈(1216)에 공급하여 예측 잔차들이라고도 불리는 예측 오차들을 형성한다. 현재 크로마 블록이 인트라 예측에 의해 인코딩되므로, 인트라 예측 모듈(1210)은 현재 크로마 블록에 대한 인트라 예측자를 가산기 모듈(1216)에 송신하여 현재 크로마 블록의 예측 잔차들을 생성한다.
현재 크로마 블록의 예측 잔차들을 변환(T) 모듈(1218)과 이어서 양자화(Q) 모듈(1220)에 의해 추가로 처리한다. 그 후 변환 및 양자화된 잔차 신호를 엔트로피 인코더(1234)에 의해 인코딩하여 인코딩된 비디오 비트스트림을 형성한다. 그 후 인코딩된 비디오 비트스트림에 부가 정보를 채운다. 현재 크로마 블록의 변환 및 양자화된 잔차 신호를 역양자화(IQ) 모듈(1222) 및 역변환(IT) 모듈(1224)에 의해 처리하여 예측 잔차들을 복구한다. 도 12에 도시된 바와 같이, 예측 잔차들은 복원된 샘플들을 생성하기 위해 복원(REC) 모듈(1226)에서 선택된 예측자에 다시 추가하는 것에 의해 복구된다. 복원된 샘플들은 참조 픽처 버퍼(Ref. Pict. Buffer)(1232)에 저장되어 다른 픽처들의 예측을 위해 사용될 수 있다. REC(1226)로부터의 복원된 샘플들은 인코딩 처리로 인해 다양한 손상을 겪을 수 있고, 결과적으로, 픽처 품질을 더욱 향상시키기 위해 참조 픽처 버퍼(1232)에 저장하기 전에 복원된 샘플들에 인-루프 처리 디블로킹 필터(DF)(1228) 및 인-루프 필터(1230)를 적용한다. 인-루프 처리 DF(1228) 및 인-루프 필터(1230)에 대한 정보와 연관된 구문을 인코딩된 비디오 비트스트림에 통합시키기 위해 엔트로피 인코더(1234)에 제공한다.
도 12의 비디오 인코더(1200)에 대응하는 비디오 디코더(1300)가 도 13에 도시되어 있다. 인코딩된 비디오 비트스트림을 비디오 디코더(1300)에 입력하고 엔트로피 디코더(1310)에 의해 디코딩하여 변환 및 양자화된 잔차 신호 및 다른 시스템 정보를 파싱 및 복구한다. 디코더(1300)가 인터 예측 모듈(1314)에서 모션 보상 예측만을 필요로 한다는 점을 제외하고는 디코더(1300)의 디코딩 프로세스는 인코더(1200)에서의 복원 루프와 유사하다. 각각의 블록을 인트라 예측 모듈(1312) 또는 인터 예측 모듈(1314)에 의해 디코딩한다. 스위치 모듈(1316)이 디코딩된 모드 정보에 따라 인트라 예측 모듈(1312)로부터의 인트라 예측자 또는 인터 예측 모듈(1314)로부터의 인터 예측자를 선택한다. 인트라 예측 모듈(1312)은 DM으로 코딩된 현재 크로마 블록에 대한 동위치 블록의 루마 모드를 디코딩한다. 루마 모드는 본 발명의 다양한 실시예들에 따라 매핑된 인트라 모드에 매핑되고, 여기서 좌측 하부 코너를 가리키는 예측 방향에 대한 매핑된 인트라 모드는 좌측 상부 코너를 가리키는 예측 방향에 대한 매핑된 인트라 모드와는 별개의 모드이다. 예를 들어, 1:4의 폭 대 높이 비율을 갖는 현재 크로마 블록에 대해 루마 모드가 모드 61일 때 매핑된 인트라 모드는 모드 57이고, 1:8의 폭 대 높이 비율을 갖는 현재 크로마 블록에 대해 루마 모드가 모드 57일 때 매핑된 인트라 모드는 모드 55이다. 현재 크로마 블록의 폭 대 높이 비율에 기초하여 매핑된 인트라 모드는 WAIP 모드 매핑으로 선택적으로 대체된다. 인트라 예측 모듈(1312)은 WAIP 모드 매핑 후 매핑된 인트라 모드에 따라 현재 크로마 블록의 참조 샘플들로부터 현재 크로마 블록에 대한 인트라 예측자를 도출한다. 각각의 블록과 연관된 변환 및 양자화된 잔차 신호를 역양자화(IQ) 모듈(1320) 및 역변환(IT) 모듈(1322)에 의해 복구한다. 복구된 변환 및 양자화된 잔차 신호는 복원된 샘플들을 생성하기 위해 REC 모듈(1318)에서 예측자를 다시 추가하는 것에 의해 복원된다. 복원된 샘플들을 DF(1324) 및 인-루프 필터(1326)에 의해 추가로 처리하여 최종 디코딩된 비디오를 생성한다. 현재 디코딩된 픽처가 참조 픽처이면, 현재 디코딩된 픽처의 복원된 샘플들도 디코딩 순서에 따라 나중 픽처들을 위해 참조 픽처 버퍼(1328)에 저장된다.
도 12 및 도 13에서의 비디오 인코더(1200) 및 비디오 디코더(1300)의 다양한 컴포넌트들은 하드웨어 컴포넌트들, 메모리에 저장된 프로그램 명령어들을 실행하도록 구성된 하나 이상의 프로세서, 또는 하드웨어와 프로세서의 조합에 의해 구현될 수 있다. 예를 들어, 프로세서는 프로그램 명령어들을 실행하여 DM으로 코딩된 또는 코딩될 각각의 크로마 블록에 대해 루마 모드를 매핑된 인트라 모드에 매핑하는 것을 제어한다. 프로세서에는 단일 또는 다수의 처리 코어가 장착되어 있다. 일부 예들에서, 프로세서는 프로그램 명령어들을 실행하여 인코더(1200) 및 디코더(1300) 내의 일부 컴포넌트들에서의 기능들을 수행하고, 프로세서와 전기적으로 결합된 메모리는 프로그램 명령어들, 블록들의 복원된 이미지들에 대응하는 정보, 및/또는 인코딩 또는 디코딩 프로세스 동안의 중간 데이터를 저장하기 위해 사용된다. 일부 실시예들에서 메모리는 반도체 또는 솔리드-스테이트 메모리, 랜덤 액세스 메모리(RAM), 판독 전용 메모리(ROM), 하드 디스크, 광 디스크, 또는 다른 적합한 저장 매체와 같은 비일시적 컴퓨터 판독가능 매체를 포함한다. 메모리는 위에 열거된 비일시적 컴퓨터 판독가능 매체 중 둘 이상의 조합일 수도 있다. 도 12 및 도 13에 도시된 바와 같이, 인코더(1200) 및 디코더(1300)는 동일한 전자 디바이스에서 구현될 수 있고, 따라서 동일한 전자 디바이스에서 구현된다면 인코더(1200) 및 디코더(1300)의 다양한 기능 컴포넌트들이 공유되거나 재사용될 수 있다. 예를 들어, 도 12에서의 복원 모듈(1226), 역변환 모듈(1224), 역양자화 모듈(1222), 디블로킹 필터(1228), 인-루프 필터(1230), 및 참조 픽처 버퍼(1232) 중 하나 이상은 제각기 도 13에서의 복원 모듈(1318), 역변환 모듈(1322), 역양자화 모듈(1320), 디블로킹 필터(1324), 인-루프 필터(1326), 및 참조 픽처 버퍼(1328)로서 기능하기 위해 사용될 수도 있다.
비디오 코딩 시스템을 위한 처리 방법의 실시예들은 위에 기술된 처리를 수행하기 위해 비디오 압축 칩에 통합된 회로 또는 비디오 압축 소프트웨어에 통합된 프로그램 코드로 구현될 수 있다. 예를 들어, 각각의 인트라 코딩된 블록에 대한 다수의 참조 샘플 필터들 중에서 필터를 선택하는 것은 컴퓨터 프로세서, 디지털 신호 프로세서(DSP), 마이크로프로세서, 또는 필드 프로그래머블 게이트 어레이(FPGA)에서 실행될 프로그램 코드로 실현될 수 있다. 이들 프로세서는 본 발명에 의해 구현된 특정 방법들을 정의하는 머신 판독가능 소프트웨어 코드 또는 펌웨어 코드를 실행하는 것에 의해 본 발명에 따른 특정 작업들을 수행하도록 구성될 수 있다.
본 발명은 그 정신 또는 본질적인 특성을 벗어나지 않고 다른 특정 형식들로 구현될 수 있다. 설명된 예들은 모든 면에서 제한적인 것이 아니라 예시적인 것으로 간주되어야 한다. 따라서, 본 발명의 범위는 전술한 설명에 의해서가 아니라 첨부된 청구항들에 의해 지시된다. 청구항들의 균등의 의미 및 범위 안에 있는 모든 변경들이 그 범위 내에 포함되어야 한다.

Claims (19)

  1. 비디오 코딩 시스템에서의 비디오 처리 방법에 있어서,
    4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록과 연관된 입력 비디오 데이터를 수신하는 단계;
    상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하는 단계;
    상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하는 단계 - 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55임 -;
    상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드를 광각 인트라 예측(WAIP; Wide Angle Intra Prediction) 모드 매핑으로 선택적으로 대체하는 단계;
    WAIP 모드 매핑 후 상기 매핑된 인트라 모드에 따라 상기 현재 크로마 블록에 대한 인트라 예측자를 도출하는 단계; 및
    상기 인트라 예측자에 따라 상기 현재 크로마 블록을 인코딩 또는 디코딩하는 단계를 포함하는, 방법.
  2. 제1항에 있어서, 모드 57의 상기 매핑된 인트라 모드는 상기 현재 크로마 블록의 폭 대 높이 비율이 1:4일 때 좌측 하부 코너를 가리키는 예측 방향에 대응하는 것인, 방법.
  3. 제2항에 있어서, 모드 57의 상기 매핑된 인트라 모드는 WAIP 모드 매핑 후 모드 -10으로 대체되는 것인, 방법.
  4. 제1항에 있어서, 모드 55의 상기 매핑된 인트라 모드는 상기 현재 크로마 블록의 폭 대 높이 비율이 1:8일 때 좌측 하부 코너를 가리키는 예측 방향에 대응하는 것인, 방법.
  5. 제4항에 있어서, 모드 55의 상기 매핑된 인트라 모드는 WAIP 모드 매핑 후 모드 -12로 대체되는 것인, 방법.
  6. 제1항에 있어서, 상기 현재 크로마 블록은 다이렉트 모드(DM; Direct Mode)로 코딩된 또는 코딩될 것이고, 상기 루마 블록은 상기 현재 크로마 블록의 동위치(collocated) 블록인 것인, 방법.
  7. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:4일 때 57, 18, 44, 50, 및 56인 것인, 방법.
  8. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:8일 때 55, 18, 46, 50, 및 54인 것인, 방법.
  9. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 1:16일 때 53, 18, 48, 50, 및 52인 것인, 방법.
  10. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 2:1일 때 8, 18, 38, 50, 및 7인 것인, 방법.
  11. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 4:1일 때 12, 18, 24, 50, 및 11인 것인, 방법.
  12. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 8:1일 때 14, 18, 22, 50, 및 13인 것인, 방법.
  13. 제1항에 있어서, 좌측 하부 코너, 바로 좌측, 좌측 상부 코너, 바로 상부, 및 우측 상부 코너에서 상기 현재 크로마 블록에 대한 상기 매핑된 인트라 모드들은 폭 대 높이 비율이 16:1일 때 16, 18, 20, 50, 및 15인 것인, 방법.
  14. 제1항에 있어서, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:2일 때 모드 61 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:4일 때 모드 57 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:8일 때 모드 55 내지 66이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 1:16일 때 모드 53 내지 66인 것인, 방법.
  15. 제1항에 있어서, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 2:1일 때 모드 2 내지 7이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 4:1일 때 모드 2 내지 11이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 8:1일 때 모드 2 내지 13이고, WAIP 모드 매핑으로 대체된 상기 매핑된 인트라 모드들은 상기 현재 크로마 블록의 폭 대 높이 비율이 16:1일 때 모드 2 내지 15인 것인, 방법.
  16. 제1항에 있어서, 상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하는 단계는 매핑 테이블을 룩업하는 것에 의해 실행되고, 상기 매핑 테이블은 상이한 폭 대 높이 비율들로 다이렉트 모드(DM)로 코딩된 또는 코딩될 모든 크로마 블록들에 대해 사용되는 것인, 방법.
  17. 제16항에 있어서, 상기 매핑 테이블을 룩업하는 것에 의해, 모드 61 또는 모드 62의 상기 루마 모드는 모드 57에 매핑되고, 모드 57 또는 58의 상기 루마 모드는 모드 55에 매핑되고, 모드 2 내지 모드 7의 상기 루마 모드들은 모드 61 내지 모드 66에 매핑되는 것인, 방법.
  18. 비디오 코딩 시스템에서 비디오 데이터를 처리하기 위한 장치에 있어서, 상기 장치는 하나 이상의 전자 회로를 포함하고, 상기 하나 이상의 전자 회로는:
    4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록과 연관된 입력 비디오 데이터를 수신하고;
    상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하고;
    상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하고 - 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55임 -;
    상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드를 광각 인트라 예측(WAIP) 모드 매핑으로 선택적으로 대체하고;
    WAIP 모드 매핑 후 상기 매핑된 인트라 모드에 따라 상기 현재 크로마 블록에 대한 인트라 예측자를 도출하고;
    상기 인트라 예측자에 따라 상기 현재 크로마 블록을 인코딩 또는 디코딩하도록 구성된 것인, 장치.
  19. 장치의 처리 회로로 하여금 비디오 처리 방법을 수행하게 하는 프로그램 명령어들을 저장한 비일시적 컴퓨터 판독가능 매체에 있어서, 상기 방법은:
    4:2:2 컬러 포맷으로 코딩된 현재 픽처 내의 현재 크로마 블록과 연관된 입력 비디오 데이터를 수신하는 단계;
    상기 현재 크로마 블록에 대응하는 루마 블록의 루마 모드를 결정하는 단계;
    상기 루마 모드를 상기 현재 크로마 블록에 대한 매핑된 인트라 모드에 매핑하는 단계 - 상기 루마 모드가 모드 61일 때 상기 매핑된 인트라 모드는 모드 57이고 상기 루마 모드가 모드 57일 때 상기 매핑된 인트라 모드는 모드 55임 -;
    상기 현재 크로마 블록의 폭 대 높이 비율에 기초하여 상기 매핑된 인트라 모드를 광각 인트라 예측(WAIP) 모드 매핑으로 선택적으로 대체하는 단계;
    WAIP 모드 매핑 후 상기 매핑된 인트라 모드에 따라 상기 현재 크로마 블록에 대한 인트라 예측자를 도출하는 단계; 및
    상기 인트라 예측자에 따라 상기 현재 크로마 블록을 인코딩 또는 디코딩하는 단계를 포함하는 것인, 비일시적 컴퓨터 판독가능 매체.
KR1020227005925A 2019-08-06 2020-08-03 인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치 KR20220032634A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962883149P 2019-08-06 2019-08-06
US62/883,149 2019-08-06
PCT/CN2020/106616 WO2021023158A1 (en) 2019-08-06 2020-08-03 Method and apparatus of encoding or decoding video data with intra prediction mode mapping

Publications (1)

Publication Number Publication Date
KR20220032634A true KR20220032634A (ko) 2022-03-15

Family

ID=74503830

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020227005925A KR20220032634A (ko) 2019-08-06 2020-08-03 인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치

Country Status (6)

Country Link
US (1) US11477444B2 (ko)
EP (1) EP4000261A4 (ko)
KR (1) KR20220032634A (ko)
CN (1) CN114208167A (ko)
TW (1) TWI737429B (ko)
WO (1) WO2021023158A1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115802033A (zh) * 2016-12-23 2023-03-14 华为技术有限公司 一种用于处理矩形视频编码块的比特流的系统及方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR112013014371B8 (pt) * 2011-01-07 2022-05-24 Hfi Innovation Inc Método e aparelho de codificação aperfeiçoada de modo de predição intra crominância
US9544612B2 (en) * 2012-10-04 2017-01-10 Intel Corporation Prediction parameter inheritance for 3D video coding
US20140286412A1 (en) * 2013-03-25 2014-09-25 Qualcomm Incorporated Intra dc prediction for lossless coding in video coding
EP3494730B8 (en) * 2016-08-02 2021-03-24 Signify Holding B.V. Reliable reporting in wireless mesh network
EP3516869B1 (en) 2016-10-04 2022-06-08 HFI Innovation Inc. Method and apparatus for intra chroma coding in image and video coding
FI20175006A1 (en) * 2017-01-03 2019-02-15 Nokia Technologies Oy Video and image coding using wide-angle intra-prediction
CN110278435B (zh) 2018-03-16 2021-11-19 华为技术有限公司 一种图像块的帧内预测方法及装置
US10382772B1 (en) 2018-07-02 2019-08-13 Tencent America LLC Method and apparatus for video coding
CN110933412B (zh) * 2018-09-19 2023-07-25 北京字节跳动网络技术有限公司 用于帧内块复制的基于历史的运动矢量预测值
WO2020159316A1 (ko) * 2019-02-01 2020-08-06 엘지전자 주식회사 이차 변환에 기반한 영상 코딩 방법 및 그 장치
US11973966B2 (en) * 2019-03-12 2024-04-30 Hyundai Motor Company Method and apparatus for efficiently coding residual blocks
WO2020262408A1 (ja) * 2019-06-25 2020-12-30 日本放送協会 イントラ予測装置、画像復号装置、及びプログラム
JP7359936B2 (ja) * 2019-07-20 2023-10-11 北京字節跳動網絡技術有限公司 パレットモードの使用の指示の条件依存符号化
CN113348665B (zh) * 2019-08-01 2024-01-02 华为技术有限公司 编码器、解码器及色度帧内模式推导的对应方法

Also Published As

Publication number Publication date
EP4000261A1 (en) 2022-05-25
US20220279173A1 (en) 2022-09-01
TWI737429B (zh) 2021-08-21
TW202123698A (zh) 2021-06-16
EP4000261A4 (en) 2023-05-24
US11477444B2 (en) 2022-10-18
CN114208167A (zh) 2022-03-18
WO2021023158A1 (en) 2021-02-11

Similar Documents

Publication Publication Date Title
US11677977B2 (en) Intra prediction method of chrominance block using luminance sample, and apparatus using same
KR102608847B1 (ko) 영상 신호 부호화/복호화 방법 및 이를 위한 장치
US11729376B2 (en) Method for encoding/decoding video signal and apparatus therefor
US9432689B2 (en) Method of decoding moving picture
US10645415B2 (en) Intra-prediction method, and encoder and decoder using same
US20230109828A1 (en) Image encoding/decoding methods and apparatuses
EP3145188A2 (en) Inter prediction encoding method
CN112740685A (zh) 图像编码/解码方法和装置以及存储有比特流的记录介质
KR102517389B1 (ko) 인트라 서브-파티션 코드 모드를 이용한 비디오 코딩
US20230164315A1 (en) Image signal encoding/decoding method and apparatus therefor
KR20220032634A (ko) 인트라 예측 모드 매핑을 사용하여 비디오 데이터를 인코딩 또는 디코딩하는 방법 및 장치
CN110730349A (zh) 用于微块的约束
JP2021518084A (ja) 動きベクトルに基づく映像コーディング方法およびその装置
KR20200081328A (ko) 영상 부/복호화 방법 및 장치
KR102410326B1 (ko) 영상 부호화/복호화 방법 및 장치
KR20210121528A (ko) 비디오 신호 처리 방법 및 장치
KR20210111602A (ko) 비디오 신호 처리 방법 및 장치
KR20210113914A (ko) 비디오 신호 처리 방법 및 장치
KR20210118541A (ko) 비디오 신호 처리 방법 및 장치
KR20210112660A (ko) 비디오 신호 처리 방법 및 장치
KR20210115898A (ko) 비디오 신호 처리 방법 및 장치
KR20210120243A (ko) 비디오 신호 처리 방법 및 장치
KR20210117101A (ko) 비디오 신호 처리 방법 및 장치
KR20210117579A (ko) 비디오 신호 처리 방법 및 장치
KR20210103763A (ko) 비디오 신호 처리 방법 및 장치

Legal Events

Date Code Title Description
A201 Request for examination