KR20220160019A - 루프 필터의 높은 레벨 신택스 제어 - Google Patents

루프 필터의 높은 레벨 신택스 제어 Download PDF

Info

Publication number
KR20220160019A
KR20220160019A KR1020227035887A KR20227035887A KR20220160019A KR 20220160019 A KR20220160019 A KR 20220160019A KR 1020227035887 A KR1020227035887 A KR 1020227035887A KR 20227035887 A KR20227035887 A KR 20227035887A KR 20220160019 A KR20220160019 A KR 20220160019A
Authority
KR
South Korea
Prior art keywords
level
control flag
picture
flag
activated
Prior art date
Application number
KR1020227035887A
Other languages
English (en)
Inventor
지에 첸
지안콩 루오
얀 예
모함메드 고램 사르워
Original Assignee
알리바바 그룹 홀딩 리미티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 알리바바 그룹 홀딩 리미티드 filed Critical 알리바바 그룹 홀딩 리미티드
Publication of KR20220160019A publication Critical patent/KR20220160019A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117—Filters, e.g. for pre-processing or post-processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/1883—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit relating to sub-band structure, e.g. hierarchical level, directional tree, e.g. low-high [LH], high-low [HL], high-high [HH]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

비디오 인코딩을 위한 방법 및 장치는: 비디오 시퀀스를 수신하는 단계; 시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ; LMCS가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및 제1 제어 플래그가 LMCS가 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, LMCS가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고, LMCS는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고; LMCS는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및 제2 레벨은 제1 레벨보다 낮은 레벨이다.

Description

루프 필터의 높은 레벨 신택스 제어
관련 출원에 대한 상호 참조
본 개시는 2020년 3월 29일에 출원된 미국 가특허출원 제63/001,448호에 대한 우선권 및 우선권의 이익을 주장한다. 상기 가출원은 그 전체가 본원에 참조로 통합된다.
기술분야
본 개시는 일반적으로 비디오 데이터 처리에 관한 것이고, 보다 구체적으로 루프 필터의 높은 레벨 신택스 제어에 관한 것이다.
비디오는 시각적 정보를 캡처하는 정적 픽처(또는 "프레임")의 세트이다. 저장 메모리 및 송신 대역폭을 감소시키기 위해, 비디오는 저장 또는 송신 이전에 압축되고, 디스플레이 전에 압축 해제될 수 있다. 압축 프로세스는 보통 인코딩으로 지칭되고, 압축 해제 프로세스는 보통 디코딩으로 지칭된다. 가장 일반적으로 예측, 변환, 양자화, 엔트로피 코딩(entropy coding) 및 인-루프 필터링(in-loop filtering)에 기초하는, 표준화된 비디오 코딩 기술을 사용하는 다양한 비디오 코딩 포맷이 있다. 특정 비디오 코딩 포맷을 지정하는 고효율 비디오 코딩(High Efficiency Video Coding)(예를 들어, HEVC/H.265) 표준, 다용도 비디오 코딩(Versatile Video Coding)(예를 들어, VVC/H.266) 표준, 및 AVS 표준과 같은 비디오 코딩 표준은 표준화 기구에서 개발한다. 점점 더 많은 진보된 비디오 코딩 기술이 비디오 표준에 채택되고 있고, 새로운 비디오 코딩 표준의 코딩 효율은 점점 더 높아지고 있다.
본 개시의 실시예는 비디오 인코딩 방법을 제공하고, 상기 비디오 인코딩 방법은: 비디오 시퀀스를 수신하는 단계; 시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ; LMCS가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및 제1 제어 플래그가 LMCS가 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, LMCS가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고, LMCS는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고; LMCS는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및 제2 레벨은 제1 레벨보다 낮은 레벨이다.
본 개시의 실시예는 비디오 인코딩 방법을 제공하며, 상기 비디오 인코딩 방법은: 비디오 시퀀스를 수신하는 단계; 시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 적응적 루프 필터(adaptive loop filter, ALF)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ; ALF가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및 제1 제어 플래그가 제1 레벨에서 ALF가 활성화된 것을 나타내는 것에 응답하여, ALF가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고, ALF는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고; ALF는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및 제2 레벨은 제1 레벨보다 낮은 레벨이다.
본 개시의 실시예는 비디오 인코딩 방법을 제공하고, 상기 비디오 인코딩 방법은: 비디오 시퀀스를 수신하는 단계; 시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 샘플 적응적 오프셋(sample adaptive offset, SAO)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ; SAO가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및 제1 제어 플래그가 SAO가 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, SAO가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고, SAO는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 루마 성분에 대해 활성화되고; SAO는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 루마 성분에 대해 비활성화되고; 및 제2 레벨은 제1 레벨보다 낮은 레벨이다.
본 개시의 실시예 및 다양한 양상은 다음의 상세한 설명 및 첨부 도면에 예시된다. 도면에 도시된 다양한 피처(feature)는 축척대로 도시된 것은 아니다.
도 1은 본 개시의 일부 실시예와 일치하는, 예시적인 비디오 시퀀스의 구조를 예시하는 개략도를 예시한다.
도 2a는 본 개시의 일부 실시예와 일치하는, 하이브리드 비디오 코딩 시스템의 예시적인 인코딩 프로세스를 예시하는 개략도를 예시한다.
도 2b는 본 개시의 일부 실시예와 일치하는, 하이브리드 비디오 코딩 시스템의 다른 예시적인 인코딩 프로세스를 예시하는 개략도를 예시한다.
도 3a는 본 개시의 일부 실시예와 일치하는, 하이브리드 비디오 코딩 시스템의 예시적인 디코딩 프로세스를 예시하는 개략도를 예시한다.
도 3b는 본 개시의 일부 실시예와 일치하는, 하이브리드 비디오 코딩 시스템의 다른 예시적인 디코딩 프로세스를 예시하는 개략도를 예시한다.
도 4는 본 개시의 일부 실시예와 일치하는, 비디오를 인코딩 또는 디코딩하기 위한 예시적인 장치의 블록도를 예시한다.
도 5는 시퀀스 레벨에서 LMCS(luma mapping with chroma scaling)를 가능하게 하는 제어 변수를 포함하는 예시적인 의사 코드를 도시한다.
도 6은 픽처 헤더에서 LMCS(luma mapping with chroma scaling)를 가능하게 하기 위한 제어 변수를 포함하는 예시적인 의사 코드를 도시한다.
도 7은 슬라이스 헤더에서 LMCS(luma mapping with chroma scaling)를 가능하게 하기 위한 제어 변수를 포함하는 예시적인 의사 코드를 도시한다.
도 8a는 시퀀스 파라미터 세트에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 8b는 픽처 파라미터 세트에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 9는 픽처 헤더에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 10은 슬라이스 헤더에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 11은 시퀀스 파라미터 세트에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 12는 픽처 파라미터 세트에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 13은 픽처 헤더에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 14는 슬라이스 헤더에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 15는 픽처 파라미터 세트에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 16은 픽처 헤더에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 17은 슬라이스 헤더에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 18은 본 개시의 일부 실시예에 따른, LMCS(luma mapping with chroma scaling), 적응적 루프 필터 및 샘플 적응적 오프셋에 대한 예시적인 의미를 도시한다.
도 19는 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다.
도 20은 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 21은 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 22a-22c는 본 개시의 일부 실시예에 따른, 적응적 루프 필터의 픽처 헤더 신택스, 슬라이스 헤더 신택스 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다.
도 23은 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다.
도 24는 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 25는 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 26은 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋의 픽처 헤더 신택스, 슬라이스 헤더 신택스 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다.
도 27은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 시퀀스 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다.
도 28은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다.
도 29는 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 30은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다.
도 31a 및 31b는 본 개시의 일부 실시예에 따른, 디블로킹 필터의 픽처 헤더 신택스, 슬라이스 헤더 신택스, 시퀀스 파라미터 세트 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다.
도 32는 본 개시의 일부 실시예에 따른, 비디오 프레임에 대한 LMCS(luma mapping with chroma scaling)를 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다.
도 33은 본 개시의 일부 실시예에 따른, 비디오 프레임에 대한 적응적 루프 필터(ALF)에 대한 예시적인 프로세스를 도시하는 흐름도이다.
도 34는 본 개시의 일부 실시예에 따른, 비디오 프레임에 대한 샘플 적응적 오프셋(SAO)을 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다.
도 35는 본 개시의 일부 실시예에 따른, 비디오 프레임에 대한 디블로킹 필터에 대해 적응적 루프 필터(ALF)가 비활성화된 것을 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다.
이제 예시적인 실시예에 대한 참조가 상세히 이루어질 것이며, 이의 예는 첨부 도면에 예시된다. 다음 설명은 달리 표시되지 않는 한 상이한 도면에서 동일한 번호가 동일하거나 유사한 요소를 나타내는 첨부 도면을 참조한다. 예시적인 실시예의 다음 설명에서 제시된 구현은 본 개시와 일치하는 모든 구현을 나타내는 것은 아니다. 그 대신에, 이들은 첨부된 청구범위에서 인용된 본 발명에 관련된 양상과 일치하는 장치 및 방법의 예시일 뿐이다. 본 발명에 관련된 특정 양상은 아래에서 더 상세히 설명된다. 참조로 통합된 용어 및/또는 정의와 상충하는 경우, 본원에 제공된 용어 및 정의가 우선한다.
ITU-T VCEG(ITU-T Video Coding Expert Group) 및 ISO/IEC MPEG(ISO/IEC Moving Picture Expert Group)의 JVET(Joint Video Experts Team)는 현재 다용도 비디오 코딩(VVC/H.266) 표준을 개발하고 있다. VVC 표준은 그의 이전 버전인 고효율 비디오 코딩(HEVC/H.265) 표준의 압축 효율을 두 배로 높이는 것을 목표로 한다. 다시 말해, VVC의 목표는 대역폭의 절반을 사용하여 HEVC/H.265와 동일한 주관적 품질을 달성하는 것이다.
대역폭의 절반을 사용하여 HEVC/H.265와 동일한 주관적인 품질을 달성하기 위해, JVET는 공동 탐색 모델(joint exploration model, JEM) 참조 소프트웨어를 사용하여 HEVC를 넘는 기술을 개발하고 있다. 코딩 기술이 JEM에 통합됨에 따라, JEM은 HEVC보다 상당히 더 높은 코딩 성능을 달성하였다.
VVC 표준은 최근에 개발되었고, 더 나은 압축 성능을 제공하는 더 많은 코딩 기술을 계속 포함하고 있다. VVC는 HEVC, H.264/AVC, MPEG2, H.263 등과 같은 최신 비디오 압축 표준에서 사용된 것과 동일한 비디오 코딩 시스템을 기초로 한다.
비디오는 시각적 정보를 저장하기 위해 시간적 시퀀스로 배열된 정적 픽처(또는 "프레임")의 세트이다. 비디오 캡처 디바이스(예컨대, 카메라)는 이 픽처를 시간적인 시퀀스로 캡처하고 저장하는데 사용될 수 있고, 비디오 재생 디바이스(예컨대, 디스플레이의 기능을 갖는 텔레비전, 컴퓨터, 스마트폰, 태블릿 컴퓨터, 비디오 플레이어 또는 임의의 최종-사용자 단말기)는 이러한 픽처를 시간적인 시퀀스로 디스플레이하기 위해 사용될 수 있다. 또한, 일부 애플리케이션에서, 비디오 캡처링 디바이스는 감시, 회의 또는 실시간 방송과 같이 캡처된 비디오를 비디오 재생 디바이스(예컨대, 모니터를 갖는 컴퓨터)에 실시간으로 송신할 수 있다.
이러한 애플리케이션에 의해 필요한 저장 공간 및 송신 대역폭을 감소시키기 위해, 비디오는 저장 또는 송신 이전에 압축되고, 디스플레이 전에 압축 해제될 수 있다. 압축 및 압축 해제는 프로세서(예컨대, 일반 컴퓨터의 프로세서) 또는 특수 하드웨어에 의해 실행되는 소프트웨어에 의해 구현될 수 있다. 압축을 위한 모듈은 일반적으로 "인코더"로 지칭되고, 압축 해제를 위한 모듈은 일반적으로 "디코더"로 지칭된다. 인코더 및 디코더를 집합적으로 "코덱(codec)"으로 지칭될 수 있다. 인코더 및 디코더는 임의의 다양한 적합한 하드웨어, 소프트웨어, 또는 이들의 조합 중 임의의 것으로 구현될 수 있다. 예컨대, 인코더 및 디코더의 하드웨어 구현은 하나 이상의 마이크로프로세서, 디지털 신호 프로세서(DSP), 애플리케이션-특정 집적 회로(application-specific integrated circuits, ASIC), 필드 프로그래밍 가능 게이트 어레이(Field-Programmable Gate Array, FPGA), 이산 로직 또는 이의 임의의 조합과 같은 회로를 포함할 수 있다. 인코더 및 디코더의 소프트웨어 구현은 컴퓨터 판독 가능 매체에 고정된 프로그램 코드, 컴퓨터-실행가능 명령어, 펌웨어 또는 임의의 적합한 컴퓨터 구현 알고리즘 또는 프로세스를 포함할 수 있다. 비디오 압축 및 압축 해제는 MPEG- 1, MPEG-2, MPEG-4, H.26x 시리즈 등과 같은 다양한 알고리즘 또는 표준에 의해 구현될 수 있다. 일부 애플리케이션에서, 코덱은 제1 코딩 표준으로부터 비디오를 압축 해제하고 제2 코딩 표준을 사용하여 압축 해제된 비디오를 재압축할 수 있으며, 이 경우 코덱은 "트랜스코더(transcoder)"로 지칭될 수 있다.
비디오 인코딩 프로세스는 픽처를 재구성하는 데 사용될 수 있는 유용한 정보를 식별하고 유지할 수 있고, 재구성에 중요하지 않은 정보를 폐기할 수 있다. 폐기되고 중요하지 않은 정보가 완전히 재구성될 수 없는 경우, 이러한 인코딩 프로세스는 "손실이 있는 것(lossy)"으로 지칭될 수 있다. 그렇지 않으면, 이는 "무손실"로 지칭될 수 있다. 대부분의 인코딩 프로세스는 손실이 있고, 이는 필요한 저장 공간 및 송신 대역폭을 감소시키기 위한 트레이드오프이다.
인코딩되는 픽처(현재 픽처로 지칭됨)의 유용한 정보는 참조 픽처(예컨대, 이전에 인코딩되거나 재구성된 픽처)에 대한 변경을 포함한다. 이러한 변경은 픽셀의 위치 변경, 광도 변경 또는 색상 변경을 포함할 수 있으며, 그 중 위치 변경이 주로 관련된다. 객체를 나타내는 픽셀의 그룹의 위치 변경은 참조 픽처와 현재 픽처 사이의 객체의 움직임을 반영할 수 있다.
다른 픽처를 참조하지 않고 코딩된 픽처(즉, 자신이 그 자신의 참조 픽처인 것)는 "I-픽처"로 지칭된다. 참조 픽처로서 이전 픽처를 사용하여 코딩된 픽처는 "P-픽처"로 지칭된다. 참조 픽처로서 이전 픽처 및 미래 픽처 둘 모두를 사용하여 코딩된 픽처(즉, 참조가 "양방향성"임)는 "B-픽처"로 지칭된다.
본 개시는 위에서 설명된 비디오 코딩 표준과 일치하는, 비디오 콘텐츠를 처리하기 위한 방법 및 장치에 관련된다.
도 1은 본 개시의 일부 실시예에 따른 예시적인 비디오 시퀀스(100)의 구조를 예시한다. 비디오 시퀀스(100)는 실시간 비디오 또는 캡처되고 보관되는 비디오일 수 있다. 비디오(100)는 실제 비디오, 컴퓨터-생성된 비디오(예컨대, 컴퓨터 게임 비디오) 또는 이들의 조합(예컨대, 증강-현실 효과를 갖는 실제 비디오)일 수 있다. 비디오 시퀀스(100)는 비디오 캡처 디바이스(예컨대, 카메라), 이전에 캡처된 비디오를 포함하는 비디오 아카이브(예컨대, 저장 디바이스에 저장된 비디오 파일), 또는 비디오 콘텐츠 제공자로부터 비디오를 수신하기 위한 비디오 피드 인터페이스(예컨대, 비디오 브로드캐스트 트랜시버)로부터 입력될 수 있다.
도 1에 도시된 바와 같이, 비디오 시퀀스(100)는 픽처(102, 104, 106 및 108)를 포함하는, 시간선을 따라 시간적으로 배열된 일련의 픽처를 포함할 수 있다. 픽처(102 내지 106)는 연속적이고, 픽처(106)와 픽처(108) 사이에 더 많은 픽처가 있다. 도 1에서, 픽처(102)는 I-픽처이고, 이의 참조 픽처는 픽처(102) 그 자체이다. 픽처(104)는 P-픽처이고, 이의 참조 픽처는 화살표로 나타난 바와 같이 픽처(102)이다. 픽처(106)는 B-픽처이고, 이의 참조 픽처는 화살표로 나타난 바와 같이 픽처(104 및 108)이다. 일부 실시예에서, 픽처(예컨대, 픽처(104))의 참조 픽처는 픽처 직전 또는 직후가 아닐 수 있다. 예컨대, 픽처(104)의 참조 픽처는 픽처(102)에 선행하는 픽처일 수 있다. 픽처(102 내지 106)의 참조 픽처는 단지 예이며, 본 개시는 도 1에 도시된 예로서 참조 픽처의 실시예를 제한하지 않는다는 것이 유의되어야 한다.
전형적으로, 비디오 코덱은 이러한 태스크(task)의 연산 복잡성에 기인하여 전체의 픽처를 동시에 인코딩하거나 또는 디코딩하지 않는다. 오히려, 이는 픽처를 기본 세그먼트로 분할할 수 있고, 픽처를 세그먼트별로 인코딩하거나 또는 디코딩할 수 있다. 이러한 기본 세그먼트는 본 개시에서 기본 처리 유닛(basic processing units, BPU)으로 지칭된다. 예컨대, 도 1에서의 구조(110)는 비디오 시퀀스(100)의 픽처(예컨대, 픽처(102 내지 108) 중 임의의 것)의 예시적인 구조를 도시한다. 구조(110)에서, 픽처는 4Х4 기본 처리 유닛으로 분할되고, 이의 경계는 점선으로 도시된다. 일부 실시예에서, 기본 처리 유닛은 일부 비디오 코딩 표준(예컨대, MPEG 패밀리, H.261, H.263 또는 H.264/AVC)에서 "매크로블록"으로 지칭될 수 있거나, 일부 다른 비디오 코딩 표준(예컨대, H.265/HEVC 또는 H.266/VVC)에서 "코딩 트리 유닛"("CTU")으로 지칭될 수 있다. 기본 처리 유닛은 128×128, 64×64, 32×32, 16×16, 4×8, 16×32와 같은 픽처에서의 가변적인 크기, 또는 픽셀의 어느 임의의 형태 및 크기를 가질 수 있다. 기본 처리 유닛의 크기 및 형태는 기본 처리 유닛에서 유지될 세부사항의 레벨 및 코딩 효율에 기초하여 픽처에 대해 선택될 수 있다. CTU는 가장 큰 블록 유닛이고, 무려 128×128 루마 샘플(크로마 포맷에 의존하여 대응하는 크로마 샘플을 더함)을 포함할 수 있다. CTU는 쿼드-트리(quad-tree), 이진 트리, 삼항 트리 또는 이의 조합을 사용하여 코딩 유닛(CU)으로 더 분할될 수 있다.
기본 처리 유닛은 컴퓨터 메모리에 (예컨대, 비디오 프레임 버퍼에) 저장된 상이한 타입의 비디오 데이터의 그룹을 포함할 수 있는 논리적 유닛일 수 있다. 예컨대, 색상 픽처의 기본 처리 유닛은 무색의 밝기 정보를 나타내는 루마 성분(Y), 색상 정보를 나타내는 하나 이상의 크로마 성분(예컨대, Cb 및 Cr) 및 연관된 신택스 요소를 포함할 수 있고, 여기서 루마 및 크로마 성분은 기본 처리 유닛과 동일한 크기를 가질 수 있다. 루마 및 크로마 성분은 일부 비디오 코딩 표준(예컨대, H.265/HEVC 또는 H.266/VVC)에서 "코딩 트리 블록"("CTB")으로 지칭될 수 있다. 기본 처리 유닛에 대해 수행된 임의의 동작은 그의 루마 및 크로마 성분의 각각에 대해 반복적으로 수행될 수 있다.
비디오 코딩은 다수의 동작 스테이지를 가지며, 이의 예는 도 2a-2b 및 3a-3b에 도시된다. 각각의 스테이지에 대해, 기본 처리 유닛의 크기는 처리하기에 여전히 너무 클 수 있으며, 따라서 본 개시에서 "기본 처리 서브-유닛"으로 지칭되는 세그먼트로 더 분할될 수 있다. 일부 실시예에서, 기본 처리 서브-유닛은 일부 비디오 코딩 표준(예컨대, MPEG 패밀리, H.261, H.263 또는 H.264/AVC)에서 "블록"으로 지칭될 수 있거나, 일부 다른 비디오 코딩 표준(예컨대, H.265/HEVC 또는 H.266/VVC)에서 "코딩 유닛"("CU")으로 지칭될 수 있다. 기본 처리 서브-유닛은 기본 처리 유닛과 동일하거나 더 작은 크기를 가질 수 있다. 기본 처리 유닛과 유사하게, 기본 처리 서브-유닛은 또한, 논리적 유닛이며, 이는 컴퓨터 메모리에 (예컨대, 비디오 프레임 버퍼에) 저장된 상이한 타입의 비디오 데이터(예컨대, Y, Cb, Cr 및 연관된 신택스 요소)의 그룹을 포함할 수 있다. 기본 처리 서브-유닛에 대해 수행된 임의의 동작은 그의 루마 및 크로마 성분의 각각에 대해 반복적으로 수행될 수 있다. 이러한 분할은 처리 요구에 의존하는 추가적인 레벨로 수행될 수 있다는 것이 유의되어야 한다. 또한, 상이한 스테이지가 상이한 체계를 사용하여 기본 처리 유닛을 분할할 수 있다는 것이 유의되어야 한다.
예컨대, 모드 결정 스테이지(그의 예가 도 2b에 도시됨)에서, 인코더는 기본 처리 유닛에 대해 어떤 예측 모드(예컨대, 인트라-픽처 예측 또는 인터-픽처 예측)를 사용할지를 결정할 수 있으며, 기본 처리 유닛은 이러한 결정을 하기엔 너무 클 수 있다. 인코더는 기본 처리 유닛을 다수의 기본 처리 서브-유닛(예컨대, H.265/HEVC 또는 H.266/VVC에서와 같이 CU)으로 분할할 수 있으며, 각각의 개별적인 기본 처리 서브-유닛에 대해 예측 타입을 결정할 수 있다.
다른 예로서, 예측 스테이지(그의 예가 도 2a-2b에 도시됨)에서, 인코더는 기본 처리 서브-유닛(예컨대, CU)의 레벨에서 예측 동작을 수행할 수 있다. 하지만, 일부 경우에서, 기본 처리 서브-유닛은 처리하기에 여전히 너무 클 수 있다. 인코더는 기본 처리 서브-유닛을 예측 동작이 수행될 수 있는 레벨의 더 작은 세그먼트(예컨대, H.265/HEVC 또는 H.266/VVC에서 "예측 블록" 또는 "PB"로 지칭됨)로 더 분할할 수 있다.
다른 예로서, 변환 스테이지(그의 예가 도 2a-2b에 도시됨)에서, 인코더는 잔차 기본 처리 서브-유닛(예컨대, CU)에 대한 변환 동작을 수행할 수 있다. 하지만, 일부 경우에서, 기본 처리 서브-유닛은 처리하기에 여전히 너무 클 수 있다. 인코더는 기본 처리 서브-유닛을 변환 동작이 수행될 수 있는 레벨의 더 작은 세그먼트(예컨대, H.265/HEVC 또는 H.266/VVC에서 "변환 블록" 또는 "TB"로 지칭됨)로 더 분할할 수 있다. 동일한 기본 처리 서브-유닛의 분할 체계는 예측 스테이지 및 변환 스테이지에서 상이할 수 있다는 것이 유의되어야 한다. 예컨대, H.265/HEVC 또는 H.266/VVC에서, 동일한 CU의 예측 블록 및 변환 블록은 상이한 크기 및 개수를 가질 수 있다.
도 1의 구조(110)에서, 기본 처리 유닛(112)은 그의 경계가 점선으로 도시된, 3Х3 기본 처리 서브-유닛으로 더 분할된다. 동일한 픽처의 상이한 기본 처리 유닛이 상이한 체계의 기본 처리 서브-유닛으로 분할될 수 있다.
일부 구현에서, 비디오 인코딩 및 디코딩에 대한 병렬 처리 및 오류 복원의 능력을 제공하기 위해, 픽처는 픽처의 영역에 대해, 인코딩 또는 디코딩 프로세스가 픽처의 임의의 다른 영역으로부터의 정보에 의존하지 않도록, 처리를 위한 영역으로 분할될 수 있다. 다시 말해, 픽처의 각각의 영역은 독립적으로 처리될 수 있다. 이렇게 함으로써, 코덱은 픽처의 상이한 영역을 병렬로 처리할 수 있으며, 따라서 코딩 효율을 증가시킨다. 또한, 영역의 데이터가 처리에서 훼손되거나 또는 네트워크 송신에서 분실될 때, 코덱은 훼손되거나 또는 분실된 데이터에 대한 의존(reliance) 없이, 동일한 픽처의 다른 영역을 올바르게 인코딩 또는 디코딩할 수 있으며, 따라서 오류 복원의 능력을 제공한다. 일부 비디오 코딩 표준에서, 픽처는 상이한 타입의 영역으로 분할될 수 있다. 예컨대, H.265/HEVC 및 H.266/VVC는 두 개의 타입의 영역: "슬라이스" 및 "타일"을 제공한다. 또한, 비디오 시퀀스(100)의 상이한 픽처가 픽처를 영역으로 분할하기 위한 상이한 파티션 체계를 가질 수 있다는 것이 유의되어야 한다.
예컨대, 도 1에서, 구조(110)는 그의 경계가 구조(110) 내에서 실선으로 도시된 세 개의 영역(114, 116 및 118)으로 분할된다. 영역(114)은 네 개의 기본 처리 유닛을 포함한다. 영역(116 및 118)의 각각은 여섯 개의 기본 처리 유닛을 포함한다. 도 1에서 구조(110)의 기본 처리 유닛, 기본 처리 서브-유닛 및 영역은 단지 예이며, 본 개시는 이의 실시예를 제한하지 않는다는 것이 유의되어야 한다.
도 2a는 본 개시의 실시예와 일치하는, 예시적인 인코딩 프로세스(200A)의 개략도를 예시한다. 예컨대, 인코딩 프로세스(200A)는 인코더에 의해 수행될 수 있다. 도 2a에 도시된 바와 같이, 인코더는 프로세스(200A)에 따라 비디오 시퀀스(202)를 비디오 비트스트림(228)으로 인코딩할 수 있다. 도 1에서의 비디오 시퀀스(100)와 유사하게, 비디오 시퀀스(202)는 시간적인 순서로 배열된 픽처("원본 픽처"로 지칭됨)의 세트를 포함할 수 있다. 도 1에서의 구조(110)와 유사하게, 비디오 시퀀스(202)의 각각의 원본 픽처는 인코더에 의해 기본 처리 유닛, 기본 처리 서브-유닛 또는 처리를 위한 영역으로 분할될 수 있다. 일부 실시예에서, 인코더는 비디오 시퀀스(202)의 각각의 원본 픽처에 대한 기본 처리 유닛의 레벨에서 프로세스(200A)를 수행할 수 있다. 예컨대, 인코더는 프로세스(200A)를 반복 방식으로 수행할 수 있으며, 여기서 인코더는 프로세스(200A)의 하나의 반복으로 기본 처리 유닛을 인코딩할 수 있다. 일부 실시예에서, 인코더는 비디오 시퀀스(202)의 각각의 원본 픽처의 영역(예컨대, 영역(114-118))에 대해 프로세스(200A)를 병렬로 수행할 수 있다.
도 2a에서, 인코더는 예측 데이터(206) 및 예측된 BPU(208)를 생성하기 위해 비디오 시퀀스(202)의 원본 픽처의 기본 처리 유닛("원본 BPU"로 지칭됨)을 예측 스테이지(204)로 공급할 수 있다. 인코더는 잔차 BPU(210)를 생성하기 위해 원본 BPU로부터 예측된 BPU(208)를 감산할 수 있다. 인코더는 양자화된 변환 계수(216)를 생성하기 위해, 잔차 BPU(210)를 변환 스테이지(212) 및 양자화 스테이지(214)에 공급할 수 있다. 인코더는 비디오 비트스트림(228)을 생성하기 위해, 예측 데이터(206) 및 양자화된 변환 계수(216)를 이진 코딩 스테이지(226)에 공급할 수 있다. 구성요소(202, 204, 206, 208, 210, 212, 214, 216, 226 및 228)는 "순방향 경로(forward path)"로서 지칭될 수 있다. 프로세스(200A) 동안, 양자화 스테이지(214) 이후에, 인코더는 재구성된 잔차 BPU(222)를 생성하기 위해, 양자화된 변환 계수(216)를 역양자화 스테이지(218) 및 역변환 스테이지(220)에 공급할 수 있다. 인코더는 프로세스(200A)의 다음 반복을 위해 예측 스테이지(204)에서 사용되는 예측 참조(224)를 생성하기 위해, 재구성된 잔차 BPU(222)를 예측된 BPU(208)에 더할 수 있다. 프로세스(200A)의 구성요소(218, 220, 222 및 224)는 "재구성 경로"로 지칭될 수 있다. 재구성 경로는 인코더 및 디코더 둘 모두가 예측을 위해 동일한 참조 데이터를 사용하는 것을 보장하도록 사용될 수 있다.
인코더는 (순방향 경로에서) 원본 픽처의 각각의 원본 BPU를 인코딩하고, (재구성 경로에서) 원본 픽처의 다음 원본 BPU를 인코딩하기 위한 예측된 참조(224)를 생성하기 위해 프로세스(200A)를 반복적으로 수행할 수 있다. 원본 픽처의 모든 원본 BPU를 인코딩한 이후에, 인코더는 비디오 시퀀스(202)에서 다음 픽처를 인코딩하도록 진행할 수 있다.
프로세스(200A)를 참조하면, 인코더는 비디오 캡처링 디바이스(예컨대, 카메라)에 의해 생성되는 비디오 시퀀스(202)를 수신할 수 있다. 본원에서 사용된 "수신하다"라는 용어는 수신, 입력, 취득, 리트리브(retrieve), 획득, 판독, 액세스 또는 데이터를 입력하기 위한 임의의 방식에서의 임의의 동작을 지칭할 수 있다.
현재 반복에서의 예측 스테이지(204)에서, 인코더는 원본 BPU 및 예측 참조(224)를 수신할 수 있고, 예측 데이터(206) 및 예측된 BPU(208)를 생성하기 위해 예측 동작을 수행할 수 있다. 예측 참조(224)는 프로세스(200A)의 이전의 반복의 재구성 경로로부터 생성될 수 있다. 예측 스테이지(204)의 목적은 예측 데이터(206) 및 예측 참조(224)로부터 원본 BPU를 예측된 BPU(208)로서 재구성하기 위해 사용될 수 있는 예측 데이터(206)를 추출함으로써 정보 리던던시(information redundancy)를 감소시키는 것이다.
이상적으로, 예측된 BPU(208)는 원본 BPU와 동일할 수 있다. 하지만, 비-이상적 예측 및 재구성 동작에 기인하여, 예측된 BPU(208)는 일반적으로 원본 BPU와는 약간 상이하다. 이러한 차이를 기록하기 위해, 예측된 BPU(208)를 생성한 이후에, 인코더는 잔차 BPU(210)를 생성하기 위해, 원본 BPU로부터 이를 감산할 수 있다. 예컨대, 인코더는 원본 BPU의 대응하는 픽셀의 값으로부터 예측된 BPU(208)의 픽셀의 값(예컨대, 그레이스케일 값 또는 RGB 값)을 감산할 수 있다. 잔차 BPU(210)의 각각의 픽셀은 원본 BPU 및 예측된 BPU(208)의 대응하는 픽셀 사이에서 이러한 감산의 결과로서 잔차 값을 가질 수 있다. 원본 BPU와 비교하여, 예측 데이터(206) 및 잔차 BPU(210)는 더 적은 수의 비트를 가질 수 있지만, 이들은 현저한 품질 저하 없이 원본 BPU를 재구성하는데 사용될 수 있다. 따라서, 원본 BPU가 압축된다.
잔차 BPU(210)를 더 압축하기 위해, 변환 스테이지(212)에서, 인코더는 이를 2차원 "기본 패턴" - 각각의 기본 패턴은 "변환 계수와 연관됨 - 으로 분해함으로써 잔차 BPU(210)의 공간 리던던시를 저감할 수 있다. 기본 패턴은 동일한 크기(예컨대, 잔차 BPU(210)의 크기)를 가질 수 있다. 각각의 기본 패턴은 잔차 BPU(210)의 변동 주파수(variation frequency)(예컨대, 밝기 변동의 주파수) 성분을 나타낼 수 있다. 기본 패턴 중 어느 것도 임의의 다른 기본 패턴의 임의의 조합(예컨대, 선형 조합)으로부터 재생성될 수 없다. 다시 말해, 분해는 잔차 BPU(210)의 변동을 주파수 도메인으로 분해할 수 있다. 이러한 분해는 함수의 이산 푸리에 변환과 유사하며, 여기서 기본 패턴은 이산 푸리에 변환의 기본 함수(예컨대, 삼각 함수)와 유사하고 변환 계수는 기본 함수와 연관된 계수와 유사하다.
상이한 변환 알고리즘이 상이한 기본 패턴을 사용할 수 있다. 다양한 변환 알고리즘은 예컨대, 이산 코사인 변환, 이산 사인 변환 등과 같은 변환 스테이지(212)에서 사용될 수 있다. 변환 스테이지(212)에서의 변환은 역으로 이루어질 수 있다(invertible). 즉, 인코더는 변환의 역동작("역변환"으로 지칭됨)에 의해 잔차 BPU(210)를 복원할 수 있다. 예컨대, 잔차 BPU(210)의 픽셀을 복원하기 위해, 역변환은 기본 패턴의 대응하는 픽셀의 값을 각각의 연관된 계수를 곱하고, 그 결과 값을 더하여 가중합을 생성할 수 있다. 비디오 코딩 표준에 대해, 인코더 및 디코더 둘 모두는 동일한 변환 알고리즘(따라서, 동일한 기본 패턴)을 사용할 수 있다. 따라서, 인코더는 변환 계수만을 기록할 수 있고, 이로부터 디코더는 인코더로부터 기본 패턴을 수신하지 않으면서, 잔차 BPU(210)를 재구성할 수 있다. 잔차 BPU(210)와 비교하여, 변환 계수는 더 적은 수의 비트를 가질 수 있지만, 이들은 현저한 품질 저하 없이 잔차 BPU(210)를 재구성하는데 사용될 수 있다. 따라서, 잔차 BPU(210)가 더 압축된다.
인코더는 양자화 스테이지(214)에서 변환 계수를 더 압축할 수 있다. 변환 프로세스에서, 상이한 기본 패턴이 상이한 변동 주파수(예컨대, 밝기 변동 주파수)를 나타낼 수 있다. 인간의 눈은 일반적으로 낮은-주파수 변동을 더 잘 인식하기 때문에, 인코더는 디코딩에서 현저한 품질 저하를 초래하지 않으면서 높은-주파수 변동의 정보를 무시할 수 있다. 예컨대, 양자화 스테이지(214)에서, 인코더는 각각의 변환 계수를 정수 값("양자화 파라미터"로 지칭됨)으로 나누고, 몫을 그의 가장 가까운 정수로 반올림함으로써, 양자화된 변환 계수(216)를 생성할 수 있다. 이러한 동작 이후에, 고주파수 기본 패턴의 일부 변환 계수는 0으로 변환될 수 있고, 저주파수 기본 패턴의 변환 계수는 더 작은 정수로 변환될 수 있다. 인코더는 0-값 양자화된 변환 계수(216)를 무시할 수 있으며, 이에 의해 변환 계수는 더 압축된다. 또한, 양자화 프로세스는 역으로 이루어질 수 있고, 여기서 양자화된 변환 계수(216)는 양자화의 역동작("역양자화"로 지칭됨)에서 변환 계수로 재구성될 수 있다.
인코더가 반올림 동작에서 이러한 나눗셈의 나머지를 무시하기 때문에, 양자화 스테이지(214)는 손실이 있을 수 있다. 전형적으로, 양자화 스테이지(214)는 프로세스(200A)의 대부분의 정보 손실에 기여할 수 있다. 정보 손실이 크면 클수록, 양자화된 변환 계수(216)가 더 적은 비트를 필요로 할 수 있다. 상이한 레벨의 정보 손실을 획득하기 위해, 인코더는 양자화 파라미터의 상이한 값 또는 양자화 프로세스의 임의의 다른 파라미터를 사용할 수 있다.
이진 코딩 스테이지(226)에서, 인코더는 예컨대, 엔트로피 코딩, 가변 길이 코딩, 산술 코딩, 허프만 코딩(Huffman coding), 컨텍스트-적응적 이진 산술 코딩(context-adaptive binary arithmetic coding) 또는 임의의 다른 무손실 또는 손실 압축 알고리즘과 같은 이진 코딩 기술을 사용하여 예측 데이터(206) 및 양자화된 변환 계수(216)를 인코딩할 수 있다. 일부 실시예에서, 예측 데이터(206) 및 양자화된 변환 계수(216) 이외에, 인코더는 예컨대, 예측 스테이지(204)에서 사용되는 예측 모드, 예측 동작의 파라미터, 변환 스테이지(212)에서의 변환 타입, 양자화 프로세스의 파라미터(예컨대, 양자화 파라미터), 인코더 제어 파라미터(예컨대, 비트레이트 제어 파라미터) 등과 같은 다른 정보를 이진 코딩 스테이지(226)에서 인코딩할 수 있다. 인코더는 비디오 비트스트림(228)을 생성하기 위해 이진 코딩 스테이지(226)의 출력 데이터를 사용할 수 있다. 일부 실시예에서, 비디오 비트스트림(228)은 네트워크 송신을 위해 더 패킷화될 수 있다.
프로세스(200A)의 재구성 경로를 참고하면, 역양자화 스테이지(218)에서, 인코더는 재구성된 변환 계수를 생성하기 위해 양자화된 변환 계수(216)에 역양자화를 수행할 수 있다. 역변환 스테이지(220)에서, 인코더는 재구성된 변환 계수에 기초하여, 재구성된 잔차 BPU(222)를 생성할 수 있다. 인코더는 프로세스(200A)의 다음 반복에서 사용될 예측 참조(224)를 생성하기 위해, 재구성된 잔차 BPU(222)를 예측된 BPU(208)에 더할 수 있다.
프로세스(200A)의 다른 변형은 비디오 시퀀스(202)를 인코딩하기 위해 사용될 수 있다는 것이 유의되어야 한다. 일부 실시예에서, 프로세스(200A)의 스테이지는 인코더에 의해 상이한 순서로 수행될 수 있다. 일부 실시예에서, 프로세스(200A)의 하나 이상의 스테이지는 단일 스테이지로 결합될 수 있다. 일부 실시예에서, 프로세스(200A)의 단일 스테이지는 다수의 스테이지로 분할될 수 있다. 예컨대, 변환 스테이지(212) 및 양자화 스테이지(214)가 단일 스테이지로 결합될 수 있다. 일부 실시예에서, 프로세스(200A)는 추가적인 스테이지를 포함할 수 있다. 일부 실시예에서, 프로세스(200A)는 도 2a에서의 하나 이상의 스테이지를 생략할 수 있다.
도 2b는 본 개시의 실시예와 일치하는, 다른 예시적인 인코딩 프로세스(200B)의 개략도를 예시한다. 프로세스(200B)는 프로세스(200A)로부터 수정될 수 있다. 예컨대, 프로세스(200B)는 하이브리드 비디오 인코딩 표준(예컨대, H.26x 시리즈)을 따르는 인코더에 의해 사용될 수 있다. 프로세스(200A)에 비해, 프로세스(200B)의 순방향 경로는 모드 결정 스테이지(230)를 추가적으로 포함하고, 예측 스테이지(204)를 공간 예측 스테이지(2042) 및 시간 예측 스테이지(2044)로 분할한다. 프로세스(200B)의 재구성 경로는 루프 필터 스테이지(232) 및 버퍼(234)를 추가적으로 포함한다.
일반적으로, 예측 기술은 두 개의 타입: 공간 예측 및 시간 예측으로 카테고리화될 수 있다. 공간 예측(예컨대, 인트라-픽처 예측 또는 "인트라 예측")은 현재 BPU를 예측하기 위해, 동일한 픽처에서 하나 이상의 이미 코딩된 이웃하는 BPU로부터의 픽셀을 사용할 수 있다. 즉, 공간 예측에서의 예측 참조(224)는 이웃하는 BPU를 포함할 수 있다. 공간 예측은 픽처의 내재적인 공간 리던던시를 감소시킬 수 있다. 시간 예측(예컨대, 인터-픽처 예측 또는 "인터 예측")은 현재 BPU를 예측하기 위해 하나 이상의 이미 코딩된 픽처로부터의 영역을 사용할 수 있다. 즉, 시간 예측에서의 예측 참조(224)는 코딩된 픽처를 포함할 수 있다. 시간 예측은 픽처의 내재적인 시간 리던던시를 저감할 수 있다.
프로세스(200B)를 참조하면, 순방향 경로에서, 인코더는 공간 예측 스테이지(2042) 및 시간 예측 스테이지(2044)에서 예측 동작을 수행한다. 예컨대, 공간 예측 스테이지(2042)에서, 인코더는 인트라 예측을 수행할 수 있다. 인코딩되는 픽처의 원본 BPU에 대해, 예측 참조(224)는 동일한 픽처에서 (순방향 경로에서) 인코딩되고 (재구성 경로에서) 재구성되는 하나 이상의 이웃하는 BPU를 포함할 수 있다. 인코더는 이웃하는 BPU를 외삽함으로써 예측된 BPU(208)를 생성할 수 있다. 외삽 기법은 예컨대, 선형 외삽(linear extrapolation) 또는 내삽(interpolation), 다항식 외삽 또는 내삽 등을 포함할 수 있다. 일부 실시예에서, 인코더는 가령, 예측된 BPU(208)의 각각의 픽셀에 대해 대응하는 픽셀의 값을 외삽함으로써, 픽셀 레벨에서 외삽을 수행할 수 있다. 외삽을 위해 사용된 이웃하는 BPU는 (예컨대, 원본 BPU의 상부에서) 수직 방향, (예컨대, 원본 BPU의 좌측에서) 수평 방향, (예컨대, 원본 BPU의 좌측-하단, 우측-하단, 좌측-상단 또는 우측-상단에서) 대각선 방향 또는 사용된 비디오 코딩 표준에서 정의된 임의의 방향에서와 같은 다양한 방향으로부터 원본 BPU에 대해 위치될 수 있다. 인트라 예측에 대해, 예측 데이터(206)는 예컨대, 원본 BPU에 대한 사용된 이웃하는 BPU의 위치(예컨대, 좌표), 사용된 이웃하는 BPU의 크기, 외삽의 파라미터, 사용된 이웃하는 BPU의 방향 등을 포함할 수 있다.
다른 예에 대해, 시간 예측 스테이지(2044)에서, 인코더는 인터 예측을 수행할 수 있다. 현재 픽처의 원본 BPU에 대해, 예측 참조(224)는 (순방향 경로에서) 인코딩되고 (재구성된 경로에서) 재구성된 하나 이상의 픽처("참조 픽처"로 지칭됨)를 포함할 수 있다. 일부 실시예에서, 참조 픽처는 BPU별로 인코딩되고 재구성될 수 있다. 예컨대, 인코더는 재구성된 BPU를 생성하기 위해, 재구성된 잔차 BPU(222)를 예측된 BPU(208)에 더할 수 있다. 동일한 픽처의 모든 재구성된 BPU가 생성될 때, 인코더는 재구성된 픽처를 참조 픽처로서 생성할 수 있다. 인코더는 참조 픽처의 범위("검색 윈도우"로 지칭됨)에서 매칭 영역을 검색하기 위해, "움직임 추정"의 동작을 수행할 수 있다. 참조 픽처에서 검색 윈도우의 위치는 현재 픽처에서 원본 BPU의 위치에 기초하여 결정될 수 있다. 예컨대, 검색 윈도우는 현재 픽처에서 원본 BPU와 참조 픽처에서 동일한 좌표를 갖는 위치에 중심이 맞춰질 수 있고, 미리 결정된 거리에 대해 확장될 수 있다. 인코더가 검색 윈도우에서 원본 BPU와 유사한 영역을 (예컨대, 픽셀-순환 알고리즘(pixel-recursive algorithm), 블록-매칭 알고리즘 등을 사용함으로써) 식별할 때, 인코더는 이러한 영역을 매칭 영역으로서 결정할 수 있다. 매칭 영역은 원본 BPU로부터 상이한 치수(예컨대, 그보다 작거나, 이와 동일하거나, 그보다 크거나 또는 상이한 형태인)를 가질 수 있다. 참조 픽처 및 현재 픽처가 (예컨대, 도 1에 도시된 바와 같이) 시간선에서 시간적으로 분리되기 때문에, 시간이 지남에 따라, 매칭 영역이 원본 BPU의 위치로 "이동하는" 것으로 여겨질 수 있다. 인코더는 "움직임 벡터"로서 이러한 움직임의 방향 및 거리를 기록할 수 있다. (예컨대, 도 1에서의 픽처(106)와 같이) 다수의 참조 픽처가 사용될 때, 인코더는 매칭 영역을 검색하고, 각각의 참조 픽처에 대해 그의 연관된 움직임 벡터를 결정할 수 있다. 일부 실시예에서, 인코더는 각각의 매칭 참조 픽처의 매칭 영역의 픽셀값에 대해 가중치를 할당할 수 있다.
움직임 추정은 예컨대, 병진(translation), 회전, 주밍(zooming) 등과 같은 다양한 타입의 움직임을 식별하기 위해 사용될 수 있다. 인터 예측에 대해, 예측 데이터(206)는 예컨대, 매칭 영역의 위치(예컨대, 좌표), 매칭 영역과 관련된 움직임 벡터, 참조 픽처의 개수, 참조 픽처와 연관된 가중치 등을 포함할 수 있다.
예측된 BPU(208)를 생성하기 위해, 인코더는 "움직임 보상"의 동작을 수행할 수 있다. 움직임 보상은 예측 데이터(206)(예컨대, 움직임 벡터) 및 예측 참조(224)에 기초하여 예측된 BPU(208)를 재구성하는데 사용될 수 있다. 예컨대, 인코더는 움직임 벡터에 따라 참조 픽처의 매칭 영역을 이동시킬 수 있으며, 여기서 인코더는 현재 픽처의 원본 BPU를 예측할 수 있다. 다수의 참조 픽처가 (예컨대, 도 1에서의 픽처와 같이) 사용될 때, 인코더는 매칭 영역의 각각의 움직임 벡터 및 평균 픽셀 값에 따라 참조 픽처의 매칭 영역을 이동시킬 수 있다. 일부 실시예에서, 인코더가 각각의 매칭 참조 픽처의 매칭 영역의 픽셀값에 가중치를 할당한 경우, 인코더는 이동된 매칭 영역의 픽셀값의 가중치 합을 더할 수 있다.
일부 실시예에서, 인터 예측은 단방향 또는 양방향일 수 있다. 단방향 인터 예측은 현재 픽처에 대해 동일한 시간 방향으로 하나 이상의 참조 픽처를 사용할 수 있다. 예컨대, 도 1에서의 픽처(104)는 참조 픽처(예를 들어, 픽처(102))가 픽처(104)에 선행하는 단방향 인터-예측된 픽처이다. 양방향 인터 예측은 현재 픽처에 대해 시간 방향 둘 모두에서 하나 이상의 참조 픽처를 사용할 수 있다. 예컨대, 도 1에서의 픽처(106)는 참조 픽처(예를 들어, 픽처(104 및 108))가 픽처(104)에 대해 시간 방향 둘 모두에 있는 양방향 인터-예측된 픽처이다.
프로세스(200B)의 순방향 경로를 계속 참조하면, 공간 예측 스테이지(2042) 및 시간 예측 스테이지(2044) 이후에, 모드 결정 스테이지(230)에서, 인코더는 프로세스(200B)의 현재 반복에 대해 예측 모드(예컨대, 인트라 예측 또는 인터 예측 중 하나)를 선택할 수 있다. 예컨대, 인코더는 레이트-왜곡 최적화 기술(rate-distortion optimization technique)을 수행할 수 있으며, 여기서 인코더는 후보 예측 모드의 비트레이트 및 후보 예측 모드 하에서 재구성된 참조 픽처의 왜곡에 의존하여, 비용 함수의 값을 최소화하기 위해 예측 모드를 선택할 수 있다. 선택된 예측 모드에 의존하여, 인코더는 대응하는 예측된 BPU(208) 및 예측된 데이터(206)를 생성할 수 있다.
프로세스(200B)의 재구성 경로에서, 순방향 경로에서 인트라 예측 모드가 선택된 경우, 예측 참조(224)(예컨대, 현재 픽처에서 인코딩되고 재구성된 현재 BPU)를 생성한 이후에, 인코더는 차후 사용을 위해(예컨대, 현재 픽처의 다음 BPU의 외삽을 위해), 예측 참조(224)를 공간 예측 스테이지(2042)로 직접적으로 공급할 수 있다. 순방향 경로에서 인터 예측 모드가 선택된 경우에, 예측 참조(224)(예컨대, 모든 BPU가 인코딩되고 재구성된 현재 픽처)를 생성한 이후에, 인코더는 인터 예측에 의해 도입된 왜곡(예컨대, 블로킹 아티팩트(blocking artifacts))을 감소시키거나 제거하기 위해 인코더가 예측 참조(224)에 루프 필터를 적용할 수 있는 루프 필터 스테이지(232)에 예측 참조(224)를 공급할 수 있다. 인코더는 예컨대, 디블로킹(deblocking), 샘플 적응적 오프셋, 적응적 루프 필터 등과 같은 다양한 루프 필터 기법을 루프 필터 스테이지(232)에서 적용할 수 있다. 루프-필터링된 참조 픽처는 차후 사용을 위해(예컨대, 비디오 시퀀스(202)의 향후 픽처에 대한 인터-예측 참조 픽처로서 사용되기 위해) 버퍼(234)(또는 "디코딩된 픽처 버퍼")에 저장될 수 있다. 인코더는 시간 예측 스테이지(2044)에서 사용되도록 버퍼(234)에 하나 이상의 참조 픽처를 저장할 수 있다. 일부 실시예에서, 인코더는 양자화된 변환 계수(216), 예측 데이터(206) 및 다른 정보와 함께, 이진 코딩 스테이지(226)에서 루프 필터의 파라미터(예컨대, 루프 필터 강도)를 인코딩할 수 있다.
도 3a는 본 개시의 실시예와 일치하는 예시적인 디코딩 프로세스(300A)의 개략도를 예시한다. 프로세스(300A)는 도 2a에서의 압축 프로세스(200A)에 대응하는 압축 해제 프로세스일 수 있다. 일부 실시예에서, 프로세스(300A)는 프로세스(200A)의 재구성 경로와 유사할 수 있다. 디코더는 프로세스(300A)에 따라 비디오 비트스트림(228)을 비디오 스트림(304)으로 디코딩할 수 있다. 비디오 스트림(304)은 비디오 시퀀스(202)와 매우 유사할 수 있다. 하지만, 압축 및 압축 해제 프로세스(예컨대, 도 2a-2b에서의 양자화 스테이지(214))에서의 정보 손실에 기인하여, 일반적으로 비디오 스트림(304)은 비디오 시퀀스(202)와 동일하지 않다. 도 2a-2b에서의 프로세스(200A 및 200B)와 유사하게, 디코더는 비디오 비트스트림(228)에서 인코딩된 각각의 픽처에 대해 기본 처리 유닛(BPU)의 레벨에서 프로세스(300A)를 수행할 수 있다. 예컨대, 디코더는 반복적인 방식으로 프로세스(300A)를 수행할 수 있으며, 여기서 디코더는 프로세스(300A)의 한 번의 반복으로 기본 처리 유닛을 디코딩할 수 있다. 일부 실시예에서, 디코더는 비디오 비트스트림(228)에서 인코딩된 각각의 픽처의 영역(예컨대, 영역(114 내지 118))에 대해 병렬로 프로세스(300A)를 수행할 수 있다.
도 3a에서, 디코더는 인코딩된 픽처의 기본 처리 유닛("인코딩된 BPU"로 지칭됨)과 연관된 비디오 비트스트림(228)의 부분을 이진 디코딩 스테이지(302)로 공급할 수 있다. 이진 디코딩 스테이지(302)에서, 디코더는 그 부분을 예측 데이터(206) 및 양자화된 변환 계수(216)로 디코딩할 수 있다. 디코더는 재구성된 잔차 BPU(222)를 생성하기 위해 양자화된 변환 계수(216)를 역양자화 스테이지(218) 및 역변환 스테이지(220)에 공급할 수 있다. 디코더는 예측된 BPU(208)를 생성하기 위해 예측 데이터(206)를 예측 스테이지(204)로 공급할 수 있다. 디코더는 예측된 참조(224)를 생성하기 위해 재구성된 잔차 BPU(222)를 예측된 BPU(208)에 더할 수 있다. 일부 실시예에서, 예측된 참조(224)는 버퍼(예컨대, 컴퓨터 메모리의 디코딩된 픽처 버퍼)에 저장될 수 있다. 디코더는 프로세스(300A)의 다음 반복에서 예측 동작을 수행하기 위해, 예측된 참조(224)를 예측 스테이지(204)에 공급할 수 있다.
디코더는 인코딩된 픽처의 각각의 인코딩된 BPU를 디코딩하고, 인코딩된 픽처의 다음 인코딩된 BPU를 인코딩하기 위해 예측된 참조(224)를 생성하도록, 프로세스(300A)를 반복적으로 수행할 수 있다. 인코딩된 픽처의 모든 인코딩된 BPU를 디코딩한 이후에, 디코더는 디스플레이를 위해 픽처를 비디오 스트림(304)에 출력하고, 비디오 비트스트림(228)에서 다음 인코딩된 픽처를 디코딩하도록 진행할 수 있다.
이진 디코딩 스테이지(302)에서, 디코더는 인코더에 의해 사용된 이진 코딩 기법(예컨대, 엔트로피 코딩, 가변 길이 코딩, 산술 코딩, 허프만 코딩, 컨텍스트-적응적 이진 산술 코딩 또는 임의의 다른 무손실 압축 알고리즘)의 역동작을 수행할 수 있다. 일부 실시예에서, 예측 데이터(206) 및 양자화된 변환 계수(216) 이외에, 디코더는 예컨대, 예측 모드, 예측 동작의 파라미터, 변환 타입, 양자화 프로세스의 파라미터(예컨대, 양자화 파라미터), 인코더 제어 파라미터(예컨대, 비트레이트 제어 파라미터) 등과 같은 다른 정보를 이진 디코딩 스테이지(302)에서 디코딩할 수 있다. 일부 실시예에서, 비디오 비트스트림(228)이 네트워크를 통해 패킷으로 송신되는 경우, 디코더는 이를 이진 디코딩 스테이지(302)에 공급하기 전에, 비디오 비트스트림(228)을 디패킷화(depacketize)할 수 있다.
도 3b는 본 개시의 일부 실시예와 일치하는 다른 예시적인 디코딩 프로세스(300B)의 개략도를 예시한다. 프로세스(300B)는 프로세스(300A)로부터 수정될 수 있다. 예컨대, 프로세스(300B)는 하이브리드 비디오 코딩 표준(예컨대, H.26x 시리즈)에 따르는 디코더에 의해 사용될 수 있다. 프로세스(300A)와 비교하면, 프로세스(300B)는 예측 스테이지(204)를 공간 예측 스테이지(2042) 및 시간 예측 스테이지(2044)로 추가적으로 분할하고, 루프 필터 스테이지(232) 및 버퍼(234)를 추가적으로 포함한다.
프로세스(300B)에서, 디코딩되는 인코딩된 픽처("현재 픽처"로 지칭됨)의 인코딩된 기본 처리 유닛("현재 BPU"로 지칭됨)에 대해, 디코더에 의해 이진 디코딩 스테이지(302)로부터 디코딩된 예측 데이터(206)는 인코더에 의해 현재 BPU를 인코딩하는 데 어느 예측 모드가 사용되었는지에 의존하여, 다양한 타입의 데이터를 포함할 수 있다. 예컨대, 현재 BPU를 인코딩하기 위해, 인코더에 의해 인트라 예측이 사용된 경우, 예측 데이터(206)는 인트라 예측을 나타내는 예측 모드 표시자(예컨대, 플래그 값), 인트라 예측 동작의 파라미터 등을 포함할 수 있다. 인트라 예측 동작의 파라미터는 예컨대, 참조로서 사용된 하나 이상의 이웃하는 BPU의 위치(예컨대, 좌표), 이웃하는 BPU의 크기, 외삽의 파라미터, 원본 BPU에 대한 이웃하는 BPU의 방향 등을 포함할 수 있다. 다른 예에 대해, 현재 BPU를 인코딩하기 위해, 인코더에 의해 인터 예측이 사용된 경우, 예측 데이터(206)는 인터 예측을 나타내는 예측 모드 표시자(예컨대, 플래그 값), 인터 예측 동작의 파라미터 등을 포함할 수 있다. 인터 예측 동작의 파라미터는 예컨대, 현재 BPU와 연관된 참조 픽처의 개수, 참조 픽처와 각각 연관된 가중치, 각각의 참조 픽처에서의 하나 이상의 매칭 영역의 위치(예컨대, 좌표), 매칭 영역과 각각 연관된 하나 이상의 움직임 벡터 등을 포함할 수 있다.
예측 모드 표시자에 기초하여, 디코더는 공간 예측 스테이지(2042)에서 공간 예측(예컨대, 인트라 예측)을 수행할지, 또는 시간 예측 스테이지(2044)에서 시간 예측(예컨대, 인터 예측)을 수행할지를 결정할 수 있다. 이러한 공간 예측 또는 시간 예측을 수행하는 것에 대한 세부사항이 도 2b에서 설명되고, 이하에서는 반복되지 않을 것이다. 이러한 공간 예측 또는 시간 예측을 수행한 이후에, 디코더는 예측된 BPU(208)를 생성할 수 있다. 도 3a에서 설명된 바와 같이, 디코더는 예측 참조(224)를 생성하기 위해 예측된 BPU(208) 및 재구성된 잔차 BPU(222)를 더한다.
프로세스(300B)에서, 디코더는 프로세스(300B)의 다음 반복에서 예측 동작을 수행하기 위해, 예측된 참조(224)를 공간 예측 스테이지(2042) 또는 시간 예측 스테이지(2044)에 공급할 수 있다. 예컨대, 현재 BPU가 공간 예측 스테이지(2042)에서 인트라 예측을 사용하여 디코딩되는 경우, 예측 참조(224)(예컨대, 디코딩된 현재 BPU)를 생성한 이후에, 디코더는 차후 사용을 위해(예컨대, 현재 픽처의 다음 BPU의 외삽을 위해) 예측 참조(224)를 공간 예측 스테이지(2042)에 직접적으로 공급할 수 있다. 현재 BPU가 시간 예측 스테이지(2044)에서 인터 예측을 사용하여 디코딩되는 경우, 예측 참조(224)(예컨대, 모든 BPU가 디코딩된 참조 픽처)를 생성한 이후에, 인코더는 왜곡(예컨대, 블로킹 아티팩트)을 감소시키거나 제거하기 위해, 예측 참조(224)를 루프 필터 스테이지(232)에 공급할 수 있다. 도 2b에 설명된 방식으로, 디코더는 루프 필터를 예측 참조(224)에 적용할 수 있다. 루프-필터링된 참조 픽처는 차후 사용을 위해(예컨대, 비디오 비트스트림(228)의 향후 인코딩된 픽처에 대한 인터-예측 참조 픽처로서 사용되도록) 버퍼(234)(예컨대, 컴퓨터 메모리에서 디코딩된 픽처 버퍼)에 저장될 수 있다. 디코더는 시간 예측 스테이지(2044)에서 사용되도록 버퍼(234)에 하나 이상의 참조 픽처를 저장할 수 있다. 일부 실시예에서, 예측 데이터(206)의 예측 모드 표시자가 인터 예측이 현재 BPU를 인코딩하는데 사용된 것을 나타낼 때, 예측 데이터는 루프 필터의 파라미터(예컨대, 루프 필터 강도)를 더 포함할 수 있다.
도 4는 본 개시의 일부 실시예와 일치하는, 비디오를 인코딩하거나 또는 디코딩하기 위한 예시적인 장치(400)의 블록도이다. 도 4에 도시된 바와 같이, 장치(400)는 프로세서(402)를 포함할 수 있다. 프로세서(402)가 본원에서 설명된 명령어를 실행할 때, 장치(400)는 비디오 인코딩 또는 디코딩을 위한 특별화된 기계가 될 수 있다. 프로세서(402)는 정보를 조작하거나 또는 처리할 수 있는 임의의 타입의 회로일 수 있다. 예컨대, 프로세서(402)는 중앙 처리 유닛(또는 "CPU"), 그래픽 처리 유닛(또는 "GPU"), 신경 처리 유닛(neural processing unit, "NPU"), 마이크로컨트롤러 유닛(microcontroller unit, "MCU"), 광학 프로세서, 프로그래머블 로직 컨트롤러, 마이크로컨트롤러, 마이크로프로세서, 디지털 신호 프로세서, 지적 재산권(intellectual property, IP) 코어, 프로그래머블 로직 어레이(Programmable Logic Array, PLA), 프로그래머블 어레이 로직(Programmable Array Logic, PAL), 일반 어레이 로직(Generic Array Logic, GAL), 복합 프로그래머블 논리 소자(Complex Programmable Logic Device, CPLD), 현장 프로그래머블 게이트 어레이(Field-Programmable Gate Array, FPGA), 시스템 온 칩(System On Chip, SoC), 애플리케이션-특정 집적 회로(Application-Specific Integrated Circuit, ASIC) 등의 임의의 개수의 임의의 조합을 포함할 수 있다. 일부 실시예에서, 프로세서(402)는 또한, 단일 로직 구성요소로서 그룹화되는 프로세서의 세트일 수 있다. 예컨대, 도 4에 도시된 바와 같이, 프로세서(402)는 프로세서(402a), 프로세서(402b) 및 프로세서(402n)를 포함하는 다수의 프로세서를 포함할 수 있다.
장치(400)는 또한, 데이터(예컨대, 명령어의 세트, 컴퓨터 코드, 중간 데이터 등)를 저장하도록 구성되는 메모리(404)를 포함할 수 있다. 예컨대, 도 4에 도시된 바와 같이, 저장된 데이터는 프로그램 명령어(예컨대, 프로세스(200A, 200B, 300A 또는 300B)에서의 스테이지를 구현하기 위한 프로그램 명령어) 및 처리를 위한 데이터(예컨대, 비디오 시퀀스(202), 비디오 비트스트림(228) 또는 비디오 스트림(304))를 포함할 수 있다. 프로세서(402)는 프로그램 명령어 및 처리를 위한 데이터에 (예컨대, 버스(410)를 통해) 액세스할 수 있고, 처리를 위한 데이터에 대한 동작 또는 조작을 수행하기 위해 프로그램 명령어를 실행할 수 있다. 메모리(404)는 고속 랜덤 액세스 저장 디바이스 또는 비-휘발성 저장 디바이스를 포함할 수 있다. 일부 실시예에서, 메모리(404)는 랜덤-액세스 메모리(random-access memory, RAM), 읽기-전용 메모리(ROM), 광학 디스크, 자기 디스크, 하드 드라이브, 솔리드-스테이트 드라이브(solid-state drive), 플래시 드라이브, 보안 디지털(SD) 카드, 메모리 스틱, 콤팩트 플래시(compact flash, CF) 카드 등의 임의의 개수의 임의의 조합을 포함할 수 있다. 메모리(404)는 또한, 단일 로직 구성요소로서 그룹화되는 메모리의 그룹(도 4에 미도시됨)일 수 있다.
버스(410)는 내부 버스(예컨대, CPU-메모리 버스), 외부 버스(예컨대, 통합 직렬 버스 포트(universal serial bus port,), 주변 구성요소 상호연결 고속 포트(peripheral component interconnect express port)) 등과 같은, 장치(400) 내의 구성요소 사이에서 데이터를 전송하는 통신 디바이스일 수 있다.
모호성을 야기하지 않으면서 설명의 용이함을 위해, 프로세서(402) 및 다른 데이터 처리 회로는 본 개시에서, 집합적으로 "데이터 처리 회로"로 지칭된다. 데이터 처리 회로는 전체적으로 하드웨어로 구현되거나, 또는 소프트웨어, 하드웨어 또는 펌웨어의 조합으로 구현될 수 있다. 덧붙여, 데이터 처리 회로는 단일 독립 모듈이거나, 또는 장치(400)의 임의의 다른 구성요소로 전체적으로 또는 부분적으로 결합될 수 있다.
장치(400)는 네트워크(예컨대, 인터넷, 인트라넷, 근거리 통신망, 모바일 통신 네트워크 등)와의 유선 통신 또는 무선 통신을 제공하기 위해 네트워크 인터페이스(406)를 더 포함할 수 있다. 일부 실시예에서, 네트워크 인터페이스(406)는 네트워크 인터페이스 컨트롤러(network interface controller, NIC), 무선 주파수(radio frequency, RF) 모듈, 트랜스폰더(transponder), 트랜시버, 모뎀, 라우터, 게이트웨이, 유선 네트워크 어댑터, 무선 네트워크 어댑터, 블루투스 어댑터, 적외선 어댑터, 근거리 통신("NFC") 어댑터, 셀룰러 네트워크 칩 등의 임의의 개수의 임의의 조합을 포함할 수 있다.
일부 실시예에서, 선택적으로, 장치(400)는 하나 이상의 주변 디바이스에 대한 연결을 제공하기 위한 주변 인터페이스(408)를 더 포함할 수 있다. 도 4에 도시된 바와 같이, 주변 디바이스는 커서 제어 디바이스(예컨대, 마우스, 터치패드 또는 터치스크린), 키보드, 디스플레이(예컨대, 음극선관 디스플레이, 액정 디스플레이 또는 발광 다이오드 디스플레이), 비디오 입력 디바이스(예컨대, 비디오 아카이브(video archive)에 결합된 입력 인터페이스 또는 카메라) 등을 포함할 수 있지만, 이에 제한되지 않는다.
비디오 코덱(예컨대, 프로세스(200A, 200B, 300A 또는 300B)를 수행하는 코덱)이 장치(400)에서 임의의 소프트웨어 또는 하드웨어 모듈의 임의의 조합으로 구현될 수 있다는 것이 유의되어야 한다. 예컨대, 프로세스(200A, 200B, 300A 또는 300B)의 일부 또는 모든 스테이지는 메모리(404)에 로딩될 수 있는 프로그램 명령어와 같은 장치(400)의 하나 이상의 소프트웨어 모듈로서 구현될 수 있다. 다른 예에 대해, 프로세스(200A, 200B, 300A 또는 300B)의 일부 또는 모든 스테이지는 특수화된 데이터 처리 회로(예컨대, FPGA, ASIC, NPU 등)와 같은 장치(400)의 하나 이상의 하드웨어 모듈로서 구현될 수 있다.
VVC에서, 루프 필터 이전에 새로운 처리 블록으로서 LMCS(luma mapping with chroma scaling)로 불리는 코딩 도구가 추가될 수 있다. LMCS는 두 개의 주요 성분(components): 1) 적응형 구역별 선형 모델(adaptive piecewise linear models)을 기초로 하는 루마 성분(luma component)의 인-루프 매핑(in-loop mapping); 및 2) 크로마 성분에 대해, 적용되는 루마-의존 크로마 잔차 스케일링을 갖는다. 루마 성분의 인-루프 매핑은 압축 효율을 개선하기 위해 동적 범위에 걸쳐 코드워드(codewords)를 재분배함으로써 입력 신호의 동적 범위를 조정한다. 크로마 잔차 스케일링은 루마 신호와 그의 대응하는 크로마 신호 간의 상호 작용을 보상하도록 설계된다.
VVC(예를 들어, VVC 드래프트 8)에서, LMCS는 시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 제어될 수 있다. 도 5는 시퀀스 레벨에서 LMCS(luma mapping with chroma scaling)를 가능하게 하는 제어 변수를 포함하는 예시적인 의사 코드를 도시한다. 도 5에 도시된 바와 같이, sps_lmcs_enabled_flag가 1과 동일할 때, LMCS(luma mapping with chroma scaling)는 코딩된 계층 비디오 시퀀스("coded layer video sequence, CLVS")에서 사용된다. sps_lmcs_enabled_flag가 0과 동일할 때, LMCS(luma mapping with chroma scaling)는 CLVS에서 사용되지 않는다.
도 6은 픽처 헤더에서 LMCS(luma mapping with chroma scaling)를 가능하게 하기 위한 제어 변수를 포함하는 예시적인 의사 코드를 도시한다. 도 6에 도시된 바와 같이, ph_lmcs_enabled_flag가 1과 동일할 때, PH와 연관된 모든 슬라이스에 대해 LMCS(luma mapping with chroma scaling)가 활성화된다. ph_lmcs_enabled_flag가 0과 동일할 때, LMCS(luma mapping with chroma scaling)는 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 턴 오프될 수 있다. ph_lmcs_enabled_flag의 값은, 존재하지 않을 때 0과 동일한 것으로 추론된다.
도 6에 도시된 바와 같이, 크로마 잔차 스케일링 프로세스는 픽처 레벨 플래그(예를 들어, ph_chroma_residual_scale 플래그)로 별도로 제어될 수 있다. ph_chroma_residual_scale_flag가 1과 동일할 때, PH와 연관된 모든 슬라이스에 대해 크로마 잔차 스케일링이 활성화된다. ph_chroma_residual_scale_flag가 0과 동일할 때, PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 크로마 잔차 스케일링이 턴 오프될 수 있다. ph_chroma_residual_scale_flag가 존재하지 않을 때, 이는 0과 동일한 것으로 추론된다.
도 7은 슬라이스 헤더에서 LMCS(luma mapping with chroma scaling)를 가능하게 하기 위한 제어 변수를 포함하는 예시적인 의사 코드를 도시한다. 도 7에 도시된 바와 같이, slice_lmcs_enabled_flag가 1과 동일할 때, LMCS(luma mapping with chroma scaling)는 현재 슬라이스에 대해 활성화된다. slice_lmcs_enabled_flag가 0과 동일할 때, 현재 슬라이스에 대해 LMCS(luma mapping with chroma scaling)는 활성화되지 않는다. slice_lmcs_enabled_flag가 존재하지 않을 때, 이는 0과 동일한 것으로 추론된다.
적응적 루프 필터("ALF")는 샘플의 왜곡을 감소시켜 코딩 효율을 개선하기 위해 재구성된 샘플에 적용될 수 있는 인-루프 필터이다. 필터 계수는 인코더에 의해 결정되고 비트스트림으로 시그널링된다.
VVC(예를 들어, VVC 드래프트 8)에서, ALF는 시퀀스 레벨에서, 그리고 픽처 레벨 또는 슬라이스 레벨 중 하나에서 제어될 수 있다. ALF는 픽처 레벨 및 슬라이스 레벨 모두에서 적용되지 않을 수 있다. 도 8a는 시퀀스 파라미터 세트에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 8b는 픽처 파라미터 세트에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 9는 픽처 헤더에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 10은 슬라이스 헤더에서 적응적 루프 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 8a에 도시된 바와 같이, 시퀀스 파라미터 세트("SPS")에서의 변수 sps_alf_enabled_flag는 CLVS에 대한 ALF를 제어한다. sps_alf_enabled_flag가 1과 동일할 때, CLVS에 대해 ALF가 활성화된다. sps_alf_enabled_flag가 0과 동일할 때, CLVS에 대해 ALF가 비활성화된다. 도 8b, 도 9 및 도 10에 도시된 바와 같이, CLVS에 대해 ALF가 활성화될 때, 이는 ph_alf_enabled_flag에 의해 픽처 레벨에서 또는 slice_alf_enabled_flag에 의해 슬라이스 레벨에서 더 제어될 수 있다. 그것이 픽처 레벨에서 제어되는지 또는 슬라이스 레벨에서 제어되는지는 픽처 파라미터 세트(picture parameter set, "PPS")에서 시그널링되는 플래그 lf_info_in_ph_flag에 의해 결정된다. ph_alf_enabled_flag가 1과 동일할 때, ALF 계수 정보는 픽처 헤더에서 시그널링된다. slice_alf_enabled_flag가 1과 동일할 때, ALF 계수 정보는 슬라이스 헤더에서 시그널링된다.
sps_alf_enabled_flag가 0과 동일할 때, 적응적 루프 필터가 턴 오프된다(예를 들어, 비활성화된다). sps_alf_enabled_flag가 1과 동일할 때, 적응적 루프 필터가 활성화된다.
sps_ccalf_enabled_flag가 0과 동일할 때, 교차-성분 적응적 루프 필터가 턴 오프된다. sps_ccalf_enabled_flag가 1과 동일할 때, 교차-성분 적응적 루프 필터가 활성화될 수 있다.
alf_info_in_ph_flag가 1과 동일할 때, ALF 정보는 PH 신택스 구조에 존재하고, PH 신택스 구조를 포함하지 않는 PPS를 참조하는 슬라이스 헤더에는 존재하지 않는다. alf_info_in_ph_flag가 0과 동일할 때, ALF 정보는 PH 신택스 구조에 존재하지 않고, PH 신택스 구조를 포함하지 않는 PPS를 참조하는 슬라이스 헤더에 존재할 수 있다.
ph_alf_enabled_flag가 1과 동일할 때, 적응적 루프 필터는 PH와 연관된 모든 슬라이스에 대해 활성화되고 슬라이스에서의 Y, Cb 또는 Cr 색상 성분에 적용될 수 있다. ph_alf_enabled_flag가 0과 동일할 때, 적응적 루프 필터는 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 비활성화될 수 있다. ph_alf_enabled_flag는, 존재하지 않을 때 0과 동일한 것으로 추론된다.
변수 ph_num_alf_aps_ids_luma는 PH와 연관된 슬라이스가 참조하는 ALF APS의 수를 지정한다.
변수 ph_alf_aps_id_luma[i]는 PH와 연관된 슬라이스의 루마 성분이 참조하는 i번째 ALF APS의 adaptation_parameter_set_id를 지정한다.
ALF_APS와 동일한 aps_params_type 및 ph_alf_aps_id_luma[i]와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 변수 alf_luma_filter_signal_flag는 1과 동일해야 한다.
ALF_APS와 동일한 aps_params_type 및 ph_alf_aps_id_luma[i]와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 PH와 연관된 픽처의 TemporalId 이하여야 한다.
ph_alf_chroma_idc가 0과 동일할 때, 적응적 루프 필터는 Cb 및 Cr 색상 성분에 적용되지 않는다. ph_alf_chroma_idc가 1과 동일할 때, 적응적 루프 필터는 Cb 색상 성분에 적용된다. ph_alf_chroma_idc가 2와 동일할 때, 적응적 루프 필터는 Cr 색상 성분에 적용된다. ph_alf_chroma_idc가 3과 동일할 때, 적응적 루프 필터는 Cb 및 Cr 색상 성분에 적용된다. ph_alf_chroma_idc가 존재하지 않을 때, 이는 0과 동일한 것으로 추론된다.
변수 ph_alf_aps_id_chroma는 PH와 연관된 슬라이스의 크로마 성분이 참조하는 ALF APS의 adaptation_parameter_set_id를 지정한다.
ALF_APS와 동일한 aps_params_type 및 ph_alf_aps_id_chroma와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_chroma_filter_signal_flag 값은 1과 동일해야 한다.
ALF_APS와 동일한 aps_params_type 및 ph_alf_aps_id_chroma와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 PH와 연관된 픽처의 TemporalId 이하여야 한다.
ph_cc_alf_cb_enabled_flag가 1과 동일할 때, Cb 색상 성분에 대한 교차-성분 필터가 PH와 연관된 모든 슬라이스에 대해 활성화되고, 슬라이스에서의 Cb 색상 성분에 적용될 수 있다. ph_cc_alf_cb_enabled_flag가 0과 동일할 때, Cb 색상 성분에 대한 교차-성분 필터는 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 턴 오프될 수 있다. ph_cc_alf_cb_enabled_flag는, 존재하지 않을 때 0과 동일한 것으로 추론된다.
변수 ph_cc_alf_cb_aps_id는 PH와 연관된 슬라이스의 Cb 색상 성분이 참조하는 ALF APS의 adaptation_parameter_set_id를 지정한다.
ALF_APS와 동일한 aps_params_type 및 ph_cc_alf_cb_aps_id와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_cc_cb_filter_signal_flag의 값은 1과 동일해야 한다.
ph_cc_alf_cr_enabled_flag가 1과 동일할 때, Cr 색상 성분에 대한 교차-성분 필터는 PH와 연관된 모든 슬라이스에 대해 활성화되고, 슬라이스에서의 Cr 색상 성분에 적용될 수 있다. ph_cc_alf_cr_enabled_flag가 0과 동일할 때, Cr 색상 성분에 대한 교차-성분 필터가 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 턴 오프될 수 있다. ph_cc_alf_cr_enabled_flag는, 존재하지 않을 때 0과 동일한 것으로 추론된다.
변수 ph_cc_alf_cr_aps_id는 PH와 연관된 슬라이스의 Cr 색상 성분이 참조하는 ALF APS의 adaptation_parameter_set_id를 지정한다.
ALF_APS와 동일한 aps_params_type 및 ph_cc_alf_cr_aps_id와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_cc_cr_filter_signal_flag 값은 1과 동일해야 한다.
slice_alf_enabled_flag가 1과 동일할 때, 적응적 루프 필터가 활성화되고 슬라이스에서의 Y, Cb 또는 Cr 색상 성분에 적용될 수 있다. slice_alf_enabled_flag가 0과 동일할 때, 슬라이스에서의 모든 색상 성분에 대해 적응적 루프 필터가 턴 오프된다. slice_alf_enabled_flag의 값은 존재하지 않을 때 ph_alf_enabled_flag와 동일한 것으로 추론된다.
변수 slice_num_alf_aps_ids_luma는 슬라이스가 참조하는 ALF APS의 수를 지정한다. slice_alf_enabled_flag가 1과 동일하고 slice_num_alf_aps_ids_luma가 존재하지 않을 때, slice_num_alf_aps_ids_luma의 값은 ph_num_alf_aps_ids_luma의 값과 동일한 것으로 추론된다.
변수 slice_alf_aps_id_luma[i]는 슬라이스의 루마 성분이 참조하는 i번째 ALF APS의 adaptation_parameter_set_id를 지정한다. ALF_APS와 동일한 aps_params_type 및 slice_alf_aps_id_luma[i]와 동일한 adaption_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 코딩된 슬라이스 NAL 유닛의 TemporalId 이하여야 한다. slice_alf_enabled_flag가 1과 동일하고 slice_alf_aps_id_luma[i]가 존재하지 않을 때, slice_alf_aps_id_luma[i]의 값은 ph_alf_aps_id_luma[i]의 값과 동일한 것으로 추론된다.
ALF_APS와 동일한 aps_params_type 및 slice_alf_aps_id_luma[i]와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_luma_filter_signal_flag의 값은 1과 동일해야 한다.
slice_alf_chroma_idc가 0과 동일할 때, 적응적 루프 필터는 Cb 및 Cr 색상 성분에 적용되지 않는다. slice_alf_chroma_idc가 1과 동일할 때, 적응적 루프 필터는 Cb 색상 성분에 적용된다. slice_alf_chroma_idc가 2와 동일할 때, 적응적 루프 필터는 Cr 색상 성분에 적용된다. slice_alf_chroma_idc가 3과 동일할 때, 적응적 루프 필터는 Cb 및 Cr 색상 성분에 적용된다. slice_alf_chroma_idc가 존재하지 않을 때, 이는 ph_alf_chroma_idc와 동일한 것으로 추론된다.
변수 slice_alf_aps_id_chroma는 슬라이스의 크로마 성분이 참조하는 ALF APS의 adaption_parameter_set_id를 지정한다. ALF_APS와 동일한 aps_params_type 및 slice_alf_aps_id_chroma와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 코딩된 슬라이스 NAL 유닛의 TemporalId 이하여야 한다. slice_alf_enabled_flag가 1과 동일하고 slice_alf_aps_id_chroma가 존재하지 않을 때, slice_alf_aps_id_chroma의 값은 ph_alf_aps_id_chroma의 값과 동일한 것으로 추론된다.
ALF_APS와 동일한 aps_params_type 및 slice_alf_aps_id_chroma와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_chroma_filter_signal_flag의 값은 1과 동일해야 한다.
slice_cc_alf_cb_enabled_flag가 0과 동일할 때, 교차-성분 필터는 Cb 색상 성분에 적용되지 않는다. slice_cc_alf_cb_enabled_flag가 1과 동일할 때, 교차-성분 필터가 활성화되고 Cb 색상 성분에 적용될 수 있다. slice_cc_alf_cb_enabled_flag가 존재하지 않을 때, 이는 ph_cc_alf_cb_enabled_flag와 동일한 것으로 추론된다.
변수 slice_cc_alf_cb_aps_id는 슬라이스의 Cb 색상 성분이 참조하는 adaptation_parameter_set_id를 지정한다.
ALF_APS와 동일한 aps_params_type 및 slice_cc_alf_cb_aps_id와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 코딩된 슬라이스 NAL 유닛의 TemporalId 이하여야 한다. slice_cc_alf_cb_enabled_flag가 1과 동일하고 slice_cc_alf_cb_aps_id가 존재하지 않을 때, slice_cc_alf_cb_aps_id의 값은 ph_cc_alf_cb_aps_id의 값과 동일한 것으로 추론된다.
ALF_APS와 동일한 aps_params_type 및 slice_cc_alf_cb_aps_id와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 alf_cc_cb_filter_signal_flag의 값은 1과 동일해야 한다.
slice_cc_alf_cr_enabled_flag가 0과 동일할 때, 교차-성분 필터는 Cr 색상 성분에 적용되지 않는다. slice_cc_alf_cb_enabled_flag가 1과 동일할 때, 교차-성분 적응적 루프 필터가 활성화되고 Cr 색상 성분에 적용될 수 있다. slice_cc_alf_cr_enabled_flag가 존재하지 않을 때, 이는 ph_cc_alf_cr_enabled_flag와 동일한 것으로 추론된다.
변수 slice_cc_alf_cr_aps_id는 슬라이스의 Cr 색상 성분이 참조하는 adaptation_parameter_set_id를 지정한다. ALF_APS와 동일한 aps_params_type 및 slice_cc_alf_cr_aps_id와 동일한 adaptation_parameter_set_id를 갖는 APS NAL 유닛의 TemporalId는 코딩된 슬라이스 NAL 유닛의 TemporalId 이하여야 한다. slice_cc_alf_cr_enabled_flag가 1과 동일하고 slice_cc_alf_cr_aps_id가 존재하지 않을 때, slice_cc_alf_cr_aps_id의 값은 ph_cc_alf_cr_aps_id의 값과 동일한 것으로 추론된다.
ALF_APS와 동일한 aps_params_type 및 slice_cc_alf_cr_aps_id와 동일한 adaption_parameter_set_id를 갖는 APS NAL 유닛의 alf_cc_cr_filter_signal_flag의 값은 1과 동일해야 한다.
샘플 적응적 오프셋("SAO")은 샘플의 왜곡을 감소시키기 위해 재구성된 샘플에 오프셋을 추가한다. SAO에서는 두 개의 종류의 오프셋 모드 즉, 엣지 오프셋(edge offset, "EO") 모드 및 대역 오프셋(band offset, "BO") 모드가 지원된다. 엣지 오프셋 모드의 경우, 코딩 트리 유닛("CTU")에서의 샘플은 먼저 5개의 클래스로 분류되고, 이 중 4개의 클래스에서의 샘플은 대응하는 오프셋을 갖는다. 그러므로, 인코더에 의해 하나의 클래스에 대해 하나의 오프셋씩, 4개의 오프셋 값이 결정된다. 분류 방법 및 오프셋의 값은 CTU 레벨에서 비트스트림으로 시그널링된다. 대역 오프셋 모드의 경우, 샘플 값에 따라 CTU에서의 샘플은 32개의 대역으로 분할되고, 그 중 4개의 대역에서의 샘플은 대응하는 오프셋을 갖는다. 오프셋될 4개의 대역 및 대응하는 오프셋은 비트스트림으로 시그널링된다.
VVC(예를 들어, VVC 드래프트 8)에서 ALF와 마찬가지로, SAO는 시퀀스 레벨, 그리고 픽처 레벨 또는 슬라이스 레벨 중 하나의 레벨에서 제어될 수 있다. SAO는 픽처 레벨 및 슬라이스 레벨 모두에서 제어되지 않을 수 있다. 도 11은 시퀀스 파라미터 세트에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 12는 픽처 파라미터 세트에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 13은 픽처 헤더에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 14는 슬라이스 헤더에서 샘플 적응적 오프셋 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 11에 도시된 바와 같이, SPS에서의 변수 sps_sao_enabled_flag는 CLVS에 대한 SAO를 제어한다. sps_sao_enabled_flag가 1과 동일할 때, CLVS에 대해 SAO가 활성화된다. sps_sao_enabled_flag가 0과 동일할 때, CLVS에 대해 SAO가 턴 오프된다.
도 12, 도 13 및 도 14에 도시된 바와 같이, SAO가 CLVS에 대해 활성화될 때, 이는 ph_sao_luma_enabled_flag/ph_sao_chroma_enabled_flag에 의해 픽처 레벨에서 또는 slice_sao_luma_flag/slice_sap_chroma_flag에 의해 슬라이스 레벨에서 더 제어될 수 있다. 그것이 픽처 레벨에서 제어되는지 또는 슬라이스 레벨에서 제어되는지는 PPS에서 시그널링되는 플래그 sao_info_in_ph_flag에 의해 결정된다.
sps_sao_enabled_flag가 1과 동일할 때, 샘플 적응적 오프셋 프로세스는 디블로킹 필터 프로세스 이후에 재구성된 픽처에 적용된다. sps_sao_enabled_flag가 0과 동일할 때, 샘플 적응적 오프셋 프로세스는 디블로킹 필터 프로세스 이후에 재구성된 픽처에 적용되지 않는다.
sao_info_in_ph_flag가 1과 동일할 때, SAO 필터 정보는 PH 신택스 구조에 존재하고 PH 신택스 구조를 포함하지 않는 PPS를 참조하는 슬라이스 헤더에는 존재하지 않는다. sao_info_in_ph_flag가 0과 동일할 때, SAO 필터 정보는 PH 신택스 구조에 존재하지 않고 PH 신택스 구조를 포함하지 않는 PPS를 참조하는 슬라이스 헤더에 존재할 수 있다.
ph_sao_luma_enabled_flag가 1과 동일할 때, SAO는 PH와 연관된 모든 슬라이스에서 루마 성분에 대해 활성화된다. ph_sao_luma_enabled_flag가 0과 동일할 때, 루마 성분에 대한 SAO는 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 턴 오프될 수 있다. ph_sao_luma_enabled_flag가 존재하지 않을 때, 이는 0과 동일한 것으로 추론된다.
ph_sao_chroma_enabled_flag가 1과 동일할 때, 그 SAO는 PH와 연관된 모든 슬라이스에서의 크로마 성분에 대해 활성화된다. ph_sao_chroma_enabled_flag가 0과 동일할 때, 크로마 성분에 대한 SAO는 PH와 연관된 하나의, 그 이상의 또는 모든 슬라이스에 대해 턴 오프될 수 있다. ph_sao_chroma_enabled_flag가 존재하지 않을 때, 이는 0과 동일한 것으로 추론된다.
slice_sao_luma_flag가 1과 동일할 때, SAO는 현재 슬라이스에서의 루마 성분에 대해 활성화된다. slice_sao_luma_flag가 0과 동일할 때, SAO는 현재 슬라이스의 루마 성분에 대해 턴 오프된다. slice_sao_luma_flag가 존재하지 않을 때, 이는 ph_sao_luma_enabled_flag와 동일한 것으로 추론된다.
slice_sao_chroma_flag가 1과 동일할 때, SAO는 현재 슬라이스에서의 크로마 성분에 대해 활성화된다. slice_sao_chroma_flag가 0과 동일할 때, SAO는 현재 슬라이스에서의 크로마 성분에 대해 턴 오프된다. slice_sao_chroma_flag가 존재하지 않을 때, 이는 ph_sao_chroma_enabled_flag와 동일한 것으로 추론된다.
디블로킹 필터("DBF")는 블록 아티팩트를 감소시키기 위해 블록의 경계에 적용되는 필터이다. VVC(예를 들어, VVC 드래프트 8)에서 DBF 비활성화 플래그 및 파라미터는 PPS에서 시그널링된다. 덧붙여, 오버라이딩 활성화 플래그 deblocking_filter_override_enabled_flag가 또한, DBF 비활성화 플래그 및 파라미터가 낮은 레벨에서 오버라이드될 수 있는지를 나타내기 위해 시그널링된다. 그러한 경우, 플래그 dbf_info_in_ph_flag는 DBF 비활성화 플래그 및 파라미터가 픽처 헤더 또는 슬라이스 헤더에서 오버라이드되는지를 나타내기 위해 시그널링된다.
도 15는 픽처 파라미터 세트에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 16은 픽처 헤더에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 17은 슬라이스 헤더에서 디블로킹 필터 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 15, 도 16 및 도 17에 도시된 바와 같이, 픽처 헤더에서 DBF 비활성화 플래그 및 파라미터가 오버라이드된 경우, 픽처 레벨 DBF 비활성화 플래그 및 DBF 파라미터가 픽처 헤더에서 시그널링될 수 있다. 슬라이스 헤더에서 DBF 비활성화 플래그 및 파라미터가 오버라이드되는 경우, 슬라이스 레벨 DBF 비활성화 플래그 및 DBF 파라미터가 슬라이스 헤더에서 시그널링될 수 있다.
deblocking_filter_control_present_flag가 1과 동일할 때, 디블로킹 필터 제어 신택스 요소는 PPS에 존재한다. deblocking_filter_control_present_flag가 0과 동일할 때, 디블로킹 필터 제어 신택스 요소는 PPS에 존재하지 않는다.
deblocking_filter_override_enabled_flag가 1과 동일할 때, PPS를 참조하는 PH에 ph_deblocking_filter_override_flag가 존재하거나, 또는 PPS를 참조하는 슬라이스 헤더에 slice_deblocking_filter_override_flag가 존재한다. deblocking_filter_override_enabled_flag가 0과 동일할 때, PPS를 참조하는 PH에 ph_deblocking_filter_override_flag가 존재하지 않거나, 또는 PPS를 참조하는 슬라이스 헤더에 slice_deblocking_filter_override_flag가 존재하지 않는다. deblocking_filter_override_enabled_flag의 값은, 존재하지 않을 때 0과 동일한 것으로 추론된다.
pps_deblocking_filter_disabled_flag가 1과 동일할 때, slice_deblocking_filter_disabled_flag가 존재하지 않는 PPS를 참조하는 슬라이스에 대해서는 디블로킹 필터의 동작이 적용되지 않는다. pps_deblocking_filter_disabled_flag가 0과 동일할 때, slice_deblocking_filter_disabled_flag가 존재하지 않는 PPS를 참조하는 슬라이스에 대해 디블로킹 필터의 동작이 적용된다. pps_deblocking_filter_disabled_flag의 값은, 존재하지 않을 때 0과 동일한 것으로 추론된다.
ph_deblocking_filter_override_flag가 1과 동일할 때, 디블로킹 파라미터는 PH에 존재한다. ph_deblocking_filter_override_flag가 0과 동일할 때, 디블로킹 파라미터는 PH에 존재하지 않는다. ph_deblocking_filter_override_flag의 값은, 존재하지 않을 때 0과 동일한 것으로 추론된다.
ph_deblocking_filter_disabled_flag가 1과 동일할 때, 디블로킹 필터의 동작은 PH와 연관된 슬라이스에 대해 적용되지 않는다. ph_deblocking_filter_disabled_flag가 0과 동일할 때, 디블로킹 필터의 동작은 PH와 연관된 슬라이스에 대해 적용된다. ph_deblocking_filter_disabled_flag가 존재하지 않을 때, 이는 pps_deblocking_filter_disabled_flag와 동일한 것으로 추론된다.
slice_deblocking_filter_override_flag가 1과 동일할 때, 디블로킹 파라미터는 슬라이스 헤더에 존재한다. slice_deblocking_filter_override_flag가 0과 동일할 때, 디블로킹 파라미터는 슬라이스 헤더에 존재하지 않는다. slice_deblocking_filter_override_flag의 값은, 존재하지 않을 때 ph_deblocking_filter_override_flag와 동일한 것으로 추론된다.
slice_deblocking_filter_disabled_flag가 1과 동일할 때, 현재 슬라이스에 대해 디블로킹 필터의 동작이 적용되지 않는다. slice_deblocking_filter_disabled_flag가 0과 동일할 때, 현재 슬라이스에 대해 디블로킹 필터의 동작이 적용된다. slice_deblocking_filter_disabled_flag가 존재하지 않을 때, 이는 ph_deblocking_filter_disabled_flag와 동일한 것으로 추론된다.
VVC의 현재 설계에는 다수의 문제가 있다. 첫째, LMCS는 CLVS 레벨, 픽처 레벨 및 슬라이스 레벨에서 제어될 수 있다. 더 높은 레벨 활성화 플래그가 LMCS를 활성화할 때, 더 낮은 레벨이 LMCS를 턴 오프할 수 있다. 다시 말해서, 더 낮은 레벨 활성화 플래그가 LMCS를 턴 오프할 수 있기 때문에, 주어진 레벨에서 1과 동일한 활성화 플래그가 LMCS가 활성화되어야 한다는 것을 의미하지는 않는다. 유사하게, SPS 활성화 플래그가 ALF 및 SAO를 활성화할 때, 픽처 레벨 또는 슬라이스 레벨 활성화 플래그가 이들을 턴 오프할 수 있다. 결과적으로, 현재 의미가 정확하지 않다.
더욱이, ph_lmcs_enabled_flag가 1과 동일할 때, ph_chroma_residual_scale_flag는 여전히 현재 픽처에 대한 크로마 스케일링을 턴 오프(예를 들어, 비활성화)할 수 있다. 결과적으로, 1과 동일한 ph_lmcs_enabled_flag가 크로마 스케일링이 활성화되어야 한다는 것을 의미하진 않는다. 그러므로, 현재 의미는 정확하지 않다.
다른 문제는 신택스 일관성에 있다. ALF/SAO와 LMCS 신택스 사이에는 몇 가지 불일치가 있다. LMCS는 세 개의 레벨 즉, SPS, PH 및 SH에서 제어될 수 있다. LMCS가 더 높은 레벨에서 활성화될 때, 더 낮은 레벨이 이를 턴 오프할 수 있다. LMCS가 더 높은 레벨에서 턴 오프될 때, 더 낮은 레벨이 이를 활성화하지 않을 수 있다. 하지만, ALF 및 SAO의 경우, 이들은 두 개의 레벨, 즉 SPS와, PH 또는 SH 중 하나에서만 제어될 수 있다. ALF 및 SAO에 대한 PH 레벨 제어 또는 SH 레벨 제어의 결정은 PPS에서의 플래그에 의해 결정된다. 결과적으로, 제어 메커니즘은 LMCS와 ALF/SAO 간에 상이하다.
덧붙여, ALF가 PH에서 제어되고 활성화될 때, ALF의 파라미터 정보는 PH에서 시그널링된다. ALF가 SH에서 제어되고 활성화될 때, ALF의 파라미터 정보는 SH에서 시그널링된다. 그러므로, ALF의 경우 제어가 슬라이스 레벨에 있을 때, 상이한 슬라이스는 상이한 ALF 파라미터를 가질 수 있다. 대조적으로, LMCS에 대해, SH는 활성화되거나 또는 턴 오프(예를 들어, 비활성화)될 수 있지만, 활성화될 때 파라미터 정보를 시그널링할 수 없다. 다시 말해서, LMCS 파라미터는 동일한 픽처 내에서 (LMCS를 활성화하는) 모든 슬라이스에 대해 동일해야 한다. 이는 ALF와 LMCS 간의 다른 불일치이다.
제3 문제는 디블로킹 필터 신택스에 있다. 전체 CLVS에 대해 DBF를 비활성화하기 위한 어떠한 SBS 비활성화 플래그도 없다. 더욱이, pps_deblocking_filter_disabled_flag 및 ph_deblocking_filter_disabled_flag의 의미는 정확하지 않다. VVC(예를 들어, VVC 드래프트 8)에서, 1(또는 0)과 동일한 pps_deblocking_filter_disabled_flag는 slice_deblocking_filter_disabled_flag가 존재하지 않는 PPS를 참조하는 슬라이스에 대해 디블로킹 필터의 동작이 적용되지 않는다는 것을(또는 적용된다는 것을) 지정한다. 하지만, ph_deblocking_filter_disabled_flag는 pps_deblocking_filter_disabled_flag를 오버라이드할 수 있으며, 따라서 pps_deblocking_filter_disabled_flag의 의미는 정확하지 않다. 추가적으로, VVC(예를 들어, VVC 드래프트 8)에 따라, 1(또는 0)과 동일한 ph_deblocking_filter_disabled_flag는 디블로킹 필터의 동작이 PH와 연관된 슬라이스에 대해 적용되지 않는다는 것을(또는 적용된다는 것을) 지정한다. ph_deblocking_filter_disabled_flag가 존재하지 않을 때, 이는 pps_deblocking_filter_disabled_flag와 동일한 것으로 추론된다. 하지만, slice_deblocking_filter_disabled_flag가 pps_deblocking_filter_disabled_flag를 오버라이드하는 경우, ph_deblocking_filter_disabled_flag가 존재하지 않으며, 따라서 이는 pps_deblocking_filter_disabled_flag와 동일한 것으로 추론된다. 그러나 pps_deblocking_filter_disabled_flag가 slice_deblocking_filter_disabled_flag에 의해 오버라이드되므로, pps_deblocking_filter_disabled_flag의 값은 그 슬라이스에 적용되지 않을 수 있다. 따라서, ph_deblocking_filter_disabled_flag의 의미는 정확하지 않다.
본 개시의 실시예는 위에서 설명된 문제를 해결하기(combat) 위한 방법을 제공한다. 일부 실시예에서, 의미는 높은 레벨 활성화 플래그가 LMCS, ALF 및 SAO를 활성화할 때 LMCS, ALF 및 SAO의 낮은 레벨 활성화 플래그가 LMCS, ALF 및 SAO를 턴오프(예를 들어, 비활성화)할 수 있고, LMCS 플래그가 활성화될 때 크로마 스케일링이 턴오프될 수 있다는 고려를 기초로 수정될 수 있다. 도 18은 본 개시의 일부 실시예에 따른, LMCS(luma mapping with chroma scaling), 적응적 루프 필터 및 샘플 적응적 오프셋에 대한 예시적인 의미를 도시한다. 도 18에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다.
일부 실시예에서, 의미는 다음 방식으로 수정될 수 있다: ALF 또는 SAO가 더 높은 레벨에서 활성화될 때, 더 낮은 레벨이 이들을 턴 오프할 수 있다. ALF 또는 SAO가 더 높은 레벨에서 턴 오프될 때, 더 낮은 레벨이 이들을 활성화하지 않을 수 있다. 더욱이, ALF의 경우, 이는 SH에서 제어될 때, 활성화 또는 비활성화만 될 수 있고, 슬라이스 특정 ALF 파라미터는 SH에서 시그널링되지 않을 수 있다. 결과적으로, 픽처에서의 모든 슬라이스는 동일한 ALF 파라미터를 공유할 수 있다.
도 19는 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다. 도 20은 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 21은 본 개시의 일부 실시예에 따른, 적응적 루프 필터에 대한 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 19, 도 20 및 도 21에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다. 도 19, 도 20 및 도 21에 도시된 바와 같이, PPS 레벨 시그널링은 alf_info_in_ph_flag를 제거하고, 슬라이스 헤더에서 ALF 파라미터 시그널링 신택스를 정리함으로써 단순화된다.
도 22는 본 개시의 일부 실시예에 따른, 적응적 루프 필터의 픽처 헤더 신택스, 슬라이스 헤더 신택스 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다. 도 22에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다. 도 22에 도시된 의미는 도 19, 도 20 또는 도 21에서의 의사 코드에 적용될 수 있다는 것이 인식된다.
도 23은 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다. 도 24는 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 25는 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋에 대한 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 23, 도 24 및 도 25에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다. 도 23, 도 24 및 도 25에 도시된 바와 같이, sao_info_in_ph_flag를 제거함으로써 PPS 레벨 시그널링이 단순화된다.
도 26은 본 개시의 일부 실시예에 따른, 샘플 적응적 오프셋의 픽처 헤더 신택스, 슬라이스 헤더 신택스 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다. 도 26에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다. 도 26에 도시된 의미는 도 23, 도 24 또는 도 25에서의 의사 코드에 적용될 수 있다는 것이 인식된다.
일부 실시예에서, DBF에 대해 SPS 비활성화 플래그가 추가될 수 있다.
일부 실시예에서, pps_deblocking_filter_disabled_flag가 ph_deblocking_filter_disabled_flag 또는 slice_deblocking_filter_disabled_flag에 의해 오버라이드될 수 있기 때문에, pps_deblocking_filter_disabled_flag는 오버라이딩 메커니즘이 비활성화될 때에만(예를 들어, ph_deblocking_filter_disabled_flag 및 slice_deblocking_filter_disabled_flag 모두가 존재하지 않음) 적용 가능하고, ph_deblocking_filter_disabled_flag는 ph_deblocking_filter_disabled_flag가 pps_deblocking_filter_disabled_flag를 오버라이드할 때에만(예를 들어, ph_deblocking_filter_disabled_flag가 존재하지만, slice_deblocking_filter_disabled_flag는 존재하지 않음) 적용 가능하다.
도 27은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 시퀀스 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다. 도 28은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 픽처 파라미터 세트를 포함하는 예시적인 의사 코드를 도시한다. 도 29는 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 픽처 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 30은 본 개시의 일부 실시예에 따른, 디블로킹 필터에 대한 시퀀스 파라미터 세트 비활성화 플래그를 갖는 신규 슬라이스 헤더 신택스를 포함하는 예시적인 의사 코드를 도시한다. 도 27, 도 28, 도 29 및 도 30에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다.
도 31a/b는 본 개시의 일부 실시예에 따른, 디블로킹 필터의 픽처 헤더 신택스, 슬라이스 헤더 신택스, 시퀀스 파라미터 세트 및 픽처 파라미터 세트에 대한 신규 플래그를 포함하는 예시적인 의미를 도시한다. 도 26에 도시된 바와 같이, 이전의 VVC로부터의 변경 사항은 굵게 도시되고, 제안된 삭제된 신택스는 취소선으로 더 도시된다. 도 31a/b에 도시된 의미는 도 27, 도 28, 도 29 또는 도 30에서의 의사 코드에 적용될 수 있다는 것이 인식된다.
도 32는 본 개시와 일치하는, LMCS(luma mapping with chroma scaling)를 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다. 프로세스(3200)는 코덱(예를 들어, 도 2a-2b에서의 인코더 또는 도 3a-3b에서의 디코더)에 의해 수행될 수 있다. 예를 들어, 코덱은 장치의 프로세서(예를 들어, 프로세서(402))와 같은 LMCS를 결정하기 위한 장치(예를 들어, 도 4에서의 장치(400))의 하나 이상의 소프트웨어 또는 하드웨어 구성요소로서 구현될 수 있다. 방법은 다음의 단계를 포함할 수 있다.
단계 3202에서, 장치(400)는 비디오 프레임 또는 프레임들을 수신한다. 본원에서 사용된 비디오는 시각적 정보를 캡처하는 "프레임"(예를 들어, 정적 이미지 또는 픽처)의 시간적인 시퀀스를 지칭할 수 있다. 비디오 캡처 디바이스(예를 들어, 카메라)는 이들 픽처를 시간적인 시퀀스로 캡처하고 저장하는데 사용될 수 있고, 비디오 재생 디바이스(예를 들어, 디스플레이의 기능을 갖는 텔레비전, 컴퓨터, 스마트폰, 태블릿 컴퓨터, 비디오 플레이어 또는 임의의 최종-사용자 단말기)는 이러한 픽처를 시간적인 시퀀스로 디스플레이하기 위해 사용될 수 있다. 또한, 일부 응용에서, 비디오 캡처링 디바이스는 감시, 회의 또는 실시간 방송과 같이 캡처된 비디오를 실시간으로 비디오 재생 디바이스(예를 들어, 모니터를 갖는 컴퓨터)에 송신할 수 있다.
단계 3204에서, 장치(400)는 시퀀스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 일부 실시예에서, 비디오 프레임은 픽처의 시퀀스를 포함할 수 있고, 각각의 픽처는 하나 이상의 슬라이스를 포함할 수 있다. 시퀀스에 대한 제어 플래그는 시퀀스에서의 모든 픽처에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임이 LMCS(luma mapping with chroma scaling)로 인코딩되어야 하는지의 표시일 수 있다. 시퀀스의 제어 플래그는 제1 제어 플래그의 예시일 수 있다. 도 18에 도시된 예를 통해, sps_lmcs_enabled_flag는 시퀀스 레벨에서 LMCS에 대한 제어 플래그일 수 있다. 일부 실시예에서, sps_lmcs_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3206에서, 장치(400)는 LMCS가 시퀀스 레벨에서 활성화되는지를 결정하기 위해 시퀀스 레벨에서 LMCS에 대한 제어 플래그의 값을 확인한다. LMCS가 시퀀스 레벨에서 활성화되지 않는 경우, 단계 3206은 "아니오"이고, 프로세스(3200)는 단계 3222로 진행한다. LMCS가 시퀀스 레벨에서 활성화되지 않을 때, LMCS는 또한, 시퀀스의 비디오 프레임의 모든 픽처 및 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3206은 sps_lmcs_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. LMCS가 시퀀스 레벨에서 활성화되는 경우, 단계 3206는 "예"이고, 프로세스(3200)는 단계 3208로 진행한다. LMCS가 시퀀스 레벨에서 활성화될 때, 시퀀스에서의 모든 픽처가 활성화될 수 있다. 일부 실시예에서, 단계 3206은 sps_lmcs_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3208에서, 장치(400)는 시퀀스에서의 픽처에 대한 픽처 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 일부 실시예에서, 시퀀스 내에서의 비디오 프레임의 픽처는 하나 이상의 슬라이스를 포함할 수 있다. 픽처에 대한 제어 플래그는 픽처에서의 모든 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임의 픽처가 LMCS(luma mapping with chroma scaling)로 인코딩되어야 하는지의 표시일 수 있다. 픽처의 제어 플래그는 제2 제어 플래그의 예일 수 있다. 도 18에 도시된 예를 통해, ph_lmcs_enabled_flag는 픽처 레벨에서 LMCS에 대한 제어 플래그일 수 있다. 일부 실시예에서, 픽처 레벨에서의 제어 플래그는 픽처 헤더에 존재한다. 일부 실시예에서, ph_lmcs_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3210에서, 장치(400)는 픽처 레벨에서 LMCS가 활성화되는지를 결정하기 위해 픽처 레벨에서 LMCS에 대한 제어 플래그의 값을 확인한다. LMCS가 픽처 레벨에서 활성화되지 않는 경우, 단계 3210은 "아니오"이고, 프로세스(3200)는 단계 3212로 진행한다. LMCS가 픽처 레벨에서 활성화되지 않을 때, LMCS는 또한, 비디오 프레임의 그 픽처의 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3210은 ph_lmcs_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. LMCS가 픽처 레벨에서 활성화되는 경우, 단계 3210는 "예"이고, 프로세스(3200)는 단계 3214로 진행한다. LMCS가 픽처 레벨에서 활성화되면, 픽처에서의 모든 슬라이스가 활성화될 수 있다. 일부 실시예에서, 단계 3210은 ph_lmcs_enabled_flag가 "1"의 값을 가질 때 "예"이다.
일부 추가적이거나 또는 대안적인 실시예에서, 장치(400)는 픽처 레벨에 대해 LMCS가 활성화되는 것으로 결정하는 것에 응답하여(단계 3210-예), 크로마 스케일링(CS)이 비디오 프레임에 대한 픽처 레벨에서 활성화되는지를 나타내는 제3 제어 플래그의 값을 확인할 수 있다. 도 18에 도시된 바와 같이, ph_chroma_residual_scale_flag는 제3 제어 플래그의 예일 수 있다. 일부 실시예에서, CS는 ph_chroma_residual_scale_flag가 1과 동일할 때 활성화되고, CS는 ph_chroma_residual_scale_flag가 0과 동일할 때 활성화되지 않는다.
단계 3212에서, 장치(400)는 픽처가 시퀀스에서의 마지막 픽처인지를 확인한다. 단계 3212가 "아니오"인 경우, 장치(400)는 시퀀스에서 다음 픽처에 대한 픽처에서의 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3208로 진행한다. 단계 3212가 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3200)는 또한 단계 3222로 진행한다.
단계 3214에서, 장치(400)는 단계 3208에서 결정된 바와 같이 픽처에서의 슬라이스에 대한 슬라이스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 슬라이스에 대한 제어 플래그는 픽처에서의 특정 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임에서 픽처의 슬라이스가 LMCS(luma mapping with chroma scaling)로 인코딩되어야 하는지의 표시일 수 있다. 슬라이스의 제어 플래그는 제4 제어 플래그의 예일 수 있다. 도 18에 도시된 예를 통해, slice_lmcs_enabled_flag는 슬라이스 레벨에서 LMCS에 대한 제어 플래그일 수 있다. 일부 실시예에서, slice_lmcs_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3216에서, 장치(400)는 LMCS가 슬라이스 레벨에서 활성화되는지를 결정하기 위해 슬라이스 레벨에서 LMCS에 대한 제어 플래그의 값을 확인한다. LMCS가 슬라이스 레벨에서 활성화되지 않는 경우, 단계 3216은 "아니오"이고 프로세스(3200)는 단계 3218로 진행한다. 일부 실시예에서, 단계 3216은 slice_lmcs_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. LMCS가 슬라이스 레벨에서 활성화되는 경우, 단계 3216는 "예"이고, 프로세스(3200)는 단계 3220으로 진행한다. 일부 실시예에서, 단계 3216은 slice_lmcs_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3218에서, 장치(400)는 슬라이스가 픽처에서의 마지막 슬라이스인지를 확인한다. 단계 3218이 "아니오"인 경우, 장치(400)는 픽처에서 다음 슬라이스에 대한 슬라이스에서 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3214로 진행한다. 단계 3218가 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3200)는 또한 단계 3222로 진행한다.
단계 3220에서, 장치(400)는 루마 매핑(LM)이 활성화된 상태로, 그리고 크로마 스케일링이 활성화되는 것을 허용하여 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다. 일부 실시예에서, 제2 플래그가 LMCS가 픽처 레벨에서 활성화된 것을 나타내는 것에 응답하여, slice_lmcs_enabled_flag가 1과 동일할 때 슬라이스 레벨에서 루마 매핑(LM)이 활성화되고 CS가 활성화될 수 있다.
단계 3222에서, 장치(400)는 루마 매핑 및 크로마 스케일링이 활성화되지 않은 상태로 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다.
도 33은 본 개시와 일치하는, 적응적 루프 필터(ALF)를 사용하여 비디오 프레임을 코딩하는 것을 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다. 프로세스(3300)는 장치(400) 및 프로세서(3102)와 같은 그의 하위 구성요소에 의해 수행될 수 있다.
단계 3302에서, 장치(400)는 비디오 프레임 또는 프레임들을 수신한다.
단계 3304에서, 장치(400)는 시퀀스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 일부 실시예에서, 제어 플래그는 비디오 프레임이 적응적 루프 필터(ALF)를 사용하여 인코딩되어야 하는지의 표시일 수 있다. 시퀀스의 제어 플래그는 제1 제어 플래그의 예시일 수 있다. 도 18에 도시된 예를 통해, sps_alf_enabled_flag는 시퀀스 레벨에서 ALF에 대한 제어 플래그일 수 있다. 일부 실시예에서, sps_alf_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 일부 실시예에서, sps_alf_enabled_flag의 값이 지정되지 않거나 누락된 경우, 기본 값은 "0"일 수 있다.
단계 3306에서, 장치(400)는 ALF가 시퀀스 레벨에서 활성화되는지를 결정하기 위해 시퀀스 레벨에서 ALF에 대한 제어 플래그의 값을 확인한다. ALF가 시퀀스 레벨에서 활성화되지 않는 경우, 단계 3306은 "아니오"이고 프로세스(3300)는 단계 3322로 진행한다. ALF가 시퀀스 레벨에서 활성화되지 않는 경우, ALF는 또한 비디오 프레임의 모든 픽처 및 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3306은 sps_alf_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. ALF가 시퀀스 레벨에서 활성화되는 경우 단계 3306은 "예"이고 프로세스(3300)는 단계 3308로 진행한다. ALF가 시퀀스 레벨에서 활성화되면, 시퀀스에서의 모든 픽처가 활성화될 수 있다. 일부 실시예에서, 단계 3306은 sps_alf_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3308에서, 장치(400)는 시퀀스에서의 픽처에 대한 픽처 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 일부 실시예에서, 제어 플래그는 비디오 프레임의 픽처가 적응적 루프 필터(ALF)를 사용하여 인코딩되는지의 표시일 수 있다. 픽처의 제어 플래그는 제2 제어 플래그의 예일 수 있다. 도 22a 및 도 22b에 도시된 예를 통해, ph_alf_enabled_flag는 픽처 레벨에서 ALF에 대한 제어 플래그일 수 있다. 일부 실시예에서, 픽처 레벨에서의 제어 플래그는 픽처 헤더에 존재한다. 일부 실시예에서, ph_alf_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 일부 실시예에서, ph_alf_enabled_flag의 값이 지정되지 않거나 누락된 경우, 기본 값은 "0"일 수 있다.
단계 3310에서, 장치(400)는 ALF가 픽처 레벨에서 활성화되는지를 결정하기 위해 픽처 레벨에서 ALF에 대한 제어 플래그의 값을 확인한다. ALF가 픽처 레벨에서 활성화되지 않는 경우, 단계 3310은 "아니오"이고, 프로세스(3300)는 단계 3312로 진행한다. ALF가 픽처 레벨에서 활성화되지 않을 때, ALF는 또한, 비디오 프레임의 그 픽처의 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3310은 ph_alf_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. ALF가 픽처 레벨에서 활성화되는 경우, 단계 3310은 "예"이고, 프로세스(3300)는 단계 3314로 진행한다. ALF가 픽처 레벨에서 활성화되면, 시퀀스에서의 모든 픽처가 활성화될 수 있다. 일부 실시예에서, 단계 3310은 ph_alf_enabled_flag가 "1"의 값을 가질 때 "예"이다.
일부 추가적인 또는 대안적인 실시예에서, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되는 제3 제어 플래그에 의존하여, 픽처 레벨 또는 슬라이스 레벨 중 어느 하나에 대한 제어 플래그일 수 있다.
일부 추가적인 또는 대안적인 실시예에서, 장치(400)는 ALF가 픽처 레벨에 대해 활성화된 것으로 결정하는 것에 응답하여(단계 3310-예), 교차 성분 적응적 루프 필터(Cross Component Adaptive loop filter, CCALF)가 Cb 색상 성분에 대한 비디오 프레임에 대한 픽처 레벨에서 활성화되는지를 나타내는 제4 제어 플래그의 값을 확인할 수 있다. 도 22a에 도시된 바와 같이, ph_cc_alf_cb_enabled_flag는 제4 제어 플래그의 예일 수 있다.
일부 추가적인 또는 대안적인 실시예에서, 장치(400)는 픽처 레벨에 대해 ALF가 활성화된 것으로 결정하는 것에 응답하여(단계 3310-예), 교차 성분 적응적 루프 필터(CCALF)가 Cr 색상 성분에 대해 비디오 프레임에 대한 픽처 레벨에서 활성화되는지를 나타내는 제5 제어 플래그의 값을 확인할 수 있다. 도 22a에 도시된 바와 같이, ph_cc_alf_cr_enabled_flag는 제5 제어 플래그의 예일 수 있다.
단계 3312에서, 장치(400)는 픽처가 시퀀스에서의 마지막 픽처인지를 확인한다. 단계 3312가 "아니오"인 경우, 장치(400)는 시퀀스에서 다음 픽처에 대한 픽처 레벨에서 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3308로 진행한다. 단계 3312가 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3300)는 또한 단계 3322로 진행한다.
단계 3314에서, 장치(400)는 단계 3308에서 결정된 바와 같이 픽처에서의 슬라이스에 대한 슬라이스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 슬라이스에 대한 제어 플래그는 픽처에서의 특정 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임에서 픽처의 슬라이스가 적응적 루프 필터(ALF)를 사용하여 인코딩되는지의 표시일 수 있다. 슬라이스의 제어 플래그는 제3 제어 플래그의 예일 수 있다. 도 22a 및 도 22b에 도시된 예를 통해, slice_alf_enabled_flag는 슬라이스 레벨에서 ALF에 대한 제어 플래그일 수 있다. 일부 실시예에서, slice_alf_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 일부 실시예에서, slice_alf_enabled_flag의 값이 지정되지 않거나 누락된 경우, 기본 값은 "0"일 수 있다.
단계 3316에서, 장치(400)는 ALF가 슬라이스 레벨에서 활성화되는지를 결정하기 위해 슬라이스 레벨에서 ALF에 대한 제어 플래그의 값을 확인한다. ALF가 슬라이스 레벨에서 활성화되지 않는 경우, 단계 3310은 "아니오"이고 프로세스(3300)는 단계 3318로 진행한다. 일부 실시예에서, 단계 3316은 slice_alf_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. ALF가 픽처 레벨에서 활성화되는 경우, 단계 3316는 "예"이고, 프로세스(3300)는 단계 3320으로 진행한다. 일부 실시예에서, 단계 3316은 slice_alf_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3318에서, 장치(400)는 슬라이스가 픽처에서 마지막 슬라이스인지를 확인한다. 단계 3318이 "아니오"인 경우, 장치(400)는 픽처에서 다음 슬라이스에 대한 슬라이스에서 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3314로 진행한다. 단계 3318이 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3300)는 또한 단계 3322로 진행한다.
단계 3320에서, 장치(400)는 적응적 루프 필터(ALF)를 사용하여 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다. 일부 실시예에서, ALF가 활성화될 때, 색상 성분 Y, Cb 또는 Cr이 활성화된다.
단계 3322에서, 장치(400)는 적응적 루프 필터(ALF)가 활성화되지 않은 상태로 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다.
도 34는 본 개시와 일치하는, 샘플 적응적 오프셋(SAO)을 사용하여 비디오 프레임을 코딩하는 것을 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다. 프로세스(3400)는 장치(400) 및 프로세서(3102)와 같은 그의 하위 구성요소에 의해 수행될 수 있다.
단계 3402에서, 장치(400)는 비디오 프레임 또는 프레임들을 수신한다.
단계 3404에서, 장치(400)는 시퀀스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 일부 실시예에서, 제어 플래그는 비디오 프레임이 샘플 적응적 오프셋(SAO)을 사용하여 인코딩되는지의 표시일 수 있다. 시퀀스의 제어 플래그는 제1 제어 플래그의 예일 수 있다. 도 26에 도시된 예를 통해, sps_sao_enabled_flag는 시퀀스 레벨에서 ALF에 대한 제어 플래그일 수 있다. 일부 실시예에서, sps_sao_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3406에서, 장치(400)는 SAO가 시퀀스 레벨에서 활성화되는지를 결정하기 위해 시퀀스 레벨에서 SAO에 대한 제어 플래그의 값을 확인한다. SAO가 시퀀스 레벨에서 활성화되지 않는 경우, 단계 3406은 "아니오"이고, 프로세스(3400)는 단계 3422로 진행한다. SAO가 시퀀스 레벨에서 활성화되지 않을 때, SAO는 또한 비디오 프레임의 모든 픽처 및 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3406은 sps_sao_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. SAO가 시퀀스 레벨에서 활성화되는 경우 단계 3406은 "예"이고 프로세스(3400)는 단계 3408로 진행한다. SAO가 시퀀스 레벨에서 활성화되면, 시퀀스에서의 모든 픽처가 활성화될 수 있다. 일부 실시예에서, 단계 3406은 sps_sao_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3408에서, 장치(400)는 시퀀스에서의 픽처에 대한 픽처 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 픽처에 대한 제어 플래그는 픽처에서의 모든 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임의 픽처가 샘플 적응적 오프셋(SAO)을 사용하여 인코딩되는지의 표시일 수 있다. 픽처의 제어 플래그는 제2 제어 플래그의 예일 수 있다. 도 26에 도시된 예를 통해, ph_sao_luma_enabled_flag 또는 ph_sao_chroma_enabled_flag 중 하나 또는 둘 모두는 픽처 레벨에서 SAO에 대한 제어 플래그일 수 있다. 일부 실시예에서, 픽처 레벨에서의 제어 플래그는 픽처 헤더에 존재한다. 일부 실시예에서, ph_sao_luma_enabled_flag 또는 ph_sao_chroma_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 일부 실시예에서, ph_sao_luma_enabled_flag 또는 ph_sao_chroma_enabled_flag의 값이 지정되지 않거나 누락된 경우, 기본 값은 "0"일 수 있다. 이 기술분야의 사람 또는 기술자는, 이제 도 34에 도시된 프로세스(3400)가 SAO의 루마 성분 및 SAO의 크로마 성분 모두에 적용될 수 있다는 것을 인식할 것이다.
단계 3410에서, 장치(400)는 SAO가 픽처 레벨에서 활성화되는지를 결정하기 위해 픽처 레벨에서 SAO에 대한 제어 플래그의 값을 확인한다. SAO가 픽처 레벨에서 활성화되지 않는 경우, 단계 3410은 "아니오"이고, 프로세스(3400)는 단계 3412로 진행한다. SAO가 픽처 레벨에서 활성화되지 않을 때, SAO는 또한 비디오 프레임의 그 픽처의 모든 슬라이스에 대해 활성화되지 않는다. 일부 실시예에서, 단계 3410은 ph_sao_luma_enabled_flag 또는 ph_sao_chroma_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. SAO가 픽처 레벨에서 활성화되는 경우, 단계 3410는 "예"이고, 프로세스(3400)는 단계 3414로 진행한다. SAO가 픽처 레벨에서 활성화되면, 픽처에서의 모든 슬라이스가 활성화될 수 있다. 일부 실시예에서, 단계 3410은 ph_sao_luma_enabled_flag 또는 ph_sao_chroma_enabled_flag가 "1"의 값을 가질 때 "예"이다.
일부 추가적인 또는 대안적인 실시예에서, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되는 제3 제어 플래그에 의존하여, 픽처 레벨 또는 슬라이스 레벨 중 어느 하나에 대한 제어 플래그일 수 있다.
단계 3412에서, 장치(400)는 픽처가 시퀀스에서의 마지막 픽처인지를 확인한다. 단계 3412가 "아니오"인 경우, 장치(400)는 시퀀스에서의 다음 픽처에 대한 픽처에서 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3408로 진행한다. 단계 3412가 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3400)는 또한 단계 3422로 진행한다.
단계 3414에서, 장치(400)는 단계 3408에서 결정된 바와 같이 픽처에서의 슬라이스에 대한 슬라이스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 슬라이스에 대한 제어 플래그는 픽처에서의 특정 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임에서 픽처의 슬라이스가 샘플 적응적 오프셋(SAO)을 사용하여 인코딩되어야 하는지의 표시일 수 있다. 슬라이스의 제어 플래그는 제3 제어 플래그의 예일 수 있다. 도 26에 도시된 예를 통해, slice_sao_luma_enabled_flag 또는 slice_sao_chroma_enabled_flag는 슬라이스 레벨에서 SAO에 대한 제어 플래그일 수 있다. 일부 실시예에서, slice_sao_luma_enabled_flag 또는 slice_sao_chroma_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 일부 실시예에서, slice_sao_luma_enabled_flag 또는 slice_sao_chroma_enabled_flag의 값이 지정되지 않거나 누락된 경우, 기본 값은 "0"일 수 있다.
단계 3416에서, 장치(400)는 SAO가 슬라이스 레벨에서 활성화되는지를 결정하기 위해 슬라이스 레벨에서 SAO에 대한 제어 플래그의 값을 확인한다. SAO가 슬라이스 레벨에서 활성화되지 않는 경우, 단계 3416은 "아니오"이고 프로세스(3400)는 단계 3418로 진행한다. 일부 실시예에서, 단계 3416은 slice_sao_luma_enabled_flag 또는 slice_sao_chroma_enabled_flag가 "0"의 값을 가질 때 "아니오"이다. SAO가 슬라이스 레벨에서 활성화되는 경우, 단계 3416는 "예"이고 및 프로세스(3400)는 단계 3420으로 진행한다. 일부 실시예에서, 단계 3416은 slice_sao_luma_enabled_flag 또는 slice_sao_chroma_enabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3418에서, 장치(400)는 슬라이스가 픽처에서의 마지막 슬라이스인지를 확인한다. 단계 3418이 "아니오"인 경우, 장치(400)는 픽처에서의 다음 슬라이스에 대한 슬라이스에서 비디오 프레임에 대한 제어 플래그를 결정하기 위해 단계 3414로 진행한다. 단계 3418가 "예"인지 또는 "아니오"인지에 관계 없이, 프로세스(3400)는 또한 단계 3422로 진행한다.
단계 3420에서, 장치(400)는 샘플 적응적 오프셋(SAO)(제어 플래그를 기초로 하는 루마 또는 크로마 SAO 중 어느 하나, 또는 둘 모두)를 사용하여 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다.
단계 3422에서, 장치(400)는 샘플 적응적 오프셋(SAO)(제어 플래그를 기초로 하는 루마 또는 크로마 SAO, 또는 모두)이 활성화되지 않은 상태로 비디오 프레임의 슬라이스, 픽처 및/또는 시퀀스를 인코딩한다.
도 35는 본 개시와 일치하는, 디블로킹 필터를 비활성화하면서 비디오 프레임을 코딩하는 것을 결정하기 위한 예시적인 프로세스를 도시하는 흐름도이다. 프로세스(3500)는 장치(400) 및 프로세서(3102)와 같은 그의 하위 구성요소에 의해 수행될 수 있다.
단계 3502에서, 장치(400)는 비디오 프레임 또는 프레임들을 수신한다.
단계 3504에서, 장치(400)는 시퀀스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 시퀀스에 대한 제어 플래그는 시퀀스에서의 모든 픽처에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임이 디블로킹 필터가 비활성화된 상태로 인코딩되어야 하는지의 표시일 수 있다. 시퀀스의 제어 플래그는 시퀀스 레벨에서 디블로킹 필터를 비활성화하기 위한 비활성화 플래그의 예일 수 있다. 일부 실시예에서, 시퀀스 레벨은 제1 레벨일 수 있다. 도 31a에 도시된 예를 통해, sps_deblocking_filter_disabled_flag는 시퀀스 레벨에서 디블로킹 필터에 대한 제어 플래그일 수 있다. 일부 실시예에서, sps_deblocking_filter_disabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 단계 3504에서, 장치(400)는 디블로킹 필터에 대한 시퀀스 레벨에서 비디오 프레임에 대한 오버라이드 플래그를 추가로 결정한다. 도 31a에 도시된 예를 통해, deblocking_filter_override_enabled_flag는 시퀀스 레벨에서 오버라이드 플래그의 예일 수 있다. 일부 실시예에서, deblocking_filter_override_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3506에서, 장치(400)는 디블로킹이 시퀀스 레벨에서 비활성화되는지를 결정하기 위해 시퀀스 레벨에서 디블로킹 필터를 비활성화하기 위한 제어 플래그의 값을 확인한다. 디블로킹이 시퀀스 레벨에서 비활성화되지 않는 경우, 단계 3506은 "아니오"이고, 프로세스(3500)는 단계 3512로 진행한다. 디블로킹이 시퀀스 레벨에서 비활성화될 때, 프로세스(3500)는 단계 3508으로 진행한다. 일부 실시예에서, 단계 3506은 sps_deblocking_filter_disabled_flag가 "0"의 값을 가질 때 "아니오"이다. 일부 실시예에서, 단계 3406은 sps_deblocking_filter_disabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3508에서, 장치(400)는 시퀀스 레벨에서 디블로킹 필터를 비활성화하기 위한 오버라이드 플래그의 값을 확인한다. 오버라이드 플래그가 시퀀스 레벨에 대해 존재하는 경우, 단계 3508은 "예"이고 프로세스(3500)는 단계 3512로 진행한다. 일부 실시예에서, 단계 3508은 deblocking_filter_override_enabled_flag가 "1"의 값을 가질 수 있는 경우 "예"이다.오버라이드 플래그가 시퀀스 레벨에 대해 존재하지 않는 경우, 단계 3508은 "아니오"이고 프로세스(3500)는 단계 3510으로 진행한다. 일부 실시예에서, 단계 3508은 deblocking_filter_override_enabled_flag가 "0"의 값을 가질 때 "아니오"이다.
단계 3510에서, 비디오 프레임의 전체 시퀀스에 대해 디블로킹이 비활성화되고 오버라이드 플래그가 존재하지 않을 때, 비디오 프레임이 시퀀스에 대해 인코딩될 때 디블로킹 필터가 사용되지 않는다.
단계 3512에서, 장치(400)는 시퀀스에서의 픽처에 대한 픽처 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 픽처에 대한 제어 플래그는 픽처에서의 모든 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 시퀀스에서의 비디오 프레임의 픽처가 디블로킹 필터가 비활성화된 상태로 인코딩되어야 하는지의 표시일 수 있다. 일부 실시예에서, 픽처 레벨은 제2 레벨일 수 있다. 픽처의 제어 플래그는 픽처 레벨에서 디블로킹 필터를 비활성화하기 위한 비활성화 플래그의 예일 수 있다. 도 31b에 도시된 예를 통해, ph_deblocking_filter_disabled_flag는 픽처 레벨에서의 디블로킹 필터에 대한 제어 플래그일 수 있다. 일부 실시예에서, ph_deblocking_filter_disabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 단계 3512에서, 장치(400)는 디블로킹 필터에 대한 픽처 레벨에서 비디오 프레임에 대한 오버라이드 플래그를 추가로 결정한다. 도 31b에 도시된 예를 통해, ph_deblocking_filter_override_enabled_flag는 픽처 레벨에서의 오버라이드 플래그의 예일 수 있다. 일부 실시예에서, ph_deblocking_filter_override_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
일부 추가적인 또는 대안적인 실시예에서, 제1 레벨은 픽처의 세트 레벨일 수 있고, 제1 레벨에 대한 제1 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된다. 일부 추가적인 또는 대안적인 실시예에서, 제2 레벨은 픽처 레벨 또는 슬라이스 레벨 중 하나이고, 제2 레벨에 대한 제2 제어 플래그는 픽처 헤더(PH) 또는 슬라이스 헤더(SH)에서 시그널링된다.
단계 3516에서, 장치(400)는 디블로킹이 픽처 레벨에서 비활성화되는지를 결정하기 위해 픽처 레벨에서 디블로킹 필터를 비활성화하기 위한 제어 플래그의 값을 확인한다. 디블로킹이 픽처 레벨에서 비활성화되지 않는 경우, 단계 3516은 "아니오"이고 프로세스(3500)는 단계 3522로 진행한다. 디블로킹이 픽처 레벨에서 비활성화될 때, 프로세스(3500)는 단계 3518으로 진행한다. 일부 실시예에서, ph_deblocking_filter_disabled_flag가 "0"의 값을 가질 때 단계 3516은 "아니오"이다. 일부 실시예에서, 단계 3516은 ph_deblocking_filter_disabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3518에서, 장치(310)는 픽처 레벨에서 디블로킹 필터를 비활성화하기 위한 오버라이드 플래그의 값을 확인한다. 오버라이드 플래그가 픽처 레벨에 대해 존재하는 경우, 단계 3518은 "예"이고 프로세스(3500)는 단계 3522로 진행한다. 일부 실시예에서, ph_deblocking_filter_override_enabled_flag가 "1"의 값을 가질 수 있을 때 단계 3518은 "예"이다. 오버라이드 플래그가 시퀀스 레벨에 대해 존재하지 않는 경우, 단계 3518은 "아니오"이고 프로세스(3500)는 단계 3520으로 진행한다. 일부 실시예에서, 단계 3518은 ph_deblocking_filter_override_enabled_flag가 "0"의 값을 가질 때 "아니오"이다.
단계 3520에서, 시퀀스에서 비디오 프레임의 픽처에 대해 디블로킹이 비활성화되고 오버라이드 플래그가 존재하지 않을 때, 디블로킹 필터는 비디오 프레임이 인코딩될 때 해당 특정 픽처에 대해 사용되지 않는다.
단계 3514에서, 장치(400)는 시퀀스의 모든 픽처가 처리되는지를 확인한다. 단계 3514가 "아니오"인 경우, 장치(400)는 시퀀스에서 다음 픽처에 대해 단계 3512로 진행한다.
단계 3522에서, 장치(400)는 단계 3516에서 결정된 바와 같이 픽처에서의 슬라이스에 대한 슬라이스 레벨에서 비디오 프레임에 대한 제어 플래그를 결정한다. 슬라이스에 대한 제어 플래그는 픽처에서의 특정 슬라이스에 대한 상태의 표시일 수 있다. 일부 실시예에서, 제어 플래그는 비디오 프레임의 픽처에서의 슬라이스가 디블로킹 필터가 비활성화된 상태로 인코딩되는지의 표시일 수 있다. 픽처의 제어 플래그는 슬라이스 레벨에서 디블로킹 필터를 비활성화하기 위한 비활성화 플래그의 예일 수 있다. 도 31b에 도시된 예를 통해, slice_deblocking_filter_disabled_flag는 슬라이스 레벨에서 디블로킹 필터에 대한 제어 플래그일 수 있다. 일부 실시예에서, slice_deblocking_filter_disabled_flag는 "1" 또는 "0"의 값을 가질 수 있다. 단계 3522에서, 장치(400)는 디블로킹 필터에 대한 슬라이스 레벨에서 비디오 프레임에 대한 오버라이드 플래그를 추가로 결정한다. 도 31b에 도시된 예를 통해, slice_deblocking_filter_override_enabled_flag는 슬라이스 레벨에서의 오버라이드 플래그의 예일 수 있다. 일부 실시예에서, slice_deblocking_filter_override_enabled_flag는 "1" 또는 "0"의 값을 가질 수 있다.
단계 3526에서, 장치(400)는 디블로킹이 슬라이스 레벨에서 비활성화되는지를 결정하기 위해, 슬라이스 레벨에서 디블로킹 필터를 비활성화하기 위한 제어 플래그의 값을 확인한다. 디블로킹이 슬라이스 레벨에서 비활성화되지 않는 경우, 단계 3526은 "아니오"이고 프로세스(3500)는 단계 3532로 진행한다. 디블로킹이 슬라이스 레벨에서 비활성화될 때, 프로세스(3500)는 단계 3528으로 진행한다. 일부 실시예에서, 단계 3526은 slice_deblocking_filter_disabled_flag가 "0"의 값을 가질 때 "아니오"이다. 일부 실시예에서, 단계 3526은 slice_deblocking_filter_disabled_flag가 "1"의 값을 가질 때 "예"이다.
단계 3528에서, 장치는 슬라이스 레벨에서 디블로킹 필터를 비활성화하기 위한 오버라이드 플래그의 값을 확인한다. 오버라이드 플래그가 슬라이스 레벨에 대해 존재하는 경우, 단계 3528은 "예"이고 프로세스(3500)는 단계 3532로 진행한다. 일부 실시예에서, 단계 3528은 slice_deblocking_filter_override_enabled_flag가 "1"의 값을 가질 때 "예"이다. 오버라이드 플래그가 슬라이스 레벨에 대해 존재하지 않는 경우, 단계 3528은 "아니오"이고 프로세스(3500)는 단계 3530으로 진행한다. 일부 실시예에서, 단계 3528은 slice_deblocking_filter_override_enabled_flag가 "0"의 값을 가질 때 "아니오"이다.
단계 3530에서, 시퀀스에서의 비디오 프레임에서 픽처의 슬라이스에 대해 디블로킹이 비활성화되고 오버라이드 플래그가 존재하지 않을 때, 디블로킹 필터는 비디오 프레임이 인코딩될 때 그 슬라이스에 사용되지 않는다.
단계 3524에서, 장치(400)는 픽처의 모든 슬라이스가 처리되는지를 확인한다. 단계 3524가 "아니오"인 경우, 장치(400)는 픽처에서의 다음 슬라이스에 대해 다시 단계 3522로 진행한다.
단계 3532에서, 장치(400)는 디블로킹 필터가 활성화된 상태로 비디오 프레임의 시퀀스, 픽처 및/슬라이스를 인코딩한다.
일부 실시예에서, 명령어를 포함하는 비일시적 컴퓨터 판독가능 저장 매체가 또한 제공되고, 명령어는 상술한 방법을 수행하기 위한 (개시된 인코더 및 디코더와 같은) 디바이스에 의해 실행될 수 있다. 비일시적 매체의 일반적인 형태는 예를 들어, 플로피 디스크, 플렉서블 디스크(flexible disk), 하드 디스크, 솔리드 스테이트 드라이브(solid state drive), 자기 테이프 또는 임의의 다른 자기 데이터 저장 매체, CD-ROM, 임의의 다른 광학 데이터 저장 매체, 구멍의 패턴을 갖는 임의의 물리적 매체, RAM, PROM 및 EPROM, FLASH-EPROM 또는 임의의 다른 플래시 메모리, NVRAM, 캐시, 레지스터, 임의의 다른 메모리 칩 또는 카트리지 및 이들의 네트워크화된 버전을 포함한다. 디바이스는 하나 이상의 프로세서(CPU), 입/출력 인터페이스, 네트워크 인터페이스 및/또는 메모리를 포함할 수 있다.
실시예는 다음의 조항을 사용하여 더 설명될 수 있다:
1. 비디오 인코딩 방법으로서,
비디오 시퀀스를 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
LMCS가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
제1 제어 플래그가 LMCS가 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, LMCS가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
LMCS는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고;
LMCS는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
2. 조항 1에 있어서, 제1 제어 플래그는 시퀀스 레벨에서 LMCS에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 레벨에서 LMCS에 대한 제어 플래그인, 비디오 인코딩 방법.
3. 조항 2에 있어서,
제2 제어 플래그가 LMCS가 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 크로마 스케일링(CS)이 제2 레벨에서 활성화되는지를 나타내는 제3 제어 플래그를 시그널링하는 단계를 더 포함하고,
CS는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고; 및
CS는 제3 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되는, 비디오 인코딩 방법.
4. 조항 1 또는 2에 있어서,
제2 플래그가 LMCS가 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, LMCS가 제3 레벨에서 적용되는지를 나타내는 제4 제어 플래그를 시그널링하는 단계를 더 포함하고,
제4 제어 플래그의 값이 1과 동일할 때 제3 레벨에서 루마 매핑(LM)이 적용되고 CS가적용될 수 있고;
LMCS는 제4 제어 플래그의 값이 0과 동일할 때 제3 레벨에서 적용되지 않고; 및
제3 레벨은 제2 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
5. 조항 4에 있어서, 제3 레벨은 슬라이스 레벨인, 비디오 인코딩 방법.
6. 조항 4에 있어서, 제2 제어 플래그가 시그널링되지 않을 때, LMCS는 제2 제어 플래그와 연관된 픽처에 대해 활성화되지 않는, 비디오 인코딩 방법.
7. 조항 4 또는 5에 있어서, 제4 제어 플래그가 시그널링되지 않을 때, LMCS는 제4 제어 플래그와 연관된 슬라이스에 대해 적용되지 않는, 비디오 인코딩 방법.
8. 조항 1에 있어서, 제1 제어 플래그가 시그널링될 때, 더 낮은 레벨에서 LMCS는 제2 제어 플래그가 시그널링되지 않을 때 활성화되지 않는, 비디오 인코딩 방법.
9. 조항 1 또는 8에 있어서, 제1 제어 플래그가 시그널링되지 않을 때, 더 낮은 레벨에서 LMCS는 제2 제어 플래그가 시그널링되는지에 관계 없이 활성화되지 않는, 비디오 인코딩 방법.
10. 비디오 인코딩 방법으로서,
비디오 시퀀스를 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 적응적 루프 필터(ALF)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
ALF가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
제1 제어 플래그가 제1 레벨에서 ALF가 활성화된 것을 나타내는 것에 응답하여, ALF가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
ALF는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고;
ALF는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
11. 조항 10에 있어서, 추가로, 제1 제어 플래그는 시퀀스 레벨에서 ALF에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되는 제3 제어 플래그에 의존하여 픽처 레벨 또는 슬라이스 레벨 중 하나에서 ALF에 대한 제어 플래그인, 비디오 인코딩 방법.
12. 조항 10 또는 11에 있어서,
제2 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 교차-성분 적응적 루프 필터(CCALF)가 제2 레벨에서 Cb 색상 성분에 대해 활성화되는지를 나타내는 제4 제어 플래그를 시그널링하는 단계 -
CCALF는 제4 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 Cb 색상 성분에 대해 활성화되고; 및
CCALF는 제4 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 Cb 색상 성분에 대해 비활성화됨 - ; 및
제2 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 교차 성분 적응적 루프 필터(CCALF)가 제2 레벨에서 Cr 색상 성분에 대해 활성화되는지를 나타내는 제5 제어 플래그를 시그널링하는 단계를 더 포함하고,
CCALF는 제5 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 Cr 색상 성분에 대해 활성화되고; 및
CCALF는 제5 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 Cr 색상 성분에 대해 비활성화되는,, 비디오 인코딩 방법.
13. 조항 10에 있어서, 제1 제어 플래그가 시그널링될 때, 더 낮은 레벨에서 ALF는 제2 제어 플래그가 시그널링되지 않을 때 활성화되지 않는, 비디오 인코딩 방법.
14. 조항 10 또는 11에 있어서, 제1 제어 플래그가 시그널링되지 않을 때, 더 낮은 레벨에서 ALF는 제2 제어 플래그가 시그널링되는지에 관계 없이 활성화되지 않는, 비디오 인코딩 방법.
15. 조항 10 내지 12에 있어서, ALF의 파라미터가 픽처의 슬라이스 헤더에서 결정될 때, 픽처의 모든 슬라이스는 ALF의 파라미터가 동일할 것인, 비디오 인코딩 방법.
16. 조항 10 내지12에 있어서, 제2 제어 플래그가 시그널링되지 않을 때, ALF는 제2 제어 플래그와 연관된 픽처에 대해 활성화되지 않는, 비디오 인코딩 방법.
17. 조항 10 내지12에 있어서, 제4 제어 플래그 또는 제5 제어 플래그가 시그널링되지 않을 때, CCALF는 제2 제어 플래그와 연관된 픽처의 Cb 또는 Cr 성분에 대해 활성화되지 않는, 비디오 인코딩 방법.
18. 조항 10 내지12에 있어서, 제2 제어 플래그가 시그널링되지 않을 때, ALF는 제2 제어 플래그와 연관된 슬라이스에 대해 적용되지 않는, 비디오 인코딩 방법.
19. 조항 10-12에 있어서, ALF가 활성화될 때, 색상 성분 Y, Cb 또는 Cr이 활성화되는, 비디오 인코딩 방법.
20. 비디오 인코딩 방법으로서,
비디오 시퀀스를 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 샘플 적응적 오프셋(SAO)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
SAO가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
제1 제어 플래그가 SAO가 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, SAO가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
SAO는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 루마 성분에 대해 활성화되고;
SAO는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 루마 성분에 대해 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
21. 조항 20에 있어서, 제2 제어 플래그에서 시그널링되는 제3 플래그를 더 포함하고,
SAO는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 크로마 성분에 대해 활성화되고; 및
SAO는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 크로마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
22. 조항 20 또는 21에 있어서, 제1 제어 플래그는 시퀀스 레벨에서 SAO에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 플래그에 의존하여 픽처 레벨 또는 슬라이스 레벨 중 하나에서 SAO에 대한 제어 플래그인, 비디오 인코딩 방법.
23 조항 20 또는 21에 있어서, 제2 제어 플래그가 시그널링되지 않을 때, SAO는 제2 제어 플래그와 연관된 픽처의 루마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
24. 조항 20 또는 21에 있어서, 제3 제어 플래그가 시그널링되지 않을 때, SAO는 제3 제어 플래그와 연관된 픽처의 크로마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
25. 조항 20에 있어서, 제1 제어 플래그가 시그널링될 때, 더 낮은 레벨에서 SAO는 제2 제어 플래그가 시그널링되지 않을 때 비활성화되는, 비디오 인코딩 방법.
26. 조항 20 또는 21에 있어서, 제1 제어 플래그가 시그널링되지 않을 때, 더 낮은 레벨에서 SAO는 제2 제어 플래그가 시그널링되는지에 관계 없이 비활성화되는, 비디오 인코딩 방법.
27. 조항 19 내지 26에 있어서, SAO가 활성화될 때, SAO 프로세스가 디블로킹 필터 프로세스 이후에 재구성된 픽처에 적용되는, 비디오 인코딩 방법.
28. 비디오 인코딩 방법으로서,
비디오 시퀀스를 수신하는 단계; 및
시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계를 포함하고,
디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 1과 동일하고 제2 레벨에서 제2 제어 플래그가 시그널링되지 않을 때 제1 레벨에서 비활성화되고, 및
디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 0과 동일하고 제2 레벨에서 제2 제어 플래그가 시그널링되지 않을 때 제1 레벨에서 활성화되고; 및
제1 레벨은 제2 레벨보다 높은 레벨인, , 비디오 인코딩 방법.
29. 조항 28에 있어서, 제1 레벨은 픽처의 세트 레벨이고 제1 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되고; 제2 레벨은 픽처 레벨 또는 슬라이스 레벨 중 하나이고, 제2 제어 플래그는 픽처 헤더(PH) 또는 슬라이스 헤더(SH) 중 하나에서 시그널링되는, 비디오 인코딩 방법.
30. 조항 28에 있어서, 제2 플래그가 픽처 레벨에서 시그널링되는지 또는 슬라이스 레벨에서 시그널링되는지를 나타내기 위해 PPS에서 제3 플래그를 시그널링하는 단계를 더 포함하는, 비디오 인코딩 방법.
31. 조항 28에 있어서, 시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계를 더 포함하고, 오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 시그널링될 수 있는지를 나타내기 위한 것인, 비디오 인코딩 방법.
32. 조항 28에 있어서, 시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 비디오 시퀀스를 인코딩하는 단계를 더 포함하고,
오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 시그널링될 수 있는지를 나타내기 위한 것이고, 및
시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 시그널링된 더 높은 제어 플래그가 1과 동일할 때, 디블로킹 필터는 더 낮은 레벨 제어 플래그가 더 높은 제어 플래그를 오버라이드하지 않을 때 대응하는 시퀀스, 픽처의 세트, 픽처 또는 슬라이스에 적용되지 않는, 비디오 인코딩 방법.
33. 비디오 디코딩 방법으로서,
비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
제1 제어 플래그가 LMCS가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
제1 제어 플래그가 LMCS가 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 LMCS가 제2 레벨에서 활성화되는 지를 결정하는 단계를 포함하고,
LMCS는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고;
LMCS는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
34. 조항 33에 있어서, 제1 제어 플래그는 시퀀스 레벨에서 LMCS에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 레벨에서 LMCS에 대한 제어 플래그인, 비디오 디코딩 방법.
35. 조항 34에 있어서,
제2 제어 플래그가 LMCS가 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제3 제어 플래그가 제2 레벨에서 크로마 스케일링(CS)이 활성화된 것을 나타내는지를 결정하는 단계를 더 포함하고,
CS는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고; 및
CS는 제3 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되는,, 비디오 디코딩 방법.
36. 조항 33 또는 34에 있어서,
제2 플래그가 LMCS가 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제4 제어 플래그가 LMCS가 제3 레벨에서 적용된 것을 나타내는지를 결정하는 단계를 더 포함하고,
제4 제어 플래그의 값이 1과 동일할 때 제3 레벨에서 루마 매핑(LM)이 적용되고 CS가 적용될 수 있고;
LMCS는 제4 제어 플래그의 값이 0과 동일할 때 제3 레벨에서 적용되지 않고; 및
제3 레벨은 제2 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
37. 조항 36에 있어서, 제3 레벨은 슬라이스 레벨인, 비디오 디코딩 방법.
38. 조항 36에 있어서, 제2 제어 플래그가 시그널링되지 않을 때, LMCS는 제2 제어 플래그와 연관된 픽처에 대해 활성화되지 않는, 비디오 디코딩 방법.
39. 조항 36 또는 38에 있어서, 제4 제어 플래그가 시그널링되지 않을 때, LMCS는 제4 제어 플래그와 연관된 슬라이스에 대해 적용되지 않는, 비디오 디코딩 방법.
40. 조항 33에 있어서, 제1 제어 플래그가 시그널링될 때, 더 낮은 레벨에서 LMCS는 제2 제어 플래그가 시그널링되지 않을 때 활성화되지 않는, 비디오 디코딩 방법.
41. 조항 33 또는 40에 있어서, 제1 제어 플래그가 시그널링되지 않을 때, 더 낮은 레벨에서 LMCS는 제2 제어 플래그가 시그널링되는지에 관계 없이 활성화되지 않는, 비디오 디코딩 방법.
42. 비디오 디코딩 방법으로서,
비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 적응적 루프 필터(ALF)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
제1 제어 플래그가 ALF가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
제1 제어 플래그가 ALF가 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 포함하고,-
ALF는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 활성화되고;
ALF는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
43. 조항 42에 있어서, 추가로 제1 제어 플래그는 시퀀스 레벨에서 ALF에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 제어 플래그에 의존하여 픽처 레벨 또는 슬라이스 레벨 중 하나에서 ALF에 대한 제어 플래그인, 비디오 디코딩 방법.
44. 조항 42 또는 43에 있어서,
제2 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제4 제어 플래그가 교차 성분 적응적 루프 필터(CCALF)가 제2 레벨에서 Cb 색상 성분에 대해 활성화된 것을 나타내는지를 결정하는 단계 -
CCALF는 제4 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 Cb 색상 성분에 대해 활성화되고; 및
CCALF는 제4 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 Cb 색상 성분에 대해 비활성화됨 - ; 및
제2 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 교차 성분 적응적 루프 필터(CCALF)가 제2 레벨에서 Cr 색상 성분에 대해 활성화된 것을 나타내는 제5 제어 플래그를 시그널링하는 단계를 더 포함하고,
CCALF는 제5 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 Cr 색상 성분에 대해 활성화되고; 및
CCALF는 제5 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 Cr 색상 성분에 대해 비활성화되는,, 비디오 디코딩 방법.
45. 조항 42에 있어서, 제1 제어 플래그가 존재할 때, 더 낮은 레벨에서 ALF는 제2 제어 플래그가 존재하지 않을 때 활성화되지 않는, 비디오 디코딩 방법.
46. 조항 42 또는 43에 있어서, 제1 제어 플래그가 존재하지 않을 때, 더 낮은 레벨에서 ALF는 제2 제어 플래그가 존재하는지에 관계 없이 활성화되지 않는, 비디오 디코딩 방법.
47. 조항 42 내지 44에 있어서, ALF의 파라미터가 픽처의 슬라이스 헤더에서 결정될 때, 픽처의 모든 슬라이스는 ALF의 파라미터가 동일할 것인, 비디오 디코딩 방법.
48. 조항 42 내지 44에 있어서, 제2 제어 플래그가 존재하지 않을 때, ALF는 제2 제어 플래그와 연관된 픽처에 대해 활성화되지 않는, 비디오 디코딩 방법.
49. 조항 42 내지 44에 있어서, 제4 제어 플래그 또는 제5 제어 플래그가 시그널링되지 않을 때, CCALF는 제2 제어 플래그와 연관된 픽처의 Cb 또는 Cr 성분에 대해 활성화되지 않는, 비디오 디코딩 방법.
50. 조항 42 내지 44에 있어서, 제2 제어 플래그가 존재하지 않을 때, ALF는 제2 제어 플래그와 연관된 슬라이스에 대해 활성화되지 않는, 비디오 디코딩 방법.
51. 조항 42 내지 44에 있어서, ALF가 활성화될 때, 색상 성분 Y, Cb 또는 Cr이 활성화되는, 비디오 디코딩 방법.
52. 비디오 디코딩 방법으로서,
비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 샘플 적응적 오프셋(SAO)에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계 - 시퀀스 레벨, 픽처 레벨 및 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
제1 제어 플래그가 SAO가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
제1 제어 플래그가 SAO가 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 SAO가 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 포함하고,
SAO는 제2 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 루마 성분에 대해 활성화되고;
SAO는 제2 제어 플래그의 값이 0과 동일할 때 제2 레벨에서 루마 성분에 대해 비활성화되고; 및
제2 레벨은 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
53. 조항 52에 있어서,
제3 플래그가 SAO가 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 더 포함하고,
SAO는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 크로마 성분에 대해 활성화되고; 및
SAO는 제3 제어 플래그의 값이 1과 동일할 때 제2 레벨에서 크로마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
54. 조항 52 또는 53에 있어서, 제1 제어 플래그는 시퀀스 레벨에서 SAO에 대한 제어 플래그이고, 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 플래그에 의존하여 픽처 레벨 또는 슬라이스 레벨 중 하나에서 SAO에 대한 제어 플래그인, 비디오 디코딩 방법.
55. 조항 52 또는 53에 있어서, 제2 제어 플래그가 존재하지 않을 때, SAO는 제2 제어 플래그와 연관된 픽처의 루마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
56. 조항 52 또는 53에 있어서, 제3 제어 플래그가 존재하지 않을 때, SAO는 제3 제어 플래그와 연관된 픽처의 크로마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
57. 조항 52에 있어서, 제1 제어 플래그가 존재할 때, 더 낮은 레벨에서 SAO는 제2 제어 플래그가 존재하지 않을 때 비활성화되는, 비디오 디코딩 방법.
58. 조항 52 또는 54에 있어서, 제1 제어 플래그가 존재하지 않을 때, 더 낮은 레벨에서 SAO는 제2 제어 플래그가 존재하는지에 관계 없이 비활성화되는, 비디오 디코딩 방법.
59. 조항 52 내지58에 있어서, SAO가 활성화될 때, SAO 프로세스는 디블로킹 필터 프로세스 이후에 재구성된 픽처에 적용되는, 비디오 디코딩 방법.
60. 비디오 디코딩 방법으로서,
비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계; 및
시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 제어 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계를 포함하고,-
디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 1과 동일하고 제2 레벨에서 제2 제어 플래그가 존재하지 않을 때 제1 레벨에서 비활성화되고, 및
디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 0과 동일하고 제2 레벨에서 제2 제어 플래그가 존재하지 않을 때 제1 레벨에서 활성화되고; 및
제1 레벨은 제2 레벨보다 높은 레벨인, 비디오 디코딩 방법.
61. 조항 60에 있어서, 제1 레벨은 픽처의 세트 레벨이고 제1 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되고; 및 제2 레벨은 픽처 레벨 또는 슬라이스 레벨 중 하나이고, 제2 제어 플래그는 픽처 헤더(PH) 또는 슬라이스 헤더(SH) 중 하나에서 시그널링되는, 비디오 디코딩 방법.
62. 조항 60에 있어서, PPS에서 시그널링된 제3 플래그를 기초로 제2 플래그가 픽처 레벨 또는 슬라이스 레벨에서 시그널링되는지를 결정하는 단계를 더 포함하는, 비디오 디코딩 방법.
63. 조항 60에 있어서, 시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계를 더 포함하고, 오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 존재할 수 있는지를 나타내기 위한 것인, 비디오 디코딩 방법.
64. 조항 60에 있어서, 시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서, 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 비디오 시퀀스를 디코딩하는 단계를 더 포함하고,
오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 존재할 수 있는지를 나타내기 위한 것이고, 및
시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에 존재하는 더 높은 제어 플래그가 1과 동일할 때, 디블로킹 필터는 더 낮은 레벨 제어 플래그가 더 높은 제어 플래그를 오버라이드하지 않을 때 대응하는 시퀀스, 픽처의 세트, 픽처 또는 슬라이스에 적용되지 않는, 비디오 디코딩 방법.
본원에서 "제1" 및 "제2"와 같은 관계 용어는 엔티티 또는 동작을 다른 엔티티 또는 동작과 구분하기 위해서만 사용되며, 이러한 엔티티 또는 동작 간의 임의의 실제 관계 또는 시퀀스를 요구하거나 암시하지 않는다는 것이 유의되어야 한다. 더욱이, 포함하는(comprising), "갖는(having)", "포함하는(containing)" 및 "포함하는(including)"이라는 단어 및 다른 유사한 형태는 그 의미가 동등하고, 이러한 단어 중 어느 하나를 따르는 항목 또는 항목들이 이러한 항목 또는 항목들의 철저한 열거(exhaustive listing)를 의미하지 않거나 또는 열거된 항목 또는 항목만으로 제한되는 것을 의미하지 않는다는 점에서, 제약을 두지 않는 것으로(open-ended) 의도된다.
본원에서 사용된 바와 같이, 달리 구체적으로 언급되지 않는 한, "또는"이란 용어는 실행 불가능한 경우를 제외하고 모든 가능한 조합을 포함한다. 예컨대, 데이터베이스가 A 또는 B가 포함될 수 있다고 명시되어 있으면, 달리 구체적으로 명시되지 않거나 실행 불가능한 경우를 제외하고, 데이터베이스는 A 또는 B, 또는 A 및 B를 포함할 수 있다. 제2 예로서, 데이터베이스가 A, B 또는 C를 포함할 수 있다고 명시되어 있으면, 달리 구체적으로 명시되지 않거나 실행 불가능한 경우를 제외하고, 데이터베이스는 A 또는 B 또는 C, 또는 A 및 B, 또는 A 및 C, 또는 B 및 C, 또는 A 및 B 및 C를 포함할 수 있다.
상술한 실시예는 하드웨어 또는 소프트웨어(프로그램 코드), 또는 하드웨어 및 소프트웨어의 조합에 의해 구현될 수 있다는 것이 인식된다. 소프트웨어로 구현되는 경우, 이는 상술한 컴퓨터 판독 가능 매체에 저장될 수 있다. 소프트웨어는 프로세서에 의해 실행될 때 개시된 방법을 수행할 수 있다. 본 개시에서 설명된 컴퓨팅 유닛 및 다른 기능 유닛은 하드웨어 또는 소프트웨어, 또는 하드웨어 및 소프트웨어의 조합에 의해 구현될 수 있다. 통상의 기술자는 또한 위에서 설명된 모듈/유닛 중 다수가 하나의 모듈/유닛으로 결합될 수 있고, 위에서 설명된 모듈/유닛 각각이 복수의 서브-모듈/서브-유닛으로 더 분할될 수 있음을 이해할 것이다.
전술한 명세서에서, 실시예는 구현마다 다를 수 있는 수많은 특정 세부사항을 참조로 설명되었다. 설명된 실시예의 특정 적응 및 수정이 이루어질 수 있다. 다른 실시예는 본원에 개시된 본 발명의 명세서 및 실시를 고려하여 통상의 기술자에게 명백할 수 있다. 명세서 및 예는 단지 예시적인 것으로 간주되어야 하는 것으로 의도되며, 본 발명의 진정한 범위 및 사상은 다음 청구범위에 의해 나타난다. 또한, 도면에 도시된 단계의 시퀀스는 단지 예시의 목적이며, 단계의 임의의 특정 시퀀스로 제한되도록 의도되지 않는다. 이와 같이, 통상의 기술자는 이러한 단계가 동일한 방법을 구현하면서 상이한 순서로 수행될 수 있음을 인식할 수 있다.
도면 및 명세서에서, 예시적인 실시예가 개시된다. 하지만, 이들 실시예에 대해 다수의 변형 및 수정이 이루어질 수 있다. 따라서, 특정한 용어가 이용되더라도, 제한의 목적이 아닌 일반적이고 설명적인 의미로 사용된다.

Claims (36)

  1. 비디오 인코딩 방법으로서,
    비디오 시퀀스를 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 인코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    상기 LMCS가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
    상기 제1 제어 플래그가 상기 LMCS가 상기 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, LMCS가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
    상기 LMCS는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고;
    상기 LMCS는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
  2. 제1항에 있어서, 상기 제1 제어 플래그는 상기 시퀀스 레벨에서 상기 LMCS에 대한 제어 플래그이고, 상기 제2 제어 플래그는 상기 픽처 레벨에서 상기 LMCS에 대한 제어 플래그인, 비디오 인코딩 방법.
  3. 제2항에 있어서,
    상기 제2 제어 플래그가 상기 LMCS가 상기 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 크로마 스케일링(CS)이 상기 제2 레벨에서 활성화되는지를 나타내는 제3 제어 플래그를 시그널링하는 단계를 더 포함하고,
    상기 CS는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고; 및
    상기 CS는 상기 제3 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되는, 비디오 인코딩 방법.
  4. 제1항에 있어서,
    상기 제2 플래그가 상기 LMCS가 상기 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 상기 LMCS가 제3 레벨에서 적용되는지를 나타내는 제4 제어 플래그를 시그널링하는 단계를 더 포함하고,
    상기 제4 제어 플래그의 값이 1과 동일할 때 상기 제3 레벨에서 루마 매핑(LM)이 적용되고 상기 CS가 적용될 수 있고;
    상기 LMCS는 상기 제4 제어 플래그의 값이 0과 동일할 때 상기 제3 레벨에서 적용되지 않고; 및
    상기 제3 레벨은 상기 제2 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
  5. 제4항에 있어서, 상기 제3 레벨은 상기 슬라이스 레벨인, 비디오 인코딩 방법.
  6. 비디오 인코딩 방법으로서,
    비디오 시퀀스를 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 적응적 루프 필터(adaptive loop filter, ALF)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 인코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    상기 ALF가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
    상기 제1 제어 플래그가 상기 제1 레벨에서 상기 ALF가 활성화된 것을 나타내는 것에 응답하여, ALF가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
    상기 ALF는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고;
    상기 ALF는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
  7. 제6항에 있어서, 추가로, 상기 제1 제어 플래그는 상기 시퀀스 레벨에서 ALF에 대한 제어 플래그이고, 상기 제2 제어 플래그는 픽처 파라미터 세트(Picture Parameter Set, PPS)에서 시그널링되는 제3 제어 플래그에 의존하여 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나에서 ALF에 대한 제어 플래그인, 비디오 인코딩 방법.
  8. 제6항에 있어서,
    상기 제2 플래그가 상기 ALF가 상기 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 교차 성분 적응적 루프 필터(Cross Component Adaptive loop filter, CCALF)가 상기 제2 레벨에서 Cb 색상 성분에 대해 활성화되는지를 나타내는 제4 제어 플래그를 시그널링하는 단계 -
    상기 CCALF는 상기 제4 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 Cb 색상 성분에 대해 활성화되고; 및
    상기 CCALF는 상기 제4 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 Cb 색상 성분에 대해 비활성화됨 - ; 및
    상기 제2 플래그가 상기 ALF가 상기 제2 레벨에서 활성화된 것을 나타내는 것에 응답하여, 교차 성분 적응적 루프 필터(CCALF)가 상기 제2 레벨에서 Cr 색상 성분에 대해 활성화되는지를 나타내는 제5 제어 플래그를 시그널링하는 단계를 더 포함하고,
    상기 CCALF는 상기 제5 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 Cr 색상 성분에 대해 활성화되고; 및
    상기 CCALF는 상기 제5 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 Cr 색상 성분에 대해 비활성화되는, 비디오 인코딩 방법.
  9. 제6항에 있어서, 상기 ALF의 파라미터가 픽처의 슬라이스 헤더에서 결정될 때, 상기 픽처의 모든 슬라이스는 상기 ALF의 상기 파라미터가 동일할 것인, 비디오 인코딩 방법.
  10. 제10항에 있어서, 상기 제4 제어 플래그 또는 상기 제5 제어 플래그가 시그널링되지 않을 때, CCALF는 상기 제2 제어 플래그와 연관된 상기 픽처의 상기 Cb 성분 또는 상기 Cr 성분에 대해 활성화되지 않는, 비디오 인코딩 방법.
  11. 비디오 인코딩 방법으로서,
    비디오 시퀀스를 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 샘플 적응적 오프셋(sample adaptive offset, SAO)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 인코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    상기 SAO가 제1 레벨에서 활성화되는지를 나타내는 제1 제어 플래그를 시그널링하는 단계; 및
    상기 제1 제어 플래그가 SAO가 상기 제1 레벨에서 활성화된 것을 나타내는 것에 응답하여, 상기 SAO가 제2 레벨에서 활성화되는지를 나타내는 제2 제어 플래그를 시그널링하는 단계를 포함하고,
    상기 SAO는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 루마 성분에 대해 활성화되고;
    상기 SAO는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 루마 성분에 대해 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 인코딩 방법.
  12. 제11항에 있어서, 상기 제2 제어 플래그에서 시그널링되는 제3 플래그를 더 포함하고,
    상기 SAO는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 크로마 성분에 대해 활성화되고; 및
    상기 SAO는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 크로마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
  13. 제11항에 있어서, 상기 제1 제어 플래그는 상기 시퀀스 레벨에서 SAO에 대한 제어 플래그이고, 상기 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 플래그에 의존하여 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나에서 SAO에 대한 제어 플래그인, 비디오 인코딩 방법.
  14. 제11항에 있어서, 상기 제2 제어 플래그가 시그널링되지 않을 때, 상기 SAO는 상기 제2 제어 플래그와 연관된 상기 픽처의 상기 루마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
  15. 제11항에 있어서, 상기 제3 제어 플래그가 시그널링되지 않을 때, 상기 SAO는 상기 제3 제어 플래그와 연관된 상기 픽처의 상기 크로마 성분에 대해 비활성화되는, 비디오 인코딩 방법.
  16. 비디오 인코딩 방법으로서,
    비디오 시퀀스를 수신하는 단계; 및
    시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 인코딩는 단계를 포함하고,
    상기 디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 1과 동일하고 제2 레벨에서 제2 제어 플래그가 시그널링되지 않을 때 상기 제1 레벨에서 비활성화되고, 및
    상기 디블로킹 필터는 상기 제1 레벨에서 제1 제어 플래그의 값이 0과 동일하고 상기 제2 레벨에서 상기 제2 제어 플래그가 시그널링되지 않을 때 상기 제1 레벨에서 활성화되고; 및
    상기 제1 레벨은 상기 제2 레벨보다 높은 레벨인, , 비디오 인코딩 방법.
  17. 제16항에 있어서, 상기 제1 레벨은 상기 픽처의 세트 레벨이고 상기 제1 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되고; 상기 제2 레벨은 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나이고, 상기 제2 제어 플래그는 픽처 헤더(PH) 또는 슬라이스 헤더(SH) 중 하나에서 시그널링되는, 비디오 인코딩 방법.
  18. 제16항에 있어서, 상기 시퀀스 레벨, 상기 픽처의 세트 레벨, 상기 픽처 레벨 또는 상기 슬라이스 레벨에서 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 상기 비디오 시퀀스를 인코딩하는 단계를 더 포함하고,
    상기 오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 시그널링될 수 있는지를 나타내기 위한 것이고, 및
    상기 시퀀스 레벨, 상기 픽처의 세트 레벨, 상기 픽처 레벨 또는 상기 슬라이스 레벨에서 시그널링된 상기 더 높은 제어 플래그가 1과 동일할 때, 디블로킹 필터는 상기 더 낮은 레벨 제어 플래그가 상기 더 높은 제어 플래그를 오버라이드하지 않을 때 대응하는 시퀀스, 픽처의 세트, 픽처 또는 슬라이스에 적용되지 않는, 비디오 인코딩 방법.
  19. 비디오 디코딩 방법으로서,
    비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 LMCS(luma mapping with chroma scaling)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 디코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    제1 제어 플래그가 상기 LMCS가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
    상기 제1 제어 플래그가 상기 LMCS가 상기 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 LMCS가 제2 레벨에서 활성화되는 지를 결정하는 단계를 포함하고,
    상기 LMCS는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고;
    상기 LMCS는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
  20. 제19항에 있어서, 상기 제1 제어 플래그는 상기 시퀀스 레벨에서 상기 LMCS에 대한 제어 플래그이고, 상기 제2 제어 플래그는 상기 픽처 레벨에서 상기 LMCS에 대한 제어 플래그인, 비디오 디코딩 방법.
  21. 제20항에 있어서,
    상기 제2 제어 플래그가 상기 LMCS가 상기 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제3 제어 플래그가 상기 제2 레벨에서 크로마 스케일링(CS)이 활성화된 것을 나타내는지를 결정하는 단계를 더 포함하고,
    상기 CS는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고; 및
    상기 CS는 상기 제3 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되는,, 비디오 디코딩 방법.
  22. 제19항에 있어서,
    상기 제2 플래그가 상기 LMCS가 상기 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제4 제어 플래그가 상기 LMCS가 제3 레벨에서 적용된 것을 나타내는지를 결정하는 단계를 더 포함하고,
    상기 제4 제어 플래그의 값이 1과 동일할 때 상기 제3 레벨에서 루마 매핑(LM)이 적용되고 상기 CS가적용될 수 있고;
    상기 LMCS는 상기 제4 제어 플래그의 값이 0과 동일할 때 상기 제3 레벨에서 적용되지 않고; 및
    상기 제3 레벨은 상기 제2 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
  23. 제22에 있어서, 상기 제3 레벨은 상기 슬라이스 레벨인, 비디오 디코딩 방법.
  24. 비디오 디코딩 방법으로서,
    비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 적응적 루프 필터(ALF)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 디코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    제1 제어 플래그가 상기 ALF가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
    상기 제1 제어 플래그가 상기 ALF가 상기 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 ALF가 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 포함하고,
    상기 ALF는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 활성화되고;
    상기 ALF는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
  25. 제24항에 있어서, 추가로 상기 제1 제어 플래그는 시퀀스 레벨에서 ALF에 대한 제어 플래그이고, 상기 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 제어 플래그에 의존하여 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나에서 ALF에 대한 제어 플래그인, 비디오 디코딩 방법.
  26. 제24항에 있어서,
    상기 제2 플래그가 상기 ALF가 상기 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제4 제어 플래그가 교차 성분 적응적 루프 필터(CCALF)가 상기 제2 레벨에서 Cb 색상 성분에 대해 활성화된 것을 나타내는지를 결정하는 단계 -
    상기 CCALF는 상기 제4 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 Cb 색상 성분에 대해 활성화되고; 및
    상기 CCALF는 상기 제4 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 Cb 색상 성분에 대해 비활성화됨 - ; 및
    상기 제2 플래그가 상기 ALF가 상기 제2 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 교차 성분 적응적 루프 필터(CCALF)가 상기 제2 레벨에서 Cr 색상 성분에 대해 활성화된 것을 나타내는 제5 제어 플래그를 시그널링하는 단계를 더 포함하고,
    상기 CCALF는 상기 제5 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 Cr 색상 성분에 대해 활성화되고; 및
    상기 CCALF는 상기 제5 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 Cr 색상 성분에 대해 비활성화되는, 비디오 디코딩 방법.
  27. 제24항에 있어서, 상기 ALF의 파라미터가 픽처의 슬라이스 헤더에서 결정될 때, 상기 픽처의 모든 슬라이스는 상기 ALF의 상기 파라미터가 동일할 것인, 비디오 디코딩 방법.
  28. 제24항에 있어서, 상기 제4 제어 플래그 또는 상기 제5 제어 플래그가 시그널링되지 않을 때, CCALF는 상기 제2 제어 플래그와 연관된 상기 픽처의 상기 Cb 성분 또는 상기 Cr 성분에 대해 활성화되지 않는, 비디오 디코딩 방법.
  29. 비디오 디코딩 방법으로서,
    비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계;
    시퀀스 레벨, 픽처 레벨 또는 슬라이스 레벨에서 샘플 적응적 오프셋(SAO)에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 디코딩하는 단계 - 상기 시퀀스 레벨, 상기 픽처 레벨 및 상기 슬라이스 레벨은 높음으로부터 낮음까지의 등급을 갖는 레벨임 - ;
    제1 제어 플래그가 상기 SAO가 제1 레벨에서 활성화된 것을 나타내는지를 결정하는 단계; 및
    상기 제1 제어 플래그가 SAO가 상기 제1 레벨에서 활성화된 것을 나타낸다는 결정에 응답하여, 제2 제어 플래그가 상기 SAO가 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 포함하고,
    상기 SAO는 상기 제2 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 루마 성분에 대해 활성화되고;
    상기 SAO는 상기 제2 제어 플래그의 값이 0과 동일할 때 상기 제2 레벨에서 루마 성분에 대해 비활성화되고; 및
    상기 제2 레벨은 상기 제1 레벨보다 낮은 레벨인, 비디오 디코딩 방법.
  30. 제29항에 있어서,
    제3 플래그가 상기 SAO가 상기 제2 레벨에서 활성화된 것을 나타내는지를 결정하는 단계를 더 포함하고,
    상기 SAO는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 크로마 성분에 대해 활성화되고; 및
    상기 SAO는 상기 제3 제어 플래그의 값이 1과 동일할 때 상기 제2 레벨에서 크로마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
  31. 제29항에 있어서, 상기 제1 제어 플래그는 시퀀스 레벨에서 SAO에 대한 제어 플래그이고, 상기 제2 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링된 제3 플래그에 의존하여 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나에서 SAO에 대한 제어 플래그인, 비디오 디코딩 방법.
  32. 제29항에 있어서, 상기 제2 제어 플래그가 존재하지 않을 때, 상기 SAO는 상기 제2 제어 플래그와 연관된 상기 픽처의 상기 루마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
  33. 제29항에 있어서, 상기 제3 제어 플래그가 존재하지 않을 때, 상기 SAO는 상기 제3 제어 플래그와 연관된 상기 픽처의 상기 크로마 성분에 대해 비활성화되는, 비디오 디코딩 방법.
  34. 비디오 디코딩 방법으로서,
    비디오 시퀀스를 포함하는 비트 스트림을 수신하는 단계; 및
    시퀀스 레벨, 픽처의 세트 레벨, 픽처 레벨 또는 슬라이스 레벨에서 디블로킹 필터에 대한 제어 플래그를 사용함으로써 상기 비디오 시퀀스를 디코딩하는 단계를 포함하고,
    상기 디블로킹 필터는 제1 레벨에서 제1 제어 플래그의 값이 1과 동일하고 제2 레벨에서 제2 제어 플래그가 존재하지 않을 때 상기 제1 레벨에서 비활성화되고, 및
    상기 디블로킹 필터는 상기 제1 레벨에서 상기 제1 제어 플래그의 값이 0과 동일하고 상기 제2 레벨에서 상기 제2 제어 플래그가 존재하지 않을 때 상기 제1 레벨에서 활성화되고; 및
    상기 제1 레벨은 상기 제2 레벨보다 높은 레벨인, 비디오 디코딩 방법.
  35. 제34항에 있어서, 상기 제1 레벨은 상기 픽처의 세트 레벨이고 상기 제1 제어 플래그는 픽처 파라미터 세트(PPS)에서 시그널링되고; 및 상기 제2 레벨은 상기 픽처 레벨 또는 상기 슬라이스 레벨 중 하나이고, 상기 제2 제어 플래그는 픽처 헤더(PH) 또는 슬라이스 헤더(SH) 중 하나에서 시그널링되는, 비디오 디코딩 방법.
  36. 제34항에 있어서, 상기 시퀀스 레벨, 상기 픽처의 세트 레벨, 상기 픽처 레벨 또는 상기 슬라이스 레벨에서, 디블로킹 필터에 대한 오버라이드 플래그를 사용함으로써 상기 비디오 시퀀스를 디코딩하는 단계를 더 포함하고,
    상기 오버라이드 플래그는 더 낮은 레벨 제어 플래그가 더 높은 레벨 제어 플래그를 오버라이드하기 위해 존재할 수 있는지를 나타내기 위한 것이고, 및
    상기 시퀀스 레벨, 상기 픽처의 세트 레벨, 상기 픽처 레벨 또는 상기 슬라이스 레벨에 존재하는 상기 더 높은 제어 플래그가 1과 동일할 때, 디블로킹 필터는 상기 더 낮은 레벨 제어 플래그가 상기 더 높은 제어 플래그를 오버라이드하지 않을 때 대응하는 시퀀스, 픽처의 세트, 픽처 또는 슬라이스에 적용되지 않는, 비디오 디코딩 방법.
KR1020227035887A 2020-03-29 2021-03-29 루프 필터의 높은 레벨 신택스 제어 KR20220160019A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US202063001448P 2020-03-29 2020-03-29
US63/001,448 2020-03-29
PCT/US2021/024660 WO2021202385A1 (en) 2020-03-29 2021-03-29 High level syntax control of loop filter

Publications (1)

Publication Number Publication Date
KR20220160019A true KR20220160019A (ko) 2022-12-05

Family

ID=77856753

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020227035887A KR20220160019A (ko) 2020-03-29 2021-03-29 루프 필터의 높은 레벨 신택스 제어

Country Status (6)

Country Link
US (2) US11509921B2 (ko)
EP (1) EP4128773A4 (ko)
JP (1) JP2023519216A (ko)
KR (1) KR20220160019A (ko)
CN (1) CN115398905A (ko)
WO (1) WO2021202385A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11425405B2 (en) * 2019-11-15 2022-08-23 Qualcomm Incorporated Cross-component adaptive loop filter in video coding
US11470358B2 (en) * 2020-04-02 2022-10-11 Sharp Kabushiki Kaisha Systems and methods for signaling scaling window information in video coding

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9094658B2 (en) * 2010-05-10 2015-07-28 Mediatek Inc. Method and apparatus of adaptive loop filtering
US9538200B2 (en) 2012-01-19 2017-01-03 Qualcomm Incorporated Signaling of deblocking filter parameters in video coding
US10419757B2 (en) * 2016-08-31 2019-09-17 Qualcomm Incorporated Cross-component filter
PL3847818T3 (pl) 2018-09-18 2024-04-29 Huawei Technologies Co., Ltd. Koder wideo, dekoder wideo i odpowiednie sposoby

Also Published As

Publication number Publication date
EP4128773A4 (en) 2024-02-28
EP4128773A1 (en) 2023-02-08
WO2021202385A1 (en) 2021-10-07
JP2023519216A (ja) 2023-05-10
US20230055802A1 (en) 2023-02-23
CN115398905A (zh) 2022-11-25
US11509921B2 (en) 2022-11-22
US20210306652A1 (en) 2021-09-30

Similar Documents

Publication Publication Date Title
US11889091B2 (en) Methods for processing chroma signals
US20230055802A1 (en) High level syntax control of loop filter
KR20220123018A (ko) 가상 경계의 시그널링 및 랩 어라운드 움직임 보상을 위한 방법
KR20220116006A (ko) 랩-어라운드 모션 보상을 수행하기 위한 방법들
US11638019B2 (en) Methods and systems for prediction from multiple cross-components
US20210306623A1 (en) Sign data hiding of video recording
US20240048772A1 (en) METHOD AND APPARATUS FOR PROCESSING VIDEO CONTENT WITH ALF and CCALF
KR20230013103A (ko) 비디오 처리에서의 타일 및 슬라이스 파티셔닝
KR20220115984A (ko) 팔레트 모드에서 비디오 데이터를 코딩하기 위한 방법 및 장치
JP2023509838A (ja) サブピクチャ分割情報をシグナリングするための方法及び機器
US20210368170A1 (en) High level control of pdpc and intra reference sample filtering of video coding
US20210266548A1 (en) Signaling of maximum transform size and residual coding method
KR20220161409A (ko) 팔레트 예측을 위한 방법
US20210306653A1 (en) Methods for signaling residual coding method of transform skip blocks
US11606577B2 (en) Method for processing adaptive color transform and low-frequency non-separable transform in video coding
US20210084293A1 (en) Method and apparatus for coding video data
KR20240036574A (ko) 교차-성분 적응형 루프 필터를 위한 방법 및 시스템