KR20210105980A - 비디오 인코더, 비디오 디코더 및 상응하는 방법들 - Google Patents

Abstract

비디오 비트스트림을 디코딩하기 위한 방법. 비트스트림은 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하고, 각 픽처는 적어도 하나의 타일 그룹을 포함한다. 방법은 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파싱하는 단계를 포함한다. 타일 정보는 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타낸다. 방법은 플래그에 기초하여 파라미터 세트 또는 타일 그룹 헤더로부터 타일 정보를 파싱한다. 방법은 타일 정보에 기초하여 코딩된 픽처의 디코딩된 데이터를 취득한다.

Description

비디오 코딩에서의 타일 그룹 시그널링

[관련 출원에 대한 상호 참조]

본 특허 출원은 FNU Hendry 등에 의해 2018년 12월 27일에 출원된 "Tile Group Signaling in Video Coding"이라는 명칭의 미국 특허 가출원 제62/785,517호 및 FNU Hendry 등에 의해 2019년 7월 5일에 출원된 "Tile Group Signaling in Video Coding"이라는 명칭의 미국 특허 가출원 제62/871,024호의 이익을 주장하며, 이들 각각은 여기에 참조로 포함된다.

[기술분야]

본 개시물은 일반적으로 비디오 코딩과 관련되고, 구체적으로 비디오 코딩에서의 타일 그룹 시그널링과 관련된다.

비교적 짧은 비디오조차도 이를 묘사하는 데 필요한 비디오 데이터의 양은 상당할 수 있으며, 이는 제한된 대역폭 용량을 가진 통신 네트워크를 통해 데이터가 스트리밍되거나, 또는 다른 방식으로 통신될 때 어려움을 초래할 수 있다. 따라서, 비디오 데이터는 현대 통신 네트워크를 통해 통신되기 전에 압축되는 것이 일반적이다. 메모리 리소스가 제한될 수 있기 때문에 비디오가 스토리지 디바이스에 저장될 때에는 비디오의 크기가 문제가 될 수 있다. 비디오 압축 디바이스는 흔히 전송 또는 저장 전에 소스에서 소프트웨어 및/또는 하드웨어를 사용해서 비디오 데이터를 코딩하고, 이로써 디지털 비디오 이미지를 표현하는 데 필요한 데이터량이 감소된다. 이후, 압축된 데이터는 수신지에서 비디오 데이터를 디코딩하는 비디오 압축 해제 디바이스에 의해 수신된다. 네트워크 리소스가 제한적이고, 더 높은 비디오 품질에 대한 요구가 계속 증가함에 따라, 이미지 품질을 거의 또는 전혀 희생하지 않으면서 압축 비율을 향상시키는 향상된 압축 및 압축 해제 기술이 바람직하다.

본 개시물의 제1 양태는 인코더에서 구현되는 방법을 포함하고, 이 방법은, 인코더의 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 인코딩― 타일 정보는 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타냄 ―하는 단계, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에서 인코딩된다는 것을 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 파라미터 세트에서만 타일 정보를 인코딩하는 단계, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 타일 그룹 헤더에서만 타일 정보를 인코딩하는 단계, 프로세서에 의해, 타일 정보에 기초하여 비디오 비트스트림에서 픽처를 인코딩하는 단계, 및 디코더를 향해 네트워크를 따라 비디오 비트스트림을 전송하는 단계를 포함한다. 본 양태는 타일 그룹 구조 시그널링을 개선하고 중복 정보를 감소시키는 메커니즘을 제공한다.

선택적으로, 제1 양태에 있어서, 프로세서에 의해, 파라미터 세트에서만 타일 정보를 인코딩하는 단계는, 프로세서에 의해, 픽처에서의 각 타일 그룹의 첫 번째 타일의 타일 식별자(ID)를 인코딩하는 단계를 포함한다.

선택적으로, 제1 양태에 있어서, 프로세서에 의해, 파라미터 세트에서만 타일 정보를 인코딩하는 단계는, 프로세서에 의해, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 픽처에서의 현재의 타일 그룹의 마지막 타일의 타일 ID를 인코딩하는 단계를 더 포함한다.

선택적으로, 제1 양태에 있어서, 프로세서에 의해, 파라미터 세트에서만 타일 정보를 인코딩하는 단계는, 프로세서에 의해, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 픽처에서의 현재의 타일 그룹 내의 타일의 수를 인코딩하는 단계를 더 포함한다.

선택적으로, 제1 양태에 있어서, 프로세서에 의해, 타일 그룹 헤더에서만 타일 정보를 인코딩하는 단계는, 프로세서에 의해, 타일 그룹 헤더에서 픽처에서의 타일 그룹의 첫 번째 타일의 타일 ID를 인코딩하는 단계, 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정하는지의 여부 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정하는지의 여부를 결정하는 단계 및 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정하고, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 타일 그룹 헤더에서 픽처에서의 타일 그룹의 마지막 타일의 타일 ID를 인코딩하는 단계를 포함한다.

본 개시물의 제2 양태는 비디오 비트스트림을 디코딩하기 위해 디코더에서 구현되는 방법을 포함― 비트스트림은 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하고, 각 픽처는 적어도 하나의 타일 그룹을 포함함 ―하고, 이 방법은, 디코딩의 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파싱― 타일 정보는 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타냄 ―하는 단계, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에서 인코딩된다는 것을 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 파라미터 세트로부터 타일 정보를 파싱하는 단계, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정한다는 결정에 응답하여, 프로세서에 의해, 타일 그룹 헤더로부터 타일 정보를 파싱하는 단계 및 타일 정보에 기초하여 코딩된 픽처의 디코딩된 데이터를 취득하는 단계를 포함한다.

선택적으로, 제2 양태에 있어서, 프로세서에 의해, 파라미터 세트로부터 타일 정보를 파싱하는 단계는 픽처에서의 각 타일 그룹의 첫 번째 타일의 타일 식별자(ID)를 디코딩하는 단계를 포함한다.

선택적으로, 제2 양태에 있어서, 프로세서에 의해, 파라미터 세트로부터 타일 정보를 파싱하는 단계는, 프로세서에 의해, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 픽처에서의 현재의 타일 그룹의 마지막 타일의 타일 ID를 디코딩하는 단계를 더 포함한다.

선택적으로, 제2 양태에 있어서, 프로세서에 의해, 파라미터 세트로부터 타일 정보를 파싱하는 단계는, 프로세서에 의해, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 픽처에서의 현재 타일 그룹 내의 타일의 수를 디코딩하는 단계를 더 포함한다.

선택적으로, 제2 양태에 있어서, 프로세서에 의해, 타일 그룹 헤더로부터 타일 정보를 파싱하는 단계는, 타일 그룹 헤더에서 픽처에서의 타일 그룹의 첫 번째 타일의 타일 ID를 디코딩하는 단계, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정하는지의 여부 및 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정하는지의 여부를 결정하는 단계 및 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에서 인코딩된다는 것을 플래그가 특정하고, 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 제2 플래그가 특정한다는 결정에 응답하여, 타일 그룹 헤더에서 픽처에서의 타일 그룹의 마지막 타일의 타일 ID를 디코딩하는 단계를 포함한다.

선택적으로, 제2 양태에 있어서, 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파싱하는 단계는, 플래그가 파라미터 세트에 존재하지 않는다는 결정에 응답하여, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에만 존재한다는 것을 플래그가 특정한다고 추론하는 단계를 포함한다.

선택적으로, 선행의 양태들 중 어느 하나의 양태에 있어서, 플래그를 tile_group_info_in_pps_flag라고 한다.

선택적으로, 선행의 양태들 중 어느 하나의 양태에 있어서, 제2 플래그를 single_tile_per_tile_group_flag라고 한다.

선택적으로, 선행의 양태들 중 어느 하나의 양태에 있어서, 파라미터 세트는 픽처 파라미터 세트이다.

선택적으로, 선행의 양태들 중 어느 하나의 양태에 있어서, 파라미터 세트는 시퀀스 파라미터 세트이다.

선택적으로, 선행의 양태들 중 어느 하나의 양태에 있어서, 파라미터 세트는 비디오 파라미터 세트이다.

본 개시물의 제3 양태는, 프로세서, 프로세서에 결합되는 수신기, 및 프로세서에 결합되는 송신기를 포함하는 비디오 코딩 디바이스를 포함하고, 프로세서, 수신기 및 송신기는 선행의 양태들 중 어느 하나의 양태의 방법을 수행하도록 구성된다.

본 개시물의 제4 양태는, 비디오 코딩 디바이스에 의해 사용하기 위한 컴퓨터 프로그램 제품을 포함하는 비일시적 컴퓨터 판독 가능 매체를 포함하고, 컴퓨터 프로그램 제품은, 프로세서에 의해 실행될 때, 비디오 코딩 디바이스로 하여금 선행의 양태들 중 어느 하나의 양태의 방법을 수행하게 하도록 비일시적 컴퓨터 판독 가능 매체에 저장되는 컴퓨터 실행 가능 명령어를 포함한다.

명료성을 위해, 전술한 실시형태들 중 어느 하나는 전술한 다른 실시형태들 중 어느 하나 이상과 결합되어 본 개시물의 범위 내에서 새로운 실시형태를 생성할 수 있다.

이들 및 다른 특징들은 첨부 도면 및 청구범위와 함께 취해지는 하기의 발명을 실시하기 위한 구체적인 내용으로부터 더욱 명확하게 이해될 것이다.

본 개시물의 더 완전한 이해를 위해, 이제 첨부 도면 및 발명을 실시하기 위한 구체적인 내용과 함께 취해지는 하기의 간단한 설명을 참조하고, 유사한 참조 번호는 유사한 부분을 나타낸다.
도 1은 비디오 신호를 코딩하는 예시적인 방법의 흐름도이다.
도 2는 비디오 코딩을 위한 예시적인 코딩 및 디코딩(코덱) 시스템의 개략도이다.
도 3은 예시적인 비디오 인코더를 예시하는 개략도이다.
도 4는 예시적인 비디오 디코더를 예시하는 개략도이다.
도 5는 인코딩된 비디오 시퀀스를 포함하는 예시적인 비트스트림을 예시하는 개략도이다.
도 6은 예시적인 타일 그룹으로 파티셔닝되는 픽처를 예시하는 개략도이다.
도 7은 예시적인 비디오 코딩 디바이스의 개략도이다.
도 8은 타일 그룹 정보의 위치를 나타내는 플래그를 갖는 이미지를 비트스트림에 인코딩하는 예시적인 방법의 흐름도이다.
도 9는 타일 그룹 정보의 위치를 나타내는 플래그를 갖는 이미지를 비트스트림으로부터 디코딩하는 예시적인 방법의 흐름도이다.
도 10은 비트스트림에서 이미지들의 비디오 시퀀스를 코딩하기 위한 예시적인 시스템의 개략도이다.

우선은, 하나 이상의 실시형태의 예시적인 구현이 아래에 제공되지만, 개시된 시스템 및/또는 방법이 현재 알려져 있거나 현존하는지의 여부에 관계없이 임의의 수의 기술을 사용해서 구현될 수 있음을 이해해야 한다. 본 개시물은, 본 명세서에서 예시 및 설명된 예시적인 설계 및 구현을 포함하여, 아래에 예시되는 예시적인 구현, 도면, 및 기술로 결코 제한되지 않아야 하며, 등가물의 전체 범위와 함께 첨부된 청구항들의 범위 내에서 수정될 수 있다.

데이터의 손실을 최소화하면서 비디오 파일의 크기를 줄이기 위해 많은 비디오 압축 기술이 이용될 수 있다. 예를 들어, 비디오 압축 기술은 비디오 시퀀스에서 데이터 중복을 감소 또는 제거하기 위해 공간적(예컨대, 인트라-픽처) 예측 및/또는 시간적(예컨대, 인터-픽처) 예측을 수행하는 것을 포함할 수 있다. 블록 기반 비디오 코딩의 경우, 비디오 슬라이스(예컨대, 비디오 픽처 또는 비디오 픽처의 일부)는 트리 블록, 코딩 블록(CB), 코딩 트리 블록(CTB), 코딩 트리 단위(CTU), 코딩 단위(CU) 및/또는 코딩 노드라고 할 수도 있는 비디오 블록으로 파티셔닝될 수 있다. 코딩 블록(CB)은, CTB의 코딩 블록으로의 분할이 파티셔닝이 되도록, M 및 N의 일부 값들에 대한 샘플들의 M×N 블록이다. 코딩 트리 블록(CTB)은, 컴포넌트의 CTB로의 분할이 파티셔닝이 되도록, N의 일부 값에 대한 샘플들의 N×N 블록이다. 코딩 트리 단위(CTU)는 루마 샘플들의 CTB, 3 개의 샘플 어레이를 갖는 픽처의 크로마 샘플들의 2 개의 상응하는 CTB, 또는 모노크롬 픽처의 또는 샘플들을 코딩하는 데 사용되는 3 개의 별도의 컬러 평면 및 신택스 구조를 사용해서 코딩된 픽처의 샘플들의 CTB이다. 코딩 단위(CU)는 루마 샘플들의 코딩 블록, 3 개의 샘플 어레이를 갖는 픽처의 크로마 샘플들의 2 개의 상응하는 코딩 블록, 또는 모노크롬 픽처의 또는 샘플들을 코딩하는 데 사용되는 3 개의 별도의 컬러 평면 및 신택스 구조를 사용해서 코딩된 픽처의 샘플들의 코딩 블록이다.

픽처의 인트라-코딩된(I) 슬라이스에서의 비디오 블록들은 동일한 픽처에서 이웃 블록들에 있는 참조 샘플들에 대한 공간적 예측을 사용하여 코딩된다. 픽처의 인터-코딩된 단방향 예측(P) 또는 양방향 예측(B) 슬라이스에서의 비디오 블록들은 동일한 픽처의 인접 블록들에 있는 참조 샘플들에 대한 공간적 예측 또는 다른 참조 픽처들에서의 참조 샘플들에 대한 시간적 예측을 사용해서 코딩될 수 있다. 픽처를 프레임 및/또는 이미지라고 할 수 있고, 참조 픽처를 참조 프레임 및/또는 참조 이미지라고 할 수 있다. 공간적 또는 시간적 예측은 이미지 블록을 나타내는 예측 블록을 초래한다. 잔차 데이터는 원본 이미지 블록과 예측 블록 사이의 픽셀 차이(pixel difference)를 나타낸다. 따라서, 인터-코딩된 블록은 예측 블록을 형성하는 참조 샘플들의 블록을 가리키는 모션 벡터 및 코딩된 블록과 예측 블록 사이의 차이를 나타내는 잔차 데이터에 따라 인코딩된다. 인트라-코딩된 블록은 인트라-코딩 모드 및 잔차 데이터에 따라 인코딩된다. 추가 압축을 위해, 잔차 데이터는 픽셀 도메인으로부터 변환 도메인으로 변환될 수 있다. 이로 인해 양자화될 수 있는 잔차 변환 계수들이 생성된다. 양자화된 변환 계수들은 초기에 2차원 어레이로 배열될 수 있다. 양자화된 변환 계수는 변환 계수의 1차원 벡터를 생성하기 위해 스캔될 수 있다. 더 많은 압축을 달성하기 위해 엔트로피 코딩이 적용될 수 있다. 이러한 비디오 압축 기술은 아래에서 자세히 논의된다.

인코딩된 비디오를 정확하게 디코딩할 수 있도록, 비디오는 상응하는 비디오 코딩 표준에 따라 인코딩 및 디코딩된다. 비디오 코딩 표준은, 국제 전기통신 연합(ITU) 표준화 부문(ITU-T) H.261, 국제 표준화 기구/국제 전기 표준 회의(ISO/IEC) 동영상 전문가 그룹(MPEG)-1 Part 2, ITU-T H.262 또는 ISO/IEC MPEG-2 Part 2, ITU-T H.263, ISO/IEC MPEG-4 Part 2, ITU-T H.264 또는 ISO/IEC MPEG-4 Part 10이라고도 알려져 있는 고도 비디오 코딩(AVC), 및 ITU-T H.265 또는 MPEG-H Part 2라고도 알려져 있는 고효율 비디오 코딩(HEVC)을 포함한다. AVC는 스케일러블 비디오 코딩(SVC), 다시점 비디오 코딩(MVC) 및 다시점 비디오 코딩 플러스 깊이(MVC+D)와 같은 확장, 및 3차원(3D) AVC(3D-AVC)를 포함한다. HEVC는 스케일러블 HEVC(SHVC), 다시점 HEVC(MV-HEVC), 및 3D HEVC(3D-HEVC)와 같은 확장을 포함한다. ITU-T 및 ISO/IEC의 협력 비디오 전문가 팀(JVET)은 다용도 비디오 코딩(VVC)이라고 하는 비디오 코딩 표준을 개발하기 시작했다. VVC는 JVET-L1001-v9을 포함하는 규격 초안(WD)에 포함되어 있다.

비디오 이미지를 코딩하기 위해서는, 이미지가 먼저 파티셔닝되고, 파티션들이 비트스트림으로 코딩된다. 다양한 픽처 파티셔닝 스킴을 이용할 수 있다. 예를 들어, 이미지는 일반(regular) 슬라이스로, 종속(dependent) 슬라이스로, 타일로 및/또는 웨이브프론트 병렬 처리(Wavefront Parallel Processing)(WPP)에 따라 파티셔닝될 수 있다. 단순화를 위해, HEVC는 인코더를 제한하여, 비디오 코딩을 위해 슬라이스를 CTB 그룹으로 파티셔닝할 때 일반 슬라이스, 종속 슬라이스, 타일, WPP 및 이들의 조합만이 사용할 수 있도록 한다. 이러한 파티셔닝은 최대 전송 단위(MTU) 크기 매칭, 병렬 처리 및 종단간 지연 감소를 지원하기 위해 적용될 수 있다. MTU는 단일 패킷으로 전송될 수 있는 최대 데이터량을 나타낸다. 패킷 페이로드가 MTU를 초과하면, 해당 페이로드는 단편화(fragmentation)라고 하는 프로세스를 통해 2 개의 패킷으로 분할된다.

단순히 슬라이스라고도 하는 일반 슬라이스는 루프 필터링 작업으로 인한 일부 상호 의존성에도 불구하고 동일한 픽처 내의 다른 일반 슬라이스들과 독립적으로 복원될 수 있는 이미지의 파티셔닝된 부분이다. 슬라이스는 래스터 스캔에서 연속적으로 정렬되는 정수 개의 CTU를 포함한다. 각 슬라이스는 전송을 위해 자체 네트워크 추상 계층(NAL) 단위로 캡슐화된다. 또한, 인-픽처 예측(in-picture prediction)(인트라 샘플 예측, 모션 정보 예측, 코딩 모드 예측) 및 슬라이스 경계를 통한 엔트로피 코딩 종속성은 독립적인 복원을 지원하기 위해 비활성화될 수 있다. 이러한 독립적 복원은 병렬화를 지원한다. 예를 들어, 일반 슬라이스 기반 병렬화는 최소한의 프로세서간 또는 코어간 통신을 사용한다. 그러나, 각 일반 슬라이스는 독립적이기 때문에, 각 슬라이스는 별도의 슬라이스 헤더와 연관된다. 일반 슬라이스를 사용하면, 각 슬라이스에 대한 슬라이스 헤더의 비트 비용으로 인해, 또한 슬라이스 경계에 걸친 예측 부족으로 인해 상당한 코딩 오버헤드가 발생할 수 있다. 또한, 일반 슬라이스는 MTU 크기 요건에 대한 매칭을 지원하기 위해 사용될 수 있다. 구체적으로, 일반 슬라이스는 별도의 NAL 단위로 캡슐화되고 독립적으로 코딩될 수 있기 때문에, 각 일반 슬라이스는 슬라이스가 다수의 패킷으로 분할되는 것을 방지하기 위해 MTU 스킴에서의 MTU보다 작아야 한다. 이와 같이, 병렬화의 목표 및 MTU 크기 매칭의 목표를 픽처의 슬라이스 레이아웃에 대하여 모순되는 요구에 둘 수 있다.

종속 슬라이스는 일반 슬라이스와 유사하지만, 슬라이스 헤더가 짧아지고 인-픽처 예측을 중단시킴이 없이 이미지 트리블록 경계의 파티셔닝을 허용한다. 따라서, 종속 슬라이스는 일반 슬라이스가 다수의 NAL 단위로 단편화되는 것을 허용하고, 이는 전체 일반 슬라이스의 인코딩이 완료되기 전에 일반 슬라이스의 일부가 전송되는 것을 허용함으로써 감소된 종단간 지연을 제공한다.

타일은 타일의 열과 행을 생성하는 수평 및 수직 경계에 의해 생성되는 이미지/픽처의 파티셔닝된 부분이다. 타일에는 픽처에서의 특정 타일 열과 특정 타일 행 내에 직사각형 CTU 영역이 포함된다. 타일은 래스터 스캔 순서(오른쪽에서 왼쪽으로 및 위에서 아래로)로 코딩될 수 있다. CTB의 스캔 순서는 타일 내에서 로컬이다. 따라서, 첫 번째 타일에서의 CTB는 다음 타일에서의 CTB로 진행하기 전에 래스터 스캔 순서로 코딩된다. 일반 슬라이스와 마찬가지로, 타일은 엔트로피 디코딩 종속성 뿐만 아니라 인-픽처 예측 종속성을 중단시킨다. 그러나, 타일이 개별 NAL 단위에 포함되지 않을 수 있으므로, 타일이 MTU 크기 매칭에 사용되지 않을 수 있다. 각 타일은 하나의 프로세서/코어에 의해 처리될 수 있으며, 인접 타일들을 디코딩하는 처리 유닛들 사이의 인-픽처 예측에 사용되는 프로세서간/코어간 통신은 공유 슬라이스 헤더를 전달하는 것(인접 타일들이 동일한 슬라이스에 있는 경우) 및 복원된 샘플들 및 메타데이터의 공유와 관련된 루프 필터링을 수행하는 것으로 제한될 수 있다. 하나 초과의 타일이 슬라이스에 포함되는 경우, 슬라이스에서의 첫 번째 엔트리 포인트 오프셋 외에 각 타일에 대한 엔트리 포인트 바이트 오프셋이 슬라이스 헤더에서 시그널링될 수 있다.

주어진 코딩된 비디오 시퀀스는 HEVC에서 특정되는 대부분의 프로파일에 대하여 타일과 웨이브프론트를 모두 포함할 수는 없다. 각 슬라이스 및 타일에 대하여, 다음 조건들 중 어느 하나 또는 둘 모두가 충족되어야 한다: 1) 슬라이스에서의 모든 코딩된 트리블록이 동일한 타일에 속한다; 2) 타일에서의 모든 코딩된 트리블록이 동일한 슬라이스에 속한다. 웨이브프론트 세그먼트는 정확히 하나의 CTB 행을 포함하며, WPP가 사용 중일 경우, 슬라이스가 CTB 행 내에서 시작되면, 동일한 CTB 행에서 종료되어야 한다.

WPP에서, 이미지는 단일의 CTB 행들로 파티셔닝된다. 엔트로피 디코딩 및 예측 메커니즘은 다른 행들에서의 CTB로부터의 데이터를 사용할 수 있다. 병렬 처리는 CTB 행들의 병렬 디코딩을 통해 가능해진다. 예를 들어, 현재의 행이 이전의 행과 병렬로 디코딩될 수 있다. 그러나, 현재의 행의 디코딩은 선행의 행의 디코딩 프로세스로부터 2 개의 CTB만큼 지연된다. 이 지연은 현재의 CTB가 코딩되기 전에 현재의 행에서 현재의 CTB의 위쪽에 있는 CTB 및 위쪽 및 오른쪽에 있는 CTB와 관련된 데이터를 사용할 수 있도록 한다. 이 접근 방식은 그래픽으로 표현될 때 웨이브프론트로 나타난다. 이 시차를 둔 시작은 이미지에 CTB 행들이 포함되는 만큼의 프로세서/코어까지 병렬화를 허용한다. 픽처 내에서 인접 트리블록 행들 사이의 인-픽처 예측이 허용되기 때문에, 인-픽처 예측을 가능하게 하는 프로세서간/코어간 통신이 상당할 수 있다. WPP 파티셔닝은 NAL 단위 크기를 고려한다. 따라서, WPP는 MTU 크기 매칭을 지원하지 않는다. 그러나, 특정 코딩 오버헤드가 있는 WPP와 함께 일반 슬라이스를 사용하여 MTU 크기 매칭을 원하는 대로 구현할 수 있다.

타일에는 모션 제한된 타일 세트(motion constrained tile set)가 포함될 수도 있다. 모션 제한된 타일 세트(MCTS)는 연관된 모션 벡터들이 MCTS 내부의 전체 샘플 위치 및 보간을 위해 MCTS 내부의 전체 샘플 위치만을 필요로 하는 부분 샘플 위치를 나타내는 것으로 제한되도록 설계되는 타일 세트이다. 또한, MCTS 외부의 블록에서 유래되는 시간적 모션 벡터 예측을 위한 모션 벡터 후보의 사용은 허용되지 않는다. 이렇게 하면, MCTS에 포함되지 않은 타일의 존재 없이 각 MCTS를 독립적으로 디코딩할 수 있다. HEVC는 3 개의 MCTS 관련 보충 강화 정보(SEI) 메시지, 즉 시간적 MCTS SEI 메시지, MCTS 추출 정보 세트 SEI 메시지 및 MCTS 추출 정보 중첩 SEI 메시지를 특정한다.

시간적 MCTS SEI 메시지는 비트스트림에서 MCTS의 존재를 나타내고 MCTS를 시그널링하는 데 사용될 수 있다. MCTS SEI 메시지는 MCTS에 대한 적합한 비트스트림을 생성하기 위해 MCTS 서브-비트스트림 추출(SEI 메시지의 의미론의 일부로 특정됨)에서 사용할 수 있는 보충 정보를 제공한다. 이 정보에는 다수의 추출 정보 세트가 포함되며, 각각의 추출 정보 세트는 MCTS 수를 정의하고 MCTS 서브-비트스트림 추출 프로세스 동안 사용될 대체 비디오 파라미터 세트(VPS), 시퀀스 파라미터 세트(SPS) 및 픽처 파라미터 세트(PPS)의 원시 바이트 시퀀스 페이로드(RBSP) 바이트를 포함한다. MCTS 서브-비트스트림 추출 프로세스에 따라 서브-비트스트림을 추출할 때, 파라미터 세트(VPS, SPS, 및 PPS)가 재작성 또는 대체될 수 있으며, 슬라이스 헤더가 업데이트될 수 있는데, 그 이유는 슬라이스 어드레스 관련 신택스 요소들(first_slice_segment_in_pic_flag 및 slice_segment_address를 포함함) 중 하나 또는 전부가 추출된 서브-비트스트림에서 상이한 값들을 사용할 수 있기 때문이다.

전술한 바와 같이, 타일 그룹은 픽처의 타일 래스터 스캔 또는 직사각형 그룹화에 있어서 픽처의 정수 개의 타일을 포함한다. 타일 그룹에서의 타일은 오로지 단일의 NAL 단위로만 포함된다. 일부 실시예들에 있어서는, 타일 그룹이 슬라이스를 대신할 수 있다. 추가 인코딩을 위해 픽처를 파티셔닝할 때 사용될 수 있는 다양한 타일링 스킴(즉, 타일 그룹화를 위한 접근 방식)이 존재한다. 특정 실시예로서, 타일 그룹화는 타일 그룹으로 함께 그룹화된 타일들이 픽처 내에서 직사각형 영역을 형성하도록 제한될 수 있다(본 명세서에서는 직사각형 타일 그룹이라고 함). 타일 그룹에 포함되는 타일들은 타일 그룹의 첫 번째 타일과 마지막 타일을 표시해서 시그널링될 수 있다. 이러한 경우에, 첫 번째 타일의 타일 인덱스는 마지막 타일의 타일 인덱스보다 작은 값일 수 있다.

타일 그룹 구조의 시그널링에는 두 가지 가능성(예컨대, 픽처 내의 타일 그룹의 어드레스/위치 및 필요한 경우, 타일 그룹에서의 타일의 수)이 존재한다. 첫 번째는 파라미터 세트, 예를 들어 픽처 파라미터 세트(PPS)에서 타일 그룹 구조를 시그널링하는 것이다. 두 번째는 각 타일 그룹의 헤더에서 타일 그룹 구조를 시그널링하는 것이다. 두 가지 시그널링 가능성은 동시에 사용되지 않아야 한다. 각 가능성에는 고유한 이점이 있다. 예를 들어, 첫 번째 옵션은 타일 그룹들이 일반적으로 각 픽처의 일부만 송신할 수 있도록 MCTS로 코딩되는 360도 비디오와 같은 용례에 대하여 유용하다. 이 경우, 비디오 코딩 계층(VCL) NAL 단위로의 타일 할당은 일반적으로 알려진 픽처의 인코딩이다. 두 번째 옵션은 VCL NAL 단위로의 타일 할당이, 예컨대 무선 디스플레이와 같은 초저 지연 용례에서 타일 비트의 실제 크기에 의존할 필요가 있는 용례에서 유용하다. 타일 그룹 구조가 파라미터 세트에서 시그널링될 경우, 타일 그룹 헤더에서의 일부 신택스 요소는 필요하지 않을 수도 있으므로 제거될 수 있거나 또는 그 존재를 조정하는 것이 필요할 수 있다.

일부 용례들에 있어서, 픽처는 각각의 VCL NAL 단위가 하나의 타일 그룹을 포함하는 몇 개의 VCL NAL 단위들로 캡슐화될 수 있다. 이러한 용례들의 경우, 본원의 각 타일 그룹에는 하나의 타일만이 포함되기 때문에, 병렬 처리는 주된 목적/관심사가 아닐 수도 있다. 뷰포트(viewport)-의존 전달 최적화를 갖는 360도 비디오 용례를 예로 들 수 있다. 이러한 상황에서, 현재의 타일 그룹 구조의 시그널링은 파라미터 세트에서 시그널링되든 타일 그룹 헤더에서 시그널링되든 간에 약간의 중복성을 갖게 된다.

본 명세서에서는 전술한 문제를 해결하기 위해 타일 그룹 구조 시그널링을 개선하기 위한 다양한 메커니즘을 개시한다. 추가로 설명되는 바와 같이, 실시형태에 있어서, 인코더는 타일 그룹에 의해 직접 또는 간접적으로 참조된 파라미터 세트에서 플래그(예컨대, single_tile_per_tile_group_flag라고 불리는 플래그)를 인코딩하여 파라미터 세트를 참조한 각 타일 그룹이 하나의 타일만을 포함하는지의 여부를 특정할 수 있다. 예를 들어, single_tile_per_tile_group_flag가 일(1) 또는 참(true)으로 설정되면, 특정 신택스 요소(예컨대, 타일 그룹에서의 타일의 수를 특정하는 신택스 요소)는 타일 그룹 헤더에서 제외된다. 다른 신택스 요소들도, 본 명세서에서 추가로 설명되는 바와 같이 타일 헤더로부터 제외될 수 있다. 부가적으로, 일부 실시형태들에 있어서, 인코더는 파라미터 세트에 플래그(예컨대, tile_group_info_in_pps_flag라고 불리는 플래그)를 인코딩하여 타일 그룹 구조 정보가 파라미터 세트에 존재하는지의 여부를 특정할 수 있다. tile_group_info_in_pps_flag의 값은 파라미터 세트 및 타일 그룹 헤더에서 타일 그룹 구조 관련 신택스 요소의 존재를 조건화하는 데 사용된다. 특정 실시형태들에 있어서, tile_group_info_in_pps_flag는 single_tile_per_tile_group_flag를 대신하여 또는 이에 추가하여 인코딩될 수 있다.

도 1은 비디오 신호를 코딩하는 예시적인 동작 방법(100)의 흐름도이다. 구체적으로, 비디오 신호는 인코더에서 인코딩된다. 인코딩 프로세스는 비디오 파일 크기를 줄이기 위해 다양한 메커니즘을 사용해서 비디오 신호를 압축한다. 파일 크기가 작을수록 압축된 비디오 파일을 연관된 대역폭 오버헤드를 줄이면서 사용자에게 전송할 수 있다. 이어서, 디코더는 압축된 비디오 파일을 디코딩하여 최종 사용자에게 디스플레이할 원본 비디오 신호를 복원한다. 디코딩 프로세스는 일반적으로 디코더가 비디오 신호를 일관되게 복원할 수 있도록 인코딩 프로세스를 반영한다.

단계(101)에서, 비디오 신호가 인코더에 입력된다. 예를 들어, 비디오 신호는 메모리에 저장되는 비압축 비디오 파일일 수 있다. 다른 예로서, 비디오 파일은 비디오 카메라와 같은 비디오 캡처 디바이스에 의해 캡처될 수 있고, 비디오의 라이브 스트리밍을 지원하도록 인코딩될 수 있다. 비디오 파일에는 오디오 컴포넌트와 비디오 컴포넌트가 모두 포함될 수 있다. 비디오 컴포넌트는 시퀀스에서 볼 때 모션의 시각적 인상을 주는 일련의 이미지 프레임을 포함한다. 프레임은 본 명세서에서 루마 성분(또는 루마 샘플)이라고 하는 광의 관점에서, 또한 본 명세서에서 크로마 성분(또는 컬러 샘플)이라고 하는 컬러의 관점에서 표현된 픽셀을 포함한다. 일부 실시예들에 있어서, 프레임은 또한 3 차원 보기를 지원하기 위해 깊이 값을 포함할 수 있다.

단계(103)에서, 비디오는 블록들로 파티셔닝된다. 파티셔닝은 압축을 위해 각 프레임에서의 픽셀들을 정사각형 및/또는 직사각형 블록들로 세분화하는 것을 포함한다. 예를 들어, 고효율 비디오 코딩(High Efficiency Video Coding)(HEVC)(H.265 및 MPEG-H Part 2로도 알려짐)에서, 프레임은 먼저 미리 정의된 크기(예컨대, 64×64 픽셀)의 블록인 코딩 트리 단위(CTU)로 분할될 수 있다. CTU에는 루마 샘플 및 크로마 샘플이 모두 포함된다. 코딩 트리를 사용하여 CTU를 블록들로 분할한 다음, 추가적인 인코딩을 지원하는 구성이 달성될 때까지 블록을 반복적으로 세분화할 수 있다. 예를 들어, 프레임의 루마 성분은 개별 블록들이 상대적으로 균일한 밝기 값을 포함할 때까지 세분화될 수 있다. 또한, 프레임의 크로마 성분은 개별 블록들이 상대적으로 균일한 컬러 값을 포함할 때까지 세분화될 수 있다. 따라서, 파티셔닝 메커니즘은 비디오 프레임의 내용에 따라 달라진다.

단계(105)에서는, 단계(103)에서 파티셔닝된 이미지 블록들을 압축하기 위해 다양한 압축 메커니즘이 사용된다. 예를 들어, 인터-예측 및/또는 인트라-예측이 사용될 수 있다. 인터-예측은 공통 장면에서 객체들이 연속적인 프레임에 나타나는 경향이 있다는 사실을 이용하도록 설계된다. 따라서, 참조 프레임에서 객체를 묘사하는 블록은 인접 프레임들에서 반복적으로 설명될 필요가 없다. 구체적으로, 테이블과 같은 객체는 다수의 프레임에 걸쳐 일정한 위치에 유지될 수 있다. 따라서, 테이블은 한 번만 설명되고 인접 프레임들은 참조 프레임을 다시 참조할 수 있다. 패턴 매칭 메커니즘은 다수의 프레임에 걸쳐 객체를 매칭하기 위해 사용될 수 있다. 또한, 움직이는 객체는, 예를 들어 객체 이동 또는 카메라 이동으로 인해 다수의 프레임에 걸쳐 표현될 수 있다. 특정 예로서, 비디오는 다수의 프레임에 걸쳐 화면을 가로질러 움직이는 자동차를 보여줄 수 있다. 이러한 움직임을 설명하기 위해 모션 벡터를 사용할 수 있다. 모션 벡터는 프레임에 있는 객체의 좌표로부터 참조 프레임에 있는 객체의 좌표까지의 오프셋을 제공하는 2 차원 벡터이다. 이와 같이, 인터-예측은 현재의 프레임에서의 이미지 블록을 참조 프레임에서의 상응하는 블록으로부터의 오프셋을 나타내는 모션 벡터 세트로서 인코딩할 수 있다.

인트라-예측은 공통 프레임에서 블록들을 인코딩한다. 인트라-예측은 루마 성분 및 크로마 성분이 프레임에서 군집하는 경향이 있다는 사실을 이용한다. 예를 들어, 나무의 일부에 있는 녹색 패치는 유사한 녹색 패치들에 인접하여 위치되는 경향이 있다. 인트라-예측은 다중 방향 예측 모드(예컨대, HEVC에서 33 가지), 평면 모드 및 직류(DC) 모드를 사용한다. 방향 모드는 현재의 블록이 상응하는 방향에 있어서 이웃 블록의 샘플들과 유사/동일하다는 것을 나타낸다. 평면 모드는 행/열(예컨대, 평면)을 따라 일련의 블록이 행의 에지들에 있는 이웃 블록들에 기초하여 보간될 수 있다는 것을 나타낸다. 사실상 평면 모드는 값의 변경시에 상대적으로 일정한 기울기를 사용해서 행/열에 걸친 광/컬러의 매끄러운 전이를 나타낸다. DC 모드는 경계 평활화에 사용되며, 블록이 방향 예측 모드의 각도 방향들과 연관되는 모든 이웃 블록의 샘플들과 연관된 평균값과 유사/동일하다는 것을 나타낸다. 따라서, 인트라-예측 블록은 실제 값이 아닌 다양한 관계 예측 모드 값으로 이미지 블록을 표현할 수 있다. 또한, 인터-예측 블록은 실제 값이 아닌 모션 벡터 값으로 이미지 블록을 표현할 수 있다. 어느 경우에든, 예측 블록은 경우에 따라 이미지 블록을 정확하게 표현하지 못할 수도 있다. 모든 차이는 잔차 블록에 저장된다. 파일을 더 압축하기 위해 잔차 블록에 변환을 적용할 수 있다.

단계(107)에서, 다양한 필터링 기술이 적용될 수 있다. HEVC에서, 필터는 인-루프(in-loop) 필터링 스킴에 따라 적용된다. 위에서 논의된 블록 기반 예측은 디코더에서 블록화된 이미지의 생성을 초래할 수 있다. 또한, 블록 기반 예측 스킴은 블록을 인코딩한 후 인코딩된 블록을 나중에 참조 블록으로 사용하기 위해 복원할 수 있다. 인-루프 필터링 스킴은 노이즈 억제 필터, 디블로킹(de-blocking) 필터, 적응형 루프 필터 및 샘플 적응형 오프셋(SAO) 필터를 블록/프레임에 반복적으로 적용한다. 이들 필터는 이러한 블로킹 아티팩트를 완화하여 인코딩된 파일이 정확하게 복원될 수 있게 한다. 또한, 이들 필터는 복원된 참조 블록에서 아티팩트를 완화하여, 아티팩트가 복원된 참조 블록에 기초하여 인코딩된 후속 블록에서 추가적인 아티팩트를 생성할 가능성을 줄이도록 한다.

비디오 신호가 파티셔닝, 압축 및 필터링되면, 결과 데이터는 단계(109)에서 비트스트림에 인코딩된다. 비트스트림은 위에서 논의된 데이터 뿐만 아니라 디코더에서 적절한 비디오 신호 복원을 지원하는 데 필요한 임의의 시그널링 데이터를 포함한다. 예를 들어, 이러한 데이터는 파티션 데이터, 예측 데이터, 잔차 블록, 및 코딩 명령을 디코더에 제공하는 다양한 플래그를 포함할 수 있다. 비트스트림은 요청시에 디코더를 향한 전송을 위해 메모리에 저장될 수 있다. 비트스트림은 또한 복수의 디코더를 향해 브로드캐스트 및/또는 멀티캐스트될 수 있다. 비트스트림의 생성은 반복적인 프로세스이다. 따라서, 단계들(101, 103, 105, 107 및 109)은 많은 프레임 및 블록에 걸쳐 연속적으로 및/또는 동시에 발생할 수 있다. 도 1에 도시된 순서는 명확성과 논의의 용이성을 위해 제시된 것이지, 비디오 코딩 프로세스를 특정 순서로 제한하려는 것이 아니다.

디코더는 비트스트림을 수신하고 단계(111)에서 디코딩 프로세스를 시작한다. 구체적으로, 디코더는 엔트로피 디코딩 스킴을 사용하여 비트스트림을 상응하는 신택스 및 비디오 데이터로 전환한다. 디코더는 단계(111)에서 프레임에 대한 파티션을 결정하기 위해 비트스트림으로부터의 신택스 데이터를 사용한다. 파티셔닝은 단계(103)에서의 블록 파티셔닝의 결과와 일치해야 한다. 이제, 단계(111)에서 사용되는 엔트로피 인코딩/디코딩을 설명한다. 인코더는 입력 이미지(들)에서 값들의 공간적 위치결정에 기초하여 몇몇 가능한 선택지로부터 블록 파티셔닝 스킴을 선택하는 것과 같이, 압축 프로세스 동안 많은 선택을 하게 된다. 정확한 선택의 시그널링에는 많은 수의 빈(bin)이 사용될 수 있다. 본 명세서에서 사용된 바와 같은 빈은 변수로 취급되는 이진 값(예컨대, 콘텍스트에 따라 달라질 수 있는 비트 값)이다. 엔트로피 코딩에 의하면, 인코더가 특정 케이스에 대하여 명확하게 실행 불가능한 옵션을 버리고 허용 가능한 옵션 세트를 남길 수 있다. 이후, 각 허용 가능한 옵션에 코드 워드가 할당된다. 코드 워드의 길이는 허용 가능한 옵션의 수(예컨대, 2 개의 옵션에 대해 하나의 빈, 3 개 내지 4 개의 옵션에 대해 2 개의 빈, 등)에 기초한다. 이후, 인코더는 선택한 옵션에 대한 코드 워드를 인코딩한다. 코드 워드는 잠재적으로 큰 가능한 모든 옵션 세트로부터의 선택을 고유하게 나타내는 것과는 대조적으로 허용 가능한 옵션의 작은 서브-세트로부터의 선택을 고유하게 나타내려는 만큼의 크기이기 때문에, 이 스킴에 의하면 코드 워드의 크기가 줄어든다. 이후, 디코더는 인코더와 유사한 방식으로 허용 가능한 옵션 세트를 결정해서 선택을 디코딩한다. 허용 가능한 옵션 세트를 결정함으로써, 디코더는 코드 워드를 판독하고 인코더에 의해 이루어진 선택을 결정할 수 있다.

단계(113)에서 디코더는 블록 디코딩을 수행한다. 구체적으로, 디코더는 역변환을 사용하여 잔차 블록을 생성한다. 이후, 디코더는 파티셔닝에 따라 잔차 블록 및 상응하는 예측 블록을 사용하여 이미지 블록을 복원한다. 예측 블록은 단계(105)에서 인코더에서 생성된 바와 같은 인트라-예측 블록 및 인터-예측 블록을 모두 포함할 수 있다. 복원된 이미지 블록은 단계(111)에서 결정된 파티셔닝 데이터에 따라 복원된 비디오 신호의 프레임에 위치된다. 단계(113)에 대한 신택스가 또한 위에서 논의된 바와 같이 엔트로피 코딩을 통해 비트스트림에서 시그널링될 수 있다.

단계(115)에서, 인코더에서의 단계(107)와 유사한 방식으로 복원된 비디오 신호의 프레임에 대하여 필터링이 수행된다. 예를 들어, 노이즈 억제 필터, 디블로킹 필터, 적응형 루프 필터 및 SAO 필터를 프레임에 적용하여 블로킹 아티팩트를 제거할 수 있다. 프레임이 필터링되면, 비디오 신호는 최종 사용자가 볼 수 있도록 단계(117)에서 디스플레이에 출력될 수 있다.

도 2는 비디오 코딩을 위한 예시적인 코딩 및 디코딩(코덱) 시스템(200)의 개략도이다. 구체적으로, 코덱 시스템(200)은 동작 방법(100)의 구현을 지원하는 기능을 제공한다. 코덱 시스템(200)은 인코더 및 디코더 모두에 사용되는 컴포넌트를 묘사하기 위해 일반화된다. 코덱 시스템(200)은 동작 방법(100)에서 단계(101) 및 단계(103)에 대하여 논의된 바와 같이 비디오 신호를 수신 및 파티셔닝하고, 이는 파티셔닝된 비디오 신호(201)를 초래한다. 이후, 코덱 시스템(200)은 방법(100)에서 단계(105), 단계(107) 및 단계(109)에 대하여 논의된 바와 같이 인코더로서 동작할 때 파티셔닝된 비디오 신호(201)를 코딩된 비트스트림으로 압축한다. 코덱 시스템(200)은, 디코더로서 동작할 때, 동작 방법(100)에서 단계(111), 단계(113), 단계(115) 및 단계(117)에 대하여 논의된 바와 같이 비트스트림으로부터 출력 비디오 신호를 생성한다. 코덱 시스템(200)은 일반 코더 제어 컴포넌트(211), 변환 스케일링 및 양자화 컴포넌트(213), 인트라-픽처 추정 컴포넌트(215), 인트라-픽처 예측 컴포넌트(217), 모션 보상 컴포넌트(219), 모션 추정 컴포넌트(221), 스케일링 및 역변환 컴포넌트(229), 필터 제어 분석 컴포넌트(227), 인-루프 필터 컴포넌트(225), 디코딩된 픽처 버퍼 컴포넌트(223), 및 헤더 포맷팅 및 컨텍스트 적응형 이진 산술 코딩(CABAC) 컴포넌트(231)를 포함한다. 이러한 컴포넌트들은 도시된 바와 같이 결합된다. 도 2에서, 검은 색 선은 인코딩/디코딩될 데이터의 이동을 나타내고, 점선은 다른 컴포넌트들의 동작을 제어하는 제어 데이터의 이동을 나타낸다. 코덱 시스템(200)의 컴포넌트들은 모두 인코더에 존재할 수 있다. 디코더는 코덱 시스템(200)의 컴포넌트들의 서브세트를 포함할 수 있다. 예를 들어, 디코더는 인트라-픽처 예측 컴포넌트(217), 모션 보상 컴포넌트(219), 스케일링 및 역변환 컴포넌트(229), 인-루프 필터 컴포넌트(225) 및 디코딩된 픽처 버퍼 컴포넌트(223)를 포함할 수 있다. 이제, 이들 컴포넌트에 대해 설명한다.

파티셔닝된 비디오 신호(201)는 코딩 트리에 의해 픽셀 블록들로 파티셔닝된 캡처된 비디오 시퀀스이다. 코딩 트리는 다양한 분할 모드를 사용하여 픽셀 블록을 더 작은 픽셀 블록들로 세분화한다. 이후, 이들 블록은 더 작은 블록들로 더 세분화될 수 있다. 블록은 코딩 트리에서 노드로 지칭될 수 있다. 더 큰 부모 노드들은 더 작은 자식 노드들로 분할된다. 노드가 세분화되는 횟수를 노드/코딩 트리의 깊이라고 한다. 분할된 블록들은 경우에 따라 코딩 단위(CU)에 포함될 수 있다. 예를 들어, CU는 루마 블록, 적색 차이 크로마(Cr) 블록(들) 및 청색 차이 크로마(Cb) 블록(들)을 CU에 대한 상응하는 신택스 명령과 함께 포함하는 CTU의 하위-부분일 수 있다. 분할 모드는 사용된 분할 모드에 따라 노드를 제각기 다양한 형상의 2 개, 3 개 또는 4 개의 자식 노드로 파티셔닝하기 위해 사용되는 이진 트리(BT), 트리플 트리(TT) 및 쿼드 트리(QT)를 포함할 수 있다. 파티셔닝된 비디오 신호(201)는 압축을 위해 일반 코더 제어 컴포넌트(211), 변환 스케일링 및 양자화 컴포넌트(213), 인트라-픽처 추정 컴포넌트(215), 필터 제어 분석 컴포넌트(227) 및 모션 추정 컴포넌트(221)로 전달된다.

일반 코더 제어 컴포넌트(211)는 적용 제약에 따라 비디오 시퀀스의 이미지를 비트스트림으로 코딩하는 것과 관련된 결정을 하도록 구성된다. 예를 들어, 일반 코더 제어 컴포넌트(211)는 비트레이트/비트스트림 크기 대 복원 품질의 최적화를 관리한다. 이러한 결정은 저장 공간/대역폭 가용성 및 이미지 해상도 요청에 기초하여 이루어질 수 있다. 일반 코더 제어 컴포넌트(211)는 또한 버퍼 언더런 및 오버런 문제를 완화하기 위해 전송 속도를 고려하여 버퍼 이용을 관리한다. 이러한 문제를 관리하기 위해, 일반 코더 제어 컴포넌트(211)는 다른 컴포넌트들에 의한 파티셔닝, 예측 및 필터링을 관리한다. 예를 들어, 일반 코더 제어 컴포넌트(211)는 해상도를 증가시키고 대역폭 사용을 증가시키기 위해 압축 복잡성을 동적으로 증가시키거나 또는 해상도 및 대역폭 사용을 감소시키기 위해 압축 복잡성을 감소시킬 수 있다. 따라서, 일반 코더 제어 컴포넌트(211)는 비디오 신호 복원 품질 문제와 비트 레이트 문제의 균형을 맞추기 위해 코덱 시스템(200)의 다른 컴포넌트들을 제어한다. 일반 코더 제어 컴포넌트(211)는 다른 컴포넌트들의 동작을 제어하는 제어 데이터를 생성한다. 제어 데이터는 또한 헤더 포맷팅 및 CABAC 컴포넌트(231)로 전달되어 디코더에서 디코딩을 위한 파라미터를 시그널링하기 위해 비트스트림에 인코딩된다.

파티셔닝된 비디오 신호(201)는 또한 인터-예측을 위해 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)로 송신된다. 파티셔닝된 비디오 신호(201)의 프레임 또는 슬라이스는 다수의 비디오 블록들로 분할될 수 있다. 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)는 시간적 예측을 제공하기 위해 하나 이상의 참조 프레임에서 하나 이상의 블록에 대하여 수신된 비디오 블록의 인터-예측 코딩을 수행한다. 코덱 시스템(200)은, 예컨대 비디오 데이터의 각 블록에 대한 적절한 코딩 모드를 선택하기 위해 다수의 코딩 단계를 수행할 수 있다.

모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)는 고도로 통합될 수 있지만, 개념적인 목적을 위해 별도로 예시된다. 모션 추정 컴포넌트(221)에 의해 수행되는 모션 추정은 비디오 블록에 대한 모션을 추정하는 모션 벡터를 생성하는 프로세스이다. 예를 들어, 모션 벡터는 예측 블록에 대한 코딩된 객체의 변위를 나타낼 수 있다. 예측 블록은 픽셀 차이에 관하여 코딩될 블록과 밀접하게 매칭되는 것으로 확인된 블록이다. 예측 블록은 참조 블록이라고 할 수도 있다. 이러한 픽셀 차이는 절대차의 합(SAD), 제곱차의 합(SSD) 또는 그 밖의 차이 메트릭에 의해 결정될 수 있다. HEVC는 CTU, 코딩 트리 블록(CTB) 및 CU를 포함한 몇몇 코딩된 객체를 사용한다. 예를 들어, CTU는 CTB로 분할될 수 있으며, 이후 CU에 포함시키기 위해 CB로 분할될 수 있다. CU는 예측 데이터를 포함하는 예측 단위(PU) 및/또는 CU에 대한 변환된 잔차 데이터를 포함하는 변환 단위(TU)로서 인코딩될 수 있다. 모션 추정 컴포넌트(221)는 레이트 왜곡 최적화 프로세스의 일부로서 레이트 왜곡 분석을 사용해서 모션 벡터, PU 및 TU를 생성한다. 예를 들어, 모션 추정 컴포넌트(221)는 현재의 블록/프레임에 대한 다수의 참조 블록, 다수의 모션 벡터 등을 결정할 수 있고, 최상의 레이트 왜곡 특성을 갖는 참조 블록, 모션 벡터 등을 선택할 수 있다. 최상의 레이트 왜곡 특성은 비디오 복원의 품질(예컨대, 압축에 의한 데이터 손실량)과 코딩 효율(예컨대, 최종 인코딩의 크기)의 균형을 유지한다.

일부 실시예들에 있어서, 코덱 시스템(200)은 디코딩된 픽처 버퍼 컴포넌트(223)에 저장되는 참조 픽처의 정수 이하 단위(sub-integer)의 픽셀 위치에 대한 값을 계산할 수 있다. 예를 들어, 비디오 코덱 시스템(200)은 참조 픽처의 1/4 픽셀 위치들, 1/8 픽셀 위치들, 또는 그 밖의 분수 픽셀 위치들의 값들을 보간할 수 있다. 따라서, 모션 추정 컴포넌트(221)는 전체 픽셀 위치들 및 분수 픽셀 위치들에 대한 모션 검색을 수행하고 분수 픽셀 정밀도를 갖는 모션 벡터를 출력할 수 있다. 모션 추정 컴포넌트(221)는 PU의 위치를 참조 픽처의 예측 블록의 위치와 비교함으로써 인터-코딩된 슬라이스에서 비디오 블록의 PU에 대한 모션 벡터를 계산한다. 모션 추정 컴포넌트(221)는 모션 보상 컴포넌트(219)에 대한 인코딩 및 모션을 위해 계산된 모션 벡터를 모션 데이터로서 헤더 포맷팅 및 CABAC 컴포넌트(231)에 출력한다.

모션 보상 컴포넌트(219)에 의해 수행되는 모션 보상은 모션 추정 컴포넌트(221)에 의해 결정되는 모션 벡터에 기초하여 예측 블록을 페치 또는 생성하는 것을 수반할 수 있다. 다시 말해, 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)는 일부 실시예들에 있어서 기능적으로 통합될 수 있다. 현재의 비디오 블록의 PU에 대한 모션 벡터를 수신하면, 모션 보상 컴포넌트(219)는 모션 벡터가 가리키는 예측 블록의 위치를 찾을 수 있다. 이후, 코딩되는 현재의 비디오 블록의 픽셀 값들로부터 예측 블록의 픽셀 값들을 차감함으로써, 픽셀 차이 값을 형성하는 잔차 비디오 블록이 형성된다. 일반적으로, 모션 추정 컴포넌트(221)는 루마 성분에 대한 모션 추정을 수행하고, 모션 보상 컴포넌트(219)는 크로마 성분 및 루마 성분 모두에 대하여 루마 성분에 기초하여 계산되는 모션 벡터를 사용한다. 예측 블록 및 잔차 블록은 변환 스케일링 및 양자화 컴포넌트(213)로 전달된다.

파티셔닝된 비디오 신호(201)는 또한 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)로 송신된다. 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)와 같이, 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)는 고도로 통합될 수 있지만, 개념적인 목적을 위해 별도로 예시된다. 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)는, 전술한 바와 같이 프레임 사이의 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)에 의해 수행되는 인터-예측에 대한 대안으로서, 현재의 프레임에서의 블록들에 대하여 현재의 블록을 인트라-예측한다. 특히, 인트라-픽처 추정 컴포넌트(215)는 현재의 블록을 인코딩하기 위해 사용할 인트라-예측 모드를 결정한다. 일부 실시예들에 있어서, 인트라-픽처 추정 컴포넌트(215)는 다수의 테스트된 인트라-예측 모드로부터 현재의 블록을 인코딩하기 위해 적절한 인트라-예측 모드를 선택한다. 이후, 선택된 인트라-예측 모드는 인코딩을 위해 헤더 포맷팅 및 CABAC 컴포넌트(231)로 전달된다.

예를 들어, 인트라-픽처 추정 컴포넌트(215)는 다양한 테스트된 인트라-예측 모드들에 대한 레이트-왜곡 분석을 사용해서 레이트-왜곡 값들을 계산하고, 테스트된 모드들 중에서 최상의 레이트-왜곡 특성을 갖는 인트라-예측 모드를 선택한다. 레이트-왜곡 분석은 일반적으로 인코딩된 블록과 인코딩된 블록을 생성하기 위해 인코딩된 원래의 인코딩되지 않은 블록과의 사이의 왜곡(또는 오차)의 양 뿐만 아니라, 인코딩된 블록을 생성하는 데 사용된 비트레이트(예컨대, 비트 수)를 결정한다. 인트라-픽처 추정 컴포넌트(215)는 왜곡들로부터의 비율 및 다양한 인코딩된 블록들에 대한 레이트를 계산하여, 어느 인트라-예측 모드가 블록에 대하여 최상의 레이트-왜곡 값을 나타내는지를 결정한다. 또한, 인트라-픽처 추정 컴포넌트(215)는 레이트-왜곡 최적화(RDO)에 기초한 깊이 모델링 모드(DMM)를 사용하여 깊이 맵의 깊이 블록을 코딩하도록 구성될 수 있다.

인트라-픽처 예측 컴포넌트(217)는 인코더에서 구현될 경우 인트라-픽처 추정 컴포넌트(215)에 의해 결정되는 선택된 인트라-예측 모드에 기초하여 예측 블록으로부터 잔차 블록을 생성하거나 또는 디코더에서 구현될 경우 비트스트림으로부터 잔차 블록을 판독할 수 있다. 잔차 블록에는 예측 블록과 원본 블록 사이의 값의 차이가 행렬로 표현되어 포함된다. 이후, 잔차 블록은 변환 스케일링 및 양자화 컴포넌트(213)로 전달된다. 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)는 루마 성분 및 크로마 성분 모두에 대하여 동작할 수 있다.

변환 스케일링 및 양자화 컴포넌트(213)는 잔차 블록을 더 압축하도록 구성된다. 변환 스케일링 및 양자화 컴포넌트(213)는 이산 코사인 변환(DCT), 이산 사인 변환(DST) 또는 개념적으로 유사한 변환과 같은 변환을 잔차 블록에 적용하여 잔차 변환 계수 값을 포함하는 비디오 블록을 생성한다. 웨이브렛(wavelet) 변환, 정수 변환, 부대역 변환 또는 다른 타입의 변환들이 사용될 수도 있다. 변환은 잔차 정보를 픽셀 값 도메인으로부터 주파수 도메인과 같은 변환 도메인으로 전환할 수 있다. 변환 스케일링 및 양자화 컴포넌트(213)는 또한, 예를 들어 주파수에 기초하여 변환된 잔차 정보를 스케일링하도록 구성된다. 이러한 스케일링은 스케일 팩터를 잔차 정보에 적용하여 상이한 주파수 정보가 복원된 비디오의 최종 시각적 품질에 영향을 미칠 수 있는 상이한 단위들로 양자화되도록 하는 것을 포함한다. 변환 스케일링 및 양자화 컴포넌트(213)는 또한 비트 레이트를 더 감소시키기 위해 변환 계수들을 양자화하도록 구성된다. 양자화 프로세스는 계수들 중 일부 또는 전부와 연관되는 비트 깊이를 감소시킬 수 있다. 양자화의 정도는 양자화 파라미터를 조정함으로써 수정될 수 있다. 이후, 일부 실시예들에 있어서, 변환 스케일링 및 양자화 컴포넌트(213)는 양자화된 변환 계수들을 포함하는 행렬의 스캔을 수행할 수 있다. 양자화된 변환 계수는 헤더 포맷팅 및 CABAC 컴포넌트(231)로 전달되어 비트스트림에 인코딩된다.

스케일링 및 역변환 컴포넌트(229)는 모션 추정을 지원하기 위해 변환 스케일링 및 양자화 컴포넌트(213)의 역동작을 적용한다. 스케일링 및 역변환 컴포넌트(229)는, 예컨대 다른 현재의 블록에 대한 예측 블록이 될 수 있는 참조 블록으로서 나중에 사용하기 위해, 역 스케일링, 변환 및/또는 양자화를 적용하여 픽셀 도메인에서 잔차 블록을 복원한다. 모션 추정 컴포넌트(221) 및/또는 모션 보상 컴포넌트(219)는 차후의 블록/프레임의 모션 추정에 사용하기 위해 상응하는 예측 블록에 잔차 블록을 다시 추가함으로써 참조 블록을 계산할 수 있다. 스케일링, 양자화 및 변환 동안 생성되는 아티팩트를 완화하기 위해 복원된 참조 블록에 필터가 적용된다. 그렇지 않으면, 이러한 아티팩트는 후속 블록들이 예측될 때 부정확한 예측을 유발(및 추가적인 아티팩트를 생성)할 수 있다.

필터 제어 분석 컴포넌트(227) 및 인-루프 필터 컴포넌트(225)는 필터를 잔차 블록 및/또는 복원된 이미지 블록에 적용한다. 예를 들어, 스케일링 및 역변환 컴포넌트(229)로부터의 변환된 잔차 블록은 원본 이미지 블록을 복원하기 위해 인트라-픽처 예측 컴포넌트(217) 및/또는 모션 보상 컴포넌트(219)로부터의 상응하는 예측 블록과 결합될 수 있다. 이후, 복원된 이미지 블록에 필터가 적용될 수 있다. 일부 실시예들에 있어서는, 필터가 잔차 블록에 대신 적용될 수 있다. 도 2에서의 다른 컴포넌트들과 마찬가지로, 필터 제어 분석 컴포넌트(227) 및 인-루프 필터 컴포넌트(225)는 고도로 통합되고 함께 구현될 수 있지만, 개념적인 목적을 위해 별도로 묘사된다. 복원된 참조 블록에 적용되는 필터는 특정 공간 영역에 적용되며 이러한 필터가 적용되는 방식을 조정하는 다수의 파라미터를 포함한다. 필터 제어 분석 컴포넌트(227)는 복원된 참조 블록을 분석하여 이러한 필터가 적용되어야 하는 위치를 결정하고 상응하는 파라미터를 설정한다. 이러한 데이터는 인코딩을 위한 필터 제어 데이터로서 헤더 포맷팅 및 CABAC 컴포넌트(231)로 전달된다. 인-루프 필터 컴포넌트(225)는 이러한 필터를 필터 제어 데이터에 기초하여 적용한다. 필터는 디블로킹 필터, 노이즈 억제 필터, SAO 필터 및 적응형 루프 필터를 포함할 수 있다. 이러한 필터는 실시예에 따라 (예컨대, 복원된 픽셀 블록에 대한) 공간/픽셀 도메인 또는 주파수 도메인에 적용될 수 있다.

인코더로서 동작할 경우, 필터링된 복원된 이미지 블록, 잔차 블록 및/또는 예측 블록은 위에서 논의된 바와 같이 모션 추정에서 나중에 사용하기 위해 디코딩된 픽처 버퍼 컴포넌트(223)에 저장된다. 디코더로서 동작할 경우, 디코딩된 픽처 버퍼 컴포넌트(223)는 복원 및 필터링된 블록을 저장하고 출력 비디오 신호의 일부로서 디스플레이를 향해 전달한다. 디코딩된 픽처 버퍼 컴포넌트(223)는 예측 블록, 잔차 블록 및/또는 복원된 이미지 블록을 저장할 수 있는 임의의 메모리 디바이스일 수 있다.

헤더 포맷팅 및 CABAC 컴포넌트(231)는 코덱 시스템(200)의 다양한 컴포넌트로부터 데이터를 수신하고 디코더를 향한 전송을 위해 이러한 데이터를 코딩된 비트스트림에 인코딩한다. 구체적으로, 헤더 포맷팅 및 CABAC 컴포넌트(231)는 일반 제어 데이터 및 필터 제어 데이터와 같은 제어 데이터를 인코딩하기 위해 다양한 헤더를 생성한다. 또한, 인트라-예측 및 모션 데이터를 포함하는 예측 데이터 뿐만 아니라 양자화된 변환 계수 데이터 형태의 잔차 데이터가 모두 비트스트림에 인코딩된다. 최종 비트스트림은 원래의 파티셔닝된 비디오 신호(201)를 복원하기 위해 디코더에 의해 요구되는 모든 정보를 포함한다. 이러한 정보는 또한 인트라-예측 모드 인덱스 테이블(코드워드 맵핑 테이블이라고도 함), 다양한 블록에 대한 인코딩 콘텍스트의 정의, 가장 가능성이 높은 인트라 예측 모드의 표시, 파티션 정보의 표시 등을 포함할 수 있다. 이러한 데이터는 엔트로피 코딩을 사용하여 인코딩될 수 있다. 예를 들어, 정보는 콘텍스트 적응형 가변 길이 코딩(CAVLC), CABAC, 신택스 기반 콘텍스트 적응형 이진 산술 코딩(SBAC), 확률 구간 파티셔닝 엔트로피(PIPE) 코딩 또는 다른 엔트로피 코딩 기술을 사용해서 인코딩될 수 있다. 엔트로피 코딩에 이어서, 코딩된 비트스트림은 다른 디바이스(예컨대, 비디오 디코더)로 전송되거나 또는 차후의 전송 또는 검색을 위해 보관될 수 있다.

도 3은 예시적인 비디오 인코더(300)를 예시하는 블록도이다. 비디오 인코더(300)는 코덱 시스템(200)의 인코딩 기능을 구현 및/또는 동작 방법(100)의 단계(101), 단계(103), 단계(105), 단계(107) 및/또는 단계(109)를 구현하기 위해 사용될 수 있다. 인코더(300)는 입력 비디오 신호를 파티셔닝하여, 파티셔닝된 비디오 신호(201)와 실질적으로 유사한 파티셔닝된 비디오 신호(301)를 생성한다. 이후, 파티셔닝된 비디오 신호(301)는 인코더(300)의 컴포넌트들에 의해 압축되고 비트스트림에 인코딩된다.

구체적으로, 파티셔닝된 비디오 신호(301)는 인트라-예측을 위해 인트라-픽처 예측 컴포넌트(317)로 전달된다. 인트라-픽처 예측 컴포넌트(317)는 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)와 실질적으로 유사할 수 있다. 파티셔닝된 비디오 신호(301)는 또한 디코딩된 픽처 버퍼 컴포넌트(323)의 참조 블록에 기초한 인터-예측을 위해 모션 보상 컴포넌트(321)로 전달된다. 모션 보상 컴포넌트(321)는 모션 추정 컴포넌트(221) 및 모션 보상 컴포넌트(219)와 실질적으로 유사할 수 있다. 인트라-픽처 예측 컴포넌트(317) 및 모션 보상 컴포넌트(321)로부터의 예측 블록 및 잔차 블록은 잔차 블록의 변환 및 양자화를 위해 변환 및 양자화 컴포넌트(313)로 전달된다. 변환 및 양자화 컴포넌트(313)는 변환 스케일링 및 양자화 컴포넌트(213)와 실질적으로 유사할 수 있다. 변환 및 양자화된 잔차 블록 및 상응하는 예측 블록(연관 제어 데이터와 함께)은 비트스트림으로의 코딩을 위해 엔트로피 코딩 컴포넌트(331)로 전달된다. 엔트로피 코딩 컴포넌트(331)는 헤더 포맷팅 및 CABAC 컴포넌트(231)와 실질적으로 유사할 수 있다.

변환 및 양자화된 잔차 블록 및/또는 상응하는 예측 블록은 또한 모션 보상 컴포넌트(321)에 의한 사용을 위해 참조 블록으로 복원하기 위해 변환 및 양자화 컴포넌트(313)로부터 역변환 및 양자화 컴포넌트(329)로 전달된다. 역변환 및 양자화 컴포넌트(329)는 스케일링 및 역변환 컴포넌트(229)와 실질적으로 유사할 수 있다. 인-루프 필터 컴포넌트(325)의 인-루프 필터는 또한 실시예에 따라 잔차 블록 및/또는 복원된 참조 블록에 적용된다. 인-루프 필터 컴포넌트(325)는 필터 제어 분석 컴포넌트(227) 및 인-루프 필터 컴포넌트(225)와 실질적으로 유사할 수 있다. 인-루프 필터 컴포넌트(325)는 인-루프 필터 컴포넌트(225)에 대하여 논의된 바와 같이 다수의 필터를 포함할 수 있다. 이후, 필터링된 블록은 모션 보상 컴포넌트(321)에 의해 참조 블록으로 사용하기 위해 디코딩된 픽처 버퍼 컴포넌트(323)에 저장된다. 디코딩된 픽처 버퍼 컴포넌트(323)는 디코딩된 픽처 버퍼 컴포넌트(223)와 실질적으로 유사할 수 있다.

도 4는 예시적인 비디오 디코더(400)를 예시하는 블록도이다. 비디오 디코더(400)는 코덱 시스템(200)의 디코딩 기능을 구현 및/또는 동작 방법(100)의 단계(111), 단계(113), 단계(115) 및/또는 단계(117)를 구현하기 위해 사용될 수 있다. 디코더(400)는, 예를 들어 인코더(300)로부터 비트스트림을 수신하고, 최종 사용자에게 디스플레이하기 위해 비트스트림에 기초하여 복원된 출력 비디오 신호를 생성한다.

비트스트림은 엔트로피 디코딩 컴포넌트(433)에 의해 수신된다. 엔트로피 디코딩 컴포넌트(433)는 CAVLC, CABAC, SBAC, PIPE 코딩, 또는 다른 엔트로피 코딩 기술과 같은 엔트로피 디코딩 스킴을 구현하도록 구성된다. 예를 들어, 엔트로피 디코딩 컴포넌트(433)는 비트스트림에서 코드워드로서 인코딩되는 추가적인 데이터를 해석하기 위한 콘텍스트를 제공하기 위해 헤더 정보를 사용할 수 있다. 디코딩된 정보는 일반 제어 데이터, 필터 제어 데이터, 파티션 정보, 모션 데이터, 예측 데이터 및 잔차 블록으로부터의 양자화된 변환 계수와 같은 비디오 신호를 디코딩하기 위한 임의의 바람직한 정보를 포함한다. 양자화된 변환 계수는 잔차 블록으로의 복원을 위해 역변환 및 양자화 컴포넌트(429)로 전달된다. 역변환 및 양자화 컴포넌트(429)는 역변환 및 양자화 컴포넌트(329)와 유사할 수 있다.

복원된 잔차 블록 및/또는 예측 블록은 인트라-예측 연산에 기초하여 이미지 블록으로의 복원을 위해 인트라-픽처 예측 컴포넌트(417)로 전달된다. 인트라-픽처 예측 컴포넌트(417)는 인트라-픽처 추정 컴포넌트(215) 및 인트라-픽처 예측 컴포넌트(217)와 유사할 수 있다. 구체적으로, 인트라-픽처 예측 컴포넌트(417)는 프레임에서 참조 블록을 찾기 위해 예측 모드를 사용하고 그 결과에 잔차 블록을 적용하여 인트라-예측된 이미지 블록을 복원한다. 복원된 인트라-예측된 이미지 블록 및/또는 잔차 블록 그리고 상응하는 인터-예측 데이터는, 제각기 인-루프 필터 컴포넌트(225) 및 디코딩된 픽처 버퍼 컴포넌트(223)와 실질적으로 유사할 수 있는, 인-루프 필터 컴포넌트(425)를 통해 디코딩된 픽처 버퍼 컴포넌트(423)로 전달된다. 인-루프 필터 컴포넌트(425)는 복원된 이미지 블록, 잔차 블록 및/또는 예측 블록을 필터링하고, 이러한 정보는 디코딩된 픽처 버퍼 컴포넌트(423)에 저장된다. 디코딩된 픽처 버퍼 컴포넌트(423)로부터의 복원된 이미지 블록은 인터-예측을 위해 모션 보상 컴포넌트(421)로 전달된다. 모션 보상 컴포넌트(421)는 모션 추정 컴포넌트(221) 및/또는 모션 보상 컴포넌트(219)와 실질적으로 유사할 수 있다. 구체적으로, 모션 보상 컴포넌트(421)는 참조 블록으로부터의 모션 벡터를 사용하여 예측 블록을 생성하고 그 결과에 잔차 블록을 적용하여 이미지 블록을 복원한다. 결과적인 복원된 블록은 또한 인-루프 필터 컴포넌트(425)를 통해 디코딩된 픽처 버퍼 컴포넌트(423)로 전달될 수 있다. 디코딩된 픽처 버퍼 컴포넌트(423)는 파티션 정보를 통해 프레임들로 복원될 수 있는 추가적인 복원된 이미지 블록들을 계속 저장한다. 이러한 프레임들은 시퀀스에 배치될 수도 있다. 시퀀스는 복원된 출력 비디오 신호로서 디스플레이를 향해 출력된다.

도 5는 인코딩된 비디오 시퀀스를 포함하는 예시적인 비트스트림(500)을 예시하는 개략도이다. 예를 들어, 비트스트림(500)은 코덱 시스템(200) 및/또는 디코더(400)에 의한 디코딩을 위해 코덱 시스템(200) 및/또는 인코더(300)에 의해 생성될 수 있다. 다른 예로서, 비트스트림(500)은 단계(111)에서의 디코더에 의한 사용을 위해 방법(100)의 단계(109)에서 인코더에 의해 생성될 수 있다.

비트스트림(500)은 시퀀스 파라미터 세트(SPS)(510), 복수의 픽처 파라미터 세트(PPS)(512), 타일 그룹 헤더(514) 및 이미지 데이터(520)를 포함한다. SPS(510)는 비트스트림(500)에 포함되는 비디오 시퀀스에서의 모든 픽처에 대하여 공통인 시퀀스 데이터를 포함한다. 이러한 데이터는 픽처 사이징(sizing), 비트 깊이, 코딩 도구 파라미터, 비트 레이트 제한 등을 포함할 수 있다. PPS(512)는 하나 이상의 상응하는 픽처에 대하여 특정되는 파라미터들을 포함한다. 따라서, 비디오 시퀀스에서의 각 픽처는 하나의 PPS(512)를 참조할 수 있다. PPS(512)는 상응하는 픽처, 양자화 파라미터, 오프셋, 픽처 특정 코딩 도구 파라미터(예컨대, 필터 제어) 등에서 타일에 이용 가능한 코딩 도구를 나타낼 수 있다. 타일 그룹 헤더(514)는 픽처에서의 각 타일 그룹에 대하여 특정되는 파라미터들을 포함한다. 따라서, 비디오 시퀀스에서는 타일 그룹당 하나의 타일 그룹 헤더(514)가 있을 수 있다. 타일 그룹 헤더(514)는 타일 그룹 정보, 픽처 순서 카운트(POC), 참조 픽처 리스트, 예측 가중치, 타일 엔트리 포인트, 디블로킹 파라미터 등을 포함할 수 있다. 일부 시스템들은 타일 그룹 헤더(514)를 슬라이스 헤더로서 참조하고 이러한 정보를 사용하여 타일 그룹 대신 슬라이스를 지원한다는 점에 유의해야 한다.

이미지 데이터(520)는 인터-예측 및/또는 인트라-예측에 따라 인코딩된 비디오 데이터 및 상응하는 변환 및 양자화된 잔차 데이터를 포함한다. 이러한 이미지 데이터(520)는 인코딩 전에 이미지를 파티셔닝하는 데 사용되는 파티셔닝에 따라 분류된다. 예를 들어, 이미지 데이터(520)에서의 이미지는 타일(523)들로 분할된다. 타일(523)들은 코딩 트리 단위(CTU)들로 더 분할된다. CTU는 코딩 트리에 기초하여 코딩 블록들로 더 분할된다. 이후, 코딩 블록은 예측 메커니즘에 따라 인코딩/디코딩될 수 있다. 이미지/픽처는 하나 이상의 타일(523)을 포함할 수 있다.

타일(523)은 수평 및 수직 경계에 의해 생성되는 픽처의 파티셔닝된 부분이다. 타일(523)은 래스터 스캔 순서로 코딩될 수 있고, 실시예에 따라 다른 타일(523)들에 기초한 예측을 허용할 수도, 또는 허용하지 않을 수도 있다. 각 타일(523)은 픽처에서 고유한 타일 인덱스(524)를 가질 수 있다. 타일 인덱스(524)는 하나의 타일(523)을 다른 타일과 구별하는 데 사용될 수 있는 절차적으로 선택된 숫자 식별자이다. 예를 들어, 타일 인덱스(524)들은 래스터 스캔 순서로 수치적으로 증가할 수 있다. 래스터 스캔 순서는 왼쪽에서 오른쪽, 및 위에서 아래이다. 일부 실시예들에 있어서, 타일(523)은 할당된 타일 식별자(ID)일 수도 있다는 점에 유의해야 한다. 타일 ID는 하나의 타일(523)을 다른 타일과 구별하는 데 사용될 수 있는 할당된 식별자이다. 일부 실시예들에 있어서는, 타일 인덱스(524) 대신에 타일 ID를 계산에 사용할 수 있다. 또한, 일부 실시예들에 있어서, 타일 ID는 타일 인덱스(524)와 동일한 값을 갖도록 할당될 수 있다.

타일 인덱스(524)는 타일(523)을 포함하는 타일 그룹을 나타내도록 시그널링될 수 있다. 첫 번째 타일 인덱스 및 마지막 타일 인덱스는 타일 그룹 헤더(514)에서 시그널링될 수 있다. 일부 실시예들에 있어서, 첫 번째 타일 인덱스 및 마지막 타일 인덱스는 상응하는 타일 ID에 의해 시그널링된다. 이후, 디코더는 플래그, 첫 번째 타일 인덱스 및 마지막 타일 인덱스에 기초하여 타일 그룹의 구성을 결정할 수 있다. 인코더는 최적화된 인코딩 방식을 선택할 때 디코더에서의 디코딩 결과를 예측하기 위해 레이트 왜곡 최적화 프로세스 동안 디코더와 유사한 절차를 사용할 수 있다. 타일 그룹의 완전한 멤버십 대신 첫 번째 타일 인덱스와 마지막 타일 인덱스만을 시그널링함으로써, 상당한 비트수를 생략할 수 있다. 이는 코딩 효율을 증가시키고, 그에 따라 인코더와 디코더 모두에 대한 메모리 리소스 사용량 및 네트워크 리소스 사용량을 줄인다.

도 6은 본 개시물의 실시형태에 따라 예시적인 타일 그룹으로 파티셔닝된 예시적인 픽처(601)를 예시한다. 예를 들어, 픽처(601)는, 예를 들어 코덱 시스템(200), 인코더(300) 및/또는 디코더(400)에 의해 비트스트림(500)에 대하여 인코딩 및 디코딩되는 비디오 시퀀스에서의 단일의 픽처일 수 있다. 또한, 픽처(601)는 방법(100)에 따라 인코딩 및 디코딩을 지원하도록 파티셔닝될 수 있다.

픽처(601)는 타일(603)들로 파티셔닝될 수 있다. 타일(603)은 타일(523)과 실질적으로 유사할 수 있다. 타일(603)은 직사각형 및/또는 정사각형일 수 있다. 타일(603)에는 각각 래스터 스캔 순서로 증가하는 타일 인덱스가 할당된다. 묘사된 실시형태에 있어서, 타일 인덱스는 0부터 23까지(0-23) 확장된다. 이러한 타일 인덱스는 예시이며 논의의 명확성을 위해 제공되는 것이므로, 제한하는 것으로 간주되지 않아야 한다.

픽처(601)는 타일 0, 6, 12 및 18을 포함하는 좌측 경계(601a), 타일 5, 11, 17 및 23을 포함하는 우측 경계(601b), 타일 0-5를 포함하는 상부측 경계(601c) 및 타일 18-23을 포함하는 하부측 경계(601d)를 포함한다. 좌측 경계(601a), 우측 경계(601b), 상부측 경계(601c) 및 하부측 경계(601d)가 픽처(601)의 가장자리를 형성한다. 또한, 타일(603)들은 타일 행(605)들 및 타일 열(607)들로 파티셔닝될 수 있다. 타일 행(605)은 좌측 경계(601a)로부터 우측 경계(601b)까지(또는 그 반대로) 연속적인 선을 생성하도록 수평으로 인접하는 방식으로 위치되는 타일(603)들의 집합이다. 타일 열(607)은 상부측 경계(601c)로부터 하부측 경계(601d)까지(또는 그 반대로) 연속적인 선을 생성하도록 수직으로 인접하는 방식으로 위치되는 타일(603)들의 집합이다.

타일(603)들은 하나 이상의 타일 그룹(609)에 포함될 수 있다. 타일 그룹(609)은, 예를 들어 관심 영역의 디스플레이를 지원 및/또는 병렬 처리를 지원하기 위해 개별적으로 추출 및 코딩될 수 있는 관련된 타일(603)들의 집합이다. 타일 그룹(609) 내의 타일(603)은 타일 그룹(609) 외부의 타일(603)을 참조하지 않고 코딩될 수 있다. 각 타일(603)은 상응하는 타일 그룹(609)에 할당될 수 있고, 그에 따라 픽처(601)는 복수의 타일 그룹(609)을 포함할 수 있다. 그러나, 논의의 명확성을 위해, 본 개시물은 인덱스 7 내지 10(7-10) 및 인덱스 13 내지 16(13-16)을 갖는 타일(603)들을 포함하는 음영 영역으로 묘사된 타일 그룹(609)을 참조한다.

따라서, 픽처(601)의 타일 그룹(609)은 첫 번째 타일 인덱스 7과 마지막 타일 인덱스 16에 의해 시그널링될 수 있다. 디코더는 첫 번째 타일 인덱스 및 마지막 타일 인덱스에 기초하여 타일 그룹(609)의 구성을 결정하고자 할 수 있다. 본 명세서에서 사용되는 바와 같이, 타일 그룹(609) 구성은 타일 그룹(609)에서의 행, 열 및 타일(603)을 나타낸다. 타일 그룹(609) 구성을 결정하기 위해, 비디오 코딩 디바이스는 미리 정의된 알고리즘을 사용할 수 있다. 예를 들어, 비디오 코딩 디바이스는 타일 그룹(609)의 마지막 타일 인덱스와 타일 그룹(609)의 첫 번째 타일 인덱스 사이의 차이로서 델타 타일 인덱스를 설정함으로써 픽처(601)로부터 파티셔닝되는 타일 그룹(609) 내의 타일(603)의 수를 결정할 수 있다. 타일 그룹(609)에서의 타일 행(605)의 수는 델타 타일 인덱스를 픽처(601)에서의 타일 열(607)의 수에 1을 더한 수로 나눔으로써 결정될 수 있다. 또한, 타일 그룹(609)에서의 타일 열(607)의 수는 픽처(601)에서의 타일 열(607)의 수에 1을 더한 수에 대한 델타 타일 인덱스의 모듈로(modulo) 계산으로 결정될 수 있다. 타일 그룹(609)에서의 타일(603)의 수는 타일 그룹(609)에서의 타일 열(607)의 수에 타일 그룹(609)에서의 타일 행(605)의 수를 곱함으로써 결정될 수 있다.

전술한 바와 같이, 특정 상황에서, 타일 그룹 구조의 현재의 시그널링은 그것이 파라미터 세트에서 시그널링되든 또는 타일 그룹 헤더에서 시그널링되든 간에 일부 중복 정보를 포함한다. 이 문제를 해결하기 위해, 하나 이상의 실시형태에 있어서 단독으로 취해지거나 또는 조합하여 적용되는 다음과 같은 양태들이 상기 문제를 해결하기 위해 본 개시물에서 제안된다.

실시형태에 있어서, 픽처 당 하나 초과의 타일이 있을 경우, 파라미터 세트를 참조하는 타일 그룹 각각이 하나의 타일만을 포함하는지의 여부를 특정하기 위해 타일 그룹에 의해 직접 또는 간접적으로 참조된 파라미터 세트에서 플래그가 시그널링된다. 파라미터 세트는 시퀀스 파라미터 세트, 픽처 파라미터 세트, 또는 타일 그룹에 의해 직접 또는 간접적으로 참조된 임의의 다른 파라미터 세트일 수 있다. 실시형태에 있어서는, 이 플래그를 single_tile_per_tile_group_flag라고 할 수 있다. 실시형태에 있어서, single_tile_per_tile_group_flag의 값이 1인 경우, 타일 그룹 헤더에는 다음과 같은 신택스 요소들, 즉 (1) 타일 그룹 내의 타일의 수를 특정하는 신택스 요소, (2) 타일 그룹의 마지막 타일 식별을 특정하는 신택스 요소, 및 (3) 타일 그룹에서의 첫 번째 타일 이외의 임의의 타일의 타일 식별을 특정하는 신택스 요소가 존재하지 않는다.

다른 실시형태에 있어서, 타일 그룹 구조 정보는 각각의 타일 그룹에 의해 직접 또는 간접적으로 참조된 파라미터 세트에서 또는 타일 그룹 헤더에서 직접 시그널링될 수 있다. 픽처에서의 타일의 수가 하나보다 많은 경우, 파라미터 세트에 타일 그룹 구조 정보가 존재하는지의 여부를 특정하기 위해 플래그가 파라미터 세트에 존재할 수 있다. 파라미터 세트는 시퀀스 파라미터 세트, 픽처 파라미터 세트, 또는 타일 그룹에 의해 직접 또는 간접적으로 참조된 임의의 다른 파라미터 세트일 수 있다. 실시형태에 있어서, 이 플래그를 tile_group_info_in_pps_flag라고 할 수 있다. 실시형태에 있어서, 플래그가 파라미터 세트에 존재하지 않는 경우(예컨대, 픽처가 하나의 타일만을 포함하는 경우), tile_group_info_in_pps_flag의 값이 0인 것으로 추론된다. tile_group_info_in_pps_flag의 값은 파라미터 세트 및 타일 그룹 헤더에서 타일 그룹 구조 관련 신택스 요소의 존재를 조건화하는 데 사용된다. 이들 신택스 요소는, (1) 타일 그룹 내의 타일의 수를 특정하는 신택스 요소, (2) 타일 그룹의 마지막 타일 식별을 특정하는 신택스 요소, 및 (3) 타일 그룹에서의 첫 번째 타일 이외의 임의의 타일의 타일 식별을 특정하는 신택스 요소를 포함할 수 있다.

실시형태에 따른 PPS 및 타일 그룹 헤더에서의 관련 신택스 요소들의 신택스 및 의미는 다음과 같다. 설명은 "Draft text of video coding specification"이라는 제목의 JVET 기고 JVET-L0686에서 설명된 기본 텍스트와 관련된다. 즉, 델타 또는 추가적인 수정만이 설명되고, 아래에서 언급되지 않는 기본 텍스트에서의 텍스트는 기본 텍스트에서 설명된 대로 적용된다. 기본 텍스트와 관련된 pic_parameter_set_rbsp( ) 함수의 수정된 텍스트는 별표(*)로 강조 표시된다.

상기의 픽처 파라미터 세트 RBSP에 있어서, 신택스 요소 pps_pic_parameter_set_id는 다른 신택스 요소들에 의한 참조를 위해 PPS를 식별한다. 실시형태에 있어서, pps_pic_parameter_set_id의 값은 0 내지 63의 범위 내에 있을 것이다. 신택스 요소 pps_seq_parameter_set_id는 활성 SPS에 대한 sps_seq_parameter_set_id의 값을 특정한다. pps_seq_parameter_set_id의 값은 0 내지 15의 범위 내에 있을 것이다. 실시형태에 있어서, 신택스 요소 transform_skip_enabled_flag가 1이면, transform_skip_flag 신택스 요소는 잔차 코딩 신택스에 존재할 수 있다. 신택스 요소 transform_skip_enabled_flag가 0이면, transform_skip_flag 신택스 요소는 잔차 코딩 신택스에 존재하지 않는다. 신택스 요소 single_tile_in_pic_flag가 1이면, 이는 PPS를 참조하는 각 픽처에 하나의 타일만이 존재함을 나타낸다. 신택스 요소 single_tile_in_pic_flag가 0(즉, if( ! single_tile_in_pic_flag ))이면, 이는 PPS를 참조하는 각 픽처에 하나 초과의 타일이 존재함을 특정한다. 이 경우, PPS를 참조하는 각 타일 그룹이 정확히 하나의 타일을 포함하는지의 여부를 나타내기 위해 신택스 요소 single_tile_per_tile_group_flag가 사용된다. 예를 들어, 신택스 요소 single_tile_per_tile_group_flag가 1이면, 이는 PPS를 참조하는 각 타일 그룹이 정확히 하나의 타일을 포함한다는 것을 특정한다. 신택스 요소 single_tile_per_tile_group_flag가 0이면, 이는 파라미터 세트를 참조하는 각 타일 그룹이 하나 이상의 타일을 포함한다는 것을 나타낸다. 신택스 요소 tile_group_info_in_pps_flag는 타일 그룹 정보가 PPS에 존재하는지 아니면 PPS를 참조하는 타일 그룹 헤더에 존재하는지의 여부를 나타내는 데 사용된다. 실시형태에 있어서, 신택스 요소 tile_group_info_in_pps_flag가 1이면, 이는 타일 그룹 정보가 PPS에 존재하고 PPS를 참조하는 타일 그룹 헤더에는 존재하지 않는다는 것을 특정한다. 신택스 요소 tile_group_info_in_pps_flag가 0이면, 이는 타일 그룹 정보가 PPS에는 존재하지 않고 PPS를 참조하는 타일 그룹 헤더에 존재한다는 것을 나타낸다.

묘사된 실시형태에 있어서, 신택스 요소 tile_group_info_in_pps_flag가 타일 그룹 정보가 PPS에 존재하고 PPS를 참조하는 타일 그룹 헤더에는 존재하지 않는다는 것을 특정하는 1(즉, if( tile_group_info_in_pps_flag ))이면, 변수 num_tile_groups_in_pic_minus1이 픽처에서의 타일 그룹의 수보다 하나 적게 설정된다. 이 변수는 픽처에서의 각 타일 그룹을 반복하기 위해 for-루프에서 사용된다. 신택스 요소 pps_first_tile_id[ i ]는 픽처에서의 i 번째 타일 그룹의 첫 번째 타일의 타일 ID를 특정한다. 실시형태에 있어서, pps_first_tile_id[ i ]의 길이는 Ceil( Log2( NumTilesInPic ) ) 비트이다. j와 같지 않은 임의의 i에 대하여 pps_first_tile_id[ i ]의 값은 pps_first_tile_id[ j ]의 값과 같지 않을 것이다. 달리 언급하면, 픽처에서의 i 번째 타일 그룹의 첫 번째 타일의 타일 ID는 픽처에서의 임의의 다른 타일 그룹의 첫 번째 타일의 타일 ID와 동일하지 않을 것이다.

픽처에서의 각 i 번째 타일 그룹에 대하여, 신택스 요소 single_tile_per_tile_group_flag가 파라미터 세트를 참조하는 i 번째 타일 그룹이 하나 이상의 타일을 포함한다는 것을 나타내는 0(즉, if( ! single_tile_per_tile_group_flag ))이면, 신택스 요소 pps_num_tiles_in_tile_group_minus1[ i ] + 1이 i 번째 타일 그룹 내의 타일의 수를 특정하는 데 사용된다. pps_num_tiles_in_tile_group_minus1[ i ]의 값은 0 내지 NumTilesInPic ― 1의 범위 내에 있을 것이다. 실시형태에 있어서, 신택스 요소 pps_num_tiles_in_tile_group_minus1[ i ]이 존재하지 않을 경우, pps_num_tiles_in_tile_group_minus1[ i ]의 값이 0인 것으로 추론된다.

다른 예로서, 제2 실시형태에 따른 PPS 및 타일 그룹 헤더에서의 관련 신택스 요소들의 신택스 및 의미는 다음과 같다. 위에서 언급한 바와 같이, 설명은 "Draft text of video coding specification"이라는 제목의 JVET 기고 JVET-L0686에서 설명된 기본 텍스트와 관련된다. 즉, 델타 또는 추가적인 수정만이 설명되고, 아래에서 언급되지 않는 기본 텍스트에서의 텍스트는 기본 텍스트에서 설명된 대로 적용된다. 기본 텍스트와 관련된 pic_parameter_set_rbsp( ) 함수의 수정된 텍스트는 별표(*)로 강조 표시된다.

신택스 요소 pps_pic_parameter_set_id, pps_seq_parameter_set_id, transform_skip_enabled_flag 및 single_tile_in_pic_flag는 기본 텍스트(JVET 기고 JVET-L0686)에 따라 앞서 설명한 것과 같다. 이 실시형태에 있어서, 신택스 요소 single_tile_in_pic_flag가 파라미터 세트를 참조하는 각 타일 그룹이 하나 이상의 타일을 포함한다는 것을 나타내는 0(즉, if( ! single_tile_in_pic_flag ))이면, PPS를 참조하는 각 타일 그룹이 정확히 하나의 타일을 포함하는지의 여부를 나타내기 위해 single_tile_per_tile_group_flag 신택스 요소가 사용된다. 실시형태에 있어서, single_tile_per_tile_group_flag가 1이면, 이는 PPS를 참조하는 각 타일 그룹이 정확히 하나의 타일을 포함한다는 것을 나타낸다. single_tile_per_tile_group_flag가 0이면, 이는 PPS를 참조하는 각 타일 그룹이 하나 이상의 타일을 포함한다는 것을 특정한다. tile_group_info_in_pps_flag 신택스 요소는 타일 그룹 정보가 PPS에 존재하는지 아니면 PPS를 참조하는 타일 그룹 헤더에 존재하는지의 여부를 나타내는 데 사용된다. 실시형태에 있어서, tile_group_info_in_pps_flag가 1이면, 이는 타일 그룹 정보가 PPS에 존재하고 PPS를 참조하는 타일 그룹 헤더에는 존재하지 않는다는 것을 특정한다. tile_group_info_in_pps_flag가 0이면, 이는 타일 그룹 정보가 PPS에는 존재하지 않고 PPS를 참조하는 타일 그룹 헤더에 존재한다는 것을 나타낸다.

묘사된 실시형태에 있어서, tile_group_info_in_pps_flag가 1(즉, if( tile_group_info_in_pps_flag ))이면, 즉, 타일 그룹 정보가 PPS에 존재하고 PPS를 참조하는 타일 그룹 헤더에는 존재하지 않는다는 것을 나타내면, 변수 num_tile_groups_in_pic_minus1이 픽처에서의 타일 그룹의 수보다 하나 적게 설정된다. 이 변수는 픽처에서의 각 타일 그룹을 반복하기 위해 for-루프에서 사용된다. 신택스 요소 pps_first_tile_id[ i ]는 픽처에서의 i 번째 타일 그룹의 첫 번째 타일의 타일 ID를 특정한다. j와 같지 않은 임의의 i에 대하여 pps_first_tile_id[ i ]의 값은 pps_first_tile_id[ j ]의 값과 같지 않을 것이다. 이 실시형태에 있어서, 타일 그룹당 하나 초과의 타일이 존재하면(즉, if( !single_tile_per_tile_group_flag )), 신택스 요소 pps_last_tile_id[ i ]는 i 번째 타일 그룹의 마지막 타일의 타일 ID를 특정한다. pps_first_tile_id[ i ] 및 pps_last_tile_id[ i ]의 길이는 Ceil( Log2( NumTilesInPic ) ) 비트이다.

실시형태에 있어서, 타일 그룹 헤더와 RBSP 신택스 및 의미는 다음과 같다. 기본 텍스트와 관련된 tile_group_header( ) 함수의 수정된 텍스트는 별표(*)로 강조 표시된다.

묘사된 실시형태에 있어서, 픽처에서의 타일의 수(NumTilesInPic)가 1보다 크면, 신택스 요소 first_tile_id가 타일 그룹의 첫 번째 타일의 타일 ID를 특정하는 데 사용된다. first_tile_id의 길이는 Ceil( Log2( NumTilesInPic ) ) 비트이다. 타일 그룹의 first_tile_id의 값은 동일한 픽처의 임의의 다른 타일 그룹의 first_tile_id의 값과 같지 않을 것이다. single_tile_per_tile_group_flag가 타일 그룹당 하나 초과의 타일이 존재한다는 것(즉, if( !single_tile_per_tile_group_flag ))을 특정하고 tile_group_info_in_pps_flag가 타일 그룹 정보가 PPS에는 존재하지 않고 PPS를 참조하는 타일 그룹 헤더에 존재한다는 것(즉, !tile_group_info_in_pps_flag)을 나타내면, 신택스 요소 last_tile_id가 타일 그룹의 마지막 타일의 타일 ID를 특정하는 데 사용된다. 실시형태에 있어서, last_tile_id의 길이는 Ceil( Log2( NumTilesInPic ) ) 비트이다.

실시형태에 있어서, NumTilesInPic이 1이거나 또는 single_tile_per_tile_group_flag가 1인 경우, last_tile_id의 값이 first_tile_id와 같은 것으로 추론된다. 실시형태에 있어서, tile_group_info_in_pps_flag가 1인 경우, last_tile_id의 값은 pps_first_tile_id[ i ]의 값과 같은 것으로 추론되고, 여기서 i는 first_tile_id가 pps_first_tile_id[ i ]와 같아지도록 하는 값이다. 이 실시형태에 있어서는, 각 타일 그룹이 픽처의 직사각형 영역을 포함한다는 것이 추가적으로 제한될 수 있다. 이 경우, first_tile_id는 타일 그룹의 좌상단 모서리에 있는 타일의 타일 ID를 특정하고, last_tile_id는 타일 그룹의 우하단 모서리에 있는 타일의 타일 ID를 특정한다.

실시형태에 있어서, 신택스 요소는 타일 그룹 모드를 특정하기 위해 PPS에서 추가적으로 시그널링될 수 있으며, 이는 적어도 다음 2 가지의 타일 그룹 모드를 허용한다. 직사각형 타일 그룹 모드라고도 하는 제1 모드에서는, 각 타일 그룹이 픽처의 직사각형 영역을 포함하는 것으로 추가적으로 제한된다. 이 경우, first_tile_id는 타일 그룹의 좌상단 모서리에 있는 타일의 타일 ID를 특정하고, last_tile_id는 타일 그룹의 우하단 모서리에 있는 타일의 타일 ID를 특정한다. 타일 래스터 스캔 모드라고도 하는 제2 모드에서는, 추가적인 변경이 수행되지 않으며, 각 타일 그룹에 포함되는 타일들은 픽처의 타일 래스터 스캔에서의 시퀀스 타일이다.

도 7은 예시적인 비디오 코딩 디바이스(700)의 개략도이다. 비디오 코딩 디바이스(700)는 본 명세서에서 설명된 바와 같은 개시된 실시예들/실시형태들을 구현하기에 적합하다. 비디오 코딩 디바이스(700)는 다운스트림 포트(720), 업스트림 포트(750) 및/또는 네트워크를 통해 데이터 업스트림 및/또는 다운스트림을 통신하기 위한 송신기 및/또는 수신기를 포함하는 트랜시버 유닛(Tx/Rx)(710)을 포함한다. 비디오 코딩 디바이스(700)는 또한 데이터를 처리하기 위한 로직 유닛 및/또는 중앙 처리 장치(CPU)를 포함하는 프로세서(730) 및 데이터를 저장하기 위한 메모리(732)를 포함한다. 비디오 코딩 디바이스(700)는 또한 전기, 광학 또는 무선 통신 네트워크를 통한 데이터의 통신을 위해 업스트림 포트(750) 및/또는 다운스트림 포트(720)에 결합되는 전기, 광-전기(OE) 컴포넌트, 전기-광(EO) 컴포넌트 및/또는 무선 통신 컴포넌트를 포함할 수 있다. 비디오 코딩 디바이스(700)는 또한 사용자와의 사이에서 데이터를 통신하기 위한 입력 및/또는 출력(I/O) 디바이스(760)를 포함할 수 있다. I/O 디바이스(760)는 비디오 데이터를 표시하기 위한 디스플레이, 오디오 데이터를 출력하기 위한 스피커 등과 같은 출력 디바이스를 포함할 수 있다. I/O 디바이스(760)는 또한 키보드, 마우스, 트랙볼 등과 같은 입력 디바이스 및/또는 상기와 같은 출력 디바이스와 상호 작용하기 위한 상응하는 인터페이스를 포함할 수 있다.

프로세서(730)는 하드웨어 및 소프트웨어에 의해 구현된다. 프로세서(730)는 하나 이상의 CPU 칩, 코어(예컨대, 멀티-코어 프로세서로서), 필드-프로그램 가능 게이트 어레이(FPGA), 주문형 집적 회로(ASIC), 및 디지털 신호 처리기(DSP)로서 구현될 수 있다. 프로세서(730)는 다운스트림 포트(720), Tx/Rx(710), 업스트림 포트(750) 및 메모리(732)와 통신한다. 프로세서(730)는 코딩 모듈(714)을 포함한다. 코딩 모듈(714)은 비트스트림(500) 및/또는 타일 그룹(609)으로 파티셔닝되는 이미지를 사용할 수 있는 방법(100, 800 및 900)과 같이, 본 명세서에서 설명되는 개시된 실시형태들을 구현한다. 코딩 모듈(714)은 또한 본 명세서에서 설명되는 임의의 다른 방법/메커니즘을 구현할 수 있다. 또한, 코딩 모듈(714)은 코덱 시스템(200), 인코더(300) 및/또는 디코더(400)를 구현할 수 있다. 예를 들어, 인코더로서 동작할 경우, 코딩 모듈(714)은 적어도 하나의 타일 그룹을 포함하는 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하는 비디오 비트스트림을 인코딩할 수 있다. 코딩 모듈(714)은 또한 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파라미터 세트에 인코딩할 수 있다. 디코더로서 동작할 경우, 코딩 모듈(714)은 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 나타내는 플래그를 판독할 수 있다. 이와 같이, 코딩 모듈(714)은 비디오 코딩 디바이스(700)의 기능을 개선할 뿐만 아니라 타일 그룹 시그널링에 부정적인 영향을 주지 않으면서 비디오 코딩 기술 분야 특유의 문제를 해결하여 비디오 시퀀스에서 데이터 중복성을 줄이거나 제거한다(그에 따라 코딩 효율이 증가됨). 또한, 코딩 모듈(714)은 비디오 코딩 디바이스(700)를 다른 상태로 변환한다. 대안으로서, 코딩 모듈(714)은 메모리(732)에 저장되고 프로세서(730)에 의해 실행되는 명령어로서(예컨대, 비일시적 매체에 저장된 컴퓨터 프로그램 제품으로서) 구현될 수 있다.

메모리(732)는 디스크, 테이프 드라이브, 솔리드 스테이트 드라이브, 리드 온리 메모리(ROM), 랜덤 액세스 메모리(RAM), 플래시 메모리, 터너리 내용 주소화 메모리(TCAM), 정적 랜덤 액세스 메모리(SRAM) 등과 같이, 하나 이상의 메모리 타입을 포함한다. 메모리(732)는 오버-플로 데이터 저장 장치로서 사용되어, 프로그램이 실행을 위해 선택될 경우 이러한 프로그램을 저장하고, 프로그램 실행 동안 판독된 명령어 및 데이터를 저장할 수 있다.

도 8은 픽처(601)와 같은 이미지를 비트스트림(500)과 같은 비트스트림에 인코딩하는 예시적인 방법(800)의 흐름도이다. 방법(800)은 방법(100)을 수행할 경우의 코덱 시스템(200), 인코더(300) 및/또는 비디오 코딩 디바이스(700)와 같은 인코더에 의해 사용될 수 있다.

방법(800)은, 인코더가 복수의 이미지를 포함하는 비디오 시퀀스를 수신하고, 예를 들어 사용자 입력에 기초하여 해당 비디오 시퀀스를 비트스트림에 인코딩하기로 결정할 때 시작될 수 있다. 비디오 시퀀스는 인코딩 전에 추가적인 파티셔닝을 위해 픽처/이미지/프레임으로 파티셔닝된다. 단계(801)에서, 픽처는 복수의 타일로 파티셔닝된다. 타일은 복수의 CTU로 더 파티셔닝될 수 있으며, CTU는 예측 기반 압축의 적용을 위해 코딩 블록들로 더 파티셔닝될 수 있다. 타일들의 그룹도 타일 그룹에 할당된다.

단계(803)에서, 타일 그룹은 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하는 비트스트림에 인코딩된다. 각각의 픽처는 적어도 하나의 타일 그룹을 포함한다. 또한, 플래그가 비트스트림에서 파라미터 세트에 인코딩된다. 플래그는 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 존재하는지 또는 타일 그룹 헤더에 존재하는지의 여부를 나타낸다. 타일 정보는 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타낸다. 특정 예로서, 플래그는 tile_group_info_in_pps_flag이다. 예를 들어, 플래그는 픽처와 연관되는 PPS에 인코딩될 수 있다.

단계(805)에서, 플래그에 기초하여 파라미터 세트 또는 타일 그룹 헤더에 타일 정보가 인코딩된다. 실시형태에 있어서, 신택스 요소 tile_group_info_in_pps_flag가 1인 경우, 이는 타일 그룹 정보가 파라미터 세트에 존재하고 파라미터 세트를 참조하는 타일 그룹 헤더에는 존재하지 않는다는 것을 특정한다. 신택스 요소 tile_group_info_in_pps_flag가 0인 경우, 이는 타일 그룹 정보가 파라미터 세트에는 존재하지 않고 파라미터 세트를 참조하는 타일 그룹 헤더에 존재한다는 것을 나타낸다. 실시형태에 있어서, 플래그가 파라미터 세트에 존재하지 않는 경우(예컨대, 픽처가 하나의 타일만을 포함하는 경우), tile_group_info_in_pps_flag의 값이 0인 것으로 추론된다. 타일 그룹 정보는 타일 그룹 내의 타일의 수를 특정하는 신택스 요소, 타일 그룹의 마지막 타일 식별을 특정하는 신택스 요소, 및 타일 그룹에서의 첫 번째 타일 이외의 임의의 타일의 타일 식별을 특정하는 신택스 요소를 포함할 수 있다.

단계(807)에서, 비디오 비트스트림은 디코더를 향해 네트워크를 따라 전송 또는 송신된다. 실시형태에 있어서, 비디오 비트스트림은 요청시에 전송된다. 비디오 비트스트림은 인코더에 의해 자동으로 디코더에 푸시될 수도 있다. 실시형태에 있어서, 코딩된 비디오 비트스트림은 인코더에 일시적으로 또는 영구적으로 저장될 수 있다.

도 9는 비트스트림(500)과 같은 비트스트림으로부터 픽처(601)와 같은 이미지를 디코딩하는 예시적인 방법(900)의 흐름도이다. 방법(900)은 방법(100)을 수행할 경우의 코덱 시스템(200), 디코더(400) 및/또는 비디오 코딩 디바이스(700)와 같은 디코더에 의해 사용될 수 있다.

방법(900)은, 단계(901)에서, 디코더가, 예를 들어 방법(800)의 결과로서 비디오 시퀀스를 나타내는 코딩된 데이터의 비트스트림을 수신하기 시작할 때 시작한다. 예를 들어, 코딩된 데이터는 적어도 하나의 픽처에 대한 코드 데이터를 포함하고, 각각의 픽처는 적어도 하나의 타일 그룹을 포함한다.

단계(903)에서, 비트스트림에서 파라미터 세트로부터 플래그가 파싱된다. 예를 들어, 플래그는 픽처와 연관되는 PPS로부터 취득될 수 있다. 본 명세서에서 사용되는 용어 파싱하는 또는 파싱은 플래그 또는 다른 신택스 요소가 파라미터 세트에 존재하는지의 여부를 식별 또는 결정하고, 플래그 또는 다른 신택스 요소에 대응하는 값을 취득하고, 플래그 또는 다른 신택스 요소의 값과 연관되는 조건을 결정하는 프로세스를 포함할 수 있다. 실시형태에 있어서, 플래그를 파싱함으로써, 방법(900)은 코딩된 픽처에 대한 타일 정보가 플래그에 기초하여 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 결정할 수 있다.

단계(905)에서, 방법(900)은 플래그에 기초하여 파라미터 세트 또는 타일 그룹 헤더에서 타일 정보를 취득한다. 예를 들어, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 인코딩된다는 것을 플래그가 특정하는 경우, 방법(900)은 파라미터 세트로부터 타일 정보를 파싱할 수 있다. 마찬가지로, 코딩된 픽처에 대한 타일 정보가 타일 그룹 헤더에 인코딩된다는 것을 플래그가 특정하는 경우, 방법(900)은 타일 그룹 헤더로부터 타일 정보를 파싱할 수 있다.

단계(907)에서, 타일 그룹이 디코딩되어 픽처의 일부를 복원할 수 있으며, 이는 복원된 비디오 시퀀스의 일부로서 포함될 수 있다. 결과적인 복원된 비디오 시퀀스는 사용자에게 표시하기 위해 디스플레이 디바이스로 전달될 수 있다. 결과적인 복원된 비디오 시퀀스는 또한 디코더의 메모리 또는 데이터 저장 장치에 일시적으로 또는 영구적으로 저장될 수 있다.

도 10은 비트스트림(500)과 같은 비트스트림에서 픽처(601)와 같은 이미지의 비디오 시퀀스를 코딩하기 위한 예시적인 시스템(1000)의 개략도이다. 시스템(1000)은 코덱 시스템(200), 인코더(300), 디코더(400) 및/또는 비디오 코딩 디바이스(700)와 같은 인코더 및 디코더에 의해 구현될 수 있다. 또한, 시스템(1000)은 방법(100, 800, 및/또는 900)을 구현할 때 사용될 수 있다.

시스템(1000)은 비디오 인코더(1002)를 포함한다. 비디오 인코더(1002)는 제1 픽처를 복수의 타일로 파티셔닝하기 위한 파티셔닝 모듈(1001)을 포함한다. 비디오 인코더(1002)는 타일들의 그룹을 타일 그룹에 할당하기 위한 할당 모듈(1003)을 더 포함한다. 비디오 인코더(1002)는 타일 그룹을 비트스트림에 인코딩하고, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 나타내기 위해 비트스트림에서 파라미터 세트에 플래그를 인코딩하기 위한 인코딩 모듈(1005)을 더 포함한다. 비디오 인코더(1002)는 디코더를 향한 통신을 위해 비트스트림을 저장하기 위한 저장 모듈(1007)을 더 포함한다. 비디오 인코더(1002)는 비트스트림을 디코더에 전송하기 위한 송신 모듈(1009)을 더 포함한다. 비디오 인코더(1002)는 방법(800)의 단계들 중 어느 하나를 수행하도록 더 구성될 수 있다.

시스템(1000)은 또한 비디오 디코더(1010)를 포함한다. 비디오 디코더(1010)는 픽처로부터 파티셔닝되는 타일들의 그룹을 포함하는 타일 그룹을 포함하는 비트스트림을 수신하기 위한 수신 모듈(1011)을 포함한다. 비디오 디코더(1010)는 비트스트림에서 파라미터 세트로부터 플래그를 취득하기위한 취득 모듈(1013)을 더 포함하고, 여기서 플래그는 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 나타낸다. 비디오 디코더(1010)는 타일 정보의 위치와 관련하여 특정 조건이 존재하는지의 여부를 결정하기 위한 결정 모듈(1015)을 더 포함한다. 예를 들어, 결정 모듈(1015)은 single_tile_per_tile_group_flag를 파싱함으로써 타일 그룹당 단일의 타일이 존재하는지의 여부를 결정할 수 있다. 비디오 디코더(1010)는 디스플레이를 위해 복원된 비디오 시퀀스를 생성하도록 타일 그룹을 디코딩하기 위한 디코딩 모듈(1017)을 더 포함한다. 비디오 디코더(1010)는 방법(900)의 단계들 중 어느 하나를 수행하도록 더 구성될 수 있다.

제1 컴포넌트와 제2 컴포넌트 사이에 선, 트레이스 또는 다른 매체를 제외하고는 중간 컴포넌트가 없을 경우 제1 컴포넌트는 제2 컴포넌트에 직접적으로 결합된다. 제1 컴포넌트와 제2 컴포넌트 사이에 선, 트레이스 또는 다른 매체 외에 중간 컴포넌트가 있을 경우 제1 컴포넌트는 제2 컴포넌트에 간접적으로 결합된다. 용어 "결합된(coupled)" 및 그 변형은 직접 결합 및 간접 결합을 모두 포함한다. 용어 "약(about)"의 사용은 달리 언급되지 않는 한 후속하는 숫자의 ±10 %를 포함하는 범위를 의미한다.

본 명세서에서 제시되는 예시적인 방법들의 단계들이 반드시 설명된 순서로 수행되어야 하는 것은 아니며, 이러한 방법들의 단계들의 순서는 단지 예시적인 것으로 이해되어야 한다는 점을 또한 이해해야 한다. 마찬가지로, 추가적인 단계들이 이러한 방법들에 포함될 수 있고, 본 개시물의 다양한 실시형태들과 일치하는 방법들에 있어서는 특정 단계들이 생략 또는 조합될 수 있다.

본 개시물에서는 몇몇 실시형태가 제공되었지만, 개시된 시스템들 및 방법들은 본 개시물의 정신 또는 범위로부터 일탈함이 없이 다수의 다른 특정한 형태로 구체화될 수 있음을 이해할 수 있다. 본 발명의 실시예들은 예시적이고 비제한적인 것으로 간주되어야 하고, 본 발명은 본 명세서에서 제공된 세부 내용으로 제한되지 않는다. 예를 들어, 다양한 요소들 또는 컴포넌트들이 다른 시스템에 결합 또는 통합될 수 있거나, 또는 특정한 특징들이 생략될 수 있거나, 또는 구현되지 않을 수 있다.

또한, 다양한 실시형태들에서 별개의 또는 독립된 것으로 설명 및 예시된 기술들, 시스템들, 서브시스템들, 및 방법들은 본 개시물의 범위로부터 일탈함이 없이 다른 시스템들, 컴포넌트들, 기술들, 또는 방법들과 결합 또는 통합될 수 있다. 다른 변경, 치환, 및 개조의 실시예들은 당업자에 의해 확인될 수 있으며 본 명세서에 개시된 정신 및 범위로부터 일탈함이 없이 이루어질 수 있다.

Claims (18)

1. 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하는 비디오 비트스트림을 인코딩하기 위해 인코더에서 구현― 각 픽처는 적어도 하나의 타일 그룹을 포함함 ―되는 방법으로서,
   상기 인코더의 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 인코딩― 상기 타일 정보는 상기 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타냄 ―하는 단계,
   상기 코딩된 픽처에 대한 타일 정보가 상기 파라미터 세트에서 인코딩된다는 것을 상기 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 파라미터 세트에서만 상기 타일 정보를 인코딩하는 단계,
   상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 상기 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 타일 그룹 헤더에서만 상기 타일 정보를 인코딩하는 단계,
   상기 프로세서에 의해, 상기 타일 정보에 기초하여 상기 비디오 비트스트림에서 상기 픽처를 인코딩하는 단계, 및
   디코더를 향해 네트워크를 따라 상기 비디오 비트스트림을 전송하는 단계를 포함하는
   방법.
   
2. 제1항에 있어서,
   상기 프로세서에 의해, 상기 파라미터 세트에서만 상기 타일 정보를 인코딩하는 단계는, 상기 프로세서에 의해, 상기 픽처에서의 각 타일 그룹의 첫 번째 타일의 타일 식별자(ID)를 인코딩하는 단계를 포함하는
   방법.
   
3. 제2항에있어서,
   상기 프로세서에 의해, 상기 파라미터 세트에서만 상기 타일 정보를 인코딩하는 단계는,
   상기 프로세서에 의해, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계, 및
   상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 픽처에서의 현재의 타일 그룹의 마지막 타일의 타일 ID를 인코딩하는 단계를 더 포함하는
   방법.
   
4. 제2항에있어서,
   상기 프로세서에 의해, 상기 파라미터 세트에서만 상기 타일 정보를 인코딩하는 단계는,
   상기 프로세서에 의해, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계, 및
   상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 픽처에서의 현재의 타일 그룹 내의 타일의 수를 인코딩하는 단계를 더 포함하는
   방법.
   
5. 제1항에있어서,
   상기 프로세서에 의해, 상기 타일 그룹 헤더에서만 상기 타일 정보를 인코딩하는 단계는,
   상기 프로세서에 의해, 타일 그룹 헤더에서 상기 픽처에서의 타일 그룹의 첫 번째 타일의 타일 ID를 인코딩하는 단계,
   상기 프로세서에 의해, 상기 플래그가 상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 특정하는지의 여부 및 상기 제2 플래그가 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 특정하는지의 여부를 결정하는 단계, 및
   상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 상기 플래그가 특정하고, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 타일 그룹 헤더에서 상기 픽처에서의 타일 그룹의 마지막 타일의 타일 ID를 인코딩하는 단계를 포함하는
   방법.
   
6. 비디오 비트스트림을 디코딩하기 위해 디코더에서 구현― 상기 비트스트림은 적어도 하나의 픽처에 대한 코딩된 데이터를 포함하고, 각 픽처는 적어도 하나의 타일 그룹을 포함함 ―되는 방법으로서,
   상기 디코딩의 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파싱― 상기 타일 정보는 상기 픽처의 어느 타일들이 타일 그룹에 포함되는지를 나타냄 ―하는 단계,
   상기 코딩된 픽처에 대한 타일 정보가 상기 파라미터 세트에서 인코딩된다는 것을 상기 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 파라미터 세트로부터 상기 타일 정보를 파싱하는 단계,
   상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 상기 플래그가 특정한다는 결정에 응답하여, 상기 프로세서에 의해, 상기 타일 그룹 헤더로부터 상기 타일 정보를 파싱하는 단계, 및
   상기 타일 정보에 기초하여 상기 코딩된 픽처의 디코딩된 데이터를 취득하는 단계를 포함하는
   방법.
   
7. 제6항에 있어서,
   상기 프로세서에 의해, 상기 파라미터 세트로부터 상기 타일 정보를 파싱하는 단계는 상기 픽처에서의 각 타일 그룹의 첫 번째 타일의 타일 식별자(ID)를 디코딩하는 단계를 포함하는
   방법.
   
8. 제7항에 있어서,
   상기 프로세서에 의해, 상기 파라미터 세트로부터 상기 타일 정보를 파싱하는 단계는,
   상기 프로세서에 의해, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계, 및
   상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여 상기 픽처에서의 현재의 타일 그룹의 마지막 타일의 타일 ID를 디코딩하는 단계를 더 포함하는
   방법.
   
9. 제7항에 있어서,
   상기 프로세서에 의해, 상기 파라미터 세트로부터 상기 타일 정보를 파싱하는 단계는,
   상기 프로세서에 의해, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함하는지의 여부를 특정하는 제2 플래그를 파싱하는 단계, 및
   상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여 상기 픽처에서의 현재의 타일 그룹 내의 타일의 수를 디코딩하는 단계를 더 포함하는
   방법.
   
10. 제6항에있어서,
    상기 프로세서에 의해, 상기 타일 그룹 헤더로부터 상기 타일 정보를 파싱하는 단계는,
    타일 그룹 헤더에서 상기 픽처에서의 타일 그룹의 첫 번째 타일의 타일 ID를 디코딩하는 단계,
    상기 플래그가 상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 특정하는지의 여부 및 상기 제2 플래그가 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 특정하는지의 여부를 결정하는 단계, 및
    상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에서 인코딩된다는 것을 상기 플래그가 특정하고, 상기 파라미터 세트를 참조하는 현재의 타일 그룹이 하나 초과의 타일을 포함한다는 것을 상기 제2 플래그가 특정한다는 결정에 응답하여, 상기 타일 그룹 헤더에서 상기 픽처에서의 타일 그룹의 마지막 타일의 타일 ID를 디코딩하는 단계를 포함하는
    방법.
    
11. 제6항에 있어서,
    상기 프로세서에 의해, 코딩된 픽처에 대한 타일 정보가 파라미터 세트에 또는 타일 그룹 헤더에 존재하는지의 여부를 특정하는 플래그를 파싱하는 단계는, 상기 플래그가 상기 파라미터 세트에 존재하지 않는다는 결정에 응답하여, 상기 코딩된 픽처에 대한 타일 정보가 상기 타일 그룹 헤더에만 존재한다는 것을 상기 플래그가 특정한다고 추론하는 단계를 포함하는
    방법.
    
12. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 플래그는 tile_group_info_in_pps_flag인
    방법.
    
13. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 제2 플래그는 single_tile_per_tile_group_flag인
    방법.
    
14. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 파라미터 세트는 픽처 파라미터 세트인
    방법.
    
15. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 파라미터 세트는 시퀀스 파라미터 세트인
    방법.
    
16. 제1항 내지 제11항 중 어느 한 항에 있어서,
    상기 파라미터 세트는 비디오 파라미터 세트인
    방법.
    
17. 비디오 코딩 디바이스로서,
    프로세서, 상기 프로세서에 결합되는 수신기, 및 상기 프로세서에 결합되는 송신기를 포함하고, 상기 프로세서, 상기 수신기 및 상기 송신기는 제1항 내지 제16항 중 어느 한 항에 기재된 방법을 수행하도록 구성되는
    비디오 코딩 디바이스.
    
18. 비디오 코딩 디바이스에 의해 사용하기 위한 컴퓨터 프로그램 제품을 포함하는 비일시적 컴퓨터 판독 가능 매체로서, 상기 컴퓨터 프로그램 제품은 프로세서에 의해 실행될 때 상기 비디오 코딩 디바이스로 하여금 제1항 내지 제16항 중 어느 한 항에 기재된 방법을 수행하게 하도록 상기 비일시적 컴퓨터 판독 가능 매체에 저장되는 컴퓨터 실행 가능 명령어를 포함하는 비일시적 컴퓨터 판독 가능 매체.

Images