KR20230093543A - 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 - Google Patents

Abstract

본 출원의 실시예는 일종의 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 방법 및 관련 기기를 제공하는 바, 비디오 코딩 영역에 속한다. 본 출원의 실시예에서, 현재 프레임의 비트 스트림 중의 확장 데이터 내에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가한다. 이러한 방법으로, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 또한 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 지시함으로써, 영역 분할의 유연성을 향상시킨다.

Description

적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩

본 출원의 실시예는 비디오 코딩 영역에 관한 것으로, 특히 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩에 사용되는 방법 및 관련 기기에 관한 것이다.

I 픽처 비트 레이트가 너무 커서 I 픽처를 디코딩하는 데에 필요한 시간이 긴 문제점을 해결하기 위해, 인트라 리프레시 메커니즘이 생겨났다. 인트라 리프레시 메커니즘의 기본 원리는 하나의 I 픽처의 비트 레이트를 여러 개의 P 픽처에 분산시키는 것이다. 인코딩 과정 중, 하나의 완전한 픽처를 리프레시 주기에 기초하여 N개의 강제 인트라 영역으로 분할하고, 순서대로 당해 픽처에 대한 N개의 인트라 리프레시 프레임을 인코딩하며, 각 인트라 리프레시 프레임에는 전술한 N개의 강제 인트라 영역 내의 하나의 강제 인트라 영역이 포함되고, 이 N개의 강제 인트라 영역의 인코딩 모드는 강제 인트라(intra) 모드이고, 각 인트라 리프레시 프레임 내의 기타 영역의 인코딩 모드는 인터(inter) 모드의 사용을 허락하고, 이러한 방법으로 각 인트라 리프레시 프레임의 비트 레이트는 I 픽처의 비트 레이트에 비해 감소할 뿐만 아니라, 각 인트라 리프레시 프레임의 비트 레이트도 안정적이다. 하지만 현재의 시맨틱에 기초하여 인트라 리프레시 메커니즘을 작동하는 과정은 리던던터하다.

본 출원의 실시예는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 방법 및 관련 기기를 제공하는 바, 인트라 리프레시 메커니즘으로 구분된 응용의 유연성을 향상시킬 수 있다. 상기 기술적 해결방안은 아래와 같다:

일 양태에서, 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법을 제공하는 바, 상기 방법은: 현재 프레임(픽처)의 비트 스트림을 수신하는 단계; 만약 상기 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 상기 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 상기 확장 데이터에 휴대된 가상 경계 위치 정보(virtual boundary position marker information)를 획득하고, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키며, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되고; 상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계를 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 방법은: 만약 상기 현재 프레임의 비트 스트림의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것으로 결정하는 단계를 더 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며, 상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리킨다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고, 상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표이며; 상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고, 상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계는: 만약 상기 제1 가상 경계 위치 정보의 값과 상기 제2 가상 경계 위치 정보의 값 모두가 0보다 크면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정하는 단계; 만약 상기 제1 가상 경계 위치 정보의 값 및/또는 상기 제2 가상 경계 위치 정보의 값이 0과 같으면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 단계를 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 방법은: 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 디코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임이 랜덤 액세스 포인트인 단계를 더 포함하며; 여기서, 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것은: 상기 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않는 것; 또는 상기 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지만 이전 프레임의 제1 가상 경계 위치 정보 및/또는 제2 가상 경계 위치 정보의 값이 0인 것을 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 방법은: 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 상기 현재 프레임의 제1 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하며, 또한 상기 현재 프레임의 제2 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 또는 초과하는 것을 결정하면, 상기 현재 프레임을 랜덤 액세스 복구 포인트로 결정하는 단계를 더 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보의 정밀도는 하나의 최대 코딩 유닛(large coding unit, LCU)의 너비이고, 상기 제2 가상 경계 위치 정보의 정밀도는 하나의 상기 LCU의 높이이다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 현재 프레임이 랜덤 액세스에 사용될 경우, 상기 현재 프레임에 대해 디코딩을 수행하기 전에, 상기 방법은: 하나의 유효한 시퀀스 헤더를 획득하는 단계; 상기 시퀀스 헤더에 휴대된 정보에 기반하여 상기 현재 프레임에 대해 디코딩을 수행하는 단계를 더 포함한다.

다른 일 양태에서, 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법을 제공하는 바, 상기 방법은: 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계; 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디와 상기 현재 프레임의 가상 경계 위치 정보를 휴대하는 단계 - 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용됨 -;를 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며, 상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리킨다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고, 상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표이며; 상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고, 상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만 상기 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값 및/또는 제2 가상 경계 위치 정보의 값이 0이다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 휴대된 상기 제1 가상 경계 위치 정보의 값이 0보다 크고, 또한 상기 제2 가상 경계 위치 정보의 값도 0보다 크다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 방법은: 만약 상기 현재 프레임이 랜덤 액세스 포인트이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 인코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 단계를 더 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 방법은: 만약 상기 현재 프레임이 랜덤 액세스 복구 포인트이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 상기 제1 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 오른쪽 경계와 같거나 또는 초과하며, 또한 상기 제2 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정하는 단계를 더 포함한다.

상술한 방법에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 상기 제2 가상 경계 위치 정보의 정밀도는 하나의 상기 LCU의 높이이다.

다른 일 양태에서, 디코딩 장치를 제공하는 바, 상기 디코딩 장치는: 현재 프레임의 비트 스트림을 수신하기 위한 수신 모듈; 처리 모듈 - 만약 상기 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 상기 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 상기 확장 데이터에 휴대된 가상 경계 위치 정보를 획득하고, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키며, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용됨 -;을 포함하고, 상기 처리 모듈은 또한 상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 처리 모듈은: 만약 상기 현재 프레임의 비트 스트림의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것으로 결정하는 데에 더 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며, 상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고, 상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표이며; 상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고, 상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 처리 모듈은: 만약 상기 제1 가상 경계 위치 정보의 값과 상기 제2 가상 경계 위치 정보의 값 모두가 0보다 크면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고; 만약 상기 제1 가상 경계 위치 정보의 값 및/또는 상기 제2 가상 경계 위치 정보의 값이 0과 같으면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 데에 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 처리 모듈은 또한: 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 디코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임이 랜덤 액세스 포인트이고; 여기서, 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것은: 상기 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않는 것; 또는 상기 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지만 이전 프레임의 제1 가상 경계 위치 정보 및/또는 제2 가상 경계 위치 정보의 값이 0인 것을 포함한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 처리 모듈은 또한: 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 상기 현재 프레임의 제1 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하며, 또한 상기 현재 프레임의 제2 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 또는 초과하는 것을 결정하면, 상기 현재 프레임을 랜덤 액세스 복구 포인트로 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 상기 제2 가상 경계 위치 정보의 정밀도는 하나의 상기 LCU의 높이이다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 처리 모듈은 또한: 상기 현재 프레임이 랜덤 액세스에 사용될 경우, 상기 현재 프레임에 대해 디코딩을 수행하기 전에, 하나의 유효한 시퀀스 헤더를 획득하고; 상기 시퀀스 헤더에 휴대된 정보에 기반하여 상기 현재 프레임에 대해 디코딩을 수행한다.

다른 일 양태에서, 인코딩 장치를 제공하는 바, 상기 인코딩 장치는 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하기 위한 인코딩 모듈을 포함하고; 상기 인코딩 모듈은 또한, 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디와 상기 현재 프레임의 가상 경계 위치 정보를 휴대하며, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며, 상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고, 상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표이며; 상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고, 상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 인코딩 모듈은 또한: 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만 상기 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값 및/또는 제2 가상 경계 위치 정보의 값이 0이다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 만약 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 휴대된 상기 제1 가상 경계 위치 정보의 값이 0보다 크고, 또한 상기 제2 가상 경계 위치 정보의 값도 0보다 큰 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 인코딩 모듈은 또한: 만약 상기 현재 프레임이 랜덤 액세스 포인트이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 인코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 인코딩 모듈은 또한: 만약 상기 현재 프레임이 랜덤 액세스 복구 포인트이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 상기 제1 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 오른쪽 경계와 같거나 또는 초과하며, 또한 상기 제2 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 상기 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 상기 제2 가상 경계 위치 정보의 정밀도는 하나의 상기 LCU의 높이이다.

다른 일 양태에서, 디코딩측 기기를 제공하는 바, 상기 디코딩측 기기는 프로세서 및 프로세서가 실행 가능한 명령을 저장하기 위한 메모리를 포함하며; 여기서, 상기 프로세서는 상술한 상기 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법 중의 어느 한 단계를 수행하도록 설정된다.

다른 일 양태에서, 인코딩측 기기를 제공하는 바, 상기 인코딩측 기기는 프로세서 및 프로세서가 실행 가능한 명령을 저장하기 위한 메모리를 포함하며; 여기서, 상기 프로세서는 상술한 상기 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법 중의 어느 한 단계를 수행하도록 설정된다.

다른 일 양태에서, 컴퓨터 판독 가능 저장매체를 제공하는 바, 상기 컴퓨터 판독 가능 저장매체에는 명령이 저장되고, 상기 명령이 프로세서에 의해 실행될 경우 상술한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법을 수행하거나, 또는 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법 중의 어느 한 단계를 수행한다.

다른 일 양태에서, 명령을 포함한 컴퓨터 프로그램 제품을 제공하는 바, 이가 컴퓨터에서 실행될 경우, 컴퓨터가 상술한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법, 또는 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법 중의 어느 한 단계를 수행하게 한다.

본 출원의 실시예에서 제공하는 기술적 해결방안이 가져오는 유익한 효과는 적어도: 현재 프레임의 비트 스트림 중의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가하고, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 다음에 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 가리킴으로써, 리프레시 영역 분할의 유연성을 향상시키는 바, 즉 본 출원의 실시예는 확장 데이터를 통해 적응적으로 리프레시 영역을 분할하는 적응적 인트라 리프레시 메커니즘을 제공하는 것을 포함한다.

본 출원의 실시예 중의 기술적 해결책을 보다 명확하게 설명하기 위해, 실시예들에서 사용될 필요가 있는 첨부 도면들에 대한 간단한 설명이 이하에 주어진다. 명백하게, 이하의 설명에서의 도면들은 단지 본 출원에 설명된 일부 실시들이다. 본 기술분야의 통상의 기술자들에게는, 창조적 노력 없이 이러한 도면들에 기초하여 다른 도면들이 획득될 수도 있다.
도 1은 본 출원의 실시예에서 제공한 인트라 리프레시 메커니즘의 모식도이다;
도 2는 본 출원의 실시예에서 제공한 인트라 리프레시 메커니즘을 사용한 후의 시퀀스의 모식도이다;
도 3은 본 출원의 실시예에서 제공한 인트라 리프레시 메커니즘을 사용한 후의 시퀀스의 모식도이다;
도 4는 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기초한 인코딩 방법 흐름도이다;
도 5는 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘 중 인트라 리프레시 프레임의 영역 분포 모식도이다;
도 6은 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법 흐름도이다;
도 7은 본 출원의 실시예에서 제공한 디코딩 장치의 구조 모식도이다;
도 8은 본 출원의 실시예에서 제공한 인코딩 장치의 구조 모식도이다;
도 9는 본 출원의 실시예에서 제공한 단말의 구조 모식도이다.

본 발명의 실시예의 목적, 기술적 해결수단 및 장점이 보다 뚜렷하도록 하기 위하여 이하 도면과 결부하여 본 발명의 실시예 방식에 대해 더 상세하게 설명한다.

본 출원의 실시예에서 제공한 방법에 대해 해석 설명을 하기 전에 먼저 본 출원의 실시예에 관한 응용 시나리오에 대해 해석 설명한다.

비디오 코딩 중, 기준 참조(base reference)로 사용되는 픽처를 I 픽처이라고 지칭하고, I 픽처를 키 프레임이라고도 지칭한다. I 픽처를 인코딩할 경우, 압축률이 낮고, 목적은 후속적인 디코딩 시 직접 I 픽처에 기초한 비트 스트림을 디코딩하여 I 픽처를 얻고, 따라서 기타 픽처를 참조할 필요가 없다. 인코딩 시, 이전 픽처와 현재 픽처 사이의 차이값에 기초하여 인코딩을 수행한 픽처를 P 픽처이라고 지칭하고, 인코딩된 P 픽처의 비트 스트림에 휴대된 것은 이전 픽처와 현재 픽처 사이의 차이값이고, 이는 후속의 I 픽처, 디코딩하여 얻은 이전 프픽처와 비트 스트림 중의 차이값에 기초하여 현재 픽처를 디코딩하여 얻는 데에 편리하다. 또한, 인코딩 시, 이전 픽처와 현재 픽처 사이의 차이값, 및 현재 픽처와 다음 픽처 사이의 차이값에 기초하여 인코딩을 수행한 픽처를 B 픽처이라고 지칭하고, 인코딩된 B 픽처의 비트 스트림에 휴대된 것은 이전 픽처와 현재 픽처 사이의 차이값 및 현재 픽처와 다음 픽처 사이의 차이값이며, 이는 후속의 I 픽처에 기초하여 디코딩하여 얻은 이전 픽처와 다음 픽처 및 비트 스트림 중의 차이값에 기초하여 현재 픽처를 디코딩하여 얻는 데에 편리하다. 인코딩된 하나의 I 픽처 및 여러 개의 B 픽처 또는 여러 개의 P 픽처로 구성된 시퀀스를 하나의 픽처 시퀀스(시퀀스)라고 지칭한다. 당해 시퀀스를 IPPP 또는 IBBB 시퀀스라고도 지칭한다.

디코딩측이 랜덤 액세스 방식을 통해 IPPP 또는 IBBB 시퀀스를 액세스할 경우, 일반적인 경우 I 픽처의 비트 레이트는 P 픽처 또는 B 픽처의 비트 레이트보다 훨씬 커서, I 픽처의 디코딩 시간이 P 픽처 또는 B 픽처의 디코딩 시간보다 길다. 특히 취약한 네트워크 환경에서 I 픽처를 디코딩하는 데에 필요한 시간이 더 길며, 따라서 비디오 동결(video freezing) 현상의 발생을 초래할 수 있다.

I 픽처를 디코딩하는 데에 필요한 시간이 너무 길어서 비디오 동결 현상이 나타나는 것을 피하기 위해, 현재 업계에서는 인트라 리프레시 메커니즘을 제공한다. 당해 인트라 리프레시 메커니즘의 핵심 사상 논리는: I 픽처의 비트 레이트를 여러 개의 P 픽처에 분산시키고, 각 P 픽처의 하나의 작은 영역의 인코딩 모드가 강제 인트라 모드이고, 기타 영역의 인코딩 모드가 인터 모드를 사용하는 것을 허락하며, 최종적으로 각 P 픽처의 비트 레이트가 모두 기존의 I 픽처보다 많이 작다. 동시에, 인트라 리프레시 메커니즘은 상이한 P 픽처의 강제 인트라 영역이 서로 교차하지 않는 것을 요구하며, 이러한 방법으로 여러 개의 P 픽처를 거친 후, 강제 인트라 모드에 기초하여 전체 이미지 영역을 리프레시할 수 있다.

아래 설명의 편리를 위해, 아래 인트라 리프레시 메커니즘의 원리에 대해 상세하게 설명한다.

도 1은 본 출원의 실시예에서 제공한 여러 개 중 하나의 인트라 리프레시 메커니즘의 모식도이다. 도 1 중의 인트라 리프레시 메커니즘은 I 픽처의 비트 레이트를 4개의 P 픽처에 분산시키는 것이고, 각 P 픽처에는 모두 하나의 강제 인트라 영역이 구비된다. 여기서 ①로 표기된 영역이 강제 인트라 영역이다. ②로 표기된 영역은 인코딩 순서 중 이전 프레임의 리프레시된 영역이며, 당해 영역의 인코딩 모드는 인터 모드의 사용을 허락하기에, 현재 프레임의 인터 영역이라고도 지칭한다. ③로 표기된 영역은 리프레시되지 않은 영역이며, 당해 영역의 인코딩 모드는 인터 모드의 사용을 허락한다.

도 1에 도시된 바와 같이 완전한 픽처를 4개의 강제 인트라 영역으로 분할하고, 리프레시 주기 내에 4개의 인트라 리프레시 프레임이 포함되며, 각각 도 1 중 왼쪽으로부터 오른쪽으로의 4개 픽처이다. 리프레시 주기 내의 제1 픽처에 대해, 당해 픽처는 하나의 인트라 리프레시 영역과 리프레시되지 않은 영역을 포함하고, 제1 픽처가 리프레시 주기 내의 제1 픽처이기에, 제1 픽처 내의 리프레시된 영역은 단지 현재 픽처 내의 강제 인트라 영역만 포함한다. 리프레시 주기 내의 제2 픽처에 대해, 당해 픽처는 제1 픽처 내의 리프레시된 영역, 하나의 인트라 리프레시 영역 및 리프레시되지 않은 영역을 포함하고, 제2 픽처 중 제1 프레임의 리프레시된 영역과 현재 픽처에 포함된 인트라 리프레시 영역을 합병한 후 제2 픽처의 리프레시된 영역이라고 통칭한다. 리프레시 주기 내의 제3 픽처에 대해, 당해 픽처는 제2 픽처 내의 리프레시된 영역, 하나의 인트라 리프레시 영역 및 리프레시되지 않은 영역을 포함하고, 제3 프레임 중 제2 픽처의 리프레시된 영역과 현재 픽처에 포함된 인트라 리프레시 영역을 통합한 후 제3 픽처의 리프레시된 영역이라고 통칭한다. 리프레시 주기 내의 제4 픽처에 대해, 당해 픽처는 제3 픽처 내의 리프레시된 영역, 하나의 인트라 리프레시 영역을 포함하고, 제4 픽처 중 제3 픽처의 리프레시된 영역과 현재 픽처에 포함된 인트라 리프레시 영역을 통합한 후 제4 픽처의 리프레시된 영역이라고 통칭한다. 앞에서 완전한 픽처를 4개의 강제 인트라 영역으로 분할하였기에, 제4 픽처에는 리프레시되지 않은 영역이 없다.

또한, 리프레시되지 않은 영역을 더티(dirty) 영역이라고도 지칭하며, 인코딩 순서 중 이전 프레임의 리프레시된 영역과 현재 프레임의 강제 인트라 영역을 합병한 후 현재 프레임의 클린(clean) 영역이라고도 지칭할 수 있으며, 양자의 경계선은 도 1 중의 경계선이다. 본 출원의 실시예에 관한 가상 경계도 clean 영역과 dirty 영역의 경계선을 구분하는 데에 사용되며, 단지 경계선의 설정 방식이 더 유연한 바, 파선(broken line)의 경계선일 수 있으며, 수직 경계선에 한정되지 않는다. 본 출원의 실시예에서, 임의의 인트라 리프레시 프레임에 대해, 당해 인트라 리프레시 프레임의 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계는 리프레시된 영역과 리프레시되지 않은 영역 사이의 경계선을 가리키며, 당해 경계선도 당해 인트라 리프레시 프레임의 clean 영역과 dirty 영역 사이의 경계선이다.

도 2는 본 출원의 실시예에서 제공한 여러 개 중 하나의 인트라 리프레시 메커니즘을 사용한 후의 시퀀스의 모식도이다. 도 2에 도시된 바와 같이 원본 픽처 시퀀스(도 2에서 원본 시퀀스라고 약칭함) 중의 I2(I 픽처), P8(P 픽처), P9(P 픽처), P10(P 픽처) 4개의 프레임을 4개의 인트라 리프레시 프레임으로 대체하고, 이 4개의 인트라 리프레시 프레임을 X1, X2, X3, X4로 표기하여, 인트라 리프레시 메커니즘에 기초한 시퀀스(도 2에서 인트라 리프레시 시퀀스라고 약칭함)를 얻는다. 이 4개의 인트라 리프레시 프레임은 모두 하나의 강제 인트라 영역을 구비하고, 기타 영역의 인코딩 모드가 인터 모드를 사용하는 것을 허락하며, 따라서 이 4개의 인트라 리프레시 프레임을 4개의 "큰(large) P 픽처"으로 간주할 수 있으며, 비트 레이트는 기존의 I2 프레임 비트 레이트의 1/4에 가깝다. 또한, 이 4개의 인트라 리프레시 프레임은 IR 프레임이라고도 약칭할 수 있다.

도 2에 도시된 시퀀스 중, 랜덤 액세스 방식에서, 원본 시퀀스 중의 I2 프레임이 하나의 랜덤 액세스 포인트라고 가정할 경우, 당해 I2 프레임 이후의 프레임이 독립적으로 디코딩할 수 있기에 P8 프레임은 I2 프레임만 참조할 수 있고, P7 프레임을 참조할 수 없다. 하지만 인트라 리프레시 메커니즘에 기초한 시퀀스(도 2에서 인트라 리프레시 시퀀스라고 약칭함) 중, X1 프레임은 하나의 랜덤 액세스 포인트이고, X1 프레임 내의 리프레시되지 않은 영역 내의 인터 영역이 P7 프레임을 참조할 수 있지만, 정확하게 디코딩할 수 없다(왜냐면 랜덤 액세스 시 P7 프레임을 수신하지 못했을 수 있기 때문임). 유사하게, X2 프레임, X3 프레임의 리프레시되지 않은 영역도 정확하게 디코딩하지 못할 수 있다. X1 내지 X4 프레임을 모두 리프레시한 후, 이때 X4 프레임 내의 리프레시된 영역 내의 인터 영역은 X1 내지 X3의 강제 인트라 영역의 비트 스트림에 기초하여 디코딩하여 얻을 수 있고, X4 프레임 내의 리프레시된 영역 내의 강제 인트라 영역은 강제 인트라 디코딩 모드에 기초하여 얻을 수 있으며, 따라서 리프레시되지 않은 영역이 없는 X4 프레임은 완전하고 정확하게 디코딩될 수 있다. 따라서, 도 2 중의 X1, X2, X3, X4 프레임은 하나의 리프레시 주기이고, 리프레시 주기 내의 오직 마지막 프레임만이 완전하고 정확하게 디코딩될 수 있는 바, 당해 프레임을 복구 포인트(Recovery Point)라고 지칭한다.

설명해야 할 것은, 랜덤 액세스의 경우, 복구 포인트 및 그 뒤의 픽처만이 사용자에게 디스플레이되고, 랜덤 액세스 포인트가 소재하는 리프레시 주기 내의 기타 픽처는 정확하게 디코딩되지 못할 수 있기에 모두 디스플레이하지 않는다. 비랜덤 액세스의 경우, 모든 픽처는 완전하고 정확하게 디코딩될 수 있기에, 모든 픽처는 사용자에게 디스플레이된다.

또한, 인트라 리프레시 메커니즘에 기초하여 인코딩된 비트 스트림의 디코딩 기능을 확보하기 위해, 현재 인트라 리프레시 메커니즘은 디코딩 모드 중의 인트라 모드/인터 모드 및 루프 필터링에 대해 아래와 같은 조건을 제한한다:

조건 1: 임의의 인트라 리프레시 프레임에 대해, 당해 인트라 리프레시 프레임의 리프레시된 영역의 블록은 동일한 리프레시 주기 내의 기타 인트라 리프레시 프레임의 리프레시된 영역만 참조하여 디코딩을 수행할 수 있으며, 기타 인트라 리프레시 프레임의 리프레시되지 않은 영역을 참조하여 디코딩할 수 없으며; TMVP(temporal motion vector prediction, 시간적 모션 벡터 예측) 메커니즘 중의 현재 블록의 참조 프레임에서의 동일 위치의 블록(co-located block)도 참조 프레임의 리프레시되지 않은 영역에 놓이면 안되고, 여기서, 동일 위치의 블록은 참조 프레임 중 현재 블록과 동일한 위치에 위치한 픽처 블록을 가리키는 바, 즉, 현재 픽처의 픽처 블록의 MV(motion vector, 모션 벡터) 정보가 가리키는 영역이 참조 프레임의 리프레시되지 않은 영역에 놓이면 안 된다. 설명해야 할 것은, 본 출원의 실시예에서 현재 블록과 현재 픽처 블록은 동일한 개념이며, 설명의 편의를 위해 현재 픽처 블록을 현재 블록이라고 지칭한다.

조건 2: 임의의 인트라 리프레시 프레임에 대해, 당해 인트라 리프레시 프레임 내의 리프레시되지 않은 영역의 블록을 디코딩 시 참조 제한이 없다.

조건 3: 시퀀스 중 인트라 리프레시 프레임이 아닌 픽처에 대해, 당해 픽처의 블록은 소재하는 랜덤 액세스 주기 내의 인트라 리프레시 프레임의 리프레시된 영역을 참조하여 디코딩을 수행하는 것을 허락하지만, 소재하는 랜덤 액세스 주기 내의 인트라 리프레시 프레임의 리프레시되지 않은 영역을 참조하여 디코딩을 수행하면 안되고; TMVP 메커니즘 중의 현재 블록의 참조 프레임에서의 동일 위치의 블록이 참조 프레임의 리프레시되지 않은 영역에 놓여서도 안 된다.

조건 4: 임의의 인트라 리프레시 프레임에 대해, 루프 필터링은 당해 인트라 리프레시 프레임의 리프레시된 영역과 리프레시되지 않은 영역 사이의 경계선을 넘어서는(cross) 안 되는 바, 즉 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계에 대해 루프 필터링 조작을 수행하지 않는다.

현재 VVC(Versatile Video Coding, 다용도 비디오 부호화) 표준 중의 GDR(Gradual Decoding Refresh, 점진적 디코딩 리프레시) 기술은 일종의 인트라 리프레시 메커니즘을 제공한다. 당해 인트라 리프레시 메커니즘의 구체적인 내용은 아래와 같다.

먼저 수직 분할 방식을 통해 리프레시된 영역과 리프레시되지 않은 영역을 분할한다. 수직 분할 방식 중, 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계는 픽처 좌표계 중의 Y축에 평행되는 하나의 경계선이다. 경계를 최소 CU(coding unit, 코딩 유닛)의 너비 높이(CU의 최소가 8픽셀임)와 일치하게 분할하는 바, 즉 리프레시된 영역의 너비는 최소 CU의 너비의 정수배이고, 리프레시된 영역의 높이는 인트라 리프레시 프레임의 픽처 높이이다.

다음, 상이한 인트라 리프레시 프레임 내의 강제 인터 영역을 등거리로 분할하고, 또한 강제 인터 영역의 너비 = 픽처의 총 너비/리프레시 주기이다. 리프레시 주기는 정확하게 디코딩하여 완전한 픽처를 얻는 데에 필요한 인트라 리프레시 프레임의 수량인바, 예컨대, 도 3 중의 리프레시 주기는 6이다. 여기서, 리프레시 주기는 인코딩측에서 설정할 수 있는바, 예컨대, 인코딩측은 인트라 리프레시 프레임의 비트 스트림의 픽처 헤더 파라미터 recovery_poc_cnt를 통해 당해 리프레시 주기를 설정할 수 있으며, 도 3에 도시된 시퀀스에 대해, recovery_poc_cnt=6으로 설정하여, 당해 인트라 리프레시 프레임이 소재하는 리프레시 주기가 6이 되게 지시할 수 있다. 또한, 리프레시 순서는 기본적으로 왼쪽에서 오른쪽이며, 당해 리프레시 순서는 비트 스트림 중 명확하게 지시할 필요가 없으며, 디코딩측은 디폴트로 왼쪽에서 오른쪽의 리프레시 순서에 따라 각 인트라 리프레시 프레임을 디코딩한다.

또한, 임의의 픽처에 대해, 인코딩측은 또한 픽처의 비트 스트림의 픽처 헤더 파라미터 gdr_pic_flag에 기초하여 현재 픽처가 인트라 리프레시 프레임인지 여부를 식별할 수 있다. 예컨대, gdr_pic_flag=1일 경우, 현재 픽처가 인트라 리프레시 프레임임을 가리키며, gdr_pic_flag=0일 경우, 현재 픽처가 인트라 리프레시 프레임이 아님을 가리킨다.

또한, VCC 표준 중의 인트라 리프레시 메커니즘은 마찬가지로 상술한 조건1 내지 조건4 이 4개의 제한 조건을 포함하며, 여기서 더 이상 설명하지 않는다.

상술한 VCC 표준 중의 인트라 리프레시 메커니즘 중의 강제 인트라 영역의 분할 방식은 유연하지 못하며, 단지 등거리 수직 막대형 영역일 수 밖에 없으며, 적응적으로 픽처 내용에 기반하여 영역을 분할할 수 없다. 또한, VCC 표준 중의 인트라 리프레시 메커니즘은 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계를 넘는(across) 루프 필터링을 허락하지 않으므로, 당해 가상 경계 상의 픽처 품질이 낮다.

상술한 VCC 표준 중의 인트라 리프레시 메커니즘 중 출현된 문제점에 기초하여, 본 출원의 실시예는 일종의 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 및 디코딩 방법을 제공하는 바, 당해 방법은 유연한 강제 인트라 영역 분할 방법을 제공하고, 분할 방식은 인코딩측에서 설정할 수 있으며, 본 출원의 실시예를 통해 제공한 방법은 한 측면으로는 픽처 내용에 기반하여 적응적으로 리프레시된 영역과 리프레시되지 않은 영역으로 분할함으로써, 강제 인트라 영역의 분할 유연성을 향상시킨다. 또한, 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계가 되도록 픽처 내의 오브젝트 경계와 중첩되게 함으로써, 가상 경계에 대해 루프 필터링을 하지 못함으로 인한 디코딩 후의 픽처 품질에 대한 영향을 피할 수도 있다.

본 출원의 실시예에서 제공한 방법이 픽처 내용에 기반하여 적응적으로 리프레시된 영역과 리프레시되지 않은 영역을 분할할 수 있으므로, 본 출원의 실시예에 관한 인트라 리프레시 프레임은 적응적 인트라 리프레시 프레임이라고도 지칭할 수 있으며, 아래 설명의 편의를 위해, 본 출원의 실시예에 관한 적응적 인트라 리프레시 프레임을 인트라 리프레시 프레임 또는 리프레시 프레임이라고 지칭한다.

아래 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 및 디코딩 방법에 대해 상세하게 해석 설명한다.

도 4는 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법을 제공한다. 도 4에 도시된 바와 같이 당해 방법은 아래 몇 개 단계를 포함한다.

단계 401: 인코딩측은 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한다.

사용자가 비디오를 액세스하는 과정 중, 일반적으로 랜덤 액세스의 장면이 존재한다. 랜덤 액세스의 장면 중, 디코딩측이 랜덤 액세스 포인트 이전의 비트 스트림을 획득하지 못하여, 랜덤 액세스 포인트 이후의 비트 스트림에 기초하여 디코딩해야 하며, 이러한 장면에서, 디코딩측의 정확한 디코딩을 구현하기 위해, 랜덤 액세스 포인트 이후의 비트 스트림을 필요로 하여 적응적 인트라 리프레시 기술을 지원한다.

상술한 장면에 기초하여, 인코딩측은 아래 방식을 통해 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정할 수 있다: 만약 현재 프레임이 랜덤 액세스 포인트이면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지만, 인코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다. 만약 상기 현재 프레임이 랜덤 액세스 복구 포인트이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정한다. 만약 상기 현재 프레임이 랜덤 액세스 포인트와 랜덤 포인터에 액세스한 복구 포인트 사이의 임의의 픽처이면, 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정한다.

현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 경우, 인코딩측은 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 결정할 필요가 있으며, 따라서 후속의 현재 프레임의 비트 스트림을 인코딩할 때, 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역의 가상 경계의 위치를 가리키는 가상 경계 위치 정보가 비트 스트림에 인코딩되는지를 구분할 수 있다.

이해의 편의를 위해, 여기서 본 출원의 실시예에서 제공한 가상 경계에 대해 해석 설명한다.

상술한 가상 경계는 현재 프레임 내의 리프레시된 영역의 경계선일 수도 있고, 현재 프레임 내의 리프레시되지 않은 영역의 경계선일 수도 있으며, 분할된 리프레시된 영역과 리프레시되지 않은 영역의 분할 경계선일 수도 있다. 이 3가지 가상 경계의 예시는 실질적으로 동일하다.

후속의 실시예는 가상 경계가 분할된 리프레시된 영역과 리프레시되지 않은 영역의 분할 경계선인 것을 예로 들어 설명한다. 즉, 당해 가상 경계 위치 정보는 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계의 위치를 가리킬 수 있으며, 가상 경계의 위치는 구체적으로 당해 가상 경계의 현재 프레임의 수평 방향에서의 위치 및 당해 가상 경계의 현재 프레임의 수직 방향에서의 위치를 포함할 수 있다.

하지만 설명해야 할 것은, 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 방안 중의 가상 경계는 상술한 해석에 한정되지 않으며, 가상 경계는 상술한 3가지 가상 경계 예시 중 임의의 하나일 수 있다.

단계 402: 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 인코딩측은 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 현재 프레임의 가상 경계 위치 정보를 휴대하고, 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 가상 경계는 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용된다.

설명해야 할 것은, 확장 데이터는 인코딩된 현재 프레임의 비트 스트림 중 픽처 헤더와 픽처 데이터 사이에 위치한 한 세그먼트의 데이터를 가리킨다. 특정 표준에서, 확장 데이터는 SEI(supplemental enhancement information, 보충 강화 정보)라고도 지칭한다.

현재, 확장 데이터에 복수 개의 비디오 확장 아이디를 지시할 수 있으며, 각 비디오 확장 아이디 뒤에 계속하여 일부 디코딩 파라미터를 지시할 수 있다. 따라서, 본 출원의 실시예에서, 확장 데이터에 하나의 새로운 비디오 확장 아이디를 확장할 수 있으며, 확장된 비디오 확장 아이디는 적응적 인트라 리프레시 비디오 확장 아이디라고 지칭할 수 있다. 당해 적응적 인트라 리프레시 비디오 확장 아이디는 디코딩측에 확장 데이터에 추가로 가상 경계의 위치와 관련된 파라미터(즉 가상 경계 위치 정보)가 휴대되어 있음을 알림으로써, 후속의 디코딩측이 현재 프레임이 적응적 인트라 리프레시 메커니즘을 지원하는지 여부를 결정하고, 나아가 가상 경계 위치 정보에 기초하여 현재 프레임의 비트 스트림을 디코딩 하는 데에 편리하게 한다.

표 1은 본 출원의 실시예에서 제공한 확장 데이터의 시맨틱 요소 도식표(schematic table)이다. 표 1에 도시된 바와 같이 본 출원의 실시예에서 확장된 적응적 인트라 리프레시 비디오 확장 아이디는 "1110"이다. 이러한 장면에서, 확장 데이터에는 추가로 "air_parameters_extension" 필드를 더 포함하고, 당해 필드는 가상 경계의 위치에 관련된 파라미터를 가리키는 데에 사용된다.

[표 1]

설명해야 할 것은, 상술한 표 1은 본 출원의 실시예에서 제공한 확장 데이터의 시맨틱 요소의 선택 가능한 예시일 뿐, 본 출원의 실시예는 이러한 시맨틱 요소의 구체적인 표현 형식을 제한하지 않는다. 또한, 표 1중 기타 시맨틱 요소의 해석은 관련 표준을 참조할 수 있으며, 본 출원의 실시예는 이에 대해 한정하지 않는다.

한 가능한 실시예에서, 상술한 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함할 수 있다. 여기서, 제1 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키는 데에 사용되고, 제2 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 데에 사용된다.

이러한 경우, 표 2에 도시된 바와 같이, 상술한 표 1 중의 시맨틱 요소 air_parameters_extension( )는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함할 수 있다. 표 2는 본 출원의 실시예에서 제공한 다른 일종의 시맨틱 요소의 도식표이며, 표 2에 도시된 바와 같이 air_parameters_extension( )에는 extension_id(전술한 적응적 인트라 리프레시 비디오 확장 아이디를 식별하는 데에 사용됨), air_bound_x(제1 가상 경계 위치 정보를 식별하는 데에 사용됨), 및 air_bound_y(제2 가상 경계 위치 정보를 식별하는 데에 사용됨)가 포함된다.

[표 2]

설명해야 할 것은, 상술한 가상 경계 위치 정보 실시예는 단지 예를 들어 설명하는 데에 사용되며, 본 출원의 실시예에서 제공한 가상 경계 위치 정보의 기능을 제한하지 않으며, 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계의 현재 프레임의 수평 방향에서의 위치 및 당해 가상 경계의 현재 프레임의 수직 방향에서의 위치를 가리킬 수 있는 표기 정보는, 모두 본 출원의 실시예에서 제공한 가상 경계 위치 정보의 범위 내에 속한다.

현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한 후, 현재 프레임의 비트 스트림을 인코딩 할 수 있다. 구체적으로, 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만, 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값 또는 제2 가상 경계 위치 정보의 값이 0이다.

상응하게, 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디와 상기 현재 프레임의 가상 경계 위치 정보를 휴대하고, 또한 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값이 0보다 크고, 또한 제2 가상 경계 위치 정보의 값도 0보다 크다.

예시적으로, 상술한 제1 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수평 방향에서의 횡좌표이고, 제2 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수직 방향에서의 종좌표이다. 이러한 장면에서, 현재 프레임 내의 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로, 너비가 x좌표이고, 높이가 y좌표인 직사각형 영역을 가리키고, 현재 프레임 내의 리프레시되지 않은 영역은 현재 프레임 내의 리프레시된 영역을 제외한 기타 영역을 가리킨다.

또 예시적으로, 제1 가상 경계 위치 정보의 값은 가상 경계의 현재 프레임의 수평 방향에서 차지하는 너비가 몇 개의 LCU의 너비인지를 가리킬 수 있다. 제2 가상 경계 위치 정보의 값은 가상 경계의 현재 프레임의 수직 방향에서 차지하는 높이가 몇 개의 LCU의 높이인지를 가리킬 수 있다.

이때, 표 2 중의 air_bound_x는 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계의 픽처에서의 횡좌표를 표시하고, 또한 당해 횡좌표는 LCU의 너비를 단위로 이용한다. 표 2 중의 air_bound_y는 리프레시된 영역과 리프레시되지 않은 영역 사이의 가상 경계의 픽처에서의 종좌표를 표시하고, 당해 종좌표도 LCU의 높이를 단위로 이용한다.

예컨대, 제1 가상 경계 위치 정보의 값이 2이고, 제2 가상 경계 위치 정보의 값이 3이면, 현재 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로, 2배의 LCU의 너비를 x좌표로 이용하고, 3배의 LCU의 높이를 y좌표로 이용한 직사각형 영역을 가리킨다.

이러한 장면에서, 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 제2 가상 경계 위치 정보의 정밀도는 하나의 LCU의 높이이다.

설명해야 할 것은, 상술한 것은 본 출원의 실시예에서 제공한 경계 정밀도를 예시적으로 설명한 선택 가능한 실시예인 바, 본 출원의 실시예에 관한 경계 정밀도의 범위를 한정하지 않는다. 여기서, 경계 정밀도는 리프레시된 영역의 너비 정밀도 및 높이 정밀도를 포함한다. 여기서, 리프레시된 영역의 너비 정밀도는 리프레시된 영역의 최소 너비를 가리키고, 리프레시된 영역의 실제 너비는 일반적으로 당해 너비 정밀도의 정수배로 설정한다. 리프레시된 영역의 높이 정밀도는 리프레시된 영역의 최소 높이를 가리키고, 리프레시된 영역의 실제 높이는 일반적으로 당해 높이 정밀도의 정수배로 설정한다.

도 5는 본 출원의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘 중 인트라 리프레시 프레임의 영역 분포 모식도다. 도 5에 도시된 바와 같이 인트라 리프레시 프레임의 리프레시된 영역은 좌표(0, 0)를 좌측 상단 모서리로 이용하고, 너비가 x좌표 AirBoundX이고, 높이가 y좌표 AirBoundY인 직사각형 영역을 가리키고, 당해 인트라 리프레시 프레임의 리프레시되지 않은 영역은 당해 인트라 리프레시 프레임 내의 리프레시된 영역을 제외한 기타 영역을 가리킨다.

즉, 도 5 중의 인트라 리프레시 프레임은 리프레시된 영역과 리프레시되지 않은 영역을 포함한다. 리프레시된 영역 단지 현재 픽처 또는 기타 픽처의 리프레시된 영역만을 이용하여 디코딩을 수행하고, 리프레시되지 않은 영역은 현재 픽처 또는 기타 픽처를 이용하여 디코딩을 수행할 수 있다.

도 5 중의 PictureWidthInLcu는 픽처 너비를 LCU의 너비로 나눈 후의 수치를 표시하고, PictureHeightInLcu는 픽처 높이를 LCU의 높이로 나눈 후의 수치를 표시한다. 도 5에 도시된 바와 같이 AirBoundX의 값은 PictureWidthInLcu보다 작거나 같아야 한다. AirBoundY의 값은 PictureHeightInLcu보다 작거나 같아야 한다.

또한, 상술한 AirBoundX와 AirBoundY는 디코딩 과정 중 시맨틱 중의 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보에 대해 설정한 두 개의 변수이다. 이 두 개의 변수는 여전히 픽처 내의 리프레시된 영역의 x좌표와 y좌표를 가리킨다. 구체적으로, 이 두 개 변수의 값은 후속의 디코딩측에서 상세하게 설명하며, 여기서 더 이상 설명하지 않는다.

또한, 만약 현재 프레임이 랜덤 액세스 복구 포인트이면, 인코딩측은 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 제1 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하며, 또한 제2 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정한다. 이러한 방법으로 후속의 디코딩측이 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보에 기초하여 현재 프레임이 랜덤 액세스 복구 포인트인지 여부를 판단할 수 있다.

상술한 바와 같이, 현재 프레임의 비트 스트림 중의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가하고, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 다음에 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 가리킴으로써, 리프레시 영역 분할의 유연성을 향상시키는 바, 즉 본 출원의 실시예는 확장 데이터를 통해 적응적으로 리프레시 영역을 분할하는 적응적 인트라 리프레시 메커니즘을 제공한다.

아래 도 6에 도시된 실시예를 통해 본 출원의 실시예에서 제공한 인트라 리프레시 메커니즘에 기초한 디코딩 방법을 상세하게 해석 설명한다. 도 6에 도시된 바와 같이 당해 디코딩 방법은 단계 601 내지 단계 603를 포함한다.

단계 601: 현재 프레임의 비트 스트림을 수신한다.

인코딩측은 도 4에 도시된 방법을 통해 인코딩을 완료한 후, 각 픽처의 비트 스트림을 디코딩측에 발송하고, 디코딩측이 도 6에 도시된 실시예에 기초하여 픽처의 디코딩을 완료한다.

단계 602: 만약 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 확장 데이터에 휴대된 가상 경계 위치 정보를 획득하고, 가상 경계 위치 정보는 가상 경계의 위치를 가리키는 데에 사용되며, 가상 경계는 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용된다.

적응적 인트라 리프레시 비디오 확장 아이디, 및 가상 경계 위치 정보의 관련 해석은 마찬가지로 인코딩측 실시예 중의 단계 401를 참조할 수 있으며, 여기서 더 이상 설명하지 않는다.

또한, 도 4에 도시된 실시예에 기초하여 알 수 있다시피, 만약 현재 프레임의 비트 스트림의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

예컨대, 표 2에 도시된 시맨틱 요소에 대해, 현재 프레임의 비트 스트림의 확장 데이터에서 "1110", 이 비디오 확장 아이디를 조회하지 못하면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하고, 이때 기타 디코딩 방식을 통해 현재 프레임의 비트 스트림을 디코딩할 수 있으며, 본 출원의 실시예는 적응적 인트라 리프레시 기술을 지원하지 않는 디코딩 과정에 대해 한정하지 않는다.

단계 603: 당해 가상 경계 위치 정보에 기초하여 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한다.

도 4에 도시된 실시예에 기초하여 알 수 있다시피, 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하는 경우, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않을 수도 있다. 따라서, 단계 602를 통해 가상 경계 위치 정보를 획득하는 단계는, 또한 가상 경계 위치 정보에 기초하여, 추가로 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 판단해야 한다.

도 4에 도시된 실시예에 기초하여 알 수 있다시피, 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함한다. 여기서, 제1 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키는 데에 사용되고, 제2 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 데에 사용된다.

이러한 장면에서, 단계 603의 구현 과정은: 만약 제1 가상 경계 위치 정보의 값 및 제2 가상 경계 위치 정보의 값이 모두 0보다 크면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정한다. 상응하게, 만약 제1 가상 경계 위치 정보의 값 또는 제2 가상 경계 위치 정보의 값이 0과 같으면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

예컨대, 표 1과 표 2에 도시된 시맨틱 요소에 대해, 확장 데이터를 디코딩할 경우, 비트 스트림에 적응적 인트라 리프레시 파라미터 air_bound_x와 air_bound_y이 존재하는지 여부를 판단한다. 만약 두 개의 파라미터가 존재하면, 도 5 중 현재 프레임의 AirBoundX의 값이 air_bound_x의 값과 같고, 현재 프레임의 AirBoundY의 값이 air_bound_y의 값과 같게 한다. 만약 이 두 개의 파라미터가 존재하지 않으면, 현재 프레임의 AirBoundX의 값이 0과 같고, 현재 프레임의 AirBoundY의 값이 0과 같게 한다.

여기서, 현재 프레임의 AirBoundX와 AirBoundY이미 앞에서 해석 설명하였으며, 여기서 더 이상 설명하지 않는다.

현재 프레임의 AirBoundX와 AirBoundY를 얻은 후, 만약 AirBoundX와 AirBoundY 모두가 0보다 크면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정한다. 만약 AirBoundX 및/또는 AirBoundY이 0과 같으면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

또한, 디코딩측은 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 디코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정할 경우, 현재 프레임을 랜덤 액세스 포인트로 결정한다. 여기서, 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것은 아래 몇 가지 경우: 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않는 경우; 또는 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지만 이전 프레임의 제1 가상 경계 위치 정보 및/또는 제2 가상 경계 위치 정보의 값이 0과 같은 경우가 존재한다.

상응하게, 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고, 또한 현재 프레임의 제1 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하는 것을 결정하며, 또한 현재 프레임의 제2 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정하면, 현재 프레임이 랜덤 액세스 복구 포인트인 것을 결정한다.

예컨대, 표 1과 표 2에 도시된 시맨틱 요소에 대해, 만약 현재 프레임의 확장 데이터에 파라미터air_bound_x와 air_bound_y가 존재하고, 또한 양자의 값이 모두 0보다 크며; 동시에, 현재 프레임 디코딩 순서 중 이전 프레임의 파라미터air_bound_x와 air_bound_y가 존재하지 않거나 또는 존재하지만 적어도 하나가 0과 같으면, 현재 프레임이 랜덤 액세스 포인트이고, 현재 프레임으로부터 랜덤 액세스를 수행하는 것을 허락한다.

만약 현재 프레임의 확장 데이터에 파라미터air_bound_x와 air_bound_y가 존재하고, 또한 air_bound_x의 값이 PictureWidthInLcu과 같고, air_bound_y의 값이 PictureHeightInLcu와 같으면, 현재 프레임이 복구 포인트이고, 현재 프레임 뒤의 각 프레임은 모두 정확하게 디코딩될 수 있다.

또한, 상기 현재 프레임이 랜덤 액세스에 사용될 경우, 상기 현재 프레임에 대해 디코딩을 수행하기 전에, 디코딩측은 하나의 유효한 시퀀스 헤더를 획득해야 하며, 당해 시퀀스 헤더에 휴대된 정보에 기반하여 상기 현재 프레임에 대해 디코딩을 수행한다.

여기서, 유효한 시퀀스 헤더는 비트 스트림 중 현재 프레임 비트 스트림 이전에 위치하고 또한 현재 프레임의 비트 스트림에 가장 가까운 시퀀스 헤더일 수도 있고, 시스템 층에서 수신된 시퀀스 헤더일 수도 있다. 시퀀스 헤더에 휴대된 정보는 비트 스트림의 프로파일, 레벨, 각종 기술의 이네이블(enable) 스위치 및 픽처의 해상도와 프레임률(frame rate) 등 디코딩 과정에 필요한 시퀀스 레벨 정보를 포함한다.

설명해야 할 것은, 본 출원의 실시예에서, 가상 경계의 위치 정보를 마음대로 지정할 수 있기에, 본 출원의 실시예는 수평, 수직 및 대각 리프레시를 지원하며, 리프레시 방향은 왼쪽에서 오른쪽으로일 수 있으며, 여기서 더 이상 설명하지 않는다.

상술한 바와 같이, 현재 프레임의 비트 스트림 중의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가하고, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 다음에 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 가리킴으로써, 리프레시 영역 분할의 유연성을 향상시키는 바, 즉 본 출원의 실시예는 확장 데이터를 통해 적응적으로 리프레시 영역을 분할하는 적응적 인트라 리프레시 메커니즘을 제공한다.

도 7은 본 출원의 실시예에서 제공한 디코딩 장치의 구조 모식도이다. 도 7에 도시된 바와 같이 당해 디코딩 장치(700)는 아래 몇 개 모듈을 포함한다:

수신 모듈(701), 현재 프레임의 비트 스트림을 수신한다;

처리 모듈(702), 만약 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 확장 데이터에 휴대된 가상 경계 위치 정보를 획득하고, 가상 경계 위치 정보는 가상 경계의 위치를 가리키는 데에 사용되며, 가상 경계는 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용된다;

처리 모듈(702)는, 또한 가상 경계 위치 정보에 기초하여 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 처리 모듈은 또한: 만약 현재 프레임의 비트 스트림의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 제1 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키는 데에 사용되고, 제2 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 데에 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 제1 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수평 방향에서의 x좌표이고, 제2 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수직 방향에서의 y좌표이며; 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로, 너비가 x좌표이고, 높이가 y좌표인 직사각형 영역을 가리키고, 리프레시되지 않은 영역은 현재 프레임 내의 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 처리 모듈은: 만약 제1 가상 경계 위치 정보의 값 및 제2 가상 경계 위치 정보의 값이 모두 0보다 크면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고; 만약 제1 가상 경계 위치 정보의 값 및/또는 제2 가상 경계 위치 정보의 값이 0과 같으면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 처리 모듈은 또한: 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 디코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 현재 프레임이 랜덤 액세스 포인트이고; 여기서, 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것은: 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않는 것; 또는 이전 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지만 이전 프레임의 제1 가상 경계 위치 정보 및/또는 제2 가상 경계 위치 정보의 값이 0과 같은 것을 포함한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 처리 모듈은 또한: 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고, 또한 현재 프레임의 제1 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하는 것을 결정하며, 또한 현재 프레임의 제2 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정하면, 현재 프레임이 랜덤 액세스 복구 포인트인 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 제2 가상 경계 위치 정보의 정밀도는 하나의 LCU의 높이이다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 처리 모듈은 또한: 현재 프레임이 랜덤 액세스에 사용될 경우, 현재 프레임에 대해 디코딩을 수행하기 전에, 하나의 유효한 시퀀스 헤더를 획득하고; 시퀀스 헤더에 휴대된 정보에 기반하여 현재 프레임에 대해 디코딩을 수행한다.

요약하면, 현재 프레임의 비트 스트림 중의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가하고, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 다음에 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 가리킴으로써, 리프레시 영역 분할의 유연성을 향상시키는 바, 즉 본 출원의 실시예는 확장 데이터를 통해 적응적으로 리프레시 영역을 분할하는 적응적 인트라 리프레시 메커니즘을 제공한다.

설명해야 할 것은: 상술한 실시예에서 제공한 디코딩 장치가 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법을 구현할 때, 단지 상술한 각 기능 모듈의 분할로 예를 들어 설명하였으며, 실제 응용에서는, 수요에 따라 상술한 기능을 상이한 기능 모듈에 할당하여 완성할 수 있는바, 즉 기기의 내부 구조를 상이한 기능 모듈로 분할하여 위에서 설명한 전부 또는 일부 기능을 완성한다. 또한, 상술한 실시예에서 제공한 디코딩 장치와 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법 실시예는 동일한 구상에 속하며, 그 구체적인 구현 과정은 방법 실시예를 참조하며, 여기서 더 이상 설명하지 않는다.

도 8은 본 출원의 실시예에서 제공한 인코딩 장치의 구조 모식도이다. 도 8에 도시된 바와 같이 당해 인코딩 장치(800)는 인코딩 모듈(801)을 포함하고, 인코딩 모듈은 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정한다. 인코딩 모듈은 또한, 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 현재 프레임의 가상 경계 위치 정보를 휴대하고, 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 가상 경계는 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고; 제1 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키는 데에 사용되며, 제2 가상 경계 위치 정보는 가상 경계의 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 데에 사용된다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 제1 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수평 방향에서의 x좌표이고, 제2 가상 경계 위치 정보가 가상 경계의 현재 프레임의 수직 방향에서의 y좌표이며; 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로, 너비가 x좌표이고, 높이가 y좌표인 직사각형 영역을 가리키고, 리프레시되지 않은 영역은 현재 프레임 내의 리프레시된 영역을 제외한 기타 영역을 가리킨다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 인코딩 모듈은 또한: 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하지 않으면, 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값 및/또는 제2 가상 경계 위치 정보의 값이 0이다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 만약 현재 프레임이 적응적 인트라 리프레시 기술을 지원하면, 현재 프레임의 확장 데이터에 휴대된 제1 가상 경계 위치 정보의 값이 0보다 크고, 또한 제2 가상 경계 위치 정보의 값도 0보다 크다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 인코딩 모듈은 또한: 만약 현재 프레임이 랜덤 액세스 포인트이면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 인코딩 순서 중 현재 프레임의 이전 프레임이 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 인코딩 모듈은 또한: 만약 현재 프레임이 랜덤 액세스 복구 포인트이면, 현재 프레임이 적응적 인트라 리프레시 기술을 지원하고, 또한 제1 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 현재 프레임의 오른쪽 경계와 같거나 초과하고, 또한 제2 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정한다.

상술한 장치에 기초하여, 일종의 가능한 실시예에서, 제1 가상 경계 위치 정보의 정밀도는 하나의 LCU의 너비이고, 제2 가상 경계 위치 정보의 정밀도는 하나의 LCU의 높이이다.

요약하면, 현재 프레임의 비트 스트림 중의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디 및 가상 경계 위치 정보를 새로 추가하고, 당해 가상 경계 위치 정보가 가상 경계의 위치를 가리킬 수 있고, 또한 당해 가상 경계가 적어도 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되므로, 인코딩측이 현재 프레임의 리프레시 영역을 분할할 경우, 실제 수요에 기초하여 임의로 당해 가상 경계를 설정할 수 있으며, 다음에 당해 가상 경계 위치 정보를 통해 당해 가상 경계의 위치를 가리킴으로써, 리프레시 영역 분할의 유연성을 향상시키는 바, 즉 본 출원의 실시예는 확장 데이터를 통해 적응적으로 리프레시 영역을 분할하는 적응적 인트라 리프레시 메커니즘을 제공한다.

설명해야 할 것은: 상술한 실시예에서 제공하는 인코딩 장치가 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법을 구현할 때, 단지 상술한 각 기능 모듈의 분할로 예를 들어 설명하였으며, 실제 응용에서는, 수요에 따라 상술한 기능을 상이한 기능 모듈에 할당하여 완성할 수 있는바, 즉 기기의 내부 구조를 상이한 기능 모듈로 분할하여 위에서 설명한 전부 또는 일부 기능을 완성한다. 또한, 상술한 실시예에서 제공한 인코딩 장치와 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법 실시예는 동일한 구상에 속하며, 그 구체적인 구현 과정은 방법 실시예를 참조하며, 여기서 더 이상 설명하지 않는다.

도 9는 본 출원의 실시예에서 제공한 단말(900)의 구조 블록도이다. 전술한 실시예에 관한 디코딩측 기기, 디코딩측, 디코딩 장치 및 인코딩측 기기, 인코딩측, 인코딩 장치는 모두 당해 단말을 통해 구현될 수 있다. 구체적으로, 당해 단말(900)은: 스마트폰, 테블릿, MP3 플레이어(Moving Picture Experts Group Audio Layer III), MP4(Moving Picture Experts Group Audio Layer IV) 플레이어, 노트북 또는 데스크톱 컴퓨터일 수 있다. 단말(900)은 또한 사용자 기기라고 지칭될 수도 있는 바, 휴대용 단말, 랩탑 단말, 데스크탑 단말 등 기타 명칭일 수 있다. 일반적으로, 단말(900)은 프로세서(901)와 메모리(902)를 포함한다.

프로세서(901)는 하나 또는 복수 개의 프로세싱 코어, 예컨대 4 코어 프로세서, 8 코어 프로세서 등을 포함할 수 있다. 프로세서(901)는 DSP(Digital Signal Processing), FPGA(Field－Programmable Gate Array), PLA(Programmable Logic Array) 중 적어도 한 가지 하드웨어 형식을 이용하여 구현될 수 있다. 프로세서(901)는 메인 프로세서와 코프로세서도 포함할 수 있는바, 메인 프로세서는 깨어있는 상태(awake state)의 데이터에 대해 처리를 수행하는 프로세서이고, CPU(Central Processing Unit)라고도 지칭하며; 코프로세서는 대기 상태의 데이터에 대해 처리를 수행하는 저전력 프로세서이다. 일부 실시예에서, 프로세서(901)에는 GPU(Graphics Processing Unit)가 집적될 수 있고, GPU는 스크린에 디스플레이될 내용의 랜더링과 드로잉을 담당한다. 일부 실시예에서, 프로세서(901)는 AI(Artificial Intelligence, 인공지능) 프로세서를 더 포함할 수 있는바, 당해 AI 프로세서는 머신러닝에 관한 컴퓨팅 조작을 처리한다.

메모리(902)는 하나 또는 복수 개의 컴퓨터 판독 가능 저장매체를 포함할 수 있으며, 당해 컴퓨터 판독 가능 저장매체는 비일시적인 것일 수 있다. 메모리(902)는 고속 랜덤 액세스 메모리, 및 비 휘발성 메모리, 예컨대 하나 또는 복수 개의 자기 디스크 저장 기기, 플래시 저장 기기를 더 포함할 수 있다. 일부 실시예에서, 메모리(902) 중의 비일시적 컴퓨터 판독 가능 저장매체는 적어도 하나의 명령을 저장하며, 당해 적어도 하나의 명령은 프로세서(901)에 의해 실행되어 본 출원 중 방법 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 방법을 구현한다.

일부 실시예에서, 단말(900)은 또한 선택 가능하게: 주변 기기 인터페이스(903)와 적어도 하나의 주변 기기를 포함할 수 있다. 프로세서(901), 메모리(902)와 주변 기기 인터페이스(903)사이는 버스 또는 신호선을 통해 연결될 수 있다. 각 주변 기기는 버스, 신호선 또는 회로 기판을 통해 주변 기기 인터페이스(903)와 연결된다. 구체적으로, 주변 기기는: RF 회로(904), 디스플레이(905), 카메라 컴포넌트(906), 오디오 회로(907), 포지셔닝 컴포넌트(908) 및 전원(909) 중 적어도 하나를 포함한다.

주변 기기 인터페이스(903)는 I/O(Input /Output, 입력/출력)와 관련된 적어도 하나의 주변 기기를 프로세서(901)와 메모리(902)에 연결시킬 수 있다. 일부 실시예에서, 프로세서(901), 메모리(902) 및 주변 기기 인터페이스(903)는 하나의 칩 또는 회로 기판에 집적될 수 있으며; 일부 기타 실시예에서, 프로세서(901), 메모리(902) 및 주변 기기 인터페이스(903) 중 임의의 하나 또는 두 개는 독립된 칩 또는 회로 기판에서 구현될 수 있으며, 본 실시예는 이에 대해 한정하지 않는다.

RF 회로(904)는 전자기 신호로도 불리는 RF(Radio Frequency) 신호를 수신하고 발송한다. RF 회로(904)는 전자기 신호를 통해 통신 네트워크 및 기타 통신 기기와 통신을 수행한다. RF 회로(904)는 전기 신호를 전자기 신호로 변환하여 발송하거나, 또는, 수신된 전자기 신호를 전기 신호로 변환한다. 선택 가능하게, RF 회로(904)는: 안테나 시스템, RF 트랜시버, 하나 이상의 증폭기, 튜너, 발진기, 디지털 신호 프로세서, 코덱 칩셋, 가입자 인식 모듈 카드 등을 포함한다. RF 회로(904)는 적어도 일종의 무선 통신 프로토콜을 통해 기타 단말과 통신을 수행할 수 있다. 당해 무선 통신 프로토콜은Metropolitan Area Network, 인트라넷, 다양한 세대의 이동 통신 네트워크(2G, 3G, 4G 및 5G), 근거리 무선 통신망 및/또는 WiFi(Wireless Fidelity, 무선 충실도) 네트워크를 포함하지만 이에 한정되지 않는다. 일부 실시예에서, RF 회로(904)는 또한 NFC(Near Field Communication, 근거리 무선 통신)에 관련된 회로도 포함할 수 있으며, 본 출원은 이에 대해 한정하지 않는다.

디스플레이(905)는 UI(User Interface)를 디스플레이한다. 당해 UI는 그래픽, 텍스트, 아이콘, 비디오 및 기타의 임의의 조합을 포함할 수 있다. 디스플레이(905)가 터치 스크린일 경우, 디스플레이(905)는 디스플레이(905)의 표면 또는 표면 상방의 터치 신호를 수집하는 능력을 더 구비한다. 당해 터치 신호는 제어 신호로서 프로세서(901)에 입력되어 처리될 수 있다. 이때, 디스플레이(905)는 가상 버턴 및/또는 가상 키보드(소프트 버턴 및/또는 소프트 키보드라고도 지칭함)를 더 제공할 수 있다. 일부 실시예에서, 디스플레이(905)는 하나일 수 있고, 단말(900)의 전면 패널에 배치되며; 다른 일부 실시예에서, 디스플레이(905)는 적어도 두 개일 수 있고, 각각 단말(900)의 상이한 표면에 배치되거나 또는 폴드식으로 설계될 수 있으며; 다른 일부 실시예에서, 디스플레이(905)는 플렉시블 스크린일 수 있고, 단말(900)의 구부러진 표면 또는 접이 면에 배치된다. 심지어, 디스플레이(905)는 비직사각형인 불규칙적인 도형, 즉 이형 스크린으로도 배치될 수 있다. 디스플레이(905)는 LCD(Liquid Crystal Display), OLED(Organic Light-Emitting Diode)등 재질로 제작될 수 있다.

카메라 컴포넌트(906)는 픽처 또는 비디오를 수집한다. 선택 가능하게, 카메라 컴포넌트(906)는 전면 카메라와 후면 카메라를 포함한다. 일반적으로, 전면 카메라는 단말의 전면 패널에 배치되고, 후면 카메라는 단말의 뒷면에 배치된다. 일부 실시예에서, 후면 카메라는 적어도 두 개이고, 각각 메인 카메라, 피사계 심도 카메라(Depth-of-field camera), 광각 카메라, 텔레포토 카메라 중 임의의 하나로서, 메인 카메라와 피사계 심도 카메라를 융합을 구현하여 배경 블러링(blurring) 기능, 메인 카메라와 광각 카메라를 융합하여 파라노마 촬영 및 VR(Virtual Reality, 가상 현실) 촬영 기능 또는 기타 융합 촬영 기능을 구현한다. 일부 실시예에서, 카메라 컴포넌트(906)는 플래시를 더 포함할 수 있다. 플래시는 싱글 컬러 온도 플래시일 수도 있고, 듀얼 컬러 온도 플래시일 수도 있다. 듀얼 컬러 온도 플래시는 싱글 컬러 온도 플래시일 수도 있고, 듀얼 컬러 온도 플래시일 수도 있다. 듀얼 컬러 온도 플래시는 웜(warm) 플래시와 쿨(cool) 플래시의 조합을 가리키며, 상이한 컬러 온도에서의 광 보상(light compensation)에 사용될 수 있다.

오디오 회로(907)는 마이크로폰과 스피커를 포함할 수 있다. 마이크로폰는 사용자 및 환경의 음파를 수집하고, 또한 음파를 전기 신호로 변환하여 프로세서(901)에 입력하여 처리를 수행하거나, 또는 RF 회로(904)에 입력하여 음성 통신을 구현한다. 스테레오 수집 또는 소음 감소의 목적에 따라 마이크로폰은 복수 개일 수 있고, 각각 단말(900)의 상이한 부위에 배치될 수 있다. 마이크로폰은 또한 어레이 마이크로폰 또는 전방향(Omnidirectional) 수집형 마이크로폰일 수도 있다. 스피커는 프로세서(901) 또는 RF 회로(904)에서 비롯된 전기 신호를 음파로 변환한다. 스피커는 전통적인 박막 스피커일 수도 있고, 압전 세라믹 스피커일 수도 있다. 스피커가 압전 세라믹 스피커일 경우, 전기 신호를 인류가 들을 수 있는 음파로 변환할 수 있을 뿐만 아니라, 전기 신호를 인류가 들을 수 없는 음파로 변환하여 거리 측정 등 용도에 사용될 수도 있다. 일부 실시예에서, 오디오 회로(907)는 헤드폰 잭을 더 포함할 수도 있다.

포지셔닝 컴포넌트(908)는 단말(900)의 현재 지리적 위치를 포지셔닝하여, 네비게이션 또는 LBS(Location Based Service)를 구현한다. 포지셔닝 컴포넌트(908)는 미국의 GPS(Global Positioning System), 중국의 베이더우(BeiDou) 시스템, 러시아의 글로나스(GLONASS) 시스템 또는 유럽 연합의 갈릴레오 시스템의 포지셔닝 컴포넌트일 수 있다.

전원(909)은 단말(900) 중의 각 컴포넌터에 전원을 제공한다. 전원(909)은 교류전, 직류전, 일회용 전지 또는 충전 가능한 전지일 수 있다. 전원(909)에 충전 가능한 전지가 포함될 경우, 당해 충전 가능한 전지는 유선 충전 또는 무선 충전을 지원할 수 있다. 당해 충전 가능한 전지는 또한 고속 충전을 지원할 수도 있다.

일부 실시예에서, 단말(900)은 하나 또는 복수 개의 센서(910)를 더 포함한다. 당해 하나 또는 복수 개의 센서(910)는: 가속도 센서(911), 자이로 센서(912), 압력 센서(913), 지문 센서(914), 광학 센서(915) 및 근접각 센서(916)를 포함하나 이에 한정되지 않는다.

가속도 센서(911)는 단말(900)이 구축한 좌표계의 3개 좌표축에서의 가속도 크기를 검출할 수 있다. 예컨대, 가속도 센서(911)는 중력 가속도의 3개 좌표축에서의 분량을 검출할 수 있다. 프로세서(901)는 가속도 센서(911)에 의해 수집된 중력 가속도 신호에 기반하여 디스플레이(905)를 제어하여 횡방향 뷰 또는 종방향 뷰로 UI의 디스플레이를 수행한다. 가속도 센서(911)는 게임 또는 사용자의 모션 데이터의 수집에 사용될 수도 있다.

자이로 센서(912)는 단말(900)의 기기 방향 및 회전 각도를 검출할 수 있으며, 자이로 센서(912)는 가속도 센서(911)와 함께 협조하여 사용자의 단말(900)에 대한 3D 모션을 수집할 수 있다. 프로세서(901)는 자이로 센서(912)에 의해 수집된 데이터에 기반하여 이하 기능: 모션 센싱(예컨대 사용자의 경사 조작에 기반하여 UI를 변경), 촬영 시의 픽처 안정성, 게임 컨트롤 및 관성 항법을 구현할 수 있다.

압력 센서(913)는 단말(900)의 사이드 프레임 및/또는 디스플레이(905)의 하층에 배치될 수 있다. 압력 센서(913)가 단말(900)의 측면 프레임에 배치될 경우, 사용자의 단말(900)에 대한 그립핑 신호(gripping signal)를 검출할 수 있으며, 프로세서(901)가 압력 센서(913)에 의해 수집된 그립 신호에 기반하여 좌우 손의 인식 또는 단축 조작(shortcut operation)을 수행할 수 있다. 압력 센서(913)가 디스플레이(905)의 하층에 배치될 경우, 프로세서(901)가 사용자의 디스플레이(905)에 대한 압력 조작에 기반하여 UI에서의 조작 가능한 컨트롤에 대해 제어를 수행한다. 조작 가능한 컨트롤은 버튼 컨트롤, 스크롤바 컨트롤, 아이콘 컨트롤, 메뉴 컨트롤 중 적어도 하나를 포함한다.

지문 센서(914)는 사용자의 지문을 수집하며, 프로세서(901)가 지문 센서(914)에 의해 수집된 지문에 기반하여 사용자의 신분을 인식하거나, 또는, 지문 센서(914)가 수집된 지문에 기반하여 사용자의 신분을 인식한다. 인식된 사용자의 신분이 믿을 수 있는 신분일 경우, 프로세서(901)는 당해 사용자에게 권한을 부여하여 관련된 민감한 조작을 수행하게 하고, 당해 민감한 조작은 화면 잠금 해제, 암호화 정보 확인, 소프트웨어 다운로드, 지불 및 설정 변경 등을 포함한다. 지문 센서(914)는 단말(900)의 정면, 배면 또는 측면에 배치될 수 있다. 단말(900)에 물리 버튼이 배치되어 있거나 또는 공급 업체 Logo가 배치되어 있을 경우, 지문 센서(914)는 물리 버튼 또는 공급 업체 Logo와 집적될 수 있다.

광학 센서(915)는 환경 광 강도를 수집한다. 하나의 실시예에서, 프로세서(901)는 광학 센서(915)에 의해 수집된 환경 광 강도에 기반하여, 디스플레이(905)의 디스플레이 밝기를 제어할 수 있다. 구체적으로, 환경 광 강도가 높을 경우, 디스플레이(905)의 디스플레이 밝기를 높이고; 환경 광 강도가 낮을 경우, 디스플레이(905)의 디스플레이 밝기를 낮춘다. 다른 하나의 실시예에서, 프로세서(901)는 또한 광학 센서(915)에 의해 수집된 환경 광 강도에 기반하여 카메라 컴포넌트(906)의 촬영 파라미터를 동적으로 조정할 수도 있다.

근접각 센서(916)는 거리 센서라고도 불리며, 이는 일반적으로 단말(900)의 전면 패널에 배치된다. 근접각 센서(916)는 사용자와 단말(900)의 정면 사이의 거리를 수집한다. 하나의 실시예에서, 근접각 센서(916)가 사용자와 단말(900)의 정면 사이의 거리가 점차적으로 작아지는 것을 검출할 경우, 프로세서(901)가 디스플레이(905)를 스크린 온(screen-on) 상태로부터 스크린 오프(screen-off) 상태로 전환하도록 제어하며; 근접각 센서(916)가 사용자와 단말(900)의 정면 사이의 거리가 점차적으로 커지는 것을 검출할 경우, 프로세서(901)가 디스플레이(905)를 스크린 오프 상태로부터 스크린 온 상태로 전환하도록 제어한다.

본 기술분야의 통상업자들은 도 9에 도시된 구조가 단말(900)에 대한 제한을 구성하지 않고, 도시된 것보다 더 많거나 더 적은 구성요소를 포함하거나, 또는 일부 구성요소를 조합하거나, 또는 상이한 구성요소 배치를 채택할 수 있음을 이해할 수 있다.

본 출원의 실시예는 비일시적 컴퓨터 판독 가능 저장매체를 더 제공하는 바, 상기 저장매체 중의 명령이 단말의 프로세서에 의해 수행될 경우, 단말로 하여금 위의 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 방법을 수행하게 한다.

본 출원의 실시예는 명령을 포함한 컴퓨터 프로그램 제품을 더 제공하는 바, 이가 단말에서 수행될 경우, 단말이 상술한 실시예에서 제공한 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 및 인코딩 방법을 수행하게 한다.

본 기술분야의 통상업자들은 상술한 실시예의 전부 또는 일부 단계는 하드웨어를 통해 구현할 수도 있고, 프로그램을 통해 관련 하드웨어를 명령하여 구현할 수도 있음을 이해 할 수 있으며, 상기 프로그램은 컴퓨터 판독 가능 저장매체에 저장될 수 있으며, 위에서 제기된 저장매체는 리드 온리 메모리, 디스크 또는 CD 등일 수 있다.

전술한 것은 본 출원의 바람직한 예일 뿐이고, 본 출원을 한정하기 위해 사용되지 않는다. 본 출원의 사상 및 원리 내의 임의의 수정, 등가의 대체, 개선 등은 본 출원의 보호 범위에 포함될 것이다.

Claims (19)

1. 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법으로서,
   현재 프레임의 비트 스트림을 수신하는 단계;
   만약 상기 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 상기 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 상기 확장 데이터에 휴대된 가상 경계 위치 정보를 획득하고, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키며, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되고, 상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계;
   만약 상기 현재 프레임의 비트 스트림의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것으로 결정하는 단계를 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
2. 제1항에 있어서,
   상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고;
   상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며,
   상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
3. 제2항에 있어서,
   상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고,
   상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표이며;
   상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고,
   상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리키는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
4. 제2항에 있어서,
   상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계는,
   만약 상기 제1 가상 경계 위치 정보의 값과 상기 제2 가상 경계 위치 정보의 값 모두가 0보다 크면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하는 것을 결정하는 단계;
   만약 상기 제1 가상 경계 위치 정보의 값 및/또는 상기 제2 가상 경계 위치 정보의 값이 0과 같으면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 단계를 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
5. 제1항에 있어서,
   만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하고, 또한 디코딩 순서 중 상기 현재 프레임의 이전(previous) 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임이 랜덤 액세스 포인트인 단계를 더 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
6. 제5항에 있어서,
   상기 이전 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 경우는,
   상기 이전 프레임의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않는 경우; 또는
   상기 이전 프레임의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지만, 상기 이전 프레임의 제1 가상 경계 위치 정보 및/또는 제2 가상 경계 위치 정보의 값이 0인 경우를 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
7. 제2항에 있어서,
   만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고, 또한 상기 현재 프레임의 제1 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 상기 현재 프레임의 오른쪽 경계와 같거나 또는 초과하는 것을 결정하고, 또한 상기 현재 프레임의 제2 가상 경계 위치 정보에 기반하여 가상 경계의 픽셀 위치가 상기 현재 프레임의 아래 경계와 같거나 초과하는 것을 결정하면, 상기 현재 프레임을 랜덤 액세스 복구 포인트로 결정하는 단계를 더 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
8. 제2항에 있어서,
   상기 제1 가상 경계 위치 정보의 정밀도가 하나의 최대 코딩 유닛(LCU)의 너비이고,
   상기 제2 가상 경계 위치 정보의 정밀도가 하나의 상기 LCU의 높이인 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
9. 적응적 인트라 리프레시 메커니즘에 기반한 인코딩 방법으로서,
   현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하는 단계;
   만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디와 상기 현재 프레임의 가상 경계 위치 정보를 휴대하는 단계 - 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용됨 -;
   만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임의 상기 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 상기 현재 프레임의 상기 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만, 상기 현재 프레임의 상기 확장 데이터에 휴대된 상기 가상 경계 위치 정보의 값이 상기 적응적 인트라 리프레시 기술을 지원하는지 여부를 지시할 수 있는 단계를 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
10. 제9항에 있어서,
    상기 가상 경계 위치 정보는 제1 가상 경계 위치 정보 및 제2 가상 경계 위치 정보를 포함하고;
    상기 제1 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 픽셀 위치를 가리키며,
    상기 제2 가상 경계 위치 정보는 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 픽셀 위치를 가리키는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
11. 제10항에 있어서,
    상기 제1 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수평 방향에서의 x좌표이고,
    상기 제2 가상 경계 위치 정보가 상기 가상 경계의 상기 현재 프레임의 수직 방향에서의 y좌표y좌표이며;
    상기 리프레시된 영역은 픽처 좌상단 좌표(0, 0)를 원점으로 하고, 너비가 상기 x좌표이며, 높이가 상기 y좌표인 직사각형 영역이고, 상기 리프레시되지 않은 영역은 상기 현재 프레임 내의 상기 리프레시된 영역을 제외한 기타 영역을 가리키는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
12. 제10항에 있어서,
    만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않고, 상기 현재 프레임의 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하면, 상기 현재 프레임의 확장 데이터에 휴대된 상기 제1 가상 경계 위치 정보의 값 및/또는 상기 제2 가상 경계 위치 정보의 값이 0이고;
    만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 휴대된 상기 제1 가상 경계 위치 정보의 값이 0보다 크고, 또한 상기 제2 가상 경계 위치 정보의 값도 0보다 큰 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
13. 제10항에 있어서,
    만약 상기 현재 프레임이 랜덤 액세스 포인트이면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하고, 또한 인코딩 순서 중 상기 현재 프레임의 이전 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 단계;
    만약 상기 현재 프레임이 랜덤 액세스 복구 포인트이면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하는 것을 결정하고, 또한 상기 제1 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 오른쪽 경계와 같거나 또는 초과하며, 또한 상기 제2 가상 경계 위치 정보가 가리키는 가상 경계의 픽셀 위치가 상기 현재 프레임의 아래 경계와 같거나 초과하는 단계를 더 포함하는 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
14. 제10항에 있어서,
    상기 제1 가상 경계 위치 정보의 정밀도가 하나의 LCU의 너비이고,
    상기 제2 가상 경계 위치 정보의 정밀도가 하나의 상기 LCU의 높이인 것을 특징으로 하는 적응적 인트라 리프레시 메커니즘에 기반한 디코딩 방법.
15. 디코딩 장치로서,
    현재 프레임의 비트 스트림을 수신하기 위한 수신 모듈;
    처리 모듈을 포함하고,
    상기 처리 모듈은, 만약 상기 현재 프레임의 비트 스트림에 확장 데이터가 존재하고 또한 상기 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디가 휴대되면, 상기 확장 데이터에 휴대된 가상 경계 위치 정보를 획득하고, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키며, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 사용되고, 상기 가상 경계 위치 정보에 기초하여 상기 현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하며; 만약 상기 현재 프레임의 비트 스트림의 상기 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디가 존재하지 않으면, 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않는 것을 결정하는 것을 특징으로 하는 디코딩 장치.
16. 인코딩 장치로서,
    현재 프레임이 적응적 인트라 리프레시 기술을 지원하는지 여부를 결정하기 위한 인코딩 모듈을 포함하고;
    상기 인코딩 모듈은,
    만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하면, 상기 현재 프레임의 확장 데이터에 적응적 인트라 리프레시 비디오 확장 아이디와 상기 현재 프레임의 가상 경계 위치 정보를 휴대하고, 상기 가상 경계 위치 정보는 가상 경계의 위치를 가리키고, 상기 가상 경계는 적어도 상기 현재 프레임 내의 리프레시된 영역과 리프레시되지 않은 영역을 구분하는 데에 더 사용되며,
    만약 상기 현재 프레임이 상기 적응적 인트라 리프레시 기술을 지원하지 않으면, 상기 현재 프레임의 상기 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지 않거나, 또는, 상기 현재 프레임의 상기 확장 데이터에 상기 적응적 인트라 리프레시 비디오 확장 아이디를 휴대하지만, 상기 현재 프레임의 상기 확장 데이터에 휴대된 상기 가상 경계 위치 정보의 값이 상기 적응적 인트라 리프레시 기술을 지원하는지 여부를 지시할 수 있는 데에 더 사용되는 것을 특징으로 하는 인코딩 장치.
17. 디코딩측 기기로서,
    프로세서; 및
    프로세서가 실행 가능한 명령을 저장하기 위한 메모리를 포함하고,
    상기 프로세서는 상술한 제1항 내지 제8항 중 어느 한 항에 따른 방법의 단계를 실행하게 설정된 것을 특징으로 하는 디코딩측 기기.
18. 인코딩측 기기로서,
    프로세서; 및
    프로세서가 실행 가능한 명령을 저장하기 위한 메모리를 포함하고,
    상기 프로세서는 상술한 제9항 내지 제14항 중 어느 한 항에 따른 방법의 단계를 실행하게 설정된 것을 특징으로 하는 인코딩측 기기.
19. 컴퓨터 판독 가능 저장매체로서,
    상기 컴퓨터 판독 가능 저장매체에는 명령이 저장되고, 상기 명령이 프로세서에 의해 실행될 경우 상술한 제1항 내지 제8항, 또는 상술한 제9항 내지 제14항 중 어느 한 항에 따른 방법의 단계를 실행하는 것을 특징으로 하는 컴퓨터 판독 가능 저장매체.

Images