KR20080002951A

KR20080002951A - 비디오 데이터를 효과적으로 코딩 및 디코딩하는 방법,장치 및 시스템

Info

Publication number: KR20080002951A
Application number: KR1020077026284A
Authority: KR
Inventors: 예쿠에이 왕
Original assignee: 노키아 코포레이션
Priority date: 2005-04-13
Filing date: 2006-03-23
Publication date: 2008-01-04
Also published as: CN101180883A; AU2006233279B2; KR100931870B1; TWI383682B; JP4903195B2; JP2008536425A; US8259800B2; CN101180883B; BRPI0610398B1; RU2377735C2; WO2006109117A1; MX2007012604A; MY145660A; EP1869888B1; HK1114522A1; TW200708109A; EP1869888A1; AU2006233279C1; BRPI0610398A2; RU2007137805A

Abstract

본 발명은 비디오 인코딩 및 디코딩을 위한 방법들과 장치들을 개시하며, 특히, 확장형 비디오 데이터 프로세싱에 관해 개시한다. 비디오 데이터의 확장형 인코딩 방법이 주어진다. 제1동작에 따라 비디오 데이터를 획득하는 단계가 주어진다. 비디오 데이터를 획득하는 동작이 수행된 뒤에, 그 획득한 비디오 데이터에 기초해 적어도 한 화상을 포함하는 기저 계층을 생성하는 단계와, 획득한 비디오 데이터에 기초해 적어도 한 화상을 포함하는 적어도 한 인핸스먼트 계층을 생성하는 단계, 기저 및 인핸스먼트 계층들 각각에 대해, 각각 참조 번호와 결부된 종속성 식별자 (DependencyID) 생성 단계, 서로 다른 DependencyID 값들을 가진 기저 계층 및 적어도 한 인핸스먼트 계층 각각에 대해 각자의 시퀀스 파라미터 세트 (SPS)를 결정하고, 실질적으로 동일한 SPS 파라미터들을 가진 다수의 기저 및 인핸스먼트 계층들에 대해 한 SPS를 활용하는 단계, 그리고 정해진 SPS들을 이용해 기저 계층 및 적어도 한 인핸스먼트 계층을 인코딩하는 단계가 뒤따른다.

Description

비디오 데이터를 효과적으로 코딩 및 디코딩하는 방법, 장치 및 시스템 {Method, device and system for effectively coding and decoding of video data}

본 발명은 비디오 인코딩 및 디코딩에 관한 것으로, 보다 상세히는 확장형 (scalable) 비디오 데이터 처리에 관한 것이다.

종래의 비디오 코딩 기준들 (가령, MPEG-1, H.261/263/264)은 비디오 프레임들 사이의 일시적 중복성 (redundancies)을 제거하기 위해 모션 추정 및 모션 보상을 포함한다. 이러한 개념들은 비디오 코딩에 대한 기본적인 이해를 갖춘 당업자들에게는 매우 익숙한 것이므로, 그에 대한 상세한 설명은 생략할 것이다.

H.264/AVC [1]로의 확장형 (scalable) 확장에 대한 작업 초안 1.0은 현재 서로 다른 종속관계 식별자들 (DependencyId) 값들을 갖는 여러 개의 확장형 계층들의 코딩을 가능하게 한다. 이에 따라, 각 계층은 종속관계 식별자 및, 코딩된 비디오 시퀀스를 위해 각자 소정의 시퀀스 파라미터 세트 (SPS; sequence parameter set)를 포함한다. 코딩된 비디오 시퀀스는 순시적 디코딩 리프레시 (IDR; instantaneous decoding refresh) 화상에서 다음 IDR 화상까지 오로지, 연속 코딩된 화상들만으로 이뤄진다. 디코딩 순서에 따라 한 IDR 화상에 이어지는 어떤 화상은, 디코딩 순서상 이 IDR 화상 이전부터 화면 간 예측 레퍼런스 (inter prediction reference)를 이용해서는 안 된다. 시퀀스 파라미터 세트는 다른 무엇보다, 적절한 디코딩 작업을 위해 디코더 편에서 사용될 데이터를 포함한다.

이 기술분야의 현 수준에 따르면, 현재의 코딩 방법들과 관련해 두 가지의 주요 단점들이 존재한다. 먼저, DependencyId가 7인 확장형 프레젠테이션 포인트가 요망되고, DependencyId가 0부터 6인 하위의 모든 계층들이 필요로 되는 경우, 적어도 8 개의 시퀀스 파라미터 세트들이 각자, 프레젠테이션이나 디코딩 작업을 위해 전송되어야 한다. 그러나, 공간 해상도들이 모든 계층들에 있어 동일한 경우 가능하게 되는 seq_parameter_id 이외의 어떤 SPS 파라미터들도 변경될 필요가 없다면, 소정의, 그리고 실질적으로 동일한 SPS들이 실제로 중복되어 전송되게 된다. SPS들은 통상적으로 신뢰성 있는 대역 밖 (out-of-band) 방식으로 시작되는 세션 안에서 전송되므로, 수신 확인 (reception acknowledgements)이 요구되고 재전송이 이용될 수도 있다. 따라서, 전송될 증가 된 데이터량이 보다 길어지는 세션 설정 지연을 의미하게 되고, 이것은 최종 사용자 입장에서 바람직한 것이 못된다.

두 번째 단점은, 융통성 및 코딩 효율성과 관련이 있다. 초기 SPS들의 최대 개수는 32이다. DependencyId가 7인 확장형 프레젠테이션 포인트가 요망되고, DependencyId가 0부터 6인 모든 하위 계층들이 필요로 되는 경우, 평균적으로 각 DependencyId 값의 계층(들)을 코딩하는 것은 기껏해야 단 4 SPS 변동 정도 (variations)만을 가지게 될 것이다. 따라서, 융통성 및 가능하게는 코딩 효율성 역시, 32 SPS 변동 정도를 활용할 수 있던데 비해 낮아지게 된다. 그러나, 갱신된 SPS 및 그것을 참조하는 NAL 유닛들 사이의 동기화 손실로 인해, 비디오 전송 세션 중의 SPS 갱신하기가 문제를 더 쉽게 유발할 것이다. 이외에, 그러한 업데이트가 대역 내 (in-bnad) 방식을 이용해 행해지는 경우, 가령, 코딩된 비디오 슬라이스들과 함께 실시간 전송 프로토콜 (RTP)을 이용해 전송되는 경우, 그 업데이트는 효과가 없어질 것이다.

본 발명의 목적은, 상술한 기술 상태에 관한 문제점들을 극복하고 중복을 피한 효율적 코딩을 지원하는, 효과적 인코딩 또는 디코딩 방법, 장치, 및 시스템을 제공하는 데 있다.

본 발명의 목적은 첨부된 독립 청구항들에 규정된 발명의 주제를 통해 달성된다.

본 발명의 한 양태에 따르면, 시퀀스 파라미터 세트 (SPS)가 각 DependencyId 값마다 편성된다는 제약이 제거될 수 있다. 오히려, 새로운 SPS는 필요할 때에만 편성된다. 새로운 시퀀스는 seq_parameter_set_id가 아닌 적어도 한 SPS 파라미터 변화가 요구될 때에만 필요로 된다. 본 발명은 확장형 비디오 코딩에 적용되는 어떠한 어플리케이션에도 적용될 수 있으며, 이때 하나 이상의 시퀀스 파라미터 세트들이 코딩에 사용된다.

주요 이점들은, 초기 세션 설정 지연이 감소될 정도로 시퀀스 파라미터 세트들이 더 효율적으로 사용될 수 있고, 소정 확장형 계층이 보다 융통성 있게 인코딩되고 그러한 융통성으로 인해 개선된 코딩 효율성 역시 얻을 수 있도록 더 많은 시퀀스 파라미터 세트들이 상기 확장형 계층에 대해 사용될 수 있다는 데 있다.

본 발명에 따른 인코딩/디코딩 방법들 및 동작들은 다만 단순화를 위해 하나의 코딩된 비디오 시퀀스에 대해서만 명시하고 있으나, 본 발명의 범위 안에서 여러 개로 코딩된 비디오 시퀀스들에 대한 변형 역시 고려될 수 있다.

본 발명의 제1양태에 따라, 비디오 데이터의 확장형 인코딩 방법이 제공된다. 제1동작에 의해, 상기 비디오 데이터 획득하기가 지원된다. 이때 상기 비디오 데이터 획득이 수행되고나서, 상기 획득한 비디오 데이터에 기초하여, 적어도 한 화상을 포함하는 베이스 계층 생성하기, 상기 획득한 비디오 데이터에 기초하여, 적어도 한 화상을 포함하는 적어도 한 인핸스먼트 (enhancement) 계층 생성하기, 각각의 종속관계 식별자 (DependencyID)가 한 참조(reference) 번호와 결부될 때, 상기 베이스 및 인핸스먼트 계층들 각각에 대한 DependencyID를 생성하기; 서로 다른 DependencyID 값들을 가진 상기 베이스 계층 및 상기 적어도 한 인핸스먼트 계층 각각에 대한 각 시퀀스 파라미터 세트 (SPS)를 정하고, 실질적으로 동일한 SPS 파라미터들을 가진 여러 베이스 및 인핸스먼트 계층들에 대해 한 SPS를 이용하기; 정해진 SPS들을 사용해 상기 베이스 계층 및 상기 적어도 한 인핸스먼트 계층을 인코딩하는 동작이 뒤따른다

본 발명의 진보한 동작에 따르면, 상이한 DependencyId 값을 가지는 확장형 계층들에서의 소정 시퀀스 파라미터 세트 재사용이 행해진다.

바람직한 실시예에 따르면, 상기 베이스 계층 및 상기 적어도 한 인핸스먼트 계층 생성하기는 상기 비디오 데이터 안의 모션 정보에 기초하며, 상기 모션 정보는 모션 추정 프로세스에 의해 주어진다.

바람직한 실시예에 따르면, 상기 시퀀스 파라미터 세트 (SPS)는 SPS 식별자를 포함하며, 상기 SPS 식별자는 슬라이스 헤더 안에서 추가로 조회되는 화상 파라미터 세트에 의해 조회된다. 그에 따라 복수의 시퀀스 파라미터 세트들 내 소정의 SPS에 대한 정확한 식별이 가능하게 된다.

바람직한 실시예에 따르면, 상기 베이스 계층 및 적어도 한 인핸스먼트 계층으로 된 그룹의 적어도 둘에 대한 상기 DependencyId들은 동일하다.

바람직한 실시예에 따르면, 상기 SPS는, 프로파일 정보, 레벨 정보, 크로마 (chroma) 포맷 정보, 화상 사이즈 정보 및 프레임 크롭 (crop) 정보를 포함하는 그룹에서 적어도 하나를 더 포함한다.

본 발명의 다른 한 양태에 따라 확장형 인코딩된 비디오 데이터를 디코딩하는 방법이 제공된다. 상기 방법은 상기 인코딩된 비디오 데이터를 획득하는 동작, 상기 인코딩된 비디오 데이터 안에서 베이스 계층 및 적어도 한 인핸스먼트 계층을 식별하는 동작, 상기 베이스 및 적어도 한 인핸스먼트 계층 각각에 대해, 참조 번호들을 구비하고 동일한 SPS 파라미터들을 갖는 적어도 두 계층들에 대해 한 SPS가 이용되는 종속관계 식별자 (DependencyID)를 검출하는 동작, 및 상기 정해진 시퀀스 파라미터 세트들 (SPS) 각각을 사용해 상기 베이스 계층 및 상기 디코딩된 적어도 한 인핸스먼트 계층을 디코딩하는 동작을 포함한다.

본 발명의 다른 양태에 따라, 상술한 것과 같은 인코딩 방법에 따라 동작하는 인코딩 장치가 더 제안된다.

본 발명의 또 다른 양태에 따라, 상술한 것과 같은 디코딩 방법에 따라 동작하는 디코딩 장치가 더 제안된다.

본 발명의 다른 양태에 따라, 상술한 것과 같은 인코딩 및/또는 디코딩 방법에 따라 동작하는, 데이터 전송을 지원하는 시스템이 더 제안된다.

본 발명의 다른 양태에 따라, 적어도 한 인코딩 장치 및 적어도 한 디코딩 장치를 포함하는 데이터 전송 시스템이 더 제안된다.

본 발명의 다른 양태에 따르면, 전자 장치에 의해 주관되는 컴퓨터 프로세서를 통해 실행되도록 컴퓨터 프로그램 코드를 실시하는 컴퓨터 판독가능 저장 구조를 포함하는 컴퓨터 프로그램 생성물이 더 제안되며, 상기 컴퓨터 프로그램 코드는 상술한 인코딩 방법을 수행하기 위한 명령어들을 포함한다.

본 발명의 다른 양태에 따르면, 전자 장치에 의해 주관되는 컴퓨터 프로세서를 통해 실행되도록 컴퓨터 프로그램 코드를 실시하는 컴퓨터 판독가능 저장 구조를 포함하는 컴퓨터 프로그램 생성물이 더 제안되며, 상기 컴퓨터 프로그램 코드는 상술한 디코딩 방법을 수행하기 위한 명령어들을 포함한다.

본 발명의 다른 양태에 따르면, 반송파 (carrier wave)를 통해 구현되고, 프로세서를 통해 실행될 때 상기 인코딩 및/또는 디코딩 방법들 중 어느 하나에 대한 동작들을 일으키는 명령어들을 나타내는 컴퓨터 데이터 신호가 더 제안된다.

본 발명의 다른 양태에 따르면, 비디오 데이터의 확장형 인코딩을 위한 모듈이 제안되며, 이 모듈은 적어도, 상기 비디오 데이터를 획득하기 위한 구성요소; 상기 획득한 비디오 데이터에 기초해 베이스 계층을 생성하는 구성요소; 적어도 한 화상을 포함하는 적어도 한 인핸스먼트 (enhancement) 계층을 생성하는 구성요소; 각각의 종속관계 식별자 (DependencyID)가 한 참조(reference) 번호와 결부될 때, 상기 베이스 및 인핸스먼트 계층들 각각에 대한 DependencyID를 생성하기 위한 구성요소; 서로 다른 DependencyID 값들을 가진 상기 베이스 계층 및 상기 적어도 한 인핸스먼트 계층 각각에 대한 각 시퀀스 파라미터 세트 (SPS)를 정하기 위한 것으로, 실질적으로 동일한 SPS 파라미터들을 가진 여러 베이스 및 인핸스먼트 계층들에 대해 하나의 SPS를 이용하는 구성요소; 및 정해진 SPS들을 사용해 상기 베이스 계층 및 상기 적어도 한 인핸스먼트 계층을 인코딩하는 구성요소를 포함한다.

본 발명의 다른 양태에 따르면, 확장형 인코딩된 비디오 데이터를 디코딩하기 위한 모듈이 제공되고, 이 모듈은 적어도: 상기 인코딩된 비디오 데이터를 획득하기 위한 구성요소, 상기 인코딩된 비디오 데이터 안에서 베이스 계층 및 적어도 한 인핸스먼트 계층을 식별하는 구성요소, 상기 베이스 및 적어도 한 인핸스먼트 계층 각각에 대해, 참조 번호들을 구비하고 동일한 SPS 파라미터들을 가진 적어도 두 SPS 파라미터들에 대해 한 SPS가 사용되는 종속관계 식별자 (DependencyID)를 검출하는 구성요소, 및 상기 정해진 시퀀스 파라미터 세트들을 사용해 상기 베이스 계층 및 상기 디코딩된 인핸스먼트 계층을 디코딩하는 구성요소를 포함한다.

본 발명의 이점은, 본 발명의 실시예들을 언급하는 상세 설명을 읽을 때 독자에게 더 자명하게 될 것이며, 그에 따라 발명의 개념이 쉽게 파악될 수 있을 것이다.

상세 설명 및 첨부된 도면 전체에 걸쳐, 동일하거나 유사한 구성요소들, 유닛들, 혹은 장치들은 간결성이라는 목적을 위해 동일한 참조 부호들로서 나타내어질 것이다.

명세서 전반에 걸쳐 휴대형 장치 및 모바일 장치라는 표현이 동의어로서 사용된다는 것을 알아야 한다.

첨부된 도면은 본 발명의 추가적 이해를 돕기 위해 포함되며, 본 명세서에 포함되어 그 일부를 이룬다. 도면들은 본 발명의 실시예들을 도시하며, 상세한 설명과 함께 본 발명의 원리를 설명하는데 도움을 줄 것이다.

도 1은 셀룰라 단말 장치에 기초하여 전형적으로 실시되는 휴대형 CE 장치의 블록도의 예를 개략적으로 도시한 것이다;

도 2는 최근 기술에 따른 비디오 데이터의 확장형 코딩 및 디코딩의 일반적인 원리이다;

도 3은 본 발명에 따른 인코딩 편을 보이는 동작 시퀀스를 도시한 것이다;

도 4는 본 발명에 따른 디코딩 편을 보이는 동작 시퀀스를 도시한 것이다;

도 5a는 본 발명에 따른 인코딩 원리의 세부적인 예시이다;

도 5b는 본 발명에 따른 디코딩 원리의 세부적인 예시이다;

도 6은 모든 구성요소들을 보이는 본 발명에 따른 인코딩 모듈을 나타낸 것이다;

도 7은 모든 구성요소들을 보이는 본 발명에 따른 디코딩 모듈을 나타낸 것이다;

도 8a는 각 DependencyID가 한 SPS를 수신하는, 비디오 데이터 인코딩의 구 현을 보인 것이다;

도 8b는 본 발명에 따라 소정의 한 SPS가 코딩에 사용되는, 비디오 데이터 인코딩의 구현을 보인 것이다.

위에서 본 발명은 첨부된 도면들에 따른 실시예들을 참조하여 개시된다고 하였으나, 본 발명이 그러한 실시에들에 국한되는 것이 아니고 첨부된 청구항들의 범위 안에서 여러 방식으로 변형될 수 있다는 것은 자명한 사실이다.

다양한 실시예들에 대한 이하의 설명에서, 그 일부를 이루는 첨부된 도면들이 참조될 것이며, 그 안에서 본 발명이 실시될 수 있는 다양한 실시예들에 대한 예가 도시된다. 본 발명의 범위에서 벗어나지 않고 다른 실시예들이 활용될 수도 있고 구조적이고도 기능적인 변형이 가해질 수도 있다는 것을 알아야 한다. 가능하면 동일한 참조 부호들이 도면과 상세 설명 전반에 걸쳐 유사하거나 동일한 부품들을 나타내는데 사용될 것이다.

도 1은 본 발명의 실시예에 따른 일반적인 모바일 장치를 도시한 것이다. 도 1에 도시된 모바일 장치(10)는 셀룰라 데이터 및 음성 통신 기능을 수행한다. 본 발명은 이러한 특정 실시예에 국한되지 않으며, 이것은 다만 다양한 실시예들 중 한 실시예의 예를 나타낸 것임을 주지해야 한다. 모바일 장치(10)는 (메인) 마이크로프로세서나 마이크로컨트롤러(100)와 함께 모바일 장치의 동작을 제어하는 마이크로프로세서와 관련된 구성요소들을 포함한다. 이 구성요소들은 디스플레이 모듈(135)에 연결된 디스플레이 컨트롤러(130), 비휘발성 메모리(140), 랜덤 액세 스 메모리 (RAM) 같은 휘발성 메모리(150), 마이크로폰(161), 스피커(162) 및/또는 헤드셋(163)에 연결된 오디오 입/출력 (I/O) 인터페이스(160), 키패드(175)나 키보드에 연결되는 키패드 컨트롤러(170), 임의의 보조 입/출력 (I/O) 인터페이스(200), 및 단거리 통신 인터페이스(180)를 포함한다. 이 장치는 통상적으로, 일반적으로 190으로 도시된 다른 장치 서브 시스템들도 포함한다.

모바일 장치(10)는 음성 (voice) 네트워크와 통신할 수 있고/거나 마찬가지로, 가령 디지털 셀룰라 네트워크들, 특히 GSM (global system for mobile communication)이나 UMTS (universal mobile telecommunications system)의 형식으로 된 어떤 공공 육상 모바일 네트워크 (PLMN, public land mobile network)들과 같은 데이터 네트워크를 통해서도 통신할 수 있다. 통상적으로, 음성 및/또는 데이터 통신은 전파공간 인터페이스, 즉 셀룰라 네트워크의 인프라 구조의 라디오 액세스 네트워크 (RAN)의 일부인, 추가 구성요소들 (상술한 것 참조)과 협력하는 베이스 스테이션 (BS)이나 노드 B (미도시)로의 셀룰라 통신 인터페이스 시스템을 통해 동작 된다. 도 1을 참조해 예시적으로 도시한 셀룰라 통신 인터페이스 서브 시스템은 셀룰라 인터페이스(110), 디지털 신호 프로세서(DSP)(120), 수신기(RX)(121), 전송기(TX)(122), 및 하나 이상의 국부 발진기들 (LOs)(123)을 포함하며, 하나 이상의 공공 육상 모바일 네트워크(PLMN)들과의 통신을 가능하게 한다. 디지털 신호 프로세서(DSP)(120)는 전송기(TX)(122)로 통신 신호들(124)을 전송하고 수신기(RX)(121)로부터 통신 신호들(125)을 수신한다. 통신 신호들을 처리하는 것 외에, 디지털 신호 프로세서(120)는 수신기 제어 신호들(126) 및 전송기 제어 신호(127)를 또한 제공한다. 예를 들어, 전송될 신호들과 수신한 신호들의 변조 및 복조 이외에, 수신기(RX)(121) 및 전송기(TX)(122)의 통신 신호들에 적용되는 이득 레벨들이 디지털 신호 프로세서(DSP)(120)에 구현된 자동 이득 제어 알고리즘을 통해 적응적으로 제어될 수 있다. 다른 트랜시버 제어 알고리즘들 역시 디지털 신호 프로세서(DSP)(120) 안에 구현되어, 보다 고도의 트랜시버(122) 제어를 제공하게 될 수 있다. PLMN을 통한 모바일 장치(10) 통신이 단일 주파수나 밀집 간격의 주파수대 세트에서 일어나는 경우, 하나의 국부 발진기 (LO)(128)가 전송기(TX)(122) 및 수신기(RX)(121)와 연계되어 사용될 수 있다. 이와 달리, 상이한 주파수들이 음성/데이터 통신이나 전송 대 수신에 사용될 때, 복수의 국부 발진기들(128)이 해당하는 복수의 주파수들을 생성하는데 사용될 수도 있다. 도 1에 도시된 안테나(129)나 다이버시티 (diversity) 안테나 시스템 (미도시)이 사용될 수도 있으나, 모바일 장치(10)는 신호 수신 및 전송을 위해 하나의 안테나 구조를 가지고 이용될 수 있다. 음성 및 데이터 정보를 둘 다 포함하는 정보가, 디지털 신호 처리기(DSP)(120) 간의 데이터 링크를 통해 셀룰라 인터페이스와 통신 된다. 주파수 대역, 성분 선택, 파워 레벨 등과 같은 셀룰라 인터페이스(110)의 세부 디자인은 모바일 장치(100)가 동작하고자 하는 무선 네트워크에 따라 달라질 것이다.

셀룰라 네트워크들에서의 등록에 요구되는 가입자 식별 모듈 (SIM)(210)을 개입시킬 수 있는, 어떤 필요로 되는 네트워크 등록(registration)이나 활성화 과정들이 완료된 뒤에, 모바일 장치(10)는 무선 네트워크를 통해 음성 및 데이터 신호들 모두를 포함하는 통신 신호들을 송수신할 수 있다. 무선 네트워크로부터 안 테나(129)를 통해 수신된 신호들은 수신기(121)로 라우팅 되고, 수신기는 신호 증폭, 주파수 하향 변환 (down conversion), 필터링, 채널 선택, 및 아날로그-디지털 변환 같은 동작들을 지원한다. 수신된 신호의 아날로그-디지털 변환은 보다 복잡한 통신 기능들, 가령 디지털 신호 프로세서(DSP)(120)를 사용해 수행될 디지털 복조 및 디코딩을 가능하게 한다. 유사한 방식으로, 네트워크로 전송될 신호들은, 가령 디지털 신호 프로세서(DSP)(120)에 의해 변조 및 인코딩을 포함해 처리된 뒤, 디지털-아날로그 변환, 주파수 상향 변환, 필터링, 증폭, 및 안테나를 통한 무선 네트워크로의 전송을 위해 전송기(122)로 주어지게 된다.

장치 플랫폼 마이크로프로세서라고도 표시될 수 있는 마이크로프로세서/마이크로컨트롤러(μC)(110)는 모바일 장치(10)의 기능들을 다룬다. 프로세서(110)에 의해 사용되는 운영 시스템 소프트웨어가 가령 플래시 메모리, 배터리 백업 램, 어떤 다른 비휘발성 저장 기술, 혹은 이들의 어떤 조합으로 구현될 수 있는 비휘발성 메모리(140) 같은 영구적 저장부 안에 저장됨이 바람직하다. 모바일 장치(10)의 하위 레벨 기능들 및 (그래픽의) 기본 사용자 인터페이스 기능들을 제어하는 운영 시스템(149) 이외에, 비휘발성 메모리(140)는 음성 통신 소프트웨어 어플리케이션(142), 데이터 통신 소프트웨어 어플리케이션(141), 조직자 (organizer) 모듈 (미도시), 또는 다른 타입의 소프트웨어 모듈 (미도시)과 같은 복수의 상위 레벨 소프트웨어 어플리케이션 프로그램들이나 모듈들을 포함한다. 이 모듈들은 프로세서(100)에 의해 실행되고, 모바일 장치(10) 사용자와 모바일 장치(10) 간에 상위 레벨 인터페이스를 제공한다. 이러한 인터페이스는 보통 디스플레이 컨트롤 러(130)로 제어되는 디스플레이(135)를 통해 제공되는 그래픽 성분들 및, 키패드 컨트롤러(170)를 통해 프로세서(100), 보조 입/출력 (I/O) 인터페이스(200), 및/또는 단거리 (SR) 통신 인터페이스(180)로 연결되는 키패드(175)를 통해 주어지는 입/출력 성분들을 포함한다. 보조 I/O 인터페이스(200)는 특히 USB (universal serial bus) 인터페이스, 시리얼 인터페이스, MMC (multimedia card) 인터페이스 및 관련 인터페이스 기술들/표준들, 및 다른 어떤 표준화되거나 독과점적 데이터 통신 버스 기술을 포함하지만, 반면 단거리 통신 인터페이스는 특히 WLAN (wireless local area network) 및 블루투스 통신 기술 또는 IRDA (infrared data access) 인터페이스를 포함하는 라디오 주파수 (RF) 저전력 인터페이스일 수 있다. 여기서 언급된 RF 저전력 인터페이스 기술은 특히, 어떤 IEEE 801.xx 표준 기술을 포함한다고 이해되어야 하며, 그에 대한 내용은 전기 전자 엔지니어 협회 (Institute of Electrical and Electronics Engineers)로부터 입수될 수 있다. 또, 보조 I/O 인터페이스(200)와 단거리 통신 인터페이스(180)는 각각, 하나 이상의 입/출력 인터페이스 기술들 및 통신 인터페이스 기술들을 각각 지원하는 하나 이상의 인터페이스들을 나타낼 수 있다. 운영 시스템, 특정 장치 소프트웨어 어플리케이션들이나 모듈들, 혹은 이들의 일부는 통상적으로 신속한 동작을 위해 DRAM (direct random access memory) 기술에 기초해 구현되는 랜덤 액세스 메모리 같은 휘발성 저장부(150) 안에 일시적으로 로드될 수 있다. 또, 수신된 통신 신호들 역시, 데이터 저장을 위해 보조 I/O 인터페이스를 통해 바람직하게는 탈부착 가능하게 연결된 비휘발성 메모리(140)나 어떤 대량 저장부에 위치한 파일 시스템에 영구 적으로 쓰여 지기 전에 휘발성 메모리(150)에 일시적으로 저장될 수도 있다. 상술한 구성요소들이 여기서 셀룰라 전화의 형태로 실시되는 전통적인 모바일 장치(10)의 일반적인 구성요소들을 나타낸다는 것을 알아야 한다. 본 발명은 다만 예시 및 완전성을 위해 묘사된 이러한 특정 구성요소들과 그 구현에 국한되지 않는다.

모바일 장치(10)의 전형적 소프트웨어 어플리케이션 모듈은, 통상적으로 연락 관리자, 일정표, 작업 관리자 등등을 포함하는 PDA 기능을 제공하는 퍼스널 정보 관리자 어플리케이션이다. 이러한 퍼스널 정보 관리자는 프로세서(100)에 의해 실행되며, 모바일 장치(10)의 구성요소들을 액세스할 수 있고, 다른 소프트웨어 어플리케이션 모듈들과 상호동작할 수 있다. 예를 들어, 음성 통신 소프트웨어 어플리ㅔ키션과의 상호동작이 전화 통화, 음성 메일 등등을 가능하게 하며, 데이터 통신 소프트웨어 어플리케이션과의 상호동작은 SMS (short message service), MMS (multimedia service), 이메일 통신 및 기타 데이터 전송 관리를 가능하게 한다. 비휘발성 메모리(140)는 특히 일정표 엔트리들, 연락처 등등을 포함하는 장치상에서 데이터 아이템들의 지속적 저장을 돕기 위한 파일 시스템을 제공함이 바람직하다. 셀룰라 인터페이스, 단거리 통신 인터페이스, 또는 보조 I/O 인터페이스 등을 통한 네트워크들과의 데이터 통신 기능이, 그러한 네트워크들을 통한 업로드, 다운로드, 및 동기화를 가능하게 한다.

어플리케이션 모듈들(141 내지 149)은 프로세서(100)에 의해 실행되도록 구성되는 장치 기능들 또는 소프트웨어 어플리케이션들을 나타낸다. 대부분의 알려진 모바일 장치들 내에서, 하나의 프로세서가 모바일 장치의 전반적 동작뿐 아니라 모든 장치 기능들 및 소프트웨어 어플리케이션들을 관리 및 통제한다. 이러한 개념이 오늘날의 모바일 장치들에 적용될 수 있다. 특히, 강화된 멀티미디어 기능들의 구현은, 가령, 비디오 스트리밍 어플리케이션들의 재생, 디지털 이미지들, 및 통합형이나 탈부착형으로 연결된 디지털 카메라 기능에 의해 캡처 된 비디오 시퀀스들의 처리를 포함하나, 또한 고난도의 그래픽을 가진 게임 어플리케이션들 역시 계산 능력 요건을 강요한다. 과거에 추구해 왔던 계산 능력 요건에 대처하는 한 방식이, 강력한 범용 프로세서 코어들을 구현함으로써 계산 능력을 향상시켜 문제를 해결하는 것이다. 계산 능력을 제공하기 위한 또 다른 시도가, 둘 이상의 독립적 프로세서 코어들을 구현하는 것으로, 이것은 이 기술분야에 있어 잘 알려진 방법론이다. 여러 개의 독립적 프로세서 코어들의 장점들은 이 분야의 당업자들에 의해 즉시 이해될 수 있을 것이다. 하나의 범용 프로세서가 별개의 작업들의 사전 선택에 대한 특수화 없이 서로 다른 여러 작업들을 수행하도록 설계되는 반면, 멀티 프로세서 구성은 소정의 작업 세트를 처리하도록 된 한 개 이상의 범용 프로세서들 및 한 개 이상의 특수 프로세서들을 포함할 것이다. 그럼에도 불구하고, 여러 개의 프로세서들을 하나의 장치, 특히 모바일 장치(10) 같은 모바일 장치 안에 구현하는 것은, 전통적으로 구성요소들의 온전하면서 복잡한 재설계를 요하게 된다.

이하에서, 본 발명은 추가 프로세서 코어들을 기존 프로세싱 장치 구성에 간단히 병합하는 것을 가능하게 하여, 값비싼 전체의 복잡한 재설계를 생략할 수 있는 개념을 소개할 것이다. 본 발명의 개념은 SoC (system-on-a-chip, 칩 위의 시 스템) 설계를 참조해 설명될 것이다. SoC는 프로세싱 장치의 적어도 수많은 (또는 모든) 구성요소들을 하나의 고집적 칩에 병합하는 개념이다. 이러한 SoC는 디지털, 아날로그, 혼합 신호 및 흔히 라디오-주파수 기능들을 모두 한 칩 위에 포함할 수 있다. 통상적인 프로세싱 장치는 서로 다른 작업들을 수행하는 여러 통합 회로들을 포함한다. 이러한 통합 회로들은 특히 마이크로프로세서, 메모리, 범용 비동기 송수신기 (UART, universal asynchronous receiver-transmitter)들, 직/병렬 포트들, 직접 메모리 액세스 (DMA, direct memory access) 컨트롤러들 등을 포함할 수 있다. 범용 비동기 송수신기 (UART)는 데이터의 병렬 비트들 및 직렬 비트들 사이를 변환한다. VLSI (very-large-scale integration) 집적 회로들로 인해 야기된 최근의 반도체 기술의 향상은 상당한 복잡도의 향상을 가능하게 하여, 시스템의 수많은 구성요소들을 하나의 칩 안에 집적시킬 수 있게 하였다. 도 1을 참조하면, 하나 이상의 구성요소들, 가령, 컨트롤러들(130 및 160), 메모리 요소들(150 및 140), 및 하나 이상의 인터페이스들(200, 180 및 110)이 프로세서(100)와 함께, 궁극적으로 Soc (system-on-a-chip)을 형성하는 신호 칩 안에 집적 (통합) 될 수 있다.

덧붙여, 상기 장치(10)는 본 발명의 진보한 동작에 따른 비디오 데이터의 확장형 (scalable) 인코딩(105) 및 디코딩(106)을 위한 모듈을 갖춘다. CPU(100)를 이용해, 상기 모듈들(105, 106)은 개별적으로 사용될 수 있다. 그러나, 상기 장치(10)는 비디오 데이터 인코딩이나 디코딩을 각기 수행하도록 되어 있다. 상기 비디오 데이터는 장치의 통신 모듈들을 통해 수신되거나, 장치(10) 안의 임의의 상 상 가능한 저장 수단 안에 저장될 수도 있다.

(계층형, layered) 확장형 코딩 및 디코딩의 매우 일반적인 원리가 도 2에 보여지고 있으며, 여기서, 중간-레벨 타입 (점선으로 된 직사각형으로 강조됨)의 추가 빌딩 블록들을 보충함으로써, 임의 개수의 확장형 계층들이 원론적으로 실현될 수 있다. 기저 계층에 의해 표현될 시공간 신호 해상도 (resolution)가 우선 데시메이션 (decimation) (사전 프로세싱)에 의해 생성된다. 이어지는 인코딩 단계에서, 적절한 양자화기의 세팅이 이제 기저 정보의 소정의 전반적 품질 레벨로 이어질 것이다.

기저 계층 재구성은 모든 상위 계층 해상도 레벨들의 근사화이며, 다음 계층들의 디코딩시 활용될 수 있다. 중간 프로세싱 유닛이 다음 하위 계층 신호의 이어지는 계층 해상도로의 업(up)-샘플링을 수행한다. 일반적으로, 프로세싱 및 중간 프로세싱은, 전 단계들에 걸친 데시메이션 및 보간에 의해 수행되나, 반면 취해질 특정 액션은 확장성의 차원에 따라 크게 달라질 수 있다, 가령, 모션(motion)-보상 프로세싱이 시간적 확장성의 프레임 레이트 업-샘플링을 위해 구현될 수 있다. 그러한 정보는 인코딩 및 디코딩 중 모두에서 하위에서 상위 해상도 계층들로 전파된다. 모든 타입의 확장성 (시간적, 공간적, 혹은 양자화/품질)에 있어서, 하이브리드 비디오 코딩의 프레임-귀납적 (frame-recursive) 프로세싱에 의해 부과되는 제약들이 신중하게 고려되어야 한다. 기저 계층 및 임의 합성 계층들은 이상적인 경우 자급적 (self-contained)이어야 하는데, 이는 예측이 상위 계층들로부터의 어떤 디코딩된 정보를 이용해서는 안 된다는 것을 뜻한다. 이와 달리, 인코더 측 과 디코더 측에서 상이한 추정치들이 사용될 수 있으며, 드리프트(drift) 효과가 일어날 수 있다. 기저 계층 정보의 예측은, 그러나 항상, 예측에 있어 모든 인핸스먼트(enhancement) 계층 정보가 허용된 경우 있을 수 있는 것보다 나빠질 것이다. 이것은 기저 계층에서 코더 동작에 페널티를 주지 않는데, 이는 은연중에 같은 레이트의 단일 계층 코더처럼 동작하게 될 것이나; 기저 계층 정보가 인핸스먼트 계층의 예측을 위해 사용되기 때문에, 상위 레이트들로의 레이트-왜곡 성능이, 단일 계층 코더에서 가능한 것보다 악화 될 것이다.

도 3은 본 발명에 따른 인코딩 방법의 동작 시퀀스를 보이고 있다. 동작 S300에서, 시퀀스가 시작된다. 이것은 예를 들어 카메라 등으로부터의 비디오 데이터 스트리머 수신에 해당할 수 있다. 상기 카메라는 상술한 장치(10) 안에 포함될 수 있다. 상기 비디오 데이터 스트림을 얻은 후 (S310), 동작 S320에 따라 도시된 것과 같이, 인코더가 상응하는 기저 계층 (BL, base layer) 및 그 인핸스먼트 계층들 (EL, enhancement layers)을 각기 발생 혹은 생성할 것이다. 오직 하나의 EL을 구현하는 것도 상상할 수 있으나, 더 많은 EL의 생성이 더 양호한 인코딩을 낳고 그에 따라 더 향상된 디코딩 품질을 낳게 된다.

기저 계층 및 인핸스먼트 계층들까지 생성한 후 BL 및 EL의 상응하는 종속성 식별자들 (DependencyID) 생성에 해당하는 동작 S330이 뒤따른다. DependencyID의 값은 둘 이상의 인핸스먼트 계층이 사용되는 경우 증가할 것이다.

동작 S340에서, 상기 기저 계층 및 상기 모든 인핸스먼트 계층들을 위한 각개의 시퀀스 파라미터 세트 (SPS, sequence parameter set)가 주어지며, 이때 다수 의 기저 혹은 인핸스먼트 계층들에 대해 선택된 SPS 파라미터들이 실질적으로 동일한 경우, 오직 한 개의 SPS만이 사용된다. 본 발명의 진보한 동작에 따라, 오직 한 SPS가 서로 다른 DependencyID 값들에 대해 사용될 수 있고, 이것은 반복 데이터가 제거될 것이기 때문에 효과적인 인코딩 동작을 일으키게 된다. 사용될 상기 SPS를 정한 후, 인코딩 동작(S350)이 시작될 것이다. 이 동작시, 기저 계층 및 인핸스먼트 계층들, 그리고 또한 모션 벡터들 등의 옵션으로서의 정보가 멀티플렉싱되어, 이제 추후 프로세싱을 위해 준비되는 비트 스트림이나 인코딩 된 비디오 데이터 스트림을 생성한다.

어떠한 동작들도 뒤따르지 않는 경우, 동작 시퀀스는 종료될 것이고(S390), 새로운 반복에 따라, 혹은 가령 인코딩될 어떠한 비가공 비디오 데이터 시퀀스도 없는 경우 동작 시퀀스가 재시작될 수 있다. 그러나, 상기 인코딩된 비디오 데이터 스트림 결과가, 상기 데이터를 디코딩하거나 저장하기로 된 수신기로 보내지게 될 것이다. 디코딩 프로세스는 이하에서 도 4를 참조해 설명될 것이다.

도 4는 본 발명에 따른 인코딩 동작 시퀀스를 도시한 것이다. 확장형 인코딩 (scalable encoded) 비디오 데이터를 수신한 후, 동작 시퀀스가 시작된다 (S400), 상기 인코딩 비디오 데이터를 획득한 (S410) 후, 기저 계층 및 상응하는 한 개 이상의 인핸스먼트 계층들이 동작 S420에 따라 식별될 수 있다. 이것은, 수신된 인코딩 비디오 데이터 스트림이 디멀티플렉싱 되고 그에 따라 BL, EL 및 옵션으로서 모션 벡터들 (MV) 등과 같은 추가 정보로 구분된다는 것을 의미한다. 수신된 데이터 스트림에 기초하여, DependencyID가 검출되고, 또한 사용될 시퀀스 파라 미터 세트 (SPS)가 식별될 것이다. 동작 S450에서, 상기 확장형 인코딩 데이터의 디코딩은 이전에 결정된 정보: BL, SPS 및 EL의 고려하에 주어진다.

추가 동작이 더 이상 필요하지 않을 때, S490에 따라 방법이 종료되어 필요에 따라 재시작될 수 있다.

도 5a는 본 발명에 따른 확장형 인코딩 프로세스의 원리를 보인다. 모든 프로세싱이 도 5a를 참조해 도시된 모션 추정기에 의해 지원될 수 있다. 모션 추정기는 인코딩 또는 화상 개량을 위해 추가로 필요한 모션 벡터들을 생성하기 위해 비디오 데이터를 사용한다.

오리지널 비디오 데이터는 모션 벡터들 생성 및, 기저 계층 BL과 상응하는 복수의 인핸스먼트 계층들 EL의 생성을 위해 사용된다. 인핸스먼트 계층들은 오리지널 비디오 데이터, BL, 그리고 또한 옵션으로서 모션 벡터들에 의해 전달된 정보에 기초해 생성될 수 있다. 추가 처리를 위해, 모션 벡터들 역시, 디코더 측에서 화상 개량 등을 수행하기 위해 확장형 인코딩 비디오 데이터 스트림 안에 각기 인코딩되거나 합성된다는 것을 생각할 수 있다.

각각의 BL이나 EL은 DependencyID 및 SPS와 함께 주어진다. 본 발명의 진보한 동작에 따라, 인코더는 우선 SPS들을 사용하기로 결정하고, 모든 기저 계층들 및 인핸스먼트 계층들의 어떤 부분 집합에 대한 SPS 파라미터들이 실질적으로 동일하고, 반복적인 추가 데이터 트래픽을 피하기 위해 오직 한 개의 SPS를 그 계층들의 부분 집합의 인코딩을 위해 사용할 것인지를 체크한다. 도 5a는 본 발명에 따른 확장형 인코딩 모듈(105)의 가능한 상세 실시예를 도시한다.

도 5b는 본 발명에 따른 확장형 인코딩 비디오 데이터의 디코더를 도시한 것이다. 도 5b는 확장형 인코딩 비디오 데이터를 처리하도록 된 디코딩 모듈(106)의 가능한 실시예이다.

실제로, 적합한 SPS를 정하기 위한 모듈은 인코딩 측에서 필요한 것처럼 디코딩 측에서는 필요로 되지 않는다. 온전함을 위해, 이러한 결정 모듈이 도 5b를 참조함에 있어 역시 도시되어 있다. 한 화상에 있어 어떤 SPS가 사용되는지에 대한 정보는, 화상 파라미터 세트 내 그 ID를 참조함으로써 시그날링되고, 화상 파라미터 세트 ID는 슬라이스 헤더 안에서 더 참조된다.

수신된 데이터를 기초로, EL, 스트림, DependencyID들 그리고 BL 스트림이 시별되고 이것은 디멀티플렉서 DEMUX에 의해 심볼화된다. 얻어진 데이터 스트림들은 이제 해당하는 EL-디코더 및 BL-디코더에 의해 주어지는 추가 프로세싱을 위해 준비된다. 도시된 모듈들 각각은 필요한 경우 서로 상호동작하도록 되어 있다. 모션 벡터들이 입수되어 디코딩을 위해 사용될 것이다. 사용된 SPS에 따라, 디코더는 적합한 디코딩을 지원하여 확장형 디코딩 (decoded) 비디오 데이터를 파생시킨다.

BL 데이터 스트림이 소정 구현을 위한 별도의 데이터 스트림으로서 제공될 수도 있다는 것 역시 예상할 수 있다. 디코딩된 BL 데이터는, EL의 디코딩 절차 안에서 문제가 검출된 경우에 활용될 수 있다.

도 6은 인코딩에 필요한 모든 구성요소들을 보이는 본 발명에 따른 인코딩 모듈을 나타낸다. 비디오 데이터의 확장형 인코딩 모듈(105)은, 상기 비디오 데이 터 획득 요소(610), 상기 획득한 비디오 데이터에 기반한 기저 계층 생성 요소(620), 상기 비디오 데이터 및 상기 기저 계층에 기초한 상응하는 소정 수의 확장형 인핸스먼트 계층들의 생성 요소(630), 일련의 참조 번호들을 가지는, 상기 기저 혹은 인핸스먼트 계층들의 종속성 식별자 (DependencyID) 생성 요소(640), 선택된 SPS 파라미터들이 실질적으로 동일한 경우, 오직 하나의 SPS가 사용되는, 상기 기저 혹은 인핸스먼트 계층들 각각에 대한 각개의 시퀀스 파라미터 세트 (SPS) 결정 요소(650), 상기 각개의 시퀀스 파라미터 세트를 이용한, 상기 기저 계층 및 상기 인핸스먼트 계층들의 인코딩 요소(660)를 포함한다.

도 7은 디코딩에 필요한 모든 구성요소들을 보인 본 발명에 따른 디코딩 모듈을 나타낸 것이다. 상기 확장형 인코딩(encoded) 비디오 데이터의 디코딩 모듈(105)은, 상기 인코딩 비디오 데이터 획득 요소(710), 상기 인코딩 비디오 데이터 내 기저 계층 및 복수의 인핸스먼트 계층들의 식별 요소(720), 일련의 참조 번호들을 가지며 서로 다른 종속성 아이디를 가진 적어도 두 계층들에 대해 동일한 SPS가 사용될, 상기 인핸스먼트 계층들 각각에 대한 종속성 아이디 (DependencyID) 검출 요소(730), 및 상기 사용된 시퀀스 파라미터 세트를 이용한 상기 베이스 계층 및 상기 디코딩된 인핸스먼트 계층들의 디코딩 요소(740)를 포함한다.

두 모듈들(105 및 106)은 소프트웨어 모듈들이나 하드웨어 모듈들 등으로 구현될 수 있다.

도 8a 및 8b는 최신 확장형 인코딩 방법과, 본 발명의 동작에 따른 방법사이의 주요한 차이점을 보인 것이다. 도 8a는 기저 계층 및 복수의 인핸스먼트 계층 들에 해당하는 각 DependencyID가 개별 시퀀스 파라미터 세트 SPS와 함께 주어짐을 보인다. 이와는 반대로, 본 발명에 따른 인코딩 방법은, 서로 다른 DependencyID들에 대한 시퀀스 파라미터 세트들이 동일한지를 검사하여 코딩에 오직 한 SPS만을 이용한다. 이 예에서는, 오직 한 SPS 1만이 모든 인핸스먼트 계층들의 인코딩에 사용된다.

본 발명이 첨부된 도면들에 따른 실시예들을 참조해 설명되고 있으나, 거기에만 한정되는 것은 아니라는 것이 명백하며, 첨부된 청구항들의 범위 안에서 여러 방식으로 변형될 수 있다는 것을 알 수 있다.

Claims

비디오 데이터를 인코딩하는 방법에 있어서,

- 상기 비디오 데이터를 획득하는 단계;

- 상기 획득한 비디오 데이터에 기초해, 적어도 한 화상을 포함하는 기저 계층 (base layer)을 생성하는 단계;

- 상기 획득한 비디오 데이터에 기초해, 적어도 한 화상을 포함하는 적어도 한 인핸스먼트 계층 (enhancement layer)을 생성하는 단계;

- 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층 각각에 대해, 각각 한 참조 번호와 결부되어 있는 종속성 식별자 (DependencyID)를 생성하는 단계;

- 서로 다른 DependencyID 값들을 가진 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층 각각에 대한 각자의 시퀀스 파라미터 세트 (SPS, sequence parameter set)를 정하고, 이때 실질적으로 동일한 SPS 파라미터들을 가진 여러 개의 기저 계층 및 인핸스먼트 계층들에 대해, 한 SPS를 이용하는 단계; 및

- 정해진 SPS들을 이용하여, 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층을 인코딩하는 단계를 포함함을 특징으로 하는 방법.
제1항에 있어서, 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층을 생성하는 단계는, 상기 비디오 데이터 안의 모션 정보에 기초하며, 상기 모션 정보는 모션 추정 프로세스에 의해 주어짐을 특징으로 하는 방법.
제1항 또는 제2항에 있어서, 상기 시퀀스 파라미터 세트 (SPS)는 SPS 식별자를 포함하고, 상기 SPS 식별자는 슬라이스 헤더 내에서 추가로 참조 되는 화상 파라미터 세트에 의해 참조 됨을 특징으로 하는 방법.
제1항 내지 제3항 중 어느 한 항에 있어서, 상기 기저 계층 및 적어도 한 인핸스먼트 계층으로 된 그룹 중 적어도 둘의 상기 DependencyID들이 동일함을 특징으로하는 방법.
제1항 내지 제4항 중 어느 한 항에 있어서, 상기 SPS는 프로파일 정보, 레벨 정보, 크로마 (chroma) 포맷 정보, 화상 사이즈 정보 및 프레임 크롭 (crop) 정보를 포함하는 그룹에서 적어도 한 가지를 더 포함함을 특징으로 하는 방법.
확장형 인코딩(된) 비디오 데이터를 디코딩하는 방법에 있어서,

- 상기 인코딩 비디오 데이터를 획득하는 단계;

- 상기 인코딩 비디오 데이터 내 기저 계층 및 적어도 한 인핸스먼트 계층을 식별하는 단계;

- 상기 기저 계층 및 인핸스먼트 계층들 각각에 대해, 참조 번호들을 가진 종속성 식별자 (DependencyID)를 검출하고, 실질적으로 동일한 SPS 파라미터들을 가진 다수의 기저 계층 및 인핸스먼트 계층들에 대해, 한 시퀀스 파라미터 세트 (SPS)를 사용하는 단계; 및

- 정해진 상기 시퀀스 파라미터 세트들 (SPS) 각각을 이용해, 상기 기저 계층 및 상기 적어도 한 개의 디코딩(된) 인핸스먼트 게층들을 디코딩하는 단계를 포함함을 특징으로 하는 방법.
제1항 내지 제5항 중 적어도 어느 한 항에서 청구한 것과 같은 방법에 따라 작동함을 특징으로 하는 장치.
제6항에서 청구한 바와 같은 방법에 따라 작동함을 특징으로 하는 장치.
제1항 내지 제6항 중 어느 한 항에서 청구한 것과 같은 방법에 따라 작동함을 특징으로 하는 데이터 전송 지원 시스템.
제7항에서와 같은 적어도 한 장치 및 제8항에서와 같은 한 장치를 포함함을 특징으로 하는 데이터 전송 시스템.
전자 장치에 의해 호스트 되는 컴퓨터 프로세서를 통해 실행되는 컴퓨터 프로그램 코드를 구현한 컴퓨터 판독가능 저장 구조를 구비한 컴퓨터 프로그램 생성물에 있어서, 상기 컴퓨터 프로그램 코드는, 제1항 내지 제5항 중 어느 한 항에 따른 방법을 수행하기 위한 명령어들을 포함함을 특징으로 하는 컴퓨터 프로그램 생 성물.
전자 장치에 의해 호스트 되는 컴퓨터 프로세서를 통해 실행되는 컴퓨터 프로그램 코드를 구현한 컴퓨터 판독가능 저장 구조를 구비한 컴퓨터 프로그램 생성물에 있어서, 상기 컴퓨터 프로그램 코드는, 제6항에 따른 방법을 수행하기 위한 명령어들을 포함함을 특징으로 하는 컴퓨터 프로그램 생성물.
반송파를 통해 구현되고 명령어들을 나타내는 컴퓨터 데이터 신호에 있어서, 상기 명령어는 프로세서에 의해 실행시 제1항 내지 제6항 중 어느 한 항의 동작이 수행되게 함을 특징으로 하는 컴퓨터 데이터 신호.
비디오 데이터의 확장형 인코딩 모듈 (105)에 있어서,

적어도,

- 상기 비디오 데이터를 획득하는 요소(610);

- 상기 획득한 비디오 데이터에 기초해 기저 계층을 생성하는 요소(620);

- 적어도 한 화상을 구비한 적어도 한 인핸스먼트 계층을 생성하는 요소(630);

- 상기 기저 계층 및 인핸스먼트 계층 각각에 대해, 참조 번호와 결부된 종속성 식별자 (DependencyID)를 생성하는 요소(640);

- 서로 다른 DependencyID 값들을 가진 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층 각각에 대해 각개의 시퀀스 파라미터 세트 (SPS)를 결정하고, 실질적으로 동일한 SPS를 가진 여러 기저 계층 및 인핸스먼트 계층에 대해, 한 개의 SPS를 이용하는 요소(650); 및

- 결정된 SPS들을 이용해 상기 기저 계층 및 상기 적어도 한 인핸스먼트 계층을 인코딩하는 요소(660)를 포함함을 특징으로 하는 인코딩 모듈.
확장형 인코딩(된) 비디오 데이터의 디코딩 모듈(105)에 있어서,

적어도,

- 상기 인코딩 비디오 데이터를 획득하는 요소(710);

- 상기 인코딩 비디오 데이터 내 기저 계층 및 적어도 한 인핸스먼트 계층을 식별하는 요소(720);

- 상기 적어도 한 인핸스먼트 계층에 대해, 참조 번호들을 가진 종속성 식별자 (DependencyID)를 검출하고, 서로 다른 종속성 식별자 (DependencyID)들을 가진 적어도 두 계층들에 대해 동일한 SPS가 사용되는 요소(730); 및

- 상기 사용된 시퀀스 파라미터 세트를 이용해 상기 기저 계층 및 상기 디코딩된 인핸스먼트 계층들을 디코딩하는 요소(740)를 포함함을 특징으로 하는 디코딩 모듈.