KR20220143466A - 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치 - Google Patents

공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치 Download PDF

Info

Publication number
KR20220143466A
KR20220143466A KR1020210050019A KR20210050019A KR20220143466A KR 20220143466 A KR20220143466 A KR 20220143466A KR 1020210050019 A KR1020210050019 A KR 1020210050019A KR 20210050019 A KR20210050019 A KR 20210050019A KR 20220143466 A KR20220143466 A KR 20220143466A
Authority
KR
South Korea
Prior art keywords
description information
spatial
viewpoint
spatial description
track data
Prior art date
Application number
KR1020210050019A
Other languages
English (en)
Inventor
유성열
입에릭
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020210050019A priority Critical patent/KR20220143466A/ko
Priority to US18/555,632 priority patent/US20240214649A1/en
Priority to PCT/KR2022/005492 priority patent/WO2022220650A1/ko
Publication of KR20220143466A publication Critical patent/KR20220143466A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Health & Medical Sciences (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 개시의 일 실시 예에 따른 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법은 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보들과 연관되는 트랙 데이터에 포함되는 제1 트랙 데이터 및 제2 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계를 포함할 수 있다. 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플 및 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함할 수 있다. 제2 트랙 데이터는 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 상기 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함할 수 있다.

Description

공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치{A method for processing scene contents and an electronic device performing the same}
본 개시는 통신 시스템에서 제공되는 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치와 관련된다. 보다 구체적으로, 본 개시는 공간 컨텐츠를 임의의 시간적 지점으로부터 재생하기 위해 필요한 정보 조각을 효율적으로 제공하는 방법 및 이를 수행하는 전자 장치와 관련된다.
본 발명의 배경이 되는 종래 기술에는 3차원 공간 상에 2차원 오브젝트들(예: 이미지) 또는 3차원 오브젝트들로 구성된 공간 컨텐츠와 상기 오브젝트를 원하는 위치에 위치시키기 위한 공간 서술(scene description) 기술 및 공간 정보의 오브젝트가 시간의 흐름에 따라 내용이 바뀌는 미디어(예: 동영상)를 사용하기 위한 공간 서술 확장 기술이 포함될 수 있다. 또는, 공간 컨텐츠를 구성하는 공간 서술 정보를 시간의 흐름에 따라 확보하고, 공간 컨텐츠를 임의의 시간적 지점으로부터 재생하기 위해 필요한 공간 서술 정보 또는 공간 서술 정보 조각(또는 패치(patch))을 제공하는 기술이 포함될 수 있다.
공간 컨텐츠를 재생하는 재생 장치는, 작성된 공간 컨텐츠를 임의의 시점에서부터 재생하고자 할 때, 임의의 시간적 지점의 공간 서술 정보를 구성하기 위해 필요한 정보 조각들의 위치를 찾고, 정보 조각들을 읽을 수 있다. 재생 장치는 정보 조각들에 포함되는 명령을 실행하고 공간 서술 정보를 구성(또는 복원)할 수 있다. 이를 통해 재생 장치는 구성된 공간 서술 정보에 따라 오브젝트들을 공간상에 재생할 수 있다.
공간 컨텐츠 제공 장치는 공간 컨텐츠를 구성하는 최초 시점의 공간 서술 정보를 생성할 수 있다. 또한, 공간 컨텐츠 제공 장치는 시간의 흐름에 따라 변경되는 공간 서술 정보들의 변경 내역을 이웃하는 공간 서술 정보들과의 차분으로 작성하고 정보 조각들로 제공할 수 있다. 예를 들어, T1의 시점의 공간 서술 정보는 A, B, 및 C로 구성되는 V1 버전의 공간 서술 정보일 수 있다. 또한, T1 시점 이후의 T2의 시점의 공간 서술 정보는 A, B, C, 및 D로 구성되는 V2 버전의 공간 서술 정보일 수 있다. 이 경우, T2 시점의 공간 서술 정보와 관련해서는, T1 시점의 공간 서술 정보와의 차분인 D를 추가하는 명령이 공간 서술 정보 조각으로서 제공될 수 있다. T2 시점으로부터 재생하고자 하는 재생 장치는, T1 시점의 V1 버전의 공간 서술 정보를 읽고, T2 시점의 공간 서술 정보에 해당하는 공간 서술 정보 조각을 읽을 수 있다. 재생 장치는 V1 버전의 공간 서술 정보에 대해 T2 시점의 공간 서술 정보 조각의 명령(D를 추가하는 명령)을 실시할 수 있다. 이를 통해 재생 장치는 V2 버전의 공간 서술 정보를 획득하고 공간 컨텐츠를 T2 시점부터 재생할 수 있다. 이어서, 재생 장치는 T2 시점 이후의 T3 시점에 대한 공간 컨텐츠를 재생하기 위해, T3 시점의 공간 서술 정보를 획득할 수 있다. 예를 들어, T3 시점의 공간 서술 정보 조각은 T2 시점의 공간 서술 정보와의 차분과 관련된 정보일 수 있다. 재생 장치는 상기와 같이 T1 시점 및 T2 시점의 공간 서술 정보를 획득한 이후에 T3 시점의 공간 서술 정보 조각을 읽음으로써, T3 시점의 공간 서술 정보를 획득할 수 있다.
재생 장치가 T1 시점으로부터 시간적으로 큰 차이가 있는 임의의 시점부터 공간 컨텐츠를 구성하고자 하는 경우, T1으로부터 해당 시점까지의 모든 공간 서술 정보 조각을 읽고, 모든 공간 서술 정보 조각의 명령을 순차적으로 실행해야 할 수 있다. 이 경우, 재생을 시작하고자 하는 상기 임의의 시점과 T1 시점 사이의 차이가 클수록 더 많은 정보에 대한 처리 및 더 많은 명령 실행이 필요할 수 있고, 이로 인해 더 오랜 처리 시간이 소요되는 문제가 발생할 수 있다.
본 개시는 통신 시스템에서 제공되는 공간 컨텐츠를 임의의 시간적 지점으로부터 재생하기 위해 필요한 공간 서술 정보 및 공간 서술 정보 조각을 효율적으로 제공하는 방법에 관한 것이다.
본 개시의 일 실시 예에 따른 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법은, 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 전송하는 단계 및 상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 전송하는 단계를 포함하고, 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고, 상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함하는 것을 특징으로 할 수 있다.
본 개시의 일 실시 예에 따른 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법은, 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 수신하는 단계 및 상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 수신하는 단계를 포함하고, 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고, 상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함하는 것을 특징으로 할 수 있다.
본 발명의 다양한 실시 예에 따른 방법 및 공간 컨텐츠 제공 장치는 통신 시스템에서 제공되는 공간 컨텐츠를 임의의 시간적 지점으로부터 재생하기 위해 필요한 정보 조각을 보다 효율적으로 제공할 수 있다.
도 1a는 제1 비교 예 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 1b는 제2 비교 예에 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 2a는 다양한 실시 예에 따른, 독립 공간 서술 정보(independent scene description, ISD)와 종속 공간 서술 정보(dependent scene description, DSD)의 관계를 나타낸다.
도 2b는 다양한 실시 예에 따른, 독립 공간 서술 정보와 종속 공간 서술 정보의 관계를 표시하는 방법을 나타낸다.
도 3은 일 실시 예에 따른, 공간 컨텐츠 수신기 및 공간 컨텐츠 송신기의 블록도를 나타낸다.
도 4는 일 실시 예에 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 5는 일 실시 예에 따른, 제1 트랙 데이터의 구성을 나타낸다.
도 6은 일 실시 예에 따른, 샘플의 구성을 나타낸다.
도 7은 일 실시 예에 따른, 제1 트랙 데이터의 구성에 대한 세부 속성을 나타낸다.
도 8은 일 실시 예에 따른, 제1 트랙 데이터 및 제2 트랙 데이터의 구성을 나타낸다.
도 9는 일 실시 예에 따른, 공간 컨텐츠 수신기가 제1 트랙 데이터 및 제2 트랙 데이터를 수신하고 공간 컨텐츠를 재생하는 방법을 나타낸다.
도 10은 일 실시 예에 따른, 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법을 나타내는 흐름도이다.
도 11은 일 실시 예에 따른, 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법을 나타내는 흐름도이다.
도 12는 일 실시 예에 따른, 공간 컨텐츠를 처리하는 방법의 효과를 나타내는 도면이다.
도면의 설명과 관련하여, 동일 또는 유사한 구성요소에 대해서는 동일 또는 유사한 참조 부호가 사용될 수 있다.
본 문서의 다양한 실시 예들 및 이에 사용된 용어들은 본 문서에 기재된 기술적 특징들을 특정한 실시 예들로 한정하려는 것이 아니며, 해당 실시 예의 다양한 변경, 균등물, 또는 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 또는 관련된 구성요소에 대해서는 유사한 참조 부호가 사용될 수 있다. 아이템에 대응하는 명사의 단수 형은 관련된 문맥상 명백하게 다르게 지시하지 않는 한, 상기 아이템 한 개 또는 복수 개를 포함할 수 있다. 본 문서에서, "A 또는 B", "A 및 B 중 적어도 하나", "A 또는 B 중 적어도 하나", "A, B 또는 C", "A, B 및 C 중 적어도 하나", 및 "A, B, 또는 C 중 적어도 하나"와 같은 문구들 각각은 그 문구들 중 해당하는 문구에 함께 나열된 항목들 중 어느 하나, 또는 그들의 모든 가능한 조합을 포함할 수 있다. "제 1", "제 2", 또는 "첫째" 또는 "둘째"와 같은 용어들은 단순히 해당 구성요소를 다른 해당 구성요소와 구분하기 위해 사용될 수 있으며, 해당 구성요소들을 다른 측면(예: 중요성 또는 순서)에서 한정하지 않는다. 어떤(예: 제 1) 구성요소가 다른(예: 제 2) 구성요소에, "기능적으로", “전기적으로” 또는 "통신적으로"라는 용어와 함께 또는 이런 용어 없이, "커플드" 또는 "커넥티드"라고 언급된 경우, 그것은 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로(예: 유선으로), 무선으로, 또는 제 3 구성요소를 통하여 연결될 수 있다는 것을 의미한다.
본 문서의 다양한 실시 예들에서 사용된 용어 "모듈"은 하드웨어, 소프트웨어 또는 펌웨어로 구현된 유닛을 포함할 수 있으며, 예를 들면, 로직, 논리 블록, 부품, 또는 회로와 같은 용어와 상호 호환적으로 사용될 수 있다. 모듈은, 일체로 구성된 부품 또는 하나 또는 그 이상의 기능을 수행하는, 상기 부품의 최소 단위 또는 그 일부가 될 수 있다. 예를 들면, 일 실시 예에 따르면, 모듈은 ASIC(application-specific integrated circuit)의 형태로 구현될 수 있다.
본 문서의 다양한 실시 예들은 기기(machine) 의해 읽을 수 있는 저장 매체(storage medium)에 저장된 하나 이상의 명령어들을 포함하는 소프트웨어로서 구현될 수 있다. 예를 들면, 기기의 프로세서는, 저장 매체로부터 저장된 하나 이상의 명령어들 중 적어도 하나의 명령을 호출하고, 그것을 실행할 수 있다. 이것은 기기가 상기 호출된 적어도 하나의 명령어에 따라 적어도 하나의 기능을 수행하도록 운영되는 것을 가능하게 한다. 상기 하나 이상의 명령어들은 컴파일러에 의해 생성된 코드 또는 인터프리터에 의해 실행될 수 있는 코드를 포함할 수 있다. 기기로 읽을 수 있는 저장 매체는, 비일시적(non-transitory) 저장 매체의 형태로 제공될 수 있다. 여기서, '비일시적'은 저장 매체가 실재(tangible)하는 장치이고, 신호(signal)(예: 전자기파)를 포함하지 않는다는 것을 의미할 뿐이며, 이 용어는 데이터가 저장 매체에 반영구적으로 저장되는 경우와 임시적으로 저장되는 경우를 구분하지 않는다.
일 실시 예에 따르면, 본 문서에 개시된 다양한 실시 예들에 따른 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다. 컴퓨터 프로그램 제품은 기기로 읽을 수 있는 저장 매체(예: compact disc read only memory(CD-ROM))의 형태로 배포되거나, 또는 어플리케이션 스토어(예: 플레이 스토어TM)를 통해 또는 두 개의 사용자 장치들(예: 스마트 폰들) 간에 직접, 온라인으로 배포(예: 다운로드 또는 업로드)될 수 있다. 온라인 배포의 경우에, 컴퓨터 프로그램 제품의 적어도 일부는 제조사의 서버, 어플리케이션 스토어의 서버, 또는 중계 서버의 메모리와 같은 기기로 읽을 수 있는 저장 매체에 적어도 일시 저장되거나, 임시적으로 생성될 수 있다.
다양한 실시 예들에 따르면, 상기 기술한 구성요소들의 각각의 구성요소(예: 모듈 또는 프로그램)는 단수 또는 복수의 개체를 포함할 수 있으며, 복수의 개체 중 일부는 다른 구성요소에 분리 배치될 수도 있다. 다양한 실시 예들에 따르면, 전술한 해당 구성요소들 중 하나 이상의 구성요소들 또는 동작들이 생략되거나, 또는 하나 이상의 다른 구성요소들 또는 동작들이 추가될 수 있다. 대체적으로 또는 추가적으로, 복수의 구성요소들(예: 모듈 또는 프로그램)은 하나의 구성요소로 통합될 수 있다. 이런 경우, 통합된 구성요소는 상기 복수의 구성요소들 각각의 구성요소의 하나 이상의 기능들을 상기 통합 이전에 상기 복수의 구성요소들 중 해당 구성요소에 의해 수행되는 것과 동일 또는 유사하게 수행할 수 있다. 다양한 실시 예들에 따르면, 모듈, 프로그램 또는 다른 구성요소에 의해 수행되는 동작들은 순차적으로, 병렬적으로, 반복적으로, 또는 휴리스틱하게 실행되거나, 상기 동작들 중 하나 이상이 다른 순서로 실행되거나, 생략되거나, 또는 하나 이상의 다른 동작들이 추가될 수 있다.
도 1a는 제1 비교 예에 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 1a를 참조하면, 공간 컨텐츠를 전송하기 위한 제1 비교 예가 도시된다. 공간 컨텐츠는 T1 시점으로부터 T7 시점까지 각각의 시점에 대응하는 공간 서술 정보들(101, 102, 103, 104, 105, 106, 107)을 포함하도록 구성될 수 있다. 공간 컨텐츠의 전송은 제1 트랙 데이터(110a)의 전송으로 이루어 질 수 있다. 제1 트랙 데이터(110a)는 공간 서술 정보 조각들을 포함하는 복수의 샘플들(111a, 112a, 113a, 114a, 115a, 116a, 117a)을 포함할 수 있다. 도 1a에 도시된 바와 같이, 각각의 시점에 해당하는 공간 서술 정보 조각들은 바로 앞선 시점의 공간 서술 정보와의 차분을 나타내는 공간 서술 정보 조각들을 포함할 수 있고, T1 시점의 공간 서술 정보와의 차분을 나타내는 공간 서술 정보 조각들을 포함할 수도 있다. 공간 서술 정보들은 패치(patch)로 지칭될 수도 있으며, 예컨대, T1 시점의 공간 서술 정보와 T2 시점의 공산 서술 정보의 차이를 나타내는 공간 서술 정보 조각은 patch 1 to 2로 표시될 수 있다.
일 실시 예에서, T5 시점부터 공간 컨텐츠를 재생하고자 하는 재생 장치는 T1시점의 V1 버전의 공간 서술 정보(101)를 획득하기 위해 샘플(111a)에 포함된 공간 서술 정보 조각을 읽고, 샘플(115a)에 포함된 T5 시점의 공간 서술 정보 조각을 읽을 수 있다. 재생 장치는 V1 버전의 공간 서술 정보(101)에 대해 T5 시점의 공간 서술 정보 조각 명령을 실시함으로써, 예컨대, V1 버전의 공간 서술 정보(101)와 V5 버전의 공간 서술 정보(105)의 차분 정보를 이용함으로써, V5 버전의 공간 서술 정보(105)를 획득할 수 있다.
도 1b는 제2 비교 예에 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 1b를 참조하면, 공간 컨텐츠를 전송하기 위한 제2 비교 예가 도시된다. 공간 컨텐츠는 T1 시점으로부터 T7 시점까지 각각의 시점에 대응하는 공간 서술 정보들(101, 102, 103, 104, 105, 106, 107)을 포함하도록 구성될 수 있다. 공간 컨텐츠의 전송은 제1 트랙 데이터(110b) 및 제2 트랙 데이터(120b)의 전송으로 이루어 질 수 있다. 제1 트랙 데이터(110b) 및 제2 트랙 데이터(120b)는 공간 서술 정보 조각들을 포함하는 복수의 샘플들(111b, 112b, 113b, 114b, 115b, 116b, 117b, 123b, 125b, 127b)을 포함할 수 있다. 도 1a에 도시된 바와 같이, 제1 트랙 데이터(110b)에 포함되는 공간 서술 정보 조각들은 해당 시점의 공간 서술 정보와 바로 앞선 시점의 공간 서술 정보의 차분을 나타내는 공간 서술 정보 조각들을 포함할 수 있다. 제2 트랙 데이터(120b)에 포함되는 샘플들(123b, 125b, 127b)은 해당 시점의 공간 서술 정보(103, 105, 107)에 대한 공간 서술 정보 조각을 포함할 수 있다. 제2 트랙 데이터(120b)에 포함되는 상기 공간 서술 정보 조각들은 다른 공간 서술 정보와의 차분을 나타내는 것이 아닌 온전한 공간 서술 정보에 대한 정보이다.
일 실시 예에서, T5 시점부터 공간 컨텐츠를 재생하고자 하는 재생 장치는 다른 시점의 공간 서술 정보, 예컨대, T1 시점의 공간 서술 정보(101)를 획득할 필요 없이, T5 시점의 공간 서술 정보(105)를 바로 획득함으로써, T5 시점부터 공간 컨텐츠를 재생할 수 있다.
도 2a는 다양한 실시 예에 따른, 독립 공간 서술 정보(independent scene description, ISD)와 종속 공간 서술 정보(dependent scene description, DSD)의 관계를 나타낸다. 도 2b는 다양한 실시 예에 따른, 독립 공간 서술 정보와 종속 공간 서술 정보의 관계를 표시하는 방법을 나타낸다.
도 2a 및 도 2b를 참조하면, 독립 공간 서술 정보(211) 및 종속 공간 서술 정보(212)가 도시된다. 일 실시 예에서, 독립 공간 서술 정보(211)는 차분 명령(222)의 실행과 무관하게 생성되는 공간 서술 정보로 이해될 수 있다. 일 실시 예에서, 종속 공간 서술 정보(212)는 독립 공간 서술 정보(211)에 대하여, 차분 명령(222)의 실시로 인해 생성되는 공간 서술 정보로 이해될 수 있다.
공간 서술 정보는 공간 컨텐츠를 구성하는 정보로 이해될 수 있다. 공간 서술 정보는 공간상에 오브젝트를 배치하기 위해 작성될 수 있다. 공간 서술 정보가 작성되는 것은 공간 서술 정보가 생성되는 것과 동일 또는 유사하게 이해될 수 있다. 다양한 실시 예에서, 공간 서술 정보는 공간 컨텐츠 상의 오브젝트를 참조하여 생성될 수 있다. 공간 서술 정보가 참고하는 오브젝트는 2차원 오브젝트 또는 3차원 오브젝트일 수 있다. 다양한 실시 예에서, 상기 2차원 및 3차원은 시각 뿐만 아니라 청각 표현에서의 차원도 포함한다. 예를 들어, 오브젝트는 시각적 오브젝트로서 이미지, 비디오 또는 컴퓨터 그래픽을 포함할 수 있고, 청각적 오브젝트로서 오디오 또는 오디오 구성 요소를 포함할 수 있다.
공간 서술 정보는 공간 컨텐츠의 시간적 흐름에 따라 각 시점에 대응될 수 있다. 예를 들어, 공간 컨텐츠가 초당 60 프레임의 속도를 지원하는 경우, 1초의 구간에 해당하는 공간 컨텐츠는 60개의 공간 서술 정보를 포함할 수 있고, 각각의 공간 서술 정보는 1/60초 마다 정의되는 각각의 시점에 대응될 수 있다. 다양한 실시 예에서, 공간 컨텐츠가 초당 60 프레임의 속도를 지원하는 경우, 1초의 구간에 해당하는 공간 컨텐츠는 30개의 공간 서술 정보를 포함할 수도 있고 20개의 공간 서술 정보를 포함할 수도 있다. 예를 들면, 공간 컨텐츠에 포함되는 공간 서술 정보의 개수는 공간 컨텐츠가 지원하는 프레임 속도에 기초할 수 있다.
시간의 흐름에 따라 각각의 시점에 대응하는 공간 서술 정보는 이웃하는 시점에 대응하는 공간 서술 정보와 동일할 수도 있고, 상이할 수도 있다. 특정 시점에 대응하는 공간 서술 정보가 바로 앞서는 시점에 대응하는 공간 서술 정보와 상이한 경우, 상기 이웃하는 공간 서술 정보들 사이의 차이는 오브젝트의 위치, 방향 등 이미 공간 서술 정보 내에 등록된 오브젝트의 구성, 정보, 또는 속성의 변경을 포함할 수 있다. 또한, 상기 이웃하는 공간 서술 정보들 사이의 차이는 새로운 오브젝트의 추가 또는 기존 오브젝트의 삭제 등을 포함할 수도 있다.
전송이나 저장 관점에서, 서로 다른 시점의 공간 서술 정보들의 구성 중 적어도 일부가 동일한 경우, 동일한 부분을 포함하는 공간 서술 정보 전체를 전송 또는 저장하는 것은 비효율적일 수 있다. 이에 따라, 일부 공간 서술 정보는 지정된 시점의 공간 서술 정보를 참조하고, 상기 참조된 공간 서술 정보와의 차이에 대한 정보만을 전송 또는 저장하도록 설정될 수 있다. 이 경우, 상기 일부 공간 서술 정보는 상기 참조된 공간 서술 정보 및 상기 참조된 공간 서술 정보와의 차이를 통해 도출될 수 있다.
도 2a 및 도 2b를 참조하면, 서로 상이한 공간 서술 정보들 사이에서, 독립 공간 서술 정보(211)는 종속 공간 서술 정보(212)와의 관계에서 있어서, 참조되는 대상으로 이해될 수 있고, 다른 공간 서술 정보를 참조하지 않는 독립적인 정보로 이해될 수 있다. 종속 공간 서술 정보(212)는 독립 공간 서술 정보(211)를 참조하는 것이므로 종속적인 정보로 이해될 수 있다. 또한, 종속 공간 서술 정보(212)에 있어서, 독립 공간 서술 정보(211)에 대비한 차분을 나타내는 차분 명령(222) 역시 독립 공간 서술 정보(211)를 참조하는 것으로 이해될 수 있고 종속적인 정보로 이해될 수 있다. 독립 공간 서술 정보(211) 및 차분 명령(222)은 차분 명령 실행기(201)의 입력으로 제공될 수 있고, 그 결과 종속 공간 서술 정보(212)가 도출될 수 있다.
또한 독립 공간 서술 정보(211), 종속 공간 서술 정보(212), 차분 명령(222)의 관계는 도 2b에 도시된 바와 같이, 실선 화살표 및 점선 화살표로 표시될 수 있다. 예를 들어, 차분 명령(222)으로부터 점선 화살표로 연결된 공간 서술 정보는 차분 명령이 종속되는 참조 공간 서술 정보(referenced scene description)(즉, 독립 공간 서술 정보(211))로 이해될 수 있다. 예를 들어 차분 명령(222)으로부터 실선 화살표로 연결된 공간 서술 정보는 상기 참조 공간 서술 정보에 대해 차분 명령(222)이 실행된 결과로서 도출되는 종속 공간 서술 정보(212)로 이해될 수 있다.
도 3은 일 실시 예에 따른, 공간 컨텐츠 수신기 및 공간 컨텐츠 송신기의 블록도를 나타낸다.
도 3을 참조하면, 공간 컨텐츠 수신기(310)는 프로세서(311), 메모리(312), 및 송수신부(313)를 포함할 수 있고, 공간 컨텐츠 송신기(320)는 프로세서(321) 메모리(322) 및 송수신부(323)를 포함할 수 있다. 다양한 실시 예에서, 공간 컨텐츠 수신기(310) 및 공간 컨텐츠 송신기(320)의 구성은 도 3에 도시된 바에 한정되지 않는다. 예를 들어, 공간 컨텐츠 수신기(310) 또는 공간 컨텐츠 송신기(320)는 도 3에 도시되지 않은 구성을 추가로 더 포함할 수도 있다. 다른 예를 들어, 공간 컨텐츠 수신기(310) 또는 공간 컨텐츠 송신기(320)에 포함되는 프로세서(311, 321), 메모리(312, 322), 및 송수신부(313, 323) 중 적어도 일부는 하나의 칩(chip) 형태로 구현될 수도 있다.
일 실시 예에 따르면, 공간 컨텐츠 수신기(310)는 공간 컨텐츠 재생 장치, 재생 장치, 또는 수신 장치 등과 동일한 것으로 이해될 수 있다.
프로세서(311)는 공간 컨텐츠 수신기(310)의 동작에 대한 일련의 과정을 제어할 수 있다. 예를 들면, 프로세서(311)는 수신된 제1 트랙 데이터 또는 제2 트랙 데이터로부터 샘플들을 획득하거나, 샘플들을 읽고 처리하는 동작을 제어할 수 있다. 다른 예를 들면, 프로세서(311)는 획득된 샘플들을 이용하여 공간 서술 정보를 복원 또는 획득하는 동작을 제어하거나, 공간 컨텐츠에 대해 임의의 시점에 접근하는 동작을 제어할 수도 있다. 프로세서(311)는 하나 이상일 수 있으며, 메모리(312)에 저장된 프로그램을 실행함으로써 전술한 동작들의 제어를 수행할 수 있다.
메모리(312)는 공간 컨텐츠 수신기(310)가 수신한 데이터 또는 프로세서(311)가 처리한 데이터를 저장할 수 있고, 프로세서(311)의 동작과 관련된 프로그램들을 저장할 수 있다. 메모리(312)는 롬(ROM), 램(RAM), 하드디스크, CD-ROM 또는 DVD 등과 같은 저장 매체 또는 저장 매체들의 조합으로 구성될 수 있다. 메모리(312)는 하나 이상일 수 있다.
송수신부(313)는 공간 컨텐츠 수신기(310) 외부의 장치, 예컨대, 공간 컨텐츠 송신기(320)와 신호를 송수신할 수 있다. 상기 송수신되는 신호는 제1 트랙 데이터 및 제2 트랙 데이터를 포함할 수 있다.
일 실시 예에 따르면, 공간 컨텐츠 송신기(320)는 공간 컨텐츠 제공 장치, 공간 컨텐츠 생성 장치, 또는 송신 장치 등과 동일한 것으로 이해될 수 있다.
프로세서(321)는 공간 컨텐츠 송신기(320)의 동작에 대한 일련의 과정을 제어할 수 있다. 예를 들면, 프로세서(321)는 공간 컨텐츠를 구성하는 공간 서술 정보를 생성하거나 공간 서술 정보들을 상호 비교함으로써 차분을 나타내는 정보를 생성하는 동작을 제어할 수 있다. 다른 예를 들면, 프로세서(321)는 공간 서술 정보 및 차분 명령을 이용하여 제1 트랙 데이터 또는 제2 트랙 데이터를 생성하거나, 생성된 제1 트랙 데이터 또는 제2 트랙 데이터를 송신하는 동작을 제어할 수도 있다. 프로세서(321)는 하나 이상일 수 있으며, 메모리(322)에 저장된 프로그램을 실행함으로써 전술한 동작들의 제어를 수행할 수 있다.
메모리(322)는 프로세서(321)가 처리한 데이터 또는 공간 컨텐츠 송신기(320)가 외부로 전송할 데이터를 저장할 수 있고, 프로세서(321)의 동작과 관련된 프로그램들을 저장할 수 있다. 메모리(322)는 롬(ROM), 램(RAM), 하드디스크, CD-ROM 또는 DVD 등과 같은 저장 매체 또는 저장 매체들의 조합으로 구성될 수 있다. 메모리(322)는 하나 이상일 수 있다.
송수신부(323)는 공간 컨텐츠 송신기(320) 외부의 장치, 예컨대, 공간 컨텐츠 수신기(310)와 신호를 송수신할 수 있다. 상기 송수신되는 신호는 제1 트랙 데이터 및 제2 트랙 데이터를 포함할 수 있다.
도 4는 일 실시 예에 따른, 공간 컨텐츠를 전송하기 위한 공간 서술 정보 및 공간 서술 정보 조각을 나타낸다.
도 4를 참조하면, 공간 컨텐츠는 T1 시점으로부터 T7 시점까지 각각의 시점에 대응하는 공간 서술 정보들(101, 102, 103, 104, 105, 106, 107)을 포함하도록 구성될 수 있다. 일 실시 예에 따르면, 공간 컨텐츠 송신기에서 공간 컨텐츠 수신기로의 공간 컨텐츠 전달은, 제1 트랙 데이터(410) 및 제2 트랙 데이터(420)의 전송으로 이루어질 수 있다.
일 실시 예에 따르면, 제1 트랙 데이터(410)는 공간 컨텐츠를 구성하는 복수의 공간 서술 정보들(101, 102, 103, 104, 105, 106, 107)과 연관되는 데이터이며, 복수의 시점들에 각각 대응하는 복수의 샘플들(411, 412, 413, 414, 415, 416, 417)을 포함할 수 있다. 복수의 샘플들(411, 412, 413, 414, 415, 416, 417)은 공간 서술 정보 조각을 포함할 수 있다. 예를 들어, 제1 트랙 데이터(410)는 T1 시점(즉, 제1 시점)에 대응하는 샘플(411)을 포함할 수 있으며, 샘플(411)은 공간 서술 정보 조각으로서 T1 시점의 공간 서술 정보(101)를 포함할 수 있다. 다른 예를 들어, 제1 트랙 데이터는 T2 시점에 대응하는 샘플(412)를 포함할 수 있으며, 샘플(412)은 공간 서술 정보 조각으로서 T2 시점의 차분 명령을 포함할 수 있다. 상기 T2 시점의 차분 명령은 T2 시점의 공간 서술 정보(102)와 T1 시점의 공간 서술 정보(101)의 차이를 나타낼 수 있다. 즉, 상기 T2 시점의 차분 명령은 T1 시점의 공간 시점 정보(101)를 참조하여, T2 시점의 공간 시점 정보(102)에서 변경되는 내용을 나타낼 수 있다. 또 다른 예를 들어, 제1 트랙 데이터(410)는 T3 시점에 대응하는 샘플(413)을 포함할 수 있고, 샘플(413)은 T3 시점의 차분 명령 즉, T3 시점의 공간 서술 정보(103)와 T2 시점의 공간 서술 정보(102)의 차이를 나타내는 차분 명령을 포함할 수 있다.
일 실시 예에 따르면, 제2 트랙 데이터(420)는 공간 컨텐츠를 구성하는 복수의 공간 서술 정보들(101, 102, 103, 104, 105, 106, 107)과 연관되는 데이터이며, 복수의 시점들 중 일부의 시점들에 각각 대응하는 복수의 샘플들(423, 425, 427)을 포함할 수 있다. 예를 들어, 제2 트랙 데이터(420)는 제1 타입 샘플(423), 제2 타입 샘플(425), 및 제3 타입 샘플(427)을 포함할 수 있다.
일 실시 예에 따르면, 제1 타입 샘플(423)은 제1 시점(예컨대, T1 시점) 이후의 제2 시점(예컨대, T3 시점)의 공간 서술 정보와 연관될 수 있다. 제1 타입 샘플(423)은 도 4에서 T3 시점의 공간 서술 정보(103)와 연관되는 것으로 도시되었으나, 이에 한정되지 않으며, 제1 시점(예컨대, T1 시점) 이후의 다른 시점의 공간 서술 정보와 연관될 수도 있다. 일 실시 예에 따르면, 제1 타입 샘플(423)은 연관되는 제2 시점, 예컨대, T3 시점의 공간 서술 정보(103) 및 상기 제2 시점 이전의 지정된 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다. 상기 제2 시점 이전의 지정된 시점은 다양하게 설정될 수 있다. 예를 들어, 상기 지정된 시점은 제1 시점으로 지정될 수도 있다. 도 4의 실시 예에서, 상기 지정된 시점은 T1 시점으로 도시되어 있으며, 제1 타입 샘플(423)은 제2 시점(T3 시점)의 공간 서술 정보(103) 및 제2 시점 이전인 T1 시점의 공간 서술 정보(101) 사이의 차이를 나타내는 차분 명령을 포함하는 설명될 수 있다.
제1 타입 샘플(423)이 제2 시점 및 제1 타입 샘플(423)이 참조하게 되는 제2 시점 이전의 지정된 시점은 다양하게 설정될 수 있다. 일 실시 예에 따르면, 상기 제2 시점 및 상기 지정된 시점은 상기 제2 시점의 공간 서술 정보 및 상기 지정된 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정될 수 있다. 예를 들면, 상기 제2 시점 및 상기 지정된 시점은 상기 제2 시점의 공간 서술 정보 및 상기 지정된 시점의 공간 서술 정보의 연관성이 지정된 수준 보다 크도록 설정될 수 있다. 다양한 실시 예에서, 상기 차이가 지정된 수준 보다 작은지 또는 상기 연관성이 지정된 수준 보다 큰지에 대한 판단은, 제1 타입 샘플(423)의 데이터 크기에 기초하여 판단될 수 있다.
일 실시 예에 따르면, 제2 타입 샘플(425)은 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관될 수 있다. 제2 타입 샘플(425)은 도 4에서 T5 시점의 공간 서술 정보(105)와 연관되는 것으로 도시되었으나, 이에 한정되지 않으며, 제1 타입 샘플(423)이 연관되는 제2 시점(예컨대, T3 시점) 이후의 다른 시점의 공간 서술 정보와 연관될 수도 있다. 일 실시 예에 따르면, 제2 타입 샘플(425)은 제3 시점(예컨대, T5 시점)의 공간 서술 정보 및 제2 시점(예컨대, T3 시점)의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다.
제2 타입 샘플(425)이 연관되는 제3 시점은 다양하게 설정될 수 있다. 일 실시 예에서 따르면, 상기 제3 시점은 제3 시점의 공간 서술 정보 및 제2 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정될 수 있다. 예를 들면, 상기 제3 시점은, 제3 시점의 공간 서술 정보 및 제2 시점의 공간 서술 정보 사이의 연관성이 지정된 수준 보다 크도록 설정될 수 있다. 다양한 실시 예에서, 상기 차이가 지정된 수준 보다 작은지 또는 상기 연관성이 지정된 수준 보다 큰지에 대한 판단은, 제2 타입 샘플(425)의 데이터 크기에 기초하여 판단될 수 있다. 다른 실시 예에서 따르면, 상기 제3 시점은 제3 시점의 공간 서술 정보 및 제3 타입 샘플이 연관되는 제4 시점(예컨대, T7 시점)의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정될 수 있다. 예를 들면, 상기 제3 시점은, 제3 시점의 공간 서술 정보 및 제4 시점(예컨대, T7 시점)의 공간 서술 정보 사이의 연관성이 지정된 수준 보다 크도록 설정될 수 있다.
일 실시 예에 따르면, 제3 타입 샘플(427)은 제4 시점의 공간 서술 정보와 연관될 수 있다. 본 개시에서 제4 시점은 설명의 편의상 제3 시점 이후인 것으로 작성되었으나, 제4 시점은 제3 시점과 무관할 수 있다. 예를 들어, 제4 시점은 제2 시점보다 앞서는 시점일 수도 있고, 제2 시점 및 제3 시점 사이의 시점일 수도 있다. 제3 타입 샘플(427)은 도 4에서 T7 시점의 공간 서술 정보(107)와 연관되는 것으로 도시되었으나, 이에 한정되지 않으며, 제2 타입 샘플(425)이 연관되는 제2 시점(예컨대, T5 시점) 이후 다른 시점의 공간 서술 정보와 연관될 수도 있다. 일 실시 예에 따르면, 제3 타입 샘플(427)은 제4 시점(예컨대, T7 시점)의 공간 서술 정보를 포함할 수 있다.
제3 타입 샘플(427)이 연관되는 제4 시점은 다양하게 설정될 수 있다. 일 실시 예에 따르면, 상기 제4 시점은 제4 시점의 공간 서술 정보 및 제1 타입 샘플(423)이 참조하는 지정된 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 크도록 설정될 수 있다. 예를 들면, 상기 제4 시점은 제4 시점의 공간 서술 정보 및 상기 지정된 시점의 공간 서술 정보의 연관성이 지정된 수준 보다 작도록 설정될 수 있다. 다양한 실시 예에서, 상기 차이가 지정된 수준 보다 큰지 또는 상기 연관성이 지정된 수준 보다 작은지에 대한 판단은, 제3 타입 샘플(427)의 데이터 크기에 기초하여 판단될 수 있다.
도 5는 일 실시 예에 따른, 제1 트랙 데이터의 구성을 나타낸다.
도 5를 참조하면, 공간 컨텐츠는 제1 트랙 데이터(510, 560)를 통해 송신단(502)으로부터 수신단(501)으로 전송될 수 있다. 송신단(502)은 공간 컨텐츠 송신기(예: 도 3의 공간 컨텐츠 송신기(320)) 또는 공간 컨텐츠 송신기의 송수신부(예: 도 3의 송수신부(323))에 해당하는 것으로 이해될 수 있고, 수신단(501)은 공간 컨텐츠 수신기(예: 도 3의 공간 컨텐츠 수신기(310)) 또는 공간 컨텐츠 수신기의 송수신부(예: 도 3의 송수신부(313))에 해당하는 것으로 이해될 수 있다.
다양한 실시 예에서, 제1 트랙 데이터(510, 560)는 하나 이상일 수 있다. 예를 들어, 공간 컨텐츠는 지정된 시간 간격에 따라 분리될 수 있고, 상기 분리된 공간 컨텐츠는 분리된 트랙 데이터들을 통해 각각 전달될 수 있다. 도 5에서 제1 트랙 데이터(510, 560)는 두 개의 트랙 데이터로 도시되었으나, 제1 트랙 데이터(510, 560)의 개수는 도 5에 도시된 바에 한정되지 않는다. 또한, 도 5에서 제2 트랙 데이터는 도시되지 않았으나, 제2 트랙 데이터 역시 제1 트랙 데이터(510, 560)와 동일 또는 유사하게, 하나 이상일 수 있다. 도 5의 설명에서 제1 트랙 데이터(510, 560)에 대한 설명 중 적어도 일부는 제2 트랙 데이터에 대해서도 동일 또는 유사하게 적용될 수 있다.
일 실시 예에 따르면, 제1 트랙 데이터(510, 560)는 복수의 시점들 각각에 대응하는 복수의 샘플들을 포함할 수 있으며, 각각의 샘플은 독립 공간 서술 정보(511, 565) 또는 차분 명령(532, 533, 534, 586, 587, 588)을 포함할 수 있다. 도 5에서 제1 트랙 데이터(510, 560)에 종속 공간 서술 정보(522, 523, 524, 576, 577, 578)가 포함되는 것처럼 도시되었으나, 종속 공간 서술 정보(522, 523, 524, 576, 577, 578)는 수신단(501)에서 독립 공간 서술 정보(511, 565) 및 차분 명령(532, 533, 534, 586, 587, 588)에 기초하여 도출될 수 있을 뿐, 제1 트랙 데이터(510, 560)에 포함되거나 제1 트랙 데이터(510, 560)를 통해 수신단(501)으로 전송되는 것은 아니다. 예를 들어, V2 버전의 종속 공간 서술 정보(522)는 V1 버전의 독립 공간 서술 정보(511) 및 V1 버전의 차분 명령(532)이 수신단(501)에서 수신되면 수신단(501)에서의 처리에 의해 도출될 수 있을 뿐, 제1 트랙 데이터(510)에 포함되거나 제1 트랙 데이터(510)를 통해 수신단(501)으로 전송되지는 않는다.
일 실시 예에 따르면, 제1 트랙 데이터(510, 560)에 포함되는 차분 명령들(532, 533, 534, 586, 587, 588) 및 독립 공간 서술 정보(511, 565)는 고유의 버전 정보를 포함할 수 있다. 일 실시 예에서, 복수의 시점들 각각에 대응하는 복수의 공간 서술 정보들(511, 522, 523, 524, 565, 576, 577, 578) 각각은 고유의 버전 정보를 포함할 수 있다. 일 실시 예에 따르면, 차분 명령들(532, 533, 534, 586, 587, 588)의 각각의 고유의 버전 정보는 각각의 차분 명령이 대응하는 시점의 공간 서술 정보와 비교되는 참조 공간 서술 정보에 포함되는 버전 정보와 동일하도록 설정될 수 있다. 예를 들어, 차분 명령(532)의 고유의 버전 정보는 차분 명령이 대응하는 시점의 공간 서술 정보(522)와 비교되는 참조 공간 서술 정보인 독립 공간 서술 정보(511)의 버전 정보와 동일하도록 설정될 수 있다. 다른 예를 들어, 차분 명령(533)의 고유의 버전 정보는 차분 명령이 대응하는 시점의 공간 서술 정보(523)와 비교되는 참조 공간 서술 정보인 종속 공간 서술 정보(522)의 버전 정보와 동일하도록 설정될 수 있다.
일 실시 예에 따르면, 수신단(501)에서 차분 명령(532, 533, 534, 586, 587, 588)의 실행 시에는, 차분 명령(532, 533, 534, 586, 587, 588)의 버전 정보와 적용될 공간 서술 정보(511, 522, 523, 565, 576, 577)의 버전 정보가 동일한 지 여부를 판단하는 동작이 수행될 수 있다. 이를 통해, 수신단(501)은 버전 정보가 동일한 경우에만 차분 명령(532, 533, 534, 586, 587, 588)을 수행할 수 있고, 차분 명령(532, 533, 534, 586, 587, 588)이 적용된 공간 서술 정보(522, 523, 524, 576, 577, 58)를 생성할 수 있다.
상기와 같이 차분 명령(532, 533, 534, 586, 587, 588)의 고유의 버전 정보가 설정됨에 따라, 차분 명령(532, 533, 534, 586, 587, 588)이 적용될 대상은 명확하게 지정될 수 있다. 또한, 이를 통해, 수신단(501)은 각각의 차분 명령(532, 533, 534, 586, 587, 588)을 적용함으로써 도출되는 공간 서술 정보들(즉, 종속 공간 서술 정보들)에 오류가 발생하였는지 또는 트랙 데이터의 전송 시 패킷 누락이나 오류가 발생하였는지 여부를 판단할 수도 있다.
도 6은 일 실시 예에 따른, 샘플의 구성을 나타낸다.
도 6을 참조하면, 샘플(601)은 헤더(header)(610) 및 페이로드(payload)(620)를 포함할 수 있다. 다양한 실시 예에서, 헤더(610)는 샘플(601)의 맨 앞에 위치한 보충 데이터로 이해될 수 있으며, 페이로드(620)는 헤더(610) 뒤에 위치한 데이터로서 샘플(601) 전송의 주된 목적이 되는 데이터로 이해될 수 있다.
일 실시 예에 따르면, 헤더(610)는 세부 속성(611)을 포함할 수 있다. 세부 속성(611)은 예를 들어, 식별 값(identification, ID), PTS(presentation timestamp), 지속시간(duration), 참조 형태(reference type, refType), 및 참조 식별값(reference identification, refID) 중 적어도 하나를 포함할 수 있다. 각각의 샘플(601)은 세부 속성(611)이 설정될 수 있으며, 설정된 세부 속성(611)에 따라 구분될 수 있다. 다양한 실시 예에 다르면, 세부 속성(611)에 포함되는 속성들의 명칭은 상기 서술된 바와 상이할 수도 있다.
일 실시 예에서, 식별 값은 각각의 샘플(601)이 가지는 고유의 식별 번호로 이해될 수 있으며 서로 상이한 샘플은 식별 값이 서로 상이한 값으로 설정될 수 있다.
일 실시 예에서, PTS는 첫번째 샘플로부터의 시간 차이를 나타낼 수 있다. 예를 들어, 첫번째 샘플이 T0 시점에 대응하는 경우, T2 시점에 대응하는 샘플은 PTS가 T2-T0로 설정될 수 있다.
일 실시 예에서, 지속시간은 바로 다음 샘플과의 시간 차이를 의미할 수 있다. 예를 들어, T1 시점에 대응하는 샘플의 바로 다음 샘플이 T2 시점에 대응하는 경우, T2 시점의 샘플의 PTS는 T1 시점의 샘플의 PTS 및 T1 시점의 샘플의 지속시간의 합과 동일한 것으로 이해할 수 있다.
일 실시 예에서, refType은 샘플의 참조하는 방식을 의미할 수 있으며, 해당 샘플과 참조되는 샘플 사이의 관계를 나타낼 수 있다. refType의 속성 값은 ISD(independent scene description), DS(dependent to sample), DE(dependent to entry), DN(dependent with no update) 중 적어도 하나를 포함할 수 있다.
일 실시 예에서, refType의 속성값이 ISD(independent scene description)이면 해당 샘플은 독립 공간 서술 정보를 포함할 수 있다. 공간 컨텐츠 수신기는 해당 샘플을 사용한 이후에 임시로 저장할 수 있고, 해당 샘플을 참조하는 다른 샘플을 도출할 때에 다시 사용할 수 있다.
일 실시 예에서, refType의 속성값이 DS(dependent to sample)이면, 해당 샘플은 이전 샘플에 의존적이고 이전 샘플에 대비한 변경 내역을 포함하는 것으로 이해될 수 있다. 해당 샘플이 이전 샘플이 아닌 다른 샘플을 참조하는 경우, 참조되는 샘플은 refID에 설정된 값으로 표시될 수 있다.
일 실시 예에서, refType의 속성값이 DE(Dependent to entry)이면, 해당 샘플이 트랙 데이터(track data)(또는 트랙 메타 데이터(track meta data)) 영역의 엔트리 아이템(entry item)에 의존적이고, 상기 엔트리 아이템에 대비한 변경 내역을 포함하는 것으로 이해될 수 있다. 이 경우, 해당 샘플이 참조하는 엔트리 아이템은 refID에 설정된 값으로 표시될 수 있다. 즉, 이 경우, refID는 엔트리 식별 값(entry ID)으로 설정될 수 있다.
일 실시 예에서, refType의 속성값이 DN(dependent with no update)이면, 해당 샘플이 이전 샘플에 의존적이고, 이전 샘플에 대비한 변경 내역이 없는 것으로 이해될 수 있다. 즉, 해당 샘플에 대응하는 공간 서술 정보가 해당 샘플이 참조하는 샘플에 대응하는 공간 서술 정보와 동일한 것으로 이해될 수 있다. 해당 샘플이 이전 샘플이 아닌 다른 샘플을 참조하는 경우, 참조되는 샘플은 refID에 설정된 값으로 표시될 수 있다. 공간 컨텐츠 수신기는 해당 샘플을 수신한 경우, 해당 샘플의 대응하는 시점에, 참조되는 샘플의 공간 서술 정보를 그대로 사용할 수 있다.
일 실시 예에 따르면, 페이로드(620)는 공간 서술 정보 또는 공간 서술 정보 조각(621)을 포함할 수 있다. 즉, refType이 IDS인 경우 페이로드는 해당하는 공간 서술 정보를 포함할 수 있고, refType이 DS, DE, 또는 DN인 경우 페이로드는 공간 서술 정보 조각(621)을 포함할 수 있다. 공간 서술 정보 조각(621)은 차분 명령을 포함할 수도 있고 포함하지 않을 수도 있다. 예를 들어, refType이 DN인 경우, 공간 서술 정보 조각(621)은 차분 명령을 포함하지 않을 수도 있고, refType이 DS 또는 DE인 경우 공간 서술 정보 조각(621)은 하나 이상의 차분 명령을 포함할 수도 있다.
다양한 실시 예에서, 차분 명령이란, 문서 비교를 통해, 참조되는 공간 서술 정보에 적용함으로써 대응하는 공간 서술 정보를 생성할 수 있는 수정 명령(editorial instruction)으로 이해될 수 있다. 다양한 실시 예에서, 하나의 차분 명령은 추가, 수정, 삭제 등의 동작, 상기 동작이 수행될 대상(예: 라인 번호, 노드 순서, 노드 식별자 등), 또는 상기 동작에 대한 구체적 내용 (예: 변경된 속성 값) 등의 세부 정보를 포함할 수 있다. 차분 명령들은 기재된 순서대로 실행될 수 있으며, 하나의 샘플 내의 모든 차분 명령들은 빠짐없이 모두 실행될 수 있다.
도 7은 일 실시 예에 따른, 제1 트랙 데이터의 구성에 대한 세부 속성을 나타낸다.
도 7을 참조하면, 송신단(702)으로부터 수신단(701)으로 전송되는 제1 트랙 데이터(710, 760)는 하나 이상일 수 있으며, 각각의 제1 트랙 데이터(710, 760)는 복수의 샘플들(711, 732, 733, 734, 765, 786, 787, 788)을 포함할 수 있다. 일 실시 예에서, 송신단(702)은 공간 컨텐츠 송신기(예: 도 3의 공간 컨텐츠 송신기(320)) 또는 공간 컨텐츠 송신기의 송수신부(예: 도 3의 송수신부(323))로 이해될 수 있고, 수신단은 공간 컨텐츠 수신기(예: 도 3의 공간 컨텐츠 수신기(310)) 또는 공간 컨텐츠 수신기의 송수신부(예: 도 3의 송수신부(313))로 이해될 수 있다.
일 실시 예에 따르면, 제1 트랙 데이터(710)는 제1 샘플(711), 제2 샘플(732), 제3 샘플(733), 및 제4 샘플(734)을 포함할 수 있다. 일 실시 예에서, 제1 샘플(711)의 refType은 ISD이고, 제1 샘플(711)은 독립 공간 서술 정보를 포함할 수 있다. 일 실시 예에서, 제2 샘플(732)의 refType은 DS이고, 제2 샘플(732)은 refID가 추가적으로 설정되지 않는 이상 제1 샘플(711)에 의존적인 종속 공간 서술 정보에 대응할 수 있다. 수신단(701)은 제1 샘플(711) 및 제2 샘플(732)을 이용하여 상기 대응하는 종속 공간 서술 정보를 도출할 수 있다. 일 실시 예에서, 제3 샘플(733)의 refType은 DE이고, 제3 샘플(733)은 참조되는 엔트리 식별 값에 기초하여 결정되는 엔트리 아이템에 의존적인 종속 공간 서술 정보에 대응할 수 있다. 일 실시 예에서, 제4 샘플(734)의 refType은 DN일 수 있고, 제4 샘플(734)은 refID가 추가적으로 설정되지 않는 이상 제3 샘플(733)에 대응하는 공간 서술 정보와 동일한 내용의 공간 서술 정보에 대응할 수 있다.
도 8은 일 실시 예에 따른, 제1 트랙 데이터 및 제2 트랙 데이터의 구성을 나타낸다.
도 8을 참조하면, 공간 컨텐츠는 제1 트랙 데이터(803) 및 제2 트랙 데이터(804)를 통해 송신단(802)으로부터 수신단(801)으로 전송될 수 있다. 송신단(802)은 공간 컨텐츠 송신기(예: 도 3의 공간 컨텐츠 송신기(320)) 또는 공간 컨텐츠 송신기의 송수신부(예: 도 3의 송수신부(323))에 해당하는 것으로 이해될 수 있고, 수신단(801)은 공간 컨텐츠 수신기(예: 도 3의 공간 컨텐츠 수신기(310)) 또는 공간 컨텐츠 수신기의 송수신부(예: 도 3의 송수신부(313))에 해당하는 것으로 이해될 수 있다.
일 실시 예에 따르면, 제1 트랙 데이터(803)는 복수의 시점들 각각에 대응하는 복수의 샘플들을 포함할 수 있으며, 각각의 샘플은 독립 공간 서술 정보(811) 또는 차분 명령들(832, 833, 834, 835, 836, 837, 838)을 포함할 수 있다. 일 실시 예에서, 독립 공간 서술 정보(811)에 대응하는 시점은 제1 시점으로 지칭될 수 있다. 도 8에서 제1 트랙 데이터(803)에 종속 공간 서술 정보(822, 823, 824, 825, 826, 827, 828)가 포함되는 것처럼 도시되었으나, 종속 공간 서술 정보(822, 823, 824, 825, 826, 827, 828)는 수신단(801)에서 독립 공간 서술 정보(811) 및 차분 명령들(832, 833, 834, 835, 836, 837, 838)에 기초하여 도출될 수 있을 뿐, 제1 트랙 데이터(803)에 포함되거나 제1 트랙 데이터(803)를 통해 수신단(801)으로 전송되는 것은 아니다. 예를 들어, V2 버전의 종속 공간 서술 정보(822)는 V1 버전의 독립 공간 서술 정보(811) 및 V1 버전의 차분 명령(832)이 수신단(801)에서 수신되면 수신단(801)에서의 처리에 의해 도출될 수 있을 뿐, 제1 트랙 데이터(803)에 포함되거나 제1 트랙 데이터(803)를 통해 수신단(801)으로 전송되지는 않는다.
일 실시 예에 따르면, 제2 트랙 데이터(804)는 복수의 시점들 중 일부 시점들 각각에 대응하는 복수의 샘플들을 포함할 수 있다. 제2 트랙 데이터(804)는 제1 타입 샘플(844), 제2 타입 샘플(846), 및 제3 타입 샘플(848)을 포함할 수 있다. 제2 트랙 데이터(804)는 제1 트랙 데이터(803)보다 낮은 빈도로 샘플들이 포함될 수 있다. 일 실시 예에서, 제1 타입 샘플(844)이 대응하는 시점은 제2 시점으로 지칭될 수 있고, 도 8의 설명에서 상기 제2 시점은 V4 버전의 공간 서술 정보(824)가 대응하는 시점일 수 있다. 일 실시 예에서, 제2 타입 샘플(846)이 대응하는 시점은 제3 시점으로 지칭될 수 있고, 도 8의 설명에서 상기 제3 시점은 V6 버전의 공간 서술 정보(826)가 대응하는 시점일 수 있다. 일 실시 예에서, 제3 타입 샘플(848)이 대응하는 시점은 제4 시점으로 지칭될 수 잇고, 도 8의 설명에서 상기 제4 시점은 V8 버전의 공간 서술 정보(828)가 대응하는 시점일 수 있다. 또한, 도 8의 설명에서, 설명의 편의상 제4 시점은 제3 시점 이후의 시점인 것으로 도시되고 설명되었으나, 이에 한정되는 것은 아니다.
일 실시 예에 따르면, 수신단(801)은 제1 트랙 데이터(803) 및 제2 트랙 데이터(804)를 수신할 수 있고, 상기 수신된 제1 트랙 데이터(803) 및 제2 트랙 데이터(804)에 기초하여 임의의 시점에서 공간 컨텐츠를 재생할 수 있다. 일 실시 예에서, 수신단(801)은 재생을 시작하기 위한 임의의 시점이 지정되면, 제2 트랙 데이터(804)에 포함되는 샘플들 중 상기 지정된 임의의 시점에 가장 근접하면서 선행하는 샘플을 결정할 수 있다. 수신단(801)은 상기 결정된 샘플에 기초하여, 상기 임의의 시점의 공간 서술 정보를 도출할 수 있다.
예를 들어, 상기 임의의 시점이 제2 시점 및 제3 시점 사이의 시점으로 지정되는 경우, 수신단(801)은 적어도 제1 타입 샘플(844)을 이용하여 상기 지정된 임의의 시점의 공간 서술 정보를 도출할 수 있다. 다른 예를 들어, 상기 임의의 시점이 제3 시점 및 제4 시점 사이의 시점으로 지정되는 경우, 수신단(801)은 적어도 제2 타입 샘플(846)을 이용하여 상기 지정된 임의의 시점의 공간 서술 정보를 도출할 수 있다. 이 경우, 제2 타입 샘플(846)이 제1 타입 샘플(844)을 참조하는 경우, 수신단(801)은 적어도 제1 타입 샘플(844) 및 제2 타입 샘플(846)을 이용하여 상기 지정된 임의의 시점의 공간 서술 정보를 도출할 수 있다. 또 다른 예를 들어, 상기 임의의 시점이 제4 시점 이후의 시점으로 지정되는 경우, 수신단(801)은 적어도 제3 타입 샘플(848)을 이용하여, 상기 지정된 임의의 시점의 공간 서술 정보를 도출할 수 있다.
일 실시 예에 따르면, 임의의 시점이 제2 시점 및 제3 시점 사이의 시점으로 지정되는 경우, 수신단(801)은 도 8의 Jump1과 같이 제1 타입 샘플(844)에 접근할 수 있고 제1 타입 샘플(844)을 읽어들일 수 있다. 일 실시 예에서, 제1 타입 샘플(844)은 refType이 DS 또는 DE일 수 있다. 제1 타입 샘플(844)은 refType이 DS인 경우 다른 샘플을 참조할 수 있고, refType이 DE인 경우 트랙 데이터(또는 트랙 메타 데이터) 엔트리 아이템을 참조할 수 있다. 일 실시 예에서, 제1 타입 샘플(844)이 도 8에 도시된 바와 같이 제1 트랙 데이터(803)의 독립 공간 서술 정보(811)를 포함하는 샘플을 참조하는 경우, 수신단(801)은 독립 공간 서술 정보(811)를 포함하는 샘플 및 제1 타입 샘플(844)을 이용하여 V4 버전의 공간 서술 정보(824)를 획득할 수 있다. 상기 임의의 시점이 V4 버전의 시점보다 이후의 시점인 경우, 수신단(801)은 획득한 V4 버전의 공간 서술 정보(824) 및 제1 트랙 데이터(803)의 하나 이상의 차분 명령을 이용하여 상기 임의의 시점의 공간 서술 정보를 획득할 수 있다.
일 실시 예에 따르면, 임의의 시점이 제3 시점 및 제4 시점 사이의 시점으로 결정되는 경우, 수신단(801)은 도 8의 Jump2와 같이 제2 타입 샘플(846)에 접근할 수 있고, 제2 타입 샘플(846)을 읽어들일 수 있다. 일 실시 예에서, 제2 타입 샘플(846)은 refType이 DS일 수 있다. 제2 타입 샘플(846)은 제1 타입 샘플(844)을 참조할 수 있다. 일 실시 예에서, 수신단(801)은 제2 타입 샘플(846), 제1 타입 샘플(844) 및 제1 타입 샘플(844)이 참조하는 독립 공간 서술 정보(811)를 포함하는 샘플을 이용하여 V6 버전의 공간 서술 정보(826)를 획득할 수 있다. 상기 임의의 시점이 V6 버전의 시점보다 이후의 시점인 경우, 수신단(801)은 획득한 V6 버전의 공간 서술 정보(826) 및 제1 트랙 데이터(803)의 하나 이상의 차분 명령을 이용하여 상기 임의의 시점의 공간 서술 정보를 획득할 수 있다.
일 실시 예에 따르면, 임의의 시점이 제4 시점 이후의 시점으로 지정되는 경우, 수신단(801)은 도 8의 Jump3와 같이 제3 타입 샘플(848)에 접근할 수 있고, 제3 타입 샘플(848)을 읽어들일 수 있다. 일 실시 예에서, 제3 타입 샘플(848)은 refType이 ISD일 수 있다. 제3 타입 샘플(848)은 독립 공간 서술 정보, 예컨대, V8 버전의 공간 서술 정보(828)를 포함할 수 있다. 일 실시 예에서, 수신단(801)은 제3 타입 샘플(848)을 이용하여 V8 버전의 공간 서술 정보(828)를 획득할 수 있다. 상기 임의의 시점이 V8 버전의 시점보다 이후의 시점인 경우, 수신단(801)은 획득한 V8 버전의 공간 서술 정보(828) 및 제1 트랙 데이터(803)의 하나 이상의 차분 명령을 이용하여 상기 임의의 시점의 공간 서술 정보를 획득할 수 있다.
일 실시 예에 따르면, 수신단(801)이 임의의 시점으로부터 공간 컨텐츠를 재생하고 있는 도중에 차분 명령에 대한 버전 정보 불일치가 발생할 수도 있다. 이 경우에, 수신단(801)은 현재 재생중인 샘플의 PTS와 가장 근접한 제2 트랙 데이터(804)의 샘플을 읽어들일 수 있다. 이를 통해, 수신단(801)은 효율적으로 공간 컨텐츠의 재생을 지속(resume)할 수 있다. 이 경우 제1 트랙 데이터(803)의 샘플로부터 제2 트랙 데이터(804)를 도출했으므로, 도출된 공간 서술 정보의 버전 정보는 제1 타입 샘플(844)의 버전 정보가 사용될 수 있다.
도 9는 일 실시 예에 따른, 공간 컨텐츠 수신기가 제1 트랙 데이터 및 제2 트랙 데이터를 수신하고 공간 컨텐츠를 재생하는 방법을 나타낸다.
도 9를 참조하면, 공간 컨텐츠는 제1 트랙 데이터(903) 및 제2 트랙 데이터(904)를 통해 송신단(902)으로부터 수신단(901)으로 전송될 수 있다. 송신단(902)은 공간 컨텐츠 송신기(예: 도 3의 공간 컨텐츠 송신기(320)) 또는 공간 컨텐츠 송신기의 송수신부(예: 도 3의 송수신부(323))에 해당하는 것으로 이해될 수 있고, 수신단(901)은 공간 컨텐츠 수신기(예: 도 3의 공간 컨텐츠 수신기(310)) 또는 공간 컨텐츠 수신기의 송수신부(예: 도 3의 송수신부(313))에 해당하는 것으로 이해될 수 있다.
일 실시 예에 따르면, 수신단(901)은 트랙 수신기(910), 제1 샘플 버퍼(921), 제2 샘플 버퍼(922), 차분 명령 실행기(930), SD 버퍼(940), 및 공간 컨텐츠 재생기(950)를 포함할 수 있다. 다양한 실시 예에 따르면, 수신단(901)의 구성은 도 9에 도시된 바에 한정되지 않는다.
일 실시 예에 따르면, 트랙 수신기(910)는 제1 트랙 데이터(903) 및 제2 트랙 데이터(904)를 수신하고, 각각의 트랙 데이터를 제1 샘플 버퍼(921) 및 제2 샘플 버퍼(922)에 순차적으로 저장할 수 있다. 다양한 실시 예에서, 제1 샘플 버퍼(921) 및 제2 샘플 버퍼(922)는 하나의 버퍼로 구현될 수도 있다.
일 실시 예에 따르면, 제1 샘플 버퍼(921)에 저장된 독립 공간 서술 정보는 SD 버퍼(940)에 저장될 수 있다. 일 실시 예에서, 차분 명령 실행기(930)는 제1 샘플 버퍼(921) 또는 제2 샘플 버퍼(922)에 저장된 독립 공간 서술 정보 및 차분 명령을 이용하여 공간 서술 정보를 순차적으로 도출할 수 있고, 도출된 공간 서술 정보를 SD 버퍼(940)에 저장할 수 있다.
일 실시 예에 따르면, 공간 컨텐츠 재생기(950)는 차분 명령 실행기(930)에 임의 재생 명령을 전달할 수 있다. 임의 재생 명령은 예컨대, 임의의 시점을 지정하고, 지정된 임의의 시점으로부터 공간 컨텐츠를 재생하는 명령을 의미할 수 있다. 일 실시 예에서, 차분 명령 실행기(930)는 임의 재생 명령에 응답하여, 지정된 임의의 시점에 따른 샘플을 제2 트랙 데이터(904)의 샘플들이 저장된 제2 샘플 버퍼(922)로부터 읽어들일 수 있다. 예를 들면, 차분 명령 실행기(930)는 도 8에서 설명한 바와 같이, 임의의 시점에 기초하여 제2 트랙 데이터(904)에 포함되는 제1 샘플 데이터, 제2 샘플 데이터, 및 제3 샘플 데이터 중 어느 하나를 읽어들일 수 있다. 차분 명령 실행기(930)는 임의의 시점에 대응하는 공간 서술 정보를 SD 버퍼(940)에 저장하고, 이후 시점들에 대응하는 공간 서술 정보들을 SD 버퍼(940)에 순차적으로 저장할 수 있다.
일 실시 예에 따르면, 공간 컨텐츠 재생기(950)는 SD 버퍼(940)에 저장된 공간 서술 정보들을 재생시킬 수 있다. 이를 통해, 수신단(901)은 임의의 시점부터 공간 컨텐츠를 재생시킬 수 있다.
일 실시 예에 따르면, 도 7과 같이 refType이 DS, DE 또는 DN인 샘플들이 이어지는 경우, SD 버퍼(940)는 ISD 타입의 공간 서술 정보를 비롯해 지속적으로 증가하는 버전의 공간 서술 정보들을 모두 저장할 수 있다. SD 버퍼(940)를 효율적으로 관리하기 위해 다음의 후술하는 방법이 사용될 수 있다.
일 실시 예에 따르면, 새로운 독립 공간 서술 정보를 포함하는 샘플, 즉, 샘플의 refType이 ISD인 새로운 샘플이 수신되는 경우, SD 버퍼(940)는 상기 새로운 샘플 이전의 샘플들에 포함된 공간 서술 정보들을 삭제할 수 있다. 예를 들면, 트랙 데이터의 헤더 또는 전송 단위의 헤더에 명시적으로 ISD 타입의 샘플이 도래함에 따른 SD 버퍼(940)의 초기화를 명시할 수도 있고, ISD의 시맨틱(semantic)이 SD 버퍼(940)의 초기화를 의미하는 것으로 규칙을 정할 수도 있다.
일 실시 예에 따르면, 임의의 시점에서 공간 컨텐츠를 재생하기 위해서는 해당 시점에 적용되어 있는 의존 계층수만큼의 샘플이 처리되어야 할 수 있다. 의존 계층 수는, ISD 타입의 샘플 이후 종속 공간 서술 정보와 관련된 샘플들이 도래하였을 때, 종속 공간 서술 정보와 관련된 샘플들이 다른 샘플들을 참조하는 횟수를 의미할 수 있다. 예를 들면, ISD 타입의 샘플의 의존 계층 수는 0이고, 상기 ISD 타입의 샘플을 참조하는 샘플의 의존 계층 수는 1이며, 상기 의존 계층 수가 1인 샘플을 참조하는 샘플의 의존 계층 수는 2일 수 있다. 일정 시점에서 의존 계층 수가 n이라면, n+1개의 다른 샘플들을 차례대로 읽고 적용해야 비로소 해당 시점에 필요한 공간 서술 정보를 도출할 수 있다.
임의 시점으로부터 재생을 시작하기 위해서는 해당 샘플의 의존 계층수만큼의 샘플들을 모두 처리해야 할 수 있다. 본 개시의 실시 예에 따라, 제1 타입 샘플, 제2 타입 샘플, 및 제3 타입 샘플을 포함하는 제2 트랙 데이터를 이용하는 경우, 공간 컨텐츠를 전송하는 과정에서 의존 계층 수는 작아질 수 있다.
도 10은 일 실시 예에 따른, 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법을 나타내는 흐름도이다.
도 10을 참조하면, 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법(1000)은 단계 1001 및 단계 1003을 포함할 수 있다. 다양한 실시 예에 따르면, 단계 1001 및 단계 1003은 도 3에 도시된 공간 컨텐츠 송신기(320)의 프로세서(321)에 의해 수행되는 것으로 이해될 수 있다.
단계 1001에서, 공간 컨텐츠 송신기는 트랙 데이터에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송할 수 있다. 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플 및 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함할 수 있다. 일 실시 예에서, 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함할 수 있다.
단계 1003에서, 공간 컨텐츠 송신기는 트랙 데이터에 포함되는 제2 트랙 데이터를 공간 컨텐츠 수신기로 전송할 수 있다. 제2 트랙 데이터는 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함할 수 있다. 일 실시 예에서, 제1 타입 샘플은 지정된 공간 서술 정보 및 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다. 상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나일 수 있다. 일 실시 예에서, 제2 타입 샘플은 제2 시점의 공간 서술 정보 및 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다. 일 실시 예에서, 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함할 수 있다.
도 11은 일 실시 예에 따른, 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법을 나타내는 흐름도이다.
도 11을 참조하면, 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법(1100)은 단계 1101 및 단계 1103을 포함할 수 있다. 다양한 실시 예에 따르면, 단계 1101 및 단계 1103은 도 3에 도시된 공간 컨텐츠 수신기(310)의 프로세서(311)에 의해 수행되는 것으로 이해될 수 있다.
단계 1101에서, 공간 컨텐츠 수신기는 제1 트랙 데이터를 공간 컨텐츠 송신기로부터 수신할 수 있다. 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플 및 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함할 수 있다. 일 실시 예에서, 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함할 수 있다.
단계 1003에서, 공간 컨텐츠 수신기는 제2 트랙 데이터를 공간 컨텐츠 송신기로부터 수신할 수 있다. 제2 트랙 데이터는 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함할 수 있다. 일 실시 예에서, 제1 타입 샘플은 지정된 공간 서술 정보 및 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다. 상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나일 수 있다. 일 실시 예에서, 제2 타입 샘플은 제2 시점의 공간 서술 정보 및 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함할 수 있다. 일 실시 예에서, 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함할 수 있다.
도 12 는 일 실시 예에 따른, 공간 컨텐츠를 처리하는 방법의 효과를 나타내는 도면이다.
도 12를 참조하면, 동일한 공간 컨텐츠에 대하여 제1 비교 예, 제2 비교 예 및 제1 실시 예에 따른 공간 컨텐츠 처리 결과가 각각 도시된다. 제1 비교 예는 도 1a에서 설명된 공간 컨텐츠의 처리 방법이며, 제2 비교 예는 도 1b에서 설명된 공간 컨텐츠의 처리 방법이다. 제1 실시 예는 예컨대, 도 4 또는 도 8에서 설명된 공간 컨텐츠의 처리 방법으로 이해될 수 있다.
제1 실시 예에 따르는 경우, 전체 전송되는 데이터의 사이즈는 32이며, 전체 공간 컨텐츠의 데이터 사이즈인 53대비 61% 수준이다. 또한, 제1 비교 예의 경우 전송되는 데이터의 사이즈는 38이고 제2 비교 예의 경우 전송되는 데이터의 사이즈는 40이므로, 제1 실시 예는 제1 비교 예의 84% 수준이고, 제2 비교 예의 80% 수준이다. 즉, 제1 실시 예에 따르는 경우, 제1 비교 예 및 제2 비교 예 보다 효율적으로 공간 컨텐츠를 전송할 수 있음을 확인할 수 있다.
상기와 같이, refType의 속성값을 여러 종류 구비하고, 각 프레임의 공간 서술 정보의 내용에 따라 적절한 refType 및 페이로드를 제공하는 경우, 필요한 전송 대역폭의 크기를 감소시킬 수 있고, 전송 효율을 높일 수 있다. 본 개시에 따른 공간 컨텐츠 전송기는 제1 트랙 데이터 및 제2 트랙 데이터를 통해 공간 컨텐츠를 전송할 수 있다. 이 경우, 제1 트랙 데이터는 이전 시점의 공간 서술 정보와의 차분을 나타내는 차분 명령을 포함하고, 제2 트랙 데이터는 앞서 설명한 제1 타입 샘플, 제2 타입 샘플, 및 제3 타입 샘플을 포함할 수 있다. 공간 컨텐츠 전송기는 데이터의 크기가 작고, 참조에 대한 계층 수가 적어지도록 제1 타입 샘플, 제2 타입 샘플, 및 제3 타입 샘플의 세부 속성들을 적절히 구성할 수 있다.
본 개시의 일 실시 예에 따른, 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법은 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 전송하는 단계 및 상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 전송하는 단계를 포함할 수 있다. 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고, 상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함할 수 있다.
일 실시 예에 따르면, 상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나인 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 복수의 샘플들, 상기 제1 타입 샘플, 및 상기 제2 타입 샘플에 포함되는 각각의 차분 명령들은 고유의 버전 정보를 각각 포함하고, 상기 고유의 버전 정보는 상기 각각의 차분 명령이 대응하는 시점의 공간 서술 정보와 비교되는 참조 공간 서술 정보에 포함되는 버전 정보와 동일하도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제1 트랙 데이터 및 상기 제2 트랙 데이터는 상기 공간 컨텐츠 수신기가 상기 공간 컨텐츠를 임의의 시점부터 재생하기 위한 상기 임의의 시점의 공간 서술 정보에 접근하기 위해 이용되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 공간 컨텐츠 수신기는 상기 제2 시점, 상기 제3 시점, 및 상기 제4 시점 중 상기 임의의 시점에 선행하면서 상기 임의의 시점에 가장 가까운 시점에 대응하는 상기 제2 트랙 데이터의 샘플을 이용하여, 상기 임의의 시점의 공간 서술 정보에 접근하는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제2 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제3 시점은, 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제3 시점은, 상기 제3 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제4 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보의 차이가 지정된 수준 보다 크도록 설정되는 것을 특징으로 할 수 있다.
본 개시의 일 실시 예에 따른, 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법은, 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 수신하는 단계 및 상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 수신하는 단계를 포함할 수 있다. 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고, 상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함할 수 있다.
일 실시 예에 따르면, 상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나일 수 있다.
일 실시 예에 따르면, 상기 복수의 샘플들, 상기 제1 타입 샘플, 및 상기 제2 타입 샘플에 포함되는 각각의 차분 명령들은 고유의 버전 정보를 각각 포함하고, 상기 고유의 버전 정보는 상기 각각의 차분 명령이 대응하는 시점의 공간 서술 정보와 비교되는 참조 공간 서술 정보에 포함되는 버전 정보와 동일하도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제1 트랙 데이터 및 상기 제2 트랙 데이터를 이용하여, 상기 공간 컨텐츠를 임의의 시점부터 재생하기 위해 상기 임의의 시점의 공간 서술 정보에 접근하는 단계를 더 포함하는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제2 시점, 상기 제3 시점, 및 상기 제4 시점 중 상기 임의의 시점에 선행하면서 상기 임의의 시점에 가장 가까운 시점에 대응하는 상기 제2 트랙 데이터의 샘플을 이용하여, 상기 임의의 시점의 공간 서술 정보에 접근하는 단계를 더 포함하는, 방법.
일 실시 예에 따르면, 상기 제2 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제3 시점은, 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제3 시점은, 상기 제3 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는 것을 특징으로 할 수 있다.
일 실시 예에 따르면, 상기 제4 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보의 차이가 지정된 수준 보다 크도록 설정되는 것을 특징으로 할 수 있다.
본 개시의 일 실시 예에 따른, 공간 컨텐츠를 처리하는 공간 컨텐츠 전송기는, 송수신부 및 상기 송수신부와 전기적으로 연결되는 적어도 하나의 프로세서를 포함하고, 상기 적어도 하나의 프로세서는, 상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 전송하고 및 상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 전송하도록 설정될 수 있다. 상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고, 상기 제1 타입 샘플은 지정된 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고, 상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함할 수 있다.
일 실시 예에 따르면, 상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나일 수 있다.

Claims (20)

  1. 공간 컨텐츠 송신기가 공간 컨텐츠를 처리하는 방법에 있어서,
    상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 전송하는 단계; 및
    상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 전송하는 단계;를 포함하고,
    상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고,
    상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함하는, 방법.
  2. 제1 항에 있어서,
    상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나인, 방법.
  3. 제1 항에 있어서,
    상기 복수의 샘플들, 상기 제1 타입 샘플, 및 상기 제2 타입 샘플에 포함되는 각각의 차분 명령들은 고유의 버전 정보를 각각 포함하고,
    상기 고유의 버전 정보는 상기 각각의 차분 명령이 대응하는 시점의 공간 서술 정보와 비교되는 참조 공간 서술 정보에 포함되는 버전 정보와 동일하도록 설정되는, 방법.
  4. 제1 항에 있어서,
    상기 제1 트랙 데이터 및 상기 제2 트랙 데이터는 상기 공간 컨텐츠 수신기가 상기 공간 컨텐츠를 임의의 시점부터 재생하기 위한 상기 임의의 시점의 공간 서술 정보에 접근하기 위해 이용되는, 방법.
  5. 제3 항에 있어서,상기 공간 컨텐츠 수신기는 상기 제2 시점, 상기 제3 시점, 및 상기 제4 시점 중 상기 임의의 시점에 선행하면서 상기 임의의 시점에 가장 가까운 시점에 대응하는 상기 제2 트랙 데이터의 샘플을 이용하여, 상기 임의의 시점의 공간 서술 정보에 접근하는, 방법.
  6. 제1 항에 있어서,
    상기 제2 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  7. 제1 항에 있어서,
    상기 제3 시점은, 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  8. 제1 항에 있어서,
    상기 제3 시점은, 상기 제3 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  9. 제1 항에 있어서,
    상기 제4 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보의 차이가 지정된 수준 보다 크도록 설정되는, 방법.
  10. 공간 컨텐츠 수신기가 공간 컨텐츠를 처리하는 방법에 있어서,
    상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 수신하는 단계; 및
    상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 송신기로부터 수신하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 수신하는 단계;를 포함하고,
    상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고,
    상기 제1 타입 샘플은 지정된 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함하는, 방법.
  11. 제10 항에 있어서,
    상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나인, 방법.
  12. 제10 항에 있어서,
    상기 복수의 샘플들, 상기 제1 타입 샘플, 및 상기 제2 타입 샘플에 포함되는 각각의 차분 명령들은 고유의 버전 정보를 각각 포함하고,
    상기 고유의 버전 정보는 상기 각각의 차분 명령이 대응하는 시점의 공간 서술 정보와 비교되는 참조 공간 서술 정보에 포함되는 버전 정보와 동일하도록 설정되는, 방법.
  13. 제10 항에 있어서,
    상기 제1 트랙 데이터 및 상기 제2 트랙 데이터를 이용하여, 상기 공간 컨텐츠를 임의의 시점부터 재생하기 위해 상기 임의의 시점의 공간 서술 정보에 접근하는 단계를 더 포함하는, 방법.
  14. 제13 항에 있어서,
    상기 제2 시점, 상기 제3 시점, 및 상기 제4 시점 중 상기 임의의 시점에 선행하면서 상기 임의의 시점에 가장 가까운 시점에 대응하는 상기 제2 트랙 데이터의 샘플을 이용하여, 상기 임의의 시점의 공간 서술 정보에 접근하는 단계를 더 포함하는, 방법.
  15. 제10 항에 있어서,
    상기 제2 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제2 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  16. 제10 항에 있어서,
    상기 제3 시점은, 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  17. 제10 항에 있어서,
    상기 제3 시점은, 상기 제3 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보 사이의 차이가 지정된 수준보다 작도록 설정되는, 방법.
  18. 제10 항에 있어서,
    상기 제4 시점은, 상기 지정된 시점의 공간 서술 정보 및 상기 제4 시점의 공간 서술 정보의 차이가 지정된 수준 보다 크도록 설정되는, 방법.
  19. 공간 컨텐츠를 처리하는 공간 컨텐츠 전송기에 있어서,
    송수신부; 및
    상기 송수신부와 전기적으로 연결되는 적어도 하나의 프로세서;를 포함하고,
    상기 적어도 하나의 프로세서는,
    상기 공간 컨텐츠를 구성하는 복수의 공간 서술 정보(scene description)들과 연관되는 트랙 데이터(track data)에 포함되는 제1 트랙 데이터를 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제1 트랙 데이터는 제1 시점의 공간 서술 정보를 포함하는 제1 샘플(sample) 및 상기 제1 시점 이후의 복수의 시점들에 각각 대응하는 복수의 샘플들을 포함하는, 상기 제1 트랙 데이터를 전송하고, 및
    상기 트랙 데이터에 포함되는 제2 트랙 데이터를 상기 공간 컨텐츠 수신기로 전송하는 단계로서, 상기 제2 트랙 데이터는 상기 제1 시점 이후의 제2 시점의 공간 서술 정보와 연관되는 제1 타입 샘플, 상기 제2 시점 이후의 제3 시점의 공간 서술 정보와 연관되는 제2 타입 샘플, 및 제4 시점의 공간 서술 정보와 연관되는 제3 타입 샘플을 포함하는, 상기 제2 트랙 데이터를 전송하도록 설정되고,
    상기 복수의 샘플들 각각은 대응하는 시점의 공간 서술 정보와 상기 대응하는 시점보다 바로 앞선 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 각각 포함하고,
    상기 제1 타입 샘플은 지정된 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제2 타입 샘플은 상기 제2 시점의 공간 서술 정보 및 상기 제3 시점의 공간 서술 정보 사이의 차이를 나타내는 차분 명령을 포함하고,
    상기 제3 타입 샘플은 상기 제4 시점의 공간 서술 정보를 포함하는, 공간 컨텐츠 전송기.
  20. 제19 항에 있어서,
    상기 지정된 공간 서술 정보는 상기 제1 시점의 공간 서술 정보 또는 상기 트랙 데이터의 엔트리 아이템(entry item) 중 어느 하나인, 공간 컨텐츠 전송기.
KR1020210050019A 2021-04-16 2021-04-16 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치 KR20220143466A (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020210050019A KR20220143466A (ko) 2021-04-16 2021-04-16 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치
US18/555,632 US20240214649A1 (en) 2021-04-16 2022-04-15 Method for processing spatial content and electronic device performing same
PCT/KR2022/005492 WO2022220650A1 (ko) 2021-04-16 2022-04-15 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210050019A KR20220143466A (ko) 2021-04-16 2021-04-16 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치

Publications (1)

Publication Number Publication Date
KR20220143466A true KR20220143466A (ko) 2022-10-25

Family

ID=83640881

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210050019A KR20220143466A (ko) 2021-04-16 2021-04-16 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치

Country Status (3)

Country Link
US (1) US20240214649A1 (ko)
KR (1) KR20220143466A (ko)
WO (1) WO2022220650A1 (ko)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013161319A1 (ja) * 2012-04-27 2013-10-31 パナソニック株式会社 コンテンツ再生方法、コンテンツ再生システムおよびコンテンツ撮影装置
WO2014115147A1 (en) * 2013-01-24 2014-07-31 Telesofia Medical Ltd. System and method for flexible video construction
GB2560921B (en) * 2017-03-27 2020-04-08 Canon Kk Method and apparatus for encoding media data comprising generated content
KR101956111B1 (ko) * 2018-09-21 2019-03-11 삼성전자주식회사 멀티미디어 통신 시스템에서 장면 구성 정보 송수신 장치 및 방법
CN111869201B (zh) * 2019-01-08 2023-01-31 三星电子株式会社 处理和发送三维内容的方法

Also Published As

Publication number Publication date
US20240214649A1 (en) 2024-06-27
WO2022220650A1 (ko) 2022-10-20

Similar Documents

Publication Publication Date Title
US20170034263A1 (en) Synchronized Playback of Streamed Audio Content by Multiple Internet-Capable Portable Devices
US9578210B2 (en) A/V Receiving apparatus and method for delaying output of audio signal and A/V signal processing system
KR101884483B1 (ko) 미디어 인식 및 움직임 신호와의 동기화
US11657833B2 (en) Classifying audio scene using synthetic image features
EP3829185B1 (en) Encoding device and method, reproduction device and method, and program
US20230171557A1 (en) Rendering encoded 6dof audio bitstream and late updates
CN105072455A (zh) 视频匹配方法和装置
US20170164010A1 (en) Method and device for generating and playing video
CN109788212A (zh) 一种分段视频的处理方法、装置、终端和存储介质
WO2018093690A1 (en) Frame coding for spatial audio data
CN111356023B (zh) 播放方式确定方法及装置
US20220150458A1 (en) Method and device for transmitting viewpoint switching capabilities in a vr360 application
KR20090080812A (ko) 사용자 정보에 따른 광고 영상 제공 장치 및 방법
CN106331763A (zh) 无缝播放分片媒体文件的方法及实现该方法的装置
US10133408B2 (en) Method, system and computer program product
KR20220143466A (ko) 공간 컨텐츠를 처리하는 방법 및 이를 수행하는 전자 장치
KR102220088B1 (ko) 오디오 또는 비디오에서 인터컷 시간 버킷을 결정하는 방법 및 디바이스
US20090088879A1 (en) Audio reproduction device and method for audio reproduction
CN115315960B (zh) 内容修正装置、内容发布服务器、内容修正方法以及记录介质
US20220124419A1 (en) Information processing device, information processing method, and information processing program
CN113784094A (zh) 视频数据处理方法、网关、终端设备及存储介质
CN113905321A (zh) 基于对象音频通道元数据和生成方法、设备及存储介质
CN114025229A (zh) 处理音视频文件的方法、装置、计算设备及存储介质
US10771846B2 (en) Electronic apparatus for playing substitutional advertisement and method for controlling method thereof
WO2012029252A1 (en) Information processing apparatus, information processing method, and program

Legal Events

Date Code Title Description
A201 Request for examination