KR20160140639A - 수신 장치, 수신 방법, 송신 장치 및 송신 방법 - Google Patents

수신 장치, 수신 방법, 송신 장치 및 송신 방법 Download PDF

Info

Publication number
KR20160140639A
KR20160140639A KR1020167026138A KR20167026138A KR20160140639A KR 20160140639 A KR20160140639 A KR 20160140639A KR 1020167026138 A KR1020167026138 A KR 1020167026138A KR 20167026138 A KR20167026138 A KR 20167026138A KR 20160140639 A KR20160140639 A KR 20160140639A
Authority
KR
South Korea
Prior art keywords
component
layer
hierarchical level
broadcast
level
Prior art date
Application number
KR1020167026138A
Other languages
English (en)
Other versions
KR102346555B1 (ko
Inventor
나오히사 기타자토
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20160140639A publication Critical patent/KR20160140639A/ko
Application granted granted Critical
Publication of KR102346555B1 publication Critical patent/KR102346555B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/61Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H04L65/4076
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/09Arrangements for device control with a direct linkage to broadcast information or to broadcast space-time; Arrangements for control of broadcast-related services
    • H04H60/13Arrangements for device control affected by the broadcast information
    • H04L65/607
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/65Network streaming protocols, e.g. real-time transport protocol [RTP] or real-time control protocol [RTCP]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/70Media network packetisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H20/00Arrangements for broadcast or for distribution combined with broadcast
    • H04H20/86Arrangements characterised by the broadcast information itself
    • H04H20/93Arrangements characterised by the broadcast information itself which locates resources of other pieces of information, e.g. URL [Uniform Resource Locator]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Circuits Of Receivers In General (AREA)
  • Television Systems (AREA)

Abstract

수신 장치는 IP(Internet Protocol) 전송 방식을 이용한 디지털 방송 신호를 수신하도록 구성된 회로를 포함한다. 디지털 방송 신호에 포함된 제어 정보에 기초하여, 이 회로는 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하고, 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 각 부의 동작을 제어한다. 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관된다.

Description

수신 장치, 수신 방법, 송신 장치 및 송신 방법{RECEIVING APPARATUS, RECEIVING METHOD, TRANSMITTING APPARATUS, AND TRANSMITTING METHOD}
본 기술은 수신 장치, 수신 방법, 송신 장치 및 송신 방법에 관한 것이며, 특히, 방송 또는 통신으로 전송되는 컴포넌트 중에서 최적의 컴포넌트를 선택하는 것이 가능하도록 한 수신 장치, 수신 방법, 송신 장치 및 송신 방법에 관한 것이다.
<관련 출원들에 대한 상호 참조>
본 출원은 2014년 4월 4일자로 출원된 일본 우선권 특허 출원 JP 2014-078032호의 혜택을 주장하며, 그 전체 내용은 본 명세서에 참조로 포함된다.
최근, 디지털 방송의 분야에 있어서는, 방송을 이용한 서비스에 추가하여, 통신과 제휴한 하이브리드형 서비스가 도입되고 있다(예를 들어, 특허문헌 1 참조). 이러한 하이브리드형 서비스에서는, 상기 서비스를 제공하기 위한 비디오, 오디오 또는 자막 등의 컴포넌트를 방송 또는 통신 중 어느 하나를 이용하여 전송하는 것이 가능하다.
일본 특허 출원 공개 제2011-66556호 공보
하이브리드형 서비스의 도입으로 다양한 타입의 서비스를 공급하는 것이 가능해지는 한편, 방송 또는 통신으로 전송되는 컴포넌트 중에서 최적의 컴포넌트를 선택할 필요가 있다. 그러나, 방송 또는 통신으로 전송되는 컴포넌트 중에서 최적의 컴포넌트를 선택하기 위한 기술 방법은 확립되어 있지 않다.
방송 또는 통신으로 전송되는 컴포넌트 중에서 최적의 컴포넌트를 선택할 수 있도록 하는 것이 바람직하다.
본 기술의 제1 실시형태의 수신 장치는, IP(Internet Protocol) 전송 방식을 이용한 디지털 방송 신호를 수신하도록 구성된 회로를 포함하는 수신 장치이다. 디지털 방송 신호에 포함된 제어 정보에 기초하여, 이 회로는 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하고, 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 각 부의 동작을 제어한다. 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관된다. 제3 계층 레벨은 방송 컴포넌트 또는 통신 컴포넌트를 적응적으로 선택하기 위한 계층 레벨이다. 제2 계층 레벨은, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 계층 레벨이다. 제1 계층 레벨은, 제2 계층 레벨에서 합성되는 합성 컴포넌트, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 제2 계층 레벨과 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 계층 레벨이다.
수신 장치는 독립 장치일 수도 있고, 또는 하나의 장치를 구성하고 있는 내부 블록일 수도 있다.
본 기술의 제1 실시형태의 수신 방법은 본 기술의 제1 실시형태의 수신 장치에 대응하는 수신 방법이다.
본 기술의 제1 실시형태의 수신 장치 및 수신 방법에서는, IP 전송 방식을 이용한 디지털 방송 신호가 수신된다. 디지털 방송 신호에 포함된 제어 정보에 기초하여, 방송 컴포넌트 및 통신 컴포넌트 중 적어도 하나의 컴포넌트가 취득되고, 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 수신 장치의 각 부의 동작이 제어된다. 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관된다. 제3 계층 레벨은 방송 컴포넌트 또는 통신 컴포넌트를 적응적으로 선택하기 위한 계층 레벨이다. 제2 계층 레벨은, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 계층 레벨이다. 제1 계층 레벨은, 제2 계층 레벨에서 합성되는 합성 컴포넌트, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 제2 계층 레벨과 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 계층 레벨이다.
본 기술의 제2 실시형태의 송신 장치는, 제어 정보를 취득하고, 서비스의 방송 컴포넌트를 취득하고, 방송 컴포넌트에 추가하여, 제어 정보를, IP 전송 방식을 이용한 디지털 방송 신호로 송신하도록 구성된 회로를 포함하는 송신 장치이다. 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관된다. 제3 계층 레벨은 방송 컴포넌트 또는 통신 컴포넌트를 적응적으로 선택하기 위한 계층 레벨이다. 제2 계층 레벨은, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 계층 레벨이다. 제1 계층 레벨은, 제2 계층 레벨에서 합성된 컴포넌트, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 제2 계층 레벨과 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 계층 레벨이다.
송신 장치는 독립 장치일 수도 있고, 또는 하나의 장치를 구성하고 있는 내부 블록일 수도 있다.
본 기술의 제2 실시형태의 송신 방법은 본 기술의 제2 실시형태의 송신 장치에 대응하는 송신 방법이다.
본 기술의 제2 실시형태의 송신 장치 및 송신 방법에서는, 제어 정보가 취득되고, 서비스의 방송 컴포넌트가 취득되고, 방송 컴포넌트에 추가하여, 제어 정보가, IP 전송 방식을 이용한 디지털 방송 신호로 송신된다. 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관된다. 제3 계층 레벨은 방송 컴포넌트 또는 통신 컴포넌트를 적응적으로 선택하기 위한 계층 레벨이다. 제2 계층 레벨은, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 계층 레벨이다. 제1 계층 레벨은, 제2 계층 레벨에서 합성된 컴포넌트, 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 제2 계층 레벨과 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 계층 레벨이다.
본 기술의 제1 실시형태 및 제2 실시형태에 따르면, 방송 또는 통신으로 전송되는 컴포넌트 중에서 최적의 컴포넌트를 선택하는 것이 바람직하다.
여기서, 여기에 기재된 효과는 반드시 한정되는 것은 아니며, 본 개시내용 중에 기재된 효과 중 어느 효과일 수도 있다.
도 1은 IP 전송 방식의 디지털 방송의 프로토콜 스택을 도시하는 도면이다.
도 2는 IP 전송 방식을 이용한 디지털 방송의 방송파의 신호와 IP 전송 방식의 ID 체계의 관계를 도시하는 도면이다.
도 3은 IP 전송 방식의 디지털 방송의 방송파의 구성을 도시하는 도면이다.
도 4는 컴포넌트 레이어 구조를 도시하는 도면이다.
도 5는 컴포넌트 레이어 구조의 도면이다.
도 6은 시그널링 정보의 구성예를 도시하는 도면이다.
도 7은 컴포넌트 레이어의 구체예를 도시하는 도면이다.
도 8은 화면 레이아웃의 예를 도시하는 도면이다.
도 9는 화면 천이의 예를 도시하는 도면이다.
도 10은 시그널링 정보의 구성을 도시하는 도면이다.
도 11은 MPD를 이용한 컴포넌트 레이어 대응을 도시하는 도면이다.
도 12는 MPD를 이용한 컴포넌트 레이어 대응의 구체적인 운용예를 도시하는 도면이다.
도 13은 SPD와 MPD의 제휴 방법을 도시하는 도면이다.
도 14는 SPD와 MPD의 제휴의 구체적인 운용예를 도시하는 도면이다.
도 15는 SPD의 신택스를 도시하는 도면이다.
도 16은 컴포넌트 레이어 기술자(Component Layer Descriptor)의 신택스를 도시하는 도면이다.
도 17은 SPD의 신택스를 도시하는 도면이다.
도 18은 본 기술을 적용한 방송 통신 시스템의 일 실시형태의 구성을 도시하는 도면이다.
도 19는 본 기술을 적용한 송신 장치의 일 실시형태의 구성을 도시하는 도면이다.
도 20은 본 기술을 적용한 배신 서버의 일 실시형태의 구성을 도시하는 도면이다.
도 21은 본 기술을 적용한 수신 장치의 일 실시형태의 구성을 도시하는 도면이다.
도 22는 송신 처리를 설명하는 플로우차트이다.
도 23은 배신 처리를 설명하는 플로우차트이다.
도 24는 수신 처리를 설명하는 플로우차트이다.
도 25는 컴퓨터의 구성예를 도시하는 도면이다.
이하, 도면을 참조하여 본 기술의 실시형태에 대한 설명이 주어진다. 여기서, 이하의 순서로 설명이 수행될 것이다.
1. IP 전송 방식을 이용한 디지털 방송의 개요
2. 컴포넌트 레이어 구조
(1) 컴포넌트 레이어 구조의 상세
(2) 컴포넌트 레이어 구조의 구체예
3. 시그널링 정보의 구성
(1) 시그널링 정보의 상세
(2) MPD를 이용한 컴포넌트 레이어 대응
(3) SPD와 MPD의 제휴
(4) 신택스
4. 시스템 구성
5. 각 장치에서 실행되는 구체적인 처리의 흐름
6. 컴퓨터의 구성
<1. IP 전송 방식을 이용한 디지털 방송의 개요>
(프로토콜 스택)
도 1은 IP 전송 방식의 디지털 방송의 프로토콜 스택을 도시하는 도면이다.
도 1에 도시한 바와 같이, 가장 하위의 계층은, 물리 층(Physical Layer)으로서 설정되고, 서비스(채널)를 위해서 할당된 방송파의 주파수 대역이 이것에 대응한다. 물리 층에 인접하는 상위 계층은, BBP 스트림(Base Band Packet Stream)을 사이에 두고 IP 층으로서 설정된다. BBP 스트림은, IP 전송 방식에 있어서의 다양한 타입의 데이터가 저장된 패킷을 포함하는 스트림이다.
IP 층은 TCP/IP 프로토콜 스택에 있어서의 IP(Internet Protocol)에 상당하는 것이며, IP 어드레스에 의해 IP 패킷이 특정된다. IP 층에 인접하는 상위 계층은 UDP 층으로서 설정되고, UDP 층보다 훨씬 더 상위 계층은, RTP 및 FLUTE/ALS로서 설정된다. 즉, IP 전송 방식의 디지털 방송에서는, UDP(User Datagram Protocol)의 포트 번호가 지정된 패킷이 송신되고, 예를 들어 RTP(Real-time Transport Protocol) 세션이나 FLUTE(File Delivery over Unidirectional Transport) 세션이 확립된다.
FLUTE/ALS에 인접하는 상위 계층은, fMP4(Fragmented MP4)로서 설정되고, RTP 및 fMP4에 인접하는 상위 계층은, 비디오 데이터(Video), 오디오 데이터(Audio), 자막 데이터(Closed Caption) 등으로서 설정된다. 즉, 비디오 데이터나 오디오 데이터를 스트림 형식으로 전송하는 경우에는, RTP 세션이 이용되고, 비디오 데이터나 오디오 데이터를 파일 형식으로 전송하는 경우에는, FLUTE 세션이 이용된다.
또한, FLUTE/ALS의 상위 계층은, NRT 콘텐츠(NRT Content), ESG 및 SCS로서 설정되고, NRT 콘텐츠, ESG 및 SCS는, FLUTE 세션에 의해 전송된다. NRT 콘텐츠는, NRT(Non-Real Time) 방송으로 전송되는 콘텐츠이며, NRT 콘텐츠가 수신 디바이스의 스토리지에 일시적으로 축적된 후에 재생이 수행된다. 여기서, NRT 콘텐츠는 콘텐츠의 일례이며, 다른 콘텐츠의 파일이 FLUTE 세션에 의해 전송될 수도 있다. ESG는 전자 서비스 가이드(Electronic Service Guide)이다.
SCS(Service Channel Signaling)는, 서비스 단위의 시그널링 정보로서, FLUTE 세션에 의해 전송된다. 예를 들어, SCS로서는, SPD(Service Parameter Description), USD(User Service Description), MPD(Media Presentation Description) 및 SDP(Session Description Protocol)가 전송된다.
LLS(Low Layer Signaling)는, 저 레이어의 시그널링 정보로서, BBP 스트림 상에서 전송된다. 예를 들어, LLS로서는, SCD(Service Configuration Description), EAD(Emergency Alerting Description) 및 RRD(Region Rating Description) 등의 서비스 구성 정보(Service Configuration Information)가 전송된다.
(IP 전송 방식에 있어서의 ID 체계)
도 2는 IP 전송 방식을 이용한 디지털 방송의 방송파의 신호와 IP 전송 방식의 ID 체계의 관계를 도시하는 도면이다.
도 2에 도시한 바와 같이, 소정의 주파수 대역(6㎒)을 갖는 방송파(방송 네트워크(Network))에는, 네트워크 ID(network_id)가 할당되어 있다. 각 방송파에는, BBP 스트림 ID(BBP_stream_id)에 의해 식별되는 하나 또는 복수의 BBP 스트림이 포함되어 있다. BBP 스트림은, BBP 헤더와 페이로드로 형성된 복수의 BBP 패킷에 의해 구성된다.
각 BBP 스트림에는, 서비스 ID(service_id)에 의해 식별되는 하나 또는 복수의 서비스(Service)가 포함되어 있다. 각 서비스는, 하나 또는 복수의 컴포넌트(Component)에 의해 구성되어 있다. 각 컴포넌트는, 예를 들어, 비디오 데이터, 오디오 데이터 및 자막 등의 프로그램을 구성하는 정보이다.
이와 같이, IP 전송 방식의 ID 체계로서, MPEG2-TS 방식에서 이용되고 있는 네트워크 ID(network_id), 트랜스포트 스트림 ID(transport_stream_id) 및 서비스 ID(service_id)의 조합(이하, "트리플렛(Triplet)"이라고 함)에 대응하는 구성을 채용하고, 이 트리플렛에 따라, 방송 네트워크 내의 BBP 스트림 구성과 서비스 구성이 나타난다. 그러나, IP 전송 방식의 ID 체계에서는, 트랜스포트 스트림 ID 대신에 BBP 스트림 ID가 이용된다.
이러한 ID 체계를 이용함으로써 현재 널리 보급되어 있는 MPEG2-TS 방식과의 정합을 획득하는 것이 가능하기 때문에, 예를 들어, MPEG2-TS 방식으로부터 IP 전송 방식으로의 이행 시의 사이멀캐스트와의 대응을 용이하게 획득하는 것이 가능해진다.
(IP 전송 방식에 의한 방송파의 구성)
도 3은 IP 전송 방식의 디지털 방송의 방송파의 구성을 도시하는 도면이다.
도 3에 도시한 바와 같이, 소정의 주파수 대역을 갖는 방송파(도면 중의 "Network")에는, 복수의 BBP 스트림이 전송되고 있다. 또한, 각 BBP 스트림에는, NTP(Network Time Protocol), 복수의 서비스 채널(Service Channel), 전자 서비스 가이드(ESG Service) 및 LLS가 포함된다. 그러나, NTP, 서비스 채널 및 전자 서비스 가이드는, UDP/IP의 프로토콜에 따라 전송되지만, LLS는, BBP 스트림 상에서 전송된다. 또한, NTP는 시각 정보(timing information)이며, 복수의 서비스 채널에 공통이다.
각 서비스 채널에는, 비디오 데이터나 오디오 데이터 등의 컴포넌트(Component)와, SPD나 SDP 등의 SCS가 포함된다. 또한, 각 서비스 채널에는, 공통의 IP 어드레스가 주어져 있고, 이 IP 어드레스를 이용하여, 하나 또는 복수의 서비스 채널 각각마다, 컴포넌트, 제어 신호(SCS) 등을 패키지화하는 것이 가능하다. 여기서, 도 3에서, 네트워크(Network), BBP 스트림(BBP Stream) 및 컴포넌트(Component)는 도 2에 대응하고 있지만; 서비스 채널(Service Channel)은, 도 2의 서비스(Service)에 대응하는 것이다.
<2. 컴포넌트 레이어 구조>
(1) 컴포넌트 레이어 구조의 상세
도 4는 컴포넌트 레이어 구조를 도시하는 도면이다.
도 4에 도시한 바와 같이, 비디오(Video), 오디오(Audio) 및 자막(Caption)의 각 컴포넌트는, 셀렉티브 레이어(Selective Layer), 컴포지트 레이어(Composite Layer) 및 어댑티브 레이어(Adaptive Layer)의 3 계층으로 구성된다. 이 계층 구조에서는, 어댑티브 레이어의 상위 계층으로서, 컴포지트 레이어가 배치되고, 컴포지트 레이어의 상위 계층으로서, 셀렉티브 레이어가 배치되어 있다. 이하, 각 레이어의 상세에 대한 설명이 순서대로 주어진다.
(어댑티브 레이어)
먼저, 어댑티브 레이어에 대한 설명이 주어진다. 도 4에 도시한 바와 같이, 가장 하위의 계층이 되는 어댑티브 레이어에 있어서, 상이한 패턴을 갖는 원형 형상의 한쪽 기호는, 방송파로 송신되는 컴포넌트(Broadcast Component)를 나타내고, 다른 쪽 기호는 네트워크를 통하여 배신되는 컴포넌트(Broadband Component)를 나타내고 있다. 이들 컴포넌트는, 소위 어댑티브 스트리밍으로 배신되는 것이며, 상이한 비트 레이트를 갖는 복수의 컴포넌트가 준비되어 있다. 여기서, 도 4의 예에서는, 방송 컴포넌트는 각 카테고리마다 하나씩 준비되어 있지만; 복수 준비될 수도 있다. 또한, 여기서, 비디오, 오디오 또는 자막 등의 컴포넌트의 분류를 카테고리(Category)라고 칭하고 있다.
어댑티브 레이어에서는, 도면 중의 점선의 호 상을 좌우로 흔들리는 직선이, 스위치로서 기능함으로써, 복수의 컴포넌트 중에서 하나의 컴포넌트가 선택된다. 즉, 어댑티브 레이어는, 각 컴포넌트 카테고리에 있어서, 수신 디바이스의 적응적인 판단에 기초하여, 복수의 컴포넌트를 동적으로 전환하여, 하나의 컴포넌트로서 기능시키기 위한 계층이다. 그러나, 컴포넌트가 하나뿐인 경우에는, 당해 스위치를 이용한 선택은 수행되지 않고, 그 컴포넌트만이 항상 선택된다.
또한, 어댑티브 레이어에 있어서의 적응 선택 대상의 속성으로서는, 컴포넌트의 전송 경로나 비트 레이트를 지정하는 것이 가능하다. 예를 들어, 전송 경로의 속성 값으로서는, 방송 또는 통신이 지정된다. 또한, 비트 레이트로서는, 예를 들어 10Mbps 등이 지정된다. 게다가, 예를 들어, 화면 해상도나 물리 층(PHY)의 강건성에 관한 속성을 지정할 수도 있다. 여기서, 상술한 적응 선택 대상의 속성은 일례이며, 다른 속성을 지정할 수 있도록 할 수도 있다.
이러한 속성을 지정할 수 있기 때문에, 수신 디바이스에서는, 설정 기간(예를 들어 10초)마다, 최적의 컴포넌트가 적응적으로 선택되고 전환되어, 어댑티브 스트리밍 배신이 실현된다. 구체적으로는, 컴포넌트의 전송 경로가 단지 통신뿐인 경우에는, 통신 경로의 폭주 상황에 따라 변화하는 수신 디바이스의 수신 버퍼(예를 들어, 후술하는 도 21의 수신 버퍼(421))의 점유 상황에 따라, 최적의 비트 레이트의 컴포넌트를 선택하는 것이 가능하다.
또한, 컴포넌트의 전송 경로로서 통신에 추가하여 방송도 포함되는 경우에는, 방송 컴포넌트의 비트 레이트에 따라, 통신 컴포넌트와의 선택을 판단하는 것이 가능하다. 여기서, 예를 들어, 네트워크를 통하여 배신되는 컴포넌트로서, 1Mbps, 2Mbps, 5Mbps, 10Mbps 및 20Mbps의 각 컴포넌트가 준비되어, 방송파로 송신되는 컴포넌트로서, 8Mbps의 컴포넌트만이 준비되어 있는 경우의 운용을 상정한다.
이 경우, 수신 디바이스는 10Mbps 또는 20Mbps의 통신 컴포넌트를 수신할 수 있으면, 통신 컴포넌트에 대하여 비트 레이트가 방송 컴포넌트보다 높으므로, 통신 컴포넌트가 컴포넌트들 간에 우선하여 수신된다. 또한, 폭주에 의해, 10Mbps와 20Mbps의 통신 컴포넌트를 수신할 수 없고 5Mbps의 통신 컴포넌트를 수신할 수 있으면, 통신 컴포넌트 대신에 안정적으로 수신가능한 8Mbps의 방송 컴포넌트를 선택하도록 하는 운용이 가능해진다. 여기서, 방송 컴포넌트가 복수 준비되어 있는 경우에는, 예를 들어, 방송 신호의 C/N(Carrier/Noise)의 변화를 측정하고, 그 측정 결과에 따라, 적응적으로 방송 컴포넌트를 전환할 수도 있다.
(컴포지트 레이어)
다음에, 컴포지트 레이어에 대한 설명이 주어진다. 도 4에 도시한 바와 같이, 어댑티브 레이어의 상위 계층이 되는 컴포지트 레이어에서는, 어댑티브 레이어에 의해 적응적으로 선택된 복수의 컴포넌트가 하나의 컴포넌트로 합성된다. 즉, 컴포지트 레이어는, 각 컴포넌트 카테고리에 있어서, 합성 대상의 컴포넌트 그룹(이하, "컴포지트 컴포넌트 그룹"이라고 함) 내의 복수의 컴포넌트를 조합하여 하나의 컴포넌트(합성 컴포넌트)로서 기능시키기 위한 계층이다. 그러나, 합성 대상의 컴포넌트 그룹이 하나의 컴포넌트만으로 이루어지는 경우에는, 합성 동작은 불필요하게 된다.
또한, 컴포지트 레이어에 있어서의 합성 대상의 속성으로서는, 스케일러블이나 3차원 영상(3D), 타일, 레이어, 믹싱 등을 지정하는 것이 가능하다. 이들 속성은 조합의 타입을 나타내는 것이며, 그들 조합에 있어서의 요소를 나타내는 속성 값을 지정하는 것이 가능하다.
"스케일러블"은, 합성 대상의 컴포넌트가 스케일러블 부호화가 실시된 컴포넌트인 것을 나타내는 속성이다. 이 스케일러블 속성의 속성 값으로서는, "Base" 또는 "Extended"가 지정된다.
예를 들어, 4K 해상도의 영상을 공급하는 경우에, 스케일러블 속성의 속성 값으로서 "Base"가 지정된 2K 해상도의 영상에 상당하는 부호화 신호(비디오 컴포넌트)를 방송파로 송신하고, 4K 해상도와 2K 해상도의 차분에 상당하는 영상 부호화 신호(비디오 컴포넌트)에, 스케일러블 속성의 속성 값으로서 "Extended"를 지정하여, 네트워크를 통하여 배신하도록 한다. 이것에 의해, 4K 해상도를 핸들링하는 수신 디바이스는, 방송으로 전송되는 기본 스트림(Base Stream)과, 통신으로 전송되는 확장 스트림(Extended Stream)을 합성하여, 4K 해상도의 영상을 표시시킬 수 있다. 한편, 4K 해상도를 핸들링하고 있지 않은 수신 디바이스는, 방송으로 전송되는 기본 스트림만을 이용하여, 2K 해상도의 영상을 표시시키게 된다.
"3D"는, 합성 대상의 컴포넌트가, 3D용 컴포넌트인 것을 나타내는 속성이다. 이 3D 속성의 속성 값으로서는, "Right" 또는 "Left"가 지정된다. 예를 들어, 3D 속성의 속성 값으로서 "Right"가 지정된 우안용 영상 신호(비디오 컴포넌트)를 방송파로 송신하고, 3D 속성의 속성 값으로서 "Left"가 지정된 좌안용 영상 신호(비디오 컴포넌트)를, 네트워크를 통하여 배신하도록 한다. 이것에 의해, 3D를 핸들링하는 수신 디바이스는 우안용 영상 신호와 좌안용 영상 신호를 합성하여, 3D 영상을 표시시킬 수 있다.
"타일"은, 합성 대상의 컴포넌트가, 타일링용 컴포넌트인 것을 나타내는 속성이다. 이 타일 속성의 속성 값으로서, 예를 들어, "Tile A1", "Tile A2", ...; "Tile B1", "Tile B2", ...; 또는 "Tile C1", "Tile C2", ...가 지정된다.
예를 들어, "Tile A1", "Tile A2" ...에서, "Tile A"는, 타일링의 타입이 타입 A인 것을 나타낸다. 타입 A 타일링이 2장의 타일용 영상을 수평으로 나란히 하여 표시하는 방식인 경우, 타일 속성의 속성 값으로서 "Tile A1"이 지정된 좌측에 배치되는 타일용 영상 신호(비디오 컴포넌트)를 방송파로 송신하고, 타일 속성의 속성 값으로서 "Tile A2"가 지정된 우측에 배치되는 타일용 영상 신호(비디오 컴포넌트)를 네트워크를 통하여 배신하도록 한다. 이것에 의해, 타일링 표시에 대응한 수신 디바이스는 좌측 타일용 영상 신호와 우측 타일용 영상 신호를 합성하여, 타입 A 타일링에 대응하는 영상을 표시시킬 수 있다.
동일한 방식으로, 예를 들어, 타입 B 타일링이, 4장의 타일용 영상을 나란히 하고 이 타일을 2×2로 배치하여 표시하는 방식인 경우, 그들 4장의 타일용 영상 신호(비디오 컴포넌트)가 방송 또는 통신에 의해 전송되므로, 수신 디바이스에서는 그들 타일용 영상을 합성하여, 타입 B 타일링에 대응하는 2×2 영상을 표시시킬 수 있다. 또한, 예를 들어, 타입 C 타일링이, 복수의 타일용 영상을 파노라마 영상(예를 들어 360도)으로서 배치하여 표시하는 방식인 경우, 복수의 타일용 영상 신호(비디오 컴포넌트)가, 방송 또는 통신에 의해 전송되므로, 수신 디바이스에서는 그들 타일용 영상 신호를 합성하여 타입 C 타일링에 대응하는 파노라마 영상을 표시시킬 수 있다. 여기서, 상술한 타입 A 내지 C 타일링 방식은 일례이며, 다른 타일링 방식을 채용할 수 있다.
"레이어"는, 합성 대상의 컴포넌트가, 계층 형태로 표시되는 컴포넌트 레이어인 것을 나타내는 속성이다. 이 레이어 속성의 속성 값으로서는, 예를 들어 중첩의 안측부터 순서대로, "Layer 1", "Layer 2", ...가 지정된다. 예를 들어, 레이어 속성의 속성 값으로서 "Layer 1"이 지정된 제1 레이어의 영상 신호(비디오 컴포넌트)를 방송파로 송신하고, 레이어 속성의 속성 값으로서 "Layer 2"가 지정된 제2 레이어의 영상 신호(비디오 컴포넌트)를 네트워크를 통하여 배신하도록 한다. 이것에 의해, 레이어 표시를 핸들링하는 수신 디바이스에서는, 제1 레이어의 영상 신호와 제2 레이어의 영상 신호를 합성하여, 제1 레이어의 영상에 제2 레이어의 영상이 중첩된 영상을 표시시킬 수 있다.
"믹싱"은, 합성 대상의 컴포넌트가, 믹싱되는 컴포넌트인 것을 나타내는 속성이다. 예를 들어, 이 믹싱 속성으로서는, "Track 1", "Track 2", ...가 지정된다. 예를 들어, 믹싱 속성의 속성 값으로서 "Track 1"이 지정된 음성 트랙(오디오 컴포넌트)을 방송파로 송신하고, 믹싱 속성의 속성 값으로서 "Track 2"가 지정된 음성 트랙(오디오 컴포넌트)을, 네트워크를 통하여 배신하도록 한다. 이것에 의해, 믹싱을 핸들링하는 수신 디바이스에서는, 음성 트랙 1과 음성 트랙 2를 믹싱(예를 들어, 볼륨 상대 위치나 패닝 위치를 조정)함으로써 획득된 음성을 출력할 수 있다.
또한, 상술한 컴포지트 레이어에 있어서의 합성 대상의 속성이나 그 속성 값은 일례이며, 다른 속성이나 다른 속성 값을 지정하는 것이 가능할 수도 있다.
(셀렉티브 레이어)
마지막으로, 셀렉티브 레이어에 대한 설명이 주어진다. 도 4에 도시한 바와 같이, 컴포지트 레이어의 상위 계층이며, 가장 상위 계층이 되는 셀렉티브 레이어에서는, 도면 중의 점선 호 상을 좌우로 흔들리는 직선이, 스위치로서 기능함으로써, 복수의 컴포넌트 중에서 하나의 컴포넌트가 선택된다. 즉, 셀렉티브 레이어는, 각 컴포넌트 카테고리에 있어서, 고정 선택 대상의 컴포넌트 그룹(이하, "셀렉티브 컴포넌트 그룹"이라고 함) 중에서, 소정의 선택 방법에 따라, 하나 또는 복수의 컴포넌트를 정적으로 선택하기 위한 계층이다. 이 선택 방법으로서는, 유저에 의한 선택 외에, 예를 들어 수신 디바이스의 성능이나 유저의 기호 정보 등에 따라 수신 디바이스에 의한 자동 선택이 가능하다.
또한, 셀렉티브 레이어에 있어서의 고정 선택 대상의 속성으로서는, 뷰 태그, 언어, 수신 디바이스 처리 요구 능력, 뷰 타이틀, 목적 등을 지정할 수 있다.
구체적으로는, "뷰 태그"는, 하나의 뷰를 구성하는 상이한 컴포넌트 카테고리를 조합하기 위한 태그이다. 예를 들어, 뷰 태그로서 "1"이 지정된 경우에는, 도면 중의 ID "1"이 부여된 비디오, 오디오 및 자막의 컴포넌트가, 새로운 카테고리를 횡단하여 선택되게 된다. 동일한 방식으로, 뷰 태그로서 "2"가 지정된 경우, 도면 중의 ID "2"가 부여된 컴포넌트가, 새로운 카테고리를 횡단하여 선택되게 된다. 여기서, 뷰 태그가 부여되어 있지 않은 컴포넌트는 각 카테고리마다 독립되어 있게 된다.
"언어"에는, 예를 들어 언어 코드가 지정된다. 예를 들어, 언어 코드에 따른 GUI(Graphical User Interface)를 제시함으로써, 유저에 의해 원하는 언어가 선택되게 된다. "수신 디바이스 처리 요구 능력"으로서, 수신 디바이스에서 필요한 처리 요구 능력이 지정된다. 이 요구 능력은, 레벨 값에 의해 지정될 수도 있고, 또는 코덱, 해상도 등에 의해 다차원으로 지정될 수도 있다. 예를 들어, 처리 요구 능력을 레벨 값으로 지정하는 경우에, 그 레벨 값으로서 레벨 2가 지정되었을 때에는, 레벨 2 이상의 처리 능력을 갖는 수신 디바이스만이 요구를 핸들링할 수 있다.
"뷰 타이틀"로서, 뷰 화면 선택용 타이틀이 지정된다. 예를 들어, 이 뷰 타이틀을 텍스트로 표시함으로써, 유저에 의해 원하는 뷰 화면이 선택되게 된다. "목적"으로서, 예를 들어, 본편용 음성에 대한, 내레이션용 음성 등의 컴포넌트의 목적에 관한 정보가 지정된다.
여기서, 상술한 셀렉티브 레이어에 있어서의 고정 선택 대상의 속성은 일례이며, 다른 속성을 지정하는 것이 가능할 수도 있다. 또한, 고정 선택 대상의 속성은 하나에 한정되지 않고, 복수의 속성을 조합하여 이용할 수도 있다.
이러한 고정 선택 대상의 속성을 지정할 수 있으므로, 예를 들어, 수신 디바이스에서는, 실행 중인 애플리케이션이 고정 선택 대상의 속성에 기초하여, 컴포넌트를 선택할 수 있다. 그러나, 셀렉티브 컴포넌트 그룹이 하나뿐인 경우에는, 선택할 필요는 없고, 당해 셀렉티브 컴포넌트 그룹이 선택되게 된다. 또한, 뷰 태그에 의해, 비디오, 오디오 및 자막 등의 상이한 카테고리의 컴포넌트 조합으로 그루핑되어 있는 경우에는 그룹 단위로 컴포넌트가 선택되게 된다.
또한, 수신 디바이스에 있어서, 복수의 컴포넌트가 선택된 경우에, 그 선택 대상이 비디오와 자막 컴포넌트일 때에는, 영상용과 자막용의 복수의 화면이 표시되게 된다. 또한, 복수의 컴포넌트가 선택된 경우에, 그 선택 대상이 오디오 컴포넌트뿐일 때에는, 복수의 음성이 믹싱(Mixing)되고 나서, 출력되게 된다.
여기서, 도 4의 컴포넌트 레이어 구조의 예에서는, 각 컴포넌트 카테고리마다 셀렉티브 레이어가 하나 존재하는 경우를 나타내고 있지만, 각 컴포넌트 카테고리마다 셀렉티브 레이어가 복수 존재할 수도 있다. 또한, 도 4의 컴포넌트 레이어 구조에서는, 컴포넌트로서, 비디오, 오디오 및 자막의 컴포넌트에 대한 설명이 주어지지만; 서비스를 구성하는 다른 컴포넌트에 대해서도 동일한 레이어 구성을 채용할 수 있다.
(컴포넌트 레이어 구조의 도면)
도 5는 컴포넌트 레이어 구조의 도면이다.
도 5에 있어서는, 레벨 3 레이어인 픽원 컴포넌트(PickOneComponent)는, 도 4의 어댑티브 레이어에 상당하며, n개(n은 0 이상의 정수)의 엘리멘터리 컴포넌트 중에서 하나의 컴포넌트를 선택하게 된다. 여기서, 도 5의 엘리멘터리 컴포넌트(Elementary Component)는 비디오, 오디오, 자막 등의 컴포넌트 그 자체를 나타내고 있다.
레벨 2 레이어인 컴포지트 컴포넌트(Composite Component)는, 도 4의 컴포지트 레이어에 상당하며, 레벨 3의 픽원 컴포넌트에서 선택된 n개(n은 0 이상의 정수)의 컴포넌트 및 n개(n은 0 이상의 정수)의 엘리멘터리 컴포넌트를 합성하게 된다.
레벨 1 레이어인 픽원 컴포넌트(PickOneComponent)는, 도 4의 셀렉티브 레이어에 상당하며, 레벨 2의 컴포지트 컴포넌트로 합성된 n개(n은 0 이상의 정수)의 컴포넌트, 레벨 3의 픽원 컴포넌트에서 선택된 n개(n은 0 이상의 정수)의 컴포넌트, 및 n개(n은 0 이상의 정수)의 엘리멘터리 컴포넌트 중에서 하나의 컴포넌트를 선택하게 된다.
이와 같이, 도 4의 컴포넌트 레이어 구조는, 도 5에 도시한 바와 같은 도면에서 나타낼 수 있다.
(시그널링 정보의 구성예)
도 6은, 도 4 및 도 5에 도시한 컴포넌트 레이어 구조를 실현하기 위한 시그널링 정보(제어 신호)의 구성예를 도시하는 도면이다. 여기서, 도 6에 있어서, 요소와 속성 중, "@"은 속성을 나타낸다. 또한, 인덴트된 요소와 속성은 그 상위 요소에 대하여 지정된다.
도 6에 도시한 바와 같이, topAttribute 속성은, 최종 선택을 위한 속성이며, m0 종류(m0은 1 이상의 정수)로 정의된다. 예를 들어, topAttribute 속성으로서, 선택 수와 선택 판단을 정의할 수 있다. 선택 수에는, 전체로 선택 가능한 컴포넌트의 수가 지정된다. 또한, 선택 판단에는, 유저에 의한 선택, 수신 디바이스에 의한 자동 선택 등이 지정된다.
SelectiveComponentGroup 요소로서, 고정 선택 대상의 컴포넌트 그룹인 셀렉티브 컴포넌트 그룹에 관한 정보가 지정된다. SelectiveComponentGroup 요소는, selectiveAttribute 속성 및 CompositeComponentGroup 요소의 상위 요소가 된다. 그러나, SelectiveComponentGroup 요소의 출현 수는, n1(n1은 1 이상의 정수)이 된다.
selectiveAttribute 속성은, SelectiveComponentGroup 요소에 관하여 규정되는 속성을 나타내고, 고정 선택 대상의 속성이 m1 종류(m1은 0 이상의 정수)로 규정된다. 예를 들어, selectiveAttribute 속성에는, 상술한 셀렉티브 레이어에 있어서의 고정 선택 대상의 속성으로서, 뷰 태그, 언어, 수신 디바이스 처리 요구 능력, 뷰 타이틀, 목적 등의 개별 속성이 규정된다.
CompositeComponentGroup 요소로서, 합성 대상의 컴포넌트 그룹인 컴포지트 컴포넌트 그룹에 관한 정보가 지정된다. CompositeComponentGroup 요소는, compositeAttribute 속성 및 AdaptiveComponent 요소의 상위 요소가 된다. 그러나, CompositeComponentGroup 요소의 출현 수는, n2(n2는 1 이상의 정수)가 된다.
compositeAttribute 속성은, CompositeComponentGroup 요소에 관하여 규정되는 속성을 나타내고, 합성 대상의 속성이 m2 종류(m2는 0 이상의 정수)로 규정된다. 예를 들어, compositeAttribute 속성에는, 상술한 컴포지트 레이어에 있어서의 합성 대상의 속성으로서, 스케일러블, 3D, 타일, 레이어 및 믹싱 등의 개별 속성이 규정된다. 또한, 이들의 속성은 조합의 타입을 나타내는 것이며, 그들 조합에 있어서의 요소를 나타내는 속성 값을 지정할 수 있다.
AdaptiveComponent 요소로서, 적응 선택 대상의 컴포넌트에 관한 정보가 지정된다. AdaptiveComponent 요소는, adaptiveAttribute 속성 및 componentId 속성의 상위 요소가 된다. 그러나, AdaptiveComponent 요소의 출현 수는 n3(n3은 1 이상의 정수)이 된다.
adaptiveAttribute 속성은, AdaptiveComponent 요소에 관하여 규정되는 속성을 나타내고, 적응 선택 대상의 속성이 m3 종류(m3은 0 이상의 정수)로 규정된다. 예를 들어, adaptiveAttribute 속성에는, 상술한 어댑티브 레이어에 있어서의 적응 선택 대상의 속성으로서, 컴포넌트의 전송 경로나 비트 레이트 등이 개별로 규정된다. componentId 속성으로서, 컴포넌트의 ID가 지정된다.
여기서, 도 6을 참조하여 설명한 바와 같이, 도 4 및 도 5에 도시한 컴포넌트 레이어 구조를 실현하기 위한 시그널링 정보의 데이터 구성은 일례이며, 다른 데이터 구성을 채용할 수도 있다. 또한, 이 시그널링 정보는, 예를 들어 XML(Extensible Markup Language) 등의 마크업 언어에 의해 기술된다.
(2) 컴포넌트 레이어 구조의 구체예
다음에, 도 7 내지 도 9를 참조하여, 상술한 컴포넌트 레이어 구조의 구체예에 대한 설명이 주어진다.
도 7의 컴포넌트 레이어의 구체예에서는, 비디오의 컴포지트 레이어(Composite Layer)에 있어서의 합성 대상의 속성으로서, 스케일러블이 지정되어 있고, 그 하위 계층인 어댑티브 레이어(Adaptive Layer)에 있어서, 기본 스트림이 방송으로 전송되고(도면 중의 "Scalable Base"), 확장 스트림이 통신으로 전송되고 있다(도면 중의 "Scalable Extended"). 여기에서는, 기본 스트림으로서 적응 선택 대상의 방송 비디오 컴포넌트가 하나만 준비되어 있기 때문에, 그 하나의 방송 비디오 컴포넌트가 항상 선택된다. 한편, 확장 스트림으로서, 적응 선택 대상의 통신 비디오 컴포넌트가 복수 준비되어 있기 때문에, 그들 복수의 통신 비디오 컴포넌트 중에서 최적의 비디오 컴포넌트가 적응적으로 선택되게 된다(도면 중의 "Adaptive switching").
비디오의 컴포지트 레이어에서는, 4K 해상도의 영상을 공급하기 위해서, 방송으로 전송되는 2K 해상도의 영상 부호화 신호(비디오 컴포넌트)와, 통신으로 전송되는 4K 해상도와 2K 해상도의 차분에 상당하는 영상 부호화 신호(비디오 컴포넌트)가 합성되게 된다. 그리고, 셀렉티브 레이어(Selective Layer)에 있어서, 예를 들어, 그 고정 선택 대상의 속성으로서 수신 디바이스 처리 요구 능력이 지정되어 있고, 수신 디바이스가 4K 해상도를 핸들링하고 있는 경우에는, 그 합성된 4K 해상도의 영상을 표시시킬 수 있다(도면 중의 "4K Capable Main View"). 한편, 수신 디바이스가 4K 해상도를 핸들링하고 있지 않은 경우에는, 방송으로 전송되는 기본 스트림만을 이용하여, 2K 해상도의 영상을 표시시키게 된다(도면 중의 "4K Disable Main View"). 즉, 이 경우, 통신 비디오 컴포넌트는 이용되지 않기 때문에, 비디오 컴포넌트의 적응적인 선택은 수행되지 않게 된다(도면 중의 "Non switching").
여기서, 도 8에 도시한 바와 같이, 메인 뷰(Main View)는, 디스플레이 화면에 있어서의, 주요 표시 영역의 의미를 갖는다. 상술한 4K 해상도 또는 2K 해상도의 영상은 이 메인 뷰에 표시된다. 또한, 도 8의 화면예에는, 주요 표시 영역에 대한 보조적인 표시 영역이 되는 서브 뷰(Sub View)를 표시시킬 수 있다. 도 7의 컴포넌트 레이어의 예에서는, 셀렉티브 레이어에 있어서, 셀렉티브 컴포넌트 그룹으로서, 서브 뷰 1(도면 중의 "Sub View1")과, 서브 뷰 2(도면 중의 "Sub View2")가 선택 가능하게 되어 있다.
서브 뷰 1에서는, 어댑티브 레이어에 있어서, 통신 비디오 컴포넌트가 하나만 준비되어 있기 때문에, 적응적인 선택은 수행되지 않고, 그 하나의 통신 비디오 컴포넌트가 항상 선택되게 된다(도면 중의 "Non switching"). 또한, 서브 뷰 2에서는, 어댑티브 레이어에 있어서 적응 선택 대상의 통신 비디오 컴포넌트가 복수 준비되어 있어, 복수의 통신 비디오 컴포넌트로부터 적응적으로 순차적인 최적의 통신 비디오 컴포넌트가 선택되게 된다(도면 중의 "Adaptive switching"). 여기서, 도 8의 화면예에서는, 메인 뷰에 추가하여, 서브 뷰 1과 서브 뷰 2가 동시에 표시되게 되지만; 도 9의 (a) 내지 도 9의 (c)의 화면예에 도시한 바와 같이, 메인 뷰, 서브 뷰 1 및 서브 뷰 2 중, 어느 뷰를 표시시킬지에 대해서는, GUI 화면 등에 의해, 유저에게 선택시키는 것이 가능하다.
오디오의 컴포지트 레이어(Composite Layer)에서는, 그 합성 대상의 속성으로서, 스케일러블이 지정되어 있고, 그 하위 계층의 어댑티브 레이어(Adaptive Layer)에 있어서, 스테레오 스트림이 방송 또는 통신으로 전송되고(도면 중의 "Stereo"), 멀티 채널 스트림이 통신으로 전송되고 있다(도면 중의 "Multi-channel Dev").
여기에서는, 스테레오 스트림으로서, 적응 선택 대상의 오디오 컴포넌트가 복수 준비되어 있기 때문에, 그들 복수의 방송 또는 통신 오디오 컴포넌트 중에서 최적의 오디오 컴포넌트가 적응적으로 선택되게 된다(도면 중의 "Adaptive switching"). 즉, 방송 오디오 컴포넌트로서, 통상의 강건성(도면 중의 "Normal Robustness")과, 높은 강건성(도면 중의 "High Robustness")을 갖는 오디오 컴포넌트를 각각 준비하여, 그들을 적응적으로 선택할 수 있도록 함으로써, 예를 들어, 높은 강건성을 갖는 오디오 컴포넌트가 선택된 경우에, 어떠한 원인으로, 수신 디바이스에 영상을 표시할 수 없을 때에도, 음성만을 출력하는 등의 운용이 가능해진다. 또한, 방송 오디오 컴포넌트를 수신할 수 없는 경우에는, 통신 오디오 컴포넌트를 선택할 수도 있다.
한편, 멀티 채널 스트림으로서, 적응 선택 대상의 오디오 컴포넌트가 하나만 준비되어 있기 때문에, 그 하나의 통신 오디오 컴포넌트가 항상 선택된다.
오디오 컴포지트 레이어에서는, 방송으로 전송되는 스테레오 오디오 컴포넌트와 통신으로 전송되는 멀티 채널 오디오 컴포넌트가 합성되어, 22.2ch의 멀티 채널 합성 컴포넌트가 생성된다. 다음에, 셀렉티브 레이어(Selective Layer)에 있어서, 예를 들어, 그 고정 선택 대상의 속성으로서 수신 디바이스 처리 요구 능력이 지정되어 있고, 수신 디바이스가 22.2ch의 멀티 채널을 핸들링하고 있는 경우에는, 그 합성된 22.2ch의 멀티 채널의 음성을 출력시킬 수 있다(도면 중의 "22.2ch Capable Main View"). 한편, 수신 디바이스가 22.2ch의 멀티 채널을 핸들링하고 있지 않는 경우에는, 방송 또는 통신으로 전송되는 스테레오 스트림만을 이용하여, 스테레오 음성을 출력시키게 된다(도면 중의 "22.2ch Disable Main View").
여기서, 이들 오디오 셀렉티브 레이어의 고정 선택 대상의 속성으로서, 뷰 태그 1이 부여되고 있으므로, 동일한 방식으로 뷰 태그 1이 부여되어 있는 비디오의 셀렉티브 레이어의 비디오 컴포넌트에 연동하게 된다. 즉, 이들 오디오 컴포넌트에 대응하는 음성은, 도 8의 화면예의 메인 뷰에 표시되는 영상에 대하여 출력되게 된다.
또한, 셀렉티브 레이어의 고정 선택 대상의 속성으로서, 뷰 태그 2가 부여되어 있는 오디오 컴포넌트는, 동일한 방식으로 뷰 태그 2가 부여되어 있는 비디오의 셀렉티브 레이어의 비디오 컴포넌트에 연동하게 된다(도면 중의 "Sub View1"). 즉, 이들 오디오 컴포넌트에 대응하는 음성은, 도 8의 화면예의 서브 뷰 1에 표시되는 영상에 대하여 출력되게 된다.
또한, 뷰 태그 3이 부여되어 있는 오디오 컴포넌트는, 동일한 방식으로 뷰 태그 3이 부여되어 있는 비디오 컴포넌트에 연동하게 된다(도면 중의 "Sub View2"). 또한, 오디오의 서브 뷰 1과 서브 뷰 2에서는, 어댑티브 레이어에 있어서, 통신 오디오 컴포넌트가 하나만 준비되어 있기 때문에, 적응적인 선택은 수행되지 않고, 그 하나의 통신 오디오 컴포넌트가 항상 선택되게 된다.
또한, 도 7에 도시한 바와 같이, 자막의 컴포지트 레이어(Composite Layer)에서는, 자막 컴포넌트의 합성은 수행되지 않고, 또한, 어댑티브 레이어(Adaptive Layer)에서는, 자막 컴포넌트의 적응적인 선택이 수행되지 않기 때문에, 셀렉티브 레이어(Selective Layer)에 있어서의 자막 컴포넌트와, 어댑티브 레이어에 있어서의 자막 컴포넌트가 1대1로 대응하고 있다. 여기서, 자막 컴포넌트 중, 도면 중의 가장 좌측의 하나의 자막 컴포넌트만이 방송으로 전송되고, 다른 자막 컴포넌트는 통신에 의해 전송되고 있다.
셀렉티브 레이어의 고정 선택 대상의 속성으로서, 뷰 태그 1이 부여되어 있는 자막 컴포넌트는, 동일한 방식으로 뷰 태그 1이 부여되어 있는 비디오와 오디오의 컴포넌트에 연동하게 된다. 구체적으로는, 이 예의 경우, 영어와 스페인어 자막이 공급되지만, 그들 자막에는, 본편의 자막(도면 중의 "Eng(Nor)", "Spa(Nor)")에 추가하여, 보다 상세한 해설적인 자막(도면 중의 "Eng(Ex)", "Spa(Ex)")이 준비되어 있다. 자막의 셀렉티브 레이어에 있어서, 예를 들어 그 고정 선택 대상의 속성으로서, 유저 선택에 의해 언어가 지정되어 있는 경우, 그 언어 코드 등에 따른 자막을 표시시킬 수 있다. 즉, 유저에 의해 선택된 영어나 스페인어 등의 자막이, 도 8의 화면예의 메인 뷰에 표시되는 영상에 중첩하여 표시되게 된다.
또한, 셀렉티브 레이어의 고정 선택 대상의 속성으로서, 뷰 태그 2가 부여되어 있는 자막 컴포넌트는, 동일한 방식으로 뷰 태그 2가 부여되어 있는 비디오와 오디오의 컴포넌트에 연동하게 된다. 구체적으로는, 영어 자막(도면 중의 "Eng")과, 스페인어 자막(도면 중의 "Spa")이 준비되어 있으므로, 도 8의 화면예의 서브 뷰 1에 표시되는 영상에, 유저 선택에 따른 자막을 중첩하여 표시시킬 수 있다.
또한, 셀렉티브 레이어의 고정 선택 대상의 속성으로서, 뷰 태그 3이 부여되어 있는 자막 컴포넌트는, 동일한 방식으로 뷰 태그 3이 부여되어 있는 비디오와 오디오의 컴포넌트에 연동하게 된다. 구체적으로는, 영어 자막(도면 중의 "Eng")과, 스페인어 자막(도면 중의 "Spa")이 준비되어 있으므로, 유저 선택에 따른 자막을 영상에 중첩하여 표시시킬 수 있다.
<3. 시그널링 정보의 구성>
(1) 시그널링 정보의 상세
도 10은 시그널링 정보의 상세를 도시하는 도면이다.
상술한 바와 같이, LLS로서는, 예를 들어 SCD(Service Configuration Description), EAD(Emergency Alerting Description) 및 RRD(Region Rating Description)가 전송된다.
SCD는, MPEG2-TS 방식에서 이용되고 있는 트리플렛에 상당하는 ID 체계를 채용하고, 이 트리플렛에 의해, 방송 네트워크 내의 BBP 스트림 구성과 서비스 구성이 나타난다. 또한, SCD에는, 서비스 단위의 속성 및 설정 정보로서의 IP 어드레스 등의 정보, ESG에 액세스하기 위한 ESG bootstrap 정보, SCS에 액세스하기 위한 SC bootstrap 정보가 포함된다. EAD는, 긴급 고지에 관한 정보를 포함하고 있다. RRD는, 레이팅 정보를 포함하고 있다. 여기서, SCD, EAD 및 RRD는, 예를 들어XML(Extensible Markup Language) 등의 마크업 언어에 의해 기술된다.
SCS로서는, 예를 들어, SPD(Service Parameter Description), USD(User Service Description), MPD(Media Presentation Description) 및 SDP(Session Description Protocol)가 전송된다.
SPD는, 서비스와 컴포넌트의 레벨로 규정된 다양한 타입의 파라미터를 포함한다. USD는, MPD나 SDP를 참조하기 위한 정보 등을 포함하고 있다. MPD는, 컴포넌트의 어댑티브 스트리밍 배신을 관리하기 위한 정보이며, 서비스 단위로 전송되는 각 컴포넌트마다의 세그먼트 URL(Uniform Resource Locator)의 정보를 포함하고 있다.
SDP는, 서비스 단위의 서비스 속성, 컴포넌트의 구성 정보, 컴포넌트 속성, 컴포넌트의 필터 정보, 컴포넌트의 로케이션 정보 등을 포함하고 있다. USD, MPD 및 SDP를 이용함으로써, 예를 들어 RTP 세션이나 FLUTE 세션에서 전송되는 컴포넌트를 취득할 수 있다. 여기서, SPD, USD, MPD 및 SDP는, 예를 들어 XML 등의 마크업 언어에 의해 기술된다.
ESG는, 예를 들어 프로그램 타이틀이나 개시 시각 등의 정보를 포함하는 전자 서비스 가이드이다. ESG는, SCD의 ESG bootstrap 정보를 이용하여 취득할 수 있다. 애플리케이션(Application)은, HTML(Hyper Text Markup Language) 형식의 파일 등으로 구성되어, 예를 들어 인터넷 상의 서버로부터 배신된다. 애플리케이션은, 특정 서비스로서 공급되는 텔레비전 프로그램 등의 방송 콘텐츠에 연동하여 실행된다. ESG와 애플리케이션은 USD와 관련지어질 수 있다.
(2) MPD를 이용한 컴포넌트 레이어 대응
도 11은 MPD를 이용한 컴포넌트 레이어 대응을 도시하는 도면이다.
MPD에 대해, Period 요소, AdaptationSet 요소, Representation 요소 및 SubRepresentation 요소가 계층 구조로 기술되어 있다. Period 요소는, 텔레비전 프로그램 등의 콘텐츠의 구성을 기술하는 단위가 된다. 또한, AdaptationSet 요소, Representation 요소 또는 SubRepresentation 요소는 비디오, 오디오 또는 자막 등의 각 스트림마다 이용되고, 각 스트림의 속성을 기술할 수 있게 되어 있다.
구체적으로는, AdaptationSet 요소는, 다양한 타입의 소스로부터 인코딩된 스트림을 나타내고 있다. 다음에, 당해 스트림을, 예를 들어 비트 레이트 등의 파라메트릭에 따라, 수신 디바이스측에서 선택하기 위해서, AdaptationSet 요소 내에, Representation 요소를 배치하고, 예를 들어 비트 레이트 등의 파라미터가 상이한 복수의 선택지가 되는 스트림을 열거하고 있다. 통상적으로, AdaptationSet 요소나 Representation 요소는 비디오, 오디오 또는 자막의 스트림 등의 단일의 스트림과 대응하고 있다.
여기서, 도 11의 레벨 3 레이어의 기능은, 픽원 컴포넌트(PickOneComponent)를 MPD의 AdaptationSet 요소에 매핑하고, AdaptationSet 요소 내에 열거되는 Representation 요소 또는 SubRepresentation 요소를, 엘리멘터리 컴포넌트(Elementary Component)에 더 매핑함으로써 실현할 수 있다.
또한, 도 11의 레벨 2 레이어의 기능은, MPD의 AdaptationSet 요소 사이의 관계, Representation 요소 사이의 관계, 또는 SubRepresentation 요소 사이의 관계를 정의하는 의존 관계 기술 속성에 매핑함으로써 실현할 수 있다. 이 의존 관계 기술 속성으로서는, MPD에 의해 규정되어 있는 AdaptationSet 요소의 하위 요소가 되는 EssentialProperty 요소나 SupplementalProperty 요소를 이용하여, 새로운 요소를 정의하여, AdaptationSet 속성 군을 그루핑할 수 있도록 한다.
또한, 도 11의 레벨 1 레이어의 기능은, MPD의 AdaptationSet 요소의 group 속성에 매핑함으로써 실현할 수 있다. AdaptationSet 요소의 group 속성은, AdaptationSet 요소를 그루핑하기 위한 것이며, 동일한 속성 값을 갖는 AdaptationSet 요소는 동일한 그룹에 속하게 된다. 다음에, 동일한 그룹 내의 복수의 AdaptationSet 요소 중에서, 하나의 AdaptationSet 요소가 선택되게 된다.
(구체적인 운용예 1)
도 12는 MPD를 이용한 컴포넌트 레이어 대응의 구체적인 운용예를 도시하는 도면이다.
도 12에 있어서는, 당해 운용예를 실현하기 위한 MPD의 기술 내용이 나타내어지고, "AS"는 AdaptationSet 요소를 나타내고 "R"은 Representation 요소를 나타내고 있다. 또한, AdaptationSet 요소에는, "@id"으로 나타낸 id 속성과, "@gid"로 나타낸 group 속성이 기술되어 있다. 또한, "@schemeIdUri"는, EssentialProperty 요소의 schemeIdUri 속성을 나타내고 있다.
도 12의 MPD에 있어서는, 비디오의 그룹 1에 속하는 4개의 AdaptationSet 요소(id = "11", "12", "13" 및 "14")와, 오디오의 그룹 2에 속하는 4개의 AdaptationSet 요소(id = "21", "22", "23" 및 "24")가 기술되고, 그들 AdaptationSet 요소 각각의 지배 하에 하나 또는 복수의 Representation 요소가 기술되어 있다.
비디오의 그룹 1에 있어서, 각 Representation 요소에는, 비디오 컴포넌트로서, "base", "ext", "SV1" 및 "SV2"가 열거되어 있다. 여기서, "base"는, 독립적으로 재생 가능한 기본 영상 신호에 상당하는 비디오 컴포넌트를 나타내고, "ext"는, 확장용 영상 신호에 상당하는 비디오 컴포넌트를 나타내고 있다. 또한, "SV1"과 "SV2"에 있어서, "SV"는, 주요 표시 영역인 메인 뷰에 대한 보조적인 영역이 되는 서브 뷰를 나타내고 있다.
id="11"의 AdaptationSet 요소의 지배 하에는, 하나의 Representation 요소만이 기술되어, 독립적으로 재생 가능한 기본 영상 신호에 상당하는 하나의 비디오 컴포넌트가 항상 선택되게 된다. 이와 같이 하여 선택되는 비디오 컴포넌트는 엘리멘터리 컴포넌트에 상당한다. 여기서, 당해 비디오 컴포넌트는 메인 뷰용으로 되어 있다.
id="12"의 AdaptationSet 요소에는, EssentialProperty 요소의 schemeIdUri 속성의 속성 값으로서, "urn:..:SVC"가 지정되어 있다. 여기서, 도 12의 운용예에 있어서는, EssentialProperty 요소의 schemeIdUri 속성의 속성 값으로서, "urn:..:SVC"가 정의되고 있고, 이 속성 값을 가지고 있는 EssentialProperty 요소를 갖는 AdaptationSet 속성은, 그 지배 하의 Representation 요소 군이 서로 Base-Enhance 관계의 의존 관계를 갖는다는 의미를 갖도록 정의되어 있다.
따라서, id="12"의 AdaptationSet 요소의 지배 하의 4개의 Representation 요소는, Base-Enhance 관계의 의존 관계를 갖고 있게 된다. 즉, id="12"의 AdaptationSet 요소의 지배 하에는, 4개의 Representation 요소가 기술되고, 기본 영상 신호에 상당하는 비디오 컴포넌트가 하나 열거되어 있고, 확장용 영상 신호에 상당하는 비디오 컴포넌트가 3개 열거되어 있고, Base-Enhance 관계의 의존 관계를 갖고 있다. 이것에 의해, 레벨 3(픽원 컴포넌트)의 레이어에 있어서, 예를 들어, 네트워크 환경 조건 등에 따라 기본 영상 신호와 확장용 영상 신호에 상당하는 비디오 컴포넌트가 선택되게 된다. 여기서, 당해 비디오 컴포넌트는, 메인 뷰용으로 되어 있다.
이와 같이, MPD에 있어서, EssentialProperty 요소를, AdaptationSet 속성의 지배 하의 Representation 요소에 열거되는 컴포넌트 군의 특징을 표현하기 위하여 이용하고 있다.
id="13"의 AdaptationSet 요소의 지배 하에는, 하나의 Representation 요소만이 기술되어, 서브 뷰 1용의 하나의 비디오 컴포넌트가 항상 선택되게 된다. 이와 같이 하여 선택되는 비디오 컴포넌트는 엘리멘터리 컴포넌트에 상당한다.
id="14"의 AdaptationSet 요소의 지배 하에는, 3개의 Representation 요소가 기술되어, 서브 뷰 2용의 비디오 컴포넌트가 3개 열거되어 있고, 레벨 3(픽원 컴포넌트)의 레이어에 있어서, 예를 들어, 네트워크 환경 조건 등에 따라, 적응적으로 하나의 비디오 컴포넌트가 선택되게 된다.
이와 같이, 픽원 컴포넌트를, AdaptationSet 요소에 매핑하고, 또한, AdaptationSet 요소 내에 열거되는 Representation 요소를, 엘리멘터리 컴포넌트에 매핑함으로써, 도 11의 컴포넌트 레이어 구조에 있어서의 레벨 3 레이어의 기능이 실현되어, 비디오 컴포넌트의 선택이 수행된다.
여기서, 도 12의 MPD에 있어서는, id="11"의 AdaptationSet 요소, id="12"의 AdaptationSet 요소, id="13"의 AdaptationSet 요소 및 id="14"의 AdaptationSet 요소에는 group 속성으로서, group="1"이 지정되어 있고, 그들의 AdaptationSet 요소는 동일한 그룹 1에 속해 있게 된다.
이와 같이, group 속성에 따라 그루핑을 수행함으로써, 도 11의 컴포넌트 레이어 구조에 있어서의 레벨 1 레이어의 기능이 실현되고, 당해 레벨 1(픽원 컴포넌트) 레이어에 있어서, 동일한 그룹 내의 비디오 컴포넌트 중에서 하나의 비디오 컴포넌트가 선택되게 된다. 여기에서는, 그룹 1에 속해 있는, 레벨 3(픽원 컴포넌트) 레이어에서 선택된 비디오 컴포넌트와 엘리멘터리 컴포넌트 중에서 하나의 비디오 컴포넌트가 선택된다.
한편, 오디오의 그룹 2에 있어서, 각 Representation 요소에는, 오디오 컴포넌트로서, "NrRbst", "HiRbst", "MCD", "SV1" 및 "SV2"가 열거되어 있다. "NrRbst"는, 통상의 강건성을 갖는 오디오 컴포넌트를 의미한다. 또한, "HiRbst"는, 높은 강건성을 갖는 오디오 컴포넌트의 의미를 갖는다. "MCD"는, 멀티 채널 오디오 컴포넌트를 나타내고 있다. 또한, "SV1"과 "SV2"에서, "SV"는 서브 뷰용 오디오 컴포넌트를 나타내고 있다.
id="21"의 AdaptationSet 요소의 지배 하에는, 2개의 Representation 요소가 기술되는데, 통상의 강건성을 갖는 오디오 컴포넌트와, 높은 강건성을 갖는 오디오 컴포넌트가 열거되어 있고, 레벨 3(픽원 컴포넌트) 레이어에 있어서, 예를 들어, 네트워크 환경 조건 등에 따라, 적응적으로 하나의 오디오 컴포넌트가 선택되게 된다. 여기서, 당해 오디오 컴포넌트는 메인 뷰용으로 되어 있다.
id="22"의 AdaptationSet 요소의 지배 하에는, 하나의 Representation 요소만이 기술되어, 하나의 멀티 채널 오디오 컴포넌트가 항상 선택되게 된다. 이와 같이 하여 선택되는 오디오 컴포넌트는 엘리멘터리 컴포넌트에 상당한다. 여기서, 당해 오디오 컴포넌트는 메인 뷰용으로 되어 있다.
id="23"의 AdaptationSet 요소의 지배 하에는, 하나의 Representation 요소만이 기술되어, 서브 뷰 1용의 하나의 오디오 컴포넌트가 항상 선택되게 된다. 동일한 방식으로, id="24"의 AdaptationSet 요소의 지배 하에는, 서브 뷰 2용의 하나의 오디오 컴포넌트가 항상 선택되게 된다. 이와 같이 하여 선택되는 서브 뷰용의 오디오 컴포넌트는 엘리멘터리 컴포넌트에 상당한다.
여기서, 도 12의 MPD에 있어서는, id="21"의 AdaptationSet 요소, id="22"의 AdaptationSet 요소, id="23"의 AdaptationSet 요소 및 id="24"의 AdaptationSet 요소에는 group 속성으로서, group="2"가 지정되어 있고, 그들의 AdaptationSet 요소는 동일한 그룹 2에 속해 있게 된다.
이와 같이, group 속성에 따라 그루핑을 행함으로써, 도 11의 컴포넌트 레이어 구조에 있어서의 레벨 1 레이어의 기능이 실현되고, 당해 레벨 1(픽원 컴포넌트) 레이어에 있어서, 동일한 그룹 내의 오디오 컴포넌트 중에서 하나의 오디오 컴포넌트가 선택되게 된다. 여기에서는, 그룹 2에 속해 있는, 레벨 3(픽원 컴포넌트) 레이어에서 선택된 오디오 컴포넌트와 엘리멘터리 컴포넌트 중에서 하나의 오디오 컴포넌트가 선택된다.
또한, 도 12의 MPD에 있어서는, Subset 요소가, 컴포넌트 레이어 구조에 관한 규정의 한계 밖에서, 비디오나 오디오 등의 복수의 컴포넌트의 동시 제시를 위한 그루핑을 정의하기 위하여 이용되고 있다.
구체적으로는, 첫번째 Subset 요소의 contains 속성으로서 "11 21"이 지정되어 있고, 이는 id="11"의 AdaptationSet 요소와, id="21"의 AdaptationSet 요소는 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-base")와 오디오 컴포넌트("A-NrRbst"또는 "A-HiRbst")는 동시에 재생되는 메인 뷰용 컴포넌트가 된다.
두번째 Subset 요소의 contains 속성으로서 "11 22"가 지정되어 있고, 이는 id="11"의 AdaptationSet 요소와, id="22"의 AdaptationSet 요소는 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-base")와 오디오 컴포넌트("A-MCD")는 동시에 재생되는 메인 뷰용 컴포넌트가 된다.
세번째 Subset 요소의 contains 속성으로서 "11 12 21"이 지정되어 있고, 이는 id="11"의 AdaptationSet 요소와, id="12"의 AdaptationSet 요소와, id="21"의 AdaptationSet 요소는 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-base" 또는 "V-base"와 "V-ext")와 오디오 컴포넌트("A-NrRbst"또는 "A-HiRbst")는 동시에 재생되는 메인 뷰용 컴포넌트가 된다.
4번째 Subset 요소의 contains 속성으로서 "11 12 22"가 지정되어 있고, 이는 id="11"의 AdaptationSet 요소와, id="12"의 AdaptationSet 요소와, id="22"의 AdaptationSet 요소는 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-base"또는 "V-base"와 "V-ext")와 오디오 컴포넌트("A-MCD")는 동시에 재생되는 메인 뷰용 컴포넌트가 된다.
5번째 Subset 요소의 contains 속성으로서 "13 23"이 지정되어 있고, 이는 id="13"의 AdaptationSet 요소와, id="23"의 AdaptationSet 요소는, 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-SV1")와 오디오 컴포넌트("A-SV1")는 동시에 재생되는 서브 뷰 1용 컴포넌트가 된다.
6번째 Subset 요소의 contains 속성으로서 "14 24"가 지정되어 있고, 이는 id="14"의 AdaptationSet 요소와, id="24"의 AdaptationSet 요소는 동시에 제시되는 AdaptationSet 요소의 조합인 것을 나타내고 있다. 즉, 비디오 컴포넌트("V-SV2")와 오디오 컴포넌트("A-SV2")는 동시에 재생되는 서브 뷰 2용 컴포넌트가 된다.
이와 같이, Subset 요소를, 도 11의 컴포넌트 레이어 구조에 관한 규정의 한계 밖에서, 비디오나 오디오 등의 복수의 컴포넌트의 동시 제시를 위한 그루핑을 정의하기 위하여 이용함으로써, 예를 들어, 비디오와 오디오 사이에, 메인 뷰용, 서브 뷰 1용, 서브 뷰 2용 등의 관련지음을 행할 수 있다. 또한, 예를 들어, 비디오와 오디오의 컴포넌트 중, 하나의 컴포넌트가 특정되면, 다른 쪽 컴포넌트도 특정되게 된다.
이상, 구체적인 운용예에 대한 설명이 주어졌다.
(3) SPD와 MPD의 제휴
도 13은 SPD와 MPD의 제휴 방법을 도시하는 도면이다.
도 13에 도시한 바와 같이, SPD에 있어서는, 컴포넌트(Component), 컴포넌트 그룹(Component Group), 컴포넌트 카테고리(Component Category) 및 서비스(Service)가 계층 구조를 형성하고 있다. 또한, MPD에 있어서는 리프리젠테이션(Representation) 요소, 어댑테이션 세트(AdaptationSet) 요소 및 그룹(group)이 계층 구조를 형성하고 있다. 그러나, 상술한 바와 같이, MPD의 그룹은 AdaptationSet 요소의 group 속성에 상당하는 것이다.
이러한 계층 구조에 있어서, SPD의 컴포넌트(Component)와 MPD의 Representation 요소가 리프리젠테이션 ID(RepresentationId)에 의해 매핑되도록 한다. 또한, SPD의 컴포넌트 그룹(Component Group)과, MPD의 AdaptationSet 요소가 어댑테이션 세트 ID(AdaptationSetId)에 의해 매핑되도록 한다. 또한, SPD의 컴포넌트 카테고리(Component Category)와, MPD의 AdaptationSet 요소의 group 속성이 그룹 ID(groupId)에 의해 매핑되도록 한다.
이와 같이, 각 계층에서의 매핑을 행함으로써, SPD와 MPD가 서로 제휴한 운용을 수행할 수 있으므로, SPD와 MPD의 각 레이어의 파라미터를 공유하여, 각 레이어에 포함되는 컴포넌트(오브젝트)를 횡단적으로 처리할 수 있다. 여기서, 도 13의 계층 구조의 예에서는, SPD의 컴포넌트에 대응하는 계층이 어댑티브 레이어와 컴포지트 레이어가 되고, SPD의 컴포넌트 그룹에 대응하는 계층이 셀렉티브 레이어인 것을 나타내고 있지만; 이 관계는 일례이며, 예를 들어, SPD의 컴포넌트에 대응하는 계층을 어댑티브 레이어로 하고, SPD의 컴포넌트 그룹에 대응하는 계층을 컴포지트 레이어로 하고, SPD의 컴포넌트 카테고리에 대응하는 계층을 셀렉티브 레이어로 하는 것이 이해될 수도 있다.
(구체적인 운용예 2)
도 14는 SPD와 MPD의 제휴의 구체적인 운용예를 도시하는 도면이다.
도 14에 있어서는, 좌측에 SPD의 기술 내용이 도시되고, 우측에 MPD의 기술 내용이 도시되어 있다. 또한, 상술한 도 4 등과 동일한 방식으로, 비디오(Video)와 오디오(Audio)의 컴포넌트가, 셀렉티브 레이어, 컴포지트 레이어 및 어댑티브 레이어의 3 계층으로 구성되어 있다.
SPD의 어댑티브 레이어에 있어서, "C"는 컴포넌트(Component)의 의미를 갖고, "V"는 비디오의 의미를 갖고, "A"는 오디오의 의미를 갖는다. 또한, "RTP"는, 컴포넌트가 RTP 세션에서 전송되고 있는 것, 즉 RTP 스트림이 방송으로 전송되고 있는 것을 나타내고 있다. 또한, "DASH"는, 컴포넌트가 MPEG-DASH(Moving Picture Expert Group-Dynamic Adaptive Streaming over HTTP)의 표준에 준거하여 스트리밍 배신되고 있는 것, 즉 DASH 스트림이 통신으로 전송되고 있는 것을 나타내고 있다.
구체적으로는, 도면 중의 "C1"로 표시되는 비디오 컴포넌트 C1은, RTP 스트림으로서 방송으로 전송되고 있다. 한편, 도면 중의 "C2" 내지 "C5"로 표시되는 비디오 컴포넌트 C2 내지 C5는 DASH 스트림으로서 통신으로 전송되고 있다. 여기서, 비디오 컴포넌트 C2의 비트 레이트는 예를 들어 1Mbps 등의 저 비트 레이트가 된다. 한편, 비디오 컴포넌트 C3의 비트 레이트는 예를 들어 10Mbps 등의 고 비트 레이트가 된다.
또한, 도면 중의 "C6"으로 표시되는 오디오 컴포넌트 C6은, RTP 스트림으로서 방송으로 전송되고 있다. 도면 중의 "C7"과 "C8"로 표시되는 오디오 컴포넌트 C7과 오디오 컴포넌트 C8은 DASH 스트림으로서 통신으로 전송되고 있다.
한편, MPD의 어댑티브 레이어에 있어서, 어댑티브 레이어의 "R"은 MPD의 Representation 요소의 의미를 갖는다. 즉, 도면 중의 "R1" 내지 "R4"로 표시되며 Representation 요소에 기술된 비디오 컴포넌트 R1 내지 R4는 DASH 스트림으로서 통신으로 전송되고 있다. 여기서, 비디오 컴포넌트 R1의 비트 레이트는 예를 들어 1Mbps 등의 저 비트 레이트가 된다. 한편, 비디오 컴포넌트 R2의 비트 레이트는 예를 들어 10Mbps 등의 고 비트 레이트가 된다.
또한, 도면 중의 "R5"와 "R6"으로 표시되는 오디오 컴포넌트 R5와 오디오 컴포넌트 R6은 DASH 스트림으로서 통신으로 전송되고 있다.
상술한 구성으로 형성되는 SPD와 MPD의 어댑티브 레이어를 비교하면, MPD는 MPEG-DASH의 표준에 준거한 스트리밍 배신을 관리하기 위하여 규정되어 있으므로, 기본적으로 DASH 스트림으로서 통신으로 전송되는 컴포넌트에 대한 설명만이 주어진다. 한편, SPD에서는, 전송 형태에 따라 컴포넌트에 관한 설명이 제한되지는 않으므로, RTP 스트림으로서 방송으로 전송되는 컴포넌트와, DASH 스트림으로서 통신으로 전송되는 컴포넌트의 양쪽을 기술할 수 있다.
바꾸어 말하면, 도 14의 SPD와 MPD의 기술예에서는, SPD에는, RTP 스트림으로서 방송으로 전송되는 컴포넌트에 추가하여, MPD의 기술 내용과 동일한 DASH 스트림으로서 통신으로 전송되는 컴포넌트가 기술되어 있다. 즉, SPD에는, MPD에 기술된 컴포넌트가 모두 기술되어 있다. 다음에, SPD에는, 각 컴포넌트마다 리프리젠테이션 ID가 지정되어 있고, 이 리프리젠테이션 ID가, MPD의 Representation 요소의 리프리젠테이션 ID와 관련되어 있으므로, SPD와 MPD에 기술된 통신 컴포넌트를 연관시킬 수 있다.
즉, 도 14의 어댑티브 레이어에 있어서는, 도면 중의 화살표로 도시된 바와 같이, SPD의 비디오 컴포넌트 C2, C3, C4 및 C5와, MPD의 비디오 컴포넌트 R1, R2, R3 및 R4가 리프리젠테이션 ID에 따라 연관된다. 또한, 도면 중의 화살표로 도시된 바와 같이, SPD의 오디오 컴포넌트 C7 및 C8과, MPD의 오디오 컴포넌트 R5 및 R6이 리프리젠테이션 ID에 따라 연관된다.
또한, SPD의 컴포지트 레이어에 있어서 "CG"는 컴포넌트 그룹(Component Group)의 의미를 갖고, "V"는 비디오의 의미를 갖고, "A"는 오디오의 의미를 갖는다. 즉, 도면 중의 "CG1-V"로 표시되는 컴포넌트 그룹 CG1 내의 비디오 컴포넌트 C1 내지C3이 합성되어, 합성 컴포넌트를 형성한다.
여기서, 컴포지트 레이어에 있어서의 합성 대상의 속성으로서 스케일러블 속성이 지정되어 있다. 즉, 비디오 컴포넌트 C1에는, 스케일러블 속성의 속성 값으로서 "Base"가 지정되고, 비디오 컴포넌트 C2와 비디오 컴포넌트 C3에는, 스케일러블 속성의 속성 값으로서 "Extended"가 지정되어 있다. 또한, 비디오 컴포넌트 C2의 비트 레이트는 예를 들어 1Mbps 등의 저 비트 레이트가 된다. 한편, 비디오 컴포넌트 C3의 비트 레이트는 예를 들어 10Mbps 등의 고 비트 레이트가 된다.
이것에 의해, 기본 스트림(Base Stream)으로서의 RTP 스트림에 의해 방송으로 전송되는 비디오 컴포넌트 C1과, 확장 스트림(Extended Stream)으로서의 DASH 스트림에 의해 통신으로 전송되는 비디오 컴포넌트 C2 또는 비디오 컴포넌트 C3이 합성되어, 컴포넌트 그룹 CG1에 있어서의 합성 컴포넌트가 획득된다. 여기서, DASH 스트림으로서 통신으로 전송되며 상이한 비트 레이트를 갖는 비디오 컴포넌트 C2와 비디오 컴포넌트 C3 중 하나의 통신 비디오 컴포넌트가 예를 들어 통신 경로의 폭주 상황에 따라 선택된다.
또한, 도면 중의 "CG2-V"로 표시되는 컴포넌트 그룹 CG2 내에는, 통신 비디오 컴포넌트 C4가 하나만 준비되어 있으므로, 어댑티브 레이어에 있어서 적응적인 선택은 수행되지 않고, 또한, 컴포지트 레이어에 있어서 합성도 수행되지 않는다. 또한, 도면 중의 "CG3-V"로 표시되는 컴포넌트 그룹 CG3 내에는 통신 비디오 컴포넌트 C5가 하나만 준비되어 있으므로, 어댑티브 레이어에 있어서 적응적인 선택은 수행되지 않고, 또한, 컴포지트 레이어에 있어서 합성도 수행되지 않는다.
또한, 도면 중의 "CG4-A"로 표시되는 컴포넌트 그룹 CG4 내에는, 방송 오디오 컴포넌트 C6이 하나만 준비되어 있으므로, 어댑티브 레이어에 있어서 적응적인 선택은 수행되지 않고, 또한, 컴포지트 레이어에 있어서 합성도 수행되지 않는다. 동일한 방식으로, 또한, 도면 중의 "CG5-A"로 표시되는 컴포넌트 그룹 CG5에 대해서는, 통신 오디오 컴포넌트 C7이 항상 선택되고, "CG6-A"로 표시되는 컴포넌트 그룹 CG6에 대해서는, 통신 오디오 컴포넌트 C8이 항상 선택된다.
한편, MPD의 컴포지트 레이어에 있어서, "AS"는, MPD의 AdaptationSet 요소의 의미를 갖는다. 즉, 도면 중의 "AS1-V"로 표시되는 어댑테이션 세트 AS1에서는, 상이한 비트 레이트를 갖는 비디오 컴포넌트 R1과 비디오 컴포넌트 R2 중 하나의 통신 비디오 컴포넌트가 예를 들어 통신 경로의 폭주 상태에 따라 선택된다.
또한, 도면 중의 "AS2-V"로 표시되는 어댑테이션 세트 AS2 내에는 통신 비디오 컴포넌트 R3이 하나만 준비되어 있으므로, 비디오 컴포넌트 R3이 항상 선택된다. 동일한 방식으로, 또한, 도면 중의 "AS3-V"로 표시되는 어댑테이션 세트 AS3 내에는 통신 비디오 컴포넌트 R4가 하나만 준비되어 있으므로, 비디오 컴포넌트 R4가 항상 선택된다.
또한, 도면 중의 "AS4-A"로 표시되는 어댑테이션 세트 AS4 내에는, 통신 오디오 컴포넌트 R5가 하나만 준비되어 있으므로, 오디오 컴포넌트 R5가 항상 선택된다. 동일한 방식으로, 또한, 도면 중의 "AS5-A"로 표시되는 어댑테이션 세트 AS5 내에는, 통신 오디오 컴포넌트 R6이 하나만 준비되어 있으므로, 오디오 컴포넌트 R6이 항상 선택된다.
상술한 구성으로 형성되는 SPD와 MPD의 컴포지트 레이어를 비교하면, MPD의 AdaptationSet 요소에는 통신 컴포넌트만이 기술되는 한편, SPD에는, 통신 컴포넌트에 추가하여, 방송 컴포넌트에 대한 컴포넌트 그룹이 기술된다. 다음에, SPD에는, 각 컴포넌트 그룹마다, 어댑테이션 세트 ID가 지정되어 있고, 이 어댑테이션 세트 ID가 MPD의 AdaptationSet 요소의 어댑테이션 세트 ID와 관련되어 있으므로, SPD의 컴포넌트 그룹과 MPD의 AdaptationSet 요소를 관련지을 수 있다.
즉, 도 14의 컴포지트 레이어에 있어서는, 도면 중의 화살표로 도시된 바와 같이, SPD의 컴포넌트 그룹 CG1, CG2 및 CG3과, MPD의 어댑테이션 세트 AS1, AS2 및 AS3이, 어댑테이션 세트 ID에 따라 연관된다. 또한, 도면 중의 화살표로 도시된 바와 같이, SPD의 컴포넌트 그룹 CG5 및 CG6과, MPD의 어댑테이션 세트 AS4 및 AS5가, 어댑테이션 세트 ID에 따라 연관된다.
또한, SPD의 셀렉티브 레이어에 있어서, "CC"는 컴포넌트 카테고리(Component Category)의 의미를 갖고, "V"는 비디오의 의미를 갖고, "A"는 오디오의 의미를 갖는다. 즉, 도면 중의 "CC1-V"로 표시되는 컴포넌트 카테고리 CC1에서는, 컴포넌트 그룹 CG1 내지 CG3 중 어느 하나의 비디오 컴포넌트가 선택되게 된다. 또한, 도면 중의 "CC2-A"로 표시되는 컴포넌트 카테고리 CC2에서는, 컴포넌트 그룹 CG4 내지 CG6 중 어느 하나의 오디오 컴포넌트가 선택되게 된다.
한편, MPD의 셀렉티브 레이어에 있어서, "group"은 그룹의 의미를 갖는다. 즉, 도면 중의 "group1-V"로 표시되는 그룹 g1에서는, 어댑테이션 세트 AS1 내지AS3 중 어느 하나의 통신 비디오 컴포넌트가 선택되게 된다. 또한, "group2-A"로 표시되는 그룹 g2에서는, 어댑테이션 세트 AS4 및 AS5 중 어느 하나의 통신 오디오 컴포넌트가 선택되게 된다.
다음에, SPD에는, 각 컴포넌트 카테고리마다, 그룹 ID가 지정되어 있고, 이 그룹 ID가 MPD의 그룹 ID와 관련되어 있으므로, SPD의 컴포넌트 카테고리와, MPD의 AdaptationSet 요소의 group 속성을 관련지을 수 있다.
즉, 도 14의 셀렉티브 레이어에 있어서는, 도면 중의 화살표로 도시된 바와 같이, SPD의 컴포넌트 카테고리 CC1과, MPD의 그룹 g1이, 그룹 ID에 따라 연관된다. 또한, 도면 중의 화살표로 도시된 바와 같이, SPD의 컴포넌트 카테고리 CC2와, MPD의 그룹 g2가, 그룹 ID에 따라 연관된다.
이상, 도 14의 운용예에서 도시된 바와 같이, 리프리젠테이션 ID에 의해, SPD의 컴포넌트(Component)와 MPD의 Representation 요소가 매핑되고, 어댑테이션 세트 ID에 의해, SPD의 컴포넌트 그룹(Component Group)과 MPD의 AdaptationSet 요소가 매핑되고, 그룹 ID에 의해, SPD의 컴포넌트 카테고리(Component Category)와 MPD의 AdaptationSet 요소의 group 속성이 매핑된다. 이것에 의해, SPD와 MPD가 서로 제휴한 운용을 수행할 수 있으므로, SPD와 MPD의 각 레이어의 파라미터를 공유하여, 각 레이어에 포함되는 컴포넌트(오브젝트)를 횡단적으로 처리할 수 있다.
예를 들어, 도 14의 운용예의 경우, MPD만이라면 통신 컴포넌트밖에 기술할 수 없으므로, 어댑테이션 세트 AS1에 있어서, 상이한 비트 레이트를 갖는 비디오 컴포넌트 R1과 비디오 컴포넌트 R2 중 하나가 선택된다고 밖에 표현할 수 없지만; 제휴된 SPD를 참조함으로써, 비디오 컴포넌트 R1(C2)과 비디오 컴포넌트 R2(C3) 중 하나를 선택할 뿐만 아니라, 선택된 통신 비디오 컴포넌트가, 방송 비디오 컴포넌트 C1과 합성되는 것을 인식할 수 있다.
또한, MPD는 MPEG-DASH의 표준에 준거한 스트리밍 배신을 관리하기 위하여 규정되어 있으므로, 통신 컴포넌트에 대한 설명만 주어지지만; SPD를 이용함으로써 통신 컴포넌트에 추가하여, 방송 컴포넌트에 대해서도 기술하는 것이 가능해진다. 예를 들어, MPD를 메인으로 이용하고 있는 경우에, 부족분의 정보를 보완적으로, SPD를 참조하여 취득할 수 있다. 여기서, SPD에는, 방송 컴포넌트와 통신 컴포넌트의 양쪽을 기술할 수 있기 때문에, SPD만을 이용할 수도 있다. 또한, MPD에는, 통신 컴포넌트를 기술할 수 있으므로, SPD에 방송 컴포넌트만을 기술하도록 하여, 방송 컴포넌트와 통신 컴포넌트가 기술되는 시그널링 정보를 분리할 수도 있다.
(4) 신택스
(SPD의 신택스)
도 15는 SPD의 신택스를 도시하는 도면이다. SPD는, 예를 들어 XML 등의 마크업 언어로 기술된다. 여기서, 도 15에 있어서, 요소와 속성 중, "@"은 속성을 나타낸다. 또한, 인덴트된 요소와 속성은 그 상위 요소에 대하여 지정된다. 또한, 이 요소와 속성 사이의 관계는, 후술하는 다른 신택스에 있어서도 동일하다.
도 15에 도시한 바와 같이, Spd 요소는 serviceId 속성, spIndicator 속성, ComponentLayerDescriptor 요소, ProtocolVersionDescriptor 요소, NRTServiceDescriptor 요소, CapabilityDescriptor 요소, IconDescriptor 요소, ISO639LanguageDescriptor 요소, ReceiverTargetingDescriptor 요소, AssociatedServiceDescriptor 요소, ContentAdvisoryDescriptor 요소 및 Component 요소의 상위 요소가 된다.
serviceId 속성으로서 서비스 ID가 지정된다. spIndicator 속성으로서, 서비스 ID에 의해 식별되는 각 서비스마다, 암호화되어 있는지 여부가 지정된다. spIndicator 속성으로서 "on"이 지정된 경우에는, 상기 서비스가 암호화되어 있는 것을 나타내고, "off"가 지정된 경우에는, 상기 서비스가 암호화되어 있지 않은 것을 나타내고 있다.
ComponentLayerDescriptor 요소로서, 컴포넌트 레이어 구조에 관한 정보가 지정된다. ProtocolVersionDescriptor 요소로서, 데이터 서비스가 어느 종류의 서비스일지를 나타내기 위한 정보가 지정된다.
NRTServiceDescriptor 요소로서, NRT 서비스에 관한 정보가 지정된다. CapabilityDescriptor 요소로서, NRT 서비스의 제공을 받는 수신 디바이스에 요구되는 기능(케이퍼빌리티)에 관한 정보가 지정된다.
IconDescriptor 요소로서, NRT 서비스에서 이용되는 아이콘의 취득처를 나타내는 정보가 지정된다. ISO639LanguageDescriptor 요소로서, NRT 서비스의 언어 코드가 지정된다. ReceiverTargetingDescriptor 요소로서 NRT 서비스의 타겟 정보가 지정된다.
AssociatedServiceDescriptor 요소로서, 관련 종속 서비스에 관한 정보가 지정된다. ContentAdvisoryDescriptor 요소로서, 레이팅 리전에 관한 정보가 지정된다.
SPD에 있어서는, 상술한 이 Descriptor 요소에 의해, 서비스 레벨에서의 다양한 타입의 파라미터가 규정된다. 또한, 이하의 Component 요소에 의해, 컴포넌트 레벨에서의 다양한 타입의 파라미터가 규정된다.
Component 요소는, componentId 속성, representationId 속성, subRepresentationLevel 속성, componentCategory 속성, locationType 속성, componentEncryption 속성, compositePosition 속성, targetedScreen 속성, ContentAdvisoryDescriptor 요소, AVCVideoDescriptor 요소, HEVCVideoDescriptor 요소, MPEG4AACAudioDescriptor 요소, AC3AudioDescriptor 요소 및 CaptionDescriptor 요소의 상위 요소가 된다.
componentId 속성으로서, 컴포넌트 ID가 지정된다. representationId 속성으로서, 대응하는 MPD의 리프리젠테이션 ID가 지정된다. 이 리프리젠테이션 ID에 따라, SPD의 컴포넌트와 MPD의 Representation 요소가 연관된다.
subRepresentationLevel 속성으로서, 서브리프리젠테이션 레벨이 지정된다. 예를 들어, 서브리프리젠테이션 레벨은, FLUTE 세션에 있어서의 각 세그먼트에, 복수의 카테고리(예를 들어 비디오나 오디오)의 컴포넌트가 저장되는 경우에 있어서, 그들의 컴포넌트를 식별하기 위한 정보가 된다.
componentCategory 속성으로서, 컴포넌트 카테고리 정보가 지정된다. 이 카테고리 정보로서, 예를 들어 "video", "audio", "caption" 및 "nrt"가 지정된다. "video"는 비디오 컴포넌트를 나타내고, "audio"는 오디오 컴포넌트를 나타내고, "caption"은 자막 컴포넌트를 나타내고 있다. 또한, "nrt"는, NRT 콘텐츠의 데이터를 나타내고 있다.
locationType 속성으로서, 컴포넌트의 로케이션의 타입 정보가 지정된다. 이 타입 정보로서, 예를 들어 "bb", "bca" 및 "bco"가 지정된다. "bb"는, Broadband의 약어이며, 컴포넌트가 통신을 이용하여 배신되는 것을 나타낸다. "bca"는 Broadcast actual의 약어이며, 컴포넌트가 방송을 이용하여 배신되고, 또한 당해 SPD(SCS)가 전송되고 있는 서비스와 동일한 서비스 내에서 배신되는 것을 나타낸다. "bco"는, Broadcast other의 약어이며, 컴포넌트가 방송을 이용하여 배신되고, 또한 당해 SPD(SCS)가 전송되고 있는 서비스와 상이한 다른 서비스 내에서 배신되는 것을 나타낸다.
componentEncryption 속성으로서, 컴포넌트 ID에 의해 식별되는 각 컴포넌트마다, 암호화되어 있는지 여부가 지정된다. componentEncryption 속성으로서 "on"이 지정된 경우에는, 당해 컴포넌트가 암호화되어 있는 것을 나타내고, "off"가 지정된 경우에는, 당해 컴포넌트가 암호화되어 있지 않은 것을 나타내고 있다.
compositePosition 속성으로서, 컴포지트 레이어에서 수행되는 컴포넌트의 합성에 관한 정보가 지정된다. 여기에는, ComponentLayerDescriptor(도 16)의 ComponentGroup 요소의 compositeType 속성의 속성 값에 대응하는 정보가 지정된다. 예를 들어, ComponentGroup 요소의 compositeType 속성으로서, 스케일러블(scalable) 속성이 지정된 경우에, 대상 컴포넌트가 기본 스트림(Base Stream)이 될 때, compositePosition 속성으로서 "base"가 지정된다. 또한, 대상 컴포넌트가 확장 스트림(Extended Stream)이 될 때에는, compositePosition 속성으로서 "enhancement"가 지정된다.
targetedScreen 속성으로서, 컴포넌트 단위에서의 타겟 디바이스의 표시에 관한 정보가 지정된다. 이 표시에 관한 정보로서, 예를 들어 "primary" 및 "secondary"가 지정된다. "primary"는, 제1 표시 디바이스로서 예를 들어 텔레비전 수상기에 영상을 표시하는 경우에 지정된다. "secondary"는 제2 표시 디바이스로서 예를 들어 태블릿 단말 장치에 영상을 표시하는 경우에 지정된다. ContentAdvisoryDescriptor 요소로서, 컴포넌트 단위에서의 레이팅 정보가 지정된다.
AVCVideoDescriptor 요소에는, 비디오 데이터의 부호화 방식으로서, AVC(Advanced Video Coding)가 이용되고 있는 경우에, 비디오 파라미터가 지정된다. 또한, HEVCVideoDescriptor 요소에는, 비디오 데이터의 부호화 방식으로서, HEVC(High Efficiency Video Coding)가 이용되고 있는 경우에, 비디오 파라미터가 지정된다. 여기서, AVC와 HEVC는 비디오 데이터의 부호화 방식의 일례이며, 다른 부호화 방식이 이용되는 경우에는, 대응하는 VideoDescriptor 요소가 지정되게 된다.
MPEG4AACAudioDescriptor 요소에는, 오디오 데이터의 부호화 방식으로서, MPEG4AAC(Advanced Audio Coding)가 이용되고 있는 경우에, 오디오 파라미터가 지정된다. 또한, AC3AudioDescriptor 요소에는, 오디오 데이터의 부호화 방식으로서, AC3(Audio Code number 3)가 이용되는 경우에, 오디오 파라미터가 지정된다. 여기서, MPEG4AAC와 AC3은 오디오 데이터의 부호화 방식의 일례이며, 다른 부호화 방식이 이용되는 경우에는, 대응하는 AudioDescriptor 요소가 지정되게 된다. CaptionDescriptor 요소로서, 자막 파라미터가 지정된다.
여기서, 도 15의 SPD의 신택스에 있어서, ProtocolVersionDescriptor 요소, NRTServiceDescriptor 요소, CapabilityDescriptor 요소, IconDescriptor 요소, ISO639LanguageDescriptor 요소 및 ReceiverTargetingDescriptor 요소는 NRT 서비스용으로 규정되는 것이다.
또한, 도 15에 도시한 SPD의 요소와 속성의 출현 수(Cardinality)에 관하여, "1"이 지정된 경우에는 그 요소 및 속성은 단 하나만 지정되고, "0..1"이 지정된 경우에는, 그 요소 또는 속성을 지정할지 여부는 임의이다. 또한, "1..n"이 지정된 경우에는, 그 요소 및 속성은 1 이상 지정되고, "0..n"이 지정된 경우에는, 그 요소 또는 속성을 1 이상 지정할지 여부는 임의이다. 이 출현 수의 의미는, 후술하는 다른 신택스에서도 동일하다.
다음에, 도 15의 SPD에 기술되는 Descriptor 요소의 상세 구성에 대한 설명이 주어질 것이다. 여기에서는, SPD에 기술되는 Descriptor 요소 중, ComponentLayerDescriptor 요소를 대표하여 설명이 주어진다.
(ComponentLayerDescriptor)
도 16은 ComponentLayerDescriptor의 신택스를 도시하는 도면이다. ComponentLayerDescriptor는 예를 들어 XML 등의 마크업 언어로 기술된다.
도 16에 도시한 바와 같이, ComponentLayerDescriptor 요소로서, 컴포넌트 레이어 구성에 관한 정보가 지정된다. ComponentLayerDescriptor 요소는, ComponentCategory 요소의 상위 요소가 된다. ComponentCategory 요소로서, 컴포넌트 카테고리에 관한 정보가 지정된다. ComponentCategory 요소는, category 속성, mpdGroupId 속성 및 ComponentGroup 요소의 상위 요소가 된다.
category 속성으로서, 컴포넌트 카테고리 정보(명칭)가 지정된다. 이 카테고리 정보로서, 예를 들어, "video", "audio", "caption" 및 "nrt"가 지정된다. "video"는 비디오 컴포넌트를 나타내고, "audio"는 오디오 컴포넌트를 나타내고, "caption"은 자막 컴포넌트를 나타내고 있다. 또한, "nrt"는 NRT 콘텐츠의 데이터를 나타내고 있다.
mpdGroupId 속성으로서, 대응하는 MPD의 그룹 ID가 지정된다. 이 그룹 ID에 따라, SPD의 컴포넌트 카테고리와, MPD의 AdaptationSet 요소의 group 속성이 연관된다. ComponentGroup 요소로서, 컴포넌트 그룹에 관한 정보가 지정된다.
ComponentGroup 요소는, id 속성, adaptationSetId 속성, defaultFlag 속성, muxId 속성, encryption 속성, language 속성, compositeType 속성, usage 속성, stereoscope 속성, audioChannelConfig 속성, targetScreen 속성, ViewPointDescriptor 요소, ContentAdvisoryDescriptor 요소 및 componentId 요소의 상위 요소가 된다.
id 속성으로서, 컴포넌트 그룹 ID가 지정된다. adaptationSetId 속성으로서, 대응하는 MPD의 어댑테이션 세트 ID가 지정된다. 이 어댑테이션 세트 ID에 따라, SPD의 컴포넌트 그룹과, MPD의 AdaptationSet 요소가 연관된다.
defaultFlag 속성으로서, 채널 선택 시에, 대상 컴포넌트 그룹이 자동(디폴트)으로 선택되는 경우에는, "1"이 지정된다. muxId 속성으로서, 상이한 컴포넌트 카테고리 사이에 있어서의 조합의 ID가 지정된다. 예를 들어, 메인 뷰의 비디오와 오디오의 컴포넌트 그룹에는 동일한 muxId 속성이 지정되게 된다. 여기서, 이 ID는, MPD의 Subset 요소의 조합에 대하여 동일한 ID가 지정된다. encryption 속성으로서, 대상 컴포넌트 그룹이 암호화되어 있는 경우에는, "1"이 지정된다. language 속성으로서, 대상 컴포넌트 그룹의 언어가 지정된다.
compositeType 속성으로서, 컴포지트 레이어에서 수행되는 컴포넌트의 합성의 타입 정보가 지정된다. 이 타입 정보로서, 예를 들어, 스케일러블(scalable), 믹싱(mix), 타일(tile) 등을 지정할 수 있다. 상술한 바와 같이, 여기에서 지정되는 타입 정보에 따라, SPD(도 15)의 Component 요소의 compositePosition 속성의 값이 지정되게 된다.
usage 속성으로서, 이용 목적에 관한 정보가 지정된다. 이 이용 목적에 관한 정보로서, 예를 들어 "vi", "hi" 및 "narration"이 지정된다. "vi"는 시각 장애용을 나타내고, "hi"는 청각 장애용을 나타내고, "narration"은 내레이션을 나타내고 있다. stereoscope 속성으로서, 3D인지 2D인지를 나타내는 정보에서, 3D인 경우에는, "1"이 지정된다. audioChannelConfig 속성으로서, 음성 채널의 구성을 나타내는 정보가 지정된다. 이 음성 채널의 구성을 나타내는 정보로서, "Monoral", "Stereo", "5.1ch" 및 "22.1ch"이 지정된다.
targetScreen 속성으로서, 컴포넌트 그룹 단위에서의, 타겟 디바이스의 표시에 관한 정보가 지정된다. 이 표시에 관한 정보로서, 예를 들어 "primary" 및 "secondary"가 지정된다. "primary"는, 제1 표시 디바이스로서, 예를 들어 텔레비전 수상기에 영상을 표시하는 경우에 지정된다. "secondary"는, 제2 표시 디바이스로서, 예를 들어 태블릿 단말 장치에 영상을 표시하는 경우에 지정된다. ViewPointDescriptor 요소로서, 뷰포인트에 관한 정보가 지정된다. 이 뷰포인트에 관한 정보로서, 각 뷰포인트마다의 ID와 타이틀이 지정된다. ContentAdvisoryDescriptor 요소로서, 컴포넌트 그룹 단위에서의 레이팅 정보가 지정된다. componentId 요소로서, 대상 컴포넌트 그룹에 포함되는 컴포넌트의 컴포넌트 ID가 지정된다.
(SPD의 신택스의 다른 구성)
여기서, 상술한 도 15의 SPD의 신택스에서는, 서비스 레벨과 컴포넌트 레벨의 2 단계로 다양한 타입의 파라미터가 규정되도록 하여, 도 16의 Component Layer Descriptor를 서비스 레벨의 Descriptor로서 배치했지만; Component Layer Descriptor의 기술 내용을, SPD에 직접 기술할 수도 있다. 도 17에는, 당해 SPD의 신택스를 도시하고 있다. 여기서, 도 17의 SPD를 구성하는 요소나 속성이, 도 15의 SPD를 구성하는 요소나 속성과 동일한 내용을 의미를 갖는 경우에는, 그 설명은 반복이므로 생략한다.
도 17에 도시한 바와 같이, Spd 요소는, serviceId 속성, spIndicator 속성, ProtocolVersionDescriptor 요소, NRTServiceDescriptor 요소, CapabilityDescriptor 요소, IconDescriptor 요소, ISO639LanguageDescriptor 요소, ReceiverTargetingDescriptor 요소, AssociatedServiceDescriptor 요소, ContentAdvisoryDescriptor 요소 및 ComponentCategoryGroup 요소의 상위 요소가 된다.
ComponentCategoryGroup 요소로서, 컴포넌트 카테고리와 컴포넌트 그룹에 관한 정보가 지정된다. ComponentCategoryGroup 요소는, componentCategory 속성, mpdGroupId 속성 및 ComponentGroup 요소의 상위 요소가 된다.
componentCategory 속성으로서, 컴포넌트의 카테고리 정보가 지정된다. 이 카테고리 정보로서, 예를 들어 "video", "audio", "caption" 및 "nrt"가 지정된다. "video"는 비디오 컴포넌트를 나타내고, "audio"는 오디오 컴포넌트를 나타내고, "caption"은 자막 컴포넌트를 나타내고 있다. 또한, "nrt"는 NRT 콘텐츠의 데이터를 나타내고 있다.
mpdGroupId 속성으로서, 대응하는 MPD의 그룹 ID가 지정된다. 이 그룹 ID에 따라, SPD의 컴포넌트 카테고리와 MPD의 AdaptationSet 요소의 group 속성이 연관된다. ComponentGroup 요소로서, 컴포넌트 그룹에 관한 정보가 지정된다.
ComponentGroup 요소는, id 속성, adaptationSetId 속성, defaultFlag 속성, muxId 속성, encryption 속성, language 속성, compositeType 속성, usage 속성, stereoscope 속성, audioChannelConfig 속성, targetScreen 속성, ViewPointDescriptor 요소, ContentAdvisoryDescriptor 요소 및 Component 요소의 상위 요소가 된다. adaptationSetId 속성으로서, 대응하는 MPD의 어댑테이션 세트 ID가 지정된다. 이 어댑테이션 세트 ID에 따라, SPD의 컴포넌트 그룹과 MPD의 AdaptationSet 요소가 연관된다.
Component 요소는, componentId 속성, representationId 속성, subRepresentationLevel 속성, componentCategory 속성, locationType 속성, compositePosition 속성, AVCVideoDescriptor 요소, HEVCVideoDescriptor 요소, MPEG4AACAudioDescriptor 요소, AC3AudioDescriptor 요소 및 CaptionDescriptor 요소의 상위 요소가 된다. representationId 속성으로서, 대응하는 MPD의 리프리젠테이션 ID가 지정된다. 이 리프리젠테이션 ID에 따라, SPD의 컴포넌트와 MPD의 Representation 요소가 연관된다.
상술한 바와 같이, 도 17의 SPD에서는, 서비스 레벨과 컴포넌트 레벨의 2 단계에 추가로, 컴포넌트 카테고리 레벨과 컴포넌트 그룹 레벨에서의 파라미터가 규정되도록 하여, 그룹 ID, 어댑테이션 세트 ID 및 리프리젠테이션 ID에 따라, MPD와 매핑하여, SPD와 MPD가 서로 제휴된 운용을 수행할 수 있도록 하고 있다. 여기서, 상술한 SPD의 신택스는 일례이며, 다른 신택스를 채용할 수도 있다.
<4. 시스템 구성>
(방송 통신 시스템의 구성)
도 18은 본 기술을 적용한 방송 통신 시스템의 일 실시형태의 구성을 도시하는 도면이다.
도 18에 도시한 바와 같이, 방송 통신 시스템(1)은, 데이터 제공 서버(10), 송신 장치(20), 배신 서버(30) 및 수신 장치(40)로 구성된다. 또한, 배신 서버(30)와 수신 장치(40)는 인터넷 등의 네트워크(90)를 통해 서로 접속되어 있다.
데이터 제공 서버(10)는, 비디오, 오디오 또는 자막 등의 다양한 타입의 컴포넌트를 송신 장치(20) 및 배신 서버(30)에 공급한다. 여기에서는, 예를 들어, 텔레비전 프로그램을 공급하는 서비스에 있어서, 어댑티브 스트리밍 배신을 실현하기 위하여, 당해 텔레비전 프로그램을 구성하는 컴포넌트로서, 8Mbps의 비디오 컴포넌트를 송신 장치(20)에 공급하고, 1Mbps, 2Mbps, 5Mbps, 10Mbps 및 20Mbps의 비디오 컴포넌트를 배신 서버(30)에 공급한다.
송신 장치(20)는 데이터 제공 서버(10)로부터 제공되는 다양한 타입의 컴포넌트(예를 들어, 8Mbps의 비디오 컴포넌트)를 디지털 방송의 방송파에 의해 송신한다. 또한, 송신 장치(20)는, 컴포넌트에 추가하여, 제어 신호(도 10의 시그널링 정보)를, 디지털 방송의 방송파로 송신한다. 여기서, 이 제어 신호(도 10의 시그널링 정보)는 네트워크(90)에 접속된 전용 서버 등으로부터 배신될 수도 있다.
배신 서버(30)는, 수신 장치(40)로부터의 요구에 따라, 데이터 제공 서버(10)로부터 제공되는 다양한 타입의 컴포넌트(예를 들어, 1Mbps, 2Mbps, 5Mbps, 10Mbps 및 20Mbps의 비디오 컴포넌트)를 네트워크(90)를 통해 수신 장치(40)에 배신한다.
수신 장치(40)는 송신 장치(20)로부터 송신된 방송 신호를 수신하여, 제어 신호(도 10의 시그널링 정보)를 취득한다. 수신 장치(40)는, 제어 신호에 따라, 송신 장치(20)로부터 송신되는 비디오, 오디오 또는 자막 등의 다양한 타입의 컴포넌트(예를 들어, 8Mbps의 비디오 컴포넌트)를 취득한다. 또한, 수신 장치(40)는, 제어 신호에 따라, 배신 서버(30)로부터 배신되는 비디오, 오디오 또는 자막 등의 다양한 타입의 컴포넌트(예를 들어, 1Mbps, 2Mbps, 5Mbps, 10Mbps 및 20Mbps의 비디오 컴포넌트)를 취득한다.
수신 장치(40)는 비디오나 자막의 컴포넌트의 영상을 디스플레이에 표시하고, 그 영상에 동기한 오디오 컴포넌트의 음성을 스피커로부터 출력한다. 여기에서는, 예를 들어, 설정 기간(예를 들어 10초)마다, 8Mbps의 방송 비디오 컴포넌트와, 1Mbps, 2Mbps, 5Mbps, 10Mbps 및 20Mbps의 통신 비디오 컴포넌트 중에서 최적의 비디오 컴포넌트가 적응적으로 선택되어 전환되고, 어댑티브 스트리밍 배신이 실현되게 된다.
여기서, 수신 장치(40)는 디스플레이나 스피커를 포함하여 단일체로서 구성될 수도 있고, 또는 텔레비전 수상기, 비디오 레코더 등에 내장될 수도 있다.
방송 통신 시스템(1)은 상술한 바와 같이 구성된다. 다음에, 도 18의 방송 통신 시스템(1)을 구성하는 각 장치의 상세한 구성에 대한 설명이 주어질 것이다.
(송신 장치의 구성)
도 19는 본 기술을 적용한 송신 장치의 일 실시형태의 구성을 도시하는 도면이다.
도 19에 도시한 바와 같이, 송신 장치(20)는 컴포넌트 취득부(201), 제어 신호 취득부(202), Mux(203) 및 송신부(204)로 구성된다.
컴포넌트 취득부(201)는 데이터 제공 서버(10)로부터 다양한 타입의 컴포넌트를 취득하고, 이 컴포넌트를 Mux(203)에 공급한다. 제어 신호 취득부(202)는, 데이터 제공 서버(10) 등의 외부 서버나, 내부 스토리지로부터 제어 신호(도 10의 시그널링 정보)를 취득하고, 이 제어 신호를 Mux(203)에 공급한다.
Mux(203)는 컴포넌트 취득부(201)로부터의 다양한 타입의 컴포넌트와, 제어 신호 취득부(202)로부터의 제어 신호를 다중화하고, BBP 스트림을 생성하고, 이 BBP 스트림을 송신부(204)에 공급한다. 송신부(204)는 Mux(203)로부터 공급되는 BBP 스트림을 방송 신호로서 안테나(205)를 통해 송신한다.
(배신 서버의 구성)
도 20은 본 기술을 적용한 배신 서버의 일 실시형태의 구성을 도시하는 도면이다.
도 20에 도시한 바와 같이, 배신 서버(30)는 제어부(301), 컴포넌트 취득부(302), 축적부(303) 및 통신부(304)로 구성된다.
제어부(301)는 배신 서버(30)의 각 부의 동작을 제어한다.
컴포넌트 취득부(302)는 데이터 제공 서버(10)로부터 다양한 타입의 컴포넌트를 취득하고, 이 컴포넌트를 제어부(301)에 공급한다. 제어부(301)는 컴포넌트 취득부(302)로부터의 다양한 타입의 컴포넌트를 축적부(303)에 축적한다. 이것에 의해, 축적부(303)에는, 데이터 제공 서버(10)로부터의 다양한 타입의 컴포넌트가 축적되게 된다.
통신부(304)는, 제어부(301)의 제어 하에, 네트워크(90)를 통해 수신 장치(40)와 다양한 타입의 데이터를 교환한다. 제어부(301)는, 수신 장치(40)로부터의 스트림(컴포넌트)의 배신의 요구를 통신부(304)가 수신한 경우, 당해 요구에 대응하는 컴포넌트를 축적부(303)로부터 판독한다. 제어부(301)는 통신부(304)를 제어하여, 축적부(303)로부터 판독한 컴포넌트로 형성된 스트림을 네트워크(90)를 통해 수신 장치(40)에 배신한다.
(수신 장치의 구성)
도 21은 본 기술을 적용한 수신 장치의 일 실시형태의 구성을 도시하는 도면이다.
도 21에 도시한 바와 같이, 수신 장치(40)는 튜너(402), Demux(403), 선택/합성부(404), 선택/합성부(405), 선택/합성부(406), 제어부(407), NVRAM(408), 입력부(409), 통신부(410), Demux(411), 비디오 디코더(412), 비디오 출력부(413), 오디오 디코더(414), 오디오 출력부(415) 및 자막 디코더(416)로 구성된다.
튜너(402)는, 안테나(401)에 의해 수신된 방송 신호로부터, 채널 선택이 지시된 서비스의 방송 신호를 추출하여 복조하고, 그 결과 획득되는 BBP 스트림을 Demux(403)에 공급한다.
Demux(403)는, 튜너(402)로부터 공급되는 BBP 스트림을, 각 컴포넌트와 제어 신호로 분리하여, 각 컴포넌트를 선택/합성부(404 내지 406)에 공급하고, 제어 신호를 제어부(407)에 공급한다. 여기에서는, 컴포넌트로서, 비디오 컴포넌트, 오디오 컴포넌트 및 자막 컴포넌트가 분리되어, 선택/합성부(404), 선택/합성부(405) 및 선택/합성부(406)에 각각 공급된다.
제어부(407)는 수신 장치(40)의 각 부의 동작을 제어한다. NVRAM(408)은 불휘발성 메모리이며, 제어부(407)의 제어 하에, 다양한 타입의 데이터를 기록한다. 또한, 제어부(407)는, Demux(403)로부터 공급되는 제어 신호(도 10의 시그널링 정보)에 기초하여, 선택/합성부(404 내지 406)에 의해 수행되는 선택/합성 처리를 제어한다.
입력부(409)는, 유저의 조작에 따라, 조작 신호를 제어부(407)에 공급한다. 제어부(407)는 입력부(409)로부터의 조작 신호에 기초하여 수신 장치(40)의 각 부의 동작을 제어한다.
통신부(410)는, 제어부(407)의 제어 하에, 네트워크(90)를 통해 배신 서버(30)와 다양한 타입의 데이터를 교환한다. 통신부(410)는 배신 서버(30)로부터 수신한 스트림을 Demux(411)에 공급한다. 이 때, 통신부(410)는, 내부에 제공된 수신 버퍼(421)에 스트림 데이터를 버퍼링하면서, 배신 서버(30)로부터 배신되는 스트림을 수신하게 된다.
Demux(411)는 통신부(410)로부터 공급되는 스트림을 각 컴포넌트로 분리하고, 이 컴포넌트를 선택/합성부(404 내지 406)에 공급한다. 여기에서는, 분리 후의 컴포넌트 중, 비디오 컴포넌트가 선택/합성부(404)에 공급되고, 오디오 컴포넌트가 선택/합성부(405)에 공급되고, 자막 컴포넌트가 선택/합성부(406)에 공급된다.
선택/합성부(404)는, 제어부(407)의 제어 하에, Demux(403)로부터의 비디오 컴포넌트와, Demux(411)로부터의 비디오 컴포넌트에 대하여, 선택/합성 처리(예를 들어, 도 4의 비디오 컴포넌트 레이어에 있어서의 각 레이어의 처리)를 수행하고, 그 처리의 결과 획득되는 비디오 컴포넌트를 비디오 디코더(412)에 공급한다.
비디오 디코더(412)는 선택/합성부(404)로부터 공급되는 비디오 컴포넌트를 복호화하고, 그 결과 획득되는 비디오 데이터를 비디오 출력부(413)에 공급한다. 비디오 출력부(413)는, 비디오 디코더(412)로부터 공급되는 비디오 데이터를 후단의 디스플레이(도면에 도시되지 않음)에 출력한다. 이것에 의해, 디스플레이에는, 예를 들어 텔레비전 프로그램의 영상 등이 표시된다.
선택/합성부(405)는, 제어부(407)의 제어 하에, Demux(403)로부터의 오디오 컴포넌트와, Demux(411)로부터의 오디오 컴포넌트에 대하여, 선택/합성 처리(예를 들어, 도 4의 오디오 컴포넌트 레이어에 있어서의 각 레이어의 처리)를 수행하고, 그 처리의 결과 획득되는 오디오 컴포넌트를 오디오 디코더(414)에 공급한다.
오디오 디코더(414)는 선택/합성부(405)로부터 공급되는 오디오 컴포넌트를 복호화하고, 그 결과 획득되는 오디오 데이터를 오디오 출력부(415)에 공급한다. 오디오 출력부(415)는, 오디오 디코더(414)로부터 공급되는 오디오 데이터를 후단의 스피커(도면에 도시되지 않음)에 공급한다. 이것에 의해, 스피커로부터, 예를 들어 텔레비전 프로그램의 영상에 대응하는 음성이 출력된다.
선택/합성부(406)는, 제어부(407)의 제어 하에, Demux(403)로부터의 자막 컴포넌트와, Demux(411)로부터의 자막 컴포넌트에 대하여, 선택/합성 처리(예를 들어, 도 4의 자막 컴포넌트 레이어에 있어서의 각 레이어의 처리)를 수행하고, 처리 결과 획득되는 자막 컴포넌트를 자막 디코더(416)에 공급한다.
자막 디코더(416)는 선택/합성부(406)로부터 공급되는 자막 컴포넌트를 복호화하고, 그 결과 획득되는 자막 데이터를 비디오 출력부(413)에 공급한다. 비디오 출력부(413)는, 자막 디코더(416)로부터 자막 데이터가 공급된 경우, 그 자막 데이터를, 비디오 디코더(412)로부터의 비디오 데이터에 합성하고, 그 결과를 후단의 디스플레이(도면에 도시되지 않음)에 공급한다. 이것에 의해, 디스플레이에는, 텔레비전 프로그램의 영상에 중첩하여 자막이 표시된다.
여기서, 도 21의 수신 장치(40)에 있어서는, 설명의 편의상, 각 디코더의 전단에 선택/합성부(404 내지 406)가 제공되는 구성을 나타냈지만; 선택/합성 처리의 내용에 따라서는, 선택/합성부(404 내지 406)가, 각 디코더의 후단에 제공되는 구성을 채용할 수도 있다.
<5. 각 장치에서 실행되는 처리의 흐름>
다음에, 도 18의 방송 통신 시스템(1)을 구성하는 각 장치에서 실행되는 처리의 흐름에 대한 설명이, 도 22 내지 도 24의 플로우차트를 참조하여 주어진다.
(송신 처리)
먼저, 도 22의 플로우차트를 참조하여, 도 18의 송신 장치(20)에 의해 실행되는 송신 처리에 대한 설명이 주어진다.
스텝 S201에 있어서, 컴포넌트 취득부(201)는 데이터 제공 서버(10)로부터 다양한 타입의 컴포넌트를 취득하고, 이 컴포넌트를 Mux(203)에 공급한다. 스텝 S202에 있어서, 제어 신호 취득부(202)는, 외부 서버 등으로부터 제어 신호(도 10의 시그널링 정보)를 취득하고, 이 제어 신호를 Mux(203)에 공급한다.
스텝 S203에 있어서, Mux(203)는, 컴포넌트 취득부(201)로부터의 다양한 타입의 컴포넌트와, 제어 신호 취득부(202)로부터의 제어 신호를 다중화하여, BBP 스트림을 생성하고, 이 BBP 스트림을 송신부(204)에 공급한다. 스텝 S204에 있어서, 송신부(204)는 Mux(203)로부터 공급되는 BBP 스트림을 방송 신호로서 안테나(205)를 통해 송신한다. 스텝 S204의 처리가 종료되면, 도 22의 송신 처리는 종료된다.
이상, 송신 처리에 대한 설명이 주어졌다. 이 송신 처리에 있어서는, 데이터 제공 서버(10)로부터 공급되는 다양한 타입의 컴포넌트와 제어 신호가 방송파에 의해 송신되게 된다.
(배신 처리)
다음에, 도 23의 플로우차트를 참조하여, 도 18의 배신 서버(30)에 의해 실행되는 배신 처리에 대한 설명이 주어진다. 그러나, 배신 서버(30)에 있어서, 축적부(303)에는, 데이터 제공 서버(10)로부터 취득된 다양한 타입의 컴포넌트가 축적되어 있다.
스텝 S301에 있어서, 제어부(301)는 통신부(304)를 항상 감시하여, 네트워크(90)를 통해 수신 장치(40)로부터 컴포넌트가 요구되었는지 여부를 판정한다. 스텝 S301에 있어서는, 수신 장치(40)로부터의 컴포넌트의 요구를 기다려, 처리는, 스텝 S302로 진행된다.
스텝 S302에 있어서, 제어부(301)는, 수신 장치(40)로부터의 요구에 따른 컴포넌트를 축적부(303)로부터 판독한다. 스텝 S303에 있어서, 제어부(301)는 통신부(304)를 제어하여, 축적부(303)로부터 판독된 컴포넌트(스트림)를 네트워크(90)를 통하여 수신 장치(40)에 배신한다. 스텝 S303의 처리가 종료되면, 도 23의 배신 처리는 종료한다.
이상, 배신 처리에 대한 설명이 주어졌다. 이 배신 처리에 있어서는, 수신 장치(40)로부터의 요구에 따라, 데이터 제공 서버(10)로부터 제공되는 다양한 타입의 컴포넌트(스트림)가 네트워크(90)를 통하여 배신되게 된다.
(수신 처리)
마지막으로, 도 24의 플로우차트를 참조하여, 도 18의 수신 장치(40)에 의해 실행되는 수신 처리에 대한 설명이 주어진다. 이 수신 처리는, 예를 들어 유저에 의한 리모트 컨트롤러의 조작에 의해, 수신 장치(40)가 기동되어, 채널 선택 지시가 이루어진 경우 등에 실행된다.
스텝 S401에 있어서, 튜너(402)는 안테나(401)를 통해 방송 신호를 수신하고, 방송 신호로부터 채널 선택이 지시된 서비스의 방송 신호를 추출하여 복조한다. 또한, Demux(403)는, 튜너(402)로부터의 BBP 스트림을, 컴포넌트와 제어 신호로 분리한다.
스텝 S402에 있어서, 제어부(407)는, Demux(403)로부터의 제어 신호(도 10의 시그널링 정보)에 기초하여, 복수의 컴포넌트 후보 중에서, 최적의 컴포넌트를 선택한다. 구체적으로는, 제어부(407)에서는, 제어 신호로서 도 10의 시그널링 정보가 취득되므로, 그 선택지 중에서, 먼저, topAttribute 속성에서, 선택해야 할 컴포넌트의 수에 기초하여, 선택 판단에 따른 동작을 제어한다.
예를 들어, 선택 판단이 유저 선택이 되는 경우에는, 제어부(407)는 최상위 계층의 셀렉티브 레이어의 각 셀렉티브 컴포넌트 그룹에, 고정 선택 대상의 속성으로서 지정되는 정보를 GUI 화면 상에 표시하여, 유저가 셀렉티브 컴포넌트 그룹(컴포넌트)을 선택하도록 한다. 또한, 예를 들어, 선택 판단이 수신 디바이스에 의한 자동 선택이 되는 경우에는, 제어부(407)는, 최상위 계층의 셀렉티브 레이어의 각 셀렉티브 컴포넌트 그룹에, 고정 선택 대상의 속성으로서 지정되는 정보에 기초하여, 셀렉티브 컴포넌트 그룹(컴포넌트)을 선택한다.
이 컴포넌트 선택 처리는, 기본적으로 비디오나 오디오 등의 컴포넌트의 각 카테고리마다 실행되지만; 고정 선택 대상의 속성으로서 뷰 태그가 지정되어 있는 경우에는, 새로운 카테고리를 횡단하여 셀렉티브 컴포넌트 그룹(컴포넌트)이 선택되게 된다.
다음에, 제어부(407)는, 선택한 셀렉티브 컴포넌트 그룹(컴포넌트)에, 복수의 CompositeComponentGroup 요소가 존재하는 경우에는, 컴포지트 레이어에 있어서, 지정된 컴포넌트 합성을 수행해야 할 복수의 컴포넌트를, 하위 계층의 어댑티브 레이어의 적응 선택 대상의 컴포넌트로부터 선택한다. 다음에, 제어부(407)는 선택/합성부(404 내지 406)를 제어하고, 적응적으로 선택된 복수의 컴포넌트를 이용하여, 합성 처리를 수행한다.
여기에서는, 예를 들어, 컴포지트 컴포넌트 그룹에, 합성 대상의 속성으로서 스케일러블이 지정되어 있는 경우, 방송으로 전송되는 기본 스트림과, 통신으로 전송되는 확장 스트림이 합성되게 된다. 또한, 예를 들어, 컴포지트 컴포넌트 그룹에 속성으로서 3D가 지정되어 있는 경우에는, 방송으로 전송되는 우안용 영상과, 통신으로 전송되는 좌안용 영상이 합성되게 된다.
여기에서는, 복수의 CompositeComponentGroup 요소가 존재하는 경우에 대한 설명이 주어졌지만; CompositeComponentGroup 요소가 하나뿐인 경우에는, 컴포지트 레이어에 있어서, 하위 계층의 어댑티브 레이어의 적응 선택 대상의 컴포넌트로부터 적응적으로 순차적으로 최적의 컴포넌트를 선택하도록 한다. 또한, 어댑티브 레이어에 있어서, 적응 선택 대상의 컴포넌트가 하나뿐인 경우에는, 그 컴포넌트가 항상 선택되게 된다. 또한 여기에서는, 리프리젠테이션 ID에 의해, SPD의 컴포넌트와 MPD의 Representation 요소가 매핑되고, 어댑테이션 세트 ID에 의해, SPD의 컴포넌트 그룹과 MPD의 AdaptationSet 요소가 매핑되고, 그룹 ID에 의해, SPD의 컴포넌트 카테고리와 MPD의 AdaptationSet 요소의 group 속성이 매핑되어, SPD와 MPD가 서로 제휴하게 된다. 이것에 의해, SPD와 MPD의 각 레이어의 파라미터를 공유하여, 각 레이어에 포함되는 컴포넌트(오브젝트)를 횡단적으로 처리할 수 있다.
스텝 S402의 처리에 의해, 최적의 컴포넌트가 선택되면, 처리는 스텝 S403으로 진행된다. 스텝 S403에 있어서, 비디오 출력부(413)는, 스텝 S402의 처리에 의해 선택된 비디오나 자막의 컴포넌트에 대응하는 영상을 디스플레이에 표시시킨다. 또한, 스텝 S403에 있어서, 오디오 출력부(415)는, 스텝 S402의 처리에 의해 선택된 오디오 컴포넌트에 대응하는 음성을 스피커로부터 출력한다. 스텝 S403의 처리가 종료되면, 도 24의 수신 처리는 종료한다.
이상, 수신 처리에 대한 설명이 주어졌다. 이 수신 처리에 있어서는, 제어 신호(도 10의 시그널링 정보)에 기초하여, 방송 또는 통신으로 수신 가능한 복수의 컴포넌트 후보 중에서, 최적의 컴포넌트가 선택되어, 제시되게 된다. 이것에 의해, 유저는, 예를 들어 원하는 텔레비전 프로그램을 선택한 경우에, 수신 가능한 복수의 컴포넌트 후보 중에서 선택된 최적의 컴포넌트에 대응하는 영상이나 음성을 시청할 수 있다.
여기서, 상술한 설명에서는, 시그널링 데이터의 명칭으로서, Description의 약어인 "D"를 이용했지만; Table의 약어인 "T"가 이용되는 경우가 있다. 예를 들어, SCD(Service Configuration Description)는 SCT(Service Configuration Table)로 기술되는 경우가 있다. 또한, 예를 들어, SPD(Service Parameter Description)는, SPT(Service Parameter Table)로 기술되는 경우가 있다. 그러나, 이들 명칭의 차이는 "Description"과 "Table"의 형식적인 차이이며, 각 시그널링 데이터의 실질적인 내용이 상이한 것은 아니다.
<6. 컴퓨터의 구성>
상술한 일련의 처리는, 하드웨어에 의해 실행될 수 있으며, 소프트웨어에 의해 실행될 수도 있다. 일련의 처리를 소프트웨어에 의해 실행하는 경우에는, 그 소프트웨어를 구성하는 프로그램이 컴퓨터에 설치된다. 도 25는 상술한 일련의 처리를 프로그램을 이용하여 실행하는 컴퓨터의 하드웨어의 구성예를 도시하는 도면이다.
컴퓨터(900)에 있어서, CPU(Central Processing Unit)(901), ROM(Read Only Memory)(902), RAM(Random Access Memory)(903)은 버스(904)에 의해 서로 접속되어 있다. 버스(904)에는, 입출력 인터페이스(905)가 더 접속되어 있다. 입출력 인터페이스(905)에는, 입력부(906), 출력부(907), 기록부(908), 통신부(909) 및 드라이브(910)가 접속되어 있다.
입력부(906)는 키보드, 마우스, 마이크로폰 등으로 형성된다. 출력부(907)는 디스플레이, 스피커 등으로 형성된다. 기록부(908)는 하드 디스크, 불휘발성 메모리 등으로 형성된다. 통신부(909)는 네트워크 인터페이스 등으로 형성된다. 드라이브(910)는, 자기 디스크, 광학 디스크, 광자기 디스크 또는 반도체 메모리 등과 같은 리무버블 미디어(911)를 구동한다.
상술한 바와 같이 구성되는 컴퓨터(900)에서, CPU(901)가, ROM(902)이나 기록부(908)에 기억되는 프로그램을, 입출력 인터페이스(905) 및 버스(904)를 통해 RAM(903)에 로드하고 이 프로그램을 실행함으로써, 상술한 일련의 처리가 수행된다.
컴퓨터(900)(CPU(901))에 의해 실행되는 프로그램은, 예를 들어, 패키지 미디어 등으로서의 리무버블 미디어(911)에 기록하여 이 프로그램을 제공할 수 있다. 또한, 프로그램은, 로컬 에어리어 네트워크, 인터넷 또는 디지털 위성 방송 등의 유선 또는 무선 전송 매체를 통해 제공할 수 있다.
컴퓨터(900)에서는, 프로그램은, 리무버블 미디어(911)를 드라이브(910)에 장착함으로써, 입출력 인터페이스(905)를 통해, 기록부(908)에 인스톨할 수 있다. 또한, 프로그램은, 유선 또는 무선 전송 매체를 통해 통신부(909)에서 수신하고, 이 프로그램을 기록부(908)에 인스톨할 수 있다. 이것에 추가하여, 프로그램은, ROM(902)이나 기록부(908)에 미리 인스톨해 둘 수 있다.
여기서, 본 명세서에 있어서, 컴퓨터가 프로그램에 따라 수행하는 처리는 반드시 플로우차트에서와 같이 기재된 순서로 시계열로 수행될 필요는 없다. 즉, 컴퓨터가 프로그램에 따라 수행하는 처리는 동시에 혹은 개별적으로 실행되는 처리(예를 들어, 동시 처리 혹은 오브젝트에 따른 처리)를 포함한다. 또한, 프로그램은 하나의 컴퓨터(프로세서)에 의해 처리될 수도 있고, 또는 복수의 컴퓨터에 의해 분산 처리될 수도 있다.
여기서, 본 기술의 실시형태는 상술한 실시형태에 한정되는 것은 아니며, 본 기술의 요지를 일탈하지 않는 범위 내에서 다양한 타입의 변경이 가능하다.
또한, 본 기술은 이하와 같은 구성을 가질 수 있다.
(1) 수신 장치로서, IP(Internet Protocol) 전송 방식을 이용한 디지털 방송 신호를 수신하도록 구성된 회로를 포함하는 수신 장치. 상기 디지털 방송 신호에 포함된 제어 정보에 기초하여, 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하고; 상기 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 각 부의 동작을 제어한다. 상기 방송 컴포넌트 및 상기 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관되고, 상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고, 상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 것이고, 상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 상기 합성 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것이다.
(2) (1)에 있어서, 상기 제어 정보는, 상기 방송 컴포넌트에 추가하여 상기 통신 컴포넌트를 관리하기 위한 정보를 포함하는 수신 장치.
(3) (1) 또는 (2)에 있어서, 상기 제어 정보는, MPEG-DASH(Moving Picture Expert Group-Dynamic Adaptive Streaming over HTTP) 표준에 준거한 MPD(Media Presentation Description), 컴포넌트와 상기 MPD의 Representation 요소를 연관시키기 위한 제1 식별자, 컴포넌트의 그룹과 상기 MPD의 AdaptationSet 요소를 연관시키기 위한 제2 식별자, 및 컴포넌트 카테고리와 상기 MPD의 AdaptationSet 요소의 group 속성을 연관시키기 위한 제3 식별자를 포함하는 수신 장치.
(4) (1) 내지 (3) 중 어느 하나에 있어서, 상기 제어 정보는 상기 디지털 방송 신호에 포함되는 상기 방송 컴포넌트를 관리하기 위한 제1 관리 정보, 및 통신 네트워크를 통해 전송되는 상기 통신 컴포넌트를 관리하기 위한 제2 관리 정보를 포함하는 수신 장치.
(5) (1) 내지 (4) 중 어느 하나에 있어서, 상기 제어 정보는, 특정 서비스 또는 상기 서비스의 컴포넌트 중 적어도 하나에 관한 파라미터를 기술하고, 상기 특정 서비스에 관한 파라미터로서, 상기 컴포넌트의 연관된 컴포넌트 계층에 관한 정보를 기술한 기술자가 배치되어 있는 수신 장치.
(6) (1) 내지 (4) 중 어느 하나에 있어서, 상기 제어 정보는, 특정 서비스, 상기 서비스의 컴포넌트, 컴포넌트의 그룹 및 컴포넌트 카테고리에 관한 파라미터를 기술하고, 상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보가 기술되어 있는 수신 장치.
(7) (1) 내지 (4) 중 어느 하나에 있어서, 상기 제어 정보는, 상기 제2 계층 레벨에 있어서의 복수의 컴포넌트의 합성에 관한 정보를 포함하는 수신 장치.
(8) (3)에 있어서, 상기 제어 정보는, 상기 컴포넌트의 그룹에 대한, 상이한 컴포넌트 카테고리 사이에 있어서의 조합을 위한 제4 식별자를 포함하는 수신 장치.
(9) (1) 내지 (8) 중 어느 하나에 있어서, 상기 제어 정보는, 상기 IP 전송 방식의 프로토콜 계층에 따른 IP 층 상위의 계층에서 전송되고, 상기 제어 정보에서 각 서비스의 방송 컴포넌트에 공통의 IP 어드레스가 할당되는 수신 장치.
(10) 수신 장치의 수신 방법으로서, IP 전송 방식을 이용한 디지털 방송 신호를 수신하는 단계를 포함하는 수신 방법. 상기 디지털 방송 신호에 포함된 제어 정보에 기초하여, 상기 수신 장치의 회로에 의해, 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하는 단계; 및 상기 회로에 의해, 상기 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 상기 수신 장치의 각 부의 동작을 제어하는 단계를 포함한다. 상기 방송 컴포넌트 및 상기 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관되고, 상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고, 상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 것이고, 상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 상기 합성 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것이다.
(11) 송신 장치로서, 제어 정보를 취득하고; 서비스의 방송 컴포넌트를 취득하고; 상기 방송 컴포넌트에 추가하여, 상기 제어 정보를, IP 전송 방식을 이용한 디지털 방송 신호로 송신하도록 구성된 회로를 포함하는 송신 장치. 상기 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관되고, 상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고, 상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 것이고, 상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것이다.
(12) (11)에 있어서, 상기 제어 정보는, 상기 방송 컴포넌트에 추가하여 상기 통신 컴포넌트를 관리하기 위한 정보를 포함하는 송신 장치.
(13) (11) 또는 (12)에 있어서, 상기 제어 정보는, MPEG-DASH(Moving Picture Expert Group-Dynamic Adaptive Streaming over HTTP) 표준에 준거한 MPD(Media Presentation Description), 컴포넌트와 상기 MPD의 Representation 요소를 연관시키기 위한 제1 식별자, 컴포넌트의 그룹과 상기 MPD의 AdaptationSet 요소를 연관시키기 위한 제2 식별자, 및 컴포넌트 카테고리와 상기 MPD의 AdaptationSet 요소의 group 속성을 연관시키기 위한 제3 식별자를 포함하는 송신 장치.
(14) (11) 내지 (13) 중 어느 하나에 있어서, 상기 제어 정보는 상기 디지털 방송 신호에 포함되는 상기 방송 컴포넌트를 적어도 관리하기 위한 제1 관리 정보, 및 통신 네트워크를 통해 전송되는 상기 통신 컴포넌트만을 관리하기 위한 제2 관리 정보를 포함하는 송신 장치.
(15) (11) 내지 (14) 중 어느 하나에 있어서, 상기 제어 정보는, 특정 서비스 또는 상기 서비스의 컴포넌트 중 적어도 하나에 관한 파라미터를 기술하고, 상기 특정 서비스에 관한 파라미터로서, 상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보를 기술한 기술자가 배치되어 있는 송신 장치.
(16) (11) 내지 (14) 중 어느 하나에 있어서, 상기 제어 정보는, 특정 서비스, 상기 서비스의 컴포넌트, 컴포넌트의 그룹 및 컴포넌트 카테고리에 관한 파라미터를 기술하고, 상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보가 기술되어 있는 송신 장치.
(17) (11) 내지 (14) 중 어느 하나에 있어서, 상기 제어 정보는, 상기 제2 계층 레벨에 있어서의 복수의 컴포넌트의 합성에 관한 정보를 포함하는 송신 장치.
(18) (13)에 있어서, 상기 제어 정보는, 상기 컴포넌트의 그룹에 대한, 상이한 컴포넌트 카테고리 사이에 있어서의 조합을 위한 제4 식별자를 포함하는 송신 장치.
(19) (11) 내지 (18) 중 어느 하나에 있어서, 상기 제어 정보는, 상기 IP 전송 방식의 프로토콜 계층에 따른 IP 층 상위의 계층에서 전송되고, 상기 제어 정보에서 각 서비스의 방송 컴포넌트에 공통의 IP 어드레스가 할당되는 송신 장치.
(20) 송신 방법으로서, 제어 정보를 취득하는 단계; 상기 송신 장치의 회로에 의해, 서비스의 방송 컴포넌트를 취득하는 단계; 및 상기 회로에 의해, 상기 방송 컴포넌트에 추가하여, 상기 제어 정보를, IP 전송 방식을 이용한 디지털 방송 신호로 송신하는 단계를 포함하는 송신 방법. 상기 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관되고, 상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고, 상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 것이고, 상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것이다.
첨부 청구항들 또는 그 등가물들의 범위 내에 있는 한 설계 요건 및 다른 인자에 따라 다양한 변형, 조합, 서브조합 및 변경이 일어날 수 있다는 점이 본 기술분야의 통상의 기술자에 의해 이해되어야 한다.
1: 방송 통신 시스템
10: 데이터 제공 서버
20: 송신 장치
30: 배신 서버
40: 수신 장치
90: 네트워크
201: 컴포넌트 취득부
202: 제어 신호 취득부
203: Mux
204: 송신부
301: 제어부
302: 컴포넌트 취득부
303: 축적부
304: 통신부
402: 튜너
403: Demux
404, 405, 406: 선택/합성부
407: 제어부
408: NVRAM
409: 입력부
410: 통신부
411: Demux
412: 비디오 디코더
413: 비디오 출력부
414: 오디오 디코더
415: 오디오 출력부
416: 자막 디코더
421: 수신 버퍼
900: 컴퓨터
901: CPU

Claims (20)

  1. 수신 장치로서,
    IP(Internet Protocol) 전송 방식을 이용한 디지털 방송 신호를 수신하고;
    상기 디지털 방송 신호에 포함된 제어 정보에 기초하여, 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하고;
    상기 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 각 부의 동작을 제어하도록
    구성된 회로를 포함하고,
    상기 방송 컴포넌트 및 상기 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관되고,
    상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고,
    상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 것이고,
    상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 상기 합성 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것인 수신 장치.
  2. 제1항에 있어서,
    상기 제어 정보는, 상기 방송 컴포넌트에 추가하여 상기 통신 컴포넌트를 관리하기 위한 정보를 포함하는 수신 장치.
  3. 제2항에 있어서,
    상기 제어 정보는, MPEG-DASH(Moving Picture Expert Group-Dynamic Adaptive Streaming over HTTP) 표준에 준거한 MPD(Media Presentation Description), 컴포넌트와 상기 MPD의 Representation 요소를 연관시키기 위한 제1 식별자, 컴포넌트의 그룹과 상기 MPD의 AdaptationSet 요소를 연관시키기 위한 제2 식별자, 및 컴포넌트 카테고리와 상기 MPD의 AdaptationSet 요소의 group 속성을 연관시키기 위한 제3 식별자를 포함하는 수신 장치.
  4. 제1항에 있어서,
    상기 제어 정보는 상기 디지털 방송 신호에 포함되는 상기 방송 컴포넌트를 관리하기 위한 제1 관리 정보, 및 통신 네트워크를 통해 전송되는 상기 통신 컴포넌트를 관리하기 위한 제2 관리 정보를 포함하는 수신 장치.
  5. 제1항에 있어서,
    상기 제어 정보는, 특정 서비스 또는 상기 서비스의 컴포넌트 중 적어도 하나에 관한 파라미터를 기술하고,
    상기 특정 서비스에 관한 파라미터로서, 상기 컴포넌트의 연관된 컴포넌트 계층에 관한 정보를 기술한 기술자가 배치되어 있는 수신 장치.
  6. 제1항에 있어서,
    상기 제어 정보는, 특정 서비스, 상기 서비스의 컴포넌트, 컴포넌트의 그룹 및 컴포넌트 카테고리에 관한 파라미터를 기술하고,
    상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보가 기술되어 있는 수신 장치.
  7. 제1항에 있어서,
    상기 제어 정보는, 상기 제2 계층 레벨에 있어서의 복수의 컴포넌트의 합성에 관한 정보를 포함하는 수신 장치.
  8. 제3항에 있어서,
    상기 제어 정보는, 상기 컴포넌트의 그룹에 대한, 상이한 컴포넌트 카테고리 사이에 있어서의 조합을 위한 제4 식별자를 포함하는 수신 장치.
  9. 제1항에 있어서,
    상기 제어 정보는, 상기 IP 전송 방식의 프로토콜 계층에 따른 IP 층 상위의 계층에서 전송되고,
    상기 제어 정보에서 각 서비스의 방송 컴포넌트에 공통의 IP 어드레스가 할당되는 수신 장치.
  10. 수신 장치의 수신 방법으로서,
    IP 전송 방식을 이용한 디지털 방송 신호를 수신하는 단계;
    상기 디지털 방송 신호에 포함된 제어 정보에 기초하여, 상기 수신 장치의 회로에 의해, 방송 컴포넌트 또는 통신 컴포넌트 중 적어도 하나의 컴포넌트를 취득하는 단계; 및
    상기 회로에 의해, 상기 취득된 적어도 하나의 컴포넌트에 관한 소정의 처리를 수행하는 상기 수신 장치의 각 부의 동작을 제어하는 단계
    를 포함하고,
    상기 방송 컴포넌트 및 상기 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층과 연관되고,
    상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고,
    상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층의 대상이 아닌 컴포넌트를, 하나의 합성 컴포넌트로 합성하기 위한 것이고,
    상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 상기 합성 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것인 수신 방법.
  11. 송신 장치로서,
    제어 정보를 취득하고;
    서비스의 방송 컴포넌트를 취득하고;
    상기 방송 컴포넌트에 추가하여, 상기 제어 정보를, IP 전송 방식을 이용한 디지털 방송 신호로 송신하도록
    구성된 회로를 포함하고,
    상기 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관되고,
    상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고,
    상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 것이고,
    상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것인 송신 장치.
  12. 제11항에 있어서,
    상기 제어 정보는, 상기 방송 컴포넌트에 추가하여 상기 통신 컴포넌트를 관리하기 위한 정보를 포함하는 송신 장치.
  13. 제12항에 있어서,
    상기 제어 정보는, MPEG-DASH(Moving Picture Expert Group-Dynamic Adaptive Streaming over HTTP) 표준에 준거한 MPD(Media Presentation Description), 컴포넌트와 상기 MPD의 Representation 요소를 연관시키기 위한 제1 식별자, 컴포넌트의 그룹과 상기 MPD의 AdaptationSet 요소를 연관시키기 위한 제2 식별자, 및 컴포넌트 카테고리와 상기 MPD의 AdaptationSet 요소의 group 속성을 연관시키기 위한 제3 식별자를 포함하는 송신 장치.
  14. 제11항에 있어서,
    상기 제어 정보는 상기 디지털 방송 신호에 포함되는 상기 방송 컴포넌트를 적어도 관리하기 위한 제1 관리 정보, 및 통신 네트워크를 통해 전송되는 상기 통신 컴포넌트만을 관리하기 위한 제2 관리 정보를 포함하는 송신 장치.
  15. 제11항에 있어서,
    상기 제어 정보는, 특정 서비스 또는 상기 서비스의 컴포넌트 중 적어도 하나에 관한 파라미터를 기술하고,
    상기 특정 서비스에 관한 파라미터로서, 상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보를 기술한 기술자가 배치되어 있는 송신 장치.
  16. 제11항에 있어서,
    상기 제어 정보는, 특정 서비스, 상기 서비스의 컴포넌트, 컴포넌트의 그룹 및 컴포넌트 카테고리에 관한 파라미터를 기술 가능하고,
    상기 컴포넌트와 연관된 컴포넌트 계층에 관한 정보가 기술되어 있는 송신 장치.
  17. 제11항에 있어서,
    상기 제어 정보는, 상기 제2 계층 레벨에 있어서의 복수의 컴포넌트의 합성에 관한 정보를 포함하는 송신 장치.
  18. 제13항에 있어서,
    상기 제어 정보는, 상기 컴포넌트의 그룹에 대한, 상이한 컴포넌트 카테고리 사이에 있어서의 조합을 위한 제4 식별자를 포함하는 송신 장치.
  19. 제11항에 있어서,
    상기 제어 정보는, 상기 IP 전송 방식의 프로토콜 계층에 따른 IP 층 상위의 계층에서 전송되고,
    상기 제어 정보에서 각 서비스의 방송 컴포넌트에 공통의 IP 어드레스가 할당되는 송신 장치.
  20. 송신 장치를 위한 송신 방법으로서,
    제어 정보를 취득하는 단계;
    상기 송신 장치의 회로에 의해, 서비스의 방송 컴포넌트를 취득하는 단계; 및
    상기 회로에 의해, 상기 방송 컴포넌트에 추가하여, 상기 제어 정보를, IP 전송 방식을 이용한 디지털 방송 신호로 송신하는 단계
    를 포함하고,
    상기 방송 컴포넌트 및 통신 컴포넌트는, 각 컴포넌트 카테고리마다, 제1 계층 레벨, 제2 계층 레벨 및 제3 계층 레벨을 포함하는 컴포넌트 계층 구조와 연관되고,
    상기 제3 계층 레벨은 상기 방송 컴포넌트 또는 상기 통신 컴포넌트를 적응적으로 선택하기 위한 것이고,
    상기 제2 계층 레벨은, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트 및 상기 제3 계층 레벨의 대상이 아닌 컴포넌트를, 하나의 컴포넌트로 합성하기 위한 것이고,
    상기 제1 계층 레벨은, 상기 제2 계층 레벨에서 합성되는 컴포넌트, 상기 제3 계층 레벨에서 적응적으로 선택되는 컴포넌트, 및 상기 제2 계층 레벨과 상기 제3 계층 레벨의 대상이 아닌 컴포넌트 중에서, 하나의 컴포넌트를 선택하기 위한 것인 송신 방법.
KR1020167026138A 2014-04-04 2015-04-03 수신 장치, 수신 방법, 송신 장치 및 송신 방법 KR102346555B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JPJP-P-2014-078032 2014-04-04
JP2014078032A JP6358460B2 (ja) 2014-04-04 2014-04-04 受信装置、受信方法、送信装置、及び、送信方法
PCT/JP2015/001907 WO2015151533A1 (en) 2014-04-04 2015-04-03 Receiving apparatus, receiving method, transmitting apparatus, and transmitting method

Publications (2)

Publication Number Publication Date
KR20160140639A true KR20160140639A (ko) 2016-12-07
KR102346555B1 KR102346555B1 (ko) 2022-01-04

Family

ID=53015847

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167026138A KR102346555B1 (ko) 2014-04-04 2015-04-03 수신 장치, 수신 방법, 송신 장치 및 송신 방법

Country Status (8)

Country Link
US (3) US10291341B2 (ko)
EP (1) EP3127260A1 (ko)
JP (1) JP6358460B2 (ko)
KR (1) KR102346555B1 (ko)
CN (1) CN106134113B (ko)
CA (1) CA2941369C (ko)
MX (1) MX365936B (ko)
WO (1) WO2015151533A1 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015073245A (ja) * 2013-10-04 2015-04-16 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法
JP6151152B2 (ja) * 2013-10-11 2017-06-21 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法
JP6358460B2 (ja) * 2014-04-04 2018-07-18 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法
EP3131304A4 (en) * 2014-04-11 2018-01-24 Sony Corporation Reception apparatus, reception method, transmission apparatus, and transmission method
CN106233692B (zh) 2014-11-12 2019-09-13 Lg电子株式会社 广播信号发送装置、广播信号接收装置、广播信号发送方法和广播信号接收方法
KR102493881B1 (ko) * 2015-03-06 2023-01-31 엘지전자 주식회사 무선 통신 시스템의 데이터 전송 방법 및 장치
JP2017098736A (ja) * 2015-11-24 2017-06-01 日立マクセル株式会社 放送受信装置
US10582276B2 (en) * 2016-04-13 2020-03-03 Sharp Kabushiki Kaisha Signaling ratings information
CN106911698B (zh) * 2017-03-03 2020-06-09 天津天地伟业信息系统集成有限公司 一种多路高清解码器集群的控制方法
CN113206826B (zh) * 2018-09-28 2022-10-04 华为技术有限公司 传输媒体数据的方法、客户端和服务器
US11822555B2 (en) * 2020-02-03 2023-11-21 Tencent America LLC Signaling and resolution model for multi-level session-based description descriptors
CN113206819B (zh) * 2020-02-03 2023-04-07 腾讯美国有限责任公司 基于多级别会话描述符的信令发送方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011066556A (ja) 2009-09-15 2011-03-31 Sony Corp 情報処理装置、データ管理方法、およびプログラム
KR20130058648A (ko) * 2011-11-25 2013-06-04 (주)휴맥스 Mmt 미디어와 dash 미디어와의 연동 방법
US20130182643A1 (en) * 2012-01-16 2013-07-18 Qualcomm Incorporated Method and system for transitions of broadcast dash service receptions between unicast and broadcast

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040122730A1 (en) * 2001-01-02 2004-06-24 Tucciarone Joel D. Electronic messaging system and method thereof
JP2004179928A (ja) * 2002-11-27 2004-06-24 Hitachi Ltd デジタル放送受信装置、受信方法および受信回路
US20060129441A1 (en) * 2004-07-10 2006-06-15 Movaris Inc. Apparatus, method, and system for documenting, performing, and attesting to internal controls for an enterprise
US7761591B2 (en) * 2005-12-16 2010-07-20 Jean A. Graham Central work-product management system for coordinated collaboration with remote users
US7872650B2 (en) * 2006-04-27 2011-01-18 Microsoft Corporation Remotely viewing large tiled image datasets
JP4525634B2 (ja) * 2006-05-18 2010-08-18 パナソニック株式会社 デジタル放送受信装置
US20090300570A1 (en) * 2006-07-17 2009-12-03 Syncira Corporation Interactive hierarchical analog layout synthesis for integrated circuits
US20150363478A1 (en) * 2008-07-11 2015-12-17 Michael N. Haynes Systems, Devices, and/or Methods for Managing Data
CN103262549B (zh) * 2010-12-08 2017-02-22 Lg电子株式会社 用于接收数字广播信号的设备和方法
KR20120084252A (ko) * 2011-01-19 2012-07-27 삼성전자주식회사 복수의 실시간 전송 스트림을 수신하는 수신 장치와 그 송신 장치 및 멀티미디어 컨텐츠 재생 방법
JP2013157820A (ja) * 2012-01-30 2013-08-15 Sharp Corp 生成装置、再生装置、生成方法、再生方法、データ構造、制御プログラム、および記録媒体
JP6153298B2 (ja) * 2012-04-24 2017-06-28 シャープ株式会社 配信装置、再生装置、データ構造、配信方法、制御プログラム、および記録媒体
CA2881141C (en) * 2012-08-10 2017-09-19 Lg Electronics Inc. Method and apparatus for transceiving image component for 3d image
JP6358460B2 (ja) * 2014-04-04 2018-07-18 ソニー株式会社 受信装置、受信方法、送信装置、及び、送信方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011066556A (ja) 2009-09-15 2011-03-31 Sony Corp 情報処理装置、データ管理方法、およびプログラム
KR20130058648A (ko) * 2011-11-25 2013-06-04 (주)휴맥스 Mmt 미디어와 dash 미디어와의 연동 방법
US20130182643A1 (en) * 2012-01-16 2013-07-18 Qualcomm Incorporated Method and system for transitions of broadcast dash service receptions between unicast and broadcast

Also Published As

Publication number Publication date
JP2015201699A (ja) 2015-11-12
CN106134113A (zh) 2016-11-16
KR102346555B1 (ko) 2022-01-04
US11329741B2 (en) 2022-05-10
CA2941369C (en) 2023-08-22
CA2941369A1 (en) 2015-10-08
US20210067259A1 (en) 2021-03-04
WO2015151533A1 (en) 2015-10-08
MX365936B (es) 2019-06-20
CN106134113B (zh) 2019-04-30
EP3127260A1 (en) 2017-02-08
MX2016012503A (es) 2017-01-05
US20180175955A1 (en) 2018-06-21
US10771175B2 (en) 2020-09-08
US20190222333A1 (en) 2019-07-18
US10291341B2 (en) 2019-05-14
JP6358460B2 (ja) 2018-07-18

Similar Documents

Publication Publication Date Title
US11329741B2 (en) Receiving apparatus, receiving method, transmitting apparatus, and transmitting method
US9154812B2 (en) Transmitting system, receiving device, and a video transmission method
JP6743704B2 (ja) 送信装置、送信方法、受信装置および受信方法
RU2671946C2 (ru) Устройство и способ обработки информации
US11039212B2 (en) Reception device
US12028562B2 (en) Transmission device, transmission method, reception device, and reception method
US20120269207A1 (en) Receiver for receiving and displaying a plurality of streams through separate routes, method for processing the plurality of streams and transmitting method thereof
KR101697385B1 (ko) 채널 적응형 계층적 방송 장치 및 방법
KR20130115975A (ko) 하이브리드 서비스를 제공하기 위한 송신 시스템과 수신 장치 및 그 서비스 제공 방법들

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant