KR20140038482A - 송신장치, 수신재생장치, 송신방법 및 수신재생방법 - Google Patents

Abstract

동시에 재생할 다종 다양한 정보를 송신하는 송신장치를 제공한다. 송신장치는 1대의 수신재생장치에서 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응되어 있고, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하며, 상기 스트림 특정정보를 송신한다. 이에 의해 수신 측에서는 당해 스트림 특정정보를 이용함으로써 상기 하나의 전송용 스트림과 동시에 재생할 적어도 하나의 다른 전송용 스트림을 특정할 수 있다.

Description

송신장치, 수신재생장치, 송신방법 및 수신재생방법{TRANSMISSION DEVICE, RECEIVING/PLAYING DEVICE, TRANSMISSION METHOD, AND RECEIVING/PLAYING METHOD}

본 발명은 1개의 프로그램의 영상과 함께 표시되는 정보를 송신 및 수신하는 기술에 관한 것이다.

종래의 방송 서비스에서는 단일의 트랜스포트 스트림에 의해 데이터방송, 자막 서비스 및 3D 영상 등의 하나 또는 복수의 정보(영상이나 데이터)를 송신하고 있다. 예를 들어 특허 문헌 1에 있어서, 2D의 비디오 스트림과 타 시점의 비디오, 시차 정보 및 깊이 정보 등과 같은 3D 비디오 부가데이터를 하나의 트랜스포트 스트림에 의해 송신하는 기술이 개시되어 있다.

또, 프로그램에 있어서 일본어에 의한 음성 및 자막만이 아니라, 영어 등의 다른 언어에 의한 음성이나 자막, 3D 영상과 같이 하나의 시점에서의 영상만이 아니라 다른 시점으로부터의 영상이라는 다종 다양한 정보의 송신·재생이 시청자로부터 요구되어 있다.

특허 문헌 1 : 특표 2008-500790호 공보

그러나 방송에서는 하나의 트랜스포트 스트림을 송신하기 위한 전파대역에는 제약이 있으며, 상기와 같은 다종 다양한 정보의 송신을 실현하려고 해도 각종 정보의 데이터량에 따라서는 모든 정보를 하나의 트랜스포트 스트림에 포함시킬 수가 없다고 하는 문제가 있다.

그래서, 본 발명은 동시에 재생할 다종 다양한 정보를 송신하고 수신·재생할 수 있는 송신장치, 수신재생장치, 송신방법 및 수신재생방법을 제공하는 것을 목적으로 한다.

상기 목적을 달성하기 위해, 송신장치는 1대의 수신재생장치에서 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응되며, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하는 보유수단과, 상기 스트림 특정정보를 송신하는 송신수단을 구비하는 것을 특징으로 한다.

상기 구성에 의하면 송신장치는 스트림 특정정보를 송신하므로, 수신 측에서는 당해 스트림 특정정보를 이용함으로써 각종 정보가 개별적으로 전송용 스트림에 의해 송신되어도 동시에 재생할 전송용 스트림을 특정할 수 있다.

도 1은 프로그램 전송시스템(10)의 구성을 나타내는 도면이다.
도 2는 송신장치(100)의 구성을 나타내는 블록도이다.
도 3은 PMT의 데이터 구조의 일례를 나타내는 도면이다.
도 4는 external-ES-link-descriptor()의 데이터 구조의 일례를 나타내는 도면이다.
도 5는 view-selection-information()의 데이터 구조의 일례를 나타내는 도면이다.
도 6은 object-information()의 데이터 구조의 일례를 나타내는 도면이다.
도 7은 송신장치(200)의 구성을 나타내는 블록도이다.
도 8은 service-subset-ES-descriptor()의 데이터 구조의 일례를 나타내는 도면이다. 도 9에 계속.
도 9는 service-subset-ES-descriptor()의 데이터 구조의 일례를 나타내는 도면이다. 도 8로부터 계속되며, 도 10에 계속.
도 10은 service-subset-ES-descriptor()의 데이터 구조의 일례를 나타내는 도면이다. 도 9로부터 계속되며, 도 11에 계속.
도 11은 service-subset-ES-descriptor()의 데이터 구조의 일례를 나타내는 도면이다. 도 10으로부터 계속.
도 12는 디지털 텔레비전(수신재생장치)(300)의 구성을 나타내는 블록도이다.
도 13은 송신장치(100)의 동작을 나타내는 흐름도이다.
도 14는 수신재생장치(300)의 동작을 나타내는 흐름도이다.
도 15는 송신장치(1100)의 구성을 나타내는 블록도이다.
도 16은 external-ES-link-info의 데이터 구조의 일례를 나타내는 도면이다.
도 17은 external-ES-link-info의 기술 예를 나타내는 도면이다.
도 18은 송신장치(1200)의 구성을 나타내는 블록도이다.
도 19는 subset-service-ES-info의 데이터 구조의 일례를 나타내는 도면이다.
도 20은 subset-service-ES-info의 기술 예를 나타내는 도면이다.
도 21은 수신재생장치(1300)의 구성을 나타내는 블록도이다.
도 22는 제 2 실시형태에서의 프로그램 전송시스템의 동작 개요를 나타내는 흐름도이다.
도 23] 수신재생장치(1300)의 동작을 나타내는 흐름도이다.
도 24] hyperlink-descriptor()의 데이터 구조의 일례를 나타내는 도면이다.
도 25] link-external-component-info()의 데이터 구조의 일례를 나타내는 도면이다.
도 26 (a)는 주 스트림을 나타내는 object 요소에 대한 부 스트림을 지정하기 위한 확장속성을 나타내는 도면이며, (b)는 확장속성을 이용해 부 스트림을 지정하는 데이터방송 콘텐츠의 기술 예를 나타내는 도면이다.
도 27은 ExternalES 요소를 정의하는 구조의 일례를 나타내는 도면이다. 도 28에 계속.
도 28은 ExternalES 요소를 정의하는 구조의 일례를 나타내는 도면이다. 도 27로부터 계속.
도 29는 ExternalES 요소를 이용해 부 스트림을 지정하는 ERI의 기술 예를 나타내는 도면이다.

1. 개요

상술한 것과 같이, 향후의 방송 서비스에 있어서 다종 다양한 정보의 방송이 기대되어 있으나, 트랜스포트 스트림을 송신하기 위한 전파대역에는 제약이 있고, 각종 정보의 데이터량에 따라서는 하나의 트랜스포트 스트림에 의해 송신할 수 없는 경우가 있다.

그래서, 복수의 트랜스포트 스트림에 의해 프로그램 및 각종 정보를 송신하는 것을 생각된다.

그러나 현재로는 무수한 방송파나 복수의 트랜스포트 스트림에서 하나의 프로그램에 대한 서비스(타 언어의 자막 등)를 포함하는 스트림을 특정하여, 시청자가 소망의 정보를 선택할 수 있는 구조가 없다.

그래서, 발명자 등은 예의 검토한바, 복수의 트랜스포트 스트림을 이용하여 동시에 재생할 다종 다양한 정보를 송신하여, 수신·재생할 수 있는 본 발명에 이르게 되었다.

본 발명의 한 태양에 의하면, 송신장치는 1대의 수신재생장치로 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응시키며, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하는 보유수단과, 상기 스트림 특정정보를 송신하는 송신수단을 구비하는 것을 특징으로 한다.

2. 제 1 실시형태

이하, 도면을 참조하면서 본 실시형태에 대해 상세하게 설명한다.

2. 1　개요

본 실시형태에 관한 프로그램 전송시스템(10)은 도 1에 나타내는 것과 같이 송신장치(100, 200)와 디지털 텔레비전(수신재생장치)(300)으로 구성된다.

디지털 텔레비전 방송에서는 송신장치(100, 200)로부터의 방송신호는 MPEG 시스템 규격에 의해 규정되는 트랜스포트 스트림(TS) 형식으로 영상·음성 스트림 및 프로그램 배열정보가 다중화되어 송출된다. 여기서, 프로그램 배열정보란 TS의 전송 네트워크정보, 방송국, 채널(서비스)의 상세정보 및 프로그램 상세정보 등이 기재된 SI(Service　Information)/PSI(Program　Specific　Information)이다.

송신장치(100, 200)는 비디오 스트림, 오디오 스트림 등이 다중화된 트랜스포트 스트림(TS)을 송신한다.

본 실시형태에서는 송신장치(100, 200)로부터 송출되는 각 TS는 종래의 2D 디지털방송에서 운용되고 있는 것과 같이 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream)에 준거한 트랜스포트 스트림이다. MPEG2-TS에 준거한 트랜스포트 스트림은 1개 이상의 비디오·오디오 스트림과 각 비디오·오디오 스트림 스트림이 어느 프로그램(프로그램)에 속하는가를 기재한 PSI를 포함하고 있다. PSI에는 TS 내에 포함되는 프로그램 일람을 나타내는 PAT(Program　Association　Table), 어느 프로그램 내에 속하는 영상·음성 등의 스트림의 PID(패킷 ID)를 저장한 PMT(Program　Map　Table) 등이 있다.

또한, MPEG2-TS에 준거한 트랜스포트 스트림에는 네트워크정보나 편성채널정보·프로그램정보에 관해서 기술되어 있는 SI가 포함된다.

SI에는 NIT(Network　Information　Table ： 네트워크정보 테이블), SDT(Service　Description　Table ： 서비스 기술 테이블) 및 EIT(Event　Information　Table：이벤트정보 테이블) 등의 테이블이 포함되어 있다.

NIT에는 송출된 TS가 경유하는 네트워크에 관한 정보(채널번호, 변조방식 등)가 기술되어 있다.

SDT에는 송출되는 TS 내에 존재하는 편성 채널에 관한 정보(채널 명칭, 프로그램정보의 종류, 디지털 카피제어정보 등)가 기재되어 있다.

EIT에는 각 편성채널에 포함되는 프로그램에 관한 상세정보(프로그램 명칭, 방송 일시, 방송 내용 등)가 기재되어 있다.

디지털 텔레비전(수신재생장치)(300)은 SI에 기재된 정보를 이용함으로써 전자프로그램 표(Electronic　Program　Guide：EPG)를 작성할 수 있다.

송신장치(100, 200)로부터 송신되는 각 TS에는 하나의 프로그램에 대해 동시에 재생되어야 할 정보가 포함되어 있다. 예를 들어 송신장치(100)로부터 송신되는 TS에는 3D프로그램에서의 좌측 눈 용의 영상 및 음성이 포함되며, 송신장치(200)로부터 송신되는 TS에는 3D프로그램에서의 우측 눈 용의 영상이 포함되어 있다. 그리고 송신장치(100)로부터 송신되는 TS는 단독으로 재생이 되며, 송신장치(200)로부터 송신되는 TS는 단독으로는 원칙 재생을 할 수 없는 것으로 되어 있다.

이하, 송신장치(100)로부터 송신되는 TS에 포함되는 좌측 눈 용 영상의 스트림을 주 스트림이라고 기술하고, 송신장치(200)로부터 송신되는 TS에 포함되는 우측 눈 용 영상의 스트림을 부 스트림이라고 기술한다.

수신재생장치(300)는 송신장치(200)가 송출하는 부 스트림을 포함하는 TS를 수신하기 전에 송신장치(100)가 송출하는 방송파로부터 주 스트림을 포함하는 TS를 수신한 경우에는 수신한 TS에 다중화되어 있는 비디오·오디오 스트림과 프로그램 배열정보를 포함하는 SI 등을 분리한다. 수신재생장치(300)는 분리된 SI 등의 SI/PSI의 각 정보로부터 부 스트림이 존재하는가 여부를 판별하고, 존재하는 경우에는 당해 부 스트림을 포함하는 TS의 수신을 실행하여 주 스트림과 부 스트림을 동시에 재생한다. 구체적은 주 스트림으로부터 좌측 눈 영상을, 부 스트림으로부터 우측 눈 영상을 각각 생성하여 3D 표시에 관한 재생을 실행한다.

수신재생장치(300)는 송신장치(100)가 송출하는 주 스트림을 포함하는 TS를 수신하기 전에 송신장치(200)가 송출하는 방송파로부터 부 스트림을 포함하는 TS를 수신한 경우에는 부 스트림에서의 단독 재생의 가부를 판단하고, 판단 결과에 따라서 부 스트림만의 재생 및 상기와 마찬가지로 주 스트림과 부 스트림의 동시 재생을 실행한다.

2. 2　송신장치(100)의 구성

송신장치(100)는 하나의 프로그램에 대한 주 스트림을 포함하는 TS를 생성하여 전달하는 것이다.

송신장치(100)는 도 2에 나타내는 것과 같이 좌측 눈 용 비디오 인코더(101), 오디오 인코더(102), 좌측 눈 용 비디오 스트림 저장부(103), 오디오 스트림 저장부(104), 정보 보유부(105), 다중화부(106) 및 송신부(107)로 구성되어 있다.

(1) 좌측 눈 용 비디오 인코더(101)

좌측 눈 용 비디오 인코더(101)는 하나의 프로그램에 대해 3D 표시할 때의 좌측 눈의 영상(픽쳐)에 대해서 MPEG-2, MPEG-4 등의 방식을 사용해서 부호화하여 좌측 눈 용 비디오 스트림(즉, 주 스트림)을 생성하고, 좌측 눈 용 비디오 스트림 저장부(103)에 기입한다.

(2) 오디오 인코더(102)

오디오 인코더(102)는 음성데이터를, 리니어 PCM 등의 방식으로 압축·부호화하여 오디오 스트림을 생성하고, 오디오 스트림 저장부(104)에 기입한다.

(3) 좌측 눈 용 비디오 스트림 저장부(103)

좌측 눈 용 비디오 스트림 저장부(103)은 좌측 눈 용 비디오 인코더(101)에서 생성된 좌측 눈 용 비디오 스트림을 저장하기 위한 기억영역이다.

(4) 오디오 스트림 저장부(104)

오디오 스트림 저장부(104)는 오디오 인코더(102)에서 생성된 오디오 스트림을 저장하기 위한 기억영역이다.

(5) 정보 보유부(105)

정보 보유부(105)는 주 스트림과 함께 송신되는 SI/PSI를 저장하는 기억영역이다. 또, SI/PSI는 외부 장치에서 작성되어도 좋고, 송신장치(100)에서 작성되어도 좋다.

이하, SI/PSI에 포함되는 PMT에 대해 설명한다.

도 3은 PMT의 데이터 구조를 나타내는 도면이다. 개개의 파라미터의 의미에 대해서는 ISO/IEC13818-1(MPEG-2)에서 규정되어 있으므로 설명을 생략한다. PMT에는 기술자를 배치 가능한 개소가 2개소 있다.

1번째는 퍼스트 루프(D100)라고 부르는 부분이다. 퍼스트 루프(D100)의 「descriptor()」에는 기술자의 배치가 가능하다. 「descriptor()」부분은 복수의 기술자를 삽입 가능하다. 여기에는 프로그램 전체에 관련되는 기술자를 배치한다.

2번째는 ES정보 기재 개소(D101)에 포함되는 세컨드 루프(D102)라고 부르는 부분이다. ES정보 기재 개소(D101)는 퍼스트 루프(D100)의 직후부터 for 문이 시작되고 있고, 이 for문은 프로그램에 포함되는 ES의 수만큼 반복된다. 이 for문 내의 파라미터, 예를 들어 stream-type이나 elementary-PID 등은 당해 ES에 관한 파라미터이다. 세컨드 루프(D102)는 이 ES정보 기재 개소(D101)에 포함되어 있다. 세컨드 루프(D102)의 「descriptor()」에는 기술자의 배치가 가능하다. 「descriptor()」부분은 복수의 기술자를 삽입 가능하다. 여기에는 해당 ES에 관련되는 기술자를 배치한다.

본 실시형태에서는 부 스트림의 참조정보를 기술하는 external-ES-link-descriptor()를 정의하며, 상기의 세컨드 루프(D102)에 배치한다.

또, external-ES-link-descriptor()의 기재 내용은 후술한다.

(6) 다중화부(106)

다중화부(106)는 좌측 눈 용 비디오 스트림 저장부(103)에 저장되어 있는 좌측 눈 용 비디오 스트림, 오디오 스트림 저장부(104)에 저장되어 있는 오디오 스트림, 정보 보유부(105)에 저장되어 있는 SI/PSI 등을 다중화하여 MPEG2-TS형식의 TS를 생성하고, 송신부(107)를 개재하여 송신한다.

또한, 미리 비디오, 오디오를 압축·부호화하여 저장하는 것이 아니라, 미 압축의 비디오, 오디오를 리얼 타임으로 부호화하는 동시에 다중화하는 구성으로 해도 좋다.

(7) 송신부(107)

송신부(107)는 다중화부(106)에서 생성된 MPEG2-TS형식의 TS를 송신한다.

2. 3　external-ES-link-descriptor()에 대해

여기에서는 external-ES-link-descriptor()의 구체적인 기술 내용에 대해 설명한다. 도 4에 external-ES-link-descriptor()의 구조의 일례를 나타낸다.

이하, external-ES-link-descriptor()의 기술 요소에 대해 설명한다.

descriptor-tag에는 다른 기술자와 본 기술자를 구별하기 위한 고유의 값이 기술된다.

descriptor-length에는 다음의 필드에서부터 본 기술자 말미까지의 바이트 수가 기술된다.

Reserved는 장래 확장을 위한 영역이며, 이진수의 “1”이 비트만큼 기술된다.

TS-location-type은 부 스트림이 전송되는 네트워크의 종별을 나타낸다. 구체적으로는, 값 “00”은 부 스트림이 주 스트림과 동일한 방송 네트워크로 전송되는 것을 나타낸다. 값 “01”은 부 스트림이 후속의 transport-stream-location에서 나타나는 주 스트림과 다른 방송 네트워크로 전송되는 것을 나타낸다. 값 “10”은 부 스트림이 후속의 uri-char에서 나타내는 URI에 의해 액세스 가능한, 방송 이외의 매체에 의해 액세스 가능하다는 것을 나타낸다. 이에 의해 주 ST를 수신한 디지털 텔레비전(300)은 부 스트림이 어떻게 액세스 가능한가를 알 수 있다.

stream-type-flag는 후속의 stream-type의 기술의 유무를 나타내는 플래그이다.

sync-reference-type은 주 스트림과 부 스트림의 동기수단의 유무 및 방법을 나타낸다. 값 “00”은 수신기에 있어서 주 스트림과 부 스트림의 동기는 실시하지 않으며, 주 스트림의 복호·표시를 실시할 때는 주 스트림 내의 PCR(Program-Clock-Reference)에 따라서 부 스트림의 복호·표시를 실시할 때는 부 스트림 내의 PCR에 따른다. 값 “01”은 후속의 PCR-location-flag에 의해 시작되는 PCR 참조정보를 이용해서 PCR을 이용한 동기를 실시한다. 값 “10”은 후속의 main-sync-PID로 시작되는 동기트랙 참조정보를 이용하여 독립한 동기트랙을 이용한 동기를 실시한다. 이에 의해 디지털 텔레비전(300)은 주 스트림과 부 스트림의 사이의 클록 동기의 유무 및 방법을 알 수 있다.

transport-stream-id는 참조하는 부 스트림이 전송되는 transport-stream-id를 나타낸다.

program-numbeR은 참조하는 부 스트림을 포함하는 프로그램의 program-number를 나타낸다.

ES-PID는 참조하는 부 스트림의 PID를 나타낸다.

상기의 transport-stream-id, program-number, ES-PID를 기술함으로써 본 기술자가 배치되는 PMT의 세컨드 루프(D102)에 대응하는 ES의 이용시에 동시에 이용 가능한 부 스트림의 ES를 특정할 수 있다. 또, 부 스트림이 존재하지 않는 경우에는 program-number에는 부 스트림이 존재하지 않는 취지를 나타내는“0x00”이 기술된다.

transport-stream-location은 참조하는 부 스트림이 다른 방송 네트워크(예：지상파 방송에 대한 위성방송)로 전송되는 경우에 부 스트림이 전송되는 네트워크를 나타낸다. 예를 들어 transport-stream-location에 부 스트림이 전송되는 네트워크의 network-id(예：0x40f1)를 기술한다. 이에 의해 부 스트림이 주 스트림과는 다른 방송 네트워크로 전송되는 경우에서도 디지털 텔레비전(300)은 그 전송 위치를 알 수 있다.

uri-length는 후속의 uri-char의 바이트 수를 나타낸다.

uri-chaR은 참조하는 부 스트림이 방송 이외의 매체에 의해도 액세스 가능한 경우에 부 스트림에 액세스하기 위한 URI를 기술한다. URI의 기술 예에 대해서는 후술한다.

stream-type은 부 스트림의 stream-type을 나타내는 것이며, 「ISO/IEC 13818-1」에 의해 정의되는 형식으로 표시된다. 예를 들어 부 스트림이 H. 264 AVC이면 stream-type에는“0x1B”가 기술된다. 이에 의해 디지털 텔레비전(300)은 부 스트림이 이용 가능한가 여부를 스트림에 액세스하기 전에 알 수 있다. 또한, stream-type을 이용해 부 스트림의 용도를 지정해도 좋다. stream-type의 구체적인 예에 대해서는 후술한다.

PCR-location-flag는 주 스트림 및 부 스트림을 공통의 PCR에 따라서 동기하여 복호·표시를 실시할 때에 주 스트림과 부 스트림의 어느 쪽의 PCR(Program　Clock　Reference)을 참조해야 하는가를 나타낸다. “0”인 경우에는 주 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. “1”인 경우에는 부 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 이에 의해 전송로의 신뢰성 등에 따라서 주 스트림과 부 스트림 중 어느 쪽의 PCR을 참조해야 하는가를 지정할 수 있다. 또, 디지털 텔레비전은 PCR을 이용해 주 스트림과 부 스트림을 동기시키는 경우에 어느 쪽 PCR을 참조해야 하는가를 알 수 있다.

explicit-PCR-flag는 PCR-PID를 본 기술자(descriptor itself) 중에 기술하는가 여부를 나타낸다. “0”인 경우에는 본 기술자에 기술되지 않고, 주 스트림 또는 부 스트림의 프로그램의 PMT 중의 PCR-PID에서 기술된 PCR을 이용한다. “1”인 경우에는 후속의 PCR-PID에서 기술된 PCR을 이용한다. 이에 의해 기존의 PCR을 이용하는가, 주 스트림과 부 스트림의 동기 재생시에 고유의 PCR을 이용하는가를 지정할 수 있다.

PCR-offset-flag는 주 스트림과 부 스트림이 지정된 PCR을 이용해 동기 재생하는 경우에 오프셋의 유무를 지정한다. “0”인 경우에는 오프셋 값은 지정되지 않는 것을 나타낸다. “1”인 경우에는 오프셋 값이 지정되는 것을 나타낸다.

PCR-PID는 주 스트림과 부 스트림의 동기 재생시에 주 스트림 또는 부 스트림 중의 참조해야 할 PCR의 PID를 지정한다. 이에 의해 수신기는 동기 재생시에 고유의 PCR을 이용하는 경우에 그 PCR의 PID를 알 수 있다.

PCR-polarity는 오프셋 값의 극성을 나타낸다. “0”인 경우에는 후속의 PCR-offset 값을 PCR-location에서 지정된 측의 스트림 내의 PCR의 값에 가산하여 PCR-location에서 지정되지 않았던 쪽의 스트림을 복호·표시를 실시할 때의 PCR로 이용한다. “1”인 경우에는 후속의 PCR-offset 값을 PCR-location에서 지정된 측의 스트림 내의 PCR의 값에 의해 감산하여 PCR-location에서 지정되지 않았던 쪽의 스트림을 복호·표시를 실시할 때의 PCR로 이용한다.

PCR-offset은 오프셋 값의 절대치를 나타낸다. 예를 들어 PCR-location-flag가 “0”이며 주 스트림 내의 PCR을 이용하는 경우에는 부 스트림의 복호·표시를 실시할 때 PCR-polarity와 PCR-offset에 따라서 주 스트림 내의 PCR을 오프셋 한 값을 사용한다. PCR-location-flag가 “1”에서 만나며 부 스트림 내의 PCR을 이용하는 경우에는 주 스트림의 복호·표시를 실시할 때, PCR-polarity와 PCR-offset에 따라서 부 스트림 내의 PCR을 오프셋 한 값을 사용한다. 이와 같이 PCR-polarity와 PCR-offset을 지정함으로써 주 스트림과 부 스트림 사이에서 참조하는 PCR의 개시치를 맞출 수가 없는 경우에도 동기 재생을 실현할 수 있다.

main-sync-PID는 주 스트림의 동기트랙의 PID를 나타낸다.

sub-sync-PID는 부 스트림의 동기트랙의 PID를 나타낸다.

main-sync-PID와 sub-sync-PID를 이용함으로써 PCR의 값에 의하지 않고 주 스트림과 부 스트림을 동기시키는 것이 가능해진다. 또한, 동기트랙은 ETSI　TS　102　823(Specification for the carriage of synchronized　auxiliary　data in　DVB　transport　streams)에 규정되는 synchronised　auxiliary　data를 이용하여 주/부 스트림 각각의 타임스탬프와 주/부 스트림에서 공통인 타임 코드의 관계를 기재해도 좋고, 다른 방법이라도 좋다.

이상이 신규의 기술자 “external-ES-link-descriptor()”에 대한 설명이다. 이 기술자에 의해 주 스트림의 영상 음성 서비스 시청시에 동시에 이용 가능한 부 스트림을 특정하여, 동시에 재생(동기하여 재생)할 수 있다.

(URI의 기술 예에 대해)

여기에서는 신규의 기술자 “external-ES-link-descriptor()”에 기재되는 uri의 기술 예에 대해 설명한다.

“http：//aaa. sample. com/bbb. ts”로 기술된 경우에는 http 프로토콜을 이용해 aaa. sample. com 사이트의 bbb. ts파일에 액세스하는 것을 나타낸다. 여기서, bbb. ts는 부 스트림을 저장한 TS파일의 실체이다.

“http：//aaa. sample. com/ccc. cpc”라는 기술은 통신 경유로, http 프로토콜을 이용해서 aaa. sample. com 사이트의 ccc. cpc 파일에 액세스하는 것을 나타내는 것이다. 여기서, ccc. cpc는 부 스트림을 저장한 TS파일에 액세스하기 위한 재생제어 메타 파일이다.

“rtsp：//aaa. sample. com/ddd. ts”라는 기재는 통신 경유로, rtsp 프로토콜을 이용해서 aaa. sample. com 사이트의 ddd. ts파일에 액세스하는 것을 나타낸다. 여기서, ddd. ts는 부 스트림을 저장한 TS파일의 실체이다.

“arib-file：//DirA/DirB/eee. ts”라는 기재는 미리 로컬축적매체 상에 저장된 DirA/DirB 폴더 중의 fff. ts파일에 액세스하는 것을 나타낸다. 여기서, fff. ts는 부 스트림을 저장한 TS파일의 실체이다.

“crid：//aaa. sample. com/zzz”라는 기재는 aaa. sample. com/zzz에서 나타내는 CRID(Content　Reference　Identifier)를 가지는 영상에 액세스하는 것을 나타낸다. 수신 측의 장치에서는 CRID를 이용해서 「ETSI　TS　102　822　Part4」, 또는 「ARIB　STD-B38 4. 1. 3」에서 규정된 기재방법에 따라서 로케이션 해결을 실행한다.

(stream-type의 구체적인 예에 대해)

여기에서는 신규의 기술자 “external-ES-link-descriptor()”로 기재되는 stream-type에 할당할 수 있는 값에 대해 설명한다. 또한, 아래와 같은 값은 stream-type과는 다른 필드를 설치하여 기재하는 것으로 해도 좋다.

본 실시형태에서는 stream-type에는 값 “0x80”에서부터 “0x8A”까지의 어느 하나의 값을 할당할 수 있다. 이하, 각 값에 대해 설명한다.

값 “0x80”은 부 스트림이 2안식 입체영상에서의 주 스트림과 반대 측의 뷰(예：좌측 눈 시점에 대한 우측 눈 시점)로부터 이루어지는 것이라는 것을 나타낸다. 또한, 본 실시형태의 프로그램 전송시스템(10)에서는 stream-type은“0x80”이 된다.

값 “0x81”은 부 스트림이 0x80와 마찬가지 내용을 주 스트림과의 차분으로 부호화한 것인 것을 나타낸다.

값 “0x82”는 부 스트림이 주 스트림의 영상을 일차원 방향으로 고정세화 하는 차분 성분(예：한쪽 눈당 960×1080 픽셀의 Side-by-Side 형식의 2안식 입체영상을 한쪽 눈당 1920×1080 픽셀로 고정세화)인 것을 나타낸다.

값 “0x83”은 부 스트림이 주 스트림의 영상을 이차원 방향으로 고정세화하는 차분 성분(예：1920×1080 픽셀의 화상을 3840×2160 픽셀로 고정세화)인 것을 나타낸다.

값 “0x84”는 부 스트림이 주 스트림의 영상의 색 심도정보를 추가하는 차분 성분(예：RGB에서의 각 8bit의 정보를 각 12bit로 확대)인 것을 나타낸다.

값 “0x85”는 부 스트림이 주 스트림 영상으로부터 입체영상을 생성할 때에 이용하는 깊이 맵(Depth Map)인 것을 나타낸다.

값 “0x86”는 부 스트림이 주 스트림 영상으로부터 입체영상을 생성할 때에 이용하는 폐색 정보(Occlusion)인 것을 나타낸다.

값 “0x87”은 부 스트림이 주 스트림 영상으로부터 입체영상을 생성할 때에 이용하는 투명도 정보(Transparency)인 것을 나타낸다.

값 “0x88”은 부 스트림이 주 스트림 영상과는 다른 시점의 영상정보(예：MPEG-4 MVC의 non-base view)인 것을 나타낸다. 이 경우, 복수의 시점 영상이 있는 경우에는 시점마다 사용자가 시점 선택할 때에 알기 쉬운 카메라 명칭, 위치정보(GPS) 및 카메라의 방향이나 줌 등의 광학 파라미터를 기술해 두는 것이 유용하다. 카메라 명칭 등의 정보는 주/부 스트림의 영상을 저장하는 시스템 스트림 내에 신규 descriptor나 private stream의 형식으로 기술해도 좋고, 사용자 확장영역의 메타데이터로서 주/부 스트림 영상 내에 기술해도 좋으며, 혹은 주/부 스트림과는 별도의 경로(당해 스트림과 연동하는 HTML5 형식 등)에 의해 전송해도 좋다. 도 5에 descriptor 형식의 데이터 구조(view-selection-information())의 일례를 나타낸다. number-of-views는 별도의 시점의 수를 나타내는 것이다. 이하의 요소는 별도의 시점의 수만큼 정의된다. view-id는 대응하는 시점을 식별하기 위한의 것이다. view-name-length는 다음에 정의되는 view-name의 바이트 수가 기술된다. view-name는 카메라의 명칭이 기술된다. GPS-information-length는 다음에 정의되는 GPS-information()의 바이트 수가 기술된다. GPS-information()는 GPS 정보가 기술된다. camera-information-length는 다음에 정의되는 camera-information()의 바이트 수가 기술된다. camera-information()에는 카메라의 방향이나 줌 등의 광학 파라미터의 정보가 기술된다.

예를 들어 야구 중계의 프로그램에 있어서는 일루 벤치로부터의 촬영, 삼루 벤치로부터의 촬영 등과 같은 다양한 시점으로부터 카메라 촬영이 이루어져 있다. 이 경우, 사용자가 일루 측 벤치에서 내야 전체를 보고 싶은 경우에는 복수 시점 중 「일루 측」등과 같은 명칭의 카메라를 지정함으로써 일루 측 벤치로부터의 시점 영상을 시청할 수 있다. 또, 위치정보나 카메라의 방향·줌 정보를 조합함으로써 카메라 명칭에 의한 지정이 아니라 야구장의 약식도면상에 배치한 카메라를 그래피컬하게 표시하면서 사용자에게 복수 시점으로부터 영상을 시청시킬 수도 있다.

값 “0x89”는 부 스트림이 임의의 시점 영상을 생성할 때에 이용하는 프리 뷰 영상정보인 것을 나타낸다. 복수의 시점 영상으로부터 생성된 임의 시점을 생성 가능한 거대한 영상정보(예를 들어 축구중계에서의 필드 전체의 영상)를 전송할 때에 사용자의 흥미·기호에 따라서 특정 영역을 추출해 재생·표시할 수 있는 기능은 매우 유용하다고 생각된다. 그래서, 거대한 영상정보에 대해서 촬영된 개개의 오브젝트에 대한 명칭과 위치정보(GPS 정보나, 부호화영상 내의 위치정보) 및 카메라의 위치정보와 광학 파라미터 정보를 메타데이터로서 부호화하여 전송함으로써 이를 기초로 특정한 영역을 잘라내서 재생·표시할 수 있다. 이와 같은 정보는 주/부 스트림 영상을 저장하는 시스템 스트림 내에 신규 descriptor나 private stream의 형식으로 기술해도 좋고, 사용자 확장영역의 메타데이터로서 주/부 스트림 영상 내에 기술해도 좋으며, 혹은 주/부 스트림과는 별도의 경로(당해 스트림과 연동하는 HTML5 형식 등)로 전송해도 좋다. 도 6에 있어서, 사용자 확장영역의 메타데이터 구조(object-information())의 일례를 나타낸다. 명칭과 위치정보를 대응시키는 오브젝트의 개수가 “number-of-objects”에 기술된다. 각 오브젝트를 식별하기 위한 정보가 object-id에, 오브젝트의 이름이 object-name에 각각 기술된다. 그리고, object-id, object-name에 의해 식별되는 촬영 대상물의 GPS 위치정보는 GPS-information()에서, 부호화영상 내의 위치정보는 그 표시 사각형 영역을 object-upper-left-x/y, object-lower-right-x/y에 기술된다.

예를 들어 축구중계에 있어서 특정 선수를 중심으로 시합을 시청하는 것도 선수명과 그 선수의 영상 내에서의 위치정보가 메타데이터로서 전송되어 있으면 가능하다. 복수 시점으로부터의 카메라 영상을 조합시켜서 임의의 시점의 영상을 생성할 때 흥미 대상의 오브젝트의 GPS 정보와 조합하는 복수 시점의 카메라의 GPS 정보(카메라의 위치와 방향정보)가 있으므로 임의 시점으로부터의 영상생성 정밀도를 높일 수 있다.

값 “0x8A”는 부 스트림이 주 스트림의 영상에 대해서 부가정보를 중첩한 영상인 것을 나타낸다. 예를 들어 MPEG-4 MVC를 사용해 주 스트림 영상에 대해서 부가정보를 중첩한 영상을 전송하는 것이 가능하다. 주 스트림은 MVC의 base 뷰이며, 부 스트림은 MVC의 non-base 뷰로 부호화하여 둠으로써 부 스트림은 주 스트림의 영상과는 다른 영상정보(중첩한 부가 영상)만을 효율 좋게 전송할 수 있다. 예를 들어 주 스트림의 영상이 축구중계인 경우, 부 스트림을 주 스트림 영상 내의 선수의 이름이나 주행거리 등의 속성정보를 그래피컬하게 각 선수 부근에 중첩하기 위한 영상(주 스트림 영상으로부터의 차분로 구성되는 영상)으로 함으로써 주 스트림에 대해서 부 스트림(stream-type=0x8A)으로 전송되는 차분을 적용하는(즉 non-base 뷰를 복호 해 재생한다)하여 부가정보가 중첩된 축구중계 영상을 용이하게 사용자에게 제시할 수 있다.

이상이 stream-type에 할당되는 값에 대한 설명이다. 이에 의해 수신 측의 장치는 부 스트림을 어떻게 이용 가능한가를 부 스트림에 액세스하기 전에 알 수 있다.

또, 하나의 프로그램의 영상(하나의 시점으로부터의 영상)을 포함하는 트랜스포트 스트림과는 다른 트랜스포트 스트림에 의해 정보를 송신하는 경우에 예를 들어 다른 트랜스포트 스트림에 의해 다른 시점으로부터의 영상을 송신하고, 3D 표시를 실행하는 경우에는 쌍방의 트랜스포트 스트림에 포함되는 양 영상의 동기를 취한 필요가 있으나, 종래의 기술에서는 동기를 취할 수단이 없다. 그래서, 상술한 것과 같이 “external-ES-link-descriptor()”에 sync-reference-type 등의 동기에 관한 정보를 포함함으로써 쌍방의 트랜스포트 스트림에 포함되는 양 영상의 동기를 취할 수 있다.

2. 4　송신장치(200)의 구성

송신장치(200)는 송신장치(100)에서 송신되는 주 스트림에 대응하는 부 스트림을 송신하는 것이다.

송신장치(200)는 도 7에 나타내는 것과 같이 우측 눈 용 비디오 인코더(201), 우측 눈 용 비디오 스트림 저장부(203), 정보 보유부(205), 다중화부(206) 및 송신부(207)로 구성되어 있다.

(1) 우측 눈 용 비디오 인코더(201)

우측 눈 용 비디오 인코더(201)는 송신장치(100)로부터 송신되는 좌측 눈의 영상에 대응하는 우측 눈의 영상(픽쳐)에 대해 MPEG-2, MPEG-4 등의 방식을 사용해서 부호화하여 우측 눈 용 비디오 스트림(즉, 부 스트림)을 생성해서 우측 눈 용 비디오 스트림 저장부(203)에 기입한다.

(2) 우측 눈 용 비디오 스트림 저장부(203)

우측 눈 용 비디오 스트림 저장부(203)는 우측 눈 용 비디오 인코더(201)에서 생성된 우측 눈 용 비디오 스트림을 저장하기 위한 기억영역이다.

(3) 정보 보유부(205)

정보 보유부(205)는 부 스트림과 함께 송신되는 SI/PSI를 저장하는 기억영역이다. 또한, SI/PSI는 외부 장치에서 작성되어도 좋고, 송신장치(200)에서 작성되어도 좋다.

정보 보유부(205)에서 저장되어 있는 SI/PSI의 데이터 구조는 정보 보유부(105)에서 저장되어 있는 SI/SPI와 같다. 다만, 부 스트림을 송신하는 장치에서는 주 스트림의 참조정보를 기술하는 service-subset-ES-descriptor()를 정의하며, PMT의 세컨드 루프에 배치한다.

또, service-subset-ES-descriptor()의 기재 내용은 후술한다.

(4) 다중화부(206)

다중화부(206)는 우측 눈 용 비디오 스트림 저장부(203)에 저장되어 있는 우측 눈 용 비디오 스트림(부 스트림), 정보 보유부(205)에 저장되어 있는 SI/PSI 등을 다중화하여 MPEG2-TS형식의 TS를 생성해서 송신부(207)를 개재하여 송신한다.

(5) 송신부(207)

송신부(207)는 다중화부(206)에서 생성된 MPEG2-TS형식의 TS를 송신한다.

2. 5　service-subset-ES-descriptor()에 대해

여기에서는 service-subset-ES-descriptor()의 구체적인 기술 내용에 대해 설명한다. 도 8에서 도 11에 service-subset-ES-descriptor()의 구조의 일례를 나타낸다.

descriptor-tag에는 다른 기술자와 본 기술자를 구별하기 위한 고유한 값이 기술된다.

descriptor-length에는 다음 필드에서부터 본 기술자 말미까지의 바이트 수가 기술된다.

Reserved는 장래 확장을 위한 영역이며, 이진수의 “1”이 비트 수만큼 기술된다.

TS-location-type은 주 스트림이 전송되는 네트워크의 종별을 나타낸다. 값 “00”인 경우에는 주 스트림이 부 스트림과 동일한 방송 네트워크로 전송되는 것을 나타낸다. 값 “01”인 경우에는 주 스트림이 후속의 transport-stream-location에서 나타내는 부 스트림과 다른 방송 네트워크에 의해 전송되는 것을 나타낸다. 값 “10”인 경우에는 주 스트림이 후속의 uri-char에서 나타내는 URI에 의해 액세스 가능한, 방송 이외의 매체에 의해 액세스 가능하다는 것을 나타낸다. 이에 의해 부 스트림을 수신한 장치(디지털 텔레비전)는 주 스트림에의 액세스 방법을 알 수 있다.

stream-type-flag는 후속의 stream-type의 기술의 유무를 나타내는 플래그이다.

dependency-flag는 부 스트림이 주 스트림에 의존하지 않고 재생 가능한가 여부를 나타낸다. 값 “0”인 경우에는 당해 부 스트림을 단독으로 재생하는 것이 가능하다는 것을 나타낸다. 값 “1”인 경우에는 당해 부 스트림이 주 스트림과 동시에 이용하는 경우에만 재생 가능하다는 것을 나타낸다. 이에 의해 주 스트림과 무관계하게 부 스트림이 디지털 텔레비전에서 수신된 경우에 송신 측의 의도에 따라서 부 스트림의 재생을 허가/억제할 수 있다.

sync-reference-type은 도 3에서 나타내는 것과 같으므로 여기에서의 설명은 생략한다.

transport-stream-id는 패런트(parent)가 되는 주 스트림이 전송되는 transport-stream-id를 나타낸다. program-numbeR은 패런트가 되는 주 스트림을 포함하는 프로그램의 program-number를 나타낸다. ES-PID는 패런트가 되는 주 스트림의 PID를 나타낸다. transport-stream-id, program-number, ES-PID를 기술함으로써 본 기술자가 배치되는 PMT의 세컨드 루프에 대응하는 ES의 이용시에 패런트가 되는 주 스트림의 ES를 특정할 수 있다. 또한 특정의 ES가 아닌, 패런트가 되는 프로그램을 지정하는 경우에는 ES-PID에는 무효치(NULL 패킷을 나타내는 0x1FF)를 기술한다.

transport-stream-location은 패런트가 되는 주 스트림이 다른 방송 네트워크(예：지상파 방송에 대한 위성방송)로 전송되는 경우에 주 스트림이 전송되는 네트워크를 나타낸다. 예를 들어 transport-stream-location에 주 스트림이 전송되는 네트워크의 network-id(예：0x40f1)를 기술한다. 이에 의해 주 스트림이 부 스트림과는 다른 방송 네트워크로 전송되는 경우에도 디지털 텔레비전은 그 전송 위치를 알 수 있다.

uri-length는 후속의 uri-char의 바이트 수를 나타낸다.

uri-chaR은 패런트가 되는 주 스트림이 방송 이외의 매체에 의해 액세스 가능한 경우에 주 스트림이 포함되는 TS에 액세스하기 위한 URI를 기술한다. URI의 기술 예는 상기에서 설명한 구체 예와 같으므로 여기에서의 구체적인 예를 이용한 상세한 설명은 생략한다.

stream-type은 주 스트림의 stream-type을 ISO/IEC　13818-1에서 정의되는 형식으로 나타낸다. 예를 들어 주 스트림이 H. 264 AVC이면 0x1B를 기술한다. 이에 의해 주 스트림이 디지털 텔레비전에서 이용 가능한가 여부를 주 스트림에 액세스하기 전에 알 수 있다.

parent-CA-flag는 부 스트림이 단독재생 불가의 경우에 패런트가 되는 주 스트림의 ECM에서 복호해야 하는가 여부를 나타낸다. 값 “0”인 경우에는 부 스트림은 암호화되어 있지 않거나, 부 스트림의 정보를 기재하는 PMT의 세컨드 루프에 배치된 CA-descriptor()의 정보에 따라서 복호하는 것을 나타낸다. 값 “1”인 경우에는 부 스트림은 주 스트림의 ECM를 이용해 복호하는 것을 나타낸다. 이에 의해 주 스트림과 부 스트림을 개별의 키로 스크럼블 함에 따른 번잡성이나 처리부하를 방지하는 동시에, 주 스트림과 무관계하게 부 스트림이 디지털 텔레비전에 수신된 경우에 송신 측이 의도하지 않는 형태로 재생되는 것을 방지할 수 있다.

explicit-CA-flag는 부 스트림의 복호 시에 패런트가 되는 주 스트림의 ECM를 이용하는 경우에 ECM-PID를 본 기술자 중에서 기술하는가 여부를 나타낸다. 값 “0”인 경우에는 주 스트림과 같은 ECM, 즉 주 스트림의 정보를 기재하는 PMT의 세컨드 루프에 배치된 CA-descriptor()의 정보에 따라서 복호하는 것을 나타낸다. 값 “1”인 경우에는 주 스트림을 포함하는 TS 중의 후속의 ECM-PID에 기재된 ECM를 이용해 복호하는 것을 나타낸다. 이에 의해 주 스트림과 부 스트림을 동일한 과금으로 하거나 부 스트림만을 별도로 추가 구입 가능으로 하는 등, 유연한 과금 체계가 가능해진다.

ECM-PID는 부 스트림의 복호 시에 패런트가 되는 주 스트림의 ECM를 명시적으로 지정하는 경우에 기술한다.

PCR-location-flag 이후의 기술 요소는 도 3에서 나타내는 것과 동일하므로 여기에서의 설명은 생략한다.

이상 설명한 것과 같이, 신규의 기술자 service-subset-ES- descriptor()를 추가함으로써 디지털 텔레비전(300)은 부 스트림을 수신한 때에, 수신한 부 스트림을 이용 가능한 주 스트림을 특정할 수 있다.

또, “service-subset-ES-descriptor()”에 dependancy-flag 등의 단독 재생과 관련되는 정보를 포함함으로써 수신 측의 장치가 부 스트림을 잘못해서 단독으로 재생하여 제작자의 의도하지 않는 시청이 이루어질 가능성을 회피할 수 있다.

2. 6　디지털 텔레비전(수신재생장치)(300)

여기에서는 수신재생장치(300)의 구성에 대해 설명한다.

수신재생장치(300)는 도 12에 나타내는 것과 같이 제어부(301), 수신처리부(302), 재생처리부(303) 및 출력부(304)로 구성되어 있다.

(1) 제어부(301)

제어부(301)는 수신재생장치(300)의 전체의 제어를 실행하는 것이다.

구체적으로는, 제어부(301)는 UI 및 브라우저 등을 통해서 사용자로부터 특정의 스트림(방송 채널)의 선국 지시를 접수하고, 접수한 선국 지시에 의거하여 수신처리부(302)에 선국·복조를 지시한다. 그 후, 제어부(301)는 수신처리부(302)에서 수신한 TS에 포함되는 PMT를 재생처리부(303)로부터 수신한다. 제어부(301)는 PMT를 해석하여 재생할 영상의 PID 및 음성의 PID 등을 특정하고, 특정한 각 PID를 재생처리부(303)에 통지한다. 또, 제어부(301)는 수신한 PMT에 상기의 신규 기술자의 유무를 판단함으로써 수신한 TS와 동시에 재생할 정보를 포함하는 다른 TS의 존재의 유무를 판단한다. 예를 들어 수신한 TS에 포함되는 PMT에 신규 기술자 “external-ES-link-descriptor()”의 존재의 유무에 의해 부 스트림의 존재의 유무를 판단한다. 제어부(301)는 external-ES-link-descriptor()가 존재한다고 판단하는 경우에는 부 스트림을 특정하고, 특정한 부 스트림을 포함하는 TS에 대해서 수신 및 복조하도록 수신처리부(302)에 지시한다. 또, 제어부(301)는 external-ES-link-descriptor()로부터 동기에 관한 정보를 취득하고, 취득한 정보에 의거하여 동기방법을 특정하며, 그 결과를 재생처리부(303)에 통지한다.

또한, 제어부(301)는 수신한 TS에 포함되는 PMT에 service-subset-ES- descriptor()가 기술되어 있는 경우에는 부 스트림만으로의 재생의 가부를 판단한다. 부 스트림만으로의 재생이 불가라고 판단한 경우에는 주 스트림의 특정, 동기정보의 취득을 실행한다.

(2) 수신처리부(302)

수신처리부(302)는 도 12에 나타내는 것과 같이 제 1 수신부(310)와 제 2 수신부(311)를 가지고 있다.

제 1 수신부(310)는 제어부(301)로부터의 지시에 따라서 지정된 트랜스포트 스트림(여기에서는 주 스트림을 포함하는 것으로 한다)을 수신 및 복조하고, 복조에 의해 얻은 MPEG2 형식의 트랜스포트 스트림을 재생처리부(303)에 출력한다.

제 2 수신부(311)는 제어부(301)로부터의 지시에 따라서 부 스트림을 포함하는 트랜스포트 스트림을 수신 및 복조하고, 복조에 의해 얻은 MPEG2 형식의 트랜스포트 스트림을 재생처리부(303)에 출력한다.

(3) 재생처리부(303)

재생처리부(303)는 도 12에 나타내는 것과 같이 제 1 다중화 분리부(320), 제 2 다중화 분리부(321), 동기제어부(322), 제 1 영상 복호부(323), 제 2 영상 복호부(324), 음성 복호부(325), 영상처리부(326)를 가지고 있다.

(3-1) 제 1 다중화 분리부(320)

제 1 다중화 분리부(320)는 제 1 수신부(310)로부터 수신한 트랜스포트 스트림을 다중 분리하여 사용자로부터 지정된 채널의 프로그램과 관련되는 PMT를 추출하여 제어부(301)에 출력한다.

제 1 다중화 분리부(320)는 제어부(301)로부터 특정된 영상의 PID 및 음성의 PID 등을 수신하면 각 PID와 일치하는 영상의 ES(여기에서는 주 스트림인 좌측 눈 영상 스트림) 및 음성의 ES를 제 1 수신부(310)로부터 수신한 트랜스포트 스트림에서 추출한다. 제 1 다중화 분리부(320)는 추출한 주 스트림을 제 1 영상 복호부(323)에, 음성의 ES를 음성 복호부(325)에 각각 순차 출력한다.

또, 주 스트림과 부 스트림의 동시 재생을 하는 경우에 있어서 동기의 기준이 주 스트림일 때는 제어부(301)로부터의 지시에 따라서 주 스트림으로부터 PCR을 추출하여 동기제어부(322)에 순차 출력한다.

(3-2) 제 2 다중화 분리부(321)

제 2 다중화 분리부(321)는 제어부(301)로부터 특정된 영상의 PID 및 음성의 PID 등을 수신하면 각 PID와 일치하는 영상의 ES(여기에서는 부 스트림인 우측 눈 영상 스트림)를 제 2 수신부(311)로부터 수신한 트랜스포트 스트림에서 추출한다. 제 2 다중화 분리부(321)는 추출한 영상의 ES를 제 2 영상 복호부(324)에 순차 출력한다.

또, 주 스트림과 부 스트림의 동시 재생을 하는 경우에 있어서 동기의 기준이 부 스트림일 때는 제어부(301)로부터의 지시에 따라서 부 스트림에서 PCR을 추출하여 동기제어부(322)에 순차 출력한다.

또한, 제 2 다중화 분리부(321)는 제어부(301)로부터 영상의 PID를 수신하기 전에 제 2 수신부(311)로부터 수신한 트랜스포트 스트림을 수신한 경우에는 수신한 트랜스포트 스트림을 다중 분리하여 사용자로부터 지정된 채널의 프로그램과 관련되는 PMT를 추출해서 제어부(301)에 출력한다.

(3-3) 동기제어부(322)

동기제어부(322)는 특정된 동기방법을 제어부(301)로부터 수신한다.

동기방법이 주 스트림의 PCR을 이용하는 것인 경우에는 동기제어부(322)는 제 1 다중화 분리부(320)로부터 PCR을 취득한다. 동기제어부(322)는 취득한 PCR로부터 주 스트림용 시스템 클록을 생성해서 제 1 영상 복호부(323)에 순차 출력한다. 동기제어부(322)는 제어부(301)로부터의 지시에 따라서 주 스트림의 PCR을 이용해 부 스트림용 시스템 클록을 생성해서 제 2 영상 복호부(324)에 순차 출력한다. 예를 들어 동기제어부(322)는 주 스트림의 PCR을 오프셋 값을 이용해 부 스트림에도 적용하는 경우에는 주 스트림용 시스템 클록에 지정된 오프셋 값을 가산 혹은 감산하여 부 스트림용 시스템 클록을 생성한다.

동기방법이 부 스트림의 PCR을 이용하는 것인 경우에는 동기제어부(322)는 제 2 다중화 분리부(321)로부터 PCR을 취득한다. 동기제어부(322)는 취득한 PCR로부터 부 스트림용의 시스템 클록을 생성하여 제 2 영상 복호부(324)에 순차 출력한다. 동기제어부(322)는 제어부(301)로부터의 지시에 따라서 부 스트림의 PCR을 이용해 주 스트림용 시스템 클록을 생성해서 제 1 영상 복호부(323)에 순차 출력한다.

주 스트림 및 부 스트림의 어느 쪽도 이용하지 않고 동기를 취하는 경우에는(예를 들어 동기트랙정보를 이용하는 경우) 동기제어부(322)는 제어부(301)로부터의 지시에 따라서 주 스트림용 시스템 클록 및 부 스트림용 시스템 클록을 생성하고, 주 스트림용 시스템 클록을 제 1 영상 복호부(323)에, 부 스트림용 시스템 클록을 제 2 영상 복호부(324)에 각각 순차 출력한다.

(3-4) 제 1 영상 복호부(323)

제 1 영상 복호부(323)는 동기제어부(322)로부터 순차 출력되는 주 스트림용 시스템 클록을 참조하여 제 1 다중화 분리부(320)로부터 순차 출력되는 영상 ES(주 스트림)를 당해 주 스트림 중에 기재된 복호 타이밍에 복호하여 당해 주 스트림 중에 기재된 출력 타이밍에 영상처리부(326)에 출력한다.

(3-5) 제 2 영상 복호부(324)

제 2 영상 복호부(324)는 동기제어부(322)로부터 순차 출력되는 부 스트림용 시스템 클록을 참조하여 제 2 다중화 분리부(321)로부터 순차 출력되는 영상 ES(부 스트림)를 당해 부 스트림 중에 기재된 복호 타이밍에 복호하여 당해 부 스트림 중에 기재된 출력 타이밍에 영상처리부(326)에 출력한다.

(3-6) 음성 복호부(325)

음성 복호부(325)는 제 1 다중화 분리부(320)로부터 순차 수신한 음성의 ES를 복호하여 음성데이터를 생성한다. 그리고, 음성 복호부(325)는 생성한 음성데이터를 음성으로서 출력한다.

(3-7) 영상처리부(326)

영상처리부(326)는 제어부(301)로부터 부 스트림의 용도에 따른 지시를 수신하면 수신한 지시에 따라서 제 1 영상 복호부(323) 및 제 2 영상 복호부(324)로부터 출력된 영상의 처리를 실행하여 출력부(304)에 출력한다.

예를 들어 각 영상이 2안식 입체의 각 뷰에 대응하는 것인 경우에는 제 1 영상 복호부(323) 및 제 2 영상 복호부(324) 각각으로부터 출력된 영상을 합성한다. 합성의 방법은 예를 들어 액티브 셔터 방식의 3D 디스플레이이면 입력된 양 영상을 교대로 표시하는 동시에, 3D안경의 좌우 눈에 대응한 액정 셔터를 표시에 동기하여 교대로 개폐시킨다. 또 패시브 방식의 3D 디스플레이이면 디스플레이 상에서 라인마다 좌우 눈에 대응해 교대로 설정된 편광방향에 맞춰서 입력된 양 영상을 라인마다 교대로 중첩시킨다. 또, HDMI 등 외부 출력을 실행하는 전제이면 출력처의 디스플레이가 접수하는 3D포맷에 따른 합성을 실시한다(예：좌우 교대로 풀 해상도로 출력하는 Frame　Packing, 수평 방향으로 압축 합성한 Side-by-Side 등).

(4) 출력부(304)

출력부(304)는 영상처리부(326)로부터 수신한 영상을 디스플레이(도시하지 않음)에 출력한다.

2. 7　동작

여기에서는 각 장치의 동작에 대해 설명한다. 또한, 설명의 편의상 부 스트림에 대한 종별을 stream-type=0x80(2안식 입체영상에서의 주 스트림과 반대 측의 뷰)으로 한다.

(1) 송신장치(100)의 동작

여기에서는 송신장치(100)의 동작에 대해 도 13에 나타내는 흐름도를 이용해 설명한다.

좌측 눈 용 비디오 인코더(101)는 하나의 프로그램에 대한 복수의 좌측 눈 용 영상(픽쳐)에 대해 MPEG-2, MPEG-4 등의 방식을 사용해 부호화하여 좌측 눈 용 비디오 스트림을 생성해서 좌측 눈 용 비디오 스트림 저장부(103)에 기입한다(스텝 S5).

오디오 인코더(102)는 음성데이터를 압축·부호화하여 오디오 스트림을 생성해서 오디오 스트림 저장부(104)에 기입한다(스텝 S10).

다중화부(106)은 좌측 눈 용 비디오 스트림, 오디오 스트림 및 정보 보유부(105)에 저장되어 있는 SI/PSI 등을 다중화하여 MPEG2-TS형식의 트랜스포트 스트림을 생성해서(스텝 S15) 송신부(107)를 개재하여 송신한다(스텝 S20).

(2) 송신장치(200)의 동작

송신장치(200)의 동작에 대해서는 송신장치(100)의 동작과의 변경 점만 설명한다.

스텝 S5에 있어서 우측 눈 용 비디오 인코더(201)가 우측 눈 용 비디오 스트림을 생성하도록 변경한다.

스텝 S10은 실행하지 않으며, 스텝 S10에서 트랜스포트 스트림을 생성할 때에는 다중화부(206)가 우측 눈 용 비디오 스트림과 정보 보유부(205)에 저장되어 있는 SI/PSI 등을 다중화하도록 변경한다.

(3) 수신재생장치(300)의 동작

여기에서는 수신재생장치(300)의 동작에 대해 도 14에 나타내는 흐름도를 이용해 설명한다. 또한, 설명의 편의상 주 스트림은 제 1 수신부(310)에서 수신되고, 부 스트림은 제 2 수신부(311)에서 수신되는 것으로 한다.

수신처리부(302)는 사용자로부터 선국 지시가 있은 트랜스포트 스트림(TS)을 수신한다(스텝 S100).

제어부(301)는 수신한 TS에 포함되는 PMT를 이용해서 당해 TS가 주 스트림을 포함하는 것인가, 부 스트림을 포함하는 것인가, 혹은 양쪽 모두 포함하지 않는 것인가를 판별한다(스텝 S105). 구체적으로는, 제어부(301)는 수신한 TS에 포함되는 PMT에 신규 기술자 “external-ES-link-descriptor()”가 기재되어 있는 경우에는 당해 TS에는 주 스트림이 포함된다고 판정하고, 신규 기술자 “service-subset-ES-descriptor()”가 기재되어 있는 경우에는 당해 TS에는 부 스트림이 포함된다고 판별한다. 또, 상기 신규 기술자의 어느 쪽도 기재되지 않은 경우에는 통상의 TS라고 판별한다.

수신한 TS에 주 스트림이 포함된다고 판별하는 경우(스텝 S105에서의 「주 스트림」), 제어부(301)는 external-ES-link-descriptor()의 기술 내용을 참조하여 부 스트림을 특정하고, 제 2 수신부(311)에 특정한 부 스트림을 포함하는 TS를 수신하도록 지시하며, 제 2 수신부(311)는 제어부(301)의 지시에 의거해 부 스트림을 포함하는 TS를 수신한다(스텝 S110). 구체적으로는, 제어부(301)는 TS-location-type, transport-steram-id, program-number, ES-PID, transport-stream-location, uri-chaR을 참조하여 부 스트림의 취득방법을 얻는다. 예를 들어 TS-location-type에서 나타내는 값이 “00” 또는 “01”인 경우에는 부 스트림이 방송으로 전송되고 있는 것으로 해석하며, 제 2 수신부(311)에 transport-stream-id, transport-stream-location을 지정하여 부 스트림을 전송하는 방송파를 수신·복조하도록 지시하는 동시에, 제 2 다중화 분리부(321)에 program-number, ES-PID를 지정하여 복조된 트랜스포트 스트림으로부터 부 스트림(우측 눈 영상의 ES)을 분리·추출하도록 지시를 한다. 또 예를 들어 TS-location-type에서 나타내는 값이 “10”인 경우에는 부 스트림이 통신 네트워크 경유로 얻어지는 것으로 해석하고, 제 2 수신부(311)에 uri-chaR을 지정해 당해 부 스트림을 통신 네트워크로부터 취득하도록 지시하는 동시에, 제 2 다중화 분리부(321)에 program-number, ES-PID를 지정하여 취득된 트랜스포트 스트림으로부터 부 스트림을 분리·추출하도록 지시를 한다. 제어부(301)로부터의 지시에 따라서 제 2 수신부(311)는 부 스트림의 수신, 복조하고, 제 2 다중화 분리부(321)는 다중 분리를 실행하여 영상의 ES(부 스트림)를 추출해서 제 2 영상 복호부(324)에 순차 출력한다. 또한, 부 스트림을 취득할 수 있을 때까지 주 스트림 단독으로 재생하는 구성으로 해도 좋다. 또, 부 스트림을 취득하여 주 스트림과 동시에 이용하는가, 주 스트림 단독으로 이용하는가를 사전 설정, 혹은 사용자에게 문의한 결과에 의해 선택해도 좋다.

재생처리부(303)는 제어부(301)의 지시에 의거하여 수신한 주 스트림 및 부 스트림의 동시 재생을 실행한다(스텝 S115). 구체적으로는, 먼저 제어부(301)는 external-ES-link-descriptor()를 취득하고 있는 경우에는 sync-reference-type 및 PCR-location-flag 이후의 필드를 참조하여 동기방법을 특정한다. 예를 들어 sync-reference-type=01, PCR-location-flag=0, explicit-PCR-flag=0, PCR-offset-flag=1인 경우에는 주 스트림의 PMT 중에 기재된 PCR을 오프셋 값을 이용해 부 스트림에도 적용한다고 해석하고, 동기제어부에 당해 처리를 실행하도록 지시한다. 동기제어부(322)는 특정된 동기방법에 의거하여 PCR-PID를 참조해서 주 스트림에 포함되는 PCR을 추출하고, 추출한 PCR을 이용해 주 스트림용 시스템 클록 및 부 스트림용 시스템 클록을 생성하여, 주 스트림용 시스템 클록을 제 1 영상 복호부(323)에, 부 스트림용 시스템 클록을 제 2 영상 복호부(324)에 각각 순차 출력한다. 또, 제어부(301)는 제 1 수신부(310)에서 수신한 TS로부터 주 스트림 영상을 추출하도록 제 1 다중화 분리부(320)에 지시를 한다. 제어부(301)는 stream-type-flag 및 stream-type을 참조하여 부 스트림의 용도에 관한 정보를 얻어서 대응하는 처리를 실행하도록 재생처리부(303)에 지시를 한다. 예를 들어 stream-type=0x80인 경우에는 주 스트림 및 부 스트림이 2안식 입체의 각 뷰에 대응하는 것이라고 해석하여 재생처리부(303)에 처리를 실행하도록 지시한다. 제어부(301)의 지시에 의해 재생처리부(303)의 제 1 영상 복호부(323)는 주 스트림으로부터 좌측 눈 용 영상을 생성하고, 제 2 영상 복호부(324)는 부 스트림으로부터 우측 눈 용 영상을 생성하며, 영상처리부(326)는 생성된 좌측 눈 용 영상 및 우측 눈 용 영상을 3D 표시하기 위한 처리를 실행한다.

수신한 TS에 부 스트림이 포함된다고 판별한 경우(스텝 S105에서의 「부 스트림」), 제어부(301)는 service-subset-ES-descriptor()를 참조하여 부 스트림만으로 재생 가능한가 여부를 판단한다(스텝 S120). 구체적으로는, 제어부(301)는 service-subset-ES-descriptor()의 dependency-flag를 참조함으로써 상기 판단이 가능하다.

단독으로 재생 가능하지 않다고 판단하는 경우에는(스텝 S120에서의 「No」), 제어부(301)는 service-subset-ES-descriptor()를 참조하여 주 스트림을 특정하고, 제 1 수신부(310)에 특정한 주 스트림을 포함하는 TS를 수신하도록 지시하며, 제 1 수신부(310)는 제어부(301)의 지시에 의거하여 주 스트림을 포함하는 TS를 수신한다(스텝 S125). 그 후 처리는 스텝 S115에 이행한다.

단독으로 재생 가능하다고 판단하는 경우에는(스텝 S120에서의 「Yes」) 재생처리부(303)는 부 스트림만의 재생을 실행한다(스텝 S130). 또한, 주 스트림을 취득하여 부 스트림과 동시에 이용하는가, 부 스트림 단독으로 이용하는가를 사전 설정, 혹은 사용자에게 문의한 결과에 의해 선택해도 좋다.

수신한 TS에 주 스트림 및 부 스트림의 어느 쪽도 포함되지 않는다고 판별한 경우(스텝 S105에서의 「그 외」), 재생처리부(303)는 수신한 TS로부터 영상 및 음성을 생성하여 출력부(304)에 출력하며, 즉 수신한 TS의 재생을 실행한다(스텝 S135).

3. 제 2 실시형태

상기 제 1 실시형태에서는 프로그램을 방송파에 의해 송신하는 것으로 하였으나, 여기에서는 IP(Internet　Protocol) 방송에 의한 송신의 경우에 대해 설명한다.

본 실시형태에서의 프로그램 전송시스템에서는 제 1 실시형태와 마찬가지로 주 스트림을 송신하는 송신장치(1100)와 부 스트림을 송신하는 송신장치(1200) 및 수신재생장치(1300)로 구성되어 있다.

또한, 제 1 실시형태와 마찬가지로 주 스트림은 좌측 눈 용 영상의 스트림, 부 스트림은 우측 눈 용 영상의 스트림이다.

이하, 각 장치의 구성에 대해서 제 1 실시형태와 다른 점을 중심으로 설명한다. 제 1 실시형태의 기능 구성과 같은 기능 구성에 대해서는 동일한 부호를 부여하고 설명을 생략한다.

3. 1　송신장치(1100)

송신장치(1100)는 도 15에 나타내는 것과 같이 좌측 눈 용 비디오 인코더(101), 오디오 인코더(102), 좌측 눈 용 비디오 스트림 저장부(103), 오디오 스트림 저장부(104), 파일 보유부(1105), 다중화부(1106) 및 송신부(1107)로 구성되어 있다.

(1) 파일 보유부(1105)

파일 보유부(1105)는 IP 상의 비디오 온 디맨드 서비스 등에서의 영상 스트림 등을 송신하기에 앞서 송신하는 재생제어 메타파일을 보유하고 있다. 재생제어 메타파일이란 「디지털 텔레비전 정보화 연구회 디지털 텔레비전 네트워크 기능사양 스트리밍 기능 시방서 코덱 편」에서 규정되는 것이다.

본 실시형태에서는 주 스트림의 정보를 기술한 재생제어 메타파일 중의 ERI(Entry　Resource　Information)에 있어서 당해 스트림과는 별도의 TS로 전송되는 부 스트림의 참조정보가 기술된 신규 요소(external-ES-link-info)가 추가되어 있다. 또한, 신규 요소(external-ES-link-info)에 대해서는 후술한다. 또, 재생제어 메타파일은 외부 장치에서 작성되어도 좋고, 송신장치(1100)에서 작성되어도 좋다.

이에 의해 IP상의 비디오 온 디맨드 서비스 등에서의 영상 스트림 시청시에, 주 스트림의 내용을 해석하기 전에 동시에 이용 가능한 부 스트림을 특정할 수 있다.

(2) 다중화부(1106)

다중화부(1106)는 좌측 눈 용 비디오 스트림 저장부(103)에 저장되어 있는 좌측 눈 용 비디오 스트림(주 스트림), 오디오 스트림 저장부(104)에 저장되어 있는 오디오 스트림 등을 다중화하여 MPEG2-TS형식의 TS를 생성해서 송신부(1107)를 개재하여 송신한다.

(3) 송신부(1107)

송신부(1107)는 파일 보유부(1105)에 보유되어 있는 재생제어 메타파일의 송신 및 다중화부(1106)에서 생성된 MPEG2-TS형식의 TS를 송신한다.

3. 2　external-ES-link-info에 대해

도 16에 external-ES-link-info의 항목을 나타낸다.

external-ES-link-info 요소는 하나 또는 복수의 부 스트림에 관한 정보를 나타내는 것이다.

location 요소는 부 스트림의 방송, 통신 또는 축적매체 상에서의 위치를 나타내는 것이다. 여기서, 부 스트림의 위치는 uri 속성 중에 URI 형식으로 기술된다. 이에 의해 수신 측의 장치는 부 스트림이 어떻게 액세스 가능한가를 알 수 있다. 예를 들어 부 스트림이 방송으로 전송되는 경우에는 예를 들어 「ARIB STD-B24」에서 규정되는 표기에 따라서, 값이 “arib：//0001. 0002. 0003. 0004/05”이면 부 스트림은 network-id=0x0001, transport-stream-id=0x0002, service-id=0x0003, event-id=0x0004, component-tag=0x05에 의해 방송(전송)되는 ES에 포함되어 있는 것을 나타낸다. 또 부 스트림이 방송 이외의 매체에 의해도 액세스 가능한 경우에는 제 1 실시형태에서 설명한 uri-char의 기술과 동일하다.

stream 요소는 부 스트림의 특성을 나타내는 것이다. type 속성에는 부 스트림의 stream-type이 「ISO/IEC 13818-1」에서 규정되는 값으로 기술된다. 예를 들어 H. 264 AVC인 경우에는 “1b”라고 기술된다. 이에 의해 부 스트림이 수신 측의 장치에서 이용 가능한가 여부를 부 스트림에 액세스하기 전에 알 수 있다. 또한 type 속성은 제 1 실시형태에서 설명한 stream-type과 마찬가지로 부 스트림의 용도별로 값을 기술해도 좋다.

sync 요소는 주 스트림과 부 스트림의 동기에 관한 정보를 나타내는 것이며, type 속성, pcr-pid 속성, pcr-offset 속성, main-sync-tag 속성 및 sub-sync-tag 속성으로 구성된다.

sync 요소에서의 type 속성은 주 스트림과 부 스트림의 동기수단의 유무 및 방법을 나타내는 것이다. 값이 “pcr-main”인 경우에는 주 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “pcr-sub”인 경우에는 부 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “independent”인 경우에는 독립한 동기트랙을 이용한 동기를 실시하는 것을 나타낸다. 값이 기술되지 않은 경우에는 수신 측의 장치에 대해 주 스트림과 부 스트림의 동기는 실시하지 않으며, 주 스트림의 복호·표시를 실시할 때는 주 스트림 내의 PCR에 따르고, 부 스트림의 복호·표시를 실시할 때는 부 스트림 내의 PCR에 따른다. 이에 의해 수신 측의 장치는 주 스트림과 부 스트림의 사이의 클록 동기의 유무 및 방법을 알 수 있다.

pcr-pid 속성은 type 속성이 “pcr-main” 또는 “pcr-sub”인 경우에 PCR-PID를 명시적으로 지정하는 것이다. 예를 들어 값이 “1 db”이면 PID가 0x01DB인 PCR을 참조한다. 값이 기술되지 않은 경우에는 당해 스트림의 PMT에서 기술된 PCR-PID를 사용한다. 이에 의해 수신 측의 장치는 동기 재생시에 고유의 PCR을 이용해야할 것인가 여부, 이용하는 경우에 그 PCR의 PID를 알 수 있다.

pcr-offset 속성에는 type 속성이 “pcr-main” 또는 “pcr-sub”로서, PCR 참조시에 오프셋 값을 가산하는 경우에 그 오프셋 값이 기술된다. “-200000000”에서부터“200000000” 사이의 하나의 값(16진 정수치)을 오프셋 값으로서 기술한다. 예를 들어 sync 요소의 type 속성이 “pcr-main”으로서, 주 스트림 내의 PCR을 이용하는 경우에 있어서 부 스트림의 복호·표시를 실시할 때 수신 측의 장치는 pcr-offset 속성의 값에 따라서 주 스트림 내의 PCR을 오프셋 한 값을 사용한다. sync 요소의 type 속성이 “pcr-sub”로서 부 스트림 내의 PCR을 이용하는 경우에는 주 스트림의 복호·표시를 실시할 때 pcr-offset 속성의 값에 따라서 부 스트림 내의 PCR을 오프셋 한 값을 사용한다. pcr-offset 속성을 지정함으로써 주 스트림과 부 스트림 사이에서 PCR의 개시치를 맞출 수가 없는 경우라도 동기 재생을 실현할 수 있다.

main-sync-tag 속성은 type 속성이 “independent”인 경우에 주 스트림의 동기트랙의 component-tag의 값을 나타내는 것이다.

sub-sync-tag 속성은 type 속성이 “independent”인 경우에 부 스트림의 동기트랙의 component-tag의 값을 나타내는 것이다.

main-sync-tag 속성과 sub-sync-tag 속성을 이용함으로써 PCR의 값에 의하지 않고 주 스트림과 부 스트림을 동기시키는 것이 가능해진다.

여기서, 도 17에 external-ES-link-info 요소의 기술 예를 나타낸다. 도 17에서는 부 스트림은 location 요소에 의해 “arib：//0001. 0002. 0003. 0004/05”로 나타내는 위치에 존재하고 있다는 것을 알 수 있다. 또, stream 요소에서의 type 속성이 “1b”이므로 부 스트림은 H. 264 AVC 형식이라는 것을 알 수 있다. 또, sync 요소에 의해 주 스트림과 부 스트림의 동기는 주 스트림의 PCR을 이용하는 것, PID가 0x01DB인 PCR인 것, 부 스트림에서는 주 스트림의 PCR에 오프셋 값 “-100”을 가산한다는 것을 알 수 있다.

3. 3　송신장치(1200)

송신장치(1200)는 도 18에 나타내는 것과 같이 우측 눈 용 비디오 인코더(201), 우측 눈 용 비디오 스트림 저장부(203), 파일 보유부(1205), 다중화부(1206) 및 송신부(1207)로 구성되어 있다.

(1) 파일 보유부(1205)

파일 보유부(1205)는 IP 상의 비디오 온 디맨드 서비스 등에서의 영상 스트림 등을 송신하기에 앞서 송신하는 재생제어 메타파일을 보유하고 있다. 재생제어 메타파일이란 「디지털 텔레비전 정보화 연구회 디지털 텔레비전 네트워크 기능사양 스트리밍 기능 시방서 코덱 편」에서 규정되는 것이다.

본 실시형태에서는 부 스트림의 정보를 기술한 재생제어 메타파일 중의 ERI에 있어서 당해 스트림과는 별도의 TS로 전송되는 주 스트림의 참조정보가 기술된 신규 요소(subset-service-ES-info)가 추가되어 있다. 또한, 신규 요소(subset-service-ES-info)에 대해서는 후술한다.

이에 의해 IP 상의 비디오 온 디맨드 서비스 등에서의 영상 스트림 시청시에 부 스트림의 내용을 해석하기 전에 동시에 이용 가능한 주 스트림을 특정할 수 있다.

(2) 다중화부(1206)

다중화부(1206)는 우측 눈 용 비디오 스트림 저장부(203)에 저장되어 있는 우측 눈 용 비디오 스트림(부 스트림) 등을 다중화하여 MPEG2-TS형식의 TS를 생성해서 송신부(1207)를 개재하여 송신한다.

(3) 송신부(1207)

송신부(1207)는 파일 보유부(1205)에 보유되어 있는 재생제어 메타파일을 송신 및 다중화부(1206)에서 생성된 MPEG2-TS형식의 TS를 송신한다.

3. 4　subset-service-ES-info에 대해

도 19에 subset-service-ES-info의 항목을 나타낸다.

subset-service-ES-info 요소는 부 스트림과 주 스트림과의 관계를 나타내는 것이다.

location 요소는 주 스트림의 방송, 통신 또는 축적매체 상에서의 위치를 나타내는 것이다. 부 스트림의 위치는 uri 속성 중에 URI 형식으로 기술된다. uri 속성의 기술 방법은 도 16에서의 location 요소의 uri 속성과 같다. 이에 의해 수신 측의 장치는 주 스트림이 어떻게 하여 액세스 가능한가를 알 수 있다.

stream 요소는 주 스트림의 특성을 나타내는 것이며, type 속성, dependency 속성 및 parent-lli 속성을 포함하고 있다.

stream 요소의 type 속성에는 주 스트림의 stream-type이 ISO/IEC 13818-1에서 규정되는 값으로 기술한다. 예를 들어 H. 264 AVC인 경우에는 “1b”가 기술된다. 이에 의해 주 스트림이 수신 측의 장치에서 이용 가능한가 여부 주 스트림에 액세스하기 전에 알 수 있다.

dependency 속성은 부 스트림이 주 스트림에 의존하지 않고 재생 가능한가 여부를 나타내는 것이다. 값이 “false”를 나타내는 경우에는 당해 부 스트림이 단독으로 재생 가능하다는 것을 나타낸다. “true”를 나타내는 경우에는 당해 부 스트림이 주 스트림과 동시에 이용하는 경우만 재생 가능하다는 것을 나타낸다. 이에 의해 주 스트림과 무관계하게 부 스트림이 수신 측의 장치로부터 액세스 된 경우에 송신 측의 의도에 따라서 부 스트림의 재생을 허가/억제할 수 있다.

parent-lli 속성에는 DRM에의 참조를 기술하는 LLI(License　Link　Information)에 관한 정보를 나타내는 것이다. 값이 “false”를 나타내는 경우에는 부 스트림의 재생제어 메타파일 중의 LLI를 이용하는 것을 나타낸다. 값이 “true”를 나타내는 경우에는 주 스트림의 재생제어 메타파일 중의 LLI를 이용하는 것을 나타낸다. 이에 의해 주 스트림과 부 스트림을 개별의 키로 암호화하는 것에 따른 번잡성이나 처리부하를 방지하는 동시에, 주 스트림과 무관계하게 부 스트림이 수신 측의 장치로부터 액세스 되었을 경우에 송신 측이 의도하지 않는 형태로 재생되는 것을 방지할 수 있다.

sync 요소는 도 16에 나타내는 sync 요소와 동일하므로 여기에서의 설명은 생략한다.

도 20에 subset-service-ES-info 요소의 기술 예를 나타낸다. 도 20에서는 주 스트림은 location 요소에 의해 “arib：//0001. 0002. 0003. 0004/05”에서 나타내는 위치에 존재하고 있다는 것을 알 수 있다. 또, stream 요소의 type 속성에 의해 주 스트림은 H. 264 AVC 형식인 것, dependency 속성에 의해 당해 부 스트림은 주 스트림과 동시에 이용하는 경우만 재생 가능한 것, parent-lli 속성에 의해 DRM에의 참조는 주 스트림의 재생제어 메타파일 중의 LLI를 이용한다는 것을 알 수 있다. 또, sync 요소에 의해 주 스트림과 부 스트림의 동기는 주 스트림의 PCR을 이용하는 것, PID가 0x01DB인 PCR인 것, 부 스트림에서는 주 스트림의 PCR에 오프셋 값 “-100”을 가산하는 것을 알 수 있다.

3. 5　수신재생장치(1300)

여기에서는 수신재생장치(1300)의 구성에 대해 설명한다.

수신재생장치(1300)는 도 21에 나타내는 것과 같이 제어부(1301), 수신처리부(1302), 재생처리부(303), 출력부(304) 및 송신부(1305)로 구성되어 있다.

(1) 제어부(1301)

제어부(1301)는 수신재생장치(1300)의 전체 제어를 실행하는 것이다.

구체적으로는, 제어부(1301)는 사용자(시청자)의 조작에 의해 송신이 요구된 콘텐츠를 식별하는 재생제어 메타파일 URL을 특정한다. 제어부(1301)는 특정한 재생제어 메타파일 URL을 포함하는 파일요구정보를 생성하고, 생성한 파일요구정보를 송신부(1305)를 개재하여 송신장치(1100) 또는 송신장치(1200)에 송신한다. 또한, 파일요구정보의 송신지는 사용자(시청자)의 조작에 의해 결정된다. 또, 재생제어 메타파일 URL의 특정은 예를 들어 다음과 같이 실시한다. 제어부(1301)는 송신장치(1100) 또는 송신장치(1200)로부터 콘텐츠(프로그램)의 송신을 요구할 때에, 먼저 콘텐츠의 송신 측에서 관리되고 있는 콘텐츠(스트림) 각각의 재생제어 메타파일 URL와 콘텐츠의 명칭을 송신장치로부터 수신하면 수신재생장치(1300)의 디스플레이(도시하지 않음)에 콘텐츠의 명칭을 일람 표시하도록 한다. 제어부(1301)는 일람표시된 콘텐츠의 명칭에서 하나의 명칭이 사용자의 조작에 의해 선택되면 선택된 콘텐츠의 명칭에 대응하는 재생제어 메타파일 URL을 특정한다.

또, 제어부(1301)는 수신처리부(1302)로부터 재생제어 메타파일을 수신한다. 제어부(1301)는 재생제어 메타파일을 해석하여 재생할 영상의 PID 및 음성의 PID 등을 특정하고, 특정한 각 PID를 재생처리부(303)에 통지한다. 또, 제어부(301)는 수신한 재생제어 메타파일에 상기의 신규 기술자의 유무를 판단함으로써 수신한 재생제어 메타파일에 대응하는 TS와 동시에 재생할 정보를 포함하는 다른 TS의 존재의 유무를 판단한다. 예를 들어 수신한 재생제어 메타파일에 신규 요소 “external-ES-link-info”의 존재의 유무에 의해 부 스트림의 존재의 유무를 판단한다. 제어부(1301)는 external-ES-link-info 요소가 존재한다고 판단하는 경우에는 부 스트림을 특정한다. 제어부(1301)는 주 스트림을 포함하는 TS에 대한 송신요구를 송신부(1305)를 개재하여 송신장치(1200)에 송신하는 동시에, 특정한 부 스트림을 포함하는 TS에 대한 송신요구를 송신부(1305)를 개재하여 송신장치(1200)에 송신한다. 또, 부 스트림을 포함하는 TS를 수신, 복조하도록 수신처리부(302)에 지시한다. 또, 제어부(1301)는 external-ES-link-info 요소로부터 동기에 관한 정보를 취득하고, 취득한 정보에 의거하여 동기방법을 특정하며 그 결과를 재생처리부(303)에 통지한다.

또한, 제어부(1301)는 수신한 재생제어 메타파일에 신규 요소 “subset-service-ES-info”가 기술되어 있는 경우에는 부 스트림만으로의 재생의 가부를 판단한다. 부 스트림만으로의 재생이 불가라고 판단한 경우에는 주 스트림의 특정, 동기정보의 취득을 실행한다.

(2) 송신부(1305)

송신부(1305)는 제어부(1301)로부터 파일요구정보를 수신하면 지정된 송신지(송신장치(1100) 또는 송신장치(1200))에 송신한다.

(3) 수신처리부(1302)

수신처리부(1302)는 도 21에 나타내는 것과 같이 제 1 수신부(1310)와 제 2 수신부(1311)를 가지고 있다.

제 1 수신부(1310)는 송신장치(1100)로부터 송신된 재생제어 메타파일을 수신한다. 또, 제 1 수신부(1310)는 주 스트림을 포함하는 TS를 수신 및 복조하고, 복조에 의해 얻은 MPEG2 형식의 트랜스포트 스트림을 재생처리부(303)에 출력한다.

제 2 수신부(1311)는 송신장치(1200)로부터 송신된 재생제어 메타파일을 수신한다. 또, 제 2 수신부(1311)는 부 스트림을 포함하는 TS를 수신 및 복조하여, 복조에 의해 얻은 MPEG2 형식의 트랜스포트 스트림을 재생처리부(303)에 출력한다.

3. 6　동작

여기에서는 각 장치의 동작에 대해 설명한다. 또한, 설명의 편의상 주 스트림은 좌측 눈 영상의 스트림, 부 스트림은 우측 눈 영상의 스트림으로 한다.

(1) 동작 개요

본 실시형태에 관한 프로그램 전송시스템의 동작 개요에 대해 도 22에 나타내는 흐름도를 이용해 설명한다.

수신재생장치(1300)의 제어부(1301)는 송신이 요구된 프로그램(콘텐츠)을 식별하는 재생제어 메타파일 URL을 포함하는 파일요구정보를 생성하고(스텝 S200), 생성한 파일요구정보를 사용자 조작에 의해 결정된 송신장치(송신장치(1100) 또는 송신장치(1200))에 송신한다(스텝 S205).

송신장치(예를 들어 송신장치(1100))는 수신재생장치(1300)로부터 수신한 재생제어 메타파일 URL에 대응하는 재생제어 메타파일을 특정하고(스텝 S210), 특정한 재생제어 메타파일을 수신재생장치(1300)에 송신한다(스텝 S215).

수신재생장치(1300)는 재생제어 메타파일을 수신하면 수신한 재생제어 메타파일의 내용을 해석하고, 해석 결과에 따른 재생 처리를 실행한다(스텝 S220).

(2) 재생 처리

여기에서는 도 22에 나타내는 스텝 S220에서 이루어지는 재생 처리에 대해 도 23에 나타내는 흐름도를 이용해 설명한다.

수신재생장치(1300)의 수신처리부(1302)는 사용자 조작에 의해 결정된 송신장치(예를 들어 송신장치(1100))로부터 재생제어 메타파일을 수신한다(스텝 S300).

제어부(1301)는 수신한 재생제어 메타파일을 이용하여 당해 재생제어 메타파일에 대응하는 TS가 주 스트림을 포함하는 것인지, 부 스트림을 포함하는 것인지, 혹은 양쪽 모두 포함하지 않는 것인지를 판별한다(스텝 S305). 구체적으로는, 제어부(301)는 수신한 재생제어 메타파일에 신규 요소 “external-ES-link-info”가 기재되어 있는 경우에는 대응하는 TS에는 주 스트림이 포함된다고 판별하고, 신규 요소 “subset-service-ES-info”가 기재되어 있는 경우에는 대응하는 TS에는 부 스트림이 포함된다고 판별한다. 또, 상기 신규 요소의 어느 쪽도 기재되지 않은 경우에는 통상의 TS라고 판별한다.

TS에 주 스트림이 포함된다고 판별하는 경우(스텝 S305에서의 「주 스트림」), 제어부(1301)는 external-ES-link-info의 기술 내용을 참조하여 부 스트림을 특정한다(스텝 S310). 구체적으로는, 제어부(301)는 location 요소의 ur속성을 참조하여 부 스트림의 취득방법을 특정한다.

제어부(1301)는 주 스트림 및 부 스트림 각각에 대한 송신요구를 송신장치(1100) 및 송신장치(1200)에 대해서 실시한다(스텝 S315).

재생처리부(303)는 제어부(1301)의 지시에 의거하여 수신한 주 스트림 및 부 스트림의 동시 재생을 실행한다(스텝 S320). 구체적으로는, 먼저 제어부(301)는 external-ES-link-info를 취득하고 있는 경우에는 sync 요소를 참조하여 동기방법을 특정한다. 동기제어부(322)는 특정된 동기방법에 의거하여, PCR-PID 속성을 참조해서 예를 들어 주 스트림에 포함되는 PCR을 추출하고, 추출한 PCR을 이용해 주 스트림용 시스템 클록 및 부 스트림용 시스템 클록을 생성해서, 주 스트림용 시스템 클록을 제 1 영상 복호부(323)에, 부 스트림용 시스템 클록을 제 2 영상 복호부(324)에 각각 순차 출력한다. 또, 제어부(1301)는 제 1 수신부(1310)에서 수신한 TS로부터 주 스트림 영상을 추출하도록 제 1 다중화 분리부(320)에 지시를, 제 2 수신부(1311)으로 수신한 TS로부터 부 스트림 영상을 추출하도록 제 2 다중화 분리부(321)에 지시를 한다. 제어부(1301)의 지시에 의해 재생처리부(303)의 제 1 영상 복호부(323)는 주 스트림으로부터 좌측 눈 용 영상을 생성하고, 제 2 영상 복호부(324)는 부 스트림으로부터 우측 눈 용 영상을 생성하며, 영상처리부(326)는 생성된 좌측 눈 용 영상 및 우측 눈 용 영상을 3D 표시하기 위한 처리를 실행한다.

수신한 TS에 부 스트림이 포함된다고 판별한 경우(스텝 S305에서의 「부 스트림」), 제어부(1301)는 subset-service-ES-info 요소를 참조하여 부 스트림만으로 재생 가능한가 여부를 판단한다(스텝 S325). 구체적으로는, 제어부(301)는 subset-service-ES-info의 stream 요소에서의 dependency 속성을 참조함으로써 상기 판단이 가능하다.

단독으로 재생 가능하지 않다고 판단하는 경우에는(스텝 S325에서의 「No」), 제어부(1301)는 subset-service-ES-info 요소를 참조하여 주 스트림을 특정한다(스텝 S330). 그 후 처리는 스텝 S315로 이행한다.

단독으로 재생 가능하다고 판단하는 경우에는(스텝 S325에서의 「Yes」), 제어부(1301)는 부 스트림에 대한 송신요구를 송신장치(1200)에 대해서 실시한다(스텝 S335). 제 2 수신부(1311)가 부 스트림을 수신하고, 재생처리부(303)가 부 스트림만의 재생을 실행한다(스텝 S340).

수신한 TS에 주 스트림 및 부 스트림의 어느 쪽도 포함되지 않는다고 판별한 경우(스텝 S305에서의 「그 외」), 제어부(1301)는 부 스트림에 대한 송신요구를 송신장치(사용자 조작에 의해 지정된 장치)에 대해서 실시한다(스텝 S345). 제 1 수신부(1310)가 스트림을 수신하고, 재생처리부(303)가 수신한 스트림만의 재생을 실행한다(스텝 S350).

4. 변형 예 1

상기 각 실시형태에서는 주 스트림과 부 스트림의 링크를 프로그램의 송신형태에 따라서 PMT에서 실시하는 경우 및 ERI에서 실시하는 경우에 대해 설명하였으나 이에 한정되지는 않는다.

본 변형 예에서는 주 스트림이 부 스트림을 특정할 때의 정보를 PMT가 아니라 「ARIB　STD-B10」에서 규정되는 SI(Service　Information)에 기재한다. 구체적으로는, SI에 포함되는 SDT(Service　Description　Table) 혹은 EIT(Event　Information　Table)의 기술자 루프에 당해 스트림과는 별도의 TS로 전송되는 부 스트림의 참조정보가 기술된, 동일 「ARIB　STD-B10」에서 규정된 hyperlink-descriptor()를 배치한다.

도 24에 hyperlink-descriptor()의 구조의 일례를 나타낸다.

descriptor-tag에는 다른 기술자와 본 기술자를 구별하기 위한 고유한 값이 기술된다.

descriptor-length에는 다음 필드에서부터 본 기술자 말미까지의 바이트 수가 기술된다.

hyper-linkage-type은 링크의 형태를 나타낸다. 여기에서는 신규로 synchronized-stream(0x0B)를 정의해서 사용한다.

link-destination-type은 링크처 종별을 나타낸다. 여기에서는 신규로 link-to-external-component(0x08)를 정의해서 사용한다.

selector-length는 후속의 실렉터 영역의 바이트 길이를 나타낸다.

selector-byte에는 링크처 종별마다 규정되는 형식에 의해 링크처가 기술된다. 여기에서는 link-to-external-component(0x08)에 대응하여 신규로 link-external-component-info()를 정의해서 사용한다. link-external-component-info()의 각 필드의 의미는 후술한다.

private-data는 장래 확장에 이용하는 것이다.

도 25에 link-external-component-info()의 구조의 일례를 나타낸다.

Reserved는 장래 확장을 위한 영역이며, 이진수의 “1”이 비트 수만큼 기술된다.

TS-location-type은 부 스트림이 전송되는 네트워크의 종별을 나타낸다. 값 “00”인 경우에는 부 스트림이 주 스트림과 같은 방송 네트워크로 전송되는 것을 나타낸다. 값 “01”인 경우에는 부 스트림이 후속의 transport-stream-location에서 나타나는 주 스트림과 다른 방송 네트워크로 전송되는 것을 나타낸다. 값 “10”인 경우에는 부 스트림이 후속의 uri-char에서 나타내는 URI에 의해 액세스 가능한, 방송 이외의 매체에 의해도 액세스 가능하다는 것을 나타낸다. 이에 의해 수신 측의 장치는 부 스트림이 어떻게 액세스 가능한가를 알 수 있다.

component-type-flag는 후속의 stream-content 및 component-type의 기술의 유무를 나타내는 플래그이다.

sync-reference-type은 도 4와 같다.

transport-stream-id는 참조하는 부 스트림이 전송되는 transport-stream-id를 나타낸다.

service-id는 참조하는 부 스트림을 포함하는 프로그램의 service-id를 나타낸다. 또한 service-id는 program-number와 같은 의미이다. event-id는 참조하는 부 스트림을 포함하는 이벤트의 event-id를 나타낸다. 참조하는 부 스트림을 포함하는 이벤트를 특정하지 않는 경우에는 event-id에 무효치(0xffff)를 저장한다.

component-tag는 참조하는 부 스트림의 component-tag를 나타낸다. transport-stream-id, service-id, component-tag를 기술함으로써 주 스트림의 이용시에 동시에 이용 가능한 부 스트림의 ES를 특정할 수 있다. 또한, event-id를 지정함으로써 주 스트림을 포함하는 이벤트와 다른 시간에 방송되는 부 스트림을 포함하는 이벤트를 지정할 수 있다. 이 경우, 수신 측의 장치는 어느 쪽이든 방송 시간이 빠른 쪽(혹은 쌍방)을 녹화 후, 축적한 주 스트림 혹은 부 스트림을 이용해 동기 재생을 실행한다.

original-network-id는 참조하는 부 스트림이 다른 방송 네트워크(예：지상파 방송에 대한 위성방송)로 전송되는 경우에 부 스트림이 전송되는 네트워크를 나타낼 수 있다. 이에 의해 부 스트림이 주 스트림과는 다른 방송 네트워크로 전송되는 경우에 있어서도 수신기는 그 전송 위치를 알 수 있다.

uri-length는 후속의 uri-char의 바이트 수를 나타낸다.

uri-chaR은 참조하는 부 스트림이 방송 이외의 매체에 의해도 액세스 가능한 경우에 부 스트림이 포함되는 TS에 액세스하기 위한 URI를 기술한다. URI의 기술 예는 제 1 실시형태와 동일하므로 여기에서의 설명은 생략한다.

stream-content는 지정되는 부 스트림의 종별(영상, 음성, 데이터)을 나타낸다.

component-type은 지정되는 부 스트림의 컴포넌트의 상세 종별을 나타낸다.　stream-content와 component-type에 의해 부 스트림이 수신기에서 이용 가능한가 여부를 부 스트림에 액세스하기 전에 알 수 있다.　또한 stream-content와 component-type은 도 4에서의 stream-type과 마찬가지로 부 스트림의 용도별로 값을 기술해도 좋다.

PCR-location-flag 이후의 기술은 도 4와 동일하므로 여기에서의 설명은 생략한다. 다만, 주 스트림의 동기트랙은 main-sync-PID 대신에 main-sync-tag를 이용해 기술한다. 또, 부 스트림의 동기트랙은 sub-sync-PID 대신에 sub-sync-tag를 이용해 기술한다.

이상이 신규 기술자 “hyperlink-descriptor()” 및 “link-external-component-info()”의 구조에 대한 설명이다. 이와 같은 기술자에 의해 사전에 방송 프로그램의 재생 예약·녹화 예약을 실행하는 경우에서도 수신 측의 장치(디지털 텔레비전)는 미리 이용 가능한 부 스트림을 특정하여 재생·기록하는 스트림의 선택을 할 수 있다.

5. 변형 예 2

여기에서는 주 스트림과 연동한, 「ARIB STD-B24」에 규정되는 데이터방송 중의 object 요소를 이용하여 당해 스트림과는 별도의 TS로 전송되는 부 스트림의 참조정보를 기술하는 경우에 대해 설명한다.

도 26에 본 변형 예에서 사용하는 확장속성의 일람 및 그들을 이용해 부 스트림을 지정하는 데이터방송 콘텐츠의 기술 예를 나타낸다.

도 26 (a)는 주 스트림을 나타내는 object 요소에 대한 부 스트림을 지정하기 위한 확장속성을 나타내는 것이다.

substream-type은 부 스트림의 mime-type을 나타낸다. 예를 들어 방송파로 전송되는 MPEG-4이면 “video/X-arib-mpeg4”를 지정한다. 이에 의해 부 스트림이 수신 측의 장치에서 이용 가능한가 여부를 부 스트림에 액세스하기 전에 알 수 있다. 또한, substream-type 속성은 도 4에서의 stream-type과 마찬가지로 부 스트림의 용도별로 값을 기술해도 좋다.

substream-data는 부 스트림의 URL을 나타낸다. uri 속성의 기술방법은 도 16에서의 location 요소의 uri 속성과 같다. 이에 의해 수신 측의 장치는 부 스트림의 위치를 알 수 있다.

substream-sync-type은 주 스트림과 부 스트림의 동기수단의 유무 및 방법을 나타낸다. 값이 “pcr-main”를 나타내는 것인 경우에는 주 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “pcr-sub”를 나타내는 것인 경우에는 부 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “independent”를 나타내는 것인 경우에는 독립한 동기트랙을 이용한 동기를 실시한다. 값이 기술되지 않은 경우에는 수신 측의 장치에서 주 스트림과 부 스트림의 동기는 실시하지 않고, 주 스트림의 복호·표시를 실시할 때는 주 스트림 내의 PCR에 따라서 부 스트림의 복호·표시를 실시할 때는 부 스트림 내의 PCR에 따른다. 이에 의해 수신 측의 장치는 주 스트림과 부 스트림의 사이의 클록 동기의 유무 및 방법을 알 수 있다.

substream-sync-pcr-pid는 substream-sync-type 속성이 “pcr-main”, 또는 “pcr-sub”인 경우에 PCR-PID를 명시적으로 지정하는 것이다. 예를 들어 값이 “1 db”이면 PID가 0x01DB인 PCR을 참조한다. 값이 기술되지 않은 경우에는 당해 스트림의 PMT에서 기술된 PCR-PID를 사용한다. 이에 의해 수신 측의 장치는 동기 재생시에 고유의 PCR을 이용해야 하는가 여부, 이용하는 경우에 그 PCR의 PID를 알 수 있다.

substream-sync-pcr-offset에는 substream-sync-type 속성이 “pcr-main”, 또는 “pcr-sub”이며, PCR 참조시에 오프셋 값을 가산하는 경우에 그 오프셋 값이 기술된다. 오프셋 값으로 “-200000000”에서부터“200000000”의 사이의 하나의 값(16진 정수치)이 기술된다. 예를 들어 substream-sync-type가 “pcr-main”이며, 주 스트림 내의 PCR을 이용하는 경우에는 부 스트림의 복호·표시를 실시할 때 substream-sync-pcr-offset의 값에 따라서 주 스트림 내의 PCR을 오프셋 한 값을 사용한다. substream-sync-type이 “pcr-sub”이며, 부 스트림 내의 PCR을 이용하는 경우에는 주 스트림의 복호·표시를 실시할 때 substream-sync-pcr-offset의 값에 따라서 부 스트림 내의 PCR을 오프셋 한 값을 사용한다. substream-sync-pcr-offset을 지정함으로써 주 스트림과 부 스트림 사이에 PCR의 개시치를 맞출 수가 없는 경우에 있어서도 동기 재생을 실현할 수 있다.

substream-sync-main-tag에는 substream-sync-type 속성이 “independent”인 경우에 주 스트림의 동기트랙을 나타내는 component-tag가 기술된다.

substream-sync-sub-tag에는 substream-sync-type 속성이 “independent”인 경우에 부 스트림의 동기트랙을 나타내는 component-tag가 기술된다. substream-sync-main-tag 속성과 substream-sync-sub-tag 속성을 이용함으로써 PCR의 값에 의하지 않고 주 스트림과 부 스트림을 동기시키는 것이 가능해진다.

도 26 (b)는 상기 확장속성을 이용해 부 스트림을 지정하는 데이터방송 콘텐츠의 기술 예를 나타내는 것이다.

substream-type의 기술 내용에 의해 부 스트림은 MPEG-4 형식에 의해 방송파로 전송된다는 것을 알 수 있다.

substream-data의 기술 내용에 의해 부 스트림은 “arib：//0001. 0002. 0003. 0004/05”에서 나타내는 위치에 존재하고 있다는 것을 알 수 있다.

substream-sync-type 및 substream-sync-pcr-pid의 각각의 기술에 의해 주 스트림과 부 스트림의 동기 시에는 주 스트림을 포함하는 프로그램의 PCR을 이용하며, 이용하는 PCR은 PID가 0x01DB인 것을 참조함을 알 수 있다.

또, substream-sync-pcr-offset의 기재에 의해 주 스트림과 부 스트림의 동기 시에는 오프셋 값 “-100”을 이용한다는 것을 알 수 있다.

이상이 「ARIB STD-B24」에 규정되는 데이터방송 중의 object 요소를 이용하여 부 스트림의 참조정보를 기술하는 경우에 대한 설명이다. 이에 의해 데이터방송 콘텐츠를 이용하여 주 스트림의 영상 음성 서비스 시청시에 동시에 이용 가능한 부 스트림을 특정할 수 있다.

6. 변형 예 3

여기에서는 서버형 방송에 있어서 주 스트림을 포함하는 콘텐츠의 정보를 기술하는, 「ETSI TS 102 822 Part3-1」에서 규정되는 메타데이터 중의 ProgramInformation 요소 중에 당해 스트림과는 별도의 TS로 전송되는 부 스트림의 참조정보를 기술하는 경우에 대해 설명한다. 구체적으로는, ProgramInformation 요소에 포함되는 AVAttributes 요소에 기술되는 VideoAttributes 요소 중에 신규 요소 “ExternalES”를 정의해 기술한다.

도 27 및 도 28에 있어서 VideoAttributes 요소 중에 ExternalES 요소를 정의하는 구조(schema)의 일례를 나타낸다.

도 27에서의 블록 B500의 기술은 LocationType형이라고 불리며, 부 스트림의 방송, 통신 또는 축적매체 상에서의 위치가 기술된다. 부 스트림의 위치는 LocationType형에 포함되는 uri 속성 중에 URI 형식으로 기술한다. uri 속성의 기술 방법은 도 16에서의 location 요소의 uri 속성과 동일하므로 여기에서의 설명은 생략한다. 이에 의해 수신 측의 장치는 부 스트림이 어떻게 액세스 가능한가를 알 수 있다.

블록 B501의 기술은 StreamType형이라고 불리며, 부 스트림의 특성이 기술된다. StreamType형에서의 type 속성에서는 부 스트림의 속성을 문자 열로 기술하며, 구체적으로는, 「ISO/IEC　13818-1」에서 규정되는 stream-type의 값이 기술된다. 예를 들어 H. 264 AVC인 경우에는 “1b”가 기술된다. 이에 의해 부 스트림이 수신 측의 장치에서 이용 가능한가 여부를 부 스트림에 액세스하기 전에 알 수 있다. 또한 type 속성은 도 4에서의 stream-type과 마찬가지로 부 스트림의 용도별로 값을 기술해도 좋다.

블록 B502의 기술은 SyncType형이라고 불리며, 주 스트림과 부 스트림의 동기에 관한 정보가 기술된다.

SyncType형에서의 type 속성은 주 스트림과 부 스트림의 동기수단의 유무 및 방법을 나타낸다. 값이 “pcr-main”을 나타내는 것인 경우에는 주 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “pcr-sub”를 나타내는 것인 경우에는 부 스트림을 포함하는 프로그램의 PCR을 이용하는 것을 나타낸다. 값이 “independent”를 나타내는 것인 경우에는 독립한 동기트랙을 이용한 동기를 실시하는 것을 나타낸다. 값이 기술되지 않은 경우에는 수신기에서 주 스트림과 부 스트림의 동기는 실시하지 않으며, 주 스트림의 복호·표시를 실시할 때는 주 스트림 내의 PCR에 따르고, 부 스트림의 복호·표시를 실시할 때는 부 스트림 내의 PCR에 따르는 것을 나타낸다. 이에 의해 수신 측의 장치는 주 스트림과 부 스트림 사이의 클록 동기의 유무 및 방법을 알 수 있다.

pcr-pid 속성은 type 속성이 “pcr-main” 또는 “pcr-sub”를 나타내는 경우에 PCR-PID를 명시적으로 지정하는 것이다. 예를 들어 값이 “1 db”이면 PID가 0x01DB인 PCR을 참조한다. 값이 기술되지 않은 경우에는 당해 스트림의 PMT에서 기술된 PCR-PID를 사용한다. 이에 의해 수신 측의 장치는 동기 재생시에 고유의 PCR을 이용해야 하는가 여부, 이용하는 경우에는 그 PCR의 PID를 알 수 있다.

pcr-offset 속성에는 type 속성이 “pcr-main” 또는 “pcr-sub”이며, PCR 참조시에 오프셋 값을 가산하는 경우에 그 오프셋 값이 기술된다. 오프셋 값으로 “-200000000”에서부터“200000000” 사이의 1의 값(16진 정수치)이 기술된다.

sync 속성이 “pcr-main”이며 주 스트림 내의 PCR을 이용하는 경우에는 부 스트림의 복호·표시를 실시할 때 수신 측의 장치는 offset 속성의 값에 따라서 주 스트림 내의 PCR을 오프셋 한 값을 사용한다. sync 속성이 “pcr-sub”이며 부 스트림 내의 PCR을 이용하는 경우에는 주 스트림의 복호·표시를 실시할 때 수신 측의 장치는 pcr-offset 속성의 값에 따라서 부 스트림 내의 PCR을 오프셋 한 값을 사용한다.

pcr-offset 속성을 지정함으로써 주 스트림과 부 스트림 사이에 PCR의 개시치를 맞출 수가 없는 경우에서도 동기 재생을 실현할 수 있다.

main-sync-tag 속성은 type 속성이 “independent”인 경우에 주 스트림의 동기트랙의 component-tag의 값을 나타낸다.

sub-sync-tag 속성은 type 속성이 “independent”인 경우에 부 스트림의 동기트랙의 component-tag의 값을 나타낸다. main-sync-tag 속성과 sub-sync-tag 속성을 이용함으로써 PCR의 값에 의하지 않고 주 스트림과 부 스트림을 동기시키는 것이 가능해진다.

블록 B503의 기술은 ExternalEsType형이라고 불리며, 부 스트림에 관한 정보를 나타내고, LocationType형의 Location 요소, StreamType형의 Stream 요소, SyncType형의 Sync 요소를 포함한다. 이들 요소는 상기에서 설명하고 있으므로 여기에서의 설명은 생략한다.

블록 B504는 VideoAttributesType형이라고 불리며, 신규 요소인 ExternalEsType형의 ExternalEs 요소가 추가된다.

상기에서 나타내는 신규 요소 “ExternalEs”를 이용해 부 스트림을 지정하는 ERI의 기술 예를 도 29에 나타낸다.

도 29에서 <ExternalEs>에서부터 </ExternalEs>까지의 기술이 신규 요소의 내용이다.

Location 요소의 기술에 의해 부 스트림은 “arib：//0001. 0002. 0003. 0004/05”에서 나타내는 위치에 존재하고 있다는 것을 알 수 있다.

Stream 요소의 기술에 의해 스트림의 타입이 H. 264 AVC인 것을 알 수 있다.

Sync 요소에서의 type 속성, pcr-pid 속성 및 pcr-offset 속성의 기술에 의해 주 스트림과 부 스트림의 동기 시에는 주 스트림을 포함하는 프로그램의 PCR을 이용하며, 이용하는 PCR은 PID가 0x01DB인 것을 참조하고, 오프셋 값 “-100”을 이용한다는 것을 알 수 있다.

이상이 VideoAttributes 요소 중에 ExternalES 요소를 정의하여 부 스트림의 참조정보를 기술하는 경우의 설명이다. 이에 의해 방송, 통신을 걸쳐서 공통인 콘텐츠 정보의 기술을 가능하게 하는 메타데이터를 이용하여 이용 가능한 부 스트림을 특정할 수 있다.

7. 그 외의 변형 예

또, 상기 각 실시형태 및 변형 예에 한정하지 않으며, 예를 들어 이하와 같은 변형 예를 생각할 수 있다.

(1) 상기 제 1 실시형태에서 신규 기술자 “external-ES-link-descriptor()”를 PMT의 세컨드 루프(D102)에 기술하는 것으로 하였으나 이에 한정되지는 않는다.

부 스트림이 특정의 주 스트림 ES에 대응하는 것이 아니며, 프로그램에 대해서 추가되는 경우(례：부 스트림이 추가 언어의 자막 ES인 경우 등)에는 external-ES-link-descriptor()를 PMT의 퍼스트 루프(D100)에 기재해도 좋다.

이에 의해 프로그램에 대응하는 부 스트림을 용이하게 기술할 수 있다.

또, “external-ES-link-descriptor()”를 신규로 정의하는 것이 아니라, 기존의 1개 또는 복수의 기술자를 확장해서 “external-ES-link-descriptor()”에 기재된 각 정보를 추가하는 것으로 해도 좋고, 사용자 확장 데이터로서 주 스트림 ES 및/또는 부 스트림 ES 내에 추가해도 좋다.

(2) 상기 제 2의 실시형태에서, 「디지털 텔레비전 정보화 연구회 디지털 텔레비전 네트워크 기능 사양 스트리밍 기능 시방서 코덱 편」에서 규정되는 재생제어 메타파일을 예로 설명하였으나, 신규 기술자 “external-ES-link-info()”의 추가는 해당 파일에 한정되지 않는다.

「Open IPTV Forum Specification Volume 5 - Declarative Application Environment」에서 규정되는 Content Access Descriptor나 「ISO/IEC 14496-12」(ISO　Base　Media　File　Format)에서의 헤더 등 영상 음성 스트림의 속성을 기술하는 메타 정보에 추가해도 좋다.

또, 신규 기술자 “subset-ervice-ES- info”에 대해서도 마찬가지로 「디지털 텔레비전 정보화 연구회 디지털 텔레비전 네트워크 기능 사양 스트리밍 기능 시방서 코덱 편」에서 규정되는 재생제어 메타파일에 추가하는 것만이 아니라,　「Open IPTV Forum Specification Volume 5 - Declarative Application Environment」에서 규정되는 Content Access Descriptor나 「ISO/IEC 14496-12」(ISO　Base　Media　File　Format)에서의 헤더 등 영상 음성 스트림의 속성을 기술하는 메타 정보에 추가해도 좋다.

또, 상기 각 신규 기술자는 ERI에 기술되는 것으로 하였으나 이에 한정되지는 않는다. 상기 각 신규 기술자는 재생제어파일에 포함되어 있으면 좋으며, 반드시 ERI에 기재되어 있을 필요는 없다.

(3) 상기 변형 예 1에서, 「ARIB STD-B10」에서 규정되는 SI정보를 예로 설명하였으나, 그 외에 「ETSI EN 300 468」(DVB-SI), 「ATSC A65」(ATSC　Program　and　System　Information　Protocol) 등 MPEG2 Private Section 형식을 이용하는 정보형식을 이용해도 좋다.

또는 부 스트림의 정보는 hyperlink-descriptor()에 기술하는 것이 아니라, 신규에 기술자를 정의하여 동등의 정보를 기술해도 좋다.

또, 상기 변형 예 2에서, 「ARIB STD-B24」에서 규정되는 데이터방송을 예로 설명하였으나, 그 외에 「ETSI ES 202 184」(MHEG-5 Broadcast Profile), 「ETSI TS 101 812」(Multimedia Home Platform), 「CEA-2014」(Web4CE), 「HTML-5」 등 문서 중으로부터 영상 오브젝트에 액세스할 수 있는 멀티미디어 방식을 이용해도 좋다.

(4) 상기 제 1 실시형태에서, 신규 기술자 “service-subset-ES-descriptor()”를 PMT의 세컨드 루프에 기술하는 것으로 하였으나 이에 한정되지는 않는다.

부 스트림을 포함하는 프로그램을 구성하는 ES가 당해 부 스트림뿐인 경우에는 service-subset-ES- descriptor()를 PMT의 퍼스트 루프에 기재해도 좋다. 또, service-subset-ES- descriptor()를 신규로 정의하는 것이 아니라, 기존의 1개 또는 복수의 기술자를 확장하여 service-subset-ES- descriptor()에 기재된 각 정보를 추가해도 좋다.

(5) 상기 실시형태 등에서 설명한 external-ES-link-descriptor(), service-subset-ES-descriptor(), hyper-link-descriptor() 및 ExternalES 요소는 1개 기재된 경우에 대해 설명하였으나 이에 한정되지는 않는다.

이들 정보는 복수 개 배치되어도 좋다.

(6) 상기 각 실시형태에서는 주 스트림을 좌측 눈 영상의 스트림, 부 스트림을 우측 눈 영상의 스트림로서 설명하였으나, 주 스트림과 부 스트림의 조합은 이에 한정되지는 않는다.

stream-type을 이용해 부 스트림의 용도를 특정한 것과 같이 주 스트림과 부 스트림의 조합은 3D 영상의 제어(stream-type의 값 “0x80”, “0x81”, “0x85”에서부터“0x87”), 주 스트림의 영상의 고상세화(stream-type의 값이 “0x82”에서부터“0x84”), 자유 시점의 전환(stream-type의 값이 “0x88”에서부터“0x8A”)과 같이 다종 다양하다. 예를 들어 부 스트림이 주 스트림의 영상을 고정세화하기 위한 차분 성분인 경우에는 영상처리부는 제 2 영상 복호부에서 생성된 차분 성분을 제 1 영상 복호부에서 생성된 영상에 부가한다.

또, 새로운 값을 정의하여 부 스트림을 자막 데이터나 음성데이터로 해도 좋다. 이 경우, 수신재생장치는 자막 데이터를 복호하는 자막 데이터 복호부 및 부 스트림의 음성데이터를 복호하는 음성 복호부를 마련한다. 부 스트림이 자막 데이터인 경우에는 영상처리부는 제 1 영상 복호부에서 생성된 영상에 자막 데이터 복호부에서 생성된 자막 데이터를 중첩한다. 또, 부 스트림이 음성데이터인 경우에는 수신재생장치는 부 스트림에 포함되는 음성데이터를 복호하여 출력한다. 또한, 주 스트림에도 음성데이터가 포함되는 경우에는 사용자 조작에 의해 쌍방의 음성을 출력해도 좋고, 일방의 음성만을 출력해도 좋다.

(7) 상기 각 실시형태에서, 주 스트림의 송신형태와 부 스트림의 송신형태는 동일한 것으로 하였으나 이에 한정되지는 않는다.

주 스트림의 송신형태와 부 스트림의 송신형태는 서로 달라도 좋다. 예를 들어 주 스트림은 PMT 등의 SI/PSI를 포함하는 트랜스포트 스트림에 포함되는 것으로 하고 부 스트림은 IP방송으로 송신되는 트랜스포트 스트림으로 해도 좋으며, 그 역이라도 좋다.

(8) 상기 실시형태에서, PMT, 재생제어파일의 생성, 특히 신규 기술자 및 신규 요소인 “external-ES-descriptor()”, “service-subset-ES-descriptor()”, “external-ES-link-info”, “subset-service-ES-info”, “hyper-link-descriptor()”, link-external-component-info(), object 요소 및 “ExternalES 요소”의 생성은 예를 들어 송신장치(100) 또는 외부의 장치에서 파라미터 변수로서 기술자 등의 기술 요소를 파라미터 변수로서 미리 기억해 두고, 이들 파라미터 변수에 대한 정보를 사용자로부터 접수하는 것으로 해도 좋다. 또, 상기 생성방법은 일례이며 다른 방법이라도 좋다.

(9) 상기 각 실시형태에서는 수신재생장치의 일례로 디지털 텔레비전인 것으로 하였으나 이에 한정되지는 않는다. 수신재생장치를 DVD 리코더, BD(Blu-ray　Disc) 리코더나 셋톱 박스에 적용해도 좋다.

(10) 상기 각 장치는 구체적으로는 마이크로 프로세서, ROM, RAM, 하드디스크 유닛, 디스플레이 유닛, 키보드, 마우스 등으로 구성되는 컴퓨터시스템이다. 상기 RAM 또는 하드디스크 유닛에는 컴퓨터 프로그램이 기억되어 있다. 상기 마이크로 프로세서가 상기 컴퓨터 프로그램에 따라서 동작함으로써 각 장치는 그 기능을 달성한다. 여기서 컴퓨터 프로그램은 소정의 기능을 달성하기 위해 컴퓨터에 대한 지령을 나타내는 명령 코드가 복수 개 조합시켜서 구성된 것이다.

(11) 상기 각 장치를 구성하는 구성요소의 일부 또는 전부는 1개의 집적회로로 구성되어 있는 것으로 해도 좋다.

(12) 상기 각 장치를 구성하는 구성요소의 일부 또는 전부는 각 장치에 탈착 가능한 IC카드 또는 단일체의 모듈로 구성되어 있는 것으로 해도 좋다. 상기 IC카드 또는 상기 모듈은 마이크로 프로세서, ROM, RAM 등으로 구성되는 컴퓨터시스템이다. 상기 IC카드 또는 상기 모듈은 상기 초 다기능 LSI를 포함하는 것으로 해도 좋다. 마이크로 프로세서가 컴퓨터 프로그램에 따라서 동작함으로써 상기 IC카드 또는 상기 모듈은 그 기능을 달성한다.

(13) 상기 실시형태 및 변형 예에서 설명한 수법의 수순을 기술한 프로그램을 메모리에 기억해 두고, CPU(Central　Processing　Unit) 등이 메모리로부터 프로그램을 판독하여, 판독한 프로그램을 실행함으로써 상기 수법이 실현되도록 해도 좋다.

또, 해당 수법의 수순을 기술한 프로그램을 기록매체에 저장하여 반포하도록 해도 좋다. 또한, 상기 프로그램을 기억하는 매체로서는 예를 들어 IC카드, 하드디스크, 광디스크, flexible disk, ROM, 플래시메모리 등이 있다.

(14) 상기 실시형태 및 상기 변형 예를 각각 조합하는 것으로 해도 좋다.

8. 보충

이상 설명한 것과 같이, 주 스트림과는 다른 전송로(TS) 상의 부 스트림을 특정하기 위한 정보를 주 스트림에의 액세스 정보에 추가하여 기재함으로써 수신재생장치에서 부 스트림의 존재를 인식하고 취득하여 주 스트림의 동기재생 및 녹화를 실현할 수 있다.

이하, 본 발명의 일 실시형태로서의 송신장치, 수신재생장치의 구성 및 그 변형 예와 효과에 대해서 설명한다.

(1) 본 발명의 한 형태는, 송신장치로, 1대의 수신재생장치에서 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응 되며, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하는 보유수단과, 상기 스트림 특정정보를 송신하는 송신수단을 구비하는 것을 특징으로 한다.

이 구성에 의하면 송신장치는 스트림 특정정보를 송신하므로, 수신 측에서는 당해 스트림 특정정보를 이용함으로써 각종 정보가 개별적으로 전송용 스트림에 의해 송신되어도 동시에 재생할 전송용 스트림을 특정할 수 있다. 또한, 스트림 특정정보는 상기 실시형태 및 변형 예에서 기재한 신규 기술자 및 신규 요소인 “external-ES-descriptor()”, “service-subset-ES-descriptor()”, “external-ES-link-info”, “subset-service-ES-info”, “hyper-link-descriptor()”, link-external-component-info(), object 요소 및 “ExternalES 요소”에 상당한다.

(2) 여기서, 상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, PMT(Program　Map　Table)가 대응되어 있고, 상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 상기 PMT를 다중화해 송신하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 상기 스트림 특정정보가 기재된 PMT와 상기 다른 전송용 스트림을 다중화해 송신하므로, 수신 측은 PMT를 이용하여 당해 다른 전송용 스트림과 동시에 재생할 정보를 포함하는 상기 전송용 스트림을 당해 다른 전송용 스트림을 복호하기 전에 특정할 수 있다.

(3) 여기서, 상기 스트림 특정정보는 상기 복수의 전송용 스트림을 동시에 재생할 때에 동기를 취하기 위한 동기정보를 포함하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 동기정보를 포함해 상기 스트림 특정정보를 송신하므로, 수신 측은 상기 복수의 전송용 스트림을 동시에 재생할 때는 동기정보를 이용함으로써 각 전송용 스트림에 포함되는 정보 각각에 대해 동기를 취하면서 재생할 수 있다.

(4) 여기서, 상기 동기정보는 재생의 동기의 기준으로서 상기 복수의 전송용 스트림 각각에 포함되는 PCR(Program-Clock-Reference) 중 어느 하나를 지정하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 복수의 전송용 스트림 각각에 포함되는 PCR 중 1개의 PCR을 이용하는 것을 나타내는 상기 동기정보를 송신하므로, 수신 측은 지정된 PCR, 즉 당해 PCR을 포함하는 전송용 스트림에 포함되는 정보의 재생 타이밍을 기준으로 하여 다른 전송용 스트림을 재생할 수 있다.

(5) 여기서, 상기 동기정보는 상기 복수의 전송용 스트림 각각이 동일한 타임스탬프를 사용하는 것을 나타내는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 타임스탬프를 이용하는 것을 나타내는 상기 동기정보를 송신하므로, 수신 측은 타임스탬프를 기준으로 하여 상기 복수의 전송용 스트림을 재생할 수 있다.

(6) 여기서, 상기 PMT에는 상기 하나의 전송용 스트림이 단독으로 재생 가능한가 여부를 나타내는 재생정보가 포함되는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 재생정보를 송신하므로, 수신 측은 당해 재생정보가 단독으로 재생 가능하다는 것을 나타내고 있는 경우에는 다른 전송용 스트림의 정보를 동시 재생하는 일 없이 당해 다른 전송용 스트림의 정보의 재생을 실행할 수 있다.

(7) 여기서, 상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, SI/PSI(Service　Information/Program　Specific　Information)가 대응되어 있고, 상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 SI/PSI를 다중화해 송신하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 상기 스트림 특정정보가 기재된 SI/PSI와 상기 다른 전송용 스트림을 다중화하여 송신하므로, 수신 측은 SI/PSI를 이용해서 상기 전송용 스트림을 수신하기 전에 특정할 수 있다.

(8) 여기서, 상기 하나의 전송용 스트림은 IP(Internet　Protocol) 네트워크로 배포되는 스트림이며, 재생제어 메타파일이 대응되어 있고, 상기 송신수단은 상기 스트림 특정정보를 포함하는 상기 재생제어 메타파일을 상기 하나의 전송용 스트림과는 별도로 송신하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 상기 스트림 특정정보가 기재된 재생제어 메타파일을 송신하므로, 수신 측은 재생제어 메타파일을 이용해서 상기 전송용 스트림을 수신하기 전에 상기 다른 전송용 스트림을 특정할 수 있다.

(9) 여기서, 상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, 데이터방송 콘텐츠 기술자가 대응되어 있고, 상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 상기 데이터방송 콘텐츠 기술자를 다중화하여 송신하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 상기 스트림 특정정보가 기재된 데이터방송 콘텐츠 기술자와 상기 다른 전송용 스트림을 다중화해 송신하므로, 수신 측은 당해 다른 전송용 스트림의 재생을 실행할 때에 데이터방송 콘텐츠를 이용해서 상기 전송용 스트림을 특정할 수 있다.

(10) 여기서, 상기 하나의 전송용 스트림은 서버형 방송에 있어서 송신되는 것이며, 메타데이터가 대응되어 있고, 상기 송신수단은 상기 스트림 특정정보가 프로그램 요소정보에 기재된 상기 메타데이터를 송신하는 것으로 해도 좋다.

이 구성에 의하면 송신장치는 상기 스트림 특정정보가 기재된 프로그램 요소정보를 포함하는 메타데이터를 송신하므로, 수신 측은 메타데이터를 이용하여 상기 전송용 스트림을 특정할 수 있다.

(11) 또, 본 발명의 한 형태는, 프로그램을 수신하여 재생하는 수신재생장치로, 프로그램을 구성하는 제 1 전송용 스트림과 상기 제 1 전송용 스트림과 동시에 재생할 제 2 전송용 스트림이 송신되고 있는가 여부를 나타내는 송신정보를 수신하는 제 1 수신수단과, 상기 송신정보를 이용해 상기 제 2 전송용 스트림이 송신되고 있는가 여부를 판단하는 판단수단과, 상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에 상기 제 2 전송용 스트림을 수신하는 제 2 수신수단과, 상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에는 상기 제 1 전송용 스트림 및 상기 제 2 전송용 스트림의 쌍방을 재생하고, 상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있지 않다고 판단되는 경우에는 상기 제 1 전송용 스트림을 재생하는 재생수단을 구비하는 것을 특징으로 한다.

이 구성에 의하면 수신재생장치는 송신정보를 이용g함으로써 제 1 전송용 스트림과 동시에 재생할 제 2 전송용 스트림의 유무를 판단할 수 있다. 이에 의해 수신재생장치는 제 2 전송용 스트림이 존재한다고 판단하는 경우에는 2개의 스트림( 제 1 전송용 스트림과 제 2 전송용 스트림) 쌍방을 재생하므로 시청자는 다종다양의 서비스를 받을 수 있다. 여기서, 송신정보는 상기 실시형태 및 변형 예에서 설명한 PMT, EIT, 재생제어파일에 상당한다.

(12) 여기서, 상기 제 1 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, 상기 제 1 수신수단은 상기 제 1 전송용 스트림과 다중화된 PMT(Program　Map　Table)에 기술된 상기 송신정보를 수신하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 PMT를 이용하여 제 1 전송용 스트림 복호하기 전에 제 2 전송용 스트림의 유무를 특정할 수 있다.

(13) 여기서, 상기 송신정보는 상기 제 1 전송용 스트림과 상기 제 2 전송용 스트림을 동시에 재생할 때에 동기를 취하기 위한 동기정보를 더 포함하고 있고, 상기 재생수단은 상기 동기정보에 의거하여 상기 제 1 전송용 스트림의 정보와 상기 제 2 스트림의 정보에 대해 동기 재생을 실행하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 제 1 전송용 스트림 및 제 2 전송용 스트림을 동시에 재생할 때는 동기정보를 이용함으로써 각 전송용 스트림에 포함되는 정보 각각에 대해 동기를 취하면서 재생할 수 있다.

(14) 여기서, 상기 재생수단은 상기 제 1 전송용 스트림의 PCR(Program-Clock-Reference) 및 상기 제 2 전송용 스트림의 PCR 중 상기 동기정보가 나타내는 PCR을 이용해 상기 동기 재생을 실행하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 지정된 PCR에 따른 전송용 스트림에 포함되는 정보의 재생 타이밍을 기준으로 하여 다른 전송용 스트림을 재생할 수 있다.

(15) 여기서, 상기 재생수단은 상기 동기정보가 나타내는 타임스탬프를 이용하여 상기 동기 재생을 실행하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 타임스탬프를 기준으로 하여 제 1 전송용 스트림 및 제 2 전송용 스트림을 동시 재생할 수 있다.

(16) 여기서, 상기 제 1 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, 상기 제 1 수신수단은 상기 제 1 전송용 트림과 다중화된 SI/PSI(Service　Information/Program　Specific　Information)에 기술된 상기 송신정보를 수신하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 SI/PSI를 이용하여 제 2 전송용 스트림을 수신하기 전에 특정할 수 있다.

(17) 여기서, 상기 제 1 전송용 스트림은 IP(Internet　Protocol) 네트워크로 배포되는 스트림이며, 상기 제 1 수신수단은 상기 제 1 전송용 스트림의 수신에 앞서 상기 제 1 전송용 스트림에 대응하는 재생제어 메타파일에 포함되는 상기 송신정보를 수신하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 재생제어 메타파일을 이용하여 제 1 전송용 스트림을 수신하기 전에 제 2 전송용 스트림을 특정할 수 있다.

(18) 여기서, 상기 복수의 전송용 스트림 중 적어도 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, 상기 제 1 수신수단은 상기 제 1 전송용 트림과 다중화된 데이터방송 콘텐츠 기술자에 기술된 상기 송신정보를 수신하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 데이터방송 콘텐츠를 이용하여 제 1 전송용 스트림을 재생할 때에 제 2 전송용 스트림을 특정할 수 있다.

(19) 여기서, 상기 제 1 전송용 스트림은 서버형 방송에서 송신되는 것이며, 상기 제 1 수신수단은 상기 제 1 전송용 스트림에 대응하는 메타데이터에 포함되는 프로그램 요소정보에 기재된 상기 송신정보를 수신하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 메타데이터를 이용하여 제 2 전송용 스트림을 특정할 수 있다.

(20) 여기서, 상기 제 2 수신수단에 있어서 상기 판단에 앞서 상기 제 2 전송용 스트림과 당해 제 2 전송용 스트림이 단독으로 재생 가능한가 여부를 나타내는 재생정보를 수신하면 상기 판단수단은 상기 재생정보에 의거하여 당해 제 2 전송용 스트림이 단독으로 재생 가능한가 여부를 더 판단하고, 상기 재생수단은 상기 판단수단에서 상기 제 2 전송용 스트림이 단독으로 재생 가능하다고 판단되는 경우에는 상기 제 2 전송용 스트림을 재생하는 것으로 해도 좋다.

이 구성에 의하면 수신재생장치는 재생정보가 단독으로 재생 가능하다는 것을 나타내고 있는 경우에는 제 1 전송용 스트림의 정보를 동시 재생하는 일 없이 제 2 전송용 스트림의 정보의 재생을 실행할 수 있다.

본 발명은 프로그램의 영상만이 아니라 자막 데이터, 타 시점의 영상 등의 다종 다양한 정보를 송신하는 장치 및 프로그램의 영상 및 다종 다양한 정보를 수신하여 재생하는 장치에 적용할 수 있다.

10 　　 프로그램 전송시스템
100, 200, 1100, 1200 송신장치
101 좌측 눈 용 비디오 엔코더
102 오디오 인코더
103 좌측 눈 용 비디오 스트림 저장부
104 오디오 스트림 저장부
105, 205 정보 보유부
106, 206, 1106, 1206 다중화부
107, 207, 1107, 1207 송신부
201 우측 눈 용 비디오 인코더
203 우측 눈 용 비디오 스트림 저장부
300, 1300 디지털 텔레비전(수신재생장치)
301, 1301 제어부
302, 1302 수신처리부
30 재생처리부
304 출력부
310, 1310 제 1 수신부
311, 1311 제 2 수신부
320 제 1 다중화 분리부
321 제 2 다중화 분리부
322 동기제어부
323 제 1 영상 복호부
324 제 2 영상 복호부
325 음성 복호부
326 영상처리부
1105, 1205 파일 보유부
1305 송신부

Claims (22)

1대의 수신재생장치에서 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응되어 있고, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하는 보유수단과,
　상기 스트림 특정정보를 송신하는 송신수단을 구비하는　것을 특징으로 하는 송신장치.

청구항 1에 있어서,
상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, PMT(Program　Map　Table)가 대응되어 있고,
상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 상기 PMT를 다중화하여 송신하는 것을 특징으로 하는 송신장치.

청구항 2에 있어서,
상기 스트림 특정정보는 상기 복수의 전송용 스트림을 동시에 재생할 때에 동기를 취하기 위한 동기정보를 더 포함하는 것을 특징으로 하는 송신장치.

청구항 3에 있어서,
상기 동기정보는 재생의 동기의 기준으로 상기 복수의 전송용 스트림 각각에 포함되는 PCR(Program-Clock-Reference) 중 어느 하나를 지정하는 것인 것을 특징으로 하는 송신장치.

청구항 3에 있어서,
상기 동기정보는 상기 복수의 전송용 스트림 각각이 동일한 타임스탬프를 사용하는 것을 나타내는 것인 것을 특징으로 하는 송신장치.

청구항 2에 있어서,
상기 PMT에는 상기 하나의 전송용 스트림이 단독으로 재생 가능한가 여부를 나타내는 재생정보가 포함되는 것을 특징으로 하는 송신장치.

청구항 1에 있어서,
상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, SI/PSI(Service　Information/Program　Specific　Information)가 대응되어 있고,
상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 SI/PSI를 다중화하여 송신하는 것을 특징으로 하는 송신장치.

청구항 1에 있어서,
상기 하나의 전송용 스트림은 IP(Internet　Protocol) 네트워크로 배포되는 스트림이며, 재생제어 메타파일이 대응되어 있고,
상기 송신수단은 상기 스트림 특정정보를 포함하는 상기 재생제어 메타파일을 상기 하나의 전송용 스트림과는 별도로 송신하는 것을 특징으로 하는 송신장치.

청구항 1에 있어서,
상기 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며, 데이터방송 콘텐츠 기술자가 대응되어 있고,
상기 송신수단은 상기 하나의 전송용 스트림과 상기 스트림 특정정보가 기재된 상기 데이터방송 콘텐츠 기술자를 다중화하여 송신하는 것을 특징으로 하는 송신장치.

청구항 1에 있어서,
상기 하나의 전송용 스트림은 서버형 방송에서 송신되는 것이며, 메타데이터가 대응되어 있고,
상기 송신수단은 상기 스트림 특정정보가 프로그램 요소정보에 기재된 상기 메타데이터를 송신하는 것을 특징으로 하는 송신장치.

프로그램을 수신하여 재생하는 수신재생장치로,
프로그램을 구성하는 제 1 전송용 스트림과 상기 제 1 전송용 스트림과 동시에 재생할 제 2 전송용 스트림이 송신되고 있는가 여부를 나타내는 송신정보를 수신하는 제 1 수신수단과,
상기 송신정보를 이용하여 상기 제 2 전송용 스트림이 송신되고 있는가 여부를 판단하는 판단수단과,
상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에 상기 제 2 전송용 스트림을 수신하는 제 2 수신수단과,
상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에는 상기 제 1 전송용 스트림 및 상기 제 2 전송용 스트림의 쌍방을 재생하고, 상기 판단수단에서 상기 제 2 전송용 스트림이 송신되고 있지 않다고 판단되는 경우에는 상기 제 1 전송용 스트림을 재생하는 재생수단을 구비하는 것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 제 1 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며,
상기 제 1 수신수단은　상기 제 1 전송용 스트림과 다중화된 PMT(Program　Map　Table)에 기술된 상기 송신정보를 수신하는 것을 특징으로 하는 수신재생장치.

청구항 12에 있어서,
상기 송신정보는 상기 제 1 전송용 스트림과 상기 제 2 전송용 스트림을 동시에 재생할 때에 동기를 취하기 위한 동기정보를 더 포함하고 있고,
상기 재생수단은　상기 동기정보에 의거하여 상기 제 1 전송용 스트림의 정보와 상기 제 2 스트림의 정보에 대해서 동기 재생을 실행하는 것을 특징으로 하는 수신재생장치.

청구항 13에 있어서,
상기 재생수단은 상기 제 1 전송용 스트림의 PCR(Program-Clock-Reference) 및 상기 제 2 전송용 스트림의 PCR 중 상기 동기정보가 나타내는 PCR을 이용해 상기 동기 재생을 실행하는　것을 특징으로 하는 수신재생장치.

청구항 13에 있어서,
상기 재생수단은 상기 동기정보가 나타내는 타임스탬프를 이용하여 상기 동기 재생을 실행하는　것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 제 1 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며,
상기 제 1 수신수단은　상기 제 1 전송용 트림과 다중화된 SI/PSI(Service　Information/Program　Specific　Information)에 기술된 상기 송신정보를 수신하는　것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 제 1 전송용 스트림은 IP(Internet　Protocol) 네트워크로 배포되는 스트림이며,
상기 제 1 수신수단은　상기 제 1 전송용 스트림의 수신에 앞서 상기 제 1 전송용 스트림에 대응하는 재생제어 메타파일에 포함되는 상기 송신정보를 수신하는　것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 복수의 전송용 스트림 중 적어도 하나의 전송용 스트림은 MPEG2-TS(Moving　Picture　Experts　Group　2-Transport　Stream) 형식의 스트림이며,
상기 제 1 수신수단은　상기 제 1 전송용 트림과 다중화된 데이터방송 콘텐츠 기술자에 기술된 상기 송신정보를 수신하는 것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 제 1 전송용 스트림은 서버형 방송에서 송신되는 것이며,
상기 제 1 수신수단은　상기 제 1 전송용 스트림에 대응하는 메타데이터에 포함되는 프로그램 요소정보에 기재된 상기 송신정보를 수신하는　것을 특징으로 하는 수신재생장치.

청구항 11에 있어서,
상기 제 2 수신수단에 있어서, 상기 판단에 앞서 상기 제 2 전송용 스트림과 당해 제 2 전송용 스트림이 단독으로 재생 가능한가 여부를 나타내는 재생정보를 수신하면,
상기 판단수단은 상기 재생정보에 의거하여 당해 제 2 전송용 스트림이 단독으로 재생 가능한가 여부를 더 판단하고,
상기 재생수단은 상기 판단수단에서 상기 제 2 전송용 스트림이 단독으로 재생 가능하다고 판단되는 경우에는 상기 제 2 전송용 스트림을 재생하는　것을 특징으로 하는 수신재생장치.

1대의 수신재생장치에서 동시에 재생할 정보를 각각이 포함하는 복수의 전송용 스트림 중 하나의 전송용 스트림에 대응되어 있고, 또한, 당해 하나의 전송용 스트림과는 다른 적어도 하나의 전송용 스트림을 특정하는 스트림 특정정보를 보유하는 보유수단을 갖는 송신장치에서 이용되는 송신방법으로,
상기 스트림 특정정보를 송신하는 송신스텝을 포함하는 것을 특징으로 하는 송신방법.

프로그램을 수신하여 재생하는 수신재생장치에서 이용되는 수신재생방법으로,
프로그램을 구성하는 제 1 전송용 스트림과 상기 제 1 전송용 스트림과 동시에 재생할 제 2 전송용 스트림이 송신되고 있는가 여부를 나타내는 송신정보를 수신하는 제 1 수신스텝과,
상기 송신정보를 이용하여 상기 제 2 전송용 스트림이 송신되고 있는가 여부를 판단하는 판단스텝과,
상기 판단스텝에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에는 상기 제 2 전송용 스트림을 수신하는 제 2 수신스텝과
상기 판단스텝에서 상기 제 2 전송용 스트림이 송신되고 있다고 판단되는 경우에는 상기 제 1 전송용 스트림 및 상기 제 2 전송용 스트림의 쌍방을 재생하고, 상기 판단스텝에서 상기 제 2 전송용 스트림이 송신되고 있지 않다고 판단되는 경우에는 상기 제 1 전송용 스트림을 재생하는 재생스텝을 포함하는　것을 특징으로 하는 수신재생방법.

Images