KR20130018208A

KR20130018208A - 송신 장치, 수신 장치 및 그 송수신 방법

Info

Publication number: KR20130018208A
Application number: KR1020120088496A
Authority: KR
Inventors: 박홍석; 김병선; 함상진; 강진모; 이근식; 이재준; 장용석; 김희진; 이대종; 주유성
Original assignee: 한국방송공사; 삼성전자주식회사
Priority date: 2011-08-12
Filing date: 2012-08-13
Publication date: 2013-02-20
Also published as: EP2744214A4; WO2013025035A9; EP2744214A2; WO2013025035A2; WO2013025035A3

Abstract

송신 장치가 개시된다. 본 송신 장치는, 멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터 및 제2 멀티미디어 데이터 및 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함하는 제2 전송 데이터를 생성하는 데이터 생성부, 데이터 생성부에서 제공되는 제1 전송 데이터를 방송망을 통해 수신 장치로 전송하는 제1 전송부 및 데이터 생성부에서 제공되는 제2 전송 데이터를 IP 망을 통해 수신 장치로 전송하는 제2 전송부를 포함한다.

Description

송신 장치, 수신 장치 및 그 송수신 방법{TRANSMITTER, RECEIVER AND THE METHOD THEREOF}

본 발명은 송신 장치, 수신 장치 및 그 방법에 관한 것으로 더욱 상세하게는 복수의 스트림을 제공하는 송신 장치, 복수의 스트림을 수신하여 처리하는 수신 장치 및 그 송수신 방법에 관한 것이다.

최근 전자 기술의 발달에 힘입어, 다양한 유형의 전자 장치가 개발 및 보급되고 있다. 특히 TV의 경우 3D 컨텐츠나 보다 높은 해상도의 컨텐츠를 제공할 수 있게 되었으며, 이에 따라, 방송 기술에 있어서도 3D 컨텐츠,멀티 앵글 컨텐츠, Depth 영상을 포함하는 컨텐츠 등과 같이 다수의 영상을 포함하는 컨텐츠나 UHD급 화질의 컨텐츠를 제공하기 위한 기술이 개발되고 있다.

기존의 방송망에서 사용되는 채널 대역폭은 제한적임에 반해 멀티 앵글 컨텐츠, 3D 컨텐츠, UHD급 화질의 컨텐츠 등은 기존의 컨텐츠보다 큰 데이터 사이즈를 가지므로 기존의 방송망에서 데이터 사이즈가 큰 컨텐츠를 그대로 전송하기에는 무리가 있다.

한편, 새로운 컨텐츠를 제공하기 위해 새로운 설비를 투자하는 것은 비용적으로 무리가 있으며, 기존 방송 설비 및 수신 장치를 이용하여 새로운 컨텐츠를 제공할 수 있어야 한다. 이에 따라, 멀티미디어 컨텐츠에 포함된 복수의 멀티미디어 데이터 중 기준이되는 멀티미디어 데이터는 기존 방송망을 통해 전송하고, 부가적인 멀티미디어 데이터는 기존 방송망과 상이한 전송 경로로 전송하는 방안을 고려할 수 있다.

다만, 각각 상이한 전송망으로 데이터를 전송하는 경우 각 멀티미디어 데이터는 독립적인 부화하기를 사용하게 되고, 각 부호화기의 시스템 클럭이 일치하지 않아, 동일한 동기화 정보를 부가하는 것에 어려움이 있다.

또한, 기존 방송망과 상이한 전송 경로로 전송되는 멀티미디어 데이터에 대한 시그널링 정보를 어떠한 방식으로 제공할 것인지에 대한 문제도 발생할 수 있다.

그리고, 기존 방송망과 상이한 전송 경로로써 IP 망을 통해 부가적인 멀티미디어 데이터를 전송하는 경우 IP 망을 특성상 기존 방송망을 통해 전송되는 멀티미디어 데이터에 비해 패킷 손실 또는 지연이 문제될 수 있다.

본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은 서로 다른 경로를 통해 복수의 스트림을 제공하는 송신 장치, 복수의 스트림을 수신하여 처리하는 수신 장치 및 그 송수신 방법을 제공함에 있다.

또한, 서로 다른 경로로 복수의 스트림을 제공하는 경우 각 멀티미디어 데이터들 간의 동기화할 수 있는 방법 및 기존 방송망과 상이한 전송 경로를 통해 전송되는 멀티미디어 데이터에 대한 효과적인 시그널링 방법을 제공함에 있다.

또한, IP 망을 통해 전송되는 경우에 있어 패킷 손실 또는 지연을 효과적으로 보상할 수 있는 방법을 제공함에 있다.

본 발명의 일 실시 예에 따른 송신 장치는, 멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 상기 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 상기 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터 및 상기 제2 멀티미디어 데이터 및 상기 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함하는 제2 전송 데이터를 생성하는 데이터 생성부, 상기 데이터 생성부에서 제공되는 제1 전송 데이터를 방송망을 통해 수신 장치로 전송하는 제1 전송부 및 상기 데이터 생성부에서 제공되는 제2 전송 데이터를 IP 망을 통해 수신 장치로 전송하는 제2 전송부를 포함한다.

여기서, 상기 제1 시그널링 데이터는 상기 제1 멀티미디어 데이터의 재생 시간 정보 및 상기 제1 멀티미디어 데이터의 식별 정보 중 적어도 하나를 포함하며, 상기 제2 시그널링 데이터는 상기 제2 멀티미디어 데이터의 재생 시간 정보, 상기 제2 멀티미디어 데이터의 수신 시간 정보, 상기 제2 멀티미디어 데이터의 수신 경로 정보, 상기 제2 멀티미디어 데이터의 식별 정보, 상기 제2 멀티미디어 데이터의 서비스 합성 정보, 상기 제2 멀티미디어 데이터의 속성 정보 및 상기 제2 멀티미디어 데이터의 보호 정보 중 적어도 하나를 포함할 수 있다.

또한, 상기 제1 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol) 및 PSI(Program Specific Information) 중 적어도 하나에 기록되고, 상기 제2 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol 및 Private Stream 중 적어도 하나에 기록될 수 있다.

그리고, 상기 제2 전송부는, 상기 제2 전송 데이터를 복수의 세그먼트로 구분하고, 기 설정된 개수의 세그먼트에 대한 정보를 생성하여 상기 세그먼트에 대한 정보에 따라 상기 제2 전송 데이터를 세그먼트 단위로 전송할 수 있다.

또한, 상기 데이터 생성부는, 상기 제1 및 제2 동기화 정보로써 서로 동기화된 타임 코드를 생성하여 상기 제1 및 제2 멀티미디어 데이터에 부가하는 복수의 타임 코드 생성부, 상기 타임 코드가 부가된 제1 및 제2 멀티미디어 데이터를 인코딩하는 복수의 인코더, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 생성하는 시그널링 데이터 생성부 및 상기 인코딩된 제1 멀티미디어 데이터, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 멀티플렉싱하여 상기 제1 전송 데이터를 생성하는 멀티플렉서를 포함할 수 있다.

본 발명의 일 실시 예에 따른 수신 장치는, 제1 멀티미디어 데이터, 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 방송망을 통해 수신하는 제1 수신부, 상기 제2 멀티미디어 데이터, 제2 동기화 정보를 포함하는 제2 전송 데이터를 IP 망을 통해 수신하는 제2 수신부, 상기 제1 전송 데이터로부터 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 검출하는 시그널링 데이터 검출부, 상기 검출된 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 신호 처리하는 신호 처리부 및 상기 제1 동기화 정보 및 상기 제2 동기화 정보에 기초하여 상기 신호 처리된 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성하는 동기화부를 포함한다.

여기서, 상기 제2 수신부는, 상기 제2 시그널링 데이터에 포함된 정보를 이용하여 상기 제2 전송 데이터의 세그먼트에 대한 정보를 수신하고, 상기 수신된 세그먼트에 대한 정보를 이용하여 상기 제2 전송 데이터를 세그먼트 단위로 수신할 수 있다.

그리고, 상기 제1 동기화 정보는 상기 제1 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함하고, 상기 제2 동기화 정보는 상기 제2 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함할 수 있다.

본 발명의 일 실시 예에 따른 송신 장치의 송신 방법은, 멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 상기 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 상기 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 생성하는 단계, 상기 제2 멀티미디어 데이터 및 상기 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함하는 제2 전송 데이터를 생성하는 단계, 상기 생성된 제1 전송 데이터를 방송망을 통해 전송하는 단계 및 상기 생성된 제2 전송 데이터를 IP 망을 통해 전송하는 단계를 포함할 수 있다.

여기서, 상기 제1 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol) 및 PSI(Program Specific Information) 중 적어도 하나에 기록되고, 상기 제2 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol 및 Private Stream 중 적어도 하나에 기록될 수 있다.

그리고, 상기 제2 전송 데이터를 전송하는 단계는, 상기 제2 전송 데이터를 복수의 세그먼트로 구분하는 단계, 기 설정된 개수의 세그먼트에 대한 정보를 생성하는 단계 및 상기 세그먼트에 대한 정보에 따라 상기 제2 전송 데이터를 세그먼트 단위로 전송하는 단계를 포함할 수 있다.

또한, 상기 제1 전송 데이터를 생성하는 단계는, 상기 제1 동기화 정보로써 타임 코드를 생성하여 상기 제1 멀티미디어 데이터에 부가하는 단계, 상기 타임 코드가 부가된 제1 멀티미디어 데이터를 인코딩하는 단계, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 생성하는 단계 및 상기 인코딩된 제1 멀티미디어 데이터, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 멀티플렉싱하여 상기 제1 전송 데이터를 생성하는 단계를 포함하며, 상기 제2 전송 데이터를 생성하는 단계는, 상기 제2 동기화 정보로써 상기 제1 멀티미디어 데이터에 부가된 타임 코드와 동일한 타임 코드를 생성하여 상기 제2 멀티미디어 데이터에 부가하는 단계 및 상기 타임 코드가 부가된 제2 멀티미디어 데이터를 인코딩하는 단계를 포함할 수 있다.

본 발명의 일 실시 예에 따른 수신 장치의 수신 방법은, 제1 멀티미디어 데이터, 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 방송망을 통해 수신하는 단계, 상기 제2 멀티미디어 데이터, 제2 동기화 정보를 포함하는 제2 전송 데이터을 IP 망을 통해 수신하는 단계, 상기 제1 전송 데이터로부터 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 검출하는 단계, 상기 검출된 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 신호 처리하는 단계 및 상기 제1 동기화 정보 및 상기 제2 동기화 정보에 기초하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성하는 단계를 포함한다.

여기서, 상기 제2 전송 데이터를 수신하는 단계는, 상기 제2 시그널링 데이터에 포함된 정보를 이용하여 상기 제2 전송 데이터의 세그먼트에 대한 정보를 수신하는 단계 및 상기 수신된 세그먼트에 대한 정보를 이용하여 상기 제2 전송 데이터를 세그먼트 단위로 수신하는 단계를 포함할 수 있다.

이상과 같은 본 발명의 다양한 실시 예에 따르면, 기존 방송 설비를 이용하여 서로 다른 경로를 통해 다른 데이터를 송수신하여 전송 대역 폭 제한을 극복하여 사용자에게 새로운 컨텐츠를 제공할 수 있다.

또한, 서로 다른 경로로 복수의 스트림을 제공하는 경우 각 멀티미디어 데이터들을 효과적으로 동기화하여, 복수의 멀티미디어 데이터들간 동기화된 재생을 수행할 수 있다.

그리고, 기존 방송망과 상이한 전송 경로를 통해 전송되는 멀티미디어 데이터에 대해 효과적으로 시그널링 할 수 있으며, IP 망을 통해 전송되는 멀티미디어 데이터의 패킷 손실 또는 지연을 보상할 수 있게 된다.

도 1은 본 발명의 일 실시 예에 따른 멀티미디어 데이터 송수신 시스템을 나타내는 도면이다.
도 2는 본 발명이 일 실시 예에 따른 멀티미디어 데이터 송수신 시스템의 구성을 나타내는 블럭도이다.
도 3은 본 발명의 일 실시 예에 따른 송신 장치(100)의 구성을 나타내는 블럭도이다.
도 4는 타임 코드가 포함되는 Ancillary data 포맷의 예를 나타내는 도면이다.
도 5는 본 발명의 일 실시 예에 따른 제1 타임 코드 생성부의 구체적인 구성을 나타내는 블럭도이다.
도 6은 MPEG-2 압축 방식에 따라 타임 코드가 기록되는 영역을 설명하기 위한 도면이다.
도 7은 H.264 압축 방식에 따라 타임 코드가 기록되는 영역을 설명하기 위한 도면이다.
도 8은 PSI의 PMT를 설명하기 위한 도면이다.
도 9 및 도 10은 PSIP의 테이블을 설명하기 위한 도면이다.
도 11은 PSIP의 VCT를 설명하기 위한 도면이다.
도 12는 PSIP의 EIT를 설명하기 위한 도면이다.
도 13은 PSIP 및 PSI를 통한 시그널링 및 ES의 구조를 설명하기 위한 도면이다.
도 14는 기존 단일망 서비스와 이종망 서비스를 모두 포함하는 VCT의 구성을 나타내는 도면이다.
도 15 및 도 16은 service_cast_type_descriptor()를 설명하기 위한 도면이다.
도 17은 hybrid_cast_net_type의 종류를 설명하기 위한 도면이다.
도 18은 hybrid_protocol_type의 예를 나타내는 도면이다.
도 19는 hybrid_http_protocol_type의 예를 나타내는 도면이다.
도 20은 이종망 서비스 채널에 대한 EIT 구성의 예를 나타내는 도면이다.
도 21은 도 20의 contents_identification_descriptor()의 예를 나타내는 도면이다.
도 22는 도 20의 hybrid_supplemental_contents_desciptor()의 예를 나타내는 도면이다.
도 23은 단일망 서비스 및 이종망 서비스의 TVCT 및 PMT 구성의 예를 나타내는 도면이다.
도 24는 단일망 서비스 및 이종망 서비스를 포함하는 MPEG-2 스트림의 제공 형태를 나타내는 도면이다.
도 25는 PMT를 통한 hybrid_signaling_descriptor() 제공의 예를 나타내는 도면이다.
도 26은 hybrid_signaling_descriptor()의 예를 나타내는 도면이다.
도 27은 HCIT의 예를 나타내는 도면이다.
도 28은 distribution_info_descriptor() 의 예를 나타내는 도면이다.
도 29는 linkage descriptor()의 예를 나타내는 도면이다.
도 30은 contents_protection_descriptor()의 예를 나타내는 도면이다.
도 31은 본 발명의 일 실시 예에 따른 수신 장치의 구성을 나타내는 블럭도이다.
도 32는 시간의 흐름에 따른 HLS 방식의 데이터 송수신을 설명하기 위한 도면이다.
도 33은 본 발명의 다른 실시 예에 따른 멀티미디어 데이터 송수신 시스템을 나타내는 도면이다.
도 34는 본 발명의 일 실시 예에 따른 송신 장치의 송신 방법을 설명하기 위한 흐름도이다.
도 35는 본 발명의 일 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다.
도 36는 본 발명의 다른 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다.
도 37은 본 발명의 또 다른 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다.

이하에서, 첨부된 도면을 참조하여 본 발명에 대하여 구체적으로 설명한다.

도 1은 본 발명의 일 실시 예에 따른 멀티미디어 데이터 송수신 시스템을 나타내는 도면이다. 도 1에 따르면 멀티미디어 데이터 송수신 시스템(1000)은 송신 장치(100) 및 수신 장치(200)를 포함한다.

송신 장치(100)는 멀티미디어 데이터를 처리하여 서로 다른 신호를 서로 다른 전송 망을 통해 전송한다. 예를 들어, 도 1과 같이 송신 장치(100)는 제1 전송 망을 통해 제1 신호를 전송하고, 제2 전송 망을 통해 제2 신호를 전송할 수 있다.

제1 신호 및 제2 신호는 하나의 컨텐츠를 구성하는 서로 다른 멀티미디어 데이터 또는 상대적으로 저화질의 멀티미디어 데이터와 상대적으로 고화질의 멀티미디어 데이터일 수 있다. 예를 들어, 멀티미디어 데이터가 3D 컨텐츠인 경우에는 좌안 영상 및 우안 영상 중 어느 하나가 제1 전송 망을 통해 전송되고, 다른 하나의 영상이 제2 전송 망을 통해 전송될 수 있다. 다를 예로, FHD(Full High Definition) 화질의 제1 신호가 제1 전송 망을 통해 전송되고, UHD(Ultra High Definition) 화질의 제2 신호가 제2 전송 망을 통해 전송될 수 있다. 이 외에도 제1 신호 및 제2 신호는 멀티 앵글 컨텐츠를 구성하는 멀티미디어 데이터, 2D 영상과 Depth 영상 등이 될 수 있다.

여기서, 제1 전송 망은 RF 망(또는 방송망)이 될 수 있으며, 제2 전송 망은 IP 망(또는, 인터넷 망)이 될 수 있다. 다만, 이는 일 실시 예에 불과하며 제1 전송망이 IP 망이고 제2 전송망이 RF 망이거나, 제1 전송망과 제2 전송망이 동일한 형태의 망이 될 수도 있다.

수신 장치(200)는 송신 장치(100)에서 전송되는 제1 신호 및 제2 신호를 각각 수신하여 멀티미디에 데이터에 대한 신호 처리를 수행하고, 신호 처리된 멀티미디어 데이터를 동기화하여 컨텐츠를 재생할 수 있다.

도 2는 본 발명이 일 실시 예에 따른 멀티미디어 데이터 송수신 시스템의 구성을 나타내는 블럭도이다. 도 2에 따르면 멀티미디어 데이터 송수신 시스템(1000)의 송신 장치(100)는 데이터 생성부(110), 제1 전송부(120) 및 제2 전송부(130)를 포함한다.

데이터 생성부(110)는 멀티미디어 데이터 처리하여 제1 전송부(120) 및 제2 전송부(130)로 전송한다. 구체적으로, 데이터 생성부(110)는 멀티미디어 데이터를 처리하여 제1 전송 데이터 및 제2 전송 데이터를 생성하고, 생성된 제1 전송 데이터 및 제2 전송 데이터를 각각 제1 전송부(120) 및 제2 전송부(130)로 전송한다.

여기서, 제1 전송 데이터는 멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 상기 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하며, 제2 전송 데이터는 제2 멀티미디어 데이터 및 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함할 수 있다.

제1 전송부(120)는 제1 전송 데이터를 제1 전송 망을 통해 수신 장치(200)로 전송한다. 이를 위해, 제1 전송부(120)는 제1 전송 데이터를 제1 전송망의 전송 규격에 적합한 형태로 변환하여 수신 장치(200)로 전송할 수 있다.

제2 전송부(130)는 제2 전송 데이터를 제2 전송 망을 통해 수신 장치(200)로 전송한다. 이를 위해, 제2 전송부(130)는 제2 전송 데이터를 제2 전송망의 전송 규격에 적합한 형태로 변환할 수 있다.

한편, 멀티미디어 데이터 송수신 시스템의 수신 장치(200)는 제1 수신부(210), 제2 수신부(220) 및 데이터 처리부(230)를 포함한다.

제1 수신부(210)는 송신 장치(100)로부터 제1 전송망을 통해 제1 전송 데이터를 수신한다. 제2 수신부(210)는 송신 장치(100)로부터 제2 전송망을 통해 제2 전송 데이터를 수신한다. 예를 들어, 제1 수신부(210)는 방송 망을 통해 제1 전송 데이터를 수신하고, 제2 수신부(210)는 IP 망을 통해 제2 전송 데이터를 수신할 수 있다.

데이터 처리부(230)는 제1 전송 데이터 및 제2 전송 데이터를 처리하여 멀티미디어 컨텐츠를 구성한다. 구체적으로, 데이터 처리부(230)는 수신된 제1 전송 데이터 및 제2 전송 데이터에 포함된 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 신호 처리하고, 신호 처리된 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성할 수 있다.

도 3은 본 발명의 일 실시 예에 따른 송신 장치(100)의 구성을 나타내는 블럭도이다. 도 3을 참조하면 송신 장치(100)는 제1 타임 코드 생성부(111), 제2 타임 코드 생성부(112), 제1 인코더(113), 제2 인코더(114) 시그널링 데이터 생성부(115), 멀티플렉서(116), 제1 전송부(120) 및 제2 전송부(130)를 포함한다.

제1 타임 코드 생성부(111)는 타임코드를 생성하여 제1 멀티미디어 데이터에 부가한다. 구체적으로, 제1 타임코드 생성부(111)는 SMPTE(Society of Motion Picture and Television Engineers)12M 규격에 따른 타임코드를 생성하여 제1 멀티미디어 데이터에 부가할 수 있다.

제2 타임 코드 생성부(112)는 타임 코드를 생성하여 제2 멀티미디어 데이터에 부가한다. 구체적으로, 제2 타임코드 생성부(112)는 SMPTE(Society of Motion Picture and Television Engineers)12M 규격에 따른 타임 코드를 생성하여 제2 멀티미디어 데이터에 부가할 수 있다.

SMPTE 12M 타임 코드는 SMPTE에서 각 비디오 데이터의 프레임 단위 라벨링을 위해 재정된 표준이다. 타임 코드는 필름, 비디오 데이터, 오디오 데이터 등에 삽입될 수 있으며, 편집 또는 동기화를 위한 레퍼런스 역할을 할 수 있다. 일반적으로, 타임 코드는 컨텐츠의 생성 또는 편집 과정에서 동기화되어 동일한 재생 시간대를 갖는 데이터는 동일한 타임 코드를 가질 수 있다.

도 4는 타임 코드가 포함되는 Ancillary data 포맷의 예를 나타내는 도면이다. 도 4를 참조하면 타임 코드에 대한 정보는 'units of frames', 'units of seconds', 'units of munites' 및 'units of hours'에서 정의될 수 있다. 컨텐츠의 생성 또는 편집 과정에서 생성된 타임 코드는 SMPTE 에서 정의된 HD-SDI(Serial Digital Interface)를 통해 인코더로 전달될 수 있다. 구체적으로, 타임 코드는 SMPTE 291M에서 정의된 Ancillary Data 포맷을 따라 인코더로 전달될 수 있다.

다만, 컨텐츠 자체에 타임 코드가 존재하지 않거나 동기화되어 재생되어야 할 멀티미디어 데이터 간에 타임 코드 정보가 일치하지 않는 경우가 발생할 수 있다. 이러한 경우에는 송신 장치 내에서 동기화된 타임 코드를 인코더로 전달할 필요가 있다. 이에 따라, 상술한 제1 타임 코드 생성부(111) 및 제2 타임 코드 생성부(112)는 타임 코드를 생성하여 멀티미디어 데이터에 부가할 수 있다. 여기서, 동기화되어야 할 멀티미디어 데이터들은 동일한 타임 코드가 부가되어야 하는데, 이를 위해 복수의 타임코드 생성부(111, 112)는 타임 코드 생성을 위한 기준을 Sync Signal Reference 형태로 외부로부터 입력받을 수 있으며, 각 타임 코드 생성부는 Sync Signal Reference를 서로 공유함으로써 동일한 타임 코드 값을 생성하여 멀티미디어 데이터에 부가할 수 있다.

도 5는 본 발명의 일 실시 예에 따른 제1 타임 코드 생성부의 구체적인 구성을 나타내는 블럭도이다. 제1 타임 코드 생성부(111)는 S/P 컨버터(10), Ancillary Data 검출부(20), 타임 코드 처리부(30), Ancillary Data 삽입부(40), P/S 컨버터(50)를 포함할 수 있다.

S/P 컨버터(10)는 직렬로 입력되는 HD-SDI 규격에 따른 멀티미디어 데이터를 병렬 신호로 변환한다.

Ancillary Data 검출부(20)는 병렬 신호로 변환된 멀티미디어 데이터에서 Ancillary Data 영역을 검출하여 타임코드 처리부(30)로 출력한다.

타임 코드 처리부(30)는 입력받은 Ancillary Data 영역에 타임 코드에 대한 정보를 입력한다. 구체적으로, 타임 코드 처리부(30)는 외부로부터 입력받은 Sync Signal Reference를 이용하여 타임 코드에 대한 정보를 입력 또는 수정할 수 있다.

Ancillary Data 삽입부(40)는 타임 코드에 대한 정보가 입력된 Ancillary Data를 다시 멀티미디어 데이터에 삽입한다.

P/S 컨버터(50)는 병렬로 입력되는 멀티미디어 데이터를 다시 직렬로 변환하여 HD-SDI 규격에 따라 제1 인코더(113)로 출력한다.

한편, 도 5에서는 제1 타임 코드 생성부에 대해서만 설명하였으나 제2 타임 코드 생성부(112)도 제1 타임 코드 생성부와 동일하게 구현될 수 있으며, 상술한 바와 같이 각 타임 코드 생성부는 Sync Signal Reference를 서로 공유함으로써 동일한 타임 코드 값을 생성하여 멀티미디어 데이터에 부가할 수 있다.

또한, 도 3에서는 송신 장치(100)가 두 개의 타임 코드 생성부(111, 112)를 포함하는 것으로 도시하였으나, 송신 장치(100)는 처리하는 멀티미디어 데이터의 수 또는 송신 장치(100)에 포함된 인코더의 수에 따라 두 개 이상의 타임 코드 생성부를 포함할 수 있다.

제1 인코더(113)는 타임 코드가 부가된 제1 멀티미디어 데이터를 입력받아 인코딩을 수행한다. 구체적으로, 제1 인코더(113)는 기존 수신 장치와의 호환성을 위해 MPEG-2 인코딩을 수행할 수 있다. 다만, 제1 인코더(113)에서 인코딩할 수 있는 영상 포맷은 이에 한정되지 않으며 H.264, HEVC 등 현재 이용가능한 영상 포맷 및 추후 개발되어 본 발명에 적용될 수 있는 다양한 영상 포맷에 따라 인코딩을 수행할 수 있다.

제2 인코더(114)는 타임 코드가 부가된 제2 멀티미디어 데이터를 입력받아 인코딩을 수행한다. 구체적으로, 제2 인코더(114)는 제2 멀티미디어 데이터에 대해H.264 압축 방식으로 인코딩을 수행할 수 있다. 다만, 제2 인코더(114)에서 인코딩할 수 있는 영상 포맷은 이에 한정되지 않으며 MPEG-2, HEVC 등 현재 이용가능한 영상 포맷 및 추후 개발되어 본 발명에 적용될 수 있는 다양한 영상 포맷에 따라 인코딩을 수행할 수 있다.

한편, 멀티미디어 데이터에 포함된 타임 코드는 인코더의 압축 방식에 따라 기록방식이 달라질 수 있다. 이에 대해서는 도 6 및 도 7을 참조하여 설명한다.

도 6은 MPEG-2 압축 방식에 따라 타임 코드가 기록되는 영역을 설명하기 위한 도면이다. 도 6에 따르면 타임 코드는 GOP(Group Of Pictures) header내에 GOP 단위로 기록되는 기 정의된 time_code field를 이용하여 기록될 수 있다.

도 7은 H.264 압축 방식에 따라 타임 코드가 기록되는 영역을 설명하기 위한 도면이다. 도 7에 따르면 타임 코드는 Picture timing SEI(Supplemental Enhancement Information)에서 정의하는 seconds_value, minute_value, hours_value, n_frames 을 이용하여 기록될 수 있다.

시그널링 데이터 생성부(115)는 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 생성한다.

여기서, 제1 시그널링 데이터는 제1 멀티미디어 데이터의 재생 시간 정보 및 제1 멀티미디어 데이터의 식별 정보 중 적어도 하나를 포함할 수 있으며, 또한, 제2 시그널링 데이터는 제2 멀티미디어 데이터의 재생 시간 정보, 제2 멀티미디어 데이터의 수신 시간 정보, 제2 멀티미디어 데이터의 수신 경로 정보, 상기 제2 멀티미디어 데이터의 식별 정보, 제2 멀티미디어 데이터의 서비스 합성 정보, 제2 멀티미디어 데이터의 속성 정보 및 제2 멀티미디어 데이터의 보호 정보 중 적어도 하나를 포함할 수 있다.

제1 멀티미디어 데이터의 재생 시간 정보란 제1 멀티미디어 데이터가 재생되는 시간을 나타내며 재생 시작시간 및 종료시간 또는 시작시간 및 재생 길이로 표현될 수 있다. 한편, 제1 멀티미디어 데이터의 재생 시간 정보는 제2 멀티미디어 데이터의 연동 정보로 사용될 수도 있다.(예를 들어, 제1 멀티미디어 데이터와 같은 재생시간 정보를 가지는 제2 멀티미디어 데이터가 존재하는 경우 제1 멀티미디어 데이터와 제2 멀티미디어 데이터는 하나의 컨텐츠를 구성함을 나타내는 정보로 사용될 수 있다.)

제1 멀티미디어 데이터의 식별 정보란 제1 멀티미디어 데이터를 식별할 수 있는 컨텐츠 고유의 값으로 제2 멀티미디어 데이터와 동일한 식별자를 가짐으로써 제1 멀티미디어 데이터와 제1 멀티미디어 데이터를 연동하는 기준으로 사용할 수 있다.

제2 멀티미디어 데이터의 재생 시간 정보란 제2 멀티미디어 데이터가 재생되는 시간을 나타내며 재생 시작시간 및 종료시간, 또는 시작시간 및 재생 길이로 표현될 수 있다. 상술한 바와 같이, 제2 멀티미디어 데이터의 재생 시간 정보는 제1 멀티미디어 데이터의 연동 정보로 사용될 수도 있다.

제2 멀티미디어 데이터의 수신 시간 정보란 제2 멀티미디어 데이터의 수신이 가능한 시간을 나타내는 정보이며, 제2 멀티미디어 데이터의 수신이 가능한 시작 시간 및 종료 시간으로 나타낼 수 있다.

제2 멀티미디어 데이터의 수신 경로 정보란 제2 멀티미디어 데이터의 수신이 가능한 경로를 알려주는 정보이다. RF 망을 통해 제2 멀티미디어 데이터를 제공하는 경우와 IP 망을 통해 제2 멀티미디어 데이터를 제공되는 경우를 분리하여 그 경로에 대한 정보를 제공할 수 있다. 또한, 제2 멀티미디어 데이터의 수신 경로 정보는 제2 멀티미디어 데이터의 수신이 가능한 프로토콜 관련 정보도 포함할 수 있다.

제2 멀티미디어 데이터의 식별 정보란 제2 멀티미디어 데이터를 식별할 수 있는 컨텐츠 고유의 값으로 제1 멀티미디어 데이터와 동일한 식별자를 가짐으로써 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 연동하는 기준으로 사용할 수 있다.

제2 멀티미디어 데이터의 서비스 합성 정보란 제1 멀티미디어 데이터와 연동되어 하나의 컨텐츠로 재생되는 제2 멀티미디어 데이터의 서비스 형태를 지시하는 정보로 스테레오스코픽, 멀티앵글(Multi-angle) 영상, 또는 부가 오디오, 자막, 데이터 등등의 서비스 형태로 지시될 수 있다.

제2 멀티미디어 데이터의 속성 정보란 제2 멀티미디어 데이터의 속성에 관련한 정보로 데이터 포맷, 코덱, 해상도, 데이터 사이즈 등의 정보를 포함할 수 있다.

제2 멀티미디어 데이터의 보호 정보란 제2 멀티미디어 데이터를 보호하기 위한 정보로서 Conditional Access 정보, Play Limitation 정보, Copy Protection 정보 등을 포함할 수 있다.

한편, 제1 시그널링 데이터는 방송 신호의 PSIP(Program and System Information Protocol) 및 PSI(Program Specific Information) 중 적어도 하나에 기록될 수 있으며, 제2 시그널링 데이터는 방송 신호의 PSIP(Program and System Information Protocol 및 Private Stream 중 적어도 하나에 기록될 수 있다. 이에 대해서는 도 8 내지 도 31을 참조하여 구체적으로 설명한다.

도 8은 PSI의 PMT를 설명하기 위한 도면이다. PSI(Program Specific Information)는 PAT, PMT 등으로 구성될 수 있다. PAT는 서비스 스트림과 그 서비스 스트림을 위한 프로그램 정의를 가지는 PMT 섹션들의 PID 값과의 관계를 제공하며, PMT는 프로그램 번호를 하나의 기초스트림(Elementary Stream) 집합과 연결함으로써 프로그램 정의를 제공한다. 예를 들어, MPEG-2 Video, AC-3 Audio 각각 하나로 구성되는 프로그램의 경우 2개의 ES loop 구성을 가지게 되며 Stream_type은 0x02, 0x81로 각각 정의된다.

도 9 및 도 10은 PSIP의 테이블을 설명하기 위한 도면이다. PSIP(Program and System Information Protocol)는 ATSC 규격을 따르는 모든 프로그램 및 시스템 정보 테이블, descriptors 및 이와 관련된 데이터 구조를 기술한다. 도 9에서와 같이 PSIP는 MGT, TVCT, CVCT, RRT, EIT, ETT, STT 등의 테이블을 포함할 수 있으며, 각 테이블이 가지는 상관관계는 도 10을 참조하면 알 수 있다.

도 11은 PSIP의 VCT를 설명하기 위한 도면이다. PSIP 정보 가운데 VCT(TVCT,CVCT)는 전송 스트림내에 전송되는 가상 채널(virtual channel)에 대한 정보들을 나열한다즉, VCT(TVCT,CVCT)는 TSID(transport_stream_id)로 구분되는 하나의 전송 스트림 내의 가상 채널의 개수에 대응하는 채널정보 관련 loop를 가지며, 각각의 가상채널이 가지는 서비스의 종류는 service_type에 의해서 정의된다. 예를 들어, 기존 2D 방송 시스템은 ATSC_digital_television을 가리키는 0x02의 service_type 값을 갖는다.

도 12는 PSIP의 EIT를 설명하기 위한 도면이다. EIT(Event Information Table)는 가상 채널의 이벤트에 대한 정보들(제목, 시작시간 등)을 포함한다. 여기서, 하나의 이벤트는 하나의 TV 프로그램을 의미할 수 있다. EIT-k(k =0,1 … 127)의 형식으로 최대 128개의 EIT가 전송될 수 있다. 각각의 EIT-k는 다중의 인스턴스를 가질 수 있으며 각 인스턴스는 하나의 가상 채널에 대한 정보를 갖게 되고, table_id와 source_id의 조합에 의해 식별된다. PSIP는 적어도 4개(EIT-0,1,2,3) 이상의 방송안내 정보를 송출하여야 하며, 최대 128개(3시간*128개 = 16일치)의 EIT를 가질 수 있다. 각 EIT는 예를 들어, 0시, 3시, 6시, 9시, 12시, 15시, 18시, 21시와 같이 특정 시간에 3시간 간격으로 이벤트 정보를 제공할 수 있다.

하나의 EIT 내에서 다수개의 이벤트가 제공될 수 있으며, 이벤트의 개수에 따라 event_id로 구분되는 다수개의 loop를 포함할 수 있다. 여기서, 하나의 EIT를 넘어가는 시간 간격을 가진 이벤트는 동일한 event_id를 갖도록 각의 EIT에 기술되어야 한다. 예를 들어 17:30 UTC에 시작해서 19:30 UTC까지 지속되는 이벤트는 같은 event_id로 두 개의 EIT(15:00.18:00대의 EIT와 18:00.21:00대의 EIT)에 존재할 수 있다. event_id는 해당 EIT내에서 유일한 값을 가질 수 있다.

도 13은 PSIP 및 PSI를 통한 시그널링 및 ES의 구조를 설명하기 위한 도면이다. ATSC 기반 시스템에서 컨텐츠에 대한 시그널링은 PSIP과 PSI를 통해 제공될 수 있다. PSIP의 VCT(Virtual Channel Table)는 이종망 서비스가 제공되는 가상 채널을 지시하고, 해당 가상채널에서 제공되는 제1 멀티미디어 데이터와 연동되는 제2 멀티미디어 데이터에 관련된 정보는 EIT(Event Information Table)를 통해 지시한다. DVB 기반 시스템에서는 ATSC에서 제공하는 PSIP 정보를 SI의 구조를 통해 표현하는데, VCT정보는 NIT 또는 SDT에, EIT는 동일한 EIT를 통해 적용될 수 있다.

또한, PSIP에서 제공한 정보와 유사한 정보가 PSI를 통해서도 제공될 수 있다. 다만, PSI는 현재 제공되고 있는 컨텐츠 단위의 구성정보를 제공한다는 측면에서, 현재 컨텐츠 단위로 제공되지 않을 수도 있는 제2 멀티미디어 데이터의 시그널링 데이터를 PSI상에 표현하는 것은 적합하지 않을 수 있다. 이에 따라, 제2 멀티미디어 데이터에 대한 정보는 별도의 Private Stream(예를 들어, stream_type =0x05 또는 기타 예약되어 있는 stream_type)을 통해 제공하는 것이 바람직하다.

이하에서는, 이종망 기반 컨텐츠 제공 서비스에서 PSIP, PSI 및 Private Stream 각각에 대한 시그널링 방법에 대해 구체적으로 설명한다.

< PSIP 를 통한 시그널링 >

이종망 기반의 컨텐츠 제공 서비스는 기준영상(또는, 제1 멀티미디어 데이터)이 제공되는 전송경로와 부가영상(또는, 제2 멀티미디어 데이터)이 제공되는 전송 경로가 분리되어 있다. 이때, 이종망 서비스를 제공하지 않는 기존 수신기는 기준영상만을 이용하여 기존 서비스와 동일하게 이용할 수 있어야 한다(하위 호환성). 즉, 기준영상이 RF망을 통해 제공되고 부가적으로 이용되는 부가영상이 이종망인 IP망을 통해 제공되는 경우, 기존 수신기는 기준영상이 제공되는 RF망 컨텐츠만 해석하여 2D처럼 시청이 가능하여야 한다. 또한, 이종망 서비스를 제공할 수 있는 수신기는 기준영상이 제공되는 RF망을 통해 부가영상에 대한 정보를 얻을 수 있어야 하며, 해당 정보를 통해 입체영상 구성을 위한 부가영상을 이종망인 IP망으로부터 획득할 수 있어야 한다. 이에 따라, 시그널링 데이터를 두 가지 형태로 동시에 제공할 수 있다. 구체적으로, VCT내에서 하위호환성을 가지는 기존서비스 service_type = 0x02 (ATSC_digital_television)와, 0x07(Parameterized Service) 또는 예약된 service_type을 이용하는 신규서비스를 동시에 표현할 수 있다.

여기서, 0x07 또는 예약된 값의 service_type으로 표현되는 신규 서비스는 정의하는 바에 따라 이종망 서비스를 가리키는 hybrid service 또는 이종망 전송형태를 포함하는 입체영상 서비스를 가리키는 3D service 중 하나로 정의될 수 있으며, 해당 service_type이 3D_service인 경우에는 이종망 이용 유무를 지시하기 위해 부가적으로 동종망 서비스(RF_cast_only)와 이종망 서비스(Hybridcast)로 구분할 수 있는 신규 service_cast_type_descriptor()가 추가적으로 정의되어야 한다.

도 14는 기존 단일망 서비스와 이종망 서비스를 모두 포함하는 VCT의 구성을 나타내는 도면이다. 이종망 기반의 입체영상 디지털 방송 TVCT 구성형태를 도 14와 같은 예시로 표현할 수 있다. 도 14는 service_type=0x09가 3D_service를 가리키는 경우를 가정하며, 3D 제공방식을 기술하는 service_cast_type_descriptor()의 service_cast_type이 이종망을 의미하는 0x01 값으로 정의되어 부가영상이 이종망을 통해 제공되고 있는 상황을 설명한다.

도 15 및 도 16은 service_cast_type_descriptor()를 설명하기 위한 도면이다. 도 15에서 이종망 서비스를 정의하는 service_cast_type의 값은 도 16을 참조하면 알 수 있다. 즉, VCT에 적용되는 service_type은 hybrid service, service_type 두 가지 방법 가운데 하나를 선택적으로 이용하여 서비스 형태를 알릴 수 있다. 도 16에서 0x00 값으로 정의되는 RF_cast_only는 기준/부가 영상이 기존의 RF 망을 통해 제공됨을 나타내며, 0x01 값으로 정의되는 Hybridcast는 기준영상이 RF 망을 통해 제공되며, 부가영상이 이종망을 통해 제공됨을 나타낸다.

상술한 바와 같이 VCT에 의해 하위호환성을 가지는 일반 2D DTV 서비스와 이종망 기반의 서비스 또는 이종망 기반의 3D서비스를 동시에 제공할 수 있다. 그리고, 해당 서비스 채널을 통해 이벤트로 지칭되는 프로그램 단위의 컨텐츠가 제공되는데, 이는 이벤트 단위의 정보를 표현하는 EIT로 그 이벤트 특징을 구체적으로 기술할 수 있다. 여기서, 이종망 기반 다수의 컨텐츠를 기술하기 위한 시그널링 데이터가 이종망 서비스에 해당하는 EIT를 통해 추가적으로 제공될 수 있다.

구체적으로, 제1 멀티미디어 데이터의 재생 시간 정보는 start_time, length_in_seconds로 EIT에 정의되어 있으므로 추가적인 정의는 불필요하다. 다만, 경우에 따라 제2 멀티미디어 데이터와의 연동정보로 사용될 수 있다.

제1 멀티미디어 데이터의 식별 정보는 예를 들어, UCI (Universal and Ubiquitous Content Identifier)는 컨텐츠에 따라 유일한 값을 가지므로 제1 멀티미디어 데이터와 제2 멀티미디어 데이터의 연동을 위한 식별자로 이용이 가능하다. 또한, UCI를 이용하는 경우 해상도 및 포맷 정보가 UCI상에 포함되기 때문에 UCI를 통해 컨텐츠 속성 정보도 함께 제공할 수도 있다.

제2 멀티미디어 데이터의 재생 시간 정보는 supplemental_contents_start_time, supplemental_contents_play_end_time 또는 supplemental_contents_length_in_seconds로 정의될 수 있으며, 제1 멀티미디어 데이터와의 연동정보로 사용될 수도 있다. supplemental_contents_play_start_time은 부가 컨텐츠 재생 시작 시간을 의미하며, supplemental_contents_play_end_time은 제2 멀티미디어 데이터의 재생 종료 시간을 의미하며, supplemental_contents_length_in_seconds는 제2 멀티미디어 데이터의 재생 길이를 의미한다.

제2 멀티미디어 데이터의 수신 시간 정보는 제2 멀티미디어 데이터의 수신 가능 시작시간을 나타내는 supplemental_contents_distribution_start_time, 제2 멀티미디어 데이터의 수신 가능 종료시간을 나타내는 supplemental_contents_distribution_end_time로 정의될 수 있다.

제2 멀티미디어 데이터의 수신 경로 정보는 지상파, IP 망, 케이블, 위성 등등 다양한 방법으로 정의할 수 있으며, hybrid_cast_net_type을 통해 정의될 수 있다.

도 17은 hybrid_cast_net_type의 종류를 설명하기 위한 도면이다. 도 17에서 hybrid_cast_net_type이 0x00 또는 0x01으로 정의되는 경우 hybrid_protocol_type, hybrid_http_protocol_type, selector_byte를 통해 제2 멀티미디어 데이터에 대한 경로 및 프로토콜 정보를 제공할 수 있다. hybrid_cast_net_type이 0x02 또는 0x03으로 정의되는 경우 linkage_transport_stream_id, linkage_original_network_id, linkage_service_id를 통해 제2 멀티미디어 데이터에 대한 경로를 제공할 수 있다.

도 18은 hybrid_protocol_type의 예를 나타내는 도면이다. hybrid_protocol_type은 제2 멀티미디어 데이터의 획득 방법과 관련한 프로토콜 종류 기술한다.

도 19는 hybrid_http_protocol_type의 예를 나타내는 도면이다. hybrid_http_protocol_type은 hybrid_protocol_type이 0x000(Transport via HTTP)으로 정의되는 경우 HTTP protocol의 종류를 구체적으로 제시할 수 있다.

hybrid_http_receive_type은 hybrid_protocol_type이 0x000(Transport via HTTP)으로 정의되는 경우 HTTP 프로토콜 기반의 스트리밍으로 수신하는지, HTTP프로토콜 기반의 다운로드로 수신하는지를 지시한다.

selector_byte는 제2 멀티미디어 데이터의 수신이 가능한 경로 정보를 표시하며 제2 멀티미디어 데이터 수신을 위한 프로토콜에 따라(예를 들어, HTTP기반 프로토콜, NRT기반 프로토콜 등) URL 정보 제공 방식에 차이가 있을 수 있다. 예를 들어, HTTP기반 프로토콜은 'http://www.hybrid.co.kr/'와 같은 형태로, NRT기반 프로토콜은 'nrt://{atsc_tsId}.{subnet_id}.{nrt_service_id}/{nrt_content_linkage}[/{file name}]'와 같은 형태로 제공될 수 있다.

한편, linkage_transport_stream_id는 제2 멀티미디어 데이터가 제공되는 TSID 지시하며, linkage_original_network_id는 제2 멀티미디어 데이터가 제공되는 고유한 network id를 지시하며, linkage_service_id는 부가컨텐츠가 제공되는 service_id를 지시한다.

제2 멀티미디어 데이터의 식별 정보는 제2 멀티미디어 데이터를 식별할 수 있는 컨텐츠 고유의 값을 제공함으로써 제2 멀티미디어 데이터와 제1 멀티미디어 데이터를 연동하는 기준으로 사용할 수 있다. 예를 들어, UCI (Universal and Ubiquitous Content Identifier)는 컨텐츠에 따라 유일한 값을 가지므로 제1 멀티미디어 데이터와 제2 멀티미디어 데이터의 연동을 위한 식별자로 이용이 가능하다. 또한, UCI를 이용하는 경우 해상도 및 포맷 정보가 UCI상에 포함되기 때문에 UCI를 통해 컨텐츠 속성 정보도 함께 제공할 수도 있다.

제2 멀티미디어 데이터의 속성 정보란 제2 멀티미디어 데이터의 속성에 관련한 정보로 데이터 포맷, 코덱, 해상도, 데이터 사이즈, 컨텐츠 제공 형태(예를 들어, 3D 컨텐츠의 경우 제2 멀티미디어 데이터의 L 또는 R 영상 지시, 2D 컨텐츠로 활용 가능 여부) 등의 제2 멀티미디어 데이터가 가지는 속성에 관련된 정보를 제공할 수 있다.

제2 멀티미디어 데이터의 보호 정보란 제2 멀티미디어 데이터를 보호하기 위한 정보로서 Conditional Access 정보, Play Limitation 정보, Copy Protection 정보 등을 포함할 수 있다. 구체적으로, 제2 멀티미디어 데이터의 보호 정보는 contents_copy_protection_indicator, contents_play_restriction_indicator로 정의될 수 있다. contents_copy_protection_indicator는 수신한 부가 컨텐츠가 수신기 밖으로 복사되는 것을 제한할 수 있으며, contents_play_restriction_indicator는 수신한 부가 컨텐츠에 대해 제2 멀티미디어 데이터의 재생 시간 정보에서 정의한 재생 시간 이전에는 재생이 불가능하도록 제한할 수 있다.

도 20은 이종망 서비스 채널에 대한 EIT 구성의 예를 나타내는 도면이다. 도 20을 참조하면 제1 멀티미디어 데이터에 대한 시그널링 정보(제1 멀티미디어 데이터의 식별 정보)및 제2 멀티미디어 데이터에 대한 시그널링 정보(제2 멀티미디어 데이터의 재생 시간 정보, 제2 멀티미디어 데이터의 수신 시간 정보, 제2 멀티미디어 데이터의 수신 경로 정보, 제2 멀티미디어 데이터의 식별 정보, 제2 멀티미디어 데이터의 서비스 합성 정보, 제2 멀티미디어 데이터의 속성 정보 및 제2 멀티미디어 데이터의 보호 정보)가 각각 contents_identification_descriptor() 및 hybrid_supplemental_contents_desciptor()를 통해 제공됨을 알 수 있다.

도 21은 도 20의 contents_identification_descriptor()의 예를 나타내는 도면이다. 도 21에 따르면 컨텐츠 식별을 위한 고유의 값의 예로 UCI가 제공됨을 알 수 있다.

도 22는 도 20의 hybrid_supplemental_contents_desciptor()의 예를 나타내는 도면이다. 도 22에 따르면 제2 멀티미디어 데이터에 대한 시그널링 정보(또는, 시그널링 데이터)는 hybrid_supplemental_contents_desciptor()의 '부가영상 관련정보' 영역에 포함될 수 있다.

< PSI 를 통한 시그널링 >

도 23은 단일망 서비스 및 이종망 서비스의 TVCT 및 PMT 구성의 예를 나타내는 도면이다. 도 13에서와 같은 형태로 PSIP 시그널링이 정의되는 경우 해당 전송 스트림은 두 개의 프로그램 구성(ch9-1: service_type= 0x02, program_number=0x1(단일망 또는 2D서비스) ch9-2: service_type= 0x09, program_number=0x2(이종망 또는 3D서비스))을 가지며 이는 두 개의 PMT와 program_number를 기준으로 연결될 수 있다. 이때, 두 개의 프로그램은 공통으로 기준영상, 오디오 정보를 포함하며 이종망 3D 서비스는 추가적으로 부가영상에 대한 시그널링 데이터를 포함하는 private stream에 관한 정보를 포함한다. 도 23에서는 private stream이 0x05으로 정의되는 것으로 도시 하였으나 0x06으로 정의될 수도 있다.

도 24는 단일망 서비스 및 이종망 서비스를 포함하는 MPEG-2 스트림의 제공 형태를 나타내는 도면이다. 전송 스트림 상에서 제공되는 Video, Audio, Private Data가 단일망 서비스 및 이종망 서비스별로 각각의 PMT 구성을 가질 수 있다. 상술한 바와 같이, 이종망 서비스를 지시하는 PMT(program_number=0x002)에서 private data를 이용하여 이종망을 통해 제공되는 부가영상 관련정보를 제공할 수 있어야 하며, 이를 지시하기 위해 PMT의 private data ES loop내의 hybrid_signaling_descriptor()로 이종망을 통해 제공되는 부가영상 관련정보의 존재 여부를 알릴 수 있다.

도 25는 PMT를 통한 hybrid_signaling_descriptor() 제공의 예를 나타내는 도면이다. PMT 상에서 hybrid_signaling_descriptor()가 제공되면 부가영상 관련 정보가 private stream 형태로 제공되고 있음을 알 수 있다. 도 25에서는 private stream이 0x05으로 정의되는 것으로 도시 하였으나 0x06으로 정의될 수도 있다.

도 26은 hybrid_signaling_descriptor()의 예를 나타내는 도면이다. 도 27에서 descriptor 내에서 제공되는 HCIT_version_number 필드는 Private Stream을 통해 제공되며 부가영상 관련 정보를 가지는 HCIT 테이블의 버젼을 나타낸다. HCIT_version_number의 값이 변경되면 테이블에서 제공하는 내용이 업데이트 되었음을 지시한다.

< Private Stream 을 통한 시그널링 >

상술한 바와 같이 PSI의 PMT를 통해 이종망으로 전송되는 제2 멀티미디어 데이터에 대한 시그널링 정보가 Private Stream로 제공될 수 있다. 이하에서는, Private Stream 내에서 제공되는 부가영상에 대한 시그널링 정보를 정의하고, HCIT(Hybrid Cast Infomation Table)라는 신규 테이블을 통해 이를 구체적으로 표현할 수 있음을 설명한다. Private Stream 상에서 제공될 수 있는 제2 멀티미디어 데이터에 대한 시그널링 정보는 제2 멀티미디어 데이터의 재생 시간 정보, 제2 멀티미디어 데이터의 수신 시간 정보, 제2 멀티미디어 데이터의 수신 경로 정보, 제2 멀티미디어 데이터의 식별 정보, 제2 멀티미디어 데이터의 서비스 합성 정보, 제2 멀티미디어 데이터의 속성 정보 및 제2 멀티미디어 데이터의 보호 정보를 포함할 수 있다. 한편, Private Stream을 통해 제2 멀티미디어 데이터에 대한 시그널링 정보뿐만 아니라 제1 멀티미디어 데이터에 대한 시그널링 정보도 함께 제공될 수 있다.

제1 멀티미디어 데이터의 재생 시간 정보는 start_time과 end_time 또는 length_in_seconds로 정의될 수 있으며 제2 멀티미디어 데이터와의 연동정보로 사용될 수도 있다. 여기서, start_time은 제1 멀티미디어 데이터의 재생 시작 시간을 end_time은 제1 멀티미디어 데이터의 재생 종료 시간을, length_in_seconds는 제2 멀티미디어 데이터의 재생 길이를 의미한다.

제1 멀티미디어 데이터의 식별 정보는 제1 멀티미디어 데이터를 식별할 수 있는 컨텐츠 고유의 값을 제공함으로써 제1 멀티미디어 데이터와, 제2 멀티미디어 데이터를 연동하는 기준으로 사용될 수 있다. 예를 들어, UCI (Universal and Ubiquitous Content Identifier)는 컨텐츠에 따라 유일한 값을 가지므로 제1 멀티미디어 데이터와 제2 멀티미디어 데이터의 연동을 위한 식별자로 이용이 가능하다. 또한, UCI를 이용하는 경우 해상도 및 포맷 정보가 UCI상에 포함되기 때문에 UCI를 통해 컨텐츠 속성 정보도 함께 제공할 수도 있다.

제2 멀티미디어 데이터의 재생 시간 정보는 제2 멀티미디어 데이터가 재생되는 시간을 지시하며 supplemental_contents_start_time, supplemental_contents_play_end_time 또는 supplemental_contents_length_in_seconds로 정의될 수 있다. 또한, 제1 멀티미디어 데이터와의 연동정보로 사용될 수도 있다. supplemental_contents_play_start_time은 부가 컨텐츠 재생 시작 시간을 의미하며, supplemental_contents_play_end_time은 제2 멀티미디어 데이터의 재생 종료 시간을 의미하며, supplemental_contents_length_in_seconds는 제2 멀티미디어 데이터의 재생 길이를 의미한다.

제2 멀티미디어 데이터의 수신 경로 정보는 지상파, IP 망, 케이블, 위성 등등 다양한 방법으로 정의할 수 있으며, hybrid_cast_net_type을 통해 정의될 수 있다. 상술한 도 18에서와 같이 hybrid_cast_net_type이 0x00 또는 0x01으로 정의되는 경우 hybrid_protocol_type, hybrid_http_protocol_type, selector_byte를 통해 제2 멀티미디어 데이터에 대한 경로 및 프로토콜 정보를 제공할 수 있다. hybrid_cast_net_type이 0x02 또는 0x03으로 정의되는 경우 linkage_transport_stream_id, linkage_original_network_id, linkage_service_id를 통해 제2 멀티미디어 데이터에 대한 경로를 제공할 수 있다.

hybrid_protocol_type은 제2 멀티미디어 데이터의 획득 방법과 관련한 프로토콜 종류를 기술하며, hybrid_http_protocol_type은 hybrid_protocol_type이 0x000(Transport via HTTP)으로 정의되는 경우 HTTP protocol의 종류를 구체적으로 제시하며, hybrid_http_receive_type은 hybrid_protocol_type이 0x000(Transport via HTTP)으로 정의되는 경우 HTTP 프로토콜 기반의 스트리밍으로 수신하는지, HTTP프로토콜 기반의 다운로드로 수신하는지를 지시한다.

상술한 시그널링 데이터에 대한 설명을 바탕으로 이종망 기반의 디지털 방송 HCIT(Hybrid Cast Information Table)의 구성 형태에 대해 구체적으로 설명한다.

도 27은 HCIT의 예를 나타내는 도면이다. 도 27의 각 필드 또는 Descriptor는 상술한 시그널링 정보를 포함한다.

구체적으로, 제1 멀티미디어 데이터의 재생 시간 정보는 HCIT의 start_time, length_in_seconds 필드를 통해 제공될 수 있다.

제1 멀티미디어 데이터의 식별 정보, 예를 들어, UCI는 HCIT의 1st descriptor loop의 contents_identification_descriptor()를 통해 제공할 수 있다.

제2 멀티미디어 데이터의 재생 시간 정보는 HCIT의 supplemental_contents_start_time, supplemental_contents_length_in_seconds 필드를 통해 제공할 수 있다.

제2 멀티미디어 데이터의 수신 시간 정보는 도 28을 참조하여 설명한다. 도 28은 distribution_info_descriptor() 의 예를 나타내는 도면이다. 도 28에 따르면 HCIT의 2nd descriptor loop에서 신규 정의되는 distribution_info_descriptor()를 이용하여 supplemental_contents_distribution_start_time, supplemental_contents_distribution_end_time 값을 제공할 수 있다.

제2 멀티미디어 데이터의 수신 경로 정보는 HCIT의 hybrid_net_cast_type필드를 통해 제2 멀티미디어 데이터가 제공되는 망 종류를 기술함으로써 제공될 수 있다.

HCIT의 hybrid_net_cast_type가 0x00(지상파),0x01(IP 망)인 경우 2nd descriptor loop에서 기존 지상파 개방형 하이브리드 TV(OHTV : Terrestrial Open Hybrid TV) 표준에서 정의하는 transport_protocol_descriptor()를 이용하여 제2 멀티미디어 데이터의 수신 경로 정보를 제공할 수 있으며, transport_protocol_descriptor()의 reserved 필드를 확장하여 hybrid_http_protocol_type, hybrid_http_receive_type 정보를 제공할 수 있다.

도 29는 linkage descriptor()의 예를 나타내는 도면이다. HCIT의 hybrid_net_cast_type가 0x02(케이블),0x03(위성)인 경우 2nd descriptor loop에서 linkage_transport_stream_id, linkage_original_network_id, linkage_service_id 정보를 포함하는 linkage descriptor()로 제2 멀티미디어 데이터의 수신 경로 정보를 제공할 수 있다.

제2 멀티미디어 데이터의 식별 정보, 예를 들어, UCI는 HCIT의 2nd descriptor loop 의 contents_identification_descriptor()를 통해 제공될 수 있다.

제2 멀티미디어 데이터의 서비스 합성 정보는 HCIT의 2nd descriptor loop의 contents_service_composition_descriptor()를 통해 제공될 수 있다.

제2 멀티미디어 데이터의 속성 정보는 HCIT의 2nd descriptor loop의 contents_property_descriptor()를 통해 제공될 수 있다.

제2 멀티미디어 데이터의 보호 정보는 도 30을 참조하여 설명한다. 도 30은 contents_protection_descriptor()의 예를 나타내는 도면이다. 도 30에 따르면 HCIT의 2nd descriptor loop의 contents_protection_descriptor()를 통해 contents_copy_protection_indicator, contents_play_restriction_indicator 정보 가 제공될 수 있다.

멀티플렉서(116)는 제1 멀티미디어 데이터, 제1 시그널링 데이터, 제2 시그널링 데이터를 멀티플렉싱하여 제1 전송 데이터를 생성한다. 구체적으로, 멀티플렉서(116)는 동기화 정보가 부가되어 인코딩된 제1 멀티미디어 데이터, 시그널링 데이터 생성부(115)에서 생성된 제1 시그널링 데이터 및 제2 시그널링 데이터를 입력받아 멀티플렉싱 함으로써 제1 전송 데이터를 생성할 수 있다.

제1 전송부(120)는 멀티플렉서(116)에서 생성된 제1 전송 데이터를 수신 장치(200)로 전송한다. 제1 전송부(120)는 제1 전송 데이터를 전송망에 적합하도록 추가적인 처리를 수행하여 수신 장치(200)로 전송할 수 있다. 예를 들어, 제1 전송망이 RF 망인 경우 제1 전송부(120)는 변조기(미도시) 및 업컨버터(미도시) 등을 포함할 수 있으며 RF 신호를 전송하기 위해 변조, 업컨버팅 등을 수행할 수 있다.

제2 전송부(130)는 제2 인코더(114)에서 인코딩된 제2 멀티미디어 데이터를 수신 장치(200)로 전송한다. 제2 전송부(130)는 제2 전송 데이터를 전송망에 적합하도록 추가적인 처리를 수행하여 수신 장치(200)로 전송할 수 있다. 예를 들어, 제2 전송 망이 IP 망인 경우, 제2 전송 데이터를 IP 스트림 형태로 변환하여 수신 장치(200)로 전송할 수 있다.

또한, 제2 전송부(130)는 제2 전송 데이터를 세그먼트 단위로 수신 장치(200)로 전송할 수 있다. 이를 위해, 제2 전송부(130)는 제2 전송 데이터를 복수의 세그먼트로 구분하고, 기 설정된 개수의 세그먼트에 대한 정보를 생성하여 수신 장치(200)로 전송할 수 있다.

제2 전송부(130)는 제2 전송망으로 제2 멀티미디어 데이터를 전송하는 경우 실시간 또는 비실시간으로 전송할 수 있다. 즉, 수신 장치(200)는 제1 멀티미디어 데이터의 수신 시간(즉, 멀티미디어 컨텐츠의 방송 시간)에 맞추어 제2 멀티미디어 데이터를 실시간 스트림으로 수신하거나, 제2 멀티미디어 데이터의 방송 시간 이전에 미리 제2 멀티미디어 데이터를 수신하여 저장하고, 제1 멀티미디어 데이터가 수신되는 경우 기 저장된 제2 멀티미디어 데이터를 이용하여 컨텐츠를 재생할 수도 있다.

한편, 생방송 멀티미디어 컨텐츠의 경우에는 비 실시간으로 수신하는 것이 불가능하며, 제2 멀티미디어 데이터를 비 실시간으로 수신할 수 있는 경우에도, 수신 장치(200)는 제2 멀티미디어 데이터를 미리 수신하여 저장하여야 하므로 별도의 저장 공간을 유지하여야 하는 문제가 있다. 또한, 멀티미디어 컨텐츠의 방송 시간 이전에 제2 멀티미디어 데이터를 제공함으로써, 방송 시간 이전에 컨텐츠가 유출될 수 있는 문제점이 발생할 수도 있다. 따라서, 제2 멀티미디어 데이터를 실시간으로 전송하여야 할 필요성이 있다.

한편, 제2 멀티미디어 데이터가 실시간으로 제공되는 경우, 특히, IP 망을 통해 제공되는 경우 패킷 손실 또는 지연과 같은 문제가 발생할 수 있다. IP 망을 통해 실시간으로 제공되는 제2 멀티미디어 데이터의 패킷 손실이 발생하는 경우, 3D 멀티미디어 컨텐츠와 같은 경우에는 시청자에게 제공되는 화면이 정상적으로 제공되지 않아 사용자에게 피로감 등을 유발할 수 있다. 이에 따라, 제2 전송부는 패킷 손실이 발생할 수 있는 UDP 기반이 아닌 TCP 기반 프로토콜을 적용하여 제2 전송 데이터를 제공할 수 있다. 특히, TCP 기반의 프로토콜 중 실시간 전송을 목적으로 하는 HTTP 기반 스트리밍 전송 방식이 적용될 수 있다. 구체적으로, HTTP 기반 스트리밍은 HLS(HTTP Live Streaming), MPEG DASH(Dynamic Adaptive Streaming over HTTP), OIPF HAS(HTTP Adaptive Streaming), MS Smooth Streaming 등의 방식이 적용될 수 있다. 이에 대해서는 추후 도 32를 참조하여 보다 구체적으로 설명하며, 설명의 편의를 위해 HTTP 기반 스트리밍 방식 중 HLS을 예를 들어 설명한다.

도 31은 본 발명의 일 실시 예에 따른 수신 장치의 구성을 나타내는 블럭도이다. 도 31에 따르면, 수신 장치(200)는 제1 수신부(210), 제2 수신부(22), 시그널링 데이터 검출부(231), 신호 처리부(232) 및 동기화부(233)를 포함한다.

제1 수신부(210)는 송신 장치(100)로부터 제1 전송망을 통해 제1 전송 데이터를 수신한다. 상술한 바와 같이 제1 전송 데이터는 제1 멀티미디어 데이터, 제1 동기화 정보, 제1 시그널링 데이터 및 제2 시그널링 데이터를 포함할 수 있다.

제2 수신부(220)는 송신 장치(200)로부터 제2 전송망을 통해 제2 전송 데이터를 수신한다. 상술한 바와 같이 제2 전송 데이터는 제2 멀티미디어 데이터 및 제2 동기화 정보를 포함할 수 있다.

여기서, 제2 수신부(220)는 제2 시그널링 데이터에 포함된 정보를 이용하여 제2 전송 데이터의 세그먼트에 대한 정보를 수신하고, 수신된 세그먼트에 대한 정보를 이용하여 제2 전송 데이터를 세그먼트 단위로 수신할 수 있다.

이에 대해, 도 32를 참조하여 보다 구체적으로 설명한다. 도 32는 시간의 흐름에 따른 HLS 방식의 데이터 송수신을 설명하기 위한 도면이다. 송신 장치(100)는 제2 전송 데이터를 세그먼트 단위로 구분하고, 각 세그먼트에 대한 리스트 정보를 포함하는 메니페스트 파일(메타데이터, MPD 등)을 실시간으로 생성하여 외부 서버로 업데이트한다. 여기서, 메니페스트 파일이 생성되는 모든 세그먼트에 대한 정보를 포함하기는 어렵기 때문에, 송신 장치(100)는 기 설정된 개수의 세그먼트를 포함하는 윈도우에 해당하는 세그먼트에 대한 정보만을 지속적으로 업데이트할 수 있다.

수신 장치(200)는 상술한 제2 시그널링 데이터(구체적으로는 제2 멀티미디어 데이터의 수신 경로 정보)를 이용하여 외부 서버로부터 메니페스트 파일을 미리 수신할 수 있으며, 메니페스트 파일을 이용하여 송신 장치(100)로 제2 전송 데이터를 요청함으로써 제2 전송 데이터를 수신할 수 있다. 구체적으로, 수신 장치(200)는 세그먼트 단위로 구분된 제2 전송 데이터를 요청하기 위한 메니페스트 파일을 수신하고 메니페스트 파일에 포함된 세그먼트 리스트 정보에 기초하여 세그먼트를 주기적으로 요청함으로써, 실시간으로 생성되는 제2 전송 데이터를 수신하여 재생할 수 있다.

상술한 방식으로 HTTP기반 스트리밍을 IP 망 전송에 적용하는 경우, 패킷 손실 없는 전송은 가능하나, RF 망 전송되는 멀티미디어 데이터에 비해 IP 망으로 전송되는 멀티미디어 데이터에 상대적으로 지연이 발생할 수 있다. 이에 따라, 수신 장치(200)는 RF 망으로 제공되는 제1 전송 데이터를 지연시켜 처리하기 위해 PVR을 포함할 수 있다.

수신부는 IP 망을 통해 제공되는 제2 전송 데이터의 상대적인 지연 정도에 따라 RF 망을 통해 수신되는 제1 전송 데이터를 PVR에 저장하여 지연시키며, 이후, IP 망을 통해 제2 전송 데이터가 수신되면 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 동기화하여 재생할 수 있다.

다만, PVR을 이용하여 RF 망에 대한 IP 망의 상대적 지연을 보상이 가능하더라도 RF 망과 IP 망을 통해 제공되는 데이터의 지연 시간이 커지면 다음과 같은 문제점이 발생할 수 있다. 첫째로, RF 망으로 제공되는 컨텐츠의 지연 시간 증가로 인한 버퍼링 양이 증가하여 저장용량이 충분치 않은 경우에는 일정 수준 이상의 버퍼링이 어려울 수 있다. 둘째로, RF 망을 통해 수신되는 제1 멀티미디어 데이터만을 재생하는 수신 장치에 비하여 제2 멀티미디어 데이터를 함께 수신하여 재생하는 수신 장치의 재생 시간이 지연될 수 있다. 구체적으로, 이종망 서비스 제공이 불가능한 기존 수신 장치는 RF 망을 통해 제공되는 제1 멀티미디어 데이터를 지연 없이 재생할 수 있으나, 이종망 서비스 제공이 가능한 수신 장치는 RF 망과 IP 망으로 제공되는 컨텐츠를 동시에 이용하기 위해 IP 망 지연만큼 RF망 컨텐츠를 지연시켜야 하므로 기존 수신 장치에 비해 상대적으로 늦게 재생이 될 수 있다.

따라서, IP 망의 지연 정도를 최소한으로 하는 것이 바람직하며, 이를 위해 수신 장치(200)는 윈도우 단위로 수신된 복수의 세그먼트 중 가장 최근 생성된 세그먼트부터 재생하도록 할 수 있다.

구체적으로, 송신 장치(100)는 실시간으로 세그먼트를 생성하고 메니페스트 파일에 포함된 세그먼트 리스트를 지속적으로 업데이트 한다. 또한, 메니페스트 파일은 실시간으로 생성되는 세그먼트의 리스트를 모두 포함할 수는 없기 때문에 특정 윈도우 단위만큼의 리스트만을 지속적으로 업데이트할 수 있다. 도 32를 참조하면 시간의 흐름에 따라 생성되는 세그먼트와 그에 대한 윈도우 단위의 m3u8의 리스트 형태를 가질 수 있다. 예를 들어, 윈도우 사이즈가 4인 경우 't5' 시간대에서는 세그먼트 1 내지 5가 생성되어 있으며, 메니페스트 파일(playlist.m3u8(t4))은 세그먼트 2 내지 5에 대한 리스트를 포함할 수 있다. 't6' 시간대에서는 세그먼트 1 내지 6이 생성되어 있으며, 메니페스트 파일(playlist.m3u8(t5))은 세그먼트 3 내지 6에 대한 리스트를 포함할 수 있다.

여기서, 수신 장치는 메니페스트 파일인 playlist.m3u8 파일을 수신하여, 수신된 메니페스트 파일에 포함된 리스트를 이용하여 수신할 세그먼트를 결정할 수 있다. 수신 장치(200)가 세그먼트 2 내지 5의 리스트를 가지는 'playlist.m3u8(t4)' 파일을 수신한 경우 메니페스트 파일에 포함된 리스트 중 어느 하나의 세그먼트를 수신할 수 있다. 여기서, 가장 먼저 생성되었던 세그먼트 2를 수신하는 경우를 예로 들면, 세그먼트 2는 해당 playlist.m3u8(t4) 리스트 중 가장 오래전에 생성된 세그먼트로 RF 망과 지연차이가 가장 큰 세그먼트이다. 따라서, 지연 시간을 최소화하기 위해서는 가장 최근에 생성된 세그먼트를 수신하는 것이 바람직하다. 따라서, 수신 장치(200)는 세그먼트 2 내지 5 중 세그먼트 5를 요청함으로써 RF 망과의 최소지연을 갖는 세그먼트를 수신할 수 있다.

다만, 상술한 바와 같이 메니페스트 파일에 포함된 리스트 중 가장 최근에 생성된 리스트를 수신하는 경우에 있어서, IP 망의 상태가 불안정한 경우에는 컨텐츠 재생시 끊김 문제가 발생할 수 있다. 예를 들어, 도 32에서 't5' 타이밍에 생성된 'playlist.m3u8(t4)'에 포함된 Segment 2 내지 5의 세그먼트 리스트 중 세그먼트 5를 요청하여 수신한 경우 끊김없는 연속적인 재생을 위해서는 세그먼트 6을 연속적으로 수신할 수 있어야 한다. 다만, 세그먼트 6에 대한 정보를 포함하는 메니페스트 파일 'playlist.m3u8(t5)'은 새로운 세그먼트가 생성되는 시간적 간격인 세그먼트 듀레이션(segment duration) 만큼의 지연을 가지고 연속적으로 생성되기 때문에 세그먼트 5를 요청하여 수신한 후 세그먼트 6을 수신하는 시간적 간격이 세그먼트 듀레이션만큼 발생한다.(예를 들어, 세그먼트가 2초의 듀레이션을 가지는 경우 제2 전송부(130)는 2초마다 새로운 세그먼트를 생성하고, 그에 따른 메니페스트 파일을 업데이트한다.) 또한, 수신 장치(200)는 세그먼트 6이 생성되자마자 해당 세그먼트에 대한 정보를 포함하는 playlist.m3u8(t5)파일을 수신하고, 세그먼트 6을 요청하여 수신하여야 한다. 일반적으로, IP 망의 전송 환경이 위와 같은 동작을 지원할 수 있을 만큼 이상적이지 않으므로, 상술한 과정에 지연이 발생하여 하나의 세그먼트에 포함된 멀티미디어 데이터의 재생 시간을 초과하는 경우에는 재생 화면이 끊기는 문제가 발생할 수 있다.

이에 따라, 수신 장치(200)는 메니페스트 파일에 포함된 리스트 중 가장 최근 생성된 세그먼트가 아닌 IP 망의 지연 정도를 고려하여 끊김 없는 재생이 가능할 수 있는 범위내에서 가장 최근에 생성된 세그먼트를 수신할 수 있다.

시그널링 데이터 검출부(231)는 제1 전송 데이터에 포함된 제1 시그널링 데이터 및 제2 시그널링 데이터를 검출한다. 상술한 바와 같이 제1 시그널링 데이터는 제1 멀티미디어 데이터의 재생 시간 정보 및 제1 멀티미디어 데이터의 식별 정보 중 적어도 하나를 포함할 수 있으며, 제2 시그널링 데이터는 상기 제2 멀티미디어 데이터의 재생 시간 정보, 제2 멀티미디어 데이터의 수신 시간 정보, 제2 멀티미디어 데이터의 수신 경로 정보, 제2 멀티미디어 데이터의 식별 정보, 제2 멀티미디어 데이터의 서비스 합성 정보, 제2 멀티미디어 데이터의 속성 정보 및 제2 멀티미디어 데이터의 보호 정보 중 적어도 하나를 포함할 수 있다.

신호 처리부(232)는 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 신호 처리할 수 있다. 특히, 신호 처리부(232)는 제1 멀티미디어 데이터를 디코딩하기 위한 제1 디코더(미도시) 및 제2 멀티미디어 데이터를 디코딩하기 위한 제2 디코더(미도시)를 포함할 수 있다. 각 디코더는 송신 장치(100)의 제1 인코더(132) 및 제2 인코더(134)의 역과정을 수행하여 멀티미디어 데이터를 디코딩할 수 있다. 이 외에도 신호 처리부(232)는 스케일러(미도시), 프레임 레이트 변환부(미도시) 등의 구성을 포함할 수 있다.

동기화부(233)는 제1 동기화 정보 및 제2 동기화 정보에 기초하여 신호처리된 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성한다. 구체적으로, 동기화부(233)는 동기화 정보로써 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터에 포함된 타임코드를 이용하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화할 수 있다.

한편, 도 32에서는 동기화부(233)가 신호 처리부(232)에 이후에 존재하여 신호처리된 멀티미디어 데이터를 동기화하는 것으로 설명하였으나, 동기화부(233)는 신호 처리부(232) 이전에 존재하여 신호처리되기 전 멀티미디어 데이터를 동기화할 수도 있으며, 신호 처리부(232)에 포함되어 신호 처리 과정에서 멀티미디어 데이터를 동기화할 수도 있다.

도 33은 본 발명의 다른 실시 예에 따른 멀티미디어 데이터 송수신 시스템을 나타내는 도면이다. 송수신 시스템(2000)은 도 1 및 도 2의 송수신 시스템(1000)과 동작이 동일하나, 도 1 및 도 2의 송수신 시스템(1000)의 송신 장치(100)가 복수의 장치를 포함하는 송신 시스템으로 구현된다는 점에서 차이가 있다. 도 33에 따르면 송수신 시스템(2000)은 컨텐츠 처리 장치(300), 제1 송신 장치(400), 제2 송신 장치(500) 및 수신 장치(200)를 포함한다.

컨텐츠 처리 장치(300)는 송신 장치(100)의 데이터 생성부(110)에, 제1 송신 장치(400)는 송신 장치(100)의 제1 전송부(120)에, 제2 송신 장치(500)는 송신 장치(100)의 제2 전송부(130)에 대응하는 구성이며, 구체적인 설명은 생략하기로 한다.

도 34는 본 발명의 일 실시 예에 따른 송신 장치의 송신 방법을 설명하기 위한 흐름도이다. 도 34에 따르면 제1 전송 데이터를 생성한다(S3410). 제1 전송 데이터는 멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함한다.

구체적으로, 제1 전송 데이터를 생성하는 단계는, 제1 동기화 정보로써 타임 코드를 생성하여 제1 멀티미디어 데이터에 부가하는 단계, 타임 코드가 부가된 제1 멀티미디어 데이터를 인코딩하는 단계, 제1 시그널링 데이터 및 제2 시그널링 데이터를 생성하는 단계, 제1 멀티미디어 데이터 제1 시그널링 데이터 및 제2 시그널링 데이터를 멀티플렉싱하여 제1 전송 데이터를 생성하는 단계를 포함할 수 있다.

여기서, 제1 시그널링 데이터는 제1 멀티미디어 데이터의 재생 시간 정보 및 제1 멀티미디어 데이터의 식별 정보 중 적어도 하나를 포함할 수 있으며, 제2 시그널링 데이터는 제2 멀티미디어 데이터의 재생 시간 정보, 제2 멀티미디어 데이터의 수신 시간 정보, 제2 멀티미디어 데이터의 수신 경로 정보, 제2 멀티미디어 데이터의 식별 정보, 제2 멀티미디어 데이터의 서비스 합성 정보, 제2 멀티미디어 데이터의 속성 정보 및 제2 멀티미디어 데이터의 보호 정보 중 적어도 하나를 포함할 수 있다.

한편, 제1 시그널링 데이터는 제1 전송 데이터의 PSIP 및 PSI 중 적어도 하나에 기록될 수 있으며, 제2 시그널링 데이터는 제1 전송 데이터의 PSIP 및 Private Stream 중 적어도 하나에 기록될 수 있다.

그리고, 제2 전송 데이터를 생성한다(S3420). 제2 전송 데이터는 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터 및 제2 동기화 정보를 포함한다. 제2 전송 데이터를 생성하는 단계는, 제2 동기화 정보로써 제1 멀티미디어 데이터에 부가된 타임 코드와 동일한 타임 코드를 생성하여 제2 멀티미디어 데이터에 부가하는 단계 및 타임 코드가 부가된 제2 멀티미디어 데이터를 인코딩하는 단계를 포함할 수 있다.

이후, 제1 전송 데이터를 방송망을 통해 전송하고(S3430), 제2 전송 데이터를 IP 망을 통해 전송한다(S3440). 여기서, 제2 전송 데이터를 전송하는 단계는, 제2 전송 데이터를 복수의 세그먼트로 구분하는 단계, 기 설정된 개수의 세그먼트에 대한 정보를 생성하는 단계, 세그먼트에 대한 정보에 따라 제2 전송 데이터를 세그먼트 단위로 전송하는 단계를 포함할 수 있다.

도 35는 본 발명의 일 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다. 도 35에 따르면 제1 전송 데이터를 방송망을 통해 수신한다(S3510). 그리고, 제1 전송 데이터로부터 제1 시그널링 데이터 및 제2 시그널링 데이터를 검출한다(S3520). 이후, 제2 전송 데이터를 IP 망을 통해 수신한다(S3530). 구체적으로, 제2 시그널링 데이터에 포함된 정보를 이용하여 제2 전송 데이터의 세그먼트에 대한 정보를 수신하고, 수신된 세그먼트에 대한 정보를 이용하여 제2 전송 데이터를 세그먼트 단위로 수신할 수 있다.

그리고, 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 신호 처리한다(S3540). 그리고, 제1 동기화 정보 및 제2 동기화 정보에 기초하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성한다(S3550). 여기서, 제1 동기화 정보는 상기 제1 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드이며, 제2 동기화 정보는 상기 제2 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드이다. 구체적으로는, 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터가 부가된 타임 코드를 검출하고 검출된 타임 코드를 이용하여 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화할 수 있다.

도 36는 본 발명의 다른 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다. 도 36에 따르면 수신 장치(200)는 제1 멀티미디어 데이터를 수신하여 재생하나(S3610). 그리고, 제2 멀티미디어 데이터에 대한 정보가 존재하는지 판단한다(S3620). 구체적으로, 수신 장치(200)는 제1 멀티미디어 데이터가 포함된 제1 전송 데이터 내에 제2 시그널링 데이터가 존재하는지 판단할 수 있다. 제2 멀티미디어 데이터에 대한 정보가 존재하지 않으면(S3620-N), 제1 멀티미디어 데이터만을 수신하여 재생할 수 있다. 제2 멀티미디어 데이터에 대한 정보가 존재하면(S3620-Y), 기 수신된 제2 멀티미디어 데이터가 존재하는지 판단한다(S3630).

기 수신된 제2 멀티미디어 데이터가 존재하면(S3630-Y)(예를 들어, IP 망을 통해 제2 멀티미디어 데이터를 방송 시간 전 미리 수신한 경우), 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 연동하여 재생한다(S3640). 예를 들어, 제1 멀티미디어 데이터와 제2 멀티미디어 데이터가 3D 컨텐츠를 구성하는 좌안 영상 및 우안 영상인 경우 좌안 영상 및 우안 영상을 조합하여 3D 컨텐츠를 재생할 수 있다.

한편, 기 수신된 제2 멀티미디어 데이터가 존재하지 않으면(S3630-N)(예를 들어, 멀티미디어 컨텐츠가 실시간 방송 컨텐츠인 경우), 수신 가능한 제2 멀티미디어 데이터가 존재하는지 판단한다(S3650). 구체적으로, 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터 중 제2 멀티미디어 데이터의 수신 경로 정보 또는 수신 시간 정보가 존재하는지 여부 및 수신 가능한 시간 정보가 되었는지 여부를 판단하여 수신 가능한 제2 멀티미디어 데이터가 존재하는지 판단할 수 있다.

수신 가능한 제2 멀티미디어 데이터가 존재하지 않으면(S3650-N), 제1 멀티미디어 데이터만을 수신하여 재생할 수 있다(S3610). 수신 가능한 제2 멀티미디어 데이터가 존재하면(S3650-Y), 제 멀티미디어 데이터를 수신하고(S3660), 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 연동하여 재생한다(S3640).

도 37은 본 발명의 또 다른 실시 예에 따른 수신 장치의 수신 방법을 설명하기 위한 흐름도이다. 도 37에 따르면, 제1 멀티미디어 데이터를 수신하여 재생하나(S3710). 그리고, 제2 멀티미디어 데이터에 대한 정보가 존재하는지 판단한다(S3720). 구체적으로, 수신 장치(200)는 제1 멀티미디어 데이터가 포함된 제1 전송 데이터 내에 제2 시그널링 데이터가 존재하는지 판단할 수 있다. 제2 멀티미디어 데이터에 대한 정보가 존재하지 않으면(S3720-N), 제1 멀티미디어 데이터만을 수신하여 재생할 수 있다(S3710). 제2 멀티미디어 데이터에 대한 정보가 존재하면(S3720-Y), 제2 멀티미디어 데이터를 자동으로 수신할지 여부를 판단한다(S3730). 구체적으로, 제2 멀티미디어 데이터가 자동으로 수신되도록 설정되어 있는지, 또는 수동으로 수신되도록 설정되어 있는지 여부를 확인할 수 있다.

제2 멀티미디어 데이터가 자동으로 수신되도록 설정되어 있는 경우(S3730-Y), 제2 멀티미디어 데이터의 수신 가능시간이 되었는지 판단한다(S3740). 제2 멀티미디어 데이터의 수신 가능시간을 확인하여 수신 가능시간인 경우(S3740-Y), 제 멀티미디어 데이터를 수신하여(S3750), 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 연동하여 재생한다(S3760). 예를 들어, 제1 멀티미디어 데이터와 제2 멀티미디어 데이터가 3D 컨텐츠를 구성하는 좌안 영상 및 우안 영상인 경우 좌안 영상 및 우안 영상을 조합하여 3D 컨텐츠를 재생할 수 있다.제2 멀티미디어 데이터의 수신 가능시간이 아닌 경우(S3740-N), 수신 가능한 시간에 제2 멀티미디어 데이터를 수신하도록 수신 명령을 설정한다(S3770). 이후, 제2 멀티미디어 데이터의 수신 가능시간이 되면(S3740), 설정된 수신 명령에 따라 제2 멀티미디어를 수신하여(S3750), 제1 멀티미디어 데이터와 제2 멀티미디어 데이터를 연동하여 재생한다(S3760).

한편, 제2 멀티미디어 데이터가 수동으로 수신되도록 설정되어 있는 경우(S3730-N), 프로그램 가이드를 디스플레이 화면에 제공하여 수신할 제2 멀티미디어 데이터를 직접 선택하도록 할 수 있다(S3780). 이후, 사용자 명령이 입력되었는지를 판단하여(S3790), 사용자로부터 제2 멀티미디어 데이터를 선택하는 명령이 입력되면(S3790-Y), 선택된 제2 멀티미디어 데이터의 수신 가능시간이 되었는지 판단한다(S3740). 사용자로부터 제2 멀티미디어 데이터를 선택하는 명령이 입력되지 않으으면(S3790-N), 제1 멀티미디어 데이터만을 수신하여 재생한다(S3710).

상술한 본 발명의 다양한 실시 예들에 따른 방법을 수행하기 위한 프로그램은 다양한 유형의 기록 매체에 저장되어 사용될 수 있다.

구체적으로는, 상술한 방법들을 수행하기 위한 코드는, 플레시메모리, ROM(Read Only Memory), EPROM(Erasable Programmable ROM), EEPROM(Electronically Erasable and Programmable ROM), 하드디스크, 리무버블 디스크, 메모리 카드, USB 메모리, CD-ROM 등과 같이, 다양한 유형의 비휘발성 기록 매체에 저장되어 있을 수 있다.

이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

100 : 송신 장치 110 : 데이터 생성부
120 : 제1 전송부 130 : 제2 전송부
200 : 수신 장치 210 : 제1 수신부
220 : 제2 수신부 230 : 데이터 처리부

Claims

멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 상기 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 상기 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터 및 상기 제2 멀티미디어 데이터 및 상기 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함하는 제2 전송 데이터를 생성하는 데이터 생성부;
상기 데이터 생성부에서 제공되는 제1 전송 데이터를 방송망을 통해 수신 장치로 전송하는 제1 전송부; 및
상기 데이터 생성부에서 제공되는 제2 전송 데이터를 IP 망을 통해 수신 장치로 전송하는 제2 전송부;를 포함하는 송신 장치.
제1항에 있어서,
상기 제1 시그널링 데이터는 상기 제1 멀티미디어 데이터의 재생 시간 정보 및 상기 제1 멀티미디어 데이터의 식별 정보 중 적어도 하나를 포함하며,
상기 제2 시그널링 데이터는 상기 제2 멀티미디어 데이터의 재생 시간 정보, 상기 제2 멀티미디어 데이터의 수신 시간 정보, 상기 제2 멀티미디어 데이터의 수신 경로 정보, 상기 제2 멀티미디어 데이터의 식별 정보, 상기 제2 멀티미디어 데이터의 서비스 합성 정보, 상기 제2 멀티미디어 데이터의 속성 정보 및 상기 제2 멀티미디어 데이터의 보호 정보 중 적어도 하나를 포함하는 것을 특징으로 하는 송신 장치.
제1항에 있어서,
상기 제1 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol) 및 PSI(Program Specific Information) 중 적어도 하나에 기록되고,
상기 제2 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol 및 Private Stream 중 적어도 하나에 기록되는 것을 특징으로 하는 송신 장치.
제1항에 있어서,
상기 제2 전송부는,
상기 제2 전송 데이터를 복수의 세그먼트로 구분하고, 기 설정된 개수의 세그먼트에 대한 정보를 생성하여 상기 세그먼트에 대한 정보에 따라 상기 제2 전송 데이터를 세그먼트 단위로 전송하는 것을 특징으로 하는 송신 장치.
제1항에 있어서,
상기 데이터 생성부는,
상기 제1 및 제2 동기화 정보로써 서로 동기화된 타임 코드를 생성하여 상기 제1 및 제2 멀티미디어 데이터에 부가하는 복수의 타임 코드 생성부;
상기 타임 코드가 부가된 제1 및 제2 멀티미디어 데이터를 인코딩하는 복수의 인코더;
상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 생성하는 시그널링 데이터 생성부; 및
상기 인코딩된 제1 멀티미디어 데이터, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 멀티플렉싱하여 상기 제1 전송 데이터를 생성하는 멀티플렉서;를 포함하는 것을 특징으로 하는 송신 장치.
제1 멀티미디어 데이터, 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 방송망을 통해 수신하는 제1 수신부;
상기 제2 멀티미디어 데이터, 제2 동기화 정보를 포함하는 제2 전송 데이터를 IP 망을 통해 수신하는 제2 수신부;
상기 제1 전송 데이터로부터 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 검출하는 시그널링 데이터 검출부;
상기 검출된 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 신호 처리하는 신호 처리부; 및
상기 제1 동기화 정보 및 상기 제2 동기화 정보에 기초하여 상기 신호 처리된 제1 멀티미디어 데이터 및 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성하는 동기화부;를 포함하는 수신 장치.
제6항에 있어서,
상기 제2 수신부는,
상기 제2 시그널링 데이터에 포함된 정보를 이용하여 상기 제2 전송 데이터의 세그먼트에 대한 정보를 수신하고, 상기 수신된 세그먼트에 대한 정보를 이용하여 상기 제2 전송 데이터를 세그먼트 단위로 수신하는 것을 특징으로 하는 수신 장치.
제6항에 있어서,
상기 제1 동기화 정보는 상기 제1 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함하고,
상기 제2 동기화 정보는 상기 제2 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함하는 것을 특징으로 하는 수신 장치.
송신 장치의 송신 방법에 있어서,
멀티미디어 컨텐츠를 구성하는 제1 멀티미디어 데이터, 상기 멀티미디어 컨텐츠를 구성하는 제2 멀티미디어 데이터와의 동기화를 위한 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 상기 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 생성하는 단계;
상기 제2 멀티미디어 데이터 및 상기 제1 멀티미디어 데이터와의 동기화를 위한 제2 동기화 정보를 포함하는 제2 전송 데이터를 생성하는 단계;
상기 생성된 제1 전송 데이터를 방송망을 통해 전송하는 단계; 및
상기 생성된 제2 전송 데이터를 IP 망을 통해 전송하는 단계;를 포함하는 송신 방법.
제9항에 있어서,
상기 제1 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol) 및 PSI(Program Specific Information) 중 적어도 하나에 기록되고,
상기 제2 시그널링 데이터는 상기 제1 전송 데이터의 PSIP(Program and System Information Protocol 및 Private Stream 중 적어도 하나에 기록되는 것을 특징으로 하는 송신 방법.
제9항에 있어서,
상기 제2 전송 데이터를 전송하는 단계는,
상기 제2 전송 데이터를 복수의 세그먼트로 구분하는 단계;
기 설정된 개수의 세그먼트에 대한 정보를 생성하는 단계; 및
상기 세그먼트에 대한 정보에 따라 상기 제2 전송 데이터를 세그먼트 단위로 전송하는 단계;를 포함하는 것을 특징으로 하는 송신 방법.
제9항에 있어서,
상기 제1 전송 데이터를 생성하는 단계는,
상기 제1 동기화 정보로써 타임 코드를 생성하여 상기 제1 멀티미디어 데이터에 부가하는 단계;
상기 타임 코드가 부가된 제1 멀티미디어 데이터를 인코딩하는 단계;
상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 생성하는 단계; 및
상기 인코딩된 제1 멀티미디어 데이터, 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 멀티플렉싱하여 상기 제1 전송 데이터를 생성하는 단계;를 포함하며,
상기 제2 전송 데이터를 생성하는 단계는,
상기 제2 동기화 정보로써 상기 제1 멀티미디어 데이터에 부가된 타임 코드와 동일한 타임 코드를 생성하여 상기 제2 멀티미디어 데이터에 부가하는 단계; 및
상기 타임 코드가 부가된 제2 멀티미디어 데이터를 인코딩하는 단계;를 포함하는 것을 특징으로 하는 송신 방법.
수신 장치의 수신 방법에 있어서,
제1 멀티미디어 데이터, 제1 동기화 정보, 상기 제1 멀티미디어 데이터에 대한 제1 시그널링 데이터 및 제2 멀티미디어 데이터에 대한 제2 시그널링 데이터를 포함하는 제1 전송 데이터를 방송망을 통해 수신하는 단계;
상기 제2 멀티미디어 데이터, 제2 동기화 정보를 포함하는 제2 전송 데이터을 IP 망을 통해 수신하는 단계;
상기 제1 전송 데이터로부터 상기 제1 시그널링 데이터 및 상기 제2 시그널링 데이터를 검출하는 단계;
상기 검출된 제1 시그널링 데이터 및 제2 시그널링 데이터를 이용하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 신호 처리하는 단계; 및
상기 제1 동기화 정보 및 상기 제2 동기화 정보에 기초하여 상기 제1 멀티미디어 데이터 및 상기 제2 멀티미디어 데이터를 동기화하여 멀티미디어 컨텐츠를 구성하는 단계;를 포함하는 수신 방법.
제13항에 있어서,
상기 제2 전송 데이터를 수신하는 단계는,
상기 제2 시그널링 데이터에 포함된 정보를 이용하여 상기 제2 전송 데이터의 세그먼트에 대한 정보를 수신하는 단계; 및
상기 수신된 세그먼트에 대한 정보를 이용하여 상기 제2 전송 데이터를 세그먼트 단위로 수신하는 단계;를 포함하는 것을 특징으로 하는 수신 방법.
제13항에 있어서,
상기 제1 동기화 정보는 상기 제1 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함하고,
상기 제2 동기화 정보는 상기 제2 멀티미디어 데이터에 포함된 각 영상 프레임에 부가된 타임 코드를 포함하는 것을 특징으로 하는 수신 방법.