KR20130116157A

KR20130116157A - 하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법

Info

Publication number: KR20130116157A
Application number: KR1020120133017A
Authority: KR
Inventors: 박홍석; 윤국진; 이재준; 이진영; 임현정; 장용석; 정원식; 주유성; 허남호; 황승오
Original assignee: 삼성전자주식회사; 한국전자통신연구원
Priority date: 2012-04-13
Filing date: 2012-11-22
Publication date: 2013-10-23
Also published as: KR102016674B1

Abstract

수신 장치가 개시된다. 본 장치는, RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 제1 수신부, 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 제어부, IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 제2 수신부, 제1 신호에 포함된 기준 데이터 및 제2 신호에 포함된 상기 부가 데이터를 저장하는 저장부 및 기준 데이터 및 부가 데이터를 각각 처리하여 동기화시켜 출력하는 출력부를 포함한다. 이에 따라, 서로 다른 신호를 동기화시켜 출력할 수 있다.

Description

하이브리드 서비스를 제공하는 수신 장치 및 하이브리드 서비스 제공 방법 { RECEIVING DEVICE FOR PROVIDING HYBRYD SERVICE AND METHOD THEREOF }

본 발명은 수신 장치 및 그 하이브리드 서비스 제공 방법에 대한 것으로 보다 상세하게는 서로 다른 경로를 통해 수신되는 복수의 신호를 처리하여 동기화시켜 출력하는 하이브리드 서비스를 제공하는 수신 장치 및 그 하이브리드 서비스 제공 방법에 대한 것이다.

전자 기술의 발달에 힘입어, 다양한 유형의 전자 장치가 개발 및 보급되고 있다. 이들 전자 장치의 대표적인 예로 TV와 같은 수신 장치를 들 수 있다.

최근에는 TV의 성능이 좋아짐에 따라 3D 컨텐츠나 풀 HD 컨텐츠와 같은 멀티미디어 컨텐츠까지도 서비스되고 있다. 이러한 유형의 컨텐츠는 기존의 컨텐츠보다 데이터 사이즈가 크다.

하지만, 방송 망에서 사용되는 전송 대역 폭은 제한적이다. 따라서, 현재의 방송망에서 전송 가능한 컨텐츠의 사이즈에는 제약이 있다. 이러한 제약에 맞추기 위해서는 부득이하게 해상도를 줄여야 할 필요가 있으며, 이에 따라 화질이 열화된다는 문제점이 있었다.

이러한 문제점을 해결하기 위해서 다양한 종류의 미디어 데이터를 다양한 전송 환경을 통해 제공하고자 하는 시도가 있었다. 하지만, 이러한 데이터들은 서로 다른 경로를 통해 전송되기 때문에 수신 장치 측에서 서로 관련성 있는 데이터인지 알 수 없으며, 이로 인해 적절하게 동기화시킬 수 없다는 문제점이 있었다.

따라서, 이러한 컨텐츠들에 대해 적절하게 동기화시킬 수 있는 방안에 대한 필요성이 대두되었다.

본 발명은 상술한 필요성에 따른 것으로, 본 발명의 목적은, 서로 다른 망을 통해 전송된 복수의 신호를 수신하여 동기화시켜 출력하는 하이브리드 서비스를 제공하는 수신 장치 및 그 하이브리드 서비스 제공 방법을 제공함에 있다.

이상과 같은 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 수신 장치는, RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 제1 수신부, 상기 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 제어부, IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 상기 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 제2 수신부, 상기 제1 신호에 포함된 상기 기준 데이터 및 상기 제2 신호에 포함된 상기 부가 데이터를 저장하는 저장부 및 상기 기준 데이터 및 상기 부가 데이터를 각각 처리하여 동기화시켜 출력하는 출력부를 포함한다.

여기서, 상기 시그널링 정보는 제1 컨텐츠를 구성하는 적어도 하나의 제1 부가 데이터의 소스를 지정하기 위한 제1 부가 데이터 소스 정보 및 상기 제1 컨텐츠에 이어 출력될 제2 컨텐츠를 구성하는 적어도 하나의 제2 부가 데이터의 소스를 지정하기 위한 제2 부가 데이터 소스 정보를 포함하며, 각 컨텐츠에 대응되는 시그널링 정보는 해당 컨텐츠가 출력되는 동안 동일한 형태로 반복 수신될 수 있다.

그리고, 상기 제어부는, 상기 제1 컨텐츠가 출력되는 동안 상기 제2 부가 데이터 소스 정보를 이용하여 상기 적어도 하나의 제2 부가 데이터의 소스에 액세스하여 상기 제2 부가 데이터를 포함하는 제2 신호를 수신하도록 상기 제2 수신부를 제어하고, 상기 제2 부가 데이터를 상기 저장부에 저장할 수 있다.

여기서, 상기 시그널링 정보는 하이브리드 서비스 동기화 타입을 지정하는 지정 값을 포함하며, 상기 제어부는 상기 지정 값에 대응되는 동기화 정보를 이용하여 상기 기준 데이터 및 상기 부가 데이터를 동기화시켜 출력하도록 상기 출력부를 제어할 수 있다.

그리고, 상기 지정 값은, 상기 기준 데이터 및 상기 부가 데이터 각각의 PTS(Presentation Time Stamp) 정보를 이용하여 동기화하도록 지정하는 제1 값, 상기 기준 데이터 및 상기 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 제2 값, 상기 제1 신호 및 상기 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 제3 값 중 하나가 될 수 있다.

여기서, 상기 출력부는, 상기 지정 값이 상기 제1 값이면, 상기 기준 데이터의 PTS와 상기 부가 데이터의 PTS를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터를 출력하고, 상기 지정 값이 상기 제2 값이면, 상기 기준 데이터의 ES에 포함된 제1 타임코드와 상기 부가 데이터의 ES에 포함된 제2 타임 코드를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터의 타임 스탬프를 동일한 값으로 보정하여, 보정된 타임 스탬프에 동기화 출력을 수행하고, 상기 지정 값이 상기 제3 값이면, 상기 프라이빗 데이터 스트림에 포함된 동기화 정보를 각각 검출하여 검출된 동기화 정보에 따라 동기화 출력을 수행할 수 있다.

그리고, 상기 시그널링 정보는, 상기 시그널링 정보를 이용하여 제공되는 하이브리드 서비스의 개수, 하이브리드 서비스 구분자, 하이브리드 서비스 제공 방식, 하이브리드 서비스의 제공 시기를 나타내는 지시자, 하이브리드 서비스 동기화 타입을 지정하는 지정 값, 하이브리드 서비스의 식별자, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서, 부가 데이터의 획득을 위한 URL 정보를 포함할 수 있다.

그리고, 상기 출력부는, 상기 제1 신호로부터 상기 기준 데이터를 검출하는 제1 검출부, 상기 기준 데이터를 디코딩하여 제1 비디오 프레임을 생성하는 제1 비디오 처리부, 상기 제2 신호로부터 상기 부가 데이터를 검출하는 제2 검출부, 상기 부가 데이터를 디코딩하여 제2 비디오 프레임을 생성하는 제2 비디오 처리부, 디코딩된 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임을 조합하여, 렌더링을 수행하는 렌더링부를 포함할 수 있다. 여기서, 상기 제어부는, 상기 지정 값에 따라 상기 제1 검출부, 상기 제2 검출부, 상기 제1 비디오 처리부, 상기 제2 비디오 처리부 및 상기 렌더링부 중 적어도 하나를 선택적으로 제어하여, 상기 기준 데이터 및 상기 부가 데이터의 동기화 처리를 수행할 수 있다.

그리고, 상기 제어부는, 상기 제1 신호의 PMT 내의 리저브 영역(Reserved area), PMT descriptor 영역, PSIP VCT(Program and System Information Protocol Virtual Channel Table), EIT reserved, EIT descriptor 영역, 프라이빗 스트림 중 적어도 하나로부터 상기 시그널링 정보를 검출할 수 있다.

한편, 본 발명의 일 실시 예에 따르면, 수신 장치의 하이브리드 서비스 제공 방법은, RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 단계, 상기 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 단계, IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 상기 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 단계, 상기 제1 신호 및 상기 제2 신호로부터 상기 기준 데이터 및 상기 부가 데이터를 각각 검출하고 처리하여 동기화시켜 출력하는 단계를 포함한다.

여기서, 상기 시그널링 정보는 제1 컨텐츠를 구성하는 적어도 하나의 제1 부가 데이터의 소스를 지정하기 위한 제1 부가 데이터 소스 정보 및 상기 제1 컨텐츠에 이어 출력될 제2 컨텐츠를 구성하는 적어도 하나의 제2 부가 데이터의 소스를 지정하기 위한 제2 부가 데이터 소스 정보를 포함할 수 있다. 그리고, 각 컨텐츠에 대응되는 시그널링 정보는 해당 컨텐츠가 출력되는 동안 동일한 형태로 반복 수신될 수 있다.

또한, 상기 제1 컨텐츠가 출력되는 동안 상기 제2 부가 데이터 소스 정보에 기초하여 상기 제2 부가 데이터를 포함하는 제2 신호가 수신되면, 상기 제2 부가 데이터를 저장하는 단계, 상기 제2 컨텐츠가 출력될 이벤트가 발생하면, 상기 저장된 제2 부가 데이터를 이용하여 상기 제2 컨텐츠를 출력하는 단계를 더 포함할 수있다.

그리고, 상기 시그널링 정보는 하이브리드 서비스 동기화 타입을 지정하는 지정 값을 포함하며, 상기 동기화는, 상기 지정 값에 대응되는 동기화 정보에 따라 수행될 수 있다.

또한, 상기 지정 값은, 상기 기준 데이터 및 상기 부가 데이터 각각의 PTS(Presentation Time Stamp) 정보를 이용하여 동기화하도록 지정하는 제1 값, 상기 기준 데이터 및 상기 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 제2 값, 상기 제1 신호 및 상기 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 제3 값 중 하나일 수 있다.

그리고, 상기 출력하는 단계는, 상기 지정 값이 상기 제1 값이면, 상기 기준 데이터의 PTS와 상기 부가 데이터의 PTS를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터를 출력하는 단계, 상기 지정 값이 상기 제2 값이면, 상기 기준 데이터의 ES에 포함된 제1 타임코드와 상기 부가 데이터의 ES에 포함된 제2 타임 코드를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터의 타임 스탬프를 동일한 값으로 보정하여, 보정된 타임 스탬프에 동기화 출력을 수행하는 단계, 상기 지정 값이 상기 제3 값이면, 상기 프라이빗 데이터 스트림에 포함된 동기화 정보를 각각 검출하여 검출된 동기화 정보에 따라 동기화 출력을 수행하는 단계를 포함할 수 있다.

여기서, 상기 시그널링 정보는, 상기 시그널링 정보를 이용하여 제공되는 하이브리드 서비스의 개수, 하이브리드 서비스 구분자, 하이브리드 서비스 제공 방식, 하이브리드 서비스의 제공 시기를 나타내는 지시자, 하이브리드 서비스 동기화 타입을 지정하는 지정 값, 하이브리드 서비스의 식별자, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서, 부가 데이터의 획득을 위한 URL 정보를 포함할 수 있다.

또한, 상기 시그널링 정보는, 상기 제1 신호의 PMT 내의 리저브 영역(Reserved area), PMT descriptor 영역, PSIP VCT(Program and System Information Protocol Virtual Channel Table), EIT reserved, EIT descriptor 영역, 프라이빗 스트림 중 적어도 하나로부터 검출될 수 있다.

이상과 같이, 본 발명의 다양한 실시 예에 따르면, 시그널링 정보를 이용하여 복수의 컨텐츠 각각에 대한 부가 데이터를 개별적으로 수신하여 출력하는 하이브리드 서비스가 제공될 수 있다.

도 1은 본 발명의 일 실시 예에 따른 송수신 시스템의 구성을 나타내는 블럭도,
도 2는 본 발명의 일 실시 예에 따른 수신 장치에 사용되는 출력부 구성의 일 예를 나타내는 블럭도,
도 3은 시그널링 정보의 구성 예를 나타내는 도면,
도 4는 본 발명의 일 실시 예에 따른 시그널링 정보 제공 방법을 설명하기 위한 도면,
도 5는 시그널링 정보에 포함되는 하이브리드 서비스 동기화 타입 지정 값의 종류를 나타내는 테이블,
도 6은 시그널링 정보의 신택스의 일 예를 나타내는 도면,
도 7은 시그널링 정보에 포함되는 일부 변수들의 종류를 나타내는 테이블,
도 8은 본 발명의 일 실시 예에 따른 동기화 정보 제공 방법을 설명하기 위한 도면,
도 9는 부가 데이터가 TS 형태로 제공되는 경우의 동기화 정보 구조의 일 예를 나타내는 도면,
도 10은 부가 데이터가 MP4 파일 형태로 제공되는 경우의 동기화 정보 구조의 일 예를 나타내는 도면,
도 11은 시그널링 정보를 전송하는 또 다른 방법을 설명하기 위한 도면,
도 12는 linkage_info_descriptor()가 정의된 EIT의 구조의 일 예를 나타내는 도면,
도 13은 본 발명의 일 실시 예에 따른 하이브리드 서비스 제공 방법을 설명하기 위한 흐름도,
도 14는 부가 데이터를 처리하는 과정을 설명하기 위한 흐름도,
도 15 내지 도 17은 본 발명의 다양한 실시 예에 따른 송신 시스템의 구성 및 동작을 설명하기 위한 도면이다.

이하에서, 첨부된 도면을 이용하여 본 발명에 대하여 구체적으로 설명한다.

도 1은 본 발명의 일 실시 예에 따른 송수신 시스템의 구성을 나타내는 블럭도이다. 도 1에 따르면, 송수신 시스템은 복수의 송신 장치 1, 2(100-1, 100-2) 및 수신 장치(200)를 포함한다.

송신 장치 1, 2(100-1, 100-2)는 서로 다른 신호를 서로 다른 경로로 전송한다. 일 예로, 송신 장치 1(100-1)은 RF 방송망(Radio Frequency broadcast network)을 통해서 제1 신호를 전송하고, 송신 장치 2(100-2)는 IP 통신망(Internet Protocol Communication Network)을 통해서 제2 신호를 전송할 수 있다.

제1 신호 및 제2 신호는 하나의 멀티미디어 컨텐츠를 구성하는 서로 다른 데이터를 각각 포함한다. 즉, 하나의 컨텐츠는 제1 신호에 포함되는 데이터와, 제2 신호에 포함되는 데이터로 구성될 수 있다. 예를 들어, 3D 컨텐츠의 경우에는 좌안 영상 및 우안 영상이 각각 제1 신호 및 제2 신호에 포함될 수 있다. 또는, 비디오 데이터 및 오디오 데이터로 구분되거나, 동영상 데이터 및 자막 데이터, 기타 데이터 등으로 구분되어 각각 제1 신호 또는 제2 신호에 포함될 수 있다. 본 명세서에서는 제1 신호에 포함되는 데이터를 기준 데이터라고 하고, 제2 신호에 포함되는 데이터를 부가 데이터라고 한다. 수신 장치(200)는 제1 신호에 포함된 기준 데이터와 제2 신호에 포함된 부가 데이터를 조합하여, 하나의 컨텐츠를 출력한다. 본 명세서에서는 이와 같이 서로 다른 경로를 통해 전송된 데이터를 함께 이용하여 처리하는 서비스를 하이브리드 서비스라고 명명한다. 즉, 사이즈가 큰 3D 컨텐츠나 고화질 컨텐츠를 서비스하기 위해서는 기존 방송 송수신 시스템의 처리 용량이 제한적일 수 있다. 따라서, 기존의 방송 시스템과 수신장치와도 호환성을 가지면서, 대형 사이즈의 컨텐츠도 서비스할 수 있도록 하기 위하여 하이브리드 서비스가 제공될 수 있다. 하이브리드 서비스의 경우, 복수의 다른 네트워크를 이용하여 하나의 컨텐츠를 제공하게 되므로, 사이즈가 큰 컨텐츠도 처리할 수 있다. 본 명세서에서는 방송망과 IP망을 함께 이용하는 경우를 예로 들어 설명하지만, 네트워크의 종류 및 개수는 다양하게 구현될 수 있다.

도 1에 따르면, 본 발명의 일 실시 예에 따른 수신 장치(200)는 제1 수신부(210), 제2 수신부(220), 출력부(230), 제어부(240), 저장부(250)를 포함한다. 수신 장치(200)는 TV나 휴대폰, 태블릿 PC, 랩탑 컴퓨터, PC, 키오스크, 셋탑 박스, 광고판 등과 같은 다양한 종류의 장치가 될 수 있다.

제1 수신부(210)는 RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신한다. 시그널링 정보는 제1 신호에 포함된 기준 데이터와 함께 처리될 부가 데이터에 대한 정보와, 기준 데이터 및 부가 데이터를 이용하는 하이브리드 서비스에 관련된 각종 정보를 포함한다. 시그널링 정보의 내용, 구조, 전송 방법에 대해서는 후술하는 부분에서 구체적으로 설명한다.

제어부(240)는 수신 장치(200)의 전반적인 동작을 제어한다. 구체적으로는, 제어부(240)는 제1 수신부(210)를 통해 시그널링 정보가 수신되면, 그 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출한다.

부가 데이터 소스 정보란 부가 데이터를 제공하는 소스에 대한 주소 정보를 의미한다. 즉, 하나의 컨텐츠는 복수 개의 단위로 구분될 수 있다. 구분된 데이터 중에서 방송망을 통해서 전송되는 데이터를 기준 데이터(또는, 기본 데이터, 메인 데이터라고도 함)라고 하면, IP 망을 통해서 전송되는 데이터는 부가 데이터라고 할 수 있다. 부가 데이터는 실시간 전송 스트림 형태 또는 MP4 파일과 같은 형태로 전송될 수 있다.

실시간 전송 스트림 형태로 구현된 경우, 부가 데이터를 포함하는 제2 신호는 RTP나 HTTP와 같은 프로토콜을 이용하여 송수신될 수 있다. 이 중 HTTP를 이용하는 경우에는, 제2 신호를 획득하기 위해서 메타데이터 파일이 제공되어야 한다. 메타데이터란 멀티미디어 컨텐츠를 어디서 수신할 수 있는지를 알려주기 위한 정보이다. 메타데이터 파일에는 복수의 분리된 각 파일들에 상응하는 컨텐츠 시간 상의 위치, 해당 파일을 제공할 소스의 URL, 크기 등 클라이언트가 미리 알아야할 정보등이 들어 있을 수 있다. 메타 데이터 파일은 HTTP 기반 스트리밍의 종류에 따라 다양하게 구분될 수 있다. 즉, 스무스 스트리밍(smooth streaming) 방식의 경우, ism(Internet Information Service(IIS) Smooth streaming Media) 파일이 메타데이터 파일로 사용된다. IETF(Internet Engineering Task Force) HTTP 라이브 스트리밍(live streaming) 방식의 경우에는 m3v8 파일이 메타데이터 파일로 사용되고, 3GPP에서 채용된 적응적(adaptive) HTTP 스트리밍 Rel. 9나, OIPF에서 채용된 적응적(adaptive) HTTP 스트리밍 Rel. 2, MPEG에서 채용된 Dynamic adaptive streaming over HTTP 방식의 경우에는 MPD(Media Presentation Description)이 메타데이터 파일로 사용될 수 있다. 부가 데이터 소스 정보는 이러한 메타데이터 파일을 획득할 수 있는 소스에 대한 주소 정보가 될 수 있다.

한편, 하나의 컨텐츠를 구성하는 부가 데이터는 다수 개의 스트림이나 파일로 이루어질 수 있다. 이러한 부가 데이터는 기준 데이터와 함께 처리되어 동기화되어 출력되어야만 하나의 컨텐츠를 온전하게 제공할 수 있으므로, 부가 데이터는 실시간으로 또는 미리 다운로드 받을 수 있어야만 한다. 이에 따라, 본 실시 예에서는 기준 데이터를 전송하는 송신 장치 1(100-1)이 복수의 부가 데이터 소스 정보를 포함하는 시그널링 정보를 함께 제공할 수 있다.

시그널링 정보를 함께 제공하는 것으로 설명하였으나, 반드시 이와 같이 구현되어야 하는 것은 아니며 시그널링 정보는 별도의 장치로부터 제공될 수도 있다.

제2 수신부(220)는 IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신한다. 도 1의 실시 예에서는 하나의 소스 장치인 송신 장치 2(100-2)가 도시되었으나, 부가 데이터는 복수의 서로 다른 소스 장치로부터 제공될 수도 있다. 제2 신호는 실시간 스트리밍 방식으로 전송될 수도 있고, 파일 다운로딩 방식으로 전송될 수도 있다.

제어부(240)는 시그널링 정보에 포함된 부가 데이터 소스 정보를 이용하여 제2 수신부(220)가 부가 데이터의 소스 장치로 바로 액세스하도록 제어할 수 있다. 또는, 부가 데이터 소스 정보가 메타 데이터 파일에 대한 소스 정보인 경우, 제어부(240)는 제2 수신부(220)를 통해 수신한 신호로부터 소스 정보를 검출하고, 그 소스에 액세스하여 메타 데이터 파일을 획득한 후, 그 메타 데이터 파일을 이용하여 제2 신호를 수신하도록 제2 수신부(220)를 제어할 수 있다.

한편, 제1 신호에는 제1 데이터, 즉, 기준 데이터와 함께 제1 동기화 정보가 포함되고, 제2 신호에는 제2 데이터, 즉, 부가 데이터와 함께 제2 동기화 정보가 포함될 수 있다. 제1 및 제2 동기화 정보로는 다양한 정보가 사용될 수 있다. 구체적으로는, 동기화 정보는 그 형태에 따라 SMPTE 타임 코드, 프레임 넘버 및 기타 다양한 정보들이 될 수 있으며, 제공되는 방식에 따라 비디오 레벨, ES 레벨, PES 레벨 등으로 구분될 수 있다.

송신 장치 1, 2(100-1, 100-2)는 컨텐츠의 종류, 전송 환경, 인코딩 방식, 컨텐츠의 크기 등에 따라 동기화 정보를 다양한 형태 및 방식으로 제공할 수 있다. 송신 장치 1(100-1)은 동기화 정보를 비롯하여 하이브리드 서비스에 필요한 각종 정보들을 시그널링 정보에 포함시켜, 전송할 수 있다.

저장부(250)는 제1 신호에 포함된 기준 데이터 및 제2 신호에 포함된 부가 데이터를 각각 저장한다. 저장부(250)는 플래시메모리, HDD, RAM, ROM, 버퍼 등과 같은 다양한 저장 수단을 포함한다. 제2 신호가 실시간 스트리밍 방식으로 전송되는 경우, 저장부(250) 내의 버퍼를 이용하여 해당 스트림을 버퍼링하는 동작이 이루어진다. 제어부(240)는 버퍼링된 스트림을 처리하여, 부가 데이터를 추출할 수 있다.

제어부(240)는 시그널링 정보를 활용하여, 하이브리드 서비스를 제공한다. 구체적으로는, 시그널링 정보는 현재 출력되고 있는 컨텐츠의 부가 데이터에 대한 정보 뿐만 아니라, 다음에 출력될 컨텐츠의 부가 데이터에 대한 정보까지 모두 포함할 수 있다. 이 경우, 제어부(240)는 다음 컨텐츠의 부가 데이터 소스 정보를 이용하여 다음 컨텐츠의 부가 데이터를 미리 수신한 후, 저장부(250)에 저장한다.

일 예로, 시그널링 정보가, 제1 컨텐츠를 구성하는 적어도 하나의 제1 부가 데이터의 소스를 지정하기 위한 제1 부가 데이터 소스 정보 및 제1 컨텐츠에 이어 출력될 제2 컨텐츠를 구성하는 적어도 하나의 제2 부가 데이터의 소스를 지정하기 위한 제2 부가 데이터 소스 정보를 포함하고 있다면, 제어부(240)는, 제1 컨텐츠가 출력되는 동안 제2 부가 데이터 소스 정보를 이용하여 적어도 하나의 제2 부가 데이터의 소스에 액세스하여 제2 부가 데이터를 포함하는 제2 신호를 수신하도록 제2 수신부(220)를 제어한다. 이에 따라, 제2 신호가 수신되면, 그 신호 또는 그 신호로부터 검출된 제2 부가 데이터를 저장부(250)에 저장한다.

한편, 시그널링 정보는 하나의 컨텐츠가 출력되고 있는 동안에는 동일한 형태로 반복적으로 전송될 수 있다. 이에 따라, 수신 장치(200)가 컨텐츠 재생 개시 이후에 턴-온되어 컨텐츠를 수신하게 되더라도, 이후에 수신되는 시그널링 정보를 이용하여 부가 데이터를 확보하여 처리할 수 있다.

출력부(230)는 저장부(250)에 저장된 기준 데이터 및 부가 데이터를 각각 처리하여 동기화시켜 출력한다. 동기화 출력을 위하여 출력부(230)는 복수의 데이터 처리부를 포함할 수 있다. 즉, 출력부(230)는 비디오 디코더, 스케일러, 프레임 레이트 변환 회로, 디스플레이 패널, 백라이트 유닛 등과 같이 비디오 데이터 처리 및 표시를 위한 각종 구성요소 뿐만 아니라, 오디오 디코더, 앰프, 노이즈 필터, 스피커 등과 같이 오디오 데이터를 처리하여 출력하기 위한 구성요소들까지 포함할 수 있다. 이러한 구성요소들은 수신되는 신호의 개수에 따라 복수 개로 마련될 수 있다. 설명의 편의를 위하여, 이하에서는 비디오 데이터 처리 및 표시를 위한 구성요소만을 도시하여 설명하며, 오디오 데이터와 관련하여서는 그 도시 및 설명을 생략한다.

도 2는 출력부(230)의 구성의 일 예를 나타내는 블럭도이다. 도 2에 따르면, 출력부(230)는 제1 검출부(231), 제2 검출부(232), 제1 비디오 처리부(233), 제2 비디오 처리부(234), 렌더링부(235)를 포함한다.

제1 검출부(231)는 제1 신호로부터 기준 데이터를 검출하고, 제1 비디오 처리부(233)는 검출된 기준 데이터를 처리하기 위한 구성이다. 제1 수신부(210)에서 수신된 제1 신호가 MPEG2-TS 포맷인 경우, 제1 검출부(231)는 수신된 전송 스트림을 디먹싱하여 비디오 ES를 출력한다. 이 경우, 제1 비디오 처리부(233)는 MPEG2 디코더로 구현될 수 있다. 이에 따라, 제1 비디오 처리부(233)는 수신된 비디오 ES를 디코딩하며, 디코딩된 로우 데이터는 렌더링부(235)로 제공된다.

제2 검출부(232)는 제2 신호로부터 부가 데이터를 검출하고, 제2 비디오 처리부(234)는 검출된 부가 데이터를 처리하기 위한 구성이다. 상술한 바와 같이, 제2 수신부(220)에서 수신된 제2 신호는 MPEG2-TS 포맷 또는 파일 포맷일 수 있다. MPEG2-TS란 MPEG2 인코딩 방식으로 인코딩된 후 ATSC 8VSB 방식으로 변조되어 전송되는 전송 스트림을 의미한다. MPEG2-TS와 같은 전송 스트림인 경우, 제2 검출부(232)는 수신된 전송 스트림을 디먹싱하여 비디오 ES를 검출한 후, 제2 비디오 처리부(234)로 제공한다. 반면, 파일 포맷으로 수신되는 실시 예의 경우, 제2 검출부(232)는 파일 파서로 구현될 수 있다. 이에 따라, 제2 검출부(232)는 수신된 파일을 파싱한 후, 파싱 결과를 제2 비디오 처리부(234)로 제공한다. 제2 비디오 처리부(234)는 제2 검출부(232)로부터 제공되는 비디오 데이터를 AVC 방식으로 디코딩한 후, 렌더링부(233)로 제공한다. 실시 예에 따라서, 제2 신호는 TS 또는 파일 포맷으로 선택적으로 제공될 수 있다. 이 경우, 제2 검출부(232)는 디먹서, 파일 파서를 모두 구비하며, 신호 포맷에 따라 이들을 선택적으로 활용하여 부가 데이터를 검출할 수 있다.

렌더링부(235)는 제1 및 제2 비디오 처리부(233, 234)에서 제공되는 디코딩된 제1 및 제2 비디오 프레임들을 조합하여 렌더링을 수행한다. 제어부(240)는 서로 대응되는 비디오 프레임들이 조합되어 렌더링되도록 제어하여, 동기화 출력을 수행할 수 있다.

구체적으로는, 제1 및 제2 비디오 처리부(233, 234)에서 제공되는 디코딩된 데이터, 즉, 로우 데이터들은 타임 코드나 프레임 넘버와 같은 동기화 정보가 워터마크 형태로 포함되어 있을 수 있다. 렌더링부(233)는 각 로우 데이터에 포함된 워터마크 형태의 동기화 정보를 검출한 후, 그 동기화 정보에 기초하여 프레임별로 직접 동기화시키거나, 각 프레임의 타임 스탬프를 보정한 후, 타임 스탬프에 따라 렌더링을 수행할 수 있다.

동기화는 동기화 타입에 따라 다양한 방식으로 이루어질 수 있다. 제어부(240)는 시그널링 정보에 따라 동기화 방식을 결정할 수 있다.

가령, 시그널링 정보는 하이브리드 서비스 동기화 타입을 지정하는 지정 값을 포함할 수 있다. 제어부는 지정 값에 대응되는 동기화 정보를 이용하여 상기 기준 데이터 및 상기 부가 데이터를 동기화시켜 출력하도록 출력부(230)를 제어한다.

구체적으로는, 지정 값은, 기준 데이터 및 부가 데이터 각각의 PTS(Presentation Time Stamp) 정보를 이용하여 동기화하도록 지정하는 제1 값, 기준 데이터 및 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 제2 값, 제1 신호 및 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 제3 값 중 하나가 될 수 있다.

출력부(230)는, 지정 값이 제1 값이면, 기준 데이터의 PTS와 부가 데이터의 PTS를 비교하여 동기화 출력을 수행한다. 반면, 지정 값이 제2 값이면, 출력부(230)는 기준 데이터의 ES에 포함된 제1 타임코드와 부가 데이터의 ES에 포함된 제2 타임 코드를 비교하여 동기화 출력을 수행하며, 지정 값이 제3 값이면 프라이빗 데이터 스트림에 포함된 동기화 정보를 각각 검출하여 검출된 동기화 정보에 따라 동기화 출력을 수행한다.

제어부(240)는, 지정 값에 따라 제1 검출부(231), 제2 검출부(232), 제1 비디오 처리부(233), 제2 비디오 처리부(234) 및 렌더링부(235) 중 적어도 하나를 선택적으로 제어하여, 기준 데이터 및 부가 데이터의 동기화 처리를 수행한다.

구체적으로는 제어부(240)는 지정 값이 제1 값이면 제1 비디오 처리부(233) 및 제2 비디오 처리부(234)에서 처리되어 버퍼(미도시)에 저장된 데이터들의 PTS를 확인하여 동기화될 단위 데이터를 선택하도록 렌더링부(235)를 제어한다. 렌더링부(235)는 동일한 PTS를 가지는 단위 데이터를 각각 선택하여, 렌더링을 수행한다.

반면, 지정 값이 제2 값이면 제어부(240)는 기준 데이터 및 부가 데이터로부터 각각 타임 코드를 검출하도록 제1 비디오 처리부(233) 및 제2 비디오 처리부(234)를 제어한다. 제1 및 제2 비디오 처리부(233, 234)는 각각 ES 레벨을 통해 제공되는 SMPTE 타임 코드를 추출하여, 렌더링부(235)로 제공한다. 렌더링부(235)는 제1 신호의 타임 코드, 제2 신호의 타임 코드를 비교하여 일치하는 타임 코드를 가지는 프레임이 동기화되어 출력되도록 동기화 처리를 수행한다.

반면, 지정 값이 제3 값이면 제어부(240)는 제1 신호 및 제2 신호로부터 각각 동기화 정보를 검출하도록 제1 및 제2 검출부(231, 232)를 제어한다. 제1 및 제2 검출부(231, 232)에서 검출된 동기화 정보는 렌더링부(235)로 제공된다. 렌더링부(235)는 동기화 정보에 기초하여 동기화 출력을 수행한다.

렌더링부(235)는 동기화될 단위 데이터를 선택하여 그 타임 스탬프를 동일한 값으로 보정하는 방식으로 동기화 출력을 수행할 수 있다. 또는, 렌더링부(235)는 타임 코드나 프레임 넘버 그 자체에 기초하여 동기화될 단위 데이터를 선택하고, 그 단위 데이터를 함께 출력할 수 있다. 비디오 데이터의 경우 단위 데이터는 비디오 프레임이 될 수 있고, 오디오 데이터의 경우 기 설정된 개수의 비디오 프레임에 대응되는 시간 단위의 오디오 데이터가 될 수 있다.

도 3은 본 발명의 일 실시 예에 따른 송수신 시스템에서 사용되는 시그널링 정보의 구조의 일 예를 나타낸다. 도 3에 따르면, 서로 다른 컨텐츠에 대응되는 복수의 기준 데이터(31, 32, 33)가 시간적인 순서에 따라 순차적으로 전송된다. 기준 데이터(31, 32, 33) 각각은 서로 다른 방송 프로그램에 해당하는 비디오 데이터를 포함할 수 있다.

수신 장치(200)는 이러한 기준 데이터와 별도로 시그널링 정보를 수신할 수 있다. 시그널링 정보는 기준 데이터와 동일하게 송신 장치 1(100-1)로부터 수신할 수도 있으나, 이와 다른 새로운 외부 장치로부터 수신할 수 있음은 물론이다.

제1 컨텐츠에 대한 기준 데이터(31)가 수신되고 있는 동안, 수신 장치(200)는 동일한 형태의 시그널링 정보를 복수 횟수(31-1 ~ 31-n) 수신한다. 매번 수신되는 시그널링 정보의 구조 및 내용은 동일하다. 이에 따라, 수신 장치(200)는 하나의 컨텐츠가 이미 방송되고 있는 도중에 턴 온이 되더라도, 그 이후에 제공되는 시그널링 정보를 이용하여 부가 데이터를 제공받을 수 있다.

도 3에 따르면, 제1 기준 데이터(31)가 수신되는 동안 수신되는 제1 시그널링 정보(31-1 ~ 310-n)에는 제1 기준 데이터에 대응되는 제1 부가 데이터 소스 정보(31-#1)와, 제2 기준 데이터에 대응되는 제2 부가 데이터 소스 정보(31-#2)가 포함된다. 제1 부가 데이터 소스 정보(31-#1)에는 제1 기준 데이터(31)에 대응되는 복수의 부가 데이터(부가 영상 #1, #2)를 각각 제공하는 소스들에 대한 정보가 포함되고, 제2 부가 데이터 소스 정보(31-#2)에는 하나의 부가 데이터(부가 영상 #1)를 제공하는 소스에 대한 정보가 포함된다.

한편, 제2 기준 데이터(32)가 수신되는 동안 수신되는 제2 시그널링 정보(32-1 ~ 32-m)에는 제2 기준 데이터에 대응되는 제2 부가 데이터 소스 정보(32-#1)와, 제3 기준 데이터에 대응되는 제3 부가 데이터 소스 정보(32-#2)가 포함된다. 제2 부가 데이터 소스 정보(32-#1)에는 제2 기준 데이터(32)에 대응되는 하나의 부가 데이터(부가 영상 #1)를 제공하는 소스의 정보가 포함되고, 제3 부가 데이터 소스 정보(32-#2)에는 제3 기준 데이터(33)에 대응되는 두 개의 부가 데이터(부가 영상 #1, #2)를 제공하는 소스들의 정보가 포함된다.

이와 같이, 매 시그널링 정보에는 현재 수신되는 기준 데이터에 이어서 수신되는 기준 데이터에 대응되는 부가 데이터 소스 정보도 포함될 수 있다. 제어부(240)는 다음 컨텐츠에 대한 부가 데이터 소스 정보를 미리 확보하여, 그 부가 데이터를 먼저 수신한 후 저장부(250)에 저장하여 둘 수 있다. 이에 따라, 다음 컨텐츠 재생 시에는 부가 데이터를 수신하는 작업 없이 기준 데이터가 수신되는 대로 바로 동기화 재생을 수행할 수 있다.

이러한 시그널링 정보는 다양한 방식으로 수신 장치(200)로 제공될 수 있다.

도 4는 본 발명의 일 실시 예에 따른 송수신 시스템에서 시그널링 정보를 제공하는 방법을 설명하기 위한 도면이다. 도 4에 따르면, RF 방송 망을 통해 전송되는 제1 신호는 MPEG2 규격에 따를 경우, 기준 영상(V1) 및 오디오(A) 데이터 이외에도, PSI/PSIP(Program Specific Information / Program and System Information Protocol), Private Section 등을 포함할 수 있다. 시그널링 정보는 프라이빗 섹션에 기록될 수 있다. 프라이빗 섹션은 MPEG에서 정의한 것으로 SI(System Information)나, 특정 어플리케이션에 특화된 데이터, 방송 파일 시스템 등을 전송하는데 사용된다. 시그널링 정보는 이러한 프라이빗 섹션을 통해 전송되고, 수신 장치(200)는 섹션 필터링을 통해 프라이빗 섹션에 기록된 시그널링 정보를 검출할 수 있다. 도 4에서는 시그널링 정보를 referenced_media_information이라고 기재하였으나, 그 명칭은 필요에 따라 다양하게 불릴 수 있다. 수신 장치(200)는 프라이빗 섹션에 기록된 시그널링 정보에 기초하여 부가 데이터 소스에 액세스하여 부가 데이터(V2)를 수신할 수 있다.

도 4에 도시된 바와 같이 기준 데이터는 방송 프로그램 별로 상이한 시간 대에 전송된다. 즉, 프로그램 XX는 09:00 ~ 10:00 동안 수신되어 출력되고, 프로그램 YY는 10:00 ~ 10:50 동안 수신되어 출력된다.

시그널링 정보에는 하이브리드 서비스를 구현하기 위해 필요한 다양한 정보들이 포함될 수 있다. 구체적으로는 시그널링 정보를 이용하여 제공되는 하이브리드 서비스의 개수, 하이브리드 서비스 구분자, 하이브리드 서비스 제공 방식, 하이브리드 서비스의 제공 시기를 나타내는 지시자, 하이브리드 서비스 동기화 타입을 지정하는 지정 값, 하이브리드 서비스의 식별자, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서, 하이브리드 서비스를 구성하는 부가 데이터의 획득을 위한 부가 데이터 소스 정보 등이 시그널링 정보에 포함될 수 있다.

이 중, 하이브리드 서비스 동기화 타입을 지정하는 지정 값은 동기화 정보의 종류, 동기화 정보의 삽입 위치 등에 따라 결정될 수 있다.

도 5는 동기화 타입을 지정하는 지정 값의 예를 나타내는 도면이다. 도 5에 따르면, 지정 값은 0x00, 0x01, 0x02를 포함한다.

이 중 제1 값, 즉, 0x00은 별도의 동기화 정보를 이용하지 않고, 기준 데이터 및 부가 데이터가 가지는 타임 스탬프를 이용하여 동기화하도록 지정한 값이다. MPEG 규격에 따르면, 방송 데이터를 전송하는 전송 스트림에는 PCR(Program Clock Reference) 및 PTS(Presentation Time Stamp) 등이 포함된다. PCR이란 MPEG 규격에 따르는 수신 장치(셋톱박스나 TV 등)에서 시각 기준을 송신기(100-1, 100-2) 측에 맞추도록 하는 참조 시간 정보를 의미한다. 지정 값이 제1 값으로 설정된 경우, 수신장치(200)의 제어부(240)는 PCR에 따라서 STC(System Time Clock)의 값을 맞추게 된다. PTS는 MPEG 규격에 따른 방송 시스템에서 영상 및 음성의 동기화를 위한 재생 시각을 알려주는 타임 스탬프를 의미한다. 본 명세서에서는 타임 스탬프라고 명명한다. 제어부(240)는 PCR에 맞춘 타임 스탬프를 확인하여, 기준 데이터 내의 비디오 프레임과 부가 데이터 내의 비디오 프레임 중에서 서로 동일한 타임 스탬프를 가지는 프레임들을 조합하여 출력하도록 출력부(230)를 제어한다. 가령, 3D 컨텐츠의 경우 기준 데이터가 좌안 영상, 부가 데이터가 우안 영상을 포함할 수 있다. 수신 장치(200)가 액티브 셔터 글래스 타입이라면 서로 동일한 타임 스탬프를 가지는 좌안 영상과 우안 영상을 교번적으로 디스플레이한다. 반면, 패시브 타입이라면 서로 동일한 타임 스탬프를 가지는 좌안 영상과 우안 영상을 각각 복수 개의 라인으로 구분한 후, 홀수 라인과 짝수 라인을 조합하여 프레임을 구성하여 디스플레이한다.

한편, 지정 값 중 0x01은 기준 데이터 및 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 값이다. 타임 코드는 타임 코드 생성기에 의해 만들어지는 일련의 펄스 신호로, 용이한 편집 관리를 위해 개발된 신호 규격이다. 컨텐츠 제작 및 편집 시에는 좌안 영상 및 우안 영상의 동기화된 관리를 위하여 동일한 타임 코드를 사용한다. 따라서, 타임 코드는 스트림 생성 또는 송출 시점과 관계없이 동일한 쌍(pair)를 유지할 수 있다. 구체적으로는, SMPTE(Society of Motion Picture and Television Engineers) 타임 코드가 사용될 수 있다. 즉, SMPTE 12M에서는 "시:분:초:프레임"의 형식으로 타임 코드를 표현한다. SMPTE 타임 코드는 기록 방식에 따라 LTC(Longitude Time Code) 또는 VITC(Vertical Interval Time Code)로 구분될 수 있다. LTC의 경우, 시각정보(25bits), 사용자 정보(32bits), 동기정보(16bits), 보존 영역(4bits), 프레임 모드 표시(2bits)를 포함하여 총 80 bits의 데이터로 구성될 수 있다. VITC는 비디오 신호의 수직 귀선 기간 내의 2 개의 수평 라인에 기록된다. SMPTE RP-188 에서는 LTC 또는 VITC 타입의 타임코드가 ancillary data로 전송될 수 있는 인터페이스 규격을 정의하고 있다. 제어부(240)는 지정 값이 제2 값, 즉, 0x01로 기록된 경우에는 기준 데이터의 각 비디오 프레임에 기록된 타임 코드, 부가 데이터의 각 비디오 프레임이 기록된 타임 코드를 비교한다. 이에 따라, 서로 일치하는 타임 코드를 가지는 비디오 프레임들이 서로 매칭되는 비디오 프레임이라고 판단하고, 이를 동기화시켜 출력하도록 출력부(230)를 제어한다.

한편, 지정 값 중 0x02는 제1 신호 및 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 값이다. 상술한 타임 코드나, 프레임 넘버와 같은 동기화 정보는 PMT(Program Map Table)나, PSIP VCT(Program and System Information Protocol Virtual Channel Table), EIT(Event Information Table) 등과 같은 다양한 영역을 통해 제공될 수도 있지만, 이와 별도로, 프라이빗 데이터 스트림으로 제공될 수도 있다. 여기서 프레임 넘버란 각 프레임마다 부여되는 숫자 등과 같은 식별 정보를 의미한다. 지정 값이 제3 값, 즉, 0x02로 기록된 경우, 제어부(240)는 프라이빗 데이터 스트림으로부터 동기화 정보를 검출하여, 이를 이용하여 동기화 출력을 수행한다.

지정 값이 제2값 또는 제3값인 경우, 출력부(230)는 타임 코드나 프레임 넘버를 직접 비교하여 서로 매칭되는 비디오 프레임들을 선택할 수 있다. 그리고, 그 선택된 비디오 프레임들 간의 타임 스탬프 차이를 확인하여, 확인된 값에 따라 타임 스탬프를 보정하여 동기화를 이룰 수 있다. 또는, 출력부(230)는 타임 스탬프를 보정하지 않고, 타임 코드나 프레임 넘버 그 자체를 기준으로 비디오 프레임에 대한 디코딩, 스케일링, 렌더링 등의 작업을 수행하여 바로 동기화시킬 수도 있다.

도 5에서는 3개의 지정 값 만이 도시되었으나, 이는 일 예에 불과하며, 동기화 정보의 종류, 기록 위치 등에 따라 다양한 지정 값들이 사용될 수 있다. 가령, 프레임 넘버 이외의 프레임 인덱스 정보, UTC(Coordinated Universal Time) 정보 등도 동기화 정보로 사용될 수 있다. 이러한 동기화 정보들은, 비디오 레벨, ES 레벨, PES 레벨 등과 같이 다양한 레벨로 전송될 수 있다.

한편, 상술한 바와 같이, 시그널링 정보에는 다양한 정보들이 포함될 수 있다. 또한, 시그널링 정보의 구조 역시 다양하게 구현될 수 있다.

도 6은 본 발명의 일 실시 예에 따른 시그널링 정보의 신택스를 나타낸다. 도 6에 따르면, 시그널링 정보에는, 제공될 하이브리드 서비스의 개수를 의미하는 num_hybrid_services, 하이브리드 서비스를 구분하기 위한 구분자를 의미하는 hybrid_service_id, 하이브리드 서비스가 스트리밍 방식으로 제공될지 아니면 다운로딩 방식으로 제공될지 그 제공 방식을 나타내는 hybrid_service_type, 하이브리드 서비스가 현재 제공되고 있는 것인지, 향후 제공될 것인지 여부, 즉, 하이브리드 서비스의 제공 시기를 나타내는 지시자인 hybrid_service_current_next_indicator, 하이브리드 서비스의 동기화 타입을 지정하는 지정 값을 나타내는 hybrid_service_sync_type, 하이브리드 서비스에서 처리되는 레퍼런스 미디어를 나타내는 식별자인 referenced_media_id, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서를 나타내는 referenced_media_playback_order, 하이브리드 서비스를 구성하는 부가 데이터의 획득을 위한 URL 정보인 referenced_media_URI_byte 등을 포함한다.

도 6에서 hybrid_service_sync_type은 도 5에서 설명한 바와 같이 복수의 지정 값으로 기록될 수 있다.

도 7은 도 6에 기재된 변수들 중에서 hybrid_service_sync_type과 hybrid_service_current_next_indicator의 일 예를 나타낸다. 도 7에 따르면, hybrid_service_sync_type이 0이면 스트리밍 타입이고 1이면 다운로딩 타입임을 나타낸다. 또한, hybrid_service_current_next_indicator가 0이면 현재 출력되는 서비스인 것을 나타내고, 1이면 다음 출력될 서비스인 것을 나타낸다.

이상과 같이 다양한 정보들이 시그널링 정보에 포함되어 수신 장치(200)로 제공될 수 있다. 시그널링 정보 중에서 hybrid_service_sync_type의 값은 사용될 동기화 정보와 그 전송 위치에 따라 다르게 설정될 수 있다.

도 8은 동기화 정보가 별도의 프라이빗 데이터 스트림을 통해 수신 장치(200)로 제공되는 경우를 나타낸다. 상술한 바와 같이, hybrid_service_sync_type이 0x02인 경우에는 동기화 정보는 프라이빗 데이터 스트림을 통해 전송될 수 있다. 이 경우, 제1 신호 뿐만 아니라 제2 신호 역시 프라이빗 데이터 스트림을 통해서 타임 코드나 프레임 넘버 등과 같은 동기화 정보를 제공한다. 수신 장치(200)는 제1 신호 및 제2 신호의 프라이빗 데이터 스트림으로부터 동기화 정보를 검출하여, 서로 매칭되는 기준 데이터 및 부가 데이터를 동기화시켜 출력한다.

한편, 지정 값이 0x00인 경우에는 기준 데이터 및 부가 데이터가 PTS 정보에 기초하여 동기화되므로, 별도의 동기화 정보 제공이 이루어지지 않는다. 또한, 0x01인 경우에는 기준 데이터 및 부가 데이터의 ES를 통해 제공되는 SMPTE 타임 코드가 동기화 정보로 사용되므로, 프라이빗 데이터 스트림에는 별도로 동기화 정보가 제공되지 않는다.

한편, 동기화 정보는 부가 데이터가 전송 스트림(TS) 타입인 경우와 파일 타입인 경우에 따라 다른 방식으로 제공될 수 있다.

도 9는 전송 스트림 타입의 경우에 제2 신호의 제공 형태를 나타낸다. 구체적으로는, hybrid_service_sync_type이 0x02인 경우, TS에 적용될 때의 동기화 정보의 구조를 나타낸다. 도 9에 따르면, 미디어 동기화 정보(media_pairing_information)에는 레퍼런스 미디어, 즉, 기준 데이터를 지정하기 위한 아이디인 referenced_media_id가 포함되며, 동기화 정보 중에서 타임 코드를 이용할지 프레임 넘버를 이용할지 의미하는 media_pairing_info_type 값이 포함된다. media_pairing_info_type 값이 0x01이면 프라이빗 데이터 스트림 중에서 SMPTE 타임코드를 이용하여 동기화를 수행하고, media_pairing_info_type 값이 0x02이면 프라이빗 데이터 스트림 중에서 프레임 넘버를 이용하여 동기화를 수행한다.

도 10은 IP 통신망을 통해 전송되는 MP4 기반의 제2 신호의 제공 형태를 나타내는 도면이다. 도 10에 따르면, moov 헤더에서 기존 프레임 재생 시간 정보를 제공하는 stts(Time-to-Sample Atom), ctts(Composition Time To Sample Atom), stss(Sync Sample Atom)를 이용하여 프레임 넘버 계산을 위한 값을 묵시적으로 제공할 수 있다. 즉, MP4 파일에서는 stts, ctts, stss를 통해 TS의 PTS, DTS와 같이 파일 시작 위치로부터 재생 시간에 대한 상대적 시간 값을 제공한다. 하지만, 프레임 넘버는 #1, #2 등과 같이 프레임 간의 상대적 순서만을 제공하기 때문에 구체적인 시간 단위를 가지지 않는다. 따라서, stts, ctts 등에서 제공되는 상대적 시간 값을 참조하게 되면 프레임의 순서, 즉, 프레임 넘버를 유추할 수 있다. 또는, 별도의 box 확장을 통해 SMPTE 타임 코드 또는 프레임 넘버를 명시적으로 제공할 수도 있다. 구체적으로는, ISO media base file format(14496-12)에서 추가 박스(box)를 정의하거나, 기 정의된 박스 내 필드를 확장하여 타임 코드를 제공할 수도 있다. 일 예로, 랜덤 액세스를 제공하는 "stss(sync sample table)" 박스를 확장하여 타임 코드를 제공할 수도 있다.

도 11은 시그널링 정보를 전송하는 또 다른 방법을 설명하기 위한 도면이다. 도 11에 따르면, EIT(Event Information Table) 내에 linkage_info_descriptor()를 정의하고, 이를 이용하여 시그널링 정보를 제공할 수 있다. 즉, 유사한 시그널링 정보가 PSIP를 통해 또는 EIT를 통해 선택적으로 제공될 수 있으며, 또는 중복적으로 두 군데 모두 사용하여 제공할 수도 있다.

도 12는 linkage_info_descriptor()가 정의된 EIT의 구조의 일 예를 나타내는 도면이다. 도 12에 따르면, linkage_info_descriptor()내에는 하이브리드 서비스에 대한 식별자인 referenced_media_id, 하이브리드 서비스의 부가 데이터 획득을 위한 URL 정보를 나타내는 referenced_media_URI_byte 등이 포함된다. 수신 장치(200)는 이러한 정보를 이용하여 부가 데이터를 획득할 수 있다.

이상과 같이 본 발명의 다양한 실시 예에 따르면, 수신 장치는 시그널링 정보를 이용하여 복수의 부가 데이터 소스 정보를 제공받을 수 있다. 이에 따라, 각 부가 데이터의 소스로부터 병렬적으로 부가 데이터를 제공받거나, 추후에 서비스될 컨텐츠의 부가 데이터를 미리 확보해둘 수 있다. 결과적으로, 부가 데이터 확보로 인한 딜레이를 줄일 수 있으며, 좀 더 큰 데이터 사이즈의 부가 데이터를 이용하는 하이브리드 서비스도 지원할 수 있다.

도 13은 본 발명의 일 실시 예에 따른 수신 장치에서의 하이브리드 서비스 제공 방법을 설명하기 위한 흐름도이다. 도 13에 따르면, 수신 장치는 제1 신호 및 시그널링 정보를 수신한다(S1310). 제1 신호 및 시그널링 정보는 RF 방송망을 통해 수신할 수 있다. 제1 신호에는 하나의 컨텐츠를 구성하는 기준 데이터가 포함되며, 시그널링 정보에는 기준 데이터와 함께 컨텐츠를 구성할 부가 데이터 및 이들 데이터를 이용하여 제공되는 하이브리드 서비스에 대한 각종 정보가 저장될 수 있다. 시그널링 정보의 종류 및 전송 방법에 대해서는 상술한 부분에서 구체적으로 설명한 바 있으므로, 중복 설명은 생략한다.

수신 장치(200)는 시그널링 정보로부터 부가 데이터 소스 정보를 검출한다(S1320). 부가 데이터 소스 정보는 복수 개가 있을 수 있다. 즉, 현재 출력하고자 하거나 출력 중인 컨텐츠에 대응되는 적어도 하나 이상의 부가 데이터의 소스에 대한 정보 뿐만 아니라, 다음 출력할 컨텐츠에 대응되는 적어도 하나 이상의 부가 데이터의 소스에 대한 정보까지 포함될 수 있다.

수신 장치(200)는 부가 데이터 소스 정보를 이용하여 소스 장치에 액세스하여, 제2 신호를 수신한다(S1330). 제2 신호에는 부가 데이터가 포함된다. 수신 장치(200)는 복수의 소스 장치에 액세스하여 복수의 부가 데이터를 수신할 수 있다.

이 후에, 수신 장치(200)는 기준 데이터 및 부가 데이터 중에서 서로 동기화되어 출력하여야 하는 데이터를 찾아서, 동기화시켜 출력한다. 가령, 3D 컨텐츠의 경우 동일한 시점에 출력되어야 하는 좌안 영상과 우안 영상을 탐색하여, 이들을 조합하여 출력한다. 반면, 기준 데이터가 비디오 데이터가 부가 데이터가 오디오 데이터인 경우 동일한 타이밍에 디스플레이 및 스피커 출력을 수행한다. 동기화 정보로는 타임 코드 및 프레임 넘버가 사용될 수 있으며, 경우에 따라서는 이들 정보 이외에 다양한 정보가 사용될 수도 있다. 동기화 타입 역시 시그널링 정보에 포함된 지정 값에 의해 달라질 수 있다. 이에 대해서는 상술한 부분에서 구체적으로 설명한 바 있으므로, 중복 설명은 생략한다.

도 14는 복수의 부가 데이터가 수신되는 경우의 처리 방법을 설명하기 위한 흐름도이다. 도 14에 따르면, 수신 장치는 제1 컨텐츠를 출력하고 있는 상태에서 제1 컨텐츠의 기준 데이터와 함께 시그널링 정보를 수신한다. 수신 장치는 수신되는 시그널링 정보를 분석하여(S1410), 제2 컨텐츠의 부가 데이터가 있는지 여부를 판단한다(S1420). 분석 결과, 시그널링 정보 내에 제2 부가 데이터 소스 정보가 존재한다고 판단되면, 수신 장치는 그 소스 정보에 따라 소스 장치에 액세스하여 제2 신호를 수신한다(S1430). 이에 따라, 제2 신호가 수신되면 제2 신호에 포함된 제2 부가 데이터를 검출하여 저장한다(S1440).

이 후에 제1 컨텐츠의 출력이 종료되고 제2 컨텐츠를 출력하여야 하는 이벤트가 개시되면(S1450). 제2 컨텐츠를 구성하기 위한 제2 기준 데이터를 RF 방송망을 통해 수신하는 한편, 저장된 제2 부가 데이터와 제2 기준 데이터를 함께 이용하여 제2 컨텐츠를 출력한다(S1460).

한편, 제1 신호 출력 중에 수신된 시그널링 정보에 제2 부가 데이터 소스 정보가 존재하지 않을 경우에는, 수신 장치는 제2 부가 데이터를 미리 확보할 수 없다. 이 경우에는 제2 컨텐츠를 출력하여야 할 이벤트가 발생하면(S1470), 수신 장치는 제2 컨텐츠에 대응되는 시그널링 정보를 수신하여 제2 부가 데이터의 소스를 확인한다. 이에 따라, 제2 기준 데이터와 별도로 제2 부가 데이터를 수신하여 제2 기준 데이터와 함께 동기화시켜 출력한다(S1480).

이상과 같이, 수신 장치는 시그널링 정보를 이용하여 기준 데이터 및 부가 데이터를 적절하게 확보하여, 하이브리드 서비스를 제공할 수 있다.

한편, 이상과 같은 다양한 실시 예에서는 제1 컨텐츠와 제2 컨텐츠와 같이 2 개의 컨텐츠를 처리하는 경우를 기준으로 설명하였으나, 부가 데이터는 복수의 후속 컨텐츠에 대해서도 미리 제공될 수 있다. 가령, 제3 컨텐츠나 제4 컨텐츠에 대한 부가 데이터에 대한 정보도 제1 컨텐츠의 시그널링 정보에 포함되어, 함께 제공될 수 있다.

도 15는 상술한 하이브리드 서비스를 제공하기 위한 송신 시스템의 구성의 일 예를 나타내는 도면이다. 도 15에 따르면, 송신 시스템은 복수의 소스 장치(300-1, 300-2), 송신 장치 1(100-1), 송신 장치 2(100-2)를 포함한다.

소스 장치 1(300-1)는 미리 녹화된 컨텐츠를 제공하는 컨텐츠 서버를 의미하고, 소스 장치 2(300-2)는 실시간으로 컨텐츠를 제공하는 라이브 소스를 의미한다. 소스 장치 1 및 2(300-1, 300-2)에서 제공되는 로우 비디오(raw video)는 동기화 정보를 워터마크 형식으로 포함한다. 도 15에서는 각 프레임 별로 부가되는 01.00.00.00, 01.00.00.01, 01.00.00.02와 같이 각 프레임 별로 순차적으로 부가되는 타임 코드 또는 프레임 #1, #2, #3 등과 같은 프레임 넘버가 워터마크 형태로 포함된 상태를 나타낸다.

또한, 도 15에서는 소스 장치 1, 2(300-1, 300-2) 각각에서 좌안 로우 비디오 데이터는 송신 장치 1(100-1)로 제공되고, 우안 로우 비디오 데이터는 송신 장치 2(100-2)로 제공되는 경우를 도시하였다. 하지만, 이는 일 예에 불과하며 소스 장치 1(300-1)의 데이터가 송신 장치 1(100-1)로 제공되고, 소스 장치 2(300-2)의 데이터가 송신 장치 2(100-2)로 제공될 수도 있다.

송신 장치 1(100-1)은 인코더부(110-1), 먹서(120-1), 변조부(130-1)를 포함한다. 인코더부(110-1)는 MPEG 2 인코딩 방식으로 로우 데이터를 인코딩하여 비디오 ES(Elementary Stream)을 생성한 후 먹서(120-1)로 제공한다. 먹서(120-1)는 비디오 ES에 대해 각종 부가 데이터를 먹싱하여 MPEG2-TS(Transport Stream)을 생성한 후, 변조부(130-1)로 제공한다. 변조부(130-1)는 ATSC 8-VSB 변조 방식으로 변조를 수행하여, 출력한다.

송신 장치 2(100-2)는 인코더부(110-2), 먹서(120-2), 파일 생성부(130-2), 서버(140-2)를 포함한다. 인코더부(110-2)는 로우 데이터를 AVC(Advanced Video Coding) 방식으로 인코딩하여 비디오 ES를 생성한다. 인코더부(110-2)는 TS 포맷으로 컨텐츠를 전송하는 경우에는 비디오 ES를 먹서(120-2)로 제공할 수 있다. 먹서(120-2)는 비디오 ES에 각종 부가 데이터를 먹싱하여 서버(140-2)로 제공한다.

반면, MP4 파일 포맷으로 전송하는 경우에는, 인코더부(110-2)는 비디오 ES를 파일 생성부(130-2)로 제공할 수 있다. 파일 생성부(130-2)는 비디오 ES를 파일 포맷으로 변환하여, 서버(140-2)로 제공한다.

서버(140-2)는 먹서(120-2) 또는 파일 생성부(130-2)에서 제공된 비디오 데이터를 저장한다. 서버(140-2)는 수신 장치(200)로부터 비디오 데이터에 대한 요청(video request)이 수신되면, 그 요청에 따라 저장된 TS을 IP 통신 망을 통해 스트리밍하거나, 저장된 파일을 IP 통신 망을 통해 수신 장치(200)로 제공하여 줄 수 있다.

도 15에서는 3D 비디오 데이터에 대해 수신 장치로부터 요청받아 제공하는 구성으로 도시하였으나, 3D 비디오 데이터가 아닌 2D 비디오 데이터나 기타 오디오 데이터 등에 대해서도 동일하게 처리할 수 있다.

도 15에서 부가 데이터 소스 정보 등을 포함하는 시그널링 정보는 인코더부(110-1, 110-2), 먹서(120-1, 120-2)에 의해 TS 또는 파일 내의 PMT, PSIP VCT, EIT 등에 삽입되거나, 별도의 프라이빗 스트림으로 생성될 수 있다. 이러한 시그널링 정보는 소스 장치 1, 2(300-1, 300-2)로부터 제공될 수도 있고, 인코더부(110-1, 110-2), 먹서(120-1, 120-2)에 의해 생성될 수도 있으며, 별도로 마련된 저장부(미도시)에 저장된 값을 그대로 사용할 수도 있다. 또는, 시그널링 정보는 별도로 마련된 제어부(미도시)에 의해 생성되어 인코더부(110-1, 110-2)나 먹서(120-1, 120-2)에 제공될 수도 있다. 제어부는 시스템의 특성에 맞는 시그널링 정보를 생성하여 인코더부(110-1, 110-2)나, 먹서(120-1, 120-2)로 제공하여 줄 수 있다.

도 16은 본 발명의 또 다른 실시 예에 따른 송신 시스템의 구성 및 동작을 설명하기 위한 도면이다. 도 16에 따르면, 송신 시스템은 복수의 소스 장치(300-1, 300-2), 송신 장치 1(100-1), 송신 장치 2(100-2)를 포함한다. 기본적인 구성은 도 15의 실시 예와 동일하므로, 중복되는 부분의 설명은 생략한다.

도 16에 따르면, 컨텐츠 서버로 구현된 소스 장치 1(300-1)와 라이브 소스로 구현된 소스 장치 2(300-2)에서 전송되는 로우 데이터의 VBI 구간에는 SMPTE 타임 코드가 포함된다. 이에 따라, 송신 장치 1 및 2(100-1, 100-2)에 포함된 MPEG2 인코더(110-1)와, AVC 인코더(110-2)는 각각 SMPTE 타임 코드를 캡쳐하여 ES 레벨 스트림에 포함시킨다. 이에 따라, 먹서(120-1, 120-2), 파일 생성부(130-2)는 ES 레벨로 타임 코드가 포함된 TS 또는 파일을 각각 생성하여, 후단의 구성 요소, 즉, 변조기(130-1)나 서버(140-2)로 제공한다.

도 17은 본 발명의 또 다른 실시 예에 따른 송신 시스템의 구성 및 그 동작을 설명하기 위한 도면이다. 도 17의 송신 시스템 역시 도 15, 도 16의 송신 시스템의 구성과 기본적으로 동일하므로, 중복되는 부분에 대한 설명은 생략한다.

도 17에 따르면, 컨텐츠 서버로 구현된 소스 장치 1(300-1)와 라이브 소스로 구현된 소스 장치 2(300-2)는 로우 비디오 데이터의 VBI 구간에 SMPTE 타임코드를 포함시키거나, 프로그램 단위의 시작점을 지시하기 위한 별도의 스타트 마커(start marker)를 포함시킨다. 가령, 동기화 정보가 SMPTE 타임 코드인 경우, MPEG2 인코더(110-1)와 AVC 인코더(110-2)는 각각 로우 비디오 데이터 VBI 구간에 실린 SMPTE 타임 코드를 캡쳐하여, ES 레벨 스트림에 포함시킨다. 반면, 동기화 정보가 프레임 넘버인 경우에는, 파일 생성부(130-2)는 스타트 마커를 인식하여, 생성되는 프레임 넘버를 송신 장치 1(100-1) 내의 먹서(120-1)로 전달한다. 이에 따라, 제1 신호에 프레임 넘버 값이 포함될 수 있도록 한다.

도 17에서 PES 레벨 동기화 정보를 생성하여 삽입하는 주체는 전송 스트림인지, MP4 파일인지 여부에 따라 다양하게 결정될 수 있다. 가령, 전송 스트림인 경우 Encoder, Muxer 둘 중에 하나가 될 수 있으며, Encoder에서 별도의 PES를 바로 생성할 수도 있다. 또는, ES 레벨로 전달되는 타임 코드, 프레임 넘버 등을 먹서에서 추출하여 PES 레벨의 동기화 정보를 생성할 수도 있다. 반면, MP 4의 경우 Encoder 를 통해 ES 레벨로 전달되는 타임 코드, 프레임 넘버 등을 추출하여 File Generator에서 File format의 Moov내 한 부분을 확장하여 해당정보를 삽입할 수도 있다. 이상과 같이 스트림 생성을 위한 중간 처리는 다양하게 조합 또는 구성될 수 있다.

수신 장치는 도 15 내지 도 17과 같은 다양한 구성의 송신 시스템에서 제공되는 시그널링 정보를 분석하여, 부가 데이터 소스 정보를 검출하고 그 부가 데이터 소스 정보에 대응되는 소스 장치에 액세스하여 부가 데이터를 수신한다. 수신 장치의 구성 및 동작에 대해서는 도 1 및 도 2에 대한 부분에서 구체적으로 설명하였으므로 중복 설명은 생략한다.

상술한 송수신 시스템은 서로 다른 데이터를 송수신하는 다양한 환경에 응용될 수 있다. 즉, 좌안 영상과 우안 영상으로 구성되는 3D 컨텐츠 이외에도 방송망과 네트워크 망 기반으로 컨텐츠를 분리 전송하는 다양한 형태의 하이브리드 서비스에 이용될 수 있다.

일 예로, 방송 망을 통해서는 2D 방송을 전송하고 네트워크 망을 통해서는 다국어 오디어, 다국어 자막 등과 같은 데이터를 전송하는 데이터 방송 서비스 시스템에 적용될 수도 있다. 또는, 방송망을 통해서는 2D 방송을 전송하고 네트워크 망을 통해서는 UHD 방송 데이터를 전송하는 UHD 방송 서비스 시스템에 적용될 수도 있다. 그 밖에, 방송망을 통해서는 2D 방송을 전송하고 네트워크 망을 통해서는 뎁스 맵이나, 타 시점 뷰 등과 같은 데이터를 전송하는 멀티 뷰 방송 서비스 시스템이나, 방송망을 통해서는 2D 방송을 전송하고 네트워크 망을 통해서는 다른 촬영 각도의 영상 데이터를 제공하는 멀티 앵글 서비스 시스템에 적용될 수도 있다.

또한, 상술한 예들에서는 2D 방송은 방송망을 통해서만 전송되는 것으로 예시하였으나, 이는 기존의 방송 시스템을 활용하기 위한 예일 뿐이며 반드시 이에 한정되는 것은 아니다. 즉, 방송망을 통해서도 2D 컨텐츠 데이터에 대응되는 다국어 오디오 데이터, 다국어 자막 데이터, UHD 방송 데이터, 뎁스 맵 데이터, 타 시점 뷰 데이터 등이 전송될 수 있다.

또한, 상술한 다양한 예들에서는 RF 방송망과 IP 통신망을 함께 이용하는 하이브리드 시스템에 대하여 예시하였으나, 통신 망의 종류는 다양하게 설정될 수 있다.

상술한 다양한 실시 예들에 따른 송신 장치의 신호 처리 방법이나, 수신 장치의 신호 처리 방법은 소프트웨어로 코딩되어 각종 장치에 탑재될 수 있다.

구체적으로는, 본 발명의 일 실시 예에 따르면, RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 단계, 상기 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 단계, IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 상기 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 단계, 상기 제1 신호 및 상기 제2 신호로부터 상기 기준 데이터 및 상기 부가 데이터를 각각 검출하고 처리하여 동기화시켜 출력하는 단계를 수행하는 프로그램이 저장된 비일시적 판독 가능 매체가 설치될 수 있다.

비일시적 판독 가능 매체란 레지스터, 캐쉬, 메모리 등과 같이 짧은 순간 동안 데이터를 저장하는 매체가 아니라 반영구적으로 데이터를 저장하며, 기기에 의해 판독(reading)이 가능한 매체를 의미한다. 구체적으로는, 상술한 다양한 어플리케이션 또는 프로그램들은 CD, DVD, 하드 디스크, 블루레이 디스크, USB, 메모리카드, ROM 등과 같은 비일시적 판독 가능 매체에 저장되어 제공될 수 있다.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안될 것이다.

210 : 제1 수신부 220 : 제2 수신부
230 : 출력부 240 : 제어부
250 : 저장부 100-1, 100-2 : 송신 장치 1, 2
300-1, 300-2 : 소스 장치 1, 2

Claims

RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 제1 수신부;
상기 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 제어부;
IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 상기 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 제2 수신부;
상기 제1 신호에 포함된 상기 기준 데이터 및 상기 제2 신호에 포함된 상기 부가 데이터를 저장하는 저장부; 및
상기 기준 데이터 및 상기 부가 데이터를 각각 처리하여 동기화시켜 출력하는 출력부;를 포함하는 수신 장치.
제1항에 있어서,
상기 시그널링 정보는 제1 컨텐츠를 구성하는 적어도 하나의 제1 부가 데이터의 소스를 지정하기 위한 제1 부가 데이터 소스 정보 및 상기 제1 컨텐츠에 이어 출력될 제2 컨텐츠를 구성하는 적어도 하나의 제2 부가 데이터의 소스를 지정하기 위한 제2 부가 데이터 소스 정보를 포함하며,
각 컨텐츠에 대응되는 시그널링 정보는 해당 컨텐츠가 출력되는 동안 동일한 형태로 반복 수신되는 것을 특징으로 하는 수신 장치.
제2항에 있어서,
상기 제어부는, 상기 제1 컨텐츠가 출력되는 동안 상기 제2 부가 데이터 소스 정보를 이용하여 상기 적어도 하나의 제2 부가 데이터의 소스에 액세스하여 상기 제2 부가 데이터를 포함하는 제2 신호를 수신하도록 상기 제2 수신부를 제어하고, 상기 제2 부가 데이터를 상기 저장부에 저장하는 것을 특징으로 하는 수신 장치.
제2항에 있어서,
상기 시그널링 정보는 하이브리드 서비스 동기화 타입을 지정하는 지정 값을 포함하며,
상기 제어부는 상기 지정 값에 대응되는 동기화 정보를 이용하여 상기 기준 데이터 및 상기 부가 데이터를 동기화시켜 출력하도록 상기 출력부를 제어하는 것을 특징으로 하는 수신 장치.
제4항에 있어서,
상기 지정 값은,
상기 기준 데이터 및 상기 부가 데이터 각각의 PTS(Presentation Time Stamp) 정보를 이용하여 동기화하도록 지정하는 제1 값, 상기 기준 데이터 및 상기 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 제2 값, 상기 제1 신호 및 상기 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 제3 값 중 하나인 것을 특징으로 하는 수신 장치.
제5항에 있어서,
상기 출력부는,
상기 지정 값이 상기 제1 값이면, 상기 기준 데이터의 PTS와 상기 부가 데이터의 PTS를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터를 출력하고,
상기 지정 값이 상기 제2 값이면, 상기 기준 데이터의 ES에 포함된 제1 타임코드와 상기 부가 데이터의 ES에 포함된 제2 타임 코드를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터의 타임 스탬프를 동일한 값으로 보정하여, 보정된 타임 스탬프에 동기화 출력을 수행하고,
상기 지정 값이 상기 제3 값이면, 상기 프라이빗 데이터 스트림에 포함된 동기화 정보를 각각 검출하여 검출된 동기화 정보에 따라 동기화 출력을 수행하는 것을 특징으로 하는 수신 장치.
제3항에 있어서,
상기 시그널링 정보는,
상기 시그널링 정보를 이용하여 제공되는 하이브리드 서비스의 개수, 하이브리드 서비스 구분자, 하이브리드 서비스 제공 방식, 하이브리드 서비스의 제공 시기를 나타내는 지시자, 하이브리드 서비스 동기화 타입을 지정하는 지정 값, 하이브리드 서비스의 식별자, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서, 부가 데이터의 획득을 위한 URL 정보를 포함하는 것을 특징으로 하는 수신 장치.
제4항에 있어서,
상기 출력부는,
상기 제1 신호로부터 상기 기준 데이터를 검출하는 제1 검출부;
상기 기준 데이터를 디코딩하여 제1 비디오 프레임을 생성하는 제1 비디오 처리부;
상기 제2 신호로부터 상기 부가 데이터를 검출하는 제2 검출부;
상기 부가 데이터를 디코딩하여 제2 비디오 프레임을 생성하는 제2 비디오 처리부;
디코딩된 상기 제1 비디오 프레임 및 상기 제2 비디오 프레임을 조합하여, 렌더링을 수행하는 렌더링부;를 포함하며,
상기 제어부는,
상기 지정 값에 따라 상기 제1 검출부, 상기 제2 검출부, 상기 제1 비디오 처리부, 상기 제2 비디오 처리부 및 상기 렌더링부 중 적어도 하나를 선택적으로 제어하여, 상기 기준 데이터 및 상기 부가 데이터의 동기화 처리를 수행하는 것을 특징으로 하는 수신 장치.
제1항 내지 제8항 중 어느 한 항에 있어서,
상기 제어부는, 상기 제1 신호의 PMT 내의 리저브 영역(Reserved area), PMT descriptor 영역, PSIP VCT(Program and System Information Protocol Virtual Channel Table), EIT reserved, EIT descriptor 영역, 프라이빗 스트림 중 적어도 하나로부터 상기 시그널링 정보를 검출하는 것을 특징으로 하는 수신 장치.
수신 장치의 하이브리드 서비스 제공 방법에 있어서,
RF 방송망(Radio Frequency broadcast network)을 통해 기준 데이터를 포함하는 제1 신호 및 시그널링 정보를 수신하는 단계;
상기 시그널링 정보로부터 복수의 부가 데이터 소스 정보를 검출하는 단계;
IP 통신 망(Internet Protocol Communication Network)에 액세스하여, 상기 복수의 부가 데이터 소스 정보 각각에 대응되는 소스 장치로부터 부가 데이터를 포함하는 제2 신호를 수신하는 단계;
상기 제1 신호 및 상기 제2 신호로부터 상기 기준 데이터 및 상기 부가 데이터를 각각 검출하고 처리하여 동기화시켜 출력하는 단계;를 포함하는 하이브리드 서비스 제공 방법.
제10항에 있어서,
상기 시그널링 정보는 제1 컨텐츠를 구성하는 적어도 하나의 제1 부가 데이터의 소스를 지정하기 위한 제1 부가 데이터 소스 정보 및 상기 제1 컨텐츠에 이어 출력될 제2 컨텐츠를 구성하는 적어도 하나의 제2 부가 데이터의 소스를 지정하기 위한 제2 부가 데이터 소스 정보를 포함하며,
각 컨텐츠에 대응되는 시그널링 정보는 해당 컨텐츠가 출력되는 동안 동일한 형태로 반복 수신되는 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제11항에 있어서,
상기 제1 컨텐츠가 출력되는 동안 상기 제2 부가 데이터 소스 정보에 기초하여 상기 제2 부가 데이터를 포함하는 제2 신호가 수신되면, 상기 제2 부가 데이터를 저장하는 단계;
상기 제2 컨텐츠가 출력될 이벤트가 발생하면, 상기 저장된 제2 부가 데이터를 이용하여 상기 제2 컨텐츠를 출력하는 단계;를 더 포함하는 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제11항에 있어서,
상기 시그널링 정보는 하이브리드 서비스 동기화 타입을 지정하는 지정 값을 포함하며,
상기 동기화는, 상기 지정 값에 대응되는 동기화 정보에 따라 수행되는 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제13항에 있어서,
상기 지정 값은,
상기 기준 데이터 및 상기 부가 데이터 각각의 PTS(Presentation Time Stamp) 정보를 이용하여 동기화하도록 지정하는 제1 값, 상기 기준 데이터 및 상기 부가 데이터 각각의 ES(Elementary Stream)에 포함된 타임 코드를 동기화 정보로 사용하도록 지정하는 제2 값, 상기 제1 신호 및 상기 제2 신호에 각각 포함되는 프라이빗 데이터 스트림을 통해 제공되는 동기화 정보를 사용하도록 지정하는 제3 값 중 하나인 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제13항에 있어서,
상기 출력하는 단계는,
상기 지정 값이 상기 제1 값이면, 상기 기준 데이터의 PTS와 상기 부가 데이터의 PTS를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터를 출력하는 단계;
상기 지정 값이 상기 제2 값이면, 상기 기준 데이터의 ES에 포함된 제1 타임코드와 상기 부가 데이터의 ES에 포함된 제2 타임 코드를 비교하여 동기화될 단위 데이터를 선택하고, 선택된 단위 데이터의 타임 스탬프를 동일한 값으로 보정하여, 보정된 타임 스탬프에 동기화 출력을 수행하는 단계;
상기 지정 값이 상기 제3 값이면, 상기 프라이빗 데이터 스트림에 포함된 동기화 정보를 각각 검출하여 검출된 동기화 정보에 따라 동기화 출력을 수행하는 단계;를 포함하는 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제11항에 있어서,
상기 시그널링 정보는,
상기 시그널링 정보를 이용하여 제공되는 하이브리드 서비스의 개수, 하이브리드 서비스 구분자, 하이브리드 서비스 제공 방식, 하이브리드 서비스의 제공 시기를 나타내는 지시자, 하이브리드 서비스 동기화 타입을 지정하는 지정 값, 하이브리드 서비스의 식별자, 하이브리드 서비스를 구성하는 부가 데이터의 시간적 재생 순서, 부가 데이터의 획득을 위한 URL 정보를 포함하는 것을 특징으로 하는 하이브리드 서비스 제공 방법.
제10항 내지 제16항 중 어느 한 항에 있어서,
상기 시그널링 정보는,
상기 제1 신호의 PMT 내의 리저브 영역(Reserved area), PMT descriptor 영역, PSIP VCT(Program and System Information Protocol Virtual Channel Table), EIT reserved, EIT descriptor 영역, 프라이빗 스트림 중 적어도 하나로부터 검출되는 것을 특징으로 하는 하이브리드 서비스 제공 방법.