KR20080005151A - 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기위한 ｄｍｂ 송/수신 시스템 및 그 방법 - Google Patents

디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기위한 ｄｍｂ 송/수신 시스템 및 그 방법 Download PDF

Info

Publication number
KR20080005151A
KR20080005151A KR1020070068692A KR20070068692A KR20080005151A KR 20080005151 A KR20080005151 A KR 20080005151A KR 1020070068692 A KR1020070068692 A KR 1020070068692A KR 20070068692 A KR20070068692 A KR 20070068692A KR 20080005151 A KR20080005151 A KR 20080005151A
Authority
KR
South Korea
Prior art keywords
data
bifs
dmb
stream
service
Prior art date
Application number
KR1020070068692A
Other languages
English (en)
Other versions
KR100883366B1 (ko
Inventor
이광순
양규태
김광용
김희정
함영권
안충현
이수인
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20080005151A publication Critical patent/KR20080005151A/ko
Application granted granted Critical
Publication of KR100883366B1 publication Critical patent/KR100883366B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H04N21/4348—Demultiplexing of additional data and video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4382—Demodulation or channel decoding, e.g. QPSK demodulation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4433—Implementing client middleware, e.g. Multimedia Home Platform [MHP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04H—BROADCAST COMMUNICATION
    • H04H2201/00—Aspects of broadcast communication
    • H04H2201/10—Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/11—Aspects of broadcast communication characterised by the type of broadcast system digital multimedia broadcasting [DMB]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

1. 청구범위에 기재된 발명이 속한 기술분야
본 발명은 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송/수신 시스템 및 그 방법에 관한 것임.
2. 발명이 해결하려고 하는 기술적 과제
본 발명은, 멀티미디어 데이터 방송 서비스를 제공함에 있어서, 비디오 서비스와 동기화가 요구되는 데이터(연동형 데이터)는 BIFS 기반의 데이터서비스 형태로 제공하고, 비디오 서비스와 동기화가 요구되지 않는 데이터(독립형 데이터)는 미들웨어 기반의 데이터서비스 형태로 제공함으로써, BIFS 기반 데이터서비스와 미들웨어 기반 데이터서비스를 효율적으로 통합할 수 있는, 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송/수신 시스템 및 그 방법을 제공하는데 그 목적이 있음.
3. 발명의 해결방법의 요지
본 발명은, 디지털멀티미디어 방송(DMB)에서 통합 데이터서비스를 제공하기 위한 DMB 송신 시스템에 있어서, 방송콘텐츠 데이터를 비디오 서비스와의 연동 여부에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링하기 위한 데이터 서버; 및 상기 연동형 데이터에 대해서는 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 상기 독립형 데이터에 대해서는 DMB 규격에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하기 위한 DMB 송신 수단을 포함 함.
4. 발명의 중요한 용도
본 발명은 DMB 데이터방송 서비스 등에 이용됨.
DMB, 데이터 방송, 미들웨어, BIFS, 연동형 데이터, 독립형 데이터

Description

디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송/수신 시스템 및 그 방법{DMB TRANSMITTING AND RECEIVING SYSTEM AND METHOD FOR PROVIDING INTEGRATED DATA SERVICE IN DIGITAL MULTIMEDIA BROADCASTING}
본 발명은 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송/수신 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 비디오 서비스에 연동되는 데이터의 전송에 적합한 엠펙 BIFS 기반의 데이터서비스와, 다양한 고기능의 데이터서비스를 제공하는 데 적합한 미들웨어 기반의 데이터서비스를 통합적으로 제공하는, 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 ＭＢ 송/수신 시스템 및 그 방법에 관한 것이다.
디지털 멀티미디어 방송(DMB: Digital Multimedia Broadcasting)은 오디오/비디오(AV) 데이터의 인코딩을 위해 MPEG-4 기술을 이용하고 있으며, 또한 MPEG-4 BIFS 데이터를 포함한 비디오와 연동된 데이터서비스도 용이하게 제공할 수 있다. 여기서, MPEG-4는 다양한 유형(Type)의 오디오/비디오 객체의 코딩을 다루는 규격 으로서, 보통의 비디오/오디오 객체, 텍스쳐(Texture), 텍스트(Text), 그래픽(Graphics), 합성음향(Synthetic Audio) 등을 대상으로 한다.
따라서 수신단말에서 해당 멀티미디어 장면을 재구성할 수 있게 하기 위해서는, 송신 측에서 단순히 오디오/비디오 데이터를 전송하는 것 외에 부가적인 정보의 전송도 필요하다.
이와 같이, 수신단말에서 오디오/비디오 데이터를 결합하여 의미 있는 장면을 구성할 수 있게 하는 부가적인 정보를 '장면기술 정보'(Scene Description Information)라 한다. 이 장면기술 정보는 오디오/비디오 객체의 시공간상의 배치를 결정하는 것으로서, 코딩된 오디오/비디오 객체와 함께 전송된다. 장면기술 정보는 이진 파일 형태의 BIFS(Binary Format for Scene)로 파라미터화 되어 표현되며, 상세하게는 '속성(Attribute)'과 기타 정보(이벤트 소스와 타겟 등)를 가지는 '노드(Node)들'이 트리 형태의 계층적 구조로 부호화되어 있다.
현재, MPEG-4 BIFS를 기반으로 하는 데이터서비스는 동일한 장면기술 내의 비디오와 연동하는 메커니즘을 제공하고는 있지만, 실제 방송용으로 전송해서 제공하는 데이터가 이미지, 텍스트 등의 단순 정보 제공형태에 불과하여, 고품위의 다양한 데이터서비스를 제공하는데에는 한계(문제점)가 있다.
한편, 방송용 미들웨어(Middleware)는 다양한 수신 단말에 대하여, 공통되고 규격화된 실행 플랫폼을 제공하고 있으며, 게다가 이식성이 높은 다운로드형 어플리케이션(Application)을 위한 높은 수준의 표준 API(Application Program Interface)까지도 제공하고 있다.
이러한 방송용 미들웨어를 기반으로 하는 데이터서비스는 자바 언어로 코딩된 어플리케이션을 미리 수신 단말에 다운로드한 후 사용자의 요구가 있거나 또는 자동으로 실행하게 하고, 이 어플리케이션의 수행에 필요한 데이터는 실시간으로 방송함으로써, 다양하고 고기능의 데이터서비스를 제공한다. 또한 방송용 미들웨어를 기반으로 하는 데이터서비스에서는, 서비스 정보, 서비스 바인딩(binding) 메시지 등을 별도로 전송함으로써 방송중인 여러 프로그램과도 연동된 데이터서비스를 제공하는 것이 가능하다.
하지만, 이러한 종래의 방송용 미들웨어를 기반으로 하는 데이터서비스에서는, 데이터서비스의 동기화를 위해 더욱 복잡한 동기화 과정이 수행된다.
상기와 같은 종래의 '엠펙 BIFS 기반의 데이터서비스'에서는 동기화 데이터서비스는 효과적으로 제공할 수 있으나 그 전송되는 데이터가 이미지, 텍스트 등의 단순 정보 제공 형태에 불과하여 고품격의 다양한 데이터서비스를 제공하는 데에 한계가 있고, 종래의 '미들웨어 기반의 데이터서비스'에서는 고품격의 다양한 데이터서비스를 제공할 수는 있지만 동기화 데이터서비스를 제공하기 위해서는 복잡한 동기화 과정이 필요하다는 문제점이 있으며, 이를 해결하고자 하는 것이 본 발명의 과제이다.
본 발명은 상기 문제점을 해결하기 위하여 제안된 것으로, 엠펙 BIFS 기반의 데이터서비스와 미들웨어 기반의 데이터서비스를 효율적으로 통합함으로써, 각 데이터서비스 형태의 장점을 극대화하는 것을 특징으로 한다.
즉, 본 발명은, 비디오 서비스와 동기화가 요구되는 데이터(연동형 데이터)에 대해서는 엠펙 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 비디오 서비스와 동기화가 요구되지 않는 데이터(독립형 데이터)에 대해서는 DMB 데이터전송 프로토콜에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하는 것을 특징으로 한다.
상기와 같은 본 발명은, 디지털멀티미디어 방송(DMB)에서 미들웨어 기반의 데이터서비스와 MPEG-4 BIFS 기반의 데이터서비스를 통합함으로써, DMB에서 최초로 상용 서비스되고 있는 MPEG-4 BIFS 기반의 연동형 단순 정보 제공의 데이터서비스와, 복잡하고 다양한 고기능을 제공하는 미들웨어 기반의 데이터서비스가 통합된 형태의 서비스를 제공할 수 있는 효과가 있다.
즉, 본 발명은, 각기 대응되는 장단점을 갖고 있는 MPEG-4 BIFS 기반의 데이터서비스와 미들웨어 기반의 데이터서비스를 통합적으로 구현함으로써, 각 데이터서비스에서의 단점을 보완하고 장점을 최대한 살릴 수 있는 효과가 있다.
또한, 본 발명은, 상기와 같은 통합 서비스를 통하여, DMB 데이터 방송 서비 스의 개발 및 관련 시장 활성화 등에 기여할 수 있는 효과가 있다.
상기 목적을 달성하기 위한 본 발명은, 디지털멀티미디어 방송(DMB)에서 통합 데이터서비스를 제공하기 위한 DMB 송신 시스템에 있어서, 방송콘텐츠 데이터를 비디오 서비스와의 연동 여부에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링하기 위한 데이터 서버; 및 상기 연동형 데이터에 대해서는 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 상기 독립형 데이터에 대해서는 DMB 규격에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하기 위한 DMB 송신 수단을 포함한다.
한편, 본 발명은, DMB 송신 시스템에서의 통합 데이터서비스 제공 방법에 있어서, 방송콘텐츠 데이터를 비디오 서비스와의 연동 여부에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링하는 데이터 분류 단계; 및 상기 연동형 데이터에 대해서는 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 상기 독립형 데이터에 대해서는 DMB 데이터전송 프로토콜에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하는 데이터 전송 단계를 포함한다.
한편, 본 발명은, 디지털멀티미디어 방송(DMB)에서 통합 데이터서비스를 제공하기 위한 DMB 수신 시스템에 있어서, DMB 방송신호로부터 오디오/비디오 스트림, BIFS 연동형 데이터 스트림, 및 독립형 데이터 스트림을 분리하고, 상기 오디오/비디오 스트림과 상기 BIFS 연동형 데이터 스트림을 복호화하고 상호 결합하여 장면을 구성하기 위한 방송 수신처리 수단; 및 상기 방송 수신처리 수단의 동작을 제어하고, 응용프로그램의 실행 환경을 제공하며, 상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽에 상기 분리된 독립형 데이터 스트림을 복호화하여 결합하기 위한 DMB 미들웨어 수단을 포함한다.
한편, DMB 수신 시스템에서의 통합 데이터서비스 제공 방법에 있어서, DMB 방송신호로부터 오디오/비디오 스트림, BIFS 연동형 데이터 스트림, 및 독립형 데이터 스트림을 분리하는 역다중화 단계; 상기 오디오/비디오 스트림과 상기 BIFS 연동형 데이터 스트림을 복호화하고 결합하여 해당 장면을 구성하는 장면 구성 단계; 및 미들웨어 기반으로 응용프로그램을 실행하고, 상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽에 상기 분리된 독립형 데이터를 결합하는 응용 단계를 포함한다. 이러한 본 발명의 방법은, 상기 응용프로그램이 연동형 데이터를 사용할 경우, 해당 연동형 데이터를 획득하여 상기 응용프로그램의 실행에 사용하는 단계를 더 포함하며, 실시예에 따라서는 상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽을, 상기 장면 구성 단계에서 구성된 장면과 결합하는 단계를 더 포함한다.
본 발명은, MPEG-4 BIFS기반의 데이터서비스와 미들웨어 기반 데이터서비스가 통합된 서비스를 제공함으로써, MPEG-4 BIFS기반의 데이터서비스 측면에서는 단순 정보 제공을 뛰어 넘어 복잡하고 다양한 고기능의 데이터서비스를 제공하고, 또한 미들웨어 기반 데이터서비스 측면에서는 비디오 서비스와 연동된 데이터를 MPEG-4 BIFS를 통해 용이하게 전송함으로써 효과적인 동기화 데이터서비스를 제공 하는 것이다. 특히, 본 발명은, 현재 상업 방송 중인 디지털 멀티미디어(DMB)에서 MPEG-4 BIFS를 기반으로 하는 대화형 데이터서비스를 미들웨어 환경에서 제공하는 것이다.
상술한 목적, 특징 및 장점은 첨부된 도면과 관련한 다음의 상세한 설명을 통하여 보다 분명해 질 것이며, 그에 따라 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명의 기술적 사상을 용이하게 실시할 수 있을 것이다. 또한, 본 발명을 설명함에 있어서 본 발명과 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에 그 상세한 설명을 생략하기로 한다. 이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 일실시예를 상세히 설명하기로 한다.
도 1은 본 발명에 따른 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송신 시스템의 일실시예 구성도로서, 미들웨어 기반의 데이터서비스와 MPEG-4 BIFS 기반의 데이터서비스를 통합하기 위한 송신시스템을 나타낸다. 이하에서는, ＤＭＢ 송신 시스템에서 수행되는 통합 데이터서비스 방법도 함께 설명하기로 한다.
본 발명에 따른 ＤＭＢ 송신 시스템은, 도 1에 도시된 바와 같이, 콘텐츠 수집 및 저작부(10), 데이터 서버(11), 및 DMB 송신부(12)를 포함하여 이루어지는데, 각각의 구성요소에 대하여 설명하면, 다음과 같다.
콘텐츠 수집 및 저작부(10)는 데이터 콘텐츠(데이터방송 콘텐츠)를 실시간으로 수집하거나 또는 저작한다. 데이터 서버(11)는 콘텐츠 수집 및 저작부(10)에서 수집/저작된 데이터 콘텐츠를 관리하며, 관리되는 데이터 콘텐츠가 비디오 서비스와의 연동 여부(비디오 서비스와의 동기화 필요 여부)에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링 송출한다. 여기서, 연동형 데이터는 비디오 서비스와 동기화가 요구되는 데이터 콘텐츠를 의미한다. 그리고, 독립형 데이터는 비디오 서비스와 동기화가 요구되지 않는 데이터 콘텐츠를 의미하는데, 이에는 단순한 정보제공형태의 데이터, 어플리케이션(응용프로그램), 어플리케이션 관련 데이터 등이 포함된다.
그러면, DMB 송신부(12)는 연동형 데이터에 대해서는 엠펙 BIFS(Binary Format for Scenes) 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 독립형 데이터에 대해서는 DMB 규격(DMB 데이터전송 프로토콜)에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송한다.
이와 같은 DMB 송신부(12)는, 더욱 상세하게는, AV 인코더(121), BIFS 인코더(122), 미디어 다중화부(123), 데이터 인코더(124), 서비스정보(SI) 생성부(125), 전송 다중화부(126), 및 채널 코딩 및 RF 송신부(127)를 포함하여 이루어진다.
여기서, AV 인코더(121)는 DMB 방송에서 오디어/비디오 서비스를 제공하기 위하여 오디오/비디오 신호를 부호화(인코딩)하고, BIFS 인코더(122)는 데이터 서버(11)로부터 전달되는 연동형 데이터에 대하여 MPEG-4 BIFS 규격에 따라 부호화함으로써 BIFS 데이터를 생성한다. 여기서, BIFS 데이터에는 MPEG-4의 객체 기술(Object Description) 정보 등의 장면 구성 정보와, 부가 데이터(연동형 데이터 를 이루고 있는 객체로서, 이미지, 텍스트 등)가 포함되며, 연동형 데이터에 대한 BIFS 데이터이기 때문에 독립형 데이터와의 구분을 위하여 'BIFS 연동형 데이터'라 한다.
그러면, 미디어 다중화부(123)는 AV 인코더(121)의 출력(부호화된 오디오/비디오)과 BIFS 인코더(122)의 출력을 다중화(미디어 다중화)한다.
한편, 데이터 인코더(124)는 데이터 서버(11)에서 전달된 독립형 데이터를, DMB에서 규정하고 있는 다양한 데이터 전송 프로토콜로 부호화한다. 그리고, 서비스정보(SI) 생성부(125)는 서비스 및 프로그램에 관한 정보를 생성한다.
전송 다중화부(126)는 상기 생성된 모든 디지털 스트림을 하나의 전송스트림(TS)으로 다중화한다. 즉, 전송 다중화부(126)는 미디어 다중화부(123)의 출력, 데이터 인코더(124)의 출력, 및 서비스정보(SI) 생성부(125)에서 생성된 서비스/프로그램 정보를 다중화하여 하나의 전송스트림(TS)을 생성한다.
이후, 채널 코딩 및 RF 전송부(127)는 전송 다중화부(126)에서 다중화되어 출력되는 전송스트림에 대하여 채널 오류 정정을 위한 채널 코딩을 수행한 후, RF 신호로 변환하여 송신한다. 즉, 채널 코딩 및 RF 전송부(127)는 다중화된 전송스트림을 다양한 디지털 방송 전송 규격으로 채널 코딩한 후 RF 신호로 송출한다.
본 발명에 따른 DMB 송신 시스템은 콘텐츠 수집 및 저작부(10)에서 수집/저작된 데이터 콘텐츠를 서비스 시나리오에 따라 두 가지 형태의 채널로 전송하는 것을 특징으로 한다. 즉, 연동형 데이터 콘텐츠는 BIFS 인코더(122)를 통하여 MPEG-4 BIFS기반 데이터서비스 채널로 전송되고, 독립형 데이터 콘텐츠는 데이터 인코 더(124)를 통하여 미들웨어 기반 데이터서비스 채널로 전송된다.
한편, 서비스 시나리오에 따라서는, 독립형 데이터 콘텐츠를 MPEG-4 BIFS 기반의 데이터서비스 채널로도 전송할 수 있다.
도 2는 본 발명에 따른 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 수신 시스템의 일실시예 구성도로서, 미들웨어 기반의 데이터서비스와 MPEG-4 BIFS 기반의 데이터서비스를 통합하기 위한 수신 시스템을 나타낸다. 이하에서는, ＤＭＢ 수신 시스템에서 수행되는 통합 데이터서비스 방법도 함께 설명하기로 한다.
본 발명에 따른 ＤＭＢ 수신 시스템(DMB 수신 단말)은, 도 2에 도시된 바와 같이, 방송 수신처리부(20), DMB 미들웨어(21), 및 복수의 응용 프로그램(22)을 포함하여 이루어진다.
먼저, 방송 수신처리부(20)는 데이터 분리부(200), 디코더(204, 205), 장면 처리부(206)를 포함하여 이루어지는 단말 하드웨어/운영체제(OS)에 해당하는 것으로서, DMB 방송신호로부터 BIFS와 관련된 연동형 데이터, 독립형 데이터, 및 서비스 정보(SI), 비디오/오디오 스트림을 분리(추출)하고, BIFS와 관련된 연동형 데이터와 비디오/오디오 스트림을 각각 디코딩한 후 결합하여 장면을 구성한다.
한편, DMB 미들웨어(21)는, 미들웨어 실행엔진(210), 자바 가상 머신(Java Virtual Machine)(218), 및 미들웨어 API(219)를 포함하여 이루어지는 것으로서, DMB 수신단말에 탑재되는 응용 프로그램(어플리케이션)(22)을 수행할 수 있는 환경을 제공하는 것으로서, 특히 통합 데이터서비스와 관련해서는 방송 수신처리부(20) 에서의 역다중화 과정 및 BIFS 연동형 데이터 디코딩 과정을 제어하고, 어플리케이션 실행을 통하여 생성된 텍스트/그래픽에 독립형 데이터를 결합하거나 방송 수신처리부(20)에서의 장면 재구성을 제어한다.
이하, ＤＭＢ 수신 시스템(수신 단말)에서의 구체적인 동작을 설명하기로 한다.
튜너(201)의 채널 선택 과정을 통하여 수신된 DMB 방송신호는, 채널 역다중화부(202)에 의해 서비스 정보(SI) 및 독립형 데이터 스트림과, 미디어 스트림으로 분리된다.
이렇게 분리된 스트림 중에서 서비스 정보 및 독립형 데이터 스트림은 미들웨어 실행엔진(210)(더욱 상세하게는, 프로토콜 처리부(214))으로 보내어진다. 한편, 미디어 역다중화부(203)는 채널 역다중화부(202)에서 분리된 미디어 스트림 내의 초기 객체기술자(IOD), 객체기술자(OD) 등을 분석한 후, 미디어 스트림 내의 BIFS 연동형 데이터(연동형 데이터에 대한 BIFS 데이터) 스트림과 오디오/비디오(AV) 스트림으로 분리한다.
BIFS 디코더(204)는 BIFS 연동형 데이터 스트림을 분석하여 BIFS 복호화함으로써 연동형 데이터를 복원해낸다. 이렇게 복원된 연동형 데이터에는 장면구성 정보와 이와 관련된 부가데이터가 포함되며, 이들은 장면 그래프 생성부(207)로 보낸다.
그러면, 장면 그래프 생성부(207)는 장면 구성 정보를 바탕으로, 콤포지터/랜더러(208)에서의 장면 구성을 제어한다.
콤포지터/랜더러(208)는 장면 그래프 생성부(207)의 제어에 따라, BIFS 디코더(204)에서 추출된 부가 데이터와 AV 디코더(205)에서 디코딩된 오디오/비디오를 이용하여 장면을 구성한다.
상기와 같은 과정을 통하여 최종적으로 생성된 비디오, 텍스트 및 그래픽 등은 프레임 버퍼/OSD(On Screen Display)(209)에 의해 중첩되어 디스플레이 장치(23)로 출력되며, 오디오 신호는 별도의 스피커로 출력된다.
한편, DMB 수신 단말에서 미들웨어 기반의 데이터서비스를 제공하기 위한 미들웨어 API(219)는 응용프로그램(22)의 실행을 위한 다양한 기능들에 대해서 정의한 것으로서, 응용프로그램(22)과 미들웨어 실행 엔진들(210)과의 인터페이스를 위한 API의 모음이다.
미들웨어 실행엔진(210)은 응용프로그램(22)의 처리를 담당하며 데이터 처리를 위한 환경을 제공하는 모듈이다. 이러한 미들웨어 실행엔진(210)은 채널 처리부(211), 로케이터(Locator)(212), 자원 관리자(Resource Manager)(213), 프로토콜 처리부(214), 응용프로그램 처리부(Application Manager)(215), 그래픽 사용자 인터페이스부(216), 장면그래프 제어부(217)를 포함하여 이루어지는데, 각각의 구성요소에 대하여 설명하면 다음과 같다.
채널 처리부(211)는 수신 단말의 저수준(Low Level) 장치를 제어하는 것으로 튜너(201) 및 채널 역다중화부(202)를 제어하고 서비스를 선택하는 기능을 수행하며, 로케이터(Locator)(212)는 특정 방송 채널, 방송 채널 내의 파일, 패킷 스트림 등을 지칭하는 역할을 수행한다. 그리고, 자원 관리자(Resource Manager)(213)는 미들웨어에서 필요한 자원들(Resources), 즉 하드웨어 및 소프트웨어 자원을 관리한다.
프로토콜 처리부(214)는 오디오/비디오가 아닌 데이터를 이용한 다양한 서비스를 제공하기 위한 것으로서, 다양한 서비스를 위한 다양한 데이터 방송 프로토콜(MOT, TDC, TPEG 등)을 해석한다. 응용프로그램 처리부(215)는 응용프로그램(어플리케이션)의 수신 제어 및 저장 기능을 수행하고, 그 저장한 응용프로그램의 실행제어 등의 기능을 수행한다.
그래픽 사용자 인터페이스부(216)는 사용자와의 인터페이스를 수행하는 것으로서, 사용자의 입력에 따라 데이터를 화면에 출력하는 기능을 담당하는 그래픽 사용자 인터페이스(GUI)로 구성된다. 그리고, 장면그래프 제어부(217)는 그래픽 사용자 인터페이스부(216)를 통한 사용자의 입력에 따라, 방송 수신 처리부(20)에서의 장면 구성을 제어하는 것으로서, 구체적으로는 장면그래프 생성부(207)에서의 장면 그래프 생성 과정을 제어한다.
한편, 자바 가상 머신(JVM)(218)은 자바 코드(JAVA Code)로 작성된 응용프로그램(22)을 해석 및 실행하기 위한 환경을 제공한다.
이하에서는, 도 2에 도시된 바와 같은 DMB 수신 시스템(수신 단말)에서 수행되는 데이터서비스 통합 방법, 즉 미들웨어 기반의 데이터서비스와 MPEG-4 BIFS 기반의 데이터서비스를 통합하기 위한 구체적인 방법을 설명하기로 한다.
기본적으로 미들웨어 기반의 데이터서비스는, 채널 역다중화부(202)로부터 입력되는 서비스정보(SI)와 독립형 데이터(예를 들면, 어플리케이션 및 이와 관련 데이터 등)가 프로토콜 처리부(214)에 의해 수신된 후, 자바가상머신(218)에 의한 응용프로그램의 실행과 그 처리된 데이터가 그래픽사용자 인터페이스부(216)의 제어에 의해 디스플레이 장치(23)를 통해 사용자에게 제공됨으로써 이루어진다. 즉,프로토콜 처리부(214)는 채널 역다중화부(202)에서 분리된 서비스 정보 및 독립형 데이터 스트림을 받아 사용하며, 특히 독립형 데이터 스트림을 디코딩한다. 이렇게 디코딩된 독립형 데이터는, 미들웨어 실행 엔진(210)에서의 응용프로그램의 실행에 의하여 생성된 그래픽/텍스트와 결합 또는 연동되게 된다.
여기서, 파일로 전송되는 어플리케이션(응용프로그램) 및 패킷 스트림으로 전송되는 관련데이터는 로케이터(212)에 의해 URL 형태로 지정되는데, 본 발명에서는 이 로케이터(212)가 미디어 역다중화부(203)를 제어하여, MPEG-4 및 MPEG-2 시스템으로 다중화된 미디어 스트림 내의 임의의 기초 스트림(ES: Elementary Stream)을 지정하게 된다.
이렇게 함으로써, 미들웨어 응용프로그램이 MPEG-4 BIFS 기반의 채널로 전송되는 데이터(연동형 데이터)를 사용할 경우에는, 로케이터(212)가 이 BIFS 기반 채널의 해당 기초 스트림(ES)을 지정하고, 그에 따라 프로토콜 처리부(214)가 BIFS 디코더(204)를 제어하여 MPEG-4 BIFS 데이터(연동형 데이터)를 입력받아 처리하게 된다. 즉, 프로토콜 처리부(214)는 BIFS 디코더(204)로부터 획득한 연동형 데이터를 해당 응용프로그램의 실행에 사용한다.
특히, MPEG-4 BIFS기반으로 전송되는 데이터는 비디오 스트림과 용이하게 동기화하기 위한 메커니즘으로 다중화되어 있으므로, 이를 이용하면 미들웨어 기반의 데이터서비스에서도 동기화 데이터서비스를 용이하게 제공할 수 있다.
또한, 본 발명에 따른 데이터서비스의 통합 효과는 비디오와 데이터를 디스플레이 장치(23)에서 재생하는 그래픽 사용자 인터페이스(216)와 장면그래프에서 가져올 수 있다.
미들웨어 실행엔진(210)의 장면 그래프 제어부(217)는 미들웨어 응용프로그램이 장면 그래프에 접근하여 콤포지터/랜더러(208)에서의 장면 구성을 제어한다. 즉, 미들웨어 실행엔진(210)의 장면 그래프 제어부(217)는, 응용프로그램의 실행에 의해 생성된 텍스트/그래픽이, 매 비디오의 프레임(AV 디코더(205)에서 디코딩되어 출력되는 비디오의 프레임)마다 해당 비디오 및 MPEG-4 BIFS 데이터(BIFS 연동형 데이터)와 유기적으로 결합되어 해당 장면을 구성할 수 있게 한다.
또한, 그래픽 사용자 인터페이스부(216)는 사용자 입력에 의한 이벤트 처리를 수행함에 있어서, MPEG-4 BIFS의 이벤트 노드와 미들웨어 실행엔진의 사용자 인터페이스 API 간에 유기적인 인터페이스가 이루어지도록 하며, 이렇게 함으로써 상호 간의 이벤트를 공유하게 되는 것이다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
도 1은 본 발명에 따른 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 송신 시스템의 일실시예 구성도,
도 2는 본 발명에 따른 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ＤＭＢ 수신 시스템의 일실시예 구성도이다.
*도면의 주요부분에 대한 부호설명
10: 콘텐츠 수집 및 저작부 11: 데이터 서버
12: DMB 송신부 122: BIFS 인코더
123: 미디어 다중화부 124: 데이터 인코더
126: 전송 다중화부 20: 방송 수신처리부
21: 미들웨어 22: 응용프로그램
200: 데이터 분리부 204: BIFS 디코더
205: AV 디코더 206: 장면 처리부
212: 로케이터 214: 프로토콜 처리부
217: 장면 그래프 제어부

Claims (12)

  1. 디지털멀티미디어 방송(DMB)에서 통합 데이터서비스를 제공하기 위한 DMB 송신 시스템에 있어서,
    방송콘텐츠 데이터를 비디오 서비스와의 연동 여부에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링하기 위한 데이터 서버; 및
    상기 연동형 데이터에 대해서는 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 상기 독립형 데이터에 대해서는 DMB 규격에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하기 위한 DMB 송신 수단
    을 포함하는 DMB 송신 시스템.
  2. 제 1 항에 있어서,
    상기 DMB 송신 수단은,
    오디오/비디오 신호를 부호화하기 위한 AV 부호화 수단;
    상기 연동형 데이터를 BIFS 규격에 따라 부호화하여 BIFS 연동형 데이터를 생성하기 위한 BIFS 부호화 수단;
    상기 부호화된 오디오/비디오 신호와 상기 부호화된 BIFS 연동형 데이터를 다중화하기 위한 미디어 다중화 수단;
    상기 독립형 데이터를 DMB 규격에 따라 데이터 부호화하기 위한 데이터 부호 화 수단; 및
    상기 미디어 다중화 수단 및 상기 데이터 부호화 수단의 출력과 서비스 정보를 다중화하여 전송 스트림으로 송신하기 위한 전송다중화/송신 수단
    을 포함하는 DMB 송신 시스템.
  3. 제 1 항 또는 제 2 항에 있어서,
    방송콘텐츠를 수집 또는 저작하기 위한 콘텐츠 수집/저작 수단
    을 더 포함하는 DMB 송신 시스템.
  4. DMB 송신 시스템에서의 통합 데이터서비스 제공 방법에 있어서,
    방송콘텐츠 데이터를 비디오 서비스와의 연동 여부에 따라 연동형 데이터와 독립형 데이터로 구분하여 스케줄링하는 데이터 분류 단계; 및
    상기 연동형 데이터에 대해서는 BIFS 부호화하여 BIFS 기반의 데이터서비스 채널로 전송하고, 상기 독립형 데이터에 대해서는 DMB 데이터전송 프로토콜에 따라 데이터 부호화하여 미들웨어 기반의 데이터서비스 채널로 전송하는 데이터 전송 단계
    를 포함하는 통합 데이터서비스 제공 방법.
  5. 제 4 항에 있어서,
    상기 데이터 전송 단계는,
    상기 연동형 데이터를 BIFS 규격에 따라 부호화하여 BIFS 연동형 데이터를 생성하는 단계;
    상기 생성된 BIFS 연동형 데이터를 해당 비디오 데이터와 미디어 다중화하는 단계;
    상기 독립형 데이터를 DMB 규격에 따라 데이터 부호화하는 단계; 및
    상기 미디어 다중화된 비디오 데이터 및 BIFS 연동형 데이터와, 상기 부호화된 독립형 데이터를 전송다중화하여 전송스트림으로 송신하는 단계
    를 통합 데이터서비스 제공 방법.
  6. 디지털멀티미디어 방송(DMB)에서 통합 데이터서비스를 제공하기 위한 DMB 수신 시스템에 있어서,
    DMB 방송신호로부터 오디오/비디오 스트림, BIFS 연동형 데이터 스트림, 및 독립형 데이터 스트림을 분리하고, 상기 오디오/비디오 스트림과 상기 BIFS 연동형 데이터 스트림을 복호화하고 상호 결합하여 장면을 구성하기 위한 방송 수신처리 수단; 및
    상기 방송 수신처리 수단의 동작을 제어하고, 응용프로그램의 실행 환경을 제공하며, 상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽에 상기 분리된 독립형 데이터 스트림을 복호화하여 결합하기 위한 DMB 미들웨어 수단
    을 포함하는 DMB 수신 시스템.
  7. 제 6 항에 있어서,
    상기 방송 수신처리 수단은,
    상기 DMB 방송신호로부터 오디오/비디오 스트림, 독립형 데이터 스트림, BIFS 연동형 데이터 스트림, 서비스정보를 분리하기 위한 역다중화 수단;
    상기 BIFS 연동형 데이터 스트림을 BIFS 복호화하여 연동형 데이터를 복원하기 위한 BIFS 복호화 수단;
    상기 오디오/비디오 스트림을 복호화하기 위한 AV 복호화 수단; 및
    상기 BIFS 복호화 수단에서 복원된 연동형 데이터와, 상기 AV 복호화 수단에서 복호화된 오디오/비디오 데이터를 이용하여 장면을 구성하기 위한 장면 처리 수단
    을 포함하는 DMB 수신 시스템.
  8. 제 7 항에 있어서,
    상기 DMB 미들웨어 수단은,
    상기 응용프로그램이 연동형 데이터를 사용할 경우, 상기 BIFS 복호화 수단으로부터 해당 연동형 데이터를 획득하여 상기 응용프로그램의 실행에 사용하는 기능을 더 수행하는 특징으로 하는 DMB 수신 시스템.
  9. 제 7 항에 있어서,
    상기 DMB 미들웨어 수단은,
    상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽이, 상기 AV 복호화 수단에서 출력되는 비디오 데이터 및 상기 BIFS 복호화 수단에서 출력되는 연동형 데이터와 결합되어 장면 구성이 이루어지도록, 상기 장면 처리 수단을 제어하는 것을 특징으로 하는 DMB 수신 시스템.
  10. DMB 수신 시스템에서의 통합 데이터서비스 제공 방법에 있어서,
    DMB 방송신호로부터 오디오/비디오 스트림, BIFS 연동형 데이터 스트림, 및 독립형 데이터 스트림을 분리하는 역다중화 단계;
    상기 오디오/비디오 스트림과 상기 BIFS 연동형 데이터 스트림을 복호화하고 결합하여 해당 장면을 구성하는 장면 구성 단계; 및
    미들웨어 기반으로 응용프로그램을 실행하고, 상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽에 상기 분리된 독립형 데이터를 결합하는 응용 단계
    를 포함하는 통합 데이터서비스 제공 방법.
  11. 제 10 항에 있어서,
    상기 응용프로그램이 연동형 데이터를 사용할 경우, 해당 연동형 데이터를 획득하여 상기 응용프로그램의 실행에 사용하는 단계
    를 더 포함하는 통합 데이터서비스 제공 방법.
  12. 제 10 항 또는 제 11 항에 있어서,
    상기 응용프로그램의 실행에 의하여 생성된 텍스트/그래픽을, 상기 장면 구성 단계에서 구성된 장면과 결합하는 단계
    를 더 포함하는 통합 데이터서비스 제공 방법.
KR1020070068692A 2006-07-07 2007-07-09 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ｄｍｂ 수신 시스템 및 그 방법 KR100883366B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR20060064074 2006-07-07
KR1020060064074 2006-07-07

Publications (2)

Publication Number Publication Date
KR20080005151A true KR20080005151A (ko) 2008-01-10
KR100883366B1 KR100883366B1 (ko) 2009-02-11

Family

ID=39215628

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070068692A KR100883366B1 (ko) 2006-07-07 2007-07-09 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ｄｍｂ 수신 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR100883366B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102595201A (zh) * 2011-11-25 2012-07-18 中兴通讯股份有限公司 一种cmmb数据广播下发方法及系统
KR20140000306A (ko) * 2011-01-25 2014-01-02 소니 주식회사 수신 장치, 수신 방법, 공급 장치, 공급 방법, 프로그램 및 방송 시스템

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100726545B1 (ko) * 2005-08-09 2007-06-11 주식회사 대우일렉트로닉스 오디오 디코더 통합형 디지털 멀티미디어 방송 시스템
KR100744785B1 (ko) * 2005-11-21 2007-08-02 엘지전자 주식회사 Ｂｉｆｓ 채널을 통한 데이터 서비스 방법, 및 디지털멀티미디어 방송수신 단말기
KR100790626B1 (ko) * 2005-12-28 2008-01-02 엘지전자 주식회사 방송 수신기에서 데이터 서비스를 위한 유저 인터페이스제공 방법

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140000306A (ko) * 2011-01-25 2014-01-02 소니 주식회사 수신 장치, 수신 방법, 공급 장치, 공급 방법, 프로그램 및 방송 시스템
CN102595201A (zh) * 2011-11-25 2012-07-18 中兴通讯股份有限公司 一种cmmb数据广播下发方法及系统
WO2013075474A1 (zh) * 2011-11-25 2013-05-30 中兴通讯股份有限公司 一种cmmb数据广播下发方法及系统
CN102595201B (zh) * 2011-11-25 2018-05-01 中兴通讯股份有限公司 一种cmmb数据广播下发方法及系统

Also Published As

Publication number Publication date
KR100883366B1 (ko) 2009-02-11

Similar Documents

Publication Publication Date Title
CN1139254C (zh) 用于合成和显示mpeg-4视频节目的终端
KR100747598B1 (ko) 디지털방송 기반의 3차원 입체영상 송수신 시스템 및 그방법
KR100587324B1 (ko) 디지털 멀티미디어 방송 서비스 방법, 송/수신기, 및 데이터 구조
KR100658222B1 (ko) 3차원 디지털 멀티미디어 방송 시스템
US20120320168A1 (en) Method and apparatus for transmission and reception in the provision of a plurality of transport interactive 3dtv broadcasting services
US20130019024A1 (en) Wireless 3d streaming server
KR100837720B1 (ko) 디지털 멀티미디어 방송에서 비디오 서비스와 동기화된 데이터 서비스를 제공하는 방법 및 그 장치와 데이터 서비스의 실행 방법
US20090040372A1 (en) Digital broadcasting transmitting/receiving apparatus and method
JP7067653B2 (ja) 復号装置
US20230188767A1 (en) Transmission device, transmission method, reception device, and reception method
US9426506B2 (en) Apparatuses for providing and receiving augmented broadcasting service in hybrid broadcasting environment
KR100910996B1 (ko) 디지털 멀티미디어 방송 시스템에서의 3차원 비디오 서비스제공 방법
KR101371064B1 (ko) 방송 신호 전송 방법
CN105812961B (zh) 自适应流媒体处理方法及装置
KR100883366B1 (ko) 디지털멀티미디어 방송에서 통합 데이터서비스를 제공하기 위한 ｄｍｂ 수신 시스템 및 그 방법
KR100825755B1 (ko) Ｍｐｅｇ-4 ｂｉｆｓ 기반의 데이터 서비스와 미들웨어기반의 데이터 서비스 연동을 위한 디지털 멀티미디어 방송송수신 방법 및 그 장치
KR20130056829A (ko) 3dtv 방송을 위한 송수신 장치 및 그 제어 방법
KR20130040156A (ko) 콘텐츠 디스플레이 방법, 콘텐츠 동기화 방법, 방송 콘텐츠 디스플레이 방법 및 디스플레이 장치
KR101941781B1 (ko) Mmt 기반 8k 방송 수신 방법 및 장치
JP5771098B2 (ja) 通信コンテンツ生成装置および通信コンテンツ生成プログラム
KR100755839B1 (ko) 음성 다중을 지원하는 방송 시스템 및 방법
KR100826519B1 (ko) Ｄｍｂ 기반의 3차원 정지영상 서비스를 위한 객체 기술 및다중화 방법과, 그에 따른 복호화 장치 및 그 방법
KR100950771B1 (ko) 방송 신호의 송신 및 수신 방법
KR20170026329A (ko) 시청각 콘텐츠 스트림을 ｍｐｅｇ２ 사설 섹션내에 캡슐화하는 방법, ｍｐｅｇ２ 전송 스트림 내에 멀티플렉스되어질 ｍｐｅｇ２ 사설 섹션내에 시청각 콘텐츠를 캡슐화하는 장치, 디지털 ｔｖ용의 양방향 어플리케이션, 사용자 장치, 시청각 콘텐츠 또는 데이터의 전송을 위한 방법 및 데이터 네트워크를 위한 통신 프로토콜
JP2022090106A (ja) 復号装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
J201 Request for trial against refusal decision
AMND Amendment
B701 Decision to grant
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20111208

Year of fee payment: 20