KR20070053627A - 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한방송웹사이트 서비스를 위한 비주얼 데이터 및 음성데이터의 동기화 장치 및 그 방법 - Google Patents

멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한방송웹사이트 서비스를 위한 비주얼 데이터 및 음성데이터의 동기화 장치 및 그 방법 Download PDF

Info

Publication number
KR20070053627A
KR20070053627A KR1020060114402A KR20060114402A KR20070053627A KR 20070053627 A KR20070053627 A KR 20070053627A KR 1020060114402 A KR1020060114402 A KR 1020060114402A KR 20060114402 A KR20060114402 A KR 20060114402A KR 20070053627 A KR20070053627 A KR 20070053627A
Authority
KR
South Korea
Prior art keywords
document
voice
visual
synchronization
data
Prior art date
Application number
KR1020060114402A
Other languages
English (en)
Other versions
KR100862611B1 (ko
Inventor
이봉호
박소라
김희정
양규태
안충현
이수인
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Publication of KR20070053627A publication Critical patent/KR20070053627A/ko
Application granted granted Critical
Publication of KR100862611B1 publication Critical patent/KR100862611B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242Synchronization processes, e.g. processing of PCR [Program Clock References]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H60/00Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
    • H04H60/76Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet
    • H04H60/81Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself
    • H04H60/82Arrangements characterised by transmission systems other than for broadcast, e.g. the Internet characterised by the transmission system itself the transmission system being the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234318Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into objects, e.g. MPEG-4 objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4782Web browsing, e.g. WebTV
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8106Monomedia components thereof involving special audio data, e.g. different tracks for different languages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8543Content authoring using a description language, e.g. Multimedia and Hypermedia information coding Expert Group [MHEG], eXtensible Markup Language [XML]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/04Synchronising
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04HBROADCAST COMMUNICATION
    • H04H2201/00Aspects of broadcast communication
    • H04H2201/10Aspects of broadcast communication characterised by the type of broadcast system
    • H04H2201/20Aspects of broadcast communication characterised by the type of broadcast system digital audio broadcasting [DAB]

Abstract

본 발명은 디지털 데이터방송서비스에 관한것으로서, 더욱 상세하게는 DMB 시스템 등의 멀티미디어 방송에 제공되는 방송웹사이트(BWS : Broadcasting Web Sites, 이하 BWS라 칭함)를 음성 웹 데이터와 통합하여 비주얼 입출력과 동시에 음성 입출력이 가능한 웹서비스를 제공하기 위한 방법 및 장치에 관한 것이다.
본 발명은 비주얼 문서를 생성하는 단계; 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 생성하는 단계; 및 상기 음성 문서와 상기 비주얼 문서를 서브채널 또는 디렉토리상에서 구분하여 전송하는 단계;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법을 개시한다.
DAB, DMB, BWS, 데이터 방송, 음성가능 방송 웹사이트, VeBWS(Voice enabled Broadcasting Web Sites)

Description

멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송웹사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법{Method and Apparatus for synchronizing visual and voice data in DAB/DMB service system}
도 1은 본 발명에 따른 음성 입출력이 가능한 방송 웹사이트 문서간 동기화를 제공하기 위한 문서 구성예를 보여주는 도면,
도 2는 본 발명에 따른 음성 입출력이 가능한 방송웹사이트 문서 및 데이터의 전송 방법의 실시예를 보여주는 도면,
도 3은 본 발명에 따른 동기화 문서를 별도로 제공하는 음성 입출력이 가능한 방송 웹 사이트 문서 구성예를 보여주는 도면이다.
도 4는 본 발명에 따른 음성 입출력이 동시에 가능한 방송웹사이트 서비스를 제공하기 위한 멀티미디어 시스템, 특히 DMB 시스템의 구성예를 보여주는 도면,
도 5는 도 4의 DMB 통합 웹브라우저의 상세 구성을 보여주는 도면이다.
본 발명은 디지털 데이터방송서비스에 관한것으로서, 더욱 상세하게는 DMB 시스템 등의 멀티미디어 방송에 제공되는 방송웹사이트(BWS : Broadcasting Web Sites, 이하 BWS라 칭함)를 음성 웹 데이터와 통합하여 비주얼 입출력과 동시에 음성 입출력이 가능한 웹서비스를 제공하기 위한 방법 및 장치에 관한 것이다.
종래의 BWS 제공 방법은 화면기반의 웹 서비스를 제공하기 위해 웹 규격인 HTML 컨텐테를 DAB망을 통해 MOT(Multimedia Object Transfer) 전송 방법을 사용하여 데이터화 하여 전송하는 방법을 채택하고 있다. 본 기법은 단순하게 HTML이 규정하고 있는 웹 데이터의 화면 출력 기능만을 사용함으로 인해서 이동환경을 목표로 하는 DAB 및 DMB와 같은 방송 서비스에서는 정보 전달 측면에서 부족한 면이 있다.
또한 멀티모달 웹서비스를 제공하기 위해 현재 표준화 및 개발이 진행중인 X+V 방식은 화면 주도형 방식으로 호스트 언어인 XHTML에 VoiceXML의 음성 인터페이스르 담당하는 폼을 결합하므로써 음성 입출력이 동시에 지원되는 멀티모달 형태의 웹 서비스가 가능하나 이 방식 또한 호스트 언어가 XHTML로 비주얼 인터페이스 중심으로 구동이 되어 이동환경에 적용하기에는 다소 부적합한다.
이러한 단점을 극복하고 사용자에게 이동환경 혹은 고정수신 환경에서도 비주얼 주도형이 아닌 음성 주도형의 웹 서비스를 보고 들을 수 있는 비주얼 및 음성 웹 데이터의 동기화 방법 및 장치를 명시하고자 한다.
본 발명은 상기 서술된 종래의 DAB/DMB BWS 서비스가 제공하는 웹 데이터의 비주얼 입출력만의 한계를 극복하고 사용자에게 음성 입출력이 가능한 BWS 서비스를 제공하기 위해 다음과 같은 기술적 과제를 다루고 있다.
첫째로는 이동환경을 고려한 비주얼 주도형이 아닌 음성 주동형 웹서비스를 제공하기 위한 기술로서 음성 주도형 웹 언어를 정의한다.
둘째로는 종래의 웹 서비스 데이터인 BWS 서비스 틀을 그대로 유지하면서 음성 입출력이 가능한 모듈을 통합하고 서비스를 제공하는 전송 방안을 제안한다.
세째로는 비주얼 웹 규격인 HTML과 음성 웹 서비스가 가능한 VoiceXML의 컨텐츠 즉 비주얼 데이터 및 음성 데이터 동기화하는 기술이 해결이 되어야 한다. 이는 문서간의 동기화된 처리와 문서내의 사용자 입력 수단이 동기화 되어야 하며, 본 발명에서는 이러한 동기화를 위한 방법 및 장치를 제공하는 것을 기술적 과제로한다.
상술한 목적을 달성하기 위한 본 발명은, 비주얼 문서를 생성하는 단계; 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 생성하는 단계; 및 상기 음성 문서와 상기 비주얼 문서를 서브채널 또는 디렉토리상에서 구분하여 전송하는 단계;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법을 개시한다.
또한 본 발명은, 비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 생성하는 컨텐츠 데이터 생성부; 상기 생성된 비주얼 문서 및 음성 문서를 MOT 프로토콜로 변환하는 MOT 서버; 및 MOT 프로토콜로 변환된 상기 비주얼 문서 및 음성 문서를 서브채널 또는 디렉토리상에서 구분하여 전송하는 송신 시스템;을 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치를 개시한다.
또한 본 발명은 서브채널 또는 디렉토리상에서 구분하여 전송된 비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 수신하여 적재하는 단계; 및 동기화 이벤트 발생 시 상기 동기화 요소를 해석하여 해당 동기화 동작을 수행하는 단계;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법을 개시한다.
또한 본 발명은 멀티미디어 방송망을 통해 방송신호를 수신하여 채널 디코딩을 수행하는 베이스벤드 수신부; 채널 디코딩된 패킷을 디코딩하여 비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성문서를 복원하는 MOT 디코더; 및 동기화 이벤트 발생 시 상기 동기화 요소를 해석하여 해당 동기화 동작을 수행하는 통합 웹 브라우저;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치를 개시한다.
먼저, 종래의 기술을 살펴보면, DAB/DMB 등의 멀티미디어 방송 서비스에서 웹 서비스를 제공하기 위해 규정된 BWS는 HTML(Hyper Text Markup Language)을 사용하여 저작된 웹 컨텐츠를 멀티미디어 방송망을 통해 전송하여 사용자에게 웹사이트 서비스를 제공하기 위해 정해진 규격이다. 이 서비스의 기본이 되는 웹 언어로는 상대적으로 저사양 단말을 고려하여 HTML3.2를 웹 규격으로 하는 기본 프로파일과 PC와 같은 고사양 단말을 고려하여 아무런 제약을 두지 않은 비제한 프로파일이 있다. 이들 프로파일들은 웹 표현 언어라고 하는 HTML을 기본으로 하고 있어 실제로 단말에서 BWS 서비스를 제공하기 위해서는 웹 브라우저가 필요하다. 이들 브라우저들은 BWS 브라우저라고도 하며 MOT를 통해서 객체로 전송된 웹 컨텐츠(text/html, jpg 및 png 파일)들을 수신 및 디코딩 하여 웹서비스를 제공한다. 일반적으로 제공되는 출력 형태는 비주얼 형태로서 텍스트나 정지영상들이 화면에 출력되고 하이퍼링크 기능이 제공되어 MOT로 함께 전송된 다른 컨텐츠로 천이하는 형태의 비주얼 기반 로컬 웹 서비스를 제공한다.물론 규격상에 음성 파일이나 기타 멀티미디어 파일들을 재생할 수 있는 기능이 추가될 경우 화면 출력뿐 만 아니라 음성을 포함한 멀티미디어 출력이 가능하다. 하지만, 현재 규격(기본 프로파일)으로는 GUI(Graphical User Interface)기반의 비주얼 입출력이 가능한 로컬 웹 서비스만이 가능하다.
특히 DAB나 DMB와 같은 이동 수신을 목적으로 하는 멀티미디어 방송 서비스에서 이동성을 보장하면서 부가 데이터 서비스를 제공받을 수 있는 한편 단일 모달 형태의 정보 접근 방식이 아닌 멀티 모달 형태의 정보 접근이 가능한 서비스에 대 한 요구가 증대되고 있다. W3C에서는 이미 음성기반의 웹 서비스가 가능한 VoiceXML 및 SALT 규격을 완료한 상태이며 추가로 멀티모달 웹 규격등이 표준화 될 것으로 전망된다.
VoiceXML은 IVR(Interactive Voice Response) 형태의 대화형 음성 응답 서비스를 위해 고안된 웹 언어로서 실제로 단말에 탑재될 경우 음성 웹 서비스가 가능하다. 이 기술은 기본적으로 사람과 기계와의 대화를 모델링한 다이얼로그를 기반으로 다른 어플리케이션이나 문서 또는 다른 대화로 천이할 수 있는 마크업 언어를 정의하고 있어서 기존 비주얼 기반의 웹 서비스와 달리 음성으로 입력하고 출력하는 형태의 웹 서비스를 제공할 수 있다. 또한 문자를 음성으로 변화하는 TTS (Text To Speech) 기술 및 음성 인식을 수행하는 ASR (Automatic Speech Recognition)을 입출력 모듈로 사용하여 음성으로 웹 정보를 전달하고 사용자 입력을 음성으로 받아 해당 명령을 처리하거나 어플리케이션을 구동한다.
이러한 VoiceXML은 특히 이동환경에서 효과가 큰 서비스로 사용자는 화면 출력없이도 제공되는 웹 서비스를 음성으로 청취하고 원하는 정보에 음성 입력으로 네비게이션 할 수 있는 장점이 있다.
하지만, 음성 만으로는 웹 정보를 전달하는데 있어서는 한계가 있으며 화면과 동시에 출력이 되고 입력 및 제어가 될 경우에 매우 편리하고 다양한 부가 데이터 서비스를 제공할 수 있는 장점이 발생한다.
이를 위해서 본 발명에서는 기존 BWS의 웹 규격인 HTML과 음성 웹 언어에 해 당하는 VoiceXML을 통합하여 멀티모달 형태의 웹 서비스를 제공할 수 있는 전송 및 동기화 방식을 다음과 같이 개시한다.
본 발명의 기본적인 원리는, 비주얼 웹 문서와 관련된 동기화 정보가 포함된 음성 웹 문서를 생성한후, 상기 비주얼 문서와 상기 음성 웹 문서를 다른 서브 채널 또는 동일 서브 채널 내의 다른 디렉토리를 통해서 전송하는 것이다.
도 1은 본 발명에 따른 음성 입출력이 가능한 방송 웹사이트 문서간 동기화를 제공하기 위한 문서 구성예를 보여주는 도면이다.
본 발명에서는 도 1에 도시된 바와 같이 비주얼 웹 문서와 음성 웹 문서를 분리하여 생성하게 된다. 상기 비주얼 문서는 BWS가 규정하고 하고 있는 HTML 컨텐츠(또는 xHTML)에 해당되고 상기 음성 문서는 VoiceXML과 비주얼 문서와의 동기화를 담당하는 요소(elements 또는 tage) 및 음성 인식, 음성 합성기 및 수신기와 같은 콤포넌트관련 모듈이 통합된 문서에 해당 된다.
도 2는 본 발명에 따른 음성 입출력이 가능한 방송웹사이트 문서 및 데이터의 전송 방법의 실시예를 보여주는 도면이다.
도 2를 참조하면, 비주얼 문서 및 음성 문서는 각기 다른 서브 채널로 전송 및 시그널링이 되거나 동일 서브 채널로 전송이 될 경우에도 다른 디렉토리를 통해서 전송 됨을 특징으로 한다. 이는 기존 BWS 서비스 수신이 가능한 단말이 존재할 경우 이 단말이 BWS에 음성 기능이 추가되더라도 기존 서비스 수신을 보장하도록 하기 위한 것으로서 음성 BWS를 위한 시그널링은 별도로 음성 문서, 즉 음성 모듈에서 처리한다.
비주얼 문서 및 음성문서의 동기화는 동기화 요소(Tags)들, <esync>, <icync> 및 <fsync>등을 사용하여 처리함을 특징으로 하며, 상기 동기화 요소들은 반드시 음성 문서내에 기술됨을 특징으로 한다. 또한 상기 동기화 요소들은 다음과 같은 이름공간(namespace)으로 식별된다.
Figure 112006084688789-PAT00001
또한, BWS 문서를 구성하는 HTML 은 다음과 같은 이름 공간을 사용한다.
Figure 112006084688789-PAT00002
그리고, 음성 문서를 구성하는 VoiceXML 은 다음과 같은 이름공간을 갖는다.
Figure 112006084688789-PAT00003
하나의 예로써, 비주얼 문서 및 음성 문서를 포함하는 전체 이름 공간은 다음과 같이 명명 될 수 있다.
Figure 112006084688789-PAT00004
그러므로 본 발명에 있어서 두 문서간(비주얼 문서와 음성 문서간) 동기화를 처리하기 위한 상기 동기화 요소들은 어플리케이션, 문서 및 문서내의 폼간 동기화를 위해 기술 되어야 하는데, 상기 목적을 위해 <esync>, <isync> 및 <fsync> 요소를 사용한다. 상기 <esync> 및 <isync>는 어플리케이션 및 문서간 동기화를 담당함을 특징으로 하며 <fsync>는 폼(forms)간 동기화를 담당함을 특징으로 한다. 여기서, 상기 어플리케이션 및 문서간 동기화는 어플리케이션이 시작될때 초기에 동시에 로딩되어 해석되고 렌더링되어야 하는 동기화를 의미하며 폼간 동기화는 사용자 입력 발생시 상대방 폼으로 동시에 입력 반영됨을 의미한다.
상기 <esync>는 어플리케이션 및 문서간 동기화 처리시 동기 관련 정보 즉 <esync> 및 관련 속성들이 음성 문서내에 존재 하지 않고 별도의 외부 문서(예로, 확장자가 .sync)로 존재할때 어플리케이션간 또는 문서간 동기화 정보를 기술하기 위해서 사용되는 요소이다. 상기 <esync>는 하기 표 1 같은 속성을 통해 동기화 기능을 지원함을 특징으로 한다.
Figure 112006084688789-PAT00005
상기 <esync>를 사용한 외부 문서 동기화 방식의 경우 음성 문서내에 상기 외부 동기화 문서에 대한 정보를 제공해 주기 위한 메타 정보가 필요한데 이를 위해 하기 표 2로 정의되는 속성을 갖는 <metasync>란 요소를 사용한다.
Figure 112006084688789-PAT00006
상기 <metasync> 요소는 음성 문서에 위치해야 하며 동기화 관련 <esync> 요소들을 저장하고 있는 외부 문서와 관련 <esync>들에 메타 정보를 제공한다. 전체 동작 메카니즘음 도 3과 같다. 즉 음성 문서에 기술된 <metasync>를 통해 동기화 문서 및 관련 <esync>를 해석한 후 연관된 BWS 문서를 동시에 로딩하고 렌더링 한다.
상기 <isync>는 문서내 동기화 방식으로 <esync> 요소와 달리 별도의 문서로 구성되지 아니하고 특정 폼내에(여기서, 폼은 음성 문서내, 즉 VoiceXML의 <form>과 <menu> 요소를 의미한다) 관련 동기화 요소가 직접 기술되어 처리됨을 특징으로 한다. 이는 음성 문서내의 특정 폼과 BWS 문서가 동기화 되어야 할 경우와 임의 문서 천이가 필요할 경우 발생되는 동기화를 지원하기 위함이다.
일 실시예로, 하나의 음성 문서내에 여러개의 폼 들이 존재하고 각 폼들이 여러 페이지의 BWS 문서들과 동기화된 구동이 필요로 할 경우 관련 isync 요소를 각 폼내에 기술함으로써 이를 해결할 수 있으며, 실제로 <isync>가 VoiceXML의 <link>나 <goto>내에 기술되어 동기화된 천이를 보장할 수 있다.
그러므로, 특정 음성 문서가 적재될때(특정 폼이 지칭되지 않은 경우)는 맨 처음 <esync>를 제공하는 동기화 문서를 참조하여 동기화를 처리하고 특정 문서 실행 중 특정 폼내에 관련 isync 요소가 지정될 경우 해당 isync 요소가 우선권을 갖게 되며 BWS 문서와 동기화 된다.
이를 위해 아래 표와 같이 별도의 <isync> 요소를 사용한다. 만약, <link>나 <goto> 요소 내에 <isync>가 정의되어 있을 경우에는 정의된 <isync> 내용에 따라 BWS 문서 천이가 이루어져야 한다. 폼 구동시 연계된 동기화가 필요할 경우 반드시 하나의 <isync>만이 존재하여야 한다. 하지만 폼안에 천이를 명시하는 동기화의 경우에는 여러개의 천이 요소들이 올 수 있다. 즉, <goto>나 <link>와 같이 기술될 때는 여러 <isync> 태그가 허용이 된다. 이때에는 반드시 <goto>나 <link> 요소 내에 기술되어야 하며 동기화 정보는 현 폼에 영향을 미치지 않고 천이시에만 의미를 갖는다. 이를 위해 "type" 속성을 지원한다.
상기 <isync>를 통한 동기화를 구현하기 위한 <isync> 요소의 속성들은 하기 표 3과 같다.
Figure 112006084688789-PAT00007
상기 <esync> 및 <isync>사용하여 작성된 어플리케이션 문서의 동기화를 보여주는 일 실시예는 다음과 같다.
Figure 112006084688789-PAT00008
Figure 112006084688789-PAT00009
상기 일 실시예에서 상기문서가 실행이되면 "service_main_intro" 다이얼로그가 음성으로 출렴됨과 동시에 <metasync>에 의해 문서 전체에 영향을 미치는 해당 html 페이지(예로, 서비스 전체 메인 화면)가 동기화되어 화면으로 렌더링된다. 이때 bargine이 허락되지 않았으므로, 사용자 입력을 처리되지 않고 화면 또한 다음 다이얼로그가 실행될 때까지 지속된다. "hotnews_intro" 다이얼로그가 실행이 되면 바로 아래에 기술되어 있는 "hotnews_intro_syne" <isync>에 의해 자동적으로 "hotnews_intro.html"해당하는 BWS문서가 동기화 되어 로딩되고 렌더링된다.
상기 <fsync> 요소는 상기 음성 및 BWS 문서간의 폼간 동기화를 위한 요소로서 사용자 입력을 처리하기 위한 기능을 담당한다. 이는 문서 동기화와 유사한 개념으로 음성 문서의 음성 인식을 통해 사용자 입력이 처리 되었을때 BWS의 <input> 요소에 전달되어 반영됨을 의미하고 역으로 BWS상에서 사용자 입력이 이루어질 경우 이 내용이 음성 문서의 <field> 요소에 반영 됨을 의미한다. 이를 위해서는 두 모듈간에 입력 기능이 제공되어야 하며 또한 동기화 메카니즘이 병행 된다.
상기 <fsync> 요소는 실행가능 컨텐츠(executable contetns)의 일종으로 VoiceXML <form>내에 위치하거나 홀로 존재 할수 있다. 다만, <fsync>의 범위(scope)는 문서로 국한이 된다. 만약 모든 문서에 공통적인 전역으로 지정이 될 경우 root 문서 내에 명시되어야 하며 이때는 모든 어느 문서에서도 활성화(activate) 될 수 있다.
"field" 속성이 명시되지 않을 경우에는 해당 폼내의 <field>가 동기화 되어야할 대상에 해당한다. 이 경우 해당 폼은 반드시 하나의 <field>만을 가져야 하며, 만약 하나의 폼내에 여러개의 <field>들이 존재할 경우에는 반드시 속성이 명시되어야 하며 또한 각 필드는 고유한 이름을 가져야 한다.
상기 <fsync> 요소는 하기 표 4와 같은 속성을 가지고 폼간 동기화를 담당한다.
Figure 112006084688789-PAT00010
또한 상기 폼 동기화를 달성하기 위해서는 다음과 같은 조건들이 만족되어야 한다.
사용자로부터의 음성 입력은 VoiceXML <field>와 BWS의 HTML <input> 요소에 갱신(update) 되어야 한다.
사용자로부터의 비주얼 입력(예로, 키보드 및 펜 입력)은 HTML의 <input> 요소에 반영됨과 동시에 VoiceXML의 <filed>에 갱신이 되어야 한다.
사용자로부터의 비주얼 입력은 VoiceXML <field>의 가드 조건(guard condition)을 만족하여야 한다.
VoiceXML의 <field>와 HTML의 <input>은 입력이 반영될 순간에 일대일로 매칭이 되어야 한다.
폼 동기화는 문서 동기화와 병행이 되어야 한다. 즉, 동기화 되어야 할 <field>나 <input>은 이미 동기화된 문서 상에서만 상호 갱신이 유효하다. 즉, 입력 되어야 할 두 모듈의 요소들은 동기화된 문서상에 상호 존재 하여야 하며 external 문서 상에 기술될 경우에는 전역 동기화를 위해 "root" 문서만 허용이 된다.
상호 입력은 반드시 활성화된 음성 문서의 폼내에서만 보장이 되어야 한다. 즉, 하나의 BWS 문서상에 여러개의 <input>들이 존재하고 그중 음성 문서 상에 활성화된 <form>과 연계되지 않은 <input>에서 입력이 발생되었을 경우 VM상의 현재 활성화 되어 있는 <form>에서의 갱신은 금지된다. 일 예로, 카드 번호를 입력하라는 음성 출력에 해당하는 폼이 실행되고 있을때 BWS 문서의 <input>으로 유효기간 항목에 입력이 발생 할 경우 이러한 Mixed Initiative 갱신은 금지된다.
상기 폼 동기화에 대한 일 시실시예는 다음과 같다.
Figure 112006084688789-PAT00011
상기 실시 예와 같이 <fsync>가 명시될 경우 BWS의 <input> 요소에 음성 모듈로 부터 입력 값이 동시에 입력처리된다.
도 4는 본 발명에 따른 음성 입출력이 동시에 가능한 방송웹사이트 서비스를 제공하기 위한 멀티미디어 시스템, 특히 DMB 시스템의 구성예를 보여주는 도면이다.
도 4를 참조하면, 음성 입출력이 동시에 가능한 DMB 시스템은, DMB 방송 송신단과 수신단으로 구분할 수 있으며, DMB 방송 송신단은 음성 컨텐츠(음성 웹 문서) 및 BWS 컨텐츠(비주얼 웹 문서)를 생성하는 컨텐츠 데이터 생성부 110, 상기 음성 컨텐츠 및 BWS 컨텐츠의 디렉토리 및 파일 객체들을 전송하기 위해 MOT 프로토콜로 변환하는 멀티미디어 객체 전송 서버 120, 상기 MOT 프로토콜로 변환된 각 MOT 데이터(음성 문서 및 비주얼 문서)를 동일한 서브 채널내의 다른 디렉토리 또는 각기 다른 서브 채널에 다중화 하여 DMB 방송망을 통해 방송하기 위한 DMB 송신 시스템 130을 포함하여 구성된다. 본 발명이 이에 제한되지는 않으며, 비주얼 문서 및 음성 문서의 생성은 외부의 장치로부터 수신될 수 있음은 물론이다.
상기 DMB 방송 수신단, 즉 DMB 수신기 100은 상기 DMB 방송망으로부터 DMB 방송 신호를 수신하여 해당 서브 채널을 디코딩하여 각 서브 채널의 데이터를 출력하는 DMB 베이스 벤드 수신부 210, 상기 DMB 베이스 벤드 수신부 210으로부터 전달받은 패킷을 디코딩하여 MOT 객체를 복원하는 MOT 디코더 220, 상기 복원된 객체들(디렉토리 및 파일)을 단독 또는 해당 동기화 방법에 따라 실행하는 DMB 통합 웹 브라우저 230을 포함하여 구성된다. 본 발명에 있어서, 상기 복원된 객체들은 비주얼 문서와 상기 비주얼 문서와 관려된 동기화 정보를 갖는 음성 문서를 포함하며, 상기 DMB 통합 웹 브라우저 230은 동기화 이벤트 발생 시 상술한 동기화 요소를 해석하여 해당 동기화 요소에 따라 전술한 동기화 기능을 수행하게 된다.
도 5는 도 4의 DMB 통합 웹브라우저의 상세 구성을 보여주는 도면이다.
도 5를 참조하면, DMB 통합 웹 브라우저는 VoiceXML 기반의 확장된 음성 마크업 생성 언어를 구동하기 위한 음성 웹 브라우저 233, HTML 기반의 웹 페이지를 구동하기 위한 BWS 브라우저 235, 및 상술한 방법에 따라 상기 음성 웹 브라우저 233과 상기 BWS 브라우저 235 간의 동기화를 관리하는 동기화 관리 모듈 231을 포함하여 구성된다. 상기 음성 웹 브라우저 233은 VoiceXML 기반의 음성 마크업 언어로 작성된 웹 페이지를 순차적으로 구동하여 사용자에게 음성으로 출력하고 음성 수단을 통해 사용자 입력을 처리함을 특징으로 한다. 상기 BWS 브라우저 235는 DAB/DMB 규격에서 규정한 HTML 언어를 사용하여 작성된 웹 페이지를 구동하며 입출력은 상용 브라우저와 같이 화면 도시를 특징으로 한다. 상기 동기화 관리 모듈 231은 상기 음성 및 BWS 브라우저에서 발생되는 동기화 이벤트를 받아 이미 정의된 동기화 프로토콜(동기화 요소등)에 따라 해당 페이지 및 각 페이지의 내부 폼(form)등을 동기화 하는 기능을 수행한다.
상기 DMB 수신기 100은 DAB 및 DMB 방송 서비스를 수신하여 재생할 수 있는 개인휴대단말기, 이동통신 단말, 차량형 셋톱박스등을 나타낸다.
상술한 바와 같은 본 발명의 방법은 프로그램으로 구현되어 컴퓨터로 읽을 수 있는 형태로 기록매체(씨디롬, 램, 롬, 플로피 디스크, 하드 디스크, 광자기 디스크 등)에 저장될 수 있다. 이러한 과정은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있으므로 더 이상 상세히 설명하지 않기로 한다.
이상에서 설명한 본 발명은, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 있어 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경이 가능하므로 전술한 실시예 및 첨부된 도면에 의해 한정되는 것이 아니다.
상기 동기화 요소들을 사용하여 비주얼 웹에 해당하는 HTML 문서와 음성 웹에 해당하는VoiceXML 컨텐츠들의 동기화된 입출력이 보장될 경우 멀티미디어 방송 서비스 사용자는 이동환경에서도 웹 데이터 서비스를 화면 출력과 동시에 음성으로 듣고 필요시 음성으로 명령함으로써 편리하게 해당 정보에 접근할 수 있는 장점 및 효과를 가진다.
즉 본 발명은 통합된 동기화 서비스를 보이기 위해서 일반적으로 사용되는 마크업 언어를 통합하여 하나의 데이터로 전송하는 방식이 아닌 개별적으로 저작되고 전송되는 방식을 사용하여 각 서비스의 하위 호환성을 제공하는 장점을 제공한다. 두 웹 문서간의 동기화를 위해서 별도의 동기화 관련 엘리먼트들을 호스트 언어(host markup language)에 통합하여 기존 서비스 프레임웍을 그대로 유지하는 장점을 제공하며 이로인해 사용자는 기존의 방송 웹사이트를 수신하며 동시에 음성으 로 동시에 웹에 접근하여 정보를 듣고, 음성으로 제어할 수 있는 장점을 갖는다.

Claims (22)

  1. 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법으로서,
    비주얼 문서를 생성하는 단계;
    상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 생성하는 단계; 및
    상기 음성 문서와 상기 비주얼 문서를 서브채널 또는 디렉토리상에서 구분하여 전송하는 단계;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  2. 제 1항에 있어서, 상기 동기화 요소는,
    어플리케이션 저작 및 구동 시 음성문서와 동시에 적재되고 렌더링되어야 하는 비주얼 문서와의 동기화 정보를 제공하는 외부문서 동기화 요소 <esync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  3. 제 2항에 있어서, 상기 동기화 요소는,
    상기 외부문서 동기화 요소 <esync>들에 대한 메타정보를 제공하는 메타정보 요소 <metasync>를 더 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  4. 제 3항에 있어서, 상기 외부문서 동기화 요소 <esync>는, 하기 표
    Figure 112006084688789-PAT00012
    로 정의되는 속성정보를 갖는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  5. 제 3항에 있어서, 상기 메타정보 요소 <metasync>는, 하기 표
    Figure 112006084688789-PAT00013
    로 정의되는 속성정보를 갖는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  6. 제 1항에 있어서, 상기 동기화 요소는,
    음성문서 폼내에 해당 폼과 연관된 비주얼 문서와의 동기화 정보를 제공하는 문서내 동기화 요소 <isync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  7. 제 6항에 있어서, 상기 문서내 동기화 요소 <isync>는, 하기 표
    Figure 112006084688789-PAT00014
    로 정의되는 속성정보를 갖는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  8. 제 1항에 있어서, 상기 동기화 요소는,
    음성 문서 폼과 비주얼 문서 폼간의 동기화된 상호 입력을 보장하기 위한 음성 문서 폼과 비주얼 문서 폼간의 동기화 정보를 제공하는 폼간 동기화 요소 <fsync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이 트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  9. 제 8항에 있어서, 상기 폼간 동기화 요소 <fsync>는 하기 표
    Figure 112006084688789-PAT00015
    로 정의되는 속성정보를 갖는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  10. 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치로서,
    비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 생성하는 컨텐츠 데이터 생성부;
    상기 생성된 비주얼 문서 및 음성 문서를 MOT 프로토콜로 변환하는 MOT 서버; 및
    MOT 프로토콜로 변환된 상기 비주얼 문서 및 음성 문서를 서브채널 또는 디렉토리상에서 구분하여 전송하는 송신 시스템;을 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  11. 제 10항에 있어서, 상기 동기화 요소는,
    어플리케이션 저작 및 구동 시 음성문서와 동시에 적재되고 렌더링되어야 하는 비주얼 문서와의 동기화 정보를 제공하는 외부문서 동기화 요소 <esync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  12. 제 10항에 있어서, 상기 동기화 요소는,
    상기 외부문서 동기화 요소 <esync>들에 대한 메타정보를 제공하는 메타정보 요소 <metasync>를 더 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  13. 제 10항에 있어서, 상기 동기화 요소는,
    음성문서 폼내에 해당 폼과 연관된 비주얼 문서와의 동기화 정보를 제공하는 문서내 동기화 요소 <isync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  14. 제 10항에 있어서, 상기 동기화 요소는,
    음성 문서 폼과 비주얼 문서 폼간의 동기화된 상호 입력을 보장하기 위한 음성 문서 폼과 비주얼 문서 폼간의 동기화 정보를 제공하는 폼간 동기화 요소 <fsync>를 포함하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  15. 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법으로서,
    서브채널 또는 디렉토리상에서 구분하여 전송된 비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성 문서를 수신하여 적재하는 단계; 및
    동기화 이벤트 발생 시 상기 동기화 요소를 해석하여 해당 동기화 동작을 수행하는 단계;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  16. 제 15항에 있어서, 상기 동기화 요소를 해석하여 해당 동기화 동작을 수행하는 단계는,
    비주얼 문서와의 동기화 정보를 제공하는 외부문서 동기화 요소 <esync>들에 대한 메타정보를 제공하는 메타정보 요소 <metasync>를 해석한 후 관련된 비주얼 문서를 로딩하고 랜더링하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  17. 제 16항에 있어서,
    상기 음성 문서 실행 중 음성문서 폼내에 해당 폼과 연관된 비주얼 문서와의 동기화 정보를 제공하는 문서내 동기화 요소 <isync>가 지정된 경우, 상기 문서내 동기화 요소 <isync>를 해석하여 관련 비주얼 문서를 로딩하고 렌더링하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  18. 제 15항에 있어서,
    상기 음성 입출력에 관한 어플리케이션 구동 중 사용자의 입력이 발생하면, 음성 문서 폼과 비주얼 문서 폼간의 동기화 정보를 제공하는 폼간 동기화 요소 <fsync>를 사용하여 동기화를 수행하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 방법.
  19. 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치로서,
    멀티미디어 방송망을 통해 방송신호를 수신하여 채널 디코딩을 수행하는 베이스벤드 수신부;
    채널 디코딩된 패킷을 디코딩하여 비주얼 문서 및 상기 비주얼 문서와 관련된 동기화 요소가 포함된 음성문서를 복원하는 MOT 디코더; 및
    동기화 이벤트 발생 시 상기 동기화 요소를 해석하여 해당 동기화 동작을 수행하는 통합 웹 브라우저;를 포함하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  20. 제 19항에 있어서, 상기 통합 웹 브라우저는,
    비주얼 문서와의 동기화 정보를 제공하는 외부문서 동기화 요소 <esync>들에 대한 메타정보를 제공하는 메타정보 요소 <metasync>를 해석한 후 관련된 비주얼 문서를 로딩하고 랜더링하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  21. 제 20항에 있어서, 상기 통합 웹 브라우저는,
    상기 음성 문서 실행 중 음성문서 폼내에 해당 폼과 연관된 비주얼 문서와의 동기화 정보를 제공하는 문서내 동기화 요소 <isync>가 지정된 경우, 상기 문서내 동기화 요소 <isync>를 해석하여 관련 비주얼 문서를 로딩하고 렌더링하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
  22. 제 19항에 있어서, 상기 통합 웹 브라우저는,
    상기 음성 입출력에 관한 어플리케이션 구동 중 사용자의 입력이 발생하면, 음성 문서 폼과 비주얼 문서 폼간의 동기화 정보를 제공하는 폼간 동기화 요소 <fsync>를 사용하여 동기화를 수행하는 것을 특징으로 하는 음성 입출력이 동시에 가능한 방송 웹사이트 서비스 제공을 위한 비주얼 데이터 및 음성 데이터의 동기화 장치.
KR1020060114402A 2005-11-21 2006-11-20 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법 KR100862611B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020050111238 2005-11-21
KR20050111238 2005-11-21

Publications (2)

Publication Number Publication Date
KR20070053627A true KR20070053627A (ko) 2007-05-25
KR100862611B1 KR100862611B1 (ko) 2008-10-09

Family

ID=38048864

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020060114402A KR100862611B1 (ko) 2005-11-21 2006-11-20 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법

Country Status (3)

Country Link
EP (1) EP1952629A4 (ko)
KR (1) KR100862611B1 (ko)
WO (1) WO2007058517A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100902732B1 (ko) * 2007-11-30 2009-06-15 주식회사 케이티 모달리티에 관한 dom 이벤트 처리를 위한 프록시,멀티모달 단말기, dom 이벤트 처리 방법, 모달리티동기화 방법

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100862611B1 (ko) * 2005-11-21 2008-10-09 한국전자통신연구원 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법
CN111125065B (zh) * 2019-12-24 2023-09-12 阳光人寿保险股份有限公司 可视化数据同步方法、系统、终端和计算机可读存储介质

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11215490A (ja) * 1998-01-27 1999-08-06 Sony Corp 衛星放送受信装置及び方法
US6357042B2 (en) * 1998-09-16 2002-03-12 Anand Srinivasan Method and apparatus for multiplexing separately-authored metadata for insertion into a video data stream
JP2001008173A (ja) * 1999-06-21 2001-01-12 Mitsubishi Electric Corp データ伝送装置
JP2001267945A (ja) * 2000-03-21 2001-09-28 Clarion Co Ltd 多重放送受信装置
US7028306B2 (en) * 2000-12-04 2006-04-11 International Business Machines Corporation Systems and methods for implementing modular DOM (Document Object Model)-based multi-modal browsers
AU2003216206A1 (en) * 2002-02-07 2003-09-02 Sap Aktiengesellschaft Multi-modal synchronization
WO2003071422A1 (en) * 2002-02-18 2003-08-28 Kirusa, Inc. A technique for synchronizing visual and voice browsers to enable multi-modal browsing
US20030187944A1 (en) * 2002-02-27 2003-10-02 Greg Johnson System and method for concurrent multimodal communication using concurrent multimodal tags
US20040128342A1 (en) * 2002-12-31 2004-07-01 International Business Machines Corporation System and method for providing multi-modal interactive streaming media applications
KR20040063373A (ko) * 2003-01-07 2004-07-14 예상후 VoiceXML을 이용한 웹페이지 제작방법과 음성웹브라우저
KR100561228B1 (ko) * 2003-12-23 2006-03-15 한국전자통신연구원 보이스엑스엠엘 문서를 엑스에이치티엠엘플러스보이스문서로 변환하기 위한 방법 및 이를 이용한 멀티모달서비스 시스템
KR100629434B1 (ko) * 2004-04-24 2006-09-27 한국전자통신연구원 음성/그래픽 입출력이 가능한 멀티모달 웹기반 데이터방송처리 장치 및 그 방법과 그를 이용한 멀티모달 웹기반데이터방송 수신 시스템 및 그 방법
KR100862611B1 (ko) * 2005-11-21 2008-10-09 한국전자통신연구원 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100902732B1 (ko) * 2007-11-30 2009-06-15 주식회사 케이티 모달리티에 관한 dom 이벤트 처리를 위한 프록시,멀티모달 단말기, dom 이벤트 처리 방법, 모달리티동기화 방법

Also Published As

Publication number Publication date
EP1952629A4 (en) 2011-11-30
WO2007058517A1 (en) 2007-05-24
EP1952629A1 (en) 2008-08-06
KR100862611B1 (ko) 2008-10-09

Similar Documents

Publication Publication Date Title
TWI249729B (en) Voice browser dialog enabler for a communication system
US10152964B2 (en) Audio output of a document from mobile device
US7415537B1 (en) Conversational portal for providing conversational browsing and multimedia broadcast on demand
KR101702659B1 (ko) 동영상 콘텐츠와 전자책 콘텐츠의 동기화 장치와 방법 및 시스템
US20060218480A1 (en) Data output method and system
KR20140099606A (ko) 서비스 페이지 공유 방법과 시스템 및 이를 지원하는 단말기
EP2779661A1 (en) Distribution control system, distribution system, distribution control method, and computer-readable storage medium
EP2790383A2 (en) Distribution control system, distribution system, distribution control method, and computer-readable storage medium
EP2974327A1 (en) Distribution control system and distribution system
EP1686464A2 (en) Separating content data, style sheets data and soft keys data in XML user interfaces for mobile stations
KR20120107273A (ko) 통합 멀티미디어 컨텐츠를 제공하는 검색 시스템 및 검색 방법
US11197048B2 (en) Transmission device, transmission method, reception device, and reception method
KR20060120384A (ko) 양방향 서비스를 위한 dmb/이동통신망 연동 플랫폼과,그를 이용한 dmb/이동통신망 통합 수신 단말 및 그 방법
KR100862611B1 (ko) 멀티미디어 방송 서비스에서 음성 입출력이 동시에 가능한 방송 웹 사이트 서비스를 위한 비주얼 데이터 및 음성 데이터의 동기화 장치 및 그 방법
CN101513070A (zh) 用于显示轻便应用场景表现内容的方法和设备
KR20220156786A (ko) 사용자의 발화를 기반으로 컨텐츠를 제공하는 장치 및 시스템
JP2001312443A (ja) 情報配信方法および情報配信システム
KR101604131B1 (ko) 대기모드에서의 어플리케이션 구동 방법 및 시스템
JP2006171498A (ja) 音声合成システム、音声合成方法および音声合成サーバ
Lee et al. Mobile multimedia broadcasting applications: Speech enabled data services
JP2003271376A (ja) 情報提供システム
Walton L1 literacy affects L2 pronunciation intake and text vocalization
KR20160050723A (ko) 문장 및 명령어의 출력 방법 및 그 장치
JP2002182684A (ja) 音声認識用データ配信システム、方法および音声認識用データ配信サーバ

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120928

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20130923

Year of fee payment: 6

LAPS Lapse due to unpaid annual fee