KR102126224B1 - Multi-audio broadcasting service system and method therefor - Google Patents

Multi-audio broadcasting service system and method therefor Download PDF

Info

Publication number
KR102126224B1
KR102126224B1 KR1020140081375A KR20140081375A KR102126224B1 KR 102126224 B1 KR102126224 B1 KR 102126224B1 KR 1020140081375 A KR1020140081375 A KR 1020140081375A KR 20140081375 A KR20140081375 A KR 20140081375A KR 102126224 B1 KR102126224 B1 KR 102126224B1
Authority
KR
South Korea
Prior art keywords
content
multilingual
data
user
audio
Prior art date
Application number
KR1020140081375A
Other languages
Korean (ko)
Other versions
KR20150039077A (en
Inventor
김창기
김재호
김태정
전주일
유정주
홍진우
Original Assignee
한국전자통신연구원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국전자통신연구원 filed Critical 한국전자통신연구원
Priority to US14/502,290 priority Critical patent/US20150095941A1/en
Publication of KR20150039077A publication Critical patent/KR20150039077A/en
Application granted granted Critical
Publication of KR102126224B1 publication Critical patent/KR102126224B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • H04N21/4856End-user interface for client configuration for language selection, e.g. for the menu or subtitles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302Content synchronisation processes, e.g. decoder synchronisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/475End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4758End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for providing answers, e.g. voting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845Structuring of content, e.g. decomposing content into time segments
    • H04N21/8456Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명은 멀티플랫폼 기반에서의 다양한 나라의 언어를 사용하는 시청자들이 TV를 시청하는 것이 가능하기 위한 다국어 음성 지원 시스템 및 그 방법에 관한 것으로, 콘텐츠 데이터 제공장치, 다국어 음성 데이터 제공장치, 콘텐츠 영상 출력장치, 다국어 음성 출력장치를 포함할 수 있으며, 이를 통해 콘텐츠 영상 출력장치 주변의 다국어 음성 출력장치를 통해 메인 콘텐츠의 영상과 시간적 동기가 맞는 다양한 언어의 음성을 제공함으로써 새로운 방송 연계형 다국어 음성 서비스를 제공하는데 그 목적이 있다.The present invention relates to a multilingual audio support system and a method for enabling viewers using a language of various countries on a multiplatform platform to watch TV, a content data providing apparatus, a multilingual audio data providing apparatus, and a content image output It may include a device and a multilingual audio output device, thereby providing a new broadcast-linked multilingual audio service by providing audio in various languages that are synchronized with the time of the main content through the multilingual audio output device around the content video output device. The purpose is to provide.

Description

다국어 음성 서비스 제공 시스템 및 그 방법{Multi-audio broadcasting service system and method therefor}Multi-audio broadcasting service system and method therefor

본 발명은 멀티플랫폼을 사용하는 콘텐츠 제공 디바이스를 통해 다양한 나라의 언어를 사용하는 시청자들이 TV를 시청하는 것이 가능하기 위한 멀티오디오 방송 서비스 제공 방법 및 시스템에 관한 것이다.The present invention relates to a method and system for providing a multi-audio broadcasting service for enabling viewers using languages of various countries to watch TV through a content providing device using a multi-platform.

스마트 TV, IPTV의 등장으로 방송과 인터넷의 융합을 통해서 방송 콘텐츠를 시청하면서 인터넷 망을 이용하여 부가 콘텐츠 및 양방향 콘텐츠를 제공하는 하이브리드 방송 서비스가 제공되고 있다.With the advent of smart TVs and IPTVs, a hybrid broadcast service has been provided that provides additional content and interactive content using the Internet network while watching broadcast content through the fusion of broadcasting and the Internet.

한편 홈 네트워크를 중심으로 사용자의 콘텐츠 및 서비스를 하나 이상의 사용자의 멀티스크린을 통해 제공하는 것을 의미하는 멀티스크린 서비스가 발달 함과 동시에 기존의 하나의 TV 화면 내에서의 방송과 인터넷의 융합인 하이브리드 방송도 멀티스크린 서비스와 융합하여 멀티플랫폼 기반 멀티스크린 방송 서비스가 차세대 하이브리드 방송(HBBTV2.0, OHTV2.0)등을 통해 표준화 되면서 시범 서비스 되고 있다. Meanwhile, a multi-screen service, which means providing user's contents and services through a multi-screen of one or more users, has been developed around the home network, and at the same time, hybrid broadcasting, which is a fusion of broadcasting and the Internet within one existing TV screen. In addition, multi-platform-based multi-screen broadcasting services have been standardized through next-generation hybrid broadcasting (HBBTV2.0, OHTV2.0) by fusion with multi-screen services.

본 발명에서는 하나의 영상 출력장치에서 한가지의 음성의 제공만이 가능하던 것을 영상 출력장치 주변의 음성 출력장치를 통해 메인 콘텐츠의 영상과 시간적 동기가 맞는 다양한 언어의 음성을 제공함으로써 새로운 방송 연계형 멀티 오디오 서비스를 제공함에 있다.In the present invention, it is possible to provide only one voice in one video output device, and a new broadcast-linked multi-channel is provided by providing audio in various languages in time synchronization with the main content video through the audio output device around the video output device. In providing audio services.

본 발명의 실시 예에 따르면 콘텐츠 영상 출력장치는 콘텐츠 메타 데이터와 콘텐츠 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터 및 상기 콘텐츠 시간정보, 콘텐츠 메타 데이터를 추출하고, 상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 서비스를 확정하는 콘텐츠 데이터 추출부, 상기 확정된 다국어 음성 서비스를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 제공받을 다국어의 종류를 포함하는 정보를 입력 받는 사용자 정보 획득부, 상기 사용자가 서비스 제공에 동의한 경우, 상기 추출된 콘텐츠 메타 데이터를 통해 해당하는 다국어 음성 데이터를 검색하여 다운로드 혹은 스트리밍하는 음성 데이터 획득부, 상기 다국어 음성 서비스를 사용자에게 출력할 수 있는 다국어 출력 장치를 탐색하고, 상기 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치와 연결하여 상기 다국어 음성 데이터 및 상기 콘텐츠 시간정보를 송신하는 다국어 음성 데이터 송신부를 포함할 수 있다.According to an embodiment of the present invention, the content image output device extracts the content image data, the content time information, and the content metadata from the content data multiplexed with the content metadata and the content time information, and extracts the extracted content metadata. A content data extraction unit for determining a multilingual voice service that can be provided through, a user information acquisition unit for receiving information including a user's consent for outputting the determined multilingual voice service to a user, and the type of the multilingual language to be provided, When the user agrees to provide the service, a voice data acquisition unit that searches for and downloads or streams the corresponding multilingual voice data through the extracted content metadata, and a multilingual output device capable of outputting the multilingual voice service to the user. And a multilingual voice data transmitter for searching and connecting the multilingual voice output device selected by a user among the searched multilingual voice output devices to transmit the multilingual voice data and the content time information.

본 발명의 실시 예에 따르면 상기 사용자 정보 획득부는, 상기 다국어 음성 서비스의 동의 여부에 대한 정보를 입력 받는 사용자 동의정보 획득부, 상기 다국어 음성 서비스를 제공하기 위해 제공받을 다국어의 종류를 포함하는 정보를 사용자로부터 입력 받는 세부정보 획득부를 더 포함할 수 있다.According to an embodiment of the present invention, the user information acquisition unit includes information including a type of multilingual language to be provided to provide the multilingual speech service, and a user consent information acquisition unit receiving information on whether to consent to the multilingual speech service. It may further include a detailed information acquisition unit that is input from the user.

본 발명의 실시 예에 따르면 다국어 음성 출력장치는 다국어 음성 데이터를 다운로드 및 스트리밍하고 콘텐츠 시간정보를 수신하여 제공할 수 있는 다국어 음성 서비스에 대한 정보를 사용자에게 출력하고, 상기 다국어 음성 서비스의 제공에 대한 동의 여부를 포함하는 정보를 획득하는 서비스 제공 수락부, 상기 사용자가 동의한 경우, 상기 콘텐츠 시간정보를 사용하여 다국어 음성 데이터를 출력되고 있는 콘텐츠 영상과 동기화되도록 상기 사용자에게 출력하는 다국어 음성 서비스 제공부를 포함할 수 있다.According to an embodiment of the present invention, the multilingual voice output device downloads and streams multilingual voice data and outputs information on a multilingual voice service that can be provided by receiving content time information to a user, for providing the multilingual voice service. A service provision acceptance unit for obtaining information including whether to agree, and, if the user agrees, a multilingual audio service provision unit for outputting the multilingual audio data to the user so as to be synchronized with the content image being output using the content time information It can contain.

본 발명의 실시 예에 따르면 콘텐츠 메타 데이터 및 콘텐츠 시간정보와 멀티 플렉싱된 콘텐츠 데이터를 제공하는 콘텐츠 데이터 제공장치, 상기 확정된 다국어 음성 데이터를 콘텐츠 영상 제공장치로 다운로드 또는 스트리밍하는 다국어 음성 데이터 제공장치,수신한 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터, 콘텐츠 메타 데이터, 콘텐츠 시간정보 데이터를 추출하고, 상기 콘텐츠 영상 데이터는 사용자에게 출력하며 상기 콘텐츠 메타 데이터를 통해 대응되는 다국어 음성 데이터를 확정하여 다운로드 또는 스트리밍하고, 상기 다운로드 또는 스트리밍된 다국어 음성 데이터를 연결 가능한 다국어 음성 출력 장치에 전송하는 콘텐츠 영상 출력장치를 더 포함할 수 있다.According to an embodiment of the present invention, a content data providing device providing content metadata and content time information and multiplexed content data, and a multilingual audio data providing device for downloading or streaming the determined multilingual audio data to a content image providing device , Extract content video data, content metadata, content time information data from the received multiplexed content data, output the content video data to the user, and confirm and download the corresponding multilingual audio data through the content metadata Or it may further include a content video output device for streaming and transmitting the downloaded or streamed multilingual audio data to a connectable multilingual audio output device.

본 발명의 실시 예에 따르면 상기 콘텐츠 데이터 제공장치는 제공할 콘텐츠에 대한 메타 데이터를 생성하는 콘텐츠 메타 데이터 생성부, 상기 제공할 콘텐츠의 영상 재생정보, 음성 재생정보, 시간의 흐름에 따른 영상과 음성의 동기화 정보를 포함하는 시간정보를 생성하는 콘텐츠 시간정보 생성부, 상기 생성된 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱하는 다중화부를 더 포함할 수 있다.According to an embodiment of the present invention, the content data providing apparatus includes a content metadata generating unit that generates metadata on content to be provided, video playback information, audio playback information, and video and audio over time. A content time information generating unit for generating time information including synchronization information of, and a multiplexing unit for multiplexing the generated content metadata and content time information with content data may be further included.

본 발명의 실시 예에 따르면 상기 콘텐츠 영상 출력장치는 콘텐츠 메타 데이터와 콘텐츠 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터 및 상기 콘텐츠 시간정보, 콘텐츠 메타 데이터를 추출하고, 상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 서비스를 확정하는 콘텐츠 데이터 추출부, 상기 확정된 다국어 음성 서비스를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 제공받을 다국어의 종류를 포함하는 정보를 입력 받는 사용자 정보 획득부, 상기 사용자가 서비스 제공에 동의한 경우, 상기 추출된 콘텐츠 메타 데이터를 통해 해당하는 다국어 음성 데이터를 검색하여 다운로드 혹은 스트리밍하는 음성 데이터 획득부, 상기 다국어 음성 서비스를 사용자에게 출력할 수 있는 다국어 출력 장치를 탐색하고, 상기 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치와 연결하여 상기 다국어 음성 데이터 및 상기 콘텐츠 시간정보를 송신하는 다국어 음성 데이터 송신부를 더 포함할 수 있다.According to an embodiment of the present invention, the content image output device extracts content image data and the content time information and content metadata from content data multiplexed with content metadata and content time information, and the extracted content metadata Content data extraction unit to determine the multi-language voice service available through, User information acquisition unit to receive information including the user's consent for outputting the determined multi-language voice service to the user and the type of multi-language to be provided , When the user agrees to provide the service, a voice data acquisition unit that searches and downloads or streams the corresponding multilingual voice data through the extracted content metadata, and a multilingual output device capable of outputting the multilingual voice service to the user The search may further include a multilingual voice data transmission unit for transmitting the multilingual voice data and the content time information in connection with a multilingual voice output device selected by a user among the searched multilingual voice output devices.

본 발명의 실시 예에 따르면 상기 사용자 정보 획득부는, 상기 다국어 음성 서비스의 동의 여부에 대한 정보를 입력 받는 사용자 동의정보 획득부, 상기 다국어 음성 서비스를 제공하기 위해 제공받을 다국어의 종류를 포함하는 정보를 사용자로부터 입력 받는 세부정보 획득부를 더 포함할 수 있다.According to an embodiment of the present invention, the user information acquisition unit includes information including a type of multilingual language to be provided to provide the multilingual speech service, and a user consent information acquisition unit receiving information on whether to consent to the multilingual speech service. It may further include a detailed information acquisition unit that is input from the user.

본 발명의 실시 예에 따르면 다국어 음성 출력방법은 다국어 음성 데이터를 다운로드 및 스트리밍하고 콘텐츠 시간정보를 수신하여 제공할 수 있는 다국어 음성 서비스에 대한 정보를 사용자에게 출력하고, 상기 다국어 음성 서비스의 제공에 대한 동의 여부를 포함하는 정보를 획득하는 단계, 상기 사용자가 동의한 경우, 상기 콘텐츠 시간정보를 사용하여 다국어 음성 데이터를 출력되고 있는 콘텐츠 영상과 동기화되도록 상기 사용자에게 출력하는 단계를 포함할 수 있다.According to an embodiment of the present invention, the multilingual voice output method outputs to the user information on a multilingual voice service capable of downloading and streaming multilingual voice data and receiving and providing content time information, and for providing the multilingual voice service. The method may include obtaining information including whether to agree or not, and if the user agrees, outputting multilingual audio data to the user so as to be synchronized with the content image being output using the content time information.

본 발명의 실시 예에 따르면 콘텐츠 메타 데이터 및 콘텐츠 시간정보와 멀티 플렉싱된 콘텐츠 데이터를 제공하는 단계, 상기 확정된 다국어 음성 데이터를 콘텐츠 영상 제공장치로 다운로드 또는 스트리밍하는 단계, 수신한 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터, 콘텐츠 메타 데이터, 콘텐츠 시간정보 데이터를 추출하고, 상기 콘텐츠 영상 데이터는 사용자에게 출력하며 상기 콘텐츠 메타 데이터를 통해 대응되는 다국어 음성 데이터를 확정하여 다운로드 또는 스트리밍하고, 상기 다운로드 또는 스트리밍된 다국어 음성 데이터를 연결 가능한 다국어 음성 출력 장치에 전송하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, providing content meta data and content time information and multiplexed content data, downloading or streaming the determined multilingual audio data to a content image providing device, and receiving the multiplexed content Extract content video data, content metadata, content time information data from the content data, output the content video data to the user, and confirm or download or stream the corresponding multilingual audio data through the content metadata, and download or The method may further include transmitting the streamed multilingual voice data to a connectable multilingual voice output device.

본 발명의 실시 예에 따르면 상기 콘텐츠 데이터를 제공하는 단계는, 제공할 콘텐츠에 대한 메타 데이터를 생성하는 단계, 상기 제공할 콘텐츠의 영상 재생정보, 음성 재생정보, 시간의 흐름에 따른 영상과 음성의 동기화 정보를 포함하는 시간정보를 생성하는 단계, 상기 생성된 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, the step of providing the content data includes: generating meta data about the content to be provided, video playback information, audio playback information of the content to be provided, and video and audio over time. The method may further include generating time information including synchronization information, and multiplexing the generated content metadata and content time information with content data.

본 발명의 실시 예에 따르면 상기 다국어 음성 출력 장치에 전송하는 단계는 콘텐츠 메타 데이터와 콘텐츠 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터 및 상기 콘텐츠 시간정보, 콘텐츠 메타 데이터를 추출하고, 상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 서비스를 확정하는 단계, 상기 확정된 다국어 음성 서비스를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 제공받을 다국어의 종류를 포함하는 정보를 입력 받는 단계, 상기 사용자가 서비스 제공에 동의한 경우, 상기 추출된 콘텐츠 메타 데이터를 통해 해당하는 다국어 음성 데이터를 검색하여 다운로드 혹은 스트리밍하는 단계, 상기 다국어 음성 서비스를 사용자에게 출력할 수 있는 다국어 출력 장치를 탐색하고, 상기 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치와 연결하여 상기 다국어 음성 데이터 및 상기 콘텐츠 시간정보를 송신하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, the transmitting to the multilingual audio output device extracts content image data, content time information, and content metadata from content data multiplexed with content metadata and content time information, and extracts the content metadata. Determining a multilingual voice service that can be provided through the contents metadata, inputting information including whether the user agrees to output the determined multilingual voice service to the user and the type of the multilingual language to be provided, the If the user agrees to provide the service, searching for and downloading or streaming the corresponding multilingual voice data through the extracted content metadata, searching for a multilingual output device capable of outputting the multilingual voice service to the user, and The method may further include transmitting the multilingual audio data and the content time information in connection with a multilingual audio output device selected by a user among the searched multilingual audio output devices.

본 발명의 실시 예에 따르면 상기 정보를 입력 받는 단계는, 상기 다국어 음성 서비스의 동의 여부에 대한 정보를 입력 받는 단계, 상기 다국어 음성 서비스를 제공하기 위해 제공받을 다국어의 종류를 포함하는 정보를 사용자로부터 입력 받는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, the step of receiving the information includes receiving information about whether to agree to the multilingual voice service, and information including a type of multilingual language to be provided to provide the multilingual voice service from a user. It may further include a step of receiving input.

본 발명의 실시 예에 따르면 상기 사용자에게 출력하는 단계는, 다국어 음성 데이터를 다운로드 및 스트리밍하고 콘텐츠 시간정보를 수신하여 제공할 수 있는 다국어 음성 서비스에 대한 정보를 사용자에게 출력하고, 상기 다국어 음성 서비스의 제공에 대한 동의 여부를 포함하는 정보를 획득하는 단계, 상기 사용자가 동의한 경우, 상기 콘텐츠 시간정보를 사용하여 다국어 음성 데이터를 출력되고 있는 콘텐츠 영상과 동기화되도록 상기 사용자에게 출력하는 단계를 더 포함할 수 있다.According to an embodiment of the present invention, the step of outputting to the user outputs information about a multilingual voice service that can be provided by downloading and streaming multilingual voice data and receiving content time information to the user, and of the multilingual voice service. Obtaining information including whether or not to consent to the provision, and if the user agrees, further comprising the step of outputting to the user to synchronize the multi-language audio data with the content image being output using the content time information Can.

도 1은 본 발명의 실시 예에 따른 다국어 음성 서비스 제공 시스템의 구성도이다.
도 2는 도 1에 도시된 콘텐츠 데이터 제공장치의 세부 구성도이다.
도 3은 도 2에서 생성된 콘텐츠 메타 데이터의 형식을 나타낸 도면이다.
도 4는 도 1에 도시된 콘텐츠 영상 출력장치의 세부 구성도이다.
도 5는 도 4에 도시된 사용자 정보 획득부의 세부 구성도이다.
도 6은 도 1에 도시된 다국어 음성 출력장치의 세부 구성도이다.
도 7은 본 발명의 실시 예에 따른 다국어 음성 서비스 제공 시스템의 흐름도이다.
1 is a block diagram of a multilingual voice service providing system according to an embodiment of the present invention.
FIG. 2 is a detailed configuration diagram of the apparatus for providing content data shown in FIG. 1.
FIG. 3 is a diagram illustrating a format of content metadata generated in FIG. 2.
FIG. 4 is a detailed configuration diagram of the content image output device illustrated in FIG. 1.
5 is a detailed configuration diagram of a user information acquisition unit illustrated in FIG. 4.
6 is a detailed configuration diagram of the multilingual audio output device illustrated in FIG. 1.
7 is a flowchart of a multilingual voice service providing system according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시 예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시 예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings so that those skilled in the art to which the present invention pertains may easily practice. However, the present invention can be implemented in many different forms and is not limited to the embodiments described herein. In addition, in order to clearly describe the present invention in the drawings, parts irrelevant to the description are omitted, and like reference numerals are assigned to similar parts throughout the specification.

명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part “includes” a certain component, it means that the component may further include other components, not to exclude other components, unless otherwise stated.

이하, 도면을 참조하여 본 발명의 실시 예에 따른 다국어 음성 서비스 제공 시스템 및 그 방법에 대하여 설명한다.Hereinafter, a system and method for providing a multilingual voice service according to an embodiment of the present invention will be described with reference to the drawings.

도 1은 본 발명의 실시 예에 따른 다국어 음성 서비스 제공 시스템(1000)의 구성도이다.1 is a block diagram of a multilingual voice service providing system 1000 according to an embodiment of the present invention.

도 1을 참조하면 다국어 음성 지원 시스템(1000)은 콘텐츠 데이터 제공장치(100), 다국어 음성 데이터 제공장치(200), 콘텐츠 영상 출력장치(300), 다국어 음성 출력장치(400)를 포함할 수 있다.Referring to FIG. 1, the multilingual audio support system 1000 may include a content data providing device 100, a multilingual audio data providing device 200, a content image output device 300, and a multilingual audio output device 400. .

콘텐츠 데이터 제공장치(100)는 콘텐츠 메타 데이터 및 콘텐츠 시간정보와 멀티 플렉싱된 콘텐츠 데이터를 제공할 수 있다.The content data providing apparatus 100 may provide content metadata and content time information and multiplexed content data.

콘텐츠 데이터 제공장치(100)는 도 2를 참조하여 더 자세히 설명하도록 한다.The content data providing apparatus 100 will be described in more detail with reference to FIG. 2.

다국어 음성 데이터 제공장치(200)는 콘텐츠 영상 출력장치(300)에서 인식된 다국어 음성 데이터의 다운로드 또는 스트리밍 요청을 받아, 상기 요청에 따라 다국어 음성 데이터를 다운로드 또는 스트리밍 할 수 있다.The multilingual audio data providing device 200 may receive a download or streaming request of the multilingual audio data recognized by the content image output device 300 and download or stream the multilingual audio data according to the request.

본 발명의 실시 예에 따르면 다국어 음성 데이터 제공장치(200)는 확정된 다국어 음성 데이터를 콘텐츠 영상 제공장치(300)로 다운로드 또는 스트리밍 할 수 있는 장치일 수 있다.According to an embodiment of the present invention, the multilingual audio data providing apparatus 200 may be a device capable of downloading or streaming the determined multilingual audio data to the content image providing apparatus 300.

콘텐츠 영상 제공장치(300)는 수신한 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터, 콘텐츠 메타 데이터, 콘텐츠 시간정보 데이터를 추출하고, 콘텐츠 영상 데이터는 사용자에게 출력하며 콘텐츠 메타 데이터를 통해 대응되는 다국어 음성 데이터를 확정하여 다운로드 또는 스트리밍하고, 다운로드 또는 스트리밍된 다국어 음성 데이터를 연결 가능한 다국어 음성 출력 장치에 전송할 수 있다.The content image providing apparatus 300 extracts content image data, content metadata, and content time information data from the received multiplexed content data, and outputs the content image data to the user and corresponds to the multilingual voice through the content metadata The data can be determined and downloaded or streamed, and the downloaded or streamed multilingual audio data can be transmitted to a connectable multilingual audio output device.

콘텐츠 영상 제공장치(300)는 도 4를 참조하여 더 자세히 설명하도록 한다.The content image providing apparatus 300 will be described in more detail with reference to FIG. 4.

다국어 음성 출력장치(400)는 다국어 음성 데이터를 다운로드 또는 스트리밍하고, 콘텐츠 시간정보를 수신하고, 다국어 음성 서비스의 제공에 대한 사용자의 동의 여부를 포함하는 정보를 획득하여 출력되고 있는 콘텐츠 영상과 동기화되도록 사용자에게 출력할 수 있다.The multilingual audio output device 400 downloads or streams multilingual audio data, receives content time information, obtains information including whether or not the user consents to the provision of the multilingual audio service, and is synchronized with the outputted content image. It can be output to the user.

다국어 음성 출력장치(400)는 도 6을 참조하여 더 자세히 설명하도록 한다.The multilingual audio output device 400 will be described in more detail with reference to FIG. 6.

도 2는 도 1에 도시된 콘텐츠 데이터 제공장치(100)의 세부 구성도이다.FIG. 2 is a detailed configuration diagram of the content data providing apparatus 100 shown in FIG. 1.

도 2를 참조하면 콘텐츠 데이터 제공장치(100)는 콘텐츠 메타 데이터 생성부(110), 콘텐츠 시간정보 생성부(120), 다중화부(130)를 포함할 수 있다.Referring to FIG. 2, the content data providing apparatus 100 may include a content metadata generation unit 110, a content time information generation unit 120, and a multiplexing unit 130.

콘텐츠 메타 데이터 생성부(110)는 제공할 콘텐츠에 대한 콘텐츠 메타 데이터를 생성할 수 있다.The content metadata generation unit 110 may generate content metadata for content to be provided.

본 발명의 실시 예에 따라 생성된 콘텐츠 메타 데이터는 도 3과 같이 나타낼 수 있다.Content metadata generated according to an embodiment of the present invention may be represented as shown in FIG. 3.

콘텐츠 시간정보 생성부(120)는 제공할 콘텐츠의 영상 재생정보, 음성 재생정보 및 시간의 흐름에 따른 영상과 음성의 동기화 정보를 포함하는 시간정보를 생성할 수 있다.The content time information generation unit 120 may generate time information including video reproduction information, audio reproduction information, and synchronization information between video and audio according to time.

여기서 동기화는 영상과 음성이 각 시간대 별로 영상 출력작업 및 음성 출력 작업들 사이의 수행 시기를 맞추어 결합하는 것을 의미할 수 있다.Here, synchronization may mean that video and audio are combined according to the timing of execution between video output and audio output tasks for each time zone.

본 발명의 실시 예에 따르면 동기화 정보는 상술한 것과 같은 동기화 작업을 수행할 수 있도록 작업의 수행시기를 맞추기에 필요한 정보를 의미할 수 있다.According to an embodiment of the present invention, the synchronization information may mean information necessary to match the execution timing of the operation so that the synchronization operation as described above can be performed.

다중화부(130)는 생성된 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱할 수 있다.The multiplexer 130 may multiplex the generated content metadata and content time information with the content data.

도 3은 도 2에서 생성된 콘텐츠 메타 데이터의 형식을 나타낸 도면이다.FIG. 3 is a diagram illustrating a format of content metadata generated in FIG. 2.

도 3을 참조하면 콘텐츠 메타 데이타 및 콘텐츠 시간정보의 형식을 나타내고 있다. Referring to FIG. 3, the format of content metadata and content time information is shown.

멀티 오디오 제공서버(200)의 URL, 그리고 제공 가능한 멀티오디오의 개수와 제공 가능한 각 나라의 국가코드가 포함될 수 있다.The URL of the multi-audio providing server 200 and the number of multi-audios that can be provided and country codes of each country that can be provided may be included.

또한 각 콘텐츠의 재현시점을 점을 기준으로 하는 PTS(Presentation Time Stamp) 타임이 콘텐츠 시간정보에 포함될 수 있다. In addition, a PTS (Presentation Time Stamp) time based on the point of reproduction of each content may be included in the content time information.

도 4는 도 1에 도시된 콘텐츠 영상 출력장치(300)의 세부 구성도이다.FIG. 4 is a detailed configuration diagram of the content image output device 300 shown in FIG. 1.

도 4를 참조하면 콘텐츠 영상 출력장치(300)는 콘텐츠 데이터 추출부 (310), 사용자 정보 획득부(320), 다국어 음성 데이터 획득부(330), 다국어 음성 데이터 제공부(340)를 포함할 수 있다.Referring to FIG. 4, the content image output device 300 may include a content data extraction unit 310, a user information acquisition unit 320, a multilingual audio data acquisition unit 330, and a multilingual audio data provision unit 340. have.

콘텐츠 데이터 추출부(310)는 콘텐츠 메타 데이터와 콘텐츠 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터 및 상기 콘텐츠 시간정보, 콘텐츠 메타 데이터를 추출하고, 상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 서비스를 확정할 수 있다.The content data extraction unit 310 extracts content image data and the content time information and content metadata from content data in which content metadata and content time information are multiplexed, and is available in multiple languages through the extracted content metadata Voice service can be confirmed.

사용자 정보 획득부(320)는 확정된 다국어 음성 서비스를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 제공받을 다국어의 종류를 포함하는 정보를 입력 받을 수 있다.The user information acquisition unit 320 may receive information including whether the user agrees to output the determined multilingual voice service to the user and the type of the multilingual language to be provided.

다국어 음성 데이터 획득부(330)는 사용자가 서비스 제공에 동의한 경우, 상기 추출된 콘텐츠 메타 데이터를 통해 해당하는 다국어 음성 데이터를 검색하여 다운로드 혹은 스트리밍할 수 있다.When the user agrees to provide the service, the multilingual voice data acquisition unit 330 may search for and download or stream the corresponding multilingual voice data through the extracted content metadata.

다국어 음성 데이터 제공부(340)는 다국어 음성 서비스를 사용자에게 출력할 수 있는 다국어 출력 장치를 탐색하고, 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치와 연결하여 다국어 음성 데이터 및 콘텐츠 시간정보를 송신할 수 있다.The multilingual voice data providing unit 340 searches for a multilingual output device capable of outputting a multilingual voice service to a user, and connects the multilingual voice output device selected by the user among the searched multilingual voice output devices to multilingual voice data and content time information Can be sent.

본 발명의 실시 예에 따르면 다국어 음성 서비스를 사용자에게 제공할 수 있는 다국어 음성 출력장치(400)를 탐색하기 위하여 유무선 기반의 UPnP방식을 사용할 수 있으나 이에 한정되지 아니한다.According to an embodiment of the present invention, a UPnP method based on wired/wireless may be used to search the multilingual voice output device 400 capable of providing a multilingual voice service to a user, but is not limited thereto.

도 5는 도 4에 도시된 사용자 정보 획득부(320)의 세부 구성도이다.5 is a detailed configuration diagram of the user information acquisition unit 320 illustrated in FIG. 4.

도 5를 참조하면 사용자 정보 획득부(320)는 사용자 동의 정보 획득부(321), 세부정보 획득부(322)를 포함할 수 있다.Referring to FIG. 5, the user information acquisition unit 320 may include a user consent information acquisition unit 321 and a detailed information acquisition unit 322.

사용자 동의 정보 획득부(321)는 다국어 음성 서비스의 동의 여부에 대한 정보를 입력 받을 수 있다.The user consent information acquisition unit 321 may receive information on whether to consent to the multilingual voice service.

세부정보 획득부(322)는 다국어 음성 서비스를 제공하기 위해 제공받을 다국어의 종류를 포함하는 정보를 사용자로부터 입력 받을 수 있다.The detailed information acquisition unit 322 may receive information including a type of multilingual languages to be provided from a user to provide a multilingual voice service.

본 발명에 실시 예에 따르면 다국어 음성 서비스의 제공을 위해 필요한 세부 정보는 사용자가 선택한 언어, 제공될 다국어 음성 데이터의 세부 설정에 대한 정보 등이 포함될 수 있으나 이에 한정되지 아니한다.According to an embodiment of the present invention, detailed information required for providing a multilingual voice service may include, but is not limited to, a language selected by a user, information on detailed settings of multilingual voice data to be provided, and the like.

여기서 다국어 음성 데이터의 세부 설정에 대한 정보는 사용자가 필요한 다국어 음성 데이터의 구간에 대한 정보, 제공될 멀티 오디오 음향의 크기 등의 정보를 포함할 수 있으나 이에 한정되지 아니한다.Here, the information on the detailed setting of the multilingual voice data may include information on a section of the multilingual voice data required by the user, information on the size of the multi-audio sound to be provided, but is not limited thereto.

도 6은 도 1에 도시된 다국어 음성 출력장치(400)의 세부 구성도이다.6 is a detailed configuration diagram of the multilingual audio output device 400 shown in FIG. 1.

도 6을 참조하면 다국어 음성 출력장치(400)는 서비스 제공 수락부(410), 다국어 음성 서비스 제공부(420)을 포함할 수 있다.Referring to FIG. 6, the multilingual voice output device 400 may include a service provision accepting unit 410 and a multilingual voice service providing unit 420.

서비스 제공 수락부(410)는 다국어 음성 데이터를 다운로드 및 스트리밍하고 콘텐츠 시간정보를 수신하여 제공할 수 있는 다국어 음성 서비스에 대한 정보를 사용자에게 출력하고, 상기 다국어 음성 서비스의 제공에 대한 동의 여부를 포함하는 정보를 획득할 수 있다.The service provision accepting unit 410 downloads and streams multilingual voice data and outputs information on a multilingual voice service that can be provided by receiving content time information to a user, and includes whether or not to consent to the provision of the multilingual voice service Information can be obtained.

다국어 음성 서비스 제공부(420)는 사용자가 동의한 경우, 콘텐츠 시간정보를 사용하여 다국어 음성 데이터를 출력되고 있는 콘텐츠 영상과 동기화되도록 사용자에게 출력할 수 있다.If the user agrees, the multilingual voice service providing unit 420 may output the multilingual voice data to the user so as to be synchronized with the content image being output using the content time information.

본 발명의 실시 예에 따르면 다국어 음성 서비스 제공부(420)는 다운로드 또는 스트리밍한 다국어 음성 데이터를 콘텐츠 영상 출력장치(300)의 영상과 정확한 동기를 맞추어 재생할 수 있다.According to an embodiment of the present invention, the multilingual audio service providing unit 420 may play back the downloaded or streamed multilingual audio data in synchronization with an image of the content image output device 300.

여기서 동기화는 NTP(network time protocol)를 사용할 수 있으나 이에 한정되지 아니한다.Here, the synchronization may use NTP (network time protocol), but is not limited thereto.

또한 두 장치간의 스트리밍은 http 기반의 다양한 스트리밍 프로토콜 및 RTSP/RTP로 사용될 수 있으나 이에 한정되지 아니한다.In addition, streaming between two devices can be used with various streaming protocols based on http and RTSP/RTP, but is not limited thereto.

도 7은 본 발명의 실시 예에 따른 다국어 음성 서비스 제공 시스템의 흐름도이다.7 is a flowchart of a multilingual voice service providing system according to an embodiment of the present invention.

콘텐츠 메타 데이터 및 콘텐츠 시간정보를 생성한다(710).Content metadata and content time information are generated (710).

본 발명의 실시 예에 따르면 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 생성하고 생성한 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱하여, 멀티 플렉싱된 콘텐츠 데이터를 제공할 수 있다.According to an embodiment of the present invention, content metadata and content time information may be generated and multiplexed with the generated content metadata and content time information, thereby providing multiplexed content data.

생성한 데이터 및 정보를 콘텐츠 데이터에 멀티 플렉싱하여 전송한다(720).The generated data and information are multiplexed to content data and transmitted (720).

수신한 콘텐츠 데이터로부터 콘텐츠 영상 데이터, 콘텐츠 메타 데이터, 콘텐츠 시간정보를 추출한다(730).Content video data, content metadata, and content time information are extracted from the received content data (730).

본 발명의 실시 예에 따르면 콘텐츠 메타 데이터와 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 영상 데이터를 추출하여 사용자에게 출력하며, 콘텐츠 데이터로부터 콘텐츠 시간정보 및 콘텐츠 메타 데이터를 추출할 수 있다.According to an embodiment of the present invention, image data may be extracted from content data whose content metadata and time information are multiplexed and output to a user, and content time information and content metadata may be extracted from the content data.

콘텐츠 메타 데이터를 통해 해당하는 다국어 음성 서비스를 인식한다(740).The corresponding multilingual voice service is recognized through the content metadata (740).

다국어 음성 서비스 제공에 대한 사용자의 동의여부를 판단한다(750).It is determined whether the user consents to the provision of the multilingual voice service (750).

본 발명의 실시 예에 따르면 인식된 다국어 음성 서비스를 제공하는 것에 대한 사용자의 동의여부를 포함하는 정보 및 다국어 음성 서비스 제공을 위해 필요한 세부사항을 포함하는 정보를 입력 받아 사용자의 동의 여부를 판단할 수 있다.According to an embodiment of the present invention, it is possible to determine whether the user consents by receiving information including whether the user consents to providing the recognized multilingual voice service and information including details necessary for providing the multilingual voice service. have.

콘텐츠 메타 데이터와 대응되는 다국어 음성 데이터를 검색하여 검색한 다국어 음성 데이터를 요청한다(760).The multilingual voice data corresponding to the content metadata is searched for and the searched multilingual voice data is requested (760).

본 발명의 실시 예에 따르면 사용자가 서비스 제공에 동의한 경우, 상기 추출한 콘텐츠 메타 데이터를 통해 다국어 음성 서비스 서버에 존재하는 다국어 음성 데이터를 검색하여 다운로드 혹은 스트리밍을 요청할 수 있다.According to an embodiment of the present invention, when a user agrees to provide a service, it is possible to search for multilingual voice data existing in the multilingual voice service server through the extracted content metadata and request download or streaming.

요청한 다국어 음성 데이터를 다운로드 또는 스트리밍한다(770).The requested multilingual voice data is downloaded or streamed (770).

다국어 음성 출력장치를 탐색하고, 탐색된 장치의 리스트를 사용자에게 출력한다(780).The multilingual audio output device is searched, and a list of the searched devices is output to the user (780).

본 발명의 실시 예에 따르면 다국어 음성 서비스를 사용자에게 제공할 수 있는 다국어 음성 출력장치를 탐색하고, 상기 다국어 음성 출력장치의 리스트를 사용자에게 출력하여 상기 출력할 수 있다.According to an embodiment of the present invention, a multilingual voice output device capable of providing a multilingual voice service to a user may be searched, and a list of the multilingual voice output devices may be output to the user for output.

출력된 리스트 중 사용자가 선택한 다국어 음성 출력장치와 연결한다(790).The multi-language audio output device selected by the user is connected to the output list (790).

연결된 다국어 음성 출력장치로 다국어 음성 데이터 및 콘텐츠 시간정보를 제공한다(800).The connected multilingual audio output device provides multilingual audio data and content time information (800).

본 발명의 실시 예에 따르면 연결하고, 연결된 다국어 음성 출력장치로 사용자가 선택한 언어종류를 가진 다국어 음성 데이터 및 상기 시간정보를 제공할 수 있다.According to an exemplary embodiment of the present invention, a multilingual audio data having a language type selected by a user and the time information may be provided through a connected, multilingual audio output device.

다국어 음성 출력장치를 통해 사용자에게 제공할 수 있는 다국어 음성 서비스 정보를 출력한다(810).The multilingual voice service information output to the user is output through the multilingual voice output device (810 ).

다국어 음성 서비스 제공에 대한 사용자의 동의여부를 판단한다(820).It is determined whether the user consents to the provision of the multilingual voice service (820 ).

본 발명의 실시 예에 따르면 제공될 다국어 음성 서비스에 대한 관련 정보를 사용자에게 출력하고 출력한 상기 정보를 바탕으로 사용자에게 다국어 음성 서비스의 제공에 대한 동의여부를 입력할 수 있다.According to an embodiment of the present invention, it is possible to output related information on a multilingual voice service to be provided to a user and to input a consent for providing a multilingual voice service to the user based on the outputted information.

콘텐츠 시간정보를 수신하고 다국어 음성 데이터를 다운로드 및 스트리밍하여 콘텐츠 영상과 동기화되도록 사용자에게 출력한다(830).Content time information is received, and multilingual audio data is downloaded and streamed and output to the user so as to be synchronized with the content image (830).

본 발명의 실시 예에 따르면 사용자가 선택한 언어종류를 가진 다국어 음성 데이터를 다운로드 또는 스트리밍하여 콘텐츠 영상과 동기화 되도록 사용자에게 출력할 수 있다.According to an embodiment of the present invention, multilingual audio data having a language type selected by a user may be downloaded or streamed and output to a user so as to be synchronized with content images.

본 발명의 실시 예는 이상에서 설명한 장치 및/또는 방법을 통해서만 구현이 되는 것은 아니며, 이상에서 본 발명의 실시 예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 당업자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.The embodiments of the present invention are not implemented only through the devices and/or methods described above, and the embodiments of the present invention have been described in detail above, but the scope of the present invention is not limited thereto, and the following claims Various modifications and improvements of those skilled in the art using the basic concept of the present invention defined in the above also belong to the scope of the present invention.

100: 콘텐츠 데이터 제공장치 110 : 콘텐츠 메타 데이터 생성부
120 : 콘텐츠 시간정보 생성부 130 : 다중화부
200 : 다국어 음성 데이터 제공장치 300 : 콘텐츠 영상 출력장치
310 : 콘텐츠 데이터 추출부 320 : 사용자 정보 획득부
321 : 세부정보 획득부 322 : 세부정보 획득부
330 : 음성 데이터 획득부 340 : 다국어 음성 데이터 송신부
400 : 다국어 음성 출력장치 410 : 서비스 제공 수락부
420 : 다국어 음성 서비스 제공부
100: content data providing device 110: content metadata generation unit
120: content time information generation unit 130: multiplexer
200: multilingual audio data providing device 300: content video output device
310: content data extraction unit 320: user information acquisition unit
321: detailed information acquisition unit 322: detailed information acquisition unit
330: voice data acquisition unit 340: multilingual voice data transmission unit
400: multilingual audio output device 410: service provision acceptance unit
420: Multilingual voice service provider

Claims (13)

삭제delete 삭제delete 콘텐츠 메타 데이터와 콘텐츠 시간정보가 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터 및 상기 콘텐츠 시간정보, 상기 콘텐츠 메타 데이터를 추출하고, 상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 데이터를 확정하는 콘텐츠 데이터 추출부;
상기 확정된 다국어 음성 데이터를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 사용자가 제공받을 다국어의 종류를 포함하는 정보를 상기 사용자로부터 입력 받는 사용자 정보 획득부;
상기 사용자가 서비스 제공에 동의한 경우, 상기 추출된 콘텐츠 메타 데이터를 통해 확정된 다국어 음성 데이터를 요청하여 제공 받는 다국어 음성 데이터 획득부; 및
상기 다국어 음성 데이터를 사용자에게 출력할 수 있는 다국어 음성 출력장치를 탐색하고, 탐색된 다국어 음성 출력장치의 리스트를 사용자에게 제공하며, 상기 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치와 연결하여 상기 다국어 음성 데이터 및 상기 콘텐츠 시간정보를 송신하는 다국어 음성 데이터 송신부
를 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 시스템.
Content data that extracts content image data, the content time information, and the content metadata from content data multiplexed with content metadata and content time information, and determines multi-language audio data that can be provided through the extracted content metadata Extraction unit;
A user information acquisition unit that receives information including whether the user agrees to output the determined multilingual voice data to a user and the type of multilingual language that the user will receive from the user;
A multilingual speech data acquisition unit that requests and receives multilingual speech data determined through the extracted content metadata when the user agrees to provide a service; And
Search for a multilingual audio output device capable of outputting the multilingual audio data to a user, provide a list of searched multilingual audio output devices to a user, and connect with a multilingual audio output device selected by a user among the searched multilingual audio output devices Multilingual voice data transmitter for transmitting the multilingual voice data and the content time information
Multilingual voice service providing system comprising a.
제 3 항에 있어서,
상기 콘텐츠 메타 데이터 및 상기 콘텐츠 시간정보와 멀티 플렉싱된 콘텐츠 데이터를 상기 콘텐츠 데이터 추출부로 제공하는 콘텐츠 데이터 제공장치; 및
상기 다국어 음성 데이터 획득부의 요청에 따라 상기 확정된 다국어 음성 데이터를 상기 다국어 음성 데이터 획득부로 제공하는 다국어 음성 데이터 제공장치
를 더 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 시스템.
The method of claim 3,
A content data providing device that provides the content metadata and the content time multiplexed content data to the content data extraction unit; And
Multi-language voice data providing device providing the determined multi-language voice data to the multi-language voice data acquisition unit at the request of the multi-language voice data acquisition unit
Multilingual voice service providing system further comprising a.
제 4 항에 있어서,
상기 콘텐츠 데이터 제공장치는
제공할 콘텐츠에 대한 메타 데이터를 생성하는 콘텐츠 메타 데이터 생성부;
상기 제공할 콘텐츠의 영상 재생정보, 음성 재생정보, 시간의 흐름에 따른 영상과 음성의 동기화 정보를 포함하는 시간정보를 생성하는 콘텐츠 시간정보 생성부; 및
상기 생성된 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱하는 다중화부를 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 시스템.
The method of claim 4,
The content data providing device
A content metadata generating unit that generates metadata on content to be provided;
A content time information generation unit for generating time information including video reproduction information, audio reproduction information, and synchronization information between video and audio according to the passage of time; And
And a multiplexing unit for multiplexing the generated content metadata and content time information with the content data.
제 3 항에 있어서,
상기 다국어 음성 출력장치는 상기 다국어 음성 데이터 송신부로부터 제공된 상기 다국어 음성 데이터를 상기 콘텐츠 시간정보를 사용하여 출력되고 있는 콘텐츠 영상과 동기화시켜 상기 사용자에게 출력하는 다국어 음성 서비스 제공 시스템.
The method of claim 3,
The multilingual audio output device is a multilingual audio service providing system for synchronizing the multilingual audio data provided from the multilingual audio data transmission unit with a content image being output using the content time information and outputting it to the user.
삭제delete 멀티 플렉싱된 콘텐츠 데이터로부터 콘텐츠 영상 데이터, 콘텐츠 메타 데이터, 콘텐츠 시간정보 데이터를 추출하는 단계;
상기 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 데이터 중 확정된 다국어 음성 데이터를 다국어 음성 데이터 제공장치로 요청하여 수신하는 단계;
상기 다국어 음성 데이터를 사용자에게 출력할 수 있는 다국어 음성 출력장치를 탐색하고, 탐색된 다국어 음성 출력장치의 리스트를 사용자에게 제공하는 단계;
상기 콘텐츠 영상 데이터를 출력하는 단계; 및
상기 탐색된 다국어 음성 출력장치 중 사용자가 선택한 다국어 음성 출력장치를 통해 상기 다국어 음성 데이터를 상기 콘텐츠 시간정보를 사용하여 상기 콘텐츠 영상 데이터와 동기화시켜 출력하는 단계
를 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 방법.
Extracting content image data, content metadata, and content time information data from the multiplexed content data;
Requesting and receiving the determined multilingual speech data from the multilingual speech data available through the content meta data to the multilingual speech data providing apparatus;
Searching for a multilingual audio output device capable of outputting the multilingual audio data to a user, and providing a list of the searched multilingual audio output devices to the user;
Outputting the content image data; And
Synchronizing and outputting the multilingual audio data with the content image data using the content time information through a multilingual audio output device selected by a user among the searched multilingual audio output devices
Multilingual voice service providing method comprising a.
삭제delete 제 8 항에 있어서,
상기 추출하는 단계는
제공할 콘텐츠에 대한 메타 데이터를 생성하는 단계;
상기 제공할 콘텐츠의 영상 재생정보, 음성 재생정보, 시간의 흐름에 따른 영상과 음성의 동기화 정보를 포함하는 시간정보를 생성하는 단계; 및
상기 생성된 콘텐츠 메타 데이터 및 콘텐츠 시간정보를 콘텐츠 데이터와 멀티 플렉싱하는 단계를 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 방법.
The method of claim 8,
The extracting step
Generating metadata about content to be provided;
Generating time information including video reproduction information, audio reproduction information, and synchronization information between video and audio over time; And
And multiplexing the generated content metadata and content time information with content data.
제 8 항에 있어서,
상기 수신하는 단계는
상기 추출된 콘텐츠 메타 데이터를 통해 제공 가능한 다국어 음성 서비스를 확정하는 단계;
상기 확정된 다국어 음성 서비스를 사용자에게 출력하는 것에 대한 사용자의 동의여부 및 상기 제공받을 다국어의 종류를 포함하는 정보를 상기 사용자로부터 입력 받는 단계; 및
상기 확정된 다국어 음성 데이터를 검색하여 상기 다국어 음성 데이터 제공장치로 요청하는 단계를 포함하는 것을 특징으로 하는 다국어 음성 서비스 제공 방법.
The method of claim 8,
The receiving step
Determining a multilingual voice service that can be provided through the extracted content metadata;
Receiving, from the user, information including whether the user consents to outputting the determined multilingual voice service to the user and the type of the multilingual language to be provided; And
And searching for the determined multilingual voice data and requesting the multilingual voice data providing apparatus.
삭제delete 삭제delete
KR1020140081375A 2013-10-01 2014-06-30 Multi-audio broadcasting service system and method therefor KR102126224B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US14/502,290 US20150095941A1 (en) 2013-10-01 2014-09-30 Multilingual audio service supporting system and method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020130117544 2013-10-01
KR20130117544 2013-10-01

Publications (2)

Publication Number Publication Date
KR20150039077A KR20150039077A (en) 2015-04-09
KR102126224B1 true KR102126224B1 (en) 2020-06-24

Family

ID=53029503

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140081375A KR102126224B1 (en) 2013-10-01 2014-06-30 Multi-audio broadcasting service system and method therefor

Country Status (1)

Country Link
KR (1) KR102126224B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004088751A (en) * 2002-06-28 2004-03-18 Matsushita Electric Ind Co Ltd Information regenerating apparatus

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100686155B1 (en) * 2005-02-28 2007-02-26 엘지전자 주식회사 Method for control channel change of multi television system
KR100750143B1 (en) * 2005-12-05 2007-08-21 삼성전자주식회사 Method and apparatus for storing digital broadcasting Signal

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004088751A (en) * 2002-06-28 2004-03-18 Matsushita Electric Ind Co Ltd Information regenerating apparatus

Also Published As

Publication number Publication date
KR20150039077A (en) 2015-04-09

Similar Documents

Publication Publication Date Title
US11272257B2 (en) Method and apparatus for pushing subtitle data, subtitle display method and apparatus, device and medium
US11252444B2 (en) Video stream processing method, computer device, and storage medium
US11785289B2 (en) Receiving device, transmitting device, and data processing method
JP6247309B2 (en) Apparatus and method for processing interactive services
EP2910029B1 (en) Apparatus and method for processing an interactive service
US10715571B2 (en) Self-adaptive streaming medium processing method and apparatus
US8850475B2 (en) Provisioning an enhanced television (ETV) application
EP2852168A1 (en) Video processing method, terminal and caption server
KR101358807B1 (en) Method for synchronizing program between multi-device using digital watermark and system for implementing the same
CN106464933B (en) Apparatus and method for remotely controlling rendering of multimedia content
KR102499231B1 (en) Receiving device, sending device and data processing method
KR102085192B1 (en) Rendering time control
TW202114432A (en) Use of in-band metadata as basis to access reference fingerprints to facilitate
JP2012244286A (en) Information processing terminal, application-cooperative content management server and location resolution server
JP2012023477A (en) Content reproducing method, content distribution device, terminal and program for changing presentation form of advertising information
KR20130050464A (en) Augmenting content providing apparatus and method, augmenting broadcasting transmission apparatus and method, and augmenting broadcasting reception apparatus and method
JP2019161657A (en) Receiver, reception method, transmitter, and transmission method
WO2016107192A1 (en) Self-adaptive streaming media processing method and device
KR101666246B1 (en) Advance metadata provision augmented broadcasting apparatus and method
JP7551286B2 (en) Subtitle conversion device, content distribution system, program, and content distribution method
US8863193B2 (en) Information processing apparatus, broadcast receiving apparatus and information processing method
US9338485B2 (en) Method and apparatus for distributing a multimedia content
KR102126224B1 (en) Multi-audio broadcasting service system and method therefor
US20150095941A1 (en) Multilingual audio service supporting system and method therefor
van Deventer et al. Media synchronisation for television services through HbbTV

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant