KR101358807B1 - Method for synchronizing program between multi-device using digital watermark and system for implementing the same - Google Patents
Method for synchronizing program between multi-device using digital watermark and system for implementing the same Download PDFInfo
- Publication number
- KR101358807B1 KR101358807B1 KR1020110143039A KR20110143039A KR101358807B1 KR 101358807 B1 KR101358807 B1 KR 101358807B1 KR 1020110143039 A KR1020110143039 A KR 1020110143039A KR 20110143039 A KR20110143039 A KR 20110143039A KR 101358807 B1 KR101358807 B1 KR 101358807B1
- Authority
- KR
- South Korea
- Prior art keywords
- watermark
- digital watermark
- additional information
- digital
- management server
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/835—Generation of protective data, e.g. certificates
- H04N21/8358—Generation of protective data, e.g. certificates involving watermark
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8547—Content authoring involving timestamps for synchronizing content
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
본 발명은 디지털 콘텐츠에 워터마크를 삽입하여 다수의 디바이스간 동기화가 가능하도록 함으로써 사용자가 하나의 디바이스로 실시간 방송 프로그램을 시청하고 있을 때 다른 디바이스에서 현재 시청 중인 프로그램에 대한 부가 서비스를 제공받을 수 있도록 제공하는 디지털 워터마크를 이용한 멀티 디바이스간 동기화 방법 및 이를 구현하기 위한 장치를 제공한다. The present invention enables the synchronization between a plurality of devices by inserting a watermark in digital content, so that when a user is watching a real-time broadcasting program with one device, the user may receive an additional service for a program currently being viewed by another device. Provided are a multi-device synchronization method using a digital watermark provided, and an apparatus for implementing the same.
Description
본 발명은 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 시스템에 관한 것으로서, 더욱 상세하게는 디지털 콘텐츠에 워터마크를 삽입하여 다수의 디바이스간 동기화가 가능하도록 함으로써 사용자가 하나의 디바이스로 실시간 방송 프로그램을 시청하고 있을 때 다른 디바이스에서 현재 시청 중인 프로그램에 대한 부가 서비스를 제공받을 수 있도록 제공하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 이를 구현하기 위한 시스템에 관한 것이다. The present invention relates to a method and system for synchronizing programs between multiple devices using a digital watermark. More particularly, the present invention relates to a method and system for synchronizing multiple devices by inserting a watermark into digital content to enable synchronization between a plurality of devices. The present invention relates to a multi-device program synchronization method using a digital watermark to provide additional services for a program currently being viewed by another device when viewing the present invention, and a system for implementing the same.
최근 N스크린 서비스가 활성화됨에 따라 IPTV 서비스에서도 멀티 디바이스를 이용한 N스크린 서비스에 한창 개발 중에 있다.Recently, as the N screen service is activated, the IPTV service is being developed in the N screen service using multiple devices.
이때, IPTV 서비스의 N스크린을 구현함에 있어서 해결해야 가장 큰 문제는 멀티 디바이스간 동기화이다.At this time, the biggest problem to be solved in implementing N screen of IPTV service is synchronization between multi-devices.
예를 들어, 셋탑박스와 연결되는 디바이스는 서버로부터 디지털 콘텐츠를 수신하여 표시할 수 있지만, 이와 별개로 구비되는 디바이스는 셋탑박스와 연결되는 디바이스와 연계성이 없다. 즉, 현재 시청 중인 프로그램이 무엇인지 알 수 있는 방법이 없다.For example, the device connected to the set-top box may receive and display digital content from a server, but the device provided separately from the device is not connected to the device connected to the set-top box. In other words, there is no way to know what program you are currently watching.
따라서, 본 발명은 각 멀티 디바이스가 지능적으로 현재 시청 중인 프로그램에 대하여 인지할 수 있도록 구현하여 동기화할 수 있는 방안을 제안한다. Accordingly, the present invention proposes a method for synchronizing and implementing each multi-device so as to be able to intelligently recognize the currently viewed program.
본 발명은 상기의 문제점을 해결하기 위해 창안된 것으로서, 디지털 콘텐츠에 워터마크를 삽입하여 다수의 디바이스간 동기화가 가능하도록 함으로써 사용자가 하나의 디바이스로 실시간 방송 프로그램을 시청하고 있을 때 다른 디바이스에서 현재 시청 중인 프로그램에 대한 부가 서비스를 제공받을 수 있도록 제공하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법 및 이를 구현하기 위한 시스템을 제공하는 데 그 목적이 있다. The present invention has been made to solve the above problems, by inserting a watermark in the digital content to enable synchronization between multiple devices, when the user is currently watching a real-time broadcast program on one device, currently viewed on another device An object of the present invention is to provide a method for synchronizing programs between multiple devices using a digital watermark to provide an additional service for a program being executed, and a system for implementing the same.
이를 위하여 본 발명의 제1 측면에 따르면, 본 발명의 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템은, 디지털 워터마크가 삽입된 디지털 콘텐츠를 수신하여 화면에 재생하는 제1 디바이스; 상기 제1 디바이스에서 재생되는 디지털 콘텐츠로부터 오디오 신호를 수신하여 상기 오디오 신호에 삽입된 디지털 워터마크를 추출하는 적어도 하나 이상의 디바이스; 및 상기 적어도 하나 이상의 디바이스로부터 추출한 디지털 워터마크를 수신하면 기저장된 데이터로부터 상기 디지털 워터마크와 매칭되어 있는 프로그램명 또는 관련 부가 정보를 조회하여 상기 적어도 하나 이상의 디바이스로 제공하는 워터마크 관리서버를 포함하는 것을 특징으로 한다.To this end, according to a first aspect of the present invention, a system for implementing multi-device synchronization using a digital watermark of the present invention, the first device for receiving and reproducing digital content with a digital watermark embedded on the screen; At least one device that receives an audio signal from digital content reproduced in the first device and extracts a digital watermark embedded in the audio signal; And a watermark management server that, upon receiving the digital watermark extracted from the at least one device, inquires a program name or related additional information matching the digital watermark from previously stored data and provides the at least one device to the at least one device. It is characterized by.
본 발명의 제2 측면에 따르면, 본 발명의 멀티 디바이스간 프로그램 동기화 방법은, 다수의 디바이스를 구비한 N스크린 서비스에서의 프로그램 동기화 방법으로서, 상기 다수의 디바이스 중 제1 디바이스가 디지털 워터마크가 삽입된 디지털 콘텐츠를 수신하여 화면에 재생하는 단계; 상기 다수의 디바이스 중 다른 디바이스가 상기 제1 디바이스에서 재생되는 디지털 콘텐츠로부터 오디오 신호를 내장 마이크로 수신하는 단계; 상기 다른 디바이스가 수신한 오디오 신호를 분석하여 상기 오디오 신호에 삽입된 디지털 워터마크를 추출하는 단계; 상기 다른 디바이스가 추출한 디지털 워터마크의 정보를 워터마크 관리서버로 전송하고, 상기 워터마크 관리서버로부터 상기 추출한 디지털 워터마크와 매칭되어 있는 프로그램명 또는 관련 부가 정보를 제공받는 단계; 상기 다른 디바이스가 상기 워터마크 관리서버로부터 제공받은 프로그램명 또는 관련 부가 정보를 화면에 표시하는 단계를 포함하는 것을 특징으로 한다. According to a second aspect of the present invention, a program synchronization method between multi-devices of the present invention is a program synchronization method in an N-screen service having a plurality of devices, wherein a digital watermark is inserted into a first device of the plurality of devices. Receiving the digital content and playing the same on the screen; Receiving, by another of the plurality of devices, an audio signal from the digital content reproduced in the first device with a built-in microphone; Analyzing the audio signal received by the other device and extracting a digital watermark embedded in the audio signal; Transmitting information of the digital watermark extracted by the other device to a watermark management server, and receiving a program name or related additional information matching the extracted digital watermark from the watermark management server; And displaying, by the other device, a program name or related additional information provided from the watermark management server on the screen.
본 발명에 따르면, 오디오 워터마크의 타임 코드를 이용하여 디지털 콘텐츠와 매칭하기 때문에 현재 시청하고 있는 시점과 관련된 부가 정보 또는 부가 서비스를 실시간으로 제공할 수 있는 효과가 있다.According to the present invention, since the time code of the audio watermark is used to match the digital content, additional information or additional service related to the current viewing point may be provided in real time.
또한, 하나의 디바이스로 실시간 방송 프로그램을 시청하고 있을 때 다른 디바이스에서 현재 시청 중인 프로그램을 확인하여 프로그램에 대한 부가 정보 또는 부가 서비스를 제공받을 수 있으므로 N스크린의 서비스 구현이 가능한 효과가 있다. In addition, when viewing a real-time broadcast program with one device, the N-screen service can be implemented because additional information or additional service for the program can be provided by checking a program currently being viewed by another device.
이로 인하여, 사용자는 현재 시청 중인 프로그램을 수동으로 입력하거나 별도의 애플리케이션을 검색하여 설치할 필요 없이 멀티 디바이스를 통한 편리한 서비스를 받을 수 있는 효과를 제공한다. Thus, the user can receive a convenient service through the multi-device without having to manually enter a program currently being viewed or search for and install a separate application.
도 1은 본 발명에 따른 멀티 디바이스간 동기화 시스템의 망 구성을 나타낸 도면이다.
도 2는 본 발명에 따른 멀티 디바이스간 동기화를 통해 서비스를 구현하는 예를 보인 도면이다.
도 3은 본 발명에 따른 멀티 디바이스간 동기화 시스템을 구현하기 위한 워터마크 관리 서버의 세부 구성을 나타낸 도면이다.
도 4는 본 발명에 따른 멀티 디바이스간 동기화 방법을 나타낸 흐름도이다. 1 is a diagram illustrating a network configuration of a multi-device synchronization system according to the present invention.
2 is a diagram illustrating an example of implementing a service through synchronization between multiple devices according to the present invention.
3 is a diagram illustrating a detailed configuration of a watermark management server for implementing a multi-device synchronization system according to the present invention.
4 is a flowchart illustrating a method for synchronizing between multiple devices according to the present invention.
이하, 첨부된 도면을 참조하여 본 발명에 따른 실시 예를 상세하게 설명한다. 본 발명의 구성 및 그에 따른 작용 효과는 이하의 상세한 설명을 통해 명확하게 이해될 것이다. 본 발명의 상세한 설명에 앞서, 동일한 구성요소에 대해서는 다른 도면 상에 표시되더라도 가능한 동일한 부호로 표시하며, 공지된 구성에 대해서는 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 구체적인 설명은 생략하기로 함에 유의한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings. The configuration of the present invention and the operation and effect thereof will be clearly understood through the following detailed description. Before describing the present invention in detail, the same components are denoted by the same reference symbols as possible even if they are displayed on different drawings. In the case where it is judged that the gist of the present invention may be blurred to a known configuration, do.
본 발명은 IPTV 서비스에서 제공하는 디지털 콘텐츠에 디지털 워터마크를 삽입하여 제공함으로써 하나의 디바이스를 통해 사용자가 원하는 디지털 콘텐츠를 재생하면 다른 디바이스에서 디지털 콘텐츠와 함께 재생되는 디지털 워터마크를 수신하여 현재 재생 중인 프로그램에 대하여 동기화가 가능한 구성을 제시하고자 한다. The present invention inserts a digital watermark into the digital content provided by the IPTV service, and when the user plays the desired digital content through one device, the other device receives the digital watermark played along with the digital content and is currently playing the content. We will present a configuration that can be synchronized to the program.
여기서, 디지털 워터마크(digital watermark)란 어떤 파일에 관한 저작권 정보를 식별할 수 있도록 디지털 이미지나 오디오 및 비디오 파일에 삽입한 비트 패턴을 말한다. 특히, 오디오 파일에 삽입한 워터마크를 오디오 워터마크라 부르기도 한다. Here, a digital watermark refers to a bit pattern inserted into a digital image or an audio and video file so that copyright information about a certain file can be identified. In particular, a watermark inserted into an audio file is also called an audio watermark.
워터마크를 삽입하는 기술은 기본적으로 원 데이터에 인간의 청각 시스템으로 인식하지 못할 정도의 작은 신호(정보)를 추가하는 것으로, 디지털 신호의 전체 주파수 스펙트럼을 커버하는 스프레드 스펙트럼 신호를 원 디지털 신호에 부가하거나, 스프레드 스펙트럼 신호로 변조된 하나 이상의 캐리어를 원 오디오 신호에 삽입하는 방법을 이용한다. The technique of embedding a watermark basically adds a small signal (information) to the original digital data that cannot be recognized by the human auditory system, and adds a spread spectrum signal covering the entire frequency spectrum of the digital signal to the original digital signal. Or inserting one or more carriers modulated into a spread spectrum signal into the original audio signal.
본 발명에서도 상기의 방법을 이용하여 디지털 콘텐츠의 오디오 신호에 워터마크를 삽입하지만, 이 방법에 한정되는 것은 아니다.The present invention also embeds a watermark in the audio signal of the digital content using the above method, but is not limited to this method.
이하, 본 발명의 구성을 구체적으로 살펴본다. Hereinafter, the configuration of the present invention in detail.
도 1은 본 발명에 따른 멀티 디바이스간 동기화 시스템의 망 구성을 나타낸 도면이다. 1 is a diagram illustrating a network configuration of a multi-device synchronization system according to the present invention.
본 발명의 시스템은 크게 IPTV 서버부(100), N스크린(300), 워터마크 관리서버(400)를 포함하여 구현된다. The system of the present invention is largely implemented by including an
IPTV 서버부(100)는 도시한 바와 같이 실시간 방송 콘텐츠를 제공하는 실시간 방송 제공부(110)와, VOD 콘텐츠를 제공하는 VOD 제공부(120), 및 실시간 방송 제공부(110)와 VOD 제공부(120)에서 제공하는 실시간 방송 콘텐츠 및 VOD 콘텐츠(이하, 디지털 콘텐츠라고 통칭함)의 오디오 신호에 워터마크를 삽입하는 워터마크 삽입부(130)를 포함한다. As shown, the
이때, 워터마크 삽입부(130)는 디지털 콘텐츠를 재생할 때 재생되는 시점과 동기화하여 워터마크가 출력되도록 오디오 신호의 시간 정보를 기준으로 워터마크와 매칭시킨다. At this time, the
이를 위해 본 발명의 워터마크는 워터마크를 식별할 수 있는 고유 코드와, 시간 정보를 담은 타임 코드를 포함할 수 있다. 따라서, 각 워터마크에 포함되어 있는 타임 정보와 오디오 신호의 시간 정보를 매칭하여 삽입한다. 각 워터마크의 고유 코드 및 타임 코드는 워터마크 관리 서버(400)를 통해 부여된다.To this end, the watermark of the present invention may include a unique code for identifying the watermark and a time code containing time information. Therefore, time information included in each watermark and time information of the audio signal are matched and inserted. The unique code and time code of each watermark are given through the
또한, 워터마크 삽입부(130)는 IPTV 서버부(110)에서 제공할 수 있는 VOD 콘텐츠에 대해서만 적용할 수 있다. 이 경우, 실시간 방송 콘텐츠는 각 방송사가 자체적으로 워터마크를 삽입하여 송출할 수 있다. In addition, the
통신망(200)은 상기의 IPTV 서버부(100)와 N스크린(300)간 또는 워터마크 관리 서버(400)와 N스크린(300)간을 연결하여 상호간 데이터를 송수신한다. 즉, N스크린(300)로부터 시청하고자 하는 디지털 콘텐츠의 요청 메시지를 수신하면 이를 IPTV 서버부(100)로 전달하고, IPTV 서버부(100)로부터 송출되는 디지털 콘텐츠를 해당 N스크린(300)으로 전달한다. 또, N스크린(300)과 워터마크 관리 서버(400)간을 연결하여 N스크린(300)으로부터 수신한 오디오 워터마크를 워터마크 관리 서버(400)로 전달하고, 워터마크 관리 서버(400)로부터 수신한 데이터는 오디오 워터마크를 전송한 해당 N스크린(300)으로 전달한다.The
이러한 통신망(200)은 일반적으로 유선 인터넷망일 수 있지만, N스크린(300)이 휴대폰, 스마트폰인 경우 이동 통신망(CDMA, W-CDMA 등)을 통해 연결되는 무선 데이터망(인터넷망, IMS 등), 위성통신망, 또는 Wi-Fi들의 근거리 통신을 통해 연결되는 인터넷망 등을 포함할 수 있다. The
N스크린(300)은 제1 내지 제N 디바이스(310, 320, 330)와 같이 다수 개로 구비된다. The
여기서 제1 내지 제N 디바이스(310, 320, 330)는 IP기반의 셋탑박스와 연결되어 화면에 표시하는 TV 수신기, 또는 IP기반의 셋탑박스를 내장한 TV 수신기, 컴퓨터, 노트북, 태블릿 PC 등이 될 수 있다. 또, 최근에는 휴대폰, 스마트폰에까지 IPTV 서비스를 제공하게 됨에 따라 휴대폰, 스마트폰 등이 포함될 수 있다. The first to
각 디바이스(310, 320, 330)는 통신망(200)을 통해 IPTV 서버부(100)에 접속하여 IPTV 서버부(100)로부터 디지털 콘텐츠를 제공받는다. 또한, 각 디바이스(310, 320, 330)는 인접하고 있는 디바이스로부터 디지털 콘텐츠의 오디오 워터마크를 수신하여 수신한 워터마크와 매칭되는 부가 정보를 제공받는다.Each
이러한 각 디바이스(310, 320, 330)는 기본적으로 내부에 도 2에 도시한 바와 같이 디지털 콘텐츠에서 오디오 신호를 수신할 수 있는 오디오 신호 수신부와, 오디오 신호 수신부에 수신한 오디오 신호로부터 워터마크를 추출하여 판독하는 워터마크 추출부가 포함되어야 한다. 오디오 신호 수신부는 디바이스로부터 재생되는 오디오 신호를 수신하는 마이크를 포함한다.Each of the
따라서, 도 2에 도시한 바와 같이 제1 디바이스(310)가 IP기반의 셋탑박스와 연결되어 화면에 표시하는 TV 수신기이고, 제2 디바이스(320)는 제1 디바이스(310)와 인접하고 있는 태블릿 PC(예컨대, ipad)라고 가정한다면, 제1 디바이스(310)는 IPTV 서버부(도 1의 100)로부터 원하는 디지털 콘텐츠 '광개토대왕'을 수신하여 화면에 재생할 수 있다. 이때, 제2 디바이스(320)는 제1 디바이스(310)에서 재생하는 오디오 신호를 내장 마이크로 수신하여 분석을 통해 오디오 신호로부터 워터마크를 추출하고 판독한다. 그리고, 제2 디바이스(320)는 판독한 워터마크의 고유 코드를 워터마크 관리 서버(400)로 전달하여 고유 코드에 대한 관련 부가 정보를 요청하고, 워터마크 관리서버(400)는 상기 요청과 함께 제2 디바이스(320)로부터 전달받은 고유 코드 및 타임 코드를 확인하여 현재 제1 디바이스(310)에서 시청(재생) 중인 디지털 콘텐츠에 대한 프로그램명(광개토대왕), 관련 부가 정보(역사적 인물, 배경 소개, 광개토대왕 인기 투표 등)를 제2 디바이스(320)로 제공한다. Therefore, as shown in FIG. 2, the
따라서, 사용자는 제1 디바이스(310)를 통해 원하는 디지털 콘텐츠를 시청하면서 제2 디바이스(320)에서는 현재 시청하고 있는 디지털 콘텐츠에 대한 관련 부가 정보를 실시간으로 제공받을 수 있다. 따라서, 기존에는 하나의 디바이스에 디지털 콘텐츠와 이와 관련한 부가 정보를 모두 제공받았지만, 본 발명은 디지털 콘텐츠를 재생하는 디바이스와 구별하여 다른 디바이스에서 부가 정보를 제공받을 수 있게 된다. Accordingly, the user may receive the desired additional information about the digital content currently being viewed in real time from the
또한, 부가 정보가 여러 개인 경우 디바이스를 구별하여 표시가 가능할 것이다. 예를 들면, 제1 디바이스(310)는 디지털 콘텐츠를 제공하고, 제2 디바이스(320)는 제1 디바이스(310)에서 재생되고 있는 디지털 콘텐츠의 부가 정보 1, 제3 디바이스는 제1 디바이스(310)에서 재생되고 있는 디지털 콘텐츠의 부가 정보 2를 제공할 수 있을 것이다. 이는 제2 및 제3 디바이스에 제1 디바이스(310)에서 재생되고 있는 디지털 콘텐츠의 부가 정보 1, 2를 모두 제공하되 각 디바이스에서 선택한 부가 정보에 대해서만 표시 또는 재생할 수 있도록 함으로써 쉽게 구현이 가능하다. In addition, when there are several additional information, devices may be distinguished and displayed. For example, the
또한, 워터마크 관리서버(400)가 제2 디바이스(320)로 현재 시청 중인 디지털 콘텐츠에 대한 프로그램명을 먼저 제2 디바이스(320)로 제공하고 이차적으로 프로그램에 대한 관련 부가 정보를 제공하도록 구현함으로써, 사용자가 관련 부가 정보를 제공받기 전에 프로그램 이름을 먼저 확인하고 관련 부가 정보에 진입할 수 있도록 할 수 있다. In addition, the
이러한 구현들은 각 디바이스에 오디오 신호 수신부와 워터마크 추출부와 연동하여 실행하는 응용 프로그램 또는 애플리케이션을 통해 구현이 가능하다. 예를 들어, 제1 디바이스에서 디지털 콘텐츠를 재생하는 도중 제2 디바이스에서 TV 애플리케이션을 실행하면 제1 디바이스에서 재생되는 오디오 신호의 수신 및 판독이 가능하고 기 설정한 제공 방식에 따라 프로그래명 또는 관련 부가 정보를 수신하여 제공할 수 있다. Such implementations may be implemented through an application program or an application executed in conjunction with an audio signal receiver and a watermark extractor in each device. For example, running a TV application on a second device while playing digital content on the first device enables the reception and reading of audio signals played back on the first device, and the program name or associated Additional information may be received and provided.
본 발명에서 관련 부가 정보는 프로그램과 연관있는 뉴스, 기사, 배경 소개, 인물 소개, 노출 상품 소개 등에 관한 정보이거나, 프로모션, 인기 투표, 관련 게임, 광고, 구매하기 등과 같이 부가적으로 제공하는 서비스 정보일 수 있다. 특히, '광개토대왕'과 같이 역사와 관련있는 프로그램의 경우 역사적 정보, 박물관 행사 정보 등을 포함할 수 있다. In the present invention, the relevant additional information is information about news, articles, background introductions, person introductions, exposure product introductions, and the like related to the program, or service information additionally provided such as promotions, popularity votes, related games, advertisements, and purchases. Can be. In particular, in the case of programs related to history, such as 'Gwanggaeto Great King', it may include historical information and museum event information.
도 3은 본 발명에 따른 멀티 디바이스간 동기화 시스템을 구현하기 위한 워터마크 관리 서버의 세부 구성을 나타낸 도면이다.3 is a diagram illustrating a detailed configuration of a watermark management server for implementing a multi-device synchronization system according to the present invention.
본 발명에 따른 워터마크 관리서버(400)는 워터마크 생성부(410), 프로그램 정보 매칭부(420), 인터페이스부(430)를 포함한다. The
인터페이스부(430)는 워터마크 관리 서버(400)에서 생성한 워터마크를 IPTV 서버부(도 1의 100)의 워터마크 삽입부(130)로 제공하기 위해 인터페이스를 수행한다. 또, N스크린(도 1의 300)의 디바이스와 연계하여 각 디바이스로부터 워터마크의 판독 정보를 수신하고, 수신한 판독 정보와 매칭되는 프로그램명 또는 부가 정보를 다시 디바이스로 전송하는 등의 인터페이스를 수행한다. The
워터마크 생성부(410)는 각 디지털 콘텐츠의 오디오 신호에 대하여 삽입할 워터마크를 생성한다. 생성시 워터마크의 고유 코드 및 타임 코드를 포함하여 생성한다. 고유 코드는 워터마크를 식별할 수 있는 코드이고, 타임 코드는 디지털 콘텐츠의 오디오 신호와 매칭하기 위해 필요한 시간 정보에 관한 코드이다. The
프로그램 정보 매칭부(420)는 디지털 콘텐츠와 연관있는 프로그램 정보나 관련 부가 정보를 저장해 두고 N스크린의 디바이스로부터 워터마크가 수신되면 수신된 워터마크에 해당하는 프로그램 정보 또는 관련 부가 정보를 제공하도록 워터마크의 고유 코드와 매칭시켜 제공한다. 프로그램 정보는 앞서 프로그램명으로 설명하였지만, 프로그램명뿐만 아니라 프로그램에 관한 방영 일시, 프로그램 주요 특성 정보(예컨대, 주말 드라마 8시~9시) 등을 포함할 수도 있다.The program
이렇게 구성되는 본 발명의 워터마크 관리서버(400)는 워터마크 생성부(410)에서 생성한 정보(고유 코드, 타임 코드 포함)를 워터마크 삽입부(130)로 제공하여 타임 코드를 통해 오디오 신호의 시간 정보와 매칭시키고, N스크린의 디바이스로부터 워터마크의 고유코드가 수신되면 프로그램 정보 매칭부(420)에서 기저장된 데이터로부터 고유코드와 매칭되어 있는 프로그램 정보 또는 관련 부가 정보를 조회하여 인터페이스부(430)를 통해 다시 N스크린의 디바이스로 제공한다. The
도 4는 본 발명에 따른 멀티 디바이스간 동기화 방법을 나타낸 흐름도이다. 4 is a flowchart illustrating a method for synchronizing between multiple devices according to the present invention.
도 4에서는 설명의 편의상 최소 단위인 제1 디바이스(310)와 제2 디바이스(320)간에 사용자 시청 프로그램을 동기화하는 방법에 대하여 도시하고 있지만, 이에 한정되지 않고 N스크린 서비스에 부합하여 다수 개의 디바이스를 적용할 수 있음은 물론이다. Although FIG. 4 illustrates a method of synchronizing a user viewing program between the
먼저 제1 디바이스(310)는 IPTV 서버부에 접속하여 시청하고자 원하는 디지털 콘텐츠를 요청하고 이의 요청에 따라 IPTV 서버부로부터 디지털 워터마크가 삽입된 디지털 콘텐츠를 수신하여 재생한다(S100).First, the
제1 디바이스(310)는 재생시 오디오 신호를 출력과 함께 오디오 신호에 삽입된 디지털 워터마크를 출력하게 된다(S110). The
그러면, 제2 디바이스(320)는 사용자의 요청에 의해 TV 애플리케이션이 실행되고, 이 TV 애플리케이션을 통해 제1 디바이스(310)로부터 출력되는 오디오 신호를 내장 마이크(micro)로 수신한다(S120).Then, the
이후, 제2 디바이스(320)는 수신한 오디오 신호로부터 디지털 워터마크를 추출하고 판독한다(S130).Thereafter, the
이후, 제2 디바이스(320)가 판독한 데이터 즉, 워터마크의 고유 코드를 워터마크 관리서버(400)로 전송하고, 워터마크 관리서버(400)로부터 워터마크에 대응하는 프로그램명 또는 관련 부가 정보를 제공받는다(S140, S150).Thereafter, the data read by the
제2 디바이스(320)는 워터마크 관리서버(400)로부터 제공받은 프로그램명 또는 관련 부가 정보를 표시하거나 재생한다.The
상기의 과정에서 부가 정보가 여러 개인 경우 디바이스를 구별하여 제공하는 것이 가능하다. 이 경우, 제1 디바이스(310) 및 제2 디바이스(320)뿐만 아니라 제3 내지 제4 디바이스까지 다수 개를 적용할 수 있다. In the above process, when there is a plurality of additional information, it is possible to distinguish and provide a device. In this case, a plurality of third to fourth devices as well as the
이상에서 설명하지 않은 프로그램명 또는 관련 부가 정보의 구체적 제공 방법은 앞서 설명한 바와 동일하다. The method of providing a program name or related additional information not described above is the same as described above.
이상의 설명은 본 발명을 예시적으로 설명한 것에 불과하며, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 본 발명의 기술적 사상에서 벗어나지 않는 범위에서 다양한 변형이 가능할 것이다. 따라서 본 발명의 명세서에 개시된 실시 예들은 본 발명을 한정하는 것이 아니다. 본 발명의 범위는 아래의 특허청구범위에 의해 해석되어야 하며, 그와 균등한 범위 내에 있는 모든 기술도 본 발명의 범위에 포함되는 것으로 해석해야 할 것이다.The foregoing description is merely illustrative of the present invention, and various modifications may be made by those skilled in the art without departing from the spirit of the present invention. Accordingly, the embodiments disclosed in the specification of the present invention are not intended to limit the present invention. The scope of the present invention should be construed according to the following claims, and all the techniques within the scope of equivalents should be construed as being included in the scope of the present invention.
100: IPTV 서버부 110: 실시간 방송 제공부
120: VOD 제공부 130: 워터마크 삽입부
200: 통신망 300: N스크린
310, 320, 330: 제1, 2, N 디바이스
400: 워터마크 관리서버 410: 워터마크 생성부
420: 프로그램 정보 매칭부 430: 인터페이스부100: IPTV server unit 110: real-time broadcast provider
120: VOD providing unit 130: watermark insertion unit
200: network 300: N screen
310, 320, 330: first, second, N device
400: watermark management server 410: watermark generator
420: program information matching unit 430: interface unit
Claims (11)
상기 제1 디바이스에서 재생되는 디지털 콘텐츠로부터 오디오 신호를 수신하여 상기 오디오 신호에 삽입된 디지털 워터마크를 추출하는 상기 제1 디바이스를 제외한 나머지 적어도 하나 이상의 디바이스; 및
상기 제1 디바이스를 제외한 나머지 적어도 하나 이상의 디바이스로부터 추출한 디지털 워터마크를 수신하면 기저장된 데이터로부터 상기 디지털 워터마크와 매칭되어 있는 프로그램명 또는 관련 부가 정보를 조회하여 상기 적어도 하나 이상의 디바이스로 제공하는 워터마크 관리서버
를 포함하는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.A first device for receiving and reproducing digital content with a digital watermark embedded therein;
At least one device other than the first device that receives an audio signal from digital content reproduced in the first device and extracts a digital watermark embedded in the audio signal; And
When receiving a digital watermark extracted from at least one device other than the first device, a watermark provided to the at least one device by inquiring a program name or related additional information matching the digital watermark from previously stored data. Management Server
System for implementing synchronization between the multi-device using a digital watermark comprising a.
상기 디지털 워터마크는
상기 디지털 워터마크를 식별할 수 있는 고유 코드와, 상기 디지털 콘텐츠의 오디오 신호와 매칭하기 위한 타임 코드를 포함하는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.The method of claim 1,
The digital watermark is
And a unique code for identifying the digital watermark, and a time code for matching with an audio signal of the digital content.
상기 적어도 하나 이상의 디바이스는,
추출한 디지털 워터마크를 판독하고 판독한 상기 디지털 워터마크의 고유 코드를 상기 워터마크 관리서버로 전송하여 상기 고유 코드에 대한 관련 부가 정보를 요청하는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.3. The method of claim 2,
The at least one device,
Read the extracted digital watermark and transmit the unique code of the read digital watermark to the watermark management server to request related additional information on the unique code. System for implementing.
상기 적어도 하나 이상의 디바이스는,
상기 워터마크 관리서버로부터 제공받은 관련 부가 정보에서 원하는 부가 정보를 선택하여 표시함으로써 디바이스마다 관련 부가 정보를 구분하여 표시 가능한 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.The method of claim 1,
The at least one device,
And selecting and displaying desired additional information from the relevant additional information provided from the watermark management server. The system may be configured to display related additional information for each device.
상기 적어도 하나 이상의 디바이스는,
상기 워터마크 관리서버로부터 먼저 상기 디지털 워터마크와 매칭되어 있는 프로그램명을 제공받고, 프로그램명 확인 후 상기 디지털 워터마크와 매칭되어 있는 관련 부가 정보를 제공받는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.The method of claim 1,
The at least one device,
First, a program name matching the digital watermark is provided from the watermark management server, and after confirmation of the program name, related additional information matching the digital watermark is provided. System for implementing device-to-device synchronization.
상기 디지털 콘텐츠의 오디오 신호에 디지털 워터마크를 삽입하여 제공하는 IPTV 서버부를 더 포함하는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.The method of claim 1,
And an IPTV server unit for inserting and providing a digital watermark in the audio signal of the digital content.
상기 워터마크 관리서버는
상기 디지털 콘텐츠의 오디오 신호에 삽입할 디지털 워터마크를 생성하여 상기 IPTV 서버부로 제공하는 워터마크 생성부와,
상기 워터마크 생성부를 통해 생성한 디지털 워터마크별로 프로그래명 또는 관련 부가 정보를 매칭하여 저장한 프로그램 정보 매칭부
를 포함하는 것을 특징으로 하는 디지털 워터마크를 이용하여 멀티 디바이스간 동기화를 구현하기 위한 시스템.The method according to claim 6,
The watermark management server
A watermark generator for generating a digital watermark to be inserted into an audio signal of the digital content and providing the digital watermark to the IPTV server unit;
Program information matching unit for storing a program name or related additional information for each digital watermark generated by the watermark generator
System for implementing synchronization between the multi-device using a digital watermark comprising a.
상기 다수의 디바이스 중 제1 디바이스가 디지털 워터마크가 삽입된 디지털 콘텐츠를 수신하여 화면에 재생하는 단계;
상기 다수의 디바이스 중 상기 제1 디바이스를 제외한 나머지 다른 디바이스가 상기 제1 디바이스에서 재생되는 디지털 콘텐츠로부터 오디오 신호를 내장 마이크로 수신하는 단계;
상기 다른 디바이스가 수신한 오디오 신호를 분석하여 상기 오디오 신호에 삽입된 디지털 워터마크를 추출하는 단계;
상기 다른 디바이스가 추출한 디지털 워터마크의 정보를 워터마크 관리서버로 전송하고, 상기 워터마크 관리서버로부터 상기 추출한 디지털 워터마크와 매칭되어 있는 프로그램명 또는 관련 부가 정보를 제공받는 단계;
상기 다른 디바이스가 상기 워터마크 관리서버로부터 제공받은 프로그램명 또는 관련 부가 정보를 화면에 표시하는 단계
를 포함하는 것을 특징으로 하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법. A program synchronization method in an N-screen service having a plurality of devices,
Receiving, by a first device of the plurality of devices, digital content having a digital watermark embedded therein and displaying the digital content on a screen;
Receiving, by a built-in microphone, an audio signal from digital content reproduced by the first device, other than the first device among the plurality of devices;
Analyzing the audio signal received by the other device and extracting a digital watermark embedded in the audio signal;
Transmitting information of the digital watermark extracted by the other device to a watermark management server, and receiving a program name or related additional information matching the extracted digital watermark from the watermark management server;
Displaying, by the other device, a program name or related additional information provided from the watermark management server on a screen;
Program synchronization method between the multi-device using a digital watermark comprising a.
상기 추출한 디지털 워터마크의 정보는 상기 디지털 워터마크에 포함되어 있는 고유 코드인 것을 특징으로 하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법.The method of claim 8,
And the extracted digital watermark information is a unique code included in the digital watermark.
상기 다른 디바이스가 상기 워터마크 관리서버로부터 제공받은 프로그램명 또는 관련 부가 정보를 화면에 표시하는 단계는,
상기 다른 디바이스가 상기 워터마크 관리서버로부터 제공받은 관련 부가 정보에서 원하는 부가 정보를 선택하여 표시함으로써 디바이스마다 관련 부가 정보를 구분하여 표시 가능한 것을 특징으로 하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법.The method of claim 8,
The step of displaying, by the other device, the program name or related additional information provided from the watermark management server on the screen,
And selecting and displaying desired additional information from the related additional information provided from the watermark management server, so that the other device can classify and display the relevant additional information for each device.
상기 다른 디바이스가 상기 워터마크 관리서버로부터 제공받은 프로그램명 또는 관련 부가 정보를 화면에 표시하는 단계는,
상기 다른 디바이스가 상기 워터마크 관리서버로부터 먼저 상기 디지털 워터마크와 매칭되어 있는 프로그램명을 제공받고, 프로그래명 확인 후 상기 디지털 워터마크와 매칭되어 있는 관련 부가 정보를 제공받는 것을 특징으로 하는 디지털 워터마크를 이용한 멀티 디바이스간 프로그램 동기화 방법.The method of claim 8,
The step of displaying, by the other device, the program name or related additional information provided from the watermark management server on the screen,
The other device is first provided with a program name matching the digital watermark from the watermark management server, and after receiving a program name, related additional information matching the digital watermark is provided. Program synchronization method between multiple devices using a mark.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110143039A KR101358807B1 (en) | 2011-12-27 | 2011-12-27 | Method for synchronizing program between multi-device using digital watermark and system for implementing the same |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110143039A KR101358807B1 (en) | 2011-12-27 | 2011-12-27 | Method for synchronizing program between multi-device using digital watermark and system for implementing the same |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20130074922A KR20130074922A (en) | 2013-07-05 |
KR101358807B1 true KR101358807B1 (en) | 2014-02-10 |
Family
ID=48988895
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020110143039A KR101358807B1 (en) | 2011-12-27 | 2011-12-27 | Method for synchronizing program between multi-device using digital watermark and system for implementing the same |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101358807B1 (en) |
Families Citing this family (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10504200B2 (en) | 2014-03-13 | 2019-12-10 | Verance Corporation | Metadata acquisition using embedded watermarks |
CN106170988A (en) | 2014-03-13 | 2016-11-30 | 凡瑞斯公司 | The interactive content using embedded code obtains |
KR101686387B1 (en) * | 2014-05-02 | 2016-12-13 | 베란스 코오포레이션 | Metadata acquisition using embedded codes |
GB2526154B (en) * | 2014-05-16 | 2020-12-30 | Intrasonics Sarl | Broadcast media synchronisation system |
EP3183883A4 (en) | 2014-08-20 | 2018-03-28 | Verance Corporation | Watermark detection using a multiplicity of predicted patterns |
US9942602B2 (en) | 2014-11-25 | 2018-04-10 | Verance Corporation | Watermark detection and metadata delivery associated with a primary content |
US9769543B2 (en) | 2014-11-25 | 2017-09-19 | Verance Corporation | Enhanced metadata and content delivery using watermarks |
WO2016100916A1 (en) | 2014-12-18 | 2016-06-23 | Verance Corporation | Service signaling recovery for multimedia content using embedded watermarks |
KR102431440B1 (en) * | 2016-01-27 | 2022-08-11 | 주식회사 마크애니 | Broadcast signal recognition system and operating method thereof |
US11722741B2 (en) | 2021-02-08 | 2023-08-08 | Verance Corporation | System and method for tracking content timeline in the presence of playback rate changes |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100985190B1 (en) * | 2008-07-18 | 2010-10-05 | 주식회사 마크애니 | Method and System for Providing Information Using Watermark |
-
2011
- 2011-12-27 KR KR1020110143039A patent/KR101358807B1/en active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100985190B1 (en) * | 2008-07-18 | 2010-10-05 | 주식회사 마크애니 | Method and System for Providing Information Using Watermark |
Also Published As
Publication number | Publication date |
---|---|
KR20130074922A (en) | 2013-07-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101358807B1 (en) | Method for synchronizing program between multi-device using digital watermark and system for implementing the same | |
US20200221163A9 (en) | Method for receiving enhanced service and display apparatus thereof | |
US9197946B2 (en) | System and method for automatic content program discovery | |
KR102015991B1 (en) | A user device, a second screen system and a method for rendering second screen information on a second screen | |
US20130301392A1 (en) | Methods and apparatuses for communication of audio tokens | |
CN102193794B (en) | Link real-time media situation is to relevant application program and service | |
US20150002741A1 (en) | Video display device and control method thereof | |
JP2006005897A (en) | Terminal device, content distribution system, information output method, information output program | |
US20160309234A1 (en) | Method and system for displaying rebroadcast watermark | |
JP6283318B2 (en) | System for synchronizing content transmitted to a digital TV receiver with or without Internet access with a plurality of portable devices | |
US8863193B2 (en) | Information processing apparatus, broadcast receiving apparatus and information processing method | |
US9712583B2 (en) | Video display device and method of controlling the device | |
KR20130103931A (en) | Advance metadata provision augmented broadcasting apparatus and method | |
KR101737897B1 (en) | Providing real-time information system | |
KR102199568B1 (en) | Electric apparatus and operating method thereof | |
JP6254852B2 (en) | Broadcast and communication cooperation tactile sense presentation system, service server and program, and portable terminal | |
JP2014007702A (en) | Video receiver, video transmission/reception system and video reception method | |
KR20160061019A (en) | Video display apparatus and operating method thereof | |
JP6641047B2 (en) | Video receiving apparatus, video receiving method, video transmitting apparatus, and video transmitting method | |
KR20160055525A (en) | Video display apparatus and operating method thereof | |
CN103634625A (en) | Method and device for displaying program subtitles | |
JP5284529B1 (en) | Program receiving system and program | |
JP2004304306A (en) | Information exchanger, receiver and memory for av stream | |
US20120093259A1 (en) | Method and apparatus for transmitting content, method and apparatus for receiving content, and content service system | |
KR20130088558A (en) | Personalized augmented broadcasting apparatus and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
N231 | Notification of change of applicant | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170112 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20171213 Year of fee payment: 5 |
|
FPAY | Annual fee payment |
Payment date: 20191205 Year of fee payment: 7 |