KR101340340B1 - Audio contents interlocking data providing apparatus, system the same and method thereof - Google Patents

Audio contents interlocking data providing apparatus, system the same and method thereof Download PDF

Info

Publication number
KR101340340B1
KR101340340B1 KR1020120052093A KR20120052093A KR101340340B1 KR 101340340 B1 KR101340340 B1 KR 101340340B1 KR 1020120052093 A KR1020120052093 A KR 1020120052093A KR 20120052093 A KR20120052093 A KR 20120052093A KR 101340340 B1 KR101340340 B1 KR 101340340B1
Authority
KR
South Korea
Prior art keywords
user
audio
audio content
signal
data
Prior art date
Application number
KR1020120052093A
Other languages
Korean (ko)
Other versions
KR20130128211A (en
Inventor
주성환
Original Assignee
에스케이플래닛 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이플래닛 주식회사 filed Critical 에스케이플래닛 주식회사
Priority to KR1020120052093A priority Critical patent/KR101340340B1/en
Publication of KR20130128211A publication Critical patent/KR20130128211A/en
Application granted granted Critical
Publication of KR101340340B1 publication Critical patent/KR101340340B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/233Processing of audio elementary streams
    • H04N21/2335Processing of audio elementary streams involving reformatting operations of audio signals, e.g. by converting from one coding standard to another
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/266Channel or content management, e.g. generation and management of keys and entitlement messages in a conditional access system, merging a VOD unicast channel into a multicast channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals

Abstract

본 발명은 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법에 관한 것으로, 더욱 상세하게는 음향을 통해 사용자 제공 데이터를 전달하는 방식에서 오디오 콘텐츠와 데이터를 분리하여 입력한 후 동시적으로 음향 처리 및 출력함으로써 오디오 콘텐츠의 품질 열화가 없으며 사용자 컴퓨터, 스마트 TV와 같은 기존 구성에 용이하게 적용할 수 있도록 하여 구성 적용이 용이하며 범용성이 증대되며, 검출 주기의 설정, 주파수 이동 등의 조작을 통해 용이하게 사용자 제공 데이터를 추출함으로써 사용자 단말의 배터리 소모를 최소화하며 신호 처리의 부하를 최대한 경감하도록 하여 정보 제공을 위한 처리 속도가 매우 빨라지고, 재생하는 오디오 콘텐츠와 관련된 사용자 제공 데이터를 포함하는 데이터가 연동하도록 구성함으로써 현재 재생되는 콘텐츠와 관련된 광고 정보, 이벤트 정보와 같은 다양한 정보를 사용자 단말에서 용이하게 제공받도록 하여 사용자 편의성이 향상되며 광고 효율성이 높아지는 효과가 있다.The present invention relates to an apparatus for providing audio content linked data, a system, and a method of providing the same. More particularly, the audio content and data are separated and input in a manner of transmitting user-provided data through sound, and then simultaneously processed and processed. By outputting, there is no quality deterioration of audio contents, and it can be easily applied to existing configurations such as user computers and smart TVs, making it easy to apply the configuration, increasing its versatility, and easily by setting the detection cycle and moving the frequency. By extracting the user-provided data, it minimizes the battery consumption of the user terminal and reduces the signal processing load as much as possible, so that the processing speed for providing information is very fast, and the data including the user-provided data related to the audio content to be played back is interlocked. Play by playing By that serves to facilitate a variety of information such as advertising information, event information related to the content in the user terminal improves the user convenience and the effect increasing the line efficiency.

Description

오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법{AUDIO CONTENTS INTERLOCKING DATA PROVIDING APPARATUS, SYSTEM THE SAME AND METHOD THEREOF}Audio content interworking data providing device, system and providing method {AUDIO CONTENTS INTERLOCKING DATA PROVIDING APPARATUS, SYSTEM THE SAME AND METHOD THEREOF}

본 발명은 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법에 관한 것으로, 특히 오디오 콘텐츠와 사용자 제공 데이터를 분리 입력하고 동시적으로 음향 처리 및 출력하여 오디오를 통한 정보 제공시에 오디오 콘텐츠의 품질 열화가 없으며 기 구성에 용이하게 적용할 수 있도록 한 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법에 관한 것이다.
The present invention relates to an apparatus for providing audio content interworking data, a system, and a method for providing the same. In particular, the audio content and user-provided data are separately inputted and simultaneously processed and outputted to deteriorate the quality of the audio content when providing information through the audio. The present invention relates to an audio content interworking data providing apparatus, a system, and a providing method for easily applying to an existing configuration.

사람의 가청 영역을 벗어난 주파수 대역의 음향을 이용하여 소정의 정보를 사용자에게 제공하는 구성은 종래에도 있었다.Background Art [0002] There has conventionally been a configuration in which predetermined information is provided to a user by using a sound in a frequency band outside the human audible region.

도 1은 이러한 종래의 오디오를 이용한 정보 제공 시스템의 예시도로서, 매장(10)의 소정 위치에 비 가청 주파수 영역 대의 음향(7)을 발생시키는 별도의 오디오 비컨(Beacon) 발생 장치(20)를 설치하고, 소정 형식의 사용자 제공 데이터를 포함하는 오디오(7)를 상기 오디오 비컨 발생 장치(20)를 통해 출력한다.FIG. 1 is an exemplary diagram of an information providing system using such a conventional audio, and includes a separate audio beacon generating device 20 that generates sound 7 in a non-audible frequency band at a predetermined position of a store 10. And audio 7 including user-provided data in a predetermined format through the audio beacon generating device 20.

상기 오디오 비컨 발생 장치(20)는 와이파이(Wi-Fi)와 같은 무선 통신에 비해 그 도달 유효 거리가 매우 짧고 장애물을 통과하지 못하는 경우가 많아 문(11)을 열고 매장 내에 진입하는 사용자(1)에게만 도달하여 오디오에 포함되는 소정 형식의 사용자 제공 데이터가 식별되게 된다.Compared to wireless communication such as Wi-Fi, the audio beacon generating device 20 has a very short reach effective distance and often does not pass through obstacles. Only the user-provided data of the format included in the audio is identified.

일반적으로, 사용자가 소지한 사용자 단말(3)에 설치된 전용 애플리케이션(5)이 오디오 비컨 발생 장치(20)로부터 출력되는 오디오(7)를 입력받아 사용자 제공 데이터를 추출하고 이를 직접 사용자 단말(3)의 전용 애플리케이션(5)을 통해 표시하거나 또는 소정의 변환 절차를 통해 생성되는 정보를 표시하였다.In general, the dedicated application 5 installed in the user terminal 3 possessed by the user receives the audio 7 output from the audio beacon generating apparatus 20, extracts user-provided data, and directly extracts the user-provided data. The information generated through the dedicated application 5 or through a predetermined conversion procedure was displayed.

이러한 종래의 오디오를 이용한 정보 제공 시스템은 사용자의 매장(10) 진입을 용이하게 식별하고 진입한 사용자(1)에게만 소정 정보를 제공할 수 있어 매우 실용적이었으나, 별도의 오디오 비컨 발생 장치(20)를 매장에 설치해야만 구성할 수 있어 매장 운영자의 초기 부담 비용이 상당하였다.
This conventional information providing system using audio was very practical because it was easy to identify the user's entry into the store 10 and provided only predetermined information to the user 1 who entered. However, the separate audio beacon generator 20 It could only be configured at the store, so the initial burden of the store operator was significant.

이와 같은 종래의 오디오를 이용한 정보 제공 시스템의 다른 예로서, 오디오에 정보를 포함하여 사용자에게 전달하기 위해서, 콘텐츠에 비 가청 사용자 제공 데이터를 결합하거나, 다양한 인코딩 방식을 통해 사운드 코드 데이터를 포함하도록 오디오 신호를 생성하여 사용자 단말에 전송하는 방식도 있었다.As another example of such an information providing system using conventional audio, in order to include information in audio and to deliver it to a user, the audio may be combined with non-audible user-provided data in the content or include sound code data through various encoding schemes. There was also a method of generating a signal and transmitting it to the user terminal.

그러나, 이는 콘텐츠의 재생을 위한 코덱 방식에 따라 해당 내용이 손상될 가능성이 존재하거나, 데이터의 결합으로 인한 품질 열화의 가능성이 존재하였다.
However, there is a possibility that the content is damaged depending on the codec method for playing the content, or there is a possibility of quality deterioration due to the combination of data.

따라서, 오디오를 이용하여 정보를 제공하는 시스템에서 초기 구축 비용이 들지 않아 매장 운영자의 부담을 주지 않으면서도, 재생하는 콘텐츠의 품질 열화와 같은 현상 없이 용이하게 사용자에게 정보를 전달하여 실용성을 높인 오디오를 이용한 정보 제공 시스템이 요구된다.
Therefore, a system that provides information by using audio does not incur an initial construction cost and does not burden store managers, and provides audio with high practicality by easily delivering information to users without deterioration of the quality of content to be played. The information providing system used is required.

한국 공개 특허 제2008-0009573호Korean Unexamined Patent No. 2008-0009573

전술한 문제점을 개선하기 위한 본 발명 실시 예의 목적은 음향을 통해 사용자 제공 데이터를 전달하는 방식에서 오디오 콘텐츠와 사용자 제공 데이터를 분리하여 입력한 후 동시적으로 음향 처리 및 출력함으로써 오디오 콘텐츠의 품질 열화가 없으며 사용자 컴퓨터, 스마트 TV와 같은 기존 구성에 용이하게 적용할 수 있도록 한 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법을 제공하는 것이다.An object of the embodiment of the present invention for improving the above-mentioned problem is to separate the audio content and the user-provided data in a manner of transmitting the user-provided data through the sound, and then simultaneously process and output the audio content, thereby deteriorating the quality of the audio content. The present invention also provides an audio content interworking data providing apparatus, a system, and a providing method which can be easily applied to an existing configuration such as a user computer and a smart TV.

전술한 문제점을 개선하기 위한 본 발명 실시 예의 다른 목적은 검출 주기의 설정, 주파수 이동 등의 조작을 통해 용이하게 사용자 제공 데이터를 추출함으로써 사용자 단말의 배터리 소모를 최소화하며 신호 처리의 부하를 최대한 경감하도록 한 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법을 제공하는 것이다.Another object of the present invention for improving the above-described problem is to extract the user-provided data easily through the operation of setting the detection period, the frequency shift, etc. to minimize the battery consumption of the user terminal and to reduce the load of the signal processing as much as possible The present invention provides an audio content linked data providing apparatus, a system, and a providing method.

전술한 문제점을 개선하기 위한 본 발명 실시 예의 또 다른 목적은 재생하는 오디오 콘텐츠와 관련된 사용자 제공 데이터를 포함하는 데이터가 연동하도록 구성함으로써 현재 재생되는 콘텐츠와 관련된 광고 정보, 이벤트 정보와 같은 다양한 정보를 사용자 단말에서 용이하게 제공받도록 한 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법을 제공하는 것이다.
Another object of the present invention for improving the above-described problem is to configure the data including the user-provided data related to the audio content to be played back to link the user to various information such as advertisement information, event information related to the content currently being played The present invention provides an audio content linked data providing apparatus, a system, and a providing method which are easily provided by a terminal.

상기한 목적을 달성하기 위한 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치는 오디오 콘텐츠를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 재생부, 상기 재생부와 분리되어 구성되어 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 데이터 제공부, 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 음향 처리부 및 상기 음향 처리부의 처리 및 출력을 제어하는 제어부를 포함한다.In accordance with an aspect of the present invention, an apparatus for providing audio content interworking data according to an embodiment of the present invention includes a playback unit for receiving audio content and converting the audio content into an audio content signal in an audible frequency region, and being separated from the playback unit to provide a user. A data provider for receiving data separately from the audio content and converting the data into an audio signal in a non-audible frequency domain including the same in a predetermined format; processing the converted audio content signal and the converted audio signal simultaneously And a controller for controlling the output and the sound processor.

상기 사용자 제공 데이터는 상기 오디오 콘텐츠와 관련된 광고 정보, 이벤트 정보, 매장 정보, 공지 정보 중 하나이거나 또는 이 중 하나의 웹 링크 정보를 포함할 수 있다.The user-provided data may be one of advertisement information, event information, store information, announcement information related to the audio content, or may include web link information of one of them.

상기 데이터 제공부는 상기 사용자 제공 데이터를 상기 비 가청 주파수 영역 중 저주파 대역 및 고주파 대역에 혼합하여 송출되거나 또는 순차적으로 송출되도록 상기 오디오 신호로 변환하여 제공하는 것으로 도플러 효과에 의한 왜곡 가능성을 줄이는 것이 바람직하다.
Preferably, the data providing unit converts the user-provided data into a low frequency band and a high frequency band of the non-audible frequency region and converts the audio signal into the audio signal so as to be transmitted or sequentially transmitted. .

상기한 목적을 달성하기 위한 본 발명의 다른 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 시스템은 오디오 콘텐츠를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 재생부, 상기 재생부와 분리되어 구성되며, 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 데이터 제공부, 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 음향 처리부 및 상기 음향 처리부의 처리 및 출력을 제어하는 제어부를 구비하는 오디오 콘텐츠 연동 데이터 제공 장치 및 사용자 단말에 설치되며, 사용자 단말로 수집되는 음향에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 음향 입력부, 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 신호 검출부, 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 데이터 인식부 및 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 표시부를 구비하는 전용 애플리케이션을 포함한다.Audio content interworking data providing system according to another embodiment of the present invention for achieving the above object is a playback unit for receiving the audio content and converts it into an audio content signal in the audible frequency region, is configured separately from the playback unit, the user A data providing unit which receives provided data separately from the audio content and converts the provided data into an audio signal in a non-audible frequency domain including the same in a predetermined format, and simultaneously converts the converted audio content signal and the converted audio signal An audio content interworking data providing device and a user terminal installed in the audio content interworking data providing device including a sound processing unit for processing and outputting a control unit for controlling the processing and output of the sound processing unit, and inputting the audio content signal and the audio signal from the sound collected by the user terminal. Receiving sound input unit, the mouth A signal detector for detecting the audio signal in the non-audible frequency domain among the output signals, a data recognizer for recognizing user-provided data according to the preset format in the audio signal, and converting or directly converting the user-provided data according to a predetermined procedure. And a dedicated application having a display portion for providing to the user, including one or more of a visual representation or an audio representation.

상기 음향 입력부는 상기 기 설정된 형식에서 상기 사용자 제공 데이터의 반복 주기를 파악하고 이를 고려하여 상기 반복 주기에 적합한 소정 주기로 상기 오디오 신호를 수집하는 것이 바람직하다.The sound input unit may collect the audio signal at a predetermined period suitable for the repetition period in consideration of the repetition period of the user-provided data in the preset format.

상기 신호 검출부는 상기 오디오 신호가 상기 비 가청 주파수 영역에서 저주파 대역에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 고주파 대역까지 도달하도록 올리거나 또는 상기 오디오 신호가 상기 비 가청 주파수 영역에서 고주파 대역에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 저주파 대역까지 도달하도록 내려 상기 오디오 신호를 가청 주파수 영역에서 검출하도록 할 수 있다.The signal detector may raise the input signal as a whole so that the audio content signal reaches a high frequency band when the audio signal is in a low frequency band in the non-audible frequency region, or the audio signal may be increased in a high frequency band in the non-audible frequency region. If present, the input signal may be lowered to reach the low frequency band as a whole so as to detect the audio signal in the audible frequency domain.

상기 데이터 제공부는 저주파와 고주파를 동시 또는 순차 제공하며, 신호 검출부는 저주파와 고주파 신호를 기준으로 전송 데이터를 확인하거나 복원하여 사용자 단말의 이동에 따른 도플러 효과의 영향을 저감시키는 것이 바람직하다.The data providing unit provides the low frequency and the high frequency simultaneously or sequentially, and the signal detecting unit checks or restores the transmission data based on the low frequency and the high frequency signal to reduce the influence of the Doppler effect due to the movement of the user terminal.

상기 오디오 콘텐츠 연동 데이터 제공 시스템은 상기 사용자 제공 데이터를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치로 사용자 제공 데이터를 전송하는 연동 데이터 관리부 및 상기 사용자 제공 데이터와 관련된 콘텐츠를 관리하며 이를 상기 전용 애플리케이션으로 전송하는 표시 데이터 관리부를 구비하는 관리 서버를 더 포함할 수 있다.The audio content interworking data providing system manages the user-provided data and transmits the user-provided data to the audio content interlocking data providing apparatus, and manages the content related to the user-provided data and transmits the same to the dedicated application. The management server may further include a display data management unit.

상기 관리 서버는 상기 사용자 제공 데이터와 관련된 오디오 콘텐츠를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치로 상기 오디오 콘텐츠를 전송하는 콘텐츠 관리부를 더 구비할 수 있다.
The management server may further include a content management unit managing audio content related to the user provided data and transmitting the audio content to the audio content linked data providing device.

상기한 목적을 달성하기 위한 본 발명의 또 다른 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 방법은 오디오 콘텐츠 연동 데이터 제공 장치가 오디오 콘텐츠를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 단계, 상기 오디오 콘텐츠 연동 데이터 제공 장치가 상기 단계와 동시적으로 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 단계 및 상기 오디오 콘텐츠 연동 데이터 제공 장치가 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 단계를 포함한다.In accordance with another aspect of the present invention, there is provided a method for providing audio content interworking data, wherein an audio content interlocking data providing apparatus receives audio content and converts the audio content into an audio content signal in an audible frequency domain. And synchronizing data providing apparatus with the user-supplied data separately from the audio contents and converting the user-provided data into an audio signal in a non-audible frequency region including the same in a predetermined format. Processing and outputting the converted audio content signal and the converted audio signal which are simultaneously input.

상기 오디오 콘텐츠 연동 데이터 제공 방법은 전용 애플리케이션이 수집되는 음향에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 단계, 상기 전용 애플리케이션이 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 단계, 상기 전용 애플리케이션이 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 단계 및 상기 전용 애플리케이션이 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 단계를 더 포함한다.
The method for providing audio content interworking data may include receiving the audio content signal and an audio signal in a sound from which a dedicated application is collected, and detecting, by the dedicated application, the audio signal in an inaudible frequency region among the input signals. The application recognizing the user-provided data in the audio signal according to the preset format and the dedicated application converts the user-provided data according to a predetermined procedure or directly or includes one or more of a visual representation or an audio representation. It further comprises the step of providing to the user.

본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법은 음향을 통해 사용자 제공 데이터를 전달하는 방식에서 오디오 콘텐츠와 사용자 제공 데이터를 분리하여 입력한 후 동시적으로 음향 처리 및 출력함으로써 오디오 콘텐츠의 품질 열화가 없으며 사용자 컴퓨터, 스마트 TV와 같은 기존 구성에 용이하게 적용할 수 있도록 하여 구성 적용이 용이하며 범용성이 증대되는 효과가 있다.In accordance with another aspect of the present invention, an apparatus for providing audio content interworking data, a system, and a method of providing the same are provided after separating and inputting audio content and user-provided data in a manner of transmitting user-provided data through sound. As a result, there is no deterioration of the quality of the audio contents, and the present invention can be easily applied to an existing configuration such as a user computer or a smart TV.

본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법은 검출 주기의 설정, 주파수 이동 등의 조작을 통해 용이하게 사용자 제공 데이터를 추출함으로써 사용자 단말의 배터리 소모를 최소화하며 신호 처리의 부하를 최대한 경감하도록 하여 정보 제공을 위한 처리 속도가 매우 빨라지는 효과가 있다.Audio content interworking data providing apparatus, system and method according to an embodiment of the present invention to minimize the battery consumption of the user terminal by extracting the user-provided data through the operation of setting the detection period, the frequency shift, etc. signal processing By reducing the load as much as possible, the processing speed for providing information is very fast.

본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템 및 제공 방법은 재생하는 오디오 콘텐츠와 관련된 사용자 제공 데이터를 포함하는 데이터가 연동하도록 구성함으로써 현재 재생되는 콘텐츠와 관련된 광고 정보, 이벤트 정보와 같은 다양한 정보를 사용자 단말에서 용이하게 제공받도록 하여 사용자 편의성이 향상되며 광고 효율성이 높아지는 효과가 있다.
In accordance with another aspect of the present invention, an apparatus for providing audio content interworking data, a system, and a method of providing the same are provided. The user's convenience is improved and the advertisement efficiency is increased by allowing the user to easily receive the same various information from the user terminal.

도 1은 종래의 오디오를 이용한 정보 제공 시스템의 예시도.
도 2는 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 시스템의 예시도.
도 3은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 시스템의 구성도.
도 4는 본 발명의 일 실시 예에 따른 관리 서버의 블록도.
도 5는 본 발명의 일 실시 예에 따른 사용자 제공 데이터를 전달하는 예시도.
도 6은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 및 데이터의 주파수 대역의 예시도.
도 7 및 도 8은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 방법의 순서도.
1 is an illustration of an information providing system using a conventional audio.
2 is an exemplary diagram of an audio content linked data providing system according to an exemplary embodiment.
3 is a block diagram of an audio content linked data providing system according to an embodiment of the present invention.
4 is a block diagram of a management server according to an embodiment of the present invention.
5 is an exemplary diagram for delivering user-provided data according to an embodiment of the present invention.
6 is an exemplary diagram of a frequency band of audio content and data according to an embodiment of the present invention.
7 and 8 are flowcharts of a method for providing audio content interworking data according to an embodiment of the present invention.

상기한 바와 같은 본 발명을 첨부된 도면들과 실시 예들을 통해 상세히 설명하도록 한다.
BRIEF DESCRIPTION OF THE DRAWINGS The above and other objects, features and advantages of the invention will become more apparent from the following detailed description of the present invention when taken in conjunction with the accompanying drawings.

도 2는 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 시스템의 예시도다.2 is an exemplary diagram of an audio content linked data providing system according to an exemplary embodiment.

도 2를 참조하면, 상기 오디오 콘텐츠 연동 데이터 제공 시스템은 오디오 콘텐츠 및 사용자 제공 데이터를 별개로 입력받아 각각 가청 주파수 영역(8)과 비 가청 주파수 영역(7)의 음향으로 동시 출력하는 오디오 콘텐츠 연동 데이터 제공 장치 (100)및 상기 음향(7)에 포함된 사용자 제공 데이터를 추출하는 사용자 단말(30)의 전용 애플리케이션(50)을 포함한다.Referring to FIG. 2, the audio content interworking data providing system receives audio content and user-provided data separately and simultaneously outputs audio content and user-provided data as sounds in the audible frequency region 8 and the non-audible frequency region 7, respectively. And a dedicated application 50 of the user terminal 30 which extracts the user provided data included in the providing device 100 and the sound 7.

상기 오디오 콘텐츠 연동 데이터 제공 시스템은 상기 사용자 제공 데이터를 포함하는 비 가청 주파수 영역의 음향(7)이 도달 가능한 유효 거리를 갖는 소정 범위에 설치하는 것이 바람직하며, 일 예로 사용자의 출입문(11) 등을 통해 입,퇴장을 식별할 수 있는 매장, 사무실, 커피숍, 거실과 같은 실내 공간(10)이 바람직하다.The audio content interworking data providing system may be installed in a predetermined range having an effective distance at which the sound 7 in the non-audible frequency region including the user-provided data can be reached. For example, the door 11 of the user may be installed. An indoor space 10 such as a store, an office, a coffee shop, a living room, through which an entrance and exit can be identified is preferable.

상기 전용 애플리케이션(50)은 실내 공간(10)에서 재생되는 음향(7,8)을 입력받아 이 중 비 가청 주파수 영역의 오디오 신호(7)를 감시하다가 필터링된 신호가 기 설정된 데이터 형식인 경우, 이를 인식하여 그에 대응되는 사용자 제공 데이터나 해당 정보가 가리키는 원격 정보를 획득하여 이를 사용자에게 알려준다.When the dedicated application 50 receives the sounds 7 and 8 reproduced in the indoor space 10 and monitors the audio signal 7 in the non-audible frequency domain, the filtered signal is a preset data format. It recognizes this and acquires corresponding user-provided data or remote information indicated by the corresponding information and informs the user of this.

이는, 종래와 달리 비 가청 주파수 영역의 음향(7)을 출력하기 위한 별도의 오디오 비컨(Beacon) 발생 장치가 필요하지 않고, 단순히 사용자 컴퓨터(100: PC) 등에 사용자 제공 데이터를 비 가청 주파수 영역의 음향(7)으로 출력하기 위한 구성을 소프트웨어적으로 더 부가하여 구성할 수 있어 매우 실용성이 높다.Unlike in the related art, this does not require a separate audio beacon generating device for outputting the sound 7 in the non-audible frequency region, and simply provides user-provided data to the user computer 100 for the non-audible frequency region. The configuration for outputting with the sound 7 can be further added in software, which is very practical.

또한, 실내 공간(10)에서 재생되는 음악, 안내 멘트, 쇼핑 정보와 같은 오디오 콘텐츠(8)의 품질 열화 현상이 없이 지속 재생이 가능하여 범용성이 증대되며, 동시 출력되는 상기 오디오 콘텐츠(8)와 연동하여, 관련된 사용자 제공 데이터를 비 가청 주파수 영역의 음향(7)에 포함하여 출력하여 다양한 정보를 사용자에게 제공해 줄 수 있다.In addition, it is possible to continuously play without deteriorating the quality of the audio content 8 such as music, announcements, and shopping information played in the indoor space 10, thereby increasing the versatility, and simultaneously outputting the audio content 8 and In conjunction, the relevant user-provided data may be included in the sound 7 of the non-audible frequency domain and output to provide various information to the user.

이처럼, 본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템은 음향을 통해 사용자 제공 데이터를 전달하는 방식에서 오디오 콘텐츠(8)와 사용자 제공 데이터(7)를 분리하여 입력한 후 동시적으로 음향 처리 및 출력하여 오디오 콘텐츠(8)의 품질 열화가 없으며 사용자 컴퓨터, 스마트 TV와 같은 기존 구성(100,110)에 용이하게 적용할 수 있으므로 구성 적용이 용이하며 범용성이 증대된다.As such, the apparatus for providing audio content interworking data according to an exemplary embodiment of the present invention, and the system simultaneously inputs and separates the audio content 8 and the user providing data 7 in a manner of transmitting user provided data through sound. By processing and outputting the audio content 8, there is no quality deterioration of the audio content 8 and can be easily applied to existing configurations 100 and 110 such as user computers and smart TVs.

한편, 상기 사용자 제공 데이터(7)는 함께 출력되는 오디오 콘텐츠(8)와 관련된 사용자 제공 데이터가 아니라, 동시 출력되는 오디오 콘텐츠(8)와 무관한 로컬 입력 정보(예를 들어, 매장 정보, 로컬 공지사항, 로컬 이벤트 광고 등)이거나 상기 오디오 콘텐츠 연동 데이터 제공 장치(100)를 관리하는 관리 서버에서 관리하는 광고 정보나 이벤트 정보 등일 수도 있다.On the other hand, the user-provided data 7 is not user-provided data related to the audio content 8 output together, but local input information (for example, store information and local announcement) irrelevant to the audio content 8 outputted simultaneously. Items, local event advertisements, or the like) or advertisement information or event information managed by a management server managing the audio content interworking data providing apparatus 100.

바람직한 실시 예로서, 상기 오디오 콘텐츠 연동 데이터 제공 시스템은 매장(10)을 방문한 사용자(1)를 위한 매장 인식 시스템으로 활용하거나 다양한 사용자 정보 제공이 가능한 서비스에 범용적으로 적용될 수 있다.As a preferred embodiment, the audio content linked data providing system may be used as a store recognition system for the user 1 visiting the store 10 or may be universally applied to a service capable of providing various user information.

예를 들어, TV를 보다가 사용자 제공 데이터(7)가 TV의 음향 출력 장치(110)에서 출력되는 음향에 포함되는 경우, 이를 인식한 사용자 단말(30)의 전용 애플리케이션(50)이 자동 동작하여 사용자(1)에게 관련 내용을 푸쉬(Push)하는 방식으로 활용할 수 있다.For example, if the user-provided data 7 is included in the sound output from the sound output device 110 of the TV while viewing the TV, the dedicated application 50 of the user terminal 30 that recognizes this is automatically operated. It can be utilized by pushing the relevant contents to the user 1.

또는, 사용자(1)가 상기 전용 애플리케이션(50)을 통해 문의하는 경우에는 사용자 제공 데이터(7)를 식별하여 관련 정보를 제공하는 방식으로도 활용할 수 있어, 콘텐츠 연동 상품 광고나 이벤트 광고 등으로 확장이 가능하다.
Alternatively, when the user 1 inquires through the dedicated application 50, the user 1 may also utilize the method of identifying the user-provided data 7 and providing related information, and thus may be expanded to a content-linked product advertisement or an event advertisement. This is possible.

도 3은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 시스템의 구성도다.3 is a block diagram of an audio content interworking data providing system according to an exemplary embodiment.

도 3을 참조하면, 상기 오디오 콘텐츠 연동 데이터 제공 시스템은 오디오 콘텐츠(80)를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 재생부(140), 상기 재생부(140)와 분리되어 구성되며, 사용자 제공 데이터(90)를 상기 오디오 콘텐츠(80)와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 데이터 제공부(150), 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 음향 처리부(130) 및 상기 음향 처리부(130)의 처리 및 출력을 제어하는 제어부(120)를 구비하는 오디오 콘텐츠 연동 데이터 제공 장치(100) 및 사용자 단말에 설치되며, 사용자 단말로 수집되는 음향(1,2)에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 음향 입력부(51), 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 신호 검출부(52), 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 데이터 인식부(53) 및 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 표시부(54)를 구비하는 전용 애플리케이션(50)을 포함한다.Referring to FIG. 3, the audio content interworking data providing system is configured to be separately from the playback unit 140 and the playback unit 140 which receive the audio content 80 and convert it into an audio content signal in an audible frequency region. A data provider 150 for receiving user-provided data 90 separately from the audio content 80 and converting the user-provided data 90 into a non-audible frequency domain including the same in a predetermined format; And an audio content interworking data providing device 100 including a sound processor 130 for processing and outputting an audio content signal and the converted audio signal, and a controller 120 for controlling the processing and output of the sound processor 130. A sound input unit 51 installed in the user terminal and receiving the audio content signal and the audio signal from the sounds 1 and 2 collected by the user terminal; A signal detection unit 52 for detecting the audio signal in the non-audible frequency domain among input signals, a data recognition unit 53 for recognizing user-provided data according to the preset format in the audio signal, and the user-provided data in a predetermined procedure And a dedicated application 50 having a display portion 54 which, depending on the translation or directly, provides the user with one or more of a visual representation or an audio representation.

상기 음향 처리부(130)는 스피커와 같은 음향 출력부(110)를 통해 상기 오디오 콘텐츠 신호 및 오디오 신호를 출력(1,2)할 수 있다.The sound processor 130 may output (1, 2) the audio content signal and the audio signal through a sound output unit 110 such as a speaker.

상기 사용자 단말은 스마트폰, 태블릿 피씨와 같은 스마트 기기이며 상기 전용 애플리케이션(50)은 상기 스마트 기기에 설치되는 스마트 앱(App)인 것이 바람직하다.The user terminal is a smart device, such as a smart phone, tablet PC and the dedicated application 50 is preferably a smart app (App) installed on the smart device.

상기 오디오 콘텐츠 연동 데이터 제공 장치(100)는 일반적인 사용자 컴퓨터(PC)인 것이 바람직하나, 스마트 단말, 스마트 TV, 셋톱 박스 등일 수 있으며 이에 상기 사용자 제공 데이터(90)를 입,출력하기 위한 구성은 일부 또는 전부를 소프트웨어적으로 구현하는 것이 바람직하다.Preferably, the audio content interworking data providing apparatus 100 is a general user computer (PC), but may be a smart terminal, a smart TV, a set-top box, and the like. The configuration for inputting and outputting the user providing data 90 is partially. Or it is desirable to implement all of them in software.

또한, 상기 오디오 콘텐츠 연동 데이터 제공 장치(100)는 상기 사용자 제공 데이터(90)의 수신 여부를 선택할 수 있도록 구성하여 오디오 콘텐츠(80)의 품질 열화 없이 서비스 제공이 가능할 뿐만 아니라, 사용자 제공 데이터(90)를 오디오 콘텐츠(80)에 다시 인코딩하는 시간과 비용을 줄이며 사용자의 선택에 따라 다른 종류의 데이터를 마음대로 연동시킬 수 있는 장점이 있다.In addition, the audio content interworking data providing apparatus 100 is configured to select whether or not to receive the user provided data 90 to provide a service without deterioration of the quality of the audio content 80, as well as user provided data 90 ) Can reduce the time and cost of re-encoding the audio content (80) and can be linked to other types of data at will according to the user's choice.

상기 오디오 콘텐츠(80)는 매장 등에서 재생하는 음악일 수 있으며, 안내 정보 또는 이벤트 정보 등을 음성으로 제공하는 콘텐츠일 수 있다.The audio content 80 may be music played in a store or the like, and may be content that provides guide information or event information by voice.

상기 사용자 제공 데이터(90)는 상기 매장의 소개 정보나 안내 정보 또는 이벤트 정보 등을 시각적으로 또는 청각적으로 직접 재생하거나 또는 소정 절차에 의해 변환하여 제공할 수 있는 정보일 수 있다.The user-provided data 90 may be information that can directly reproduce the introduction information, guide information, event information, etc. of the store, visually or acoustically, or convert and provide the same by a predetermined procedure.

바람직한 실시 예로서, 상기 사용자 제공 데이터(90)는 상기 오디오 콘텐츠(80)와 관련된 광고 정보, 이벤트 정보, 매장 정보, 공지 정보 중 하나이거나 또는 이 중 하나의 웹 링크 정보를 포함할 수 있다.In a preferred embodiment, the user-provided data 90 may include one of advertisement information, event information, store information, announcement information related to the audio content 80, or include web link information of one of them.

또는, 상기 사용자 제공 데이터(90)는 상기 오디오 콘텐츠(80)와 관련된 정보로서, 연동하여 관련 정보를 매장을 찾는 사용자에게 제공하도록 구성할 수 있다.Alternatively, the user-provided data 90 is information related to the audio content 80. The user-provided data 90 may be configured to provide related information to a user who finds a store in association.

상기 데이터 제공부(150)는 상기 오디오 신호에 사용자 제공 데이터를 기 설정된 형식으로 포함한다.The data provider 150 includes user-provided data in a predetermined format in the audio signal.

이때, 사용자 제공 데이터(90)를 기 설정된 형식으로 오디오 신호로 변환하는 방식은 다양한 변환 방식의 실시 예가 있을 수 있으며, 본 발명의 요지에 벗어나므로 생략한다.In this case, a method of converting the user-provided data 90 into an audio signal in a predetermined format may include embodiments of various conversion methods, which are omitted because they depart from the gist of the present invention.

한편, 상기 표시부(54)는 상기 소정 절차로서, 상기 사용자 제공 데이터(90)를 이용하여 상기 사용자 단말에 기 저장된 콘텐츠를 하나 이상 대응시켜 사용자에게 제공하거나 또는 외부 서버의 콘텐츠를 하나 이상 대응시켜 사용자에게 제공할 수 있으며, 이의 구체적인 실시 예는 도 2에서 상술하였다.Meanwhile, the display unit 54 provides the user with one or more contents previously stored in the user terminal using the user provided data 90 as a predetermined procedure, or provides the user with one or more contents of an external server. It may be provided to, the specific embodiment thereof has been described above in FIG.

일반적인 오디오 코덱(Codec)을 이용하는 오디오 콘텐츠(80)에서, 비 가청 주파수 영역에 사용자 제공 데이터(90)를 삽입하여 단일의 오디오 신호로 생성하는 경우에는 코덱의 한계로 인해 재생이 어려울 수 있어 실용적이지 않다.In audio content 80 using a general audio codec, when the user-provided data 90 is inserted into the non-audible frequency region to generate a single audio signal, it may be difficult to play due to the limitation of the codec. not.

따라서, 본 발명에서는 비 가청 신호 대역의 사용자 제공 데이터(90)를 오디오 콘텐츠(80)와 별도로 입력하도록 구성하고, 오디오 콘텐츠 연동 데이터 제공 장치(100)에 전용 프로그램 등을 설치하여 상기 전용 프로그램을 통해 오디오 콘텐츠(80)에 대응되는 사용자 제공 데이터(90)를 포함하여 비 가청 주파수 대역의 오디오 신호로 생성하고 이를 상기 오디오 콘텐츠와 함께 송출(1,2)하도록 하여 매우 실용적으로 사용자 제공 데이터(90)를 포함하는 음향을 출력할 수 있다.
Therefore, in the present invention, the user-provided data 90 of the non-audible signal band is configured to be input separately from the audio content 80, and a dedicated program or the like is installed in the audio content interworking data providing apparatus 100 through the dedicated program. Including a user-provided data 90 corresponding to the audio content 80 to generate an audio signal of the non-audible frequency band and to transmit it (1, 2) with the audio content, the user-provided data 90 is very practical It may output a sound including a.

도 4는 본 발명의 일 실시 예에 따른 관리 서버(200)의 블록도다.4 is a block diagram of a management server 200 according to an embodiment of the present invention.

도 4를 참조하면, 상기 관리 서버(200)는 상기 사용자 제공 데이터를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치(100)로 사용자 제공 데이터를 전송(3)하는 연동 데이터 관리부(220) 및 상기 사용자 제공 데이터와 관련된 콘텐츠를 관리하며 이를 사용자 단말(30)의 전용 애플리케이션(50)으로 전송하는 표시 데이터 관리부(230)를 구비하는 것이 바람직하다.Referring to FIG. 4, the management server 200 manages the user provided data and transmits the user provided data to the audio content interworking data providing apparatus 100. Preferably, the display data manager 230 manages content related to data and transmits the same to the dedicated application 50 of the user terminal 30.

또한, 상기 관리 서버(200)는 상기 사용자 제공 데이터와 관련된 오디오 콘텐츠를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치(100)로 상기 오디오 콘텐츠를 전송하는 콘텐츠 관리부(210)를 더 구비할 수 있다.In addition, the management server 200 may further include a content manager 210 that manages audio content related to the user provided data and transmits the audio content to the audio content interworking data providing apparatus 100.

더불어, 상기 관리 서버(200)는 상기 사용자 제공 데이터를 오디오 신호에 포함하기 위한 상기 기 설정된 형식을 인식 룰로서 관리하며, 상기 사용자 제공 데이터를 추출하거나 변환하여 사용자에게 콘텐츠를 제공하기 위한 상기 소정 절차의 형식을 인식 룰로서 관리하는 인식 룰 관리부(240)를 더 구비하는 것이 바람직하다.In addition, the management server 200 manages the preset format for including the user-provided data in an audio signal as a recognition rule, and extracts or converts the user-provided data to provide content to a user. It is preferable to further include a recognition rule management unit 240 for managing the format of as a recognition rule.

상기 인식 룰 관리부(240)는 필요에 따라 상기 전용 애플리케이션(50) 및 상기 오디오 콘텐츠 연동 데이터 제공 장치(100)로 상기 인식 룰을 제공할 수 있다.
The recognition rule manager 240 may provide the recognition rule to the dedicated application 50 and the audio content interworking data providing apparatus 100 as necessary.

도 5는 본 발명의 일 실시 예에 따른 사용자 제공 데이터를 전달하는 예시도다.5 is an exemplary diagram for delivering user-provided data according to an embodiment of the present invention.

도 5를 참조하면, 오디오 콘텐츠 연동 데이터 제공 장치(100)에서 출력(110)되는 오디오 콘텐츠(1) 및 사용자 제공 데이터를 포함하는 음향(2)은 사용자 단말(30)의 전용 애플리케이션(50)을 통해 입력되고, 사용자 제공 데이터가 추출되어 사용자에게 제공된다.Referring to FIG. 5, an audio content 1 output from an audio content interworking data providing apparatus 100 and a sound 2 including user provided data may be used to execute a dedicated application 50 of the user terminal 30. Inputted through the user, and the user-provided data is extracted and provided to the user.

바람직한 실시 예로서, 상기 사용자 제공 데이터는 매장 소개 정보(21)나 이벤트 정보(22)로 직접 제공하거나 또는 회원 관련 정보 및 매장 관련 정보를 관리하는 상기 관리 서버(200)를 통해 소정 절차로 변환된 정보(23)로서 제공될 수 있다.In a preferred embodiment, the user-provided data is directly provided as store introduction information 21 or event information 22 or converted into a predetermined procedure through the management server 200 that manages member related information and store related information. May be provided as information 23.

이처럼, 본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치, 그 시스템은 재생하는 오디오 콘텐츠와 관련된 사용자 제공 데이터를 포함하는 데이터가 연동하도록 구성하여 현재 재생되는 콘텐츠와 관련된 광고 정보, 이벤트 정보와 같은 다양한 정보를 사용자 단말에서 용이하게 제공받을 수 있으므로 사용자 편의성이 향상되며 광고 효율성이 높아진다.
As such, the apparatus for providing audio content interworking data according to an embodiment of the present invention, the system is configured such that the data including the user-provided data related to the audio content to be reproduced to interlock, such as advertising information, event information, etc. Since a variety of information can be easily provided in the user terminal, user convenience is improved and advertisement efficiency is increased.

도 6은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 및 사용자 제공 데이터의 주파수 대역의 예시도다.6 is an exemplary diagram of a frequency band of audio content and user-provided data according to an embodiment of the present invention.

상기 오디오 콘텐츠 연동 데이터 제공 장치(100)는 도 6a에 도시한 바와 같이, 오디오 콘텐츠를 가청 영역의 음향(61)으로 출력하며, 도 6b와 같이 사용자 제공 데이터를 포함하는 음향을 비 가청 영역 중 저주파 대역(62) 또는 고주파 대역 (63)중 하나 이상을 포함하여 출력한다.As shown in FIG. 6A, the apparatus 100 for providing audio content interworking data outputs audio content as a sound 61 in an audible region, and as shown in FIG. 6B, a low frequency in a non-audible region as shown in FIG. 6B. One or more of the band 62 or the high frequency band 63 is output.

비 가청 주파수 영역은 20Hz 이하의 저주파 대역과 20KHz 이상의 고주파 대역으로 나눌 수 있다.The non-audible frequency region can be divided into a low frequency band of 20 Hz or less and a high frequency band of 20 KHz or more.

이때, 사용자 단말의 전용 애플리케이션(50)에서의 대표적인 신호 검출 방식은 수신되는 신호를 실시간 필터링하여 원하는 신호를 검출하는 방식과 주기적으로 일정 오디오를 수집하여 이를 분석하는 방식을 들 수 있다.In this case, representative signal detection methods in the dedicated application 50 of the user terminal may include a method of detecting a desired signal by filtering the received signal in real time and a method of periodically collecting and analyzing certain audio.

그러나, 전용 애플리케이션(50)에서 실시간 모든 오디오를 필터링하여 분석하는 경우, 배터리 소모나 부하의 문제가 발생할 수 있으므로, 도 3 및 도 6을 참조하면, 상기 음향 입력부(51)는 상기 기 설정된 형식에서 상기 사용자 제공 데이터의 반복 주기를 파악하고 이를 고려하여 상기 반복 주기에 적합한 소정 주기로 상기 오디오 신호를 수집하는 것이 바람직하다.However, when analyzing and filtering all audio in real time in the dedicated application 50, a problem of battery consumption or load may occur. Referring to FIGS. 3 and 6, the sound input unit 51 is configured in the preset format. It is preferable to collect the audio signal at a predetermined period suitable for the repetition period in consideration of the repetition period of the user-provided data.

또한, 저주파 대역의 신호(62)를 이용하는 경우 전용 애플리케이션(50)에서 일정한 길이의 오디오 신호를 수집하여 이를 고속 처리하기 위해 일반 가청 주파수를 비가청 고주파 영역으로 올려서 제거하고 저주파(62)를 가청 주파수 영역으로 올려서 이를 분석하도록 할 수 있다.In addition, when the low frequency band signal 62 is used, the audio signal of a certain length is collected by the dedicated application 50 and the general audio frequency is raised to the inaudible high frequency region to remove the high frequency signal, and the low frequency 62 is audible. You can upload it to an area to analyze it.

또는, 상기 전용 애플리케이션(50)은 수신 신호에 대한 샘플링 주기를 낮추는 방식으로 처리하여 부하를 줄이면서 검출하도록 하는 방식을 이용할 수도 있다.Alternatively, the dedicated application 50 may use a method of reducing the load by detecting the sampling period for the received signal.

예를 들어, 고주파 영역(63)을 이용하는 경우, 상기 전용 애플리케이션(50)에서 짧은 신호를 최대 샘플링 주파수로 캡처한 후 이를 저속으로 재생하여 일반 가청 주파수를 저주파로 낮추고 고주파 신호(63)를 신호 처리가 용이한 가청 레벨로 낮추어 처리에 따른 부하를 줄일 수도 있다.For example, in the case of using the high frequency region 63, the dedicated application 50 captures a short signal at the maximum sampling frequency, reproduces it at a low speed, lowers the general audio frequency to a low frequency, and processes the high frequency signal 63 into a signal processing. The load on processing can be reduced by lowering it to an easy audible level.

따라서, 상기 신호 검출부(52)는 상기 오디오 신호가 상기 비 가청 주파수 영역에서 저주파 대역(62)에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 고주파 대역까지 도달하도록 올리거나 또는 상기 오디오 신호가 상기 비 가청 주파수 영역에서 고주파 대역(63)에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 저주파 대역까지 도달하도록 내려 상기 오디오 신호를 가청 주파수 영역에서 검출하도록 하는 것이 바람직하다.Therefore, when the audio signal is in the low frequency band 62 in the non-audible frequency domain, the signal detector 52 raises the input signal as a whole so that the audio content signal reaches a high frequency band or the audio signal is If it is in the high frequency band 63 in the non-audible frequency region, it is preferable to lower the input signal as a whole to reach the low frequency band so as to detect the audio signal in the audible frequency region.

더불어, 비교적 속도가 낮은 오디오 신호라는 점 때문에 반사 음향 등에 의해 신호가 왜곡될 수 있고, 사용자가 사용자 단말을 휴대한 상태로 이동(매장에 진입하는 경우 등)하는 경우에 발생하는 도플러 효과에 의해 신호의 주파수가 이동에 따라 지속적으로 변화될 수 있다.In addition, due to the relatively low speed of the audio signal, the signal may be distorted due to reflected sound or the like, and the signal may be caused by the Doppler effect that occurs when the user moves (eg, when entering a store) while carrying the user terminal. The frequency of may change continuously as it moves.

따라서, 상기 데이터 제공부(150)는 상기 사용자 제공 데이터를 상기 비 가청 주파수 영역 중 저주파 대역(62) 및 고주파 대역(63)에 혼합하여 송출되거나 또는 순차적으로 송출되도록 상기 오디오 신호로 변환하여 제공하는 것으로 도플러 효과에 의한 왜곡 가능성을 줄이는 것이 바람직하다.Accordingly, the data providing unit 150 converts the user-provided data into a low frequency band 62 and a high frequency band 63 of the non-audible frequency domain, and transmits the converted data into the audio signal to be sequentially transmitted. It is desirable to reduce the possibility of distortion due to the Doppler effect.

바람직한 실시 예로서, 상기 데이터 제공부(150)는 저주파와 고주파를 동시 또는 순차 제공하며, 상기 신호 검출부(52)는 저주파와 고주파 신호를 기준으로 전송 데이터를 확인하거나 복원하여 사용자 단말의 이동에 따른 도플러 효과의 영향을 저감시키는 것이 바람직하다.According to a preferred embodiment, the data providing unit 150 provides the low frequency and the high frequency simultaneously or sequentially, and the signal detection unit 52 checks or restores the transmission data based on the low frequency and the high frequency signal and according to the movement of the user terminal. It is desirable to reduce the influence of the Doppler effect.

이와 같이, 본 발명의 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 장치 및 그 시스템은 검출 주기의 설정, 주파수 이동 등의 조작을 통해 용이하게 사용자 제공 데이터를 추출하여 사용자 단말의 배터리 소모를 최소화하며 신호 처리의 부하를 최대한 경감하도록 하므로 정보 제공을 위한 처리 속도가 매우 빨라진다.
As such, the apparatus for providing audio content interworking data and the system according to an exemplary embodiment of the present invention can easily extract user-provided data through manipulation of a detection cycle, frequency shift, etc. to minimize battery consumption of a user terminal and to process a signal. This reduces the load on the system, making the processing speed for providing information very fast.

도 7 및 도 8은 본 발명의 일 실시 예에 따른 오디오 콘텐츠 연동 데이터 제공 방법의 순서도다.7 and 8 are flowcharts of a method for providing audio content interworking data according to an embodiment of the present invention.

도 7을 참조하면, 상기 오디오 콘텐츠 연동 데이터 제공 방법은 오디오 콘텐츠 연동 데이터 제공 장치가 오디오 콘텐츠를 입력(S10)받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 단계(S30), 상기 오디오 콘텐츠 연동 데이터 제공 장치가 상기 단계와 동시적으로 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력(S20)받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 단계(S40) 및 상기 오디오 콘텐츠 연동 데이터 제공 장치가 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 단계(S50, S60)를 포함한다.Referring to FIG. 7, in the audio content interworking data providing method, an audio content interlocking data providing apparatus receives audio content (S10) and converts the audio content into an audio content signal in an audible frequency region (S30). The device simultaneously receives the user-provided data separately from the audio content (S20) and converts the audio data in the non-audible frequency domain including the same into a preset format (S40) and the audio content interworking data. And providing and processing the converted audio content signal and the converted audio signal which are simultaneously input by the providing apparatus (S50 and S60).

또한, 도 8을 참조하면, 상기 오디오 콘텐츠 연동 데이터 제공 방법은 전용 애플리케이션이 수집되는 음향에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 단계(S60, S70), 상기 전용 애플리케이션이 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 단계(S80), 상기 전용 애플리케이션이 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 단계(S85) 및 상기 전용 애플리케이션이 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 단계(S90)를 더 포함한다.
In addition, referring to FIG. 8, the method for providing audio content interworking data may include receiving the audio content signal and the audio signal in a sound from which a dedicated application is collected (S60 and S70), and the dedicated application is inaudible among the input signals. Detecting the audio signal in the frequency domain (S80), recognizing, by the dedicated application, the user-provided data according to the preset format in the audio signal (S85), and by the dedicated application, the user-provided data by the predetermined procedure. And converting according to or directly, providing the user with one or more of a visual representation or an audio representation (S90).

이상에서는 본 발명에 따른 바람직한 실시 예들에 대하여 도시하고 또한 설명하였다. 그러나 본 발명은 상술한 실시 예에 한정되지 아니하며, 특허 청구의 범위에서 첨부하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형 실시가 가능할 것이다.
The foregoing embodiments and advantages are merely exemplary and are not to be construed as limiting the present invention. However, the present invention is not limited to the above-described embodiments, and various changes and modifications may be made by those skilled in the art without departing from the scope of the present invention. .

1: 사용자 10: 매장
30: 사용자 단말 50: 전용 애플리케이션
51: 음향 입력부 52: 신호 검출부
53: 데이터 인식부 54: 표시부
80: 오디오 콘텐츠 90: 사용자 제공 데이터
100: 오디오 콘텐츠 연동 데이터 제공 장치 110: 음향 출력부
120: 제어부 130: 음향 처리부
140: 재생부 150: 데이터 제공부
200: 관리 서버 210: 콘텐츠 관리부
220: 연동 데이터 관리부 230: 표시 데이터 관리부
240: 인식 룰 관리부
1: User 10: Store
30: user terminal 50: dedicated application
51: sound input unit 52: signal detection unit
53: data recognition unit 54: display unit
80: audio content 90: user-provided data
100: audio content interworking data providing apparatus 110: sound output unit
120: control unit 130: sound processing unit
140: playback unit 150: data provider
200: management server 210: content management unit
220: interlocked data management unit 230: display data management unit
240: recognition rule management unit

Claims (11)

삭제delete 삭제delete 삭제delete 오디오 콘텐츠를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 재생부, 상기 재생부와 분리되어 구성되며, 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 데이터 제공부, 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 음향 처리부 및 상기 음향 처리부의 처리 및 출력을 제어하는 제어부를 구비하는 오디오 콘텐츠 연동 데이터 제공 장치;및
사용자 단말에 설치되며, 사용자 단말로 수집되는 음향에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 음향 입력부, 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 신호 검출부, 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 데이터 인식부 및 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 표시부를 구비하는 전용 애플리케이션;을 포함하되,
상기 음향 입력부는 상기 기 설정된 형식에서 상기 사용자 제공 데이터의 반복 주기를 파악하고 이를 고려하여 상기 반복 주기에 대응되는 주기로 상기 오디오 신호를 수집하는 것을 특징으로 하는 오디오 콘텐츠 연동 데이터 제공 시스템.
A reproducing unit which receives audio content and converts the audio content into an audio content signal in an audible frequency domain, and is separated from the reproducing unit, and receives a user-provided data separately from the audio content and includes a non-audible frequency domain including the same in a preset format. And a data providing unit for converting the audio signal into an audio signal, a sound processing unit for processing and outputting the converted audio content signal and the converted audio signal simultaneously, and a controller for controlling the processing and output of the sound processing unit. Content interlocking data providing device; And
A sound input unit installed in the user terminal and receiving the audio content signal and the audio signal from the sound collected by the user terminal, a signal detection unit detecting the audio signal in the non-audible frequency region among the input signals, and the device in the audio signal Dedicated with a data recognition unit for recognizing user-provided data in accordance with a set format and a display unit for converting the user-provided data in accordance with a predetermined procedure or directly to the user, including one or more of a visual representation or audio representation Application;
And the sound input unit collects the audio signal at a period corresponding to the repetition period in consideration of the repetition period of the user-provided data in the preset format.
삭제delete 제 4항에 있어서, 상기 신호 검출부는
상기 오디오 신호가 상기 비 가청 주파수 영역에서 저주파 대역에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 고주파 대역까지 도달하도록 올리거나 또는 상기 오디오 신호가 상기 비 가청 주파수 영역에서 고주파 대역에 있는 경우 상기 입력 신호를 전체적으로 상기 오디오 콘텐츠 신호가 저주파 대역까지 도달하도록 내려 상기 오디오 신호를 가청 주파수 영역에서 검출하도록 하는 것을 특징으로 하는 오디오 콘텐츠 연동 데이터 제공 시스템.
The method of claim 4, wherein the signal detection unit
Raise the input signal as a whole such that the audio content signal reaches a high frequency band when the audio signal is in a low frequency band in the non-audible frequency region or when the audio signal is in a high frequency band in the non-audible frequency region. And the audio content signal is lowered to reach a low frequency band as a whole so as to detect the audio signal in an audible frequency region.
제 4항에 있어서, 상기 데이터 제공부는
저주파와 고주파를 동시 또는 순차 제공하며, 신호 검출부는 저주파와 고주파 신호를 기준으로 전송 데이터를 확인하거나 복원하여 사용자 단말의 이동에 따른 도플러 효과의 영향을 저감시키는 것을 특징으로 하는 오디오 콘텐츠 연동 데이터 제공 시스템.
The method of claim 4, wherein the data providing unit
Provides low frequency and high frequency simultaneously or sequentially, and the signal detector checks or restores the transmission data based on the low frequency and high frequency signals to reduce the influence of the Doppler effect due to the movement of the user terminal. .
제 7항에 있어서,
상기 사용자 제공 데이터를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치로 사용자 제공 데이터를 전송하는 연동 데이터 관리부 및 상기 사용자 제공 데이터와 관련된 콘텐츠를 관리하며 이를 상기 전용 애플리케이션으로 전송하는 표시 데이터 관리부를 구비하는 관리 서버;를 더 포함하는 오디오 콘텐츠 연동 데이터 제공 시스템.
8. The method of claim 7,
A management server that manages the user-provided data and transmits the user-provided data to the audio content interworking data providing apparatus, and a display data management unit which manages the content related to the user-provided data and transmits the content to the dedicated application. Audio content interworking data providing system further comprising.
제 8항에 있어서, 상기 관리 서버는
상기 사용자 제공 데이터와 관련된 오디오 콘텐츠를 관리하며 상기 오디오 콘텐츠 연동 데이터 제공 장치로 상기 오디오 콘텐츠를 전송하는 콘텐츠 관리부를 더 구비하는 오디오 콘텐츠 연동 데이터 제공 시스템.
The method of claim 8, wherein the management server
And a content manager configured to manage audio content related to the user-provided data and to transmit the audio content to the audio content interworking data providing apparatus.
a) 오디오 콘텐츠 연동 데이터 제공 장치가 오디오 콘텐츠를 입력받아 가청 주파수 영역의 오디오 콘텐츠 신호로 변환하는 단계;
b) 상기 오디오 콘텐츠 연동 데이터 제공 장치가 상기 a)단계와 동시적으로 사용자 제공 데이터를 상기 오디오 콘텐츠와 별개로 입력받아 기 설정된 형식으로 이를 포함하는 비 가청 주파수 영역의 오디오 신호로 변환하는 단계;
c) 상기 오디오 콘텐츠 연동 데이터 제공 장치가 동시적으로 입력되는 상기 변환한 오디오 콘텐츠 신호 및 상기 변환한 오디오 신호를 처리하여 출력하는 단계;
d) 전용 애플리케이션이 수집되는 음향에서 상기 오디오 콘텐츠 신호 및 오디오 신호를 입력받는 단계;
e) 상기 전용 애플리케이션이 상기 입력 신호 중에서 비 가청 주파수 영역의 상기 오디오 신호를 검출하는 단계;
f) 상기 전용 애플리케이션이 상기 오디오 신호에서 상기 기 설정된 형식에 따라 사용자 제공 데이터를 인식하는 단계; 및
g) 상기 전용 애플리케이션이 상기 사용자 제공 데이터를 소정 절차에 따라 변환하거나 또는 직접적으로, 시각적 표현 또는 청각적 표현 중 하나 이상을 포함하여 사용자에게 제공하는 단계;를 포함하고,
상기 d) 단계는 상기 기 설정된 형식에서 상기 사용자 제공 데이터의 반복 주기에 대응되는 주기로 상기 오디오 신호를 수집하는 것을 특징으로 하는 오디오 콘텐츠 연동 데이터 제공 방법.
a) receiving the audio content by the apparatus for providing audio content interworking data and converting the audio content into an audio content signal in an audible frequency domain;
b) the audio content interlocking data providing apparatus converts the user-provided data into a non-audible frequency domain audio signal including the same in a predetermined format and inputting the user-provided data separately from the audio contents simultaneously with step a);
c) processing and outputting the converted audio content signal and the converted audio signal which are simultaneously input by the audio content interworking data providing apparatus;
d) receiving the audio content signal and the audio signal in a sound from which a dedicated application is collected;
e) the dedicated application detecting the audio signal in an inaudible frequency domain among the input signals;
f) recognizing, by the dedicated application, user-provided data according to the preset format in the audio signal; And
g) the dedicated application converting the user-provided data according to a predetermined procedure or directly providing the user with one or more of a visual representation or an audio representation;
In the step d), the audio content interworking data providing method collects the audio signal in a period corresponding to a repetition period of the user-provided data in the preset format.
삭제delete
KR1020120052093A 2012-05-16 2012-05-16 Audio contents interlocking data providing apparatus, system the same and method thereof KR101340340B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120052093A KR101340340B1 (en) 2012-05-16 2012-05-16 Audio contents interlocking data providing apparatus, system the same and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120052093A KR101340340B1 (en) 2012-05-16 2012-05-16 Audio contents interlocking data providing apparatus, system the same and method thereof

Publications (2)

Publication Number Publication Date
KR20130128211A KR20130128211A (en) 2013-11-26
KR101340340B1 true KR101340340B1 (en) 2013-12-11

Family

ID=49855457

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120052093A KR101340340B1 (en) 2012-05-16 2012-05-16 Audio contents interlocking data providing apparatus, system the same and method thereof

Country Status (1)

Country Link
KR (1) KR101340340B1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150100969A (en) * 2014-02-24 2015-09-03 김관민 SNS(Social Networking Service) method and system on sound wave communication or BLE(Bluetooth Low Energy) communication confirm
KR101563477B1 (en) 2014-01-21 2015-10-26 김관민 Real time remote data communication method and system by BLE(Bluetooth Low Energy) communication and the sound wave
KR102395791B1 (en) 2021-03-15 2022-05-10 주식회사 에프에스엔 Method and device for providing digital audio advertisement service

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20070034566A (en) * 2007-03-13 2007-03-28 주식회사 비즈모델라인 System for Processing Coupon or Auhentication Code Using Sound Data
KR20080029446A (en) * 2006-09-29 2008-04-03 (주)이스트랩 System for providing information using audio watermarking and method thereof
KR20090083643A (en) * 2008-01-30 2009-08-04 에스케이 텔레콤주식회사 Method, system and apparatus for providing advertisement service by using private broadcasting
KR20090126354A (en) * 2008-06-04 2009-12-09 주식회사 블랙박스 Recognition system and method using mobile communication terminal

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20080029446A (en) * 2006-09-29 2008-04-03 (주)이스트랩 System for providing information using audio watermarking and method thereof
KR20070034566A (en) * 2007-03-13 2007-03-28 주식회사 비즈모델라인 System for Processing Coupon or Auhentication Code Using Sound Data
KR20090083643A (en) * 2008-01-30 2009-08-04 에스케이 텔레콤주식회사 Method, system and apparatus for providing advertisement service by using private broadcasting
KR20090126354A (en) * 2008-06-04 2009-12-09 주식회사 블랙박스 Recognition system and method using mobile communication terminal

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101563477B1 (en) 2014-01-21 2015-10-26 김관민 Real time remote data communication method and system by BLE(Bluetooth Low Energy) communication and the sound wave
KR20150100969A (en) * 2014-02-24 2015-09-03 김관민 SNS(Social Networking Service) method and system on sound wave communication or BLE(Bluetooth Low Energy) communication confirm
KR101643399B1 (en) 2014-02-24 2016-07-27 김관민 SNS(Social Networking Service) method and system on sound wave communication or BLE(Bluetooth Low Energy) communication confirm
KR102395791B1 (en) 2021-03-15 2022-05-10 주식회사 에프에스엔 Method and device for providing digital audio advertisement service

Also Published As

Publication number Publication date
KR20130128211A (en) 2013-11-26

Similar Documents

Publication Publication Date Title
CN104023247B (en) The method and apparatus of acquisition, pushed information and information interaction system
US20200015025A1 (en) Method and system for sound monitoring over a network
KR102166423B1 (en) Display device, server and method of controlling the display device
KR102147346B1 (en) Display device and operating method thereof
KR101298823B1 (en) Facility for processing verbal feedback and updating digital video recorder(dvr) recording patterns
CN104813675B (en) Make the fed in parallel time synchronization of auxiliary content Yu main media content
US20130312019A1 (en) Methods and systems for audience measurement
US8949123B2 (en) Display apparatus and voice conversion method thereof
CN103873919B (en) A kind of information processing method and electronic equipment
KR20140008870A (en) Method for providing contents information and broadcasting receiving apparatus thereof
KR101340340B1 (en) Audio contents interlocking data providing apparatus, system the same and method thereof
US9392206B2 (en) Methods and systems for providing auxiliary viewing options
CN111742557A (en) Display device and system including the same
CN113709291A (en) Audio processing method and device, electronic equipment and readable storage medium
US20160127816A1 (en) Voice input handling
JP6212719B2 (en) Video receiving apparatus, information display method, and video receiving system
KR20150004051A (en) Method for controlling remote controller and multimedia device
JP2013080362A (en) Dialogue type information transmission device, dialogue type information transmission method, and program
CN104349183B (en) The method of the collection medium audience staining effect realized by sound channel
JP5907487B2 (en) Information transmission system, transmission device, reception device, information transmission method, and program
JP7302559B2 (en) TERMINAL DEVICE, OPERATING METHOD OF TERMINAL DEVICE, AND PROGRAM
KR101156036B1 (en) Method and apparatus for providing interactive contents service
US9883210B2 (en) Display device and method for operating the same
KR20140147401A (en) Method and apparatus for producing descriptive video service by using text to speech
KR102544612B1 (en) Method and apparatus for providing services linked to video contents

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20161202

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20171205

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20191127

Year of fee payment: 7