KR20100028748A - System and method for providing advertisement - Google Patents

System and method for providing advertisement Download PDF

Info

Publication number
KR20100028748A
KR20100028748A KR1020080087618A KR20080087618A KR20100028748A KR 20100028748 A KR20100028748 A KR 20100028748A KR 1020080087618 A KR1020080087618 A KR 1020080087618A KR 20080087618 A KR20080087618 A KR 20080087618A KR 20100028748 A KR20100028748 A KR 20100028748A
Authority
KR
South Korea
Prior art keywords
user
information
advertisement
characteristic information
content
Prior art date
Application number
KR1020080087618A
Other languages
Korean (ko)
Inventor
정예원
양중근
김성묵
김민석
Original Assignee
에스케이 텔레콤주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 에스케이 텔레콤주식회사 filed Critical 에스케이 텔레콤주식회사
Priority to KR1020080087618A priority Critical patent/KR20100028748A/en
Publication of KR20100028748A publication Critical patent/KR20100028748A/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0269Targeted advertisements based on user profile or attribute
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/20Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech

Abstract

PURPOSE: A system and a method for providing an advertisement are provided to supply a target advertisement to a user by obtaining advertising supplying information and using the obtained information. CONSTITUTION: A storage unit(221) stores speech characteristic information corresponding to user's speech, and a user characteristic information extracting unit(213) extracts the user characteristic information by using the speech characteristic information. A content selector(219) recognizes user's speech and selects the contents requested from the user. An advertisement selecting unit(223) selects an advertisement which is supposed to be transmitted to a user by corresponding to the user characteristic information. A production unit(215) reproduces the selected contents with the selected advertisement, and a communication unit(217) transmits the user characteristic information to a service server and receives the selected advertisement.

Description

광고 제공 시스템 및 방법{SYSTEM AND METHOD FOR PROVIDING ADVERTISEMENT}Ad serving system and method {SYSTEM AND METHOD FOR PROVIDING ADVERTISEMENT}

본 발명은 광고 제공 시스템 및 방법에 관한 것으로서, 특히 사용자 특성 정보를 이용하여 타겟 광고를 제공하는 광고 제공 시스템 및 방법에 관한 것이다. 더욱 상세하게는 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 사용자 음성을 이용하여 사용자 특성 정보를 추출하고, 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 음성 인식 및 콘텐츠 재생 장치와, 상기 음성 인식 및 콘텐츠 재생 장치와 통신망을 통해 연결되어 콘텐츠와 광고를 제공하는 서비스 제공 서버를 포함하는 광고 제공 시스템에 관한 것이다.The present invention relates to an advertisement providing system and method, and more particularly, to an advertisement providing system and method for providing a target advertisement using user characteristic information. In more detail, when a user's voice requesting content provision is input, a voice recognition and content reproducing apparatus extracts user characteristic information using the user's voice and plays an advertisement corresponding to the user characteristic information along with the requested content; The present invention relates to an advertisement providing system including a service providing server connected to the voice recognition and content reproducing apparatus through a communication network to provide contents and advertisements.

현재 전 산업분야에 걸쳐서 다양한 매체를 사용한 광고가 제공되고 있으며, 이러한 광고의 종류 및 광고를 제공하고 있는 방식은 다양한 방법으로 진화하고 있다. 일반적으로 사용자에게 제공되는 광고는 무작위로 제공되며, 이러한 광고는 광고를 수용하는 광고 수요자에게 큰 관심을 갖게 하지 못하므로 광고주가 기대한 만큼의 광고 효과를 갖기 어렵다.Currently, advertisements using various media are provided in all industries, and types of advertisements and methods of providing the advertisements are evolving in various ways. In general, advertisements provided to users are provided randomly, and these advertisements do not give great attention to the advertisement consumers who accept the advertisements, so that the advertisements are not as effective as the advertisers expect.

특히, 통신망을 통해 제공되는 광고는 불특정 다수를 대상으로 하고 있으며, 광고 수요자가 원하지 않는 광고는 스팸으로 분류된다. 이러한 이유로 광고 수요자 가 가지고 있는 고유한 특성 성별, 연령, 직업, 취미, 구매성향, 자산, 수입 등의 정보를 세분화하고 이를 기반으로 각 사용자별로 구분된 광고를 제공한다. 이와 같이 광고 수요자 정보를 이용하여 각 광고 수요자별로 특화된 광고를 선별하여 제공하는 것을 타겟 광고라 한다.In particular, advertisements provided through a communication network are targeted to an unspecified number, and advertisements that are not desired by an advertisement consumer are classified as spam. For this reason, information such as gender, age, occupation, hobbies, purchasing tendency, assets, and income, which are unique to advertising consumers, are subdivided, and classified advertisements are provided for each user. As described above, targeting advertisements that are selected for each advertisement consumer by using advertisement consumer information are provided as target advertisements.

하지만, 통신망에서 이러한 타겟 광고를 제공하기 위해서는 상기 광고 수요자의 정보를 획득해야만 한다. 이러한 광고 수요자 정보 획득을 위해서는 사용자 정보 사전 등록, 로그인 등의 사용자 인증 절차가 수행되어야 한다.However, in order to provide such a target advertisement in a communication network, information of the advertisement consumer must be obtained. In order to obtain the information on the advertisement consumer, a user authentication procedure such as pre-registration of user information and login is required.

그러나 상기 통신망에서 사용되는 모든 전자기기에서 사용자 정보를 사전 등록하거나 로그인을 수행하는 것은 아니다. 예를 들어, 인터넷 프로토콜 텔레비전(Internet Protocol Television)이나 디지털 멀티미디어 브로드캐스팅(Digital Multimedia Broadcasting) 단말기 등은 사용자 로그인 절차 없이 해당 전자기기에서 제공되는 서비스를 사용자에게 제공한다.However, not all electronic devices used in the communication network pre-register user information or perform login. For example, an Internet Protocol Television or a Digital Multimedia Broadcasting terminal provides a user with a service provided by the electronic device without a user login procedure.

그러므로 통신망을 사용하여 각 사용자에게 타겟 광고를 제공하고자 하는 경우에 사용자 인증 절차를 수행하지 않는 전자기기들에 대해서는 각 사용자에 대한 정보를 획득할 수 없으므로 각 사용자에게 적합한 타겟 광고를 제공하기 어렵다는 문제점이 있었다.Therefore, it is difficult to provide the appropriate target advertisement for each user because the information about each user cannot be obtained for the electronic devices that do not perform the user authentication procedure when the target network is intended to provide the target advertisement to each user using a communication network. there was.

본 발명의 목적은 타겟 광고를 사용자 인증 절차 없이 제공하는 광고 제공 시스템 및 방법을 제공한다.An object of the present invention is to provide an advertisement providing system and method for providing a target advertisement without a user authentication procedure.

본 발명의 다른 목적은 각 사용자에게 적합한 타겟 광고를 제공하는 광고 제공 시스템 및 방법을 제공한다.Another object of the present invention is to provide an advertisement providing system and method for providing a target advertisement suitable for each user.

상기한 목적들을 달성하기 위한 본 발명의 시스템은 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 사용자 음성을 이용하여 사용자 특성 정보를 추출하고, 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 음성 인식 및 콘텐츠 재생 장치와, 상기 음성 인식 및 콘텐츠 재생 장치와 통신망을 통해 연결되어 콘텐츠와 광고를 제공하는 서비스 제공 서버를 포함한다.According to an embodiment of the present invention, when a user voice requesting content provision is input, the system extracts user characteristic information using the user voice, and plays an advertisement corresponding to the user characteristic information together with the requested content. And a service providing server connected to the voice recognition and content reproducing apparatus and the voice recognition and content reproducing apparatus through a communication network to provide contents and advertisements.

상기한 목적들을 달성하기 위한 본 발명의 음성 인식 및 콘텐츠 재생 장치는 데이터를 송수신하는 통신부와, 사용자 음성에 대응되는 음성 특성 정보가 저장된 저장부와, 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 상기 음성 특성 정보를 이용하여 사용자 특성 정보를 추출하는 사용자 특성 정보 추출부와, 상기 사용 자 음성을 음성 인식하여 사용자로부터 요청된 콘텐츠를 선택하는 콘텐츠 선택부와, 사용자 특성 정보에 상응하여 선택된 광고를 상기 선택된 콘텐츠와 함께 재생하는 재생부를 포함한다.To achieve the above objects, the apparatus for recognizing speech and contents of the present invention includes a communication unit for transmitting / receiving data, a storage unit for storing voice characteristic information corresponding to a user voice, and a user voice requesting to provide content. A user characteristic information extraction unit for extracting user characteristic information using voice characteristic information, a content selection unit for recognizing the user's voice and selecting requested content from the user, and an advertisement selected according to the user characteristic information; It includes a playback unit to play along with the selected content.

상기한 목적들을 달성하기 위한 본 발명의 서비스 제공 서버는 데이터를 송수신하는 통신부와, 콘텐츠와 광고가 저장된 데이터베이스와, 음성 인식 및 콘텐츠 재생 장치로부터 사용자 음성으로부터 추출된 사용자 특성 정보를 수신하면, 사용자 특성 정보에 상응한 광고를 선택하여 상기 음성 인식 및 콘텐츠 재생 장치로 송신하는 광고 선택부를 포함한다.The service providing server of the present invention for achieving the above objects is characterized in that the communication unit for transmitting and receiving data, the database storing the content and advertisement, and the user characteristic information extracted from the user voice from the voice recognition and content playback device, And an advertisement selection unit for selecting an advertisement corresponding to the information and transmitting the selected advertisement to the speech recognition and content reproduction apparatus.

상기한 목적들을 달성하기 위한 본 발명의 방법은 음성 인식 및 콘텐츠 재생 장치의 광고 제공 방법에 있어서, 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 입력된 사용자 음성을 이용하여 사용자 특성 정보를 추출하는 단계와, 상기 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 단계를 포함한다.According to an aspect of the present invention, there is provided a method of providing a voice recognition and advertisement of an apparatus for reproducing a content. When a user voice requesting content is input, extracting user characteristic information using the input user voice. And playing the advertisement corresponding to the user characteristic information together with the requested content.

상기한 목적들을 달성하기 위한 본 발명의 다른 방법은 서비스 제공 서버의 광고 제공 방법에 있어서, 음성 인식 및 콘텐츠 재생 장치로부터 사용자 음성으로부터 추출된 사용자 특성 정보를 수신하는 단계와, 상기 사용자 특성 정보에 상응한 광고를 상기 데이터베이스에 저장된 광고 중에서 선택하여 상기 음성 인식 및 콘텐츠 재생 장치로 송신한다.According to another aspect of the present invention, there is provided a method of providing an advertisement of a service providing server, the method comprising: receiving user characteristic information extracted from a user's voice from a voice recognition and content playback device, and corresponding to the user characteristic information; An advertisement is selected from the advertisements stored in the database and transmitted to the speech recognition and content reproduction apparatus.

본 발명에 의하면, 사용자 정보 사전 등록, 로그인 등과 같은 사용자 인증 절차없이 사용자에게 타겟 광고를 제공하는 것이 가능하다는 이점을 갖는다. 또한, 광고 수요자 정보를 획득함에 있어 사용자 인증 절차 없이 광고 수요자 정보를 획득하고 획득된 정보를 이용하여 사용자에게 타겟 광고를 제공하는 것이 가능하다는 이점을 갖는다.According to the present invention, it is possible to provide a target advertisement to a user without a user authentication procedure such as user information pre-registration, login, or the like. In addition, in acquiring the advertisement consumer information, it is possible to obtain the advertisement consumer information without providing a user authentication procedure and to provide the target advertisement to the user by using the obtained information.

이하, 본 발명에 따른 바람직한 실시예를 첨부한 도면을 참조하여 상세히 설명한다. 하기의 설명에서는 본 발명에 따른 동작을 이해하는데 필요한 부분만이 설명되며 그 이외 부분의 설명은 본 발명의 요지를 흩트리지 않도록 생략될 것이라는 것을 유의하여야 한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings. It should be noted that in the following description, only parts necessary for understanding the operation according to the present invention will be described, and descriptions of other parts will be omitted so as not to distract from the gist of the present invention.

본 발명은 통신 시스템에서 사용자 특성 정보를 이용하여 타겟 광고를 제공하는 광고 제공 시스템 및 방법을 제공한다. 특히 본 발명은 사용자 음성으로부터 추출한 사용자 특성 정보를 이용하여 타겟 광고를 제공하는 광고 제공 시스템 및 방법을 제공한다.The present invention provides an advertisement providing system and method for providing a target advertisement using user characteristic information in a communication system. In particular, the present invention provides an advertisement providing system and method for providing a target advertisement using user characteristic information extracted from a user's voice.

또한, 상기 사용자 특성 정보는 사용자에 대한 영상 데이터 획득이 가능한 경우 상기 영상 데이터로부터 추출한 사용자 특성 정보를 이용하여 타겟 광고를 제공할 수도 있다.In addition, the user characteristic information may provide a target advertisement using user characteristic information extracted from the image data when image data of the user can be obtained.

한편, 음성 인식 기술은 사용자 음성을 이용하여 차세대 기술 분야에서 각종 전자기기와의 통신을 위한 필수분야로 자리를 잡아가고 있다. 이러한 음성 인식 기술을 사용하여 각종 전자기기를 제어하는 것이 가능하며, 이러한 전자 기기를 제어하기 위해 각종 전자기기에 음성 인식 기술을 적용하는 형태로 점차 변화해가고 있다.On the other hand, voice recognition technology is taking place as an essential field for communication with various electronic devices in the next-generation technology using the user voice. It is possible to control a variety of electronic devices using such a voice recognition technology, in order to control the electronic devices are gradually changing to the form of applying the voice recognition technology to various electronic devices.

본 발명에서는 음성 인식이 가능한 음성 인식 및 콘텐츠 재생 장치를 일예로 설명하기로 하며, 특히 사용자에게 콘텐츠 제공이 가능한 음성 인식 및 콘텐츠 재생 장치를 사용하여 광고를 제공하는 것을 설명하기로 한다. 또한, 상기 영상 데이터를 이용하여 타겟 광고를 제공하는 경우에는 영상 인식 장치, 일예로 카메라 등을 구비한 전자기기가 될 수 있다.In the present invention, a speech recognition and content playback apparatus capable of speech recognition will be described as an example, and in particular, an advertisement is provided using a speech recognition and content playback apparatus capable of providing contents to a user. In addition, when providing a target advertisement using the image data may be an electronic device having an image recognition device, for example a camera.

그러면 다음으로 본 발명에 따른 광고를 제공하는 시스템 구조를 하기의 도 1을 참조하여 설명하기로 한다.Next, a system structure for providing an advertisement according to the present invention will be described with reference to FIG. 1 below.

도 1은 본 발명의 실시예에 따른 광고 제공 시스템 구조를 도시한 도면이다.1 is a diagram showing the structure of an advertisement providing system according to an embodiment of the present invention.

도 1을 참조하면, 광고 제공 시스템은 음성 인식 및 콘텐츠 재생 장치(110)와 서비스 제공 서버(120)를 포함한다.Referring to FIG. 1, the advertisement providing system includes a voice recognition and content reproducing apparatus 110 and a service providing server 120.

상기 음성 인식 및 콘텐츠 재생 장치(110)는 사용자의 음성에 의해 제어되는 사용자 장치이다. 상기 음성 인식 및 콘텐츠 재생 장치(110)는 음성 인식 기능을 구비하여 사용자 음성이 입력되면 사용자 음성을 인식한다. 그리고 상기 음성 인식 및 콘텐츠 재생 장치(110)는 인식된 사용자 음성에 따른 제어 동작을 수행한다.The voice recognition and content playback device 110 is a user device controlled by a user's voice. The voice recognition and content reproducing apparatus 110 has a voice recognition function and recognizes a user voice when a user voice is input. The voice recognition and content reproducing apparatus 110 performs a control operation according to the recognized user voice.

또한, 상기 음성 인식 및 콘텐츠 재생 장치(110)는 사용자 음성을 이용하여 사용자 특성 정보, 예를 들어 사용자 연령, 성별, 감정 등에 관련된 정보를 추출하고, 상기 사용자 특성 정보를 이용하여 광고를 선택적으로 사용자에게 제공한다.In addition, the voice recognition and content playback apparatus 110 extracts user characteristic information, for example, information related to user age, gender, emotion, etc. using a user voice, and selectively uses an advertisement for the user using the user characteristic information. To provide.

예를 들어, 상기 사용자 제어 정보가 콘텐츠 제공을 요청하는 사용자 제어 정보이면, 상기 음성 인식 및 콘텐츠 재생 장치(110)는 콘텐츠 제공 시 사용자 제어 정보를 이용하여 광고를 선택적으로 제공한다.For example, if the user control information is user control information for requesting content provision, the voice recognition and content reproducing apparatus 110 selectively provides an advertisement using user control information when providing content.

상기 서비스 제공 서버(120)는 상기 음성 인식 및 콘텐츠 재생 장치(110)와 유무선 통신망을 통해 연결되어 있으며, 콘텐츠와 광고가 저장 또는 제공되는 서버이다. 상기 서비스 제공 서버(120)는 광고 서버 및/또는 콘텐츠 서버를 포함하거나 상기 광고 서버 또는 콘텐츠 서버와 연결된 별도의 서버가 될 수 있다. 또한 서비스 제공 서버(120)는 콘텐츠와 광고만을 저장한 데이터베이스가 될 수도 있다.The service providing server 120 is connected to the voice recognition and content reproducing apparatus 110 through a wired / wireless communication network, and is a server in which contents and advertisements are stored or provided. The service providing server 120 may include an advertisement server and / or a content server or may be a separate server connected to the advertisement server or the content server. In addition, the service providing server 120 may be a database storing only content and advertisements.

상기 서비스 제공 서버(120)는 상기 음성 인식 및 콘텐츠 재생 장치(110)에 콘텐츠 또는 광고를 제공한다.The service providing server 120 provides content or an advertisement to the voice recognition and content playback device 110.

또한, 상기 서비스 제공 서버(120)는 상기 음성 인식 및 콘텐츠 재생 장치(110)로부터 상기 사용자 특성 정보를 수신하는 경우에는 사용자 특성 정보를 이용하여 상기 음성 인식 및 콘텐츠 재생 장치(110)에 제공할 광고를 선택하고 선택된 광고를 제공할 수도 있다.In addition, when the service providing server 120 receives the user characteristic information from the speech recognition and content reproduction apparatus 110, an advertisement to be provided to the speech recognition and content reproduction apparatus 110 using user characteristic information. It may select and provide the selected advertisement.

그러면 다음으로 광고를 제공하는 음성 인식 및 콘텐츠 재생 장치의 구조를 하기의 도 2를 참조하여 설명하기로 한다.Next, a structure of a speech recognition and content reproduction device for providing an advertisement will be described with reference to FIG. 2.

도 2는 본 발명의 실시예에 따른 음성 인식 및 콘텐츠 재생 장치의 구조를 도시한 도면이다.2 is a diagram showing the structure of a voice recognition and content playback device according to an embodiment of the present invention.

도 2를 참조하면, 음성 인식 및 콘텐츠 재생 장치는 음성 인식부(211), 사용자 특성 정보 추출부(213), 재생부(215), 통신부(217), 콘텐츠 선택부(219), 저장부(221)를 포함한다. 또한 상기 음성 인식 및 콘텐츠 재생 장치는 광고 선택부(223)를 선택적으로 포함할 수 있다.Referring to FIG. 2, the apparatus for recognizing speech and contents may include a speech recognizer 211, a user characteristic information extractor 213, a reproducer 215, a communicator 217, a content selector 219, and a storage unit ( 221). In addition, the voice recognition and content playback device may optionally include an advertisement selection unit 223.

상기 음성 인식부(211)는 사용자 음성을 입력받고, 입력받은 사용자 음성을 음성 인식한다. 즉, 상기 음성 인식부(211)는 음성 인식을 통해 사용자로부터 요청된 사용자 제어 정보를 추출한다. 여기서 사용자 제어 정보는 음성 인식 및 콘텐츠 재생 장치의 동작 제어를 위해 사용자로부터 입력받은 정보이다.The voice recognition unit 211 receives a user voice, and recognizes the received user voice. That is, the voice recognition unit 211 extracts user control information requested from the user through voice recognition. In this case, the user control information is information received from the user for voice recognition and operation control of the content reproducing apparatus.

상기 음성 인식부(211)는 일예로, 음성 인식 알고리즘의 일종으로 음성 신호의 변동을 확률적으로 취급하는 히든 마코브 모델(HMM: Hidden Markov Model) 음성 인식 방식을 사용한다고 가정한다. 또한 상기 음성 인식부(211)는 상기 음성 인식을 위해서 다른 음성 인식 방식을 사용할 수도 있다. 상기 음성 인식부(211)는 입력된 사용자 음성을 저장부(221)의 모델링된 제어 정보와 비교하여 입력된 사용자 음성을 통해 사용자 제어 정보를 추출한다. 상기 제어 정보는 음성 인식 및 콘텐츠 재생 장치의 동작을 전반적으로 제어하기 위한 정보들이고, 일예로, 특정 콘텐츠를 선택 및/또는 재생하기 위한 제어 정보 등을 포함한다.For example, it is assumed that the speech recognition unit 211 uses a Hidden Markov Model (HMM) speech recognition method that probabilistically handles fluctuations in a speech signal as a kind of speech recognition algorithm. In addition, the voice recognition unit 211 may use another voice recognition method for the voice recognition. The voice recognition unit 211 extracts user control information through the input user voice by comparing the input user voice with the modeled control information of the storage unit 221. The control information is information for controlling overall operations of the voice recognition and content reproducing apparatus. For example, the control information includes control information for selecting and / or reproducing specific content.

상기 음성 인식부(211)가 음성 인식한 사용자 제어 정보는 예를 들어, 콘텐츠의 제공을 요청하는 콘텐츠 요청 정보(콘텐츠 선택 정보)라 가정한다.It is assumed that the user control information recognized by the voice recognition unit 211 is content request information (content selection information) for requesting provision of content.

상기 사용자 특성 정보 추출부(213)는 사용자로부터 입력된 사용자 음성을 이용하여 사용자 특성 정보를 추출한다. 상기 사용자 특성 정보 추출부(213)는 입력된 음성을 상기 저장부(221)의 모델링된 음성 특성 정보와 비교하여 입력된 사용자 음성으로부터 사용자 특성 정보를 추출한다. 상기 사용자 음성은 기본 주파수(f0)와 포만트(formant) 주파수들(f1, f2, f3)로 구분될 수 있으며, 사용자 특성 추출부(213)는 기본 주파수와 포만트 주파수를 기준으로 연령, 성별, 감정 등에 관련된 음성 특성 정보가 모델링되어 있는 저장부(221)로부터 사용자 특성 정보를 추 출한다. 상기 음성 특성 정보는 다수의 사람들에 대한 음성의 주파수 특성을 연령, 성별, 감정 등에 따라 분석하여 획득한 정보이다. 일예로, 상기 음성 특성 정보는 연령, 성별, 감정 등에 따라 기본 주파수와 포만트 주파수들로 모델링된 정보이다. 상기 기본 주파수는 사용자의 성대 진동에 의해 생성되는 주파수이며, 상기 기본 주파수를 사용하여 억양, 음색, 음질 등의 특징을 인식할 수 있다. 상기 포만트 주파수들은 일반적으로 사용자의 성도에 의해 생성되는 주파수이며, 공명 주파수로서 다수개가 생성될 수 있다. 상기 기본 주파수와 상기 포만트 주파수들을 사용하면 사용자의 연령, 성별, 감정 등을 검출할 수 있다.The user characteristic information extractor 213 extracts user characteristic information using a user voice input from a user. The user characteristic information extractor 213 extracts user characteristic information from the input user voice by comparing the input voice with the modeled voice characteristic information of the storage unit 221. The user's voice may be divided into a fundamental frequency f0 and formant frequencies f1, f2, and f3, and the user feature extractor 213 may be divided into age and gender based on the fundamental frequency and the formant frequency. The user characteristic information is extracted from the storage unit 221 in which the voice characteristic information related to the emotion, etc. is modeled. The voice characteristic information is information obtained by analyzing frequency characteristics of voice for a plurality of people according to age, gender, emotion, and the like. For example, the voice characteristic information is information modeled as basic frequencies and formant frequencies according to age, gender, and emotion. The fundamental frequency is a frequency generated by vibration of the vocal cords of the user, and may recognize features such as intonation, timbre, and sound quality using the fundamental frequency. The formant frequencies are generally frequencies generated by the user's saints, and a plurality of resonance frequencies may be generated. By using the fundamental frequency and the formant frequencies, the user's age, gender, and emotion may be detected.

따라서 상기 사용자 특성 정보 추출부(213)는 사용자 음성으로부터 상기 기본 주파수와 포만트 주파수를 검출하고, 검출된 주파수들을 이용하여 사용자 특성 정보를 추출한다. 상기 사용자 특성 정보 추출부(213)는 상기 검출된 주파수들을 상기 저장부(221)에 저장된 음성 특성 정보와 비교하여 입력된 사용자 음성에 해당하는 사용자 특성 정보를 추출한다.Accordingly, the user characteristic information extractor 213 detects the fundamental frequency and the formant frequency from the user's voice and extracts user characteristic information using the detected frequencies. The user characteristic information extractor 213 extracts user characteristic information corresponding to the input user voice by comparing the detected frequencies with the voice characteristic information stored in the storage unit 221.

음성 인식부(211)와 사용자 특성 정보 추출부(213)는 사용자 음성 입력을 위한 마이크 등을 구비할 수 있으며, 상기 마이크는 음성 인식부(211) 또는 사용자 특성 정보 추출부(213) 중에 적어도 하나에 구비되어 사용자 음성을 입력받는다.The voice recognition unit 211 and the user characteristic information extraction unit 213 may include a microphone for user voice input, and the microphone may be at least one of the voice recognition unit 211 or the user characteristic information extraction unit 213. It is provided to receive the user's voice.

상기 사용자 특성 정보 추출부(213)는 마이크 대신 카메라 모듈이 구비되거나 카메라 모듈을 추가로 구비하여 사용자로부터 영상 데이터를 검출할 수 있다. 상기 사용자 특성 정보 추출부(213)은 상기 영상 데이터로부터 사용자 특성 정보를 추출할 수도 있다.The user characteristic information extractor 213 may be provided with a camera module instead of a microphone or may further include a camera module to detect image data from a user. The user characteristic information extractor 213 may extract user characteristic information from the image data.

상기 사용자 특성 정보 추출부(213)는 영상 데이터로부터 사용자 위치, 인원, 체격, 동작, 사용 물품, 성별, 연령, 감정 등에 관련된 정보를 검출할 수 있다. 여기서, 상기 사용자 특성 정보는 사용자 위치 정보, 인원 정보, 체격 정보, 동작 정보, 사용 물품 정보, 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함한다.The user characteristic information extractor 213 may detect information related to a user's location, personnel, physique, motion, used article, gender, age, emotion, and the like from the image data. Here, the user characteristic information includes at least one of user location information, personnel information, physique information, motion information, used article information, gender information, age information, and emotion information.

상기 재생부(215)는 출력 장치, 일예로 영상 데이터를 재생하기 위한 디스플레이 장치 또는 음성 데이터 재생을 위한 스피커 등을 구비하고 있으며, 사용자로부터 요청된 콘텐츠를 재생하여 사용자에게 제공한다. 또한, 상기 재생부(215)는 상기 사용자 특성 정보에 따라 선택된 광고를 재생한다.The playback unit 215 includes an output device, for example, a display device for reproducing image data, a speaker for reproducing voice data, and the like, and reproduces the content requested from the user and provides the same to the user. In addition, the playback unit 215 plays the advertisement selected according to the user characteristic information.

상기 통신부(217)는 통신망을 통해 연결된 서비스 제공 서버와 데이터 통신을 수행한다. 상기 통신부(217)는 상기 서비스 제공 서버를 통해 상기 음성 인식 및 콘텐츠 재생 장치에서 재생될 콘텐츠와 광고를 수신한다. 또한, 상기 통신부(217)는 상기 음성 인식 및 콘텐츠 재생 장치의 동작에 따라서 상기 사용자 특성 정보, 상기 음성 인식 및 콘텐츠 재생 장치에서 재생될 콘텐츠 정보, 콘텐츠 요청 정보 중 적어도 하나를 송신하고, 상기 송신 정보에 상응하여 상기 음성 인식 및 콘텐츠 재생 장치에서 요청된 콘텐츠와 사용자 특성 정보에 따라 선택된 광고를 수신한다.The communication unit 217 performs data communication with a service providing server connected through a communication network. The communication unit 217 receives content and advertisement to be played in the voice recognition and content reproduction device through the service providing server. In addition, the communication unit 217 transmits at least one of the user characteristic information, the content information to be reproduced in the voice recognition and content reproducing apparatus, and the content request information according to the operation of the voice recognition and content reproducing apparatus, and the transmission information. Correspondingly, the selected advertisement is received according to the requested content and the user characteristic information in the voice recognition and content reproduction device.

상기 콘텐츠 선택부(219)는 상기 음성 인식부(211)를 통해 인식된 사용자 요청 정보를 이용하여 콘텐츠를 선택하거나 서비스 제공 서버로 선택된 콘텐츠를 요청하는 콘텐츠 요청 정보를 상기 통신부(217)를 통해 송신한다.The content selection unit 219 transmits content request information for selecting a content using the user request information recognized by the voice recognition unit 211 or requesting the selected content to the service providing server through the communication unit 217. do.

상기 광고 선택부(223)는 상기 사용자 특성 정보 추출부(213)를 통해 추출된 사용자 특성 정보에 따라 상기 저장부(221)에 저장된 광고 중에서 광고를 선택한다. 사용자가 가지고 있는 고유의 특성 정보 일예로, 성별, 연령, 감정 등에 따라 사용자에게 적합한 광고를 선택한다. 상기 광고 선택부(223)는 상기 서비스 제공 서버에 포함될 수도 있으며, 상기 광고 선택부(223)가 상기 서비스 제공 서버에 포함되어 광고를 선택하는 경우에는 상기 광고 선택부(223)는 상기 음성 인식 및 콘텐츠 재생 장치에 포함되지 않을 수도 있다.The advertisement selector 223 selects an advertisement from among advertisements stored in the storage unit 221 according to the user characteristic information extracted through the user characteristic information extractor 213. As an example of characteristic information unique to the user, an advertisement suitable for the user is selected according to gender, age, emotion, and the like. The advertisement selecting unit 223 may be included in the service providing server. When the advertisement selecting unit 223 is included in the service providing server to select an advertisement, the advertisement selecting unit 223 may recognize the voice and It may not be included in the content playback device.

또한, 상기 광고 선택부(223)는 광고를 선택하는 경우 상기 음성 인식 및 콘텐츠 재생 장치 또는 외부의 서버 등을 통해 기상 정보, 시간 정보 등의 부가 정보를 추가로 수신할 수 있으며, 광고 선택 시 상기 부가 정보들을 추가로 이용할 수 있다.In addition, when the advertisement is selected, the advertisement selecting unit 223 may additionally receive additional information such as weather information and time information through the voice recognition and content reproducing apparatus or an external server. Additional information may be available further.

상기 저장부(221)는 상기 음성 인식 및 콘텐츠 재생 장치 동작을 위한 프로그램과 상기 음성 인식 및 콘텐츠 재생 장치 동작 시 발생되는 임시 데이터를 저장한다. 또한, 상기 저장부(221)는 콘텐츠와 광고 재생을 위해 콘텐츠와 광고를 저장하거나 일시 저장한다. 그리고 상기 저장부(221)는 상기 음성 인식 및 콘텐츠 재생 장치에 입력된 사용자 음성으로부터 사용자 제어 정보를 인식하기 위한 제어 정보와 사용자 특성 정보 추출을 위한 음성 특성 정보가 모델링되어 저장된다.The storage unit 221 stores a program for operating the voice recognition and content reproducing apparatus and temporary data generated when the voice recognition and content reproducing apparatus is operated. In addition, the storage unit 221 stores or temporarily stores the content and the advertisement for playing the content and the advertisement. The storage unit 221 models and stores control information for recognizing user control information from a user voice input to the voice recognition and content reproducing apparatus and voice property information for extracting user property information.

그러면 다음으로 광고를 제공하는 서비스 제공 서버의 구조를 하기의 도 3을 참조하여 설명하기로 한다.Next, a structure of a service providing server for providing an advertisement will be described with reference to FIG. 3 below.

도 3은 본 발명의 실시예에 따른 서비스 제공 서버의 구조를 도시한 도면이 다.3 is a diagram illustrating a structure of a service providing server according to an exemplary embodiment of the present invention.

도 3을 참조하면, 서비스 제공 서버는 통신부(311), 데이터베이스(313)를 포함한다. 또한, 상기 서비스 제공 서버는 상기 광고 선택부(315)를 선택적으로 포함할 수 있다.Referring to FIG. 3, the service providing server includes a communication unit 311 and a database 313. In addition, the service providing server may optionally include the advertisement selection unit 315.

상기 통신부(311)는 통신망을 통해 연결된 음성 인식 및 콘텐츠 재생 장치와 데이터 통신을 수행한다. 상기 통신부(311)는 상기 음성 인식 및 콘텐츠 재생 장치에서 재생될 콘텐츠와 광고를 송신한다. 또한, 상기 통신부(311)는 상기 음성 인식 및 콘텐츠 재생 장치의 동작에 따라서 상기 사용자 특성 정보, 상기 음성 인식 및 콘텐츠 재생 장치에서 재생될 콘텐츠 정보, 콘텐츠 요청 정보 중 적어도 하나를 수신할 수 있으며, 상기 수신 정보에 상응하여 상기 음성 인식 및 콘텐츠 재생 장치에서 요청된 콘텐츠와 사용자 특성 정보에 따라 선택된 광고를 송신한다.The communication unit 311 performs data communication with a voice recognition and content reproduction device connected through a communication network. The communication unit 311 transmits content and advertisements to be reproduced in the voice recognition and content reproducing apparatus. In addition, the communication unit 311 may receive at least one of the user characteristic information, the content information to be reproduced in the voice recognition and content reproducing apparatus, and the content request information according to the operation of the voice recognition and content reproducing apparatus. In response to the received information, the voice recognition and content reproduction device transmits the selected advertisement according to the requested content and the user characteristic information.

상기 광고 선택부(315)는 상기 음성 인식 및 콘텐츠 재생 장치로부터 사용자 특성 정보가 수신되면, 상기 사용자 특성 정보에 따라 광고를 선택한다. 성별, 연령, 감정 등에 따라 사용자에게 적합한 광고를 상기 데이터베이스(313)에 저장된 광고 중에서 선택한다. 상기 광고 선택부(315)는 상기 음성 인식 및 콘텐츠 재생 장치에 포함될 수도 있으며, 상기 음성 인식 및 콘텐츠 재생 장치에서 광고를 선택하는 경우에는 상기 광고 선택부(315)는 상기 서비스 제공 서버에 포함되지 않을 수도 있다.The advertisement selecting unit 315 selects an advertisement according to the user characteristic information when the user characteristic information is received from the voice recognition and content reproducing apparatus. Advertisements suitable for the user are selected from advertisements stored in the database 313 according to gender, age, emotion, and the like. The advertisement selector 315 may be included in the speech recognition and content reproduction apparatus. When the advertisement is selected in the speech recognition and content reproduction apparatus, the advertisement selection unit 315 may not be included in the service providing server. It may be.

또한, 상기 광고 선택부(315)는 광고를 선택하는 경우 상기 서비스 제공 서버 또는 외부의 서버 등을 통해 기상 정보, 시간 정보 등의 부가 정보를 추가로 수 신할 수 있으며, 광고 선택 시 상기 부가 정보들을 추가로 이용할 수 있다.In addition, when the advertisement is selected, the advertisement selecting unit 315 may further receive additional information such as weather information and time information through the service providing server or an external server. Additionally available.

상기 데이터베이스(313)는 콘텐츠와 광고를 저장한다.The database 313 stores content and advertisements.

그러면 다음으로 본 발명의 실시예에 따른 음성 인식 및 콘텐츠 재생 장치의 동작을 하기의 도 4를 참조하여 설명하기로 한다.Next, the operation of the apparatus for recognizing speech and contents according to the embodiment of the present invention will be described with reference to FIG. 4.

도 4는 본 발명의 실시예에 따른 음성 인식 및 콘텐츠 재생 장치의 동작을 도시한 순서도이다.4 is a flowchart illustrating the operation of a voice recognition and content playback device according to an embodiment of the present invention.

도 4를 참조하면, 411단계에서 음성 인식 및 콘텐츠 재생 장치는 상기 음성 인식 및 콘텐츠 재생 장치는 사용자로부터 음성을 입력받고 413단계로 진행한다.Referring to FIG. 4, in step 411, the voice recognition and content reproducing apparatus receives the voice from the user, and proceeds to step 413.

상기 413단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 입력된 사용자 음성을 이용하여 사용자 제어 정보를 추출하고 415단계로 진행한다. 여기서 사용자 제어 정보는 일예로, 콘텐츠 요청 정보라 가정한다.In step 413, the voice recognition and content reproducing apparatus extracts user control information using the input user voice, and proceeds to step 415. In this case, it is assumed that the user control information is content request information.

상기 415단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 입력된 사용자 음성을 이용하여 사용자 특성 정보를 추출하고 417단계로 진행한다. 상기 사용자 특성 정보는 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함하며, 상기 음성 인식 및 콘텐츠 재생 장치가 카메라 모듈을 구비하여 사용자 영상 데이터를 입력하는 것이 가능한 경우에는 상기 성별 정보, 연령 정보, 감정 정보 이외에 더욱 다양한 사용자 특성 정보를 활용할 수 있다.In step 415, the voice recognition and content reproducing apparatus extracts user characteristic information using the input user voice, and proceeds to step 417. The user characteristic information includes at least one of gender information, age information, and emotion information. When the voice recognition and content reproducing apparatus includes a camera module to input user image data, the gender information, age information, In addition to the emotion information, a variety of user characteristic information may be utilized.

상기 417단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 음성 인식 및 콘텐츠 재생 장치에 콘텐츠가 저장되어 있는지 확인한다.In step 417, the voice recognition and content reproducing apparatus checks whether content is stored in the voice recognition and content reproducing apparatus.

상기 확인결과 콘텐츠가 저장되어 있는 경우에는 421단계로 진행한다.If the content of the check result is stored, the process proceeds to step 421.

상기 421단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 광고가 저장되어 있는지 판단한다.In step 421, the voice recognition and content playback device determines whether an advertisement is stored.

상기 판단결과 상기 광고가 저장되어 있는 경우에는 427단계로 진행한다.If the advertisement is stored as a result of the determination, step 427 is performed.

상기 427단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 재생될 콘텐츠와 광고를 선택하고 439단계로 진행한다. 상기 음성 인식 및 콘텐츠 재생 장치는 상기 사용자 제어 정보를 이용하여 재생될 콘텐츠를 선택하고, 상기 사용자 특성 정보를 이용하여 재생될 광고를 선택한다. 또한, 상기 음성 인식 및 콘텐츠 재생 장치는 상기 광고 선택 시 재생될 콘텐츠를 추가로 고려하여 광고를 선택할 수 있다.In step 427, the voice recognition and content playback device selects content and advertisement to be played and proceeds to step 439. The voice recognition and content reproducing apparatus selects a content to be reproduced using the user control information, and selects an advertisement to be reproduced using the user characteristic information. In addition, the voice recognition and content playback device may select an advertisement by further considering content to be played upon selecting the advertisement.

상기 판단결과 상기 광고가 저장되어 있지 않은 경우에는 423단계로 진행한다.If the advertisement is not stored as a result of the determination, step 423 is performed.

상기 423단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 재생 콘텐츠 정보와 사용자 특성 정보를 서비스 제공 서버로 송신하고 425단계로 진행한다. 상기 음성 인식 및 콘텐츠 재생 장치는 상기 사용자 제어 정보를 이용하여 재생될 콘텐츠를 선택하고, 상기 재생될 콘텐츠를 인식할 수 있는 정보인 재생 콘텐츠 정보를 서비스 제공 서버로 송신한다. 만약, 상기 서비스 제공 서버에서 광고를 선택함에 있어 재생 콘텐츠 정보를 고려하여 광고를 선택하지 않는 경우에 상기 재생 콘텐츠 정보는 송신되지 않을 수도 있다.In step 423, the voice recognition and content reproducing apparatus transmits the reproduced content information and the user characteristic information to the service providing server and proceeds to step 425. The voice recognition and content reproducing apparatus selects the content to be reproduced using the user control information, and transmits the reproduction content information, which is information for recognizing the content to be reproduced, to the service providing server. If the advertisement providing server does not select the advertisement in consideration of the reproduction content information, the reproduction content information may not be transmitted.

상기 425단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 사용자 특성 정보에 상응하여 선택된 광고를 수신하고 439단계로 진행한다.In operation 425, the apparatus for recognizing speech and contents reproduces an advertisement selected according to the user characteristic information and proceeds to operation 439.

상기 확인결과 상기 콘텐츠가 저장되어 있지 않은 경우에는 419단계로 진행 한다.If the content is not stored as a result of the check, the process proceeds to step 419.

상기 419단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 음성 인식 및 콘텐츠 재생 장치에 광고가 저장되어 있는지 검사한다.In step 419, the voice recognition and content playback device checks whether an advertisement is stored in the voice recognition and content playback device.

상기 검사결과 상기 광고가 저장되어 있는 경우에는 429단계로 진행한다.If the advertisement is stored as a result of the inspection, the process proceeds to step 429.

상기 429단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 사용자 특성 정보를 이용하여 광고를 선택하고 431단계로 진행한다.In step 429, the voice recognition and content playback device selects an advertisement using the user characteristic information and proceeds to step 431.

상기 431단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 콘텐츠 제공을 요청하는 콘텐츠 요청 정보를 서비스 제공 서버로 송신하고 433단계로 진행한다.In step 431, the voice recognition and content reproducing apparatus transmits content request information for requesting content provision to the service providing server, and proceeds to step 433.

상기 433단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 콘텐츠 제공 요청에 따른 콘텐츠를 수신하고 439단계로 진행한다. 만약, 상기 음성 인식 및 콘텐츠 재생 장치가 상기 서비스 제공 서버로부터 제공된 콘텐츠 정보를 추가로 고려하여 광고를 선택하는 경우에 상기 429단계는 상기 433단계 다음에 수행될 수도 있다.In step 433, the voice recognition and content reproducing apparatus receives the content according to the content providing request, and proceeds to step 439. If the voice recognition and content reproducing apparatus selects an advertisement by further considering content information provided from the service providing server, step 429 may be performed after step 433.

상기 검사결과 상기 광고가 저장되어 있지 않은 경우에는 435단계로 진행한다.If the advertisement is not stored as a result of the inspection, the flow proceeds to step 435.

상기 435단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 콘텐츠 제공을 요청하는 콘텐츠 요청 정보와 상기 사용자 특성 정보를 송신하고 437단계로 진행한다.In step 435, the voice recognition and content reproducing apparatus transmits content request information and the user characteristic information requesting to provide content, and proceeds to step 437.

상기 437단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 상기 서비스 제공 서버로부터 요청한 콘텐츠와 사용자 특성 정보에 상응한 광고를 수신하고 439단계 로 진행한다.In step 437, the voice recognition and content playback device receives an advertisement corresponding to the requested content and user characteristic information from the service providing server and proceeds to step 439.

상기 439단계에서 상기 음성 인식 및 콘텐츠 재생 장치는 저장되거나 서비스 제공 서버로부터 수신한 콘텐츠와 광고를 재생한다. 상기 음성 인식 및 콘텐츠 재생 장치는 광고 재생 시 상기 콘텐츠 재생 전, 재생 중, 재생 이후 중 적어도 하나의 시점에 재생할 수 있다.In operation 439, the apparatus for recognizing speech and contents reproduces the content and the advertisement stored or received from the service providing server. The speech recognition and content playback apparatus may play back at least one time point before, during, or after playback of the content.

그러면 다음으로 본 발명의 실시예에 따른 서비스 제공 서버의 동작을 하기의 도 5를 참조하여 설명하기로 한다.Next, the operation of the service providing server according to an exemplary embodiment of the present invention will be described with reference to FIG. 5.

도 5는 본 발명의 실시예에 따른 서비스 제공 서버의 동작을 도시한 순서도이다.5 is a flowchart illustrating an operation of a service providing server according to an exemplary embodiment of the present invention.

도 5를 참조하면, 511단계에서 서비스 제공 서버는 음성 인식 및 콘텐츠 재생 장치로부터 콘텐츠 요청 정보만을 수신하였는지 확인한다.Referring to FIG. 5, in step 511, the service providing server checks whether only content request information is received from the voice recognition and content reproducing apparatus.

상기 확인결과 상기 콘텐츠 요청 정보만을 수신한 경우에는 515단계로 진행한다. 상기 콘텐츠 요청 정보만을 수신한 경우는 상기 음성 인식 및 콘텐츠 재생 장치에 광고가 저장되어 있어 콘텐츠만 요청하는 경우이다.If only the content request information is received as a result of the checking, the process proceeds to step 515. When only the content request information is received, an advertisement is stored in the voice recognition and content reproducing apparatus to request only content.

상기 515단계에서 상기 서비스 제공 서버는 상기 음성 인식 및 콘텐츠 재생 장치로부터 요청된 해당 콘텐츠를 송신한다.In step 515, the service providing server transmits the corresponding content requested from the voice recognition and content reproducing apparatus.

상기 확인결과 상기 콘텐츠 요청 정보만을 수신하지 않은 경우에는 515단계로 진행한다.If only the content request information is not received, the process proceeds to step 515.

상기 513단계에서 상기 서비스 제공 서버는 콘텐츠 요청 정보와 사용자 특성 정보를 모두 수신하였는지 판단한다.In step 513, the service providing server determines whether both the content request information and the user characteristic information have been received.

상기 판단결과 상기 콘텐츠 요청 정보와 상기 사용자 특성 정보를 모두 수신한 경우에는 523단계로 진행한다. 상기 콘텐츠 요청 정보와 상기 사용자 특성 정보를 모두 수신한 경우는 상기 이동 단말기로 콘텐츠와 광고를 모두 송신해야하는 경우이다.If both the content request information and the user characteristic information are received as a result of the determination, step 523 is performed. When both the content request information and the user characteristic information are received, it is a case where both the content and the advertisement should be transmitted to the mobile terminal.

상기 523단계에서 상기 서비스 제공 서버는 상기 콘텐츠 요청 정보에 따라 상기 음성 인식 및 콘텐츠 재생 장치로 송신할 콘텐츠를 선택하고 525단계로 진행한다.In step 523, the service providing server selects content to be transmitted to the voice recognition and content reproducing apparatus according to the content request information, and proceeds to step 525.

상기 525단계에서 상기 서비스 제공 서버는 상기 사용자 특성 정보에 상응하여 상기 음성 인식 및 콘텐츠 재생 장치로 제공할 광고를 선택하고 527단계로 진행한다. 상기 서비스 제공 서버는 상기 광고 선택 시 상기 선택된 콘텐츠 정보를 추가로 고려하여 상기 광고를 선택할 수도 있다.In step 525, the service providing server selects an advertisement to be provided to the voice recognition and content player according to the user characteristic information, and proceeds to step 527. The service providing server may select the advertisement by further considering the selected content information when selecting the advertisement.

상기 527단계에서 상기 서비스 제공 서버는 상기 음성 인식 및 콘텐츠 재생 장치로 상기 선택된 광고를 송신한다.In step 527, the service providing server transmits the selected advertisement to the voice recognition and content playback device.

상기 판단결과 상기 콘텐츠 요청 정보와 상기 사용자 특성 정보를 모두 수신하지 않은 경우에는 517단계로 진행한다. 상기 콘텐츠 요청 정보와 상기 사용자 특성 정보를 모두 수신하지 않은 경우는 상기 음성 인식 및 콘텐츠 재생 장치에 콘텐츠가 저장되어 있어 광고만을 요청하는 경우이다.If it is determined that neither the content request information nor the user characteristic information is received, the process proceeds to step 517. When neither the content request information nor the user characteristic information is received, the content is stored in the voice recognition and content reproduction device and only an advertisement is requested.

상기 517단계에서 상기 서비스 제공 서버는 재생될 콘텐츠 정보와 사용자 특성 정보를 수신하였는지 검사한다.In step 517, the service providing server checks whether content information and user characteristic information to be played are received.

상기 검사결과 상기 재생될 콘텐츠 정보와 상기 사용자 특성 정보를 모두 수 신하지 않은 경우에는 519단계로 진행한다. 이때 상기 서비스 제공 서버는 사용자 특성 정보만을 수신한 경우이다.If neither the content information to be reproduced nor the user characteristic information is received as a result of the inspection, step 519 is performed. In this case, the service providing server receives only user characteristic information.

상기 검사결과 상기 재생될 콘텐츠 정보와 상기 사용자 특성 정보를 수신한 경우에는 519단계로 진행한다.When the content information to be reproduced and the user characteristic information are received as a result of the inspection, the process proceeds to step 519.

상기 519단계에서 상기 서비스 제공 서버는 사용자 특성 정보에 상응한 광고를 선택하고 521단계로 진행한다. 상기 서비스 제공 서버는 재생될 콘텐츠 정보가 수신된 경우에는 상기 콘텐츠 정보를 추가로 고려하여 상기 광고를 선택한다.In step 519, the service providing server selects an advertisement corresponding to user characteristic information, and proceeds to step 521. The service providing server selects the advertisement by further considering the content information when the content information to be reproduced is received.

상기 521단계에서 상기 서비스 제공 서버는 상기 선택된 광고를 상기 음성 인식 및 콘텐츠 재생 장치로 송신한다.In step 521, the service providing server transmits the selected advertisement to the voice recognition and content reproduction apparatus.

상기 음성 인식 및 콘텐츠 재생 장치는 내부에 콘텐츠와 광고를 사전에 저장하고 있을 수 있으며, 서비스 제공 서버로부터 수신하여 저장하고 있을 수 있다. 이러한 경우 상기 음성 인식 및 콘텐츠 재생 장치는 상기 서비스 제공 서버로 별도의 데이터 수신 없이 상기 음성 인식 및 콘텐츠 재생 장치에서 콘텐츠와 광고를 제공하는 것이 가능하다.The voice recognition and content playback device may store content and advertisement in advance, and may receive and store the content and the advertisement from a service providing server. In this case, the voice recognition and content reproducing apparatus may provide content and an advertisement in the voice recognition and content reproducing apparatus without receiving data separately from the service providing server.

본 발명에서는 사용자 특성 정보 추출을 통해서 각 사용자에게 최적화된 종류의 타겟 광고를 제공하는 것이 가능하다. 특히, 음성 인식을 통해 입력된 사용자 음성으로부터 사용자 특성 정보를 추출함으로서 사용자 정보 사전 등록이나 인증 절차 없이도 사용자에게 타겟 광고를 제공할 수 있다.In the present invention, it is possible to provide an optimized kind of target advertisement for each user through extraction of user characteristic information. In particular, by extracting user characteristic information from a user's voice input through voice recognition, a target advertisement can be provided to a user without pre-registration or authentication of user information.

한편 본 발명의 상세한 설명에서는 구체적인 실시예에 관해 설명하였으나, 본 발명의 범위에서 벗어나지 않는 한도내에서 여러 가지 변형이 가능함은 물론이 다. 그러므로 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 안되며 후술하는 특허청구의 범위뿐만 아니라 이 특허청구의 범위와 균등한 것들에 의해 정해져야 한다.Meanwhile, in the detailed description of the present invention, specific embodiments have been described, but various modifications are possible without departing from the scope of the present invention. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be defined not only by the scope of the following claims, but also by the equivalents of the claims.

상술한 본 발명의 광고 제공 방법은 통신 시스템에 적용될 수 있으며, 음성 인식이 가능한 단말기를 구비한 사용자에게 사용자 정보 사전 등록, 로그인 등과 같은 사용자 인증 절차없이 사용자에게 타겟 광고를 제공하는 데에 유용하게 활용된다.The advertisement providing method of the present invention described above may be applied to a communication system, and is usefully used to provide a target advertisement to a user without a user authentication procedure such as pre-registration of user information or login to a user having a terminal capable of speech recognition. do.

도 1은 본 발명의 실시예에 따른 광고 제공 시스템 구조를 도시한 도면, 1 is a diagram showing the structure of an advertisement providing system according to an embodiment of the present invention;

도 2는 본 발명의 실시예에 따른 음성 인식 및 콘텐츠 재생 장치의 구조를 도시한 도면, 2 is a diagram illustrating a structure of a voice recognition and content playback device according to an embodiment of the present invention;

도 3은 본 발명의 실시예에 따른 서비스 제공 서버의 구조를 도시한 도면, 3 is a diagram showing the structure of a service providing server according to an embodiment of the present invention;

도 4는 본 발명의 실시예에 따른 음성 인식 및 콘텐츠 재생 장치의 동작을 도시한 순서도, 4 is a flowchart illustrating an operation of a voice recognition and content playback device according to an embodiment of the present invention;

도 5는 본 발명의 실시예에 따른 서비스 제공 서버의 동작을 도시한 순서도. 5 is a flowchart illustrating an operation of a service providing server according to an exemplary embodiment of the present invention.

< 도면의 주요 부분에 대한 부호의 설명 ><Description of Symbols for Main Parts of Drawings>

110 : 음성 인식 및 콘텐츠 재생 장치110: speech recognition and content playback device

120 : 서비스 제공 서버120: service providing server

211 : 음성 인식부 213 : 사용자 특성 정보 추출부211: speech recognition unit 213: user characteristic information extraction unit

215 : 재생부 217 : 통신부215: playback unit 217: communication unit

219 : 콘텐츠 선택부 221 : 저장부219: content selection unit 221: storage unit

223 : 광고 선택부223: Ad selection unit

311 : 통신부 313 : 데이터베이스311: communication unit 313: database

315 : 광고 선택부315: ad selection unit

Claims (25)

콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 상기 사용자 음성을 이용하여 사용자 특성 정보를 추출하고, 상기 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 음성 인식 및 콘텐츠 재생 장치와,A voice recognition and content reproducing apparatus that extracts user characteristic information using the user's voice and plays an advertisement corresponding to the user characteristic information along with the requested content when a user's voice requesting content provision is input; 상기 음성 인식 및 콘텐츠 재생 장치와 통신망을 통해 연결되어 콘텐츠와 광고를 제공하는 서비스 제공 서버를 포함하는 광고 제공 시스템.And a service providing server connected to the voice recognition and content reproducing apparatus through a communication network to provide contents and advertisements. 데이터를 송수신하는 통신부와,Communication unit for transmitting and receiving data, 사용자 음성에 대응되는 음성 특성 정보가 저장된 저장부와,A storage unit for storing voice characteristic information corresponding to a user voice; 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 상기 음성 특성 정보를 이용하여 사용자 특성 정보를 추출하는 사용자 특성 정보 추출부와,A user characteristic information extraction unit for extracting user characteristic information using the voice characteristic information when a user voice requesting content provision is input; 상기 사용자 음성을 음성 인식하여 사용자로부터 요청된 콘텐츠를 선택하는 콘텐츠 선택부와,A content selection unit configured to voice-recognize the user's voice and select content requested by the user; 사용자 특성 정보에 상응하여 선택된 광고를 상기 선택된 콘텐츠와 함께 재생하는 재생부를 포함하는 음성 인식 및 콘텐츠 재생 장치.And a playback unit for playing an advertisement selected according to user characteristic information together with the selected content. 제 2 항에 있어서,The method of claim 2, 상기 사용자 특성 정보에 상응하여 사용자에게 제공할 광고를 선택하는 광고 선택부를 더 포함하는 음성 인식 및 콘텐츠 재생 장치.And an advertisement selector for selecting an advertisement to be provided to the user according to the user characteristic information. 제 2 항에 있어서,The method of claim 2, 상기 통신부는 상기 사용자 특성 정보를 상기 서비스 제공 서버로 송신하고, 상기 사용자 특성 정보에 상응하여 선택된 광고를 수신함을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치.And the communication unit transmits the user characteristic information to the service provision server and receives an advertisement selected according to the user characteristic information. 제 2 항에 있어서,The method of claim 2, 상기 사용자 특성 정보는 사용자 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치. And the user characteristic information includes at least one of user gender information, age information, and emotion information. 제 2 항에 있어서,The method of claim 2, 상기 사용자 특성 추출부는 상기 사용자 음성으로부터 기본 주파수와 포만트 주파수를 검출하고, 기본 주파수와 포만트 주파수로 모델링된 상기 음성 특성 정보를 이용하여 검출된 주파수들에 대응되는 사용자 특성 정보를 획득함을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치. The user characteristic extractor detects a fundamental frequency and a formant frequency from the user voice and obtains user characteristic information corresponding to the detected frequencies using the speech characteristic information modeled as the basic frequency and the formant frequency. A speech recognition and content playback device. 제 2 항에 있어서,The method of claim 2, 상기 재생되는 광고는 재생되는 콘텐츠를 고려하여 선택된 광고임을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치.And the played advertisement is an advertisement selected in consideration of the played content. 제 2 항에 있어서,The method of claim 2, 상기 음성 인식 및 콘텐츠 재생 장치는 입력된 사용자 영상 데이터를 이용하여 사용자 특성 정보를 추출함을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치.The voice recognition and content reproducing apparatus extracts user characteristic information using the input user image data. 제 8 항에 있어서,The method of claim 8, 상기 사용자 특성 정보는 사용자 위치 정보, 인원 정보, 체격 정보, 동작 정보, 사용 물품 정보, 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 음성 인식 및 콘텐츠 재생 장치.And the user characteristic information includes at least one of user location information, personnel information, physique information, motion information, used article information, gender information, age information, and emotion information. 데이터를 송수신하는 통신부와,Communication unit for transmitting and receiving data, 콘텐츠와 광고가 저장된 데이터베이스와,A database that stores content and ads, 음성 인식 및 콘텐츠 재생 장치로부터 사용자 음성으로부터 추출된 사용자 특성 정보를 수신하면, 사용자 특성 정보에 상응한 광고를 선택하여 상기 음성 인식 및 콘텐츠 재생 장치로 송신하는 광고 선택부를 포함하는 서비스 제공 서버.And an advertisement selector for receiving an advertisement corresponding to the user characteristic information from the voice recognition and content reproducing apparatus and selecting the advertisement corresponding to the user characteristic information and transmitting the advertisement to the voice recognition and content reproducing apparatus. 제 10 항에 있어서,The method of claim 10, 상기 사용자 특성 정보는 사용자 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 서비스 제공 서버.And the user characteristic information includes at least one of user gender information, age information, and emotion information. 제 10 항에 있어서,The method of claim 10, 상기 선택된 광고는 사용자로부터 요청된 콘텐츠를 고려하여 선택된 광고임을 특징으로 하는 서비스 제공 서버.The selected advertisement is a service providing server, characterized in that the selected advertisement in consideration of the content requested from the user. 제 10 항에 있어서,The method of claim 10, 상기 사용자 특성 정보는 사용자 영상 데이터로부터 추출된 사용자 특성 정보인 경우, 사용자 위치 정보, 인원 정보, 체격 정보, 동작 정보, 사용 물품 정보, 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 서비스 제공 서버.When the user characteristic information is user characteristic information extracted from user image data, the user characteristic information includes at least one of user location information, personnel information, physique information, motion information, use article information, gender information, age information, and emotion information. As a service provision server. 음성 인식 및 콘텐츠 재생 장치의 광고 제공 방법에 있어서,In the speech recognition and content providing apparatus advertisement providing method, 콘텐츠 제공을 요청하는 사용자 음성이 입력되면, 입력된 사용자 음성을 이용하여 사용자 특성 정보를 추출하는 단계와,Extracting user characteristic information using the inputted user voice when a user voice requesting content provision is input; 상기 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 단계를 포함하는 광고 제공 방법.And playing the advertisement corresponding to the user characteristic information together with the requested content. 제 14 항에 있어서,The method of claim 14, 상기 사용자 특성 정보는 사용자 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 광고 제공 방법.The user characteristic information includes at least one of user gender information, age information, emotion information. 제 14 항에 있어서,The method of claim 14, 상기 사용자 특성 정보를 추출하는 단계는;Extracting the user characteristic information; 상기 사용자 음성으로부터 기본 주파수와 포만트 주파수를 검출하고, 기본 주파수와 포만트 주파수로 모델링된 음성 특성 정보를 이용하여 상기 검출된 주파수들에 대응되는 사용자 특성 정보를 획득하는 단계를 포함하는 광고 제공 방법.Detecting a fundamental frequency and a formant frequency from the user's voice, and acquiring user characteristic information corresponding to the detected frequencies using voice characteristic information modeled as the fundamental frequency and the formant frequency. . 제 14 항에 있어서,The method of claim 14, 상기 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 단계는;Playing the advertisement corresponding to the user characteristic information together with the requested content; 상기 사용자 특성 정보에 상응하여 사용자에게 제공할 광고를 선택하는 단계와,Selecting an advertisement to be provided to the user according to the user characteristic information; 상기 선택된 광고를 요청된 콘텐츠와 함께 재생하는 단계를 포함하는 광고 제공 방법.Playing the selected advertisement with the requested content. 제 14 항에 있어서,The method of claim 14, 상기 사용자 특성 정보에 상응한 광고를 요청된 콘텐츠와 함께 재생하는 단계는;Playing the advertisement corresponding to the user characteristic information together with the requested content; 상기 사용자 특성 정보를 상기 서비스 제공 서버로 송신하는 단계와,Transmitting the user characteristic information to the service providing server; 상기 서비스 제공 서버로부터 상기 사용자 특성 정보에 상응하여 선택된 광고를 수신하는 단계와,Receiving an advertisement selected according to the user characteristic information from the service providing server; 상기 수신된 광고를 요청된 콘텐츠와 함께 재생하는 단계를 포함하는 광고 제공 방법.Playing the received advertisement with the requested content. 제 14 항에 있어서,The method of claim 14, 상기 재생되는 광고는 재생되는 콘텐츠를 고려하여 선택된 광고임을 특징으로 하는 광고 제공 방법.The advertisement to be played is characterized in that the advertisement is selected in consideration of the content to be played. 제 14 항에 있어서,The method of claim 14, 상기 사용자 특성 정보를 추출하는 단계는;Extracting the user characteristic information; 입력된 사용자 영상 데이터를 이용하여 사용자 특성 정보를 추출하는 단계를 더 포함하는 광고 제공 방법.And extracting user characteristic information using the input user image data. 제 20 항에 있어서,The method of claim 20, 상기 사용자 특성 정보는 사용자 위치 정보, 인원 정보, 체격 정보, 동작 정보, 사용 물품 정보, 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 광고 제공 방법.The user characteristic information includes at least one of user location information, personnel information, physique information, motion information, use article information, gender information, age information, emotion information. 서비스 제공 서버의 광고 제공 방법에 있어서,In the advertisement providing method of the service providing server, 음성 인식 및 콘텐츠 재생 장치로부터 사용자 음성으로부터 추출된 사용자 특성 정보를 수신하는 단계와,Receiving user characteristic information extracted from the user's voice from the voice recognition and content playback device; 상기 사용자 특성 정보에 상응한 광고를 상기 데이터베이스에 저장된 광고 중에서 선택하여 상기 음성 인식 및 콘텐츠 재생 장치로 송신하는 단계를 포함하는 광고 제공 방법.Selecting an advertisement corresponding to the user characteristic information from among advertisements stored in the database and transmitting the selected advertisement to the voice recognition and content reproduction apparatus. 제 22 항에 있어서,The method of claim 22, 상기 사용자 특성 정보는 사용자 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 광고 제공 방법.The user characteristic information includes at least one of user gender information, age information, emotion information. 제 22 항에 있어서,The method of claim 22, 상기 선택된 광고는 사용자로부터 요청된 콘텐츠를 고려하여 선택된 광고임을 특징으로 하는 광고 제공 방법.The selected advertisement is an advertisement providing method characterized in that the selected advertisement in consideration of the content requested from the user. 제 22 항에 있어서,The method of claim 22, 상기 사용자 특성 정보는 사용자 영상 데이터로부터 추출된 사용자 특성 정보인 경우, 사용자 위치 정보, 인원 정보, 체격 정보, 동작 정보, 사용 물품 정보, 성별 정보, 연령 정보, 감정 정보 중 적어도 하나를 포함함을 특징으로 하는 광고 제공 방법.When the user characteristic information is user characteristic information extracted from user image data, the user characteristic information includes at least one of user location information, personnel information, physique information, motion information, use article information, gender information, age information, and emotion information. Ad serving method.
KR1020080087618A 2008-09-05 2008-09-05 System and method for providing advertisement KR20100028748A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080087618A KR20100028748A (en) 2008-09-05 2008-09-05 System and method for providing advertisement

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080087618A KR20100028748A (en) 2008-09-05 2008-09-05 System and method for providing advertisement

Publications (1)

Publication Number Publication Date
KR20100028748A true KR20100028748A (en) 2010-03-15

Family

ID=42179245

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080087618A KR20100028748A (en) 2008-09-05 2008-09-05 System and method for providing advertisement

Country Status (1)

Country Link
KR (1) KR20100028748A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012102507A2 (en) * 2011-01-28 2012-08-02 건아정보기술 주식회사 Motion-recognizing customized advertising system
KR101237499B1 (en) * 2010-12-07 2013-02-26 (주)리안씨앤에스 System and method for providing advertisement information by using hologram
WO2013137512A1 (en) * 2012-03-13 2013-09-19 주식회사 이루온 Emotion-based advertisement system and method
KR20150116970A (en) * 2014-04-08 2015-10-19 에스케이플래닛 주식회사 Apparatus and method for providing advertisement based on user characteristic using content playing apparatus
KR20190006742A (en) * 2017-07-11 2019-01-21 주식회사 하나은행 Method, server apparatus and terminal unit for recommend in-vehidle financial service

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101237499B1 (en) * 2010-12-07 2013-02-26 (주)리안씨앤에스 System and method for providing advertisement information by using hologram
WO2012102507A2 (en) * 2011-01-28 2012-08-02 건아정보기술 주식회사 Motion-recognizing customized advertising system
WO2012102507A3 (en) * 2011-01-28 2012-11-22 건아정보기술 주식회사 Motion-recognizing customized advertising system
WO2013137512A1 (en) * 2012-03-13 2013-09-19 주식회사 이루온 Emotion-based advertisement system and method
KR20150116970A (en) * 2014-04-08 2015-10-19 에스케이플래닛 주식회사 Apparatus and method for providing advertisement based on user characteristic using content playing apparatus
KR20190006742A (en) * 2017-07-11 2019-01-21 주식회사 하나은행 Method, server apparatus and terminal unit for recommend in-vehidle financial service

Similar Documents

Publication Publication Date Title
US10950228B1 (en) Interactive voice controlled entertainment
US9639854B2 (en) Voice-controlled information exchange platform, such as for providing information to supplement advertising
CN108391149B (en) Display apparatus, method of controlling display apparatus, server, and method of controlling server
US9826329B2 (en) System and method for playing media
CN106796496B (en) Display apparatus and method of operating the same
CN109862393B (en) Method, system, equipment and storage medium for dubbing music of video file
CN106796785B (en) Sound sample validation for generating a sound detection model
US11463772B1 (en) Selecting advertisements for media programs by matching brands to creators
US20020088336A1 (en) Method of identifying pieces of music
CN107924416B (en) Reminder of media content referenced in other media content
US20080120312A1 (en) System and Method for Creating a New Title that Incorporates a Preexisting Title
US20130151364A1 (en) System and method for offering a title for sale over the internet
US20110161377A1 (en) System and method for correlating a first title with a second title
US20080120330A1 (en) System and Method for Linking User Generated Data Pertaining to Sequential Content
US20080119953A1 (en) Device and System for Utilizing an Information Unit to Present Content and Metadata on a Device
US20080120342A1 (en) System and Method for Providing Data to be Used in a Presentation on a Device
US20080141180A1 (en) Apparatus and Method for Utilizing an Information Unit to Provide Navigation Features on a Device
US20080120311A1 (en) Device and Method for Protecting Unauthorized Data from being used in a Presentation on a Device
US20130301392A1 (en) Methods and apparatuses for communication of audio tokens
CN109257659A (en) Subtitle adding method, device, electronic equipment and computer readable storage medium
US10535330B2 (en) System and method for movie karaoke
CN108012173A (en) A kind of content identification method, device, equipment and computer-readable storage medium
KR20100028748A (en) System and method for providing advertisement
CN106910491A (en) Karaoke OK system
CN104967894A (en) Data processing method for video playing, client and server

Legal Events

Date Code Title Description
N231 Notification of change of applicant
WITN Withdrawal due to no request for examination