KR101519021B1 - Method for providing time machine advertisement based on smart-TV with logotional advertisement function - Google Patents

Method for providing time machine advertisement based on smart-TV with logotional advertisement function Download PDF

Info

Publication number
KR101519021B1
KR101519021B1 KR1020130123059A KR20130123059A KR101519021B1 KR 101519021 B1 KR101519021 B1 KR 101519021B1 KR 1020130123059 A KR1020130123059 A KR 1020130123059A KR 20130123059 A KR20130123059 A KR 20130123059A KR 101519021 B1 KR101519021 B1 KR 101519021B1
Authority
KR
South Korea
Prior art keywords
advertisement
smart
broadcast content
broadcast
content
Prior art date
Application number
KR1020130123059A
Other languages
Korean (ko)
Other versions
KR20150044456A (en
Inventor
김우승
송지성
김우경
김동일
김엽
박수조
Original Assignee
한양대학교 에리카산학협력단
김우승
송지성
김우경
김동일
김엽
박수조
주식회사 브이플랩
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한양대학교 에리카산학협력단, 김우승, 송지성, 김우경, 김동일, 김엽, 박수조, 주식회사 브이플랩 filed Critical 한양대학교 에리카산학협력단
Priority to KR1020130123059A priority Critical patent/KR101519021B1/en
Publication of KR20150044456A publication Critical patent/KR20150044456A/en
Application granted granted Critical
Publication of KR101519021B1 publication Critical patent/KR101519021B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/812Monomedia components thereof involving advertisement data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content

Abstract

본 발명은 감성광고 기반의 광고 제공 기능을 구비한 스마트 TV를 기반으로 한 광고 제공 방법에 관한 것이다. 본 발명에 따른 감성광고 기반의 광고 제공 기능을 구비한 스마트 TV를 기반으로 한 광고 제공 방법은 스마트 TV가 방송송출 프레임 단위의 스트리밍 방식으로 방송콘텐츠 구현을 위해 방송통신망을 통해 방송콘텐츠 서버로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하는 제 1 단계; 사용자의 선택에 따라 상기 방송콘텐츠와 상기 광고 태그콘텐츠를 분리하여 방송콘텐츠만을 재생하거나, 방송콘텐츠와 광고 태그콘텐츠를 UI 화면으로 동시에 재생하는 제 2 단계; 방송콘텐츠 또는 방송콘텐츠와 광고콘텐츠의 구현 중 사용자에 의한 명시적 광고 전환 요청이 있는 경우, 해당 프레임에 매칭되는 광고 태그콘텐츠를 호출하여 사용자에게 선택적으로 제공하는 제 3 단계;를 포함하는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법이 제공된다.
이에 방송콘텐츠로 구현시 사용자의 선택에 따라 방송콘텐츠에 포함된 광고를 선택적으로 구현하고, 사용자의 명시적 광고 요청시 광고 대상물에 대한 신속한 선택과 직관적 구현을 통해 방송콘텐츠에서의 광고의 대상이 된 광고대상물에 대한 정보를 편리하게 습득하고 구매 과정으로 자연스럽게 이어지는 효과를 제공한다.
The present invention relates to a smart TV-based advertisement providing method having an advertisement providing function based on an emotional advertisement. A Smart TV-based advertisement providing method having an advertisement providing function based on emotional advertisement according to the present invention is a method in which a Smart TV is streamed in units of broadcasting frames to packetize from a broadcasting contents server through a broadcasting communication network A first step of receiving the broadcast contents and the advertisement tag contents; A second step of reproducing only broadcast content by separating the broadcast content and the advertisement tag content according to the user's selection, or simultaneously reproducing the broadcast content and the advertisement tag content on the UI screen; And a third step of, when there is an explicit advertisement conversion request by the user during the implementation of the broadcast content or the broadcast content and the advertisement content, calling the advertisement tag content matched to the frame and selectively providing the content to the user A smart TV-based advertisement providing method is provided.
Accordingly, when the broadcast content is implemented, the advertisement included in the broadcast content is selectively implemented according to the user's selection, and when the user explicitly requests the advertisement, the user quickly selects and intuitively implements the advertisement object, It provides the effect of acquiring information about the advertisement object conveniently and naturally leading to the purchase process.

Description

감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법 {Method for providing time machine advertisement based on smart-TV with logotional advertisement function} TECHNICAL FIELD [0001] The present invention relates to a Smart TV-based advertisement providing method,

본 발명은 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법에 관한 것으로, 보다 구체적으로는, 방송콘텐츠로 구현시 방송콘텐츠에 포함된 광고를 구현한 대상물에 대한 신속한 선택과 직관적 구현을 통해 방송콘텐츠에서의 광고의 대상이 된 광고대상물에 대한 정보를 편리하게 습득하고 구매 과정으로 자연스럽게 이어질 수 있도록 할 뿐만 아니라, 광고주가 제공하는 광고에 대한 효과를 극대화하면서도 스마트 TV를 시청하는 사용자에게는 직접적으로 보이지 않고 사용자가 정보취득을 원할 경우에만 선택적으로 광고가 암시적으로 제공되도록 함으로써 방송콘텐츠에 대한 시청 방해를 최소화하기 위한 보이지 않는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법에 관한 것이다.
The present invention relates to a smart TV-based advertisement providing method having a sensible advertisement function, and more particularly, to a smart TV-based advertisement providing method using a Smart TV- It is possible to acquire information on the advertisement object that is the object of the advertisement in the contents and to naturally lead to the purchasing process, and to maximize the effect on the advertisement provided by the advertiser, The present invention also relates to a smart TV-based advertisement providing method, which has an invisible emotional advertisement function for minimizing interference with viewing of broadcast content by selectively offering an advertisement only when a user wants to acquire information.

콘텐츠나 광고를 방송시 가장 중요한 목적은 시청하는 사람들에게 실제로 보여지느냐에 따른 효용성일 것이다. 종래에는 콘텐츠와 광고를 분리시켜 별도로 시청하도록 하거나, 콘텐츠에 광고를 삽입시켜도 광고인지를 모르게 방송콘텐츠 속의 인물이나 배경에 광고제품을 노출시키는 방식이 주로 사용되었다.The most important purpose of broadcasting content or advertisement is to show it to people watching. Conventionally, a method of separating contents from an advertisement and separately viewing the contents, or a method of exposing an advertisement product to a person or a background in the broadcast contents without knowing whether the advertisement is an advertisement by inserting the advertisement into the contents is mainly used.

그러나 콘텐츠와 광고를 분리시켜서 광고방송을 별도로 제공시 광고방송에 대한 반감을 갖고 콘텐츠만을 시청하고자하는 사람들에게 불편함을 초래하는 문제점이 있어왔다. However, there has been a problem that it is inconvenient for people who want to watch only contents by separating the contents and the advertisement and providing commercial broadcasting separately.

한편, 방송콘텐츠 속의 인물이나 배경에 광고제품을 노출시키는 방식은 시청하는 사람들이 광고인지를 모르거나 무관심한 경우에는 광고에 대한 타겟팅 효과가 전혀 일어나지 않는 문제점이 있어왔다. On the other hand, there is a problem in that a method of exposing an advertisement product to a person or a background in broadcasting contents does not have any targeting effect on the advertisement if the viewer does not know whether the advertisement is an advertisement or is indifferent.

이에 따라 해당 기술분야에 있어서는 종래의 문제점을 해결하기 위해 광고에 대한 효과를 극대화할 뿐만 아니라, 방송콘텐츠만을 시청하고자 하는 사람들에게 불편을 덜어주기 위한 새로운 기술개발이 요구되고 있다.
Accordingly, in order to solve the conventional problems in the related art, it is required to develop a new technology for maximizing the effect of advertisement and relieving inconvenience to people who want to view only broadcast contents.

[관련기술문헌][Related Technical Literature]

1. 광고 시스템을 구비한 스마트패드 및 그 광고 표시방법(Advertising system and the method for smartpad) (특허출원번호 제10-2011-0032083호)1. A smart pad having an advertisement system and an advertising system and method thereof (Patent Application No. 10-2011-0032083)

2. 스마트 디바이스에서 실행되는 동영상 매체를 통한 광고제공 시스템 및 그 방법(System and method for providing information through moving picture executed on a smart device and thereof) (특허출원번호 제10-2011-0107272호)2. System and method for providing advertisement through a moving picture medium running on a smart device (Patent Application No. 10-2011-0107272)

3. 스마트 광고 정보 제공 시스템(A smart advertising information offer system) (특허출원번호 제10-2011-0000401호)
3. Smart advertising information offer system (Patent Application No. 10-2011-0000401)

본 발명은 상기의 문제점을 해결하기 위한 것으로, 방송콘텐츠로 구현시 방송콘텐츠에 포함된 광고를 구현한 대상물에 대한 신속한 선택과 직관적 구현을 통해 방송콘텐츠에서의 광고의 대상이 된 광고대상물에 대한 정보를 편리하게 습득하고 구매 과정으로 자연스럽게 이어질 수 있도록 하기 위한 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법을 제공하기 위한 것이다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems, and it is an object of the present invention to provide a method and apparatus for providing broadcast contents, And to provide a smart TV-based advertisement providing method having a sensibility advertisement function for acquiring the advertisement information and allowing the purchaser to conveniently acquire the advertisement information and to naturally lead to the purchasing process.

또한, 본 발명은 광고주가 제공하는 광고에 대한 효과를 극대화하는 것의 부작용인 시청의 불편함 초래를 최소화하도록 하기 위한 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법을 제공하기 위한 것이다.It is another object of the present invention to provide a smart TV-based advertisement providing method having an emotional advertisement function for minimizing the inconvenience of viewing, which is a side effect of maximizing the effect of an advertisement provided by an advertiser.

또한, 본 발명은 스마트 TV를 시청하는 사용자에게는 직접적으로 보이지 않고 사용자가 정보취득을 원할 경우에만 광고가 암시적으로 제공되도록 함으로써 방송콘텐츠에 대한 시청 방해를 최소화하면서도 필요시 사용자에 대한 제품 정보 제공 및 제품 구매로 이어질 수 있는 명시적 광고 제공을 통해 구체적 광고 상세정보에 대한 제공이 가능하도록 하기 위한 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법을 제공하기 위한 것이다.In addition, the present invention provides advertisements implicitly provided only when a user wants to acquire information, and is not directly visible to a user viewing a smart TV, thereby minimizing interference with viewing of broadcast contents, The present invention is to provide a smart TV-based advertisement providing method having an emotional advertisement function for enabling detailed advertisement detail information to be provided through an explicit advertisement providing a product purchase.

그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
However, the objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned can be clearly understood by those skilled in the art from the following description.

본 발명에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법은 스마트 TV가 방송송출 프레임 단위의 스트리밍 방식으로 방송콘텐츠 구현을 위해 방송통신망을 통해 방송콘텐츠 서버로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하는 제 1 단계; 사용자의 선택에 따라 상기 방송콘텐츠와 상기 광고 태그콘텐츠를 분리하여 방송콘텐츠만을 재생하거나, 방송콘텐츠와 광고 태그콘텐츠를 UI 화면으로 동시에 재생하는 제 2 단계; 방송콘텐츠 또는 방송콘텐츠와 광고콘텐츠의 구현 중 사용자에 의한 명시적 광고 전환 요청이 있는 경우, 해당 프레임에 매칭되는 광고 태그콘텐츠를 호출하여 사용자에게 선택적으로 제공하는 제 3 단계;를 포함하는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법이 제공된다.A Smart TV-based advertisement providing method according to the present invention is a Smart TV-based advertisement providing method in which a Smart TV is a streaming method in units of broadcast transmission frames, and broadcast contents are packetized from a broadcast contents server through a broadcast communication network, A first step of receiving contents; A second step of reproducing only broadcast content by separating the broadcast content and the advertisement tag content according to the user's selection, or simultaneously reproducing the broadcast content and the advertisement tag content on the UI screen; And a third step of, when there is an explicit advertisement conversion request by the user during the implementation of the broadcast content or the broadcast content and the advertisement content, calling the advertisement tag content matched to the frame and selectively providing the content to the user A smart TV-based advertisement providing method is provided.

상기 제 3 단계에서, 사용자에 의한 명시적 광고 전환 요청은 예컨대 리모콘과 같은 입력 인터페이스에 의한 재생 중지(pause) 요청이 될 수 있다.In the third step, the explicit advertisement conversion request by the user may be a pause request by an input interface such as a remote controller.

상기 제 2 단계는 상기 스마트 TV가 상기 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 분리된 광고 태그콘텐츠에 포함된 각 광고대상물별 태그 데이터를 리딩(reading) 하는 단계; 및 상기 스마트 TV가 상기 각 광고대상물별 태그 데이터에 포함된 이미지정보를 이용해 각 광고대상물에 대한 트래킹(tracking: 추적)을 위한 위치트래킹 마킹을 설정하는 단계; 를 더 포함할 수 있다.The smart TV may separate the packetized broadcast content from the advertisement tag content and then read the tag data for each advertisement object included in the separated advertisement tag content; And setting a location tracking marking for tracking of each advertisement object using the image information included in the tag data for each advertisement object by the Smart TV; As shown in FIG.

바람직하게는, 상기 제 2 단계와 제 3 단계 사이에, 상기 스마트 TV가 상기 광고 태그콘텐츠 상에서 각 광고대상물별 태그 데이터로 리딩되지 않은 적어도 하나 이상의 대상물 중 물체에 대한 인식을 수행하는 단계; 상기 스마트 TV가 인식된 인식대상물에 대한 상기 방송통신망을 통해 상기 방송콘텐츠 서버로의 질의 메시지 전송에 따라 각 인식대상물에 대한 추가적 태그 데이터를 반환받는 단계; 및 상기 스마트 TV가 상기 각 인식대상물에 대한 상기 방송콘텐츠 상에서의 물체 인식을 수행하고, 상기 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹을 설정하는 단계; 를 더 포함할 수 있다.Preferably, between the second step and the third step, the Smart TV performs recognition of an object among at least one object that is not read as tag data for each advertisement object on the advertisement tag content; Receiving additional tag data for each recognition object in response to transmission of a query message to the broadcast content server through the broadcast communication network for the recognition object recognized by the smart TV; And the smart TV performing object recognition on the broadcast content for each recognition object and setting a position tracking marking for tracking on the recognition object; As shown in FIG.

또한, 상기 제 2 단계에서 방송콘텐츠와 광고콘텐츠를 UI 화면으로 동시에 재생하는 경우, 상기 스마트 TV가 상기 출력부 상에 현재 출력되고 있는 방송콘텐츠에 포함된 상태로 암시효과 및 트래킹 효과가 적용된 광고대상물 및 인식대상물을 이용한 암시적 광고 구현 단계;를 더 포함할 수도 있다.In addition, in the second step, when the broadcast content and the advertisement content are simultaneously played back on the UI screen, the smart TV is displayed on the output unit in a state in which it is included in the broadcast content currently being output, And an implicit advertisement implementation step using an object to be recognized.

여기서, 상기 암시적 광고 구현 단계는, 상기 스마트 TV가 상기 위치트래킹 마킹이 설정된 광고대상물 및 인식대상물에 대한 암시효과를 설정하는 단계; 상기 스마트 TV가 상기 출력부로 상기 위치트래킹 마킹이 설정된 광고대상물 및 인식대상물에 대한 상기 암시효과가 반영된 상기 암시 인디케이터를 구현하는 단계; 및 상기 스마트 TV가 상기 출력부로 방송송출 프레임 단위의 스트리밍 방식으로 방송콘텐츠 구현시, 상기 위치트래킹 마킹이 설정된 광고대상물 및 인식대상물 각각에 대한 암시 인디케이터에 대한 트래킹 효과를 구현하는 단계; 를 더 포함할 수 있다.
Here, the step of implementing the implicit advertisement may include: setting an implicit effect on the advertisement object and the recognition object in which the smart TV has the position tracking marking; Implementing the implied indicator in which the smart TV reflects the implicit effect on the advertising object and the recognized object with the location tracking marking set to the output; And implementing a tracking effect on an indication indicator for each of the advertisement object and the recognition object, in which the location tracking marking is set, when the smart TV realizes broadcast content in a streaming manner in units of broadcast transmission frames to the output unit; As shown in FIG.

본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법은, 방송콘텐츠로 구현시 사용자의 선택에 따라 방송콘텐츠에 포함된 광고를 선택적으로 구현하고, 사용자의 명시적 광고 요청시 광고 대상물에 대한 신속한 선택과 직관적 구현을 통해 방송콘텐츠에서의 광고의 대상이 된 광고대상물에 대한 정보를 편리하게 습득하고 구매 과정으로 자연스럽게 이어지는 효과를 제공한다. The Smart TV-based advertisement providing method having the emotional advertisement function according to the embodiment of the present invention is a method of providing advertisements in broadcast contents, It is possible to acquire the information about the advertisement object which is the target of the advertisement in the broadcast contents conveniently through the rapid selection and the intuitive implementation of the advertisement object at the time, and to provide the effect of naturally leading to the purchase process.

또한, 본 발명의 다른 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법은, 광고주가 제공하는 광고에 대한 효과를 극대화하는 것의 부작용인 시청의 불편함 초래를 최소화할 수 있는 효과를 제공한다. In addition, according to another embodiment of the present invention, a Smart TV-based advertisement providing method having an emotional advertisement function can minimize the inconvenience of viewing, which is a side effect of maximizing the effect of an advertisement provided by an advertiser, Lt; / RTI >

뿐만 아니라, 본 발명의 다른 실시예에 따른 감성광고 기반의 광고 제공 기능을 구비한 스마트 TV는, 스마트 TV를 시청하는 사용자에게는 직접적으로 보이지 않고 암시적으로 제공되도록 함으로써 방송콘텐츠에 대한 시청 방해를 최소화하면서도 필요시 명시적 광고 제공을 통해 구체적 광고 상세정보에 대한 제공이 가능한 효과를 제공한다.
In addition, the smart TV having the advertisement providing function based on the emotional advertisement according to another embodiment of the present invention is not directly visible to the user who watches the smart TV, but is implicitly provided, thereby minimizing the viewing interruption to the broadcast contents But also provides the effect of providing specific advertisement detailed information through explicit advertisement provision when necessary.

도 1은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 타임머신 광고 제공 방법이 구현되는 전체시스템을 나타내는 도면.
도 2는 도 1에서의 스마트 TV의 구성을 나타내는 도면.
도 3은 본 발명의 실시예에 따른 암시적 광고를 설명하기 개념도.
도 4 내지 도 7은 본 발명의 실시예에 따른 타임머신 광고를 설명하기 위한 UI 화면을 나타내는 도면.
도 8은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 타임머신 광고 제공 방법 중 암시적 광고에서의 타임머신 기능에 의한 광고 설정 및 광고 구현 과정을 나타내는 흐름도.
도 9는 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 타임머신 광고 제공 방법 중 명시적 광고에서의 타임머신 기능에 의한 광고 설정 및 광고 구현 과정을 나타내는 흐름도.
도 10은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 타임머신 광고 제공 방법을 나타내는 전체적인 흐름도.
도 11은 도 10의 감성광고 기능을 구비한 스마트 TV 기반의 타임머신 광고 제공 방법의 각 단계에 대한 구체적인 흐름도.
Brief Description of the Drawings Fig. 1 is a diagram illustrating an entire system in which a smart TV-based time machine advertisement providing method having a sensibility advertisement function according to an embodiment of the present invention is implemented.
Fig. 2 is a diagram showing a configuration of a smart TV in Fig. 1; Fig.
3 is a conceptual diagram illustrating an implicit advertisement according to an embodiment of the present invention;
4 to 7 are views illustrating a UI screen for illustrating a time machine advertisement according to an embodiment of the present invention.
FIG. 8 is a flowchart illustrating an advertisement setting and an advertisement implementation process by a time machine function in an implicit advertisement among smart TV-based time-machine advertisement providing methods having a sensibility advertisement function according to an embodiment of the present invention.
FIG. 9 is a flowchart illustrating an advertisement setting process and an advertisement setting process according to a time machine function in an explicit advertisement among Smart TV-based time-machine advertisement providing methods having an emotional advertisement function according to an embodiment of the present invention.
FIG. 10 is a flowchart illustrating a smart TV-based time machine advertisement providing method having a sensibility advertisement function according to an embodiment of the present invention.
FIG. 11 is a flowchart illustrating a Smart TV-based time machine advertisement providing method having the emotional advertisement function of FIG. 10;

이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a detailed description of preferred embodiments of the present invention will be given with reference to the accompanying drawings. In the following description of the present invention, detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.
In the present specification, when one element 'transmits' data or a signal to another element, the element can transmit data or signals directly to another element, and data can be transmitted through at least one other element Or signals can be transmitted to other components.

도 1은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법이 구현되는 전체시스템을 나타내는 도면이다. 도 1을 참조하면, 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법이 구현되는 전체시스템은 스마트 TV(10), 리모컨(20), 방송통신망(30), 방송콘텐츠 서버(40), 스마트 모바일 디바이스(50), 데이터통신망(60) 및 제휴 광고주단말 그룹(70)을 포함한다. FIG. 1 is a diagram illustrating an entire system in which a smart TV-based advertisement providing method having an emotional advertisement function according to an embodiment of the present invention is implemented. Referring to FIG. 1, an entire system in which a smart TV-based advertisement providing method having a sensibility advertisement function is implemented includes a smart TV 10, a remote controller 20, a broadcast communication network 30, a broadcast content server 40, A mobile device 50, a data communication network 60, and an affiliated advertiser terminal group 70.

본 발명에서 스마트 TV(10)는 도 1에 도시된 바와 같이 별도의 셋탑박스(STB)를 구비한 셋탑박스 분리형으로 형성되어 방송통신망(30)을 통해 방송콘텐츠 서버(40)와 데이터 송수신을 수행하거나, 다른 실시예로 셋탑박스 일체형으로 형성되어 별도의 셋탑박스(STB) 없이 방송콘텐츠 서버(40)와 데이터 송수신을 수행할 수 있다. 1, the smart TV 10 is formed as a set-top box separate type having a separate set-top box (STB) and performs data transmission / reception with the broadcast content server 40 through the broadcast communication network 30 Alternatively, it may be formed as a set-top box-integrated type and perform data transmission / reception with the broadcast content server 40 without a separate set-top box (STB).

방송통신망(30)은 대용량, 장거리 음성 및 데이터 서비스에 의해 브로드 캐스팅 형태의 방송을 위한 고속 유선 또는 문선 기간 망이며, 유선 또는 무선 인터넷(Internet)이 될 수도 있다. 방송통신망(30)은 방송콘텐츠 서버(40)가 스마트 TV(10) 및 그 밖의 시스템으로 방송콘텐츠를 브로드 캐스팅을 위해 전달하는 역할을 한다.The broadcast communication network 30 is a high-speed wired or bridged periodic network for broadcasting in the form of a large capacity, a long-distance voice, and a data service, and may be a wired or wireless Internet. The broadcast communication network 30 plays a role for the broadcast content server 40 to transmit the broadcast content to the smart TV 10 and other systems for broadcasting.

방송콘텐츠 서버(40)는 방송DB(41) 및 광고DB(42)를 포함한다. 또한, 본 명세서에서 DB라 함은, 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. DB는 적어도 하나의 테이블로 구현될 수도 있으며, 데이터베이스에 저장된 정보를 검색, 저장, 및 관리하기 위한 별도의 DBMS(Database Management System)을 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 데이터베이스의 형태 등 다양한 방식으로 구현될 수 있으며, 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.The broadcast content server 40 includes a broadcast DB 41 and an advertisement DB 42. Also, in this specification, a DB may mean a functional and structural combination of software and hardware for storing information corresponding to each database. The DB may be implemented as at least one table, and may further include a separate DBMS (Database Management System) for searching, storing, and managing information stored in the database. Also, it can be implemented in various ways such as a linked-list, a tree, and a relational database, and includes all data storage media and data structures capable of storing information corresponding to a database.

방송콘텐츠 서버(40)는 방송DB(41)에 저장된 방송콘텐츠에 포함된 광고대상물 각각에 대한 제휴 광고주단말 그룹(70)을 구성하는 제휴 광고주단말 각각으로부터 데이터통신망(60)을 통해 광고데이터를 수신한다. 이 경우 광고데이터에는 각 광고대상물에 대한 이미지정보 및 광고 상세정보를 포함하는 것이 바람직하며, 광고데이터 수신시 방송콘텐츠의 방송송출 프레임별로 구분하여 수신하는 것이 바람직하다. The broadcast content server 40 receives the advertisement data through the data communication network 60 from each of the affiliated advertiser terminals constituting the affiliated advertiser terminal group 70 for each of the advertisement objects included in the broadcast content stored in the broadcast DB 41 do. In this case, it is preferable that the advertisement data include image information and advertisement detailed information for each advertisement object, and it is preferable that the advertisement data is received by receiving broadcast data of each broadcast content when the advertisement data is received.

여기서 데이터통신망(60)은 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간 망인 통신망이며, 인터넷(Internet) 또는 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선 및 무선 망일 수 있다. 데이터통신망(60)이 이동통신망일 경우 동기식 이동 통신망일 수도 있고, 비동기식 이동 통신망일 수도 있다. 비동기식 이동 통신망의 일 실시 예로서, WCDMA(Wideband Code Division Multiple Access) 방식의 통신망을 들 수 있다. 이 경우 도면에 도시되진 않았지만, 데이터통신망(60)은 RNC(Radio Network Controller)을 포함할 수 있다. 한편, WCDMA망을 일 예로 들었지만, 3G LTE망, 4G망 등 차세대 통신망, 그 밖의 IP를 기반으로 한 IP망일 수 있다. 데이터통신망(60)은 방송콘텐츠 서버(40), 광고주단말 그룹(70)을 구성하는 다수의 제휴 광고주단말, 그 밖의 시스템 상호 간의 신호 및 데이터를 상호 전달하는 역할을 한다.Here, the data communication network 60 may be a high-speed period network of a large communication network capable of a large-capacity, long-distance voice and data service, and may be a next generation wired and wireless network for providing Internet or high-speed multimedia service. When the data communication network 60 is a mobile communication network, it may be a synchronous mobile communication network or an asynchronous mobile communication network. As an embodiment of the asynchronous mobile communication network, a WCDMA (Wideband Code Division Multiple Access) communication network is exemplified. In this case, although not shown in the drawing, the data communication network 60 may include a Radio Network Controller (RNC). Meanwhile, although the WCDMA network is exemplified, it may be a next generation communication network such as a 3G LTE network or a 4G network, or an IP network based on other IP. The data communication network 60 serves to transmit signals and data between the broadcasting contents server 40, a plurality of advertiser terminal units constituting the advertiser terminal group 70, and other systems.

한편, 방송콘텐츠 서버(40)는 각 광고대상물에 각각에 대한 태그 데이터를 생성한 뒤, 생성된 모든 태그 데이터를 넘버링하여 광고 태그콘텐츠로 광고DB(42)에 저장한다. 한편, 본 발명의 일 실시예로, 방송콘텐츠 서버(40)는 각 태그 데이터 생성시 수신된 각 광고대상물에 대한 물체 인식에 사용되기 위해 이미지정보 및 광고 상세정보를 포함시켜 생성하는 것이 바람직하며, 광고DB(42)로 광고 태콘텐츠 저장시 방송콘텐츠의 방송송출 프레임별로 구분하여 구분에 따른 메타데이터를 생성하여 각 광고 태그콘텐츠와 함께 저장하는 것이 바람직하다.On the other hand, the broadcast content server 40 generates tag data for each of the advertisement objects, and then all the generated tag data are numbered and stored in the advertisement DB 42 as advertisement tag contents. Meanwhile, in an embodiment of the present invention, the broadcast content server 40 preferably includes image information and advertisement detail information for use in object recognition for each advertisement object received at the time of generating each tag data, It is preferable that the advertisement DB 42 divides the broadcasting contents into broadcasting transmission frames and stores the metadata together with the respective advertisement tag contents when the advertisement contents are stored.

방송콘텐츠 서버(40)는 방송통신망(30)을 통해 스마트 TV(10)의 방송DB(41)에 저장된 방송콘텐츠에 대한 청취 요청에 따라 방송DB(41)에 저장된 방송콘텐츠와 광고DB(42)에 저장된 광고 태그콘텐츠를 방송송출 프레임 별로 패킷화하여 방송통신망(30)을 통해 스마트 TV(10)로 전송한다(S13).The broadcast content server 40 transmits the broadcast content stored in the broadcast DB 41 and the advertisement DB 42 in response to a request for listening to the broadcast content stored in the broadcast DB 41 of the smart TV 10 through the broadcast communication network 30. [ And transmits the packetized advertisement tag contents to the smart TV 10 through the broadcast communication network 30 (S13).

스마트 모바일 디바이스(50)는 스마트 TV(10) 사용자가 암시적 광고 구현 후의 명시적 광고 구현에 따라 광고대상물에 대한 상세정보를 원하는 경우에 광고대상물에 대한 상세정보를 터치스크린 기반으로 확인하기 위해 구비된다.
The smart mobile device 50 is provided for confirming detailed information on the advertisement object based on the touch screen when the user of the smart TV 10 wants detailed information on the advertisement object according to the explicit advertisement implementation after the implicit advertisement implementation do.

도 2는 도 1에서의 스마트 TV(10)의 구성을 나타내는 도면이다. 도 3은 본 발명의 실시예에 따른 암시적 광고를 설명하기 개념도이다. 도 4 내지 도 7은 본 발명의 실시예에 따른 광고를 설명하기 위한 UI 화면을 나타내는 도면이다. 먼저, 도 2를 참조하면, 스마트 TV(10)는 출력부(11), 센싱부(12), 입력 인터페이스(13), 제어연산부(14), 저장부(15) 및 유무선 통신모듈(16)을 포함한다. Fig. 2 is a diagram showing a configuration of the smart TV 10 in Fig. 3 is a conceptual diagram illustrating an implicit advertisement according to an embodiment of the present invention. 4 to 7 are views showing a UI screen for explaining an advertisement according to an embodiment of the present invention. 2, the smart TV 10 includes an output unit 11, a sensing unit 12, an input interface 13, a control operation unit 14, a storage unit 15, and a wired / wireless communication module 16, .

그리고 입력 인터페이스(13)는 입력부(13a), 리모컨 신호 수신부(13b), 음성수신부(13c) 및 카메라부(13d)을 구비한다. The input interface 13 includes an input unit 13a, a remote control signal receiving unit 13b, a sound receiving unit 13c, and a camera unit 13d.

또한, 제어연산부(14)는 방송콘텐츠 처리모듈(14a), 암시적 광고 구현모듈(14b), 명시적 광고 구현모듈(14c), 광고대상물 구매모듈(14d) 및 타임머신 제공모듈(14e)을 구비한다. 본 명세서에서 모듈이라 함은, 본 발명의 기술적 사상을 수행하기 위한 하드웨어 및 하드웨어를 구동하기 위한 소프트웨어의 기능적, 구조적 결합을 의미할 수 있다. 예컨대, 모듈은 소정의 코드와 소정의 코드가 수행되기 위한 하드웨어 리소스의 논리적인 단위를 의미할 수 있으며, 반드시 물리적으로 연결된 코드를 의미하거나, 한 종류의 하드웨어를 의미하는 것은 아님은 본 발명의 기술분야의 평균적 전문가에게는 용이하게 추론될 수 있다.The control operation unit 14 includes a broadcast content processing module 14a, an implicit advertisement implementation module 14b, an explicit advertisement implementation module 14c, an advertisement object purchase module 14d and a time machine provision module 14e do. Herein, a module may mean a functional and structural combination of software for driving hardware and hardware for carrying out the technical idea of the present invention. For example, the module may mean a logical unit of a predetermined code and a hardware resource for executing a predetermined code, and it does not necessarily mean a physically connected code or a kind of hardware. It can easily be deduced to the average expert in the field.

이하에서는 제어연산부(14)의 구성을 중심으로 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법이 구현되는 전체시스템에 대해서 구체적으로 살펴보도록 한다. 방송콘텐츠 처리모듈(14a)은 방송송출 프레임 별로 스트리밍 방식으로 방송통신망(30)을 통해 방송콘텐츠 서버(40)로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하도록 유무선 통신모듈(16)을 제어함으로써, 방송송출 프레임 단위로 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신한다. 사용자가 방송콘텐츠만을 시청하기를 원할 경우, 방송콘텐츠 처리모듈(14a)은 방송송출 프레임 단위의 패킷으로부터 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 방송콘텐츠에 대한 프레임 단위의 스트리밍 방식으로의 출력부(11)로의 구현을 준비한다. 그러나 사용자가 방송콘텐츠와 광고콘텐츠를 동시에 시청하기를 원하는 경우에는 방송콘텐츠 처리모듈(14a)은 방송콘텐츠와 광고콘텐츠를 분리하지 않고 UI 화면으로 이들을 구현한다.Hereinafter, the entire system in which the Smart TV-based advertisement providing method having the emotional advertisement function is implemented will be described in detail, focusing on the configuration of the control operation unit 14. The broadcast content processing module 14a controls the wired / wireless communication module 16 to receive the packetized broadcast content and the advertisement tag content from the broadcast content server 40 through the broadcast communication network 30 in a streaming manner for each broadcast transmission frame , And receives broadcasting contents and advertisement tag contents packetized in units of broadcast transmission frames. When the user desires to view only the broadcast content, the broadcast content processing module 14a separates the broadcast content and the advertisement tag content from the packets in the broadcast transmission frame unit, and then outputs the stream content in the frame- (11). However, if the user wishes to simultaneously view the broadcast content and the advertisement content, the broadcast content processing module 14a implements them on the UI screen without separating the broadcast content and the advertisement content.

보다 구체적으로, 방송콘텐츠 처리모듈(14a)은 방송콘텐츠 서버(40)로부터 방송통신망(30)을 통해 스마트 TV(10)의 방송DB(41)에 저장된 방송콘텐츠에 대한 청취 요청을 전송하도록 유무선 통신모듈(16)을 제어한다. 이에 따라, 방송콘텐츠 처리모듈(14a)은 방송콘텐츠 서버(40)의 방송DB(41)에 저장된 방송콘텐츠와, 방송콘텐츠 서버(40)의 광고DB(42)에 저장된 광고 태그콘텐츠를 방송송출 프레임 단위로 패킷화된 상태로 방송통신망(30)을 통해 방송콘텐츠 서버(40)로부터 수신하도록 유무선 통신모듈(16)을 제어한다. More specifically, the broadcast content processing module 14a receives the broadcast content stored in the broadcast DB 41 of the smart TV 10 from the broadcast content server 40 through the broadcast communication network 30, And controls the module 16. The broadcast content processing module 14a transmits the broadcast content stored in the broadcast DB 41 of the broadcast content server 40 and the advertisement tag content stored in the advertisement DB 42 of the broadcast content server 40 to the broadcast transmission frame And controls the wired / wireless communication module 16 to receive from the broadcasting contents server 40 through the broadcasting communication network 30 in a packetized state.

방송콘텐츠 처리모듈(14a)은 사용자의 시청모드 선택(방송콘텐츠만 시청)에 따라 방송송출 프레임 단위로 스트리밍 방식으로 방송콘텐츠 서버(40)로부터 수신되는 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 분리된 광고 태그콘텐츠에서 방송콘텐츠에 포함된 각 광고대상물별 태그 데이터를 리딩(reading) 하여, 저장부(15)에 저장한다. The broadcast content processing module 14a separates the packetized broadcast content received from the broadcast content server 40 and the advertisement tag content in a streaming manner in units of broadcast transmission frames in accordance with the user's viewing mode selection Then, the tag data for each advertisement object included in the broadcast content is read from the separated advertisement tag content, and is stored in the storage unit 15.

방송콘텐츠 처리모듈(14a)은 리딩된 각 광고대상물별 태그 데이터에 포함된 이미지정보를 이용해 각 광고대상물에 대한 트래킹(tracking: 추적)을 위한 위치트래킹 마킹을 설정한다. 여기서 위치트래킹 마킹은 각 광고대상물이 광고콘텐츠 상에서의 각 방송송출 프레임에 따른 출력부(11)로의 구현시 각 광고대상물을 트래킹하기 위한 표식자 역할을 수행한다. 보다 구체적으로, 위치트래킹 마킹 설정에 따라 방송콘텐츠 상에서 각 광고대상물의 위치가 변경 또는 입체적 관점이 변경되어도 자동적으로 위치 변경이나 입체적 관점 변경에 따른 실시간 변경데이터가 방송콘텐츠 처리모듈(14a)에 의해 생성되어 저장부(15)에 저장됨으로써 광고대상물에 대한 트래킹시 저장된 실시간 변경데이터가 활용되어 출력부(11) 상에 구현되는 UI 화면에서의 광고대상물의 위치가 자동적으로 추적되도록 하기 위해서이다. The broadcast content processing module 14a sets the location tracking marking for tracking for each advertisement object using the image information included in the tag data for each of the read advertisement objects. Here, the position tracking marking serves as a marker for tracking each advertisement object in the implementation of the advertisement object to the output unit 11 according to each broadcast transmission frame on the advertisement content. More specifically, even if the position of each of the advertisement objects is changed or the stereoscopic view is changed on the broadcast content according to the setting of the position tracking marking, the realtime change data due to the position change or stereoscopic view change is automatically generated by the broadcast content processing module 14a And is stored in the storage unit 15 so that the position of the advertisement object on the UI screen realized on the output unit 11 is automatically tracked by using the stored real-time change data when tracking the advertisement object.

방송콘텐츠 처리모듈(14a)은 추가적 과정으로 각 방송송출 프레임 단위의 방송콘텐츠에 광고대상물을 제외한 대상물에 대한 인식을 자동적으로 수행하는 대상물 인식을 더 수행할 수 있다. The broadcast content processing module 14a may further perform object recognition for automatically performing recognition of an object other than the advertisement object in broadcast contents of each broadcast transmission frame in an additional process.

즉, 방송콘텐츠 처리모듈(14a)은 방송송출 프레임별로 스트리밍 방식으로 수신되는 광고 태그콘텐츠의 각 광고대상물별 태그 데이터로 리딩되지 않은 대상물에 대한 물체 인식을 수행한다. 방송콘텐츠 처리모듈(14a)은 각 인식대상물에 대한 물체 인식시 입체적 관점 각각에 대한 인식을 개별적으로 수행하는 것이 바람직하다. That is, the broadcast content processing module 14a performs object recognition for an object that is not read as tag data for each advertisement object of the advertisement tag content received in a streaming manner for each broadcast transmission frame. It is preferable that the broadcast content processing module 14a individually performs recognition of each of the stereoscopic viewpoints at the time of object recognition for each recognition object.

방송콘텐츠 처리모듈(14a)은 인식된 인식대상물에 대한 방송통신망(30)을 통해 방송콘텐츠 서버(40)로의 질의 메시지 전송하며, 이에 대한 반환으로 인식대상물에 대한 추가적 태그 데이터가 있는 경우 수신하도록 유무선 통신모듈(16)을 제어한다. 그리고, 방송콘텐츠 처리모듈(14a)은 각 인식대상물에 대한 방송콘텐츠의 이미지정보에 대한 물체 인식을 수행하고, 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹을 설정한다. 여기서 각 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹은, 방송콘텐츠 상에서 각 방송송출 프레임 단위로 출력부(11)의 UI 화면으로 구현시, 각 인식대상물의 UI 화면 상의 위치가 변경되거나 입체적 관점이 변경되어도 자동적으로 각 인식대상물의 위치 변경이나 입체적 관점 변경에 따른 실시간 변경데이터가 방송콘텐츠 처리모듈(14a)에 의해 생성되어 스마트 TV의 저장부(15)에 저장된 뒤, 각 인식대상물에 대한 트래킹시 저장된 실시간 변경데이터가 활용되어 출력부(11) 상에 구현되는 UI 화면에서의 인식대상물의 위치가 자동적으로 추적되도록 하기 위해서 설정된다. The broadcast content processing module 14a transmits a query message to the broadcast content server 40 through the broadcast communication network 30 for the recognized object, and when there is additional tag data for the object to be recognized, And controls the communication module 16. The broadcast content processing module 14a performs object recognition on the image information of the broadcast content for each recognition object and sets a position tracking marking for tracking on the recognition object. Here, the position tracking marking for tracking each recognition object is implemented by UI screen of the output unit 11 for each broadcast transmission frame on the broadcast content, when the position on the UI screen of each recognition object is changed or the stereoscopic view is changed The real-time change data corresponding to the position change or stereoscopic view change of each recognition object is automatically generated by the broadcast content processing module 14a and stored in the storage unit 15 of the smart TV, and then stored at the time of tracking for each recognition object Real-time change data is utilized so that the position of the recognition object on the UI screen implemented on the output unit 11 is automatically tracked.

방송콘텐츠 처리모듈(14a)은 출력부(11)로 광고 전환 인디케이터를 구현하며, 방송송출 프레임 단위의 스트리밍 방식으로 수신되어 저장부(15) 상에 버퍼링 상태에 있는 방송콘텐츠에 대한 출력을 개시한다.
The broadcast content processing module 14a implements the advertisement conversion indicator in the output unit 11 and receives the streaming method in units of broadcasting frames to start outputting the broadcasting contents in the buffering state on the storage unit 15 .

암시적 광고 구현모듈(14b)은 방송콘텐츠 처리모듈(14a)의 방송콘텐츠 광고콘텐츠에 대한 출력 개시에 따라, 광고 전환 인디케이터를 출력부(11)로 구현한 뒤, 방송송출 프레임 단위로 수신되고 있는 방송콘텐츠의 출력부(11)로의 시간적 흐름에 따른 구현과 함께, 암시효과가 반영된 각 광고대상물별 암시 인디케이터를 구현한다.The implicit advertisement implementing module 14b implements the advertisement conversion indicator in the output unit 11 according to the output start of the broadcast content advertisement contents of the broadcast content processing module 14a, And implements an implicit indicator for each advertisement object in which the implicit effect is reflected, along with the implementation according to the temporal flow to the output unit 11 of the broadcast content.

보다 구체적으로, 암시적 광고 구현모듈(14b)은 위치트래킹 마킹이 설정된 광고대상물, 위치트래킹 마킹이 설정된 인식대상물에 대한 암시효과를 설정한다. 여기서 암시효과는 방송콘텐츠가 스트리밍 방식으로 구현시 사용자의 요청에 따른 광고대상물 및 인식대상물에 대한 명시적 노출전에 암시적으로 스마트 TV(10) 사용자에게 간접적으로 인지시키도록 하기 위한 유저 인터페이스(User Interface) 효과를 의미한다. More specifically, the implicit advertisement implementation module 14b establishes an implicit effect on the recognized object to which the position tracking marking is set, the advertisement object to which the position tracking marking is set. Here, the implicit effect is a user interface (UI) for indirectly recognizing the advertisement object and the recognition object implicitly to the smart TV 10 user before the broadcast content is implemented in a streaming manner ) Effect.

본 발명의 실시예로 암시효과는 서브리미날 효과(subliminal effect)가 사용될 수 있으며, 서브리미날 효과는 방송송출 프레임을 이루는 광고대상물을 포함하는 다수의 방송송출 이미지(broadcasting image) 사이에 하나의 암시 인디케이터만 포함시킨 엠프티 이미지(empty-image)를 삽입하는 방식으로 수행될 수 있다(도 3 참조).In an embodiment of the present invention, a subliminal effect may be used as an implicit effect, and a subliminal effect may be one of a plurality of broadcast images including an advertisement object constituting a broadcast transmission frame And inserting an empty-image containing only an implicit indicator (see FIG. 3).

한편, 서브리미날 효과를 위한 엠프티 이미지에서 광고대상물 내지는 인식대상물에 대해 도 3에 도시된 바와 같이 치마에 대한 색변화 설정, 구두에 대한 후광 설정이 하나의 예시가 될 수 있으며, 그 밖에 광고대상물 또는 인식대상물에 대한 애드바, 상태바, 아이콘, 테두리 컬러 설정이 또 다른 예가 될 수 있다. As shown in FIG. 3, the color change setting for a skirt and the backlight setting for a shoe can be an example of an advertisement object or a recognition object in an empty image for a subliminal effect. Another example is the adver, status bar, icon, and border color settings for an object or a recognized object.

암시적 광고 구현모듈(14b)은 출력부(11)로 방송송출 프레임별 방송콘텐츠와 함께 광고대상물 및 인식대상물에 대한 암시효과 설정에 따른 암시 인디케이터를 구현한다. 상술한 바와 같이, 암시 인디케이터는 광고대상물 또는 인식대상물에 대한 색변화, 후광, 애드바, 상태바, 아이콘, 테두리 컬러로 구현가능하다. The implicit advertisement implementing module 14b implements an implicit indicator according to the setting of the implicit effect for the advertisement object and the recognition object together with the broadcasting contents for each broadcasting transmission frame to the output unit 11. [ As described above, the hint indicator can be implemented as a color change, an halo, an ad bar, a status bar, an icon, and a border color for an advertisement object or a recognition object.

암시적 광고 구현모듈(14b)은 출력부(11)로 방송송출 프레임별 방송콘텐츠에 대한 시간의 흐름에 따른 광고대상물별 또는 인식대상물별 암시 인디케이터에 한 트래킹 효과를 구현한다. 여기서 트래킹 효과는 위치트래킹 마킹이 설정된 광고대상물, 그리고 위치트래킹 마킹이 설정된 인식대상물에 대한 물체 인식에 따라 암시 인디케이터의 위치 또는 형상을 변환시켜 구현하는 것을 의미한다. The implicit advertisement implementing module 14b implements the tracking effect on the advertising object or the implicit indicator for each recognition object according to the time flow for the broadcasting contents for each broadcasting transmission frame to the output unit 11. [ Here, the tracking effect means to implement the position or shape of the indictor according to the object recognition for the object to be marked with the position tracking marking and the object to be recognized with the position tracking marking.

암시적 광고 구현모듈(14b)은 명시적 광고 전환을 위해 입력인터페이스(13)로부터 광고 전환 인디케이터 선택신호에 대한 수신을 대기한 뒤, 광고 전환 인디케이터 선택신호 수신 여부를 판단하여 명시적 광고 구현모듈(14c)로 통지함으로써, 암시적 광고출력 과정을 종료한다.
The implicit advertisement implementation module 14b waits for the advertisement switching indicator selection signal from the input interface 13 for explicit advertisement switching and then determines whether or not to receive the advertisement switching indicator selection signal and transmits the advertisement switching indicator selection signal to the explicit advertisement implementation module 14c to terminate the implicit ad output process.

명시적 광고 구현모듈(14c)은 입력 인터페이스(13)를 통해 광고 전환 인디케이터 선택신호 수신시 방송콘텐츠 중 현재 구현되는 방송송출 프레임에 포함된 각 태그 데이터와 매칭되는 광고대상물에 대한 광고대상물에 대한 대상물 표식자 구현에 따른 명시적 광고를 수행한다. 상기 입력 인터페이스(13)를 통한 광고 전환 인디케이터 선택신호는 예컨대 재생 중지(pause) 명령일 수 있으며, 이러한 명령은 리모콘 등의 입력 장치를 통해서 입력되거나, 음성인식부를 통한 음성명령이나 카메라를 통한 모션인식과 같은 UI의 구현으로 입력될 수 있다. 여기서 대상물 표식자는 도 6 및 도 7의 "A1: skrit….", "A2: shoes….", "A3: bike…."로 설정가능하나 이에 한정되지 않으며, 아이콘 등으로 변경하여 적용가능하다. The explicit advertisement implementing module 14c receives the advertisement switching indicator selection signal through the input interface 13 and displays the object corresponding to the advertisement object for the advertisement object matched with the tag data included in the currently broadcast broadcasting frame, Perform an explicit advertisement according to the marker implementation. The advertisement switching indicator selection signal through the input interface 13 may be, for example, a pause command. The command may be input through an input device such as a remote controller, a voice command through a voice recognition unit, Such as < / RTI > Here, the object marker can be set to "A1: skrit ....", "A2: shoes ...." And "A3: bike ..." in FIGS. 6 and 7, but it is not limited to this, .

보다 구체적으로, 명시적 광고 구현모듈(14c)은 암시적 광고 구현모듈(14b)에 의해 광고 전환 인디케이터 선택신호가 수신된 것으로 판단된 경우 출력부(11)로 방송송출 프레임별 방송콘텐츠와 함께 광고대상물 및 인식대상물에 대한 대상물 표식자를 구현하며, 대상물 표식자 선택시 선택된 광고대상물 또는 인식대상물에 대한 태그 데이터를 통해 광고를 구현한다.More specifically, the explicit advertisement implementing module 14c sends the advertisement switching indicator selection signal to the output unit 11 when the advertisement switching indicator selection signal is received by the implicit advertisement implementing module 14b, An object marker is implemented for the object and the recognition object, and the advertisement is implemented through the tag data for the advertisement object or the recognition object selected when the object marker is selected.

한편, 명시적 광고 구현모듈(14c)은 다수의 대상물 표식자 중 하나의 대상물 표식자에 대한 선택입력을 수신할 경우, 센싱부(12)를 통해 저장부(15)에 미리 저장된 인식데이터에 따른 방식으로 수행될 수 있다. 하나의 예로 센싱부(12)가 카메라촬영 방식의 인식모듈로 구현된 경우, 카메라 촬영을 통한 안구 인식의 결과 사용자의 눈길이 자주 가는 곳에 선택신호로 인식되거나, 사용자 촬영에 따른 사용자를 인식하여 인식된 사용자에 대해 저장부(15) 상에 저장된 관심카테고리 정보와 매칭되는 광고대상물에 해당하는 대상물 표식자를 인식하는 방식으로 수행될 수 있다. On the other hand, when the explicit advertisement implementing module 14c receives a selection input for one of the object markers, the explicit advertisement implementing module 14c generates a selection mark in accordance with the recognition data previously stored in the storage unit 15 through the sensing unit 12 . As one example, when the sensing unit 12 is implemented as a recognition module of a camera photographing system, a recognition signal may be recognized as a selection signal at a place where a user's eyes are frequently seen as a result of eye recognition through a camera photographing, And recognizing an object marker corresponding to the advertisement object matching the interest category information stored on the storage unit 15 with respect to the user.

명시적 광고 구현모듈(14c)은 출력부(11)로 방송송출 프레임별 방송콘텐츠의 흐름에 따른 광고대상물별 또는 인식대상물별 대상물 표식자를 이용한 트래킹 효과를 구현한다. 여기서 트래킹 효과는 위치트래킹 마킹이 설정된 광고대상물, 그리고 위치트래킹 마킹이 설정된 인식대상물에 대한 물체 인식에 따라 대상물 표식자의 위치를 변환시켜 구현하는 것을 의미한다. The explicit advertisement implementing module 14c implements a tracking effect using an object marker according to an advertisement object or an object marker according to a flow of broadcast contents for each broadcasting frame to the output unit 11. [ Here, the tracking effect means to convert the position of the object marker according to the object recognition for the object to be marked with the position tracking marking and the object to be recognized with the position tracking marking.

명시적 광고 구현모듈(14c)은 입력인터페이스(13)로부터 하나 이상의 광고 대상물 및 하나 이상의 인식대상물에 대한 선택신호를 수신 대기한다. 여기서 하나 이상의 광고 대상물 및 하나 이상의 인식대상물에 대한 선택신호는 예컨대 사용자가 리모콘을 지향하여 화면상의 커서를 이동시켜 하나의 광고 대상물 또는 하나의 인식 대상물을 선택하는 선택신호이거나, 사용자가 화면상에 폐곡선을 도시하여 상기 폐곡선 내에 존재하는하나 이상의 광고 대상물 및 하나 이상의 인식대상물을 선택하게 할 수 있다. 폐곡선은 반드시 시작점과 끝점이 일치하는 폐곡선 만을 지칭하는 것은 아니며, 예컨대 시작점과 끝점이 일치하지 않는 경우에는 시작점과 끝점을 최단 거리로 연결하여 폐곡선을 자동으로 완성할 수도 있다. The explicit advertisement implementation module 14c listens for one or more advertising objects and a selection signal for one or more recognition objects from the input interface 13. [ Here, the selection signal for one or more objects to be advertised and one or more objects to be recognized may be, for example, a selection signal for the user to select one advertisement object or one recognition object by moving the cursor on the screen in the direction of the remote controller, To select one or more advertising objects and one or more recognition objects existing in the closed curve. The closed curve does not necessarily refer to a closed curve in which the start point and the end point coincide. For example, when the start point and the end point do not coincide, the closed curve may be automatically completed by connecting the start point and the end point at the shortest distance.

명시적 광고 구현모듈(14c)은 다수의 광고대상물 및 다수의 인식대상물 중 하나에 대한 선택신호 수신 여부에 대한 판단을 통해 판단 결과를 광고대상물 구매모듈(14d)로 통지함으로써, 명시적 광고 수행을 완료한다.
The explicit advertisement implementation module 14c notifies the advertisement object purchase module 14d of the determination result through determination of whether or not the selection signal is received for one of a plurality of advertisement objects and a plurality of recognition objects, Complete.

광고대상물 구매모듈(14d)은 명시적 광고 구현모듈(14c)의 판단 결과 명시적 광고 수행 과정에서 다수의 광고 대상물 중 하나에 대한 선택신호를 입력 인터페이스(13)를 통해 수신시, 선택된 광고대상물에 대한 입력 인터페이스(13)를 통한 모션 제스처 입력신호가 수신되는 경우 구매 요청으로 판단하여 구매 절차를 수행한다.As a result of the explicit advertisement implementation module 14c, when the advertisement selection module 14d receives the selection signal for one of the plurality of advertisement objects through the input interface 13 in the process of performing the explicit advertisement, When the motion gesture input signal through the input interface 13 is received, it is determined that the purchase request is made and the purchase procedure is performed.

보다 구체적으로, 광고대상물 구매모듈(14d)은 다수의 광고대상물 및 다수의 인식대상물 중 하나에 대한 선택신호시, 선택된 광고대상물 또는 인식대상물에 대한 리모컨(20)으로부터 모션 제스처 입력신호를 리모컨 신호 수신부(13b)를 통해 수신하거나 입력부(13a)로의 모션 제스처 입력신호 수신을 통한 모션 제스처 입력시 선택된 광고대상물 또는 인식대상물에 대한 구매 요청으로 인식하여 구매 과정을 수행하는 것이다.
More specifically, the advertisement purchase module 14d receives a motion gesture input signal from the remote controller 20 for a selected advertisement object or a recognized object, in response to a selection signal for one of a plurality of advertisement objects and a plurality of objects to be recognized, And receives a motion gesture input signal through the input unit 13a or receives a motion gesture input signal to the input unit 13a, and recognizes the received target object as a purchase request for a recognized object or a recognition target object.

타임머신 제공모듈(14e)은 대상물 캡처 수단(14e-1), 대상물 선택 수단(14e-2) 및 대상물 구현 수단(14e-3)을 구비한다. 이하에서는 설명의 편의를 위해 타임머신 제공모듈(14e)에 대한 구체적인 설명시 광고대상물을 기준으로 설명하나 괄호안에 병기되는 상술한 인식대상물에 대해서도 동일하게 적용가능하다.  The time machine providing module 14e includes object capturing means 14e-1, object selecting means 14e-2, and object implementing means 14e-3. Hereinafter, for convenience of explanation, the time machine providing module 14e will be described with reference to an advertisement object in a specific description, but the same applies to the above-described object to be recognized included in parentheses.

대상물 캡처 수단(14e-1)은 상술한 암시적 광고 구현모듈(14b)에 의해 광고대상물(및 인식대상물)에 대한 암시효과 및 트래킹 효과에 대한 설정에 따라 암시적 광고에 대한 구현이 개시되면 동작한다.When the implementation of the implicit advertisement is started according to the setting of the implicit effect and the tracking effect on the advertisement object (and the recognition object) by the above-mentioned implicit advertisement implementation module 14b, the object capturing means 14e- do.

한편, 대상물 캡처 수단(14e-1)은 상술한 명시적 광고 구현모듈(14c)에 의해 광고대상물(및 인식대상물)에 대한 트래킹 효과에 대한 설정에 따라 명시적 광고에 대한 구현이 개시될 경우에도 동작한다.On the other hand, the object capturing means 14e-1 may be configured so that even if the implementation of the explicit advertisement is started according to the setting of the tracking effect on the advertisement object (and the object to be recognized) by the explicit advertisement implementation module 14c .

먼저, 대상물 캡처 수단(14e-1)은 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 시작을 위한 음성을 입력받은 음성수신부(13c)로부터 동작인식 음성신호를 수신한다. 여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 기능을 수행하기 위한 캡처이미지 생성에 대한 개시를 위해 입력받으며, "시작", "동작" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. First, the object capturing unit 14e-1 receives a voice for starting capturing from the user with respect to the advertisement object (and the object to be recognized) in the broadcast content implemented in the UI screen on the output unit 11, Recognized voice signal. Here, the voice for starting the capture is inputted for the start of the generation of the capture image for the user to perform the function for the advertisement object (and the object to be recognized) on the broadcast content, And stored in the storage unit 15.

암시적 광고 구현 과정에서의 대상물 캡처 수단(14e-1)은 출력부(11) 상에 현재 출력되고 있는 방송콘텐츠에 포함된 상태로 암시효과 및 트래킹 효과가 적용된 광고대상물(및 인식대상물)을 이용한 암시적 광고 구현에 따라, 카메라부(13d)를 제어하여 사용자의 동공을 물체 인식 기법에 의해 검출하고, 인식에 따라 사용자의 동공 크기 확대 및 축소 정보에 대한 센싱을 개시한다. The object capturing means 14e-1 in the implicit advertisement implementation process uses the advertisement object (and the recognition object) to which the implicit effect and the tracking effect are applied in the state of being included in the broadcast content currently being output on the output unit 11. [ According to the implicit advertisement implementation, the pupil of the user is detected by the object recognition method by controlling the camera unit 13d, and the sensing of the pupil size enlargement and reduction information of the user is started according to the recognition.

한편, 명시적 광고 구현 과정에서의 대상물 캡처 수단(14e-1)은 출력부(11) 상에 현재 출력되고 있는 방송콘텐츠에 포함된 상태로 트래킹 효과가 적용된 광고대상물(및 인식대상물)을 이용한 명시적 광고 구현에 따라, 카메라부(13d)를 제어하여 사용자의 동공을 물체 인식 기법에 의해 검출하고, 인식에 따라 사용자의 동공 크기 확대 및 축소 정보에 대한 센싱을 개시한다.On the other hand, the object capturing means 14e-1 in the process of explicit advertisement implementation includes a state of being included in the broadcast content currently being output on the output unit 11, The pupil of the user is detected by the object recognizing method by controlling the camera unit 13d according to the advertisement implementation of the advertisement and the sensing of the pupil size enlargement and reduction information of the user is started according to the recognition.

이 경우, 대상물 캡처 수단(14e-1)은 동공 크기 확대 및 축소 정보에 대한 센싱 뿐만 아니라, 현재 출력되는 방송콘텐츠 상에 복수의 광고대상물(및 인식대상물)이 포함된 경우 저장부(15) 상에 미리 저장된 사용자의 양안의 동공과 홍채의 배열에 따른 사용자가 바라보는 UI 화면의 지점에 대한 분석을 더 수행하여, 방송콘텐츠 상에서 바라보는 광고대상물(또는 인식대상물)의 위치까지 센싱하는 것으로 변형가능하다(도 4 및 도 6 참조). In this case, the object capturing means 14e-1 may not only sense the pupil size enlargement and reduction information, but also store a plurality of advertisement objects (and objects to be recognized) (Or an object to be recognized) viewed on the broadcast content by further analyzing a point on the UI screen viewed by the user according to the arrangement of the pupil and iris in both eyes of the user, (See Figs. 4 and 6).

대상물 선택 수단(14e-2)은 카메라부(13d)에 의해 촬영된 동공 촬영 데이터를 기초로 사용자의 동공 크기가 확대된 상태인지 여부를 판단한다. The object selecting means 14e-2 determines whether the pupil size of the user is expanded based on the pupil photographing data photographed by the camera section 13d.

암시적 광고 제공 과정에서의 대상물 선택 수단(14e-2)은, 판단결과 동공 크기가 확대된 상태인 경우, 현재의 방송콘텐츠에 암시효과 및 트래킹 효과가 적용된 광고대상물(및 인식대상물)를 포함시켜 캡처하여 캡처이미지를 생성한 뒤, 캡처 전후의 미리 설정된 시간에 해당하는 방송콘텐츠를 저장부(15)에 저장하고, 저장된 캡처이미지는 출력부(11)에 구현된 UI 화면 중 캡처이미지 영역(11a)으로 구분하여 구현한다.The object selecting means 14e-2 in the process of providing the implicit advertisement includes the advertisement object (and the object to be recognized) to which the implicit effect and the tracking effect are applied to the current broadcast content when the pupil size is enlarged And stores the broadcast content corresponding to a predetermined time before and after the capture in the storage unit 15. The stored captured image is stored in the captured image area 11a of the UI screen implemented in the output unit 11 ).

명시적 광고 제공 과정에서의 대상물 선택 수단(14e-2)은, 판단결과 동공 크기가 확대된 상태인 경우, 현재의 방송콘텐츠에 트래킹 효과가 적용된 광고대상물(및 인식대상물)를 포함시켜 캡처하여 캡처이미지를 생성한 뒤, 캡처 전후의 미리 설정된 시간에 해당하는 방송콘텐츠를 저장부(15)에 저장하고, 저장된 캡처이미지는 출력부(11)에 구현된 UI 화면 중 캡처이미지 영역(11a)으로 구분하여 구현한다.The object selecting means 14e-2 in the process of providing an explicit advertisement includes an advertisement object (and an object to be recognized) to which a tracking effect is applied to the current broadcast content when the pupil size is enlarged, And stores the broadcast content corresponding to a predetermined time before and after the capture in the storage unit 15. The stored captured image is divided into a captured image area 11a of the UI screens implemented in the output unit 11 .

대상물 선택 수단(14e-2)은 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 종료를 위한 음성을 입력받은 음성수신부(13c)로부터 캡처 종료 음성신호 수신 여부를 판단한다. 여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 캡처이미지 생성에 대한 종료를 위해 입력받으며, "종료", "중단", "정지" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. The object selecting means 14e-2 receives the audio for capturing and ending the capturing from the user with respect to the advertisement object (and the object to be recognized) from the broadcast contents implemented in the UI screen on the output unit 11 It is determined whether a capture end audio signal is received or not. Here, the voice for starting the capture operation is input for the user to terminate the generation of the captured image for the advertisement object (and the object to be recognized) on the broadcast content and is set in advance such as "end", " And stored in the storage unit 15.

판단결과 캡처 종료 음성신호를 수신한 경우, 대상물 선택 수단(14e-2)은 캡처이미지 영역(11a)에 캡처된 캡처이미지 중 하나에 대한 카메라부(13d)에 대한 촬영데이터를 이용해 모션 이미지 센싱을 통한 캡처이미지 선택신호를 수신한다. 여기서 모션 이미지 센싱을 수행하기 위해 스마트 TV(10)는 입력 인터페이스(13) 중 카메라부(13d)를 통해 사용자에 대한 실시간 촬영을 통한 영상정보를 획득한다. As a result of the determination, when the end-of-capture audio signal is received, the object selecting means 14e-2 performs motion image sensing using the shooting data for the camera portion 13d for one of the captured images captured in the captured image region 11a Lt; / RTI > Here, in order to perform motion image sensing, the smart TV 10 obtains image information through real-time shooting of the user through the camera unit 13d of the input interface 13.

이후, 대상물 선택 수단(14e-2)은 획득한 영상정보에 포함된 화소를 특정한다. 여기서 영상정보에 포함된 화소의 특정은 화소의 명암, 화소의 색상, 화소가 형성하는 선, 및 화소가 시간의 흐름에 따라서 변화하는 형태 등으로부터 화소의 특성을 추출하는 것을 의미한다. Thereafter, the object selecting means 14e-2 specifies a pixel included in the acquired image information. Here, the specification of the pixels included in the image information means extracting the characteristics of the pixels from the lightness and darkness of the pixels, the colors of the pixels, the lines formed by the pixels, and the shapes in which the pixels change with the passage of time.

대상물 선택 수단(14e-2)은 영상정보에 포함된 화소를 특정에 따라 저장부(15)에 저장된 다수의 모션 패턴 정보에서 유사범위의 모션 패턴을 추출한다. 여기서 유사범위의 모션 패턴이 다수개인 경우 가장 근접한 모션 패턴 하나만을 추출한다. 여기서 모션 패턴 정보에는 손으로 광고대상물 또는 인식대상물이 구현된 방향으로 움켜지는 모션 패턴 정보 또는 발이나 손가락으로 가리키는 패턴, 사용자의 동공에 대한 확대를 인식하는 모션 패턴 정보를 포함할 수 있다. 그 밖에 리모컨(20)에 부착된 지문 센서를 통한 지문 인식 패턴 정보를 포함하도록 확대가 가능하다. 한편, 도 5는 암시적 광고 구현 상태에서 손을 이용해 움켜지는 패턴을 나타내는 예시이다. 그리고 도 7은 명시적 광고 구현 상태에서 손을 이용해 움켜지는 패턴을 나타내는 예시이다. 한편, 도 5 및 도 7에서와 같이 각 캡처이미지는 캡처이미지 영역(11a)에서 capture1, capture2, capture3과 같이 나열되는 방식으로 구현가능하다. The object selecting means 14e-2 extracts a similar range of motion patterns from the plurality of motion pattern information stored in the storage unit 15 according to the pixel included in the image information. Here, if there are a plurality of motion patterns in the similar range, only the closest motion pattern is extracted. Here, the motion pattern information may include motion pattern information that is hand-held in the direction in which the advertisement object or the recognition object is implemented, a pattern pointed by the foot or the finger, and motion pattern information that recognizes enlargement of the user's pupil. It is possible to expand the fingerprint recognition pattern information through the fingerprint sensor attached to the remote controller 20. Meanwhile, FIG. 5 shows an example of a pattern that is grabbed by a hand in an implicit advertisement implementation state. And FIG. 7 is an example showing a pattern that is grabbed by hand in an explicit advertisement implementation state. As shown in FIGS. 5 and 7, each captured image can be implemented in such a manner that the captured images are arranged as capture1, capture2, and capture3 in the captured image area 11a.

여기서 모션 이미지 센싱을 위해 저장부(15)에는 다양한 모션 패턴 정보가 저장되어 있는데, 다양한 모션 패턴 정보는 다양한 모션 패턴 자체 정보, 그리고 다양한 모션 패턴의 기울어진 것, 역으로 된 것, 약간 각도가 기울어진 것 등을 포함하는 것이 바람직하다. Here, various motion pattern information is stored in the storage unit 15 for motion image sensing. Various motion pattern information includes various motion pattern information, a skew of various motion patterns, a reversed one, And the like.

대상물 구현 수단(14e-3)은 캡처이미지 선택신호에 따라 선택된 캡처이미지에 대한 저장부(15)에 선택된 캡처이미지와 매칭되어 저장된 방송콘텐츠를 UI 화면 중 구분된 영역인 영역(11b)으로 구현한다. 이때, 영역(11b)으로 구현되는 방송콘텐츠는 암시적 광고 과정에서는 선택된 캡처이미지에 포함된 광고대상물와 매칭되는 암시효과 및 트래킹 효과가 적용된 상태이며, 명시적 광고 과정에서는 캡처이미지에 포함된 광고대상물와 매칭되는 대상물 표식자에 트래킹 효과가 적용된 상태이며,
The object implementing means 14e-3 implements the broadcast content stored in the storage unit 15 for the selected captured image in accordance with the captured image selection signal, as the region 11b, which is a divided region of the UI screen . At this time, the broadcasting contents implemented in the area 11b are in a state in which an implicit effect and a tracking effect are matched with the advertisement object included in the selected captured image in the implicit advertisement process. In the explicit advertisement process, matching with the advertisement object included in the captured image A tracking effect is applied to an object marker,

도 8은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법 중 암시적 광고에서의 기능에 의한 광고 설정 및 광고 구현 과정을 나타내는 흐름도이다. 도 1 내지 도 8을 참조하면, 스마트 TV(10)는 방송송출 프레임 별로 스트리밍 방식으로 방송통신망(30)을 통해 방송콘텐츠 서버(40)로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하여 사용자가 방송콘텐츠만을 재생하기를 원하는 경우 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 방송콘텐츠에 대한 방송송출 프레임 단위의 스트리밍 방식으로의 출력부(11)로의 구현을 준비하고, 사용자가 방송콘텐츠와 광고 콘텐츠를 UI 화면으로 동시에 재생하기를 원하는 경우에는 이에 따른 암시적 광고 구현을 전제로 후술할 단계(S23a-1) 내지 단계(S23-7)에 의한 광고 과정이 수행된다. FIG. 8 is a flowchart illustrating an advertisement setting process and an advertisement setting process according to a function in an implicit advertisement among the smart TV-based advertisement providing method having the emotional advertisement function according to the embodiment of the present invention. 1 to 8, the smart TV 10 receives packetized broadcast content and advertisement tag content from the broadcast content server 40 through the broadcast communication network 30 in a streaming manner for each broadcast transmission frame, If it is desired to reproduce only the broadcast content, the broadcast content and the advertisement tag content are separated from each other, and then the broadcast content is prepared to be output to the output unit 11 in a streaming manner in units of broadcast output frames for the broadcast content. The advertisement process by steps S23a-1 to S23-7 to be described later is performed on the premise of the implicit advertisement implementation.

먼저, 스마트 TV(10)는 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 시작을 위한 음성을 입력받은 음성수신부(13c)로부터 동작인식 음성신호를 수신한다(S23a-1).First, the smart TV 10 receives a voice from a voice receiving unit 13c, which receives a voice for starting capturing from a user, with respect to an advertisement object (and an object to be recognized) in broadcast contents implemented as a UI screen on the output unit 11 And receives the recognized speech signal (S23a-1).

여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 기능을 수행하기 위한 캡처이미지 생성에 대한 개시를 위해 입력받으며, "시작", "동작" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. Here, the voice for starting the capture is inputted for the start of the generation of the capture image for the user to perform the function for the advertisement object (and the object to be recognized) on the broadcast content, And stored in the storage unit 15.

단계(S23a-1) 이후, 스마트 TV(10)는 출력부(11) 상에 현재 출력되고 있는 방송콘텐츠에 포함된 상태로 암시효과 및 트래킹 효과가 적용된 광고대상물(및 인식대상물)을 이용한 암시적 광고 구현에 따라, 카메라부(13d)를 제어하여 사용자의 동공을 물체 인식 기법에 의해 검출하고, 인식에 따라 사용자의 동공 크기 확대 및 축소 정보에 대한 센싱을 개시한다(S23a-2). 이 경우, 스마트 TV(10)는 동공 크기 확대 및 축소 정보에 대한 센싱 뿐만 아니라, 현재 출력되는 방송콘텐츠 상에 복수의 광고대상물(및 인식대상물)이 포함된 경우 저장부(15) 상에 미리 저장된 사용자의 양안의 동공과 홍채의 배열에 따른 사용자가 바라보는 UI 화면의 지점에 대한 분석을 더 수행하여, 방송콘텐츠 상에서 바라보는 광고대상물(또는 인식대상물)의 위치까지 센싱하는 것으로 변형가능하다(도 4 참조). After step S23a-1, the smart TV 10 displays an implicit < RTI ID = 0.0 > (< / RTI & According to the implementation of the advertisement, the pupil of the user is detected by the object recognition method by controlling the camera unit 13d, and the sensing of the pupil size enlargement and reduction information of the user is started according to the recognition (S23a-2). In this case, the smart TV 10 may store not only the sensing of the pupil size enlargement and reduction information but also the sensing of the pupil size enlargement and reduction information stored in advance in the storage unit 15 when a plurality of objects to be advertised (and objects to be recognized) It is possible to further analyze the point of the UI screen viewed by the user according to the arrangement of the pupil and the iris in both sides of the user and to detect the position of the advertisement object (or the recognition object) viewed on the broadcast content 4).

단계(S23a-2) 이후, 스마트 TV(10)는 카메라부(13d)에 의해 촬영된 동공 촬영 데이터를 기초로 사용자의 동공 크기가 확대된 상태인지 여부를 판단한다(S23a-3). After step S23a-2, the smart TV 10 determines whether the pupil size of the user is enlarged based on the pupil photographing data photographed by the camera section 13d (S23a-3).

단계(S23a-3)의 판단결과 동공 크기가 확대된 상태가 아닌 경우 후술한 단계(S23a-5)로 진행된다. 반대로 판단결과 동공 크기가 확대된 상태인 경우 스마트 TV(10)는 현재의 방송콘텐츠에 암시효과 및 트래킹 효과가 적용된 광고대상물(및 인식대상물)를 포함시켜 캡처하여 캡처이미지를 생성한 뒤, 캡처 전후의 미리 설정된 시간에 해당하는 방송콘텐츠를 저장부(15)에 저장하고, 저장된 캡처이미지는 출력부(11)에 구현된 UI 화면 중 캡처이미지 영역(11a)으로 구분하여 구현한다(S23a-4).If the pupil size is not enlarged as a result of the judgment of step S23a-3, the process proceeds to step S23a-5 described later. On the contrary, if it is determined that the pupil size is enlarged, the smart TV 10 captures an advertisement object (and a recognition object) to which the implicit effect and the tracking effect are applied to the current broadcast content to generate a capture image, The captured image is stored in the storage unit 15 and the captured image is divided into the captured image area 11a of the UI screen implemented in the output unit 11 (S23a-4) .

단계(S23a-4) 이후, 스마트 TV(10)는 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 종료를 위한 음성을 입력받은 음성수신부(13c)로부터 캡처 종료 음성신호 수신 여부를 판단한다(S23a-5). 여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 캡처이미지 생성에 대한 종료를 위해 입력받으며, "종료", "중단", "정지" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. After the step S23a-4, the smart TV 10 receives the voice for inputting the capturing completion signal from the user for the advertisement object (and the recognition object) in the broadcast content implemented as the UI screen on the output unit 11 It is determined whether a capture end audio signal is received from the receiving unit 13c (S23a-5). Here, the voice for starting the capture operation is input for the user to terminate the generation of the captured image for the advertisement object (and the object to be recognized) on the broadcast content and is set in advance such as "end", " And stored in the storage unit 15.

단게(S23a-5)의 판단결과 캡처 종료 음성신호를 수신하지 않은 경우 스마트 TV(10)는 단계(S23a-3)로 회귀한다. 반대로 판단결과 캡처 종료 음성신호를 수신한 경우, 스마트 TV(10)는 캡처이미지 영역(11a)에 캡처된 캡처이미지 중 하나에 대한 카메라부(13d)에 대한 촬영데이터를 이용해 모션 이미지 센싱을 통한 캡처이미지 선택신호를 수신한다(S23a-6).If the capture end audio signal is not received as a result of the determination in step S23a-5, the smart TV 10 returns to step S23a-3. Conversely, when the end-of-capture voice signal is received as a result of the determination, the smart TV 10 captures the captured image by capturing motion image by using the captured image data of the camera portion 13d for one of the captured images captured in the captured image region 11a And receives an image selection signal (S23a-6).

여기서 모션 이미지 센싱을 수행하기 위해 스마트 TV(10)는 입력 인터페이스(13) 중 카메라부(13d)를 통해 사용자에 대한 실시간 촬영을 통한 영상정보를 획득한다. Here, in order to perform motion image sensing, the smart TV 10 obtains image information through real-time shooting of the user through the camera unit 13d of the input interface 13.

이후, 스마트 TV(10)는 획득한 영상정보에 포함된 화소를 특정한다. 여기서 영상정보에 포함된 화소의 특정은 화소의 명암, 화소의 색상, 화소가 형성하는 선, 및 화소가 시간의 흐름에 따라서 변화하는 형태 등으로부터 화소의 특성을 추출하는 것을 의미한다. Then, the smart TV 10 specifies pixels included in the acquired image information. Here, the specification of the pixels included in the image information means extracting the characteristics of the pixels from the lightness and darkness of the pixels, the colors of the pixels, the lines formed by the pixels, and the shapes in which the pixels change with the passage of time.

스마트 TV(10)는 영상정보에 포함된 화소를 특정에 따라 저장부(15)에 저장된 다수의 모션 패턴 정보에서 유사범위의 모션 패턴을 추출한다. 여기서 유사범위의 모션 패턴이 다수개인 경우 가장 근접한 모션 패턴 하나만을 추출한다. 여기서 모션 패턴 정보에는 손으로 광고대상물 또는 인식대상물이 구현된 방향으로 움켜지는 모션 패턴 정보 또는 발이나 손가락으로 가리키는 패턴, 사용자의 동공에 대한 확대를 인식하는 모션 패턴 정보를 포함할 수 있다. 그 밖에 리모컨(20)에 부착된 지문 센서를 통한 지문 인식 패턴 정보를 포함하도록 확대가 가능하다. 한편, 도 5는 암시적 광고 구현 상태에서 손을 이용해 움켜지는 패턴을 나타내는 예시이다. The smart TV 10 extracts motion patterns of a similar range from a plurality of motion pattern information stored in the storage unit 15 according to the pixels included in the image information. Here, if there are a plurality of motion patterns in the similar range, only the closest motion pattern is extracted. Here, the motion pattern information may include motion pattern information that is hand-held in the direction in which the advertisement object or the recognition object is implemented, a pattern pointed by the foot or the finger, and motion pattern information that recognizes enlargement of the user's pupil. It is possible to expand the fingerprint recognition pattern information through the fingerprint sensor attached to the remote controller 20. Meanwhile, FIG. 5 shows an example of a pattern that is grabbed by a hand in an implicit advertisement implementation state.

여기서 모션 이미지 센싱을 위해 저장부(15)에는 다양한 모션 패턴 정보가 저장되어 있는데, 다양한 모션 패턴 정보는 다양한 모션 패턴 자체 정보, 그리고 다양한 모션 패턴의 기울어진 것, 역으로 된 것, 약간 각도가 기울어진 것 등을 포함하는 것이 바람직하다. Here, various motion pattern information is stored in the storage unit 15 for motion image sensing. Various motion pattern information includes various motion pattern information, a skew of various motion patterns, a reversed one, And the like.

단계(S23a-6) 이후, 스마트 TV(10)는 캡처이미지 선택신호에 따라 선택된 캡처이미지에 대한 단계(S23a-4)에서 저장부(15)에 선택된 캡처이미지와 매칭되어 저장된 방송콘텐츠를 UI 화면 중 구분된 영역인 영역(11b)으로 구현한다(S23a-7). 이때, 영역(11b)으로 구현되는 방송콘텐츠는 단계(S23a-6)에서 선택된 캡처이미지에 포함된 광고대상물(및 인식대상물)에 암시효과 및 트래킹 효과가 적용된 상태이다.
After step S23a-6, the smart TV 10 displays the broadcast content stored in the storage unit 15 matching the selected capture image in step S23a-4 for the selected captured image in accordance with the captured image selection signal, (S23a-7). ≪ tb >< TABLE > At this time, the broadcast content implemented in the area 11b is a state in which an implicit effect and a tracking effect are applied to the advertisement object (and the recognition object) included in the captured image selected in step S23a-6.

도 9는 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법 중 명시적 광고에서의 기능에 의한 광고 설정 및 광고 구현 과정을 나타내는 흐름도이다. 도 1 내지 도 9를 참조하면, 스마트 TV(10)는 방송송출 프레임 별로 스트리밍 방식으로 방송통신망(30)을 통해 방송콘텐츠 서버(40)로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하여 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 방송콘텐츠에 대한 방송송출 프레임 단위의 스트리밍 방식으로의 출력부(11)로의 구현을 준비하고, 이에 따른 암시적 광고 구현 후, 명시적 광고에 대한 구현을 전제로 명시적 광고에 있어서 후술할 단계(S32a-1) 내지 단계(S32-7)에 의한 기능 과정이 수행된다. FIG. 9 is a flowchart illustrating an advertisement setting process and an advertisement setting process according to a function of an explicit advertisement among smart TV-based advertisement providing methods having an emotional advertisement function according to an embodiment of the present invention. 1 to 9, the smart TV 10 receives the packetized broadcast content and the advertisement tag content from the broadcast content server 40 through the broadcast communication network 30 in a streaming manner for each broadcast transmission frame, And the advertisement tag content are separated from each other. Then, the broadcasting contents are prepared to be output to the output unit 11 in a streaming manner in units of broadcasting frames for the broadcasting contents, and after implementation of the implicit advertisement according to the streaming method, The functional process by steps S32a-1 to S32-7 to be described later in the explicit advertisement is performed.

먼저, 스마트 TV(10)는 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 시작을 위한 음성을 입력받은 음성수신부(13c)로부터 동작인식 음성신호를 수신한다(S32a-1).First, the smart TV 10 receives a voice from a voice receiving unit 13c, which receives a voice for starting capturing from a user, with respect to an advertisement object (and an object to be recognized) in broadcast contents implemented as a UI screen on the output unit 11 And receives the recognized speech signal (S32a-1).

여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 기능을 수행하기 위한 캡처이미지 생성에 대한 개시를 위해 입력받으며, "시작", "동작" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. Here, the voice for starting the capture is inputted for the start of the generation of the capture image for the user to perform the function for the advertisement object (and the object to be recognized) on the broadcast content, And stored in the storage unit 15.

단계(S32a-1) 이후, 스마트 TV(10)는 출력부(11) 상에 현재 출력되고 있는 방송콘텐츠에 포함된 상태로 트래킹 효과가 적용된 광고대상물(및 인식대상물)을 이용한 명시적 광고 구현에 따라, 카메라부(13d)를 제어하여 사용자의 동공을 물체 인식 기법에 의해 검출하고, 인식에 따라 사용자의 동공 크기 확대 및 축소 정보에 대한 센싱을 개시한다(S32a-2). 이 경우, 스마트 TV(10)는 현재 출력되는 방송콘텐츠 상에 복수의 광고대상물(및 인식대상물)이 포함된 경우 동공 크기 확대 및 축소 정보에 대한 센싱 뿐만 아니라, 저장부(15) 상에 미리 저장된 사용자의 양안의 동공과 홍채의 배열에 따른 사용자가 바라보는 UI 화면의 지점에 대한 분석을 더 수행하여, 방송콘텐츠 상에서 바라보는 광고대상물(또는 인식대상물)의 위치까지 센싱하는 것으로 변형가능하다(도 6 참조). After step S32a-1, the smart TV 10 displays an explicit advertisement using the advertisement object (and the recognition object) to which the tracking effect is applied in a state of being included in the broadcast content currently being output on the output unit 11 The pupil of the user is detected by the object recognition method by controlling the camera unit 13d, and the sensing of the pupil size enlargement and reduction information of the user is started according to the recognition (S32a-2). In this case, if the smart TV 10 includes a plurality of advertisement objects (and objects to be recognized) on the broadcast content currently being output, the Smart TV 10 may store not only the sensing of the pupil size enlargement and reduction information, It is possible to further analyze the point of the UI screen viewed by the user according to the arrangement of the pupil and the iris in both sides of the user and to detect the position of the advertisement object (or the recognition object) viewed on the broadcast content 6).

단계(S32a-2) 이후, 스마트 TV(10)는 카메라부(13d)에 의해 촬영된 동공 촬영 데이터를 기초로 사용자의 동공 크기가 확대된 상태인지 여부를 판단한다(S32a-3). After step S32a-2, the smart TV 10 determines whether the pupil size of the user is enlarged based on the pupil photographing data photographed by the camera section 13d (S32a-3).

단계(S32a-3)의 판단결과 동공 크기가 확대된 상태가 아닌 경우 후술한 단계(S32a-5)로 진행된다. 반대로 동공 크기가 확대된 상태인 경우 스마트 TV(10)는 현재의 방송콘텐츠에 트래킹 효과가 적용된 광고대상물(및 인식대상물)를 포함시켜 캡처하여 캡처이미지를 생성한 뒤, 캡처 전후의 미리 설정된 시간에 해당하는 방송콘텐츠를 저장부(15)에 저장하고, 저장된 캡처이미지는 출력부(11)에 구현된 UI 화면 중 캡처이미지 영역(11a)으로 구분하여 구현한다(S32a-4).If the pupil size is not enlarged as a result of the determination in step S32a-3, the process proceeds to step S32a-5 described later. On the other hand, if the pupil size is enlarged, the smart TV 10 captures an advertisement object (and a recognition object) to which a tracking effect is applied in the current broadcast content, generates a capture image, The corresponding broadcast content is stored in the storage unit 15 and the captured captured image is divided into the captured image area 11a of the UI screen implemented in the output unit 11 and implemented at step S32a-4.

단계(S32a-4) 이후, 스마트 TV(10)는 출력부(11) 상의 UI 화면으로 구현되고 있는 방송콘텐츠에서 광고대상물(및 인식대상물)에 대해 사용자로부터 캡처 수행 종료를 위한 음성을 입력받은 음성수신부(13c)로부터 캡처 종료 음성신호 수신 여부를 판단한다(S32a-5). 여기서 캡처 수행 시작을 위한 음성은 사용자가 방송콘텐츠 상에서의 광고대상물(및 인식대상물)에 대한 캡처이미지 생성에 대한 종료를 위해 입력받으며, "종료", "중단", "정지" 등과 같이 미리 설정되어 저장부(15)에 저장되어 있어야 한다. After step S32a-4, the smart TV 10 receives a voice for ending capturing from the user with respect to the advertisement object (and the object to be recognized) from the broadcast content implemented in the UI screen on the output unit 11, It is determined whether or not a capture end audio signal is received from the receiving unit 13c (S32a-5). Here, the voice for starting the capture operation is input for the user to terminate the generation of the captured image for the advertisement object (and the object to be recognized) on the broadcast content and is set in advance such as "end", " And stored in the storage unit 15.

단게(S32a-5)의 판단결과 캡처 종료 음성신호를 수신하지 않은 경우 스마트 TV(10)는 단계(S32a-3)로 회귀한다. 반대로 판단결과 캡처 종료 음성신호를 수신한 경우, 스마트 TV(10)는 캡처이미지 영역(11a)에 캡처된 캡처이미지 중 하나에 대한 카메라부(13d)에 대한 촬영데이터를 이용해 모션 이미지 센싱을 통한 캡처이미지 선택신호를 수신한다(S32a-6).If it is determined in step S32a-5 that the capturing end audio signal has not been received, the smart TV 10 returns to step S32a-3. Conversely, when the end-of-capture voice signal is received as a result of the determination, the smart TV 10 captures the captured image by capturing motion image by using the captured image data of the camera portion 13d for one of the captured images captured in the captured image region 11a And receives an image selection signal (S32a-6).

여기서 모션 이미지 센싱을 수행하기 위해 스마트 TV(10)는 입력 인터페이스(13) 중 카메라부(13d)를 통해 사용자에 대한 실시간 촬영을 통한 영상정보를 획득한다. Here, in order to perform motion image sensing, the smart TV 10 obtains image information through real-time shooting of the user through the camera unit 13d of the input interface 13.

이후, 스마트 TV(10)는 획득한 영상정보에 포함된 화소를 특정한다. 여기서 영상정보에 포함된 화소의 특정은 화소의 명암, 화소의 색상, 화소가 형성하는 선, 및 화소가 시간의 흐름에 따라서 변화하는 형태 등으로부터 화소의 특성을 추출하는 것을 의미한다. Then, the smart TV 10 specifies pixels included in the acquired image information. Here, the specification of the pixels included in the image information means extracting the characteristics of the pixels from the lightness and darkness of the pixels, the colors of the pixels, the lines formed by the pixels, and the shapes in which the pixels change with the passage of time.

스마트 TV(10)는 영상정보에 포함된 화소를 특정에 따라 저장부(15)에 저장된 다수의 모션 패턴 정보에서 유사범위의 모션 패턴을 추출한다. 여기서 유사범위의 모션 패턴이 다수개인 경우 가장 근접한 모션 패턴 하나만을 추출한다. 여기서 모션 패턴 정보에는 손으로 광고대상물 또는 인식대상물이 구현된 방향으로 움켜지는 모션 패턴 정보 또는 발이나 손가락으로 가리키는 패턴, 사용자의 동공에 대한 확대를 인식하는 모션 패턴 정보를 포함할 수 있다. 그 밖에 리모컨(20)에 부착된 지문 센서를 통한 지문 인식 패턴 정보를 포함하도록 확대가 가능하다. 한편, 도 7는 명시적 광고 구현 상태에서 손을 이용해 움켜지는 패턴을 나타내는 예시이다. The smart TV 10 extracts motion patterns of a similar range from a plurality of motion pattern information stored in the storage unit 15 according to the pixels included in the image information. Here, if there are a plurality of motion patterns in the similar range, only the closest motion pattern is extracted. Here, the motion pattern information may include motion pattern information that is hand-held in the direction in which the advertisement object or the recognition object is implemented, a pattern pointed by the foot or the finger, and motion pattern information that recognizes enlargement of the user's pupil. It is possible to expand the fingerprint recognition pattern information through the fingerprint sensor attached to the remote controller 20. Meanwhile, FIG. 7 is an example showing a pattern that is grabbed by hand in an explicit advertisement implementation state.

여기서 모션 이미지 센싱을 위해 저장부(15)에는 다양한 모션 패턴 정보가 저장되어 있는데, 다양한 모션 패턴 정보는 다양한 모션 패턴 자체 정보, 그리고 다양한 모션 패턴의 기울어진 것, 역으로 된 것, 약간 각도가 기울어진 것 등을 포함하는 것이 바람직하다. Here, various motion pattern information is stored in the storage unit 15 for motion image sensing. Various motion pattern information includes various motion pattern information, a skew of various motion patterns, a reversed one, And the like.

스마트 TV(10)는 캡처이미지 선택신호에 따라 선택된 캡처이미지에 대한 단계(S32a-4)에서 저장부(15)에 선택된 캡처이미지와 매칭되어 저장된 방송콘텐츠를 UI 화면 중 구분된 영역인 영역(11b)으로 구현한다(S32a-7). 이때, 영역(11b)으로 구현되는 방송콘텐츠는 단계(S32a-6)에서 선택된 캡처이미지에 포함된 광고대상물(및 인식대상물)에 트래킹 효과가 적용된 상태이다.
The smart TV 10 displays the broadcast content stored in the storage unit 15 matching with the selected captured image in the step S32a-4 for the selected captured image in accordance with the captured image selection signal in the area 11b ) (S32a-7). At this time, the broadcast content implemented in the area 11b is a state in which the tracking effect is applied to the advertisement object (and the recognition object) included in the captured image selected in step S32a-6.

도 10은 본 발명의 실시예에 따른 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법을 나타내는 전체적인 흐름도이다. 도 1 내지 도 10을 참조하면, 스마트 TV(10)는 방송송출 프레임 별로 스트리밍 방식으로 방송통신망(30)을 통해 방송콘텐츠 서버(40)로부터 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 수신하여 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 방송콘텐츠에 대한 방송송출 프레임 단위의 스트리밍 방식으로의 출력부(11)로의 구현을 준비한다(S10).FIG. 10 is a flowchart illustrating an advertisement providing method based on a smart TV having a sensibility advertisement function according to an embodiment of the present invention. 1 to 10, the smart TV 10 receives packetized broadcast content and advertisement tag content from the broadcast content server 40 through the broadcast communication network 30 in a streaming manner for each broadcast transmission frame, And the advertisement tag content, and prepares for implementation of the streaming method in the output unit 11 in units of broadcasting frames for broadcasting contents (S10).

여기서, 방송통신망(30)은 대용량, 장거리 음성 및 데이터 서비스에 의해 브로드 캐스팅 형태의 방송을 위한 고속 유선 또는 문선 기간 망이며, 유선 또는 무선 인터넷(Internet)이 될 수도 있다. 방송통신망(30)은 방송콘텐츠 서버(40)가 스마트 TV(10) 및 그 밖의 시스템으로 방송콘텐츠를 브로드 캐스팅을 위해 전달하는 역할을 한다. Here, the broadcast communication network 30 is a high-speed wired or bridged termi- nal network for broadcasting in the form of a large capacity, a long-distance voice, and a data service, and may be a wired or wireless Internet. The broadcast communication network 30 plays a role for the broadcast content server 40 to transmit the broadcast content to the smart TV 10 and other systems for broadcasting.

한편, 방송콘텐츠 서버(40)는 방송DB(41) 및 광고DB(42)를 포함한다. 또한, 본 명세서에서 DB라 함은, 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. DB는 적어도 하나의 테이블로 구현될 수도 있으며, 데이터베이스에 저장된 정보를 검색, 저장, 및 관리하기 위한 별도의 DBMS(Database Management System)을 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 데이터베이스의 형태 등 다양한 방식으로 구현될 수 있으며, 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.On the other hand, the broadcast content server 40 includes a broadcast DB 41 and an advertisement DB 42. Also, in this specification, a DB may mean a functional and structural combination of software and hardware for storing information corresponding to each database. The DB may be implemented as at least one table, and may further include a separate DBMS (Database Management System) for searching, storing, and managing information stored in the database. Also, it can be implemented in various ways such as a linked-list, a tree, and a relational database, and includes all data storage media and data structures capable of storing information corresponding to a database.

단계(S10) 이후, 스마트 TV(10)는 암시적 광고출력 과정으로, 방송송출 프레임별 방송콘텐츠의 출력부(11)로의 시간적 흐름에 따른 구현과 함께, 광고 전환 인디케이터 및 각 광고대상물별 암시 인디케이터를 구현한다(S20). 한편 단계(S20)에 따른 암시적 광고 구현시 도 8에서 상술한 기능에 의한 광고 제공 과정이 더 수행된다. After step S10, the smart TV 10 is an implicit advertisement outputting process. The smart TV 10 is implemented in accordance with the temporal flow of the broadcasting contents to the output unit 11 for each broadcast broadcasting frame, and the advertisement switching indicator and the indication indicators (S20). On the other hand, in the implicit advertisement implementation according to step S20, the advertisement providing process according to the function described above is further performed.

단계(S20) 이후, 스마트 TV(10)는 입력 인터페이스(13)를 통해 광고 전환 인디케이터 선택신호 수신시 프레임별 방송콘텐츠에 대한 출력부(11)로의 시간적 흐름에 따른 구현과 함께, 단계(S10)의 과정에 따라 분리된 광고 태그콘텐츠에서 광고대상물에 대한 대상물 표식자 구현에 따른 명시적 광고를 수행한다(S30). 한편 단계(S30)에 따른 명시적 광고 구현시 도 9에서 상술한 기능에 의한 광고 제공 과정이 더 수행된다. After step S20, the smart TV 10 receives the advertisement switching indicator selection signal through the input interface 13, and performs the flow of the broadcasting contents to the output unit 11 according to the temporal flow, An explicit advertisement according to the implementation of the object markers for the advertisement object is performed in the separated advertisement tag contents according to the process of S30. On the other hand, in the case of the explicit advertisement implementation according to the step S30, the advertisement providing process according to the function described above is further performed.

단계(S30) 이후, 스마트 TV(10)는 단계(S30)에 의한 명시적 광고 수행 과정에서 다수의 광고 대상물 중 하나에 대한 선택신호를 입력 인터페이스(13)를 통해 수신시, 선택된 광고대상물에 대한 입력 인터페이스(13)을 통한 모션 제스처 입력신호가 수신되는 경우 구매 요청으로 판단하여 구매 절차를 수행한다(S40).
After receiving the selection signal for one of the plurality of advertisement objects through the input interface 13 in the process of performing the explicit advertisement by the step S30 after the step S30, When a motion gesture input signal through the input interface 13 is received, it is determined that the purchase request is made and a purchase procedure is performed (S40).

도 11은 도 10의 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법의 각 단계(S10) 내지 단계(S40)에 대한 구체적인 흐름도이다. 도 1 내지 도 11을 참조하면, 방송콘텐츠 서버(40)는 방송DB(41)에 저장된 방송콘텐츠에 포함된 광고대상물 각각에 대한 제휴 광고주단말 그룹(70)을 구성하는 제휴 광고주단말 각각으로부터 데이터통신망(60)을 통해 광고데이터를 수신한다(S11). 여기서 데이터통신망(60)은 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간 망인 통신망이며, 인터넷(Internet) 또는 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선 및 무선 망일 수 있다. 데이터통신망(60)이 이동통신망일 경우 동기식 이동 통신망일 수도 있고, 비동기식 이동 통신망일 수도 있다. 비동기식 이동 통신망의 일 실시 예로서, WCDMA(Wideband Code Division Multiple Access) 방식의 통신망을 들 수 있다. 이 경우 도면에 도시되진 않았지만, 데이터통신망(60)은 RNC(Radio Network Controller)을 포함할 수 있다. 한편, WCDMA망을 일 예로 들었지만, 3G LTE망, 4G망 등 차세대 통신망, 그 밖의 IP를 기반으로 한 IP망일 수 있다. 데이터통신망(60)은 방송콘텐츠 서버(40), 광고주단말 그룹(70)을 구성하는 다수의 제휴 광고주단말, 그 밖의 시스템 상호 간의 신호 및 데이터를 상호 전달하는 역할을 한다.FIG. 11 is a specific flowchart of steps (S10) to (S40) of the smart TV-based advertisement providing method having the emotional advertisement function of FIG. 1 to 11, the broadcast content server 40 transmits the broadcast content stored in the broadcast DB 41 to each of the affiliated advertiser terminals 70 constituting the affiliated advertiser terminal group 70 for each of the advertisement objects included in the broadcast content, (Step S11). Here, the data communication network 60 may be a high-speed period network of a large communication network capable of a large-capacity, long-distance voice and data service, and may be a next generation wired and wireless network for providing Internet or high-speed multimedia service. When the data communication network 60 is a mobile communication network, it may be a synchronous mobile communication network or an asynchronous mobile communication network. As an embodiment of the asynchronous mobile communication network, a WCDMA (Wideband Code Division Multiple Access) communication network is exemplified. In this case, although not shown in the drawing, the data communication network 60 may include a Radio Network Controller (RNC). Meanwhile, although the WCDMA network is exemplified, it may be a next generation communication network such as a 3G LTE network or a 4G network, or an IP network based on other IP. The data communication network 60 serves to transmit signals and data between the broadcasting contents server 40, a plurality of advertiser terminal units constituting the advertiser terminal group 70, and other systems.

한편, 광고데이터에는 각 광고대상물에 대한 이미지정보를 포함하는 것이 바람직하며, 광고데이터 수신시 방송콘텐츠의 방송송출 프레임별로 구분하여 수신하는 것이 바람직하다. 또한, 본 명세서에서 DB라 함은, 각각의 데이터베이스에 대응되는 정보를 저장하는 소프트웨어 및 하드웨어의 기능적 구조적 결합을 의미할 수 있다. DB는 적어도 하나의 테이블로 구현될 수도 있으며, 데이터베이스에 저장된 정보를 검색, 저장, 및 관리하기 위한 별도의 DBMS(Database Management System)을 더 포함할 수도 있다. 또한, 링크드 리스트(linked-list), 트리(Tree), 관계형 데이터베이스의 형태 등 다양한 방식으로 구현될 수 있으며, 데이터베이스에 대응되는 정보를 저장할 수 있는 모든 데이터 저장매체 및 데이터 구조를 포함한다.It is preferable that the advertisement data include image information for each advertisement object, and it is preferable that the advertisement data is received by receiving broadcast data of each broadcast content when the advertisement data is received. Also, in this specification, a DB may mean a functional and structural combination of software and hardware for storing information corresponding to each database. The DB may be implemented as at least one table, and may further include a separate DBMS (Database Management System) for searching, storing, and managing information stored in the database. Also, it can be implemented in various ways such as a linked-list, a tree, and a relational database, and includes all data storage media and data structures capable of storing information corresponding to a database.

방송콘텐츠 서버(40)는 각 광고대상물에 각각에 대한 태그 데이터를 생성한 뒤, 생성된 모든 태그 데이터를 넘버링하여 광고 태그콘텐츠로 광고DB(42)에 저장한다(S12). 한편, 본 발명의 일 실시예로, 방송콘텐츠 서버(40)는 각 태그 데이터 생성시 단계(S11)에서 수신된 각 광고대상물에 대한 물체 인식에 사용되기 위해 이미지정보를 포함시켜 생성하는 것이 바람직하며, 광고DB(42)로 광고 태콘텐츠 저장시 방송콘텐츠의 방송송출 프레임별로 구분하여 구분에 따른 메타데이터를 생성하여 각 광고 태그콘텐츠와 함께 저장하는 것이 바람직하다.The broadcast content server 40 generates tag data for each of the advertisement objects, and then all the generated tag data is numbered and stored in the advertisement DB 42 as advertisement tag contents (S12). Meanwhile, in one embodiment of the present invention, the broadcast content server 40 preferably includes image information for use in object recognition for each advertisement object received in step S11 when each tag data is generated And the advertisement DB 42, it is preferable to generate meta data according to the broadcasting broadcasting frames of the broadcasting contents and to store the metadata together with the respective advertisement tag contents.

단계(S12) 이후, 방송콘텐츠 서버(40)는 방송통신망(30)을 통해 스마트 TV(10)의 방송DB(41)에 저장된 방송콘텐츠에 대한 청취 요청에 따라 방송DB(41)에 저장된 방송콘텐츠와 광고DB(42)에 저장된 광고 태그콘텐츠를 방송송출 프레임 별로 패킷화하여 방송통신망(30)을 통해 스마트 TV(10)로 전송한다(S13).After the step S12, the broadcast content server 40 transmits the broadcast content 41 stored in the broadcast DB 41 in response to a request for listening to the broadcast content stored in the broadcast DB 41 of the smart TV 10 through the broadcast communication network 30, And the advertisement DB contents stored in the advertisement DB 42 are packetized for each broadcasting transmission frame and transmitted to the smart TV 10 through the broadcasting communication network 30 (S13).

단계(S13)에 따라 스마트 TV(10)는 방송송출 프레임별로 스트리밍 방식으로 방송콘텐츠 서버(40)로부터 수신되는 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 분리된 광고 태그콘텐츠의 각 광고대상물별 태그 데이터를 리딩(reading) 한다(S14). In step S13, the smart TV 10 separates the packetized broadcast content received from the broadcast content server 40 in a streaming manner for each broadcast transmission frame and the advertisement tag content, Tag data per object is read (S14).

단계(S14) 이후, 스마트 TV(10)는 단계(S14)에서 리딩된 각 광고대상물별 태그 데이터에 포함된 이미지정보를 이용해 각 광고대상물에 대한 트래킹을 위한 위치트래킹 마킹을 설정한다(S15). 여기서 위치트래킹 마킹은 각 광고대상물이 광고콘텐츠 상에서의 각 방송송출 프레임에 따른 출력부(11)로의 구현시 각 광고대상물을 트래킹(tracking)하기 위한 표식자 역할을 수행한다. 보다 구체적으로, 단계(S15)에서의 위치트래킹 마킹 설정에 따라 방송콘텐츠 상에서 각 광고대상물의 위치가 변경 또는 입체적 관점이 변경되어도 자동적으로 위치 변경이나 입체적 관점 변경에 따른 실시간 변경데이터가 스마트 TV(10)에 의해 생성되어 저장부(15)에 저장됨으로써, 광고대상물에 대한 트래킹시 저장된 실시간 변경데이터가 활용되어 출력부(11) 상에 구현되는 UI 화면에서의 광고대상물의 위치가 자동적으로 추적되도록 한다. After step S14, the smart TV 10 sets up a position tracking marking for tracking for each advertisement object using the image information included in the tag data for each advertisement object read in step S14 (S15). Here, the position tracking marking serves as a marker for tracking each advertisement object in the implementation of the advertisement object to the output unit 11 according to each broadcasting transmission frame on the advertisement content. More specifically, even if the position of each of the advertisement objects is changed or the stereoscopic view is changed on the broadcast content in accordance with the setting of the position tracking marking in step S15, the real time change data according to the position change or stereoscopic view change is automatically transmitted to the smart TV 10 And stored in the storage unit 15 so that the position of the advertisement object on the UI screen realized on the output unit 11 is automatically tracked by utilizing the stored real time change data at the time of tracking for the advertisement object .

한편, 단계(S15) 이후, 스마트 TV(10)는 추가적 과정으로 방송콘텐츠에 광고대상물을 제외한 대상물에 대한 인식을 자동적으로 수행하는 대상물 인식 과정인 단계(S16)을 더 수행할 수 있다. 스마트 TV(10)는 각 인식대상물에 대한 물체 인식시 입체적 관점 각각에 대한 인식을 개별적으로 수행하는 것이 바람직하다. On the other hand, after step S15, the smart TV 10 may further perform step S16, which is an object recognition process for automatically recognizing an object other than the advertisement object in the broadcast content as an additional process. It is preferable that the smart TV 10 individually performs recognition of each of the stereoscopic viewpoints at the time of object recognition for each recognition object.

단계(S16)를 살펴보면, 스마트 TV(10)는 단계(S14)에서 방송송출 프레임별로 스트리밍 방식으로 수신되는 광고 태그콘텐츠의 각 광고대상물별 태그 데이터로 리딩되지 않은 대상물에 대한 물체 인식을 수행한다(S16a). 단계(S16a) 이후, 스마트 TV(10)는 단계(S16a)에서 인식된 인식대상물에 대한 방송통신망(30)을 통해 방송콘텐츠 서버(40)로의 질의 메시지 전송에 따라 인식대상물에 대한 추가적 태그 데이터를 추가적으로 수신한다(S16b). 단계(S16b) 이후, 그리고, 스마트 TV(10)는 각 인식대상물에 대한 방송콘텐츠의 이미지정보에 대한 물체 인식을 수행하고, 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹을 설정한다(S16c). In step S16, in step S14, the smart TV 10 performs object recognition for an object that is not read as tag data for each advertisement object of the advertisement tag content received in a streaming manner for each broadcasting frame in step S14 S16a). After step S16a, the smart TV 10 transmits additional tag data for the recognition object in accordance with the transmission of the query message to the broadcast content server 40 through the broadcast communication network 30 for the recognition object recognized in step S16a And further receives (S16b). After step S16b, the smart TV 10 performs object recognition on the image information of the broadcast content for each recognition object and sets a position tracking marking for tracking on the recognition object (S16c).

여기서 각 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹은, 방송콘텐츠 상에서 각 방송송출 프레임 단위로 출력부(11)의 UI 화면으로 구현시, 각 인식대상물의 UI 화면 상의 위치가 변경되거나 입체적 관점이 변경되어도 자동적으로 각 인식대상물의 위치 변경이나 입체적 관점 변경에 따른 실시간 변경데이터가 스마트 TV(10)에 의해 생성되어 스마트 TV의 저장부(15)에 저장된 뒤, 각 인식대상물에 대한 트래킹시 저장된 실시간 변경데이터가 활용되어 출력부(11) 상에 구현되는 UI 화면에서의 인식대상물의 위치가 자동적으로 추적되도록 하기 위해서 설정된다. Here, the position tracking marking for tracking each recognition object is implemented by UI screen of the output unit 11 for each broadcast transmission frame on the broadcast content, when the position on the UI screen of each recognition object is changed or the stereoscopic view is changed The real time change data corresponding to the position change of each recognition object or the change of the stereoscopic view is automatically generated by the smart TV 10 and stored in the storage unit 15 of the smart TV, Data is utilized to automatically track the position of the recognition object on the UI screen implemented on the output unit 11. [

단계(S15) 또는 단계(S16) 이후, 스마트 TV(10)는 출력부(11)로 광고 전환 인디케이터를 구현하며, 방송송출 프레임별 방송콘텐츠를 스트리밍 방식으로 수신과 동시에 출력을 개시 준비함으로써(S17), 단계(S10)의 방송송출 프레임별 방송콘텐츠 준비 과정을 완료한다.
After step S15 or step S16, the smart TV 10 implements the advertisement conversion indicator in the output unit 11 and prepares to start outputting the broadcast content for each broadcasting frame in a streaming manner (S17 ), The broadcast content preparation process for each broadcast transmission frame in step S10 is completed.

단계(S11) 내지 단계(S17)에 따른 단계(S10) 수행 이후, 스마트 TV(10)는 단계(S15)에서 위치트래킹 마킹이 설정된 광고대상물, 그리고 단계(S16c)에서 위치트래킹 마킹이 설정된 인식대상물에 대한 암시효과를 설정한다(S21). 여기서 암시효과는 방송콘텐츠가 스트리밍 방식으로 구현시 광고대상물 및 인식대상물에 대한 명시적 노출전에 암시적으로 스마트 TV(10) 사용자에게 간접적으로 인지시키도록 하기 위한 유저 인터페이스(User Interface) 효과를 의미한다. After performing the step S10 according to the steps S11 to S17, the smart TV 10 displays the advertisement object with the position tracking marking set in step S15, and the recognition object with the position tracking marking set in step S16c Lt; RTI ID = 0.0 > (S21). ≪ / RTI > Here, the implicit effect implies a user interface effect for indirectly recognizing the broadcast contents in the streaming manner implicitly to the user of the smart TV 10 before the explicit exposure of the advertisement object and the recognition object .

본 발명의 실시예로 암시효과는 서브리미날 효과(subliminal effect)가 사용될 수 있으며, 서브리미날 효과는 방송송출 프레임을 이루는 광고대상물을 포함하는 방송송출 이미지(broadcasting image) 사이에 하나의 암시 인디케이터만 포함시킨 엠프티 이미지(empty-image)를 삽입하는 방식으로 수행될 수 있다(도 3 참조).In the embodiment of the present invention, a subliminal effect may be used as an implicit effect, and a subliminal effect may include an indication indicator (not shown) between broadcast images including an advertisement object constituting a broadcast transmission frame (See FIG. 3). In this case, as shown in FIG.

한편, 서브리미날 효과를 위한 엠프티 이미지에서 광고대상물 내지는 인식대상물에 대해 도 3에 도시된 바와 같이 치마에 대한 색변화 설정, 구두에 대한 후광 설정이 하나의 예시가 될 수 있으며, 그 밖에 광고대상물 또는 인식대상물에 대한 애드바, 상태바, 아이콘, 테두리 컬러 설정이 또 다른 예가 될 수 있다. As shown in FIG. 3, the color change setting for a skirt and the backlight setting for a shoe can be an example of an advertisement object or a recognition object in an empty image for a subliminal effect. Another example is the adver, status bar, icon, and border color settings for an object or a recognized object.

단계(S21) 이후, 스마트 TV(10)는 출력부(11)로 방송송출 프레임별 방송콘텐츠와 함께 광고대상물 및 인식대상물에 대한 암시효과가 반영된 암시 인디케이터를 구현한다(S22). 상술한 바와 같이, 암시 인디케이터는 광고대상물 또는 인식대상물에 대한 색변화, 후광, 애드바, 상태바, 아이콘, 테두리 컬러로 구현가능하다. After step S21, the smart TV 10 implements an implied indicator reflecting the implicit effect of the advertisement object and the recognition object together with the broadcasting contents for each broadcasting transmission frame to the output unit 11 (S22). As described above, the hint indicator can be implemented as a color change, an halo, an ad bar, a status bar, an icon, and a border color for an advertisement object or a recognition object.

단계(S22) 이후, 스마트 TV(10)는 출력부(11)로 방송송출 프레임별 방송콘텐츠에 대한 시간의 흐름에 따른 광고대상물별 또는 인식대상물별 암시 인디케이터에 대한 트래킹 효과를 구현한다(S23). 여기서 트래킹 효과는 단계(S15)에서 위치트래킹 마킹이 설정된 광고대상물, 그리고 단계(S16c)에서 위치트래킹 마킹이 설정된 인식대상물에 대한 물체 인식에 따라 암시 인디케이터의 위치 또는 형상을 변환시켜 구현하는 것을 의미한다. After step S22, the smart TV 10 implements the tracking effect for the advertisement indicator for each advertisement object or the recognition object according to the flow of time with respect to the broadcasting contents for each broadcast transmission frame to the output unit 11 (S23) . Here, the tracking effect is implemented by transforming the location or shape of the indictor according to the object recognition for the object to be marked with the position tracking marking in step S15 and the object to be recognized with the position tracking marking in step S16c .

한편 단계(S23) 이후, 상술한 단계(S23a-1) 내지 단계(S23a-14)에 따른 암시적 광고 구현시 단계(S21) 및 단계(S22)에 따른 암시효과, 그리고 단계(S23)에 따른 트래킹 효과가 적용된 광고대상물 및 인식대상물에 대해 도 8에서 상술한 기능에 의한 광고 제공 과정이 더 수행된다. On the other hand, after the step S23, the implicit effect according to the steps S21 and S22 in the implicit advertisement implementation according to the steps S23a-1 to S23a-14 described above, and the implicit effect according to the step S23 The advertisement providing process by the function described in FIG. 8 is further performed on the advertisement object and the recognition object to which the tracking effect is applied.

단계(S23a) 이후, 스마트 TV(10)는 명시적 광고 전환을 위해 입력인터페이스(13)로부터 광고 전환 인디케이터 선택신호에 대한 수신을 대기한 뒤(S24), 광고 전환 인디케이터 선택신호 수신 여부를 판단함으로써(S25), 암시적 광고출력 과정을 종료한다.
After step S23a, the smart TV 10 waits for the advertisement switching indicator selection signal from the input interface 13 for explicit advertisement switching (S24), and judges whether or not to receive the advertisement switching indicator selection signal (S25), and ends the implicit advertisement output process.

단계(S25)의 판단 결과 광고 전환 인디케이터 선택신호를 수신한 경우 스마트 TV(10)는 출력부(11)로 방송송출 프레임별 방송콘텐츠와 함께 광고대상물 및 인식대상물에 대한 대상물 표식자를 구현하며, 대상물 표식자 선택시 선택된 광고대상물 또는 인식대상물에 대한 태그 데이터를 통해 광고를 구현한다(S31). If the advertisement switching indicator selection signal is received in step S25, the Smart TV 10 implements the object marker for the advertisement object and the recognition object along with the broadcasting contents for each broadcasting frame to the output unit 11, When the marker is selected, the advertisement is implemented through the tag data of the selected advertisement object or the recognition object (S31).

한편, 스마트 TV(10)는 다수의 대상물 표식자 중 하나의 대상물 표식자에 대한 선택입력을 수신할 경우, 센싱부(12)를 통해 저장부(15)에 미리 저장된 인식데이터에 따른 방식으로 수행될 수 있다. 하나의 예로 센싱부(12)가 카메라촬영 방식의 인식모듈로 구현된 경우, 카메라 촬영을 통한 안구 인식의 결과 사용자의 눈길이 자주 가는 곳에 선택신호로 인식되거나, 사용자 촬영에 따른 사용자를 인식하여 인식된 사용자에 대해 저장부(15) 상에 저장된 관심카테고리 정보와 매칭되는 광고대상물에 해당하는 대상물 표식자를 인식하는 방식으로 수행될 수 있다. On the other hand, when the smart TV 10 receives a selection input for one of the object markers, the smart TV 10 can be performed in a manner corresponding to recognition data previously stored in the storage unit 15 via the sensing unit 12 have. As one example, when the sensing unit 12 is implemented as a recognition module of a camera photographing system, a recognition signal may be recognized as a selection signal at a place where a user's eyes are frequently seen as a result of eye recognition through a camera photographing, And recognizing an object marker corresponding to the advertisement object matching the interest category information stored on the storage unit 15 with respect to the user.

단계(S31) 이후, 스마트 TV(10)는 출력부(11)로 방송송출 프레임별 방송콘텐츠의 흐름에 따른 광고대상물별 또는 인식대상물별 대상물 표식자를 이용한 트래킹 효과를 구현한다(S32). 여기서 트래킹 효과는 단계(S15)에서 위치트래킹 마킹이 설정된 광고대상물, 그리고 단계(S16c)에서 위치트래킹 마킹이 설정된 인식대상물에 대한 물체 인식에 따라 대상물 표식자의 위치를 변환시켜 구현하는 것을 의미한다. After step S31, the smart TV 10 implements the tracking effect using the object markers for each advertisement object or the recognition object according to the flow of the broadcasting contents for each broadcasting frame to the output unit 11 (S32). Here, the tracking effect is implemented by transforming the position of the object marker according to the object recognition for the object to be marked with the position tracking marking in step S15 and the object to be recognized with the position tracking marking in step S16c.

한편 단계(S32) 이후, 상술한 단계(S32a-1) 내지 단계(S32a-7)에 따라 암시적 광고 구현시 단계(S32)에 따른 트래킹 효과가 적용된 광고대상물 및 인식대상물에 대한 도 9에서 상술한 기능에 의한 광고 제공 과정이 더 수행된다. On the other hand, after step S32, the advertisement object and the recognition object to which the tracking effect according to step S32 is applied in the implicit advertisement implementation according to the above-described steps S32a-1 to S32a-7 are described in detail An advertisement providing process by one function is further performed.

단계(S32) 이후, 스마트 TV(10)는 입력인터페이스(13)로부터 다수의 광고 대상물 및 다수의 인식대상물 중 하나에 대한 선택신호 수신 대기한다(S33). After step S32, the smart TV 10 waits for a selection signal for one of a plurality of advertisement objects and a plurality of recognition objects from the input interface 13 (S33).

단계(S33) 이후, 스마트 TV(10)는 다수의 광고대상물 및 다수의 인식대상물 중 하나에 대한 선택신호 수신 여부에 대한 판단을 수행함으로써(S34), 명시적 광고를 수행을 완료한다.
After step S33, the smart TV 10 determines whether to receive a selection signal for one of a plurality of advertisement objects and a plurality of recognition objects (S34), and completes execution of the explicit advertisement.

단계(S34)의 판단 결과 다수의 광고대상물 및 다수의 인식대상물 중 하나에 대한 선택신호시, 스마트 TV(10)는 단계(S34)에서 선택된 광고대상물 또는 인식대상물에 대한 모션 제스처를 통한 구매 절차를 수행한다(S40).As a result of the determination in step S34, in the case of a selection signal for one of a plurality of advertisement objects and a plurality of recognition objects, the smart TV 10 displays a purchase procedure through the motion gesture for the advertisement object or the recognition object selected in step S34 (S40).

보다 구체적으로, 스마트 TV(10)는 선택된 광고대상물 또는 인식대상물에 대한 리모컨(20)으로부터 모션 제스처 입력신호를 리모컨 신호 수신부(13b)를 통해 수신하거나 입력부(13a)로의 모션 제스처 입력신호 수신을 통한 모션 제스처 입력시 선택된 광고대상물 또는 인식대상물에 대한 구매 요청으로 인식하여 구매 과정을 수행한다.
More specifically, the smart TV 10 receives the motion gesture input signal from the remote controller 20 for the selected advertisement object or the recognition object through the remote control signal receiving unit 13b or receives the motion gesture input signal to the input unit 13a And recognizes it as a purchase request for a selected advertisement object or a recognition object at the time of inputting a motion gesture, and performs a purchase process.

본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.The present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored.

컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device and the like, and also implemented in the form of a carrier wave (for example, transmission over the Internet) .

또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
The computer readable recording medium may also be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner. And functional programs, codes, and code segments for implementing the present invention can be easily inferred by programmers skilled in the art to which the present invention pertains.

이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
As described above, preferred embodiments of the present invention have been disclosed in the present specification and drawings, and although specific terms have been used, they have been used only in a general sense to easily describe the technical contents of the present invention and to facilitate understanding of the invention , And are not intended to limit the scope of the present invention. It is to be understood by those skilled in the art that other modifications based on the technical idea of the present invention are possible in addition to the embodiments disclosed herein.

10: 스마트 TV
11: 출력부
12: 센싱부
13: 입력 인터페이스
13a: 입력부
13b: 리모컨 신호 수신부
13c: 음성수신부
13d: 카메라부
14: 제어연산부
14a: 방송콘텐츠 처리모듈
14b: 암시적 광고 구현모듈
14c: 명시적 광고 구현모듈
14d: 광고대상물 구매모듈
14e: 타임머신 제공모듈
14e-1: 대상물 캡처 수단
14e-2: 대상물 선택 수단
14e-3: 대상물 구현 수단
15: 저장부
16: 유무선 통신모듈
STB: 셋탑박스
20: 리모컨
30: 방송통신망
40: 방송콘텐츠 서버
50: 스마트 모바일 디바이스
60: 데이터통신망
70: 제휴 광고주단말 그룹
10: Smart TV
11: Output section
12: sensing unit
13: Input Interface
13a:
13b: Remote control signal receiving section
13c:
13d:
14:
14a: broadcast content processing module
14b: Implicit ad implementation module
14c: Explicit ad implementation module
14d: Advertisement object purchase module
14e: Time Machine Provided Module
14e-1: Object capturing means
14e-2: Object selection means
14e-3: object implementing means
15:
16: Wired / wireless communication module
STB: Set-top box
20: Remote control
30: Broadcasting network
40: broadcast content server
50: Smart mobile devices
60: Data communication network
70: Associated advertiser terminal group

Claims (6)

스마트 TV가 방송송출 프레임 단위의 스트리밍 방식으로 방송콘텐츠 구현을 위해 방송통신망을 통해 방송콘텐츠 서버로부터 패킷화된 방송콘텐츠와 광고 태그 콘텐츠를 수신하는 제 1 단계;
사용자의 선택에 따라 상기 방송콘텐츠와 상기 광고 태그콘텐츠를 분리하여 방송콘텐츠만을 재생하거나, 방송콘텐츠와 광고 태그콘텐츠를 UI 화면으로 동시에 재생하는 제 2 단계;
방송콘텐츠 또는 방송콘텐츠와 광고 태그콘텐츠의 구현 중 사용자에 의한 명시적 광고 전환 요청이 있는 경우, 해당 프레임에 매칭되는 광고 태그콘텐츠를 호출하여 사용자에게 선택적으로 제공하는 제 3 단계;를 포함하고,
상기 제 2 단계와 제 3 단계 사이에,
상기 스마트 TV가 상기 광고 태그콘텐츠 상에서 각 광고대상물별 태그 데이터로 리딩되지 않은 적어도 하나 이상의 대상물 중 물체에 대한 인식을 수행하는 단계; 상기 스마트 TV가 인식된 인식대상물에 대한 상기 방송통신망을 통해 상기 방송콘텐츠 서버로의 질의 메시지 전송에 따라 각 인식대상물에 대한 추가적 태그 데이터를 반환받는 단계; 및 상기 스마트 TV가 상기 각 인식대상물에 대한 상기 방송콘텐츠 상에서의 물체 인식을 수행하고, 상기 인식대상물에 대한 트래킹을 위한 위치트래킹 마킹을 설정하는 단계; 를 포함하는 것을 특징으로 하는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법.
A first step of receiving a packetized broadcast content and an advertisement tag content from a broadcast content server through a broadcast communication network for implementing broadcast content in a streaming method of a smart TV in a broadcasting frame unit;
A second step of reproducing only broadcast content by separating the broadcast content and the advertisement tag content according to the user's selection, or simultaneously reproducing the broadcast content and the advertisement tag content on the UI screen;
And a third step of, when there is an explicit advertisement conversion request by the user during the implementation of the broadcast content or the broadcast content and the advertisement tag content, calling the advertisement tag content matched to the frame and selectively providing the same to the user,
Between the second step and the third step,
Performing recognition of an object among at least one or more objects not read as tag data for each advertisement object on the advertisement tag content; Receiving additional tag data for each recognition object in response to transmission of a query message to the broadcast content server through the broadcast communication network for the recognition object recognized by the smart TV; And the smart TV performing object recognition on the broadcast content for each recognition object and setting a position tracking marking for tracking on the recognition object; The method of claim 1, further comprising the steps of:
청구항 1에 있어서, 상기 제 3 단계에서,
사용자에 의한 명시적 광고 전환 요청은 재생 중지(pause) 요청인 것을 특징으로 하는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법.
2. The method according to claim 1, wherein, in the third step,
And the explicit advertisement switching request by the user is a pause request. ≪ RTI ID = 0.0 > 15. < / RTI >
청구항 1에 있어서, 상기 제 2 단계에서,
상기 스마트 TV가 상기 패킷화된 방송콘텐츠와 광고 태그콘텐츠를 분리한 뒤, 분리된 광고 태그콘텐츠에 포함된 각 광고대상물별 태그 데이터를 리딩(reading) 하는 단계; 및
상기 스마트 TV가 상기 각 광고대상물별 태그 데이터에 포함된 이미지정보를 이용해 각 광고대상물에 대한 트래킹(tracking: 추적)을 위한 위치트래킹 마킹을 설정하는 단계; 를 더 포함하는 것을 특징으로 하는 감성광고 기능을 구비한 스마트 TV 기반의 광고 제공 방법.
The method according to claim 1, wherein, in the second step,
Reading the tag data for each advertisement object included in the separated advertisement tag content after the smart TV separates the packetized broadcast content from the advertisement tag content; And
Setting location tracking marking for tracking of each advertisement object using image information included in tag data of each advertisement object by the smart TV; The method of claim 1, further comprising the steps of:
삭제delete 삭제delete 삭제delete
KR1020130123059A 2013-10-16 2013-10-16 Method for providing time machine advertisement based on smart-TV with logotional advertisement function KR101519021B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130123059A KR101519021B1 (en) 2013-10-16 2013-10-16 Method for providing time machine advertisement based on smart-TV with logotional advertisement function

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130123059A KR101519021B1 (en) 2013-10-16 2013-10-16 Method for providing time machine advertisement based on smart-TV with logotional advertisement function

Publications (2)

Publication Number Publication Date
KR20150044456A KR20150044456A (en) 2015-04-27
KR101519021B1 true KR101519021B1 (en) 2015-05-13

Family

ID=53036759

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130123059A KR101519021B1 (en) 2013-10-16 2013-10-16 Method for providing time machine advertisement based on smart-TV with logotional advertisement function

Country Status (1)

Country Link
KR (1) KR101519021B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101894794B1 (en) * 2017-06-23 2018-09-04 에스케이브로드밴드주식회사 Apparatus and method for relaying advertisements
CN109088942B (en) * 2018-09-14 2022-02-25 腾讯科技(北京)有限公司 Advertisement request flow screening method and device and brand advertisement engine

Also Published As

Publication number Publication date
KR20150044456A (en) 2015-04-27

Similar Documents

Publication Publication Date Title
KR101519021B1 (en) Method for providing time machine advertisement based on smart-TV with logotional advertisement function
KR101519052B1 (en) Smart-TV with advertisement provision function based on logotional advertisement
KR101536283B1 (en) Smart-TV with logotional advertisement function
KR101487479B1 (en) Method for providing logotional advertisement based on smart-TV
KR101453813B1 (en) Smart-TV with time machine advertisement provision function based on logotional advertisement
KR101536262B1 (en) Method for providing time machine advertisement based on smart-TV with logotional advertisement function
KR101519019B1 (en) Smart-TV with flash function based on logotional advertisement
KR101510747B1 (en) Smart-TV with motion sensing and logotional advertisement function
KR101453822B1 (en) Motion payment method based on smart-TV with logotional advertisement function
KR101510770B1 (en) Method for providing time machine advertisement based on smart-TV with logotional advertisement function
KR101519030B1 (en) Smart-TV with logotional advertisement function
KR101487477B1 (en) Smart-TV with logotional advertisement function
KR101510765B1 (en) Method for providing advertisement information according to targeting object based on smart-TV with logotional advertisement function
KR101453788B1 (en) Method for providing logotional advertisement using object recognition based on smart-TV
KR101510761B1 (en) Smart-TV with flash function based on logotional advertisement
KR101453823B1 (en) Smart-TV with motion payment function based on logotional advertisement
KR101510737B1 (en) Method for providing logotional advertisement based on motion sensing and smart-TV
KR101506717B1 (en) Smart-TV with logotional advertisement function by object recognition
KR101453798B1 (en) Method for providing logotional advertisement using flash function based on smart-TV
KR101453871B1 (en) Smart-TV with information provision function for logotional advertisement function
KR20140075655A (en) Method for providing logotional advertisement using object recognition based on smart-TV
KR101534204B1 (en) Method for providing logotional advertisement based on smart-TV
KR101453884B1 (en) Smart-TV with user specific and logotional advertisement function
KR101506633B1 (en) Information providing method for information for logotional advertisement based on smart-TV
KR101453802B1 (en) Method for calculating advertisement fee according to tracking set-up based on smart-TV logotional advertisement

Legal Events

Date Code Title Description
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180504

Year of fee payment: 4

LAPS Lapse due to unpaid annual fee