KR20120139251A - Smart digital signage using customer recognition technologies and advertisment method using the same - Google Patents
Smart digital signage using customer recognition technologies and advertisment method using the same Download PDFInfo
- Publication number
- KR20120139251A KR20120139251A KR1020110058955A KR20110058955A KR20120139251A KR 20120139251 A KR20120139251 A KR 20120139251A KR 1020110058955 A KR1020110058955 A KR 1020110058955A KR 20110058955 A KR20110058955 A KR 20110058955A KR 20120139251 A KR20120139251 A KR 20120139251A
- Authority
- KR
- South Korea
- Prior art keywords
- advertisement
- customer
- information
- image
- unit
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/02—Marketing; Price estimation or determination; Fundraising
- G06Q30/0241—Advertisements
- G06Q30/0251—Targeted advertisements
- G06Q30/0269—Targeted advertisements based on user profile or attribute
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02B—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO BUILDINGS, e.g. HOUSING, HOUSE APPLIANCES OR RELATED END-USER APPLICATIONS
- Y02B70/00—Technologies for an efficient end-user side electric power management and consumption
- Y02B70/30—Systems integrating technologies related to power network operation and communication or information technologies for improving the carbon footprint of the management of residential or tertiary loads, i.e. smart grids as climate change mitigation technology in the buildings sector, including also the last stages of power distribution and the control, monitoring or operating management systems at local level
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Accounting & Taxation (AREA)
- Strategic Management (AREA)
- Finance (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Development Economics (AREA)
- Theoretical Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Computer Interaction (AREA)
- Game Theory and Decision Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Economics (AREA)
- Marketing (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
Description
본 발명은 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기에 관한 것으로서, 더욱 상세하게는 매장에 입장하는 고객의 영상정보를 획득하여 고객의 정보를 추정하고, 추정 결과에 기반하여 고객에게 맞춤형 광고를 제공하여 광고 효율을 극대화하기 위한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법에 관한 것이다.
The present invention relates to an intelligent two-way advertising terminal using a user recognition function, and more particularly, to obtain the customer's image information to enter the store to estimate the customer's information, and to provide a customized advertisement to the customer based on the estimation result The present invention relates to an intelligent interactive advertisement terminal using a user recognition function for maximizing advertisement efficiency and an advertisement method using the same.
1900년대의 신문광고에서 출발한 광고기술은 1950년대 이후에는 광고 투자수익률(ROI: Return on Investment)을 향상시키기 위하여 TV와 컴퓨터기술을 이용하는 현장광고로 발전하였다. Advertising technology, which began with newspaper advertising in the 1900s, has evolved into on-site advertising using TV and computer technology since the 1950s to improve return on investment (ROI).
최근에는 1G/10G 이더넷, WDM/PON 등을 이용하는 유선통신기술과 와이파이, 와이브로, 3G/4G, LTE 등의 무선통신기술이 발전하면서 와이파이/와이브로 네트워크 광고 단말기가 새로 개발되어 광고 투자수익률을 향상시키려는 제품이 출시되었다.Recently, with the development of wired communication technology using 1G / 10G Ethernet and WDM / PON and wireless communication technologies such as Wi-Fi, WiBro, 3G / 4G, and LTE, a new Wi-Fi / WiBro network advertising terminal has been developed to improve the return on advertising investment. The product has been released.
대한민국특허청 공개특허공보 10-2004-0018291호(공개일: 2004.03.03)(발명의 명칭: 영상 디스플레이 장치를 이용한 광고시스템)에 종래의 광고 시스템의 일 실시 예가 도시되었다. 도시된 종래의 광고 시스템은, 서버, 유무선 인터넷망, 컴퓨터, 영상 디스플레이 장치 등을 구비하고, 서버로부터 작성된 미디어파일을 인터넷망을 이용하여 다운로드 하고 파일의 일부를 단말 측에서 편집하여 광고를 할 수 있는 시스템이다.Korean Patent Application Publication No. 10-2004-0018291 (published: 2004.03.03) (name of the invention: an advertisement system using an image display device) shows an embodiment of a conventional advertisement system. The illustrated conventional advertisement system includes a server, a wired / wireless internet network, a computer, an image display device, and the like, and downloads a media file created from the server using an internet network, and edits a part of the file on the terminal to advertise. System.
그러나 이러한 광고 시스템은, 메모리 모듈을 단말기에 장착하거나 유/무선 네트워크를 이용해서 광고 콘텐츠를 다운받아서 디스플레이하는 방법이다. 따라서 광고 서버에서 광고 단말기로 단방향으로만 광고 콘텐츠가 전송되는 단방향 시스템이므로, 비효율적인 광고 방식이라고 할 수 있다.However, such an advertisement system is a method of installing a memory module in a terminal or downloading and displaying advertisement content using a wired / wireless network. Therefore, it is an inefficient advertising method because it is a one-way system in which the advertisement content is transmitted in one direction only from the advertisement server to the advertisement terminal.
또한, 종래의 광고 시스템은, 광고를 시청하는 고객의 유무와는 상관없이 구동되면 무조건 광고를 재생하는 방식이므로, 광고를 시청하는 고객이 없는 시간에도 광고가 재생되어 전력 낭비를 초래하는 단점도 있다.
In addition, the conventional advertising system, regardless of the presence of customers watching the advertisement is driven to play the advertisement unconditionally, there is also a disadvantage that the power is wasted because the advertisement is played even when the customer is not watching the advertisement. .
이에 본 발명은 상기와 같은 종래 단방향 광고 시스템에서 발생하는 비효율적인 문제를 해결하기 위해서 제안된 것으로서,Accordingly, the present invention has been proposed to solve the inefficient problems occurring in the conventional unidirectional advertising system as described above,
본 발명이 해결하려는 과제는, 매장에 입장하는 고객의 영상정보를 획득하여 고객의 정보를 추정하고, 추정 결과에 기반하여 고객에게 맞춤형 광고를 제공하여 광고 효율을 극대화하기 위한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법을 제공하는 데 있다.The problem to be solved by the present invention is to obtain the video information of the customer entering the store to estimate the information of the customer, based on the estimation results by using a user recognition function to maximize the advertising efficiency by providing customized advertising to the customer It is to provide an interactive advertising terminal and an advertising method using the same.
본 발명이 해결하려는 다른 과제는, 고객의 영상 정보를 획득하여 고객의 성별, 연령대, 착용브랜드 및 고객 ID를 인식하고, 이러한 인식 정보를 기반으로 고객의 구매확률이 최상인 제품의 광고를 단말기에서 제공할 수 있도록 한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법을 제공하는 데 있다.Another problem to be solved by the present invention is to acquire the video information of the customer to recognize the gender, age group, wear brand and customer ID of the customer, based on the recognition information of the customer with the best probability of purchasing the product on the terminal The present invention provides an intelligent interactive advertisement terminal using a user recognition function and an advertisement method using the same.
본 발명이 해결하려는 또 다른 과제는, 고객이 광고를 시청하는지를 분석하여 광고를 주목하는지의 여부를 판별하고, 이 자료와 매출액 자료를 분석하여 광고의 투자수익률을 계산하여 광고주에 전달함으로써, 광고비의 효율을 극대화할 수 있도록 한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법을 제공하는 데 있다.Another problem to be solved by the present invention is to determine whether the customer pays attention by analyzing whether the customer is watching the advertisement, and by analyzing the data and sales data to calculate the return on investment of the advertisement to the advertiser, The present invention provides an intelligent interactive advertisement terminal using a user recognition function and an advertisement method using the same to maximize efficiency.
본 발명이 해결하려는 또 다른 과제는, 광고 단말기의 주변에 인체가 검지되지 않으면 광고를 보는 사람이 없는 것으로 판단을 하고, 자동으로 광고 단말기를 휴면(sleep) 모드로 전환시켜서 불필요한 전원의 소모를 차단하여 전력효율을 극대화할 수 있도록 한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법을 제공하는 데 있다.Another problem to be solved by the present invention, if the human body is not detected in the vicinity of the advertising terminal is determined that no people see the advertisement, automatically switching the advertising terminal to sleep (sleep) mode to block unnecessary power consumption The present invention provides an intelligent interactive advertisement terminal using a user recognition function and an advertisement method using the same to maximize power efficiency.
본 발명이 해결하려는 또 다른 과제는, 광고 단말기의 관리 소프트웨어의 일반적인 특성, 즉, 광고 추가/삭제, 광고 디스플레이, 광고 예약 설정/취소/변경 등을 원격지에서 관리할 수 있도록 한 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기 및 이를 이용한 광고 방법을 제공하는 데 있다.
Another problem to be solved by the present invention is to use a user recognition function to remotely manage the general characteristics of the management software of the advertising terminal, that is, add / delete ads, display ads, ad scheduling / cancellation / change, etc. An intelligent interactive advertising terminal and an advertising method using the same are provided.
상기와 같은 과제들을 해결하기 위한 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기"는,"Intelligent interactive advertising terminal using a user recognition function" according to the present invention for solving the above problems,
감시 영역에 대한 영상을 실시간으로 촬영하는 영상 입력부와;An image input unit configured to capture an image of a surveillance area in real time;
상기 영상 입력부를 통해 실시간으로 입력된 영상 정보를 분석하여 고객의 정보를 유추하고, 상기 유추한 고객 정보에 따라 광고 목록을 재구성하여 광고를 제공하는 영상처리 및 광고제어부와;An image processing and advertisement control unit for analyzing the image information input in real time through the image input unit to infer customer information, and reconstructing the advertisement list according to the inferred customer information to provide an advertisement;
상기 영상처리 및 광고제어부에서 제공되는 광고를 현시하는 광고 표시부를 포함하는 것을 특징으로 한다.
And an advertisement display unit for displaying advertisements provided by the image processing and advertisement control unit.
또한, 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기"는,In addition, the "intelligent interactive advertising terminal using a user recognition function" according to the present invention,
고객이 광고 시청 범위에 존재하는지 또는 고객의 존재 유무를 검출하여 상기 광고 표시부에 전달하는 인체 감시부를 더 포함하는 것을 특징으로 한다.
It further comprises a human body monitoring unit for detecting whether the customer exists in the advertisement viewing range or the presence of the customer and transmits the advertisement display unit.
상기에서 영상처리 및 광고제어부는,In the image processing and advertising control unit,
상기 실시간으로 입력된 영상 정보를 분석하여 고객의 성별, 연령을 유추하는 고객 정보 추정부와;A customer information estimating unit for inferring gender and age of the customer by analyzing the image information input in real time;
상기 고객 정보 추정부에서 유추한 고객 정보에 따라 광고 재생목록을 스케줄링하고 업데이트하여 재구성하는 광고 제어부와;An advertisement controller configured to schedule, update, and reconstruct an advertisement playlist according to the customer information inferred by the customer information estimator;
광고 영상과 분류정보가 저장되어 있는 광고 데이터베이스(DB)를 포함하는 것을 특징으로 한다.
And an advertisement database (DB) in which the advertisement image and the classification information are stored.
상기와 같은 과제들을 해결하기 위한 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법"은,"Advertising method using an intelligent interactive advertising terminal using a user recognition function" according to the present invention for solving the above problems,
촬영이 시작되고, 영상 프레임이 획득되면 상기 획득한 영상 프레임과 이전 영상 프레임과의 차 영상 또는 배경 영상과 현재 영상 프레임과의 깊이(depth) 차이를 사용하여 고객 영상 정보를 검출하는 단계와;Photographing is started, and when the image frame is obtained, detecting customer image information by using a difference between the acquired image frame and a previous image frame or a difference between a background image and a current image frame;
상기 검출한 고객 영상 정보에 얼굴검출 알고리즘을 적용하여 얼굴 영역을 검출하는 단계와;Detecting a face region by applying a face detection algorithm to the detected customer image information;
상기 검출한 얼굴 영역을 기준으로 해부학적인 분류에 의해 고객 정보를 추출하는 단계와;Extracting customer information by anatomical classification based on the detected face region;
상기 추출한 고객 정보를 윤곽선 비교하여 고객 특징 정보를 추출하는 단계와;Extracting customer characteristic information by contour comparing the extracted customer information;
상기 추출한 고객 정보와 고객 특징 정보를 수치화하는 단계와;Digitizing the extracted customer information and customer characteristic information;
상기 수치화한 수치 값을 통계처리 하여 고객의 성별과 나이를 추정하는 단계와;Estimating the gender and age of the customer by statistically processing the numerical value;
상기 추정한 고객의 정보를 기반으로 고객에 따른 광고재생 목록을 재구성하는 단계를 포함하는 것을 특징으로 한다.
And reconstructing the advertisement playlist according to the customer based on the estimated customer information.
상기 광고재생 목록을 재구성하는 단계는,Reconstructing the ad playlist,
관리자가 설정해 놓은 기본 광고 목록을 재생 목록으로 설정한 상태에서, 고객이 인식되는지를 확인하는 단계와;Checking whether the customer is recognized while setting the default advertisement list set by the administrator as a playlist;
상기 확인 결과 고객이 인식될 경우, 고객 정보를 저장하고, 지속적으로 업데이트하며, 매장에 방문한 주 고객층에 대한 통계처리를 수행하여 고객을 분석하는 단계와;If the customer is recognized as a result of the checking, storing the customer information, continuously updating the data, and performing statistical processing on the main customer base visited to the store to analyze the customer;
상기 분석한 고객 계층 정보를 기반으로 광고 목록을 구성하는 단계와;Constructing an advertisement list based on the analyzed customer hierarchy information;
상기 구성한 광고 목록을 재생할 수 있도록 광고 표시부에 전송하는 단계를 포함한다.
And transmitting the configured advertisement list to the advertisement display unit.
또한, 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법"은,In addition, the "advertising method using an intelligent interactive advertising terminal using a user recognition function" according to the present invention,
초기화한 인체 감시부를 통해 고객의 존재 유무를 확인하는 단계와;Confirming whether a customer exists through the initialized human body monitoring unit;
상기 확인 결과 고객이 존재하지 않을 경우 광고 표시부의 최소 기능을 위한 대기 전원만을 제외하고 메인 전원을 오프하는 단계와;Turning off the main power except for standby power for the minimum function of the advertisement display unit when there is no customer as a result of the checking;
상기 확인 결과 고객이 존재할 경우에는 광고 재생을 위해 상기 광고 표시부의 메인 전원을 온시키는 단계를 더 포함하는 것을 특징으로 한다.
And if the customer exists, turning on the main power of the advertisement display unit to play the advertisement.
본 발명에 따르면, 광고를 시청하는 고객의 성별, 연령대를 추정하여 맞춤형 광고 콘텐츠를 재생하기 때문에, 고객이 선호하는 광고를 제공할 수 있으며, 광고 투자수익률을 계산할 수 있으므로 광고비의 효율을 극대화할 수 있도록 도모해주는 장점이 있다.According to the present invention, since the customized advertisement content is played by estimating the gender and age range of the customer watching the advertisement, the advertisement can be provided by the customer and the return on advertising investment can be calculated, thereby maximizing the efficiency of the advertisement cost. It has the advantage of promoting.
또한, 본 발명에 따르면 인체 감지 센서를 통해 고객의 유무에 따라 광고 재생 여부를 결정하기 때문에, 기존 광고 단말기의 지속적인 광고 재생 방식에 비해 전력소모를 줄일 수 있는 장점도 있다.In addition, according to the present invention, because it determines whether to play the advertisement according to the presence or absence of the customer through the human body sensor, there is an advantage that can reduce the power consumption compared to the continuous advertisement playback method of the existing advertising terminal.
또한, 본 발명에 따르면 광고 영상의 추가, 계층 분류 및 시간대 별 광고 일정 관리가 가능하기 때문에, 매장 내 상황 또는 광고 매체 재생 상황에 따라 광고 매체의 우선순위를 차등 분배하여 효과적인 광고 재생 작업을 수행할 수 있는 장점도 있다.
In addition, according to the present invention, it is possible to add an advertisement image, classify hierarchies, and manage advertisement schedules according to time slots. There are also advantages.
도 1은 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기의 블록 구성도.
도 2는 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법 중 고객정보를 추정하는 과정을 보인 흐름도.
도 3은 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법 중 재생 광고목록을 설정하는 과정을 보인 흐름도.
도 4는 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법 중 전력 제어과정을 보인 흐름도.
도 5a 및 도 5b는 본 발명에서 고객의 특징 정보 추출을 설명하기 위한 화면 예시도.1 is a block diagram of an intelligent interactive advertising terminal using a user recognition function according to the present invention.
2 is a flowchart illustrating a process of estimating customer information in an advertisement method using an intelligent interactive advertisement terminal using a user recognition function according to the present invention.
3 is a flowchart illustrating a process of setting a play advertisement list in an advertisement method using an intelligent interactive advertisement terminal using a user recognition function according to the present invention.
4 is a flowchart illustrating a power control process of an advertisement method using an intelligent interactive advertisement terminal using a user recognition function according to the present invention.
Figures 5a and 5b is a screen example for explaining the feature information extraction of the customer in the present invention.
이하 본 발명의 바람직한 실시 예를 첨부한 도면에 의거 상세히 설명하면 다음과 같다. 본 발명을 설명하기에 앞서 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그에 대한 상세한 설명은 생략한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail.
도 1은 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기의 블록 구성도로서, 영상 입력부(100), 인체감시부(200), 영상처리 및 광고제어부(300) 및 광고 표시부(400)로 구성된다.1 is a block diagram of an intelligent interactive advertising terminal using a user recognition function according to the present invention, the
영상 입력부(100)는 감시 영역에 대한 영상을 실시간으로 촬영하는 기능을 수행하는 것으로서, 통상적인 감시용 비디오 카메라, 웹 카메라 등으로 구현될 수 있다.The
인체감시부(200)는 고객이 광고 시청 범위에 존재하는지 또는 고객의 존재 유무를 검출하여 상기 광고 표시부(400)에 전달하는 역할을 하는 것으로서, 대상의 움직임을 감지할 수 있는 인체감지센서 또는 초음파 센서로 구현될 수 있다.The human
광고 표시부(400)는 상기 영상처리 및 광고제어부(300)에서 제공되는 광고를 현시하는 역할을 하는 것으로서, 영상 매체를 재생할 수 있는 LCD 모니터 등으로 구현될 수 있다.The
영상처리 및 광고제어부(300)는 상기 영상 입력부(100)를 통해 실시간으로 입력된 영상 정보를 분석하여 고객의 정보를 유추하고, 상기 유추한 고객 정보에 따라 광고 목록을 재구성하여 광고를 제공하는 역할을 한다. The image processing and
이러한 영상처리 및 광고제어부(300)는 상기 실시간으로 입력된 영상 정보를 분석하여 고객의 성별, 연령을 유추하는 고객 정보 추정부(310)와; 상기 고객 정보 추정부(310)에서 유추한 고객 정보에 따라 광고 재생목록을 스케줄링하고 업데이트하여 재구성하는 광고 제어부(320)와; 광고 영상과 분류정보가 저장되어 있는 광고 데이터베이스(DB)를 포함한다.The image processing and
여기서 광고 제어부(320)는 고객정보 추정부(310)를 통해 고객 정보가 인식될 경우, 이를 카운트하여 고객이 광고를 시청하는 시간을 획득하고, 광고를 시청한 고객의 수, 추정한 고객의 성별 및 나이 정보 등을 상기 광고 시청 시간과 병합하여 광고를 의뢰한 광고주의 서버에 전송하여, 광고 ROI 즉, 광고시간 대비 매출을 분석하여 광고 효과를 평가할 수 있도록 한다.Here, when the customer information is recognized through the customer
이와 같이 구성된 본 발명은 고객이 누구인지 인식하여 고객이 주목할 가능성이 큰 광고를 매장에서 고객에게 선택적으로 보여줌으로써 광고의 투자수익률(ROI)을 극대화하게 된다. The present invention configured as described above maximizes the return on investment (ROI) of the advertisement by selectively showing the customer in the store the advertisement that the customer is likely to pay attention by recognizing who the customer is.
이를 좀 더 구체적으로 설명하면, 영상 입력부(100)는 감시 영역 내에 고객의 영상을 실시간으로 촬영하여 영상처리 및 광고제어부(300)에 전달하게 되고, 인체감시부(200)는 광고 단말기의 시청 범위에 고객이 존재하는지를 검출하여 광고 표시부(400)에 전달한다.In more detail, the
광고 표시부(400)는 인체감시부(200)에서 검출된 고객의 존재 유무 신호에 따라 메인 전원을 제어하게 되는 데, 예컨대, 시청 범위에 고객이 존재하지 않을 경우에는 메인 전원은 차단하고 최소한의 기능 수행을 위한 대기전원만 공급하여 불필요한 전력 낭비를 방지하게 된다. 이와는 달리 시청 범위에 고객이 존재할 경우에는 메인 전원을 공급하여 광고가 표시되도록 한다.The
한편, 영상처리 및 광고제어부(300)의 고객정보 추정부(310)는 상기 영상 입력부(100)를 통해 고객 영상이 실시간으로 입력되면, 상기 실시간으로 입력된 영상 정보를 분석하여 고객의 성별, 연령을 유추하게 된다. 여기서 고객의 성별, 연령 등을 유추하기 위해서, 시스템 구축 전에 수집한 샘플데이터를 사용하여 각 특징에 계층별(성별, 나이별) 수치 값 분포도(계층 추정 테이블)를 구축하고, 실시간으로 입력된 고객의 수치 값을 계층 추정 테이블과 매칭하여 고객이 속한 계층(성별, 연령별)을 추정하게 된다.Meanwhile, when the customer image is input in real time through the
광고 제어부(320)는 상기 고객 정보 추정부(310)에서 유추한 고객 정보에 따라 광고 데이터베이스(330)에 설정된 광고 재생목록을 스케줄링하고 업데이트하여 재구성하게 된다. 그리고 재구성한 광고 목록을 재생하여 광고 표시부(400)에 전달함으로써, 광고 표시부(400)는 광고를 시청하는 고객의 연령이나 성별 등에 따라 맞춤형 광고가 재생된다. 이로써 광고주는 광고 효율을 높일 수 있게 되는 것이다.The
또한, 광고 제어부(320)는 상기 고객정보 추정부(310)를 통해 고객 정보가 인식될 경우, 내부 카운터를 이용하여 고객이 광고를 시청하는 시간을 획득하고, 광고를 시청한 고객의 수를 누적하며, 추정한 고객의 성별 및 나이 정보 등을 상기 광고 시청 시간과 병합하여 광고를 의뢰한 광고주의 서버에 전송한다. In addition, when the customer information is recognized through the customer
여기서 서버로의 데이터 전송은 무선랜 또는 와이브로(Wibro)를 사용하여 전송하며, 이러한 무선 통신을 위해 광고 제어부(320)는 무선 통신 모듈을 구비하는 것이 바람직하다.The data transmission to the server is transmitted using a wireless LAN or WiBro, and the
이러한 본 발명의 양방향 광고 단말기는, 기존 단방향 광고 단말기에서 수신한 광고에 대해서만 광고를 재생해주는 단방향 광고 기법에서 발생하는 단점 예컨대, 고객이 재생되는 광고 콘텐츠를 유용하게 사용할 수도 있지만, 고객이 원하지 않는 일방적인 광고일 경우 재생되는 광고 콘텐츠를 무시함으로써 오히려 네거티브하게 작용하는 그러한 문제점을 해소하게 되는 것이다.Such an interactive advertising terminal of the present invention, a disadvantage caused by the one-way advertising technique that plays the advertisement only for the advertisement received from the existing one-way advertising terminal, for example, may be useful to use the advertising content that the customer plays, but the customer does not want one-sided In the case of the in- advertisement, by ignoring the advertising content that is played is to solve such a problem that works rather negatively.
도 2는 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법" 중 고객정보를 추정하는 과정을 보인 흐름도로서, S는 단계(Step)를 나타낸다.2 is a flowchart illustrating a process of estimating customer information among "advertising method using an intelligent interactive advertisement terminal using a user recognition function" according to the present invention, where S represents a step.
이에 도시된 바와 같이, 촬영이 시작되고, 영상 프레임이 획득되면 상기 획득한 영상 프레임과 이전 영상 프레임과의 차 영상 또는 배경 영상과 현재 영상 프레임과의 깊이(depth) 차이를 사용하여 고객 영상 정보를 검출하는 단계(S110 ~ S112)와; 상기 검출한 고객 영상 정보에 얼굴검출 알고리즘을 적용하여 얼굴 영역을 검출하는 단계(S113)와; 상기 검출한 얼굴 영역을 기준으로 해부학적인 분류에 의해 고객 정보를 추출하는 단계(S114 ~ S115)와; 상기 추출한 고객 정보를 윤곽선 비교하여 고객 특징 정보를 추출하는 단계(S116)와; 상기 추출한 고객 정보와 고객 특징 정보를 수치화하는 단계(S117)와; 상기 수치화한 수치 값을 통계처리 하여 고객의 성별과 나이를 추정하는 단계(S118)와; 상기 추정한 고객의 정보를 기반으로 고객에 따른 광고재생 목록을 재구성하는 단계(S119 ~ S120)를 포함한다.As shown in the drawing, when shooting is started and an image frame is acquired, the customer image information is obtained by using a difference between the acquired image frame and the previous image frame or a depth difference between the background image and the current image frame. Detecting (S110 ˜ S112); Detecting a face region by applying a face detection algorithm to the detected customer image information (S113); Extracting customer information by anatomical classification based on the detected face region (S114 to S115); Extracting customer characteristic information by contour comparing the extracted customer information (S116); Digitizing the extracted customer information and customer characteristic information (S117); Estimating gender and age of the customer by statistically processing the numerical value (S118); Reconstructing the advertisement play list according to the customer based on the estimated customer information (S119 ~ S120).
이와 같이 이루어지는 본 발명에 따른 "사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법"은, 먼저 단계 S110에서 촬영이 시작되었는지의 여부를 판단하여, 촬영이 시작되지 않은 경우에는 대기 상태를 유지하고, 이와는 달리 촬영이 시작된 경우에는 단계 S111로 이동하여 영상 입력부(100)인 카메라로부터 임의의 프레임이 입력되었는지를 판단한다.The "advertising method using the intelligent interactive advertisement terminal using the user recognition function" according to the present invention made as described above, first determines whether or not the shooting started in step S110, if the shooting does not start and maintains the standby state In contrast, in the case where photography is started, the process moves to step S111 to determine whether an arbitrary frame is input from the camera which is the
상기 판단 결과 카메라로부터 임의의 프레임이 입력되지 않은 경우에는 단계 S111을 반복 수행하고, 이와는 달리 임의의 프레임이 입력된 경우에는 단계 S112로 진행하여 입력 프레임과 이전 프레임 간 차이가 발생했는지를 확인하여, 두 프레임 간에 차이가 발생한 경우에는 두 프레임간의 영상 빼기(차 영상) 공식을 적용하여 계산한 결과에 따라 고객 영상 정보를 획득하거나, 배경 영상과 현재 영상 프레임과의 깊이(depth) 차이를 사용하여 고객 영상 정보를 획득한다. 즉, 고객을 검출하게 되는 것이다. 여기서 배경 영상과 현재 영상의 깊이 값은 적외선, 초음파 등의 센서로 획득할 수 있다.As a result of the determination, if an arbitrary frame is not input from the camera, step S111 is repeatedly performed. Otherwise, if an arbitrary frame is input, the process proceeds to step S112 to determine whether a difference between the input frame and the previous frame has occurred. If there is a difference between the two frames, obtain the customer image information according to the calculation result by applying the image subtraction (difference image) formula between the two frames, or use the depth difference between the background image and the current image frame. Acquire image information. In other words, the customer is detected. The depth value of the background image and the current image may be acquired by sensors such as infrared rays and ultrasonic waves.
이후 단계 S113으로 이동하여 상기 획득한 고객 정보를 대상으로 얼굴검출 알고리즘을 적용하여 영역 내에 얼굴 영역을 검출한다. 여기서 얼굴검출 알고리즘은 공지된 기술인 얼굴인식 시스템 성능시험도구 기능개선연구(한국정보보호진흥원 연구보고서, 2006, PP 27 ~ 46)에 개시된 얼굴인식기법을 이용할 수 있다.Thereafter, the method proceeds to step S113 to detect a face area in the area by applying a face detection algorithm to the acquired customer information. Here, the face detection algorithm may use the face recognition technique disclosed in the function improvement study of the face recognition system performance test tool, which is a well-known technology (Korea Information Security Research Institute, 2006, pp 27 ~ 46).
상기 얼굴 영역을 검출한 결과 얼굴 영역을 검출하지 못할 경우에는 단계 S111로 이동하여 새로운 프레임을 획득하고, 이와는 달리 얼굴 영역을 검출한 경우에는 단계 S115로 이동하여 얼굴 영역을 기준으로 해부학적인 분류에 의해 고객의 머리, 상반신, 하반신, 키, 어깨둘레 등의 인체 정보를 획득한다.If the face area is not detected and the face area is not detected, go to step S111 to obtain a new frame. Otherwise, if the face area is detected, go to step S115 and perform anatomical classification based on the face area. Obtains human body information such as the head, upper body, lower body, height, and shoulder width of the customer.
상기 해부학적인 분류를 수행하여 고객에 대한 해부학적 정보를 수집한 이후에는 단계 S116으로 이동하여 고객 특징 정보를 추출하기 위해 윤곽선 비교를 한다. 고객 특징 정보는 고객이 착용한 의복 또는 장신구 등의 특징으로 윤곽선 매칭 또는 색상 검출을 통해 이루어진다. 예컨대, 여성의 치마 착용시 하반신에서 발견될 수 있는 치마와 다리 사이의 각 또는 머리띠 착용시 머리 영역에서 주성분과는 다른 계통의 색상 발견과 같은 특징을 검출한다.After collecting anatomical information about the customer by performing the anatomical classification, the process moves to step S116 to compare contours to extract customer feature information. The customer characteristic information is made through contour matching or color detection with characteristics such as clothes or jewelry worn by the customer. For example, it detects features such as color discovery of a lineage different from the main component in the angle of the skirt and legs that can be found in the lower body when wearing the skirt of the woman or in the head region when wearing the headband.
고객의 특징 정보를 추출한 경우에는 단계 S117로 이동하여 상기 수집한 고객의 해부학적 특징에 의한 고객 정보와 상기 추출한 고객 특징 정보를 수치화한다. 해부학적인 특징의 경우 고객의 키, 어깨 넓이, 수염 유무, 머리 길이 등의 수치를 픽셀 단위로 검출하여 수치화한다. 예컨대, 머리에 대한 수치 값의 경우 머리 길이가 긴 여성의 경우 머리가 짧은 남성에 비해 상대적으로 높은 값이 산출될 것이다. 여기서 영상 내에 잡음과 반사광에 의한 색상 변화에 대한 보정 작업을 선행하여, 수치의 오류를 최소화하는 것이 바람직하다. If the feature information of the customer is extracted, the process moves to step S117 where the customer information by the collected anatomical features and the extracted customer feature information are digitized. In the case of anatomical features, the customer's height, shoulder width, beard, hair length, etc. are detected and digitized in units of pixels. For example, the numerical value for the head will yield a relatively high value for women with long hair compared to men with short hair. Here, it is preferable to minimize the numerical error by correcting the color change caused by noise and reflected light in the image.
착용 의상 관련 특징정보는 검사 대상이 되는 아이템의 착용 여부를 판정하기 위한 수치 값을 픽셀 단위로 산출한다. 예컨대, 치마의 여부를 판단하기 위해 고객의 하반신의 치마 각을 검사할 경우, 치마의 스타일에 따라 치마와 다리 사이의 각이 다를 수 있다. 또한, 바지를 착용한 경우에도 바지의 통, 주름, 긴 상의에 의해 어느 정도의 각이 잡힐 수 있다. 또한, 머리띠의 경우 외부의 조명에 의해 머리띠를 착용하지 않은 상태에서도 머리영역에서 주성분과는 다른 색상 정보를 검출할 수 있다. 위와 같은 이유로 인해 단순히 치마 각, 또는 머리영역의 다른 색상 정보가 검출되었다고 해서 해당 아이템 착용을 단정 지를 수 없다. 이러한 문제를 해결하기 위해 각 아이템 착용 여부를 판정하기 전에 수치화된 데이터를 픽셀 단위로 수집한다.Wearing clothes-related feature information calculates a numerical value for determining whether to wear an item to be inspected in units of pixels. For example, when the skirt angle of the lower body of the client is examined to determine whether the skirt is present, the angle between the skirt and the legs may be different according to the style of the skirt. In addition, even when the pants are worn, some angle may be caught by the tube, the wrinkles, and the long top of the pants. In the case of the headband, color information different from the main component may be detected in the head region even when the headband is not worn by external lighting. For the above reasons, simply detecting the skirt angle or other color information of the head area does not confirm the wearing of the item. To solve this problem, digitized data is collected in pixels before determining whether to wear each item.
다음으로, 단계 S118에서 상기 단계 S117에서 산출한 고객의 해부학적 정보와 착용 아이템의 수치 값을 사용하여 고객의 성별과 나이를 추정한다. 성별과 나이를 추정하기 위해 각 계층별 수치 값을 통계 처리하여 산출한 데이터를 사용한다. 시스템 구축 전에 수집한 샘플데이터를 사용하여 각 특징에 계층별 수치 값 분포도(계층 추정 테이블)를 구축한다. 실시간으로 입력된 고객의 수치 값을 계측 추정 테이블과 매칭하여 고객이 속한 계층을 추정한다.Next, in step S118, the sex and age of the customer are estimated using the anatomical information of the customer and the numerical value of the worn item calculated in step S117. In order to estimate gender and age, data obtained by statistically processing numerical values of each class is used. Using the sample data collected before the system construction, a hierarchical value distribution chart (hierarchical estimation table) is constructed for each feature. The numerical value of the customer entered in real time is matched with the measurement estimation table to estimate the hierarchy to which the customer belongs.
단계 S119에서는 상기 추정한 고객 정보를 광고 제어부에 전달하여, 상기 추정한 고객 정보를 기반으로 광고 데이터베이스와 연동하여 고객에 따른 광고 재생 목록을 구축하도록 한다. 이후 단계 S120에서는 시스템 종료 여부를 확인하여 시스템이 종료되지 않은 경우에는 상기 단계 S111로 이동하여 그 이하의 단계를 수행하고, 이와는 달리 시스템이 종료한 경우에는 고객 정보 추출 과정을 종료하게 된다.In step S119, the estimated customer information is transmitted to the advertisement control unit to build an advertisement playlist according to the customer by interworking with an advertisement database based on the estimated customer information. Thereafter, in step S120, if the system is not terminated by checking whether the system is terminated, the process moves to step S111 and performs the following steps. Otherwise, when the system is finished, the customer information extraction process is terminated.
도 5a와 도 5b는 고객정보 추정부(310)에서 영상 입력부(100)를 통해 입력받은 실시간 영상 데이터를 분석한 내용을 설명하기 위한 예시 화면이다. 도 5a는 남성 고객이 입력되었을 때의 추정 내용이며, 도 5b는 여성 고객이 입력되었을 때의 추정 내용을 보여주고 있다. 도 5a와 도 5b에서 보는 바와 같이 남성의 경우 머리 영역의 주성분 픽셀이 5402로 여성의 머리영역 주성분 픽셀 6158에 비해 적다. 또한, 여성이 스커트를 착용할 경우 스커트 수치가 66으로 남성의 스커트 수치인 18에 비해 높은 수치 값을 갖는 것을 확인할 수 있다. 이와 같이 고객 영상에 대하여 고객의 성별과 나이를 추정할 수 있는 대상을 수치화하고, 계층별 수치 값의 평균치를 산출하여 대상의 계층을 분류한다.5A and 5B are exemplary screens for describing contents of analyzing real-time image data received through the
도 3은 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법 중 재생 광고목록을 설정하는 과정을 보인 흐름도로서, S는 단계(Step)를 나타낸다.3 is a flowchart illustrating a process of setting a play advertisement list in an advertisement method using an intelligent interactive advertisement terminal using a user recognition function according to the present invention, where S represents a step.
이에 도시된 바와 같이, 관리자가 설정해 놓은 기본 광고 목록을 재생 목록으로 설정한 상태에서, 고객이 인식되는지를 확인하는 단계(S210 ~ S211)와; 상기 확인 결과 고객이 인식될 경우, 고객 정보를 저장하고, 지속적으로 업데이트하며, 매장에 방문한 주 고객층에 대한 통계처리를 수행하여 고객을 분석하는 단계(S212)와; 상기 분석한 고객 계층 정보를 기반으로 광고 목록을 구성하는 단계(S213)와; 상기 구성한 광고 목록을 재생할 수 있도록 광고 표시부에 전송하는 단계(S214)와; 최소 광고 재생 시간을 대기한 후 시스템 종료 여부를 확인하는 단계(S215 ~ S216)로 이루어진다.As shown here, in the state of setting the default advertisement list set by the administrator as a playlist, checking whether the customer is recognized (S210 to S211); When the customer is recognized as a result of the checking, storing the customer information, continuously updating the customer information, and performing statistical processing on the main customer base visited to the store to analyze the customer (S212); Constructing an advertisement list based on the analyzed customer hierarchy information (S213); Transmitting the configured advertisement list to an advertisement display unit (S214); After waiting for the minimum advertisement playing time, a step (S215 to S216) is performed to determine whether the system is terminated.
상기와 같이 이루어지는 재생 광고목록을 설정하는 방법은, 단계 S210에서 최초로 관리자가 설정해 놓은 기본 광고 목록을 재생 목록으로 구성한다. 이후 단계 S211로 이동하여 고객의 접근 여부를 확인한다. 이때 고객 정보가 검출되지 않으면 단계 S214로 이동하여 관리자에 의해 미리 설정해 놓은 광고 목록을 광고 표시부에 전송하여 광고를 재생하게 되고, 이와는 달리 고객 정보가 검출되면 단계 S212로 이동한다.In the method of setting the play advertisement list as described above, the basic advertisement list set by the administrator for the first time in step S210 is configured as a play list. After that, go to step S211 to check whether the customer approaches. At this time, if the customer information is not detected, the process moves to step S214, and the advertisement list previously set by the administrator is transmitted to the advertisement display unit to play the advertisement. Otherwise, if the customer information is detected, the process moves to step S212.
단계 S212에서는 인식한 고객 정보를 저장한다. 저장된 고객 정보는 개인정보 보호를 위해 고객의 계층구성만을 포함한다. 이는 영상 입력부(100)에 인식된 고객의 성별과 나이를 계층으로 분류한 것이다. 저장된 정보는 지속적으로 업데이트되어 매장에 방문한 주 고객층에 대한 통계처리를 수행한다. 통계화 된 주 고객 데이터는 매장 관리자가 디폴트 광고 목록을 설정하는 데 도움을 줄 수 있다.In step S212, the recognized customer information is stored. Stored customer information includes only the customer's hierarchy for privacy. This classifies the gender and age of the customer recognized by the
주 고객 분석을 수행한 이후에는 단계 S213으로 이동하여 계층별 광고목록을 구성한다. 즉, 고객정보 추정부(310)에서 전달받은 고객의 계층에 따른 광고 목록을 구성하게 된다. 광고 목록은 광고 데이터베이스(DB)(330)에서 조회한다. 광고 데이터베이스(330)에는 광고 명, 광고 영상과 함께 광고가 대상으로 하는 계층 정보를 포함하고 있다. 추정된 고객 계층과 일치하는 광고를 모아 하나의 광고 목록을 작성한다. After performing the main customer analysis, the process moves to step S213 to construct a hierarchical advertisement list. That is, the list of advertisements according to the hierarchy of customers received from the customer
단계 S213에서 구성한 광고 목록은 단계 S214에서 광고 표시부(400)에 전송되고, 단계 S215에서는 상기 전송한 광고가 재생되는 최소 광고 재생시간만큼 대기를 한다. 이 시간 동안은 광고 목록을 지속적으로 업데이트하여 광고가 반복적으로 중간에 정지되는 것을 방지한다. The advertisement list configured in step S213 is transmitted to the
광고 재생이 완료된 이후에는 단계 S216으로 이동하여 시스템 종료 조건을 확인한 후 시스템이 종료되지 않았다면 단계 S211로 이동하고, 시스템이 종료된 경우라면 광고 제어에 대한 과정을 종료하게 된다.After the reproduction of the advertisement is completed, go to step S216 to check the system termination condition, and if the system is not terminated, move to step S211. If the system is terminated, the process for advertisement control is terminated.
도 4는 본 발명에 따른 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법 중 전력 제어과정을 보인 흐름도로서, S는 단계(Step)를 나타낸다.4 is a flowchart illustrating a power control process of an advertisement method using an intelligent interactive advertisement terminal using a user recognition function according to the present invention, where S represents a step.
이에 도시된 바와 같이, 초기화한 인체 감시부를 통해 고객의 존재 유무를 확인하는 단계(S310 ~ S311)와; 상기 확인 결과 고객이 존재하지 않을 경우 광고 표시부의 최소 기능을 위한 대기 전원만을 제외하고 메인 전원을 오프하는 단계(S312)와; 상기 확인 결과 고객이 존재할 경우에는 광고 재생을 위해 상기 광고 표시부의 메인 전원을 온시키는 단계(S313)와; 최소 광고 재생시간 동안 대기하는 단계(S314)와; 시스템 종료 여부를 확인하는 단계(S315)를 포함한다.As shown in the figure, checking the presence or absence of the customer through the initialized human body monitoring unit (S310 ~ S311); Turning off the main power except for standby power for the minimum function of the advertisement display unit when the customer does not exist (S312); If the customer is present as a result of the checking, turning on the main power of the advertisement display unit to reproduce an advertisement (S313); Waiting for the minimum advertisement duration (S314); Check whether the system is terminated (S315).
이와 같이 이루어지는 전력 제어과정은, 단계 S310에서 인체 감시부(200)는 인체 감시를 위한 센서를 초기화한다. 여기서 인체 감시를 위해 사용할 수 있는 센서는 카메라, 초음파센서, 열선감시센서 등 이동 중인 물체를 감지할 수 있는 모든 센서를 포함한다.In the power control process performed as described above, the human
단계 S311에서는 인체가 검출되는지를 확인하게 되고, 이 확인 결과 인체가 검출되지 않으면 단계 S312로 이동하여 광고 단말기의 최소 기능만을 위한 대기 전원을 제외하고 메인 전원을 오프한 후, 단계 S311로 이동하여 인체를 감시하게 된다.In step S311 it is checked whether the human body is detected, if the human body is not detected as a result of the check, go to step S312 to turn off the main power except the standby power for the minimum function of the advertising terminal, and then go to step S311 Will be monitored.
이와는 달리 인체가 감지되면 단계 S313으로 이동하여 광고 단말기의 모든 기능이 수행될 수 있도록 메인 전원을 인가하여 광고를 재생하게 된다.On the contrary, when the human body is sensed, the process moves to step S313 to play the advertisement by applying the main power to perform all functions of the advertisement terminal.
그리고 단계 S314에서는 광고가 재생되는 중간에 인체가 감지되지 않아 전원이 오프되는 것을 방지하기 위하여 최소 광고 재생시간 동안 대기하게 된다.In step S314, the human body is not detected in the middle of playing the advertisement, and thus waits for the minimum advertisement playing time to prevent the power off.
광고 영상의 재생이 완료된 후 단계 S315로 이동하여 시스템 종료 조건을 확인한다. 이 확인 결과 시스템 종료조건을 만족하지 않으면 단계 S311로 이동하여 그 이하의 동작을 수행하고, 시스템 종료조건을 만족하면 시스템을 종료하게 된다.After the reproduction of the advertising image is completed, go to step S315 to check the system termination condition. As a result of this check, if the system termination condition is not satisfied, the process proceeds to step S311 and the following operations are performed. If the system termination condition is satisfied, the system is terminated.
이러한 본 발명에 따르면 광고를 시청하는 대상(고객)의 영상이미지를 분석하여, 대상의 성별, 연령 계층을 판별하고, 각 계층의 관심사를 반영한 광고를 할 수 있도록 도모해준다. 또한, 인체감지센서를 통해 고객의 존재 유무를 검출하여, 고객이 존재하지 않을 경우에는 자동으로 광고 단말기의 메인 전원을 차단함으로써 광고 단말기의 전력 소모를 최소화할 수 있다. 또한, 광고 제어부(320)를 통해 양방향 통신을 수행하여 광고주 서버 또는 관리자 서버와 접속하여 데이터 통신이 가능하므로, 광고 추가/삭제, 광고 디스플레이, 광고 예약 설정/취소/변경 등을 원격지에서 관리할 수 있는 장점도 있다. 또한, 광고 제어부(320)를 통해 광고주 서버로 광고를 시청한 사용자의 수, 성별, 광고를 시청한 시간 등의 정보를 전송하여, 광고시간 대비 매출을 분석하여 광고의 효과를 평가할 수 있도록 도모해주어, 광고 효율을 극대화할 수 있는 장점도 있다.According to the present invention, by analyzing the video image of the target (customer) watching the advertisement, to determine the gender, age hierarchy of the target, and to promote the advertisement reflecting the interests of each hierarchy. In addition, by detecting the presence of the customer through the human body sensor, if the customer does not exist by automatically cutting off the main power supply of the advertising terminal can minimize the power consumption of the advertising terminal. In addition, since the two-way communication through the
본 발명은 상술한 특정의 바람직한 실시 예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자라면 누구든지 다양한 변형실시가 가능한 것은 물론이고, 그와 같은 변경은 청구범위 기재의 범위 내에 있게 된다.
It will be understood by those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined in the appended claims and their equivalents. Of course, such modifications are within the scope of the claims.
100… 영상 입력부
200… 인체 감시부
300… 영상처리 및 광고제어부
310… 고객정보 추정부
320… 광고 제어부
330… 광고 데이터베이스
400… 광고 표시부100... Video input unit
200 ... Human body monitor
300 ... Image processing and advertising controller
310 ... Customer Information Estimator
320 ... Advertising control
330... Advertising database
400 ... Advertising display
Claims (8)
감시 영역에 대한 영상을 실시간으로 촬영하는 영상 입력부와;
상기 영상 입력부를 통해 실시간으로 입력된 영상 정보를 분석하여 고객의 정보를 유추하고, 상기 유추한 고객 정보에 따라 광고 목록을 재구성하여 광고를 제공하는 영상처리 및 광고제어부; 및
상기 영상처리 및 광고제어부에서 제공되는 광고를 현시하는 광고 표시부를 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기.
In an intelligent interactive advertising terminal using a user recognition function,
An image input unit configured to capture an image of a surveillance area in real time;
An image processing and advertisement control unit for analyzing the image information input in real time through the image input unit to infer customer information and reconstructing the advertisement list according to the inferred customer information to provide an advertisement; And
Intelligent interactive advertising terminal using a user recognition function, characterized in that it comprises an advertisement display unit for displaying the advertisement provided by the image processing and advertisement control unit.
고객이 광고 시청 범위에 존재하는지 또는 고객의 존재 유무를 검출하여 상기 광고 표시부에 전달하는 인체 감시부를 더 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기.
The method according to claim 1,
An intelligent interactive advertisement terminal using a user recognition function further comprises a human body monitoring unit for detecting whether the customer is present in the advertisement viewing range or the presence of the customer to deliver to the advertising display.
상기 실시간으로 입력된 영상 정보를 분석하여 고객의 성별, 연령을 유추하는 고객 정보 추정부와;
상기 고객 정보 추정부에서 유추한 고객 정보에 따라 광고 재생 목록을 스케줄링하고 업데이트하여 재구성하는 광고 제어부와;
광고 영상과 분류정보가 저장되어 있는 광고 데이터베이스(DB)를 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기.
The method according to claim 1, wherein the image processing and advertisement control unit,
A customer information estimating unit for inferring gender and age of the customer by analyzing the image information input in real time;
An advertisement controller configured to schedule, update, and reconstruct an advertisement playlist according to the customer information inferred by the customer information estimator;
Intelligent interactive advertising terminal using a user recognition function characterized in that it comprises an advertising database (DB) that stores the advertisement image and classification information.
실시간으로 고객의 해부학적 특징과 의복, 장신구를 분석하여 고객의 성별과 나이를 추정하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기.
The method of claim 3, wherein the customer information estimation unit,
Intelligent interactive advertising terminal using a user recognition function characterized in estimating the sex and age of the customer by analyzing the anatomical features, clothing, and jewelry of the customer in real time.
상기 광고 표시부는 상기 인체감시부를 통해 전달되는 고객 존재 유무 검출신호를 기반으로 메인 전원을 제어하되, 고객이 존재하지 않을 경우에는 메인 전원을 차단하여 전력 소모를 최소화하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기.
The method according to claim 2,
The advertisement display unit controls the main power based on the presence or absence detection signal transmitted through the human body monitoring unit, if the customer does not exist, the main power is cut off by minimizing power consumption. Intelligent interactive advertising terminal using.
촬영이 시작되고, 영상 프레임이 획득되면 상기 획득한 영상 프레임과 이전 영상 프레임과의 차 영상 또는 배경 영상과 현재 영상 프레임과의 깊이(depth) 차이를 사용하여 고객 영상 정보를 검출하는 단계와;
상기 검출한 고객 영상 정보에 얼굴검출 알고리즘을 적용하여 얼굴 영역을 검출하는 단계와;
상기 검출한 얼굴 영역을 기준으로 해부학적인 분류에 의해 고객 정보를 추출하는 단계와;
상기 추출한 고객 정보를 윤곽선 비교하여 고객 특징 정보를 추출하는 단계와;
상기 추출한 고객 정보와 고객 특징 정보를 수치화하는 단계와;
상기 수치화한 수치 값을 통계처리 하여 고객의 성별과 나이를 추정하는 단계; 및
상기 추정한 고객의 정보를 기반으로 고객에 따른 광고재생 목록을 재구성하는 단계를 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고방법.
In a method for advertising using an intelligent interactive advertising terminal using a user recognition function consisting of an image input unit, a human body monitoring unit, an image processing unit, an advertisement control unit and an advertisement display unit,
Photographing is started, and when the image frame is obtained, detecting customer image information by using a difference between the acquired image frame and a previous image frame or a difference between a background image and a current image frame;
Detecting a face region by applying a face detection algorithm to the detected customer image information;
Extracting customer information by anatomical classification based on the detected face region;
Extracting customer characteristic information by contour comparing the extracted customer information;
Digitizing the extracted customer information and customer characteristic information;
Estimating the gender and age of the customer by statistically processing the numerical value; And
And reconstructing an advertisement playlist according to the customer based on the estimated customer information.
상기 광고재생 목록을 재구성하는 단계는,
관리자가 설정해 놓은 기본 광고 목록을 재생 목록으로 설정한 상태에서, 고객이 인식되는지를 확인하는 단계와;
상기 확인 결과 고객이 인식될 경우, 고객 정보를 저장하고, 지속적으로 업데이트하며, 매장에 방문한 주 고객층에 대한 통계처리를 수행하여 고객을 분석하는 단계와;
상기 분석한 고객 계층 정보를 기반으로 광고 목록을 구성하는 단계와;
상기 구성한 광고 목록을 재생할 수 있도록 광고 표시부에 전송하는 단계를 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법.
The method of claim 6,
Reconstructing the ad playlist,
Checking whether the customer is recognized while setting the default advertisement list set by the administrator as a playlist;
If the customer is recognized as a result of the checking, storing the customer information, continuously updating the data, and performing statistical processing on the main customer base visited to the store to analyze the customer;
Constructing an advertisement list based on the analyzed customer hierarchy information;
And transmitting the configured advertisement list to an advertisement display unit so as to reproduce the configured advertisement list.
초기화한 인체 감시부를 통해 고객의 존재 유무를 확인하는 단계와;
상기 확인 결과 고객이 존재하지 않을 경우 광고 표시부의 최소 기능을 위한 대기 전원만을 제외하고 메인 전원을 오프하는 단계와;
상기 확인 결과 고객이 존재할 경우에는 광고 재생을 위해 상기 광고 표시부의 메인 전원을 온시키는 단계를 더 포함하는 것을 특징으로 하는 사용자 인식기능을 이용하는 지능형 양방향 광고 단말기를 이용한 광고 방법.The method of claim 6,
Confirming whether a customer exists through the initialized human body monitoring unit;
Turning off the main power except for standby power for the minimum function of the advertisement display unit when there is no customer as a result of the checking;
And if the customer exists, turning on the main power of the advertisement display unit to play the advertisement, and using the intelligent interactive advertisement terminal using a user recognition function.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110058955A KR101271483B1 (en) | 2011-06-17 | 2011-06-17 | Smart digital signage using customer recognition technologies |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020110058955A KR101271483B1 (en) | 2011-06-17 | 2011-06-17 | Smart digital signage using customer recognition technologies |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20120139251A true KR20120139251A (en) | 2012-12-27 |
| KR101271483B1 KR101271483B1 (en) | 2013-06-05 |
Family
ID=47905765
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020110058955A KR101271483B1 (en) | 2011-06-17 | 2011-06-17 | Smart digital signage using customer recognition technologies |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101271483B1 (en) |
Cited By (17)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140089462A (en) * | 2013-01-04 | 2014-07-15 | 박상정 | System and server for providing pop typed advertisement |
| WO2015031671A1 (en) * | 2013-08-30 | 2015-03-05 | Biscotti Inc. | Physical presence and advertising |
| US9253520B2 (en) | 2012-12-14 | 2016-02-02 | Biscotti Inc. | Video capture, processing and distribution system |
| US9300910B2 (en) | 2012-12-14 | 2016-03-29 | Biscotti Inc. | Video mail capture, processing and distribution |
| WO2016167504A1 (en) * | 2015-04-16 | 2016-10-20 | (주)사름 | Smart mirror device and user-customized image providing method |
| US9485459B2 (en) | 2012-12-14 | 2016-11-01 | Biscotti Inc. | Virtual window |
| US9654563B2 (en) | 2012-12-14 | 2017-05-16 | Biscotti Inc. | Virtual remote functionality |
| WO2017095193A1 (en) * | 2015-12-04 | 2017-06-08 | 삼성전자 주식회사 | Method and apparatus for providing user-customized information |
| CN107424544A (en) * | 2017-07-24 | 2017-12-01 | 即购科技（深圳）有限公司 | New public safety advertisement terminal |
| US10091550B2 (en) | 2016-08-02 | 2018-10-02 | At&T Intellectual Property I, L.P. | Automated content selection for groups |
| WO2020071697A1 (en) * | 2018-10-05 | 2020-04-09 | 삼성전자주식회사 | Electronic device and method for controlling same |
| KR102110086B1 (en) * | 2019-10-14 | 2020-05-12 | 정은미 | Method for fashion coordination, and computer program recorded on record-medium for executing method therefor |
| KR20200128927A (en) * | 2019-05-07 | 2020-11-17 | 주식회사 엘토브 | O2O(On-line to Off-line) BASED SYSTEM AND METHOD FOR SUGGESTING CUSTOMIZED INFORMATION |
| KR102191044B1 (en) * | 2020-06-15 | 2020-12-14 | 주식회사 센스비전 | Advertising systems that are provided through contents analytics and recommendation based on artificial intelligence facial recognition technology |
| KR102261336B1 (en) * | 2020-07-28 | 2021-06-07 | 주식회사 센스비전 | Service systems for advertisement contents and revenue sharing that can match advertisement contents by facial recognition based on artificial intelligence technologies |
| KR20210095764A (en) * | 2020-01-23 | 2021-08-03 | (주)퓨처쉐이퍼스 | Method and System for Providing 3D Displayed Commercial Video based on Artificial Intellingence using Deep Learning |
| KR20220124928A (en) * | 2021-03-04 | 2022-09-14 | 김학웅 | Apparatus and method for providing photograph printing service |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103744475A (en) * | 2013-12-19 | 2014-04-23 | 张国训 | Intelligent terminal and intelligent system |
| KR101602828B1 (en) | 2014-09-01 | 2016-03-14 | 유형근 | The interactive digital signage |
| KR101796578B1 (en) * | 2015-03-13 | 2017-11-14 | 한국전자통신연구원 | Device for displaying realistic experience |
| KR101613038B1 (en) * | 2015-06-01 | 2016-04-15 | 김형민 | Smart mirror system for personalized advertisement |
| KR102177015B1 (en) | 2019-08-20 | 2020-11-10 | 정봉근 | Digital signage system |
| CN113919859A (en) * | 2021-08-25 | 2022-01-11 | 读书郎教育科技有限公司 | Model machine display method |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| SG142163A1 (en) * | 2001-12-05 | 2008-05-28 | Semiconductor Energy Lab | Organic semiconductor element |
| KR20110006107A (en) * | 2009-07-13 | 2011-01-20 | 한국전자통신연구원 | Face detection apparatus and method feedback combined with face detection and skin color extraction |
| KR20110006062A (en) * | 2009-07-13 | 2011-01-20 | 주식회사 미래인식 | System and method for face recognition |
| JP5390322B2 (en) * | 2009-09-28 | 2014-01-15 | 株式会社東芝 | Image processing apparatus and image processing method |
-
2011
- 2011-06-17 KR KR1020110058955A patent/KR101271483B1/en active IP Right Grant
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9253520B2 (en) | 2012-12-14 | 2016-02-02 | Biscotti Inc. | Video capture, processing and distribution system |
| US9300910B2 (en) | 2012-12-14 | 2016-03-29 | Biscotti Inc. | Video mail capture, processing and distribution |
| US9310977B2 (en) | 2012-12-14 | 2016-04-12 | Biscotti Inc. | Mobile presence detection |
| US9485459B2 (en) | 2012-12-14 | 2016-11-01 | Biscotti Inc. | Virtual window |
| US9654563B2 (en) | 2012-12-14 | 2017-05-16 | Biscotti Inc. | Virtual remote functionality |
| KR20140089462A (en) * | 2013-01-04 | 2014-07-15 | 박상정 | System and server for providing pop typed advertisement |
| WO2015031671A1 (en) * | 2013-08-30 | 2015-03-05 | Biscotti Inc. | Physical presence and advertising |
| WO2016167504A1 (en) * | 2015-04-16 | 2016-10-20 | (주)사름 | Smart mirror device and user-customized image providing method |
| WO2017095193A1 (en) * | 2015-12-04 | 2017-06-08 | 삼성전자 주식회사 | Method and apparatus for providing user-customized information |
| US10091550B2 (en) | 2016-08-02 | 2018-10-02 | At&T Intellectual Property I, L.P. | Automated content selection for groups |
| US10560745B2 (en) | 2016-08-02 | 2020-02-11 | At&T Intellectual Property I, L.P. | Automated content selection for groups |
| US11039210B2 (en) | 2016-08-02 | 2021-06-15 | At&T Intellectual Property I, L.P. | Automated content selection for groups |
| US11509958B2 (en) | 2016-08-02 | 2022-11-22 | At&T Intellectual Property I, L.P. | Automated content selection for groups |
| CN107424544A (en) * | 2017-07-24 | 2017-12-01 | 即购科技（深圳）有限公司 | New public safety advertisement terminal |
| WO2020071697A1 (en) * | 2018-10-05 | 2020-04-09 | 삼성전자주식회사 | Electronic device and method for controlling same |
| US11481811B2 (en) | 2018-10-05 | 2022-10-25 | Samsung Electronics Co., Ltd. | Electronic device and method for controlling same |
| KR20200128927A (en) * | 2019-05-07 | 2020-11-17 | 주식회사 엘토브 | O2O(On-line to Off-line) BASED SYSTEM AND METHOD FOR SUGGESTING CUSTOMIZED INFORMATION |
| KR102110086B1 (en) * | 2019-10-14 | 2020-05-12 | 정은미 | Method for fashion coordination, and computer program recorded on record-medium for executing method therefor |
| KR20210095764A (en) * | 2020-01-23 | 2021-08-03 | (주)퓨처쉐이퍼스 | Method and System for Providing 3D Displayed Commercial Video based on Artificial Intellingence using Deep Learning |
| KR102191044B1 (en) * | 2020-06-15 | 2020-12-14 | 주식회사 센스비전 | Advertising systems that are provided through contents analytics and recommendation based on artificial intelligence facial recognition technology |
| KR102261336B1 (en) * | 2020-07-28 | 2021-06-07 | 주식회사 센스비전 | Service systems for advertisement contents and revenue sharing that can match advertisement contents by facial recognition based on artificial intelligence technologies |
| KR20220124928A (en) * | 2021-03-04 | 2022-09-14 | 김학웅 | Apparatus and method for providing photograph printing service |
Also Published As
| Publication number | Publication date |
|---|---|
| KR101271483B1 (en) | 2013-06-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101271483B1 (en) | Smart digital signage using customer recognition technologies | |
| JP7207836B2 (en) | A system for evaluating audience engagement | |
| JP4702877B2 (en) | Display device | |
| US8295542B2 (en) | Adjusting a consumer experience based on a 3D captured image stream of a consumer response | |
| JP6267861B2 (en) | Usage measurement techniques and systems for interactive advertising | |
| US8208694B2 (en) | Method and system for image and video analysis, enhancement and display for communication | |
| US20090217315A1 (en) | Method and system for audience measurement and targeting media | |
| KR101643915B1 (en) | Construction system for big data reflect regional characteristics tailored ads | |
| KR20150000026A (en) | Smart mobile digital signage using customer recognition technologies and control method thereof | |
| CN108460622A (en) | Interactive advertising system under a kind of line | |
| US20130067513A1 (en) | Content output device, content output method, content output program, and recording medium having content output program recorded thereon | |
| CN106557937B (en) | Advertisement pushing method and device | |
| CN104112209A (en) | Audience statistical method of display terminal, and audience statistical system of display terminal | |
| JP2015509218A (en) | Digital advertising system | |
| CN109711900A (en) | Information display method and device based on face recognition, terminal equipment and storage medium | |
| CN109102336A (en) | Robot advertisement sending method and its system based on image analysis | |
| US10878452B2 (en) | Method and system for dynamically adjusting displayed content based on analysis of viewer attributes | |
| CN110889719A (en) | Advertisement pushing system and method based on user consumption characteristics | |
| CN108876430B (en) | Advertisement pushing method based on crowd characteristics, electronic equipment and storage medium | |
| WO2019205491A1 (en) | Information processing method and device for trying on clothes | |
| Greco et al. | Digital signage by real-time gender recognition from face images | |
| JP2012252613A (en) | Customer behavior tracking type video distribution system | |
| CA2687348A1 (en) | Method and system for audience measurement and targeting media | |
| EP2136329A2 (en) | Comprehensive computer implemented system and method for adapting the content of digital signage displays | |
| CN109255665A (en) | A method of advertisement is launched based on user feature analysis advertisement machine |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20160519 Year of fee payment: 4 |
|
| FPAY | Annual fee payment |
Payment date: 20180509 Year of fee payment: 6 |