KR101308179B1 - 사용자 얼굴 인식을 통한 개인화 광고 방법 - Google Patents

사용자 얼굴 인식을 통한 개인화 광고 방법 Download PDF

Info

Publication number
KR101308179B1
KR101308179B1 KR1020100045036A KR20100045036A KR101308179B1 KR 101308179 B1 KR101308179 B1 KR 101308179B1 KR 1020100045036 A KR1020100045036 A KR 1020100045036A KR 20100045036 A KR20100045036 A KR 20100045036A KR 101308179 B1 KR101308179 B1 KR 101308179B1
Authority
KR
South Korea
Prior art keywords
user
information
advertisement
advertiser
target
Prior art date
Application number
KR1020100045036A
Other languages
English (en)
Other versions
KR20110125484A (ko
Inventor
김현
정태충
Original Assignee
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경희대학교 산학협력단 filed Critical 경희대학교 산학협력단
Priority to KR1020100045036A priority Critical patent/KR101308179B1/ko
Publication of KR20110125484A publication Critical patent/KR20110125484A/ko
Application granted granted Critical
Publication of KR101308179B1 publication Critical patent/KR101308179B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0251—Targeted advertisements
    • G06Q30/0269—Targeted advertisements based on user profile or attribute
    • G06Q30/0271—Personalized advertisement
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241—Advertisements
    • G06Q30/0277—Online advertisement
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16B—BIOINFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR GENETIC OR PROTEIN-RELATED DATA PROCESSING IN COMPUTATIONAL MOLECULAR BIOLOGY
    • G16B50/00—ICT programming tools or database systems specially adapted for bioinformatics

Landscapes

  • Business, Economics & Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Physics & Mathematics (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Game Theory and Decision Science (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Biotechnology (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Biophysics (AREA)
  • Bioethics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

본 발명은 사용자에 개인화된 광고 방법에 관한 것으로, 보다 구체적으로 사용자 또는 광고주 중 어느 일방 위주로 광고를 제공하는 것이 아니라 사용자 상황 정보와 광고주 타겟 목표를 모두 고려하여 사용자에 개인화된 광고를 제공하는 방법에 관한 것이다.
본 발명에 따른 개인화 광고 방법은 사용자와 광고주를 모두 고려하여 사용자에 개인화된 광고물을 광고주의 타겟 대상의 사용자에 효율적으로 제공할 수 있다. 또한 본 발명에 따른 개인화 광고 방법은 정보 온톨로지를 이용하여 실시간으로 사용자 상황 정보를 판단함으로써, 사용자에게 필요로 하는 광고물 또는 홍보물을 정확하게 선택하여 사용자에 제공할 수 있다.

Description

사용자 얼굴 인식을 통한 개인화 광고 방법{Method for advertising bases on perceived face of user}
본 발명은 개인화 광고 방법에 관한 것으로, 보다 구체적으로 사용자 또는 광고주 중 어느 일방 위주로 광고를 제공하는 것이 아니라 사용자 상황 정보와 광고주 타겟 목표에 기초하여 사용자와 광고주 모두를 고려하여 사용자에 개인화된 광고를 제공하는 방법에 관한 것이다.
개인화(personalization) 기술은 현대 사회에 존재하는 수많은 정보 속에서 개인 사용자에 맞는 맞춤형 정보를 찾아주는 시스템으로 유비쿼터스 시대에 반드시 필요한 영역이다. 넘쳐나는 광고물, 홍보물 속에서 사용자는 자신의 상황 정보에 맞는 광고물, 홍보물을 검색하기 위하여 많은 시간을 소비하게 되며, 반대로 광고주는 다양한 다수의 사용자들 중 광고주가 광고 또는 홍보하고자 하는 대상을 필요로 하는 사용자에게 효율적으로 광고할 필요가 점차 증대되고 있다.
종래 통상의 광고 방법은 다수의 사용자에게 무작위적으로 광고물 또는 홍보물을 전달하는 방식으로 이루어지거나, 사용자 또는 광고주 중 어느 일방을 위주로 광고하도록 구성되어 있다. 예를 들어, 종래 사용자 위주의 광고 방법은 사용자의 나이, 취미, 거주지, 직업과 같은 사용자 상황 정보 또는 사용자의 검색 이력, 검색 카테고리와 같은 사용자 관심 대상을 고려하여 사용자가 필요로 할 것으로 예상되는 광고물 또는 홍보물을 검색하여 사용자에 제공하였다. 한편, 종래 광고주 위주의 광고 방법은 광고주가 광고 또는 홍보할 타겟 사용자를 정하여 타겟으로 정한 사용자에게만 광고주의 광고물 또는 홍보물을 제공하였다.
위에서 살펴본 종래 광고 방법은 다수의 무작위 사용자에게 광고물을 제공함으로써, 사용자는 자신에 필요한 광고물 또는 홍보물을 검색하는데 오랜 시간과 노력을 낭비하게 되며, 광고주는 광고 효율이 떨어진다는 문제점을 가진다.
한편, 종래 사용자 위주의 광고 방법은 사용자의 상황 정보 또는 사용자의 관심 대상에 적절한 광고물 또는 홍보물을 제공할 수 있지만, 광고주가 타겟으로 정하고 싶은 사용자에게 적절하게 광고하기 곤란하다는 문제점을 가진다. 또한 종래 사용자 위주의 광고 방법은 사용자에 필요한 광고물 또는 홍보물을 제공하기 위하여 사용자 상황 정보 또는 사용자 관심 대상을 판단하여야 하는데, 이러한 사용자 상황 정보 또는 사용자 관심 대상을 사용자 설문 조사 또는 수동으로 일일이 직접 판단하기 때문에 실시간으로 사용자의 상황 정보 또는 사용자 관심 대상을 정확하게 판단하기 곤란하다는 문제점을 가진다.
한편 종래 광고주 위주의 광고 방법은 광고주가 타겟으로 정하고 싶은 사용자에게만 광고물 또는 홍보물을 제공할 수 있지만, 사용자의 상황 정보 또는 사용자 관심 대상을 고려하지 않기 때문에 비록 광고주가 타겟으로 정하는 사용자라도 사용자에 제공되는 광고물 또는 홍보물이 실제 사용자의 입장에서는 스팸으로 작용할 우려가 있다. 따라서 광고주는 광고물 또는 홍보물을 필요로 하는 사용자에게 효율적으로 광고하기 곤란하다는 문제점을 가진다.
본 발명은 종래 광고 방법이 가지는 문제점을 해결하기 위한 것으로, 본 발명이 이루고자 하는 목적은 사용자와 광고주를 모두 고려한 개인화 광고 방법을 제공하는 것이다.
본 발명이 이루고자 하는 다른 목적은 정보 온톨로지를 이용하여 실시간으로 사용자 상황 정보를 정확하게 판단하고, 사용자 상황 정보에 기초하여 선택한 광고를 사용자에 광고할 수 있는 개인화 광고 방법을 제공하는 것이다.
본 발명이 이루고자 하는 또 다른 목적은 타겟 사용자의 유사도 값에 따라 광고주가 타겟으로 정하고자 하는 사용자를 다양하게 설정할 수 있는 개인화 광고 방법을 제공하는 것이다.
본 발명이 이루고자 하는 또 다른 목적은 디스플레이부에 설치되어 있는 카메라를 통해 사용자 정보를 용이하게 획득하고 획득한 사용자 정보에 기초하여 사용자와 광고주 모두를 고려한 개인화 광고 방법을 제공하는 것이다.
본 발명의 목적을 달성하기 위하여 본 발명에 따른 개인화 광고 방법은 사용자의 영상 정보를 획득하는 단계와, 획득한 사용자 영상 정보에 기초하여 사용자 정보를 판단하는 단계와, 판단한 사용자 정보를 정보 온톨로지에 적용하여 사용자 정보를 파싱하고 파싱 결과에 기초하여 사용자 정보로부터 의미 확장된 사용자 상황 정보를 판단하는 단계와, 판단한 사용자 상황 정보와 광고 메타 정보를 이용하여 사용자에 제공할 광고를 1차 선택하고 광고주 타겟 정보에 기초하여 계산한 선택도에 따라 선택한 1차 광고 중 사용자에 제공할 광고를 결정하는 단계와, 결정한 광고를 사용자에 출력하는 단계를 포함한다.
사용자 정보의 판단은 획득한 사용자 영상 정보에서 사용자 인증 정보를 획득하는 단계와, 획득한 사용자 인증 정보와 기저장된 사용자 인증 정보를 비교하여 획득한 사용자 인증 정보와 일치하는 사용자 인증 정보가 존재하는지 판단하는 단계와, 획득한 사용자 인증 정보와 일치하는 사용자 인증 정보가 존재하는 경우 일치하는 사용자 인증 정보에 기초하여 사용자 정보를 추출하는 단계를 통해 이루어진다. 여기서 사용자 인증 정보에 기초하여 추출한 사용자 정보는 사용자의 나이, 성별, 주소, 직업, 결혼 여부, 취미 중 적어도 어느 하나인 것을 특징으로 한다.
바람직하게, 획득한 사용자 인증 정보와 일치하는 사용자 인증 정보가 존재하지 않는 경우 획득한 사용자 영상 정보로부터 직접 사용자 정보를 판단하며, 여기서 사용자 영상 정보로부터 직접 판단한 사용자 정보는 사용자의 나이 또는 성별인 것을 특징으로 한다.
한편, 사용자에 제공할 광고는 판단한 사용자 상황 정보와 기저장된 광고의 메타 정보를 이용하여 사용자 상황 정보와 일치하는 광고를 검색하여 사용자에 제공할 광고를 1차 선택하는 단계와, 1차 선택 광고의 광고주 타겟 정보에 기초하여 1차 선택 광고의 선택도를 계산하는 단계와, 1차 선택 광고의 선택도가 임계값을 초과하는지 판단하는 단계와, 임계값을 초과하는 1차 선택 광고를 사용자에 제공할 광고로 선택하는 단계를 통해 결정된다.
여기서 1차 선택 광고의 선택도는 광고주 타겟 정보의 가중치 또는 사용자 상황 정보와 광고주 타겟 정보 사이의 유사도 테이블에 따라 계산되는 것을 특징으로 한다.
본 발명에 따른 개인화 광고 방법은 종래 광고 방법과 비교하여 다음과 같은 다양한 효과들을 가진다.
첫째 본 발명에 따른 개인화 광고 방법은 사용자와 광고주를 모두 고려하여 사용자에 개인화된 광고물을 광고주의 타겟 사용자에 효율적으로 제공할 수 있다.
둘째, 본 발명에 따른 개인화 광고 방법은 정보 온톨로지를 이용하여 실시간으로 사용자 정보로부터 사용자 상황 정보를 판단함으로써, 사용자에게 필요로 하는 광고물 또는 홍보물을 정확하게 선택하여 사용자에 제공할 수 있다.
셋째, 본 발명에 따른 개인화 광고 방법은 광고주의 타겟 사용자의 유사도 값을 다르게 설정함으로써, 광고주가 타겟으로 정하고자 하는 사용자를 다양하게 설정할 수 있다.
넷째, 본 발명에 따른 개인화 광고 방법은 디스플레이부에 설치되어 있는 카메라를 통해 획득한 사용자 정보에 기초하여 용이하게 사용자와 광고주 모두를 고려한 광고물 또는 홍보물을 사용자에 제공할 수 있다.
도 1은 본 발명의 일 실시예에 따른 개인화 광고 시스템을 도시하고 있다.
도 2는 본 발명의 일 실시예에 따른, 광고 제공 서버에서 사용자 맞춤형 광고를 제공하는 방법을 설명하기 위한 흐름도이다.
도 3은 본 발명에 따른 사용자 인증 방법의 일 예를 보다 구체적으로 설명하기 위한 흐름도이다.
도 4는 사용자 인증 성공시 정보 온톨로지를 이용하여 판단한 사용자 상황 정보의 일 예를 도시하고 있다.
도 5는 사용자 인증 실패시 정보 온톨로지를 이용하여 판단한 사용자 상황 정보의 일 예를 도시하고 있다.
도 6은 사용자 정보 또는 사용자 상황 정보에 기초하여 사용자에 제공할 광고를 선택하는 방법의 일 예를 보다 구체적으로 설명하기 위한 흐름도이다.
도 7은 광고주가 설정한 사용자 정보 또는 사용자 상황 정보의 유사도 테이블의 일 예를 도시하고 있다.
이하 첨부한 도면을 참고로 본 발명에 따른 개인화 광고 방법에 대해 보다 구체적으로 살펴본다.
도 1은 본 발명의 일 실시예에 따른 개인화 광고 시스템을 도시하고 있다.
도 1을 참고로 보다 구체적으로 살펴보면, 개인화 광고 시스템은 디스플레이부(10), 영상 촬영부(20), 사용자 인증 서버(40), 광고 제공 서버(50), 광고 서버(60)를 구비하고 있으며, 디스플레이부(10), 영상 촬영부(20), 사용자 인증 서버(40), 광고 제공 서버(50), 광고 서버(60)는 각각 네트워크(30)에 접속되어 있다. 네트워크(30)를 통해 디스플레이부(10), 영상 촬영부(20), 사용자 인증 서버(40), 광고 제공 서버(50), 광고 서버(60)는 서로 데이터를 송신하거나 수신한다.
영상 촬영부(20)는 사용자의 정지 영상 또는 동영상을 촬영하는데, 바람직하게 영상 촬영부(20)의 일 예로 카메라가 사용될 수 있으며 더욱 바람직하게 영상 촬영부(20)는 디스플레이부(10)와 통합되어 디스플레이부(10)에 배치되어 제작될 수 있다. 영상 촬영부(20)에서 촬영한 사용자 영상 정보는 네트워크(30)를 통해 사용자 인증 서버(40)로 송신된다. 사용자 인증 서버(40)는 사용자를 인증하기 위한 사용자 인증 정보, 사용자 인증 정보에 매핑되어 있는 사용자 정보가 저장되어 있는데, 영상 촬영부(20)로부터 수신한 사용자 영상 정보와 기저장된 사용자 인증 정보를 비교하여 사용자 영상 정보에 일치하는 사용자 인증 정보가 사용자 인증 서버(40)에 저장되어 있는지 검색하여 사용자를 인증한다. 사용자 인증 서버(40)에서 사용자가 인증되는 경우, 사용자 인증 서버(40)는 기저장되어 있는 사용자 정보를 광고 제공 서버(50)로 송신한다. 그러나 사용자 인증 서버(40)에서 사용자가 인증되지 않은 경우, 사용자 인증 서버(40)는 수신한 사용자 영상 정보로부터 직접 사용자 정보를 판단한다.
사용자 인증 서버(40)에 기저장되어 있는 사용자 정보 또는 사용자 인증 서버(40)에서 직접 판단한 사용자 정보는 네트워크(30)를 통해 광고 제공 서버(50)로 송신된다. 광고 제공 서버(50)는 사용자 인증 서버(40)로부터 수신한 사용자 정보를 정보 온톨로지에 적용하여 사용자 상황 정보를 판단하며, 판단한 사용자 상황 정보와 광고 서버(60)에 저장되어 있는 광고 메타 정보를 이용하여 사용자에 제공할 광고를 결정한다. 광고 서버(60)에는 광고주가 설정한 광고 색인어, 광고 타겟 정보 등과 같은 광고 메타 정보 및 광고주가 설정한 광고 타겟 사용자에 대한 사용자 정보 또는 사용자 상황 정보의 유사도 테이블이 저장되어 있는데, 광고 제공 서버(50)는 광고 서버(60)에 저장되어 있는 광고 메타 정보와 유사도 테이블에 기초하여 사용자에 제공할 광고를 선택한다.
광고 제공 서버(50)는 선택한 광고를 디스플레이부(10)로 송신하기 위한 제어 신호를 광고 서버(60)로 송신하며, 광고 서버(60)는 제어 신호에 따라 광고를 디스플레이부(10)로 송신한다. 여기서 제어 신호에는 선택한 광고의 식별자, 디스플레이부(10)의 식별자 또는 IP 주소가 포함되어 있으며, 광고 서버(60)는 광고 식별자와 디스플레이 식별자 또는 IP 주소에 기초하여 선택한 광고만을 해당 식별자 또는 IP 주소의 디스플레이부(10)로만 송신한다.
도 2는 본 발명의 일 실시예에 따른, 광고 제공 서버에서 사용자 개인화 광고를 제공하는 방법을 설명하기 위한 흐름도이다.
도 2를 참고로 보다 구체적으로 살펴보면, 광고물 또는 홍모물을 제공할 사용자의 영상 정보를 획득한다(S1). 사용자가 디스플레이부로부터 일정 범위에 위치하는 경우 영상 촬영부는 사용자 영상을 촬영하며, 광고 제공 서버는 영상 촬영부에서 촬영한 사용자 영상을 수신하여 사용자 영상 정보를 획득한다.
획득한 사용자 영상 정보에서 사용자 인증 정보를 추출하고, 추출한 사용자 인증 정보와 기저장된 사용자 인증 정보를 비교하여 추출한 사용자 인증 정보와 일치하는 기저장된 사용자 인증 정보가 존재하는 경우 촬영한 사용자 영상의 사용자를 인증한다(S2).
사용자 인증 결과에 기초하여 추출한 사용자 인증 정보와 일치하는 기저장된 사용자 인증 정보가 존재하는 경우 사용자 인증 정보에 해당하는 기저장된 사용자 정보를 추출하며(S3), 추출한 사용자 인증 정보와 일치하는 기저장된 사용자 인증 정보가 존재하지 않은 경우 획득한 사용자 영상 정보로부터 직접 사용자 정보를 판단한다(S4). 여기서 광고 제공 서버에 기저장된 사용자 정보는 사용자의 나이, 성별, 가족관계, 주소, 직업, 취미 등 사용자에 관련한 정보를 의미한다. 한편, 광고 제공 서버에서 직접 판단한 사용자 정보는 사용자의 성별, 나이를 의미한다.
추출한 사용자 정보 또는 직접 판단한 사용자 정보를 파싱하고, 파싱한 사용자 정보를 정보 온톨로지에 적용하여 실시간으로 사용자 상황 정보를 판단한다(S5). 여기서 정보 온톨로지란 사용자 정보를 구성하는 각 단어의 의미 정보로부터 생성 가능한 확장된 의미 정보를 생성하기 위해 사용되는 온톨로지로 공용 온톨로지가 사용될 수 있다. 사용자 정보를 구성하는 각 단어를 파싱하고. 파싱한 각 단어의 의미 정보를 정보 온톨로지에 적용하여 각 단어의 의미 단어로부터 확장 가능한 의미로부터 사용자의 상황 정보를 판단한다.
공용(public) 온톨로지는 사용자 정보를 구성하는 각 단어 사이의 관계를 규정하고 각 단어로부터 추론되는 의미 정보를 확장하기 위해 참고되는 정보 온톨로지이다. 예를 들어, 낮/밤, 오전/오후, 요일, 월, 계절, 년도, 휴가, 휴일, 명절 등과 같은 시간 관련 온톨로지, 국가, 도시, 산, 해변, 놀이공원 등과 같은 장소 관련 온톨로지, 여행, 업무, 출장, 신혼여행, 데이트 등과 같은 상황 관련 온톨로지 등이 공용 온톨로지로 사용된다.
사용자 정보 또는 사용자 상황 정보와 광고 메타 정보의 일치 여부, 사용자 정보 또는 사용자 상황 정보와 광고 타겟에 대한 사용자 정보의 유사도 테이블을 이용하여 사용자에 제공할 광고를 결정한다(S6). 사용자 정보 또는 사용자 상황 정보에 일치하는 광고 메타 정보의 광고를 사용자에 제공할 광고로 1차 선택하고, 타겟 정보에 대한 사용자 상황 정보의 유사도 테이블에 따라 광고 선택도를 계산하여 사용자에 제공할 광고를 결정한다.
결정할 광고를 디스플레이부에 출력하기 위한 제어 신호를 광고 서버로 송신하여 사용자에 제공할 광고를 제어한다(S7). 광고 서버는 제어 신호를 수신하고 수신한 제어 신호의 광고 식별자, 디스플레이 식별자 또는 IP주소에 따라 선택한 광고만을 해당 식별자 또는 IP 주소의 디스플레이로 송신한다.
도 3은 본 발명에 따른 사용자 인증 방법의 일 예를 보다 구체적으로 설명하기 위한 흐름도이다.
도 3을 참고로 살펴보면, 획득한 사용자 영상 정보로부터 사용자 얼굴을 인식하는데 사용되는 특징점을 추출한다(S11). 사용자 얼굴을 인식하는데 사용되는 특징점을 추출하기 위하여 사용자 영상 정보로부터 사용자 얼굴 영역을 추출하고 추출한 사용자 얼굴 윤곽에서 사용자를 인증하는데 사용되는 특징점을 추출한다.
사용자 얼굴 영역을 추출하기 위하여 획득한 사용자 영상을 밝기에 영향을 받지 않는 컬러 공간으로 변환하고 피부색을 추출한다. 각각의 피부색으로 구분된 얼굴 후보영역들은 객체화하여 처리한다. 객체화된 영역에서 잡음과 겹쳐진 객체들을 제거한다. 최종적인 얼굴 영역으로 판단하기 위해 추출된 객체의 크기 비율, 피부색의 분포율 등을 검사하며 이 과정에서 얼굴 영역이 아니라고 판단된 객체들은 얼굴 후보 영역에서 제외된다. 본 발명이 적용되는 분야에서 다른 사용자 얼굴 영역 탐색 알고리즘이 사용될 수 있으며 이는 본 발명의 범위에 속한다.
한편, 사용자 영상에서 추출한 사용자 얼굴 영역에서 사용자를 인증하거나 사용자 정보를 판단하는데 사용되는 특징점(FFPs:Facial Feature Points)을 추출한다. 여기서 특징점이란, 사용자 얼굴에서 두 눈 사이의 상대적인 거리, 눈동자의 색, 머리카락 색, 얼굴의 에지 형태, 성별에 따른 얼굴 윤곽 특징, 나이대에 따른 얼굴 윤곽 특징 등을 의미하는 것으로, 다양한 사용자의 얼굴을 구별하기 위하여 사용된다. 본 발명이 적용되는 분야에 따라 특징점을 추출하기 위하여 다양한 알고리즘이 사용될 수 있으며 이는 본 발명의 범위에 속한다.
사용자 영상 정보에서 추출한 특징점과 광고 제공 서버에 기저장되어 있는 사용자의 특징점을 비교하여(S13), 추출한 특징점과 일치하는 사용자의 특징점이 광고 제공 서버에 존재하는지 판단한다(S15). 판단 결과 추출한 특징점에 일치하는 사용자의 특징점이 광고 제공 서버에 존재하는 경우, 획득한 사용자 영상 정보의 사용자를 인증한다(S17). 사용자 인증시 광고 제공 서버에 저장되어 있는, 인증한 사용자에 해당하는 사용자 정보를 이용하여 사용자 상황 정보를 판단한다. 그러나 판단 결과 추출한 특징점에 일치하는 사용자의 특징점이 광고 제공 서버에 존재하지 않은 경우, 사용자 영상 정보의 사용자를 인증하지 못한다(S19). 사용자를 인증하지 못한 경우 획득한 사용자 영상 정보만을 이용하여 나이, 성별의 사용자 정보를 판단한다.
사용자 영상 정보로부터 나이, 성별의 사용자 정보를 판단하기 위하여, 사용자 인증 서버는 추출한 특징점과 기저장된 성별 또는 나이별 얼굴 특징점을 비교하여 사용자의 나이 또는 성별에 대한 사용자 정보를 판단한다.
도 4는 사용자 인증 성공시 정보 온톨로지를 이용하여 판단한 사용자 상황 정보의 일 예를 도시하고 있으며, 도 5는 사용자 인증 실패시 정보 온톨로지를 이용하여 판단한 사용자 상황 정보의 일 예를 도시하고 있다.
도 4를 참고로 살펴보면, "홍길동"이라는 사용자를 인증하는 경우 광고 제공 서버는 사용자 인증 서버에 기저장되어 있는 사용자 정보를 수신하고 수신한 사용자 정보에 기초하여 정보 온톨로지를 이용하여 사용자 상황 정보를 판단한다. 예를 들어 사용자 인증 서버로부터 수신한 "홍길동"이라는 사용자의 정보가 남자, 40살, 전문직, 강남에 거주, 결혼, 1남 1녀이며 현재 날짜가 2010년 5월 3일인 경우, 전문직, 강남 거주라는 사용자 정보를 정보 온톨로지에 적용하여 중산층이라는 사용자 상황 정보를 판단하고, 현재 날짜와 결혼, 1남 1녀, 40대라는 사용자 정보를 정보 온톨로지에 적용하여 봄 또는 어린이날이라는 사용자 상황 정보를 판단한다. 위와 같이 사용자 정보로부터 사용자 상황 정보를 판단하거나 사용자 정보와 판단한 사용자 상황 정보로부터 다시 확대된 사용자 상황 정보를 판단한다.
도 5를 참고로 살펴보면, 사용자를 인증하지 못한 경우 사용자의 영상 정보로부터 직접 판단한 나이, 성별과 같은 사용자 정보만을 정보 온톨로지에 적용하여 사용자 상황 정보를 판단한다. 예를 들어 사용자 인증 서버에서 판단한 사용자 정보가 남자, 40대인 경우, 현재 날짜(2010년 5월 3일)를 정보 온톨로지에 적용하여 봄, 어린이날, 연휴라는 사용자 상황 정보를 판단하거나, 현재 위치(강원도 속도 설악콘도)를 정보 온톨로지에 적용하여 휴가라는 사용자 상황 정보를 판단한다.
광고 제어 서버는 사용자 인증 서버에서 추출한 사용자 정보 또는 사용자 인증 서버에서 직접 판단한 사용자 정보 또는 사용자 정보를 정보 온톨로지에 적용하여 판단한 사용자 상황 정보를 광고 서버에 저장되어 있는 광고 메타 정보와 비교하고, 광고주가 설정한 광고 타겟에 대한 사용자 정보 또는 사용자 상황 정보의 유사도 테이블에 기초하여 선택도를 계산하여 사용자에 제공할 광고를 결정한다.
도 6은 사용자 정보 또는 사용자 상황 정보에 기초하여 사용자에 제공할 광고를 선택하는 방법의 일 예를 보다 구체적으로 설명하기 위한 흐름도이며, 도 7은 광고주가 설정한 사용자 정보 또는 사용자 상황 정보의 유사도 테이블의 일 예를 도시하고 있다.
도 6과 도 7을 참고로 살펴보면, 광고 서버에 기저장되어 있는 광고 메타 정보를 검색하고(S21), 사용자 정보 또는 사용자 상황 정보와 광고 메타 정보를 서로 비교하여 사용자 정보 또는 사용자 상황 정보와 일치하는 광고 메타 정보를 가지는 광고를 검색한다(S23). 사용자 정보 또는 사용자 상황 정보와 일치하는 광고 메타 정보를 가지는 광고를 사용자에 제공할 1차 광고로 선택한다.
1차 선택한 광고의 광고 메타 정보 중 광고주가 설정한 사용자 정보 또는 사용자 상황 정보의 유사도 테이블과 판단한 사용자 정보 또는 사용자 상황 정보를 이용하여 1차 선택한 광고의 선택도(S(i))를 계산한다(S25). 바람직하게 광고주가 설정한 사용자 정보 또는 사용자 상황 정보에 대한 유사도 테이블은 광고 서버에 광고 메타 정보와 통합되어 또는 별도로 저장되어 있다.
여기서 광고 메타 정보란 광고주가 설정한 광고물에 대한 색인어로, 사용자가 검색하고자 하는 광고물 또는 홍보물의 색인어, 광고주가 광고하고자 하는 타겟 사용자 색인어 등이 사용될 수 있다. 예를 들어, "어린이날", "장난감"과 같이 사용자가 검색하고자 하는 광고물 또는 홍보물의 색인어나 "중산층, 상류층", "강남, 압구정, 서초, 잠실, 분당", "20대에서 40대"와 같이 광고주가 광고하고자 하는 타겟 사용자 색인어가 사용될 수 있다.
한편, 사용자 정보 또는 사용자 상황 정보의 유사도 테이블은 사용자 정보 또는 사용자 상황 정보에 따라 광고주가 다양하게 설정할 수 있는 타겟 사용자의 유사도 값으로, "어린이날" 또는 "장난감"이라는 광고 메타 정보를 가지는 광고 중에서도 광고주가 공략 대상으로 하는 타겟 사용자에게만 광고하기 위한 정보로 사용된다. 예를 들어, 중산층, 상류층이라는 사용자 상황 정보에 일치하는 사용자라도 상류층과 중산층으로 세분하여 광고주가 공략 대상으로 하는 생활 수준의 사용자에게 서로 다른 유사도 값을 설정하거나, 강남, 압구정, 서초, 잠실, 분당이라는 사용자 정보에 일치하는 사용자라도 광고주가 공략 대상으로 하는 지역에 거주하는 사용자에게 서로 다른 유사도 값을 설정하거나, 20대에서 40대라는 사용자 정보에 일치하는 사용자라도 20에서 25살, 25살에서 30살, 31살에서 35살, 36살에서 40살로 세분하여 광고주가 공략 대상으로 하는 나이의 사용자에게 서로 다른 유사도 값을 설정한다.
바람직하게, 1차 선택한 광고의 선택도(S(i))는 아래의 수학식(1)과 같이 계산된다.
[수학식 1]
Figure 112010030884716-pat00001
여기서 a, b,...는 광고주가 타겟으로 하는 사용자 정보 또는 사용자 상황 정보이며, α1, α2,..는 각 사용자 정보 또는 사용자 상황 정보에 대한 가중치이며, β1, β2,...는 광고주가 설정한 각 사용자 정보 또는 사용자 상황 정보에 대한 유사도 값이다.
1차 선택한 광고의 선택도를 계산하여 계산한 선택도가 임계값(TH)을 초과하는지 판단하여(S26), 1차 선택한 광고 중 선택도가 임계값을 초과하는 광고를 사용자에 제공할 광고로 선택하며(S27), 1차 선택한 광고 중 선택도가 임계값을 초과하지 않는 광고는 사용자에 제공할 광고에서 제외시킨다(S28). 선택한 광고의 리스트를 광고 서버로 제공하여 선택한 광고만을 사용자에 제공하도록 제어한다(S29). 바람직하게, 광고 제어 서버는 선택한 광고의 식별자와 제공할 사용자의 디스플레이 주소, 위치를 나타내는 식별자를 포함하는 제어 신호를 생성하며, 생성한 제어 신호를 광고 서버로 송신한다.
한편, 상술한 본 발명의 실시 예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성 가능하고, 컴퓨터로 읽을 수 있는 기록 매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.
상기 컴퓨터로 읽을 수 있는 기록 매체는 마그네틱 저장 매체(예를 들어, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장 매체를 포함한다.
본 발명은 도면에 도시된 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호 범위는 첨부된 등록청구범위의 기술적 사상에 의해 정해져야 할 것이다.
10: 디스플레이부 20: 영상 촬영부
30: 네트워크 40: 사용자 인증 서버
50: 광고 제공 서버 60: 광고 서버

Claims (10)

  1. 광고 제공 시스템에서 사용자에 광고를 제공하는 방법에 있어서,
    사용자 인증 서버에서 사용자의 영상 정보에 기초하여 판단한 사용자 정보를 파싱하여 사용자 정보의 의미 정보를 판단하고, 판단한 사용자 정보의 의미 정보를 정보 온톨로지에 적용하여 사용자 정보로부터 의미 확장된 사용자 상황 정보를 획득하는 단계;
    광고 제공 서버에서 상기 사용자 정보 또는 사용자 상황 정보와 광고 서버에 기저장되어 있는 광고의 메타 정보를 비교하여 상기 사용자 상황 정보와 일치하는, 사용자 기반의 광고를 1차 선택하는 단계;
    상기 광고 서버에서 상기 1차 선택한 광고의, 상기 광고 서버에 기저장되어 있는 광고주 타겟 정보의 각 목표 사용자 정보와 상기 사용자 정보 또는 사용자 상황 정보를 비교하고 상기 사용자 정보 또는 사용자 상황 정보에 매핑되어 있는 상기 각 목표 사용자 정보의 유사도값 조합으로부터 상기 1차 선택한 광고의 광고자 기반의 선택도를 계산하는 단계; 및
    상기 광고 제공 서버에서 상기 광고자 기반의 선택도가 임계값을 초과하는지 판단하여 상기 임계값을 초과하는 상기 1차 선택한 광고를 사용자에 제공할 광고로 선택하고 상기 선택한 광고를 사용자에 제공하는 단계를 포함하는 것을 특징으로 하는 광고 제공 방법.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 사용자 정보는 사용자의 나이, 성별, 주소, 직업, 결혼 여부, 취미 중 적어도 어느 하나인 것을 특징으로 하는 광고 제공 방법.
  4. 삭제
  5. 삭제
  6. 삭제
  7. 삭제
  8. 제 1 항에 있어서,
    상기 1차 선택한 광고의 광고주 기반의 선택도(S(i))는 아래의 수학식(1)에 따라 계산되며
    [수학식 1]
    Figure 112011089287325-pat00002

    여기서 a, b,...는 상기 광고주 타겟 정보의 목표 사용자 정보이며, α1, α2,..는 광고주 타겟 정보의 각 목표 사용자 정보에 대한 가중치이며, β1, β2,...는 광고주 타겟 정보의 각 목표 사용자 정보에 대한 유사도 값인 것을 특징으로 하는 광고 제공 방법.
  9. 제 8 항에 있어서, 상기 사용자에 제공할 광고는
    상기 계산한 선택도가 높은 순서로 차례로 사용자에 출력되는 것을 특징으로 하는 광고 제공 방법.
  10. 삭제
KR1020100045036A 2010-05-13 2010-05-13 사용자 얼굴 인식을 통한 개인화 광고 방법 KR101308179B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100045036A KR101308179B1 (ko) 2010-05-13 2010-05-13 사용자 얼굴 인식을 통한 개인화 광고 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100045036A KR101308179B1 (ko) 2010-05-13 2010-05-13 사용자 얼굴 인식을 통한 개인화 광고 방법

Publications (2)

Publication Number Publication Date
KR20110125484A KR20110125484A (ko) 2011-11-21
KR101308179B1 true KR101308179B1 (ko) 2013-09-16

Family

ID=45394925

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100045036A KR101308179B1 (ko) 2010-05-13 2010-05-13 사용자 얼굴 인식을 통한 개인화 광고 방법

Country Status (1)

Country Link
KR (1) KR101308179B1 (ko)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010135001A2 (en) 2009-05-21 2010-11-25 Intertrust Technologies Corporation Content delivery systems and methods
IN2015KN00242A (ko) 2012-07-20 2015-06-12 Intertrust Tech Corp
KR101379373B1 (ko) * 2013-09-05 2014-04-22 (주)유앤아이미디어 안면 인식 센서를 이용한 제품 광고 방법
WO2020141969A2 (en) * 2018-12-31 2020-07-09 Mimos Berhad System and method for providing advertisement contents based on facial analysis

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040013951A (ko) * 2002-08-09 2004-02-14 (주)워치비젼 얼굴 인식에 기반한 사용자 식별장치 및 방법과 사용자식별장치를 이용한 정보 제공 제한시스템
KR20070009267A (ko) * 2005-07-15 2007-01-18 주식회사 케이티 유비쿼터스 환경 기반의 상황정보 관리 장치 및 그 방법
KR20090006464A (ko) * 2007-07-11 2009-01-15 성균관대학교산학협력단 사용자 맞춤형 컨텐츠 제공 장치, 그 방법 및 기록매체

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040013951A (ko) * 2002-08-09 2004-02-14 (주)워치비젼 얼굴 인식에 기반한 사용자 식별장치 및 방법과 사용자식별장치를 이용한 정보 제공 제한시스템
KR20070009267A (ko) * 2005-07-15 2007-01-18 주식회사 케이티 유비쿼터스 환경 기반의 상황정보 관리 장치 및 그 방법
KR20090006464A (ko) * 2007-07-11 2009-01-15 성균관대학교산학협력단 사용자 맞춤형 컨텐츠 제공 장치, 그 방법 및 기록매체

Also Published As

Publication number Publication date
KR20110125484A (ko) 2011-11-21

Similar Documents

Publication Publication Date Title
US20190197789A1 (en) Systems & Methods for Variant Payloads in Augmented Reality Displays
US9558397B2 (en) Method and apparatus for automated analysis and identification of a person in image and video content
US9471936B2 (en) Web identity to social media identity correlation
US9324006B2 (en) System and method for displaying contextual supplemental content based on image content
US9916386B2 (en) Method and apparatus for presenting search result
KR102197098B1 (ko) 콘텐츠 추천 방법 및 장치
TW201018298A (en) Data access based on content of image recorded by a mobile device
CN108960892B (zh) 信息处理方法及装置、电子设备及存储介质
KR20160044902A (ko) 방송 콘텐트와 관련한 부가 정보 제공 방법 및 이를 구현하는 전자 장치
CN105159913B (zh) 一种待清理文件确定方法及装置
KR101308179B1 (ko) 사용자 얼굴 인식을 통한 개인화 광고 방법
WO2017166472A1 (zh) 广告数据匹配方法、装置及系统
US20220343625A1 (en) Systems and methods for determining whether to modify content
US20240220537A1 (en) Metadata tag identification
JP2020057221A (ja) 情報処理方法、情報処理装置及びプログラム
CN108573056B (zh) 内容数据处理方法、装置、电子设备及存储介质
KR102163125B1 (ko) 해시태그 기반 이미지 콘테스트를 통한 마케팅 방법
US11514337B1 (en) Logo detection and processing data model
JP6805911B2 (ja) 広告出力装置、広告出力方法及び広告出力プログラム
KR101334127B1 (ko) 클라이언트 단말기를 이용한 동영상 콘텐츠 공유 서비스 제공 시스템 및 방법
US20210183123A1 (en) Method and System for Providing Multi-Dimensional Information Using Card
KR20150111524A (ko) 광고 제공 장치 및 방법
CN116955772A (zh) 一种数据处理方法及相关装置
KR20150081395A (ko) 효율적인 광고 서비스를 제공하는 방법
KR20150110853A (ko) 광고 제공 장치 및 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application
J201 Request for trial against refusal decision
J301 Trial decision

Free format text: TRIAL DECISION FOR APPEAL AGAINST DECISION TO DECLINE REFUSAL REQUESTED 20120521

Effective date: 20130823

S901 Examination by remand of revocation
GRNO Decision to grant (after opposition)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160823

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20170627

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20180809

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190909

Year of fee payment: 7