KR20220040033A - Method and apparatus for analyzing advertisement effect - Google Patents

Method and apparatus for analyzing advertisement effect Download PDF

Info

Publication number
KR20220040033A
KR20220040033A KR1020200122742A KR20200122742A KR20220040033A KR 20220040033 A KR20220040033 A KR 20220040033A KR 1020200122742 A KR1020200122742 A KR 1020200122742A KR 20200122742 A KR20200122742 A KR 20200122742A KR 20220040033 A KR20220040033 A KR 20220040033A
Authority
KR
South Korea
Prior art keywords
information
identification information
event
advertisement
user
Prior art date
Application number
KR1020200122742A
Other languages
Korean (ko)
Other versions
KR102483200B1 (en
Inventor
오희령
이은조
조만재
Original Assignee
주식회사 엔씨소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엔씨소프트 filed Critical 주식회사 엔씨소프트
Priority to KR1020200122742A priority Critical patent/KR102483200B1/en
Publication of KR20220040033A publication Critical patent/KR20220040033A/en
Application granted granted Critical
Publication of KR102483200B1 publication Critical patent/KR102483200B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0242Determining effectiveness of advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0273Determination of fees for advertising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement

Landscapes

  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

Disclosed are an advertisement effect analysis method and a device thereof. An advertisement effect analysis method according to an embodiment comprises the steps of: obtaining event information including device identification information of each of a plurality of user devices in which an application installation event is generated through an application installation advertisement; obtaining service connection information including user identification information of each of a plurality of users who accessed a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service; and identifying the user identification information of each user associated with one or more events related to the installation event among the plurality of users accessing the service, based on the event information and the service access information. According to the present invention, more effective analysis of the application installation advertisement is possible.

Description

광고 효과 분석 방법 및 장치{METHOD AND APPARATUS FOR ANALYZING ADVERTISEMENT EFFECT}ADVERTISEMENT EFFECT METHOD AND APPARATUS FOR ANALYZING ADVERTISEMENT EFFECT

개시되는 실시예들은 광고 효과 분석 기술과 관련된다.The disclosed embodiments relate to advertising effectiveness analysis techniques.

일반적으로 애플리케이션 설치 광고와 같이 온라인 상에서 제공되는 온라인 광고는 광고주로부터 광고를 의뢰 받은 광고 대행 업체가 온라인 광고 매체를 통해 온라인 광고를 제공하는 방식으로 수행된다. 또한, 광고 대행 업체로 지급되는 광고비의 책정과 광고 대행 업체에 의해 제공된 온라인 광고에 대한 효과 분석은 온라인 광고에 반응한 사용자들의 사용자 장치로부터 수집된 광고 아이디에 기초하여 수행되고 있다.In general, online advertisements provided online, such as application installation advertisements, are performed in such a way that an advertisement agency that receives an advertisement request from an advertiser provides online advertisements through an online advertisement medium. In addition, the determination of the advertising cost paid to the advertising agency and the analysis of the effectiveness of the online advertisement provided by the advertising agency are performed based on the advertisement IDs collected from the user devices of users who responded to the online advertisement.

그러나, 사용자 장치로부터 수집되는 광고 아이디는 그 자체로 온라인 광고를 통해 실제 서비스에 유입된 사용자와 직접적인 연관관계를 가지는 것은 아니며, 사용자에 의해 변경 가능한 값이므로, 광고 아이디만으로 광고비를 책정하거나 온라인 광고에 대한 효과 분석을 수행하는 것에는 한계가 존재한다.However, the advertisement ID collected from the user device itself does not have a direct relationship with the user who entered the service through the online advertisement and is a value that can be changed by the user. There is a limit to performing an effect analysis on the

개시되는 실시예들은 광고 효과 분석 방법 및 장치를 제공하기 위한 것이다.Disclosed embodiments are to provide an advertisement effect analysis method and apparatus.

일 실시예에 따른 광고 성과 분석 방법은, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하는 동작; 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하는 동작; 및 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 동작을 포함한다.An advertisement performance analysis method according to an embodiment includes: acquiring event information including device identification information of each of a plurality of user devices in which an application installation event is generated through an application installation advertisement; Obtaining service connection information including user identification information of each of a plurality of users who accessed a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service ; and identifying user identification information of one or more event-related users related to the installation event among a plurality of users accessing the service based on the event information and the service access information.

상기 장치 식별 정보는, 광고 아이디일 수 있다.The device identification information may be an advertisement ID.

상기 광고 성과 분석 방법은, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및 상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 동작을 더 포함할 수 있다.The advertisement performance analysis method may include: acquiring activity information of each of the one or more event-related users for the service, based on user identification information of each of the one or more event-related users; and generating analysis information on the application installation advertisement based on the activity information.

상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작; 상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하는 동작; 및 상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 동작을 포함할 수 있다.The identifying may include, based on the service connection information, first mapping information including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users creating an action; identifying one or more device identification information commonly included in the event information and the service access information; and identifying, based on the first mapping information, user identification information corresponding to each of the one or more device identification information as user identification information of each of the one or more event-related users.

상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고, 상기 식별하는 동작은, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The event information further includes medium identification information on an online advertisement medium that caused the installation event in each of the plurality of user devices among one or more online advertisement media providing the application installation advertisement, wherein the identifying operation includes: based on the event information and the service access information, identify user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users among the one or more online advertising media; can

상기 광고 성과 분석 방법은, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 동작을 더 포함할 수 있다.The advertisement performance analysis method may include: acquiring activity information of each of the one or more event-related users for the service, based on user identification information of each of the one or more event-related users; and generating analysis information for each of the one or more online advertising media based on the activity information and the medium identification information of the online advertising media associated with each of the one or more event-related users.

상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작; 상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하는 동작; 및 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 동작을 포함할 수 있다.The identifying may include, based on the service connection information, first mapping information including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users creating an action; generating second mapping information including a correspondence relationship between medium identification information of each of the one or more online advertisement media and device identification information of each of the plurality of user devices based on the event information; and identifying, based on the first mapping information and the second mapping information, user identification information of each of the one or more event-related users and media identification information of an online advertising medium associated with each of the one or more event-related users. can do.

상기 광고 성과 분석 방법은, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 동작을 더 포함할 수 있다.The method for analyzing advertisement performance may further include detecting, based on the first mapping information and the second mapping information, an online advertisement medium in which advertisement abusing is suspected from among the one or more advertisement mediums.

일 실시예에 따른 광고 성과 분석 장치는, 하나 이상의 하드웨어 프로세서; 및 하나 이상의 통신 인터페이스를 포함하고, 상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 통신 인터페이스를 통해, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하고, 상기 하나 이상의 통신 인터페이스를 통해, 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하고, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다.Ad performance analysis apparatus according to an embodiment, one or more hardware processors; and one or more communication interfaces, wherein the one or more hardware processors include device identification information of each of a plurality of user devices in which an application installation event is generated through an application installation advertisement through the one or more communication interfaces. a device of a user device used by each of the plurality of users to access the service and user identification information of each of a plurality of users accessing the service provided through the application through the one or more communication interfaces Acquire service access information including identification information, and identify user identification information of each of one or more event-related users associated with the installation event among a plurality of users accessing the service based on the event information and the service access information do.

상기 장치 식별 정보는, 광고 아이디일 수 있다.The device identification information may be an advertisement ID.

상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고, 상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성할 수 있다.The one or more hardware processors are configured to obtain, based on user identification information of each of the one or more event-related users, activity information of each of the one or more event-related users for the service, and based on the activity information, the application installation advertisement analysis information can be generated.

상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고, 상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하고, 상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별할 수 있다.The one or more hardware processors are configured to: a first mapping including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users based on the service connection information generating information, identifying one or more device identification information commonly included in the event information and the service access information, and generating user identification information corresponding to each of the one or more device identification information based on the first mapping information Each of the one or more event-related users may be identified by user identification information.

상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고, 상기 하나 이상의 하드웨어 프로세서는, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The event information further includes medium identification information on an online advertisement medium that caused the installation event in each of the plurality of user devices among one or more online advertisement media providing the application installation advertisement, wherein the one or more hardware processors include: , based on the event information and the service access information, identify user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users among the one or more online advertising media can do.

상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고, 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성할 수 있다.The one or more hardware processors are configured to obtain, based on the user identification information of each of the one or more event-related users, activity information of each of the one or more event-related users for the service, and to obtain online information associated with each of the one or more event-related users. Based on the medium identification information and the activity information of the advertisement medium, it is possible to generate analysis information for each of the one or more online advertisement medium.

상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고, 상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하고, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The one or more hardware processors are configured to: a first mapping including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users based on the service connection information generating information, and generating, based on the event information, second mapping information including a correspondence relationship between the medium identification information of each of the one or more online advertisement media and the device identification information of each of the plurality of user devices; Based on the first mapping information and the second mapping information, user identification information of each of the one or more event-related users and medium identification information of an online advertisement medium associated with each of the one or more event-related users may be identified.

상기 하나 이상의 하드웨어 프로세서는, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지할 수 있다.The one or more hardware processors may detect, based on the first mapping information and the second mapping information, an online advertisement medium suspected of being advertisement abusing among the one or more advertisement mediums.

개시되는 실시예들에 따르면, 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 중 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 사용자 장치와 연관된 사용자를 식별 가능하도록 함으로써, 애플리케이션 설치 광고에 대한 보다 효과적인 분석이 가능하게 된다.According to the disclosed embodiments, by enabling identification of a user associated with a user device in which an application installation event occurred through an application installation advertisement among a plurality of users accessing a service provided through an application, more information about the application installation advertisement Effective analysis is possible.

도 1은 일 실시예에 따른 광고 효과 분석을 위한 시스템 환경의 일 예를 나타낸 도면이다.
도 2는 일 실시예에 따른 광고 분석 장치의 구성도이다.
도 3은 일 실시예에 따른 제1 맵핑 정보의 일 예를 나타낸 도면이다.
도 4는 일 실시예에 따른 제2 맵핑 정보의 일 예를 나타낸 도면이다.
도 5는 일 실시예에 따른 제3 맵핑 정보의 일 예를 나타낸 도면이다.
도 6 내지 도 8은 일 실시예에 따라 분석부에 의해 생성되는 분석 정보의 일 예를 나타낸 도면이다.
도 9는 일 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 10은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 11은 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하기 위한 방법의 순서도이다.
도 12는 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 13은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 14는 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보 및 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하기 위한 방법의 순서도이다.
도 15는 일 실시예에 따른 광고 어뷰징 탐지 방법의 순서도이다.
도 16은 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다.
1 is a diagram illustrating an example of a system environment for analyzing an advertisement effect according to an embodiment.
2 is a block diagram of an advertisement analysis apparatus according to an embodiment.
3 is a diagram illustrating an example of first mapping information according to an embodiment.
4 is a diagram illustrating an example of second mapping information according to an embodiment.
5 is a diagram illustrating an example of third mapping information according to an embodiment.
6 to 8 are diagrams illustrating an example of analysis information generated by an analysis unit according to an exemplary embodiment.
9 is a flowchart of an advertisement effect analysis method according to an exemplary embodiment.
10 is a flowchart of an advertisement effect analysis method according to an additional exemplary embodiment.
11 is a flowchart of a method for identifying user identification information of each event-related user according to an embodiment.
12 is a flowchart of an advertisement effect analysis method according to an additional embodiment.
13 is a flowchart of an advertisement effect analysis method according to an additional exemplary embodiment.
14 is a flowchart of a method for identifying user identification information of each event-related user and medium identification information of an online advertisement medium associated with each event-related user, according to an embodiment.
15 is a flowchart of a method for detecting advertisement abusing according to an embodiment.
16 is a block diagram illustrating and explaining a computing environment including a computing device according to an embodiment.

이하, 도면을 참조하여 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.Hereinafter, specific embodiments will be described with reference to the drawings. The following detailed description is provided to provide a comprehensive understanding of the methods, devices, and/or systems described herein. However, this is only an example, and the present invention is not limited thereto.

실시예들을 설명함에 있어서, 관련된 공지기술에 대한 구체적인 설명이 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.In describing the embodiments, if it is determined that a detailed description of a related known technology may unnecessarily obscure the subject matter, the detailed description thereof will be omitted. In addition, the terms to be described later are terms defined in consideration of functions, which may vary according to intentions or customs of users and operators. Therefore, the definition should be made based on the content throughout this specification. The terminology used in the detailed description is for the purpose of describing the embodiments only, and should in no way be limiting. Unless explicitly used otherwise, expressions in the singular include the meaning of the plural. In this description, expressions such as “comprising” or “comprising” are intended to indicate certain features, numbers, steps, acts, elements, some or a combination thereof, one or more other than those described. It should not be construed to exclude the presence or possibility of other features, numbers, steps, acts, elements, or any part or combination thereof.

도 1은 일 실시예에 따른 광고 효과 분석을 위한 시스템 환경의 일 예를 나타낸 도면이다.1 is a diagram illustrating an example of a system environment for analyzing an advertisement effect according to an embodiment.

도 1을 참조하면, 일 실시예에 따른 시스템 환경(100)은 사용자 장치(110), 온라인 광고 매체(120), 광고 트래킹 장치(130), 사용자 정보 제공 장치(140) 및 광고 효과 분석 장치(150)를 포함한다.Referring to FIG. 1 , the system environment 100 according to an embodiment includes a user device 110 , an online advertisement medium 120 , an advertisement tracking device 130 , a user information providing device 140 , and an advertisement effect analysis device ( 150).

사용자 장치(110)는 애플리케이션 설치 광고를 통해 광고되는 애플리케이션(이하, '광고 대상 애플리케이션')의 설치 대상이 되는 장치이다. 일 실시예에서, 사용자 장치(110)는 스마트폰, 태블릿 PC, 패블릿(phablet) 등과 같이 사용자가 소지하여 이동 가능한 모바일 디바이스일 수 있다. 그러나, 사용자 장치(110)는 애플리케이션 설치 광고를 통한 광고 대상 애플리케이션의 설치 및 실행이 가능하며, 후술할 바와 같이 사용자 장치(110)를 고유하게 식별할 수 있는 장치 식별자가 할당되어 있는 다양한 형태의 장치일 수 있으며, 반드시 특정한 형태의 장치로 한정되는 것은 아니다. The user device 110 is a device that is an installation target of an application advertised through an application installation advertisement (hereinafter, an 'advertisement target application'). In an embodiment, the user device 110 may be a mobile device that the user carries and can move, such as a smart phone, a tablet PC, or a phablet. However, the user device 110 can install and execute an advertisement target application through an application installation advertisement, and as will be described later, various types of devices to which a device identifier capable of uniquely identifying the user device 110 is assigned. may be, and is not necessarily limited to a specific type of device.

한편, 도 1에 도시된 예에서는 설명의 편의를 위해 사용자 장치(110)가 하나인 것으로 예시하고 있으나, 사용자 장치(110)의 개수는 실시예에 따라 변경될 수 있으며 반드시 특정한 개수로 한정되는 것은 아니다.Meanwhile, in the example shown in FIG. 1 , one user device 110 is exemplified for convenience of explanation, but the number of user devices 110 may be changed according to the embodiment and is necessarily limited to a specific number. not.

온라인 광고 매체(120)는 온라인 상에서 사용자 장치(110)로 제공되는 화면을 통해 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 광고 매체를 의미할 수 있다. 예를 들어, 온라인 광고 매체(120)는 소셜 네트워크 서비스, 동영상 서비스, 온라인 게임 서비스, 모바일 게임 서비스, 온라인 상거래 서비스, 메신저 서비스 등과 같이 온라인 상에서 특정한 서비스를 제공하는 웹 사이트 또는 전용 애플리케이션일 수 있다. The online advertisement medium 120 may refer to an advertisement medium that provides an application installation advertisement for an advertisement target application through a screen provided to the user device 110 online. For example, the online advertisement medium 120 may be a website or a dedicated application that provides a specific service online, such as a social network service, a video service, an online game service, a mobile game service, an online commerce service, a messenger service, and the like.

한편, 도 1에 도시된 예에서는 설명의 편의를 위해 온라인 광고 매체(120)가 하나인 것으로 예시하고 있으나, 온라인 광고 매체(120)의 개수는 실시예에 따라 변경될 수 있으며 반드시 특정한 개수로 한정되는 것은 아니다.Meanwhile, in the example shown in FIG. 1 , one online advertisement medium 120 is exemplified for convenience of explanation, but the number of online advertisement medium 120 may be changed according to the embodiment and must be limited to a specific number. it is not going to be

애플리케이션 설치 광고는 온라인 광고 매체(120)를 통해 애플리케이션 설치 광고에 노출된 사용자가 광고 대상 애플리케이션을 사용자 장치(110)에 설치하도록 유도하기 위한 광고를 의미할 수 있다. 예를 들어, 애플리케이션 설치 광고는 온라인 광고 매체(120)에 의해 사용자 장치(110)로 제공되는 화면 상에 텍스트 광고, 배너 광고, 팝업 광고, 동영상 광고 등과 같이 텍스트, 이미지 및 동영상 중 적어도 하나가 결합된 형태로 표시될 수 있다.The application installation advertisement may refer to an advertisement for inducing the user exposed to the application installation advertisement through the online advertisement medium 120 to install the advertisement target application on the user device 110 . For example, in the application installation advertisement, at least one of text, an image, and a video is combined, such as a text advertisement, a banner advertisement, a pop-up advertisement, a video advertisement, etc. on the screen provided to the user device 110 by the online advertisement medium 120 . may be displayed in the form

광고 트래킹 장치(130)는 온라인 광고 매체(120)를 통해 사용자 장치(110)로 제공되는 애플리케이션 설치 광고와 연관된 다양한 정보를 수집하기 위한 장치이다.The advertisement tracking device 130 is a device for collecting various information related to application installation advertisements provided to the user device 110 through the online advertisement medium 120 .

일 실시예에 따르면, 애플리케이션 설치 광고는 애플리케이션 설치 광고에 반응한 사용자의 사용자 장치(110)가 광고 트래킹 장치(130)로 접속되도록 할 수 있다. 이 경우, 광고 트래킹 장치(130)는 애플리케이션 설치 광고를 통해 광고 트래킹 장치(130)에 접속한 사용자 장치(110)로부터 하나 이상의 정보를 수집한 후, 광고 대상 애플리케이션을 다운로드할 수 있는 사전 설정된 목적지로 사용자 장치(110)를 리다이렉트(redirect) 할 수 있다. 이때, 사전 설정된 목적지는 예를 들어, 구글 플레이(Google Play), 애플 앱 스토어(Apple App Store) 등과 같은 애플리케이션 유통 플랫폼 내에서 광고 대상 애플리케이션에 대한 다운로드를 제공하는 페이지일 수 있다.According to an embodiment, the application installation advertisement may allow the user device 110 of the user responding to the application installation advertisement to be connected to the advertisement tracking device 130 . In this case, the advertisement tracking device 130 collects one or more pieces of information from the user device 110 connected to the advertisement tracking device 130 through the application installation advertisement, and then to a preset destination where the advertisement target application can be downloaded. The user device 110 may be redirected. In this case, the preset destination may be, for example, a page providing a download for an advertisement target application within an application distribution platform such as Google Play or Apple App Store.

구체적인 예로, 애플리케이션 설치 광고에는 경유지 주소, 목적지 주소 및 사용자 장치(110)로부터 수집할 하나 이상의 정보 각각에 대응되는 파라미터를 포함하는 트래킹 URL(tracking Uniform Resource Location)이 설정될 수 있다. 이 경우, 사용자 장치(110)의 사용자가 애플리케이션 설치 광고에 대한 클릭, 터치 등과 같은 조작을 통해 애플리케이션 설치 광고에 반응한 경우, 사용자 장치(110)는 트래킹 URL에 포함된 각 파라미터에 대응되는 정보를 트래킹 URL에 추가할 수 있다. 또한, 사용자 장치(110)는 트래킹 URL에 포함된 경유지 주소인 광고 트래킹 장치(130)로 접속하여 트래킹 URL을 제공할 수 있다. 이후, 광고 트래킹 장치(130)는 트래킹 URL에 추가된 정보를 수집한 후, 사용자 장치(110)를 트래킹 URL에 포함된 목적지 주소로 리다이렉트할 수 있다.As a specific example, a tracking uniform resource location (URL) including parameters corresponding to a stopover address, a destination address, and one or more pieces of information to be collected from the user device 110 may be set in the application installation advertisement. In this case, when the user of the user device 110 responds to the application installation advertisement through manipulation such as a click or touch on the application installation advertisement, the user device 110 provides information corresponding to each parameter included in the tracking URL. You can add it to your tracking URL. In addition, the user device 110 may provide a tracking URL by accessing the advertisement tracking device 130 that is a stopover address included in the tracking URL. Thereafter, the advertisement tracking device 130 may redirect the user device 110 to a destination address included in the tracking URL after collecting information added to the tracking URL.

한편, 일 실시예에 따르면, 광고 트래킹 장치(130)에 접속한 사용자 장치(110)부터 수집되는 하나 이상의 정보는 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. 이때, 장치 식별 정보는 예를 들어, GAID(Google Advertising ID), IDFA(ID For Advertisers) 등과 같이 광고를 목적으로 사용자 장치(110)를 고유하게 식별하기 위해 사용자 장치(110)에 할당된 광고 아이디(Advertising ID, ADID)일 수 있다. 그러나, 장치 식별 정보는 반드시 광고 아이디에 한정되는 것은 아니며, 실시예에 따라 사용자 장치(110)로부터 획득 가능하며 사용자 장치(110)를 고유하게 식별하기 위해 사용될 수 있는 다양한 종류의 정보가 사용자 장치(110)의 장치 식별 정보로 이용될 수 있다. Meanwhile, according to an embodiment, one or more pieces of information collected from the user device 110 accessing the advertisement tracking device 130 may include device identification information of the user device 110 . In this case, the device identification information is, for example, an advertisement ID assigned to the user device 110 to uniquely identify the user device 110 for advertising purposes, such as GAID (Google Advertising ID), IDFA (ID For Advertisers), etc. (Advertising ID, ADID). However, the device identification information is not necessarily limited to the advertisement ID, and according to embodiments, various types of information obtainable from the user device 110 and used to uniquely identify the user device 110 include the user device ( 110) may be used as device identification information.

추가적인 실시예에 따르면, 광고 트래킹 장치(130)에 접속한 사용자 장치(110)로부터 수집되는 하나 이상의 정보는 사용자 장치(110)로 애플리케이션 설치 광고를 제공한 온라인 광고 매체(120)의 매체 식별 정보를 더 포함할 수 있다. 이때, 매체 식별 정보는 예를 들어, 온라인 광고 매체(120)의 명칭일 수 있으나, 실시예에 따라 온라인 광고 매체(120)를 고유하게 식별하기 위해 사용될 수 있는 다양한 종류의 정보가 온라인 광고 매체(120)의 매체 식별 정보로 이용될 수 있다.According to a further embodiment, the one or more pieces of information collected from the user device 110 accessing the advertisement tracking device 130 includes the medium identification information of the online advertisement medium 120 that provided the application installation advertisement to the user device 110 . may include more. In this case, the medium identification information may be, for example, the name of the online advertisement medium 120, but according to an embodiment, various types of information that can be used to uniquely identify the online advertisement medium 120 are included in the online advertisement medium ( 120) may be used as medium identification information.

한편, 일 실시예에 따르면, 광고 트래킹 장치(130)는 애플리케이션 설치 광고를 통해 광고 트래킹 장치(130)로 접속한 사용자 장치(110)로부터 수집된 하나 이상의 정보를 포함하는 광고 트래킹 정보를 저장하고, 저장된 광고 트래킹 정보에 기초하여 사용자 장치(110)에 광고 대상 애플리케이션에 대한 설치 이벤트가 발생하였는지 여부를 판단할 수 있다.On the other hand, according to an embodiment, the advertisement tracking device 130 stores the advertisement tracking information including one or more information collected from the user device 110 connected to the advertisement tracking device 130 through the application installation advertisement, It may be determined whether an installation event for an advertisement target application has occurred in the user device 110 based on the stored advertisement tracking information.

구체적으로, 일 실시예에 따르면, 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션이 사용자 장치(110)에 다운로드되어 설치된 경우, 광고 트래킹 장치(130)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션으로부터 사용자 장치(110)의 장치 식별 정보를 획득할 수 있다. 이를 위해, 광고 대상 애플리케이션에는 예를 들어, 광고 대상 애플리케이션이 사용자 장치(110)에 설치되어 최초로 실행된 경우 사용자 장치(110)의 장치 식별 정보를 수집하여 광고 트래킹 장치(130)로 제공하도록 설정된 트래킹 SDK(Software Development Kit)가 사전 삽입될 수 있다. Specifically, according to an embodiment, when an advertisement target application is downloaded and installed on the user device 110 through an application installation advertisement, the advertisement tracking device 130 is a user device (from the advertisement target application installed in the user device 110) 110) may obtain device identification information. To this end, the advertisement target application includes, for example, tracking set to collect device identification information of the user device 110 and provide it to the advertisement tracking device 130 when the advertisement target application is installed on the user device 110 and executed for the first time. SDK (Software Development Kit) may be pre-inserted.

한편, 광고 트래킹 장치(130)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션으로부터 획득한 장치 식별 정보와 광고 트래킹 정보에 포함된 장치 식별 정보를 비교하여 일치하는 경우, 애플리케이션 설치 광고를 통해 사용자 장치(110)에서 광고 대상 애플리케이션에 대한 설치 이벤트가 발생된 것으로 판단할 수 있다. On the other hand, the advertisement tracking device 130 compares and matches the device identification information obtained from the advertisement target application installed in the user device 110 with the device identification information included in the advertisement tracking information, the user device through the application installation advertisement ( 110), it may be determined that an installation event for the advertisement target application has occurred.

또한, 광고 트래킹 장치(130)는 사용자 장치(110)에서 광고 대상 애플리케이션에 대한 설치 이벤트가 발생된 것으로 판단한 경우, 발생된 설치 이벤트와 관련된 정보를 포함하는 이벤트 정보를 광고 효과 분석 장치(150)로 제공할 수 있다. 이때, 일 실시예에 따르면, 이벤트 정보는 설치 이벤트가 발생된 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. 또한, 실시예에 따라, 이벤트 정보는 애플리케이션 설치 광고를 통해 사용자 장치(110)에 설치 이벤트를 유발시킨 온라인 광고 매체(120)의 매체 식별 정보를 더 포함할 수 있다.In addition, when the advertisement tracking device 130 determines that the installation event for the advertisement target application has occurred in the user device 110 , event information including information related to the generated installation event is transmitted to the advertisement effect analysis device 150 . can provide In this case, according to an embodiment, the event information may include device identification information of the user device 110 in which the installation event has occurred. In addition, according to an embodiment, the event information may further include medium identification information of the online advertisement medium 120 that caused the installation event in the user device 110 through the application installation advertisement.

사용자 정보 제공 장치(140)는 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 사용자와 관련된 사용자 정보를 광고 효과 분석 장치(150)로 제공하기 위한 장치이다. The user information providing device 140 is a device for providing user information related to a user accessing a service provided through an advertisement target application to the advertisement effect analysis device 150 .

일 실시예에 따르면, 사용자 정보는 광고 대상 애플리케이션을 통해 서비스에 접속한 각 사용자의 서비스 접속 정보를 포함할 수 있다. 이때, 서비스 접속 정보는 서비스에 접속한 사용자의 사용자 식별 정보 및 서비스에 접속한 사용자가 서비스에 접속하기 위해 이용한 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. According to an embodiment, the user information may include service access information of each user who accesses the service through the advertisement target application. In this case, the service access information may include user identification information of a user accessing the service and device identification information of the user device 110 used by the user accessing the service to access the service.

한편, 사용자 식별 정보는 예를 들어, 사용자에 의해 서비스에 등록된 사용자 계정의 아이디일 수 있으나 서비스를 이용하는 각 사용자를 고유하게 식별하기 위해 이용될 수 있는 다양한 정보가 사용자 식별 정보로 이용될 수 있다.Meanwhile, the user identification information may be, for example, the ID of a user account registered with the service by the user, but various information that can be used to uniquely identify each user using the service may be used as the user identification information. .

일 실시예에 따르면, 사용자 정보 제공 장치(140)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션과 연동하여 사용자의 서비스 접속 정보를 수집할 수 있다. 구체적으로, 사용자 장치(110)에 설치된 광고 대상 애플리케이션은 사전 설정된 이벤트가 발생한 경우, 사용자 정보 제공 장치(140)로 서비스 접속 정보를 제공하도록 설정될 수 있다. 이때, 사전 설정된 이벤트는 예를 들어, 광고 대상 애플리케이션을 통해 사용자 계정이 생성된 경우, 광고 대상 애플리케이션이 사용자 장치(110)에서 최초로 실행된 후 사용자 계정에 대한 로그인이 이루어진 경우 등일 수 있으나 반드시 이에 한정되는 것은 아니며 실시예에 따라 다양하게 설정될 수 있다. According to an embodiment, the user information providing device 140 may collect service access information of the user in association with an advertisement target application installed in the user device 110 . Specifically, the advertisement target application installed in the user device 110 may be set to provide service access information to the user information providing device 140 when a preset event occurs. At this time, the preset event may be, for example, when a user account is created through the advertisement target application, when the advertisement target application is first executed on the user device 110 and then login to the user account is made, but must be limited thereto This is not the case and may be set in various ways according to embodiments.

한편, 일 실시예에 따르면, 사용자 정보는 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 사용자의 활동 정보를 포함할 수 있다. 구체적으로, 사용자 정보 제공 장치(140)는 광고 효과 분석 장치(150)의 요청에 따라 특정한 사용자 식별 정보에 대응되는 사용자의 활동 정보를 광고 분석 장치(150)로 제공할 수 있다. 이때, 사용자의 활동 정보는 사용자에 의해 서비스 내에서 이루어진 행위에 기초하여 생성될 수 있는 다양한 정보를 포함할 수 있다. 예를 들어, 사용자의 활동 정보는 사용자 계정 생성 시점, 최초 접속 시점, 최종 접속 시점, 총 결제 금액, 최근 결제 금액, 상품 구매 내역, 서비스 내 컨텐츠 이용 내역 등과 같은 다양한 정보를 포함할 수 있다. 그러나, 활동 정보에 포함된 정보는 반드시 상술한 예에 한정되는 것은 아니며, 서비스의 종류 및 형태에 따라 변경할 수 있다.Meanwhile, according to an embodiment, the user information may include user activity information for a service provided through an advertisement target application. Specifically, the user information providing apparatus 140 may provide the user's activity information corresponding to the specific user identification information to the advertisement analyzing apparatus 150 according to the request of the advertisement effect analyzing apparatus 150 . In this case, the user's activity information may include various types of information that may be generated based on an action performed by the user within the service. For example, the user's activity information may include various information such as a user account creation time, first access time, last access time, total payment amount, recent payment amount, product purchase history, content use history in the service, and the like. However, the information included in the activity information is not necessarily limited to the above-described example, and may be changed according to the type and type of service.

한편, 일 실시예에 따르면, 사용자 정보 제공 장치(140)는 광고 대상 애플리케이션을 통해 서비스를 제공하는 서비스 제공 시스템에 포함된 하나 이상의 장치 내지는 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 모니터링 내지는 분석을 수행하기 위해 별도로 구비된 장치일 수 있다. Meanwhile, according to an embodiment, the user information providing device 140 monitors or analyzes one or more devices included in a service providing system that provides a service through an advertisement target application or a service provided through an advertisement target application. It may be a separately provided device to do this.

도 2는 일 실시예에 따른 광고 효과 분석 장치의 구성도이다.2 is a block diagram of an advertisement effect analysis apparatus according to an embodiment.

도 2를 참조하면, 광고 효과 분석 장치(150)는 이벤트 정보 획득부(151), 사용자 정보 획득부(152) 및 분석부(153)를 포함한다.Referring to FIG. 2 , the advertisement effect analysis apparatus 150 includes an event information acquisition unit 151 , a user information acquisition unit 152 , and an analysis unit 153 .

일 실시예에 따르면, 이벤트 정보 획득부(151), 사용자 정보 획득부(152) 및 분석부(153)는 각각 물리적으로 구분된 하나 이상의 장치를 이용하여 구현되거나, 하나 이상의 하드웨어 프로세서 또는 하나 이상의 하드웨어 프로세서 및 소프트웨어의 결합에 의해 구현될 수 있으며, 도시된 예와 달리 구체적 동작에 있어 명확히 구분되지 않을 수 있다.According to an embodiment, the event information acquisition unit 151 , the user information acquisition unit 152 , and the analysis unit 153 are each implemented using one or more physically separated devices, or one or more hardware processors or one or more hardware It may be implemented by a combination of a processor and software, and unlike the illustrated example, specific operations may not be clearly distinguished.

이벤트 정보 획득부(151)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다. The event information acquisition unit 151 acquires event information including device identification information of each of a plurality of user devices in which an installation event of an advertisement target application occurs through an application installation advertisement.

구체적으로, 이벤트 정보 획득부(151)는 도 1에 도시된 광고 트래킹 장치(130)로부터 복수의 사용자 장치 각각에서 발생된 광고 대상 애플리케이션의 설치 이벤트에 대한 이벤트 정보를 획득할 수 있다.Specifically, the event information acquisition unit 151 may acquire event information about the installation event of the advertisement target application generated in each of a plurality of user devices from the advertisement tracking device 130 shown in FIG. 1 .

한편, 일 실시예에 따르면, 이벤트 정보는 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 광고 매체에 대한 매체 식별 정보를 더 포함할 수 있다. 구체적으로, 도 1에 도시된 예에서, 온라인 광고 매체(120)를 통해 제공된 애플리케이션 설치 광고를 통해 사용자 장치(110)에서 광고 대상 애플리케이션의 설치 이벤트가 발생한 경우, 해당 설치 이벤트에 대한 이벤트 정보는 사용자 장치(110)의 장치 식별 정보 및 온라인 광고 매체(120)의 매체 식별 정보를 포함할 수 있다.Meanwhile, according to an embodiment, the event information is an advertisement medium that triggers an installation event in each of a plurality of user devices in which an installation event of an advertisement target application is generated among one or more online advertisement media providing an application installation advertisement for an advertisement target application. It may further include medium identification information for. Specifically, in the example shown in FIG. 1 , when an installation event of an advertisement target application occurs in the user device 110 through an application installation advertisement provided through the online advertisement medium 120 , event information about the installation event is provided to the user It may include device identification information of the device 110 and medium identification information of the online advertising medium 120 .

사용자 정보 획득부(152)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다.The user information obtaining unit 152 is a service including user identification information of each of a plurality of users accessing a service through an advertisement target application and device identification information of a user device used by each of the plurality of users to access the service Obtain connection information.

구체적으로, 사용자 정보 획득부(152)는 도 1에 도시된 사용자 정보 제공 장치(140)로부터 복수의 사용자 각각에 대한 서비스 접속 정보를 획득할 수 있다.Specifically, the user information obtaining unit 152 may obtain service access information for each of a plurality of users from the user information providing apparatus 140 shown in FIG. 1 .

분석부(153)는 이벤트 정보 획득부(151) 및 사용자 정보 획득부(152)에 의해 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션에 의해 제공되는 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별할 수 있다.The analysis unit 153 is configured among a plurality of users who have accessed the service provided by the advertisement target application based on the event information and service access information obtained by the event information acquisition unit 151 and the user information acquisition unit 152 . User identification information of each user associated with one or more events associated with the installation event of the advertisement target application may be identified.

이때, 이벤트 연관 사용자는 애플리케이션 설치 광고를 통해 발생된 설치 이벤트에 의해 사용자 장치에 설치된 광고 대상 애플리케이션을 이용하여 서비스에 접속한 사용자를 의미할 수 있다.In this case, the event-related user may refer to a user who accesses the service using the advertisement target application installed in the user device by the installation event generated through the application installation advertisement.

일 실시예에 따르면, 분석부(153)는 사용자 정보 획득부(152)에 의해 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성할 수 있다. According to an embodiment, the analysis unit 153 may include user identification information of each of a plurality of users accessing a service provided through an advertisement target application, based on the service access information obtained by the user information obtaining unit 152, and The first mapping information including the correspondence between the device identification information of the user device used by each of the plurality of users may be generated.

도 3은 일 실시예에 따른 제1 맵핑 정보의 일 예를 나타낸 도면이다.3 is a diagram illustrating an example of first mapping information according to an embodiment.

도 3에 도시된 예에서는 제1 맵핑 정보(300)가 사용자 식별 정보와 장치 식별 정보가 맵핑된 맵핑 테이블의 형태로 생성된 것으로 가정하나, 제1 맵핑 정보(300)의 형태는 반드시 도시된 예에 한정되는 것은 아니다. In the example shown in FIG. 3 , it is assumed that the first mapping information 300 is generated in the form of a mapping table in which user identification information and device identification information are mapped, but the form of the first mapping information 300 is necessarily the illustrated example. is not limited to

한편, 도 3에 도시된 예에서는 사용자 식별 정보가 'UID_1'인 제1 사용자가 장치 식별 정보가 'ADID_1'인 제1 사용자 장치와 장치 식별 정보가 'ADID_2'인 제2 사용자 장치 각각을 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 것으로 가정한다. 또한, 사용자 식별 정보가 'UID_2'인 제2 사용자가 'ADID_3'인 제3 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하고, 사용자 식별 정보가 'UID_3'인 제3 사용자가 'ADID_4'인 제4 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하고, 사용자 식별 정보가 'UID_4'인 제4 사용자가 'ADID_5'인 제5 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 것으로 가정한다.Meanwhile, in the example shown in FIG. 3 , a first user whose user identification information is 'UID_1' uses a first user device whose device identification information is 'ADID_1' and a second user device whose device identification information is 'ADID_2' respectively. It is assumed that the service provided through the advertisement target application is accessed. In addition, a second user whose user identification information is 'UID_2' uses a third user device of 'ADID_3' to access a service provided through an advertisement target application, and a third user whose user identification information is 'UID_3' The fourth user device with ADID_4' is used to access the service provided through the advertisement target application, and the fourth user whose user identification information is 'UID_4' uses the fifth user device with 'ADID_5' through the advertisement target application. It is assumed that you have connected to the provided service.

이 경우, 도 3에 도시된 제1 맵핑 정보(300)와 같이 'UID_1'은 'ADID_1' 및 'ADID_2'와 각각 맵핑되고, 'UID_2'는 'ADID_3'과 맵핑되며, 'UID_3'는 'ADID_4'와 맵핑되며 'UID_4'는 'ADID_5'와 맵핑될 수 있다.In this case, as in the first mapping information 300 shown in FIG. 3 , 'UID_1' is mapped to 'ADID_1' and 'ADID_2', respectively, 'UID_2' is mapped to 'ADID_3', and 'UID_3' is mapped to 'ADID_4' ' and 'UID_4' may be mapped to 'ADID_5'.

다시 도 2를 참조하면, 분석부(153)는 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 장치 식별 정보를 식별할 수 있다. 이때, 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보가 식별된 경우, 분석부(153)는 제1 맵핑 정보에 기초하여 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 이벤트 연관 사용자의 사용자 식별 정보로 식별할 수 있다. Referring back to FIG. 2 , the analyzer 153 may identify device identification information commonly included in the event information and the service access information. In this case, when one or more device identification information commonly included in the event information and the service access information is identified, the analysis unit 153 generates user identification information corresponding to each of the one or more device identification information based on the first mapping information. It can be identified by user identification information of the associated user.

예를 들어, 이벤트 정보와 서비스 접속 정보에 'ADID_2' 및 'ADID_3'가 공통적으로 포함되어 있고, 제1 맵핑 정보가 도 3에 도시된 예와 동일한 경우, 분석부(153)는 제1 맵핑 정보(300)에서 'ADID_2'에 맵핑된 'UID_1'과 'ADID_3'에 맵핑된 'UID_2'를 각각 이벤트 연관 사용자의 사용자 식별 정보로 결정할 수 있다.For example, when 'ADID_2' and 'ADID_3' are included in common in the event information and service access information, and the first mapping information is the same as the example illustrated in FIG. 3 , the analysis unit 153 performs the first mapping information In step 300 , 'UID_1' mapped to 'ADID_2' and 'UID_2' mapped to 'ADID_3' may be determined as user identification information of the event-related user, respectively.

한편, 일 실시예에 따르면, 이벤트 정보 획득부(151)에 의해 획득된 이벤트 정보에 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 함께 각 사용자 장치에 설치 이벤트를 유발시킨 온라인 광고 매체의 매체 식별 정보가 포함되어 있는 경우, 분석부(153)는 획득된 이벤트 정보에 기초하여 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성할 수 있다.Meanwhile, according to an embodiment, in the event information acquired by the event information acquisition unit 151 , an installation event is triggered in each user device together with device identification information of each of a plurality of user devices in which the installation event of the advertisement target application has occurred. When the medium identification information of the online advertisement medium is included, the analysis unit 153 provides device identification information and application installation advertisement for each of a plurality of user devices in which an installation event has occurred based on the acquired event information. It is possible to generate second mapping information including a correspondence relationship between the media identification information of each of the online advertisement media.

도 4는 일 실시예에 따른 제2 맵핑 정보의 일 예를 나타낸 도면이다.4 is a diagram illustrating an example of second mapping information according to an embodiment.

도 4에 도시된 예에서는 제2 맵핑 정보(400)가 매체 식별 정보와 장치 식별 정보가 맵핑된 맵핑 테이블의 형태로 생성된 것으로 가정하나, 제2 맵핑 정보(400)의 형태는 반드시 도시된 예에 한정되는 것은 아니다.In the example shown in FIG. 4 , it is assumed that the second mapping information 400 is generated in the form of a mapping table in which medium identification information and device identification information are mapped, but the form of the second mapping information 400 is necessarily the illustrated example. is not limited to

한편, 도 4에 도시된 예에서는 매체 식별 정보가 'media_1'인 온라인 광고 매체 1에 의해 제공된 애플리케이션 설치 광고에 의해 장치 식별 정보가 'ADID_1'인 제1 사용자 장치와 장치 식별 정보가 'ADID_4'인 제4 사용자 장치 각각에 광고 대상 애플리케이션의 설치 이벤트가 발생한 것으로 가정한다. 또한, 매체 식별 정보가 'media_2'인 온라인 광고 매체 2에 의해 제공된 애플리케이션 설치 광고에 의해 장치 식별 정보가 'ADID_5'인 제5 사용자 장치에 광고 대상 애플리케이션의 설치 이벤트가 발생한 것으로 가정한다.Meanwhile, in the example shown in FIG. 4 , the first user device whose device identification information is 'ADID_1' and the device identification information is 'ADID_4' by the application installation advertisement provided by the online advertisement medium 1 with the medium identification information of 'media_1' It is assumed that an advertisement target application installation event occurs in each of the fourth user devices. Also, it is assumed that an advertisement target application installation event occurs in the fifth user device having device identification information 'ADID_5' by the application installation advertisement provided by the online advertisement medium 2 having medium identification information 'media_2'.

이 경우, 도 4에 도시된 제2 맵핑 정보(400)와 같이 'media_1'은 'ADID_1' 및 'ADID_4'와 맵핑되고, 'media_2'는 'ADID_5'와 맵핑될 수 있다.In this case, like the second mapping information 400 shown in FIG. 4 , 'media_1' may be mapped to 'ADID_1' and 'ADID_4', and 'media_2' may be mapped to 'ADID_5'.

다시 도 2를 참조하면, 분석부(153)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지할 수 있다. 이때, 광고 어뷰징은 예를 들어, SDK 스푸핑(spoofing)과 같이 부당한 광고 수익을 챙기기 위해 실제로는 광고 대상 애플리케이션이 설치되지 않은 사용자 장치에 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 것으로 조작하는 행위를 의미할 수 있다.Referring back to Figure 2, the analysis unit 153, based on the first mapping information and the second mapping information, the advertisement abusing (abusing) is suspected among one or more advertising media that provides an application installation advertisement for an advertisement target application Online advertising media can be detected. At this time, advertisement abusing is, for example, in SDK spoofing, in order to obtain unfair advertisement revenue, the advertisement target application installation event is manipulated as being generated through the application installation advertisement on the user device where the advertisement target application is not actually installed. It can mean doing

구체적으로, 일 실시예에 따르면, 분석부(153)는 제2 맵핑 정보에 기초하여 하나 이상의 온라인 광고 매체 각각에 대응되는 장치 식별 정보를 식별한 후, 각 온라인 광고 매체에 대응되는 장치 식별 정보와 제1 맵핑 정보에 포함된 장치 식별 정보 사이의 매칭률을 결정할 수 있다. 또한, 분석부(153)는 결정된 매칭률에 기초하여 하나 이상의 온라인 광고 매체 중 광고 어뷰징이 의심되는 온라인 광고 매체를 탐지할 수 있다. Specifically, according to an embodiment, the analysis unit 153 identifies device identification information corresponding to each of one or more online advertisement media based on the second mapping information, and then includes device identification information corresponding to each online advertisement medium and A matching rate between device identification information included in the first mapping information may be determined. Also, the analysis unit 153 may detect an online advertisement medium suspected of being abusing advertisements among one or more online advertisement mediums based on the determined matching rate.

즉, 특정 온라인 광고 매체에 의해 제공된 애플리케이션 설치 광고를 통해 특정 사용자 장치에 발생한 설치 이벤트가 광고 어뷰징에 의해 발생한 거짓 이벤트인 경우, 해당 사용자 장치가 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하기 위해 사용되었을 가능성이 낮다. 따라서, 분석부(153)는 예를 들어, 결정된 매칭률이 기 설정된 기준 값 이하인 광고 매체를 광고 어뷰징이 의심되는 온라인 광고 매체로 결정할 수 있다.That is, if the installation event that occurred on a specific user device through the application installation advertisement provided by a specific online advertising medium is a false event caused by advertisement abusing, the user device may have been used to access the service provided through the advertisement target application. less likely Accordingly, the analysis unit 153 may determine, for example, an advertisement medium having a determined matching rate equal to or less than a preset reference value as an online advertisement medium suspected of being abusive.

한편, 일 실시예에 따르면, 이벤트 정보에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보가 포함되어 있는 경우, 분석부(153)는 이벤트 정보 및 서비스 접속 정보에 기초하여, 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다. 구체적으로, 분석부(153)는 서비스 접속 정보에 기초하여 생성된 제1 맵핑 정보 및 이벤트 정보에 기초하여 생성된 제2 맵핑 정보에 기초하여 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다. On the other hand, according to an embodiment, when the event information includes medium identification information for the online advertisement medium that caused the installation event, the analysis unit 153 based on the event information and service access information, each event-related user It is possible to identify the medium identification information of the online advertising medium associated with the. Specifically, the analysis unit 153 identifies the medium of the online advertising medium associated with each of the one or more event-related users based on the first mapping information generated based on the service access information and the second mapping information generated based on the event information information can be identified.

보다 구체적으로, 분석부(153)는 제1 맵핑 정보에 포함된 사용자 식별 정보와 제2 맵핑 정보에 포함된 매체 식별 정보 중 동일한 장치 식별 정보에 대응되는 사용자 식별 정보 및 매체 식별 정보 사이의 대응 관계를 포함하는 제3 맵핑 정보를 생성할 수 있다.More specifically, the analysis unit 153 may be configured to determine a correspondence relationship between user identification information and medium identification information corresponding to the same device identification information among the user identification information included in the first mapping information and the medium identification information included in the second mapping information. Third mapping information including

도 5는 일 실시예에 따른 제3 맵핑 정보의 일 예를 나타낸 도면이다.5 is a diagram illustrating an example of third mapping information according to an embodiment.

구체적으로, 도 5에서는 도 3에 도시된 제1 맵핑 정보(300) 및 도 4에 도시된 제2 맵핑 정보(400)에 기초하여 생성된 제3 맵핑 정보(500)를 도시하고 있다.Specifically, FIG. 5 illustrates the third mapping information 500 generated based on the first mapping information 300 illustrated in FIG. 3 and the second mapping information 400 illustrated in FIG. 4 .

도 3 내지 5를 참조하면, 제1 맵핑 정보(300)와 제2 맵핑 정보(400)에 공통적으로 포함된 장치 식별 정보는 'ADID_1', 'ADID_4' 및 'ADID_5'이다. 3 to 5 , device identification information commonly included in the first mapping information 300 and the second mapping information 400 is 'ADID_1', 'ADID_4', and 'ADID_5'.

따라서, 제3 맵핑 정보(500)는 제1 맵핑 정보(300)에서 'ADID_1', 'ADID_4' 및 'ADID_5' 각각에 맵핑된 'UID_1', 'UID_3' 및 'UID_4'와 제2 맵핑 정보(400)에서 'ADID_1', 'ADID_4' 및 'ADID_5' 각각에 맵핑된 'media_1' 및 'media_2'를 포함한다. 또한, 제3 맵핑 정보(500)에서 'UID_1' 및 'UID_3'는 각각 'media_1'에 맵핑되고, 'UID_4'는 'media_2'에 맵핑된다.Accordingly, the third mapping information 500 includes 'UID_1', 'UID_3' and 'UID_4' and the second mapping information ( 400) includes 'media_1' and 'media_2' mapped to 'ADID_1', 'ADID_4', and 'ADID_5', respectively. Also, in the third mapping information 500 , 'UID_1' and 'UID_3' are mapped to 'media_1', respectively, and 'UID_4' is mapped to 'media_2'.

한편, 제3 맵핑 정보(500)가 도 5에 도시된 예와 동일한 경우, 분석부(153)는 'UID_1', 'UID_3' 및 'UID_4'를 각각 이벤트 연관 사용자의 사용자 식별 정보로 결정할 수 있다. 또한, 분석부(153)는 'UID_1' 및 'UID_3'과 관련된 광고 매체의 매체 식별 정보를 'media_1'으로 결정하고, 'UID_4'와 연관된 광고 매체의 매체 식별 정보를 'media_2'로 결정할 수 있다.On the other hand, when the third mapping information 500 is the same as the example shown in FIG. 5 , the analysis unit 153 may determine 'UID_1', 'UID_3', and 'UID_4' as user identification information of the event-related user, respectively. . Also, the analysis unit 153 may determine media identification information of the advertisement medium related to 'UID_1' and 'UID_3' as 'media_1', and determine the medium identification information of the advertisement medium related to 'UID_4' as 'media_2'. .

일 실시예에 따르면, 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보가 결정된 경우, 사용자 정보 획득부(152)는 결정된 각 사용자 식별 정보에 기초하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 각 이벤트 연관 사용자의 활동 정보를 획득할 수 있다. 또한, 분석부(153)는 하나 이상의 이벤트 연관 사용자 각각의 활동 정보에 기초하여 애플리케이션 설치 광고에 대한 분석 정보를 생성할 수 있다. 이때, 애플리케이션 설치 광고에 대한 분석 정보는 예를 들어, 하나 이상의 이벤트 연관 사용자 각각의 사용자 유형, 콘텐츠 이용 유형, 상품 구매 유형, 결제 패턴 등과 같이 획득된 활동 정보에 기초하여 분석 가능한 다양한 정보를 포함할 수 있다. According to an embodiment, when the user identification information of each of the one or more event-related users is determined, the user information obtaining unit 152 determines each event-related user for a service provided through an advertisement target application based on the determined user identification information. activity information can be obtained. In addition, the analysis unit 153 may generate analysis information on the application installation advertisement based on the activity information of each of the users associated with one or more events. At this time, the analysis information for the application installation advertisement may include, for example, various information that can be analyzed based on the acquired activity information, such as the user type, content use type, product purchase type, payment pattern, etc. of each of the one or more event-related users. can

한편, 일 실시예에 따르면, 애플리케이션 설치 광고에 대한 분석 정보는 애플리케이션 설치 광고를 제공한 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 포함할 수 있다. 이때, 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보는 예를 들어, 각 온라인 광고 매체와 연관된 이벤트 연관 사용자의 수, 각 온라인 광고 매체와 연관된 이벤트 연관 사용자 각각의 사용자 유형, 콘텐츠 이용 유형, 상품 구매 유형, 결제 패턴 등과 같이 획득된 활동 정보에 기초하여 분석 가능한 다양한 정보를 포함할 수 있다.Meanwhile, according to an embodiment, the analysis information on the application installation advertisement may include analysis information on each of one or more online advertisement media providing the application installation advertisement. In this case, the analysis information for each of the one or more online advertising media may include, for example, the number of event-related users associated with each online advertising medium, each user type associated with the event associated with each online advertising medium, content use type, and product purchase type , may include various information that can be analyzed based on the acquired activity information, such as a payment pattern.

도 6 내지 도 8은 일 실시예에 따라 분석부(153)에 의해 생성되는 분석 정보의 일 예를 나타낸 도면이다.6 to 8 are diagrams illustrating an example of analysis information generated by the analysis unit 153 according to an exemplary embodiment.

구체적으로, 분석부(153)에 의해 생성되는 분석 정보는 도 6에 도시된 예와 같이 이벤트 연관 사용자 각각의 사용자 유형을 신규 사용자, 복귀 사용자 및 기존 사용자 중 하나로 분류한 후, 분류한 결과에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.Specifically, the analysis information generated by the analysis unit 153 classifies each user type of each event-related user into one of a new user, a returning user, and an existing user as in the example shown in FIG. It may be information that visually expresses statistics through graphs.

다른 예로, 분석부(153)에 의해 생성되는 분석 정보는 도 7에 도시된 예와 같이 이벤트 연관 사용자들 중 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 각 광고 매체와 연관된 이벤트 연관 사용자의 수에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.As another example, the analysis information generated by the analysis unit 153 is based on the number of event-related users associated with each advertisement medium that provides application installation advertisements for advertisement target applications among event-related users as in the example shown in FIG. 7 . It may be information that visually expresses statistics about a graph.

또 다른 예로, 분석부(153)에 의해 생성되는 분석 정보는 도 8에 도시된 예와 같이 각 광고 매체와 연관된 이벤트 연관 사용자 각각의 사용자 유형을 신규 사용자, 복귀 사용자 및 기존 사용자 중 하나로 분류한 후, 분류한 결과에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.As another example, the analysis information generated by the analysis unit 153 classifies each user type of each event-related user associated with each advertising medium into one of a new user, a returning user, and an existing user, as shown in the example shown in FIG. 8 . , it may be information that visually expresses statistics on the results of classification through graphs.

도 9는 일 실시예에 따른 광고 효과 분석 방법의 순서도이다.9 is a flowchart of an advertisement effect analysis method according to an embodiment.

도 9에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method illustrated in FIG. 9 may be performed by, for example, the advertisement effect analysis apparatus 150 illustrated in FIG. 2 .

도 9를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다(910).Referring to FIG. 9 , first, the advertisement effect analysis device 150 obtains event information including device identification information of each of a plurality of user devices in which an advertisement target application installation event occurs through an application installation advertisement ( 910 ). .

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(920).Thereafter, the advertisement effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the service Access information is obtained ( 920 ).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다(930). Thereafter, the advertisement effect analysis device 150, based on the acquired event information and service access information, among a plurality of users accessing the service through the advertisement target application, one or more event-related users associated with the installation event of the advertisement target application, respectively. Identifies user identification information ( 930 ).

도 10은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.10 is a flowchart of an advertisement effect analysis method according to an additional exemplary embodiment.

도 10에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method illustrated in FIG. 10 may be performed by, for example, the advertisement effect analysis apparatus 150 illustrated in FIG. 2 .

도 10을 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다(1010).Referring to FIG. 10 , first, the advertisement effect analysis device 150 obtains event information including device identification information of each of a plurality of user devices in which an advertisement target application installation event occurs through an application installation advertisement ( 1010 ). .

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1020).Thereafter, the advertisement effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the service Access information is obtained (1020).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다(1030).Then, the advertisement effect analysis device 150, based on the acquired event information and service access information, one or more event-related users associated with the installation event of the advertisement target application among a plurality of users accessing the service through the advertisement target application, respectively Identifies user identification information (1030).

이후, 광고 효과 분석 장치(150)는 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 이벤트 연관 사용자 각각의 활동 정보를 획득한다(1040).Thereafter, the advertisement effect analysis apparatus 150 obtains activity information of each event-related user with respect to a service provided through an advertisement target application based on the user identification information of each of the event-related users ( 1040 ).

이후, 광고 효과 분석 장치(150)는 이벤트 연관 사용자 각각의 활동 정보에 기초하여 애플리케이션 설치 광고에 대한 분석 정보를 생성한다(1050).Thereafter, the advertisement effect analysis apparatus 150 generates analysis information on the application installation advertisement based on the activity information of each event-related user ( S1050 ).

도 11은 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하기 위한 방법의 순서도이다.11 is a flowchart of a method for identifying user identification information of each event-related user according to an embodiment.

도 11에 도시된 방법은 예를 들어, 도 9에 도시된 930 단계 또는 도 10에 도시된 1030 단계에서 수행될 수 있다.The method illustrated in FIG. 11 may be performed, for example, in operation 930 illustrated in FIG. 9 or operation 1030 illustrated in FIG. 10 .

도 11을 참조하면, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1110).Referring to FIG. 11 , the advertisement effect analysis apparatus 150 is used by each of a plurality of users and user identification information of each of a plurality of users who access a service provided through an advertisement target application, based on the obtained service access information. First mapping information including a correspondence relationship between the device identification information of the user device is generated ( 1110 ).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별한다(1120).Thereafter, the advertisement effect analysis device 150 identifies one or more device identification information commonly included in the acquired event information and service access information ( 1120 ).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보에 기초하여, 식별된 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 각각 이벤트 연관 사용자의 사용자 식별 정보로 식별한다(1130).Thereafter, the advertisement effect analysis apparatus 150 identifies user identification information corresponding to each of the identified one or more pieces of device identification information as user identification information of an event-related user, based on the first mapping information ( 1130 ).

도 12는 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.12 is a flowchart of an advertisement effect analysis method according to an additional exemplary embodiment.

도 12에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method illustrated in FIG. 12 may be performed by, for example, the advertisement effect analysis apparatus 150 illustrated in FIG. 2 .

도 12를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1210).Referring to FIG. 12 , first, the advertisement effect analysis device 150 provides one or more online advertisements that provide device identification information and application installation advertisements for each of a plurality of user devices in which an advertisement target application installation event has occurred through an application installation advertisement. Event information including media identification information for an online advertisement medium that has caused an installation event in each of a plurality of user devices is acquired ( 1210 ).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1220).Thereafter, the advertisement effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the service Access information is obtained ( 1220 ).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 온라인 광고 매체 중 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1230). Then, the advertisement effect analysis device 150, based on the acquired event information and service access information, one or more event-related users associated with the installation event of the advertisement target application among a plurality of users accessing the service through the advertisement target application, respectively Identifies media identification information of an online advertising medium associated with each of the user identification information and one or more event-related users of one or more online advertising media ( 1230 ).

도 13은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.13 is a flowchart of an advertisement effect analysis method according to an additional exemplary embodiment.

도 13에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method illustrated in FIG. 13 may be performed, for example, by the advertisement effect analysis apparatus 150 illustrated in FIG. 2 .

도 13을 참조하면, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1310).Referring to FIG. 13 , the advertisement effect analysis device 150 provides device identification information and application installation advertisement for each of a plurality of user devices in which an advertisement target application installation event occurs through an application installation advertisement among one or more online advertisement media. Event information including media identification information for an online advertisement medium that caused an installation event in each of a plurality of user devices is acquired ( 1310 ).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1320).Thereafter, the advertisement effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the service Access information is obtained (1320).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 온라인 광고 매체 중 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1330).Thereafter, the advertisement effect analysis device 150, based on the acquired event information and service access information, among a plurality of users accessing the service through the advertisement target application, one or more event-related users associated with the installation event of the advertisement target application, respectively. Identifies ( 1330 ) the user identification information and the medium identification information of the online advertising medium associated with each of the event-related users of one or more of the one or more online advertising media.

이후, 광고 효과 분석 장치(150)는 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득한다(1340).Thereafter, the advertisement effect analysis apparatus 150 obtains activity information of each of the one or more event-related users for the service provided through the advertisement target application based on the user identification information of each of the one or more event-related users ( 1340 ).

이후, 광고 효과 분석 장치(150)는 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 하나 이상의 이벤트 연관 사용자 각각의 활동 정보에 기초하여 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성한다(1350).Then, the advertisement effect analysis apparatus 150 generates analysis information for each of the one or more online advertisement media based on the media identification information of the online advertisement medium associated with each of the one or more event-related users and the activity information of each of the one or more event-related users. do (1350).

도 14는 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보 및 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하기 위한 방법의 순서도이다.14 is a flowchart of a method for identifying user identification information of each event-related user and medium identification information of an online advertisement medium associated with each event-related user, according to an embodiment.

도 14에 도시된 방법은 예를 들어, 도 12에 도시된 1230 단계 또는 도 13에 도시된 1330 단계에서 수행될 수 있다.The method illustrated in FIG. 14 may be performed, for example, in operation 1230 illustrated in FIG. 12 or operation 1330 illustrated in FIG. 13 .

도 14를 참조하면, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1410).Referring to FIG. 14 , the advertisement effect analysis device 150 is used by each of a plurality of users and user identification information of each of a plurality of users who access a service provided through an advertisement target application, based on the obtained service access information. First mapping information including a corresponding relationship between the device identification information of the user device is generated ( 1410 ).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보에 기초하여, 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성한다(1420).Thereafter, the advertisement effect analysis device 150, based on the acquired event information, provides device identification information of each of a plurality of user devices in which the installation event of the advertisement target application has occurred, and one or more application installation advertisements for the advertisement target application. Second mapping information including a correspondence relationship between the media identification information of each of the online advertisement media is generated ( 1420 ).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1430).Then, the advertisement effect analysis device 150, based on the first mapping information and the second mapping information, the user identification information of each of one or more event-related users and the medium identification information of the online advertising medium associated with each of the one or more event-related users Identify (1430).

도 15는 일 실시예에 따른 광고 어뷰징 탐지 방법의 순서도이다.15 is a flowchart of a method for detecting advertisement abusing according to an embodiment.

도 15에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method illustrated in FIG. 15 may be performed by, for example, the advertisement effect analysis apparatus 150 illustrated in FIG. 2 .

도 15를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1510).Referring to FIG. 15 , first, the advertisement effect analysis device 150 provides one or more online advertisements that provide device identification information and application installation advertisements for each of a plurality of user devices in which an advertisement target application installation event has occurred through an application installation advertisement. It acquires event information including medium identification information for an online advertisement medium that has caused an installation event in each of a plurality of user devices among the media ( 1510 ).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1520).Thereafter, the advertisement effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the service Access information is obtained (1520).

이후, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1530).Then, the advertisement effect analysis device 150, based on the obtained service access information, the user identification information of each of a plurality of users accessing the service provided through the advertisement target application and the user device used by each of the plurality of users First mapping information including a correspondence relationship between device identification information is generated ( 1530 ).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보에 기초하여, 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성한다(1540).Thereafter, the advertisement effect analysis device 150, based on the acquired event information, provides device identification information of each of a plurality of user devices in which the installation event of the advertisement target application has occurred, and one or more application installation advertisements for the advertisement target application. Second mapping information including a correspondence relationship between the media identification information of each of the online advertisement media is generated ( 1540 ).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 하나 이상의 광고 매체 중 광고 어뷰징이 의심되는 온라인 광고 매체를 탐지한다(1550).Thereafter, the advertisement effect analysis apparatus 150 detects, based on the first mapping information and the second mapping information, an online advertisement medium in which advertisement abusing is suspected among one or more advertisement mediums ( 1550 ).

한편, 도 9 내지 도 15 각각에 도시된 순서도에서 적어도 일부의 단계들은 순서를 바꾸어 수행되거나, 다른 단계와 결합되어 함께 수행되거나, 생략되거나, 세부 단계들로 나뉘어 수행되거나, 도시되지 않은 하나 이상의 단계가 부가되어 수행될 수 있다.On the other hand, at least some of the steps in the flowchart shown in each of FIGS. 9 to 15 are performed in a reversed order, performed together in combination with other steps, omitted, divided into detailed steps, or one or more steps not shown may be added and performed.

도 16은 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다. 16 is a block diagram illustrating and explaining a computing environment including a computing device according to an embodiment.

도시된 실시예에서, 각 컴포넌트들은 이하에 기술된 것 이외에 상이한 기능 및 능력을 가질 수 있고, 이하에 기술되지 않은 것 이외에도 추가적인 컴포넌트를 포함할 수 있다.In the illustrated embodiment, each component may have different functions and capabilities other than those described below, and may include additional components other than those not described below.

도시된 컴퓨팅 환경(10)은 컴퓨팅 장치(12)를 포함한다. 일 실시예에서, 컴퓨팅 장치(12)는 도 2에 도시된 광고 효과 분석 장치(150)에 포함되는 하나 이상의 컴포넌트일 수 있다.The illustrated computing environment 10 includes a computing device 12 . In one embodiment, the computing device 12 may be one or more components included in the advertisement effect analysis device 150 shown in FIG. 2 .

컴퓨팅 장치(12)는 적어도 하나의 프로세서(14), 컴퓨터 판독 가능 저장 매체(16) 및 통신 버스(18)를 포함한다. 프로세서(14)는 컴퓨팅 장치(12)로 하여금 앞서 언급된 예시적인 실시예에 따라 동작하도록 할 수 있다. 예컨대, 프로세서(14)는 컴퓨터 판독 가능 저장 매체(16)에 저장된 하나 이상의 프로그램들을 실행할 수 있다. 상기 하나 이상의 프로그램들은 하나 이상의 컴퓨터 실행 가능 명령어를 포함할 수 있으며, 상기 컴퓨터 실행 가능 명령어는 프로세서(14)에 의해 실행되는 경우 컴퓨팅 장치(12)로 하여금 예시적인 실시예에 따른 동작들을 수행하도록 구성될 수 있다.Computing device 12 includes at least one processor 14 , computer readable storage medium 16 , and communication bus 18 . The processor 14 may cause the computing device 12 to operate in accordance with the exemplary embodiments discussed above. For example, the processor 14 may execute one or more programs stored in the computer-readable storage medium 16 . The one or more programs may include one or more computer-executable instructions that, when executed by the processor 14, configure the computing device 12 to perform operations in accordance with the exemplary embodiment. can be

컴퓨터 판독 가능 저장 매체(16)는 컴퓨터 실행 가능 명령어 내지 프로그램 코드, 프로그램 데이터 및/또는 다른 적합한 형태의 정보를 저장하도록 구성된다. 컴퓨터 판독 가능 저장 매체(16)에 저장된 프로그램(20)은 프로세서(14)에 의해 실행 가능한 명령어의 집합을 포함한다. 일 실시예에서, 컴퓨터 판독 가능 저장 매체(16)는 메모리(랜덤 액세스 메모리와 같은 휘발성 메모리, 비휘발성 메모리, 또는 이들의 적절한 조합), 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 그 밖에 컴퓨팅 장치(12)에 의해 액세스되고 원하는 정보를 저장할 수 있는 다른 형태의 저장 매체, 또는 이들의 적합한 조합일 수 있다.Computer-readable storage medium 16 is configured to store computer-executable instructions or program code, program data, and/or other suitable form of information. The program 20 stored in the computer readable storage medium 16 includes a set of instructions executable by the processor 14 . In one embodiment, computer-readable storage medium 16 includes memory (volatile memory, such as random access memory, non-volatile memory, or a suitable combination thereof), one or more magnetic disk storage devices, optical disk storage devices, flash It may be memory devices, other forms of storage medium accessed by computing device 12 and capable of storing desired information, or a suitable combination thereof.

통신 버스(18)는 프로세서(14), 컴퓨터 판독 가능 저장 매체(16)를 포함하여 컴퓨팅 장치(12)의 다른 다양한 컴포넌트들을 상호 연결한다.Communication bus 18 interconnects various other components of computing device 12 , including processor 14 and computer readable storage medium 16 .

컴퓨팅 장치(12)는 또한 하나 이상의 입출력 장치(24)를 위한 인터페이스를 제공하는 하나 이상의 입출력 인터페이스(22) 및 하나 이상의 네트워크 통신 인터페이스(26)를 포함할 수 있다. 입출력 인터페이스(22) 및 네트워크 통신 인터페이스(26)는 통신 버스(18)에 연결된다. 입출력 장치(24)는 입출력 인터페이스(22)를 통해 컴퓨팅 장치(12)의 다른 컴포넌트들에 연결될 수 있다. 예시적인 입출력 장치(24)는 포인팅 장치(마우스 또는 트랙패드 등), 키보드, 터치 입력 장치(터치패드 또는 터치스크린 등), 음성 또는 소리 입력 장치, 다양한 종류의 센서 장치 및/또는 촬영 장치와 같은 입력 장치, 및/또는 디스플레이 장치, 프린터, 스피커 및/또는 네트워크 카드와 같은 출력 장치를 포함할 수 있다. 예시적인 입출력 장치(24)는 컴퓨팅 장치(12)를 구성하는 일 컴포넌트로서 컴퓨팅 장치(12)의 내부에 포함될 수도 있고, 컴퓨팅 장치(12)와는 구별되는 별개의 장치로 컴퓨팅 장치(12)와 연결될 수도 있다.Computing device 12 may also include one or more input/output interfaces 22 and one or more network communication interfaces 26 that provide interfaces for one or more input/output devices 24 . The input/output interface 22 and the network communication interface 26 are coupled to the communication bus 18 . Input/output device 24 may be coupled to other components of computing device 12 via input/output interface 22 . Exemplary input/output device 24 may include a pointing device (such as a mouse or trackpad), a keyboard, a touch input device (such as a touchpad or touchscreen), a voice or sound input device, various types of sensor devices, and/or imaging devices. input devices and/or output devices such as display devices, printers, speakers and/or network cards. The exemplary input/output device 24 may be included in the computing device 12 as a component constituting the computing device 12 , and may be connected to the computing device 12 as a separate device distinct from the computing device 12 . may be

이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 전술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Although the present invention has been described in detail through representative embodiments above, those of ordinary skill in the art to which the present invention pertains can make various modifications to the above-described embodiments without departing from the scope of the present invention. will understand Therefore, the scope of the present invention should not be limited to the described embodiments, and should be defined by the claims described below as well as the claims and equivalents.

10: 컴퓨팅 환경
12: 컴퓨팅 장치
14: 프로세서
16: 컴퓨터 판독 가능 저장 매체
18: 통신 버스
20: 프로그램
22: 입출력 인터페이스
24: 입출력 장치
26: 네트워크 통신 인터페이스
100: 광고 효과 분석을 위한 시스템 환경
110: 사용자 장치
120: 온라인 광고 매체
130: 광고 트래킹 장치
140: 사용자 정보 제공 장치
150: 광고 효과 분석 장치
151: 이벤트 정보 획득부
152: 사용자 정보 획득부
153: 분석부
10: Computing Environment
12: computing device
14: Processor
16: computer readable storage medium
18: communication bus
20: Program
22: input/output interface
24: input/output device
26: network communication interface
100: System environment for advertising effectiveness analysis
110: user device
120: online advertising medium
130: ad tracking device
140: user information providing device
150: advertising effect analysis device
151: event information acquisition unit
152: user information acquisition unit
153: analysis unit

Claims (16)

애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하는 동작;
상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하는 동작; 및
상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 동작을 포함하는 광고 효과 분석 방법.
obtaining event information including device identification information of each of a plurality of user devices in which an application installation event is generated through an application installation advertisement;
Obtaining service connection information including user identification information of each of a plurality of users who accessed a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service ; and
and identifying user identification information of each of the users related to one or more events related to the installation event from among a plurality of users accessing the service, based on the event information and the service access information.
청구항 1에 있어서,
상기 장치 식별 정보는, 광고 아이디인 광고 효과 분석 방법.
The method according to claim 1,
The device identification information is an advertisement ID, an advertisement effect analysis method.
청구항 1에 있어서,
상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및
상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 동작을 더 포함하는 광고 성과 분석 방법.
The method according to claim 1,
obtaining activity information of each of the one or more event-related users for the service based on user identification information of each of the one or more event-related users; and
Advertising performance analysis method further comprising the operation of generating analysis information on the application installation advertisement based on the activity information.
청구항 1에 있어서,
상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작;
상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하는 동작; 및
상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 동작을 포함하는 광고 효과 분석 방법.
The method according to claim 1,
The identifying may include, based on the service connection information, first mapping information including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users creating an action;
identifying at least one device identification information commonly included in the event information and the service access information; and
and identifying, based on the first mapping information, user identification information corresponding to each of the one or more device identification information as user identification information of each of the one or more event-related users.
청구항 1에 있어서,
상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고,
상기 식별하는 동작은, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 방법.
The method according to claim 1,
The event information further includes medium identification information on an online advertisement medium that caused the installation event in each of the plurality of user devices among one or more online advertisement media providing the application installation advertisement,
The identifying may include, based on the event information and the service access information, user identification information of each of the one or more event-related users and an online advertising medium associated with each of the one or more event-related users among the one or more online advertising media. Advertising effectiveness analysis method for identifying medium identification information.
청구항 5에 있어서,
상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및
상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 동작을 더 포함하는 광고 효과 분석 방법.
6. The method of claim 5,
obtaining activity information of each of the one or more event-related users for the service based on user identification information of each of the one or more event-related users; and
and generating analysis information for each of the at least one online advertisement medium based on the activity information and medium identification information of the online advertisement medium associated with each of the one or more event-related users.
청구항 5에 있어서,
상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작;
상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하는 동작; 및
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 동작을 포함하는 광고 효과 분석 방법.
6. The method of claim 5,
The identifying may include, based on the service connection information, first mapping information including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users creating an action;
generating second mapping information including a correspondence relationship between medium identification information of each of the one or more online advertisement media and device identification information of each of the plurality of user devices based on the event information; and
based on the first mapping information and the second mapping information, identifying user identification information of each of the one or more event-related users and media identification information of an online advertisement medium associated with each of the one or more event-related users Advertising effectiveness analysis method.
청구항 7에 있어서,
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 동작을 더 포함하는 광고 성과 분석 방법.
8. The method of claim 7,
and detecting, based on the first mapping information and the second mapping information, an online advertisement medium suspected of being advertisement abusing among the one or more advertisement media.
하나 이상의 하드웨어 프로세서; 및
하나 이상의 통신 인터페이스를 포함하고,
상기 하나 이상의 하드웨어 프로세서는,
상기 하나 이상의 통신 인터페이스를 통해, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하고,
상기 하나 이상의 통신 인터페이스를 통해, 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하고,
상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 광고 효과 분석 장치.
one or more hardware processors; and
one or more communication interfaces;
the one or more hardware processors,
Obtaining event information including device identification information of each of a plurality of user devices in which an application installation event is generated through an application installation advertisement through the one or more communication interfaces,
through the one or more communication interfaces, user identification information of each of a plurality of users accessing a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service; to obtain service access information,
Advertisement effect analysis apparatus for identifying user identification information of one or more event-related users associated with the installation event among a plurality of users accessing the service on the basis of the event information and the service access information.
청구항 9에 있어서,
상기 장치 식별 정보는, 광고 아이디인 광고 효과 분석 장치.
10. The method of claim 9,
The device identification information is an advertisement ID, which is an advertisement effect analysis device.
청구항 9에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고,
상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 광고 성과 분석 장치.
10. The method of claim 9,
The one or more hardware processors are configured to obtain, based on user identification information of each of the one or more event-related users, activity information of each of the one or more event-related users for the service;
An advertisement performance analysis device for generating analysis information on the application installation advertisement based on the activity information.
청구항 9에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고,
상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하고,
상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 광고 효과 분석 장치.
10. The method of claim 9,
The one or more hardware processors are configured to: a first mapping including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users based on the service connection information create information,
Identifies one or more device identification information commonly included in the event information and the service access information,
An advertisement effect analysis apparatus for identifying user identification information corresponding to each of the one or more device identification information as user identification information of each of the one or more event-related users, based on the first mapping information.
청구항 9에 있어서,
상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고,
상기 하나 이상의 하드웨어 프로세서는, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 장치.
10. The method of claim 9,
The event information further includes medium identification information on an online advertisement medium that caused the installation event in each of the plurality of user devices among one or more online advertisement media providing the application installation advertisement,
The one or more hardware processors are configured to: based on the event information and the service access information, user identification information of each of the one or more event-related users and an online advertising medium associated with each of the one or more event-related users of the one or more online advertising media Advertising effectiveness analysis device to identify the medium identification information of.
청구항 13에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고,
상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 광고 효과 분석 장치.
14. The method of claim 13,
The one or more hardware processors are configured to obtain, based on user identification information of each of the one or more event-related users, activity information of each of the one or more event-related users for the service;
An advertisement effect analysis apparatus for generating analysis information for each of the at least one online advertisement medium based on the activity information and the medium identification information of the online advertisement medium associated with each of the one or more event-related users.
청구항 13에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고,
상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하고,
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 장치.
14. The method of claim 13,
The one or more hardware processors are configured to: a first mapping including a correspondence relationship between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users based on the service connection information create information,
Based on the event information, generating second mapping information including a correspondence relationship between the medium identification information of each of the one or more online advertisement media and the device identification information of each of the plurality of user devices,
An advertisement effect analysis apparatus for identifying user identification information of each of the one or more event-related users and media identification information of an online advertising medium associated with each of the one or more event-related users based on the first mapping information and the second mapping information .
청구항 15에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 광고 성과 분석 장치.
16. The method of claim 15,
The one or more hardware processors are configured to detect, based on the first mapping information and the second mapping information, an online advertising medium suspected of being advertisement abusing among the one or more advertising media.
KR1020200122742A 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect KR102483200B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Publications (2)

Publication Number Publication Date
KR20220040033A true KR20220040033A (en) 2022-03-30
KR102483200B1 KR102483200B1 (en) 2022-12-30

Family

ID=80948100

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Country Status (1)

Country Link
KR (1) KR102483200B1 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120007889A (en) * 2010-07-15 2012-01-25 (주)네오위즈게임즈 Method, system and recording medium for verifying effect of advertisement
KR20170125765A (en) * 2017-10-12 2017-11-15 김명수 Application installation reward system and service method of using the same
KR20170141475A (en) * 2016-06-15 2017-12-26 에스케이플래닛 주식회사 Apparatus for advertisement platform and control method thereof

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120007889A (en) * 2010-07-15 2012-01-25 (주)네오위즈게임즈 Method, system and recording medium for verifying effect of advertisement
KR20170141475A (en) * 2016-06-15 2017-12-26 에스케이플래닛 주식회사 Apparatus for advertisement platform and control method thereof
KR20170125765A (en) * 2017-10-12 2017-11-15 김명수 Application installation reward system and service method of using the same

Also Published As

Publication number Publication date
KR102483200B1 (en) 2022-12-30

Similar Documents

Publication Publication Date Title
US10062092B1 (en) Constraining ad service based on app content
US8880541B2 (en) Qualification of website data and analysis using anomalies relative to historic patterns
US10318988B2 (en) Managing cookie data
US20110214163A1 (en) Automated analysis of cookies
KR20110032878A (en) Keyword ad. method and system for social networking service
US20150310485A1 (en) Systems and methods for attribution of actions without utilizing persistent client-side storage or cross-process communication
WO2013184501A1 (en) Component analysis of software applications on computing devices
US20190333099A1 (en) Method and system for ip address traffic based detection of fraud
US20150073893A1 (en) Systems and methods of tracking conversions by location
US11055741B2 (en) Mobile advertisement providing system and method
US10437709B2 (en) Mobile application optimization platform
US20150242885A1 (en) Invitational content attribution
CN109040000B (en) User identification method and system based on IP address
CN111612512A (en) Resource allocation method and device and electronic equipment
US20160307237A1 (en) Accessing Advertised Application States From A Current Application State
EP3776432A1 (en) Processor systems to estimate audience sizes and impression counts for different frequency intervals
US20240037176A1 (en) Using embedded elements for online content verification
US20100082736A1 (en) Recording and/or use of generation information
US11564012B1 (en) Methods and apparatus to identify and triage digital ad ratings data quality issues
US20150262223A1 (en) Systems and methods for assigning credit for installs of applications
US20190333100A1 (en) Method and system for click to install behavior based detection of fraud
US10019726B2 (en) Supplemental analysis module for invitational content
US20150066636A1 (en) Systems and methods of attributing and compensating acquisition of influential users in a software application
KR102483200B1 (en) Method and apparatus for analyzing advertisement effect
US20150066893A1 (en) Systems and methods for attributing publishers for review-writing users

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant