KR102483200B1 - Method and apparatus for analyzing advertisement effect - Google Patents

Method and apparatus for analyzing advertisement effect Download PDF

Info

Publication number
KR102483200B1
KR102483200B1 KR1020200122742A KR20200122742A KR102483200B1 KR 102483200 B1 KR102483200 B1 KR 102483200B1 KR 1020200122742 A KR1020200122742 A KR 1020200122742A KR 20200122742 A KR20200122742 A KR 20200122742A KR 102483200 B1 KR102483200 B1 KR 102483200B1
Authority
KR
South Korea
Prior art keywords
information
event
identification information
user
advertisement
Prior art date
Application number
KR1020200122742A
Other languages
Korean (ko)
Other versions
KR20220040033A (en
Inventor
오희령
이은조
조만재
Original Assignee
주식회사 엔씨소프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 엔씨소프트 filed Critical 주식회사 엔씨소프트
Priority to KR1020200122742A priority Critical patent/KR102483200B1/en
Publication of KR20220040033A publication Critical patent/KR20220040033A/en
Application granted granted Critical
Publication of KR102483200B1 publication Critical patent/KR102483200B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0242Determining effectiveness of advertisements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0273Determination of fees for advertising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0277Online advertisement

Abstract

광고 효과 분석 방법 및 장치가 개시된다. 일 실시예에 따른 광고 효과 분석 방법은, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하는 동작; 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하는 동작; 및 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 동작을 포함한다.An advertising effect analysis method and apparatus are disclosed. An advertising effect analysis method according to an embodiment includes obtaining event information including device identification information of each of a plurality of user devices in which an application installation event has occurred through an application installation advertisement; Obtaining service access information including user identification information of each of a plurality of users accessing a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service. ; and identifying user identification information of one or more event-related users associated with the installation event among a plurality of users accessing the service, based on the event information and the service access information.

Description

광고 효과 분석 방법 및 장치{METHOD AND APPARATUS FOR ANALYZING ADVERTISEMENT EFFECT}Advertising effect analysis method and device {METHOD AND APPARATUS FOR ANALYZING ADVERTISEMENT EFFECT}

개시되는 실시예들은 광고 효과 분석 기술과 관련된다.The disclosed embodiments relate to advertising effectiveness analysis techniques.

일반적으로 애플리케이션 설치 광고와 같이 온라인 상에서 제공되는 온라인 광고는 광고주로부터 광고를 의뢰 받은 광고 대행 업체가 온라인 광고 매체를 통해 온라인 광고를 제공하는 방식으로 수행된다. 또한, 광고 대행 업체로 지급되는 광고비의 책정과 광고 대행 업체에 의해 제공된 온라인 광고에 대한 효과 분석은 온라인 광고에 반응한 사용자들의 사용자 장치로부터 수집된 광고 아이디에 기초하여 수행되고 있다.In general, online advertisements provided online, such as application installation advertisements, are performed in such a way that an advertisement agency that has received an advertisement request from an advertiser provides online advertisements through an online advertisement medium. In addition, the advertisement fee paid to the advertising agency and the analysis of the effect of the online advertisement provided by the advertising agency are performed based on the advertisement IDs collected from user devices of users responding to the online advertisement.

그러나, 사용자 장치로부터 수집되는 광고 아이디는 그 자체로 온라인 광고를 통해 실제 서비스에 유입된 사용자와 직접적인 연관관계를 가지는 것은 아니며, 사용자에 의해 변경 가능한 값이므로, 광고 아이디만으로 광고비를 책정하거나 온라인 광고에 대한 효과 분석을 수행하는 것에는 한계가 존재한다.However, the advertising ID collected from the user device itself does not have a direct relationship with the user actually entering the service through online advertising, and is a value that can be changed by the user. There are limitations in performing an effect analysis on

개시되는 실시예들은 광고 효과 분석 방법 및 장치를 제공하기 위한 것이다.Disclosed embodiments are to provide an advertising effect analysis method and apparatus.

일 실시예에 따른 광고 성과 분석 방법은, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하는 동작; 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하는 동작; 및 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 동작을 포함한다.An advertisement performance analysis method according to an embodiment includes obtaining event information including device identification information of each of a plurality of user devices in which an installation event of an application has occurred through an application installation advertisement; Obtaining service access information including user identification information of each of a plurality of users accessing a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service. ; and identifying user identification information of one or more event-related users associated with the installation event among a plurality of users accessing the service, based on the event information and the service access information.

상기 장치 식별 정보는, 광고 아이디일 수 있다.The device identification information may be an advertisement ID.

상기 광고 성과 분석 방법은, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및 상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 동작을 더 포함할 수 있다.The advertisement performance analysis method may include obtaining activity information of each of the one or more event-related users for the service based on user identification information of each of the one or more event-related users; and generating analysis information on the application installation advertisement based on the activity information.

상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작; 상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하는 동작; 및 상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 동작을 포함할 수 있다.The identifying operation may include first mapping information including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. the operation of generating; identifying one or more pieces of device identification information commonly included in the event information and the service access information; and identifying user identification information corresponding to each of the one or more device identification information as user identification information of each of the one or more event-related users, based on the first mapping information.

상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고, 상기 식별하는 동작은, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The event information may further include medium identification information for an online advertisement medium that has caused the installation event in each of the plurality of user devices among one or more online advertisement mediums providing the application installation advertisement, and the identifying operation comprises: Based on the event information and the service access information, user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users among the one or more online advertising media may be identified. can

상기 광고 성과 분석 방법은, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 동작을 더 포함할 수 있다.The advertisement performance analysis method may include obtaining activity information of each of the one or more event-related users for the service based on user identification information of each of the one or more event-related users; and generating analysis information for each of the one or more online advertising media based on the medium identification information and the activity information of the online advertising media associated with each of the one or more event-related users.

상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작; 상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하는 동작; 및 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 동작을 포함할 수 있다.The identifying operation may include first mapping information including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. the operation of generating; generating second mapping information including a correspondence between medium identification information of each of the one or more online advertising media and device identification information of each of the plurality of user devices, based on the event information; and identifying user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users, based on the first mapping information and the second mapping information. can do.

상기 광고 성과 분석 방법은, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 동작을 더 포함할 수 있다.The advertisement performance analysis method may further include detecting, based on the first mapping information and the second mapping information, an online advertisement medium suspected of ad abusing among the one or more advertisement mediums.

일 실시예에 따른 광고 성과 분석 장치는, 하나 이상의 하드웨어 프로세서; 및 하나 이상의 통신 인터페이스를 포함하고, 상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 통신 인터페이스를 통해, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하고, 상기 하나 이상의 통신 인터페이스를 통해, 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하고, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다.An advertisement performance analysis device according to an embodiment includes one or more hardware processors; and one or more communication interfaces, wherein the one or more hardware processors, through the one or more communication interfaces, event information including device identification information of each of a plurality of user devices in which an installation event of an application has occurred through an application installation advertisement. Obtaining, through the one or more communication interfaces, user identification information of each of a plurality of users accessing a service provided through the application and a device of a user device used by each of the plurality of users to access the service. Acquire service access information including identification information, and identify user identification information of each of one or more event-related users associated with the installation event among a plurality of users accessing the service based on the event information and the service access information. do.

상기 장치 식별 정보는, 광고 아이디일 수 있다.The device identification information may be an advertisement ID.

상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고, 상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성할 수 있다.The one or more hardware processors obtain activity information of each of the one or more event-related users for the service based on user identification information of each of the one or more event-related users, and the application installation advertisement based on the activity information. You can generate analysis information about.

상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고, 상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하고, 상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별할 수 있다.The one or more hardware processors perform first mapping including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. generate information, identify one or more device identification information commonly included in the event information and the service access information, and based on the first mapping information, user identification information corresponding to each of the one or more device identification information It can be identified by user identification information of each of the one or more event-related users.

상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고, 상기 하나 이상의 하드웨어 프로세서는, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The event information may further include media identification information for an online advertising medium that causes the installation event in each of the plurality of user devices among one or more online advertising media providing the application installation advertisement, and wherein the one or more hardware processors Based on the event information and the service access information, user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users among the one or more online advertising media are identified. can do.

상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고, 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성할 수 있다.The one or more hardware processors obtain activity information of each of the one or more event-related users for the service based on the user identification information of each of the one or more event-related users, and the one or more event-related users associated with the online online service. Analysis information for each of the one or more online advertisement media may be generated based on the medium identification information of the advertisement medium and the activity information.

상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고, 상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하고, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다.The one or more hardware processors perform first mapping including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. generate second mapping information including a correspondence between medium identification information of each of the one or more online advertising media and device identification information of each of the plurality of user devices, based on the event information; Based on the first mapping information and the second mapping information, user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users may be identified.

상기 하나 이상의 하드웨어 프로세서는, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지할 수 있다.The one or more hardware processors may detect, based on the first mapping information and the second mapping information, an online advertising medium suspected of ad abusing among the one or more advertising media.

개시되는 실시예들에 따르면, 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 중 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 사용자 장치와 연관된 사용자를 식별 가능하도록 함으로써, 애플리케이션 설치 광고에 대한 보다 효과적인 분석이 가능하게 된다.According to the disclosed embodiments, it is possible to identify a user associated with a user device in which an application installation event has occurred through an application installation advertisement among a plurality of users accessing a service provided through an application, thereby providing more information about application installation advertisements. effective analysis is possible.

도 1은 일 실시예에 따른 광고 효과 분석을 위한 시스템 환경의 일 예를 나타낸 도면이다.
도 2는 일 실시예에 따른 광고 분석 장치의 구성도이다.
도 3은 일 실시예에 따른 제1 맵핑 정보의 일 예를 나타낸 도면이다.
도 4는 일 실시예에 따른 제2 맵핑 정보의 일 예를 나타낸 도면이다.
도 5는 일 실시예에 따른 제3 맵핑 정보의 일 예를 나타낸 도면이다.
도 6 내지 도 8은 일 실시예에 따라 분석부에 의해 생성되는 분석 정보의 일 예를 나타낸 도면이다.
도 9는 일 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 10은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 11은 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하기 위한 방법의 순서도이다.
도 12는 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 13은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.
도 14는 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보 및 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하기 위한 방법의 순서도이다.
도 15는 일 실시예에 따른 광고 어뷰징 탐지 방법의 순서도이다.
도 16은 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다.
1 is a diagram illustrating an example of a system environment for analyzing advertisement effects according to an embodiment.
2 is a configuration diagram of an advertisement analysis device according to an embodiment.
3 is a diagram illustrating an example of first mapping information according to an embodiment.
4 is a diagram illustrating an example of second mapping information according to an embodiment.
5 is a diagram illustrating an example of third mapping information according to an embodiment.
6 to 8 are diagrams illustrating examples of analysis information generated by an analyzer according to an exemplary embodiment.
9 is a flowchart of an advertising effect analysis method according to an embodiment.
10 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.
11 is a flowchart of a method for identifying user identification information of each event-related user according to an embodiment.
12 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.
13 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.
14 is a flowchart of a method for identifying user identification information of each event-related user and medium identification information of an online advertising medium associated with each event-related user according to an embodiment.
15 is a flowchart of a method for detecting advertisement abusing according to an embodiment.
16 is a block diagram illustrating a computing environment including a computing device according to an exemplary embodiment.

이하, 도면을 참조하여 구체적인 실시형태를 설명하기로 한다. 이하의 상세한 설명은 본 명세서에서 기술된 방법, 장치 및/또는 시스템에 대한 포괄적인 이해를 돕기 위해 제공된다. 그러나 이는 예시에 불과하며 본 발명은 이에 제한되지 않는다.Hereinafter, specific embodiments will be described with reference to the drawings. The detailed descriptions that follow are provided to provide a comprehensive understanding of the methods, devices and/or systems described herein. However, this is only an example and the present invention is not limited thereto.

실시예들을 설명함에 있어서, 관련된 공지기술에 대한 구체적인 설명이 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하기로 한다. 그리고, 후술되는 용어들은 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다. 상세한 설명에서 사용되는 용어는 단지 실시예들을 기술하기 위한 것이며, 결코 제한적이어서는 안 된다. 명확하게 달리 사용되지 않는 한, 단수 형태의 표현은 복수 형태의 의미를 포함한다. 본 설명에서, "포함" 또는 "구비"와 같은 표현은 어떤 특성들, 숫자들, 단계들, 동작들, 요소들, 이들의 일부 또는 조합을 가리키기 위한 것이며, 기술된 것 이외에 하나 또는 그 이상의 다른 특성, 숫자, 단계, 동작, 요소, 이들의 일부 또는 조합의 존재 또는 가능성을 배제하도록 해석되어서는 안 된다.In describing the embodiments, if it is determined that a detailed description of related known technologies may unnecessarily obscure the subject matter, the detailed description will be omitted. In addition, terms to be described later are terms defined in consideration of functions, which may vary according to intentions or customs of users and operators. Therefore, the definition should be made based on the contents throughout this specification. Terminology used in the detailed description is only for describing the embodiments and should in no way be limiting. Unless expressly used otherwise, singular forms of expression include plural forms. In this description, expressions such as "comprising" or "comprising" are intended to indicate any characteristic, number, step, operation, element, portion or combination thereof, one or more other than those described. It should not be construed to exclude the existence or possibility of any other feature, number, step, operation, element, part or combination thereof.

도 1은 일 실시예에 따른 광고 효과 분석을 위한 시스템 환경의 일 예를 나타낸 도면이다.1 is a diagram illustrating an example of a system environment for analyzing advertisement effects according to an embodiment.

도 1을 참조하면, 일 실시예에 따른 시스템 환경(100)은 사용자 장치(110), 온라인 광고 매체(120), 광고 트래킹 장치(130), 사용자 정보 제공 장치(140) 및 광고 효과 분석 장치(150)를 포함한다.Referring to FIG. 1 , a system environment 100 according to an embodiment includes a user device 110, an online advertising medium 120, an advertisement tracking device 130, a user information providing device 140, and an advertising effect analysis device ( 150).

사용자 장치(110)는 애플리케이션 설치 광고를 통해 광고되는 애플리케이션(이하, '광고 대상 애플리케이션')의 설치 대상이 되는 장치이다. 일 실시예에서, 사용자 장치(110)는 스마트폰, 태블릿 PC, 패블릿(phablet) 등과 같이 사용자가 소지하여 이동 가능한 모바일 디바이스일 수 있다. 그러나, 사용자 장치(110)는 애플리케이션 설치 광고를 통한 광고 대상 애플리케이션의 설치 및 실행이 가능하며, 후술할 바와 같이 사용자 장치(110)를 고유하게 식별할 수 있는 장치 식별자가 할당되어 있는 다양한 형태의 장치일 수 있으며, 반드시 특정한 형태의 장치로 한정되는 것은 아니다. The user device 110 is a device that is an installation target of an application advertised through an application installation advertisement (hereinafter referred to as 'ad target application'). In one embodiment, the user device 110 may be a mobile device carried and movable by a user, such as a smart phone, a tablet PC, or a phablet. However, the user device 110 is capable of installing and executing an advertisement target application through an application installation advertisement, and as will be described later, various types of devices to which a device identifier capable of uniquely identifying the user device 110 is assigned. It may be, and is not necessarily limited to a specific type of device.

한편, 도 1에 도시된 예에서는 설명의 편의를 위해 사용자 장치(110)가 하나인 것으로 예시하고 있으나, 사용자 장치(110)의 개수는 실시예에 따라 변경될 수 있으며 반드시 특정한 개수로 한정되는 것은 아니다.Meanwhile, in the example shown in FIG. 1, for convenience of description, one user device 110 is exemplified, but the number of user devices 110 may be changed according to embodiments, and it is not necessarily limited to a specific number. no.

온라인 광고 매체(120)는 온라인 상에서 사용자 장치(110)로 제공되는 화면을 통해 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 광고 매체를 의미할 수 있다. 예를 들어, 온라인 광고 매체(120)는 소셜 네트워크 서비스, 동영상 서비스, 온라인 게임 서비스, 모바일 게임 서비스, 온라인 상거래 서비스, 메신저 서비스 등과 같이 온라인 상에서 특정한 서비스를 제공하는 웹 사이트 또는 전용 애플리케이션일 수 있다. The online advertising medium 120 may refer to an advertising medium that provides an application installation advertisement for an advertisement target application through a screen provided to the user device 110 online. For example, the online advertising medium 120 may be a website or dedicated application that provides a specific service online, such as a social network service, a video service, an online game service, a mobile game service, an online commerce service, and a messenger service.

한편, 도 1에 도시된 예에서는 설명의 편의를 위해 온라인 광고 매체(120)가 하나인 것으로 예시하고 있으나, 온라인 광고 매체(120)의 개수는 실시예에 따라 변경될 수 있으며 반드시 특정한 개수로 한정되는 것은 아니다.Meanwhile, in the example shown in FIG. 1, for convenience of description, one online advertising medium 120 is exemplified, but the number of online advertising mediums 120 may be changed according to embodiments and is necessarily limited to a specific number. it is not going to be

애플리케이션 설치 광고는 온라인 광고 매체(120)를 통해 애플리케이션 설치 광고에 노출된 사용자가 광고 대상 애플리케이션을 사용자 장치(110)에 설치하도록 유도하기 위한 광고를 의미할 수 있다. 예를 들어, 애플리케이션 설치 광고는 온라인 광고 매체(120)에 의해 사용자 장치(110)로 제공되는 화면 상에 텍스트 광고, 배너 광고, 팝업 광고, 동영상 광고 등과 같이 텍스트, 이미지 및 동영상 중 적어도 하나가 결합된 형태로 표시될 수 있다.The application installation advertisement may refer to an advertisement for inducing a user exposed to the application installation advertisement through the online advertisement medium 120 to install the advertisement target application on the user device 110 . For example, the application installation advertisement combines at least one of text, image, and video, such as a text advertisement, a banner advertisement, a pop-up advertisement, and a video advertisement on a screen provided to the user device 110 by the online advertisement medium 120. can be displayed in the form of

광고 트래킹 장치(130)는 온라인 광고 매체(120)를 통해 사용자 장치(110)로 제공되는 애플리케이션 설치 광고와 연관된 다양한 정보를 수집하기 위한 장치이다.The advertisement tracking device 130 is a device for collecting various information related to an application installation advertisement provided to the user device 110 through the online advertisement medium 120 .

일 실시예에 따르면, 애플리케이션 설치 광고는 애플리케이션 설치 광고에 반응한 사용자의 사용자 장치(110)가 광고 트래킹 장치(130)로 접속되도록 할 수 있다. 이 경우, 광고 트래킹 장치(130)는 애플리케이션 설치 광고를 통해 광고 트래킹 장치(130)에 접속한 사용자 장치(110)로부터 하나 이상의 정보를 수집한 후, 광고 대상 애플리케이션을 다운로드할 수 있는 사전 설정된 목적지로 사용자 장치(110)를 리다이렉트(redirect) 할 수 있다. 이때, 사전 설정된 목적지는 예를 들어, 구글 플레이(Google Play), 애플 앱 스토어(Apple App Store) 등과 같은 애플리케이션 유통 플랫폼 내에서 광고 대상 애플리케이션에 대한 다운로드를 제공하는 페이지일 수 있다.According to an embodiment, the application installation advertisement may cause the user device 110 of the user responding to the application installation advertisement to be connected to the advertisement tracking device 130 . In this case, the advertisement tracking device 130 collects one or more pieces of information from the user device 110 accessing the advertisement tracking device 130 through the application installation advertisement, and then sends the advertisement target application to a preset destination where the application can be downloaded. The user device 110 may be redirected. In this case, the preset destination may be, for example, a page providing download of an advertisement target application within an application distribution platform such as Google Play, Apple App Store, and the like.

구체적인 예로, 애플리케이션 설치 광고에는 경유지 주소, 목적지 주소 및 사용자 장치(110)로부터 수집할 하나 이상의 정보 각각에 대응되는 파라미터를 포함하는 트래킹 URL(tracking Uniform Resource Location)이 설정될 수 있다. 이 경우, 사용자 장치(110)의 사용자가 애플리케이션 설치 광고에 대한 클릭, 터치 등과 같은 조작을 통해 애플리케이션 설치 광고에 반응한 경우, 사용자 장치(110)는 트래킹 URL에 포함된 각 파라미터에 대응되는 정보를 트래킹 URL에 추가할 수 있다. 또한, 사용자 장치(110)는 트래킹 URL에 포함된 경유지 주소인 광고 트래킹 장치(130)로 접속하여 트래킹 URL을 제공할 수 있다. 이후, 광고 트래킹 장치(130)는 트래킹 URL에 추가된 정보를 수집한 후, 사용자 장치(110)를 트래킹 URL에 포함된 목적지 주소로 리다이렉트할 수 있다.As a specific example, a tracking uniform resource location (URL) including parameters corresponding to each of a waypoint address, a destination address, and one or more pieces of information to be collected from the user device 110 may be set in the application installation advertisement. In this case, when the user of the user device 110 responds to the application installation advertisement through an operation such as clicking or touching the application installation advertisement, the user device 110 transmits information corresponding to each parameter included in the tracking URL. You can add it to your tracking URL. In addition, the user device 110 may provide a tracking URL by accessing the advertisement tracking device 130, which is a waypoint address included in the tracking URL. Then, after collecting the information added to the tracking URL, the advertisement tracking device 130 may redirect the user device 110 to the destination address included in the tracking URL.

한편, 일 실시예에 따르면, 광고 트래킹 장치(130)에 접속한 사용자 장치(110)부터 수집되는 하나 이상의 정보는 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. 이때, 장치 식별 정보는 예를 들어, GAID(Google Advertising ID), IDFA(ID For Advertisers) 등과 같이 광고를 목적으로 사용자 장치(110)를 고유하게 식별하기 위해 사용자 장치(110)에 할당된 광고 아이디(Advertising ID, ADID)일 수 있다. 그러나, 장치 식별 정보는 반드시 광고 아이디에 한정되는 것은 아니며, 실시예에 따라 사용자 장치(110)로부터 획득 가능하며 사용자 장치(110)를 고유하게 식별하기 위해 사용될 수 있는 다양한 종류의 정보가 사용자 장치(110)의 장치 식별 정보로 이용될 수 있다. Meanwhile, according to an embodiment, one or more pieces of information collected from the user device 110 accessing the advertisement tracking device 130 may include device identification information of the user device 110 . At this time, the device identification information is, for example, an advertising ID assigned to the user device 110 to uniquely identify the user device 110 for advertising purposes, such as GAID (Google Advertising ID), IDFA (ID For Advertisers), etc. (Advertising ID, ADID). However, the device identification information is not necessarily limited to the advertisement ID, and various types of information that can be obtained from the user device 110 and can be used to uniquely identify the user device 110 according to an embodiment are the user device ( 110) may be used as device identification information.

추가적인 실시예에 따르면, 광고 트래킹 장치(130)에 접속한 사용자 장치(110)로부터 수집되는 하나 이상의 정보는 사용자 장치(110)로 애플리케이션 설치 광고를 제공한 온라인 광고 매체(120)의 매체 식별 정보를 더 포함할 수 있다. 이때, 매체 식별 정보는 예를 들어, 온라인 광고 매체(120)의 명칭일 수 있으나, 실시예에 따라 온라인 광고 매체(120)를 고유하게 식별하기 위해 사용될 수 있는 다양한 종류의 정보가 온라인 광고 매체(120)의 매체 식별 정보로 이용될 수 있다.According to a further embodiment, one or more pieces of information collected from the user device 110 accessing the advertisement tracking device 130 includes media identification information of the online advertising medium 120 that provided the application installation advertisement to the user device 110. can include more. In this case, the medium identification information may be, for example, the name of the online advertising medium 120, but various types of information that can be used to uniquely identify the online advertising medium 120 may be used according to an embodiment ( 120) may be used as medium identification information.

한편, 일 실시예에 따르면, 광고 트래킹 장치(130)는 애플리케이션 설치 광고를 통해 광고 트래킹 장치(130)로 접속한 사용자 장치(110)로부터 수집된 하나 이상의 정보를 포함하는 광고 트래킹 정보를 저장하고, 저장된 광고 트래킹 정보에 기초하여 사용자 장치(110)에 광고 대상 애플리케이션에 대한 설치 이벤트가 발생하였는지 여부를 판단할 수 있다.Meanwhile, according to one embodiment, the advertisement tracking device 130 stores advertisement tracking information including one or more pieces of information collected from the user device 110 accessed to the advertisement tracking device 130 through an application installation advertisement, Based on the stored advertisement tracking information, it may be determined whether an installation event for an advertisement target application has occurred in the user device 110 .

구체적으로, 일 실시예에 따르면, 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션이 사용자 장치(110)에 다운로드되어 설치된 경우, 광고 트래킹 장치(130)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션으로부터 사용자 장치(110)의 장치 식별 정보를 획득할 수 있다. 이를 위해, 광고 대상 애플리케이션에는 예를 들어, 광고 대상 애플리케이션이 사용자 장치(110)에 설치되어 최초로 실행된 경우 사용자 장치(110)의 장치 식별 정보를 수집하여 광고 트래킹 장치(130)로 제공하도록 설정된 트래킹 SDK(Software Development Kit)가 사전 삽입될 수 있다. Specifically, according to one embodiment, when an application to be advertised is downloaded and installed on the user device 110 through an application installation advertisement, the advertisement tracking device 130 is sent from the application to be advertised installed on the user device 110 to the user device ( 110) device identification information may be obtained. To this end, in the advertisement target application, for example, when the advertisement target application is installed on the user device 110 and executed for the first time, device identification information of the user device 110 is collected and tracking set to be provided to the advertisement tracking device 130. A Software Development Kit (SDK) can be pre-inserted.

한편, 광고 트래킹 장치(130)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션으로부터 획득한 장치 식별 정보와 광고 트래킹 정보에 포함된 장치 식별 정보를 비교하여 일치하는 경우, 애플리케이션 설치 광고를 통해 사용자 장치(110)에서 광고 대상 애플리케이션에 대한 설치 이벤트가 발생된 것으로 판단할 수 있다. On the other hand, the advertisement tracking device 130 compares the device identification information obtained from the advertisement target application installed on the user device 110 with the device identification information included in the advertisement tracking information, and when they match, the user device through the application installation advertisement ( In step 110), it may be determined that an installation event for an application to be advertised has occurred.

또한, 광고 트래킹 장치(130)는 사용자 장치(110)에서 광고 대상 애플리케이션에 대한 설치 이벤트가 발생된 것으로 판단한 경우, 발생된 설치 이벤트와 관련된 정보를 포함하는 이벤트 정보를 광고 효과 분석 장치(150)로 제공할 수 있다. 이때, 일 실시예에 따르면, 이벤트 정보는 설치 이벤트가 발생된 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. 또한, 실시예에 따라, 이벤트 정보는 애플리케이션 설치 광고를 통해 사용자 장치(110)에 설치 이벤트를 유발시킨 온라인 광고 매체(120)의 매체 식별 정보를 더 포함할 수 있다.In addition, when the advertisement tracking device 130 determines that an installation event for an advertisement target application has occurred in the user device 110, the event information including information related to the generated installation event is sent to the advertisement effect analysis device 150. can provide In this case, according to an embodiment, the event information may include device identification information of the user device 110 where the installation event has occurred. Also, according to embodiments, the event information may further include media identification information of the online advertising medium 120 that caused the installation event to the user device 110 through the application installation advertisement.

사용자 정보 제공 장치(140)는 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 사용자와 관련된 사용자 정보를 광고 효과 분석 장치(150)로 제공하기 위한 장치이다. The user information providing device 140 is a device for providing user information related to a user accessing a service provided through an advertisement target application to the advertising effect analysis device 150 .

일 실시예에 따르면, 사용자 정보는 광고 대상 애플리케이션을 통해 서비스에 접속한 각 사용자의 서비스 접속 정보를 포함할 수 있다. 이때, 서비스 접속 정보는 서비스에 접속한 사용자의 사용자 식별 정보 및 서비스에 접속한 사용자가 서비스에 접속하기 위해 이용한 사용자 장치(110)의 장치 식별 정보를 포함할 수 있다. According to an embodiment, the user information may include service access information of each user accessing a service through an advertisement target application. In this case, the service access information may include user identification information of a user accessing the service and device identification information of the user device 110 used by the user accessing the service to access the service.

한편, 사용자 식별 정보는 예를 들어, 사용자에 의해 서비스에 등록된 사용자 계정의 아이디일 수 있으나 서비스를 이용하는 각 사용자를 고유하게 식별하기 위해 이용될 수 있는 다양한 정보가 사용자 식별 정보로 이용될 수 있다.On the other hand, user identification information may be, for example, an ID of a user account registered in a service by a user, but various information that can be used to uniquely identify each user using a service may be used as user identification information. .

일 실시예에 따르면, 사용자 정보 제공 장치(140)는 사용자 장치(110)에 설치된 광고 대상 애플리케이션과 연동하여 사용자의 서비스 접속 정보를 수집할 수 있다. 구체적으로, 사용자 장치(110)에 설치된 광고 대상 애플리케이션은 사전 설정된 이벤트가 발생한 경우, 사용자 정보 제공 장치(140)로 서비스 접속 정보를 제공하도록 설정될 수 있다. 이때, 사전 설정된 이벤트는 예를 들어, 광고 대상 애플리케이션을 통해 사용자 계정이 생성된 경우, 광고 대상 애플리케이션이 사용자 장치(110)에서 최초로 실행된 후 사용자 계정에 대한 로그인이 이루어진 경우 등일 수 있으나 반드시 이에 한정되는 것은 아니며 실시예에 따라 다양하게 설정될 수 있다. According to an embodiment, the user information providing device 140 may collect service access information of a user in association with an application to be advertised installed on the user device 110 . Specifically, the advertisement target application installed in the user device 110 may be configured to provide service access information to the user information providing device 140 when a preset event occurs. At this time, the preset event may be, for example, when a user account is created through the application to be advertised, or when a user account is logged in after the application to be advertised is executed for the first time on the user device 110, but is necessarily limited thereto. It is not, and may be set in various ways according to the embodiment.

한편, 일 실시예에 따르면, 사용자 정보는 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 사용자의 활동 정보를 포함할 수 있다. 구체적으로, 사용자 정보 제공 장치(140)는 광고 효과 분석 장치(150)의 요청에 따라 특정한 사용자 식별 정보에 대응되는 사용자의 활동 정보를 광고 분석 장치(150)로 제공할 수 있다. 이때, 사용자의 활동 정보는 사용자에 의해 서비스 내에서 이루어진 행위에 기초하여 생성될 수 있는 다양한 정보를 포함할 수 있다. 예를 들어, 사용자의 활동 정보는 사용자 계정 생성 시점, 최초 접속 시점, 최종 접속 시점, 총 결제 금액, 최근 결제 금액, 상품 구매 내역, 서비스 내 컨텐츠 이용 내역 등과 같은 다양한 정보를 포함할 수 있다. 그러나, 활동 정보에 포함된 정보는 반드시 상술한 예에 한정되는 것은 아니며, 서비스의 종류 및 형태에 따라 변경할 수 있다.Meanwhile, according to an embodiment, user information may include user activity information for a service provided through an advertisement target application. Specifically, the user information providing device 140 may provide user activity information corresponding to specific user identification information to the advertisement analyzing device 150 according to a request of the advertisement effect analyzing device 150 . In this case, the activity information of the user may include various types of information that may be generated based on actions performed by the user within the service. For example, the activity information of the user may include various information such as the time of user account creation, the time of first access, the time of last access, total payment amount, recent payment amount, product purchase details, content use details within the service, and the like. However, the information included in the activity information is not necessarily limited to the above example, and may be changed according to the type and type of service.

한편, 일 실시예에 따르면, 사용자 정보 제공 장치(140)는 광고 대상 애플리케이션을 통해 서비스를 제공하는 서비스 제공 시스템에 포함된 하나 이상의 장치 내지는 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 모니터링 내지는 분석을 수행하기 위해 별도로 구비된 장치일 수 있다. Meanwhile, according to an embodiment, the user information providing device 140 monitors or analyzes services provided through one or more devices included in a service providing system that provides services through advertisement target applications or through advertisement target applications. It may be a device provided separately for this purpose.

도 2는 일 실시예에 따른 광고 효과 분석 장치의 구성도이다.2 is a configuration diagram of an advertisement effect analysis device according to an embodiment.

도 2를 참조하면, 광고 효과 분석 장치(150)는 이벤트 정보 획득부(151), 사용자 정보 획득부(152) 및 분석부(153)를 포함한다.Referring to FIG. 2 , the advertising effect analysis device 150 includes an event information obtaining unit 151 , a user information obtaining unit 152 and an analysis unit 153 .

일 실시예에 따르면, 이벤트 정보 획득부(151), 사용자 정보 획득부(152) 및 분석부(153)는 각각 물리적으로 구분된 하나 이상의 장치를 이용하여 구현되거나, 하나 이상의 하드웨어 프로세서 또는 하나 이상의 하드웨어 프로세서 및 소프트웨어의 결합에 의해 구현될 수 있으며, 도시된 예와 달리 구체적 동작에 있어 명확히 구분되지 않을 수 있다.According to one embodiment, the event information acquisition unit 151, the user information acquisition unit 152, and the analysis unit 153 are each implemented using one or more physically separated devices, one or more hardware processors, or one or more hardware processors. It may be implemented by a combination of a processor and software, and unlike the illustrated example, specific operations may not be clearly distinguished.

이벤트 정보 획득부(151)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다. The event information obtaining unit 151 obtains event information including device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred through an application installation advertisement.

구체적으로, 이벤트 정보 획득부(151)는 도 1에 도시된 광고 트래킹 장치(130)로부터 복수의 사용자 장치 각각에서 발생된 광고 대상 애플리케이션의 설치 이벤트에 대한 이벤트 정보를 획득할 수 있다.In detail, the event information acquisition unit 151 may obtain event information about an installation event of an application to be advertised that has occurred in each of a plurality of user devices from the advertisement tracking device 130 shown in FIG. 1 .

한편, 일 실시예에 따르면, 이벤트 정보는 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 광고 매체에 대한 매체 식별 정보를 더 포함할 수 있다. 구체적으로, 도 1에 도시된 예에서, 온라인 광고 매체(120)를 통해 제공된 애플리케이션 설치 광고를 통해 사용자 장치(110)에서 광고 대상 애플리케이션의 설치 이벤트가 발생한 경우, 해당 설치 이벤트에 대한 이벤트 정보는 사용자 장치(110)의 장치 식별 정보 및 온라인 광고 매체(120)의 매체 식별 정보를 포함할 수 있다.On the other hand, according to an embodiment, the event information is an advertising medium that triggers an installation event in each of a plurality of user devices in which an installation event of an application target application has occurred among one or more online advertising media providing an application installation advertisement for an application target application to be advertised. It may further include medium identification information for. Specifically, in the example shown in FIG. 1 , when an installation event of an application to be advertised occurs in the user device 110 through an application installation advertisement provided through an online advertising medium 120, event information for the installation event is provided to the user. It may include device identification information of the device 110 and medium identification information of the online advertising medium 120 .

사용자 정보 획득부(152)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다.The user information acquisition unit 152 is a service including user identification information of each of a plurality of users accessing the service through an advertisement target application and device identification information of a user device used by each of the plurality of users to access the corresponding service. Get access information.

구체적으로, 사용자 정보 획득부(152)는 도 1에 도시된 사용자 정보 제공 장치(140)로부터 복수의 사용자 각각에 대한 서비스 접속 정보를 획득할 수 있다.Specifically, the user information obtaining unit 152 may obtain service access information for each of a plurality of users from the user information providing device 140 shown in FIG. 1 .

분석부(153)는 이벤트 정보 획득부(151) 및 사용자 정보 획득부(152)에 의해 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션에 의해 제공되는 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별할 수 있다.Based on the event information and service access information acquired by the event information acquisition unit 151 and the user information acquisition unit 152, the analysis unit 153 is among a plurality of users accessing the service provided by the advertisement target application. User identification information of each of one or more event-related users associated with an installation event of an application to be advertised may be identified.

이때, 이벤트 연관 사용자는 애플리케이션 설치 광고를 통해 발생된 설치 이벤트에 의해 사용자 장치에 설치된 광고 대상 애플리케이션을 이용하여 서비스에 접속한 사용자를 의미할 수 있다.In this case, the event-related user may refer to a user who accesses the service by using an advertisement target application installed in the user device due to an installation event generated through an application installation advertisement.

일 실시예에 따르면, 분석부(153)는 사용자 정보 획득부(152)에 의해 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성할 수 있다. According to one embodiment, the analysis unit 153 is based on the service access information obtained by the user information acquisition unit 152, user identification information of each of a plurality of users accessing the service provided through the advertisement target application and First mapping information including a correspondence between device identification information of user devices used by each of a plurality of users may be generated.

도 3은 일 실시예에 따른 제1 맵핑 정보의 일 예를 나타낸 도면이다.3 is a diagram illustrating an example of first mapping information according to an embodiment.

도 3에 도시된 예에서는 제1 맵핑 정보(300)가 사용자 식별 정보와 장치 식별 정보가 맵핑된 맵핑 테이블의 형태로 생성된 것으로 가정하나, 제1 맵핑 정보(300)의 형태는 반드시 도시된 예에 한정되는 것은 아니다. In the example shown in FIG. 3 , it is assumed that the first mapping information 300 is created in the form of a mapping table in which user identification information and device identification information are mapped, but the form of the first mapping information 300 is necessarily the illustrated example. is not limited to

한편, 도 3에 도시된 예에서는 사용자 식별 정보가 'UID_1'인 제1 사용자가 장치 식별 정보가 'ADID_1'인 제1 사용자 장치와 장치 식별 정보가 'ADID_2'인 제2 사용자 장치 각각을 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 것으로 가정한다. 또한, 사용자 식별 정보가 'UID_2'인 제2 사용자가 'ADID_3'인 제3 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하고, 사용자 식별 정보가 'UID_3'인 제3 사용자가 'ADID_4'인 제4 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하고, 사용자 식별 정보가 'UID_4'인 제4 사용자가 'ADID_5'인 제5 사용자 장치를 이용하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 것으로 가정한다.Meanwhile, in the example shown in FIG. 3, a first user whose user identification information is 'UID_1' uses a first user device whose device identification information is 'ADID_1' and a second user device whose device identification information is 'ADID_2', respectively. It is assumed that a service provided through an advertisement target application is accessed. In addition, a second user whose user identification information is 'UID_2' uses a third user device whose user identification information is 'ADID_3' to access a service provided through an advertisement target application, and a third user whose user identification information is 'UID_3' A fourth user device with ADID_4 accesses a service provided through an application for advertisement, and a fourth user with user identification information of 'UID_4' uses a fifth user device with 'ADID_5' to access a service provided through an application for advertisement. It is assumed that you are connected to the provided service.

이 경우, 도 3에 도시된 제1 맵핑 정보(300)와 같이 'UID_1'은 'ADID_1' 및 'ADID_2'와 각각 맵핑되고, 'UID_2'는 'ADID_3'과 맵핑되며, 'UID_3'는 'ADID_4'와 맵핑되며 'UID_4'는 'ADID_5'와 맵핑될 수 있다.In this case, as in the first mapping information 300 shown in FIG. 3, 'UID_1' is mapped with 'ADID_1' and 'ADID_2', 'UID_2' is mapped with 'ADID_3', and 'UID_3' is mapped with 'ADID_4'. ' and 'UID_4' may be mapped with 'ADID_5'.

다시 도 2를 참조하면, 분석부(153)는 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 장치 식별 정보를 식별할 수 있다. 이때, 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보가 식별된 경우, 분석부(153)는 제1 맵핑 정보에 기초하여 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 이벤트 연관 사용자의 사용자 식별 정보로 식별할 수 있다. Referring back to FIG. 2 , the analyzer 153 may identify device identification information commonly included in event information and service access information. At this time, when one or more device identification information commonly included in the event information and the service access information is identified, the analyzer 153 transmits user identification information corresponding to each of the one or more device identification information to an event based on the first mapping information. It can be identified by the user identification information of the associated user.

예를 들어, 이벤트 정보와 서비스 접속 정보에 'ADID_2' 및 'ADID_3'가 공통적으로 포함되어 있고, 제1 맵핑 정보가 도 3에 도시된 예와 동일한 경우, 분석부(153)는 제1 맵핑 정보(300)에서 'ADID_2'에 맵핑된 'UID_1'과 'ADID_3'에 맵핑된 'UID_2'를 각각 이벤트 연관 사용자의 사용자 식별 정보로 결정할 수 있다.For example, when 'ADID_2' and 'ADID_3' are commonly included in the event information and the service access information and the first mapping information is the same as the example shown in FIG. 3, the analyzer 153 performs the first mapping information In step 300, 'UID_1' mapped to 'ADID_2' and 'UID_2' mapped to 'ADID_3' may be determined as user identification information of an event-related user.

한편, 일 실시예에 따르면, 이벤트 정보 획득부(151)에 의해 획득된 이벤트 정보에 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 함께 각 사용자 장치에 설치 이벤트를 유발시킨 온라인 광고 매체의 매체 식별 정보가 포함되어 있는 경우, 분석부(153)는 획득된 이벤트 정보에 기초하여 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성할 수 있다.On the other hand, according to an embodiment, an installation event is triggered in each user device together with device identification information of each of a plurality of user devices in which the installation event of the advertisement target application has occurred in the event information obtained by the event information acquisition unit 151. If the medium identification information of the requested online advertising medium is included, the analyzer 153 provides one or more device identification information of each of a plurality of user devices in which an installation event has occurred and application installation advertisements based on the obtained event information. Second mapping information including a correspondence between medium identification information of each online advertising medium may be generated.

도 4는 일 실시예에 따른 제2 맵핑 정보의 일 예를 나타낸 도면이다.4 is a diagram illustrating an example of second mapping information according to an embodiment.

도 4에 도시된 예에서는 제2 맵핑 정보(400)가 매체 식별 정보와 장치 식별 정보가 맵핑된 맵핑 테이블의 형태로 생성된 것으로 가정하나, 제2 맵핑 정보(400)의 형태는 반드시 도시된 예에 한정되는 것은 아니다.In the example shown in FIG. 4 , it is assumed that the second mapping information 400 is created in the form of a mapping table in which medium identification information and device identification information are mapped, but the form of the second mapping information 400 is necessarily the illustrated example. is not limited to

한편, 도 4에 도시된 예에서는 매체 식별 정보가 'media_1'인 온라인 광고 매체 1에 의해 제공된 애플리케이션 설치 광고에 의해 장치 식별 정보가 'ADID_1'인 제1 사용자 장치와 장치 식별 정보가 'ADID_4'인 제4 사용자 장치 각각에 광고 대상 애플리케이션의 설치 이벤트가 발생한 것으로 가정한다. 또한, 매체 식별 정보가 'media_2'인 온라인 광고 매체 2에 의해 제공된 애플리케이션 설치 광고에 의해 장치 식별 정보가 'ADID_5'인 제5 사용자 장치에 광고 대상 애플리케이션의 설치 이벤트가 발생한 것으로 가정한다.Meanwhile, in the example shown in FIG. 4 , an application installation advertisement provided by online advertising medium 1 having medium identification information 'media_1' results in a first user device having device identification information 'ADID_1' and a first user device having device identification information 'ADID_4'. It is assumed that an installation event of an advertisement target application has occurred in each of the fourth user devices. In addition, it is assumed that an installation event of an advertisement target application occurs in a fifth user device having device identification information 'ADID_5' due to an application installation advertisement provided by online advertising medium 2 having medium identification information 'media_2'.

이 경우, 도 4에 도시된 제2 맵핑 정보(400)와 같이 'media_1'은 'ADID_1' 및 'ADID_4'와 맵핑되고, 'media_2'는 'ADID_5'와 맵핑될 수 있다.In this case, as in the second mapping information 400 shown in FIG. 4 , 'media_1' may be mapped with 'ADID_1' and 'ADID_4', and 'media_2' may be mapped with 'ADID_5'.

다시 도 2를 참조하면, 분석부(153)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지할 수 있다. 이때, 광고 어뷰징은 예를 들어, SDK 스푸핑(spoofing)과 같이 부당한 광고 수익을 챙기기 위해 실제로는 광고 대상 애플리케이션이 설치되지 않은 사용자 장치에 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 것으로 조작하는 행위를 의미할 수 있다.Referring back to FIG. 2 , the analyzer 153 detects, based on the first mapping information and the second mapping information, advertisement abusing among one or more advertisement media providing application installation advertisements for advertisement target applications. Online advertising media can be detected. At this time, ad abusing is manipulated as an installation event of an application to be advertised through an application installation advertisement on a user device in which the application to be advertised is not actually installed in order to collect unreasonable advertising revenue, such as SDK spoofing. can mean the action of

구체적으로, 일 실시예에 따르면, 분석부(153)는 제2 맵핑 정보에 기초하여 하나 이상의 온라인 광고 매체 각각에 대응되는 장치 식별 정보를 식별한 후, 각 온라인 광고 매체에 대응되는 장치 식별 정보와 제1 맵핑 정보에 포함된 장치 식별 정보 사이의 매칭률을 결정할 수 있다. 또한, 분석부(153)는 결정된 매칭률에 기초하여 하나 이상의 온라인 광고 매체 중 광고 어뷰징이 의심되는 온라인 광고 매체를 탐지할 수 있다. Specifically, according to an embodiment, the analyzer 153 identifies device identification information corresponding to one or more online advertising media based on the second mapping information, and then identifies device identification information corresponding to each online advertising medium. A matching rate between device identification information included in the first mapping information may be determined. Also, the analyzer 153 may detect an online advertising medium suspected of ad abusing among one or more online advertising media based on the determined matching rate.

즉, 특정 온라인 광고 매체에 의해 제공된 애플리케이션 설치 광고를 통해 특정 사용자 장치에 발생한 설치 이벤트가 광고 어뷰징에 의해 발생한 거짓 이벤트인 경우, 해당 사용자 장치가 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속하기 위해 사용되었을 가능성이 낮다. 따라서, 분석부(153)는 예를 들어, 결정된 매칭률이 기 설정된 기준 값 이하인 광고 매체를 광고 어뷰징이 의심되는 온라인 광고 매체로 결정할 수 있다.That is, if the installation event that occurred in a specific user device through an application installation advertisement provided by a specific online advertising medium is a false event caused by ad abusing, the user device may have been used to access the service provided through the application targeted for advertisement. It is unlikely. Accordingly, the analysis unit 153 may determine, for example, an advertisement medium having a determined matching rate equal to or less than a predetermined reference value as an online advertisement medium suspected of ad abusing.

한편, 일 실시예에 따르면, 이벤트 정보에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보가 포함되어 있는 경우, 분석부(153)는 이벤트 정보 및 서비스 접속 정보에 기초하여, 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다. 구체적으로, 분석부(153)는 서비스 접속 정보에 기초하여 생성된 제1 맵핑 정보 및 이벤트 정보에 기초하여 생성된 제2 맵핑 정보에 기초하여 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별할 수 있다. On the other hand, according to an embodiment, if the event information includes media identification information for an online advertising medium that caused an installation event, the analyzer 153 analyzes each event-related user based on the event information and service access information. It is possible to identify the medium identification information of the online advertising medium associated with. Specifically, the analyzer 153 identifies media of online advertising media associated with one or more event-related users, based on first mapping information generated based on service access information and second mapping information generated based on event information. information can be identified.

보다 구체적으로, 분석부(153)는 제1 맵핑 정보에 포함된 사용자 식별 정보와 제2 맵핑 정보에 포함된 매체 식별 정보 중 동일한 장치 식별 정보에 대응되는 사용자 식별 정보 및 매체 식별 정보 사이의 대응 관계를 포함하는 제3 맵핑 정보를 생성할 수 있다.More specifically, the analysis unit 153 is a correspondence relationship between the user identification information included in the first mapping information and the user identification information and medium identification information corresponding to the same device identification information among the medium identification information included in the second mapping information Third mapping information including may be generated.

도 5는 일 실시예에 따른 제3 맵핑 정보의 일 예를 나타낸 도면이다.5 is a diagram illustrating an example of third mapping information according to an embodiment.

구체적으로, 도 5에서는 도 3에 도시된 제1 맵핑 정보(300) 및 도 4에 도시된 제2 맵핑 정보(400)에 기초하여 생성된 제3 맵핑 정보(500)를 도시하고 있다.Specifically, FIG. 5 illustrates third mapping information 500 generated based on the first mapping information 300 shown in FIG. 3 and the second mapping information 400 shown in FIG. 4 .

도 3 내지 5를 참조하면, 제1 맵핑 정보(300)와 제2 맵핑 정보(400)에 공통적으로 포함된 장치 식별 정보는 'ADID_1', 'ADID_4' 및 'ADID_5'이다. Referring to FIGS. 3 to 5 , device identification information commonly included in the first mapping information 300 and the second mapping information 400 is 'ADID_1', 'ADID_4', and 'ADID_5'.

따라서, 제3 맵핑 정보(500)는 제1 맵핑 정보(300)에서 'ADID_1', 'ADID_4' 및 'ADID_5' 각각에 맵핑된 'UID_1', 'UID_3' 및 'UID_4'와 제2 맵핑 정보(400)에서 'ADID_1', 'ADID_4' 및 'ADID_5' 각각에 맵핑된 'media_1' 및 'media_2'를 포함한다. 또한, 제3 맵핑 정보(500)에서 'UID_1' 및 'UID_3'는 각각 'media_1'에 맵핑되고, 'UID_4'는 'media_2'에 맵핑된다.Accordingly, the third mapping information 500 includes 'UID_1', 'UID_3', and 'UID_4' mapped to 'ADID_1', 'ADID_4', and 'ADID_5' respectively in the first mapping information 300 and the second mapping information ( 400) includes 'media_1' and 'media_2' mapped to 'ADID_1', 'ADID_4' and 'ADID_5', respectively. Also, in the third mapping information 500, 'UID_1' and 'UID_3' are each mapped to 'media_1', and 'UID_4' is mapped to 'media_2'.

한편, 제3 맵핑 정보(500)가 도 5에 도시된 예와 동일한 경우, 분석부(153)는 'UID_1', 'UID_3' 및 'UID_4'를 각각 이벤트 연관 사용자의 사용자 식별 정보로 결정할 수 있다. 또한, 분석부(153)는 'UID_1' 및 'UID_3'과 관련된 광고 매체의 매체 식별 정보를 'media_1'으로 결정하고, 'UID_4'와 연관된 광고 매체의 매체 식별 정보를 'media_2'로 결정할 수 있다.Meanwhile, when the third mapping information 500 is the same as the example shown in FIG. 5 , the analyzer 153 may determine 'UID_1', 'UID_3', and 'UID_4' as user identification information of an event-related user, respectively. . In addition, the analyzer 153 may determine media identification information of advertising media associated with 'UID_1' and 'UID_3' as 'media_1', and may determine medium identification information of advertising media associated with 'UID_4' as 'media_2'. .

일 실시예에 따르면, 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보가 결정된 경우, 사용자 정보 획득부(152)는 결정된 각 사용자 식별 정보에 기초하여 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 각 이벤트 연관 사용자의 활동 정보를 획득할 수 있다. 또한, 분석부(153)는 하나 이상의 이벤트 연관 사용자 각각의 활동 정보에 기초하여 애플리케이션 설치 광고에 대한 분석 정보를 생성할 수 있다. 이때, 애플리케이션 설치 광고에 대한 분석 정보는 예를 들어, 하나 이상의 이벤트 연관 사용자 각각의 사용자 유형, 콘텐츠 이용 유형, 상품 구매 유형, 결제 패턴 등과 같이 획득된 활동 정보에 기초하여 분석 가능한 다양한 정보를 포함할 수 있다. According to an embodiment, when user identification information for each of one or more event-related users is determined, the user information acquisition unit 152 determines each event-related user for a service provided through an application to be advertised based on the determined user identification information. activity information can be obtained. In addition, the analyzer 153 may generate analysis information about an application installation advertisement based on activity information of each user associated with one or more events. At this time, the analysis information on the application installation advertisement may include various information that can be analyzed based on the acquired activity information, such as, for example, the user type of each user associated with one or more events, content use type, product purchase type, and payment pattern. can

한편, 일 실시예에 따르면, 애플리케이션 설치 광고에 대한 분석 정보는 애플리케이션 설치 광고를 제공한 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 포함할 수 있다. 이때, 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보는 예를 들어, 각 온라인 광고 매체와 연관된 이벤트 연관 사용자의 수, 각 온라인 광고 매체와 연관된 이벤트 연관 사용자 각각의 사용자 유형, 콘텐츠 이용 유형, 상품 구매 유형, 결제 패턴 등과 같이 획득된 활동 정보에 기초하여 분석 가능한 다양한 정보를 포함할 수 있다.Meanwhile, according to an embodiment, the analysis information on the application installation advertisement may include analysis information on each of one or more online advertisement media that provided the application installation advertisement. At this time, the analysis information for each of the one or more online advertising media may include, for example, the number of event-related users associated with each online advertising media, user type of each user associated with an event associated with each online advertising media, content use type, and product purchase type. , payment pattern, etc., may include various information that can be analyzed based on the acquired activity information.

도 6 내지 도 8은 일 실시예에 따라 분석부(153)에 의해 생성되는 분석 정보의 일 예를 나타낸 도면이다.6 to 8 are diagrams illustrating examples of analysis information generated by the analyzer 153 according to an exemplary embodiment.

구체적으로, 분석부(153)에 의해 생성되는 분석 정보는 도 6에 도시된 예와 같이 이벤트 연관 사용자 각각의 사용자 유형을 신규 사용자, 복귀 사용자 및 기존 사용자 중 하나로 분류한 후, 분류한 결과에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.Specifically, the analysis information generated by the analyzer 153 classifies the user type of each event-related user into one of a new user, a returning user, and an existing user, as in the example shown in FIG. It may be information that visually expresses statistics through graphs.

다른 예로, 분석부(153)에 의해 생성되는 분석 정보는 도 7에 도시된 예와 같이 이벤트 연관 사용자들 중 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 각 광고 매체와 연관된 이벤트 연관 사용자의 수에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.As another example, the analysis information generated by the analysis unit 153 is based on the number of event-related users associated with each advertising medium that provides an application installation advertisement for an advertisement target application among event-related users, as shown in the example shown in FIG. 7 . It may be information that visually expresses statistics about the data through a graph.

또 다른 예로, 분석부(153)에 의해 생성되는 분석 정보는 도 8에 도시된 예와 같이 각 광고 매체와 연관된 이벤트 연관 사용자 각각의 사용자 유형을 신규 사용자, 복귀 사용자 및 기존 사용자 중 하나로 분류한 후, 분류한 결과에 대한 통계를 그래프를 통해 시각적으로 표현한 정보일 수 있다.As another example, the analysis information generated by the analyzer 153 classifies the user type of each event-related user associated with each advertising medium into one of a new user, a returning user, and an existing user, as shown in the example shown in FIG. , it may be information that visually expresses statistics on the results of classification through graphs.

도 9는 일 실시예에 따른 광고 효과 분석 방법의 순서도이다.9 is a flowchart of an advertising effect analysis method according to an embodiment.

도 9에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method shown in FIG. 9 may be performed by, for example, the advertising effect analysis device 150 shown in FIG. 2 .

도 9를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다(910).Referring to FIG. 9 , first, the advertising effect analysis device 150 obtains event information including device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred through an application installation advertisement (910). .

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(920).Thereafter, the advertising effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the corresponding service. Access information is acquired (920).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다(930). Thereafter, the advertising effect analysis device 150 determines, based on the obtained event information and service access information, one or more event-related users associated with an installation event of an application to be advertised among a plurality of users accessing a service through an application to be advertised. User identification information is identified (930).

도 10은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.10 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.

도 10에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method shown in FIG. 10 may be performed by, for example, the advertising effect analysis device 150 shown in FIG. 2 .

도 10을 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득한다(1010).Referring to FIG. 10 , first, the advertisement effect analysis device 150 obtains event information including device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred through an application installation advertisement (1010). .

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1020).Thereafter, the advertising effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the corresponding service. Access information is acquired (1020).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별한다(1030).Thereafter, the advertising effect analysis device 150 determines, based on the obtained event information and service access information, one or more event-related users associated with an installation event of an application to be advertised among a plurality of users accessing a service through an application to be advertised. User identification information is identified (1030).

이후, 광고 효과 분석 장치(150)는 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 이벤트 연관 사용자 각각의 활동 정보를 획득한다(1040).Thereafter, the advertising effect analysis device 150 obtains activity information of each event-related user for a service provided through an advertisement target application based on user identification information of each event-related user (1040).

이후, 광고 효과 분석 장치(150)는 이벤트 연관 사용자 각각의 활동 정보에 기초하여 애플리케이션 설치 광고에 대한 분석 정보를 생성한다(1050).Thereafter, the advertising effect analysis device 150 generates analysis information about an application installation advertisement based on the event-related activity information of each user (1050).

도 11은 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하기 위한 방법의 순서도이다.11 is a flowchart of a method for identifying user identification information of each event-related user according to an embodiment.

도 11에 도시된 방법은 예를 들어, 도 9에 도시된 930 단계 또는 도 10에 도시된 1030 단계에서 수행될 수 있다.The method shown in FIG. 11 may be performed at step 930 shown in FIG. 9 or step 1030 shown in FIG. 10 , for example.

도 11을 참조하면, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1110).Referring to FIG. 11 , the advertising effect analysis device 150 uses user identification information of each of a plurality of users accessing a service provided through an advertisement target application and used by each of the plurality of users, based on the obtained service access information. First mapping information including a correspondence between device identification information of the user device is generated (1110).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보와 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별한다(1120).Thereafter, the advertising effect analysis device 150 identifies one or more device identification information commonly included in the acquired event information and service access information (1120).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보에 기초하여, 식별된 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 각각 이벤트 연관 사용자의 사용자 식별 정보로 식별한다(1130).Thereafter, the advertising effect analysis device 150 identifies user identification information corresponding to each of the identified one or more device identification information as user identification information of an event-related user, respectively, based on the first mapping information (1130).

도 12는 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.12 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.

도 12에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method shown in FIG. 12 may be performed by, for example, the advertising effect analysis device 150 shown in FIG. 2 .

도 12를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1210).Referring to FIG. 12 , first, the advertising effect analysis device 150 provides device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred and one or more online advertisements that provide an application installation advertisement through an application installation advertisement. Event information including medium identification information for an online advertising medium that causes an installation event in each of a plurality of user devices among the mediums is obtained (1210).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1220).Thereafter, the advertising effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the corresponding service. Access information is obtained (1220).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 온라인 광고 매체 중 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1230). Thereafter, the advertising effect analysis device 150 determines, based on the obtained event information and service access information, one or more event-related users associated with an installation event of an application to be advertised among a plurality of users accessing a service through an application to be advertised. User identification information and medium identification information of an online advertisement medium associated with one or more event-related users among one or more online advertisement mediums are identified (1230).

도 13은 추가적인 실시예에 따른 광고 효과 분석 방법의 순서도이다.13 is a flowchart of a method for analyzing an advertising effect according to an additional embodiment.

도 13에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method shown in FIG. 13 may be performed by, for example, the advertisement effect analysis device 150 shown in FIG. 2 .

도 13을 참조하면, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1310).Referring to FIG. 13 , the advertising effect analysis device 150 is among one or more online advertising media that provides device identification information of each of a plurality of user devices in which an installation event of an application to be advertised has occurred through an application installation advertisement and an application installation advertisement. Event information including medium identification information about an online advertising medium that causes an installation event in each of a plurality of user devices is obtained (1310).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1320).Thereafter, the advertising effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the corresponding service. Access information is obtained (1320).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보 및 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 중 광고 대상 애플리케이션의 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 온라인 광고 매체 중 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1330).Thereafter, the advertising effect analysis device 150 determines, based on the obtained event information and service access information, one or more event-related users associated with an installation event of an application to be advertised among a plurality of users accessing a service through an application to be advertised. The user identification information and the medium identification information of the online advertisement medium associated with each user associated with one or more events among the one or more online advertisement mediums are identified (1330).

이후, 광고 효과 분석 장치(150)는 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 대한 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득한다(1340).Thereafter, the advertising effect analysis device 150 obtains activity information of each of one or more event-related users for a service provided through an advertisement target application based on user identification information of each of one or more event-related users (1340).

이후, 광고 효과 분석 장치(150)는 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 하나 이상의 이벤트 연관 사용자 각각의 활동 정보에 기초하여 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성한다(1350).Thereafter, the advertising effect analysis device 150 generates analysis information for each of one or more online advertising media based on medium identification information of online advertising media associated with each of one or more event-related users and activity information of each user associated with one or more events. do (1350).

도 14는 일 실시예에 따른 이벤트 연관 사용자 각각의 사용자 식별 정보 및 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하기 위한 방법의 순서도이다.14 is a flowchart of a method for identifying user identification information of each event-related user and medium identification information of an online advertising medium associated with each event-related user according to an embodiment.

도 14에 도시된 방법은 예를 들어, 도 12에 도시된 1230 단계 또는 도 13에 도시된 1330 단계에서 수행될 수 있다.The method shown in FIG. 14 may be performed at step 1230 shown in FIG. 12 or step 1330 shown in FIG. 13 , for example.

도 14를 참조하면, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1410).Referring to FIG. 14, the advertising effect analysis device 150 uses user identification information of each of a plurality of users who have access to a service provided through an advertisement target application and used by each of the plurality of users, based on the obtained service access information. First mapping information including a correspondence between device identification information of the user device is generated (1410).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보에 기초하여, 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성한다(1420).Thereafter, the advertising effect analysis device 150 provides one or more device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred and an application installation advertisement for the advertisement target application, based on the obtained event information. Second mapping information including a correspondence between medium identification information of each online advertising medium is generated (1420).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별한다(1430).Thereafter, the advertising effect analysis device 150 determines user identification information of each of one or more event-related users and medium identification information of an online advertisement medium associated with each of one or more event-related users based on the first mapping information and the second mapping information. identify (1430).

도 15는 일 실시예에 따른 광고 어뷰징 탐지 방법의 순서도이다.15 is a flowchart of an advertisement abusing detection method according to an embodiment.

도 15에 도시된 방법은 예를 들어, 도 2에 도시된 광고 효과 분석 장치(150)에 의해 수행될 수 있다.The method shown in FIG. 15 may be performed by, for example, the advertising effect analysis device 150 shown in FIG. 2 .

도 15를 참조하면, 우선, 광고 효과 분석 장치(150)는 애플리케이션 설치 광고를 통해 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보 및 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 복수의 사용자 장치 각각에 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 포함하는 이벤트 정보를 획득한다(1510).Referring to FIG. 15 , first, the advertising effect analysis device 150 provides device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred through an application installation advertisement and one or more online advertisements that provide an application installation advertisement. Event information including medium identification information about an online advertising medium that causes an installation event in each of a plurality of user devices among the mediums is obtained (1510).

이후, 광고 효과 분석 장치(150)는 광고 대상 애플리케이션을 통해 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 해당 서비스에 접속하기 위해 각 사용자에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득한다(1520).Thereafter, the advertising effect analysis device 150 provides a service including user identification information of each of a plurality of users accessing the service through the advertisement target application and device identification information of a user device used by each user to access the corresponding service. Access information is acquired (1520).

이후, 광고 효과 분석 장치(150)는 획득된 서비스 접속 정보에 기초하여, 광고 대상 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보와 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성한다(1530).Then, the advertising effect analysis device 150 based on the obtained service access information, the user identification information of each of a plurality of users accessing the service provided through the advertisement target application and the user device used by each of the plurality of users First mapping information including a correspondence between device identification information is generated (1530).

이후, 광고 효과 분석 장치(150)는 획득된 이벤트 정보에 기초하여, 광고 대상 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보와 광고 대상 애플리케이션에 대한 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성한다(1540).Thereafter, the advertising effect analysis device 150 provides one or more device identification information of each of a plurality of user devices in which an installation event of an advertisement target application has occurred and an application installation advertisement for the advertisement target application, based on the obtained event information. Second mapping information including a correspondence between media identification information of each online advertising medium is generated (1540).

이후, 광고 효과 분석 장치(150)는 제1 맵핑 정보 및 제2 맵핑 정보에 기초하여, 하나 이상의 광고 매체 중 광고 어뷰징이 의심되는 온라인 광고 매체를 탐지한다(1550).Thereafter, the advertising effect analysis device 150 detects an online advertising medium suspected of ad abusing among one or more advertising media based on the first mapping information and the second mapping information (1550).

한편, 도 9 내지 도 15 각각에 도시된 순서도에서 적어도 일부의 단계들은 순서를 바꾸어 수행되거나, 다른 단계와 결합되어 함께 수행되거나, 생략되거나, 세부 단계들로 나뉘어 수행되거나, 도시되지 않은 하나 이상의 단계가 부가되어 수행될 수 있다.Meanwhile, in the flowcharts shown in each of FIGS. 9 to 15, at least some steps are performed in reverse order, combined with other steps and performed together, omitted, divided into detailed steps, or one or more steps not shown. may be added and performed.

도 16은 일 실시예에 따른 컴퓨팅 장치를 포함하는 컴퓨팅 환경을 예시하여 설명하기 위한 블록도이다. 16 is a block diagram illustrating a computing environment including a computing device according to an exemplary embodiment.

도시된 실시예에서, 각 컴포넌트들은 이하에 기술된 것 이외에 상이한 기능 및 능력을 가질 수 있고, 이하에 기술되지 않은 것 이외에도 추가적인 컴포넌트를 포함할 수 있다.In the illustrated embodiment, each component may have different functions and capabilities other than those described below, and may include additional components other than those not described below.

도시된 컴퓨팅 환경(10)은 컴퓨팅 장치(12)를 포함한다. 일 실시예에서, 컴퓨팅 장치(12)는 도 2에 도시된 광고 효과 분석 장치(150)에 포함되는 하나 이상의 컴포넌트일 수 있다.The illustrated computing environment 10 includes a computing device 12 . In one embodiment, computing device 12 may be one or more components included in advertising effectiveness analysis device 150 shown in FIG. 2 .

컴퓨팅 장치(12)는 적어도 하나의 프로세서(14), 컴퓨터 판독 가능 저장 매체(16) 및 통신 버스(18)를 포함한다. 프로세서(14)는 컴퓨팅 장치(12)로 하여금 앞서 언급된 예시적인 실시예에 따라 동작하도록 할 수 있다. 예컨대, 프로세서(14)는 컴퓨터 판독 가능 저장 매체(16)에 저장된 하나 이상의 프로그램들을 실행할 수 있다. 상기 하나 이상의 프로그램들은 하나 이상의 컴퓨터 실행 가능 명령어를 포함할 수 있으며, 상기 컴퓨터 실행 가능 명령어는 프로세서(14)에 의해 실행되는 경우 컴퓨팅 장치(12)로 하여금 예시적인 실시예에 따른 동작들을 수행하도록 구성될 수 있다.Computing device 12 includes at least one processor 14 , a computer readable storage medium 16 and a communication bus 18 . Processor 14 may cause computing device 12 to operate according to the above-mentioned example embodiments. For example, processor 14 may execute one or more programs stored on computer readable storage medium 16 . The one or more programs may include one or more computer-executable instructions, which when executed by processor 14 are configured to cause computing device 12 to perform operations in accordance with an illustrative embodiment. It can be.

컴퓨터 판독 가능 저장 매체(16)는 컴퓨터 실행 가능 명령어 내지 프로그램 코드, 프로그램 데이터 및/또는 다른 적합한 형태의 정보를 저장하도록 구성된다. 컴퓨터 판독 가능 저장 매체(16)에 저장된 프로그램(20)은 프로세서(14)에 의해 실행 가능한 명령어의 집합을 포함한다. 일 실시예에서, 컴퓨터 판독 가능 저장 매체(16)는 메모리(랜덤 액세스 메모리와 같은 휘발성 메모리, 비휘발성 메모리, 또는 이들의 적절한 조합), 하나 이상의 자기 디스크 저장 디바이스들, 광학 디스크 저장 디바이스들, 플래시 메모리 디바이스들, 그 밖에 컴퓨팅 장치(12)에 의해 액세스되고 원하는 정보를 저장할 수 있는 다른 형태의 저장 매체, 또는 이들의 적합한 조합일 수 있다.Computer-readable storage medium 16 is configured to store computer-executable instructions or program code, program data, and/or other suitable form of information. Program 20 stored on computer readable storage medium 16 includes a set of instructions executable by processor 14 . In one embodiment, computer readable storage medium 16 includes memory (volatile memory such as random access memory, non-volatile memory, or a suitable combination thereof), one or more magnetic disk storage devices, optical disk storage devices, flash memory devices, other forms of storage media that can be accessed by computing device 12 and store desired information, or any suitable combination thereof.

통신 버스(18)는 프로세서(14), 컴퓨터 판독 가능 저장 매체(16)를 포함하여 컴퓨팅 장치(12)의 다른 다양한 컴포넌트들을 상호 연결한다.Communications bus 18 interconnects various other components of computing device 12, including processor 14 and computer-readable storage medium 16.

컴퓨팅 장치(12)는 또한 하나 이상의 입출력 장치(24)를 위한 인터페이스를 제공하는 하나 이상의 입출력 인터페이스(22) 및 하나 이상의 네트워크 통신 인터페이스(26)를 포함할 수 있다. 입출력 인터페이스(22) 및 네트워크 통신 인터페이스(26)는 통신 버스(18)에 연결된다. 입출력 장치(24)는 입출력 인터페이스(22)를 통해 컴퓨팅 장치(12)의 다른 컴포넌트들에 연결될 수 있다. 예시적인 입출력 장치(24)는 포인팅 장치(마우스 또는 트랙패드 등), 키보드, 터치 입력 장치(터치패드 또는 터치스크린 등), 음성 또는 소리 입력 장치, 다양한 종류의 센서 장치 및/또는 촬영 장치와 같은 입력 장치, 및/또는 디스플레이 장치, 프린터, 스피커 및/또는 네트워크 카드와 같은 출력 장치를 포함할 수 있다. 예시적인 입출력 장치(24)는 컴퓨팅 장치(12)를 구성하는 일 컴포넌트로서 컴퓨팅 장치(12)의 내부에 포함될 수도 있고, 컴퓨팅 장치(12)와는 구별되는 별개의 장치로 컴퓨팅 장치(12)와 연결될 수도 있다.Computing device 12 may also include one or more input/output interfaces 22 and one or more network communication interfaces 26 that provide interfaces for one or more input/output devices 24 . An input/output interface 22 and a network communication interface 26 are connected to the communication bus 18 . Input/output device 24 may be coupled to other components of computing device 12 via input/output interface 22 . Exemplary input/output devices 24 include a pointing device (such as a mouse or trackpad), a keyboard, a touch input device (such as a touchpad or touchscreen), a voice or sound input device, various types of sensor devices, and/or a photographing device. input devices, and/or output devices such as display devices, printers, speakers, and/or network cards. The exemplary input/output device 24 may be included inside the computing device 12 as a component constituting the computing device 12, or may be connected to the computing device 12 as a separate device distinct from the computing device 12. may be

이상에서 대표적인 실시예를 통하여 본 발명에 대하여 상세하게 설명하였으나, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 전술한 실시예에 대하여 본 발명의 범주에서 벗어나지 않는 한도 내에서 다양한 변형이 가능함을 이해할 것이다. 그러므로 본 발명의 권리범위는 설명된 실시예에 국한되어 정해져서는 안 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.Although the present invention has been described in detail through representative examples above, those skilled in the art can make various modifications to the above-described embodiments without departing from the scope of the present invention. will understand Therefore, the scope of the present invention should not be limited to the described embodiments and should not be defined, and should be defined by not only the claims to be described later, but also those equivalent to these claims.

10: 컴퓨팅 환경
12: 컴퓨팅 장치
14: 프로세서
16: 컴퓨터 판독 가능 저장 매체
18: 통신 버스
20: 프로그램
22: 입출력 인터페이스
24: 입출력 장치
26: 네트워크 통신 인터페이스
100: 광고 효과 분석을 위한 시스템 환경
110: 사용자 장치
120: 온라인 광고 매체
130: 광고 트래킹 장치
140: 사용자 정보 제공 장치
150: 광고 효과 분석 장치
151: 이벤트 정보 획득부
152: 사용자 정보 획득부
153: 분석부
10: Computing environment
12: computing device
14: Processor
16: computer readable storage medium
18: communication bus
20: program
22: I/O interface
24: I/O device
26: network communication interface
100: System environment for analyzing advertising effectiveness
110: user device
120: online advertising media
130: advertisement tracking device
140: user information providing device
150: advertising effect analysis device
151: event information acquisition unit
152: user information acquisition unit
153: analysis unit

Claims (16)

애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하는 동작;
상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하는 동작; 및
상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 동작을 포함하는 광고 효과 분석 방법.
obtaining event information including device identification information of each of a plurality of user devices in which an application installation event has occurred through an application installation advertisement;
Obtaining service access information including user identification information of each of a plurality of users accessing a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service. ; and
and identifying user identification information of one or more event-related users associated with the installation event among a plurality of users accessing the service, based on the event information and the service access information.
청구항 1에 있어서,
상기 장치 식별 정보는, 광고 아이디인 광고 효과 분석 방법.
The method of claim 1,
Wherein the device identification information is an advertisement ID.
청구항 1에 있어서,
상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및
상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 동작을 더 포함하는 광고 효과 분석 방법.
The method of claim 1,
obtaining activity information of each of the one or more event-related users for the service, based on the user identification information of each of the one or more event-related users; and
The advertisement effect analysis method further comprising generating analysis information on the application installation advertisement based on the activity information.
청구항 1에 있어서,
상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작;
상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하는 동작; 및
상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 동작을 포함하는 광고 효과 분석 방법.
The method of claim 1,
The identifying operation may include first mapping information including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. the operation of generating;
identifying one or more pieces of device identification information commonly included in the event information and the service access information; and
and identifying user identification information corresponding to each of the one or more device identification information as user identification information of each of the one or more event-related users, based on the first mapping information.
청구항 1에 있어서,
상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고,
상기 식별하는 동작은, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 방법.
The method of claim 1,
The event information further includes media identification information for an online advertising medium that triggers the installation event in each of the plurality of user devices among one or more online advertising media providing the application installation advertisement;
The identifying operation may include user identification information of each of the one or more event-related users and online advertising media associated with each of the one or more event-related users among the one or more online advertising media, based on the event information and the service access information. Advertising effect analysis method identifying media identification information.
청구항 5에 있어서,
상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하는 동작; 및
상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 동작을 더 포함하는 광고 효과 분석 방법.
The method of claim 5,
obtaining activity information of each of the one or more event-related users for the service, based on the user identification information of each of the one or more event-related users; and
The advertisement effect analysis method further comprising generating analysis information for each of the one or more online advertisement media based on the medium identification information and the activity information of the online advertisement medium associated with each of the one or more event-related users.
청구항 5에 있어서,
상기 식별하는 동작은, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하는 동작;
상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하는 동작; 및
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 동작을 포함하는 광고 효과 분석 방법.
The method of claim 5,
The identifying operation may include first mapping information including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. the operation of generating;
generating second mapping information including a correspondence between medium identification information of each of the one or more online advertising media and device identification information of each of the plurality of user devices, based on the event information; and
Based on the first mapping information and the second mapping information, identifying user identification information of each of the one or more event-related users and medium identification information of an online advertising medium associated with each of the one or more event-related users. How to analyze advertising effectiveness.
청구항 7에 있어서,
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 동작을 더 포함하는 광고 효과 분석 방법.
The method of claim 7,
The advertisement effect analysis method further comprising an operation of detecting an online advertisement medium suspected of ad abusing from among the one or more advertisement mediums, based on the first mapping information and the second mapping information.
하나 이상의 하드웨어 프로세서; 및
하나 이상의 통신 인터페이스를 포함하고,
상기 하나 이상의 하드웨어 프로세서는,
상기 하나 이상의 통신 인터페이스를 통해, 애플리케이션 설치 광고를 통해 애플리케이션의 설치 이벤트가 발생된 복수의 사용자 장치 각각의 장치 식별 정보를 포함하는 이벤트 정보를 획득하고,
상기 하나 이상의 통신 인터페이스를 통해, 상기 애플리케이션을 통해 제공되는 서비스에 접속한 복수의 사용자 각각의 사용자 식별 정보 및 상기 서비스에 접속하기 위해 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보를 포함하는 서비스 접속 정보를 획득하고,
상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 서비스에 접속한 복수의 사용자 중 상기 설치 이벤트와 연관된 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보를 식별하는 광고 효과 분석 장치.
one or more hardware processors; and
one or more communication interfaces;
The one or more hardware processors,
Obtaining event information including device identification information of each of a plurality of user devices in which an installation event of an application has occurred through an application installation advertisement through the one or more communication interfaces;
Through the one or more communication interfaces, including user identification information of each of a plurality of users accessing a service provided through the application and device identification information of a user device used by each of the plurality of users to access the service Obtaining service access information,
Based on the event information and the service access information, advertising effect analysis device for identifying user identification information of each of one or more event-related users associated with the installation event among a plurality of users accessing the service.
청구항 9에 있어서,
상기 장치 식별 정보는, 광고 아이디인 광고 효과 분석 장치.
The method of claim 9,
The device identification information is an advertising ID, advertising effect analysis device.
청구항 9에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고,
상기 활동 정보에 기초하여 상기 애플리케이션 설치 광고에 대한 분석 정보를 생성하는 광고 효과 분석 장치.
The method of claim 9,
The one or more hardware processors obtain activity information of each of the one or more event-related users for the service based on the user identification information of each of the one or more event-related users;
Advertising effect analysis device for generating analysis information on the application installation advertisement based on the activity information.
청구항 9에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고,
상기 이벤트 정보와 상기 서비스 접속 정보에 공통적으로 포함된 하나 이상의 장치 식별 정보를 식별하고,
상기 제1 맵핑 정보에 기초하여, 상기 하나 이상의 장치 식별 정보 각각에 대응되는 사용자 식별 정보를 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보로 식별하는 광고 효과 분석 장치.
The method of claim 9,
The one or more hardware processors perform first mapping including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. generate information,
Identifying one or more device identification information commonly included in the event information and the service access information;
Based on the first mapping information, the user identification information corresponding to each of the one or more device identification information is identified as the user identification information of each of the one or more event-related users.
청구항 9에 있어서,
상기 이벤트 정보는, 상기 애플리케이션 설치 광고를 제공하는 하나 이상의 온라인 광고 매체 중 상기 복수의 사용자 장치 각각에 상기 설치 이벤트를 유발시킨 온라인 광고 매체에 대한 매체 식별 정보를 더 포함하고,
상기 하나 이상의 하드웨어 프로세서는, 상기 이벤트 정보 및 상기 서비스 접속 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 온라인 광고 매체 중 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 장치.
The method of claim 9,
The event information further includes media identification information for an online advertising medium that triggers the installation event in each of the plurality of user devices among one or more online advertising media providing the application installation advertisement;
The one or more hardware processors, based on the event information and the service access information, the user identification information of each of the one or more event-related users and the one or more online advertising media associated with each of the one or more event-related users among the one or more online advertising media Advertising effect analysis device for identifying the medium identification information of the.
청구항 13에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보에 기초하여, 상기 서비스에 대한 상기 하나 이상의 이벤트 연관 사용자 각각의 활동 정보를 획득하고,
상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보 및 상기 활동 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각에 대한 분석 정보를 생성하는 광고 효과 분석 장치.
The method of claim 13,
The one or more hardware processors obtain activity information of each of the one or more event-related users for the service based on the user identification information of each of the one or more event-related users;
An advertising effect analysis device for generating analysis information for each of the one or more online advertising media based on the medium identification information and the activity information of the online advertising media associated with each of the one or more event-related users.
청구항 13에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 서비스 접속 정보에 기초하여, 상기 복수의 사용자 각각의 사용자 식별 정보와 상기 복수의 사용자 각각에 의해 이용된 사용자 장치의 장치 식별 정보 사이의 대응 관계를 포함하는 제1 맵핑 정보를 생성하고,
상기 이벤트 정보에 기초하여, 상기 하나 이상의 온라인 광고 매체 각각의 매체 식별 정보와 상기 복수의 사용자 장치 각각의 장치 식별 정보 사이의 대응 관계를 포함하는 제2 맵핑 정보를 생성하고,
상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 이벤트 연관 사용자 각각의 사용자 식별 정보 및 상기 하나 이상의 이벤트 연관 사용자 각각과 연관된 온라인 광고 매체의 매체 식별 정보를 식별하는 광고 효과 분석 장치.
The method of claim 13,
The one or more hardware processors perform first mapping including a correspondence between user identification information of each of the plurality of users and device identification information of a user device used by each of the plurality of users, based on the service access information. generate information,
Based on the event information, second mapping information including a correspondence between medium identification information of each of the one or more online advertising media and device identification information of each of the plurality of user devices is generated;
Advertising effect analysis device for identifying user identification information of each of the one or more event-related users and medium identification information of an online advertisement medium associated with each of the one or more event-related users, based on the first mapping information and the second mapping information. .
청구항 15에 있어서,
상기 하나 이상의 하드웨어 프로세서는, 상기 제1 맵핑 정보 및 상기 제2 맵핑 정보에 기초하여, 상기 하나 이상의 광고 매체 중 광고 어뷰징(abusing)이 의심되는 온라인 광고 매체를 탐지하는 광고 효과 분석 장치.
The method of claim 15
The one or more hardware processors detect an online advertisement medium suspected of ad abusing among the one or more advertisement mediums based on the first mapping information and the second mapping information.
KR1020200122742A 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect KR102483200B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Publications (2)

Publication Number Publication Date
KR20220040033A KR20220040033A (en) 2022-03-30
KR102483200B1 true KR102483200B1 (en) 2022-12-30

Family

ID=80948100

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200122742A KR102483200B1 (en) 2020-09-23 2020-09-23 Method and apparatus for analyzing advertisement effect

Country Status (1)

Country Link
KR (1) KR102483200B1 (en)

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120007889A (en) * 2010-07-15 2012-01-25 (주)네오위즈게임즈 Method, system and recording medium for verifying effect of advertisement
KR102661890B1 (en) * 2016-06-15 2024-04-29 에스케이플래닛 주식회사 Apparatus for advertisement platform and control method thereof
KR20170125765A (en) * 2017-10-12 2017-11-15 김명수 Application installation reward system and service method of using the same

Also Published As

Publication number Publication date
KR20220040033A (en) 2022-03-30

Similar Documents

Publication Publication Date Title
JP6851351B2 (en) Content rendering control system and method
US9460452B2 (en) Pixel cluster transit monitoring for detecting click fraud
US8751300B2 (en) Pixel cluster transit monitoring for detecting click fraud
US9734508B2 (en) Click fraud monitoring based on advertising traffic
Liu et al. Understanding diverse usage patterns from large-scale appstore-service profiles
US8938395B2 (en) Cursor path vector analysis for detecting click fraud
US20070226058A1 (en) Time based electronic advertisement
US8880541B2 (en) Qualification of website data and analysis using anomalies relative to historic patterns
US20160080405A1 (en) Detecting Anomalous Interaction With Online Content
US11961117B2 (en) Methods and systems to evaluate and determine degree of pretense in online advertisement
US20100281008A1 (en) Universal Tracking Agent System and Method
US20150310485A1 (en) Systems and methods for attribution of actions without utilizing persistent client-side storage or cross-process communication
KR20110032878A (en) Keyword ad. method and system for social networking service
US11861662B2 (en) Mobile advertisement providing system and method
US20150073893A1 (en) Systems and methods of tracking conversions by location
US20150242885A1 (en) Invitational content attribution
Subramani et al. When push comes to ads: Measuring the rise of (malicious) push advertising
CN111612512A (en) Resource allocation method and device and electronic equipment
JP5905531B2 (en) Advertisement distribution apparatus, advertisement distribution method, terminal estimation apparatus, terminal estimation method, and program
US20240037176A1 (en) Using embedded elements for online content verification
US8719088B2 (en) Pixel cluster transit monitoring for detecting click fraud
US20150262223A1 (en) Systems and methods for assigning credit for installs of applications
KR102054896B1 (en) A visitor behavior alalysis appratus of dynamic webpages and a method for analysing a visitor behavior of webpages using it
KR102483200B1 (en) Method and apparatus for analyzing advertisement effect
KR101001820B1 (en) Method for monitoring click fraud using conversion information and apparatus for executing the method

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant