KR20220120079A - Method and apparatus of conducting surveys - Google Patents

Method and apparatus of conducting surveys Download PDF

Info

Publication number
KR20220120079A
KR20220120079A KR1020210023744A KR20210023744A KR20220120079A KR 20220120079 A KR20220120079 A KR 20220120079A KR 1020210023744 A KR1020210023744 A KR 1020210023744A KR 20210023744 A KR20210023744 A KR 20210023744A KR 20220120079 A KR20220120079 A KR 20220120079A
Authority
KR
South Korea
Prior art keywords
users
sampling
medium
group
survey
Prior art date
Application number
KR1020210023744A
Other languages
Korean (ko)
Other versions
KR102583318B1 (en
Inventor
김용완
신중길
Original Assignee
주식회사 카카오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 카카오 filed Critical 주식회사 카카오
Priority to KR1020210023744A priority Critical patent/KR102583318B1/en
Publication of KR20220120079A publication Critical patent/KR20220120079A/en
Application granted granted Critical
Publication of KR102583318B1 publication Critical patent/KR102583318B1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201Market modelling; Market analysis; Collecting market data
    • G06Q30/0203Market surveys; Market polls
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements

Landscapes

  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Engineering & Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • Finance (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Game Theory and Decision Science (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

A method and apparatus of conducting surveys according to an embodiment includes: exposing a target advertisement to first users through a first medium; sampling second users who use both the first medium and a second medium in order to conduct surveys related to the target advertisement through the second medium different from the first medium; providing the surveys to the second users through the second medium; generating an analysis result including the effect of the target advertisement based on the responses collected in response to the surveys; and providing the analysis result to the advertiser of the target advertisement.

Description

설문 조사를 수행하는 방법 및 장치{METHOD AND APPARATUS OF CONDUCTING SURVEYS}METHOD AND APPARATUS OF CONDUCTING SURVEYS

아래 실시예들은 설문 조사를 수행하는 방법 및 장치에 관한 것이다.The following embodiments relate to a method and apparatus for conducting a survey.

광고는 공산품, 농산품, 축산품 등의 다양한 분야의 상품, 서비스 등과 같은 광고 대상 및/또는 광고주, 기업 등과 같은 광고 주체를 대중에게 알림으로써 판매량 향상 및/또는 기업의 이미지 개선 등에 도움을 줄 수 있다. 최근 인터넷 광고뿐만 아니라, 스마트 폰 등과 같은 통신 장치에서 구동되는 어플리케이션을 위한 다양한 형태의 광고들 및 설문 조사들이 제공되고 있다.Advertising can help increase sales volume and/or improve corporate image by notifying the public of advertising targets such as products and services in various fields such as industrial products, agricultural products, and livestock products and/or advertising subjects such as advertisers and companies. Recently, as well as Internet advertisements, various types of advertisements and surveys for applications running on communication devices such as smart phones have been provided.

광고와 관련된 설문 조사는 해당 광고가 제공된 광고 플랫폼의 광고 지면을 할애하여 제공되는 것이 일반적이다. 이 경우, 설문 조사로 인해 해당 광고 지면에서의 다른 광고의 노출 기회를 차단할 뿐만 아니라, 광고 지면의 크기에 따라 설문 조사의 실행이 사실상 불가능한 경우도 발생할 수 있다. 뿐만 아니라, 해당 광고에 노출된 사용자가 해당 광고 플랫폼을 다시 방문하지 않으면 설문 조사가 불가능할 수 있다.In general, the survey related to advertisements is provided by dedicating the advertisement space of the advertisement platform where the corresponding advertisement is provided. In this case, the survey not only blocks the opportunity of exposure of other advertisements in the corresponding advertisement space, but also may cause a case where it is virtually impossible to execute the survey depending on the size of the advertisement space. In addition, if the user exposed to the advertisement does not visit the advertisement platform again, the survey may not be possible.

일 실시예에 따르면, 설문 조사를 수행하는 방법은 대상 광고를, 제1 매체를 통해 제1 유저들에게 노출하는 단계; 상기 제1 매체와 구별되는 제2 매체를 통해 상기 대상 광고와 관련된 설문 조사를 진행하기 위하여, 상기 제1 매체와 상기 제2 매체를 함께 이용하는 제2 유저들을 샘플링하는 단계; 상기 제2 매체를 통해, 상기 제2 유저들에게 상기 설문 조사를 제공하는 단계; 상기 설문 조사에 대응하여 수집되는 응답에 기초하여, 상기 대상 광고의 효과를 포함하는 분석 결과를 생성하는 단계; 및 상기 분석 결과를 상기 대상 광고의 광고주에게 제공하는 단계를 포함한다. According to an embodiment, a method of conducting a survey may include exposing a target advertisement to first users through a first medium; sampling second users who use the first medium and the second medium together to conduct a survey related to the target advertisement through a second medium that is different from the first medium; providing the questionnaire survey to the second users through the second medium; generating an analysis result including an effect of the target advertisement based on the responses collected in response to the survey; and providing the analysis result to an advertiser of the target advertisement.

상기 제2 유저들을 샘플링하는 단계는 상기 제2 유저들 중 상기 대상 광고에 노출된 제2-1 유저들로부터 실험군을 샘플링하는 단계; 및 상기 제2 유저들 중 상기 대상 광고에 노출되지 않은 제2-2 유저들로부터 대조군을 샘플링하는 단계를 포함할 수 있다.The sampling of the second users may include: sampling an experimental group from 2-1 users exposed to the target advertisement among the second users; and sampling a control group from second-second users who are not exposed to the target advertisement among the second users.

상기 실험군을 샘플링하는 단계는 상기 제2-1 유저들로부터 제1 실험군을 샘플링하는 단계; 상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들로부터 제2 실험군을 샘플링하는 단계; 상기 제2 실험군에 기초하여, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계; 및 상기 제1 실험군과 상기 제3 실험군에 기초하여, 상기 실험군을 결정하는 단계를 포함할 수 있다. The sampling of the experimental group may include: sampling a first experimental group from the 2-1 users; sampling a second experimental group from users who do not use the second medium among the first users; sampling a third experimental group from the 2-1 users based on the second experimental group; and determining the experimental group based on the first experimental group and the third experimental group.

상기 제1 실험군을 샘플링하는 단계는 상기 제2-1 유저들의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-1 유저들로부터 제1 실험군을 샘플링하는 단계를 포함할 수 있다. The step of sampling the first experimental group includes sampling the first experimental group from the 2-1 users so that the feature distribution ratio of the 2-1 users matches the feature distribution ratio of the first users can do.

상기 제3 실험군을 샘플링하는 단계는 상기 제2 실험군과의 특징 유사도가 일정 기준 이상인 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계를 포함할 수 있다. The step of sampling the third experimental group may include sampling the third experimental group from the 2-1 users having a feature similarity with the second experimental group equal to or greater than a predetermined criterion.

상기 제3 실험군을 샘플링하는 단계는 상기 제3 실험군의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-1 유저들로부터 상기 제3 실험군을 샘플링하는 단계를 포함할 수 있다. The step of sampling the third experimental group may include sampling the third experimental group from the 2-1 users so that the feature distribution ratio of the third experimental group matches the feature distribution ratio of the first users. can

상기 제3 실험군을 샘플링하는 단계는 상기 제3 실험군에서 추출된 샘플들의 개수가, 상기 제1 매체의 유저들 중 상기 대상 광고에 노출된 제1 유저들의 수 대비 상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들의 수 간의 비율과 일치하도록, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계를 포함할 수 있다.In the step of sampling the third experimental group, the number of samples extracted from the third experimental group is the number of first users exposed to the target advertisement among users of the first medium compared to the number of the second among the first users. It may include sampling a third experimental group from the 2-1 users to match the ratio between the number of users who do not use the medium.

상기 실험군을 샘플링하는 단계는 상기 대조군에 기초하여, 상기 제2-1 유저들로부터 제4 실험군을 샘플링하는 단계를 더 포함하고, 상기 실험군을 결정하는 단계는 상기 제1 실험군, 상기 제3 실험군 및 상기 제4 실험군에 기초하여, 상기 실험군을 결정하는 단계를 포함할 수 있다. The sampling of the experimental group further includes sampling a fourth experimental group from the 2-1 users based on the control group, and determining the experimental group includes the first experimental group, the third experimental group and The method may include determining the experimental group based on the fourth experimental group.

상기 대조군을 샘플링하는 단계는 상기 제2-2 유저들로부터 제1 대조군을 샘플링하는 단계; 상기 제1 매체의 유저들 중 상기 제2 매체를 이용하지 않으면서 상기 대상 광고에 노출되지 않은 유저들로부터 제2 대조군을 샘플링하는 단계; 상기 제2 대조군에 기초하여, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하는 단계; 및 상기 제1 대조군과 상기 제3 대조군에 기초하여, 상기 대조군을 결정하는 단계를 포함할 수 있다. The sampling of the control group includes: sampling a first control group from the 2-2 users; sampling a second control group from users of the first medium who do not use the second medium and are not exposed to the target advertisement; sampling a third control group from the 2-2 users based on the second control group; and determining the control based on the first control and the third control.

상기 제1 대조군을 샘플링하는 단계는 상기 제2-2 유저들의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-2 유저들로부터 제1 대조군을 샘플링하는 단계를 포함할 수 있다. The sampling of the first control group includes sampling the first control group from the 2-2 users so that the feature distribution ratio of the 2-2 users matches the feature distribution ratio of the first users. can do.

상기 제3 대조군을 샘플링하는 단계는 상기 제2 대조군과의 특징 유사도가 일정 기준 이상인 상기 제2-2 유저들로부터 상기 제3 대조군을 샘플링하는 단계를 포함할 수 있다. The step of sampling the third control group may include sampling the third control group from the second-second users having a feature similarity with the second control group equal to or greater than a predetermined standard.

상기 제3 대조군을 샘플링하는 단계는 상기 제3 대조군의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-2 유저들로부터 상기 제3 대조군을 샘플링하는 단계를 포함할 수 있다. Sampling the third control group may include sampling the third control group from the 2-2 users so that the feature distribution ratio of the third control group matches the feature distribution ratio of the first users. can

상기 제3 대조군을 샘플링하는 단계는 상기 제3 대조군에서 추출된 샘플들의 개수가, 상기 제1 매체의 유저들 중 상기 대상 광고에 노출되지 않은 유저들의 수 대비 상기 제1 매체와 상기 제2 매체를 함께 이용하면서 상기 대상 광고에 노출되지 않은 제2-2 유저들의 수 간의 비율과 일치하도록, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하는 단계를 포함할 수 있다. In the step of sampling the third control group, the number of samples extracted from the third control group is the first medium and the second medium compared to the number of users not exposed to the target advertisement among users of the first medium. The method may include sampling a third control group from the 2-2 users to match the ratio between the number of 2-2 users who are not exposed to the target advertisement while using the same.

상기 대조군을 샘플링하는 단계는 상기 실험군에 기초하여, 상기 제2-2 유저들로부터 제4 대조군을 샘플링하는 단계를 더 포함하고, 상기 대조군을 결정하는 단계는 상기 제1 대조군, 상기 제3 대조군 및 상기 제4 대조군에 기초하여, 상기 대조군을 결정하는 단계를 포함할 수 있다. The sampling of the control group further includes sampling a fourth control group from the 2-2 users based on the experimental group, and determining the control group includes the first control group, the third control group, and It may include determining the control group based on the fourth control group.

상기 제1 매체는 광고 매체를 포함하고, 상기 제2 매체는 인스턴트 메신저 매체를 포함할 수 있다. The first medium may include an advertisement medium, and the second medium may include an instant messenger medium.

상기 대상 광고는 브랜드 퍼널과 관련된 대상 광고를 포함하고, 상기 설문 조사는 상기 브랜드 퍼널과 관련된 설문 조사를 포함할 수 있다. The target advertisement may include a target advertisement related to the brand funnel, and the survey may include a survey related to the brand funnel.

일 실시예에 따르면, 설문 조사를 수행하는 장치는 대상 광고를, 제1 매체를 통해 제1 유저들에게 노출하고, 상기 제1 매체와 구별되는 제2 매체를 통해 상기 대상 광고와 관련된 설문 조사를 진행하기 위하여, 상기 제1 매체와 상기 제2 매체를 함께 이용하는 제2 유저들을 샘플링하고, 상기 제2 매체를 통해, 상기 제2 유저들에게 상기 설문 조사를 제공하고, 상기 설문 조사에 대응하여 수집되는 응답에 기초하여, 상기 대상 광고의 효과를 포함하는 분석 결과를 생성하는 프로세서; 및 상기 분석 결과를 상기 대상 광고의 광고주에게 제공하는 통신 인터페이스를 포함한다. According to an embodiment, a device for conducting a survey exposes a target advertisement to first users through a first medium, and conducts a survey related to the target advertisement through a second medium that is distinct from the first medium. In order to proceed, sampling second users who use the first medium and the second medium together, providing the questionnaire survey to the second users through the second medium, and collecting in response to the questionnaire survey a processor for generating an analysis result including an effect of the target advertisement based on the received response; and a communication interface that provides the analysis result to an advertiser of the target advertisement.

상기 프로세서는 상기 제2 유저들 중 상기 대상 광고에 노출된 제2-1 유저들로부터 실험군을 샘플링하고, 상기 제2 유저들 중 상기 대상 광고에 노출되지 않은 제2-2 유저들로부터 대조군을 샘플링할 수 있다. The processor samples an experimental group from 2-1 users exposed to the target advertisement among the second users, and samples a control group from 2-2 users who are not exposed to the target advertisement among the second users can do.

상기 프로세서는 상기 제2-1 유저들로부터 제1 실험군을 샘플링하고, 상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들로부터 제2 실험군을 샘플링하고, 상기 제2 실험군에 기초하여, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하며, 상기 제1 실험군과 상기 제3 실험군에 기초하여, 상기 실험군을 결정할 수 있다.The processor samples a first experimental group from the 2-1 users, samples a second experimental group from users who do not use the second medium among the first users, and based on the second experimental group, A third experimental group may be sampled from the 2-1 users, and the experimental group may be determined based on the first and third experimental groups.

상기 프로세서는 상기 제2-2 유저들로부터 제1 대조군을 샘플링하고, 상기 제1 매체의 유저들 중 상기 제2 매체를 이용하지 않으면서 상기 대상 광고에 노출되지 않은 유저들로부터 제2 대조군을 샘플링하고, 상기 제2 대조군에 기초하여, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하며, 상기 제1 대조군과 상기 제3 대조군에 기초하여, 상기 대조군을 결정할 수 있다.The processor samples a first control group from the 2-2 users, and samples a second control group from users of the first medium who do not use the second medium and are not exposed to the target advertisement. and sampling a third control group from the second-second users based on the second control group, and determining the control group based on the first control group and the third control group.

도 1은 일 실시예에 따른 설문 조사를 수행하는 방법을 나타낸 흐름도.
도 2는 일 실시예에 따른 제1 매체를 통해 제1 유저들에게 노출되는 대상 광고의 일 예시를 도시한 도면.
도 3은 일 실시예에 따른 유저들의 분류를 설명하기 위한 도면.
도 4는 일 실시예에 따라 제2 유저들을 샘플링하는 방법을 설명하기 위한 도면.
도 5는 일 실시예에 따라 유사 유저를 추출하는 과정을 설명하기 위한 도면.
도 6은 일 실시예에 따라 유저 분포를 조절하는 방법을 설명하기 위한 도면.
도 7은 일 실시예에 따른 대조군을 결정하는 방법을 나타낸 흐름도.
도 8은 일 실시예에 따른 실험군을 결정하는 방법을 나타낸 흐름도.
도 9는 일 실시예에 따른 제2 매체를 통해 제2 유저들에게 제공되는 설문 조사의 일 예시를 도시한 도면.
도 10은 일 실시예에 따른 브랜드 퍼널 관련 설문 조사에 대한 분석 결과를 광고주에게 제공하는 과정을 설명하기 위한 도면.
도 11은 일 실시예에 따른 설문 조사를 수행하는 장치의 블록도.
1 is a flowchart illustrating a method of conducting a survey according to an embodiment;
2 is a diagram illustrating an example of a target advertisement exposed to first users through a first medium according to an embodiment;
3 is a diagram for explaining classification of users according to an embodiment;
4 is a diagram for explaining a method of sampling second users according to an embodiment;
5 is a diagram for explaining a process of extracting a similar user according to an embodiment;
6 is a view for explaining a method of adjusting user distribution according to an embodiment;
7 is a flowchart illustrating a method for determining a control group according to an embodiment.
8 is a flowchart illustrating a method for determining an experimental group according to an embodiment.
9 is a diagram illustrating an example of a survey provided to second users through a second medium according to an embodiment;
10 is a view for explaining a process of providing an advertiser with an analysis result for a brand funnel-related survey according to an embodiment;
11 is a block diagram of an apparatus for conducting a survey according to an embodiment;

실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 구현될 수 있다. 따라서, 실제 구현되는 형태는 개시된 특정 실시예로만 한정되는 것이 아니며, 본 명세서의 범위는 실시예들로 설명한 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.Specific structural or functional descriptions of the embodiments are disclosed for purposes of illustration only, and may be changed and implemented in various forms. Accordingly, the actual implementation form is not limited to the specific embodiments disclosed, and the scope of the present specification includes changes, equivalents, or substitutes included in the technical spirit described in the embodiments.

제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.Although terms such as first or second may be used to describe various elements, these terms should be interpreted only for the purpose of distinguishing one element from another. For example, a first component may be termed a second component, and similarly, a second component may also be termed a first component.

어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.When a component is referred to as being “connected” to another component, it may be directly connected or connected to the other component, but it should be understood that another component may exist in between.

단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.The singular expression includes the plural expression unless the context clearly dictates otherwise. In this specification, terms such as "comprise" or "have" are intended to designate that the described feature, number, step, operation, component, part, or combination thereof exists, and includes one or more other features or numbers, It should be understood that the possibility of the presence or addition of steps, operations, components, parts or combinations thereof is not precluded in advance.

다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.Unless defined otherwise, all terms used herein, including technical or scientific terms, have the same meaning as commonly understood by one of ordinary skill in the art. Terms such as those defined in a commonly used dictionary should be interpreted as having a meaning consistent with the meaning in the context of the related art, and should not be interpreted in an ideal or excessively formal meaning unless explicitly defined in the present specification. does not

이하, 실시예들을 첨부된 도면들을 참조하여 상세하게 설명한다. 첨부 도면을 참조하여 설명함에 있어, 도면 부호에 관계없이 동일한 구성 요소는 동일한 참조 부호를 부여하고, 이에 대한 중복되는 설명은 생략하기로 한다.Hereinafter, embodiments will be described in detail with reference to the accompanying drawings. In the description with reference to the accompanying drawings, the same components are assigned the same reference numerals regardless of the reference numerals, and the overlapping description thereof will be omitted.

도 1은 일 실시예에 따른 일 실시예에 따른 설문 조사를 수행하는 방법을 나타낸 흐름도이다. 도 1을 참조하면, 일 실시예에 따른 설문 조사를 수행하는 장치(이하, '설문 조사 장치')가 단계(110) 내지 단계(150)를 통해 설문 조사에 대응하여 수집된 응답에 기초한 분석 결과를 광고주에게 제공하는 과정이 도시된다. 1 is a flowchart illustrating a method of performing a survey according to an embodiment according to an embodiment. Referring to FIG. 1 , an analysis result based on responses collected in response to a survey through steps 110 to 150 of an apparatus for performing a survey (hereinafter, 'survey survey device') according to an exemplary embodiment The process of providing to the advertiser is shown.

단계(110)에서, 설문 조사 장치는 대상 광고를, 제1 매체를 통해 제1 유저들에게 노출한다. 대상 광고는 예를 들어, 브랜드 퍼널과 관련된 대상 광고일 수 있다. 여기서, '브랜드 퍼널(brand funnel)'은 고객 분석을 위한 마케팅 전략 중 하나로서, 예를 들어, 기업의 브랜드 광고와 관련하여 고객이 유입되고 전환에 이르기까지 주요 단계를 수치로 확인하는 분석 방법에 해당할 수 있다. 브랜드 퍼널은 기업의 브랜드 광고로부터 전환에 이르는 고객 경험 프로세스를 단계 별로 나누어 언제, 어디서, 어떻게 이탈하는지를 파악해 이탈하는 원인을 개선하고, 이를 바탕으로 고객의 전환율을 높일 수 있다. 브랜드 퍼널의 캠페인 목적은 예를 들어, 인지도 증대, 참여 유도, 및 구매 증대 등을 포함할 수 있다. 또한, 브랜드 퍼널의 측정 항목은 예를 들어, 광고 상기도, 브랜드 인지도, 브랜드 관심도, 구매 고려도, 브랜드 선호도, 구매 의도 등을 포함할 수 있다. 설문 조사 장치는 설문 조사를 통해 브랜드 퍼널 각 단계 별로 성과를 측정하여 소비자의 인사이트를 도출할 수 있다. In step 110, the survey device exposes the target advertisement to first users through the first medium. The targeted advertisement may be, for example, a targeted advertisement associated with a brand funnel. Here, the 'brand funnel' is one of the marketing strategies for customer analysis. For example, in relation to a company's brand advertising, it is an analysis method that numerically identifies key steps from customer inflow and conversion. may be applicable. The brand funnel divides the customer experience process from corporate brand advertising to conversion into stages, identifies when, where, and how they churn, improves the cause of churn, and increases customer conversion rates based on this. The campaign objectives of the brand funnel may include, for example, increasing awareness, encouraging participation, and increasing purchases. In addition, the measurement items of the brand funnel may include, for example, advertisement recall, brand awareness, brand interest, purchase consideration, brand preference, purchase intention, and the like. The survey device may derive consumer insights by measuring performance at each stage of the brand funnel through a survey.

제1 매체는 예를 들어, 트위터®, 페이스북®, 다음® 등과 같이 광고를 제공하는 다양한 광고 매체를 포함할 수 있다. 제1 유저들은 제1 매체에 등록 또는 가입한 유저들에 해당하며, 예를 들어, 아래의 도 3에서 A+B+D+E 그룹에 해당하는 유저들일 수 있다. 설문 조사 장치는 예를 들어, 제1 매체의 광고 노출 요청에 응답하여, 광고 플랫폼에 등록된 대상 광고를 노출할 수 있다. The first medium may include various advertising media that provide advertisements, such as, for example, Twitter ® , Facebook ® , Daum ® , and the like. The first users correspond to users registered or subscribed to the first medium, and may be, for example, users corresponding to the A+B+D+E group in FIG. 3 below. The survey device may, for example, expose a target advertisement registered in the advertisement platform in response to the advertisement exposure request of the first medium.

단계(120)에서, 설문 조사 장치는 제1 매체와 구별되는 제2 매체를 통해 대상 광고와 관련된 설문 조사를 진행하기 위하여, 제1 매체와 제2 매체를 함께 이용하는 제2 유저들을 샘플링한다. 제2 매체는 예를 들어, 인스턴트 메신저 매체를 포함할 수 있다. 설문 조사는 예를 들어, 브랜드 퍼널과 관련된 설문 조사일 수 있다. 여기서, 제2 유저들은 예를 들어, 아래의 도 3에서 B+E 그룹에 해당하는 유저들일 수 있다. In step 120, the survey apparatus samples second users who use the first medium and the second medium together in order to conduct a survey related to the target advertisement through a second medium that is different from the first medium. The second medium may include, for example, an instant messenger medium. The survey may be, for example, a survey related to a brand funnel. Here, the second users may be, for example, users corresponding to the B+E group in FIG. 3 below.

단계(120)에서, 설문 조사 장치는 제2 유저들 중 대상 광고에 노출된 제2-1 유저들(예를 들어, 도 3의 E 그룹에 해당하는 유저들)로부터 실험군을 샘플링할 수 있다. 또한, 설문 조사 장치는 제2 유저들 중 대상 광고에 노출되지 않은 제2-2 유저들(예를 들어, 도 3의 B그룹에 해당하는 유저들)로부터 대조군을 샘플링할 수 있다. 설문 조사 장치가 실험군 및 대조군을 샘플링하는 방법은 아래의 도 4 내지 도 8을 참조하여 보다 구체적으로 설명한다. In operation 120 , the survey apparatus may sample the experimental group from the second users (eg, users corresponding to group E of FIG. 3 ) exposed to the target advertisement among the second users. Also, the survey apparatus may sample a control group from second-second users (eg, users corresponding to group B of FIG. 3 ) who are not exposed to the target advertisement among the second users. A method for the survey device to sample the experimental group and the control group will be described in more detail with reference to FIGS. 4 to 8 below.

단계(130)에서, 설문 조사 장치는 제2 매체를 통해, 제2 유저들에게 설문 조사를 제공한다. 설문 조사 장치는 예를 들어, 제2 매체의 메시지 전송 모듈을 통해 제2 유저들에게 설문 조사를 제공할 수 있다. 설문 조사는 예를 들어, 실험군과 대조군에게 선택한 질문을 보여주면서 브랜드나 제품을 인지하고 있는지 여부 등에 대한 문의를 포함할 수 있다. 제2 매체를 통해 제공되는 설문 조사의 일 예시는 아래의 도 9를 참조할 수 있다. In step 130, the survey device provides a survey to the second users through the second medium. The survey apparatus may provide a survey to the second users through, for example, a message transmission module of the second medium. A survey may include, for example, questions about whether they are aware of a brand or product, showing selected questions to an experimental group and a control group. An example of a survey provided through the second medium may refer to FIG. 9 below.

단계(140)에서, 설문 조사 장치는 설문 조사에 대응하여 수집되는 응답에 기초하여, 대상 광고의 효과를 포함하는 분석 결과를 생성한다. 분석 결과는 예를 들어, 인지-고려-선호-구매에 이르는 브랜드 퍼널 관점에서 광고 상기도, 브랜드 인지도, 구매 고려도, 브랜드 선호도 및 구매 의도를 포함하는 5가지 질문 중 제2 유저들에 의해 선택된 항목에 의해 측정된 광고 효과를 포함할 수 있다. In step 140, the survey device generates an analysis result including the effect of the target advertisement based on the responses collected in response to the survey. The analysis result was selected by the second users out of five questions including advertisement recall, brand awareness, purchase consideration, brand preference, and purchase intention, for example, from the perspective of the brand funnel ranging from recognition-consideration-preference-purchase. It may include advertising effectiveness measured by the item.

단계(150)에서, 설문 조사 장치는 단계(140)에서 생성한 분석 결과를 대상 광고의 광고주에게 제공한다. In step 150, the survey device provides the analysis result generated in step 140 to the advertiser of the target advertisement.

도 2는 일 실시예에 따른 제1 매체를 통해 제1 유저들에게 노출되는 대상 광고의 일 예시를 도시한 도면이다. 도 2를 참조하면, 일 실시예에 따른 광고 매체를 통해 제1 유저들에게 노출되는 대상 광고의 화면(200)이 도시된다. 2 is a diagram illustrating an example of a target advertisement exposed to first users through a first medium according to an embodiment. Referring to FIG. 2 , a screen 200 of a target advertisement exposed to first users through an advertisement medium according to an exemplary embodiment is shown.

대상 광고는 예를 들어, OO 기업에 대한 이미지를 향상시키기 위한 브랜드 퍼널 또는 브랜드 광고일 수 있다. 대상 광고는 브랜드 퍼널 이외에 다양한 기업 브랜드 광고 등을 포함할 수 있으며, 반드시 이에 한정되지는 않는다.The target advertisement may be, for example, a brand funnel or a brand advertisement to enhance the image of the OO company. The target advertisement may include, but is not limited to, various corporate brand advertisements in addition to the brand funnel.

도 3은 일 실시예에 따른 유저들의 분류를 설명하기 위한 도면이다. 도 3을 참조하면, 제1 매체를 이용하는 제1 유저들, 제1 매체와 제2 매체를 함께 이용하는 제2 유저들, 및 제2 매체를 이용하는 제3 유저들의 분류가 도시된다. 제1 매체는 예를 들어, 광고를 노출하는 광고 매체에 해당할 수 있다. 또한, 제2 매체는 예를 들어, 인스턴스 메신저 매체에 해당할 수 있다. 예를 들어, 광고 매체와 인스턴스 메신저 매체의 메신저 플랫폼이 결합된 경우를 제외하고는 제1 매체와 제2 매체는 서로 구별될 수 있다. 3 is a diagram for explaining classification of users according to an embodiment. Referring to FIG. 3 , classification of first users using a first medium, second users using both the first medium and the second medium, and third users using the second medium is shown. The first medium may correspond to, for example, an advertisement medium for exposing advertisements. Also, the second medium may correspond to, for example, an instant messenger medium. For example, the first medium and the second medium may be distinguished from each other, except when the messenger platform of the advertisement medium and the instant messenger medium are combined.

도 3에서 제1 매체를 이용하는 제1 유저들은 'A+B+D+E' 그룹에 해당할 수 있다. 제1 매체와 제2 매체를 함께 이용하는 제2 유저들은 'B+E' 그룹에 해당할 수 있다. 또한, 제2 매체를 이용하는 제3 유저들은 'B+E+C' 그룹에 해당할 수 있다. In FIG. 3 , the first users who use the first medium may correspond to the 'A+B+D+E' group. The second users who use the first medium and the second medium together may correspond to the 'B+E' group. In addition, the third users who use the second medium may correspond to the 'B+E+C' group.

제1 유저들 중 제1 매체만을 이용하는 제1 유저들을 'A+D' 그룹에 해당할 수 있다. 제1 유저들 중 광고에 노출된 제1 유저(들)은 'D' 그룹에 해당하고, 광고에 노출되지 않은 제1 유저들은 'A' 그룹에 해당할 수 있다. Among the first users, first users who use only the first medium may correspond to the 'A+D' group. Among the first users, the first user(s) exposed to the advertisement may correspond to the 'D' group, and the first users not exposed to the advertisement may correspond to the 'A' group.

또한, 제2 유저들은 'B+E' 그룹에 해당할 수 있다. 제2 유저들 중 광고에 노출된 제2 유저(들)는 'E' 그룹에 해당하고, 제2 유저들 중 광고에 노출되지 않은 제2 유저(들)는 'B' 그룹에 해당할 수 있다. Also, the second users may correspond to the 'B+E' group. Among the second users, the second user(s) exposed to the advertisement may correspond to the 'E' group, and among the second users, the second user(s) not exposed to the advertisement may correspond to the 'B' group. .

일 실시예에 따르면, 광고를 노출한 제1 매체(예를 들어, 광고 매체)와 설문 조사를 진행하는 제2 매체(예를 들어, 인스턴트 메신저 매체)가 상이할 수 있다. 이와 같이, 매체가 상이한 경우 도 3에 도시된 것과 같이 제1 매체의 유저와 제2 매체의 유저는 일부만 동일하고, 제1 매체의 유저와 제2 매체의 유저 전체가 완전히 동일하지는 않을 수 있다. According to an exemplary embodiment, a first medium (eg, an advertisement medium) to which advertisements are exposed and a second medium (eg, an instant messenger medium) for conducting a survey may be different. As such, when the media are different, as shown in FIG. 3 , the users of the first medium and the users of the second medium are only partially the same, and the users of the first medium and the users of the second medium may not be completely identical.

그러므로, 단순히 제1 매체의 유저들 중 광고에 노출된 유저군(D+E 그룹)과 광고에 노출되지 않은 유저군(A+B 그룹) 각각으로부터 유저군을 추출할 경우, E 그룹과 B 그룹에서 샘플링된 유저군은 각각 D+E 그룹과 A+B그룹에서 샘플링된 유저군을 대표하는 대표성을 가지지 못할 수 있다. Therefore, when extracting a user group from each of the user group exposed to the advertisement (D+E group) and the user group not exposed to the advertisement (A+B group) among users of the first medium, group E and group B The user group sampled in , may not have representativeness representing the user group sampled from the D+E group and the A+B group, respectively.

일 실시예에 따른 설문 조사 장치가 대표성 있는 실험군과 대조군을 추출하는 방법은 아래의 도 4 내지 도 6을 참조하여 구체적으로 설명한다. A method of extracting representative experimental groups and control groups by the questionnaire survey apparatus according to an embodiment will be described in detail with reference to FIGS. 4 to 6 below.

도 4는 일 실시예에 따라 제2 유저들을 샘플링하는 방법을 설명하기 위한 도면이다. 도 5는 일 실시예에 따라 유사 유저를 추출하는 과정을 설명하기 위한 도면이고, 도 6은 일 실시예에 따라 유저 분포를 조절하는 방법을 설명하기 위한 도면이다. 4 is a diagram for describing a method of sampling second users according to an embodiment. 5 is a diagram for explaining a process of extracting similar users according to an embodiment, and FIG. 6 is a diagram for explaining a method of adjusting user distribution according to an embodiment.

도 4를 참조하면, 일 실시예에 따른 설문 조사 장치의 샘플링 모듈(400)의 구조가 도시된다. Referring to FIG. 4 , a structure of a sampling module 400 of a survey apparatus according to an exemplary embodiment is illustrated.

샘플링 모듈(400)은 유사 유저 추출 모듈(410) 및/또는 유저 분포 조절 모듈(430)을 포함할 수 있다. 샘플링 모듈(400)은 유사 유저 추출 모듈(410) 및/또는 유저 분포 조절 모듈(430)을 통해 유저 정보(405)로부터 대표성 있는 대조군과 실험군(440)을 추출할 수 있다. 유저 정보(405)는 예를 들어, 제1 매체와 제2 매체를 함께 이용하는 유저들(B+E 그룹)에 대한 정보를 포함할 수 있다. The sampling module 400 may include a similar user extraction module 410 and/or a user distribution adjustment module 430 . The sampling module 400 may extract a representative control group and an experimental group 440 from the user information 405 through the similar user extraction module 410 and/or the user distribution control module 430 . The user information 405 may include, for example, information on users (B+E group) who use the first medium and the second medium together.

유사 유저 추출 모듈(410)은 예를 들어, Look-alike Audience Extension system과 같은 다양한 유사 유저 찾기 로직을 이용하여 유사 유저군들(420)을 추출할 수 있다. The similar user extraction module 410 may extract similar user groups 420 using various similar user finding logic, such as a look-alike audience extension system.

이하, 도 5를 참조하여 유사 유저 추출 모듈(410)이 유사 유저들로부터 대조군을 추출하는 방법을 설명한다. Hereinafter, a method for extracting a control group from similar users by the similar user extraction module 410 will be described with reference to FIG. 5 .

유사 유저 추출 모듈(410)은 도 5에 도시된 것과 같이, 예를 들어, 제2 유저들(B+E) 중 광고에 노출되지 않은 B 그룹의 유저들로부터, 제2 매체를 이용하지 않으면서 광고에 노출되지 않은 A 그룹의 유저들과 유사한 유저군('a군')(420)을 추출할 수 있다. 여기서, 'a군'는 B 그룹에서 추출된, A 그룹의 유저들과 유사한 유저들의 유저군에 해당할 수 있다. 유사 유저 추출 모듈(410)은 예를 들어, 성별, 나이, 선호도, 구매 물품, 및 지역 등과 같은 유저들의 특징을 기초로, 유사 유저를 찾는 로직에 의해 유사 유저군(420)을 추출할 수 있다. 유사 유저 추출 모듈(410)은 예를 들어, 광고에 노출되지 않은 A그룹의 유저들로부터 샘플링된 유저들과의 특징 유사도가 일정 기준 이상인 B 그룹의 유저들로부터 a 군을 샘플링할 수 있다. As shown in FIG. 5 , the similar user extraction module 410 is, for example, from users of group B, who are not exposed to advertisements among the second users (B+E), without using the second medium. A user group ('a group') 420 similar to users of group A who are not exposed to the advertisement may be extracted. Here, 'group a' may correspond to a user group of users extracted from group B and similar to users of group A. The similar user extraction module 410 may extract the similar user group 420 by a logic to find similar users based on the characteristics of users such as, for example, gender, age, preference, purchased items, and region. . The similar user extraction module 410 may, for example, sample group A from users of group B having a feature similarity with users sampled from users of group A who are not exposed to advertisements equal to or greater than a certain standard.

유사 유저 추출 모듈(410)은 B 그룹에서 랜덤하게 추출된 유저들 이외에, B 그룹에서A 그룹의 유저들과 유사한 유저군을 더 추출함으로써 B 그룹에서 샘플링된 유저들이 A+B그룹에서 랜덤 샘플링된 대조군처럼 대표성을 갖도록 할 수 있다. The similar user extraction module 410, in addition to the users randomly extracted from the B group, further extracts a user group similar to the users of the A group from the B group, so that the users sampled from the B group are randomly sampled from the A + B group. It can be made representative like a control group.

실시예에 따라서, 설문 조사 장치는 유사 유저 추출 모듈(410)을 통해 B 그룹의 유저들로부터 D 그룹의 유저들과 유사한 대조군('d') 및 E 그룹의 유저들과 유사한 대조군('e')을 샘플링하여 대조군을 설정함으로써 더 엄밀한 대조군 샘플들을 획득할 수도 있다. According to an exemplary embodiment, the survey apparatus uses the similar user extraction module 410 to obtain a control group similar to users in group D ('d') and a control group similar to users in group E ('e') from users in group B through the similar user extraction module 410 . ) to establish a control group to obtain more stringent control samples.

유사 유저 추출 모듈(410)이 대조군을 추출하는 방법은 아래의 도 7을 참조하여 보다 구체적으로 설명한다. A method of extracting the control by the similar user extraction module 410 will be described in more detail with reference to FIG. 7 below.

이하, 도 6을 참조하여 유사 유저 추출 모듈(410)이 유사 유저들로부터 실험군을 추출하는 방법을 설명한다. Hereinafter, a method for extracting an experimental group from similar users by the similar user extraction module 410 will be described with reference to FIG. 6 .

대조군과 마찬가지로, 유사 유저 추출 모듈(410)은 제1 매체와 제2 매체를 함께 이용하는 제2 유저들(B+E) 중 광고에 노출된 E 그룹에서, 제1 매체만을 사용하는 제1 유저들(A+D) 중 광고에 노출된 D 그룹의 유저들과 유사한 유저군('d군')(420)을 추출할 수 있다. 여기서, 'd군'는 E 그룹에서 추출된, D 그룹의 유저들과 유사한 유저들의 유저군에 해당할 수 있다. 유사 유저 추출 모듈(410)은 제2 매체를 이용하지 않는 유저들(D)로부터 샘플링된 유저들과의 특징 유사도가 일정 기준 이상인 E 그룹의 유저들로부터 d 군을 샘플링할 수 있다. Similar to the control group, the similar user extraction module 410 determines the first users using only the first medium from the group E exposed to the advertisement among the second users (B+E) who use the first medium and the second medium together. A user group ('d group') 420 similar to users of group D exposed to the advertisement among (A+D) may be extracted. Here, 'group d' may correspond to a user group of users extracted from group E and similar to users of group D. The similar user extraction module 410 may sample group d from users of group E having a feature similarity with users sampled from users D who do not use the second medium equal to or greater than a predetermined standard.

보다 구체적으로, 유사 유저 추출 모듈(410)은 E 그룹의 유저들('제2-1 유저들')로부터 제1 실험군을 랜덤 샘플링할 수 있다. 유사 유저 추출 모듈(410)은 광고에 노출된 제1 유저들(예를 들어, D+E 그룹의 유저들) 중 제2 매체를 이용하지 않는 유저들(예를 들어, D 그룹의 유저들)로부터 제2 실험군을 샘플링할 수 있다. 유사 유저 추출 모듈(410)은 제2 실험군에 기초하여, E 그룹의 유저들로부터 제3 실험군('d군')을 샘플링할 수 있다. 유사 유저 추출 모듈(410)은 제1 실험군과 제3 실험군에 기초하여, 실험군을 결정할 수 있다. More specifically, the similar user extraction module 410 may randomly sample the first experimental group from users of the E group ('2-1-th users'). The similar user extraction module 410 is configured for users who do not use the second medium among the first users (eg, users of D+E group) exposed to the advertisement (eg, users of group D). The second experimental group can be sampled from The similar user extraction module 410 may sample the third experimental group ('d' group) from users of the E group based on the second experimental group. The similar user extraction module 410 may determine an experimental group based on the first experimental group and the third experimental group.

이처럼 유사 유저 추출 모듈(410)은 E 그룹에서 랜덤하게 추출된 유저들 이외에, E 그룹에서 D 그룹의 유저들과 유사한 유저군을 더 추출함으로써 E 그룹에서 샘플링된 유저들이 D+E그룹에서 랜덤 샘플링된 실험군처럼 대표성을 갖도록 할 수 있다. 유사 유저 추출 모듈(410)이 실험군을 추출하는 방법은 아래의 도 8을 참조하여 보다 구체적으로 설명한다. 유저 분포 조절 모듈(430)은 유사 유저 추출 모듈(410)에서 유사 유저 찾기 로직을 통해 샘플링된 유저들이 광고에 노출된 유저들(예를 들어, D+E 그룹의 유저들)의 유저 분포와 동일한 유저 분포를 가지도록 조절함으로써 실험군의 대표성을 강화할 수 있다. In this way, the similar user extraction module 410 extracts a user group similar to the users of the D group from the E group in addition to the randomly extracted users from the E group, so that the users sampled from the E group are randomly sampled from the D+E group. It can be made representative like the experimental group. A method of extracting the experimental group by the similar user extraction module 410 will be described in more detail with reference to FIG. 8 below. The user distribution adjustment module 430 determines that the users sampled through the similar user finding logic in the similar user extraction module 410 are identical to the user distribution of users exposed to advertisements (eg, users of the D+E group). By adjusting it to have a user distribution, the representativeness of the experimental group can be strengthened.

예를 들어, 유저 분포 조절 모듈(430)은 유사 유저 추출 모듈(410)에서 유사 유저 찾기 로직을 통해 E 그룹에서 샘플링할 때에E 그룹의 d 군에서 추출된 샘플이 광고에 노출되지 않은 D그룹/(D+E) 그룹만큼의 비율로 포함되도록 할 수 있다. For example, when sampling from group E through the similar user finding logic in the similar user extraction module 410, the user distribution control module 430 may determine that the sample extracted from group d of group E is not exposed to advertisements. (D+E) It can be included in the same proportion as the group.

또는, 유저 분포 조절 모듈(430)은 E 그룹에서 랜덤하게 실험군을 샘플링하는 대신, E 그룹의 유저들의 특징 분포 비율이, 광고에 노출된 D 그룹의 유저들의 특징 분포 비율과 일치하도록, E 그룹의 유저들로부터 실험군(440)을 샘플링할 수 있다. 이때, 특징 분포 비율은 예를 들어, 성별 비율, 구매 물품의 비율, 및 신호도 비율을 포함할 수 있으며, 반드시 이에 한정되지는 않는다. Alternatively, instead of randomly sampling the experimental group from the E group, the user distribution control module 430 sets the feature distribution ratio of the users in the E group to match the feature distribution ratio of the users in the D group exposed to the advertisement. The experimental group 440 may be sampled from users. In this case, the feature distribution ratio may include, for example, a gender ratio, a ratio of purchased items, and a signal level ratio, but is not necessarily limited thereto.

예를 들어, D그룹의 남녀 비율이 2:8이라고 하자. 이 경우, 유저 분포 조절 모듈(430)은 유사 유저 추출 모듈(410)이 유사 유저 찾기 로직으로 E 그룹에서 추출한 d 실험군에서 남녀 비율이 2:8이 되도록 유저를 샘플링 함으로써 설문 조사할 실험군(440)을 샘플링할 수 있다. For example, suppose that the male to female ratio in group D is 2:8. In this case, the user distribution control module 430 samples the users so that the male to female ratio is 2:8 in the d experimental group extracted from the E group by the similar user extraction module 410 using the similar user search logic to survey the experimental group 440 to be surveyed. can be sampled.

또한, 유저 분포 조절 모듈(430)은 유사 유저 추출 모듈(410)에서 유사 유저 찾기 로직을 통해 샘플링된 유저들이 광고에 노출되지 않은 유저들(예를 들어, A+B 그룹의 유저들)의 유저 분포와 동일한 유저 분포를 가지도록 조절함으로써 대조군의 대표성을 강화할 수 있다. In addition, the user distribution control module 430 is a user of users (eg, users of group A+B) whose users sampled through the similar user finding logic in the similar user extraction module 410 are not exposed to advertisements. By adjusting to have the same user distribution as the distribution, the representativeness of the control group can be strengthened.

예를 들어, 유저 분포 조절 모듈(430)은 유사 유저 찾기 로직을 통해 B 그룹에서 샘플링할 때에B 그룹의 a 군에서 추출된 샘플이 광고에 노출되지 않은 A 그룹/(A+B) 그룹만큼의 비율로 포함되도록 할 수 있다. For example, when sampling from group B through the similar user finding logic, the user distribution control module 430 determines that the sample extracted from group a of group B is as much as group A/(A+B) group that is not exposed to advertisements. It can be included as a percentage.

또는, 실험군에서와 마찬가지로, 유저 분포 조절 모듈(430)은 예를 들어, B 그룹의 유저들의 특징 분포 비율이, 광고에 노출되지 않은 A 그룹의 유저들의 특징 분포 비율과 일치하도록, B 그룹의 유저들로부터 대조군(440)을 샘플링할 수 있다. 이때, 특징 분포 비율은 예를 들어, 성별 비율, 구매 물품의 비율, 및 신호도 비율을 포함할 수 있으며, 반드시 이에 한정되지는 않는다. Alternatively, as in the experimental group, the user distribution adjustment module 430 may configure, for example, the feature distribution ratio of users of group B to match the feature distribution ratio of users of group A who are not exposed to advertisements, so that users of group B A control 440 may be sampled from In this case, the feature distribution ratio may include, for example, a gender ratio, a ratio of purchased items, and a signal level ratio, but is not necessarily limited thereto.

예를 들어, A그룹의 남녀 비율이 2:8이라고 하자. 이 경우, 유저 분포 조절 모듈(430)은 유사 유저 추출 모듈(410)이 유사 유저 찾기 로직으로 B 그룹에서 추출한 a 대조군에서 남녀 비율이 2:8이 되도록 유저를 샘플링 함으로써 설문 조사할 대조군(440)을 샘플링할 수 있다. For example, suppose that the male to female ratio in group A is 2:8. In this case, the user distribution control module 430 samples the users so that the male to female ratio is 2:8 in the control group a extracted from group B by the similar user extraction module 410 using the similar user search logic to perform a questionnaire survey. can be sampled.

설문 조사 장치의 샘플링 모듈(400)은 예를 들어, 제1 매체와 제2 매체의 유저 분포 및 유저 편중 정보 등에 기초하여 일부 구성이 생략되거나 달라질 수 있다. 예를 들어, 제2 매체의 메신저 플랫폼이 제1 매체의 유저를 포함하고 있거나, 또는 제1 매체의 유저와 제2 매체의 유저가 같은 경우, 샘플링 모듈(400)은 E그룹과 B그룹에서 유저 분포만을 조절하여 랜덤 샘플링을 수행하면 된다. 이 경우, 샘플링 모듈(400)은 유사 유저 추출 모듈(410) 없이 유저 분포 조절 모듈(430)만을 포함할 수 있다. Some components of the sampling module 400 of the survey apparatus may be omitted or changed based on, for example, user distribution of the first medium and the second medium and user bias information. For example, when the messenger platform of the second medium includes the users of the first medium, or the users of the first medium and the users of the second medium are the same, the sampling module 400 is configured for users in groups E and B. Random sampling is performed by adjusting only the distribution. In this case, the sampling module 400 may include only the user distribution adjustment module 430 without the similar user extraction module 410 .

도 7은 일 실시예에 따른 대조군을 결정하는 방법을 나타낸 흐름도이다. 도 7을 참조하면, 일 실시예에 따른 설문 조사 장치가 단계(710) 내지 단계(740)을 통해 대조군을 샘플링하는 과정이 도시된다. 7 is a flowchart illustrating a method of determining a control group according to an exemplary embodiment. Referring to FIG. 7 , a process of sampling a control group through steps 710 to 740 by the survey apparatus according to an exemplary embodiment is illustrated.

단계(710)에서, 설문 조사 장치는 B 그룹의 유저들('제2-2 유저들')로부터 제1 대조군을 샘플링할 수 있다. 단계(720)에서, 설문 조사 장치는 제1 매체의 유저들(예를 들어, A+B+D+E 그룹의 유저들) 중 제2 매체를 이용하지 않으면서 광고에 노출되지 않은 A 그룹의 유저들로부터 제2 대조군을 샘플링할 수 있다. In operation 710 , the survey apparatus may sample a first control group from users of group B ('second-second users'). In step 720 , the survey apparatus determines the group A of users of the first medium (eg, users of the A+B+D+E group) of group A without using the second medium and not exposed to advertisements. A second control group may be sampled from users.

단계(730)에서, 설문 조사 장치는 제2 대조군에 기초하여, B 그룹의 유저들('제2-2 유저들')로부터 제3 대조군(a)을 샘플링할 수 있다. 예를 들어, 설문 조사 장치는 제2 대조군과의 특징 유사도가 일정 기준 이상인 B 그룹의 유저들로부터 제3 대조군(a)을 샘플링할 수 있다. In operation 730, the survey apparatus may sample the third control group (a) from users of group B ('second-second users') based on the second control group. For example, the survey apparatus may sample the third control group (a) from users of group B having a feature similarity with the second control group equal to or greater than a predetermined criterion.

설문 조사 장치는 B 그룹의 유저들로부터 샘플링된 제3 대조군(a)에서 추출된 샘플들의 개수가, 제1 매체의 유저들 중 대상 광고에 노출되지 않은 유저들(예를 들어, A+B 그룹의 유저들)의 수 대비 제1 매체와 제2 매체를 함께 이용하면서 대상 광고에 노출되지 않은 B 그룹의 유저들의 수 간의 비율과 일치하도록, B 그룹의 유저들로부터 제3 대조군(a)을 샘플링할 수 있다. In the survey device, the number of samples extracted from the third control group (a) sampled from users of group B is determined among users of the first medium who are not exposed to the target advertisement (eg, group A + B). A third control group (a) was sampled from users of group B to match the ratio between the number of users of group B who were not exposed to the target advertisement while using the first medium and the second medium together with respect to the number of users of group B) can do.

단계(740)에서, 설문 조사 장치는 제1 대조군과 제3 대조군에 기초하여, 대조군을 결정할 수 있다. 예를 들어, 설문 조사 장치는 제1 대조군과 제3 대조군의 합집합을 최종 대조군으로 결정할 수 있다. 또는, 설문 조사 장치는 최종 대조군의 특징 분포 비율이 A+B 그룹의 유저들의 특징 분포 비율과 일치하도록 제1 대조군과 제3 대조군의 합집합에서 최종 대조군을 결정할 수도 있다.In operation 740 , the survey device may determine a control group based on the first control group and the third control group. For example, the survey device may determine the union of the first control group and the third control group as the final control group. Alternatively, the survey apparatus may determine the final control group from the union of the first control group and the third control group so that the characteristic distribution ratio of the final control group coincides with the characteristic distribution ratio of users of the A+B group.

실시예에 따라서, 설문 조사 장치는 단계(730)에서 실험군에 기초하여, B 그룹의 유저들로부터 E 그룹의 유저들과 유사한 제4 대조군(e)을 더 샘플링할 수 있다. 이 경우, 설문 조사 장치는 단계(740)에서 제1 대조군, 제3 대조군(a) 및 제4 대조군(e)에 기초하여, 대조군을 결정할 수 있다. According to an embodiment, the survey apparatus may further sample a fourth control group (e) similar to users of group E from users of group B based on the experimental group in step 730 . In this case, the survey device may determine the control group based on the first control group, the third control group (a), and the fourth control group (e) in step 740 .

도 8은 일 실시예에 따른 실험군을 결정하는 방법을 나타낸 흐름도이다. 도 8을 참조하면, 일 실시예에 따른 설문 조사 장치가 단계(810) 내지 단계(840)을 통해 실험군을 샘플링하는 과정이 도시된다.8 is a flowchart illustrating a method of determining an experimental group according to an exemplary embodiment. Referring to FIG. 8 , a process of sampling an experimental group through steps 810 to 840 by the survey apparatus according to an exemplary embodiment is illustrated.

단계(810)에서, 설문 조사 장치는 E 그룹의 유저들('제2-1 유저들')로부터 제1 실험군을 샘플링할 수 있다. 단계(820)에서, 설문 조사 장치는 D+E 그룹의 유저들 중 제2 매체를 이용하지 않는 유저들(예를 들어, D 그룹의 유저들)로부터 제2 실험군을 샘플링할 수 있다. In operation 810 , the survey apparatus may sample the first experimental group from users of group E ('2-1-th users'). In operation 820 , the survey apparatus may sample the second experimental group from users of the D+E group who do not use the second medium (eg, users of the D group).

단계(830)에서, 설문 조사 장치는 제2 실험군에 기초하여, E 그룹의 유저들로부터 제3 실험군(d)을 샘플링할 수 있다. 예를 들어, 설문 조사 장치는 제2 실험군과의 특징 유사도가 일정 기준 이상인 E 그룹의 유저들로부터 제3 실험군(d)을 샘플링할 수 있다. In operation 830 , the survey apparatus may sample the third experimental group d from users of the E group based on the second experimental group. For example, the survey apparatus may sample the third experimental group (d) from users of the E group having a feature similarity with the second experimental group equal to or greater than a predetermined criterion.

설문 조사 장치는 앞서 E 그룹의 유저들로부터 샘플링된 제3 실험군(d)에서 추출된 샘플들의 개수가, 제1 매체의 유저들(예를 들어, A+B+D+E 그룹의 유저들) 중 대상 광고에 노출된 제1 유저들(D+E)의 수 대비 D+E 그룹의 유저들 중 D 그룹의 유저들의 수 간의 비율과 일치하도록, E 그룹의 유저들로부터 제3 실험군(d)을 샘플링할 수 있다. The survey apparatus determines that the number of samples extracted from the third experimental group (d) previously sampled from users of group E is, users of the first medium (eg, users of group A + B + D + E). To match the ratio between the number of first users (D+E) exposed to the target advertisement and the number of users of group D among users of group D+E, the third experimental group (d) from users of group E can be sampled.

단계(840)에서, 설문 조사 장치는 제1 실험군과 제3 실험군에 기초하여, 실험군을 결정할 수 있다. 예를 들어, 설문 조사 장치는 제1 실험군과 제3 실험군의 합집합을 최종 실험군으로 결정할 수 있다. 또는, 설문 조사 장치는 최종 실험군의 특징 분포 비율이 D+E 그룹의 유저들의 특징 분포 비율과 일치하도록 제1 실험군과 제3 실험군의 합집합에서 최종 실험군을 결정할 수도 있다.In operation 840 , the survey apparatus may determine an experimental group based on the first experimental group and the third experimental group. For example, the survey apparatus may determine the union of the first experimental group and the third experimental group as the final experimental group. Alternatively, the survey apparatus may determine the final experimental group from the union of the first experimental group and the third experimental group so that the feature distribution ratio of the final experimental group coincides with the feature distribution ratio of users of the D+E group.

도 9는 일 실시예에 따른 제2 매체를 통해 제2 유저들에게 제공되는 설문 조사의 일 예시를 도시한 도면이다. 도 9를 참조하면, 일 실시예에 따른 설문 조사 장치가 제2 매체를 통해 제공하는 설문 조사의 내용을 포함하는 화면(900)이 도시된다. 9 is a diagram illustrating an example of a survey provided to second users through a second medium according to an exemplary embodiment. Referring to FIG. 9 , a screen 900 including contents of a survey provided by the survey apparatus through a second medium according to an exemplary embodiment is shown.

설문 조사는 예를 들어, 광고 상기도, 브랜드 인지도, 브랜드 관심도, 구매 고려도, 브랜드 선호도, 구매 의도 등과 같은 브랜드 퍼널의 측정 항목에 대응하는 항목들을 포함할 수 있으며, 반드시 이에 한정되지는 않는다. 설문 조사 장치는 설문 조사를 통해 브랜드 퍼널 각 단계 별로 성과를 측정하여 소비자의 인사이트를 도출할 수 있다. The survey may include items corresponding to measurement items of the brand funnel, such as, for example, advertisement recall, brand awareness, brand interest, purchase consideration, brand preference, purchase intention, and the like, but is not limited thereto. The survey device may derive consumer insights by measuring performance at each stage of the brand funnel through a survey.

전술한 것과 같이, 설문 조사 장치는 제2 매체(예를 들어, 인스턴트 메신저 매체)를 통해 설문 조사를 제공함으로써 제1 매체(예를 들어, 광고 매체)의 광고 지면을 할애하지 않고도 브랜드 퍼널과 관련된 대상 광고에 대한 설문 조사를 진행할 수 있다. 설문 조사 장치는 제2 매체를 통해 설문 조사를 진행함으로써 유저의 매체 재방문을 기다리지 않고도 설문 조사를 실시할 수 있다. As described above, the survey apparatus provides a survey through a second medium (eg, an instant messenger medium) so as to be associated with the brand funnel without dedicating the advertising space of the first medium (eg, an advertisement medium). You can conduct a survey on the target advertisement. The survey apparatus may conduct a survey through the second medium without waiting for the user to revisit the medium by conducting the survey.

또한, 설문 조사 장치는 메신저 연동이 가능한 광고 지면에서 지면 환경(예를 들어, 지면의 사이즈, 위치 등)과 무관하게 설문 조사를 진행할 수 있다. In addition, the survey apparatus may conduct a survey on an advertisement page capable of interworking with a messenger irrespective of the ground environment (eg, the size and location of the ground).

도 10은 일 실시예에 따른 브랜드 퍼널 관련 설문 조사에 대한 분석 결과를 광고주에게 제공하는 과정을 설명하기 위한 도면이다. 도 10을 참조하면, 일 실시예에 따른 설문 조사 장치가 단계(1010) 내지 단계(1080)의 과정을 통해 설문 조사를 수행하고, 설문 조사에 대한 분석 결과를 광고주에게 제공하는 과정이 도시된다. 10 is a diagram for explaining a process of providing an advertiser with an analysis result for a brand funnel-related survey according to an exemplary embodiment. Referring to FIG. 10 , a process in which the survey apparatus performs a survey through the processes of steps 1010 to 1080 and provides an analysis result of the survey to an advertiser according to an exemplary embodiment is illustrated.

단계(1010)에서, 설문 조사 장치는 광고주(1001)의 브랜드 광고를 광고 플랫폼(1002)에 등록할 수 있다. In step 1010 , the survey device may register the brand advertisement of the advertiser 1001 in the advertisement platform 1002 .

단계(1020)에서, 광고 플랫폼(1002)은 광고 매체(1003)의 노출 요청에 따라 광고 플랫폼(1002)에 등록된 광고 소재를 광고 매체(1003)로 전달할 수 있다. In step 1020 , the advertisement platform 1002 may deliver the advertisement material registered in the advertisement platform 1002 to the advertisement medium 1003 according to the exposure request of the advertisement medium 1003 .

단계(1030)에서, 광고 매체(1003)는 광고 플랫폼(1002)으로부터 전달된 광고 소재에 따라 유저들에게 브랜드 광고를 노출할 수 있다. In step 1030 , the advertisement medium 1003 may expose the brand advertisement to users according to the advertisement material delivered from the advertisement platform 1002 .

단계(1030)에서 광고 매체(1003)를 통한 광고 집행이 완료되면, 단계(1040)에서 설문 조사 장치는 광고에 노출된 유저 정보를 데이터베이스(1004)로 전송할 수 있다. 데이터베이스(1004)는 유저 정보를 샘플링 모듈(1005)에게 전달할 수 있다. 샘플링 모듈(1005)은 예를 들어, 전술한 샘플링 모듈(400)에 해당할 수 있다. When advertisement publication through the advertisement medium 1003 is completed in step 1030 , in step 1040 , the survey device may transmit user information exposed to the advertisement to the database 1004 . The database 1004 may transmit user information to the sampling module 1005 . The sampling module 1005 may correspond to, for example, the above-described sampling module 400 .

단계(1050)에서, 샘플링 모듈(1005)은 데이터베이스(1004)로부터 전송받은 유저 정보로부터 대표성이 있는 실험군과 대조군을 추출할 수 있다. 샘플링 모듈(1005)은 전술한 방법에 의해 광고에 노출된 유저들로부터 실험군을 샘플링할 수 있다. 또한, 샘플링 모듈(1005)은 전술한 방법에 의해 광고에 노출되지 않은 유저들로부터 대조군을 샘플링할 수 있다. In step 1050 , the sampling module 1005 may extract representative experimental groups and control groups from the user information received from the database 1004 . The sampling module 1005 may sample an experimental group from users exposed to advertisements by the above-described method. Also, the sampling module 1005 may sample a control group from users who are not exposed to advertisements by the above-described method.

단계(1060)에서, 설문 조사 장치는 메신저 플랫폼의 메시지 전송 모듈(1006)을 통해 실험군과 대조군에게 설문을 발송하고, 설문에 대한 응답을 취합할 수 있다. 이때 메신저로 사용할 수 있는 플랫폼의 일 예시로는 카카오톡®의 톡채널 또는 톡채널의 메가플러스 친구와 같은 초대형 톡 채널을 포함할 수 있으며, 반드시 이에 한정되지는 않는다. In step 1060, the survey device may send a survey to the experimental group and the control group through the message transmission module 1006 of the messenger platform, and collect responses to the survey. In this case, an example of a platform that can be used as a messenger may include, but is not necessarily limited to, a Kakao Talk ® talk channel or a mega plus buddy of the talk channel.

단계(1070)에서, 메시지 전송 모듈(1006)은 설문 응답값을 광고 플랫폼(1002)으로 전송할 수 있다. 광고 플랫폼(1002)은 설문 응답값을 설문 결과 분석 모듈(1007)로 전달할 수 있다. In step 1070 , the message transmission module 1006 may transmit the survey response value to the advertisement platform 1002 . The advertisement platform 1002 may transmit the survey response value to the survey result analysis module 1007 .

단계(1080)에서, 설문 결과 분석 모듈(1007)은 브랜드 광고의 효과를 포함하는 분석 결과를 생성하고, 분석 결과를 포함하는 리포트를 브랜드 광고의 광고주(1001)에게 발송할 수 있다. In step 1080, the questionnaire result analysis module 1007 may generate an analysis result including the effect of the brand advertisement, and send a report including the analysis result to the advertiser 1001 of the brand advertisement.

도 11은 일 실시예에 따른 설문 조사를 수행하는 장치의 블록도이다. 도 11을 참조하면, 일 실시예에 따른 설문 조사를 수행하는 장치(이하, '설문 조사 장치')(1100)는 프로세서(1110), 통신 인터페이스(1130), 및 메모리(1150)를 포함한다. 프로세서(1110), 통신 인터페이스(1130), 및 메모리(1150)는 통신 버스(1105)를 통해 서로 연결될 수 있다. 11 is a block diagram of an apparatus for conducting a survey according to an embodiment. Referring to FIG. 11 , an apparatus for performing a survey (hereinafter, referred to as a 'survey survey apparatus') 1100 according to an exemplary embodiment includes a processor 1110 , a communication interface 1130 , and a memory 1150 . The processor 1110 , the communication interface 1130 , and the memory 1150 may be connected to each other through the communication bus 1105 .

프로세서(1110)는 대상 광고를, 제1 매체를 통해 제1 유저들에게 노출한다. 프로세서(1110)는 제1 매체와 구별되는 제2 매체를 통해 대상 광고와 관련된 설문 조사를 진행하기 위하여, 제1 매체와 제2 매체를 함께 이용하는 제2 유저들을 샘플링한다. 프로세서(1110)는 제2 매체를 통해, 제2 유저들에게 설문 조사를 제공한다. 프로세서(1110)는 설문 조사에 대응하여 수집되는 응답에 기초하여, 대상 광고의 효과를 포함하는 분석 결과를 생성한다.The processor 1110 exposes the target advertisement to first users through the first medium. The processor 1110 samples second users who use the first medium and the second medium together in order to conduct a survey related to the target advertisement through a second medium that is different from the first medium. The processor 1110 provides the questionnaire survey to the second users through the second medium. The processor 1110 generates an analysis result including the effect of the target advertisement based on the responses collected in response to the survey.

프로세서(1110)는 제2 유저들 중 대상 광고에 노출된 제2-1 유저들로부터 실험군을 샘플링하고, 제2 유저들 중 대상 광고에 노출되지 않은 제2-2 유저들로부터 대조군을 샘플링할 수 있다. The processor 1110 may sample the experimental group from the 2-1 users exposed to the target advertisement among the second users, and sample the control group from the 2-2 users who are not exposed to the target advertisement among the second users. have.

프로세서(1110)는 제2-1 유저들로부터 제1 실험군을 샘플링할 수 있다. 프로세서(1110)는 제1 유저들 중 제2 매체를 이용하지 않는 유저들로부터 제2 실험군을 샘플링할 수 있다. 프로세서(1110)는 제2 실험군에 기초하여, 제2-1 유저들로부터 제3 실험군을 샘플링할 수 있다. 프로세서(1110)는 제1 실험군과 제3 실험군에 기초하여, 실험군을 결정할 수 있다. The processor 1110 may sample the first experimental group from the 2-1 users. The processor 1110 may sample the second experimental group from users who do not use the second medium among the first users. The processor 1110 may sample the third experimental group from the 2-1 users based on the second experimental group. The processor 1110 may determine an experimental group based on the first experimental group and the third experimental group.

프로세서(1110)는 제2-2 유저들로부터 제1 대조군을 샘플링할 수 있다. 프로세서(1110)는 제1 매체의 유저들 중 제2 매체를 이용하지 않으면서 대상 광고에 노출되지 않은 유저들로부터 제2 대조군을 샘플링할 수 있다. 프로세서(1110)는 제2 대조군에 기초하여, 제2-2 유저들로부터 제3 대조군을 샘플링할 수 있다. 프로세서(1110)는 제1 대조군과 제3 대조군에 기초하여, 대조군을 결정할 수 있다. The processor 1110 may sample the first control group from the 2-2 users. The processor 1110 may sample the second control group from users of the first medium who are not exposed to the target advertisement while not using the second medium. The processor 1110 may sample a third control group from the 2-2 users based on the second control group. The processor 1110 may determine a control group based on the first control group and the third control group.

통신 인터페이스(1130)는 프로세서(1110)가 생성한 분석 결과를 대상 광고의 광고주에게 제공한다. The communication interface 1130 provides the analysis result generated by the processor 1110 to the advertiser of the target advertisement.

메모리(1150)는 제1 매체를 통해 노출되는 대상 광고를 저장할 수 있다. 메모리는 제2 매체를 통해 제공되는 설문 조사를 저장할 수 있다. 메모리(1150)는 프로세서(1110)가 샘플링한 대조군 및 실험군을 저장할 수 있다. 또한, 메모리(1150)는 설문 조사에 대응하여 수집되는 응답을 저장할 수 있다. The memory 1150 may store a target advertisement exposed through the first medium. The memory may store the survey provided through the second medium. The memory 1150 may store a control group and an experimental group sampled by the processor 1110 . Also, the memory 1150 may store responses collected in response to a survey.

이 밖에도, 프로세서(1110) 도 1 내지 도 10을 통해 전술한 적어도 하나의 방법 또는 적어도 하나의 방법에 대응되는 알고리즘을 수행할 수 있다. 프로세서(1110)는 프로그램을 실행하고, 설문 조사 장치(1100)을 제어할 수 있다. 프로세서(1110)에 의하여 실행되는 프로그램 코드는 메모리(1150)에 저장될 수 있다. In addition, the processor 1110 may perform at least one method or an algorithm corresponding to the at least one method through FIGS. 1 to 10 . The processor 1110 may execute a program and control the survey apparatus 1100 . The program code executed by the processor 1110 may be stored in the memory 1150 .

메모리(1150)는 예를 들어, DRAM, SRAM, DDR RAM 또는 다른 고속 액세스 고체 상태 메모리 장치 등과 같은 고속 랜덤 액세스 메모리(high-speed random access memory)를 포함할 수 있다. 메모리(1150)는 휘발성 메모리 및 비휘발성 메모리를 포함할 수 있다. 메모리(1150)는 프로세서(1110)로부터 원격에 위치하는 적어도 하나의 저장 장치를 선택적으로 포함할 수 있다. Memory 1150 may include, for example, high-speed random access memory, such as DRAM, SRAM, DDR RAM, or other fast access solid state memory device. The memory 1150 may include a volatile memory and a non-volatile memory. The memory 1150 may selectively include at least one storage device remotely located from the processor 1110 .

이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 컨트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.The embodiments described above may be implemented by a hardware component, a software component, and/or a combination of the hardware component and the software component. For example, the apparatus, methods and components described in the embodiments may include, for example, a processor, a controller, an arithmetic logic unit (ALU), a digital signal processor, a microcomputer, a field programmable gate (FPGA) array), a programmable logic unit (PLU), a microprocessor, or any other device capable of executing and responding to instructions, may be implemented using a general purpose computer or special purpose computer. The processing device may execute an operating system (OS) and a software application running on the operating system. The processing device may also access, store, manipulate, process, and generate data in response to execution of the software. For convenience of understanding, although one processing device is sometimes described as being used, one of ordinary skill in the art will recognize that the processing device includes a plurality of processing elements and/or a plurality of types of processing elements. It can be seen that may include For example, the processing device may include a plurality of processors or one processor and one controller. Other processing configurations are also possible, such as parallel processors.

소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.The software may comprise a computer program, code, instructions, or a combination of one or more thereof, which configures a processing device to operate as desired or is independently or collectively processed You can command the device. The software and/or data may be any kind of machine, component, physical device, virtual equipment, computer storage medium or device, to be interpreted by or to provide instructions or data to the processing device. , or may be permanently or temporarily embody in a transmitted signal wave. The software may be distributed over networked computer systems and stored or executed in a distributed manner. Software and data may be stored in a computer-readable recording medium.

실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있으며 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. The method according to the embodiment may be implemented in the form of program instructions that can be executed through various computer means and recorded in a computer-readable medium. The computer readable medium may include program instructions, data files, data structures, etc. alone or in combination, and the program instructions recorded on the medium are specially designed and configured for the embodiment or may be known and available to those skilled in the art of computer software. may be Examples of the computer-readable recording medium include magnetic media such as hard disks, floppy disks and magnetic tapes, optical media such as CD-ROMs and DVDs, and magnetic such as floppy disks. - includes magneto-optical media, and hardware devices specially configured to store and execute program instructions, such as ROM, RAM, flash memory, and the like. Examples of program instructions include not only machine language codes such as those generated by a compiler, but also high-level language codes that can be executed by a computer using an interpreter or the like.

위에서 설명한 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 또는 복수의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.The hardware devices described above may be configured to operate as one or a plurality of software modules to perform the operations of the embodiments, and vice versa.

이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 이를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.As described above, although the embodiments have been described with reference to the limited drawings, a person skilled in the art may apply various technical modifications and variations based thereon. For example, the described techniques are performed in a different order than the described method, and/or the described components of the system, structure, apparatus, circuit, etc. are combined or combined in a different form than the described method, or other components Or substituted or substituted by equivalents may achieve an appropriate result.

그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.Therefore, other implementations, other embodiments, and equivalents to the claims are also within the scope of the following claims.

Claims (21)

대상 광고를, 제1 매체를 통해 제1 유저들에게 노출하는 단계;
상기 제1 매체와 구별되는 제2 매체를 통해 상기 대상 광고와 관련된 설문 조사를 진행하기 위하여, 상기 제1 매체와 상기 제2 매체를 함께 이용하는 제2 유저들을 샘플링하는 단계;
상기 제2 매체를 통해, 상기 제2 유저들에게 상기 설문 조사를 제공하는 단계;
상기 설문 조사에 대응하여 수집되는 응답에 기초하여, 상기 대상 광고의 효과를 포함하는 분석 결과를 생성하는 단계; 및
상기 분석 결과를 상기 대상 광고의 광고주에게 제공하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
exposing the target advertisement to first users through a first medium;
sampling second users who use the first medium and the second medium together to conduct a survey related to the target advertisement through a second medium that is different from the first medium;
providing the questionnaire survey to the second users through the second medium;
generating an analysis result including an effect of the target advertisement based on the responses collected in response to the survey; and
providing the analysis result to an advertiser of the target advertisement
containing,
How to conduct a survey.
제1항에 있어서,
상기 제2 유저들을 샘플링하는 단계는
상기 제2 유저들 중 상기 대상 광고에 노출된 제2-1 유저들로부터 실험군을 샘플링하는 단계; 및
상기 제2 유저들 중 상기 대상 광고에 노출되지 않은 제2-2 유저들로부터 대조군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
According to claim 1,
The step of sampling the second users is
sampling an experimental group from 2-1 users exposed to the target advertisement among the second users; and
Sampling a control group from second-2 users who are not exposed to the target advertisement among the second users
containing,
How to conduct a survey.
제2항에 있어서,
상기 실험군을 샘플링하는 단계는
상기 제2-1 유저들로부터 제1 실험군을 샘플링하는 단계;
상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들로부터 제2 실험군을 샘플링하는 단계;
상기 제2 실험군에 기초하여, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계; 및
상기 제1 실험군과 상기 제3 실험군에 기초하여, 상기 실험군을 결정하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
3. The method of claim 2,
The step of sampling the experimental group is
sampling a first experimental group from the 2-1 users;
sampling a second experimental group from users who do not use the second medium among the first users;
sampling a third experimental group from the 2-1 users based on the second experimental group; and
determining the experimental group based on the first experimental group and the third experimental group
containing,
How to conduct a survey.
제3항에 있어서,
상기 제1 실험군을 샘플링하는 단계는
상기 제2-1 유저들의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-1 유저들로부터 제1 실험군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
4. The method of claim 3,
The step of sampling the first experimental group is
sampling the first experimental group from the 2-1 users so that the feature distribution ratio of the 2-1 users matches the feature distribution ratio of the first users
containing,
How to conduct a survey.
제3항에 있어서,
상기 제3 실험군을 샘플링하는 단계는
상기 제2 실험군과의 특징 유사도가 일정 기준 이상인 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
4. The method of claim 3,
The step of sampling the third experimental group is
sampling a third experimental group from the 2-1 users whose feature similarity with the second experimental group is equal to or greater than a certain standard
containing,
How to conduct a survey.
제5항에 있어서,
상기 제3 실험군을 샘플링하는 단계는
상기 제3 실험군의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-1 유저들로부터 상기 제3 실험군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
6. The method of claim 5,
The step of sampling the third experimental group is
sampling the third experimental group from the 2-1 users so that the feature distribution ratio of the third experimental group coincides with the feature distribution ratio of the first users
containing,
How to conduct a survey.
제5항에 있어서,
상기 제3 실험군을 샘플링하는 단계는
상기 제3 실험군에서 추출된 샘플들의 개수가, 상기 제1 매체의 유저들 중 상기 대상 광고에 노출된 제1 유저들의 수 대비 상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들의 수 간의 비율과 일치하도록, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
6. The method of claim 5,
The step of sampling the third experimental group is
The number of samples extracted from the third experimental group is between the number of users of the first medium who are exposed to the target advertisement compared to the number of users who do not use the second medium among the first users. Sampling a third experimental group from the 2-1 users to match the ratio
containing,
How to conduct a survey.
제3항에 있어서,
상기 실험군을 샘플링하는 단계는
상기 대조군에 기초하여, 상기 제2-1 유저들로부터 제4 실험군을 샘플링하는 단계
를 더 포함하고,
상기 실험군을 결정하는 단계는
상기 제1 실험군, 상기 제3 실험군 및 상기 제4 실험군에 기초하여, 상기 실험군을 결정하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
4. The method of claim 3,
The step of sampling the experimental group is
Sampling a fourth experimental group from the 2-1 users based on the control group
further comprising,
The step of determining the experimental group is
determining the experimental group based on the first experimental group, the third experimental group, and the fourth experimental group
containing,
How to conduct a survey.
제2항에 있어서,
상기 대조군을 샘플링하는 단계는
상기 제2-2 유저들로부터 제1 대조군을 샘플링하는 단계;
상기 제1 매체의 유저들 중 상기 제2 매체를 이용하지 않으면서 상기 대상 광고에 노출되지 않은 유저들로부터 제2 대조군을 샘플링하는 단계;
상기 제2 대조군에 기초하여, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하는 단계; 및
상기 제1 대조군과 상기 제3 대조군에 기초하여, 상기 대조군을 결정하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
3. The method of claim 2,
The step of sampling the control is
sampling a first control group from the 2-2 users;
sampling a second control group from users of the first medium who do not use the second medium and are not exposed to the target advertisement;
sampling a third control group from the 2-2 users based on the second control group; and
determining the control based on the first control and the third control;
containing,
How to conduct a survey.
제9항에 있어서,
상기 제1 대조군을 샘플링하는 단계는
상기 제2-2 유저들의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-2 유저들로부터 제1 대조군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
10. The method of claim 9,
The step of sampling the first control is
sampling a first control group from the 2-2 users so that the feature distribution ratio of the 2-2 users matches the feature distribution ratio of the first users
containing,
How to conduct a survey.
제9항에 있어서,
상기 제3 대조군을 샘플링하는 단계는
상기 제2 대조군과의 특징 유사도가 일정 기준 이상인 상기 제2-2 유저들로부터 상기 제3 대조군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
10. The method of claim 9,
The step of sampling the third control is
sampling the third control group from the 2-2 users whose feature similarity with the second control group is equal to or greater than a predetermined standard
containing,
How to conduct a survey.
제11항에 있어서,
상기 제3 대조군을 샘플링하는 단계는
상기 제3 대조군의 특징 분포 비율이, 상기 제1 유저들의 특징 분포 비율과 일치하도록, 상기 제2-2 유저들로부터 상기 제3 대조군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
12. The method of claim 11,
The step of sampling the third control is
sampling the third control group from the 2-2 users so that the feature distribution ratio of the third control group matches the feature distribution ratio of the first users
containing,
How to conduct a survey.
제11항에 있어서,
상기 제3 대조군을 샘플링하는 단계는
상기 제3 대조군에서 추출된 샘플들의 개수가, 상기 제1 매체의 유저들 중 상기 대상 광고에 노출되지 않은 유저들의 수 대비 상기 제1 매체와 상기 제2 매체를 함께 이용하면서 상기 대상 광고에 노출되지 않은 제2-2 유저들의 수 간의 비율과 일치하도록, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
12. The method of claim 11,
The step of sampling the third control is
The number of samples extracted from the third control group is not exposed to the target advertisement while using the first medium and the second medium together compared to the number of users who are not exposed to the target advertisement among users of the first medium. sampling a third control group from the 2-2 users to match the ratio between the number of 2-2 users who are not
containing,
How to conduct a survey.
제9항에 있어서,
상기 대조군을 샘플링하는 단계는
상기 실험군에 기초하여, 상기 제2-2 유저들로부터 제4 대조군을 샘플링하는 단계
를 더 포함하고,
상기 대조군을 결정하는 단계는
상기 제1 대조군, 상기 제3 대조군 및 상기 제4 대조군에 기초하여, 상기 대조군을 결정하는 단계
를 포함하는,
설문 조사를 수행하는 방법.
10. The method of claim 9,
The step of sampling the control is
Sampling a fourth control group from the 2-2 users based on the experimental group
further comprising,
The step of determining the control group is
determining the control based on the first control, the third control, and the fourth control;
containing,
How to conduct a survey.
제1항에 있어서,
상기 제1 매체는 광고 매체를 포함하고,
상기 제2 매체는 인스턴트 메신저 매체를 포함하는,
설문 조사를 수행하는 방법.
According to claim 1,
The first medium includes an advertising medium,
wherein the second medium comprises an instant messenger medium;
How to conduct a survey.
제1항에 있어서,
상기 대상 광고는 브랜드 퍼널과 관련된 대상 광고를 포함하고,
상기 설문 조사는 상기 브랜드 퍼널과 관련된 설문 조사를 포함하는,
설문 조사를 수행하는 방법.
According to claim 1,
The target advertisement includes a target advertisement related to the brand funnel,
wherein the survey comprises a survey related to the brand funnel;
How to conduct a survey.
하드웨어와 결합되어 제1항 내지 제16항 중 어느 하나의 항의 방법을 실행시키기 위하여 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.A computer program stored in a computer-readable recording medium in combination with hardware to execute the method of any one of claims 1 to 16. 대상 광고를, 제1 매체를 통해 제1 유저들에게 노출하고, 상기 제1 매체와 구별되는 제2 매체를 통해 상기 대상 광고와 관련된 설문 조사를 진행하기 위하여, 상기 제1 매체와 상기 제2 매체를 함께 이용하는 제2 유저들을 샘플링하고, 상기 제2 매체를 통해, 상기 제2 유저들에게 상기 설문 조사를 제공하고, 상기 설문 조사에 대응하여 수집되는 응답에 기초하여, 상기 대상 광고의 효과를 포함하는 분석 결과를 생성하는 프로세서; 및
상기 분석 결과를 상기 대상 광고의 광고주에게 제공하는 통신 인터페이스
를 포함하는,
설문 조사를 수행하는 장치.
In order to expose a target advertisement to first users through a first medium and conduct a survey related to the target advertisement through a second medium that is distinct from the first medium, the first medium and the second medium Samples second users who use a processor for generating an analysis result; and
Communication interface for providing the analysis result to the advertiser of the target advertisement
containing,
A device for conducting surveys.
제18항에 있어서,
상기 프로세서는
상기 제2 유저들 중 상기 대상 광고에 노출된 제2-1 유저들로부터 실험군을 샘플링하고, 상기 제2 유저들 중 상기 대상 광고에 노출되지 않은 제2-2 유저들로부터 대조군을 샘플링하는,
설문 조사를 수행하는 장치.
19. The method of claim 18,
the processor
sampling an experimental group from 2-1 users exposed to the target advertisement among the second users, and sampling a control group from 2-2 users not exposed to the target advertisement among the second users,
A device for conducting surveys.
제19항에 있어서,
상기 프로세서는
상기 제2-1 유저들로부터 제1 실험군을 샘플링하고, 상기 제1 유저들 중 상기 제2 매체를 이용하지 않는 유저들로부터 제2 실험군을 샘플링하고, 상기 제2 실험군에 기초하여, 상기 제2-1 유저들로부터 제3 실험군을 샘플링하며, 상기 제1 실험군과 상기 제3 실험군에 기초하여, 상기 실험군을 결정하는,
설문 조사를 수행하는 장치.
20. The method of claim 19,
the processor
A first experimental group is sampled from the 2-1 users, a second experimental group is sampled from users who do not use the second medium among the first users, and based on the second experimental group, the second -1 sampling a third experimental group from users, and determining the experimental group based on the first and third experimental groups,
A device for conducting surveys.
제19항에 있어서,
상기 프로세서는
상기 제2-2 유저들로부터 제1 대조군을 샘플링하고, 상기 제1 매체의 유저들 중 상기 제2 매체를 이용하지 않으면서 상기 대상 광고에 노출되지 않은 유저들로부터 제2 대조군을 샘플링하고, 상기 제2 대조군에 기초하여, 상기 제2-2 유저들로부터 제3 대조군을 샘플링하며, 상기 제1 대조군과 상기 제3 대조군에 기초하여, 상기 대조군을 결정하는,
설문 조사를 수행하는 장치.
20. The method of claim 19,
the processor
sampling a first control group from the 2-2 users, and sampling a second control group from users of the first medium who do not use the second medium and are not exposed to the target advertisement, sampling a third control group from the 2-2 users based on the second control group, and determining the control group based on the first control group and the third control group;
A device for conducting surveys.
KR1020210023744A 2021-02-23 2021-02-23 Method and apparatus of conducting surveys KR102583318B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210023744A KR102583318B1 (en) 2021-02-23 2021-02-23 Method and apparatus of conducting surveys

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210023744A KR102583318B1 (en) 2021-02-23 2021-02-23 Method and apparatus of conducting surveys

Publications (2)

Publication Number Publication Date
KR20220120079A true KR20220120079A (en) 2022-08-30
KR102583318B1 KR102583318B1 (en) 2023-09-26

Family

ID=83114222

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210023744A KR102583318B1 (en) 2021-02-23 2021-02-23 Method and apparatus of conducting surveys

Country Status (1)

Country Link
KR (1) KR102583318B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090125559A (en) * 2008-06-02 2009-12-07 엔에이치엔(주) Method and system for providing search service using timeliness query
KR20120006766A (en) * 2010-07-13 2012-01-19 주식회사 시몬스침대 Method for selecting and recommending mattress using regression analysis
KR101525262B1 (en) * 2006-12-15 2015-06-03 액센츄어 글로벌 서비시즈 리미티드 Cross channel optimization systems and methods
KR20180039656A (en) * 2015-09-08 2018-04-18 페이스북, 인크. Measure your advertising performance

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101525262B1 (en) * 2006-12-15 2015-06-03 액센츄어 글로벌 서비시즈 리미티드 Cross channel optimization systems and methods
KR20090125559A (en) * 2008-06-02 2009-12-07 엔에이치엔(주) Method and system for providing search service using timeliness query
KR20120006766A (en) * 2010-07-13 2012-01-19 주식회사 시몬스침대 Method for selecting and recommending mattress using regression analysis
KR20180039656A (en) * 2015-09-08 2018-04-18 페이스북, 인크. Measure your advertising performance

Also Published As

Publication number Publication date
KR102583318B1 (en) 2023-09-26

Similar Documents

Publication Publication Date Title
CN107871244B (en) Method and device for detecting advertising effect
CN108733706B (en) Method and device for generating heat information
CN111742341A (en) Reverse bidding platform
CN109325179B (en) Content promotion method and device
CN111178970B (en) Advertisement putting method and device, electronic equipment and computer readable storage medium
US20140095308A1 (en) Advertisement distribution apparatus and advertisement distribution method
KR20200142489A (en) Automatic advertisement execution device, method for automatically generating campaign information for an advertisement medium to execute an advertisement and computer program for executing the method
CN111311294A (en) Data processing method, device, medium and electronic equipment
CN105723398B (en) Method and system for tracking user engagement on multiple third-party sites
US20160150289A1 (en) Method of Providing Advertising Services and Electronic Device Adapted to the Same
CN103890798A (en) Identifying languages missing from campaigns
KR102460475B1 (en) Content planning and production method, apparatus and system using user data-based persuasion language
US20110166929A1 (en) System and method for providing search results based on similarity among contents and system and method for providing advertisements
JP2019057245A (en) Information processing apparatus and program
CN111582899A (en) Method, device and system for quantizing display link effect and storage medium
KR20220082603A (en) Advertising method and apparatus for generating advertising strategy
KR102456425B1 (en) Brand image and influencer matching method, apparatus and system based on the category of brand image
US20150288627A1 (en) Correlating electronic mail with media monitoring
KR20220120079A (en) Method and apparatus of conducting surveys
CN111582901A (en) Method, device and system for quantizing display link effect and storage medium
JP6644015B2 (en) Method and system for providing target information using application list
US20170091802A1 (en) Methods and systems for transmitting data indicative of selected value added services from offer distribution servers to mobile terminals
US10956943B2 (en) System and method for providing people-based audience planning
CN113327146A (en) Information tracking method and device
CN113822691A (en) User account identification method, device, system and medium

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant