KR20210023630A - 인스턴트 메시지를 전송하는 방법 및 그 장치 - Google Patents

인스턴트 메시지를 전송하는 방법 및 그 장치 Download PDF

Info

Publication number
KR20210023630A
KR20210023630A KR1020190118405A KR20190118405A KR20210023630A KR 20210023630 A KR20210023630 A KR 20210023630A KR 1020190118405 A KR1020190118405 A KR 1020190118405A KR 20190118405 A KR20190118405 A KR 20190118405A KR 20210023630 A KR20210023630 A KR 20210023630A
Authority
KR
South Korea
Prior art keywords
round
candidate
transmission rate
previous
instant message
Prior art date
Application number
KR1020190118405A
Other languages
English (en)
Other versions
KR102233651B1 (ko
Inventor
하용호
Original Assignee
주식회사 카카오
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 카카오 filed Critical 주식회사 카카오
Publication of KR20210023630A publication Critical patent/KR20210023630A/ko
Application granted granted Critical
Publication of KR102233651B1 publication Critical patent/KR102233651B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04Real-time or near real-time messaging, e.g. instant messaging [IM]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0241Advertisements
    • G06Q30/0251Targeted advertisements
    • G06Q30/0263Targeted advertisements based upon Internet or website rating
    • G06Q50/30
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/50Business processes related to the communications industry
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/08Annexed information, e.g. attachments

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Strategic Management (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Development Economics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Physics & Mathematics (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Theoretical Computer Science (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Tourism & Hospitality (AREA)
  • Operations Research (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

인스턴트 메시지를 전송하는 방법이 개시된다. 일실시예에 따른 인스턴트 메시지를 전송하는 방법은 이전 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 이전 회차의 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 이전 회차의 응답들을 수집하는 단계; 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 현재 회차의 전송 비율을 결정하는 단계; 및 현재 회차의 전송 비율에 기초하여, 복수의 후보 인스턴트 메시지들을 사용자 그룹의 적어도 일부에 해당하는 현재 회차의 대상에 전송하는 단계를 포함한다.

Description

인스턴트 메시지를 전송하는 방법 및 그 장치{METHOD FOR TRANSMITTING INSTANT MESSAGES AND APPARATUS THEREOF}
아래 실시예들은 인스턴트 메시지를 전송하는 방법 및 그 장치에 관한 것으로, 예를 들어 멀티 암드 밴딧(MAB, Multi-Armed Bandit) 알고리즘에 관한 것이다.
멀티 암드 밴딧 문제(MABP, Multi-Armed Bandit Problem)는 한정된 자본과 시간을 이용하여 복수의 선택지들 중에서 최적의 선택지를 선택하는 문제이다. 예를 들어, 멀티 암드 밴딧 문제는 슬롯머신들 중 가장 많은 돈을 획득하기 위해서 가장 좋은 승률을 가진 슬롯머신을 어떻게 선택할 지 탐색하는 문제일 수 있다.
멀티 암드 밴딧 문제를 해결하기 위하여, 탐색(exploration) 및 이용(exploitation) 과정이 반복될 수 있다. 예를 들어, 탐색은 가장 높은 승률을 가진 슬롯머신을 파악하기 위하여 각 슬롯머신의 승률을 파악하는 과정일 수 있다. 이용은 파악된 가장 높은 승률을 가진 것으로 예상되는 슬롯머신에서 플레이하여 돈을 획득해 나가는 과정일 수 있다. 탐색 및 이용을 어떻게 수행하느냐에 따라 전체적으로 얼마의 돈을 획득할 수 있는지가 달라질 수 있다.
전술한 멀티 암드 밴딧 문제를 해결하기 위한 탐색 및 이용의 알고리즘은 광고 시스템이나 추천 시스템에서 사용자의 응답률-예를 들어, 클릭률(CTR, Click Through Ratio)-이 높은 컨텐츠를 선택하기 위하여 사용될 수 있다.
일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템은 사용자들의 선호도에 기초하여 복수의 후보 인스턴트 메시지들이 전송되는 비율을 조정하고, 최종적으로는 사용자들에게 전송할 하나의 후보 인스턴트 메시지를 선택할 수 있다. 일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템은 전송 비율을 결정하기에 충분할 정도로 응답들이 수집되었는지를 판단함으로써, 복수의 후보 인스턴트 메시지들이 전송되는 속도를 조절할 수 있다.
일실시예에 따른 복수의 회차(round)들을 통하여 복수의 후보 인스턴트 메시지들에 대응하는 인스턴트 메시지를 전송하는 방법은 이전 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 이전 회차의 대상에 전송된 상기 복수의 후보 인스턴트 메시지들에 반응하는 이전 회차의 응답들을 수집하는 단계; 상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 현재 회차의 전송 비율을 결정하는 단계; 및 상기 현재 회차의 전송 비율에 기초하여, 상기 복수의 후보 인스턴트 메시지들을 상기 사용자 그룹의 적어도 일부에 해당하는 현재 회차의 대상에 전송하는 단계를 포함한다.
일실시예에 따르면, 상기 현재 회차의 대상에 포함된 사용자들의 수는 상기 이전 회차의 대상에 포함된 사용자들의 수보다 많을 수 있다.
일실시예에 따르면, 특정 회차의 전송 비율은 해당 회차의 대상에 포함되는 사용자들에게 상기 후보 인스턴트 메시지들이 전송되는 비율을 포함할 수 있다.
일실시예에 따르면, 상기 현재 회차의 전송 비율을 결정하는 단계는 상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었는지 여부를 판단하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 현재 회차의 전송 비율을 결정하는 단계는 상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었다는 판단에 따라, 상기 현재 회차의 전송 비율을 결정하는 단계; 및 상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았다는 판단에 따라, 상기 이전 회차의 응답들을 추가적으로 수집하는 단계 중 적어도 하나를 더 포함할 수 있다.
일실시예에 따르면, 상기 현재 회차의 전송 비율을 결정하는 단계는 상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았더라도, 미리 정해진 임계 시간이 도과한 경우, 상기 현재 회차의 전송 비율을 결정하는 단계를 더 포함할 수 있다.
일실시예에 따르면, 상기 사용자 그룹은 상기 인스턴트 메시지의 전송 대상에 해당하는 사용자들을 포함하는 그룹에 해당할 수 있다.
일실시예에 따르면, 상기 현재 회차의 전송 비율을 결정하는 단계는 상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 상기 복수의 후보 인스턴트 메시지들과 관련된 상기 이전 회차의 대상의 선호도를 파악하는 단계; 및 상기 복수의 후보 인스턴트 메시지들 중 상기 선호도가 더 높은 후보 인스턴트 메시지가 상기 선호도가 더 낮은 후보 인스턴트 메시지보다 더 많이 전송되도록 상기 현재 회차의 전송 비율을 결정하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 현재 회차의 전송 비율을 결정하는 단계는 톰슨 샘플링(Thompson sampling) 기법을 이용하여 상기 전송 비율을 결정하는 단계를 포함할 수 있다.
일실시예에 따르면, 상기 이전 회차의 응답들은 상기 복수의 후보 인스턴트 메시지들이 상기 이전 회차의 대상에 포함되는 사용자들에 의하여 클릭(click)되었는지 여부에 기초하여 결정될 수 있다.
일실시예에 따르면, 상기 이전 회차의 응답들은 상기 이전 회차의 대상에 포함되는 개별의 사용자가 상기 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하였으나, 상기 수신 확인된 후보 인스턴트 메시지를 클릭하지 않은 묵시적 부정 상태; 및 상기 개별의 사용자가 상기 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하고, 상기 수신 확인된 후보 인스턴트 메시지를 클릭한 명시적 긍정 상태 중 적어도 하나를 포함할 수 있다.
일실시예에 따르면, 상기 복수의 후보 인스턴트 메시지들은 상기 인스턴트 메시지의 이미지; 상기 인스턴트 메시지의 텍스트; 및 상기 인스턴트 메시지의 유형 중 적어도 하나에 기초하여 결정될 수 있다.
일실시예에 따르면, 상기 인스턴트 메시지를 전송하는 방법은 상기 사용자 그룹 중 상기 현재 회차의 수신 대상에 해당하는 상기 현재 회차의 대상을 분할하는 단계를 더 포함할 수 있다.
일실시예에 따른 복수의 회차(round)들을 통하여 복수의 후보 인스턴트 메시지들에 대응하는 인스턴트 메시지를 전송하는 장치는 프로그램이 기록된 메모리; 및 상기 프로그램을 수행하는 프로세서를 포함하고, 상기 프로그램은, 이전 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 이전 회차의 대상에 전송된 상기 복수의 후보 인스턴트 메시지들에 반응하는 이전 회차의 응답들을 수집하는 단계; 상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 현재 회차의 전송 비율을 결정하는 단계; 및 상기 현재 회차의 전송 비율에 기초하여, 상기 복수의 후보 인스턴트 메시지들을 상기 사용자 그룹의 적어도 일부에 해당하는 현재 회차의 대상에 전송하는 단계를 수행한다.
도 1은 일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템의 구성을 설명하기 위한 도면이다.
도 2는 일실시예에 따른 복수의 후보 인스턴트 메시지들의 예시도이다.
도 3은 일실시예에 따른 복수의 후보 인스턴트 메시지들이 사용자 그룹에 전송되는 비율을 결정하는 과정을 설명하기 위한 도면이다.
도 4는 일실시예에 따른 복수의 후보 인스턴트 메시지들의 예시도이다.
도 5는 일실시예에 따른 복수의 후보 인스턴트 메시지들의 구성에 따른 복수의 후보 인스턴트 메시지들과 관련된 선호도를 설명하기 위한 예시도이다.
도 6은 일실시예에 따른 인스턴트 메시지를 전송하는 방법을 설명하기 위한 동작 흐름도이다.
실시예들에 대한 특정한 구조적 또는 기능적 설명들은 단지 예시를 위한 목적으로 개시된 것으로서, 다양한 형태로 변경되어 실시될 수 있다. 따라서, 실시예들은 특정한 개시형태로 한정되는 것이 아니며, 본 명세서의 범위는 기술적 사상에 포함되는 변경, 균등물, 또는 대체물을 포함한다.
제1 또는 제2 등의 용어를 다양한 구성요소들을 설명하는데 사용될 수 있지만, 이런 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 해석되어야 한다. 예를 들어, 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소는 제1 구성요소로도 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 설명된 특징, 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것이 존재함으로 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부분품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 해당 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 갖는 것으로 해석되어야 하며, 본 명세서에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 실시예들을 첨부된 도면을 참조하여 상세하게 설명한다. 각 도면에 제시된 동일한 참조 부호는 동일한 부재를 나타낸다.
도 1은 일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템의 구성을 설명하기 위한 도면이다.
도 1을 참조하면, 인스턴트 메시지(Instant message)를 전송하기 위한 시스템은 인스턴트 메시지를 전송하는 장치(110)를 포함한다. 인스턴트 메시지를 전송하는 장치(110)는 복수의 회차(round)들을 통하여 복수의 후보 인스턴트 메시지들(120)을 전송하기 위한 장치로, 예를 들어, 인스턴트 메시징 서비스를 제공하는 서버 혹은 그 서버와 연동하여 인스턴트 메시지를 전송하는 서버일 수 있다.
후보 인스턴트 메시지들(120)은 실시간으로 송수신할 수 있고 수신 여부를 즉시 확인할 수 있는 메시지들일 수 있다. 후보 인스턴트 메시지들(120)은 특정한 정보를 사용자들에게 광고하기 위한 광고형 메시지 및 특정한 컨텐츠를 사용자들에게 전달하기 위한 컨텐츠형 메시지를 포함할 수 있다. 컨텐츠형 메시지는 특정한 내용을 사용자들에게 공지하기 위한 메시지를 포함할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 복수의 사용자들에게 동일한 내용의 후보 인스턴트 메시지들(120)을 전송할 수 있다.
인스턴트 메시지를 전송하는 장치(110)를 통하여 메시지를 전송하는 주체는 일반 사용자와 구별되는 기업 계정일 수 있다. 일 예시로, 메시지를 전송하는 주체는 기업의 공식 계정(플러스 친구)일 수 있다.
메시지를 전송하는 주체에 기초하여, 인스턴트 메시지의 전송 대상에 해당하는 사용자들을 포함하는 사용자 그룹이 결정될 수 있다. 일실시예에 따르면, 사용자 그룹은 메시지를 전송하고자 하는 기업 계정과 일정한 관계에 있는 사용자들을 포함할 수 있다. 일 예시로, 사용자 그룹은 메시지를 전송하고자 하는 기업 계정과 친구 관계에 있는 메신저 계정을 가진 사용자들을 포함할 수 있다. 다른 예시로, 사용자 그룹은 메시지를 전송하고자 하는 기업 계정을 구독한 메신저 계정을 가진 사용자들을 포함할 수 있다. 일실시예에 따르면, 사용자 그룹은 기업 계정과 일정한 관계(예를 들어, 친구 관계)에 있지 않은 메신저 계정을 가진 사용자들까지 포함할 수 있다.
후보 인스턴트 메시지들(120)은 메시지의 내용 및 시안 등에 따라 다양하게 결정되는 복수의 인스턴트 메시지들을 포함할 수 있다. 이하, 설명의 편의를 위하여 후보 인스턴트 메시지는 '후보' 라고 지칭되고, 인스턴트 메시지는 '메시지' 라고 지칭될 수 있다.
일실시예에 따르면, 복수의 후보 인스턴트 메시지들 각각은 인스턴트 메시지를 구성하는 복수의 요소들에 기초하여 생성될 수 있다. 예를 들어, 인스턴트 메시지를 전송하는 장치(110)는 전달하고자 하는 내용, 해당 내용을 표현하는 이미지, 문구, 폰트, 디자인, 해당 메시지의 타입 등의 복수의 요소들을 결정함으로써, 후보 인스턴트 메시지들을 생성할 수 있다. 일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 메시지를 전송하는 주체로부터 후보 인스턴트 메시지들을 수신할 수 있다. 이 경우, 수신한 후보 인스턴트 메시지들 각각은 복수의 요소들이 결정된 인스턴트 메시지일 수 있다.
일 예로, 후보 인스턴트 메시지들(120)은 반려동물용품 할인행사 캠페인에 관련되는 메시지들일 수 있다. 이 경우, 후보 인스턴트 메시지들(120)은 고양이와 관련된 후보(121), 강아지와 관련된 후보(122) 및 반려동물 사료와 관련된 후보(123) 등을 포함할 수 있다.
인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들(120)을 복수의 회차(round)들을 통하여 전송한다. 이를 위하여, 인스턴트 메시지를 전송하는 장치(110)는 각 회차에서 회차 별 대상에 포함되는 사용자들에게 복수의 후보 인스턴트 메시지들이 전송되는 비율(이하, 전송 비율)을 결정한다. 이하, 회차 별 대상은 특정 회차에서 복수의 후보 인스턴트 메시지들 중 적어도 하나의 후보 인스턴트 메시지를 수신할 대상으로 결정된 사용자를 포함하는 개념으로 이해될 수 있다.
일실시예에 따르면, 회차 별 대상은 후보 인스턴트 메시지들의 수신 대상이 되는 사용자 그룹 내에서 임의로 선택될 수 있다. 예를 들어, 특정 회차 내에서 회차 별 대상이 되는 적어도 하나의 사용자가 순차적으로 결정될 수 있다.
일실시예에 따르면, 회차 별 대상은 임의로 선택된 일정 수의 사용자들을 포함할 수 있다. 예를 들어, 회차 별 대상은 10,000명의 전체 사용자들 중 임의로 선택된 1,000명의 사용자들을 포함할 수 있다.
일실시예에 따르면, 회차 별 대상은 특정 조건에 따라 선택된 사용자들을 포함할 수 있다. 예를 들어, 회차 별 대상은 10,000명의 전체 사용자들 중 특정한 성별, 지역 및 나이 등의 조건에 따라 필터링된 사용자들을 포함할 수 있다.
인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들을 최초로 전송할 때의 전송 비율 셋팅(setting)할 수 있다. 예를 들어, 인스턴트 메시지를 전송하는 장치(110)는 초기 회차에서 회차 별 대상에 포함되는 사용자들에게 복수의 후보 인스턴트 메시지들을 동등한 비율로 전송할 수 있다.
예를 들어, k번째 회차(k는 2 이상의 자연수)의 경우, 인스턴트 메시지를 전송하는 장치(110)는 k-1번째 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 제1 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 k-1번째 회차의 응답들을 수집할 수 있다. 1번째 회차 내지 k-1번째 회차의 응답들 중 적어도 일부에 기초하여, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정할 수 있다. 예를 들어, 인스턴트 메시지를 전송하는 장치(110)는 1번째 회차 내지 k-1번째 회차의 응답들 전체에 기초하여 k번째 회차의 전송 비율을 결정할 수 있다. 사용자 그룹은 인스턴트 메시지의 전송 대상에 해당하는 사용자들을 포함하는 그룹일 수 있다.
일실시예에 따르면, 복수의 후보 인스턴트 메시지들에 반응하여 수집되는 응답은 복수의 후보 인스턴트 메시지들 중 어느 하나를 수신한 사용자가 채팅방에 접속하여 후보 인스턴트 메시지를 뷰잉(viewing)하는지 여부에 관련된 정보를 포함할 수 있다.
일실시예에 따르면, 복수의 후보 인스턴트 메시지들에 반응하여 수집되는 응답은 복수의 후보 인스턴트 메시지들 중 어느 하나를 수신한 사용자가 후보 인스턴트 메시지를 선택하여 관련된 세부적 내용을 확인하는지 여부에 관련된 정보를 포함할 수 있다. 이 경우, 후보 인스턴트 메시지를 선택하는 동작은 후보 인스턴트 메시지를 터치하는 동작 및 후보 인스턴트 메시지를 클릭하는 동작을 포함할 수 있다. 일 예시로, 관련된 세부적 내용을 확인하는지 여부는 후보 인스턴트 메시지에 대응하는 파일(장문 메시지, 영상 메시지 및 음성 메시지 등)을 여는(open)지 여부에 대응될 수 있다. 다른 예시로, 관련된 세부적 내용을 확인하는지 여부는 후보 인스턴트 메시지에 포함된 URL 등을 통해 후보 인스턴트 메시지와 연결된 페이지로 넘어가는지 여부에 대응될 수 있다.
일실시예에 따르면, 복수의 후보 인스턴트 메시지들에 반응하여 수집되는 응답은 복수의 후보 인스턴트 메시지들 중 어느 하나를 수신한 사용자가 후보 인스턴트 메시지를 선택하여 관련된 세부적 내용을 확인한 후, 메시지를 전송하는 주체가 기대하는 행동(Action)을 더 수행하는지 여부에 관련된 정보를 포함할 수 있다. 기대하는 행동을 더 수행하는지 여부는 쿠폰을 다운받는지 여부, 특정 영상을 시청하는지 여부, 또는 다른 페이지로 더 넘어가는지 여부 등을 포함할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 현재 회차의 전송 비율을 결정하기 위하여 이전 회차의 전송 비율에 기초할 수도 있다. 예를 들어, k-1번째 회차의 응답들에 기초하여, 인스턴트 메시지를 전송하는 장치(110)는 전송 비율 오차를 계산하고, 계산된 전송 비율 오차를 k-1번째 회차의 전송 비율에 더함으로써 k번째 회차의 전송 비율을 결정할 수 있다.
이하, 설명의 편의를 위하여, 현재 회차를 k번째 회차로, 이전 회차를 k-1번째 회차로 설명한다.
인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되었는지 여부를 판단할 수 있다. k-1번째 회차의 응답들이 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 수집되었는지 여부는 k-1번째 회차의 응답들이 미리 정해진 기준을 만족할 정도로 수집되었는지 여부에 대응될 수 있다.
일실시예에 따르면, 미리 정해진 기준은 미리 정해진 수량에 대응될 수 있다. 이 경우, 미리 정해진 임계 수량과 수집된 k-1번째 회차의 응답들의 개수를 비교함으로써, k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되었는지 여부가 판단될 수 있다. 일실시예에 따르면, 미리 정해진 기준은 미리 정해진 비율에 대응될 수 있다. 이 경우, 미리 정해진 비율과 k-1번째 회차의 응답들 중 긍정적 응답의 비율을 비교함으로써, k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되었는지 여부가 판단될 수 있다.
k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되었다는 판단에 따라, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되지 않았다는 판단에 따라, 인스턴트 메시지의 전송과 관련된 시간을 조절할 수 있다. 일 예시로, 인스턴트 메시지를 전송하는 장치(110)는 k-1번째 회차의 응답들이 추가적으로 수집되기를 기다릴 수 있다. 다른 예시로, 인스턴트 메시지를 전송하는 장치(110)는 k-1번째 회차에서 후보 인스턴트 메시지들을 전송하는 시간 간격이 더 길어지도록 조절할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들을 수집하기 위하여, 제1 회차 별 대상의 크기가 더 커지도록 조절할 수도 있다.
일실시예에 따르면, k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되지 않았다고 판단되더라도, 미리 정해진 임계 시간이 도과한 경우, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 k-1번째 회차의 응답들이 수집되지 않았다는 판단에 따라, 인스턴트 메시지를 전송하는 장치(110)는 k-1번째 회차의 전송 비율에 기초하여 복수의 후보 인스턴트 메시지들을 사용자 그룹의 적어도 일부에 해당하는 제3 회차 별 대상에 전송할 수 있다. 제3 회차 별 대상은 제1 회차 별 대상이 포함하는 사용자들과 서로 다른 사용자들을 포함할 수 있다. 이 경우, 인스턴트 메시지를 전송하는 장치(110)는 제3 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 응답들을 수집하고, 제1 회차 별 대상 및 제3 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 응답들이 k번째 회차의 전송 비율을 결정하기에 충분한지 여부를 판단할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기 위하여 첫 번째 회차 내지 k-2번째 회차 중 적어도 일부의 응답들을 더 이용할 수 있다. 이 경우, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기에 충분할 정도로 응답들이 수집되었는지 여부를 판단함에 있어서 k-1번째 회차의 응답들뿐만 아니라 첫 번째 회차 내지 k-2번째 회차 중 적어도 일부의 응답들 또한 고려할 수 있다.
이하, 설명의 편의를 위하여, k번째 회차의 전송 비율을 결정하기 위하여 인스턴트 메시지를 전송하는 장치(110)가 제1 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 k-1번째 회차의 응답들만을 이용하는 실시예들을 설명한다.
k-1번째 회차의 응답들은 제1 회차 별 대상에 포함되는 개별의 사용자가 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하였으나 수신 확인된 후보 인스턴트 메시지에 반응(예를 들어, 클릭)하지 않은 묵시적 부정 상태 및 개별의 사용자가 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하고 수신 확인된 후보 인스턴트 메시지에 반응(예를 들어, 클릭)한 명시적 긍정 상태 중 적어도 하나를 포함할 수 있다. 개별 후보 인스턴트 메시지와 관련된 명시적 긍정 상태의 응답들의 수를 개별 후보 인스턴트 메시지를 수신한 제1 회차 별 대상에 포함되는 사용자들의 수로 나눔으로써, 개별 후보 인스턴트 메시지와 관련된 반응률-예를 들어, 클릭률(CTR, Click Through Ratio)-이 계산될 수 있다.
k-1번째 회차의 응답들이 충분히 수집되었다는 판단 하에, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정할 수 있다. 인스턴트 메시지를 전송하는 장치(110)는 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여 복수의 후보 인스턴트 메시지들과 관련된 제1 회차 별 대상의 선호도(130)를 파악할 수 있다. 예를 들어, 인스턴트 메시지를 전송하는 장치(110)는 1번째 회차 내지 k-1번째 회차의 응답들 중 적어도 일부에 기초하여 복수의 후보 인스턴트 메시지들과 관련된 제1 회차 별 대상의 선호도(130)를 파악할 수 있다. 인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들 중 선호도(130)가 더 높은 후보 인스턴트 메시지가 선호도(130)가 더 낮은 후보 인스턴트 메시지보다 더 많이 전송되도록 k번째 회차의 전송 비율을 결정할 수 있다. 선호도(130)는 복수의 후보 인스턴트 메시지들이 제1 회차 별 대상에 포함되는 사용자들에 의하여 반응(예를 들어, 클릭)하였는지 여부에 기초하여 계산될 수 있다. 이 경우, 선호도(130)는 반응률(예를 들어, 클릭률)에 대응될 수 있다.
일실시예에 따르면, 후보 인스턴트 메시지들(120)이 반려동물용품 할인행사 캠페인에 관련되는 메시지인 경우, 인스턴트 메시지를 전송하는 장치(110)는 고양이와 관련된 후보(121), 강아지와 관련된 후보(122) 및 반려동물 사료와 관련된 후보(123)에 대한 제1 회차 별 대상의 선호도(130)를 파악할 수 있다. 예를 들어, 고양이와 관련된 후보(121)에 대한 제1 회차 별 대상의 클릭률은 2.1%이고(131), 강아지와 관련된 후보(122)에 대한 제1 회차 별 대상의 클릭률은 0.5%(132)이고, 반려동물 사료와 관련된 후보(123)에 대한 제1 회차 별 대상의 클릭률은 3.7%(133)일 수 있다. 이 경우, 반려동물 사료와 관련된 후보(123)가 가장 많이 전송되고, 강아지와 관련된 후보(122)가 가장 적게 전송되도록 k번째 회차(현재 회차)의 전송 비율이 결정될 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 톰슨 샘플링(Thompson sampling) 기법을 이용하여 k번째 회차의 전송 비율을 결정할 수 있다. 톰슨 샘플링 기법은 베타 분포 공간에 각 선택지의 확률밀도함수(PMF)를 표현하고, 각 선택지의 개수만큼 확률변수(Random variate)를 샘플링하는 것을 특징으로 할 수 있다. 톰슨 샘플링 기법에서, 샘플된 값들 중 가장 큰 값을 나타내는 선택지가 선택될 수 있다. 구체적으로, 인스턴트 메시지를 전송하는 장치(110)는 제1 회차 별 대상의 선호도(130)와 관련되는 확률밀도함수(PMF)를 베타 분포 공간에 표현하고, 각 후보 인스턴트 메시지의 전송량만큼 확률변수(Random variate)를 샘플링할 수 있다.
일실시예에 따르면, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기 위하여 톰슨 샘플링 외에도 멀티 암드 밴딧(MAB, Multi-Armed Bandit) 문제를 해결하기 위한 다양한 알고리즘을 이용할 수 있다. 예를 들어, 인스턴트 메시지를 전송하는 장치(110)는 k번째 회차의 전송 비율을 결정하기 위하여 e-greedy 알고리즘 및 UCB(Upper Confidence Bound) 알고리즘 중 적어도 하나의 알고리즘을 이용할 수 있다.
결정된 k번째 회차의 전송 비율에 기초하여, 인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들을 사용자 그룹의 적어도 일부에 해당하는 제2 회차 별 대상에 전송한다. 일실시예에 따르면, 제2 회차 별 대상에 포함된 사용자들의 수가 제1 그룹에 포함된 사용자들의 수보다 많을 수 있다. 이 경우, 회차가 진행됨에 따라서 해당 회차에서 회차 별 대상에 포함되는 사용자들의 수가 증가할 수 있다. 이러한 설계를 통하여, 더 많은 사용자들이 더 높은 선호도(130)의 후보 인스턴트 메시지를 수신할 수 있고, 이와 동시에 전송 비율을 결정함에 있어서 사용자들의 선호도(130)가 고려될 수 있다.
일 실시예에 따르면, 제2 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 k번째 회차의 응답들은 k+1번째 회차를 위해 수집될 수 있다. 이 경우, 수집된 k번째 회차의 응답들은 k+1번째 회차의 전송 비율을 결정하는 데 이용될 수 있다.
첫 번째 회차의 경우, 인스턴트 메시지를 전송하는 장치(110)는 첫 번째 회차의 전송 비율을 미리 정해진 방식으로 결정하고, 결정된 전송 비율에 기초하여 복수의 후보 인스턴트 메시지들을 사용자 그룹의 적어도 일부에 해당하는 회차 별 대상에 전송할 수 있다.
복수의 후보 인스턴트 메시지들과 관련된 추가적인 정보를 수신 또는 저장하는 경우, 인스턴트 메시지를 전송하는 장치(110)는 수신 또는 저장되는 추가적인 정보에 기초하여 첫 번째 회차의 전송 비율을 결정할 수 있다. 예를 들어, 복수의 후보 인스턴트 메시지들과 관련하여 복수의 사용자들에게 사전 조사를 실시한 결과 특정 후보 인스턴트 메시지에 대한 호감도가 더 높았다는 내용을 포함하는 정보를 수신하는 경우, 인스턴트 메시지를 전송하는 장치(110)는 호감도가 더 높았던 특정 후보 인스턴트 메시지가 더 많이 전송되도록 첫 번째 회차의 전송 비율을 결정할 수 있다. 호감도와 선호도(130)는 동일한 기준으로 결정되는 수치일 수 있고, 서로 다른 기준으로 결정되는 수치일 수도 있다. 반면, 복수의 후보 인스턴트 메시지들과 관련된 추가적인 정보를 수신하지 않고, 저장하지도 않는 경우, 인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들이 동일한 확률로 전송되도록 첫 번째 회차의 전송 비율을 결정할 수 있다.
인스턴트 메시지를 전송하는 장치(110)는 복수의 후보 인스턴트 메시지들과 관련되는 최종 전송량을 출력할 수 있다(140). 일실시예에 따르면, 최종 전송량은 각 회차의 응답들을 수집하는 과정에서 카운트(count)될 수 있다. 일실시예에 따르면, 최종 전송량은 각 회차에서 회차 별 대상에 포함되는 사용자의 수 및 각 회차의 전송 비율에 기초하여 계산될 수 있다.
전체 전송량은 인스턴트 메시지를 전송하는 장치(110)에서 전송되는 메시지의 총(total) 전송 수량일 수 있다. 전체 전송량은 개별의 후보 인스턴트 메시지에 대응되는 최종 전송량을 모두 합한 값과 그 값이 일치할 수 있다. 일실시예에 따르면, 전체 전송량은 미리 정해진 수량에 대응될 수 있다.
일실시예에 따르면, 후보 인스턴트 메시지들(120)이 반려동물용품 할인행사 캠페인에 관련되는 메시지들인 경우, 대부분의 회차에서 반려동물 사료와 관련된 후보(123)가 해당 회차에서 회차 별 대상에 포함되는 사용자들과 관련하여 가장 높은 선호도(130)를 보여주고, 강아지와 관련된 후보(122)가 해당 회차에서 회차 별 대상에 포함되는 사용자들과 관련하여 가장 낮은 선호도(130)를 보여줄 수 있다. 이 경우, 반려동물 사료와 관련된 후보(123)의 최종 전송량이 가장 많고(143), 강아지와 관련된 후보(122)의 최종 전송량이 가장 적을 수 있다(141).
전술한 것과 같이, 일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템은 사용자들의 선호도에 기초하여 복수의 후보 인스턴트 메시지들이 전송되는 비율을 조정하고, 최종적으로는 사용자들에게 전송할 하나의 후보 인스턴트 메시지를 선택할 수 있다. 일실시예에 따른 인스턴트 메시지를 전송하기 위한 시스템은 전송 비율을 결정하기에 충분할 정도로 응답들이 수집되었는지를 판단함으로써, 복수의 후보 인스턴트 메시지들이 전송되는 속도를 조절할 수 있다.
최종적으로 사용자에게 전송할 하나의 후보 인스턴트 메시지를 선택함에 따라, 선택된 후보 인스턴트 메시지가 이후의 회차들에서 사용자들에게 전송될 수 있다. 예를 들어, 반려동물 사료와 관련된 후보(123)가 사용자들에게 전송할 후보로 선택됨에 따라, 이후의 모든 회차들에서 반려동물 사료와 관련된 후보(123)가 사용자들에게 전송될 수 있다.
도 2는 일실시예에 따른 복수의 후보 인스턴트 메시지들의 예시도이다.
도 2를 참조하면, 일실시예에 따른 복수의 후보 인스턴트 메시지들은 다양한 요소들에 기초하여 결정될 수 있다. 다양한 요소들은 인스턴트 메시지의 이미지, 인스턴트 메시지의 텍스트 및 인스턴트 메시지의 유형 중 적어도 하나를 포함할 수 있다. 일실시예에 따르면, 후보 인스턴트 메시지들은 K페이와 같은 간편 결제를 이용한 선물하기 기능에 관련되는 메시지들일 수 있다. 이 경우, 복수의 후보 인스턴트 메시지들은 제1 후보(210) 및 제2 후보(220)를 포함할 수 있다. 구체적으로, 제1 후보(210)는 카드번호 및 CVC를 일일이 입력할 필요가 없음을 강조하는 이미지 및 텍스트를 포함하는 후보 인스턴트 메시지에 대응될 수 있다. 또한, 제2 후보(220)는 K페이를 이용하여 간편하게 선물하기 기능을 이용할 수 있다는 내용 및 베스트 상품을 K페이를 이용하여 만나볼 수 있다는 내용을 포함하는 이미지 및 텍스트를 포함하는 후보 인스턴트 메시지에 대응될 수 있다.
제1 후보(210) 및 제2 후보(220)를 전송하는 동작과 관련된 보다 상세한 사항이 도 3에 도시되어 있다. 도 3을 참조하면, 제1 후보(210) 및 제2 후보(220)는 인스턴트 메시지를 전송하기 위한 시스템에 기초하여 사용자들에게 전송될 수 있다. 인스턴트 메시지를 전송하기 위한 시스템은 도 1의 인스턴트 메시지를 전송하기 위한 시스템에 대응될 수 있다. 그림 310은 전송된 제1 후보(210) 및 제2 후보(220)에 대한 반응률을 전송 시간에 따라 도시하고 있다. 반응률은 도 1의 선호도(130)에 대응될 수 있다. 그림 310에서 도시되는 반응률은 해당 시간이 속하는 회차에서 실시간으로 수집되는 응답들에 기초하는 제1 후보(210) 및 제2 후보(220)와 관련된 회차 별 대상의 선호도에 대응될 수 있다. 그림 310을 참조하면, 제1 후보(210)와 관련되는 사용자들의 반응률은 1.17%로 수렴하고, 제2 후보(220)와 관련되는 사용자들의 반응률은 1.82%로 수렴할 수 있다. 또한, 전송 시작 후 20분을 초과하는(15:30 이후) 모든 시간 영역에서 제2 후보(220)와 관련되는 사용자들의 반응률이 제1 후보(210)와 관련되는 사용자들의 반응률보다 더 높을 수 있다. 따라서, 전송 시작 후 20분(15:30)을 초과하는 모든 시간 영역에서 제2 후보(220)가 제1 후보(210)보다 더 많이 전송되도록 전송 비율이 결정될 수 있으며, 이는 그림 320에 도시되어 있다.
인스턴트 메시지를 전송하기 위한 시스템은 사용자들의 반응률에 따라, 반응률이 높은 후보 인스턴트 메시지를 더 많이 전송하고 반응률이 낮은 후보 인스턴트 메시지를 더 적게 전송하도록 전송 비율을 결정할 수 있다. 사용자들의 반응률에 기초하여, 인스턴트 메시지를 전송하기 위한 시스템은 최종적으로 사용자들에게 전송할 하나의 후보 인스턴트 메시지를 선택할 수 있다. 하나의 후보 인스턴트 메시지가 선택된 순간이 그림 310에 '컷'이라는 문자 및 X표시로 도시되어 있다('컷'이라는 문자 및 X표시는 선택되지 않은 후보 인스턴트 메시지가 탈락하였음을 표시함).
최종적으로 사용자에게 전송할 하나의 후보 인스턴트 메시지를 선택함에 따라, 선택된 후보 인스턴트 메시지가 이후의 회차들에서 사용자들에게 전송될 수 있다. 하나의 후보 인스턴트 메시지가 선택된 시간 이후에는 선택되지 않은 후보는 사용자들에게 전송되지 않거나, 극단적으로 적은 수량만이 전송될 수 있다. 다만, 하나의 후보 인스턴트 메시지가 선택된 순간 이후에도, 이전에 전송된 메시지에 대응하는 응답들은 여전히 수신될 수 있다.
그림 320은 제1 후보(210) 및 제2 후보(220)와 관련되는 전송 비율을 전송 시간에 따라 도시하고 있다. 제1 후보(210) 및 제2 후보(220)와 관련하여 추가적인 정보를 수신하거나 저장하지 않은 이상, 인스턴트 메시지를 전송하는 장치는 제1 후보(210) 및 제2 후보(220)가 동일한 확률로 전송되도록 첫 번째 회차의 전송 비율을 결정할 수 있다. 인스턴트 메시지를 전송하는 장치는 도 1의 인스턴트 메시지를 전송하는 장치(110)에 대응될 수 있다.
전송 시작 직후에는 제1 후보(210)와 관련되는 사용자들의 반응률이 제2 후보(220)와 관련되는 사용자들의 반응률보다 더 높을 수도 있다(그림 310). 따라서, 전송 시작 직후에는 제1 후보(210)가 제2 후보(220)보다 더 많이 전송될 수 있다(그림 320). 하지만, 전송 시작 후 20분을 초과하는 모든 시간 영역에서 제2 후보(220)가 제1 후보(210)보다 더 많이 전송되도록 전송 비율이 결정되므로, 시간이 경과함에 따라 제2 후보(220)가 제1 후보(210)보다 더 많이 전송되도록 전송 비율이 결정될 수 있다. 제2 후보(220)가 제1 후보(210)보다 더 많이 전송되도록 전송 비율이 결정되는 과정이 반복됨에 따라, 전송 시작 후 약 1시간(16:10)을 초과하는 모든 시간 영역에서 전송되는 인스턴트 메시지의 대부분은 제2 후보(220)에 대응될 수 있다.
도 4는 일실시예에 따른 복수의 후보 인스턴트 메시지들의 예시도이다.
도 4를 참조하면, 일실시예에 따른 복수의 후보 인스턴트 메시지들은 인스턴트 메시지의 이미지, 인스턴트 메시지의 텍스트 및 인스턴트 메시지의 유형 중 적어도 하나에 기초하여 결정될 수 있다.
일실시예에 따르면, 복수의 후보 인스턴트 메시지들은 동일한 내용의 컨텐츠를 포함하는 서로 다른 시안들로 결정될 수 있다. 일실시예에 따른 서버는 전술한 방식에 따라 복수의 후보 인스턴트 메시지들을 일부 사용자들에게 전송하고 해당 사용자들의 응답들을 수집함으로써, 복수의 후보 인스턴트 메시지들 중 어떠한 후보 인스턴트 메시지에 의하여 나머지 사용자들의 반응률을 가장 높게 유도할 수 있을지 예측할 수 있다.
예를 들어, 인스턴트 메시지는 K페이를 이용하여 결제할 경우 월 900원에 M 서비스를 무제한으로 이용할 수 있다는 내용 및 K페이를 이용하여 K 이모티콘을 선물할 수 있다는 내용을 포함하는 메시지일 수 있다. 이 경우, 복수의 후보 인스턴트 메시지들의 구성을 결정하기 위한 인스턴트 메시지의 이미지는 제1 이미지(410) 및 제2 이미지(440) 중 어느 하나로 선택될 수 있다. 제1 이미지(410)는 K페이를 이용해야 한다는 조건보다는 월 900원에 M 서비스를 무제한으로 이용할 수 있다는 혜택을 더 강조하여 설명한 이미지이고, 제2 이미지(440)는 제1 이미지(410)에 비하여 K페이를 이용한다는 조건을 더 분명하게 드러내는 이미지일 수 있다. 또한, 복수의 후보 인스턴트 메시지들이 선택하는 이미지의 크기가 다를 수 있는데, 예를 들어 제1 이미지(410)는 제2 이미지(420)에 비하여 가로 길이가 더 길 수 있다.
일실시예에 따른 복수의 후보 인스턴트 메시지들은 제1 이미지(410)에 제1 텍스트(420)를 조합한 시안, 제1 이미지(410)에 제2 텍스트(430)를 조합한 시안, 제2 이미지(440)에 제3 텍스트(450)를 조합한 시안 및 제2 이미지(440)에 제4 텍스트(460)를 조합한 시안을 포함할 수 있다.
제1 텍스트(420) 내지 제3 텍스트(450)는 900원에 무제한 음악 이용권을 이용할 수 있다는 내용을 첫째 줄에 기재하는 반면, 제4 텍스트(460)는 해당 내용을 둘째 줄에 기재하고 있고, '무제한'이라는 단어 또한 사용하지 않을 수 있다. 또한, 제1 텍스트(420), 제3 텍스트(450) 및 제4 텍스트(460)는 둘째 줄에 이모티콘과 관련된 내용을 기재하는 반면, 제2 텍스트(430)는 첫째 줄에 이모티콘과 관련된 내용을 기재할 수 있다. 또한, 제1 텍스트(420) 및 제3 텍스트(450)는 전반적으로 그 기재가 유사하나, 제1 텍스트(420)는 둘째 줄 맨 처음에 '신상'이라는 단어를 기재하고 있다는 차이가 있을 수 있다.
제1 이미지(410)에 제1 텍스트(420)를 조합한 시안, 제1 이미지(410)에 제2 텍스트(430)를 조합한 시안, 제2 이미지(440)에 제3 텍스트(450)를 조합한 시안 및 제2 이미지(440)에 제4 텍스트(460)를 조합한 시안을 전송하는 동작과 관련된 보다 상세한 사항이 도 5에 도시되어 있다. 도 5를 참조하면, 제1 후보(510)는 제1 이미지(410)에 제1 텍스트(420)를 조합한 시안에 대응되고, 제2 후보(520)는 제1 이미지(410)에 제2 텍스트(430)를 조합한 시안에 대응되고, 제3 후보(530)는 제2 이미지(440)에 제3 텍스트(450)를 조합한 시안에 대응되고, 제4 후보(540)는 제2 이미지(440)에 제4 텍스트(460)를 조합한 시안에 대응될 수 있다. 제1 후보(510) 내지 제4 후보(540)와 관련되는 사용자들의 선호도는 클릭률(550)에 대응될 수 있다. 선호도는 도 1의 선호도(130)에 대응될 수 있다. 선호도는 도 3의 반응률에 대응될 수도 있다.
일실시예에 따르면, 제1 후보(510)와 관련되는 사용자들의 클릭률(550)은 6.00%로 수렴하고, 제2 후보(520)와 관련되는 사용자들의 클릭률(550)은 6.04%로 수렴하며, 제3 후보(530)와 관련되는 사용자들의 클릭률(550)은 7.02%로 수렴하고, 제4 후보(540)와 관련되는 사용자들의 클릭률(550)은 3.99%로 수렴할 수 있다. 이 경우, 제3 후보(530)의 최종 전송량(560)이 가장 많을 수 있다. 실시예의 경우, 제3 후보(530)의 최종 전송량은 전체 전송량의 94.6%의 비율을 차지할 수 있다.
수렴하는 선호도 값은 최종 값을 표시할 뿐, 최종 회차가 진행되기까지의 중간 과정들을 반영하지 않을 수 있다. 따라서, 수렴하는 클릭률(550)이 더 낮지만 최종 전송량은 더 많은 경우가 있을 수 있다. 예를 들어, 제1 후보(510)와 관련되는 사용자들의 클릭률(550)은 6.00%로 수렴하여 제2 후보(520)와 관련되는 사용자들의 클릭률(550)이 수렴하는 6.04%보다 낮은 값을 가지지만, 중간 과정에서 제1 후보(510)에 대한 전송량이 많아 최종 전송량(560)은 94,123건으로 제2 후보(520)의 최종 전송량(560)인 9,005건보다 더 많을 수 있다.
도시되지는 않았으나, 이 밖에도 다양한 유형의 후보 인스턴트 메시지들이 존재할 수 있다. 예를 들어, 별도의 텍스트 없이 이미지만으로 표시되는 후보 인스턴트 메시지가 존재할 수 있다. 또는, 시간에 따라 모양이 변화하는 동적 이미지를 포함하는 후보 인스턴트 메시지가 존재할 수도 있다.
도 6은 일실시예에 따른 인스턴트 메시지를 전송하는 방법을 설명하기 위한 동작 흐름도이다.
도 6을 참조하면, 일실시예에 따른 인스턴트 메시지를 전송하는 장치는 복수의 회차들을 통하여 복수의 후보 인스턴트 메시지들을 전송한다. 인스턴트 메시지를 전송하는 장치는 도 1의 인스턴트 메시지를 전송하는 장치(110)에 대응되고, 복수의 후보 인스턴트 메시지들은 도 1의 복수의 후보 인스턴트 메시지들에 대응될 수 있다. 인스턴트 메시지를 전송하는 방법은 후술할 단계 610, 단계 620 및 단계 630을 포함한다.
인스턴트 메시지를 전송하는 장치는 k-1번째 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 제1 회차 별 대상에 전송된 복수의 후보 인스턴트 메시지들에 반응하는 k-1번째 회차의 응답들을 수집한다(610).
1번째 회차 내지 k-1번째 회차의 응답들 중 적어도 일부에 기초하여, 인스턴트 메시지를 전송하는 장치는 k번째 회차의 전송 비율을 결정한다(620). k번째 회차가 첫 번째 회차에 대응되는 경우, k-1번째 회차의 응답들이 존재하지 않으므로, 인스턴트 메시지를 전송하는 장치는 수신 또는 저장되는 추가적인 정보에 기초하여 k번째 회차의 전송 비율을 결정할 수 있다. k번째 회차가 첫 번째 회차에 대응되지 않는 경우, 인스턴트 메시지를 전송하는 장치는 도 1의 k-1번째 회차의 응답들을 포함하는 이전의 응답들에 기초하여 k번째 회차의 전송 비율을 결정할 수 있다.
k번째 회차의 전송 비율에 기초하여, 인스턴트 메시지를 전송하는 장치는 복수의 후보 인스턴트 메시지들을 사용자 그룹의 적어도 일부에 해당하는 제2 회차 별 대상에 전송한다(630). 제2 회차 별 대상에 포함된 사용자들의 수는 제1 회차 별 대상에 포함된 사용자들의 수보다 많을 수 있다.
도면에 도시하지 않았으나, 인스턴트 메시지를 전송하는 장치는 프로세서 및 메모리를 포함한다. 프로세서는 도 1 내지 도 6을 통하여 전술한 적어도 하나의 방법을 수행할 수 있다. 메모리는 임계 시간, 임계 수량, 복수의 후보 인스턴트 메시지들 및 복수의 후보 인스턴트 메시지들과 관련된 회차 별 대상들의 크기 중 적어도 하나를 저장하거나 인스턴트 메시지를 전송하는 방법이 구현된 프로그램을 저장할 수 있다.
프로세서는 프로그램을 실행하고, 인스턴트 메시지를 전송하는 장치를 제어할 수 있다. 프로세서에 의하여 실행되는 프로그램의 코드는 메모리에 저장될 수 있다. 인스턴트 메시지를 전송하는 장치는 입출력 모듈을 통하여 사용자 인터페이스를 제공하거나, 통신 모듈을 통하여 외부 장치에 연결되어 데이터를 교환할 수 있다.
이상에서 설명된 실시예들은 하드웨어 구성요소, 소프트웨어 구성요소, 및/또는 하드웨어 구성요소 및 소프트웨어 구성요소의 조합으로 구현될 수 있다. 예를 들어, 실시예들에서 설명된 장치, 방법 및 구성요소는, 예를 들어, 프로세서, 콘트롤러, ALU(arithmetic logic unit), 디지털 신호 프로세서(digital signal processor), 마이크로컴퓨터, FPGA(field programmable gate array), PLU(programmable logic unit), 마이크로프로세서, 또는 명령(instruction)을 실행하고 응답할 수 있는 다른 어떠한 장치와 같이, 하나 이상의 범용 컴퓨터 또는 특수 목적 컴퓨터를 이용하여 구현될 수 있다. 처리 장치는 운영 체제(OS) 및 상기 운영 체제 상에서 수행되는 하나 이상의 소프트웨어 애플리케이션을 수행할 수 있다. 또한, 처리 장치는 소프트웨어의 실행에 응답하여, 데이터를 접근, 저장, 조작, 처리 및 생성할 수도 있다. 이해의 편의를 위하여, 처리 장치는 하나가 사용되는 것으로 설명된 경우도 있지만, 해당 기술분야에서 통상의 지식을 가진 자는, 처리 장치가 복수 개의 처리 요소(processing element) 및/또는 복수 유형의 처리 요소를 포함할 수 있음을 알 수 있다. 예를 들어, 처리 장치는 복수 개의 프로세서 또는 하나의 프로세서 및 하나의 콘트롤러를 포함할 수 있다. 또한, 병렬 프로세서(parallel processor)와 같은, 다른 처리 구성(processing configuration)도 가능하다.
소프트웨어는 컴퓨터 프로그램(computer program), 코드(code), 명령(instruction), 또는 이들 중 하나 이상의 조합을 포함할 수 있으며, 원하는 대로 동작하도록 처리 장치를 구성하거나 독립적으로 또는 결합적으로(collectively) 처리 장치를 명령할 수 있다. 소프트웨어 및/또는 데이터는, 처리 장치에 의하여 해석되거나 처리 장치에 명령 또는 데이터를 제공하기 위하여, 어떤 유형의 기계, 구성요소(component), 물리적 장치, 가상 장치(virtual equipment), 컴퓨터 저장 매체 또는 장치, 또는 전송되는 신호 파(signal wave)에 영구적으로, 또는 일시적으로 구체화(embody)될 수 있다. 소프트웨어는 네트워크로 연결된 컴퓨터 시스템 상에 분산되어서, 분산된 방법으로 저장되거나 실행될 수도 있다. 소프트웨어 및 데이터는 하나 이상의 컴퓨터 판독 가능 기록 매체에 저장될 수 있다.
실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 실시예들이 비록 한정된 도면에 의해 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기를 기초로 다양한 기술적 수정 및 변형을 적용할 수 있다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 시스템, 구조, 장치, 회로 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.
그러므로, 다른 구현들, 다른 실시예들 및 특허청구범위와 균등한 것들도 후술하는 특허청구범위의 범위에 속한다.

Claims (20)

  1. 복수의 회차(round)들을 통하여 복수의 후보 인스턴트 메시지들을 전송하는 방법에 있어서,
    이전 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 이전 회차의 대상에 전송된 상기 복수의 후보 인스턴트 메시지들에 반응하는 이전 회차의 응답들을 수집하는 단계;
    상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 현재 회차의 전송 비율을 결정하는 단계; 및
    상기 현재 회차의 전송 비율에 기초하여, 상기 복수의 후보 인스턴트 메시지들을 상기 사용자 그룹의 적어도 일부에 해당하는 현재 회차의 대상에 전송하는 단계
    를 포함하는,
    인스턴트 메시지를 전송하는 방법.
  2. 제1항에 있어서,
    상기 현재 회차의 대상에 포함된 사용자들의 수는 상기 이전 회차의 대상에 포함된 사용자들의 수보다 많은,
    인스턴트 메시지를 전송하는 방법.
  3. 제1항에 있어서,
    특정 회차의 전송 비율은
    해당 회차의 대상에 포함되는 사용자들에게 상기 후보 인스턴트 메시지들이 전송되는 비율
    을 포함하는,
    인스턴트 메시지를 전송하는 방법.
  4. 제1항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었는지 여부를 판단하는 단계
    를 포함하는,
    인스턴트 메시지를 전송하는 방법.
  5. 제4항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었다는 판단에 따라, 상기 현재 회차의 전송 비율을 결정하는 단계; 및
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았다는 판단에 따라, 상기 이전 회차의 응답들을 추가적으로 수집하는 단계
    중 적어도 하나를 더 포함하는
    인스턴트 메시지를 전송하는 방법.
  6. 제4항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았더라도, 미리 정해진 임계 시간이 도과한 경우, 상기 현재 회차의 전송 비율을 결정하는 단계
    를 더 포함하는,
    인스턴트 메시지를 전송하는 방법.
  7. 제1항에 있어서,
    상기 사용자 그룹은
    상기 인스턴트 메시지의 전송 대상에 해당하는 사용자들을 포함하는 그룹에 해당하는,
    인스턴트 메시지를 전송하는 방법.
  8. 제1항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 상기 복수의 후보 인스턴트 메시지들과 관련된 상기 이전 회차의 대상의 선호도를 파악하는 단계; 및
    상기 복수의 후보 인스턴트 메시지들 중 상기 선호도가 더 높은 후보 인스턴트 메시지가 상기 선호도가 더 낮은 후보 인스턴트 메시지보다 더 많이 전송되도록 상기 현재 회차의 전송 비율을 결정하는 단계
    를 포함하는,
    인스턴트 메시지를 전송하는 방법.
  9. 제1항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    톰슨 샘플링(Thompson sampling) 기법을 이용하여 상기 전송 비율을 결정하는 단계
    를 포함하는,
    인스턴트 메시지를 전송하는 방법.
  10. 제1항에 있어서,
    상기 이전 회차의 응답들은
    상기 복수의 후보 인스턴트 메시지들이 상기 이전 회차의 대상에 포함되는 사용자들에 의하여 클릭(click)되었는지 여부에 기초하여 결정되는,
    인스턴트 메시지를 전송하는 방법.
  11. 제1항에 있어서,
    상기 이전 회차의 응답들은
    상기 이전 회차의 대상에 포함되는 개별의 사용자가 상기 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하였으나, 상기 수신 확인된 후보 인스턴트 메시지를 클릭하지 않은 묵시적 부정 상태; 및
    상기 개별의 사용자가 상기 복수의 후보 인스턴트 메시지들 중 적어도 하나를 수신 확인하고, 상기 수신 확인된 후보 인스턴트 메시지를 클릭한 명시적 긍정 상태
    중 적어도 하나를 포함하는,
    인스턴트 메시지를 전송하는 방법.
  12. 제1항에 있어서,
    상기 복수의 후보 인스턴트 메시지들은
    상기 인스턴트 메시지의 이미지;
    상기 인스턴트 메시지의 텍스트; 및
    상기 인스턴트 메시지의 유형
    중 적어도 하나에 기초하여 결정되는,
    인스턴트 메시지를 전송하는 방법.
  13. 제1항에 있어서,
    상기 사용자 그룹 중 상기 현재 회차의 수신 대상에 해당하는 상기 현재 회차의 대상을 분할하는 단계
    를 더 포함하는,
    인스턴트 메시지를 전송하는 방법.
  14. 하드웨어와 결합되어 제1항 내지 제13항 중 어느 하나의 항의 방법을 실행시키기 위하여 매체에 저장된 컴퓨터 프로그램.
  15. 복수의 회차(round)들을 통하여 복수의 후보 인스턴트 메시지들에 대응하는 인스턴트 메시지를 전송하는 장치에 있어서,
    프로그램이 기록된 메모리; 및
    상기 프로그램을 수행하는 프로세서
    를 포함하고,
    상기 프로그램은,
    이전 회차의 전송 비율에 따라 사용자 그룹의 적어도 일부에 해당하는 이전 회차의 대상에 전송된 상기 복수의 후보 인스턴트 메시지들에 반응하는 이전 회차의 응답들을 수집하는 단계;
    상기 이전 회차의 응답들을 포함하는 이전의 응답들에 기초하여, 현재 회차의 전송 비율을 결정하는 단계; 및
    상기 현재 회차의 전송 비율에 기초하여, 상기 복수의 후보 인스턴트 메시지들을 상기 사용자 그룹의 적어도 일부에 해당하는 현재 회차의 대상에 전송하는 단계
    를 수행하는,
    인스턴트 메시지를 전송하는 장치.
  16. 제15항에 있어서,
    상기 현재 회차의 대상에 포함된 사용자들의 수는 상기 이전 회차의 대상에 포함된 사용자들의 수보다 많은,
    인스턴트 메시지를 전송하는 장치.
  17. 제15항에 있어서,
    특정 회차의 전송 비율은
    해당 회차의 대상에 포함되는 사용자들에게 상기 후보 인스턴트 메시지들이 전송되는 비율
    을 포함하는,
    인스턴트 메시지를 전송하는 장치.
  18. 제15항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었는지 여부를 판단하는 단계
    를 포함하는,
    인스턴트 메시지를 전송하는 장치.
  19. 제18항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되었다는 판단에 따라, 상기 현재 회차의 전송 비율을 결정하는 단계; 및
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았다는 판단에 따라, 상기 이전 회차의 응답들을 추가적으로 수집하는 단계
    중 적어도 하나를 더 포함하는
    인스턴트 메시지를 전송하는 장치.
  20. 제18항에 있어서,
    상기 현재 회차의 전송 비율을 결정하는 단계는
    상기 현재 회차의 전송 비율을 결정하기에 충분할 정도로 상기 이전 회차의 응답들이 수집되지 않았더라도, 미리 정해진 임계 시간이 도과한 경우, 상기 현재 회차의 전송 비율을 결정하는 단계
    를 더 포함하는,
    인스턴트 메시지를 전송하는 장치.
KR1020190118405A 2019-08-21 2019-09-25 인스턴트 메시지를 전송하는 방법 및 그 장치 KR102233651B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190102654 2019-08-21
KR20190102654 2019-08-21

Publications (2)

Publication Number Publication Date
KR20210023630A true KR20210023630A (ko) 2021-03-04
KR102233651B1 KR102233651B1 (ko) 2021-03-30

Family

ID=75175102

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190118405A KR102233651B1 (ko) 2019-08-21 2019-09-25 인스턴트 메시지를 전송하는 방법 및 그 장치

Country Status (1)

Country Link
KR (1) KR102233651B1 (ko)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180042934A (ko) * 2016-10-19 2018-04-27 삼성에스디에스 주식회사 콘텐츠 추천 방법, 장치 및 시스템
KR20180124002A (ko) * 2018-11-12 2018-11-20 에스케이플래닛 주식회사 광고 제공 방법, 이를 위한 광고 제공 장치

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180042934A (ko) * 2016-10-19 2018-04-27 삼성에스디에스 주식회사 콘텐츠 추천 방법, 장치 및 시스템
KR20180124002A (ko) * 2018-11-12 2018-11-20 에스케이플래닛 주식회사 광고 제공 방법, 이를 위한 광고 제공 장치

Also Published As

Publication number Publication date
KR102233651B1 (ko) 2021-03-30

Similar Documents

Publication Publication Date Title
US20240320686A1 (en) Third-party service for suggesting resources for a received message
US10762288B2 (en) Adaptive modification of content presented in electronic forms
US11481657B2 (en) Content recommendation method, apparatus and system
CN109062919B (zh) 一种基于深度强化学习的内容推荐方法及装置
US11645567B2 (en) Machine-learning models to facilitate user retention for software applications
WO2017193121A1 (en) Agent aptitude prediction
EP3590051A1 (en) Automated upsells in customer conversations
CN107784504B (zh) 客户回访事件的生成方法及终端设备
CN103425703B (zh) 一种网络信息的处理方法和装置
CN109033408A (zh) 信息推送方法及装置、计算机可读存储介质、电子设备
CN107533719A (zh) 基于用户获取内容的兴趣等级显示内容项
US10616149B2 (en) Optimizing evaluation of effectiveness for multiple versions of electronic messages
CN109299356A (zh) 基于大数据的活动推荐方法、装置、电子设备及存储介质
CN107481042A (zh) 一种在线购票的优惠选择方法及电子设备
CN113222073A (zh) 训练迁移学习模型和推荐模型的方法及装置
CN107247728A (zh) 文本处理方法、装置及计算机存储介质
KR102233651B1 (ko) 인스턴트 메시지를 전송하는 방법 및 그 장치
CN111598597A (zh) 用于发送信息的方法和装置
Wang et al. Equilibrium customer strategies in the Geo/Geo/1 queue with single working vacation
US10776138B1 (en) Recipient-side dynamic customization of an email intended for the recipient
CN107392677A (zh) 基于电子书的虚拟礼品领取方法及电子设备
CN117194772A (zh) 一种基于用户标签的内容推送方法及装置
KR102163125B1 (ko) 해시태그 기반 이미지 콘테스트를 통한 마케팅 방법
CN115829159A (zh) 社交媒体粉丝新增预测方法、装置、设备及存储介质
Martin et al. The Possibilistic Reward Method and a Dynamic Extension for the Multi-armed Bandit Problem: A Numerical Study

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant