CN103886476B - 广告实验和发布方法及系统 - Google Patents

广告实验和发布方法及系统 Download PDF

Info

Publication number
CN103886476B
CN103886476B CN201210560229.1A CN201210560229A CN103886476B CN 103886476 B CN103886476 B CN 103886476B CN 201210560229 A CN201210560229 A CN 201210560229A CN 103886476 B CN103886476 B CN 103886476B
Authority
CN
China
Prior art keywords
experiment
mark
default
flow
advertisement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210560229.1A
Other languages
English (en)
Other versions
CN103886476A (zh
Inventor
李猛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN201210560229.1A priority Critical patent/CN103886476B/zh
Publication of CN103886476A publication Critical patent/CN103886476A/zh
Application granted granted Critical
Publication of CN103886476B publication Critical patent/CN103886476B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明涉及一种广告实验和发布方法,包括:采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;判定实验标识和默认标识,为所述实验标识和默认标识配置与其相对应的实验策略或默认策略;响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志;以及统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。本发明还涉及一种广告实验和发布系统。所述广告实验和发布方法和系统实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点,所述方法和系统不只针对搜索广告,对于长尾广告系统同样适用。

Description

广告实验和发布方法及系统
技术领域
本发明涉及搜索技术,特别涉及一种广告实验和发布方法及系统。
背景技术
目前,基于线上流量的实验系统是广告检索和播放系统不可或缺的一部分,其广泛用于检验各种广告策略,如广告检索、排序和计费等在真实的线上环境中的效果。
然而,现有的实验系统存在以在缺陷:
(1)、广告策略实验系统需要单独部署,单独部署虽然可以避免实验策略对线上系统产生影响,但是单独部署往往意味着需要独立维护;另一方面,线上系统和实验系统的同步升级存在很多问题,经过多次升级之后,很难保证实验系统和线上系统在除策略以外的一致性;
(2)、广告策略实验系统所分担的实验流量有限,广告策略实验系统有限的实验流量导致了实验策略最多只能经过很小流量的检验,一方面收敛较慢,实验者需要等待较长的时间;另一方面也使得实验策略在灰度发布时无法完成全流量的灰度发布,不能实现线上策略到实验策略的平滑过度。
发明内容
为了解决现有技术中广告策略实验系统需要单独部署,且实验策略在灰度发布时无法完成全流量的灰度发布的问题,本发明实施例提出了一种基于线上流量的一体化实验和发布方法及系统。所述技术方案如下。
一种广告实验和发布方法,包括:
采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
判定实验标识和默认标识,为所述实验标识和默认标识配置与其相对应的实验策略或默认策略;
响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志;以及
统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。
一种广告实验和发布系统,包括:
流量标识单元,用于采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
策略配置单元,用于为所述实验标识和默认标识配置与其相对应的实验策略或默认策略;
广告检索和播放单元,用于判定实验标识和默认标识,并响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志;以及
统计单元,用于统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。
相对于现有技术,本发明实施例提供的广告实验和发布方法采用随机数分配实验流量,使得实验系统和线上系统合二为一,避免不一致导致实验结果不准确,另一方面,所述广告实验和发布方法及系统区别于现有技术,其不采用流量分配,从而支持实验策略从小流量到全流量的灰度发布,实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中使用的附图作一简单地介绍,显而易见地,下面所列附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的广告实验和发布方法的流程示意图;
图2是本发明实施例提供的广告实验和发布方法的操作方法示意图;
图3是本发明实施例提供的广告实验和发布系统的结构示意图。
具体实施方式
下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其它实施例,都属于本发明保护的范围。
实施例1
本发明第一实施例提出了一种广告实验和发布方法,其流程如图1所示,包括:
步骤101:采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
步骤102:判定实验标识和默认标识,为所述实验标识和默认标识配置与其相对应的实验策略或默认策略;
步骤103:响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志;
步骤104:统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。
本发明实施例提供的广告实验和发布方法采用随机数分配实验流量,使得实验系统和线上系统合二为一,避免不一致导致实验结果不准确,另一方面,所述广告实验和发布方法区别于现有技术,其不采用流量分配,从而支持实验策略从小流量到全流量的灰度发布,实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点。
实施例2
请一起参阅图2,本发明第二实施例提出了一种广告实验和发布方法,其是在第一实施例基础上改进而来,其流程与第一实施例相类似,
具体操作如下。
在本实施例中,如图2所示,可以由实验者对实验流量进行比例设定,例如,设定总流量的10%或20%作为实验流量,本实施例中,可以设定总流量的10%作为实验流量。可以理解的是,在其它变更实施方式中,可以设定其它比例,如30%或40%作为实验流量,不局限于具体实施例。
接着,采用随机数生成流量标识(Tag),直接按照实验流量的比例对线上流量打上tag,命中实验的流量被打上实验tag,否则打上默认tag。
本实施例中,在判定实验标识和默认标识,为所述实验标识和默认标识配置与其相对应的实验策略或默认策略的步骤中,广告检索和播放单元40要完成两方面的工作,一方面从策略配置单元20中分别载入实验策略和线上默认策略,在实际使用系统中,使用“tag->广告策略”的hash-map存储,另一方面,根据当前流量的tag,决定触发tag对应的实验策略或者线上默认策略,再返回广告并生成展现日志,此时携带的跳转URL是带有实验流量tag的加密串。
在响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志的步骤中,其流程可以为:在web前端,当用户进行搜索,例如用户点击了广告,则该tag会通过URL传递给点击服务器(click server)30并记录到点击日志中。
最后,由统计单元50统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。具体地,统计单元50利用统计学算法统计带有tag的展现日志和点击日志,计算出相应实验策略的广告检索量(QV)、展现量(ads impressions)、点击量(click)、按点击付费的出价(cost per click,CPC)、点击率(click-through rate,CTR)、广告位覆盖率(ads coverage)、千次检索收益(rpm)等衡量广告策略效果的重要评价指标。
本发明实施例提供的广告实验和发布方法采用随机数分配实验流量,使得实验系统和线上系统合二为一,避免不一致导致实验结果不准确,另一方面,所述广告实验和发布方法区别于现有技术,其不采用流量分配,从而支持实验策略从小流量到全流量的灰度发布,实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点。所述方法不只针对搜索广告,对于长尾广告系统同样适用。
实施例3
本发明第三实施例提出了一种搜索系统100,如图3所示,包括:
流量标识单元10:用于采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
策略配置单元20:用于为所述实验标识和默认标识配置与其相对应的实验策略或默认策略;
广告检索和播放单元40:用于判定实验标识和默认标识,并响应客户端的展现或点击操作,生成携带所述实验标识或默认标识的展现日志和点击日志;
统计单元50:用于统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。
本发明实施例提供的广告实验和发布系统100采用随机数分配实验流量,使得实验系统和线上系统合二为一,避免不一致导致实验结果不准确,另一方面,所述广告实验和发布系统100区别于现有技术,其不采用流量分配,从而支持实验策略从小流量到全流量的灰度发布,实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点。
实施例4
本发明第四实施例提出了一种广告实验和发布系统100,其是在第三实施例基础上改进而来,其结构与第一实施例相类似,包括流量标识单元10、策略配置单元20、广告检索和播放单元40、以及统计单元50。
在本实施例中,广告检索和播放单元40一方面从策略配置单元20中分别载入实验策略和线上默认策略,在实际使用系统中,使用“tag->广告策略”的hash-map存储,另一方面,根据当前流量的tag,决定触发tag对应的实验策略或者线上默认策略,再返回广告并生成展现日志,此时携带的跳转URL是带有实验流量tag的加密串。
另外,在本实施例中,统计单元50用于统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估。具体地,统计单元50利用统计学算法统计带有tag的展现日志和点击日志,计算出相应实验策略的广告检索量(QV)、展现量(ads impressions)、点击量(click)、按点击付费的出价(costper click,CPC)、点击率(click-through rate,CTR)、广告位覆盖率(ads coverage)、千次检索收益(rpm)等衡量广告策略效果的重要评价指标。
本发明实施例提供的广告实验和发布系统100采用随机数分配实验流量,使得实验系统和线上系统合二为一,避免不一致导致实验结果不准确,另一方面,所述广告实验和发布系统100区别于现有技术,其不采用流量分配,从而支持实验策略从小流量到全流量的灰度发布,实现了线上系统中广告策略的平稳升级,可不限实验流量得到实验结果,具有安全可靠、维护方便的优点。所述系统100不只针对搜索广告,对于长尾广告系统同样适用。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视本发明的保护范围。

Claims (8)

1.广告实验和发布方法,其特征在于,包括:
采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
判定实验标识和默认标识,为所述实验标识配置与其相对应的实验策略,并为所述默认标识配置与其相对应的默认策略;
响应客户端的展现和点击操作,生成携带所述实验标识或默认标识的展现日志,以及,生成携带所述实验标识或默认标识的点击日志;以及
统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估;
所述采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识包括:
对实验流量进行比例设定,采用随机数生成流量标识,按照实验流量的比例对线上流量打上流量标识,命中实验的流量被打上实验标识,否则打上默认标识;
响应客户端的展现和点击操作,生成携带所述实验标识或默认标识的展现日志,以及,生成携带所述实验标识或默认标识的点击日志包括:
响应客户端的展现操作,依据所述展现操作对应的当前流量的实验标识或默认标识,确定所述展现操作对应的实验策略或默认策略;
依据所述展现操作对应的实验策略或默认策略,生成携带所述实验标识或默认标识的展现日志;
以及;
响应客户端的点击操作,依据所述点击操作对应的当前流量的实验标识或默认标识,确定所述点击操作对应的实验策略或默认策略;
依据所述点击操作对应的实验策略或默认策略,生成携带所述实验标识或默认标识的点击日志。
2.根据权利要求1所述的广告实验和发布方法,其特征在于,统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估包括:
利用统计学算法统计带有标识的展现日志和点击日志,计算出相应实验策略或默认策略的对比和评估。
3.根据权利要求2所述的广告实验和发布方法,其特征在于,所述对比和评估结果包括广告检索量、展现量、点击量、按点击付费的出价、点击率、广告位覆盖率、千次检索收益中任意一者。
4.根据权利要求1所述的广告实验和发布方法,其特征在于,所述响应客户端的展现或点击操作后,生成带有实验标识加密串的跳转URL。
5.广告实验和发布系统,其特征在于,包括:
流量标识单元,用于采用随机数对实验流量进行标识,对未采用实验标识的流量采用默认标识;
策略配置单元,用于为所述实验标识配置与其相对应的实验策略,并为所述默认标识配置与其相对应的默认策略;
广告检索和播放单元,用于判定实验标识和默认标识,并响应客户端的展现和点击操作,生成携带所述实验标识或默认标识的展现日志,以及,生成携带所述实验标识或默认标识的点击日志;以及
统计单元,用于统计所述展现日志和点击日志,完成实验策略和默认策略的对比和评估;
所述流量标识单元具体用于:
对实验流量进行比例设定,采用随机数生成流量标识,按照实验流量的比例对线上流量打上流量标识,命中实验的流量被打上实验标识,否则打上默认标识;
所述广告检索和播放单元具体用于:
响应客户端的展现操作,依据所述展现操作对应的当前流量的实验标识或默认标识,确定所述展现操作对应的实验策略或默认策略;
依据所述展现操作对应的实验策略或默认策略,生成携带所述实验标识或默认标识的展现日志;
以及;
响应客户端的点击操作,依据所述点击操作对应的当前流量的实验标识或默认标识,确定所述点击操作对应的实验策略或默认策略;
依据所述点击操作对应的实验策略或默认策略,生成携带所述实验标识或默认标识的点击日志。
6.根据权利要求5所述的广告实验和发布系统,其特征在于,所述统计单元利用统计学算法统计带有标识的展现日志和点击日志,计算出相应实验策略或默认策略的对比和评估。
7.根据权利要求6所述的广告实验和发布系统,其特征在于,所述对比和评估结果包括广告检索量、展现量、点击量、按点击付费的出价、点击率、广告位覆盖率、千次检索收益中任意一者。
8.根据权利要求5所述的广告实验和发布系统,其特征在于,所述广告检索和播放单元用于响应客户端的展现或点击操作,生成带有实验标识加密串的跳转URL。
CN201210560229.1A 2012-12-21 2012-12-21 广告实验和发布方法及系统 Active CN103886476B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210560229.1A CN103886476B (zh) 2012-12-21 2012-12-21 广告实验和发布方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210560229.1A CN103886476B (zh) 2012-12-21 2012-12-21 广告实验和发布方法及系统

Publications (2)

Publication Number Publication Date
CN103886476A CN103886476A (zh) 2014-06-25
CN103886476B true CN103886476B (zh) 2018-07-06

Family

ID=50955355

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210560229.1A Active CN103886476B (zh) 2012-12-21 2012-12-21 广告实验和发布方法及系统

Country Status (1)

Country Link
CN (1) CN103886476B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110852805B (zh) * 2019-11-12 2022-11-08 北京沃东天骏信息技术有限公司 广告实验和发布系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577871A (zh) * 2009-01-22 2009-11-11 腾讯科技(深圳)有限公司 对投放于移动终端软件的广告的精确统计方法
CN102385729A (zh) * 2011-10-25 2012-03-21 北京亿赞普网络技术有限公司 一种广告投放策略的评估方法和装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101599153A (zh) * 2008-06-05 2009-12-09 华为技术有限公司 一种广告计量系统及方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101577871A (zh) * 2009-01-22 2009-11-11 腾讯科技(深圳)有限公司 对投放于移动终端软件的广告的精确统计方法
CN102385729A (zh) * 2011-10-25 2012-03-21 北京亿赞普网络技术有限公司 一种广告投放策略的评估方法和装置

Also Published As

Publication number Publication date
CN103886476A (zh) 2014-06-25

Similar Documents

Publication Publication Date Title
WO2017133330A1 (zh) 信息处理方法、服务器及第一终端、计算机存储介质
US20080133347A1 (en) System and method for providing semantic captchas for online advertising
US20080133321A1 (en) System and method for measuring awareness of online advertising using captchas
US20080133348A1 (en) System and method for delivering online advertisements using captchas
US9076151B2 (en) Graphical certifications of online advertisements intended to impact click-through rates
JP5482884B1 (ja) 広告システム
US20140236706A1 (en) System and method for measuring advertising effectiveness
CN108197987A (zh) 广告综合管理监测系统和方法
US20200126114A1 (en) Blockchain-Based Advertising Delivering and Evaluation Method
US20120078707A1 (en) Measuring Inline Ad Performance for Third-Party Ad Serving
CN103918001A (zh) 通过社交网络系统传播的通信的理解效果
US20140156400A1 (en) Associating ad results with purchases made via mobile devices
CN108197993A (zh) 一种为商家引流、挖掘潜在客户的方法及服务器
CN105631708B (zh) 一种信息处理方法及装置
JP6516293B2 (ja) ポイント還元率出力装置、ポイント還元率出力方法およびポイント還元率出力プログラム
CN108537591A (zh) 基于签到统计的线上广告佣金计算方法、服务平台及系统
Yang et al. Using the Importance-Performance Analysis (IPA) approach to measure the service quality of mobile application stores in Taiwan
CN103886476B (zh) 广告实验和发布方法及系统
US11907968B1 (en) Media effectiveness
WO2020192259A1 (zh) 广告的投放方法及客户端、服务端、系统
Bonacchi et al. Measuring and managing customer lifetime value: A CLV scorecard and cohort analysis in a subscription-based enterprise
US20130203443A1 (en) Providing information about a location to a mobile device based on the location of the mobile device
KR20210123858A (ko) 블록체인 포인트 기반의 광고 서비스 제공 서버 및 그 방법
US20120271714A1 (en) Retargeting related techniques and offerings
US11640578B2 (en) Break-based inventory forecasting

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant