CN103942707B - 基于实时竞价的广告效果优化系统 - Google Patents
基于实时竞价的广告效果优化系统 Download PDFInfo
- Publication number
- CN103942707B CN103942707B CN201410137899.1A CN201410137899A CN103942707B CN 103942707 B CN103942707 B CN 103942707B CN 201410137899 A CN201410137899 A CN 201410137899A CN 103942707 B CN103942707 B CN 103942707B
- Authority
- CN
- China
- Prior art keywords
- real
- time
- module
- data
- advertisement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000005457 optimization Methods 0.000 title claims abstract description 19
- 238000004458 analytical method Methods 0.000 claims abstract description 29
- 230000005540 biological transmission Effects 0.000 claims abstract description 25
- 238000000034 method Methods 0.000 claims abstract description 5
- 238000007418 data mining Methods 0.000 claims abstract description 4
- 238000004364 calculation method Methods 0.000 claims description 10
- 230000004913 activation Effects 0.000 claims description 6
- 239000013589 supplement Substances 0.000 claims description 4
- 241001269238 Data Species 0.000 claims description 3
- 230000003542 behavioural effect Effects 0.000 claims description 3
- 230000007774 longterm Effects 0.000 claims description 3
- 238000010223 real-time analysis Methods 0.000 claims description 2
- 235000006961 Fumaria officinalis Nutrition 0.000 claims 1
- 244000044980 Fumaria officinalis Species 0.000 claims 1
- 238000007405 data analysis Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000000737 periodic effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000026676 system process Effects 0.000 description 1
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
基于实时竞价的广告效果优化系统，包括1、广告投放模块，用于服务竞价请求，实现定向操作，根据广告投放情况产生日志；2、实时日志传输模块，实时传输日志给3；3、实时日志分析模块，把传输来日志的不同数据进行实时分析计算，将分析计算结果传输给4；4、实时广告数据汇总模块，把传输来的分析计算结果用分布式的一致性hash图进行汇总形成报表（可节约汇总时间），根据不同报表中的数据类型将报表分类存储进相应数据库；广告优化模块，对存储进数据库的不同报表中的数据提炼分析，根据分析结果实时优化广告投放方法。日志传输和后续处理都实时进行，使数据更新快，可实现广告效果的实时优化。
Description
技术领域
本发明涉及一种优化系统，尤其是一种基于实时竞价的广告效果优化系统。
背景技术
该平台主要为游戏行业服务，可以穿透监测广告效果，除了可以监测包括广告的展示，点击，到达，注册等常规数据外，还可以监测到客户注册之后的后续行为，包括在游戏内的创角（激活），升级到一定级别或停留一定时间（有效），二次登录，次日登录，七日登录（活跃），充值等相关数据。
由于游戏行业投放的特殊性，需要根据广告投放数据非常及时的在不同来源流量中进行选择，所以需要一套可以及时反馈数据，并支持实时筛选的系统来支持投放动作。
而现在市场上的系统中，大部分使用较老的系统架构，使用异步日志传输机制，即在投放端生成日志，定时切分日志文件。分析端需要定时从投放端回传日志，分析后入库或写入结果文件。由于这个过程是定时执行的，每个环节都有固定的时间间隔，这使日志生成到广告效果数据分析完成的时间至少需要3-5分钟，甚至有些公司的系统是一小时或一天生成一次数据报告。这样的效率远远不能满足游戏广告投放的需求。
有鉴于此，特提出本发明。
发明内容
本发明的目的是提供一种数据更新快、可实现广告效果的实时优化控制、同时对到达，转化，激活，有效等复杂数据的分析算法进行优化的基于实时竞价的广告效果优化系统。
为解决上述技术问题，本发明采用技术方案的基本构思是：
一种基于实时竞价的广告效果优化系统，包括
广告投放模块，用于服务竞价请求，实现定向操作，并根据广告投放情况产生日志；
实时日志传输模块，用于实时传输广告投放模块所产生的日志给实时日志分析模块；
实时日志分析模块，把传输来日志的不同数据进行实时分析计算，其中包括广告的花费，展示，点击，到达，注册，激活，次日登录，长期活跃，充值行为数据的计算，并将分析计算结果传输给实时广告数据汇总模块；
实时广告数据汇总模块，把传输来的分析计算结果用分布式的一致性hash图进行汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库；
广告优化模块，对存储进数据库的不同报表中的数据提炼分析，并根据分析结果实时优化广告投放方法。
优选的，所述把传输来的分析计算结果汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库中的数据库包括关系型数据库，文件型数据库和内存型数据库。
优选的，实时广告数据汇总模块包括：
微型分布式计算模块，可启动任意个数量的子程序，每一个子程序可自动领取实时传输来日志的不同数据任务队列中的计算任务进行实时分析计算，产生计算结果数据；
基于内存的实时数据调度模块，可根据需要接收不同的计算结果数据，并将所述计算结果数据转化为新的计算任务；
计算模块，调取所述新的计算任务进行计算。
优选的，所述微型分布式计算模块为内存常驻程序。
本发明的有益效果为：本发明日志实时传输，因此后续处理程序也可实时进行，而不是定期传输，减少系统在日志传输，日志格式化，逻辑分析，数据汇总等各个环节中消耗的时间，因此数据更新快，可实现在一天10亿左右数据规模下的秒级更新，成倍增加优选频率，可以大大减少日志生成到广告效果数据分析完成的时间，可实现广告效果的实时优化控制，在极短时间内达到客户要求的KPI。其中数据汇总中主要是由于采用分布式的一致性hash图进行汇总，所以大大节约了汇总的时间；同时对到达，转化，激活，有效等复杂数据的分析算法进行优化。
附图说明
图1为本发明基于实时竞价的广告效果优化系统的一种结构框图；
图2为本发明实时广告数据汇总模块的一种结构框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案，下面结合附图和具体实施方式对本发明作进一步的详细说明。
参照图1，本发明是一种基于实时竞价的广告效果优化系统，包括
广告投放模块10，用于服务竞价请求，实现定向操作，并根据广告投放情况产生日志；
实时日志传输模块11，用于实时传输广告投放模块10所产生的日志给实时日志分析模块12；
实时日志分析模块12，把传输来日志的不同数据进行实时分析计算，其中包括广告的花费，展示，点击，到达，注册，激活，次日登录，长期活跃，充值行为数据的计算，并将分析计算结果传输给实时广告数据汇总模块13；
实时广告数据汇总模块13，把传输来的分析计算结果用分布式的一致性hash图进行汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库；
广告优化模块14，对存储进数据库的不同报表中的数据提炼分析，并根据分析结果实时优化广告投放方法。
本发明日志实时传输，因此后续处理程序也可实时进行，而不是定期传输，减少系统在日志传输，日志格式化，逻辑分析，数据汇总等各个环节中消耗的时间，因此数据更新快，可实现在一天10亿左右数据规模下的秒级更新，成倍增加优选频率，可以大大减少日志生成到广告效果数据分析完成的时间，可实现广告效果的实时优化控制，在极短时间内达到客户要求的KPI。其中数据汇总中主要是由于采用分布式的一致性hash图进行汇总，所以大大节约了汇总的时间；同时对到达，转化，激活，有效等复杂数据的分析算法进行优化。
所述把传输来的分析计算结果汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库中的数据库包括关系型数据库，文件型数据库和内存型数据库。
参照图2，为了进一步提高系统处理数据的效率，实时广告数据汇总模块13可包括：
微型分布式计算模块130，可启动任意个数量的子程序，每一个子程序可自动领取实时传输来日志的不同数据任务队列中的计算任务进行实时分析计算，产生计算结果数据；
基于内存的实时数据调度模块131，可根据需要接收不同的计算结果数据，并将所述计算结果数据转化为新的计算任务；
计算模块132，调取所述新的计算任务进行计算。
所述微型分布式计算模块130为内存常驻程序。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。
Claims (1)
1.一种基于实时竞价的广告效果优化系统，其特征在于，包括
广告投放模块，用于服务竞价请求，实现定向操作，并根据广告投放情况产生日志；
实时日志传输模块，用于实时传输广告投放模块所产生的日志给实时日志分析模块；
实时日志分析模块，把传输来日志的不同数据进行实时分析计算，其中包括广告的花费，展示，点击，到达，注册，激活，次日登录，长期活跃，充值行为数据的计算，并将分析计算结果传输给实时广告数据汇总模块；
实时广告数据汇总模块，把传输来的分析计算结果用分布式的一致性hash图进行汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库；
广告优化模块，对存储进数据库的不同报表中的数据提炼分析，并根据分析结果实时优化广告投放方法；
所述把传输来的分析计算结果汇总形成报表，并根据不同报表中的数据类型将所述报表分类存储进相应的数据库中的数据库包括关系型数据库，文件型数据库和内存型数据库；
实时广告数据汇总模块包括：
微型分布式计算模块，可启动任意个数量的子程序，每一个子程序可自动领取实时传输来日志的不同数据任务队列中的计算任务进行实时分析计算，产生计算结果数据；
基于内存的实时数据调度模块，可根据需要接收不同的计算结果数据，并将所述计算结果数据转化为新的计算任务；
计算模块，调取所述新的计算任务进行计算；
所述微型分布式计算模块为内存常驻程序。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410137899.1A CN103942707B8 (zh) | 2014-04-08 | 2014-04-08 | 基于实时竞价的广告效果优化系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410137899.1A CN103942707B8 (zh) | 2014-04-08 | 2014-04-08 | 基于实时竞价的广告效果优化系统 |
Publications (3)
| Publication Number | Publication Date |
|---|---|
| CN103942707A CN103942707A (zh) | 2014-07-23 |
| CN103942707B true CN103942707B (zh) | 2018-05-01 |
| CN103942707B8 CN103942707B8 (zh) | 2018-06-29 |
Family
ID=51190363
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410137899.1A Active CN103942707B8 (zh) | 2014-04-08 | 2014-04-08 | 基于实时竞价的广告效果优化系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103942707B8 (zh) |
Families Citing this family (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104915329B (zh) * | 2015-06-26 | 2018-03-13 | 深圳市腾讯计算机系统有限公司 | 一种报表生成方法、装置和系统 |
| CN105205168B (zh) * | 2015-10-12 | 2018-11-09 | 北京京东尚科信息技术有限公司 | 一种基于Redis数据库的曝光系统及其操作方法 |
| CN105898540B (zh) * | 2016-05-31 | 2019-04-12 | 无锡天脉聚源传媒科技有限公司 | 一种节目信息的数据处理方法及装置 |
| CN106960359B (zh) * | 2017-02-10 | 2021-09-03 | 上海智子信息科技股份有限公司 | 一种基于流式计算的全自动竞价优化方法及系统 |
| CN109191183A (zh) * | 2018-08-10 | 2019-01-11 | 宜人恒业科技发展（北京）有限公司 | 一种基于大数据的广告投放动态调整系统 |
| CN111210312B (zh) * | 2020-01-08 | 2023-12-05 | 山东汇贸电子口岸有限公司 | 一种应用于中介选取的分布式在线实时竞价装置及方法 |
| CN111932316A (zh) * | 2020-09-04 | 2020-11-13 | 厦门羽星科技股份有限公司 | 广告运营数据接入方法及装置 |
| CN112217893A (zh) * | 2020-10-12 | 2021-01-12 | 广州欢网科技有限责任公司 | 广告投放的控频控量方法、装置、设备和广告投放系统 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101192227A (zh) * | 2006-11-30 | 2008-06-04 | 阿里巴巴公司 | 一种基于分布式计算网络的日志文件分析方法和系统 |
| CN103166785A (zh) * | 2011-12-15 | 2013-06-19 | 同程网络科技股份有限公司 | 基于Hadoop的分布式日志分析系统 |
| CN103164434A (zh) * | 2011-12-13 | 2013-06-19 | 阿里巴巴集团控股有限公司 | 实时数据的获取方法、装置及系统 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070299682A1 (en) * | 1997-01-22 | 2007-12-27 | Roth David W | System and method for real-time bidding for Internet advertising space |
| CN100456298C (zh) * | 2006-07-12 | 2009-01-28 | 百度在线网络技术（北京）有限公司 | 广告信息检索系统及广告信息检索方法 |
| WO2009113047A2 (en) * | 2008-03-12 | 2009-09-17 | Ads Onscreen Ltd. | Apparatus and method for targeted advertisement |
| US20110040612A1 (en) * | 2009-08-14 | 2011-02-17 | Simmons Willard L | Machine learning for computing and targeting bids for the placement of advertisements |
| CN103177129B (zh) * | 2013-04-19 | 2016-03-16 | 上海新数网络科技股份有限公司 | 互联网实时信息推荐预测系统 |
| CN103336796A (zh) * | 2013-06-09 | 2013-10-02 | 北京百度网讯科技有限公司 | 一种直接展示广告商品的方法及系统 |
-
2014
- 2014-04-08 CN CN201410137899.1A patent/CN103942707B8/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101192227A (zh) * | 2006-11-30 | 2008-06-04 | 阿里巴巴公司 | 一种基于分布式计算网络的日志文件分析方法和系统 |
| CN103164434A (zh) * | 2011-12-13 | 2013-06-19 | 阿里巴巴集团控股有限公司 | 实时数据的获取方法、装置及系统 |
| CN103166785A (zh) * | 2011-12-15 | 2013-06-19 | 同程网络科技股份有限公司 | 基于Hadoop的分布式日志分析系统 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103942707B8 (zh) | 2018-06-29 |
| CN103942707A (zh) | 2014-07-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103942707B (zh) | 基于实时竞价的广告效果优化系统 | |
| CN107657518A (zh) | 一种基于事件的流程处理方法及相关装置和服务器 | |
| CN106815254B (zh) | 一种数据处理方法和装置 | |
| CN103412961B (zh) | 一种实时导出海量数据报表的处理方法和系统 | |
| CN107678852B (zh) | 基于流数据实时计算的方法、系统、设备及存储介质 | |
| ATE467970T1 (de) | Eingabe- und ausgabe-validierung zum schutze von datenbank-servern | |
| CN109829765A (zh) | 基于Flink和Kafka实时监控销售数据的方法、系统及装置 | |
| CN103297291A (zh) | 网站实时状态监控方法及系统 | |
| CN104077224B (zh) | 软件功能分析系统与方法 | |
| CN108647329A (zh) | 用户行为数据的处理方法、装置及计算机可读存储介质 | |
| US8571924B2 (en) | High performance personalized advertisement serving by exploiting thread assignments in a multiple core computing environment | |
| US10084854B2 (en) | Response latency reduction in fixed allocation content selection infrastructure | |
| WO2019221917A1 (en) | System and method for user cohort value prediction | |
| US10410246B2 (en) | Systems, methods, and devices for spend control in online advertising | |
| CN103530304A (zh) | 基于自适应分布式计算的在线推荐方法、系统和移动终端 | |
| US10181130B2 (en) | Real-time updates to digital marketing forecast models | |
| US20130066665A1 (en) | System and method for automated selection of workflows | |
| CN115202847A (zh) | 任务的调度方法和装置 | |
| CN105069029A (zh) | 一种实时etl系统及方法 | |
| US20170132052A1 (en) | Analyzing and automating work-flow in a computerized user-interface | |
| Grabs et al. | Measuring performance of complex event processing systems | |
| Bhatt et al. | An efficient approach for low latency processing in stream data | |
| WO2008093603A1 (ja) | コミュニケータのスケジュールを作成する方法及びコンピュータ | |
| US20130226835A1 (en) | Real-Time Trade Forecaster | |
| Easterly | Bio-Fi: inverse biotelemetry projects |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Address after: 100026 Beijing Chaoyang District Guang Qu Road No. 3 Park 26A Applicant after: Polytron Technologies Inc. Address before: 100026 Beijing city Chaoyang District Yaojieyuan Road No. 105, No. 1 building 7 layer 805 Applicant before: Polytron Technologies Inc. of Beijing Address after: 100026 Beijing city Chaoyang District Yaojieyuan Road No. 105, No. 1 building 7 layer 805 Applicant after: Polytron Technologies Inc. of Beijing Address before: 100026 Beijing city Chaoyang District Yaojieyuan Road No. 105, No. 1 building 7 layer 805 Applicant before: BEIJING BIHE TECHNOLOGY Co.,Ltd. |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CI03 | Correction of invention patent |
Correction item: Patentee|Address Correct: Match the Polytron Technologies Inc|100026 Beijing Chaoyang District Guang Qu Road No. 3 Park 26A False: Polytron Technologies Inc|100026 Beijing Chaoyang District Guang Qu Road No. 3 Park 26A Number: 14-02 Volume: 34 |
|
| CI03 | Correction of invention patent | ||
| CI03 | Correction of invention patent |
Correction item: Patentee Correct: Match the Polytron Technologies Inc False: Polytron Technologies Inc Number: 18-01 Volume: 34 Correction item: Patentee Correct: Match the Polytron Technologies Inc False: Polytron Technologies Inc Number: 18-01 Page: The title page Volume: 34 |
|
| CI03 | Correction of invention patent | ||
| PE01 | Entry into force of the registration of the contract for pledge of patent right |
Denomination of invention: Advertising effect optimization system based on real time bidding Effective date of registration: 20201030 Granted publication date: 20180501 Pledgee: Zhongguancun Beijing technology financing Company limited by guarantee Pledgor: Match the Polytron Technologies Inc. Registration number: Y2020990001273 |
|
| PE01 | Entry into force of the registration of the contract for pledge of patent right |