CN113852664A - 一种基于分布式实时计算的能源商品及能源需求的精准推送方法 - Google Patents

一种基于分布式实时计算的能源商品及能源需求的精准推送方法 Download PDF

Info

Publication number
CN113852664A
CN113852664A CN202110955296.2A CN202110955296A CN113852664A CN 113852664 A CN113852664 A CN 113852664A CN 202110955296 A CN202110955296 A CN 202110955296A CN 113852664 A CN113852664 A CN 113852664A
Authority
CN
China
Prior art keywords
energy
user
log
commodity
commodities
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110955296.2A
Other languages
English (en)
Inventor
胡浩瀚
郭正雄
张立
杨少春
张海涛
朱传晶
张志陶
刘万龙
许娜
李艳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin Richsoft Electric Power Information Technology Co ltd
State Grid Information and Telecommunication Co Ltd
Original Assignee
Tianjin Richsoft Electric Power Information Technology Co ltd
State Grid Information and Telecommunication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin Richsoft Electric Power Information Technology Co ltd, State Grid Information and Telecommunication Co Ltd filed Critical Tianjin Richsoft Electric Power Information Technology Co ltd
Priority to CN202110955296.2A priority Critical patent/CN113852664A/zh
Publication of CN113852664A publication Critical patent/CN113852664A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/953—Querying, e.g. by the use of web search engines
    • G06F16/9535—Search customisation based on user profiles and personalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/55—Push-based network services
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y04—INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
    • Y04S—SYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
    • Y04S50/00—Market activities related to the operation of systems integrating technologies related to power network operation or related to communication or information technologies
    • Y04S50/16—Energy services, e.g. dispersed generation or demand or load or energy savings aggregation

Abstract

一种基于分布式实时计算的能源商品及能源需求的精准推送方法，包括以下步骤：步骤一：用户操作日志采集，负责采集用户在网页端或APP端产生的各类点击日志；步骤二：数据缓冲，与日志采集部分对接，利用消息中间件接收并缓存日志消息，与实时计算部分对接，将日志消息传递给计算程序；步骤三：混合分布式计算，综合利用各种数据，实时产生针对能源用户或能源服务商的推送结果；步骤四：数据存储，用于存储能源用户信息等，便于步骤一种的用户调取实用。该推送方法实现针对能源商品及能源需求的智能化、个性化、精准化的推送系统。帮助能源用户快速找到自己需要的能源商品，帮助能源服务商快速找到目标能源客户，促进供需共赢。

Description

一种基于分布式实时计算的能源商品及能源需求的精准推送 方法
技术领域
本发明涉及大数据推送技术领域，具体为一种基于分布式实时计算的能源商品及能源需求的精准推送方法。
背景技术
随着能源行业的飞速发展,电子商务在能源市场的参与度也越来越高.打造一个能源市场的“淘宝”，让其中用户发布需求，服务商发布商品，则可以充分发挥市场服务对接的纽带作用，会吸引全社会能源用户和各类能源服务商在此开展服务。而市场的商品推送系统则是其中的关键,推送系统是自动联系用户和商品的一种工具，它通过收集市场与用户的各类信息，然后根据这些行为数据，分析出一定的规则或者直接对用户对其他物品的喜好进行预测计算。从而主动给用户推送可满足他们兴趣和需求的信息。每个用户所得到的推送信息都是与自己的行为特征和兴趣有关的，而不是笼统的大众化信息。一是可以反映用户对物品的真实喜好,对用户线上和线下行为进行深度洞察,提高用户时间效率.二是提高了商家的个性化服务，进一步提升顾客在店铺的消费体验。
现有推送系统的推送结果产生基于全品类商品热度统计，没有采用分析用户的历史行为来对用户的兴趣进行分析，无法针对具体用户产生个性化、精准化的推送结果。而且一般的实现方案是基于离线统计实现，推送结果产生存在滞后性。推送结果类型单一，没有针对用户当下及历史感兴趣商品做区别推送。其次现有推送系统没有综合考虑商品评分、用户消费水平等重要影响因素。再其次没有针对能源用户需求的推送实现方案。
所以为了让商家更了解用户，推送系统既要服务于电商，更要服务于用户，提高推送结果精准度是现有技术中亟待解决的技术问。
通过公开专利检索，发现以下对比文件：
CN111061807A-公开了一种分布式数据采集分析系统及方法、服务器及介质，其通过不同的采集方式全面对数据进行采集，采用分布式架构有效的横向扩展数据量的增加，且kafka数据库高吞吐量优势满足直接数据采集和传输需求。数据提取单元采用脚本语言实现，能够在线及时修改调试，同时规则引擎子单元的使用能够动态分配数据,灵活性的数据分发为系统的扩展性提供了基础。
经分析，上述专利中的分布式数据采集分析系统与本申请相比，在实时计算功能等方面存在较大差异，因此不影响本申请的信用行。
发明内容
本发明的目的在于克服现有技术的不足之处，提供一种基于分布式实时计算的能源商品及能源需求的精准推送方法，该方法实现针对能源商品及能源需求的智能化、个性化、精准化的推送系统。帮助能源用户快速找到自己需要的能源商品，帮助能源服务商快速找到目标能源客户，促进供需双方合作，实现双方共赢。
一种基于分布式实时计算的能源商品及能源需求的精准推送方法，包括以下步骤：
步骤一：用户操作日志采集，负责采集用户在网页端或APP端产生的各类点击日志；
步骤二：数据缓冲，与日志采集部分对接，利用消息中间件接收并缓存日志消息，与实时计算部分对接，将日志消息传递给计算程序；
步骤三：混合分布式计算，将现有独立式的流计算与批计算融合为混合分布式计算，处理实时流数据的同时利用自定义累加器在内存中计算并维护批量数据统计指标，实时产生针对能源用户或能源服务商的推荐结果；
步骤四：数据存储，用于存储能源用户信息、能源服务商信息、商品信息、合同信息、日志信息、推荐结果信息，便于步骤一种的用户调取实用。
而且，步骤一中日志采集部分主要收集用户在系统网页及APP页面上的点击日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户搜索能源商品的日志、能源服务商搜索能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志、能源用户对能源商品评分的日志、能源用户对能源服务商评分的日志及能源用户发布能源需求的日志。
而且，步骤二中的数据缓冲部分利用Kafka消息中间件接收日志采集部分所产生的日志。
而且，步骤三中的流批一体化分布式计算同时使用Spark流处理及批处理算子，流处理算子负责拉取消息中间件中的实时数据并计算实时数据指标，批处理算子负责计算并维护批量数据统计指标，启动时批处理算子先从数据库中读取计算所需各种数据，主要包括：
(1)用户历史操作日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志；
(2)能源商品信息，包括能源商品ID、能源商品综合评分、能源商品价格；
(3)能源用户标签信息、标签对应的商品类型、能源用户名称。
而且，步骤四获取步骤三中数据后对其进行处理，并将处理结果保存在内存中，主要包括：
(1)基于历史点击或搜索日志，按照能源商品或能源需求、操作日志类型、用户名称、能源商品或能源需求类型进行聚合，统计能源用户针对能源商品的点击次数和搜索次数及能源服务商针对能源需求的点击次数和搜索次数；
(2)基于历史成交合同，按照能源商品或能源需求、能源用户或能源服务商ID、能源商品或能源需求类型，计算能源用户针对能源商品类型的平均消费金额、平均评分及能源服务商针对能源需求类型的平均得分。
而且，步骤四的历史数据处理完毕后，开始拉取Kafka中的实时日志消息，每隔一段时间间隔拉取一批消息并产生推荐结果，该时间间隔根据实际情况进行配置；根据日志中消息类型标记的不同进行不同的处理：
(1)点击或搜索日志类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计在该批次消息中能源用户点击和搜索各类能源商品的次数及能源服务商点击和搜索各类能源需求的次数；根据统计结果计算能源用户当前最感兴趣的能源商品类型，再根据能源用户对该能源商品类型的评分、能源用户平均消费金额及各个能源商品综合评分、价格，计算出能源用户当前可能最感兴趣的能源商品；同时将本批次统计的次数累加到历史总次数中，基于历史总次数再计算出能源用户历史最感兴趣的能源商品，基于用户标签计算出能源用户可能感兴趣的能源商品；对于能源服务商点击和搜索各类能源需求的次数只累加到历史总次数中，用于能源需求推荐；
(2)合同类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计该批次消息中能源用户对各类能源商品生成合同的金额及能源服务商对各类能源需求生成合同的次数，用于计算能源用户对各类能源品的平均消费金额、评分和能源服务商在各类能源需求的平均得分；
(3)能源需求类消息，根据能源服务商对各类需求点击和搜索次数，计算出对该类能源需求最感兴趣的能源服务商，再根据能源服务商在该类能源需求的得分筛选出推荐结果。
而且，步骤四的数据存储部分采用Oracle关系型数据库，主要存储内容包括：能源用户信息、能源服务商信息、商品信息、合同信息、日志信息及推荐结果信息。
本发明的优点和技术效果是：
本发明的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其优势在于：
(1)本方法采用分布式实时计算技术实现，基于用户实时操作日志，实时产生推送结果，具有较高的实时性。
(2)本方法基于能源用户产生的点击日志、合同日志等，针对用户自身兴趣产生个性化、精准化的推送结果。
(3)本方法推送的结果结果分多种类型，有基于能源用户实时日志产生的能源用户当前最感兴趣推送结果，有基于能源用户历史日志、合同产生的能源用户历史最感兴趣推送结果，有基于能源用户标签产生的标签推送结果。
(4)推送结果综合考虑了商品综合评分、商品价格、商品上架时间、用户对商品的个人评分、用户的消费水平等因素，推送结果更精准，更符合用户需求。
(5)能够将能源用户发出的能源需求，精准推送给能源服务商，撮合双方合作。
本发明的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，利用大数据分布式实时计算技术，根据能源用户操作日志、成交合同、用户标签等数据，实时计算出能源用户可能感兴趣的能源商品以及能源服务商可能满足的能源用户需求，并将能源商品推送给能源用户，将能源用户需求推送给能源服务商。
附图说明
图1为本发明数据流的结构示意图；
图2为本发明混合分布式计算示意图。
具体实施方式
为能进一步了解本发明的内容、特点及功效，兹例举以下实施例，并配合附图详细说明如下。需要说明的是，本实施例是描述性的，不是限定性的，不能由此限定本发明的保护范围。
一种基于分布式实时计算的能源商品及能源需求的精准推送方法，包括以下步骤：
步骤一：用户操作日志采集，负责采集用户在网页端或APP端产生的各类点击日志；
步骤二：数据缓冲，与日志采集部分对接，利用消息中间件接收并缓存日志消息，与实时计算部分对接，将日志消息传递给计算程序；
步骤三：混合分布式计算，将现有独立式的流计算与批计算融合为混合分布式计算，处理实时流数据的同时利用自定义累加器在内存中计算并维护批量数据统计指标，实时产生针对能源用户或能源服务商的推荐结果；
步骤四：数据存储，用于存储能源用户信息、能源服务商信息、商品信息、合同信息、日志信息、推荐结果信息，便于步骤一种的用户调取实用。
而且，步骤一中日志采集部分主要收集用户在系统网页及APP页面上的点击日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户搜索能源商品的日志、能源服务商搜索能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志、能源用户对能源商品评分的日志、能源用户对能源服务商评分的日志及能源用户发布能源需求的日志。
而且，步骤二中的数据缓冲部分利用Kafka消息中间件接收日志采集部分所产生的日志。
而且，步骤三中的流批一体化分布式计算同时使用Spark流处理及批处理算子，流处理算子负责拉取消息中间件中的实时数据并计算实时数据指标，批处理算子负责计算并维护批量数据统计指标，启动时批处理算子先从数据库中读取计算所需各种数据，主要包括：
(1)用户历史操作日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志；
(2)能源商品信息，包括能源商品ID、能源商品综合评分、能源商品价格；
(3)能源用户标签信息、标签对应的商品类型、能源用户名称。
而且，步骤四获取步骤三中数据后对其进行处理，并将处理结果保存在内存中，主要包括：
(1)基于历史点击或搜索日志，按照能源商品或能源需求、操作日志类型、用户名称、能源商品或能源需求类型进行聚合，统计能源用户针对能源商品的点击次数和搜索次数及能源服务商针对能源需求的点击次数和搜索次数；
(2)基于历史成交合同，按照能源商品或能源需求、能源用户或能源服务商ID、能源商品或能源需求类型，计算能源用户针对能源商品类型的平均消费金额、平均评分及能源服务商针对能源需求类型的平均得分。
而且，步骤四的历史数据处理完毕后，开始拉取Kafka中的实时日志消息，每隔一段时间间隔拉取一批消息并产生推荐结果，该时间间隔根据实际情况进行配置；根据日志中消息类型标记的不同进行不同的处理：
(1)点击或搜索日志类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计在该批次消息中能源用户点击和搜索各类能源商品的次数及能源服务商点击和搜索各类能源需求的次数；根据统计结果计算能源用户当前最感兴趣的能源商品类型，再根据能源用户对该能源商品类型的评分、能源用户平均消费金额及各个能源商品综合评分、价格，计算出能源用户当前可能最感兴趣的能源商品；同时将本批次统计的次数累加到历史总次数中，基于历史总次数再计算出能源用户历史最感兴趣的能源商品，基于用户标签计算出能源用户可能感兴趣的能源商品；对于能源服务商点击和搜索各类能源需求的次数只累加到历史总次数中，用于能源需求推荐；
(2)合同类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计该批次消息中能源用户对各类能源商品生成合同的金额及能源服务商对各类能源需求生成合同的次数，用于计算能源用户对各类能源品的平均消费金额、评分和能源服务商在各类能源需求的平均得分；
(3)能源需求类消息，根据能源服务商对各类需求点击和搜索次数，计算出对该类能源需求最感兴趣的能源服务商，再根据能源服务商在该类能源需求的得分筛选出推荐结果。
而且，步骤四的数据存储部分采用Oracle关系型数据库，主要存储内容包括：能源用户信息、能源服务商信息、商品信息、合同信息、日志信息及推荐结果信息。
为了更清楚地说明本发明的具体实施方式，下面提供一种实施例：
本发明数据流图如图1所示，具体步骤如下：
(1)前端日志采集程序记录用户的点击或搜索日志、生成合同日志、发布能源需求日志，并将日志以特定的JSON格式发送到Kafka消息中间件中的特定Topic。
(2)Kafka接收日志消息，并按照配置的分区和副本策略保存消息。
(3)Spark Streaming实时计算程序启动，首先读取计算所需各种数据，包括用户历史操作日志、能源商品信息、企业对应的标签信息、标签对应的商品类型、用户名称对应企业信息，并在读取完成后将数据处理成需要的格式。
(4)Spark Streaming实时计算程序连接Kafka，每隔特定时长拉取用户实时日志消息，并根据日志消息类型作相应处理做相应处理。
(5)根据点击或搜索型日志消息、历史统计结果、用户标签产生用户当前最感兴趣、历史最感兴趣及可能最感兴趣的能源商品推荐结果。
(6)根据合同型日志消息及点击或搜索型日志消息累加历史统计结果。
(7)根据能源需求型日志消息及历史统计结果产生能源需求推荐结果。
(8)Spark Streaming计算程序将产生的推荐结果写入Oracle数据库。
(9)前端页面拉取推荐结果并展示。
本实施样例为一个单独运行程序，该程序采用流批融合的分布式计算实现能源商品及需求的精准推送，其输出结果既有基于流式计算产生的用户当前最感兴趣的推荐数据，又有基于批量计算产生的用户综合最感兴趣的推荐数据。该程序通过流批融合克服了现有推荐系统的缺点：独立采用流式计算实现的推荐系统，其计算结果基于实时数据，存在片面性；独立采用批量计算实现的推荐系统，其计算结果基于过去较长一段时间内的批量数据，存在滞后性。
程序主体如下所示：
Figure BDA0003219993860000071
生产环境运行如下所示：
Figure BDA0003219993860000072
本系统初始化时与消息中间件Kafka建立实时数据流，同时会一次性读取目前已存在数据库的各类历史批量数据存入内存。
Figure BDA0003219993860000073
Figure BDA0003219993860000081
系统正常运行后，不断获取实时流数据，实时流数据进入流批融合数据处理流程，流批融合数据处理流程一是对实时流数据进行清洗、转换、提取、计算，基于实时流数据产生用户当前最感兴趣的推荐数据，二是利用自定义累加器将实时流数据与全量历史数据累加，基于批量数据计算相关统计指标并产生用户综合最感兴趣的推荐数据。
流批融合数据处理程序如下所示：
Figure BDA0003219993860000082
批量数据累加器如下所示：
Figure BDA0003219993860000083
处理流数据的同时累加数据并进行批量计算如下所示：
Figure BDA0003219993860000091
最后，本发明的未述之处均采用现有技术中的成熟产品及成熟技术手段。
应当理解的是，对本领域普通技术人员来说，可以根据上述说明加以改进或变换，而所有这些改进和变换都应属于本发明所附权利要求的保护范围。

Claims (7)

1.一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于，包括以下步骤：
步骤一：用户操作日志采集，负责采集用户在网页端或APP端产生的各类点击日志；
步骤二：数据缓冲，与日志采集部分对接，利用消息中间件接收并缓存日志消息，与实时计算部分对接，将日志消息传递给计算程序；
步骤三：混合分布式计算，将现有独立式的流计算与批计算融合为混合分布式计算，处理实时流数据的同时利用自定义累加器在内存中计算并维护批量数据统计指标，实时产生针对能源用户或能源服务商的推荐结果；
步骤四：数据存储，用于存储能源用户信息、能源服务商信息、商品信息、合同信息、日志信息、推荐结果信息，便于步骤一种的用户调取实用。
2.根据权利要求1所述的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于：所述步骤一中日志采集部分主要收集用户在系统网页及APP页面上的点击日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户搜索能源商品的日志、能源服务商搜索能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志、能源用户对能源商品评分的日志、能源用户对能源服务商评分的日志及能源用户发布能源需求的日志。
3.根据权利要求1所述的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于：所述步骤二中的数据缓冲部分利用Kafka消息中间件接收日志采集部分所产生的日志。
4.根据权利要求1所述的一种基于分布式计算的能源商品及需求精准推送实现方法，其特征在于：所述步骤三中的流批一体化分布式计算同时使用Spark流处理及批处理算子，流处理算子负责拉取消息中间件中的实时数据并计算实时数据指标，批处理算子负责计算并维护批量数据统计指标，启动时批处理算子先从数据库中读取计算所需各种数据，主要包括：
(1)用户历史操作日志，包括能源用户点击能源商品的日志、能源服务商点击能源需求的日志、能源用户生成能源商品合同的日志、能源服务商生成能源需求合同的日志；
(2)能源商品信息，包括能源商品ID、能源商品综合评分、能源商品价格；
(3)能源用户标签信息、标签对应的商品类型、能源用户名称。
5.根据权利要求1所述的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于：所述步骤四获取步骤三中数据后对其进行处理，并将处理结果保存在内存中，主要包括：
(1)基于历史点击或搜索日志，按照能源商品或能源需求、操作日志类型、用户名称、能源商品或能源需求类型进行聚合，统计能源用户针对能源商品的点击次数和搜索次数及能源服务商针对能源需求的点击次数和搜索次数；
(2)基于历史成交合同，按照能源商品或能源需求、能源用户或能源服务商ID、能源商品或能源需求类型，计算能源用户针对能源商品类型的平均消费金额、平均评分及能源服务商针对能源需求类型的平均得分。
6.根据权利要求5所述的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于：所述步骤四的历史数据处理完毕后，开始拉取Kafka中的实时日志消息，每隔一段时间间隔拉取一批消息并产生推荐结果，该时间间隔根据实际情况进行配置；根据日志中消息类型标记的不同进行不同的处理：
(1)点击或搜索日志类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计在该批次消息中能源用户点击和搜索各类能源商品的次数及能源服务商点击和搜索各类能源需求的次数；根据统计结果计算能源用户当前最感兴趣的能源商品类型，再根据能源用户对该能源商品类型的评分、能源用户平均消费金额及各个能源商品综合评分、价格，计算出能源用户当前可能最感兴趣的能源商品；同时将本批次统计的次数累加到历史总次数中，基于历史总次数再计算出能源用户历史最感兴趣的能源商品，基于用户标签计算出能源用户可能感兴趣的能源商品；对于能源服务商点击和搜索各类能源需求的次数只累加到历史总次数中，用于能源需求推荐；
(2)合同类消息，按照能源用户或能源服务商、能源商品类型或能源需求类型统计该批次消息中能源用户对各类能源商品生成合同的金额及能源服务商对各类能源需求生成合同的次数，用于计算能源用户对各类能源品的平均消费金额、评分和能源服务商在各类能源需求的平均得分；
(3)能源需求类消息，根据能源服务商对各类需求点击和搜索次数，计算出对该类能源需求最感兴趣的能源服务商，再根据能源服务商在该类能源需求的得分筛选出推荐结果。
7.根据权利要求1所述的一种基于分布式实时计算的能源商品及能源需求的精准推送方法，其特征在于：所述步骤四的数据存储部分采用Oracle关系型数据库，主要存储内容包括：能源用户信息、能源服务商信息、商品信息、合同信息、日志信息及推荐结果信息。
CN202110955296.2A 2021-08-19 2021-08-19 一种基于分布式实时计算的能源商品及能源需求的精准推送方法 Pending CN113852664A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110955296.2A CN113852664A (zh) 2021-08-19 2021-08-19 一种基于分布式实时计算的能源商品及能源需求的精准推送方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110955296.2A CN113852664A (zh) 2021-08-19 2021-08-19 一种基于分布式实时计算的能源商品及能源需求的精准推送方法

Publications (1)

Publication Number Publication Date
CN113852664A true CN113852664A (zh) 2021-12-28

Family

ID=78975616

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110955296.2A Pending CN113852664A (zh) 2021-08-19 2021-08-19 一种基于分布式实时计算的能源商品及能源需求的精准推送方法

Country Status (1)

Country Link
CN (1) CN113852664A (zh)

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120259474A1 (en) * 2011-04-11 2012-10-11 General Electric Company Systems and Methods for Analyzing Energy Usage
WO2018129787A1 (zh) * 2017-01-10 2018-07-19 网宿科技股份有限公司 一种流计算中数据持久化的方法和系统
CN110175788A (zh) * 2019-05-31 2019-08-27 国网上海市电力公司 一种智慧城市能源云平台
CN110658725A (zh) * 2019-08-19 2020-01-07 周口师范学院 一种基于人工智能的能源监管和预测系统及其方法
CN110717093A (zh) * 2019-08-27 2020-01-21 广东工业大学 一种基于Spark的电影推荐系统及方法
CN111061807A (zh) * 2019-11-23 2020-04-24 方正株式(武汉)科技开发有限公司 分布式数据采集分析系统及方法、服务器及介质
CN111209258A (zh) * 2019-12-31 2020-05-29 航天信息股份有限公司 税务端系统日志实时分析方法、设备、介质及系统
CN111708740A (zh) * 2020-06-16 2020-09-25 荆门汇易佳信息科技有限公司 基于云平台的海量搜索查询日志计算分析系统
CN112418941A (zh) * 2020-11-26 2021-02-26 欧冶云商股份有限公司 一种基于实时流的资源人气计算方法、系统及存储介质
CN112446517A (zh) * 2019-08-29 2021-03-05 华能碳资产经营有限公司 一种基于云技术的综合能源服务平台

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120259474A1 (en) * 2011-04-11 2012-10-11 General Electric Company Systems and Methods for Analyzing Energy Usage
WO2018129787A1 (zh) * 2017-01-10 2018-07-19 网宿科技股份有限公司 一种流计算中数据持久化的方法和系统
CN110175788A (zh) * 2019-05-31 2019-08-27 国网上海市电力公司 一种智慧城市能源云平台
CN110658725A (zh) * 2019-08-19 2020-01-07 周口师范学院 一种基于人工智能的能源监管和预测系统及其方法
CN110717093A (zh) * 2019-08-27 2020-01-21 广东工业大学 一种基于Spark的电影推荐系统及方法
CN112446517A (zh) * 2019-08-29 2021-03-05 华能碳资产经营有限公司 一种基于云技术的综合能源服务平台
CN111061807A (zh) * 2019-11-23 2020-04-24 方正株式(武汉)科技开发有限公司 分布式数据采集分析系统及方法、服务器及介质
CN111209258A (zh) * 2019-12-31 2020-05-29 航天信息股份有限公司 税务端系统日志实时分析方法、设备、介质及系统
CN111708740A (zh) * 2020-06-16 2020-09-25 荆门汇易佳信息科技有限公司 基于云平台的海量搜索查询日志计算分析系统
CN112418941A (zh) * 2020-11-26 2021-02-26 欧冶云商股份有限公司 一种基于实时流的资源人气计算方法、系统及存储介质

Similar Documents

Publication Publication Date Title
CN108154401B (zh) 用户画像刻画方法、装置、介质和计算设备
US8601004B1 (en) System and method for targeting information items based on popularities of the information items
CN102542474B (zh) 查询结果排序方法及装置
TWI539305B (zh) Personalized information push method and device
CN101359995B (zh) 提供在线服务的方法和装置
JP2013503391A (ja) 電子商取引ウェブサイトでの情報マッチングの方法及びシステム
US20140200988A1 (en) System and method for normalizing campaign data gathered from a plurality of advertising platforms
CN104254851A (zh) 用于向用户推荐内容的方法和系统
CN105447186A (zh) 一种基于大数据平台的用户行为分析系统
CN110232586B (zh) 一种基于大数据的广告推送系统
CN112269816B (zh) 一种政务预约事项相关性检索方法
CN112348602A (zh) 一种基于大数据的广告自动化投放管理系统
US20170068720A1 (en) Systems and methods for classifying data queries based on responsive data sets
CN110533467A (zh) 基于大数据分析的用户行为分析平台及其工作方法
CN111552885A (zh) 实现自动化实时消息推送运营的系统及其方法
WO2019205410A1 (zh) Nps短信调研方法、系统、计算机设备和存储介质
CN105808641A (zh) 线下资源的挖掘方法和装置
CN108965360A (zh) 一种推荐数据处理方法及服务器、计算机存储介质
CN100555283C (zh) 一种直接针对用户的相关信息的发布方法和系统
CN102521350A (zh) 基于历史点击数据的分布式信息检索集合选择方法
CN112561603A (zh) 一种基于用户实时行为的事件标签实现方法及其系统
US20150142782A1 (en) Method for associating metadata with images
CN113852664A (zh) 一种基于分布式实时计算的能源商品及能源需求的精准推送方法
CN111915154A (zh) 企业综合风险预警级别确定方法及装置
CN115563176A (zh) 一种电子商务数据处理系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination