CN112631871A - 行为消息的处理方法、装置、存储介质及电子设备 - Google Patents
行为消息的处理方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN112631871A CN112631871A CN202011596039.6A CN202011596039A CN112631871A CN 112631871 A CN112631871 A CN 112631871A CN 202011596039 A CN202011596039 A CN 202011596039A CN 112631871 A CN112631871 A CN 112631871A
- Authority
- CN
- China
- Prior art keywords
- behavior message
- behavior
- storage unit
- message
- server
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title abstract description 7
- 230000006399 behavior Effects 0.000 claims abstract description 266
- 238000012545 processing Methods 0.000 claims abstract description 75
- 238000012544 monitoring process Methods 0.000 claims abstract description 45
- 238000000034 method Methods 0.000 claims description 58
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 4
- 230000008707 rearrangement Effects 0.000 abstract description 28
- 230000009471 action Effects 0.000 description 20
- 230000008569 process Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000000694 effects Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 238000012827 research and development Methods 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/30—Monitoring
- G06F11/3065—Monitoring arrangements determined by the means or processing involved in reporting the monitored data
- G06F11/3072—Monitoring arrangements determined by the means or processing involved in reporting the monitored data where the reporting involves data filtering, e.g. pattern matching, time or event triggered, adaptive or policy-based reporting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2228—Indexing structures
- G06F16/2255—Hash tables
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/80—Database-specific techniques
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Debugging And Monitoring (AREA)
Abstract
本申请公开了一种行为消息的处理方法、装置、存储介质及电子设备，属于计算机技术领域。所述行为消息的处理方法包括：收点服务器接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。故本申请中收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
Description
技术领域
本发明涉及计算机技术领域，具体涉及一种行为消息的处理方法、装置、存储介质及电子设备。
背景技术
目前，对于客户端监控场景，互联网上的海量客户端会把每次对服务器请求的唯一身份标识号(Identity document，ID)即全链路跟踪标志(traceID)发送给监控系统，由于客户端请求超时等情况，客户端重试，这时服务端收到的traceId可能是重复的，由于客户端监控上报的数据量属于高并发场景的海量数据，从而会造成在监控系统存储上的极大浪费。现有技术中收点服务端每次收到用户请求，先查询远程字典服务(RemoteDictionary Server，redis)，判断该traceID是否存在，如果不存在，把traceID写入redis，再把该消息发送给监控系统；如果存在，说明之前已收到该请求，然后抛弃该请求。但如果在业务高峰时段，redis为了抗住高并发的请求量，需要大量的redis服务器，需要很多成本，同时对于高并发场景下降低了收点服务的吞吐量。因此如何高效、低成本解决海量高并发场景的traceID排查问题是目前亟待解决的问题。
发明内容
本申请实施例提供了一种行为消息的处理方法、装置、存储介质及电子设备，通过使用内存数据结构来对traceID进行排重处理，提高了排重效率，降低了项目成本。所述技术方案如下：
第一方面，本申请实施例提供了一种行为消息的处理方法，包括：
接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
对所述跟踪标识进行哈希运算得到哈希值；
根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
在所述收点服务器集群中确定所述模值对应的目标收点服务器；
将所述行为消息转发给所述目标收点服务器。
第二方面，本申请实施例提供了一种行为消息的处理另一方法，包括：
接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
根据所述跟踪标识在存储单元中进行排重处理；
若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
第三方面，本申请实施例提供了一种行为消息的处理装置，所述装置包括：
接收模块，用于接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
计算模块，用于对所述跟踪标识进行哈希运算得到哈希值；
求模模块，用于根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
确定模块，用于在所述收点服务器集群中确定所述模值对应的目标收点服务器；
转发模块，用于将所述行为消息转发给所述目标收点服务器。
第四方面，本申请实施例提供了一种行为消息的处理另一装置，所述装置包括：
接收模块，用于接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
排重模块，用于根据所述跟踪标识在存储单元中进行排重处理；
发送模块，用于若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
第五方面，本申请实施例提供了一种计算机存储介质，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行上述的方法步骤。
第六方面，本申请实施例提供了一种电子设备，包括：存储器和处理器；其中，所述存储器存储有计算机程序，所述计算机程序适用于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括：
上述行为消息的处理方法、装置、存储介质及电子设备工作时，负载均衡服务器接收来自终端设备的行为消息，对所述跟踪标识进行哈希运算得到哈希值，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，在所述收点服务器集群中确定所述模值对应的目标收点服务器，将所述行为消息转发给所述目标收点服务器。收点服务器接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种行为消息的处理系统的架构示意图；
图2是本申请实施例提供的一种行为消息的处理方法的第一流程示意图；
图3是本申请实施例提供的一种行为消息的处理装置的结构示意图；
图4是本申请实施例提供的一种行为消息的处理方法的第二流程示意图；
图5是本申请实施例提供的一种行为消息的处理方法的第三流程示意图；
图6是本申请实施例提供的一种行为消息的处理装置的另一结构示意图；
图7是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述设计附图时，除非另有表示，不同附图中的相同数字表示相同的或相似的要素。以下示例性实施例中描述的实施方式并不代表与本申请相一致的所有实施方式。相反，它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请的描述中，需要理解的是，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
为了解决上述提到的现有技术在业务高峰时段，redis为了抗住高并发的请求量，需要大量的redis服务器，需要很多成本，同时对于高并发场景下降低了收点服务的吞吐量的问题，特提出了一种行为消息的处理方法，本申请实施例方法可依赖于计算机程序实现，可运行于基于冯诺依曼体系且安装有摄像头或可旋转摄像头的计算机系统上。该计算机系统可以是智能手机、笔记本电脑、平板电脑等设备的计算机系统。
在下述方法实施例中，为了便于说明，仅以各步骤的执行主体为负载均衡服务器进行介绍说明。
下面将结合附图2，对本申请实施例提供的行为消息的处理方法进行详细介绍。
请参见图1，为本申请实施例提供的一种行为消息的处理系统的架构示意图。如图1所示，所述行为消息的处理系统中主要包括终端设备、收点服务器和监控服务器，终端设备包括安卓Android终端设备、苹果IOS终端设备、浏览器Web终端设备和电脑PC终端设备等客户端，用于向收点服务器发送行为消息(对服务端的请求结果，例如：请求成功返回值，请求超时或请求异常等)，收点服务器用于对所述行为消息中的traceID进行排重检测，然后上报给监控服务器，监控服务器把这些数据做图形化展示，这样研发人员就可以再监控系统上知道客户端的运行状态。
请参见图2，为本申请实施例提供了一种行为消息的处理方法的第一流程示意图。所述方法可以包括以下步骤：
S201、接收来自终端设备的行为消息。
一般的，负载均衡服务器是指建立在现有网络结构之上，提供了一种廉价有效透明的方法扩展网络设备和服务器的带宽、增加吞吐量、加强网络数据处理能力、提高网络的灵活性和可用性的服务器。行为消息是指终端设备对服务端设备的行为请求结果，例如：请求成功返回值、请求超时和请求异常等，其中，所述行为消息携带跟踪标识和行为数据。负载均衡服务器首先获取所述终端设备的网际互联协议IP地址和端口信息，基于所述IP地址和所述端口信息与所述终端设备建立连接链路，或获取所述收点服务器集群中的服务器的名称信息，其中，所述名称信息包括IP地址和编号，基于所述名称信息生成服务器列表，基于所述服务器列表与所述收点服务器集群中的服务器建立连接链路。然后负载均衡服务器通过与所述终端设备建立连接链路接收来自终端设备的行为消息。
S202、对所述跟踪标识进行哈希运算得到哈希值。
一般的，负载均衡服务器接收来自终端设备的行为消息后，解析所述行为消息获取跟踪标识，对所述跟踪标识进行哈希运算得到哈希值，例如：负载均衡服务器得到的跟踪标识为13d9800c8c7944c78a06，运算得到哈希值为a4d8180ddbfb8ab09d77eb31cb573b5f7d54ce92。
S203、根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值。
一般的，负载均衡服务器得到哈希值后，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，例如：负载均衡服务器获取收点服务器集群中的服务器数量为10，得到的哈希值为1201212，进行求模运算得到模值为2。
S204、在所述收点服务器集群中确定所述模值对应的目标收点服务器。
一般的，负载均衡服务器得到模值后，在所述收点服务器集群中确定所述模值对应的目标收点服务器，例如：负载均衡服务器进行求模运算得到模值为2，则确定收点服务器集群中编号为2的服务器作为目标收点服务器。
S205、将所述行为消息转发给所述目标收点服务器。
一般的，负载均衡服务器确定所述模值对应的目标收点服务器后，将所述行为消息转发给所述目标收点服务器。
由上述内容可知，接收来自终端设备的行为消息，对所述跟踪标识进行哈希运算得到哈希值，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，在所述收点服务器集群中确定所述模值对应的目标收点服务器，将所述行为消息转发给所述目标收点服务器。负载均衡服务器通过向收点服务器上报行为消息，然后负载均衡服务器进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
请参见图3，其示出了本申请一个示例性实施例提供的行为消息的处理装置的结构示意图，以下简称处理装置3。处理装置3可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。包括：
接收模块301，用于接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
计算模块302，用于对所述跟踪标识进行哈希运算得到哈希值；
求模模块303，用于根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
确定模块304，用于在所述收点服务器集群中确定所述模值对应的目标收点服务器；
转发模块305，用于将所述行为消息转发给所述目标收点服务器。
可选地，所述接收模块301，还包括：
连接单元，用于获取所述终端设备的网际互联协议IP地址和端口信息；基于所述IP地址和所述端口信息与所述终端设备建立连接链路；或获取所述收点服务器集群中的服务器的名称信息；其中，所述名称信息包括IP地址和编号；基于所述名称信息生成服务器列表；基于所述服务器列表与所述收点服务器集群中的服务器建立连接链路。
本申请实施例和图2的方法实施例基于同一构思，其带来的技术效果也相同，具体过程可参照图2的方法实施例的描述，此处不再赘述。
所述装置3可以为实现相关功能的现场可编程门阵列(field-programmable gatearray，FPGA)，专用集成芯片，系统芯片(system on chip，SoC)，中央处理器(centralprocessor unit，CPU)，网络处理器(network processor，NP)，数字信号处理电路，微控制器(micro controller unit，MCU)，还可以采用可编程控制器(programmable logicdevice，PLD)或其他集成芯片。
本申请实施例的方案在执行时，接收来自终端设备的行为消息，对所述跟踪标识进行哈希运算得到哈希值，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，在所述收点服务器集群中确定所述模值对应的目标收点服务器，将所述行为消息转发给所述目标收点服务器。负载均衡服务器通过向收点服务器上报行为消息，然后负载均衡服务器进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
在下述方法实施例中，为了便于说明，仅以各步骤的执行主体为收点服务器进行介绍说明。
请参见图4，为本申请实施例提供了一种行为消息的处理方法的第二流程示意图。所述方法可以包括以下步骤：
S401、接收来自负载均衡服务器的行为消息。
一般的，所述行为消息携带跟踪标识和行为数据。收点服务器通过与负载均衡服务器建立的连接链路接收来自负载均衡服务器的行为消息，例如：接收到日志消息。
S402、根据所述跟踪标识在存储单元中进行排重处理。
一般的，收点服务器接收来自负载均衡服务器的行为消息后，对所述跟踪标识进行哈希运算得到哈希值，将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息，若为是，则确定所述存储单元中存在所述跟踪标识对应的行为消息，若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
S403、若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
一般的，收点服务器根据所述跟踪标识在存储单元中进行排重处理后，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。在一个实施例中，收点服务器将所述行为消息写入到存储单元中包括：解析所述行为消息获取所述跟踪标识和所述行为数据，基于所述跟踪标识生成关键字，基于所述行为数据生成所述关键字对应的值，将所述关键字和所述关键字对应的值存储到数据结构哈希表中。在一个实施例中，收点服务器在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息，将该行为消息发送给监控系统，以及删除该行为消息，或在所述存储单元中查询访问次数最少的行为消息，将该行为消息发送给监控系统，以及删除该行为消息。在一个实施例中，收点服务器若所述存储单元中存在所述跟踪标识对应的行为消息时，将所述行为消息丢弃。
由上述内容可知，接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
请参见图5，为本申请实施例提供了一种行为消息的处理方法的第三流程示意图。该行为消息的处理方法可以包括以下步骤：
S501、接收来自负载均衡服务器的行为消息。
一般的，所述行为消息携带跟踪标识和行为数据。收点服务器通过与负载均衡服务器建立的连接链路接收来自负载均衡服务器的行为消息，例如：接收到日志文件消息、请求结果消息等。
S502、对所述跟踪标识进行哈希运算得到哈希值，将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息。
一般的，收点服务器接收来自负载均衡服务器的行为消息后，解析所述行为消息，获取所述跟踪标识，对所述跟踪标识进行哈希运算得到哈希值，将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息，例如：收点服务器获取跟踪标识为123456，则得到哈希值为d4541250b586296fcce5dea4463ae17f，然后收点服务器，确定哈希值为d4541250b586296fcce5dea4463ae17f的对应的存储地址，在所述存储单元中查询所述存储地址是否存在行为消息。
S503、若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
一般的，收点服务器在所述存储单元中查询所述存储地址是否存在行为消息后，查询结果若为是，则确定所述存储单元中存在所述跟踪标识对应的行为消息，查询结果若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
S504、若所述存储单元中不存在所述跟踪标识对应的行为消息时，解析所述行为消息获取所述跟踪标识和所述行为数据。
一般的，收点服务器得到的查询结果若为否，即若所述存储单元中不存在所述跟踪标识对应的行为消息时，解析所述行为消息获取所述跟踪标识和所述行为数据，例如：收点服务器接收所述行为消息，进行解析得到所述跟踪标识为234567，所述行为数据为日志文件。
S505、在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息。
一般的，收点服务器获取所述跟踪标识和所述行为数据后，首先需要确定存储单元中的存储容量，在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息，例如：收点服务器中的存储单元的剩余容量为0.1M，小于容量阈值1M，则在所述存储单元中查询存储时长最大的行为消息为第675号行为消息。
S506、将该行为消息发送给监控系统，以及删除该行为消息。
一般的，收点服务器查询存储时长最大的行为消息后，将该行为消息发送给监控系统，以及删除该行为消息，例如：收点服务器确定第345号行为消息为存储时长最大的行为消息，则将第345号行为消息上报给监控系统，然后删除所述第345号行为消息，释放所述存储单元的空间，若剩余容量还不满足条件，继续释放所述存储单元空间。在一个实施例中，收点服务器在所述存储单元中查询访问次数最少的行为消息，将该行为消息发送给监控系统，以及删除该行为消息，这样来释放所述存储单元的空间。
S507、基于所述跟踪标识生成关键字，基于所述行为数据生成所述关键字对应的值。
一般的，收点服务器确定所述存储单元的剩余容量满足条件时，基于所述跟踪标识生成关键字，基于所述行为数据生成所述关键字对应的值，例如：将所述跟踪标识654321作为关键字Key，将所述行为数据为0.2M的日志文件作为对应的值Value。
S508、将所述关键字和所述关键字对应的值存储到数据结构哈希表中，以及将所述行为消息发送给监控系统。
一般的，收点服务器生成所述关键字对应的值后，将所述关键字和所述关键字对应的值存储到数据结构哈希表中，例如：收点服务器存储到数据结构LRUHashMap中，其中，收点服务器获取数据结构LinkedHashMap，确定所述LinkedHashMap的应用程序接口API，通过软件开发工具包JDK对所述API进行处理生成线程安全的LRUHashMap。最后，收点服务器将所述行为消息发送给监控系统进行展示。在一个实施例中，收点服务器在所述存储单元中存在所述跟踪标识对应的行为消息时，将所述行为消息丢弃，不进行存储和上报。
本申请实施例的方案在执行时，接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
下述为本申请装置实施例，可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节，请参照本申请方法实施例。
请参见图6，其示出了本申请一个示例性实施例提供的行为消息的处理另一装置的结构示意图，以下简称处理装置6。处理装置6可以通过软件、硬件或者两者的结合实现成为终端的全部或一部分。包括：
接收模块601，用于接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
排重模块602，用于根据所述跟踪标识在存储单元中进行排重处理；
发送模块603，用于若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
可选地，所述排重模块602，还包括：
判断单元，用于对所述跟踪标识进行哈希运算得到哈希值；将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息；若为是，则确定所述存储单元中存在所述跟踪标识对应的行为消息；若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
可选地，所述发送模块603，还包括：
解析单元，用于解析所述行为消息获取所述跟踪标识和所述行为数据；基于所述跟踪标识生成关键字；基于所述行为数据生成所述关键字对应的值；将所述关键字和所述关键字对应的值存储到数据结构哈希表中。
删除单元，用于在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息；将该行为消息发送给监控系统，以及删除该行为消息；或在所述存储单元中查询访问次数最少的行为消息；将该行为消息发送给监控系统，以及删除该行为消息。
丢弃单元，用于若所述存储单元中存在所述跟踪标识对应的行为消息时，将所述行为消息丢弃。
本申请实施例和图4至图5的方法实施例基于同一构思，其带来的技术效果也相同，具体过程可参照图4至图5的方法实施例的描述，此处不再赘述。
所述装置6可以为实现相关功能的现场可编程门阵列(field-programmable gatearray，FPGA)，专用集成芯片，系统芯片(system on chip，SoC)，中央处理器(centralprocessor unit，CPU)，网络处理器(network processor，NP)，数字信号处理电路，微控制器(micro controller unit，MCU)，还可以采用可编程控制器(programmable logicdevice，PLD)或其他集成芯片。
本申请实施例的方案在执行时，负载均衡服务器接收来自终端设备的行为消息，对所述跟踪标识进行哈希运算得到哈希值，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，在所述收点服务器集群中确定所述模值对应的目标收点服务器，将所述行为消息转发给所述目标收点服务器。收点服务器接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
本申请实施例还提供了一种计算机存储介质，所述计算机存储介质可以存储有多条指令，所述指令适于由处理器加载并执行如上述的方法步骤，具体执行过程可以参见图2或图4或图5所示实施例的具体说明，在此不进行赘述。
本申请还提供了一种计算机程序产品，该计算机程序产品存储有至少一条指令，所述至少一条指令由所述处理器加载并执行以实现如上各个实施例所述的模板的控制方法。
请参见图7，为本申请实施例提供了一种电子设备的结构示意图。如图7所示，所述电子设备7可以包括：至少一个处理器701，至少一个网络接口704，用户接口703，存储器705，至少一个通信总线702。
其中，通信总线702用于实现这些组件之间的连接通信。
其中，用户接口703可以包括显示屏(Display)、摄像头(Camera)，可选用户接口703还可以包括标准的有线接口、无线接口。
其中，网络接口704可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中，处理器701可以包括一个或者多个处理核心。处理器701利用各种借口和线路连接整个终端700内的各个部分，通过运行或执行存储在存储器705内的指令、程序、代码集或指令集，以及调用存储在存储器705内的数据，执行终端700的各种功能和处理数据。可选的，处理器701可以采用数字信号处理(Digital Signal Processing，DSP)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、可编程逻辑阵列(Programmable LogicArray，PLA)中的至少一种硬件形式来实现。处理器701可集成中央处理器(CentralProcessing Unit，CPU)、图像处理器(Graphics Processing Unit，GPU)和调制解调器等中的一种或几种的组合。其中，CPU主要处理操作系统、用户界面和应用程序等；GPU用于负责显示屏所需要显示的内容的渲染和绘制；调制解调器用于处理无线通信。可以理解的是，上述调制解调器也可以不集成到处理器701中，单独通过一块芯片进行实现。
其中，存储器705可以包括随机存储器(Random Access Memory，RAM)，也可以包括只读存储器(Read-Only Memory)。可选的，该存储器705包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器705可用于存储指令、程序、代码、代码集或指令集。存储器705可包括存储程序区和存储数据区，其中，存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等；存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器705可选的还可以是至少一个位于远离前述处理器701的存储装置。如图7所示，作为一种计算机存储介质的存储器705中可以包括操作系统、网络通信模块、用户接口模块以及行为消息的处理应用程序。
在图7所示的电子设备700中，用户接口703主要用于为用户提供输入的接口，获取用户输入的数据。
实施例一：
在执行主体为负载均衡服务器时，处理器701可以用于调用存储器705中存储的行为消息的处理应用程序，并具体执行以下操作：
接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
对所述跟踪标识进行哈希运算得到哈希值；
根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
在所述收点服务器集群中确定所述模值对应的目标收点服务器；
将所述行为消息转发给所述目标收点服务器。
在一个实施例中，处理器701执行所述接收来自终端设备的行为消息之前，还包括：
获取所述终端设备的网际互联协议IP地址和端口信息；
基于所述IP地址和所述端口信息与所述终端设备建立连接链路；或
获取所述收点服务器集群中的服务器的名称信息；其中，所述名称信息包括IP地址和编号；
基于所述名称信息生成服务器列表；
基于所述服务器列表与所述收点服务器集群中的服务器建立连接链路。
实施例二：
在执行主体为收点服务器时，处理器701可以用于调用存储器705中存储的行为消息的处理应用程序，并具体执行以下操作：
接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
根据所述跟踪标识在存储单元中进行排重处理；
若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
在一个实施例中，处理器701执行所述根据所述跟踪标识在存储单元中进行排重处理，包括：
对所述跟踪标识进行哈希运算得到哈希值；
将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息；
若为是，则确定所述存储单元中存在所述跟踪标识对应的行为消息；
若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
在一个实施例中，处理器701执行所述将所述行为消息写入到存储单元中，包括：
解析所述行为消息获取所述跟踪标识和所述行为数据；
基于所述跟踪标识生成关键字；
基于所述行为数据生成所述关键字对应的值；
将所述关键字和所述关键字对应的值存储到数据结构哈希表中。
在一个实施例中，处理器701执行所述将所述行为消息写入到存储单元中，还包括：
在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息；
将该行为消息发送给监控系统，以及删除该行为消息；或
在所述存储单元中查询访问次数最少的行为消息；
将该行为消息发送给监控系统，以及删除该行为消息。
在一个实施例中，处理器701执行所述操作还包括：
若所述存储单元中存在所述跟踪标识对应的行为消息时，将所述行为消息丢弃。
本申请实施例的技术构思和图2或图4或图5的技术构思相同，具体过程可参照图2或图4或图5的方法实施例，此处不再赘述。
在本申请实施例中，负载均衡服务器接收来自终端设备的行为消息，对所述跟踪标识进行哈希运算得到哈希值，根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值，在所述收点服务器集群中确定所述模值对应的目标收点服务器，将所述行为消息转发给所述目标收点服务器。收点服务器接收来自负载均衡服务器的行为消息，根据所述跟踪标识在存储单元中进行排重处理，若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。收点服务器通过接收来自负载均衡服务器上报的行为消息，进行排重处理后，将行为消息发送到监控系统，通过使用内存数据结构来对行为消息进行排重处理，提高了排重效率，降低了项目成本。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已，当然不能以此来限定本申请之权利范围，因此依本申请权利要求所作的等同变化，仍属本申请所涵盖的范围。
Claims (11)
1.一种行为消息的处理方法，其特征在于，所述方法包括：
接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
对所述跟踪标识进行哈希运算得到哈希值；
根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
在所述收点服务器集群中确定所述模值对应的目标收点服务器；
将所述行为消息转发给所述目标收点服务器。
2.根据权利要求1所述方法，其特征在于，所述接收来自终端设备的行为消息之前，还包括：
获取所述终端设备的网际互联协议IP地址和端口信息；
基于所述IP地址和所述端口信息与所述终端设备建立连接链路；或
获取所述收点服务器集群中的服务器的名称信息；其中，所述名称信息包括IP地址和编号；
基于所述名称信息生成服务器列表；
基于所述服务器列表与所述收点服务器集群中的服务器建立连接链路。
3.一种行为消息的处理方法，其特征在于，所述方法包括：
接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
根据所述跟踪标识在存储单元中进行排重处理；
若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
4.根据权利要求3所述方法，其特征在于，所述根据所述跟踪标识在存储单元中进行排重处理，包括：
对所述跟踪标识进行哈希运算得到哈希值；
将所述哈希值作为存储地址，在所述存储单元中查询所述存储地址是否存在行为消息；
若为是，则确定所述存储单元中存在所述跟踪标识对应的行为消息；
若为否，则确定所述存储单元中不存在所述跟踪标识对应的行为消息。
5.根据权利要求3所述方法，其特征在于，所述将所述行为消息写入到存储单元中，包括：
解析所述行为消息获取所述跟踪标识和所述行为数据；
基于所述跟踪标识生成关键字；
基于所述行为数据生成所述关键字对应的值；
将所述关键字和所述关键字对应的值存储到数据结构哈希表中。
6.根据权利要求3所述方法，其特征在于，所述将所述行为消息写入到存储单元中，还包括：
在所述存储单元的剩余容量小于容量阈值时，在所述存储单元中查询存储时长最大的行为消息；
将该行为消息发送给监控系统，以及删除该行为消息；或
在所述存储单元中查询访问次数最少的行为消息；
将该行为消息发送给监控系统，以及删除该行为消息。
7.根据权利要求3所述方法，其特征在于，还包括：
若所述存储单元中存在所述跟踪标识对应的行为消息时，将所述行为消息丢弃。
8.一种行为消息的处理装置，其特征在于，包括：
接收模块，用于接收来自终端设备的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
计算模块，用于对所述跟踪标识进行哈希运算得到哈希值；
求模模块，用于根据收点服务器集群中的服务器数量对所述哈希值进行求模运算得到模值；
确定模块，用于在所述收点服务器集群中确定所述模值对应的目标收点服务器；
转发模块，用于将所述行为消息转发给所述目标收点服务器。
9.一种行为消息的处理装置，其特征在于，包括：
接收模块，用于接收来自负载均衡服务器的行为消息；其中，所述行为消息携带跟踪标识和行为数据；
排重模块，用于根据所述跟踪标识在存储单元中进行排重处理；
发送模块，用于若所述存储单元中不存在所述跟踪标识对应的行为消息时，将所述行为消息写入到存储单元中，以及将所述行为消息发送给监控系统。
10.一种计算机存储介质，其特征在于，所述计算机存储介质存储有多条指令，所述指令适于由处理器加载并执行如权利要求1～7任意一项的方法步骤。
11.一种电子设备，其特征在于，包括：存储器和处理器；其中，所述存储器存储有计算机程序，所述计算机程序适用于由所述处理器加载并执行如权利要求1～7任意一项的方法步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011596039.6A CN112631871A (zh) | 2020-12-28 | 2020-12-28 | 行为消息的处理方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011596039.6A CN112631871A (zh) | 2020-12-28 | 2020-12-28 | 行为消息的处理方法、装置、存储介质及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112631871A true CN112631871A (zh) | 2021-04-09 |
Family
ID=75286731
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011596039.6A Pending CN112631871A (zh) | 2020-12-28 | 2020-12-28 | 行为消息的处理方法、装置、存储介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112631871A (zh) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017112771A1 (en) * | 2015-12-23 | 2017-06-29 | Rovi Guides, Inc. | Methods and systems for detecting overlaps between calendar appointments and media asset transmission times |
| CN106921554A (zh) * | 2015-12-24 | 2017-07-04 | 北京新媒传信科技有限公司 | 消息传输方法及装置 |
| CN109976896A (zh) * | 2019-04-09 | 2019-07-05 | 中国联合网络通信集团有限公司 | 业务排重处理方法和装置 |
| CN111010342A (zh) * | 2019-11-21 | 2020-04-14 | 天津卓朗科技发展有限公司 | 一种分布式负载均衡实现方法及装置 |
-
2020
- 2020-12-28 CN CN202011596039.6A patent/CN112631871A/zh active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2017112771A1 (en) * | 2015-12-23 | 2017-06-29 | Rovi Guides, Inc. | Methods and systems for detecting overlaps between calendar appointments and media asset transmission times |
| CN106921554A (zh) * | 2015-12-24 | 2017-07-04 | 北京新媒传信科技有限公司 | 消息传输方法及装置 |
| CN109976896A (zh) * | 2019-04-09 | 2019-07-05 | 中国联合网络通信集团有限公司 | 业务排重处理方法和装置 |
| CN111010342A (zh) * | 2019-11-21 | 2020-04-14 | 天津卓朗科技发展有限公司 | 一种分布式负载均衡实现方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110471749B (zh) | 任务处理方法、装置、计算机可读存储介质和计算机设备 | |
| CN111314433B (zh) | 消息传输方法、装置及电子设备 | |
| CN110019873B (zh) | 人脸数据处理方法、装置及设备 | |
| CN111193633B (zh) | 异常网络连接的检测方法及装置 | |
| CN112925661A (zh) | 消息处理方法、装置、计算机设备及存储介质 | |
| CN112261094A (zh) | 一种报文处理方法及代理服务器 | |
| CN111737022A (zh) | 一种基于微服务的接口调用方法、系统、设备及介质 | |
| CN111221793A (zh) | 数据挖掘方法、平台、计算机设备及存储介质 | |
| CN111694866A (zh) | 数据搜索及存储方法、数据搜索系统、装置、设备及介质 | |
| CN111200606A (zh) | 深度学习模型任务处理方法、系统、服务器及存储介质 | |
| CN109788251B (zh) | 视频处理方法、装置及存储介质 | |
| CN109710502B (zh) | 日志传输方法、装置及存储介质 | |
| CN114040189A (zh) | 多媒体测试方法、装置、存储介质及电子设备 | |
| CN113157480A (zh) | 错误信息处理方法、装置、存储介质以及终端 | |
| CN114793223A (zh) | Dns记录的存储方法、装置、存储介质及电子设备 | |
| CN112506490A (zh) | 一种接口生成方法、装置、电子设备及存储介质 | |
| CN112631871A (zh) | 行为消息的处理方法、装置、存储介质及电子设备 | |
| CN113190237B (zh) | 数据处理方法、系统和装置 | |
| CN114356713A (zh) | 线程池监控方法、装置、电子设备及存储介质 | |
| CN113157475A (zh) | 日志处理方法、装置、存储介质及电子设备 | |
| CN113742099A (zh) | 基于集合的消息消费方法、生产方法、系统及存储介质 | |
| CN109614137B (zh) | 软件版本控制方法、装置、设备和介质 | |
| CN113568687A (zh) | 展示Web页面的方法、相关设备和计算机可读存储介质 | |
| CN116541416B (zh) | 一种请求数据的优化处理方法及装置 | |
| CN113849255B (zh) | 一种数据处理方法、设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |