CN114356579A - 内存缓存服务节点的分析方法、装置及服务器 - Google Patents

内存缓存服务节点的分析方法、装置及服务器 Download PDF

Info

Publication number
CN114356579A
CN114356579A CN202210027902.9A CN202210027902A CN114356579A CN 114356579 A CN114356579 A CN 114356579A CN 202210027902 A CN202210027902 A CN 202210027902A CN 114356579 A CN114356579 A CN 114356579A
Authority
CN
China
Prior art keywords
node
analysis result
service
target data
rdb
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210027902.9A
Other languages
English (en)
Inventor
杨冠飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kingsoft Cloud Network Technology Co Ltd
Original Assignee
Beijing Kingsoft Cloud Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kingsoft Cloud Network Technology Co Ltd filed Critical Beijing Kingsoft Cloud Network Technology Co Ltd
Priority to CN202210027902.9A priority Critical patent/CN114356579A/zh
Publication of CN114356579A publication Critical patent/CN114356579A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5011—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals
    • G06F9/5016—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resources being hardware resources other than CPUs, Servers and Terminals the resource being the memory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F11/00—Error detection; Error correction; Monitoring
    • G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
    • G06F11/14—Error detection or correction of the data by redundancy in operation
    • G06F11/1402—Saving, restoring, recovering or retrying
    • G06F11/1446—Point-in-time backing up or restoration of persistent data
    • G06F11/1448—Management of the data involved in backup or backup restore
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46—Multiprogramming arrangements
    • G06F9/50—Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005—Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027—Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明提供了一种内存缓存服务节点的分析方法、装置及服务器，包括：如果接收到针对内存缓存服务的节点分析请求，从内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个数据节点均包括一个或多个键值数据对象；生成目标数据节点对应的RDB备份文件；对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果；其中，节点分析结果至少包括目标数据节点中目标键值数据对象的统计信息；将节点分析结果发送至指定关联终端，以通过指定关联终端的图形用户界面提供节点分析结果。本发明可以有效通过节点分析结果辅助用户拆分大key，显著降低拆分大key对用户经验的依赖性和拆分难度。

Description

内存缓存服务节点的分析方法、装置及服务器
技术领域
本发明涉及数据存储技术领域，尤其是涉及一种内存缓存服务节点的分析方法、装置及服务器。
背景技术
用户在使用Redis(Remote Dictionary Server，即远程字典服务)的过程中可能产生大key，当用户查询大key对应数据时，将导致查询数据量较大，甚至可能致使出现查询超时的情况，严重影响用户体验。目前，通常需要用户人工对大key进行拆分，以避免查询超时的情况，然而对大key进行拆分的过程较为依赖用户经验，导致拆分大key难度较大。
发明内容
有鉴于此，本发明的目的在于提供一种内存缓存服务节点的分析方法、装置及服务器，可以有效通过节点分析结果辅助用户拆分大key，显著降低拆分大key对用户经验的依赖性和拆分难度。
第一方面，本发明实施例提供了一种内存缓存服务节点的分析方法，包括：如果接收到针对内存缓存服务的节点分析请求，从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个所述数据节点均包括一个或多个键值数据对象；生成所述目标数据节点对应的RDB备份文件；对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果至少包括所述目标数据节点中目标键值数据对象的统计信息；将所述节点分析结果发送至指定关联终端，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
在一种实施方式中，所述方法应用于服务器，所述内存缓存服务部署在所述服务器上，所述内存缓存服务包括主Redis服务和从Redis服务；所述从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点的步骤，包括：从所述从Redis服务包含的至少一个数据节点中确定待分析的目标数据节点。
在一种实施方式中，所述服务器还部署有trove服务组件和管理服务组件；所述生成所述目标数据节点对应的RDB备份文件的步骤，包括：如果所述trove服务组件接收到节点备份请求，通过所述管理服务组件向所述从Redis服务发送备份指令，以对所述目标数据节点进行备份操作，得到所述目标数据节点对应的RDB备份文件。
在一种实施方式中，所述对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果的步骤，包括：通过所述管理服务组件调用解析工具，并利用所述解析工具对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果包括所述目标键值数据对象的数量信息、占用信息、分布信息和过期信息，所述目标键值数据对象包括满足预设条件的键值数据对象，所述预设条件包括元素数量条件和/或内存条件。
在一种实施方式中，所述服务器还部署有数据传输服务组件；所述将所述节点分析结果发送至指定关联终端的步骤，包括：将所述节点分析结果保存至指定存储路径；利用所述数据传输服务组件从所述指定存储路径读取所述节点分析结果；利用所述数据传输服务组件将所述节点分析结果和节点信息关联上传至所述指定关联终端，并删除所述指定存储路径中存储的所述节点分析结果。
在一种实施方式中，所述指定关联终端部署有搜索服务组件；所述通过所述指定关联终端的图形用户界面提供所述节点分析结果的步骤，包括：通过所述搜索服务组件接收查询请求，并基于所述查询请求携带的节点信息查找所述节点分析结果，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
在一种实施方式中，所述节点信息包括所述内存缓存服务的服务标识、所述目标数据节点的节点标识、所述目标数据节点的实例标识、所述RDB备份文件的创建时间。
第二方面，本发明实施例还提供一种内存缓存服务节点的分析装置，包括：节点确定模块，用于如果接收到针对内存缓存服务的节点分析请求，从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个所述数据节点均包括一个或多个键值数据对象；文件生成模块，用于生成所述目标数据节点对应的RDB备份文件；分析模块，用于对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果至少包括所述目标数据节点中目标键值数据对象的统计信息；发送模块，用于将所述节点分析结果发送至指定关联终端，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
第三方面，本发明实施例还提供一种服务器，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的计算机可执行指令，所述处理器执行所述计算机可执行指令以实现第一方面提供的任一项所述的方法。
第四方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现第一方面提供的任一项所述的方法。
本发明实施例提供的一种内存缓存服务节点的分析方法、装置及服务器，如果接收到针对内存缓存服务的节点分析请求，从内存缓存服务包含的至少一个数据节点(包括一个或多个键值数据对象)中确定待分析的目标数据节点，并生成目标数据节点对应的RDB备份文件，通过对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果(至少包括目标数据节点中目标键值数据对象的统计信息)，最后将节点分析结果发送至指定关联终端，以通过指定关联终端的图形用户界面提供节点分析结果。上述方法可以在接受到节点分析请求时确定出目标数据节点以及生成相应的RDB备份文件，然后对该RDB备份文件执行解析操作，即可得到包含有目标键值数据对象的统计信息的节点分析结果，将该节点分析结果发送至指定关联终端进行展示，可以有效通过节点分析结果辅助用户拆分目标键值数据对象，显著降低拆分目标键值数据对象对用户经验的依赖性和拆分难度。
本发明的其他特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点在说明书、权利要求书以及附图中所特别指出的结构来实现和获得。
为使本发明的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种内存缓存服务节点的分析方法的流程示意图；
图2为本发明实施例提供的一种内存缓存服务节点的分析方法的框架示意图；
图3为本发明实施例提供的另一种内存缓存服务节点的分析方法的流程示意图；
图4为本发明实施例提供的另一种内存缓存服务节点的分析方法的流程示意图；
图5为本发明实施例提供的一种内存缓存服务节点的分析装置的结构示意图；
图6为本发明实施例提供的一种服务器的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合实施例对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
目前，对大key进行拆分的过程较为依赖用户经验，导致拆分大key难度较大，基于此，本发明实施提供了一种内存缓存服务节点的分析方法、装置及服务器，可以有效通过节点分析结果辅助用户拆分大key，显著降低拆分大key对用户经验的依赖性和拆分难度。
为便于对本实施例进行理解，首先对本发明实施例所公开的一种内存缓存服务节点的分析方法进行详细介绍，参见图1所示的一种内存缓存服务节点的分析方法的流程示意图，该方法主要包括以下步骤S102至步骤S108：
步骤S102，如果接收到针对内存缓存服务的节点分析请求，从内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点。其中，每个数据节点均包括一个或多个键值数据对象(也可称之为，key)。在实际应用中，如果内存缓存服务采用主从模式，则可以判断从Redis服务所包含的数据节点是否存在大key，将存在大key的数据节点确定为目标数据节点；如果内存缓存服务采用集群模式，将判断每个数据节点是否存在大key，并将存在大key的数据节点均确定为目标数据节点。
步骤S104，生成目标数据节点对应的RDB(Relational Database，关系数据库)备份文件。在一种实施方式中，可以通过trove服务组件调用slave节点生成目标数据节点对应的RDB备份文件。
步骤S106，对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果。其中，节点分析结果至少包括目标数据节点中目标键值数据对象的统计信息，目标键值数据对象(也可称之为，大key)包括满足预设条件的键值数据对象，预设条件包括元素数量条件和/或内存条件。例如，当键值数据对象所包含元素的元素数量大于数量阈值时，确定该键值数据数据对象满足预设条件，将确定该键值数据对象为目标键值数据对象，或当键值数据对象的内存大于内存阈值时，确定该键值数据数据对象满足预设条件，将确定该键值数据对象为目标键值数据对象。上述统计信息可以包括目标键值数据对象的数量信息、占用信息、分布信息和过期信息，在一种实施方式中，可以利用管理服务(Guestagent)组件对RDB备份文件执行解析操作，即可得到目标数据节点中每个目标键值数据对象的统计信息。
步骤S108，将节点分析结果发送至指定关联终端，以通过指定关联终端的图形用户界面提供节点分析结果。其中，指定关联终端也可称之为控制端，可以包括个人电脑、智能手机、平板电脑等设备。在一种实施方式中，可以先将节点分析结果保存至指定存储路径，当指定关联终端接收到节点分析结果后，即可将指定存储路径中存储的节点分析结果删除，用户可通过指定关联终端搜索所需的节点分析结果，并通过指定关联终端的图形用户界面展示该节点分析结果。
本发明实施例提供的上述内存缓存服务节点的分析方法，可以在接受到节点分析请求时确定出目标数据节点以及生成相应的RDB备份文件，然后对该RDB备份文件执行解析操作，即可得到包含有目标键值数据对象的统计信息的节点分析结果，将该节点分析结果发送至指定关联终端进行展示，可以有效通过节点分析结果辅助用户拆分目标键值数据对象，显著降低拆分目标键值数据对象对用户经验的依赖性和拆分难度。
为便于对前述实施例进行理解，本发明实施例还提供了如图2所示的一种内存缓存服务节点的分析方法的框架示意图，图2示意出VIP(Virtual IP Address，虚拟IP地址)对应多个代理proxy，每个代理proxy均可以提供Redis服务，VIP用于对代理proxy提供负载均衡LB(Load Balance)功能。
在一种实施方式中，上述方法应用于服务器，且Redis服务部署在服务器上，内存缓存服务包括主Redis服务和从Redis服务，主Redis服务主要用于对外提供读写服务，从Redis服务用于从主Redis服务中及时同步数据。考虑到从Redis服务压力较小，因此在执行从内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点的步骤时，可以在从Redis服务包含的至少一个数据节点中确定待分析的目标数据节点。在一种实施方式中，可以通过指定终端设备的图形用户界面提供缓存分析功能对应的控件，指定终端设备响应针对于该控件的操作生成并向服务器发送节点分析请求，服务器将判断每个数据节点所包含的key中是否存在满足上述预设条件的大key，当数据节点包含一个或多个大key时，便将该数据节点确定为目标数据节点。
在一种实施方式中，服务器还部署有trove服务组件和管理服务(Guestagent)组件。基于此，本发明实施例提供了一种生成目标数据节点对应的RDB备份文件的实施方式，如果trove服务组件接收到节点备份请求，通过管理服务组件向从Redis服务发送备份指令，以对目标数据节点进行备份操作，得到目标数据节点对应的RDB备份文件。其中，备份指令可以为bgsave指令。在实际应用，考虑到从Redis服务压力较小，因此可以基于从Redis服务生成RDB备份文件，具体的，trove服务组件中存储有主Redis服务和从Redis服务的对应关系，Guestagent组件通过发送bgsave指令给从Redis服务，以生成RDB备份文件。
本发明实施例还提供了一种生成目标数据节点对应的RDB备份文件的应用示例，参见图3所示的另一种内存缓存服务节点的分析方法的流程示意图，该方法主要包括以下步骤S302至步骤S308：
步骤S302，指定终端设备响应针对于缓存分析功能控件的操作，向服务器发送节点分析请求。
步骤S304，服务器选择目标数据节点。
步骤S306，trove服务组件请求生成目标数据节点对应的RDB备份文件。
步骤S308，Guestagent组件调用slave节点发送bgsave指令生成RDB备份文件。
本发明实施例还提供了一种对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果的实施方式，可以通过管理服务组件调用解析工具，并利用解析工具对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果。示例性的，节点分析结果可以包括以下信息：已使用内存、已使用内存比例、key数量、已过期key数量、已过期key数量比例、已过期key占用内存、已过期key占用内存比例、永不过期key数量、永不过期key占用内存。节点分析结果还可以包括以下信息：各类型key数量、各类型key占用内存和各类型key内存占用比例，其中，key类型可以包括string类型、list类型、hash类型、set类型和zset类型。另外，节点分析结果还可以包括以下信息：元素数量位于前100的key，内存大小位于前100的key，还可进一步统计前100个key中每个key的内存占用、编码、elements数量、过期时间、所属db(data base，数据库)等。
在一种实施方式中，上述服务器还部署有数据传输服务(Filebeat)组件。基于此，本发明实施例还提供了一种将节点分析结果发送至指定关联终端的实施方式：(1)将节点分析结果保存至指定存储路径；(2)利用数据传输服务组件从指定存储路径读取节点分析结果；(3)利用数据传输服务组件将节点分析结果和节点信息关联上传至指定关联终端，并删除指定存储路径中存储的节点分析结果。在实际应用中，考虑到再次对Redis服务的数据节点进行分析时，还会将节点分析结果保存至该指定存储路径，为避免指定存储路径的存储资源浪费，可以在指定关联终端接收到节点分析结果时，删除掉指定存储路径内的节点分析结果。
另外，上述指定关联终端部署有搜索服务(Elasticsearch)组件。在实际应用中，可以通过指定关联终端的搜索服务组件接收查询请求，并基于查询请求携带的节点信息查找节点分析结果，以通过指定关联终端的图形用户界面提供节点分析结果。其中，节点信息包括内存缓存服务的服务标识(Clusterid信息)、目标数据节点的节点标识(Shardid信息)、目标数据节点的实例标识(Instanceid信息)、RDB备份文件的创建时间(Rdbtime信息)。
本发明实施例还提供了一种将节点分析结果上传至Elasticsearch组件的应用示例，参见图4所示的另一种内存缓存服务节点的分析方法的流程示意图，该方法主要包括以下步骤S402至步骤S406：
步骤S402，Guestagent组件调用RDB解析工具生成节点分析结果，并将节点分析结果存储至指定存储路径。
步骤S404，Filebeat组件监听到节点分析结果存储至指定存储路径时，将上传节点分析结果至Elasticsearch组件。节点解析结果携带有上述节点信息。
步骤S406，Filebeat组件上传节点分析结果完毕后，调用RDB解析工具删除指定存储路径中存储的节点分析结果。
综上所述，本发明实施例提供的上述内存缓存服务节点的分析方法，通过缓存分析功能来分析Redis服务的rdb备份文件，可以快速发现实例中的大key，辅助用户掌握key在内存中的占用和分布、key过期时间等信息，为用户的优化操作提供数据支持，帮助用户避免因Key倾斜引发的内存不足、性能下降等问题。
对于前述实施例提供的内存缓存服务节点的分析方法，本发明实施例还提供了一种内存缓存服务节点的分析装置，参见图5所示的一种内存缓存服务节点的分析装置的结构示意图，该装置主要包括以下部分：
节点确定模块502，用于如果接收到针对内存缓存服务的节点分析请求，从内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个数据节点均包括一个或多个键值数据对象；
文件生成模块504，用于生成目标数据节点对应的RDB备份文件；
分析模块506，用于对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果；其中，节点分析结果至少包括目标数据节点中目标键值数据对象的统计信息；
发送模块508，用于将节点分析结果发送至指定关联终端，以通过指定关联终端的图形用户界面提供节点分析结果。
本发明实施例提供的上述内存缓存服务节点的分析装置，可以在接受到节点分析请求时确定出目标数据节点以及生成相应的RDB备份文件，然后对该RDB备份文件执行解析操作，即可得到包含有目标键值数据对象的统计信息的节点分析结果，将该节点分析结果发送至指定关联终端进行展示，可以有效通过节点分析结果辅助用户拆分目标键值数据对象，显著降低拆分目标键值数据对象对用户经验的依赖性和拆分难度。
在一种实施方式中，方法应用于服务器，内存缓存服务部署在服务器上，内存缓存服务包括主Redis服务和从Redis服务；节点确定模块502还用于：从Redis服务包含的至少一个数据节点中确定待分析的目标数据节点。
在一种实施方式中，服务器还部署有trove服务组件和管理服务组件；文件生成模块504还用于：如果trove服务组件接收到节点备份请求，通过管理服务组件向从Redis服务发送备份指令，以对目标数据节点进行备份操作，得到目标数据节点对应的RDB备份文件。
在一种实施方式中，分析模块506还用于：通过管理服务组件调用解析工具，并利用解析工具对RDB备份文件执行解析操作，得到目标数据节点对应的节点分析结果；其中，节点分析结果包括目标键值数据对象的数量信息、占用信息、分布信息和过期信息，目标键值数据对象包括满足预设条件的键值数据对象，预设条件包括元素数量条件和/或内存条件。
在一种实施方式中，服务器还部署有数据传输服务组件；发送模块508还用于：将节点分析结果保存至指定存储路径；利用数据传输服务组件从指定存储路径读取节点分析结果；利用数据传输服务组件将节点分析结果和节点信息关联上传至指定关联终端，并删除指定存储路径中存储的节点分析结果。
在一种实施方式中，指定关联终端部署有搜索服务组件；发送模块508还用于：通过搜索服务组件接收查询请求，并基于查询请求携带的节点信息查找节点分析结果，以通过指定关联终端的图形用户界面提供节点分析结果。
在一种实施方式中，节点信息包括内存缓存服务的服务标识、目标数据节点的节点标识、目标数据节点的实例标识、RDB备份文件的创建时间。
本发明实施例所提供的装置，其实现原理及产生的技术效果和前述方法实施例相同，为简要描述，装置实施例部分未提及之处，可参考前述方法实施例中相应内容。
本发明实施例提供了一种服务器，具体的，该服务器包括处理器和存储器；存储器上存储有计算机程序，计算机程序在被所述处理器运行时执行如上所述实施方式的任一项所述的方法。
图6为本发明实施例提供的一种服务器的结构示意图，该服务器100包括：处理器60，存储器61，总线62和通信接口63，所述处理器60、通信接口63和存储器61通过总线62连接；处理器60用于执行存储器61中存储的可执行模块，例如计算机程序。
其中，存储器61可能包含高速随机存取存储器(RAM，Random Access Memory)，也可能还包括非不稳定的存储器(non-volatile memory)，例如至少一个磁盘存储器。通过至少一个通信接口63(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接，可以使用互联网，广域网，本地网，城域网等。
总线62可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图6中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。
其中，存储器61用于存储程序，所述处理器60在接收到执行指令后，执行所述程序，前述本发明实施例任一实施例揭示的流过程定义的装置所执行的方法可以应用于处理器60中，或者由处理器60实现。
处理器60可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器60中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器60可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(Digital SignalProcessing，简称DSP)、专用集成电路(Application Specific Integrated Circuit，简称ASIC)、现成可编程门阵列(Field-Programmable Gate Array，简称FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器61，处理器60读取存储器61中的信息，结合其硬件完成上述方法的步骤。
本发明实施例所提供的可读存储介质的计算机程序产品，包括存储了程序代码的计算机可读存储介质，所述程序代码包括的指令可用于执行前面方法实施例中所述的方法，具体实现可参见前述方法实施例，在此不再赘述。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本发明的具体实施方式，用以说明本发明的技术方案，而非对其限制，本发明的保护范围并不局限于此，尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本发明实施例技术方案的精神和范围，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种内存缓存服务节点的分析方法，其特征在于，包括：
如果接收到针对内存缓存服务的节点分析请求，从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个所述数据节点均包括一个或多个键值数据对象；
生成所述目标数据节点对应的RDB备份文件；
对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果至少包括所述目标数据节点中目标键值数据对象的统计信息；
将所述节点分析结果发送至指定关联终端，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
2.根据权利要求1所述的方法，其特征在于，所述方法应用于服务器，所述内存缓存服务部署在所述服务器上，所述内存缓存服务包括主Redis服务和从Redis服务；
所述从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点的步骤，包括：
从所述从Redis服务包含的至少一个数据节点中确定待分析的目标数据节点。
3.根据权利要求2所述的方法，其特征在于，所述服务器还部署有trove服务组件和管理服务组件；
所述生成所述目标数据节点对应的RDB备份文件的步骤，包括：
如果所述trove服务组件接收到节点备份请求，通过所述管理服务组件向所述从Redis服务发送备份指令，以对所述目标数据节点进行备份操作，得到所述目标数据节点对应的RDB备份文件。
4.根据权利要求3所述的方法，其特征在于，所述对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果的步骤，包括：
通过所述管理服务组件调用解析工具，并利用所述解析工具对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果包括所述目标键值数据对象的数量信息、占用信息、分布信息和过期信息，所述目标键值数据对象包括满足预设条件的键值数据对象，所述预设条件包括元素数量条件和/或内存条件。
5.根据权利要求2所述的方法，其特征在于，所述服务器还部署有数据传输服务组件；
所述将所述节点分析结果发送至指定关联终端的步骤，包括：
将所述节点分析结果保存至指定存储路径；
利用所述数据传输服务组件从所述指定存储路径读取所述节点分析结果；
利用所述数据传输服务组件将所述节点分析结果和节点信息关联上传至所述指定关联终端，并删除所述指定存储路径中存储的所述节点分析结果。
6.根据权利要求5所述的方法，其特征在于，所述指定关联终端部署有搜索服务组件；
所述通过所述指定关联终端的图形用户界面提供所述节点分析结果的步骤，包括：
通过所述搜索服务组件接收查询请求，并基于所述查询请求携带的节点信息查找所述节点分析结果，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
7.根据权利要求6所述的方法，其特征在于，所述节点信息包括所述内存缓存服务的服务标识、所述目标数据节点的节点标识、所述目标数据节点的实例标识、所述RDB备份文件的创建时间。
8.一种内存缓存服务节点的分析装置，其特征在于，包括：
节点确定模块，用于如果接收到针对内存缓存服务的节点分析请求，从所述内存缓存服务包含的至少一个数据节点中确定待分析的目标数据节点；其中，每个所述数据节点均包括一个或多个键值数据对象；
文件生成模块，用于生成所述目标数据节点对应的RDB备份文件；
分析模块，用于对所述RDB备份文件执行解析操作，得到所述目标数据节点对应的节点分析结果；其中，所述节点分析结果至少包括所述目标数据节点中目标键值数据对象的统计信息；
发送模块，用于将所述节点分析结果发送至指定关联终端，以通过所述指定关联终端的图形用户界面提供所述节点分析结果。
9.一种服务器，其特征在于，包括处理器和存储器，所述存储器存储有能够被所述处理器执行的计算机可执行指令，所述处理器执行所述计算机可执行指令以实现权利要求1至7任一项所述的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令在被处理器调用和执行时，计算机可执行指令促使处理器实现权利要求1至7任一项所述的方法。
CN202210027902.9A 2022-01-11 2022-01-11 内存缓存服务节点的分析方法、装置及服务器 Pending CN114356579A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210027902.9A CN114356579A (zh) 2022-01-11 2022-01-11 内存缓存服务节点的分析方法、装置及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210027902.9A CN114356579A (zh) 2022-01-11 2022-01-11 内存缓存服务节点的分析方法、装置及服务器

Publications (1)

Publication Number Publication Date
CN114356579A true CN114356579A (zh) 2022-04-15

Family

ID=81109795

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210027902.9A Pending CN114356579A (zh) 2022-01-11 2022-01-11 内存缓存服务节点的分析方法、装置及服务器

Country Status (1)

Country Link
CN (1) CN114356579A (zh)

Similar Documents

Publication Publication Date Title
CA2896865C (en) Method and system for using a recursive event listener on a node in hierarchical data structure
US8171008B2 (en) Data retrieval
CN111367925A (zh) 数据动态实时更新方法、装置及存储介质
CN110445828B (zh) 一种基于Redis的数据分布式处理方法及其相关设备
CN111782692B (zh) 一种频率控制方法及装置
CN111859132A (zh) 一种数据处理方法、装置及智能设备、存储介质
CN111930770A (zh) 数据查询方法、装置及电子设备
US20220284020A1 (en) Data processing method, apparatus, and system
CN114168847A (zh) 数据查询的方法、装置、电子设备及存储介质
CN114461247A (zh) 热更新方法、装置、电子设备和计算机可读介质
CN110955460B (zh) 一种服务进程启动方法、装置、电子设备和存储介质
CN117130979A (zh) 一种业务资源的迁移方法、装置及电子设备
CN116841978A (zh) 基于分布式文件系统的路径解析方法、装置及存储介质
CN114356579A (zh) 内存缓存服务节点的分析方法、装置及服务器
CN112860720B (zh) 一种存储容量的更新方法以及装置
US20240195860A1 (en) Sample message processing method and apparatus
CN113411364B (zh) 资源获取方法、装置及服务器
CN109739883B (zh) 提升数据查询性能的方法、装置和电子设备
CN112131263A (zh) 软件包获取方法、系统、装置、电子设备和存储介质
CN111782479A (zh) 日志处理方法、装置、电子设备及计算机可读存储介质
CN117573397B (zh) 内存优化方法、系统和存储介质
CN117478535B (zh) 一种日志存储的方法和装置
CN115510091A (zh) 一种话单数据处理方法、装置、电子设备及存储介质
CN117215759A (zh) 应用于推荐系统的对象特征的确定方法及服务器
CN116450725A (zh) 用于执行数据库操作的方法、装置、电子设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination