CN115118706A - 一种节点日志下载方法、装置、设备及介质 - Google Patents
一种节点日志下载方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN115118706A CN115118706A CN202210753530.8A CN202210753530A CN115118706A CN 115118706 A CN115118706 A CN 115118706A CN 202210753530 A CN202210753530 A CN 202210753530A CN 115118706 A CN115118706 A CN 115118706A
- Authority
- CN
- China
- Prior art keywords
- log
- node
- downloaded
- downloading
- web service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 72
- 238000004590 computer program Methods 0.000 claims description 13
- 230000008569 process Effects 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 6
- 230000014509 gene expression Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001052 transient effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请公开了一种节点日志下载方法、装置、设备及介质,涉及分布式存储技术领域。该方法应用于服务端,包括:接收下载请求;根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;根据节点列表开启子节点的WEB服务;通过WEB服务下载待下载日志。由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
Description
技术领域
本申请涉及分布式存储技术领域,特别是涉及一种节点日志下载方法、装置、设备及介质。
背景技术
随着与日剧增的计算机数据量,在现有的分布式存储技术的存储管理方案中,服务端中只有主节点能够支持WEB服务。在用户需要下载非主节点(一般也成为子节点)上记录的日志时,需要将非主节点上的日志拷贝至主节点,在主节点将收集到的非主节点的压缩为一个日志,再通过主节点的WEB服务将压缩后的日志下载至客户端。此时,导致主节点处理日志的负载压力过大,同时日志的下载时间过长,降低用户使用体验感。
鉴于上述存在的问题,寻求如何提升用户体验感是本领域技术人员竭力解决的问题。
发明内容
本申请的目的是提供一种节点日志下载方法、装置、设备及介质,用于降低主节点过大的负载压力,消除将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
为解决上述技术问题,本申请提供一种节点日志下载方法,应用于服务端,包括:
接收下载请求;
根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;
根据节点列表开启子节点的WEB服务;
通过WEB服务下载待下载日志。
优选地,在根据下载请求确定待下载日志的节点列表之后,在根据节点列表开启子节点的WEB服务之前,还包括:
根据节点列表中存储的子节点建立下载任务;
判断是否成功建立下载任务;
若是,则生成日志汇总目录,日志汇总目录用于存储全部待下载日志;
若否,则返回至根据下载请求确定待下载日志的节点列表的步骤。
优选地,在生成日志汇总目录之后,还包括:
压缩日志汇总目录。
优选地,在根据节点列表开启子节点的WEB服务之后,在通过WEB服务下载待下载日志之前,还包括:
设置下载任务的预设进度;
判断下载任务的进度是否达到预设进度;
若是,则进入通过WEB服务下载待下载日志的步骤;
若否,则结束。
优选地,在通过WEB服务下载待下载日志之后,还包括:
判断待下载日志是否下载完成;
若是,则关闭WEB服务;
若否,则返回至通过WEB服务下载待下载日志的步骤。
为解决上述技术问题,本申请还提供了一种节点日志下载方法,应用于客户端,包括:
发送下载请求,用于根据下载请求确定待下载日志的节点列表,以便于根据节点列表开启子节点的WEB服务,其中节点列表中存储待下载日志对应的子节点;
接收通过WEB服务下载的待下载日志。
为解决上述技术问题,本申请还提供了一种节点日志下载装置,应用于服务端,包括:
第一接收模块,用于接收下载请求;
确定模块,用于根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;
开启模块,用于根据节点列表开启子节点的WEB服务;
下载模块,用于通过WEB服务下载待下载日志。
此外,应用于服务端的节点日志下载装置还包括以下模块:
建立模块,用于根据节点列表中存储的子节点建立下载任务;
第一判断模块,用于判断是否成功建立下载任务;
若是,则进入生成模块,用于生成日志汇总目录,日志汇总目录用于存储全部待下载日志;
若否,则返回至确定模块。
压缩模块,用于压缩日志汇总目录。
设置模块,用于设置下载任务的预设进度;
第二判断模块,用于判断下载任务的进度是否达到预设进度;
若是,则进入下载模块;
若否,则结束。
第三判断模块,用于判断待下载日志是否下载完成;
若是,则进入关闭模块,用于关闭WEB服务;
若否,则返回至下载模块。
为解决上述技术问题,本申请还提供了一种节点日志下载装置,应用于客户端,包括:
发送模块,用于发送下载请求,用于根据下载请求确定待下载日志的节点列表,以便于根据节点列表开启子节点的WEB服务,其中节点列表中存储待下载日志对应的子节点;
第二接收模块,用于接收通过WEB服务下载的待下载日志。
为解决上述技术问题,本申请还提供了一种节点日志下载设备,包括:
存储器,用于存储计算机程序;
处理器,用于指向计算机程序,实现节点日志下载方法的步骤。
为解决上述技术问题,本申请还提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时,实现上述全部节点日志下载方法的步骤。
本申请所提供的一种节点日志下载方法,应用于服务端,包括:接收下载请求;根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;根据节点列表开启子节点的WEB服务;通过WEB服务下载待下载日志。由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
本申请还提供了一种节点日志下载装置、设备和介质,效果同上。
附图说明
为了更清楚地说明本申请实施例,下面将对实施例中所需要使用的附图做简单的介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例所提供的一种应用于服务端的节点日志下载方法流程图;
图2为本申请实施例所提供的一种应用于客户端的节点日志下载方法流程图;
图3为本申请实施例所提供的一种应用于服务端的节点日志下载装置结构图;
图4为本申请实施例所提供的一种应用于客户端的节点日志下载装置结构图;
图5为本申请实施例所提供的一种节点日志下载设备结构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下,所获得的所有其他实施例,都属于本申请保护范围。
本申请的核心是提供一种节点日志下载方法、装置、设备及介质,其能够降低主节点过大的负载压力,消除将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
为了使本技术领域的人员更好地理解本申请方案,下面结合附图和具体实施方式对本申请作进一步的详细说明。
图1为本申请实施例所提供的一种应用于服务端的节点日志下载方法流程图。如图1所示,该节点日志下载方法,应用于服务端,包括:
S10:接收下载请求。
需要说明的是,下载请求可以一次性建立多个下载请求,也可以是一次性只建立一个下载请求。但下载请求只可以建立一次,若想要增加下载请求的个数,则需要从头来过。本实施例中的下载请求可以通过二进制数据来表示,对于二进制的位数不作限定,可以是1位、2位、4位、8位等等;还可以通过文字形式表示,可以是“下载成功”、“开始下载”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“0”、“01”、“0110”、“11011001”等等,需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对下载请求的表示方法做出限定,可根据具体实施场景确定其实施方式。
S11:根据下载请求确定待下载日志的节点列表。
其中节点列表中存储待下载日志对应的子节点。与上述提及的下载请求想类似,节点列表可以通过枚举的方式记录子节点,还可以通过摘选的方式记录子节点。子节点可以通过二进制数据来表示,对于二进制的位数不作限定,可以是2位、4位、8位等等;还可以通过文字形式表示,可以是“第一子节点”、“待下载日志的子节点”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“11”、“0110”、“11011001”等等,可以理解的是,当子节点数量较少且使用二进制数据表示子节点时,2位的二进制数据只能表示4个子节点,n位的二进制数据能表示2 n个子节点。需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对记录子节点的方式做出限定,可根据具体实施场景确定其实施方式。
S12:根据节点列表开启子节点的WEB服务。
在本申请中,关于开启子节点的信息,可以通过二进制数据来触发,对于二进制的位数不作限定,可以是1位、2位、4位、8位等等;还可以通过文字形式表示,可以是“开启”、“启动”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“0”、“01”、“0110”、“11011001”等等,需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对开启子节点的信息做出限定,可根据具体实施场景确定其实施方式。
S13:通过WEB服务下载待下载日志。
本申请所提供的一种节点日志下载方法,应用于服务端,包括:接收下载请求;根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;根据节点列表开启子节点的WEB服务;通过WEB服务下载待下载日志。由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。需要说明的是,本申请所提供的节点日志下载方法可以多个子节点并行下载节点日志。
在上述实施例的基础上,作为一种更优选的实施例,在根据下载请求确定待下载日志的节点列表之后,在根据节点列表开启子节点的WEB服务之前,还包括:
根据节点列表中存储的子节点建立下载任务;
判断是否成功建立下载任务;
若是,则生成日志汇总目录,日志汇总目录用于存储全部待下载日志;
若否,则返回至根据下载请求确定待下载日志的节点列表的步骤。
在本实施例中,将节点列表中存储的子节点,建立下载任务,而不是全部的子节点都建立下载任务,是为了节约存储空间以及减少资源消耗。其次,通过判断是否成功建立下载任务,能够避免在未成功建立下载任务的情况下,对资源的浪费。还需要说明的是,为了便于管理多个子节点对应的下载任务,可以将多个下载任务收集到一个任务组中。日志汇总目录还可以存储全部待下载日志的IP信息,根据IP信息开启子节点的WEB服务。
在上述实施例的基础上,作为一种更优选的实施例,在生成日志汇总目录之后,还包括:
压缩日志汇总目录。
由于最终的目标是需要下载节点日志,为了给节点日志留下更多的存储空间,因此需要将日志汇总目录压缩。避免由于未压缩日志汇总目录,进而导致节点日志存储空间不足,不能获取节点日志,也就意味着不能下载节点日志的情况。
在上述实施例的基础上,作为一种更优选的实施例,在根据节点列表开启子节点的WEB服务之后,在通过WEB服务下载待下载日志之前,还包括:
设置下载任务的预设进度;
判断下载任务的进度是否达到预设进度;
若是,则进入通过WEB服务下载待下载日志的步骤;
若否,则结束。
为了使用户直观的了解下载任务进行进度,设置了预设进度。需要说明的是,以预设进度为40%为例,前40%的任务是在收集个子节点的节点日志,并将节点日志进行压缩。无论节点日志的容量大还是小,都有40%的任务对节点日志进行压缩。为了使得较大的节点日志也能完成压缩,可以预先计算全部子节点中最大的节点日志,以最大的节点日志的容量设置预设进度。
在上述实施例的基础上,作为一种更优选的实施例,在通过WEB服务下载待下载日志之后,还包括:
判断待下载日志是否下载完成;
若是,则关闭WEB服务;
若否,则返回至通过WEB服务下载待下载日志的步骤。
在本实施例中,为了降低下载日过程中的功率消耗,需要判断待下载日志是否下载完成。可以理解的是,可以通过设置预设时间,以轮询的方式判断待下载日志是否下载完成;还能以实时判断的方式判断下载是否完成。需要说明的是,预设时间可以设置为1s、1min等等,上述提及的预设时间仅为众多实施例中的几种,对于预设时间并不起到限定作用,可根据具体实施场景确定其实施方式。同时,关闭WEB服务也就表示,即使还有需要下载的节点日志,因为WEB服务关闭,也不能继续下载。
此外,当出现故障情况为:WEB服务关闭不能继续下载节点日志,但还有部分节点日志未下载完成,此时,可以记录下载进度,待故障完善后,继续按照之前的进度继续下载。
图2为本申请实施例所提供的一种应用于客户端的节点日志下载方法流程图。如图2所示,该节点日志下载方法,应用于客户端,包括:
S20:发送下载请求。
根据下载请求确定待下载日志的节点列表,以便于根据节点列表开启子节点的WEB服务,其中节点列表中存储待下载日志对应的子节点。需要说明的是,本实施例中的下载请求可以通过二进制数据来表示,对于二进制的位数不作限定,可以是1位、2位、4位、8位等等;还可以通过文字形式表示,可以是“下载成功”、“开始下载”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“0”、“01”、“0110”、“11011001”等等,需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对下载请求的表示方法做出限定,可根据具体实施场景确定其实施方式。
其中节点列表中存储待下载日志对应的子节点。与上述提及的下载请求想类似,节点列表可以通过枚举的方式记录子节点,还可以通过摘选的方式记录子节点。子节点可以通过二进制数据来表示,对于二进制的位数不作限定,可以是2位、4位、8位等等;还可以通过文字形式表示,可以是“第一子节点”、“待下载日志的子节点”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“11”、“0110”、“11011001”等等,可以理解的是,当子节点数量较少且使用二进制数据表示子节点时,2位的二进制数据只能表示4个子节点,n位的二进制数据能表示2 n个子节点。需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对记录子节点的方式做出限定,可根据具体实施场景确定其实施方式。
在本申请中,关于开启子节点的信息,可以通过二进制数据来触发,对于二进制的位数不作限定,可以是1位、2位、4位、8位等等;还可以通过文字形式表示,可以是“开启”、“启动”等等字样。其中,当用二进制数据来表示下载请求时,按照上述二进制数据的描述位数的顺序,可以依次为“0”、“01”、“0110”、“11011001”等等,需要说明的是,上述列出的二进制数据以及文字形式仅为众多实施例中的几种表现形式,并不对开启子节点的信息做出限定,可根据具体实施场景确定其实施方式。
S21:接收通过WEB服务下载的待下载日志。
本申请所提供的一种节点日志下载方法,应用于客户端,包括:发送下载请求,用于根据下载请求确定待下载日志的节点列表,以便于根据节点列表开启子节点的WEB服务,其中节点列表中存储待下载日志对应的子节点;接收通过WEB服务下载的待下载日志。由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
在上述实施例中,对于节点日志下载方法进行了详细描述,本申请还提供节点日志下载装置对应的实施例。需要说明的是,本申请从两个角度对装置部分的实施例进行描述,一种是基于功能模块的角度,另一种是基于硬件的角度。
图3为本申请实施例所提供的一种应用于服务端的节点日志下载装置结构图。如图3所示,本申请还提供了一种节点日志下载装置,应用于服务端,包括:
第一接收模块30,用于接收下载请求;
确定模块31,用于根据下载请求确定待下载日志的节点列表,其中节点列表中存储待下载日志对应的子节点;
开启模块32,用于根据节点列表开启子节点的WEB服务;
下载模块33,用于通过WEB服务下载待下载日志。
此外,节点日志下载装置还包括以下模块:
建立模块,用于根据节点列表中存储的子节点建立下载任务;
第一判断模块,用于判断是否成功建立下载任务;
若是,则进入生成模块,用于生成日志汇总目录,日志汇总目录用于存储全部待下载日志;
若否,则返回至确定模块。
压缩模块,用于压缩日志汇总目录。
设置模块,用于设置下载任务的预设进度;
第二判断模块,用于判断下载任务的进度是否达到预设进度;
若是,则进入下载模块;
若否,则结束。
第三判断模块,用于判断待下载日志是否下载完成;
若是,则进入关闭模块,用于关闭WEB服务;
若否,则返回至下载模块。
由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
图4为本申请实施例所提供的一种应用于客户端的节点日志下载装置结构图。如图4所示,本申请还提供了一种节点日志下载装置,应用于客户端,包括:
发送模块40,用于发送下载请求,用于根据下载请求确定待下载日志的节点列表,以便于根据节点列表开启子节点的WEB服务,其中节点列表中存储待下载日志对应的子节点;
第二接收模块41,用于接收通过WEB服务下载的待下载日志。
由于下载节点日志只能通过WEB服务进行下载,因此通过节点列表开启子节点的WEB服务,实现了直接通过子节点下载对应子节点的待下载日志,将主节点处理日志的负载压力分散到各子节点上,以此实现了降低主节点过大的负载压力,同时消除了将全部日志收集在主节点并压缩的处理时间,提升用户使用体验感。
由于装置部分的实施例与方法部分的实施例相互对应,因此装置部分的实施例请参见方法部分的实施例的描述,这里暂不赘述。
图5为本申请实施例所提供的一种节点日志下载设备结构图,如图5所示,节点日志下载设备包括:
存储器50,用于存储计算机程序;
处理器51,用于执行计算机程序时实现如上述实施例中所提到的节点日志下载方法的步骤。
本实施例提供的节点日志下载设备可以包括但不限于智能手机、平板电脑、笔记本电脑或台式电脑等。
其中,处理器51可以包括一个或多个处理核心,比如4核心处理器、8核心处理器等。处理器51可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、可编程逻辑阵列(Programmable LogicArray,PLA)中的至少一种硬件形式来实现。处理器51也可以包括主处理器和协处理器,主处理器是用于对在唤醒状态下的数据进行处理的处理器,也称中央处理器(CentralProcessing Unit,CPU);协处理器是用于对在待机状态下的数据进行处理的低功耗处理器。在一些实施例中,处理器51可以集成有图像处理器(Graphics Processing Unit,GPU),GPU用于负责显示屏所需要显示的内容的渲染和绘制。一些实施例中,处理器51还可以包括人工智能(Artificial Intelligence,AI)处理器,该AI处理器用于处理有关机器学习的计算操作。
存储器50可以包括一个或多个计算机可读存储介质,该计算机可读存储介质可以是非暂态的。存储器50还可包括高速随机存取存储器,以及非易失性存储器,比如一个或多个磁盘存储设备、闪存存储设备。本实施例中,存储器50至少用于存储以下计算机程序,其中,该计算机程序被处理器51加载并执行之后,能够实现前述任意一个实施例公开的节点日志下载方法的相关步骤。另外,存储器50所存储的资源还可以包括操作系统和数据等,存储方式可以是短暂存储或者永久存储。其中,操作系统可以包括Windows、Unix、Linux等。数据可以包括但不限于节点日志下载方法等。
在一些实施例中,节点日志下载设备还可包括有显示屏、输入输出接口、通信接口、电源以及通信总线。
本领域技术人员可以理解,图5中示出的结构并不构成对节点日志下载设备的限定,可以包括比图示更多或更少的组件。
本申请实施例提供的节点日志下载设备,包括存储器50和处理器51,处理器51在执行存储器50存储的程序时,能够实现节点日志下载方法。
最后,本申请还提供一种计算机可读存储介质对应的实施例。计算机可读存储介质上存储有计算机程序,计算机程序被处理器执行时实现如上述方法实施例,可以是服务端对应的方法、也可以是客户端对应的方法,还可以是服务端和客户端对应的方法中记载的步骤。
可以理解的是,如果上述实施例中的方法以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory),ROM、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上对本申请所提供的一种节点日志下载方法、装置、设备及介质进行了详细介绍。说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言,由于其与实施例公开的方法相对应,所以描述的比较简单,相关之处参见方法部分说明即可。应当指出,对于本技术领域的普通技术人员来说,在不脱离本申请原理的前提下,还可以对本申请进行若干改进和修饰,这些改进和修饰也落入本申请权利要求的保护范围内。
还需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
Claims (10)
1.一种节点日志下载方法,其特征在于,应用于服务端,包括:
接收下载请求;
根据所述下载请求确定待下载日志的节点列表,其中所述节点列表中存储所述待下载日志对应的子节点;
根据所述节点列表开启所述子节点的WEB服务;
通过所述WEB服务下载所述待下载日志。
2.根据权利要求1所述的节点日志下载方法,其特征在于,在所述根据所述下载请求确定待下载日志的节点列表之后,在所述根据所述节点列表开启所述子节点的WEB服务之前,还包括:
根据所述节点列表中存储的所述子节点建立下载任务;
判断是否成功建立所述下载任务;
若是,则生成日志汇总目录,所述日志汇总目录用于存储全部所述待下载日志;
若否,则返回至所述根据所述下载请求确定待下载日志的节点列表的步骤。
3.根据权利要求2所述的节点日志下载方法,其特征在于,在所述生成日志汇总目录之后,还包括:
压缩所述日志汇总目录。
4.根据权利要求2所述的节点日志下载方法,其特征在于,在所述根据所述节点列表开启所述子节点的WEB服务之后,在所述通过所述WEB服务下载所述待下载日志之前,还包括:
设置所述下载任务的预设进度;
判断所述下载任务的进度是否达到所述预设进度;
若是,则进入所述通过所述WEB服务下载所述待下载日志的步骤;
若否,则结束。
5.根据权利要求4所述的节点日志下载方法,其特征在于,在所述通过所述WEB服务下载所述待下载日志之后,还包括:
判断所述待下载日志是否下载完成;
若是,则关闭所述WEB服务;
若否,则返回至所述通过所述WEB服务下载所述待下载日志的步骤。
6.一种节点日志下载方法,其特征在于,应用于客户端,包括:
发送下载请求,用于根据所述下载请求确定待下载日志的节点列表,以便于根据所述节点列表开启所述子节点的WEB服务,其中所述节点列表中存储所述待下载日志对应的子节点;
接收通过所述WEB服务下载的所述待下载日志。
7.一种节点日志下载装置,其特征在于,应用于服务端,包括:
第一接收模块,用于接收下载请求;
确定模块,用于根据所述下载请求确定待下载日志的节点列表,其中所述节点列表中存储所述待下载日志对应的子节点;
开启模块,用于根据所述节点列表开启所述子节点的WEB服务;
下载模块,用于通过所述WEB服务下载所述待下载日志。
8.一种节点日志下载装置,其特征在于,应用于客户端,包括:
发送模块,用于发送下载请求,用于根据所述下载请求确定待下载日志的节点列表,以便于根据所述节点列表开启所述子节点的WEB服务,其中所述节点列表中存储所述待下载日志对应的子节点;
第二接收模块,用于接收通过所述WEB服务下载的所述待下载日志。
9.一种节点日志下载设备,其特征在于,包括:
存储器,用于存储计算机程序;
处理器,用于执行所述计算机程序时实现如权利要求1至6任意一项所述的节点日志下载方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如权利要求1至6任意一项所述的节点日志下载方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210753530.8A CN115118706A (zh) | 2022-06-29 | 2022-06-29 | 一种节点日志下载方法、装置、设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210753530.8A CN115118706A (zh) | 2022-06-29 | 2022-06-29 | 一种节点日志下载方法、装置、设备及介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115118706A true CN115118706A (zh) | 2022-09-27 |
Family
ID=83330122
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210753530.8A Pending CN115118706A (zh) | 2022-06-29 | 2022-06-29 | 一种节点日志下载方法、装置、设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115118706A (zh) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104935668A (zh) * | 2015-06-26 | 2015-09-23 | 四川长虹电器股份有限公司 | 分布式文件系统及其数据同步的方法 |
CN107360242A (zh) * | 2017-07-27 | 2017-11-17 | 郑州云海信息技术有限公司 | 一种日志文件的下载方法及系统 |
US20180143884A1 (en) * | 2016-11-22 | 2018-05-24 | Sap Se | Database system recovery using preliminary and final slave node replay positions |
CN110493355A (zh) * | 2019-09-11 | 2019-11-22 | 无锡华云数据技术服务有限公司 | 一种系统日志的下载方法及装置 |
CN111488395A (zh) * | 2020-04-02 | 2020-08-04 | 中国船舶重工集团公司第七一六研究所 | 双节点高可用的分布式存储系统 |
CN113722135A (zh) * | 2021-07-30 | 2021-11-30 | 济南浪潮数据技术有限公司 | 一种错误日志采集系统、方法、设备及介质 |
CN114448972A (zh) * | 2021-12-30 | 2022-05-06 | 苏州浪潮智能科技有限公司 | 分布式存储日志压缩下载方法、系统、终端及存储介质 |
-
2022
- 2022-06-29 CN CN202210753530.8A patent/CN115118706A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104935668A (zh) * | 2015-06-26 | 2015-09-23 | 四川长虹电器股份有限公司 | 分布式文件系统及其数据同步的方法 |
US20180143884A1 (en) * | 2016-11-22 | 2018-05-24 | Sap Se | Database system recovery using preliminary and final slave node replay positions |
CN107360242A (zh) * | 2017-07-27 | 2017-11-17 | 郑州云海信息技术有限公司 | 一种日志文件的下载方法及系统 |
CN110493355A (zh) * | 2019-09-11 | 2019-11-22 | 无锡华云数据技术服务有限公司 | 一种系统日志的下载方法及装置 |
CN111488395A (zh) * | 2020-04-02 | 2020-08-04 | 中国船舶重工集团公司第七一六研究所 | 双节点高可用的分布式存储系统 |
CN113722135A (zh) * | 2021-07-30 | 2021-11-30 | 济南浪潮数据技术有限公司 | 一种错误日志采集系统、方法、设备及介质 |
CN114448972A (zh) * | 2021-12-30 | 2022-05-06 | 苏州浪潮智能科技有限公司 | 分布式存储日志压缩下载方法、系统、终端及存储介质 |
Non-Patent Citations (1)
Title |
---|
刘林东;邬依林;: "网格资源发现和分配算法研究", 计算机仿真, no. 12, 15 December 2012 (2012-12-15) * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111881133B (zh) | 存储桶管理方法、装置、计算机设备及可读存储介质 | |
CN110704283A (zh) | 一种统一生成告警信息的方法、装置和介质 | |
CN108228344B (zh) | 多进程内存处理方法及装置、计算机装置及可读存储介质 | |
CN113238912B (zh) | 一种网络安全日志数据的聚合处理方法 | |
CN111124282A (zh) | 一种对象存储系统中的存储方法、存储装置及存储设备 | |
CN114826749A (zh) | 一种接口访问控制方法、装置、介质 | |
CN113806300A (zh) | 数据存储方法、系统、装置、设备及存储介质 | |
CN111968626A (zh) | 变声处理方法、装置、设备及可读存储介质 | |
CN110442439B (zh) | 任务进程处理方法、装置和计算机设备 | |
CN115118706A (zh) | 一种节点日志下载方法、装置、设备及介质 | |
CN112269530A (zh) | 一种数据存储管理方法及相关装置 | |
CN112650755A (zh) | 数据存储方法、查询数据的方法、数据库、以及可读介质 | |
CN113098978B (zh) | 一种数据传输方法、装置及介质 | |
CN113703678B (zh) | 一种存储桶索引重分裂的方法、装置、设备和介质 | |
CN114721876A (zh) | 一种数据备份方法、装置、介质 | |
CN115934999A (zh) | 一种基于块文件的视频流数据存储方法、装置及介质 | |
CN115174596A (zh) | 一种设备远程复制方法、装置以及介质 | |
CN110795388B (zh) | 一种二进制文件的处理方法、系统、设备及可读存储介质 | |
CN114238250A (zh) | 程序文件压缩方法、装置及电子设备 | |
CN110401652B (zh) | 一种基于超融合存储的数字媒体数据处理方法 | |
CN111104381A (zh) | 一种日志管理方法、装置、设备及计算机可读存储介质 | |
CN112684985B (zh) | 一种数据的写入方法和装置 | |
CN114090536A (zh) | 一种基于分布式存储的日志文件存储方法、装置及介质 | |
CN115550279A (zh) | 一种资料更新方法、装置及介质 | |
CN114327947A (zh) | 订阅消息处理方法、装置、电子设备及自动驾驶车辆 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |