CN112035424A - 一种数据查询方法、装置、系统、电子设备及存储介质 - Google Patents

Abstract

本公开涉及一种数据查询方法、装置、系统、电子设备及存储介质。其中，数据查询方法包括：获取服务端发送的针对查询信息的查询结果；基于所述查询结果生成数据快照；基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符。本公开实施例通过将查询结果生成数据快照以及数据快照的统一资源定位符，便于查询结果的归档存储，实现了对查询结果的追溯。

Description

一种数据查询方法、装置、系统、电子设备及存储介质

技术领域

本公开涉及互联网技术领域，尤其涉及一种数据查询方法、装置、系统、电子设备及存储介质。

背景技术

为了提升业务的可维护性，查询日志成为了目前业务开发和维护中所常用的技术手段。业务的一条日志是用于记录该业务在某个时刻对某个数据对象进行处理时所执行的操作或状态，日志中往往包含有多个数据属性，例如业务标识、执行对象、执行内容、执行日期、操作时间、完成时间等数据属性，不同业务的日志所包含的数据属性不尽相同，而一条日志中每个数据属性的属性值则表征了业务进行处理时在相应数据属性上的具体状态。业务每进行一个处理通常都会触发采集一条相应的日志，以便于业务管理人员在后期能够根据业务各条日志所记录的内容掌握业务的运行状态，进而判断业务运行是否正常以及掌握业务运行统计数据等，以便执行相应的维护操作。

目前，日志查询系统在查询到所需日志后，直接显示查询结果，用户只能通过截图将查询结果分享给相关人员，而截图分享不方便归档存储，导致查询结果很难被追溯，无法实现历史查询。

发明内容

为了解决上述技术问题或者至少部分地解决上述技术问题，本公开提供了一种数据查询方法、装置、系统、电子设备及存储介质。

本公开提供了一种数据查询方法，包括：

获取服务端发送的针对查询信息的查询结果；

基于所述查询结果生成数据快照；

基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL。

可选的，所述查询信息由用户通过用户界面选择或输入。

可选的，所述服务端包括中央节点和边缘节点，所述查询信息包括查询时间范围、查询关键词和查询关键词取反中的至少一种，以及查询类型和待查询边缘节点的节点名。

可选的，所述预设查询ID包括数据查询时间。

可选的，在生成所述数据快照的统一资源定位符URL之后，还包括：

当接收到所述URL的访问请求时，展示所述URL对应的所述数据快照。

可选的，在生成所述数据快照的统一资源定位符URL之后，还包括：

基于接收到的URL查询信息，查询URL；

当查询到满足所述URL查询信息的URL时，展示满足所述URL查询信息的URL。

可选的，所述查询结果包括待查询边缘节点的各维度信息、日志、日志的访问详情和多维度聚合报表中的至少一种，所述多维度聚合报表包括日志分析报告。

本公开提供了一种数据查询装置，包括：

结果获取模块，用于获取服务端发送的针对查询信息的查询结果；

快照生成模块，用于基于所述查询结果生成数据快照；

URL生成模块，用于基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL。

本公开提供了一种数据查询系统，包括Web端和服务端；

所述Web端用于获取所述服务端发送的查询结果；基于所述查询结果生成数据快照；基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL；

所述服务端用于向所述Web端发送针对查询信息的查询结果。

可选的，所述服务端包括中央节点和边缘节点；

所述中央节点用于接收所述Web端发送的数据查询请求，并基于所述数据查询请求向待查询边缘节点分配数据查询任务；

所述边缘节点用于基于所述数据查询任务进行数据查询。

可选的，所述数据查询任务包括：所述边缘节点批量返回查询到的数据。

本公开提供了一种电子设备，所述电子设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现本公开提供的数据查询方法。

本公开提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序用于执行本公开提供的数据查询方法。

本公开实施例提供的技术方案与现有技术相比具有如下优点：

本公开实施例提供的技术方案通过接收服务端发送的针对查询信息的查询结果，基于查询结果生成数据快照，并基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符，既可以通过数据快照查看相关数据的查询结果，又可以将统一资源定位符分享给相关人员，使得相关人员通过在网页输出统一资源定位符即可查看到数据快照，且便于归档存储，在后续追溯时不需要再次进行数据查询，实现了便捷的历史查询。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

为了更清楚地说明本公开实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本公开实施例提供的数据查询方法的流程示意图；

图2为本公开实施例提供的用户界面的示意图；

图3为本公开实施例提供的多维度聚合报表的快照示意图；

图4为本公开实施例提供的数据查询装置的结构框图；

图5为本公开实施例提供的数据查询系统的结构示意图；

图6为本公开实施例提供的一种电子设备的结构示意图。

具体实施方式

为了能够更清楚地理解本公开的上述目的、特征和优点，下面将对本公开的方案进行进一步描述。需要说明的是，在不冲突的情况下，本公开的实施例及实施例中的特征可以相互组合。

在下面的描述中阐述了很多具体细节以便于充分理解本公开，但本公开还可以采用其他不同于在此描述的方式来实施；显然，说明书中的实施例只是本公开的一部分实施例，而不是全部的实施例。

图1为本公开实施例提供的数据查询方法的流程示意图。该数据查询方法适用于查询日志和日志分析报告等数据的情况，可以由数据查询装置执行，其中该数据查询装置可以采用软件和/或硬件的方式实现，一般可集成在电子设备中。如图1所示，该数据查询方法包括：

步骤110、获取服务端发送的针对查询信息的查询结果。

作为本公开一可选实施例，该步骤110可包括步骤111至步骤113：

步骤111、获取查询信息。

其中，查询信息为必要的查询条件，用来限定查询数据的范围(如数据的存储位置、数据产生的时间范围和数据包含的关键词等)，实现对查询数据的筛选，以快速获取对应的查询结果。本公开实施例对输入的查询信息的设定可以是任意的(开放的)，也可以是固定的。在一些实施例中，查询信息可包括查询关键词或查询关键词取反，避免用户自行拼凑查询信息，节省查询时间，提升工作效率。

在本公开的一可选实施例中，查询信息由用户通过用户界面选择或输入，或者数据查询装置可通过用户界面获取用户选择或输入的查询信息。

示例性的，图2为本公开实施例提供的用户界面的示意图，参考图2，Web端的浏览器端(前端)以页面的形式将数据查询和分析的过程制作成用户界面。该用户界面可包括查询信息的必填项和选填项，同时可包括查询信息的下拉框、输入框和选择框等，以使用户选择或输入查询信息，从而获取到查询信息。

步骤112、基于查询信息向服务端发送数据查询请求。

具体的，服务端可包括中央节点和边缘节点，边缘节点包括至少一个端设备，中央节点在接收到数据查询请求时，将数据查询任务下发至边缘节点的各端设备，各端设备查询各自本地存储的满足查询信息的数据，并想中央节点返回查询到的数据；此时中央节点可直接将边缘节点返回的数据反馈至Web端，也可以将边缘节点返回的数据进行汇总，将计算好的数据反馈至Web端。进一步的，继续参考图2，查询信息可包括查询时间范围、查询关键词和查询关键词取反中的至少一种，以及查询类型和待查询边缘节点的节点名。

基于该方案，在本公开一些实施例中，查询类型可包括Nginx访问日志查询、Dorado回源日志查询、Dorado访问日志查询、302调度日志查询和Nginx访问日志汇总表格等。待查询边缘节点的节点名可以为节点名的缩写，查询时间范围覆盖查询数据的产生时间或访问时间等，查询关键词为查询数据包含的字符，查询关键词取反即为查询数据不包含查询关键词对应的字符。其中，查询类型和待查询边缘节点的节点名可以为必选项；查询时间范围、查询关键词和查询关键词取反可以为可选项，可以组合选择。当未输出查询开始时间时，默认为当前时间；查询结束时间可以为查询开始时间之后的一段时间。如此，通过查询信息对查询数据范围的限定，可以快速查询到满足查询信息的查询结果。

步骤113、接收服务端返回的与查询信息对应的查询结果。

服务端返回查询结果后，Web端接收该查询结果。可选的，为防止服务端返回的查询结果过多而不方便用户查看，服务端可根据预先设置的查询数量分批次地向Web端反馈查询结果。示例性的，服务端中的中心节点在向边缘节点下发查询任务时，可要求边缘节点每隔预设时间反馈预设数量的数据，如边缘节点每隔1分钟向中央节点返回10条日志。

步骤120、基于查询结果生成数据快照。

在本公开一些实施例中，数据快照可以包括图像、表格和字符中的一种或多种组合。在服务端每次返回数据结果后，Web端即生成一张数据快照并将数据快照存储到数据库中。另外，在生成数据快照时，可同时将数据快照通过页面展示给用户，也可在接收到用户对数据快照的访问请求时展示数据快照。

步骤130、基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL。

其中，域名与IP地址相对应，是由一串用点分隔的名字组成的Internet上某一台计算机或计算机组的名称。在本公开实施例中，边缘节点具有IP地址及对应的预设域名。边缘节点返回的查询结果包括其预设域名，或者Web端存储有各边缘节点的预设域名；同时，预设查询ID可包括数据查询(访问)时间，Web端可将服务端返回查询结果的时间作为数据查询时间，即预设查询ID。如此，通过预设域名和预设查询ID构成数据快照的URL，如http://klc.beta.ksyun.site/kslog/query/？type＝type123&id＝122283，其中klc.beta.ksyun.site/kslog/query/？type＝type123为预设域名，id＝122283为预设查询ID，对于同一边缘节点的数据查询，在生成数据快照时只需修改预设查询ID即可。由此，在生成数据快照的URL后，用户可将URL分享给其他相关人员，使得相关人员可以通过URL直接查看到相关数据的查询结果，同时，URL便于归档存储，后续追溯无需进行二次查询，节省查询时间，提升工作效率。

本公开实施例提供的技术方案通过接收服务端返回的与查询信息对应的查询结果，基于查询结果生成数据快照，并基于预设域名和预设查询ID，生成所述数据快照的URL，既可以通过数据快照查看相关数据的查询结果，又可以将URL分享给相关人员，使得相关人员通过在网页输出URL即可查看到数据快照，且便于归档存储，在后续追溯时不需要再次进行数据查询，实现了便捷的历史查询。

基于上述技术方案，在本公开一些实施例中，在生成数据快照的统一资源定位符之后，还包括：

当接收到URL的访问请求时，展示URL对应的数据快照。

示例性的，相关人员在对URL进行归档存储时，可对该条URL对应的查询结果进行信息备注。后续追溯某一查询结果时，可通过查找备注的信息找到URL，将URL输入到页面，Web端的浏览器端接收到URL的访问请求，即可展示URL对应的数据快照。

另外，本公开除了通过将URL进行分享来获得URL，还可以对生成过的URL进行查询来获得URL。在本公开一些实施例中，在生成数据快照的统一资源定位符之后，还包括：

基于接收到的URL查询信息，查询URL；

当查询到满足URL查询信息的URL时，展示满足URL查询信息的URL。

具体的，URL查询信息可包括数据查询人的姓名、数据查询时间和查询关键词等。Web端在生成URL时，将URL及对应的查询操作存储在数据库中，并生成历史查询界面。当用户需要某一URL或想再次分享该查询URL时，用户可以通过历史查询界面输入URL查询信息来查找所需URL。

在上述各实施例中，查询结果可包括待查询边缘节点的各维度信息、日志、日志的访问详情和多维度聚合报表中的至少一种，多维度聚合报表包括日志分析报告。其中，各维度信息、日志、日志的访问详情和多维度聚合报表均为待查询边缘节点的查询数据。当查询结果包括日志的访问详情时，可包括单条日志的访问详情，也可包括多条日志的访问详情。在一些实施例中，为避免用户区分不同的日志的访问详情，查询结果包括单条日志的访问详情。另外，各维度信息可包括上游层级(Upstream)、HTTP服务器(Http Server)、错误原因(Error Reason)、域名(Domain)和设备IP地址等维度信息，具体可根据实际情况进行设定。

示例性的，图3为本公开实施例提供的多维度聚合报表的快照示意图，参考图3，相关人员通过观察多维度聚合报表，可以发现明显异常，同时可以将多维度聚合报表通过URL分享给其他相关同事，可以高效的查找到故障数据，便于维护。

图4为本公开实施例提供的数据查询装置的结构框图。如图4所示，本公开实施例提供的一种数据查询装置，包括：

结果获取模块201，用于获取服务端发送的针对查询信息的查询结果；

快照生成模块202，用于基于查询结果生成数据快照；

URL生成模块203，用于基于预设域名和预设查询ID，生成数据快照的统一资源定位符URL。

可选的，所述查询信息由用户通过用户界面选择或输入。

可选的，服务端包括中央节点和边缘节点，查询信息包括查询时间范围、查询关键词和查询关键词取反中的至少一种，以及查询类型和待查询边缘节点的节点名。

可选的，预设查询ID包括数据查询时间。

可选的，上述数据查询装置还包括：快照展示模块，用于在生成数据快照的URL之后，当接收到URL的访问请求时，展示URL对应的数据快照。

可选的，上述数据查询装置还包括：

URL查询模块，用于在生成数据快照的URL之后，基于接收到的URL查询信息，查询URL；

快照展示模块具体用于：当查询到满足URL查询信息的URL时，展示满足URL查询信息的URL。

可选的，查询结果包括待查询边缘节点的各维度信息、日志、日志的访问详情和多维度聚合报表中的至少一种，多维度聚合报表包括日志分析报告。

本公开实施例所提供的数据查询装置可执行本发明任意实施例所提供的数据查询方法，具备执行方法相应的功能模块和有益效果。

图5为本公开实施例提供的数据查询系统的结构示意图。如图5所示，本公开提供的一种数据查询系统包括Web端300和服务端；

Web端300用于获取服务端发送的查询结果；基于查询结果生成数据快照；基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL；

服务端用于向Web端300发送针对查询信息的查询结果。

可选的，服务端包括中央节点301和边缘节点302；中央节点301用于接收Web端300发送的数据查询请求，并基于数据查询请求向待查询边缘节点302分配数据查询任务；边缘节点302用于基于数据查询任务进行数据查询。

可选的，数据查询任务包括：边缘节点批量返回查询到的数据。

本公开实施例所提供的数据查询系统可执行本发明任意实施例所提供的数据查询方法，具备执行方法相应的功能模块和有益效果。

本公开提供了一种电子设备，电子设备包括：处理器；用于存储处理器可执行指令的存储器；处理器，用于从存储器中读取可执行指令，并执行指令以实现本公开提供的数据查询方法。

图6为本公开实施例提供的一种电子设备的结构示意图。如图6所示，电子设备400包括一个或多个处理器401和存储器402。

处理器401可以是中央处理单元(CPU)或者具有数据处理能力和/或指令执行能力的其他形式的处理单元，并且可以控制电子设备400中的其他组件以执行期望的功能。

存储器402可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器401可以运行所述程序指令，以实现上文所述的本公开的实施例的数据查询方法以及/或者其他期望的功能。在所述计算机可读存储介质中还可以存储诸如输入信号、信号分量、噪声分量等各种内容。

在一个示例中，电子设备400还可以包括：输入装置403和输出装置404，这些组件通过总线系统和/或其他形式的连接机构(未示出)互连。

此外，该输入装置403还可以包括例如键盘、鼠标等等。

该输出装置404可以向外部输出各种信息，包括确定出的距离信息、方向信息等。该输出装置404可以包括例如显示器、扬声器、打印机、以及通信网络及其所连接的远程输出设备等等。

当然，为了简化，图5中仅示出了该电子设备400中与本公开有关的组件中的一些，省略了诸如总线、输入/输出接口等等的组件。除此之外，根据具体应用情况，电子设备400还可以包括任何其他适当的组件。

除了上述方法和设备以外，本公开的实施例还可以是计算机程序产品，其包括计算机程序指令，所述计算机程序指令在被处理器运行时使得所述处理器执行本公开实施例所提供的数据查询方法。

所述计算机程序产品可以以一种或多种程序设计语言的任意组合来编写用于执行本公开实施例操作的程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、C++等，还包括常规的过程式程序设计语言，诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算设备上部分在远程计算设备上执行、或者完全在远程计算设备或服务器上执行。

此外，本公开的实施例还可以是计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令在被处理器运行时使得所述处理器执行本公开实施例所提供的数据查询方法。

所述计算机可读存储介质可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以包括但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。

以上所述仅是本公开的具体实施方式，使本领域技术人员能够理解或实现本公开。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本公开的精神或范围的情况下，在其它实施例中实现。因此，本公开将不会被限制于本文所述的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (13)

1.一种数据查询方法，其特征在于，包括：

获取服务端发送的针对查询信息的查询结果；

基于所述查询结果生成数据快照；

基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL。

2.根据权利要求1所述的数据查询方法，其特征在于，所述查询信息由用户通过用户界面选择或输入。

3.根据权利要求2所述的数据查询方法，其特征在于，所述服务端包括中央节点和边缘节点，所述查询信息包括查询时间范围、查询关键词和查询关键词取反中的至少一种，以及查询类型和待查询边缘节点的节点名。

4.根据权利要求1所述的数据查询方法，其特征在于，所述预设查询ID包括数据查询时间。

5.根据权利要求1所述的数据查询方法，其特征在于，在生成所述数据快照的统一资源定位符URL之后，还包括：

当接收到所述URL的访问请求时，展示所述URL对应的所述数据快照。

6.根据权利要求1所述的数据查询方法，其特征在于，在生成所述数据快照的统一资源定位符URL之后，还包括：

基于接收到的URL查询信息，查询URL；

当查询到满足所述URL查询信息的URL时，展示满足所述URL查询信息的URL。

7.根据权利要求1所述的数据查询方法，其特征在于，所述查询结果包括待查询边缘节点的各维度信息、日志、日志的访问详情和多维度聚合报表中的至少一种，所述多维度聚合报表包括日志分析报告。

8.一种数据查询装置，其特征在于，包括：

结果获取模块，用于获取服务端发送的针对查询信息的查询结果；

快照生成模块，用于基于所述查询结果生成数据快照；

URL生成模块，用于基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL。

9.一种数据查询系统，其特征在于，包括Web端和服务端；

所述Web端用于获取所述服务端发送的查询结果；基于所述查询结果生成数据快照；基于预设域名和预设查询ID，生成所述数据快照的统一资源定位符URL；

所述服务端用于向所述Web端发送针对查询信息的查询结果。

10.根据权利要求9所述的数据查询系统，其特征在于，所述服务端包括中央节点和边缘节点；

所述中央节点用于接收所述Web端发送的数据查询请求，并基于所述数据查询请求向待查询边缘节点分配数据查询任务；

所述边缘节点用于基于所述数据查询任务进行数据查询。

11.根据权利要求10所述的数据查询系统，其特征在于，所述数据查询任务包括：所述边缘节点批量返回查询到的数据。

12.一种电子设备，其特征在于，所述电子设备包括：

处理器；

用于存储所述处理器可执行指令的存储器；

所述处理器，用于从所述存储器中读取所述可执行指令，并执行所述指令以实现上述权利要求1-7中任一所述的数据查询方法。

13.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序用于执行上述权利要求1-7中任一所述的数据查询方法。

Images