CN110727835A - 数据查询方法、装置及系统 - Google Patents
数据查询方法、装置及系统 Download PDFInfo
- Publication number
- CN110727835A CN110727835A CN201910987789.7A CN201910987789A CN110727835A CN 110727835 A CN110727835 A CN 110727835A CN 201910987789 A CN201910987789 A CN 201910987789A CN 110727835 A CN110727835 A CN 110727835A
- Authority
- CN
- China
- Prior art keywords
- token
- query
- process data
- index information
- data block
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Software Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供了数据查询方法、装置及系统,其中方法包括:接收客户端发送的第二查询请求;解析第二查询请求获得页码序号范围、查询条件和令牌;其中令牌包括:预先基于查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;基于各个数据块的索引信息,查询并获得页码序号范围对应的过程数据集;反馈过程数据集至客户端。本发明通过令牌作为客户端与工业云平台之间的凭证,从而避免工业云平台将第二查询请求作为新查询请求,不必再重新执行整体查询操作,提高查询效率。并且,工业云平台保存完整过程数据集对应的各个数据块的索引信息,通过各个数据块的索引信息可以直接简便地查询到某页对应的过程数据,更进一步提高查询效率。
Description
技术领域
本发明涉及工业技术领域,尤其涉及数据查询方法、装置及系统。
背景技术
在工业控制装置上单个检测点通常用位号来表示,一个位号对应工业控制装置的一个检测点。在工业控制装置运行过程中,会采集各个检测点的过程数据,并将各个检测点的位号和过程数据对应存储至工业云平台。
多个客户端均可以向工业云平台发送查询请求,以获取指定检测点在指定时间段内的过程数据集。鉴于过程数据集的数据量较大,客户端通常会分页显示过程数据集。
为了处理多个客户端大量的并发查询请求,工业云平台通常采用RESTful方式对外提供接口服务。但是RESTful方式具有无状态特性,也即无法记录客户端的查询状态,这与客户端分页显示过程数据具有冲突。
即,工业云平台获得客户端发起第一次查询请求后,会搜索得到符合查询请求中查询条件的完整过程数据集,然后从中提取第1页所需过程数据,并反馈给客户端,以供客户端显示第1页所需过程数据。
但是,工业云平台在获得客户端发送第2页查询请求后,鉴于RESTful方式的无状态特性,工业云平台无法记录客户端的第一次查询请求,所以会将第2页查询请求作为新查询请求,重新搜索符合查询请求中查询条件的完整过程数据集,然后从中提取第2页所需过程数据,并反馈给客户端以供客户端显示第2页所需过程数据。
由于工业云平台存储成千上万个检测点的过程数据,因此工业云平台每次基于查询条件进行一次搜索操作的花销较大,这使得客户端与工业云平台之间的查询效率较低。
发明内容
鉴于此,本发明提供数据查询方法、装置及系统,以解决查询客户端与工业云平台之间的查询效率较低的问题。
为了上述目的,本申请提供了下述技术特征:
一种数据查询方法,包括:
接收客户端发送的第二查询请求;
解析所述第二查询请求获得页码序号范围、查询条件和令牌;其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
反馈所述过程数据集至所述客户端。
可选的,在所述接收客户端发送的查询请求之前,还包括:
接收所述客户端发送的包含所述查询条件的第一查询请求;
基于所述查询条件执行查询操作,获得所述完整过程数据集;
依据记录过程数据和数据块之间对应关系的预设索引表,确定所述完整过程数据集对应的各个数据块的索引信息;
基于令牌数据生成所述令牌;其中所述令牌数据包括所述各个数据块的索引信息或索引信息于索引服务器中的位置信息;
发送所述令牌和所述完整过程数据集包含的数据总条数至所述客户端。
可选的,所述各个数据块的索引信息包括所述完整过程数据集对应的各个数据块的索引信息,并且,各个数据块的索引信息按照各个数据块创建时间的先后顺序排序;
每个数据块的索引信息包括:
数据块所属服务器的服务器标识;
数据块于服务器中所属存档文件的存档文件标识;
数据块于存档文件中的偏移地址;
数据块中符合所述查询条件的过程数据条数。
可选的,所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集,包括:
按各个数据块的索引信息的先后顺序和各个数据块中符合所述查询条件的过程数据条数,确定所述页码序号范围对应的一个或两个数据块;
从所述一个或两个数据块中,获取所述页码序号范围对应的一个或多个过程数据;
将所述一个或多个过程数据确定为所述过程数据集。
可选的,所述令牌数据还包括第一系统时间,则所述令牌还包括第一系统时间;则在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证当前的第二系统时间和所述第一系统时间的差值是否小于阈值,若所述差值小于阈值则确定所述第二查询请求未超时,执行后续操作;若所述差值大于阈值,则确定所述第二查询请求超时,不执行后续操作;
所述令牌数据还包括第一查询请求中的查询条件,则所述令牌还包括第一查询请求中的查询条件;则在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证所述第二查询请求中的查询条件与所述第一查询请求中的查询条件是否一致,若一致则确定未出现异常,执行后续操作;若不一致则提示出现异常,不执行后续操作;
所述页码序号范围包括:页码起始序号和页码待显示数据条数;则在基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
计算所述页码起始序号和所述页码待显示数据条数的和值,判断所述和值是否大于所述完整过程数据集包含的数据总条数;若是,则提示出现异常,执行后续操作,若否,则确定未出现异常则执行后续操作;
所述基于令牌数据生成所述令牌包括基于所述令牌数据执行加密操作获得加密后的令牌;则所述解析所述第二查询请求获得令牌,包括解析所述第二查询请求并执行解密操作,获得解密后的令牌。
一种数据查询方法,包括:
生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
发送所述第二查询请求至工业云平台,以供所述工业云平台解析所述第二查询请求获得所述令牌,并基于所述令牌中的各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
接收并显示所述工业云平台反馈的所述页码序号范围对应的过程数据集。
可选的,还包括:
发送包含所述查询条件的第一查询请求至工业云平台;
接收并存储所述工业云平台发送的所述令牌和所述完整过程数据集包含的数据总条数。
一种数据查询装置,包括:
接收单元,用于接收客户端发送的第二查询请求;
解析单元,用于解析所述第二查询请求获得页码序号范围、查询条件和令牌;其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
查询单元,用于基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
反馈单元,用于反馈所述过程数据集至所述客户端。
一种数据查询装置,包括:
生成单元,用于生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
发送单元,用于发送所述第二查询请求至工业云平台,以供所述工业云平台解析所述第二查询请求获得所述令牌,并基于所述令牌中的各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
接收并显示单元,用于接收并显示所述工业云平台反馈的所述页码序号范围对应的过程数据集。
一种数据查询系统,包括:工业云平台和客户端;
客户端,用于发送第二查询请求,接收并显示工业云平台反馈的过程数据集;其中所述第二查询请求包括页码序号范围、查询条件和令牌;其中所述令牌包括预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
工业云平台,用于接收客户端发送的第二查询请求;解析所述第二查询请求获得页码序号范围、查询条件和令牌;基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;反馈所述过程数据集至所述客户端。
通过以上技术手段,可以实现以下有益效果:
为了提高查询效率,本发明工业云平台预先查询并获得符合查询条件的完整过程数据集,并确定完整过程数据集所对应的各个数据块的索引信息,并至少利用各个数据块的索引信息生成令牌。
客户端再次向工业云平台发送的第二查询请求中携带有令牌,由于令牌中携带有已经基于查询条件查询后的完整过程数据集对应的各个数据块的索引信息,因此,不必再次基于查询条件于全部过程数据中执行查询操作,仅需基于各个数据块的索引信息查找到页码序号范围对应的过程数据集即可。
本发明通过令牌作为客户端与工业云平台之间的凭证,从而避免工业云平台将第二查询请求作为新查询请求,不必再重新执行整体查询操作,提高查询效率。
并且,工业云平台保存完整过程数据集对应的各个数据块的索引信息,通过各个数据块的索引信息可以直接简便地查询到某页对应的过程数据,更进一步提高查询效率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例公开的一种数据查询系统的结构示意图;
图2为本发明实施例公开的一种数据查询方法实施例一的流程图;
图3为本发明实施例公开的一种数据查询方法实施例二的流程图;
图4为本发明实施例公开的一种数据查询装置实施例一的结构示意图;
图5为本发明实施例公开的一种数据查询装置实施例二的结构示意图。
具体实施方式
技术术语:
位号,工业控制装置如DCS或者PLC上的单个检测点用位号的方式来表示,一个位号对应工业控制装置的一个检测点,并且位号拥有对应的名字作为唯一标识。
工业云平台,云平台多指基于互联网技术搭建的云服务,底层由计算机集群所组成有很强的可扩展性,云平台对众多用户提供公共的服务并不专属于某个特定的用户,工业云平台是指用户为工业企业的云平台。
分页显示,该方式广泛应用于WEB浏览器方式查询大批量数据时的展示,由于数据量巨大,不适合在单个页面中显示所有的数据,而是采用分页的方式每次仅显示指定页码的数据,用户可以导航到指定页码。
RESTful,(Representational State Transfer)是云平台最常用的对外提供接口服务的方式,该方式将数据视为资源并为每个资源指定一个URI(Uniform ResourceIdentifier)作为标识,客户端能通过URI来操作(Get/Put/Delete等)资源。RESTful一个重要的特征是无状态,相比传统的RPC方式更加适合于面向大规模并发的云平台,因为RPC需要保存每个用户的状态而这使得云平台的扩展性收到很大的限制。
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参见图1,本申请提供了一种数据查询系统,包括:
一个或多个工业控制装置100(图示展示m个工业控制装置,m为正整数)、工业云平台200和一个或多个客户端300(图示展示n个客户端,n为正整数)。可以理解的是,工业云平台由一个或多个服务器组成。
一个或多个工业控制装置100包括多个检测点,针对需要进行检测的检测点,可以进行数据采集以获取各个检测点在工业生成过程中的过程数据。为了记录各个检测点的过程数据,可以存储各个检测点的过程数据至工业云平台200。
当需要查询某个检测点的过程数据时,可以采用客户端300向工业云平台200发送查询请求以查询获得某个或某些检测点过程数据,并在客户端300上进行分页显示,以便用户查看过程数据。
需要指出的是,工业云平台200中一个检测点对应一个检测点标识(也检测点标识可以采用位号来表示),由于检测点的过程数据均为时序数据(即检测点的过程数据都是以时间戳为索引的时序数据),所以工业云平台200可以采用数据块的方式存储各个检测点的过程数据。
即,将一个检测点一段连续时间内连续的过程数据,打包成一个标准大小的数据块,并将检测点的位号和数据块对应保存至工业云平台中某个服务器的某个存档文件中。然后在索引表中添加该数据块的索引信息,以用于记录数据块的位置信息,以及,过程数据和数据块之间对应关系。
为了提高客户端300与工业云平台200之间的查询效率,本发明提供一种数据查询方法。由于各个客户端与工业云平台之间的处理过程是一致的,所以一个客户端和工业云平台之间的查询过程为例进行详细说明。
参见图2,本申请提供了一种数据查询方法的实施例一,包括以下步骤:
步骤S201:客户端发送包含查询条件的第一查询请求至工业云平台。
查询条件可以包括检测点标识(也可以称为位号),查询时间段(具体可以包括起始时间和结束时间)。
根据实际情况查询条件还可以包括检测点数据的上限值和下限值,以及,检测点状态码(假设正常码为“1”,异常码为“0”等),在此不做限定。
步骤S202:工业云平台接收所述客户端发送的包含查询条件的第一查询请求,基于所述查询条件执行查询操作,获得所述完整过程数据集。
工业云平台基于查询条件执行查询操作,也即查询某个位号于某个时间段内的过程数据,在有其它查询条件情况下,继续利用查询条件中的其它条件进行过滤从而获得符合查询条件的完整过程数据集。
完整过程数据集包括多个过程数据,且,多个过程数据必然是连续的时序数据。
步骤S203:工业云平台依据预设索引表,确定所述完整过程数据集对应的各个数据块的索引信息。
预设索引表中记录有过程数据和数据块之间对应关系,在具有完整过程数据集之后,可以根据完整过程数据集中各个过程数据的时间戳,在预设索引表中确定各个过程数据,并根据对应关系确定过程数据所属的数据块。综合各个过程数据的数据块,可以确定完整过程数据集对应的各个数据块。
可以理解的是,一些过程数据所属的数据块可能是相同的,且,由于查询条件中查询时间段是一段连续时间范围,所以获得的各个数据块也是连续的一个或多个数据块,且,各个数据块之间是连续的且按时间先后顺序排序。
可以理解的是,由于查询时间段与数据块对应的时间段可能不是完全匹配的,所以完整过程数据集对应的各个数据块中第一个数据块和最后一个数据块中可能包含部分符合查询条件的过程数据。
工业云平台可以在预设索引表中确定各个数据块的索引信息。各个数据块的索引信息包括所述完整过程数据集对应的各个数据块的索引信息,并且,各个数据块的索引信息按照各个数据块创建时间的先后顺序排序;
以一个数据块的索引信息为例进行详细介绍,数据块索引信息包括:
数据块所属服务器的服务器标识;
数据块于服务器中所属存档文件的存档文件标识;
数据块于存档文件中的偏移地址;
数据块中符合所述查询条件的过程数据条数。
在实际应用中,各个数据块的索引信息可以采用JSON对象表示,假设JSON对象的名称采用“IL”表示,服务器标识可以采用“Server”表示,存档文件标识可以采用“Archive”表示,偏移地址采用Offset表示,过程数据条数采用“Records”表示。则举例如下:
步骤S204:工业云平台基于令牌数据生成所述令牌;其中所述令牌数据包括所述各个数据块的索引信息。
令牌数据至少包括各个数据块的索引信息。可以理解的是,各个数据块的索引信息可以直接用于令牌数据。当然,若考虑到各个数据块的索引信息的数据量,可以先将各个数据块的索引信息存储至索引服务器,然后将索引信息于索引服务器中的位置信息用于令牌数据。
可选的,令牌数据还可以包括:第一系统时间。
可选的,令牌数据还可以包括:第一查询请求中的查询条件。
工业云平台基于令牌数据来生成令牌。可以理解的是,为了保护令牌,可以采用密钥对令牌进行加密处理,以获得加密后的令牌。
步骤S205:工业云平台发送所述令牌和所述完整过程数据集包含的数据总条数至所述客户端。
步骤S206:客户端接收所述令牌和所述完整过程数据集包含的数据总条数,存储所述令牌。
步骤S207:客户端基于所述数据总条数和预设页码显示条数,确定页码数量和每页的页码序号范围。
由于不同客户端设备的预设页面显示条数不同,所以客户端可以确定适合于自身的预设页面显示条数。然后,基于所述数据总条数和预设页码显示条数,确定页码数量和每页的页码序号范围,该过程已为成熟技术,在此不再赘述。
可选的,为了便于用户及时查看到第一页的过程数据,第一查询请求中可以携带有第一页的页码序号范围,以便工业云平台可以从完整过程数据集中筛选得到第一页对应的过程数据集,并在发送令牌和数据总条数时,一并发送第一页的过程数据集至客户端。
客户端可以在步骤S207确定页码数量和每页的页码序号范围后,显示页码数量和第一页对应的过程数据集,以供用户查看。
参见图3,本申请提供了一种数据查询方法的实施例二,包括以下步骤:
步骤是301:客户端生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息。
若云平台在发送令牌时未发送第一页过程数据集,客户端可以确定第一页的页码序号范围,并发起用于查询第一页过程数据集的第二查询请求。
若云平台在发送令牌时已经发送第一页过程数据集,客户端可以在接收用户点击第二页或其它页码的指令后,生成用于查询第二页或其它页码过程数据集的第二查询请求。
与第一查询请求不同的是,客户端生成的第二查询请求携带有令牌。令牌中携带有预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息。这可以便于工业云平台直接基于各个数据块的索引信息来执行搜索操作。
步骤S302:客户端发送所述第二查询请求至工业云平台。
步骤S303:工业云平台接收客户端发送的第二查询请求,解析所述第二查询请求获得页码序号范围、查询条件和令牌。
可选的,若令牌是预先经过加密后的加密后令牌,则可以利用预先存储的密钥对令牌执行解密操作,获得解密后的令牌。
页码序号范围包括页码起始序号K和页码待显示数据条数N。为了避免出现异常,可以计算所述页码起始序号和所述页码待显示数据条数的和值,判断所述和值是否大于所述完整过程数据集包含的数据总条数;若是,则提示出现异常,执行后续操作,若否,则确定未出现异常则执行后续操作。
例如,页码起始序号K为90和页码待显示数据条数11,完整过程数据集包含的数据总条数100,则页码起始序号K90与页码待显示数据条数11的和值101大于数据总条数100,此时确定出现异常,提示出现异常。
其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息,或,索引信息于索引服务器中的位置信息。
在令牌包括的是索引信息于索引服务器中的位置信息,则可以基于位置信息于索引服务器中查询并获取索引信息,已继续进行后续操作。
可选的,所述令牌还可以包括第一系统时间,则工业云平台可以执行验证是否超时的操作:
验证当前的第二系统时间和所述第一系统时间的差值是否小于阈值,若所述差值小于阈值则确定所述第二查询请求未超时,执行后续操作;若所述差值大于阈值,则确定所述第二查询请求超时,不执行后续操作。
可选的,所述令牌数据还包括第一查询请求中的查询条件,则工业云平台可以执行验证是否查询条件是否一致的操作:
验证所述第二查询请求中的查询条件与所述第一查询请求中的查询条件是否一致,若一致则确定未出现异常,执行后续操作;若不一致则提示出现异常,不执行后续操作。
步骤S304:工业云平台基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集。
工业云平台获得各个数据块的索引信息,确定各个数据块符合查询条件的过程数据条数。根据页码序号范围来确定对应的数据块。
例如,完整数据块对应2个数据块,第一个数据块中符合查询条件的数量为30个,第二数据块中符合查询条件的数量为20个。假设每页显示条数为10条的情况下,序号1-序号30的过程数据在第一数据块,序号40-序号50的过程数据在第二数据块中。
在页码查询范围为K=40,N=10的情况下,则可以确定数据块为第二数据块。可以在第二数据块中按时间顺序由上至下获得10条过程数据,即为所需的过程数据集。
步骤S305:工业云平台反馈所述过程数据集至所述客户端。
步骤S306:客户端显示过程数据集和页码。
客户端在接收第二查询请求对应的过程数据集之后,可以显示过程数据集和页码(即第二查询请求中页码序号范围对应的页码),以供用户查看。
通过实施例一和实施例二可知,本发明具有以下有益效果:
为了提高查询效率,本发明工业云平台预先查询并获得符合查询条件的完整过程数据集,并确定完整过程数据集所对应的各个数据块的索引信息,并至少利用各个数据块的索引信息生成令牌。
客户端再次向工业云平台发送的第二查询请求中携带有令牌,由于令牌中携带有已经基于查询条件查询后的完整过程数据集对应的各个数据块的索引信息,因此,不必再次基于查询条件于全部过程数据中执行查询操作,仅需基于各个数据块的索引信息查找到页码序号范围对应的过程数据集即可。
本过程通过令牌作为客户端与工业云平台之间的凭证,从而避免工业云平台将第二查询请求作为新查询请求,不必再重新执行整体查询操作,提高查询效率。
并且,工业云平台保存完整过程数据集对应的各个数据块的索引信息,通过各个数据块的索引信息可以直接简便地查询到某页对应的过程数据,更进一步提高查询效率。
参见图4,本申请提供了一种数据查询装置实施例一,适用于工业云平台,数据查询装置包括:
接收单元41,用于接收客户端发送的第二查询请求;其中所述第二查询请求包括页码序号范围、查询条件和令牌;
解析单元42,用于解析所述第二查询请求获得页码序号范围、查询条件和令牌;其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
查询单元43,用于基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
反馈单元44,用于反馈所述过程数据集至所述客户端。
参见图5,本申请提供了一种数据查询装置实施例二,适用于客户端,数据查询装置包括:
生成单元51,用于生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
发送单元52,用于发送所述第二查询请求至工业云平台,以供所述工业云平台解析所述第二查询请求获得所述令牌,并基于所述令牌中的各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
接收并显示单元53,用于接收并显示所述工业云平台反馈的所述页码序号范围对应的过程数据集。
关于图4所示的数据查询装置的具体实现和扩展内容详见参见图2和图3所示的实施例中的工业云平台的执行过程。关于图5所示的数据查询装置的具体实现和扩展内容详见参见图2和图3所示的实施例中的客户端的执行过程。在此不再赘述。
参见图1,本申请提供了一种数据查询系统。
一个或多个工业控制装置100(图示展示m个工业控制装置,m为正整数)、工业云平台200和一个或多个客户端300(图示展示n个客户端,n为正整数)。可以理解的是,工业云平台由一个或多个服务器组成。
其中,客户端300,用于发送第二查询请求,接收并显示工业云平台反馈的过程数据集;其中所述第二查询请求包括页码序号范围、查询条件和令牌;其中所述令牌包括预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
工业云平台200,用于接收客户端发送的第二查询请求;解析所述第二查询请求获得页码序号范围、查询条件和令牌;基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;反馈所述过程数据集至所述客户端。
可选的,客户端300,还用于发送包含所述查询条件的第一查询请求至工业云平台;接收并存储所述工业云平台发送的所述令牌和所述完整过程数据集包含的数据总条数;
工业云平台200,还用于接收所述客户端发送的包含所述查询条件的第一查询请求;基于所述查询条件执行查询操作,获得所述完整过程数据集;依据记录过程数据和数据块之间对应关系的预设索引表,确定所述完整过程数据集对应的各个数据块的索引信息;基于令牌数据生成所述令牌;其中所述令牌数据包括所述各个数据块的索引信息或索引信息于索引服务器中的位置信息;发送所述令牌和所述完整过程数据集包含的数据总条数至所述客户端。
可选的,所述各个数据块的索引信息包括所述完整过程数据集对应的各个数据块的索引信息,并且,各个数据块的索引信息按照各个数据块创建时间的先后顺序排序;
每个数据块的索引信息包括:
数据块所属服务器的服务器标识;
数据块于服务器中所属存档文件的存档文件标识;
数据块于存档文件中的偏移地址;
数据块中符合所述查询条件的过程数据条数。
工业云平台200中基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集,包括:
按各个数据块的索引信息的先后顺序和各个数据块中符合所述查询条件的过程数据条数,确定所述页码序号范围对应的一个或两个数据块;
从所述一个或两个数据块中,获取所述页码序号范围对应的一个或多个过程数据;
将所述一个或多个过程数据确定为所述过程数据集。
所述令牌数据还包括第一系统时间,则所述令牌还包括第一系统时间;则工业云平台200在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证当前的第二系统时间和所述第一系统时间的差值是否小于阈值,若所述差值小于阈值则确定所述第二查询请求未超时,执行后续操作;若所述差值大于阈值,则确定所述第二查询请求超时,不执行后续操作;
所述令牌数据还包括第一查询请求中的查询条件,则所述令牌还包括第一查询请求中的查询条件;则工业云平台200在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证所述第二查询请求中的查询条件与所述第一查询请求中的查询条件是否一致,若一致则确定未出现异常,执行后续操作;若不一致则提示出现异常,不执行后续操作;
所述页码序号范围包括:页码起始序号和页码待显示数据条数;则工业云平台200在基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
计算所述页码起始序号和所述页码待显示数据条数的和值,判断所述和值是否大于所述完整过程数据集包含的数据总条数;若是,则提示出现异常,执行后续操作,若否,则确定未出现异常则执行后续操作;
工业云平台200中基于令牌数据生成所述令牌包括基于所述令牌数据执行加密操作获得加密后的令牌;则所述解析所述第二查询请求获得令牌,包括解析所述第二查询请求并执行解密操作,获得解密后的令牌。
关于数据查询系统的具体实现可以参见图2和图3所示的实施例,在此不再赘述。
本实施例方法所述的功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算设备可读取存储介质中。基于这样的理解,本发明实施例对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一台计算设备(可以是个人计算机,服务器,移动计算设备或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
本说明书中各个实施例采用递进的方式描述,每个实施例重点说明的都是与其它实施例的不同之处,各个实施例之间相同或相似部分互相参见即可。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种数据查询方法,其特征在于,包括:
接收客户端发送的第二查询请求;
解析所述第二查询请求获得页码序号范围、查询条件和令牌;其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
反馈所述过程数据集至所述客户端。
2.如权利要求1所述的方法,其特征在于,在所述接收客户端发送的查询请求之前,还包括:
接收所述客户端发送的包含所述查询条件的第一查询请求;
基于所述查询条件执行查询操作,获得所述完整过程数据集;
依据记录过程数据和数据块之间对应关系的预设索引表,确定所述完整过程数据集对应的各个数据块的索引信息;
基于令牌数据生成所述令牌;其中所述令牌数据包括所述各个数据块的索引信息或索引信息于索引服务器中的位置信息;
发送所述令牌和所述完整过程数据集包含的数据总条数至所述客户端。
3.如权利要求1或2所述的方法,其特征在于,所述各个数据块的索引信息包括所述完整过程数据集对应的各个数据块的索引信息,并且,各个数据块的索引信息按照各个数据块创建时间的先后顺序排序;
每个数据块的索引信息包括:
数据块所属服务器的服务器标识;
数据块于服务器中所属存档文件的存档文件标识;
数据块于存档文件中的偏移地址;
数据块中符合所述查询条件的过程数据条数。
4.如权利要求3所述的方法,其特征在于,所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集,包括:
按各个数据块的索引信息的先后顺序和各个数据块中符合所述查询条件的过程数据条数,确定所述页码序号范围对应的一个或两个数据块;
从所述一个或两个数据块中,获取所述页码序号范围对应的一个或多个过程数据;
将所述一个或多个过程数据确定为所述过程数据集。
5.如权利要求2所述的方法,其特征在于,
所述令牌数据还包括第一系统时间,则所述令牌还包括第一系统时间;则在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证当前的第二系统时间和所述第一系统时间的差值是否小于阈值,若所述差值小于阈值则确定所述第二查询请求未超时,执行后续操作;若所述差值大于阈值,则确定所述第二查询请求超时,不执行后续操作;
所述令牌数据还包括第一查询请求中的查询条件,则所述令牌还包括第一查询请求中的查询条件;则在所述基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
验证所述第二查询请求中的查询条件与所述第一查询请求中的查询条件是否一致,若一致则确定未出现异常,执行后续操作;若不一致则提示出现异常,不执行后续操作;
所述页码序号范围包括:页码起始序号和页码待显示数据条数;则在基于所述各个数据块的索引信息,查询并获取所述页码序号范围对应的过程数据集之前,还包括:
计算所述页码起始序号和所述页码待显示数据条数的和值,判断所述和值是否大于所述完整过程数据集包含的数据总条数;若是,则提示出现异常,执行后续操作,若否,则确定未出现异常则执行后续操作;
所述基于令牌数据生成所述令牌包括基于所述令牌数据执行加密操作获得加密后的令牌;则所述解析所述第二查询请求获得令牌,包括解析所述第二查询请求并执行解密操作,获得解密后的令牌。
6.一种数据查询方法,其特征在于,包括:
生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
发送所述第二查询请求至工业云平台,以供所述工业云平台解析所述第二查询请求获得所述令牌,并基于所述令牌中的各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
接收并显示所述工业云平台反馈的所述页码序号范围对应的过程数据集。
7.如权利要求6所述的方法,其特征在于,还包括:
发送包含所述查询条件的第一查询请求至工业云平台;
接收并存储所述工业云平台发送的所述令牌和所述完整过程数据集包含的数据总条数。
8.一种数据查询装置,其特征在于,包括:
接收单元,用于接收客户端发送的第二查询请求;
解析单元,用于解析所述第二查询请求获得页码序号范围、查询条件和令牌;其中所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
查询单元,用于基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
反馈单元,用于反馈所述过程数据集至所述客户端。
9.一种数据查询装置,其特征在于,包括:
生成单元,用于生成第二查询请求;其中,所述第二查询请求包括页码序号范围、查询条件和令牌,所述令牌包括:预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
发送单元,用于发送所述第二查询请求至工业云平台,以供所述工业云平台解析所述第二查询请求获得所述令牌,并基于所述令牌中的各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;
接收并显示单元,用于接收并显示所述工业云平台反馈的所述页码序号范围对应的过程数据集。
10.一种数据查询系统,其特征在于,包括:工业云平台和客户端;
客户端,用于发送第二查询请求,接收并显示工业云平台反馈的过程数据集;其中所述第二查询请求包括页码序号范围、查询条件和令牌;其中所述令牌包括预先基于所述查询条件查询所获得的完整过程数据集对应的各个数据块的索引信息;
工业云平台,用于接收客户端发送的第二查询请求;解析所述第二查询请求获得页码序号范围、查询条件和令牌;基于所述各个数据块的索引信息,查询并获得所述页码序号范围对应的过程数据集;反馈所述过程数据集至所述客户端。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910987789.7A CN110727835B (zh) | 2019-10-17 | 2019-10-17 | 数据查询方法、装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910987789.7A CN110727835B (zh) | 2019-10-17 | 2019-10-17 | 数据查询方法、装置及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110727835A true CN110727835A (zh) | 2020-01-24 |
CN110727835B CN110727835B (zh) | 2021-03-12 |
Family
ID=69220222
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910987789.7A Active CN110727835B (zh) | 2019-10-17 | 2019-10-17 | 数据查询方法、装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110727835B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114491145A (zh) * | 2022-01-27 | 2022-05-13 | 北京中电兴发科技有限公司 | 一种基于流存储的元数据设计方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1717660A (zh) * | 2002-11-25 | 2006-01-04 | 松下电器产业株式会社 | 文件管理装置、文件管理方法、文件管理程序和记录介质 |
WO2009131800A2 (en) * | 2008-04-20 | 2009-10-29 | Tigerlogic Corporation | Systems and methods of identifying chunks from multiple syndicated content providers |
KR20100117415A (ko) * | 2009-04-24 | 2010-11-03 | 엔에이치엔(주) | 데이터베이스 관리 방법 및 시스템 |
CN103281377A (zh) * | 2013-05-31 | 2013-09-04 | 北京鹏宇成软件技术有限公司 | 一种面向云的密文数据存储与查询方法 |
CN104036050A (zh) * | 2014-07-04 | 2014-09-10 | 福建师范大学 | 一种密文云数据复杂查询方法 |
CN104516979A (zh) * | 2014-12-31 | 2015-04-15 | 北京锐安科技有限公司 | 一种基于二次检索的数据查询方法及系统 |
CN105389386A (zh) * | 2015-12-10 | 2016-03-09 | 无锡天脉聚源传媒科技有限公司 | 一种基于搜索结果的分页处理方法和装置 |
-
2019
- 2019-10-17 CN CN201910987789.7A patent/CN110727835B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1717660A (zh) * | 2002-11-25 | 2006-01-04 | 松下电器产业株式会社 | 文件管理装置、文件管理方法、文件管理程序和记录介质 |
WO2009131800A2 (en) * | 2008-04-20 | 2009-10-29 | Tigerlogic Corporation | Systems and methods of identifying chunks from multiple syndicated content providers |
KR20100117415A (ko) * | 2009-04-24 | 2010-11-03 | 엔에이치엔(주) | 데이터베이스 관리 방법 및 시스템 |
CN103281377A (zh) * | 2013-05-31 | 2013-09-04 | 北京鹏宇成软件技术有限公司 | 一种面向云的密文数据存储与查询方法 |
CN104036050A (zh) * | 2014-07-04 | 2014-09-10 | 福建师范大学 | 一种密文云数据复杂查询方法 |
CN104516979A (zh) * | 2014-12-31 | 2015-04-15 | 北京锐安科技有限公司 | 一种基于二次检索的数据查询方法及系统 |
CN105389386A (zh) * | 2015-12-10 | 2016-03-09 | 无锡天脉聚源传媒科技有限公司 | 一种基于搜索结果的分页处理方法和装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114491145A (zh) * | 2022-01-27 | 2022-05-13 | 北京中电兴发科技有限公司 | 一种基于流存储的元数据设计方法 |
CN114491145B (zh) * | 2022-01-27 | 2022-10-21 | 北京中电兴发科技有限公司 | 一种基于流存储的元数据设计方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110727835B (zh) | 2021-03-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103678293B (zh) | 一种数据存储方法及装置 | |
CN102208991A (zh) | 一种日志处理方法、设备和系统 | |
CN107770229B (zh) | 云端文件分享方法、系统和云服务器 | |
CN109657107B (zh) | 一种基于第三方应用的终端匹配方法和装置 | |
CN105701096A (zh) | 索引生成方法、数据查询方法、装置及系统 | |
CN105447113A (zh) | 一种基于大数据的信息分析方法 | |
US11238402B2 (en) | Information operation | |
US10540325B2 (en) | Method and device for identifying junk picture files | |
US20130347127A1 (en) | Database management by analyzing usage of database fields | |
CN110516471B (zh) | 基于信息安全的产品推广方法及相关设备 | |
EP3803625A1 (en) | Frequent pattern analysis for distributed systems | |
CN110727835B (zh) | 数据查询方法、装置及系统 | |
CN110807009B (zh) | 文件处理方法及装置 | |
CN107005576B (zh) | 从服务器日志生成用于链接标识符的桥接匹配标识符 | |
CN104503983A (zh) | 为搜索引擎提供网站认证数据的方法及装置 | |
CN105184559A (zh) | 一种支付系统及方法 | |
CN111666509A (zh) | 基于跨网络地理数据的云查询方法及系统 | |
CN110888840A (zh) | 分布式文件系统中的文件查询方法、装置、设备及介质 | |
CN108874856B (zh) | 一种页面生成系统、方法及服务器 | |
CN109389271B (zh) | 应用性能管理方法及系统 | |
CN113449042B (zh) | 数据自动分库方法及装置 | |
CN115098738A (zh) | 业务数据的提取方法、装置、存储介质及电子设备 | |
CN115454362A (zh) | 远程打印的实现方法、装置、设备及存储介质 | |
CN111310088B (zh) | 一种页面渲染方法及装置 | |
CN109525649B (zh) | 一种zookeeper客户端的数据处理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |