CN113961585A - 数据处理方法、装置、电子设备和存储介质 - Google Patents

数据处理方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN113961585A
CN113961585A CN202111223210.3A CN202111223210A CN113961585A CN 113961585 A CN113961585 A CN 113961585A CN 202111223210 A CN202111223210 A CN 202111223210A CN 113961585 A CN113961585 A CN 113961585A
Authority
CN
China
Prior art keywords
data
task
information
determining
information set
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111223210.3A
Other languages
English (en)
Inventor
邱世阳
胡志鹏
程龙
刘勇成
袁思思
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Netease Hangzhou Network Co Ltd
Original Assignee
Netease Hangzhou Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Netease Hangzhou Network Co Ltd filed Critical Netease Hangzhou Network Co Ltd
Priority to CN202111223210.3A priority Critical patent/CN113961585A/zh
Publication of CN113961585A publication Critical patent/CN113961585A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/242Query formulation
    • G06F16/2433Query languages
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/248Presentation of query results

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了数据处理方法、装置、电子设备和存储介质;本发明可以确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;基于第二数据的信息集合,建立任务与第二数据的第二关联关系;基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。在本发明中,通过建立数据展示页面与任务之间的关联关系,可以在出现异常时,根据关联关系快速准确地定位异常的任务或异常的数据展示页面。由此,本方案可以提升数据展示系统的维护效率。

Description

数据处理方法、装置、电子设备和存储介质
技术领域
本发明涉及计算机技术领域,具体涉及数据处理方法、装置、电子设备和存储介质。
背景技术
数据展示系统可以将数据以图形图像的形式在前端的数据展示页面中显示,从而达到清晰有效地传达与沟通信息的效果。通常数据展示页面中所展示的数据会由后台的任务生成并保存到数据库中,数据展示页面可从数据库中获取数据并进行展示。
目前,当出现异常时,无法快速准确地定位出现异常的任务或异常的数据展示页面,导致维护数据展示系统的效率较低。
发明内容
本发明提供数据处理方法、装置、电子设备和存储介质,可以提升数据展示系统的维护效率。
本发明提供一种数据处理方法,包括:
确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;
基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;
基于第二数据的信息集合,建立任务与第二数据的第二关联关系;
基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
本发明还提供一种数据处理装置,包括:
第一确定单元,用于确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;
第一建立单元,用于基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;
第二建立单元,用于基于第二数据的信息集合,建立任务与第二数据的第二关联关系;
第二确定单元,用于基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在一些实施例中,第二确定单元具体用于:
基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务;
基于第一关联关系,确定数据展示页面与关联任务的关联关系。
在一些实施例中,第二确定单元具体用于:
当关联任务不存在于预设任务集合中时,采用关联任务更新预设任务集合;
基于第二关联关系,确定预设任务集合中关联任务访问的第二数据的信息;
当关联任务访问的第二数据的信息不存在于第一数据的信息集合中时,采用关联任务访问的第二数据的信息更新第一数据的信息集合。
在一些实施例中,第二确定单元具体用于:
确定任务之间的依赖关系;
基于任务之间的依赖关系,确定关联任务依赖的依赖任务;
当依赖任务不存在于预设任务集合中时,采用依赖任务更新预设任务集合。
在一些实施例中,第一确定单元具体用于:
获取目标代码,目标代码包括以下至少一项:构成数据展示页面的页面代码、构成任务的任务代码;
对目标代码进行分析处理,得到语法树;
基于语法树,确定目标数据的信息集合,目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。
在一些实施例中,语法树包括多个节点,第一确定单元具体用于:
对语法树进行遍历,确定语法树中包含预设字段的目标节点;
将目标节点中预设字段对应的数据的信息确定为目标数据的信息。
在一些实施例中,数据处理装置还用于:
监测数据访问请求;
确定数据访问请求访问的数据的信息;
当数据访问请求访问的数据的信息不存在与目标数据的信息集合中时,采用数据访问请求访问的数据的信息更新目标数据的信息集合。
在一些实施例中,数据访问请求包括以下至少一项:数据展示页面发起的访问请求,任务发起的访问请求;目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。
在一些实施例中,第二确定单元还用于:
在目标数据展示页面异常时,根据数据展示页面与任务的关联关系,确定并显示目标数据展示页面对应的异常任务;或者,
在目标任务异常时,根据数据展示页面与任务的关联关系,确定并显示目标任务对应的异常数据展示页面,目标数据展示页面为数据展示页面中的任一数据展示页面,目标任务为任务中的任一任务。
本发明还提供一种电子设备,包括存储器和处理器,存储器存储有多条指令;所述处理器从所述存储器中加载指令,以执行本发明所提供的任一种数据处理方法中的步骤。
本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行本发明所提供的任一种数据处理方法中的步骤。
本发明可以确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;基于第二数据的信息集合,建立任务与第二数据的第二关联关系;基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在本发明中,通过建立数据展示系统中数据展示页面与数据的关联关系,和任务与数据的关联关系,来得到数据展示页面与任务之间的关联关系,可以在出现异常时,根据该关联关系快速准确地定位异常的任务或异常的数据展示页面,提示研发人员以使研发人员快速准确地定位到异常的任务并进行维护,减少了需要排查的任务,可以提高维护的效率。由此,本方案可以提升数据展示系统维护的效率。
附图说明
为了更清楚地说明本发明中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的一种数据处理方法的流程示意图;
图2是本发明提供的另一种数据处理方法的流程示意图;
图3是本发明提供的数据处理装置的一种结构示意图;
图4是本发明提供的电子设备的结构示意图。
具体实施方式
下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明提供数据处理方法、装置、电子设备和存储介质。
其中,该数据处理装置具体可以集成在电子设备中,该电子设备可以为终端、服务器等设备。其中,终端可以为手机、平板电脑、智能蓝牙设备、笔记本电脑、或者个人电脑(Personal Computer,PC)等设备;服务器可以是单一服务器,也可以是由多个服务器组成的服务器集群。
在一些实施例中,该数据处理装置还可以集成在多个电子设备中,比如,数据处理装置可以集成在多个服务器中,由多个服务器来实现本发明的数据处理方法。
在一些实施例中,服务器也可以以终端的形式来实现。
例如,该电子设备可以确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;基于第二数据的信息集合,建立任务与第二数据的第二关联关系;基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在本发明中,首先,建立数据展示页面与数据之间的关联关系以及任务与数据之间的关联关系,然后根据数据展示页面与数据之间的关联关系以及任务与数据之间的关联关系,建立数据展示页面与任务之间的关联关系,可以在出现异常时,根据该关联关系快速准确地定位异常的任务或异常的数据展示页面。由此,本方案可以提升数据展示系统维护的效率。
以下分别进行详细说明。需说明的是,以下实施例的序号不作为对实施例优选顺序的限定。
在本实施例中,提供了一种数据处理方法,如图1所示,该数据处理方法的具体流程可以如下:
110、确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集。
其中,数据展示页面可以是数据展示系统面向用户的用户界面,数据展示系统可以包括多个数据展示页面。在一些实施例中,数据展示系统可以是由任意网站、应用程序、小程序等的前端和后台组成;例如,数据展示页面可以为电子游戏的排行榜、战绩等用户界面。在一些实施例中,数据展示页面可以响应于用户操作来改变显示的数据信息。
第一数据可以为数据展示页面访问的数据,该数据的数量不做限制,本发明中的访问的方式可以包括但不限于读取、写入、删除、修改等。例如,可以在用户操作数据展示页面时(如打开数据展示页面、筛选数据展示页面中的信息),数据展示页面响应于用户操作,从数据库或数据存储设备中读取到的数据(也可称页面查询过程)。在一些实施例中,本发明中的数据可以任何形式进行存储,可以包括表(数据表)、链表、元组、树等形式;例如可以以数据表的形式存储在数据库中,该数据库可以是关系型数据,也可以是非关系型数据库。
第一数据的信息可以是第一数据的唯一标识,例如,可以是数据表的表名、编号(表0x1至表0xx)等可以对数据表进行区分的标识。第一数据的信息集合可以是数据展示页面访问的所有数据的信息组成的集合,该集合的存储形式也不做限制。
任务可以是数据展示系统的基本工作单位,可以完成各种各样的功能。如计算世界排行榜、对个人战绩进行统计分析,等等。
第二数据可以为任务访问的数据;例如,可以为数据展示系统执行任务过程中访问的数据。第二数据与第一数据可以为同一数据库中的数据表,可以是相同的数据表,也可以是不同的数据表;在一些实施例中,执行任务生成第二数据,可以将第二数据写入数据库中,数据展示页面可从数据库中读取该第二数据,即该第二数据为数据展示页面对应的第一数据。例如,执行计算世界排行榜任务,生成排行榜数据并写入对应的数据库,数据展示页面可以从数据库中读取排行榜数据,并经过处理后显示在数据展示页面中。
第二数据的信息也可以是第二数据的唯一标识。当第一数据和第二数据为相同的数据表时,第二数据的信息与第一数据的信息相同;因此第一数据的信息集合与第二数据的信息集合有交集,在特定情况下,第一数据的信息集合与第二数据的信息集合也可以是相同的集合。
确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合的具体实施方式不做限制,在一些实施例中,可以包括如下步骤:
i、获取目标代码,该目标代码对应的编程语言不做限制,目标代码包括以下至少一项:构成数据展示页面的页面代码、构成任务的任务代码。在一些实施例中,页面代码可以获取页面查询过程中调用的结构化查询语言(Structured Query Language,SQL)对应的代码;任务代码可以获取任务执行过程中调用的结构化查询语言对应的代码。
ii、对目标代码进行分析处理,得到语法树;语法树可以是目标代码语法结构的一种抽象表示,以树状的形式表现对应编程语言的语法结构,语法树上的每个节点都表示目标代码中的一种结构。在一些实施例中,对页面代码进行分析处理,得到页面代码对应的语法树。在一些实施例中,对任务代码进行分析处理,得到任务代码对应的语法树。
在一些实施例中,分析处理可以包括但不限于对目标代码进行词法分析和语法分析。例如,以字母为单位读取目标代码中的字符,然后与定义好的结构化查询语言的关键字符比较,生成对应的Token。Token可以是一个不可分割的最小单元。语法分析可以将词法分析出来的Token转化成有语法含义的语法树结构。
iii、基于语法树,确定目标数据的信息集合,目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。
其中,语法树包括多个节点,基于语法树,确定目标数据的信息集合,可以包括:对语法树进行遍历,确定语法树中包含预设字段的目标节点;预设字段可根据实际应用情况自定义设置,例如,可以为SELECT、UPDATE等,目标节点可以为语法树中的任一节点。
将目标节点中预设字段对应的数据的信息确定为目标数据的信息;例如,SELECT、UPDATE等字段对应的数据表的表名。
在一些实施例中,语法树为页面代码对应的语法树,目标数据的信息集合为第一数据的信息集合;基于页面代码对应的语法树,确定第一数据的信息集合。
在一些实施例中,语法树为任务代码对应的语法树,目标数据的信息集合为第二数据信息的集合;基于任务代码对应的语法树,确定第二数据的信息集合。
120、基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系。
第一关联关系表示了数据展示页面与第一数据之间的关联关系。该第一关联关系的具体形式不做限制;例如,可以获取数据展示页面的页面标识,将该页面标识与第一数据的信息集合对应;再如,可以以表的形式进行表示,如下表1所示,可以将页面标识与表名对应:
表1.数据展示页面与第一数据的第一关联关系
Figure BDA0003313391980000081
130、基于第二数据的信息集合,建立任务与第二数据的第二关联关系。
第二关联关系表示了任务与第二数据之间的关联关系。该关联关系的具体形式不做限制;例如,可以获取任务的任务标识,将该任务标识与第二数据信息的集合对应;再如,可以以表的形式进行表示,如下表2所示,可以将任务标识与表名对应:
表2.任务与第二数据的第二关联关系
Figure BDA0003313391980000082
140、基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
其中,数据展示页面与任务的关联关系的具体形式不做限制,可以将页面标识与任务标识对应。
在一些实施例中,基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,可以包括但不限于以下步骤:
基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务,关联任务是指每个数据展示页面对应的与第一数据关联的任务;基于第一关联关系,确定数据展示页面与关联任务的关联关系。在一些实施例中,针对每个数据展示页面,第一数据的信息集合与第二数据的信息集合有交集,因此针对第一数据的信息集合中每个第一数据的信息,基于第二关联关系确定第一数据对应的关联任务;再基于第一关联关系,确定每个数据展示页面与关联任务的关联关系。
以页面1为例,假设页面1的第一数据的信息集合中包括表0x1、表0x4和表0x7,第一关联关系为页面1与表0x1、表0x4和表0x7对应;任务1的第二数据的信息集合中包括表0x1、表0x3和表0x4;任务2的第二数据的信息集合中包括表0x2、表0x4和表0x7,即第二关联关系为任务1对应表0x1、表0x3和表0x4,任务2对应表0x2、表0x4和表0x7。因此,针对第一数据集合中的表0x1可以根据第二关联关系确定与任务1对应,因此任务1为页面1的关联任务;针对第一数据集合中的表0x4和表0x7可以根据第二关联关系确定与任务2对应,因此任务2为页面1的关联任务。最后,将页面1与任务1和任务2对应。
在一些实施例中,针对每个数据展示页面,基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务之后,还可以执行以下步骤:
当关联任务不存在于预设任务集合中时,采用关联任务更新预设任务集合。第一次更新之前的预设任务集合可以为空集,每次确定出新的关联任务时,便可以将新的关联任务添加到预设任务集合中,从而更新预设任务集合。
基于第二关联关系,确定预设任务集合中关联任务访问的第二数据的信息。
当关联任务访问的第二数据的信息不存在于第一数据的信息集合中时,采用关联任务访问的第二数据的信息更新第一数据的信息集合,即将关联任务访问的第二数据的信息作为新的第一数据的信息。
当第一数据的信息集合被更新时,可以执行步骤基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务,直到第一数据的信息集合不再更新,或者预设任务集合不再更新;即不能再确定出新的关联任务或者新的第一数据的信息。数据展示页面与预设任务集合中的关联任务对应。
在一些实施例中,当任务之间存在依赖关系时,可以确定任务之间的依赖关系;基于任务之间的依赖关系,确定关联任务依赖的依赖任务;当依赖任务不存在于预设任务集合中时,采用依赖任务更新预设任务集合,即依赖任务作为新的关联任务加入预设任务集合。
在一些实施例中,当数据展示页面进行了新的查询时,或者当任务代码发生改变时,可以执行以下步骤对关联关系进行更新:
监测数据访问请求;数据访问请求包括以下至少一项:数据展示页面发起的访问请求,任务发起的访问请求。
确定数据访问请求访问的数据的信息;例如,确定数据访问请求访问的数据表的表名。
当数据访问请求访问的数据的信息不存在与目标数据的信息集合中时,采用数据访问请求访问的数据的信息更新目标数据的信息集合。目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。在一些实施例中,当数据访问请求访问的数据的信息不存在于第一数据的信息集合中时,采用数据访问请求访问的数据的信息更新第一数据的信息集合。在一些实施例中,当数据访问请求访问的数据的信息不存在于第二数据的信息集合中时,采用数据访问请求访问的数据的信息更新第二数据的信息集合。
当第一数据的信息集合或者第二数据信息的集合被更新时,可以重新执行本方案步骤S110至S140,以对数据展示页面与任务的关联关系进行更新。
在一些实施例中,显示数据展示页面与任务的关联关系,可以包括:
在目标数据展示页面异常时,根据数据展示页面与任务的关联关系,确定并显示目标数据展示页面对应的异常任务;例如,可以向研发人员提示“数据展示页面出错,关联任务为XX”,以便研发人员快速定位到关联任务进行维护,可以减少需要检查的任务,不必关注其他任务。或者,
在目标任务异常时,根据数据展示页面与任务的关联关系,确定并显示目标任务对应的异常数据展示页面,目标数据展示页面为数据展示页面中的任一数据展示页面,目标任务为任务中的任一任务。例如,在用户访问异常数据展示页面时,该页面提示用户“关联任务出错,本页面数据可能存在异常”。可以提示或者警告用户,以避免用户获得错误的数据信息。
本发明提供的数据处理方案可以应用在各种数据展示的场景中。比如,以电子游戏为例,数据展示页面可以包括战绩、排行榜、大型竞赛战况等等。确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;基于第二数据的信息集合,建立任务与第二数据的第二关联关系;基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。可以提升电子游戏中数据展示页面的维护效率。
由上可知,通过本发明提供的方法可以确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;基于第二数据的信息集合,建立任务与第二数据的第二关联关系;基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在本发明中,通过建立数据展示系统中数据展示页面与数据的关联关系,和任务与数据的关联关系,来得到数据展示页面与任务之间的关联关系,可以在任务出现异常时,根据关联关系快速准确地定位异常的数据展示页面,以便提示用户避免用户获得错误信息;或者可以在数据展示页面出现异常时,根据关联关系快速准确地定位异常的任务,提示研发人员以使研发人员快速定位异常任务并进行维护,减少了需要排查的任务,可以提高维护的效率。由此,本方案可以提升数据展示系统的维护效率。
根据上述实施例所描述的方法,以下将作进一步详细说明。
如图2所示,一种数据处理方法具体流程如下:
210、获取页面查询过程中调用的结构化查询语言对应的页面代码;获取任务执行过程中调用的结构化查询语言对应的任务代码。
220、对页面代码进行分析处理,得到页面代码对应的语法树;对任务代码进行分析处理,得到任务代码对应的语法树。
230、基于页面代码对应的语法树,确定第一数据的信息集合;基于任务代码对应的语法树,确定第二数据的信息集合;第一数据的信息集合与第二数据的信息集合有交集。
240、基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;
250、基于第二数据的信息集合,建立任务与第二数据的第二关联关系;
260、基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在一些实施例中,针对每个数据展示页面:
基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务。
当关联任务不存在于预设任务集合中时,采用关联任务更新预设任务集合。第一次更新之前的预设任务集合可以为空集,每次确定出新的关联任务时,便可以将新的关联任务添加到预设任务集合中,从而更新预设任务集合。
确定任务之间的依赖关系;基于任务之间的依赖关系,确定关联任务依赖的依赖任务;当依赖任务不存在于预设任务集合中时,采用依赖任务更新预设任务集合,即依赖任务作为新的关联任务加入预设任务集合。
基于第二关联关系,确定预设任务集合中关联任务访问的第二数据的信息。
当关联任务访问的第二数据的信息不存在于第一数据的信息集合中时,采用关联任务访问的第二数据的信息更新第一数据的信息集合,即将关联任务访问的第二数据的信息作为新的第一数据的信息。
当第一数据的信息集合被更新时,可以执行步骤基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务,直到第一数据的信息集合不再更新,或者预设任务集合不再更新;即不能再确定出新的关联任务或者新的第一数据的信息。数据展示页面与预设任务集合中的关联任务对应。
在一些实施例中,在目标数据展示页面异常时,根据数据展示页面与任务的关联关系,确定并显示目标数据展示页面对应的异常任务;例如,可以向研发人员提示“数据展示页面出错,关联任务为XX”,以便研发人员快速定位到关联任务进行维护,可以减少需要检查的任务,不必关注其他任务。或者,
在目标任务异常时,根据数据展示页面与任务的关联关系,确定并显示目标任务对应的异常数据展示页面。例如,在用户访问异常数据展示页面时,该页面提示用户“关联任务出错,本页面数据可能存在异常”。可以提示或者警告用户,以避免用户获得错误的数据信息。
由上可知,在数据展示系统中,通过分析页面查询过程中调用的结构化查询语言代码,来建立数据展示页面与数据的关联关系;通过分析任务执行过程中任务与数据的关联关系;然后基于数据展示页面与数据的关联关系和任务与数据的关联关系,来得到数据展示页面与任务之间的关联关系;可以在任务出现异常时,根据关联关系快速准确地定位异常的数据展示页面,以便提示用户避免用户获得错误信息;或者可以在数据展示页面出现异常时,根据关联关系快速准确地定位异常的任务,提示研发人员以使研发人员快速定位异常任务并进行维护,减少了需要排查的任务,可以提高维护的效率。由此,本方案可以提升数据展示系统的维护效率。
为了更好地实施以上方法,本发明还提供一种数据处理装置,该数据处理装置具体可以集成在电子设备中,该电子设备可以为终端、服务器等设备。其中,终端可以为手机、平板电脑、智能蓝牙设备、笔记本电脑、个人电脑等设备;服务器可以是单一服务器,也可以是由多个服务器组成的服务器集群。
比如,在本实施例中,将以数据处理装置具体集成在电子设备为例,对本发明的方法进行详细说明。
例如,如图3所示,该数据处理装置可以包括第一确定单元301、第一建立单元302、第二建立单元303以及第二确定单元304,如下:
(一)第一确定单元301
第一确定单元301,用于确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集。
(2)第一建立单元302
第一建立单元302,用于基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系。
(3)第二建立单元303
第二建立单元303,用于基于第二数据的信息集合,建立任务与第二数据的第二关联关系。
(4)第二确定单元304
第二确定单元304,用于基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
在一些实施例中,第二确定单元304具体用于:
基于第二关联关系和第一数据的信息集合,确定与第一数据对应的关联任务;
基于第一关联关系,确定数据展示页面与关联任务的关联关系。
在一些实施例中,第二确定单元304具体用于:
当关联任务不存在于预设任务集合中时,采用关联任务更新预设任务集合;
基于第二关联关系,确定预设任务集合中关联任务访问的第二数据的信息;
当关联任务访问的第二数据的信息不存在于第一数据的信息集合中时,采用关联任务访问的第二数据的信息更新第一数据的信息集合。
在一些实施例中,第二确定单元304具体用于:
确定任务之间的依赖关系;
基于任务之间的依赖关系,确定关联任务依赖的依赖任务;
当依赖任务不存在于预设任务集合中时,采用依赖任务更新预设任务集合。
在一些实施例中,第一确定单元301具体用于:
获取目标代码,目标代码包括以下至少一项:构成数据展示页面的页面代码、构成任务的任务代码;
对目标代码进行分析处理,得到语法树;
基于语法树,确定目标数据的信息集合,目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。
在一些实施例中,语法树包括多个节点,第一确定单元301具体用于:
对语法树进行遍历,确定语法树中包含预设字段的目标节点;
将目标节点中预设字段对应的数据的信息确定为目标数据的信息。
在一些实施例中,数据处理装置还用于:
监测数据访问请求;
确定数据访问请求访问的数据的信息;
当数据访问请求访问的数据的信息不存在与目标数据的信息集合中时,采用数据访问请求访问的数据的信息更新目标数据的信息集合。
在一些实施例中,数据访问请求包括以下至少一项:数据展示页面发起的访问请求,任务发起的访问请求;目标数据的信息集合包括以下至少一项:第一数据的信息集合、第二数据的信息集合。
在一些实施例中,第二确定单元304还用于:
在目标数据展示页面异常时,根据数据展示页面与任务的关联关系,确定并显示目标数据展示页面对应的异常任务;或者,
在目标任务异常时,根据数据展示页面与任务的关联关系,确定并显示目标任务对应的异常数据展示页面,目标数据展示页面为数据展示页面中的任一数据展示页面,目标任务为任务中的任一任务。
具体实施时,以上各个单元可以作为独立的实体来实现,也可以进行任意组合,作为同一或若干个实体来实现,以上各个单元的具体实施可参见前面的方法实施例,在此不再赘述。
由上可知,本实施例的数据处理装置可以通过建立数据展示系统中数据展示页面与数据的关联关系,和任务与数据的关联关系,来得到数据展示页面与任务之间的关联关系,可以在出现异常时,根据该关联关系快速准确地定位异常的任务或异常的数据展示页面,提示研发人员以使研发人员快速定位到异常的任务并进行维护,减少了需要排查的任务,可以提高维护的效率。由此,本方案可以提升数据展示系统维护的效率。
相应的,本申请实施例还提供一种电子设备,该电子设备可以为终端或服务器,该终端可以为智能手机、平板电脑、笔记本电脑、触控屏幕、游戏机、个人计算机、个人数字助理(Personal Digital Assistant,PDA)等终端设备。
如图4所示,图4为本申请实施例提供的电子设备的结构示意图,该电子设备400包括有一个或者一个以上处理核心的处理器401、有一个或一个以上计算机可读存储介质的存储器402及存储在存储器402上并可在处理器上运行的计算机程序。其中,处理器401与存储器402电性连接。本领域技术人员可以理解,图中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
处理器401是电子设备400的控制中心,利用各种接口和线路连接整个电子设备400的各个部分,通过运行或加载存储在存储器402内的软件程序和/或模块,以及调用存储在存储器402内的数据,执行电子设备400的各种功能和处理数据,从而对电子设备400进行整体监控。
在本申请实施例中,电子设备400中的处理器401会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器402中,并由处理器401来运行存储在存储器402中的应用程序,从而实现各种功能:
确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;
基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;
基于第二数据的信息集合,建立任务与第二数据的第二关联关系;
基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
可选的,如图4所示,电子设备400还包括:触控显示屏403、射频电路404、音频电路405、输入单元406以及电源407。其中,处理器401分别与触控显示屏403、射频电路404、音频电路405、输入单元406以及电源407电性连接。本领域技术人员可以理解,图4中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
触控显示屏403可用于显示图形用户界面以及接收用户作用于图形用户界面产生的操作指令。触控显示屏403可以包括显示面板和触控面板。其中,显示面板可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。可选的,可以采用液晶显示器(LCD,Liquid Crystal Display)、有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。触控面板可用于收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作),并生成相应的操作指令,且操作指令执行对应程序。可选的,触控面板可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器401,并能接收处理器401发来的命令并加以执行。触控面板可覆盖显示面板,当触控面板检测到在其上或附近的触摸操作后,传送给处理器401以确定触摸事件的类型,随后处理器401根据触摸事件的类型在显示面板上提供相应的视觉输出。在本申请实施例中,可以将触控面板与显示面板集成到触控显示屏403而实现输入和输出功能。但是在某些实施例中,触控面板与触控面板可以作为两个独立的部件来实现输入和输出功能。即触控显示屏403也可以作为输入单元406的一部分实现输入功能。
在本申请实施例中,通过处理器401执行构成数据展示页面的代码在触控显示屏403上生成图形用户界面,图形用户界面上的虚拟场景中包含至少一个数据展示区域。该触控显示屏403用于呈现图形用户界面以及接收用户作用于图形用户界面产生的操作指令。
射频电路404可用于收发射频信号,以通过无线通信与网络设备或其他电子设备建立无线通讯,与网络设备或其他电子设备之间收发信号。
音频电路405可以用于通过扬声器、传声器提供用户与电子设备之间的音频接口。音频电路405可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路405接收后转换为音频数据,再将音频数据输出处理器401处理后,经射频电路404以发送给比如另一电子设备,或者将音频数据输出至存储器402以便进一步处理。音频电路405还可能包括耳塞插孔,以提供外设耳机与电子设备的通信。
输入单元406可用于接收输入的数字、字符信息或用户特征信息(例如指纹、虹膜、面部信息等),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
电源407用于给电子设备400的各个部件供电。可选的,电源407可以通过电源管理系统与处理器401逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源407还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图4中未示出,电子设备400还可以包括摄像头、传感器、无线保真模块、蓝牙模块等,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
由上可知,本实施例提供的电子设备可以通过建立数据展示系统中数据展示页面与数据的关联关系,和任务与数据的关联关系,来得到数据展示页面与任务之间的关联关系,可以在出现异常时,根据该关联关系快速准确地定位异常的任务或异常的数据展示页面,提示研发人员以使研发人员快速定位到异常的任务并进行维护,减少了需要排查的任务,可以提高维护的效率。由此,本方案可以提升数据展示系统维护的效率。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种数据处理方法中的步骤。例如,该计算机程序可以执行如下步骤:
确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,第一数据的信息集合与第二数据的信息集合有交集;
基于第一数据的信息集合,建立数据展示页面与第一数据的第一关联关系;
基于第二数据的信息集合,建立任务与第二数据的第二关联关系;
基于第一关联关系和第二关联关系,确定数据展示页面与任务的关联关系,以便显示数据展示页面与任务的关联关系。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种数据处理方法中的步骤,因此,可以实现本申请实施例所提供的任一种数据处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种数据处理方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种数据处理方法,其特征在于,包括:
确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,所述第一数据的信息集合与所述第二数据的信息集合有交集;
基于所述第一数据的信息集合,建立所述数据展示页面与所述第一数据的第一关联关系;
基于所述第二数据的信息集合,建立所述任务与所述第二数据的第二关联关系;
基于所述第一关联关系和所述第二关联关系,确定所述数据展示页面与所述任务的关联关系,以便显示所述数据展示页面与所述任务的关联关系。
2.如权利要求1所述的数据处理方法,其特征在于,所述基于所述第一关联关系和所述第二关联关系,确定所述数据展示页面与所述任务的关联关系,包括:
基于所述第二关联关系和所述第一数据的信息集合,确定与所述第一数据对应的关联任务;
基于所述第一关联关系,确定所述数据展示页面与所述关联任务的关联关系。
3.如权利要求2所述的数据处理方法,其特征在于,所述基于所述第二关联关系和所述第一数据的信息集合,确定与所述第一数据对应的关联任务之后,还包括:
当所述关联任务不存在于预设任务集合中时,采用所述关联任务更新所述预设任务集合;
基于所述第二关联关系,确定所述预设任务集合中关联任务访问的第二数据的信息;
当所述关联任务访问的第二数据的信息不存在于所述第一数据的信息集合中时,采用所述关联任务访问的第二数据的信息更新所述第一数据的信息集合。
4.如权利要求3所述的数据处理方法,其特征在于,所述基于所述第二关联关系和所述第一数据的信息集合,确定与所述第一数据对应的关联任务之后,还包括:
确定所述任务之间的依赖关系;
基于所述任务之间的依赖关系,确定所述关联任务依赖的依赖任务;
当所述依赖任务不存在于预设任务集合中时,采用所述依赖任务更新所述预设任务集合。
5.如权利要求1所述的数据处理方法,其特征在于,所述确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,包括:
获取目标代码,所述目标代码包括以下至少一项:构成所述数据展示页面的页面代码、构成所述任务的任务代码;
对所述目标代码进行分析处理,得到语法树;
基于所述语法树,确定目标数据的信息集合,所述目标数据的信息集合包括以下至少一项:所述第一数据的信息集合、所述第二数据的信息集合。
6.如权利要求5所述的数据处理方法,其特征在于,所述语法树包括多个节点,所述基于所述语法树,确定目标数据的信息集合,包括:
对所述语法树进行遍历,确定所述语法树中包含预设字段的目标节点;
将所述目标节点中所述预设字段对应的数据的信息确定为目标数据的信息。
7.如权利要求1所述的数据处理方法,其特征在于,所述方法还包括:
监测数据访问请求;
确定所述数据访问请求访问的数据的信息;
当所述数据访问请求访问的数据的信息不存在与目标数据的信息集合中时,采用所述数据访问请求访问的数据的信息更新所述目标数据的信息集合。
8.如权利要求7所述的数据处理方法,其特征在于,所述数据访问请求包括以下至少一项:所述数据展示页面发起的访问请求,所述任务发起的访问请求;所述目标数据的信息集合包括以下至少一项:所述第一数据的信息集合、所述第二数据的信息集合。
9.如权利要求1所述的数据处理方法,其特征在于,所述显示所述数据展示页面与所述任务的关联关系,包括:
在目标数据展示页面异常时,根据所述数据展示页面与所述任务的关联关系,确定并显示所述目标数据展示页面对应的异常任务;或者,
在目标任务异常时,根据所述数据展示页面与所述任务的关联关系,确定并显示所述目标任务对应的异常数据展示页面,所述目标数据展示页面为所述数据展示页面中的任一数据展示页面,所述目标任务为所述任务中的任一任务。
10.一种数据处理装置,其特征在于,包括:
第一确定单元,用于确定每个数据展示页面访问的第一数据的信息集合,以及每个任务访问的第二数据的信息集合,所述第一数据的信息集合与所述第二数据的信息集合有交集;
第一建立单元,用于基于所述第一数据的信息集合,建立所述数据展示页面与所述第一数据的第一关联关系;
第二建立单元,用于基于所述第二数据的信息集合,建立所述任务与所述第二数据的第二关联关系;
第二确定单元,用于基于所述第一关联关系和所述第二关联关系,确定所述数据展示页面与所述任务的关联关系,以便显示所述数据展示页面与所述任务的关联关系。
11.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储有多条指令;所述处理器从所述存储器中加载指令,以执行如权利要求1~9任一项所述的数据处理方法中的步骤。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1~9任一项所述的数据处理方法中的步骤。
CN202111223210.3A 2021-10-20 2021-10-20 数据处理方法、装置、电子设备和存储介质 Pending CN113961585A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111223210.3A CN113961585A (zh) 2021-10-20 2021-10-20 数据处理方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111223210.3A CN113961585A (zh) 2021-10-20 2021-10-20 数据处理方法、装置、电子设备和存储介质

Publications (1)

Publication Number Publication Date
CN113961585A true CN113961585A (zh) 2022-01-21

Family

ID=79465128

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111223210.3A Pending CN113961585A (zh) 2021-10-20 2021-10-20 数据处理方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN113961585A (zh)

Similar Documents

Publication Publication Date Title
CN111416756B (zh) 协议测试方法、装置、计算机设备及存储介质
CN112882764B (zh) 组件加载方法、装置、计算机设备及存储介质
CN111177180A (zh) 一种数据查询方法、装置以及电子设备
CN112870724A (zh) 资源管理方法、装置、存储介质及电子设备
CN105847446B (zh) 一种网络数据的获取方法、装置和系统
CN114237743B (zh) 界面加载方法、装置、电子设备和存储介质
CN113961585A (zh) 数据处理方法、装置、电子设备和存储介质
CN115469937A (zh) 插件运行方法、装置、电子设备及存储介质
CN112463626B (zh) 内存泄漏定位方法、装置、计算机设备及存储介质
CN114579136A (zh) 代码处理方法、装置、计算机设备和存储介质
CN113609154A (zh) 一种数据查询方法、装置、电子设备和存储介质
CN114995970A (zh) 任务处理方法、装置、存储介质及电子设备
CN113704273A (zh) 数据管理方法、装置、存储介质及服务器
CN112333029A (zh) 网络架构配置信息生成方法、装置、存储介质及电子设备
CN113419795B (zh) 调用关系的展示方法、装置、计算机设备及存储介质
CN113625968B (zh) 文件权限的管理方法、装置、计算机设备及存储介质
CN114416234B (zh) 一种页面切换方法、装置、计算机设备及存储介质
CN116186333A (zh) 用户事件索引方法、装置、电子设备和存储介质
CN116383053A (zh) 软件代码缺陷检测方法、装置、介质及设备
CN114691145A (zh) 代码处理方法、装置、计算机设备和存储介质
CN115114292A (zh) 结构化查询语言配置方法、装置、电子设备及存储介质
CN114489609A (zh) 业务代码自动更新方法、装置、存储介质及电子设备
CN114510254A (zh) 资源更新方法、装置、电子设备和存储介质
CN116382665A (zh) Elasticsearch的可视化操作方法、装置、存储介质及计算机设备
CN115858652A (zh) 一种数据转换方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination