CN113448989B - 数据的处理方法、装置、电子设备及计算机存储介质 - Google Patents

数据的处理方法、装置、电子设备及计算机存储介质 Download PDF

Info

Publication number
CN113448989B
CN113448989B CN202110774320.2A CN202110774320A CN113448989B CN 113448989 B CN113448989 B CN 113448989B CN 202110774320 A CN202110774320 A CN 202110774320A CN 113448989 B CN113448989 B CN 113448989B
Authority
CN
China
Prior art keywords
data
processed
target
data table
functional module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110774320.2A
Other languages
English (en)
Other versions
CN113448989A (zh
Inventor
姬宁
李柏润
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jingdong Technology Holding Co Ltd
Original Assignee
Jingdong Technology Holding Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jingdong Technology Holding Co Ltd filed Critical Jingdong Technology Holding Co Ltd
Priority to CN202110774320.2A priority Critical patent/CN113448989B/zh
Publication of CN113448989A publication Critical patent/CN113448989A/zh
Application granted granted Critical
Publication of CN113448989B publication Critical patent/CN113448989B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供了一种数据的处理方法、装置、电子设备及计算机存储介质,该方法包括:在接收针对待处理数据的操作指令后;针对每一个目标功能模块,在数据表模型中提取目标功能模块的所属组别涉及到的至少一个待处理数据表;再针对每一个待处理数据表,根据待处理数据表与其他数据表之间的依赖关系,确定待处理数据表的优先级;最后,根据每一个待处理数据表的优先级、操作信息以及待处理数据表与其他数据表之间的依赖关系对待处理数据进行操作。通过数据表模型对待处理数据进行处理,从而不再需要现有技术中,通过编码的方式对待处理数据进行处理,从而达到在进行数据的配置过程中,无需进行任何编码开发和维护工作,可以极大的提高效率的目的。

Description

数据的处理方法、装置、电子设备及计算机存储介质
技术领域
本申请涉及计算机技术领域,特别涉及一种数据的处理方法、装置、电子设备及计算机存储介质。
背景技术
目前,在各种存在数据配置的应用场景中,经常有针对某个功能模块的数据进行操作的需求,常见的方式是通过编码进行实现。
然而,传统编码的实现方案,需要各个模块的开发人员分别实现各自功能,开发成本较高。并且,每当有新功能实现或者已有功能变更时,都需要重新增加或修改原有的代码,维护成本较高。
发明内容
有鉴于此,本申请提供一种数据的处理方法、装置、电子设备及计算机存储介质,在进行数据的配置过程中,无需进行任何编码开发和维护工作,可以极大的提高效率。
本申请第一方面提供了一种数据的处理方法,包括:
接收针对待处理数据的操作指令;其中,所述操作指令包括操作类型、操作信息以及至少一个目标功能模块;所述目标功能模块为处理所述待处理数据时涉及到的功能模块;
针对每一个所述目标功能模块,在数据表模型中提取所述目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,所述数据表模型中包括预先定义的多个数据表、所述数据表之间的依赖关系以及至少一个功能模块的具体构成;
针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级;其中,所述待处理数据表被依赖的次数越多,所述待处理数据表的优先级越高;
根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作。
可选的,所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为核心组,所述根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作,包括:
按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
导出所述第一目标数据。
可选的,所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为关联组,所述根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作,包括:
按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
判断所述第一目标数据是否使用所述目标功能模块的所关联的核心组的相关表中的数据;
若判断出所述第一目标数据使用所述目标功能模块的所关联的核心组的相关表中的数据,则记录所述第一目标数据引用的字段和值;
利用所述第一目标数据引用的字段和值,在所述目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据;
其中,所述导出所述第一目标数据,包括:
在数据库中导出所述第二目标数据。
可选的,所述操作类型为导入数据,所述操作信息至少包括替换字段信息,所述根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作,包括:
在所述待处理数据所属的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表中的目标字段进行替换,得到第三目标数据;
记录所述待处理数据与所述第三目标数据的对应关系;
在所述待处理数据所属的数据表依赖的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表依赖的数据表中的目标字段进行替换,得到第四目标数据;
记录所述待处理数据与所述第四目标数据的对应关系;
将所述第三目标数据以及所述第四目标数据导入数据库。
可选的,所述操作信息还包括删除操作,所述按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据之后,还包括:
将所述第一目标数据所属的数据表中的数据删除。
本申请第二方面提供了一种数据的处理装置,包括:
接收单元,用于接收针对待处理数据的操作指令;其中,所述操作指令包括操作类型、操作信息以及至少一个目标功能模块;所述目标功能模块为处理所述待处理数据时涉及到的功能模块;
提取单元,用于针对每一个所述目标功能模块,在数据表模型中提取所述目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,所述数据表模型中包括预先定义的多个数据表、所述数据表之间的依赖关系以及至少一个功能模块的具体构成;
确定单元,用于针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级;其中,所述待处理数据表被依赖的次数越多,所述待处理数据表的优先级越高;
处理单元,用于根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作。
可选的,所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为核心组,所述处理单元,包括:
第一检索单元,用于按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
导出单元,用于导出所述第一目标数据。
可选的,所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为关联组,所述处理单元,包括:
第二检索单元,用于按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
判断单元,用于判断所述第一目标数据是否使用所述目标功能模块的所关联的核心组的相关表中的数据;
第一记录单元,用于若所述判断单元判断出,第一目标数据使用所述目标功能模块的所关联的核心组的相关表中的数据,则记录所述第一目标数据引用的字段和值;
第三检索单元,用于利用所述第一目标数据引用的字段和值,在所述目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据;
其中,所述导出单元,还用于:
在数据库中导出所述第二目标数据。
可选的,所述操作类型为导入数据,所述操作信息至少包括替换字段信息,所述处理单元,包括:
替换单元,用于在所述待处理数据所属的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表中的目标字段进行替换,得到第三目标数据;
第二记录单元,用于记录所述待处理数据与所述第三目标数据的对应关系;
所述替换单元,还用于在所述待处理数据所属的数据表依赖的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表依赖的数据表中的目标字段进行替换,得到第四目标数据;
所述第二记录单元,还用于记录所述待处理数据与所述第四目标数据的对应关系;
导入单元,用于将所述第三目标数据以及所述第四目标数据导入数据库。
可选的,所述操作信息包括删除操作,所述数据的处理装置,还包括:
删除单元,用于将所述第一目标数据所属的数据表中的数据删除。
本申请第三方面提供了一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如第一方面任意一项所述的数据的处理方法。
本申请第四方面提供了一种计算机存储介质,其上存储有计算机程序,其中,所述计算机程序被处理器执行时实现如第一方面任意一项所述的数据的处理方法。
由以上方案可知,本申请提供一种数据的处理方法、装置、电子设备及计算机存储介质,所述数据的处理方法包括:接收针对待处理数据的操作指令;其中,所述操作指令包括操作类型、操作信息以及至少一个目标功能模块;所述目标功能模块为处理所述待处理数据时涉及到的功能模块;针对每一个所述目标功能模块,在数据表模型中提取所述目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,所述数据表模型中包括预先定义的多个数据表、所述数据表之间的依赖关系以及至少一个功能模块的具体构成;针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级;其中,所述待处理数据表被依赖的次数越多,所述待处理数据表的优先级越高;根据每一个所述待处理数据表的优先级、所述操作信息以及所述待处理数据表与其他数据表之间的依赖关系对所述待处理数据进行操作。通过数据表模型对待处理数据进行处理,从而不再需要现有技术中,通过编码的方式对待处理数据进行处理,从而达到在进行数据的配置过程中,无需进行任何编码开发和维护工作,可以极大的提高效率的目的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本申请实施例提供的一种数据的处理方法的具体流程图;
图2为本申请另一实施例提供的一种导出数据的一种实施方式的具体流程图;
图3为本申请另一实施例提供的一种导出数据的一种实施方式的具体流程图;
图4为本申请另一实施例提供的一种导入数据的一种实施方式的具体流程图;
图5为本申请另一实施例提供的一种数据的处理装置的示意图;
图6为本申请另一实施例提供的一种实现数据的处理方法的电子设备的示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要注意,本申请中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系,而术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本申请实施例提供了一种数据的处理方法,如图1所示,具体包括以下步骤:
S101、接收针对待处理数据的操作指令。
其中,操作指令包括操作类型、操作信息以及至少一个目标功能模块;目标功能模块为处理待处理数据时涉及到的功能模块。操作类型可以是导出数据,也可以是导入数据,也可以是复制数据等。可以理解的是,不同的操作类型,操作数据可能相同也可能不同,此处不做限定。
S102、针对每一个目标功能模块,在数据表模型中提取目标功能模块的所属组别涉及到的至少一个待处理数据表。
其中,数据表模型中包括预先定义的多个数据表、数据表之间的依赖关系以及至少一个功能模块的具体构成。
例如:有一个词组配置涉及到了两张表,分别为组表A和词表B,其中词表B包含有组表A,在实际进行配置时,先创建组表A的一条记录作为一个新的分组后,再创建词组B的若干条记录作为这个分组下的若干个词,将这种紧密关联的表划分到一个组中,然后,针对功能模块对各个组的使用关系,将这些组进行划分,划分为核心组和关联组。比如有一个关键词的功能模块,其包含了词组的配置,和命中关键词后的行为配置,这两种配置按照上述方式分成了两个组,从功能上来看,这两个部分都是不可或缺的,因此,将这两个组归入核心组,如果行为配置中使用了其他功能模块的核心组,比如触发关键词后,需要发送一条短信,由于有专门的短信功能模块管理所有的短信模版和发送线路,行为策略仅是使用了其中的一部分数据,我们将短信功能模块相关的组归入关联组。
S103、针对每一个待处理数据表,根据待处理数据表与其他数据表之间的依赖关系,确定待处理数据表的优先级。
其中,待处理数据表被依赖的次数越多,待处理数据表的优先级越高。
S104、根据每一个待处理数据表的优先级、操作信息以及待处理数据表与其他数据表之间的依赖关系对待处理数据进行操作。
当操作类型为导出数据时,操作信息应至少包括检索条件,且目标功能模块的所属组别为核心组,那么本申请实施例中步骤S104的一种实施方式,如图2所示,包括:
S201、按照每一个待处理数据表的优先级,依次根据待处理数据表与其他数据表之间的依赖关系以及检索条件,在目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据。
例如:在智能应答机器人的配置场景,期望导出关键词模块的配置数据,而关键词模块是以单个机器人为配置粒度,且核心组的相关表,如表Q中记录了机器人的标识(Identity document)信息,那么在需要导出数据时,需设定检索条件就为组表Q的机器人ID为指定值。
具体的,组表Q先根据机器人的ID为检索条件进行检索,得到数据结果,而词表M中,group_id字段记录了组ID信息,并且这个组ID信息属于组表Q的ID字段,则可以根据组表Q的检索结果提取出所有组ID信息(G1,G2,G3…),然后,再作为词表B的检索条件。需要说明的是,group_id需在(G1,G2,G3…)内。
S202、导出第一目标数据。
可选的,在本申请的另一实施例中,在目标功能模块所属组别为核心组时,在操作信息还可以包括删除操作,那么在得到第一目标数据后,还可以按照删除操作的指示将第一目标数据所属的数据表中的数据删除。在目标功能模块所属组别为关联组时,不做任何修改。
可选的,在本申请的另一实施例中,操作信息还可以报考记录操作,将获取到的所有第一目标数据以及数据表模型的当前信息记入指定位置文件中。
当操作类型为导出数据时,操作信息应至少包括检索条件,且目标功能模块的所属组别为关联组,那么本申请实施例中步骤S104的一种实施方式,如图3所示,包括:
S301、按照每一个待处理数据表的优先级,依次根据待处理数据表与其他数据表之间的依赖关系以及检索条件,在目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据。
需要说明的是,步骤是S301的具体实施方式可以参见步骤S201,此处不再赘述。
S302、判断第一目标数据是否使用目标功能模块的所关联的核心组的相关表中的数据。
具体的,若判断出第一目标数据使用目标功能模块的所关联的核心组的相关表中的数据,则执行步骤S303。
S303、记录第一目标数据引用的字段和值。
S304、利用第一目标数据引用的字段和值,在目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据。
S305、在数据库中导出第二目标数据。
当操作类型为导入数据时,操作信息应至少包括替换字段信息,那么本申请实施例中步骤S104的一种实施方式,如图4所示,包括:
S401、在待处理数据所属的数据表中,根据替换字段信息对待处理数据所属的数据表中的目标字段进行替换,得到第三目标数据。
比如:将关键词模块的数据导入场景,期望将关键词模块的数据导入至另一个机器人中,则需要替换到组表Q中的机器人ID信息。
需要说明的是,在本申请的实际应用过程中,在执行步骤S401之前,还可以对即将导入的数据进行校验,即待处理数据,判断待处理数据的数据表是否存在,并确认数据表与数据表模型的版本是否匹配。
S402、记录待处理数据与第三目标数据的对应关系。
续接上述实例,在替换到组表Q中的机器人ID信息后,会产生ID1->ID2的替换对应关系,如果其他的表需要使用到组表Q中的机器人ID信息,在导入时,需要根据这个对应关系,将机器人ID更新为新的ID2。
S403、在待处理数据所属的数据表依赖的数据表中,根据替换字段信息对待处理数据所属的数据表依赖的数据表中的目标字段进行替换,得到第四目标数据。
S404、记录待处理数据与第四目标数据的对应关系。
S405、将第三目标数据以及第四目标数据导入数据库。
当操作类型为复制数据时,可以先导出第一目标数据以及第二目标数据(如果有第二目标数据的话),再利用第一目标数据以及第二目标数据执行上述步骤S401-S405。
由以上方案可知,本申请提供了一种数据的处理方法:接收针对待处理数据的操作指令;其中,操作指令包括操作类型、操作信息以及至少一个目标功能模块;目标功能模块为处理待处理数据时涉及到的功能模块;针对每一个目标功能模块,在数据表模型中提取目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,数据表模型中包括预先定义的多个数据表、数据表之间的依赖关系以及至少一个功能模块的具体构成;针对每一个待处理数据表,根据待处理数据表与其他数据表之间的依赖关系,确定待处理数据表的优先级;其中,待处理数据表被依赖的次数越多,待处理数据表的优先级越高;根据每一个待处理数据表的优先级、操作信息以及待处理数据表与其他数据表之间的依赖关系对待处理数据进行操作。通过数据表模型对待处理数据进行处理,从而不再需要现有技术中,通过编码的方式对待处理数据进行处理,从而达到在进行数据的配置过程中,无需进行任何编码开发和维护工作,可以极大的提高效率的目的。
本申请另一实施例提供了一种数据的处理装置,如图5所示,具体包括:
接收单元501,用于接收针对待处理数据的操作指令。
其中,操作指令包括操作类型、操作信息以及至少一个目标功能模块;目标功能模块为处理待处理数据时涉及到的功能模块。
提取单元502,用于针对每一个目标功能模块,在数据表模型中提取目标功能模块的所属组别涉及到的至少一个待处理数据表。
其中,数据表模型中包括预先定义的多个数据表、数据表之间的依赖关系以及至少一个功能模块的具体构成。
确定单元503,用于针对每一个待处理数据表,根据待处理数据表与其他数据表之间的依赖关系,确定待处理数据表的优先级。
其中,待处理数据表被依赖的次数越多,待处理数据表的优先级越高。
处理单元504,用于根据每一个待处理数据表的优先级、操作信息以及待处理数据表与其他数据表之间的依赖关系对待处理数据进行操作。
本申请上述实施例公开的单元的具体工作过程,可参见对应的方法实施例内容,如图1所示,此处不再赘述。
可选的,在本申请的另一实施例中,操作类型为导出数据,操作信息至少包括检索条件,目标功能模块的所属组别为核心组,处理单元504的一种实施方式,包括:
第一检索单元,用于按照每一个待处理数据表的优先级,依次根据待处理数据表与其他数据表之间的依赖关系以及检索条件,在目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据。
导出单元,用于导出第一目标数据。
本申请上述实施例公开的单元的具体工作过程,可参见对应的方法实施例内容,如图2所示,此处不再赘述。
可选的,在本申请的另一实施例中,操作类型为导出数据,操作信息至少包括检索条件,目标功能模块的所属组别为关联组,处理单元504的一种实施方式,包括:
第二检索单元,用于按照每一个待处理数据表的优先级,依次根据待处理数据表与其他数据表之间的依赖关系以及检索条件,在目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据。
判断单元,用于判断第一目标数据是否使用目标功能模块的所关联的核心组的相关表中的数据。
第一记录单元,用于若判断单元判断出,第一目标数据使用目标功能模块的所关联的核心组的相关表中的数据,则记录第一目标数据引用的字段和值。
第三检索单元,用于利用第一目标数据引用的字段和值,在目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据。
其中,导出单元,还用于:
在数据库中导出第二目标数据。
本申请上述实施例公开的单元的具体工作过程,可参见对应的方法实施例内容,如图3所示,此处不再赘述。
可选的,在本申请的另一实施例中,操作类型为导入数据,操作信息至少包括替换字段信息,处理单元504的一种实施方式,包括:
替换单元,用于在待处理数据所属的数据表中,根据替换字段信息对待处理数据所属的数据表中的目标字段进行替换,得到第三目标数据。
第二记录单元,用于记录待处理数据与第三目标数据的对应关系。
替换单元,还用于在待处理数据所属的数据表依赖的数据表中,根据替换字段信息对待处理数据所属的数据表依赖的数据表中的目标字段进行替换,得到第四目标数据。
第二记录单元,还用于记录待处理数据与第四目标数据的对应关系。
导入单元,用于将第三目标数据以及第四目标数据导入数据库。
本申请上述实施例公开的单元的具体工作过程,可参见对应的方法实施例内容,如图4所示,此处不再赘述。
可选的,在本申请的另一实施例中,操作信息还包括删除操作,数据的处理装置,还包括:
删除单元,用于将第一目标数据所属的数据表中的数据删除。
本申请上述实施例公开的单元的具体工作过程,可参见对应的方法实施例内容,此处不再赘述。
由以上方案可知,本申请提供了一种数据的处理装置:接收单元501接收针对待处理数据的操作指令;其中,操作指令包括操作类型、操作信息以及至少一个目标功能模块;目标功能模块为处理待处理数据时涉及到的功能模块;提取单元502针对每一个目标功能模块,在数据表模型中提取目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,数据表模型中包括预先定义的多个数据表、数据表之间的依赖关系以及至少一个功能模块的具体构成;确定单元503针对每一个待处理数据表,根据待处理数据表与其他数据表之间的依赖关系,确定待处理数据表的优先级;其中,待处理数据表被依赖的次数越多,待处理数据表的优先级越高;处理单元504根据每一个待处理数据表的优先级、操作信息以及待处理数据表与其他数据表之间的依赖关系对待处理数据进行操作。通过数据表模型对待处理数据进行处理,从而不再需要现有技术中,通过编码的方式对待处理数据进行处理,从而达到在进行数据的配置过程中,无需进行任何编码开发和维护工作,可以极大的提高效率的目的。
本申请另一实施例提供了一种电子设备,如图6所示,包括:
一个或多个处理器601。
存储装置602,其上存储有一个或多个程序。
当所述一个或多个程序被所述一个或多个处理器601执行时,使得所述一个或多个处理器601实现如上述实施例中任意一项所述的数据的处理方法。
本申请另一实施例提供了一种计算机存储介质,其上存储有计算机程序,其中,计算机程序被处理器执行时实现如上述实施例中任意一项所述的数据的处理方法。
在本申请公开的上述实施例中,应该理解到,所揭露的装置和方法,也可以通过其它的方式实现。以上所描述的装置和方法实施例仅仅是示意性的,例如,附图中的流程图和框图显示了根据本公开的多个实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分,所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现方式中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个连续的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或动作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
另外,在本公开各个实施例中的各功能模块可以集成在一起形成一个独立的部分,也可以是各个模块单独存在,也可以两个或两个以上模块集成形成一个独立的部分。所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本公开的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,直播设备,或者网络设备等)执行本公开各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
专业技术人员能够实现或使用本申请。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本申请的精神或范围的情况下,在其它实施例中实现。因此,本申请将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (6)

1.一种数据的处理方法,其特征在于,包括:
接收针对待处理数据的操作指令;其中,所述操作指令包括操作类型、操作信息以及至少一个目标功能模块;所述目标功能模块为处理所述待处理数据时涉及到的功能模块;
针对每一个所述目标功能模块,在数据表模型中提取所述目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,所述数据表模型中包括预先定义的多个数据表、所述数据表之间的依赖关系以及至少一个功能模块的具体构成;
针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级;其中,所述待处理数据表被依赖的次数越多,所述待处理数据表的优先级越高;
若所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为关联组,则按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
判断所述第一目标数据是否使用所述目标功能模块的所关联的核心组的相关表中的数据;
若判断出所述第一目标数据使用所述目标功能模块的所关联的核心组的相关表中的数据,则记录所述第一目标数据引用的字段和值;
利用所述第一目标数据引用的字段和值,在所述目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据;
在数据库中导出所述第二目标数据。
2.根据权利要求1所述的处理方法,其特征在于,所述针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级之后,还包括:
若所述操作类型为导入数据,所述操作信息至少包括替换字段信息,则在所述待处理数据所属的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表中的目标字段进行替换,得到第三目标数据;
记录所述待处理数据与所述第三目标数据的对应关系;
在所述待处理数据所属的数据表依赖的数据表中,根据所述替换字段信息对所述待处理数据所属的数据表依赖的数据表中的目标字段进行替换,得到第四目标数据;
记录所述待处理数据与所述第四目标数据的对应关系;
将所述第三目标数据以及所述第四目标数据导入数据库。
3.根据权利要求1所述的处理方法,其特征在于,所述操作信息还包括删除操作,所述按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据之后,还包括:
将所述第一目标数据所属的数据表中的数据删除。
4.一种数据的处理装置,其特征在于,包括:
接收单元,用于接收针对待处理数据的操作指令;其中,所述操作指令包括操作类型、操作信息以及至少一个目标功能模块;所述目标功能模块为处理所述待处理数据时涉及到的功能模块;
提取单元,用于针对每一个所述目标功能模块,在数据表模型中提取所述目标功能模块的所属组别涉及到的至少一个待处理数据表;其中,所述数据表模型中包括预先定义的多个数据表、所述数据表之间的依赖关系以及至少一个功能模块的具体构成;
确定单元,用于针对每一个所述待处理数据表,根据所述待处理数据表与其他数据表之间的依赖关系,确定所述待处理数据表的优先级;其中,所述待处理数据表被依赖的次数越多,所述待处理数据表的优先级越高;
第一检索单元,用于若所述操作类型为导出数据,所述操作信息至少包括检索条件,所述目标功能模块的所属组别为关联组,则按照每一个所述待处理数据表的优先级,依次根据所述待处理数据表与其他数据表之间的依赖关系以及所述检索条件,在所述目标功能模块的所属核心组的相关表中进行数据检索,得到第一目标数据;
判断单元,用于判断所述第一目标数据是否使用所述目标功能模块的所关联的核心组的相关表中的数据;
第一记录单元,用于若所述判断单元判断出,第一目标数据使用所述目标功能模块的所关联的核心组的相关表中的数据,则记录所述第一目标数据引用的字段和值;
第三检索单元,用于利用所述第一目标数据引用的字段和值,在所述目标功能模块的所属关联组的相关表中进行数据检索,得到第二目标数据;
导出单元,用于在数据库中导出所述第二目标数据。
5.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至3中任一所述的数据的处理方法。
6.一种计算机存储介质,其特征在于,其上存储有计算机程序,其中,所述计算机程序被处理器执行时实现如权利要求1至3中任一所述的数据的处理方法。
CN202110774320.2A 2021-07-08 2021-07-08 数据的处理方法、装置、电子设备及计算机存储介质 Active CN113448989B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110774320.2A CN113448989B (zh) 2021-07-08 2021-07-08 数据的处理方法、装置、电子设备及计算机存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110774320.2A CN113448989B (zh) 2021-07-08 2021-07-08 数据的处理方法、装置、电子设备及计算机存储介质

Publications (2)

Publication Number Publication Date
CN113448989A CN113448989A (zh) 2021-09-28
CN113448989B true CN113448989B (zh) 2024-02-06

Family

ID=77815547

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110774320.2A Active CN113448989B (zh) 2021-07-08 2021-07-08 数据的处理方法、装置、电子设备及计算机存储介质

Country Status (1)

Country Link
CN (1) CN113448989B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2010113242A1 (ja) * 2009-03-31 2012-10-04 三菱電機株式会社 実行順序決定装置
CN104699464A (zh) * 2015-03-26 2015-06-10 中国人民解放军国防科学技术大学 一种基于依赖网格的指令级并行调度方法
CN110457334A (zh) * 2019-07-31 2019-11-15 北京三快在线科技有限公司 信息推送方法、装置、电子设备及可读存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4922280B2 (ja) * 2008-11-07 2012-04-25 株式会社フジクラ 光ファイバケーブル
CN102239458B (zh) * 2008-12-02 2015-07-15 起元技术有限责任公司 可视化数据元素之间的关系
CN105224536A (zh) * 2014-05-29 2016-01-06 国际商业机器公司 划分数据库的方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2010113242A1 (ja) * 2009-03-31 2012-10-04 三菱電機株式会社 実行順序決定装置
CN104699464A (zh) * 2015-03-26 2015-06-10 中国人民解放军国防科学技术大学 一种基于依赖网格的指令级并行调度方法
CN110457334A (zh) * 2019-07-31 2019-11-15 北京三快在线科技有限公司 信息推送方法、装置、电子设备及可读存储介质

Also Published As

Publication number Publication date
CN113448989A (zh) 2021-09-28

Similar Documents

Publication Publication Date Title
CN109543942A (zh) 数据校验方法、装置、计算机设备和存储介质
CN103164698B (zh) 文本指纹库生成方法及装置、文本指纹匹配方法及装置
CN102725755B (zh) 文件访问方法及系统
CN104794123A (zh) 一种为半结构化数据构建NoSQL数据库索引的方法及装置
CN110908997A (zh) 数据血缘构建方法、装置、服务器及可读存储介质
CN101853289B (zh) 一种Oracle数据库审计方法和设备
CN109669844B (zh) 设备故障处理方法、装置、设备和存储介质
CN106599322A (zh) 数据脱敏的方法及设备
CN103559301A (zh) 更新数据的方法、数据库触发器和搜索引擎
CN105677683A (zh) 批量数据查询方法和装置
EP2778953A1 (en) Encoded-search database device, method for adding and deleting data for encoded search, and addition/deletion program
CN109714249B (zh) 一种小程序消息的推送方法及相关装置
CN104036187A (zh) 计算机病毒类型确定方法及其系统
CN110515895B (zh) 大数据存储系统中对数据文件进行关联存储的方法及系统
CN107402753A (zh) 一种硬盘固件的刷新方法及装置
CN113448989B (zh) 数据的处理方法、装置、电子设备及计算机存储介质
CN112711649A (zh) 一种数据库多字段匹配方法、装置、设备及存储介质
CN113157788B (zh) 大数据挖掘方法及系统
CN111563123B (zh) 一种hive仓库元数据实时同步方法
CN113704227A (zh) 一种增量更新数据入库方法、装置、电子设备及存储介质
CN104899213A (zh) 一种解析组织机构名的方法和装置
CN111143582A (zh) 一种双索引实时更新联想词的多媒体资源推荐方法及装置
CN111400269A (zh) 一种ipfs文件处理方法、节点、介质和设备
CN105740272B (zh) 资源文件搜索方法和系统
CN112100220B (zh) 一种实现非法账号组实时监控的系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant