CN113468401B - 局数据核查制作方法、装置、计算机设备和存储介质 - Google Patents

局数据核查制作方法、装置、计算机设备和存储介质 Download PDF

Info

Publication number
CN113468401B
CN113468401B CN202010246045.2A CN202010246045A CN113468401B CN 113468401 B CN113468401 B CN 113468401B CN 202010246045 A CN202010246045 A CN 202010246045A CN 113468401 B CN113468401 B CN 113468401B
Authority
CN
China
Prior art keywords
data
field
logic
key
target standard
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010246045.2A
Other languages
English (en)
Other versions
CN113468401A (zh
Inventor
王昌
乔辉
张建强
孙海涛
张顺利
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Information System Integration Co ltd
China Mobile Communications Group Co Ltd
China Mobile Xiongan ICT Co Ltd
China Mobile System Integration Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile System Integration Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile System Integration Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202010246045.2A priority Critical patent/CN113468401B/zh
Publication of CN113468401A publication Critical patent/CN113468401A/zh
Application granted granted Critical
Publication of CN113468401B publication Critical patent/CN113468401B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9532Query formulation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/958Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/18Protocol analysers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00Network arrangements, protocols or services for addressing or naming
    • H04L61/45Network directories; Name-to-address mapping
    • H04L61/4505Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Debugging And Monitoring (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)

Abstract

本发明公开了一种局数据核查制作方法、装置、计算机设备和存储介质。该局数据核查制作方法包括:获取网元的实时数据;对实时数据进行筛选和分组,得到关键字段;利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应;基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据;根据待制作数据,基于预定义的制作逻辑生成制作脚本。采用该局数据核查制作方法能够显著提高核查效率,此外,本发明还公开了一种局数据核查方法。

Description

局数据核查制作方法、装置、计算机设备和存储介质
【技术领域】
本发明涉及通信领域,尤其涉及一种局数据核查制作方法、装置、计算机设备和存储介质。
【背景技术】
随着LTE(Long Term Evolution,长期演进)业务飞速发展,LTE通信网络中网元的局数据量随之不断增加,在通信的网管领域中针对局数据进行的相关工作(如局数据核查)也成为重点。目前LTE通信网络中局数据的数据量大且数据结构复杂,局数据核查效率较低。
【发明内容】
有鉴于此,本发明实施例提供了一种局数据核查制作方法、装置、计算机设备和存储介质,以及一种局数据核查方法,用以解决目前局数据核查效率较低的问题。
第一方面,本发明实施例提供了一种局数据核查制作方法,包括:
获取网元的实时数据;
对所述实时数据进行筛选和分组,得到关键字段;
利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应;
基于所述关键字段和所述目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据;
根据所述待制作数据,基于预定义的制作逻辑生成制作脚本。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述对所述实时数据进行筛选和分组,得到关键字段,包括:
采用预设的逻辑配置规则,按顺序逻辑从所述实时数据中进行字段的提取,得到所述关键字段,其中,所述逻辑配置规则包括正则表达式。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应,包括:
利用所述分组逻辑,将所述标准字段表中的标准字段进行分组,得到所述目标标准字段;
基于游标功能,将分组后的所述目标标准字段按顺序逻辑进行组合;
基于所述顺序逻辑,建立所述目标标准字段与所述关键字段之间的对应关系。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述基于所述关键字段和所述目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,包括:
根据业务需求确定所述核查逻辑;
根据所述核查逻辑生成临时核查表;
基于所述关键字段和所述目标标准字段对应关系的实现,根据所述临时核查表确定待制作数据,其中,所述待制作数据包括关键字段对应的指令,以及目标标准字段对应的指令。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,所述根据所述待制作数据,基于预定义的制作逻辑生成制作脚本,包括:
回撤至所述关键字段所在的分组,提取所述关键字段;
对所述关键字段进行字段变量计算,并基于所述目标标准字段、所述关键字段对应的指令,以及所述目标标准字段对应的指令,按预设排列逻辑生成所述制作脚本。
如上所述的方面和任一可能的实现方式,进一步提供一种实现方式,在所述根据所述待制作数据,基于预定义的制作逻辑生成制作脚本之后,所述方法还包括:
根据所述制作脚本生成局数据核查文件。
第二方面,本发明实施例提供了一种局数据核查制作装置,包括:
实时数据获取模块,用于获取网元的实时数据;
关键字段获取模块,用于对所述实时数据进行筛选和分组,得到关键字段;
对应模块,用于利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应;
待制作数据确定模块,用于基于所述关键字段和所述目标标准字段对应关系的实现,采用预定义的核查逻辑确定待制作数据;
制作脚本生成模块,用于根据所述待制作数据,基于预定义的制作逻辑生成制作脚本。
第三方面,本发明实施例提供了一种局数据核查方法,包括:
获取网元的实时数据;
对所述实时数据进行筛选和分组,得到关键字段;
利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应;
基于所述关键字段和所述目标标准字段对应关系的实现,采用预定义的核查逻辑对关键字段对应的指令、目标标准字段对应的指令进行核查。
第四方面,一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述第一方面局数据核查制作方法的步骤,或者所述处理器执行所述计算机程序时实现上述第三方面局数据核查方法的步骤。
第五方面,本发明实施例提供了一种计算机可读存储介质,包括:计算机程序,所述计算机程序被处理器执行时实现上述第一方面局数据核查制作方法的步骤,或者,所述计算机程序被处理器执行时实现上述第三方面局数据核查方法的步骤。
在本发明实施例中,首先,获取网页的实时数据,并对实时数据进行筛选和分组,得到关键字段,通过对实时数据的筛选和分组,能够在数据量较大且数据结构复杂的实时数据中按照组别进行字段筛选,以在实时数据中获取具有唯一性特征的关键字段,有助于实现业务逻辑上的区分;接着,利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应,能够快速地在标准字段表中确定与关键字段核查相关的目标标准字段;最后,基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,并根据待制作数据,基于预定义的制作逻辑生成制作脚本,能够将业务与对应关系进行分组核查,使得局数据核查时的逻辑更加清晰,容错率低,对错误点的发现、分析与解决提供了更好的便利性与可读性,并且,显著地提高了核查效率。
【附图说明】
为了更清楚地说明本发明实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
图1是本发明一实施例中常规的实现局数据核查的一流程图;
图2是本发明一实施例中局数据核查制作方法的一流程图;
图3是本发明一实施例中采用逻辑配置规则提取字段的一流程图;
图4是本发明一实施例中关键字段和目标标准字段实现对应的一流程图;
图5是本发明一实施例中实现局数据核查的又一流程图;
图6是本发明一实施例中局数据核查方法的一流程图;
图7是本发明一实施例中局数据核查制作装置的一原理框图;
图8是本发明一实施例中局数据核查装置的一原理框图
图9是本发明一实施例中计算机设备的一示意图。
【具体实施方式】
为了更好的理解本发明的技术方案,下面结合附图对本发明实施例进行详细描述。
应当明确,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的相同的字段,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,且存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应当理解,尽管在本发明实施例中可能采用术语第一、第二、第三等来描述预设范围等,但这些预设范围不应限于这些术语。这些术语仅用来将预设范围彼此区分开。例如,在不脱离本发明实施例范围的情况下,第一预设范围也可以被称为第二预设范围,类似地,第二预设范围也可以被称为第一预设范围。
取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
局数据具体可以是指交换网络中网元(网络设备,如交互机)中的配置参数,包括指令文件,是对交换网络各部分功能的一种描述,具有开放性和可移植性。
在生成核查的制作脚本的过程中,现有的软件应用是采用程序逐行扫描数据,通过提供流式的数据集的合并、分析和拆解,根据用户需求来生成制作脚本,该方案效率低下,速度慢,在局数据的数据结构多样化的情况下容易出错。
图1示出一种常规的实现局数据核查的流程图。可以看出,图中table1与table2、table3共同合并成table4,并基于该table4与标准(数据库字段)资源的table5实现各自对应指令的核查。由于table4中实时数据的数据结构多种多样,且采用获取的实时数据与table5之间进行基于全表的核查,该方案生成制作脚本实现核查时,其效率较低。
图2示出本实施例中局数据核查制作方法的一流程图。该局数据核查制作方法可应用在局数据核查系统上,在进行局数据核查时可采用该局数据核查系统实现局数据核查制作。该局数据核查系统具体可应用在计算机设备上,其中,该计算机设备是可与用户进行人机交互的设备,包括但不限于电脑、智能手机和平板等设备。如图2所示,该局数据核查制作方法包括如下步骤:
S10:获取网元的实时数据。
在一实施例中,当用户想核查任一网元(如交换机)的配置参数是否配置正确时,可以通过接入网元,从网元中获取实时数据。
S20:对实时数据进行筛选和分组,得到关键字段。
本实施例从业务,以及多级分组的角度出发,对实时数据进行筛选和分组的处理。具体地,从业务的角度出发可以在对实时数据处理的开始阶段就明确核查逻辑所对应的业务需求,而不必在如合并总实时数据的table4时,再根据核查逻辑进行核查。本实施例中能够将不同业务进行分组,在局数据核查时的逻辑更为清晰,提高核查效率。LTE通信网络局数据多数呈现为多级分组模式,其局数据的数据结构多种多样。鉴于此,本实施采用多级分组的方式对实时数据进行筛选和分组,将分组整合为统一标准,使各分组的局数据具备唯一性特征。可以理解地,对实时数据进行多级分组,能够以更清晰的逻辑表示出局数据,在进行局数据核查时,能够显著的提高核查效率。
进一步地,在步骤S20中,对实时数据进行筛选和分组,得到关键字段,具体包括:
采用预设的逻辑配置规则,按顺序逻辑从实时数据中进行字段的提取,得到关键字段,其中,逻辑配置规则包括正则表达式。
可以理解地,不同业务、不同分组模式下的局数据具有不同的特性,可以通过逻辑配置规则,如正则表达式的方式对实时数据中的字段进行提取,得到关键字段。具体地,如图3所示,可以看到数据块1按照其预设的逻辑配置规则,按顺序逻辑从实时数据中进行字段的提取,得到关键字段Key data 1、Key data 2和Key data 3。类似地,数据块2按照其预设的逻辑配置规则,按顺序逻辑从实时数据中进行字段的提取,得到关键字段Key data 4、Key data 5和Key data 6。采用预设的逻辑配置规则加上顺序逻辑(按序)的数据提取方式,可以使得提取的关键字段具有位置上的对应性以及局数据分组分级的效果。
S30:利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应。
可以理解地,标准字段表中有很多的标准字段,这些标准字段同样遵循分组逻辑,在一实施例中,可以采用分组逻辑从标准字段表中筛选出与关键字段具有对应(映射)关系的目标标准字段,其中,该对应关系客观存在但没有正式建立(该对应关系受分组逻辑影响),在确定目标标准字段后,将正式建立与关键字段的对应关系,以在进行局数据核查时,可根据建立的对应关系实现快速核查。
进一步地,在步骤S30中,将关键字段和网元存储的标准字段表中的目标标准字段进行对应,具体包括:
S31:利用分组逻辑,将标准字段表中的标准字段进行分组,得到目标标准字段。
可以理解地,分组的局数据具备唯一性特征,可以对标准字段分组后得到目标标准字段。
S32:基于游标功能,将分组后的目标标准字段按顺序逻辑进行组合。
其中,游标可用于临时存储,从数据库中临时提取数据块。
在一实施例中,通过采用游标功能临时存储目标标准字段,对目标标准字段进行组合。采用该游标功能可以根据需要把目标标准字段从存放在磁盘的标准字段表中调到计算机内存中进行处理,最后将处理结果写回数据库。采用该数据处理方式的速度较高,能够有效地提高效率。
在一实施例中,分组后的目标标准字段将按顺序逻辑进行组合,使得组合后的目标标准字段也具有位置上的对应性。
S33:基于顺序逻辑,建立目标标准字段与关键字段之间的对应关系。
可以理解地,由于在对实时数据进行筛选和分组,得到关键字段时,是按顺序逻辑进行的,提取的关键字段也是具有位置上的对应性的,则可以利用该顺序逻辑带来的位置上的对应性,建立目标标准字段与关键字段之间的对应关系。
在步骤S31-S33中,提供了一种将关键字段和网元存储的标准字段表中的目标标准字段进行对应的具体实施方式,通过分组逻辑及顺序逻辑的组合,可以准确地建立目标标准字段与关键字段之间的对应关系,从而提高核查的效率。
具体地,如图4所示,可以看到,Column1(列1)、Column2和Column3通过分组逻辑1分组后,进行游标操作及顺序逻辑组合,可以分别建立起与Key data 1、Key data 2和Keydata 3之间的对应关系;相似地,Column4、Column5和Column6通过分组逻辑2分组后,进行游标操作及顺序逻辑组合,可以分别建立起与Key data 4、Key data 5和Key data 6之间的对应关系。
S40:基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据。
其中,待制作数据是指在核查阶段需体现,并进行核查的局数据。
可以理解地,核查逻辑跟业务需求相关,可以按照同样的业务需求将实时数据进行业务上的逻辑区分,在后续生成制作脚本,进行局数据核查时,逻辑将更加清晰,容错率低,对错误点的发现、分析与解决提供了更好的便利性与可读性,显著提高核查效率。
在一实施例中,基于关键字段和目标标准字段对应关系的实现,也即关键字段和目标标准字段对应关系确定的情况下,可以再根据核查逻辑进行业务的区分,基于对应关系快速确定待制作数据。
进一步地,在步骤S40中,基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,具体包括:
S41:根据业务需求确定核查逻辑。
可以理解地,业务需求决定采用的核查逻辑。采用核查逻辑可以将业务进行区分,提高核查效率。
S42:根据核查逻辑生成临时核查表。
其中,该临时核查表代表的是核查逻辑所对应的实时数据,与传统的将所有实时数据合并的方式不同,本实施例中按核查逻辑,以实现业务区分上的核查,从而提高核查效率。
S43:基于关键字段和目标标准字段对应关系的实现,根据临时核查表确定待制作数据,其中,待制作数据包括关键字段对应的指令,以及目标标准字段对应的指令。
在一实施例中,根据临时核查表,在关键字段和目标标准字段对应关系为确定的情况下,可以快速地确定关键字段对应的指令,以及目标标准字段对应的指令,从图5中可以清楚地看出。
具体地,如图5所示,table1、table2和table3按照核查逻辑生成临时核查表table4和table5,并根据关键字段和目标标准字段的对应关系,可快速确定关键字段对应的指令,以及目标标准字段对应的指令。
S50:根据待制作数据,基于预定义的制作逻辑生成制作脚本。
其中,制作脚本是指用于制作核查文件的脚本。
在一实施例中,局数据核查文件输出的排版、格式等由制作脚本实现,而制作脚本则依赖于待制作数据,由预定义的制作逻辑生成。
进一步地,在步骤S50中,根据待制作数据,基于预定义的制作逻辑生成制作脚本,具体包括:
S51:回撤至关键字段所在的分组,提取关键字段。
可以理解地,关键字段在游标阶段有临时保存,在确定和目标标准字段的对应关系后一般没有保存,因此需回撤至关键字段所在的分组,提取关键字段。
S52:对关键字段进行字段变量计算,并基于目标标准字段、关键字段对应的指令,以及目标标准字段对应的指令,按预设排列逻辑生成制作脚本。
可以理解地,关键字段中有些字段是动态协议数据,需要进行字段变量计算后确定该字段的确切值。明确关键字段的所有数据后,即可相应地确定关键字段对应的指令中于关键字段相对应的值。同样地,也需要通过目标标准字段确定目标标准字段对应的指令中与目标标准字段相对应的值。在字段的数值确认后,可按预设排列逻辑生成制作脚本。
进一步地,在步骤S50之后,即在根据待制作数据,基于预定义的制作逻辑生成制作脚本的步骤之后,还包括:
根据制作脚本生成局数据核查文件。
可以理解地,除了自动核查外,有些核查逻辑较为复杂,可以采用人工核查的方式,通过生成局数据核查文件实现,此外,也可以采用局数据核查文件对局数据进行二次核查,提高核查的准确性。
在本发明实施例中,首先,获取网页的实时数据,并对实时数据进行筛选和分组,得到关键字段,通过对实时数据的筛选和分组,能够在数据量较大且数据结构复杂的实时数据中按照组别进行字段筛选,以在实时数据中获取具有唯一性特征的关键字段,有助于实现业务逻辑上的区分;接着,利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应,能够快速地在标准字段表中确定与关键字段核查相关的目标标准字段;最后,基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,并根据待制作数据,基于预定义的制作逻辑生成制作脚本,能够将业务与对应关系进行分组核查,使得局数据核查时的逻辑更加清晰,容错率低,对错误点的发现、分析与解决提供了更好的便利性与可读性,并且,显著地提高了核查效率。
如图6示出的一种局数据核查制作方法的流程图。本发明实施例提供一种局数据核查制作方法,该方法具体包括:
S10’:获取网元的实时数据。
S20’:对实时数据进行筛选和分组,得到关键字段。
S30’:利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应。
S40’:基于关键字段和目标标准字段对应关系的实现,采用预定义的核查逻辑对关键字段对应的指令、目标标准字段对应的指令进行核查。
以上步骤与步骤S10-S50的步骤类似,区别在于该局数据核查制作方法用于局数据的核查,该核查具体可以是采用预定义的核查逻辑实现的核查。
在本发明实施例中,首先,获取网页的实时数据,并对实时数据进行筛选和分组,得到关键字段,通过对实时数据的筛选和分组,能够在数据量较大且数据结构复杂的实时数据中按照组别进行字段筛选,以在实时数据中获取具有唯一性特征的关键字段,有助于实现业务逻辑上的区分;接着,利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应,能够快速地在标准字段表中确定与关键字段核查相关的目标标准字段;最后,基于关键字段和目标标准字段对应关系的实现,采用预定义的核查逻辑对关键字段对应的指令、目标标准字段对应的指令进行核查,能够将业务与对应关系进行分组核查,使得局数据核查时的逻辑更加清晰,容错率低,对错误点的发现、分析与解决提供了更好的便利性与可读性,并且,显著地提高了核查效率。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
基于实施例中所提供的局数据核查制作方法,本发明实施例进一步给出实现上述方法实施例中各步骤及方法的装置实施例。
图7示出与实施例中局数据核查制作方法一一对应的局数据核查制作装置的原理框图。如图7所示,该局数据核查制作装置包括实时数据获取模块10、关键字段获取模块20、对应模块30、待制作数据确定模块40和制作脚本生成模块50。其中,实时数据获取模块10、关键字段获取模块20、对应模块30、待制作数据确定模块40和制作脚本生成模块50的实现功能与实施例中局数据核查制作方法对应的步骤一一对应,为避免赘述,本实施例不一一详述。
实时数据获取模块10,用于获取网元的实时数据。
关键字段获取模块20,用于对实时数据进行筛选和分组,得到关键字段。
对应模块30,用于利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应。
待制作数据确定模块40,用于基于关键字段和目标标准字段对应关系的实现,采用预定义的核查逻辑确定待制作数据。
制作脚本生成模块50,用于根据待制作数据,基于预定义的制作逻辑生成制作脚本。
进一步地,关键字段获取模块20具体用于:
采用预设的逻辑配置规则,按顺序逻辑从实时数据中进行字段的提取,得到关键字段,其中,逻辑配置规则包括正则表达式。
进一步地,对应模块30具体用于:
利用分组逻辑,将标准字段表中的标准字段进行分组,得到目标标准字段;
基于游标功能,将分组后的目标标准字段按顺序逻辑进行组合;
基于顺序逻辑,建立目标标准字段与关键字段之间的对应关系。
进一步地,待制作数据确定模块40具体用于:
根据业务需求确定核查逻辑;
根据核查逻辑生成临时核查表;
基于关键字段和目标标准字段对应关系的实现,根据临时核查表确定待制作数据,其中,待制作数据包括关键字段对应的指令,以及目标标准字段对应的指令。
进一步地,制作脚本生成模块50具体用于:
回撤至关键字段所在的分组,提取关键字段;
对关键字段进行字段变量计算,并基于目标标准字段、关键字段对应的指令,以及目标标准字段对应的指令,按预设排列逻辑生成制作脚本。
进一步地,局数据核查制作装置还包括:
生成模块,用于根据制作脚本生成局数据核查文件。
在本发明实施例中,首先,获取网页的实时数据,并对实时数据进行筛选和分组,得到关键字段,通过对实时数据的筛选和分组,能够在数据量较大且数据结构复杂的实时数据中按照组别进行字段筛选,以在实时数据中获取具有唯一性特征的关键字段,有助于实现业务逻辑上的区分;接着,利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应,能够快速地在标准字段表中确定与关键字段核查相关的目标标准字段;最后,基于关键字段和目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,并根据待制作数据,基于预定义的制作逻辑生成制作脚本,能够将业务与对应关系进行分组核查,使得局数据核查时的逻辑更加清晰,容错率低,对错误点的发现、分析与解决提供了更好的便利性与可读性,并且,显著地提高了核查效率。
图8示出与实施例中局数据核查方法一一对应的局数据核查装置的原理框图。如图8所示,该局数据核查装置包括第一获取模块10’、第二获取模块20’、分组模块30’、和核查模块40’。其中,第一获取模块10’、第二获取模块20’、分组模块30’、和核查模块40’的实现功能与实施例中局数据核查方法对应的步骤一一对应,为避免赘述,本实施例不一一详述。
第一获取模块10’,用于获取网元的实时数据。
第二获取模块20’,用于对实时数据进行筛选和分组,得到关键字段。
分组模块30’,用于利用分组逻辑,将关键字段和网元存储的标准字段表中的目标标准字段进行对应。
核查模块40’,用于基于关键字段和目标标准字段对应关系的实现,采用预定义的核查逻辑对关键字段对应的指令、目标标准字段对应的指令进行核查。
本实施例提供一计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现实施例中局数据核查制作方法,或者,该计算机程序被处理器执行时实现实施例中局数据核查方法,为避免重复,此处不一一赘述。或者,该计算机程序被处理器执行时实现实施例中局数据核查制作装置中各模块/单元的功能,或者,该计算机程序被处理器执行时实现实施例中局数据核查装置中各模块/单元的功能,为避免重复,此处不一一赘述。
图9是本发明一实施例提供的计算机设备的示意图。如图9所示,该实施例的计算机设备60包括:处理器61、存储器62以及存储在存储器62中并可在处理器61上运行的计算机程序63,该计算机程序63被处理器61执行时实现实施例中的局数据核查制作方法,或者,实现实施例中的局数据核查方法,为避免重复,此处不一一赘述。或者,该计算机程序63被处理器61执行时实现实施例中局数据核查制作装置中各模型/单元的功能,或者,实现实施例中局数据核查装置中各模型/单元的功能,为避免重复,此处不一一赘述。
计算机设备60可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。计算机设备60可包括,但不仅限于,处理器61、存储器62。本领域技术人员可以理解,图9仅仅是计算机设备60的示例,并不构成对计算机设备60的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如计算机设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器61可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器62可以是计算机设备60的内部存储单元,例如计算机设备60的硬盘或内存。存储器62也可以是计算机设备60的外部存储设备,例如计算机设备60上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器62还可以既包括计算机设备60的内部存储单元也包括外部存储设备。存储器62用于存储计算机程序以及计算机设备所需的其他程序和数据。存储器62还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。
以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (7)

1.一种局数据核查制作方法,其特征在于,所述方法包括:
获取网元的实时数据;
对所述实时数据进行筛选和分组,得到关键字段;
利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应;
基于所述关键字段和所述目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据;
根据所述待制作数据,基于预定义的制作逻辑生成制作脚本;
其中,所述基于所述关键字段和所述目标标准字段对应关系的实现,根据预定义的核查逻辑确定待制作数据,包括:
根据业务需求确定所述核查逻辑;
根据所述核查逻辑生成临时核查表;
基于所述关键字段和所述目标标准字段对应关系的实现,根据所述临时核查表确定待制作数据,其中,所述待制作数据包括关键字段对应的指令,以及目标标准字段对应的指令;
其中,所述根据所述待制作数据,基于预定义的制作逻辑生成制作脚本,包括:
回撤至所述关键字段所在的分组,提取所述关键字段;
对所述关键字段进行字段变量计算,并基于所述目标标准字段、所述关键字段对应的指令,以及所述目标标准字段对应的指令,按预设排列逻辑生成所述制作脚本。
2.根据权利要求1所述的方法,其特征在于,所述对所述实时数据进行筛选和分组,得到关键字段,包括:
采用预设的逻辑配置规则,按顺序逻辑从所述实时数据中进行字段的提取,得到所述关键字段,其中,所述逻辑配置规则包括正则表达式。
3.根据权利要求1所述的方法,其特征在于,所述利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应,包括:
利用所述分组逻辑,将所述标准字段表中的标准字段进行分组,得到所述目标标准字段;
基于游标功能,将分组后的所述目标标准字段按顺序逻辑进行组合;
基于所述顺序逻辑,建立所述目标标准字段与所述关键字段之间的对应关系。
4.根据权利要求1-3任一项所述的方法,其特征在于,在所述根据所述待制作数据,基于预定义的制作逻辑生成制作脚本之后,所述方法还包括:
根据所述制作脚本生成局数据核查文档。
5.一种局数据核查制作装置,其特征在于,所述装置包括:
实时数据获取模块,用于获取网元的实时数据;
关键字段获取模块,用于对所述实时数据进行筛选和分组,得到关键字段;
对应模块,用于利用分组逻辑,将所述关键字段和所述网元存储的标准字段表中的目标标准字段进行对应;
待制作数据确定模块,用于基于所述关键字段和所述目标标准字段对应关系的实现,采用预定义的核查逻辑确定待制作数据;
制作脚本生成模块,用于根据所述待制作数据,基于预定义的制作逻辑生成制作脚本;
其中,所述待制作数据确定模块具体用于:
根据业务需求确定所述核查逻辑;
根据所述核查逻辑生成临时核查表;
基于所述关键字段和所述目标标准字段对应关系的实现,根据所述临时核查表确定待制作数据,其中,所述待制作数据包括关键字段对应的指令,以及目标标准字段对应的指令;
所述制作脚本生成模块具体用于:
回撤至所述关键字段所在的分组,提取所述关键字段;
对所述关键字段进行字段变量计算,并基于所述目标标准字段、所述关键字段对应的指令,以及所述目标标准字段对应的指令,按预设排列逻辑生成所述制作脚本。
6.一种计算机设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述局数据核查制作方法的步骤。
7.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述局数据核查制作方法的步骤。
CN202010246045.2A 2020-03-31 2020-03-31 局数据核查制作方法、装置、计算机设备和存储介质 Active CN113468401B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010246045.2A CN113468401B (zh) 2020-03-31 2020-03-31 局数据核查制作方法、装置、计算机设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010246045.2A CN113468401B (zh) 2020-03-31 2020-03-31 局数据核查制作方法、装置、计算机设备和存储介质

Publications (2)

Publication Number Publication Date
CN113468401A CN113468401A (zh) 2021-10-01
CN113468401B true CN113468401B (zh) 2023-04-28

Family

ID=77865701

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010246045.2A Active CN113468401B (zh) 2020-03-31 2020-03-31 局数据核查制作方法、装置、计算机设备和存储介质

Country Status (1)

Country Link
CN (1) CN113468401B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308495A (zh) * 2007-10-24 2008-11-19 河北全通通信有限公司 局数据核查制作方法
CN101540958A (zh) * 2009-04-24 2009-09-23 华为技术有限公司 一种网元资源的管理方法及装置
CN101772043A (zh) * 2008-12-31 2010-07-07 北京亿阳信通软件研究院有限公司 局数据核查方法和装置
CN102780574A (zh) * 2011-05-13 2012-11-14 中国移动通信集团广东有限公司 面向业务的局数据的配置方法、装置以及核查方法、装置
WO2015138666A1 (en) * 2014-03-13 2015-09-17 Ab Initio Technology Llc Specifying and applying logical validation rules to data

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308495A (zh) * 2007-10-24 2008-11-19 河北全通通信有限公司 局数据核查制作方法
CN101772043A (zh) * 2008-12-31 2010-07-07 北京亿阳信通软件研究院有限公司 局数据核查方法和装置
CN101540958A (zh) * 2009-04-24 2009-09-23 华为技术有限公司 一种网元资源的管理方法及装置
CN102780574A (zh) * 2011-05-13 2012-11-14 中国移动通信集团广东有限公司 面向业务的局数据的配置方法、装置以及核查方法、装置
WO2015138666A1 (en) * 2014-03-13 2015-09-17 Ab Initio Technology Llc Specifying and applying logical validation rules to data

Also Published As

Publication number Publication date
CN113468401A (zh) 2021-10-01

Similar Documents

Publication Publication Date Title
CN112256684B (zh) 一种报表生成方法、终端设备及存储介质
CN109299879A (zh) 一种电网审计问题的统计方法、装置及设备
TWI727639B (zh) 一種區塊鏈交易追溯的方法及裝置
CN113326238A (zh) 一种数据处理方法、装置、设备及存储介质
CN108959508B (zh) Sql数据生成方法及装置
CN114238379A (zh) 基于sql生成器的报表查询方法和系统
CN112612832B (zh) 节点分析方法、装置、设备及存储介质
CN113468401B (zh) 局数据核查制作方法、装置、计算机设备和存储介质
CN107330031B (zh) 一种数据存储的方法、装置及电子设备
CN111984826A (zh) 基于xml的数据自动入库方法、系统、装置和存储介质
CN105573984A (zh) 社会经济指标的识别方法及装置
CN109857632B (zh) 测试方法、装置、终端设备及可读存储介质
CN111752677B (zh) 一种云资源配置方法、系统、终端及存储介质
CN113448985A (zh) 一种api接口生成方法、调用方法、装置及电子设备
CN108319704B (zh) 一种分析数据的方法、装置、设备及存储介质
CN110309211B (zh) 一种定位etl过程问题的方法及相关设备
CN112003935B (zh) 一种连接数获取方法、装置、设备及可读存储介质
CN113779641B (zh) 数据配置方法、装置、计算机设备及计算机可读存储介质
CN109885614B (zh) 一种数据同步的方法和装置
CN112308172B (zh) 一种识别方法、装置及电子设备
CN113076178B (zh) 报文存储方法、装置及设备
CN109344210B (zh) 一种网格校正方法、装置及终端设备
CN117827919A (zh) 一种地类流转分析方法、装置、设备及介质
CN114461632A (zh) 基于规则库的多类型数据上报核查方法、装置及存储介质
CN115408235A (zh) 数据库分析方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231213

Address after: No. 220 Qingyuan Street, Shijiazhuang City, Hebei Province, 050011

Patentee after: China Mobile System Integration Co.,Ltd.

Patentee after: CHINA MOBILE COMMUNICATIONS GROUP Co.,Ltd.

Patentee after: China Mobile Information System Integration Co.,Ltd.

Patentee after: China Mobile xiongan information and Communication Technology Co.,Ltd.

Address before: 050021 No. 220 Tsing Yuen Street, Shijiazhuang, Hebei

Patentee before: China Mobile System Integration Co.,Ltd.

Patentee before: CHINA MOBILE COMMUNICATIONS GROUP Co.,Ltd.