CN111522817A - 表格内容映射系统、方法及非暂时性存储介质 - Google Patents

表格内容映射系统、方法及非暂时性存储介质 Download PDF

Info

Publication number
CN111522817A
CN111522817A CN202010321241.1A CN202010321241A CN111522817A CN 111522817 A CN111522817 A CN 111522817A CN 202010321241 A CN202010321241 A CN 202010321241A CN 111522817 A CN111522817 A CN 111522817A
Authority
CN
China
Prior art keywords
target
data
content
category
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010321241.1A
Other languages
English (en)
Other versions
CN111522817B (zh
Inventor
全方磊
陈锡辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Alipay Hangzhou Information Technology Co Ltd
Original Assignee
Alipay Hangzhou Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alipay Hangzhou Information Technology Co Ltd filed Critical Alipay Hangzhou Information Technology Co Ltd
Priority to CN202010321241.1A priority Critical patent/CN111522817B/zh
Publication of CN111522817A publication Critical patent/CN111522817A/zh
Application granted granted Critical
Publication of CN111522817B publication Critical patent/CN111522817B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22Indexing; Data structures therefor; Storage structures
    • G06F16/2282Tablespace storage structures; Management thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/174Form filling; Merging
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/177Editing, e.g. inserting or deleting of tables; using ruled lines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/166Editing, e.g. inserting or deleting
    • G06F40/186Templates

Abstract

本申请提供一种表格内容映射系统、方法和非暂时性存储介质。所述表格内容映射系统可以根据目标表格的类别建立所述目标表格数据项同目标数据库数据项的映射关系。当用户需要导入或者导出表格时,处理器根据所述映射关系实现表格的导入和/或导出。当用户需要修改数据时,只需要通过用户界面对需要修改的数据进行增删改。用户修改完毕,处理器调用有关数据校验的指令对修改后的数据项进行校验。校验通过后,处理器调用有关存储的指令将修改后的数据项保存至目标数据库中。避免了传统表格导入采用硬编码造成的高成本以及低可靠性的问题。

Description

表格内容映射系统、方法及非暂时性存储介质
技术领域
本申请涉及数据处理技术领域,特别涉及一种表格内容映射系统、一种表格内容映射方法以及一种非暂时性存储介质。
背景技术
数据库系统可以包括数据库管理系统(DBMS)以及数据库。数据库由数据库管理系统建立。数据库管理系统(DBMS)还可以对数据库进行管理和控制。例如,数据库管理系统(DBMS)可以对数据库中的数据进行查询、新增、更新、删除、求和、排序等操作。数据库中包括多个数据库表。所述数据库表用来存储表格数据。
监管机构需要对各类被监管机构进行监管。常见的监管机构分为中央监管(中国人民银行、银保监会等)、地方监管(各个地方政府所在金融办、金融局等)。常见的被监管机构有各个商业银行、P2P机构、小贷机构、商业保理机构等。其中,监管时最重要的一个环节就是要求被监管机构将其业务和财务数据实时或定期报送给监管部门。目前,通常采用的是非现场监管的方式,即被监管机构将业务和财务数据表(即表格)上传到监管机构的系统中。监管机构人员在系统上对这些数据表进行处理和审核;或者,监管机构人员将所需要的数据表导出至本地电脑进行处理和审核。在此过程中,存在着大量将表格文件导入数据库或者从数据库中导出的场景。
传统表格导入和导出的方法是:对每一张表格做硬编码处理,也就是程序预先定义好每一张表格的名称和所有字段名,以及每个字段所在的位置,然后提供给用户做导入导出操作。这种方法有两个很大的弊端:第一,系统必须预先定义每一张表格,每次新增或者修改表格时,都要重新做代码开发和应用发布,耗费成本;第二,因为每张表格都需要程序硬编码处理,当表格数量很多时(比如几百张表格),会产生大量的硬编码逻辑,造成系统无法可靠的维护。
因此,有必要设计一种表格导入/导出系统来解决传统表格导入/导出采用硬编码造成的高成本和低可靠性的问题。
发明内容
为解决传统表格导入/导出采用硬编码造成的高成本和低可靠性的技术问题,本申请公开了一种表格内容映射方法,以及可以执行此方法的系统和预存有可以执行此方法的指令的非暂时性存储介质。所述表格内容映射方法通过对不同的表格内容中行内容的可扩展性和/或列内容的可扩展性进行分类,进而根据每个个体表格的所属类别来将所述表格内容映射到数据库中,从而避免了对每张表格做硬编码处理,以及对新增的表格或者修改过的表格重新做代码开发和应用发布。
根据本申请的一个方面,所述表格内容映射方法包括:接收对目标表格的导入指令,所述导入指令包括所述目标表格的类别,所述类别由所述目标表格的行内容的可扩展性和列内容的可扩展性决定;解析所述导入指令,获取所述类别;根据所述类别,调取同所述类别对应的映射关系;以及根据所述映射关系,将所述目标表格的目标内容解析为目标数据库中的字段数据并存储到所述目标数据库中。
在一些实施例中,所述类别包括第一类表格、第二类表格以及第三类表格中的一个,其中,第一类表格,其行内容或列内容中的一个可动态扩展并且另外一个不可动态扩展;第二类表格,其行内容不可动态扩展并且列内容不可动态扩展;以及第三类表格,其行内容可动态扩展并且列内容可动态扩展。
在一些实施例中,当所述类别为第一类表格时,所述目标内容包括所述目标表格目标行中所有单元格的字段数据,所述映射关系包括所述目标行中所有单元格的字段数据对应于所述目标数据库中的一行数据。
在一些实施例中,当所述类别为第二类表格时,所述目标内容包括目标区域中所有单元格的字段数据,所述映射关系包括所述目标区域中所有单元格的字段数据对应于所述目标数据库中的一行数据。
在一些实施例中,当所述类别为第三类表格时,所述目标内容包括所述目标表格目标单元格的字段数据,所述映射关系包括所述目标单元格的字段数据对应于所述目标数据库中的一行数据。
在一些实施例中,所述导入指令包括所述目标表格的名称,所述目标表格的名称中包含所述类别。
在一些实施例中,所述表格内容映射方法,还包括,生成配置信息,其中,所述配置信息包括所述目标表格的类别;以及所述导入指令包括所述配置信息。
在一些实施例中,所述导入指令还包括所述目标表格的数据格式;以及,所述表格内容映射方法还包括:根据所述数据格式,调取同所述数据格式对应的解析规则,以及依据所述解析规则解析所述目标表格。
在一些实施例中,所述表格内容映射方法还包括:接收数据导出指令,所述数据导出指令包括待导出的数据对象信息;根据所述待导出的数据对象信息,获取待导出的字段数据;以及依据所述映射关系,将所述待导出的字段数据导出到模板报表中。
根据本申请的另一个方面,所述表格内容映射系统包括:至少一个存储器,包括至少一组指令集用于表格内容映射;至少一个处理器,同所述至少一个存储器通讯连接,当所述至少一个处理器运行所述至少一组指令集时,所述至少一个处理器执行前述表格内容映射方法。
根据本申请的另一个方面,所述非暂时性存储介质包括至少一组指令集用于表格内容映射,当所述至少一组指令集由处理器加载并执行时,所述至少一组指令集指示所述处理器执行前述表格内容映射方法。
综上,本申请公开了一种表格内容映射系统、方法及存储介质。所述表格内容映射系统可以根据目标表格的类别建立所述目标表格数据项同数据库数据项的映射关系。当用户需要导入或者导出表格时,处理器根据所述映射关系实现表格的导入和/或导出。当用户需要修改数据时,只需要通过用户界面对需要修改的数据进行增删改。用户修改完毕,处理器调用有关数据校验的指令对修改后的数据项进行校验。校验通过后,处理器调用有关存储的指令将修改后的数据项保存至数据库中。避免了传统表格导入采用硬编码造成的高成本以及低可靠性的问题。
附图说明
图1是本申请实施例提供的一种表格内容映射系统工作场景示意图;
图2是本申请实施例提供的一种表格内容映射服务器的结构示意图;
图3是本申请实施例提供的一种表格内容映射系统功能分区框图;
图4示出了根据本申请实施例提供的一种表格内容映射方法;
图5示出了根据本申请实施例提供的表格配置流程图;以及
图6示出了根据本申请实施例提供的表格导出流程图。
具体实施方式
以下描述提供了本申请的特定应用场景和要求,目的是使本领域技术人员能够制造和使用本申请中的内容。对于本领域技术人员来说,对所公开的实施例的各种局部修改是显而易见的,并且在不脱离本申请的精神和范围的情况下,可以将这里定义的一般原理应用于其他实施例和应用。因此,本申请不限于所示的实施例,而是与权利要求一致的最宽范围。
这里使用的术语仅用于描述特定示例实施例的目的,而不是限制性的。
考虑到以下描述,本申请的这些特征和其他特征、以及结构的相关元件的操作和功能、以及部件的组合和制造的经济性可以得到明显提高。参考附图,所有这些形成本申请的一部分。然而,应该清楚地理解,附图仅用于说明和描述的目的,并不旨在限制本申请的范围。
以下描述可以显著改进本申请的这些和其他特征,以及结构的相关元件的操作和功能,以及组件的组合和制造的经济效率。所有这些都参考附图形成本申请的一部分。然而,应该清楚地理解,附图仅用于说明和描述的目的,并不旨在限制本申请的范围。还应理解,附图未按比例绘制。
图1示出了表格内容映射系统100应用的工作场景示意图。比如,表格内容映射系统100可以应用于某金融机构数据中心同分支机构和/或用户终端的联网图,也可以是其他机构的数据中心同分支机构和/或用户终端的联网图。表格内容映射系统100(以下简称系统100)可以包括服务器200、终端设备130、网络120以及数据库150。
服务器200可以执行或用于执行本申请中描述的表格内容映射的方法的数据和/或指令。比如,服务器200可以是所述金融机构的数据中心的一个或者多个服务器。
用户110是终端设备130的使用者。用户110可以是一个人,也可以是多个人。终端设备130可以包括载有所述表格的智能设备。比如,终端设备可以是所述金融机构分支的终端设备,也可以是所述金融机构服务的客户110或者所述金融机构的监管机构的终端设备。在一些实施例中,终端设备130可以包括移动设备130-1、平板电脑130-2、笔记本电脑130-3、机动车辆130-4的内置设备或类似内容,或其任意组合。在一些实施例中,终端设备130可以安装有一个或多个应用。所述应用能够为用户110提供通过网络120同外界交互的能力以及界面。所述目标应用可以是任何运行在终端设备130上的应用程序。比如,所述目标应用可以是所述金融服务机构具有数据统计功能的应用程序。
网络120可以促进信息和/或数据的交换。如图1所示,终端设备130、服务器200、数据库150可以同网络120连接,并且通过网络120互相传输信息和/或数据。例如,服务器200可以通过网络120从终端设备130传送的数据表格,也可以向终端设备130传送表格数据。在一些实施例中,网络120可以是任何类型的有线或无线网络,也可以是其组合。例如,网络120可以包括电缆网络,有线网络、光纤网络、电信通信网络、内联网、互联网、局域网(LAN)、广域网(WAN)、无线局域网(WLAN)、大都市市区网(MAN)、广域网(WAN)、公用电话交换网(PSTN)、蓝牙网络、ZigBee网络、近场通信(NFC)网络或类似网络。在一些实施例中,网络120可以包括一个或多个网络接入点。例如,网络120可以包括有线或无线网络接入点,如基站和/或互联网交换点120-1、120-2,...,通过该接入点,终端设备130、服务器200、数据库150的一个或多个组件可以连接到网络120以交换数据和/或信息。
数据库150可以存储有执行本申请描述的表格内容映射的方法的数据映射关系或指令。比如,数据库150可以是所述金融机构的数据中心的一个或者多个数据库。数据库150可以是中心化的数据库,也可以是去中心化的数据库。
数据库150可以存储数据和/或指令。在一些实施例中,数据库150可以存储从终端设备130获得的数据。在一些实施例中,数据库150可以存储服务器200可以执行或用于执行本申请中描述的表格内容映射的方法的数据和/或指令。在一些实施例中,数据库150可以是独立的存储设备,也可以是服务器200的一部分。在一些实施例中,数据库150可以是各种适合的易失性和/或非暂时性存储介质,比如包括大容量存储、可移动存储、易失性读写存储器、只读存储器(ROM)或类似内容,或其任意组合。比如,大容量存储可能包括磁盘、光盘、固态驱动器等非暂时性存储介质(non-transitory storage medium);可移动存储可能包括闪存驱动器、软盘、光盘、存储卡、zip磁盘、磁带等。典型的易失性读写内存可能包括随机存取存储器(RAM)。示例RAM可能包括动态RAM(DRAM)、双日期速率同步动态RAM(DDRSDRAM)、静态RAM(SRAM)、晶闸管RAM(T-RAM)和零电容RAM(Z-RAM)等。示例性ROM可包括掩码ROM(MROM)、可编程ROM(PROM)、可虚拟可编程ROM(PEROM)、电可电子可编程ROM(EEPROM)、光盘(CD-ROM)和数字多功能磁盘ROM等。在一些实施例中,数据库150可以在云平台上实现。仅举例,云平台可能包括私有云、公共云、混合云、社区云、分布式云、云间云或类似,或其任意组合。
图2示出了一种执行表格内容映射的服务器200的示意图。服务器200可以执行本申请描述的表格内容映射的方法。所述表格内容映射的方法在本申请中的其他部分介绍。
如图2所示,服务器200包括至少一个存储器230和至少一个处理器220。在一些实施例中,服务器200还可以包括通信端口250和内部通信总线210。同时,服务器200还可以包括I/O组件260。
内部通信总线210可以连接不同的系统组件,包括存储器230和处理器220。
I/O组件260支持服务器200和其他组件(例如,终端设备130)之间的输入/输出。
通信端口250用于服务器200同外界的数据通讯。比如,服务器200可以通过通信端口250连接网络120,进而接收用户110发送过来的数据表格,进而通过通信端口250向所述数据库150按照表格映射关系发送数据,将所述数据表格的内容存储到所述数据库150中。
至少一个处理器220同至少一个存储器230通过内部通信总线210进行通讯。至少一个处理器220用以执行上述至少一组指令,当至少一个处理器220执行上述至少一组指令时,服务器200实施本申请提供的表格内容映射的方法。处理器220可以执行表格内容映射的方法包含的所有步骤。处理器220可以是一个或多个处理器的形式,在一些实施例中,处理器220可以包括一个或多个硬件处理器,例如微控制器,微处理器,精简指令集计算机(RISC),专用集成电路(ASIC),特定于应用的指令集处理器(ASIP),中央处理单元(CPU),图形处理单元(GPU),物理处理单元(PPU),微控制器单元,数字信号处理器(DSP),现场可编程门阵列(FPGA),高级RISC机器(ARM),可编程逻辑器件(PLD),能够执行一个或多个功能的任何电路或处理器等,或其任何组合。仅仅为了说明问题,在本申请中服务器200中仅描述了一个处理器220。然而,应当注意,本申请中服务器200还可以包括多个处理器,因此,本申请中披露的操作和/或方法步骤可以如本申请所述的由一个处理器执行,也可以由多个处理器联合执行。例如,如果在本申请中服务器200的处理器220执行步骤A和步骤B,则应该理解,步骤A和步骤B也可以由两个不同处理器220联合或分开执行(例如,第一处理器执行步骤A,第二处理器执行步骤B,或者第一和第二处理器共同执行步骤A和B)。
存储器230可以包括数据存储装置。所述数据存储装置可以是非暂时性存储介质,也可以是暂时性存储介质。比如,所述数据存储装置可以包括磁盘232、只读存储器(ROM)234或随机存取存储器(RAM)236中的一种或多种。存储器230还包括存储在所述数据存储装置中的至少一组指令。所述指令是计算机程序代码,所述计算机程序代码可以包括执行本申请提供的表格内容映射的方法的程序、例程、对象、组件、数据结构、过程、模块等等。在一些实施例中,存储器230可以是包括数据库150或者数据库的一部分。
在一些实施例中,存储器230可以存储从终端设备130获得的数据。比如,通过终端设备130上传的表格、向显示在终端设备上的用户界面输入的配置信息等。在一些实施例中,存储器230可以存储处理器220可以执行示例性方法的数据和/或指令。存储器230可以包括,数据存储单元和指令存储单元。所述数据存储单元可以存储系统中的各种数据,比如。所述指令存储单元可以存储各种指令,包括一组或者多组表格内容映射指令。
图3是本申请实施例提供的所述一组或者多组表格内容映射指令300功能分区框图。根据所实现功能的不同,所述一组或者多组表格内容映射指令300可以包括前端界面模块310和后端应用模块320。所述后端应用模块320可以包括应用框架单元322、REST API单元324、用户权限管理单元326以及报表采集引擎330。
应用框架单元322可以搭建表格内容映射系统100的架构。
REST API(Representational State Transfer Application ProgrammingInterface)单元324可以提供前端界面模块310到后端应用模块320的接口。
用户权限管理单元326可以管理不同终端设备130同服务器200的交互权限。比如,如果终端设备130是金融机构一般分支的一般终端的话,则终端设备130只能向服务器200递交和接收数据库中有限表格的数据。而如果终端设备130有管理员权限的话,则终端设备130可以在所述一般终端权限之外,还可以访问数据库以及下载各种表格的数据。
表格采集引擎330可以包括系统配置单元331、表格配置单元332、表格解析单元333、报送管理单元334、数据回读单元335、数据校验单元336、原始文件存储单元337、表格管理单元338、表格导入单元339、表格权限管理单元340、机构树管理单元341以及表格导出单元342等。
所述系统配置单元331可以对服务器200执行所述一组或者多组表格映射指令时的系统参数(比如数据库类型、IP地址等)进行配置。所述表格配置单元332可以对表格模板、表格的数据指标、校验规则等进行配置。所述表格解析单元333可以将表格内容解析为数据库中的字段数据并存储到数据库中。所述报送管理单元334可以对报送期、报送状态、迟报、漏报等进行管理和展示。所述数据回读单元335可以从数据库中读取数据表格解析后的存储内容,以便验证表格配置是否正确。所述数据校验单元336可以对表格中的数据进行校验,在一定程度上保证数据质量。所述原始文件存储单元337可以对原始上传的表格文件进行存储,以供后期下载和在线查看。所述表格管理单元338可以对各机构上报的表格历史进行管理,包括搜索、过滤、排序查看等。所述表格导入单元339可以支持单个表格文件或批量表格文件上传。在一些实施例中,所述批量上传允许对每一个表格的表格期、所属机构等进行手动配置。所述表格权限管理单元340可以对表格的数据权限进行控制。比如,以金融机构为例,通过配置权限,所述金融机构的一些终端设备130只能访问拥有权限的表格。所述机构树管理单元341可以对机构树进行管理,允许批量导入机构。所述表格导出单元342可以在页面上选择针对特定机构、特定表格、和/或特定表格期的表格进行导出操作。
需要说明的是,上述功能中的一个或者多个可以任意进行组合,只要功能之间的组合不存在冲突或矛盾,但是限于篇幅,未进行一一描述,因此上述实施方式中的各种功能的任意进行组合也属于本说明书公开的范围。
在一些实施例中,所述一组或者多组指令还可以包括一部分终端设备130执行的终端设备指令。所述终端设备指令可以为用户提供前端,以简化用户访问表格内容映射系统100中的信息。所述前端可以是在终端设备130形成用户界面的指令、程序、应用或软件。所述前端可以形成用户界面,所述用户界面用于向用户显示数据,并且接受用户(比如所述监管机构的第一类终端设备130或者作为被监管机构一所述金融机构方面的第二类终端设备130)的输入。所述用户界面可以显示在相应的终端设备130上。
在一些实施例中,所述用户界面可以包括,但不限于,第一界面。第一类终端设备130(比如作为被监管机构所述金融系统中里面的一些终端设备)可以通过第一界面上传、下载、修改或者查看表格内容。所述表格可以但不限于是xls、xlsx、csv格式的文件。
在一些实施例中,所述用户界面还可以包括,但不限于,第二界面。所述第一界面可以是web浏览器的形式。第二类终端设备130(比如所述金融系统的监管机构)可以通过第二界面对执行所述表格内容映射指令的服务器200的各项参数进行配置。所述参数可以包括,但不限于,系统参数、机构树参数、表格类目、表格模板、表格的数据指标、校验规则、数据权限等。
在一些实施例中,表格内容映射系统100中的一个或者多个组件(例如,存储器、处理器、数据库、用户终端)可以通过网络120向其他组件发送信息和/或数据。比如,处理器220可以经由网络120从终端设备130获得/获取目标表格、以及配置信息。在一些实施例中,网络120可以是任何类型的有线网络、无线网络或其组合。仅作为示例,网络可以包括电缆网络、有线网络、光纤网络、电信网络、内联网、互联网、局域网(LAN)、无线局域网(WLAN),城域网(MAN),广域网(WAN)、公共电话交换网(PSTN)、蓝牙网络、ZigBee网络、近场通信(NFC)网络等,或其任何组合。
图4示出了根据本申请的实施例提供的一种表格内容映射方法S500。方法S500可以由所述服务器200执行。具体地,所述方法可以以一组指令集的方式存储在服务器200的存储器中。当服务器200运行时,服务器200的处理器读取并运行所述指令集,并根据所述指令集的指示执行方法S500。通过方法S500,本申请所述表格内容映射系统可以实现对目标表格的导入。具体地,方法S500包括:
S510:接收对目标表格的导入指令。所述导入指令包括所述目标表格的类别。
被监管机构人员通过第一界面输入上传目标表格指令时,处理器220自动匹配表格名、表格期以及机构名等,如果匹配不到,则被监管机构人员可以通过第一界面手动选择。
在一些实施例中,所述表格导入指令中包括配置信息的标识,可以根据所述配置信息的标识查找到同所述标识所对应的目标配置信息。所述目标配置信息中包含有所述类别。比如,在被监管机构的人员使用所述表格映射系统进行表格导入之前,监管机构人员预先通过第二类终端设备130(比如所述金融系统的监管机构的终端设备)上的第二界面对表格基础信息、表格指标信息、表格模板单元格校验信息、表格核验规则信息等进行配置。处理器根据监管机构人员的配置生成所述配置信息。图5示出了根据本申请实施例提供的一种表格配置流程图S200。
S210:配置表格基础信息。这一步中,所述监管机构人员在第二界面对表格的基础信息进行配置。所述基础信息包括表格的性质是第一类表格、第二类表格还是第三类表格等等。比如某一个单元格内对应的内容应该是什么性质的,是数字、字母、特殊字符还是特别规定的选项,每个单元格内容的格式如何,字符串长度,数值范围,枚举类型,等等。
S220:配置表格指标信息。这一步,所述监管机构人员在第二界面对表格指标信息进行配置,以便后续对被监管机构上传的表格内容进行核验。
S230:配置表格模板信息。这一步中,所述监管机构人员在第二界面对表格的模板进行配置。比如某一个单元格内对应的内容应该是什么性质的,是数字、字母、特殊字符还是特别规定的选项、字符串长度,数值范围、枚举类型等。
S240:配置表格核验规则。这一步,所述监管机构人员在第二界面对表格的表内多个指标之间进行关系进行定义,以便后续对被监管机构上传的表格内容进行核验。比如所述核验规则可以包括,但不限于,数据校验:对表格中的数据进行校验,在一定程度上保证数据质量;格式校验:譬如字符串长度,数值范围、枚举类型等;指标核验:表内多个指标之间进行计算表达式核验;模板核验:通过文本校验和行列校验验证模板的正确性。
S250:启用表格。在配置完上述内容后,所述监管机构人员启用所述表格。所述启用所述表格可以包括,但不限于,允许被监管机构人员上传报表,填写报表,导出报表,查看报表,更改报表,删除报表。比如,被监管机构的人员可以向服务器200上传和导入所述目标表格。比如,被监管机构的人员可以通过第一类终端设备130(比如所述金融系统的终端设备)上的第二界面(比如web页面)按照表格的模板填写目标表格。
在一些实施例中,所述导入指令包括所述目标表格的名称,所述目标表格的名称中包含所述类别。比如,监管机构可以对被监管机构上传的表格的名称格式设置规则(比如,目标表格的名称中必须包含特定的字段信息等)。当被监管机构通过用户界面上传目标表格时,表格内容映射系统读取该字段信息并根据该字段信息确定所述目标表格的类别。
当然,在一些实施例中,用户也可以通过用户界面直接输入表格类别。当用户导入目标表格时,所述导入指令直接携带该表格的类别。
继续参考图4,S520:解析所述导入指令,获取所述类别。
所述类别由所述目标表格的行内容的可扩展性和列内容的可扩展性决定。在一些实施例中,所述目标表格可以被分成三类:
第一类,表格的行内容和列内容中有一项内容可动态扩展并且另外一项内容不可动态扩展。比如说,所述金融机构旗下的某个单位的员工工资奖金情况的表格。所述表格的行是员工列表,列是每个员工每个月的工资和奖金。因为员工的数量是随时可变的,而每年只有固定的12个月,因此反映在所述工资表格中行数是随时变化的,而列数是不变的。这类表格属于第一类表格。
第二类,所述第一表格的行内容不可动态扩展并且列内容不可动态扩展。比如说,所述金融机构旗下给股东的年报表格,里面涉及的内容只有固定的去年投资额、去年的收益额、今年投资额、今年收益额、今年较去年的增长这几项,每年不变。这类表格属于第二类表格。
第三类,所述第一表格的行内容可动态扩展并且列内容可动态扩展。比如说,所述金融机构旗下的某个基金投资项目的列表,表格的行是投资项目,列是每个项目的一些细节的收支状态。一方面不同时间所述金融机构的投资项目是不一样的。比如去年的投资项目包括A、B、C。今年去掉了C,改投了B和E。则投资年收益表格中行内容(投资项目)是随时可变的。而每个投资的项目在细节收支上也不相同,因此列的长度也是随着不同的投资项目而变化的。这类表格属于第二类表格。
S530:根据所述类别,调取同所述类别对应的映射关系。
所述映射关系包括:所述目标表格中的数据项同目标数据库(比如数据库150)中的表格数据中的数据项的位置对应关系。也就是,所述目标表格中的目标内容在数据库150中的表格数据中的存储位置。根据所述映射关系,表格内容映射系统100可以实现目标表格中的数据和数据库150中的表格数据中数据的交换。需要指出的是,所述目标表格中的数据可以是表格中的所有数据,也可以是表格中的部分数据。
在一些实施例中,所述映射关系与目标表格行内容的可扩展性和列内容的可扩展性相关。可以根据目标表格行内容的可扩展性以及列内容的可扩展性将所述目标表格分类。不同的表格类型对应不同的映射关系。
当目标表格的类别为第一类时,所述映射关系为:所述目标表格中的目标行中所有单元格的字段数据对应于所述目标数据库中的一行数据。也就是,所述目标表格中每一行的记录对应于数据库150中的表格数据中的一行记录。
当所述类别为第二类时,所述映射关系为:所述目标表格中的目标区域中所有单元格的字段数据对应于所述目标数据库中的一行数据。也就是,整个目标表格文件对应于数据库150中的表格数据中的一行记录。
当所述类别为第三类时,所述映射关系为:所述目标表格中的目标单元格的字段数据对应于所述目标数据库中的一行数据。也就是,表格文件中的一个数据单元格对应于数据库中150的一行记录。
S540:根据所述映射关系,将所述目标表格的目标内容解析为目标数据库中的字段数据并存储到所述目标数据库中。
在一些实施例中,在将所述目标表格的目标内容存储至所述目标数据库之前,所述表格映射系统还可以对所述目标表格进行快速模板校验、解析、深度数据校验等操作。
在一些实施例中,所述表格映射系统还可以对所述目标表格进行快速模板校验。比如,处理器220调用并运行存储器中所述表格的模板校验的指令根据对目标表格的模板进行校验。比如,处理器220可以对目标表格进行格式校验,比如通过文本校验和行列校验验证模板的正确性。
在一些实施例中,所述表格映射系统还可以对所述目标表格进行解析。比如,所述导入指令还包括所述目标表格的数据格式。处理器可以根据所述数据格式,调取同所述数据格式对应的解析规则。之后,处理器依据所述解析规则解析所述目标表格。在一些实施例中,所述目标表格的数据格式能够被装载了相对应的文字处理软件的电子设备读取并且可视化的显示在所述电子设备的屏幕上。作为示例,所述目标表格的数据格式可以包括,但不限于,xls,xlsx,csv。
在一些实施例中,所述表格映射系统还可以对所述目标表格进行深度数据校验。处理器220调用并运行有关深度数据校验的指令对目标表格中数据项的字符串长度、数值范围、枚举类型以及不同数据项之间是否遵循预设的规律等进行校验,同时对表内多个指标之间进行计算表达式核验。
如果各数据项通过校验,根据目标表格类别对应的映射关系,处理器将目标表格存储至目标数据库中的对应位置。作为示例,所述目标数据库可以是关系型数据库。对于列固定但是行可以动态扩展的表格,按照固定列号读取每一行数据的每个指标值,目标表格中每一行记录对应于数据库150中的表格数据中的一行。对于行号和列号都固定的表格,将目标表格的整个表格文件存储于数据库150中的表格数据中的一行。对于行和列都会动态扩展的表格,将表格文件中一个数据单元格存储至数据库150中的表格数据中的一行。如果有至少一个数据项未通过校验,则通过第一界面131向被监管机构人员展示校验失败的提示信息,提示信息中包含校验失败的原因,以便被监管机构人员进行修改。
综上,被监管机构人员便通过所述表格映射系统完成了对目标表格的导入。
之后,如果被监管机构人员要对已上传的表格进行修改,则可以在用户终端显示的第一界面对表格进行增删改操作。修改后,处理器220调用有关数据校验的指令对修改后的数据项进行校验。校验通过后,处理器调用有关存储的指令将修改后的数据项保存至数据库中。
在一些实施例中,根据所述映射关系,表格内容映射系统还可以将数据库150中的表格数据中的数据渲染以后通过用户界面展示给用户。
在一些实施例中,根据所述映射关系,表格内容映射系统100也可以将数据库150中的表格数据中的数据导出到模板表格中。作为示例,在一些实施例中,所述至少一个存储器中还存储有若干数据导出的指令,当处理器调用并执行所述若干数据导出的指令时,所述至少一个处理器:接收数据导出指令,所述数据导出指令包括待导出的数据对象信息;根据所述待导出的数据对象信息,获取待导出的字段数据;以及依据所述映射关系,将所述待导出的字段数据导出到模板报表中。
作为示例,图6示出了根据本申请实施例提供的一种导出的流程图S400。
S410:选择需要导出的目标表格名、表格期和机构名。
S420:开始导出目标表格。
S430:计算统计指标值,往目标表格中写入数据。
S440:生成目标表格,供用户导出下载。
S450:存储至关系型数据库。
当然,用户还可以通过用户界面输入其他操作指令,处理器220调用并运行存储在存储器230中的与不同功能相关的指令以实现各种功能。这里就不再赘述。
综上,本申请公开了一种表格内容映射系统、方法及存储介质。所述表格内容映射系统可以根据目标表格的类别建立所述目标表格数据项同目标数据库数据项的映射关系。当用户需要导入或者导出表格时,处理器根据所述映射关系实现表格的导入和/或导出。当用户需要修改数据时,只需要通过用户界面对需要修改的数据进行增删改。用户修改完毕,处理器调用有关数据校验的指令对修改后的数据项进行校验。校验通过后,处理器调用有关存储的指令将修改后的数据项保存至目标数据库中。避免了传统表格导入采用硬编码造成的高成本以及低可靠性的问题。
本申请还公开了一种表格内容映射方法。所述表格内容映射方法包括:接收对目标表格的导入指令,所述导入指令包括所述目标表格的类别,所述类别由所述目标表格的行内容的可扩展性和列内容的可扩展性决定;解析所述导入指令,获取所述类别;根据所述类别,调取同所述类别对应的映射关系;以及根据所述映射关系,将所述目标表格的目标内容解析为目标数据库中的字段数据并存储到所述目标数据库中。
本申请还公开了一种存储介质。所述存储介质包括至少一组指令集。所述至少一组指令集用于表格内容映射。当所述至少一组指令集由处理器调取并执行时,所述至少一组指令集指示所述处理器执行本申请所述表格内容映射方法。
综上所述,在阅读本详细公开内容之后,本领域技术人员可以明白,前述详细公开内容可以仅以示例的方式呈现,并且可以不是限制性的。尽管这里没有明确说明,本领域技术人员可以理解本申请意图囊括对实施例的各种合理改变,改进和修改。这些改变,改进和修改旨在由本申请提出,并且在本申请的示例性实施例的精神和范围内。
此外,本申请中的某些术语已被用于描述本申请的实施例。例如,″一个实施例″,″实施例″和/或″一些实施例″意味着结合该实施例描述的特定特征,结构或特性可以包括在本申请的至少一个实施例中。因此,可以强调并且应当理解,在本说明书的各个部分中对″实施例″或″一个实施例″或″替代实施例″的两个或更多个引用不一定都指代相同的实施例。此外,特定特征,结构或特性可以在本申请的一个或多个实施例中适当地组合。
应当理解,在本申请的实施例的前述描述中,为了帮助理解一个特征,出于简化本申请的目的,本申请有时将各种特征组合在单个实施例、附图或其描述中。或者,本申请又是将各种特征分散在多个本申请的实施例中。然而,这并不是说这些特征的组合是必须的,本领域技术人员在阅读本申请的时候完全有可能将其中一部分特征提取出来作为单独的实施例来理解。也就是说,本申请中的实施例也可以理解为多个次级实施例的整合。而每个次级实施例的内容在于少于单个前述公开实施例的所有特征的时候也是成立的。
在一些实施方案中,表达用于描述和要求保护本申请的某些实施方案的数量或性质的数字应理解为在某些情况下通过术语″约″,″近似″或″基本上″修饰。例如,除非另有说明,否则″约″,″近似″或″基本上″可表示其描述的值的±20%变化。因此,在一些实施方案中,书面描述和所附权利要求书中列出的数值参数是近似值,其可以根据特定实施方案试图获得的所需性质而变化。在一些实施方案中,数值参数应根据报告的有效数字的数量并通过应用普通的舍入技术来解释。尽管阐述本申请的一些实施方案列出了广泛范围的数值范围和参数是近似值,但具体实施例中都列出了尽可能精确的数值。
本文引用的每个专利,专利申请,专利申请的出版物和其他材料,例如文章,书籍,说明书,出版物,文件,物品等,可以通过引用结合于此。用于所有目的的全部内容,除了与其相关的任何起诉文件历史,可能与本文件不一致或相冲突的任何相同的,或者任何可能对权利要求的最宽范围具有限制性影响的任何相同的起诉文件历史。现在或以后与本文件相关联。举例来说,如果在与任何所包含的材料相关联的术语的描述、定义和/或使用与本文档相关的术语、描述、定义和/或之间存在任何不一致或冲突时,使用本文件中的术语为准。
最后,应理解,本文公开的申请的实施方案是对本申请的实施方案的原理的说明。其他修改后的实施例也在本申请的范围内。因此,本申请披露的实施例仅仅作为示例而非限制。本领域技术人员可以根据本申请中的实施例采取替代配置来实现本申请中的申请。因此,本申请的实施例不限于申请中被精确地描述过的那些实施例。

Claims (11)

1.一种表格内容映射方法,包括:
接收对目标表格的导入指令,所述导入指令包括所述目标表格的类别,所述类别由所述目标表格的行内容的可扩展性和列内容的可扩展性决定;
解析所述导入指令,获取所述类别;
根据所述类别,调取同所述类别对应的映射关系;以及
根据所述映射关系,将所述目标表格的目标内容解析为目标数据库中的字段数据并存储到所述目标数据库中。
2.如权利要求1所述表格内容映射方法,所述类别包括第一类表格、第二类表格以及第三类表格中的一个,其中,
第一类表格,其行内容或列内容中的一个可动态扩展并且另外一个不可动态扩展;
第二类表格,其行内容不可动态扩展并且列内容不可动态扩展;以及
第三类表格,其行内容可动态扩展并且列内容可动态扩展。
3.如权利要求2所述表格内容映射方法,当所述类别为第一类表格时,所述目标内容包括所述目标表格目标行中所有单元格的字段数据,
所述映射关系包括所述目标行中所有单元格的字段数据对应于所述目标数据库中的一行数据。
4.如权利要求2所述表格内容映射方法,当所述类别为第二类表格时,所述目标内容包括目标区域中所有单元格的字段数据,
所述映射关系包括所述目标区域中所有单元格的字段数据对应于所述目标数据库中的一行数据。
5.如权利要求2所述表格内容映射方法,当所述类别为第三类表格时,所述目标内容包括所述目标表格目标单元格的字段数据,
所述映射关系包括所述目标单元格的字段数据对应于所述目标数据库中的一行数据。
6.如权利要求1所述表格内容映射方法,
所述导入指令包括所述目标表格的名称,所述目标表格的名称中包含所述类别。
7.如权利要求1所述表格内容映射方法,还包括,生成配置信息,其中,所述配置信息包括所述目标表格的类别;以及
所述导入指令包括所述配置信息。
8.如权利要求1所述表格内容映射方法,所述导入指令还包括所述目标表格的数据格式;以及,所述表格内容映射方法还包括:
根据所述数据格式,调取同所述数据格式对应的解析规则,以及
依据所述解析规则解析所述目标表格。
9.如权利要求1所述表格内容映射方法,还包括:
接收数据导出指令,所述数据导出指令包括待导出的数据对象信息;
根据所述待导出的数据对象信息,获取待导出的字段数据;以及
依据所述映射关系,将所述待导出的字段数据导出到模板报表中。
10.一种表格内容映射系统,包括:
至少一个存储器,包括至少一组指令集用于表格内容映射;以及
至少一个处理器,同所述至少一个存储器通讯连接,
其中当所述表格内容映射系统运行时,所述至少一个处理器读取并运行所述至少一组指令集,并根据所述至少一组指令集的指示执行如权利要求1-9中的任意一项权利要求所述的表格内容映射方法。
11.一种非暂时性存储介质,包括至少一组指令集用于表格内容映射,当所述至少一组指令集由处理器调取并执行时,所述至少一组指令集指示所述处理器执行如权利要求1-9中的任意一项权利要求所述的表格内容映射方法。
CN202010321241.1A 2020-04-22 2020-04-22 表格内容映射系统、方法及非暂时性存储介质 Active CN111522817B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010321241.1A CN111522817B (zh) 2020-04-22 2020-04-22 表格内容映射系统、方法及非暂时性存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010321241.1A CN111522817B (zh) 2020-04-22 2020-04-22 表格内容映射系统、方法及非暂时性存储介质

Publications (2)

Publication Number Publication Date
CN111522817A true CN111522817A (zh) 2020-08-11
CN111522817B CN111522817B (zh) 2023-05-12

Family

ID=71903916

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010321241.1A Active CN111522817B (zh) 2020-04-22 2020-04-22 表格内容映射系统、方法及非暂时性存储介质

Country Status (1)

Country Link
CN (1) CN111522817B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111984238A (zh) * 2020-09-22 2020-11-24 吴政静 一种跨平台桥接数据信息处理的软件
CN113407603A (zh) * 2021-05-13 2021-09-17 北京鼎轩科技有限责任公司 数据导出方法及系统
CN115840539A (zh) * 2023-01-31 2023-03-24 天津南大通用数据技术股份有限公司 数据处理方法、装置、电子设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016173428A1 (zh) * 2015-04-26 2016-11-03 阿里巴巴集团控股有限公司 一种数据传输方法及装置
US20170242673A1 (en) * 2016-02-19 2017-08-24 International Business Machines Corporation Methods and systems of generating ease of use interfaces for legacy system management facilities
CN109726244A (zh) * 2019-01-29 2019-05-07 北京中电普华信息技术有限公司 数据导入方法及装置
CN109800229A (zh) * 2018-12-29 2019-05-24 深圳云天励飞技术有限公司 数据访问方法及相关设备
US20190325045A1 (en) * 2018-04-20 2019-10-24 Hewlett-Packard Development Company, L.P. Schema data structure
WO2019210471A1 (zh) * 2018-05-02 2019-11-07 无锡盈达聚力科技有限公司 一种数据调用方法及数据调用装置
US20190361971A1 (en) * 2018-05-25 2019-11-28 Salesforce.Com, Inc. Smart column selection for table operations in data preparation

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016173428A1 (zh) * 2015-04-26 2016-11-03 阿里巴巴集团控股有限公司 一种数据传输方法及装置
US20170242673A1 (en) * 2016-02-19 2017-08-24 International Business Machines Corporation Methods and systems of generating ease of use interfaces for legacy system management facilities
US20190325045A1 (en) * 2018-04-20 2019-10-24 Hewlett-Packard Development Company, L.P. Schema data structure
WO2019210471A1 (zh) * 2018-05-02 2019-11-07 无锡盈达聚力科技有限公司 一种数据调用方法及数据调用装置
US20190361971A1 (en) * 2018-05-25 2019-11-28 Salesforce.Com, Inc. Smart column selection for table operations in data preparation
CN109800229A (zh) * 2018-12-29 2019-05-24 深圳云天励飞技术有限公司 数据访问方法及相关设备
CN109726244A (zh) * 2019-01-29 2019-05-07 北京中电普华信息技术有限公司 数据导入方法及装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111984238A (zh) * 2020-09-22 2020-11-24 吴政静 一种跨平台桥接数据信息处理的软件
CN113407603A (zh) * 2021-05-13 2021-09-17 北京鼎轩科技有限责任公司 数据导出方法及系统
CN115840539A (zh) * 2023-01-31 2023-03-24 天津南大通用数据技术股份有限公司 数据处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN111522817B (zh) 2023-05-12

Similar Documents

Publication Publication Date Title
EP2565802B1 (en) Data masking setup
CN111522817B (zh) 表格内容映射系统、方法及非暂时性存储介质
US8892534B2 (en) System and method for integrating data quality metrics into enterprise data management processes
US20200320044A1 (en) System and method for extracting a star schema from tabular data for use in a multidimensional database environment
US20130166515A1 (en) Generating validation rules for a data report based on profiling the data report in a data processing tool
CN109376139A (zh) 数据库集中监控方法、计算机装置及存储介质
CN112527783A (zh) 一种基于Hadoop的数据质量探查系统
CN111414740A (zh) 一种电子实验记录本报告生成系统
CN116541372A (zh) 一种数据资产治理方法及系统
CN110362630A (zh) 数据管理方法、装置、设备与计算机可读存储介质
CN113297179A (zh) 监管报送数据的处理方法及装置
CN111061733A (zh) 数据处理方法、装置、电子设备和计算机可读存储介质
CN114722789B (zh) 数据报表集成方法、装置、电子设备及存储介质
CN115438024A (zh) 数据导入中台的方法、装置、系统、电子设备、存储介质
CN114265842A (zh) 基于erp系统的审计数据处理方法、装置、设备和存储介质
CN114385722A (zh) 接口属性的一致性校验方法、装置、电子设备和存储介质
CN112258162A (zh) 一种一站式信息应用系统
US20230267557A1 (en) Generic configuration platform for generating electronic reports
US11954225B1 (en) Data privacy management
CN113674115B (zh) 一种基于数据治理技术的高校数据管理辅助系统及方法
US11954423B2 (en) Single-action electronic reporting
CN115858377B (zh) 基于客群管理的数据测试系统和方法
Chatzistefanou Data Warehousing in Business Intelligence and ETL Processes
CN117827902A (zh) 业务数据处理方法、装置、计算机设备以及存储介质
CN116644254A (zh) 数据处理方法、系统、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40036318

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant