CN103870468B - 一种导入数据的处理方法及系统 - Google Patents
一种导入数据的处理方法及系统 Download PDFInfo
- Publication number
- CN103870468B CN103870468B CN201210530188.1A CN201210530188A CN103870468B CN 103870468 B CN103870468 B CN 103870468B CN 201210530188 A CN201210530188 A CN 201210530188A CN 103870468 B CN103870468 B CN 103870468B
- Authority
- CN
- China
- Prior art keywords
- data
- middle table
- conversion process
- checking treatment
- adjustment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Document Processing Apparatus (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明实施例涉及数据管理技术领域，公开了一种导入数据的处理方法及系统。其中，该方法包括：将数据导入中间表；根据预置的转换规则对所述中间表中的数据进行转换处理；根据预置的校验规则对所述中间表中的数据进行校验处理；判断所述数据的校验处理和转换处理是否都成功，如果是，将所述数据发送至正式表，否则显示所述数据的校验处理和/或转换处理不成功的提示信息。本发明实施例提供的可以确保导入系统正式表中数据的有效性和准确性，便于用户对数据的使用。
Description
技术领域
本发明涉及数据管理技术领域，具体涉及一种导入数据的处理方法及系统。
背景技术
目前大多数企业都有许多的信息管理系统，很多系统存在需要共享和重用的数据，例如物料、工艺路线、BOM、凭证等。这些数据都是采用不同的导入技术进入当前系统中，让用户可以直接操作使用。
现有的信息管理系统中都偏重于将数据导入，重点关注与导入过程中数据结构映射的配置，数据在导入后在系统中直接就可以使用，而没有对数据的有效性和准确性进行检验，导致数据的有效性和准确性低。
发明内容
本发明实施例所要解决的技术问题是提供一种导入数据的处理方法，用于对导入数据进行校验和转换处理，确保数据的有效性和准确性。
本发明实施例提供一种导入数据的处理方法，包括：
将数据导入中间表；
根据预置的转换规则对所述中间表中的数据进行转换处理；
根据预置的校验规则对所述中间表中的数据进行校验处理；
判断所述数据的校验处理和转换处理是否都成功，如果是，将所述数据发送至正式表，否则显示所述数据的校验处理和/或转换处理不成功的提示信息。
相应的，本发明实施例还提供一种导入数据的处理系统，所述系统包括：
导入模块，用于将数据导入中间表；
转换模块，用于根据预置的转换规则对所述中间表中的数据进行转换处理；
校验模块，用于根据预置的校验规则对所述中间表中的数据进行校验处理；
判断模块，用于判断所述数据的校验处理和转换处理是否都成功；
发送模块，用于当所述判断模块的判断结果为是时，将所述数据发送至正式表；
显示模块，用于当所述判断模块的判断结果为否时，显示所述数据的校验和/或转换处理不成功的提示信息。
本发明实施例中提供的处理方法和系统先将需要导入的外部数据导入至中间表进行校验和转换处理，确保数据的有效性和准确性，使得用户在使用时无需额外的调整，方便用户的使用，降低了数据管理的成本。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的导入数据的处理方法的流程示意图；
图2是本发明实施例二提供的导入数据的处理方法的流程示意图；
图3是本发明实施例三提供的导入数据的处理系统的框图；
图4是本发明实施例三提供的导入数据的处理系统的另一框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例中提供了一种导入数据的处理方法和系统，用于对导入的数据进行校验和转换，确保数据的有效性和准确性，可方便用户对数据的使用。以下分别进行详细说明。
实施例一：
本发明提供一种导入数据的处理方法，如图1所示，包括下列步骤：
步骤101、将数据导入中间表；
上述数据可为任意的外部数据，外部数据在存入正式表之前首先被导入中间表。
步骤102、根据预置的转换规则对上述中间表中的数据进行转换处理；
转换的作用在于将外部系统的设置转换为内部系统可识别的设置，包括字符到字符的转换，例如物料自制、委外属性，外部系统定义为“0”、“1”两个数值表示，内部系统可能定义为“SELF”、“OUT”两个字符串表示，此时就需要进行转换；以及字符到对象的转换，即将数据的字段中包括的字符转换成对应的对象，例如外部系统定义的文档名称对应于内部系统的相应文档，此时可将文档名称转换成相应的文档。
步骤103、根据预置的校验规则对上述中间表中的数据进行校验处理；
校验的作用在于检查数据的准确性，例如关键字段是否为空、需要转换字段是否能正确转换等。
步骤104、判断上述数据的校验处理和转换处理是否都成功，如果是，执行步骤106，否则执行步骤105。
步骤105、显示上述数据的校验处理和/或转换处理不成功的提示信息；结束流程；
对于校验和/或转换处理不成功的数据，将显示提示信息以通知用户。
步骤106、将上述数据发送至正式表。
只有校验和转换处理都成功的数据才被发送至正式表进行存储。
本实施例提供的导入数据的处理方法先将需要导入的外部数据导入至中间表进行校验和转换处理，确保数据的有效性和准确性，则用户在使用时就无需因为出现无效或不准确的数据而进行额外的调整，方便用户的使用，降低了数据管理的成本。
实施例二：
步骤201、设置中间表、校验规则和转换规则；
具体地，步骤201可包括：
201A、设置中间表，使中间表的结构与其对应的正式表的结构相对应；
201B、设置上述中间表中每个字段的属性；
用户可手动的对中间表的每个字段的属性进行设置，当然也可以导入合适的模版实现对中间表中字段属性的快速设置；
201C、对上述中间表每个字段的设置校验规则和转换规则；
用户可手动的对中间表的每个字段设置校验规则和转换规则，当然也可以导入合适的模版实现对中间表中字段属性的快速设置。
步骤202、将数据导入中间表；
中间表可与正式表一一对应；
上述数据可为任意的外部数据，外部数据在存入正式表之前首先被导入中间表。
步骤203、根据预置的转换规则对上述中间表中的上述数据进行转换处理；
转换的作用在于将外部系统的设置转换为内部系统可识别的设置，包括字符到字符的转换，例如物料自制、委外属性，外部系统定义为“0”、“1”两个数值表示，内部系统可能定义为“SELF”、“OUT”两个字符串表示，此时就需要进行转换；以及字符到对象的转换，例如外部系统定义的文档名称对应于内部系统的相应文档，此时可将文档名称转换成相应的文档。
步骤204、根据预置的校验规则对上述中间表中的数据进行校验处理；
校验的作用在于检查数据的准确性，例如关键字段是否为空、需要转换字段是否能正确转换等。
步骤205、判断上述数据的校验处理和转换处理是否都成功，如果是，执行步骤208，否则执行步骤206。
步骤206、显示上述数据的校验处理和/或转换处理不成功的提示信息；
对于校验和/或转换处理不成功的数据，将显示提示信息使用户可对其进行后续的处理。
步骤207、接收用户的输入的对上述数据的调整信息，根据上述调整信息对上述数据进行调整；执行步骤203。
对于校验处理和/或转换处理不成功的数据，用户可根据提示信息输入调整信息以对其进行调整；
经过调整之后，可再返回步骤203，对数据重新进行转换处理和校验处理。
步骤208、将上述数据发送至正式表；
只有校验和转换处理成功的数据才被发送至正式表进行存储。
本实施例提供的导入数据的处理方法先将需要导入的外部数据导入至中间表进行校验和转换处理，对于校验和转换处理不成功的数据可由用户进行调整，以确保存入正式表的数据的有效性和准确性，使得用户在使用时无需再进行额外的调整，方便用户的使用，降低了数据管理的成本。
实施例三：
本发明还提供一种导入数据的处理系统，如图3所示，包括：
导入模块10，用于将数据导入中间表；上述数据可为任意的外部数据；
转换模块20，用于根据预置的转换规则对上述中间表中的上述数据进行转换处理；
校验模块30，用于根据预置的校验规则对上述中间表中的上述数据进行校验处理；
判断模块40，用于判断校验模块30对数据的校验处理和转换模块20对数据的转换处理是否都成功；
发送模块50，用于当判断模块40的判断结果为是时，将上述数据发送至正式表；
显示模块60，用于当判断模块40的判断结果为否时，显示上述数据的校验和/或转换处理不成功的提示信息。
本实施例提供的导入数据的处理方法先将需要导入的外部数据导入至中间表进行校验和转换处理，以确保存入正式表的数据的有效性和准确性，使得用户在使用时无需额外的调整，方便用户的使用，降低了数据管理的成本。
需要说明的是，转换的作用在于将外部系统的设置转换为内部系统可识别的设置，包括字符到字符的转换，例如物料自制、委外属性，外部系统定义为“0”、“1”两个数值表示，内部系统可能定义为“SELF”、“OUT”两个字符串表示，此时就需要进行转换；以及字符到对象的转换，例如外部系统定义的文档名称对应于内部系统的相应文档，此时可将文档名称转换成相应的文档。校验的作用在于检查数据的准确性，例如关键字段是否为空、需要转换字段是否能正确转换等；
进一步地，如图4所示，上述导入数据的处理系统还包括：
接收模块70，用于当上述判断模块40的判断结果为否时，接收用户的输入的对上述数据的调整信息；
调整模块80，用于根据上述调整信息对上述数据进行调整；
转换模块20还用于根据预置的转换规则对经过上述调整后的数据进行转换处理；
校验模块30还用于根据预置的校验规则对经过上述调整后的数据进行校验处理；
判断模块40还用于判断校验模块30和转换模块20对经过调整模块80调整后的数据的校验处理和转换处理是否都成功；
发送模块50还用于当判断模块40判断出经过调整模块80调整后的数据的校验处理和转换处理都成功时，将经过上述调整后的数据发送至上述正式表；
显示模块50，还用于当判断模块40判断出经过调整模块80调整后的数据的校验处理和转换处理没有都成功时，显示上述经过调整的数据的校验处理和/或转换处理不成功的提示信息。
本实施例中，对于校验和/或转换失败的数据，用户可对其进行调整使得调整之后的数据可以成功通过校验和转换，以保证数据的有效性和准确性。
进一步地，如图4所示，本实施例提供的导入数据的处理系统还包括：
设定模块90，用于设定上述的中间表、上述的校验规则和转换规则。
具体地，设定模块90可包括：
中间表设置单元，用于对正式表设置相应的中间表，使中间表的结构与所述正式表的结构对应；
字段属性设置单元，用于设置上述中间表中每个字段的属性；
规则设置单元，用于对所述中间表每个字段的设定校验规则和转换规则。
本实施例中，用户可手动的对中间表的每个字段的属性进行设置，当然也可以导入合适的模版实现对中间表中字段属性的快速设置；同理，用户可手动的对中间表的每个字段设置校验规则和转换规则，当然也可以导入合适的模版实现对中间表中字段属性的快速设置。
本实施例，中间表可与正式表一一对应，可对每个中间表的每一个字段都设定校验规则和转换规则，从而使得可对导入数据的每一个字段都进行校验和转换，确保存入正式表的数据的有效性和准确性。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-OnlyMemory，ROM)、随机存取器(Random AccessMemory，RAM)、磁盘或光盘等。
以上对本发明实施例所提供的导入数据的处理方法和系统进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (4)
1.一种导入数据的处理方法，其特征在于，包括：
设置中间表、校验规则和转换规则,包括：设置中间表，使所述中间表的结构与正式表的结构对应；设置所述中间表中每个字段的属性；对所述中间表每个字段的设置校验规则和转换规则；
将数据导入中间表；
根据预置的转换规则对所述中间表中的数据进行转换处理，转换的作用在于将外部系统的设置转换为内部系统可识别的设置；
根据预置的校验规则对所述中间表中的数据进行校验处理；
判断所述数据的校验处理和转换处理是否都成功，如果是，将所述数据发送至正式表，否则显示所述数据的校验处理和/或转换处理不成功的提示信息；
在所述显示所述数据的校验和/或转换处理不成功的提示信息之后，所述方法还包括：
接收用户的输入的对所述数据的调整信息，根据所述调整信息对所述数据进行调整；
根据所述预置的转换规则对所述调整后的数据进行转换处理；
根据所述预置的校验规则对所述调整后的数据进行校验处理；
判断经过所述调整后的数据的校验处理和转换处理是否都成功，如果是，将经过所述调整后的数据发送至所述正式表，否则显示所述调整后的数据的校验处理和/或转换处理不成功的提示信息。
2.根据权利要求1所述的方法，其特征在于，所述根据预置的转换规则对所述中间表中的数据进行转换处理包括：
根据预置的转换规则将所述中间表中的字段中包括的字符转换成对应的对象。
3.一种导入数据的处理系统，其特征在于，所述系统包括：
设置模块，用于设置中间表、校验规则和转换规则；
所述设置模块包括：中间表设置单元，用于设置中间表，使所述中间表的结构与正式表的结构对应；字段属性设置单元，用于设置所述中间表中每个字段的属性；规则设置单元，用于对所述中间表每个字段的设定校验规则和转换规则；
导入模块，用于将数据导入中间表；
转换模块，用于根据预置的转换规则对所述中间表中的数据进行转换处理，转换的作用在于将外部系统的设置转换为内部系统可识别的设置；
校验模块，用于根据预置的校验规则对所述中间表中的数据进行校验处理；
判断模块，用于判断所述数据的校验处理和转换处理是否都成功；
发送模块，用于当所述判断模块的判断结果为是时，将所述数据发送至正式表；
显示模块，用于当所述判断模块的判断结果为否时，显示所述数据的校验和/或转换处理不成功的提示信息；
接收模块，用于当所述判断模块的判断结果为否时，接收用户的输入的对所述数据的调整信息；
调整模块，用于根据所述调整信息对所述数据进行调整；
所述转换模块还用于根据预置的转换规则对经过所述调整后的数据进行转换处理；
所述校验模块还用于根据预置的校验规则对经过所述调整后的数据进行校验处理；
所述判断模块，还用于判断经过所述调整后的数据的校验处理和转换处理是否都成功；
所述发送模块还用于当所述调整后的数据的校验处理和转换处理都成功时，将经过所述调整后的数据发送至所述正式表；
所述显示模块，还用于当所述调整后的数据的校验处理和转换处理没有都成功时，显示所述经过调整的数据的校验处理和/或转换处理不成功的提示信息。
4.根据权利要求3所述的系统，其特征在于，所述转换模块具体用于根据预置的转换规则将所述中间表中的字段中包括的字符转换成对应的对象。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210530188.1A CN103870468B (zh) | 2012-12-11 | 2012-12-11 | 一种导入数据的处理方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201210530188.1A CN103870468B (zh) | 2012-12-11 | 2012-12-11 | 一种导入数据的处理方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103870468A CN103870468A (zh) | 2014-06-18 |
| CN103870468B true CN103870468B (zh) | 2017-12-01 |
Family
ID=50909012
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201210530188.1A Active CN103870468B (zh) | 2012-12-11 | 2012-12-11 | 一种导入数据的处理方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103870468B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105824849A (zh) * | 2015-01-08 | 2016-08-03 | 中国移动通信集团河南有限公司 | 一种数据导入方法及适配器 |
| CN108647358A (zh) * | 2018-05-17 | 2018-10-12 | 东软集团股份有限公司 | 数据质量校验方法、装置、存储介质及电子设备 |
| CN111858647B (zh) * | 2020-08-04 | 2022-07-05 | 浪潮卓数大数据产业发展有限公司 | 一种数据源间转换字段类型的校验方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101620624A (zh) * | 2009-08-13 | 2010-01-06 | 公安部第一研究所 | 一种物理隔离条件下不同数据库间数据同步的方法 |
| CN101957865A (zh) * | 2010-10-27 | 2011-01-26 | 杭州新中大软件股份有限公司 | 一种异构系统间数据交换与共享技术 |
-
2012
- 2012-12-11 CN CN201210530188.1A patent/CN103870468B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101620624A (zh) * | 2009-08-13 | 2010-01-06 | 公安部第一研究所 | 一种物理隔离条件下不同数据库间数据同步的方法 |
| CN101957865A (zh) * | 2010-10-27 | 2011-01-26 | 杭州新中大软件股份有限公司 | 一种异构系统间数据交换与共享技术 |
Non-Patent Citations (1)
| Title |
|---|
| 异构数据库数据迁移模型的设计与实现;郑仕勇;《贺州学院学报》;20120630;第28卷(第2期);第132-135页 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103870468A (zh) | 2014-06-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104361139B (zh) | 数据导入装置和方法 | |
| CN104410667B (zh) | 一种xml报文到json报文的转换方法及系统 | |
| US20140359362A1 (en) | Information interaction test device and method based on automatic generation of associated test cases | |
| CN103870468B (zh) | 一种导入数据的处理方法及系统 | |
| CN108829647A (zh) | 一种数据转换方法及装置 | |
| CN102707958B (zh) | 一种基于开放平台的接口生成校验方法及设备 | |
| CN103379139B (zh) | 分布式缓存内容的校验方法、系统和装置 | |
| CN105447921A (zh) | 课堂自动化考勤与限制手机使用的系统及其实现方法 | |
| CN106776349A (zh) | 一种接口检测流程的设置方法和系统 | |
| CN101876900B (zh) | 实现流程图自动调整布局的方法及装置 | |
| CN105630590A (zh) | 一种业务信息处理方法及装置 | |
| CN109558525A (zh) | 一种测试数据集的生成方法、装置、设备和存储介质 | |
| CN105989084A (zh) | 一种回复问题的方法和设备 | |
| CN105023207A (zh) | 一种教师布置家庭作业系统及方法 | |
| CN109635300A (zh) | 数据校验方法及装置 | |
| CN107704758A (zh) | 一种sql注入漏洞检测方法和检测装置 | |
| CN107888989A (zh) | 一种基于互联网直播的交互系统及方法 | |
| CN110390082A (zh) | 一种通信矩阵对比方法及系统 | |
| CN101477565A (zh) | 确定搜索引擎中输入字符串正确性的方法及装置 | |
| US20140019537A1 (en) | Configurable Community Platform | |
| CN107707629B (zh) | Gnss消息转换验证的方法 | |
| CN104866361A (zh) | 学校家庭作业编辑、发送和下载系统及方法 | |
| CN103514769A (zh) | 智能学习线路设计系统及方法 | |
| CN105208520A (zh) | 一种移动终端自动发送信息的方法及装置 | |
| CN103457957B (zh) | 一种具有自适应功能的网络渗透测试系统及方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |