CN110321538A - 一种智能离线数据填报系统 - Google Patents
一种智能离线数据填报系统 Download PDFInfo
- Publication number
- CN110321538A CN110321538A CN201910534403.7A CN201910534403A CN110321538A CN 110321538 A CN110321538 A CN 110321538A CN 201910534403 A CN201910534403 A CN 201910534403A CN 110321538 A CN110321538 A CN 110321538A
- Authority
- CN
- China
- Prior art keywords
- template
- report
- form template
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims description 11
- 230000008676 import Effects 0.000 abstract description 15
- 238000012795 verification Methods 0.000 abstract description 15
- 241001269238 Data Species 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 3
- 125000004122 cyclic group Chemical group 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/174—Form filling; Merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/166—Editing, e.g. inserting or deleting
- G06F40/186—Templates
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Software Systems (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明公开了一种智能离线数据填报系统,包括模板自动生成装置、校验装置、邮件解析装置、数据库和发布装置,模板自动生成装置用于生成表格模板,并将表格模板发送给校验装置;校验装置用于对表格模板中的每项数据进行校验,校验通过后将表格模板发送给发布装置;发布装置用于将表格模板上传给服务器,供用户下载,用户下载表格模板后填写表格并将填好后的表格发送给智能离线数据填报系统;邮件解析装置用于接收用户发来的表格,并对表格进行处理。本发明的系统可以独立运行,可用于任何系统的数据填报场合,表格模板自动生成,极大的提高了开发人员的效率;VBA校验,提高了填报效率;邮件智能分析导入,减轻了服务器负载,很大程度上缩减了硬件成本。
Description
技术领域
本发明涉及一种数据处理系统,尤其是涉及一种智能离线数据填报系统。
背景技术
随着互联网的兴起,各种基于web的平台或系统应运而生,给人们的工作和生活带来了极大的方便,在这些平台和系统使用过程中,涉及到一个比较繁琐的问题——数据填报。目前数据填报的方式主要有两种:一、通过web页面进行填报,此方法是由产品研发人员制作相应数据的填报页面,包括输入框、单选、复选框、下拉列表、图片上传组件等页面控件,并辅以js脚本校验进行填报;二、通过制定excel模板,此方法是先由产品研发人员制定好模板,由用户下载模板,在excel中填写数据后,再通过上传导入的方式填报。通过web页面进行填报适用于数据项及数据量较少的情况,如果数据项或数据量较大,用户在填写的过程中容易出现超时不能提交的问题,或者不小心刷新页面、或者由于网络不稳定导致刚刚填好的数据丢失的问题,以致用户重复劳动,效率低下。此外,大量用户长时间在线进行填报,对服务器的负载和性能都有更高的要求,无形中又增加了硬件成本。通过传统excel模板方式填报,在填报效率上的确有一定的提升,但是数据校验比较滞后,一般都在上传导入的时候才能校验,如果有问题需要重新打开excel修改后再上传导入,如此反复,同样导致效率低下。与此同时,根据不同的需求,研发人员就需要制作不同的模板,并开发出相应的导入功能程序,这无疑又增加了开发成本。
为此本发明提出了一种智能离线数据填报系统,能够自动生成模板并添加校验脚本,对用户填写后表单邮件进行智能分析导入,模板生成效率高,用户体验度好,有效的提高了数据处理效率。
发明内容
为实现本发明之目的,采用以下技术方案予以实现:
一种智能离线数据填报系统,包括模板自动生成装置、校验装置、邮件解析装置、数据库和发布装置,其中:
模板自动生成装置用于创建一个表格模板配置名称,然后再进行具体的配置以生成表格模板,并将表格模板发送给校验装置;
校验装置用于对表格模板中的每项数据进行校验,校验通过后将表格模板发送给发布装置;
发布装置用于将表格模板上传给服务器,供用户下载,用户下载表格模板后填写表格并将填好后的表格发送给智能离线数据填报系统;
邮件解析装置用于接收用户发来的表格,并对表格进行处理。
所述的智能离线数据填报系统,其中:模板自动生成装置访问数据库中的相关数据表,获得数据表的字段配置信息,根据所述字段配置信息生成表格模板,将表格模板发送给校验装置。
所述的智能离线数据填报系统,其中生成表格模板的过程为:选择数据库中需要填报的表,根据选择的表列出相应的字段,对每个字段进行配置。
所述的智能离线数据填报系统,其中对每个字段进行配置包括:确定配置项为是否列在模板中,手工填写还是下拉选择,如果是下拉选择,则配置选择项。
所述的智能离线数据填报系统,其中配置完成后,模板自动生成装置根据配置信息生成模板:读取配置信息,首先查询出需要导入的字段信息,将表头名称依次写入模板第一行的相应位置,然后将填写方式为选择方式的字段初始化,初始化时选择项从码表中根据配置的类别提取。
所述的智能离线数据填报系统,其中校验装置对表格模板中的每项数据进行校验包括:根据每列的特点,对每列依次编写VBA校验脚本;对于电子邮件、手机号码、身份证号的编写正则表达式进行校验。
所述的智能离线数据填报系统,其中:校验装置校验的时机为在单元格失去焦点时对单元格数据进行校验并且在表格模板关闭时对表格模板的整体数据进行循环校验和表头有无篡改校验,校验过程中,如果不符合数据要求,弹出相应的提示框,并将焦点定位在相应的单元格中。
所述的智能离线数据填报系统,其中:邮件解析装置定时扫描邮件,如果有新的填报邮件,对该邮件进行身份验证,身份验证通过后,邮件解析装置根据表格模板的配置信息进行数据导入,如果数据导入成功,则发送导出成功通知邮件,任务结束,如果失败,以邮件的形式将导入失败信息反馈给用户。
所述的智能离线数据填报系统,其中邮件解析装置导入数据包括:邮件解析装置根据数据表格名称读取模板配置信息和用户的数据表格,根据模板配置信息校验表头是否匹配,有无篡改,校验通过后,根据模板配置信息准备导入数据,如果字段是由模板导入,则读取用户数据表格里的数据,如果字段是自动生成,则按照规则自动生成,如果是默认值,则直接设置为默认值,数据准备完成后进行导入。
所述的智能离线数据填报系统,其中:邮件解析装置通过对发件人、邮件标题、附件内容进行智能分析,将用户填写的信息导入数据库中的数据表进行存储。
附图说明
图1为智能离线数据填报系统示意图;
图2为创建一个模板配置名称示意图;
图3为表格模板生成示意图;
图4为邮件解析装置智能导入流程示意图。
具体实施方式
下面结合附图对本发明具体实施方式进行详细描述:
如图1所示,智能离线数据填报系统包括模板自动生成装置、校验装置、邮件解析装置、数据库和发布装置。其中:
模板自动生成装置用于创建一个表格模板配置名称,然后再进行具体的配置(如图2所示):访问数据库中的相关数据表,通过查询数据库的系统表获得数据表的字段配置信息(包括字段名,类型,长度,是否为空,备注等),例如:mysql中information_schema系统数据库中的系统表TABLES(记录表信息)、COLUMNS(记录字段信息),oracle中的系统表user_tables(记录表信息)、user_tab_columns(记录字段信息)、user_col_comments(记录字段备注信息),根据所述字段配置信息生成表格模板,将表格模板发送给校验装置,如图3所示,生成表格模板的过程为:选择数据库中需要填报的表,根据选择的表列出相应的字段,对每个字段进行配置:配置项为是否列在模板中(如果选项为默认值,则必须设置默认值)、手工填写还是下拉选择,如果是下拉选择,则配置选择项(对应表1码表中的类别);
表1码表
配置完成后,模板自动生成装置根据配置信息生成模板:读取配置信息,首先查询出需要导入的字段信息,将表头名称依次写入模板第一行的相应位置,然后将填写方式为选择方式的字段初始化(即对选择项中的各项进行填写),初始化时选择项可从表1码表中根据配置的类别提取。
校验装置用于对表格模板中的每项数据进行校验,包括:根据每列的特点,对每列依次编写VBA校验脚本如字符长度范围、是否为数字、小数点后必须两位等进行校验;对于电子邮件、手机号码、身份证号等有特殊规则要求的编写正则表达式进行校验;校验的时机为在单元格失去焦点时对单元格数据进行校验并且在表格模板关闭时对表格模板的整体数据进行循环校验和表头有无篡改校验;校验过程中,如果不符合数据要求,弹出相应的提示框,并将焦点定位在相应的单元格中。校验通过后将表格模板发送给发布装置;
发布装置用于将表格模板上传给服务器,供用户下载,用户下载表格模板后填写表格并将填好后的表格发送给智能离线数据填报系统;
邮件解析装置用于接收用户发来的邮件,其中包括邮件主题和附件表格,并对附件表格进行处理:
邮件解析装置定时(例如3分钟)扫描一次邮件,如果有新的填报邮件,系统会根据发件人、邮件主题和附件的模板表头智能分析填报人及填报数据是否合法,身份验证通过后,邮件解析装置根据自动生成该模板的配置信息进行数据导入(通过对发件人、附件内容进行智能分析,将用户填写的信息导入数据库中的数据表进行存储),导入的过程为:邮件解析装置根据数据表格名称读取模板配置信息和用户的数据表格,根据模板配置信息校验表头是否匹配,有无篡改,校验通过后,根据模板配置信息准备导入数据,如果字段是由模板导入,则读取用户数据表格里的数据,如果字段是自动生成,则按照规则自动生成,如果是默认值,则直接设置为默认值,数据读取完毕并生成导入语句后随即进行导入,如果数据导入成功,则发送导出成功通知邮件,任务结束,如果失败,以邮件的形式反馈给用户,并及时接受用户再次修改后的邮件进行处理。
本发明的系统可以独立运行,可用于任何系统的数据填报场合,表格模板自动生成,配置灵活,表格模板配置自动适应,极大的提高了开发人员的效率;通过校验的设置,避免了反复修改再导入的弊端,提高了成功导入的概率,从而提高了填报效率;通过邮件智能分析导入,用户无须登录平台或系统,只需发送电子邮件即可完成上传导入的功能。本发明将填报主动权交给了服务端,由服务端决定导入的先后顺序,避免了大规模的并发,减轻了服务器的负载,从而可以缩减硬件成本。VBA校验,提高了填报效率;邮件智能分析导入,减轻了服务器负载,很大程度上缩减了硬件成本。
Claims (3)
1.一种智能离线数据填报系统,包括模板自动生成装置、校验装置、邮件解析装置、数据库和发布装置,其特征在于:
模板自动生成装置用于创建一个表格模板配置名称,然后再进行具体的配置以生成表格模板,并将表格模板发送给校验装置;
校验装置用于对表格模板中的每项数据进行校验,校验通过后将表格模板发送给发布装置;
发布装置用于将表格模板上传给服务器,供用户下载,用户下载表格模板后填写表格并将填好后的表格发送给智能离线数据填报系统;
邮件解析装置用于接收用户发来的表格,并对表格进行处理。
2.根据权利要求1所述的智能离线数据填报系统,其特征在于:模板自动生成装置访问数据库中的相关数据表,获得数据表的字段配置信息,根据所述字段配置信息生成表格模板,将表格模板发送给校验装置。
3.根据权利要求1或2所述的智能离线数据填报系统,其特征在于生成表格模板的过程为:选择数据库中需要填报的表,根据选择的表列出相应的字段,对每个字段进行配置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910534403.7A CN110321538B (zh) | 2019-06-20 | 2019-06-20 | 一种智能离线数据填报系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910534403.7A CN110321538B (zh) | 2019-06-20 | 2019-06-20 | 一种智能离线数据填报系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110321538A true CN110321538A (zh) | 2019-10-11 |
CN110321538B CN110321538B (zh) | 2023-11-03 |
Family
ID=68119878
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910534403.7A Active CN110321538B (zh) | 2019-06-20 | 2019-06-20 | 一种智能离线数据填报系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110321538B (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111177243A (zh) * | 2019-12-24 | 2020-05-19 | 浙江大搜车软件技术有限公司 | 数据的导出方法及装置、存储介质和电子装置 |
CN111476009A (zh) * | 2020-03-23 | 2020-07-31 | 一汽奔腾轿车有限公司 | 一种新车报税配置信息一致性校验系统 |
CN111737412A (zh) * | 2020-05-21 | 2020-10-02 | 电子科技大学 | 基于自然语言处理和知识图谱的公民来访引导方法 |
CN112214970A (zh) * | 2020-10-20 | 2021-01-12 | 上海科越信息技术股份有限公司 | 报关单填报方法及装置 |
CN112883139A (zh) * | 2021-03-15 | 2021-06-01 | 国家海洋信息中心 | 基于gis矢量计算的空间数据与业务数据自动校验方法 |
CN113836864A (zh) * | 2021-08-26 | 2021-12-24 | 广西电网有限责任公司来宾供电局 | 开发工单内容比对方法及系统 |
CN113971191A (zh) * | 2020-07-23 | 2022-01-25 | 腾讯科技(深圳)有限公司 | 一种数据导入方法、装置和计算机可读存储介质 |
CN113986924A (zh) * | 2021-10-28 | 2022-01-28 | 深圳壹账通智能科技有限公司 | 智能数据填报方法、装置、设备及存储介质 |
CN115758500A (zh) * | 2022-11-11 | 2023-03-07 | 南京维拓科技股份有限公司 | 一种工业设计流程中离线模式设计方法 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7603301B1 (en) * | 2000-04-26 | 2009-10-13 | Accenture Llp | Verification and printing of a tax return in a network-based tax architecture |
CN101894099A (zh) * | 2010-06-29 | 2010-11-24 | 北京科技大学 | 一种报表模板定制方法 |
CN103150647A (zh) * | 2013-04-10 | 2013-06-12 | 中国农业银行股份有限公司 | 报表文件处理方法、服务器和系统 |
CN103268335A (zh) * | 2013-05-13 | 2013-08-28 | 中国农业银行股份有限公司 | 报表数据填报方法及系统 |
CN105528666A (zh) * | 2014-10-25 | 2016-04-27 | 国家电网公司 | 变电站综合报表生成方法 |
CN109284463A (zh) * | 2018-08-15 | 2019-01-29 | 山东鲁能软件技术有限公司 | 一种基于动态模板的数据收集方法及系统 |
CN109388647A (zh) * | 2018-10-30 | 2019-02-26 | 成都四方伟业软件股份有限公司 | 一种基于web的数据填报方法及系统 |
CN109816218A (zh) * | 2019-01-04 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 企业运营管理方法、装置、计算机设备和存储介质 |
-
2019
- 2019-06-20 CN CN201910534403.7A patent/CN110321538B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7603301B1 (en) * | 2000-04-26 | 2009-10-13 | Accenture Llp | Verification and printing of a tax return in a network-based tax architecture |
CN101894099A (zh) * | 2010-06-29 | 2010-11-24 | 北京科技大学 | 一种报表模板定制方法 |
CN103150647A (zh) * | 2013-04-10 | 2013-06-12 | 中国农业银行股份有限公司 | 报表文件处理方法、服务器和系统 |
CN103268335A (zh) * | 2013-05-13 | 2013-08-28 | 中国农业银行股份有限公司 | 报表数据填报方法及系统 |
CN105528666A (zh) * | 2014-10-25 | 2016-04-27 | 国家电网公司 | 变电站综合报表生成方法 |
CN109284463A (zh) * | 2018-08-15 | 2019-01-29 | 山东鲁能软件技术有限公司 | 一种基于动态模板的数据收集方法及系统 |
CN109388647A (zh) * | 2018-10-30 | 2019-02-26 | 成都四方伟业软件股份有限公司 | 一种基于web的数据填报方法及系统 |
CN109816218A (zh) * | 2019-01-04 | 2019-05-28 | 深圳壹账通智能科技有限公司 | 企业运营管理方法、装置、计算机设备和存储介质 |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111177243A (zh) * | 2019-12-24 | 2020-05-19 | 浙江大搜车软件技术有限公司 | 数据的导出方法及装置、存储介质和电子装置 |
CN111177243B (zh) * | 2019-12-24 | 2023-11-14 | 浙江大搜车软件技术有限公司 | 数据的导出方法及装置、存储介质和电子装置 |
CN111476009A (zh) * | 2020-03-23 | 2020-07-31 | 一汽奔腾轿车有限公司 | 一种新车报税配置信息一致性校验系统 |
CN111737412A (zh) * | 2020-05-21 | 2020-10-02 | 电子科技大学 | 基于自然语言处理和知识图谱的公民来访引导方法 |
CN113971191A (zh) * | 2020-07-23 | 2022-01-25 | 腾讯科技(深圳)有限公司 | 一种数据导入方法、装置和计算机可读存储介质 |
CN112214970A (zh) * | 2020-10-20 | 2021-01-12 | 上海科越信息技术股份有限公司 | 报关单填报方法及装置 |
CN112883139A (zh) * | 2021-03-15 | 2021-06-01 | 国家海洋信息中心 | 基于gis矢量计算的空间数据与业务数据自动校验方法 |
CN113836864A (zh) * | 2021-08-26 | 2021-12-24 | 广西电网有限责任公司来宾供电局 | 开发工单内容比对方法及系统 |
CN113986924A (zh) * | 2021-10-28 | 2022-01-28 | 深圳壹账通智能科技有限公司 | 智能数据填报方法、装置、设备及存储介质 |
CN115758500A (zh) * | 2022-11-11 | 2023-03-07 | 南京维拓科技股份有限公司 | 一种工业设计流程中离线模式设计方法 |
CN115758500B (zh) * | 2022-11-11 | 2023-10-20 | 南京维拓科技股份有限公司 | 一种工业设计流程中离线模式设计方法 |
Also Published As
Publication number | Publication date |
---|---|
CN110321538B (zh) | 2023-11-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110321538A (zh) | 一种智能离线数据填报系统 | |
CN109558575B (zh) | 在线表格编辑方法、装置、计算机设备及存储介质 | |
US11216447B2 (en) | Control systems with independent data processing | |
CN109948132A (zh) | 一种配置模板的数据填报方法和系统 | |
CN110399420A (zh) | 一种可配置化Excel格式的导出方法、电子设备和介质 | |
CN104239073B (zh) | 一种数据维护系统快速原型开发系统及方法 | |
CN107273117A (zh) | 一种编程友好型的敏捷代码自动生成系统 | |
US20140013204A1 (en) | Method and apparatus for sychronizing financial reporting data | |
CN109189379A (zh) | 代码生成方法和装置 | |
CN111367975B (zh) | 一种多协议数据转换处理方法及装置 | |
CN107544808A (zh) | 一种网页表单的生成方法和装置 | |
CN107291450A (zh) | 一种编程友好型的敏捷代码自动生成方法 | |
US10380011B2 (en) | Method, apparatus, and computer-readable medium for performing functional testing of software | |
KR100627587B1 (ko) | 웹브라우저 상에서 xml 문서를 생성하는 방법 | |
CN105701251A (zh) | 一种基于对象定义的数据导出导入方法 | |
CN116468010A (zh) | 报表生成方法、装置、终端及存储介质 | |
CN115329728B (zh) | 工作数据低采集高复用协同办公报表系统及方法 | |
CN107392560A (zh) | 一种基于互联网的Excel表格数据发布采集方法及系统 | |
CN112035093A (zh) | 一种能够快速安全和灵活生产软件的程序框架 | |
CN103984554B (zh) | 软件设计文档的生成方法及装置 | |
CN106776779B (zh) | 基于Mac平台的JSON数据生成实体文件的方法 | |
CN102023859A (zh) | 面向数字化研制环境的可靠性维修性保障性软件集成方法 | |
CN116595101A (zh) | 数据同步方法、装置、设备及计算机可读存储介质 | |
CN113779132B (zh) | 一种数据导入的方法、装置、计算机设备和存储介质 | |
CN114281331A (zh) | 一种用于访问数据库的前后端代码文件的生成方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |