CN101038597A - 一种数据采集装置以及实现采集数据共享的系统 - Google Patents

Abstract

本发明公开了一种数据采集装置以及实现采集数据共享的系统。其中，所述系统包括采集装置和中心服务器，采集装置用于获取基础数据和/或业务数据；还用于更新所述获取的数据；还用于上传所述更新后的数据；中心服务器用于接收所述更新后的数据；还用于将所述上传的数据进行保存。本发明中基础数据采集后上传到中心服务器，避免了重复采集工作；其次，采集装置在上传数据时，还可以将数据上传到有需要的业务服务器，实现了采集端的数据共享；再次实现了采集数据的共享；最后，中心服务器可以开放数据接口，将数据发送到有需要的业务服务器上，实现了系统级的数据共享。

Description

一种数据采集装置以及实现采集数据共享的系统

【技术领域】

本发明涉及信息管理与数据共享领域，尤其涉及一种数据采集装置以及实现采集数据共享的系统。

【背景技术】

在政府信息化建设的过程中，多个部门的工作例如民政、出租屋管理、计划生育等都是服务于广大人民群众的，均需要翔实、准确的人口资料。人口数据的采集是一项基础性的工作，工作量大，耗费人力、物力多，而且经常需要进行核对与跟踪。

传统的人口采集中，大部分人口数据采集工作以纸张为记录载体，并且在录入信息系统前需经过几次抄写，很容易出错导致信息不准确。

电子信息技术的快速发展，尤其是个人数字助理(Personal DigitalAssistant，PDA)的出现和应用，给数据采集工作带来了新的指导方向。中国专利“在PDA上实现人口与计划生育信息管理的方法及信息宝”(申请号为200510021228.X)中提出了一中利用PDA采集人口数据的方法，该方法主要包括以下步骤：

从计划生育管理部门的计算机上下载已有的人口与计划生育相关信息，并存储到PDA上；

工作人员到本辖区走访时，采集相关人口数据信息，并到PDA上进行存储更新上述人口与计划生育相关信息；

每月开例会时，将上述更新后的人口与计划生育相关信息输入到计划生育管理部门的计算机信息库当中。

上述方法利用PDA代替纸张进行数据的采集工作，只是改变了记录的工具，使采集到的数据更加准确，但是该方法仍不能从根本上解决数据采集的工作量大、耗费人力等问题。

因为历史原因，政府多个部门的信息化系统没有进行统一的规划，人口数据采集工作由各个部门组织完成，再由专人录入各自的系统。例如，民政部门进行民政管理，要派民政工作人员去采集相关人口数据；同一区域的计生部门进行计生工作，需要再派计生工作人员对该区域的人口数据进行采集。而往往在这些采集过程中，要采集的数据信息中有相当多是相同的，比如民政工作中要记录某人的姓名、身份证号码，计生工作也要采集某人的姓名和身份证号码，这样，造成了多次采集，一方面增加了政府的工作量；另一方面多次采集扰乱了居民的正常生活，容易造成居民的不满情绪。

【发明内容】

本发明的发明目的是提供一种数据采集装置以及实现采集数据共享的系统，达到采集数据共享的目的。

为达到上述目的，本发明提出了以下技术方案：

一种数据采集装置，该装置包括：

下载单元，用于获取基础数据和/或业务数据；

更新单元，用于更新所述下载单元获取的数据；

上传单元，用于上传所述更新单元更新后的数据至中心服务器。

其中，该装置还包括逻辑审核单元，用于对所述更新单元更新的数据进行逻辑审核。

其中，该装置还包括输入法自动切换单元，用于在所述更新单元更新数据时切换中文输入法或英文输入法。

其中，该装置还包括：

照片关联单元，用于当所述更新单元更新的数据为照片时，将照片自动与其相关的人口数据进行关联。

其中，所述上传单元还用于上传所述更新单元更新后的数据至业务服务器。

其中，该装置具体为PDA。

其中，所述PDA配备有摄像头、照明灯、或闪光灯。

一种实现采集数据共享的系统，包括采集装置和中心服务器，采集装置用于获取基础数据和/或业务数据；还用于更新所述获取的数据；还用于上传所述更新后的数据；

中心服务器用于接收所述更新后的数据；还用于将所述上传的数据进行保存。

其中，该系统还包括：业务服务器，用于接收采集装置或中心服务器发送的数据。

其中，该系统还包括：

个人电脑，用于接收中心服务器通过验证后，根据所述用户名向所述采集装置发送的，所述采集装置所管辖的数据；还用于将所述数据进行整理，生成采集装置认可的数据文件，发送到采集装置。

其中，所述采集装置包括：

下载单元，用于从中心服务器上获取基础数据和/或业务数据；

更新单元，用于更新所述获取的数据；

逻辑审核单元，用于更新单元更新的数据进行逻辑审核；

上传单元，用于上传所述审核后的数据至中心服务器或业务服务器。

其中，所述采集装置集成于PDA。

其中，所述PDA配备有摄像头、照明灯、或闪光灯。

其中，所述中心服务器包括：

发送单元，用于将业务数据写入缓冲表，向采集装置发送基础数据和/或业务数据；还用于开放数据接口，向业务服务器发送数据；

接收单元，用于接收采集装置更新后的上述数据；

审核单元，用于根据数据审核机制对接收单元中的数据进行审核，还用于将审核通过的数据发送到保存单元，将未通过审核的数据发送到指定的采集装置进行核实，或丢弃该数据；

保存单元，用于接收将所述审核单元的审核后的数据，并将所述数据与缓冲表的数据进行比较，并将不同之处进行更改；还用于将更改后缓冲表的数据保存到正式数据表中。

其中，所述审核单元为人口查重单元或数据逻辑检验单元或数据完整性检验单元。

其中，所述中心服务器还包括重点对象单元，用于设置重点监视数据类型的条件，还用于将所述接收单元接收的，符合所述条件的数据标记为重点对象。

从以上技术方案可以看出，在本发明中，将各个部门需要采集的数据进行整理，把相同的部分作为基础数据，把不同的数据作为业务数据。基础数据被采集之后，上传到中心服务器上，当采集工作再需要该基础数据时，可以从中心服务器上调出，避免了重复采集，实现了采集端的数据共享。采集装置在向中心服务器上传采集数据的同时，还可以上传到其他的业务服务器上，因此在业务服务器上也可以实现自动化的录入，进一步加强了采集端的数据共享。采集端的数据共享，大大减少了采集次数、减轻了数据录入工作的劳动强度，一方面大大减轻了基层工作人员的负担，提高了工作的效率，避免了数据的重复录入，减少人力、物力，降低成本，另一方面也可以减轻扰民现象。

此外，由于中心服务器上保存了所有业务部门的数据，并且开放数据接口，根据需要可以向各个部门的中心服务器发送各部门所需的数据，各个部门的系统可以从中心服务器上获取所需数据，实现了系统级的数据共享。这样一来，各个业务部门将不再需要亲自进行采集工作，可以仅当需要数据的时候从中心服务器下载所需数据，而采集数据的工作可以由中心服务器派专人进行采集，有利于采集工作的专业化，提高采集工作的质量。

【附图说明】

图1为本发明一种数据采集装置的结构图；

图2为本发明实现采集数据共享的系统的基本框架图；

图3为本发明实现采集数据共享的系统具体运行的流程图。

【具体实施方式】

本发明的基本技术构思是，将各个部门需要采集的数据进行整理，把相同的部分作为基础数据，把不同的数据作为业务数据；基础数据进行一次采集，并把采集到的基础数据存入数据中心，在以后的采集工作中，只要将该基础数据调出来就可以避免要再次采集基础数据；而对于各个部门所需业务数据，也可以整合在一起，一次上门就可以采集完所有所需的数据。

数据采集后，可以将数据上传到多个中心服务器，包括数据中心所在的中心服务器或某一需要该数据的部门的中心服务器上；并且各个部门的中心服务器可以与中心服务器相连，从中心服务器上获取所需的数据，实现系统级的数据共享。

为实现上述技术构思，参照图1，本发明提供了一种数据采集装置101，该装置包括：

下载单元102，用于获取基础数据和/或业务数据；

更新单元103，用于更新所述下载单元获取的数据；

上传单元104，用于上传所述更新单元更新后的数据至中心服务器。

其中，该装置还包括逻辑审核单元105，用于对所述更新单元更新的数据进行逻辑审核。

其中，该装置还包括输入法自动切换单元106，用于在所述更新单元更新数据时切换中文输入法或英文输入法。

其中，该装置还包括照片关联单元107，用于当所述更新单元更新的数据为照片时，将照片自动与其相应的人口数据进行关联。

在优选的实施例中，所述上传单元还用于上传所述更新单元更新后的数据至业务服务器。

在优选的实施例中，该装置具体为PDA。PDA为Personal Digital Assistant的缩写，译为个人数字助理，PDA可细分为电子词典、掌上电脑、手持电脑设备、个人通讯助理机，在本发明中，对这几类统称为PDA，因此凡利用这几类设备作为采集工具的都在本发明所述范畴之内。

其中，所述PDA配备有摄像头110、照明灯108或闪光灯109。

考虑到信息采集员手持PDA上户进行数据采集的时间大部分是晚上，光线不好，特制的PDA中配备了高亮度的照明灯(闪光灯)，以便于采集工作。为便于采集工作中进行拍照，本发明还在特制的PDA上配备高分辨率的摄像头。

以上的数据采集装置可以根据需要单独进行使用，也可以结合通讯系统配套使用。显然，无论本发明揭露的数据采集装置是单独使用，还是配套使用，都属于本发明的保护范围。

下面将详细介绍一种实现采集数据共享的系统，参阅图2，该系统包括采集装置202和中心服务器201，采集装置202用于获取基础数据和/或业务数据；还用于更新所述获取的数据；还用于上传所述更新后的数据；

中心服务器201用于接收所述更新后的数据；还用于将所述上传的数据进行保存。

实现采集数据共享的系统还包括：业务服务器204，用于接收采集装置202或中心服务器201发送的数据。

实现采集数据共享的系统还包括：个人电脑203，用于接收中心服务器201通过验证后，根据所述用户名向所述采集装置202发送的，所述采集装置202所管辖的数据；还用于将所述数据进行整理，生成采集装置202认可的数据文件，发送到采集装置202。

在实现采集数据共享的系统中，所述采集装置202包括：

下载单元，用于从中心服务器201上获取基础数据和/或业务数据；

更新单元，用于更新所述获取的数据；

逻辑审核单元，用于更新单元更新的数据进行逻辑审核；

上传单元，用于上传所述审核后的数据至中心服务器201或业务服务器204。

在实现采集数据共享的系统中，所述采集装置202还包括：

输入法自动切换单元，用于在更新单元更新数据时切换中文输入法或英文输入法；和/或

照片关联单元，用于当更新单元更新的数据为照片时，将照片自动与其相应的人口数据进行关联。

在实现采集数据共享的系统中，所述采集装置202集成于个人数字助理PDA。其中，所述PDA配备有摄像头210、照明灯208、或闪光灯209。

在实现采集数据共享的系统中，所述中心服务器201包括：

发送单元，用于将业务数据写入缓冲表，向采集装置202发送基础数据和/或业务数据；还用于开放数据接口，向业务服务器204发送数据；

接收单元，用于接收采集装置202更新后的上述数据；

审核单元，用于根据数据审核机制对接收单元中的数据进行审核，还用于将审核通过的数据发送到保存单元，将未通过审核的数据发送到指定的采集装置202进行核实，或丢弃该数据；

保存单元，用于接收将所述审核单元的审核后的数据，并将所述数据与缓冲表的数据进行比较，并将不同之处进行更改；还用于将更改后缓冲表的数据保存到正式数据表中。

在实现采集数据共享的系统的中心服务器201中，所述审核单元为人口查重单元或数据逻辑检验单元或数据完整性检验单元。

在实现采集数据共享的系统中，所述中心服务器201还包括重点对象单元，用于设置重点监视数据类型的条件，还用于将所述接收单元接收的，符合所述条件的数据标记为重点对象。

下面继续对上述系统的运行过程，以及各个组成部分在各个过程中的功能进行详细介绍。参阅图3，本发明中实现采集数据共享的系统的具体运行如下：

步骤S1、采集装置登录中心服务器，输入该采集装置的用户名和密码，并发送数据下载请求；验证通过后中心服务器返回所述用户管辖的数据表。

启动采集装置上的人口信息采集系统，连接到业务系统中心服务器，通过PC机与中心服务器进行数据同步的工作。

步骤S2、所述采集装置选择所述数据表中的部分数据，发送数据下载请求到PC，PC根据PC监听程序，向中心服务器发送数据下载请求。

PC客户端运行一个监听程序用来与采集装置进行通讯，在接收到采集装置下载数据的请求后，由PC客户端负责与中心服务器进行联系，并发送采集装置的请求。

其中，在采集装置下载数据时，引入数据校验机制，该机制用于保证采集装置上的数据不被覆盖，同时提高下载速度，在人口采集系统运行时引入数据缓存机制，提高软件运行速度和执行效率。

步骤S3、中心服务器通过验证后，根据所述用户名将其所管辖的数据向所述PC发送。

其中，步骤3中所述发送数据时，还可以根据本次采集的需要，发送采集装置指定的要下载数据。

中心服务器根据采集装置的下载请求，判断该采集员负责的片区，发送数据时，只发送该采集装置登录的用户名下负责的部分，并且由于采集员可以指定数据归属的楼栋，因此可以根据采集装置本次采集的需要只下载部分数据，提高了数据下载速度。

其中，中心服务器通过验证后，将业务数据写入数据缓冲表，还检测基础数据是否发生变化，如果发生变化，将基础数据和业务数据发送到PC；否则，将业务数据发送到PC。

一般情况下，采集装置中可以预存有基础数据，因此只有当中心服务器上的基础数据发生变化时，才需要将基础数据传输到采集装置，如果基础数据没有发生变化则只传输业务数据。中心服务器发送人口数据给采集装置前，会自动检测基础数据是否有变化，如果有变化，那么中心服务器会把基础数据从数据库读取出来，一并传送给采集装置，以保证采集装置上的基础数据和业务系统保持一致；如果没有变化，则业务系统就不再发送基础数据，这样加快了数据的传输速度。

步骤S4、所述PC接收上述数据，对所述数据进行整理，生成采集装置认可的数据文件，发送到采集装置。

由于目前实现采集功能的装置的处理速度较慢，性能较弱，在这里，充分利用了PC机远高于采集装置的性能优势，把耗时的数据整合工作放在PC机上，大大缩短了处理的时间。经实验证实，PC机处理数据的速度是采集装置的70至100倍；另外，采集装置接收到数据文件后，对数据文件进行解析，并启用采集装置的数据缓冲机制，把数据保存到缓存中，这样在采集装置上对数据进行读写时，可以直接操作缓存，大大提高了数据处理速度。

步骤S5、采集装置根据采集到的信息，更新数据，一般更新数据为增加数据、更改数据或删除数据。

其中，所述删除数据包括：将需要删除的数据标记为删除。在采集装置中，并不是真正意义上的删除数据，而是将需要删除的数据标记为删除，上传到中心服务器后，由中心服务器进行删除。

其中，在更新数据时采集装置引入了逻辑审核功能；在输入数据时采集装置可以自动切换输入法；当更新数据为照片时，照片可以自动和与该照片相关的人口数据进行关联。

在采集装置上进行数据采集时，引入了逻辑审核功能，当录入数据之间存在逻辑错误时，系统会自动进行提示，大大提高数据录入的准确性，并且系统会自动判断需要输入数字还是中英文，会自动切换不同的输入法，提高数据采集效率。拍照时，照片信息自动和采集的人口信息关联起来，避免了照片和人口信息张冠李戴现象。

步骤S6、采集装置将所述更新后的数据上传到中心服务器。

其中，采集装置可以将所述更新后的数据上传到中心服务器，还可以将数据传输到业务服务器上。

数据采集工作结束后，再次把采集装置连接到PC机，通过PC机把采集到的数据上传到中心服务器，由于采集装置可以进行多向上传，因此可以指定把数据上传到多个部门的业务服务器，真正做到了一处采集，多处共享。鉴于多个部门的业务服务器都需要人口数据作为业务基础，因此采集装置上实现了多向传输的功能，根据实际要求可以选择把采集的数据上传到多个信息管理系统。

其中，中心服务器接收所述数据后，还可以将采集装置上的业务数据删除，只保留基础数据。

其中，在上传所述将更新后的数据时，可以只上传有变化的那一部分数据。采集装置上传数据时，如果只上传变动的数据，由于数据量相对较少，可以采取采集装置直接与中心服务器进行数据同步的方式，把变动的数据直接上传至中心服务器。

步骤S7、中心服务器将所述上传的数据写入数据缓冲表；中心服务器根据数据审核机制对所述数据进行审核，将审核通过的数据保存到中心服务器的正式数据表，将未通过审核的数据发送到指定的采集装置进行核实，或丢弃该数据。

其中，中心服务器将所述上传的数据写入数据缓冲表的过程可以是，将所述上传的数据与所述数据缓冲表中的数据进行对比，并对其中变化的部分进行修改。

其中，所述审核包括：根据人口查重处理机制、数据逻辑检验机制、或数据完整性检验机制进行审核。

中心服务器采用数据审核机制，任何由采集装置进入业务系统的数据必须经过数据审核，该审核包括：人口查重处理，数据逻辑校验，数据完整性校验等。另外将未通过审核的数据发送到指定的采集装置进行核实，或丢弃该数据，如果指派给采集装置进行核实，那么当采集装置再次下载数据时，这些数据将被发送到采集装置中，进入重点核实人群，使数据得到特别关注。

步骤S8、中心服务器将所述审核后的数据进行分类保存。

步骤S9、设置重点业务类型的条件；将数据库中符合所述条件的数据保存到重点对象表。采集装置上的重点对象监控功能可以让重点对象中的数据得到更多的关注。

步骤S10、中心服务器开放数据接口，根据业务服务器的请求向该业务服务器发送其所需的数据。

由于中心服务器上保存了所有业务部门的数据，并且开放数据接口，根据需要可以向各个部门的中心服务器发送各部门所需的数据，各个部门的系统可以从中心服务器上获取所需数据，实现了系统级的数据共享。这样一来，各个业务部门将不再需要亲自进行采集工作，可以仅当需要数据的时候从中心服务器下载所需数据。

利用本发明的技术方案，能够使得人口数据采集方便、规范、准确，一处采集、多处共享使用，并且大幅度提高了系统性能，使得大规模的应用成为可能。本发明的技术方案为申请人辛勤的劳动成果，经过多次的试验和实践，具有很强的实用性和商业价值。

以上所述实施例仅表达了本发明的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本发明构思的前提下，还可以做出若干变形和改进，这些都属于本发明的保护范围。因此，本发明专利的保护范围应以所附权利要求为准。

Claims (16)

1、一种数据采集装置，其特征在于，该装置包括：

下载单元，用于获取基础数据和/或业务数据；

更新单元，用于更新所述下载单元获取的数据；

上传单元，用于上传所述更新单元更新后的数据至中心服务器。

2、根据权利要求1所述的数据采集装置，其特征在于，该装置还包括逻辑审核单元，用于对所述更新单元更新的数据进行逻辑审核。

3、根据权利要求1所述的数据采集装置，其特征在于，该装置还包括输入法自动切换单元，用于在所述更新单元更新数据时切换中文输入法或英文输入法。

4、根据权利要求1所述的数据采集装置，其特征在于，该装置还包括照片关联单元，用于当所述更新单元更新的数据为照片时，将照片自动与其相关的人口数据进行关联。

5、根据权利要求1所述的数据采集装置，其特征在于，所述上传单元还用于上传所述更新单元更新后的数据至业务服务器。

6、据权利要求1至5中任一项所述的数据采集装置，其特征在于：该装置具体为个人数字助理PDA。

7、据权利要求6所述的实现采集数据共享的系统，其特征在于：所述PDA配备有摄像头、照明灯、或闪光灯。

8、一种实现采集数据共享的系统，包括采集装置和中心服务器，其特征在于：

采集装置用于获取基础数据和/或业务数据；还用于更新所述获取的数据；还用于上传所述更新后的数据；

中心服务器用于接收所述更新后的数据；还用于将所述上传的数据进行保存。

9、根据权利要求8所述的实现采集数据共享的系统，其特征在于，该系统还包括：业务服务器，用于接收采集装置或中心服务器发送的数据。

10、根据权利要求8所述的实现采集数据共享的系统，其特征在于，该系统还包括：

个人电脑PC，用于接收中心服务器通过验证后，根据所述用户名向所述采集装置发送的，所述采集装置所管辖的数据；还用于将所述数据进行整理，生成采集装置认可的数据文件，发送到采集装置。

11、根据权利要求9所述的实现采集数据共享的系统，其特征在于，所述采集装置包括：

下载单元，用于从中心服务器上获取基础数据和/或业务数据；

更新单元，用于更新所述获取的数据；

逻辑审核单元，用于更新单元更新的数据进行逻辑审核；

上传单元，用于上传所述审核后的数据至中心服务器或业务服务器。

12、据权利要求9至11中任一项所述的实现采集数据共享的系统，其特征在于：所述采集装置集成于个人数字助理PDA。

13、据权利要求12所述的实现采集数据共享的系统，其特征在于：所述PDA配备有摄像头、照明灯、或闪光灯。

14、根据权利要求9所述的实现采集数据共享的系统，其特征在于，所述中心服务器包括：

发送单元，用于将业务数据写入缓冲表，向采集装置发送基础数据和/或业务数据；还用于开放数据接口，向业务服务器发送数据；

接收单元，用于接收采集装置更新后的上述数据；

审核单元，用于根据数据审核机制对接收单元中的数据进行审核，还用于将审核通过的数据发送到保存单元，将未通过审核的数据发送到指定的采集装置进行核实，或丢弃该数据；

保存单元，用于接收将所述审核单元的审核后的数据，并将所述数据与缓冲表的数据进行比较，并将不同之处进行更改；还用于将更改后缓冲表的数据保存到正式数据表中。

15、根据权利要求14所述的实现采集数据共享的系统，其特征在于：所述审核单元为人口查重单元或数据逻辑检验单元或数据完整性检验单元。

16、据权利要求14或15所述的实现采集数据共享的系统，其特征在于：所述中心服务器还包括重点对象单元，用于设置重点监视数据类型的条件，还用于将所述接收单元接收的，符合所述条件的数据标记为重点对象。

Images