CN107426237A - 一种用户个人信息的大数据网络验证系统和方法 - Google Patents

Abstract

本发明涉及网络数据验证领域，尤其涉及一种用户个人信息的大数据网络验证的系统和方法。所述系统包括个人信息读取装置、实时数据发送平台、搜索修订模块、筛选模块、数据存储模块、验证服务器、加密模块和解密模块，其中，个人信息读取装置和实时数据发送平台分别与加密模块电连接，加密模块与搜索修订模块电连接，搜索修订模块分别与筛选模块和数据存储模块电连接，筛选模块通过解密模块与验证服务器电连接。本发明采用搜索修订模块、数据存储模块和筛选模块的结合设置，解决了因缓冲区的大小限制出现丢数据的可能。

Description

一种用户个人信息的大数据网络验证系统和方法

技术领域

本发明涉及网络数据验证领域，尤其涉及一种用户个人信息的大数据网络验证系统和方法。

背景技术

以往了解贫困群体信息基本都是通过走访及查看户口本的方式完成贫困群体身份的验证，不能及时有效的获得公安系统中贫困群体的户口信息，验证户口本是否真实有效，是否篡改过，通过以往的经验一看粮、二看房、三看劳动力量强不强、四看家里有没有上学郎，通过民主评议、对象摸底、公平公示等来判断贫困群体是否符合扶贫要求，缺乏数据支撑和科学研判依据。

处理灾难性故障的主要技术是数据库备份。通常情况下，全部数据库和日志要周期性地备份在廉价存储介质上。当系统遇到灾难性故障时，可以从最近的一次备份中重新装入数据库，并启动系统。

为避免丢失自上次备份之后的所有更新，通常要以更高的频率将系统日志备份到备用存储介质。由于系统日志比数据库小得多，因此可以更频繁地备份。这样用户就不会丢失最后一次备份后的所有事务。通过对日志中所有已提交事务进行恢复可把数据库恢复到崩溃时的状态。另外，每次数据库备份后都要开始一个新的日志。因此从备用存储介质故障恢复时，首先根据备用存储介质上最后一次的数据库备份，在主存储介质上创建数据库，然后根据系统日志的备份对已提交事务进行恢复。

由于对交换机的数据库速度要求很高，因此必须采用内存数据库。同样，当主数据库出现故障时，恢复速度是最优先考虑的因素，因此传统的根据系统日志的备份对已提交事务进行恢复已不能满足系统要求，要求能及时有现成的数据库可供使用，这样，主备存储介质应具有相同的性能，而且主备数据库应实时同步。这就必须提出一套高效的主备同步方法，以确保在主数据库出现故障时，备份数据库可以及时使用。

中国专利“CN1437348通信系统中主备板数据实时同步的方法”提供了一种内存数据库的主备同步方法。此专利在主、备板中各设置一数据缓冲区；当主板数据修改时，向其缓冲区中写入主板修改过的数据；缓冲区对数据进行处理；当缓冲区数据量达到一定时，主板实时同步进程从缓冲区中读数据并发送到备板实时同步进程；更新备板数据库，并将操作结果返回给主板；如果操作结果是同步成功，则删除缓冲区中相应的数据，否则重新发送数据，直至缓冲区内记录为空。但是存在如下问题：所述的技术方案在实现主备同步时，将有变化的数据全部写入缓冲区，如果所有数据都有可能变化，为保证不丢失数据，则缓冲区必须与数据库大小相同，如果数据库相当大，缓冲区也一样大，则无疑会浪费空间；如果缓冲区的大小小于数据库，这样又会出现丢数据的可能。

同时，随着Internet的普及和商用化，提供IP接入服务的运营商面对的用户群体不断增多，网上的增值业务类型也不断丰富。当大量的话音/视频和数据业务在同一网络中传输时，只有对业务类型进行划分和对用户的服务等级(QOS)级别进行更有力的控制，才能使运营商能够针对不同用户提供不同服务等级(QOS)等级、具有个性化的宽带数据服务。实现这些差别服务的关键技术之一是对业务类型进行分类，在网络设备中采用线速网络处理器结构，针对不同的业务类型，网络处理器采用不同的带宽管理策略，对用户数据流量进行有效的限速。

在采用网络处理器进行线速数据包处理的网络设备(如路由器、交换机、接入服务器)中，现在大都采用的漏斗算法进行速率控制。漏斗算法的具体实现是，网络处理器开辟一定的数据包缓冲区作为缓冲队列，该队列被称为漏斗。当数据流量输入速率超过设置的最高速率时，将超出部分的包保存在缓冲队列即漏斗中，并在以后合适的时机将它调度出去。

漏斗算法需要网络设备要有比较大的数据缓冲区进行数据包的缓存，才能进行有效的线速。在没有较大缓冲区作缓存的网络设备中，漏斗算法比较难实现，限速效果不好，不能达到增值业务的要求。

发明内容

本发明采用搜索修订模块、数据存储模块和筛选模块的结合设置，解决了因缓冲区的大小限制出现丢数据的可能。

本发明公开了一种用户个人信息的大数据网络验证系统，所述系统包括：

个人信息读取装置,用于读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

实时数据发送平台,用于将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

搜索修订模块，用于接收初始个人信息和后台信息，并根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

筛选模块，用于接收搜索修订模块发送的实时个人信息，并将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

数据存储模块，用于存储搜索修订模块发送的实时个人信息，并接受验证服务器的读取调用；

验证服务器，用于根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

进一步地，其中，个人信息读取装置、实时数据发送平台、搜索修订模块、筛选模块、数据存储模块和验证服务器均通过无线网络电连接。

进一步地，所述实时数据发送平台包括：银行存款验证服务器、居民车辆查询服务器、居民房产查询服务器、企业工商查询服务器和居民社保查询服务器。

进一步地，还包括加密模块，用于将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护。

进一步地，还包括解密模块，用于将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。

进一步地，其中，个人信息读取装置和实时数据发送平台分别与加密模块电连接，加密模块与搜索修订模块电连接，搜索修订模块分别与筛选模块和数据存储模块电连接，筛选模块通过解密模块与验证服务器电连接。

进一步地，个人信息读取装置包括电脑、手机和IC读卡器。

一种用户个人信息的大数据网络验证方法，

利用个人信息读取装置读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

利用实时数据发送平台将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

利用搜索修订模块根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

利用筛选模块将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

利用数据存储模块存储搜索修订模块发送的实时个人信息；

利用验证服务器根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

进一步地，还包括以下步骤：

利用加密模块将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护，并将加密后的初始个人信息和后台信息分别发送至搜索修订模块。

进一步地，还包括以下步骤：

利用解密模块将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。

本发明的有益效果为：

本发明采用搜索修订模块、数据存储模块和筛选模块的结合设置，解决了因缓冲区的大小限制出现丢数据的可能；具体地说，利用搜索修订模块根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置，既节省了修订时间，又节省了修订时所需要的缓冲区容量；其次根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块，将数据同时储存和筛选，有益于在筛选的条件发生改变后，工作人员可以通过终端直接从数据存储模块中调取曾经的实时个人信息，既减少了操作步骤，节省了工作时间；又进一步地通过缩小查询范围提高了筛选的正确率。

附图说明

图1是本发明实施例一的电器连接框图；

图2是本发明实施例二的电器连接框图；

图3是本发明实施例一的方法流程图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

本技术领域技术人员可以理解，除非特意声明，这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是，本发明的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件，但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。

本技术领域技术人员可以理解，除非另外定义，这里使用的所有术语(包括技术术语和科学术语)，具有与本发明所属领域中的普通技术人员的一般理解相同的意义。还应该理解的是，诸如通用字典中定义的那些术语，应该被理解为具有与现有技术的上下文中的意义一致的意义，并且除非被特定定义，否则不会用理想化或过于正式的含义来解释。

实施例一：

如图1所示，本发明公开了一种用户个人信息的大数据网络验证系统，所述系统包括：

个人信息读取装置,用于读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

实时数据发送平台,用于将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

搜索修订模块，用于接收初始个人信息和后台信息，并根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

筛选模块，用于接收搜索修订模块发送的实时个人信息，并将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

数据存储模块，用于存储搜索修订模块发送的实时个人信息，并接受验证服务器的读取调用；

验证服务器，用于根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

进一步地，其中，个人信息读取装置、实时数据发送平台、搜索修订模块、筛选模块、数据存储模块和验证服务器均通过无线网络电连接。

进一步地，所述实时数据发送平台包括：银行存款验证服务器、居民车辆查询服务器、居民房产查询服务器、企业工商查询服务器和居民社保查询服务器。

进一步地，还包括加密模块，用于将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护。

进一步地，还包括解密模块，用于将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。

进一步地，其中，个人信息读取装置和实时数据发送平台分别与加密模块电连接，加密模块与搜索修订模块电连接，搜索修订模块分别与筛选模块和数据存储模块电连接，筛选模块通过解密模块与验证服务器电连接。

进一步地，个人信息读取装置包括电脑、手机和IC读卡器。

需要说明的是，本实施例中的个人信息存储介质包括U盘、存储卡、ROM/RAM、磁碟、光盘等。个人信息读取装置为具备有数据读取功能的硬件，可以是电脑、手机和IC读卡器其中任意一个。

如图3所示，本实施例公开了一种用户个人信息的大数据网络验证方法，

利用个人信息读取装置读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

利用实时数据发送平台将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

利用搜索修订模块根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

利用筛选模块将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

利用数据存储模块存储搜索修订模块发送的实时个人信息；

利用验证服务器根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

进一步地，还包括以下步骤：

利用加密模块将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护，并将加密后的初始个人信息和后台信息分别发送至搜索修订模块。

进一步地，还包括以下步骤：

利用解密模块将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。

本发明采用搜索修订模块、数据存储模块和筛选模块的结合设置，解决了因缓冲区的大小限制出现丢数据的可能；具体地说，利用搜索修订模块根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置，既节省了修订时间，又节省了修订时所需要的缓冲区容量；其次根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块，将数据同时储存和筛选，有益于在筛选的条件发生改变后，工作人员可以通过终端直接从数据存储模块中调取曾经的实时个人信息，既减少了操作步骤，节省了工作时间；又进一步地通过缩小查询范围提高了筛选的正确率。

实施例二：

如图2所示，本实施例中的用户个人信息的大数据网络验证系统是在实施例一基础上的改进，实施例一中公开的技术内容不重复描述，实施例一公开的内容也属于本实施例公开的内容。

本发明中的个人信息读取装置可以为一个，也可以为多个，本实施例中的个人信息读取装置为多个，用来同时获取多个农户的个人信息。

以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

此外，本领域的技术人员能够理解，尽管在此的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在下面的权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种用户个人信息的大数据网络验证系统，其特征在于，所述系统包括：

个人信息读取装置,用于读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

实时数据发送平台,用于将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

搜索修订模块，用于根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

筛选模块，用于将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

数据存储模块，用于存储搜索修订模块发送的实时个人信息；

验证服务器，用于根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

2.根据权利要求1所述的用户个人信息的大数据网络验证系统，其特征在于，其中，个人信息读取装置、实时数据发送平台、搜索修订模块、筛选模块、数据存储模块和验证服务器均通过无线网络电连接。

3.根据权利要求2所述的用户个人信息的大数据网络验证系统，其特征在于，实时数据发送平台包括：银行存款验证服务器、居民车辆查询服务器、居民房产查询服务器、企业工商查询服务器和居民社保查询服务器。

4.根据权利要求3所述的用户个人信息的大数据网络验证系统，其特征在于，还包括加密模块，用于将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护。

5.根据权利要求4所述的用户个人信息的大数据网络验证系统，其特征在于，还包括解密模块，用于将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。

6.根据权利要求5所述的用户个人信息的大数据网络验证系统，其特征在于，其中，个人信息读取装置和实时数据发送平台分别与加密模块电连接，加密模块与搜索修订模块电连接，搜索修订模块分别与筛选模块和数据存储模块电连接，筛选模块通过解密模块与验证服务器电连接。

7.根据权利要求6所述的用户个人信息的大数据网络验证系统，其特征在于，个人信息读取装置包括电脑、手机和IC读卡器。

8.一种用户个人信息的大数据网络验证方法，其特征在于，

利用个人信息读取装置读取用户的个人信息存储介质中的初始个人信息，并将初始个人信息发送至搜索修订模块；

利用实时数据发送平台将产生数据变化参数的后台信息实时自动发送至搜索修订模块；

利用搜索修订模块根据后台信息中的数据变化参数找出初始个人信息中相应的数据修改位置；再根据数据变化参数将数据修改位置处的数据进行修改，形成实时个人信息并发送至筛选模块和数据存储模块；

利用筛选模块将实时个人信息与预设的扶贫标准信息进行对比，将符合扶贫标准信息的实时个人信息标记为合格个人信息，将不符合扶贫标准信息的实时个人信息标记为不合格个人信息，将合格个人信息和不合格个人信息均发送至验证服务器；

利用数据存储模块存储搜索修订模块发送的实时个人信息；

利用验证服务器根据接收的合格个人信息和不合格个人信息判断该用户是否符合扶贫标准。

9.根据权利要求8所述的用户个人信息的大数据网络验证方法，其特征在于，还包括以下步骤：

利用加密模块将个人信息读取装置中的初始个人信息和实时数据发送平台中的后台信息进行加密保护，并将加密后的初始个人信息和后台信息分别发送至搜索修订模块。

10.根据权利要求9所述的用户个人信息的大数据网络验证方法，其特征在于，还包括以下步骤：

利用解密模块将合格个人信息和不合格个人信息均进行解密，并发送至验证服务器。