CN112699108A - 婚姻登记系统数据重构方法、装置及终端设备 - Google Patents
婚姻登记系统数据重构方法、装置及终端设备 Download PDFInfo
- Publication number
- CN112699108A CN112699108A CN202011567358.4A CN202011567358A CN112699108A CN 112699108 A CN112699108 A CN 112699108A CN 202011567358 A CN202011567358 A CN 202011567358A CN 112699108 A CN112699108 A CN 112699108A
- Authority
- CN
- China
- Prior art keywords
- data
- registration
- source data
- registration source
- class
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000012545 processing Methods 0.000 claims abstract description 70
- 238000004364 calculation method Methods 0.000 claims abstract description 27
- 230000006835 compression Effects 0.000 claims description 16
- 238000007906 compression Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 16
- 230000015654 memory Effects 0.000 claims description 14
- 239000011159 matrix material Substances 0.000 claims description 11
- 238000005259 measurement Methods 0.000 claims description 11
- 238000000605 extraction Methods 0.000 claims description 6
- 238000013500 data storage Methods 0.000 abstract description 3
- 238000004891 communication Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供了一种婚姻登记系统数据重构方法、装置及终端设备，该方法属于数据处理领域，包括：获取目标婚姻登记系统的登记源数据；对所述登记源数据进行聚类处理，得到多个数据类；构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据；为所述去重处理后的登记源数据添加数据标识，基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。本发明提供的婚姻登记系统数据重构方法、装置及终端设备能够有效降低婚姻登记系统的数据存储成本。
Description
技术领域
本发明属于数据处理技术领域，更具体地说，是涉及一种婚姻登记系统数据重构方法、装置及终端设备。
背景技术
婚姻登记系统作为一种民政系统，数据量大是其显著特性。在此基础上，随着我国人口的不断增多，婚姻登记人员的比例还在不断上涨，导致婚姻登记系统的存储容量需求越来越大，存储成本不断增加。
因此，如何有效地对婚姻登记系统中的数据进行处理，以降低婚姻登记系统中数据的存储成本成为本领域技术人员亟需解决的问题。
发明内容
本发明的目的在于提供一种婚姻登记系统数据重构方法、装置及终端设备，以解决由于登记人口增多导致的婚姻登记系统存储成本不断增加的问题。
本发明实施例的第一方面，提供了一种婚姻登记系统数据重构方法，包括：
获取目标婚姻登记系统的登记源数据；
对所述登记源数据进行聚类处理，得到多个数据类；
构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据；
为所述去重处理后的登记源数据添加数据标识，基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
本发明实施例的第二方面，提供了一种婚姻登记系统数据重构装置，包括：
数据获取模块，用于获取目标婚姻登记系统的登记源数据；
聚类处理模块，用于对所述登记源数据进行聚类处理，得到多个数据类；
去重处理模块，用于构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据；
压缩重构模块，用于为所述去重处理后的登记源数据添加数据标识，基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
本发明实施例的第三方面，提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述的婚姻登记系统数据重构方法的步骤。
本发明实施例的第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述的婚姻登记系统数据重构方法的步骤。
本发明实施例提供的婚姻登记系统数据重构方法、装置及终端设备的有益效果在于：
一方面，在去重之前，本发明基于各个登记源数据的相似性对各个登记源数据进行了聚类处理，而后基于聚类处理得到的多个数据类进行去重处理，区别于现有技术直接对各个登记源数据进行去重处理的方案，本发明给出的批量处理方案，去重处理更加彻底，且处理效率更高。另一方面，本发明为去重处理后的各个登记源数据添加了数据标识，将数据标识引入到了各个登记源数据的压缩重构中，对各个登记源数据进行了压缩重构，不仅降低了婚姻登记系统的存储成本，还由于通过数据标识对各个登记源数据进行了标记，从而更好地支持了后续的数据存储、数据查询流程，提高了婚姻登记系统的数据处理速度。也就是说，本发明从去重处理和数据重构两方面有效降低了婚姻登记系统的存储成本。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明一实施例提供的婚姻登记系统数据重构方法的流程示意图；
图2为本发明一实施例提供的婚姻登记系统数据重构装置的结构框图；
图3为本发明一实施例提供的终端设备的示意框图。
具体实施方式
为了使本发明所要解决的技术问题、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
请参考图1，图1为本发明一实施例提供的婚姻登记系统数据重构方法的流程示意图，该方法包括：
S101：获取目标婚姻登记系统的登记源数据。
S102：对登记源数据进行聚类处理，得到多个数据类。
在本实施例中，可基于聚类算法对登记源数据进行聚类处理，得到多个数据类。
S103：构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据。
在本实施例中，某个数据类对应的指纹计算规则为该数据类对应的目标字段的提取规则。目标字段为用于判断该数据类中各个登记源数据是否存在重复的字段。相应的，构建各个数据类对应的指纹计算规则可以详述为：设定各个数据类对应的目标字段的提取规则。
S104：为去重处理后的登记源数据添加数据标识，基于数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
在本实施例中，可基于现有的重构算法对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
由上可以得出，本发明实施例存在以下效果：一方面，在去重之前，本发明基于各个登记源数据的相似性对各个登记源数据进行了聚类处理，而后基于聚类处理得到的多个数据类进行去重处理，区别于现有技术直接对各个登记源数据进行去重处理的方案，本发明给出的批量处理方案，去重处理更加彻底，且处理效率更高。另一方面，本发明为去重处理后的各个登记源数据添加了数据标识，将数据标识引入到了各个登记源数据的压缩重构中，对各个登记源数据进行了压缩重构，不仅降低了婚姻登记系统的存储成本，还由于通过数据标识对各个登记源数据进行了标记，从而更好地支持了后续的数据存储、数据查询流程，提高了婚姻登记系统的数据处理速度。也就是说，本发明从去重处理和数据重构两方面有效降低了婚姻登记系统的存储成本。
可选地，作为本发明实施例提供的婚姻登记系统数据重构方法的一种具体实施方式，为去重处理后的登记源数据添加数据标识，包括：
基于各个数据类的平均使用频次确定各个数据类对应的数据标识范围。
基于各个去重处理后的登记源数据所属的数据类以及各个数据类对应的数据标识范围为各个去重处理后的登记源数据添加数据标识。
在本实施例中，某个数据类的平均使用频次指的是某个数据类中各个登记源数据的平均被访问频次。
在本实施例中，各个登记源数据的数据标识的确定方法可以详述为：
以各个数据类为单位，按照各个登记源数据的被访问频次对各个数据类中的各个登记源数据进行排序。
对于某个登记源数据，基于该登记源数据在其所属数据类中的排序序号从其所属数据类对应的数据标识范围中对应选取一个数据标识作为该登记源数据的数据标识。
可选地，作为本发明实施例提供的婚姻登记系统数据重构方法的一种具体实施方式，该婚姻登记系统数据重构方法还可以包括：
基于各个重构后的登记源数据的数据标识对各个压缩重构后的登记源数据进行存储。
在本实施例中，各个登记源数据的数据标识由各个登记源数据的被访问频次确定。其中，基于各个重构后的登记源数据的数据标识对各个压缩重构后的登记源数据进行存储，可以详述为：
将属于同一数据类的各个登记源数据存储至连续的存储空间；
对于属于同一数据类的各个登记源数据，按照各个登记源数据对应的数据标识确定各个登记源数据对应的存储顺序(其中，被访问频次越多的登记源数据存储位置越靠前)。
可选地，作为本发明实施例提供的婚姻登记系统数据重构方法的一种具体实施方式，对登记源数据表进行聚类处理，得到多个数据类，包括：
S41：基于各个登记源数据之间的关联关系生成数据网络。其中，各个登记源数据对应数据网络的节点，各个登记源数据之间关联关系对应数据网络各个节点之间的连接关系。
S42：计算各个未划分节点的度中心性指标，将度中心性指标最大的未划分节点作为当前数据类的中心节点，基于其余各个划分节点与当前数据类的中心节点的相似度确定当前数据类中的剩余节点。
其中，未划分节点指的是未划分入任一数据类的节点。
S43：重复执行步骤S42直至所有节点均被划分至某一数据类，得到多个初始划分后的数据类。基于各个初始划分后的数据类之间的相似度对各个初始划分后的数据类进行合并，得到多个数据类。
在本实施例中，基于各个初始划分后的数据类之间的相似度对各个初始划分后的数据类进行合并，得到多个数据类可以详述为：
对初始划分后的数据类进行两两计算，计算每两个数据类之间的相似度。若对于某两个数据类，该两个数据类之间的相似度小于预设阈值，则将该两个数据类进行合并。重复执行上述合并步骤，得到合并完成的多个数据类。
可选地，作为本发明实施例提供的婚姻登记系统数据重构方法的一种具体实施方式，对于某一数据类，基于该数据类对应的指纹计算规则对该数据类进行进行去重处理，包括：
基于该数据类对应的指纹计算规则提取该数据类中各个登记源数据的目标字段，删除目标字段重复的登记源数据，实现该数据类的去重处理。
可选地，作为本发明实施例提供的婚姻登记系统数据重构方法的一种具体实施方式，基于数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据，包括：
基于各个登记源数据的数据标识生成各个登记源数据对应的伪随机数。
根据各个登记源数据对应的伪随机数、以及各个登记源数据所属的数据类确定各个数据类对应的测量矩阵。
基于各个数据类对应的测量矩阵、预设的稀疏基对各个登记源数据进行压缩重构，得到重构后的登记源数据。
在本实施例中，根据各个登记源数据对应的伪随机数、以及各个登记源数据所属的数据类确定各个数据类对应的测量矩阵可以详述为：
将属于同一数据类的各个登记源数据对应的伪随机数进行组合，得到各个数据类对应的测量矩阵。各个数据类对应的测量矩阵也即各个数据类中的登记源数据对应的测量矩阵，也就是说，将属于同一数据类的各个登记源数据对应的测量矩阵相同。其中，同一数据类中各个登记源数据对应的伪随机数的组合顺序由各个登记源数据对应的数据标识确定(例如，可将同一数据类中各个登记源数据对应的数据标识的大小顺序作为同一数据类中各个登记源数据对应的伪随机数的组合顺序)。
对应于上文实施例的婚姻登记系统数据重构方法，图2为本发明一实施例提供的婚姻登记系统数据重构装置的结构框图。为了便于说明，仅示出了与本发明实施例相关的部分。参考图2，该婚姻登记系统数据重构装置20包括：数据获取模块21、聚类处理模块22、去重处理模块23、压缩重构模块24。
其中，数据获取模块21，用于获取目标婚姻登记系统的登记源数据。
聚类处理模块22，用于对登记源数据进行聚类处理，得到多个数据类。
去重处理模块23，用于构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据。
压缩重构模块24，用于为去重处理后的登记源数据添加数据标识，基于数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，为去重处理后的登记源数据添加数据标识，包括：
基于各个数据类的平均使用频次确定各个数据类对应的数据标识范围。
基于各个去重处理后的登记源数据所属的数据类以及各个数据类对应的数据标识范围为各个去重处理后的登记源数据添加数据标识。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，压缩重构模块24还可以执行以下步骤：
基于各个重构后的登记源数据的数据标识对各个压缩重构后的登记源数据进行存储。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，对登记源数据表进行聚类处理，得到多个数据类，包括：
S41：基于各个登记源数据之间的关联关系生成数据网络。其中，各个登记源数据对应数据网络的节点，各个登记源数据之间关联关系对应数据网络各个节点之间的连接关系。
S42：计算各个未划分节点的度中心性指标，将度中心性指标最大的未划分节点作为当前数据类的中心节点，基于其余各个划分节点与当前数据类的中心节点的相似度确定当前数据类中的剩余节点。
其中，未划分节点指的是未划分入任一数据类的节点。
S43：重复执行步骤S42直至所有节点均被划分至某一数据类，得到多个初始划分后的数据类。基于各个初始划分后的数据类之间的相似度对各个初始划分后的数据类进行合并，得到多个数据类。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，某个数据类对应的指纹计算规则为该数据类对应的目标字段的提取规则。
目标字段为用于判断该数据类中各个登记源数据是否存在重复的字段。相应的，构建各个数据类对应的指纹计算规则包括：
设定各个数据类对应的目标字段的提取规则。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，对于某一数据类，基于该数据类对应的指纹计算规则对该数据类进行进行去重处理，包括：
基于该数据类对应的指纹计算规则提取该数据类中各个登记源数据的目标字段，删除目标字段重复的登记源数据，实现该数据类的去重处理。
可选地，作为本发明实施例提供的婚姻登记系统数据重构装置的一种具体实施方式，基于数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据，包括：
基于各个登记源数据的数据标识生成各个登记源数据对应的伪随机数。
根据各个登记源数据对应的伪随机数、以及各个登记源数据所属的数据类确定各个数据类对应的测量矩阵。
基于各个数据类对应的测量矩阵、预设的稀疏基对各个登记源数据进行压缩重构，得到重构后的登记源数据。
参见图3，图3为本发明一实施例提供的终端设备的示意框图。如图3所示的本实施例中的终端300可以包括：一个或多个处理器301、一个或多个输入设备302、一个或多个输出设备303及一个或多个存储器304。上述处理器301、输入设备302、输出设备303及存储器304通过通信总线305完成相互间的通信。存储器304用于存储计算机程序，计算机程序包括程序指令。处理器301用于执行存储器304存储的程序指令。其中，处理器301被配置用于调用程序指令执行以下操作上述各装置实施例中各模块/单元的功能，例如图2所示模块21至24的功能。
应当理解，在本发明实施例中，所称处理器301可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
输入设备302可以包括触控板、指纹采传感器(用于采集用户的指纹信息和指纹的方向信息)、麦克风等，输出设备303可以包括显示器(LCD等)、扬声器等。
该存储器304可以包括只读存储器和随机存取存储器，并向处理器301提供指令和数据。存储器304的一部分还可以包括非易失性随机存取存储器。例如，存储器304还可以存储设备类型的信息。
具体实现中，本发明实施例中所描述的处理器301、输入设备302、输出设备303可执行本发明实施例提供的婚姻登记系统数据重构方法的第一实施例和第二实施例中所描述的实现方式，也可执行本发明实施例所描述的终端的实现方式，在此不再赘述。
在本发明的另一实施例中提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序包括程序指令，程序指令被处理器执行时实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质可以包括：能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
计算机可读存储介质可以是前述任一实施例的终端的内部存储单元，例如终端的硬盘或内存。计算机可读存储介质也可以是终端的外部存储设备，例如终端上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，计算机可读存储介质还可以既包括终端的内部存储单元也包括外部存储设备。计算机可读存储介质用于存储计算机程序及终端所需的其他程序和数据。计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的数据。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的终端和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的终端和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
以上，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种婚姻登记系统数据重构方法，其特征在于，包括：
获取目标婚姻登记系统的登记源数据；
对所述登记源数据进行聚类处理，得到多个数据类；
构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据；
为所述去重处理后的登记源数据添加数据标识，基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
2.如权利要求1所述的婚姻登记系统数据重构方法，其特征在于，所述为所述去重处理后的登记源数据添加数据标识，包括：
基于各个数据类的平均使用频次确定各个数据类对应的数据标识范围；
基于各个去重处理后的登记源数据所属的数据类以及各个数据类对应的数据标识范围为各个去重处理后的登记源数据添加数据标识。
3.如权利要求2所述的婚姻登记系统数据重构方法，其特征在于，还包括：
基于各个重构后的登记源数据的数据标识对各个压缩重构后的登记源数据进行存储。
4.如权利要求1所述的婚姻登记系统数据重构方法，其特征在于，所述对所述登记源数据表进行聚类处理，得到多个数据类，包括：
S41：基于各个登记源数据之间的关联关系生成数据网络；其中，各个登记源数据对应所述数据网络的节点，各个登记源数据之间关联关系对应所述数据网络各个节点之间的连接关系；
S42：计算各个未划分节点的度中心性指标，将度中心性指标最大的未划分节点作为当前数据类的中心节点，基于其余各个划分节点与当前数据类的中心节点的相似度确定当前数据类中的剩余节点；
其中，未划分节点指的是未划分入任一数据类的节点；
S43：重复执行步骤S42直至所有节点均被划分至某一数据类，得到多个初始划分后的数据类；基于各个初始划分后的数据类之间的相似度对各个初始划分后的数据类进行合并，得到多个数据类。
5.如权利要求1所述的婚姻登记系统数据重构方法，其特征在于，某个数据类对应的指纹计算规则为该数据类对应的目标字段的提取规则；
所述目标字段为用于判断该数据类中各个登记源数据是否存在重复的字段；相应的，所述构建各个数据类对应的指纹计算规则包括：
设定各个数据类对应的目标字段的提取规则。
6.如权利要求5所述的婚姻登记系统数据重构方法，其特征在于，对于某一数据类，基于该数据类对应的指纹计算规则对该数据类进行进行去重处理，包括：
基于该数据类对应的指纹计算规则提取该数据类中各个登记源数据的目标字段，删除目标字段重复的登记源数据，实现该数据类的去重处理。
7.如权利要求1所述的婚姻登记系统数据重构方法，其特征在于，所述基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据，包括：
基于各个登记源数据的数据标识生成各个登记源数据对应的伪随机数；
根据各个登记源数据对应的伪随机数、以及各个登记源数据所属的数据类确定各个数据类对应的测量矩阵；
基于各个数据类对应的测量矩阵、预设的稀疏基对各个登记源数据进行压缩重构，得到重构后的登记源数据。
8.一种婚姻登记系统数据重构装置，其特征在于，包括：
数据获取模块，用于获取目标婚姻登记系统的登记源数据；
聚类处理模块，用于对所述登记源数据进行聚类处理，得到多个数据类；
去重处理模块，用于构建各个数据类对应的指纹计算规则，并基于各个数据类对应的指纹计算规则对各个数据类分别进行去重处理，得到去重处理后的登记源数据；
压缩重构模块，用于为所述去重处理后的登记源数据添加数据标识，基于所述数据标识对去重处理后的登记源数据进行压缩重构，得到重构后的登记源数据。
9.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011567358.4A CN112699108A (zh) | 2020-12-25 | 2020-12-25 | 婚姻登记系统数据重构方法、装置及终端设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011567358.4A CN112699108A (zh) | 2020-12-25 | 2020-12-25 | 婚姻登记系统数据重构方法、装置及终端设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112699108A true CN112699108A (zh) | 2021-04-23 |
Family
ID=75510949
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011567358.4A Pending CN112699108A (zh) | 2020-12-25 | 2020-12-25 | 婚姻登记系统数据重构方法、装置及终端设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112699108A (zh) |
Citations (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1999044292A1 (en) * | 1998-02-26 | 1999-09-02 | Research In Motion Limited | Block-wise adaptive statistical data compressor |
| US20070027656A1 (en) * | 2005-05-10 | 2007-02-01 | Baraniuk Richard G | Method and Apparatus for Distributed Compressed Sensing |
| CN101464910A (zh) * | 2009-01-12 | 2009-06-24 | 浙江大学 | 基于数据相似的平衡聚类压缩方法 |
| US20100250501A1 (en) * | 2009-03-26 | 2010-09-30 | International Business Machines Corporation | Storage management through adaptive deduplication |
| CN102202012A (zh) * | 2011-05-30 | 2011-09-28 | 中国人民解放军总参谋部第五十四研究所 | 通信网络的社团划分方法与系统 |
| CN103605791A (zh) * | 2013-12-04 | 2014-02-26 | 深圳中兴网信科技有限公司 | 信息推送系统和信息推送方法 |
| CN105488235A (zh) * | 2016-02-03 | 2016-04-13 | 苏州见微物联网科技有限公司 | 一种基于工业大数据的云平台数据管理系统及其构建方法 |
| CN105740907A (zh) * | 2016-02-01 | 2016-07-06 | 石家庄铁道大学 | 一种局部社团挖掘方法 |
| US20160210325A1 (en) * | 2014-01-06 | 2016-07-21 | International Business Machines Corporation | Compression of serialized b-tree data |
| US9411815B1 (en) * | 2013-09-26 | 2016-08-09 | Emc Corporation | System and method for improving data compression in a deduplicated storage system |
| CN106936439A (zh) * | 2016-09-20 | 2017-07-07 | 南开大学 | 一种通用的基于分块排序思想的压缩预处理方法及应用 |
| US20170255643A1 (en) * | 2016-03-02 | 2017-09-07 | Nimble Storage, Inc. | Multiple deduplication domains in network storage system |
| US20170277768A1 (en) * | 2016-03-28 | 2017-09-28 | Salesforce.Com, Inc. | Dense subset clustering |
| CN109255433A (zh) * | 2018-08-28 | 2019-01-22 | 浙江工业大学 | 一种基于相似性的社区检测的方法 |
| CN109358987A (zh) * | 2018-10-26 | 2019-02-19 | 黄淮学院 | 一种基于两级数据去重的备份集群 |
| US10303797B1 (en) * | 2015-12-18 | 2019-05-28 | EMC IP Holding Company LLC | Clustering files in deduplication systems |
| CN110069495A (zh) * | 2019-03-13 | 2019-07-30 | 中科恒运股份有限公司 | 数据存储方法、装置和终端设备 |
| US10423495B1 (en) * | 2014-09-08 | 2019-09-24 | Veritas Technologies Llc | Deduplication grouping |
| US20200134082A1 (en) * | 2018-10-25 | 2020-04-30 | International Business Machines Corporation | Grouping of objects into clusters in an object-based storage environment |
| CN111177526A (zh) * | 2018-11-12 | 2020-05-19 | 百度在线网络技术（北京）有限公司 | 网络意见领袖识别方法及装置 |
| CN111263324A (zh) * | 2020-01-16 | 2020-06-09 | 南京审计大学金审学院 | 一种基于K-medoids分簇的无线传感网压缩感知处理方法 |
-
2020
- 2020-12-25 CN CN202011567358.4A patent/CN112699108A/zh active Pending
Patent Citations (23)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO1999044292A1 (en) * | 1998-02-26 | 1999-09-02 | Research In Motion Limited | Block-wise adaptive statistical data compressor |
| US6075470A (en) * | 1998-02-26 | 2000-06-13 | Research In Motion Limited | Block-wise adaptive statistical data compressor |
| EP1057269A1 (en) * | 1998-02-26 | 2000-12-06 | Research In Motion Limited | Block-wise adaptive statistical data compressor |
| US20070027656A1 (en) * | 2005-05-10 | 2007-02-01 | Baraniuk Richard G | Method and Apparatus for Distributed Compressed Sensing |
| CN101464910A (zh) * | 2009-01-12 | 2009-06-24 | 浙江大学 | 基于数据相似的平衡聚类压缩方法 |
| US20100250501A1 (en) * | 2009-03-26 | 2010-09-30 | International Business Machines Corporation | Storage management through adaptive deduplication |
| CN102202012A (zh) * | 2011-05-30 | 2011-09-28 | 中国人民解放军总参谋部第五十四研究所 | 通信网络的社团划分方法与系统 |
| US9411815B1 (en) * | 2013-09-26 | 2016-08-09 | Emc Corporation | System and method for improving data compression in a deduplicated storage system |
| CN103605791A (zh) * | 2013-12-04 | 2014-02-26 | 深圳中兴网信科技有限公司 | 信息推送系统和信息推送方法 |
| US20160210325A1 (en) * | 2014-01-06 | 2016-07-21 | International Business Machines Corporation | Compression of serialized b-tree data |
| US10423495B1 (en) * | 2014-09-08 | 2019-09-24 | Veritas Technologies Llc | Deduplication grouping |
| US10303797B1 (en) * | 2015-12-18 | 2019-05-28 | EMC IP Holding Company LLC | Clustering files in deduplication systems |
| CN105740907A (zh) * | 2016-02-01 | 2016-07-06 | 石家庄铁道大学 | 一种局部社团挖掘方法 |
| CN105488235A (zh) * | 2016-02-03 | 2016-04-13 | 苏州见微物联网科技有限公司 | 一种基于工业大数据的云平台数据管理系统及其构建方法 |
| US20170255643A1 (en) * | 2016-03-02 | 2017-09-07 | Nimble Storage, Inc. | Multiple deduplication domains in network storage system |
| US20170277768A1 (en) * | 2016-03-28 | 2017-09-28 | Salesforce.Com, Inc. | Dense subset clustering |
| CN106936439A (zh) * | 2016-09-20 | 2017-07-07 | 南开大学 | 一种通用的基于分块排序思想的压缩预处理方法及应用 |
| CN109255433A (zh) * | 2018-08-28 | 2019-01-22 | 浙江工业大学 | 一种基于相似性的社区检测的方法 |
| US20200134082A1 (en) * | 2018-10-25 | 2020-04-30 | International Business Machines Corporation | Grouping of objects into clusters in an object-based storage environment |
| CN109358987A (zh) * | 2018-10-26 | 2019-02-19 | 黄淮学院 | 一种基于两级数据去重的备份集群 |
| CN111177526A (zh) * | 2018-11-12 | 2020-05-19 | 百度在线网络技术（北京）有限公司 | 网络意见领袖识别方法及装置 |
| CN110069495A (zh) * | 2019-03-13 | 2019-07-30 | 中科恒运股份有限公司 | 数据存储方法、装置和终端设备 |
| CN111263324A (zh) * | 2020-01-16 | 2020-06-09 | 南京审计大学金审学院 | 一种基于K-medoids分簇的无线传感网压缩感知处理方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108090567B (zh) | 电力通信系统故障诊断方法及装置 | |
| CN109814524B (zh) | 一种车辆诊断方法、装置及系统 | |
| CN107784063B (zh) | 算法的生成方法及终端设备 | |
| CN111159329B (zh) | 敏感词检测方法、装置、终端设备和计算机可读存储介质 | |
| CN110727702B (zh) | 数据查询方法、装置、终端和计算机可读存储介质 | |
| CN113129150A (zh) | 交易数据的处理方法、装置、终端设备及可读存储介质 | |
| CN107977504B (zh) | 一种非对称堆芯燃料管理计算方法、装置及终端设备 | |
| CN111382189A (zh) | 一种异源异构数据碰撞分析方法、终端设备及存储介质 | |
| CN112699108A (zh) | 婚姻登记系统数据重构方法、装置及终端设备 | |
| CN110309328B (zh) | 数据存储方法、装置、电子设备及存储介质 | |
| CN112037814B (zh) | 一种音频指纹的提取方法、装置、电子设备及存储介质 | |
| CN112836045A (zh) | 基于文本数据集的数据处理方法、装置及终端设备 | |
| CN111158994B (zh) | 一种压测性能测试方法及装置 | |
| CN109587353B (zh) | 短信号码归属信息的识别方法、装置及存储介质 | |
| CN113160942A (zh) | 影像数据质量评估方法、装置、终端设备及可读存储介质 | |
| CN112907365A (zh) | 一种交易数据检测方法、装置及设备 | |
| CN111786992A (zh) | 会员注册和认证方法、终端设备及可读存储介质 | |
| CN112699164A (zh) | 异地婚姻数据匹配方法、装置及终端设备 | |
| CN115473968B (zh) | 话单处理方法及设备 | |
| CN115438967A (zh) | 一种基于超图的密集子图检测方法、装置及终端设备 | |
| CN113194039B (zh) | 系统数据流量的切分方法和装置、电子设备和存储介质 | |
| CN113641753A (zh) | 数据增量同步方法、装置及终端设备 | |
| CN117495194A (zh) | 数据指标加工方法、装置、设备及存储介质 | |
| CN114443694A (zh) | 一种线索多维度关联关系分析方法、终端设备及存储介质 | |
| CN114386056A (zh) | 对数据存储完整性的处理方法及终端设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |