CN106503738A - 多数据源的数据融合处理方法 - Google Patents

多数据源的数据融合处理方法 Download PDF

Info

Publication number
CN106503738A
CN106503738A CN201610927691.9A CN201610927691A CN106503738A CN 106503738 A CN106503738 A CN 106503738A CN 201610927691 A CN201610927691 A CN 201610927691A CN 106503738 A CN106503738 A CN 106503738A
Authority
CN
China
Prior art keywords
assigned
data
calculate
data source
factor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610927691.9A
Other languages
English (en)
Other versions
CN106503738B (zh
Inventor
李首峰
陈放
孟欣欣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guozhengtong Polytron Technologies Inc
Original Assignee
Guozhengtong Polytron Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guozhengtong Polytron Technologies Inc filed Critical Guozhengtong Polytron Technologies Inc
Priority to CN201610927691.9A priority Critical patent/CN106503738B/zh
Publication of CN106503738A publication Critical patent/CN106503738A/zh
Application granted granted Critical
Publication of CN106503738B publication Critical patent/CN106503738B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • G06F18/251Fusion techniques of input or preprocessed data

Abstract

本发明提供了一种多数据源的数据融合处理方法,其包括:步骤101、采集来自多数据源的数据;步骤103、对来自所述多数据源的数据进行分组;步骤105、对分组后的数据融合到统一用户集。应用本发明可以更好地将来自多数据源的数据融合,加快了处理速度,从而使得在大数据处理时能够更快地获取有用数据。

Description

多数据源的数据融合处理方法
技术领域
本发明涉及大数据领域,尤其涉及多数据源的数据融合处理方法。
背景技术
信息融合最早应用于军事领域,是组合多源信息和数据完成目标检测、关联、状态评估的多层次、多方面的过程。这种信息融合的目的是获得准确的目标识别、完整而及时的战场态势和威胁评估。随着传感器技术、计算机科学和信息技术的发展,各种面向复杂应用背景的多传感器系统大量涌现,使得多渠道的信息获取、处理和融合成为可能,并且在金融管理、心理评估和预测、医疗诊断、气象预报、组织管理决策、机器人视觉、交通管制、遥感遥测等诸多领域,人们都认识到把多个数据源中的信息综合起来能够提高工作的成绩。因此,多源信息融合技术在军事领域和民用领域得到了广泛的重视和成功的应用,其理论和方法已成为智能信息处理及控制的一个重要研究方向。
由于数据的多源性,来自每个数据源的数据格式不同、内容各异、包含的信息量也不同,必须运用一种有效的方法合理协调多源数据,充分综合有用信息,提高在多变环境中正确决策的能力。数据融合技术是一种可满足该要求的良好工具。数据的多源性和复杂性要求信息处理必须拥有数据融合技术,这样才能提供信息的稳健性。
发明内容
为了解决上述问题,本发明提供了一种多数据源的数据融合处理方法,其包括:
步骤101、采集来自多数据源的数据;
步骤103、对来自所述多数据源的数据进行分组;
步骤105、对分组后的数据融合到统一用户集。
其中,所述步骤103包括以下步骤:
步骤1031、将来自所述多数据源的数据任意字节长度为N的消息以64个字节为一组,分为m组,不足64字节的部分填充0;
步骤1033、设定初始矢量I0、I1、I2、I3,均为4字节整数;
步骤1035、将64字节的分组分为16个4字节整数,每个4字节整数记为B{i},-1<i<16,其中i为整数;
步骤1037、将4个4字节整数合并为一数据块,将每个数据块的4字节整数依次记为X0、X1、X2、X3。
其中,所述步骤105包括以下步骤:
步骤1051、将初始矢量I0、I1、I2、I3依次赋给X0、X1、X2、X3,设定循环计数K=0;
步骤1053、对1到64个字节顺序进行循环移位赋值处理;
步骤1055、对赋值处理完之后的X0、X1、X2、X3分别和I0、I1、I2、I3相加,结果分别存入X0、X1、X2、X3;
步骤1057、回到步骤1035,对剩下的m-1个分组分别进行以上操作,最后将得到X0、X1、X2、X3串联起来即为N字节长度消息的等效消息;
步骤1059、使用所述等效消息构建统一用户集。
其中,所述步骤1053包括以下步骤a1:
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=39-5×(Kmod4);
按位计算非线性函数F0=((~X1)∩X3)∪(X1∩X2),其中~为位运算符,表示按位取反;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F0、X0、Km、B{K}求和,并循环右移R位,并将结果赋给X1;
循环计数K增加1,重复执行步骤a1,直到K值大于15。
其中,所述步骤1053还包括以下步骤a2:
按位计算非线性函数F1=((~X3)∩X2)∪(X1∩X3);
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=27-((Kmod4)((Kmod4)+7))/2;
计算关联因子g,g=(5*(K+1)–4)mod16;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F1、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a2,直到K值大于31。
其中,所述步骤1053还包括以下步骤a3:
按位计算非线性函数F2=X1⊕X2⊕X3;
计算K对应的随机因子Km=4294967296xcos(K+1),取整数部分;
计算随机位移因子R,R=36-(Kmod4)*6+sin((Kmod4)*π);
计算关联因子g,g=(5*(K+1)–2K)mod16;
将X2赋给X3;
将X1赋给X2
将X3的值赋给X0;
将F2、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a3,直到K值大于47。
其中,所述步骤1053还包括以下步骤a4:
按位计算非线性函数F3=X1⊕(X2⊕(~X3));
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=32-((Kmod4)+3)((Kmod4)+4)/2;
计算关联因子g,g=(5*(K+1)–2K)mod16;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F3、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a4,直到K值大于63。
应用本发明可以更好地将来自多数据源的数据融合,加快了处理速度,从而使得在大数据处理时能够更快地获取有用数据。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
附图1示出了根据本发明实施方式的多数据源的数据融合处理方法的流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
根据本发明的实施方式,提出一种多数据源的数据融合处理方法,其包括:
步骤101、采集来自多数据源的数据;
步骤103、对来自所述多数据源的数据进行分组;
步骤105、对分组后的数据融合到统一用户集。
其中,所述步骤103包括以下步骤:
步骤1031、将来自所述多数据源的数据任意字节长度为N的消息以64个字节为一组,分为m组,不足64字节的部分填充0;
步骤1033、设定初始矢量I0、I1、I2、I3,均为4字节整数;
步骤1035、将64字节的分组分为16个4字节整数,每个4字节整数记为B{i},-1<i<16,其中i为整数;
步骤1037、将4个4字节整数合并为一数据块,将每个数据块的4字节整数依次记为X0、X1、X2、X3。
其中,所述步骤105包括以下步骤:
步骤1051、将初始矢量I0、I1、I2、I3依次赋给X0、X1、X2、X3,设定循环计数K=0;
步骤1053、对1到64个字节顺序进行循环移位赋值处理;
步骤1055、对赋值处理完之后的X0、X1、X2、X3分别和I0、I1、I2、I3相加,结果分别存入X0、X1、X2、X3;
步骤1057、回到步骤1035,对剩下的m-1个分组分别进行以上操作,最后将得到X0、X1、X2、X3串联起来即为N字节长度消息的等效消息;
步骤1059、使用所述等效消息构建统一用户集。
其中,所述步骤1053包括以下步骤a1:
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=39-5×(Kmod4);
按位计算非线性函数F0=((~X1)∩X3)∪(X1∩X2),其中~为位运算符,表示按位取反;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F0、X0、Km、B{K}求和,并循环右移R位,并将结果赋给X1;
循环计数K增加1,重复执行步骤a1,直到K值大于15。
其中,所述步骤1053还包括以下步骤a2:
按位计算非线性函数F1=((~X3)∩X2)∪(X1∩X3);
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=27-((Kmod4)((Kmod4)+7))/2;
计算关联因子g,g=(5*(K+1)–4)mod16;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F1、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a2,直到K值大于31。
其中,所述步骤1053还包括以下步骤a3:
按位计算非线性函数F2=X1⊕X2⊕X3;
计算K对应的随机因子Km=4294967296xcos(K+1),取整数部分;
计算随机位移因子R,R=36-(Kmod4)*6+sin((Kmod4)*π);
计算关联因子g,g=(5*(K+1)–2K)mod16;
将X2赋给X3;
将X1赋给X2
将X3的值赋给X0;
将F2、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a3,直到K值大于47。
其中,所述步骤1053还包括以下步骤a4:
按位计算非线性函数F3=X1⊕(X2⊕(~X3));
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=32-((Kmod4)+3)((Kmod4)+4)/2;
计算关联因子g,g=(5*(K+1)–2K)mod16;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F3、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a4,直到K值大于63。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以所述权利要求的保护范围为准。

Claims (6)

1.一种多数据源的数据融合处理方法,其包括:
步骤101、采集来自多数据源的数据;
步骤103、对来自所述多数据源的数据进行分组;
步骤105、对分组后的数据融合到统一用户集。
2.如权利要求1所述一种多数据源的数据融合处理方法,其中所述步骤103包括以下步骤:
步骤1031、将来自所述多数据源的数据任意字节长度为N的消息以64个字节为一组,分为m组,不足64字节的部分填充0;
步骤1033、设定初始矢量I0、I1、I2、I3,均为4字节整数;
步骤1035、将64字节的分组分为16个4字节整数,每个4字节整数记为B{i},-1<i<16,其中i为整数;
步骤1037、将4个4字节整数合并为一数据块,将每个数据块的4字节整数依次记为X0、X1、X2、X3。
3.如权利要求2所述一种多数据源的数据融合处理方法,其中所述步骤105包括以下步骤:
步骤1051、将初始矢量I0、I1、I2、I3依次赋给X0、X1、X2、X3,设定循环计数K=0;
步骤1053、对1到64个字节顺序进行循环移位赋值处理;
步骤1055、对赋值处理完之后的X0、X1、X2、X3分别和I0、I1、I2、I3相加,结果分别存入X0、X1、X2、X3;
步骤1057、回到步骤1035,对剩下的m-1个分组分别进行以上操作,最后将得到X0、X1、X2、X3串联起来即为N字节长度消息的等效消息;
步骤1059、使用所述等效消息构建统一用户集。
4.如权利要求3所述一种多数据源的数据融合处理方法,其中所述步骤1053包括以下步骤a1:
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=39-5×(Kmod4);
按位计算非线性函数F0=((~X1)∩X3)∪(X1∩X2),其中~为位运算符,表示按位取反;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F0、X0、Km、B{K}求和,并循环右移R位,并将结果赋给X1;
循环计数K增加1,重复执行步骤a1,直到K值大于15。
5.如权利要求4所述一种多数据源的数据融合处理方法,其中所述步骤1053还包括以下步骤a2:
按位计算非线性函数F1=((~X3)∩X2)∪(X1∩X3);
计算K对应的随机因子Km=4294967296*cos(K+1),取整数部分;
计算随机位移因子R,R=27-((Kmod4)((Kmod4)+7))/2;
计算关联因子g,g=(5*(K+1)–4)mod16;
将X2赋给X3;
将X1赋给X2;
将X3的值赋给X0;
将F1、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a2,直到K值大于31。
6.如权利要求5所述一种多数据源的数据融合处理方法,其中所述步骤1053还包括以下步骤a3:
按位计算非线性函数F2=X1⊕X2⊕X3;
计算K对应的随机因子Km=4294967296xcos(K+1),取整数部分;
计算随机位移因子R,R=36-(Kmod4)*6+sin((Kmod4)*π);
计算关联因子g,g=(5*(K+1)–2K)mod16;
将X2赋给X3;
将X1赋给X2
将X3的值赋给X0;
将F2、X0、Km、B{g}求和,并循环右移R位,将结果赋给X1;
循环计数K增加1,重复执行步骤a3,直到K值大于47。
CN201610927691.9A 2016-10-31 2016-10-31 多数据源的数据融合处理方法 Active CN106503738B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610927691.9A CN106503738B (zh) 2016-10-31 2016-10-31 多数据源的数据融合处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610927691.9A CN106503738B (zh) 2016-10-31 2016-10-31 多数据源的数据融合处理方法

Publications (2)

Publication Number Publication Date
CN106503738A true CN106503738A (zh) 2017-03-15
CN106503738B CN106503738B (zh) 2019-08-06

Family

ID=58319439

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610927691.9A Active CN106503738B (zh) 2016-10-31 2016-10-31 多数据源的数据融合处理方法

Country Status (1)

Country Link
CN (1) CN106503738B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111581281A (zh) * 2020-04-24 2020-08-25 贵州力创科技发展有限公司 一种数据融合方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276770A (en) * 1989-08-11 1994-01-04 Hughes Aircraft Company Training of neural network for multi-source data fusion
CN103730016A (zh) * 2013-12-17 2014-04-16 深圳先进技术研究院 交通信息发布系统及方法
CN104134349A (zh) * 2014-08-07 2014-11-05 北京航空航天大学 一种基于交通多源数据融合的公交路况处理系统及方法
CN105159951A (zh) * 2015-08-17 2015-12-16 成都中科大旗软件有限公司 一种开放式的旅游多源异构数据融合方法及系统
CN105760515A (zh) * 2016-02-24 2016-07-13 国家电网公司 一种多数据源的同一对象数据的融合方法
CN105893526A (zh) * 2016-03-30 2016-08-24 上海坤士合生信息科技有限公司 多源数据融合系统和方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276770A (en) * 1989-08-11 1994-01-04 Hughes Aircraft Company Training of neural network for multi-source data fusion
CN103730016A (zh) * 2013-12-17 2014-04-16 深圳先进技术研究院 交通信息发布系统及方法
CN104134349A (zh) * 2014-08-07 2014-11-05 北京航空航天大学 一种基于交通多源数据融合的公交路况处理系统及方法
CN105159951A (zh) * 2015-08-17 2015-12-16 成都中科大旗软件有限公司 一种开放式的旅游多源异构数据融合方法及系统
CN105760515A (zh) * 2016-02-24 2016-07-13 国家电网公司 一种多数据源的同一对象数据的融合方法
CN105893526A (zh) * 2016-03-30 2016-08-24 上海坤士合生信息科技有限公司 多源数据融合系统和方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
GILLES NACHOUKI ET AL.: "Multi-data source fusion", 《INFORMATION FUSION》 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111581281A (zh) * 2020-04-24 2020-08-25 贵州力创科技发展有限公司 一种数据融合方法和装置

Also Published As

Publication number Publication date
CN106503738B (zh) 2019-08-06

Similar Documents

Publication Publication Date Title
JP2017182796A5 (zh)
CN108133446A (zh) 一种复合混沌二级置乱图像加密算法
CN103699585A (zh) 文件的元数据存储以及文件恢复的方法、装置和系统
Jin et al. 3D textured model encryption via 3D Lu chaotic mapping
CN105427577A (zh) 一种红外数据的处理方法、处理装置和解码方法
CN111709884A (zh) 车牌关键点矫正方法、系统、设备和存储介质
CN106503738A (zh) 多数据源的数据融合处理方法
CN103971317A (zh) 一种基于分数阶混沌映射的图像加密方法
CN108509564A (zh) 基于印章印文扫描的电子档案归档和查询服务系统及方法
JP2018014710A5 (zh)
CN106802958A (zh) Cad数据到gis数据的转换方法及系统
CN104244011A (zh) 一种基于混沌的图像压缩加密算法
CN103336761A (zh) 基于动态划分与语义加权的干扰过滤匹配算法
CN107832623B (zh) 坐标轨迹加密和解密的方法及系统
CN105447141A (zh) 一种数据处理的方法及节点
CN111523434A (zh) 基于区块链与bim的工地人员异常聚集检测系统
CN106992786B (zh) 一种基带数据压缩方法、装置和系统
CN105046217A (zh) 一种人脸识别大数据量并发方案处理方法
CN105117403A (zh) 日志数据分片与查询方法及装置
Radenovic A note on fixed point theory for cyclic weaker Meir-Keeler function in complete metric spaces
CN112069532B (zh) 一种基于差分隐私的轨迹隐私保护方法与装置
CN111131322B (zh) 网络行为的检测方法、装置、计算机设备和存储介质
CN112434317A (zh) 数据处理方法、装置、设备及存储介质
CN107545179B (zh) 一种垃圾网页识别方法
Chowdhury et al. Logarithmic function based cryptosystem [LFC]

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: 100029 Third Floor of Yansha Shengshi Building, 23 North Third Ring Road, Xicheng District, Beijing

Applicant after: Guo Zheng Tong Technology Co., Ltd.

Address before: 100195 Haidian District, Beijing, 18 apricot Road, No. 1 West Tower, four floor.

Applicant before: Guozhengtong Polytron Technologies Inc

GR01 Patent grant
GR01 Patent grant