发明内容
针对上述所显示出来的问题,本发明提供了一种基于云平台的设备数据处理方法及系统用以解决背景技术中提到的由于网络本身安全性不高会存在专业人员利用网络漏洞在设备上传云数据过程中入侵数据传输通道截取上传数据导致数据丢失造成机密泄漏进而发生重大经济损失情况的发生的问题。
一种基于云平台的设备数据处理方法,包括以下步骤:
获取每个设备上传的云数据并提取出其中的元数据和辅数据;
将每个设备的云数据中的元数据转化为编码数据块;
提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构;
将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器。
优选的,在获取每个设备上传的云数据并提取出其中的元数据和辅数据之前,所述方法还包括:
接收每个设备发送的云数据上传请求;
根据每个设备的云数据上传请求确定该设备的待上传云数据的数据类型;
根据每个设备的待上传云数据的数据类型启动适合每个待上传云数据的数据类型的目标数据传输渠道;
利用所述目标数据传输渠道接收每个设备上传的云数据。
优选的,所述获取每个设备上传的云数据并提取出其中的元数据和辅数据,包括:
获取每个设备的云数据中每个数据集对应的参数特征,提取出所述参数特征中的表征因子;
确认每个设备的云数据中的每个第一表征因子与其他第二表征因子之间的关联性指数;
将关联性指数大于等于预设阈值的目标表征因子确认为元表征因子;
提取出每个设备的云数据中元表征因子对应的第一数据为元数据,将该设备的的云数据中除所述第一数据外的第二数据作为辅数据。
优选的,所述将每个设备的云数据中的元数据转化为编码数据块,包括:
将每个设备的云数据中的元数据分割为多个数据段;
提取每个数据段对应的参数指标并根据所述参数指标构建元数据分块矩阵;
将每个设备的元数据转化为多个数据块;
利用每个设备的元数据对应的分块矩阵对该设备的元数据的多个数据块进行编码,获得该设备的元数据的编码数据块。
优选的,所述提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构,包括:
构建每个设备的辅数据的稀疏矩阵,利用所述稀疏矩阵对该设备的辅数据进行稀疏化处理,获取处理结果;
根据每个处理结果构建每个设备的辅数据的的属性序列;
从每个设备的辅数据的的属性序列中提取出相同属性值;
根据所述相同属性值在预设数据模型库中进行匹配获得目标模型,根据相同属性值在每个设备的辅数据中的分布概率结合所述目标模型构建通用型数据结构。
优选的,所述将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器,包括:
获取所述云服务器的数据接收节点信息,根据所述节点信息获取云服务器的节点标识;
将每个设备的编码数据块进行加密,获取加密数据,将所述加密数据与所述节点标识进行关联;
关联完毕后,将每个设备的辅数据和加密数据转化为统一代码导入到所述数据结构中;
导入完毕后,根据所述节点信息接通所述云服务器,通过所述云服务器的预设数据收发通道将每个设备的数据结构上传到所述云服务器上。
优选的,所述方法还包括:
在确认所述云服务器接收到上传数据时,生成所述数据结构的解码指令;
基于所述解码指令,利用每个设备的云数据中的辅数据与所述相同属性值的映射关系生成该设备的数据结构的解码参数;
将每个设备的数据结构的解码参数上传到所述云服务器上以使其解锁所述数据结构获得每个设备上传的云数据;
构建每个设备的数据传输日志文件并将其保存在所述云服务器中。
优选的,所述获取每个设备的云数据中每个数据集对应的参数特征,提取出所述参数特征中的表征因子,包括:
确定每个设备的云数据中每个数据集中的数据特性;
根据所述数据特性确定每个设备的云数据中每个数据集的瞬态因子概率分布;
根据所述瞬态概率因子分布确定每个设备的云数据中每个数据集的瞬态数据权重值;
获取每个设备的云数据中每个数据集的初级数据相关矩阵;
对所述初级数据相关矩阵进行关联参数消除,获得每个设备的云数据中每个数据集的本征基础数据相关矩阵;
根据所述本征基础数据相关矩阵确定每个设备的云数据中每个数据集的表征基础数据参数;
根据所述每个设备的云数据中每个数据集的瞬态数据权重值确定该数据集中瞬态数据的特征状态;
根据每个设备的云数据中每个数据集的瞬态数据的特征状态确定该数据集的瞬态数据的量级特征;
根据所述量级特征构建每个设备的云数据中每个数据集的量级特征矩阵;
根据每个设备的云数据中每个数据集的量级特征矩阵从该数据集的表征基础数据参数中提取出关键数据参数;
获取每个设备的云数据中每个数据集的关键数据参数对应的特征因子并将其作为该数据集的表征因子。
一种基于云平台的设备数据处理系统,该系统包括:
提取模块,用于获取每个设备上传的云数据并提取出其中的元数据和辅数据;
转化模块,用于将每个设备的云数据中的元数据转化为编码数据块;
构建模块,用于提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构;
上传模块,用于将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
云计算是一个网络应用模式,在云的时代,人们可以抛弃U盘等移动设备。云计算是传统的计算机技术与网络技术发展融合的产物,也是引领未来信息产业创新的关键战略性技术和手段。云计算平台可以划分为三类:以数据存储为主的存储型云平台、以数据处理为主的计算型云平台以及计算和数据存储处理兼顾的综合云计算平台,上述综合云计算平台同时兼备数据存储和处理功能,为现有生活中公司办公的不二之选,员工们通过自己所在的终端设备将设备将要上传的云数据上传到云服务器来进行后续工作,极大地提高了工作效率,但是上述方法存在以下缺点:由于网络本身安全性不高会存在专业人员利用网络漏洞在设备上传云数据过程中入侵数据传输通道截取上传数据导致数据丢失造成机密泄漏进而发生重大经济损失情况的发生。为了解决上述问题,本实施例公开了一种基于云平台的设备数据处理方法。
一种基于云平台的设备数据处理方法,如图1所示,包括以下步骤:
步骤S101、获取每个设备上传的云数据并提取出其中的元数据和辅数据;
步骤S102、将每个设备的云数据中的元数据转化为编码数据块;
步骤S103、提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构;
步骤S104、将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器。
上述技术方案的工作原理为:获取每个设备上传的云数据并提取出其中的元数据和辅数据,将每个设备的云数据中的元数据转化为编码数据块,提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构,将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器。
上述技术方案的有益效果为:通过提取每个设备的云数据中的元数据和辅数据可以有效地提取出每个云数据中的重要数据,进一步地,通过将元数据转化为编码数据块可以有效地保护每个设备上传的元数据不被篡改和截取,提高了安全性,进一步地,通过根据辅数据的相同属性值构建数据结构并用以存储每个设备的云数据可以使得每个设备的云数据在被传输过程中只以数据结构的形式显示,在别截取时也只是丢失辅数据而保护了核心元数据,进一步地提高了数据传输过程中的安全性和可靠性,大大地降低了数据丢失和被窃取的风险。
在本实施例中,上述提取云数据中的元数据的步骤包括:
将所述云数据分为大小相同的多个数据块;
构建预设公平访问规则,基于所述预设公平访问规则生成访问指令,根据所述访问指令对每个数据块进行访问,获取访问结果;
根据每个数据块的访问结果确定该数据块中的高频数据和低频数据以及二者各自的数据活跃度因子;
根据每个数据块中的高频数据和低频数据以及二者各自的数据活跃度因子计算出云数据对应的数据分布均衡度:
其中,F表示为云数据对应的数据分布均衡度,N表示为数据块的数量,i表示为第i个数据块,pi表示为第i个数据块中的高频数据,δi1表示为第i个数据块中的高频数据的数据活跃度因子,qi表示为第i个数据块中的低频数据,δi2表示为第i个数据块中的低频数据的数据活跃度因子,Qi1表示为第i个数据块中的数据总量,θ表示为云数据中的干扰数据对应的影响因子,Qi2表示为第i个数据块中除干扰数据外的数据总量,Q表示为云数据的数据总量;
根据云数据对应的数据分布均衡度对云数据中的各个数据进行关联和划分,获取划分结果;
根据所述划分结果将各个分布域内的核心数据进行提取并将其确认为云数据中的元数据。
上述技术方案的有益效果为:通过计算云数据对应的数据均衡分布度可以将云数据进行快速地根据各个子数据之间的关联关系进行分布域划分进而提取出每个分布域中的核心数据来作为云数据的元数据,保证了最终获取结果的准确性和合理性。
在一个实施例中,如图2所示,在获取每个设备上传的云数据并提取出其中的元数据和辅数据之前,所述方法还包括:
步骤S201、接收每个设备发送的云数据上传请求;
步骤S202、根据每个设备的云数据上传请求确定该设备的待上传云数据的数据类型;
步骤S203、根据每个设备的待上传云数据的数据类型启动适合每个待上传云数据的数据类型的目标数据传输渠道;
步骤S204、利用所述目标数据传输渠道接收每个设备上传的云数据。
上述技术方案的有益效果为:通过选择目标数据传输渠道可以保证云服务器可以完整和准确无误地接收每个设备传输的云数据,提高了数据传输的稳定性和兼容性。
在一个实施例中,如图3所示,所述获取每个设备上传的云数据并提取出其中的元数据和辅数据,包括:
步骤S301、获取每个设备的云数据中每个数据集对应的参数特征,提取出所述参数特征中的表征因子;
步骤S302、确认每个设备的云数据中的每个第一表征因子与其他第二表征因子之间的关联性指数;
步骤S303、将关联性指数大于等于预设阈值的目标表征因子确认为元表征因子;
步骤S304、提取出每个设备的云数据中元表征因子对应的第一数据为元数据,将该设备的的云数据中除所述第一数据外的第二数据作为辅数据。
上述技术方案的有益效果为:可以准确直观地筛选出每个设备的云数据中的元数据,保证了最终筛选元数据的准确性和可靠性。
在一个实施例中,所述将每个设备的云数据中的元数据转化为编码数据块,包括:
将每个设备的云数据中的元数据分割为多个数据段;
提取每个数据段对应的参数指标并根据所述参数指标构建元数据分块矩阵;
将每个设备的元数据转化为多个数据块;
利用每个设备的元数据对应的分块矩阵对该设备的元数据的多个数据块进行编码,获得该设备的元数据的编码数据块。
上述技术方案的有益效果为:铜鼓构建元数据分块矩阵来为每个设备元数据转化的多个数据块进行编码可以保证每个数据块上都有编码数据,从而可以将每个设备的元数据更加平均化和完整地分割为多个编码数据块,提高了工作效率。
在一个实施例中,所述提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构,包括:
构建每个设备的辅数据的稀疏矩阵,利用所述稀疏矩阵对该设备的辅数据进行稀疏化处理,获取处理结果;
根据每个处理结果构建每个设备的辅数据的的属性序列;
从每个设备的辅数据的的属性序列中提取出相同属性值;
根据所述相同属性值在预设数据模型库中进行匹配获得目标模型,根据相同属性值在每个设备的辅数据中的分布概率结合所述目标模型构建通用型数据结构。
上述技术方案的有益效果为:可使得构建的数据结构与每个设备的云数据对应的数据类型相匹配,提高了适配性,为后续进行数据传输奠定了基础,提高了整体的稳定性。
在一个实施例中,所述将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器,包括:
获取所述云服务器的数据接收节点信息,根据所述节点信息获取云服务器的节点标识;
将每个设备的编码数据块进行加密,获取加密数据,将所述加密数据与所述节点标识进行关联;
关联完毕后,将每个设备的辅数据和加密数据转化为统一代码导入到所述数据结构中;
导入完毕后,根据所述节点信息接通所述云服务器,通过所述云服务器的预设数据收发通道将每个设备的数据结构上传到所述云服务器上。
上述技术方案的有益效果为:通过对每个设备的编码数据进行加密可以进一步地保证每个设备的元数据的安全性,进一步地,通过将加密数据与云服务器的节点标识进行关联可以使得数据在传输过程中仅仅只有云服务器具有可读权限,进一步地保证了数据的隐私性和安全性,进一步地,通过利用云服务器的预设数据收发通道来传输每个设备的云数据可以使得数据传输效率更高并且更加稳定。
在一个实施例中,所述方法还包括:
在确认所述云服务器接收到上传数据时,生成所述数据结构的解码指令;
基于所述解码指令,利用每个设备的云数据中的辅数据与所述相同属性值的映射关系生成该设备的数据结构的解码参数;
将每个设备的数据结构的解码参数上传到所述云服务器上以使其解锁所述数据结构获得每个设备上传的云数据;
构建每个设备的数据传输日志文件并将其保存在所述云服务器中。
上述技术方案的有益效果为:可使得云服务器快速地对数据结构进行解码以获得每个设备传输的云数据,进一步地提高了数据的安全性和隐私性,进一步地,通过构建每个设备的数据传输日志文件可以有效地记录每个设备的数据传输记录,为后续进行查询提供了便利条件,进一步地提高了实用性和用户的体验感。
在一个实施例中,所述获取每个设备的云数据中每个数据集对应的参数特征,提取出所述参数特征中的表征因子,包括:
确定每个设备的云数据中每个数据集中的数据特性;
根据所述数据特性确定每个设备的云数据中每个数据集的瞬态因子概率分布;
根据所述瞬态概率因子分布确定每个设备的云数据中每个数据集的瞬态数据权重值;
获取每个设备的云数据中每个数据集的初级数据相关矩阵;
对所述初级数据相关矩阵进行关联参数消除,获得每个设备的云数据中每个数据集的本征基础数据相关矩阵;
根据所述本征基础数据相关矩阵确定每个设备的云数据中每个数据集的表征基础数据参数;
根据所述每个设备的云数据中每个数据集的瞬态数据权重值确定该数据集中瞬态数据的特征状态;
根据每个设备的云数据中每个数据集的瞬态数据的特征状态确定该数据集的瞬态数据的量级特征;
根据所述量级特征构建每个设备的云数据中每个数据集的量级特征矩阵;
根据每个设备的云数据中每个数据集的量级特征矩阵从该数据集的表征基础数据参数中提取出关键数据参数;
获取每个设备的云数据中每个数据集的关键数据参数对应的特征因子并将其作为该数据集的表征因子。
上述技术方案的有益效果为:通过提取每个设备的云数据中每个数据集内的关键数据参数可以准确地获得每个设备的云数据中每个数据集的最基础数据参数,进而可以为后续获取表征因子提供最佳参考样本,保证了表征因子提取结果的合理性和准确性。
本实施例还公开了一种基于云平台的设备数据处理系统,如图4所示,该系统包括:
提取模块401,用于获取每个设备上传的云数据并提取出其中的元数据和辅数据;
转化模块402,用于将每个设备的云数据中的元数据转化为编码数据块;
构建模块403,用于提取每个设备的云数据中的辅数据的相同属性值,根据所述相同属性值构建数据结构;
上传模块404,用于将每个设备的辅数据和编码数据块导入到所述数据结构中并长传至云服务器。
上述技术方案的工作原理及有益效果在方法权利要求中已经说明,此处不再赘述。
本领域技术用户员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。