CN117978363A - 区域相关数据信息流转方法、装置、电子设备和介质 - Google Patents

区域相关数据信息流转方法、装置、电子设备和介质 Download PDF

Info

Publication number
CN117978363A
CN117978363A CN202410392321.4A CN202410392321A CN117978363A CN 117978363 A CN117978363 A CN 117978363A CN 202410392321 A CN202410392321 A CN 202410392321A CN 117978363 A CN117978363 A CN 117978363A
Authority
CN
China
Prior art keywords
region
information
data
related data
node
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202410392321.4A
Other languages
English (en)
Other versions
CN117978363B (zh
Inventor
李建华
王静宇
马亚中
李浩浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhongguancun Smart City Co Ltd
Original Assignee
Zhongguancun Smart City Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhongguancun Smart City Co Ltd filed Critical Zhongguancun Smart City Co Ltd
Priority to CN202410392321.4A priority Critical patent/CN117978363B/zh
Publication of CN117978363A publication Critical patent/CN117978363A/zh
Application granted granted Critical
Publication of CN117978363B publication Critical patent/CN117978363B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本公开的实施例公开了区域相关数据信息流转方法、装置、电子设备和介质。该方法的一具体实施方式包括:响应于接收到各个子区域数据流转模型文件信息,对各个子区域数据流转模型文件信息进行集成处理;根据区域相关数据流转节点的节点详情信息和目标区域相关数据流转区块链,确定区域相关数据流转节点是否满足预设节点流转权限条件;对区域数据获取请求信息进行校验;根据区域数据获取请求信息,将区域数据获取请求信息输入至目标区域数据流转模型,得到区域相关数据信息;将区域相关数据信息发送至区域相关数据流转节点。该实施方式提升了数据的安全性,减少了耗费的计算资源,简化了数据流转的步骤,缩短了耗费的时间。

Description

区域相关数据信息流转方法、装置、电子设备和介质
技术领域
本公开的实施例涉及计算机技术领域,具体涉及区域相关数据信息流转方法、装置、电子设备和介质。
背景技术
各个数据流转方根据数据流转流程对数据进行流转,从而实现对数据的共享。目前,在对数据进行流转时,通常采用的方式为:通过中介服务模式对数据进行流转:首先,中介方根据数据需求方的数据需求,匹配对应的数据提供方。然后,数据提供方直接将数据提交至中介方。最后,中介方对数据进行流转;通过数据许可模式对数据进行流转:首先,数据提供者可以对数据需求者进行授权、监控数据需求者的使用权限,以及数据需求者和数据提供者之间签订数据流转协议。之后,根据签订的数据流转协议,对数据进行流转。
然而,实践中,当采用上述方式对数据流转时,经常会存在如下技术问题:
第一,当通过中介服务模式对数据进行数据流转时,数据需要通过中介方进行流转,若中介方的系统安全性较差,易造成中介方的数据泄露,数据的安全性较差;当通过数据许可模式对数据进行流转时,对数据需求者的权限进行监控的步骤较为繁琐,耗费的计算资源较多;且通过中介服务模式和数据许可模式对数据进行流转时,数据流转的步骤均较多,导致对数据进行流转耗费的时间较长。
第二,当数据提供方提交数据时,直接提交数据,并未对数据进行清洗,当数据中冗余数据较多,导致数据的质量较低,以及流转冗余数据较多的数据信息耗费的计算资源较多。
该背景技术部分中所公开的以上信息仅用于增强对本发明构思的背景的理解,并因此,其可包含并不形成本国的本领域普通技术人员已知的现有技术的信息。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了区域相关数据信息流转方法、装置、电子设备和计算机可读介质,来解决以上背景技术部分提到的技术问题中的一项或多项。
第一方面,本公开的一些实施例提供了一种区域相关数据信息流转方法,该方法包括:响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型,其中,上述各个子区域数据流转模型文件信息对应上述各个区域相关数据流转节点中的区域相关数据流转节点,上述区域相关数据流转节点为提交对应目标城市的区域治理数据的节点或获取对应上述目标城市的区域治理数据的节点,上述子区域数据流转模型文件信息表征区域相关数据流转节点通过上述目标城市的区域治理数据训练得到的模型;响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件,其中,上述区域数据获取请求信息为上述区域相关数据流转节点获取对应上述目标城市的区域治理数据的请求信息,上述节点详情信息包括上述区域相关数据流转节点的权限信息和上述区域相关数据流转节点的地址信息;响应于确定上述区域相关数据流转节点满足上述预设节点流转权限条件,对上述区域数据获取请求信息进行校验处理,得到对应上述区域数据获取请求信息的校验结果信息;响应于确定上述校验结果信息满足预设校验结果条件,根据上述区域数据获取请求信息,将上述区域数据获取请求信息输入至上述目标区域数据流转模型,得到对应上述区域数据获取请求信息的区域相关数据信息,其中,上述区域相关数据信息为对应上述目标城市的区域治理数据;将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。
第二方面,本公开的一些实施例提供了一种区域相关数据信息流转系统,包括区域相关数据信息流转端和各个区域相关数据流转节点,其中,上述区域相关数据信息流转端被配置成执行如上述第一方面所描述的方法;上述各个区域相关数据流转节点中的每个区域相关数据流转节点被配置成获取对应目标区域的区域相关数据信息集合;对上述区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合;对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合;对数据脱敏处理后的区域相关数据信息集合进行数据确权处理;根据目标区域相关数据流转区块链,对数据确权处理后的区域相关数据信息集合进行上链处理,其中,上述目标区域相关数据流转区块链是如上述第一方面所描述的目标区域相关数据流转区块链;根据预设区域相关数据需求信息集合,创建对应上述预设区域相关数据需求信息集合的区域相关数据任务信息集;根据上述区域相关数据任务信息集,对预先训练的子区域数据流转模型进行更新处理,得到更新后的子区域数据流转模型;将所得到的子区域数据流转模型对应的子区域数据流转模型文件信息发送至区域相关数据信息流转端,其中,上述区域相关数据信息流转端是如上述第一方面所描述的区域相关数据信息流转端。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现上述第一方面中任一实现方式所描述的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,计算机程序被处理器执行时实现上述第一方面中任一实现方式所描述的方法。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的区域相关数据信息流转方法,可以提升数据的安全性,可以简化对数据需求者权限监控的步骤,减少耗费的计算资源,以及可以简化数据流转的步骤,可以缩短数据流转的耗时。具体来说,造成数据的安全性较差、对数据需求者的权限进行监控耗费的计算资源较多,且对数据进行流转耗费的时间较长的原因在于:当通过中介服务模式对数据进行数据流转时,数据需要通过中介方进行流转,若中介方的系统安全性较差,易造成中介方的数据泄露,数据的安全性较差;当通过数据许可模式对数据进行流转时,对数据需求者的权限进行监控的步骤较为繁琐,耗费的计算资源较多;且通过中介服务模式和数据许可模式对数据进行流转时,数据流转的步骤均较多,导致对数据进行流转耗费的时间较长。基于此,本公开的一些实施例的区域相关数据信息流转方法,首先,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型,其中,上述各个子区域数据流转模型文件信息对应上述各个区域相关数据流转节点中的区域相关数据流转节点。由此,可以得到用于对区域相关数据信息进行流转的模型。然后,响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件。由此,可以对区域相关数据流转节点的权限信息,是否可以进行数据流转。之后,响应于确定上述区域相关数据流转节点满足上述预设节点流转权限条件,对上述区域数据获取请求信息进行校验处理,得到对应上述区域数据获取请求信息的校验结果信息。由此,可以通过校验结果确定区域数据获取请求信息是否满足预设校验结果条件。之后,响应于确定上述校验结果信息满足预设校验结果条件,根据上述区域数据获取请求信息,将上述区域数据获取请求信息输入至上述目标区域数据流转模型,得到对应上述区域数据获取请求信息的区域相关数据信息。由此,可以得到对应区域数据获取请求信息的输出结果。最后,将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。由此,可以实现对区域相关数据信息进行流转处理。也因为不是通过中介方对数据进行流转,而是通过集成的模型直接根据数据获取需求输出对应数据需求的区域相关数据信息对数据进行流转,是通过问答的方式对数据进行流转,从而简化了对数据进行流转的步骤,缩短了对数据进行流转的耗时。且需要对获取数据的区域相关数据流转节点的权限进行检测,且对区域相关数据流转节点获取数据的请求信息进行检测,从而可以减少数据泄露的情况,提升了数据的安全性。仅在数据需求方获取数据时对数据需求方的权限进行检测,而不需要对数据需求者的权限进行实时监控,从而可以减少耗费的计算资源。从而可以提升数据的安全性,可以简化对数据需求者权限监控的步骤,减少耗费的计算资源,以及可以简化数据流转的步骤,可以缩短数据流转的耗时。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,元件和元素不一定按照比例绘制。
图1是根据本公开的区域相关数据信息流转方法的一些实施例的流程图;
图2是根据本公开的区域相关数据信息流转系统的一些实施例的时序图;
图3是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1示出了根据本公开的区域相关数据信息流转方法的一些实施例的流程100。该区域相关数据信息流转方法,包括以下步骤:
步骤101,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型。
在一些实施例中,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,区域相关数据信息流转方法的执行主体可以对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型。其中,上述执行主体可以为区域相关数据信息流转端。上述区域相关数据流转节点可以为提交对应目标城市的区域治理数据的节点或获取对应上述目标城市的区域治理数据的节点。上述子区域数据流转模型文件信息可以表征区域相关数据流转节点通过上述目标城市的区域治理数据训练得到的模型。上述目标城市可以为任意城市。上述区域治理数据可以为上述目标城市相关的治理数据。例如,区域治理数据可以为目标城市的天气相关数据、目标城市的交通相关数据。上述各个子区域数据流转模型文件信息对应上述各个区域相关数据流转节点中的区域相关数据流转节点。上述区域相关数据信息流转端可以表征对数据流转(交易)的中介方。上述区域相关数据信息流转端可以通过集成的目标区域数据流转模型将接收的数据卖方的数据提供给数据买方,以对数据进行流转。上述各个区域相关数据流转节点中的区域相关数据流转节点可以表征数据交易方。例如,区域相关数据流转节点可以表征数据买方或数据卖方。例如,数据买方可以为:水利灾害相关的保险公司;数据卖方可以为:气象监测公司或水利检测公司。上述各个子区域数据流转模型文件信息中的子区域数据流转模型文件信息可以表征区域相关数据流转节点训练的子区域数据流转模型对应的模型文件。上述子区域数据流转模型可以为大语言模型。上述目标区域数据流转模型可以为以区域数据获取请求信息为输入,以区域相关数据信息为输出的神经网络模型。上述区域数据获取请求信息可以表征区域相关数据流转节点获取区域相关数据信息的请求。上述区域相关数据信息可以为数据卖方提供的对应上述区域数据获取请求信息的数据。例如,区域数据获取请求信息可以为:北京未来xx天的降雨情况;区域相关数据信息可以为:北京未来xx天的降雨量为xxx。实践中,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,上述执行主体可以通过混合专家系统将所接收的各个子区域数据流转模型文件信息对应的各个子模型集成为目标区域数据流转模型。其中,上述混合专家系统(Mixtureof Experts)可以是一种集成学习技术,可以通过将复杂的预测建模任务划分为子任务,并在每个子任务上训练特定的专家(学习器)解决预测建模问题。
步骤102,响应于接收到各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应区域相关数据流转节点的节点详情信息和对应区域相关数据信息流转端的目标区域相关数据流转区块链,确定区域相关数据流转节点是否满足预设节点流转权限条件。
在一些实施例中,响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,上述执行主体可以根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件。其中,上述区域数据获取请求信息可以为上述区域相关数据流转节点获取对应上述目标城市的区域治理数据的请求信息,上述节点详情信息包括上述区域相关数据流转节点的权限信息和上述区域相关数据流转节点的地址信息。上述地址信息可以为IP地址。上述权限信息可以表征区域数据获取请求信息和权限状态的对应关系。权限状态可以表征权限的开启状态。例如,权限状态可以为权限已开启或权限未开启。例如,权限信息可以为:“区域数据获取请求信息:获取北京天气数据;权限状态:权限已开启”。上述目标区域相关数据流转区块链可以用于追溯区域相关数据信息的流转记录和用于对数据交易方进行确权。上述目标区域相关数据流转区块链中可以包括各个区块存储空间。上述各个区块存储空间中的区块存储空间可以为存储区域相关数据流转节点的数据信息的存储空间。上述目标区域相关数据流转区块链中的区块存储空间对应上述各个区域相关数据流转节点中的区域相关数据流转节点。实践中,响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,上述执行主体可以通过各种方式根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件。
在一些实施例的一些可选的实现方式中,响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,上述执行主体可以通过以下步骤根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件:
第一步,根据上述目标区域相关数据流转区块链,对上述节点详情信息进行校验处理,得到对应上述区域相关数据流转节点的节点校验结果信息。实践中,上述执行主体可以通过上述目标区域相关数据流转区块链的智能合约对上述节点详情信息中包括的权限信息进行校验处理,得到对应上述区域相关数据流转节点的节点校验结果信息。其中,上述节点校验结果信息可以表征校验上述区域相关数据流转节点的结果。上述节点校验结果信息可以表征校验成功或校验失败。
第二步,根据上述节点校验结果信息,确定上述区域相关数据流转节点是否满足预设校验条件。其中,上述预设校验条件可以为节点校验结果信息表征校验成功。实践中,首先,响应于确定上述节点校验结果信息表征校验成功,确定上述区域相关数据流转节点满足上述预设校验条件。然后,响应于确定上述节点校验结果信息表征校验失败,确定上述区域相关数据流转节点不满足上述预设校验条件。
第三步,响应于确定上述区域相关数据流转节点满足上述预设校验条件,确定上述区域相关数据流转节点满足上述预设节点流转权限条件。其中,上述预设节点流转权限条件可以为上述区域相关数据流转节点满足上述预设校验条件。
步骤103,响应于确定区域相关数据流转节点满足预设节点流转权限条件,对区域数据获取请求信息进行校验处理,得到对应区域数据获取请求信息的校验结果信息。
在一些实施例中,响应于确定上述区域相关数据流转节点满足上述预设节点流转权限条件,上述执行主体可以对上述区域数据获取请求信息进行校验处理,得到对应上述区域数据获取请求信息的校验结果信息。实践中,首先,上述执行主体可以将上述区域相关数据流转节点的节点详情信息中包含的区域数据获取请求信息和上述区域数据获取请求信息相同的权限信息确定为目标权限信息。然后,响应于确定上述目标权限信息中的权限状态表征权限已开启,将校验成功确定为对应上述区域数据获取请求信息的校验结果信息。之后,响应于确定上述目标权限信息中的权限状态表征权限未开启,将校验失败确定为对应上述区域数据获取请求信息的校验结果信息。
步骤104,响应于确定校验结果信息满足预设校验结果条件,根据区域数据获取请求信息,将区域数据获取请求信息输入至目标区域数据流转模型,得到对应区域数据获取请求信息的区域相关数据信息。
在一些实施例中,响应于确定上述校验结果信息满足预设校验结果条件,上述执行主体可以根据上述区域数据获取请求信息,将上述区域数据获取请求信息输入至上述目标区域数据流转模型,得到对应上述区域数据获取请求信息的区域相关数据信息。其中,上述区域相关数据信息可以为对应上述目标城市的区域治理数据。上述预设校验结果条件可以为校验结果信息表征校验成功。
步骤105,将对应区域数据获取请求信息的区域相关数据信息发送至区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。
在一些实施例中,上述执行主体可以将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。实践中,首先,上述执行主体可以按照上述节点详情信息包括的IP地址,将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点。
可选地,在步骤105之后,上述执行主体还可以根据对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,对上述区域相关数据信息进行追溯处理。实践中,首先,上述执行主体可以将上述区域相关数据信息流转至上述区域相关数据流转节点的流转信息确定为对应上述区域相关数据信息的流转记录。然后,将上述流转记录上链至上述目标区域相关数据流转区块链,以对上述区域相关数据信息进行追溯处理。上述流转信息可以为将上述区域相关数据信息流转至上述区域相关数据流转节点的交易记录。
可选地,在步骤105之后,首先,上述执行主体可以对上述目标区域数据流转模型进行性能检测处理,得到对应上述目标区域数据流转模型的模型性能检测信息。其中,上述模型性能检测信息可以包括对应上述目标区域数据流转模型的模型性能评价信息、模型性能信息和实时监控性能信息。实践中,上述执行主体可以通过各种方式对上述目标区域数据流转模型进行性能检测处理,得到对应上述目标区域数据流转模型的模型性能检测信息。
然后,可以根据上述模型性能检测信息,确定上述目标区域数据流转模型是否满足预设模型性能条件。其中,上述预设模型性能条件可以为模型性能检测信息中包括的模型性能评价信息表征的准确率大于等于预设准确率、模型性能信息为预设模型性能合格信息和实时监控性能信息表征的异常次数小于预设异常次数。在此,对于上述预设准确率的具体数值和上述预设异常次数的具体数值不做具体限定。
最后,可以响应于确定上述目标区域数据流转模型不满足上述预设模型性能条件,对上述目标区域数据流转模型进行更新处理,得到更新处理后的目标区域数据流转模型作为目标区域数据流转模型。实践中,上述执行主体可以通过Optuna工具对上述目标区域数据流转模型进行更新处理。
在一些实施例的一些可选的实现方式中,上述执行主体可以通过以下步骤对上述目标区域数据流转模型进行性能检测处理,得到对应上述目标区域数据流转模型的模型性能检测信息:
第一步,根据预设区域数据获取需求信息,确定对应上述区域数据获取请求信息的模型性能需求信息。其中,上述预设区域数据获取需求信息包括的准确率信息可以表征区域相关数据流转节点对应的使用用户对获取区域相关数据信息的准确性的要求。例如,预设区域数据获取需求信息可以为要求获取的区域相关数据信息的准确率为80%。例如,使用用户可以为水利灾害相关的保险公司中获取区域数据相关信息的用户。实践中,上述执行主体可以将上述预设区域数据获取需求信息包含的准确率信息确定为对应上述区域数据获取请求信息的模型性能需求信息。
第二步,根据上述模型性能需求信息、对应上述目标区域数据流转模型的区域数据获取请求信息集合和对应上述区域数据获取请求信息集合的区域相关数据信息集合,对上述目标区域数据流转模型进行检测处理,得到对应上述目标区域数据流转模型的模型性能信息。其中,上述区域数据获取请求信息集合中的区域数据获取请求信息对应上述区域相关数据信息集合中的区域相关数据信息。上述模型性能信息可以表征上述目标区域数据流转模型的性能是否合格。实践中,首先,对于上述区域数据获取请求信息集合中的每个区域数据获取请求信息,上述执行主体可以通过文本相似度算法确定上述区域数据获取请求信息和对应的区域相关数据信息之间的夹角余弦值,得到各个夹角余弦值。然后,将所得到的各个夹角余弦值中小于预设夹角余弦值的夹角余弦值的数量确定为目标数量。之后,将上述目标数量和所得到的各个夹角余弦值的数量的比值确定为对应上述目标区域数据流转模型的准确率。在此,对于上述预设夹角余弦值的数值,不做具体限定。例如,文本相似度算法可以为余弦相似度算法。其次,将所得到的准确率和上述模型性能需求信息表征的准确率之间的差值确定为目标差值。最后,响应于确定上述目标差值的绝对值小于预设目标差值,将预设模型性能合格信息确定为对应上述目标区域数据流转模型的模型性能信息。上述预设模型性能合格信息可以表征上述目标区域数据流转模型的性能合格。之后,响应于确定上述目标差值的绝对值大于等于上述预设目标差值,将预设模型性能失败信息确定为对应上述目标区域数据流转模型的模型性能信息。上述预设模型性能失败信息可以表征上述目标区域数据流转模型的性能不合格。在此,对于上述预设目标差值的具体数值,不做具体限定。
第三步,对上述目标区域数据流转模型的性能进行实时监控处理,得到对应上述目标区域数据流转模型的实时监控性能信息。其中,上述实时监控性能信息可以表征监控上述目标区域数据流转模型在预设时间段内发生异常情况的次数。在此,对于上述预设时间段不做具体限定。例如,实时监控性能信息可以为目标区域数据流转模型一天内出现异常的次数为5次。实践中,上述执行主体可以通过集成监控平台对上述目标区域数据流转模型的性能进行实时监控处理。
第四步,获取对应上述目标区域数据流转模型的模型性能评价信息。其中,上述模型性能评价信息可以表征区域相关数据流转节点对应的使用用户对上述目标区域数据流转模型的评价。上述模型性能评价信息可以表征对目标区域数据流转模型的准确率评价的语句。例如,模型性能评价信息可以为:“模型的准确率为80%”。实践中,上述执行主体可以从对应上述目标区域数据流转模型的区域相关数据流转节点获取模型性能评价信息。
第五步,将上述模型性能评价信息、上述模型性能信息和上述实时监控性能信息确定为对应上述目标区域数据流转模型的模型性能检测信息。
本公开的上述各个实施例具有如下有益效果:通过本公开的一些实施例的一种区域相关数据信息流转方法,可以提升数据的安全性,可以简化对数据需求者权限监控的步骤,减少耗费的计算资源,以及可以简化数据流转的步骤,可以缩短数据流转的耗时。具体来说,造成数据的安全性较差、对数据需求者的权限进行监控耗费的计算资源较多,且对数据进行流转耗费的时间较长的原因在于:当通过中介服务模式对数据进行数据流转时,数据需要通过中介方进行流转,若中介方的系统安全性较差,易造成中介方的数据泄露,数据的安全性较差;当通过数据许可模式对数据进行流转时,对数据需求者的权限进行监控的步骤较为繁琐,耗费的计算资源较多;且通过中介服务模式和数据许可模式对数据进行流转时,数据流转的步骤均较多,导致对数据进行流转耗费的时间较长。基于此,本公开的一些实施例的区域相关数据信息流转方法,首先,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型,其中,上述各个子区域数据流转模型文件信息对应上述各个区域相关数据流转节点中的区域相关数据流转节点。由此,可以得到用于对区域相关数据信息进行流转的模型。然后,响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件。由此,可以对区域相关数据流转节点的权限信息,是否可以进行数据流转。之后,响应于确定上述区域相关数据流转节点满足上述预设节点流转权限条件,对上述区域数据获取请求信息进行校验处理,得到对应上述区域数据获取请求信息的校验结果信息。由此,可以通过校验结果确定区域数据获取请求信息是否满足预设校验结果条件。之后,响应于确定上述校验结果信息满足预设校验结果条件,根据上述区域数据获取请求信息,将上述区域数据获取请求信息输入至上述目标区域数据流转模型,得到对应上述区域数据获取请求信息的区域相关数据信息。由此,可以得到对应区域数据获取请求信息的输出结果。最后,将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。由此,可以实现对区域相关数据信息进行流转处理。也因为不是通过中介方对数据进行流转,而是通过集成的模型直接根据数据获取需求输出对应数据需求的区域相关数据信息对数据进行流转,是通过问答的方式对数据进行流转,从而简化了对数据进行流转的步骤,缩短了对数据进行流转的耗时。且需要对获取数据的区域相关数据流转节点的权限进行检测,且对区域相关数据流转节点获取数据的请求信息进行检测,从而可以减少数据泄露的情况,提升了数据的安全性。仅在数据需求方获取数据时对数据需求方的权限进行检测,而不需要对数据需求者的权限进行实时监控,从而可以减少耗费的计算资源。从而可以提升数据的安全性,可以简化对数据需求者权限监控的步骤,减少耗费的计算资源,以及可以简化数据流转的步骤,可以缩短数据流转的耗时。
进一步参考图2,其示出了本公开的一种区域相关数据信息流转系统。
如图2所示,一种区域相关数据信息流转系统包括:区域相关数据信息流转端和各个区域相关数据流转节点。上述区域相关数据信息流转端和上述各个区域相关数据流转节点中的每个区域相关数据流转节点之间的交互步骤可以包括以下步骤:
步骤201,区域相关数据流转节点获取对应目标区域的区域相关数据信息集合。
在一些实施例中,上述区域相关数据流转节点可以获取对应目标区域的区域相关数据信息集合。其中,上述区域相关数据信息集合中的区域相关数据信息可以表征城市相关数据信息。例如,区域相关数据信息可以为:“北京未来50天的降水量”。上述目标区域可以为城市区域。例如,目标区域可以为北京。实践中,上述区域相关数据流转节点可以从存储区域相关数据信息集合的数据库中获取对应上述目标区域的区域相关数据信息集合。存储区域相关数据信息集合的数据库中的区域相关数据信息集合均对应有目标区域。
步骤202,区域相关数据流转节点对区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合。
在一些实施例中,上述区域相关数据流转节点可以对上述区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合。实践中,上述区域相关数据流转节点可以通过各种方式对上述区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合。
在一些实施例的一些可选的实现方式中,上述区域相关数据流转节点可以通过以下步骤对上述区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合:
第一步,对上述区域相关数据信息集合进行属性检测处理,得到对应上述区域相关数据信息集合的各个属性信息。其中,上述各个属性信息中的属性信息可以表征上述区域相关数据信息集合的主成分、数据维度、数据方差或数据分布特征。上述数据维度可以表征上述区域相关数据信息集合中不同特征或属性的数量。例如,数据维度可以为3。上述数据方差可以表征上述区域相关数据信息集合中每个变量的方差。上述数据分布特征可以表征上述区域相关数据信息集合的分布形态。例如,数据分布特征可以为集中趋势分布形态。实践中,上述区域相关数据流转节点可以通过IBM SPSS工具对上述区域相关数据信息集合进行属性检测处理,得到各个属性信息。
第二步,根据上述各个属性信息,生成对应上述区域相关数据信息集合的区域相关数据矩阵信息。其中,上述区域相关数据矩阵信息可以表征对应上述区域相关数据信息的协方差矩阵。实践中,上述区域相关数据流转节点可以通过主成分分析法生成对应上述区域相关数据信息集合的区域相关数据矩阵信息。
第三步,根据上述区域相关数据矩阵信息,生成对应上述区域相关数据矩阵信息的各个特征向量信息和各个特征值信息。其中,上述各个特征向量信息可以表征上述区域相关数据矩阵信息的各个特征向量。上述各个特征值信息可以表征上述区域相关数据矩阵信息的各个特征值。实践中,上述区域相关数据流转节点可以通过特征分解的方法根据上述区域相关数据矩阵信息,得到上述区域相关数据矩阵信息的各个特征向量和各个特征值。
第四步,对所生成的各个特征值信息进行排序处理,得到排序处理后的特征值信息序列。其中,上述特征值信息序列可以为对各个特征值信息表征的特征值按照降序的排序方法进行排序得到的序列。实践中,上述区域相关数据流转节点可以按照降序的排序方式对所生成的各个特征值信息进行排序处理。
第五步,根据排序处理后的特征值信息序列,生成降维处理后的区域相关数据信息集合作为目标区域相关数据信息集合。实践中,上述区域相关数据流转节点可以通过主成分分析方法将排序处理后的特征值信息序列中的前k个特征值信息进行降维处理,得到降维处理后的区域相关数据信息集合。在此,对于k的具体数值,不做具体限定。
第六步,对预设区域相关数据样本信息集合进行划分处理,得到表征训练数据样本的子预设区域相关数据样本信息集合作为第一样本数据信息集合和表征测试数据样本的子预设区域相关数据样本信息集合作为第二样本数据信息集合。其中,上述预设区域相关数据样本信息集合可以包括用于创建区域相关数据决策树信息的各个训练样本和用于测试区域相关数据决策树信息的各个测试样本。实践中,首先,上述执行主体可以将上述预设区域相关数据样本信息集合中的第一预设比值的预设区域相关数据样本信息确定为第一样本数据信息集合。然后,可以将上述预设区域相关数据样本信息集合中的第二预设比值的预设区域相关数据样本信息确定为第二样本数据信息集合。在此,上述第一预设比值和对于上述第二预设比值的具体数值,不做限定。例如,第一预设比值可以为70%,第二预设比值可以为30%。
第七步,根据上述第一样本数据信息集合,创建区域相关数据决策树信息。其中,上述区域相关数据决策树信息可以为决策树。上述第一样本数据信息集合中可以包括预设数值个表征正常的第一样本数据信息和上述预设数值个表征异常的第一样本数据信息。例如,预设数值可以为50个。实践中,首先,上述区域相关数据流转节点可以将上述第一样本数据信息集合中预设数值个表征正常的第一样本数据信息确定为第一样本集合。然后,将上述第一样本数据信息集合中预设数值个表征异常的第一样本数据信息确定为第二样本集合。之后,上述区域相关数据流转节点可以通过决策树算法根据上述第一样本集合和上述第二样本集合,创建区域相关数据决策树信息。例如,决策树算法可以为C4.5。
第八步,根据上述第二样本数据信息集合,对所创建的区域相关数据决策树信息进行校验处理,得到对应上述区域相关数据决策树信息的决策树校验结果信息。其中,上述决策树校验结果信息可以包括上述区域相关数据决策树信息的准确率、精确率、召回率和F1值。实践中,上述区域相关数据流转节点可以根据上述第二样本数据信息集合,通过Weka工具对所创建的区域相关数据决策树信息进行校验,得到决策树校验结果信息。
第九步,响应于确定上述决策树校验结果信息满足预设决策树校验结果条件,将上述目标区域相关数据信息集合中的每个目标区域相关数据信息输入至上述区域相关数据决策树信息,得到各个异常值检测结果信息。其中,上述预设决策树校验结果条件可以为决策树校验结果信息包括的准确率大于第一预设数值、精确率大于第二预设数值、召回率大于第三预设数值和F1值大于第四预设数值。在此,对于上述第一预设数值、上述第二预设数值、上述第三预设数值和上述第四预设数值的具体数值,不做具体限定。上述各个异常值检测结果信息可以表征检测结果为异常的各个目标区域相关数据信息。例如,异常值检测结果信息可以为:xxx;检测结果为异常。
第十步,根据上述各个异常值检测结果信息,将上述目标区域相关数据信息集合中满足预设异常值条件的目标区域相关数据信息进行删除,得到数据清洗后的区域相关数据信息集合。其中,上述预设异常值条件可以目标区域相关数据信息对应的检测结果为异常。
上述技术方案作为本公开的实施例的一个发明点,解决了背景技术提及的技术问题二“当数据提供方提交数据时,直接提交数据,并未对数据进行清洗,当数据中冗余数据较多,导致数据的质量较低,以及流转冗余数据较多的数据信息耗费的计算资源较多”。导致数据中冗余数据较多,导致数据的质量较低,以及流转冗余数据较多的数据信息耗费的计算资源较多的因素往往如下:数据提供方提交数据时,直接提交数据,并未对数据进行处理。如果解决了上述因素,就能达到减少数据中的冗余数据,提升数据的质量,以及减少流转冗余数据较多的数据信息耗费的计算资源。为了达到这一效果,本公开在提交数据信息时,并不是直接提交数据信息,而是通过决策树算法对区域相关数据信息集合进行清洗后,之后,再根据数据清洗后的区域相关数据信息集合进行数据流转,从而可以减少数据中的冗余数据,提升数据的质量,以及减少流转冗余数据较多的数据信息耗费的计算资源。
步骤203,区域相关数据流转节点对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合。
在一些实施例中,上述区域相关数据流转节点可以对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合。实践中,上述区域相关数据流转节点可以通过各种方式对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合。
在一些实施例的一些可选的实现方式中,上述区域相关数据流转节点可以通过以下步骤对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合:
第一步,对数据清洗后的区域相关数据信息集合进行隐私数据识别处理,得到隐私数据信息集合。其中,上述隐私数据信息集合中的隐私数据信息可以包括身份证号码、健康信息、家庭住址、手机号。实践中,上述区域相关数据流转节点可以根据敏感数据检测算法对数据清洗后的区域相关数据信息集合进行隐私数据识别处理。例如,敏感数据检测算法可以为Regular Expression。
第二步,对上述隐私数据信息集合中的每个隐私数据信息进行属性识别处理,得到各个隐私数据属性信息。其中,上述隐私数据属性信息可以表征隐私数据的属性。实践中,上述区域相关数据流转节点可以通过差分隐私的方法对上述隐私数据信息集合中的每个隐私数据信息进行属性识别处理,得到各个隐私数据属性信息。
第三步,根据上述各个隐私数据属性信息,确定对应上述各个隐私数据属性信息的属性长度信息。其中,上述属性长度信息可以表征属性的长度。上述属性长度信息可以表征属性的字符长度。实践中,上述区域相关数据流转节点可以通过属性长度获取函数确定对应上述各个隐私数据属性信息的属性长度。例如,属性长度获取函数可以为LEN( )函数。
第四步,根据上述属性长度信息,确定对应上述隐私数据信息集合的隐私数据相关函数信息。其中,上述隐私数据相关函数信息可以表征轮值函数。实践中,首先,上述区域相关数据流转节点可以通过加轮查询法,根据预设的调整因子上述属性长度信息,确定对应上述隐私数据信息集合的隐私数据相关函数信息。在此,对于上述预设的调整因子的具体数值,在此不做具体限定。
第五步,对上述各个隐私数据属性信息进行转换处理,得到转换处理后的各个隐私数据属性信息。实践中,上述区域相关数据流转节点可以通过编码映射和关联剔除关系,将上述各个隐私数据属性信息转换至整数域中对应的数字作为转换处理后的各个隐私数据属性信息。
第六步,对转换处理后的各个隐私数据属性信息进行分组处理,得到第一子隐私数据属性信息组和第二子隐私数据属性信息组。实践中,上述区域相关数据流转节点可以根据预设分割比例,将转换处理后的各个隐私数据属性信息进行分组。例如,预设分割比例可以为50%。
第七步,根据上述隐私数据相关函数信息,对上述第一子隐私数据属性信息组和上述第二子隐私数据属性信息组进行转换处理。实践中,上述区域相关数据流转节点可以将上述第一子隐私数据属性信息组和上述第二子隐私数据属性信息组输入至Feistel网络,且Feistel网络通过上述隐私数据相关函数信息对上述第一子隐私数据属性信息组和上述第二子隐私数据属性信息组进行预设轮值次计算,得到转换处理后的第一子隐私数据属性信息组和第二子隐私数据属性信息组。在此,对于上述预设轮值的具体数值,在此不做具体限定。
第八步,根据转换处理后的第一子隐私数据属性信息组和转换处理后的第二子隐私数据属性信息组,生成数据脱敏处理后的隐私数据信息集合。实践中,上述区域相关数据流转节点可以对转换处理后的第一子隐私数据属性信息组和转换处理后的第二子隐私数据属性信息组进行逻辑或运算,得到数据脱敏处理后的隐私数据信息集合。
步骤204,区域相关数据流转节点对数据脱敏处理后的区域相关数据信息集合进行数据确权处理。
在一些实施例中,上述区域相关数据流转节点可以对数据脱敏处理后的区域相关数据信息集合进行数据确权处理。实践中,上述区域相关数据流转节点可以通过数据签名算法对数据脱敏处理后的区域相关数据信息集合进行数据确权处理。
步骤205,区域相关数据流转节点根据目标区域相关数据流转区块链,对数据确权处理后的区域相关数据信息集合进行上链处理。
在一些实施例中,上述区域相关数据流转节点可以根据目标区域相关数据流转区块链,对数据确权处理后的区域相关数据信息集合进行上链处理。实践中,上述区域相关数据流转节点可以通过上述区域相关数据流转节点部署至上述目标区域数据流转区块链的智能合约,对数据确权处理后的区域相关数据信息集合进行上链处理。其中,上述目标区域相关数据流转区块链是如图1对应的那些实施例中所描述的目标区域相关数据流转区块链。
步骤206,区域相关数据流转节点根据预设区域相关数据需求信息集合,创建对应预设区域相关数据需求信息集合的区域相关数据任务信息集。
在一些实施例中,上述区域相关数据流转节点可以根据预设区域相关数据需求信息集合,创建对应上述预设区域相关数据需求信息集合的区域相关数据任务信息集。其中,上述区域相关数据任务信息集可以表征指令微调数据集。实践中,上述区域相关数据流转节点可以根据指令微调算法,创建对应上述预设区域相关数据需求信息集合的区域相关数据任务信息集。
步骤207,区域相关数据流转节点根据区域相关数据任务信息集,对预先训练的子区域数据流转模型进行更新处理,得到更新后的子区域数据流转模型。
在一些实施例中,上述区域相关数据流转节点可以根据上述区域相关数据任务信息集,对预先训练的子区域数据流转模型进行更新处理,得到更新后的子区域数据流转模型。实践中,上述区域相关数据流转节点可以通过梯度下降算法,使用区域相关数据任务信息集对预先训练的子区域数据流转模型进行更新处理。
步骤208,区域相关数据流转节点将所得到的子区域数据流转模型对应的子区域数据流转模型文件信息发送至区域相关数据信息流转端。
在一些实施例中,上述区域相关数据流转节点可以将所得到的子区域数据流转模型对应的子区域数据流转模型文件信息发送至区域相关数据信息流转端。其中,上述区域相关数据信息流转端是如图1所描述的区域相关数据信息流转端。
步骤209,响应于检测到区域数据获取请求信息,区域相关数据流转节点将所检测的区域数据获取请求信息发送至上述区域相关数据信息流转端。
在一些实施例中,响应于检测到区域数据获取请求信息,上述区域相关数据流转节点可以将所检测的区域数据获取请求信息发送至上述区域相关数据信息流转端。
可选地,在步骤209之后,首先,响应于接收到上述区域相关数据信息流转端发送的对应上述区域数据获取请求信息的区域相关数据信息,区域相关数据流转节点对所接收的区域相关数据信息进行数据提取处理,得到对应上述区域相关数据信息的数据提取信息。
然而,实践中发现,当通过本公开的生成预警信息时,经常会存在如下技术问题:
直接根据接收的区域相关数据信息生成预警信息,接收的区域相关数据信息较多,造成根据大量的区域相关数据信息生成预警信息耗费的计算资源较多,且需对大量的区域数据信息进行分析识别处理,造成生成预警信息的耗时较长。
面对上述技术问题,决定采用如下解决方案:
在一些实施例的一些可选的实现方式中,响应于接收到上述区域相关数据信息流转端发送的对应上述区域数据获取请求信息的区域相关数据信息,上述执行主体可以通过以下步骤对所接收的区域相关数据信息进行数据提取处理,得到对应上述区域相关数据信息的数据提取信息:
第一步,对所接收的区域相关数据信息进行分词处理,得到各个区域相关词语信息。其中,上述各个区域相关词语信息可以表征对应上述区域相关数据信息的各个词语。实践中,上述执行主体可以通过jieba分词工具对所接收的区域相关数据信息进行分词处理。
第二步,从上述各个区域相关词语信息中确定是否存在满足预设冗余词语条件的区域相关词语信息。其中,上述预设冗余词语条件可以为区域相关词语信息为预设冗余词语集合中的预设冗余词语。上述预设冗余词语可以表征停顿词。例如,预设冗余词语可以表征:“的”。实践中,上述执行主体可以确定上述各个区域相关词语信息中是否存在与上述预设冗余词语集合中的预设冗余词语相同的区域相关词语信息。
第三步,响应于确定上述各个区域相关词语信息中存在满足上述预设冗余词语条件的区域相关词语信息,从上述各个区域相关词语信息中将满足上述预设冗余词语条件的区域相关词语信息进行删除,得到各个变更区域相关词语信息。
第四步,根据上述各个变更区域相关词语信息,生成对应上述各个变更区域相关词语信息的各个词频信息。上述词频信息可以表征变更区域相关词语信息出现的频率。实践中,首先,上述执行主体可以将上述各个变更区域相关词语信息中相异的各个变更区域相关词语信息确定为各个相异区域相关词语信息。然后,可以对于上述各个相异区域相关词语信息中的每个相异区域相关词语信息,上述执行主体可以通过TF-IDF算法计算上述相异区域相关词语信息在上述各个变更区域相关词语信息的词频作为词频信息。
第五步,根据上述各个词频信息,生成对应上述各个变更区域相关词语信息的相关词语显示图信息。其中,上述相关词语显示图信息可以表征词云图。实践中,上述执行主体可以通过词云图生成工具,根据上述各个词频信息和上述各个相异区域相关词语信息,生成对应上述各个变更区域相关词语信息的相关词语显示图信息。例如,词云图生成工具可以为Dycharts。
第六步,根据上述相关词语显示图信息,生成对应上述各个变更区域相关词语信息的区域相关词语权重信息集合。其中,上述区域相关词语权重信息集合中的区域相关词语权重信息可以表征相异区域相关词语信息的权重。实践中,上述执行主体可以通过TF-IDF算法根据上述相关词语显示图信息,生成对应上述各个变更区域相关词语信息的区域相关词语权重信息集合。
第七步,根据上述区域相关词语权重信息集合,确定上述各个变更区域相关词语信息中满足预设词语权重条件的各个变更区域相关词语信息作为各个目标变更区域相关词语信息。其中,上述预设词语权重条件可以为变更区域相关词语信息对应的区域相关词语权重信息大于预设权重值。在此,对于上述预设权重值的具体数值,不做具体限定。
第八步,根据上述各个目标变更区域相关词语信息和预设词语显示颜色信息集合,确定对应上述各个目标变更区域相关词语信息的各个预设词语显示颜色信息。其中,上述预设词语显示颜色信息集合中的预设词语显示颜色信息可以对应上述各个目标变更区域相关词语信息中的目标变更区域相关词语信息。上述预设词语显示颜色信息集合中的预设词语显示颜色信息可以表征目标变更区域相关词语信息和颜色的对应关系。实践中,上述执行主体可以将上述预设词语显示颜色信息集合中包括的目标变更区域相关词语信息与上述各个目标变更区域相关词语信息相同的各个预设词语显示颜色信息确定为对应上述各个目标变更区域相关词语信息的各个预设词语显示颜色信息。
第九步,根据上述各个目标变更区域相关词语信息和上述各个预设词语显示颜色信息,生成对应上述区域相关数据信息的数据提取显示图信息作为数据提取信息。其中,上述数据提取显示图可以为网络图。实践中,上述执行主体可以通过网络图绘制工具生成对应上述区域相关数据信息的数据提取显示图信息。例如,网络图绘制工具可以为Echarts。
上述技术方案作为本公开的实施例的一个发明点,解决了技术问题“直接根据接收的区域相关数据信息生成预警信息,接收的区域相关数据信息较多,造成根据大量的区域相关数据信息生成预警信息耗费的计算资源较多,且需对大量的区域数据信息进行分析识别处理,造成生成预警信息的耗时较长”。导致根据大量的区域相关数据信息生成预警信息耗费的计算资源较多,且生成预警信息的耗时较长的原因是直接根据接收的区域相关数据信息生成预警信息,接收的区域相关数据信息较多。如果解决了上述因素,就能达到减少根据大量的区域相关数据信息生成预警信息耗费的计算资源,且缩短生成预警信息的耗时。为了达到这一效果,本公开生成预警信息时,首先对接收的区域相关数据信息进行数据提取处理,从而提取了权重较高的各个目标变更区域相关词语信息,之后,再根据提取的各个目标变更区域相关词语信息,生成预警信息,从而可以减少根据大量的区域相关数据信息生成预警信息耗费的计算资源,且缩短生成预警信息的耗时。
最后,根据上述数据提取信息,生成对应上述目标区域的区域相关数据预警信息。其中,上述区域相关数据预警信息可以表征对目标区域的预警。例如,区域相关数据预警信息可以为:“xx未来50天发生水灾的概率为80%”。实践中,上述执行主体可以根据支持向量机(SVM)根据上述数据提取信息,生成对应上述目标区域的区域相关数据预警信息。
步骤210,响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型。
步骤211,响应于接收到各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应区域相关数据流转节点的节点详情信息和对应区域相关数据信息流转端的目标区域相关数据流转区块链,确定区域相关数据流转节点是否满足预设节点流转权限条件。
步骤212,响应于确定区域相关数据流转节点满足预设节点流转权限条件,对区域数据获取请求信息进行校验处理,得到对应区域数据获取请求信息的校验结果信息。
步骤213,响应于确定校验结果信息满足预设校验结果条件,根据区域数据获取请求信息,将区域数据获取请求信息输入至目标区域数据流转模型,得到对应区域数据获取请求信息的区域相关数据信息。
步骤214,将对应区域数据获取请求信息的区域相关数据信息发送至区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。
在一些实施例中,步骤209-213的具体实现及所带来的技术效果可以参考图1对应的那些实施例中的步骤101-105,在此不再赘述。
可以理解的是,图1对应的那些实施例中的各个步骤应用于上述区域相关数据信息流转系统。由此,每个区域相关数据流转节点均可以获取上述目标区域的区域相关数据信息,之后,对获取的区域相关数据信息进行数据清洗等处理。其次,对清洗后的区域相关数据信息进行数据确权处理和数据脱敏处理。从而实现了对数据的预处理,提升了数据质量,减少了区域相关数据信息中的冗余数据,从而减少了流转存在冗余数据的区域相关数据信息耗费的计算资源。且是根据区域相关数据任务信息集对模型进行调整的,并非是重新训练的新模型,从而减少了训练新模型耗费的计算资源,根据问答模型的方式对区域相关数据信息进行流转,减少了对区域相关数据信息进行流转的步骤,缩短了对区域相关数据信息进行流转的耗时。
下面参考图3,其示出了适于用来实现本公开的一些实施例的电子设备300(例如计算设备)的结构示意图。图3示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图3所示,电子设备300可以包括处理装置301(例如中央处理器、图形处理器等),其可以根据存储在只读存储器(ROM)302中的程序或者从存储装置308加载到随机访问存储器(RAM)303中的程序而执行各种适当的动作和处理。在RAM 303中,还存储有电子设备300操作所需的各种程序和数据。处理装置301、ROM 302以及RAM 303通过总线304彼此相连。输入/输出(I/O)接口305也连接至总线304。
通常,以下装置可以连接至I/O接口305:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置306;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置307;包括例如磁带、硬盘等的存储装置308;以及通信装置309。通信装置309可以允许电子设备300与其他设备进行无线或有线通信以交换数据。虽然图3示出了具有各种装置的电子设备300,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图3中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置309从网络上被下载和安装,或者从存储装置308被安装,或者从ROM 302被安装。在该计算机程序被处理装置301执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例中记载的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP(HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备:响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型,其中,上述各个子区域数据流转模型文件信息对应上述各个区域相关数据流转节点中的区域相关数据流转节点,上述区域相关数据流转节点为提交对应目标城市的区域治理数据的节点或获取对应上述目标城市的区域治理数据的节点,上述子区域数据流转模型文件信息表征区域相关数据流转节点通过上述目标城市的区域治理数据训练得到的模型;响应于接收到上述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应上述区域相关数据流转节点的节点详情信息和对应上述区域相关数据信息流转端的目标区域相关数据流转区块链,确定上述区域相关数据流转节点是否满足预设节点流转权限条件,其中,上述区域数据获取请求信息为上述区域相关数据流转节点获取对应上述目标城市的区域治理数据的请求信息,上述节点详情信息包括上述区域相关数据流转节点的权限信息和上述区域相关数据流转节点的地址信息;响应于确定上述区域相关数据流转节点满足上述预设节点流转权限条件,对上述区域数据获取请求信息进行校验处理,得到对应上述区域数据获取请求信息的校验结果信息;响应于确定上述校验结果信息满足预设校验结果条件,根据上述区域数据获取请求信息,将上述区域数据获取请求信息输入至上述目标区域数据流转模型,得到对应上述区域数据获取请求信息的区域相关数据信息,其中,上述区域相关数据信息为对应上述目标城市的区域治理数据;将对应上述区域数据获取请求信息的区域相关数据信息发送至上述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD)等等。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。

Claims (10)

1.一种区域相关数据信息流转方法,应用于区域相关数据信息流转端,包括:
响应于接收到各个区域相关数据流转节点提交的各个子区域数据流转模型文件信息,对所接收的各个子区域数据流转模型文件信息进行集成处理,得到目标区域数据流转模型,其中,所述各个子区域数据流转模型文件信息对应所述各个区域相关数据流转节点中的区域相关数据流转节点,所述区域相关数据流转节点为提交对应目标城市的区域治理数据的节点或获取对应所述目标城市的区域治理数据的节点,所述子区域数据流转模型文件信息表征区域相关数据流转节点通过所述目标城市的区域治理数据训练得到的模型;
响应于接收到所述各个区域相关数据流转节点中的区域相关数据流转节点发送的区域数据获取请求信息,根据对应所述区域相关数据流转节点的节点详情信息和对应所述区域相关数据信息流转端的目标区域相关数据流转区块链,确定所述区域相关数据流转节点是否满足预设节点流转权限条件,其中,所述区域数据获取请求信息为所述区域相关数据流转节点获取对应所述目标城市的区域治理数据的请求信息,所述节点详情信息包括所述区域相关数据流转节点的权限信息和所述区域相关数据流转节点的地址信息;
响应于确定所述区域相关数据流转节点满足所述预设节点流转权限条件,对所述区域数据获取请求信息进行校验处理,得到对应所述区域数据获取请求信息的校验结果信息;
响应于确定所述校验结果信息满足预设校验结果条件,根据所述区域数据获取请求信息,将所述区域数据获取请求信息输入至所述目标区域数据流转模型,得到对应所述区域数据获取请求信息的区域相关数据信息,其中,所述区域相关数据信息为对应所述目标城市的区域治理数据;
将对应所述区域数据获取请求信息的区域相关数据信息发送至所述区域相关数据流转节点,以对输出的区域相关数据信息进行流转处理。
2.根据权利要求1所述的方法,其中,所述方法还包括:
根据对应所述区域相关数据信息流转端的目标区域相关数据流转区块链,对所述区域相关数据信息进行追溯处理。
3.根据权利要求1所述的方法,其中,所述方法还包括:
对所述目标区域数据流转模型进行性能检测处理,得到对应所述目标区域数据流转模型的模型性能检测信息;
根据所述模型性能检测信息,确定所述目标区域数据流转模型是否满足预设模型性能条件;
响应于确定所述目标区域数据流转模型不满足所述预设模型性能条件,对所述目标区域数据流转模型进行更新处理,得到更新处理后的目标区域数据流转模型作为目标区域数据流转模型。
4.根据权利要求3所述的方法,其中,所述对所述目标区域数据流转模型进行性能检测处理,得到对应所述目标区域数据流转模型的模型性能检测信息,包括:
根据预设区域数据获取需求信息,确定对应所述区域数据获取请求信息的模型性能需求信息;
根据所述模型性能需求信息、对应所述目标区域数据流转模型的区域数据获取请求信息集合和对应所述区域数据获取请求信息集合的区域相关数据信息集合,对所述目标区域数据流转模型进行检测处理,得到对应所述目标区域数据流转模型的模型性能信息,其中,所述区域数据获取请求信息集合中的区域数据获取请求信息对应所述区域相关数据信息集合中的区域相关数据信息;
对所述目标区域数据流转模型的性能进行实时监控处理,得到对应所述目标区域数据流转模型的实时监控性能信息;
获取对应所述目标区域数据流转模型的模型性能评价信息;
将所述模型性能评价信息、所述模型性能信息和所述实时监控性能信息确定为对应所述目标区域数据流转模型的模型性能检测信息。
5.根据权利要求1所述的方法,其中,所述根据对应所述区域相关数据流转节点的节点详情信息和对应所述区域相关数据信息流转端的目标区域相关数据流转区块链,确定所述区域相关数据流转节点是否满足预设节点流转权限条件,包括:
根据所述目标区域相关数据流转区块链,对所述节点详情信息进行校验处理,得到对应所述区域相关数据流转节点的节点校验结果信息;
根据所述节点校验结果信息,确定所述区域相关数据流转节点是否满足预设校验条件;
响应于确定所述区域相关数据流转节点满足所述预设校验条件,确定所述区域相关数据流转节点满足所述预设节点流转权限条件。
6.一种区域相关数据信息流转系统,包括区域相关数据信息流转端和各个区域相关数据流转节点,其中,
所述区域相关数据信息流转端被配置成执行如权利要求1-5之一所述的方法;
所述各个区域相关数据流转节点中的每个区域相关数据流转节点被配置成获取对应目标区域的区域相关数据信息集合;对所述区域相关数据信息集合进行数据清洗处理,得到数据清洗后的区域相关数据信息集合;对数据清洗后的区域相关数据信息集合进行数据脱敏处理,得到数据脱敏处理后的区域相关数据信息集合;对数据脱敏处理后的区域相关数据信息集合进行数据确权处理;根据目标区域相关数据流转区块链,对数据确权处理后的区域相关数据信息集合进行上链处理,其中,所述目标区域相关数据流转区块链是如权利要求1-5之一所述的目标区域相关数据流转区块链;根据预设区域相关数据需求信息集合,创建对应所述预设区域相关数据需求信息集合的区域相关数据任务信息集;根据所述区域相关数据任务信息集,对预先训练的子区域数据流转模型进行更新处理,得到更新后的子区域数据流转模型;将所得到的子区域数据流转模型对应的子区域数据流转模型文件信息发送至区域相关数据信息流转端,其中,所述区域相关数据信息流转端是如权利要求1-5之一所述的区域相关数据信息流转端。
7.根据权利要求6所述的区域相关数据信息流转系统,其中,所述各个区域相关数据流转节点中的每个区域相关数据流转节点进一步被配置成:
响应于检测到区域数据获取请求信息,将所检测的区域数据获取请求信息发送至所述区域相关数据信息流转端;
响应于接收到所述区域相关数据信息流转端发送的对应所述区域数据获取请求信息的区域相关数据信息,对所接收的区域相关数据信息进行数据提取处理,得到对应所述区域相关数据信息的数据提取信息;
根据所述数据提取信息,生成对应所述目标区域的区域相关数据预警信息。
8.根据权利要求6所述的区域相关数据信息流转系统,其中,所述各个区域相关数据流转节点中的每个区域相关数据流转节点进一步被配置成:
对数据清洗后的区域相关数据信息集合中的每个区域相关数据信息进行属性识别处理,得到各个区域相关数据属性信息;
根据所述各个区域相关数据属性信息,确定对应所述各个区域相关数据属性信息的属性长度信息;
根据所述属性长度信息,确定对应数据清洗后的区域相关数据信息集合的区域相关数据函数信息;
对所述各个区域相关数据属性信息进行转换处理,得到转换处理后的各个区域相关数据属性信息;
对转换处理后的各个区域相关数据属性信息进行分组处理,得到第一子区域相关数据属性信息组和第二子区域相关数据属性信息组;
根据所述区域相关数据函数信息,对所述第一子区域相关数据属性信息组和所述第二子区域相关数据属性信息组进行转换处理;
根据转换处理后的第一子区域相关数据属性信息组和转换处理后的第二子区域相关数据属性信息组,生成数据脱敏处理后的区域相关数据信息集合。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1至5中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其中,所述计算机程序被处理器执行时实现如权利要求1至5中任一所述的方法。
CN202410392321.4A 2024-04-02 2024-04-02 区域相关数据信息流转方法、装置、电子设备和介质 Active CN117978363B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202410392321.4A CN117978363B (zh) 2024-04-02 2024-04-02 区域相关数据信息流转方法、装置、电子设备和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202410392321.4A CN117978363B (zh) 2024-04-02 2024-04-02 区域相关数据信息流转方法、装置、电子设备和介质

Publications (2)

Publication Number Publication Date
CN117978363A true CN117978363A (zh) 2024-05-03
CN117978363B CN117978363B (zh) 2024-06-11

Family

ID=90861632

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202410392321.4A Active CN117978363B (zh) 2024-04-02 2024-04-02 区域相关数据信息流转方法、装置、电子设备和介质

Country Status (1)

Country Link
CN (1) CN117978363B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115996187A (zh) * 2022-11-18 2023-04-21 京东科技控股股份有限公司 路由信息处理方法、装置、路由信息交互系统和路由设备
CN116186354A (zh) * 2023-04-27 2023-05-30 中关村科学城城市大脑股份有限公司 区域画像显示方法、装置、电子设备和计算机可读介质
CN116881881A (zh) * 2023-09-07 2023-10-13 国网思极网安科技(北京)有限公司 数据导出方法、装置、电子设备和计算机可读介质
WO2023207086A1 (zh) * 2022-04-29 2023-11-02 蚂蚁区块链科技(上海)有限公司 一种基于区块链的用户数据流转方法、装置及设备
WO2024001028A1 (zh) * 2022-06-29 2024-01-04 蚂蚁区块链科技(上海)有限公司 一种维护区块链数据的方法、装置、电子设备和存储介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023207086A1 (zh) * 2022-04-29 2023-11-02 蚂蚁区块链科技(上海)有限公司 一种基于区块链的用户数据流转方法、装置及设备
WO2024001028A1 (zh) * 2022-06-29 2024-01-04 蚂蚁区块链科技(上海)有限公司 一种维护区块链数据的方法、装置、电子设备和存储介质
CN115996187A (zh) * 2022-11-18 2023-04-21 京东科技控股股份有限公司 路由信息处理方法、装置、路由信息交互系统和路由设备
CN116186354A (zh) * 2023-04-27 2023-05-30 中关村科学城城市大脑股份有限公司 区域画像显示方法、装置、电子设备和计算机可读介质
CN116881881A (zh) * 2023-09-07 2023-10-13 国网思极网安科技(北京)有限公司 数据导出方法、装置、电子设备和计算机可读介质

Also Published As

Publication number Publication date
CN117978363B (zh) 2024-06-11

Similar Documents

Publication Publication Date Title
CN114091617B (zh) 联邦学习建模优化方法、电子设备、存储介质及程序产品
CN111046027B (zh) 时间序列数据的缺失值填充方法和装置
CN113765928B (zh) 物联网入侵检测方法、设备及介质
CN111198945A (zh) 数据处理方法、装置、介质及电子设备
CN115085196A (zh) 电力负荷预测值确定方法、装置、设备和计算机可读介质
US11645540B2 (en) Deep graph de-noise by differentiable ranking
CN110825589B (zh) 用于微服务系统的异常检测方法及其装置和电子设备
CN114358147A (zh) 异常账户识别模型的训练方法、识别方法、装置及设备
CN111950791A (zh) 一种航班延误预测方法、装置、服务器及存储介质
CN113722738A (zh) 数据保护方法、装置、介质及电子设备
CN115700548A (zh) 用户行为预测的方法、设备和计算机程序产品
US11676063B2 (en) Exposing payload data from non-integrated machine learning systems
CN115114329A (zh) 数据流异常检测的方法、装置、电子设备和存储介质
CN117978363B (zh) 区域相关数据信息流转方法、装置、电子设备和介质
CN116401372A (zh) 知识图谱表示学习方法、装置、电子设备及可读存储介质
CN113610228B (zh) 神经网络模型的构建方法及装置
CN113077353B (zh) 用于生成核保结论的方法、装置、电子设备和介质
CN113077352B (zh) 基于用户信息和保险相关信息的保险服务物品推荐方法
CN117636100B (zh) 预训练任务模型调整处理方法、装置、电子设备和介质
CN114722061B (zh) 数据处理方法及装置、设备、计算机可读存储介质
CN118211858A (zh) 层级信息生成方法、装置、设备、介质和程序产品
WO2023155425A1 (zh) 调货方法、装置、电子设备和计算机可读介质
CN116843991A (zh) 模型训练方法、信息生成方法、装置、设备和介质
CN118245341A (zh) 业务模型的切换方法、装置、电子设备和计算机可读介质
CN117807222A (zh) 文本分类方法、装置、设备、计算机可读介质和程序产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant