CN112199718A - 数据流转的监控方法、装置、电子设备及存储介质 - Google Patents

数据流转的监控方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112199718A
CN112199718A CN202011074899.3A CN202011074899A CN112199718A CN 112199718 A CN112199718 A CN 112199718A CN 202011074899 A CN202011074899 A CN 202011074899A CN 112199718 A CN112199718 A CN 112199718A
Authority
CN
China
Prior art keywords
data
compliance
monitoring
data flow
configuration field
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011074899.3A
Other languages
English (en)
Inventor
苏生宏
黄文泱
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Smart Technology Co Ltd
OneConnect Financial Technology Co Ltd Shanghai
Original Assignee
OneConnect Financial Technology Co Ltd Shanghai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Financial Technology Co Ltd Shanghai filed Critical OneConnect Financial Technology Co Ltd Shanghai
Priority to CN202011074899.3A priority Critical patent/CN112199718A/zh
Publication of CN112199718A publication Critical patent/CN112199718A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/602Providing cryptographic facilities or services
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/10Text processing
    • G06F40/12Use of codes for handling textual entities
    • G06F40/151Transformation
    • G06F40/16Automatic learning of transformation rules, e.g. from examples

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Bioethics (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Medical Informatics (AREA)
  • Artificial Intelligence (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Debugging And Monitoring (AREA)

Abstract

本发明涉及监控技术领域,揭露了一种数据流转的监控方法及相关设备,可应用于智慧医疗领域,包括:利用预先接收的数据安全条例文本训练得到规则处理函数,利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段,根据所述合规配置字段绘制数据流转合规关系图,渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。此外,本发明还涉及区块链技术,所述可视化的数据流程监控图可存储于区块链中。本发明目的在于对数据流转过程进行监控,以及时发现侵犯用户的个人隐私的问题。

Description

数据流转的监控方法、装置、电子设备及存储介质
技术领域
本发明涉及监控领域,尤其涉及一种数据流转的监控方法、装置、电子设备及计算机可读存储介质。
背景技术
随着时代的发展,个人隐私问题日益受到人们的重视。如欧盟推出的通用数据保护条例(General Data Protection Regulation,简称GDPR)就是用于遏制个人信息被滥用,保护个人隐私。根据GDPR的规定,企业在收集、存储、使用个人信息上要取得用户的同意,用户对自己的个人数据有绝对的掌控权。随着大数据时代的到来,企业一不留神,可能会违反GDPR的规定,而在医疗领域,病患信息的隐私保护更是重中之重,如何执行数据监控,使流转数据的过程中不会侵犯用户的个人隐私,成为目前亟待解决的问题。
发明内容
本发明提供一种数据流转的监控方法、装置、电子设备及计算机可读存储介质,其主要目的在于对数据流转过程进行监控,以及时发现侵犯用户的个人隐私的问题。
为实现上述目的,本发明提供的一种数据流转的监控方法,包括:
利用预先接收的数据安全条例文本训练得到规则处理函数;
利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
根据所述合规配置字段绘制数据流转合规关系图;
渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
可选的,所述将所述监控结果添加到预先构建的流程合规配置字段表中之前,包括:
逐行扫描所述日志文件,并记录所述日志文件内的数据流转过程在配置文件内的先后顺序;
利用预构建的拆分符,将所述日志文件内的数据流转过程按照所述先后顺序,拆分成不同字段,并汇总所述不同字段得到所述流程合规配置字段表。
可选的,所述利用预先接收的数据安全条例文本训练得到规则处理函数,包括:
量化预先获取的数据流转过程样本数据,得到向量化数据;
对所述向量化数据进行清洗处理,得到训练数据;
利用所述数据安全条例文本,构建规则判定函数;
利用所述训练数据对所述规则判定函数进行预设次数的训练,得到所述规则处理函数。
可选的,所述根据所述合规配置字段绘制数据流转合规关系图,包括:
将所述合规配置字段进行映射,得到合规映射字段;
根据所述合规映射字段绘制得到数据流转合规关系图。
可选的,所述将所述合规配置字段进行映射,得到合规映射字段,包括:
将所述合规配置字段进行表格映射,得到表格形式的合规映射字段;或者
将所述合规配置字段进行对象-关系映射,得到对象树形式的合规映射字段。
可选的,所述渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图,包括:
利用超文本标记语言解析器,对所述数据流转合规关系图进行解析构建,形成文档对象模型数据;
将所述文档对象模型数据进行渲染,得到所述业务系统的可视化的所述监控数据关系图。
可选的,所述利用预先接收的数据安全条例文本训练得到规则处理函数之后,包括:
利用预设套接字构建文件采集接口;
利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数。为了解决上述问题,本发明还提供一种数据流转的监控装置,所述装置包括:
训练模块,用于利用预先接收的数据安全条例文本训练得到规则处理函数;
配置模块,用于利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控判断,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
绘制模块,用于根据所述合规配置字段绘制数据流转合规关系图;
可视化模块,用于渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
为了解决上述问题,本发明还提供一种电子设备,所述电子设备包括:至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述所述的数据流转的监控方法。
为了解决上述问题,本发明还提供一种计算机可读存储介质,包括存储数据区和存储程序区,其中,所述存储数据区存储创建的数据,所述存储程序区存储有计算机程序;其中,所述计算机程序被处理器执行时实现上述所述的数据流转的监控方法。
本发明实施例根据数据安全条例文本,利用数据流转过程样本数据训练得到规则处理函数,利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控判断,得到监控结果,达到对所述数据安全条例针对性监控的目的,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段,,绘制所述合规配置字段,得到数据流转合规关系图,渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图,使得监控过程更加明了,实现了对数据流转过程进行监控,以及时发现侵犯用户的个人隐私的问题发生。
附图说明
图1为本发明一实施例提供的数据流转的监控方法的流程示意图;
图2为图1提供的数据流转的监控方法中其中一个步骤的详细实施流程示意图;
图3为本发明一实施例提供的数据流转的监控装置的模块示意图;
图4为本发明一实施例提供的实现数据流转的监控方法的电子设备的内部结构示意图;
本发明目的的实现、功能特点及优点将结合实施例,参照附图做进一步说明。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提供一种数据流转的监控方法。本申请实施例提供的数据流转的监控方法的执行主体包括但不限于服务端、终端等能够被配置为执行本申请实施例提供的该方法的电子设备中的至少一种。换言之,所述数据流转的监控方法可以由安装在终端设备或服务端设备的软件或硬件来执行,所述软件可以是区块链平台。所述服务端包括但不限于:单台服务器、服务器集群、云端服务器或云端服务器集群等。
参照图1所示,本发明一实施例提供的数据流转的监控方法包括:
S1、利用预先接收的数据安全条例文本训练得到规则处理函数;
本发明实施例中,所述数据安全条例指的是《通用数据保护条例》(General DataProtection Regulation,简称GDPR),为欧洲联盟保护成员国个人隐私的条例,该条例的适用范围极为广泛,任何收集、传输、保留或处理涉及到欧盟所有成员国内的个人信息的机构组织均受该条例的约束。
优选地,本发明其他实施例中,所述利用预先接收的数据安全条例文本训练得到规则处理函数之前,包括:
利用预设套接字构建文件采集接口;
利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数。
所述套接字(Socket)为通信的基石,是支持TCP/IP协议的路通信的基本操作单元。
进一步地,本发明实施例中,所述利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数,包括:在所述规则处理函数中构建一个流程信息节点,用于将所述业务系统内的日志文件中数据流转过程的数据导入所述流程信息节点。
详细地,参阅图2所示,本发明实施例中,所述利用预先接收的数据安全条例文本训练得到规则处理函数,包括:
S11、量化预先获取的数据流转过程样本数据,得到向量化数据;
本发明实施例中,所述数据流转过程样本数据可以包括历史数据流转过程及随意构建的数据流站过程。较佳地,所述数据流转过程样本数据可以从业务系统以前的日志文件中获取。
所述量化为将所述样本数据进行格式规范化处理的过程,例如一个样本数据的数据类型为float32,需要转化为适应函数的uint8数据类型,若不进行量化处理无法输入后续函数进行处理,因此,本发明实施例中,通过对所述数据流转过程样本数据进行量化,得到向量化数据。
S12、对所述向量化数据进行清洗处理,得到训练数据;
本发明实施例中,所述清洗处理包括计算缺失值比例、填充缺失内容及去除多余字段等。
S13、利用所述数据安全条例文本,构建规则判定函数;
本发明实施例中,通过分析所述数据安全条例文本中的每个条款,生成每个条款对应的规则判定函数。例如,所述规则判定函数可以包括:1、根据“个人数据传输需要加密传输”条款,构建校验用户敏感节点数据是否已加密的规则判断函数;2、根据“授权范围”条款,构建校验用户授权范围的规则判断函数等。
S14、利用所述训练数据对所述规则判定函数进行预设次数的训练,得到所述规则处理函数。
本发明实施例利用所述数据安全条例文本构建的规则判定函数来判定所述训练数据中数据流转过程是否属于合规操作,经过多次,如200次的反复训练可以得到高效、容错率高、准确率高的所述规则处理函数。
S2、利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控判断,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
本发明实施例中,所述业务系统指一种可处理公司业务,并留下记录的系统,例如,贷款业务系统、保险业务系统等。
所述日志文件是用于记录业务系统中操作事件的记录文件或文件集,可分为事件日志和消息日志,具有处理历史数据、诊断问题的追踪以及理解系统的活动等重要作用。例如,本发明实施例中,所述日志文件包含了系统操作日志、接口请求日志、操作信息、个人信息等。
本发明实施例中,所述数据流转可表述为:需要监控的个人信息,如姓名、电话号码、贷款订单、贷款额度、贷款状态等这些信息,从一个系统转移到另一个系统、从一个模块调取到另一个模块等这些需要对数据进行转移、处理等的过程。
本发明另外一实施例中,所述将所述监控结果添加到预先构建的流程合规配置字段表中之前,包括:
逐行扫描所述日志文件,并记录所述日志文件内的数据流转过程在配置文件内的先后顺序;利用预构建的拆分符,将所述日志文件内的数据流转过程按照所述先后顺序,拆分成不同字段,并汇总所述不同字段得到所述流程合规配置字段表。
S3、根据所述合规配置字段绘制数据流转合规关系图;
本发明另外一个实施例中,所述根据所述合规配置字段绘制数据流转合规关系图,包括:
将所述合规配置字段进行映射,得到合规映射字段;根据所述合规映射字段绘制得到数据流转合规关系图。
所述映射为在两个数据模型之间建立起的数据元素的对应关系,这一过程称为数据映射,本发明一实施例中,将所述合规配置字段进行表格映射,将数据信息填入表格形式的所述合规映射字段;另一实施例中,将所述合规配置字段进行对象-关系映射,得到对象树形式的合规映射字段。本发明实施例通过映射处理使得所述规则处理函数只能处理到映射字段,不能获取原始字段,提高了数据安全性。
S4、渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
详细地,本发明实施例中,所述渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图,包括:
步骤a、利用超文本标记语言解析器,对所述数据流转合规关系图进行解析构建,形成文档对象模型数据;
所述超文本标记语言(HyperText Markup Language,简称HTML),包括一系列标签,通过这些标签可以将数据流转合规关系图中的数据格式统一。
步骤b、将所述文档对象模型数据进行渲染,得到可视化的所述监控数据关系图。
所述文档对象模型(Document Object Model,简称DOM)是一种用于HTML和XML文档的编程接口,给数据流转合规关系图提供了一种结构化的表示方法,可以改变数据流转合规关系图的内容和呈现方式。
本发明实施例中所述“渲染”指的是根据文档对象模型数据在屏幕上画出对应内容的过程。
为了保证数据安全性,所述可视化的数据流程监控图可存储于区块链中。
如图3所示,是本发明数据流转的监控装置的模块示意图。
本发明所述数据流转的监控装置100可以安装于电子设备中。根据实现的功能,所述数据流转的监控装置100可以包括训练模块101、配置模块102、绘制模块103及可视化模块104。本发所述模块也可以称之为单元,是指一种能够被电子设备处理器所执行,并且能够完成固定功能的一系列计算机程序段,其存储在电子设备的存储器中。
在本实施例中,关于各模块/单元的功能如下:
所述训练模块101,用于利用预先接收的数据安全条例文本训练得到规则处理函数。
本发明实施例中,所述数据安全条例指的是《通用数据保护条例》(General DataProtection Regulation,简称GDPR),为欧洲联盟保护成员国个人隐私的条例,该条例的适用范围极为广泛,任何收集、传输、保留或处理涉及到欧盟所有成员国内的个人信息的机构组织均受该条例的约束。
优选地,本发明其他实施例中,所述训练模块101利用预先接收的数据安全条例文本训练得到规则处理函数之前,还用于:
利用预设套接字构建文件采集接口;
利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数。
所述套接字(Socket)为通信的基石,是支持TCP/IP协议的路通信的基本操作单元。
进一步地,本发明实施例中,所述利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数包括:在所述规则处理函数中构建一个流程信息节点,用于将所述业务系统内的日志文件中数据流转过程的数据导入所述流程信息节点。
详细地,本发明实施例中,所述利用预先接收的数据安全条例文本训练得到规则处理函数,包括:
量化预先获取的数据流转过程样本数据,得到向量化数据;
对所述向量化数据进行清洗处理,得到训练数据;
利用所述数据安全条例文本,构建规则判定函数;
利用所述训练数据对所述规则判定函数进行预设次数的训练,得到所述规则处理函数。
本发明实施例中,所述数据流转过程样本数据可以包括历史数据流转过程也可以包括随意构建的数据流站过程。较佳地,所述数据流转过程样本数据可以从业务系统以前的日志文件中获取。
进一步地,所述量化为将所述样本数据进行格式规范化处理的过程,例如一个样本数据的数据类型为float32,需要转化为适应函数的uint8数据类型,若不进行量化处理无法输入后续函数进行处理,因此,本发明实施例中,通过对所述数据流转过程样本数据进行量化,得到向量化数据。
本发明实施例中,所述清洗处理包括计算缺失值比例、填充缺失内容及去除多余字段等。
进一步地,本发明实施例中,通过分析所述数据安全条例文本中的每个条款,生成每个条款对应的规则判定函数。例如,所述规则判定函数可以包括:1、根据“个人数据传输需要加密传输”条款,构建校验用户敏感节点数据是否已加密的规则判断函数;2、根据“授权范围”条款,构建校验用户授权范围的规则判断函数等。
本发明实施例,利用所述数据安全条例文本构建的规则判定函数来判定所述训练数据中数据流转过程是否属于合规操作,经过多次,如200次的反复训练可以得到高效、容错率高、准确率高的所述规则处理函数。
所述配置模块102,用于利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控判断,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段。
本发明实施例中,所述业务系统指一种可处理公司业务,并留下记录的系统,例如,贷款业务系统、保险业务系统等。
所述日志文件是用于记录业务系统中操作事件的记录文件或文件集,可分为事件日志和消息日志,具有处理历史数据、诊断问题的追踪以及理解系统的活动等重要作用。例如,本发明实施例中,所述日志文件包含了系统操作日志、接口请求日志、操作信息、个人信息等。
本发明实施例中,所述数据流转可表述为:需要监控的个人信息,如姓名、电话号码、贷款订单、贷款额度、贷款状态等这些信息,从一个系统转移到另一个系统、从一个模块调取到另一个模块等需要对数据进行转移、处理等的过程。
本发明另外一实施例中,所述配置模块102将所述监控结果添加到预先构建的流程合规配置字段表中之前,还用于:
逐行扫描所述日志文件,并记录所述日志文件内的数据流转过程在配置文件内的先后顺序;利用预构建的拆分符,将所述日志文件内的数据流转过程按照所述先后顺序,拆分成不同字段,并汇总所述不同字段得到所述流程合规配置字段表。
所述绘制模块103,用于根据所述合规配置字段绘制数据流转合规关系图;
本发明另外一个实施例中,所述绘制模块103通过下述操作绘制数据流转合规关系图:
将所述合规配置字段进行映射,得到合规映射字段;根据所述合规映射字段绘制得到数据流转合规关系图。
所述映射为在两个数据模型之间建立起的数据元素的对应关系,这一过程称为数据映射,本发明一实施例中,将所述合规配置字段进行表格映射,将数据信息填入表格形式的所述合规映射字段;另一实施例中,将所述合规配置字段进行对象-关系映射,得到对象树形式的合规映射字段。本发明实施例所述绘制模块103通过映射处理使得所述规则处理函数只能处理到映射字段,不能获取原始字段,提高了数据安全性。
所述可视化模块104,用于渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
详细地,本发明实施例中,所述可视化模块104通过下述操作渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图,包括:
步骤a、利用超文本标记语言解析器,对所述数据流转合规关系图进行解析构建,形成文档对象模型数据;
所述超文本标记语言(HyperText Markup Language,简称HTML),包括一系列标签,通过这些标签可以将数据流转合规关系图中的数据格式统一。
步骤b、将所述文档对象模型数据进行渲染,得到可视化的所述监控数据关系图。
所述文档对象模型(Document Object Model,简称DOM)是一种用于HTML和XML文档的编程接口,给数据流转合规关系图提供了一种结构化的表示方法,可以改变数据流转合规关系图的内容和呈现方式。
本发明实施例中所述“渲染”指的是根据文档对象模型数据在屏幕上画出对应内容的过程。
优选地,为了保证数据安全性,所述可视化的数据流程监控图可存储于区块链中。
如图4所示,是本发明实现数据流转的监控方法的电子设备的结构示意图。
所述电子设备1可以包括处理器10、存储器11和总线,还可以包括存储在所述存储器11中并可在所述处理器10上运行的计算机程序,如数据流转的监控程序12。
其中,所述存储器11至少包括一种类型的可读存储介质,所述可读存储介质包括闪存、移动硬盘、多媒体卡、卡型存储器(例如:SD或DX存储器等)、磁性存储器、磁盘、光盘等。所述存储器11在一些实施例中可以是电子设备1的内部存储单元,例如该电子设备1的移动硬盘。所述存储器11在另一些实施例中也可以是电子设备1的外部存储设备,例如电子设备1上配备的插接式移动硬盘、智能存储卡(Smart Media Card,SMC)、安全数字(SecureDigital,SD)卡、闪存卡(Flash Card)等。进一步地,所述存储器11还可以既包括电子设备1的内部存储单元也包括外部存储设备。所述存储器11不仅可以用于存储安装于电子设备1的应用软件及各类数据,例如数据流转的监控程序12的代码等,还可以用于暂时地存储已经输出或者将要输出的数据。
所述处理器10在一些实施例中可以由集成电路组成,例如可以由单个封装的集成电路所组成,也可以是由多个相同功能或不同功能封装的集成电路所组成,包括一个或者多个中央处理器(Central Processing unit,CPU)、微处理器、数字处理芯片、图形处理器及各种控制芯片的组合等。所述处理器10是所述电子设备的控制核心(Control Unit),利用各种接口和线路连接整个电子设备的各个部件,通过运行或执行存储在所述存储器11内的程序或者模块(例如执行数据流转的监控程序等),以及调用存储在所述存储器11内的数据,以执行电子设备1的各种功能和处理数据。
所述总线可以是外设部件互连标准(peripheral component interconnect,简称PCI)总线或扩展工业标准结构(extended industry standard architecture,简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。所述总线被设置为实现所述存储器11以及至少一个处理器10等之间的连接通信。
图4仅示出了具有部件的电子设备,本领域技术人员可以理解的是,图4示出的结构并不构成对所述电子设备1的限定,可以包括比图示更少或者更多的部件,或者组合某些部件,或者不同的部件布置。
例如,尽管未示出,所述电子设备1还可以包括给各个部件供电的电源(比如电池),优选地,电源可以通过电源管理装置与所述至少一个处理器10逻辑相连,从而通过电源管理装置实现充电管理、放电管理、以及功耗管理等功能。电源还可以包括一个或一个以上的直流或交流电源、再充电装置、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。所述电子设备1还可以包括多种传感器、蓝牙模块、Wi-Fi模块等,在此不再赘述。
进一步地,所述电子设备1还可以包括网络接口,可选地,所述网络接口可以包括有线接口和/或无线接口(如WI-FI接口、蓝牙接口等),通常用于在该电子设备1与其他电子设备之间建立通信连接。
可选地,该电子设备1还可以包括用户接口,用户接口可以是显示器(Display)、输入单元(比如键盘(Keyboard)),可选地,用户接口还可以是标准的有线接口、无线接口。可选地,在一些实施例中,显示器可以是LED显示器、液晶显示器、触控式液晶显示器以及OLED(Organic Light-Emitting Diode,有机发光二极管)触摸器等。其中,显示器也可以适当的称为显示屏或显示单元,用于显示在电子设备1中处理的信息以及用于显示可视化的用户界面。
应该了解,所述实施例仅为说明之用,在专利申请范围上并不受此结构的限制。
所述电子设备1中的所述存储器11存储的数据流转的监控程序12是多个指令的组合,在所述处理器10中运行时,可以实现:
利用预先接收的数据安全条例文本训练得到规则处理函数;
利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
根据所述合规配置字段绘制数据流转合规关系图;
渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
进一步地,所述电子设备1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)。
进一步地,所述计算机可用存储介质可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序等;存储数据区可存储根据区块链节点的使用所创建的数据等。
在本发明所提供的几个实施例中,应该理解到,所揭露的设备,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。
因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图表记视为限制所涉及的权利要求。
本发明所指区块链是分布式数据存储、点对点传输、共识机制、加密算法等计算机技术的新型应用模式。区块链(Blockchain),本质上是一个去中心化的数据库,是一串使用密码学方法相关联产生的数据块,每一个数据块中包含了一批次网络交易的信息,用于验证其信息的有效性(防伪)和生成下一个区块。区块链可以包括区块链底层平台、平台产品服务层以及应用服务层等。
此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第二等词语用来表示名称,而并不表示任何特定的顺序。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种数据流转的监控方法,其特征在于,所述方法包括:
利用预先接收的数据安全条例文本训练得到规则处理函数;
利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
根据所述合规配置字段绘制数据流转合规关系图;
渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
2.如权利要求1所述数据流转的监控方法,其特征在于,所述将所述监控结果添加到预先构建的流程合规配置字段表中之前,包括:
逐行扫描所述日志文件,并记录所述日志文件内的数据流转过程在配置文件内的先后顺序;
利用预构建的拆分符,将所述日志文件内的数据流转过程按照所述先后顺序,拆分成不同字段,并汇总所述不同字段得到所述流程合规配置字段表。
3.如权利要求1所述数据流转的监控方法,其特征在于,所述利用预先接收的数据安全条例文本训练得到规则处理函数,包括:
量化预先获取的数据流转过程样本数据,得到向量化数据;
对所述向量化数据进行清洗处理,得到训练数据;
利用所述数据安全条例文本,构建规则判定函数;
利用所述训练数据对所述规则判定函数进行预设次数的训练,得到所述规则处理函数。
4.如权利要求1所述数据流转的监控方法,其特征在于,所述根据所述合规配置字段绘制数据流转合规关系图,包括:
将所述合规配置字段进行映射,得到合规映射字段;
根据所述合规映射字段绘制得到数据流转合规关系图。
5.如权利要求4所述数据流转的监控方法,其特征在于,所述将所述合规配置字段进行映射,得到合规映射字段,包括:
将所述合规配置字段进行表格映射,得到表格形式的合规映射字段;或者
将所述合规配置字段进行对象-关系映射,得到对象树形式的合规映射字段。
6.如权利要求1所述数据流转的监控方法,其特征在于,所述渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图,包括:
利用超文本标记语言解析器,对所述数据流转合规关系图进行解析构建,形成文档对象模型数据;
将所述文档对象模型数据进行渲染,得到所述业务系统的可视化的所述监控数据关系图。
7.如权利要求1至6中任意一项所述数据流转的监控方法,其特征在于,所述利用预先接收的数据安全条例文本训练得到规则处理函数之后,包括:
利用预设套接字构建文件采集接口;
利用所述文件采集接口接收所述日志文件,并将所述日志文件输送至所述规则处理函数。
8.一种数据流转的监控装置,其特征在于,所述装置包括:
训练模块,用于利用预先接收的数据安全条例文本训练得到规则处理函数;
配置模块,利用所述规则处理函数对业务系统的日志文件中数据流转过程进行监控,得到监控结果,并将所述监控结果添加到预先构建的流程合规配置字段表中,得到合规配置字段;
绘制模块,用于根据所述合规配置字段绘制数据流转合规关系图;
可视化模块,用于渲染所述数据流转合规关系图,得到所述业务系统的可视化的数据流程监控图。
9.一种电子设备,其特征在于,所述电子设备包括:
至少一个处理器;以及,
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如权利要求1至7中任一项所述的数据流转的监控方法。
10.一种计算机可读存储介质,包括存储数据区和存储程序区,其特征在于,所述存储数据区存储创建的数据,所述存储程序区存储有计算机程序;其中,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的数据流转的监控方法。
CN202011074899.3A 2020-10-09 2020-10-09 数据流转的监控方法、装置、电子设备及存储介质 Pending CN112199718A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011074899.3A CN112199718A (zh) 2020-10-09 2020-10-09 数据流转的监控方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011074899.3A CN112199718A (zh) 2020-10-09 2020-10-09 数据流转的监控方法、装置、电子设备及存储介质

Publications (1)

Publication Number Publication Date
CN112199718A true CN112199718A (zh) 2021-01-08

Family

ID=74013532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011074899.3A Pending CN112199718A (zh) 2020-10-09 2020-10-09 数据流转的监控方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112199718A (zh)

Similar Documents

Publication Publication Date Title
CN112052370A (zh) 报文生成方法、装置、电子设备及计算机可读存储介质
WO2023056943A1 (zh) 基于物联网规则引擎的终端控制方法、装置、设备及介质
CN112506940B (zh) 数据对账方法、装置、电子设备及存储介质
CN112702228B (zh) 服务限流响应方法、装置、电子设备及可读存储介质
CN111914029A (zh) 基于区块链的医疗数据调用方法、装置、电子设备及介质
CN112217642A (zh) 数据的加密共享方法、装置、电子设备及计算机存储介质
CN113434901A (zh) 数据智能查询方法、装置、电子设备及存储介质
CN112667480A (zh) 业务数据的动态监控方法、装置、电子设备及存储介质
CN112580079A (zh) 权限配置方法、装置、电子设备及可读存储介质
CN112217639B (zh) 数据的加密共享方法、装置、电子设备及计算机存储介质
CN112235409A (zh) 文件上传方法、装置、电子设备及计算机可读存储介质
CN112199718A (zh) 数据流转的监控方法、装置、电子设备及存储介质
CN113127109A (zh) 接口调用方法、装置、电子设备及可读存储介质
CN115480748A (zh) 业务编排方法、设备及存储介质
CN114978649A (zh) 基于大数据的信息安全保护方法、装置、设备及介质
CN114911479A (zh) 基于配置化的界面生成方法、装置、设备及存储介质
CN113377857A (zh) 数据分发方法、装置、电子设备及可读存储介质
CN112667244A (zh) 数据校验方法、装置、电子设备及计算机可读存储介质
CN111859452A (zh) 页面信息校验方法、装置、设备及计算机可读存储介质
CN113326421B (zh) 记录载体的数据识别方法、装置、电子设备及存储介质
CN113703995B (zh) 前后端数据交互方法、装置、电子设备及存储介质
CN116450465B (zh) 数据处理方法、装置、设备及介质
CN114978991B (zh) 路由分发方法、装置、电子设备及计算机可读存储介质
CN116795887A (zh) 实时日志分析告警方法、装置、设备及存储介质
CN113901782A (zh) 投诉工单智能落单方法、装置、设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination