CN107958158A - 一种大数据平台的动态数据脱敏方法及系统 - Google Patents
一种大数据平台的动态数据脱敏方法及系统 Download PDFInfo
- Publication number
- CN107958158A CN107958158A CN201711023700.2A CN201711023700A CN107958158A CN 107958158 A CN107958158 A CN 107958158A CN 201711023700 A CN201711023700 A CN 201711023700A CN 107958158 A CN107958158 A CN 107958158A
- Authority
- CN
- China
- Prior art keywords
- data
- desensitization
- sensitive
- platform
- big data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000586 desensitisation Methods 0.000 title claims abstract description 62
- 238000000034 method Methods 0.000 title claims abstract description 42
- 238000003860 storage Methods 0.000 claims description 17
- 230000005611 electricity Effects 0.000 claims description 13
- 238000013500 data storage Methods 0.000 claims description 9
- 230000006870 function Effects 0.000 claims description 9
- 238000007726 management method Methods 0.000 claims description 9
- 241001269238 Data Species 0.000 claims description 7
- 238000005516 engineering process Methods 0.000 claims description 7
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000010276 construction Methods 0.000 claims description 6
- 238000009826 distribution Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 6
- 238000001514 detection method Methods 0.000 claims description 5
- 238000012545 processing Methods 0.000 claims description 5
- 238000013075 data extraction Methods 0.000 claims description 4
- 239000000203 mixture Substances 0.000 claims description 4
- 206010000117 Abnormal behaviour Diseases 0.000 claims description 3
- 238000013459 approach Methods 0.000 claims description 3
- 238000007405 data analysis Methods 0.000 claims description 3
- 238000013523 data management Methods 0.000 claims description 3
- 238000004519 manufacturing process Methods 0.000 claims description 3
- 239000000463 material Substances 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 230000035945 sensitivity Effects 0.000 claims description 3
- 230000007547 defect Effects 0.000 abstract description 2
- 238000006073 displacement reaction Methods 0.000 abstract description 2
- 238000012360 testing method Methods 0.000 abstract description 2
- 238000011161 development Methods 0.000 description 5
- 230000008859 change Effects 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000014759 maintenance of location Effects 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 206010011968 Decreased immune responsiveness Diseases 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 238000009412 basement excavation Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/2107—File encryption
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Bioethics (AREA)
- Software Systems (AREA)
- Computer Security & Cryptography (AREA)
- Computer Hardware Design (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Data Mining & Analysis (AREA)
- Storage Device Security (AREA)
Abstract
本发明属于电力信息大数据动态脱敏领域,特别涉及一种大数据平台的动态数据脱敏方法及系统,通过利用户权限控制策略、数据置换加密方式及敏感字检查方式相结合,从数据加密方面解决大数据平台在数据安全方面的缺陷,提升了大数据平台的安全性,填补大数据平台数据安全防护方面的空缺,有效降低大数据安全管控方面的风险。
Description
技术领域
本发明属于电力信息大数据动态脱敏领域,特别涉及一种大数据平台的动态数据脱敏方法及系统。
背景技术
自国务院发布《关于促进大数据发展的行动纲要》以来,大数据在我国的发展与应用上升到国家战略层面,随着国家大数据战略的推进和大数据应用的逐步深化,电力大数据的发展已进入全新阶段。全球诸多国家政府以及国际组织都认识到了大数据在各个领域的重要价值,大数据正在成为各领域新一轮竞争的重要发力点,随着大数据时代的到来,大数据商业价值的挖掘,用户的精准定位,大数据中蕴藏的巨大商业价值被逐步挖掘出来,但是同时也带来了巨大的挑战—数据信息安全。电力数据信息作为“克强指数”的一项重要,在宏观调控、社会保障等方面的决策中起着及其重要的作用,因此电力数据的安全也备受关注。
大数据平台作为支撑国家电网公司信息化建设的重要支撑平台,存储了大量的电网结构化、非结构化、半结构化数据,为了降低数据在存储、传输及使用等环节造成数据泄露的风险,亟须出现一种安全、可靠、快速的数据脱敏方法。
我国现阶段国家电网系统主要采用的是Hadoop生态系统作为大数据分布式系统基础架构,Hadoop生态系统的大数据平台随着企业的不断采用及开源组织的持续的优化、增强,已逐渐成为大数据平台建设的标准产品。然而Hadoop最初的设计并未考虑其安全性,这些平台专注于发展数据处理能力,忽视了其他能力的发展,但Hadoop生态系统作为一个分布式系统,承载了丰富的应用,集中了海量的数据,如何管理和保护这些数据充满了挑战,当前市场上,大数据平台在数据本身的安全管控方面普遍存在严重缺失和较大的漏洞。
从企业内部来说,大数据平台的安全管控能力缺失,使得平台在数据存储、处理以及使用等各环节造成数据泄露的风险较大,安全风险面广,且缺乏有效的处理机制;另一方面,企业敏感数据的所有权和使用权缺乏明确界定和管理,可能造成用户隐私信息的泄露和企业内部数据的泄露,直接造成企业声誉和经济的双重损失。
本方法针对大数据敏感数据信息,通过对敏感数据的模糊化,确保敏感数据信息安全可靠,保证大数据平台安全的建设,填补大数据平台数据安全防护方面的空缺,有效降低大数据安全管控方面的风险。
发明内容
本发明通过利用户权限控制策略、数据置换加密方式及敏感字检查方式相结合,从数据加密方面解决大数据平台在数据安全方面的缺陷,提升了大数据平台的安全性,填补大数据平台数据安全防护方面的空缺,有效降低大数据安全管控方面的风险;本发明一种大数据平台的动态数据脱敏方法,其步骤如下:
步骤1获取业务数据通过各业务应用系统通过数据采集设备、实际业务流程、窗口录入、接口数据传入等方式获取各业务线得业务数据、外部数据等;
步骤2:抽取业务数据通过ETL数据抽取工具、大数据平台接口组件等数据抽取工具根据各类数据特点和数据产生的时效性等将各业务系统的结构化、非结构化、海量等数据抽取至大数据平台;
步骤3:存储业务数据结合各类数据特点和大数据平台的存储特点,通过mysql、prosgresql等关系性数据库、文件文件存储等方式存储各位业务数据;
步骤4:敏感数据判断在业务应用调用各类数据时,基于数据脱敏的配置方法,根据业务应用使用者所具备的数据查看权限和数据敏感程度,进行敏感数据脱敏判断,如果使用者权限较低或者数据敏感级别较高,则触发数据脱敏处理,如果使用者权限较高或者数据敏感级别较低,未触发数据脱密进程,则直接为业务使用者展示数据;
步骤5:根据信息规则库的脱敏方法,利用随机函数进行随机匹配,对需要脱敏的数据进行数据脱敏;
步骤6:将脱敏后的数据向使用者展示;
上述一种大数据平台的动态数据脱敏方法,步骤4判断敏感数据通过设置敏感数据配置方法,平台自动识别敏感数据,发现敏感数据后产生报警,保障数据在产生阶段安全,敏感数据发现功能包括:信息规则库建立、关系型数据检测、敏感字段、内容描述四个部分;
上述一种大数据平台的动态数据脱敏方法,步骤5数据脱敏针对Hadoop平台Hive、Hbase大数据存储组件结合用户权限提供动态数据脱敏功能,保障敏感数据访问安全,同时基于大数据安全分析技术,发现敏感数据访问的异常行为,并提供敏感数据视图,实现全局化数据管理和对各种类别敏感数据脱敏的精细化管理;通过数据脱敏及模糊化功能模块在数据库层面对数据进行屏蔽、加密、隐藏、审计或封锁访问途径的方式,该模块作为一个网关形式部署,所有需要进行敏感数据动态脱敏的应用系统需通过该产品实现对数据库的访问;
本发明提出的一种大数据平台的动态数据脱敏系统,由数据源模块、存储模块、计算模块、脱敏模块、应用模块组成,其连接方式为顺序连接;
数据源模块主要包括用电采集系统和营销业务应用系统的配变负荷数据、配电变压器所属区域数据、设备信息、客户信息数据、电流电压等数据信息;
存储模块采用关系数数据库、分布式文件系统、分布式在线数据库等存储技术,提供关系型数据存储、分布式文件存储等数据存储能力,同时提供统一存储访问接口,提高数据存储低成本的横向扩展能力,提高在高并发条件下的快速数据访问响应能力、满足海量数据实时与准实时存储需求;
计算模块提供批量计量、流计算等数据处理技术,并支撑SQL查询,满足不同时效性计算需求。批量计算支持大批量数据离线分析,如历史数据报表分析;流计算支持实时处理,如用电数据实时处理、预警;同时提供类似SQL的查询分析技术,将查询语句转译为并行的分布式计算任务;
脱敏模块依据数据库用户名、IP、客户端工具类型、访问时间,甚至业务用户身份等多重身份特征进行访问控制,对生产数据库中返回的数据可以进行放行、屏蔽、隐藏、返回行控制等多种脱敏方法;
应用模块为电力各业务条线提供按需的应用服务,包括:电量电费应用、智能巡检应用、业务报装应用、物资到货应用、人员分析应用、基建应用、综合计划应用等;
与现有技术相比有益效果:本方法针对大数据敏感数据信息,设计并落实敏感数据安全解决方案,实现敏感数据的模糊化,确保敏感数据信息安全可靠,通过大数据平台安全方案的建设,填补大数据平台数据安全防护方面的空缺,有效降低大数据安全管控方面的风险。
附图说明
图1大数据平台脱敏架构图
图2大数据平台数据脱敏流程图
图3大数据脱敏框架构图
图4敏感词校验模块图
具体的实施方式
下面结合附图对本发明的具体实施方式作进一步的详细说明:
本发明一种大数据平台的动态数据脱敏方法,其步骤如下:
步骤1获取业务数据通过各业务应用系统通过数据采集设备、实际业务流程、窗口录入、接口数据传入等方式获取各业务线得业务数据、外部数据等;
步骤2:抽取业务数据通过ETL数据抽取工具、大数据平台接口组件等数据抽取工具根据各类数据特点和数据产生的时效性等将各业务系统的结构化、非结构化、海量等数据抽取至大数据平台;
步骤3:存储业务数据结合各类数据特点和大数据平台的存储特点,通过mysql、prosgresql等关系性数据库、文件文件存储等方式存储各位业务数据;
步骤4:敏感数据判断在业务应用调用各类数据时,基于数据脱敏的配置方法,根据业务应用使用者所具备的数据查看权限和数据敏感程度,进行敏感数据脱敏判断,如果使用者权限较低或者数据敏感级别较高,则触发数据脱敏处理,如果使用者权限较高或者数据敏感级别较低,未触发数据脱密进程,则直接为业务使用者展示数据;
步骤5:根据信息规则库的脱敏方法,利用随机函数进行随机匹配,对需要脱敏的数据进行数据脱敏,数字类替换:每一位数据随机替换成0~9中间的任意数字;字母类替换:每一位字母随机替换成a~Z中的任意一个字母;中文类替换:最后一个中文前的所有中文,全部替换为”*”;
步骤6:将脱敏后的数据向使用者展示;
上述一种大数据平台的动态数据脱敏方法,步骤4判断敏感数据通过设置敏感数据配置方法,平台自动识别敏感数据,发现敏感数据后产生报警,保障数据在产生阶段安全,敏感数据发现功能包括:信息规则库建立、关系型数据检测、敏感字段、内容描述四个部分;敏感数据配置方法为数据使用策略,超级管理员可以查看所有不加密数据;管理员可以查看管理范围不机密的数据;一级用户部分关键数据加密;二级用户所有数据加密;信息规则库建立:配置所有检索二维表的信息;例如,检索用户表的行业字段信息,检索高危用户表的全部字段信息等;关系性数据检测:由于对二维表中存储的内容进行敏感信息检索;敏感字段:用于存储要检索的敏感文字,例如:机密、核心、可研、价格、总额、会议、议程等;内容描述:由于描述敏感数据发现的结果,例如:在XX表的xxx字段发现敏感信息“机密”,建议对该字段进行加密;
上述一种大数据平台的动态数据脱敏方法,步骤5数据脱敏针对Hadoop平台Hive、Hbase大数据存储组件结合用户权限提供动态数据脱敏功能,保障敏感数据访问安全,同时基于大数据安全分析技术,发现敏感数据访问的异常行为,并提供敏感数据视图,实现全局化数据管理和对各种类别敏感数据脱敏的精细化管理;通过数据脱敏及模糊化功能模块在数据库层面对数据进行屏蔽、加密、隐藏、审计或封锁访问途径的方式,该模块作为一个网关形式部署,所有需要进行敏感数据动态脱敏的应用系统需通过该产品实现对数据库的访问;通过定期或手动会扫描存贮表中的数据信息,与信息库中某表字段是否加密进行对比,如果该字段中有敏感信息,且未在信息库中对某表字段进行加密,则为异常;数据视图是对异常信息的显示,可以通过表格的形式显示;发现敏感数据后,管理人员需在信息库中配置某表字段的加密信息;
下图表为加密前加密后对比:
序号 | 开始时间 | 部门编码 | 受理渠道 | 受理业务类型 | 受理子类型 | 受理量 |
1 | 20070201 | 219B02 | 01 | 003 | 06 | 16 |
2 | 20070201 | 219B02 | 01 | 003 | 99 | 8 |
3 | 20070201 | 219B02 | 01 | 004 | 999 | 3 |
4 | 20070201 | 219B03 | 01 | 003 | 02 | 21 |
5 | 20070201 | 219B03 | 01 | 003 | 05 | 94 |
6 | 20070201 | 219B03 | 01 | 003 | 99 | 8 |
随机生成的加密映射关系(原码-->加密码):0-->9,1-->7,2->7,3-->4,4-->5,5->1,6-->3,8-->5,9->6,B-->C
序号 | 开始时间 | 部门编码(加密) | 受理渠道(加密) | 受理业务类型(加密) | 受理子类型(加密) | 受理量(加密) |
1 | 20070201 | 776C97 | 97 | 994 | 93 | 73 |
2 | 20070201 | 776C97 | 97 | 994 | 66 | 5 |
3 | 20070201 | 776C97 | 97 | 995 | 666 | 4 |
4 | 20070201 | 776C94 | 97 | 994 | 97 | 77 |
5 | 20070201 | 776C94 | 97 | 994 | 91 | 65 |
6 | 20070201 | 776C94 | 97 | 994 | 66 | 5 |
本发明提出的一种大数据平台的动态数据脱敏系统,由数据源模块、存储模块、计算模块、脱敏模块、应用模块组成,其连接方式为顺序连接;
数据源模块主要包括用电采集系统和营销业务应用系统的配变负荷数据、配电变压器所属区域数据、设备信息、客户信息数据、电流电压等数据信息;
存储模块采用关系数数据库、分布式文件系统、分布式在线数据库等存储技术,提供关系型数据存储、分布式文件存储等数据存储能力,同时提供统一存储访问接口,提高数据存储低成本的横向扩展能力,提高在高并发条件下的快速数据访问响应能力、满足海量数据实时与准实时存储需求;
计算模块提供批量计量、流计算等数据处理技术,并支撑SQL查询,满足不同时效性计算需求。批量计算支持大批量数据离线分析,如历史数据报表分析;流计算支持实时处理,如用电数据实时处理、预警;同时提供类似SQL的查询分析技术,将查询语句转译为并行的分布式计算任务;
脱敏模块依据数据库用户名、IP、客户端工具类型、访问时间,甚至业务用户身份等多重身份特征进行访问控制,对生产数据库中返回的数据可以进行放行、屏蔽、隐藏、返回行控制等多种脱敏方法;
应用模块为电力各业务条线提供按需的应用服务,包括:电量电费应用、智能巡检应用、业务报装应用、物资到货应用、人员分析应用、基建应用、综合计划应用等。
Claims (8)
1.本发明一种大数据平台的动态数据脱敏方法及系统,其方法步骤如下:步骤1获取业务数据通过各业务应用系统通过数据采集设备、实际业务流程、窗口录入、接口数据传入等方式获取各业务线得业务数据、外部数据等;步骤2:抽取业务数据通过ETL数据抽取工具、大数据平台接口组件等数据抽取工具根据各类数据特点和数据产生的时效性等将各业务系统的结构化、非结构化、海量等数据抽取至大数据平台;步骤3:存储业务数据结合各类数据特点和大数据平台的存储特点,通过mysql、prosgresql等关系性数据库、文件文件存储等方式存储各位业务数据;步骤4:敏感数据判断在业务应用调用各类数据时,基于数据脱敏的配置方法,根据业务应用使用者所具备的数据查看权限和数据敏感程度,进行敏感数据脱敏判断,如果使用者权限较低或者数据敏感级别较高,则触发数据脱敏处理,如果使用者权限较高或者数据敏感级别较低,未触发数据脱密进程,则直接为业务使用者展示数据;步骤5:根据信息规则库的脱敏方法,利用随机函数进行随机匹配,对需要脱敏的数据进行数据脱敏;步骤6:将脱敏后的数据向使用者展示;一种大数据平台的动态数据脱敏系统,由数据源模块、存储模块、计算模块、脱敏模块、应用模块组成,其连接方式为顺序连接。
2.根据权利要求1中所述,一种大数据平台的动态数据脱敏方法,步骤4判断敏感数据通过设置敏感数据配置方法,平台自动识别敏感数据,发现敏感数据后产生报警,保障数据在产生阶段安全,敏感数据发现功能包括:信息规则库建立、关系型数据检测、敏感字段、内容描述四个部分。
3.根据权利要求1所述,一种大数据平台的动态数据脱敏方法,步骤5数据脱敏针对Hadoop平台Hive、Hbase大数据存储组件结合用户权限提供动态数据脱敏功能,保障敏感数据访问安全,同时基于大数据安全分析技术,发现敏感数据访问的异常行为,并提供敏感数据视图,实现全局化数据管理和对各种类别敏感数据脱敏的精细化管理;通过数据脱敏及模糊化功能模块在数据库层面对数据进行屏蔽、加密、隐藏、审计或封锁访问途径的方式,该模块作为一个网关形式部署,所有需要进行敏感数据动态脱敏的应用系统需通过该产品实现对数据库的访问。
4.根据权利要求1所述,一种大数据平台的动态数据脱敏系统,其特征在于,数据源模块包括用电采集系统和营销业务应用系统的配变负荷数据、配电变压器所属区域数据、设备信息、客户信息数据、电流电压数据信息。
5.根据权利要求1所述,一种大数据平台的动态数据脱敏系统,其特征在于,存储模块采用关系数数据库、分布式文件系统、分布式在线数据库等存储技术,提供关系型数据存储、分布式文件存储数据存储能力,同时提供统一存储访问接口。
6.根据权利要求1所述,一种大数据平台的动态数据脱敏系统,其特征在于,计算模块提供批量计量、流计算等数据处理技术,并支撑SQL查询,满足不同时效性计算需求;批量计算支持大批量数据离线分析,如历史数据报表分析;流计算支持实时处理,如用电数据实时处理、预警;同时提供类似SQL的查询分析技术,将查询语句转译为并行的分布式计算任务。
7.根据权利要求1所述,一种大数据平台的动态数据脱敏系统,其特征在于,脱敏模块依据数据库用户名、IP、客户端工具类型、访问时间,甚至业务用户身份等多重身份特征进行访问控制,对生产数据库中返回的数据可以进行放行、屏蔽、隐藏、返回行控制等多种脱敏方法。
8.根据权利要求1所述,一种大数据平台的动态数据脱敏系统,其特征在于,应用模块为电力各业务条线提供按需的应用服务,包括:电量电费应用、智能巡检应用、业务报装应用、物资到货应用、人员分析应用、基建应用、综合计划应用。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711023700.2A CN107958158A (zh) | 2017-10-27 | 2017-10-27 | 一种大数据平台的动态数据脱敏方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711023700.2A CN107958158A (zh) | 2017-10-27 | 2017-10-27 | 一种大数据平台的动态数据脱敏方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107958158A true CN107958158A (zh) | 2018-04-24 |
Family
ID=61964101
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711023700.2A Pending CN107958158A (zh) | 2017-10-27 | 2017-10-27 | 一种大数据平台的动态数据脱敏方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107958158A (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108537062A (zh) * | 2018-04-24 | 2018-09-14 | 山东华软金盾软件股份有限公司 | 一种数据库数据动态加密的方法 |
CN109117654A (zh) * | 2018-08-21 | 2019-01-01 | 浙江大数据交易中心有限公司 | 一种大数据确权方法及系统 |
CN109284631A (zh) * | 2018-10-26 | 2019-01-29 | 中国电子科技网络信息安全有限公司 | 一种基于大数据的文档脱敏系统及方法 |
CN109460676A (zh) * | 2018-10-30 | 2019-03-12 | 全球能源互联网研究院有限公司 | 一种混合数据的脱敏方法、脱敏装置及脱敏设备 |
CN109766368A (zh) * | 2018-11-14 | 2019-05-17 | 国云科技股份有限公司 | 一种基于Hive的数据查询多类型视图产出系统及方法 |
CN109918917A (zh) * | 2019-03-19 | 2019-06-21 | 北京智游网安科技有限公司 | 防止h5源码泄漏的方法、计算机设备和存储介质 |
CN110197083A (zh) * | 2019-06-05 | 2019-09-03 | 深圳市优网科技有限公司 | 敏感数据脱敏系统及处理方法 |
CN110399733A (zh) * | 2019-03-18 | 2019-11-01 | 国网安徽省电力有限公司黄山供电公司 | 一种针对结构化数据的脱敏平台 |
CN110443048A (zh) * | 2019-07-04 | 2019-11-12 | 广州海颐信息安全技术有限公司 | 数据中心查数系统 |
WO2021051612A1 (zh) * | 2019-09-19 | 2021-03-25 | 平安科技(深圳)有限公司 | 数据授权脱敏自动化方法、系统、装置及存储介质 |
CN113158233A (zh) * | 2021-03-29 | 2021-07-23 | 重庆首亨软件股份有限公司 | 数据预处理方法、装置及计算机存储介质 |
CN116070248A (zh) * | 2023-03-07 | 2023-05-05 | 国网冀北电力有限公司 | 一种用于保证电力数据安全的数据处理系统及方法 |
CN116881687A (zh) * | 2023-06-25 | 2023-10-13 | 国网冀北电力有限公司信息通信分公司 | 一种基于特征提取的电网敏感数据识别方法及装置 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150026823A1 (en) * | 2013-03-15 | 2015-01-22 | Dataguise, Inc. | Method and system for entitlement setting, mapping, and monitoring in big data stores |
CN104660578A (zh) * | 2014-04-22 | 2015-05-27 | 董唯元 | 一种实现数据安全存储及数据访问控制的系统及其方法 |
CN104820670A (zh) * | 2015-03-13 | 2015-08-05 | 国家电网公司 | 一种电力信息大数据的采集和存储方法 |
CN105553940A (zh) * | 2015-12-09 | 2016-05-04 | 北京中科云集科技有限公司 | 一种基于大数据处理平台的安全防护方法 |
CN106203170A (zh) * | 2016-07-19 | 2016-12-07 | 北京同余科技有限公司 | 基于角色的数据库动态脱敏服务方法和系统 |
CN106529329A (zh) * | 2016-10-11 | 2017-03-22 | 中国电子科技网络信息安全有限公司 | 一种用于大数据的脱敏系统及脱敏方法 |
CN106548085A (zh) * | 2015-09-17 | 2017-03-29 | 中国移动通信集团甘肃有限公司 | 一种数据的处理方法及装置 |
CN106599713A (zh) * | 2016-11-11 | 2017-04-26 | 中国电子科技网络信息安全有限公司 | 一种基于大数据的数据库脱敏系统及方法 |
CN106649587A (zh) * | 2016-11-17 | 2017-05-10 | 国家电网公司 | 一种基于大数据信息系统的高安全性脱敏方法 |
CN107145799A (zh) * | 2017-05-04 | 2017-09-08 | 山东浪潮云服务信息科技有限公司 | 一种数据脱敏方法及装置 |
-
2017
- 2017-10-27 CN CN201711023700.2A patent/CN107958158A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20150026823A1 (en) * | 2013-03-15 | 2015-01-22 | Dataguise, Inc. | Method and system for entitlement setting, mapping, and monitoring in big data stores |
CN104660578A (zh) * | 2014-04-22 | 2015-05-27 | 董唯元 | 一种实现数据安全存储及数据访问控制的系统及其方法 |
CN104820670A (zh) * | 2015-03-13 | 2015-08-05 | 国家电网公司 | 一种电力信息大数据的采集和存储方法 |
CN106548085A (zh) * | 2015-09-17 | 2017-03-29 | 中国移动通信集团甘肃有限公司 | 一种数据的处理方法及装置 |
CN105553940A (zh) * | 2015-12-09 | 2016-05-04 | 北京中科云集科技有限公司 | 一种基于大数据处理平台的安全防护方法 |
CN106203170A (zh) * | 2016-07-19 | 2016-12-07 | 北京同余科技有限公司 | 基于角色的数据库动态脱敏服务方法和系统 |
CN106529329A (zh) * | 2016-10-11 | 2017-03-22 | 中国电子科技网络信息安全有限公司 | 一种用于大数据的脱敏系统及脱敏方法 |
CN106599713A (zh) * | 2016-11-11 | 2017-04-26 | 中国电子科技网络信息安全有限公司 | 一种基于大数据的数据库脱敏系统及方法 |
CN106649587A (zh) * | 2016-11-17 | 2017-05-10 | 国家电网公司 | 一种基于大数据信息系统的高安全性脱敏方法 |
CN107145799A (zh) * | 2017-05-04 | 2017-09-08 | 山东浪潮云服务信息科技有限公司 | 一种数据脱敏方法及装置 |
Non-Patent Citations (2)
Title |
---|
周胜利等: "大数据环境下电信运营商数据安全保护方案", 《电信科学》 * |
陈天莹等: "大数据环境下的智能数据脱敏系统", 《通信技术》 * |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108537062B (zh) * | 2018-04-24 | 2022-03-22 | 山东华软金盾软件股份有限公司 | 一种数据库数据动态加密的方法 |
CN108537062A (zh) * | 2018-04-24 | 2018-09-14 | 山东华软金盾软件股份有限公司 | 一种数据库数据动态加密的方法 |
CN109117654A (zh) * | 2018-08-21 | 2019-01-01 | 浙江大数据交易中心有限公司 | 一种大数据确权方法及系统 |
CN109284631A (zh) * | 2018-10-26 | 2019-01-29 | 中国电子科技网络信息安全有限公司 | 一种基于大数据的文档脱敏系统及方法 |
CN109460676A (zh) * | 2018-10-30 | 2019-03-12 | 全球能源互联网研究院有限公司 | 一种混合数据的脱敏方法、脱敏装置及脱敏设备 |
CN109766368A (zh) * | 2018-11-14 | 2019-05-17 | 国云科技股份有限公司 | 一种基于Hive的数据查询多类型视图产出系统及方法 |
CN109766368B (zh) * | 2018-11-14 | 2021-08-27 | 国云科技股份有限公司 | 一种基于Hive的数据查询多类型视图产出系统及方法 |
CN110399733A (zh) * | 2019-03-18 | 2019-11-01 | 国网安徽省电力有限公司黄山供电公司 | 一种针对结构化数据的脱敏平台 |
CN109918917A (zh) * | 2019-03-19 | 2019-06-21 | 北京智游网安科技有限公司 | 防止h5源码泄漏的方法、计算机设备和存储介质 |
CN110197083A (zh) * | 2019-06-05 | 2019-09-03 | 深圳市优网科技有限公司 | 敏感数据脱敏系统及处理方法 |
CN110443048A (zh) * | 2019-07-04 | 2019-11-12 | 广州海颐信息安全技术有限公司 | 数据中心查数系统 |
WO2021051612A1 (zh) * | 2019-09-19 | 2021-03-25 | 平安科技(深圳)有限公司 | 数据授权脱敏自动化方法、系统、装置及存储介质 |
CN113158233A (zh) * | 2021-03-29 | 2021-07-23 | 重庆首亨软件股份有限公司 | 数据预处理方法、装置及计算机存储介质 |
CN116070248A (zh) * | 2023-03-07 | 2023-05-05 | 国网冀北电力有限公司 | 一种用于保证电力数据安全的数据处理系统及方法 |
CN116881687A (zh) * | 2023-06-25 | 2023-10-13 | 国网冀北电力有限公司信息通信分公司 | 一种基于特征提取的电网敏感数据识别方法及装置 |
CN116881687B (zh) * | 2023-06-25 | 2024-04-05 | 国网冀北电力有限公司信息通信分公司 | 一种基于特征提取的电网敏感数据识别方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107958158A (zh) | 一种大数据平台的动态数据脱敏方法及系统 | |
Xiao et al. | Electricity theft detection in smart grid using random matrix theory | |
CN111199048B (zh) | 基于具有生命周期的容器的大数据分级脱敏方法和系统 | |
CN106713347B (zh) | 一种电力移动应用越权访问漏洞检测方法 | |
CN108345985A (zh) | 一种配电网数据质量评估方法及系统 | |
CN103391185A (zh) | 一种轨道交通监测数据的云安全存储和处理方法及系统 | |
CN110457529B (zh) | 岗位数据处理方法、装置、计算机设备及存储介质 | |
Abe et al. | Natural disasters and Asia: introduction | |
Pérez-Morón | Eleven years of cyberattacks on Chinese supply chains in an era of cyber warfare, a review and future research agenda | |
CN111046415A (zh) | 一种涉密文件的智能分级预警系统及其方法 | |
CN106022625A (zh) | 一种猪场信息管理系统和方法 | |
Zheng et al. | Cyber security risk assessment for industrial automation platform | |
CN109784786A (zh) | 一种重要产品质量安全电子溯源数据服务系统 | |
CN106845946A (zh) | 一种财务数据访问分析系统及使用方法 | |
Chen et al. | Quantifying solar superactive regions with vector magnetic field observations | |
Kanhere et al. | A methodology for outlier detection in audit logs for financial transactions | |
Lai et al. | Understanding China's resumption of work and production during the critical period of COVlD‐19 based on multi‐source data | |
Xu et al. | [Retracted] Hazard Trend Identification Model Based on Statistical Analysis of Abnormal Power Generation Behavior Data | |
Tse et al. | Risks facing smart city information security in Hangzhou | |
Qi et al. | Application of network security situational awareness in power information system security | |
CN114021171A (zh) | 一种基于大数据的数据安全防护方法 | |
CN105450672B (zh) | 一种财务数据的内部网络安全传输方法与系统 | |
Gulzira et al. | The audit method of enterprise's Information security | |
Masri et al. | A Recourse Stochastic Goal Programming Approach for the Multi‐objective Stochastic Vehicle Routing Problem | |
Zhou et al. | Design of intelligent power material storage information management system based on blockchain technology |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180424 |