CN106909811A - 用户标识处理的方法和装置 - Google Patents
用户标识处理的方法和装置 Download PDFInfo
- Publication number
- CN106909811A CN106909811A CN201510980369.8A CN201510980369A CN106909811A CN 106909811 A CN106909811 A CN 106909811A CN 201510980369 A CN201510980369 A CN 201510980369A CN 106909811 A CN106909811 A CN 106909811A
- Authority
- CN
- China
- Prior art keywords
- data
- field
- feature
- data corresponding
- successful
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6227—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database where protection concerns the structure of data, e.g. records, types, queries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/22—Indexing; Data structures therefor; Storage structures
- G06F16/2282—Tablespace storage structures; Management thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
- G06F21/6218—Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
- G06F21/6245—Protecting personal data, e.g. for financial or medical purposes
- G06F21/6254—Protecting personal data, e.g. for financial or medical purposes by anonymising data, e.g. decorrelating personal data from the owner's identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
- G06N5/046—Forward inferencing; Production systems
- G06N5/047—Pattern matching networks; Rete networks
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/60—General implementation details not specific to a particular type of compression
- H03M7/6047—Power optimization with respect to the encoder, decoder, storage or transmission
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L61/00—Network arrangements, protocols or services for addressing or naming
- H04L61/30—Managing network names, e.g. use of aliases or nicknames
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
- H04L63/0407—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the identity of one or more communicating identities is hidden
- H04L63/0421—Anonymous communication, i.e. the party's identifiers are hidden from the other party or parties, e.g. using an anonymizer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/02—Protecting privacy or anonymity, e.g. protecting personally identifiable information [PII]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/42—Anonymization, e.g. involving pseudonyms
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Data Mining & Analysis (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明涉及一种用户标识处理的方法和装置。所述方法包括以下步骤:扫描源数据表,获取所述源数据表的各字段所对应的数据的特征;将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则所述字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则所述字段所对应的数据不为用户标识;将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。上述用户标识处理的方法和装置,提高了用户标识被识别的准确率和效率,让第三方平台获取用户标识,提高了用户标识的安全性。
Description
技术领域
本发明涉及数据识别领域,特别是涉及一种用户标识处理的方法和装置。
背景技术
随着计算机和互联网技术的发展,越来越多的用户享受着互联网技术所带来的便利,同时也产生了海量的数据。海量的数据中涉及到很多用户标识信息,该用户标识信息关乎用户的隐私,需要对用户标识信息进行保护。然而,这些用户标识信息涉及大量的表,表结构复杂,且存储达到百TB(太字节),无法做到人工识别覆盖整体数据。传统的用户标识识别方法主要是通过模糊搜索识别字段,或者通过限制用户标识数据值范围,或者基于全量注册数据进行匹配,然而,采用模糊搜索匹配出现错误率较高,通过数据值范围匹配,因数据范围变化较大,无法准确捕捉正确的用户标识,采用全量注册数据进行匹配,效率低,且用户标识安全性低。
发明内容
基于此,有必要针对传统的用户标识识别方法识别准确率低且效率低的问题,提供一种用户标识处理的方法,能提高识别的准确率和效率,且能提高用户标识安全性。
此外,还有必要提供一种用户标识处理的装置,能提高识别的准确率和效率,且能提高用户标识安全性。
一种用户标识处理的方法,包括以下步骤:
扫描源数据表,获取所述源数据表的各字段所对应的数据的特征;
将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则所述字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则所述字段所对应的数据不为用户标识;
将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
一种用户标识处理的装置,包括:
扫描模块,用于扫描源数据表,获取所述源数据表的各字段所对应的数据的特征;
匹配模块,用于将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则所述字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则所述字段所对应的数据不为用户标识;
处理模块,用于将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
上述用户标识处理的方法和装置,通过获取源数据表中各字段所对应的数据的特征,将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若匹配成功,则将该字段所对应的数据转化为第三方用户帐号,若匹配失败,则保持该字段所对应的数据不变,通过用户标识的特征规则进行匹配,提高了用户标识被识别的准确率和效率,且将用户标识转化为第三方用户帐号,不让第三方平台获取用户标识,提高了用户标识的安全性。
附图说明
图1A为一个实施例中终端的内部结构示意图;
图1B为一个实施例中服务器的内部结构示意图;
图2为一个实施例中用户标识处理的方法的流程图;
图3为一个实施例中源数据表的结构形式示意图;
图4为另一个实施例中用户标识处理的方法的流程图;
图5为一个实施例中用户标识处理的装置的结构框图;
图6为另一个实施例中用户标识处理的装置的结构框图;
图7为另一个实施例中用户标识处理的装置的结构框图;
图8为另一个实施例中用户标识处理的装置的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
可以理解,本发明所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本发明的范围的情况下,可以将第一客户端称为第二客户端,且类似地,可将第二客户端称为第一客户端。
图1A为一个实施例中终端的内部结构示意图。如图1A所示,该终端包括通过系统总线连接的处理器、存储介质、内存、网络接口、显示屏和输入装置。其中,终端的存储介质存储有操作系统,还包括一种用户标识处理的装置,该用户标识处理的装置用于实现一种用户标识处理的方法。该处理器用于提供计算和控制能力,支撑整个终端的运行。终端中的内存为存储介质中的用户标识处理的装置的运行提供环境,网络接口用于与服务器进行网络通信,如发送数据请求至服务器,接收服务器返回的数据等。终端的显示屏可以是液晶显示屏或者电子墨水显示屏等,输入装置可以是显示屏上覆盖的触摸层,也可以是终端外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该终端可以是手机、平板电脑或者个人数字助理。本领域技术人员可以理解,图1A中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的终端的限定,具体的终端可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
图1B为一个实施例中服务器的内部结构示意图。如图1B所示,该服务器包括通过系统总线连接的处理器、非易失性存储介质、内存、网络接口、显示屏和输入装置。其中,该服务器的非易失性存储介质存储有操作系统、数据库和用户标识处理的装置,数据库中存储有各种数据和用户标识与第三方用户帐号数据及对应关系,该用户标识处理的装置用于实现适用于服务器的一种用户标识处理的方法。该服务器的处理器用于提供计算和控制能力,支撑整个服务器的运行。该服务器的内存为非易失性存储介质中的用户标识处理的装置的运行提供环境。该服务器的显示屏可以是液晶显示屏或者电子墨水显示屏等,输入装置可以是显示屏上覆盖的触摸层,也可以是终端外壳上设置的按键、轨迹球或触控板,也可以是外接的键盘、触控板或鼠标等。该服务器的网络接口用于据以与外部的终端通过网络连接通信,比如接收终端发送的用户标识请求以及向终端返回第三方用户帐号等。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。本领域技术人员可以理解,图1B中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的服务器的限定,具体的服务器可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
图2为一个实施例中用户标识处理的方法的流程图。如图2所示,一种用户标识处理的方法,可运行于图1中的服务器或终端上,包括以下步骤:
步骤202,扫描源数据表,获取该源数据表的各字段所对应的数据的特征。
具体地,源数据表是指从网络中获取的数据,其一般以表格形式存储。在源数据表中存在一个或多个字段,每个字段表示一种数据,例如序号字段、姓名字段、用户标识字段、性别字段、年龄字段、地址字段等。
图3为一个实施例中源数据表的结构形式示意图。如图3所示,在源数据表首行中包括序号字段、姓名字段、性别字段、用户标识字段、年龄字段、地址字段等。每个字段对应一列。序号字段所对应的数据可为以1开始,自增1的自然数。姓名字段所对应的数据可为各种名称,如王小明、李小白、赵小红等。性别字段所对应的数据可为“男”、“女”和“未知”等。用户标识字段所对应的数据可为符合用户标识规则的数据,如即时通信帐号12345至9999999999等。年龄字段所对应的数据可为0至150等。地址字段所对应的数据可为各个地址。
本实施例中的源数据表可为各网站的用户行为所产生的数据等。
对源数据表中每个字段所对应的数据计算数据的特征。该特征可包括平均值和标准差等。平均值和标准差相对稳定,且组合校验具有较高的可靠性。此外,该特征还可包括最大值和最小值。
步骤204,将各字段所对应的数据的特征与用户标识的特征规则进行匹配。
具体地,预先可根据海量的数据统计得出用户标识的特征规则。该用户标识的特征规则可为均值和标准差在某个范围内。不同的用户标识的特征规则不同,需要根据海量的数据进行统计分析得出对应用户标识的特征规则。
用户标识是用于表示用户身份唯一性的标识。用户标识可为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号等。
将字段所对应的数据的特征与用户标识的特征规则进行匹配,例如用户标识的特征规则是均值在[100000,110000]之间,标准差在[1,2],计算得到的字段所对应的数据的特征,即均值在[100000,110000]之间且标准差在[1,2]之间,则该字段所对应的数据的特征与用户标识的特征规则匹配成功。若计算得到的字段所对应的数据的特征,即均值和标准差中任意一个不在用户标识的特征规则内,则该字段所对应的数据的特征与用户标识的特征规则匹配失败。
步骤206,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则该字段所对应的数据为用户标识,然后执行步骤210。
步骤208,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则该字段所对应的数据不为用户标识,然后执行步骤212。
步骤210,将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户标识。
具体地,第三方用户标识是一个开放用户标识,即openid,是允许用户使用用户标识登录第三方平台,但不会公开用户标识给第三方,为用户标识的开放提供的一种安全的实现方式。预先建立用户标识与第三方用户帐号的映射关系,然后根据用户标识从用户标识与第三方用户帐号的映射关系中查找到对应的第三方用户帐号,将用户标识替换为第三方用户帐号。
步骤212,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
若源数据表中各字段所对应的数据均不为用户标识,则保持源数据表不变。
上述用户标识处理的方法,通过获取源数据表中各字段所对应的数据的特征,将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若匹配成功,则将该字段所对应的数据转化为第三方用户帐号,若匹配失败,则保持该字段所对应的数据不变,通过用户标识的特征规则进行匹配,提高了用户标识被识别的准确率和效率,且将用户标识转化为第三方用户帐号,不让第三方平台获取用户标识,提高了用户标识的安全性。
图4为另一个实施例中用户标识处理的方法的流程图。如图4所示,一种用户标识处理的方法,包括以下步骤:
步骤402,从测试数据中选取用户标识字段的数据作为正样本数据,选取非用户标识字段的数据作为负样本数据。
具体地,测试数据可为海量的网络数据。用户标识是用于表示用户身份唯一性的标识。用户标识可为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号等。
例如用户标识为即时通信帐号,则测试数据可包括即时通信帐号数据和广告曝光数据、商品订单路径数据、网页浏览数据、用户搜索数据等。从测试数据中提取即时通信帐号字段所对应的数据作为正样本数据。随机选取非即时通信帐号字段所对应的数据作为负样本数据,将负样本数据作为参照组。
步骤404,对正样本数据和负样本数据分别进行特征计算。
具体地,对正样本数据和负样本数据分别求取平均值和标准差,还可求取最大值和最小值。将计算得到的正样本数据的特征和负样本数据的特征以字段为行,特征为列的汇总表格。对正样本数据和负样本数据分别进行特征计算可得到用户标识的特征的统计分布状态,进行分析得出分布规则。
步骤406,将正样本数据的特征和负样本数据的特征进行比对,得到该正样本数据的特征规则。
具体地,可将正样本数据的特征和负样本数据的特征进行汇总,通过条形图展示比对,发现两者之间的特征呈现较明显的区别,提炼出用户标识数据的可信范围,然后形成用户标识的特征规则。
步骤408,扫描源数据表,获取该源数据表的各字段所对应的数据的特征。
具体地,源数据表是指从网络中获取的数据,其一般以表格形式存储。在源数据表中存在一个或多个字段,每个字段表示一种数据,例如序号字段、姓名字段、用户标识字段、性别字段、年龄字段、地址字段等。
步骤410,将各字段所对应的数据的特征与用户标识的特征规则进行匹配。
具体地,预先可根据海量的数据统计得出用户标识的特征规则。该用户标识的特征规则可为均值和标准差在某个范围内。不同的用户标识的特征规则不同,需要根据海量的数据进行统计分析得出对应用户标识的特征规则。
用户标识是用于表示用户身份唯一性的标识。用户标识可为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号等。
将字段所对应的数据的特征与用户标识的特征规则进行匹配,例如用户标识的特征规则是均值在[100000,110000]之间,标准差在[1,2],计算得到的字段所对应的数据的特征,即均值在[100000,110000]之间且标准差在[1,2]之间,则该字段所对应的数据的特征与用户标识的特征规则匹配成功。若计算得到的字段所对应的数据的特征,即均值和标准差中任意一个不在用户标识的特征规则内,则该字段所对应的数据的特征与用户标识的特征规则匹配失败。
步骤412,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则该字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则该字段所对应的数据不为用户标识。
步骤414,将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户标识,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变,然后执行步骤418。
具体地,第三方用户标识是一个开放用户标识,即openid,是允许用户使用用户标识登录第三方平台,但不会公开用户标识给第三方,为用户标识的开放提供的一种安全的实现方式。预先建立用户标识与第三方用户帐号的映射关系,然后根据用户标识从用户标识与第三方用户帐号的映射关系中查找到对应的第三方用户帐号,将用户标识替换为第三方用户帐号。
步骤416,源数据表中各字段所对应的数据均不为用户标识,则保持源数据表不变。
步骤418,根据已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据对该用户标识的特征规则进行修正。
具体地,字段所对应的数据与用户标识的特征规则进行匹配的过程中可能存在识别错误或漏识别字段的情况,通过获取已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据,然后根据已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据对该用户标识的特征规则进行修正。例如可分析包含用户标识而未被匹配成功的字段所对应的数据,得到用户标识的命名规则和/或类型等,并添加到用户标识的特征规则中,下次再进行匹配时,则不会被漏掉。对于已匹配成功的字段所对应的数据被认为是识别错误的,可根据该字段所对应的数据的特征对用户标识的特征规则进行修正。
上述用户标识处理的方法,选取用户标识作为正样本数据,非用户标识的数据作为负样本数据,计算正样本数据的特征和负样本数据的特征,比较得出正样本数据的特征规则,可得到较为准确的用户标识的特征规则;通过获取源数据表中各字段所对应的数据的特征,将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若匹配成功,则将该字段所对应的数据转化为第三方用户帐号,若匹配失败,则保持该字段所对应的数据不变,通过用户标识的特征规则进行匹配,提高了用户标识被识别的准确率和效率,且将用户标识转化为第三方用户帐号,不让第三方平台获取用户标识,提高了用户标识的安全性;通过已匹配成功的字段及包含用户标识未被匹配成功的字段所对应的数据对用户标识的特征规则进行修正,可持续完善用户标识的特征规则,提高识别的准确率。
在一个实施例中,上述用户标识处理的方法还包括:在该将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变的步骤之后,获取源数据表中包含用户标识而未被匹配成功的字段所对应的数据;根据该包含用户标识而未被匹配成功的字段所对应的数据对该用户标识的特征规则进行修正。
具体地,可分析包含用户标识而未被匹配成功的字段所对应的数据,得到用户标识的命名规则和/或类型等,并添加到用户标识的特征规则中,下次再进行匹配时,则不会被漏掉。
下面结合具体的应用场景描述用户标识处理的方法的实现过程。以用户标识处理的方法用于将第三方平台的数据中即时通信帐号进行识别并入库保存。具体过程包括(1)至(5):
(1)从测试数据中选取即时通信帐号字段所对应的数据作为正样本数据,选取非即时通信帐号字段所对应的数据作为负样本数据。
具体地,将即时通信应用的注册数据和第三方平台的用户行为数据作为测试数据。例如即时通信应用QQ的数据包括注册用户数据。第三方平台的用户行为数据如京东网站有5个数据量,包括广告曝光数据、商品订单路径数据、网页浏览数据、用户搜索数据等。从即时通信应用的注册数据和第三方平台的用户行为数据中选取即时通信帐号字段作为正样本数据,在选取非即时通信帐号字段所对应的数据作为负样本数据。
可采用分区抽样统计或全表统计等方式对特征进行统计计算。分区抽样统计是指抽取一部分数据进行统计。全表统计是指对所有数据表进行分析统计。
(2)对正样本数据和负样本数据分别进行特征计算,特征包括平均值和标准差。
具体地,对正样本数据和负样本数据分别求取平均值和标准差。此外,还可求取最大值和最小值。将计算得到的正样本数据的特征和负样本数据的特征以字段为行,特征为列的汇总表格。
(3)将即时通信帐号的特征和非即时通信帐号的特征进行比对,得到即时通信帐号的特征规则。
具体地,可将即时通信帐号的特征和非即时通信帐号的特征进行汇总,通过条形图展示比对,发现两者之间的特征呈现较明显的区别,提炼出即时通信帐号数据的可信范围,然后形成即时通信帐号的特征规则。
(4)扫描第三方平台的源数据表,获取源数据表的各字段所对应的数据的特征,将各字段所对应的数据的特征与即时通信帐号的特征规则进行匹配,若字段所对应的数据的特征与即时通信帐号的特征规则匹配成功,则该字段所对应的数据为即时通信帐号,若字段所对应的数据的特征与即时通信帐号的特征规则匹配失败,则该字段所对应的数据不为即时通信帐号,将源数据表中字段所对应的数据为即时通信帐号的数据转化为第三方用户标识,将源数据表中字段所对应的数据不为即时通信帐号的数据保持数据不变。
具体地,扫描第三方平台的源数据表中的即时通信帐号,根据即时通信帐号与第三方用户帐号的映射关系,将即时通信帐号转化为第三方用户帐号,即openid。然后将完整的数据表入库保存。第三方平台无法直接获取用户标识,只是获取openid,即实现一种安全的帐号开放模式。
在这一过程中,人工只需配置相应的特征规则和需要迁移的数据表清单,然后由大数据平台自动识别和转化,并入库保存,节省人力。
(5)根据已匹配成功的字段所对应的数据和包含即时通信帐号而未被匹配成功的字段所对应的数据对该即时通信帐号的特征规则进行修正。
具体地,对已转化的数据,会记录数据被识别的情况,可包括已有即时通信帐号字段被识别和包含即时通信帐号字段未被识别。根据已有即时通信帐号字段被识别和包含即时通信帐号字段未被识别对即时通信帐号的特征规则进行修正,持续完善以提高识别的准确率。处理包含即时通信帐号而未被匹配成功的字段所对应的数据,得到即时通信帐号的命名规则和/或类型等,并添加到即时通信帐号的特征规则中,下次再进行匹配时,则不会被漏掉。
通过对正负样本数据得出的特征规则做了几轮修正后,对于QQ号码识别准确率达到了94.5%。该即时通信帐号可为QQ号码或微信或其他即时通信帐号等。
需要说明的是,上述具体应用场景描述了即时通信帐号被识别处理的过程,但不限于此,上述用户标识处理的方法还可应用于身份证号码、移动通信标识、支付帐号、电子邮箱等被识别处理。
图5为一个实施例中用户标识处理的装置的结构框图。如图5所示,一种用户标识处理的装置,包括扫描模块510、匹配模块520和处理模块530。其中:
扫描模块510用于扫描源数据表,获取该源数据表的各字段所对应的数据的特征。
具体地,源数据表是指从网络中获取的数据,其一般以表格形式存储。在源数据表中存在一个或多个字段,每个字段表示一种数据,例如序号字段、姓名字段、用户标识字段、性别字段、年龄字段、地址字段等。
匹配模块520用于将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则该字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则该字段所对应的数据不为用户标识。
具体地,预先可根据海量的数据统计得出用户标识的特征规则。该用户标识的特征规则可为均值和标准差在某个范围内。不同的用户标识的特征规则不同,需要根据海量的数据进行统计分析得出对应用户标识的特征规则。
用户标识是用于表示用户身份唯一性的标识。用户标识可为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号等。
本实施例中的源数据表可为各网站的用户行为所产生的数据等。
对源数据表中每个字段所对应的数据计算数据的特征。该特征可包括平均值和标准差等。平均值和标准差相对稳定,且组合校验具有较高的可靠性。此外,该特征还可包括最大值和最小值。
处理模块530用于将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
具体地,第三方用户标识是一个开放用户标识,即openid,是允许用户使用用户标识登录第三方平台,但不会公开用户标识给第三方,为用户标识的开放提供的一种安全的实现方式。预先建立用户标识与第三方用户帐号的映射关系,然后根据用户标识从用户标识与第三方用户帐号的映射关系中查找到对应的第三方用户帐号,将用户标识替换为第三方用户帐号。
若源数据表中各字段所对应的数据均不为用户标识,则保持源数据表不变。
上述用户标识处理的装置,通过获取源数据表中各字段所对应的数据的特征,将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若匹配成功,则将该字段所对应的数据转化为第三方用户帐号,若匹配失败,则保持该字段所对应的数据不变,通过用户标识的特征规则进行匹配,提高了用户标识被识别的准确率和效率,且将用户标识转化为第三方用户帐号,不让第三方平台获取用户标识,提高了用户标识的安全性。
图6为另一个实施例中用户标识处理的装置的结构框图。如图6所示,一种用户标识处理的装置,除了包括扫描模块510、匹配模块520和处理模块530,还包括选取模块540、计算模块550和特征规则提取模块560。其中:
选取模块540用于在扫描源数据表,获取该源数据表的各字段所对应的数据的特征之前,从测试数据中选取用户标识字段的数据作为正样本数据,选取非用户标识字段的数据作为负样本数据。
具体地,测试数据可为海量的网络数据。用户标识是用于表示用户身份唯一性的标识。用户标识可为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号等。
例如用户标识为即时通信帐号,则测试数据可包括即时通信帐号数据和广告曝光数据、商品订单路径数据、网页浏览数据、用户搜索数据等。从测试数据中提取即时通信帐号字段所对应的数据作为正样本数据。随机选取非即时通信帐号字段所对应的数据作为负样本数据,将负样本数据作为参照组。
计算模块550用于对该正样本数据和负样本数据分别进行特征计算。
具体地,对正样本数据和负样本数据分别求取平均值和标准差,还可求取最大值和最小值。将计算得到的正样本数据的特征和负样本数据的特征以字段为行,特征为列的汇总表格。
特征规则提取模块560用于将正样本数据的特征和负样本数据的特征进行比对,得到该正样本数据的特征规则。
具体地,可将正样本数据的特征和负样本数据的特征进行汇总,通过条形图展示比对,发现两者之间的特征呈现较明显的区别,提炼出用户标识数据的可信范围,然后形成用户标识的特征规则。
选取用户标识作为正样本数据,非用户标识的数据作为负样本数据,计算正样本数据的特征和负样本数据的特征,比较得出正样本数据的特征规则,可得到较为准确的用户标识的特征规则。
图7为另一个实施例中用户标识处理的装置的结构框图。如图7所示,一种用户标识处理的装置,除了包括扫描模块510、匹配模块520和处理模块530,还包括第一获取模块570和第一修正模块580。其中:
第一获取模块570用于在该将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变之后,获取源数据表中已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据。
第一修正模块580用于根据已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据对该用户标识的特征规则进行修正。
具体地,可分析包含用户标识而未被匹配成功的字段所对应的数据,得到用户标识的命名规则和/或类型等,并添加到用户标识的特征规则中,下次再进行匹配时,则不会被漏掉。
图8为另一个实施例中用户标识处理的装置的结构框图。如图8所示,一种用户标识处理的装置,除了包括扫描模块510、匹配模块520和处理模块530,还包括第二获取模块590和第二修正模块592。其中:
第二获取模块590用于在该将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变之后,获取源数据表中包含用户标识而未被匹配成功的字段所对应的数据。
第二修正模块592用于根据该包含用户标识而未被匹配成功的字段所对应的数据对该用户标识的特征规则进行修正。
具体地,可分析包含用户标识而未被匹配成功的字段所对应的数据,得到用户标识的命名规则和/或类型等,并添加到用户标识的特征规则中,下次再进行匹配时,则不会被漏掉。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一非易失性计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种用户标识处理的方法,包括以下步骤:
扫描源数据表,获取所述源数据表的各字段所对应的数据的特征;
将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则所述字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则所述字段所对应的数据不为用户标识;
将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
2.根据权利要求1所述的方法,其特征在于,在扫描源数据表,获取所述源数据表的各字段所对应的数据的特征的步骤之前,所述方法还包括:
从测试数据中选取用户标识字段的数据作为正样本数据,选取非用户标识字段的数据作为负样本数据;
对所述正样本数据和负样本数据分别进行特征计算;
将正样本数据的特征和负样本数据的特征进行比对,得到所述正样本数据的特征规则。
3.根据权利要求1所述的方法,其特征在于,在所述将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变的步骤之后,所述方法还包括:
获取源数据表中已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据;
根据已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据对所述用户标识的特征规则进行修正。
4.根据权利要求1所述的方法,其特征在于,在所述将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变的步骤之后,所述方法还包括:
获取源数据表中包含用户标识而未被匹配成功的字段所对应的数据;
根据所述包含用户标识而未被匹配成功的字段所对应的数据对所述用户标识的特征规则进行修正。
5.根据权利要求1所述的方法,其特征在于,所述特征包括平均值和标准差;所述用户标识为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号。
6.一种用户标识处理的装置,其特征在于,包括:
扫描模块,用于扫描源数据表,获取所述源数据表的各字段所对应的数据的特征;
匹配模块,用于将各字段所对应的数据的特征与用户标识的特征规则进行匹配,若字段所对应的数据的特征与用户标识的特征规则匹配成功,则所述字段所对应的数据为用户标识,若字段所对应的数据的特征与用户标识的特征规则匹配失败,则所述字段所对应的数据不为用户标识;
处理模块,用于将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变。
7.根据权利要求6所述的装置,其特征在于,所述装置还包括:
选取模块,用于在扫描源数据表,获取所述源数据表的各字段所对应的数据的特征之前,从测试数据中选取用户标识字段的数据作为正样本数据,选取非用户标识字段的数据作为负样本数据;
计算模块,用于对所述正样本数据和负样本数据分别进行特征计算;
特征规则提取模块,用于将正样本数据的特征和负样本数据的特征进行比对,得到所述正样本数据的特征规则。
8.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第一获取模块,用于在所述将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变之后,获取源数据表中已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据;
第一修正模块,用于根据已匹配成功的字段所对应的数据和包含用户标识而未被匹配成功的字段所对应的数据对所述用户标识的特征规则进行修正。
9.根据权利要求6所述的装置,其特征在于,所述装置还包括:
第二获取模块,用于在所述将源数据表中字段所对应的数据为用户标识的数据转化为第三方用户帐号,将源数据表中字段所对应的数据不为用户标识的数据保持数据不变之后,获取源数据表中包含用户标识而未被匹配成功的字段所对应的数据;
第二修正模块,用于根据所述包含用户标识而未被匹配成功的字段所对应的数据对所述用户标识的特征规则进行修正。
10.根据权利要求6所述的装置,其特征在于,所述特征包括平均值和标准差;所述用户标识为即时通信帐号或移动通信标识或电子邮箱或身份证号码或支付帐号。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510980369.8A CN106909811B (zh) | 2015-12-23 | 2015-12-23 | 用户标识处理的方法和装置 |
PCT/CN2016/082414 WO2017107367A1 (zh) | 2015-12-23 | 2016-05-17 | 用户标识处理的方法、终端和非易失性计算可读存储介质 |
EP16877181.4A EP3396558B1 (en) | 2015-12-23 | 2016-05-17 | Method for user identifier processing, terminal and nonvolatile computer readable storage medium thereof |
US15/667,023 US10878121B2 (en) | 2015-12-23 | 2017-08-02 | Method and device for converting data containing user identity |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510980369.8A CN106909811B (zh) | 2015-12-23 | 2015-12-23 | 用户标识处理的方法和装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106909811A true CN106909811A (zh) | 2017-06-30 |
CN106909811B CN106909811B (zh) | 2020-07-03 |
Family
ID=59088907
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510980369.8A Active CN106909811B (zh) | 2015-12-23 | 2015-12-23 | 用户标识处理的方法和装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10878121B2 (zh) |
EP (1) | EP3396558B1 (zh) |
CN (1) | CN106909811B (zh) |
WO (1) | WO2017107367A1 (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109388675A (zh) * | 2018-10-12 | 2019-02-26 | 平安科技(深圳)有限公司 | 数据分析方法、装置、计算机设备及存储介质 |
CN109961080A (zh) * | 2017-12-26 | 2019-07-02 | 腾讯科技(深圳)有限公司 | 终端识别方法及装置 |
CN110716927A (zh) * | 2019-09-06 | 2020-01-21 | 中国平安财产保险股份有限公司 | 数据修正方法、装置、设备及计算机可读存储介质 |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018117970A1 (en) | 2016-12-21 | 2018-06-28 | Aon Global Operations Ltd (Singapore Branch) | Methods and systems for securely embedding dashboards into a content management system |
US10922306B2 (en) * | 2016-12-21 | 2021-02-16 | Aon Global Operations Plc, Singapore Branch | Systems and methods for automated bulk user registration spanning both a content management system and any software applications embedded therein |
US11537272B2 (en) | 2016-12-21 | 2022-12-27 | Aon Global Operations Se, Singapore Branch | Content management system extensions |
US20180285596A1 (en) * | 2017-03-30 | 2018-10-04 | Cisco Technology, Inc. | System and method for managing sensitive data |
CN109634951B (zh) * | 2018-10-23 | 2023-12-22 | 平安科技(深圳)有限公司 | 大数据采集方法、装置、计算机设备及存储介质 |
CN111581512B (zh) * | 2020-05-08 | 2023-06-02 | 孙颐 | 一种网页访客数量统计方法及装置 |
CN114253951B (zh) * | 2020-09-21 | 2023-09-19 | 腾讯科技(深圳)有限公司 | 数据处理方法、系统及第二服务器 |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020073138A1 (en) * | 2000-12-08 | 2002-06-13 | Gilbert Eric S. | De-identification and linkage of data records |
US20090319588A1 (en) * | 2008-06-24 | 2009-12-24 | Emc Corporation | Generic database sanitizer |
CN102063595A (zh) * | 2005-02-07 | 2011-05-18 | 微软公司 | 通过确定性自然数据的替换扰乱数据结构的方法和系统 |
US20130054650A1 (en) * | 2011-08-23 | 2013-02-28 | John O'Byrne | Automatic detection of columns to be obfuscated in database schemas |
CN104184654A (zh) * | 2014-07-30 | 2014-12-03 | 小米科技有限责任公司 | 一种基于用户标识的匹配方法及装置 |
US20150088706A1 (en) * | 2010-05-12 | 2015-03-26 | Ontario Systems, Llc | Method, system, and computer-readable medium for managing and collecting receivables |
CN104573094A (zh) * | 2015-01-30 | 2015-04-29 | 深圳市华傲数据技术有限公司 | 网络账号识别匹配方法 |
CN104601436A (zh) * | 2013-12-31 | 2015-05-06 | 腾讯科技(深圳)有限公司 | 一种账号的生成方法、终端及后台服务器 |
CN104883259A (zh) * | 2015-06-11 | 2015-09-02 | 郑存粮 | 一种手机号作为网络应用账号自动注册的方法 |
Family Cites Families (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6011849A (en) * | 1997-08-28 | 2000-01-04 | Syndata Technologies, Inc. | Encryption-based selection system for steganography |
US7770016B2 (en) * | 1999-07-29 | 2010-08-03 | Intertrust Technologies Corporation | Systems and methods for watermarking software and other media |
US6397224B1 (en) * | 1999-12-10 | 2002-05-28 | Gordon W. Romney | Anonymously linking a plurality of data records |
US7269578B2 (en) * | 2001-04-10 | 2007-09-11 | Latanya Sweeney | Systems and methods for deidentifying entries in a data source |
US20040199781A1 (en) * | 2001-08-30 | 2004-10-07 | Erickson Lars Carl | Data source privacy screening systems and methods |
US7206791B2 (en) * | 2002-01-17 | 2007-04-17 | International Business Machines Corporation | System and method for managing and securing meta data |
US7024409B2 (en) * | 2002-04-16 | 2006-04-04 | International Business Machines Corporation | System and method for transforming data to preserve privacy where the data transform module suppresses the subset of the collection of data according to the privacy constraint |
US7814119B2 (en) * | 2004-03-19 | 2010-10-12 | Hitachi, Ltd. | Control of data linkability |
US20060082592A1 (en) * | 2004-10-19 | 2006-04-20 | International Business Machines Corporation | Mapping of a color to a treemap |
US8015214B2 (en) * | 2006-06-30 | 2011-09-06 | Encapsa Technology, Llc | Method of encapsulating information in a database and an encapsulated database |
US20080240425A1 (en) * | 2007-03-26 | 2008-10-02 | Siemens Medical Solutions Usa, Inc. | Data De-Identification By Obfuscation |
US20090132419A1 (en) * | 2007-11-15 | 2009-05-21 | Garland Grammer | Obfuscating sensitive data while preserving data usability |
US9305180B2 (en) * | 2008-05-12 | 2016-04-05 | New BIS Luxco S.à r.l | Data obfuscation system, method, and computer implementation of data obfuscation for secret databases |
US20100114607A1 (en) * | 2008-11-04 | 2010-05-06 | Sdi Health Llc | Method and system for providing reports and segmentation of physician activities |
SG176586A1 (en) * | 2009-05-21 | 2012-01-30 | Intertrust Tech Corp | Content delivery systems and methods |
JP5273805B2 (ja) * | 2009-07-16 | 2013-08-28 | 日本電信電話株式会社 | サービス提供システム、利用者id管理方法および利用者id管理プログラム |
WO2011048551A1 (en) * | 2009-10-19 | 2011-04-28 | Nokia Corporation | User identity management for permitting interworking of a bootstrapping architecture and a shared identity service |
US20110113049A1 (en) * | 2009-11-09 | 2011-05-12 | International Business Machines Corporation | Anonymization of Unstructured Data |
US9442980B1 (en) * | 2010-04-21 | 2016-09-13 | Stan Trepetin | Mathematical method for performing homomorphic operations |
US8626749B1 (en) * | 2010-04-21 | 2014-01-07 | Stan Trepetin | System and method of analyzing encrypted data in a database in near real-time |
US8544104B2 (en) * | 2010-05-10 | 2013-09-24 | International Business Machines Corporation | Enforcement of data privacy to maintain obfuscation of certain data |
WO2012094602A1 (en) * | 2011-01-07 | 2012-07-12 | Interdigital Patent Holdings, Inc. | Client and server group sso with local openid |
US8972747B2 (en) * | 2011-01-26 | 2015-03-03 | Hewlett-Packard Development Company, L.P. | Managing information in a document serialization |
US8806223B2 (en) * | 2011-05-03 | 2014-08-12 | Douglas Norman Crowe | System and method for management of encrypted data |
US20120297017A1 (en) * | 2011-05-20 | 2012-11-22 | Microsoft Corporation | Privacy-conscious personalization |
US10044713B2 (en) * | 2011-08-19 | 2018-08-07 | Interdigital Patent Holdings, Inc. | OpenID/local openID security |
GB201115866D0 (en) * | 2011-09-14 | 2011-10-26 | Royal Holloway & Bedford New College | Method and apparatus for enabling authorised users to access computer resources |
WO2013075661A1 (zh) * | 2011-11-23 | 2013-05-30 | 腾讯科技(深圳)有限公司 | 登录及开放平台标识方法、开放平台及系统 |
ES2565842T3 (es) * | 2011-12-27 | 2016-04-07 | Telecom Italia S.P.A. | Método de asignación de seudónimos dinámicos para redes de creación de perfiles de datos de usuarios, y red de creación de perfiles de datos de usuarios que implementa el método |
WO2013163634A1 (en) * | 2012-04-27 | 2013-10-31 | Interdigital Patent Holdings, Inc. | Systems and methods for personalizing and/or tailoring a service interface |
US9197619B2 (en) * | 2012-09-06 | 2015-11-24 | Intel Corporation | Management of multiple devices registered to a user |
US9298941B2 (en) * | 2012-11-12 | 2016-03-29 | EPI-USE Systems, Ltd. | Secure data copying |
US20150319156A1 (en) * | 2012-12-12 | 2015-11-05 | Interdigital Patent Holdings Inc. | Independent identity management systems |
CN103067398A (zh) * | 2012-12-31 | 2013-04-24 | 北京百度网讯科技有限公司 | 一种用于实现第三方应用访问用户数据的方法和设备 |
US8893230B2 (en) * | 2013-02-22 | 2014-11-18 | Duo Security, Inc. | System and method for proxying federated authentication protocols |
CN104052612B (zh) * | 2013-03-13 | 2017-08-25 | 中国移动通信集团广东有限公司 | 一种电信业务的故障识别与定位的方法及系统 |
US9721086B2 (en) * | 2013-03-15 | 2017-08-01 | Advanced Elemental Technologies, Inc. | Methods and systems for secure and reliable identity-based computing |
EP2973348A4 (en) * | 2013-03-15 | 2017-01-25 | Rush University Medical Center | Geographic utilization of artificial intelligence in real-time for disease identification and alert notification |
US9191384B2 (en) * | 2013-06-26 | 2015-11-17 | Vmware, Inc. | Maintaining privacy in a multi-tenant cloud service participating in a federated identity platform |
US9223995B1 (en) * | 2013-12-10 | 2015-12-29 | Progress Software Corporation | Semantic obfuscation of data in real time |
EP3090583A1 (en) * | 2013-12-31 | 2016-11-09 | Interdigital Patent Holdings, Inc. | Methods, apparatus, systems and mechanisms for secure attribute based friend find and proximity discovery |
US10074374B2 (en) * | 2014-04-07 | 2018-09-11 | Barco N.V. | Ad hoc one-time pairing of remote devices using online audio fingerprinting |
US9641512B2 (en) * | 2014-04-10 | 2017-05-02 | EMC IP Holding Company LLC | Identity protocol translation gateway |
US10339341B2 (en) * | 2014-05-07 | 2019-07-02 | Hush Hush | Methods and systems for obfuscating sensitive information in computer systems |
US9419962B2 (en) * | 2014-06-16 | 2016-08-16 | Adobe Systems Incorporated | Method and apparatus for sharing server resources using a local group |
EP3198512A4 (en) * | 2014-09-23 | 2018-05-09 | Fhoosh Inc. | Secure high speed data storage, access, recovery, and transmission |
US10013576B2 (en) * | 2014-12-12 | 2018-07-03 | Panasonic Intellectual Property Management Co., Ltd. | History information anonymization method and history information anonymization device for anonymizing history information |
US20180013782A1 (en) * | 2014-12-26 | 2018-01-11 | Interdigital Patent Holdings, Inc. | Continuous device/uicc based authentication for lte systems |
CA2977139C (en) * | 2015-02-24 | 2021-01-12 | Axon Enterprise, Inc. | Systems and methods for bulk redaction of recorded data |
US9824236B2 (en) * | 2015-05-19 | 2017-11-21 | Accenture Global Services Limited | System for anonymizing and aggregating protected information |
IN2015DE01753A (zh) * | 2015-06-11 | 2015-08-28 | Pradeep Varma | |
GB201512283D0 (en) * | 2015-07-14 | 2015-08-19 | Apical Ltd | Track behaviour events |
US9953176B2 (en) * | 2015-10-02 | 2018-04-24 | Dtex Systems Inc. | Method and system for anonymizing activity records |
WO2017062038A1 (en) * | 2015-10-09 | 2017-04-13 | Hewlett Packard Enterprise Development Lp | Privacy preservation |
-
2015
- 2015-12-23 CN CN201510980369.8A patent/CN106909811B/zh active Active
-
2016
- 2016-05-17 EP EP16877181.4A patent/EP3396558B1/en active Active
- 2016-05-17 WO PCT/CN2016/082414 patent/WO2017107367A1/zh unknown
-
2017
- 2017-08-02 US US15/667,023 patent/US10878121B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020073138A1 (en) * | 2000-12-08 | 2002-06-13 | Gilbert Eric S. | De-identification and linkage of data records |
CN102063595A (zh) * | 2005-02-07 | 2011-05-18 | 微软公司 | 通过确定性自然数据的替换扰乱数据结构的方法和系统 |
US20090319588A1 (en) * | 2008-06-24 | 2009-12-24 | Emc Corporation | Generic database sanitizer |
US20150088706A1 (en) * | 2010-05-12 | 2015-03-26 | Ontario Systems, Llc | Method, system, and computer-readable medium for managing and collecting receivables |
US20130054650A1 (en) * | 2011-08-23 | 2013-02-28 | John O'Byrne | Automatic detection of columns to be obfuscated in database schemas |
CN104601436A (zh) * | 2013-12-31 | 2015-05-06 | 腾讯科技(深圳)有限公司 | 一种账号的生成方法、终端及后台服务器 |
CN104184654A (zh) * | 2014-07-30 | 2014-12-03 | 小米科技有限责任公司 | 一种基于用户标识的匹配方法及装置 |
CN104573094A (zh) * | 2015-01-30 | 2015-04-29 | 深圳市华傲数据技术有限公司 | 网络账号识别匹配方法 |
CN104883259A (zh) * | 2015-06-11 | 2015-09-02 | 郑存粮 | 一种手机号作为网络应用账号自动注册的方法 |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109961080A (zh) * | 2017-12-26 | 2019-07-02 | 腾讯科技(深圳)有限公司 | 终端识别方法及装置 |
CN109961080B (zh) * | 2017-12-26 | 2022-09-23 | 腾讯科技(深圳)有限公司 | 终端识别方法及装置 |
CN109388675A (zh) * | 2018-10-12 | 2019-02-26 | 平安科技(深圳)有限公司 | 数据分析方法、装置、计算机设备及存储介质 |
CN110716927A (zh) * | 2019-09-06 | 2020-01-21 | 中国平安财产保险股份有限公司 | 数据修正方法、装置、设备及计算机可读存储介质 |
CN110716927B (zh) * | 2019-09-06 | 2023-10-24 | 中国平安财产保险股份有限公司 | 数据修正方法、装置、设备及计算机可读存储介质 |
Also Published As
Publication number | Publication date |
---|---|
EP3396558A4 (en) | 2018-10-31 |
EP3396558A1 (en) | 2018-10-31 |
CN106909811B (zh) | 2020-07-03 |
EP3396558B1 (en) | 2020-12-23 |
US20170329993A1 (en) | 2017-11-16 |
US10878121B2 (en) | 2020-12-29 |
WO2017107367A1 (zh) | 2017-06-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106909811A (zh) | 用户标识处理的方法和装置 | |
CN112491551B (zh) | 基于区块链的数据验证方法及装置、电子设备 | |
CN110489951A (zh) | 风险识别的方法、装置、计算机设备和存储介质 | |
KR20160086830A (ko) | 인간의 생물학적 특징을 이용한 신원 인증 | |
US11698956B2 (en) | Open data biometric identity validation | |
CN113849702B (zh) | 一种确定目标数据的方法、装置、电子设备及存储介质 | |
CN107517180B (zh) | 登录方法和装置 | |
CN109088788B (zh) | 数据处理方法、装置、设备及计算机可读存储介质 | |
CN110389941A (zh) | 数据库校验方法、装置、设备及存储介质 | |
CN111415183A (zh) | 用于处理访问请求的方法和装置 | |
CN106102059B (zh) | 用于确定无线热点的所有者的方法与设备 | |
CN108809896A (zh) | 一种信息校验方法、装置和电子设备 | |
CN107357562B (zh) | 一种信息填充方法、装置及客户端 | |
CN113051601B (zh) | 敏感数据识别方法、装置、设备和介质 | |
CN117076289A (zh) | 自动化测试方法、装置、存储介质及设备 | |
CN110580939A (zh) | 用于提供第二医疗数据记录的方法和系统 | |
CN109522737B (zh) | 用于确定资源访问权限的方法和设备 | |
CN112835903A (zh) | 一种敏感数据识别的方法及设备 | |
WO2020055654A1 (en) | Authentication and authentication mode determination method, apparatus, and electronic device | |
CN107220255B (zh) | 地址信息处理方法及装置 | |
CN110751140A (zh) | 字符批量识别方法、装置和计算机设备 | |
CN112152997B (zh) | 面向设备识别的双因子认证方法、系统、介质及服务端 | |
US20240194308A1 (en) | Mapping of a database field in an electronic health record to a question on a clinical trial case report form (crf) using the electronic data document (edd) | |
CN109165488B (zh) | 身份鉴别方法及装置 | |
US20130317805A1 (en) | Systems and methods for detecting real names in different languages |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |