CN110188144A - 一种用户数据数字化处理方法、装置及设备 - Google Patents

一种用户数据数字化处理方法、装置及设备 Download PDF

Info

Publication number
CN110188144A
CN110188144A CN201910273168.2A CN201910273168A CN110188144A CN 110188144 A CN110188144 A CN 110188144A CN 201910273168 A CN201910273168 A CN 201910273168A CN 110188144 A CN110188144 A CN 110188144A
Authority
CN
China
Prior art keywords
user
data
result
behavior
processing method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910273168.2A
Other languages
English (en)
Inventor
陈怡伶
黄震
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hot Tea Cloud Technology (beijing) Co Ltd
Original Assignee
Hot Tea Cloud Technology (beijing) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hot Tea Cloud Technology (beijing) Co Ltd filed Critical Hot Tea Cloud Technology (beijing) Co Ltd
Publication of CN110188144A publication Critical patent/CN110188144A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24553Query execution of query operations
    • G06F16/24554Unary operations; Data partitioning operations
    • G06F16/24556Aggregation; Duplicate elimination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24568Data stream processing; Continuous queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2458Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2462Approximate or statistical queries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25Integrating or interfacing systems involving database management systems
    • G06F16/258Data format conversion from or to a database
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/284Relational databases
    • G06F16/285Clustering or classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/9035Filtering based on additional data, e.g. user or group profiles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/953Querying, e.g. by the use of web search engines
    • G06F16/9535Search customisation based on user profiles and personalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/95Retrieval from the web
    • G06F16/955Retrieval from the web using information identifiers, e.g. uniform resource locators [URL]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/604Tools and structures for managing or administering access control systems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60Protecting data
    • G06F21/62Protecting access to data via a platform, e.g. using keys or access control rules
    • G06F21/6218Protecting access to data via a platform, e.g. using keys or access control rules to a system of files or objects, e.g. local or distributed file system or database
    • G06F21/6245Protecting personal data, e.g. for financial or medical purposes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/55Push-based network services

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Software Systems (AREA)
  • Computer Security & Cryptography (AREA)
  • Computational Linguistics (AREA)
  • Bioethics (AREA)
  • Computer Hardware Design (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Medical Informatics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • Evolutionary Computation (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Fuzzy Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种用户数据数字化处理方法、装置及设备,该用户数据数字化处理方法包括:采集用户的行为数据,对行为数据进行分类;根据分类结果对用户行为进行关联性分析,生成关联分析结果;根据关联分析结果计算用户行为的分析评价结果,推送分析评价结果。通过实施本发明,可以为用户提供更加开放、人性化的数据共享机制;并且,基于共享平台提供相应的数据处理流程或处理算法,能够为用户量身定做各自的数据处理服务,提高用户的使用感受。

Description

一种用户数据数字化处理方法、装置及设备
技术领域
本发明涉及大数据处理技术领域,具体涉及一种用户数据数字化处理方法、装置及设备。
背景技术
在信息化时代,数据库的发展形成了利用数据建模归纳总结过去并对未来做预测的“计算科学”;而消费互联网/大数据年代,通过收集大量的数据,形成了让计算机去规律的学习并优化模型的“数据科学”。大数据(Bigdata)通常用来形容一个公司创造的大量非结构化数据和半结构化数据,随着产业互联网AI智能时代的来临,大数据(Bigdata)需要更有效的进化成数据密集型科学发现(ScientificDiscovery)。而任何一个科学发现,都需要满足Reproducible Result(可重复性结果)的要求。因为基于数据的结果,都是从数据->处理->结果(Data->Process->Result)这样一个过程,因此,要满足Reproducible Result的要求,则需要一种更智能、更灵活的实时(不单只面对用户)数据处理系统对数据进行处理。
在消费互联网的时代,各大型技术平台所使用的数据处理系统,是通过提供数据共享技术,将数据收集和存储在他们自己平台(中心化的和公有的云)上,并应用超级id机制,由平台提供商集中控制,对用户的自由使用,有较多的权限,这些使用限制给用户带来诸多不便,更大大拖慢了产业互联网过程去中心化所需要技术的发展进度。
发明内容
有鉴于此,本发明实施例提供了一种用户数据数字化处理方法、装置及设备,以解决上述问题。
根据第一方面,本发明实施例提供了一种用户数据数字化处理方法,包括:采集用户的行为数据,对所述行为数据进行分类;根据分类结果对用户行为进行关联性分析,生成关联分析结果;根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果。
结合第一方面,在第一方面第一实施方式中,采集用户的行为数据,对所述行为数据进行分类,包括:通过部署在用户端的数据节点从用户的行为日志中提取所述行为数据;从所述行为数据中提取用户行为的属性信息,所述属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;根据所述属性信息对用户行为进行分类,得到所述分类结果。
结合第一方面第一实施方式,在第一方面第二实施方式中,该处理方法还包括:根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。
结合第一方面,在第一方面第三实施方式中,根据分类结果对用户行为进行分析,生成分析结果,包括:使用预设的推荐器算法或分析规则对所述分类结果进行分析,生成包含用户及行为对象相关联的分析结果;所述用户及行为对象之间的关联至少包括:用户与用户之间的关联、用户与行为对象之间的关联、行为对象与行为对象之间的关联。
结合第一方面,在第一方面第四实施方式中,根据所述关联分析结果计算用户行为的分析评价结果,包括:根据老化因子和频率计算所述关联分析结果的得分值;根据所述得分值生成内积矩阵;对所述内积矩阵进行归一化处理,生成所述分析评价结果。
结合第一方面,在第一方面第五实施方式中,该处理方法还包括:根据所述分析评价结果生成数据化视图。
根据第二方面,本发明实施例提供了一种用户数据数字化处理装置,包括:数据采集分类模块,用于采集用户的行为数据,对所述行为数据进行分类;关联性分析模块,用于根据分类结果对用户行为进行关联性分析,生成关联分析结果;分析评价模块,用于根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果。
结合第二方面,在第二方面第一实施方式中,所述数据采集分类模块包括:数据提取子模块,用于通过部署在用户端的数据节点从用户的行为日志中提取所述行为数据;属性信息提取子模块,用于从所述行为数据中提取用户行为的属性信息,所述属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;分类子模块,用于根据所述属性信息对用户行为进行分类,得到所述分类结果。
结合第二方面第一实施方式,在第二方面第二实施方式中,该处理装置还包括:数据节点控制模块,用于根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。
结合第二方面,在第二方面第三实施方式中,所述关联性分析模块具体用于:使用预设的推荐器算法或分析规则对所述分类结果进行分析,生成包含用户及行为对象相关联的分析结果;所述用户及行为对象之间的关联至少包括:用户与用户之间的关联、用户与行为对象之间的关联、行为对象与行为对象之间的关联。
结合第二方面,在第二方面第四实施方式中,所述分析评价模块包括:分值计算子模块,用于根据老化因子和频率计算所述关联分析结果的得分值;内积矩阵生成子模块,用于根据所述得分值生成内积矩阵;分析评价子模块,用于对所述内积矩阵进行归一化处理,生成所述分析评价结果。
结合第二方面,在第二方面第五实施方式中,该装置还包括:数据可视化模块,用于根据所述分析评价结果生成数据化视图。
根据第三方面,本发明实施例提供了一种用户数据数字化处理设备,包括:存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行第一方面或者第一方面的任意一种实施方式中所述的用户数据数字化处理方法。
根据第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质存储计算机指令,所述计算机指令用于使所述计算机执行第一方面或者第一方面的任意一种实施方式中所述的用户数据数字化处理方法。
本发明实施例所具备的有益效果在于,通过实施本发明,可以为用户提供更加开放、人性化的数据共享机制;并且,基于共享平台提供相应的数据处理流程或处理算法,对用户的行为数据进行分析,得到分析结果,能够针对不同的用户,为用户量身定做各自的数据处理服务,提高用户的使用感受。
附图说明
通过参考附图会更加清楚的理解本发明的特征和优点,附图是示意性的而不应理解为对本发明进行任何限制,在附图中:
图1示出了本发明实施例的用户数据数字化处理方法的流程图;
图2示出了本发明实施例的用户数据数字化处理装置的结构示意图;
图3示出了本发明实施例的用户数据数字化处理设备的硬件结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例提供一种用户数据数字化处理方法,如图1所示,主要包括以下步骤:
步骤S11:采集用户的行为数据,对所述行为数据进行分类;
本发明实施例中,可以是通过部署在用户端的数据节点从用户的行为日志中提取用户的行为数据,从行为数据中提取用户行为的属性信息,属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;根据属性信息对用户行为进行分类,得到分类结果。例如,通过考虑活跃用户的喜欢和不喜欢的倾向来进行分类等。
步骤S12:根据分类结果对用户行为进行关联性分析,生成关联分析结果;
具体地,可以是使用预设的推荐器算法或分析规则对分类结果进行分析,生成包含用户及行为对象相关联的分析结果;用户及行为对象之间的关联至少包括:用户与用户之间的关联、用户与行为对象之间的关联、行为对象与行为对象之间的关联。在实际应用中,该用户可为企业方,该行为对象可为企业所实施的项目等。
步骤S13:根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果;
具体地,是根据老化因子和频率计算所述关联分析结果的得分值;根据所述得分值生成内积矩阵;对所述内积矩阵进行归一化处理,生成所述分析评价结果。
通过本发明实施例的用户数据数字化处理方法,可以为用户提供更加开放、人性化的数据共享机制;并且,基于共享平台提供相应的数据处理流程或处理算法,对用户的行为数据进行分析,得到分析结果,能够针对不同的用户,为用户量身定做各自的数据处理服务,提高用户的使用感受。
可选地,在本发明的一些实施例中,该用户数据数字化处理方法还可包括:根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。具体地,可通过容器管理器实现上述功能。容器标签通过从系统管理控制台定义加载到用户浏览器中。因此,企业运营商等用户可以决定系统管理控制台的特定功能(例如该数据节点的数据提取动作)的开/关,该控制台可自动填充到用户的客户端应用程序/浏览器中。
可选地,在本发明的一些实施例中,在通过上述步骤S11至步骤S13得到用户相关的分析评价结果后,还可根据该分析评价结果生成数据化视图,用于为企业客户提供运营数据化视图,包括该企业客户自己的客户资料,数字渠道流量,销售分析,事件,活动,活动结果等。
可选地,在本发明的一些实施例中,该用户数据数字化处理方法可具体应用于一用户端设备中,该用户端设备主要的组成及其功能如下:
1)元数据管理模块,作为关键组件,通过进行简单配置便可以灵活的满足不同的企业(用户)、行业使用需求,而无需使用不同的专用版本。
2)推荐引擎,是闭环系统出站的关键之一,它可以基于企业定义的规则或系统内置的机器学习算法来得到分析结果(即可用于执行上述步骤S12)。
3)SDK工具包,可允许企业将实时数据采集点与各种数字通道(WEB,app,社交媒体等)统一在集成该用户端设备中。
4)容器管理器,允许企业以“开/关”方式选择对数据节点进行操作。
5)报告引擎,可用于为企业客户提供运营数据化视图,包括他们自己的客户资料,数字渠道流量,销售分析,事件,活动,活动结果等。
6)决策引擎,可由企业自主定义,设置预设的事件触发规则。决策引擎允许企业客户定义业务规则与事件阈值。对于直接业务规则,主要使用Java drool规则引擎作为解释器的基础。对于决策引擎的阈值设置,系统根据收集的数据进行维护,以便在必要时应用一阶线性函数或甚至更高阶方程来计算数据趋势。
7)评分引擎,用于记录实时事件的发生和评估。
8)电子商务模板,旨在帮助企业在社交媒体渠道中快速生成其电子商务应用程序。
9)复杂事件处理引擎,可与评分引擎协同,在预设事件发生时自动触发响应性事件。具体地,可监听事件日志进入,一旦日志进入系统,可通过评分引擎和复杂事件引擎来评估基于评分引擎的结果。
10)分段引擎,用于根据企业定义好的计划,对符合条件的用户群进行标记/再标记和触发事件(例如发送短信,电子邮件、APPLE Message信息、微信、LINE等)。
11)社交渠道引擎,用于处理社交媒体上的用户行为数据收集和交互与企业客户的集成(微信,Line,Facebook等)。它可以为企业客户提供个性化内容,并推送消息到达客户端。
12)ID同步引擎,用于处理来自不同渠道的数据并合并行为,为企业提供360度的客户数据可视化视图,这里的ID是系统生成的内部代码片段,用于标识特定的“用户”。
13)快数据处理引擎,用于收集不同数据点的实时数据。
14)DSP插件组件,作为集成点指向不同的DPS,如谷歌DBM,iPinYou,雅虎等,用于提供企业数字营销渠道。
15)成员管理组件,允许企业为客户配置文件设计自己的数据列表模式。
该用户端设备在获取用户数据,对用户数据进行处理的过程中,每个计算状态都可以存储在装置内部,不需要存储在外部系统,降低了计算引擎对外部系统的依赖以及部署,使运维更加简单,同时对该用户数据标签处理设备的性能也带来了极大的提升,实现了产业互联网的去中心化。
本发明实施例还提供一种用户数据数字化处理装置,如图2所示,该处理装置主要包括:
数据采集分类模块11,用于采集用户的行为数据,对所述行为数据进行分类;详细内容可参见上述方法实施例的步骤S11的相关描述。
在一可选实施例中,该数据采集分类模块11包括:数据提取子模块,用于通过部署在用户端的数据节点从用户的行为日志中提取所述行为数据;属性信息提取子模块,用于从所述行为数据中提取用户行为的属性信息,所述属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;分类子模块,用于根据所述属性信息对用户行为进行分类,得到所述分类结果。
关联性分析模块12,用于根据分类结果对用户行为进行关联性分析,生成关联分析结果;详细内容可参见上述方法实施例的步骤S12的相关描述。
分析评价模块13,用于根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果;详细内容可参见上述方法实施例的步骤S13的相关描述。
在一可选实施例中,该分析评价模块13包括:分值计算子模块,用于根据老化因子和频率计算所述关联分析结果的得分值;内积矩阵生成子模块,用于根据所述得分值生成内积矩阵;分析评价子模块,用于对所述内积矩阵进行归一化处理,生成所述分析评价结果。
通过本发明实施例的用户数据数字化处理装置,可以为用户提供更加开放、人性化的数据共享机制;并且,基于共享平台提供相应的数据处理流程或处理算法,对用户的行为数据进行分析,得到分析结果,能够针对不同的用户,为用户量身定做各自的数据处理服务,提高用户的使用感受。
可选地,在本发明的一些实施例中,该用户数据数字化处理装置还可包括:数据节点控制模块,用于根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。具体地,可通过容器管理器实现上述功能。容器标签通过从系统管理控制台定义加载到用户浏览器中。因此,企业运营商等用户可以决定系统管理控制台的特定功能(例如该数据节点的数据提取动作)的开/关,该控制台可自动填充到用户的客户端应用程序/浏览器中。
可选地,在本发明的一些实施例中,该处理装置还包括:数据可视化模块,用于根据该分析评价结果生成数据化视图,用于为企业客户提供运营数据化视图,包括该企业客户自己的客户资料,数字渠道流量,销售分析,事件,活动,活动结果等。
本发明实施例还提供了一种用户数据数字化处理设备,如图3所示,该用户数据数字化处理设备可以包括处理器31和存储器32,其中处理器31和存储器32可以通过总线或者其他方式连接,图3中以通过总线连接为例。
处理器31可以为中央处理器(Central Processing Unit,CPU)。处理器31还可以为其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等芯片,或者上述各类芯片的组合。
存储器32作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序、非暂态计算机可执行程序以及模块,如本发明实施例中的用户数据数字化处理方法对应的程序指令/模块(例如,图2所示的数据采集分类模块11、关联性分析模块12、分析评价模块13)。处理器31通过运行存储在存储器32中的非暂态软件程序、指令以及模块,从而执行处理器的各种功能应用以及数据处理,即实现上述方法实施例中的用户数据数字化处理方法。
存储器32可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储处理器31所创建的数据等。此外,存储器32可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施例中,存储器32可选包括相对于处理器31远程设置的存储器,这些远程存储器可以通过网络连接至处理器31。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器32中,当被所述处理器31执行时,执行如图1所示实施例中的用户数据数字化处理方法。
上述车辆终端具体细节可以对应参阅图1至图2所示的实施例中对应的相关描述和效果进行理解,此处不再赘述。
本领域技术人员可以理解,实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)、随机存储记忆体(Random AccessMemory,RAM)、快闪存储器(Flash Memory)、硬盘(Hard Disk Drive,缩写:HDD)或固态硬盘(Solid-State Drive,SSD)等;所述存储介质还可以包括上述种类的存储器的组合。
虽然结合附图描述了本发明的实施例,但是本领域技术人员可以在不脱离本发明的精神和范围的情况下作出各种修改和变型,这样的修改和变型均落入由所附权利要求所限定的范围之内。

Claims (14)

1.一种用户数据数字化处理方法,其特征在于,包括:
采集用户的行为数据,对所述行为数据进行分类;
根据分类结果对用户行为进行关联性分析,生成关联分析结果;
根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果。
2.根据权利要求1所述的用户数据数字化处理方法,其特征在于,采集用户的行为数据,对所述行为数据进行分类,包括:
通过部署在用户端的数据节点从用户的行为日志中提取所述行为数据;
从所述行为数据中提取用户行为的属性信息,所述属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;
根据所述属性信息对用户行为进行分类,得到所述分类结果。
3.根据权利要求2所述的用户数据数字化处理方法,其特征在于,还包括:
根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。
4.根据权利要求1所述的用户数据数字化处理方法,其特征在于,根据分类结果对用户行为进行分析,生成分析结果,包括:
使用预设的推荐器算法或分析规则对所述分类结果进行分析,生成包含用户及行为对象相关联的分析结果;
所述用户及行为对象之间的关联至少包括:用户与用户之间的关联、用户与行为对象之间的关联、行为对象与行为对象之间的关联。
5.根据权利要求1所述的用户数据数字化处理方法,其特征在于,根据所述关联分析结果计算用户行为的分析评价结果,包括:
根据老化因子和频率计算所述关联分析结果的得分值;
根据所述得分值生成内积矩阵;
对所述内积矩阵进行归一化处理,生成所述分析评价结果。
6.根据权利要求1所述的用户数据数字化处理方法,其特征在于,还包括:
根据所述分析评价结果生成数据化视图。
7.一种用户数据数字化处理装置,其特征在于,包括:
数据采集分类模块,用于采集用户的行为数据,对所述行为数据进行分类;
关联性分析模块,用于根据分类结果对用户行为进行关联性分析,生成关联分析结果;
分析评价模块,用于根据所述关联分析结果计算用户行为的分析评价结果,推送所述分析评价结果。
8.根据权利要求7所述的用户数据数字化处理装置,其特征在于,所述数据采集分类模块包括:
数据提取子模块,用于通过部署在用户端的数据节点从用户的行为日志中提取所述行为数据;
属性信息提取子模块,用于从所述行为数据中提取用户行为的属性信息,所述属性信息至少包括用户的使用习惯信息、偏好信息中的至少之一;
分类子模块,用于根据所述属性信息对用户行为进行分类,得到所述分类结果。
9.根据权利要求8所述的用户数据数字化处理装置,其特征在于,还包括:
数据节点控制模块,用于根据用户指令打开或关闭所述数据节点提取所述行为数据的动作。
10.根据权利要求7所述的用户数据数字化处理装置,其特征在于,所述关联性分析模块具体用于:
使用预设的推荐器算法或分析规则对所述分类结果进行分析,生成包含用户及行为对象相关联的分析结果;
所述用户及行为对象之间的关联至少包括:用户与用户之间的关联、用户与行为对象之间的关联、行为对象与行为对象之间的关联。
11.根据权利要求7所述的用户数据数字化处理装置,其特征在于,所述分析评价模块包括:
分值计算子模块,用于根据老化因子和频率计算所述关联分析结果的得分值;
内积矩阵生成子模块,用于根据所述得分值生成内积矩阵;
分析评价子模块,用于对所述内积矩阵进行归一化处理,生成所述分析评价结果。
12.根据权利要求7所述的用户数据数字化处理装置,其特征在于,还包括:
数据可视化模块,用于根据所述分析评价结果生成数据化视图。
13.一种用户数据数字化处理设备,其特征在于,包括:
存储器和处理器,所述存储器和所述处理器之间互相通信连接,所述存储器中存储有计算机指令,所述处理器通过执行所述计算机指令,从而执行如权利要求1-6中任一项所述的用户数据数字化处理方法。
14.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使所述计算机执行如权利要求1-6中任一项所述的用户数据数字化处理方法。
CN201910273168.2A 2019-01-15 2019-04-04 一种用户数据数字化处理方法、装置及设备 Pending CN110188144A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2019100373090 2019-01-15
CN201910037309 2019-01-15

Publications (1)

Publication Number Publication Date
CN110188144A true CN110188144A (zh) 2019-08-30

Family

ID=67569442

Family Applications (5)

Application Number Title Priority Date Filing Date
CN201910273174.8A Pending CN110175281A (zh) 2019-01-15 2019-04-04 一种用户数据处理、交互方法、装置及系统
CN201910274370.7A Pending CN110188264A (zh) 2019-01-15 2019-04-04 一种用户数据交互方法及装置
CN201910272512.6A Pending CN110134711A (zh) 2019-01-15 2019-04-04 大数据的处理方法、装置、设备及计算机可读存储介质
CN201910273168.2A Pending CN110188144A (zh) 2019-01-15 2019-04-04 一种用户数据数字化处理方法、装置及设备
CN201910274466.3A Pending CN110196933A (zh) 2019-01-15 2019-04-04 一种用户数据标签处理方法及装置

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN201910273174.8A Pending CN110175281A (zh) 2019-01-15 2019-04-04 一种用户数据处理、交互方法、装置及系统
CN201910274370.7A Pending CN110188264A (zh) 2019-01-15 2019-04-04 一种用户数据交互方法及装置
CN201910272512.6A Pending CN110134711A (zh) 2019-01-15 2019-04-04 大数据的处理方法、装置、设备及计算机可读存储介质

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201910274466.3A Pending CN110196933A (zh) 2019-01-15 2019-04-04 一种用户数据标签处理方法及装置

Country Status (1)

Country Link
CN (5) CN110175281A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111241081A (zh) * 2020-01-09 2020-06-05 杭州涂鸦信息技术有限公司 Iot平台数据收集方法及系统、可读存储介质、计算机设备
CN111291267A (zh) * 2020-02-17 2020-06-16 中国农业银行股份有限公司 App用户行为分析方法及装置
CN112073367A (zh) * 2020-07-28 2020-12-11 智维云图(上海)智能科技有限公司 一种可视化的消防物联网数据的协议解析方法及系统
CN112287015A (zh) * 2020-10-14 2021-01-29 北京易观智库网络科技有限公司 画像生成系统及其方法、电子设备及存储介质

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111046382B (zh) * 2019-12-30 2024-04-02 武汉英迈信息科技有限公司 数据库审计方法、设备、存储介质及装置
CN112184103A (zh) * 2020-09-15 2021-01-05 苏州牧星智能科技有限公司 一种订单处理方法、装置及系统
CN112632597A (zh) * 2020-12-08 2021-04-09 国家计算机网络与信息安全管理中心 一种数据脱敏方法、装置可读存储介质
CN114520815A (zh) * 2021-12-31 2022-05-20 乐爱创新(北京)科技有限公司 一种水环境大数据的处理方法、装置、设备和存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106504099A (zh) * 2015-09-07 2017-03-15 国家计算机网络与信息安全管理中心 一种构建用户画像的系统
CN106528851A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种智能推荐方法及装置
CN107590224B (zh) * 2017-09-04 2021-11-30 北京京东尚科信息技术有限公司 基于大数据的用户偏好分析方法与装置
CN108415952B (zh) * 2018-02-02 2020-10-16 北京腾云天下科技有限公司 用户数据存储方法、标签计算方法及计算设备
CN108764663B (zh) * 2018-05-15 2020-10-16 广东电网有限责任公司信息中心 一种电力客户画像生成管理的方法及系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111241081A (zh) * 2020-01-09 2020-06-05 杭州涂鸦信息技术有限公司 Iot平台数据收集方法及系统、可读存储介质、计算机设备
CN111291267A (zh) * 2020-02-17 2020-06-16 中国农业银行股份有限公司 App用户行为分析方法及装置
CN111291267B (zh) * 2020-02-17 2024-04-12 中国农业银行股份有限公司 App用户行为分析方法及装置
CN112073367A (zh) * 2020-07-28 2020-12-11 智维云图(上海)智能科技有限公司 一种可视化的消防物联网数据的协议解析方法及系统
CN112073367B (zh) * 2020-07-28 2022-12-09 智维云图(上海)智能科技有限公司 一种可视化的消防物联网数据的协议解析方法及系统
CN112287015A (zh) * 2020-10-14 2021-01-29 北京易观智库网络科技有限公司 画像生成系统及其方法、电子设备及存储介质
CN112287015B (zh) * 2020-10-14 2024-03-01 北京易观数智科技股份有限公司 画像生成系统及其方法、电子设备及存储介质

Also Published As

Publication number Publication date
CN110134711A (zh) 2019-08-16
CN110188264A (zh) 2019-08-30
CN110175281A (zh) 2019-08-27
CN110196933A (zh) 2019-09-03

Similar Documents

Publication Publication Date Title
CN110188144A (zh) 一种用户数据数字化处理方法、装置及设备
CN109992710B (zh) 点击率预估方法、系统、介质和计算设备
KR102288249B1 (ko) 정보 처리 방법, 단말기, 및 컴퓨터 저장 매체
US20180365576A1 (en) System and method for personalized quality assurance of inference models
CN113610239B (zh) 针对机器学习的特征处理方法及特征处理系统
WO2017133615A1 (zh) 一种业务参数获取方法及装置
US11276032B2 (en) Intelligent classification for product pedigree identification
CN113435602A (zh) 确定机器学习样本的特征重要性的方法及系统
CN110781379A (zh) 信息推荐方法、装置、计算机设备和存储介质
CN110598070B (zh) 应用类型识别方法及装置、服务器及存储介质
CN108549909B (zh) 基于众包的对象分类方法及对象分类系统
US20180276565A1 (en) Content rating classification with cognitive computing support
US10796203B2 (en) Out-of-sample generating few-shot classification networks
Nawrocka et al. Application of machine learning in recommendation systems
WO2022135765A1 (en) Using disentangled learning to train an interpretable deep learning model
US20210065019A1 (en) Using a dialog system for learning and inferring judgment reasoning knowledge
US11003859B2 (en) Machine-learning automated structural quality analysis
WO2024114034A1 (zh) 内容推荐方法、装置、设备、介质和程序产品
CN114330482A (zh) 一种数据处理方法、装置及计算机可读存储介质
KR20220105792A (ko) 동적 텍스트 소스를 활용한 ai 기반 의사결정지원 시스템
Ikhlasse et al. An overall statistical analysis of AI tools deployed in cloud computing and networking systems
Singla et al. Analysis of software engineering for agile machine learning projects
US9940319B2 (en) Information analysis system, information analysis method, and information analysis program
US11921676B2 (en) Analyzing deduplicated data blocks associated with unstructured documents
CN110069691A (zh) 用于处理点击行为数据的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination