CN105631029A - 基于用户主观行为分析的网络监控系统 - Google Patents
基于用户主观行为分析的网络监控系统 Download PDFInfo
- Publication number
- CN105631029A CN105631029A CN201511023629.9A CN201511023629A CN105631029A CN 105631029 A CN105631029 A CN 105631029A CN 201511023629 A CN201511023629 A CN 201511023629A CN 105631029 A CN105631029 A CN 105631029A
- Authority
- CN
- China
- Prior art keywords
- model
- user
- module
- subjective
- fitting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9535—Search customisation based on user profiles and personalisation
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及互联网通信技术领域,具体地说是一种效率高、监控准确的基于用户主观行为分析的网络监控系统,其其特征在于设有数据处理服务器,所述数据处理服务器上设有数据获取单元、数据预处理单元、数据挖掘单元、结果输出单元,所述数据挖掘单元设有模型构建模块,用用于依据选取的信念指标设定用户主观行为分析模型的结构;材料收集模块,用于依据选取的信念指标编制调查问卷,并依据该调查问卷收集基于多个用户的第一样本数据;样本库,本发明通过对现有用户数据进行主观行为分析,更准确的获取用户偏好信息,进而获得监控结果,具有结构合理、处理速度快、效率高等显著的优点。
Description
技术领域:
本发明涉及互联网通信技术领域,具体地说是一种效率高、监控准确的基于用户主观行为分析的网络监控系统。
背景技术:
随着科技的发展,互联网得到了大规模应用,Web网页在存在大量有价值的信息的同时也存在大量诸如导航、版权、广告等与正文无关的噪声信息。噪声信息的存在使得后续信息服务的数据质量无法保证。从网页中提取有价值的内容来保证数据质量无疑可以为后续的网页信息处理应用奠定基础。在信息搜索、信息过滤、文本分类、文本聚类、文摘等应用中,去除掉网页中的噪声信息,提取网页的内容是非常重要的一步。比如在信息搜索中,在去除掉噪声信息的网页内容基础上建立索引可以有效地提高搜索的准确率;而在信息过滤、文本分类、文本聚类和网页自动摘要等应用中,准确的网页内容对系统的性能有很大的提升作用。
现有的用户主观行为分析首先根据应用场景为不同的抽象概念选择合适的信念指标,建立用户主观行为分析模型。依据所选信念指标编制正式调查问卷,经模型拟合及模型评价并最终确立模型参数,现有技术虽然包含模型拟合,但这种模拟拟合过程不是动态的。由此可见,已有方法仅仅在模型建立之初确定模型参数,从而使得模型参数是静态的。而网络中用户的主观行为受到多方面的因素影响,呈现动态变化的特点。因此最初的模型参数随着时间的推移可能并不再适用,现有技术的用户主观行为分析模型缺乏动态性。
发明内容:
本发明针对现有技术中存在的缺点和不足,提出了一种效率高、监控准确的基于用户主观行为分析的网络监控系统。
本发明可以通过以下措施达到:
一种基于用户主观行为分析的网络监控系统,其特征在于设有数据处理服务器,所述数据处理服务器上设有数据获取单元、数据预处理单元、数据挖掘单元、结果输出单元,所述数据挖掘单元设有模型构建模块,用于依据选取的信念指标设定用户主观行为分析模型的结构;材料收集模块,用于依据选取的信念指标编制调查问卷,并依据该调查问卷收集基于多个用户的第一样本数据;样本库,用于存放用于统计分析的样本数据;统计分析模块,用于将所述样本库输入的数据进行统计分析处理,获得各信念指标间的相关系数矩阵,将该相关系数矩阵输入模型拟合模块;并接收监控模块的相关系数查询请求,然后向该监控模块返回基于样本库所有样本数据的当前的相关系数矩阵。
本发明所述数据挖掘单元还设有模型拟合模块,用于将统计分析处理后的相关系数矩阵与模型构建模块设定的用户主观行为分析模型进行模型拟合处理,得到再生矩阵。
本发明所述数据挖掘单元还设有模型评价模块,用于计算模型拟合模块输出的再生矩阵与相关系数矩阵的拟合度结果决定是否再次触发模型拟合模块,即当拟合度小于设定拟合度时再次返回模型拟合模块进行拟合,当拟合度大于设定拟合度时停止拟合过程,并根据最终的再生矩阵及用户主观行为分析模型的结构得到模型的参数,输出用户主观行为模型。
本发明所述数据挖掘单元还设有用户主观行为分析模型,用于将满足拟合度要求的参数值设置为用户主观行为模型的参数值得到最终用户主观行为分析模型,该模型还与监控模块连接,当用户主观行为分析模型的参数确定后就向监控模块输出再生矩阵,当模型更改后,才再次向监控模块输出再生矩阵。
本发明所述数据预处理单元设有数据筛选模块和归一化处理模块。
本发明通过对现有用户数据进行主观行为分析,更准确的获取用户偏好信息,进而获得监控结果,具有结构合理、处理速度快、效率高等显著的优点。
附图说明:
附图1是本发明的系统框图。
附图标记:数据处理服务器1、数据获取单元2、数据预处理单元3、数据挖掘单元4、结果输出单元5、模型构建模块6、材料收集模块7、样本库8、统计分析模块9。
具体实施方式:
下面结合附图对本发明作进一步的说明。
如附图所示,本发明提出了一种基于用户主观行为分析的网络监控系统,其特征在于设有数据处理服务器1,所述数据处理服务器1上设有数据获取单元2、数据预处理单元3、数据挖掘单元4、结果输出单元5,所述数据挖掘单元4设有模型构建模块6,用于依据选取的信念指标设定用户主观行为分析模型的结构;材料收集模块7,用于依据选取的信念指标编制调查问卷,并依据该调查问卷收集基于多个用户的第一样本数据;样本库8,用于存放用于统计分析的样本数据;统计分析模块9,用于将所述样本库输入的数据进行统计分析处理,获得各信念指标间的相关系数矩阵,将该相关系数矩阵输入模型拟合模块;并接收监控模块的相关系数查询请求,然后向该监控模块返回基于样本库所有样本数据的当前的相关系数矩阵。
本发明所述数据挖掘单元还设有模型拟合模块,用于将统计分析处理后的相关系数矩阵与模型构建模块设定的用户主观行为分析模型进行模型拟合处理,得到再生矩阵。
本发明所述数据挖掘单元还设有模型评价模块,用于计算模型拟合模块输出的再生矩阵与相关系数矩阵的拟合度结果决定是否再次触发模型拟合模块,即当拟合度小于设定拟合度时再次返回模型拟合模块进行拟合,当拟合度大于设定拟合度时停止拟合过程,并根据最终的再生矩阵及用户主观行为分析模型的结构得到模型的参数,输出用户主观行为模型。
本发明所述数据挖掘单元还设有用户主观行为分析模型,用于将满足拟合度要求的参数值设置为用户主观行为模型的参数值得到最终用户主观行为分析模型,该模型还与监控模块连接,当用户主观行为分析模型的参数确定后就向监控模块输出再生矩阵,当模型更改后,才再次向监控模块输出再生矩阵。
本发明所述数据预处理单元设有数据筛选模块和归一化处理模块。
本发明通过对现有用户数据进行主观行为分析,更准确的获取用户偏好信息,进而获得监控结果,具有结构合理、处理速度快、效率高等显著的优点。
Claims (5)
1.一种基于用户主观行为分析的网络监控系统,其特征在于设有数据处理服务器,所述数据处理服务器上设有数据获取单元、数据预处理单元、数据挖掘单元、结果输出单元,所述数据挖掘单元设有模型构建模块,用于依据选取的信念指标设定用户主观行为分析模型的结构;材料收集模块,用于依据选取的信念指标编制调查问卷,并依据该调查问卷收集基于多个用户的第一样本数据;样本库,用于存放用于统计分析的样本数据;统计分析模块,用于将所述样本库输入的数据进行统计分析处理,获得各信念指标间的相关系数矩阵,将该相关系数矩阵输入模型拟合模块;并接收监控模块的相关系数查询请求,然后向该监控模块返回基于样本库所有样本数据的当前的相关系数矩阵。
2.根据权利要求1所述的一种基于用户主观行为分析的网络监控系统,其特征在于所述数据挖掘单元还设有模型拟合模块,用于将统计分析处理后的相关系数矩阵与模型构建模块设定的用户主观行为分析模型进行模型拟合处理,得到再生矩阵。
3.根据权利要求1所述的一种基于用户主观行为分析的网络监控系统,其特征在于所述数据挖掘单元还设有模型评价模块,用于计算模型拟合模块输出的再生矩阵与相关系数矩阵的拟合度结果决定是否再次触发模型拟合模块,即当拟合度小于设定拟合度时再次返回模型拟合模块进行拟合,当拟合度大于设定拟合度时停止拟合过程,并根据最终的再生矩阵及用户主观行为分析模型的结构得到模型的参数,输出用户主观行为模型。
4.根据权利要求1所述的一种基于用户主观行为分析的网络监控系统,其特征在于所述数据挖掘单元还设有用户主观行为分析模型,用于将满足拟合度要求的参数值设置为用户主观行为模型的参数值得到最终用户主观行为分析模型,该模型还与监控模块连接,当用户主观行为分析模型的参数确定后就向监控模块输出再生矩阵,当模型更改后,才再次向监控模块输出再生矩阵。
5.根据权利要求1所述的一种基于用户主观行为分析的网络监控系统,其特征在于所述数据预处理单元设有数据筛选模块和归一化处理模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511023629.9A CN105631029A (zh) | 2015-12-30 | 2015-12-30 | 基于用户主观行为分析的网络监控系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201511023629.9A CN105631029A (zh) | 2015-12-30 | 2015-12-30 | 基于用户主观行为分析的网络监控系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN105631029A true CN105631029A (zh) | 2016-06-01 |
Family
ID=56045962
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201511023629.9A Pending CN105631029A (zh) | 2015-12-30 | 2015-12-30 | 基于用户主观行为分析的网络监控系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105631029A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108804429A (zh) * | 2017-04-26 | 2018-11-13 | 广东原昇信息科技有限公司 | 一种基于深度学习的访客搜索行为特征提取方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103593543A (zh) * | 2012-08-14 | 2014-02-19 | 中国科学院声学研究所 | 一种更新p2p网络用户主观行为分析模型参数的方法及系统 |
CN104050272A (zh) * | 2014-06-25 | 2014-09-17 | 上海艾瑞市场咨询有限公司 | 跨屏幕用户行为数据统计、分析方法及装置 |
CN104461551A (zh) * | 2014-12-16 | 2015-03-25 | 芜湖乐锐思信息咨询有限公司 | 基于数据并行处理的大数据处理系统 |
-
2015
- 2015-12-30 CN CN201511023629.9A patent/CN105631029A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103593543A (zh) * | 2012-08-14 | 2014-02-19 | 中国科学院声学研究所 | 一种更新p2p网络用户主观行为分析模型参数的方法及系统 |
CN104050272A (zh) * | 2014-06-25 | 2014-09-17 | 上海艾瑞市场咨询有限公司 | 跨屏幕用户行为数据统计、分析方法及装置 |
CN104461551A (zh) * | 2014-12-16 | 2015-03-25 | 芜湖乐锐思信息咨询有限公司 | 基于数据并行处理的大数据处理系统 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108804429A (zh) * | 2017-04-26 | 2018-11-13 | 广东原昇信息科技有限公司 | 一种基于深度学习的访客搜索行为特征提取方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107800591B (zh) | 一种统一日志数据的分析方法 | |
CN111614690B (zh) | 一种异常行为检测方法及装置 | |
CN107577688B (zh) | 基于媒体信息采集的原创文章影响力分析系统 | |
WO2016054908A1 (zh) | 基于物联网大数据平台的智能用户画像方法及装置 | |
CN104881803B (zh) | 一种分析广告点击链接的方法及装置 | |
CN103838754A (zh) | 信息搜索装置及方法 | |
CN102567494B (zh) | 网站分类方法及装置 | |
CN104572449A (zh) | 一种基于用例库的自动化测试方法 | |
CN104199974A (zh) | 一种面向微博的动态主题检测与演变追踪方法 | |
US20170053031A1 (en) | Information forecast and acquisition method based on webpage link parameter analysis | |
CN105447147A (zh) | 一种数据处理方法及装置 | |
CN103530347A (zh) | 一种基于大数据挖掘的互联网资源质量评估方法及系统 | |
CN104268064A (zh) | 产品日志的异常诊断方法和装置 | |
CN104484410A (zh) | 应用于大数据系统的数据融合方法及系统 | |
CN106778851B (zh) | 基于手机取证数据的社交关系预测系统及其方法 | |
CN104252458A (zh) | 数据分析方法和装置 | |
CN102542061A (zh) | 一种产品的智能分类方法 | |
CN104732425A (zh) | 基于大数据的电商平台客户行为分析方法 | |
CN104484412A (zh) | 基于多形式处理的大数据分析系统 | |
CN116881430B (zh) | 一种产业链识别方法、装置、电子设备及可读存储介质 | |
CN105550253A (zh) | 一种类型关系的获取方法及装置 | |
CN102156746A (zh) | 搜索引擎的性能评价方法 | |
CN103164537A (zh) | 一种面向用户信息需求的搜索引擎日志数据挖掘的方法 | |
CN102663083A (zh) | 基于分布式计算的大规模社交网络信息抽取方法 | |
CN104657437A (zh) | 推广情况数据的监测方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20160601 |
|
WD01 | Invention patent application deemed withdrawn after publication |