CN108256016A - 基于个人微博的个人异常情绪检测方法及装置 - Google Patents
基于个人微博的个人异常情绪检测方法及装置 Download PDFInfo
- Publication number
- CN108256016A CN108256016A CN201810015610.7A CN201810015610A CN108256016A CN 108256016 A CN108256016 A CN 108256016A CN 201810015610 A CN201810015610 A CN 201810015610A CN 108256016 A CN108256016 A CN 108256016A
- Authority
- CN
- China
- Prior art keywords
- emotion
- designated user
- abnormal
- probability density
- joint probability
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 103
- 230000002159 abnormal effect Effects 0.000 title claims abstract description 66
- 238000001514 detection method Methods 0.000 title claims abstract description 28
- 238000009826 distribution Methods 0.000 claims abstract description 53
- 238000012706 support-vector machine Methods 0.000 claims abstract description 20
- 238000000034 method Methods 0.000 claims abstract description 13
- 230000008909 emotion recognition Effects 0.000 claims abstract description 9
- 230000002996 emotional effect Effects 0.000 claims description 16
- 238000013480 data collection Methods 0.000 claims description 15
- 241001269238 Data Species 0.000 claims description 13
- 239000011159 matrix material Substances 0.000 claims description 11
- 230000007935 neutral effect Effects 0.000 claims description 11
- 238000012360 testing method Methods 0.000 claims description 11
- 238000002790 cross-validation Methods 0.000 claims description 6
- 238000005259 measurement Methods 0.000 claims description 6
- 235000013399 edible fruits Nutrition 0.000 claims description 2
- 238000002474 experimental method Methods 0.000 claims 1
- 238000004451 qualitative analysis Methods 0.000 abstract description 4
- 238000004445 quantitative analysis Methods 0.000 abstract description 3
- 238000003491 array Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 6
- 230000036651 mood Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 2
- 206010022998 Irritability Diseases 0.000 description 1
- 210000001015 abdomen Anatomy 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 239000004744 fabric Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 230000020509 sex determination Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
- G06F16/3346—Query execution using probabilistic model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/33—Querying
- G06F16/3331—Query processing
- G06F16/334—Query execution
- G06F16/3344—Query execution using natural language analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/01—Social networking
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Computational Linguistics (AREA)
- Human Resources & Organizations (AREA)
- Primary Health Care (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Marketing (AREA)
- Probability & Statistics with Applications (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Artificial Intelligence (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Machine Translation (AREA)
Abstract
本发明提供了一种基于个人微博的个人异常情绪检测方法及装置。该方法包括:获取预设时间段内指定用户的第一预设数量条微博文本数据;利用支持向量机对第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;按照预设时间单位对第二预设数量种情感的微博文本数据进行情感分布统计,得到指定用户的多维数据集;采用多元正态分布对预设时间段的多维数据集进行拟合,得到对应情感的正态分布曲线;计算多维数据集的联合概率密度值;基于正态分布曲线和/或联合概率密度值确定指定用户的异常情绪。可见,本发明通过获取正态分布曲线和联合概率密度值可以定性和定量分析指定用户的异常情绪,能够提高检测的准确性的可靠性。
Description
技术领域
本发明涉及数据处理技术领域,尤其涉及一种基于个人微博的个人异常情绪检测方法及装置。
背景技术
目前基于个人微博的个人异常情绪检测方案主要有:
方案一,异常文本词典。该方案中将伤心、愤怒和抑郁等词收集为一个词典,然后进行情感词匹配检测出个体微博文本数据中的异常词语,进而判断出异常文本和出现异常情绪的用户。可见,异常文本词典的检测方法比较简单,检测结果准确度较高。这样检测结果只能检测出异常的情绪,但是却检测不出用户暗含的异常情绪。并且部分用户选择将微博作为宣泄的平台或者本身性格就是易怒和悲伤的,可能这部分用户所有微博都是这种状态和词汇,此时异常词典则无法准确检测。
方案二,对用户文本进行情感极性识别(正面,负面,中性),用于判断公众用户对热门事件的情感倾向,然后从标注中选择负面的文本作为异常个性判定的依据。但是社交平台上的消极内容较多,所检测出的消极微博文本数据并不一定说明该用户情绪出现了异常。例如用户对当今一些热点话题的批判或者对某件商品的吐槽等,这些是客观评述,而非异常的情绪。
发明内容
针对现有技术中的缺陷,本发明提供了一种基于个人微博的个人异常情绪检测方法及装置,用于解决相关技术中异常词典方式或者负面文本异常判定方式时无法准确检测用户异常情绪的问题。
第一方面,本发明实施例提供了一种基于个人微博的个人异常情绪检测方法,所述方法包括:
获取预设时间段内指定用户的第一预设数量条微博文本数据;
利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
计算每个多维数据集的联合概率密度值;
基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
可选地,所述第二预设数量种情感为5种,分别为中性、开心、惊讶、伤心和生气,对应的标签为0、1、2、3和4。
可选地,按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集包括:
根据支持向量机对所述第一预设数量条微博文本数据进行情感分类;
根据情感分类确定所述指定用户的五维数据集。
可选地,基于所述联合概率密度值确定所述指定用户的异常情绪包括:
对比联合概率密度值和密度值阈值;
若所述联合概率密度值小于或者等于密度值阈值,则所述指定用户的情绪异常。
可选地,选取所述密度值阈值包括:
基于第一预设数量条微博文本数据,根据所述预设时间段对应的全部预设时间单元得到多个五维数据集;
批量计算所述多个五维数据集的联合概率密度;
将所述多个五维数据集分为交叉验证集和测试集;
基于不同阈值,根据联合概率密度函数对所述交叉验证集进行实验,得到多组实验结果;
将所述多组实验结果的准确率最高对应的阈值作为所述测试集的密度值阈值。
可选地,所述联合概率密度函数采用以下公式表示:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
第二方面,本发明实施例提供了一种基于个人微博的个人异常情绪检测装置,所述装置包括:
微博文本数据获取模块,用于获取预设时间段内指定用户的第一预设数量条微博文本数据;
情感识别模块,用于利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
数据集获取模块,用于按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
正态曲线获取模块,用于采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
联合密度计算模块,用于计算每个多维数据集的联合概率密度值;
判断模块,用于基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
可选地,所述第二预设数量种情感为5种,分别为中性、开心、惊讶、伤心和生气,对应的标签为0、1、2、3和4。
可选地,所述数据集获取模块包括:
情感分类单元,用于根据支持向量机对所述第一预设数量条微博文本数据进行情感分类;
数据集确定模块,用于根据情感分类确定所述指定用户的五维数据集。
可选地,所述联合概率密度函数采用以下公式表示:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
由上述技术方案可知,本发明实施例首先获取指定用户的微博文本数据,然后对该指定用户的微博文本数据进行情感分类,之后对第二预设数量种情感的微博文本数据进行情感分布统计,这样可以得到指定用户的多维数据集;并且,继续采用多元正态分布对上述多维数据集进行拟合得到指定用户对应情感的正态分布曲线,以及对多维数据集进行联合概率密度计算得到每个多维数据集的联合概率密度值;最后基于正态分布曲线和/或联合概率密度值确定指定用户的异常情绪。可见,本发明通过获取正态分布曲线和联合概率密度值可以定性和定量分析指定用户的异常情绪,能够提高检测的准确性的可靠性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些图获得其他的附图。
图1为本发明实施例提供的基于个人微博的个人异常情绪检测方法的方法流程示意图;
图2为本发明实施例提供的支持向量机处理微博文本数据的分类模型;
图3为指定用户12的微博文本数据的多元正态分布处理结果示意图;
图4为指定用户12的异常情绪的微博文本数据;
图5为指定用户31的微博文本数据的多元正态分布处理结果示意图;
图6为指定用户31的异常情绪的微博文本数据;
图7为本发明实施例提供的基于个人微博的个人异常情绪检测装置的框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为本发明实施例提供的基于个人微博的个人异常情绪检测方法的方法流程示意图。如图1所示,该基于个人微博的个人异常情绪检测方法包括:
101,获取预设时间段内指定用户的第一预设数量条微博文本数据;
102,利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
103,按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
104,采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
105,计算每个多维数据集的联合概率密度值;
106,基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
需要说明的是,本实施例中步骤104和步骤105的顺序可以进行调整,例如先执行步骤104再执行步骤105,先执行步骤105再执行步骤104,也可以同时执行,在此不作限定。
可见,本发明将公众的微博文本数据对应的情感处理为多维数据集,然后批量计算多维数据集的联合概率密度值,可以定量的检测出异常个体,实现比较简单。
下面结合附图和实施例对本发明实施例提供的基于个人微博的个人异常情绪检测方法的各步骤作详细描述。
首先,介绍101,获取预设时间段内指定用户的第一预设数量条微博文本数据的步骤。
上述预设时间段可以为一天、一月或者一年等,本领域技术人员可以根据具体场景进行设置,在此不作限定。在一实施例中,预设时间段为多个自然月。
上述第一预设数量可以为100、1000、10000、100000等,在一实施例中,第一预设数量为1000。当然,由于指定用户的微博文本数据可以不定,因此还可以选择其所有微博文本数据。本领域技术人员可以根据具体场景进行设置,在此不作限定。
另外,本实施例中指定用户的数量可以为1名,也可以为多名,在此不作限定。
其次,介绍102,利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感的步骤。
上述第二预设数量可以为3、4、5甚至更多,本领域技术人员可以根据具体进行设置。在一实施例中,第三预设数量为5种,即第三预设数量种情感可以为中性、开心、惊讶、伤心和生气。
本发明一实施例中利用支持向量机SVM对上述1000条进行情感识别,即每条微博文本数据对应中性、开心、惊讶、伤心或者生气。如图2所示,支持向量机SVM对输入的微博文本数据进行整理,分为5个类型。为方便后续定量计算,在本发明一实施例中利用标签“0、1、2、3、4”替代上述5种情感,即采用标签“0、1、2、3、4”分别标注“中性、开心、惊讶、伤心和生气”对应的微博文本数据。将5类标签的微博文本数据进行文本向量化,进行特征选择,然后,计算各特征的权重(TF*IDF),最后进行模型训练和预测得到微博文本数据的分类结果。
可见,本发明实施例中通过支持向量机SVM从微博文本数据中提取训练集和测试集的向量特征,进而对测试集给出情感分类结果,可以确保情感分类的准确性。
再次,介绍103,按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍的步骤。
上述预设时间单元可以为一天、一月或者一年等,可以为预设时间段的部分,即预设时间段可以为预设时间的数倍,本领域技术人员可以根据具体场景进行设置,在此不作限定。在一实施例中,预设时间单元为一个自然月。
本发明一实施例对标注好的微博文本数据进行统计分类,确定指定用户每个月的多维数据集,即得到了指定用户在每个月的微博发布情况。若情感分类为5种,则多维数据集为五维数据集。
第四,介绍104,采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线的步骤。
本实施例中,采用多元正态分布(例如高斯分布)对上述五维数据集进行拟合,这样可以得到指定用户对应情感的正态分布曲线。
第五,介绍105,计算每个多维数据集的联合概率密度值的步骤。
本发明一实施例中对五维数据集批量计算联合概率密度值,计算公式为:
公式中X(k)是五维变量数据,μ是第k列数据均值,Σ是五维数据集的协方差矩阵。
本实施例中,根据批量计算的联合概率密度值,选择合适的密度值阈值,当联合概率密度小于该密度值阈值时,则判定该月份或者该月份的某一段时间内用户情感出现异常,标记异常的用户。并且,还可以根据该月份或者该月份的某一段时间内的微博文本数据检验这些用户是否确实出现异常情绪,从而提高建议模型的准确性。
需要说明的是,本发明实施例中通过以下步骤选取所述密度值阈值包括:
基于第一预设数量条微博文本数据,根据所述预设时间段对应的全部预设时间单元得到多个五维数据集;
批量计算所述多个五维数据集的联合概率密度;
将所述多个五维数据集分为交叉验证集和测试集;
基于不同阈值,根据联合概率密度函数对所述交叉验证集进行实验,得到多组实验结果;
将所述多组实验结果的准确率最高对应的阈值作为所述测试集的密度值阈值。
最后,介绍106,基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪的步骤。
本实施例中可以根据正态分布曲线对指定用户的情感进行定性分析,也可以根据联合概率密度值对指定用户的情感进行定量分析,还可以根据正态分布曲线和联合概率密度值对指定用户的情感进行定量和定性分析。
实施例一
本实施例中指定用户12的微博文本数据为例。利用支持向量机识别微博文本数据的情感并标记,得到如表1所示的微博文本数据分类标注。
表1指定用户12的微博情感分类标注
然后,按照每个月统计指定用户12的五维情感,得到每一种情感的微博文本条数,如表2所示。
表2五维情感统计以及联合概率密度值
之后,对指定用户12的中性类微博文本数据进行正态分布拟合,得到图3所示的正态分布曲线。
然后,根据以下公式对多维数据集进行联合概率密度计算,得到每个多维数据集的联合概率密度值。公式如下:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
在一实施例中,其中一组的多维数据集的联合概率密度值的算法如下:
输入:
o Data:D x N数组,代表N个D维的数据样本;
o Mu:D x K数组,代表数据集的均值;
o Sigma:D x D x K数组,代表数据集的协方差矩阵;
输出:
o prob:1 x N数组,表示N个数据点的概率密度;
matlab代码:
Mu=mean(Data,1)%按维度求均值;
Sigma=cov(Data)%求矩阵协方差;
Data=Data'-repmat(Mu',nbData,1);
%求联合概率密度
prob=sum((Data*inv(Sigma)).*Data,2);
prob=exp(-0.5*prob)/sqrt((2*pi)^nbVar*(abs(det(Sigma))+realmin))。
本实施例按照联合概率密度函数公式计算上述五维数据集的联合概率密度,如表2最后一列的数据所示。
根据设定的密度值阈值(4e-05),标注异常的用户,如表2标示用户,对应的联合概率密度值为3.40e-06。
通过结合正态分布图和联合概率密度值,可以定性定量地分析用户的异常情绪。如图3所示,用户12每个月微博数目发布整体偏稀疏,均在0,1,2这些数目附近,但是在高斯分布的右端处,出现了异常数目的微博数:10。而通过表2可以进一步看出,用户12的微博数据在2013年5月份,联合概率密度值为3.4e-06,明显低于其他组,进一步从整体数据分布上看,2013年5月份出现异常情绪。最后结合该用户在2013年5月的微博文本数据验证是否出现异常情感,如图4所示,出现情绪异常字眼,包括“今天肯定很累了”“天都亮了,真是的发神马呆想神马想,还没有睡着。。肚子都饿了,唉。。。日子不好过,度日如年啊啊啊”“......教练战术要求队员节操全无,唉。。”。
实施例二
本实施例中以指定用户31的微博文本数据为例。利用支持向量机识别微博文本数据的情感并标记,利用支持向量机识别微博文本数据的情感,获取如表3所示的五维数据集(部分)。
表3、用户31五类微博情感数据统计以及联合概率密度
用户31 | 中性 | 开心 | 惊讶 | 伤心 | 生气 | 联合概率密度 |
Jan-14 | 0 | 0 | 1 | 0 | 0 | 9.28E-04 |
Nov-13 | 0 | 0 | 1 | 0 | 0 | 9.28E-04 |
Jun-13 | 1 | 0 | 0 | 0 | 0 | 4.81E-04 |
May-13 | 5 | 2 | 0 | 3 | 0 | 9.84E-05 |
Apr-13 | 5 | 2 | 1 | 1 | 0 | 1.82E-03 |
Mar-13 | 11 | 3 | 4 | 2 | 1 | 8.54E-05 |
Feb-13 | 9 | 7 | 4 | 7 | 4 | 7.92E-05 |
Jan-13 | 5 | 7 | 0 | 3 | 3 | 9.06E-05 |
Apr-12 | 1 | 3 | 0 | 0 | 0 | 1.81E-04 |
Mar-12 | 2 | 2 | 0 | 0 | 0 | 1.96E-03 |
本实施例中对上述五维数据集进行多元正态分布处理,如图5所示。本案例中五维数据的联合概率密度的计算过程如下:
输入:
o Data:D x N数组,代表N个D维的数据样本;
o Mu:D x K数组,代表数据集的均值;
o Sigma:D x D xK数组,代表数据集的协方差矩阵;
输出:
o prob:1 x N数组,表示N个数据点的概率密度。
matlab代码:
Mu=mean(Data,1)%按维度求均值;
Sigma=cov(Data)%求矩阵协方差;
Data=Data'-repmat(Mu',nbData,1);
%求联合概率密度
prob=sum((Data*inv(Sigma)).*Data,2);
prob=exp(-0.5*prob)/sqrt((2*pi)^nbVar*(abs(det(Sigma))+realmin))。
本实施例利用多元正态分布,定性分析用户个性;利用联合概率密度值指标,来定量分析用户个性。如图5所示,用户31每个月微博数目发布比较均匀,但是在高斯分布的右端处,出现了异常数目的微博数两个异常数目:9和11。而通过表3可以进一步看出,用户31的微博数据在2013年5月,2013年2月,2013年1月,联合概率密度值分别为9.84E-05,7.92E-05,9.06E-05,明显低于其他组,进一步从整体数据分布上说明这些月份用户情绪出现异常。通过对微博文本数据进行验证,如图6所示,发现出现异常字眼和情绪包括:“敲诈”“危害”“民事诉讼”“派出所”等。
本发明实施例还提供了一种基于个人微博的个人异常情绪检测装置,如图7所示,所述装置包括:
微博文本数据获取模块701,用于获取预设时间段内指定用户的第一预设数量条微博文本数据;
情感识别模块702,用于利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
数据集获取模块703,用于按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
正态曲线获取模块704,用于采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
联合密度计算模块705,用于计算每个多维数据集的联合概率密度值;
判断模块706,用于基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
可选地,所述第二预设数量种情感为5种,分别为中性、开心、惊讶、伤心和生气,对应的标签为0、1、2、3和4。
可选地,所述数据集获取模块包括:
情感分类单元,用于根据支持向量机对所述第一预设数量条微博文本数据进行情感分类;
数据集确定模块,用于根据情感分类确定所述指定用户的五维数据集。
可选地,所述联合概率密度函数采用以下公式表示:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
需要说明的是,本发明实施例提供的基于个人微博的个人异常情绪检测装置与上述方法是一一对应的关系,上述方法的实施细节同样适用于上述装置,本发明实施例不再对上述系统进行详细说明。
本发明的说明书中,说明了大量具体细节。然而,能够理解,本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中,并未详细示出公知的方法、结构和技术,以便不模糊对本说明书的理解。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。
Claims (10)
1.一种基于个人微博的个人异常情绪检测方法,其特征在于,所述方法包括:
获取预设时间段内指定用户的第一预设数量条微博文本数据;
利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
计算每个多维数据集的联合概率密度值;
基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
2.根据权利要求1所述的个人异常情绪检测方法,其特征在于,所述第二预设数量种情感为5种,分别为中性、开心、惊讶、伤心和生气,对应的标签为0、1、2、3和4。
3.根据权利要求1所述的个人异常情绪检测方法,其特征在于,按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集包括:
根据支持向量机对所述第一预设数量条微博文本数据进行情感分类;
根据情感分类确定所述指定用户的五维数据集。
4.根据权利要求1所述的个人异常情绪检测方法,其特征在于,基于所述联合概率密度值确定所述指定用户的异常情绪包括:
对比联合概率密度值和密度值阈值;
若所述联合概率密度值小于或者等于密度值阈值,则所述指定用户的情绪异常。
5.根据权利要求4所述的个人异常情绪检测方法,其特征在于,选取所述密度值阈值包括:
基于第一预设数量条微博文本数据,根据所述预设时间段对应的全部预设时间单元得到多个五维数据集;
批量计算所述多个五维数据集的联合概率密度;
将所述多个五维数据集分为交叉验证集和测试集;
基于不同阈值,根据联合概率密度函数对所述交叉验证集进行实验,得到多组实验结果;
将所述多组实验结果的准确率最高对应的阈值作为所述测试集的密度值阈值。
6.根据权利要求4所述的个人异常情绪检测方法,其特征在于,所述联合概率密度函数采用以下公式表示:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
7.一种基于个人微博的个人异常情绪检测装置,其特征在于,所述装置包括:
微博文本数据获取模块,用于获取预设时间段内指定用户的第一预设数量条微博文本数据;
情感识别模块,用于利用支持向量机对所述第一预设数量条微博文本数据进行情感识别并标注,得到第二预设数量种情感;
数据集获取模块,用于按照预设时间单位对所述第二预设数量种情感的微博文本数据进行情感分布统计,得到所述指定用户的多维数据集;所述预设时间段的长度为所述预设时间单位的数倍;
正态曲线获取模块,用于采用多元正态分布对所述预设时间段的多维数据集进行拟合,得到所述指定用户对应情感的正态分布曲线;
联合密度计算模块,用于计算每个多维数据集的联合概率密度值;
判断模块,用于基于所述正态分布曲线和/或所述联合概率密度值确定所述指定用户的异常情绪。
8.根据权利要求7所述的个人异常情绪检测装置,其特征在于,所述第二预设数量种情感为5种,分别为中性、开心、惊讶、伤心和生气,对应的标签为0、1、2、3和4。
9.根据权利要求7所述的个人异常情绪检测装置,其特征在于,所述数据集获取模块包括:
情感分类单元,用于根据支持向量机对所述第一预设数量条微博文本数据进行情感分类;
数据集确定模块,用于根据情感分类确定所述指定用户的五维数据集。
10.根据权利要求4所述的个人异常情绪检测方法,其特征在于,所述联合概率密度函数采用以下公式表示:
公式中,X(k)是五维变量集,μ是第k列数据均值,Σ是五维数据集的协方差矩阵,协方差是度量各个维度偏离其均值的程度。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810015610.7A CN108256016A (zh) | 2018-01-08 | 2018-01-08 | 基于个人微博的个人异常情绪检测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810015610.7A CN108256016A (zh) | 2018-01-08 | 2018-01-08 | 基于个人微博的个人异常情绪检测方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108256016A true CN108256016A (zh) | 2018-07-06 |
Family
ID=62725992
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810015610.7A Pending CN108256016A (zh) | 2018-01-08 | 2018-01-08 | 基于个人微博的个人异常情绪检测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108256016A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109918556A (zh) * | 2019-03-08 | 2019-06-21 | 北京工业大学 | 一种综合微博用户社交关系和微博文本特征抑郁情绪识别方法 |
CN110393539A (zh) * | 2019-06-21 | 2019-11-01 | 合肥工业大学 | 心理异常检测方法、装置、存储介质及电子设备 |
CN112419029A (zh) * | 2020-11-27 | 2021-02-26 | 诺丁汉(宁波保税区)区块链有限公司 | 类金融机构风险监控方法、风险模拟系统及存储介质 |
CN112559743A (zh) * | 2020-12-09 | 2021-03-26 | 深圳市网联安瑞网络科技有限公司 | 一种政企网络支持度的计算方法、装置、设备及存储介质 |
CN113822184A (zh) * | 2021-09-08 | 2021-12-21 | 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) | 一种基于表情识别的无感情绪异常检测方法 |
CN115906810A (zh) * | 2022-12-13 | 2023-04-04 | 中科世通亨奇(北京)科技有限公司 | 基于时间序列和观点挖掘的异常言论分析方法及设备 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104268197A (zh) * | 2013-09-22 | 2015-01-07 | 中科嘉速(北京)并行软件有限公司 | 一种行业评论数据细粒度情感分析方法 |
WO2016182156A1 (ko) * | 2015-05-14 | 2016-11-17 | 디투이모션 주식회사 | 이상 활동 탐지를 위한 이동 단말기 및 이를 포함하는 시스템 |
-
2018
- 2018-01-08 CN CN201810015610.7A patent/CN108256016A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104268197A (zh) * | 2013-09-22 | 2015-01-07 | 中科嘉速(北京)并行软件有限公司 | 一种行业评论数据细粒度情感分析方法 |
WO2016182156A1 (ko) * | 2015-05-14 | 2016-11-17 | 디투이모션 주식회사 | 이상 활동 탐지를 위한 이동 단말기 및 이를 포함하는 시스템 |
Non-Patent Citations (1)
Title |
---|
XIAO SUN 等: "Detecting users’ anomalous emotion using social media for business intelligence", 《JOURNAL OF COMPUTATIONAL SCIENCE》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109918556A (zh) * | 2019-03-08 | 2019-06-21 | 北京工业大学 | 一种综合微博用户社交关系和微博文本特征抑郁情绪识别方法 |
CN109918556B (zh) * | 2019-03-08 | 2021-06-25 | 北京工业大学 | 一种综合微博用户社交关系和文本特征抑郁情绪识别方法 |
CN110393539A (zh) * | 2019-06-21 | 2019-11-01 | 合肥工业大学 | 心理异常检测方法、装置、存储介质及电子设备 |
CN110393539B (zh) * | 2019-06-21 | 2021-11-23 | 合肥工业大学 | 心理异常检测方法、装置、存储介质及电子设备 |
CN112419029A (zh) * | 2020-11-27 | 2021-02-26 | 诺丁汉(宁波保税区)区块链有限公司 | 类金融机构风险监控方法、风险模拟系统及存储介质 |
CN112559743A (zh) * | 2020-12-09 | 2021-03-26 | 深圳市网联安瑞网络科技有限公司 | 一种政企网络支持度的计算方法、装置、设备及存储介质 |
CN112559743B (zh) * | 2020-12-09 | 2024-02-13 | 深圳市网联安瑞网络科技有限公司 | 一种政企网络支持度的计算方法、装置、设备及存储介质 |
CN113822184A (zh) * | 2021-09-08 | 2021-12-21 | 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) | 一种基于表情识别的无感情绪异常检测方法 |
CN115906810A (zh) * | 2022-12-13 | 2023-04-04 | 中科世通亨奇(北京)科技有限公司 | 基于时间序列和观点挖掘的异常言论分析方法及设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108256016A (zh) | 基于个人微博的个人异常情绪检测方法及装置 | |
CN102693219B (zh) | 一种中文事件的抽取方法及系统 | |
CN105488142B (zh) | 成绩信息录入方法及系统 | |
Zhang et al. | University of Illinois at Urbana–Champaign | |
CN109670542A (zh) | 一种基于评论外部信息的虚假评论检测方法 | |
CN108614855A (zh) | 一种谣言识别方法 | |
CN110059183B (zh) | 一种基于大数据的汽车行业用户观点情感分类方法 | |
CN102541838B (zh) | 用于优化情感分类器的方法和设备 | |
CN103631961A (zh) | 一种情感词与评价对象的关系识别方法 | |
CN110502277A (zh) | 一种基于bp神经网络的代码坏味检测方法 | |
CN107818298A (zh) | 用于机器学习物质识别算法的通用拉曼光谱特征提取方法 | |
CN108280164A (zh) | 一种基于类别相关单词的短文本过滤与分类方法 | |
CN109033402A (zh) | 安全领域专利文本的分类方法 | |
Gong et al. | Vocalsound: A dataset for improving human vocal sounds recognition | |
CN112015862A (zh) | 基于层级多通道注意力的用户异常评论检测方法及系统 | |
KR102484007B1 (ko) | 국어 텍스트 자동 분석을 통한 독해지수 측정 방법 및 시스템 | |
CN105786898B (zh) | 一种领域本体的构建方法和装置 | |
CN101882136A (zh) | 文本情感倾向性分析方法 | |
CN109933648A (zh) | 一种真实用户评论的区分方法和区分装置 | |
CN109800309A (zh) | 课堂话语类型分类方法及装置 | |
CN103324758A (zh) | 一种新闻分类方法和系统 | |
CN106681986A (zh) | 一种多维度情感分析系统 | |
CN110866087B (zh) | 一种基于主题模型的面向实体的文本情感分析方法 | |
CN103578480A (zh) | 负面情绪检测中的基于上下文修正的语音情感识别方法 | |
CN107943966A (zh) | 基于微博文本的异常个性判定方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180706 |