CN104881402B - 中文网络话题评论文本语义倾向分析的方法及装置 - Google Patents
中文网络话题评论文本语义倾向分析的方法及装置 Download PDFInfo
- Publication number
- CN104881402B CN104881402B CN201510296299.4A CN201510296299A CN104881402B CN 104881402 B CN104881402 B CN 104881402B CN 201510296299 A CN201510296299 A CN 201510296299A CN 104881402 B CN104881402 B CN 104881402B
- Authority
- CN
- China
- Prior art keywords
- sentence
- sentiment orientation
- phrase
- orientation value
- evaluation object
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Document Processing Apparatus (AREA)
- Machine Translation (AREA)
Abstract
本发明公开了一种中文网络话题评论文本语义倾向分析的方法及装置。该方法包括:对中文网络话题评论文本进行分词和分句,获得结果序列;对结果序列进行句法分析和语法分析,获得评价对象;对结果序列进行句式分析,确定评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,并确定句式分析的第一情感倾向值;针对结果序列中的每个句子,根据评价对象和预设的短语搭配模式提取每个句子中的情感短语,并计算情感短语的第二情感倾向值;根据第一情感倾向值及第二情感倾向值,计算评论文本中的每个句子的第三情感倾向值;根据第三情感倾向值确定评论文本的文本情感倾向值。本发明提高了网络话题评论文本的语义倾向分析的准确率和召回率。
Description
技术领域
本发明实施例涉及自然语言处理技术,尤其涉及一种中文网络话题评论文本语义倾向分析的方法及装置。
背景技术
随着网络的飞速发展,网上的各种各样的文章和言论信息量越来越大,使文本倾向性分析逐渐成为了近几年热门的研究课题。目前,在这个领域中主要有几个主要的研究方向,其中观点提取和词汇倾向性分类为倾向分析核心技术,文本倾向性分类和主客观分类也是倾向分析研究方向重要分支。而关于情感倾向分析中的研究思路主要为采用机器学习的方法、基于语义的方法和结合语义和机器学习的方法。
文本的情感倾向分析方法中,基于机器学习的方法需要大量的人工标注语料、建立训练样本集和训练分类模型的工作,工作繁重而复杂,而取得的分类效果在部分领域与语义分析的效果差距不大,对于网络文本的准确率和召回率各为86%和85.2%。基于语义的分析方法比较单一,大都基于比较固定的语法模式。其中语义的分析方法中处理最基本的单位是情感词,随着网络文本的多样化,情感词提取并不能达到很高的准确率,对于网络文本的准确率和召回率各为84.2%和84.1%。
因此,现有技术中,文本语义倾向分析的方法或多或少都存在准确率和召回率低的问题。
发明内容
有鉴于此,本发明实施例提供一种中文网络话题评论文本语义倾向分析的方法及装置,以提高网络话题评论文本的语义倾向分析的准确率和召回率。
第一方面,本发明实施例提供了一种中文网络话题评论文本语义倾向分析的方法,所述方法包括:
对中文网络话题评论文本进行分词和分句,获得结果序列;
对所述结果序列进行句法分析和语法分析,获得评价对象;
对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值;
针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值;
根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值;
根据第三情感倾向值确定所述评论文本的文本情感倾向值。
进一步地,还包括:
基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
进一步地,对所述结果序列进行句法分析和语法分析,获得评价对象,包括:
利用LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树,其中,所述依存句法分析树包括SBV、VOB和/或ATT;
查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象;
当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象;
当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象;
当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
进一步地,根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值,具体包括:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于评价对象的第三情感倾向值。
进一步地,根据第三情感倾向值确定所述评论文本的文本情感倾向值,具体包括:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
第二方面,本发明实施例还提供了一种中文网络话题评论文本语义倾向分析的装置,所述装置包括:
分词分句模块,用于对中文网络话题评论文本进行分词和分句,获得结果序列;
评价对象提取模块,用于对所述结果序列进行句法分析和语法分析,获得评价对象;
句式分析模块,用于对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值;
情感短语提取模块,用于针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值;
句子情感倾向计算模块,用于根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值;
文本情感倾向计算模块,用于根据第三情感倾向值确定所述评论文本的文本情感倾向值。
进一步地,还包括:
短语搭配模式获取模块,用于基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
进一步地,所述评价对象提取模块包括:
句法分析单元,用于利用LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树,其中,所述依存句法分析树包括SBV、VOB和/或ATT;
第一查找单元,用于查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象;
第二查找单元,用于当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象;
第三查找单元,用于当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象;
语法分析单元,用于当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
进一步地,所述句子情感倾向计算模块具体用于:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于评价对象的第三情感倾向值。
进一步地,所述文本情感倾向计算模块具体用于:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
本发明实施例提供的中文网络话题评论文本语义倾向分析的方法及装置,通过对中文网络话题评论文本分词和分句后得到结果序列,对所述结果序列进行句法分析和语法分析得到评价对象,对所述结果序列进行句式分析确定句式分析的第一情感倾向值,提取每个句子中的情感短语,并确定所述情感短语的第二情感倾向值,根据第一情感倾向值和第二情感倾向值计算每个句子相对于评价对象的第三情感倾向值,根据第三情感倾向值确定所述评论文本的文本情感倾向值,由于采用了情感短语与句式分析向结合的方式确定评论文本的情感倾向值,提高了网络话题评论文本的语义倾向分析的准确率和召回率。
附图说明
图1是本发明实施例一提供的一种中文网络话题评论文本语义倾向分析的方法的流程图;
图2是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的获得评价对象的流程图;
图3是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的利用LTP进行句法分析的结果示意图;
图4是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的Stanford Parser进行语法分析后的结果示意图;
图5是本发明实施例二提供的一种中文网络话题评论文本语义倾向分析的装置的示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容。
实施例一
图1是本发明实施例一提供的一种中文网络话题评论文本语义倾向分析的方法的流程图,本实施例可适用于对中文网络话题中的评论文本进行语义倾向分析,该方法可以由计算机来执行,具体包括如下步骤:
步骤110,对中文网络话题评论文本进行分词和分句,获得结果序列。
中文网络话题评论文本最基本的组成单位是词和句子,因此首先对评论文本进行分词和分句,获得分词和分句处理后的结果序列。在所述结果序列中,评论文本分句后的各个句子已经分隔开,每个句子中的各个词语通过空格分隔开。
步骤120,对所述结果序列进行句法分析和语法分析,获得评价对象。
在对网络话题评论文本的分析中,最重要的是对其中的句子进行分析,因此,首先对所述结果序列中的每个句子进行句法分析,得到每个句子中的SBV(subject-verb,主谓结构)关系对、VOB(verb-object,动宾结构)关系对和/或ATT(attribute,定中结构)关系对,依次提取出每个关系对中的名词或者名词短语,该名词或者名词短语为评价对象;当一个句子中同时不存在SBV关系对、VOB关系对和ATT关系对时,对该句子进行语法分析,提取出该句子中的名词或者名词短语,该名词或者名词短语为评价对象。
通过提取评价对象,判断网络文本相对于所述评价对象的情感倾向,可以进一步提高情感倾向分析的准确率。
图2是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的获得评价对象的流程图,如图2所示,对所述结果序列进行句法分析和语法分析,获得评价对象,包括如下步骤:
步骤121,利用LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树。
其中,所述依存句法分析树包括SBV、VOB和/或ATT。
其中,LTP(Language Technology Platform,语言技术平台)是哈工大社会计算与信息检索研究中心开发的一整套中文语言处理系统。
利用LTP对待处理的句子进行句法分析后,得到一棵结构化的依存句法分析树,所述依存句法分析树描述了各个词语之间的相互联系,利用LTP对待处理句子做句法分析,可以有效地分析句子的内部语法结构并提取组成句子的词语间的语法关系。以“我不同意楼主的意思,我们要勿以善小而不为!”为例,进行LTP依存句法分析后的结构如图3所示。图3是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的利用LTP进行句法分析的结果示意图。在图3中,ROOT表示待处理文本的语句,HED(head)表示核心,SBV表示主谓结构,ADV(adverbial)表示状中结构,VOB表示动宾结构,ATT表示定中结构,CNJ(conjunctive)表示关联结构,POB(preposition-object)表示介宾关系,DE表示“的”字结构,IC(independent clause)表示独立分句。
步骤122,查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象。
步骤123,当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象。
步骤124,当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象。
步骤125,当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
当句子中没有SBV关系对、VOB关系对和ATT关系对时,则利用Stanford Parser语法分析对句子进行分析,此类句子通常都是短小的句子,句子中紧急有情感词或名词。利用Stanford Parser语法分析提取出名词或者名词短语,对提取出的名词或者名词短语进行过滤,在该名词或者名词短语所在的句子中,如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。其中,具有情感倾向的词语是指情感词典中存在的词语。
其中,Stanford Parser是斯坦福大学自然语言研究小组推出的语法解析工具,包括PCFG(Probabilistic Context Free Grammar,概率上下文无关文法)解析器、词库PCFG解析器和内容依赖解析器,实现语言为JAVA,并且对中文的语法分析相对于LTP句法分析器来说更具优势。以“苹果手机用起来感觉真不错。”为例,用Stanford Parser做语法分析后的结果如图4所示。图4是本发明实施例提供的中文网络话题评论文本语义倾向分析的方法中的Stanford Parser进行语法分析后的结果示意图。在图4中,ROOT表示待处理文本的语句,IP表示简单从句,NP表示名词短语,VP表示动词短语,PU表示断句符,通常是句号、问号、感叹号等标点符号,NN表示常用名词,VV表示动词,VA表示表语形容词,ADVP表示副词短语,AD表示副词,VCD表示动词基数词。
步骤130,对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值。
其中,句式分析的第一情感倾向值是对每个句子单独定义的,即每个句子有一个情感倾向值。组成复句的各个单句之间的关系包括并列、递进、转折、选择、假设、条件、因果和否定等,假设P为所判断句子的情感倾向值,则复句的句子情感倾向值可以表示为表1。从表1中可以看出,并列关系、选择关系、条件关系和因果关系的复句中的句子情感倾向值与其包含的单句的情感倾向值相同;转折关系和否定关系的复句中的句子情感倾向值与其包含的单句的情感倾向值相反;递进关系的复句中的句子情感倾向值是其包含的单句的情感倾向值再加上0.5;假设关系的复句的句子情感倾向值是无,即为0,即不具有情感倾向。其中,具体的句子的情感倾向值的计算与其包含的情感短语的情感倾向值相关,上述的句子情感倾向值P可以理解为该句子所包含的情感短语的情感倾向值之和。
表1复句的句子情感倾向值
在单句中,句式分析的第一情感倾向值为1,在复句中,句式分析的第一情感倾向值与其包含的单句的情感倾向值有关,如表1所示,可以得到并列关系、选择关系、条件关系和因果关系的复句的句式分析的第一情感倾向值为1;转折关系和否定关系的复句的句式分析的第一情感倾向值为-1;递进关系的复句的句式分析的第一情感倾向值为1.5;假设关系的复句的句式分析的第一情感倾向值是0。
其中,情感倾向包括正向和负向,即对于网络论坛中楼主发起的帖子,回帖的情感倾向为支持或者不支持。
步骤140,针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值。
在现有技术中的文本倾向分析中,仅仅依赖于单个情感词来判断文本倾向,由于仅仅利用单个情感词来判断会忽略一些重要信息(如情感词所针对的评价对象等重要因素),导致分析的准确率较低。
本发明实施例对网络话题评论文本的情感倾向的判断采用包括评价对象的情感短语来进行判断,其中,情感短语是指文本中能表达情感特征的短语。
针对所述结果序列中的每个句子,根据一个句子中的评价对象和预设的短语搭配模式提取出该句子中的情感短语,并根据所述短语搭配模式的权重计算该句子中的情感短语的第二情感倾向值,所述短语搭配模式的权重即为相应的情感短语的第二情感倾向值。
步骤150,根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值。
根据句式分析的第一情感倾向值及情感短语的第二情感倾向值,计算所述评论文本中的每个句子相对于该句子中的评价对象的第三情感倾向值。
其中,根据第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值,具体包括:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于该句子中的评价对象的第三情感倾向值。
所述第三情感倾向值的计算公式如下:
其中,i为变量,表示评论文本中的第i个句子,P(i)为评论文本中的第i个句子的第三情感倾向值,S(i)为评论文本中的第i个句子句式分析的第一情感倾向值,m为评论文本中的第i个句子所包含的情感短语的数量,k为变量,表示评论文本中的第i个句子中的第k个情感短语,dk为评论文本中的第i个句子所包含的第k个情感短语的第二情感倾向值。
步骤160,根据第三情感倾向值确定所述评论文本的文本情感倾向值。
其中,根据第三情感倾向值确定所述评论文本的文本情感倾向值,具体包括:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
选取1000篇网络话题文本,分别利用本实施例中描述的情感短语(即短语模式)单独判断文本的语义倾向,句式分析(即句子模式)单独判断文本的语义倾向,结合情感短语和句式分析判断文本的语义倾向,所得实验结果如表2所示。在表2中,S表示正确率,R表示召回率。从表2可知,本实施例中采用情感短语和句式分析相结合进行情感倾向判断的方式可以取得较高的准确率和召回率。
表2实验结果
其中,利用情感短语判断文本的语义倾向时,文本情感倾向值为该文本所包含的所有情感短语的情感倾向值之和。
本实施例通过对中文网络话题评论文本分词和分句后得到结果序列,对所述结果序列进行句法分析和语法分析得到评价对象,对所述结果序列进行句式分析确定句式分析的第一情感倾向值,提取每个句子中的情感短语,并确定所述情感短语的第二情感倾向值,根据第一情感倾向值和第二情感倾向值计算每个句子相对于评价对象的第三情感倾向值,根据第三情感倾向值确定所述评论文本的文本情感倾向值,由于采用了情感短语与句式分析向结合的方式确定评论文本的情感倾向值,提高了网络话题评论文本的语义倾向分析的准确率和召回率。
在上述技术方案的基础上,还优选包括:
基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
基于预设篇数(如1000篇)的网络话题,对短语搭配模式的出现次数进行统计,选取出现频率较高的短语搭配模式为预设的短语搭配模式,短语搭配模式在判断文本中出现的频率即为权重。
在针对网络话题的评论文本的倾向判断中,短语搭配模式在文本中出现的类型在一定时期内变化不大。在计算短语搭配模式的情感倾向及其频率时,根据短语搭配模式分别出现在正向和负向情感倾向文本中的次数进行计算,即通过比较同短语搭配模式在正向情感倾向的文本中出现的次数和在负向情感倾向的文本中出现的次数,确定该短语搭配模式的情感倾向及其频率。以1000篇热点新闻话题的帖子为例,选择正向和负向文本各500篇,得到的短语搭配模式如表3所示。
表3选取的短语搭配模式
实施例二
图5是本发明实施例二提供的一种中文网络话题评论文本语义倾向分析的装置的示意图,如图5所示,本实施例提供的文网络话题评论文本语义倾向分析的装置包括:分词分句模块510、评价对象提取模块520、句式分析模块530、情感短语提取模块540、句子情感倾向计算模块550和文本情感倾向计算模块560。
其中,分词分句模块510用于对中文网络话题评论文本进行分词和分句,获得结果序列;
评价对象提取模块520用于对所述结果序列进行句法分析和语法分析,获得评价对象;
句式分析模块530用于对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值;
情感短语提取模块540用于针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值;
句子情感倾向计算模块550用于根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值;
文本情感倾向计算模块560用于根据第三情感倾向值确定所述评论文本的文本情感倾向值。
优选的,还包括:
短语搭配模式获取模块,用于基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
优选的,所述评价对象提取模块包括:
句法分析单元,用于利用LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树,其中,所述依存句法分析树包括SBV、VOB和/或ATT;
第一查找单元,用于查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象;
第二查找单元,用于当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象;
第三查找单元,用于当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象;
语法分析单元,用于当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
优选的,所述句子情感倾向计算模块具体用于:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于评价对象的第三情感倾向值。
优选的,所述文本情感倾向计算模块具体用于:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
上述产品可执行本发明任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。
Claims (8)
1.一种中文网络话题评论文本语义倾向分析的方法,其特征在于,所述方法包括:
对中文网络话题评论文本进行分词和分句,获得结果序列;
对所述结果序列进行句法分析和语法分析,获得评价对象;
对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值;
针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值;
根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值;
根据第三情感倾向值确定所述评论文本的文本情感倾向值;
其中,对所述结果序列进行句法分析和语法分析,获得评价对象,包括:
利用语言技术平台LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树,其中,所述依存句法分析树包括主谓结构SBV、动宾结构VOB和/或定中结构ATT;
查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象;
当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象;
当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象;
当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
2.根据权利要求1所述的方法,其特征在于,还包括:
基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
3.根据权利要求1所述的方法,其特征在于,根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值,具体包括:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于评价对象的第三情感倾向值。
4.根据权利要求1所述的方法,其特征在于,根据第三情感倾向值确定所述评论文本的文本情感倾向值,具体包括:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
5.一种中文网络话题评论文本语义倾向分析的装置,其特征在于,所述装置包括:
分词分句模块,用于对中文网络话题评论文本进行分词和分句,获得结果序列;
评价对象提取模块,用于对所述结果序列进行句法分析和语法分析,获得评价对象;
句式分析模块,用于对所述结果序列进行句式分析,确定所述评论文本中的单句和复句,并判断组成复句的各个单句之间的关系,根据所述评论文本中的单句和组成复句的各个单句之间的关系确定句式分析的第一情感倾向值;
情感短语提取模块,用于针对所述结果序列中的每个句子,根据所述评价对象和预设的短语搭配模式提取每个句子中的情感短语,并根据所述短语搭配模式的权重计算所述情感短语的第二情感倾向值;
句子情感倾向计算模块,用于根据所述第一情感倾向值及第二情感倾向值,计算所述评论文本中的每个句子相对于评价对象的第三情感倾向值;
文本情感倾向计算模块,用于根据第三情感倾向值确定所述评论文本的文本情感倾向值;
其中,所述评价对象提取模块包括:
句法分析单元,用于利用LTP对所述评论文本中的句子进行句法分析,得到依存句法分析树,其中,所述依存句法分析树包括SBV、VOB和/或ATT;
第一查找单元,用于查找句子中的SBV关系对,在所述SBV关系对中,当谓语为形容词时,主语为评价对象;当谓语为动词时,查找句子中含有所述动词的VOB关系对,在所述VOB关系对中,当宾语为名词或者名词短语时,宾语为评价对象;
第二查找单元,用于当句子中没有SBV关系对时,查找VOB关系对,在所述VOB关系对中,当谓语情感倾向值不为0且宾语为名词时,宾语为评价对象;
第三查找单元,用于当句子中没有SBV关系对和VOB关系对时,查找ATT关系对,当所述ATT关系对修饰的词语为名词,且定语的情感倾向值不为0时,所述定语修饰的词语为评价对象;
语法分析单元,用于当句子中没有SBV关系对、VOB关系对和ATT关系对时,利用语法分析提取出名词或者名词短语,在该名词或者名词短语所在的句子中如果存在具有情感倾向的词语,则该名词或者名词短语为评价对象。
6.根据权利要求5所述的装置,其特征在于,还包括:
短语搭配模式获取模块,用于基于预设篇数的网络话题,进行短语搭配模式的出现次数统计,以获取所述短语搭配模式及其权重。
7.根据权利要求5所述的装置,其特征在于,所述句子情感倾向计算模块具体用于:
在一个句子中,该句子中所有情感短语的第二情感倾向值相加后的结果与第一情感倾向值相乘,所得结果为该句子相对于评价对象的第三情感倾向值。
8.根据权利要求5所述的装置,其特征在于,所述文本情感倾向计算模块具体用于:
所述评论文本中的所有句子相对于评价对象的第三情感倾向值累加得到所述评论文本的文本情感倾向值。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510296299.4A CN104881402B (zh) | 2015-06-02 | 2015-06-02 | 中文网络话题评论文本语义倾向分析的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510296299.4A CN104881402B (zh) | 2015-06-02 | 2015-06-02 | 中文网络话题评论文本语义倾向分析的方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104881402A CN104881402A (zh) | 2015-09-02 |
CN104881402B true CN104881402B (zh) | 2018-01-09 |
Family
ID=53948897
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510296299.4A Active CN104881402B (zh) | 2015-06-02 | 2015-06-02 | 中文网络话题评论文本语义倾向分析的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104881402B (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108021548A (zh) * | 2016-10-28 | 2018-05-11 | 北京国双科技有限公司 | 一种情感特征的识别方法及装置 |
CN108121734A (zh) * | 2016-11-29 | 2018-06-05 | 北京国双科技有限公司 | 文本的情感倾向判断方法及装置 |
CN108319581B (zh) * | 2017-01-17 | 2021-10-08 | 科大讯飞股份有限公司 | 一种自然语言语句评价方法及装置 |
CN106874451A (zh) * | 2017-02-13 | 2017-06-20 | 长沙军鸽软件有限公司 | 一种自动建立个人专属语料库的方法 |
CN106657157B (zh) * | 2017-02-13 | 2020-04-07 | 长沙军鸽软件有限公司 | 一种从会话内容中提取会话对的方法 |
CN107168948A (zh) * | 2017-04-19 | 2017-09-15 | 广州视源电子科技股份有限公司 | 一种语句识别方法与系统 |
CN107291689A (zh) * | 2017-05-31 | 2017-10-24 | 温州市鹿城区中津先进科技研究院 | 一种基于大数据中文网络评论语句主题语义倾向的分析方法 |
CN107908782A (zh) * | 2017-12-06 | 2018-04-13 | 陕西识代运筹信息科技股份有限公司 | 一种基于情感分析的数据处理方法和装置 |
CN109977392B (zh) * | 2017-12-28 | 2024-02-09 | 北京京东尚科信息技术有限公司 | 一种文本特征分析的方法和装置 |
CN110019958A (zh) * | 2017-12-28 | 2019-07-16 | Tcl集团股份有限公司 | 一种影视作品标签的生成方法、装置和终端设备 |
CN110096694A (zh) * | 2018-01-30 | 2019-08-06 | 北京京东尚科信息技术有限公司 | 基于自然语言处理的信息生成方法和装置 |
CN108647257A (zh) * | 2018-04-24 | 2018-10-12 | 北京科技大学 | 一种微博情感确定方法 |
CN108932227A (zh) * | 2018-06-05 | 2018-12-04 | 天津大学 | 一种基于句子结构及上下文的短文本情感值计算方法 |
CN110472040B (zh) * | 2019-06-26 | 2024-08-20 | 平安科技(深圳)有限公司 | 评价信息的提取方法及装置、存储介质、计算机设备 |
CN110362833B (zh) * | 2019-07-22 | 2024-08-20 | 腾讯科技(深圳)有限公司 | 一种基于文本的情感分析方法及相关装置 |
CN110750978A (zh) * | 2019-09-25 | 2020-02-04 | 深圳市金证优智科技有限公司 | 情感倾向分析方法、装置、电子设备及存储介质 |
CN111813919B (zh) * | 2020-06-24 | 2024-05-28 | 华中师范大学 | 一种基于句法分析与关键词检测的mooc课程评价方法 |
CN115794988A (zh) * | 2022-09-13 | 2023-03-14 | 广东美云智数科技有限公司 | 用于提取文本的观点的方法、装置以及计算机存储介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102737013A (zh) * | 2011-04-02 | 2012-10-17 | 三星电子(中国)研发中心 | 基于依存关系来识别语句情感的设备和方法 |
CN103995803A (zh) * | 2014-04-25 | 2014-08-20 | 西北工业大学 | 一种细粒度文本情感分析方法 |
-
2015
- 2015-06-02 CN CN201510296299.4A patent/CN104881402B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102737013A (zh) * | 2011-04-02 | 2012-10-17 | 三星电子(中国)研发中心 | 基于依存关系来识别语句情感的设备和方法 |
CN103995803A (zh) * | 2014-04-25 | 2014-08-20 | 西北工业大学 | 一种细粒度文本情感分析方法 |
Non-Patent Citations (4)
Title |
---|
中文网络话题评论文本语义倾向分析;刘姗,胡勇;《信息安全与通信保密》;20120630;第1节,图1,表1-2 * |
句子情感分析及其关键问题;李纲 等;《图书情报工作》;20100630;第54卷(第11期);第104-106,127页 * |
基于短语模式的文本情感分类研究;李钝 等;《计算机科学》;20081231;第35卷(第4期);第132-134页 * |
汉语语句主题语义倾向分析方法的研究;姚天昉,娄德成;《中文信息学报》;20070930;第21卷(第5期);第3-5节 * |
Also Published As
Publication number | Publication date |
---|---|
CN104881402A (zh) | 2015-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104881402B (zh) | 中文网络话题评论文本语义倾向分析的方法及装置 | |
Saha et al. | Proposed approach for sarcasm detection in twitter | |
Neunerdt et al. | Part-of-speech tagging for social media texts | |
CN106096664B (zh) | 一种基于社交网络数据的情感分析方法 | |
US11531812B2 (en) | Natural language processing for mapping dependency data and parts-of-speech to group labels | |
CN102693279B (zh) | 一种快速计算评论相似度的方法、装置及系统 | |
CN102609427A (zh) | 舆情垂直搜索分析系统及方法 | |
CN102096680A (zh) | 信息有效性分析的方法和装置 | |
JPWO2016051551A1 (ja) | 文章生成システム | |
Kammoun et al. | The MORPH2 new version: A robust morphological analyzer for Arabic texts | |
CN106446147A (zh) | 一种基于结构化特征的情感分析方法 | |
Agarwal et al. | Sentiment classification of review documents using phrase patterns | |
Bach et al. | A reranking model for discourse segmentation using subtree features | |
Parameswarappa et al. | Kannada word sense disambiguation using decision list | |
Remus et al. | Towards well-grounded phrase-level polarity analysis | |
Singh et al. | Statistical tagger for Bhojpuri (employing support vector machine) | |
Khan et al. | Sentiment analysis at sentence level for heterogeneous datasets | |
Thulasi et al. | Aspect polarity recognition of movie and product reviews in Malayalam | |
Tavan et al. | Identifying Ironic Content Spreaders on Twitter using Psychometrics, Contextual and Ironic Features with Gradient Boosting Classifier. | |
Simionescu | Graphical grammar studio as a constraint grammar solution for part of speech tagging | |
Lin et al. | Developing a chunk-based grammar checker for translated English sentences | |
CN104699675B (zh) | 翻译信息的方法和装置 | |
Huang et al. | An unsupervised method for short-text sentiment analysis based on analysis of massive data | |
Bloom et al. | Automated learning of appraisal extraction patterns | |
Chanda et al. | Is Meta Embedding better than pre-trained word embedding to perform Sentiment Analysis for Dravidian Languages in Code-Mixed Text? |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |