CN107480127A - 舆情分析方法及装置 - Google Patents

Abstract

本发明实施例公开了一种舆情分析方法及装置，通过采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

Description

舆情分析方法及装置

技术领域

本发明涉及计算机领域，尤其涉及一种舆情分析方法及装置。

背景技术

在互联网业已成为了党和政府治国理政的重要新平台之一，网络舆论也越来越受到重视的当前，各级党政机关、企事业单位和学术机构都越来越重视互联网舆情的监测、研究和引导。具体上讲，舆情监测是指整合互联网信息采集技术及信息智能处理技术通过对互联网海量信息自动获取、自动分类聚类、主题检测、专题聚焦，实现用户的网络舆情监测和新闻专题追踪等信息需求，形成简报、报告、图表等分析结果，为客户全面掌握群众思想动态，做出正确舆论引导，提供分析依据。

现有的舆情分析的数据局限于本企业生产的数据和少量其他站点类型数据，影响了分析结果的全面性和准确性，不能对舆情的正确引导提供依据。

发明内容

本发明实施例的目的是提供一种舆情分析方法及装置，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

为实现上述目的，本发明实施例提供了一种舆情分析方法，包括步骤：

采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

与现有技术相比，本发明公开的舆情分析方法通过采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

作为上述方案的改进，还包括步骤：

根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

作为上述方案的改进，所述自动抽取所述热点事件的摘要前还包括：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

作为上述方案的改进，还包括步骤：

根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

作为上述方案的改进，所述分析所述热点事件的倾向性语义具体为：

对所述热点事件的文章或语句进行智能切分获得多个分词，对每一分词进行倾向性分析，将所述分词中倾向性强度较高的分词进行排序；

根据所述分词中倾向性强度较高的分词的排序结果，通过词性趋势化分析，从而获得所述热点事件的倾向性语义。

本发明实施例还提供了一种舆情分析装置，包括：

采集模块，用于采用抓取算法进行全网数据定向和定点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

聚类模块，用于基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

舆情信息获取模块，用于自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

与现有技术相比，本发明公开的舆情分析装置通过采集模块采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再通过聚类模块基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后通过舆情信息获取模块自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

作为上述方案的改进，还包括：

提取模块，用于根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

存储模块，用于对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

作为上述方案的改进，所述舆情信息获取模块还用于：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

作为上述方案的改进，所述装置还包括：

推送模块，用于根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

附图说明

图1是本发明实施例1提供的一种舆情分析方法的流程示意图。

图2是本发明实施例2提供的一种舆情分析方法的流程示意图

图3是本发明实施例3提供的一种舆情分析装置的结构示意图

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

参见图1，是本发明实施例1提供的一种舆情分析方法的流程示意图，包括步骤：

S1、采用抓取算法进行全网数据定向和定点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

S2、基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

通过信息的自动聚类，可及时发现增长异常的事件、突发事件及敏感话题，根据其内容主题进行自动分组，自动聚焦指定时间段当地的热点舆情，充分挖掘隐含的、内在的信息，信息聚类机制速度快、效率高、使用灵活，能够随时进行修改调整，修改立即生效。

S3、自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

在该步骤中，采用倾向性语义分析技，大大提高了分析报表的准确性和时效性，让用户迅速了解到整个事件倾向程度和整个事件的发展趋向内容。

通过采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

在实施例1的基础上，如图2所示，还包括步骤：

S4、根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

S5、对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

存储时对数据进行系统级别加密，即只有通过系统才能进行数据访问，对数据操作强制使用接口进行，并对传递到接口的参数进行严格判断，以防止恶意的操作参数。其中，该步骤中采用分片存储机制，即对一份文件进行横向切割，并由调度器进行多机器分片存储，在数据运算时，可通过并行读取扫描，大大加快数据运算速率。

优选地，步骤S3中所述自动抽取所述热点事件的摘要前还包括：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

统计所述媒体和网络名人的点评走势，可快速获取舆情信息的概要信息，简单快捷，提高分析的效率。

优选地，在步骤1的基础上，所述种舆情分析方法还包括步骤：

根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

向用户推送所述热点事件的舆情信息，可以让用户及时获知热点事件的大体走势。

参见图3，是本发明实施例3提供的一种舆情分析装置的结构示意图，包括：

采集模块101，用于采用抓取算法进行全网数据定向和定点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

聚类模块102，用于基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

舆情信息获取模块103，用于自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

具体实施时，通过采集模块101采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再通过聚类模块102基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后通过舆情信息获取模块103自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

在一优选实施例中，所述舆情分析装置100还包括：

提取模块，用于根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

存储模块，用于对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

优选地，所述舆情信息获取模块103还用于：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

优选地，所述舆情分析装置100还包括推送模块，用于根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

综上，本发明实施例提供了一种舆情分析方法及装置，通过采用抓取算法进行全网数据定向和顶点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果，再基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件，然后自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息，数据量更全面，生成的舆情分析结果更具有参考性，预警信息更加贴合客户关注领域。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种舆情分析方法，其特征在于，包括步骤：

采用抓取算法进行全网数据定向和定点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

2.如权利要求1所述的舆情分析方法，其特征在于，还包括步骤：

根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

3.如权利要求1所述的舆情分析方法，其特征在于，所述自动抽取所述热点事件的摘要前还包括：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

4.如权利要求1所述的舆情分析方法，其特征在于，还包括步骤：

根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

5.如权利要求1所述的舆情分析方法，其特征在于，所述分析所述热点事件的倾向性语义具体为：

对所述热点事件的文章或语句进行智能切分获得多个分词，对每一分词进行倾向性分析，将所述分词中倾向性强度较高的分词进行排序；

根据所述分词中倾向性强度较高的分词的排序结果，通过词性趋势化分析，从而获得所述热点事件的倾向性语义。

6.一种舆情分析装置，其特征在于，包括：

采集模块，用于采用抓取算法进行全网数据定向和定点采集获得全网各个站点的数据，并采集主流搜索引擎的搜索结果；

聚类模块，用于基于所述各个站点的数据和搜索结果进行聚类，通过聚类结果获取热点事件；

舆情信息获取模块，用于自动抽取所述热点事件的摘要，分析所述热点事件的倾向性语义，获得所述热点事件的舆情信息。

7.如权利要求1所述的舆情分析装置，其特征在于，还包括：

提取模块，用于根据所述各个站点的数据，提取所述数据中的敏感字的出现频率；

存储模块，用于对所述敏感字进行语义分析，根据所述语义分析的结果和所述敏感字的出现频率判断数据机密度，加密存储所述各个站点的数据中数据机密度高的数据。

8.如权利要求1所述的舆情分析装置，其特征在于，所述舆情信息获取模块还用于：

通过热点聚焦算法自动聚焦所述热点事件在主要站点的动态走势，统计媒体和网络名人的点评走势。

9.如权利要求1所述的舆情分析装置，其特征在于，所述装置还包括：

推送模块，用于根据所述热点事件的舆情信息，向用户推送所述热点事件的舆情信息。

10.如权利要求1所述的舆情分析装置，其特征在于，所述分析所述热点事件的倾向性语义具体为：

对所述热点事件的文章或语句进行智能切分获得多个分词，对每一分词进行倾向性分析，将所述分词中倾向性强度较高的分词进行排序；

根据所述分词中倾向性强度较高的分词的排序结果，通过词性趋势化分析，从而获得所述热点事件的倾向性语义。