CN105404644A - 一种舆情信息处理方法和系统 - Google Patents

Abstract

本发明公开了一种舆情信息处理方法，该方法包括：定时采集目标舆情信息并分类存入数据库；将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表；根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。本发明还公开了一种舆情信息处理系统。本发明公开的一种舆情信息处理方法和系统，可以有效地提高了舆情响应处理的效率，能够及时发现舆情信息并进行及时回复处理，减少服务器压力。系统将舆情采集和舆情处理有机的联系在一起，并配合自动分配和绩效管理，提高了舆情处理的及时性和舆情处理的精准性。

Description

一种舆情信息处理方法和系统

技术领域

本发明公开了一种舆情信息处理方法和系统，特别是一种基于自动采集和自动分配的舆情信息处理方法和系统，属于通信技术领域。

背景技术

目前市场上有两类舆情管理系统：

1、舆情采集系统。此类系统是通过网络爬虫，对各有可能产生舆情信息的平台(如：微博、微信、贴吧、论坛、社区等)将舆情信息采集后进行入库后进行数据分析，而没有对舆情信息进行及时有效的处理(舆情处理包括对负面信息进行澄清、回应、辟谣等；对客户提问进行回答)，等到对数据进行分析处理的时候，舆情处理的最佳时机已经错过，对企业形象产生负面影响。

2、社交媒体管理系统。此类系统通过通常是用来进行营销信息发布，也有采集系统，但是采集的信息是用来进行再编辑后变成营销信息通过社交媒体进行发布的，更多的是企业进行营销的工具。

发明人在研究的过程中发现，上述两类系统，功能单一，只完成舆情管理一部分功能，无法满足信息时代企业需要快速响应处理舆情信息的需求。

发明内容

为了解决上述技术问题，本发明提供了一种舆情信息处理方法和系统，该技术方案的目在于将信息采集和舆情处理系统进行有机整合，解决了上述两类系统各自为政的情况，提高舆情处理响应速度和准确性。

本发明的目的通过以下技术方案来具体实现：

本发明公开了一种舆情信息处理方法，该方法包括以下步骤：

定时采集目标舆情信息并分类存入数据库；

将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表；

根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

进一步的，所述定时采集目标舆情信息具体包括：

通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息。

更进一步的，所述分类存入数据库具体包括：

将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

进一步的，所述将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表，具体包括：

实时扫描数据库，获取数据库中入库的最新目标舆情信息，按照分配规则分配至系统多个服务端处理；

服务器实时获取每个服务端的处理进度，生成舆情处理进度表。

更进一步的，所述根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量，具体包括：

实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

系统根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

本发明还提供了一种舆情信息处理系统，包括采集模块、分配模块、处理模块和管理模块，

所述采集模块，用于定时采集目标舆情信息并分类存入数据库；

所述分配模块，用于将数据库中采集的目标舆情信息分配至系统中多个服务端；

所述处理模块，用于根据多个服务端发送的处理进度生成舆情处理进度表；

所述管理模块，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

进一步的，所述采集模块包括：

采集单元，用于通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息；

分类存储单元，用于将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

进一步的，所述分配模块包括：

扫描模块，用于实时扫描数据库，获取数据库中入库的最新目标舆情信；

分配单元，用于按照分配规则分配至系统多个服务端处理.

进一步的，所述处理模块包括：

处理模块，用于根据服务器实时获取每个服务端的处理进度进行汇总，生成舆情处理进度表。

进一步的，所述管理模块包括：

接收模块，用于实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

调配模块，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

本发明公开的一种舆情信息处理方法和系统，该系统和应用该系统的方法通过定向采集舆情信息，保证有针对性的采集需要的信息。实时扫描舆情信息，高效的分配定时任务，确保采集到的数据能及时分配及时处理。通过舆情处理进度表及时了解舆情处理效果，并进行均衡分配。利用本发明提供的技术方案，有效地提高了舆情响应处理的效率，能够及时发现舆情信息并进行及时回复处理，减少服务器压力。系统将舆情采集和舆情处理有机的联系在一起，并配合自动分配和绩效管理，提高了舆情处理的及时性和舆情处理的精准性。并预留了接口，方便扩展对接其平台的舆情。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的方法流程图；

图2为本发明实施例提供的系统结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

如图1所示，本发明实施例公开了一种舆情信息处理方法，该方法包括以下步骤：

S10：定时采集目标舆情信息并分类存入数据库；

S20：将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表；

S30：根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

进一步的，所述定时采集目标舆情信息具体包括：

通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息。

关键词和/或预采集的目标平台具体为：根据抓取需求采用单字、词组按照一定的规则进行组合匹配目标平台内容，定时模拟普通用户浏览器访问页面全球，抓取舆情信息。

采用单字、词组按照一定的规则进行组合匹配目标平台内容，具体规则为：

一、存在一个有各种常用词组成的词库A(词条数A个)，一个敏感词库B(侵权、假冒等负面信息词)，一个竞争对手相关词库C(XX公司、XX网站)

二、存在一个自行设定的关键词库N(词条数N个)，假设其中一个关键词N1，存在一个关于关键词N1的日常高热词(使用率和点击率较高)词条库D(词条数D个)和一个臆造词词库E(词条数E个).

三、关键词N1可以和A中的M个词进行组合，0＜M≤A

四、在M中词条进一步按照行业、业务类型、产品名称等词意属性设定筛选规则(如行业、业务类型、产品名称)并筛选，筛选完毕后剩余词组k个(0＜k≤M)

五、人工对k个词组进一步筛选，筛选规则为从这些词条中选择与实际需求和业务无关的词条数为L,(1≤l≤k)，并进行屏蔽(屏蔽后下词生成时不在列入备选，除非解除屏蔽)，此时剩余词条数为W个(0≤W≤k-L)

六、系统自动将W、D和E进行校对，去掉重复内容后形成新的集合S(0≤S≤W+D+E)

七、此时、关于关键N1的词条生成完毕，系统进一步的再对N1(s)和敏感词库B组合形成N1(S)B【词条数N1(S)*B】,同时再对N1(s)和竞争对手相关词库C组合形成N1(S)C【词条数N1(S)*C】

八、至此，本次关于关键词条N1的舆情监控词库Y形成【N1(s)+N1(S)*B+N1(S)C】

更进一步的，所述分类存入数据库具体包括：

将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

进一步的，所述将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表，具体包括：

实时扫描数据库，获取数据库中入库的最新目标舆情信息，按照分配规则分配至系统多个服务端处理；

采用定时扫描数据库，获取到入库的舆情信息，扫描频次为30秒甚至更短时间，可根据具体的需要进行调整，达到采集到的信息马上被扫描到即可。

服务器实时获取每个服务端的处理进度，生成舆情处理进度表。

舆情处理进度表，用于实时监控数据库舆情处理情况，采用柱状图的形式，以不同颜色分别表示未分配、待处理、已处理舆情的数量。

更进一步的，所述根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量，具体包括：

实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

系统根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

已经处理的舆情信息，在数据库标识为已处理状态，处理进度图表随即实时更新。

实施例二

如图2所示，本发明实施例还提供了一种舆情信息处理系统，包括采集模块1、分配模块2、处理模块3和管理模块4，

所述采集模块1，用于定时采集目标舆情信息并分类存入数据库；

所述分配模块2，用于将数据库中采集的目标舆情信息分配至系统中多个服务端；

所述处理模块3，用于根据多个服务端发送的处理进度生成舆情处理进度表；

所述管理模块4，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

进一步的，所述采集模块包括：

采集单元，用于通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息；

关键词和/或预采集的目标平台具体为：根据抓取需求采用单字、词组按照一定的规则进行组合匹配目标平台内容，定时模拟普通用户浏览器访问页面全球，抓取舆情信息。

采用单字、词组按照一定的规则进行组合匹配目标平台内容，具体规则为：

一、存在一个有各种常用词组成的词库A(词条数A个)，一个敏感词库B(侵权、假冒等负面信息词)，一个竞争对手相关词库C(XX公司、XX网站)

二、存在一个自行设定的关键词库N(词条数N个)，假设其中一个关键词N1，存在一个关于关键词N1的日常高热词(使用率和点击率较高)词条库D(词条数D个)和一个臆造词词库E(词条数E个).

三、关键词N1可以和A中的M个词进行组合，0＜M≤A

四、在M中词条进一步按照行业、业务类型、产品名称等词意属性设定筛选规则(如行业、业务类型、产品名称)并筛选，筛选完毕后剩余词组k个(0＜k≤M)

五、人工对k个词组进一步筛选，筛选规则为从这些词条中选择与实际需求和业务无关的词条数为L,(1≤l≤k)，并进行屏蔽(屏蔽后下词生成时不在列入备选，除非解除屏蔽)，此时剩余词条数为W个(0≤W≤k-L)

六、系统自动将W、D和E进行校对，去掉重复内容后形成新的集合S(0≤S≤W+D+E)

七、此时、关于关键N1的词条生成完毕，系统进一步的再对N1(s)和敏感词库B组合形成N1(S)B【词条数N1(S)*B】,同时再对N1(s)和竞争对手相关词库C组合形成N1(S)C【词条数N1(S)*C】

八、至此，本次关于关键词条N1的舆情监控词库Y形成【N1(s)+N1(S)*B+N1(S)C】

分类存储单元，用于将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

进一步的，所述分配模块包括：

扫描模块，用于实时扫描数据库，获取数据库中入库的最新目标舆情信；

分配单元，用于按照分配规则分配至系统多个服务端处理。

进一步的，所述处理模块包括：

处理模块，用于根据服务器实时获取每个服务端的处理进度进行汇总，生成舆情处理进度表。

舆情处理进度表，用于实时监控数据库舆情处理情况，采用柱状图的形式，以不同颜色分别表示未分配、待处理、已处理舆情的数量。

进一步的，所述管理模块包括：

接收模块，用于实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

调配模块，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量；

已经处理的舆情信息，在数据库标识为已处理状态，处理进度图表随即实时更新。

本发明公开的一种舆情信息处理方法和系统，该系统和应用该系统的方法通过定向采集舆情信息，保证有针对性的采集需要的信息。实时扫描舆情信息，高效的分配定时任务，确保采集到的数据能及时分配及时处理。通过舆情处理进度表及时了解舆情处理效果，并进行均衡分配。利用本发明提供的技术方案，有效地提高了舆情响应处理的效率，能够及时发现舆情信息并进行及时回复处理，减少服务器压力。系统将舆情采集和舆情处理有机的联系在一起，并配合自动分配和绩效管理，提高了舆情处理的及时性和舆情处理的精准性。并预留了接口，方便扩展对接其平台的舆情。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。

以上公开的仅为本发明的几个具体实施例，但是，本发明并非局限于此，任何本领域的技术人员能思之的变化都应落入本发明的保护范围。

Claims (10)

1.一种舆情信息处理方法，其特征在于，该方法包括以下步骤：

定时采集目标舆情信息并分类存入数据库；

将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成所述舆情处理进度表；

根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

2.如权利要求1所述的方法，其特征在于，所述定时采集目标舆情信息具体包括：

优选的,通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息。

3.如权利要求1或2所述的方法，其特征在于，所述分类存入数据库具体包括：

进一步的,将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

4.如权利要求1所述的方法，其特征在于，所述将数据库中采集的目标舆情信息分配至系统中多个服务端处理并生成舆情处理进度表，具体包括：

实时扫描数据库，获取数据库中入库的最新目标舆情信息,按照分配规则分配至系统多个服务端处理；

服务器实时获取每个服务端的处理进度，生成舆情处理进度表。

5.如权利要求1或4所述的方法，其特征在于，所述根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量，具体包括：

实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

系统根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

6.一种舆情信息处理系统，包括采集模块、分配模块、处理模块和管理模块，其特征在于，

所述采集模块，用于定时采集目标舆情信息并分类存入数据库；

所述分配模块，用于将数据库中采集的目标舆情信息分配至系统中多个服务端；

所述处理模块，用于根据多个服务端发送的处理进度生成所述舆情处理进度表；

所述管理模块，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。

7.如权利要求6所述的系统，其特征在于，所述采集模块包括：

采集单元，用于通过网络爬虫，根据预先设定的关键词和/或预采集的目标平台，定时定向采集目标舆情信息；

分类存储单元，用于将采集的目标舆情信息按照系统设定的关键词规则进行分类存入数据库。

8.如权利要求6所述的系统，其特征在于，所述分配模块包括：

扫描模块，用于实时扫描数据库，获取数据库中入库的最新目标舆情信；

分配单元，用于按照分配规则分配至系统多个服务端处理。

9.如权利要求6所述的系统，其特征在于，所述处理模块包括：

处理模块，用于根据服务器实时获取每个服务端的处理进度进行汇总，生成舆情处理进度表。

10.如权利要求6所述的系统，其特征在于，所述管理模块包括：

接收模块，用于实时接收舆情处理进度表，所述舆情处理进度表包括舆情处理的时效信息、绩效管理信息、舆情处理量和/或舆情处理进度；

调配模块，用于根据舆情处理进度表实时调整分配至服务端的目标舆情信息的数量。