CN113204688A - 一种基于大数据的舆情监测平台 - Google Patents
一种基于大数据的舆情监测平台 Download PDFInfo
- Publication number
- CN113204688A CN113204688A CN202110489867.8A CN202110489867A CN113204688A CN 113204688 A CN113204688 A CN 113204688A CN 202110489867 A CN202110489867 A CN 202110489867A CN 113204688 A CN113204688 A CN 113204688A
- Authority
- CN
- China
- Prior art keywords
- social
- data
- platform
- app
- public opinion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/904—Browsing; Visualisation therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9536—Search customisation based on social or collaborative filtering
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供了一种基于大数据的舆情监测平台,包括社交平台监测模块:用于在网络环境中采集社交平台信息,判断是否出现新社交平台;其中,所述社交平台包括社交论坛、社交APP和社交游戏;接口准入模块:用于获取新社交平台的接入接口,并在授权后与所述新社交平台对接;舆情监测模块:用于获取用户需要查询的舆情信息,并根据所述舆情信息,确定在每个新社交平台中的舆情监测策略;舆情数据可视化模块:用于根据所述舆情监测策略,持续获取新社交平台内的舆情数据。本发明适用于任何平台,通过小型平台和小型平台实现对舆情数据的全面监控,进而实现舆情数据的图表转换。
Description
技术领域
本发明涉及舆情处理技术领域,特别涉及一种基于大数据的舆情监测平台。
背景技术
目前,随着互联网技术的发展,对于谣言类舆情,因为其似真性和敏感性,通过网络进行传播时,因为属于传播热点,会传播的越来越快,无法对其进行控制,只能进行发布公告说明其是谣言。而且,互联网的数据量是海量的数据,谣言发布的渠道也是多种多样,无法从谣言发布起点对谣言进行监测识别,只能在传播过程中进行监测,但是现有技术的在进行谣言监测时,只能在大众熟知公开平台进行监测,这就导致了,谣言的传播在一些受众比较少的公开平台进行传播时,无法监测。例如:谣言在微博、新闻平台传播,但是对于音乐论坛、书法论坛和绘画论坛,这些论坛可能不会进行监测,也没有这些论坛创建的信息,就无法对这类论坛进行监测。而这类论坛,可能存在一些不玩微博和不看新闻的老人,一些谣言很可能在信息闭塞的老人中传播,例如:疫情信息,此时可能引起老人恐慌。因此,需要一种技术,能够在一些受众较少的论坛创建时,自动对接这些平台,进行谣言的监控。
发明内容
本发明提供一种基于大数据的舆情监测平台,用以解决谣言的传播在一些受众比较少的公开平台进行传播时,无法监测的情况。
一种基于大数据的舆情监测平台,包括:
社交平台监测模块:用于在网络环境中采集社交平台信息,判断是否出现新社交平台;其中,
所述社交平台包括社交论坛、社交APP和社交游戏;
接口准入模块:用于获取新社交平台的接入接口,并在授权后与所述新社交平台对接;
舆情监测模块:用于获取用户需要查询的舆情信息,并根据所述舆情信息,确定在每个新社交平台中的舆情监测策略;
舆情数据可视化模块:用于根据所述舆情监测策略,持续获取新社交平台内的舆情数据,并进行图表转换。
作为本发明的一种实施例:所述社交平台监测模块包括:
应用市场对接单元:用于与应用市场进行对接,获取应用市场中上架APP数据和下架APP数据;
应用判断单元:用于根据所述上架APP数据和下架APP数据,判断是否存在社交APP;其中,
当所述上架APP数据中存在社交APP时,获取上架APP的APP 信息;其中,
所述APP信息包括:APP归属信息和APP社交功能信息;
当所述下架APP数据中存在本监测平台监测的社交APP时,删除监测平台中与下架社交APP的连接接口;
游戏市场对接单元:用于与游戏市场进行对接,获取游戏市场中的上架游戏数据和下架游戏数据;
社交能力判断单元:用于判断所述上架游戏数据中每个上架游戏的社交能力;
社交阈值单元:用于将所述上架游戏数据中每个上架游戏的社交能力与预设阈值进行对比,判断所述上架游戏数据中每个上架游戏的社交能力设否超过预设阈值,并获取超过预设阈值的上架游戏的游戏信息;
下架游戏删除单元:用于判断所述下架游戏数据中是否存在本监测平台连接的社交游戏,并判断所述本监测平台连接的社交游戏是否被所有应用平台下架,并在所有应用平台都删除本监测平台连接的社交游戏,删除所述本监测平台连接的社交游戏的游戏接口;
论坛对接单元:用于采集互联网中新出现的网站,并判断所述网站是否为社交论坛,并在所述网站为社交论坛时,获取所述网站的注册方式;
论坛对接单元:用于根据所述注册方式,获取注册授权,并在注册授权后,在所述网站中注册虚拟身份。
作为本发明的一种实施例:所述应用判断单元在所述上架APP 数据和下架APP数据,判断是否存在社交APP包括以下步骤:
步骤1:根据所述上架APP数据和下架APP数据,构建上架APP 特征模型和下架APP特征模型:
其中,Qi表示第i个上架APP的类型特征;Ni表示第i个上架APP 的内容特征;β(w)表示加权函数;w表示APP的内容误差系数;qj表示第j个下架APP的内容特征;i=1,2,3……n,n表示上架APP的数量;j=1,2,3……m,m表示下架APP的数量;
步骤2:用于通过预设社交元素数据库,构建社交APP的社交模型:
其中,Gl表示第l个社交元素执行的功能特征;Nl表示第l个社交元素执行的内容特征;Fl表示第l个社交元素的分享能力特征;xl表示第l个社交元素的互动特征;yl表示第l个社交元素的
步骤3:根据所述社交模型,通过下式判断所述上架APP数据和下架APP数据是否存在社交APP:
其中,SD<1时,表示上架APP数据中不存在社交APP;SD≥1时,表示上架APP数据中存在社交APP;XD<1时,表示下架APP数据中不存在社交APP;XD≥1时,表示下架APP数据中存在社交APP。
作为本发明的一种实施例:所述接口准入模块包括:
信息分析模块:用于对所述新社交平台进行归属分析和功能分析,确定归属信息和功能列表;
授权获取单元:用于根据所述归属信息,获取所述新社交平台的接入授权方式和接入接口;
授权请求单元:用于根据所述接入授权方式,获取所述新社交平台的接入授权;
接口配置单元:用于在具有所述新社交平台的接入授权后,配置与所述接入接口相匹配的数据接口;其中,
所述数据接口由多个不同类型数据分支接口组成;
对接单元:用于根据所述数据接口,将所述新社交平台与与监测平台对接。
作为本发明的一种实施例:所述授权请求单元获取接入授权包括以下步骤:
步骤S1:对所述接入授权方式进行分析、确定授权需求;
步骤S2:根据所述授权需求,确定授权数据;
步骤S3:根据所述授权数据,生成接入请求;其中,
所述接入请求含有检测平台的归属信息、功能信息和数据采集请求;
步骤S4:将所述接入请求发送至所述新社交平台,并获取反馈信息;
步骤S5:根据所述反馈信息,判断是否同意接入,并在同意接入时,发送预设电子合约至所述新社交平台,并在所述电子合约中存在所述新接入平台的电子签章时,确定接入授权。
作为本发明的一种实施例:所述接口配置单元配置数据接口包括:
接口信息获取子单元:用于获取所述新社交平台的接入协议,并根据所述接入协议确定数据接口的接口参数和数据接入格式;
存储设置子单元:用于根据所述数据接入格式、接入参数和新社交平台的识别码,构成数据库的唯一授权存储码,并根据所述唯一授权存储码建立唯一数据库;
路径设置子单元:用于在所述唯一数据库建立后,设置所述唯一数据库和监测平台的唯一数据传输路径。
作为本发明的一种实施例:所述舆情监测模块包括:
用户输入单元:用于接收用户需要查询的舆情信息,并根据所述舆情信息,确定与舆情相关的查询关键字,根据所述查询关键字,生成舆情查询单;
关联性计算单元:用于将所述舆情查询单中任意一个查询关键字和所述舆情信息中任意一个完整句作为一个单一序列,计算所述单一序列中查询关键字和完整句关联性,并将任意一个查询关键字和所述舆情信息中所有完整句的关联性作为一个关联性序列,将所述关联性序列的关联性均值作为每一个关联性序列的关联性值;
查询信息排布单元:用于根据所述关联性序列的关联性值,对所述查询关键字按照二叉树模型进行排布,生成查询分支树;
策略布置单元:用于根据所述查询分支树,设置持续循环查询策略和触发式循环查询策略;
平台分类单元:用于通过预设信息发布频率设置对所述新社交平台进行分类,将信息发布频率低于预设信息发布频率的新社交平台作为第一查询平台集合,将将信息发布频率高于和等于预设信息发布频率的新社交平台作为第二查询平台集合;
策略实施单元:用于通过持续循环查询策略对所述第二查询平台集合进行舆情监测,通过触发式循环查询策略对所述第一查询平台集合进行舆情监测。
作为本发明的一种实施例:所述舆情监测模块包括:
平台信息发布频率统计单元:用于设置预设规则,并通过所述预设规则确定所述新社交平台信息发布的动态频率;
调配单元:用于根据所述动态频率将所述新社交平台调配至第一查询平台集合或第二查询平台集合。
作为本发明的一种实施例:所述预设规则包括时间规则和类型规则;
所述时间规则为:预设时间段,并通过预设时间段内的新社交平台的信息发布数和总监测时间,确定第一频率;
所述类型规则包括论坛规则、APP规则和游戏规则;其中,
当所述新社交平台为社交论坛时,分别将所述论坛进行信息发布的时间划分为活跃时间和静默时间,并分别检测所述活跃时间和静默时间的平台信息发布频率,以所述活跃时间和静默时间的平台信息发布频率的频率均值作为第二频率;
当所述新社交平台为社交APP和社交游戏时,分别基于所述社交 APP和社交游戏的ID账号进行信息发布频率检测,并以每个ID账号的信息发布均值作为第二频率。
作为本发明的一种实施例:所述舆情数据可视化模块包括:
数据分类单元:用于在所述新社交平台设置数据筛选规则,并将筛选后的舆情数据按照文件类型进行分类;其中,
所述文件类型包括文字、图片、语音和视频;
数据整理单元:用于将分类后的数据进行统计,并将统计后的分类数据转化为交互数据;其中,
所述交互数据包括视频数据、图表数据和文字数据;
数据可视化单元:用于通过预设的处理服务器将所述交互数据发送至数据交互设备,进行数据可视化。
本发明的有益效果在于:本发明主要是用于在小众平台进行舆情监测,在监测到舆情之后,可以对小众平台的舆情进行监测,进而可以判断小众平台的舆情传播情况,通过对小众平台舆情数据的收集,本发明可以实现舆情数据的全面监控,本发明虽然是基于对小众平台进行舆情监测,但是本发明也可以适用于大型平台,通过小型平台和小型平台实现对舆情数据的全面监控,进而实现舆情数据的图表转换。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例,对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1为本发明实施例中一种基于大数据的舆情监测平台的平台组成结构图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
如附图1所示,一种基于大数据的舆情监测平台,包括:
社交平台监测模块:用于在网络环境中采集社交平台信息,判断是否出现新社交平台;其中,
所述社交平台包括社交论坛、社交APP和社交游戏;
社交论坛存在音乐、法律、书法类论坛,游戏存在成长类,或者多人实施在线的讨论性游戏,而社交APP主要是社交类型。
接口准入模块:用于获取新社交平台的接入接口,并在授权后与所述新社交平台对接;主要是用于获取社交平台的授权,授权后可以进行监控社交类软件的信息。
舆情监测模块:用于获取用户需要查询的舆情信息,并根据所述舆情信息,确定在每个新社交平台中的舆情监测策略;本发明是一个舆情出现后,检测舆情出现的地方的,进而进行舆情监测的方式。确定检测策略主要是因为,不同的社交平台监测策略是不同的,例如:社交APP需要持续监测,因为每时每刻都存在人员进行信息交流。而社交论坛,存在晚间或者定期进行交流,此时采用触发式的监测舆情的方式。
舆情数据可视化模块:用于根据所述舆情监测策略,持续获取新社交平台内的舆情数据,并进行图表转换。图标转换是用于更加方便的进行信息展示。
本发明主要是用于在小众平台进行舆情监测,在监测到舆情之后,可以对小众平台的舆情进行监测,进而可以判断小众平台的舆情传播情况,通过对小众平台舆情数据的收集,本发明可以实现舆情数据的全面监控,本发明虽然是基于对小众平台进行舆情监测,但是本发明也可以适用于大型平台,通过小型平台和小型平台实现对舆情数据的全面监控,进而实现舆情数据的图表转换。
作为本发明的一种实施例:所述社交平台监测模块包括:
应用市场对接单元:用于与应用市场进行对接,获取应用市场中上架APP数据和下架APP数据;应用市场为企业自主的应用市场和公共应用市场(例如豌豆荚);
应用判断单元:用于根据所述上架APP数据和下架APP数据,判断是否存在社交APP;其中,
当所述上架APP数据中存在社交APP时,获取上架APP的APP 信息;其中,
所述APP信息包括:APP归属信息和APP社交功能信息;因为需要获取社交APP的管理人员授权,所以本发明是通过获取归属信息和社交功能实现对社交APP的管理。
当所述下架APP数据中存在本监测平台监测的社交APP时,删除监测平台中与下架社交APP的连接接口;为了不浪费服务器对于舆情数据的管理和数据的处理,本发明通过删除连接接口,减小数据的使用。
游戏市场对接单元:用于与游戏市场进行对接,获取游戏市场中的上架游戏数据和下架游戏数据;游戏在现有社会热度越来越高,对于一些多人在线和养成类游戏,就属于具有紧密的社交养成机制和信息交流机制。
社交能力判断单元:用于判断所述上架游戏数据中每个上架游戏的社交能力;判断社交能力,是判断如果有舆情的时候,判断舆情的传播能力有多强。社交能力的计算是根据任意设定时间内信息的发布量和传播量,然后基于发布量和传播量的相关性作为社交能力的能力值。
社交阈值单元:用于将所述上架游戏数据中每个上架游戏的社交能力与预设阈值进行对比,判断所述上架游戏数据中每个上架游戏的社交能力是否超过预设阈值,并获取超过预设阈值的上架游戏的游戏信息;对于一些社交能力特别差的社交游戏,是不需要进行接入本发明的监测系统,因此,本发明通过设置阀值,筛除一些消息传播量特别低的社交游戏。对于社交APP和社交论坛,也采用相同的方式。
下架游戏删除单元:用于判断所述下架游戏数据中是否存在本监测平台连接的社交游戏,并判断所述本监测平台连接的社交游戏是否被所有应用平台下架,并在所有应用平台都删除本监测平台连接的社交游戏,删除所述本监测平台连接的社交游戏的游戏接口;删除游戏接口就是一种删除舆情监测的社交平台的方式。
论坛对接单元:用于采集互联网中新出现的网站,并判断所述网站是否为社交论坛,并在所述网站为社交论坛时,获取所述网站的注册方式;这个部分采用了两种判断机制,第一种是通过判断是不是出现了新的社交网站,再来判断这个社交网站是不是社交论坛。
论坛对接单元:用于根据所述注册方式,获取注册授权,并在注册授权后,在所述网站中注册虚拟身份。虚拟身份进行监测更加隐秘而且,对于一些特殊的专门进行舆情讨论的社交平台,不会出现排斥现象。
作为本发明的一种实施例:所述应用判断单元在所述上架APP 数据和下架APP数据,判断是否存在社交APP包括以下步骤:
步骤1:根据所述上架APP数据和下架APP数据,构建上架APP 特征模型和下架APP特征模型:
其中,Qi表示第i个上架APP的类型特征;Ni表示第i个上架APP 的内容特征;β(w)表示加权函数;w表示APP的内容误差系数;qj表示第j个下架APP的内容特征;i=1,2,3……n,n表示上架APP的数量;j=1,2,3……m,m表示下架APP的数量;
上述技术方案中,本发明通过在上架APP数据和下架APP数据,获取上架的数据和下架的数据,这些数据都体现了APP的特征,因此本发明根据上架或下架社交APP的类型和内容,分别建立特征模型,来体现具体的数据状况。
步骤2:用于通过预设社交元素数据库,构建社交APP的社交模型:
其中,Gl表示第l个社交元素执行的功能特征;Nl表示第l个社交元素执行的内容特征;Fl表示第l个社交元素的分享能力特征;xl表示第l个社交元素的互动特征;yl表示第l个社交元素的社交特征(由传播度和总的数据发出量和观看量确定)。
本发明在上述技术方案中,社交元素数据库是基于社交时的功能、内容、分享能力(基于信息的平均传播次数)、互动能力(平均好友数量)和社交能力进行判断,搭建社交APP的社交模型,将其代入每个APP中,可以判断APP的舆情传播能力。
步骤3:根据所述社交模型,通过下式判断所述上架APP数据和下架APP数据是否存在社交APP:
其中,SD<1时,表示上架APP数据中不存在社交APP;SD≥1时,表示上架APP数据中存在社交APP;XD<1时,表示下架APP数据中不存在社交APP;XD≥1时,表示下架APP数据中存在社交APP。
上述技术方案中,本发明最后判断是否为社交APP的时候采用两者相结合的判断方式,判断出上架APP数据和下架APP数据中是否存在社交软件。
作为本发明的一种实施例:所述接口准入模块包括:
信息分析模块:用于对所述新社交平台进行归属分析和功能分析,确定归属信息和功能列表;主要时确定新社交平台的归属人和功能,搜集新社交平台数据,进行一个初级的社交能力判断,判断是不是新社交平台。
授权获取单元:用于根据所述归属信息,获取所述新社交平台的接入授权方式和接入接口;授权方式就是判断如何获得接入其他APP 或者社交设备的接入条件和接入接口的接入规则和方式。
授权请求单元:用于根据所述接入授权方式,获取所述新社交平台的接入授权;
接口配置单元:用于在具有所述新社交平台的接入授权后,配置与所述接入接口相匹配的数据接口;其中,
所述数据接口由多个不同类型数据分支接口组成;
对接单元:用于根据所述数据接口,将所述新社交平台与监测平台对接。相匹配类型的数据接口是能够传输不同类型的数据,而且还能实现数据的精确、高效对接。
作为本发明的一种实施例:所述授权请求单元获取接入授权包括以下步骤:
步骤S1:对所述接入授权方式进行分析,确定授权需求(授权需要的条件);
步骤S2:根据所述授权需求,确定授权数据(授权过程中的数据);
步骤S3:根据所述授权数据,生成接入请求(计入请求中包含符合接入要求的数据);其中,
所述接入请求含有检测平台的归属信息、功能信息和数据采集请求;
步骤S4:将所述接入请求发送至所述新社交平台,并获取反馈信息(反馈的内容是能不能接入新社交平台);
步骤S5:根据所述反馈信息,判断是否同意接入,并在同意接入时,发送预设电子合约至所述新社交平台,并在所述电子合约中存在所述新接入平台的电子签章时,确定接入授权。
作为本发明的一种实施例:所述接口配置单元配置数据接口包括:
接口信息获取子单元:用于获取所述新社交平台的接入协议,并根据所述接入协议确定数据接口的接口参数和数据接入格式;
接口信息的作用是根据接入协议使得新社交平台能够根据接口的参数和数据接入格式呢能够对应的设置相关的数据处理方式。
存储设置子单元:用于根据所述数据接入格式、接入参数和新社交平台的识别码,构成数据库的唯一授权存储码,并根据所述唯一授权存储码建立唯一数据库;舆情数据是谁发布,是谁传播需要对这些人的隐私进行保护,因此数据库的唯一授权存储码能够实现对隐私的保护,而且数据更加安全。
路径设置子单元:用于在所述唯一数据库建立后,设置所述唯一数据库和监测平台的唯一数据传输路径。唯一数据传输路径能够使得数据快速传输。
作为本发明的一种实施例:所述舆情监测模块包括:
用户输入单元:用于接收用户需要查询的舆情信息,并根据所述舆情信息,确定与舆情相关的查询关键字,根据所述查询关键字,生成舆情查询单;关键字是一个最普遍的查询方式,也是对舆情类数据进行快速高效传播的方式,因此本发明也采用这种方式,但是在关键词的运用上与现有技术存在巨大区别。
关联性计算单元:用于将所述舆情查询单中任意一个查询关键字和所述舆情信息中任意一个完整句作为一个单一序列,计算所述单一序列中查询关键字和完整句关联性,并将任意一个查询关键字和所述舆情信息中所有完整句的关联性作为一个关联性序列,将所述关联性序列的关联性均值作为每一个关联性序列的关联性值;关联性序列的关联性均值不仅能够判断舆情之间的数据关系,而且查询的更加全面。
查询信息排布单元:用于根据所述关联性序列的关联性值,对所述查询关键字按照二叉树模型进行排布,生成查询分支树;二叉树模型的关键字排布,子啊通过关键字对舆情数据进行检索式顺序更加正确,而且更加全面。
策略布置单元:用于根据所述查询分支树,设置持续循环查询策略和触发式循环查询策略;为了减少服务器的利用率,减少计算资源的消耗,两种不同的策略可以实现更加高效的查询。
平台分类单元:用于通过预设信息发布频率设置对所述新社交平台进行分类,将信息发布频率低于预设信息发布频率的新社交平台作为第一查询平台集合,将信息发布频率高于和等于预设信息发布频率的新社交平台作为第二查询平台集合;对不同的社交平台分配不同的查询平台集合,也是为了能够更加高效的进行查询。
策略实施单元:用于通过持续循环查询策略对所述第二查询平台集合进行舆情监测,通过触发式循环查询策略对所述第一查询平台集合进行舆情监测。
作为本发明的一种实施例:所述舆情监测模块包括:
平台信息发布频率统计单元:用于设置预设规则,并通过所述预设规则确定所述新社交平台信息发布的动态频率;预设规则主要是查询动态频,就是查询信息发布情况,因此,这个规则式统计规则,进行信息发布的统计。
调配单元:用于根据所述动态频率将所述新社交平台调配至第一查询平台集合或第二查询平台集合。根据社交平台不同的状况实现不同的方式进行查询,使得查询的时候更加高效。
作为本发明的一种实施例:所述预设规则包括时间规则和类型规则;
所述时间规则为:预设时间段,并通过预设时间段内的新社交平台的信息发布数和总监测时间,确定第一频率;
所述类型规则包括论坛规则、APP规则和游戏规则;其中,
当所述新社交平台为社交论坛时,分别将所述论坛进行信息发布的时间划分为活跃时间和静默时间,并分别检测所述活跃时间和静默时间的平台信息发布频率,以所述活跃时间和静默时间的平台信息发布频率的频率均值作为第二频率;
当所述新社交平台为社交APP和社交游戏时,分别基于所述社交 APP和社交游戏的ID账号进行信息发布频率检测,并以每个ID账号的信息发布均值作为第二频率。
上述技术方案通过设置规则进行确定信息发布频率的时候,不同类型的社交平台采用不同的方式进行社交状况的计算。更加符合实际的社交平台频率检索的需求。
作为本发明的一种实施例:所述舆情数据可视化模块包括:
数据分类单元:用于在所述新社交平台设置数据筛选规则,并将筛选后的舆情数据按照文件类型进行分类;其中,
所述文件类型包括文字、图片、语音和视频;
文字、图片、语音和视频更加通用,也符合舆情数据监控者的数据请求。
数据整理单元:用于将分类后的数据进行统计,并将统计后的分类数据转化为交互数据;其中,
所述交互数据包括视频数据、图表数据和文字数据;
数据可视化单元:用于通过预设的处理服务器将所述交互数据发送至数据交互设备,进行数据可视化。本发明最后是将数据通过交互设备进行实时监控,这时采用交互设备可以通过手机随时随地监控交互数据。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。
Claims (10)
1.一种基于大数据的舆情监测平台,其特征在于,包括:
社交平台监测模块:用于在网络环境中采集社交平台信息,判断是否出现新社交平台;其中,
所述社交平台包括社交论坛、社交APP和社交游戏;
接口准入模块:用于获取新社交平台的接入接口,并在授权后与所述新社交平台对接;
舆情监测模块:用于获取用户需要查询的舆情信息,并根据所述舆情信息,确定在每个新社交平台中的舆情监测策略;
舆情数据可视化模块:用于根据所述舆情监测策略,持续获取新社交平台内的舆情数据,并进行图表转换。
2.如权利要求1所述的一种基于大数据的舆情监测平台,其特征在于,所述社交平台监测模块包括:
应用市场对接单元:用于与应用市场进行对接,获取应用市场中上架APP数据和下架APP数据;
应用判断单元:用于根据所述上架APP数据和下架APP数据,判断是否存在社交APP;其中,
当所述上架APP数据中存在社交APP时,获取上架APP的APP信息;其中,
所述APP信息包括:APP归属信息和APP社交功能信息;
当所述下架APP数据中存在本监测平台监测的社交APP时,删除监测平台中与下架社交APP的连接接口;
游戏市场对接单元:用于与游戏市场进行对接,获取游戏市场中的上架游戏数据和下架游戏数据;
社交能力判断单元:用于判断所述上架游戏数据中每个上架游戏的社交能力;
社交阈值单元:用于将所述上架游戏数据中每个上架游戏的社交能力与预设阈值进行对比,判断所述上架游戏数据中每个上架游戏的社交能力是否超过预设阈值,并获取超过预设阈值的上架游戏的游戏信息;
下架游戏删除单元:用于判断所述下架游戏数据中是否存在本监测平台连接的社交游戏,并判断所述本监测平台连接的社交游戏是否被所有应用平台下架,并在所有应用平台都删除本监测平台连接的社交游戏,删除所述本监测平台连接的社交游戏的游戏接口;
论坛对接单元:用于采集互联网中新出现的网站,并判断所述网站是否为社交论坛,并在所述网站为社交论坛时,获取所述网站的注册方式;
论坛对接单元:用于根据所述注册方式,获取注册授权,并在注册授权后,在所述网站中注册虚拟身份。
3.如权利要求2所述的一种基于大数据的舆情监测平台,其特征在于,所述应用判断单元在所述上架APP数据和下架APP数据,判断是否存在社交APP包括以下步骤:
步骤1:根据所述上架APP数据和下架APP数据,构建上架APP特征模型和下架APP特征模型:
其中,Qi表示第i个上架APP的类型特征;Ni表示第i个上架APP的内容特征;β(w)表示加权函数;w表示APP的内容误差系数;qj表示第j个下架APP的内容特征;i=1,2,3……n,n表示上架APP的数量;j=1,2,3……m,m表示下架APP的数量;
步骤2:用于通过预设社交元素数据库,构建社交APP的社交模型:
其中,Gl表示第l个社交元素执行的功能特征;Nl表示第l个社交元素执行的内容特征;Fl表示第l个社交元素的分享能力特征;xl表示第l个社交元素的互动特征;yl表示第l个社交元素的
步骤3:根据所述社交模型,通过下式判断所述上架APP数据和下架APP数据是否存在社交APP:
其中,SD<1时,表示上架APP数据中不存在社交APP;SD≥1时,表示上架APP数据中存在社交APP;XD<1时,表示下架APP数据中不存在社交APP;XD≥1时,表示下架APP数据中存在社交APP。
4.如权利要求1所述的一种基于大数据的舆情监测平台,其特征在于,所述接口准入模块包括:
信息分析模块:用于对所述新社交平台进行归属分析和功能分析,确定归属信息和功能列表;
授权获取单元:用于根据所述归属信息,获取所述新社交平台的接入授权方式和接入接口;
授权请求单元:用于根据所述接入授权方式,获取所述新社交平台的接入授权;
接口配置单元:用于在具有所述新社交平台的接入授权后,配置与所述接入接口相匹配的数据接口;其中,
所述数据接口由多个不同类型数据分支接口组成;
对接单元:用于根据所述数据接口,将所述新社交平台与监测平台对接。
5.如权利要求4所述的一种基于大数据的舆情监测平台,其特征在于,所述授权请求单元获取接入授权包括以下步骤:
步骤S1:对所述接入授权方式进行分析、确定授权需求;
步骤S2:根据所述授权需求,确定授权数据;
步骤S3:根据所述授权数据,生成接入请求;其中,
所述接入请求含有检测平台的归属信息、功能信息和数据采集请求;
步骤S4:将所述接入请求发送至所述新社交平台,并获取反馈信息;
步骤S5:根据所述反馈信息,判断是否同意接入,并在同意接入时,发送预设电子合约至所述新社交平台,并在所述电子合约中存在所述新接入平台的电子签章时,确定接入授权。
6.如权利要求1所述的一种基于大数据的舆情监测平台,其特征在于,所述接口配置单元配置数据接口包括:
接口信息获取子单元:用于获取所述新社交平台的接入协议,并根据所述接入协议确定数据接口的接口参数和数据接入格式;
存储设置子单元:用于根据所述数据接入格式、接入参数和新社交平台的识别码,构成数据库的唯一授权存储码,并根据所述唯一授权存储码建立唯一数据库;
路径设置子单元:用于在所述唯一数据库建立后,设置所述唯一数据库和监测平台的唯一数据传输路径。
7.如权利要求1所述的一种基于大数据的舆情监测平台,其特征在于,所述舆情监测模块包括:
用户输入单元:用于接收用户需要查询的舆情信息,并根据所述舆情信息,确定与舆情相关的查询关键字,根据所述查询关键字,生成舆情查询单;
关联性计算单元:用于将所述舆情查询单中任意一个查询关键字和所述舆情信息中任意一个完整句作为一个单一序列,计算所述单一序列中查询关键字和完整句关联性,并将任意一个查询关键字和所述舆情信息中所有完整句的关联性作为一个关联性序列,将所述关联性序列的关联性均值作为每一个关联性序列的关联性值;
查询信息排布单元:用于根据所述关联性序列的关联性值,对所述查询关键字按照二叉树模型进行排布,生成查询分支树;
策略布置单元:用于根据所述查询分支树,设置持续循环查询策略和触发式循环查询策略;
平台分类单元:用于通过预设信息发布频率设置对所述新社交平台进行分类,将信息发布频率低于预设信息发布频率的新社交平台作为第一查询平台集合,将信息发布频率高于和等于预设信息发布频率的新社交平台作为第二查询平台集合;
策略实施单元:用于通过持续循环查询策略对所述第二查询平台集合进行舆情监测,通过触发式循环查询策略对所述第一查询平台集合进行舆情监测。
8.如权利要求7所述的一种基于大数据的舆情监测平台,其特征在于,所述舆情监测模块包括:
平台信息发布频率统计单元:用于设置预设规则,并通过所述预设规则确定所述新社交平台信息发布的动态频率;
调配单元:用于根据所述动态频率将所述新社交平台调配至第一查询平台集合或第二查询平台集合。
9.如权利要求8所述的一种基于大数据的舆情监测平台,其特征在于,所述预设规则包括时间规则和类型规则;
所述时间规则为:预设时间段,并通过预设时间段内的新社交平台的信息发布数和总监测时间,确定第一频率;
所述类型规则包括论坛规则、APP规则和游戏规则;其中,
当所述新社交平台为社交论坛时,分别将所述论坛进行信息发布的时间划分为活跃时间和静默时间,并分别检测所述活跃时间和静默时间的平台信息发布频率,以所述活跃时间和静默时间的平台信息发布频率的频率均值作为第二频率;
当所述新社交平台为社交APP和社交游戏时,分别基于所述社交APP和社交游戏的ID账号进行信息发布频率检测,并以每个ID账号的信息发布均值作为第二频率。
10.如权利要求1所述的一种基于大数据的舆情监测平台,其特征在于,所述舆情数据可视化模块包括:
数据分类单元:用于在所述新社交平台设置数据筛选规则,并将筛选后的舆情数据按照文件类型进行分类;其中,
所述文件类型包括文字、图片、语音和视频;
数据整理单元:用于将分类后的数据进行统计,并将统计后的分类数据转化为交互数据;其中,
所述交互数据包括视频数据、图表数据和文字数据;
数据可视化单元:用于通过预设的处理服务器将所述交互数据发送至数据交互设备,进行数据可视化。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110489867.8A CN113204688A (zh) | 2021-05-06 | 2021-05-06 | 一种基于大数据的舆情监测平台 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110489867.8A CN113204688A (zh) | 2021-05-06 | 2021-05-06 | 一种基于大数据的舆情监测平台 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113204688A true CN113204688A (zh) | 2021-08-03 |
Family
ID=77029975
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110489867.8A Withdrawn CN113204688A (zh) | 2021-05-06 | 2021-05-06 | 一种基于大数据的舆情监测平台 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113204688A (zh) |
-
2021
- 2021-05-06 CN CN202110489867.8A patent/CN113204688A/zh not_active Withdrawn
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110601956B (zh) | 一种内容聚合方法、装置、计算机设备和存储介质 | |
CN106357517B (zh) | 定向标签生成方法及装置 | |
US20220294821A1 (en) | Risk control method, computer device, and readable storage medium | |
CN100596135C (zh) | 一种确定内容提供商优先级的系统和方法 | |
US20110275047A1 (en) | Seeking Answers to Questions | |
CN101957834A (zh) | 一种基于用户特征进行内容推荐的方法与设备 | |
US20130117312A1 (en) | Method and server for pushing information proactively | |
US20120221561A1 (en) | Computer system, database and uses thereof | |
CN112104642B (zh) | 一种异常账号确定方法和相关装置 | |
WO2007071143A1 (fr) | Procédé et appareil destinés à émettre des informations réseau | |
CN104798041A (zh) | 使用确认指示来提高社交网络中的用户参与度 | |
CN103246703A (zh) | 一种用于确定应用词库的方法和设备 | |
CN108230169B (zh) | 基于社交影响力的信息传播模型及态势感知系统及方法 | |
CN102315952A (zh) | 一种用于社区网络中检测垃圾帖子的方法与设备 | |
CN105915602A (zh) | 基于社区检测算法p2p网络的调度方法及其系统 | |
KR100462542B1 (ko) | 신뢰성 있는 컨텐츠를 제공하는 컨텐츠 검색 시스템 및 그방법 | |
CN113987002A (zh) | 基于海量数据分析平台的数据交换方法 | |
CN105871585A (zh) | 终端关联方法及装置 | |
Cheng et al. | Video sharing propagation in social networks: Measurement, modeling, and analysis | |
CN106713950A (zh) | 一种基于用户行为预测分析的视频服务系统 | |
CN111447081B (zh) | 数据链生成方法、装置、服务器及存储介质 | |
JP4369104B2 (ja) | コミュニティ形成支援システム、その端末、サーバ及びプログラム | |
CN105635210A (zh) | 网络信息的推荐方法及装置、阅读系统 | |
WO2022057525A1 (zh) | 一种数据找回方法、装置、电子设备及存储介质 | |
US8825698B1 (en) | Showing prominent users for information retrieval requests |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WW01 | Invention patent application withdrawn after publication | ||
WW01 | Invention patent application withdrawn after publication |
Application publication date: 20210803 |