CN107229712A - 一种面向公共安全事件信息获取的时空聚类方法 - Google Patents
一种面向公共安全事件信息获取的时空聚类方法 Download PDFInfo
- Publication number
- CN107229712A CN107229712A CN201710392340.7A CN201710392340A CN107229712A CN 107229712 A CN107229712 A CN 107229712A CN 201710392340 A CN201710392340 A CN 201710392340A CN 107229712 A CN107229712 A CN 107229712A
- Authority
- CN
- China
- Prior art keywords
- data
- time
- space
- information
- event
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 47
- 239000000284 extract Substances 0.000 claims abstract description 10
- 238000012545 processing Methods 0.000 claims abstract description 7
- 238000000605 extraction Methods 0.000 claims description 12
- 230000011218 segmentation Effects 0.000 claims description 12
- 230000008569 process Effects 0.000 claims description 11
- 238000011161 development Methods 0.000 claims description 8
- 230000018109 developmental process Effects 0.000 claims description 8
- 238000004458 analytical method Methods 0.000 claims description 6
- 238000004140 cleaning Methods 0.000 claims description 3
- 238000013479 data entry Methods 0.000 claims description 3
- 230000003466 anti-cipated effect Effects 0.000 claims description 2
- 230000007613 environmental effect Effects 0.000 claims description 2
- 239000000203 mixture Substances 0.000 claims description 2
- 230000036651 mood Effects 0.000 claims description 2
- 238000010606 normalization Methods 0.000 claims description 2
- 238000012800 visualization Methods 0.000 abstract description 5
- 238000007726 management method Methods 0.000 description 14
- 230000006870 function Effects 0.000 description 10
- 244000097202 Rathbunia alamosensis Species 0.000 description 3
- 235000009776 Rathbunia alamosensis Nutrition 0.000 description 3
- 241001269238 Data Species 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000000116 mitigating effect Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 206010043458 Thirst Diseases 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006378 damage Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000035922 thirst Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
- G06F16/35—Clustering; Classification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/10—Services
- G06Q50/26—Government or public services
- G06Q50/265—Personal security, identity or safety
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Tourism & Hospitality (AREA)
- Educational Administration (AREA)
- Marketing (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Economics (AREA)
- Computer Security & Cryptography (AREA)
- Human Resources & Organizations (AREA)
- Development Economics (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种面向公共安全事件信息获取的时空聚类方法,提取出网络文本中有关公共安全事件的信息并行性聚类处理,然后进行可视化,分析出公共事件的影响范围、发展过程和可能结果等。采用本发明,能够在公共安全事件发生以后,结合事件类型和事件关键词,快速地从网络社交网站中抽取与该事件有关的有效信息,进而通过时空聚类算法和地图可视化系统,高效地获取事件发展过程和演化规律,有助于公共事件处置决策的确定,提高公共事件的处置效率。
Description
技术领域
本发明属于众源网络数据应用于公共安全事件管理、监控、预警、应急响应领域,特别涉及一种面向公共安全事件信息获取的时空聚类方法。
背景技术
随着全国经济的高速发展以及全国城镇化的不断推进,越来越多的人口集中到城市中来。城市人口数据量的急剧增长为城市公共管理造成了一定的麻烦。目前,城市各类公共事件的管理主要有政府部门负责,包括有城管部门、警察机关、消防机关、医疗部门、防灾减灾中心、灾难应变指挥中心等(朱武雄,2010;徐志胜等,2005;),这些政府机构为城市公民的生活以及生命财产提供了一道有效的安全屏障。然而,由于城市每天发生公共事件数量庞大,政府相关部门人力物力资源缺少,再加之各部门之间协调存在一定困难,导致部分公共事件得不到有效的处理。
近年来,随着互联网和移动便携技术的发展,使越来越多的城市公民能随手分享身边的事情,这为普通大众参与到公共安全事件的管理提供了可能。事实上,根据相关研究学者的调查显示,正处于转型期的中国社会也迫切渴望普通群众能够参与到公共安全事件的管理(王莹等,2015;徐琳,2014;锁利銘,2014;),一方面,公众参与能体现出普通公民在城市日常事物管理中的参与、决策作用,发挥出公民的主体性,另一方面,城市公共管理需要公众的积极参与,以弥补当前信息、资源的不足。总而言之,公众参与既是城市公共管理的发展趋势,又是当前情势下的迫切需要。目前,公众参与到公共安全事件管理的方式主要是通过网络社交媒体发表身边的一些事件信息或者对某些事件的看法,收集这些数据并加以提取分析,可以获取大量事件相关信息,进而应用于公共安全事件的管理,提高事件处理效率,使事件管理走向智慧化(张娅楠,2014;Ross C等,2011;)。
以新浪微博为例,新浪微博作为中国最大的网络社交平台,日平均活跃用户上亿,已成为公众参与公共安全管理的一个重要平台,每天都有众多的用户通过微博平台上传有关公共安全事件管理的微博数据,例如,2015年5月中旬长沙市连续下降暴雨,在政府相关机构快速发布暴雨预警并开展其他防洪防涝工作的同时,新浪微博平台上已有1840000多条相关数据,其内容中包括救援信息、灾情信息、灾情预警信息等,收集整理这些数据,挖掘出其中有用的信息,将辅助工作人员进行决策,并帮助减灾工作的快速、有效进行;又如,2014年浙江奉化塌楼事件,公众纷纷在互联网上对政府处理结果发表意见,人民网的舆情分析师提取了这些数据并分析,将公众意见数据进行处理,得到公众这对此次公共安全事件处理结果倾向态度,为后续的事件处理提供了参考,避免事件处理不当引起民愤;又如,2014年云南鲁甸发生地震,互联网上不断有公众上传灾区情况,包括救援物资发放情况,重点受灾区域情况等,一些救灾工作人员搜集网上的救灾数据,并整理分析后提取出数据中的救助信息,这些信息不仅帮助受灾人员及时了解救援情况,而且有利于灾区施救人员全面了解灾情情况,推动了救灾的快速进行。
然而,根据调查研究显示,目前公众在网络平台中产生的数据主要被应用于公共事件发生后的舆情监控与分析领域,在公共安全事件管理、监控、预警以及应急响应等领域相应的理论和方法较少,并鲜有应用。
发明内容
针对当前公共安全事件处置过程中,存在数据获取不及时、信息源较少等问题,本发明结合网络众源数据的特点,提出了一种面向公共安全事件信息获取的时空聚类方法,并将其应用于公共安全事件管理中,旨在充分发挥网络众源数据的作用,提高公共安全事件处置效率。
为了实现上述技术目的,本发明的技术方案是,一种面向公共安全事件信息获取的时空聚类方法,包括以下步骤:
步骤1:获取与突发公共安全事件有关的社交媒体数据,并将数据存入数据缓存区A中;
步骤2:遍历数据缓存区A中的每条数据,利用基于条件随机场模型的中文切词算法,将每条数据切成若干词汇的集合;再从中抽取数据的时间、位置、事件类型和事件等级属性,并将数据规则化为<时间,位置,事件类型,事件等级>4元组;将规则化数据存入数据缓存区B;
步骤3:根据该突发公共安全事件的自身信息,提取该突发公共安全事件的发生时间、发生位置和事件类型以建立公共安全事件的时空聚类的核信息,并以<时间,位置,事件类型>3元组作为时空聚类的核信息;
步骤4:遍历缓存区B中的数据,分别计算每条数据到核信息的时间距离、空间距离和文本距离,将3种距离均小于给定阈值的数据,归入候选结果数据集合C;然后根据集合C中的事件等级属性,将数据分成若干簇,完成时空聚类;
步骤5:根据聚类结果的时空特征,将其叠加到地图上,展现事件在时间、空间上的发展过程。
所述的方法,步骤1中获得与突发公共安全事件有关的社交媒体数据,包括以下步骤:根据该突发的公共安全事件分类,利用社交网站提供的API函数,输入事件关键词、时间范围和事件发生的地点,获取与该事件有关的社交媒体数据。
所述的方法,步骤2所述的数据规则化包括以下步骤:
(1)遍历缓存区A中的每条数据,利用基于条件随机场模型的切词算法,对该条数据进行分词处理,将每条数据切成若干词汇的集合;
(2)遍历每条数据的词汇集合,利用时间抽取算法,确定每条数据的时间属性;
(3)遍历每条数据的词汇集合,利用位置抽取算法,确定每条数据的位置属性;
(4)遍历每条数据的词汇集合,利用规则归并算法,确定每条数据的事件类型和等级;
(5)根据(2)~(4)过程确定的属性信息,将每条数据规则化为<时间,地点,事件类型,事件等级>4元组,即使用该4元组概化每条数据;
(6)将规则化的数据条目存入数据缓存区B。
所述的一种面向公共安全事件信息获取的时空聚类方法,所述的步骤4包括以下处理步骤:
(1)设定聚类的时间距离、空间距离和文本距离3个距离阈值;
(2)遍历缓存区B的数据,剔除所有与核信息事件类型不相同的数据;
(3)遍历清理后的缓存区B,计算该条数据与核信息的时间距离、空间距离和文本距离,当三种距离均小于给定的对应距离阈值时,该条数据归入事件数据集合C;
(4)遍历集合C,依据每条数据元组的事件等级,将集合C划分成不同等级的数据簇,完成时空聚类。
所述的一种面向公共安全事件信息获取的时空聚类方法,步骤1中所述的公共安全事件是指突发的自然灾害、重特大事故、环境公害和人为破坏。
所述的一种面向公共安全事件信息获取的时空聚类方法,所述的API函数是指网络社交网站发布的用于获取网络社交数据的应用开发接口函数,用于依据关键词、时间范围、地理范围获取实时的网络社交数据。
中所述的一种面向公共安全事件信息获取的时空聚类方法,步骤2中所述的中文切词方法是指基于条件随机场模型的中文分词算法,利用条件随机场模型将句子、段落切分成若干词汇的集合后并标注每个词汇的词性,以提取文本中的关键信息。
中所述的一种面向公共安全事件信息获取的时空聚类方法,步骤3和4中所述的时空聚类核信息是指数据聚类的基准信息,用于通过计算数据与核信息的距离,确定是否归入聚类结果集;
所述的时间距离是指发表数据包含的时间与核信息设定时间的时间差;
所述的空间距离是指数据描述的空间位置与核信息设定位置的空间平面距离;
所述的文本距离是指文本的内容相似程度,通过主题模型计算得到0~1之间的相似度数值,数值越靠近1,表示文本越相似,文本距离越近,否则本距离越远。
中所述的一种面向公共安全事件信息获取的时空聚类方法,所述的步骤2中,所述的时间抽取算法是指根据文本切分词条的词性标注,提取出被标注为时间词性的词条;然后根据时间词条的词意,将文本时间转换为标准时间的格式;
所述的位置抽取算法是指根据文本切分词条的词性标注,抽取出被标注为地名的词条;然后利用公知的地理编码服务将地名转换为经纬度的数据格式;
所述的规则归并算法是指利用语法分析算法,分析文本数据的成分构成,并根据依存关系,提取核心谓语后面的数据作为事件描述内容;然后建立事件类型词典,根据词典匹配算法,判断事件描述中所属的类型;最后建立语气助词的字典和事件等级分类规则,根据词典匹配算法,判断数据中的事件类型和分级。
本发明的技术效果在于,城市公共管理涉及范围广,事件类型繁多,处理过程复杂,人力物力耗费巨大。本发明结合互联网社交平台发展和应用的特点,提出了从网络社交数据中抽取与公共安全事件有关信息的方法,具有以下几个优点:
(1)利用网络社交数据,实现了面向公共安全事件的数据获取与分析方法,能使普通公民发布的信息用于公共安全事件的管理和处置,提高公共安全事件的处置效率。
(2)利用文本处理方法,提取出数据中的时间、空间和事件描述信息;进而,利用时间提取算法,确定数据包含的时空信息;然后,利用基于三重距离的时空聚类算法,实现了信息的提取/聚类,能有效提高信息获取和分类效率。
(3)根据时空聚类结果的时空、空间和事件等级信息,将结果叠加到地图上,从空间、时间维度上展现事件的发展变化过程。
采用本发明,能够实现公共安全事件的智慧化管理,能实时地从网络社交媒体数据中获取事件有关的动态和舆论走向,有效提高公共安全事件的管理效率和民众满意度。
附图说明
图1为本发明的流程示意图;
图2为本发明的原理结构图;
图3为网络文本数据获取流程图;
图4为文本数据中的时空、事件信息提取流程;
图5为三重距离聚类算法流程图。
具体实施方式
下面结合附图和具体实施方式对本发明做进一步说明。
本发明的简要步骤参见图1,包括:
(1)根据公共安全事件特征,确定要搜索数据的关键词、时间范围和地理空间范围,利用网络社交平台提供的API函数,获取实时数据。
(2)利用中文切词算法,将获取的数据逐条进行分词;根据分词结果,抽取数据的时间、位置、事件类型、事件等级等属性信息,进而将数据规则化为<时间,地点,事件类型,事件等级>的4元组。
(3)根据选择的事件类型以及输入的事件发生时间、位置,确定时空聚类的初始信息,记作核信息。
(4)计算规则化数据与核信息之间的时间、空间、文本距离,将三种距离均小于给定阈值的数据归入结果集;进而根据结果集中每条数据的事件等级,划分为若干簇,完成时空聚类。
(5)结合地理信息的可视化功能,将时空聚类结果展示在地图上。
本发明的处理过程包括网络文本数据获取、数据中时空信息提取、事件类型及分级信息抽取取,以及基于三重距离的文本聚类、聚类结果可视化等过程,原理如图2所示。具体处理过程包括以下几个步骤:
步骤1:根据突发的公共安全事件分类,输入事件关键词、时间范围和事件发生的地点,利用网络社交平台提供的API函数,获取与该事件有关的网络社交众源数据,并将数据存入数据缓存区A中。
步骤2:规则化缓存区A中的数据,以下从6个方面阐述规则化过程:
(1)遍历缓存区A中的每条数据,利用基于条件随机场的切词算法对该条数据进行分词处理,将每条数据切成若干词汇的集合。
(2)遍历每条数据的词汇集合,利用时间抽取算法,确定每条数据的时间属性。
(3)遍历每条数据的词汇集合,利用地点抽取算法,确定每条数据的位置属性。
(4)遍历每条数据的词汇集合,利用规则归并算法,确定每条数据的事件类型和等级。
(5)根据(2)~(4)过程确定的属性信息,将每条数据规则化为<时间,地点,事件类型,事件等级>4元组,即使用该4元组概化每条数据。
(6)将规则化的数据条目存入数据缓存区B。
步骤3:建立公共安全事件的时空聚类的核信息,该信息包括公共安全事件的类型、发生时间、发生位置,从而将核信息表述为<时间,地点,事件类型>3元组。
步骤4:依据时空聚类规则,利用三重距离聚类算法,完成面向公共安全事件的时空聚类。以下从4方面描述该步骤:
(1)设定聚类的时间距离、空间距离、文本距离等3个距离阈值。
(2)遍历缓存区B的数据,剔除所有与核信息事件类型不相同的数据。
(3)遍历清理后的缓存区B,计算该条数据与核信息的时间距离、空间距离和文本距离,当且仅当三种距离均小于给定的对应距离阈值时,该条数据归入候选结果集合C。
(4)遍历集合C,依据每条数据元组的事件等级,将集合C划分成不同等级的数据簇,完成时空聚类。
步骤5:根据聚类结果的时空特征,将其叠加到地图上,展现事件在时间、空间上的发展过程。
如图2所示,本发明主要包括三个环节:(1)获取公共安全事件相关的网络数据;(2)提取数据中的时空及事件信息;(3)建立公共事件的核信息,利用三重距离聚类算法,完成面向公共安全事件的时空聚类,并将聚类结果可视化。
下面按三个环节分别阐述实施过程,下列环节中A表示网络文本数据存储数据库,B表示提取后的信息存储数据库:
公共安全事件相关的网络社交数据获取:
在公共安全事件发生后,利用本发明软件提供的数据下载程序,结合事件的关键词、时间范围和地理范围,可以快速下载与事件相关的网络社交数据。首先,输入事件关键词、发生的时间范围和地点,系统自动生成数据搜索参数;然后,选择网络社交平台,系统调用网络社交平台提供的API函数,自动将下载数据并存入数据库A。实现流程如图3所示。
本实施例中利用Html5+JavaScript程序语言,结合第三方网络社交平台提供的数据访问API函数,可实现基于Web的数据下载。
数据中时空及事件信息的提取:
利用基于条件随机场的中文分词算法,将文本数据切分成若干词组,并标注每个词汇的词性。根据词性标注结果,提取被标注为时间类型的词词,根据时间词典和转换规则,将其转换成标准的“yyyy-MM-ddhh:mm:ss”的时间格式;提取被标注为地名/位置类型的词组,利用地理编码算法,将地名/位置转换成地理坐标;利用依存句法分析算法,提取出文本数据中的事件描述信息,根据事件类型词典和事件等级划分规则,确定事件类型和事件的等级;最后,将提取出来的时间、空间以、事件类型和分级存入数据库B。实现流程如图4所示。
本实施例基于开源的中文分词程序HanLP,使用Eclipse和Tomcat集成开发环境,能够基于网络社交文本数据对时空及事件信息进行提取,实现了文本数据的切分、信息的自动提取、信息存储等功能。
利用三重距离实现信息聚类和结果可视化:
首先,给定公共安全事件的核信息,包括事件的时间、地点和事件类型,选择聚类的时间距、空间和文本距离阈值;然后,计算数据库B的每条记录与核信息的时间距离、空间距离和文本距离;最后,将三个距离都小于给定阈值的信息放入到一个候选结果中;最后,根据候选结果的事件分级,将候选结果划分成若干簇,完成时空聚类。
聚类结束后,利用网络地图,将聚类结果分时间维度,利用热力图、密度图等形式展示在地图上。实现流程如图5所示。
本实施例使用JavaScript开发语言,实现了基于三重距离的时空聚类算法,进而利用百度地图JavaScript API,实现了文本信息聚类结果的可视化。
应该说明的是,以上实施方法仅用来说明本发明的技术方案而非限制。对于本发明所属技术领域的技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。
Claims (9)
1.一种面向公共安全事件信息获取的时空聚类方法,其特征在于,包括以下步骤:
步骤1:获取与突发公共安全事件有关的社交媒体数据,并将数据存入数据缓存区A中;
步骤2:遍历数据缓存区A中的每条数据,利用基于条件随机场模型的中文切词算法,将每条数据切成若干词汇的集合;再从中抽取数据的时间、位置、事件类型和事件等级属性,并将数据规则化为<时间,位置,事件类型,事件等级>4元组;将规则化数据存入数据缓存区B;
步骤3:根据该突发公共安全事件的自身信息,提取该突发公共安全事件的发生时间、发生位置和事件类型以建立公共安全事件的时空聚类的核信息,并以<时间,位置,事件类型>3元组作为时空聚类的核信息;
步骤4:遍历缓存区B中的数据,分别计算每条数据到核信息的时间距离、空间距离和文本距离,将3种距离均小于给定阈值的数据,归入候选结果数据集合C;然后根据集合C中的事件等级属性,将数据分成若干簇,完成时空聚类;
步骤5:根据聚类结果的时空特征,将其叠加到地图上,展现事件在时间、空间上的发展过程。
2.根据权利要求1所述的方法,其特征在于,步骤1中获得与突发公共安全事件有关的社交媒体数据,包括以下步骤:根据该突发的公共安全事件分类,利用社交网站提供的API函数,输入事件关键词、时间范围和事件发生的地点,获取与该事件有关的社交媒体数据。
3.根据权利要求1所述的方法,其特征在于,步骤2所述的数据规则化包括以下步骤:
(1)遍历缓存区A中的每条数据,利用基于条件随机场模型的切词算法,对该条数据进行分词处理,将每条数据切成若干词汇的集合;
(2)遍历每条数据的词汇集合,利用时间抽取算法,确定每条数据的时间属性;
(3)遍历每条数据的词汇集合,利用位置抽取算法,确定每条数据的位置属性;
(4)遍历每条数据的词汇集合,利用规则归并算法,确定每条数据的事件类型和等级;
(5)根据(2)~(4)过程确定的属性信息,将每条数据规则化为<时间,地点,事件类型,事件等级>4元组,即使用该4元组概化每条数据;
(6)将规则化的数据条目存入数据缓存区B。
4.根据权利要求1中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,所述的步骤4包括以下处理步骤:
(1)设定聚类的时间距离、空间距离和文本距离3个距离阈值;
(2)遍历缓存区B的数据,剔除所有与核信息事件类型不相同的数据;
(3)遍历清理后的缓存区B,计算该条数据与核信息的时间距离、空间距离和文本距离,当三种距离均小于给定的对应距离阈值时,该条数据归入事件数据集合C;
(4)遍历集合C,依据每条数据元组的事件等级,将集合C划分成不同等级的数据簇,完成时空聚类。
5.根据权利要求1中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,步骤1中所述的公共安全事件是指突发的自然灾害、重特大事故、环境公害和人为破坏。
6.根据权利要求2中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,所述的API函数是指网络社交网站发布的用于获取网络社交数据的应用开发接口函数,用于依据关键词、时间范围、地理范围获取实时的网络社交数据。
7.根据权利要求1中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,步骤2中所述的中文切词方法是指基于条件随机场模型的中文分词算法,利用条件随机场模型将句子、段落切分成若干词汇的集合后并标注每个词汇的词性,以提取文本中的关键信息。
8.根据权利要求1中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,步骤3和4中所述的时空聚类核信息是指数据聚类的基准信息,用于通过计算数据与核信息的距离,确定是否归入聚类结果集;
所述的时间距离是指发表数据包含的时间与核信息设定时间的时间差;
所述的空间距离是指数据描述的空间位置与核信息设定位置的空间平面距离;
所述的文本距离是指文本的内容相似程度,通过主题模型计算得到0~1之间的相似度数值,数值越靠近1,表示文本越相似,文本距离越近,否则本距离越远。
9.根据权利要求3中所述的一种面向公共安全事件信息获取的时空聚类方法,其特征在于,所述的步骤2中,所述的时间抽取算法是指根据文本切分词条的词性标注,提取出被标注为时间词性的词条;然后根据时间词条的词意,将文本时间转换为标准时间的格式;
所述的位置抽取算法是指根据文本切分词条的词性标注,抽取出被标注为地名的词条;然后利用公知的地理编码服务将地名转换为经纬度的数据格式;
所述的规则归并算法是指利用语法分析算法,分析文本数据的成分构成,并根据依存关系,提取核心谓语后面的数据作为事件描述内容;然后建立事件类型词典,根据词典匹配算法,判断事件描述中所属的类型;最后建立语气助词的字典和事件等级分类规则,根据词典匹配算法,判断数据中的事件类型和分级。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710392340.7A CN107229712A (zh) | 2017-05-27 | 2017-05-27 | 一种面向公共安全事件信息获取的时空聚类方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710392340.7A CN107229712A (zh) | 2017-05-27 | 2017-05-27 | 一种面向公共安全事件信息获取的时空聚类方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107229712A true CN107229712A (zh) | 2017-10-03 |
Family
ID=59933478
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710392340.7A Pending CN107229712A (zh) | 2017-05-27 | 2017-05-27 | 一种面向公共安全事件信息获取的时空聚类方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107229712A (zh) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107944699A (zh) * | 2017-11-22 | 2018-04-20 | 清华大学 | 基于多维情景模型的案例表达方法及装置 |
CN108711264A (zh) * | 2018-05-16 | 2018-10-26 | 深圳市城市公共安全技术研究院有限公司 | 基于大数据的地质灾害监测方法及监测系统 |
CN109343732A (zh) * | 2018-09-11 | 2019-02-15 | 北京唐冠天朗科技开发有限公司 | 一种城市公共安全模拟装置和方法 |
CN109377439A (zh) * | 2018-12-04 | 2019-02-22 | 北京唐冠天朗科技开发有限公司 | 一种城市安全信息管理系统、方法及数据处理中心 |
CN110232158A (zh) * | 2019-05-06 | 2019-09-13 | 重庆大学 | 基于多模态数据的突发公共安全事件检测方法 |
CN110263857A (zh) * | 2019-03-27 | 2019-09-20 | 中国海洋大学 | 一种基于时空聚类和多模型融合的群体行为分析和预测方法 |
CN110580269A (zh) * | 2019-09-06 | 2019-12-17 | 中科院合肥技术创新工程院 | 一种面向公共安全事件的时空数据动态演化图生成方法及其动态演化系统 |
CN111127841A (zh) * | 2019-12-31 | 2020-05-08 | 贵州东方世纪科技股份有限公司 | 一种突发自然灾害事件监控系统 |
CN112491925A (zh) * | 2020-12-10 | 2021-03-12 | 北京冠程科技有限公司 | 根据时间节点获取网络安全事件的方法、系统及电子设备 |
CN112559844A (zh) * | 2020-12-17 | 2021-03-26 | 北京邮电大学 | 自然灾害舆情分析方法和装置 |
CN112579920A (zh) * | 2020-12-09 | 2021-03-30 | 成都中科大旗软件股份有限公司 | 一种基于事件实现跨时空传播分析方法 |
CN113094503A (zh) * | 2021-03-23 | 2021-07-09 | 重庆特斯联智慧科技股份有限公司 | 一种基于多维数据聚类的社区安全监控方法和系统 |
CN113191191A (zh) * | 2021-03-23 | 2021-07-30 | 武汉特斯联智能工程有限公司 | 一种基于用户习惯分析的社区疫情管理方法和系统 |
CN113537691A (zh) * | 2021-05-09 | 2021-10-22 | 武汉兴得科技有限公司 | 一种大数据公共卫生事件应急指挥方法及系统 |
CN113590978A (zh) * | 2021-08-05 | 2021-11-02 | 迪爱斯信息技术股份有限公司 | 一种热点事件识别方法和系统 |
CN115170053A (zh) * | 2022-05-24 | 2022-10-11 | 中睿信数字技术有限公司 | 一种基于聚类融合的事件分拨处置系统 |
CN113590978B (zh) * | 2021-08-05 | 2024-07-30 | 迪爱斯信息技术股份有限公司 | 一种热点事件识别方法和系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105630884A (zh) * | 2015-12-18 | 2016-06-01 | 中国科学院信息工程研究所 | 一种微博热点事件的地理位置发现方法 |
CN106021508A (zh) * | 2016-05-23 | 2016-10-12 | 武汉大学 | 基于社交媒体的突发事件应急信息挖掘方法 |
CN106484767A (zh) * | 2016-09-08 | 2017-03-08 | 中国科学院信息工程研究所 | 一种跨媒体的事件抽取方法 |
-
2017
- 2017-05-27 CN CN201710392340.7A patent/CN107229712A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105630884A (zh) * | 2015-12-18 | 2016-06-01 | 中国科学院信息工程研究所 | 一种微博热点事件的地理位置发现方法 |
CN106021508A (zh) * | 2016-05-23 | 2016-10-12 | 武汉大学 | 基于社交媒体的突发事件应急信息挖掘方法 |
CN106484767A (zh) * | 2016-09-08 | 2017-03-08 | 中国科学院信息工程研究所 | 一种跨媒体的事件抽取方法 |
Non-Patent Citations (3)
Title |
---|
张春菊: "中文文本中事件时空与属性信息解析方法研究", 《中国博士学位论文全文数据库基础科学辑》 * |
李弼程: "《网络舆情分析 理论技术与应对策略》", 31 March 2013 * |
祁坤钰: "《藏文分词与标注研究》", 31 March 2015 * |
Cited By (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107944699A (zh) * | 2017-11-22 | 2018-04-20 | 清华大学 | 基于多维情景模型的案例表达方法及装置 |
CN108711264A (zh) * | 2018-05-16 | 2018-10-26 | 深圳市城市公共安全技术研究院有限公司 | 基于大数据的地质灾害监测方法及监测系统 |
CN109343732A (zh) * | 2018-09-11 | 2019-02-15 | 北京唐冠天朗科技开发有限公司 | 一种城市公共安全模拟装置和方法 |
CN109377439A (zh) * | 2018-12-04 | 2019-02-22 | 北京唐冠天朗科技开发有限公司 | 一种城市安全信息管理系统、方法及数据处理中心 |
CN110263857A (zh) * | 2019-03-27 | 2019-09-20 | 中国海洋大学 | 一种基于时空聚类和多模型融合的群体行为分析和预测方法 |
CN110232158A (zh) * | 2019-05-06 | 2019-09-13 | 重庆大学 | 基于多模态数据的突发公共安全事件检测方法 |
CN110580269A (zh) * | 2019-09-06 | 2019-12-17 | 中科院合肥技术创新工程院 | 一种面向公共安全事件的时空数据动态演化图生成方法及其动态演化系统 |
CN110580269B (zh) * | 2019-09-06 | 2021-11-12 | 中科院合肥技术创新工程院 | 一种面向公共安全事件的时空数据动态演化图生成方法及其动态演化系统 |
CN111127841A (zh) * | 2019-12-31 | 2020-05-08 | 贵州东方世纪科技股份有限公司 | 一种突发自然灾害事件监控系统 |
CN112579920A (zh) * | 2020-12-09 | 2021-03-30 | 成都中科大旗软件股份有限公司 | 一种基于事件实现跨时空传播分析方法 |
CN112491925A (zh) * | 2020-12-10 | 2021-03-12 | 北京冠程科技有限公司 | 根据时间节点获取网络安全事件的方法、系统及电子设备 |
CN112559844A (zh) * | 2020-12-17 | 2021-03-26 | 北京邮电大学 | 自然灾害舆情分析方法和装置 |
CN112559844B (zh) * | 2020-12-17 | 2021-08-31 | 北京邮电大学 | 自然灾害舆情分析方法和装置 |
CN113094503A (zh) * | 2021-03-23 | 2021-07-09 | 重庆特斯联智慧科技股份有限公司 | 一种基于多维数据聚类的社区安全监控方法和系统 |
CN113191191A (zh) * | 2021-03-23 | 2021-07-30 | 武汉特斯联智能工程有限公司 | 一种基于用户习惯分析的社区疫情管理方法和系统 |
CN113191191B (zh) * | 2021-03-23 | 2023-08-18 | 武汉特斯联智能工程有限公司 | 一种基于用户习惯分析的社区疫情管理方法和系统 |
CN113537691A (zh) * | 2021-05-09 | 2021-10-22 | 武汉兴得科技有限公司 | 一种大数据公共卫生事件应急指挥方法及系统 |
CN113590978A (zh) * | 2021-08-05 | 2021-11-02 | 迪爱斯信息技术股份有限公司 | 一种热点事件识别方法和系统 |
CN113590978B (zh) * | 2021-08-05 | 2024-07-30 | 迪爱斯信息技术股份有限公司 | 一种热点事件识别方法和系统 |
CN115170053A (zh) * | 2022-05-24 | 2022-10-11 | 中睿信数字技术有限公司 | 一种基于聚类融合的事件分拨处置系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107229712A (zh) | 一种面向公共安全事件信息获取的时空聚类方法 | |
Shan et al. | Disaster management 2.0: A real-time disaster damage assessment model based on mobile social media data—A case study of Weibo (Chinese Twitter) | |
Yao et al. | Towards resilient and smart cities: A real-time urban analytical and geo-visual system for social media streaming data | |
CN106021508A (zh) | 基于社交媒体的突发事件应急信息挖掘方法 | |
Schulz et al. | Crisis information management in the Web 3.0 age. | |
CN110533212A (zh) | 基于大数据的城市内涝舆情监测预警方法 | |
CN101782897A (zh) | 基于事件的中文语料标注方法 | |
Maldonado et al. | System for monitoring natural disasters using natural language processing in the social network Twitter | |
CN110263857A (zh) | 一种基于时空聚类和多模型融合的群体行为分析和预测方法 | |
CN114282534A (zh) | 一种基于要素信息抽取的气象灾害事件聚合方法 | |
Diefenbach et al. | Variations in community exposure to lahar hazards from multiple volcanoes in Washington State (USA) | |
Chen et al. | Social media data-based typhoon disaster assessment | |
Ngamassi et al. | Text mining hurricane harvey tweet data: Lessons learned and policy recommendations | |
CN106503256A (zh) | 一种基于社交网络文档的热点信息挖掘方法 | |
Xie et al. | Using social media data to enhance disaster response and community service | |
Ma et al. | Analysis of public emotion on flood disasters in southern China in 2020 based on social media data | |
Pereira et al. | Crisis event social media summarization with GPT-3 and neural reranking | |
Zhai | A multi-level analytic framework for disaster situational awareness using Twitter data | |
Zhou et al. | Classification of microblogs for support emergency responses: Case study Yushu earthquake in China | |
Zheng et al. | Earthquake impact analysis based on text mining and social media analytics | |
CN116681305A (zh) | 一种基于知识图谱的突发事件应急决策方法 | |
CN113360480B (zh) | 地震防治主题库构建方法、系统、电子设备及存储介质 | |
Baek et al. | Disaster anxiety measurement and corpus-based content analysis of crisis communication | |
Saravanan et al. | Enabling real time crime intelligence using mobile GIS and prediction methods | |
Xu et al. | A Weighted Information Fusion Method Based on Sentiment Knowledge for Emergency Decision-Making Considering the Public and Experts |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20171003 |