CN117009589A - 一种基于多模态智能服务的安全检查管理方法及系统 - Google Patents

Abstract

本发明公开了一种基于多模态智能服务的安全检查管理方法及系统。该方法包括：通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到包含上下位关联信息的检查标准清单；基于检查标准清单中各检查标准建立检查项库；获取检查项在安全管理闭环过程中产生的全链路过程数据；将所述检查项库中目标检查项和所述目标检查项的全链路过程数据关联同步至图数据库，形成安全生产知识图谱。本发明实施例可以精细化管理安全生产中写、做与查的一致性，避免标准与实际脱节,为检查中所发现风险隐患的控制防范、治理提供智能化的制度、技术防护屏障，围绕安全制度与执行情况使用全链路态势评估、分析辅助安全决策研判，促进社会企业高质量发展。

Description

一种基于多模态智能服务的安全检查管理方法及系统

技术领域

本发明涉及安全管理技术领域，尤其涉及一种基于多模态智能服务的安全检查方法及系统。

背景技术

安全生产在推动经济与社会持续向高质量发展层面中，肩负着核心而显著的作用。生产单位目前普遍根据法律法规、上下位制度、程序和手册等安全生产的标准文件，对生产项目实施安全检查和评估，有效防范风险和排查治理安全隐患，但也存在如下问题：

一是由于法律法规、上下位制度、手册和程序等标准文件多为非结构化文件，蕴含了文本、表格、流程和图片等多种格式。故而安全管理的检查项与安全管理体系的标准文件无法完全契合和校验，使得安全管理可能存在本级标准文件与上位标准文件、部分检查标准与实际检查项的脱节。

二是检查实施、整改和回访等闭环管理记录、实施过程中发现的问题记录未数字化，或数字化后由于相关佐证材料为描述长文本、流程、图片及语音等格式，异构数据使得传统方法难以挖掘利用相似问题经验，对检查发现问题背后潜藏的风险隐患的控制防范未提供足够技术屏障。

三是从法律法规，上下位文件到企业执行的闭环记录、分析，整个安全管理依据到评估的链条过长，传统方法和系统在操作上有其局限性无法实现全链路的态势评估和分析。

发明内容

本发明提供了一种基于多模态智能服务的安全检查管理方法及系统，加强了安全标准文件写、做与查的一致性，为检查中所发现的问题提供风险控制、隐患治理相关技术防护屏障，围绕安全制度与执行情况使用全链路态势评估、分析辅助安全决策研判,以全面提高安全管理能力。

根据本发明的一方面，提供了一种基于多模态智能服务的安全检查管理方法，包括：

通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单包括上下位关联信息；

基于检查标准清单中各检查标准对应的检查项建立检查项库；

获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据；

将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

根据本发明的另一方面，提供了一种基于多模态智能服务的安全检查管理系统，包括：

检查标准确定模块，用于通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单包括所属文件元信息，上下位关联信息；

检查项确定模块，用于基于检查标准清单中各检查标准对应的检查项建立检查项库；

管理数据获取模块，用于获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据；

管理数据同步模块，用于将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

本发明实施例通过对标准文件进行结构化处理得到检查标准清单和检查项库，并将检查项的全链路安全管理过程数据以数字化的方式同步到图数据库，得到清晰明确的全流程知识图谱，避免检查标准与实际检查项存在脱节问题，为检查中所发现问题的风险隐患控制防范提供足够的信息支持，实现安全管理的全链路态势评估和分析。

应当理解，本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征，也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明一实施例提供的一种基于多模态智能服务的安全检查管理方法的流程图；

图2A是根据本发明又一实施例提供的一种基于多模态智能服务的安全检查管理方法的流程图；

图2B是根据本发明又一实施例提供的一种安全管理体系检查及评估系统的工作流程示意图；

图3是根据本发明又一实施例提供的一种基于多模态智能服务的安全检查管理系统的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

图1为本发明一实施例提供的一种基于多模态智能服务的安全检查管理方法的流程图，本实施例可适用于通过多模态智能服务对非结构化的标准文件发布、检查项的建立、检查项的检查实施、整改和回访等安全管理项目全程支持和数据记录的情况，该方法可以由基于多模态智能服务的安全检查管理系统来执行，该装置可以采用硬件和/或软件的形式实现，该装置可配置于具备相应处理能力的电子设备中。如图1所示，该方法包括：

S110、通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单。

其中，标准文件包括法律法规、上下位制度文件、本级单位体系文件、程序文件和手册文件等多种文件。多模态智能服务主要用于对图片、语音、文本等多种格式的标准文件进行如语义相似度分析等智能服务。

具体的，预先设定标准文件的协同编辑、审定和发布流程，在标准文件发布后，系统通过多模态智能服务，将其转换为结构化文件，再对结构化文件中的检查标准进行识别，得到其中一个或多个检查标准，形成检查标准清单。

S120、基于检查标准清单中各检查标准对应的检查项建立检查项库。

S130、获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据。具体的，系统将检查标准清单中的检查标准展示给检查人员，检查人员人工填写各检查标准的检查内容，检查内容通过审核后将其作为对应检查标准的检查项存储至检查项库。针对各检查项，人工制定其年度、季节、月度或临时检查计划，制定的检查计划包括计划时间、计划名称、检查内容、检查项，检查要求，检查方法，主办部门，协办部门，责任人，检查对象，检查人员，备注等属性。

S140、将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

其中，全链路安全管理过程数据包括检查实施记录、上下位检查标准、闭环管理数据和源标准文件的元信息。安全生产知识图谱是从法律法规、集团制度到本公司制度、制度里的每项标准，标准的检查项、检查项的检查闭环记录、风险隐患管控治理记录的全流程知识图谱。具体的，从检查项库任取任一检查项，作为目标检查项。根据安全检查体系流程和目标检查项的检查计划，对目标检查项进行包括检查实施、检查整改和检查回访在内的安全检查流程，并记录安全检查流程中的检查数据，作为全链路安全管理过程数据。以知识库建立为起始，以检查项的检查回访为终止，建立安全管理体系图谱本体模型。基于安全管理体系图谱本体模型，将安全检查流程中全链路安全管理过程数据定时同步到图数据库，图实体包括文件元、检查标准、检查项、年度计划、月度计划、检查组、检查对象、实施记录、问题记录、整改记录、回访记录等，实体关系包括指导、包含、依赖、实施、整改、回访、改进等，得到多维度、全链条的安全生产知识图谱。综合查询、统计和分析过程形成安全生产月报,安全态势评估,绩效评估,相似案例分析,体系文件检查覆盖和问题分布分析，上下位文件关联血缘图等。

本发明实施例通过对标准文件进行结构化处理得到检查标准清单和检查项库，并将检查项的全链路安全管理过程数据以数字化的方式同步到图数据库，得到清晰明确的全流程知识图谱，避免检查标准与实际检查项存在脱节问题，为检查中所发现问题的风险隐患控制防范提供足够的信息支持，实现安全管理的全链路态势评估和分析。

可选的，当所述全链路安全管理过程数据为检查实施记录时，所述全链路安全管理过程数据通过下述方式获取：

在检查人员对目标检查项实施检查时，通过多模态智能服务获取所述目标检查项的相似案例，并向所述检查人员展示所述相似案例；获取所述检查人员基于所述相似案例对所述目标检查项给出的检查实施记录。

具体的，检查实施时，由检查人员人工填写目标检查项的检查实施记录，检查实施记录经检查人员和被检查对象双方电子签字后确认，由系统记录并同步至图数据库，检查实施记录包括是否发现问题、问题详细描述、改进建议、佐证材料(如流版式文档、图片及语音)等。为提高检查实施的效率，在检查实施的过程中，系统通过多模态智能服务能力搜索目标检查项的相似案例，搜索包括问题类型的相似度搜索、长文本描述与图片联合建模的相似度搜索，将搜索到的相似案例展示给检查人员，提高检查人员的检查效率。

可选的，当所述全链路安全管理过程数据为闭环管理数据时，所述全链路安全管理过程数据通过下述方式获取：

将所述目标检查项的目标检查对象的整改数据确定为第一闭环管理数据；根据风险矩阵确定所述目标检查对象的存在问题的风险等级，并确定所述风险等级对应的风险管控流程和隐患治理流程；将所述风险等级、所述风险管控流程和所述隐患治理流程确定为第二闭环管理数据；将所述目标检查对象的回访信息确定为第三闭环管理数据。

具体的，在检查实施后，需要对检查项依次进行检查整改和检查回访。

在检查整改中，对于检查实施中所发现的存在问题，被检查对象需限期整改，并完成整改数据的填写，整改数据包括整改措施，执行人，完成时间及相关佐证材料，由系统将整改数据作为第一闭环管理数据记录并同步至图数据库。预先根据风险矩阵自动划分灾难、严重、轻度和轻微四个风险等级并确定各等级的划分原则，对于所发现的存在问题，依据风险矩阵及各风险等级的划分原则，确定存在问题对应的风险等级。并根据各风险等级关联的风险隐患管控治理流程，确定存在问题的风险隐患管控治理流程，由系统将风险等级和风险隐患管控治理流程作为第二闭环管理数据记录并同步至图数据库。

在检查回访中，人工对已整改或未按时整改的检查项进行远程或现场回访，并记录回访数据，回访数据包括回访的方式、回访的情况、评价的结果、以及进一步改进建议，由系统将回访数据作为第三闭环管理数据记录并同步至图数据库。

可选的，当所述全链路安全管理过程数据为上下位检查标准时，所述全链路安全管理过程数据通过下述方式获取：

获取目标检查项的源标准文件的上下位标准文件；通过多模态智能服务确定所述目标检查项在上下位标准文件中关联的上下位标准。

其中，源标准文件为目标检查项对应的源检查标准所在的标准文件，上下位标准文件为与源标准文件有上下位文件血缘的标准文件，包括源标准文件的上位法规文件和母公司文件，例如上下位文件为源标准文件所属公司的母公司所发布的标准文件。

具体的，在形成检查标准清单后，使用多模态智能服务提供的语义相似度模型对源标准文件和其上下位文件中的语义相似的检查标准建立关联，得到源检查标准的上下位标准。语义相似度模型由垂直行业基础语料文本预处理、Word2Vec向量化后，基于ATTENTION机制的CNN网络训练产生，在初始语料相对较少时候支持在预训练模型下少量数据下的增强训练。

图2A为本发明又一实施例提供的一种基于多模态智能服务的安全检查管理方法的流程图，本实施例在上述实施例的基础上进行了优化改进。如图2A所示，该方法包括：

S210、获取从知识库发布的非结构化的标准文件；

S220、通过多模态智能服务对所述标准文件进行结构化转换，并通过检查项识别模型确定结构化转换后的标准文件中的检查标准，得到结构化的检查标准清单。

其中，所述多模态智能服务包括下述至少一个：语音识别服务、语义识别服务、图像识别服务和相似度分析服务。所述检查标准包括所属文件元信息和上下位关联信息。

具体的，汇聚非结构化的标准文件形成知识库，并建立标准文件的协同编辑、审定和发布流程。对从知识库发布的非结构化标准文件使用格式解析、图片识别，检查项识别等多模态智能服务来确定标准文件中的检查标准，形成检查标准清单。

示例性的，图2B是根据本发明一实施例提供的一种安全管理体系检查及评估系统的工作流程示意图。其中，利用多模态智能服务实现标准文件实体中检查标准的识别、检查项的建立、检查标准的上下位关联等必要需求，构建安全管理体系多模态相似模型、图本体模型，融合检查计划、实施、整改、回访等安全检查流程的全链路安全管理过程数据至至知识图谱中，实现安全管理的全链路态势评估和分析。

S230、基于检查标准清单中各检查标准对应的检查项建立检查项库。

S240、获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据；

S250、将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

本发明实施例通过对标准文件进行结构化转化和检查标准识别，提高了在标准文件中提取检查标准的效率。

图3为本发明又一实施例提供的一种基于多模态智能服务的安全检查管理系统的结构示意图。如图3所示，该装置包括：

检查标准确定模块310，用于通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单；

检查项确定模块320，用于基于检查标准清单中各检查标准对应的检查项建立检查项库；

管理数据获取模块330，用于获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据；

管理数据同步模块340，用于将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

本发明实施例所提供的基于多模态智能服务的安全检查管理装置可执行本发明任意实施例所提供的基于多模态智能服务的安全检查管理方法，具备执行方法相应的功能模块和有益效果。

可选的，检查标准确定模块310包括：

标准文件获取单元，用于获取从知识库发布的非结构化的标准文件；

检查标准确定单元，用于通过多模态智能服务对所述标准文件进行结构化转换，并通过检查项识别模型确定结构化转换后的标准文件中的检查标准，得到结构化的检查标准清单；

其中，所述检查标准包括所属文件元信息和上下位关联信息。

可选的，多模态智能服务包括下述至少一个：语音识别服务、语义识别服务、图像识别服务和相似度分析服务。

可选的，所述所述全链路安全管理过程数据包括检查实施记录、上下位检查标准、闭环管理数据和源标准文件的元信息。

可选的，所述当所述全链路安全管理过程数据为检查实施记录时，所述全链路安全管理过程数据通过下述方式获取：

在检查人员对目标检查项实施检查时，通过多模态智能服务获取所述目标检查项的相似案例，并向所述检查人员展示所述相似案例；

获取所述检查人员基于所述相似案例对所述目标检查项给出的检查实施记录。

可选的，当所述全链路安全管理过程数据为闭环管理数据时，所述全链路安全管理过程数据通过下述方式获取：

将所述目标检查项的目标检查对象的整改数据确定为第一闭环管理数据；

根据风险矩阵确定所述目标检查对象的存在问题的风险等级，并确定所述风险等级对应的风险管控流程和隐患治理流程；

将所述风险等级、所述风险管控流程和所述隐患治理流程确定为第二闭环管理数据；

将所述目标检查对象的回访信息确定为第三闭环管理数据。

可选的，当所述全链路安全管理过程数据为上下位检查标准时，所述全链路安全管理过程数据通过下述方式获取：

获取目标检查项的源标准文件的上下位标准文件；

通过多模态智能服务确定所述目标检查项在上下位标准文件中关联的上下位标准；

其中，所述上下位标准文件包括源标准文件的上位法规文件和母公司文件。

进一步说明的基于多模态智能服务的安全检查管理装置也可执行本发明任意实施例所提供的基于多模态智能服务的安全检查管理方法，具备执行方法相应的功能模块和有益效果。

Claims (8)

1.一种基于多模态智能服务的安全检查管理方法，其特征在于，所述方法包括：

通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单；

基于检查标准清单中各检查标准对应的检查项建立检查项库；

获取检查项在安全检查计划、安全检查实施、安全检查整改和安全检查回访闭环管理过程中产生的全链路安全管理过程数据；

将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库，得到安全生产知识图谱。

2.根据权利要求1所述的方法，其特征在于，所述通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单包括：

获取从知识库发布的非结构化的标准文件；

通过多模态智能服务对所述标准文件进行结构化转换，并通过检查项识别模型确定结构化转换后的标准文件中的检查标准，得到结构化的检查标准清单；

其中，所述检查标准包括所属文件元信息和上下位关联信息。

3.根据权利要求2所述的方法，其特征在于，所述多模态智能服务包括下述至少一个：语音识别服务、语义识别服务、图像识别服务和长文本相似度分析服务。

4.根据权利要求1所述的方法，其特征在于，所述全链路安全管理过程数据包括检查实施记录、上下位检查标准、闭环管理数据和源标准文件的元信息。

5.根据权利要求4所述的方法，其特征在于，当所述全链路安全管理过程数据为检查实施记录时，所述全链路安全管理过程数据通过下述方式获取：

在检查人员对目标检查项实施检查时，通过多模态智能服务获取所述目标检查项的相似案例，并向所述检查人员展示所述相似案例；

获取所述检查人员基于所述相似案例对所述目标检查项给出的检查实施记录。

6.根据权利要求4所述的方法，其特征在于，当所述全链路安全管理过程数据为闭环管理数据时，所述全链路安全管理过程数据通过下述方式获取：

将所述目标检查项的目标检查对象的整改数据确定为第一闭环管理数据；

根据风险矩阵确定所述目标检查对象的存在问题的风险等级，并确定所述风险等级对应的风险管控流程和隐患治理流程；

将所述风险等级、所述风险管控流程和所述隐患治理流程确定为第二闭环管理数据；

将所述目标检查对象的回访信息确定为第三闭环管理数据。

7.根据权利要求4所述的方法，其特征在于，当所述全链路安全管理过程数据为上下位检查标准时，所述全链路安全管理过程数据通过下述方式获取：

获取目标检查项的源标准文件的上位标准文件；通过多模态智能服务确定所述目标检查项在上位标准文件中关联的上位标准；

其中，所述上位标准文件包括源标准文件的上位法规文件或母公司文件等。

8.一种基于多模态智能服务的安全检查管理系统，其特征在于，所述系统包括：

检查标准确定模块，用于通过多模态智能服务对发布的非结构化的标准文件进行多模态处理，得到结构化的检查标准清单；

检查项确定模块，用于基于检查标准清单中各检查标准对应的检查项建立检查项库；

管理数据获取模块，用于获取检查项在安全检查计划、安全检查实施、安全检查整改、安全检查回访及持续改进闭环管理过程中产生的全链路安全管理过程数据；

管理数据同步模块，用于将所述检查项库中目标检查项和所述目标检查项的全链路安全管理过程数据关联同步至图数据库。