CN109146190A - 基于内通系统并拓展的智能语音可视化实时态势感知系统 - Google Patents

基于内通系统并拓展的智能语音可视化实时态势感知系统 Download PDF

Info

Publication number
CN109146190A
CN109146190A CN201811012418.9A CN201811012418A CN109146190A CN 109146190 A CN109146190 A CN 109146190A CN 201811012418 A CN201811012418 A CN 201811012418A CN 109146190 A CN109146190 A CN 109146190A
Authority
CN
China
Prior art keywords
real
intelligent
data
platform
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811012418.9A
Other languages
English (en)
Inventor
饶智彬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201811012418.9A priority Critical patent/CN109146190A/zh
Publication of CN109146190A publication Critical patent/CN109146190A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/40—Business processes related to the transportation industry
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B19/00—Teaching not covered by other main groups of this subclass
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Computational Linguistics (AREA)
  • Strategic Management (AREA)
  • Human Computer Interaction (AREA)
  • Economics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Psychiatry (AREA)
  • Child & Adolescent Psychology (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Hospice & Palliative Care (AREA)
  • Signal Processing (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Primary Health Care (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种基于内通系统并拓展的智能语音可视化实时态势感知系统，实时内通语音采集模块，用于采集原平台上的内通语音；实时智能语音处理模块，用于将采集的语音数据化转为文字以及还可做声纹识别、语义识别、情绪识别等处理；数据智能分析模块，用于平台分系统做数据智能分析或用于中枢分系统做数据智能分析；实时态势感知及信息传输模块，用于平台或中枢形成实时态势感知以及相关信息通过链路在平台和中枢间传输；可视化智能处理及显示操作控制模块，用于采集的数据和数据结果以可视化的形式显示在对应权限层级的可视化终端上以及相应操作和控制；人工智能辅助决策及管控模块，用于给平台或中枢管理者提供辅助决策及帮助管理管控。

Description

基于内通系统并拓展的智能语音可视化实时态势感知系统
技术领域
本发明涉及态势感知技术领域，具体涉及一种基于内通系统并拓展的智能语音可视化实时态势感知系统。
背景技术
随着船舶(或机场、或海上作业平台、或生产企业等配备内通系统的场景，以船舶为例)规模的不断扩大以及船舶运行管理的日益精细要求，如何使船舶各级运行管理人员有效把握船舶的运行态势、进而有效地掌控船舶的运行态势，成为智能船舶调度控制中心建设亟需解决的问题。
态势感知是在一定的时空条件下，对环境因素进行获取、理解，并对未来状态进行预测；为减轻调度员的工作负担、提高调度员的工作效率，应充分利用先进的计算机交互技术来设计船舶调度自动化系统的交互系统，动用人类的各种感官来提升调度员的态势感知能力，保障船舶的安全、可靠运行；
单个的一个船舶属于一个平台分系统，平台分系统内的部门和岗位之间通过内通系统交流，在船舶这样的平台上舱室众多，操作复杂，管控和工作要求高，内通与船舶的操作和运行息息相关，船舶平台操作运行对内通的依赖和要求非常高，内通语音传递的口令等内容，直接反映的是对船舶等平台各部门各系统各设备的操作，语音口令和操作规范性极强。
目前的船舶等内通系统是传递口令进行语音通讯，将其实时采集下来并可视化就可以直观的展现船舶的运行操作态势，同时通过辅助决策和管控可以及时发现并纠正错误操作，包括口令及其反映的操作或指挥的不准确、不及时、不连贯、错误等问题，对提高船舶的安全运行非常有效；同时还解决了单个的船舶与外部环境(即船舶公司)信息传输需要通过卫星传输，但纯语音传输带宽要求较大，费用很高，不利于实时信息传输的问题。
发明内容
本发明实施例的目的在于提供一种基于内通系统并拓展的智能语音可视化实时态势感知系统，所述可视化实时态势感知系统包括平台分系统和通过链路与所述平台分系统进行信息传输的中枢分系统，所述平台分系统包括：
实时内通语音采集模块，用于实时采集平台分系统上的内通语音；
实时智能语音处理模块，用于将平台分系统上采集到的语音做智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
数据智能分析模块，用于平台分系统将智能语音处理后采集到的数据做智能分析；
实时态势感知及信息传输模块，用于平台分系统在前面数据化分析的基础上形成对平台分系统内的实时态势感知，以及用于将以上相关信息通过链路在平台分系统和中枢分系统之间进行传输；
可视化智能处理及显示操作控制模块，用于在前面数据化的基础上，将采集的数据和智能分析的数据结果以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台上各层级终端；
人工智能辅助决策及管控模块，用于平台分系统在前面的基础上根据设定的模型规则给平台分系统各层级管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
数据库及存储模块，用于支持平台分系统运行的模型规则和所有数据的存储；
所述中枢分系统包括用于接收中枢分系统管理范围内所有平台分系统相关数据信息并处理的数据智能分析模块；
实时态势感知及信息传输模块，用于中枢分系统管理范围内包括所有平台分系统的态势感知和将数据信息通过链路向平台分系统传输；
可视化智能处理及显示操作控制模块、人工智能辅助决策及管控模块和数据库及存储模块；
平台分系统内各部门各岗位之间的内通语音通过实时语音采集模块进行采集；并通过实时智能语音处理模块将内通语音转换成可视化的文字；再通过数据智能分析模块和实时态势感知及信息传输模块对实时的交流信息进行分析并实现实时态势感知；再将采集的数据和分析结果通过可视化智能处理及显示操作控制模块展现在指定的可视化终端上，并根据结果和需要做出相应操作；并通过人工智能辅助决策及管控模块可辅助各级管理者进行决策和实时管理管控；还可通过实时态势感知及信息传输模块通过链路与中枢分系统进行数据交互。
进一步的，所述实时内通语音采集模块是基于并伴随原有内通系统的，因此对应有着原有内通系统的权限概念；所述权限概念，用于保护部门层级间信息交流的安全性；最高层级具有最高权限能够感知所有下级的内通语音信息；而下级部门能够感知本部门内通语音信息。
进一步的，实时智能语音处理模块，包括语音识别单元、声纹识别单元、语义识别单元和情绪识别单元，用于将采集到的语音实时数据化转为文字，并可将采集到的语音做声纹识别、语义识别和情绪识别等智能语音处理。
进一步的，所述数据智能分析模块是将采集处理后或接收到的数据信息进行智能分析处理，通过数据抽象和数据挖掘，分析有效数据，从数据中提取有用信息，并从数据库中提取需要的知识和模型，通过分析、转换、分类、组织、整合，得出基于原资料和原信息数据的抽象概念，数据化形成态势感知的实时要素和初步模型，并给下一步数据送显和下一步人工智能辅助决策及管控模块做了前端数据处理。
进一步的，所述实时态势感知及信息传输模块包括态势感知单元和信息传输单元；态势感知单元用于在前面数据化分析的基础上形成实时态势感知；传输单元用于以上相关信息通过链路在平台分系统和中枢分系统之间传输。
进一步的，人工智能辅助决策及管控模块包括人工智能模型判断单元、管控处置单元和传输单元；所述人工智能模型判断单元用于根据已建立模型判断评估采集或接收到的内通语音指令内容等信息；管控处置单元根据结果做相应管理处置措施，如发现错误或不符合操作规则信息就发出预警提示；传输单元用于将判断结果信息传输给可视化智能处理及显示操作控制模块并将结果相关信息输送到数据库及存储模块进行存储。
进一步的，所述平台分系统内各部门包括基于内通系统的运行环境，运行环境包括具有层级权限的各个岗位，如平台或各层级负责人岗位和一线操作岗位；所述平台或各层级负责人岗位用于指令的传达；所述一线操作岗位用于指令的执行并在操作中对指令进行语音复述；复述的指令也经过态势感知系统进行分析；并将分析结果传输到平台或各层级负责人岗位并将结果输送到存储模块进行存储。
进一步的，所述指令是指对操作岗位上的设备进行正确操作和平台运行的专业术语。
进一步的，所述可视化智能处理及显示操作控制模块包括设于平台分系统和中枢分系统上的各个层级部门岗位上的可视化智能处理及显示操作控制终端。
本发明实施例提供一种基于内通系统并拓展的智能语音可视化实时态势感知系统具有如下优点：在内通系统语音通讯的基础上，将通讯语音实时采集下来并可视化就可以直观的展现船舶的运行操作态势，同时通过人工智能辅助决策和管控可以及时发现并纠正错误操作，包括语音口令及其反映的操作或指挥的不准确、不及时、不连贯、错误等问题，对提高船舶的安全运行非常有效；同时单个的平台分系统与中枢系统信息传输需要通过卫星传输的带宽很小费用很低，有利于实时信息的传输；采用语音识别、声纹识别、语义识别和情绪识别等智能语音处理技术，可以很便捷的在原场景平台的内通系统基础上，以内通语音为“抓手”，通过实时采集内通语音实现内通语音数据智能分析处理与预判、预警与规范操作、全球实时态势感知、便捷采集上报价值数据，并实现信息、数据和感知的可视化，提高操作和平台运行的实时的安全性与可靠性；采用该系统规范管理的实用性强，实时态势感知的实效性和可靠性强，智能数据分析挖掘后的经济效益和价值大，是一种全新的革命性的内通智能化的便捷升级改造模式，包括还可应用于以上内通场景平台的工作人员的教学培训和训练(如船员培训)。
附图说明
图1为本发明实施例提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统的功能模块示意图；
图2为本发明实施例提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统的终端权限示意图；
图3为本发明实施例提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统的组网内的功能模块示意图；
图4为本发明实施例提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统的组网内权限示意图。
具体实施方式
以下实施例用于说明本发明，但不用来限制本发明的范围。
实施例1
本发明实施例1提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，请参阅图1和图2所示，所述可视化实时态势感知系统包括平台分系统和通过链路与所述平台分系统进行信息传输的中枢分系统，所述平台分系统包括：
实时内通语音采集模块101，用于实时采集平台分系统上的内通语音；
实时智能语音处理模块102，用于将平台分系统上采集到的语音做智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
数据智能分析模块103，用于平台分系统将智能语音处理后采集到的数据做智能分析；
实时态势感知及信息传输模块104，用于平台分系统在前面数据化分析的基础上形成对平台分系统内的实时态势感知，信息传输模块，用于将以上相关信息通过链路在平台分系统和中枢分系统之间进行传输；
可视化智能处理及显示操作控制模块105，用于在前面数据化的基础上，将采集的数据和智能分析的数据结果包括态势感知的图形显示以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台分系统上的各层级终端；
人工智能辅助决策及管控模块106，用于平台分系统在前面的基础上根据设定的模型规则给平台分系统管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
数据库及存储模块107，用于支持平台分系统运行的模型规则和所有数据的存储；
所述中枢分系统包括用于接收中枢分系统管理范围内所有平台分系统相关数据信息并处理的数据智能分析模块；
实时态势感知及信息传输模块，用于中枢分系统管理范围内包括所有平台分系统的综合态势感知和将数据信息通过链路向平台分系统传输；
可视化智能处理及显示操作控制模块、人工智能辅助决策及管控模块和数据库及存储模块(与平台分系统对应模块功能相同，此处不再重复描述)；
平台分系统内各部门各岗位之间的内通语音通过实时语音采集模块进行采集，并通过实时智能语音处理模块102将内通语音转换成可视化的文字，再通过数据智能分析模块103和实时态势感知及信息传输模块104对实时的交流信息进行分析并实现实时态势感知；再将采集的数据和分析结果包括态势感知的图形显示通过可视化智能处理及显示操作控制模块105展现在指定的可视化终端上，并根据结果和需要做出相应操作；并通过人工智能辅助决策及管控模块106可辅助各级管理者进行决策和实时管理管控；还可通过实时态势感知及信息传输模块104通过链路与中枢分系统进行数据交互。
所述实时内通语音采集模块101是基于并伴随原有内通系统的，因此对应有着原有内通系统的权限概念；所述权限概念，用于保护部门层级间信息交流的安全性；最高层级具有最高权限能够感知所有下级的内通语音信息；而下级部门能够感知本部门内通语音信息。
实时智能语音处理模块102，包括语音识别单元、声纹识别单元、语义识别单元和情绪识别单元，用于将采集到的语音实时数据化转为文字，并可将采集到的语音做声纹识别、语义识别和情绪识别等智能语音处理。
所述数据智能分析模块103是将采集处理后或接收到的数据信息进行智能分析处理，通过数据抽象和数据挖掘，分析有效数据，从数据中提取有用信息，并从数据库中提取需要的知识和模型，通过分析、转换、分类、组织、整合，得出基于原资料和原信息数据的抽象概念，数据化形成态势感知的实时要素和初步模型，并给下一步数据送显和下一步人工智能辅助决策及管控模块做了前端数据处理。
所述实时态势感知及信息传输模块104包括态势感知单元和信息传输单元；态势感知单元用于在前面数据化分析的基础上形成实时态势感知；传输单元用于以上相关信息通过内部通路或外部链路在平台和中枢间传输。
所述平台分系统内各部门包括基于内通系统的运行环境，运行环境包括具有层级权限的各个岗位，如平台或各层级负责人岗位和一线操作岗位；所述平台或各层级负责人岗位用于指令的传达；所述一线操作岗位用于指令的执行并在操作中对指令进行语音复述；复述的指令也经过态势感知系统进行分析；并将分析结果传输到平台或各层级负责人岗位并将结果输送到存储模块进行存储。
人工智能辅助决策及管控模块106包括人工智能模型判断单元、管控处置单元和传输单元；所述人工智能模型判断单元用于根据已建立模型判断评估采集或接收到的内通语音指令内容等信息；管控处置单元根据结果做相应管理处置措施，如发现错误或不符合操作规则信息就发出预警提示；传输单元用于将判断结果信息传输给可视化智能处理及显示操作控制模块105并将结果相关信息输送到数据库及存储模块107进行存储。
所述内通语音指令是指对操作岗位上的设备进行正确操作和平台运行的专业术语。
所述可视化智能处理及显示操作控制模块105包括设于各个层级部门岗位上的可视化智能处理及显示操作控制终端。
中枢分系统工作原理是：数据智能分析模块将接收到来自平台分系统实时态势感知及信息传输模块传输来的数据信息并对数据信息进行智能分析处理，然后中枢分系统实时态势感知及信息传输模块在前面数据化分析的基础上形成对中枢分系统管理范围内所有平台分系统的综合实时态势感知，可视化智能处理及显示操作控制模块用于在前面数据化的基础上，将接收的数据和智能分析的数据结果包括综合态势感知的图形显示以可视化的形式显示在中枢分系统可视化终端上，并可以做相应操作和控制，并通过人工智能辅助决策及管控模块给中枢分系统管理者提供辅助决策及帮助管理管控，数据库及存储模块用于支持中枢分系统运行的模型规则和所有数据的存储。
采用智能语音识别(ASR，语音实时转文字)技术、声纹识别技术、语义智能技术、情绪识别技术和语音内容智能处理技术，通过系统集成实现以内通语音和语音内容为“抓手”的智能语音可视化实时态势感知系统。在数据智能分析处理实现实时态势感知并可通过网络或卫星链路实现远程全球无缝实时智能态势感知和管控的基础上，挖掘数据智能实现规范操作、预警与预判，并实现信息和数据结果的可视化。同时还提供了便捷采集上报所在平台价值数据(如参数数据和状态数据)的通道，占用带宽极低，并提供可视化结果。该模式的规范管理的实用性极强，语音智能处理数据挖掘后的经济效益和价值巨大，是一种基于智能技术的全新的模式系统，是原有领域内通系统的革命性的智能化信息升级改造。
在船舶等平台上，内通语音传递的口令等内容，最直接反映的是对船舶等平台各部门各系统各设备的操作和运行状态，因此本项目从技术上实现了语音的便利采集、数字化、数据分析、智能化及可视化，产生实用价值，管理管控实时态势及复盘分析，数据数字结果可视化，直接给出可视化分析结果。所有以上语音(对话)很重要或有价值或采集挖掘后可以产生价值，或者便于实时或复盘挖掘管理以及技术上改造改进加装便利的场景，特别是有语音内容规范化要求的场景，都可以采用本系统。通过上链路，这样态势感知下到了最底层一线的操作人员上。同时包括可应用于船舶等领域如船员的培训操作教学训练，实效明显。全系统分为船舶等平台上的分系统(包括平台上各层级可视化终端)和岸站(公司)分系统。
实施例2
本实施例2提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统应用到船舶中，请参阅图1和图2所示，其工作流程：
S1、平台分系统(即单个船舶)最高权限终端(即船长)通过内通系统向层级权限终端(即船员或部门管理人员)下达指令，通过实时内通语音采集模块，对实时指令进行采集；
S2、实时指令通过实时智能语音处理模块，进行智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
S3、再通过数据智能分析模块，将智能语音处理后采集到的数据做智能分析；
S4、再通过实时态势感知及信息传输模块，在前面数据化分析的基础上形成对平台内实时态势感知以及以上相关信息通过平台内部通路在平台中传输；同时通过实时态势感知及信息传输模块将信息传输到中枢系统(即船舶公司)，中枢分系统通过数据智能分析模块接收信息，并对信息进行分析；
S5、在前面数据化的基础上再通过可视化智能处理及显示操作控制模块将采集的数据和智能分析的数据结果包括态势感知的图形显示以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台上各层级终端和中枢终端；
S6、对于前端处理的数据可通过人工智能辅助决策及管控模块，用于平台和相应中枢在前面的基础上根据设定的模型规则给平台或中枢管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
S7、将上述的所有处理数据和模型规则存入数据库及存储模块，实现后期场景再现，便于后期分析处理；
上述中的步骤S4还包括：
S41、中枢分系统也可以通过数据智能分析模块和人工智能辅助决策及管控模块分析判断指令错误与否，所以平台上的人工智能辅助决策及管控模块或者中枢分系统可以通过实时态势感知及信息传输模块104向相应部门发出预警提示，并向相应部门做出正确的指令预测，船长重新发布正确指令；
S42、指令通过语音和文字分别下达到操作室；
S43、操作室内的操作员接收到正确指令后对指令进行复述；
S44、再通过本平台的人工智能辅助决策及管控模块或中枢分系统通过实时态势感知及信息传输模块对复述的语音作出判断；
S45、判断正确则进行相应的操作；
S46、判断错误则发错误预警提示，并发出正确的指令预测，操作员重述正确指令。
实施例3
本实施例3提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统应用在船舶公司与实施例2基本相同，区别在于，请参阅图1、图2、图3和图4所示：
S1、船舶公司对若干个船舶进行编组，使其形成组网，并令平台分系统一(即一号船舶)作为组网内最高权限平台，即组网内中枢分系统，组网内其它船舶即是组网内平台分系统；
S2、组网内最高权限平台具有向其它船舶互换信息的权限；
S3、组网内的其它船舶两两之间要想进行信息交互，需要得到一号船舶的授权，得到授权后方可进行信息交互。
实施例4
本实施例4提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统应用在具有内通系统的船舶操作规范考核上，流程如下：
S1、单个船舶内部需要考核的岗位包含船长、部门管理人员和操作船员，船长拥有最高权限，船长以下对应各个部门的权限终端，船长(即需要考核船长岗位的人员)就位后在平台最高权限终端处通过内通系统向处于层级权限终端处的岗位人员(即需要考核的船员或部门管理等人员)下达指令，通过实时内通语音采集模块，对实时指令进行采集；
S2、实时指令通过实时智能语音处理模块，进行智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
S3、再通过数据智能分析模块，将智能语音处理后采集到的数据做智能分析；
S4、再通过实时态势感知及信息传输模块，在前面数据化分析的基础上形成对平台内实时态势感知以及以上相关信息通过平台内部通路在平台中传输；
S5、在前面数据化的基础上再通过可视化智能处理及显示操作控制模块将采集的数据和智能分析的数据结果包括态势感知的图形显示以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台上各层级终端和中枢终端；
S6、对于前端处理的数据可通过人工智能辅助决策及管控模块，用于平台和相应中枢在前面的基础上根据设定的模型规则给平台或中枢管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
S7、将上述的所有处理数据和模型规则存入数据库及存储模块，实现后期场景再现，便于后期对考核过程中出现的问题进行分析处理。
实施例5
本实施例5提供的一种基于内通系统并拓展的智能语音可视化实时态势感知系统应用在航空公司，请参阅图1和图2所示，其工作流程：
S1、平台分系统(即单个飞机)最高权限终端(机长)通过内通系统向层级权限终端(即操作员)下达指令，通过实时内通语音采集模块，对实时指令进行采集；
S2、实时指令通过实时智能语音处理模块，进行智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
S3、再通过数据智能分析模块，将智能语音处理后采集到的数据做智能分析；
S4、再通过实时态势感知及信息传输模块，在前面数据化分析的基础上形成对平台内实时态势感知以及以上相关信息通过平台内部通路在平台中传输；同时通过实时态势感知及信息传输模块将信息传输到中枢系统(即航空公司)，中枢分系统通过数据智能分析模块接收信息，并对信息进行分析；
S5、在前面数据化的基础上再通过可视化智能处理及显示操作控制模块将采集的数据和智能分析的数据结果包括态势感知的图形显示以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台上各层级终端和中枢终端；
S6、对于前端处理的数据可通过人工智能辅助决策及管控模块，用于平台和相应中枢在前面的基础上根据设定的模型规则给平台或各中枢管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
S7、将上述的所有处理数据和模型规则存入数据库及存储模块，实现后期场景再现，便于后期分析处理；
上述中的步骤S4还包括：
S41、中枢分系统也可以通过数据智能分析模块和人工智能辅助决策及管控模块分析判断指令错误与否，所以平台上的人工智能辅助决策及管控模块或者中枢分系统可以通过实时态势感知及信息传输模块104向相应部门发出预警提示，并向相应部门做出正确的指令预测，机长重新发布正确指令；
S42、指令通过语音和文字分别下达到操作室；
S43、操作室内的操作员接收到正确指令后对指令进行复述；
S44、再通过本平台的人工智能辅助决策及管控模块或中枢分系统通过实时态势感知及信息传输模块104对复述的语音作出判断；
S45、判断正确则进行相应的操作；
S46、判断错误则发错误预警提示，并发出正确的指令预测，操作员重述正确指令。
本系统不局限于使用在船舶或机场中，凡是基于内通系统进行信息交流和工作运行的场景都可以使用该系统；并可推广到内通以外类似语音需求领域。
虽然，上文中已经用一般性说明及具体实施例对本发明作了详尽的描述，但在本发明基础上，可以对之作一些修改或改进，这对本领域技术人员而言是显而易见的。因此，在不偏离本发明精神的基础上所做的这些修改或改进，均属于本发明要求保护的范围。

Claims (9)

1.一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述可视化实时态势感知系统包括平台分系统和通过链路与所述平台分系统进行信息传输的中枢分系统，所述平台分系统包括：
实时内通语音采集模块，用于实时采集平台分系统上的内通语音；
实时智能语音处理模块，用于将平台分系统上采集到的语音做智能语音识别处理，将采集到的语音实时数据化转为文字以及还可做声纹识别、语义识别、情绪识别等智能语音处理；
数据智能分析模块，用于平台分系统将智能语音处理后采集到的数据做智能分析；
实时态势感知及信息传输模块，用于平台分系统在前面数据化分析的基础上形成对平台分系统内的实时态势感知，以及用于将以上相关信息通过链路在平台分系统和中枢分系统之间进行传输；
可视化智能处理及显示操作控制模块，用于在前面数据化的基础上，将采集的数据和智能分析的数据结果以可视化的形式显示在对应权限层级的可视化终端上，并可以做相应操作和控制，这包括平台上各层级终端；
人工智能辅助决策及管控模块，用于平台分系统在前面的基础上根据设定的模型规则给平台分系统各层级管理者提供辅助决策及帮助管理管控，可实现人工智能自主决策和管控；
数据库及存储模块，用于支持平台分系统运行的模型规则和所有数据的存储；
所述中枢分系统包括用于接收中枢分系统管理范围内所有平台分系统相关数据信息并处理的数据智能分析模块；
实时态势感知及信息传输模块，用于中枢分系统管理范围内包括所有平台分系统的态势感知和将数据信息通过链路向平台分系统传输；
可视化智能处理及显示操作控制模块、人工智能辅助决策及管控模块和数据库及存储模块；
平台分系统内各部门各岗位之间的内通语音通过实时语音采集模块进行采集；并通过实时智能语音处理模块将内通语音转换成可视化的文字；再通过数据智能分析模块和实时态势感知及信息传输模块对实时的交流信息进行分析并实现实时态势感知；再将采集的数据和分析结果通过可视化智能处理及显示操作控制模块展现在指定的可视化终端上，并根据结果和需要做出相应操作；并通过人工智能辅助决策及管控模块可辅助各级管理者进行决策和实时管理管控；还可通过实时态势感知及信息传输模块通过链路与中枢分系统进行数据交互。
2.根据权利要求1所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述实时内通语音采集模块是基于并伴随原有内通系统的，因此对应有着原有内通系统的权限概念；所述权限概念，用于保护部门层级间信息交流的安全性；最高层级具有最高权限能够感知所有下级的内通语音信息；而下级部门能够感知本部门内通语音信息。
3.根据权利要求2所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，实时智能语音处理模块，包括语音识别单元、声纹识别单元、语义识别单元和情绪识别单元，用于将采集到的语音实时数据化转为文字，并可将采集到的语音做声纹识别、语义识别和情绪识别等智能语音处理。
4.根据权利要求3所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述数据智能分析模块是将采集处理后或接收到的数据信息进行智能分析处理，通过数据抽象和数据挖掘，分析有效数据，从数据中提取有用信息，并从数据库中提取需要的知识和模型，通过分析、转换、分类、组织、整合，得出基于原资料和原信息数据的抽象概念，数据化形成态势感知的实时要素和初步模型，并给下一步数据送显和下一步人工智能辅助决策及管控模块做了前端数据处理。
5.根据权利要求4所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述实时态势感知及信息传输模块包括态势感知单元和信息传输单元；态势感知单元用于在前面数据化分析的基础上形成实时态势感知；传输单元用于以上相关信息通过链路在平台分系统和中枢分系统之间传输。
6.根据权利要求5所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，人工智能辅助决策及管控模块包括人工智能模型判断单元、管控处置单元和传输单元；所述人工智能模型判断单元用于根据已建立模型判断评估采集或接收到的内通语音指令内容等信息；管控处置单元根据结果做相应管理处置措施，如发现错误或不符合操作规则信息就发出预警提示；传输单元用于将判断结果信息传输给可视化智能处理及显示操作控制模块并将结果相关信息输送到数据库及存储模块进行存储。
7.根据权利要求6所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述平台分系统内各部门包括基于内通系统的运行环境，运行环境包括具有层级权限的各个岗位，如平台或各层级负责人岗位和一线操作岗位；所述平台或各层级负责人岗位用于指令的传达；所述一线操作岗位用于指令的执行并在操作中对指令进行语音复述；复述的指令也经过态势感知系统进行分析；并将分析结果传输到平台或各层级负责人岗位并将结果输送到存储模块进行存储。
8.根据权利要求7所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述指令是指对操作岗位上的设备进行正确操作和平台运行的专业术语。
9.根据权利要求8所述的一种基于内通系统并拓展的智能语音可视化实时态势感知系统，其特征在于，所述可视化智能处理及显示操作控制模块包括设于平台分系统和中枢分系统上的各个层级部门岗位上的可视化智能处理及显示操作控制终端。
CN201811012418.9A 2018-08-31 2018-08-31 基于内通系统并拓展的智能语音可视化实时态势感知系统 Pending CN109146190A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811012418.9A CN109146190A (zh) 2018-08-31 2018-08-31 基于内通系统并拓展的智能语音可视化实时态势感知系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811012418.9A CN109146190A (zh) 2018-08-31 2018-08-31 基于内通系统并拓展的智能语音可视化实时态势感知系统

Publications (1)

Publication Number Publication Date
CN109146190A true CN109146190A (zh) 2019-01-04

Family

ID=64826078

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811012418.9A Pending CN109146190A (zh) 2018-08-31 2018-08-31 基于内通系统并拓展的智能语音可视化实时态势感知系统

Country Status (1)

Country Link
CN (1) CN109146190A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110471988A (zh) * 2019-08-09 2019-11-19 南京智骋致想电子科技有限公司 一种基于模块化的三段五层式人工智能系统
CN111596883A (zh) * 2020-05-14 2020-08-28 深圳航天智慧城市系统技术研究院有限公司 一种支持语音识别和体感操作遥控的数据可视化系统
CN112927684A (zh) * 2019-12-06 2021-06-08 上海航空电器有限公司 基于人工智能技术的座舱人机交互系统
CN114064989A (zh) * 2022-01-18 2022-02-18 山东矩阵软件工程股份有限公司 一种使用多维数据智能化控制物料装填的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104392721A (zh) * 2014-11-28 2015-03-04 东莞中国科学院云计算产业技术创新与育成中心 基于语音识别的智能应急指挥系统及其语音识别方法
CN104463444A (zh) * 2014-11-28 2015-03-25 国网河南省电力公司平顶山供电公司 一种供电系统智能管理驾驶舱
CN105005578A (zh) * 2015-05-21 2015-10-28 中国电子科技集团公司第十研究所 多媒体目标信息可视化分析系统
CN106452903A (zh) * 2016-10-31 2017-02-22 华南理工大学 一种基于云辅助的智能仓管机器人系统与方法
WO2018053918A1 (zh) * 2016-09-22 2018-03-29 上海葡萄纬度科技有限公司 一种儿童虚拟智能设备及其操作方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104392721A (zh) * 2014-11-28 2015-03-04 东莞中国科学院云计算产业技术创新与育成中心 基于语音识别的智能应急指挥系统及其语音识别方法
CN104463444A (zh) * 2014-11-28 2015-03-25 国网河南省电力公司平顶山供电公司 一种供电系统智能管理驾驶舱
CN105005578A (zh) * 2015-05-21 2015-10-28 中国电子科技集团公司第十研究所 多媒体目标信息可视化分析系统
WO2018053918A1 (zh) * 2016-09-22 2018-03-29 上海葡萄纬度科技有限公司 一种儿童虚拟智能设备及其操作方法
CN106452903A (zh) * 2016-10-31 2017-02-22 华南理工大学 一种基于云辅助的智能仓管机器人系统与方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110471988A (zh) * 2019-08-09 2019-11-19 南京智骋致想电子科技有限公司 一种基于模块化的三段五层式人工智能系统
CN112927684A (zh) * 2019-12-06 2021-06-08 上海航空电器有限公司 基于人工智能技术的座舱人机交互系统
CN111596883A (zh) * 2020-05-14 2020-08-28 深圳航天智慧城市系统技术研究院有限公司 一种支持语音识别和体感操作遥控的数据可视化系统
CN111596883B (zh) * 2020-05-14 2023-06-06 深圳航天智慧城市系统技术研究院有限公司 一种支持语音识别和体感操作遥控的数据可视化系统
CN114064989A (zh) * 2022-01-18 2022-02-18 山东矩阵软件工程股份有限公司 一种使用多维数据智能化控制物料装填的方法

Similar Documents

Publication Publication Date Title
CN109146190A (zh) 基于内通系统并拓展的智能语音可视化实时态势感知系统
Sahebjamnia et al. A hybrid decision support system for managing humanitarian relief chains
Helmke et al. Increasing atm efficiency with assistant based speech recognition
CN109747682A (zh) 轨道交通弱电一体化系统
CN106910376B (zh) 一种空中交通运行管制指令监控方法与系统
US11557217B1 (en) Communications training system
CN106844663A (zh) 一种基于数据挖掘的船舶碰撞风险评估方法及系统
CN107423900A (zh) 一种船员管理调度系统及方法
CN108154739A (zh) 一种铁路车站接发车作业综合实训系统
CN103136978A (zh) 船舶交通管理与船舶驾驶综合模拟器系统
Lintern e eoretical Foundation of Cognitive Work Analysis
CN106504590B (zh) 一种交通调度指令确认系统和方法
Butler et al. Understanding the systemic influences on maritime pilot decision-making
Naweed et al. One-track mind: investigating positive and negative applications of non-technical skills in rail network control
Steen-Tveit et al. Using Audio-Logs for Analyzing the Development of a Common Operational Picture in Multi-agency Emergency Response
CN116341877A (zh) 基于TransGPT的综合交通运行服务系统和方法
CN109743548A (zh) 公安用指挥作战平台
Shmelova et al. Artificial intelligence methods and applications in aviation
Zhang Assessing the competency of seafarers using simulators in bridge resource management (BRM) training
CN106484888A (zh) 一种交通通信记录回调和提示系统及其方法
Yan et al. Emergency management of maritime accidents in the yangtze river: problems, practice and prospects
Hayes et al. Staying on task: A tool to help state and regional-level emergency management teams
EP3627479A1 (en) A system for simulating a maritime environment
Skriver et al. Emergency decision making
Comfort et al. Managing risk in real time: Integrating information technology into disaster risk reduction and response

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190104

RJ01 Rejection of invention patent application after publication