CN114666527A - 基于WebRTC的智慧城管运维管理方法及系统 - Google Patents

基于WebRTC的智慧城管运维管理方法及系统 Download PDF

Info

Publication number
CN114666527A
CN114666527A CN202210344632.4A CN202210344632A CN114666527A CN 114666527 A CN114666527 A CN 114666527A CN 202210344632 A CN202210344632 A CN 202210344632A CN 114666527 A CN114666527 A CN 114666527A
Authority
CN
China
Prior art keywords
audio
video information
information
module
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210344632.4A
Other languages
English (en)
Inventor
戴书球
孙维
梁帅
王璇
谭一川
李勇
钟宇
陶冶
彭迈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Smart City Science And Technology Research Institute Co ltd
CCTEG Chongqing Research Institute Co Ltd
Original Assignee
Chongqing Smart City Science And Technology Research Institute Co ltd
CCTEG Chongqing Research Institute Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Smart City Science And Technology Research Institute Co ltd, CCTEG Chongqing Research Institute Co Ltd filed Critical Chongqing Smart City Science And Technology Research Institute Co ltd
Priority to CN202210344632.4A priority Critical patent/CN114666527A/zh
Publication of CN114666527A publication Critical patent/CN114666527A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/07—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail characterised by the inclusion of specific contents
    • H04L51/10—Multimedia information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及视频通话技术领域，具体为一种基于WebRTC的智慧城管运维管理方法及系统，其中系统包括：终端，用于获取用户信息进行用户登入，并发送建立连接请求给服务器；还用于获取音频信息和视频信息，并传输给服务器；服务器，用于接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，服务器与终端进行实时通信，并将进行实时通信的多个终端聚集，并创建房间；还用于对音频信息和视频信息进行处理，并传输给对应终端，房间内的终端之间进行音视频会议。本方案为智慧城管运维管理提供多端音视频即时通信服务，以提高智慧城管运维管理的工作效率。

Description

基于WebRTC的智慧城管运维管理方法及系统
技术领域
本发明涉及视频通话技术领域，具体为一种基于WebRTC的智慧城管运维管理方法及系统。
背景技术
智慧城管是新一代信息技术支撑、知识社会创新2.0环境下的城市管理新模式，通过新一代信息技术支撑实现全面透彻感知、宽带泛在互联、智能融合应用，推动以用户创新、开放创新、大众创新、协同创新为特征的以人为本的可持续创新，智慧城管是智慧城市的重要组成部分。
智慧城管通过传感技术，实现对城市管理各方面的监测和全面感知，利用各类感知设备和智能化监测系统进行智能识别，立体感知城市环境、位置等信息的全方位变化，并对感知设备采集到的感知数据进行融合、处理和分析，使其能与业务流程智能化集成，便于监控大厅主动做出响应。感知设备设置在城市的各个地方，例如：道路照明、景观照明、箱变、窨井盖、地下管网、危险源、低洼积水、桥梁、隧道、边坡、行道树、古树名木、公园、水库、垃圾中转站等，实现对城市市政部件的实时监测，感知设备设置的越多，位置范围越广，实时监测作用越好，也更利于智慧城管的运行。但是感知设备本身也需要运维，更多的感知设备意味着需要更多的运维人员，并且被感知设备监测的城市市政部件也需要运维人员进行运维，而运维人员数量有限，能力参差不齐，严重限制了智慧城管中运维管理工作的效率，特别是遇到较难的运维问题时，一般的运维人员无法解决，需要能力更强的专家进行指导，而专家常受到人数和位置的限制，不能进行现场诊断，现场的运维人员也无法及时获取远程技术支持，此外指挥调度人员也受到人数和位置的限制，不能进行现场指挥，这都极大的影响了智慧城管运维管理的工作效率。
发明内容
本发明的目的之一在于提供一种基于WebRTC的智慧城管运维管理方法，为智慧城管运维管理提供多端音视频即时通信服务，以提高智慧城管运维管理的工作效率。
本发明提供的基础方案一：基于WebRTC的智慧城管运维管理方法，包括如下内容：
获取用户信息进行用户登入；
发送建立连接请求；
接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，进行实时通信，并将进行实时通信的多个用户聚集，并创建房间；
获取音频信息和视频信息；
对音频信息和视频信息进行处理，并传输给对应用户，房间内的用户之间进行音视频通信会议。
基础方案一的有益效果：在智慧城管中，用户可以使用终端通过服务器请进行基于WebRTC的实时通讯，WebRTC可在网页中实现，成本低，将进行实时通信的多个终端聚集，并创建房间，从而用户之间通过房间进行音视频通讯会议，本方法可运用到智慧城管运维的程序中，为现场的运维人员、监控大厅的指挥人员以及远程诊断的指导专家提供多端音视频即时通信服务；实现多端用户的音视频即时通讯功能，为监控大厅的指挥人员、现场的运维操作人员、远程诊断的指导专家在任何时间、任何区域均可提供直观可视的音视频实时信息交流服务,提高了智慧城管运维管理工作效率。
进一步，所述方法还包括：
对用户添加身份标签；其中身份标签包括：指挥人员、运维人员和指导专家，且一个用户可添加多个身份标签；
检测当前房间中发言用户的身份标签；
判断发言用户的身份标签是否为指导专家，若是，则对指导专家和运维人员进行音频信息和视频信息录制；
按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；
对存储的音视频信息进行内容标签管理；其中内容标签管理包括：添加内容标签，删除内容标签和修改内容标签；
终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息。
有益效果：对用户添加身份标签，便于用户身份识别，检测当前房间中发言用户的身份标签，判断发言用户的身份标签信息是否为指导专家，若是，则对指导专家和运维人员进行音频信息和视频信息录制，从而记录指导专家的指导音视频信息，便于后续使用，且不记录其他无关用户的音视频信息，减少内存占用，节约系统资源。在终端之间在房间中进行音视频通话时，识别音频中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；接收音视频信息选择信号，并播放音视频信息，从而在会议中不需要用户自己查找相关音视频信息，能及时的调取到相关的音视频信息，指导专家和运维人员均可以历史的音视频信息作为参考和指导，减轻指导专家的任务量，运维人员根据音视频信息，既能得到指导，同时也可以直接明了的查看具体是如何操作的，而指导专家也可以根据音视频做指导调整，从而达到更好的指导效果，使运维效果更好，运维效率更高。
进一步，所述方法，还包括：
输入会议信息；
检测预设时间段后房间中各用户的身份标签，判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息。
有益效果：预设时间段根据会议信息进行设置，针对指导专家不能准时开始指导的情况，若等待预设时间段，指导专家还未能进入房间，则可先调取相关的音视频信息推送给运维人员，可能让运维人员提前学习相关的内容，或者运维人员根据音视频信息先进行运维。
进一步，所述方法，还包括：
设置用户权限值；
对音视频信息设置音视频信息权限值；
所述接收音视频信息选择信号后，还包括：
判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看。
有益效果：从而可以对音视频信息进行安全分级，用户权限值低于音视频信息权限值的用户不能查看音视频信息，对于一些涉及核心技术或机密的音视频信息，不能让任意运维人员查看，防止核心技术或机密被泄露。
本发明的目的之二在于提供一种基于WebRTC的智慧城管运维管理系统，为智慧城管运维管理提供多端音视频即时通信服务，以提高智慧城管运维管理的工作效率。
本发明提供基础方案二：基于WebRTC的智慧城管运维管理系统，包括：服务器和终端；
终端，用于获取用户信息进行用户登入，并发送建立连接请求给服务器；还用于获取音频信息和视频信息，并传输给服务器；
服务器，用于接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，服务器与终端进行实时通信，并将进行实时通信的多个终端聚集，并创建房间；还用于对音频信息和视频信息进行处理，并传输给对应终端，房间内的终端之间进行音视频通信会议。
基础方案二的有益效果：在智慧城管中，用户可以使用终端通过服务请进行基于WebRTC的实时通讯，WebRTC可在网页中实现，成本低，用户只需要使用终端就可以进行实时通讯，并且服务器将进行实时通信的多个终端聚集，并创建房间，从而用户之间通过房间进行音视频通信会议，本系统可集成到智慧城管运维的程序中，为现场的运维人员、监控大厅的指挥人员以及远程诊断的指导专家提供多端音视频即时通信服务；实现多端用户的音视频即时通讯功能，为监控大厅的指挥人员、现场的运维操作人员、远程诊断的指导专家在任何时间、任何区域均可提供直观可视的音视频实时信息交流服务,提高了智慧城管运维管理工作效率。
进一步，所述服务器，包括：音频编解码模块、视频编解码模块和网络传输模块；
音频编解码模块，用于对终端传输的音频信息进行处理和编码，生成音频数据通过网络传输模块，发送给对应的终端；还用于对接收到音频数据进行解码，获得音频信息，通过网络传输模块，发送给对应的终端；
视频编解码模块，用于对终端传输的视频信息进行处理和编码，生成视频数据通过网络传输模块，发送给对应的终端；还用于对网络传输模块接收到视频数据进行解码，获得视频信息，发送给对应的终端；
网络传输模块，用于传输音频数据和视频数据给终端。
有益效果：音频编解码模块、视频编解码模块和网络传输模块配合实现对音频信息和视频信息进行处理和传输，并且音频编解码模块和视频编解码模块，便于网络情况较差时，先保证音频的解码，防止音频和视频均断开传输。
进一步，所述服务器，还包括：身份标签管理模块、检测模块、判断模块和存储模块；
身份标签管理模块，用于对用户添加身份标签；其中身份标签包括：指挥人员、运维人员和指导专家，且一个用户可添加多个身份标签；
检测模块，用于检测当前房间中发言用户的身份标签；
判断模块，用于判断发言用户的身份标签信息是否为指导专家，若是，则启动发言用户的终端的录制模块和运维人员的终端的录制模块；
存储模块，用于按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；
所述终端，包括：录制模块；
录制模块，用于录制音频信息和视频信息，并发送给存储模块进行存储。
有益效果：对用户添加身份标签，便于用户身份识别，检测当前房间中发言用户的身份标签，判断发言用户的身份标签是否为指导专家，若是，则启动发言用户的终端的录制模块和运维人员的终端的录制模块，从而记录指导专家的指导音视频信息，便于后续使用，且不记录其他无关用户的音视频信息，减少内存占用，节约系统资源。
进一步，所述服务器，还包括：内容标签管理模块和识别模块；
内容标签管理模块，用于对存储模块中存储的音视频信息进行内容标签管理；其中管理包括：添加内容标签，删除内容标签和修改内容标签；
识别模块，用于终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；
所述终端，还包括：播放模块；
播放模块，用于接收音视频信息选择信号，并播放音视频信息。
有益效果：识别模块在终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；播放模块，接收音视频信息选择信号，并播放音视频信息，从而在会议中不需要用户自己查找相关音视频信息，能及时的调取到相关的音视频信息，指导专家和运维人员均可以历史的音视频信息作为参考和指导，减轻指导专家的任务量，运维人员根据音视频信息，既能得到指导，同时也可以直接明了的查看具体是如何操作的，而指导专家也可以根据音视频做指导调整，从而达到更好的指导效果，使运维效果更好，运维效率更高。
进一步，所述终端，还包括：输入模块；
输入模块，用于输入会议信息；
所述检测模块，还用于检测预设时间段后房间中各用户的身份标签；
所述判断模块，还用于判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息推送给身份标签为运维人员的用户的终端。
有益效果：预设时间段根据会议信息进行设置，针对指导专家不能准时开始的指导的情况，若等待预设时间段，指导专家还未能进入房间，则可先调取相关的音视频信息推送给运维人员，可能让运维人员提前学习相关的内容，或者运维人员根据音视频信息先进行运维。
进一步，所述服务器，还包括：权限管理模块；
权限管理模块，用于设置用户权限值；
所述内容标签管理模块，还用于对音视频信息设置音视频信息权限值；
所述播放模块，还用于判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看。
有益效果：从而可以对音视频信息进行安全分级，用户权限值低于音视频信息权限值的用户不能查看音视频信息，对于一些涉及核心技术或机密的音视频信息，不能让任意运维人员查看，防止核心技术或机密被泄露。
附图说明
图1为本发明基于WebRTC的智慧城管运维管理方法实施例的流程示意图；
图2为本发明基于WebRTC的智慧城管运维管理系统实施例的逻辑框图。
具体实施方式
下面通过具体实施方式进一步详细说明：
实施例一
实施例基本如附图1所示：基于WebRTC的智慧城管运维管理方法，包括如下内容：
获取用户信息进行用户登入；
发送建立连接请求；
接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，进行实时通信，并将进行实时通信的多个用户聚集，并创建房间；房间内各用户是互相连接的，且一个房间中的终端是可由一个终端选择其他终端，即其他用户，加入房间；
获取音频信息和视频信息；
对音频信息和视频信息进行处理，并传输给对应用户，房间内的用户之间进行音视频通信会议；其中处理包括：编码和解码；
对用户添加身份标签；其中身份标签包括：指挥人员、运维人员和指导专家，且一个用户可添加多个身份标签；
设置用户权限值；
检测当前房间中发言用户的身份标签；
判断发言用户的身份标签是否为指导专家，若是，则对指导专家和运维人员进行音频信息和视频信息录制；
按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；
对音视频信息设置音视频信息权限值；
对存储的音视频信息进行内容标签管理；其中内容标签管理包括：添加内容标签，删除内容标签和修改内容标签；
终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息；或者接收音视频信息选择信号，判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看；从而可以对音视频信息进行安全分级，用户权限值低于音视频信息权限值的用户不能查看音视频信息，对于一些涉及核心技术或机密的音视频信息，不能让任意运维人员查看，防止核心技术或机密被泄露；
此外，本方法还包括：输入会议信息；其中会议信息包括：会议主题、会议类别和会议概要；输入会议信息可在发送建立连接请求之前；
检测预设时间段后房间中各用户的身份标签，判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息；或者接收音视频信息选择信号，判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看。
在智慧城管中，用户可以使用终端通过服务器请进行基于WebRTC的实时通讯，WebRTC可在网页中实现，成本低，用户只需要使用终端就可以进行实时通讯，并且服务器将进行实时通信的多个终端聚集，并创建房间，从而用户之间通过房间进行音视频会议，本方法可运用到智慧城管运维的程序中，为现场的运维人员、监控大厅的指挥人员以及远程诊断的指导专家提供多端音视频即时通信服务；实现多端用户的音视频即时通讯功能，为监控大厅的指挥人员、现场的运维操作人员、远程诊断的指导专家在任何时间、任何区域均可提供直观可视的音视频实时信息交流服务,提高了智慧城管运维管理工作效率。
设置用户身份标签，从而在每次音视频通讯的会议中能明确用户身份，不同的会议可以重新设置不同的身份标签，而根据身份标签，当指导专家进行发言时进行录音录屏，同时运维人员的终端也进行录制，从而记录指导专家的指导内容，同时也记录运维人员在指导专家的指导下进行运维的过程，完成一个完整的运维过程的记录，生成音视频信息，对音视频信息进行存储，用户可以通过终端查看存储模块中的音视频信息，也可以将音视频信息和指导文档作为教学素材使用，有利于运维人员和指导专家的培训。
用户进行音视频通讯时，识别音频中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送，具体为推送给指导专家和运维人员的终端，指导专家和运维人员可选择音视频信息，播出模块接收到音视频信息选择信号，播放音视频信息，从而指导专家和运维人员均可以历史的音视频信息作为参考和指导，减轻指导专家的任务量，运维人员根据音视频信息，既能得到指导，同时也可以直接明了的查看具体是如何操作的，而指导专家也可以根据音视频做指导调整，从而达到更好的指导效果，使运维效果更好，运维效率更高。
实施例二
本实施例基本如附图2所示：基于WebRTC的智慧城管运维管理系统，包括：服务器和终端；
终端，用于获取用户信息进行用户登入，并发送建立连接请求给服务器；还用于获取音频信息和视频信息，并传输给服务器；本实施例中终端包括：手机、电脑和平板；
所述终端，包括：录制模块、播放模块和输入模块；
录制模块，用于录制音频信息和视频信息，并发送给存储模块进行存储；
播放模块，用于接收音视频信息选择信号，并播放音视频信息；还用于判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看；从而可以对音视频信息进行安全分级，用户权限值低于音视频信息权限值的用户不能查看音视频信息，对于一些涉及核心技术或机密的音视频信息，不能让任意运维人员查看，防止核心技术或机密被泄露；
输入模块，用于输入会议信息；其中会议信息包括：会议主题、会议类别和会议概要，输入模块输入会议信息可在终端向服务器发送建立连接请求前；
服务器，用于接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，服务器与终端进行实时通信，并将进行实时通信的多个终端聚集，并创建房间；一个房间中的终端是可由一个终端选择其他终端，即其他用户，加入房间，且房间内的终端均是互相连接的；还用于对音频信息和视频信息进行处理，并传输给对应终端，房间内的终端之间进行音视频通信会议；本实施例中服务器可为多种服务器的集合，例如：服务器包括：WebSocket服务器、房间服务器和信令服务器；
服务器，包括：音频编解码模块、视频编解码模块、网络传输模块、身份标签管理模块、检测模块、判断模块、存储模块、内容标签管理模块、识别模块、权限管理模块、字幕生成模块和指导文档生成模块；
音频编解码模块，用于对终端传输的音频信息进行处理和编码，生成音频数据通过网络传输模块，发送给对应的终端；还用于对接收到音频数据进行解码，获得音频信息，通过网络传输模块，发送给对应的终端；
视频编解码模块，用于对终端传输的视频信息进行处理和编码，生成视频数据通过网络传输模块，发送给对应的终端；还用于对网络传输模块接收到视频数据进行解码，获得视频信息，发送给对应的终端；本实施例中视频编解码模块采用VP8编码，从而可以用较少的数据通信实现较高质量的视频；
网络传输模块，用于传输音频数据和视频数据给终端；本实施例中网络传输模块集成了RTP/SPRT协议栈、STUN/TURN/ICE协议，其中RTP/SPRT协议栈是传输协议，STUN/TURN/ICE协议是用来解决NAT穿透；
身份标签管理模块，用于对用户添加身份标签，便于用户身份识别；其中身份标签包括：指挥人员、运维人员和指导专家，且一个用户可添加多个身份标签；
检测模块，用于检测当前房间中发言用户的身份标签；
判断模块，用于判断发言用户的身份标签信息是否为指导专家，若是，则启动发言用户的终端的录制模块和运维人员的终端的录制模块；
存储模块，用于按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；本实施例中预设存储格式限定了音视频信息的文件名：包括录制时间和会议信息；从而记录指导专家的指导音视频信息，便于后续使用，且不记录其他无关用户的音视频信息，减少内存占用，节约系统资源；
内容标签管理模块，用于对存储模块中存储的音视频信息进行内容标签管理；其中管理包括：添加内容标签，删除内容标签和修改内容标签；还用于对音视频信息设置音视频信息权限值；其中内容标签的输入通过终端的输入模块进行输入；
识别模块，用于终端之间在房间中进行音视频通话时，识别音频中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；其中对应的音视频信息是指内容标签包含预设关键字的音视频信息；
检测模块，还用于检测预设时间段后房间中各用户的身份标签；
判断模块，还用于判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息推送给身份标签为运维人员的用户的终端；预设时间段根据会议信息进行设置，针对指导专家不能准时开始的指导的情况，若等待预设时间段，指导专家还未能进入房间，则可先调取相关的音视频信息推送给运维人员，可能让运维人员提前学习相关的内容，或者运维人员根据音视频信息先进行运维；其中调取与会议信息相关的音视频信息，具体为：在会议信息中提取与所有音视频信息的内容标签的相同信息；再调取内容标签包含相同信息的音视频信息；
权限管理模块，用于设置用户权限值；
字幕生成模块，用于对存储模块中存储的音视频信息自动生成字幕；
指导文档生成模块，用于提取字幕，生成指导文档。
在智慧城管中，用户可以使用终端通过服务器请进行基于WebRTC的实时通讯，WebRTC可在网页中实现，成本低，用户只需要使用终端就可以进行实时通讯，并且服务器将进行实时通信的多个终端聚集，并创建房间，从而用户之间通过房间进行音视频会议，本系统可集成到智慧城管运维的程序中，为现场的运维人员、监控大厅的指挥人员以及远程诊断的指导专家提供多端音视频即时通信服务；实现多端用户的音视频即时通讯功能，为监控大厅的指挥人员、现场的运维操作人员、远程诊断的指导专家在任何时间、任何区域均可提供直观可视的音视频实时信息交流服务,提高了智慧城管运维管理工作效率。
本系统赋予用户身份标签，从而在每次音视频通讯的会议中能明确用户身份，不同的会议可以重新设置不同的身份标签，而根据身份标签，当指导专家进行发言时进行录音录屏，同时运维人员的终端也进行录制，从而记录指导专家的指导内容，同时也记录运维人员在指导专家的指导下进行运维的过程，完成一个完整的运维过程的记录，生成音视频信息，对音视频信息进行存储，用户可以通过终端的播出模块查看存储模块中的音视频信息，也可以将音视频信息和指导文档作为教学素材使用，有利于运维人员和指导专家的培训。
用户进行音视频通讯时，识别模块识别音频中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送给指导专家和运维人员的终端，指导专家和运维人员可选择音视频信息，播出模块接收到音视频信息选择信号，播放音视频信息，从而指导专家和运维人员均可以历史的音视频信息作为参考和指导，减轻指导专家的任务量，运维人员根据音视频信息，既能得到指导，同时也可以直接明了的查看具体是如何操作的，而指导专家也可以根据音视频做指导调整，从而达到更好的指导效果，使运维效果更好，运维效率更高。
以上所述的仅是本发明的实施例，方案中公知的具体结构及特性等常识在此未作过多描述，所属领域普通技术人员知晓申请日或者优先权日之前发明所属技术领域所有的普通技术知识，能够获知该领域中所有的现有技术，并且具有应用该日期之前常规实验手段的能力，所属领域普通技术人员可以在本申请给出的启示下，结合自身能力完善并实施本方案，一些典型的公知结构或者公知方法不应当成为所属领域普通技术人员实施本申请的障碍。应当指出，对于本领域的技术人员来说，在不脱离本发明结构的前提下，还可以作出若干变形和改进，这些也应该视为本发明的保护范围，这些都不会影响本发明实施的效果和专利的实用性。本申请要求的保护范围应当以其权利要求的内容为准，说明书中的具体实施方式等记载可以用于解释权利要求的内容。

Claims (10)

1.基于WebRTC的智慧城管运维管理方法，包括：获取用户信息进行用户登入；
发送建立连接请求；
其特征在于：还包括：
接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，进行实时通信，并将进行实时通信的多个用户聚集，并创建房间；
获取音频信息和视频信息；
对音频信息和视频信息进行处理，并传输给对应用户，房间内的用户之间进行音视频通信会议。
2.根据权利要求1所述的基于WebRTC的智慧城管运维管理方法，其特征在于：还包括：
对用户添加身份标签；其中身份标签包括：指挥人员、运维人员和指导专家；
检测当前房间中发言用户的身份标签；
判断发言用户的身份标签是否为指导专家，若是，则对指导专家和运维人员进行音频信息和视频信息录制；
按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；
对存储的音视频信息进行内容标签管理；其中内容标签管理包括：添加内容标签，删除内容标签和修改内容标签；
终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息。
3.根据权利要求2所述的基于WebRTC的智慧城管运维管理方法，其特征在于：还包括：
输入会议信息；
检测预设时间段后房间中各用户的身份标签，判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息并推送；
接收音视频信息选择信号，并播放音视频信息。
4.根据权利要求3所述的基于WebRTC的智慧城管运维管理方法，其特征在于：还包括：
设置用户权限值；
对音视频信息设置音视频信息权限值；
所述接收音视频信息选择信号后，还包括：
判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看。
5.基于WebRTC的智慧城管运维管理系统，包括：服务器和终端；
终端，用于获取用户信息进行用户登入，并发送建立连接请求给服务器；还用于获取音频信息和视频信息，并传输给服务器；
其特征在于：服务器，用于接收并应答建立连接请求，将通信协议由HTTP协议升级为WebSocket协议，服务器与终端进行实时通信，并将进行实时通信的多个终端聚集，并创建房间；还用于对音频信息和视频信息进行处理，并传输给对应终端，房间内的终端之间进行音视频通信会议。
6.根据权利要求5所述的基于WebRTC的智慧城管运维管理系统，其特征在于：所述服务器，包括：音频编解码模块、视频编解码模块和网络传输模块；
音频编解码模块，用于对终端传输的音频信息进行处理和编码，生成音频数据通过网络传输模块，发送给对应的终端；还用于对接收到音频数据进行解码，获得音频信息，通过网络传输模块，发送给对应的终端；
视频编解码模块，用于对终端传输的视频信息进行处理和编码，生成视频数据通过网络传输模块，发送给对应的终端；还用于对网络传输模块接收到视频数据进行解码，获得视频信息，发送给对应的终端；
网络传输模块，用于传输音频数据和视频数据给终端。
7.根据权利要求5所述的基于WebRTC的智慧城管运维管理系统，其特征在于：所述服务器，还包括：身份标签管理模块、检测模块、判断模块和存储模块；所述终端，包括：录制模块；
身份标签管理模块，用于对用户添加身份标签；其中身份标签包括：指挥人员、运维人员和指导专家；
检测模块，用于检测当前房间中发言用户的身份标签；
判断模块，用于判断发言用户的身份标签是否为指导专家，若是，则启动发言用户的终端的录制模块和运维人员的终端的录制模块；
存储模块，用于按预设存储格式将音频信息和视频信息整合为音视频信息进行存储；录制模块，用于录制音频信息和视频信息，并发送给存储模块进行存储。
8.根据权利要求7所述的基于WebRTC的智慧城管运维管理系统，其特征在于：所述服务器，还包括：内容标签管理模块和识别模块；
内容标签管理模块，用于对存储模块中存储的音视频信息进行内容标签管理；其中管理包括：添加内容标签，删除内容标签和修改内容标签；
识别模块，用于终端之间在房间中进行音视频通话时，识别音频信息中是否包含预设关键字，其中预设关键字为内容标签，若是，则调取对应的音视频信息并推送；
所述终端，还包括：播放模块；
播放模块，用于接收音视频信息选择信号，并播放音视频信息。
9.根据权利要求8所述的基于WebRTC的智慧城管运维管理系统，其特征在于：所述终端，还包括：输入模块；
输入模块，用于输入会议信息；
所述检测模块，还用于检测预设时间段后房间中各用户的身份标签；
所述判断模块，还用于判断是否存在身份标签为指导专家的用户，若否，则根据会议信息，调取与会议信息相关的音视频信息推送给身份标签为运维人员的用户的终端。
10.根据权利要求9所述的基于WebRTC的智慧城管运维管理系统，其特征在于：所述服务器，还包括：权限管理模块；
权限管理模块，用于设置用户权限值；
所述内容标签管理模块，还用于对音视频信息设置音视频信息权限值；
所述播放模块，还用于判断用户的用户权限值是否大于等于音视频信息权限值，若是，则播放音视频信息；若否，则提示用户没有权限查看。
CN202210344632.4A 2022-03-31 2022-03-31 基于WebRTC的智慧城管运维管理方法及系统 Pending CN114666527A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210344632.4A CN114666527A (zh) 2022-03-31 2022-03-31 基于WebRTC的智慧城管运维管理方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210344632.4A CN114666527A (zh) 2022-03-31 2022-03-31 基于WebRTC的智慧城管运维管理方法及系统

Publications (1)

Publication Number Publication Date
CN114666527A true CN114666527A (zh) 2022-06-24

Family

ID=82032816

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210344632.4A Pending CN114666527A (zh) 2022-03-31 2022-03-31 基于WebRTC的智慧城管运维管理方法及系统

Country Status (1)

Country Link
CN (1) CN114666527A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115426343A (zh) * 2022-11-04 2022-12-02 易方信息科技股份有限公司 一种跨平台协同交互式教学系统及教学方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115426343A (zh) * 2022-11-04 2022-12-02 易方信息科技股份有限公司 一种跨平台协同交互式教学系统及教学方法

Similar Documents

Publication Publication Date Title
CN102438173A (zh) 一种远程控制机顶盒的方法及系统
CN102917201A (zh) 一种基于物联网和云计算的物流调度方法及系统
CN114710461B (zh) 多端音视频即时通讯方法及系统
CN101582951A (zh) 一种运用语音识别技术的会议记录的实现方法和设备
CN114666527A (zh) 基于WebRTC的智慧城管运维管理方法及系统
CN107634934A (zh) 一种可视通信管理方法及装置
CN114724561A (zh) 一种语音打断方法、装置、计算机设备及存储介质
CN111784901A (zh) 一种基于云计算、移动互联网的云门禁系统及实现方法
KR20170073417A (ko) 지능형 자동 문자 응대 시스템
CN104144162A (zh) 一种智能语音联动喊话实现方法及系统
CN104135569A (zh) 进行求助的方法、处理求助的方法及智能移动设备
CN112601052B (zh) 一种应用于内部共享平台的视频资源整合系统
CN116580362B (zh) 输电运维跨系统融合数据的采集方法及数字资产处理系统
CN104462996A (zh) 实现对远程取证目标终端进行协同取证分析的方法及系统
CN110557391B (zh) 一种面向多场景整合应急移动视频交互系统
JP7163757B2 (ja) 会話処理システム、情報処理装置およびプログラム
CN101621667A (zh) 视频提供方法和系统及网络设备
CN103680257A (zh) 通信软件自动录制课程的方法及其系统
KR100846923B1 (ko) 문자메시지 전송 및 회신 방법
CN107979568A (zh) 一种视频监控应用系统
CN114173366B (zh) 用户参数修复方法和装置、计算机存储介质、电子设备
CN106101994A (zh) 报警信息的处理方法和装置
KR101597248B1 (ko) ＶｏＩＰ 기반 음성 통화 시 음성 인식을 이용한 광고 제공 시스템 및 방법
CN109428803A (zh) 一种语音信息发送方法和系统
CN110213344B (zh) 一种多中心远程手语在线翻译系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination