CN116095060A - 一种远程监控方法和装置 - Google Patents

一种远程监控方法和装置 Download PDF

Info

Publication number
CN116095060A
CN116095060A CN202211716290.0A CN202211716290A CN116095060A CN 116095060 A CN116095060 A CN 116095060A CN 202211716290 A CN202211716290 A CN 202211716290A CN 116095060 A CN116095060 A CN 116095060A
Authority
CN
China
Prior art keywords
session
information
streaming media
media server
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211716290.0A
Other languages
English (en)
Inventor
任红强
朱利军
童小敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Clover Cyber Technology Co ltd
Original Assignee
Xi'an Clover Cyber Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xi'an Clover Cyber Technology Co ltd filed Critical Xi'an Clover Cyber Technology Co ltd
Priority to CN202211716290.0A priority Critical patent/CN116095060A/zh
Publication of CN116095060A publication Critical patent/CN116095060A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/1066—Session management
    • H04L65/1069—Session establishment or de-establishment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/104—Peer-to-peer [P2P] networks
    • H04L67/1074—Peer-to-peer [P2P] networks for supporting data block transmission mechanisms
    • H04L67/1078—Resource delivery mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/141—Setup of application sessions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/14—Session management
    • H04L67/146—Markers for unambiguous identification of a particular session, e.g. session cookie or URL-encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/16—Implementation or adaptation of Internet protocol [IP], of transmission control protocol [TCP] or of user datagram protocol [UDP]
    • H04L69/161—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields
    • H04L69/162—Implementation details of TCP/IP or UDP/IP stack architecture; Specification of modified or new header fields involving adaptations of sockets based mechanisms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明涉及了一种远程监控方法和装置，方法包括：在验证web客户端的身份信息后，响应于web客户端发送的登录指令，调用流媒体服务器，并创建与流媒体服务器的会话链路；获取会话地址信息；将会话地址信息返回给web客户端，以使web客户端利用会话地址信息与流媒体服务器建立会话连接；响应于远程监控端发送的查询指令，从流媒体服务器中获取目标会话信息，并将目标会话信息返回至远程监控端。本方案中，可以直接利用现有设备基于web的采集音视频及屏幕的功能，通过流媒体服务器，将媒体信息传送至监控端，不需要额外配置音视频采集设备及额外开发复杂的程序就能实现远程监控目的，保证了考试的公平性。

Description

一种远程监控方法和装置
技术领域
本发明涉及监控技术领域，尤其涉及一种远程监控方法和装置。
背景技术
网络化教育代表了教育改革的一个发展方向，已经成为现代教育的一个特征，并对教育的发展形成新的推动力。随着近年来的疫情影响，远程教育成为现代教育技术未来发展的重要方向，考试测试作为远程教育的一个子系统也成为一个重要的研究领域。现代远程教育作为一种新的教学手段已经开始进入我们的生活，正在给传统教育模式带来新的变革，并对教育的发展形成新的推动。
然而现在大多数线上考试环节，存在作弊、不公正的现状，其为线上考试系统的痛点问题。例如，现有技术中，通过在学生端配置专用于音频和视频采集的设备，将采集的信息通过特定开发的通道传输至配套的监控设备中，来实现远程监控的目的。然而，该方法开发过程复杂、工作量大且需要安装的设备数量巨大，造成了一定的成本压力。此外，在通过计算机考试时，学生有可能通过其他电脑程序来查询答案，从而影响了线上考试的公平性与公正性。
发明内容
本发明旨在至少解决现有技术中存在的技术问题之一。
为此，本发明第一方面提出一种远程监控方法，应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述方法包括：
在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；
获取所述会话链路中的流媒体服务器端的会话地址信息；
将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；
响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；
从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
可选的，所述web客户端为考试系统的学生端，所述远程监控端为所述考试系统的教师端，所述查询指令为巡考指令，所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
从所述巡考指令中获取所述教师端请求巡查的目标学生端的标识和巡考内容，并向所述流媒体服务器发送查询指令，所述查询指令中包括所述目标学生端的标识和所述巡考内容；
接收所述流媒体服务器根据所述查询指令返回的所述目标学生端的音视频信息；
将所述接入地址返回给所述教师端，以使所述教师端利用所述接入地址获取目标会话信息。
可选的，所述调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路，包括：
通过调用所述流媒体服务器的REST接口，创建与所述流媒体服务器的会话链路；
所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
通过调用所述流媒体服务器的REST接口，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息。
本发明第二方面提出一种远程监控方法，应用于web客户端，所述方法包括：
在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；
接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；
利用所述会话地址信息与所述流媒体服务器建立会话连接；
采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；
将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。
可选的，所述会话地址信息中还包括令牌信息，利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
将所述令牌信息封装在连接请求中发送给所述会话地址信息对应的流媒体服务器，以使所述流媒体服务器根据所述令牌信息允许所述客户端的连接。
可选的，所述流媒体服务器为Openvidu服务器，所述利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
利用所述会话地址信息与所述Openvidu服务器的WebSocket接口建立传输会话信息的会话连接。
本发明第三方面提出一种远程监控装置，其特征在于，应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述装置包括：
创建模块，用于在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；
第一获取模块，用于获取所述会话链路中的流媒体服务器端的会话地址信息；
返回模块，用于将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；
响应模块，用于响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；
第二获取模块，用于从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
在一种可能的实施方式中，所述第二获取模块具体用于：
从所述巡考指令中获取所述教师端请求巡查的目标学生端的标识和巡考内容，并向所述流媒体服务器发送查询指令，所述查询指令中包括所述目标学生端的标识和所述巡考内容；
接收所述流媒体服务器根据所述查询指令返回的所述目标学生端的音视频信息；
将所述目标学生端的音视频信息返回给所述教师端。
在一种可能的实施方式中，所述创建模块具体用于：
通过调用所述流媒体服务器的REST接口，创建与所述流媒体服务器的会话链路；
所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
通过调用所述流媒体服务器的REST接口，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息。
本发明第四方面提出一种远程监控装置，其特征在于应用于web客户端，所述装置包括：
第一发送模块，用于在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；
接收模块，用于接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；
连接模块，用于利用所述会话地址信息与所述流媒体服务器建立会话连接；
采集模块，用于采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；
第二发送模块，用于将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。
在一种可能的实施方式中，所述连接模块具体用于：
将所述令牌信息封装在连接请求中发送给所述会话地址信息对应的流媒体服务器，以使所述流媒体服务器根据所述令牌信息允许所述客户端的连接。
在一种可能的实施方式中，所述连接模块还用于：
利用所述会话地址信息与所述Openvidu服务器的WebSocket接口建立传输会话信息的会话连接。
本发明实施例具有以下有益效果：
在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；获取所述会话链路中的流媒体服务器端的会话地址信息；将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。本方案中，可以直接利用现有的web客户端、web服务器、流媒体服务器，将web客户端采集到的音视频信息传送至web远程监控端，实现点对点、浏览器和浏览器间的通信，不需要额外配置音视频采集设备及额外开发复杂的程序就能实现远程监控目的；并且，远程监控端也可以实时获取到web客户端所在终端预设范围内的音视频信息和终端屏幕信息，防止考试人员通过任何途径作弊，从而保证了考试的公平性。
本发明的附加方面和优点将在下面的描述中部分给出，部分将从下面的描述中变得明显，或通过本发明的实践了解到。
附图说明
为了更清楚地说明本发明的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还能够根据这些附图获得其它附图。
图1为本发明实施例提供的第一种远程监控方法的步骤流程图；
图2为本发明实施例提供的第二种远程监控方法的步骤流程图；
图3为本发明实施例提供的第一种远程监控装置的结构框图；
图4为本发明实施例提供的第二种远程监控装置的结构框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本发明保护的范围。
本说明书提供了如实施例或流程图所述的方法操作步骤，但基于常规或无创造性的劳动可以包括更多或者更少的操作步骤。在实际中的系统或服务器产品执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行。
本方案的第一种具体实现方式将在下文中基于图1中的步骤方法进行详细说明。
图1是本发明实施例提供的第一种远程监控方法的步骤流程图。该方法应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述方法包括以下步骤：
步骤101、在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路。
Web(World Wide Web，全球广域网)浏览器主要功能是将用户向服务器请求的web资源呈现出来。而web服务端一般指网站服务器，可以处理浏览器等web客户端的请求并返回相应响应。本方案中的web客户端主要指的是基于web浏览器的客户端程序。
具体地，至少一个web客户端登录考试系统，并输入身份信息及密码，身份信息及密码验证通过后，web服务器接收到登录指令后识别指令信息，调用流媒体服务器的会话链路创建功能，创建会话链路。其中，web客户端的个数以流媒体服务器支持为上限。
会话地址信息中包括名称范围信息，名称用于区别不同会话链路，范围信息用来与远程监控端权限许可范围对应。
步骤102、获取所述会话链路中的流媒体服务器端的会话地址信息。
会话地址生成之后，web服务端获取会话链路中的会话地址信息。
会话链路是双向的，发起端和接收端没有任何差别，会话链路的信息呈现形式主要取决于发起端和接收端的权限。本申请中发起端为web客户端，主要通过会话链路发布媒体信息，接收端为远程监控端，主要通过会话链路接收媒体信息。
流媒体指以流方式在网络中传送音频、视频和多媒体文件的媒体形式。流媒体服务器是流媒体应用的核心系统，是运营商向用户提供视频服务的关键平台。流媒体服务器的主要功能是对流媒体内容进行采集、缓存、调度和传输播放。
步骤103、将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息。
web服务器获取到会话链路中的会话地址信息后，web客户端通过会话地址信息与流媒体服务器建立传输会话信息的连接。预设范围为设备摄像头的拍摄范围，以及麦克风的音频采集范围。会话信息包括摄像头在预设范围采集的视频信息，麦克风接收到的声音，以及web客户端采集的屏幕信息视频。
例如，在考试过程中，预设范围内的视频信息为桌面屏幕视频和摄像头拍摄到的学生的视频，音频信息为考试设备的麦克风能够接收到的所有声音信息，屏幕信息是考试答题过程中，电脑屏幕的实时操作视频信息。若学生进入其他网站浏览信息，也可以被录屏实时捕捉到。
步骤104、响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器。
web的远程监控端也是一种基于web浏览器的客户端程序，主要用于监控权限范围内对应的所有web客户端。web服务器接收到来自远程监控端的信息，并识别指令为查询信息，web服务器对应调用流媒体服务器。web服务器相当于web客户端和web远程监控端的中介，web客户端和web远程监控端要通信，需经过web服务端的中转。
步骤105、从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
web服务器通过流媒体服务器查询会话信息，查询指令包括当前身份可查询的会话范围信息。web服务器通过当前身份权限范围内能够查询的会话范围信息，在流媒体服务器中查询与会话范围信息对应的会话地址信息，并将对应的会话地址信息全部返回至远程监控端。
本方案利用现有设备基于web的采集音视频及屏幕的功能，通过流媒体服务器，将媒体信息传送至远程监控端，实现远程监控目的。
综上，在本发明实施例中，在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；获取所述会话链路中的流媒体服务器端的会话地址信息；将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。本方案中，可以直接利用现有的web客户端、web服务器、流媒体服务器，将web客户端采集到的音视频信息传送至web远程监控端，实现点对点、浏览器和浏览器间的通信，不需要额外配置音视频采集设备及额外开发复杂的程序就能实现远程监控目的；并且，远程监控端也可以实时获取到web客户端所在终端预设范围内的音视频信息和终端屏幕信息，防止考试人员通过任何途径作弊，从而保证了考试的公平性。
在一种可能的实施方式中，所述web客户端为考试系统的学生端，所述远程监控端为所述考试系统的教师端，所述查询指令为巡考指令，步骤105包括以下步骤1051-步骤1053：
步骤1051、从所述巡考指令中获取所述教师端请求巡查的目标学生端的标识和巡考内容，并向所述流媒体服务器发送查询指令，所述查询指令中包括所述目标学生端的标识和所述巡考内容。
具体地，在远程监控端，查询指令为巡考指令，教师端巡考向web服务端发送巡考指令，并通过巡考指令接入web服务端，巡考指令中包括教师端所请求查询的学生端ID，即目标学生端标识。教师端可以选择当前监控权限内的所有学生端，作为请求巡查的目标学生端，也可以从中选择某一个或某几个学生端，作为请求巡查的目标学生端。也就是说，目标学生端可以是多个学生端，也可以是一个学生端。例如，一场考试中，分多个考场，每个教师端对应一个考场，每个考场对应多个学生端，教师发送的巡考指令中包含对应考场中的每个学生端ID。
巡考指令中还包括所请求查询的内容，如音视频信息，或单独的视频信息和音频信息。
步骤1052、接收所述流媒体服务器根据所述查询指令返回的所述目标学生端的音视频信息。
流媒体服务器根据查询指令中的信息，查询到对应的学生端ID，并将学生端ID对应的音视频信息返回至web服务端，web服务端接收流媒体服务器返回的音视频信息。
步骤1053、将所述目标学生端的音视频信息返回给所述教师端。
web服务端识别巡考指令中的信息，根据巡考指令中教师端请求的查询的学生端ID，查询到目标学生，并将目标学生端对应的音视频信息返回至对应发起巡考指令的教师端。
web服务器将获取的会话地址信息返回至教师端，也就是远程监控端，教师端通过接入地址，即可获取从目标学生端通过会话链路传送过来的音视频信息以及屏幕信息。
在一种可能的实施方式中，所述调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路，包括：
通过调用所述流媒体服务器的REST接口，创建与所述流媒体服务器的会话链路。
具体地，REST指的是一组架构约束条件和原则。REST接口指的是满足约束条件和原则的接口。web应用程序最重要的REST原则是，客户端和服务器之间的交互在请求之间是无状态的。从客户端到服务器的每个请求都必须包含理解请求所必需的信息。因此，web服务器通过识别指令信息中包含的创建请求，通过调用具有创建会话链路功能的REST接口调用流媒体服务器。
在一种可能的实施方式中，所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
通过调用所述流媒体服务器的REST接口，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息。
具体地，web服务器识别查询指令信息，并根据查询指令信息中的查询请求，调用具有查询功能的REST接口调用流媒体服务器，并获取与查询指令信息中对应的目标会话信息。
本方案的另一种具体实现方式，将在下文中基于图2中的步骤方法进行详细说明。
图2是本发明实施例提供的第二种远程监控方法的步骤流程图，应用于web客户端，所述方法包括以下步骤：
步骤201、在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令。
具体地，至少一个web客户端登录考试系统，并输入身份信息及密码，身份信息及密码验证通过后，web客户端向web服务器发送登录指令。
步骤202、接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址。
具体地，web服务器获取目标会话地址信息，并将目标会话地址信息返回至web客户端，web客户端接收web服务器返回的会话地址信息，会话地址信息为流媒体服务器会话链路的地址。
步骤203、利用所述会话地址信息与所述流媒体服务器建立会话连接。
具体地，web客户端通过会话地址信息与流媒体服务器建立会话连接。
步骤204、采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据。
具体地，web客户端在接收到web服务器返回的会话地址信息后，通过调用获取屏幕信息函数OV.initPublisher("html-element-id"，{videoSource:"screen"})，获取屏幕信息，通过调用获取摄像头和麦克风音视频媒体信息的函数OV.initPublisher("html-element-id",)，获取音视频信息，并将获取到的屏幕信息和音视频信息封装为音视频数据。
步骤205、将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据媒体流。
具体地，web客户端在获取到音视频数据之后，调用发布函数session.publish(publisher)将音视频数据发布至与当前客户端对应的web服务器返回的会话链路中，远程监控端通过调用流媒体服务器，接收web客户端发布在对应会话链路中的媒体流信息。
在一种可能的实施方式中，所述会话地址信息中还包括令牌信息，利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
将所述令牌信息封装在连接请求中发送给所述会话地址信息对应的流媒体服务器，以使所述流媒体服务器根据所述令牌信息允许所述客户端的连接。
具体地，会话地址信息中除了名称和范围信息外，还包括令牌信息。例如，会话地址信息为：wss://{ip或域名}？sessionId＝{会话名称}&token＝{令牌}。
令牌信息为进入当前会话链路的许可，流媒体服务器根据所述令牌信息允许web客户端和远程监控端与当前会话链路连接，每个会话链路的令牌信息是唯一的，确定的。
在一种可能的实施方式中，所述流媒体服务器为Openvidu服务器，所述利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
利用所述会话地址信息与所述Openvidu服务器的WebSocket接口建立传输会话信息的会话连接。
WebRTC(Web Real-Time Communications，网页实时通信)是一项实时通讯技术，它允许网络应用或者站点，在不借助中间媒介的情况下，建立浏览器之间点对点(Peer-to-Peer)的连接，实现视频流和(或)音频流或者其他任意数据的传输。
Kurento是WebRTC媒体服务器和一组客户端API，可简化针对Web和智能手机平台的高级视频应用程序的开发，并提供实现Kurento协议的WebSocket接口，使用Websocket接口，可以在服务器和客户端浏览器之间维持一个长链接，并且Websocket可以使服务器从只能被动响应的基础上，新增了主动推送的功能，是web类即时通讯服务的基础所在。
OpenVidu则是一个基于Kurento之上的webRTC的音视频流媒体服务器，在kurento的基础上实现了音视频会议、屏幕分享等功能，并提供了相关REST API接口，具有会话的创建、删除、连接等相关功能。
web客户端通过websocket接口，调用加入会话链路的函数session.connect(token)，加入会话，其中通过token找到特定的会话链路，其中token为会话地址信息中的令牌信息。
综上，在本发明实施例中，在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；利用所述会话地址信息与所述流媒体服务器建立会话连接；采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。本方案中，可以直接利用现有的web客户端、web服务器、流媒体服务器，将web客户端采集到的音视频信息传送至web远程监控端，实现点对点、浏览器和浏览器间的通信，不需要额外配置音视频采集设备及额外开发复杂的程序就能实现远程监控目的；并且，远程监控端也可以实时获取到web客户端所在终端预设范围内的音视频信息和终端屏幕信息，防止考试人员通过任何途径作弊，从而保证了考试的公平性。
图3为本发明实施例提供的第一种远程监控装置的结构框图。该装置应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述装置300包括：
创建模块301，用于在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；
第一获取模块302，用于获取所述会话链路中的流媒体服务器端的会话地址信息；
返回模块303，用于将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；
响应模块304，响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；
第二获取模块305，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
在一种可能的实施方式中，第二获取模块305，具体用于：
从所述巡考指令中获取所述教师端请求巡查的目标学生端的标识和巡考内容，并向所述流媒体服务器发送查询指令，所述查询指令中包括所述目标学生端的标识和所述巡考内容；
接收所述流媒体服务器根据所述查询指令返回的所述目标学生端的音视频信息；
将所述目标学生端的音视频信息返回给所述教师端。
在一种可能的实施方式中，创建模块301，具体用于：
通过调用所述流媒体服务器的REST接口，创建与所述流媒体服务器的会话链路；
所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
通过调用所述流媒体服务器的REST接口，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
图4为本发明实施例提供的第二种远程监控装置的结构框图。该装置应用于web客户端，所述装置400包括：
第一发送模块401，用于在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；
接收模块402，用于接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；
连接模块403，用于利用所述会话地址信息与所述流媒体服务器建立会话连接；
采集模块404，用于采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；
第二发送模块405，用于将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。
在一种可能的实施方式中，连接模块403，具体用于：
将所述令牌信息封装在连接请求中发送给所述会话地址信息对应的流媒体服务器，以使所述流媒体服务器根据所述令牌信息允许所述客户端的连接。
在一种可能的实施方式中，连接模块403还用于：
利用所述会话地址信息与所述Openvidu服务器的WebSocket接口建立传输会话信息的会话连接。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本发明提供的又一实施例中，还提供了一种设备，所述设备包括处理器和存储器，所述存储器种存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现本发明实施例中所述的远程监控方法。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现本发明实施例中所述的远程监控方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
本说明书中的各个实施例均采用相关的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内所作的任何修改、等同替换、改进等，均包含在本发明的保护范围内。

Claims (10)

1.一种远程监控方法，其特征在于，应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述方法包括：
在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；
获取所述会话链路中的流媒体服务器端的会话地址信息；
将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；
响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；
从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
2.根据权利要求1所述的方法，其特征在于，所述web客户端为考试系统的学生端，所述远程监控端为所述考试系统的教师端，所述查询指令为巡考指令，所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
从所述巡考指令中获取所述教师端请求巡查的目标学生端的标识和巡考内容，并向所述流媒体服务器发送查询指令，所述查询指令中包括所述目标学生端的标识和所述巡考内容；
接收所述流媒体服务器根据所述查询指令返回的所述目标学生端的音视频信息；
将所述目标学生端的音视频信息返回给所述教师端。
3.根据权利要求1所述的方法，其特征在于，所述调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路，包括：
通过调用所述流媒体服务器的REST接口，创建与所述流媒体服务器的会话链路；
所述从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，包括：
通过调用所述流媒体服务器的REST接口，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息。
4.一种远程监控方法，其特征在于，应用于web客户端，所述方法包括：
在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；
接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；
利用所述会话地址信息与所述流媒体服务器建立会话连接；
采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；
将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。
5.根据权利要求4所述的方法，其特征在于，所述会话地址信息中还包括令牌信息，利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
将所述令牌信息封装在连接请求中发送给所述会话地址信息对应的流媒体服务器，以使所述流媒体服务器根据所述令牌信息允许所述客户端的连接。
6.根据权利要求4所述的方法，其特征在于，所述流媒体服务器为Openvidu服务器，所述利用所述会话地址信息与所述流媒体服务器建立会话连接，包括：
利用所述会话地址信息与所述Openvidu服务器的WebSocket接口建立传输会话信息的会话连接。
7.一种远程监控装置，其特征在于，应用于服务端的web服务器，所述服务端还包括流媒体服务器，所述装置包括：
创建模块，用于在验证至少一个web客户端的身份信息后，响应于所述web客户端发送的登录指令，调用所述流媒体服务器，并创建与所述流媒体服务器的会话链路；
第一获取模块，用于获取所述会话链路中的流媒体服务器端的会话地址信息；
返回模块，用于将所述会话地址信息返回给所述web客户端，以使所述web客户端利用所述会话地址信息与所述流媒体服务器建立传输会话信息的会话连接；所述会话信息为所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息；
响应模块，响应于基于web的远程监控端发送的查询指令，调用所述流媒体服务器；
第二获取模块，从所述流媒体服务器中获取所述查询指令所请求的目标会话信息，并将所述目标会话信息返回至所述远程监控端。
8.一种远程监控装置，其特征在于，应用于web客户端，所述装置包括：
第一发送模块，用于在接收到web服务器返回的身份信息验证通过信息之后，向所述web服务器发送登录指令；
接收模块，用于接收所述web服务器根据所述登录指令返回的会话地址信息，所述会话地址信息为流媒体服务器的地址；
连接模块，用于利用所述会话地址信息与所述流媒体服务器建立会话连接；
采集模块，用于采集所述web客户端所在终端预设范围内的音视频信息和所述终端的屏幕信息，并将所述音视频信息和所述屏幕信息封装为音视频数据；
第二发送模块，用于将所述音视频数据作为会话信息发送给所述会话地址信息对应的流媒体服务器，以使基于web的远程监控端通过所述web服务器获取所述流媒体服务器中的音视频数据。
9.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现如权利要求1-6任一项所述的远程监控方法。
10.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1-6任一项所述的远程监控方法。
CN202211716290.0A 2022-12-29 2022-12-29 一种远程监控方法和装置 Pending CN116095060A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211716290.0A CN116095060A (zh) 2022-12-29 2022-12-29 一种远程监控方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211716290.0A CN116095060A (zh) 2022-12-29 2022-12-29 一种远程监控方法和装置

Publications (1)

Publication Number Publication Date
CN116095060A true CN116095060A (zh) 2023-05-09

Family

ID=86203847

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211716290.0A Pending CN116095060A (zh) 2022-12-29 2022-12-29 一种远程监控方法和装置

Country Status (1)

Country Link
CN (1) CN116095060A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118413633A (zh) * 2024-04-22 2024-07-30 北京大唐高鸿数据网络技术有限公司 一种视频实时监控的方法、装置、介质及产品

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN118413633A (zh) * 2024-04-22 2024-07-30 北京大唐高鸿数据网络技术有限公司 一种视频实时监控的方法、装置、介质及产品

Similar Documents

Publication Publication Date Title
CN106254951B (zh) 一种视频直播创建方法及其系统、接入设备、管理设备
JP5755813B2 (ja) ネットワークリソースダウンロード情報の共有制御システムと方法
AU2018205094A1 (en) Application discovery
US8583793B2 (en) System and method for providing a hypertext transfer protocol service multiplexer
JP2009273105A (ja) 音声／映像ストリーム信号提供方法及び共有システム
EP2545666A2 (en) Method and apparatus for providing broadcast content and system using the same
US10757195B2 (en) Device interconnection and service discovery via a communication cloud
CN112291514B (zh) 远程音视频通话方法、装置及ott平台系统
CN116095060A (zh) 一种远程监控方法和装置
CN110113298B (zh) 数据传输方法、装置、信令服务器和计算机可读介质
CN109995807A (zh) 一种多媒体设备管理系统及方法
CN116467062A (zh) 一种基于区块链的数据处理方法、设备以及可读存储介质
CN106791992B (zh) 信号源推送方法和系统
WO2008071083A1 (fr) Procédé et dispositif pour traiter une anomalie de service
CN111212253B (zh) 视频会议中的监控处理方法、装置、电子设备及存储介质
CN114827533A (zh) 安防摄像装置的视频流在网页中播放的方法及装置
CN115665500A (zh) 调度处理方法、装置、设备及存储介质
WO2007137500A1 (fr) Système vidéo public et son procédé de mise en oeuvre
CN107277426B (zh) 云端视频系统
JP5367477B2 (ja) サービス提供システムおよびサービス提供方法
CN113014941A (zh) 一种开放性流媒体点播方法、装置、服务器及接入平台
CN113765745A (zh) 一种业务性能测试方法、装置、终端设备和存储介质
US20170085623A1 (en) Content downloading and network provisioning
CN115102944B (zh) 终端升级方法、终端、服务器、电子设备及存储介质
KR101276205B1 (ko) 모바일 디바이스를 이용한 협업 서비스 제공 시스템 및 그 시스템의 스마트 ｔｖ에서 수행되는 모바일 디바이스를 이용한 협업 서비스 제공 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination