CN113259737A - 监控方法、相关设备及可读存储介质 - Google Patents

监控方法、相关设备及可读存储介质 Download PDF

Info

Publication number
CN113259737A
CN113259737A CN202110517461.6A CN202110517461A CN113259737A CN 113259737 A CN113259737 A CN 113259737A CN 202110517461 A CN202110517461 A CN 202110517461A CN 113259737 A CN113259737 A CN 113259737A
Authority
CN
China
Prior art keywords
audio
video
frame data
monitoring
video frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110517461.6A
Other languages
English (en)
Inventor
黄姗
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Shanghai ICT Co Ltd
CM Intelligent Mobility Network Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Shanghai ICT Co Ltd
CM Intelligent Mobility Network Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Shanghai ICT Co Ltd, CM Intelligent Mobility Network Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN202110517461.6A priority Critical patent/CN113259737A/zh
Publication of CN113259737A publication Critical patent/CN113259737A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H04N21/42607—Internal components of the client ; Characteristics thereof for processing the incoming bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种监控方法、相关设备及可读存储介质。该监控方法由客户端执行，客户端设置有第一播放器，第一播放器设置有第一组件，第一组件通过调用Video元素，控制音视频帧数据的播放；该方法包括：发送第一请求，第一请求用于请求服务器获取针对第一对象的监控音视频码流；接收第一音视频帧数据，第一音视频帧数据由监控音视频码流按照目标视频格式进行封装得到；通过第一播放器播放第一音视频帧数据。这样，客户端可以直接通过第一组件控制第一音视频帧数据在第一播放器中播放，无需借助Flash插件，因而使得客户端不受终端和平台的限制，使用场景较为广泛，提高监控方式的灵活度。

Description

监控方法、相关设备及可读存储介质
技术领域
本发明实施例涉及物联网技术领域，尤其涉及一种监控方法、相关设备及可读存储介质。
背景技术
随着车联网在物联网技术的应用，为了实现道路运输车辆监管相关部门对司机状态的监控，可以将监控终端获取到的音视频数据上传至监控平台，通过监控平台播放音视频数据，从而实现对司机状态的监控。
目前，在播放监控视频时，需要借助Flash插件播放，导致监控方式的灵活度较低。
发明内容
本发明实施例提供一种监控方法、相关设备及可读存储介质，以解决现有的监控方式在播放监控视频时，需要借助Flash插件，导致监控方式的灵活度较低的问题。
为解决上述问题，本发明是这样实现的：
第一方面，本发明实施例提供了一种监控方法，由客户端执行，所述客户端设置有第一播放器，所述第一播放器设置有第一组件，所述第一组件通过调用Video元素，控制音视频帧数据的播放；所述方法包括：
发送第一请求，所述第一请求用于请求服务器获取针对第一对象的监控音视频码流；
接收第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到；
通过所述第一播放器播放所述第一音视频帧数据。
第二方面，本发明实施例提供了一种监控方法，由服务器执行，所述方法包括：
接收第一请求，所述第一请求用于请求所述服务器获取针对第一对象的监控音视频码流；
基于所述第一请求，反馈第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到。
第三方面，本发明实施例还提供一种客户端，所述客户端设置有第一播放器，所述第一播放器设置有第一组件，所述第一组件通过调用Video元素，控制音视频帧数据的播放；所述客户端包括：
第一收发器，用于：发送第一请求，所述第一请求用于请求服务器获取针对第一对象的监控音视频码流；接收第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到；
第一处理器，用于：通过所述第一播放器播放所述第一音视频帧数据。
第四方面，本发明实施例还提供一种服务器，包括：
第二收发器，用于：接收第一请求，所述第一请求用于请求所述服务器获取针对第一对象的监控音视频码流；
第二处理器，用于：基于所述第一请求，反馈第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到。
第五方面，本发明实施例还提供一种通信设备，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序；所述处理器，用于读取存储器中的程序实现如前述第一方面所述方法中的步骤；或，如前述第二方面所述方法中的步骤。
第六方面，本发明实施例还提供一种可读存储介质，用于存储程序，所述程序被处理器执行时实现如前述第一方面所述方法中的步骤，或，实现如前述第二方面所述方法中的步骤。
在本发明实施例中，通过发送第一请求，所述第一请求用于请求服务器获取针对第一对象的监控音视频码流；接收第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到；通过所述第一播放器播放所述第一音视频帧数据。通过这种方式，服务器可以在获取到监控对象的监控音视频码流后，将其封装成目标格式的第一音视频帧数据，发送给客户端，这样，客户端可以直接通过第一组件控制第一音视频帧数据在第一播放器中播放，无需借助Flash插件，因而使得客户端不受终端和平台的限制，使用场景较为广泛，提高监控方式的灵活度。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例可应用的监控系统的结构示意图；
图2是本发明实施例提供的监控方法的流程图之一；
图3是本发明实施例提供的客户端与服务器的连接示意图；
图4是本发明实施例提供的监控方法的流程图之二；
图5是本发明实施例提供的客户端与服务器间的数据交互过程的示意图；
图6是本发明实施例提供的客户端的结构图；
图7是本发明实施例提供的服务器的结构图；
图8是本发明实施提供的通信设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。此外，本申请中使用“和/或”表示所连接对象的至少其中之一，例如A和/或B和/或C，表示包含单独A，单独B，单独C，以及A和B都存在，B和C都存在，A和C都存在，以及A、B和C都存在的7种情况。
请参见图1，图1是本发明实施例可应用的监控系统的结构示意图，如图1所示，包括客户端11、服务器12和监控终端13。
其中，服务器12分别与客户端11和监控终端13无线连接。客户端11可以是指手机、平板电脑(Tablet Personal Computer)、膝上型电脑(Laptop Computer)、个人数字助理(Personal Digital Assistant，PDA)、移动上网装置(Mobile Internet Device，MID)、可穿戴式设备(Wearable Device)等终端设置，也可以是指上述终端设备上安装的浏览器等。服务器12与客户端11可以是浏览器/服务器(Browser/Server，简称B/S)模式，也可以是客户机/服务器(Client/Server，简称C/S)模式。监控终端13包括摄像头、麦克风等，用于对监控对象的音视频进行采集。
在该监控系统中，客户端11可以向服务器12发送第一请求，并接收服务器12基于该第一请求反馈的第一音视频帧数据，并利用自身的第一播放器对第一音视频帧数据进行播放。服务器12可以将客户端11的第一请求下发至对应的监控终端13，并接收监控终端13反馈的监控音视频码流，将监控音视频码流封装成第一播放器支持的目标格式，得到第一音视频帧数据。
以下对本发明实施例提供的监控方法进行说明。
参见图2，图2是本发明实施例提供的监控方法的流程图之一。图2所示的监控方法可以由客户端执行。
如图2所示，该监控方法可以包括以下步骤：
步骤201、发送第一请求，第一请求用于请求服务器获取针对第一对象的监控音视频码流。
具体实现时，上述第一请求可以由用户在客户端触发生成的。上述第一请求可以是实时音视频获取请求或历史音视频获取请求等。此处的实时音视频获取请求可以理解为，获取的监控音视频码流为以服务器接收到第一请求的时刻作为开始时刻的音视频码流；此处的历史音视频获取请求可以理解为，获取的监控音视频码流为服务器在接收到第一请求之前的某一时段内的音视频数据。上述第一对象可以是人、动物、车辆等任意物体，在实际应用时，可以根据实际场景需要设定第一对象。例如，在对司机状态的监控场景中，可以将司机作为第一对象；在对道路拥塞情况的监控场景中，可以将该道路上的车辆作为第一对象等等。
基于客户端发送的第一请求的不同类别，可以请求服务器上传不同的监控音视频码流。例如，当客户端向服务器发送实时音视频获取请求时，服务器可以获取当前采集到的监控音视频码流给客户端；当客户端向服务器发送历史音视频获取请求时，服务器需要获取该请求指定的某一历史时段采集到的监控音视频码流给客户端。
步骤202、接收第一音视频帧数据，第一音视频帧数据由监控音视频码流按照目标视频格式进行封装得到。
具体地，上述第一音视频帧数据可以由服务器按照目标格式对获取到的监控音视频码流进行封装得到。具体的，服务器在接收到第一请求后，将第一请求下发至目标监控终端。目标监控终端根据第一请求获取对应的监控音视频码流，并将该监控音视频码流推流至服务器。服务器在获取到该监控音视频码流后，将该监控音视频码流中的视频码流按照目标视频格式进行封装，最终得到第一音视频帧数据，并将该第一音视频帧数据发送至客户端。
需要说明的是，这里的目标监控终端可以是指第一请求中指定的监控终端。例如，与服务器连接的监控终端为多个，每个监控终端均有自己唯一的终端标识，服务器可以根据第一请求中携带的终端标，来获取对应监控终端(即目标监控终端)的监控音视频码流。
步骤203、通过第一播放器播放第一音视频帧数据。
具体的，上述第一播放器可以为浏览器界面或小程序界面内的播放器，该第一播放器内设置有第一组件，如flv.js开源组件，或者其他自定义组件等，本发明不做具体限定。该第一播放器可以通过第一组件调用Video元素，从而实现音视频帧数据的播放控制，此处的Video元素可以是由第一组件预先创建得到，也可以是第一播放器中预先定义的，本发明不做具体限定。
需要说明的是，此处的Video元素可以是超文本5.0(HyperText Markup Language5，简称HTML5)定义的用于播放音视频帧数据的新元素，但不仅限于此，如也可以是其他版本定义的用于播放音视频帧数据的元素。在一实施例中，在音视频初始化时，可以通过第一组件创建Video元素，再通过第一组件调用Video元素中的播放控制功能，从而来实现音视频帧数据的播放。
在本实施例中，服务器可以在获取到监控对象的监控音视频码流后，将其封装成目标格式的第一音视频帧数据，发送给客户端，这样，客户端可以直接通过第一组件控制第一音视频帧数据在第一播放器中播放，无需借助Flash插件，因而使得客户端不受终端和平台的限制，使用场景较为广泛，提高监控方式的灵活度。
进一步地，所述目标视频格式包括FLV格式和HLS格式中的至少一种。
具体地，上述目标视频格式可以为FLV(即FLASH VIDEO的简称)格式，也可以为HLS(即HTTP Live Streaming的简称)格式，本申请不做具体限定。
在目标视频格式为FLV格式的情况下，服务器可以将监控音视频码流中的h.264码流封装成FLV格式；在目标视频格式为HLS格式的情况下，服务器也可以将监控音视频码流中的h.264码流封装成ts流和hls切片。这样，服务器可以将封装后的FLV格式的视频帧数据，和/或HLS格式的视频帧数据发送给客户端，以实现视频帧的播放。
在本实施例中，由于客户端可以支持FLV格式和HLS格式的视频帧的播放，使得客户端不仅可以跨平台播放，如在个人计算机(personal computer，简称PC)、平板、手机、电视机等平台；还可以在各平台的多种浏览器和APP小程序上播放，如苹果操作系统(iPhoneOperating System，简称IOS)及某一媒体应用程序中的小程序等，从而扩大了监控方式的使用场景。
进一步地，基于上述图2所示的实施例，上述步骤203、通过第一播放器播放第一音视频帧数据，包括：
关联第一音视频帧数据与Video元素，其中，Video元素包括N个播放控制功能，N个播放控制功能用于实现对第一音视频帧数据的N个播放控制，N为正整数；
通过flv.js组件调用Video元素中的第一播放控制功能，控制第一音视频帧数据按照第一播放控制功能进行播放，其中，第一播放控制功能为N个播放控制功能中的至少一个。
在一实施例中，上述第一组件为flv.js组件。该第一播放器可以提供有组件接口，如Video API接口等。其中，Video API接口可以关联第一音视频帧数据与Video元素，其中，Video元素包括一个或多个播放控制功能，如载入控制、播放控制、暂停控制、停止控制、抓拍控制、全屏显示控制、音量控制和画质控制等。这样，在flv.js组件调用Video元素中的第一播放控制功能时，服务器可以控制第一音视频帧数据按照第一播放控制功能进行播放。具体地，通过flv.js组件调用Video元素的方式，可以是通过flv.js组件在第一播放器的界面引入Ed-player组件，其中该Ed-player组件支持三个事件回调，如onPlaying(当视频开始播放)事件、onStreamClose(当视频关闭)事件、clickWnd(当窗口点击)事件等。Ed-player组件会暴露出一批组件接口，可确定出Video元素内的第一播放控制功能，以控制第一音视频帧数据的播放。
在该实施例中，可以直接通过flv.js组件实现第一音视频帧数据在第一播放器内的播放，使得客户端无需安装Flash插件，因而使得客户端不受终端和平台的限制，使用场景较为广泛。
进一步地，第一播放控制功能包括对第一音视频帧数据的载入控制、播放控制、暂停控制、停止控制、抓拍控制、全屏显示控制、音量控制和画质控制中的至少一项。
其中，对第一音视频帧数据的载入控制可以通过playVideo()来实现，该方法可以接收参数，当参数为1时，表示播放实时视频；当参数为2时，表示播放历史视频；当参数为3时，表示统一资源定位器(Uniform Resource Locator，简称URL)地址；当参数为4时，表示双向对讲等等。对第一音视频帧数据的播放控制可以通过playVideo()来实现，对第一音视频帧数据的暂停控制可以通过pauseVideo()来实现，对第一音视频帧数据的停止控制可以通过closePlay()来实现，对第一音视频帧数据的抓拍控制可以通过screenShot()来实现，对第一音视频帧数据的全屏显示控制可以通过fullscreen()来实现，对第一音视频帧数据的音量控制可以通过setVolume()来实现，对第一音视频帧数据的画质控制可以通过setColors()来实现。在该实施例中，可以通过第一组件调用上述第一播放控制功能，从而实现对第一音视频帧数据的灵活控制。
进一步地，在发送第一请求之前，该方法还包括：
通过websocket协议建立第一链路，第一链路用于实现客户端与服务器之间的通信；
接收第一音视频帧数据，包括：
通过第一链路，接收第一音视频帧数据。
具体地，WebSocket协议是HTML5开始提供的一种浏览器与服务器间进行全双工通讯的通信协议，可以实现客户端和服务器的长连接和双向实时通信。参见图3，图3是本发明实施例提供的客户端与服务器的连接示意图，如图3所示，客户端与服务器通过websocket协议可以建立第一链路，该第一链路包括主链路和播放窗口链路，其中，该主链路可以实现心跳/鉴权、视频设置、历史视频列表请求等功能，该播放窗口链路可以实现实时音视频播放、历史音视频播放、音视频播放控制等功能。在客户端与服务器进行数据交互时，先通过主链路完成鉴权，并定时进行心跳，以保证主链路能够稳定连接。客户端在接收到用户触发的第一请求时，可以向主链路发送该第一请求，主链路通过网关数据通道向监控终端发送第一请求，与此同时，服务器将播放链路地址返回给客户端，监控终端接收到第一请求后向服务器推送监控音视频码流，服务器接收到监控终端上传的监控音视频码流后，将监控音视频码流按照目标视频格式封装成第一音视频帧数据，并推送到播放窗口链路。这样，播放窗口链路可以将第一音视频帧数据传输到客户端的第一播放器内，通过第一组件调用Video元素，在第一播放器内播放第一音视频帧数据。
在本实施例中，通过websocket协议建立客户端与服务器之间的长连接，可以保证第一链路的稳定性，同时减小网络资源浪费。
参见图4，图4是本发明实施例提供的监控方法的流程图之二。本发明实施例的监控方法可以由服务器执行。
如图4所示，该监控方法可以包括以下步骤：
步骤401、接收第一请求，第一请求用于请求服务器获取针对第一对象的监控音视频码流；
步骤402、基于第一请求，反馈第一音视频帧数据，第一音视频帧数据由监控音视频码流按照目标视频格式进行封装得到。
需要说明的是，本实施例作为与图2方法实施例对应的服务器的实施例，因此，可以参见图2方法实施例中的相关说明，且可以达到相同的有益效果。为了避免重复说明，在此不再赘述。
进一步地，上述步骤402、基于第一请求，反馈第一音视频帧数据，包括：
将第一请求下发给目标监控终端；
接收目标监控终端上传的监控音视频码流；
按照目标格式对监控音视频码流进行封装，得到第一音视频帧数据；
通过第一链路反馈第一音视频帧数据，第一链路通过websocket协议建立。
其中，上述目标监控终端是指第一请求中指定的监控终端。例如，与服务器连接的监控终端为多个，每个监控终端均有自己唯一的终端标识，可以根据每个监控终端的终端标识下发第一请求，以此来获取对应监控终端(即目标监控终端)的监控音视频码流。上述预设链路是通过websocket协议建立，包括主链路和播放窗口链路。
具体地，客户端与服务器之间的数据交互过程可以通过服务器中预设的网关模块实现。该预设的网关模块可以包括播放器服务PlayerServer模块、媒体封装服务MediaControl模块、实时媒体服务MediaServer模块、历史媒体服务MediaHistoryServer模块、播放通道服务PlayerFlvServer模块和Push服务模块等。其中，该PlayerServer模块用于接收客户端发送的各类请求，如实时音视频获取请求、历史音视频获取请求、停止播放请求等。该MediaControl模块用于对服务器接收到的监控音视频码流进行封装。该MediaServer模块用于接收监控终端上传的实时音视频码流。该MediaHistoryServer模块用于接收监控终端上传的历史音视频码流。该PlayerFlvServer模块用于连接预设链路创建播放通道。
参见图5，图5是本发明实施例提供的客户端与服务器间的数据交互过程的示意图。如图5所示，客户端在向服务器发送第一请求时，可以通过PlayerServer模块接收该第一请求，并通过推流服务模块下发第一请求给监控终端。监控终端根据第一请求指定的监控类型和链路地址，向服务器上传符合要求的监控音视频码流。若第一请求指定的监控类型为实时音视频监控，则由MediaServer模块接收监控终端上传的实时音视频码流；若第一请求指定的监控类型为历史音视频监控，则由MediaHistoryServer模块接收监控终端上传的历史音视频码流。在MediaServer模块或者MediaHistoryServer模块获取到监控音视频码流后，通过MediaControl模块对监控音视频码流进行封装，得到第一音视频帧数据，封装后通过PlayerFlvServer模块创建的播放通道上传该第一音视频帧数据至客户端。
在本实施例中，通过服务器中预设的网关模块来实现对音视频码流的封装功能，使得服务器发送给客户端的第一音视频帧数据能够满足客户端无Flash插件的播放要求。
进一步地，上述步骤按照目标格式对监控音视频码流进行封装，得到第一音视频帧数据，包括：
在目标视频格式为FLV格式的情况下，通过网关模块封装监控音视频码流，得到第一音视频帧数据；或者
在目标视频格式为HLS格式的情况下，通过线程封装监控音视频码流，得到第一音视频帧数据。
服务器在对监控音视频码流进行封装时，可以根据需要，将监控音视频码流封装成不同的目标视频格式。具体地，在目标视频格式为FLV格式的情况下，可以通过MediaControl模块对解析出的h.264码流进行封装，得到FLV格式的视频帧，这样，可以通过PlayerFlvServer模块创建的播放通道推送该视频帧至客户端。在目标视频格式为HLS格式的情况下，服务器也可以建立新的线程，通过线程将h.264码流封装成ts流和hls切片，在直接推送该ts流和hls切片至客户端，以实现HLS格式的视频帧播放解决方案，兼容苹果操作系统(iPhone Operating System，简称IOS)及应用程序中的小程序的视频播放。
需要说明的是，在采用目标视频格式对监控音视频码流中的视频码流进行封装时，还需要对监控音视频码流中的音频码流进行封装，音频码流的封装格式可以包括但不限于：自适应差分脉冲编码调制(Adaptive Differential Pulse Code Modulation，简称ADPCMA)、G711A(一种由国际电信联盟ITU-T订定音频编码方式,又称为ITU-T G.711)、G711U(一种由国际电信联盟ITU-T订定音频编码方式,又称为ITU-T G.711)、G726、高级音频编码Advanced Audio Coding，简称ACC等。上述目标视频格式可以包括但不限于：FLV(FLASH VIDEO的简称)格式和HLS(HTTP Live Streaming的简称)格式等。
在本实施例中，服务器可以根据需要将获取到的视频码流封装成不同格式的视频帧，这样，不仅支持跨平台播放，如个人计算机(personal computer，简称PC)、平板、手机、电视机等平台，还可以兼容各平台上的多种浏览器和APP小程序，从而扩大了监控方式的使用场景。同时，使得该方案可以兼容多种监控终端，提高了监控终端的兼容性较高，对监控终端要求更低。
参见图6，图6是本发明实施例提供的客户端的结构图。如图6所示，客户端600设置有第一播放器，第一播放器设置有第一组件，第一组件通过调用Video元素，控制音视频帧数据的播放；客户端600包括：
第一收发器601，用于：发送第一请求，第一请求用于请求服务器获取针对第一对象的监控音视频码流；接收第一音视频帧数据，第一音视频帧数据由监控音视频码流按照目标视频格式进行封装得到；
第一处理器602，用于：通过第一播放器播放第一音视频帧数据。
进一步地，目标视频格式包括FLV格式和HLS格式中的至少一种。
进一步地，第一组件为flv.js组件；
第一处理器602，还用于：关联第一音视频帧数据与Video元素，其中，Video元素包括N个播放控制功能，N个播放控制功能用于实现对第一音视频帧数据的N个播放控制，N为正整数；
通过flv.js组件调用Video元素中的第一播放控制功能，控制第一音视频帧数据按照第一播放控制功能进行播放，其中，第一播放控制功能为N个播放控制功能中的至少一个。
进一步地，第一播放控制功能包括对第一音视频帧数据的载入控制、播放控制、暂停控制、停止控制、抓拍控制、全屏显示控制、音量控制和画质控制中的至少一项。
进一步地，第一处理器602，还用于：通过websocket协议建立第一链路，第一链路用于实现客户端与服务器之间的通信；通过第一链路，接收第一音视频帧数据。
客户端600能够实现本发明实施例中图2方法实施例的各个过程，以及达到相同的有益效果，为避免重复，这里不再赘述。
参见图7，图7是本发明实施例提供的服务器的结构图。如图7所示，服务器700包括：
第二收发器701，用于：接收第一请求，第一请求用于请求服务器获取针对第一对象的监控音视频码流；
第二处理器702，用于：基于第一请求，反馈第一音视频帧数据，第一音视频帧数据由监控音视频码流按照目标视频格式进行封装得到。
进一步地，第二处理器702，还用于：将第一请求下发给目标监控终端；接收目标监控终端上传的监控音视频码流；按照目标格式对监控音视频码流进行封装，得到第一音视频帧数据；通过第一链路反馈第一音视频帧数据，第一链路通过websocket协议建立。
进一步地，第二处理器702，还用于：在目标视频格式为FLV格式的情况下，通过网关模块封装监控音视频码流，得到第一音视频帧数据；或者
在目标视频格式为HLS格式的情况下，通过线程封装监控音视频码流，得到第一音视频帧数据。
服务器700能够实现本发明实施例中图4方法实施例的各个过程，以及达到相同的有益效果，为避免重复，这里不再赘述。
本发明实施例还提供一种通信设备。请参见图8，通信设备可以包括处理器801、存储器802及存储在存储器802上并可在处理器801上运行的程序8021。
在通信设备为客户端的情况下，程序8021被处理器801执行时可实现图2对应的方法实施例中的任意步骤及达到相同的有益效果，此处不再赘述。
在通信设备为服务器的情况下，程序8021被处理器801执行时可实现图4对应的方法实施例中的任意步骤及达到相同的有益效果，此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法的全部或者部分步骤是可以通过程序指令相关的硬件来完成，的程序可以存储于一可读取介质中。本发明实施例还提供一种可读存储介质，可读存储介质上存储有计算机程序，计算机程序被处理器执行时可实现上述图2或图4对应的方法实施例中的任意步骤，且能达到相同的技术效果，为避免重复，这里不再赘述。
所述的存储介质，如只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。
以上所述是本发明实施例的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (12)

1.一种监控方法，由客户端执行，其特征在于，所述客户端设置有第一播放器，所述第一播放器设置有第一组件，所述第一组件通过调用Video元素，控制音视频帧数据的播放；所述方法包括：
发送第一请求，所述第一请求用于请求服务器获取针对第一对象的监控音视频码流；
接收第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到；
通过所述第一播放器播放所述第一音视频帧数据。
2.根据权利要求1所述的监控方法，其特征在于，所述目标视频格式包括FLV格式和HLS格式中的至少一种。
3.根据权利要求1所述的监控方法，其特征在于，所述第一组件为flv.js组件；
所述通过所述第一播放器播放所述第一音视频帧数据，包括：
关联所述第一音视频帧数据与所述Video元素，其中，所述Video元素包括N个播放控制功能，所述N个播放控制功能用于实现对所述第一音视频帧数据的N个播放控制，所述N为正整数；
通过所述flv.js组件调用所述Video元素中的第一播放控制功能，控制所述第一音视频帧数据按照所述第一播放控制功能进行播放，其中，所述第一播放控制功能为所述N个播放控制功能中的至少一个。
4.根据权利要求3所述的监控方法，其特征在于，所述第一播放控制功能包括对所述第一音视频帧数据的载入控制、播放控制、暂停控制、停止控制、抓拍控制、全屏显示控制、音量控制和画质控制中的至少一项。
5.根据权利要求1所述的监控方法，其特征在于，在所述发送第一请求之前，所述方法还包括：
通过websocket协议建立第一链路，所述第一链路用于实现所述客户端与所述服务器之间的通信；
所述接收第一音视频帧数据，包括：
通过所述第一链路，接收第一音视频帧数据。
6.一种监控方法，由服务器执行，其特征在于，所述方法包括：
接收第一请求，所述第一请求用于请求所述服务器获取针对第一对象的监控音视频码流；
基于所述第一请求，反馈第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到。
7.根据权利要求6所述的监控方法，其特征在于，所述基于所述第一请求，反馈第一音视频帧数据，包括：
将所述第一请求下发给目标监控终端；
接收所述目标监控终端上传的所述监控音视频码流；
按照目标格式对所述监控音视频码流进行封装，得到第一音视频帧数据；
通过第一链路反馈所述第一音视频帧数据，所述第一链路通过websocket协议建立。
8.根据权利要求7所述的监控方法，其特征在于，所述按照目标格式对所述监控音视频码流进行封装，得到第一音视频帧数据，包括：
在所述目标视频格式为FLV格式的情况下，通过网关模块封装所述监控音视频码流，得到第一音视频帧数据；或者
在所述目标视频格式为HLS格式的情况下，通过线程封装所述监控音视频码流，得到第一音视频帧数据。
9.一种客户端，其特征在于，所述客户端设置有第一播放器，所述第一播放器设置有第一组件，所述第一组件通过调用Video元素，控制音视频帧数据的播放；所述客户端包括：
第一收发器，用于：发送第一请求，所述第一请求用于请求服务器获取针对第一对象的监控音视频码流；接收第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到；
第一处理器，用于：通过所述第一播放器播放所述第一音视频帧数据。
10.一种服务器，其特征在于，包括：
第二收发器，用于：接收第一请求，所述第一请求用于请求所述服务器获取针对第一对象的监控音视频码流；
第二处理器，用于：基于所述第一请求，反馈第一音视频帧数据，所述第一音视频帧数据由所述监控音视频码流按照目标视频格式进行封装得到。
11.一种通信设备，包括：收发机、存储器、处理器及存储在所述存储器上并可在所述处理器上运行的程序；其特征在于，所述处理器，用于读取存储器中的程序实现如权利要求1至5中任一项所述的监控方法中的步骤；或，如权利要求6至8中任一项所述的监控方法中的步骤。
12.一种可读存储介质，用于存储程序，其特征在于，所述程序被处理器执行时实现如权利要求1至5中任一项所述的监控方法中的步骤；或，如权利要求6至8中任一项所述的监控方法中的步骤。
CN202110517461.6A 2021-05-12 2021-05-12 监控方法、相关设备及可读存储介质 Pending CN113259737A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110517461.6A CN113259737A (zh) 2021-05-12 2021-05-12 监控方法、相关设备及可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110517461.6A CN113259737A (zh) 2021-05-12 2021-05-12 监控方法、相关设备及可读存储介质

Publications (1)

Publication Number Publication Date
CN113259737A true CN113259737A (zh) 2021-08-13

Family

ID=77223107

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110517461.6A Pending CN113259737A (zh) 2021-05-12 2021-05-12 监控方法、相关设备及可读存储介质

Country Status (1)

Country Link
CN (1) CN113259737A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109660764A (zh) * 2018-12-24 2019-04-19 武汉长江通信智联技术有限公司 基于html5的车辆实时视频的监控方法、装置及系统
CN110446010A (zh) * 2019-08-02 2019-11-12 江西航天鄱湖云科技有限公司 基于web的视频监控方法、装置、存储介质、服务器及系统
CN111064973A (zh) * 2019-11-28 2020-04-24 湖北工业大学 一种基于ipv9的直播系统
CN111147947A (zh) * 2020-01-10 2020-05-12 深圳市同洲电子股份有限公司 一种基于websocket的flv视频传输及网页播放的方法
CN112104893A (zh) * 2020-11-04 2020-12-18 武汉中科通达高新技术股份有限公司 一种实现网页端无插件播放的视频流管理方法及装置
CN112261377A (zh) * 2020-10-23 2021-01-22 青岛以萨数据技术有限公司 web版监控视频播放方法、电子设备及存储介质
CN112422508A (zh) * 2020-10-19 2021-02-26 武汉烽火众智数字技术有限责任公司 一种在浏览器网页中播放视频的方法及系统

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109660764A (zh) * 2018-12-24 2019-04-19 武汉长江通信智联技术有限公司 基于html5的车辆实时视频的监控方法、装置及系统
CN110446010A (zh) * 2019-08-02 2019-11-12 江西航天鄱湖云科技有限公司 基于web的视频监控方法、装置、存储介质、服务器及系统
CN111064973A (zh) * 2019-11-28 2020-04-24 湖北工业大学 一种基于ipv9的直播系统
CN111147947A (zh) * 2020-01-10 2020-05-12 深圳市同洲电子股份有限公司 一种基于websocket的flv视频传输及网页播放的方法
CN112422508A (zh) * 2020-10-19 2021-02-26 武汉烽火众智数字技术有限责任公司 一种在浏览器网页中播放视频的方法及系统
CN112261377A (zh) * 2020-10-23 2021-01-22 青岛以萨数据技术有限公司 web版监控视频播放方法、电子设备及存储介质
CN112104893A (zh) * 2020-11-04 2020-12-18 武汉中科通达高新技术股份有限公司 一种实现网页端无插件播放的视频流管理方法及装置

Similar Documents

Publication Publication Date Title
CN105991962B (zh) 连接方法、信息展示方法、装置及系统
EP3092793B1 (en) Interactive video conferencing
CN111010614A (zh) 一种显示直播字幕的方法、装置、服务器及介质
US20140139735A1 (en) Online Media Data Conversion Method, Online Video Playing Method and Corresponding Device
EP3059945A1 (en) Method and system for video surveillance content adaptation, and central server and device
CN111526387B (zh) 一种视频处理方法、装置、电子设备及存储介质
CN114040232B (zh) 投屏系统、方法、电子设备和存储介质
EP4060955A1 (en) Security method, apparatus and system easy to access by user
US9641908B2 (en) Method and system for transferring real-time audio/video stream
CN107276990B (zh) 一种流媒体直播方法及装置
CN115665474A (zh) 直播方法、装置、电子设备以及存储介质
CN110113298B (zh) 数据传输方法、装置、信令服务器和计算机可读介质
CN116261021B (zh) 一种视频流播放方法、装置、电子设备及存储介质
WO2023231478A1 (zh) 音视频共享方法、设备及计算机可读存储介质
CN113259737A (zh) 监控方法、相关设备及可读存储介质
CN114339146B (zh) 音视频监控方法、装置、电子设备及计算机可读存储介质
CN114827734A (zh) 流媒体数据回放方法、装置、系统和存储介质
CN111787417B (zh) 基于人工智能ai的音视频的传输控制方法及相关设备
CN115022725A (zh) 一种视频播放方法和装置
CN110730328B (zh) 将多路视频展示到浏览器单页面中的方法
WO2015042767A1 (en) Method for inserting an advertisement into a video stream of an application on demand (aod) service, aod processing device and aod server
CN112532719A (zh) 信息流的推送方法、装置、设备及计算机可读存储介质
CN108259995B (zh) 一种预览信号源的方法、装置及设备
CN111385081A (zh) 一种端到端的通信方法、装置、电子设备及介质
US10171545B2 (en) System for transferring real-time audio/video stream

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20210813

RJ01 Rejection of invention patent application after publication