CN109168041B - 一种移动终端监控方法及系统 - Google Patents

一种移动终端监控方法及系统 Download PDF

Info

Publication number
CN109168041B
CN109168041B CN201811122214.0A CN201811122214A CN109168041B CN 109168041 B CN109168041 B CN 109168041B CN 201811122214 A CN201811122214 A CN 201811122214A CN 109168041 B CN109168041 B CN 109168041B
Authority
CN
China
Prior art keywords
video stream
mobile terminal
server
resolution
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811122214.0A
Other languages
English (en)
Other versions
CN109168041A (zh
Inventor
徐国诚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
OneConnect Financial Technology Co Ltd Shanghai
Original Assignee
OneConnect Financial Technology Co Ltd Shanghai
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by OneConnect Financial Technology Co Ltd Shanghai filed Critical OneConnect Financial Technology Co Ltd Shanghai
Priority to CN201811122214.0A priority Critical patent/CN109168041B/zh
Publication of CN109168041A publication Critical patent/CN109168041A/zh
Application granted granted Critical
Publication of CN109168041B publication Critical patent/CN109168041B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4621Controlling the complexity of the content stream or additional data, e.g. lowering the resolution or bit-rate of the video stream for a mobile client with a small screen
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/24Monitoring of processes or resources, e.g. monitoring of server load, available bandwidth, upstream requests
    • H04N21/2402Monitoring of the downstream path of the transmission network, e.g. bandwidth available
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25808Management of client data
    • H04N21/25825Management of client data involving client display capabilities, e.g. screen resolution of a mobile phone

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Graphics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种移动终端监控方法及系统,适用于数据处理技术领域,该方法包括:服务器获取设备终端的屏幕分辨率并发送至移动终端;移动终端判断其屏幕的分辨率是否高于屏幕分辨率;若移动终端屏幕的分辨率高于屏幕分辨率,移动终端将实时获取到的多张截图依次转换为屏幕分辨率的视频流,并将视频流发送至服务器;服务器将视频流发送至设备终端进行显示。因此本发明实施例能在减小移动终端监控时对带宽需求,防止监控画面传输延迟等现象的同时,保证最终监控的显示效果,既提升了监控效率又提升了监控效果。

Description

一种移动终端监控方法及系统
技术领域
本发明属于数据处理技术领域,尤其涉及移动终端监控方法及系统。
背景技术
现有的对移动终端的监控方法,都是利用移动终端对其屏幕进行设定频率的截图并发送给服务器,再由服务器将接收到的截图发送给用户的设备终端进行显示。由于现在的移动终端屏幕分辨率越来越高,同时为了提高用户体验,监控时对移动终端的截屏频率也越来越高,从而使得最终生成的截图文件体积非常大,在传输时需要占用非常多的带宽,而实际应用中带宽资源有限,因此现有技术在进行移动终端的监控时,常常会出现带宽资源不足导致的监控画面传输延迟等现象,使得对移动终端的监控效率较低,效果较差。
发明内容
有鉴于此,本发明实施例提供了一种移动终端监控方法及系统,以解决现有技术中对移动终端的监控效率低效果差的问题。
本发明实施例的第一方面提供了一种移动终端监控方法,包括:
服务器获取设备终端的屏幕分辨率并发送至移动终端;
所述移动终端判断其屏幕的分辨率是否高于所述屏幕分辨率;
若所述移动终端屏幕的分辨率高于所述屏幕分辨率,所述移动终端将实时获取到的多张截图依次转换为所述屏幕分辨率的视频流,并将所述视频流发送至所述服务器;
所述服务器将所述视频流发送至所述设备终端进行显示。
本发明实施例的第二方面提供了一种系统,所述系统包括服务器、移动终端以及设备终端;
所述服务器用于获取所述设备终端的屏幕分辨率并发送至所述移动终端;
所述移动终端用于判断其屏幕的分辨率是否高于所述屏幕分辨率;
所述移动终端还用于若所述移动终端屏幕的分辨率高于所述屏幕分辨率,将实时获取到的多张截图依次转换为所述屏幕分辨率的视频流,并将所述视频流发送至所述服务器;
所述服务器还用于将所述视频流发送至所述设备终端进行显示。
本发明实施例与现有技术相比存在的有益效果是:本发明实施例通过将截图转换为视频流来进行传输监控,极大地减小了传输占用的带宽,且还在截图分辨率过高时,将转换的视频流分辨率压缩为设备终端的屏幕分辨率大小,从而实现了对视频流的进一步压缩减小传输占用带宽,同时由于设备终端屏幕可显示的最大分辨率即为其屏幕分辨率,因此将视频流分辨率设置为设备终端屏幕分辨率时,能在减小视频流体积的同时,尽可能地保证对视频流的显示效果保障监控的效果。因此本发明实施例能在减小移动终端监控时对带宽需求,防止监控画面传输延迟等现象的同时保证最终监控的显示效果,既提升了监控效率又提升了监控效果。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的移动终端监控方法的实现流程示意图;
图2是本发明实施例二提供的移动终端监控方法的实现流程示意图;
图3是本发明实施例三提供的移动终端监控方法的实现流程示意图;
图4是本发明实施例四提供的系统交互示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定系统结构、技术之类的具体细节,以便透彻理解本发明实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中,省略对众所周知的系统、装置、电路以及方法的详细说明,以免不必要的细节妨碍本发明的描述。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
图1示出了本发明实施例一提供的移动终端监控方法的实现流程图,详述如下:
S101,服务器获取设备终端的屏幕分辨率并发送至移动终端。
其中,屏幕分辨率是指设备终端显示屏幕的分辨率,如常见的1920×1080。服务器获取设备终端屏幕分辨率的方法此处不予限定,既可以是由技术人员预先设置好该数据在服务器内,在服务器需要时直接读取,也可以是服务器向设备终端发送屏幕分辨率的查询指令,再接收设备终端返回的数据即可。
S102,移动终端判断其屏幕的分辨率是否高于屏幕分辨率。
其中,移动终端的屏幕分辨率高于设备终端屏幕分辨率,是指移动终端屏幕的水平像素数和垂直像素数均小于设备终端屏幕,其中水平像素数是指在水平方向每一行包含的像素数,垂直像素是指在垂直方向每一列包含的像素数。
考虑到实际情况中移动终端的屏幕分辨率越来越高,如1920×1080、2436 ×1125以及3840×2160等高分辨率屏幕越来越多,而考虑到成本问题,实际用于移动终端监控的设备终端往往都配置较为一般,其屏幕分辨率往往较低,例如800×600甚至640×480,因此实际应用中经常会出现被监控的手机等移动终端的屏幕分辨率高于监控端设备终端屏幕分辨率的情况。由于在进行移动终端监控时都是直接对移动终端屏幕显示的内容进行截屏,因此得到的截图的分辨率即为其屏幕分辨率,如假设移动终端屏幕分辨率为1920×1080,得到的截图分辨率也为1920×1080,当移动终端的屏幕分辨率高于设备终端屏幕分辨率时,若直接按照高分辨率将截图或截图转换出的视频流显示至低分率的设备终端,由于设备终端屏幕像素点数有限,会导致即使是高分辨率的图像/视频流,其最终的显示效果也是低分率的图像/视频,而高分辨率的图像/视频流往往需要较大的网络传输开销,对带宽的需求很高,因此导致了现有技术中经常会出现虽然移动终端的屏幕分辨率高于设备终端屏幕分辨率,且网络传输时消耗量大量的带宽资源,但其实最终的显示效果还是无法达到移动终端屏幕分辨率的效果的情况,从而导致了带宽资源的浪费且监控效率低效果差的问题。
为了解决带宽资源的浪费且监控效率低效果差的问题,本发明实施例中移动终端在接收到服务器发送的监控端设备终端屏幕分辨率之后,会判定其屏幕分辨率是否高于设备终端屏幕分辨率,以判断是否可能出现若按照其屏幕分辨率进行截图传输导致带宽占用过大监控效果不佳的情况。
S103,若移动终端屏幕的分辨率高于屏幕分辨率,移动终端将实时获取到的多张截图依次转换为屏幕分辨率的视频流,并将视频流发送至服务器。
当移动终端屏幕分辨率高于设备终端屏幕分辨率时,说明直接截屏得到的截图的分辨率过高,设备终端是无法以该高分辨率进行显示,而高分辨率的截图文件体积较大传输所需的带宽也较大,从而使得监控的效率降低。为了减小对带宽的依赖提升监控效率并保证监控效果,本发明实施例从传输文件格式以及传输文件分辨率两个方面来节约带宽,详述如下:
1、从文件格式方面:由于直接得到的每张截图中都完整的保留了截屏时移动终端屏幕显示的所有像素点信息(即各个像素点的位置以及对应的色彩信息),因此截图文件体积较大,在监控传输大量截图时需要消耗极多的带宽资源,但视频文件在存储各帧图像时,后一帧图像只需要存储与前一帧图像存在差异的像素点信息即可,即无需每帧图像都记录完整的像素点信息,而实际情况中对移动终端进行屏幕监控时,得到的都是用户对移动终端在时间上连续操作时的连续截图,因此前后截图的相似度是非常高的,即前后截图往往具有非常多的相同位置且色彩信息相同的像素点,例如在移动终端桌面滑动切换时,由于此时桌面背景并没有改变,改变的仅是桌面上的图标,因此滑动前后截图的像素点信息大部分是相同的,此时若按照视频方式将滑动前后截图作为连续帧图像进行存储,此时在后的帧图像所需存储的像素点信息将大大减少,从而使得相对每张截图都完整记录所有像素点信息而言,视频可以极大地减小文件体积,减小传输时的带宽需求。
因此,为了减小所需传输文件的体积,减小对带宽的需求,本发明实施例中会将实时获取到的截图转换为视频流进行传输,即在获取到截图之后,将截图与前一张截图进行像素点色彩逐一比对,找出其中色彩信息发送变化的像素点,并仅将这些变化后的像素点的位置以及对应的变化后的色彩信息传输至服务器,从而使得本发明实施例只需要较小的带宽即可完成对移动终端的监控,极大地提升了监控的效率。
2、从文件分辨率方面:由于移动终端屏幕分辨率高于设备终端屏幕分辨率,因此直接对原分辨率的图像/视频进行传输,其实是对带宽资源的浪费,使得带宽不够用,因此本发明实施例另一方面会对生成的视频流的分辨率进行压缩,减小视频流的码率,以减小对带宽的需求。考虑到压缩分辨率虽然能减小视频流的码率,但当视频流分辨率过低时又会使得设备终端出无法清晰显示视频流,从而使得监控的效果大大降低,因此,为了在减小带宽需求同时保证监控的效果,本发明实施例中会以设备终端屏幕分辨率的标准对视频流的分辨率进行压缩,从而使得即使是压缩后的视频流,在需要时设备终端依然可以以其最高分辨率进行显示。其中,对视频流分辨率的压缩形式,既可以是在生成移动终端原分辨率的视频流之后直接对视频流进行压缩,也可以是在获取到截图之后先对截图分辨率进行压缩再转换为视频流,此处不予限定,具体可由技术人员根据实际需求自行设定。
应当特别说明地,由于监控端的设备终端屏幕宽高比一般都与移动终端的屏幕宽高比不同,因此实际在将视频流以移动终端屏幕宽高比进行缩放时,往往都不是刚好填充满设备终端屏幕,而本发明实施例压缩得到的视频流都是设备终端屏幕的分辨率,因此必然会导致视频流的一些像素点无法正常被显示,因此在按照设备终端屏幕分辨率进行视频流分辨率压缩时,其实大部分时候还是会造成一定程度上的分辨率过高,所需传输的视频流文件浪费带宽资源的情况,但本发明实施例中考虑到用户在监控时可能会将视频流强制拉伸填充满设备终端屏幕,因此为了保证即使是强制拉伸填充时视频流的显示效果,保证最终的监控效果,本发明实施例中没有将视频流的分辨率压缩的过小,而是压缩至设备终端的屏幕分辨率。
S104,服务器将视频流发送至设备终端进行显示。
服务器在接收到视频流之后将视频流发送至设备终端,设备终端再对视频流进行显示,用户即可实现对移动终端的实时监控。
本发明实施例通过将截图转换为视频流来进行传输监控,极大地减小了传输占用的带宽,且还在截图分辨率过高时,将转换的视频流分辨率压缩为设备终端的屏幕分辨率大小,从而实现了对视频流的进一步压缩减小传输占用带宽,同时由于设备终端屏幕可显示的最大分辨率即为其屏幕分辨率,因此将视频流分辨率设置为设备终端屏幕分辨率时,能在减小视频流体积的同时,尽可能地保证对视频流的显示效果保障监控的效果。因此本发明实施例能在减小移动终端监控时对带宽需求,防止监控画面传输延迟等现象的同时保证最终监控的显示效果,既提升了监控效率又提升了监控效果。
作为本发明实施例二,考虑到本发明实施例一种仅是根据设备终端的硬件配置情况进行了视频流分辨率的反馈调整,虽然可以一定程度上减小视频流码率实现对带宽需求的缩减,但实际情况中,监控是否可以高效的进行,其最终决定因素除了视频流码率以外还有实际可用带宽资源情况,只有实际可用带宽资源大等于视频流码率时,才能真正保证最终监控的高效进行,因此本发明实施例中会根据实际可用带宽资源的情况,来实现对视频流码率的反馈调节,如图2所示,包括:
S201,服务器获取其与移动终端数据传输时的可用带宽,以及其与设备终端进行数据传输时的可用带宽,并确定出其中较小的可用带宽。
S202,服务器基于较小的可用带宽计算出对应的带宽阈值。
由于本发明实施例中有移动终端-服务器以及服务器-设备终端共两条数据传输线路,其中任何一条线路带宽资源不够时都会导致视频流传输受阻监控效率降低,因此为了保证视频流的有效传输,本发明实施例中会以两条线路可用带宽中最小值作为基准值来进行视频流码率调节。其中,实际应用中发现,由于受到各种因素的影响,实际数据传输中可以使用到的带宽资源可能会小于标称的或者带宽测试时得到的线路的可用带宽,因此为了确保视频流的有效传输,本发明实施例在获取到两条线路的最小可用带宽之后,会对其进行一定比例的折算,确定出所需的带宽阈值,其中具体的折算比例可由技术人员自行设定,如可以设置带宽阈值为最小可用带宽的90%。
S203,当视频流的码率大于带宽阈值时,服务器向移动终端发送视频压缩指令,视频压缩指令中包含带宽阈值。
当视频流的码率大于带宽阈值时,说明单位时间内所需传输的视频流数据量大于线路单位时间内可承受传输的数据量,此时直接进行视频流的传输会导致视频流无法有效传输到服务器和设备终端,无法保证视频流播放的流畅性,因此,为了保证视频流的有效传输,本发明实施例会在此时由服务器向移动终端发送视频压缩指令,以告知移动终端需要对视频流进一步地进行压缩,保证视频流有效传输监控有效的进行。
S204,移动终端根据视频压缩指令对实时转换的视频流进行压缩,并将压缩后的视频流发送至服务器。
移动终端在接收到视频压缩指令后,会以其中的带宽阈值作为目标对视频流进行压缩,直至在将视频流码率压缩至带宽阈值大小后,再将压缩后的视频流发送至服务器。
结合本发明实施例一与本发明实施例二,本发明实施例在将视频流压缩至设备终端屏幕分辨率之后发送至服务器,此时服务器会比较接收到的设备终端屏幕分辨率的视频流的码率与计算得到的带宽阈值大小,若视频流码率过大,则会反馈至移动终端,移动终端再将视频流进一步压缩至带宽阈值的码率,并继续发送至服务器,因此在此之后,移动终端在向服务器发送视频流之前,会根据硬件反馈+带宽反馈结果,对视频流进行视频分辨率压缩+码率压缩共两次压缩过程,以保证视频流码率满足实际线路带宽要求,保证监控的有效性。
作为本发明实施例二中对视频流码率压缩的一种具体实现方式,包括:
对截图的截取频率进行调整,直至实时转换得到的视频流的码率小于或等于带宽阈值。
视频流码率的决定因素主要有两个:单位时间内视频流所包含图像帧数,以及每帧图像的大小。本发明实施例中为了减小视频流码率,会对移动终端截图频率进行降低从而使得视频流单位时间的图像帧数得以减少,降低视频流码率。由于无法预知具体截图频率减小到多少才能使得视频流码率小等于带宽阈值,因此在调整截图频率时,本发明实施例会设置一个调整的频率步长,以实现对截图频率的逐步调整。其中,频率步长既可以是一个固定值,也可以是一个百分比,具体可由技术人员自行设置。
作为本发明实施例二中对视频流码率压缩的另一种具体实现方式,包括:
对视频流的分辨率进行压缩,直至视频流的码率小于或等于带宽阈值。
本发明实施例中为了减小视频流码率,会对视频流帧图像的分辨率进行压缩,以减小每帧图像的大小,达到最终减小视频流码率的目的。其中,图像分辨率包含水平像素数以及垂直像素数,对其中任意一种或两种像素进行压缩,均可实现对图像的分辨率压缩,因此本发明实施例中不对具体的压缩方式进行限定,具体可由技术人员根据实际需求进行设定。
应当特别说明地,由于上述对视频流单位时间内所包含图像帧数,以及对每帧图像进行分辨率压缩两种方式,均可实现对视频流码率的调整,但实际情况中若是对视频流单位时间内所包含图像帧数,由于单位时间内可以播放的图像帧数下降了,因此会导致用户看到的视频刷新频率较低,出现“卡顿”的现象,而若是对每帧图像进行分辨率压缩,则会导致视频流的分辨率降低,从而导致用户看到的视频不够清晰,因此无论是那种码率压缩方式其均有优缺点,因此为了充分保障用户的实际需求得以满足,本发明实施例中用户可以自行选取对视频流码率压缩的方式,例如,若用户监控时需要监测移动终端的系统响应速度,此时对截图的刷新频率要求就较高,此时用户可以选取对每帧图像分辨率压缩的方式,而若用户对响应速度要求不高,但需要较为清晰的显示效果时,可以选择减少对视频流单位时间内所包含图像帧数,此时用户只要在监控之前选取好压缩模式,本发明实施例在进行码率压缩时,根据用户选取的压缩模式来确定具体的压缩方法并进行压缩即可。
作为对视频流每帧图像分辨率压缩的一种具体实现方式,本发明实施例包括:对视频流的水平像素进行压缩处理。
由于监控端的设备终端屏幕宽高比一般都与移动终端的屏幕宽高比存在差异,因此实际在将视频流以移动终端屏幕宽高比进行缩放时,往往都不是刚好填充满设备终端屏幕,而是以视频流的高缩放至设备终端屏幕高为准,此时视频流的宽对应的像素点其实是无法全部被显示出来的,即视频流的每行包含的水平像素无法被完全显示处理,因此为了在保证视频流有效传输的同时,尽可能地保证视频流的显示效果,以保证监控的效果,本发明实施例中会优先对视频流的水平像素进行压缩,减少视频流每行像素所包含的像素点。其中具体的压缩方式此处不予限定,可由技术人员自行设定,包括但不限于如隔列抽取每行的像素点,以减少每行所包含的像素点数。
作为本发明实施例三,考虑到本发明实施例一种仅是根据设备终端的硬件配置情况进行了视频流分辨率的反馈调整,虽然可以一定程度上减小视频流码率,实现对带宽需求的缩减,但实际情况中监控是否可以高效的进行,其最终决定因素除了视频流码率以外,还有实际可用带宽资源情况,只有实际可用带宽资源大等于视频流码率时,才能真正保证最终监控的高效进行,同时考虑到实际情况中移动终端的处理能力往往较弱,对于处理能力较弱的移动终端而言,本发明实施例二的实现难度较大,可能会导致移动终端运行超负荷,从而影响对移动终端正常的监控,因此本发明实施例中会根据实际可用带宽资源的情况,由服务器来实现对视频流码率的反馈调节,如图3所示,包括:
S301,服务器获取其与设备终端进行数据传输时的可用带宽,并基于可用带宽计算出对应的带宽阈值。
S302,当视频流的码率大于带宽阈值时,服务器基于带宽阈值对视频流进行压缩,直至视频流的码率小于或等于带宽阈值。
本发明实施例与本发明实施例二的基本原理相同,因此对基本原理部分不予赘述,具体可参考本发明实施例二。与本发明实施例二的不同之处在于:本发明实施例中考虑到实际情况中移动终端的处理能力较弱,因此把对视频流的压缩过程设置在了服务器之中,由于是由服务器进行视频压缩的,因此压缩后的视频流是不会经由移动终端-服务器线路进行传输的,因此本发明实施例中在进行带宽阈值计算时,仅需考虑服务器-设备终端线路的可用带宽情况即可。在对视频流码率压缩完成后,再将压缩后的视频流发送至设备终端。
作为本发明实施例三中对视频流每帧图像分辨率压缩的一种具体实现方式,本发明实施例包括:
对视频流的水平像素进行压缩处理。
本发明实施例基本原理前述本发明其他实施例中已进行了详述,因此此处不予详述。
应当说明地,由于本发明实施例二和本发明实施例三是对视频流进行带宽反馈调节的两种不同实现方式,其考虑的实际因素不同,导致其最后实现的方式以及执行主体发生了变化,但在实际应用中,为了满足不同用户实际的情况需求,如实际监控时移动终端的系统性能不同的需求,本发明实施例中可以在移动终端监控开始前由用户自行设置好对视频流码率进行压缩的主体,并在开始监控时读取用户的选取结果,并根据用户的实际选择来进行本发明实施例二和本发明实施例三的选取应用。
本发明实施例根据用户的实际需求,建立起设备终端屏幕硬件反馈+实际传输线路带宽反馈的多重反馈机制对视频流分辨率和码率进行调整,从而实现了对视频流码率的灵活调整,在保证视频流正常传输的同时还保证了视频流的显示效果,进而实现了对监控效率和效果的同步提升。具体而言,一方面通过将截图转换为视频流来进行传输监控,极大地减小了传输占用的带宽,且还在截图分辨率过高时,将转换的视频流分辨率压缩为设备终端的屏幕分辨率大小,从而实现了对视频流的进一步压缩减小传输占用带宽,同时由于设备终端屏幕可显示的最大分辨率即为其屏幕分辨率,因此将视频流分辨率设置为设备终端屏幕分辨率时,能在减小视频流体积的同时,尽可能地保证对视频流的显示效果保障监控的效果。另一方面,根据实际传输线路的可用带宽情况以及设备终端屏幕分辨率的视频流实际码率情况,来判断视频流是否能正常传输,并在发现视频流难以正常传输时对视频流码率进行调整,从而保证了视频流的正常有效传输。因此本发明实施例能在减小移动终端监控时对带宽需求,防止监控画面传输延迟等现象的同时保证最终监控的显示效果,既提升了监控效率又提升了监控效果。
对应于上文实施例的方法,图4示出了本发明实施例提供的移动终端监控系统交互的示意图,为了便于说明,仅示出了与本发明实施例相关的部分。图 4示例的移动终端监控系统中的服务器、移动终端以及设备终端,可以是前述实施例一提供的移动终端监控方法的执行主体。
参照图4,该移动终端监控系统包括:服务器41、移动终端42以及设备终端43。
所述服务器41用于获取所述设备终端43的屏幕分辨率并发送至所述移动终端42。
所述移动终端42用于判断其屏幕的分辨率是否高于所述屏幕分辨率。
所述移动终端42还用于若所述移动终端42屏幕的分辨率高于所述屏幕分辨率,将实时获取到的多张截图依次转换为所述屏幕分辨率的视频流,并将所述视频流发送至所述服务器41。
所述服务器41还用于将所述视频流发送至所述设备终端43进行显示。
进一步地,该移动终端监控系统,还包括:
所述服务器41还用于获取其与所述移动终端42数据传输时的可用带宽,以及其与所述设备终端43进行数据传输时的可用带宽,并确定出其中较小的可用带宽。
所述服务器41还用于基于所述较小的可用带宽计算出对应的带宽阈值。
所述服务器41还用于当所述视频流的码率大于所述带宽阈值时,向所述移动终端42发送视频压缩指令,所述视频压缩指令中包含所述带宽阈值。
所述移动终端42还用于根据所述视频压缩指令对实时转换的所述视频流进行压缩,并将压缩后的所述视频流发送至所述服务器41。
进一步地,所述移动终端42,还用于:
对所述截图的截取频率进行调整,直至实时转换得到的所述视频流的码率小于或等于所述带宽阈值。或者
对所述视频流的分辨率进行压缩,直至所述视频流的码率小于或等于所述带宽阈值。
进一步地,所述移动终端42,还用于:
对所述视频流的水平像素进行压缩处理。
进一步地,该移动终端监控系统,还包括:
所述服务器41获取其与所述设备终端43进行数据传输时的可用带宽,并基于所述可用带宽计算出对应的带宽阈值。
当所述视频流的码率大于所述带宽阈值时,所述服务器41基于所述带宽阈值对所述视频流进行压缩,直至所述视频流的码率小于或等于所述带宽阈值。
进一步地,所述服务器41,还用于:
对所述视频流的水平像素进行压缩处理。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
还应理解的是,虽然术语“第一”、“第二”等在文本中在一些本发明实施例中用来描述各种元素,但是这些元素不应该受到这些术语的限制。这些术语只是用来将一个元素与另一元素区分开。例如,第一表格可以被命名为第二表格,并且类似地,第二表格可以被命名为第一表格,而不背离各种所描述的实施例的范围。第一表格和第二表格都是表格,但是它们不是同一表格。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使对应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。

Claims (10)

1.一种移动终端监控方法,其特征在于,包括:
服务器获取设备终端的屏幕分辨率并发送至移动终端;
所述移动终端判断其屏幕的分辨率是否高于所述屏幕分辨率;
若所述移动终端屏幕的分辨率高于所述屏幕分辨率,所述移动终端将实时获取到的多张截图依次转换为所述屏幕分辨率的视频流,并将所述视频流发送至所述服务器;
所述服务器将所述视频流发送至所述设备终端进行显示;
其中,将多张截图转换为视频流进行传输是将截图与前一张截图进行像素点色彩逐一比对,找出其中色彩信息发生变化的像素点,并仅将这些变化后的像素点的位置以及对应的变化后的色彩信息传输至服务器。
2.如权利要求1所述的移动终端监控方法,其特征在于,还包括:
所述服务器获取其与所述移动终端数据传输时的可用带宽,以及其与所述设备终端进行数据传输时的可用带宽,并确定出其中较小的可用带宽;
所述服务器基于所述较小的可用带宽计算出对应的带宽阈值;
当所述视频流的码率大于所述带宽阈值时,所述服务器向所述移动终端发送视频压缩指令,所述视频压缩指令中包含所述带宽阈值;
所述移动终端根据所述视频压缩指令对实时转换的所述视频流进行压缩,并将压缩后的所述视频流发送至所述服务器。
3.如权利要求2所述的移动终端监控方法,其特征在于,所述移动终端对所述视频流的压缩过程,包括:
对所述截图的截取频率进行调整,直至实时转换得到的所述视频流的码率小于或等于所述带宽阈值。
4.如权利要求2所述的移动终端监控方法,其特征在于,所述移动终端对所述视频流的压缩过程,包括:
对所述视频流的分辨率进行压缩,直至所述视频流的码率小于或等于所述带宽阈值。
5.如权利要求4所述的移动终端监控方法,其特征在于,所述对所述视频流的分辨率进行压缩,包括:
对所述视频流的水平像素进行压缩处理。
6.如权利要求1所述的移动终端监控方法,其特征在于,所述服务器将所述视频流发送至所述设备终端进行显示,包括:
所述服务器获取其与所述设备终端进行数据传输时的可用带宽,并基于所述可用带宽计算出对应的带宽阈值;
当所述视频流的码率大于所述带宽阈值时,所述服务器基于所述带宽阈值对所述视频流进行压缩,直至所述视频流的码率小于或等于所述带宽阈值。
7.如权利要求6所述的移动终端监控方法,其特征在于,所述对所述视频流进行压缩,包括:
对所述视频流的水平像素进行压缩处理。
8.一种移动终端监控系统,其特征在于,包括:服务器、移动终端以及设备终端;
所述服务器用于获取所述设备终端的屏幕分辨率并发送至所述移动终端;
所述移动终端用于判断其屏幕的分辨率是否高于所述屏幕分辨率;
所述移动终端还用于若所述移动终端屏幕的分辨率高于所述屏幕分辨率,将实时获取到的多张截图依次转换为所述屏幕分辨率的视频流,并将所述视频流发送至所述服务器;
所述服务器还用于将所述视频流发送至所述设备终端进行显示;
其中,将多张截图转换为视频流进行传输是将截图与前一张截图进行像素点色彩逐一比对,找出其中色彩信息发生变化的像素点,并仅将这些变化后的像素点的位置以及对应的变化后的色彩信息传输至服务器。
9.如权利要求8所述的移动终端监控系统,其特征在于,还包括:
所述服务器还用于获取其与所述移动终端数据传输时的可用带宽,以及其与所述设备终端进行数据传输时的可用带宽,并确定出其中较小的可用带宽;
所述服务器还用于基于所述较小的可用带宽计算出对应的带宽阈值;
所述服务器还用于当所述视频流的码率大于所述带宽阈值时,向所述移动终端发送视频压缩指令,所述视频压缩指令中包含所述带宽阈值;
所述移动终端还用于根据所述视频压缩指令对实时转换的所述视频流进行压缩,并将压缩后的所述视频流发送至所述服务器。
10.如权利要求9所述的移动终端监控系统,其特征在于,所述移动终端对所述视频流的压缩过程,包括:
对所述截图的截取频率进行调整,直至实时转换得到的所述视频流的码率小于或等于所述带宽阈值;或者
对所述视频流的分辨率进行压缩,直至所述视频流的码率小于或等于所述带宽阈值。
CN201811122214.0A 2018-09-26 2018-09-26 一种移动终端监控方法及系统 Active CN109168041B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811122214.0A CN109168041B (zh) 2018-09-26 2018-09-26 一种移动终端监控方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811122214.0A CN109168041B (zh) 2018-09-26 2018-09-26 一种移动终端监控方法及系统

Publications (2)

Publication Number Publication Date
CN109168041A CN109168041A (zh) 2019-01-08
CN109168041B true CN109168041B (zh) 2022-07-26

Family

ID=64892513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811122214.0A Active CN109168041B (zh) 2018-09-26 2018-09-26 一种移动终端监控方法及系统

Country Status (1)

Country Link
CN (1) CN109168041B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111757046B (zh) * 2019-03-28 2022-09-30 菜鸟智能物流控股有限公司 一种数据处理方法、装置、设备和机器可读介质
CN112351093A (zh) * 2020-10-30 2021-02-09 深圳Tcl新技术有限公司 截屏图像共享方法、装置、设备及计算机可读存储介质
CN113625982A (zh) * 2021-07-21 2021-11-09 展讯通信(上海)有限公司 多屏显示方法及装置
CN115037732B (zh) * 2022-06-01 2024-04-23 中国电力科学研究院有限公司 通过流媒体进行远程真机调试的方法、装置、设备及介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105025249A (zh) * 2014-04-22 2015-11-04 中国移动通信集团江苏有限公司 视频监控数据传输控制方法、装置及视频监控系统
EP1922877B1 (en) * 2005-09-07 2016-05-04 Cisco Technology, Inc. Optimizing data rate for video services
CN107423187A (zh) * 2016-06-08 2017-12-01 宁波广播电视集团 一种屏幕监控方法、装置及系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1922877B1 (en) * 2005-09-07 2016-05-04 Cisco Technology, Inc. Optimizing data rate for video services
CN105025249A (zh) * 2014-04-22 2015-11-04 中国移动通信集团江苏有限公司 视频监控数据传输控制方法、装置及视频监控系统
CN107423187A (zh) * 2016-06-08 2017-12-01 宁波广播电视集团 一种屏幕监控方法、装置及系统

Also Published As

Publication number Publication date
CN109168041A (zh) 2019-01-08

Similar Documents

Publication Publication Date Title
CN109168041B (zh) 一种移动终端监控方法及系统
CN102625106B (zh) 场景自适应的屏幕编码码率控制方法及其系统
CN108810636B (zh) 视频播放方法、虚拟现实设备、服务器、系统及存储介质
US9872021B2 (en) Video conversion method and apparatus
US9699099B2 (en) Method of transmitting data in a communication system
CN109600610B (zh) 一种数据编码方法、终端及计算机可读存储介质
CN113747194B (zh) 远程视频传输方法、传输装置、存储介质及电子设备
JP4116006B2 (ja) 画面転送装置、画面転送システム、画面転送方法、およびプログラム
KR102013461B1 (ko) 콘텐츠 프로파일링을 사용한 강화된 원격 트랜스코딩을 위한 시스템 및 방법
CN112492395A (zh) 数据处理方法、装置及电子设备
EP2272237B1 (en) Method of transmitting data in a communication system
WO2013113191A1 (zh) 一种视频图像快速传输的方法及系统
WO2018161867A1 (zh) 码率分配方法、设备及存储介质
CN111083496A (zh) 数据处理方法及相关产品
EP1487210B1 (en) Image data processing method of mobile communication terminal
WO2022057362A1 (zh) 图像处理方法及装置、云真机系统、存储介质和电子设备
CN110727485A (zh) 一种屏幕界面可选择性共享方法及系统
CN110740316A (zh) 数据编码方法及装置
CN104333763A (zh) 一种视频控制方法
CN115883877A (zh) 一种超高清视频流的传输方法及系统
CN110798700B (zh) 视频处理方法、视频处理装置、存储介质与电子设备
JP2018514133A (ja) データ処理方法および装置
JP2005341093A (ja) コンテンツ適応化装置、コンテンツ適応化システム、コンテンツ適応化方法
US8107525B1 (en) Variable bit rate video CODEC using adaptive tracking for video conferencing
CN117291810B (zh) 视频帧的处理方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant