CN103248946A - 一种视频图像快速传输的方法及系统 - Google Patents
一种视频图像快速传输的方法及系统 Download PDFInfo
- Publication number
- CN103248946A CN103248946A CN2012100243362A CN201210024336A CN103248946A CN 103248946 A CN103248946 A CN 103248946A CN 2012100243362 A CN2012100243362 A CN 2012100243362A CN 201210024336 A CN201210024336 A CN 201210024336A CN 103248946 A CN103248946 A CN 103248946A
- Authority
- CN
- China
- Prior art keywords
- image
- video
- row
- pixel
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
- H04N21/4223—Cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供一种图像快速传输的方法,包括:A、视频发送端对其屏幕进行图像截屏并缓存;B、确定出所截屏图像与缓存的上一帧截屏图像像素不同的区域,并发送所述区域的图像;C、视频接收端接收所述区域图像并与其缓存的图像组合作为所接收的图像,并缓存组合后的图像。本发明还相应提供了图像快速传输的系统。本发明节省带宽占用量和编码速度,实现智能家庭中终端的多屏共享时的图像快速传输。
Description
技术领域
本发明涉及视频图像处理领域,尤其涉及一种视频图像快速传输的方法及系统。
背景技术
目前,随着网络技术的不断发展,无线网络在智能家电中已经普及。智能家电中的各种终端设备基本上都能通过无线技术上网并进行信息的浏览,但是随着智能家电的不断完善,人们也提出了更高的要求,即要实现及时的屏幕共享。用户在一个终端设备上浏览信息页面能够及时的传递到另一个最接近自己的终端设备上,这样可以极大的满足用户的需求,方便用户使用。目前,在多屏共享技术中的主要共享方式、技术存在有以下几种:分屏器屏幕共享、服务器视频流屏幕共享和屏幕快捕技术屏幕共享。
但上述共享方式分别存有以下不足:
分屏器屏幕共享需要VGA连接线进行线连接,因为连接线长度有限,因而限制了相连接的两个设备之间的距离;
服务器视频流屏幕共享虽解决了接线长度问题,但一个服务器设备只针对一个客户端设备,无法实现一个服务器设备的播放内容在多个客户端设备上同时进行显示的问题;
屏幕快捕技术屏幕共享每次都处理全屏数据,数据量巨大,需要较高的机器配置才能快速的处理完数据的压缩与传输,耗时长。
发明内容
有鉴于此,本发明的目的在于提供一种视频图像快速传输的方法及系统,节省带宽占用量,实现智能家庭中终端的多屏共享时的图像快速传输。
本发明提供的图像快速传输的方法包括步骤:
A、视频发送端对其屏幕进行图像截屏并缓存;
B、确定出所截屏图像与缓存的上一帧截屏图像像素不同的区域,并发送所述区域的图像;
C、视频接收端接收所述区域图像并与其缓存的图像组合作为所接收的图像,并缓存组合后的图像。
由上,仅对图像像素不同的区域进行发送,节省带宽占用量,实现智能家庭中终端的多屏共享时的图像快速传输。
可选的,步骤B所述像素不同的确定步骤包括:
判断像素与上一帧图像该位置像素属性值偏差超过一定值时确定为像素不同。
由上,通过判断像素属性偏差,实现对像素不同的判定。
可选的,步骤B所述区域的确定步骤包括:
分别以行和列为单位,确定出与上一帧图像像素不同的行和列,所述行和列交集所构成的区域为所述不同的区域。
由上,通过判断行和列像素的不同实现确定出需要截屏的区域,由此可避免全屏截屏,实现节省带宽占用量。
可选的,所述确定出与上一帧图像像素不同的行和列的步骤包括:
将所截屏图像与上一帧图像的各个像素进行差分运算得到灰度差值,并将运算结果作为数组存储;
对所述数组分别进行X轴和Y轴的投影并分别计算各列和各行的灰度差值的和;
分别判断各列和各行灰度差值的和大于一阈值的各行和各列为所确定出的行和列。
由上,通过比较相邻两帧图像的灰度,实现判定图像像素不同的起始行和起始列的位置。
可选的,分别判断各列和各行灰度差值的和大于一阈值后还包括:
判断连续的设定数量的列和行灰度差值的和均大于一阈值的步骤。
由上,实现判定图像像素不同的结束行和结束列的位置,由此确定相邻两帧图像像素不同的区域。
可选的,还包括:
根据一定时间内、一定数量帧的截屏图像统计出像素不同的区域;
步骤A所述截屏为:对所述统计出的区域进行截屏。
由上,通过设定截屏图像的时间间隔和在该时间间隔中的截屏数量,由此减少截屏速率,实现进一步降低带宽占用量。
较佳的,还包括:
判断视频发送端在所述区域截屏之外的屏幕图像的应用被激活时,以全屏图像作为步骤A所述截屏。
所述应用被激活包括:判断接收到鼠标、键盘,或其他应用窗口被激活。
由上,通过设定激活状态,当未被激活时,不对屏幕进行截屏,实现增加截屏的时间间隔,进一步节省宽带占用量。
可选的,所述属性值包括像素点的色彩属性和颜色深度属性。
本发明还提供了一种视频图像快速传输的系统,包括视频发送端和视频接收端,
其中,所述视频发送端包括:
截屏模块,用于对视频发送端的屏幕进行图像截屏;
视频发送端存储模块,用于缓存所述截屏模块依次所截各帧图像;
对比模块,用于将当前所截屏图像与存储模块缓存的上一帧图像进行对比,确定图像像素不同的区域;
发送模块,用于将图像像素不同的区域以无线形式输出。
视频接收端包括:
接收模块,用于接收视频发送端的发送模块所发送的图像像素不同的区域;
整合模块,用于将接收的图像像素不同的区域与所述缓存的图像组合作为所接收的图像;
视频接收端存储模块,用于将整合模块所整合后的图像进行缓存。
由上,仅对图像像素不同的区域进行发送,节省带宽占用量,实现智能家庭中终端的多屏共享时的图像快速传输。
附图说明
图1为本发明提供的视频图像快速传输方法的流程图;
图2为本发明步骤S10中视频发送端与视频接收端之间建立无线共享连接的方法流程图;
图3为本发明步骤S20中视频发送端对被共享的视频文件进行截屏的方法流程图;
图4为本发明步骤S40中当前帧图像与前一帧图像进行对比得出灰度偏差区域的方法流程图;
图5为本发明视频图像快速传输的系统结构示意图。
具体实施方式
本发明的主要原理是:视频发送端与视频接收端之间建立无线共享连接,视频发送端通过截屏将视频图像进行编码向视频接收端发送时,视频发送端同时将该图像进行缓存,并对所缓存的图像进行滤波处理。对当前帧图像与缓存的前一帧的图像进行对比,获取两帧图像中灰度偏差区域(即图像像素所不同的区域),并仅将该灰度偏差区域所对应的图像部分进行编码后发送。视频接收端将灰度偏差区域整合至前一帧图像中并缓存。由此以节省带宽占用量和编码速度,实现智能家庭中终端的多屏共享时的图像快速传输。
下面结合附图1-5对本发明所述图像快速传输方法及系统的具体实施方式进行详细的说明。
如图1所示,图像快速传输的方法包括以下步骤:
步骤S10:视频发送端与视频接收端之间建立无线共享连接。
其中,如图2所示,所述步骤S10包括:
步骤S101:视频发送端通过无线通信网络,如WIFI网络,向视频接收端发送视频共享请求信息。
步骤S102:视频接收端接收视频共享请求信息,根据视频接收端所存储的共享标识位的值判断是否可接受视频共享,并据此反馈相应的信息。
当检测到其共享标识位设置为1时,表示视频接收端正在与其他视频发送端进行视频共享,此时无法再与上述视频接收端进行共享,进入步骤S103;当共享标识位设置为0时,表示视频接收端并未与其他视频发送端进行视频共享,处于空闲状态,此时可与上述视频接收端进行视频共享,进入步骤S104。
步骤S103:视频接收端向视频发送端发送反馈拒绝共享请求的信息,结束本流程。
步骤S104:视频接收端反馈允许共享请求的信息,建立视频共享连接。
当视频发送端与视频接收端之间建立无线共享连接后,视频接收端将视频发送端的地址信息进行存储,以及更改共享标识位为1。
由上,视频发送端与视频接收端完成视频共享连接的建立。
步骤S20:视频发送端对其整个屏幕,即桌面进行逐帧截屏。
常用截屏方式包括GDI函数、DirectX函数或Windows Media API函数。本实施例中,采用GDI函数进行对桌面进行截屏,GDI是以“桌面也是一个窗口,桌面也有一个窗口句柄(HWND)”为基础的,一次截屏的时间仅为4毫秒。GDI是一个可执行程序,它接受Windows应用程序的访问请求,但应用程序无法直接访问输出设备(屏幕),因此对输出设备的操作是通过设备上下文(DC,DeviceContex)进行的。DC是Windows中的一种数据结构,它包含GDI函数需要的所有关于输出设备的类型以及显示界面情况的描述字段。GDI函数所截屏的图像并不是直接由输出设备输出,而是将图像复制到DC中。屏幕上的每一个窗口都对应一个DC,对DC的操作反应在其所对应的屏幕窗口上。
如图3所示,所述步骤S20中的截屏步骤包括:
步骤S201:获取当前屏幕桌面的窗口。
当进行桌面截图时,首先使指针指向当前屏幕桌面窗口。由此,需调用函数来获取桌面窗口的句柄,在本实施例中,通过调用GetDesktopWindow函数获取桌面的窗口句柄。
步骤S202:获取当前屏幕桌面窗口的DC。
本步骤调用GetDC函数获取桌面窗口的DC,用于获取桌面窗口的内容。包括桌面窗口内容对应整个桌面的位图图像以及当前整个桌面窗口的宽和高。
步骤S203:创建与窗口DC兼容的DC和位图,将位图选进兼容的DC。
本步骤中,首先调用CreateCompatible函数创建兼容DC(CreateCompatibleDC)和位图(CreateCompatibleBitmap),兼容DC用于获取整个桌面窗口的像素值。位图依据目前屏幕的大小创建,与整个桌面窗口大小相同。另外,位图可进行读写操作,用于存放全屏幕像素的内存。而后,调用SelectObject函数将所创建的位图选进兼容的DC。
步骤S204:复制桌面窗口DC的内容到兼容DC。
本步骤调用BitBlt函数将步骤S202中的桌面窗口DC复制至步骤S203中创建的位图上,兼容DC上的位图便为截屏时的图像,由此完成当前屏幕桌面的截屏。
步骤S205:释放所创建的DC。
本步骤调用Release函数将所创建的DC释放,由此释放内存保证其他程序顺畅运行。
步骤S30:对所截屏的图像进行滤波并进行缓存。
在进行截屏的过程中,由于光照不均或环境变化,由此造成所截屏的图像的亮度变化不均匀,所以图像会产生很多噪声。通过对所截屏图像进行滤波处理,消除图像噪声以克服图像干扰。
步骤S40:将当前帧图像与前一帧图像的像素属性进行对比,得出灰度偏差区域。
如图4所示,本实施例中以相邻两帧图像具有一个灰度偏差区域为例进行描述,步骤S40中包括:
步骤S401:将所获取图像RGB数值排列矩阵的彩色图换算为灰度图并将当前帧图像与前一帧图像进行差分运算得到灰度差值,运算结果存放至同一个数组I(xi,yj)当中。
本实施例中,为了图像加快图像对比的处理速度,首先改变像素的色彩属性,将截屏的图像由彩色图像转换为灰度图像。转换后的灰度图像的每一个像素点用一个字节表示该像素点的灰度值。灰度值在0~255之间,其数值越大,表示该像素点越白(即亮度高),数值越小就越黑。本实施例中通过对像素颜色深度属性的对比进行判断。
将当前帧图像与前一帧图像的各个像素点的灰度值进行差分运算,并将运算结果存放至一个数组I(xi,yj)当中。其中,数组中的x表示横坐标,y表示纵坐标;i、j分别表示横坐标或纵坐标像素点的序数。
步骤S402:将步骤401中所获得的数组分别进行X轴Y轴的投影并求其积分。
假定所截屏的图像为M*N的排列矩阵,上述数组在X轴投影的积分为:在Y轴投影的积分为:其中,I(xi,yj)表示该像素点的上述灰度差值,Fxi表示第i列所有像素点的灰度差值求和(即所述积分),Fyj表示j行所有像素点的灰度差值求和(即所述积分)。
步骤S403~步骤S414为依据积分式的判断过程,将Fyj与Fxi从下往上,从左往右与预先设定的积分阈值F0进行比较,当当前行(列)的Fyj(或Fxi)大于F0时,表示该行(或列)的出现灰度偏差,继续判断下一行(列)是否大于F0时,直至出现连续一定数量行(列)的Fyj(或Fxi)大于F0,表示出现灰度偏差区域。进而继续上述判断方法判断出现连续行(列)的Fyj(或Fxi)小于F0,表示灰度偏差区域结束。将全部行和列的积分结果判断完毕后,确定当前帧图像与前一帧图像的矩形灰度偏差区域,也就是需要传递的图像的区域。
具体步骤如下:
步骤S403:判断当前行的积分结果,即Fyj是否大于F0。若是则进入步骤S405,否则进入步骤S404。
步骤S404:将当前行的纵坐标j加1(即移至下一行),且将K1清零,返回步骤S403,直至将图像所包含全部行的积分运算完成。其中,K1表示连续出现灰度偏差的行数。
本步骤中,若当前行的积分结果小于F0,则表示当前帧图像与前一帧图像在该行各像素点的灰度偏差不足以被肉眼识别,由此视为当前帧图像与前一帧图像在此行像素点灰度相同,将当前行的纵坐标j加1,将下一行的积分结果与F0比较,并且将K1清零。
步骤S405:当积分结果大于预先设定的F0时,K1进行加1。
本步骤中,当前行的积分结果大于F0,则表示当前帧图像与前一帧图像在当前行的各像素点灰度偏差可被肉眼识别,将K1进行加1运算。
步骤S406:判断K1是否大于预先设定的个数阈值K,若是则进入步骤408,否则进入步骤407。
举例来说,若设置K=3,则当K1大于K时,表示当前帧图像与前一帧图像已有连续3行出现灰度偏差,已构成灰度偏差区域。
通过设置阈值K,可以提高对灰度偏差区域识别的准确性,避免只要出现一点不同即视为灰度偏差区域。
步骤S407:将当前行的纵坐标j加1,并返回步骤S403,直至将图像所包含所有行积分结果与F0比较结束。
本步骤为K1小于K,表示灰度偏差尚未构成度偏差区域,故将当前行的纵坐标j加1,进行下一行的积分运算并与F0比较。
步骤S408:记录当前行的纵坐标yj1(即行数),将K1值清零。
本步骤K1大于K,表示当前帧图像与前一帧图像出现灰度偏差区域,故记录出现灰度偏差的起始行的纵坐标yj1,并将K1值清零。
步骤S409:判断积分结果是否小于预先设定的F0。若是则进入步骤S411,否则进入步骤S410。
此时由出现灰度偏差的起始行的纵坐标yj1起,继续判断积分结果Fyj中是否有连续行积分结果均小于F0,即判断灰度偏差区域是否结束。
步骤S410:将当前行的纵坐标j加1,并且将K2清零,K2表示连续未出现灰度偏差的行数,并返回步骤S409,直至将图像所包含全部行的积分运算完成。
步骤S411:对于积分结果小于预先设定积分阈值,则将K2加1。
步骤S412:判断K2是否大于预先设定的个数阈值K’,若是,则表示当前灰度偏差区域结束,进入步骤414,否则进入步骤413。其中K’可以与K取值相同。
步骤S413:将当前行的纵坐标j加1,并返回步骤S409,直至将图像所包含全部行的结果与F0比较结束。
步骤S414:记录当前行的纵坐标yj2,将K2值清零。
此时K2大于K’,则表示当前帧图像与前一帧图像在所有行的灰度偏差区域结束,记录灰度偏差区域的终止行的纵坐标yj2,并将K2值清零。
此时yj1、yj2之间的区域就是灰度偏差在纵坐标上的区间。
由上,本发明采用上述方式判断灰度偏差区域,相比较起对各个像素点那样依次判断,处理速度更快。
步骤S50:将步骤S40中计算得出当前帧图像与前一帧图像灰度偏差区域,即由xi1、xi2、yj1和yj2所围成的矩形区域(即屏幕上灰度发生偏差区域)对应的区域图像进行编码。
步骤S60:将步骤S50中所编码的区域图像以无线形式向视频接收端发送,其中该发送的信息包括所述区域图像的位置信息,例如上述xi1、xi2、yj1和yj2信息。
步骤S70:视频接收端接收已编码的区域图像,进行解码后显示。
当接收到所述区域图像数据并解码后,将该图像按照其位置信息整合至所缓存的前一帧图像中,并将该整合后的图像进行缓存,用作与下一帧图像的整合。
在视频发送端以非全屏窗口播放视频文件,只有在除播放视频窗口外的其他区域图像发生变化时(例如用户通过鼠标或键盘输入指令移动了视频播放窗口的位置或调整视频播放窗口的大小,或又激活其他应用或文件的新窗口),才需要进行全屏窗口截屏。反之当一定时间内用户无指令输入时,只需对视频播放的窗口进行截屏。近一步的,将当前帧视频窗口图像与前一帧进行比较,计算灰度偏差区域。
如前文所述,在对全屏窗口截屏时,比较相邻两帧图像所计算得出的灰度偏差区域为视频播放的窗口。而对视频窗口截屏时,比较所计算得出的灰度偏差区域最大即为视频播放窗口(即视频画面完全改变),若视频播放内容为讲座等节目时(通常背景不变而仅为主讲人的动作发生变化),则所计算得出的灰度偏差区域可进一步缩小,由此更加节省带宽占用量以及加快编码速度。
因此,步骤S20之前还包括步骤(未图示):视频发送端监控用户输入指令的时间间隔,依据时间间隔控制进行桌面窗口截屏或视频播放窗口截屏。其中,视频播放窗口的位置的确认,可依据所截相邻连续帧(帧数大于2,较佳的,选择4帧)桌面窗口截屏图像的差分结果进行判断,当多次判断后,发生变化的区域所构成的部分较为确定,即为视频播放窗口所在位置,根据该方法确认出视频播放窗口位置、大小后,即可在后续截屏时,仅对所识别出的视频播放窗口部分进行截屏和上述步骤S40的判断。更优的,在进行视频播放窗口截屏时,每隔一段时间(例如5秒)再次进行桌面窗口截屏,以增加图像传输的准确性(例如视频播放软件的播放进度条在视频画面外,由此视播放进度条为背景图像),及时更新背景图像。
例如用户在浏览视频时,若在预计的时间间隔(例如30秒)内未检测到来自鼠标或键盘的指令,则视频发送端认为用户无指令输入,由此仅对视频播放窗口进行截屏。反之在预计的时间间隔内有指令输入,则进行整窗口截屏。其中视频播放窗口的截屏方法与步骤20相同,不再赘述。
下面对图像快速获取、传输的系统进行描述,如图5所示,包括视频发送端51和视频接收端52。
其中,所述视频发送端51用于发送视频共享请求与视频接收端52建立无线共享连接,并对所播视频进行截图并缓存。将当前帧图像与前一帧图像进行比对计算出各个灰度偏差区域,将两帧图像的各个灰度偏差区域进行编码后以无线形式输出。
视频发送端51包括第一共享模块511、截屏模块512、视频发送端存储模块513、滤波模块514、对比模块515、编码模块516和发送模块517。
第一共享模块511用于发送视频共享请求,依据反馈信息判断是否进行共享连接。
截屏模块512与第一共享模块511连接,用于依据共享触发信息对窗口进行逐帧截屏。
视频发送端存储模块513与截屏模块512连接,用于接收窗口截屏图像并进行缓存。其中,视频发送端存储模块513至多缓存当前帧与前一帧两幅截屏图像,当视频发送端存储模块513接收下一帧窗口图像时,按照缓存时序将较早缓存的前一帧窗口截屏图像删除。
滤波模块514与视频发送端存储模块513连接,用于调取所缓存的窗口截屏图像并进行滤波处理,消除图像噪声。
对比模块515与滤波模块514连接,用于将当前帧图像与前一帧截屏图像进行对比,计算出各个灰度偏差区域。
其中,对比模块515包括:
像素灰度换算单元,用于将图像RGB数值排列矩阵的彩色图换算为灰度图;
差分运算单元,与像素灰度换算单元连接,用于将当前帧图像与前一帧图像进行差分运算,并将差分运算结果合并同一数组;
积分运算单元,与差分运算单元连接,用于对所述数组分别进行X轴Y轴的投影并求其积分;
积分结果对比单元,与积分运算单元连接,用于判断积分结果与预先设定的积分阈值的大小,若积分结果大于积分阈值则表示出现灰度偏差,反之表示未出现灰度偏差;
灰度偏差区域起点判断单元,与积分结果对比单元连接,用于判断连续行(或列)出现灰度偏差的数量与预先设定的个数阈值的大小,若连续行(或列)出现灰度偏差的数量大于个数阈值,表示出现灰度偏差区域,反之表示未出现灰度偏差区域;
灰度偏差区域终点判断单元,与灰度偏差区域起点判断单元连接,用于判断连续行(或列)出现灰度偏差的数量与预先设定的个数阈值的大小,若连续行(或列)出现灰度偏差的数量小于个数阈值,表示灰度偏差区域结束,反之表示灰度偏差区域未结束;
行列坐标累加单元,与积分结果对比单元连接,用于对像行(或列)的坐标进行加1运算。
编码模块516与对比模块515连接,用于将对比模块515计算的各个灰度偏差区域所对应的图像进行编码处理,形成像素数据。
发送模块517与编码模块516连接,用于将所编码的像素数据以无线形式输出。
用户指令监控模块(未图示),用于监控用户通过鼠标或键盘输入指令信号的频率。并将监控结果发送至所述截屏模块512。若用户在预定时间内未进行指令信号输入,则截屏模块512仅对视频播放窗口进行图像截取。
所述视频接收端52用于依据共享标识位响应视频发送端51的视频共享请求,建立无线共享连接后接收已编码的像素数据,进行解码并整合后播出。
视频接收端52包括:第二共享模块521、共享检测模块522、接收模块523、解码模块524、整合模块525和视频接收端存储模块526。
第二共享模块521与第一共享模块511耦合,用于接收视频共享请求,并输出标识位的检测信息。
共享检测模块522与第二共享模块521连接,用于依据标识位的检测信息检测视频接收端52的共享状态(即是否正与其他视频发送端进行视频共享)并生成反馈信息。
所述第二共享模块521还用于接收反馈信息,并将此反馈信息回传至第一共享模块511。
接收模块523与发送模块517耦合,用于接收已编码的像素数据。
解码模块524与接收模块523连接,用于将已编码的像素数据进行解码处理。
整合模块525与解码模块524和后文所述视频接收端存储模块526连接,用于将所解码的灰度偏差区域所对应的图像按照其行列像素点坐标整合至所缓存的前一帧的图像中。
视频接收端存储模块526,与整合模块525连接,将整合模块525所整合的图像进行缓存。
显示模块(未图示),与整合模块525连接,用于显示已整合的视频图像。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种视频图像快速传输的方法,其特征在于,包括步骤:
A、发送端对其屏幕进行图像截屏并缓存;
B、确定出所截屏图像与缓存的上一帧截屏图像像素不同的区域,并发送所述区域的图像;
C、视频接收端接收所述区域图像并与其缓存的图像组合作为所接收的图像进行缓存。
2.根据权利要求1所述的方法,其特征在于,步骤B所述像素不同的确定步骤包括:判断像素与上一帧图像该位置像素属性值偏差超过一定值时确定为像素不同。
3.根据权利要求2所述的方法,其特征在于,步骤B所述区域的确定步骤包括:
分别以行和列为单位,确定出于上一帧图像像素不同的行和列,所述行和列交集所构成的区域为所述不同的区域。
4.根据权利要求3所述的方法,其特征在于:所述确定出与上一帧图像像素不同的行和列的步骤包括:
将所截屏图像与上一帧图像的各个像素进行差分运算得到灰度差值,并将运算结果作为数组存储;
对所述数组分别进行X轴和Y轴的投影并分别计算各列和各行的灰度差值的和;
分别判断各列和各行灰度差值的和大于一阈值的各行和各列为所确定出的行和列。
5.根据权利要求4所述的方法,其特征在于,分别判断各列和各行灰度差值的和大于一阈值后还包括:
判断连续的设定数量的列和行灰度差值的和均大于一阈值的步骤。
6.根据权利要求1所述的方法,其特征在于,还包括:
根据一定时间内、一定数量帧的截屏图像统计出像素不同的区域;
步骤A所述截屏为:对所述统计出的区域进行截屏。
7.根据权利要求6所述的方法,其特征在于,还包括:
判断视频发送端在所述区域截屏之外的屏幕图像的应用被激活时,以全屏图像作为步骤A所述截屏。
8.根据权利要求7所述的方法,其特征在于,所述应用被激活包括:判断接收到鼠标、键盘,或其他应用窗口被激活。
9.根据权利要求2所述的方法,其特征在于,所述属性值包括像素点的色彩属性和颜色深度属性。
10.一种视频图像快速传输的系统,包括视频发送端和视频接收端,其特征在于,
视频发送端包括:
截屏模块,用于对视频发送端的屏幕进行图像截屏;
视频发送端存储模块,用于缓存所述截屏模块依次所截各帧图像;
对比模块,用于将当前所截屏图像与存储模块缓存的上一帧图像进行对比,确定图像像素不同的区域;
发送模块,用于将图像像素不同的区域以无线形式输出。
视频接收端包括:
接收模块,用于接收视频发送端的发送模块所发送的图像像素不同的区域;
整合模块,用于将接收的图像像素不同的区域与所述缓存的图像组合作为所接收的图像;
视频接收端存储模块,用于将整合模块所整合后的图像进行缓存。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210024336.2A CN103248946B (zh) | 2012-02-03 | 2012-02-03 | 一种视频图像快速传输的方法及系统 |
PCT/CN2012/073736 WO2013113191A1 (zh) | 2012-02-03 | 2012-04-10 | 一种视频图像快速传输的方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210024336.2A CN103248946B (zh) | 2012-02-03 | 2012-02-03 | 一种视频图像快速传输的方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103248946A true CN103248946A (zh) | 2013-08-14 |
CN103248946B CN103248946B (zh) | 2018-01-30 |
Family
ID=48904392
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210024336.2A Active CN103248946B (zh) | 2012-02-03 | 2012-02-03 | 一种视频图像快速传输的方法及系统 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN103248946B (zh) |
WO (1) | WO2013113191A1 (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014176949A1 (zh) * | 2013-10-21 | 2014-11-06 | 中兴通讯股份有限公司 | 图像的传输方法及装置 |
CN104618676A (zh) * | 2015-02-04 | 2015-05-13 | 深圳市迈昂科技有限公司 | 一种无线视频传输方法 |
CN106354247A (zh) * | 2015-07-17 | 2017-01-25 | 上海乐相科技有限公司 | 一种头戴式智能眼镜显示控制方法及装置 |
CN106717007A (zh) * | 2014-07-30 | 2017-05-24 | 恩特里克丝有限公司 | 云端流媒体服务的系统、使用静止图像压缩技术进行云端流媒体服务的方法及其设备 |
CN106803863A (zh) * | 2016-12-20 | 2017-06-06 | 深圳市金立通信设备有限公司 | 一种图像共享方法和终端 |
CN107613370A (zh) * | 2017-10-27 | 2018-01-19 | 烟台北方星空自控科技有限公司 | 一种屏幕共享丢帧优化算法 |
CN108153573A (zh) * | 2017-12-26 | 2018-06-12 | 合肥中科云巢科技有限公司 | 云桌面图像更新方法及虚拟机 |
CN109218748A (zh) * | 2017-06-30 | 2019-01-15 | 京东方科技集团股份有限公司 | 视频传输方法、装置及计算机可读存储介质 |
CN109218731A (zh) * | 2017-06-30 | 2019-01-15 | 腾讯科技(深圳)有限公司 | 移动设备的投屏方法、装置及系统 |
CN111245879A (zh) * | 2018-11-29 | 2020-06-05 | 深信服科技股份有限公司 | 一种虚拟桌面的桌面内容传输方法、系统及相关组件 |
CN111625311A (zh) * | 2020-05-18 | 2020-09-04 | Oppo(重庆)智能科技有限公司 | 控制方法、装置、电子设备和存储介质 |
CN114020486A (zh) * | 2021-10-08 | 2022-02-08 | 中国联合网络通信集团有限公司 | 一种数据生成方法、装置、设备及存储介质 |
CN114189753A (zh) * | 2021-11-26 | 2022-03-15 | 安徽创世科技股份有限公司 | 一种视频片选的分享方法、装置 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11057500B2 (en) * | 2017-11-20 | 2021-07-06 | Asg Technologies Group, Inc. | Publication of applications using server-side virtual screen change capture |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030189980A1 (en) * | 2001-07-02 | 2003-10-09 | Moonlight Cordless Ltd. | Method and apparatus for motion estimation between video frames |
WO2007076547A2 (en) * | 2005-12-29 | 2007-07-05 | Webex Communications, Inc. | Methods and apparatuses for dynamically sharing a portion of a display for application based screen sampling |
CN101835043A (zh) * | 2010-03-23 | 2010-09-15 | 熔点网讯(北京)科技有限公司 | 基于块编码的带宽自适应桌面共享方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101291488B (zh) * | 2008-03-24 | 2012-09-05 | 中兴通讯股份有限公司 | 一种在移动终端上截取屏幕的方法 |
CN101820416A (zh) * | 2010-02-24 | 2010-09-01 | 上海引跑信息科技有限公司 | 网络会议系统中高速共享桌面的处理方法 |
CN101808096B (zh) * | 2010-03-22 | 2012-11-07 | 北京大用科技有限责任公司 | 一种大规模异地局域网间屏幕共享及控制的方法 |
-
2012
- 2012-02-03 CN CN201210024336.2A patent/CN103248946B/zh active Active
- 2012-04-10 WO PCT/CN2012/073736 patent/WO2013113191A1/zh active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030189980A1 (en) * | 2001-07-02 | 2003-10-09 | Moonlight Cordless Ltd. | Method and apparatus for motion estimation between video frames |
WO2007076547A2 (en) * | 2005-12-29 | 2007-07-05 | Webex Communications, Inc. | Methods and apparatuses for dynamically sharing a portion of a display for application based screen sampling |
CN101835043A (zh) * | 2010-03-23 | 2010-09-15 | 熔点网讯(北京)科技有限公司 | 基于块编码的带宽自适应桌面共享方法 |
Non-Patent Citations (4)
Title |
---|
左强祥,吴洁: "一种基于分块采集和压缩技术的屏幕共享方案", 《计算机技术与发展》 * |
李芳: "屏幕共享中截屏技术的研究与实现", 《湖南冶金职业技术学院学报》 * |
李鹏: "一种实现局域网内屏幕共享的新方法", 《中国优秀博硕士学位论文数据库(硕士)科技信息辑》 * |
肖任重,申瑞民: "视频会议教学系统中屏幕共享工具的设计与实现", 《计算机仿真》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014176949A1 (zh) * | 2013-10-21 | 2014-11-06 | 中兴通讯股份有限公司 | 图像的传输方法及装置 |
CN106717007A (zh) * | 2014-07-30 | 2017-05-24 | 恩特里克丝有限公司 | 云端流媒体服务的系统、使用静止图像压缩技术进行云端流媒体服务的方法及其设备 |
CN104618676A (zh) * | 2015-02-04 | 2015-05-13 | 深圳市迈昂科技有限公司 | 一种无线视频传输方法 |
CN106354247A (zh) * | 2015-07-17 | 2017-01-25 | 上海乐相科技有限公司 | 一种头戴式智能眼镜显示控制方法及装置 |
CN106803863A (zh) * | 2016-12-20 | 2017-06-06 | 深圳市金立通信设备有限公司 | 一种图像共享方法和终端 |
CN109218731A (zh) * | 2017-06-30 | 2019-01-15 | 腾讯科技(深圳)有限公司 | 移动设备的投屏方法、装置及系统 |
CN109218748A (zh) * | 2017-06-30 | 2019-01-15 | 京东方科技集团股份有限公司 | 视频传输方法、装置及计算机可读存储介质 |
CN109218748B (zh) * | 2017-06-30 | 2020-11-27 | 京东方科技集团股份有限公司 | 视频传输方法、装置及计算机可读存储介质 |
US11412274B2 (en) | 2017-06-30 | 2022-08-09 | Boe Technology Group Co., Ltd. | Video transmission method and apparatus, and computer-readable storage medium thereof |
CN107613370A (zh) * | 2017-10-27 | 2018-01-19 | 烟台北方星空自控科技有限公司 | 一种屏幕共享丢帧优化算法 |
CN108153573A (zh) * | 2017-12-26 | 2018-06-12 | 合肥中科云巢科技有限公司 | 云桌面图像更新方法及虚拟机 |
CN111245879A (zh) * | 2018-11-29 | 2020-06-05 | 深信服科技股份有限公司 | 一种虚拟桌面的桌面内容传输方法、系统及相关组件 |
CN111625311A (zh) * | 2020-05-18 | 2020-09-04 | Oppo(重庆)智能科技有限公司 | 控制方法、装置、电子设备和存储介质 |
CN111625311B (zh) * | 2020-05-18 | 2023-05-26 | Oppo(重庆)智能科技有限公司 | 控制方法、装置、电子设备和存储介质 |
CN114020486A (zh) * | 2021-10-08 | 2022-02-08 | 中国联合网络通信集团有限公司 | 一种数据生成方法、装置、设备及存储介质 |
CN114020486B (zh) * | 2021-10-08 | 2024-06-21 | 中国联合网络通信集团有限公司 | 一种数据生成方法、装置、设备及存储介质 |
CN114189753A (zh) * | 2021-11-26 | 2022-03-15 | 安徽创世科技股份有限公司 | 一种视频片选的分享方法、装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2013113191A1 (zh) | 2013-08-08 |
CN103248946B (zh) | 2018-01-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103248946A (zh) | 一种视频图像快速传输的方法及系统 | |
US10742932B2 (en) | Communication terminal, communication system, moving-image outputting method, and recording medium storing program | |
CN102298917B (zh) | 无线自动检测屏幕联合显示方法及其联合显示设备 | |
AU2013345759B2 (en) | Transmission system and program | |
CN106454407A (zh) | 视频直播方法及装置 | |
CN111813700B (zh) | 监控数据展示方法和装置 | |
CN112333502A (zh) | 智能电视显示方法、智能电视及计算机可读存储介质 | |
CN111741353A (zh) | 设备协同工作的方法、终端设备及可读存储介质 | |
CN108260011B (zh) | 在显示设备上实现写画的方法和系统 | |
CN107483729B (zh) | 一种多画面显示选择截取画面的方法及系统 | |
US20170185269A1 (en) | Display management solution | |
US20150186095A1 (en) | Inter-terminal image sharing method, terminal device, and communications system | |
CN107318021B (zh) | 一种远程显示的数据处理方法及系统 | |
CN104571982B (zh) | 超高分辨率显示系统及显示控制方法 | |
CN113986168A (zh) | 一种图像显示方法、装置、设备及可读存储介质 | |
CN107004018B (zh) | 数据处理方法及装置 | |
EP3110143A1 (en) | Image transmission device and image transmission system | |
CN107318020B (zh) | 远程显示的数据处理方法及系统 | |
CN112346684A (zh) | 数据的显示方法、装置、电视和计算机可读存储介质 | |
WO2024113958A1 (zh) | 显示设备及用于显示设备的处理方法 | |
WO2024113958A9 (zh) | 显示设备及用于显示设备的处理方法 | |
CN217985239U (zh) | 一种智能监控系统 | |
CN114302206B (zh) | 一种内容显示方法、显示设备及服务器 | |
CN115278278B (zh) | 一种页面显示方法、装置、电子设备及存储介质 | |
CN116801062A (zh) | 显示设备、服务器及信息处理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |