CN107454415A - 图像数据的处理方法、装置和系统 - Google Patents

图像数据的处理方法、装置和系统 Download PDF

Info

Publication number
CN107454415A
CN107454415A CN201710722869.0A CN201710722869A CN107454415A CN 107454415 A CN107454415 A CN 107454415A CN 201710722869 A CN201710722869 A CN 201710722869A CN 107454415 A CN107454415 A CN 107454415A
Authority
CN
China
Prior art keywords
view data
coding
mobile terminal
server
stored
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710722869.0A
Other languages
English (en)
Inventor
向亚运
苏睿
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xian Wanxiang Electronics Technology Co Ltd
Original Assignee
Xian Wanxiang Electronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xian Wanxiang Electronics Technology Co Ltd filed Critical Xian Wanxiang Electronics Technology Co Ltd
Priority to CN201710722869.0A priority Critical patent/CN107454415A/zh
Publication of CN107454415A publication Critical patent/CN107454415A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/112Selection of coding mode or of prediction mode according to a given display mode, e.g. for interlaced or progressive display mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种图像数据的处理方法、装置和系统。其中,该方法包括:服务器接收移动终端发送的点击事件,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;服务器判断当前帧图像是否为预设图像;如果当前帧图像为预设图像,则服务器判断移动终端是否已经存储有点击事件对应的图像数据;如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据;服务器将编码后的图像数据发送至移动终端,其中,编码后的图像数据由移动终端进行存储。本发明解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。

Description

图像数据的处理方法、装置和系统
技术领域
本发明涉及图像数据处理领域,具体而言,涉及一种图像数据的处理方法、装置和系统。
背景技术
随着移动无线通信技术的飞速发展,从之前的2G移动通讯网络,发展到后来的3G移动通信网络,至今4G移动通信网络已经普及,甚至某些区域已经在部署并开始搭建5G移动通信网络。目前,市场上已经出现越来越成熟的瘦终端甚至零终端技术和产品,零终端意味着数据的处理将在服务器端运行,而客户端将只是和服务器端进行图像界面的传输。在这种情况下,图像和视频编解码将发挥越来越大的作用,目前最流行的编码技术都是基于H.264/AVC的视频编码标准,使用运动补偿方法来消除空间冗余,使用熵编码技术来消除统计冗余,以及使用帧内预测技术消除图像的空间冗余。
但是,针对移动零终端中经常显示的多TAB页类图像数据,由于多TAB页类图像数据自身的特性,不同应用程序APP之间画面变化大,同一个APP内变化小,利用H.264对所有多TAB页类图像数据进行编码压缩,存在大量重复编码,导致编码效率低。
针对现有技术中对于多TAB页类图像数据进行编码效率低的问题,目前尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种图像数据的处理方法、装置和系统,以至少解决现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
根据本发明实施例的一个方面,提供了一种图像数据的处理方法,包括:服务器接收移动终端发送的点击事件,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;服务器判断当前帧图像是否为预设图像;如果当前帧图像为预设图像,则服务器判断移动终端是否已经存储有点击事件对应的图像数据;如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据;服务器将编码后的图像数据发送至移动终端,其中,编码后的图像数据由移动终端进行存储。
进一步地,服务器判断当前帧图像是否为预设图像包括:服务器获取当前帧图像中的预设像素区域;服务器获取预设像素区域中的多个高梯度像素;服务器对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图;服务器判断第一频率直方图中的峰值的数量是否处于预设数量范围内;如果第一频率直方图中的峰值的数量处于预设数量范围内,则服务器确定当前帧图像为预设图像。
进一步地,服务器获取当前帧图像中的预设像素区域包括:服务器获取当前帧图像的图像分辨率;服务器根据图像分辨率,得到预设像素区域。
进一步地,服务器获取预设像素区域中的多个高梯度像素包括:服务器获取当前帧图像的预设分量数据;服务器计算预设像素区域中每个像素的预设分量数据与相邻的其他像素的预设分量数据的差值,得到多个差值;服务器判断每个差值是否大于或者等于预设差值;如果任意一个差值大于或者等于预设差值,则服务器确定任意一个差值对应的像素为高梯度像素。
进一步地,相邻的其他像素为与每个像素相邻的前一个像素和与每个像素相邻的上一个像素。
进一步地,在服务器确定当前帧图像为预设图像之后,上述方法还包括:服务器获取第一频率直方图中的峰值对应的区间,得到多个第一区间;服务器对每列像素中的高梯度像素的数量进行统计,得到第二频率直方图;服务器获取第二频率直方图中的峰值对应的区间,得到至少一个第二区间;服务器根据多个第一区间和至少一个第二区间,生成多个预设范围。
进一步地,在所服务器根据多个第一区间和至少一个第二区间,生成多个预设范围之后,上述方法还包括:根据多个预设范围的数量,为每个预设范围设置一个对应的标识信息。
进一步地,服务器判断移动终端是否已经存储有点击事件对应的图像数据包括:服务器获取点击事件的点击区域;服务器判断点击区域是否处于多个预设范围内;如果点击区域处于任意一个预设范围内,则服务器判断移动终端是否已经存储有任意一个预设范围对应的图像数据;如果移动终端已经存储有任意一个预设范围对应的图像数据,则服务器确定移动终端已经存储有点击事件对应的图像数据;如果移动终端未存储任意一个预设范围对应的图像数据,则服务器确定移动终端未存储点击事件对应的图像数据。
进一步地,服务器将编码后的图像数据发送至移动终端包括:服务器获取任意一个预设范围对应的标识信息,作为编码后的图像数据的标识信息;服务器将编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围发送至移动终端。
进一步地,在服务器接收移动终端发送的点击事件之后,方法还包括:服务器获取点击事件对应的应用程序的标识信息;服务器根据应用程序的标识信息,判断应用程序是否发生变换;如果应用程序发生变化,则服务器发送提示信息至移动终端,其中,提示信息用于提示当前应用程序发生变化。
根据本发明实施例的另一方面,还提供了一种图像数据的处理方法,包括:移动终端发送点击事件至服务器,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;移动终端判断本地是否已经存储有与点击事件对应的编码后的图像数据;如果本地已经存储有与点击事件对应的编码后的图像数据,则移动终端对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示;如果本地未存储与点击事件对应的编码后的图像数据,则移动终端对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
进一步地,移动终端判断是否已经存储有与点击事件对应的编码后的图像数据包括:移动终端获取点击事件的点击区域;移动终端判断点击区域是否处于多个预设范围内;如果点击区域处于任意一个预设范围内,则移动终端判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据;如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则移动终端确定已经存储有与点击事件对应的编码后的图像数据;如果本地未存储任意一个预设范围对应的编码后的图像数据,则移动终端确定未存储与点击事件对应的编码后的图像数据。
进一步地,在移动终端判断点击区域是否处于多个预设范围内之后,上述方法还包括:如果点击区域处于任意一个预设范围内,则移动终端将当前帧图像对应的图像数据存储至当前帧图像对应的存储区域。
进一步地,在移动终端对服务器返回的编码后的图像数据进行存储之前,上述方法还包括:移动终端接收服务器返回的编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围。
进一步地,移动终端对服务器返回的编码后的图像数据进行存储包括:移动终端根据多个预设范围,生成多个存储空间;移动终端根据编码后的图像数据对应的标识信息,得到编码后的图像数据对应的存储空间;移动终端将编码后的图像数据和编码后的图像数据对应的标识信息存储至编码后的图像数据对应的存储空间。
进一步地,在移动终端根据多个预设范围,生成多个存储空间之前,上述方法还包括:移动终端判断是否接收到提示信息,其中,提示信息用于提示当前应用程序发生变化;如果未接收到提示信息,则移动终端根据多个预设范围,生成多个存储空间。
根据本发明实施例的另一方面,还提供了一种图像数据的处理装置,包括:接收模块,用于接收移动终端发送的点击事件,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;第一判断模块,用于判断当前帧图像是否为预设图像;第二判断模块,用于如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据;编码模块,用于如果移动终端未存储图像数据,则对图像数据进行编码,得到编码后的图像数据;发送模块,用于将编码后的图像数据发送至移动终端,其中,编码后的图像数据由移动终端进行存储。
进一步地,第一判断模块包括:第一获取子模块,用于获取当前帧图像中的预设像素区域;第二获取子模块,用于对预设像素区域中的多个高梯度像素;处理子模块,用于对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图;判断子模块,用于判断第一频率直方图中的峰值的数量是否处于预设数量范围内;确定子模块,用于如果第一频率直方图中的峰值的数量处于预设数量范围内,则确定当前帧图像为预设图像。
根据本发明实施例的另一方面,还提供了一种图像数据的处理装置,包括:发送模块,用于发送点击事件至服务器,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;判断模块,用于判断本地是否已经存储有与点击事件对应的编码后的图像数据;第一处理模块,用于如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示;第二处理模块,用于如果本地未存储与点击事件对应的编码后的图像数据,则对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
进一步地,判断模块包括:获取子模块,用于获取点击事件的点击区域;第一判断子模块,用于判断点击区域是否处于多个预设范围内;第二判断子模块,用于如果点击区域处于任意一个预设范围内,则判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据;第一确定子模块,用于如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则确定已经存储与点击事件对应的编码后的图像数据;第二确定子模块,用于如果本地未存储任意一个预设范围对应的编码后的图像数据,则确定未存储与点击事件对应的编码后的图像数据。
根据本发明实施例的另一方面,还提供了一种图像数据的处理系统,包括:移动终端,用于发送点击事件,并判断本地是否已经存储有与点击事件对应的编码后的图像数据,如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;服务器,与移动终端具有通信关系,用于接收点击事件,判断当前帧图像是否为预设图像,如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据,如果移动终端未存储图像数据,则对图像数据进行编码,得到编码后的图像数据,并发送编码后的图像数据;移动终端还用于如果本地未存储与点击事件对应的编码后的图像数据,则对接收到的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
进一步地,服务器还用于获取当前帧图像中的预设像素区域,获取预设像素区域中的多个高梯度像素,对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图,并判断第一频率直方图中的峰值的数量是否处于预设数量范围内,如果第一频率直方图中的峰值的数量处于预设数量范围内,则确定当前帧图像为预设图像。
进一步地,移动终端还用于获取点击事件的点击区域,并判断点击区域是否处于多个预设范围内,如果点击区域处于任意一个预设范围内,则判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据,如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则确定已经存储与点击事件对应的编码后的图像数据,如果本地未存储任意一个预设范围对应的编码后的图像数据,则确定本地未存储与点击事件对应的编码后的图像数据。
根据本发明实施例的另一方面,还提供了一种存储介质,存储介质包括存储的程序,其中,在程序运行时控制存储介质所在设备执行上述实施例中的图像数据的处理方法。
根据本发明实施例的另一方面,还提供了一种处理器,处理器用于运行程序,其中,程序运行时执行上述实施例中的图像数据的处理方法。
在本发明实施例中,由于当前帧图像为预设图像,即对多TAB页类的图像进行操作时,可以判断移动终端是否已经存储点击事件对应的图像数据,如果未存储,则服务器对图像数据进行编码,如果已存储,则服务器不进行存储,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1是根据本发明实施例的一种图像数据的处理方法的流程图;
图2是根据本发明实施例的一种可选的TAB页面切换过程的示意图;
图3是根据本发明实施例的另一种图像数据的处理方法的流程图;
图4是根据本发明实施例的一种图像数据的处理装置的示意图;
图5是根据本发明实施例的另一种图像数据的处理装置的示意图;
图6是根据本发明实施例的一种图像数据的处理系统的示意图;以及
图7是根据本发明实施例的一种可选的图像数据的处理系统的示意图。
具体实施方式
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
首先,对本发明实施例中出现的技术术语进行解释如下:
TAB页:即标签页,在移动端应用中,很多应用包含了多个二级页面,每个二级页面对应底部的一个点击按钮,这些二级页面就称作移动端TAB页。
移动零终端:包括屏幕、外接存储接口、按键、传感器、接收侧屏幕会话管理模块、电池电源管理模块、移动通信模块等,主要完成接收来自远端服务器的屏幕显示图像,发送本地传感器、按键和外接存储会话信息至远端服务器。
H.264:又称为MPEG-4第10部分,高级视频编码(MPEG-4Part 10,Advanced VideoCoding,缩写为MPEG-4AVC)是一种面向块的基于运动补偿的视频编码标准。到2014年,它已经成为高精度视频录制、压缩和发布的最常用格式之一
实施例1
根据本发明实施例,提供了一种图像数据的处理方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图1是根据本发明实施例的一种图像数据的处理方法的流程图,如图1所示,该方法包括如下步骤:
步骤S100,服务器接收移动终端发送的点击事件,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件。
具体地,上述的移动终端可以是移动零终端,上述的服务器可以是与移动终端连接的远程服务器,移动零终端接收远程服务器发送的屏幕显示图像,并进行显示,用户在移动零终端上点击按钮、点击按键等都会生成点击事件,移动零终端将接收到的点击事件发送给远程服务器,由远程服务器进行响应,并返回对应的显示图像,由移动零终端进行显示。
步骤S102,服务器判断当前帧图像是否为预设图像。
具体地,上述的预设图像可以是多TAB页类的图像。多TAB页类的图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。这种多TAB页类的图像最大特点是在操作当前TAB页时,其他的页面往往不会有太大,因此在切换时,没必要把整个图像重新压缩编码一次。
步骤S104,如果当前帧图像为预设图像,则服务器判断移动终端是否已经存储有点击事件对应的图像数据。
具体地,上述的图像数据可以是点击事件对应的TAB页的图像数据。
步骤S106,如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据。
步骤S108,服务器将编码后的图像数据发送至移动终端,其中,编码后的图像数据由移动终端进行存储。
在一种可选的方案中,由于多TAB页类的图像变化不大,在移动零终端发送点击事件至运程服务器之后,远程服务器可以对移动零终端当前显示的当前帧图像进行识别,判断是否为对多TAB页类的图像进行操作,即判断当前帧图像是否为预设图像,如果是,则确定是对多TAB页类的图像进行操作,在用户第一次点击一个按钮时,由于移动零终端初始并未保存任何数据,远程服务器可以将该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储,当用户再次点击一个按钮时,远程服务器首先判断移动零终端是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接解码显示,远程服务器无需对点击事件进行响应;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,远程服务器可以对该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储。进一步地,移动零终端可以对存储的编码后的图像数据进行解码,并显示解码后的图像数据。
例如,以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当用户点击移动零终端TAB1页面上的按钮B2之后,移动零终端返回相应的点击事件至远程服务器,远程服务器首先确定用户操作当前TAB1页面,进一步判断用户是否第一次点击按钮B2,也即,判断移动零终端中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,远程服务器确定并未对TAB2页面的数据进行编码,则可以对TAB2页面的数据进行编码(例如,利用H2.64对TAB2页面的数据进行编码),得到编码后的数据,并将编码后的数据传输至移动零终端,移动零终端对编码后的数据进行存储,并在解码得到TAB2页面的数据之后,进行显示;如果用户不是第一次点击按钮B2,则移动零终端直接读取编码后的数据,并在解码得到TAB2页面的数据之后,进行显示。
根据本发明上述实施例,服务器接收移动终端发送的点击事件,判断当前帧图像是否为预设图像,如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据,如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据,将编码后的图像数据发送至移动终端,从而实现对预设图像进行图像压缩的目的。容易注意到的是,由于当前帧图像为预设图像,即对多TAB页类的图像进行操作时,可以判断移动终端是否已经存储点击事件对应的图像数据,如果未存储,则服务器对图像数据进行编码,如果已存储,则服务器不进行存储,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
可选地,在本发明上述实施例中,步骤S102,服务器判断当前帧图像是否为预设图像包括:
步骤S1020,服务器获取当前帧图像中的预设像素区域。
具体地,上述的预设像素区域可以是当前帧图像中按钮所在区域,在移动零终端系统中,如图2所示,按钮常设置在TAB页底部,为了判断移动零终端当前显示的当前帧图像是否为TAB页,需要判断当前帧图像的底部是否包含多个按钮。
步骤S1022,服务器获取预设像素区域中的多个高梯度像素。
具体地,上述的高梯度像素为预设像素区域中与周围其他像素值差值较大的像素,对于多TAB页类图像,图像中背景颜色与按钮颜色差异较大,通过比较相邻像素的像素值可以确定属于按钮的像素,即高梯度像素。
步骤S1024,服务器对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图。
步骤S1026,服务器判断第一频率直方图中的峰值的数量是否处于预设数量范围内。
具体地,根据移动零终端的特点可知,多TAB页类图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。在本发明上述实施例中,以预设数量范围为3-6为例,进行说明。
步骤S1028,如果第一频率直方图中的峰值的数量处于预设数量范围内,则服务器确定当前帧图像为预设图像。
在一种可选的方案中,远程服务器在接收到移动零终端发送的点击事件之后,首先对移动零终端当前显示的当前帧图像进行判断,获取当前帧图像中的预设像素区域,进一步获取预设像素区域中多个高梯度像素,统计每一行像素中高梯度像素的数量,并记录在第一频率直方图中,计算第一频率直方图的峰值数量,如果数量在3-6之间,则每个峰值都可以作为一个按钮,进一步确定当前帧图像为TAB页图像。
例如,以分辨率为1080*1920的当前帧图像为例进行详细说明,可以获取当前帧图像中从底部往上的192像素高度,将1080*192的范围作为预设像素区域,在从底部往上1080*192的区域中,将每个像素与其他像素的像素值进行比较,确定所有高梯度像素,统计每一行像素中高梯度像素的数量,并记录到第一频率直方图中,计算按行统计的第一频率直方图中峰值的数量,如果数量在3-6之间,则每个峰值可以作为一个按钮,确定当前帧图像为TAB页图像。
可选地,在本发明上述实施例中,步骤S1020,服务器获取当前帧图像中的预设像素区域包括:
步骤S10202,服务器获取当前帧图像的图像分辨率。
步骤S10204,服务器根据图像分辨率,得到预设像素区域。
在一种可选的方案中,远程服务器可以获取移动零终端当前显示的当前帧图像的图像分辨率Width*Height,计算从底部往上Height/10的像素高度,将Width*Height/10的区域作为预设像素区域,在本发明实施例中,以分辨率为1080*1920为例,将从底部往上的1080*192的区域作为预设像素区域。
可选地,在本发明上述实施例中,步骤S1022,服务器获取预设像素区域中的多个高梯度像素包括:
步骤S10222,服务器获取当前帧图像的预设分量数据。
具体地,上述的预设分量数据可以是Y分量数据。
步骤S10224,服务器计算预设像素区域中每个像素的预设分量数据与相邻的其他像素的预设分量数据的差值,得到多个差值。
可选地,在本发明上述实施例中,相邻的其他像素为与每个像素相邻的前一个像素和与每个像素相邻的上一个像素。
具体地,为了降低高梯度像素的计算复杂度,避免重复计算造成浪费,每个像素可以仅与左边相邻的像素和上边相邻的像素进行比较。
步骤S10226,服务器判断每个差值是否大于或者等于预设差值。
具体地,上述的预设差值可以是32,也可以根据实际使用中按钮与背景的差值进行设定。
步骤S10228,如果任意一个差值大于或者等于预设差值,则服务器确定任意一个差值对应的像素为高梯度像素。
在一种可选的方案中,远程服务器可以获取当前帧图像中每个像素的Y分量数据,将预设像素区域内的每个像素的Y分量数据与左边和上边的像素的Y分量数据作差,如果每个像素的Y分量数据与左边的像素的Y分量数据的差值大于预设差值,和/或每个像素的Y分量数据与上边的像素的Y分量数据的差值大于预设差值,则确定该像素为高梯度像素。
可选地,在本发明上述实施例中,在步骤S102,服务器确定当前帧图像为预设图像之后,该方法还包括:
步骤S110,服务器获取第一频率直方图中的峰值对应的区间,得到多个第一区间。
在一种可选的方案中,如果按行统计的第一频率直方图中的峰值的数量在3-6之间,则可以记录每个峰值对应的行区间[αii],得到多个第一区间。
步骤S112,服务器对每列像素中的高梯度像素的数量进行统计,得到第二频率直方图。
步骤S114,服务器获取第二频率直方图中的峰值对应的区间,得到至少一个第二区间。
步骤S116,服务器根据多个第一区间和至少一个第二区间,生成多个预设范围。
在一种可选的方案中,如果按行统计的第一频率直方图中的峰值的数量在3-6之间,则可以统计每一列像素中高梯度像素的数量,并记录到第二频率直方图中,获取在按列统计的第二频率直方图中记录每个峰值对应的列区间[γii],得到至少一个区间,将每个行区间和每个列区间进行组合,可以得到多个预设范围[αii]*[γii]。
可选地,在本发明上述实施例中,在步骤S116,所服务器根据多个第一区间和至少一个第二区间,生成多个预设范围之后,该方法还包括:
步骤S118,根据多个预设范围的数量,为每个预设范围设置一个对应的标识信息。
具体地,上述的标识信息可以是为每个预设范围,即每个按钮设置的编号,通过为每个按钮进行编号,实现为每个按钮对应的TAB页图像编号。
在一种可选的方案中,可以为按钮编号,按钮的总数量为多个预设范围的数量m,从左至右编号为:0,1,…,m-1。
可选地,在本发明上述实施例中,步骤S104,服务器判断移动终端是否已经存储有点击事件对应的图像数据包括:
步骤S1040,服务器获取点击事件的点击区域。
步骤S1042,服务器判断点击区域是否处于多个预设范围内。
步骤S1044,如果点击区域处于任意一个预设范围内,则服务器判断移动终端是否已经存储有任意一个预设范围对应的图像数据。
步骤S1046,如果移动终端已经存储有任意一个预设范围对应的图像数据,则服务器确定移动终端已经存储有点击事件对应的图像数据。
步骤S1048,如果移动终端未存储任意一个预设范围对应的图像数据,则服务器确定移动终端未存储点击事件对应的图像数据。
在一种可选的方案中,由于用户在当前帧图像上进行点击,不一定点击按钮,即不一定需要切换TAB页,为了实现多TAB页类图像的压缩编码,远程服务器在接收到点击事件之后,可以在判断当前帧图像为TAB页图像之后,可以获取点击事件的点击区域,判断点击区域是否在[αii]*[γii]内,如果是,则确定用户点击按钮,进一步判断移动零终端是否已经存储有该按钮对应的图像数据,如果是,则远程服务器无需对点击事件进行响应;如果否,则对该按钮对应的图像数据进行编码,并将编码后的图像数据发送给移动零终端,由移动零终端进行存储、解码和显示。
可选地,在本发明上述实施例中,步骤S108,服务器将编码后的图像数据发送至移动终端包括:
步骤S1082,服务器获取任意一个预设范围对应的标识信息,作为编码后的图像数据的标识信息。
步骤S1084,服务器将编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围发送至移动终端。
在一种可选的方案中,远程服务器在确定用户点击按钮之后,可以获取该按钮的编号,即该预设范围的编号,也即获取到该按钮对应的图像数据的编号,远程服务器可以将编码后的TAB页图像、编号以及多个预设范围发送给移动零终端进行存储。
例如,仍以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当远程服务器确定用户点击TAB1页面上的按钮B2之后,可以对按钮B2对应的TAB页图像进行编码,并将编码后的TAB页图像,TAB页编号2和多个按钮的位置信息发送给移动零终端进行存储。
可选地,在本发明上述实施例中,在步骤S102,服务器接收移动终端发送的点击事件之后,该方法还包括:
步骤S120,服务器获取点击事件对应的应用程序的标识信息。
具体地,上述的应用程序的标识信息可以是应用程序APP的名称。
步骤S122,服务器根据应用程序的标识信息,判断应用程序是否发生变换。
步骤S124,如果应用程序发生变化,则服务器发送提示信息至移动终端,其中,提示信息用于提示当前应用程序发生变化。
在一种可选的方案中,远程服务器可以对当前应用程序APP进行监听,获取当前APP的名称,根据当前APP的名称判断APP是否发生了变化,如果确定APP发生了变化,则需要重新开始上述步骤,并生成APP发生改变的提示信息,将该提示信息发送给移动零终端。
实施例2
根据本发明实施例,提供了一种图像数据的处理方法的实施例,需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
图3是根据本发明实施例的另一种图像数据的处理方法的流程图,如图3所示,该方法包括如下步骤:
步骤S302,移动终端发送点击事件至服务器,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件。
具体地,上述的移动终端可以是移动零终端,上述的服务器可以是与移动终端连接的远程服务器,移动零终端接收远程服务器发送的屏幕显示图像,并进行显示,用户在移动零终端上点击按钮、点击按键等都会生成点击事件,移动零终端将接收到的点击事件发送给远程服务器,由远程服务器进行响应,并返回对应的显示图像,由移动零终端进行显示。
步骤S304,移动终端判断本地是否已经存储有与点击事件对应的编码后的图像数据。
具体地,上述的图像数据可以是点击事件对应的TAB页的图像数据。
步骤S306,如果本地已经存储有与点击事件对应的编码后的图像数据,则移动终端对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
步骤S308,如果本地未存储与点击事件对应的编码后的图像数据,则移动终端对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
在一种可选的方案中,由于多TAB页类的图像变化不大,在移动零终端发送点击事件至运程服务器之后,远程服务器可以对移动零终端当前显示的当前帧图像进行识别,判断是否为对多TAB页类的图像进行操作,即判断当前帧图像是否为预设图像,如果是,则确定是对多TAB页类的图像进行操作,在用户第一次点击一个按钮时,由于移动零终端初始并未保存任何数据,移动零终端确定解码缓冲区并未存储编码后的图像数据,可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,移动零终端将编码后的图像数据进行存储,以便后续直接解码并显示,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页;当用户再次点击一个按钮时,移动零终端首先判断解码缓冲区是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接对编码后的图像数据进行解码,并显示解码后的TAB页,无需等待远程服务器发送编码后的图像数据;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,移动零终端可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,移动零终端将编码后的图像数据进行存储,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页。
例如,以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当用户点击移动零终端TAB1页面上的按钮B2之后,移动零终端返回相应的点击事件至远程服务器,同时移动零终端判断用户是否第一次点击按钮B2,也即,判断解码缓冲区中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,移动零终端等待接收远程服务器发送的编码后的数据,远程服务器确定并未对TAB2页面的数据进行编码,则可以对TAB2页面的数据进行编码(例如,利用H2.64对TAB2页面的数据进行编码),得到编码后的数据,移动零终端在接收到编码后的数据之后,将编码后的数据存储至解码缓冲区,并将编码后的数据进行解码,显示解码后的TAB2页面;如果用户不是第一次点击按钮B2,则移动零终端从解码缓冲区中直接读取编码后的数据,将编码后的数据进行解码,显示解码后的TAB2页面。
根据本发明上述实施例,移动终端发送点击事件至服务器,判断本地是否已经存储有与点击事件对应的编码后的图像数据,如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,如果本地未存储与点击事件对应的编码后的图像数据,则对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,从而实现对预设图像进行图像压缩的目的。容易注意到的是,由于移动终端可以判断本地是否已经存储点击事件对应的图像数据,如果未存储,则等待接收服务器发送的编码后的图像数据,并进行存储、解码和显示,如果已存储,则对存储的编码后的图像数据进行解码和显示,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
可选地,在本发明上述实施例中,步骤S304,移动终端判断是否已经存储有与点击事件对应的编码后的图像数据包括:
步骤S3040,移动终端获取点击事件的点击区域。
步骤S3042,移动终端判断点击区域是否处于多个预设范围内。
具体地,上述的多个预设范围可以是远程服务器发送的当前帧图像中包含的多个按钮对应的多个预设范围[αii]*[γii]。
步骤S3044,如果点击区域处于任意一个预设范围内,则移动终端判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据。
步骤S3046,如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则移动终端确定已经存储有与点击事件对应的编码后的图像数据。
步骤S3048,如果本地未存储任意一个预设范围对应的编码后的图像数据,则移动终端确定未存储与点击事件对应的编码后的图像数据。
在一种可选的方案中,由于用户在当前帧图像上进行点击,不一定点击按钮,即不一定需要切换TAB页,为了实现多TAB页类图像的压缩编码,移动零终端在接收到点击事件之后,可以获取点击事件的点击区域,判断点击区域是否在当前帧图像中包含的多个预设范围[αii]*[γii]内,如果是,则确定用户点击按钮,进一步判断解码缓冲区是否已经存储有该按钮对应的图像数据,如果是,则可以直接从解码缓冲区中读取编码后的图像数据,并在进行解码之后进行显示;如果否,则接收远程服务器发送的对该按钮对应的图像数据进行编码得到的编码后的图像数据,在接收到编码后的图像数据之后,对编码后的图像数据进行存储、解码和显示。
可选地,在本发明上述实施例中,步骤S308,移动终端判断点击区域是否处于多个预设范围内之后,该方法还包括:
步骤S310,如果点击区域处于任意一个预设范围内,则移动终端将当前帧图像对应的图像数据存储至当前帧图像对应的存储区域。
在一种可选的方案中,由于在同一个TAB页面中,移动零终端仅接收远程服务器发送的编码后的图像数据,并进行显示,但是并不对同一个TAB页面中的多帧图像进行存储,在移动零终端确定用户点击按钮,即确定需要离开当前TAB页之后,为了方便用户下一次访问当前TAB页面时,移动零终端可以将服务器发来的最新的该TAB页,即当前帧图像对应的编码后的图像数据进行存储,以保证当前TAB页的实时性。
例如,仍以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,在移动零终端确定用户点击TAB1页面上的按钮B2之后,可以将TAB1页面对应的编码后的数据存储至TAB1页面对应的存储区域。
可选地,在本发明上述实施例中,在步骤S308,移动终端对服务器返回的编码后的图像数据进行存储之前,该方法还包括:
步骤S312,移动终端接收服务器返回的编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围。
在一种可选的方案中,如果解码缓冲区并未存储编码后的图像数据,则可以等待接收远程服务器发送的编码后的图像数据,该编码后的图像数据对应的编号,即用户点击的按钮的编号以及当前TAB页面上所有按钮的位置信息。
例如,仍以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,在移动零终端确定用户点击TAB1页面上的按钮B2之后,如果确定解码缓冲区并未存储按钮B2对应的TAB2页面的编码后的数据,则接收远程服务器发送的TAB2页面的编码后的数据,TAB2页面的编号2,以及按钮B1、按钮B2、按钮B3和按钮B4的位置信息。
可选地,在本发明上述实施例中,步骤S308,移动终端对服务器返回的编码后的图像数据进行存储包括:
步骤S3082,移动终端根据多个预设范围,生成多个存储空间。
步骤S3084,移动终端根据编码后的图像数据对应的标识信息,得到编码后的图像数据对应的存储空间。
步骤S3086,移动终端将编码后的图像数据和编码后的图像数据对应的标识信息存储至编码后的图像数据对应的存储空间。
在一种可选的方案中,移动零终端在接收到远程服务器发送的编码后的图像数据,该编码后的图像数据对应的编号,即用户点击的按钮的编号以及当前TAB页面上所有按钮的位置信息之后,可以根据当前TAB页面上所有按钮的数量和位置信息,在解码缓冲区开辟多个存储空间,对应存储每个按钮对应的TAB页面的图像数据,可以根据按钮的编号确定编码后的图像数据需要进行存储的存储空间,并将编码后的图像数据和编号存储至该存储空间中。
例如,仍以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,在移动零终端接收到远程服务器发送的TAB2页面的编码后的数据,TAB2页面的编号2,以及按钮B1、按钮B2、按钮B3和按钮B4的位置信息之后,移动零终端可以在解码缓冲区开辟四个存储空间,存储空间1用于存储按钮B1对应的图像数据,存储空间2用于存储按钮B2对应的图像数据,存储空间3用于存储按钮B3对应的图像数据,存储空间4用于存储按钮B4对应的图像数据,由于接收到的TAB2页面的编号为2,则可以将TAB2页面的编码后的数据和编号2存储至存储空间2中。
可选地,在本发明上述实施例中,在步骤S3082,移动终端根据多个预设范围,生成多个存储空间之前,该方法还包括:
步骤S314,移动终端判断是否接收到提示信息,其中,提示信息用于提示当前应用程序发生变化。
步骤S316,如果未接收到提示信息,则移动终端根据多个预设范围,生成多个存储空间。
在一种可选的方案中,远程服务器可以对当前应用程序APP进行监听,并在确定APP发生变化之后,发送APP发生改变的提示信息至移动零终端,如果移动零终端并未接收到APP发生改变的提示信息,则确定APP未发生变化,在接收到远程服务器发送的编码后的图像数据,该编码后的图像数据对应的编号,即用户点击的按钮的编号以及当前TAB页面上所有按钮的位置信息之后,可以根据当前TAB页面上所有按钮的数量和位置信息,在解码缓冲区开辟多个存储空间。
实施例3
根据本发明实施例,提供了一种图像数据的处理装置的实施例。
图4是根据本发明实施例的一种图像数据的处理装置的示意图,如图4所示,该装置包括:
接收模块41,用于接收移动终端发送的点击事件,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件。
具体地,上述的移动终端可以是移动零终端,上述的服务器可以是与移动终端连接的远程服务器,移动零终端接收远程服务器发送的屏幕显示图像,并进行显示,用户在移动零终端上点击按钮、点击按键等都会生成点击事件,移动零终端将接收到的点击事件发送给远程服务器,由远程服务器进行响应,并返回对应的显示图像,由移动零终端进行显示。
第一判断模块43,用于判断当前帧图像是否为预设图像。
具体地,上述的预设图像可以是多TAB页类的图像。多TAB页类的图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。这种多TAB页类的图像最大特点是在操作当前TAB页时,其他的页面往往不会有太大,因此在切换时,没必要把整个图像重新压缩编码一次。
第二判断模块45,用于如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据。
具体地,上述的图像数据可以是点击事件对应的TAB页的图像数据。
编码模块47,用于如果移动终端未存储图像数据,则对图像数据进行编码,得到编码后的图像数据。
发送模块49,用于将编码后的图像数据发送至移动终端,其中,编码后的图像数据由移动终端进行存储。
在一种可选的方案中,由于多TAB页类的图像变化不大,在移动零终端发送点击事件至运程服务器之后,远程服务器可以对移动零终端当前显示的当前帧图像进行识别,判断是否为对多TAB页类的图像进行操作,即判断当前帧图像是否为预设图像,如果是,则确定是对多TAB页类的图像进行操作,在用户第一次点击一个按钮时,由于移动零终端初始并未保存任何数据,远程服务器可以将该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储,当用户再次点击一个按钮时,远程服务器首先判断移动零终端是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接解码显示,远程服务器无需对点击事件进行响应;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,远程服务器可以对该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储。进一步地,移动零终端可以对存储的编码后的图像数据进行解码,并显示解码后的图像数据。
例如,以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当用户点击移动零终端TAB1页面上的按钮B2之后,移动零终端返回相应的点击事件至远程服务器,远程服务器首先确定用户操作当前TAB1页面,进一步判断用户是否第一次点击按钮B2,也即,判断移动零终端中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,远程服务器确定并未对TAB2页面的数据进行编码,则可以对TAB2页面的数据进行编码(例如,利用H2.64对TAB2页面的数据进行编码),得到编码后的数据,并将编码后的数据传输至移动零终端,移动零终端对编码后的数据进行存储,并在解码得到TAB2页面的数据之后,进行显示;如果用户不是第一次点击按钮B2,则移动零终端直接读取编码后的数据,并在解码得到TAB2页面的数据之后,进行显示。
根据本发明上述实施例,服务器接收移动终端发送的点击事件,判断当前帧图像是否为预设图像,如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据,如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据,将编码后的图像数据发送至移动终端,从而实现对预设图像进行图像压缩的目的。容易注意到的是,由于当前帧图像为预设图像,即对多TAB页类的图像进行操作时,可以判断移动终端是否已经存储点击事件对应的图像数据,如果未存储,则服务器对图像数据进行编码,如果已存储,则服务器不进行存储,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
可选地,在本发明上述实施例中,第一判断模块43包括:
第一获取子模块,用于获取当前帧图像中的预设像素区域。
具体地,上述的预设像素区域可以是当前帧图像中按钮所在区域,在移动零终端系统中,如图2所示,按钮常设置在TAB页底部,为了判断移动零终端当前显示的当前帧图像是否为TAB页,需要判断当前帧图像的底部是否包含多个按钮。
第二获取子模块,用于获取预设像素区域中的多个高梯度像素。
具体地,上述的高梯度像素为预设像素区域中与周围其他像素值差值较大的像素,对于多TAB页类图像,图像中背景颜色与按钮颜色差异较大,通过比较相邻像素的像素值可以确定属于按钮的像素,即高梯度像素。
处理子模块,用于对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图。
判断子模块,用于判断第一频率直方图中的峰值的数量是否处于预设数量范围内。
具体地,根据移动零终端的特点可知,多TAB页类图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。在本发明上述实施例中,以预设数量范围为3-6为例,进行说明。
确定子模块,用于如果第一频率直方图中的峰值的数量处于预设数量范围内,则确定当前帧图像为预设图像。
在一种可选的方案中,远程服务器在接收到移动零终端发送的点击事件之后,首先对移动零终端当前显示的当前帧图像进行判断,获取当前帧图像中的预设像素区域,进一步获取预设像素区域中多个高梯度像素,统计每一行像素中高梯度像素的数量,并记录在第一频率直方图中,计算第一频率直方图的峰值数量,如果数量在3-6之间,则每个峰值都可以作为一个按钮,进一步确定当前帧图像为TAB页图像。
例如,以分辨率为1080*1920的当前帧图像为例进行详细说明,可以获取当前帧图像中从底部往上的192像素高度,将1080*192的范围作为预设像素区域,在从底部往上1080*192的区域中,将每个像素与其他像素的像素值进行比较,确定所有高梯度像素,统计每一行像素中高梯度像素的数量,并记录到第一频率直方图中,计算按行统计的第一频率直方图中峰值的数量,如果数量在3-6之间,则每个峰值可以作为一个按钮,确定当前帧图像为TAB页图像。
可选地,在本发明上述实施例中,第一获取子模块还用于获取当前帧图像的图像分辨率,并根据图像分辨率,得到预设像素区域。
可选地,在本发明上述实施例中,第二获取子模块还用于获取当前帧图像的预设分量数据,计算预设像素区域中每个像素的预设分量数据与相邻的其他像素的预设分量数据的差值,得到多个差值,并判断每个差值是否大于或者等于预设差值,如果任意一个差值大于或者等于预设差值,则确定任意一个差值对应的像素为高梯度像素。
可选地,在本发明上述实施例中,相邻的其他像素为与每个像素相邻的前一个像素和与每个像素相邻的上一个像素。
可选地,在本发明上述实施例中,该装置还包括:第一获取模块,用于获取第一频率直方图中的峰值对应的区间,得到多个第一区间;处理模块,用于对每列像素中的高梯度像素的数量进行统计,得到第二频率直方图;第二获取模块,用于获取第二频率直方图中的峰值对应的区间,得到至少一个第二区间;生成模块,用于根据多个第一区间和至少一个第二区间,生成多个预设范围。
可选地,在本发明上述实施例中,该装置还包括:设置模块,用于根据多个预设范围的数量,为每个预设范围设置一个对应的标识信息。
可选地,在本发明上述实施例中,第二判断模块还用于获取点击事件的点击区域,判断点击区域是否处于多个预设范围内,如果点击区域处于任意一个预设范围内,则判断移动终端是否已经存储有任意一个预设范围对应的图像数据,如果移动终端已经存储有任意一个预设范围对应的图像数据,则确定移动终端已经存储有点击事件对应的图像数据,如果移动终端未存储任意一个预设范围对应的图像数据,则确定移动终端未存储点击事件对应的图像数据。
可选地,在本发明上述实施例中,发送模块还用于获取任意一个预设范围对应的标识信息,作为编码后的图像数据的标识信息,将编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围发送至移动终端。
可选地,在本发明上述实施例中,该装置还包括:第三获取模块,用于获取点击事件对应的应用程序的标识信息;根据应用程序的标识信息,判断应用程序是否发生变换;第三判断模块,用于如果应用程序发生变化,则发送提示信息至移动终端,其中,提示信息用于提示当前应用程序发生变化。
实施例4
根据本发明实施例,提供了一种图像数据的处理装置的实施例。
图5是根据本发明实施例的另一种图像数据的处理装置的示意图,如图5所示,该装置包括:
发送模块51,用于发送点击事件至服务器,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件。
具体地,上述的移动终端可以是移动零终端,上述的服务器可以是与移动终端连接的远程服务器,移动零终端接收远程服务器发送的屏幕显示图像,并进行显示,用户在移动零终端上点击按钮、点击按键等都会生成点击事件,移动零终端将接收到的点击事件发送给远程服务器,由远程服务器进行响应,并返回对应的显示图像,由移动零终端进行显示。
判断模块53,用于判断本地是否已经存储有与点击事件对应的编码后的图像数据。
具体地,上述的图像数据可以是点击事件对应的TAB页的图像数据。
第一处理模块55,用于如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
第二处理模块57,用于如果本地未存储与点击事件对应的编码后的图像数据,则对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
在一种可选的方案中,由于多TAB页类的图像变化不大,在移动零终端发送点击事件至运程服务器之后,远程服务器可以对移动零终端当前显示的当前帧图像进行识别,判断是否为对多TAB页类的图像进行操作,即判断当前帧图像是否为预设图像,如果是,则确定是对多TAB页类的图像进行操作,在用户第一次点击一个按钮时,由于移动零终端初始并未保存任何数据,移动零终端确定解码缓冲区并未存储编码后的图像数据,可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,移动零终端将编码后的图像数据进行存储,以便后续直接解码并显示,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页;当用户再次点击一个按钮时,移动零终端首先判断解码缓冲区是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接对编码后的图像数据进行解码,并显示解码后的TAB页,无需等待远程服务器发送编码后的图像数据;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,移动零终端可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,移动零终端将编码后的图像数据进行存储,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页。
例如,以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当用户点击移动零终端TAB1页面上的按钮B2之后,移动零终端返回相应的点击事件至远程服务器,同时移动零终端判断用户是否第一次点击按钮B2,也即,判断解码缓冲区中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,远程服务器确定并未对TAB2页面的数据进行编码,则可以对TAB2页面的数据进行编码(例如,利用H2.64对TAB2页面的数据进行编码),得到编码后的数据,移动零终端等待接收远程服务器发送的编码后的数据,在接收到编码后的数据之后,将编码后的数据存储至解码缓冲区,并将编码后的数据进行解码,显示解码后的TAB2页面;如果用户不是第一次点击按钮B2,则移动零终端从解码缓冲区中直接读取编码后的数据,将编码后的数据进行解码,显示解码后的TAB2页面。
根据本发明上述实施例,移动终端发送点击事件至服务器,判断本地是否已经存储有与点击事件对应的编码后的图像数据,如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,如果本地未存储与点击事件对应的编码后的图像数据,则对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,从而实现对预设图像进行图像压缩的目的。容易注意到的是,由于移动终端可以判断本地是否已经存储点击事件对应的图像数据,如果未存储,则等待接收服务器发送的编码后的图像数据,并进行存储、解码和显示,如果已存储,则对存储的编码后的图像数据进行解码和显示,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
可选地,在本发明上述实施例中,判断模块53包括:
获取子模块,用于获取点击事件的点击区域。
第一判断子模块,用于判断点击区域是否处于多个预设范围内。
具体地,上述的多个预设范围可以是远程服务器发送的当前帧图像中包含的多个按钮对应的多个预设范围[αii]*[γii]。
第二判断子模块,用于如果点击区域处于任意一个预设范围内,则判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据。
第一确定子模块,用于如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则确定已经存储有与点击事件对应的编码后的图像数据。
第二确定子模块,用于如果本地未存储任意一个预设范围对应的编码后的图像数据,则确定未存储与点击事件对应的编码后的图像数据。
在一种可选的方案中,由于用户在当前帧图像上进行点击,不一定点击按钮,即不一定需要切换TAB页,为了实现多TAB页类图像的压缩编码,移动零终端在接收到点击事件之后,可以获取点击事件的点击区域,判断点击区域是否在当前帧图像中包含的多个预设范围[αii]*[γii]内,如果是,则确定用户点击按钮,进一步判断解码缓冲区是否已经存储有该按钮对应的图像数据,如果是,则可以直接从解码缓冲区中读取编码后的图像数据,并在进行解码之后进行显示;如果否,则接收远程服务器发送的对该按钮对应的图像数据进行编码得到的编码后的图像数据,在接收到编码后的图像数据之后,对编码后的图像数据进行存储、解码和显示。
可选地,在本发明上述实施例中,该装置还包括:存储模块,用于如果点击区域处于任意一个预设范围内,则将当前帧图像对应的图像数据存储至当前帧图像对应的存储区域。
可选地,在本发明上述实施例中,该装置还包括:接收模块,用于接收服务器返回的编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围。
可选地,在本发明上述实施例中,第二处理模块57包括:
生成子模块,用于根据多个预设范围,生成多个存储空间;处理子模块,用于根据编码后的图像数据对应的标识信息,得到编码后的图像数据对应的存储空间;存储子模块,用于将编码后的图像数据和编码后的图像数据对应的标识信息存储至编码后的图像数据对应的存储空间。
可选地,在本发明上述实施例中,判断模块还用于判断是否接收到提示信息,其中,提示信息用于提示当前应用程序发生变化,该装置还包括:生成模块,用于如果未接收到提示信息,则根据多个预设范围,生成多个存储空间。
实施例5
根据本发明实施例,提供了一种图像数据的处理系统的实施例。
图6是根据本发明实施例的一种图像数据的处理系统的示意图,如图6所示,该系统包括:移动终端61和服务器63。
其中,移动终端61用于发送点击事件,并判断本地是否已经存储有与点击事件对应的编码后的图像数据,如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,其中,点击事件为移动终端当前显示的当前帧图像中生成的点击事件;服务器63与移动终端具有通信关系,用于接收点击事件,判断当前帧图像是否为预设图像,如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据,如果移动终端未存储图像数据,则对图像数据进行编码,得到编码后的图像数据,并发送编码后的图像数据;移动终端还用于如果本地未存储与点击事件对应的编码后的图像数据,则对接收到的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示。
具体地,上述的移动终端可以是移动零终端,上述的服务器可以是与移动终端连接的远程服务器,移动零终端接收远程服务器发送的屏幕显示图像,并进行显示,用户在移动零终端上点击按钮、点击按键等都会生成点击事件,移动零终端将接收到的点击事件发送给远程服务器,由远程服务器进行响应,并返回对应的显示图像,由移动零终端进行显示;上述的预设图像可以是多TAB页类的图像。多TAB页类的图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。这种多TAB页类的图像最大特点是在操作当前TAB页时,其他的页面往往不会有太大,因此在切换时,没必要把整个图像重新压缩编码一次;上述的图像数据可以是点击事件对应的TAB页的图像数据。
在一种可选的方案中,由于多TAB页类的图像变化不大,在移动零终端发送点击事件至运程服务器之后,远程服务器可以对移动零终端当前显示的当前帧图像进行识别,判断是否为对多TAB页类的图像进行操作,即判断当前帧图像是否为预设图像,如果是,则确定是对多TAB页类的图像进行操作,在用户第一次点击一个按钮时,由于移动零终端初始并未保存任何数据,移动零终端确定解码缓冲区并未存储编码后的图像数据,可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,远程服务器可以将该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储,以便后续直接解码并显示,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页;当用户再次点击一个按钮时,移动零终端首先判断解码缓冲区是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接对编码后的图像数据进行解码,并显示解码后的TAB页,无需等待远程服务器发送编码后的图像数据;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,移动零终端可以等待接收远程服务器发送的该按钮对应的TAB页进行编码后的图像数据,远程服务器首先判断移动零终端是否已经存储有该按钮对应的TAB页的图像数据,也即,用户是否已经点击过该按钮,如果是,则由于移动零终端已保存相应的编码后的图像数据,可以直接解码显示,远程服务器无需对点击事件进行响应;如果否,则说明用户第一次点击该按钮,移动零终端并未保存相应的图像数据,远程服务器可以对该按钮对应的TAB页的图像数据进行压缩编码,并将编码后的图像数据发送至移动零终端解码缓冲区进行存储,移动零终端将编码后的图像数据进行存储,移动零终端对接收到的编码后的图像数据进行解码,并显示解码后的TAB页。
例如,以如图2所示的当前帧图像为例对本发明上述实施例进行详细说明。如图1所示,当用户点击移动零终端TAB1页面上的按钮B2之后,移动零终端返回相应的点击事件至远程服务器,同时移动零终端判断用户是否第一次点击按钮B2,也即,判断解码缓冲区中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,移动零终端等待接收远程服务器发送的编码后的数据,远程服务器首先确定用户操作当前TAB1页面,进一步判断用户是否第一次点击按钮B2,也即,判断移动零终端中是否存储有按钮B2对应的TAB2页面的数据,如果用户第一次点击按钮B2,即移动零终端中未存储按钮B2对应的TAB2页面的数据,远程服务器确定并未对TAB2页面的数据进行编码,则可以对TAB2页面的数据进行编码(例如,利用H2.64对TAB2页面的数据进行编码),得到编码后的数据,并将编码后的数据传输至移动零终端,移动零终端在接收到编码后的数据之后,将编码后的数据存储至解码缓冲区,并将编码后的数据进行解码,显示解码后的TAB2页面;如果用户不是第一次点击按钮B2,则移动零终端从解码缓冲区中直接读取编码后的数据,将编码后的数据进行解码,显示解码后的TAB2页面。
根据本发明上述实施例,移动终端发送点击事件至服务器,判断本地是否已经存储有与点击事件对应的编码后的图像数据,如果本地已经存储有与点击事件对应的编码后的图像数据,则对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,服务器接收移动终端发送的点击事件,判断当前帧图像是否为预设图像,如果当前帧图像为预设图像,则判断移动终端是否已经存储有点击事件对应的图像数据,如果移动终端未存储图像数据,则服务器对图像数据进行编码,得到编码后的图像数据,将编码后的图像数据发送至移动终端,如果移动终端确定本地未存储与点击事件对应的编码后的图像数据,则对服务器返回的编码后的图像数据进行存储,对编码后的图像数据进行解码,得到图像数据,并对图像数据进行显示,从而实现对预设图像进行图像压缩的目的。容易注意到的是,由于移动终端可以判断本地是否已经存储点击事件对应的图像数据,如果未存储,则等待接收服务器发送的编码后的图像数据,并进行存储、解码和显示,如果已存储,则对存储的编码后的图像数据进行解码和显示,与现有技术相比,无需将所有图像数据进行编码传输,从而充分利用移动终端合成画面的特点,达到降低计算复杂度、降低传输带宽、提升压缩效率的效果,满足移动终端实时性要求,进而解决了现有技术中对于多TAB页类图像数据进行编码效率低的技术问题。
可选地,在本发明上述实施例中,服务器还用于获取当前帧图像中的预设像素区域,获取预设像素区域中的多个高梯度像素,对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图,并判断第一频率直方图中的峰值的数量是否处于预设数量范围内,如果第一频率直方图中的峰值的数量处于预设数量范围内,则确定当前帧图像为预设图像。
具体地,上述的预设像素区域可以是当前帧图像中按钮所在区域,在移动零终端系统中,如图2所示,按钮常设置在TAB页底部,为了判断移动零终端当前显示的当前帧图像是否为TAB页,需要判断当前帧图像的底部是否包含多个按钮;上述的高梯度像素为预设像素区域中与周围其他像素值差值较大的像素,对于多TAB页类图像,图像中背景颜色与按钮颜色差异较大,通过比较相邻像素的像素值可以确定属于按钮的像素,即高梯度像素;根据移动零终端的特点可知,多TAB页类图像在移动零终端是非常常见的,比如各类聊天、购物、资讯类应用,主要图像都是由多个TAB页构成,且TAB页数一般大于3个小于5个。在本发明上述实施例中,以预设数量范围为3-6为例,进行说明。
在一种可选的方案中,远程服务器在接收到移动零终端发送的点击事件之后,首先对移动零终端当前显示的当前帧图像进行判断,获取当前帧图像中的预设像素区域,进一步获取预设像素区域中多个高梯度像素,统计每一行像素中高梯度像素的数量,并记录在第一频率直方图中,计算第一频率直方图的峰值数量,如果数量在3-6之间,则每个峰值都可以作为一个按钮,进一步确定当前帧图像为TAB页图像。
例如,以分辨率为1080*1920的当前帧图像为例进行详细说明,可以获取当前帧图像中从底部往上的192像素高度,将1080*192的范围作为预设像素区域,在从底部往上1080*192的区域中,将每个像素与其他像素的像素值进行比较,确定所有高梯度像素,统计每一行像素中高梯度像素的数量,并记录到第一频率直方图中,计算按行统计的第一频率直方图中峰值的数量,如果数量在3-6之间,则每个峰值可以作为一个按钮,确定当前帧图像为TAB页图像。
可选地,在本发明上述实施例中,服务器还用于获取当前帧图像的图像分辨率,并根据图像分辨率,得到预设像素区域。
可选地,在本发明上述实施例中,服务器还用于获取当前帧图像的预设分量数据,计算预设像素区域中每个像素的预设分量数据与相邻的其他像素的预设分量数据的差值,得到多个差值,并判断每个差值是否大于或者等于预设差值,如果任意一个差值大于或者等于预设差值,则确定任意一个差值对应的像素为高梯度像素。
可选地,在本发明上述实施例中,相邻的其他像素为与每个像素相邻的前一个像素和与每个像素相邻的上一个像素。
可选地,在本发明上述实施例中,服务器还用于获取第一频率直方图中的峰值对应的区间,得到多个第一区间,对每列像素中的高梯度像素的数量进行统计,得到第二频率直方图,获取第二频率直方图中的峰值对应的区间,得到至少一个第二区间,并根据多个第一区间和至少一个第二区间,生成多个预设范围。
可选地,在本发明上述实施例中,服务器还用于根据多个预设范围的数量,为每个预设范围设置一个对应的标识信息。
可选地,在本发明上述实施例中,服务器还用于获取点击事件的点击区域,判断点击区域是否处于多个预设范围内,如果点击区域处于任意一个预设范围内,则判断移动终端是否已经存储有任意一个预设范围对应的图像数据,如果移动终端已经存储有任意一个预设范围对应的图像数据,则确定移动终端已经存储有点击事件对应的图像数据,如果移动终端未存储任意一个预设范围对应的图像数据,则确定移动终端未存储点击事件对应的图像数据。
可选地,在本发明上述实施例中,服务器还用于获取任意一个预设范围对应的标识信息,作为编码后的图像数据的标识信息,将编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围发送至移动终端。
可选地,在本发明上述实施例中,移动终端还用于获取点击事件的点击区域,并判断点击区域是否处于多个预设范围内,如果点击区域处于任意一个预设范围内,则判断本地是否已经存储有任意一个预设范围对应的编码后的图像数据,如果本地已经存储有任意一个预设范围对应的编码后的图像数据,则确定已经存储与点击事件对应的编码后的图像数据,如果本地未存储任意一个预设范围对应的编码后的图像数据,则确定本地未存储与点击事件对应的编码后的图像数据。
具体地,上述的多个预设范围可以是远程服务器发送的当前帧图像中包含的多个按钮对应的多个预设范围[αii]*[γii]。
在一种可选的方案中,由于用户在当前帧图像上进行点击,不一定点击按钮,即不一定需要切换TAB页,为了实现多TAB页类图像的压缩编码,移动零终端在接收到点击事件之后,可以获取点击事件的点击区域,判断点击区域是否在当前帧图像中包含的多个预设范围[αii]*[γii]内,如果是,则确定用户点击按钮,进一步判断解码缓冲区是否已经存储有该按钮对应的图像数据,如果是,则可以直接从解码缓冲区中读取编码后的图像数据,并在进行解码之后进行显示;如果否,则接收远程服务器发送的对该按钮对应的图像数据进行编码得到的编码后的图像数据,在接收到编码后的图像数据之后,对编码后的图像数据进行存储、解码和显示。
可选地,在本发明上述实施例中,移动终端还用于如果点击区域处于任意一个预设范围内,则将当前帧图像对应的图像数据存储至当前帧图像对应的存储区域。
可选地,在本发明上述实施例中,移动终端还用于接收服务器返回的编码后的图像数据、编码后的图像数据对应的标识信息,以及多个预设范围。
可选地,在本发明上述实施例中,移动终端还用于根据多个预设范围,生成多个存储空间,根据编码后的图像数据对应的标识信息,得到编码后的图像数据对应的存储空间,将编码后的图像数据和编码后的图像数据对应的标识信息存储至编码后的图像数据对应的存储空间。
可选地,在本发明上述实施例中,服务器还用于获取点击事件对应的应用程序的标识信息,并根据应用程序的标识信息,判断应用程序是否发生变换,如果应用程序发生变化,则发送提示信息至移动终端,其中,提示信息用于提示当前应用程序发生变化。
可选地,在本发明上述实施例中,移动终端还用于判断是否接收到提示信息,如果未接收到提示信息,则移动终端根据多个预设范围,生成多个存储空间。
图7是根据本发明实施例的一种可选的图像数据的处理系统的示意图,下面结合图2和图7对本发明一种优选的实施例进行详细说明。如图7所示,移动零终端可以通过移动通信网络与服务器端连接,移动零终端可以通过触屏传感器采集到触屏传感器数据,即点击事件,移动零终端将点击事件通过移动通信网络发送至服务器端,同时,移动零终端对点击事件进行处理,判断解码缓冲区是否存在对应的编码后的TAB页面的数据,如果存在,则对编码后的TAB页面进行解码,并显示TAB页面,得到显示画面;如果不存在,则等待接收码流。服务器端在接收到触屏传感器数据,即点击事件之后,可以识别移动零终端显示的当前帧图像是否为TAB页,如果是,则通过生成画面生成点击事件对应的TAB页,并判断移动零终端是否已经存储,如果否,则通过H.264编码进行编码,并将编码后的数据通过数据打包发送至移动零终端,移动零终端接收到接受码流,即编码后的数据,对编码后的数据进行存储,并通过H.264解码进行解码,通过对解码后的TAB页进行显示,得到显示画面。移动零终端在TAB页面切换时,将当前TAB页面对应的编码数据进行存储更新。服务器端获取APP名称,并判断APP是否改变,如果改变,则生成提示信息发送给移动零终端。
通过上述方案,根据移动零终端图像特点,主要是减少同一个APP内部的冗余。对多TAB页类的移动零终端进行先识别,识别当前页面是否属于多TAB页类画面,如果是,则判断底部按钮的位置,当第一次出现某一TAB页时,对其用常规方式(如H.264)进行压缩,并存储在解码缓冲区里面,当触屏传感器获取到再次点击已存储的TAB页时,直接显示存储的画面。与现有技术相比,具有充分利用移动零终端合成画面的特点,计算复杂度低,瞬间显示画面,且压缩效率高的优点。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
在本发明的上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的技术内容,可通过其它的方式实现。其中,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,可以为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,单元或模块的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (17)

1.一种图像数据的处理方法,其特征在于,包括:
服务器接收移动终端发送的点击事件,其中,所述点击事件为所述移动终端当前显示的当前帧图像中生成的点击事件;
所述服务器判断所述当前帧图像是否为预设图像;
如果所述当前帧图像为所述预设图像,则所述服务器判断所述移动终端是否已经存储有所述点击事件对应的图像数据;
如果所述移动终端未存储所述图像数据,则所述服务器对所述图像数据进行编码,得到编码后的图像数据;
所述服务器将所述编码后的图像数据发送至所述移动终端,其中,所述编码后的图像数据由所述移动终端进行存储。
2.根据权利要求1所述的方法,其特征在于,所述服务器判断所述当前帧图像是否为预设图像包括:
所述服务器获取所述当前帧图像中的预设像素区域;
所述服务器获取所述预设像素区域中的多个高梯度像素;
所述服务器对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图;
所述服务器判断所述第一频率直方图中的峰值的数量是否处于预设数量范围内;
如果所述第一频率直方图中的峰值的数量处于所述预设数量范围内,则所述服务器确定所述当前帧图像为所述预设图像。
3.根据权利要求2所述的方法,其特征在于,所述服务器获取所述预设像素区域中的多个高梯度像素包括:
所述服务器获取所述当前帧图像的预设分量数据;
所述服务器计算所述预设像素区域中每个像素的预设分量数据与相邻的其他像素的预设分量数据的差值,得到多个差值;
所述服务器判断每个差值是否大于或者等于预设差值;
如果任意一个差值大于或者等于所述预设差值,则所述服务器确定所述任意一个差值对应的像素为高梯度像素。
4.根据权利要求2所述的方法,其特征在于,在所述服务器确定所述当前帧图像为所述预设图像之后,所述方法还包括:
所述服务器获取所述第一频率直方图中的峰值对应的区间,得到多个第一区间;
所述服务器对每列像素中的高梯度像素的数量进行统计,得到第二频率直方图;
所述服务器获取所述第二频率直方图中的峰值对应的区间,得到至少一个第二区间;
所述服务器根据所述多个第一区间和所述至少一个第二区间,生成多个预设范围。
5.根据权利要求4所述的方法,其特征在于,所述服务器判断所述移动终端是否已经存储有所述点击事件对应的图像数据包括:
所述服务器获取所述点击事件的点击区域;
所述服务器判断所述点击区域是否处于所述多个预设范围内;
如果所述点击区域处于任意一个预设范围内,则所述服务器判断所述移动终端是否已经存储有所述任意一个预设范围对应的图像数据;
如果所述移动终端已经存储有所述任意一个预设范围对应的图像数据,则所述服务器确定所述移动终端已经存储有所述点击事件对应的图像数据;
如果所述移动终端未存储所述任意一个预设范围对应的图像数据,则所述服务器确定所述移动终端未存储所述点击事件对应的图像数据。
6.根据权利要求5所述的方法,其特征在于,所述服务器将所述编码后的图像数据发送至所述移动终端包括:
所述服务器获取所述任意一个预设范围对应的标识信息,作为所述编码后的图像数据的标识信息;
所述服务器将所述编码后的图像数据、所述编码后的图像数据对应的标识信息,以及所述多个预设范围发送至所述移动终端。
7.一种图像数据的处理方法,其特征在于,包括:
移动终端发送点击事件至服务器,其中,所述点击事件为所述移动终端当前显示的当前帧图像中生成的点击事件;
所述移动终端判断本地是否已经存储有与所述点击事件对应的编码后的图像数据;
如果本地已经存储有与所述点击事件对应的编码后的图像数据,则所述移动终端对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示;
如果本地未存储与所述点击事件对应的编码后的图像数据,则所述移动终端对所述服务器返回的所述编码后的图像数据进行存储,对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示。
8.根据权利要求7所述的方法,其特征在于,所述移动终端判断是否已经存储有与所述点击事件对应的编码后的图像数据包括:
所述移动终端获取所述点击事件的点击区域;
所述移动终端判断所述点击区域是否处于多个预设范围内;
如果所述点击区域处于任意一个预设范围内,则所述移动终端判断本地是否已经存储有所述任意一个预设范围对应的编码后的图像数据;
如果本地已经存储有所述任意一个预设范围对应的编码后的图像数据,则所述移动终端确定已经存储有与所述点击事件对应的编码后的图像数据;
如果本地未存储所述任意一个预设范围对应的编码后的图像数据,则所述移动终端确定未存储与所述点击事件对应的编码后的图像数据。
9.根据权利要求7所述的方法,其特征在于,在所述移动终端对所述服务器返回的所述编码后的图像数据进行存储之前,所述方法还包括:
所述移动终端接收所述服务器返回的所述编码后的图像数据、所述编码后的图像数据对应的标识信息,以及多个预设范围。
10.根据权利要求9所述的方法,其特征在于,所述移动终端对所述服务器返回的所述编码后的图像数据进行存储包括:
所述移动终端根据所述多个预设范围,生成多个存储空间;
所述移动终端根据所述编码后的图像数据对应的标识信息,得到所述编码后的图像数据对应的存储空间;
所述移动终端将所述编码后的图像数据和所述编码后的图像数据对应的标识信息存储至所述编码后的图像数据对应的存储空间。
11.一种图像数据的处理装置,其特征在于,包括:
接收模块,用于接收移动终端发送的点击事件,其中,所述点击事件为所述移动终端当前显示的当前帧图像中生成的点击事件;
第一判断模块,用于判断所述当前帧图像是否为预设图像;
第二判断模块,用于如果所述当前帧图像为所述预设图像,则判断所述移动终端是否已经存储有所述点击事件对应的图像数据;
编码模块,用于如果所述移动终端未存储所述图像数据,则对所述图像数据进行编码,得到编码后的图像数据;
发送模块,用于将所述编码后的图像数据发送至所述移动终端,其中,所述编码后的图像数据由所述移动终端进行存储。
12.根据权利要求11所述的装置,其特征在于,所述第一判断模块包括:
第一获取子模块,用于获取所述当前帧图像中的预设像素区域;
第二获取子模块,用于对所述预设像素区域中的多个高梯度像素;
处理子模块,用于对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图;
判断子模块,用于判断所述第一频率直方图中的峰值的数量是否处于预设数量范围内;
确定子模块,用于如果所述第一频率直方图中的峰值的数量处于所述预设数量范围内,则确定所述当前帧图像为所述预设图像。
13.一种图像数据的处理装置,其特征在于,包括:
发送模块,用于发送点击事件至服务器,其中,所述点击事件为移动终端当前显示的当前帧图像中生成的点击事件;
判断模块,用于判断本地是否已经存储有与所述点击事件对应的编码后的图像数据;
第一处理模块,用于如果本地已经存储有与所述点击事件对应的编码后的图像数据,则对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示;
第二处理模块,用于如果本地未存储与所述点击事件对应的编码后的图像数据,则对所述服务器返回的所述编码后的图像数据进行存储,对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示。
14.根据权利要求13所述的装置,其特征在于,所述判断模块包括:
获取子模块,用于获取所述点击事件的点击区域;
第一判断子模块,用于判断所述点击区域是否处于多个预设范围内;
第二判断子模块,用于如果所述点击区域处于任意一个预设范围内,则判断本地是否已经存储有所述任意一个预设范围对应的编码后的图像数据;
第一确定子模块,用于如果本地已经存储有所述任意一个预设范围对应的编码后的图像数据,则确定已经存储与所述点击事件对应的编码后的图像数据;
第二确定子模块,用于如果本地未存储所述任意一个预设范围对应的编码后的图像数据,则确定未存储与所述点击事件对应的编码后的图像数据。
15.一种图像数据的处理系统,其特征在于,包括:
移动终端,用于发送点击事件,并判断本地是否已经存储有与所述点击事件对应的编码后的图像数据,如果本地已经存储有与所述点击事件对应的编码后的图像数据,则对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示,其中,所述点击事件为所述移动终端当前显示的当前帧图像中生成的点击事件;
服务器,与所述移动终端具有通信关系,用于接收所述点击事件,判断所述当前帧图像是否为预设图像,如果所述当前帧图像为所述预设图像,则判断所述移动终端是否已经存储有所述点击事件对应的图像数据,如果所述移动终端未存储所述图像数据,则对所述图像数据进行编码,得到编码后的图像数据,并发送所述编码后的图像数据;
所述移动终端还用于如果本地未存储与所述点击事件对应的编码后的图像数据,则对接收到的所述编码后的图像数据进行存储,对所述编码后的图像数据进行解码,得到图像数据,并对所述图像数据进行显示。
16.根据权利要求15所述的系统,其特征在于,所述服务器还用于获取所述当前帧图像中的预设像素区域,获取所述预设像素区域中的多个高梯度像素,对每行像素中的高梯度像素的数量进行统计,得到第一频率直方图,并判断所述第一频率直方图中的峰值的数量是否处于预设数量范围内,如果所述第一频率直方图中的峰值的数量处于所述预设数量范围内,则确定所述当前帧图像为所述预设图像。
17.根据权利要求15所述的系统,其特征在于,所述移动终端还用于获取所述点击事件的点击区域,并判断所述点击区域是否处于多个预设范围内,如果所述点击区域处于任意一个预设范围内,则判断本地是否已经存储有所述任意一个预设范围对应的编码后的图像数据,如果本地已经存储有所述任意一个预设范围对应的编码后的图像数据,则确定已经存储与所述点击事件对应的编码后的图像数据,如果本地未存储所述任意一个预设范围对应的编码后的图像数据,则确定本地未存储与所述点击事件对应的编码后的图像数据。
CN201710722869.0A 2017-08-24 2017-08-24 图像数据的处理方法、装置和系统 Pending CN107454415A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710722869.0A CN107454415A (zh) 2017-08-24 2017-08-24 图像数据的处理方法、装置和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710722869.0A CN107454415A (zh) 2017-08-24 2017-08-24 图像数据的处理方法、装置和系统

Publications (1)

Publication Number Publication Date
CN107454415A true CN107454415A (zh) 2017-12-08

Family

ID=60492958

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710722869.0A Pending CN107454415A (zh) 2017-08-24 2017-08-24 图像数据的处理方法、装置和系统

Country Status (1)

Country Link
CN (1) CN107454415A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683792A (zh) * 2018-03-23 2018-10-19 西安万像电子科技有限公司 画面切换方法及装置
CN113012035A (zh) * 2021-03-05 2021-06-22 西安万像电子科技有限公司 图像显示处理的方法、装置和系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102945115A (zh) * 2012-10-18 2013-02-27 东莞宇龙通信科技有限公司 终端和终端操控方法
CN103218156A (zh) * 2013-02-28 2013-07-24 广东欧珀移动通信有限公司 实现多Tab页面切换的方法及其触摸式移动终端
CN105868241A (zh) * 2015-12-11 2016-08-17 乐视网信息技术(北京)股份有限公司 数据加载方法及装置
CN105930544A (zh) * 2016-06-28 2016-09-07 武汉合创源科技有限公司 一种购物网页加载方法及系统
CN106951323A (zh) * 2017-03-09 2017-07-14 深圳峰创智诚科技有限公司 应用程序本地缓存方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102945115A (zh) * 2012-10-18 2013-02-27 东莞宇龙通信科技有限公司 终端和终端操控方法
CN103218156A (zh) * 2013-02-28 2013-07-24 广东欧珀移动通信有限公司 实现多Tab页面切换的方法及其触摸式移动终端
CN105868241A (zh) * 2015-12-11 2016-08-17 乐视网信息技术(北京)股份有限公司 数据加载方法及装置
CN105930544A (zh) * 2016-06-28 2016-09-07 武汉合创源科技有限公司 一种购物网页加载方法及系统
CN106951323A (zh) * 2017-03-09 2017-07-14 深圳峰创智诚科技有限公司 应用程序本地缓存方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108683792A (zh) * 2018-03-23 2018-10-19 西安万像电子科技有限公司 画面切换方法及装置
CN113012035A (zh) * 2021-03-05 2021-06-22 西安万像电子科技有限公司 图像显示处理的方法、装置和系统

Similar Documents

Publication Publication Date Title
CN108259997B (zh) 图像相关处理方法及装置、智能终端、服务器、存储介质
CN106899861B (zh) 一种图片文件处理方法及其设备、系统
KR100292160B1 (ko) 화상 합성 방법, 화상 합성 장치, 및 데이터 기록 매체
CN110213590A (zh) 时域运动矢量获取、帧间预测、视频编码的方法及设备
CN104205819A (zh) 用于视频编码的方法和装置
CN108833938A (zh) 用于选取视频封面的方法和设备
CN107027030B (zh) 一种码率分配方法及其设备
CN102045578A (zh) 图像处理设备和图像处理方法
CN107454415A (zh) 图像数据的处理方法、装置和系统
CN112788235A (zh) 图像处理方法、装置、终端设备及计算机可读取存储介质
JP2002125233A (ja) 映像内容に重み付けをする画像圧縮方式
CN109274976B (zh) 数据处理方法及装置、电子设备及存储介质
JP2021531688A (ja) データ処理方法及び装置、電子機器並びに記憶媒体
Chen et al. Design of digital video coding systems: a complete compressed domain approach
CN106921869A (zh) 一种图片文件处理方法及其设备
CN106331716A (zh) 视频压缩方法和装置
CN108777794A (zh) 图像的编码方法和装置、存储介质、电子装置
CN100407797C (zh) 运动图象编码装置以及运动图象译码装置
KR20030089505A (ko) 신호 처리 시스템 및 방법, 신호 처리 장치 및 방법, 기록매체, 및 프로그램
CN107147913A (zh) 文字块的传输方法和装置
CN106997282A (zh) 客户端的显示模式的处理方法和装置
CN110418209A (zh) 一种应用于视频传输的信息处理方法及终端设备
CN101437159B (zh) 数字图像的发送方法和装置
US7355530B2 (en) Method and device for determining at least one multimedia data encoding parameter
JPH11187401A (ja) 映像信号符号化装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20171208