CN111953986A - 图像处理方法及装置 - Google Patents
图像处理方法及装置 Download PDFInfo
- Publication number
- CN111953986A CN111953986A CN202010728724.3A CN202010728724A CN111953986A CN 111953986 A CN111953986 A CN 111953986A CN 202010728724 A CN202010728724 A CN 202010728724A CN 111953986 A CN111953986 A CN 111953986A
- Authority
- CN
- China
- Prior art keywords
- area
- image
- refresh
- desktop image
- format
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title abstract description 14
- 230000005540 biological transmission Effects 0.000 claims abstract description 33
- 238000000034 method Methods 0.000 claims abstract description 27
- 238000006243 chemical reaction Methods 0.000 claims description 16
- 238000010586 diagram Methods 0.000 description 17
- 238000004364 calculation method Methods 0.000 description 16
- 239000003086 colorant Substances 0.000 description 6
- 230000001788 irregular Effects 0.000 description 3
- 241000023320 Luma <angiosperm> Species 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 239000002699 waste material Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本公开提供一种图像处理方法,涉及图像处理领域,能够解决对桌面图像处理占用较多的计算资源的问题。具体技术方案为:确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;将所述第一区域的图像转换为传输格式的数据。本发明用于降低图像处理过程中对计算资源的占用。
Description
技术领域
本公开涉及图像处理领域,尤其涉及图像处理方法及装置。
背景技术
在桌面虚拟化基础架构(Virtual Desktop 1nfrastructure,VDI)中,服务器需要将虚拟桌面图像进行编码后通过网络发送给远程客户端,远程客户端解码并且显示相应的虚拟桌面图像。
区别于自然图像,虚拟桌面图像的组成成分复杂,通常包含文本和图形信息。相关技术中,当虚拟桌面图像刷新时,服务器将刷新前后的虚拟桌面图像由BRG格式转换为YUV格式,在每个刷新的区域中进行比较,从而确定图像发生的区域,对该区域的图像进行编码,并发送至远程客户端。
将虚拟桌面图像由BRG格式转换为YUV格式,占用较多的计算资源。
发明内容
本公开实施例提供一种图像处理的方法及装置,能够解决在确定传输数据的过程中,对桌面图像处理占用较多的计算资源的问题。所述技术方案如下:
根据本公开实施例的第一方面,提供一种图像处理的方法,该方法包括:确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;将所述第一区域的图像转换为传输格式的数据。
通过确定被刷新的第一区域,并将第一区域的图像进行数据格式的转换,从而降低需要进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
在一个实施例中,所述确定桌面图像的第一区域,包括:确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新;在所述目标刷新区域中,确定所述第一区域,所述第一区域是所述桌面图像经过所述刷新发生变化的区域。
也就是说,可以获取桌面图像的刷新区域,并在刷新区域中,确定发生变化的区域。一般情况下,在刷新的区域中,仅有部分区域的图像发生变化。通过在刷新区域中确定发生变化的区域,并对发生变化的区域进行数据格式的转换,可以降低进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
在一个实施例中,所述确定所述桌面图像的目标刷新区域,所述确定所述桌面图像的目标刷新区域,包括:获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,每个所述刷新区中每个像素均被刷新;根据发生重叠的多个刷新区域确定所述目标刷新区域。所述目标刷新区域包括所述发生重叠的多个刷新区域。
所述目标刷新区域可以是包括所述发生重叠的多个刷新区域的最小矩形区域。
也就是说,所述桌面图像的多个所述刷新区域发生重叠。可以根据所述多个发生重叠的刷新区域,确定目标刷新区域,所述目标刷新包括所述多个发生重叠的刷新区域。
根据多个发生重叠的刷新区域,确定图像发生变化的目标刷新区域,避免确定变化区域时对重叠区域的重复处理,降低对资源的占用。
在一个实施例中,所述确定桌面图像中的第一区域,包括:根据发生重叠的多个变化区域确定所述第一区域,所述第一区域包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
所述第一区域可以是包括所述发生重叠的多个变化区域的最小矩形区域。
将多个发生重叠的变化区域进行合并,从而进行数据格式的转换,避免进行数据格式时对重叠区域的重复处理,降低对资源的占用。
在一个实施例中,所述显示格式为RGB格式,所述传输格式为YUV格式。
根据本公开实施例的第二方面,提供一种图像处理的装置,包括:确定模块和转换模块;所述确定模块用于,确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;所述转换模块用于,将所述第一区域的图像转换为传输格式的数据。
通过确定被刷新的第一区域,并将第一区域的图像进行数据格式的转换,从而降低需要进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
在一个实施例中,所述确定模块还用于,确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新。所述确定模块还用于,在所述目标刷新区域中,确定所述第一区域,所述第一区域是所述桌面图像经过所述刷新发生变化的区域。
通过在刷新区域中确定发生变化的区域,并对发生变化的区域进行数据格式的转换,可以降低进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
在一个实施例中,所述装置还包括收发模块,用于获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,每个所述刷新区中每个像素均被刷新。所述确定模块还用于,根据发生重叠的多个刷新区域确定所述目标刷新区域,所述目标刷新区域包括所述发生重叠的多个刷新区域。
根据多个发生重叠的刷新区域,确定图像发生变化的目标刷新区域,避免确定变化区域时对重叠区域的重复处理,降低对资源的占用。
在一个实施例中,所述确定模块还用于,根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
将多个发生重叠的变化区域进行合并,从而进行数据格式的转换,避免进行数据格式时对重叠区域的重复处理,降低对资源的占用。
在一个实施例中,所述显示格式为RGB格式,所述传输格式为YUV格式。
根据本公开实施例的第三方面,提供一种图像处理的装置,包括:存储器和处理器。存储器用于存储程序代码。处理器用于执行所述程序代码,以执行第一方面所述的方法。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是本公开实施例提供的一种虚拟桌面图像传输系统的示意图;
图2是本公开实施例提供的一种图像处理方法的示意图;
图3是RGB模型的示意图。
图4是本公开实施例提供的一种图像处理方法的示意图;
图5是本公开实施例提供一种显示图像的的示意图;
图6是本公开实施例提供另一种显示图像的的示意图;
图7是本公开实施例提供又一种显示图像的的示意图;
图8是本公开实施例提供又一种显示图像的的示意图;
图9是本公开实施例提供又一种显示图像的的示意图;
图10是本公开实施例提供又一种显示图像的的示意图;
图11是本公开实施例提供又一种显示图像的的示意图;
图12是本公开实施例提供又一种显示图像的的示意图;
图13是本公开实施例提供又一种显示图像的的示意图;
图14是本公开实施例提供的一种图像处理装置的结构图;
图15是本公开实施例提供的另一种图像处理装置的结构图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
为便于理解本公开实施例,首先以图1中示出的虚拟桌面图像传输系统为例详细说明适用于本公开实施例的虚拟桌面图像传输系统。图1是本公开实施例提供的虚拟桌面图像传输系统的示意图。
图1所示的虚拟桌面图像传输系统中包括终端设备11和服务器12,终端设备11与用户相对应,即用户可以在终端设备11上进行相应的操作。终端设备11例如可以为计算机、手机、平板电脑、笔记本电脑、电视机机顶盒等VDI设备。本公开对图像传输系统所包括的终端设备11的数量不做限定,例如可以为1个、2个或者更多个。服务器12可以是单个服务器,也可以是服务器集群。
终端设备11与服务器12建立远程桌面连接,终端设备11接收用户相应操作(例如通过键盘或者鼠标的输入),服务器12根据用户的操作进行处理得到相应的虚拟桌面图像,并对虚拟桌面图像进行编码,之后通过网络传输给终端设备11。终端设备11对编码后的虚拟桌面图像进行解码、恢复,之后进行显示。
根据现有的虚拟图像编码技术,服务器通常基于自然图像在空间域和时间域的相关性来对图像进行编码。为了降低图像编码和传输占用的资源,在虚拟桌面图像刷新时,服务器对发生变化的区域进行编码,发送至远程客户端。
具体而言,当虚拟桌面图像刷新时,服务器通过底层驱动,确认虚拟桌面图像中的刷新区域。服务器将刷新前后的虚拟桌面图像由红绿蓝(red,green,blue,RGB)格式的数据转换为YUV格式的数据,并在每个刷新区域中对刷新前后YUV格式的虚拟桌面图像进行比较,从而确定实际发生变化的区域,并对该区域的YUV格式的数据进行编码等处理,发送至终端设备。终端设备从而根据接收的数据对实际发生变化的区域图像进行刷新。
现有的图像处理方式,需要将完整的虚拟桌面图像由RGB格式转换为YUV格式,占用较多的计算资源。另外,刷新区域可能存在重叠,对刷新前后每个刷新区域中的图像进行比较,存在对同一区域重复处理的情况,造成资源的浪费。
基于上述问题,本公开实施例提供一种图像处理方法、装置和图像传输系统,无需对完整的虚拟桌面图像进行各式的转换,能够降低对计算资源的占用。
下面结合附图介绍本公开实施例提供的图像处理方法,实施例中的服务器可以是图1中的服务器12,实施例中的远程客户端可以是图1中的终端设备11。
图2是本公开实施例提供的一种图像处理方法的示意性流程图。该图像处理方法包括以下步骤:
101、确定桌面图像的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据。
被刷新的像素可以称为刷新像素。被刷新的像素中,存在变化的像素称为变化像素。
第一区域为桌面图像的部分区域。第一区域可以包括变化像素,也可以包括刷新像素,还可以包括部分未刷新的部分。
也就是说,第一区域可以是由刷新像素形成的区域,可以是由变化像素形成的区域。
在一些实施例中,可以周期性进行桌面图像的检测,从而在桌面图像被刷新时,确定第一区域。
例如,可以周期性检测桌面图像是否存在变化,当桌面图像发生变化时,确定变化区域的图像被刷新。也就是说,第一区域可以是桌面图像发生变化的变化区域。
在另一些实施例中,可以获取桌面图像的刷新信息。刷新信息用于指示桌面图像被刷新。在桌面图像被刷新时,进行步骤101。
刷新信息还可以用于指示可以在桌面图像中被刷新的像素。
根据桌面图像的刷新信息,可以确定桌面图像被刷新的刷新区域。刷新区域中,每个像素均被刷新。被刷新的像素可以称为刷新像素。一般情况下,每个刷新区域均为矩形。当然,刷新区域也可以是其他形状。
每个刷新区域可以是连接的刷新像素构成的最大矩形。
第一区域可以包括桌面图像中的所有刷新区域。桌面图像中的所有刷新区域包括桌面图像中所有被刷新的像素。
可以确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新。从而,可以在所述目标刷新区域中,确定所述第一区域,所述第一区域为所述桌面图像发生变化的区域。
可以在被刷新的目标刷新区域中,确定桌面图像发生变化的第一区域。与比较整个桌面图像的方式相比,仅对被刷新区域进行比较,可以降低计算量。
在刷新的区域中,仅有部分区域的图像发生变化。通过确定刷新区域中的变化区域,并对变化区域进行数据格式的转换,可以降低进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
可以根据发生重叠的多个刷新区域确定所述目标刷新区域,所述目标刷新区域为包括所述发生重叠的多个刷新区域的最小矩形区域,在所述桌面图像的每个所述刷新区中每个像素均被刷新。
也就是说,在多个刷新区域发生重叠的情况下,可以将多个发生重叠的刷新区域进行合并,以得到目标刷新区域。之后,根据目标刷新区域,确定第一区域。第一合并区域包括所述多个发生重叠的刷新区域。
根据多个发生重叠的刷新区域,确定目标重叠区域,目标刷新区域。后续操作可以根据目标刷新区域进行,避免后续步骤对重叠的刷新区域的重复处理,降低对资源的占用。
可以根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域的最小矩形区域,所述桌面图像的每个所述变化区域中每个像素均发生变化。
也就是说,多个所述变化区域发生重叠的情况下,可以将所述多个发生重叠的变化区域进行合并,以得到目标变化区域,并将目标变化区域作为第一区域。目标变化区域包括所述多个发生重叠的变化区域。
根据多个发生重叠的变化区域确定目标变化区域,从而对目标变化区域进行后续处理,避免对重叠的变化区域的重复处理,降低对资源的占用。
102、将所述第一区域的图像转换为传输格式的数据。
显示器等发光体通常采用红绿蓝(red,green,blue,RGB)格式对图像进行显示。而数据传输过程一般采用YUV格式。
可以将第一区域的图像的由RGB格式转换为YUV格式。
如图3所示,RGB模型也可以称为RGB颜色空间是目前常用的一种彩色信息表达方式,它使用红、绿、蓝三原色的亮度来定量表示颜色。该模型也称为加色混色模型,是以红、绿、蓝三色光互相叠加来实现混色的方法,因而适合于显示器等发光体的显示。
RGB颜色空间可以理解为三维直角坐标颜色系统中的一个正方体。任何一种颜色在RGB颜色空间中都可以用三维空间中的一个点来表示。在RGB颜色空间上,当任何一个基色的亮度值为零时,即在原点处,就显示为黑色。当三种基色都达到最高亮度时,就表现为白色。在连接黑色与白色的对角线上,是亮度等量的三基色混合而成的灰色,该线称为灰色线。
YUV也是一种颜色编码方法,常使用在各个视频处理组件中。Y'UV,YUV,YCbCr,YPbPr等都可以称为YUV,彼此有重叠。“Y”表示明亮度(Luminance或Luma),也就是灰阶值,“U”和“V”表示的则是色度(Chrominance或Chroma),作用是描述影像色彩及饱和度,用于指定像素的颜色。YUV,是一种颜色编码方法。
从历史的演变来说,其中YUV和Y'UV通常用来编码电视的模拟信号,而YCbCr则是用来描述数字的视频信号,适合视频与图片压缩以及传输。
YUV颜色编码方法主要用于电视系统以及模拟视频领域,它将亮度信息(Y)与色彩信息(UV)分离,没有UV信息一样可以显示完整的图像,只不过是黑白的,这样的设计很好地解决了彩色电视机与黑白电视的兼容问题。并且,YUV不像RGB那样要求三个独立的视频信号同时传输,所以用YUV方式传送占用较少的频宽。
在步骤102之后,可以将数据格式转换后的所述第一区域的图像发送至终端设备。
通过步骤101至102,确定被刷新的第一区域,并将第一区域的图像进行数据格式的转换,从而降低需要进行数据格式转换的图像区域的面积,从而降低计算量,减少对计算资源的占用。
当第一区域为刷新区域时,在步骤102之后,可以在传输格式的图像数据中确定发生变化的区域。之后,可以将变化区域的图像数据发送至终端设备。
与第一区域为刷新区域的情况相比,如果第一区域是根据变化区域确定的,能够进一步减小要进行数据格式转换的图像区域的面积,降低数据转换占用的计算资源。
基于上述图1对应的实施例提供的图像处理的方法,本公开另一实施例提供一种图像处理的方法,该方法可以应用于图1所示的服务器12或其他用于采集本地桌面图像的设备。参照图4所示,本实施例提供的图像处理的方法包括以下步骤:
401、采集端确认桌面图像的刷新区域。
采集端可以通过底层驱动确认本地显示设备的刷新区域。桌面图像可以是采集端的本地显示图像,即采集端的显示器的显示图像。也可以是采集端生成的图像。
采集端可以是服务器12或其他用于采集本地桌面图像的设备。
每个被刷新的像素可以称为刷新像素。每个刷新区域可以仅包括刷新像素,且每个刷新区域可以是刷新像素连续的区域。
刷新区域可以是矩形或圆形等其他规则或不规则的形状对应的区域。本公开实施例以矩形的刷新区域为例进行说明。每个刷新区域可以是刷新像素连续的最大矩形区域。
如图5所示,每个阴影矩形是一个刷新区域,其中,部分刷新区域是独立的,部分刷新区域的连接在一起,还有部分刷新区域存在重叠。应当理解,两个刷新区域的连接在一起,可以是指一个刷新区域的一个边与另一个刷新区域的一个边完全或部分重合。
应当理解,多个刷新区域可以部分重叠,或者,一个刷新区域也可以包括其他刷新区域。
402、采集端对重叠或连续的多个刷新区域进行合并。
合并后的刷新区域可以是矩形或其他规则或不规则的形状,合并后的刷新区域之间不存在重叠。每个合并后的刷新区域是由多个原始的刷新区域合并形成的,合并后的区域包括该多个原始的刷新区域。
为了尽可能减小合并后的刷新区域的面积,可以将多个原始的刷新区域的部分顶点作为合并后的刷新区域的顶点。从而,降低传输的图像数据的数据量。
一般情况下,合并后的刷新区域可以是矩形,如图6所示。合并后的刷新区域的部分顶点与原始的刷新区域的部分顶点重合。合并后的刷新区域可以是包括该多个原始的刷新区域的最小矩形。
如图7所示,合并后的刷新区域为多个原始的刷新区域在桌面图像中所占的区域。
应当理解,在桌面图像中,刷新区域2被另一个刷新区域1完全覆盖,那么,合并后的刷新区域不再体现被完全覆盖的刷新区域2,合并后的刷新区域与刷新区域1的在桌面图像的范围相同。通过对存在重叠的刷新区域进行合并,在进行后续处理时,不再关注被完全覆盖的刷新区域,可以减少计算量。
403、采集端将目标刷新区域中的数据与前一帧图像中的数据进行比较,确定发生变化的变化区域。
每个目标刷新区域可以是合并后的刷新区域,也可以是独立的刷新区域。独立的刷新区域即与其他刷新区域不存在重叠的刷新区域。
图9是在图7所示的两个合并后的刷新区域和一个独立刷新区域中,对刷新前后的数据进行比较得到的发生变化的像素。
发生变化的像素为变化像素。
变化区域可以仅包括变化像素。可以将每个变化像素连续的区域作为一个变化区域。
或者,如图10所示,每个变化区域可以是变化像素连续的矩形。
404、可以对存在重叠或连接的多个变化区域进行合并,以得到合并后的变化区域。合并后的变化区域包括该多个变化区域。
合并后的变化区域也可以称为有效区域,如图11所示。合并后的变化区域可以规则或不规则的形状,由该多个变化区域决定。
对于变化区域1完全覆盖与另一个变化区域2的情况,对变化区域进行合并,合并后的变化区域可以与变化区域1完全相同。从而,可以无需对重叠区域重复处理,降低后续处理的工作量。
应当理解,在一些实施例中,桌面图像刷新前后数据相同,此时不存在变化区域,可以不再进行后续处理。
405、采集端对每个目标变化区域中的图像进行数据格式的转换,以得到传输数据。
目标变化区域可以是独立的变化区域,也可以是合并后的变化区域。独立的变化区域是指与其他变化区域不存在重叠的变化区域。
可以将目标变化区域中图像的数据格式由显示格式转换为传输格式。
显示格式可以是RGB格式,传输格式可以是YUV格式。也就是说,可以将目标变化区域中图像的数据格式由RGB格式转换为YUV格式。
406、采集端将传输数据发送至远程客户端。
407、远程客户端根据接收的传输数据,对显示图像进行刷新,以得到刷新后的图像,从而得到了一帧新的图像。
408、远程客户端通过显示器,显示该刷新后的图像。
通过步骤401至408,采集端将当前帧的RGB数据与前一帧的RGB数据进行比较,确定其中的变化区域,而无需将当前帧全部转换为YUV数据再进行比较,减少工作量。
采集端可以只将变化区域的图像由RGB格式转换为YUV格式并发送给客户端,用于客户端刷新显示图像,能够传输的数据量。
通过步骤401至408,采集端可以进行两次区域合并。
第一次合并,将对于刷新像素连续的刷新区域,在多个刷新区域存在重叠时,将该多个刷新区域进行合并。
第二次合并,对于变化像素连续的变化区域,在多个变化区域存在重叠时,将该多个变化区域进行合并。
通过两次合并操作,可以进一步减少进行数据格式转换的图像面积,从而减少传输的数据量。
本公开实施例提供的图像处理方法,能够减少采集端的计算量,降低采集端的处理器负荷,提高采集端的性能。
图12是一种桌面图像的示意图。
用户正在进行文字编辑。桌面图像包括工具栏、文字编辑栏、操作指示栏等区域。每次获取用户输入的信息时,文字编辑栏中每个像素被刷新。
在文字编辑栏对应的刷新区域中,还包括其他刷新区域,被文字编辑栏对应的刷新区域覆盖。仅对文字编辑栏对应的刷新区域进行变化区域的确定。
对刷新前后文字编辑栏的每个像素进行对比,得到了两个独立的变化区域A和B,如图13所示。
对两个独立的变化区域A和B中的图像进行数据格式的转换。将区域A和B中的图像数据由RGB格式转换为YUV格式,发送至客户端。
基于上述图1和图13对应的实施例中所描述的图像处理的方法,下述为本公开装置实施例,可以用于执行本公开方法实施例。
本公开实施例提供一种图像处理的装置,如图14所示,该装置2000包括:确定模块2010和转换模块2020。
确定模块2010用于,确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据。
转换模块2020用于,将所述第一区域的图像转换为传输格式的数据。
在一个实施例中,确定模块2010还用于,确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新。
确定模块2010还用于,在所述目标刷新区域中,确定所述第一区域,所述第一区域为所述桌面图像发生变化的区域。
在一个实施例中,装置2000还包括收发模块,用于获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,每个所述刷新区中每个像素均被刷新。
确定模块2010还用于,根据发生重叠的多个刷新区域确定所述目标刷新区域,所述目标刷新区域包括所述发生重叠的多个刷新区域。
在一个实施例中,确定模块2010还用于,根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
在一个实施例中,所述显示格式为RGB格式,所述传输格式为YUV格式。
本公开实施例提供的图像处理装置2000,能够降低图像处理过程中对资源的占用。
本公开实施例提供一种图像处理的装置,如图15所示,该装置3000包括:存储器3010和处理器3020。
存储器3010用于,存储程序代码。
处理器3020用于,执行所述程序代码,以执行上文所述的方法。
具体地,处理器3020用于,执行所述程序代码,以执行以下步骤:
确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;
将所述第一区域的图像转换为传输格式的数据。
在一个实施例中,处理器3020还用于,确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新。
处理器3020还用于,在所述目标刷新区域中,确定所述第一区域,所述第一区域是所述桌面图像经过所述刷新发生变化的区域。
在一个实施例中,装置3000还包括通信接口,用于发送所述传输格式的数据。
在一个实施例中,处理器3020还用于,获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,每个所述刷新区中每个像素均被刷新。
处理器3020还用于,根据发生重叠的多个刷新区域确定所述目标刷新区域,所述目标刷新区域包括所述发生重叠的多个刷新区域。
在一个实施例中,处理器3020还用于,根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
在一个实施例中,所述显示格式为RGB格式,所述传输格式为YUV格式。
基于上述图2和图4对应的实施例中所描述的图像处理的方法,本公开实施例还提供一种计算机可读存储介质,例如,非临时性计算机可读存储介质可以是只读存储器(英文:Read Only Memory,ROM)、随机存取存储器(英文:Random Access Memory,RAM)、CD-ROM、磁带、软盘和光数据存储装置等。该存储介质上存储有计算机指令,用于执行上述图2和图4对应的实施例中所描述的图像处理方法,此处不再赘述。
本领域技术人员在考虑说明书及实践这里公开的公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (10)
1.一种图像处理的方法,其特征在于,所述方法包括:
确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;
将所述第一区域的图像转换为传输格式的数据。
2.根据权利要求1所述的方法,其特征在于,所述确定桌面图像的第一区域,包括:
确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新;
在所述目标刷新区域中,确定所述第一区域,所述第一区域是所述桌面图像经过所述刷新发生变化的区域。
3.根据权利要求2所述的方法,其特征在于,
所述方法还包括:获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,在每个所述刷新区中每个像素被刷新;
所述确定所述桌面图像的目标刷新区域,包括:根据发生重叠的多个所述刷新区域确定所述目标刷新区域,所述目标刷新区域包括所述发生重叠的多个刷新区域。
4.根据权利要求1-3中任一项所述的方法,其特征在于,所述确定桌面图像中的第一区域,包括:
根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
5.根据权利要求1-4中任一项所述的方法,其特征在于,
所述显示格式为RGB格式,所述传输格式为YUV格式。
6.一种图像处理的装置,其特征在于,包括:确定模块和转换模块;
所述确定模块用于,确定桌面图像中的第一区域,所述第一区域的图像被刷新,所述桌面图像为显示格式的数据;
所述转换模块用于,将所述第一区域的图像转换为传输格式的数据。
7.根据权利要求6所述的装置,其特征在于,
所述确定模块还用于,确定所述桌面图像的目标刷新区域,所述目标刷新区域的图像被刷新;
所述确定模块还用于,在所述目标刷新区域中,确定所述第一区域,所述第一区域是所述桌面图像经过所述刷新发生变化的区域。
8.根据权利要求7所述的装置,其特征在于,还包括收发模块,
所述收发模块用于,获取刷新信息,所述刷新信息用于指示所述桌面图像的刷新区域,每个所述刷新区中每个像素被刷新;
所述确定模块还用于,根据发生重叠的多个所述刷新区域确定所述目标刷新区域,所述目标刷新区域包括所述发生重叠的多个刷新区域。
9.根据权利要求7所述的装置,其特征在于,
所述确定模块还用于,根据发生重叠的多个变化区域确定所述第一区域,所述第一区域为包括所述发生重叠的多个变化区域,所述桌面图像的每个所述变化区域中每个像素经过所述刷新均发生变化。
10.根据权利要求6-9任一项所述的装置,其特征在于,
所述显示格式为RGB格式,所述传输格式为YUV格式。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010728724.3A CN111953986A (zh) | 2020-07-23 | 2020-07-23 | 图像处理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010728724.3A CN111953986A (zh) | 2020-07-23 | 2020-07-23 | 图像处理方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111953986A true CN111953986A (zh) | 2020-11-17 |
Family
ID=73339599
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010728724.3A Pending CN111953986A (zh) | 2020-07-23 | 2020-07-23 | 图像处理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111953986A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115865909A (zh) * | 2023-01-13 | 2023-03-28 | 中科方德软件有限公司 | 一种基于spice协议的数据传输方法、装置和可读存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101977322A (zh) * | 2010-11-10 | 2011-02-16 | 上海交通大学 | 基于通用视频编码标准的屏幕编码系统 |
CN102566910A (zh) * | 2011-12-14 | 2012-07-11 | 广州杰赛科技股份有限公司 | 刷新虚拟桌面客户端屏显的方法及虚拟桌面系统 |
CN103281539A (zh) * | 2013-06-07 | 2013-09-04 | 华为技术有限公司 | 一种图像编、解码处理的方法、装置及终端 |
CN103426419A (zh) * | 2012-05-23 | 2013-12-04 | 腾讯科技(深圳)有限公司 | 一种刷新区域的方法及装置 |
CN105227603A (zh) * | 2014-06-23 | 2016-01-06 | 中兴通讯股份有限公司 | 虚拟桌面图像处理方法、装置、虚拟桌面服务器及瘦终端 |
US9819937B1 (en) * | 2015-04-14 | 2017-11-14 | Teradici Corporation | Resource-aware desktop image decimation method and apparatus |
CN107665128A (zh) * | 2017-09-13 | 2018-02-06 | 深信服科技股份有限公司 | 图像处理方法、系统、服务器及可读存储介质 |
-
2020
- 2020-07-23 CN CN202010728724.3A patent/CN111953986A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101977322A (zh) * | 2010-11-10 | 2011-02-16 | 上海交通大学 | 基于通用视频编码标准的屏幕编码系统 |
CN102566910A (zh) * | 2011-12-14 | 2012-07-11 | 广州杰赛科技股份有限公司 | 刷新虚拟桌面客户端屏显的方法及虚拟桌面系统 |
CN103426419A (zh) * | 2012-05-23 | 2013-12-04 | 腾讯科技(深圳)有限公司 | 一种刷新区域的方法及装置 |
CN103281539A (zh) * | 2013-06-07 | 2013-09-04 | 华为技术有限公司 | 一种图像编、解码处理的方法、装置及终端 |
CN105227603A (zh) * | 2014-06-23 | 2016-01-06 | 中兴通讯股份有限公司 | 虚拟桌面图像处理方法、装置、虚拟桌面服务器及瘦终端 |
US9819937B1 (en) * | 2015-04-14 | 2017-11-14 | Teradici Corporation | Resource-aware desktop image decimation method and apparatus |
CN107665128A (zh) * | 2017-09-13 | 2018-02-06 | 深信服科技股份有限公司 | 图像处理方法、系统、服务器及可读存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115865909A (zh) * | 2023-01-13 | 2023-03-28 | 中科方德软件有限公司 | 一种基于spice协议的数据传输方法、装置和可读存储介质 |
CN115865909B (zh) * | 2023-01-13 | 2023-06-02 | 中科方德软件有限公司 | 一种基于spice协议的数据传输方法、装置和可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103281539B (zh) | 一种图像编、解码处理的方法、装置及终端 | |
US10930252B2 (en) | Dividing image data into regional images of different resolutions based on a gaze point and transmitting the divided image data | |
US20220014819A1 (en) | Video image processing | |
US9013536B2 (en) | Augmented video calls on mobile devices | |
US7173635B2 (en) | Remote graphical user interface support using a graphics processing unit | |
US20200404309A1 (en) | Video watermark adding method and apparatus, and electronic device and storage medium | |
CN105959724B (zh) | 一种视频数据处理方法以及装置 | |
EP3920131A1 (en) | Re-projecting flat projections of pictures of panoramic video for rendering by application | |
CN100435570C (zh) | 视频显示控制设备和视频显示控制方法 | |
CN107665128B (zh) | 图像处理方法、系统、服务器及可读存储介质 | |
CN111277829B (zh) | 编解码方法及装置 | |
CN112788235B (zh) | 图像处理方法、装置、终端设备及计算机可读取存储介质 | |
US6847333B2 (en) | Method of and system for low-bandwidth transmission of color video | |
JP2023537319A (ja) | 適応型ビデオウォーターマークの適用のためのシステムおよび方法 | |
US20120218292A1 (en) | System and method for multistage optimized jpeg output | |
CN111953986A (zh) | 图像处理方法及装置 | |
CN111246208B (zh) | 视频处理方法、装置及电子设备 | |
CN112399069B (zh) | 图像编码方法及装置、存储介质、电子设备 | |
CN113613024B (zh) | 视频预处理方法及设备 | |
US11582464B2 (en) | Using morphological operations to process frame masks in video content | |
US12080030B2 (en) | Image processing method and device, camera apparatus and storage medium | |
CN111526366B (zh) | 图像处理方法、装置、摄像设备和存储介质 | |
US9317891B2 (en) | Systems and methods for hardware-accelerated key color extraction | |
CN111314701A (zh) | 视频处理方法及电子设备 | |
US12120336B2 (en) | Embedding frame masks in a video stream |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |