CN103986935A - 编码方法、编码器、屏幕共享设备及系统 - Google Patents

Abstract

本发明实施例提供了一种编码方法、编码器、屏幕共享设备及系统，该方法包括：根据帧缓冲区中显示数据的图层属性确定第一类图层和第二类图层；分别获取第一类图层和第二类图层在目标显示界面的显示区域的坐标参数；根据坐标参数将该最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别进行空白区域透明数据填充并采用对应的编码压缩方式进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据作为输出码流输出。本发明实施例中，通过将显示数据按图层属性分类进行编码传输，能够一定程度上解决图文视频混合的共享屏幕显示问题。

Description

编码方法、编码器、屏幕共享设备及系统

技术领域

本发明实施例涉及图像处理领域，并且更具体地，涉及编码方法、编码器、屏幕共享设备及系统。

背景技术

屏幕共享出现在图形化的用户界面(GUI)之后，屏幕共享的目的是在远端客户机上重现主机屏幕的界面显示内容，或者以一种虚拟的概念出现，使得远端用户感觉像坐在主机旁边一样。

屏幕拷贝共享的方式主要是通过无失真或者特殊有失真的压缩算法处理过后的数据流传输到客户端，客户端接收到数据流进行解码显示。

但是，现有技术中，对于同时存在图片和视频的共享屏幕，要么存在帧率低，显示不流畅的问题，要么存在细节显示不清楚的问题，显示效果较差。

因此，需要一种合适的方案，能够解决图文视频混合的共享屏幕的显示问题。

发明内容

本发明实施例提供一种编码方法、编码器、屏幕共享设备及系统，能够一定程度上解决图文视频混合的共享屏幕的显示问题。

第一方面，提供了一种编码方法，该方法包括：根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数，其中该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据最终呈现的界面；根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据作为输出码流输出。

结合第一方面，在第一种可能的实现方式中，根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数具体实现为：根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从该帧缓冲区对应的图层渲染管理器中获取该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

结合第一方面的第一种可能的实现方式，在第二种可能的实现方式中，该坐标参数包括横纵坐标参数和a平面二值表，根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数具体实现为：根据该帧缓冲区中显示数据的图层属性从该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表，其中该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

结合第一方面或第一方面的第一种可能的实现方式或第一方面的第二种可能的实现方式，在第三种可能的实现方式中，根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域具体实现为：当该帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当该帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当该帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当该帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

结合第一方面的第三种可能的实现方式，在第四种可能的实现方式中，根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域具体还包括：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

结合第一方面的第四种可能的实现方式，在第五种可能的实现方式中，当该第一类图层为视频类图层时，将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域具体实现为：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，该将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域具体实现为：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

结合第一方面的第一种可能的实现方式至第一方面的第五种可能的实现方式中任一种可能的实现方式，在第六种可能的实现方式中，分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充具体实现为：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

结合第一方面或第一方面的第一种可能的实现方式至第一方面的第六种可能的实现方式中任一种可能的实现方式，在第七种可能的实现方式中，具体实现为：该第一类图层为视频类图层，该第二类图层为图形类图层。

第二方面，提供了一种编码器，该编码器包括：坐标参数提取单元，用于根据该编码器所在的终端设备的帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数，其中该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据在该终端设备的显示装置中最终呈现的界面；编码处理单元，用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；输出单元，用于将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据作为输出码流输出。

结合第二方面，在第一种可能的实现方式中，该坐标参数提取单元具体用于根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该终端设备中该帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从该终端设备中该帧缓冲区对应的图层渲染管理器中获取该第一类图层在目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

结合第二方面的第一种可能的实现方式，在第二种可能的实现方式中，该坐标参数包括横纵坐标参数和a平面二值表，该坐标参数提取单元具体用于：根据该帧缓冲区中显示数据的图层属性从该终端设备中该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表，其中该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

结合第二方面或第二方面的第一种可能的实现方式或第二方面的第二种可能的实现方式，在第三种可能的实现方式中，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，该编码处理单元具体用于：当该帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当该帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当该帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当该帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

结合第二方面的第三种可能的实现方式，在第四种可能的实现方式中，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，该编码处理单元具体还用于：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

结合第二方面的第四种可能的实现方式，在第五种可能的实现方式中，当该第一类图层为视频类图层时，在用于将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，该编码处理单元具体用于：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，在用于将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，该编码处理单元具体用于：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

结合第二方面的第一种可能的实现方式至第二方面的第五种可能的实现方式中任一种可能的实现方式，在第六种可能的实现方式中，在用于分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，该编码处理单元具体用于：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

结合第二方面或第二方面的第一种可能的实现方式至第二方面的第六种可能的实现方式中任一种可能的实现方式，在第七种可能的实现方式中，该编码器还包括：图层解析单元，用于根据该帧缓冲区中显示数据的图层属性确定该第一类图层和该第二类图层。

结合第二方面或第二方面的第一种可能的实现方式至第二方面的第七种可能的实现方式中任一种可能的实现方式，在第八种可能的实现方式中，具体实现为：该第一类图层为视频类图层，该第二类图层为图形类图层。

第三方面，提供了一种屏幕共享发送端设备，该屏幕共享发送端设备包括处理器、存储器、通信接口和显示设备，该处理器与该存储器相连，其中

该存储器中存储一组程序代码，该存储器还包括帧缓冲区，用于存储该显示设备的显示数据；

该处理器用于调用该存储器中存储的程序代码，用于执行以下操作：

根据该帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数，其中该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据在该显示设备中最终呈现的界面；

根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；

通过通信接口将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据向屏幕共享接收端发送，以便该屏幕共享接收端对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据解码并进行合成显示。

结合第三方面，在第一种可能的实现方式中，该处理器包括图层渲染管理器，在用于根据该帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数的过程中，该处理器具体用于：根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别获取该第一类图层在目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

结合第三方面的第一种可能的实现方式，在第二种可能的实现方式中，该坐标参数包括横纵坐标参数和a平面二值表，在用于根据该帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数的过程中，该处理器具体用于：根据该帧缓冲区中的显示数据的图层属性从该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表，其中该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

结合第三方面或第三方面的第一种可能的实现方式或第三方面的第二种可能的实现方式，在第三种可能的实现方式中，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，该处理器具体用于：当该帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当该帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当该帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当该帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

结合第三方面的第三种可能的实现方式，在第四种可能的实现方式中，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，该处理器具体还用于：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

结合第三方面的第四种可能的实现方式，在第五种可能的实现方式中，当该第一类图层为视频类图层时，在用于将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，该处理器具体用于：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，在用于将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，该处理器具体用于：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

结合第三方面的第一种可能的实现方式至第三方面的第五种可能的实现方式中任一种可能的实现方式，在第六种可能的实现方式中，在用于分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，该处理器具体用于：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

结合第三方面或第三方面的第一种可能的实现方式至第三方面的第六种可能的实现方式中任一种可能的实现方式，在第七种可能的实现方式中，该处理器还用于根据该帧缓冲区中显示数据的图层属性确定该第一类图层和该第二类图层。

结合第三方面或第三方面的第一种可能的实现方式至第三方面的第七种可能的实现方式中任一种可能的实现方式，在第八种可能的实现方式中，具体实现为：该第一类图层为视频类图层，该第二类图层为图形类图层。

结合第三方面或第三方面的第一种可能的实现方式至第三方面的第八种可能的实现方式中任一种可能的实现方式，在第九种可能的实现方式中，具体实现为：该处理器包括编码器，以及

中央处理器CPU、图形处理器GPU或专业渲染芯片中的一种或多种。

第四方面，提供了一种屏幕共享接收端设备，该屏幕共享接收端设备包括处理器、存储器、通信接口和显示设备，该处理器与该存储器相连，其中

该存储器中存储一组程序代码；

该处理器用于调用该存储器中存储的程序代码，用于执行以下操作：

通过通信接口接收屏幕共享发送端设备发送的至少一个第一类图层编码数据和至少一个第二类图层编码数据；

分别对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据进行解码得到该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据；

对该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据进行显示合成以得到目标显示数据；

将该目标显示数据输出到该显示设备中。

第五方面，提供了一种屏幕共享系统，该屏幕共享系统包括：第三方面或第三方面的第一种可能的实现方式至第三方面的第九种可能的实现方式中任一种可能的实现方式中的屏幕共享发送端设备，和第四方面的屏幕共享接收端设备。

基于以上技术方案，本发明实施例的编码方法、编码器、屏幕共享设备及系统，通过将显示数据的图层按图层属性分类进行编码传输，以在客户端合成显示数据，从而能够一定程度上解决图文视频混合的共享屏幕的显示问题。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了根据本发明实施例的编码方法流程图。

图2是本发明实施例屏幕共享的流程示意图。

图3是本发明实施例图形类图层的显示区域示意图。

图4是本发明实施例视频类图层的显示区域示意图。

图5是本发明实施例目标显示界面的多个图形图层显示区域示意图。

图6是本发明实施例生成视频数据编码的流程图。

图7是本发明实施例的一个a平面二值表示意图。

图8是本发明实施例利用VOP技术传输视频图层的流程示意图。

图9是本发明实施例屏幕共享的方法流程图。

图10是本发明实施例屏幕共享接收端设备屏幕共享的方法流程图。

图11是本发明实施例编码器的结构示意图。

图12是本发明实施例屏幕共享接收端设备的结构示意图。

图13是本发明实施例屏幕共享发送端设备的结构示意图。

图14是本发明实施例屏幕共享接收端设备的另一结构示意图。

图15是本发明实施例屏幕共享系统的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

图1示出了根据本发明实施例的编码方法流程图。图1的方法由编码器执行。本发明实施例中，编码器所在的终端设备即为屏幕共享系统的发送端设备。

101，根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数。

其中，该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据最终呈现的界面。

102，根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据。

本发明实施例中，根据第一类图层显示区域的显示数据和坐标参数进行数据填充和压缩编码形成第一类图层编码，以及根据第二类图层显示区域的显示数据和坐标参数进行数据填充和压缩编码形成第二类图层编码，其具体实现可参考现有技术中图形数据压缩编码和视频数据压缩编码的技术方案，本发明实施例在此不再赘述。

应理解，第一类图层编码中，可携带第一类图层显示区域的显示数据和坐标参数。其中，第一类图层显示区域的坐标参数，可以是第一类图层编码显式携带的，也可以是第一类图层编码隐式携带的。

103，将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据作为输出码流输出。

本发明实施例中，通过将显示数据的图层按图层属性分类进行编码，使得在屏幕共享发送端能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

应理解，本发明实施例中，将图层按照图层属性分成第一类和第二类，但本发明实施例的方法还可将图层属性分成更多的类型，其中每一种类型对应于一种编码压缩方式。

优选地，每一类图层的显示数据可采用该图层对应的最优编码压缩方式进行压缩，该最优编码压缩方式能够使得该类图层在屏幕共享接收端设备的显示效果最好。应理解，显示效果可包括显示的清晰度和显示的流畅程度。

具体地，步骤101可实现为：根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从该帧缓冲区对应的图层渲染管理器中获取该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

应理解，在图像处理领域，通常用X轴和Y轴的坐标表示显示数据在平面上的坐标，用Z轴上的坐标表示图层之间叠加显示的顺序。在图层毫无重叠的情况下，根本不需要关心Z-order。然而，当图层之间出现重叠时，系统就需要通过一个标准来确定图层的显示顺序。这个标准就是Z-order。

更具体地，该坐标参数可包括横纵坐标参数和a平面二值表。此时，步骤101具体可实现为：根据该帧缓冲区中显示数据的图层属性从该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表。其中，该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

可选地，作为一个实施例，步骤102中，根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域具体可实现为：当该帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当该帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当该帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当该帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

进一步地，步骤102中，根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域具体还包括：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

更进一步地，当该第一类图层为视频类图层时，将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域具体实现为：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域具体实现为：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

可选地，步骤102中，分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充具体可实现为：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

可选地，该坐标参数可包括横纵坐标参数和a平面二值表。此时，步骤101具体可实现为：根据帧缓冲区中的显示数据的图层属性从帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表，其中该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

可选地，该第一类图层为视频类图层，该第二类图层为图形类图层。

下面，将结合具体的实施例，对本发明实施例的方法作进一步的描述。

图2是本发明实施例屏幕共享的一个流程示意图。图2中，包括屏幕共享发送端设备和屏幕共享接收端设备。假设屏幕共享发送端设备包括4个图层图层1、图层2、图层3和图层4，其Z-order顺序是lay1-lay2-lay3-lay4，显示的内容分别是用户接口(User Interface，UI)操控界面，视频，3DUI，普通UI。当然，在实际的应用中，可推广到具有更多图层或更少图层的情况，其图层的类型可以更多，也可以更少，本发明实施例在此不作显示。另外，应理解，本发明实施例的方法只适用于多图层类型混合的场景，单一图层类型的应用场景可参考现有技术。

步骤2-1，根据图层属性，可将文字、图片等普通lay列为图形层；视频、3DUI列为视频层。当然，在实际的应用中，还可以根据图层的属性对图层做更进一步的划分，本发明实施例仅以将图层分成图形类图层和视频类图层为例进行说明。在图2中，屏幕共享发送端设备根据帧缓冲区1中的显示数据(lay1、lay2、lay3和lay4)的图层属性，可将图层1(UI操控界面)和图层4(普通UI)归为图形类，将图层2(视频)和图层4(3DUI)归为视频类。

步骤2-2，屏幕共享发送端设备可根据帧缓冲区1对应的图层渲染管理器1中的Z-order(lay1-lay2-lay3-lay4)读取lay1、lay2、lay3和lay4在目标显示界面中的显示区域的坐标参数，并根据图层属性将获取图形类图层在目标显示界面的显示区域以及视频类图层在目标显示界面的显示区域。图3是本发明实施例图形类图层的显示区域示意图，图形类图层的显示区域可如图3中斜线阴影部分区域所示。图4是本发明实施例视频类图层的显示区域示意图，视频类图层的显示区域可如图4中竖线阴影部分区域所示。

具体地，在图2中，屏幕共享发送端设备可通过图形类区域显示参数坐标计算模块获取图形类图层在目标显示界面中的显示区域的坐标参数，从而确定最终的图形类图层显示区域，并通过视频类区域显示参数坐标计算模块获取视频类图层在目标显示界面中的显示区域的坐标参数，从而确定最终的视频类图层显示区域。

以确定图形类图层显示区域为例。本发明实施例的一种实现方式，屏幕共享发送端设备可以将图形类图层显示区域图层1和图层4叠加形成一个图形类图层显示区域，如图3中斜线阴影部分区域所示。本发明实施例的另一种实现方式，屏幕共享发送端设备可以按图层划分，将每个图形类图层在目标显示界面中的显示区域作为一个图形类图层显示区域，从而形成多个图形类图层显示区域。图5是本发明实施例目标显示界面的多个图形图层显示区域示意图。目标显示界面的两个图层显示区域如图5中5-1和5-2的斜线阴影部分区域所示。

以确定视频类图层显示区域为例。本发明实施例的一种实现方式，屏幕共享发送端设备可以将视频类图层显示区域图层2和图层3叠加形成一个视频类图层显示区域。本发明实施例的另一种实现方式，屏幕共享发送端设备可以按图层划分，将每个视频类图层在目标显示界面中的显示区域作为一个视频类图层显示区域，从而形成多个图形类图层显示区域。本发明实施例的再一种实现方式，屏幕共享发送端设备可以对所有视频类图层的显示区域按照视频对象平面进行区域划分，每个视频对象平面对应的显示区域形成一个视频类图层显示区域。

步骤2-3，屏幕共享发送端设备根据划分后的图形类图层显示区域和视频类图层显示区域，从帧缓冲区1的显示数据中提取图形类图层显示区域和视频类图层显示区域对应的显示数据，进行透明数据填充，并采用对应的编码压缩方式进行编码。

如图2所示，屏幕共享发送端设备可通过图形压缩编码模块，根据图形类区域显示参数坐标计算模块得到的图形类图层显示区域的坐标参数，从帧缓冲区1中读取对应显示区域的显示数据，并对该对应显示区域的显示数据进行空白区域透明数据处理。例如，对图3中的白色区域，或图5的5-1和5-2中的白色区域进行透明数据处理。

类似地，屏幕共享发送端设备可通过视频压缩编码模块，根据视频类区域显示参数坐标计算模块得到的视频类图层显示区域的坐标参数，从帧缓冲区1中读取对应显示区域的显示数据，并进行空白区域透明数据处理。

在进行编码时，每一个图形类图层显示区域最终形成一个图形编码数据，每一个视频类图层显示区域最终形成一个视频编码数据。编码数据中可携带显示区域的显示数据及显示区域的坐标参数。具体地，该显示区域的坐标参数可以是一个a平面二值表，用于表示该显示区域在目标显示界面的显示区域中的显示有效性。

步骤2-4，将压缩后的图形编码数据和视频编码数据发送给屏幕共享接收端设备。

步骤2-5，屏幕共享接收端设备接收图形编码数据和视频编码数据，并对图形编码数据进行解码得到图形类图层显示数据，对视频编码数据进行解码得到视频类图层显示数据，并在屏幕共享接收端设备的图层渲染管理器2生成对应的图形类图层和视频类图层，然后合成最终显示数据输出到屏幕共享接收端设备的帧缓冲区2中并在显示设备中形成显示界面。

如上述步骤2-1所示，根据图层属性至少可将图层分为图形图层和视频图层两类。下面，将以视频图层为例，详细描述对某一类图层的编码过程。

图6是本发明实施例生成视频数据编码的方法流程图。

601，根据Z-order获取图层显示坐标参数。

根据图层渲染管理器在目标显示界面的图层叠加顺序Z-order，在最终显示区域获取相关显示坐标。

602，根据图层属性确定视频显示区域。

根据在最终显示区域的各个图层的图层属性，可将显示区域分为视频显示区域和图形显示区域。

603，确定视频显示区域的坐标参数。

根据图层显示坐标和图层属性，可生成显示区域的坐标参数，当图层属性为视频类图层时，可确定视频显示区域的坐标参数。

视频显示区域的坐标参数可包括视频显示区域的横纵坐标参数，该横纵坐标参数用于表示视频显示区域在横纵坐标轴上的坐标范围。视频显示区域的坐标参数还可包括视频显示区域的a平面二值表。根据视频显示区域的横纵坐标参数，可生成视频显示区域的a平面二值表。a平面二值表来表示每一帧显示数据中的每个像素点的图层属性，例如用1表示图形类，0表示视频类，则图2的共享区域可用图7的a平面二值表来表示。另外，a平面二值表还可用于表示一个视频显示区域，例如，用1表示在该视频显示区域以外的像素点，用0表示在该视频显示区域以内的像素点。根据视频显示区域的a平面二值表，可以很容易地确定视频显示区域所形成的图层中的空白区域，以便进行透明数据处理。

应理解，a平面二值表也可用于表示图层显示区域。例如，可用0表示在该图层显示区域以外的像素点，用1表示在该图层显示区域以内的像素点；或者，可用1表示在该图层显示区域以外的像素点，用0表示在该图层显示区域以内的像素点。

604，获取缓冲区中的视频显示区域对应的数据。

根据视频显示区域的坐标参数，可从帧缓冲区中提取视频显示区域对应的视频数据。

605，对视频显示区域的显示数据进行透明区域数据填充。

当a平面二值表中0表示视频显示区域内的像素点时，对于帧缓冲区中提取出视频显示区域的原始视频数据，在a平面二值表为1的地方填充透明视频数据。具体地，可预先设定采用0-255中的一个值来表示透明视频数据。

606，视频压缩生成视频编码数据。

将进行透明数据填充后的数据进行视频压缩处理后，可形成携带有a平面二值表的一帧视频编码数据，然后再进行发送。

由于a平面二值表和填充的透明视频数据经过压缩后数据量都很小，所以不会明显增加数据码率。

具体地，在进行视频类图层的处理时，还可根据视频目标压缩机制来进行对视频类图层的显示区域进行分割处理。图8是本发明实施例利用VOP技术传输视频图层的流程示意图。如图8所示，步骤8-1，屏幕共享发送端设备生成视频显示区域的a平面二值表，步骤8-2，屏幕共享发送端设备定义视频显示区域的多个目标。每一帧显示数据中的视频显示区域都可以划分成任意形状的图像区域，划分后的每一个图像区域称为一个视频对象平面(Video Object Plane，VOP)，每个VOP都是视频显示区域的一个独立的目标。一种VOP分割方式，可采用图像灰度特征、图像纹理特征等，基于小波变换进行VOP分割，其具体实现可参考现有技术，本发明实施例在此不再赘述。当然，也不排除采用其它手段进行VOP分割。步骤8-3，屏幕共享发送端设备分别对多个目标(VOP)进行编码。步骤8-4，屏幕共享发送端设备对多个目标编码后的编码数据进行复用，并发送给屏幕共享接收端设备。步骤8-5，屏幕共享接收端设备接收到编码数据后，进行解复用，形成多个编码数据。步骤8-6，屏幕共享接收端设备对多个编码数据进行解码。解码后，可得到多个目标(VOP)。步骤8-7，屏幕共享接收端设备合成视频图层。屏幕共享接收端设备根据解码后得到的多个目标(VOP)，可在图层渲染管理器合成视频显示图层，从而得到屏幕共享发送端设备中的视频显示区域的显示数据。视频图层通过VOP技术传输的具体实现可参考现有的VOP传输技术，本发明实施例在此不再赘述。

对图形类图层显示区域进行编码的过程可参考图6的实施例。如果将图形类图层显示区域作为一个整体进行编码，其编码的过程与图6中将视频类图层作为一个整体进行编码的过程类似。与视频类图层类似，也可利用图像灰度特征、图像纹理特征等对图形类图层的显示区域进行分割形成多个图形对象平面，其具体实现可参考VOP分割的方法。或者，如果将图形类图层显示区域分割成多个区域进行编码，可按照分割后的图形类图层显示区域的形状重新生成a平面二值表，每个图形类图层显示区域都存在一个对应的a平面二值表。然后再对每个图形类图层显示区域分别进行透明数据填充后再编码发送。

图9是本发明实施例另一屏幕共享的方法流程图。图9的方法由屏幕共享接收端设备执行。

901，接收屏幕共享发送端设备发送的至少一个第一类图层编码数据和至少一个第二类图层编码数据。

应理解，该第一类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据中第一类图层显示区域的显示数据，该第二类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据的第二类图层显示区域的显示数据。

另外，该第一类图层编码数据还可显式或隐式地携带第一类图层显示区域的坐标参数，该第二类图层编码数据还可显式或隐式地携带第二类图层显示区域的坐标参数。

902，分别对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据进行解码得到该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据。

903，对该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据进行显示合成以得到该屏幕共享发送端设备的共享界面。

本发明实施例中，通过对屏幕共享发送端设备按照图层属性采用不同编码压缩方式编码后传输的共享数据编码进行解码然后再合成显示，能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

可选地，该第一类图层显示区域对应的坐标参数包括该第一类图层显示区域的a平面二值表，该第一类图层显示区域的a平面二值表用于表示该第一类图层显示区域在该目标显示界面的显示区域中的显示有效性；该第二类图层显示区域对应的坐标参数包括该第二类图层显示区域的a平面二值表，该第二类图层显示区域的a平面二值表用于表示该第二类图层显示区域在该目标显示界面的显示区域中的显示有效性。

下面将结合具体的实施例，对本发明实施例的方法作进一步的描述。

图10是本发明实施例屏幕共享接收端设备屏幕共享的方法流程图。

1001，接收含有a平面二值表的压缩数据。

屏幕共享接收端设备接收来自屏幕共享发送端设备发送的压缩数据。其中，该压缩数据中可携带a平面二值表的信息，以及图层的编码信息。本发明实施例中，压缩数据至少包括视频类图层编码数据和图形类图层编码数据。

1002，解码器进行解码。

屏幕共享接收端设备接收到编码数据后，可通过解码器进行解码，以获得至少一个图形类图层显示区域和至少一个视频类图层显示区域。

1003，图层渲染管理器进行图形处理分别形成图形图层和视频图层后再进行合成。

当图形类图层显示区域多于1个时，图层渲染管理器可进行图层处理形成一个图形图层。类似地，当视频类图层显示区域多于1个时，图层渲染管理器可进行图层处理形成一个图形图层。

屏幕共享接收端设备可通过图层渲染管理器对解码后的数据进行图形处理，按图层的属性及对应的a平面二值表，形成图形图层和视频图层。

具体地，图层渲染管理器可根据解码后的图形类图层的数据及该图形类图层的数据对应的a平面二值表，在该图形类图层的数据对应的a平面二值表所表示的区域中形成该图形类图层，根据解码后的视频类图层的数据及该视频类图层的数据对应的a平面二值表，在该视频类图层的数据对应的a平面二值表所表示的区域中形成该视频类图层。

形成图形类图层和视频类图层后，图层渲染管理器对图形类图层和视频类图层进行合成，以形成完整的显示图层。该显示图层即屏幕共享发送端设备的屏幕共享界面在屏幕共享接收端设备的显示结果。

1004，输出到显示设备的帧缓冲区。

图层渲染管理器在将图形类图层和视频类图层合成一个完整的显示图层后，可将之输出到显示设备的帧缓冲区，进而通过显示控制器等输出到显示设备，在显示设备进行显示。

本发明实施例的方法，通过接收屏幕共享发送端设备发送的两类图层的编码数据并对两类图层进行渲染合成目标显示界面，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

图11是本发明实施例编码器1100的结构示意图。其中，本发明实施例编码器1100所在的终端设备，可以是移动终端设备，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是手机、平板电脑、或笔记本电脑等各个终端设备。编码器1100可包括坐标参数提取单元1101，编码处理单元1102和输出单元1103。

坐标参数提取单元1101，用于根据编码器1100所在的终端设备的帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数。

其中，该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据在该终端设备的显示装置中最终呈现的界面。

编码处理单元1102，用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据。

本发明实施例中，根据第一类图层显示区域的显示数据和坐标参数进行数据填充和压缩编码形成第一类图层编码，以及根据第二类图层显示区域的显示数据和坐标参数进行数据填充和压缩编码形成第二类图层编码，其具体实现可参考现有技术中图形数据压缩编码和视频数据压缩编码的技术方案，本发明实施例在此不再赘述。

应理解，第一类图层编码中，可携带第一类图层显示区域的显示数据和坐标参数。其中，第一类图层显示区域的坐标参数，可以是第一类图层编码显式携带的，也可以是第一类图层编码隐式携带的。

输出单元1103，用于将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据作为输出码流输出。

本发明实施例中，编码器通过将显示数据的图层按图层属性分类进行编码，使得在屏幕共享发送端能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

具体地，坐标参数提取单元1101可用于根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该终端设备中该帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从该终端设备中该帧缓冲区对应的图层渲染管理器中获取该第一类图层在目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

更具体地，该坐标参数可包括横纵坐标参数和a平面二值表。此时，坐标参数提取单元1101可用于：根据该帧缓冲区中显示数据的图层属性从该终端设备中该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表。其中，该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

可选地，作为一个实施例，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，编码处理单元1102具体用于：当该帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当该帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当该帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当该帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

进一步地，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，编码处理单元1102具体用于：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

更进一步地，当该第一类图层为视频类图层时，在用于将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，编码处理单元1102具体用于：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，在用于将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，编码处理单元1102具体用于：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

可选地，在用于分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，编码处理单元1102具体用于：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

可选地，屏幕共享接收端设备1100还可包括图层解析单元1104，用于根据帧缓冲区中显示数据的图层属性确定该第一类图层和该第二类图层。

可选地，该第一类图层为视频类图层，该第二类图层为图形类图层。

另外，编码器1100还可执行图1、图2、图6或图8的方法，并实现编码器在图1、图2、图6或图8所示实施例的功能或或屏幕共享发送端设备在图1、图2、图6或图8所示实施例的编码处理功能，具体可参考图1、图2、图6、图8所示的实施例，本发明在此不再赘述。

图12是本发明实施例屏幕共享接收端设备1200的结构示意图。其中，本发明实施例屏幕共享接收端设备1200，可以是终端设备，终端设备可以是移动终端设备，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是手机、平板电脑、或笔记本电脑等各个终端设备。屏幕共享接收端设备1200可包括：接收单元1201、解码处理单元1202、合成单元1203。

接收单元1201，用于接收屏幕共享发送端设备发送的至少一个第一类图层编码数据和至少一个第二类图层编码数据。

应理解，该第一类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据中第一类图层显示区域的显示数据，该第二类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据的第二类图层显示区域的显示数据。

另外，该第一类图层编码数据还可显式或隐式地携带第一类图层显示区域的坐标参数，该第二类图层编码数据还可显式或隐式地携带第二类图层显示区域的坐标参数。

解码处理单元1202，用于分别对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据进行解码得到该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据。

应理解，在实际的应用中，解码处理单元1202可以有多种具体实现形式。例如，解码处理单元1202可以包括一个第一类图层解码器和一个第二类图层解码器，分别对第一类图层显示区域和第二类图层显示区域进行解码。又例如，解码处理单元1202还可以是一个解码器池，解码器池中的每一个解码器都具备对第一类图层显示区域和第二类图层显示区域进行解码的功能。当然，解码处理单元1202还可能存在其它的实现形式，本发明实施例在此不再赘述。

合成单元1203，用于对该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据进行显示合成以得到该屏幕共享发送端设备的共享界面。

在具体的应用中，合成单元1203可以是一个具备图层合成能力的图层渲染管理器。当然，还可能存在其它具体的实现形式，本发明实施例在此不作限制。

本发明实施例中，屏幕共享接收端设备通过接收屏幕共享发送端设备发送的两类图层的编码数据并对两类图层进行渲染合成目标显示界面，能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

可选地，该第一类图层显示区域对应的坐标参数包括该第一类图层显示区域的a平面二值表，该第一类图层显示区域的a平面二值表用于表示该第一类图层显示区域在该目标显示界面的显示区域中的显示有效性；该第二类图层显示区域对应的坐标参数包括该第二类图层显示区域的a平面二值表，该第二类图层显示区域的a平面二值表用于表示该第二类图层显示区域在该目标显示界面的显示区域中的显示有效性。

另外，屏幕共享接收端设备1200还可执行图2、图8、图9、图10的方法，并实现屏幕共享接收端设备在图2、图8、图9、图10所示实施例的功能，具体可参考图2、图8、图9、图10所示的实施例，本发明在此不再赘述。

图13是本发明实施例屏幕共享发送端设备1300的结构示意图。其中，本发明实施例屏幕共享发送端设备1300，可以是终端设备，终端设备可以是移动终端设备，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是手机、平板电脑、或笔记本电脑等各个终端设备。屏幕共享发送端设备1300可包括通信接口1301、处理器1302、存储器1303和显示设备1305。

通信接口1301、处理器1302、存储器1303和显示设备1305通过总线1304系统相互连接。总线1304可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图13中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。

存储器1303，用于存放程序。具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。存储器1303可以包括只读存储器和随机存取存储器，并向处理器1302提供指令和数据。存储器1303可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。本发明实施例中，存储器1303还可包括帧缓冲区，用于存储该显示设备1305的显示数据。

处理器1302，用于调用存储器1303所存放的程序，并具体用于执行以下操作：

根据存储器1303的帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数，其中该第一类图层和该第二类图层根据各自的图层属性采用不同的编码压缩方式，该目标显示界面为该帧缓冲区中的显示数据在显示设备1305中最终呈现的界面；

根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；

通过通信接口1301将该至少一个第一类图层编码数据和该至少一个第二类图层编码数据向屏幕共享接收端设备发送，以便该屏幕共享接收端设备对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据解码并进行合成显示。

显示设备1305，用于显示屏幕共享发送端设备1300的显示数据。在具体的应用中，显示设备1305可包括如LCD、CRT、全息成像(Holographic)、投影(Projector)等。

上述如本发明图1、图2、图6、图8任一实施例揭示的屏幕共享发送端设备或编码器执行的方法可以应用于处理器1302中，或者由处理器1302实现。处理器1302可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器1302中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器1302可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(NetworkProcessor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器1303，处理器1302读取存储器1303中的信息，结合其硬件完成上述方法的步骤。

本发明实施例中，处理器1302可包括编码器，另外，还可包括中央处理器CPU、图形处理器GPU或专业渲染芯片中的一种或多种。应理解，本发明实施例中，处理器1302的编码功能，可通过一个具备多类型图层并行编码能力的编码器实现，或者由多个编码器组成的编码器池实现，该编码器池能够根据图层类型选择合适的编码器进行编码。

本发明实施例中，屏幕共享发送端设备通过将屏幕共享的显示数据的图层按图层属性分类进行编码传输，以在屏幕共享接收端设备合成显示数据，能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而一定程度上解决图文视频混合的共享屏幕的显示问题。

可选地，在用于根据存储器1303的帧缓冲区中的显示数据的图层属性从该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数的过程中，处理器1302具体用于：根据该帧缓冲区中的显示数据的图层属性，以及该帧缓冲区中显示数据在该帧缓冲区对应的渲染管理器的图层显示顺序Z-order，分别获取该第一类图层在目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数。

更具体地，该坐标参数可包括横纵坐标参数和a平面二值表。此时，在用于根据存储器1303的帧缓冲区中的显示数据的图层属性从该帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在该目标显示界面的显示区域的坐标参数的过程中，处理器1302具体用于：根据该帧缓冲区中的显示数据的图层属性从帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在该目标显示界面的显示区域的横纵坐标参数；根据该第一类图层在目标显示界面的显示区域的横纵坐标参数确定该第一类图层在目标显示界面的显示区域的a平面二值表，并根据该第二类图层在目标显示界面的显示区域的横纵坐标参数确定该第二类图层在目标显示界面的显示区域的a平面二值表。其中该第一类图层在目标显示界面的显示区域的a平面二值表用于表示该第一类图层在目标显示界面的显示区域的显示有效性，该第二类图层在目标显示界面的显示区域的a平面二值表用于表示该第二类图层在目标显示界面的显示区域的显示有效性。

可选地，作为一个实施例，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，处理器1302具体用于：当帧缓冲区中存在多个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数将M个该第一类图层在该目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者，当帧缓冲区中只有一个该第一类图层时，根据该第一类图层在该目标显示界面的显示区域的坐标参数确定该第一类图层显示区域；或者，当帧缓冲区中存在多个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数将N个该第二类图层在该目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者，当帧缓冲区中只有一个该第二类图层时，根据该第二类图层在该目标显示界面的显示区域的坐标参数确定该第二类图层显示区域。

进一步地，在用于根据该第一类图层在该目标显示界面的显示区域的坐标参数和该第二类图层在该目标显示界面的显示区域的坐标参数将该目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，处理器1302具体用于：将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者，将一个该第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

更进一步地，当该第一类图层为视频类图层时，在用于将一个该第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，处理器1302具体用于：将一个该第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者，当该第二类图层为图形类图层时，在用于将一个该第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，处理器1302具体用于：将一个该第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

可选地，在用于分别对该至少一个第一类图层显示区域的显示数据和该至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，处理器1302具体用于：在该至少一个第一类图层显示区域的显示数据中分别对每一个该第一类图层显示区域以外的区域进行透明数据处理，在该至少一个第二类图层显示区域的显示数据中分别对每一个该第二类图层显示区域以外的区域进行透明数据处理。

可选地，处理器1302还可用于通过图形处理器1304中的图层渲染管理器从存储器1303中帧缓冲区中显示数据的图层属性确定该第一类图层和该第二类图层。

可选地，该第一类图层为视频类图层，该第二类图层为图形类图层。

另外，屏幕共享发送端设备1300还可执行图1、图2、图6或图8的方法，并实现屏幕共享发送端设备或编码器在图1、图2、图6或图8所示实施例的功能，具体可参考图1、图2、图6、图8所示的实施例，本发明在此不再赘述。

图14是本发明实施例屏幕共享接收端设备1400的结构示意图。其中，本发明实施例屏幕共享接收端设备1400，可以是终端设备，终端设备可以是移动终端设备，如移动电话(或称为“蜂窝”电话)和具有移动终端的计算机，例如，可以是手机、平板电脑、或笔记本电脑等各个终端设备。

屏幕共享接收端设备1400可包括通信接口1401、处理器1402、存储器1403和显示设备1405。

通信接口1401、处理器1402和存储器1403通过总线1404系统相互连接。总线1404可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。为便于表示，图14中仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。

存储器1403，用于存放程序。具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。存储器1403可以包括只读存储器和随机存取存储器，并向处理器1402提供指令和数据。存储器1403可能包含高速RAM存储器，也可能还包括非易失性存储器(non-volatile memory)，例如至少一个磁盘存储器。

处理器1402，用于调用存储器1403所存放的程序，并具体用于执行以下操作：

通过通信接口1401接收屏幕共享发送端设备发送的至少一个第一类图层编码数据和至少一个第二类图层编码数据；

分别对该至少一个第一类图层编码数据和该至少一个第二类图层编码数据进行解码得到该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据；

对该至少一个第一类图层编码数据对应的图层显示数据和该至少一个第二类图层编码数据对应的图层显示数据进行显示合成以得到目标显示数据；

将目标显示数据输出到显示设备1405中。

显示设备1405，用于显示屏幕共享接收端设备1400的显示数据。在具体的应用中，显示设备1405可包括如LCD、CRT、全息成像(Holographic)、投影(Projector)等。

应理解，该第一类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据中第一类图层显示区域的显示数据，该第二类图层编码数据可携带屏幕共享发送端设备的共享界面显示数据的第二类图层显示区域的显示数据。

另外，该第一类图层编码数据还可显式或隐式地携带第一类图层显示区域的坐标参数，该第二类图层编码数据还可显式或隐式地携带第二类图层显示区域的坐标参数。

其中，本发明实施例中，显示设备1405可以是显示器、触摸屏等。上述如本发明图2、图8、图9、图10任一实施例揭示的屏幕共享接收端设备执行的方法可以应用于处理器1402中，或者由处理器1402实现。处理器1402可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器1402中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器1402可以是通用处理器，包括中央处理器(CentralProcessing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器1403，处理器1402读取存储器1403中的信息，结合其硬件完成上述方法的步骤。

本发明实施例中，屏幕共享接收端设备通过接收屏幕共享发送端设备发送的两类图层的编码数据并对两类图层进行渲染合成目标显示界面，能够根据图层类型的不同采用适合图层类型的编码压缩方式，避免因采用同一种编码压缩方式导致的图形传输不流畅或图形传输不清晰的问题，从而能够在一定程度上解决图文视频混合的共享屏幕的显示问题。

可选地，该第一类图层显示区域对应的坐标参数包括该第一类图层显示区域的a平面二值表，该第一类图层显示区域的a平面二值表用于表示该第一类图层显示区域在该目标显示界面的显示区域中的显示有效性；该第二类图层显示区域对应的坐标参数包括该第二类图层显示区域的a平面二值表，该第二类图层显示区域的a平面二值表用于表示该第二类图层显示区域在该目标显示界面的显示区域中的显示有效性。

另外，屏幕共享接收端设备1400还可执行图2、图8、图9、图10的方法，并实现屏幕共享接收端设备在图2、图8、图9、图10所示实施例的功能，具体可参考图2、图8、图9、图10所示的实施例，本发明在此不再赘述。

图15是本发明实施例屏幕共享系统1500的结构示意图。屏幕共享系统1500可包括屏幕共享发送端设备1501和屏幕共享接收端设备1502。其中，屏幕共享发送端设备1501可以是图11所示的编码器1100或图13所示的屏幕共享发送端设备1300，其具体实现可参考图11或图13所示实施例；屏幕共享接收端设备1502可以是图12所示的屏幕共享接收端设备1200或图14所示的屏幕共享接收端设备1400，其具体实现可参考图12或图14所示实施例。

本发明实施例的屏幕共享场景是屏幕共享发送端设备1501和屏幕共享接收端设备1502之间的屏幕共享，在本发明实施例系统中，屏幕共享发送端设备1501和屏幕共享接收端设备1502是独立的两个终端设备，例如可以是移动终端与移动终端之间的屏幕共享，也可以是移动终端与电视TV大屏幕之间的屏幕共享；例如可以是一对一的屏幕共享，也可以是一对多的屏幕共享。

应当理解，对于一个终端设备而言，在某个屏幕共享场景下，该终端设备是作为屏幕共享发送端设备1501；而在另外一个屏幕共享场景下，该终端设备是作为屏幕共享接收端设备1502；换言之，对于一个终端设备而言，它可以具备屏幕共享发送端设备1501和屏幕共享接收端设备1502二者的功能。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等，例如，具体可以是前述设备中的处理器)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应所述以权利要求的保护范围为准。

Claims (29)

1.一种编码方法，其特征在于，包括：

根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数，其中所述第一类图层和所述第二类图层根据各自的图层属性采用不同的编码压缩方式，所述目标显示界面为所述帧缓冲区中的显示数据最终呈现的界面；

根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；

将所述至少一个第一类图层编码数据和所述至少一个第二类图层编码数据作为输出码流输出。

2.如权利要求1所述的方法，其特征在于，所述根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数包括：

根据所述帧缓冲区中的显示数据的图层属性，以及所述帧缓冲区中显示数据在所述帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从所述帧缓冲区对应的图层渲染管理器中获取所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数。

3.如权利要求2所述的方法，其特征在于，所述坐标参数包括横纵坐标参数和a平面二值表，所述根据帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数包括：

根据所述帧缓冲区中显示数据的图层属性从所述帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在所述目标显示界面的显示区域的横纵坐标参数；

根据所述第一类图层在目标显示界面的显示区域的横纵坐标参数确定所述第一类图层在目标显示界面的显示区域的a平面二值表，并根据所述第二类图层在目标显示界面的显示区域的横纵坐标参数确定所述第二类图层在目标显示界面的显示区域的a平面二值表，其中所述第一类图层在目标显示界面的显示区域的a平面二值表用于表示所述第一类图层在目标显示界面的显示区域的显示有效性，所述第二类图层在目标显示界面的显示区域的a平面二值表用于表示所述第二类图层在目标显示界面的显示区域的显示有效性。

4.如权利要求1至3任一项所述的方法，其特征在于，所述根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域包括：

当所述帧缓冲区中存在多个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数将M个所述第一类图层在所述目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者

当所述帧缓冲区中只有一个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数确定所述第一类图层显示区域；或者

当所述帧缓冲区中存在多个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数将N个所述第二类图层在所述目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者

当所述帧缓冲区中只有一个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数确定所述第二类图层显示区域。

5.如权利要求4所述的方法，其特征在于，所述根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域还包括：

将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者

将一个所述第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

6.如权利要求5所述的方法，其特征在于，

当所述第一类图层为视频类图层时，所述将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域包括：将一个所述第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者

当所述第二类图层为图形类图层时，所述将一个所述第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域包括：

将一个所述第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

7.如权利要求1至6任一项所述的方法，其特征在于，所述分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充包括：

在所述至少一个第一类图层显示区域的显示数据中分别对每一个所述第一类图层显示区域以外的区域进行透明数据处理，在所述至少一个第二类图层显示区域的显示数据中分别对每一个所述第二类图层显示区域以外的区域进行透明数据处理。

8.如权利要求1至7任一项所述的方法，其特征在于，所述第一类图层为视频类图层，所述第二类图层为图形类图层。

9.一种编码器，其特征在于，包括：

坐标参数提取单元，用于根据所述编码器所在的终端设备的帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数，其中所述第一类图层和所述第二类图层根据各自的图层属性采用不同的编码压缩方式，所述目标显示界面为所述帧缓冲区中的显示数据在所述终端设备的显示装置中最终呈现的界面；

编码处理单元，用于根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充并采用对应的编码压缩方式分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；

输出单元，用于将所述至少一个第一类图层编码数据和所述至少一个第二类图层编码数据作为输出码流输出。

10.如权利要求9所述的编码器，其特征在于，所述坐标参数提取单元具体用于根据所述帧缓冲区中的显示数据的图层属性，以及所述帧缓冲区中显示数据在所述终端设备中所述帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别从所述终端设备中所述帧缓冲区对应的图层渲染管理器中获取所述第一类图层在目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数。

11.如权利要求10所述的编码器，其特征在于，所述坐标参数包括横纵坐标参数和a平面二值表，所述坐标参数提取单元具体用于：

根据所述帧缓冲区中显示数据的图层属性从所述终端设备中所述帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在所述目标显示界面的显示区域的横纵坐标参数；

根据所述第一类图层在目标显示界面的显示区域的横纵坐标参数确定所述第一类图层在目标显示界面的显示区域的a平面二值表，并根据所述第二类图层在目标显示界面的显示区域的横纵坐标参数确定所述第二类图层在目标显示界面的显示区域的a平面二值表，其中所述第一类图层在目标显示界面的显示区域的a平面二值表用于表示所述第一类图层在目标显示界面的显示区域的显示有效性，所述第二类图层在目标显示界面的显示区域的a平面二值表用于表示所述第二类图层在目标显示界面的显示区域的显示有效性。

12.如权利要求9至11任一项所述的编码器，其特征在于，在用于根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，所述编码处理单元具体用于：

当所述帧缓冲区中存在多个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数将M个所述第一类图层在所述目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者

当所述帧缓冲区中只有一个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数确定所述第一类图层显示区域；或者

当所述帧缓冲区中存在多个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数将N个所述第二类图层在所述目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者

当所述帧缓冲区中只有一个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数确定所述第二类图层显示区域。

13.如权利要求12所述的编码器，其特征在于，在用于根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，所述编码处理单元具体还用于：

将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者

将一个所述第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

14.如权利要求13所述的编码器，其特征在于，

当所述第一类图层为视频类图层时，在用于将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，所述编码处理单元具体用于：将一个所述第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者

当所述第二类图层为图形类图层时，在用于将一个所述第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，所述编码处理单元具体用于：将一个所述第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

15.如权利要求9至14任一项所述的编码器，其特征在于，在用于分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，所述编码处理单元具体用于：

在所述至少一个第一类图层显示区域的显示数据中分别对每一个所述第一类图层显示区域以外的区域进行透明数据处理，在所述至少一个第二类图层显示区域的显示数据中分别对每一个所述第二类图层显示区域以外的区域进行透明数据处理。

16.如权利要求9至15任一项所述的编码器，其特征在于，还包括：

图层解析单元，用于根据所述帧缓冲区中显示数据的图层属性确定所述第一类图层和所述第二类图层。

17.如权利要求9至16任一项所述的编码器，其特征在于，所述第一类图层为视频类图层，所述第二类图层为图形类图层。

18.一种屏幕共享发送端设备，其特征在于，包括处理器、存储器、通信接口和显示设备，所述处理器与所述存储器相连，其中

所述存储器中存储一组程序代码，所述存储器还包括帧缓冲区，用于存储所述显示设备的显示数据；

所述处理器用于调用所述存储器中存储的程序代码，用于执行以下操作：

根据所述帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数，其中所述第一类图层和所述第二类图层根据各自的图层属性采用不同的编码压缩方式，所述目标显示界面为所述帧缓冲区中的显示数据在所述显示设备最终呈现的界面；

根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域，并分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充，并采用对应的编码压缩方式分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行编码压缩以形成至少一个第一类图层编码数据和至少一个第二类图层编码数据；

通过通信接口将所述至少一个第一类图层编码数据和所述至少一个第二类图层编码数据向屏幕共享接收端发送，以便所述屏幕共享接收端对所述至少一个第一类图层编码数据和所述至少一个第二类图层编码数据解码并进行合成显示。

19.如权利要求18所述的屏幕共享发送端设备，其特征在于，所述处理器包括图层渲染管理器，在用于根据所述帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数的过程中，所述处理器具体用于：

根据所述帧缓冲区中的显示数据的图层属性，以及所述帧缓冲区中显示数据在所述帧缓冲区对应的图层渲染管理器的图层显示顺序Z-order，分别获取所述第一类图层在目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数。

20.如权利要求19所述的屏幕共享发送端设备，其特征在于，所述坐标参数包括横纵坐标参数和a平面二值表，在用于根据所述帧缓冲区中显示数据的图层属性分别获取第一类图层在目标显示界面的显示区域的坐标参数和第二类图层在所述目标显示界面的显示区域的坐标参数的过程中，所述处理器具体用于：

根据所述帧缓冲区中的显示数据的图层属性从所述帧缓冲区对应的图层渲染管理器中分别获取第一类图层在目标显示界面的显示区域的横纵坐标参数和第二类图层在所述目标显示界面的显示区域的横纵坐标参数；

根据所述第一类图层在目标显示界面的显示区域的横纵坐标参数确定所述第一类图层在目标显示界面的显示区域的a平面二值表，并根据所述第二类图层在目标显示界面的显示区域的横纵坐标参数确定所述第二类图层在目标显示界面的显示区域的a平面二值表，其中所述第一类图层在目标显示界面的显示区域的a平面二值表用于表示所述第一类图层在目标显示界面的显示区域的显示有效性，所述第二类图层在目标显示界面的显示区域的a平面二值表用于表示所述第二类图层在目标显示界面的显示区域的显示有效性。

21.如权利要求18至20任一项所述的屏幕共享发送端设备，其特征在于，在用于根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述最终显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，所述处理器具体用于：

当所述帧缓冲区中存在多个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数将M个所述第一类图层在所述目标显示界面的显示区域相叠加形成一个第一类图层显示区域，其中，M为大于1的整数；或者

当所述帧缓冲区中只有一个所述第一类图层时，根据所述第一类图层在所述目标显示界面的显示区域的坐标参数确定所述第一类图层显示区域；或者

当所述帧缓冲区中存在多个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数将N个所述第二类图层在所述目标显示界面的显示区域相叠加形成一个第二类图层显示区域，其中，N为大于1的整数；或者

当所述帧缓冲区中只有一个所述第二类图层时，根据所述第二类图层在所述目标显示界面的显示区域的坐标参数确定所述第二类图层显示区域。

22.如权利要求21所述的屏幕共享发送端设备，其特征在于，

在用于根据所述第一类图层在所述目标显示界面的显示区域的坐标参数和所述第二类图层在所述目标显示界面的显示区域的坐标参数将所述目标显示界面的显示区域分成至少一个第一类图层显示区域和至少一个第二类图层显示区域的过程中，所述处理器具体还用于：

将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域，其中，P为大于1的整数；或者

将一个所述第一类图层显示区域按照像素特征分成Q个新的第一类图层显示区域，其中，Q为大于1的整数。

23.如权利要求22所述的屏幕共享发送端设备，其特征在于，

当所述第一类图层为视频类图层时，在用于将一个所述第一类图层显示区域按照像素特征分成P个新的第一类图层显示区域的过程中，所述处理器具体用于：将一个所述第一类图层显示区域按照图像灰度特征或图像纹理特征分成P个视频对象平面，并以视频对象平面所在区域为显示区域形成新的第一类图层显示区域；或者

当所述第二类图层为图形类图层时，在用于将一个所述第二类图层显示区域按照像素特征分成Q个新的第二类图层显示区域的过程中，所述处理器具体用于：将一个所述第二类图层显示区域按照图像形状特征分成Q个图像对象平面，并以图像对象平面所在区域为显示区域形成新的第二类图层显示区域。

24.如权利要求18至23任一项所述的屏幕共享发送端设备，其特征在于，其特征在于，在用于分别对所述至少一个第一类图层显示区域的显示数据和所述至少一个第二类图层显示区域的显示数据进行空白区域透明数据填充的过程中，所述处理器具体用于：

在所述至少一个第一类图层显示区域的显示数据中分别对每一个所述第一类图层显示区域以外的区域进行透明数据处理，在所述至少一个第二类图层显示区域的显示数据中分别对每一个所述第二类图层显示区域以外的区域进行透明数据处理。

25.如权利要求18至24任一项所述的屏幕共享发送端设备，其特征在于，所述处理器还用于：根据所述帧缓冲区中显示数据的图层属性确定所述第一类图层和所述第二类图层。

26.如权利要求18至25任一项所述的屏幕共享发送端设备，其特征在于，所述第一类图层为视频类图层，所述第二类图层为图形类图层。

27.如权利要求18至26任一项所述的屏幕共享发送端设备，其特征在于，所述处理器包括编码器，以及

中央处理器CPU、图形处理器GPU或专业渲染芯片中的一种或多种。

28.一种屏幕共享接收端设备，其特征在于，包括处理器、存储器、通信接口和显示设备，所述处理器与所述存储器相连，其中

所述存储器中存储一组程序代码；

所述处理器用于调用所述存储器中存储的程序代码，用于执行以下操作：

通过通信接口接收屏幕共享发送端设备发送的至少一个第一类图层编码数据和至少一个第二类图层编码数据；

分别对所述至少一个第一类图层编码数据和所述至少一个第二类图层编码数据进行解码得到所述至少一个第一类图层编码数据对应的图层显示数据和所述至少一个第二类图层编码数据对应的图层显示数据；

对所述至少一个第一类图层编码数据对应的图层显示数据和所述至少一个第二类图层编码数据对应的图层显示数据进行显示合成以得到目标显示数据；

将所述目标显示数据输出到所述显示设备中。

29.一种屏幕共享系统，其特征在于，包括：

如权利要求18至27任一项所述的屏幕共享发送端设备，和如权利要求28所述的屏幕共享接收端设备。