CN112367521B - 显示屏内容分享方法、装置、计算机设备和存储介质 - Google Patents
显示屏内容分享方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN112367521B CN112367521B CN202011163731.XA CN202011163731A CN112367521B CN 112367521 B CN112367521 B CN 112367521B CN 202011163731 A CN202011163731 A CN 202011163731A CN 112367521 B CN112367521 B CN 112367521B
- Authority
- CN
- China
- Prior art keywords
- image
- target
- candidate
- size
- candidate image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 82
- 238000004590 computer program Methods 0.000 claims description 34
- 239000000945 filler Substances 0.000 claims description 20
- 230000008569 process Effects 0.000 claims description 19
- 230000010365 information processing Effects 0.000 abstract description 2
- 238000012545 processing Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 9
- 230000000153 supplemental effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 208000003028 Stuttering Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本申请公开了一种显示屏内容分享方法、装置、计算机设备和存储介质,涉及图像信息处理技术领域。该显示屏内容分享方法包括:获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;该第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除得到候选图像。本申请实施例可以保证分享的视频画面的流畅性。
Description
技术领域
本申请涉及图像信息处理技术领域,特别是涉及一种显示屏内容分享方法、装置、计算机设备和存储介质。
背景技术
随着直播技术的快速发展,传统的基于摄像头内容的视频分享已经不能满足人们的需求。在越来越多的应用场景下,人们需要进行显示屏内容分享,其中,显示屏内容例如可以是指计算机图形文本、自然图像与计算机图形文本结合得到的混合图像以及计算机生成的动画等内容。
现有技术中,在显示屏内容分享的过程中,分享发送端可以基于显示屏的显示区域所显示的显示屏内容采集待分享的视频,并对待分享的视频包括的每一帧候选图像进行编码处理后,发送给分享接收端。由于用户可能会对正在分享的显示屏内容进行拖拽以放大或者缩小显示屏内容,当正在分享的显示屏内容的尺寸处于变化状态时,就会导致分享发送端采集到的视频包括的候选图像的分辨率不相同,对于不同分辨率的候选图像,需要重启不同的编码器进行编码。
然而,重启编码器不可避免地会造成延时。这样就会导致分享接收端显示的视频出现卡顿,视频的流畅性下降。
发明内容
基于此,本申请实施例提供了一种显示屏内容分享方法、装置、计算机设备和存储介质。
第一方面,提供了一种显示屏内容分享方法,应用于分享发送端,该方法包括:
获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,目标图像由候选图像和填充图像组成;
基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;
第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,该方法还包括:
将裁剪指示信息发送至分享接收端;
其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,裁剪指示信息用于指示分享接收端基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,获取待分享的候选图像,包括:
在显示屏的显示区域中确定待分享的目标区域;
周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。
在其中一个实施例中,基于候选图像生成预设尺寸的目标图像,包括:
获取候选图像的尺寸;
根据候选图像的尺寸和预设尺寸确定填充图像的尺寸;
根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
在其中一个实施例中,预设尺寸为显示屏的显示区域的尺寸,根据候选图像的尺寸和预设尺寸确定填充图像的尺寸,包括:
获取目标区域在显示屏的显示区域的位置;
根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
在其中一个实施例中,基于候选图像生成预设尺寸的目标图像,包括:
检测候选图像的尺寸是否小于预设尺寸;
若候选图像的尺寸小于预设尺寸,则基于候选图像生成目标图像。
在其中一个实施例中,该方法还包括:
若候选图像的尺寸等于预设尺寸,则基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端;
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
第二方面,提供了一种显示屏内容分享方法,应用于分享接收端,该方法包括:
接收第一编码图像,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像;
基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像;
将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,该方法还包括:
接收分享发送端发送的裁剪指示信息,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息;
基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,该方法还包括:
接收第二编码图像,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的;
基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
第三方面,提供了一种显示屏内容分享装置,应用于分享发送端,该装置包括:
获取模块,用于获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,目标图像由候选图像和填充图像组成;
编码模块,用于基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,编码模块,还用于将裁剪指示信息发送至分享接收端;其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,裁剪指示信息用于指示分享接收端基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,获取模块,还用于在显示屏的显示区域中确定待分享的目标区域;
周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。
在其中一个实施例中,获取模块,还用于获取候选图像的尺寸;
根据候选图像的尺寸和预设尺寸确定填充图像的尺寸;
根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
在其中一个实施例中,预设尺寸为显示屏的显示区域的尺寸,获取模块,还用于获取目标区域在显示屏的显示区域的位置;
根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
在其中一个实施例中,获取模块,还用于检测候选图像的尺寸是否小于预设尺寸;
若候选图像的尺寸小于预设尺寸,则基于候选图像生成目标图像。
在其中一个实施例中,获取模块,还用于若候选图像的尺寸等于预设尺寸,则基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端;
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
第四方面,提供了一种显示屏内容分享装置,应用于分享接收端,该装置包括:
接收模块,用于接收第一编码图像,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像;
解码模块,用于基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像;
裁剪模块,用于将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,裁剪模块,还用于接收分享发送端发送的裁剪指示信息,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息;
基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,接收模块,还用于接收第二编码图像,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的;
解码模块,还用于基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
第五方面,提供了一种计算机设备,包括存储器和处理器,该存储器存储有计算机程序,该计算机程序被该处理器执行时实现如上述第一方面所述方法的步骤,或者,计算机程序被处理器执行时实现如上述第二方面所述方法的步骤。
第六方面,提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述第二方面任一项所述方法的步骤,或者,计算机程序被处理器执行时实现如上述第二方面所述方法的步骤。
本申请实施例提供的技术方案带来的有益效果至少包括:
在对显示屏内容进行分享的过程中,分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,该目标图像由候选图像和填充图像组成;然后,分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;该第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。本申请实施例中,通过基于候选图像生成预设尺寸的目标图像,然后基于与预设尺寸对应的目标编码算法对预设尺寸的目标图像进行编码处理,这样即使候选图像的大小实时发生变化,编码器也无需重启,保证了分享的视频画面的流畅性。
附图说明
图1为本申请实施例涉及到的一种实施环境的示意图;
图2为本申请实施例提供的一种显示屏内容分享方法的流程图;
图3为本申请实施例提供的一种目标图像的示意图;
图4为本申请实施例提供的一种生成目标图像的方法的流程图;
图5为本申请实施例提供的另一种目标图像的示意图;
图6为本申请实施例提供的一种确定填充图像的尺寸的方法的流程图;
图7为本申请实施例提供的另一种显示屏内容分享方法的流程图;
图8为本申请实施例提供的另一种显示屏内容分享方法的流程图;
图9为本申请实施例提供的一种显示屏内容分享方法的流程图;
图10为本申请实施例提供的一种显示屏内容分享装置的框图;
图11为本申请实施例提供的另一种显示屏内容分享装置的框图;
图12为本申请实施例提供的一种计算机设备的框图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
随着近年来在线教育和视频会议等新型多媒体在线业务的兴起,在线实时分享(即直播)将会成为炙手可热的焦点,其中,在线实时分享是用视频的方式通过视频实时通信(英文:Real-time Communications,简称:RTC)系统进行的,它可以是全屏分享(英文:Screen Full Sharing,简称:SFC),也可以是任意窗口大小的部分屏幕窗口分享(英文:Screen Window Sharing,简称:SWC)。
传统的在线实时分享是指分享发送端通过摄像头拍摄视频内容,并将拍摄的视频内容方给分享接收端。然而,随着直播技术的快速发展,传统的基于摄像头拍摄内容的视频分享已经不能满足人们的需求。在越来越多的应用场景下,人们需要进行显示屏内容分享,其中,显示屏内容例如可以是指计算机图形文本、自然图像与计算机图形文本结合得到的混合图像以及计算机生成的动画等内容。
现有技术中,在显示屏内容分享的过程中,用户可能会对正在分享的显示屏内容进行拖拽以放大或者缩小显示屏内容,这样当正在分享的显示屏内容的尺寸处于变化状态时,就会导致分享发送端采集到的视频中的每一帧视频图像的分辨率都不相同,对于不同分辨率的视频图像,需要重启不同的编码器进行编码,而重启编码器不可避免地会造成延时。相应的,在分享接收端,也需要启动不同的解码器对接收到的视频中的不同视频图像进行解码,也会造成延时,这样就会导致分享接收端显示的视频出现卡顿,视频的流畅性下降。
在另一种应用场景中,分享发送端获取待分享的视频,待分享的视频是有多张待分享的候选图像组成的,对于每个候选图像,分享发送端需要将候选图像缩放为与预设编码算法对应的尺寸,然后进行编码。而在分享接收端解码之后,分享接收端需要将解码的图像再次缩放为候选图像的原始尺寸,然后进行显示。由于分享接收端显示的图像相比于候选图像经过了两次缩放处理,使得视频图像的画面质量下降,原本锐利的边缘变得模糊,因此,在分享接收端最终显示的视频的画面质量较差。
基于上述技术问题,本申请实施例提供了一种显示屏内容分享方法,在对显示屏内容进行分享的过程中,分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,该目标图像由候选图像和填充图像组成;然后,分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;该第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。本申请实施例中,通过基于候选图像生成预设尺寸的目标图像,然后基于与预设尺寸对应的目标编码算法对预设尺寸的目标图像进行编码处理,这样即使候选图像的大小实时发生变化,编码器也无需重启,保证了分享的视频画面的流畅性。
进一步的,本申请实施例中,候选图像在分享发送端和分享接收端均未进行尺寸缩放,因此避免了由于尺寸缩放导致的画面质量下降的问题。
下面,将对本申请实施例提供的显示屏内容分享方法所涉及到的实施环境进行简要说明。
如图1所示,图1示出了一种显示屏内容分享系统,该显示屏内容分享系统包括分享发送端101、服务器102和至少一个分享接收端103(图1中仅示例性地示出了一个分享接收端103),其中,分享发送端101可以通过有线或无线网络与服务器102通信,分享接收端103也可以通过有线或无线网络与服务器102通信。
其中,分享发送端101和分享接收端103可以是个人计算机、笔记本电脑、媒体播放器、智能电视、智能手机、平板电脑和便携式可穿戴设备等数字设备,本申请实施例对分享发送端101和分享接收端103的类型也不作具体限定。
服务器102可以是一台服务器,也可以是由多台服务器组成的服务器集群,服务器102可以是塔式服务器、机架服务器、刀片式服务器、高密度服务器、单路服务器、双路服务器或者多路服务器等,本申请实施例对服务器102的类型不作具体限定。
请参考图2,其示出了本申请实施例提供的一种显示屏内容分享方法的流程图,该显示屏内容分享方法应用于分享发送端,如图2所示,该显示屏内容分享方法可以包括以下步骤:
步骤201、分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像。
其中,目标图像由候选图像和填充图像组成。
本申请实施例中,分享发送端可以调用截图工具从显示屏的显示区域所显示的图像中截取待分享的候选图像。
可选的,本申请实施例中,分享发送端可以在显示屏的显示区域中确定待分享的目标区域,然后,周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。其中,待分享的目标区域可以是显示屏的显示区域中的部分或者全部区域,可选的,待分享的目标区域还可以是显示屏所显示的屏幕窗口所覆盖的区域,其中,屏幕窗口例如是文件夹窗口、视频播放窗口、应用窗口以及文件展示窗口等。分享发送端可以对目标区域中显示的图像内容进行截图得到候选图像。
本申请实施例中,待分享的目标区域的尺寸是可变的。例如当用户对显示屏中显示的屏幕窗口进行放大缩小时,屏幕窗口所覆盖的区域发生变化,相应的,待分享的目标区域的尺寸也发生变化。这样,从待分享的目标区域内截取的待分享的候选图像的尺寸也发生了变化。由于对不同尺寸的候选图像进行编码需要启动不同的编码器,这样会导致画面卡顿。为了解决这个问题,本申请实施例中,将不同尺寸的候选图像均处理为预设尺寸的目标图像,然后对目标图像进行编码,这样在进行编码时,需要启动不同的编码器,从而保证了画面的流畅性。
其中,分享发送端基于候选图像生成预设尺寸的目标图像的过程可以包括以下内容:分享发送端可以获取填充图像,将填充图像拼接到候选图像的边缘的外侧,得到拼接图像,然后以候选图像为中心,对拼接图像进行剪裁,得到预设尺寸的目标图像。如图3所示,图3示出了一种目标图像,其中A区域表示候选图像,B区域表示填充图像。填充图像可以是任意图像,也可以是填充像素组成的图像。
步骤202、分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端。
其中,第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
本申请实施例中,分享发送端中设置有与预设尺寸对应的编码器,该编码器可以运行与预设尺寸对应的目标编码算法,从而对目标图像进行编码处理,得到第一编码图像。其中,编码处理是指依照H264/H265等国际标准进行软件编码或者硬件编码,目标编码算法对应的编码分辨率为预设尺寸。分享发送端可以将第一编码图像发送至服务器,由服务器转发给分享接收端。
本申请实施例中,分享接收端中预先存储有多个解码器,不同的解码器可以运行不同的解码算法,而不同的解码算法对应于不同的图像尺寸。分享接收端在接收到第一编码图像之后,可以根据第一编码图像的码流格式从多个解码器中选择合适的目标解码器,目标解码器运行的解码算法为与预设尺寸对应的目标解码算法,分享接收端可以采用目标解码器对第一编码图像进行解码处理,经过解码处理可以得到目标图像,然后,分享接收端可以从目标图像中将填充图像裁剪去除,得到候选图像,然后分享接收端可以展示该候选图像,完成显示屏内容分享的过程。
可选的,本申请实施例中,分享发送端还可以将裁剪指示信息发送至分享接收端。其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息。
其中,分享发送端在对目标图像进行编码处理的过程中,可以将候选图像的补充增强信息通过编码加入到第一编码图像中,其中补充增强信息即裁剪指示信息,补充增强信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息。分享接收端接收到裁剪指示信息之后,可以基于裁剪指示信息将填充图像从目标图像中裁剪去除。
其中,分享接收端根据目标解码算法对第一编码图像进行解码处理,解码器在获取目标图像的同时,还可以从补充增强信息中解码出候选图像的尺寸信息,或者,解码出候选图像的尺寸信息和候选图像在目标图像中的位置信息。然后,分享接收端可以根据候选图像的尺寸信息,或者,根据候选图像的尺寸信息和候选图像在目标图像中的位置信息,从目标图像中将候选图像剪裁出来。然后将候选图像的格式转换为分享接收端的显示器支持的格式进行显示。
本申请实施例提供的显示屏内容分享方法,在对显示屏内容进行分享的过程中,分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,该目标图像由候选图像和填充图像组成;然后,分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;该第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。本申请实施例中,通过基于候选图像生成预设尺寸的目标图像,然后基于与预设尺寸对应的目标编码算法对预设尺寸的目标图像进行编码处理,这样即使候选图像的大小实时发生变化,编码器也无需重启,保证了分享的视频画面的流畅性。
在本申请的一个实施例中,如图4所示,分享发送端基于候选图像生成预设尺寸的目标图像的过程还可以包括以下内容:
步骤401,分享发送端获取候选图像的尺寸。
在分享发送端截取候选图像时,即可获取候选图像的尺寸。
步骤402,分享发送端根据候选图像的尺寸和预设尺寸确定填充图像的尺寸。
填充图像的尺寸包括候选图像的四个边到目标图像的四个边的距离。
其中,分享发送端可以预先设置候选图像在目标图像中的位置,例如候选图像可以位于目标图像的中间或者四个角,或者,可以位于目标图像中的任意一个位置。基于该位置,根据候选图像的四个边的尺寸和预设尺寸计算候选图像的四个边分别到目标图像的四个边的距离,从而得到填充图像的尺寸。如图5所示,图5示出了一种目标图像,其中A区域表示候选图像,B区域表示填充图像,H1、H2、H3和H4表示填充图像的尺寸。
其中,候选图像在目标图像中的位置可以是指候选图像的中心像素点在目标图像中的位置,或者候选图像的四个角中的任意一个角的像素点在目标图像中的位置。
在一种可选的实现方式中,当预设尺寸为显示屏的显示区域的尺寸时,如图6所示,分享发送端根据候选图像的尺寸和预设尺寸确定填充图像的尺寸的过程可以包括以下内容:
步骤601,分享发送端获取目标区域在显示屏的显示区域的位置。
在分享发送端截取候选图像时,即可获取目标区域在显示屏的显示区域中的位置。
步骤602,分享发送端根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
本申请实施例中,分享发送端根据目标区域在显示屏的显示区域的位置可以确定候选图像与目标图像的位置关系,基于该位置关系,可以根据候选图像的尺寸和预设尺寸计算候选图像的四个边分别到目标图像的四个边的距离,从而得到位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
步骤403,分享发送端根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
本申请实施例中,在获取了填充图像的尺寸以及候选图像的尺寸的情况下,分享发送端还可以获取候选图像中每个像素的像素值以及填充图像中预设的填充像素的像素值。然后,分享发送端可以根据填充图像的尺寸和候选图像的尺寸遍历目标图像的每个像素以确定该像素属于填充图像或者输出候选图像,并根据填充像素的像素值或者候选图像中每个像素的像素值对每个像素进行图像渲染,得到目标图像。
本申请实施例,根据候选图像的尺寸和预设尺寸生成目标图像,确保了目标图像的尺寸为预设尺寸,这样在候选图像的尺寸实时变化的情况下,不需要变更目标编码算法,即不需要重启编码器,因此,保证了分享画面的流畅性。
在本申请的一个实施例中,如图7所示,本申请实施例提供了另一种显示屏内容分享方法,该方法包括以下步骤:
步骤701,分享发送端检测候选图像的尺寸是否小于预设尺寸。
本申请实施例中,在基于候选图像生成目标图像之前,分享发送端还可以检测候选图像的尺寸是否小于预设尺寸。
步骤702,若候选图像的尺寸小于预设尺寸,则分享发送端基于候选图像生成目标图像。
若候选图像的尺寸小于预设尺寸,说明该候选图像不能直接进行编码,这种情况下,分享发送端基于候选图像生成预设尺寸的目标图像,并基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端。其中,基于候选图像生成目标图像的过程可以参考步骤401-步骤403公开的内容。对目标图像进行编码的过程可以参考步骤202公开的内容。
步骤703,若候选图像的尺寸等于预设尺寸,则分享发送端基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端。
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
若候选图像的尺寸等于预设尺寸,说明该候选图像可以直接进行编码,这种情况下,分享发送端无需基于候选图像生成目标图像,而可以直接基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端。
相应的,在分享接收端,分享接收端中预先存储有多个解码器,不同的解码器可以运行不同的解码算法,而不同的解码算法对应于不同的图像尺寸。分享接收端在接收到第二编码图像之后,可以根据第二编码图像的码流格式从多个解码器中选择合适的目标解码器,目标解码器运行的解码算法为与预设尺寸对应的目标解码算法,分享接收端可以采用目标解码器对第二编码图像进行解码处理,经过解码处理可以得到候选图像。
本申请实施例中,当待分享的候选图像为预设尺寸时,不需要基于候选图像生成目标图像,而是直接对候选图像进行编码,这样可以减少分享发送端的数据处理量,提高运算速度。
请参考图8,其示出了本申请实施例提供的一种显示屏内容分享方法的流程图,该显示屏内容分享方法应用于分享接收端,如图8所示,该显示屏内容分享方法可以包括以下步骤:
步骤801,分享接收端接收第一编码图像。
其中,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像。
本申请实施例中,分享发送端获取待分享的候选图像,根据待分享的候选图像生成目标图像,目标图像由候选图像和填充图像组成。然后分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到第一编码图像,并将第一编码图像发送给分享接收端。
步骤802,分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像。
本申请实施例中,分享接收端中预先存储有多个解码器,而不同的解码算法对应于不同的图像尺寸。分享接收端在接收到第一编码图像之后,根据第一编码图像的码流格式从多个解码器中选择合适的目标解码器,目标解码器运行的解码算法为与预设尺寸对应的目标解码算法,分享接收端可以采用目标解码器对第一编码图像进行解码处理,经过解码处理可以得到目标图像。
步骤803,分享接收端将填充图像从目标图像中裁剪去除,得到候选图像。
本申请实施例中,分享接收端可以从目标图像中将填充图像裁剪去除,得到候选图像,然后分享接收端可以展示该候选图像,完成显示屏内容分享的过程。
本申请实施例中,分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并通过将填充图像从目标图像中裁剪去除的方式得到候选图像,分享接收端在解码时,即使候选图像的大小实时发生变化,也无需重启解码器,保证了分享的视频画面的流畅性。
可选的,分享接收端还可以接收分享发送端发送的裁剪指示信息。其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息。分享接收端可以基于裁剪指示信息将填充图像从目标图像中裁剪去除。
本申请实施例中,分享接收端可以通过对第一编码图像进行解码处理,得到目标图像,还可以得到补充增强信息,其中,补充增强信息即裁剪指示信息,然后,分享接收端可以根据候选图像的尺寸信息,或者,根据候选图像的尺寸信息和候选图像在目标图像中的位置信息,从目标图像中将候选图像剪裁出来。然后将候选图像的格式转换为分享接收端的显示器支持的格式进行显示。
本申请实施例中,分享发送端和分享接收端可以预先约定候选图像位于目标图像中的预设位置,这种情况下,分享发送端发送的裁剪指示信息可以只包括候选图像的尺寸信息。分享接收端在获取候选图像的尺寸信息之后,可以直接在预设位置基于候选图像的尺寸信息和预设尺寸确定填充图像的尺寸。
本申请的另一实施例中,分享发送端发送的裁剪指示信息可以包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,这种情况下,分享接收端可以根据裁剪指示信息中包括的候选图像在目标图像中的位置信息以及候选图像的尺寸信息、预设尺寸确定填充图像的尺寸。
在一种可选的实现方式中,分享接收端接收第二编码图像。其中,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的。分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
本申请实施例中,第二编码图像是分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法直接对候选图像进行编码处理得到的。因此,分享接收端基于目标解码算法对第二编码图像进行解码处理,可以直接得到候选图像,而不必要对解码得到的图像进行裁剪处理,这样可以减少分享接收端的数据处理量,提高运算速度。
请参考图9,其示出了本申请实施例提供的一种示例性的显示屏内容分享方法的流程图,该方法可以应用于图1所示实施环境中。如图9所示,该方法可以包括以下步骤:
步骤901,分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像。
其中,目标图像由候选图像和填充图像组成。
步骤902,分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至服务器。
步骤903,服务器接收第一编码图像,并将第一编码图像转发给分享接收端。
步骤904,分享接收端接收第一编码图像。
步骤905,分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像。
步骤906,分享接收端将填充图像从目标图像中裁剪去除,得到候选图像。
本申请实施例提供的显示屏内容分享方法,在对显示屏内容进行分享的过程中,分享发送端获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,该目标图像由候选图像和填充图像组成;然后,分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;在分享接收端,基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,然后将填充图像从目标图像中裁剪去除,得到候选图像。本申请实施例中,一方面,候选图像在分享发送端和分享接收端均未进行缩放处理,保证了分析接收端显示的画面质量。另一方面,在候选图像的大小实时发生变化的情况下,通过基于候选图像生成目标图像,使得在编码处理过程中,无需重启编码器,保证了分享的视频画面的流畅性。
请参考图10,其示出了本申请实施例提供的一种显示屏内容分享装置1000的框图,该显示屏内容分享装置1000可以配置于图1示出的分享发送端。如图10所示,该显示屏内容分享装置可以包括:获取模块1001和编码模块1002,其中:
获取模块1001,用于获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,目标图像由候选图像和填充图像组成;
编码模块1002,用于基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,编码模块1002还用于:将裁剪指示信息发送至分享接收端;
其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,裁剪指示信息用于指示分享接收端基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,获取模块1001还用于:
在显示屏的显示区域中确定待分享的目标区域;
周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。
在其中一个实施例中,获取模块1001还用于:
获取候选图像的尺寸;
根据候选图像的尺寸和预设尺寸确定填充图像的尺寸;
根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
在其中一个实施例中,预设尺寸为显示屏的显示区域的尺寸,获取模块1001还用于:
获取目标区域在显示屏的显示区域的位置;
根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
在其中一个实施例中,获取模块1001还用于:
检测候选图像的尺寸是否小于预设尺寸;
若候选图像的尺寸小于预设尺寸,则基于候选图像生成目标图像。
在其中一个实施例中,获取模块1001还用于:
若候选图像的尺寸等于预设尺寸,则基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端;
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
关于显示屏内容分享装置的具体限定可以参见上文中对于显示屏内容分享方法的限定,在此不再赘述。上述显示屏内容分享装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块的操作。
请参考图11,其示出了本申请实施例提供的一种显示屏内容分享装置1100的框图,该显示屏内容分享装置1100可以配置于图1示出的分享接收端。如图11所示,该显示屏内容分享装置可以包括:接收模块1101、解码模块1102和裁剪模块1103,其中:
接收模1101,用于接收第一编码图像,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像;
解码模块1102,用于基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像;
裁剪模块1103,用于将填充图像从目标图像中裁剪去除,得到候选图像。
在其中一个实施例中,裁剪模块1103还用于:
接收分享发送端发送的裁剪指示信息,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息;
基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在其中一个实施例中,接收模1101还用于接收第二编码图像,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的;
解码模块1102还用于基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
关于显示屏内容分享装置的具体限定可以参见上文中对于显示屏内容分享方法的限定,在此不再赘述。上述显示屏内容分享装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块的操作。
在本申请的一个实施例中,提供了一种计算机设备,该计算机设备可以为分享发送端或者分享接收端,其内部结构图可以如图12所示。该计算机设备包括通过系统总线连接的处理器和存储器。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机程序被处理器执行时以实现一种显示屏内容分享方法。
本领域技术人员可以理解,图12中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在本申请的一个实施例中,提供了一种计算机设备,该计算机设备包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,目标图像由候选图像和填充图像组成;
基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;
第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
将裁剪指示信息发送至分享接收端;
其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,裁剪指示信息用于指示分享接收端基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
在显示屏的显示区域中确定待分享的目标区域;
周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取候选图像的尺寸;
根据候选图像的尺寸和预设尺寸确定填充图像的尺寸;
根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
获取目标区域在显示屏的显示区域的位置;
根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
检测候选图像的尺寸是否小于预设尺寸;
若候选图像的尺寸小于预设尺寸,则基于候选图像生成目标图像。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
若候选图像的尺寸等于预设尺寸,则基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端;
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
本申请实施例提供的计算机设备,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
在本申请的一个实施例中,提供了一种计算机设备,该计算机设备包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现以下步骤:
接收第一编码图像,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像;
基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像;
将填充图像从目标图像中裁剪去除,得到候选图像。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
接收分享发送端发送的裁剪指示信息,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息;
基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在本申请的一个实施例中,处理器执行计算机程序时还实现以下步骤:
接收第二编码图像,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的;
基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
本申请实施例提供的计算机设备,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
在本申请的一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
获取待分享的候选图像,并基于候选图像生成预设尺寸的目标图像,目标图像由候选图像和填充图像组成;
基于与预设尺寸对应的目标编码算法对目标图像进行编码处理,得到第一编码图像,并将第一编码图像发送至分享接收端;
第一编码图像用于供分享接收端基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像,并将填充图像从目标图像中裁剪去除,得到候选图像。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
将裁剪指示信息发送至分享接收端;
其中,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息,裁剪指示信息用于指示分享接收端基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
在显示屏的显示区域中确定待分享的目标区域;
周期性地从显示屏所显示的图像中截取位于目标区域中的候选图像。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取候选图像的尺寸;
根据候选图像的尺寸和预设尺寸确定填充图像的尺寸;
根据填充图像的尺寸在候选图像的边缘的外侧生成填充图像,以得到目标图像。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
获取目标区域在显示屏的显示区域的位置;
根据目标区域在显示屏的显示区域的位置、候选图像的尺寸和预设尺寸,分别确定位于候选图像的不同方向的边缘的外侧的填充图像的尺寸。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
检测候选图像的尺寸是否小于预设尺寸;
若候选图像的尺寸小于预设尺寸,则基于候选图像生成目标图像。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
若候选图像的尺寸等于预设尺寸,则基于目标编码算法对候选图像进行编码处理,得到第二编码图像,并将第二编码图像发送至分享接收端;
其中,第二编码图像用于供分享接收端基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
本实施例提供的计算机可读存储介质,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
在本申请的一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现以下步骤:
接收第一编码图像,第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,目标图像为基于候选图像生成的,目标图像的尺寸为预设尺寸,目标图像由候选图像和填充图像组成,候选图像为待分享的图像;
基于与预设尺寸对应的目标解码算法对第一编码图像进行解码处理,得到目标图像;
将填充图像从目标图像中裁剪去除,得到候选图像。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
接收分享发送端发送的裁剪指示信息,裁剪指示信息包括候选图像的尺寸信息,或者,包括候选图像的尺寸信息和候选图像在目标图像中的位置信息;
基于裁剪指示信息将填充图像从目标图像中裁剪去除。
在本申请的一个实施例中,计算机程序被处理器执行时还实现以下步骤:
接收第二编码图像,第二编码图像为分享发送端在候选图像的尺寸等于预设尺寸的情况下,基于目标编码算法对候选图像进行编码处理得到的;
基于目标解码算法对第二编码图像进行解码处理,得到候选图像。
本实施例提供的计算机可读存储介质,其实现原理和技术效果与上述方法实施例类似,在此不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用,均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (12)
1.一种显示屏内容分享方法,其特征在于,应用于分享发送端,所述方法包括:
获取待分享的候选图像,并基于所述候选图像生成预设尺寸的目标图像,所述目标图像由所述候选图像和填充图像组成;
基于与所述预设尺寸对应的目标编码算法对所述目标图像进行编码处理,得到第一编码图像,并将所述第一编码图像以及裁剪指示信息发送至分享接收端;
所述第一编码图像用于供所述分享接收端基于与所述预设尺寸对应的目标解码算法对所述第一编码图像进行解码处理,得到所述目标图像,并将所述填充图像从所述目标图像中裁剪去除,得到所述候选图像;
所述裁剪指示信息包括所述候选图像的尺寸信息,或者,包括所述候选图像的尺寸信息和所述候选图像在所述目标图像中的位置信息,所述裁剪指示信息用于指示所述分享接收端基于所述裁剪指示信息将所述填充图像从所述目标图像中裁剪去除;其中,所述候选图像在所述目标图像中的位置信息为所述候选图像的中心像素点在所述目标图像中的位置或者所述候选图像的四个角中的任意一个角的像素点在所述目标图像中的位置;
其中,所述基于所述候选图像生成预设尺寸的目标图像,包括:
获取所述填充图像,将所述填充图像拼接到所述候选图像的边缘的外侧,得到拼接图像,以所述候选图像为中心,对所述拼接图像进行剪裁,得到预设尺寸的所述目标图像。
2.根据权利要求1所述的方法,其特征在于,所述填充图像的尺寸的确定过程包括:
基于预先设置的所述候选图像在所述目标图像中的位置信息,根据所述候选图像的四个边的尺寸以及所述预设尺寸,确定所述候选图像的四个边分别到所述目标图像的四个边的距离,得到所述填充图像的尺寸。
3.根据权利要求1所述的方法,其特征在于,所述获取待分享的候选图像,包括:
在显示屏的显示区域中确定待分享的目标区域;
周期性地从所述显示屏所显示的图像中截取位于所述目标区域中的所述候选图像。
4.根据权利要求3所述的方法,其特征在于,所述基于所述候选图像生成预设尺寸的目标图像,包括:
获取所述候选图像的尺寸;
根据所述候选图像的尺寸和所述预设尺寸确定所述填充图像的尺寸;
根据所述填充图像的尺寸在所述候选图像的边缘的外侧生成所述填充图像,以得到所述目标图像。
5.根据权利要求4所述的方法,其特征在于,所述预设尺寸为所述显示屏的显示区域的尺寸,所述根据所述候选图像的尺寸和所述预设尺寸确定所述填充图像的尺寸,包括:
获取所述目标区域在所述显示屏的显示区域的位置;
根据所述目标区域在所述显示屏的显示区域的位置、所述候选图像的尺寸和所述预设尺寸,分别确定位于所述候选图像的不同方向的边缘的外侧的填充图像的尺寸。
6.根据权利要求1所述的方法,其特征在于,所述基于所述候选图像生成预设尺寸的目标图像,包括:
检测所述候选图像的尺寸是否小于所述预设尺寸;
若所述候选图像的尺寸小于所述预设尺寸,则基于所述候选图像生成所述目标图像。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
若所述候选图像的尺寸等于所述预设尺寸,则基于所述目标编码算法对所述候选图像进行编码处理,得到第二编码图像,并将所述第二编码图像发送至所述分享接收端;
其中,所述第二编码图像用于供所述分享接收端基于所述目标解码算法对所述第二编码图像进行解码处理,得到所述候选图像。
8.一种显示屏内容分享方法,其特征在于,应用于分享接收端,所述方法包括:
接收第一编码图像以及裁剪指示信息,所述第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,所述目标图像为基于候选图像生成的,所述目标图像的尺寸为所述预设尺寸,所述目标图像由所述候选图像和填充图像组成,所述候选图像为待分享的图像;所述目标图像的生成过程包括:获取填充图像和待分享的候选图像,将所述填充图像拼接到所述候选图像的边缘的外侧,得到拼接图像,以所述候选图像为中心,对所述拼接图像进行剪裁,得到预设尺寸的所述目标图像;
基于与所述预设尺寸对应的目标解码算法对所述第一编码图像进行解码处理,得到所述目标图像;
基于所述裁剪指示信息,将所述填充图像从所述目标图像中裁剪去除,得到所述候选图像;
其中,所述裁剪指示信息包括所述候选图像的尺寸信息,或者,包括所述候选图像的尺寸信息和所述候选图像在所述目标图像中的位置信息;其中,所述候选图像在所述目标图像中的位置信息为所述候选图像的中心像素点在所述目标图像中的位置或者所述候选图像的四个角中的任意一个角的像素点在所述目标图像中的位置。
9.一种显示屏内容分享装置,其特征在于,应用于分享发送端,所述装置包括:
获取模块,用于获取待分享的候选图像,并基于所述候选图像生成预设尺寸的目标图像,所述目标图像由所述候选图像和填充图像组成;
其中,所述基于所述候选图像生成预设尺寸的目标图像,包括:获取所述填充图像,将所述填充图像拼接到所述候选图像的边缘的外侧,得到拼接图像,以所述候选图像为中心,对所述拼接图像进行剪裁,得到预设尺寸的所述目标图像;
编码模块,用于基于与所述预设尺寸对应的目标编码算法对所述目标图像进行编码处理,得到第一编码图像,并将所述第一编码图像以及裁剪指示信息发送至分享接收端;所述第一编码图像用于供所述分享接收端基于与所述预设尺寸对应的目标解码算法对所述第一编码图像进行解码处理,得到所述目标图像,并将所述填充图像从所述目标图像中裁剪去除,得到所述候选图像;所述裁剪指示信息包括所述候选图像的尺寸信息,或者,包括所述候选图像的尺寸信息和所述候选图像在所述目标图像中的位置信息,所述裁剪指示信息用于指示所述分享接收端基于所述裁剪指示信息将所述填充图像从所述目标图像中裁剪去除;其中,所述候选图像在所述目标图像中的位置信息为所述候选图像的中心像素点在所述目标图像中的位置或者所述候选图像的四个角中的任意一个角的像素点在所述目标图像中的位置。
10.一种显示屏内容分享装置,其特征在于,应用于分享接收端,所述装置包括:
接收模块,用于接收第一编码图像以及裁剪指示信息,所述第一编码图像为分享发送端基于与预设尺寸对应的目标编码算法对目标图像进行编码处理得到的,所述目标图像为基于候选图像生成的,所述目标图像的尺寸为所述预设尺寸,所述目标图像由所述候选图像和填充图像组成,所述候选图像为待分享的图像;所述目标图像的生成过程包括:获取填充图像和待分享的候选图像,将所述填充图像拼接到所述候选图像的边缘的外侧,得到拼接图像,以所述候选图像为中心,对所述拼接图像进行剪裁,得到预设尺寸的所述目标图像;
解码模块,用于基于与所述预设尺寸对应的目标解码算法对所述第一编码图像进行解码处理,得到所述目标图像;
裁剪模块,用于基于所述裁剪指示信息,将所述填充图像从所述目标图像中裁剪去除,得到所述候选图像;
其中,所述裁剪指示信息包括所述候选图像的尺寸信息,或者,包括所述候选图像的尺寸信息和所述候选图像在所述目标图像中的位置信息;其中,所述候选图像在所述目标图像中的位置信息为所述候选图像的中心像素点在所述目标图像中的位置或者所述候选图像的四个角中的任意一个角的像素点在所述目标图像中的位置。
11.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的方法的步骤,或者,所述处理器执行所述计算机程序时实现权利要求8所述的方法的步骤。
12.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤,或者,所述计算机程序被处理器执行时实现权利要求8所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011163731.XA CN112367521B (zh) | 2020-10-27 | 2020-10-27 | 显示屏内容分享方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011163731.XA CN112367521B (zh) | 2020-10-27 | 2020-10-27 | 显示屏内容分享方法、装置、计算机设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112367521A CN112367521A (zh) | 2021-02-12 |
CN112367521B true CN112367521B (zh) | 2022-08-19 |
Family
ID=74510707
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011163731.XA Active CN112367521B (zh) | 2020-10-27 | 2020-10-27 | 显示屏内容分享方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112367521B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113596571B (zh) * | 2021-07-27 | 2024-03-12 | 广州方硅信息技术有限公司 | 屏幕分享方法、装置、系统、存储介质以及计算机设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01172996A (ja) * | 1987-12-28 | 1989-07-07 | Matsushita Graphic Commun Syst Inc | 画像ファイル装置 |
CN107197329A (zh) * | 2017-06-16 | 2017-09-22 | 广州市百果园信息技术有限公司 | 视频编码方法及装置、存储介质 |
CN110581995A (zh) * | 2019-09-12 | 2019-12-17 | 北京奇艺世纪科技有限公司 | 一种视频处理的方法及装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2533537A1 (en) * | 2011-06-10 | 2012-12-12 | Panasonic Corporation | Transmission of picture size for image or video coding |
CN103797787B (zh) * | 2012-09-10 | 2017-06-20 | 华为技术有限公司 | 图像处理方法和图像处理设备 |
US20160234522A1 (en) * | 2015-02-05 | 2016-08-11 | Microsoft Technology Licensing, Llc | Video Decoding |
KR20190080805A (ko) * | 2017-12-28 | 2019-07-08 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
CN110022463A (zh) * | 2019-04-11 | 2019-07-16 | 重庆紫光华山智安科技有限公司 | 动态场景下实现视频感兴趣区域智能编码方法及系统 |
CN111626166B (zh) * | 2020-05-19 | 2023-06-09 | Oppo广东移动通信有限公司 | 图像处理方法、装置、电子设备及存储介质 |
-
2020
- 2020-10-27 CN CN202011163731.XA patent/CN112367521B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01172996A (ja) * | 1987-12-28 | 1989-07-07 | Matsushita Graphic Commun Syst Inc | 画像ファイル装置 |
CN107197329A (zh) * | 2017-06-16 | 2017-09-22 | 广州市百果园信息技术有限公司 | 视频编码方法及装置、存储介质 |
CN110581995A (zh) * | 2019-09-12 | 2019-12-17 | 北京奇艺世纪科技有限公司 | 一种视频处理的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN112367521A (zh) | 2021-02-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11863801B2 (en) | Method and device for generating live streaming video data and method and device for playing live streaming video | |
CN111885346B (zh) | 一种画面码流合成方法、终端、电子设备和存储介质 | |
CN109587478B (zh) | 一种媒体信息的处理方法及装置 | |
US10958950B2 (en) | Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices | |
CN106060544B (zh) | 一种图像编码方法、相关设备及系统 | |
CN110049336A (zh) | 视频编码方法和视频解码方法 | |
CN106803959B (zh) | 视频图像编码、解码方法、编码、解码装置及可读存储介质 | |
CN110022481B (zh) | 视频码流的解码、生成方法及装置、存储介质、电子装置 | |
CN110933461B (zh) | 图像处理方法、装置、系统、网络设备、终端及存储介质 | |
CN112422868A (zh) | 数据处理方法及终端设备、服务器 | |
CN112367521B (zh) | 显示屏内容分享方法、装置、计算机设备和存储介质 | |
CN115134629B (zh) | 视频传输方法、系统、设备及存储介质 | |
CN111031032A (zh) | 云端视频转码方法及装置、解码方法及装置、及电子设备 | |
CN116668741A (zh) | 云桌面的显示方法、图像显示方法、设备和存储介质 | |
CN110049347B (zh) | 在直播界面配置图像的方法、系统、终端和装置 | |
US11051080B2 (en) | Method for improving video resolution and video quality, encoder, and decoder | |
US20240040147A1 (en) | Data processing method and apparatus, computer device, and storage medium | |
CN109525842B (zh) | 基于位置的多Tile排列编码方法、装置、设备和解码方法 | |
CN111064986B (zh) | 带透明度的动画数据发送方法、播放方法和计算机设备 | |
US20190191196A1 (en) | System and method for optimization of video bitrate | |
CN116320395A (zh) | 图像处理方法、装置、电子设备及可读存储介质 | |
CN112565819B (zh) | 一种视频数据处理的方法及装置、电子设备、存储介质 | |
CN111711818B (zh) | 视频图像编码传输方法及其装置 | |
CN108520492B (zh) | 全景视频映射方法及系统 | |
CN111699691A (zh) | 图像处理 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |