CN103839533B - 一种移动终端图像的显示方法和移动终端 - Google Patents
一种移动终端图像的显示方法和移动终端 Download PDFInfo
- Publication number
- CN103839533B CN103839533B CN201410032313.5A CN201410032313A CN103839533B CN 103839533 B CN103839533 B CN 103839533B CN 201410032313 A CN201410032313 A CN 201410032313A CN 103839533 B CN103839533 B CN 103839533B
- Authority
- CN
- China
- Prior art keywords
- synthesized
- layer
- display
- image
- parameter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Control Of Indicators Other Than Cathode Ray Tubes (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明提供了一种移动终端图像的显示方法和移动终端,所述方法包括:比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;将所述在线图像直接传输给显示器进行显示;其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。采用本发明,可以在图像合成过程中减少对内存的读写次数,节约了带宽。
Description
技术领域
本发明属于图像显示领域,尤其涉及一种移动终端图像的显示方法和移动终端。
背景技术
随着智能手机的普及,人们对智能手机的显示功能和性能也变得越来越重视。
在现有技术中,CompositionEngine(CompositionEngine,合成引擎)负责图层合成,DisplayController(DisplayController,显示控制器)负责显示控制,由于现有的合成引擎在合成数据后,必须将合成后的数据先写入内存,再由显示控制器从内存中读出该合成后的数据以显示对应图像,所以现有技术在合成和显示图像的过程中总要对内存进行多次读写,从而会给带宽带来较大的消耗。
发明内容
本发明实施例提供一种移动终端图像的显示方法和移动终端,可以减少图层合成为图像时所消耗的带宽。
本发明第一方面提供了一种移动终端图像的显示方法,包括:
比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
将所述在线图像直接传输给显示器进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。
在第一种可能的实现方式中,还包括:
当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像,其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像;
缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
其中,所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。
结合第一方面的第一种可能的实现方式,在第二种可能的实现方式中,
所述待合成图层的参数包括:待合成图层数量和待合成图层面积;
所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值;
其中,所述第一比较结果包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;
其中,所述第二比较结果包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
结合第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,在第三种可能的实现方式中,在所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤之前,还包括:
检测当前的显示状态是否为多屏显示;
当检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像;
缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
当未检测到所述当前的显示状态为多屏显示时,则执行所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤。
结合第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,在第四种可能的实现方式中,还包括:
当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器显示更新后的图像。
结合第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,在第五种可能的实现方式中,还包括:
在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式。
结合第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,或第一方面的第五种可能的实现方式,在第六种可能的实现方式中,还包括:
当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器不具有内存空间时,检测待合成图层是否更新;
当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于本地内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
当显示器刷新帧同步信号到达,且检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并显示所述更新后的在线图像或离线图像。
结合第一方面的第一种可能的实现方式,或第一方面的第二种可能的实现方式,或第一方面的第三种可能的实现方式,或第一方面的第四种可能的实现方式,或第一方面的第五种可能的实现方式,或第一方面的第六种可能的实现方式,在第七种可能的实现方式中,还包括:
当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器具有内存空间时,检测待合成图层是否更新;
当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
当检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于本地内存中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,分别将所述更新后的在线图像或离线图像缓存在所述显示器内存以及所述本地内存中。
本发明第二方面提供了一种移动终端,包括:增强显示控制器(EDC)、显示器;所述增强显示控制器包括比较模块、合成模块以及显示控制模块;
所述比较模块,用于比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
所述合成模块,用于当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
所述显示控制模块,用于将所述在线图像直接传输给所述显示器进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。
在第一种可能的实现方式中,还包括:内存器;
所述合成模块,还用于当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像,其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像;
所述内存器,用于缓存所述离线图像;
所述显示控制模块,还用于在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到所述显示器进行显示;
其中,所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。
结合第二方面的第一种可能的实现方式,在第二种可能的实现方式中,
所述比较模块中的所述待合成图层的参数包括:待合成图层数量和待合成图层面积;
所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值;
其中,所述第一比较结果包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;
其中,所述第二比较结果包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
结合第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,在第三种可能的实现方式中,还包括:
状态检测模块,用于检测当前的显示状态是否为多屏显示;
所述合成模块,还用于当所述状态检测模块检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像,并将所述离线图像传输到所述内存器进行缓存,并通知所述显示控制模块在需要显示所述离线图像时,读取缓存的所述离线图像并将所述离线图像传输到所述显示器进行显示;
通知模块,用于当所述状态检测模块未检测到所述当前的显示状态为多屏显示时,通知所述比较模块比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小。
结合第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,在第四种可能的实现方式中,还包括:
切换模块,用于当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器显示更新后的图像。
结合第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,在第五种可能的实现方式中,还包括:
第一奇偶切换模块,用于在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
第二奇偶切换模块,用于在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式。
结合第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,或第二方面的第五种可能的实现方式,在第六种可能的实现方式中,还包括:
更新检测模块,用于当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器不具有内存空间时,检测待合成图层是否更新;
所述显示控制模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块未检测到待合成图层更新时,读取预先缓存于所述内存器中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
所述合成模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并通知所述显示控制模块显示所述更新后的在线图像或离线图像。
结合第二方面的第一种可能的实现方式,或第二方面的第二种可能的实现方式,或第二方面的第三种可能的实现方式,或第二方面的第四种可能的实现方式,或第二方面的第五种可能的实现方式,或第二方面的第六种可能的实现方式,在第七种可能的实现方式中,
所述更新检测模块,还用于当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器具有内存空间时,检测待合成图层是否更新;
所述显示控制模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块未检测到待合成图层更新时,读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
所述合成模块,还用于当所述更新检测模块检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于所述内存器中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,并分别将所述更新后的在线图像或离线图像传输到所述显示器内存以及所述内存器进行缓存。
由上可见,本发明实施例通过比较待合成图层的参数和参数阈值的数值大小,可以在得到第一比较结果时,将待合成图层合成为在线图像,并直接将在线图像传输给显示器显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种移动终端图像的显示方法的流程示意图;
图2为本发明实施例提供的另一种移动终端图像的显示方法的流程示意图;
图3为本发明实施例提供的一种检测显示状态的方法的流程示意图;
图4为本发明实施例提供的一种更新显示的方法的流程示意图;
图5为本发明实施例提供的另一种更新显示的方法的流程示意图;
图6为本发明实施例提供的一种移动终端的结构示意图;
图7为本发明实施例提供的另一种移动终端的结构示意图;
图8为本发明实施例提供的又一种移动终端的具体结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
为了说明本发明所述的技术方案,下面通过具体实施例来进行说明。
请参见图1,为本发明实施例提供的一种移动终端图像的显示方法的流程示意图,所述方法包括:
S101,比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
具体的,移动终端在获取到视频或图像的数据帧时,可以比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小,所述待合成图层的参数包括:待合成图层数量和待合成图层面积。所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值
S102,当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像;
S103,将所述在线图像直接传输给显示器进行显示;
具体的,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式。所述在线合成方式具体通过EDC(EnhancedDisplayController,增强显示控制器)增强显示控制器将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像,并将所述在线图像直接传输给显示器进行显示。本发明裁剪了CompositionEngine模块,并使CDC(CompositionandDisplayController,合成和显示控制器)在EDC上进行功能增强以及优化处理,即本发明实施例提供的EDC集合了合成引擎的功能和显示控制器的功能,使得移动终端通过EDC增强显示控制器即可将所述待合成图层合成为在线图像,并将所述在线图像直接传输给显示器进行显示,使得在合成和显示的过程中无需对内存进行读写,不仅减少了带宽的消耗,而且还能满足较高的帧率。现有技术中的合成引擎和显示控制器是两个独立的芯片,而本发明实施例可以删减合成引擎芯片,只需通过本发明实施例提供的EDC芯片即可实现图像的合成和显示,从而减少了芯片面积,降低了成本。
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。所述第一比较结果具体包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值。即当所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值时,可以通过在线合成方式将所述待合成图层合成为在线图像,并将所述在线图像直接传输给显示器进行显示。
由上可见,本发明实施例通过比较待合成图层的参数和参数阈值的数值大小,可以在得到第一比较结果时,将待合成图层合成为在线图像,并直接将在线图像传输给显示器显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽。
再请参见图2,为本发明实施例提供的另一种移动终端图像的显示方法的流程示意图,所述方法包括:
S201,比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
具体的,移动终端在获取到视频或图像的数据帧时,可以比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小,所述待合成图层的参数包括:待合成图层数量和待合成图层面积。所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值
S202,当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像;
S203,将所述在线图像直接传输给显示器进行显示;
具体的,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式。所述在线合成方式具体通过EDC增强显示控制器将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像,并将所述在线图像直接传输给显示器进行显示。本发明裁剪了CompositionEngine模块,并使CDC在EDC上进行功能增强以及优化处理,即本发明实施例提供的EDC集合了合成引擎的功能和显示控制器的功能,使得移动终端通过EDC增强显示控制器即可将所述待合成图层合成为在线图像,并将所述在线图像直接传输给显示器进行显示,使得在合成和显示的过程中无需对内存进行读写,不仅减少了带宽的消耗,而且还能满足较高的帧率。现有技术中的合成引擎和显示控制器是两个独立的芯片,而本发明实施例可以删减合成引擎芯片,只需通过本发明实施例提供的EDC芯片即可实现图像的合成和显示,从而减少了芯片面积,降低了成本。
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。所述第一比较结果具体包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值。即当所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值时,可以通过在线合成方式将所述待合成图层合成为在线图像,并将所述在线图像直接传输给显示器进行显示。
S204,当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像;
具体的,当S201步骤中比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小时得到第二比较结果,则可以通过离线合成方式将所述待合成图层合成为离线图像。其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像。
所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。所述第二比较结果具体包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
S205,缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
具体的,在将待合成图层合成为离线图像时,将离线图像缓存到本地内存,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示,因此,只要离线图像没有更新,就可以多次从本地内存中读取该离线图像并显示,使得在合成和显示离线图像的过程中可以减少图像合成次数,从而减少了带宽的消耗。
例如,移动终端外接了显示设备,此时待合成图层面积为移动终端的显示面积加上外接显示设备的显示面积,这样就很容易使待合成图层面积大于待合成图层面积阈值,因此外接显示设备时,需要以离线合成方式来合成图像,即将所述待合成图层合成为离线图像,将所述离线图像缓存到本地内存,以便在需要显示所述离线图像时,从所述本地内存读取所述离线图像,并将所述离线图像传输到显示器显示。
再例如,移动终端的显示器为:1280*720,将待合成图层面积阈值设置为3个移动终端的显示器,即:1280*720*3,如果待合成图层面积大于或等于待合成图层面积阈值即(1280*720*3),则需要以离线合成方式来合成图像,即将待合成图层合成为离线图像,再将所述离线图像缓存到本地内存,以便在需要显示所述离线图像时,从所述本地内存读取所述离线图像,并将所述离线图像传输到显示器显示。
另外,在离线合成方式中,当待合成图层数量超过预设的待合成图层数量阈值时,需要进行迭代合成处理。例如,待合成图层数量N大于5时,32>N>5,在第一次进行离线图像合成时,选择4个待合成图层合成为第一局部离线图像,并将所述第一局部离线图像传输到本地内存;如果N-5<=4,则进行第二次离线图像合成,在第二次离线图像合成中,将所述第一局部离线图像和其他未进行合成的待合成图层合成为最终离线图像,将所述最终离线图像缓存到本地内存,以便在需要显示所述最终离线图像时,从所述本地内存读取所述最终离线图像,并将所述最终离线图像传输到显示器显示;如果N-5>4,则选择另外5个待合成图层合成为第二局部离线图像,并将所述第二局部离线图像传输到本地内存,若此时N-8<=4,则继续将所述第一局部离线图像、所述第二局部离线图像以及其他未进行合成的待合成图层合成为最终离线图像,将所述最终离线图像缓存到本地内存,以便在需要显示所述最终离线图像时,从所述本地内存读取所述最终离线图像,并将所述最终离线图像传输到显示器显示。
其中,使用在线合成方式的优点是性能最优,并且在部分场景功耗最优,可使用的场景包括:画面要求连续流畅的游戏,且帧率在40-60fps,如水果忍者等等;或者,典型界面下的快速滑动场景,如快速电话薄、短信滑动等等;或者,视频播放、照片预览以及拍照场景。
使用离线合成方式可以应付任何场景,特别是在用户间歇性访问用户界面的情况下,减少了图像合成的带宽和计算,从而能够大大减少功耗,适用的场景包括:网页浏览、电话薄、短信浏览等等。
在本发明实施例中,移动终端显示的每一帧图像的合成条件都可以不同,因此如果所述比较结果发生了变化,则可以切换合成方式。具体为,当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器显示更新后的图像。
例如,若初始的比较结果为第一比较结果,且重新获取到的待合成图层的参数与预设的参数阈值的比较结果变化为第二比较结果,则移动终端可以将当前的在线合成方式切换为离线合成方式,并根据所述离线合成方式合成得到更新后的离线图像以在显示器上显示所述更新后的离线图像,即将重新获取到的待合成图层合成为更新后的离线图像,将所述更新后的离线图像缓存到本地内存,并在需要显示所述更新后的离线图像时,再从所述本地内存读取所述更新后的离线图像,以将所述更新后的离线图像传输到显示器显示。
另外,在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
具体的,由于在视频帧中偶数位的数据帧需要更新数据,所以在偶数位的数据帧时刻是通过离线合成方式来更新数据,又因为偶数位的数据帧与下一帧的数据内容基本相同,所以在偶数位的数据帧更新完数据后可以将离线合成方式切换到在线合成方式,同样的,在奇数位的数据帧时刻可以将在线合成方式切换到离线合成方式,以便于在视频帧中偶数位的数据帧时刻更新数据。
在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式;
具体的,由于在视频帧中奇数位的数据帧需要更新数据,所以在视频帧中奇数位的数据帧时刻是通过离线合成方式来更新数据,又因为奇数位的数据帧与下一帧的数据内容基本相同,所以在奇数位的数据帧更新完数据后可以将离线合成方式切换到在线合成方式,同样的,在偶数位的数据帧时刻可以将在线合成方式切换到离线合成方式,以便于在视频帧中奇数位的数据帧时刻更新数据。
由上可见,本发明实施例通过比较待合成图层的参数和参数阈值的数值大小,可以在得到第一比较结果时,将待合成图层合成为在线图像,并直接将在线图像传输给显示器显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽;同时,在得到第二比较结果时,将待合成图层合成为离线图像,并缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示,因此,只要离线图像没有更新,就可以多次从本地内存中读取该离线图像并显示,使得在合成和显示离线图像的过程中可以减少图像合成次数,从而减少了对带宽的消耗。
再请参见图3,为本发明实施例提供的一种检测显示状态的方法的流程示意图,所述方法包括:
S301,检测当前的显示状态是否为多屏显示;
具体的,S301步骤可以在上述图1对应实施例中的S101之前执行,或在上述图2对应实施例中的S201之前执行。所述多屏显示包括HDMI(HighDefinitionMultimediaInterface,高清晰度多媒体接口)输出以及基于无线网络的多屏显示。
S302,当检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像;
S303,缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
具体的,当检测到所述当前的显示状态为多屏显示时,可以通过离线合成方式将所述待合成图层合成为离线图像,并缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示。
S304,当未检测到所述当前的显示状态为多屏显示时,则执行所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤;
具体的,当未检测到所述当前的显示状态为多屏显示时,则执行所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤,即当S301步骤未检测到所述当前的显示状态为多屏显示时,执行上述图1对应实施例中的S101步骤,或执行上述图2对应实施例中的S201步骤。
本发明实施例通过检测当前的显示状态是否为多屏显示,可以在多屏显示的情况下使用离线合成方式,由于在多屏显示时的待合成图层的面积较大,所以通过离线合成方式可以尽量减少多屏显示过程中图像合成的次数,以减少对带宽的消耗。
再请参见图4,为本发明实施例提供的一种更新显示的方法的流程示意图,所述方法包括:
S401,当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器不具有内存空间时,检测待合成图层是否更新;
S402,当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于本地内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
具体的,当显示器刷新帧同步信号到达,且S401步骤中未检测到待合成图层更新时,读取预先缓存于本地内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像,使得在待合成图层没有更新时,只需将本地内存中的所述在线图像或所述离线图像在显示器上进行刷屏操作,以减少显示器在刷屏时合成图像的次数。
S403,当显示器刷新帧同步信号到达,且检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并显示所述更新后的在线图像或离线图像;
具体的,当显示器刷新帧同步信号到达,且S401步骤中检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像。若更新后得到在线图像,则直接显示更新后的在线图像,并同时将更新后的在线图像缓存在本地内存中,以便于在后续没有待合成图层更新时可以通过所述更新后的在线图像进行刷屏;若更新后得到离线图像,则先缓存该更新后的离线图像,再读取该更新后的离线图像并显示该更新后的离线图像,并且在后续没有待合成图层更新时可以通过该更新后的离线图像进行刷屏。
本发明实施例通过缓存在线图像或离线图像,可以在没有待合成图层更新时直接读取并显示在线图像或离线图像,以减少合成图像的次数;并且在有待合成图层更新时,可以更新在线图像或离线图像。
再请参见图5,为本发明实施例提供的另一种更新显示的方法的流程示意图,所述方法包括:
S501,当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器具有内存空间时,检测待合成图层是否更新;
S502,当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
具体的,当显示器刷新帧同步信号到达,且S501步骤中未检测到待合成图层更新时,可以读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像。其中,在将所述在线图像或所述离线图像传输给显示器时,所述显示器内存将会自动缓存所述在线图像或所述离线图像。在没有待合成图层更新时,所述显示器可以通过缓存于显示器内存中的所述在线图像或所述离线图像进行刷屏操作,从而减少了刷屏过程中合成图像的次数,节约了带宽。
S503,当检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于本地内存中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,分别将所述更新后的在线图像或离线图像缓存在所述显示器内存以及所述本地内存中;
具体的,当S501步骤中检测到待合成图层更新时,可以根据更新后的待合成图层将预先缓存于本地内存中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像。例如,有5个待合成图层,当其中2个待合成图层更新时,将具有更新的2个待合成图层结合之前所合成的所述在线图像或所述离线图像,可以得到更新后的在线图像或所述离线图像,从而不用重新对所有待合成图层进行合成,以减少带宽。
在得到更新后的在线图像或所述离线图像后,可以分别将所述更新后的在线图像或离线图像缓存在所述显示器内存以及所述本地内存中,以便于在后续的显示器刷新帧同步信号到达,且未检测到待合成图层更新时,可以从所述显示器内存读取所述更新后的在线图像或所述离线图像,并显示所述更新后的在线图像或所述离线图像。
本发明实施例通过缓存在线图像或离线图像,可以在没有待合成图层更新时直接读取并显示在线图像或离线图像,以减少合成图像的次数;并且在有待合成图层更新时,可以更新在线图像或离线图像。
请参见图6,为本发明实施例提供的一种移动终端的结构示意图,所述移动终端可以包括:增强显示控制器1(EDC)、显示器2;所述增强显示控制器1可以包括比较模块10、合成模块20以及显示控制模块30;
所述比较模块10,用于比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
具体的,所述比较模块10在获取到视频或图像的数据帧时,可以比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小,所述待合成图层的参数包括:待合成图层数量和待合成图层面积。所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值。
所述合成模块20,用于当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
所述显示控制模块30,用于将所述在线图像直接传输给所述显示器2进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果;
具体的,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式。所述在线合成方式具体通过增强显示控制器1将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像,并将所述在线图像直接传输给显示器2进行显示。本发明裁剪了CompositionEngine模块,并使CDC在EDC上进行功能增强以及优化处理,即本发明实施例提供的EDC集合了合成引擎的功能和显示控制器的功能,使得移动终端通过EDC增强显示控制器1中的所述合成模块20即可将所述待合成图层合成为在线图像,并由所述显示控制模块30将所述在线图像直接传输给显示器2进行显示,使得在合成和显示的过程中无需对内存进行读写,不仅减少了带宽的消耗,而且还能满足较高的帧率。现有技术中的合成引擎和显示控制器是两个独立的芯片,而本发明实施例可以删减合成引擎芯片,只需通过本发明实施例提供的EDC芯片即可实现图像的合成和显示,从而减少了芯片面积,降低了成本。
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。所述第一比较结果具体包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值。即当所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值时,所述合成模块20可以通过在线合成方式将所述待合成图层合成为在线图像,并由所述显示控制模块30将所述在线图像直接传输给显示器2进行显示。
由上可见,本发明实施例通过比较待合成图层的参数和参数阈值的数值大小,可以在得到第一比较结果时,将待合成图层合成为在线图像,并直接将在线图像传输给显示器2显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽。
再请参见图7,为本发明实施例提供的另一种移动终端的结构示意图,所述移动终端包括:增强显示控制器1(EDC)、显示器2、内存器3、状态检测模块40、通知模块50、更新检测模块60、切换模块70、第一奇偶切换模块80、第二奇偶切换模块90;其中,所述增强显示控制器1包括比较模块10、合成模块20以及显示控制模块30;
所述比较模块10,用于比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
具体的,所述比较模块10在获取到视频或图像的数据帧时,可以比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小,所述待合成图层的参数包括:待合成图层数量和待合成图层面积。所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值。
所述合成模块20,用于当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
所述显示控制模块30,用于将所述在线图像直接传输给所述显示器2进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。
具体的,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式。所述在线合成方式具体通过增强显示控制器1将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像,并将所述在线图像直接传输给显示器2进行显示。本发明裁剪了CompositionEngine模块,并使CDC在EDC上进行功能增强以及优化处理,即本发明实施例提供的EDC集合了合成引擎的功能和显示控制器的功能,使得移动终端通过EDC增强显示控制器1中的所述合成模块20即可将所述待合成图层合成为在线图像,并由所述显示控制模块30将所述在线图像直接传输给显示器2进行显示,使得在合成和显示的过程中无需对内存进行读写,不仅减少了带宽的消耗,而且还能满足较高的帧率。现有技术中的合成引擎和显示控制器是两个独立的芯片,而本发明实施例可以删减合成引擎芯片,只需通过本发明实施例提供的EDC芯片即可实现图像的合成和显示,从而减少了芯片面积,降低了成本。
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果。所述第一比较结果具体包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值。即当所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值时,所述合成模块20可以通过在线合成方式将所述待合成图层合成为在线图像,并由所述显示控制模块30将所述在线图像直接传输给显示器2进行显示。
所述合成模块20,还用于当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像,其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像;
具体的,当所述比较模块10比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小时得到第二比较结果,则所述合成模块20可以通过离线合成方式将所述待合成图层合成为离线图像。其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像。
所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。所述第二比较结果具体包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
所述内存器3,用于缓存所述离线图像;
所述显示控制模块30,还用于在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到所述显示器2进行显示;
其中,所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。
具体的,在所述合成模块20将待合成图层合成为离线图像时,将离线图像缓存到所述内存器3中,以便所述显示控制模块30在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器2进行显示,因此,只要离线图像没有更新,就可以多次从内存器3中读取该离线图像并显示,使得在合成和显示离线图像的过程中可以减少图像合成次数,从而减少了带宽的消耗。
例如,移动终端外接了显示设备,此时待合成图层面积为移动终端的显示面积加上外接显示设备的显示面积,这样就很容易使待合成图层面积大于待合成图层面积阈值,因此外接显示设备时,所述合成模块20需要以离线合成方式来合成图像,即所述合成模块20将所述待合成图层合成为离线图像,将所述离线图像缓存到所述内存器3,以便所述显示控制模块30在需要显示所述离线图像时,从所述内存器3读取所述离线图像,并将所述离线图像传输到显示器2显示。
再例如,移动终端的显示器2为:1280*720,将待合成图层面积阈值设置为3个移动终端的显示器2,即:1280*720*3,如果待合成图层面积大于或等于待合成图层面积阈值即(1280*720*3),则需要以离线合成方式来合成图像,即所述合成模块20将待合成图层合成为离线图像,再将所述离线图像缓存到所述内存器3,以便所述显示控制模块30在需要显示所述离线图像时,从所述内存器3读取所述离线图像,并将所述离线图像传输到显示器2显示。
另外,在离线合成方式中,当待合成图层数量超过预设的待合成图层数量阈值时,需要进行迭代合成处理。例如,待合成图层数量N大于5时,32>N>5,在所述合成模块20第一次进行离线图像合成时,选择4个待合成图层合成为第一局部离线图像,并将所述第一局部离线图像传输到所述内存器3缓存;如果N-5<=4,则所述合成模块20进行第二次离线图像合成,在第二次离线图像合成中,所述合成模块20将所述第一局部离线图像和其他未进行合成的待合成图层合成为最终离线图像,将所述最终离线图像缓存到所述内存器3中,以便所述显示控制模块30在需要显示所述最终离线图像时,从所述内存器3读取所述最终离线图像,并将所述最终离线图像传输到显示器2显示;如果N-5>4,则所述合成模块20选择另外5个待合成图层合成为第二局部离线图像,并将所述第二局部离线图像传输到所述内存器3缓存,若此时N-8<=4,则所述合成模块20继续将所述第一局部离线图像、所述第二局部离线图像以及其他未进行合成的待合成图层合成为最终离线图像,将所述最终离线图像缓存到所述内存器3中,以便所述显示控制模块30在需要显示所述最终离线图像时,从所述内存器3读取所述最终离线图像,并将所述最终离线图像传输到显示器2显示。
其中,使用在线合成方式的优点是性能最优,并且在部分场景功耗最优,可使用的场景包括:画面要求连续流畅的游戏,且帧率在40-60fps,如水果忍者等等;或者,典型界面下的快速滑动场景,如快速电话薄、短信滑动等等;或者,视频播放、照片预览以及拍照场景。
使用离线合成方式可以应付任何场景,特别是在用户间歇性访问用户界面的情况下,减少了图像合成的带宽和计算,从而能够大大减少功耗,适用的场景包括:网页浏览、电话薄、短信浏览等等。
所述状态检测模块40,用于检测当前的显示状态是否为多屏显示;
具体的,在所述比较模块10比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小之前,所述状态检测模块40可以检测当前的显示状态是否为多屏显示,所述多屏显示包括HDMI输出以及基于无线网络的多屏显示。
所述合成模块20,还用于当所述状态检测模块40检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像,并将所述离线图像传输到所述内存器3进行缓存,并通知所述显示控制模块30在需要显示所述离线图像时,读取缓存的所述离线图像并将所述离线图像传输到所述显示器2进行显示;
通知模块50,用于当所述状态检测模块40未检测到所述当前的显示状态为多屏显示时,通知所述比较模块10比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
具体的,当所述状态检测模块40未检测到所述当前的显示状态为多屏显示时,则可以通知所述比较模块10比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小。
所述切换模块70,用于当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器2显示更新后的图像;
例如,若初始的比较结果为第一比较结果,且重新获取到的待合成图层的参数与预设的参数阈值的比较结果变化为第二比较结果,则所述切换模块70可以将当前的在线合成方式切换为离线合成方式,并由所述合成模块20根据所述离线合成方式合成得到更新后的离线图像以在显示器2上显示所述更新后的离线图像,即所述合成模块20将重新获取到的待合成图层合成为更新后的离线图像,将所述更新后的离线图像缓存到所述内存器3,并由所述显示控制模块30在需要显示所述更新后的离线图像时,再从所述内存器3中读取所述更新后的离线图像,以将所述更新后的离线图像传输到显示器2显示。
所述第一奇偶切换模块80,用于在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
具体的,由于在视频帧中偶数位的数据帧需要更新数据,所以在偶数位的数据帧时刻是通过离线合成方式来更新数据,又因为偶数位的数据帧与下一帧的数据内容基本相同,所以所述第一奇偶切换模块80在偶数位的数据帧更新完数据后可以将离线合成方式切换到在线合成方式,同样的,所述第一奇偶切换模块80在奇数位的数据帧时刻可以将在线合成方式切换到离线合成方式,以便于在视频帧中偶数位的数据帧时刻更新数据。
所述第二奇偶切换模块90,用于在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式;
具体的,由于在视频帧中奇数位的数据帧需要更新数据,所以在视频帧中奇数位的数据帧时刻是通过离线合成方式来更新数据,又因为奇数位的数据帧与下一帧的数据内容基本相同,所以所述第二奇偶切换模块90在奇数位的数据帧更新完数据后可以将离线合成方式切换到在线合成方式,同样的,所述第二奇偶切换模块90在偶数位的数据帧时刻可以将在线合成方式切换到离线合成方式,以便于在视频帧中奇数位的数据帧时刻更新数据。
所述更新检测模块60,用于当所述显示器2上显示有所述在线图像或所述离线图像,且所述显示器2不具有内存空间时,检测待合成图层是否更新;
所述显示控制模块30,还用于当显示器2刷新帧同步信号到达,且所述更新检测模块60未检测到待合成图层更新时,读取预先缓存于所述内存器3中的所述在线图像或所述离线图像,并继续在所述显示器2显示所述在线图像或所述离线图像;
具体的,当显示器2刷新帧同步信号到达,且所述更新检测模块60未检测到待合成图层更新时,所述显示控制模块30可以读取预先缓存于所述内存器3中的所述在线图像或所述离线图像,并继续在所述显示器2显示所述在线图像或所述离线图像,使得在待合成图层没有更新时,只需将所述内存器3中的所述在线图像或所述离线图像在显示器2上进行刷屏操作,以减少显示器2在刷屏时合成图像的次数。
所述合成模块20,还用于当显示器2刷新帧同步信号到达,且所述更新检测模块60检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并通知所述显示控制模块30显示所述更新后的在线图像或离线图像;
具体的,在不具有内存空间的显示器2中,当显示器2刷新帧同步信号到达,且所述更新检测模块60检测到待合成图层更新时,所述合成模块20可以将重新获取到的待合成图层合成为更新后的在线图像或离线图像。若更新后得到在线图像,则通知所述显示控制模块30直接显示更新后的在线图像,并同时将更新后的在线图像缓存在所述内存器3中,以便于在后续没有待合成图层更新时可以通过所述更新后的在线图像进行刷屏;若更新后得到离线图像,则先缓存该更新后的离线图像,再由所述显示控制模块30读取该更新后的离线图像并显示该更新后的离线图像,并且在后续没有待合成图层更新时可以通过该更新后的离线图像进行刷屏。
所述更新检测模块60,还用于当所述显示器2上显示有所述在线图像或所述离线图像,且所述显示器2具有内存空间时,检测待合成图层是否更新;
所述显示控制模块30,还用于当显示器2刷新帧同步信号到达,且所述更新检测模块60未检测到待合成图层更新时,读取预先缓存于显示器2内存中的所述在线图像或所述离线图像,并继续在所述显示器2显示所述在线图像或所述离线图像;
具体的,当显示器2刷新帧同步信号到达,且所述更新检测模块60未检测到待合成图层更新时,所述显示控制模块30可以读取预先缓存于显示器2内存中的所述在线图像或所述离线图像,并继续在所述显示器2显示所述在线图像或所述离线图像。其中,在将所述在线图像或所述离线图像传输给显示器2时,所述显示器2内存将会自动缓存所述在线图像或所述离线图像。在没有待合成图层更新时,所述显示器2可以通过缓存于显示器2内存中的所述在线图像或所述离线图像进行刷屏操作,从而减少了刷屏过程中合成图像的次数,节约了带宽。
所述合成模块20,还用于当所述更新检测模块60检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于所述内存器3中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,并分别将所述更新后的在线图像或离线图像传输到所述显示器2内存以及所述内存器3进行缓存;
具体的,当所述更新检测模块60检测到待合成图层更新时,所述合成模块20可以根据更新后的待合成图层将预先缓存于所述内存器3中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像。例如,有5个待合成图层,当其中2个待合成图层更新时,所述合成模块20将具有更新的2个待合成图层结合之前所合成的所述在线图像或所述离线图像,可以得到更新后的在线图像或所述离线图像,从而不用重新对所有待合成图层进行合成,以减少带宽。
在得到更新后的在线图像或所述离线图像后,可以分别将所述更新后的在线图像或离线图像缓存在所述显示器2内存以及所述内存器3中,以便于在后续的显示器2刷新帧同步信号到达,且未检测到待合成图层更新时,所述显示控制模块30可以从所述显示器2内存读取所述更新后的在线图像或所述离线图像,并显示所述更新后的在线图像或所述离线图像。
由上可见,本发明实施例通过比较待合成图层的参数和参数阈值的数值大小,可以在得到第一比较结果时,将待合成图层合成为在线图像,并直接将在线图像传输给显示器2显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽;同时,在得到第二比较结果时,将待合成图层合成为离线图像,并缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器2进行显示,因此,只要离线图像没有更新,就可以多次从本地内存中读取该离线图像并显示,使得在合成和显示离线图像的过程中可以减少图像合成次数,从而减少了对带宽的消耗。
再请参见图8,为本发明实施例提供的又一种移动终端的具体结构示意图,所述移动终端可以包括:图层输入接口100、图层处理模块200、合成模块300、内存器400、显示控制模块500、显示器600;
所述图层输入接口100,用于接收图像或视频的待合成图层,并将待合成图层传输到所述图层处理模块200;
所述图层处理模块200,用于对所述待合成图层进行像素、色彩等因素的加工处理;
所述合成模块300,用于对进行加工处理后的待合成图层进行在线合成或离线合成,若进行在线合成,则将合成后的在线图像直接传输到所述显示控制模块500,若进行离线合成,则将合成后的离线图像传输到所述内存器400;
所述内存器400,用于缓存所述在线离线图像;
所述显示控制模块500,用于对在线图像进行像素、色彩等因素的加工处理,再将加工后的在线图像传输到所述显示器600,还用于读取缓存于所述内存器400中的离线图像,再对离线图像进行像素、色彩等因素的加工处理,再将加工后的离线图像传输到所述显示器600;
所述显示器600,用于显示在线图像或离线图像。
例如,所述图层输入接口100有S0、S1、S2、S3、S4,这5个输入接口,其中S0、S1、S2可以是针对图像的待合成图层,S3、S4可以是针对视频的待合成图层S0至S2可以是S3和S4的功能子集。
对于在线合成方式,所述图层输入接口100同时从S0至S4读入数据,并将读入的数据传输至所述图层处理模块200进行加工处理,再由所述图层处理模块200将加工处理后的所读入的数据(即待合成图层)传输至所述合成模块300。当满足在线合成条件时,所述合成模块300可以将待合成图层通过在线合成方式合成为在线图像,并将在线图像传输到显示控制模块500,再由显示控制模块500将在线图像传输至显示器600进行显示,使得在合成并显示在线图像的过程中无需对内存器400进行读写,可以减少对带宽的消耗。其中,所述待合成图层的参数包括:待合成图层数量和待合成图层面积;预设的参数阈值包括:待合成图层数量阈值和待合成图层面积阈值;所述在线合成条件为所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值。
当满足离线合成条件时,所述合成模块300可以将待合成图层通过离线合成方式将待合成图层合成为离线图像,并将该离线图像缓存在内存器400中,在需要显示该离线图像时,显示控制模块500可以读取内存器400中的离线图像,并将该离线图像发送至显示器600进行显示。其中,所述离线合成条件包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
由上可见,本发明实施例通过将待合成图层合成为在线图像,并直接将在线图像传输给显示器600显示,使得在合成和显示在线图像的过程中无需对内存进行读写,从而可以减少待合成图层合成为图像时所消耗的带宽;同时,也可以将待合成图层合成为离线图像,并缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器600进行显示,因此,只要离线图像没有更新,就可以多次从内存器400中读取该离线图像并显示,使得在合成和显示离线图像的过程中可以减少图像合成次数,从而减少了对带宽的消耗。
本领域普通技术人员可以理解为上述实施例所包括的各个单元只是按照功能逻辑进行划分的,但并不局限于上述的划分,只要能够实现相应的功能即可;另外,各功能单元的具体名称也只是为了便于相互区分,并不用于限制本发明的保护范围。
本领域普通技术人员还可以理解,实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,如存储在所述终端中的指令,通过该终端中的至少一个处理器来执行,从而实现图像处理方法。本实施例中,所述的程序可以存储于终端的可读取存储介质中,所述的存储介质,包括ROM/RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。
Claims (16)
1.一种移动终端图像的显示方法,其特征在于,包括:
比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
将所述在线图像直接传输给显示器进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果;
所述待合成图层的参数包括:待合成图层数量和待合成图层面积;
所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值。
2.如权利要求1所述的方法,其特征在于,还包括:
当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像,其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像;
缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
其中,所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。
3.如权利要求2所述的方法,其特征在于,
所述第一比较结果包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;
所述第二比较结果包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
4.如权利要求2或3所述的方法,其特征在于,在所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤之前,还包括:
检测当前的显示状态是否为多屏显示;
当检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像;
缓存所述离线图像,以便在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到显示器进行显示;
当未检测到所述当前的显示状态为多屏显示时,则执行所述比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小的步骤。
5.如权利要求4所述的方法,其特征在于,还包括:
当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器显示更新后的图像。
6.如权利要求4所述的方法,其特征在于,还包括:
在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式。
7.如权利要求4所述的方法,其特征在于,还包括:
当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器不具有内存空间时,检测待合成图层是否更新;
当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于本地内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
当显示器刷新帧同步信号到达,且检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并显示所述更新后的在线图像或离线图像。
8.如权利要求4所述的方法,其特征在于,还包括:
当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器具有内存空间时,检测待合成图层是否更新;
当显示器刷新帧同步信号到达,且未检测到待合成图层更新时,读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
当检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于本地内存中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,分别将所述更新后的在线图像或离线图像缓存在所述显示器内存以及所述本地内存中。
9.一种移动终端,其特征在于,包括:增强显示控制器(EDC)、显示器;所述增强显示控制器包括比较模块、合成模块以及显示控制模块;
所述比较模块,用于比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小;
所述合成模块,用于当所述待合成图层的参数与所述参数阈值的比较结果为第一比较结果时,通过在线合成方式将所述待合成图层合成为在线图像,其中,所述在线合成方式是将当前获取到的所述数据帧中的所有待合成图层直接合成为在线图像的方式;
所述显示控制模块,用于将所述在线图像直接传输给所述显示器进行显示;
其中,所述第一比较结果为所述待合成图层的参数均小于参数阈值的比较结果;
所述比较模块中的所述待合成图层的参数包括:待合成图层数量和待合成图层面积;
所述参数阈值包括:待合成图层数量阈值和待合成图层面积阈值。
10.如权利要求9所述的移动终端,其特征在于,还包括:内存器;
所述合成模块,还用于当所述待合成图层的参数与所述参数阈值的比较结果为第二比较结果时,通过离线合成方式将所述待合成图层合成为离线图像,其中,所述离线合成方式是将当前获取到的所述数据帧中的部分待合成图层合成为局部图像,再将所述局部图像与所述数据帧中的其余待合成图层合成为离线图像;
所述内存器,用于缓存所述离线图像;
所述显示控制模块,还用于在需要显示所述离线图像时,读取缓存的所述离线图像,并将所述离线图像传输到所述显示器进行显示;
其中,所述第二比较结果为所述待合成图层的参数中至少一种参数大于所述参数阈值的比较结果。
11.如权利要求10所述的移动终端,其特征在于,
所述第一比较结果包括:所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;
所述第二比较结果包括:所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积小于所述待合成图层面积阈值;或者,所述待合成图层数量小于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值时;或者,所述待合成图层数量大于或等于所述待合成图层数量阈值,且所述待合成图层面积大于或等于所述待合成图层面积阈值。
12.如权利要求10或11所述的移动终端,其特征在于,还包括:
状态检测模块,用于检测当前的显示状态是否为多屏显示;
所述合成模块,还用于当所述状态检测模块检测到所述当前的显示状态为多屏显示时,通过离线合成方式将所述待合成图层合成为离线图像,并将所述离线图像传输到所述内存器进行缓存,并通知所述显示控制模块在需要显示所述离线图像时,读取缓存的所述离线图像并将所述离线图像传输到所述显示器进行显示;
通知模块,用于当所述状态检测模块未检测到所述当前的显示状态为多屏显示时,通知所述比较模块比较当前获取到的数据帧中待合成图层的参数与预设的参数阈值的数值大小。
13.如权利要求12所述的移动终端,其特征在于,还包括:
切换模块,用于当重新获取到的待合成图层的参数与预设的参数阈值的比较结果发生变化时,在所述在线合成方式和所述离线合成方式之间进行切换,并根据切换后的合成方式在所述显示器显示更新后的图像。
14.如权利要求12所述的移动终端,其特征在于,还包括:
第一奇偶切换模块,用于在视频播放过程中,当检测到在视频帧中偶数位的数据帧更新数据时,在偶数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在奇数位的数据帧时刻将在线合成方式切换到离线合成方式;
第二奇偶切换模块,用于在视频播放过程中,当检测到在视频帧中奇数位的数据帧更新数据时,在奇数位的数据帧更新完数据后将离线合成方式切换到在线合成方式,在偶数位的数据帧时刻将在线合成方式切换到离线合成方式。
15.如权利要求12所述的移动终端,其特征在于,还包括:
更新检测模块,用于当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器不具有内存空间时,检测待合成图层是否更新;
所述显示控制模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块未检测到待合成图层更新时,读取预先缓存于所述内存器中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
所述合成模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块检测到待合成图层更新时,将重新获取到的待合成图层合成为更新后的在线图像或离线图像,并通知所述显示控制模块显示所述更新后的在线图像或离线图像。
16.如权利要求15所述的移动终端,其特征在于,
所述更新检测模块,还用于当所述显示器上显示有所述在线图像或所述离线图像,且所述显示器具有内存空间时,检测待合成图层是否更新;
所述显示控制模块,还用于当显示器刷新帧同步信号到达,且所述更新检测模块未检测到待合成图层更新时,读取预先缓存于显示器内存中的所述在线图像或所述离线图像,并继续在所述显示器显示所述在线图像或所述离线图像;
所述合成模块,还用于当所述更新检测模块检测到待合成图层更新时,根据更新后的待合成图层将预先缓存于所述内存器中的所述在线图像或所述离线图像重新合成为更新后的在线图像或离线图像,并分别将所述更新后的在线图像或离线图像传输到所述显示器内存以及所述内存器进行缓存。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410032313.5A CN103839533B (zh) | 2014-01-23 | 2014-01-23 | 一种移动终端图像的显示方法和移动终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410032313.5A CN103839533B (zh) | 2014-01-23 | 2014-01-23 | 一种移动终端图像的显示方法和移动终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103839533A CN103839533A (zh) | 2014-06-04 |
CN103839533B true CN103839533B (zh) | 2016-03-02 |
Family
ID=50802969
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410032313.5A Active CN103839533B (zh) | 2014-01-23 | 2014-01-23 | 一种移动终端图像的显示方法和移动终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103839533B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106055294B (zh) * | 2016-05-23 | 2019-02-01 | 福州瑞芯微电子股份有限公司 | 一种图层合成优化方法和装置 |
CN106293393A (zh) * | 2016-08-01 | 2017-01-04 | 北京奇虎科技有限公司 | 基于电子贴纸的合成显示方法、装置及终端设备 |
CN107632810B (zh) * | 2017-09-27 | 2020-09-29 | 珠海研果科技有限公司 | 一种基于Android系统HDMI同显时节省带宽的方法 |
CN110363831B (zh) * | 2019-07-17 | 2023-04-07 | Oppo广东移动通信有限公司 | 图层合成方法、装置、电子设备及存储介质 |
CN110493456B (zh) * | 2019-07-29 | 2020-10-30 | 创新先进技术有限公司 | 一种动画播放方法、装置、终端设备及服务器 |
CN110444148A (zh) * | 2019-07-30 | 2019-11-12 | 广州健飞通信有限公司 | 基于256级灰度led显示屏幕的fpga实现方法、装置及计算机可读存储介质 |
CN113625983A (zh) * | 2021-08-10 | 2021-11-09 | Oppo广东移动通信有限公司 | 图像显示方法、装置、计算机设备及存储介质 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5367318A (en) * | 1989-03-02 | 1994-11-22 | Hewlett-Packard Company | Method and apparatus for the simultaneous display of one or more selected images |
US5790096A (en) * | 1996-09-03 | 1998-08-04 | Allus Technology Corporation | Automated flat panel display control system for accomodating broad range of video types and formats |
CN101527134A (zh) * | 2009-04-03 | 2009-09-09 | 华为技术有限公司 | 一种显示方法、显示控制器及显示终端 |
US7903903B1 (en) * | 2004-02-20 | 2011-03-08 | Broadcast Pix, Inc. | Integrated live video production system |
CN102568435A (zh) * | 2007-01-23 | 2012-07-11 | 马维尔国际贸易有限公司 | 用于显示设备的低功率刷新的方法和装置 |
CN103209312A (zh) * | 2012-01-12 | 2013-07-17 | 中兴通讯股份有限公司 | 一种视频播放器、移动终端及移动终端播放视频的方法 |
-
2014
- 2014-01-23 CN CN201410032313.5A patent/CN103839533B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5367318A (en) * | 1989-03-02 | 1994-11-22 | Hewlett-Packard Company | Method and apparatus for the simultaneous display of one or more selected images |
US5790096A (en) * | 1996-09-03 | 1998-08-04 | Allus Technology Corporation | Automated flat panel display control system for accomodating broad range of video types and formats |
US7903903B1 (en) * | 2004-02-20 | 2011-03-08 | Broadcast Pix, Inc. | Integrated live video production system |
CN102568435A (zh) * | 2007-01-23 | 2012-07-11 | 马维尔国际贸易有限公司 | 用于显示设备的低功率刷新的方法和装置 |
CN101527134A (zh) * | 2009-04-03 | 2009-09-09 | 华为技术有限公司 | 一种显示方法、显示控制器及显示终端 |
CN103209312A (zh) * | 2012-01-12 | 2013-07-17 | 中兴通讯股份有限公司 | 一种视频播放器、移动终端及移动终端播放视频的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN103839533A (zh) | 2014-06-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103839533B (zh) | 一种移动终端图像的显示方法和移动终端 | |
US11711623B2 (en) | Video stream processing method, device, terminal device, and computer-readable storage medium | |
WO2021175054A1 (zh) | 图像数据处理方法及相关装置 | |
CN104269155A (zh) | 一种调整屏幕刷新频率的方法及装置 | |
US9326095B2 (en) | Method for performing cooperative function automatically and device using the same | |
EP2395440A2 (en) | Mobile terminal and conrolling method thereof | |
CN113360238A (zh) | 消息处理方法、装置、电子设备和存储介质 | |
US11747953B2 (en) | Display method and electronic device | |
EP2472845A2 (en) | Mobile terminal and controlling method thereof | |
CN101507268A (zh) | 具有增强型视频显示接口的移动终端设备、外挂装置和外部显示设备 | |
KR101989016B1 (ko) | 전자장치에서 영상통화중 파일 전송 방법 및 장치 | |
CN105706168A (zh) | 用于经由数据掩蔽来降低存储器i/o功率的系统和方法 | |
CN105095903A (zh) | 电子设备及图像处理方法 | |
CN109496428A (zh) | 显示装置和记录介质 | |
US20080292216A1 (en) | Method and system for processing images using variable size tiles | |
CN101872601B (zh) | 延伸显示系统及方法 | |
CN101630403A (zh) | 一种图片旋转实现方法和图片旋转实现装置 | |
CN108780348B (zh) | 图像传输装置、图像传输系统、和控制图像传输装置的方法 | |
CN112506370A (zh) | 一种基于触控屏实时保存记录方法、设备及存储介质 | |
WO2023125273A1 (zh) | 电子设备的图像显示方法、图像处理电路和电子设备 | |
CN113556500B (zh) | 一种视频叠加方法、装置及系统 | |
CN100451804C (zh) | 具有相机功能的移动通信终端和用于实现相机功能的方法 | |
CN115033199A (zh) | 移动终端及其图像显示方法 | |
CN101657851B (zh) | 用于控制显示单元的输出的方法及实现该方法的系统 | |
CN117687593A (zh) | 交互方法、智能终端及存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |