CN111064863A - 图像数据的处理方法及相关装置 - Google Patents
图像数据的处理方法及相关装置 Download PDFInfo
- Publication number
- CN111064863A CN111064863A CN201911357491.4A CN201911357491A CN111064863A CN 111064863 A CN111064863 A CN 111064863A CN 201911357491 A CN201911357491 A CN 201911357491A CN 111064863 A CN111064863 A CN 111064863A
- Authority
- CN
- China
- Prior art keywords
- frame
- image data
- gpu
- chip
- frame image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
- H04N5/06—Generation of synchronising signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Controls And Circuits For Display Device (AREA)
- Television Systems (AREA)
Abstract
本申请实施例公开了一种图像数据的处理方法及相关装置,应用于电子设备,方法包括:GPU和插帧芯片接收到第一帧图像数据;GPU根据第一帧图像数据生成第一帧画面数据;GPU输出第一帧画面数据;GPU和插帧芯片接收到第二帧图像数据;插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;插帧芯片输出第一插入画面数据。可见,实施本申请实施例有利于提升电子设备进行画面切换时的流畅度。
Description
技术领域
本申请涉及电子设备技术领域,具体涉及一种图像数据的处理方法及相关装置。
背景技术
随着电子技术的进步,电子设备的使用场景也越来越多,用户可以使用电子设备上网,看视频、玩游戏等。用户在使用电子设备的过程中,由于某些情况下应用程序的原始数据支持的帧率较低,导致用户在使用的过程中感受到卡顿,影响了用户的使用体验。
发明内容
本申请实施例提供了一种图像数据的处理方法及相关装置,有利于提升电子设备画面切换时的流畅度。
第一方面,本申请实施例提供一种图像数据的处理方法,应用于电子设备,所述电子设备设置有GPU和插帧芯片,所述方法包括:
所述GPU和所述插帧芯片接收到第一帧图像数据;
所述GPU根据所述第一帧图像数据生成第一帧画面数据;
所述GPU输出所述第一帧画面数据;
所述GPU和所述插帧芯片接收到第二帧图像数据;
所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;
所述插帧芯片输出所述第一插入画面数据。
第二方面,本申请实施例提供一种图像数据的处理装置,应用于电子设备,所述电子设备设置有GPU和插帧芯片,所述图像数据的处理装置包括处理单元,其中,
所述处理单元,用于所述GPU和所述插帧芯片接收到第一帧图像数据;以及用于所述GPU根据所述第一帧图像数据生成第一帧画面数据;以及用于所述GPU输出所述第一帧画面数据;以及用于所述GPU和所述插帧芯片接收到第二帧图像数据;以及用于所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;以及用于所述插帧芯片输出所述第一插入画面数据。
第三方面,本申请实施例提供一种电子设备,包括控制器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述控制器执行,上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例中,首先,电子设备中的GPU和插帧芯片接收到第一帧图像数据;其次,GPU根据第一帧图像数据生成第一帧画面数据;其次,GPU输出第一帧画面数据;其次,GPU和插帧芯片接收到第二帧图像数据;其次,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;最后,插帧芯片输出第一插入画面数据。可见,本申请实施例中插帧芯片可根据第一帧画面数据和第二帧画面数据生成第一插入画面数据,进而输出插入画面数据,增加了画面切换时显示画面的数量,进而提升了电子设备进行画面切换时的流畅度。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种电子设备的结构示意图;
图2A是本申请实施例提供的一种图像数据的处理方法的流程示意图;
图2B是本申请实施例提供的一种图像数据处理的示意图;
图3为本申请实施例提供的另一种图像数据的处理方法的流程示意图;
图4是本申请实施例提供的一种电子设备的结构示意图;
图5是本申请实施例提供的一种图像数据的处理装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
下面对本申请实施例进行详细介绍。
请参阅图1,图1是本申请实施例提供的一种电子设备的结构示意图,如图所示,电子设备包括中央处理器(CPU,Central Processing Unit)、图形处理器(GPU,GraphicsProcessing Unit)和插帧芯片;当电子设备需要切换画面时,电子设备中的CPU根据接收到的指令信息和电子设备的当前运行的应用程序的数据生成N个帧图像数据,N为大于等于2的整数;CPU将N个帧图像数据依次发送给GPU和插帧芯片,且CPU是同时发送给GPU和插帧芯片的;GPU根据N个帧图像数据生成N个帧画面数据,最终发送给显示器进行显示;插帧芯片根据N个帧图像数据生成N-1个插入画面数据,具体地,插帧芯片根据每两个相邻的帧图像数据生成一个插入画面数据,最终发送给显示器显示。
其中,电子设备可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备(例如智能手表、智能手环、计步器等)、计算设备或连接到无线调制解调器的其他处理设备,以及各种形式的用户设备(User Equipment,UE),移动台(Mobile Station,MS),终端设备(terminal device)等等。为方便描述,上面提到的设备统称为终端。
请参阅图2A,图2A是本申请实施例提供的一种图像数据的处理方法的流程示意图,应用于电子设备,所述电子设备设置有GPU和插帧芯片。如图所示,本图像数据的处理方法包括:
步骤201,所述GPU和所述插帧芯片接收到第一帧图像数据。
其中,GPU指的是图形处理器(Graphics Processing Unit,GPU)
其中,第一帧图像数据是中央处理器(Central Processing Unit,CPU)根据当前运行的应用程序的数据生成的,CPU生成第一帧图像数据后,CPU向GPU和插帧芯片同时发送第一帧图像数据,之后,GPU和插帧芯片接收到第一帧图像数据。
其中,帧图像数据是用于输入GPU,并由GPU根据帧图像数据生成可被显示器识别的帧画面数据的数据,显示器可根据帧画面数据在屏幕上显示图像,具体地,一个帧画面数据对应显示一帧图像。
其中,相邻的两个帧图像数据输入插帧芯片后,插帧芯片可根据相邻的两个帧图像数据生成插入画面数据,插入画面数据的性质与帧画面数据的性质相同,及显示器可根据插入画面数据在屏幕上显示图像,一个插入画面数据对应显示一帧图像,插入画面对应的一帧图像的显示时间在相邻的两个帧图像数据对应的两帧图像的显示时间之间,需要说明的是,帧图像数据与生成的帧画面数据对应,帧画面数据与根据帧画面数据显示的一帧图像对应,则帧图像数据与显示的一帧图像。
步骤202,所述GPU根据所述第一帧图像数据生成第一帧画面数据。
具体地,GPU根据第一帧图像数据进行绘制和渲染操作,生成第一帧画面数据。
步骤203,所述GPU输出所述第一帧画面数据。
其中,GPU在检测到同步信号到来时,GPU向显示器发送第一帧画面数据,显示器根据第一帧画面数据生成显示画面。
步骤204,所述GPU和所述插帧芯片接收到第二帧图像数据。
其中,CPU在处理完在发送第一帧图像数据给GPU和插帧芯片之后,CPU再向GPU和插帧芯片发送第二帧图像数据。
步骤205,所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据。
其中,第一帧图像数据和第二帧图像数据是CPU发送的相邻的帧图像数据,及第一时间点和第二时间点之间CPU没有发送帧图像数据,第一时间点指的是CPU发送第一帧图像数据的时间点,第二时间点指的是CPU发送第二帧图像数据的时间点,插帧芯片根据相邻的两个帧图像数据生成插入画面数据。
步骤206,所述插帧芯片输出所述第一插入画面数据。
其中,插入画面数据是可被显示器识别的数据,显示器可根据插入画面数据在屏幕上显示图像。
其中,由于第一时间点在第二时间点之前,第一插入画面是根据第一帧图像数据和第二帧图像数据生成的,电子设备本端产生同步信号,当第一同步信号到来时,电子设备的显示器接收GPU发送的第一帧画面数据并根据第一帧画面数据显示画面;当第二同步信号到来时,电子设备的显示器接收插帧芯片发送的第一插入画面数据并根据第一插入画面数据显示画面;当第三同步信号到来时,电子设备的显示器接收GPU发送的第二帧画面数据并根据第二帧画面数据显示画面,其中,第一同步信号到来的时间点在第二同步信号到来的时间点之前,第二同步信号到来的时间点在第三同步信号到来的时间点之前;及电子设备的显示器先显示第一帧画面数据对应的画面,之后,显示第一插入画面数据对应的画面,之后,显示第二帧画面数据对应的画面。具体地,请参阅图2B,图2B为本申请实施例提供的一种图像数据处理的示意图,若GPU和插帧芯片共接收到N个帧图像数据,N为大于等于2的正整数,则GPU可根据N个帧图像数据生成N个帧画面数据,插帧芯片可根据N个帧图像数据生成N-1个插入画面数据,并且GPU和插帧芯片交替向显示器发送画面数据,需要说明的是,图2B中所示的GPU是同一个GPU,所示的插帧芯片是同一个插帧芯片。
可以看出,本申请实施例中,首先,电子设备中的GPU和插帧芯片接收到第一帧图像数据;其次,GPU根据第一帧图像数据生成第一帧画面数据;其次,GPU输出第一帧画面数据;其次,GPU和插帧芯片接收到第二帧图像数据;其次,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;最后,插帧芯片输出第一插入画面数据。可见,本申请实施例中插帧芯片可根据第一帧画面数据和第二帧画面数据生成第一插入画面数据,进而输出插入画面数据,增加了画面切换时显示画面的数量,进而提升了电子设备进行画面切换时的流畅度。
在一个可能的示例中,所述插帧芯片与所述电子设备的CPU通信连接,所述GPU与所述CPU通信连接,所述GPU和所述插帧芯片接收到第一帧图像数据之前,所述方法还包括:所述CPU同时向所述GPU和所述插帧芯片发送所述第一帧图像数据。
可见,本示例中,电子设备的插帧芯片和GPU均与CPU直接连接,因此,插帧芯片可以直接接收到CPU发送的帧图像数据,实现了插帧芯片和GPU并行处理数据的效果,提升了画面显示的响应速率。
可选的,插帧芯片可以与CPU并行处理数据,及插帧芯片可以与CPU同时获取当前应用程序的数据,GPU通信连接CPU,CPU根据应用程序的数据生成第一帧图像数据、第二帧图像数据……,并发送帧图像数据至GPU,GPU再根据第一帧图像数据生成第一帧画面数据,第二帧画面数据……,最终发送给显示器进行显示;插帧芯片根据应用程序的数据生成第一帧图像数据、第二帧图像数据……,其次插帧芯片在根据第一帧图像数据和第二帧图像数据生成第一插入画面,再根据第二帧图像数据和第三帧图像数据生成第二插入画面数据,最终发送给显示器进行显示;具体地,若当前应用程序的数据对应N个帧图像数据,N为大于等于2的正整数,则GPU可根据N个帧图像数据生成N个帧画面数据,插帧芯片可根据N个帧图像数据生成N-1个插入画面数据,GPU和插帧芯片交替向显示器发送帧画面数据和插入画面数据,具体地,GPU首先向显示器发送第一帧画面数据,插帧芯片向显示器发送第一插入画面数据,GPU再向显示器发送第二帧画面数据,……插帧芯片向显示器发送第(N-1)插入画面数据,GPU向显示器发送第N帧画面数据。
在一个可能的示例中,所述GPU和所述插帧芯片接收到第二帧图像数据之前,所述方法还包括:所述CPU同时向所述GPU和所述插帧芯片发送所述第二帧图像数据。
可见,本示例中,电子设备的CPU同时向插帧芯片和GPU发送第二帧图像数据,使得在GPU根据第二帧图像数据进行绘制渲染生成第二帧画面数据的过程中,插帧芯片可根据第一帧图像数据和第二帧图像数据生成第一插入画面数据,提高了数据处理的效率。
在一个可能的示例中,所述GPU输出所述第一帧画面数据,包括:所述GPU向所述电子设备的帧缓冲存储区发送所述第一帧画面数据;在第一同步信号到来时,所述电子设备的视频控制器读取所述帧缓冲存储区的所述第一帧画面数据;所述视频控制器向所述电子设备的显示器发送所述第一帧画面的数据;所述显示器根据所述第一帧画面的数据显示所述第一帧画面。
其中,第一同步信号可以是垂直同步V-Sync信号。
可见,本示例中,GPU首先将处理得到的帧画面数据存储至帧缓冲存储区,以便于同步信号到来时,视频控制器可及时的向显示器发送帧画面数据,使得显示器可及时的根据帧画面数据显示画面,提升了电子设备显示画面的效率。
在一个可能的示例中,所述CPU向所述GPU和所述插帧芯片同时发送所述第一帧图像数据之前,所述方法还包括;所述电子设备的传感器检测到操作指令;所述CPU接收到所述传感器发送的所述操作指令;所述CPU根据所述操作指令和应用程序的数据生成所述第一帧图像数据。
其中,传感器可以包括:触控显示屏,麦克风,眼球追踪识别模块;检测到操作指令的方式包括:用户触控显示屏,检测到用户的语音指令,通过眼球追踪检测到用户传达的指令等;电子设备在检测到操作指令后,在响应操作指令的过程中,电子设备需要改变显示器显示的画面内容。
可见,本示例中,电子设备在检测到用户的操作指令后,CPU根据操作指令和应用程序的数据生成帧图像数据,在本申请实施例中,由于插帧芯片和GPU可同时获取到CPU发送的帧图像数据,进而缩短了生成插入画面数据的时间,加速了显示屏显示画面的速率,减少了响应操作指令的时间,提升了显示屏的响应速率。
在一个可能的示例中,所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据,包括:所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据确定矢量位移;所述插帧芯片根据所述矢量位移生成所述第一插入画面数据。
其中,矢量位移是第一帧图像数据至第二帧图像的矢量位移,插帧芯片将第一帧图像数据和矢量位移相加得到第一插入图像数据,再针对第一插入图像数据进行绘制渲染等操作得到第一插入画面数据,最终将第一插入画面数据发送至显示器进行显示。
其中,矢量位移指的是同一图像特征点在第一帧画面和第二帧画面之间的矢量位移;具体地,电子设备可建立平面坐标系,电子设备的显示屏的每个像素对应一个坐标,假设显示屏当前共有121个像素,以横竖为11×11分布在显示屏上,例如,当前显示的第一帧图像数据对应的第一帧画面显示的一个小圆点位于电子设备的左下角(0,0),在第二帧图像数据对应的第二帧画面中小圆点移动到了坐标为(10,10)的位置,及显示屏的右上角,则矢量位移为(10,10),则插帧芯片生成的第一插入画面中小原点的位置坐标为(5,5),及在坐标(0,0)的基础上加矢量位移(5,5),及第一帧画面和第二帧画面之间的矢量位移的二分之一。
可选的,插帧芯片可通过光流法计算得到第一帧图像数据和第二帧图像数据对应的插帧画面,及第一插入画面数据。
可见,本示例中,插帧芯片可根据第一帧图像数据和第二帧图像数据生成第一插入画面数据,提升了生成插入画面数据的效率。
在一个可能的示例中,所述插帧芯片输出所述第一插入画面之后,所述方法还包括:所述GPU根据所述第二帧图像数据生成第二帧画面数据;所述插帧芯片输出所述第二帧画面数据。
可见,本示例中,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据的同时,GPU根据第二帧图像数据生成第二帧画面数据,提升了数据处理的效率。
与图2A所示的实施例一致的,请参阅图3,图3是本申请实施例提供的一种图像数据的处理方法的流程示意图,应用于电子设备,所述电子设备设置有GPU和插帧芯片,所述插帧芯片与所述电子设备的CPU通信连接,所述GPU与所述CPU通信连接。如图所示,本图像数据的处理方法包括:
步骤301,所述CPU同时向所述GPU和所述插帧芯片发送所述第一帧图像数据。
步骤302,所述GPU根据所述第一帧图像数据生成第一帧画面数据。
步骤303,所述GPU输出所述第一帧画面数据。
步骤304,所述CPU同时向所述GPU和所述插帧芯片发送所述第二帧图像数据。
步骤305,所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据。
步骤306,所述插帧芯片输出所述第一插入画面数据。
步骤307,所述GPU根据所述第二帧图像数据生成第二帧画面数据。
步骤308,所述插帧芯片输出所述第二帧画面数据。
可以看出,本申请实施例中,首先,电子设备中的GPU和插帧芯片接收到第一帧图像数据;其次,GPU根据第一帧图像数据生成第一帧画面数据;其次,GPU输出第一帧画面数据;其次,GPU和插帧芯片接收到第二帧图像数据;其次,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;最后,插帧芯片输出第一插入画面数据。可见,本申请实施例中插帧芯片可根据第一帧画面数据和第二帧画面数据生成第一插入画面数据,进而输出插入画面数据,增加了画面切换时显示画面的数量,进而提升了电子设备进行画面切换时的流畅度。
此外,电子设备的插帧芯片和GPU均与CPU直接连接,因此,插帧芯片可以直接接收到CPU发送的帧图像数据,实现了插帧芯片和GPU并行处理数据的效果,提升了画面显示的响应速率。
此外,本示例中,GPU首先将处理得到的帧画面数据存储至帧缓冲存储区,以便于同步信号到来时,视频控制器可及时的向显示器发送帧画面数据,使得显示器可及时的根据帧画面数据显示画面,提升了电子设备显示画面的效率。
与所述图2A、图3所示的实施例一致的,请参阅图4,图4是本申请实施例提供的一种电子设备400的结构示意图,如图所示,所述电子设备400设置有GPU和插帧芯片,所述电子设备400包括应用处理器410、存储器420、通信接口430以及一个或多个程序421,其中,所述一个或多个程序421被存储在上述存储器420中,并且被配置由上述应用处理器410执行,所述一个或多个程序421包括用于执行以下步骤的指令:
所述GPU和所述插帧芯片接收到第一帧图像数据;
所述GPU根据所述第一帧图像数据生成第一帧画面数据;
所述GPU输出所述第一帧画面数据;
所述GPU和所述插帧芯片接收到第二帧图像数据;
所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;
所述插帧芯片输出所述第一插入画面数据。
可以看出,本申请实施例中,首先,电子设备中的GPU和插帧芯片接收到第一帧图像数据;其次,GPU根据第一帧图像数据生成第一帧画面数据;其次,GPU输出第一帧画面数据;其次,GPU和插帧芯片接收到第二帧图像数据;其次,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;最后,插帧芯片输出第一插入画面数据。可见,本申请实施例中插帧芯片可根据第一帧画面数据和第二帧画面数据生成第一插入画面数据,进而输出插入画面数据,增加了画面切换时显示画面的数量,进而提升了电子设备进行画面切换时的流畅度。
在一个可能的示例中,所述插帧芯片与所述电子设备的CPU通信连接,所述GPU与所述CPU通信连接,在所述GPU和所述插帧芯片接收到第一帧图像数据之前,所述程序中的指令具体用于执行以下操作:所述CPU同时向所述GPU和所述插帧芯片发送所述第一帧图像数据。
在一个可能的示例中,在所述GPU和所述插帧芯片接收到第二帧图像数据之前,所述程序中的指令具体用于执行以下操作:所述CPU同时向所述GPU和所述插帧芯片发送所述第二帧图像数据。
在一个可能的示例中,在所述GPU输出所述第一帧画面数据方面,所述程序中的指令具体用于执行以下操作:所述GPU向所述电子设备的帧缓冲存储区发送所述第一帧画面数据;在第一同步信号到来时,所述电子设备的视频控制器读取所述帧缓冲存储区的所述第一帧画面数据;所述视频控制器向所述电子设备的显示器发送所述第一帧画面的数据;所述显示器根据所述第一帧画面的数据显示所述第一帧画面。
在一个可能的示例中,在所述CPU向所述GPU和所述插帧芯片同时发送所述第一帧图像数据之前,所述程序中的指令具体用于执行以下操作;所述电子设备的传感器检测到操作指令;所述CPU接收到所述传感器发送的所述操作指令;所述CPU根据所述操作指令和应用程序的数据生成所述第一帧图像数据。
在一个可能的示例中,在所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据方面,所述程序中的指令具体用于执行以下操作:所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据确定矢量位移;所述插帧芯片根据所述矢量位移生成所述第一插入画面数据。
在一个可能的示例中,在所述插帧芯片输出所述第一插入画面之后,所述程序中的指令具体用于执行以下操作:所述GPU根据所述第二帧图像数据生成第二帧画面数据;所述插帧芯片输出所述第二帧画面数据。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个控制单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图5是本申请实施例中所涉及的图像数据的处理装置500的功能单元组成框图。该图像数据的处理装置500应用于电子设备,所述电子设备设置有图形处理器GPU和插帧芯片,图像数据的处理装置500包括处理单元501,其中:
所述处理单元501,用于所述GPU和所述插帧芯片接收到第一帧图像数据;以及用于所述GPU根据所述第一帧图像数据生成第一帧画面数据;以及用于所述GPU输出所述第一帧画面数据;以及用于所述GPU和所述插帧芯片接收到第二帧图像数据;以及用于所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;以及用于所述插帧芯片输出所述第一插入画面数据。
其中,所述图像数据的处理装置500还可以包括通信单元502和存储单元503,所述存储单元503用于存储电子设备的程序代码和数据。所述处理单元501可以是处理器,所述通信单元502可以是触控显示器或者收发器,所述存储单元503可以是存储器。
可以看出,本申请实施例中,首先,电子设备中的GPU和插帧芯片接收到第一帧图像数据;其次,GPU根据第一帧图像数据生成第一帧画面数据;其次,GPU输出第一帧画面数据;其次,GPU和插帧芯片接收到第二帧图像数据;其次,插帧芯片根据第一帧图像数据和第二帧图像数据生成第一插入画面数据;最后,插帧芯片输出第一插入画面数据。可见,本申请实施例中插帧芯片可根据第一帧画面数据和第二帧画面数据生成第一插入画面数据,进而输出插入画面数据,增加了画面切换时显示画面的数量,进而提升了电子设备进行画面切换时的流畅度。
在一个可能的示例中,所述插帧芯片与所述电子设备的CPU通信连接,所述GPU与所述CPU通信连接,在所述GPU和所述插帧芯片接收到第一帧图像数据之前,所述处理单元501具体用于:所述CPU同时向所述GPU和所述插帧芯片发送所述第一帧图像数据。
在一个可能的示例中,在所述GPU和所述插帧芯片接收到第二帧图像数据之前,所述处理单元501具体用于:所述CPU同时向所述GPU和所述插帧芯片发送所述第二帧图像数据。
在一个可能的示例中,在所述GPU输出所述第一帧画面数据方面,所述处理单元501具体用于:所述GPU向所述电子设备的帧缓冲存储区发送所述第一帧画面数据;在第一同步信号到来时,所述电子设备的视频控制器读取所述帧缓冲存储区的所述第一帧画面数据;所述视频控制器向所述电子设备的显示器发送所述第一帧画面的数据;所述显示器根据所述第一帧画面的数据显示所述第一帧画面。
在一个可能的示例中,在所述CPU向所述GPU和所述插帧芯片同时发送所述第一帧图像数据之前,所述处理单元501具体用于;所述电子设备的传感器检测到操作指令;所述CPU接收到所述传感器发送的所述操作指令;所述CPU根据所述操作指令和应用程序的数据生成所述第一帧图像数据。
在一个可能的示例中,在所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据方面,所述处理单元501具体用于:所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据确定矢量位移;所述插帧芯片根据所述矢量位移生成所述第一插入画面数据。
在一个可能的示例中,在所述插帧芯片输出所述第一插入画面之后,所述处理单元501具体用于:所述GPU根据所述第二帧图像数据生成第二帧画面数据;所述插帧芯片输出所述第二帧画面数据。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括移动终端。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括移动终端。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个控制单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种图像数据的处理方法,其特征在于,应用于电子设备,所述电子设备设置有图形处理器GPU和插帧芯片,所述方法包括:
所述GPU和所述插帧芯片接收第一帧图像数据;
所述GPU根据所述第一帧图像数据生成第一帧画面数据;
所述GPU输出所述第一帧画面数据;
所述GPU和所述插帧芯片接收到第二帧图像数据;
所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;
所述插帧芯片输出所述第一插入画面数据。
2.根据权利要求1所述的方法,其特征在于,所述插帧芯片与所述电子设备的中央处理器CPU通信连接,所述GPU与所述CPU通信连接,所述GPU和所述插帧芯片接收到第一帧图像数据之前,所述方法还包括:
所述CPU向所述GPU和所述插帧芯片发送所述第一帧图像数据。
3.根据权利要求2所述的方法,其特征在于,所述GPU和所述插帧芯片接收到第二帧图像数据之前,所述方法还包括:
所述CPU同时向所述GPU和所述插帧芯片发送所述第二帧图像数据。
4.根据权利要求1-3任一项所述的方法,其特征在于,所述GPU输出所述第一帧画面数据,包括:
所述GPU向所述电子设备的帧缓冲存储区发送所述第一帧画面数据;
在第一同步信号到来时,所述电子设备的视频控制器读取所述帧缓冲存储区的所述第一帧画面数据;
所述视频控制器向所述电子设备的显示器发送所述第一帧画面数据;
所述显示器根据所述第一帧画面数据显示第一帧画面。
5.根据权利要求2或3所述的方法,其特征在于,所述CPU向所述GPU和所述插帧芯片发送所述第一帧图像数据之前,所述方法还包括;
所述电子设备的传感器检测到操作指令;
所述CPU接收到所述传感器发送的所述操作指令;
所述CPU根据所述操作指令和应用程序的数据生成所述第一帧图像数据。
6.根据权利要求1-5任一项所述的方法,其特征在于,所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据,包括:
所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据确定矢量位移;
所述插帧芯片根据所述矢量位移生成所述第一插入画面数据。
7.根据权利要求1-6任一项所述的方法,其特征在于,所述插帧芯片输出所述第一插入画面之后,所述方法还包括:
所述GPU根据所述第二帧图像数据生成第二帧画面数据;
所述插帧芯片输出所述第二帧画面数据。
8.一种图像数据的处理装置,其特征在于,应用于电子设备,所述电子设备设置有GPU和插帧芯片,所述图像数据的处理装置包括处理单元,其中,
所述处理单元,用于所述GPU和所述插帧芯片接收到第一帧图像数据;以及用于所述GPU根据所述第一帧图像数据生成第一帧画面数据;以及用于所述GPU输出所述第一帧画面数据;以及用于所述GPU和所述插帧芯片接收到第二帧图像数据;以及用于所述插帧芯片根据所述第一帧图像数据和所述第二帧图像数据生成第一插入画面数据;以及用于所述插帧芯片输出所述第一插入画面数据。
9.一种电子设备,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质,其特征在于,存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911357491.4A CN111064863B (zh) | 2019-12-25 | 2019-12-25 | 图像数据的处理方法及相关装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911357491.4A CN111064863B (zh) | 2019-12-25 | 2019-12-25 | 图像数据的处理方法及相关装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111064863A true CN111064863A (zh) | 2020-04-24 |
CN111064863B CN111064863B (zh) | 2022-04-15 |
Family
ID=70303597
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911357491.4A Active CN111064863B (zh) | 2019-12-25 | 2019-12-25 | 图像数据的处理方法及相关装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111064863B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112135081A (zh) * | 2020-09-11 | 2020-12-25 | Oppo广东移动通信有限公司 | 模式控制方法、装置、插帧芯片以及电子设备 |
CN114416365A (zh) * | 2022-01-18 | 2022-04-29 | 北京拙河科技有限公司 | 基于gpu融合处理的超清画质图像数据处理方法与装置 |
WO2022116962A1 (zh) * | 2020-12-04 | 2022-06-09 | 维沃移动通信有限公司 | 视频播放方法、装置及电子设备 |
WO2023240699A1 (zh) * | 2022-06-15 | 2023-12-21 | 武汉华星光电半导体显示技术有限公司 | 显示装置及电子设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130177080A1 (en) * | 2012-01-11 | 2013-07-11 | Panasonic Corporation | Image processing apparatus, image capturing apparatus, and program |
CN103533286A (zh) * | 2012-06-29 | 2014-01-22 | 英特尔公司 | 用于带静态区域排除的时间帧内插的方法和系统 |
US20140092109A1 (en) * | 2012-09-28 | 2014-04-03 | Nvidia Corporation | Computer system and method for gpu driver-generated interpolated frames |
CN108322685A (zh) * | 2018-01-12 | 2018-07-24 | 广州华多网络科技有限公司 | 视频插帧方法、存储介质以及终端 |
CN109599055A (zh) * | 2019-02-20 | 2019-04-09 | 合肥惠科金扬科技有限公司 | 一种显示面板的驱动方法、驱动装置及显示装置 |
CN109803175A (zh) * | 2019-03-12 | 2019-05-24 | 京东方科技集团股份有限公司 | 视频处理方法及装置、设备、存储介质 |
CN109922231A (zh) * | 2019-02-01 | 2019-06-21 | 重庆爱奇艺智能科技有限公司 | 一种用于生成视频的插帧图像的方法和装置 |
CN110392282A (zh) * | 2018-04-18 | 2019-10-29 | 优酷网络技术(北京)有限公司 | 一种视频插帧的方法、计算机存储介质及服务器 |
-
2019
- 2019-12-25 CN CN201911357491.4A patent/CN111064863B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20130177080A1 (en) * | 2012-01-11 | 2013-07-11 | Panasonic Corporation | Image processing apparatus, image capturing apparatus, and program |
CN103533286A (zh) * | 2012-06-29 | 2014-01-22 | 英特尔公司 | 用于带静态区域排除的时间帧内插的方法和系统 |
US20140092109A1 (en) * | 2012-09-28 | 2014-04-03 | Nvidia Corporation | Computer system and method for gpu driver-generated interpolated frames |
CN108322685A (zh) * | 2018-01-12 | 2018-07-24 | 广州华多网络科技有限公司 | 视频插帧方法、存储介质以及终端 |
CN110392282A (zh) * | 2018-04-18 | 2019-10-29 | 优酷网络技术(北京)有限公司 | 一种视频插帧的方法、计算机存储介质及服务器 |
CN109922231A (zh) * | 2019-02-01 | 2019-06-21 | 重庆爱奇艺智能科技有限公司 | 一种用于生成视频的插帧图像的方法和装置 |
CN109599055A (zh) * | 2019-02-20 | 2019-04-09 | 合肥惠科金扬科技有限公司 | 一种显示面板的驱动方法、驱动装置及显示装置 |
CN109803175A (zh) * | 2019-03-12 | 2019-05-24 | 京东方科技集团股份有限公司 | 视频处理方法及装置、设备、存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112135081A (zh) * | 2020-09-11 | 2020-12-25 | Oppo广东移动通信有限公司 | 模式控制方法、装置、插帧芯片以及电子设备 |
WO2022116962A1 (zh) * | 2020-12-04 | 2022-06-09 | 维沃移动通信有限公司 | 视频播放方法、装置及电子设备 |
CN114416365A (zh) * | 2022-01-18 | 2022-04-29 | 北京拙河科技有限公司 | 基于gpu融合处理的超清画质图像数据处理方法与装置 |
WO2023240699A1 (zh) * | 2022-06-15 | 2023-12-21 | 武汉华星光电半导体显示技术有限公司 | 显示装置及电子设备 |
Also Published As
Publication number | Publication date |
---|---|
CN111064863B (zh) | 2022-04-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111064863B (zh) | 图像数据的处理方法及相关装置 | |
CN112004086B (zh) | 视频数据处理方法及装置 | |
CN111225150B (zh) | 插帧处理方法及相关产品 | |
US8331701B2 (en) | Image processing device for displaying an image on a display | |
CN109819232B (zh) | 一种图像处理方法及图像处理装置、显示装置 | |
CN110933496B (zh) | 图像数据插帧处理方法、装置、电子设备及存储介质 | |
CN108876700B (zh) | 一种提升vr显示效果的方法和电路 | |
CN112422873A (zh) | 插帧方法、装置、电子设备及存储介质 | |
EP3754980A1 (en) | Method and device for viewing angle synchronization in virtual reality (vr) live broadcast | |
CN107027068A (zh) | 渲染方法、解码方法、播放多媒体数据流的方法及装置 | |
CN114428597A (zh) | 多路终端投屏控制方法、装置、投屏器及存储介质 | |
CN113076048A (zh) | 视频的展示方法、装置、电子设备和存储介质 | |
CN111464828A (zh) | 虚拟特效显示方法、装置、终端及存储介质 | |
CN111813490A (zh) | 插帧处理方法及装置 | |
CN113206993A (zh) | 一种调整显示屏幕的方法及显示设备 | |
CN111491208A (zh) | 视频处理方法、装置、电子设备及计算机可读介质 | |
CN116546149A (zh) | 基于虚拟数字人的舞蹈教学交互方法、装置、设备及介质 | |
US20220172440A1 (en) | Extended field of view generation for split-rendering for virtual reality streaming | |
CN112019906A (zh) | 直播方法、计算机设备及可读存储介质 | |
CN106919376B (zh) | 动态画面传输方法、伺服器装置及用户装置 | |
CN111897437A (zh) | 跨终端的交互方法、装置、电子设备以及存储介质 | |
CN108681531B (zh) | 文档输入的控制方法及装置 | |
CN107612881B (zh) | 在传输文件时传输画面的方法、装置、终端及存储介质 | |
CN110941413B (zh) | 显示画面的生成方法及相关装置 | |
JP2012252214A (ja) | コンテンツ表示装置、コンテンツを表示するための方法、コンピュータをコンテンツ表示装置として機能させるためのプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |