CN114285959A - 图像处理电路、方法、装置、电子设备及芯片 - Google Patents

Abstract

本申请公开了一种图像处理电路、方法、装置、电子设备及芯片，属于图像处理技术领域。具体方案包括：主控芯片在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；图像处理芯片根据所述运动轨迹值，对第一视频图像执行目标处理；其中，所述目标处理包括：将所述第一视频图像传输至显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

Description

图像处理电路、方法、装置、电子设备及芯片

技术领域

本申请属于图像处理技术领域，具体涉及一种图像处理电路、方法、装置、电子设备及芯片。

背景技术

随着电子技术的发展，人们对图像显示效果的要求越来越高，视频插帧技术的应用也越来越广泛。

在相关技术中，电子设备可以在插帧功能处于开启状态时，持续对视频进行插帧运算，然而，对于有些插帧需求较低的视频，即使经过插帧处理其视频显示效果的提升也是很有限的，因此，这种插帧方式不仅不能提升视频显示效果，还会带来较大的功耗。

发明内容

本申请实施例的目的是提供一种图像处理电路、方法、装置、电子设备及芯片，能够在提升视频显示效果的前提下，降低不必要的插帧功耗。

第一方面，本申请实施例提供了一种图像处理电路，包括：主控芯片、图像处理芯片和显示单元，所述主控芯片与所述图像处理芯片连接，所述图像处理芯片与所述显示单元连接；所述主控芯片用于在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；所述图像处理芯片用于根据所述运动轨迹值，对第一视频图像执行目标处理；其中，所述目标处理包括：将所述第一视频图像传输至所述显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

第二方面，本申请实施例提供了一种图像处理装置，包括如第一方面所述的图像处理电路。

第三方面，本申请实施例提供了一种图像处理方法，应用于如第一方面所述的图像处理装置，该方法包括：主控芯片在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；图像处理芯片根据所述运动轨迹值，对第一视频图像执行目标处理；其中，所述目标处理包括：将所述第一视频图像传输至显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

第四方面，本申请实施例提供了一种电子设备，该电子设备包括如第一方面所述的图像处理电路、处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如第三方面所述的方法的步骤。

第五方面，本申请实施例提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现如第一方面所述的方法中图像处理芯片执行的步骤，或者实现如第一方面所述的方法中主控芯片执行的步骤。

在本申请实施例中，主控芯片用于在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；图像处理芯片用于根据所述运动轨迹值，对第一视频图像执行目标处理；其中，所述目标处理包括：将所述第一视频图像传输至所述显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。通过该方案，根据运动轨迹值的不同图像处理芯片可以直接将第一视频图像传输至显示单元进行图像显示，也可以对第一视频图像进行插帧处理，得到第二视频图像后，再将第二视频图像传输至显示单元进行图像显示，由于运动轨迹值可以反映图像中运动对象的运动活跃性，因此，根据运动轨迹值对第一视频图像进行区别处理，可以在提升图像插帧效果的同时，兼顾功耗。

附图说明

图1是本申请实施例提供的电子设备中芯片的结构示意图之一；

图2是本申请实施例提供的电子设备中芯片的结构示意图之二；

图3是本申请实施例提供的图像处理方法的示意图；

图4是本申请实施例提供的第一视频的视频帧示意图；

图5是本申请实施例提供的电子设备的硬件示意图之一；

图6是本申请实施例提供的电子设备的硬件示意图之二。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员获得的所有其他实施例，都属于本申请保护的范围。

本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象，而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施，且“第一”、“第二”等所区分的对象通常为一类，并不限定对象的个数，例如第一对象可以是一个，也可以是多个。此外，说明书以及权利要求中“和/或”表示所连接对象的至少其中之一，字符“/”，一般表示前后关联对象是一种“或”的关系。

下面结合附图，通过具体的实施例及其应用场景对本申请实施例提供的图像处理电路、方法、装置及电子设备进行详细地说明。

如图1所示，本申请实施例提供一种图像处理电路，该图像处理电路包括：主控芯片110、图像处理芯片120和显示单元130。其中，主控芯片110与图像处理芯片120连接，图像处理芯片120与显示单元130连接。

上述主控芯片110可以用于在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值。上述图像处理芯片120可以用于根据运动轨迹值，对第一视频图像执行目标处理。其中，目标处理包括：将所述第一视频图像传输至所述显示单元130进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元130进行图像显示。

需要说明的是，上述图像处理芯片120根据运动轨迹值对第一视频图像执行目标处理是指：图像处理芯片120根据运动轨迹值对第一视频图像中的任意一个视频帧进行目标处理。

需要说明的是，本申请实施例所述的运动轨迹值是用于评价运动对象的运动活跃性的参数，例如，该运动轨迹值可以为运动对象的运动距离值，也可以为运动对象的运动速度的变化次数，还可以为运动对象的运动次数，具体可以根据实际使用需求确定，本申请实施例对此不作限定。

基于上述方案，可以根据运动轨迹值的不同图像处理芯片可以直接将第一视频图像传输至显示单元进行图像显示，也可以对第一视频图像进行插帧处理，得到第二视频图像后，再将第二视频图像传输至显示单元进行图像显示，由于运动轨迹值可以反映图像中运动对象的运动活跃性，因此，根据运动轨迹值对第一视频图像进行区别处理，可以在提升图像插帧效果的同时，兼顾功耗。

可选地，上述主控芯片110可以包括：第一输出接口和运动轨迹检测单元。上述图像处理芯片120可以包括第一输入接口、第二输出接口和图像处理单元。运动轨迹检测单元连接第一输出接口，第一输出接口连接第一输入接口，第一输入接口连接图像处理单元，图像处理单元连接第二输出接口。

上述运动轨迹检测单元可以用于检测视频录制界面显示的第一视频片段中运动对象的运动轨迹值；第一输出接口可以用于输出第一视频片段，该第一输入接口可以用于接收第一视频片段，其中，第一视频片段包括第一视频图像；第一视频片段为录制的视频中的任一个视频片段。

上述图像处理单元可以包括插帧子单元和旁路，该插帧子单元可以用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对第一视频片段中的至少一帧视频图像进行插帧处理，并通过第二输出接口，将插帧处理后的至少一帧视频图像传输至显示单元进行图像显示。旁路可以用于在运动轨迹检测单元检测到运动对象的运动轨迹值小于或等于所述预设阈值的情况下，通过第二输出接口，将第一视频片段中的至少一帧视频图像传输至显示单元进行图像显示；其中，至少一帧视频图像包括第一视频图像。

具体地，继续参考图1，第一输出接口为MIPI TX 111(Mobile IndustryProcessor Interface，移动产业处理器接口)、运动轨迹检测单元为SENSOR 112(外部运动检测传感器)、第一输入接口为MIPI RX 121、第二输出接口为MIPI TX 122、插帧子单元为MEMC 123(Motion Estimate and Motion Compensation，运动估计和运动补偿)、旁路为BYPASS 124。SENSOR 112可以检测视频录制界面显示的第一视频片段中运动对象的运动轨迹值，并通过MIPI TX 111输出第一视频片段，MIPI RX 121可以接收第一视频片段，其中，第一视频片段包括第一视频图像；第一视频片段为录制的视频中的任一个视频片段。之后，在SENSOR 112检测到运动对象的运动轨迹值大于预设阈值的情况下，MEMC 123可以对第一视频片段中的至少一帧视频图像进行插帧处理，并通过MIPI TX 122将插帧处理后的至少一帧视频图像传输至显示单元130进行图像显示；在SENSOR 112检测到运动对象的运动轨迹值小于或等于所述预设阈值的情况下，可以通过BYPASS 124将第一视频片段中的至少一帧视频图像经MIPI TX 122传输至显示单元130进行图像显示；其中，至少一帧视频图像包括第一视频图像。

示例性地，以视频录制界面显示的第一视频片段为运动员跑步视频为例。运动轨迹检测单元可以检测该运动员跑步视频中运动员的运动轨迹值；在运动轨迹检测单元检测到运动员的运动轨迹值大于预设阈值的情况下，运动轨迹检测单元可以将运动员跑步视频通过第一输出接口传输至第一输入接口，第一输入接口再传输至图像处理单元的插帧子单元，插帧子单元可以对该运动员跑步视频中的至少一帧视频图像进行插帧处理，并将插帧处理后的运动员跑步视频通过第二输出接口传输至显示单元进行显示。以视频录制界面显示的第一视频片段为运动员休息视频为例。运动轨迹检测单元可以检测该运动员休息视频中运动员的运动轨迹值；在运动轨迹检测单元检测到运动员的运动轨迹值小于预设阈值的情况下，运动轨迹检测单元可以将运动员休息视频通过第一输出接口传输至第一输入接口，第一输入接口再传输至图像处理单元的旁路，并通过第二输出接口传输至显示单元进行显示。

基于上述方案，由于可以根据运动轨迹值区分高运动轨迹频次视频片段和低运动轨迹频次视频片段，并对高运动轨迹频次视频片段进行插帧处理后发送至显示单元进行显示，以及直接将低运动轨迹频次视频片段发送至显示单元进行显示，因此既可以提高高运动轨迹频次的视频片段的视频显示效果，又可以通过直接将低运动轨迹频次的视频片段发送至显示单元来降低功耗。

可选地，上述主控芯片110还可以包括：图像分离单元，运动轨迹检测单元连接图像分离单元，图像分离单元连接第一输出接口。

上述图像分离单元可以用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对第一视频帧进行图像分割处理，得到第一视频图像和背景图像，第一视频图像包括运动对象，背景图像包括静止的对象。之后，图像分离单元还可以用于通过第一输出接口，将第一视频图像和背景图像分别传输至图像处理芯片的第一输入接口。

上述图像处理单元还可以包括合成子单元。合成子单元可以用于将接收到的背景图像和插帧处理后的第一视频图像合成，得到第二视频图像，并将第二视频图像传输至显示单元进行图像显示。

需要说明的是，上述运动对象是指单位时间内运动轨迹值大于目标值的拍摄对象，上述静止的对象是指单位时间内运动轨迹值小于或等于目标值的拍摄对象。

基于上述方案，由于可以根据运动轨迹值区分视频片段中高运动轨迹频次的第一视频图像和低运动轨迹频次的背景图像，并将第一视频图像和背景图像进行图像分割处理，在对第一视频图像进行插帧处理后将插帧处理后的第一视频图像与背景图像合成得到第二视频图像，最后将第二视频图像发送至显示单元进行显示，如此，既可以提高高运动轨迹频次的第一视频图像的视频显示效果，又可以通过对背景图像的免处理来降低功耗。

可选地，上述主控芯片110还可以包括：第三输出接口。上述图像分离单元可以分别连接第一输出接口和第三输出接口，第一输出接口和第三输出接口可以分别连接第一输入接口。在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，图像分离单元可以对第一视频帧进行图像分割处理，得到第一视频图像和背景图像，之后，图像分离单元可以通过第一输出接口，将第一视频图像传输至图像处理芯片的第一输入接口，通过第三输出接口，将背景图像传输至图像处理芯片的第一输入接口。

具体地，参考图2，以图像分离单元通过第一输出接口，将第一视频图像和背景图像分别传输至图像处理芯片的第一输入接口、图像分离单元为图像分离单元113、合成子单元为Mixer125为例。在SENSOR 112检测到运动对象的运动轨迹值大于预设阈值的情况下，图像分离单元113可以对第一视频帧进行图像分割处理，得到第一视频图像和背景图像，第一视频图像包括运动对象，背景图像包括静止的对象。之后，图像分离单元113可以通过MIPI TX 111，将所第一视频图像和背景图像分别传输至MIPI RX 121。MEMC 123可以对第一视频图像进行插帧处理后发送到Mixer125，BYPASS 124可以直接将背景图像发送到Mixer125，Mixer125可以将接收到的背景图像和插帧处理后的第一视频图像合成，得到第二视频图像，并将第二视频图像传输至显示单元130进行图像显示。

示例性地，以视频录制界面显示的第一视频片段为运动员跳绳视频为例。图像分离单元可以在运动轨迹检测单元检测到运动员的运动轨迹值大于预设阈值的情况下，对运动员跳绳视频中的视频帧进行图像分割处理，得到包含运动员的视频图像和运动背景图像，之后，图像分离单元还可以通过第一输出接口，将包含运动员的视频图像和运动背景图像分别传输至图像处理芯片。图像处理单元的插帧子单元可以对包含运动员的视频图像进行插帧处理，之后，图像处理单元的合成子单元可以将接收到的运动背景图像和插帧处理后的包含运动员的视频图像合成新的运动员跳绳视频，并将运动员跳绳视频传输至显示单元进行显示。

基于上述方案，可以通过第一输出接口，将第一视频图像传输至所述图像处理芯片的第一输入接口，通过第三输出接口，将背景图像传输至所述图像处理芯片的第一输入接口，由于主控芯片可以通过第一输出接口和第三输出接口同时输出第一视频图像和背景图像，因此可以提高数据传输效率。

可选地，显示单元130具体可以用于：在运动轨迹值大于预设阈值的情况下，接收图像处理芯片120传输的第二视频图像，并以第一屏幕刷新率，显示第二视频图像；在运动轨迹值小于或等于预设阈值的情况下，接收图像处理芯片传输的第一视频图像，并以第二屏幕刷新率，显示第一视频图像；其中，第一屏幕刷新率大于第二屏幕刷新率。

基于上述方案，显示单元可以以较高的屏幕刷新率显示接收到的第二视频图像，以较低的屏幕刷新率显示接收到的第一视频图像，由于第二视频图像为插帧处理后的第一视频图像，因此，第二视频图像的帧率高于第一视频图像，以不同的屏幕刷新率显示不同帧率的视频图像一方面可以提高高帧率视频图像的视频显示效果，另一方面可以节约显示低帧率视频图像的功耗。

可选地，主控芯片110还可以用于在检测视频录制界面中运动对象的运动轨迹值之后，控制图像处理芯片关闭图像处理单元的插帧功能；在检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，控制图像处理芯片开启图像处理单元的插帧功能。

基于上述方案，由于主控芯片可以根据视频录制界面中运动对象的运动轨迹值控制图像处理芯片开启或者关闭图像处理单元的插帧功能，因此可以在提升视频显示效果的同时降低功耗。

需要说明的是，为了实现芯片的控制处理功能，上述主控芯片中还可以包括CPU(Central Processing Unit，中央处理器)、GPU(Graphics Processing Unit，图形处理器)，图像处理芯片120还可以包括：CPU、DSP(Digital Signal Processing，数字信号处理)。

如图3所示，本申请实施例提供了一种图像处理方法，应用于包括上述如图1-图2所示的图像处理电路的图像处理装置，该图像处理装置还可以包括图像传感器和显示单元，主控芯片可以与图像传感器连接，显示单元可以与主控芯片连接。该方法可以包括步骤301-303：

步骤301、主控芯片在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值。

可选地，运动轨迹检测单元可以以视频片段为单位对视频录制界面显示的图像进行检测；也可以根据运动对象对视频录制界面显示的每个视频帧的区域图像进行检测。在运动轨迹检测单元以视频片段为单位对视频录制界面显示的图像进行检测的情况下，运动轨迹检测单元可以检测视频录制界面显示的第一视频片段中运动对象的运动轨迹值。该第一视频片段包括第一视频图像，且第一视频片段为录制的视频中的任一个视频片段。在根据运动对象对视频录制界面显示的每个视频帧的区域图像进行检测的情况下，运动轨迹检测单元可以检测视频录制界面显示的第一视频片段中每个视频帧中运动对象的运动轨迹值，第一视频片段可以包括至少一个视频帧，该至少一个视频帧包括第一视频帧。

示例性地，以视频录制界面显示的视频片段包括视频片段1和视频片段2、视频片段1包括含运动对象的图像和背景图像为例。在运动轨迹检测单元以视频片段为单位对视频录制界面显示的图像进行检测的情况下，运动轨迹检测单元可以先检测视频片段1中运动对象的运动轨迹值，再检测视频片段2中运动对象的运动轨迹值。在根据运动对象对视频录制界面显示的每个视频帧的区域图像进行检测的情况下，运动轨迹检测单元可以分别检测含运动对象的图像中运动对象的运动轨迹值，以及测背景图像中运动对象的运动轨迹值。

需要说明的是，在运动轨迹检测单元以视频片段为单位对视频录制界面显示的图像进行检测的情况下，运动轨迹检测单元可以根据运动轨迹值识别出需要插帧的视频片段和不需要插帧的视频片段；在根据运动对象对视频录制界面显示的每个视频帧的区域图像进行检测的情况下，运动轨迹检测单元可以从视频帧中检测出需要插帧的视频帧区域和不需要插帧的视频帧区域。

步骤302、图像处理芯片根据运动轨迹值，对第一视频图像执行目标处理。

其中，上述目标处理可以包括：将第一视频图像传输至显示单元进行图像显示；或者，对第一视频图像进行插帧处理，得到第二视频图像，并将第二视频图像传输至显示单元进行图像显示。

可选地，若运动轨迹检测单元以视频片段为单位对视频录制界面显示的图像进行检测，则在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，图像处理芯片可以对第一视频片段中的至少一帧视频图像进行插帧处理，并将插帧处理后的至少一帧视频图像传输至显示单元进行图像显示；在运动轨迹检测单元检测到运动对象的运动轨迹值小于或等于预设阈值的情况下，图像处理芯片可以将第一视频片段中的至少一帧视频图像传输至显示单元进行图像显示；其中，该至少一帧视频图像包括第一视频图像。

具体的，图像处理芯片可以通过第一输入接口，接收主控芯片通过第一输出接口传输的第一视频图像，在运动轨迹值大于预设阈值的情况下，图像处理芯片可以对第一视频图像进行插帧处理得到第二视频图像，并通过第二输出接口，将第二视频图像传输至显示单元进行图像显示；在运动轨迹值小于或等于预设阈值的情况下，图像处理芯片可以通过第二输出接口，将第一视频图像传输至所述显示单元进行图像显示。

示例性的，以第一视频片段包括视频帧1、视频帧2和视频帧3为例。在运动轨迹检测单元检测到第一视频片段中运动对象的运动轨迹值大于预设阈值的情况下，图像处理芯片可以对视频帧1和视频帧2进行插帧处理，得到视频帧1、视频帧4、视频帧2和视频帧3，之后，图像处理芯片可以将视频帧1、视频帧4、视频帧2和视频帧3传输至显示单元进行图像显示。

基于上述方案，由于可以根据运动轨迹值区分高运动轨迹频次视频片段和低运动轨迹频次视频片段，并对高运动轨迹频次视频片段进行插帧处理后发送至显示单元进行显示，以及直接将低运动轨迹频次视频片段发送至显示单元进行显示，因此既可以提高高运动轨迹频次的视频片段的视频显示效果，又可以通过直接将低运动轨迹频次视频片段发送至显示单元来降低功耗。

可选地，若运动轨迹检测单元根据运动对象对视频录制界面显示的每个视频帧的区域图像进行检测，则在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，主控芯片中的图像分离单元可以对第一视频帧进行图像分割处理，得到第一视频图像和背景图像，第一视频图像包括运动对象，背景图像包括静止的对象；图像分离单元可以通过第一输出接口，将第一视频图像传输至图像处理芯片的第一输入接口，并通过第三输出接口，将背景图像传输至图像处理单元；图像处理单元可以对第一视频图像进行插帧处理，并将接收到的背景图像和插帧处理后的第一视频图像合成，得到第二视频图像，以及将第二视频图像传输至显示单元进行图像显示。

示例性地，如图4所示，以第一视频片段包括视频帧41、视频帧42和视频帧43为例。运动轨迹检测单元可以检测到运动对象所在第一视频图像44的运动轨迹值大于预设阈值，背景图像45的运动轨迹值不大于预设阈值，图像分离单元可以分别对视频帧41、视频帧42和视频帧43进行图像分割处理，得到第一视频图像44和背景图像45，之后，图像分离单元可以通过第一输出接口，将第一视频图像44传输至图像处理芯片的第一输入接口，并通过第三输出接口，将背景图像45传输至图像处理单元。图像处理单元可以对第一视频图像44进行插帧处理，并将接收到的背景图像45和插帧处理后的第一视频图像合成，得到第二视频图像，以及将第二视频图像传输至显示单元进行图像显示。

基于上述方案，由于可以根据运动轨迹值区分视频片段中高运动轨迹频次的第一视频图像和低运动轨迹频次的背景图像，并将第一视频图像和背景图像进行图像分割处理，在对第一视频图像进行插帧处理后将插帧处理后的第一视频图像与背景图像合成得到第二视频图像，最后将第二视频图像发送至显示单元进行显示，如此，既可以提高高运动轨迹频次的第一视频图像的视频显示效果，又可以通过对背景图像的免处理来降低功耗。

可选地，在运动轨迹值大于预设阈值的情况下，显示单元可以接收图像处理芯片传输的第二视频图像，并以第一屏幕刷新率，显示第二视频图像；在运动轨迹值小于或等于预设阈值的情况下，显示单元可以接收图像处理芯片传输的第一视频图像，并以第二屏幕刷新率，显示第一视频图像；其中，第一屏幕刷新率大于第二屏幕刷新率。

示例性地，以第一屏幕刷新率为90HZ，第二屏幕刷新率为40HZ为例。若显示单元接收到图像处理芯片传输的第二视频图像，则可以以90HZ的屏幕刷新率显示第二视频图像；若显示单元接收到图像处理芯片传输的第一视频图像，则可以以40HZ的屏幕刷新率显示第一视频图像。

基于上述方案，显示单元可以以较高的屏幕刷新率显示接收到的第二视频图像，以较低的屏幕刷新率显示接收到的第一视频图像，由于第二视频图像为插帧处理后的第一视频图像，因此，第二视频图像的帧率高于第一视频图像，以不同的屏幕刷新率显示不同帧率的视频图像一方面可以提高高帧率视频图像的视频显示效果，另一方面可以节约显示低帧率视频图像的功耗。

可选地，在主控芯片检测到视频录制界面中运动对象的运动轨迹值小于或等于预设阈值的情况下，主控芯片可以控制图像处理芯片关闭图像处理单元的插帧功能；在主控芯片检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，主控芯片可以控制图像处理芯片开启图像处理单元的插帧功能。

具体的，在主控芯片检测到视频录制界面中运动对象的运动轨迹值小于或等于预设阈值的情况下，由于图像处理芯片无需对视频录制界面中显示的图像进行插帧处理，因此，主控芯片可以控制图像处理芯片关闭图像处理单元的插帧功能；在主控芯片检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，由于图像处理芯片需要对视频录制界面中显示的图像进行插帧处理，因此，主控芯片可以控制图像处理芯片开启图像处理单元的插帧功能。

基于上述方案，由于主控芯片可以根据视频录制界面中运动对象的运动轨迹值控制图像处理芯片开启或者关闭图像处理单元的插帧功能，因此可以在提升视频显示效果的同时降低功耗。

需要说明的是，上述预设阈值可以根据第一视频图像中运动对象的运动位置变动频次确定。例如，预设阈值可以为10，即当运动对象的运动位置变动频次大于10时，运动轨迹检测单元可以确定运动对象所在第一视频图像的运动轨迹值大于预设阈值；当运动对象的运动位置变动频次不大于10时，运动轨迹检测单元可以确定运动对象所在第一视频图像的运动轨迹值小于或等于预设阈值。

在本申请实施例中，可以根据运动轨迹值的不同图像处理芯片可以直接将第一视频图像传输至显示单元进行图像显示，也可以对第一视频图像进行插帧处理，得到第二视频图像后，再将第二视频图像传输至显示单元进行图像显示，由于运动轨迹值可以反映图像中运动对象的运动活跃性，因此，根据运动轨迹值对第一视频图像进行区别处理，可以在提升图像插帧效果的同时，兼顾功耗。

本申请实施例中的图像处理装置可以是装置，也可以是终端中的部件、集成电路、或芯片。该装置可以是移动电子设备，也可以为非移动电子设备。示例性地，移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本或者个人数字助理(personaldigital assistant，PDA)等，非移动电子设备可以为服务器、网络附属存储器(NetworkAttached Storage，NAS)、个人计算机(personal computer，PC)、电视机(television，TV)、柜员机或者自助机等，本申请实施例不作具体限定。

本申请实施例中的图像处理装置可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统，可以为iOS操作系统，还可以为其他可能的操作系统，本申请实施例不作具体限定。

本申请实施例提供的图像处理装置能够实现图3至图4的方法实施例实现的各个过程，为避免重复，这里不再赘述。

可选地，如图5所示，本申请实施例还提供一种电子设备500，包括上述图像处理电路、处理器501和存储器502，存储在存储器502上并可在所述处理器501上运行的程序或指令，该程序或指令被处理器501执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

需要说明的是，本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。

图6为实现本申请实施例的一种电子设备的硬件结构示意图。

该电子设备1000包括但不限于：射频单元1001、网络模块1002、音频输出单元1003、输入单元1004、传感器1005、显示单元1006、用户输入单元1007、接口单元1008、存储器1009、处理器1010以及图像处理芯片等部件。

本领域技术人员可以理解，电子设备1000还可以包括给各个部件供电的电源(比如电池)，电源可以通过电源管理系统与处理器1010逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图6中示出的电子设备结构并不构成对电子设备的限定，电子设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置，在此不再赘述。

本申请实施例中，主控芯片可以为处理器1010，或者主控芯片包括处理器1010，即处理器1010集成在主控芯片上。

上述主控芯片用于在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；上述图像处理芯片用于根据所述运动轨迹值，对第一视频图像执行目标处理；其中，所述目标处理包括：将所述第一视频图像传输至所述显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

在本申请实施例中，可以根据运动轨迹值的不同图像处理芯片可以直接将第一视频图像传输至显示单元进行图像显示，也可以对第一视频图像进行插帧处理，得到第二视频图像后，再将第二视频图像传输至显示单元进行图像显示，由于运动轨迹值可以反映图像中运动对象的运动活跃性，因此，根据运动轨迹值对第一视频图像进行区别处理，可以在提升图像插帧效果的同时，兼顾功耗。

可选地，主控芯片包括运动轨迹检测单元，图像处理芯片包括图像处理单元。接口单元1008包括第一输出接口、第一输入接口、第二输出接口。所述运动轨迹检测单元连接所述第一输出接口，所述第一输出接口连接所述第一输入接口，所述第一输入接口连接所述图像处理单元，所述图像处理单元连接所述第二输出接口。

上述运动轨迹检测单元用于检测所述视频录制界面显示的第一视频片段中运动对象的运动轨迹值；所述第一输出接口用于输出所述第一视频片段，所述第一输入接口用于接收所述第一视频片段，其中，所述第一视频片段包括所述第一视频图像；所述第一视频片段为录制的视频中的任一个视频片段；所述图像处理单元用于在所述运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频片段中的至少一帧视频图像进行插帧处理，并通过所述第二输出接口，将插帧处理后的至少一帧视频图像传输至所述显示单元进行图像显示；所述图像处理单元还用于在所述运动轨迹检测单元检测到运动对象的运动轨迹值小于或等于所述预设阈值的情况下，通过所述第二输出接口，将所述第一视频片段中的至少一帧视频图像传输至所述显示单元进行图像显示；其中，所述至少一帧视频图像包括所述第一视频图像。

在本申请实施例中，由于可以根据运动轨迹值区分高运动轨迹频次视频片段和低运动轨迹频次视频片段，并对高运动轨迹频次视频片段进行插帧处理后发送至显示单元进行显示，以及直接将低运动轨迹频次视频片段发送至显示单元进行显示，因此既可以提高高运动轨迹频次的视频片段的视频显示效果，又可以通过直接将低运动轨迹频次的视频片段发送至显示单元来降低功耗。

可选地，主控芯片还包括图像分离单元，运动轨迹检测单元连接图像分离单元，图像分离单元连接所述第一输出接口。

上述图像分离单元用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频帧进行图像分割处理，得到所述第一视频图像和背景图像，所述第一视频图像包括所述运动对象，所述背景图像包括静止的对象；所述图像分离单元还用于通过所述第一输出接口，将所述第一视频图像和所述背景图像分别传输至所述图像处理芯片的第一输入接口；所述图像处理单元还用于将接收到的所述背景图像和插帧处理后的所述第一视频图像合成，得到所述第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

在本申请实施例中，由于可以根据运动轨迹值区分视频片段中高运动轨迹频次的第一视频图像和低运动轨迹频次的背景图像，并将第一视频图像和背景图像进行图像分割处理，在对第一视频图像进行插帧处理后将插帧处理后的第一视频图像与背景图像合成得到第二视频图像，最后将第二视频图像发送至显示单元进行显示，如此，既可以提高高运动轨迹频次的第一视频图像的视频显示效果，又可以通过对背景图像的免处理来降低功耗。

可选地，主控芯片还包括图像分离单元和第三输出接口，所述运动轨迹检测单元连接所述图像分离单元，所述图像分离单元分别连接所述第一输出接口和所述第三输出接口，所述第一输出接口和所述第三输出接口分别连接所述第一输入接口。

上述图像分离单元用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频帧进行图像分割处理，得到所述第一视频图像和背景图像，所述第一视频图像包括所述运动对象，所述背景图像包括静止的对象；所述图像分离单元还用于通过所述第一输出接口，将所述第一视频图像传输至所述图像处理芯片的第一输入接口，通过所述第三输出接口，将所述背景图像传输至所述图像处理芯片的第一输入接口；所述图像处理单元还用于将接收到的所述背景图像和插帧处理后的所述第一视频图像合成，得到所述第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

在本申请实施例中，可以通过第一输出接口，将第一视频图像传输至所述图像处理芯片的第一输入接口，通过第三输出接口，将背景图像传输至所述图像处理芯片的第一输入接口，由于主控芯片可以通过第一输出接口和第三输出接口同时输出第一视频图像和背景图像，因此可以提高数据传输效率。

可选地，显示单元还用于在所述运动轨迹值大于预设阈值的情况下，接收所述图像处理芯片传输的第二视频图像，并以第一屏幕刷新率，显示所述第二视频图像；所述显示单元还用于在所述运动轨迹值小于或等于所述预设阈值的情况下，接收所述图像处理芯片传输的第一视频图像，并以第二屏幕刷新率，显示所述第一视频图像；其中，所述第一屏幕刷新率大于所述第二屏幕刷新率。

在本申请实施例中，显示单元可以以较高的屏幕刷新率显示接收到的第二视频图像，以较低的屏幕刷新率显示接收到的第一视频图像，由于第二视频图像为插帧处理后的第一视频图像，因此，第二视频图像的帧率高于第一视频图像，以不同的屏幕刷新率显示不同帧率的视频图像一方面可以提高高帧率视频图像的视频显示效果，另一方面可以节约显示低帧率视频图像的功耗。

可选地，主控芯片还用于在检测视频录制界面中运动对象的运动轨迹值之后，控制所述图像处理芯片关闭图像处理单元的插帧功能；在检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，控制所述图像处理芯片开启图像处理单元的插帧功能。

在本申请实施例中，由于主控芯片可以根据视频录制界面中运动对象的运动轨迹值控制图像处理芯片开启或者关闭图像处理单元的插帧功能，因此可以在提升视频显示效果的同时降低功耗。

应理解的是，本申请实施例中，输入单元1004可以包括图形处理器(GraphicsProcessing Unit，GPU)10041和麦克风10042，图形处理器10041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1006可包括显示面板10061，可以采用液晶显示器、有机发光二极管等形式来配置显示面板10061。用户输入单元1007包括触控面板10071以及其他输入设备10072。触控面板10071，也称为触摸屏。触控面板10071可包括触摸检测装置和触摸控制器两个部分。其他输入设备10072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆，在此不再赘述。存储器1009可用于存储软件程序以及各种数据，包括但不限于应用程序和操作系统。处理器1010可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器1010中。

本申请实施例还提供一种可读存储介质，所述可读存储介质上存储有程序或指令，该程序或指令被处理器执行时实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

其中，所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质，包括计算机可读存储介质，如计算机只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等。

本申请实施例另提供了一种芯片，所述芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述处理器用于运行程序或指令，实现上述图像处理方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。

需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外，需要指出的是，本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能，还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能，例如，可以按不同于所描述的次序来执行所描述的方法，并且还可以添加、省去、或组合各种步骤。另外，参照某些示例所描述的特征可在其他示例中被组合。

通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本申请的技术方案本质上或者说对相关技术做出贡献的部分可以以计算机软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端(可以是手机，计算机，服务器，或者网络设备等)执行本申请各个实施例所述的方法。

上面结合附图对本申请的实施例进行了描述，但是本申请并不局限于上述的具体实施方式，上述的具体实施方式仅仅是示意性的，而不是限制性的，本领域的普通技术人员在本申请的启示下，在不脱离本申请宗旨和权利要求所保护的范围情况下，还可做出很多形式，均属于本申请的保护之内。

Claims (17)

1.一种图像处理电路，其特征在于，包括主控芯片、图像处理芯片和显示单元，所述主控芯片与所述图像处理芯片连接，所述图像处理芯片与所述显示单元连接；

所述主控芯片用于在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；

所述图像处理芯片用于根据所述运动轨迹值，对第一视频图像执行目标处理；

其中，所述目标处理包括：将所述第一视频图像传输至所述显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

2.根据权利要求1所述的图像处理电路，其特征在于，所述主控芯片包括第一输出接口和运动轨迹检测单元；所述图像处理芯片包括第一输入接口、第二输出接口和图像处理单元；

所述运动轨迹检测单元连接所述第一输出接口，所述第一输出接口连接所述第一输入接口，所述第一输入接口连接所述图像处理单元，所述图像处理单元连接所述第二输出接口；

所述运动轨迹检测单元用于检测所述视频录制界面显示的第一视频片段中运动对象的运动轨迹值；

所述第一输出接口用于输出所述第一视频片段，所述第一输入接口用于接收所述第一视频片段，其中，所述第一视频片段包括所述第一视频图像；所述第一视频片段为录制的视频中的任一个视频片段；

所述图像处理单元用于在所述运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频片段中的至少一帧视频图像进行插帧处理，并通过所述第二输出接口，将插帧处理后的至少一帧视频图像传输至所述显示单元进行图像显示；

所述图像处理单元还用于在所述运动轨迹检测单元检测到运动对象的运动轨迹值小于或等于所述预设阈值的情况下，通过所述第二输出接口，将所述第一视频片段中的至少一帧视频图像传输至所述显示单元进行图像显示；

其中，所述至少一帧视频图像包括所述第一视频图像。

3.根据权利要求2所述的图像处理电路，其特征在于，所述主控芯片还包括图像分离单元，所述运动轨迹检测单元连接所述图像分离单元，所述图像分离单元连接所述第一输出接口；

所述图像分离单元用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频帧进行图像分割处理，得到所述第一视频图像和背景图像，所述第一视频图像包括所述运动对象，所述背景图像包括静止的对象；

所述图像分离单元还用于通过所述第一输出接口，将所述第一视频图像和所述背景图像分别传输至所述图像处理芯片的第一输入接口；

所述图像处理单元还用于将接收到的所述背景图像和插帧处理后的所述第一视频图像合成，得到所述第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

4.根据权利要求2所述的图像处理电路，其特征在于，所述主控芯片还包括图像分离单元和第三输出接口，所述运动轨迹检测单元连接所述图像分离单元，所述图像分离单元分别连接所述第一输出接口和所述第三输出接口，所述第一输出接口和所述第三输出接口分别连接所述第一输入接口；

所述图像分离单元用于在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，对所述第一视频帧进行图像分割处理，得到所述第一视频图像和背景图像，所述第一视频图像包括所述运动对象，所述背景图像包括静止的对象；

所述图像分离单元还用于通过所述第一输出接口，将所述第一视频图像传输至所述图像处理芯片的第一输入接口，通过所述第三输出接口，将所述背景图像传输至所述图像处理芯片的第一输入接口；

所述图像处理单元还用于将接收到的所述背景图像和插帧处理后的所述第一视频图像合成，得到所述第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

5.根据权利要求1所述的图像处理电路，其特征在于，

所述显示单元还用于在所述运动轨迹值大于预设阈值的情况下，接收所述图像处理芯片传输的第二视频图像，并以第一屏幕刷新率，显示所述第二视频图像；

所述显示单元还用于在所述运动轨迹值小于或等于所述预设阈值的情况下，接收所述图像处理芯片传输的第一视频图像，并以第二屏幕刷新率，显示所述第一视频图像；

其中，所述第一屏幕刷新率大于所述第二屏幕刷新率。

6.根据权利要求1所述的图像处理电路，其特征在于，所述主控芯片还用于在检测视频录制界面中运动对象的运动轨迹值之后，控制所述图像处理芯片关闭图像处理单元的插帧功能；

所述主控芯片还用于在检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，控制所述图像处理芯片开启图像处理单元的插帧功能。

7.一种图像处理装置，其特征在于，包括权利要求1-6中任一项所述的图像处理电路。

8.根据权利要求7所述的图像处理装置，其特征在于，所述图像处理装置还包括图像传感器和显示单元，所述主控芯片与所述图像传感器连接；所述显示单元与所述主控芯片连接。

9.一种图像处理方法，应用于如权利要求7或8所述的图像处理装置，其特征在于，所述方法包括：

主控芯片在录制视频过程中，检测视频录制界面中运动对象的运动轨迹值；

图像处理芯片根据所述运动轨迹值，对第一视频图像执行目标处理；

其中，所述目标处理包括：将所述第一视频图像传输至显示单元进行图像显示；或者，对所述第一视频图像进行插帧处理，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

10.根据权利要求9所述的图像处理方法，其特征在于，所述主控芯片检测视频录制界面中运动对象的运动轨迹值，包括：

运动轨迹检测单元检测所述视频录制界面显示的第一视频片段中运动对象的运动轨迹值，其中，所述第一视频片段包括所述第一视频图像；所述第一视频片段为录制的视频中的任一个视频片段；

所述图像处理芯片根据所述运动轨迹值，对所述第一视频图像执行目标处理，包括：

在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，所述图像处理芯片对所述第一视频片段中的至少一帧视频图像进行插帧处理，并将插帧处理后的至少一帧视频图像传输至所述显示单元进行图像显示；

在运动轨迹检测单元检测到运动对象的运动轨迹值小于或等于所述预设阈值的情况下，所述图像处理芯片将所述第一视频片段中的至少一帧视频图像传输至所述显示单元进行图像显示；

其中，所述至少一帧视频图像包括所述第一视频图像。

11.根据权利要求9或10所述的图像处理方法，其特征在于，所述图像处理芯片根据所述运动轨迹值，对所述第一视频图像执行目标处理之前，还包括：

所述图像处理芯片通过第一输入接口，接收所述主控芯片传输的所述第一视频图像；

所述图像处理芯片根据所述运动轨迹值，对所述第一视频图像执行目标处理，包括：

在所述运动轨迹值大于预设阈值的情况下，所述图像处理芯片对所述第一视频图像进行插帧处理得到第二视频图像，并通过第二输出接口，将所述第二视频图像传输至所述显示单元进行图像显示；

在所述运动轨迹值小于或等于所述预设阈值的情况下，所述图像处理芯片通过所述第二输出接口，将所述第一视频图像传输至所述显示单元进行图像显示。

12.根据权利要求9所述的图像处理方法，其特征在于，所述图像处理芯片根据所述运动轨迹值，对所述第一视频图像执行目标处理之后，所述方法还包括：

在所述运动轨迹值大于预设阈值的情况下，所述显示单元接收所述图像处理芯片传输的第二视频图像，并以第一屏幕刷新率，显示所述第二视频图像；

在所述运动轨迹值小于或等于所述预设阈值的情况下，所述显示单元接收所述图像处理芯片传输的第一视频图像，并以第二屏幕刷新率，显示所述第一视频图像；

其中，所述第一屏幕刷新率大于所述第二屏幕刷新率。

13.根据权利要求9所述的图像处理方法，其特征在于，所述主控芯片检测视频录制界面中运动对象的运动轨迹值之后，还包括：

所述主控芯片控制所述图像处理芯片关闭图像处理单元的插帧功能；

在所述主控芯片检测到视频录制界面中运动对象的运动轨迹值大于预设阈值的情况下，所述主控芯片控制所述图像处理芯片开启图像处理单元的插帧功能。

14.根据权利要求10所述的图像处理方法，其特征在于，所述第一视频片段包括至少一个视频帧，所述至少一个视频帧包括第一视频帧；

所述图像处理芯片根据所述运动轨迹值，对第一视频图像执行目标处理之前，所述方法还包括：

在运动轨迹检测单元检测到运动对象的运动轨迹值大于预设阈值的情况下，所述主控芯片中的图像分离单元对所述第一视频帧进行图像分割处理，得到第一视频图像和背景图像，所述第一视频图像包括所述运动对象，所述背景图像包括静止的对象；

所述图像分离单元通过第一输出接口，将所述第一视频图像传输至所述图像处理芯片的第一输入接口，并通过第三输出接口，将所述背景图像传输至图像处理单元；

所述图像处理芯片根据所述运动轨迹值，对第一视频图像执行目标处理，包括：

所述图像处理单元对所述第一视频图像进行插帧处理；

所述图像处理单元将接收到的所述背景图像和插帧处理后的所述第一视频图像合成，得到第二视频图像，并将所述第二视频图像传输至所述显示单元进行图像显示。

15.一种电子设备，其特征在于，包括权利要求1-6所述的图像处理电路，处理器和存储器，所述存储器存储可在所述处理器上运行的程序或指令，所述程序或指令被所述处理器执行时实现如权利要求9-14任一项所述的图像处理方法的步骤。

16.一种处理芯片，其特征在于，所述处理器芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述通信接口用于传输图像数据，所述处理器用于运行程序或指令，实现如权利要求9-14任一项所述的图像处理方法中的图像处理芯片执行的步骤。

17.一种控制芯片，其特征在于，所述处理器芯片包括处理器和通信接口，所述通信接口和所述处理器耦合，所述通信接口用于传输图像数据，所述处理器用于运行程序或指令，实现如权利要求9-14任一项所述的图像处理方法中的主控芯片执行的步骤。

Images