CN115514860A - 动态帧率补偿方法、图像处理电路和电子设备 - Google Patents
动态帧率补偿方法、图像处理电路和电子设备 Download PDFInfo
- Publication number
- CN115514860A CN115514860A CN202211108711.1A CN202211108711A CN115514860A CN 115514860 A CN115514860 A CN 115514860A CN 202211108711 A CN202211108711 A CN 202211108711A CN 115514860 A CN115514860 A CN 115514860A
- Authority
- CN
- China
- Prior art keywords
- frame rate
- camera sensor
- preset
- output
- sensitivity
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本申请公开了一种动态帧率补偿方法、图像处理电路和电子设备,属于图像数据处理技术领域。该方法包括:根据第一预设条件设置相机传感器的输出帧率;获取所述输出帧率所对应的相机传感器的输出视频帧;在所述相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率;根据所述第一预设帧率,输出补偿后的视频帧。
Description
技术领域
本申请属于图像数据处理技术领域,具体涉及一种动态帧率补偿方法、图像处理电路和电子设备。
背景技术
随着科技的迅速发展,电子设备已从传统的通讯工具演变为可以承载移动应用、移动内容、增值服务、拍照等众多功能的平台,而其中拍照功能成了现如今电子设备不可或缺的功能。相比传统的数码相机来说,电子设备具有更加可取的便携性、移动性和市场性等特点。
在使用电子设备的摄像头拍照预览或录像时,由于拍摄环境或电子设备的运行状态等的影响,相机传感器的输出帧率可能会相对较低,而较低的输出帧率会严重影响视频帧的流畅度。
因此,有必要提供一种提升相机传感器输出视频帧流畅度的技术方案。
发明内容
本申请实施例的目的是提供一种动态帧率补偿方法、图像处理电路和电子设备,能够在使用电子设备的摄像头拍照预览或录像时,避免拍摄环境或电子设备的运行状态等对视频帧流畅度的影响。
第一方面,本申请实施例提供了一种动态帧率补偿方法,该方法包括:
根据第一预设条件设置相机传感器的输出帧率;
获取所述输出帧率所对应的相机传感器的输出视频帧;
在所述相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率;
根据所述第一预设帧率,输出补偿后的视频帧。
第二方面,本申请实施例提供了一种图像处理电路,所述电路包括电连接的主控芯片和独立显示芯片;
所述主控芯片用于根据第一预设条件设置相机传感器的输出帧率,并获取所述输出帧率所对应的相机传感器的输出视频帧;
所述主控芯片还用于将所述输出视频帧发送至所述独立显示芯片;
所述独立显示芯片用于在所述相机传感器的输出帧率小于第一预设帧率的情况下,对接收到的所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率,并根据所述第一预设帧率,输出补偿后的视频帧。
第三方面,本申请实施例提供了一种电子设备,该电子设备包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如第一方面所述的方法的步骤。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
在本申请实施例中,电子设备可以根据相机传感器的输出帧率获取该输出帧率对应的输出视频帧。在相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。从而在相机传感器的输出帧率较小的情况下,保证电子设备显示视频帧的流畅性。
附图说明
图1是本申请实施例的一种动态帧率补偿方法的流程图;
图2是本申请实施例的另一种动态帧率补偿方法的流程图;
图3是本申请实施例的图像处理电路的原理框图;
图4是本申请实施例提供的电子设备的结构示意图;
图5为实现本申请实施例的一种电子设备的硬件结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
需要说明的是,本申请中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下,并获得由相应装置/账户所有者给予授权的情况下进行的。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的动态帧率补偿方法进行详细地说明。
如图1所示,本申请实施例提供了一种动态帧率补偿方法,该方法包括:
步骤101、根据第一预设条件设置相机传感器的输出帧率。
在本实施例中,相机传感器可以在电子设备处于拍照或者录像模式下,获取并保存当前拍照或者当前录像场景下的图像数据,并可以将获取的图像数据输出。在电子设备处于拍摄状态时,相机传感器可以按照曝光时间连续获取当前拍摄场景下的图像数据。与此同时,相机传感器还可以将获取的图像数据以输出帧率输出至显示装置,以供用户实时观看相机传感器获取的图像数据。
在本申请的一个实施例中,第一预设条件可以是相机传感器的感光度。
相机传感器的感光度影响曝光量,曝光量与感光度的计算公式如下:
在该式子中,Exp为曝光量,ISO为相机传感器的感光度,ExpTime为曝光时间,C1和C2为常数。从该公式可以看出,感光度越大、曝光时间越长,则曝光量越大。也就是说,可以通过增大感光度、延长曝光时间的方式来增加曝光量。在感光度一定的情况下,可以延长曝光时间来增加曝光量;在曝光时间一定的情况下,可以增大感光度来增加曝光量。在实际拍摄过程中,电子设备可以设置曝光量,例如根据环境亮度等因素设置曝光量或者由用户设置曝光量,然后调节相机传感器的感光度和曝光时间来实现该曝光量。
在本公开实施例中,第一预设条件为相机传感器的感光度,步骤101可以包括步骤201-202。
步骤201、在所述相机传感器的感光度为第一感光度的情况下,根据所述第一感光度确定所述相机传感器的曝光时间,其中,所述第一感光度为当前拍摄场景预设的感光度的最大值。
在本实施例中,电子设备在进入拍摄状态时,会根据拍摄环境或者在用户控制下进入某种拍摄场景。对于该拍摄场景,预设有感光度最大值,也就是该拍摄场景的第一感光度。另外,不同拍摄场景对应的第一感光度可能不同。例如,拍摄场景为“普通夜景”,“普通夜景”所对应的第一感光度为2000,则在“普通夜景”状态下,相机传感器的感光度会被限制在2000以内,而不会超过2000。还例如,拍摄场景为“极夜”,“极夜”所对应的第一感光度为3000,则在“极夜”状态下,相机传感器的感光度会被限制在3000以内,而不会超过3000。本公开实施例通过这种方式,对相机传感器的感光度进行限制,从而避免因为相机传感器的感光度过高导致的噪声过大问题。
本公开实施例中,为了避免因为相机传感器的感光度过高导致的噪声过大问题,对相机传感器的感光度进行限制,相机传感器的感光度不会超过当前拍摄场景的预设的感光度最大值。在这种方式下,如果相机传感器的感光度为第一感光度,也就是如果相机传感器的感光度达到当前拍摄场景的预设的感光度最大值,说明曝光量较大,可能需要调整增加曝光时间来实现曝光量。具体地,可以通过如下公式确定实际需要的曝光时间:
在该式子中,ISOmax为第一感光度,即在当前拍摄场景下预设的感光度的最大值,Exp为曝光量,ExpTime为曝光时间。
步骤202、根据所述曝光时间确定所述相机传感器的输出帧率。
其中,相机传感器的曝光时间影响相机传感器的最大输出帧率。具体地,曝光时间与相机传感器的最大输出帧率的关系可以通过如下公式表示:
最大输出帧率=1000/曝光时间,其中,曝光时间以ms为单位。
也就是说,相机传感器的曝光时间越长,其最大输出帧率越低,在步骤202中设置的相机传感器的输出帧率必须小于或等于其最大输出帧率。
在本申请的一个实施例中,第一预设条件可以是当前系统负载。
在系统负载过大时,电子设备的性能就会受到影响。在第一预设条件是当前系统负载的情况下,根据第一预设条件设置相机传感器的输出帧率包括:在所述当前系统负载大于预设系统负载的情况下,降低所述相机传感器的输出帧率。通过降低相机传感器的帧率,可以使得单位时间内输出的图像帧数据减少,从而减少单位时间内需要处理的帧数,降低电子设备的系统功耗。
本公开实施例中,可以降低相机传感器的输出帧率至目标帧率。目标帧率可以是一个较小的固定值,例如,相机传感器按照该目标帧率输出图像时,相机传感器对电子设备施加的负载压力较小。目标帧率可以是相机传感器原输出帧率的预设比例,例如,目标帧率是相机传感器原输出帧率的一半。
在本申请的另一实施例中,第一预设条件还可以是相机传感器的感光度和当前系统负载。在这种情况下,根据第一预设条件,确定相机传感器的输出帧率可以是:先根据相机传感器的感光度初步确定相机传感器的输出帧率,若当前系统负载低于预设系统负载,则初步确定的相机传感器的输出帧率可以作为相机传感器的输出帧率。若当前系统负载大于预设系统负载,则可能需要将初步确定的相机传感器的输出帧率降低至目标帧率。并且,目标帧率可以作为相机传感器的输出帧率。
在根据第一预设条件,确定相机传感器的输出帧率之后,还包括步骤102。
步骤102、获取所述输出帧率所对应的相机传感器的输出视频帧。
在本实施例中,根据第一预设条件确定相机传感器的输出帧率,根据输出帧率获取与输出帧率对应的相机传感器的输出视频帧。
根据第一预设条件确定的相机传感器的输出帧率,可能存在曝光时间被拉长,相机传感器的输出帧率较低,从而影响视频帧流畅度的情况。因此,在获取到与输出帧率对应的相机传感器的输出视频帧之后,还包括对所述输出视频帧进行插帧处理的步骤103:
步骤103、在所述相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。
在本实施例中,其中,第一预设帧率具体值由用户根据需求设置。比如30fps或者60fps。在相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。
例如,在用户选择第一预设帧率为30fps时,若相机传感器的的输出帧率为20fps,则对该视频帧进行插帧处理,以使相机传感器的输出帧率补偿至30fps。在用户选择第一预设帧率为60fps的情况下,若相机传感器的的输出帧率为45fps,则对该视频帧进行插帧处理,以使其输出帧率补偿至60fps。
根据本申请实施例,通过在所述相机传感器的输出帧率小于第一预设帧率的情况下,对视频帧进行插帧处理,使输出帧率被补偿至第一预设帧率,可以提高电子设备显示视频帧的流畅度。通过用户灵活选择第一预设帧率的数值,可以灵活控制视频帧的输出帧率,可以满足用户对于视频观看的不同需求,以提升用户体验。
步骤104、根据所述第一预设帧率,输出补偿后的视频帧。
根据本申请实施例,电子设备可以根据相机传感器的输出帧率获取该输出帧率对应的输出视频帧,并在相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。从而在相机传感器的输出帧率较小的情况下,保证电子设备显示视频帧的流畅性。
根据本申请实施例,预设与拍摄场景对应的第一感光度,在相机传感器的感光度为第一感光度的情况下,通过设置曝光时间来满足拍摄所需的曝光量,以避免因感光度过高而导致图像噪声过大的问题,从而避免采用复杂的降噪算法对录像视频进行处理,有效降低电子设备的能耗。同时,还不影响电子设备显示视频帧的流畅性。
根据本申请实施例,在当前系统负载过大的情况下,可以降低相机传感器的帧率,以降低系统负载。同时,还不影响电子设备显示视频帧的流畅性。
由于第一预设条件可以是相机传感器的感光度或者当前系统的负载,第一预设条件也可以是相机传感器的感光度和当前系统的负载,第一预设条件会随着当前场景的改变或者系统负载的改变而变化。为了实时调整相机传感器的输出帧率,获得流畅的视频帧。如图2所示,本申请实施例的动态帧率补偿方法还包括如下步骤301至步骤305。
步骤301、检测所述第一预设条件的变化。
步骤302、在所述第一预设条件变化的情况下,重新设置所述相机传感器的输出帧率。
在一个例子中,第一预设条件是相机传感器的感光度。若检测到相机传感器的感光度由小于第一感光度变为第一感光度,说明拍摄当前场景所需的曝光量较大,可能需要延长曝光时间来满足所需的曝光量,导致相机传感器的最大输出帧率降低,需要重新设置相机传感器的输出帧率,重新设置后的相机传感器的输出帧率可能比重新设置前的相机传感器的输出帧率低。若检测到相机传感器的感光度由第一感光度变为小于第一感光度,说明拍摄当前场景所需的曝光量较小,可能需要的曝光时间较之前有所降低,相机传感器的最大输出帧率可能增大,可以对相机传感器的输出帧率进行重新设置,重新设置后的相机传感器的输出帧率可能比重新设置前的相机传感器的输出帧率高。
在另一个例子中,第一预设条件是当前系统负载。若当前系统负载由大于等于预设系统负载变为小于预设系统负载的情况下,说明当前系统负载相对之前有所减小,且当前系统负载功耗较小,无需降低相机传感器的输出帧率,需要重新设置相机传感器的输出帧率。并且,重新设置后的相机传感器的输出帧率比重新设置前的相机传感器的输出帧率高。若当前系统负载由小于预设系统负载变为大于等于预设系统负载的情况下,说明当前系统负载相对之前有所增大,且当前系统负载功耗较大,需要降低相机传感器的输出帧率至目标帧率,以减少单位时间内处理的图像帧数,降低当前系统功耗。并且,重新设置后的输出帧率比重新设置前的输出帧率低。
在又一个例子中,第一预设条件是相机传感器的感光度和当前系统负载。若相机传感器的感光度由小于第一感光度变为第一感光度,或者相机传感器的感光度由第一感光度变为小于第一感光度,可以按照前述方法初步确定相机传感器的输出帧率。在初步确定相机传感器的输出帧率之后,若当前系统负载由大于等于预设系统负载变为小于预设系统负载,则初步确定的相机传感器的输出帧率可以作为重新设置后的输出帧率。若当前系统负载由小于预设系统负载变为大于预设系统负载,则需要降低初步确定的相机传感器的输出帧率至目标帧率。并且,目标帧率可以作为重新设置后的输出帧率。
步骤303、获取所述重新设置的输出帧率所对应的相机传感器的输出视频帧。
在一个实施例中,所述重新设置的输出帧率所对应的相机传感器的输出视频帧小于第一预设帧率,因此,在步骤303之后还包括:
步骤304、在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述重新设置的输出帧率仍被补偿至所述第一预设帧率。
本实施例中,在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使得所述重新设置的输出帧率仍然补偿至第一预设帧率。例如,在用户选择第一预设帧率为30fps时,若重新设置的输出帧率小于30fps,例如29fps,则对该视频帧进行插帧,以使输出帧率被补偿至30fps。也可以是例如,在用户选择第一预设帧率为60fps时,若重新设置的输出帧率小于60fps,例如20fps,则对该视频帧进行插帧,以使输出帧率被补偿至60fps。
步骤305、根据所述第一预设帧率,输出补偿后的视频帧。
根据本申请实施例,通过检测第一预设条件的变化,在第一预设条件发生变化的情况下,重新设置相机传感器的输出帧率,并在所述重新设置的输出帧率小于第一预设帧率的情况下,对视频帧进行插帧处理,可以将视频帧动态补偿至第一预设帧率,可以满足用户的不同观看需求,提升用户体验。
在一个实施例中,所述重新设置的输出帧率所对应的相机传感器的输出视频帧大于或者等于第一预设帧率,此种情况下,停止对所述视频帧进行插帧处理,并按照重新设置的输出帧率输出视频帧。
如图3所示,其为本公开实施例提供的一种图像处理电路,该图像处理电路包括主控芯片410和独立显示芯片420,主控芯片410和独立显示芯片420电连接。
其中,主控芯片410即为系统级芯片(System on Chip,SoC),也称之为片上系统。该主控芯片410包含完整系统并有嵌入软件的全部内容。主控芯片410设有与相机传感器连接的接口,主控芯片410通过该接口与相机传感器进行通信。主控芯片410用于根据第一预设条件设置相机传感器的输出帧率,并获取所述输出帧率所对应的相机传感器的输出视频帧。该主控芯片410还用于将所述输出视频帧发送至所述独立显示芯片;
独立显示芯片420是独立于主控芯片410的芯片。独立显示芯片420与主控芯片410之间有可以实现信息交互的接口。独立显示芯片420用于在所述相机传感器的输出帧率小于第一预设帧率的情况下,对接收到的所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率,并根据所述第一预设帧率,输出补偿后的视频帧。
根据本申请实施例,通过在主控芯片与相机传感器之间设置通信接口,可以实现主控芯片与相机传感器之间的信息交互,还可便于控制相机传感器。在所述相机传感器的输出帧率小于第一预设帧率的情况下,通过在独立显示芯片上对视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。从而在相机传感器的输出帧率较小的情况下,保证电子设备显示视频帧的流畅性。另外,相对在主控芯片上进行插帧处理,还可以提升插帧处理的速度,降低主控芯片的功耗。
在一个实施例中,所述第一预设条件包括以下至少一项:
相机传感器的感光度;
当前系统负载。
在一个实施例中,所述主控芯片410包括相机控制模块411和图像处理模块412。所述相机控制模块411用于根据第一预设条件设置相机传感器的输出帧率;所述图像处理模块412用于获取所述输出帧率所对应的相机传感器的输出视频帧,并将所述输出视频帧发送至所述独立显示芯片。
可选地,相机控制模块411可以是主控芯片410上运行的应用程序。图像处理模块412可以对获取的视频帧进行图像信号处理,例如可以对图像信号进行降噪处理、曲线控制处理等,以提升图像信号的质量。
根据本申请实施例,通过图像处理模块对获取的视频帧进行图像信号处理,可以提升输出视频帧的图像质量。通过相机控制模块设置相机传感器的输出帧率,可以实现对相机传感器的控制。
在一个实施例中,在所述第一预设条件为相机传感器的感光度的情况下,所述相机控制模块具体用于:在所述相机传感器的感光度为第一感光度的情况下,根据所述第一感光度确定所述相机传感器的曝光时间,其中,所述第一感光度为当前拍摄场景预设的感光度的最大值;根据所述曝光时间确定所述相机传感器的输出帧率。
根据本申请实施例,预设第一感光度,在相机传感器的感光度为第一感光度的情况下,根据第一感光度确定相机传感器的曝光时间,可以避免因感光度过高而导致图像噪声过大的问题,从而避免采用复杂的降噪算法对录像视频进行处理,有效降低电子设备的能耗。同时,还不影响电子设备显示视频帧的流畅性。
在一个实施例中,在所述第一预设条件为当前系统负载的情况下,所述相机控制模块具体用于:在所述当前系统负载大于预设系统负载的情况下,降低所述相机传感器的输出帧率。
根据本申请实施例,通过预设系统负载,在当前系统负载大于预设系统负载的情况下,降低相机传感器的输出帧率,可以降低运行相机传感器带来的消耗,从而降低系统的负载。同时,还不影响电子设备显示视频帧的流畅性。
在一个实施例中,所述相机控制模块还用于检测所述第一预设条件的变化,并在所述第一预设条件变化的情况下,重新设置所述相机传感器的输出帧率;所述图像处理模块还用于获取所述重新设置的输出帧率所对应的相机传感器的输出视频帧;所述独立显示芯片还用于在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述重新设置的输出帧率仍被补偿至所述第一预设帧率,并根据所述第一预设帧率,输出补偿后的视频帧。
根据本申请实施例,通过检测第一预设条件的变化,在第一预设条件发生变化的情况下,重新设置相机传感器的输出帧率,并在所述重新设置的输出帧率小于第一预设帧率的情况下,对视频帧进行插帧处理,可以将视频帧动态补偿至第一预设帧率,可以满足用户的不同观看需求,提升用户体验。
本申请实施例中的图像处理电路可以是电子设备中的部件,例如集成电路。该电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(Augmented Reality,AR)/虚拟现实(Virtual Reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(Ultra-mobile Personal Computer,UMPC)、上网本或者个人数字助理(Personal Digital Assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(Personal Computer,PC)、电视机(Television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。本申请实施例中的图像处理电路可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为iOS操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的图像处理电路能够实现上述动态帧率补偿方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图4所示,本申请实施例还提供一种电子设备500,包括处理器501和存储器502,存储器502上存储有可在所述处理器501上运行的程序或指令,该程序或指令被处理器501执行时实现上述动态帧率补偿方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图5为实现本申请实施例的一种电子设备的硬件结构示意图。
该电子设备600包括但不限于:射频单元601、网络模块602、音频输出单元603、输入单元604、传感器605、显示单元606、用户输入单元607、接口单元608、存储器609、以及处理器610等部件。
本领域技术人员可以理解,电子设备600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图5中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
处理器610,用于根据第一预设条件设置相机传感器的输出帧率;获取所述输出帧率所对应的相机传感器的输出视频帧;在所述相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率;根据所述第一预设帧率,输出补偿后的视频帧。
其中,相机传感器是传感器605的一种。
在本申请实施例中,电子设备可以根据相机传感器的输出帧率获取该输出帧率对应的输出视频帧,并在所述相机传感器的输出帧率小于第一预设帧率的情况下,对输出视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率。从而在相机传感器的输出帧率较小的情况下,保证电子设备显示视频帧的流畅性。
处理器610,还用于根据第一预设条件设置相机传感器的输出帧率。其中,第一预设条件包括:相机传感器的感光度;当前系统负载中至少一项。
处理器610,还用于在所述第一预设条件为相机传感器的感光度的情况下,所述根据第一预设条件设置相机传感器的输出帧率,包括:在所述相机传感器的感光度为第一感光度的情况下,根据所述第一感光度确定所述相机传感器的曝光时间,其中,所述第一感光度为当前拍摄场景预设的感光度的最大值;根据所述曝光时间确定所述相机传感器的输出帧率。
根据本申请实施例,预设第一感光度,在相机传感器的感光度为第一感光度的情况下,通过设置曝光时间来满足拍摄所需的曝光量,以避免因感光度过高而导致图像噪声过大的问题,从而避免采用复杂的降噪算法对录像视频进行处理,有效降低电子设备的能耗。同时,还不影响电子设备显示视频帧的流畅性。
处理器610,还用于在所述第一预设条件为当前系统负载的情况下,所述根据第一预设条件设置相机传感器的输出帧率,包括:在所述当前系统负载大于预设系统负载的情况下,降低所述相机传感器的输出帧率。
根据本申请实施例,在当前系统负载大于预设系统负载的情况下,降低相机传感器的输出帧率,可以使得单位时间内输出的图像帧数据减少,从而减少单位时间内需要处理的帧数,降低系统的负载。同时,还不影响电子设备显示视频帧的流畅性。
处理器610,还用于检测所述第一预设条件的变化;在所述第一预设条件变化的情况下,重新设置所述相机传感器的输出帧率;获取所述重新设置的输出帧率所对应的相机传感器的输出视频帧;在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述重新设置的输出帧率仍被补偿至所述第一预设帧率;根据所述第一预设帧率,输出补偿后的视频帧。
根据本申请实施例,通过检测第一预设条件的变化,在第一预设条件发生变化的情况下,重新设置相机传感器的输出帧率,并在所述重新设置的输出帧率小于第一预设帧率的情况下,对视频帧进行插帧处理,可以将视频帧动态补偿至第一预设帧率,可以满足用户的不同观看需求,提升用户体验。
应理解的是,本申请实施例中,输入单元604可以包括图形处理器(GraphicsProcessing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板6061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板6061。用户输入单元607包括触控面板6071以及其他输入设备6072中的至少一种。触控面板6071,也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器609可用于存储软件程序以及各种数据。存储器609可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器609可以包括易失性存储器或非易失性存储器,或者,存储器609可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器609包括但不限于这些和任意其它适合类型的存储器。
处理器610可包括一个或多个处理单元;可选的,处理器610集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。
输入单元604可以包括图形处理器(Graphics Processing Unit,GPU)6041和麦克风6042,图形处理器6041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元606可包括显示面板6061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板6061。用户输入单元607包括触控面板6071以及其他输入设备6072中的至少一种。触控面板6071,也称为触摸屏。触控面板6071可包括触摸检测装置和触摸控制器两个部分。其他输入设备6072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器609可用于存储软件程序以及各种数据。存储器609可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器609可以包括易失性存储器或非易失性存储器,或者,存储器609可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器609包括但不限于这些和任意其它适合类型的存储器。
处理器610可包括一个或多个处理单元;可选的,处理器610集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器610中。处理器610,用于执行本发明实施例所述的方法。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述动态帧率补偿方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述动态帧率补偿方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述动态帧率补偿方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。
Claims (13)
1.一种动态帧率补偿方法,其特征在于,包括:
根据第一预设条件设置相机传感器的输出帧率;
获取所述输出帧率所对应的相机传感器的输出视频帧;
在所述相机传感器的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率;
根据所述第一预设帧率,输出补偿后的视频帧。
2.根据权利要求1所述的动态帧率补偿方法,其特征在于,所述第一预设条件包括以下至少一项:
相机传感器的感光度;
当前系统负载。
3.根据权利要求1所述的动态帧率补偿方法,其特征在于,在所述第一预设条件为相机传感器的感光度的情况下,所述根据第一预设条件设置相机传感器的输出帧率,包括:
在所述相机传感器的感光度为第一感光度的情况下,根据所述第一感光度确定所述相机传感器的曝光时间,其中,所述第一感光度为当前拍摄场景预设的感光度的最大值;
根据所述曝光时间确定所述相机传感器的输出帧率。
4.根据权利要求1所述的动态帧率补偿方法,其特征在于,在所述第一预设条件为当前系统负载的情况下,所述根据第一预设条件设置相机传感器的输出帧率,包括:
在所述当前系统负载大于预设系统负载的情况下,降低所述相机传感器的输出帧率。
5.根据权利要求1-4任一项所述的动态帧率补偿方法,其特征在于,还包括:
检测所述第一预设条件的变化;
在所述第一预设条件变化的情况下,重新设置所述相机传感器的输出帧率;
获取所述重新设置的输出帧率所对应的相机传感器的输出视频帧;
在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述重新设置的输出帧率仍被补偿至所述第一预设帧率;
根据所述第一预设帧率,输出补偿后的视频帧。
6.一种图像处理电路,其特征在于,所述电路包括电连接的主控芯片和独立显示芯片;
所述主控芯片用于根据第一预设条件设置相机传感器的输出帧率,并获取所述输出帧率所对应的相机传感器的输出视频帧;
所述主控芯片还用于将所述输出视频帧发送至所述独立显示芯片;
所述独立显示芯片用于在所述相机传感器的输出帧率小于第一预设帧率的情况下,对接收到的所述视频帧进行插帧处理,使所述输出帧率被补偿至第一预设帧率,并根据所述第一预设帧率,输出补偿后的视频帧。
7.根据权利要求6所述的图像处理电路,其特征在于,所述第一预设条件包括以下至少一项:
相机传感器的感光度;
当前系统负载。
8.根据权利要求6所述的图像处理电路,其特征在于,所述主控芯片包括相机控制模块和图像处理模块;
所述相机控制模块用于根据第一预设条件设置相机传感器的输出帧率;
所述图像处理模块用于获取所述输出帧率所对应的相机传感器的输出视频帧,并将所述输出视频帧发送至所述独立显示芯片。
9.根据权利要求8所述的图像处理电路,其特征在于,在所述第一预设条件为相机传感器的感光度的情况下,所述相机控制模块具体用于:
在所述相机传感器的感光度为第一感光度的情况下,根据所述第一感光度确定所述相机传感器的曝光时间,其中,所述第一感光度为当前拍摄场景预设的感光度的最大值;
根据所述曝光时间确定所述相机传感器的输出帧率。
10.根据权利要求8所述的图像处理电路,其特征在于,在所述第一预设条件为当前系统负载的情况下,所述相机控制模块具体用于:
在所述当前系统负载大于预设系统负载的情况下,降低所述相机传感器的输出帧率。
11.根据权利要求8所述的图像处理电路,其特征在于,
所述相机控制模块还用于检测所述第一预设条件的变化,并在所述第一预设条件变化的情况下,重新设置所述相机传感器的输出帧率;
所述图像处理模块还用于获取所述重新设置的输出帧率所对应的相机传感器的输出视频帧;
所述独立显示芯片还用于在所述重新设置的输出帧率小于第一预设帧率的情况下,对所述视频帧进行插帧处理,使所述重新设置的输出帧率仍被补偿至所述第一预设帧率,并根据所述第一预设帧率,输出补偿后的视频帧。
12.一种电子设备,其特征在于,包括处理器和存储器,所述存储器存储可在所述处理器上运行的程序或指令,所述程序或指令被所述处理器执行时实现如权利要求1-5任一项所述的动态帧率补偿方法的步骤。
13.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1-5任一项所述的动态帧率补偿方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211108711.1A CN115514860A (zh) | 2022-09-09 | 2022-09-09 | 动态帧率补偿方法、图像处理电路和电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211108711.1A CN115514860A (zh) | 2022-09-09 | 2022-09-09 | 动态帧率补偿方法、图像处理电路和电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115514860A true CN115514860A (zh) | 2022-12-23 |
Family
ID=84503186
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211108711.1A Pending CN115514860A (zh) | 2022-09-09 | 2022-09-09 | 动态帧率补偿方法、图像处理电路和电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115514860A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117707470A (zh) * | 2023-06-01 | 2024-03-15 | 荣耀终端有限公司 | 数据处理方法、可读存储介质、电子设备 |
-
2022
- 2022-09-09 CN CN202211108711.1A patent/CN115514860A/zh active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117707470A (zh) * | 2023-06-01 | 2024-03-15 | 荣耀终端有限公司 | 数据处理方法、可读存储介质、电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114285958B (zh) | 图像处理电路、图像处理方法和电子设备 | |
CN114286007A (zh) | 图像处理电路、图像处理方法、电子设备和可读存储介质 | |
CN114339072A (zh) | 图像处理电路、方法和电子设备 | |
CN115278047A (zh) | 拍摄方法、装置、电子设备和存储介质 | |
CN114390209A (zh) | 拍摄方法、拍摄装置、电子设备和可读存储介质 | |
CN115514860A (zh) | 动态帧率补偿方法、图像处理电路和电子设备 | |
CN113014817B (zh) | 高清高帧视频的获取方法、装置及电子设备 | |
CN113891018A (zh) | 拍摄方法、装置及电子设备 | |
CN114338874A (zh) | 电子设备的图像显示方法、图像处理电路和电子设备 | |
CN114286003A (zh) | 拍摄方法、拍摄装置和电子设备 | |
CN112199149A (zh) | 界面渲染方法、装置及电子设备 | |
CN114390205B (zh) | 拍摄方法、装置和电子设备 | |
CN115631109A (zh) | 图像处理方法、图像处理装置和电子设备 | |
CN115866314A (zh) | 视频播放方法及其装置 | |
CN115439386A (zh) | 图像融合方法、装置、电子设备和存储介质 | |
CN115242981A (zh) | 视频播放方法、视频播放装置和电子设备 | |
CN114302209A (zh) | 视频处理方法、装置、电子设备及介质 | |
CN114245017A (zh) | 一种拍摄方法、装置及电子设备 | |
CN114302026B (zh) | 降噪方法、装置、电子设备和可读存储介质 | |
CN112367470B (zh) | 图像处理方法、装置及电子设备 | |
CN117714844A (zh) | 视频处理方法、装置 | |
CN115514859A (zh) | 图像处理电路、图像处理方法及电子设备 | |
CN117278687A (zh) | 图像处理方法及其装置 | |
CN114745504A (zh) | 拍摄方法和电子设备 | |
CN118193108A (zh) | 界面显示方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |