CN115883750A - 一种图像处理方法、图像处理芯片及电子设备 - Google Patents

Abstract

本申请实施例公开了一种图像处理方法、图像处理芯片及电子设备，该方法应用于图像处理芯片，该方法包括：第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；将处理后的图像数据发送给主芯片。如此，前端图像处理芯片对原始图像数据进行前端处理时，对于摄像头固定或拍摄场景固定使得拍摄图像不变的场景，对原始图像数据进行丢帧处理，以减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

Description

一种图像处理方法、图像处理芯片及电子设备

技术领域

本申请涉及图像处理技术，尤其涉及一种图像处理方法、图像处理芯片及电子设备。

背景技术

移动终端的图像数据处理功能目前很多方案都是通过主芯片实现，主芯片可以通过图像算法进行场景配置，为不同场景配置不同的拍摄模式，在某些场景下会处理大量的图像数据，占用主芯片较多处理资源。目前图像数据量在不断增大，图像处理复杂度也同样增大，在保证图像处理性能的前提下如何控制功耗增长成为图像处理领域的重要研究方向。

发明内容

为解决上述技术问题，本申请实施例期望提供一种图像处理方法、图像处理芯片及电子设备。

本申请的技术方案是这样实现的：

第一方面，提供了一种图像处理方法，应用于图像处理芯片，包括：

第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

将处理后的图像数据发送给主芯片。

第二方面，提供了一种图像处理芯片，所述图像处理芯片包括：第一处理单元和通信单元；

所述第一处理单元，用于在第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

所述通信单元，用于将丢帧处理后的图像数据发送给主芯片。

第三方面，提供了一种电子设备，所述电子设备包括：图像处理芯片和主芯片；

所述图像处理芯片用于执行前述第一方面所述方法的步骤；

所述主芯片用于接收所述图像处理芯片发送的图像数据并处理。

本申请实施例中提供了一种图像处理方法、图像处理芯片及电子设备，该方法应用于图像处理芯片，该方法包括：第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；将处理后的图像数据发送给主芯片。如此，前端图像处理芯片对原始图像数据进行前端处理时，对于摄像头固定或拍摄场景固定使得拍摄图像不变的场景，对原始图像数据进行丢帧处理，以减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

附图说明

图1为本申请实施例中图像处理方法的第一流程示意图；

图2为本申请实施例中图像处理方法的第二流程示意图；

图3为本申请实施例中图像处理方法的第三流程示意图；

图4为本申请实施例中图像处理芯片的组成结构示意图；

图5为本申请实施例中电子设备的组成结构示意图。

具体实施方式

为了能够更加详尽地了解本申请实施例的特点与技术内容，下面结合附图对本申请实施例的实现进行详细阐述，所附附图仅供参考说明之用，并非用来限定本申请实施例。

本申请实施例提供了一种图像处理方法，应用于图像处理芯片，电子设备包括图像处理芯片和主芯片。图像处理芯片对图像传感器采集到的原始图像数据执行图像处理芯片操作，将处理后的图像数据发送给主芯片，主芯片用于执行后端图像处理操作，图像处理芯片也可以称为前端图像处理芯片(Previous Image Signal Processor，Pre-ISP)。图像处理芯片的引入降低的主芯片的处理负载。

采用图像处理芯片和主芯片这种图像处理结构，仍存在图像处理芯片将大量图像数据传给主芯片。鉴于此，本申请实施例提供了一种图像处理方法来优化图像处理芯片的图像处理过程，以减少图像处理芯片传给主芯片的数据量，下面结合附图对本申请实施例的实现进行详细阐述。

图1为本申请实施例中图像处理方法的第一流程示意图，如图1所示，该方法具体可以包括：

步骤101：第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

第一丢帧条件作为执行第一丢帧处理的触发条件，确定第一丢帧条件满足时对原始图像数据进行丢帧处理，确定第一丢帧条件不满足时对原始图像数据进行正常处理。

在一些可选的实施例中，所述第一丢帧条件包括当前拍摄图像无变化。示例性的，当连续多帧拍摄图像均相同，确定拍摄图像无变化，否则确定拍摄图像变化。示例性的，拍摄图像无变化至少包括以下场景：场景1摄像头固定拍摄场景无变化，场景2摄像头移动但拍摄场景无变化。

示例性的，主芯片根据图像处理芯片发送的图像数据，判断连续多帧拍摄图像相同，生成第一控制指令，发送给图像处理芯片，图像处理芯片接收到第一控制指令，确定第一丢帧条件满足对原始图像数据进行丢帧处理；主芯片判断连续两帧或多帧拍摄图像不相同，生成第二控制指令，发送给图像处理芯片，图像处理芯片接收到第二控制指令，确定第一丢帧条件不满足对原始图像数据进行正常处理。

可选的，图像处理芯片根据图像传感器输出的原始图像数据判断当前拍摄图像是否变化，即判断第一丢弃条件是否满足，根据判断结果确定对原始图像数据进行丢帧处理还是正常处理。

在一些可选的实施例中，所述第一丢帧处理策略包括：对所述原始图像数据按照预设的第一丢帧频率进行整帧丢弃，和/或，丢弃非图像数据。具体地，对原始图像数据进行整帧丢弃，或者对原始图像数据中部分图像或全部图像的非图像数据进行丢弃，或者先对原始图像数据进行整帧丢弃，再对丢弃后的部分图像或全部图像的非图像数据进行丢弃。丢弃部分图像或全部图像的非图像数据取决于主芯片之前是否已经接收到一组相同拍摄图像的非图像数据，或者取决于实际控制流程。

一帧图像中包括图像数据和非图像数据(比如，相位对焦数据(Phase DetectionAuto-focus，PDAF)，元数据(Meta data)等)，通过设置标识信息来区分图像数据和非图像数据。当拍摄图像不变时，拍摄图像可以共享非图像数据，因此只需要保留一帧或几帧图像的非图像数据，其他帧图像的非图像数据丢弃不传给主芯片，主芯片共享非图像数据对其他帧图像进行处理。

在一些可选的实施例中，该方法还包括：图像处理芯片对丢帧处理后的第一图像数据进行正常处理。也就是说，图像处理芯片在确定第一丢帧条件满足时，先对原始图像数据执行丢帧处理，再对丢帧处理后的第一图像数据执行图像处理芯片常规的处理操作，从而减少了图像处理芯片的图像数据处理量。

在一些可选的实施例中，丢帧处理还可以在图像处理芯片正常处理过程中执行，或在正常处理结束后执行。

在一些可选的实施例中，该方法还包括：第一丢帧条件不满足时，图像处理芯片对原始图像数据进行正常处理，将正常处理后的图像数据发送给主芯片。示例性的，图像处理芯片进行影像坏点修补、白平衡、gamma校正、锐利度、颜色插值等处理。

步骤102：将处理后的图像数据发送给主芯片。

示例性的，电子设备的工作在低功耗模式下，通过摄像头采集监控图像数据，在该模式下摄像头能够提供低质量图像输入降低功耗，比如，在该模式下进行人脸图像采集实现面部解锁功能。在该模式下对应的第一丢帧条件可以为锁屏状态且摄像头固定。

可以理解为，在低功耗模式下，摄像头的图像传感器持续输出原始图像数据到图像处理芯片，同时主芯片判断使用场景。场景1：锁屏状态，且陀螺仪传感器没有检测到数据变化，图像处理芯片通过定时器触发进行图像获取处理流程，对定时时间之外的图像进行整帧丢弃。场景2：锁屏状态，陀螺仪传感器感应到数据变化，图像处理芯片取消定时程序，并切换到正常工作状态，对数据进行完整处理。

采用上述技术方案，利用图像处理芯片和主芯片这种结构进行图像处理时，对于摄像头固定或拍摄场景固定使得拍摄图像不变的场景，对原始图像数据进行丢帧处理，以减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

基于上述实施例，下面对图像处理方法进行进一步举例说明，图2为本申请实施例中图像处理方法的第二流程示意图，如图2所示，该处理方法具体包括：

步骤201：获取主芯片发送的拍摄信息；

其中，所述拍摄信息包括摄像头状态和拍摄场景状态。摄像头状态用于表征摄像头处于移动状态还是固定状态，拍摄场景状态用于表征拍摄场景是否存在变化。拍摄信息作为第一丢弃条件的判断依据，图像处理芯片根据拍摄信息判断第一丢帧条件是否满足。

示例性的，摄像头状态可以是电子设备上的陀螺仪、加速度传感器、重力传感器等传感器采集的摄像头移动数据，摄像头移动数据用来表征摄像头是否移动，主芯片可以将摄像头移动数据直接发送给图像处理芯片由图像处理芯片进行判断，或者主芯片根据摄像头移动数据判断摄像头是否移动，再发送结果给图像处理芯片。

拍摄场景状态可以通过对拍摄图像进行图像识别判断拍摄场景是否变化，比如，通过连续多帧拍摄图像内容变化情况判断拍摄场景是否变化。若拍摄场景无变化且摄像头固定则确定第一丢帧条件满足，否则确定第一丢帧条件不满足。

步骤202：所述摄像头状态表征摄像头固定，所述拍摄场景状态表征拍摄场景无变化，确定所述第一丢帧条件满足；

当检测到第一丢帧条件满足时图像处理芯片对图像传感器输出的原始图像数据进行丢帧处理，以减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

在一些可选的实施例中，拍摄信息还包括拍摄模式，第一丢帧条件还包括拍摄模式为预设拍摄模式。即在预设拍摄模式下，摄像头状态表征摄像头固定，且拍摄场景状态表征拍摄场景无变化，确定第一丢帧条件满足。

可以理解为，对于拍摄效果要求不高的拍摄模式，比如在预览、视频拍摄、夜间模式等，电子设备运行在这类拍摄模式下才允许图像处理芯片对原始图像数据进行丢帧处理。对于拍摄效果要求较高的拍摄模式，比如高清录像、高清拍照、日间模式等，电子设备运行在这类拍摄模式下，为了保证图像处理效果不允许图像处理芯片对原始图像数据进行丢帧处理。

步骤203：第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

在一些可选的实施例中，所述第一丢帧处理策略包括：对所述原始图像数据按照预设的第一丢帧频率进行整帧丢弃，和/或，丢弃非图像数据。具体地，对原始图像数据进行整帧丢弃，或者对原始图像数据中部分图像或全部图像的非图像数据进行丢弃，或者先对原始图像数据进行整帧丢弃，再对丢弃后的部分图像或全部图像的非图像数据进行丢弃。丢弃部分图像或全部图像的非图像数据取决于主芯片之前是否已经接收到一组相同拍摄图像的非图像数据，或者取决于实际控制流程。

第一丢帧频率可以是预先设定的固定频率，也可以是根据拍摄场景进行灵活设定。在一些可选的实施例中，所述拍摄场景状态包括置信度；所述方法还包括：所述置信度位于预设的置信度范围时，确定所述拍摄场景无变化；基于所述置信度确定所述第一丢帧频率；其中，所述置信度越大丢帧频率越高。这里，置信度用于表征图像的相似度，置信度越高图像相似度越高，可以采用高丢帧频率进行丢帧处理，置信度越低图像相似度越低，可以采用低丢帧频率进行丢帧处理。

示例性的，置信度大于或等于置信度阈值时，确定第一丢帧频率为频率1；置信度小于置信度阈值时，确定所述第一丢帧频率为频率2；其中，置信度阈值位于置信度范围之内，且频率2小于频率1。

示例性的，在通过定时器设定丢帧频率时，可以将置信度与定时器的定时值进行关联，主芯片可以对拍摄场景状态进行监控，当拍摄场景状态的置信度大于或等于置信度阈值，定时器控制图像处理芯片以高丢帧频率进行丢帧处理。当拍摄场景状态的置信度小于置信度阈值，定时器控制图像处理芯片以低丢帧频率进行丢帧处理。置信度和定时器的关联关系可以是线性、非线性或阶梯式的关系。当置信值小于置信度范围的下限值时，确定不执行丢帧处理，图像处理芯片对原始图像数据进行正常处理。

在一些可选的实施例中，第一丢帧条件不满足时，对原始图像数据进行正常处理。

步骤204：将处理后的图像数据发送给主芯片。

采用上述技术方案，利用图像处理芯片和主芯片这种结构进行图像处理时，对于摄像头固定或拍摄场景固定使得拍摄图像不变的场景，对原始图像数据进行丢帧处理，以减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

基于上述实施例，下面对图像处理方法进行进一步举例说明，图3为本申请实施例中图像处理方法的第三流程示意图，如图3所示，该处理方法具体包括：

步骤301：获取主芯片发送的拍摄信息；

其中，所述拍摄信息包括摄像头状态和拍摄场景状态。摄像头状态用于表征摄像头处于移动状态还是固定状态，拍摄场景状态用于表征拍摄场景是否存在变化。拍摄信息作为第一丢弃条件的判断依据，图像处理芯片根据拍摄信息判断第一丢帧条件是否满足。

步骤302：基于拍摄信息判断第一丢帧条件是否满足；如果是，执行步骤304；如果否，执行步骤303；

这里，所述摄像头状态表征摄像头固定，所述拍摄场景状态表征拍摄场景无变化，确定所述第一丢帧条件满足。当摄像头状态表征摄像头移动，拍摄场景状态表征拍摄场景变化，确定第一丢帧条件不满足。

步骤303：第一丢帧条件不满足时，对原始图像数据进行正常处理，将处理后的图像数据发送给主芯片；

步骤304：第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理，得到第一图像数据；

在一些可选的实施例中，所述第一丢帧处理策略包括：对所述原始图像数据按照预设的第一丢帧频率进行整帧丢弃，和/或，丢弃非图像数据。

示例性的，在预览和拍摄视频时，考虑到对拍摄效果无影响或影响较小，可以按固定频率丢掉某一帧或多帧数据来降低帧率。当拍摄图像不变时，拍摄图像可以共享非图像数据，因此只需要保留一帧或几帧图像的非图像数据，其他帧图像的非图像数据丢弃不传给主芯片，主芯片共享非图像数据对其他帧图像进行处理。

第一丢帧频率可以是预先设定的固定频率，也可以是根据拍摄场景进行灵活设定。在一些可选的实施例中，所述拍摄场景状态包括置信度；所述方法还包括：所述置信度位于预设的置信度范围时，确定所述拍摄场景无变化；基于所述置信度确定所述第一丢帧频率；其中，所述置信度越大丢帧频率越高。

示例性的，置信度大于或等于置信度阈值时，确定第一丢帧频率为频率1；置信度小于置信度阈值时，确定所述第一丢帧频率为频率2；其中，置信度阈值位于置信度范围之内，且频率2小于频率1。

步骤305：利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果；根据所述场景识别结果判断第二丢帧条件是否满足；如果是，执行步骤307；如果否，执行步骤306；

在一些可选的实施例中，所述利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果，包括：提取所述第一图像数据中相邻的第一图像和第二图像的特征值；计算所述第一图像和第二图像相同像素点特征值的差值；统计所述差值大于第一阈值的目标像素点的数量；所述目标像素点的数量大于第二阈值，确定所述第一图像和所述第二图像为不同拍摄场景；所述第一像素点的数量小于或者等于第二阈值，确定所述第一图像和所述第二图像为相同拍摄场景；

相应的，所述根据所述场景识别结果确定第二丢帧条件满足，包括：根据所述场景识别结果确定所述第一图像数据中连续N帧图像为相同拍摄场景时，确定所述第二丢帧条件满足；其中，N取大于等于2的整数。可以理解为，第二丢帧条件包括所述第一图像数据中连续N帧图像为相同拍摄场景。若第二丢帧条件满足，对第一图像数据再执行丢帧处理，进一步减少图像处理芯片传给主芯片的图像数据处理量，降低主芯片处理的负载，达到降低功耗和提升系统性能的目的。

这里，特征值可以为像素灰度值、饱和度值等特征值，第一阈值作为两个像素点为不同像素点的判断标准，第二阈值为两帧图像为不同图像的判断标准。

步骤306：根据所述场景识别结果确定第二丢帧条件不满足时，将所述第一图像数据发送给主芯片；

步骤307：根据所述场景识别结果确定第二丢帧条件满足时，基于第二丢帧处理策略对所述第一图像数据进行丢帧处理，得到第二图像数据；

在一些可选的实施例中，所述第二丢帧处理策略包括：对所述连续N帧图像的后续图像按照预设的第二丢帧频率进行整帧丢弃。示例性的，第二丢帧频率可以是预先设定的固定频率。

可以理解为，图像处理芯片对第一图像数据进行逐帧处理，利用当前帧识别结果判断是否对后续帧进行丢帧处理。具体地，图像处理芯片对第一图像数据中相邻两帧进行场景识别，判断连续N帧图像为相同拍摄场景，若是，对后续第一图像数据进行丢帧处理。否则，将第一图像数据中的当前图像发送给主芯片，并继续判断后续图像是否满足第二丢弃条件。

在一些可选的实施例中，第二丢帧条件还包括摄像头处于固定状态，即摄像头处于固定状态，根据所述场景识别结果确定所述第一图像数据中连续N帧图像为相同拍摄场景时，确定所述第二丢帧条件满足。

可以理解为，根据主芯片发送的摄像头状态信息确定摄像头处于移动状态还是固定状态，只有摄像头处于固定状态时，才进一步利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果；若摄像头处于移动状态，则确定第二丢帧条件不满足。

示例性的，图像处理芯片可以包括第一处理单元和第二处理单元，第一处理单元用于执行第一丢帧条件的判断以及第一丢帧处理过程，第二处理单元用于利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果，第一处理单元还用于根据第二处理单元场景识别结果执行第二丢帧条件的判断以及第二丢帧处理过程。

示例性的，第一处理单元可以为图像信号处理器(Image Signal Process，ISP)，第二处理单元可以为神经网络处理器(Neural network Processing Unit，NPU)。

步骤308：将所述第二图像数据发送给所述主芯片；

采用上述技术方案，利用图像处理芯片和主芯片这种结构进行图像处理时，对于摄像头固定或拍摄场景固定使得拍摄图像不变的场景，对原始图像数据进行丢帧处理，降低帧率，进一步的再通过图像特征分析识别拍摄场景，丢弃第一图像数据中的冗余数据，在不影响图像显示效果的前提下，减少后端主芯片的图像数据处理量，节约处理资源和功耗，达到平衡功耗和图像处理效果的目的。

为实现本申请实施例的方法，基于同一发明构思本申请实施例还提供了一种图像处理芯片，如图4所示，该图像处理芯片40包括：

第一处理单元401，用于在第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

通信单元402，用于将处理后的图像数据发送给主芯片。

在一些可选的实施例中，通信单元402，还用于获取主芯片发送的拍摄信息；其中，所述拍摄信息包括摄像头状态和拍摄场景状态；

第一处理单元401，具体用于所述摄像头状态表征摄像头固定，所述拍摄场景状态表征拍摄场景无变化，确定所述第一丢帧条件满足。

在一些可选的实施例中，第一处理单元401，还用于确定第一丢帧条件不满足时对原始图像数据进行正常处理。

在一些可选的实施例中，所述第一丢帧处理策略包括：对所述原始图像数据按照预设的第一丢帧频率进行整帧丢弃，和/或，丢弃非图像数据。

在一些可选的实施例中，所述拍摄场景状态包括置信度；

第一处理单元401，还用于所述置信度位于预设的置信度范围时，确定所述拍摄场景无变化；基于所述置信度确定所述第一丢帧频率；其中，所述置信度越大丢帧频率越高。

在一些可选的实施例中，所述图像处理芯片还包括第二处理单元403，用于利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果；第一处理单元401，还用于根据所述场景识别结果确定第二丢帧条件满足时，基于第二丢帧处理策略对所述第一图像数据进行丢帧处理，得到第二图像数据；通信单元402，用于将所述第二图像数据发送给所述主芯片。

通信单元402，用于所述第二丢帧条件不满足时，将所述第一图像数据发送给所述主芯片。

在一些可选的实施例中，第二处理单元403，具体用于提取所述第一图像数据中相邻的第一图像和第二图像的特征值；计算所述第一图像和第二图像相同像素点特征值的差值；统计所述差值大于第一阈值的目标像素点的数量；所述目标像素点的数量大于第二阈值，确定所述第一图像和所述第二图像为不同拍摄场景；所述第一像素点的数量小于或者等于第二阈值，确定所述第一图像和所述第二图像为相同拍摄场景；

第一处理单元401，具体用于根据所述场景识别结果确定所述第一图像数据中连续N帧图像为相同拍摄场景时，确定所述第二丢帧条件满足；其中，N取大于等于2的整数。

在一些可选的实施例中，所述第二丢帧处理策略包括：对所述连续N帧图像的后续图像按照预设的第二丢帧频率进行整帧丢弃。

实际应用中，第一处理单元和第二处理单元的功能可以由图像处理芯片40中的一个处理器实现，也可以由两个处理器分别实现。示例性的，第一处理单元可以为图像信号处理器(Image Signal Process，ISP)，第二处理单元可以为神经网络处理器(Neuralnetwork Processing Unit，NPU)。

可选的，图像处理芯片40还可以包括存储器。其中，第一处理单元和第二处理单元以从存储器中调用并运行计算机程序，以实现本申请实施例中的方法。

通信单元402可以包括输入接口和输出接口。通过输入接口与其他设备或芯片进行通信，比如，通过输入接口获取图像传感器的原始图像数据。通过输出接口与其他设备或芯片进行通信，比如，通过输出接口向主芯片发送图像数据。

应理解，本申请实施例提到的芯片还可以称为系统级芯片，系统芯片，芯片系统或片上系统芯片等。

在实际应用中，上述主芯片可以为特定用途集成电路(ASIC，ApplicationSpecific Integrated Circuit)、数字信号处理装置(DSPD，Digital Signal ProcessingDevice)、可编程逻辑装置(PLD，Programmable Logic Device)、现场可编程门阵列(Field－Programmable Gate Array，FPGA)、控制器、微控制器、微处理器、应用处理器(Application Processor，AP)中的至少一种。可以理解地，对于不同的设备，用于实现上述主芯片功能的电子器件还可以为其它，本申请实施例不作具体限定。

上述存储器可以是易失性存储器(volatile memory)，例如随机存取存储器(RAM，Random-Access Memory)；或者非易失性存储器(non-volatile memory)，例如只读存储器(ROM，Read-Only Memory)，快闪存储器(flash memory)，硬盘(HDD，Hard Disk Drive)或固态硬盘(SSD，Solid-State Drive)；或者上述种类的存储器的组合，并向芯片的处理单元提供指令和数据。

本申请实施例还提供了一种电子设备，如图5所示，该电子设备50包括：图像处理芯片501和主芯片502；

所述图像处理芯片501用于执行本申请实施例中任一项图像处理方法的步骤；所述主芯片502用于接收所述图像处理芯片501发送的图像数据并处理。

该电子设备50还包括：图像传感器503，用于采集原始图像数据。

当然，图像处理芯片501、主芯片502和图像传感器503通过总线系统耦合在一起。可理解，总线系统用于实现这些组件之间的连接通信。总线系统除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。

本申请中描述的电子设备具备拍摄功能，电子设备可以包括诸如手机、平板电脑、笔记本电脑、掌上电脑、个人数字助理(Personal Digital Assistant，PDA)、便捷式媒体播放器(Portable Media Player，PMP)、可穿戴设备、相机等。

在示例性实施例中，本申请实施例还提供了一种计算机可读存储介质，例如包括计算机程序的存储器，计算机程序可由图像处理芯片执行，以完成前述方法的步骤。

本申请实施例还提供了一种计算机程序产品，包括计算机程序指令。

可选的，该计算机程序产品可应用于本申请实施例中的图像处理芯片，并且该计算机程序指令使得计算机执行本申请实施例的各个方法中由图像处理芯片实现的相应流程，为了简洁，在此不再赘述。

本申请实施例还提供了一种计算机程序。

可选的，该计算机程序可应用于本申请实施例中的图像处理芯片，当该计算机程序在计算机上运行时，使得计算机执行本申请实施例的各个方法中由图像处理芯片实现的相应流程，为了简洁，在此不再赘述。

应当理解，在本申请使用的术语是仅仅出于描述特定实施例的目的，而非旨在限制本申请。在本申请和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式，除非上下文清楚地表示其他含义。还应当理解，本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。本申请中表述“具有”、“可以具有”、“包括”和“包含”、或者“可以包括”和“可以包含”在本文中可以用于指示存在对应的特征(例如，诸如数值、功能、操作或组件等元素)，但不排除附加特征的存在。

应当理解，尽管在本申请可能采用术语第一、第二、第三等来描述各种信息，但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开，不必用于描述特定的顺序或先后次序。例如，在不脱离本发明范围的情况下，第一信息也可以被称为第二信息，类似地，第二信息也可以被称为第一信息。

本申请实施例所记载的技术方案之间，在不冲突的情况下，可以任意组合。

在本申请所提供的几个实施例中，应该理解到，所揭露的方法、图像处理芯片和电子设备，可以通过其它的方式实现。以上所描述的实施例仅仅是示意性的，例如，单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本申请各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。

Claims (10)

1.一种图像处理方法，应用于图像处理芯片，其特征在于，所述方法包括：

第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

将处理后的图像数据发送给主芯片。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

获取所述主芯片发送的拍摄信息；其中，所述拍摄信息包括摄像头状态和拍摄场景状态；

所述摄像头状态表征摄像头固定，所述拍摄场景状态表征拍摄场景无变化，确定所述第一丢帧条件满足。

3.根据权利要求2所述的方法，其特征在于，所述第一丢帧处理策略包括：对所述原始图像数据按照预设的第一丢帧频率进行整帧丢弃，和/或，丢弃非图像数据。

4.根据权利要求3所述的方法，其特征在于，所述拍摄场景状态包括置信度；

所述方法还包括：

所述置信度位于预设的置信度范围时，确定所述拍摄场景无变化；

基于所述置信度确定所述第一丢帧频率；其中，所述置信度越大丢帧频率越高。

5.根据权利要求1-4任一项所述的方法，其特征在于，所述对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理之后，还包括：

利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果；

根据所述场景识别结果确定第二丢帧条件满足时，基于第二丢帧处理策略对所述第一图像数据进行丢帧处理，得到第二图像数据；

将所述第二图像数据发送给所述主芯片。

6.根据权利要求5所述的方法，其特征在于，所述利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果，包括：

提取所述第一图像数据中相邻的第一图像和第二图像的特征值；

计算所述第一图像和第二图像相同像素点特征值的差值；

统计所述差值大于第一阈值的目标像素点的数量；

所述目标像素点的数量大于第二阈值，确定所述第一图像和所述第二图像为不同拍摄场景；

所述第一像素点的数量小于或者等于第二阈值，确定所述第一图像和所述第二图像为相同拍摄场景；

所述根据所述场景识别结果确定第二丢帧条件满足，包括：

根据所述场景识别结果确定所述第一图像数据中连续N帧图像为相同拍摄场景时，确定所述第二丢帧条件满足；

其中，N取大于等于2的整数。

7.根据权利要求6所述的方法，其特征在于，所述第二丢帧处理策略包括：对所述连续N帧图像的后续图像按照预设的第二丢帧频率进行整帧丢弃。

8.一种图像处理芯片，其特征在于，所述图像处理芯片包括：第一处理单元和通信单元；

所述第一处理单元，用于在第一丢帧条件满足时，对图像传感器输出的原始图像数据采用第一丢帧处理策略进行丢帧处理；

所述通信单元，用于将丢帧处理后的图像数据发送给主芯片。

9.根据权利要求8所述的图像处理芯片，其特征在于，所述图像处理芯片还包括：第二处理单元，用于利用第一丢帧处理后的第一图像数据进行场景识别，得到场景识别结果；

所述第一处理单元，还用于根据所述场景识别结果确定第二丢帧条件满足时，基于第二丢帧处理策略对所述第一图像数据进行丢帧处理，得到第二图像数据；

所述通信单元，用于将所述第二图像数据发送给所述主芯片。

10.一种电子设备，其特征在于，所述电子设备包括：图像处理芯片和主芯片；

所述图像处理芯片用于执行权利要求1-7任一项所述方法的步骤；

所述主芯片用于接收所述图像处理芯片发送的图像数据并处理。

Images