CN112578893A - 数据处理系统、芯片、方法及存储介质 - Google Patents

数据处理系统、芯片、方法及存储介质 Download PDF

Info

Publication number
CN112578893A
CN112578893A CN202011462113.5A CN202011462113A CN112578893A CN 112578893 A CN112578893 A CN 112578893A CN 202011462113 A CN202011462113 A CN 202011462113A CN 112578893 A CN112578893 A CN 112578893A
Authority
CN
China
Prior art keywords
image data
chip
application
unit
application chip
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011462113.5A
Other languages
English (en)
Inventor
王文东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Oppo Mobile Telecommunications Corp Ltd
Original Assignee
Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Oppo Mobile Telecommunications Corp Ltd filed Critical Guangdong Oppo Mobile Telecommunications Corp Ltd
Priority to CN202011462113.5A priority Critical patent/CN112578893A/zh
Publication of CN112578893A publication Critical patent/CN112578893A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/65—Control of camera operation in relation to power supply
    • H04N23/651—Control of camera operation in relation to power supply for reducing power consumption by affecting camera operations, e.g. sleep mode, hibernation mode or power off of selective parts of the camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Studio Devices (AREA)

Abstract

本申请提供一种数据处理系统、芯片、方法及存储介质，该系统包括：第一摄像单元、图像处理芯片和应用芯片，第一摄像单元处于常开状态，图像处理芯片的两端分别与第一摄像单元和应用芯片连接；第一摄像单元用于采集图像数据；图像处理芯片用于根据图像数据实现AON功能的部分或者全部。从而可以降低该系统所属终端设备的功耗。

Description

数据处理系统、芯片、方法及存储介质
技术领域
本申请涉及芯片技术领域，尤其涉及一种数据处理系统、芯片、方法及存储介质。
背景技术
近年来随着摄像头技术成熟和成本的降低，摄像头的应用越来越广泛。为能够改善终端设备在使用过程中的体验，终端设备可以通过常开(Always On，AON)式的摄像头方案，以捕获用户的行为和用户关注信息，来实现AON场景下的预设功能，即AON功能，比如：解锁终端、页面切换等。
目前，AON摄像头通过移动行业处理器接口(Mobile Industry ProcessorInterface，MIPI)连接至终端设备中的应用芯片(Application Processor，AP)来实现AON功能。一方面，AON功能实现较为简单，该功能由AP来处理，将导致终端设备不必要的功耗；另一方面，由于AON摄像头需要采用预设帧率来采集图像数据，基于此，AP需要按照该帧率定期被唤醒，这也导致终端设备功耗过高的问题。
发明内容
本申请实施例提供了一种数据处理系统、芯片、方法及存储介质，从而可以降低终端设备的功耗。
第一方面，本申请提供一种数据处理系统，包括：第一摄像单元、图像处理芯片和应用芯片，第一摄像单元处于常开状态，图像处理芯片的两端分别与第一摄像单元和应用芯片连接；第一摄像单元用于采集图像数据；图像处理芯片用于对图像数据进行预处理，得到预处理后的图像数据，对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒应用芯片，若确定唤醒应用芯片，则唤醒应用芯片，并提取处理后的图像数据的关键信息，向应用芯片发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
第二方面，本申请提供一种图像处理芯片，图像处理芯片的两端分别与第一摄像单元和应用芯片连接；其中，第一摄像单元处于常开状态，用于对图像数据进行预处理，得到预处理后的图像数据，对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒应用芯片，若确定唤醒应用芯片，则唤醒应用芯片，并提取处理后的图像数据的关键信息，向应用芯片发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
第三方面，本申请提供一种数据处理方法，方法应用于图像处理芯片，图像处理芯片的两端分别与第一摄像单元和应用芯片连接，方法包括：获取第一摄像单元采集的图像数据；对图像数据进行预处理，得到预处理后的图像数据；对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据；根据处理后的图像数据进行用户行为的初步分析；根据用户行为的初步分析结果判断是否唤醒应用芯片；若确定唤醒应用芯片，则唤醒应用芯片；提取处理后的图像数据的关键信息；向应用芯片发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
第四方面，提供了一种计算机可读存储介质，用于存储计算机程序，该计算机程序使得计算机执行上述第三方面的方法。
第五方面，提供了一种计算机程序产品，包括计算机程序指令，计算机程序指令使得计算机执行上述第三方面的方法。
通过本申请的技术方案，一方面，AON功能实现较为简单，无需由应用芯片完全来实现，可以降低终端设备的功耗。另一方面，只有在应用芯片需要被唤醒时，才唤醒应用芯片，基于此实现AON功能，这种方式可以降低应用芯片的唤醒次数，从而也可以降低终端设备的功耗。
附图说明
图1为本申请实施例提供的一种数据处理系统100的示意图；
图2为本申请实施例提供的一种数据处理系统200的示意图；
图3为本申请实施例提供的一种数据处理系统300的示意图；
图4为本申请实施例提供的一种数据处理系统400的示意图；
图5为本申请实施例提供的一种图像处理芯片500的示意图；
图6为本申请实施例提供的一种图像处理芯片600的示意图；
图7为本申请实施例提供的一种图像处理芯片700的示意图；
图8为本申请实施例提供的一种图像处理芯片800的示意图；
图9为本申请实施例提供的一种数据处理方法的流程图；
图10为本申请实施例提供的一种数据处理方法的流程图。
具体实施方式
下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。针对本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
在介绍本申请技术方案之前，下面将对AON摄像头、应用场景以及AON功能进行阐述：
一、AON摄像头
所谓AON摄像头指的是处于常开状态的摄像头，这种摄像头一般是终端设备的前置摄像头。
二、AON摄像头的应用场景
AON摄像头的应用场景可以如下，但不限于此：
(1)解锁场景：AON摄像头需要采集图像数据，以得到用户行为信息，例如：人脸信息、手势信息等，终端设备可以根据该用户行为信息确定是否进行解锁。
(2)隐私保护场景：AON摄像头需要采集图像数据，以得到用户行为信息，例如：人脸信息、手势信息等，终端设备可以根据该用户行为信息确定是否显示社交应用(Application，APP)中的新消息、银行发来的账户信息等。
(3)注视不灭屏场景：AON摄像头需要采集图像数据，以得到用户行为信息，例如：人脸信息、手势信息等，终端设备可以根据该用户行为信息确定是否自动灭屏。比如：通过ON摄像头采集到的图像数据，确定用户当前正在注视某一个页面达到预设时长，这时说明用户不希望自动灭屏，因此，终端设备在这种情况下，可以控制屏幕处于常亮状态。
三、AON功能
AON功能与AON场景对应，例如：在解锁场景下，该AON功能即为通过AON摄像头实现的解锁功能。再例如：在隐私保护场景下，该AON功能即为通过AON摄像头实现的隐私保护功能。又例如：在注视不灭屏场景下，该AON功能即为通过AON摄像头实现的注视不灭屏功能。
如上所述，目前，AON摄像头通过MIPI连接至终端设备中的应用芯片AP来实现AON功能。一方面，AON功能实现较为简单，该功能由AP来处理，将导致终端设备不必要的功耗；另一方面，由于AON摄像头需要采用预设帧率来采集图像数据，基于此，AP需要按照该帧率定期被唤醒，这也导致终端设备功耗过高的问题。
为了解决上述技术问题，在本申请中，只有在需要唤醒AP的时候，才唤醒AP，基于此实现AON功能，从而降低终端设备的功耗。
应理解的是，本申请实施例中的终端设备可以是移动终端，如手机、平板电脑、可穿戴设备等，也可以不是移动终端，本申请对此不做限制。
下面将对本申请技术方案进行详细阐述：
实施例1
图1为本申请实施例提供的一种数据处理系统100的示意图，如图1所示，该系统100包括：第一摄像单元110、图像处理芯片120和AP130，图像处理芯片120的两端分别与第一摄像单元110和AP130连接。
应理解的是，第一摄像单元110处于常开状态，即是AON摄像头，第一摄像单元110用于采集图像数据。
应理解的是，第一摄像单元110是上述系统100所应用的终端设备的前置摄像单元。
可选地，第一摄像单元110拍摄的图像可以是Bayer或者YUV等格式的图像，本申请对此不做限制。
可选地，第一摄像单元包括一个或者多个摄像头，本申请对此不做限制。
可选地，如图1所示，图像处理芯片120包括：图像信号处理单元1201、第一处理单元1202、第二处理单元1203。
图像信号处理单元1201用于对图像数据进行预处理，得到预处理后的图像数据。
第一处理单元1202用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
第二处理单元1203用于获取处理后的图像数据，并根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒AP130。若确定唤醒AP130，则唤醒AP130，并提取处理后的图像数据的关键信息，向AP130发送关键信息，关键信息用于判断是否执行当前场景下的预设操作，例如：解锁场景下的解锁操作。
可选地，第一摄像单元110通过MIPI总线与图像处理芯片120中的MIPI RX1207连接，并通过该MIPI总线传输采集到的图像数据，MIPI RX 1207可以将该图像数据传输给图像信号处理单元1201。
可选地，图像信号处理单元1201可以包括一个或者多个图像信号处理(ImageSignal Processing，ISP)，但不限于此。
可选地，图像信号处理单元1201对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、黑电平补偿(Black Level Compensation，BLC)、镜头矫正(LensShading Correction，LSC)、坏像素矫正(Bad Pixel Correction，BPC)、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第一处理单元1202可以包括一个或者多个神经网络处理器(Neural-network Processing Unit，NPU)。
可选地，第一处理单元1202对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第一处理单元1202主要定制化实现AON功能的算子，从而实现低功耗和高效率。
应理解的是，所谓定制化实现AON功能的算子，指的是针对不同的AON场景，实现该场景下的AON功能的算子。
可选地，图像处理芯片120还包括：第一存储单元1204，用于存储处理后的图像数据。
可选地，第一存储单元1204可以是静态随机存取存储器(Static Random AccessMemory，SRAM)或者动态随机存取存储器(Dynamic Random Access Memory，DRAM)等，本申请对此不做限制。
可选地，第二处理单元1203包括一个或者多个中央处理器(Central ProcessUnit，CPU)。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，图像处理芯片120还包括：第一接口1205。其两端分别与第二处理单元1203和AP130的一个中断源连接。该中断源用于唤醒AP130。第二处理单元1203在确定唤醒AP130时产生中断请求，通过第一接口唤醒AP130。这种通过第一接口1205直接连接到AP130的中断源的方式，可以快速唤醒AP130。第二处理单元1203在确定不唤醒AP130时，继续按照预设帧率获取第一摄像单元110采集的图像数据。
可选地，该第一接口1205可以是通用输入/输出口(General Purpose InputOutput，GPIO)，但不限于此。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片120还包括：串行外设接口(Serial PeripheralInterface，SPI)1206，其中，第二处理单元1203可以通过SPI1206将提取的关键信息发送给AP130。
可选地，处理后的图像数据的关键信息可以是处理后的图像数据的多个关键点的坐标以及关键点的属性等，总之，该关键信息可以用于判断是否执行当前场景下的预设操作，例如：在解锁场景下，AP130根据该关键信息可以判断是否进行屏幕解锁。在隐私保护场景下，AP130根据该关键信息可以判断是否显示用户隐私信息。在注视不灭屏场景下，AP130根据该关键信息可以判断是否灭屏。本申请对此不做限制。
综上，在本申请中，只有在第二处理器根据用户行为的初步分析结果确定唤醒AP时，才唤醒该AP，则并向该AP发送关键信息，以使AP根据该关键信息判断是否执行当前场景下的预设操作。一方面，这种AON功能实现较为简单，无需由AP完全来实现，可以降低终端设备的功耗。另一方面，只有AP在被唤醒时，AP才根据该关键信息判断是否执行当前场景下的预设操作，这种方式可以降低AP的唤醒次数，从而也可以降低终端设备的功耗。
实施例2
图2为本申请实施例提供的一种数据处理系统200的示意图，如图2所示，该系统200包括：第一摄像单元210、图像处理芯片220和AP230，图像处理芯片220的两端分别与第一摄像单元210和AP230连接。第一摄像单元210处于常开状态，用于采集图像数据。
应理解的是，关于第一摄像单元、AP的介绍可参考实施例1，本申请对此不再赘述。
下面将重点对图像处理芯片进行说明：
可选地，如图2所示，图像处理芯片220包括：图像信号处理单元2201和第三处理单元2202。
图像信号处理单元2201用于对图像数据进行预处理，得到预处理后的图像数据。
第三处理单元2202用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒AP230；若确定唤醒AP230，则唤醒AP230，并提取处理后的图像数据的关键信息，向AP230发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
可选地，第一摄像单元210通过MIPI总线与图像处理芯片220中的MIPI RX2203连接，并通过该MIPI总线传输采集到的图像数据，MIPI RX2203可以将该图像数据传输给图像信号处理单元2201。
可选地，图像信号处理单元2201可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元2201对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第三处理单元2202可以包括一个或者多个NPU。
可选地，第三处理单元2202对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第三处理单元2202主要定制化实现AON功能的算子，从而实现低功耗和高效率。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片220还包括：第二存储单元2204，用于存储处理后的图像数据。
可选地，第二存储单元2204可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，图像处理芯片220还包括：第二接口2205，其两端分别与第三处理单元2202和AP230的用于唤醒AP的中断源连接。其中，第三处理单元2202具体用于：若确定唤醒AP230，则在第二存储单元2204的预设区域写入预设数据；第三处理单元2202具体用于在预设区域被写入预设数据时产生中断请求，通过第二接口2205唤醒AP230。第三处理单元2202在确定不唤醒AP230时，继续按照预设帧率获取第一摄像单元210采集的图像数据。
可选地，上述预设数据可以0或者1，本申请对此不做限制。
可选地，该第二接口2205可以是GPIO，但不限于此。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片220还包括：SPI2206，其中，第三处理单元2202可以通过SPI2206将提取的关键信息发送给AP230。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
综上，在本申请中，只有在第三处理器根据用户行为的初步分析结果确定唤醒AP时，才唤醒该AP，则并向该AP发送关键信息，以使AP根据该关键信息判断是否执行当前场景下的预设操作。一方面，这种AON功能实现较为简单，无需由AP完全来实现，可以降低终端设备的功耗。另一方面，只有AP在被唤醒时，AP才根据该关键信息判断是否执行当前场景下的预设操作，这种方式可以降低AP的唤醒次数，从而也可以降低终端设备的功耗。
实施例3
图3为本申请实施例提供的一种数据处理系统300的示意图，如图3所示，该系统300包括：第一摄像单元310、图像处理芯片320和AP330，图像处理芯片320的两端分别与第一摄像单元310和AP330连接。第一摄像单元310处于常开状态，用于采集图像数据。
应理解的是，关于第一摄像单元、AP的介绍可参考实施例1，本申请对此不再赘述。
下面将重点对图像处理芯片进行说明：
可选地，如图3所示，图像处理芯片320包括：图像信号处理单元3201、第四处理单元3202和第五处理单元3203。
图像信号处理单元3201用于对图像数据进行预处理，得到预处理后的图像数据。
第四处理单元3202用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
第五处理单元3203用于获取处理后的图像数据，并根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否提取处理后的图像数据的关键信息，若确定提取关键信息，则提取关键信息，并根据关键信息判断是否执行当前场景下的预设操作。
可选地，第一摄像单元310通过MIPI总线与图像处理芯片320中的MIPI RX3204连接，并通过该MIPI总线传输采集到的图像数据，MIPI RX3204可以将该图像数据传输给图像信号处理单元3201。
可选地，图像信号处理单元3201可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元3201对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第四处理单元3202可以包括一个或者多个NPU。
可选地，第四处理单元3202对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第四处理单元3202主要定制化实现AON功能的算子，从而实现低功耗和高效率。
可选地，第五处理单元3203包括一个或者多个CPU。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片320还包括：第三存储单元3205，用于存储处理后的图像数据。
可选地，第三存储单元3205可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，若第五处理单元3203确定不提取关键信息，则图像处理芯片320继续按照预设帧率获取第一摄像单元310采集的图像数据。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片320还包括：SPI3207，其中，图像处理芯片320中的各个单元可以通过SPI3207与AP330实现通信。
需要说明的是，在本实施例中，图像处理芯片320与AP330之间的通信不是为了实现AON功能的，而该AON功能的全部是由图像处理芯片320实现的。
综上，在本申请中，图像处理芯片可以实现AON功能的全部，而整个AON功能无需由AP实现。这种AON功能实现较为简单，无需AP来处理，可以降低终端设备的功耗。
实施例4
图4为本申请实施例提供的一种数据处理系统400的示意图，如图4所示，该系统400包括：第一摄像单元410、图像处理芯片420和AP430，图像处理芯片420的两端分别与第一摄像单元410和AP430连接。第一摄像单元410处于常开状态，用于采集图像数据。
应理解的是，关于第一摄像单元、AP的介绍可参考实施例1，本申请对此不再赘述。
下面将重点对图像处理芯片进行说明：
可选地，如图4所示，图像处理芯片420包括：图像信号处理单元4201和第六处理单元4202。
图像信号处理单元4201用于对图像数据进行预处理，得到预处理后的图像数据。
第六处理单元4202用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否提取处理后的图像数据的关键信息；若确定提取关键信息，则提取关键信息，并根据判断是否执行当前场景下的预设操作。
可选地，第一摄像单元410通过MIPI总线与图像处理芯片420中的MIPI RX4203连接，并通过该MIPI总线传输采集到的图像数据，MIPI RX4203可以将该图像数据传输给图像信号处理单元4201。
可选地，图像信号处理单元4201可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元4201对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第六处理单元4202可以包括一个或者多个NPU。
可选地，第六处理单元4202对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第六处理单元4202主要定制化实现AON功能的算子，从而实现低功耗和高效率。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片420还包括：第四存储单元4204，用于存储处理后的图像数据。
可选地，第四存储单元4204可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，若第六处理单元4202在确定不提取关键信息，则图像处理芯片420继续按照预设帧率获取第一摄像单元410采集的图像数据。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片420还包括：SPI4205，其中，图像处理芯片420中的各个单元可以通过SPI4205与AP430实现通信。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
需要说明的是，在本实施例中，图像处理芯片420与AP430之间的通信不是为了实现AON功能的，而该AON功能的全部是由图像处理芯片420实现的。
综上，在本申请中，图像处理芯片可以实现AON功能的全部，而整个AON功能无需由AP实现。这种AON功能实现较为简单，无需AP来处理，可以降低终端设备的功耗。
应理解的是，本申请实施例1-4提供的数据处理系统可以应用于终端设备或者集成芯片，或者，本申请实施例1-4提供的数据处理系统可以被理解为终端设备或者集成芯片，本申请对此不做限制。
实施例5
可选地，在上述任一实施例所提供的数据处理系统基础之上，该系统还包括：第二摄像单元，第二摄像单元与AP连接，且第二摄像单元与第一摄像单元独立工作。
可选地，第二摄像单元包括一个或者多个摄像头。
应理解的是，如上所述，第一摄像单元可以是终端设备的前置摄像单元，而这里的第二摄像单元可以是终端设备的后置摄像单元，当然也可以是终端设备的前置摄像单元，不过在这种情况下，第一摄像单元和第二摄像单元是两个独立地前置摄像单元。
由于第一摄像单元与图像处理芯片连接，第二摄像单元与AP连接，即二者分别独立工作，基于此，在第一摄像单元按照预设帧率采集图像数据，以使应用芯片实现AON功能的部分或者全部，同时第二摄像单元还可以实现正常的拍照功能，从而可以提高用户体验感。
可选地，图像处理芯片在系统启动后处于低功耗模式，例如：在终端设备开机后，图像处理芯片默认进行低功耗模式。
应理解的是，图像处理芯片的低功耗模式指的是图像处理芯片中的部分或者全部单元处理休眠状态。
应理解的是，AP在系统启动后默认进行工作模式，但是AP可以判断自己是否可以进入休眠状态，例如：当终端设备在预设时长内未被使用时，则AP确定需要进入休眠状态，为了不影响AON功能，在AP确定需要进行休眠状态之前，先唤醒图像处理芯片，在唤醒图像处理芯片之后，AP可以进入休眠状态。
在本申请中，这种图像处理芯片和AP不断的切换进入低功耗模式或者休眠状态的方式，可以降低终端设备的功耗。
实施例6
图5为本申请实施例提供的一种图像处理芯片500的示意图，该图像处理芯片的两端分别与第一摄像单元和AP连接；其中，第一摄像单元处于常开状态，用于采集图像数据。
可选地，如图5所示，图像处理芯片500包括：图像信号处理单元510、第一处理单元520、第二处理单元530。
图像信号处理单元510用于对图像数据进行预处理，得到预处理后的图像数据。
第一处理单元520用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
第二处理单元530用于获取处理后的图像数据，并根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒AP。若确定唤醒AP，则唤醒AP，并提取处理后的图像数据的关键信息，向AP发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
可选地，图像处理芯片500还包括：MIPI RX570连接，第一摄像单元通过该MIPI总线传输采集到的图像数据，MIPI RX570可以将该图像数据传输给图像信号处理单元510。
可选地，图像信号处理单元510可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元510对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第一处理单元520可以包括一个或者多个NPU。
可选地，第一处理单元520对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第一处理单元520主要定制化实现AON功能的算子，从而实现低功耗和高效率。
可选地，图像处理芯片500还包括：第一存储单元540，用于存储处理后的图像数据。
可选地，第一存储单元540可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，第二处理单元530包括一个或者多个CPU。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，图像处理芯片500还包括：第一接口550。其两端分别与第二处理单元530和AP的一个中断源连接。该中断源用于唤醒AP。第二处理单元530在确定唤醒AP时产生中断请求，通过第一接口唤醒AP。这种通过第一接口550直接连接到AP的中断源的方式，可以快速唤醒AP。第二处理单元530在确定不唤醒AP时，继续按照预设帧率获取第一摄像单元采集的图像数据。
可选地，该第一接口550可以是GPIO，但不限于此。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片500还包括：SPI560，其中，第二处理单元530可以通过SPI560将提取的关键信息发送给AP。
可选地，处理后的图像数据的关键信息可以是处理后的图像数据的多个关键点的坐标以及关键点的属性等，总之，该关键信息用于判断是否执行当前场景下的预设操作，例如：在解锁场景下，AP根据该关键信息可以判断是否进行屏幕解锁。在隐私保护场景下，AP根据该关键信息可以判断是否显示用户隐私信息。在注视不灭屏场景下，AP根据该关键信息可以判断是否灭屏。本申请对此不做限制。
综上，在本申请中，图像处理芯片可以实现AON功能的部分，从而降低终端设备的功耗。
实施例7
图6为本申请实施例提供的一种图像处理芯片600的示意图，该图像处理芯片的两端分别与第一摄像单元和AP连接；其中，第一摄像单元处于常开状态，用于采集图像数据。
可选地，如图6所示，图像处理芯片600包括：图像信号处理单元610和第三处理单元620。
图像信号处理单元610用于对图像数据进行预处理，得到预处理后的图像数据。
第三处理单元620用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒AP；若确定唤醒AP，则唤醒AP，并提取处理后的图像数据的关键信息，向AP发送关键信息，关键信息用于判断是否执行当前场景下的预设操作。
可选地，图像处理芯片600还包括：MIPI RX630，其中第一摄像单元通过MIPI总线与图像处理芯片600中的MIPI RX630，连接，并通过该MIPI总线传输采集到的图像数据，MIPI RX630，可以将该图像数据传输给图像信号处理单元610。
可选地，图像信号处理单元610可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元610对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第三处理单元620可以包括一个或者多个NPU。
可选地，第三处理单元620对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第三处理单元620主要定制化实现AON功能的算子，从而实现低功耗和高效率。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片600还包括：第二存储单元640，用于存储处理后的图像数据。
可选地，第二存储单元640可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，图像处理芯片600还包括：第二接口650，其两端分别与第三处理单元620和AP的用于唤醒AP的中断源连接。其中，第三处理单元620具体用于：若确定唤醒AP，则在第二存储单元640的预设区域写入预设数据；第三处理单元620具体用于在预设区域被写入预设数据时产生中断请求，通过第二接口650唤醒AP。第三处理单元620在确定不唤醒AP时，继续按照预设帧率获取第一摄像单元采集的图像数据。
可选地，上述预设数据可以0或者1，本申请对此不做限制。
可选地，该第二接口650可以是GPIO，但不限于此。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片600还包括：SPI660，其中，第三处理单元620可以通过SPI660将提取的关键信息发送给AP。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
综上，在本申请中，图像处理芯片可以实现AON功能的部分，从而可以降低终端设备的功耗。
实施例8
图7为本申请实施例提供的一种图像处理芯片700的示意图，该图像处理芯片的两端分别与第一摄像单元和AP连接；其中，第一摄像单元处于常开状态，用于采集图像数据。
如图7所示，图像处理芯片700包括：图像信号处理单元710、第四处理单元720和第五处理单元730。
图像信号处理单元710用于对图像数据进行预处理，得到预处理后的图像数据。
第四处理单元720用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
第五处理单元730用于获取处理后的图像数据，并根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否提取处理后的图像数据的关键信息，若确定提取关键信息，则提取关键信息，并根据关键信息判断是否执行当前场景下的预设操作。
可选地，图像处理芯片700还包括：MIPI RX740，其中第一摄像单元通过MIPI总线与图像处理芯片700中的MIPI RX740连接，并通过该MIPI总线传输采集到的图像数据，MIPIRX740可以将该图像数据传输给图像信号处理单元710。
可选地，图像信号处理单元710可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元710对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第四处理单元720可以包括一个或者多个NPU。
可选地，第四处理单元720对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第四处理单元720主要定制化实现AON功能的算子，从而实现低功耗和高效率。
可选地，第五处理单元730包括一个或者多个CPU。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片700还包括：第三存储单元750，用于存储处理后的图像数据。
可选地，第三存储单元750可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，若第五处理单元730确定不提取关键信息，则图像处理芯片700继续按照预设帧率获取第一摄像单元采集的图像数据。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片700还包括：SPI760，其中，图像处理芯片700中的各个单元可以通过SPI760与AP330实现通信。
需要说明的是，在本实施例中，图像处理芯片700与AP之间的通信不是为了实现AON功能的，而该AON功能的全部是由图像处理芯片700实现的。
综上，在本申请中，图像处理芯片可以实现AON功能的全部，从而可以降低终端设备的功耗。
实施例9
图8为本申请实施例提供的一种图像处理芯片800的示意图，该图像处理芯片的两端分别与第一摄像单元和AP连接；其中，第一摄像单元处于常开状态，用于采集图像数据。
如图8所示，图像处理芯片800包括：图像信号处理单元810和第六处理单元820。
图像信号处理单元810用于对图像数据进行预处理，得到预处理后的图像数据。
第六处理单元820用于获取预处理后的图像数据，并对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否提取处理后的图像数据的关键信息；若确定提取关键信息，则提取关键信息，并根据关键信息判断是否执行当前场景下的预设操作。
可选地，图像处理芯片800还包括：MIPI RX830，其中，第一摄像单元通过MIPI总线与图像处理芯片800中的MIPI RX830连接，并通过该MIPI总线传输采集到的图像数据，MIPIRX830可以将该图像数据传输给图像信号处理单元810。
可选地，图像信号处理单元810可以包括一个或者多个ISP，但不限于此。
可选地，图像信号处理单元810对图像数据进行的预处理操作包括以下至少一项，但不限于：Bayer、BLC、LSC、BPC、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。
可选地，第六处理单元820可以包括一个或者多个NPU。
可选地，第六处理单元820对预处理后的图像数据进行AON功能对应的处理操作包括，但不限于：用于处理AON实现的神经网络算法，该第六处理单元820主要定制化实现AON功能的算子，从而实现低功耗和高效率。
应理解的是，关于定制化实现AON功能的算子可参考实施例1，本申请对此不再赘述。
可选地，图像处理芯片800还包括：第四存储单元840，用于存储处理后的图像数据。
可选地，第四存储单元840可以是SRAM或者DRAM等，本申请对此不做限制。
可选地，如果AON功能是基于人脸识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的人脸图像。如果AON功能是基于手势识别实现的，那么用户行为的初步分析可以是根据处理后的数据判断是否存在真实的手势图像。总之，本申请对用户行为的初步分析不做限制。
可选地，若第六处理单元820在确定不提取关键信息，则图像处理芯片800继续按照预设帧率获取第一摄像单元采集的图像数据。
可选地，在不同的应用场景下，上述预设帧率可以不同，当然也可以相同，本申请对此不做限制。
可选地，图像处理芯片800还包括：SPI850，其中，图像处理芯片800中的各个单元可以通过SPI850与AP430实现通信。
应理解的是，处理后的图像数据的关键信息可参考实施例1，本申请对此不做限制。
需要说明的是，在本实施例中，图像处理芯片800与AP430之间的通信不是为了实现AON功能的，而该AON功能的全部是由图像处理芯片800实现的。
综上，在本申请中，图像处理芯片可以实现AON功能的全部，从而可以降低终端设备的功耗。
实施例10
图9为本申请实施例提供的一种数据处理方法的流程图，该方法涉及的执行主体包括：第一摄像单元、图像处理芯片和AP。如图9所示，该方法包括如下步骤：
S901：系统启动后，图像处理芯片通过SPI或者其他通信方式加载固件。
可选地，这里的固件可以是实施例6至实施例7所提供的图像处理芯片中任意单元的软件模块或者配置信息等，例如：固件可以是图像处理芯片中的NPU的神经网络模型、NPU、MIPI、CPU等的配置信息，本申请对此不做限制。
S902：图像处理芯片启动后，初始化其内部的各个单元。
可选地，这里的各个单元可以是实施例6至实施例7所提供的图像处理芯片中的任意单元，本申请对此不做限制。
S903：AP向图像处理芯片发送设置信息。
可选地，该设置信息用于设置图像处理芯片进入低功耗模式。
S904：图像处理芯片根据上述的设置信息进入低功耗模式。
S905：AP确定其是否需要进入休眠模式，若确定需要进入休眠模式，则执行S906，否则，则执行S922。
可选地，当AP确定终端设备在预设时长内未被使用时，可以确定其需要进入休眠状态。
可选地，该预设时长可以是预先设置的，本申请对此不做限制。
S906：AP通过SPI或者其他方式向图像处理芯片发送唤醒请求。
可选地，该唤醒请求用于唤醒图像处理芯片。
S907：图像处理芯片根据上述唤醒请求进入唤醒模式。
S908：图像处理芯片向第一摄像单元发送配置信息。
可选地，该配置信息用于初始化第一摄像单元，并且配置第一摄像单元的图像采集帧率。
S909：图像处理芯片通过SPI向AP发送通知消息。
可选地，该通知消息用于向AP通知图像处理芯片已进入工作模式。
S910：AP进入休眠模式。
S911：图像处理芯片获取第一摄像单元采集的图像数据；
S912：图像处理芯片对图像数据进行预处理，得到预处理后的图像数据。
S913：图像处理芯片对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
S914：图像处理芯片根据处理后的图像数据进行用户行为的初步分析。
S915：图像处理芯片根据用户行为的初步分析结果判断是否唤醒AP，若确定唤醒AP，则执行S916，否则，继续执行S911。
S916：图像处理芯片向AP发送唤醒请求。
S917：AP根据上述唤醒请求进入唤醒状态。
S918：图像处理芯片提取处理后的图像数据的关键信息。
S919：图像处理芯片向AP发送关键信息。
S920：AP根据该关键信息判断是否执行当前场景下的预设操作，如果确定执行当前场景下的预设操作，则执行步骤S921，否则，则结束。
S921：AP执行当前场景下的预设操作，并结束。
S922：AP进入工作模式，并且继续执行S905。
需要说明的是，上述数据处理方法可以应用于实施例1、2或5任一数据处理系统，其内容和效果可参考实施例1、2或5，本申请对此不再赘述。
应理解的是，上述数据处理方法可以应用于任何AON场景，本申请对此不做限制。例如：应用于解锁场景，这时S914中所进行的用户行为的初步分析可以是判断是否存在真实的人脸图像。
应理解的是，本申请对上述各个步骤之间的顺序不做限制，并且上述各个步骤中有些步骤是可选步骤，例如：S901-S910。
实施例11
图10为本申请实施例提供的一种数据处理方法的流程图，该方法涉及的执行主体包括：第一摄像单元、图像处理芯片和AP。如图10所示，该方法包括如下步骤：
S1001：系统启动后，图像处理芯片通过SPI或者其他通信方式加载固件。
可选地，这里的固件可以是实施例8至实施例9所提供的图像处理芯片中任意单元的软件模块或者配置信息等，例如：固件可以是图像处理芯片中的NPU的神经网络模型、NPU、MIPI、CPU等的配置信息，本申请对此不做限制。
S1002：图像处理芯片启动后，初始化其内部的各个单元。
可选地，这里的各个单元可以是实施例8至实施例9所提供的图像处理芯片中的任意单元，本申请对此不做限制。
S1003：AP向前置信息发送设置信息。
可选地，该设置信息用于设置图像处理芯片进入低功耗模式。
S1004：图像处理芯片根据上述的设置信息进入低功耗模式。
S1005：AP确定其是否需要进入休眠模式，若确定需要进入休眠模式，则执行S1006，否则，则执行S1019。
可选地，当AP确定终端设备在预设时长内未被使用时，可以确定其需要进入休眠状态。
可选地，该预设时长可以是预先设置的，本申请对此不做限制。
S1006：AP通过SPI或者其他方式向图像处理芯片发送唤醒请求。
可选地，该唤醒请求用于唤醒图像处理芯片。
S1007：图像处理芯片根据上述唤醒请求进入唤醒模式。
S1008：图像处理芯片向第一摄像单元发送配置信息。
可选地，该配置信息用于初始化第一摄像单元，并且配置第一摄像单元的图像采集帧率。
S1009：图像处理芯片通过SPI向AP发送通知消息。
可选地，该通知消息用于向AP通知图像处理芯片已进入工作模式。
S1010：AP进入休眠模式。
S1011：图像处理芯片获取第一摄像单元采集的图像数据。
S1012：图像处理芯片对图像数据进行预处理，得到预处理后的图像数据。
S1013：图像处理芯片对预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据。
S1014：图像处理芯片根据处理后的图像数据进行用户行为的初步分析。
S1015：图像处理芯片根据用户行为的初步分析结果判断是否提取处理后的图像数据的关键信息；若确定提取关键信息，则执行S1016，否则，继续执行S1011。
S1016：图像处理芯片提取关键信息。
S1017：图像处理芯片根据关键信息判断是否执行当前场景下的预设操作，若确定执行当前场景下的预设操作，则执行步骤S1017，否则，则结束。
S1018：AP执行当前场景下的预设操作，并结束。
S1019：AP进入工作模式，并且继续执行S1005。
需要说明的是，上述数据处理方法可以应用于实施例3、4或5任一数据处理系统，其内容和效果可参考实施例3、4或5，本申请对此不再赘述。
应理解的是，上述数据处理方法可以应用于任何AON场景，本申请对此不做限制。例如：应用于解锁场景，这时S1014中所进行的用户行为的初步分析可以是判断是否存在真实的人脸图像。
应理解的是，本申请对上述各个步骤之间的顺序不做限制，并且上述各个步骤中有些步骤是可选步骤，例如：S1001-S1010。
应理解，本申请实施例的处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(Digital SignalProcessor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。
可以理解，本申请实施例中的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DR RAM)。应注意，本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
应理解，上述存储器为示例性但不是限制性说明，例如，本申请实施例中的存储器还可以是静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic RAM，DRAM)、同步动态随机存取存储器(synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(synch link DRAM，SLDRAM)以及直接内存总线随机存取存储器(Direct Rambus RAM，DR RAM)等等。也就是说，本申请实施例中的存储器旨在包括但不限于这些和任意其它适合类型的存储器。
本申请实施例还提供了一种计算机可读存储介质，用于存储计算机程序。
可选的，该计算机可读存储介质可应用于本申请实施例中的终端设备，并且该计算机程序使得计算机执行本申请实施例的各个方法中由终端设备实现的相应流程，为了简洁，在此不再赘述。
本申请实施例还提供了一种计算机程序产品，包括计算机程序指令。
可选地，该计算机程序产品可应用于本申请实施例中的终端设备，并且该计算机程序指令使得计算机执行本申请实施例的各个方法中由终端设备实现的相应流程，为了简洁，在此不再赘述。
本申请实施例还提供了一种计算机程序。
可选地，该计算机程序可应用于本申请实施例中的终端设备，当该计算机程序在计算机上运行时，使得计算机执行本申请实施例的各个方法中由终端设备实现的相应流程，为了简洁，在此不再赘述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。针对这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，ROM)、随机存取存储器(Random Access Memory，RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应所述以权利要求的保护范围为准。

Claims (10)

1.一种数据处理系统，其特征在于，包括：第一摄像单元、图像处理芯片和应用芯片，所述第一摄像单元处于常开状态，所述图像处理芯片的两端分别与所述第一摄像单元和所述应用芯片连接；
所述第一摄像单元用于采集图像数据；
所述图像处理芯片用于对所述图像数据进行预处理，得到预处理后的图像数据，对所述预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据所述处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒所述应用芯片，若确定唤醒所述应用芯片，则唤醒所述应用芯片，并提取所述处理后的图像数据的关键信息，向所述应用芯片发送所述关键信息，所述关键信息用于判断是否执行所述当前场景下的预设操作。
2.根据权利要求1所述的系统，其特征在于，所述图像处理芯片包括：
图像信号处理单元，用于对所述图像数据进行预处理，得到预处理后的图像数据；
第一处理单元，用于获取所述预处理后的图像数据，并对所述预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据；
第二处理单元，用于获取所述处理后的图像数据，并根据所述处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒所述应用芯片；若确定唤醒所述应用芯片，则唤醒所述应用芯片，并提取所述处理后的图像数据的关键信息，向所述应用芯片发送所述关键信息。
3.根据权利要求2所述的系统，其特征在于，所述图像处理芯片还包括：
第一接口，其两端分别与所述第二处理单元和所述应用芯片的用于唤醒所述应用芯片的中断源连接；
所述第二处理单元具体用于在确定唤醒所述应用芯片时产生中断请求，通过所述第一接口唤醒所述应用芯片。
4.根据权利要求2或3所述的系统，其特征在于，所述图像处理芯片还包括：
第一存储单元，用于存储所述处理后的图像数据。
5.根据权利要求1所述的系统，其特征在于，所述图像处理芯片包括：
图像信号处理单元，用于对所述图像数据进行预处理，得到预处理后的图像数据；
第三处理单元，用于获取所述预处理后的图像数据，并对所述预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据所述处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒所述应用芯片；若确定唤醒所述应用芯片，则唤醒所述应用芯片，并提取所述处理后的图像数据的关键信息，向所述应用芯片发送所述关键信息。
6.根据权利要求5所述的系统，其特征在于，还包括：第二存储单元和第二接口；
所述第三处理单元具体用于：若确定唤醒所述应用芯片，则在所述第二存储单元的预设区域写入预设数据；
第二接口，其两端分别与所述第三处理单元和所述应用芯片的用于唤醒所述应用芯片的中断源连接；
所述第三处理单元具体用于在所述预设区域被写入所述预设数据时产生中断请求，通过所述第二接口唤醒所述应用芯片。
7.根据权利要求1-6任一项所述的系统，其特征在于，还包括：第二摄像单元，所述第二摄像单元与所述应用芯片连接，且所述第二摄像单元与第一摄像单元独立工作。
8.一种图像处理芯片，其特征在于，所述图像处理芯片的两端分别与第一摄像单元和应用芯片连接；其中，所述第一摄像单元处于常开状态，用于采集图像数据；
所述图像处理芯片用于对所述图像数据进行预处理，得到预处理后的图像数据，对所述预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据，根据所述处理后的图像数据进行用户行为的初步分析，根据用户行为的初步分析结果判断是否唤醒所述应用芯片，若确定唤醒所述应用芯片，则唤醒所述应用芯片，并提取所述处理后的图像数据的关键信息，向所述应用芯片发送所述关键信息，所述关键信息用于判断是否执行所述当前场景下的预设操作。
9.一种数据处理方法，其特征在于，所述方法应用于图像处理芯片，所述图像处理芯片的两端分别与第一摄像单元和应用芯片连接，所述方法包括：
获取所述第一摄像单元采集的图像数据；
对所述图像数据进行预处理，得到预处理后的图像数据；
对所述预处理后的图像数据进行当前场景下的处理操作，得到处理后的图像数据；
根据所述处理后的图像数据进行用户行为的初步分析；
根据用户行为的初步分析结果判断是否唤醒所述应用芯片；
若确定唤醒所述应用芯片，则唤醒所述应用芯片；
提取所述处理后的图像数据的关键信息；
向所述应用芯片发送所述关键信息，所述关键信息用于判断是否执行所述当前场景下的预设操作。
10.一种计算机可读存储介质，其特征在于，用于存储计算机程序，所述计算机程序使得计算机执行如权利要求9所述的方法。
CN202011462113.5A 2020-12-11 2020-12-11 数据处理系统、芯片、方法及存储介质 Pending CN112578893A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011462113.5A CN112578893A (zh) 2020-12-11 2020-12-11 数据处理系统、芯片、方法及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011462113.5A CN112578893A (zh) 2020-12-11 2020-12-11 数据处理系统、芯片、方法及存储介质

Publications (1)

Publication Number Publication Date
CN112578893A true CN112578893A (zh) 2021-03-30

Family

ID=75131764

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011462113.5A Pending CN112578893A (zh) 2020-12-11 2020-12-11 数据处理系统、芯片、方法及存储介质

Country Status (1)

Country Link
CN (1) CN112578893A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114785954A (zh) * 2022-04-27 2022-07-22 深圳影目科技有限公司 处理器唤醒方法以及装置、系统、存储介质、ar眼镜

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108012084A (zh) * 2017-12-14 2018-05-08 维沃移动通信有限公司 一种图像生成方法、应用处理器ap及第三方图像处理芯片
CN111902791A (zh) * 2018-10-16 2020-11-06 华为技术有限公司 一种用于识别用户行为的方法、芯片、终端

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108012084A (zh) * 2017-12-14 2018-05-08 维沃移动通信有限公司 一种图像生成方法、应用处理器ap及第三方图像处理芯片
CN111902791A (zh) * 2018-10-16 2020-11-06 华为技术有限公司 一种用于识别用户行为的方法、芯片、终端

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114785954A (zh) * 2022-04-27 2022-07-22 深圳影目科技有限公司 处理器唤醒方法以及装置、系统、存储介质、ar眼镜

Similar Documents

Publication Publication Date Title
CN112348732B (zh) 基于图形渲染管线的模型推理方法、装置及存储介质
WO2020078027A1 (zh) 一种图像处理方法、装置与设备
WO2020062783A1 (zh) 身份认证方法、装置、终端设备及存储介质
CN113298845A (zh) 一种图像处理方法、装置与设备
CN110471606B (zh) 输入方法及电子设备
CN111694475B (zh) 终端控制方法、装置及终端设备
CN112770059B (zh) 拍照方法、装置及电子设备
CN107690804B (zh) 一种图像处理方法及用户终端
CN112291475B (zh) 拍照方法、装置及电子设备
US20190251670A1 (en) Electronic device and method for correcting images using external electronic device
CN112578893A (zh) 数据处理系统、芯片、方法及存储介质
CN110968252B (zh) 交互系统的显示方法、交互系统及电子设备
EP4117275A1 (en) Image fusion method and electronic device
US11126322B2 (en) Electronic device and method for sharing image with external device using image link information
EP3926942B1 (en) Method for processing photographed image and electronic device therefor
CN116027997A (zh) 一种打开文件的方法及设备
CN115334291A (zh) 一种基于亿级像素全景补偿的隧道监控方法及装置
CN115904297A (zh) 屏幕显示检测方法、电子设备及存储介质
KR20210086035A (ko) 블록체인 기반 원본 증명 방법 및 이를 사용하는 전자 장치
KR20210086031A (ko) 블록체인 기반 원본 증명 방법 및 이를 사용하는 전자 장치
CN115802144B (zh) 视频拍摄方法及相关设备
US11843847B2 (en) Device, information processing apparatus, control method therefor, and computer-readable storage medium
CN116828295A (zh) 数据处理方法、图像处理芯片及计算机可读存储介质
WO2022241914A1 (zh) 一种图像处理方法、系统、可穿戴设备及配件与存储介质
RU2807091C1 (ru) Способ слияния изображений и электронное устройство

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination