CN115883987A - 数据处理方法、子芯片及电子设备 - Google Patents

数据处理方法、子芯片及电子设备 Download PDF

Info

Publication number
CN115883987A
CN115883987A CN202211645774.0A CN202211645774A CN115883987A CN 115883987 A CN115883987 A CN 115883987A CN 202211645774 A CN202211645774 A CN 202211645774A CN 115883987 A CN115883987 A CN 115883987A
Authority
CN
China
Prior art keywords
image data
original image
chip
sub
operation command
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211645774.0A
Other languages
English (en)
Inventor
梁杰
聂磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN202211645774.0A priority Critical patent/CN115883987A/zh
Publication of CN115883987A publication Critical patent/CN115883987A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本申请公开了一种数据处理方法、子芯片及电子设备,属于数据处理领域。数据处理方法,应用于子芯片,所述方法包括:接收摄像头模组采集的原始图像数据;根据所述原始图像数据,得到用户行为的分析结果;在所述分析结果匹配预设操作命令的情况下,向主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。

Description

数据处理方法、子芯片及电子设备
技术领域
本申请属于数据处理领域,具体涉及一种数据处理方法、子芯片及电子设备。
背景技术
随着摄像头技术的发展,摄像头的应用越来越广泛。常开(Always On,AON)式摄像头已在移动终端上得以应用。AON摄像头可以在移动终端处于息屏状态下监测并捕获用户行为,以根据用户行为实现预设功能。例如,AON摄像头在捕获到用户的扫码行为时,控制移动终端显示检测码。AON摄像头在捕获到用户的隔空手势时,控制移动终端执行该手势对应的操作,例如,亮屏操作、翻页操作、音量调节操作等。
目前,移动终端的AON功能是基于AON摄像头和片上系统(System On Chip,SOC)来实现。如图1所示,AON摄像头100通过移动产业处理器接口(Mobile Industry ProcessorInterface,MIPI)连接于SOC 200。AON摄像头向SOC发送其采集的原始图像数据(RawData),以使得SOC处理接收到原始图像数据,并基于原始图像数据分析得到用户行为,执行与用户行为相匹配的操作,实现相应预设功能。但是,SOC常开用以处理原始图像数据,使得SOC的功耗较高,进而使得移动终端在运行AON功能期间的耗电量较大,移动终端的功耗过高。
发明内容
本申请实施例的目的是提供一种数据处理方法、子芯片及电子设备,能够解决移动终端在运行AON功能期间的耗电量较大,功耗过高的问题。
第一方面,本申请实施例提供了一种数据处理方法,应用于子芯片,所述方法包括:
接收摄像头模组采集的原始图像数据;
根据所述原始图像数据,得到用户行为的分析结果;
在所述分析结果匹配预设操作命令的情况下,向主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。
第二方面,本申请实施例提供了一种子芯片,所述子芯片分别与摄像头模组和主芯片连接,所述摄像头模组处于常开状态;
所述子芯片用于接收所述摄像头模组采集的原始图像数据,并根据所述原始图像数据,得到用户行为的分析结果,并在所述分析结果匹配预设操作命令的情况下,向所述主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。
第三面,本申请实施例提供了一种电子设备,包括:摄像模组、主芯片和子芯片,所述摄像模组处于常开状态,所述摄像模组通过所述子芯片和所述主芯片连接;所述摄像模组用于采集原始图像数据,并向所述子芯片发送所述原始图像数据;所述子芯片包括如第二方面任一所述的子芯片;所述主芯片用于执行所述子芯片发送的所述预设操作命令。
第四方面,本申请实施例提供了一种可读存储介质,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如第一方面所述的方法的步骤。
第五方面,本申请实施例提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现如第一方面所述的方法。
第六方面,本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如第一方面所述的方法。
在本申请实施例中,子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令。该预设操作命令用于供主芯片执行。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
附图说明
图1是相关技术中一种数据处理系统的结构示意图;
图2是本申请实施例提供的一种数据处理系统的结构示意图;
图3是本申请实施例提供的另一种数据处理系统的结构示意图;
图4是本申请实施例提供的又一种数据处理系统的结构示意图;
图5是本申请实施例提供的再一种数据处理系统的结构示意图;
图6是本申请实施例提供的一种OFE模块的结构示意图;
图7是本申请实施例提供的一种DFE模块的结构示意图;
图8是本申请实施例提供的一种OBE模块的结构示意图;
图9是本申请实施例提供的一种DBE模块的结构示意图;
图10是本申请实施例提供的一种AON算法单元的结构示意图;
图11是本申请实施例提供的一种电子设备的结构示意图;
图12是本申请实施例提供的一种独立显示芯片的结构示意图;
图13是本申请实施例提供的另一种电子设备的结构示意图;
图14是本申请实施例提供的一种数据处理方法的流程图;
图15是本申请实施例提供的又一种电子设备的结构示意图;
图16是本申请实施例提供的再一种电子设备的结构示意图;
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书中的术语“第一”、“第二”等是用于区别类似的对象,而不用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施,且“第一”、“第二”等所区分的对象通常为一类,并不限定对象的个数,例如第一对象可以是一个,也可以是多个。此外,说明书以及权利要求中“和/或”表示所连接对象的至少其中之一,字符“/”,一般表示前后关联对象是一种“或”的关系。
下面结合附图,通过具体的实施例及其应用场景对本申请实施例提供的数据处理方法、子芯片及电子设备进行详细地说明。
请参考图2,其示出了本申请实施例提供的一种数据处理系统的结构示意图,该数据处理系统可以应用于电子设备。可选地,电子设备可以为移动终端。该移动终端可以指的是手机、平板、电脑、可穿戴设备等。如图2所示,数据处理系统00包括:摄像模组100、主芯片200和子芯片300。摄像模组处于常开状态,其可以称为AON摄像头。摄像模组100通过子芯片300和主芯片200连接。可选地,摄像模组100与子芯片300之间可以通过MIPI连接。子芯片300与主芯片200之间可以通过集成电路总线(Inter-Integrated Circuit,IIC)连接。示例地,主芯片可以为SOC。
摄像模组100用于采集原始图像数据,并向子芯片300发送原始图像数据。
子芯片300用于根据原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片200发送预设操作命令。该预设操作命令用于供主芯片执行。
主芯片200用于执行预设操作命令,以执行用户行为对应的预设操作。
其中,摄像模组100在处于常开状态下可以实时采集其视场范围内的图像,生成图像的原始图像数据。可选地,摄像模组采集的图像可以包括:用户的隔空手势图像和用户手持电子设备的操作场景图等。例如,操作场景图可以为扫码场景图、拍摄场景图等。在一种可选地情况下,摄像模组100包括互补金属氧化物半导体图像传感器(ComplementaryMetal Oxide Semiconductor Image Sensor,COMS IS,CIS)。摄像模组100通过其包括的CIS采集图像的原始图像数据。
可选地,电子设备可以根据原始图像数据进行用户行为分析,得到分析结果。分析结果可以用于指示原始图像数据中的用户行为类型。或者,分析结果用于指示用户是否存在预设行为以及用户存在的用户行为类型。其中,预设行为可以为预先设定的一种或者多种用户行为类型。可选地,用户行为类型包括各种手势类型对应的隔空手势操作行为和用户的扫码行为等。例如,用户行为的分析结果指示用户存在预设行为,并指示用户行为类型为扫码行为。
预设操作命令可以用于指示主芯片执行与用户行为类型对应的预设操作。例如,用户行为类型为扫描行为,预设操作为控制电子设备显示检测码。或者,用户行为类型为第一手势类型的隔空手势操作行为,预设操作为音量放大操作。用户行为类型为第二手势类型的隔空手势操作行为,预设操作为音量减小操作。
进一步可选地,子芯片可以存储有多个预设行为数据、多个预设操作命令以及每个预设行为数据与一个预设操作命令的对应关系。其中,每个预设行为数据用于描述一种用户行为类型。预测操作命令用于供主芯片执行预测操作命令指示的预设操作。子芯片在得到用户行为的分析结果后,可以根据分析结果指示的用户行为类型为分析结果匹配预测操作命令。在多个预设行为数据指示的用户行为类型中存在分析结果指示的用户行为类型的情况下,确定分析结果匹配预设操作命令。根据预设行为数据和预测操作命令的对应关系,确定与分析结果匹配的预设操作命令,向主芯片发送该预设操作命令。在多个预设行为数据指示的用户行为类型中不存在分析结果指示的用户行为类型的情况下,确定分析结果未匹配预设操作命令。
在本申请实施例中,子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令。该预设操作命令用于供主芯片执行。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
可选地,电子设备可以检测AON功能是否开启,以在确定AON功能开启的情况下生成RAW域功能开启信号。示例性地,电子设备包括功能监测模块。功能监测模块用于检测AON功能是否开启,并在确定AON功能开启的情况下生成并向子芯片传输RAW域功能开启信号。其中,功能监测模块可以用于在确定接收到AON功能开启操作时,确定AON功能开启;在确定接收到AON功能关闭操作时,确定AON功能关闭。
子芯片300可以用于在接收到RAW域功能开启信号时,根据接收的原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片200发送预设操作命令。
这样,子芯片可以根据是否接收到RAW域功能开启信号,以判断是否需要启动执行根据原始图像数据匹配预设操作命令的步骤。从而在未接收到RAW域功能开启信号时,可以关闭子芯片中用于执行根据原始图像数据匹配预设操作命令这一步骤的单元,减少子芯片的运行功耗,进一步减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。其中,根据原始图像数据匹配预设操作命令的过程包括:根据接收的原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片发送预设操作命令。
可选地,如图3所示,子芯片300包括RAW域处理单元301。RAW域处理单元301用于根据接收的原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片200发送预设操作命令。示例地,如图3所示,摄像模组100包括CIS 101。CIS101用于采集原始图像数据。图3中,子芯片300与CIS 101通过MIPI接口连接。子芯片300通过IIC接口向主芯片200发送预设操作命令。其中,针对利用IIC接口的传输方式,子芯片,又称独立显示芯片,其为主设备,主芯片为从设备。主芯片200通过IIC接口接收来自于子芯片300的预设操作命令。本申请一些实施例中,主芯片200还可以通过MIPI接口与子芯片300连接,以兼容主芯片200向子芯片300的传输方式。例如,主芯片200可以通过MIPI接口向子芯片300发送RGB图像数据和YUV图像数据。
可选地,如图4所示,子芯片300可以包括:数据转换单元3011和AON算法单元3012。数据转换单元3011和AON算法单元3012连接。
数据转换单元3011用于根据原始图像数据转换生成目标域图像数据,并向AON算法3012单元发送目标域图像数据。目标域图像数据可以包括RGB图像数据和YUV图像数据中的至少一种。RGB和YUV为两种不同的图像像素格式。可选地,目标域图像数据包括RGB图像数据或者YUV图像数据。
AON算法单元3012用于根据目标域图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片200发送预设操作命令。
进一步可选地,如图4和5所示,数据转换单元3011可以包括:数据预处理子单元30111和数据转换子单元30112。数据预处理子单元30111和数据转换子单元30112连接。
其中,数据预处理子单元30111用于将原始图像数据进行预处理,得到处理后的原始图像数据,并向数据转换子单元30112发送处理后的原始图像数据。数据转换子单元30112用于对处理后的原始图像数据进行色域转换,得到目标域图像数据。
在一种可选地实现方式中,数据预处理子单元30111对原始图像数据的预处理操作可以包括但不限于以下至少一项:黑电平补偿(Black Level Compensation,BLC)、镜头矫正(LensShading Correction,LSC)、坏像素矫正(Bad Pixel Correction,BPC)、颜色插值(demosaic)、Bayer噪声去除、白平衡(AWB)矫正、色彩矫正(color correction)、gamma矫正、色彩空间转换等。通过对接收的原始图像数据进行预处理,可以得到更为优质的原始图像数据,预处理后的原始图像数据可以更为有效地反映摄像模组视场内的画面信息。
进一步可选地,请继续参考图4和5,数据预处理子单元30111可以包括:光学前端处理(Optical Front End,OFE)模块301111、数字前端处理(Digital Front End,DFE)模块301112和光学后端处理(Optical Back End,OBE)模块301113。
其中,OFE模块301111用于对原始图像数据进行图像失真校正处理,得到第一原始图像数据,并向DFE模块301112发送第一原始图像数据。OFE用于修正摄影模组的光学系统所带来的图像失真问题。
可选地,OFE模块对原始图像数据的图像失真校正处理包括但不限于以下至少一项:图像生成处理、有效信息截取处理、降采样处理、固定模式噪声地消除处理、伪影修复处理、坏点矫正处理、绿平衡处理。
示例地,OFE对原始图像数据进行图像失真校正处理得到第一原始图像数据可以包括:OFE根据原始图像数据生成目标图像,对目标图像进行有效信息截取处理,得到第一图像,对第一图像进行降采样处理,得到第二图像,对第二图像进行固定模式噪声地消除处理,得到第三图像,对第三图像进行伪影修复处理,得到第四图像,对第四图像进行坏点矫正处理,得到第五图像,对第五图像进行绿平衡处理,得到第六图像,并输出第六图像的图像数据,该图像数据为第一原始图像数据。
在一种可选地实现方式中,请参考图6,其示出了本申请实施例提供的一种OFE模块的结构示意图。如图6所示,OFE模块301111包括:图像生成(patgen)模块601、图像截窗(crop)模块602、降采样(binning)模块603、固定噪声消除(fpnr)604、伪影修复(bac)模块605、坏点校正(dpc)模块606、绿平衡(ge)模块607。
其中,图像生成模块601用于根据原始图像数据生成目标图像。图像截窗模块602用于对目标图像进行有效信息截取处理,得到第一图像。降采样模块603用于对第一图像进行降采样处理,得到第二图像。固定噪声消除模块604用于对第二图像进行固定模式噪声地消除处理,得到第三图像。伪影修复模块605用于对第三图像进行伪影修复处理,得到第四图像。坏点校正模块606用于对第四图像进行坏点矫正处理,得到第五图像。绿平衡模块607用于对第五图像进行绿平衡处理,得到第六图像,并输出第六图像的第一原始图像数据。
DFE模块301112用于对第一原始图像数据进行噪声消除处理,得到第二原始图像数据,并向OBE模块301113发送第二原始图像数据。
可选地,DFE在对第一原始图像数据进行噪声消除处理之前,还可以对第一原始图像数据进行DFE前处理,得到前处理后的第一原始图像数据。该对第一原始图像数据的DFE前处理包括但不限于以下至少一项:黑电平校正、数字信号补偿、数据转换等。
进一步可选地,DFE在对第一原始图像数据进行噪声消除处理,得到第二原始图像数据之后,还可以对第二原始图像数据进行DFE后处理,得到后处理后的第二原始图像数据,以向OBE模块发送后处理后的第二原始图像数据。其中,对第二原始图像数据的DFE后处理包括色度校正处理。这样,经过DFE后处理的第二原始图像数据可以更为有效地反映摄像模组视场内的画面信息,进而有效反映用户行为。
在一种可选地实现方式中,请参考图7,其示出了本申请实施例提供的一种DFE模块的结构示意图。如图7所示,DFE模块301112包括:DFE前处理(dfe_pre)模块701、共享缓冲器(shared buffer)702、图像噪点消除(Noise Removal,nr)模块703以及DFE后处理(dfe_post)模块704。
其中,DFE前处理模块701用于对第一原始图像数据进行DFE前处理,得到前处理后的第一原始图像数据,并将第一原始图像数据发送至共享缓冲器702。共享缓冲器702用于缓存接收到的第一原始图像数据。图像噪点消除模块703用于从共享缓冲器702中获取第一原始图像数据,对第一原始图像数据进行噪声消除处理,得到第二原始图像数据,并向DFE后处理模块发送第二原始图像数据。DFE后处理模块704用于对第二原始图像数据进行DFE后处理,得到后处理后的第二原始图像数据,并向OBE模块301113发送后处理后的第二原始图像数据。
OBE 301113用于对第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据,并对第三原始图像数据进行色调校正处理,得到第四原始图像数据,第四原始图像数据为处理后的原始图像数据。
可选地,请参考图8,其示出了本申请实施例提供的一种OBE模块的结构示意图。如图8所示,OBE模块301113包括:镜头阴影校正(Lens Shading Correct)模块801及色调重映射(Tone Mapping)功能模块802。
本申请实施例中,数据转换子单元30112用于对处理后的原始图像数据进行色域转换,得到目标域图像数据。
可选地,数据转换子单元30112可以用于对处理后的原始图像数据进行颜色插值处理,得到RGB图像数据。在确定数据输出模式为RGB模式的情况下,将RGB图像数据确定为目标域图像数据。在确定数据输出模式为YUV模式的情况下,将RGB图像数据进行YUV色域空间转换处理,得到YUV图像数据,将YUV图像数据确定为目标域图像数据。数据转换子单元30112还用于将目标域图像数据发送至AON算法单元3012。
进一步可选地,如图4和5所示,数据转换子单元30112可以为数字后端处理(Digital Back End,DBE)模块30112。请参考图9,其示出了本申请实施例提供的一种OBE模块的结构示意图。如图9所示,DBE模块30112包括:颜色插值功能(demosaic)模块901及数据后处理模块(dbe_post)902。
其中,颜色插值功能模块901用于对处理后的原始图像数据进行颜色插值处理,得到RGB图像数据,并将RGB图像数据发送至数据后处理模块902。数据后处理模块902用于在确定数据输出模式为RGB模式的情况下,将RGB图像数据确定为目标域图像数据;在确定数据输出模式为YUV模式的情况下,将RGB图像数据进行YUV色域空间转换处理,得到YUV图像数据,将YUV图像数据确定为目标域图像数据。数据后处理模块902还用于将目标域图像数据发送至AON算法单元3012。
本申请实施例中,AON算法单元3012用于根据目标域图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片200发送预设操作命令。
可选地,AON算法单元3012可以根据目标域图像数据识别目标域图像数据所描述的图像中的对象信息。根据对象信息确定用户行为的分析结果,并为分析结果匹配预设操作命令。在一种可选地情况下,用户行为的分析结果可以指示用户是否存在预设行为,以及用户存在的目标行为类型。例如,用户行为的分析结果在指示用户存在预设行为的情况下,可以指示目标行为类型为隔空手势操作行为、用户的扫码行为等。在另一种可选地情况下,用户行为的分析结果可以指示用户存在的行为类型。其中,预设行为可以指的是预先设定的一种或者多种用户行为类型。
示例地,在预设行为包括扫码行为的情况下,AON算法单元3012在确定对象信息指示的对象中包括扫码器对象时,确定用户行为的分析结果包括扫码行为。在预设行为包括隔空手势操作行为的情况下,AON算法单元3012在确定对象信息指示的对象中包括第一手势类型的手对象时,确定用户行为的分析结果为第一手势类型的隔空手势操作行为。
进一步可选地,AON算法单元3012在得到用户行为的分析结果后,可以为分析结果匹配预设操作命令。在分析结果未匹配到预设操作命令的情况下,可以不执行任何操作。在分析结果匹配预设操作命令的情况下,可以获取该预设操作命令,并向主芯片200发送预设操作命令。
示例性地,AON算法单元3012存储有多种预设行为类型、以及每种预设行为类型对应的预设操作命令。AON算法单元3012在得到用户行为的分析结果后,可以根据分析结果匹配多种预设行为类型。在分析结果指示不存在预设行为时,确定分析结果未匹配到预设操作命令。在分析结果指示存在预设行为时,确定分析结果匹配到预设操作命令,获取多种设定行为类型中,与分析结果指示的目标行为类型对应的预设操作命令。或者,在多个预设行为类型中不包括分析结果指示的行为类型时,确定分析结果未匹配到预设操作命令。在多个预设行为类型中包括分析结果指示的行为类型时,确定分析结果匹配到预设操作命令,并获取多种预设行为类型中,与分析结果指示的行为类型对应的预设操作命令。
本申请一些实施例中,AON算法单元3012还可以在根据目标域图像数据得到用户行为的分析结果之前,对目标域图像数据进行图像增强处理,得到增强处理后的目标域图像数据。示例地,对目标域图像数据进行图像增强处理操作可以包括以下至少一项,但不限于:锐化处理、平滑处理等。
可选地,请参考图10,其示出了本申请实施例提供的一种AON算法单元的结构示意图。如图10所示,AON算法单元3012包括:图像增强模块1001、图像匹配模块1002及命令输出模块1003。
其中,图像增强模块1001用于对目标域图像数据进行图像增强处理,得到增强处理后的目标域图像数据,并将增强处理后的目标域图像数据发送至图像匹配模块1002。图像匹配模块1002用于根据目标域图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向命令输出模块1003发送预设操作命令。命令输出模块1003用于向主芯片200输出预设操作命令。
本申请一些实施例中,如图5所示,在子芯片和SOC采用IIC协议发送的情况下,子芯片300还包括:IIC编码模块3013。IIC编码模块3013用于将接收预设操作命令,并采用IIC协议对预设操作命令进行编码,得到编码后的预设操作命令。向主芯片200发送编码后的预设操作命令。
综上所述,本申请实施例提供的数据处理系统包括:摄像模组、主芯片和子芯片。摄像模组处于常开状态。摄像模组通过子芯片和主芯片连接。其中,摄像模组采集原始图像数据,并向子芯片发送原始图像数据。子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
本申请实施例还提供了一种子芯片。该子芯片分别与摄像头模组和主芯片连接,摄像头模组处于常开状态。
子芯片用于接收摄像头模组采集的原始图像数据,并根据原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片发送预设操作命令,预设操作命令用于供主芯片执行。
可选地,子芯片用于在接收到RAW域功能开启信号时,根据接收的原始图像数据,得到用户行为的分析结果,RAW域功能开启信号为在确定电子设备的常开AON功能开启的情况下生成的信号。
可选地,子芯片包括:数据转换单元和AON算法单元。
数据转换单元用于根据接收的原始图像数据转换生成目标域图像数据,并向AON算法单元发送目标域图像数据,目标域图像数据包括RGB图像数据和YUV图像数据的至少一种。
AON算法单元用于根据目标域图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下时,向SOC发送预设操作命令。
可选地,数据转换单元包括:数据预处理子单元和数据转换子单元。
数据预处理子单元用于将接收的原始图像数据进行预处理,得到处理后的原始图像数据,并向数据转换子单元发送处理后的原始图像数据。
数据转换子单元用于对处理后的原始图像数据进行色域转换,得到目标域图像数据。
可选地,数据预处理子单元,包括:OFE、DFE和OBE。
OFE用于对接收的原始图像数据进行图像失真校正处理,得到第一原始图像数据,并向DFE发送第一原始图像数据。
DFE用于对第一原始图像数据进行噪声消除处理,得到第二原始图像数据,并向OBE发送第二原始图像数据。
OBE用于对第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据,并对第三原始图像数据进行色调校正处理,得到第四原始图像数据,第四原始图像数据为处理后的原始图像数据。
需要说明的是,该实施例所提供的子芯片可以为前述实施例中子芯片300。且本申请实施例所提供的子芯片中各部件的功能可以参考前述实施例中子芯片300中各部件的功能,本申请实施例对此不做赘述。
本申请实施中,子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
一种可选地情况下,子芯片可以为独立显示芯片。请参考图11,其示出了包括独立显示芯片的一种可选地电子设备架构图。如图11所示,电子设备包括中央处理器(centralprocessing unit,CPU)400、独立显示芯片300、显示屏400、集成电源管理电路(PowerManagement IC,PMIC)500和电源(POWER)600。CPU 400与独立显示芯片300之间具有至少三个连接线。该三个连接线分别为通过MIPI0接口连接的RX0、通过MIPI1接口连接的RX1以及采用通用对象请求代理间通信协议(General Inter-ORB Protocol,GIOP)发送的GIOP连接线。独立显示芯片300与显示屏400的显示驱动集成电路(Display Driver IntegratedCircuit,DDIC)401之间具有至少两个连接线。该两个连接线包括独立显示芯片的输出线TX以及GIOP连接线。PMIC 500和电源600均与独立显示芯片300连接。
其中,独立显示芯片300采用双路MIPI方案。CPU 400通过MIPI0接口发送原始视频数据,通过MIPI1接口发送用户界面(User Interface,UI)画面数据。CPU 400发送的数据经过独立显示芯片300进行数据处理后,由独立显示芯片300将处理后的画面数据发送至显示屏400的DDIC 401。DDIC 401在接收到独立显示芯片发送的画面数据后,对接收的画面数据进行解码,以转换为电信号将显示屏的屏幕点亮,以供显示画面。
本申请一些实施例中,摄像模组100可以与独立显示芯片的MIPI1接口连接,以使得独立显示芯片300接收摄像模组100发送的采集图像的RWA图像数据。
请进一步参考图12,其示出了本申请实施例提供的一种独立显示芯片的结构示意图。如图12所示,独立显示芯片300包括:RX MIPI显示串行接口(Display SerialInterface,DSI)1201、知识产权(intellectual property,IP)核1202、TX MIPI DSI 1203、电源管理模块1204、MIPI时钟模块1205、芯片控制单元1206、面板控制单元1207。
其中,RX MIPI DSI 1201分别与TX MIPI DSI 1203、IP核模块1202和芯片控制单元1206连接。IP核模块1202分别与电源管理模块1204、芯片控制单元1206和TX MIPIDSI1203连接。TX MIPI DSI 1203还与芯片控制单元1206连接。MIPI时钟模块1205与芯片控制单元1206连接。芯片控制单元1206还有面板控制单元1207连接。
RX MIPI DSI 1201为独立显示芯片内部MIPI信号接收单元。RX MIPI DSI 1201提供双路MIPI接收(RX0/RX1)。
IP核模块1202包括多个IP核。图12中以IP核模块1202包括9个IP核(IP1~IP9)为例进行说明。每个IP核用于执行不同的功能。例如,插帧功能,图像降噪功能、画面对比增强功能等。可选地,前述RAW域处理单元301可以为一个IP核。
TX MIPI DSI 1203用于显示屏的显示驱动芯片发送显示数据。其中,该显示数据可以为经过IP核模块处理后的数据。或者,该显示数据还可以为通过芯片控制单元1206确定的无需经过IP核模块处理的数据。即,通过芯片控制单元1206控制的由RX MIPI DSI1201直接发送至TX MIPI DSI 1203的数据。
芯片控制单元1206用于通过主动指令控制RX MIPI DSI 1201输出的数据是需要经过IP核模块1202处理后发送至TX MIPI DSI 1203输出,还是无需经过IP核模块1202处理,直接发送至TX MIPI DSI 1203输出。
请参考图13,其示出了本申请实施例提供的一种电子设备的框图。如图13所示,该电子设备1300包括本申请实施例提供的数据处理系统00。
或者,本申请实施例提供的电子设备包括:本申请实施例提供的子芯片。
本申请实施中,子芯片可以用于根据摄像模组采集的原始图像数据,得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下,向主芯片发送预设操作命令。其中,预设操作命令用于供主芯片执行。摄像模组处于常开状态。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
请参考图14,其示出了本申请实施例提供的一种数据处理方法的流程图。数据处理方法应用于数据处理系统,该数据处理系统为本申请实施例提供的数据处理系统100。数据处理方法可以由数据处理系统100中的子芯片300执行。如图14所示,数据处理方法包括:
步骤1401、接收摄像头模组采集的原始图像数据。
步骤1402、根据原始图像数据,得到用户行为的分析结果。
步骤1403、在分析结果匹配预设操作命令的情况下,向主芯片发送预设操作命令,预设操作命令用于供主芯片执行。
本申请实施例中,通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
可选地,根据原始图像数据,得到用户行为的分析结果的过程可以包括:
在接收到RAW域功能开启信号时,根据原始图像数据,得到用户行为的分析结果,RAW域功能开启信号为在确定电子设备的常开AON功能开启的情况下生成的信号。
可选地,根据原始图像数据,得到用户行为的分析结果的过程可以包括:
根据原始图像数据转换生成目标域图像数据,目标域图像数据包括RGB图像数据和YUV图像数据的至少一种;
根据目标域图像数据得到用户行为的分析结果。
可选地,根据原始图像数据转换生成目标域图像数据的过程可以包括:
将原始图像数据进行预处理,得到处理后的原始图像数据;
对处理后的原始图像数据进行色域转换,得到目标域图像数据。
可选地,将原始图像数据进行预处理,得到处理后的原始图像数据的过程可以包括:
对原始图像数据进行图像失真校正处理,得到第一原始图像数据;
对第一原始图像数据进行噪声消除处理,得到第二原始图像数据;
对第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据;
对第三原始图像数据进行色调校正处理,得到第四原始图像数据,第四原始图像数据为处理后的原始图像数据。
需要说明的是,本申请实施例提供的数据处理方法中,各步骤的解释和实现方式可以参考前述实施例中子芯片的功能的相关解释,本申请实施例对此不做赘述。
综上所述,本申请实施提供的数据处理方法,通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
本申请实施例中的电子设备可以是终端,也可以为除终端之外的其他设备。示例性的,电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载电子设备、移动上网装置(Mobile Internet Device,MID)、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、机器人、可穿戴设备、超级移动个人计算机(ultra-mobilepersonal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等,还可以为服务器、网络附属存储器(Network Attached Storage,NAS)、个人计算机(personal computer,PC)、电视机(television,TV)、柜员机或者自助机等,本申请实施例不作具体限定。
本申请实施例中的子芯片可以为具有操作系统的装置。该操作系统可以为安卓(Android)操作系统,可以为ios操作系统,还可以为其他可能的操作系统,本申请实施例不作具体限定。
本申请实施例提供的子芯片能够实现图14的方法实施例实现的各个过程,为避免重复,这里不再赘述。
可选地,如图15所示,本申请实施例还提供一种电子设备1500,包括处理器1501、存储器1502和本申请实施例提供的数据处理系统。存储器1502上存储有可在所述处理器1501上运行的程序或指令,该程序或指令被处理器1501执行时实现上述数据处理方法实施例的各个步骤,且能达到相同的技术效果,为避免重复,这里不再赘述。
可选地,处理器1501可以包括主芯片和子芯片。并且电子设备1500还包括摄像模组。
需要说明的是,本申请实施例中的电子设备包括上述所述的移动电子设备和非移动电子设备。
图16为实现本申请实施例的一种电子设备的硬件结构示意图。该电子设备1600包括但不限于:射频单元1601、网络模块1602、音频输出单元1603、输入单元1604、传感器1605、显示单元1606、用户输入单元1607、接口单元1608、存储器1609、以及处理器1610等部件。该电子设备1600还包括本申请实施例提供的数据处理系统。可选地,处理器1610可以包括主芯片和子芯片。并且电子设备1600还包括摄像模组(如摄像头)。
本领域技术人员可以理解,电子设备1600还可以包括给各个部件供电的电源(比如电池),电源可以通过电源管理系统与处理器1610逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。图16中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置,在此不再赘述。
其中,子芯片用于:接收所述摄像头模组采集的原始图像数据,并根据所述原始图像数据,得到用户行为的分析结果,并在所述分析结果匹配预设操作命令的情况下,向所述主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。
本申请实施中,子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
可选地,所述子芯片还用于:在接收到RAW域功能开启信号时,根据所述原始图像数据,得到用户行为的分析结果,所述RAW域功能开启信号为在确定电子设备的常开AON功能开启的情况下生成的信号。
可选地,所述子芯片包括:数据转换单元和AON算法单元;
所述数据转换单元用于根据所述原始图像数据转换生成目标域图像数据,并向所述AON算法单元发送所述目标域图像数据,所述目标域图像数据包括RGB图像数据和YUV图像数据的至少一种;
所述AON算法单元用于根据所述目标域图像数据得到用户行为的分析结果,并在所述分析结果匹配预设操作命令的情况下,向所述主芯片发送所述预设操作命令。
可选地,所述数据转换单元包括:数据预处理子单元和数据转换子单元;
所述数据预处理子单元用于将所述原始图像数据进行预处理,得到处理后的原始图像数据,并向所述数据转换子单元发送所述处理后的原始图像数据;
所述数据转换子单元用于对所述处理后的原始图像数据进行色域转换,得到所述目标域图像数据。
可选地,所述数据预处理子单元,包括:OFE模块、DFE模块和OBE模块;
所述OFE模块用于对所述原始图像数据进行图像失真校正处理,得到第一原始图像数据,并向所述DFE模块发送所述第一原始图像数据;
所述DFE模块用于对所述第一原始图像数据进行噪声消除处理,得到第二原始图像数据,并向所述OBE模块发送所述第二原始图像数据;
所述OBE模块用于对所述第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据,并对所述第三原始图像数据进行色调校正处理,得到第四原始图像数据,所述第四原始图像数据为所述处理后的原始图像数据。
本申请实施中,子芯片可以通过接收摄像模组采集的原始图像数据,根据原始图像数据得到用户行为的分析结果,并在分析结果匹配预设操作命令的情况下向主芯片发送预设操作命令,以使得主芯片执行该预设操作命令。该技术方案中,通过增加子芯片的处理能力,使得可以由子芯片直接获取摄像模组采集的原始图像数据,并根据原始图像数据匹配预设操作命令。这样,相较于相关技术,诸如SOC这样的主芯片无需执行预设操作命令匹配处理,降低主芯片的功耗。并且,由于子芯片和诸如SOC这样的主芯片在执行相同算法处理时,子芯片的功耗远小于主芯片的功耗。因此,采用子芯片执行根据原始图像数据的预设操作命令匹配处理,相较于相关技术中采用SOC执行根据原始图像数据的预设操作命令匹配处理,也可以减少移动终端在运行AON功能期间的耗电量,降低移动终端的功耗。
应理解的是,本申请实施例中,输入单元1604可以包括图形处理器(GraphicsProcessing Unit,GPU)16041和麦克风16042,图形处理器16041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。显示单元1606可包括显示面板16061,可以采用液晶显示器、有机发光二极管等形式来配置显示面板16061。用户输入单元1607包括触控面板16071以及其他输入设备16072中的至少一种。触控面板16071,也称为触摸屏。触控面板16071可包括触摸检测装置和触摸控制器两个部分。其他输入设备16072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
存储器1609可用于存储软件程序以及各种数据。存储器1609可主要包括存储程序或指令的第一存储区和存储数据的第二存储区,其中,第一存储区可存储操作系统、至少一个功能所需的应用程序或指令(比如声音播放功能、图像播放功能等)等。此外,存储器1609可以包括易失性存储器或非易失性存储器,或者,存储器x09可以包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate SDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synch link DRAM,SLDRAM)和直接内存总线随机存取存储器(Direct Rambus RAM,DRRAM)。本申请实施例中的存储器1609包括但不限于这些和任意其它适合类型的存储器。
处理器1610可包括一个或多个处理单元;可选的,处理器1610集成应用处理器和调制解调处理器,其中,应用处理器主要处理涉及操作系统、用户界面和应用程序等的操作,调制解调处理器主要处理无线通信信号,如基带处理器。可以理解的是,上述调制解调处理器也可以不集成到处理器1610中。
本申请实施例还提供一种可读存储介质,所述可读存储介质上存储有程序或指令,该程序或指令被处理器执行时实现上述数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
其中,所述处理器为上述实施例中所述的电子设备中的处理器。所述可读存储介质,包括计算机可读存储介质,如计算机只读存储器ROM、随机存取存储器RAM、磁碟或者光盘等。
本申请实施例另提供了一种芯片,所述芯片包括处理器和通信接口,所述通信接口和所述处理器耦合,所述处理器用于运行程序或指令,实现上述数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
应理解,本申请实施例提到的芯片还可以称为系统级芯片、系统芯片、芯片系统或片上系统芯片等。
本申请实施例提供一种计算机程序产品,该程序产品被存储在存储介质中,该程序产品被至少一个处理器执行以实现如上述数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。此外,需要指出的是,本申请实施方式中的方法和装置的范围不限按示出或讨论的顺序来执行功能,还可包括根据所涉及的功能按基本同时的方式或按相反的顺序来执行功能,例如,可以按不同于所描述的次序来执行所描述的方法,并且还可以添加、省去、或组合各种步骤。另外,参照某些示例所描述的特征可在其他示例中被组合。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分可以以计算机软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,或者网络设备等)执行本申请各个实施例所述的方法。
上面结合附图对本申请的实施例进行了描述,但是本申请并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本申请的启示下,在不脱离本申请宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本申请的保护之内。

Claims (12)

1.一种数据处理方法,其特征在于,应用于子芯片,所述方法包括:
接收摄像头模组采集的原始图像数据;
根据所述原始图像数据,得到用户行为的分析结果;
在所述分析结果匹配预设操作命令的情况下,向主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。
2.根据权利要求1所述的方法,其特征在于,所述根据所述原始图像数据,得到用户行为的分析结果,包括:
在接收到RAW域功能开启信号时,根据所述原始图像数据,得到用户行为的分析结果,所述RAW域功能开启信号为在确定电子设备的常开AON功能开启的情况下生成的信号。
3.根据权利要求1或2所述的方法,其特征在于,所述根据所述原始图像数据,得到用户行为的分析结果,包括:
根据所述原始图像数据转换生成目标域图像数据,所述目标域图像数据包括RGB图像数据和YUV图像数据的至少一种;
根据所述目标域图像数据得到用户行为的分析结果。
4.根据权利要求3所述的方法,其特征在于,所述根据所述原始图像数据转换生成目标域图像数据,包括:
将所述原始图像数据进行预处理,得到处理后的原始图像数据;
对所述处理后的原始图像数据进行色域转换,得到所述目标域图像数据。
5.根据权利要求4所述的方法,其特征在于,所述将所述原始图像数据进行预处理,得到处理后的原始图像数据,包括:
对所述原始图像数据进行图像失真校正处理,得到第一原始图像数据;
对所述第一原始图像数据进行噪声消除处理,得到第二原始图像数据;
对所述第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据;
对所述第三原始图像数据进行色调校正处理,得到第四原始图像数据,所述第四原始图像数据为所述处理后的原始图像数据。
6.一种子芯片,其特征在于,所述子芯片分别与摄像头模组和主芯片连接,所述摄像头模组处于常开状态;
所述子芯片用于接收所述摄像头模组采集的原始图像数据,并根据所述原始图像数据,得到用户行为的分析结果,并在所述分析结果匹配预设操作命令的情况下,向所述主芯片发送所述预设操作命令,所述预设操作命令用于供所述主芯片执行。
7.根据权利要求6所述的子芯片,其特征在于,所述子芯片用于在接收到RAW域功能开启信号时,根据所述原始图像数据,得到用户行为的分析结果,所述RAW域功能开启信号为在确定电子设备的常开AON功能开启的情况下生成的信号。
8.根据权利要求6或7所述的子芯片,其特征在于,所述子芯片包括:数据转换单元和AON算法单元;
所述数据转换单元用于根据所述原始图像数据转换生成目标域图像数据,并向所述AON算法单元发送所述目标域图像数据,所述目标域图像数据包括RGB图像数据和YUV图像数据的至少一种;
所述AON算法单元用于根据所述目标域图像数据得到用户行为的分析结果,并在所述分析结果匹配预设操作命令的情况下,向所述主芯片发送所述预设操作命令。
9.根据权利要求8所述的子芯片,其特征在于,所述数据转换单元包括:数据预处理子单元和数据转换子单元;
所述数据预处理子单元用于将所述原始图像数据进行预处理,得到处理后的原始图像数据,并向所述数据转换子单元发送所述处理后的原始图像数据;
所述数据转换子单元用于对所述处理后的原始图像数据进行色域转换,得到所述目标域图像数据。
10.根据权利要求9所述的子芯片,其特征在于,所述数据预处理子单元,包括:光学前端处理OFE模块、数字前端处理DFE模块和光学后端处理OBE模块;
所述OFE模块用于对所述原始图像数据进行图像失真校正处理,得到第一原始图像数据,并向所述DFE模块发送所述第一原始图像数据;
所述DFE模块用于对所述第一原始图像数据进行噪声消除处理,得到第二原始图像数据,并向所述OBE模块发送所述第二原始图像数据;
所述OBE模块用于对所述第二原始图像数据进行镜头阴影消除处理,得到第三原始图像数据,并对所述第三原始图像数据进行色调校正处理,得到第四原始图像数据,所述第四原始图像数据为所述处理后的原始图像数据。
11.一种电子设备,其特征在于,包括:摄像模组、主芯片和子芯片,所述摄像模组处于常开状态,所述摄像模组通过所述子芯片和所述主芯片连接;
所述摄像模组用于采集原始图像数据,并向所述子芯片发送所述原始图像数据;
所述子芯片包括权利要求6至10任一项所述的子芯片;
所述主芯片用于执行所述子芯片发送的所述预设操作命令。
12.一种可读存储介质,其特征在于,所述可读存储介质上存储程序或指令,所述程序或指令被处理器执行时实现如权利要求1至5任一项所述的数据处理方法的步骤。
CN202211645774.0A 2022-12-21 2022-12-21 数据处理方法、子芯片及电子设备 Pending CN115883987A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211645774.0A CN115883987A (zh) 2022-12-21 2022-12-21 数据处理方法、子芯片及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211645774.0A CN115883987A (zh) 2022-12-21 2022-12-21 数据处理方法、子芯片及电子设备

Publications (1)

Publication Number Publication Date
CN115883987A true CN115883987A (zh) 2023-03-31

Family

ID=85755292

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211645774.0A Pending CN115883987A (zh) 2022-12-21 2022-12-21 数据处理方法、子芯片及电子设备

Country Status (1)

Country Link
CN (1) CN115883987A (zh)

Similar Documents

Publication Publication Date Title
KR102128468B1 (ko) 복수의 이미지 신호 프로세서들을 포함하는 이미지 처리 장치 및 이미지 처리 방법
US10212339B2 (en) Image generation method based on dual camera module and dual camera apparatus
CN112529775A (zh) 一种图像处理的方法和装置
US20110169987A1 (en) Minimally Processing Displayed Images Captured From A Burst
EP3481048B1 (en) Electronic device for recording image using multiple cameras and operating method thereof
US10110806B2 (en) Electronic device and method for operating the same
EP3707671B1 (en) Electronic device and method for correcting image corrected in first image processing scheme in external electronic device in second image processing scheme
EP3528490B1 (en) Image data frame synchronization method and terminal
CN108513069B (zh) 图像处理方法、装置、存储介质及电子设备
US20230300475A1 (en) Image processing method and apparatus, and electronic device
CN113014804A (zh) 图像处理方法、装置、电子设备和可读存储介质
CN112422798A (zh) 拍照方法、装置、电子设备和存储介质
US10769416B2 (en) Image processing method, electronic device and storage medium
US20110216980A1 (en) Image transmitter and image receiver
KR20100007628A (ko) 이미지 센서 인터페이스 장치 및 이를 구비하는 디지털촬영 장치
CN113627328A (zh) 电子设备及其图像识别方法、片上系统和介质
CN113744139A (zh) 图像处理方法、装置、电子设备及存储介质
CN114298889A (zh) 图像处理电路和图像处理方法
US11729513B2 (en) Electronic device and HDR image generation method therefor
CN109309784B (zh) 移动终端
CN115883987A (zh) 数据处理方法、子芯片及电子设备
CN109379535A (zh) 拍摄方法和装置、电子设备、计算机可读存储介质
CN114299014A (zh) 图像处理架构、方法、电子设备及存储介质
CN113747046B (zh) 图像处理方法、装置、存储介质及电子设备
CN112367470B (zh) 图像处理方法、装置及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination