CN117369615A - 电子设备控制方法、装置、存储介质以及电子设备 - Google Patents
电子设备控制方法、装置、存储介质以及电子设备 Download PDFInfo
- Publication number
- CN117369615A CN117369615A CN202210770557.8A CN202210770557A CN117369615A CN 117369615 A CN117369615 A CN 117369615A CN 202210770557 A CN202210770557 A CN 202210770557A CN 117369615 A CN117369615 A CN 117369615A
- Authority
- CN
- China
- Prior art keywords
- image data
- image
- electronic device
- original image
- yuv
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000012545 processing Methods 0.000 claims description 73
- 201000006747 infectious mononucleosis Diseases 0.000 claims description 71
- 238000012937 correction Methods 0.000 claims description 23
- LPQOADBMXVRBNX-UHFFFAOYSA-N ac1ldcw0 Chemical compound Cl.C1CN(C)CCN1C1=C(F)C=C2C(=O)C(C(O)=O)=CN3CCSC1=C32 LPQOADBMXVRBNX-UHFFFAOYSA-N 0.000 claims description 18
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 230000006835 compression Effects 0.000 claims description 6
- 238000007906 compression Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims description 6
- 230000010365 information processing Effects 0.000 abstract description 2
- 239000000306 component Substances 0.000 description 33
- 238000004891 communication Methods 0.000 description 13
- 230000006870 function Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 101100248200 Arabidopsis thaliana RGGB gene Proteins 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 239000008358 core component Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
- 208000008918 voyeurism Diseases 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3234—Power saving characterised by the action undertaken
- G06F1/325—Power saving in peripheral device
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/26—Power supply means, e.g. regulation thereof
- G06F1/32—Means for saving power
- G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
- G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
- G06F1/3215—Monitoring of peripheral devices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/11—File system administration, e.g. details of archiving or snapshots
- G06F16/116—Details of conversion of file system types or formats
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Data Mining & Analysis (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Studio Devices (AREA)
Abstract
本公开涉及一种电子设备控制方法、装置、存储介质以及电子设备,涉及信息处理技术领域,该方法通过控制常开式摄像头以MONO格式输出原始图像数据,对该MONO格式的原始图像数据进行图像信号处理,获得YUV图像,并基于该YUV图像控制电子设备的运行方式。不仅能够极大降低常开式摄像头的功耗,从而降低实现Always On功能时的功耗,为Always On功能的长时间运行提供支持,而且还能够保持图像的原始信息,为制定准确的电子设备控制方式提供数据支持。
Description
技术领域
本公开涉及信息处理技术领域,尤其涉及一种电子设备控制方法、装置、存储介质以及电子设备。
背景技术
随着常打开(Always On,AON)被越来越多地应用于情景感知,如何对Always On的方案进行优化也成为本领域亟需解决的技术问题。在相关技术中,一般通过传感器抓取数据,通过智能传感集线器将数据接入外置的数字信号处理算法进行处理。虽然通过使用智能传感集线器能够降低终端设备的能耗,但是成本也相对较高。
发明内容
为克服相关技术中存在的问题,本公开提供一种电子设备控制方法、装置、存储介质以及电子设备。
根据本公开实施例的第一方面,提供一种电子设备控制方法,包括:
获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式;
对所述原始图像数据进行图像信号处理,获得YUV图像;
基于所述YUV图像,确定所述电子设备的控制方式。
可选地,所述获取常开式摄像头输出的原始图像数据,包括:
控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据;
通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据,其中,所述驱动模块配置为以所述MONO格式接收所述图像传感器输出的所述原始图像数据。
可选地,在所述通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据之前,所述方法还包括:
将所述驱动模块的XML配置文件中的ColorFilter变量配置为bayer_Y以及将所述XML配置文件中的Capability变量配置为Internal,以使所述驱动模块以所述MONO格式接收所述图像传感器输出的所述MONO格式的原始图像数据。
可选地,所述控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据,包括:
对所述图像传感器的寄存器进行配置,使得配置后的所述图像传感器以所述MONO格式输出原始图像数据。
可选地,所述对所述原始图像数据进行图像信号处理,获得YUV图像,包括:
通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像。
可选地,所述通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像,包括:
通过所述图像信号处理器,对所述原始图像数据进行除对所述原始图像数据进行色彩处理操作外的其他图像信号处理操作,获取所述YUV图像,其中,所述色彩处理操作包括颜色插值、色彩校正、色彩空间转换以及YUV空间处理,所述其他图像信号处理操作包括以下至少一种:黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩。
可选地,所述基于所述YUV图像,确定所述电子设备的控制方式,包括:
根据所述YUV图像,获得人脸识别结果;
根据所述人脸识别结果,确定所述电子设备的控制方式。
根据本公开实施例的第二方面,提供一种电子设备控制装置,包括:
获取模块,配置为获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式;
处理模块,配置为对所述原始图像数据进行图像信号处理,获得YUV图像;
确定模块,配置为基于所述YUV图像,确定所述电子设备的控制方式。
根据本公开实施例的第三方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开第一方面所提供的电子设备控制方法的步骤。
根据本公开实施例的第四方面,提供一种电子设备,包括:
处理器;
用于存储处理器可执行指令的存储器;
常开式摄像头,配置为输出MONO格式的原始图像数据;
其中,所述处理器被配置为根据所述常开式摄像头输出的所述原始图像数据,执行所述可执行指令,实现第一方面所述的电子设备控制方法的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果:通过控制常开式摄像头输出MONO格式的原始图像数据,对该MONO格式的原始图像数据进行图像信号处理,获得YUV图像,并基于该YUV图像控制电子设备的运行方式。不仅能够极大降低常开式摄像头的功耗,从而降低实现Always On功能时的功耗,为Always On功能的长时间运行提供支持,而且还能够保持图像的原始信息,为制定准确的电子设备控制方式提供数据支持。
应当理解的是,以上的一般描述和后文的细节描述仅是示例性和解释性的,并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分,示出了符合本公开的实施例,并与说明书一起用于解释本公开的原理。
图1是根据一些实施例示出的一种电子设备控制方法的流程图。
图2是根据另一些实施例示出的一种电子设备控制方法的流程图。
图3是根据一些实施例示出的对原始图像数据进行图像信号处理的流程图。
图4是根据一些实施例示出的一种电子设备控制装置的框图。
图5是根据一些实施例示出的一种电子设备的框图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
需要说明的是,本申请中所有获取信号、信息或数据的动作都是在遵照所在地国家相应的数据保护法规政策的前提下,并获得由相应装置所有者给予授权的情况下进行的。
图1是根据一些实施例示出的一种电子设备控制方法的流程图。如图1所示,该电子设备控制方法可以应用于电子设备中,包括以下步骤。
在步骤110中,获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式。
这里,常开式摄像头用于获取电子设备前的用户的用户状态,该用户状态可以包括面部特征以及手势动作等。常开式摄像头是指摄像头处于始终开启的状态。当用户开启Always On功能时,摄像头为常开式摄像头。当用户关闭Always On功能或者用户未使用电子设备时,该摄像头可以关闭。当然,该常开式摄像头可以为电子设备的前置摄像头。
其中,原始图像数据是常开式摄像头采集到的Raw图像数据,该Raw图像数据是图像传感器将捕捉到的光信号转化为数字信号的原始数据。Raw图像数据不仅记录了图像传感器的原始信息,还记录了拍摄产生的元数据(Metadata)。当然,在本公开实施例中,原始图像数据可以是一帧图像,也可以是多帧图像组成的视频图像。
值得说明的是,在本公开中,常开式摄像头输出的原始图像数据为MONO格式的原始图像数据,如MONORaw图像数据。其中,MONO格式组成的文件是受由称为整体式简单的工具改写的两个任意二进制文件(称为基础文件和元文件)一起产生的二进制文件。当然,MONO格式的原始图像数据可以理解为保留单通道的亮度分量的灰度图像。
应当理解的是,由于常开式摄像头以MONO格式输出原始图像数据,在该原始图像数据为单通道亮度信息,使得常开式摄像头的功耗能够得到大幅降低。
在步骤120中,对所述原始图像数据进行图像信号处理,获得YUV图像。
这里,图像信号处理(Image Signal Processing,ISP)是指对图像信号进行转换、增强、压缩等一系列操作,产生一个完整的图像。在本公开中,通过对MONO格式的原始图像数据进行图像信号处理,获得YUV图像。其中,YUV是一种图像格式,Y通道表示亮度(灰阶值),U通道和V通道表示色度,描述影响色彩以及饱和度,用于指定像素的颜色。
应当理解的是,由于原始图像数据的图像格式为MONO格式,在对该原始图像数据进行图像信号处理时,可以不对该原始图像数据进行色彩校正,从而将MONO格式的原始图像数据转换为YUV格式的YUV图像。
在步骤130中,基于所述YUV图像,确定所述电子设备的控制方式。
这里,在获得YUV图像之后,可以根据该YUV图像确定在电子设备前的用户的用户状态,并根据用户状态来确定该电子设备的控制方式。其中,电子设备的控制方式至少包括屏幕显示控制、消息显示控制等等。
消息显示控制是指对电子设备接收到的通信消息的显示方式进行控制。例如,当根据YUV图像确定在电子设备前的用户数量大于1时,若电子设备接收到隐私消息时,则可以不显示该隐私消息。屏幕显示控制是指对电子设备的屏幕显示方式进行控制。例如,当根据YUV图像确定到用户正在注视某一应用界面,若电子设备达到自动息屏时间,则可以控制电子设备保持亮屏状态。
由此,通过控制常开式摄像头输出MONO格式的原始图像数据,对该MONO格式的原始图像数据进行图像信号处理,获得YUV图像,并基于该YUV图像控制电子设备的运行方式。不仅能够极大降低常开式摄像头的功耗,从而降低实现Always On功能时的功耗,为AlwaysOn功能的长时间运行提供支持,而且还能够保持图像的原始信息,为制定准确的电子设备控制方式提供数据支持。
图2是根据另一些实施例示出的一种电子设备控制方法的流程图。如图2所示,该方法可以包括以下步骤。
在步骤210中,控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据。
这里,图像传感器是常开式摄像头的核心部件,该图像传感器利用光电器件的光电转换功能将感光面上的光像转换为与光像成相应比例关系的电信号,从而获得原始图像数据。
在本公开中,图像传感器被配置为以MONO格式输出原始图像数据。应当理解的是,图像传感器是以MONORaw的图像格式输出原始图像数据,由于该原始图像数据包括单通道的亮度信息,能够极大降低图像传感器的功耗。
在一些实施例中,步骤210中,可以对所述图像传感器的寄存器进行配置,使得配置后的所述图像传感器以所述MONO格式输出原始图像数据。
其中,图像传感器支持的硬件接口一般为MIPI接口(Mobile Industry ProcessorInterface,移动产业处理器接口)。根据MIPI协议,通过采用寄存器配置方式进行图像传感器的寄存器进行配置,能够使得配置后的图像传感器直接输出MONO格式的原始图像数据。
应当理解的是,对于任意类型的常开式摄像头,在电子设备开启Always On功能时,均可以对该常开式摄像头的图像传感器的寄存器的参数进行配置,使得配置后的图像传感器能够直接输出MONO格式的原始图像数据。
由此,通过将图像传感器配置为输出MONO格式的原始图像数据,可以降低图像传感器消耗的功率。
在步骤220中,通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据。
这里,常开式摄像头的驱动模块是位于硬件抽象层与硬件层之间的驱动层,该驱动层以文件节点的方式暴露接口给用户空间,让硬件抽象层通过标准的文件访问接口,将请求下发至内核中。该驱动模块实际上是相机驱动层,用于从相机硬件层中读取图像数据。
其中,驱动模块配置为以MONO格式接收图像传感器输出的原始图像数据。在硬件层中,图像传感器以MONO格式输出原始图像数据,在驱动层,驱动模块以MONO格式从图像传感器的寄存器中读取原始图像数据。
应当理解的是,驱动模块配置为以MONO格式接收图像传感器输出的原始图像数据是指常开式摄像头的驱动层能够支持接收MONO格式的原始图像数据。例如,当该驱动模块为高通平台的相机驱动时,其本身并不支持接收MONO格式的原始图像数据。通过对该相机驱动进行配置,其能够接收到图像传感器输出的MONO格式的原始图像数据。
在一些实施例中,在步骤220之前,可以通过将所述驱动模块的XML配置文件中的color Filter Arrangement变量配置为bayer_Y以及将所述XML配置文件中的Capability变量配置为Internal,以使所述驱动模块以所述MONO格式接收所述图像传感器输出的所述MONO格式的原始图像数据。
这里,由于驱动模块是抽象的,因此,可以通过修改该驱动模块的XML配置文件,使得修改后的驱动模块能够接收MONO格式的原始图像数据。具体地,将驱动模块的XML配置文件中的的ColorFilter变量配置为bayer_Y,以及将所述XML配置文件中的Capability变量(能力变量)配置为Internal。
其中,ColorFilter是用来处理图像颜色的一个类。通过将ColorFilter变量配置为bayer_Y以及将Capability变量配置为Internal将使得驱动模块无需对图像颜色进行读取,其只需要读取Y通道的图像数据,从而实现接收图像传感器输出的MONO格式的原始图像数据。
值得说明的是,将ColorFilter变量配置为bayer_Y,驱动模块在接收MONO格式的原始图像数据时,对Y通道的数据进行处理即可。
应当理解的是,对于不同平台的驱动模块,可以使用不同的配置方式对驱动模块进行配置,但是其本质均是让常开式摄像头的驱动层能够接收图像传感器输出的MONO格式的原始图像数据。例如,对于高通平台的相机驱动,其可以采用XML配置方式对该相机驱动的XML配置文件中的ColorFilter变量配置为bayer_Y以及将Capability变量配置为Internal,将高通平台的相机驱动修改为能够接收MONO格式的原始图像数据。
在步骤230中,对所述原始图像数据进行图像信号处理,获得YUV图像。
这里,在一些实施例中,可以通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像。
其中,图像信号处理器可以为电子设备的摄像头模组中的图像信号处理器。图像传感器和图像信号处理器之间可以通过移动产业处理器接口连接,驱动模块从图像传感器中获取MONO格式的原始图像数据,并将该原始图像数据传递至图像信号处理器,图像信号处理器将MONO格式的原始图像数据处理为YUV图像。
值得说明的是,本公开实施例中的图像信号处理器被配置为能够支持对MONO格式的原始图像数据进行图像信号处理。通过使用摄像头模组中的图像信号处理器对MONO格式的原始图像数据进行处理,可以在不增加其他外设的情况下,实现对MONO格式的原始图像数据进行处理,可以降低实现Always On方案的成本。
在一些实施例中,通过所述图像信号处理器,对所述原始图像数据进行除对所述原始图像数据进行色彩处理操作外的其他图像信号处理操作,获取所述YUV图像,其中,所述色彩处理操作包括颜色插值、色彩校正、色彩空间转换以及YUV空间处理,所述其他图像信号处理操作包括以下至少一种:黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩。
这里,由于原始图像数据的图像格式为MONO格式,为灰度图像,因此在对原始图像数据进行图像信号处理时,不对原始图像数据进行色彩处理操作。例如,不对MONO格式的原始图像数据执行颜色插值、色彩校正、色彩空间转换以及YUV空间处理的图像信号处理操作。而是对MONO格式的原始图像数据执行黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩的其他图像信号处理操作。
图3是根据一些实施例示出的对原始图像数据进行图像信号处理的流程图。如图3所示,可以对MONO格式的原始图像数据依次进行黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩的操作,获得YUV图像。
值得说明的,如图3所示,在本公开实施例中,无需对MONO格式的原始图像数据进行色彩处理操作。应当理解的是,通过如图3所示的图像信号处理流程,使得图像信号处理器能够支持对MONO格式的原始图像数据进行图像信号处理,达到对Y通道的图像进行处理的目的。而且,通过不对MONO格式的原始图像数据执行色彩处理操作,可以防止MONO格式的原始图像数据被解析为RGGB(一种拜耳格式)数据而进行反马赛克处理,导致丢失图像细节。
应当理解的是,获得的YUV图像在U通道以及V通道上的分量为0,Y通道上的数据为有效数据。
在步骤240中,基于所述YUV图像,确定所述电子设备的控制方式。
这里,在获得YUV图像之后,可以根据该YUV图像确定在电子设备前的用户的用户状态,并根据用户状态来确定该电子设备的控制方式。其中,电子设备的控制方式至少包括屏幕显示控制、消息显示控制等等。
由此,通过控制常开式摄像头的图像传感器以MONO格式输出原始图像数据,并通过驱动模块对接收MONO格式的原始图像数据,然后对该MONO格式的原始图像数据进行图像信号处理,获得YUV图像,并基于该YUV图像控制电子设备的运行方式。能够使得电子设备的相机模组支持对MONO格式的原始图像数据进行接收以及处理,实现常开式摄像头能够以MONO格式的方式运行,从而极大降低常开式摄像头的功耗,降低了电子设备在实现AlwaysOn功能时的功耗,为Always On功能的长时间运行提供支持,而且还能够保持图像的原始信息,为制定准确的电子设备控制方式提供数据支持。
在一些实施例中,可以根据所述YUV图像,获得人脸识别结果,并根据所述人脸识别结果,确定所述电子设备的控制方式。
这里,可以通过图像识别算法对YUV图像进行处理,获得人脸识别结果。其中,人脸识别结果包括在该YUV图像中的人脸的人脸数量和/或人脸图像。进一步地,根据人脸数量和/或人脸图像,确定电子设备的控制方式。其中,电子设备的控制方式至少包括屏幕显示控制以及消息显示控制等等。
作为一些示例,当人脸数量为1且人脸图像为目标人脸时,确定显示电子设备接收到的隐私消息。
这里,目标人脸可以为与该电子设备关联的人脸图像。隐私消息可以为携带有验证码的通信消息、或者是来自即时通信软件的通信消息。
在本实施方式中,电子设备控制常开式摄像头以MONO格式采集电子设备前的原始图像数据,并将该原始图像数据转换为YUV图像,然后根据YUV图像确定人脸数量以及人脸图像,当人脸数量为1且人脸图像为目标人脸时,确定显示电子设备接收到的隐私消息。
应当理解的是,当人脸数量为1且人脸图像为目标人脸时,表征使用电子设备的用户为合法用户,且不存在其他用户在窥探电子设备,因此可以在电子设备上显示接收到的隐私消息。
作为另一些示例,当人脸数量为1且人脸图像为目标人脸时,根据人脸图像确定该人脸图像的视线角度,并根据视线角度确定电子设备的屏幕显示方式。
这里,当人脸数量为1且人脸图像为目标人脸时,表征使用电子设备的用户为合法用户,且不存在其他用户在窥探电子设备。其中,人脸图像的视线角度是指目标人脸的视线相对于电子设备的屏幕的角度。当该视线角度表征目标人脸在注视电子设备的屏幕时,确定将电子设备的屏幕显示方式维持为常亮状态。
应当理解的是,将电子设备的屏幕显示方式维持为常亮状态是指即使达到息屏时间也不控制电子设备息屏。
在本实施方式中,当用户在注视电子设备的屏幕时,能够一直维持电子设备为常亮状态。例如,当用户在看电子书或者菜谱时,电子设备即使达到息屏时间,也能够保持屏幕不灭。
在又一些示例中,当人脸数量大于1且人脸图像包括目标人脸时,调整电子设备的屏幕的显示亮度。
这里,当人脸数量大于1且人脸图像包括目标人脸时,表征不仅存在合法用户在注视电子设备的屏幕,还存在非法用户在注视电子设备的屏幕,表征存在其他用户在窥探电子设备的屏幕。其中,调整电子设备的屏幕的显示亮度可以是降低电子设备的显示亮度,如将显示亮度调整至最低,以提醒用户存在其他用户在注视屏幕,并且通过降低显示亮度来防止非法用户窥探到屏幕的显示内容。
当然,调整电子设备的屏幕的显示亮度也可以是确定目标人脸的视线角度,并根据该目标人脸的视线角度,调整电子设备的屏幕的显示亮度,其中,调整后的电子屏幕的显示亮度使得在目标人脸的视线角度下能够观看到屏幕的显示内容。
应当理解的是,通过根据目标人脸的视线角度调整电子设备的显示亮度,可以使得在目标人脸的视线角度下能够观看到屏幕的显示内容,从而避免其他用户观看到电子设备的屏幕的显示内容。
图4是根据一些实施例示出的一种电子设备控制装置的框图。参照图4,该装置400包括:
获取模块401,配置为获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式;
处理模块402,配置为对所述原始图像数据进行图像信号处理,获得YUV图像;
确定模块403,配置为基于所述YUV图像,确定所述电子设备的控制方式。
可选地,所述获取模块401包括:
控制单元,配置为控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据;
接收单元,配置为通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据,其中,所述驱动模块配置为以所述MONO格式接收所述图像传感器输出的所述原始图像数据。
可选地,所述装置400还包括:
配置单元,配置为将所述驱动模块的XML配置文件中的ColorFilter变量配置为bayer_Y以及将所述XML配置文件中的Capability变量配置为Internal,以使所述驱动模块以所述MONO格式接收所述图像传感器输出的所述MONO格式的原始图像数据。
可选地,所述控制单元具体配置为:
对所述图像传感器的寄存器进行配置,使得配置后的所述图像传感器以所述MONO格式输出原始图像数据。
可选地,所述处理模块402具体配置为:
通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像。
可选地,所述处理模块402具体配置为:
通过所述图像信号处理器,对所述原始图像数据进行除对所述原始图像数据进行色彩处理操作外的其他图像信号处理操作,获取所述YUV图像,其中,所述色彩处理操作包括颜色插值、色彩校正、色彩空间转换以及YUV空间处理,所述其他图像信号处理操作包括以下至少一种:黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩。
可选地,所述确定模块403包括:
识别单元,配置为根据所述YUV图像,获得人脸识别结果;
确定子单元,配置为根据所述人脸识别结果,确定所述电子设备的控制方式。
关于上述实施例中的装置,其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述,此处将不做详细阐述说明。
本公开还提供一种计算机可读存储介质,其上存储有计算机程序指令,该程序指令被处理器执行时实现本公开提供的电子设备控制方法的步骤。
图5是根据一些实施例示出的一种电子设备的框图。例如,电子设备800可以是移动电话,计算机,数字广播终端,消息收发设备,游戏控制台,平板设备,医疗设备,健身设备,个人数字助理等。
参照图5,电子设备800可以包括以下一个或多个组件:常开式摄像头801、处理组件802,存储器804,电源组件806,多媒体组件808,音频组件810,输入/输出接口812,传感器组件814,以及通信组件816。
处理组件802通常控制电子设备800的整体操作,诸如与显示,电话呼叫,数据通信,相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令,以完成上述的电子设备控制方法的全部或部分步骤。此外,处理组件802可以包括一个或多个模块,便于处理组件802和其他组件之间的交互。例如,处理组件802可以包括多媒体模块,以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令,联系人数据,电话簿数据,消息,图片,视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现,如静态随机存取存储器(SRAM),电可擦除可编程只读存储器(EEPROM),可擦除可编程只读存储器(EPROM),可编程只读存储器(PROM),只读存储器(ROM),磁存储器,快闪存储器,磁盘或光盘。
电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管理系统,一个或多个电源,及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中,屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板,屏幕可以被实现为触摸屏,以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界,而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中,多媒体组件808包括一个前置摄像头和/或后置摄像头。当电子设备800处于操作模式,如拍摄模式或视频模式时,前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如,音频组件810包括一个麦克风(MIC),当电子设备800处于操作模式,如呼叫模式、记录模式和语音识别模式时,麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中,音频组件810还包括一个扬声器,用于输出音频信号。
输入/输出接口812为处理组件802和外围接口模块之间提供接口,上述外围接口模块可以是键盘,点击轮,按钮等。这些按钮可包括但不限于:主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器,用于为电子设备800提供各个方面的状态评估。例如,传感器组件814可以检测到电子设备800的打开/关闭状态,组件的相对定位,例如所述组件为电子设备800的显示器和小键盘,传感器组件814还可以检测电子设备800或电子设备800一个组件的位置改变,用户与电子设备800接触的存在或不存在,电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件814可以包括接近传感器,被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器,如CMOS或CCD图像传感器,用于在成像应用中使用。在一些实施例中,该传感器组件814还可以包括加速度传感器,陀螺仪传感器,磁传感器,压力传感器或温度传感器。
通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络,如WiFi,2G或3G,或它们的组合。在一个示例性实施例中,通信组件816经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中,所述通信组件816还包括近场通信(NFC)模块,以促进短程通信。例如,在NFC模块可基于射频识别(RFID)技术,红外数据协会(IrDA)技术,超宽带(UWB)技术,蓝牙(BT)技术和其他技术来实现。
在示例性实施例中,电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现,用于执行上述的电子设备控制方法。
在示例性实施例中,还提供了一种包括指令的非临时性计算机可读存储介质,例如包括指令的存储器804,上述指令可由电子设备800的处理器820执行以完成上述电子设备控制方法。例如,所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
在另一示例性实施例中,还提供一种计算机程序产品,该计算机程序产品包含能够由可编程的装置执行的计算机程序,该计算机程序具有当由该可编程的装置执行时用于执行上述的电子设备控制方法的代码部分。
本领域技术人员在考虑说明书及实践本公开后,将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本公开的真正范围和精神由下面的权利要求指出。
应当理解的是,本公开并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。
Claims (10)
1.一种电子设备控制方法,其特征在于,包括:
获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式;
对所述原始图像数据进行图像信号处理,获得YUV图像;
基于所述YUV图像,确定所述电子设备的控制方式。
2.根据权利要求1所述的电子设备控制方法,其特征在于,所述获取常开式摄像头输出的原始图像数据,包括:
控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据;
通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据,其中,所述驱动模块配置为以所述MONO格式接收所述图像传感器输出的所述原始图像数据。
3.根据权利要求2所述电子设备控制方法,其特征在于,在所述通过所述常开式摄像头的驱动模块接收所述图像传感器输出的所述原始图像数据之前,所述方法还包括:
将所述驱动模块的XML配置文件中的ColorFilter变量配置为bayer_Y以及将所述XML配置文件中的Capability变量配置为Internal,以使所述驱动模块以所述MONO格式接收所述图像传感器输出的所述MONO格式的原始图像数据。
4.根据权利要求2所述的电子设备控制方法,其特征在于,所述控制所述常开式摄像头的图像传感器以所述MONO格式输出原始图像数据,包括:
对所述图像传感器的寄存器进行配置,使得配置后的所述图像传感器以所述MONO格式输出原始图像数据。
5.根据权利要求1所述的电子设备控制方法,其特征在于,所述对所述原始图像数据进行图像信号处理,获得YUV图像,包括:
通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像。
6.根据权利要求5所述的电子设备控制方法,其特征在于,所述通过图像信号处理器对所述原始图像数据进行图像信号处理,获得YUV图像,包括:
通过所述图像信号处理器,对所述原始图像数据进行除对所述原始图像数据进行色彩处理操作外的其他图像信号处理操作,获取所述YUV图像,其中,所述色彩处理操作包括颜色插值、色彩校正、色彩空间转换以及YUV空间处理,所述其他图像信号处理操作包括以下至少一种:黑电补偿、镜头校正、白平衡、坏像素校正、伽马校正、边缘加强以及图像压缩。
7.根据权利要求1所述的电子设备控制方法,其特征在于,所述基于所述YUV图像,确定所述电子设备的控制方式,包括:
根据所述YUV图像,获得人脸识别结果;
根据所述人脸识别结果,确定所述电子设备的控制方式。
8.一种电子设备控制装置,其特征在于,包括:
获取模块,配置为获取常开式摄像头输出的原始图像数据,其中,所述原始图像数据的图像格式为MONO格式;
处理模块,配置为对所述原始图像数据进行图像信号处理,获得YUV图像;
确定模块,配置为基于所述YUV图像,确定所述电子设备的控制方式。
9.一种计算机可读存储介质,其上存储有计算机程序指令,其特征在于,该程序指令被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
10.一种电子设备,其特征在于,包括:
处理器;
用于存储处理器可执行指令的存储器;
常开式摄像头,配置为输出MONO格式的原始图像数据;
其中,所述处理器被配置为根据所述常开式摄像头输出的所述原始图像数据,执行所述可执行指令,实现如权利要求1至7中任一项所述的电子设备控制方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210770557.8A CN117369615A (zh) | 2022-06-30 | 2022-06-30 | 电子设备控制方法、装置、存储介质以及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210770557.8A CN117369615A (zh) | 2022-06-30 | 2022-06-30 | 电子设备控制方法、装置、存储介质以及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117369615A true CN117369615A (zh) | 2024-01-09 |
Family
ID=89404667
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210770557.8A Pending CN117369615A (zh) | 2022-06-30 | 2022-06-30 | 电子设备控制方法、装置、存储介质以及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117369615A (zh) |
-
2022
- 2022-06-30 CN CN202210770557.8A patent/CN117369615A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107038037B (zh) | 显示模式切换方法及装置 | |
US11183153B1 (en) | Image display method and device, electronic device, and storage medium | |
RU2630167C1 (ru) | Способ и устройство для переключения режима цветовой гаммы | |
CN105489194B (zh) | 一种显示图像的方法和装置 | |
CN111078170B (zh) | 显示控制方法、显示控制装置及计算机可读存储介质 | |
CN111953903A (zh) | 拍摄方法、装置、电子设备及存储介质 | |
CN110876014B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN112331158B (zh) | 终端显示调节方法、装置、设备及存储介质 | |
CN112905141B (zh) | 屏幕显示方法及装置、计算机存储介质 | |
CN112905135A (zh) | 屏幕亮度处理方法、电子设备及存储介质 | |
CN111835977B (zh) | 图像传感器、图像生成方法及装置、电子设备、存储介质 | |
CN110874829B (zh) | 图像处理方法及装置、电子设备及存储介质 | |
CN109389547B (zh) | 图像显示方法及装置 | |
CN117369615A (zh) | 电子设备控制方法、装置、存储介质以及电子设备 | |
CN107682623B (zh) | 拍照方法及装置 | |
CN110876013B (zh) | 确定图像分辨率的方法及装置、电子设备及存储介质 | |
CN115733913B (zh) | 连续拍照方法及装置、存储介质 | |
CN110876015B (zh) | 确定图像分辨率的方法及装置、电子设备及存储介质 | |
CN111081143B (zh) | 显示控制方法、装置、电子设备和计算机可读存储介质 | |
CN118102080A (zh) | 图像拍摄方法、装置、终端及存储介质 | |
CN117764895A (zh) | 图像处理方法、装置及存储介质 | |
CN117597726A (zh) | 亮度调整方法及装置、存储介质 | |
CN118538129A (zh) | 显示屏亮度确定方法、装置、电子设备及存储介质 | |
CN116419062A (zh) | 图像处理方法、装置及存储介质 | |
CN118096535A (zh) | 图像处理方法和装置、电子设备、存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |