CN114461093A - 一种环境光的检测方法、电子设备、芯片系统及存储介质 - Google Patents

Abstract

本申请提供一种环境光的检测方法、电子设备、芯片系统及存储介质，涉及屏下环境光技术领域，可以解决环境光的检测方式通用性差的问题。该方法包括：电子设备中的显示引擎服务可以确定当前时间和上次检测环境光的时间的差值；若该差值超过了一定时间，则表示已经到了再次检测环境光的时间，则显示引擎服务向环境光传感器驱动发送采集指令以使环境光传感器采集环境光，向SurfaceFlinger模块发送局部图像合成请求以合成局部图像；该局部图像与采集的环境光中包含的噪声相关，从而基于采集的环境光和局部图像得到真实的环境光。

Description

一种环境光的检测方法、电子设备、芯片系统及存储介质

技术领域

本申请涉及环境光传感器领域，尤其涉及一种环境光的检测方法、电子设备、芯片系统及存储介质。

背景技术

随着电子设备的发展，电子设备的显示屏的占比越来越高。为追求极致的屏占比，可以将电子设备上的环境光传感器设置在电子设备的有机发光二极管(Organic Light-Emitting Diode，OLED)屏下方。OLED屏本身会发光，这就导致置于OLED屏下方的环境光传感器采集的环境光中包含了OLED屏本身发出的光，导致基于环境光传感器采集的环境光不精确。

目前，为了精确的测量环境光，通常采用定制OLED屏搭配定制环境光传感器的方式。预先测量得到该定制OLED屏对该定制环境光传感器采集的环境光的干扰关系，并将该干扰关系固化在特定电子设备中，该特定电子设备设置有该定制OLED屏和该定制环境光传感器。在环境光传感器采集环境光后，基于固化在该特定电子设备中的干扰关系，得到精确的环境光。然而，这种检测环境光的方式只能在采用定制OLED屏搭配定制环境光传感器的电子设备中才能适用，导致这种环境光的检测方式的通用性较差。

发明内容

本申请提供一种环境光的检测方法、电子设备、芯片系统及存储介质，解决环境光的检测方式通用性差的问题。

为达到上述目的，本申请采用如下技术方案：

第一方面，本申请提供一种环境光的检测方法，应用于电子设备，该电子设备包括显示引擎服务、SurfaceFlinger和噪声算法库，该方法包括：

响应于监听到第一信号，显示引擎服务计算当前时间与第一时间的第一差值，第一时间与电子设备的环境光传感器采集第一值的时间相关；

在第一差值满足第一预设条件的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向电子设备的环境光传感器驱动发送采集指令；采集指令用于指示环境光传感器驱动获得第二值，第二值为环境光传感器采集第一值之后采集的下一个环境光数据；第一请求用于指示SurfaceFlinger合成第一图像，第一图像为环境光传感器采集第二值期间电子设备的显示屏显示的图像的局部区域图像；

噪声算法库基于第二值和第一图像，计算获得第三值。

本申请中，可以查看当前时间与环境光传感器上一次采集第一值(初始环境光)的时间的差值，在差值满足第一预设条件的情况下，表示已经满足了再次检测环境光的时间，则可以向SurfaceFlinger发送第一请求，以合成第一图像；也需要向电子设备的环境光传感器驱动发送采集指令，以采集第二值(初始环境光)。该第一图像与显示屏本身发出的光相关，即与第二值中包含的噪声相关，所以，可以基于第二值和第一图像获得第三值(外界真实的环境光)。该方法不依赖于特定型号的显示屏和特定型号的环境光传感器器件。因此，具有通用性。

作为第一方面的一种实现方式，在第一差值满足第一预设条件的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向电子设备的环境光传感器驱动发送采集指令，包括：

在第一差值大于第一阈值的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令。

作为第一方面的一种实现方式，在第一差值大于第一阈值的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令，包括：

在第一差值大于第一阈值、且SurfaceFlinger监听到第一信号后不合成第二图像的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令，第二图像为用于在电子设备的显示屏显示的图像。

作为第一方面的一种实现方式，在第一差值大于第一阈值的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令，包括：

在第一差值大于第一阈值、且SurfaceFlinger监听到第一信号后合成第二图像的情况下，显示引擎服务确定SurfaceFlinger在监听到第二信号之前是否能够完成第一图像的合成任务，第二信号为第一信号的下一个Vsync信号，第二图像为用于在电子设备的显示屏显示的图像，在SurfaceFlinger监听到第一信号后合成第二图像的情况下，第一图像为第二图像的局部区域图像；

若显示引擎服务确定SurfaceFlinger在监听到第二信号之前能够完成第一图像的合成任务，则显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令。

作为第一方面的一种实现方式，显示引擎服务确定SurfaceFlinger在监听到第二信号之前是否能够完成第一图像的合成任务之后，该方法还包括：

若显示引擎服务确定SurfaceFlinger在监听到第二信号之前不能完成第一图像的合成任务，则显示引擎服务监听第二信号。

作为第一方面的一种实现方式，上述实现方式中的第一差值小于或等于第二阈值，第二阈值大于第一阈值。

作为第一方面的一种实现方式，在第一差值满足第一预设条件的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向电子设备的环境光传感器驱动发送采集指令，还包括：

在第一差值大于第二阈值的情况下，显示引擎服务向SurfaceFlinger发送第一请求和向环境光传感器驱动发送采集指令。

作为第一方面的一种实现方式，在显示引擎服务计算当前时间与第一时间的第一差值之后，该方法还包括：

在第一差值不大于第一阈值的情况下，显示引擎服务监听第二信号，第二信号为第一信号的下一个Vsync信号。

作为第一方面的一种实现方式，该方法还包括：

响应于监听到第一信号，SurfaceFlinger判断是否合成第二图像；

若SurfaceFlinger在监听到第三信号之后接收到第一信息，则SurfaceFlinger合成第二图像，第三信号为第一信号的前一个Vsync信号，第一信息包括用于合成第二图像的信息；

若SurfaceFlinger在监听到第三信号之后未接收到第一信息，则SurfaceFlinger不合成第二图像。

作为第一方面的一种实现方式，在SurfaceFlinger合成第二图像之后，该方法还包括：

SurfaceFlinger向显示引擎服务发送第一响应，第一响应用于表示SurfaceFlinger已经合成第二图像；

相应的，显示引擎服务确定SurfaceFlinger在监听到第二信号之前是否能够完成第一图像的合成任务，包括：

显示引擎服务接收第一响应，记录接收第一响应的第一时间；

显示引擎服务确定监听到第二信号的第二时间；

显示引擎服务计算第二时间和第一时间的差，得到第三时间；

若第三时间大于第三阈值，则显示引擎服务确定SurfaceFlinger在监听到第二信号之前能够完成第一图像的合成任务；

若第三时间不大于第三阈值，则显示引擎服务确定SurfaceFlinger在监听到第二信号之前不能完成第一图像的合成任务。

作为第一方面的一种实现方式，显示引擎服务确定SurfaceFlinger在监听到第二信号之前能够完成第一图像的合成任务包括：

显示引擎服务确定SurfaceFlinger合成第二图像的第一时长；

显示引擎服务计算Vsync信号的周期和第一时长的差值，得到第二时长；

若第二时长大于第三阈值，则显示引擎服务确定SurfaceFlinger在监听到第二信号之前能够完成第一图像的合成任务；

若第二时长不大于第三阈值，则显示引擎服务确定SurfaceFlinger在监听到第二信号之前不能完成第一图像的合成任务。

作为第一方面的一种实现方式，显示引擎服务确定SurfaceFlinger合成第二图像的第一时长包括：

显示引擎服务获取第一预设数量的第一历史时长，第一历史时长为SurfaceFlinger合成第二图像之前合成显示屏图像的时长，显示屏图像为SurfaceFlinger合成的用于在电子设备的显示屏显示的图像；

计算第一预设数量的第一历史时长的数据特征值，得到第一时长。

作为第一方面的一种实现方式，该方法还包括：

显示引擎服务获取第二预设数量的第二历史时长，第二历史时长为SurfaceFlinger合成第二图像之前合成去噪图像的时长，去噪图像为SurfaceFlinger合成的用于计算环境光传感器采集的环境光数据中的噪声的图像；

计算第二预设数量的第二历史时长的数据特征值，得到第三阈值。

作为第一方面的一种实现方式，在显示引擎服务向SurfaceFlinger发送第一请求和向电子设备的环境光传感器驱动发送采集指令之后，该方法还包括：

SurfaceFlinger接收第一请求；

SurfaceFlinger在合成第二图像的情况下，向电子设备的软件合成模块发送第二信息；第二信息包括用于合成第一图像的信息，第二信息为用于合成第二图像的第一信息的全部信息或部分信息；

软件合成模块基于第二信息合成第一图像，存储第一图像；

SurfaceFlinger在不合成第二图像的情况下，向电子设备的软件合成模块发送第三信息，第三信息包括用于合成第一图像的信息，第三信息为用于合成SurfaceFlinger合成的最后一个显示屏图像的第四信息的全部信息或部分信息；

软件合成模块基于第三信息合成第一图像，存储第一图像；

软件合成模块向噪声算法库发送第一图像的存储地址；

噪声算法库基于存储地址获取第一图像，基于第一图像计算第一噪声；

环境光传感器驱动接收采集指令，环境光传感器驱动指示电子设备的环境光传感器采集第二值；

环境光传感器向环境光传感器驱动发送第二值；

环境光传感器驱动接收第二值；环境光传感器驱动向噪声算法库发送第二值；

相应的，噪声算法库基于第二值和第一图像，计算获得第三值，包括：

噪声算法库基于第二值和第一噪声，计算获得第三值。

作为第一方面的一种实现方式，在SurfaceFlinger合成第二图像之后，该方法还包括：

电子设备的显示屏显示第二图像。

作为第一方面的一种实现方式，第二图像为第一图像在电子设备的显示屏上进行显示时位于环境光传感器上方的局部区域图像。

第二方面，本申请提供一种环境光的检测方法，该方法包括：

响应于监听到第一信号，电子设备计算当前时间与第一时间的第一差值，第一时间与电子设备的环境光传感器采集第一值的时间相关；

在第一差值大于第一阈值、且电子设备监听到第一信号后合成第二图像的情况下，电子设备确定在监听到第二信号之前是否能够完成第一图像的合成任务，第二信号为第一信号的下一个Vsync信号，第二图像为用于在电子设备的显示屏显示的图像，在电子设备监听到第一信号后合成第二图像的情况下，第一图像为第二图像的局部区域图像；

若电子设备确定在监听到第二信号之前能够完成第一图像的合成任务，则电子设备合成第一图像和通过电子设备的环境光传感器采集第二值；

电子设备基于第二值和第一图像，计算获得第三值。

作为第二方面的一种实现方式，电子设备确定在监听到第二信号之前是否能够完成第一图像的合成任务之后，该方法还包括：

若电子设备确定在监听到第二信号之前不能完成第一图像的合成任务，则监听第二信号。

作为第二方面的一种实现方式，电子设备在计算当前时间与第一时间的第一差值之后，该方法还包括：

在第一差值大于第一阈值、且电子设备监听到第一信号后不合成第二图像的情况下，电子设备合成第一图像和通过电子设备的环境光传感器采集第二值。

作为第二方面的一种实现方式，第一差值小于或等于第二阈值，第二阈值大于第一阈值。

作为第二方面的一种实现方式，电子设备在计算当前时间与第一时间的第一差值之后，该方法还包括：

在第一差值大于第二阈值的情况下，电子设备合成第一图像和通过电子设备的环境光传感器采集第二值；

在第一差值不大于第一阈值的情况下，电子设备监听第二信号，第二信号为第一信号的下一个Vsync信号。

作为第二方面的一种实现方式，电子设备合成第一图像包括：

电子设备在合成第二图像的情况下，基于合成第二图像的第二信息合成第一图像；

电子设备在不合成第二图像的情况下，基于合成最后一个显示屏图像的第四信息合成第一图像。

第三方面，提供一种电子设备，包括处理器，处理器用于运行存储器中存储的计算机程序，实现本申请第一方面或第二方面任一项的方法。

第四方面，提供一种芯片系统，包括处理器，处理器与存储器耦合，处理器执行存储器中存储的计算机程序，以实现本申请第一方面或第二方面任一项的方法。

第五方面，提供一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被一个或多个处理器执行时实现本申请第一方面或第二方面任一项的方法。

第六方面，本申请提供了一种计算机程序产品，当计算机程序产品在设备上运行时，使得设备执行本申请第一方面或第二方面任一项的方法。

可以理解的是，上述第二方面至第六方面的有益效果可以参见上述第一方面中的相关描述，在此不再赘述。

附图说明

图1为本申请实施例提供的一种电子设备的硬件结构示意图；

图2为本申请实施例提供的电子设备中环境光传感器和显示屏的一种位置关系图；

图3为本申请实施例提供的电子设备中环境光传感器和显示屏的另一种位置关系图；

图4为本申请实施例提供的电子设备中环境光传感器和显示屏的另一种位置关系图；

图5为本申请实施例提供的显示屏上目标区域的位置关系图；

图6为本申请实施例提供的显示屏上环境光传感器和目标区域的一种位置关系图；

图7为本申请实施例提供的环境光的检测方法依赖的一种技术架构图；

图8为本申请实施例提供的显示屏的刷新过程示意图；

图9为本申请实施例提供的丢帧现象的示意图；

图10为本申请实施例提供的环境光的检测方法的时序图；

图11为图10中的显示引擎服务择机发出局部合成请求和采集指令的流程示意图；

图12为图11中计算剩余可用时长的示意图；

图13为本申请实施例提供的另一种显示引擎服务择机发出局部合成请求和采集指令的流程示意图；

图14为图13所示实施例中计算剩余可用时长的示意图；

图15为本申请实施例提供的另一中显示引擎服务择机发出局部合成请求和采集指令的流程示意图。

具体实施方式

以下描述中，为了说明而不是为了限定，提出了诸如特定系统结构、技术之类的具体细节，以便透彻理解本申请实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本申请。

应当理解，当在本申请说明书和所附权利要求书中使用时，术语“包括”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。

还应当理解，在本申请实施例中，“一个或多个”是指一个、两个或两个以上；“和/或”，描述关联对象的关联关系，表示可以存在三种关系；例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B的情况，其中A、B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。

另外，在本申请说明书和所附权利要求书的描述中，术语“第一”、“第二”、“第三”、“第四”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此，在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例，而是意味着“一个或多个但不是所有的实施例”，除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”，除非是以其他方式另外特别强调。

本申请实施例提供的一种环境光的检测方法，可以适用于设有显示屏和环境光传感器的电子设备中。该电子设备可以为平板电脑、手机、可穿戴设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer，UMPC)、上网本、个人数字助理(personaldigital assistant，PDA)等电子设备。本申请实施例对电子设备的具体类型不作限定。

图1示出了一种电子设备的结构示意图。电子设备100可以包括处理器110，外部存储器接口120，内部存储器121，通用串行总线(universal serial bus，USB)接口130，充电管理模块140，电源管理模块141，电池142，天线1，天线2，移动通信模块150，无线通信模块160，音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，传感器模块180，按键190，马达191，摄像头193，显示屏194，以及用户标识模块(subscriberidentification module，SIM)卡接口195等。其中，传感器模块180可以包括压力传感器180A，触摸传感器180K，环境光传感器180L等。

可以理解的是，本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中，电子设备100可以包括比图示更多或更少的部件，或者组合某些部件，或者拆分某些部件，或者不同的部件布置。图示的部件可以以硬件，软件或软件和硬件的组合实现。

处理器110可以包括一个或多个处理单元，例如：处理器110可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，存储器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的器件，也可以集成在一个或多个处理器中。

其中，控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。

处理器110中还可以设置存储器，用于存储指令和数据。在一些实施例中，处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据，可从存储器中直接调用。避免了重复存取，减少了处理器110的等待时间，因而提高了系统的效率。

USB接口130是符合USB标准规范的接口，具体可以是Mini USB接口，Micro USB接口，USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电，也可以用于电子设备100与外围设备之间传输数据。

外部存储器接口120可以用于连接外部存储卡，例如Micro SD卡，实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信，实现数据存储功能。例如将音乐，视频等文件保存在外部存储卡中。

内部存储器121可以用于存储计算机可执行程序代码，可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令，从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中，存储程序区可存储操作系统，至少一个功能所需的应用程序(比如声音播放功能，图像播放功能等)。

此外，内部存储器121可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件，闪存器件，通用闪存存储器(universal flash storage，UFS)等。

充电管理模块140用于从充电器接收充电输入。其中，充电器可以是无线充电器，也可以是有线充电器。在一些有线充电的实施例中，充电管理模块140可以通过USB接口130接收有线充电器的充电输入。

电源管理模块141用于连接电池142，充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入，为处理器110，内部存储器121，外部存储器，显示屏194，摄像头193，和无线通信模块160等供电。

在其他一些实施例中，电源管理模块141也可以设置于处理器110中。在另一些实施例中，电源管理模块141和充电管理模块140也可以设置于同一个器件中。

电子设备100的无线通信功能可以通过天线1，天线2，移动通信模块150，无线通信模块160，调制解调处理器以及基带处理器等实现。

天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用，以提高天线的利用率。例如：可以将天线1复用为无线局域网的分集天线。在另外一些实施例中，天线可以和调谐开关结合使用。

移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器，开关，功率放大器，低噪声放大器(low noise amplifier，LNA)等。移动通信模块150可以由天线1接收电磁波，并对接收的电磁波进行滤波，放大等处理，传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大，经天线1转为电磁波辐射出去。

无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks，WLAN)(如无线保真(wireless fidelity，Wi-Fi)网络)，蓝牙(bluetooth，BT)，全球导航卫星系统(global navigation satellite system，GNSS)，调频(frequency modulation，FM)，近距离无线通信技术(near field communication，NFC)，红外技术(infrared，IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波，将电磁波信号调频以及滤波处理，将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号，对其进行调频，放大，经天线2转为电磁波辐射出去。

在一些实施例中，电子设备100的天线1和移动通信模块150耦合，天线2和无线通信模块160耦合，使得电子设备100可以通过无线通信技术与网络以及其他设备通信。

电子设备100可以通过音频模块170，扬声器170A，受话器170B，麦克风170C，耳机接口170D，以及应用处理器等实现音频功能。例如音乐播放，录音等。

音频模块170用于将数字音频信号转换成模拟音频信号输出，也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中，音频模块170可以设置于处理器110中，或将音频模块170的部分功能模块设置于处理器110中。

扬声器170A，也称“喇叭”，用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐，或收听免提通话。

受话器170B，也称“听筒”，用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时，可以通过将受话器170B靠近人耳接听语音。

麦克风170C，也称“话筒”，“传声器”，用于将声音信号转换为电信号。当拨打电话或发送语音信息时，用户可以通过人嘴靠近麦克风170C发声，将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中，电子设备100可以设置两个麦克风170C，除了监听语音信息，还可以实现降噪功能。在另一些实施例中，电子设备100还可以设置三个，四个或更多麦克风170C，实现采集声音信号，降噪，还可以识别声音来源，实现定向录音功能等。

耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130，也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform，OMTP)标准接口，美国蜂窝电信工业协会(cellular telecommunications industry association of the USA，CTIA)标准接口。

压力传感器180A用于感受压力信号，可以将压力信号转换成电信号。在一些实施例中，压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多，如电阻式压力传感器，电感式压力传感器，电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A，电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194，电子设备100根据压力传感器180A检测触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。

触摸传感器180K，也称“触控面板”。触摸传感器180K可以设置于显示屏194，由触摸传感器180K与显示屏194组成触摸屏，也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器，以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中，触摸传感器180K也可以设置于电子设备100的表面，与显示屏194所处的位置不同。

环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合，检测电子设备100是否在口袋里，以防误触。

按键190包括开机键，音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入，产生与电子设备100的用户设置以及功能控制有关的键信号输入。

马达191可以产生振动提示。马达191可以用于来电振动提示，也可以用于触摸振动反馈。

电子设备100通过GPU，显示屏194，以及应用处理器等实现显示功能。GPU为图像处理的微处理器，连接显示屏194和应用处理器。GPU用于执行数学和几何计算，用于图形渲染。处理器110可包括一个或多个GPU，其执行程序指令以生成或改变显示信息。

显示屏194用于显示图像，视频等。在一些实施例中，电子设备100可以包括1个或N个显示屏194，N为大于1的正整数。

摄像头193用于捕获静态图像或视频。在一些实施例中，电子设备100可以包括1个或N个摄像头193，N为大于1的正整数。

SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195，或从SIM卡接口195拔出，实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口，N为大于1的正整数。

本申请实施例并未特别限定一种环境光的检测方法的执行主体的具体结构，只要可以通过运行记录有本申请实施例的一种环境光的检测方法的代码，以根据本申请实施例提供的一种环境光的检测方法进行通信即可。例如，本申请实施例提供的一种环境光的检测方法的执行主体可以是电子设备中能够调用程序并执行程序的功能模块，或者为应用于电子设备中的通信装置，例如，芯片。

图2为本申请实施例提供的一种电子设备中显示屏和环境光传感器的正面位置关系图。该图示中，环境光传感器不为屏下环境光传感器。

如图2所示，环境光传感器在电子设备的显示屏上的投影位于电子设备的显示屏的上半部分。当用户手持电子设备时，位于电子设备上半部分的环境光传感器能够检测电子设备正面(显示屏在电子设备中的朝向)环境的光强，该光强用于调节电子设备的显示屏的亮度，这样就可以达到较好的视觉效果。例如，在暗环境中显示屏不会太亮导致刺眼，在亮环境中显示屏不会太暗导致看不清。

如图3所示，为电子设备中显示屏和环境光传感器的侧面位置关系图。电子设备的显示屏自上而下包括：玻璃盖板(透光)、显示模组和保护贴膜，其中，此处的上和下均用于表示电子设备的显示屏向上放置时的方位关系。由于环境光传感器需要采集电子设备的显示屏的上方的环境光，因此，可以将显示屏中的显示模组挖去一部分放置环境光传感器，相当于环境光传感器置于显示屏中的玻璃盖板的下方，和显示模组位于同一层。需要说明，环境光传感器的探测方向和显示屏在电子设备中的朝向一致。显然，这种环境光传感器的设置方式牺牲了一部分显示区域。在追求高屏占比时，这种环境光传感器的设置方式将不再适用。

如图4所示，为本申请实施例提供的另一种环境光传感器的设置方式。将环境光传感器从玻璃盖板的下方转移到显示模组的下方。例如，环境光传感器位于显示屏的显示模组的下方，显示模组一部分区域将显示像素的像素密度(Pixels Per Inch，PPI)调小(可以是缩小单个显示子像素的面积)，以让该部分区域的显示像素之间留有空隙；光线可以穿透该空隙而被该部分区域的屏下光传感器感知)。这种环境光传感器的设置方式不会牺牲显示屏的显示区域。然而，显示屏(例如，OLED屏)是自发光的显示屏，显示屏显示图像时，用户从显示屏上方可以看到图像，同样，位于显示屏下方的环境光传感器也能采集到的显示屏显示的图像对应的光。因此，环境光传感器采集到的环境光包括显示屏发出的光和外界真实的环境光。若要精确的获得外界真实的环境光，除了要获得环境光传感器采集的环境光，还需要获得显示屏发出的光。

通过图4可以理解，由于环境光传感器位于显示模组的下方，因此，环境光传感器的设置不会牺牲显示模组的显示区域。所以，环境光传感器在显示屏上的投影可以位于显示屏的正面任意区域，而并非局限于以下设置：环境光传感器在显示屏上的投影位于显示屏的正面顶部的位置。

无论环境光传感器位于显示模组下方的哪个区域，环境光传感器在显示屏上的投影面积相比于显示屏本身的面积要小的多。因此，并不是整个显示屏发出的光均会对环境光传感器采集的环境光造成干扰。而是显示屏中环境光传感器的感光区上方的显示区域发出的光以及环境光传感器的感光区周围一定范围的上方的显示区域发出的光才会对环境光传感器采集的环境光造成干扰。

作为示例，环境光传感器的感光区存在感光角度，环境光传感器可以接收到在感光角度内的光线，接收不到在感光角度外的光线。图5中位于环境光传感器感光区上方的A点发出的光(位于感光角度内)和位于环境光传感器感光区周围一定范围的上方的B点发出的光(位于感光角度内)均会对环境光传感器采集的环境光造成干扰。而图5中距离环境光传感器感光区较远的C点发出的光(位于感光角度外)则不会对环境光传感器采集的环境光造成干扰。为了便于描述，可以将显示屏中对环境光传感器采集的环境光造成干扰的显示区域记为目标区域。目标区域在显示屏中的位置由环境光传感器的感光区在显示模组下方的具体位置确定。作为示例，目标区域可以是以环境光传感器感光区的中心点为中心，边长为一定长度(例如，80微米、90微米、100微米)的正方形区域。当然，该目标区域还可以是通过测量获得的对环境光传感器采集的光造成干扰的其他形状的区域。

作为另一示例，图6为本申请实施例提供的电子设备的显示屏的正面示意图，如图6所示，电子设备包括外壳，电子设备的显示屏显示界面，环境光传感器位于显示屏中的显示模组的后方。目标区域的中心点和环境光传感器的中心点可以重合。当然，实际应用中，目标区域可以设置的相对较大一些，这样，即使目标区域的中心点和环境光传感器感光区的中心点不重合也不影响本申请实施例的实施。

如前所述，外界真实的环境光等于环境光传感器采集的环境光减去显示屏发出的光。而显示屏发出的光已经确定为目标区域发出的光。目标区域的发出的光是目标区域的显示内容产生的光。为了便于描述，可以将目标区域对应的图像记为目标图像，可以将目标图像对环境光传感器采集的环境光的干扰记为噪声。环境光传感器采集的环境光可以记为初始环境光，外界真实的环境光可以记为目标环境光。则目标环境光等于初始环境光减去目标图像对应的噪声。因此，若能够获得环境光传感器采集的初始环境光，能够获得目标图像对应的噪声，就可以得到目标环境光，从而使得电子设备能够基于目标环境光调节电子设备的显示屏的亮度。

下面将通过图7描述本申请实施例提供的环境光的检测方法对应的技术架构图。该图示中，仅示出了与本申请实施例相关的内容。

如图7所示，本申请实施例的实施需要依赖处理器中的：应用层、应用框架层、内核层和硬件层。

应用层存在各种应用，图7中示出了应用A，以用户启动应用A为例，在用户启动应用A之后，显示屏将显示应用A的界面。

具体的，应用A将应用A待显示的界面的显示参数(例如，待显示的界面的内存地址、颜色等)发送给显示引擎服务(display engine)。

应用框架层中的显示引擎服务将接收到的待显示的界面的显示参数发送给SurfaceFlinger。

应用框架层中的SurfaceFlinger负责控制界面(surface)的融合。作为示例，计算重叠的至少两个界面的重叠区域。这里的界面可能是状态栏、系统栏、应用本身(应用A待显示的界面)、壁纸、背景等呈现的界面。因此，SurfaceFlinger不仅可以获取到应用A待显示的界面的显示参数，还可以得到其他界面的显示参数。

应用框架层还存在HWC(Hardware composer HAL)，HWC为系统中进行界面合成和显示的模块，为SurfaceFlinger提供硬件支持。

SurfaceFlinger通过接口(例如，setLayerBuffer、setLayerColor、)将各个界面的显示参数(例如，内存地址、颜色等)发送给HWC进行界面融合。

通常，图像的合成(例如，电子设备显示图像时，需要将状态栏、系统栏、应用本身和壁纸背景合成)中，HWC通过HWC底层的硬件(例如，硬件合成器)根据各个界面的显示参数获得合成后的图像。

需要说明，在HWC通过底层的硬件获得合成后的图像后，SurfaceFlinger才会结束本次合成图像的任务。

应用框架层中的HWC将底层的硬件合成后的图像发送至内核层的显示驱动。

内核层的显示驱动将合成后的图像给到硬件层的显示子系统(displaysubsystem，DSS)。需要说明，显示子系统仅用于示例，一些芯片平台也可以为MDP(mobiledisplay processor)，本申请实施例对具体名字不做限定。

硬件层中的显示子系统可以对合成后的图像进行二次处理(例如，用于增强画质的HDR10处理等)，二次处理后就可以将二次处理后的图像送显。实际应用中，也可以不进行二次处理。以不进行二次处理为例，处理器硬件层的显示子系统将合成后的图像送到显示屏进行显示。

按照上述方式显示屏可以完成一次图像刷新显示。为了便于描述，可以将上述过程记为显示屏图像合成过程。

以电子设备播放视频为例，电子设备可以以一定的刷新率执行上述显示屏图像合成过程。例如，刷新率为60Hz，相当于每间隔16.7ms执行一次上述显示屏图像合成过程。

另一方面，环境光传感器可以周期性的(采样周期的时长可以不固定)采集初始环境光。采样周期内包括积分时间段和非积分时间段，积分时间段为环境光传感器真正采集初始环境光的时间，该积分时间段可以为固定的时长。作为示例，积分时间段可以为50ms。每个采样周期中的非积分时间段，环境光传感器可以处于休眠状态。

图7所示实施例中，位于内核层的环境光传感器驱动可以控制位于硬件层的环境光传感器周期性的采集初始环境光。环境光传感器采集的初始环境光上报给环境光传感器驱动，环境光传感器驱动将接收到的初始环境光发送到噪声算法库。

当然，也可以通过应用框架层的显示引擎服务周期性的向环境光传感器驱动发送采集指令，环境光传感器驱动接收到采集指令后，控制环境光传感器采集初始环境光。环境光传感器采集的初始环境光上报给环境光传感器驱动，环境光传感器驱动将接收到的初始环境光发送到噪声算法库。

如前所述，若能够获得环境光传感器采集的初始环境光，能够获得目标图像对应的噪声，就可以得到目标环境光。环境光传感器采集初始环境光的积分时长为50ms，显示屏刷新率为60Hz(刷新周期16.7ms)为例，则显示屏可能显示了3个显示屏图像，当然，也可能显示了1个显示屏图像或2个显示屏图像。在对目标环境光的精度要求不高的情况下，可以仅获取环境光传感器采集初始环境光期间显示屏显示的1个显示屏图像中目标区域的目标图像，计算该目标图像持续显示积分时长(例如，50ms)的情况下的噪声，就可以得到目标环境光。

当然，实际应用中，也可以获得环境光传感器采集初始环境光期间显示屏显示的多个显示屏图像中目标区域中的目标图像，计算多个目标图像分别持续显示50ms情况下的噪声，将多个噪声的平均值作为影响该初始环境光的噪声，从而得到目标环境光。或者，计算多个目标图像的像素信息的均值，根据多个目标图像的像素信息的均值计算该均值对应的图像持续显示50ms情况下的噪声，从而得到目标环境光。

下面将描述获取目标图像的过程。如图7所示，应用框架层还存在软件合成模块，该软件合成模块可以用于进行局部图像合成，以获得目标区域的目标图像。该软件合成模块可以通过GPU等获得目标图像。

如前所述的显示屏图像合成过程中，在HWC获得合成后的图像后，SurfaceFlinger才会结束该合成图像的任务。因此，在SurfaceFlinger基于各个界面的显示参数控制HWC执行完显示屏图像合成后，SurfaceFlinger还可以再次基于各个界面的显示参数，再通过软件合成模块合成目标区域的目标图像。由于采用同一套界面的显示参数，因此，理论上，在同一个刷新周期内SurfaceFlinger控制HWC合成的显示屏图像中的目标区域的目标图像和SurfaceFlinger控制软件合成模块合成的目标图像相同。实际应用中，由于执行合成过程不同，可能略有差异，然而，该差异通常在可接受的范围内。

作为一个示例，SurfaceFlinger将合成显示屏图像时采用的各个界面的显示参数发送给软件合成模块。软件合成模块合成显示屏图像。然后，从预设的存储空间获取预先设置的目标区域的位置坐标；基于预先设置的目标区域的位置坐标，对合成的显示屏图像进行局部区域裁切，从而得到目标图像。

作为另一示例，SurfaceFlinger也可以将合成显示屏图像时采用的各个界面的显示参数发送给软件合成模块。软件合成模块丢弃与目标区域不存在重合的界面，保留与目标区域存在重合的界面。然后，基于目标区域的位置坐标，将与目标区域存在重合的界面的显示参数进行局部合成，从而获得目标图像。

作为另一示例，SurfaceFlinger也可以从预设的存储空间获取目标区域的位置坐标，SurfaceFlinger基于该目标区域的位置坐标，将与该目标区域相关的显示参数发送给软件合成模块。软件合成模块基于接收到的与该目标区域相关的显示参数合成目标图像。

本申请实施例对SurfaceFlinger控制软件合成模块局部合成图像以获得目标图像的过程仅用于举例，并不对本申请造成任何限制。

在软件合成模块合成目标图像后，SurfaceFlinger结束当前局部图像合成任务。另外，软件合成模块可以将目标图像存储在内存中。软件合成模块将目标图像的存储地址发送给噪声算法库。

应用框架层的噪声算法库可以基于接收到的存储地址获取目标图像，计算获得该目标图像对应的噪声。

当然，实际应用中，软件合成模块也可以将目标图像的存储地址存储在内核层的内核节点，软件合成模块在将目标图像的存储地址成功存储在内核节点后，软件合成模块可以将目标图像在内核节点中的存储地址发送给应用框架层的噪声算法库。应用框架层的噪声算法库可以从内核节点获取目标图像的存储地址，然后基于目标图像的存储地址获取目标图像，从而得到该目标图像对应的噪声。

在接收到初始环境光和计算获得的目标图像对应的噪声之后，噪声算法库根据接收到的初始环境光和计算获得的目标图像对应的噪声得到目标环境光。

噪声算法库获得目标环境光后，噪声算法库可以将目标环境光存储在内核层的内核节点中。显示引擎服务可以监测内核节点中数据的变化。在监测到内核节点中数据变化后，可以从内核节点中获得目标环境光，从而基于目标环境光调节显示屏的亮度。

当然，噪声算法库获得目标环境光后，噪声算法库也可以基于目标环境光确定显示屏待调节的亮度值，将显示屏待调节的亮度值存储在内核节点中。显示引擎服务在监测到内核节点中数据变化后，可以从内核节点中获得待调节的亮度值，从而调节显示屏的亮度。

本申请实施例对显示引擎服务基于噪声算法库得到的目标环境光调节显示屏的亮度的方式不做限定。

通过上述示例可以理解，本申请实施例中的噪声算法库在根据初始环境光和目标图像计算获得目标环境光之前，至少包括三个过程：

(1)电子设备的显示屏刷新图像的过程。

(2)基于步骤(1)刷新图像时对应的各个界面的显示参数获得目标图像的过程。

(3)通过环境光传感器采集初始环境光的过程。

在执行上述三个过程后，噪声算法库才能够获得计算目标环境光所需的初始环境光和目标图像。

如前所述，在计算目标环境光时，初始环境光扣除的噪声为：环境光传感器采集该初始环境光期间，显示屏显示的显示屏图像对应的目标图像生成的噪声。

环境光传感器每一次采集的初始环境光时均可以得到积分开始时间(开始采集的时间)和积分结束时间(结束采集的时间)。也可以理解为噪声算法库接收到初始环境光时，一并接收到环境光传感器采集该初始环境光时的积分开始时间和积分结束时间。本申请实施例可以基于初始环境光时的积分开始时间和积分结束时间以及目标图像的时间戳确定该目标图像对应的噪声是否为该初始环境光需要扣除的噪声。

在描述如何确定需要扣除的目标图像对应的噪声之前，首先描述显示屏的刷新机制。

通常，系统会产生Vsync信号源，该Vsync信号源会分流出两个软件Vsync信号，这两个软件Vsync信号，一个被分发至上层应用，为APP Vsync信号，另一个被分发至SurfaceFlinger，为SF Vsync信号。系统产生Vsync信号源、上层应用监听到APP Vsync信号和SurfaceFlinger监听到SF Vsync信号基本上是时间对齐的(误差很小)。为便于描述，后续的一些实施例中以“Vsync信号”作为时间点进行描述。

在上层应用监听到APP Vsync信号的情况下，则上层应用向下层发送待刷新的界面的显示参数，直到发送至SurfaceFlinger。

在SurfaceFlinger监听到SF Vsync信号的情况下，则SurfaceFlinger基于存储的最新的界面的显示参数控制合成显示屏图像，并向下层传输显示屏图像，直到将显示屏图像存储在预设的缓存中。

在系统产生Vsync信号源后，显示子系统基于该Vsync信号源将缓存中存储的最新的显示屏图像进行刷新显示。

然而，从上层发出界面的显示参数至显示子系统刷新显示该界面的显示参数对应的显示屏图像，并非完全在一个刷新周期内完成的。

作为示例，可参见图8，系统产生第i个Vsync信号源，对应的产生第i个SF Vsync信号。SurfaceFlinger监听到第i个SF Vsync信号之后，控制HWC执行显示屏图像i合成；在显示屏图像i合成后，SurfaceFlinger控制软件合成模块执行目标图像i合成。当然，SurfaceFlinger控制HWC合成显示屏图像i后，HWC会向下层继续传输显示屏图像i。

系统产生第i+1个Vsync信号源，对应的产生第i+1个SF Vsync信号，显示子系统将当前缓存的最新的显示屏图像i显示。SurfaceFlinger在监听到第i+1个SF Vsync信号之后，继续控制HWC合成显示屏图像i+1，在显示屏图像i+1合成后，SurfaceFlinger控制软件合成模块执行目标图像i+1合成。

系统产生第i+2个Vsync信号源，对应的产生第i+2个SF Vsync信号，显示子系统将当前缓存的最新的显示屏图像i+1显示。SurfaceFlinger在监听到第i+2个SF Vsync信号之后，继续控制HWC合成显示屏图像i+2，在显示屏图像i+2合成后，SurfaceFlinger控制软件合成模块执行目标图像i+2合成。

系统产生第i+3个Vsync信号源后，显示子系统将当前缓存的最新的显示屏图像i+2显示……。

通过图8所示示例可以理解，第i个Vsync信号至第i+1个Vsync信号期间SurfaceFlinger控制获得的目标图像i对应的显示屏图像i在显示屏上进行显示的时间为：第i+1个Vsync信号至第i+2个Vsync信号期间。因此，SurfaceFlinger控制软件合成模块合成的目标图像的时间戳可以是预估的下一次Vsync信号到来的时间。噪声算法库接收到目标图像时，也一并接收到了该目标图像的时间戳，该时间戳为该目标图像对应的显示屏图像在显示屏上进行显示时的起始时间。

为了降低噪声算法库的计算量，可以设置环境光传感器的每个采集周期的积分开始时间和Vsync信号是对齐的(大致对齐，允许存在一定误差)。作为示例，例如，显示引擎服务也可以监听SF Vsync信号，显示引擎服务每监听到预设个数(例如，20个、30个)的SFVsync信号，向环境光传感器驱动发送采集指令，环境光传感器驱动控制环境光传感器采集初始环境光。

按照上述方式，噪声算法库可以基于初始环境光的积分开始时间和积分结束时间，确定接收到的目标图像中时间戳在该积分开始时间和积分结束时间之间的目标图像。然后基于初始环境光和对应的目标图像计算获得目标环境光。

当然，上述确定初始环境光和目标图像的对应关系的方式仅用于举例，并不对本申请造成任何限制，实际应用中，还可以通过其他方式确定初始环境光和目标图像的对应关系。例如，目标图像的时间戳也可以为SurfaceFlinger开始控制执行目标图像的合成任务的时间，在确定初始环境光和目标图像的对应关系时，根据目标图像的时间戳表示的时间确定该目标图像对应的显示屏图像在显示屏上显示的时间，然后再基于初始环境光的积分开始时间和积分结束时间以及该目标图像对应的显示屏图像在显示屏上显示的时间确定该目标图像对应的噪声是否为影响该初始环境光的噪声。无论采用何种方式，目的是确定初始环境光的采集期间显示屏显示的图像对应的目标图像。

本申请实施例以上述显示机制描述说明“初始环境光的采集期间显示屏显示的图像对应的目标图像”。实际应用中，HWC合成显示屏图像时，也可以是LineBuffer方式，即边合成图像边送显图像。例如，HWC先合成行图像1(可以是显示屏图像中的一行或多行像素点对应的图像)；HWC再合成行图像2，HWC合成行图像2的同时行图像1被送显。HWC再合成行图像3，HWC合成行图像3的同时行图像2被送显……；HWC合成显示屏图像中的最后一行像素点对应图像后，整个显示屏图像几乎(时间差很小)也被送显到显示屏显示。若采用该方式，则显示屏图像在显示屏上进行显示的时间几乎和SurfaceFlinger开始控制执行目标图像的合成任务的时间相同。目标图像的时间戳可以为SurfaceFlinger开始控制执行目标图像的合成任务的时间。则显示屏图像在显示屏上进行显示的时间就为目标图像的时间戳。按照这种方式，噪声算法库也可以确定初始环境光的采集期间显示屏显示的图像对应的目标图像。

在确定初始环境光的采集期间显示屏显示的图像对应的目标图像后，噪声算法库就可以基于初始环境光和目标图像计算获得目标环境光。

作为一个示例，若初始环境光的积分开始时间和积分结束时间之间存在一个目标图像；则噪声算法库基于该目标图像对应的RGB值(和该初始环境光采集期间显示屏的亮度)计算获得相应的lux值。然后，基于预先确定的积分时长50ms，将该lux值转换为噪声值。最后基于初始环境光和该目标图像对应的噪声值获得目标环境光。

若初始环境光的积分开始时间和积分结束时间之间存在多个目标图像，则噪声算法库可以基于每个目标图像对应的RGB值(和该初始环境光采集期间显示屏的亮度)计算获得每个目标图像对应的lux值。然后，噪声算法库计算多个目标图像的lux值的数据特征值(例如，均值，众数等)。再基于预先确定的积分时长50ms，将数据特征值转化为噪声值。最后基于初始环境光和噪声值获得目标环境光。

在基于目标图像对应的RGB值(和该初始环境光采集期间显示屏的亮度)计算获得相应的lux值时，可以首先计算每个像素点的归一化亮度，然后，基于每个像素点的归一化亮度获得整个目标图像的lux值。

在实际应用中，可以基于初始环境光对应的积分时长，将目标图像的lux值转换为相应的噪声值。例如，积分时长越长，相同的lux值对应的噪声越大。当然，实际应用中，可以预先设置lux值和噪声的对应关系。

当然，实际应用中，还可以通过其他方式计算获得目标图像对应的噪声。本申请实施例在此不再一一举例。

如前所述，可能在每个刷新周期内(或者在环境光传感器采集初始环境光的积分期间对应的刷新周期内)，SurfaceFinger均需要控制执行一次显示屏图像合成任务，在显示屏图像合成任务结束后，再控制执行一次目标图像合成任务。若显示屏以120Hz的频率刷新图像，则SurfaceFinger每间隔8.33ms执行一次显示屏图像合成任务，执行一次目标图像合成任务。通常，SurfaceFinger执行一次显示屏图像合成的时间大约3ms左右，SurfaceFlinger执行一次目标图像合成的时间略小于3ms。

理论上SurfaceFlinger每执行一次显示屏图像合成，有足够的时间继续执行一次目标图像的合成。并且本次执行的目标图像的合成也不会影响下一次执行显示屏图像合成。

然而，实际应用中，处理器的能力有限，SurfaceFlinger在执行图像合成任务时很可能出现某一次图像合成任务的处理时间延长。这就会造成图9所示的刷新图像时丢帧的现象，使得显示屏的流畅度降低。

例如，图9中，在第i个Vsync信号到来后，SurfaceFlinger控制合成显示屏图像i的时间延长，控制合成目标图像i的时间也延长。在第i+1个Vsync信号到来时，SurfaceFlinger仍然在控制目标图像i合成，导致SurfaceFlinger未在第i+2个Vsync信号到来时执行显示屏图像i+1合成任务，导致丢失一帧显示屏图像i+1。

显示子系统在第i+1个Vsync信号至第i+2个Vsync信号期间，显示SurfaceFlinger在第i个Vsync信号至第i+1个Vsync信号期间合成的显示屏图像i。

理论上，参见图8，显示子系统在第i+2个Vsync信号至第i+3个Vsync信号期间，显示SurfaceFlinger在第i+1个Vsync信号至第i+2个Vsync信号期间合成的显示屏图像i+1。

然而，由于上述图9所示的原因，导致SurfaceFlinger在第i+1个Vsync信号至第i+2个Vsync信号期间未合成的显示屏图像i+1。因此，显示子系统在第i+2个Vsync信号至第i+3个Vsync信号期间，显示SurfaceFlinger在第i个Vsync信号至第i+1个Vsync信号期间合成的显示屏图像i。

显示子系统在第i+3个Vsync信号至第i+4个Vsync信号期间，显示SurfaceFlinger在第i+2个Vsync信号至第i+2个Vsync信号期间合成的显示屏图像i+2。

因此，丢失了显示屏图像i+1，导致丢帧现象。从用户的视角，显示屏显示图像出现卡顿现象。

为解决上述问题，SurfaceFlinger可以在接收到Vsync信号后，控制合成显示屏图像。然而，SurfaceFlinger是否在本次Vsync信号周期内(本次Vsync信号到来后至下次Vsync信号到来前)合成目标图像则由显示引擎服务根据当前时间和上一次检测环境光的时间的差值以及SurfaceFlinger的负载情况决定。

作为示例，显示引擎服务可以在预设的时间范围内(该时间范围与当前时间和上一次检测环境光的时间的差值相关)根据SurfaceFlinger的负载情况，择机发送局部合成请求(记为第一请求)给SurfaceFlinger。SurfaceFlinger接收到局部合成请求的情况下，才会在本次Vsync信号对应的刷新周期合成目标图像。

当然，显示引擎服务向SurfaceFlinger发送局部合成请求，还需要向环境光传感器驱动发送采集指令，以指示环境光传感器驱动控制环境光传感器采集初始环境光。这样，相当于在环境光传感器采集初始环境光期间，合成了一个目标图像。噪声算法库可以基于初始环境光以及这一个目标图像对应的噪声计算获得目标环境光。

为更清晰理解“显示引擎服务择机发送局部合成请求给SurfaceFlinger和向环境光传感器驱动发送采集指令”对应的技术方案，参照图10。

图10为本申请实施例提供的环境光的检测方法的时序图。

步骤A1，应用层的应用A将待显示界面的显示参数发送给显示引擎服务。

步骤A2，显示引擎服务将该显示参数发送给SurfaceFlinger(图10中缩写为SF模块)存储。

步骤A3，SurfaceFlinger监听到Vsync信号(与刷新周期相关)，将当前存储的存储时间最晚的各个界面(应用A的待显示的界面、状态栏、壁纸等)的显示参数发送给HWC。

需要说明，SurfaceFlinger接收到各个界面的显示参数后，缓存各个界面的显示参数。在接收到Vsync信号后，将缓存的存储时间最晚的各个界面的显示参数发送给HWC，以合成显示屏图像。

步骤A4，HWC控制底层的硬件合成器合成显示屏图像。

步骤A5，HWC将合成的显示屏图像发送给显示驱动。

步骤A6，显示驱动将显示屏图像发送给显示子系统。

步骤A7，显示子系统在下一个Vsync信号对应的刷新周期显示该显示屏图像。

步骤A1至步骤A7为上述实施例中的步骤(1)电子设备的显示屏刷新图像的过程，该过程可以以显示屏的刷新率执行。

步骤B1，显示引擎服务监听到Vsync信号，判断是否需要SurfaceFlinger合成局部图像和采集初始环境光。

该判断过程具体可参照后续实施例中的描述。

步骤B21，在确定当前刷新周期需要进行局部图像合成时，显示引擎服务向SurfaceFlinger发送局部合成请求。

步骤B31，SurfaceFlinger接收到局部合成请求后，向软件合成模块发送显示参数。

步骤B41，软件合成模块合成目标区域的目标图像，并存储。

步骤B51，软件合成模块将目标图像的存储地址发送给噪声算法库。

步骤B1、步骤B21、步骤B31、步骤B41和步骤B51为上述实施例中的步骤(2)基于步骤(1)刷新图像时对应的各个界面的显示参数获得目标图像的过程。步骤B1也以显示屏的刷新率触发执行。然而，是否需要SurfaceFlinger控制获得目标图像取决于步骤B1的判断结果。

在本申请实施例的实施过程中，在步骤B1判断需要SurfaceFlinger进行局部图像合成时，还需要执行步骤B22。

步骤B22，显示引擎服务向环境光传感器驱动发送采集环境光的采集指令。

其中，步骤B21和步骤B22的先后顺序不做限定。

步骤B32，环境光传感器驱动向环境光传感器发送采集指令，环境光传感器开始采集环境光。

步骤B42，环境光传感器采集获得初始环境光之后，环境光传感器将初始环境光(以及积分开始时刻和积分结束时刻)上报给环境光传感器驱动。

步骤B52，环境光传感器驱动将初始环境光(以及积分开始时刻和积分结束时刻)发送给噪声算法库。

步骤B1、步骤B22、步骤B32、步骤B42和步骤B52为上述实施例中的步骤(3)通过环境光传感器采集初始环境光的过程。然而，是否需要环境光传感器采集初始环境光取决于步骤B1的判断结果。

通过上述实施例可以理解，步骤B1之后，要么控制环境光传感器采集一次初始环境光，也控制SurfaceFlinger控制住合成一次目标图像。要么既不需要环境光传感器采集初始环境光，也不需要SurfaceFlinger控制合成目标图像。所以，一个初始环境光对应一个目标图像。噪声算法库从初始环境光扣除该初始环境光的积分期间的目标图形的噪声就可以计算获得目标环境光。

通常，环境光传感器采集初始环境光时的积分时间大于显示屏的刷新周期。例如，环境光传感器的积分时长可以为50ms(60Hz刷新率为例，相当于3个刷新周期)，休眠时长可以为300ms。即环境光传感器每次采集初始环境光时，均需要采集50ms。显示屏的刷新率可以为60Hz，即每经过1000ms/60≈16.7ms刷新一次图像。而每次刷新图像时，SurfaceFlinger控制合成显示屏图像需要大约3ms。SurfaceFlinger控制合成目标图像略小于3ms。因此，噪声算法库通常先接收到目标图像的存储地址，再接收到初始环境光。本申请实施例中，可以设置噪声算法库接收到目标图像的存储地址后，就可以基于目标图像计算获得该目标图像对应的噪声，并存储该噪声。噪声算法库在接收到初始环境光后，噪声算法库将接收到的初始环境光减去存储的时间戳最晚的噪声从而得到目标环境光。

在图10所示的时序图中，显示引擎服务通过步骤B1择机向SurfaceFlinger发送局部合成请求和向环境光传感器驱动发送采集指令。从而在不符合环境光的采集时间、或者在SurfaceFlinger负载较大时，不再进行环境光传感器的采集，同理，也不再需要进行目标图像的合成；从而降低SurfaceFlinger的负载，避免显示屏显示图像时丢帧、卡顿现象。

通过图10还可以理解，在确定需要采集初始环境光和目标图像时，SurfaceFlinger可能需要控制执行一次显示屏图像合成，还需要控制执行一次目标图像合成，功耗较大。因此，在实际应用中，可以设置采集初始环境光的间隔时间大于阈值A，避免间隔太小时功耗过大的问题。另外，若采集初始环境光的间隔时间太长，则会导致显示屏的亮度不能及时随环境光强变化调节，用户视觉体验差，所以还需要设置初始环境光的间隔时间不大于另一阈值B(该阈值B大于阈值A)。

其中，阈值A和阈值B的具体数值可以基于实际情况设置。作为示例，阈值A可以为350ms，阈值B可以为800ms等。即采集初始环境光的间隔时间不是固定的，可以在350ms和800ms之间SurfaceFlinger的负载较低时，显示引擎服务向SurfaceFlinger发送局部合成请求和向环境光传感器驱动发送采集指令，以获得目标环境光。从而使得电子设备能够基于目标环境光调节显示屏的亮度。

然而，350ms和800ms之间SurfaceFlinger的负载均较高时，就需要在大于800ms之后的第一个Vsync信号对应的刷新周期进行环境光传感器的采集和目标图像的合成。

所以实际应用中，某次采集周期可能会略大于阈值B。但是采集周期通常不大于阈值B加上一个刷新周期。

下面将通过图11所示流程图描述显示引擎服务如何择机向SurfaceFlinger发送局部合成请求和向环境光传感器驱动发送采集指令。

步骤D1，显示引擎服务以刷新周期计算当前时间与上一次采集初始环境光的时间的差值(可以记为第一差值)。

本申请实施例中，刷新周期与显示屏的刷新率相关，在显示屏的刷新率为60Hz的情况下，每个刷新周期为1000ms/60≈16.7ms。在显示屏的刷新率为120Hz的情况下，每个刷新周期为1000ms/120≈8.3ms。即显示引擎服务每个刷新周期都执行一次步骤D1。

如前所述，SurfaceFlinger需要监听Vsync信号，同样，显示引擎服务也需要监听Vsync信号，显示引擎服务在监听到Vsync信号(该Vsync信号记为第一信号)后，执行步骤D1。

上一次采集初始环境光(可以记为第一值)的时间(可以记为第一时间)可以为环境光传感器真正开始采集初始环境光的时间，例如，显示引擎服务将最后一次接收到的环境光传感器驱动上报的初始环境光携带的积分开始时间作为上一次采集初始环境光的时间。

上一次采集初始环境光的时间也可以为显示引擎服务上一次向环境光传感器驱动发送采集指令的时间。

当然，由于环境光传感器采集初始环境光的周期可以是某个范围内的值。所以，上一次采集初始环境光的时间还可以是在显示引擎服务上一次向环境光传感器驱动发送采集指令的时间至环境光传感器真正开始采集初始环境光的时间之间的任意时间，本申请实施例对此不做限定。

步骤D2，显示引擎服务查看该差值是否大于阈值A(可以记为第一阈值)。

若该差值不大于阈值A，则表示距离上一次采集初始环境光的时间还较短，本刷新周期内无需采集初始环境光，也无需合成目标图像，本刷新周期结束。

若该差值大于阈值A，则表示距离上一次采集初始环境光的时间适当，本刷新周期内可以采集初始环境光，同时也可以合成目标图像。

步骤D3，显示引擎服务查看SurfaceFlinger(图11中缩写为SF)在当前刷新周期内(监测到最新的Vsync信号(记为第一信号)之后至监测到下次Vsync信号(可以记为第二信号)之前)是否执行合成显示屏图像的任务。该步骤中的显示屏图像可以记为第二图像。

若应用界面在刷新，例如，电子设备的显示屏在播放视频期间，应用也以刷新周期向下传输显示参数，SurfaceFlinger在监听到Vsync信号后，若上一个Vsync信号至当前Vsync信号期间，接收到新的显示参数，则SurfaceFlinger根据上一个Vsync信号(可以记为第三信号)至当前Vsync信号期间接收到的显示参数(该显示参数可以记为第一信息)控制HWC合成显示屏图像。

若应用界面不再刷新，例如，电子设备的显示屏停留在某个界面，应用不再向下传输显示参数，SurfaceFlinger在接收到Vsync信号后，若上一个Vsync信号至当前Vsync信号期间，未接收到新的显示参数，则SurfaceFlinger不再向HWC传输显示参数，即不再执行显示屏图像的合成任务。

SurfaceFlinger在确定需要执行显示屏图像合成任务时，会将相应的标记位置为预设的值，例如，SurfaceFlinger在接收到Vsync信号后，确定在当前Vsync信号周期内(当前Vsync信号至下一个Vsync信号期间)需要执行显示屏图像合成任务，则将该标记位置“1”。SurfaceFlinger在接收到Vsync信号后，确定在当前Vsync信号周期内不需要执行显示屏图像合成任务，则将该标记位置“0”。该示例仅用于举例，并不对本申请造成限制。

显示引擎服务基于该标记位查看SurfaceFlinger在当前Vsync信号周期内是否执行合成显示屏图像的任务。

若当前刷新周期不需要合成显示屏图像，则表示SurfaceFlinger在当前刷新周期的负载较小，而此时距离上次采集初始环境光的时间的差值已经大于了阈值A，所以，当前刷新周期可以执行采集初始环境光和目标图像的合成，则进入步骤D8。

需要说明，此时合成目标图像的界面的显示参数为最近一次合成显示屏图像时的界面的显示参数。SurfaceFlinger最近一次控制合成显示屏图像可能是上个刷新周期，还可能是上上个刷新周期，甚至是更早的刷新周期。

若当前刷新周期需要合成显示屏图像，则需要进一步查看此时与上次采集初始环境光的时间的差值是否已经大于阈值B。

步骤D4，显示引擎服务查看步骤D1获得的差值是否大于阈值B(可以记为第二阈值)。

若已经大于阈值B，则表示太长时间没有进行环境光检测了，则不需要考虑SurfaceFlinger的负载情况，进行步骤D8，以得到真实的环境光，从而调节显示屏的亮度。

需要说明，若由步骤D4进入步骤D8，则SurfaceFlinger需要先控制合成显示屏图像，再控制合成目标图像，此时合成目标图像的界面的显示参数为本次刷新周期合成显示屏图像时的界面的显示参数。

若不大于阈值B，则表示时间还未久到必须进行环境光检测。即即使当前刷新周期不采集初始环境光和不合成目标图像，在阈值B对应的时间之前，还有机会遇到SurfaceFlinger负载小的情况。因此，需要进一步判断当前刷新周期SurfaceFlinger的负载，以根据SurfaceFlinger的负载情况确定当前刷新周期是否需要触发执行环境光检测和触发执行目标图像的合成。

图11中的步骤D5至步骤D7为显示引擎服务判断SurfaceFlinger的负载情况的示例。即在当前刷新周期需要合成显示屏图像的情况下，在下个Vsync信号到来之前，是否有足够的时间执行目标图像的合成。

若SurfaceFlinger负载较小有能力(或有足够剩余时间)完成目标图像的合成，则在当前刷新周期执行步骤D8；若在当前刷新周期SurfaceFlinger的负载大没有能力完成目标图像的合成，则在当前刷新周期不执行步骤D8，而是可以在后续刷新周期(大于阈值B对应的时间之前，SurfaceFlinger的负载小的刷新周期)再执行步骤D8。

步骤D5，显示引擎服务检查SurfaceFlinger合成当前Vsync信号对应的显示屏图像的完成时间。

由于显示引擎服务和SurfaceFlinger监听的同一Vsync信号。而显示引擎服务执行步骤D1至步骤D4的时间较短(可能小于1ms)，SurfaceFlinger执行显示屏图像合成通常为3ms左右。所以，显示引擎服务执行完步骤D4之后，通常SurfaceFlinger还未完成显示屏图像的合成任务。因此，显示引擎服务可以等待SurfaceFlinger结束显示屏图像合成任务。通常，SurfaceFlinger结束显示屏图像合成任务后，会向显示引擎服务返回信息(可以记为第一响应)，该信息用于表示SurfaceFlinger已经完成显示屏图像合成任务。

步骤D6，显示引擎服务基于接收到该信息的时间(可以记为第一时间)计算当前刷新周期的剩余可用时长(可以记为第三时间)。

参见图12所示，显示引擎服务接收到该信息(用于表示SurfaceFlinger完成显示屏图像合成任务的信息)的时间为t1。

显示引擎服务可以基于本次Vsync信号的时间(t0)预估下一次Vsync信号的时间(t0+T1)。其中，T1为Vsync信号的间隔周期。显示引擎服务计算(t0+T1)-t1的值可以得到剩余可用时长。下一次Vsync信号的时间可以记为第二时间。

步骤D7，剩余可用时长是否大于合成时长阈值(可以记为第三阈值)。

本申请实施例中，该合成时长阈值的设置用于确定在下个Vsync信号到来之前，SurfaceFlinger是否有足够时间完成目标图像的合成。

显示引擎服务可以获取SurfaceFlinger在本次之前预设数量的目标图像的历史合成时长。显示引擎服务基于第二预设数量的目标图像的历史合成时长(记为第二历史时长)得到历史合成均值和方差。基于历史合成均值和方差得到合成时长阈值(例如，均值+1倍方差，均值+2倍方差，均值+3倍方差等)，该合成时长阈值为预估的SurfaceFlinger本次合成目标图像的时长)。若当前剩余时长大于合成时长阈值，表示SurfaceFlinger有足够时间完成目标图像的合成。若当前剩余时长不大于合成时长阈值，表示SurfaceFlinger可能没有足够时间完成目标图像的合成。实际应用中，可以将上述第二预设数量的目标图像的合成时长的任一数据特征值作为第三阈值，也可以将其他数据特征值作为第三阈值。

实际应用中，还可以基于本次合成目标图像所需要的界面数量等信息预估SurfaceFlinger本次合成目标图像的时长，该时长作为该步骤的合成时长阈值。

当然，合成时长阈值还可以是预先设置的固定的值，本申请实施例对合成时长阈值的确定方式不做限定。

步骤D8，在当前剩余时长大于合成时长阈值的情况下，表示SurfaceFlinger有足够时间完成目标图像的合成，则显示引擎服务向SurfaceFlinger发送局部合成请求(可以记为第一请求)，该局部合成请求获得的目标图像记为第一图像，显示引擎服务向环境光传感器驱动发送采集指令。该采集指令获得的初始环境光记为第二值。第一图像对应的噪声记为第一噪声。

后续获得目标图像的步骤具体可参照图10所示实施例中的步骤B21至步骤B51。需要说明，SurfaceFlinger在控制合成显示屏图像后，才能控制合成目标图像。SurfaceFlinger控制合成目标图像的显示参数为SurfaceFlinger控制合成当前显示屏图像时对应的显示参数。

后续获得初始环境光的步骤具体可参照图10所示实施例中的步骤B22至步骤B52。

在步骤D8之后，噪声算法库按照图10所示实施例的描述可以根据获得的目标图像和初始环境光计算获得目标环境光(可以记为第三值)。

在实际应用中，软件合成模块在获得目标图像后，软件合成模块还可以执行步骤D9。

步骤D9，软件合成模块查看本次获得的目标图像和上次获得的目标图像是否相同。

若不同，则软件合成模块执行步骤D10存储该目标图像，并将该目标图像的存储地址发送给噪声算法库。噪声算法库基于接收到的存储地址获取目标图像，从而得到目标图像对应的噪声。

步骤D11，噪声算法库接收到初始环境光后，基于本次接收到的初始环境光和存储的时间戳最晚的目标图像(本次获得的目标图像)对应的噪声计算获得目标环境光。

若相同，则软件合成模块不再存储本次获得的目标图像。相应的，软件合成模块也不再发送本次获得的目标图像对应的存储地址(不存在存储地址)给噪声算法库。噪声算法库也不会接收到该目标图像的存储地址。

步骤D11，噪声算法库接收到初始环境光后，基于本次接收到的初始环境光和存储的时间戳最晚的目标图像(之前最后一次存储的目标图像)对应的噪声计算获得目标环境光。

步骤D12，噪声算法库查看本次获得的目标环境光和上次调节显示屏亮度值时对应的目标环境光的差值是否大于亮度阈值。

在本次获得的目标环境光和上次调节显示屏亮度值时对应的目标环境光的差值大于亮度阈值的情况下，表示电子设备距离上一次调节显示屏的亮度时所在环境的光强变化较大，需要显示引擎服务执行步骤D13，以基于本次获得的目标环境光调节显示屏的亮度。

在本次获得的目标环境光和上次调节显示屏亮度值对应的目标环境光的差值不大于亮度阈值的情况下，表示电子设备距离上一次调节显示屏的亮度时所在环境的光强变化较小，不需要显示引擎服务执行步骤D13基于本次获得的目标环境光调节显示屏的亮度的步骤，则结束。

参照图13，为本申请实施例提供的另一种显示引擎服务择机向SurfaceFlinger发送局部合成请求和向环境光传感器驱动发送采集指令的流程示意图。

图13和图11所示实施例的区别在于：

在图11所示实施例中，显示引擎服务执行步骤D4后，执行步骤D5至步骤D7确定SurfaceFlinger在当前刷新周期是否有足够时间执行目标图像合成任务时，显示引擎服务在SurfaceFlinger完成显示屏图像合成任务之后，基于SurfaceFlinger完成显示屏图像合成任务的时间和刷新周期得到剩余可用时长。

图13所示实施例中，显示引擎服务执行步骤D4后，执行步骤D5至步骤D7确定SurfaceFlinger在当前刷新周期是否有足够时间执行目标图像合成任务时，显示引擎服务在SurfaceFlinger完成显示屏图像合成任务之前，可以执行步骤D5’，预估SurfaceFlinger完成显示屏图像合成任务的时长T2(可以记为第一时长)。然后执行步骤D6’，基于预估的显示屏图像合成任务的时长和刷新周期T1得到剩余可用时间T3(可以记为第二时长)。

参照图14所示，显示引擎服务计算显示屏图像的历史合成时长；显示引擎服务将历史合成时长作为预估的SurfaceFlinger完成显示屏图像合成任务的时长T2。计算刷新周期T1和T2的差值得到剩余可用时长T3。比较剩余可用时长T3和合成时长阈值(预估的SurfaceFlinger本次合成目标图像的时长)。

具体实现时，显示引擎服务可以基于SurfaceFlinger在合成本次显示屏图像之前的第一预设数量(例如，20个)的显示屏图像的合成时长(记为第一历史时长)的均值。将该均值作为历史合成时长。

当然，也可以计算预设数量(例如，20个)的显示屏图像的合成时长的方差，在均值的基础上加上1个方差、2个方差或3个方差等作为预估的SurfaceFlinger完成显示屏图像合成任务的时长T2。实际应用中，可以将上述第一预设数量的显示屏图像的合成时长的任一数据特征值作为第一时长，也可以将其他数据特征值作为第一时长。

实际应用中，显示引擎服务还可以基于本次合成显示屏图像的界面的数量等其他信息预估本次合成显示屏图像的时长T2。显示引擎服务计算刷新周期T1和显示屏图像的预估合成时长T2得到剩余可用时长T3。比较剩余可用时长T3和合成时长阈值(预估的SurfaceFlinger本次合成目标图像的时长)。

在实际应用中，确定SurfaceFlinger完成显示屏图像合成任务后至下次Vsync信号到来之前是否有足够时间控制完成目标图像的合成的计算方式还可以为图12或图14以外的其他计算方式，例如，可以预估下次Vsync信号到来的时间，然后，用下次Vsync信号到来的时间减去合成时长阈值得到检测时间点，在该检测时间点检查SurfaceFlinger是否完成显示屏图像合成任务，若已完成，则表示下次Vsync信号到来之前有足够时间完成目标图像合成任务，若未完成，则下次Vsync信号到来之前没有足够时间完成目标图像合成任务。当然，本申请实施例对具体实现方式不做限制。

在本申请实施例中，电子设备每个刷新周期(以60Hz为例，刷新周期为16.7ms)执行一次步骤D1。然而，最少经过350ms，最多经过816.7ms(800ms+1个刷新周期16.7ms)执行一次图11或图13所示实施例的步骤D8请求合成目标图像和请求采集初始环境光。

若以图10所示时序图且刷新周期为120Hz为例，相当于每间隔8.3ms，电子设备执行一次步骤A1至步骤A7。最少经过350ms，最多经过808.3ms(800ms+1个刷新周期8.3ms)，电子设备执行一次步骤B21至步骤B51、步骤B22至步骤B52和步骤B6。

对于SurfaceFlinger而言，最少经过350ms，最多经过808.3ms(800ms+1个刷新周期8.3ms)，会在其中一个刷新周期既执行一次显示屏图像合成，又在显示屏图像合成完成后执行一次目标图像合成。并且，在执行目标图像合成时，基本确定SurfaceFlinger在下次Vsync信号到来之前，有足够时间完成目标图像合成任务。所以，避免了丢帧的现象。

通过图11和图13所示实施例还可以理解，显示引擎服务根据以下情况判断是否在当前刷新周期采集初始环境光和合成目标图像：

情况1，步骤D1获得的差值(当前时间与上一次采集初始环境光的时间的差值)大于阈值B，则执行步骤D8以获得初始环境光和目标图像。

情况2，步骤D1获得的差值(当前时间与上一次采集初始环境光的时间的差值)不大于阈值A，则本次刷新周期不执行步骤D8以及后续的步骤。

情况3，步骤D1获得的差值(当前时间与上一次采集初始环境光的时间的差值)大于阈值A、且不大于阈值B；若SurfaceFlinger在本次刷新周期不执行显示屏图像合成任务，则执行步骤D8以获得初始环境光和目标图像。

情况4，步骤D1获得的差值(当前时间与上一次采集初始环境光的时间的差值)大于阈值A、且不大于阈值B；若SurfaceFlinger在本次刷新周期执行显示屏图像合成任务，在SurfaceFlinger执行完显示屏图像合成任务后还有足够时间执行目标图像合成任务，则执行步骤D8以获得初始环境光和目标图像。

情况5，步骤D1获得的差值(当前时间与上一次采集初始环境光的时间的差值)大于阈值A、且不大于阈值B；若SurfaceFlinger在本次刷新周期执行显示屏图像合成任务，在SurfaceFlinger执行完显示屏图像合成任务后没有足够时间执行目标图像合成任务，则本次刷新周期不执行步骤D8以及后续的步骤。

在实际应用中，还可以采用图11或图13以外其他的判断逻辑，以确定当前刷新周期是否执行步骤D8以及后续的步骤。

本申请实施例中，可以将满足向所述SurfaceFlinger发送局部合成请求和向所述电子设备的环境光传感器驱动发送采集指令的时间的条件记为第一预设条件。作为一个示例，在大于阈值A时，若不考虑丢帧现象，也可以向所述SurfaceFlinger发送局部合成请求和向所述电子设备的环境光传感器驱动发送采集指令。

作为另一示例，参照图15所示，各个步骤的描述可以参照图11所示实施例中的描述，与图11的区别在于：D2、D3和D4的先后判断逻辑。

图15所示实施例中，首先执行步骤D2，判断差值与阈值B的关系，在差值大于阈值B的情况下，相当于上述情况1，则执行步骤D8以获得初始环境光和目标图像。

然后，在步骤D2执行结果为否时，执行步骤D4，判断差值与阈值A的关系，若差值不大于阈值A的情况下，相当于上述情况2，本次刷新周期不执行步骤D8以及后续的步骤。

然后，在步骤D4执行结果为是时，执行步骤D3，判断SurfaceFlinger在本次刷新周期是否执行显示屏图像合成任务，若不执行显示屏图像合成任务，相当于上述情况3，则执行步骤D8以获得初始环境光和目标图像。

然后，在步骤D3执行结果为是时，执行步骤D5至步骤D7，若执行结果为是，SurfaceFlinger执行完显示屏图像合成任务后还有足够时间执行目标图像合成任务，则相当于情况4，执行步骤D8以获得初始环境光和目标图像；若执行结果为否，SurfaceFlinger执行完显示屏图像合成任务后没有足够时间执行目标图像合成任务，则相当于情况5，本次刷新周期不再执行步骤D8以及后续的步骤。

步骤D2、步骤D3和步骤D4的其他不同顺序的判断逻辑不再一一举例。

通过上述示例可以理解，SurfaceFlinger在当前Vsync信号周期合成显示屏图像的情况下，SurfaceFlinger向软件合成模块发送的用于合成目标图像的信息(记为第二信息)为：合成当前显示屏图像的显示参数中的全部参数或部分参数。

SurfaceFlinger在当前Vsync信号周期不合成显示屏图像的情况下，SurfaceFlinger向软件合成模块发送的用于合成目标图像的信息(记为第三信息)为：合成上一显示屏图像的显示参数中的全部参数(记为第四信息)或部分参数。

应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本申请实施例的实施过程构成任何限定。

本申请实施例还提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序，计算机程序被处理器执行时可实现上述各个方法实施例中的步骤。

本申请实施例还提供了一种计算机程序产品，当计算机程序产品在第一设备上运行时，使得第一设备可实现上述各个方法实施例中的步骤。

集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实现上述实施例方法中的全部或部分流程，可以通过计算机程序来指令相关的硬件来完成，的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，计算机程序包括计算机程序代码，计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。计算机可读介质至少可以包括：能够将计算机程序代码携带到第一设备的任何实体或装置、记录介质、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质。例如U盘、移动硬盘、磁碟或者光盘等。在某些司法管辖区，根据立法和专利实践，计算机可读介质不可以是电载波信号和电信信号。

本申请实施例还提供了一种芯片系统，芯片系统包括处理器，处理器与存储器耦合，处理器执行存储器中存储的计算机程序，以实现本申请任一方法实施例的步骤。芯片系统可以为单个芯片，或者多个芯片组成的芯片模组。

在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。

本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及方法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。

以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围，均应包含在本申请的保护范围之内。

Claims (25)

1.一种环境光的检测方法，其特征在于，应用于电子设备，所述电子设备包括显示引擎服务、SurfaceFlinger和噪声算法库，所述方法包括：

响应于监听到第一信号，所述显示引擎服务计算当前时间与第一时间的第一差值，所述第一时间与所述电子设备的环境光传感器采集第一值的时间相关；

在所述第一差值满足第一预设条件的情况下，所述显示引擎服务向所述SurfaceFlinger发送第一请求和向所述电子设备的环境光传感器驱动发送采集指令；所述采集指令用于指示所述环境光传感器驱动获得第二值，所述第二值为所述环境光传感器采集所述第一值之后采集的下一个环境光数据；所述第一请求用于指示所述SurfaceFlinger合成第一图像，所述第一图像与所述第二值中包含的噪声相关；

所述噪声算法库基于所述第二值和所述第一图像，计算获得第三值。

2.如权利要求1所述的方法，其特征在于，所述在所述第一差值满足第一预设条件的情况下，所述显示引擎服务向所述SurfaceFlinger发送第一请求和向所述电子设备的环境光传感器驱动发送采集指令，包括：

在所述第一差值大于第一阈值的情况下，所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令。

3.如权利要求2所述的方法，其特征在于，所述在所述第一差值大于第一阈值的情况下，所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令，包括：

在所述第一差值大于所述第一阈值、且所述SurfaceFlinger监听到所述第一信号后不合成第二图像的情况下，所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令，所述第二图像为用于在所述电子设备的显示屏显示的图像。

4.如权利要求2或3所述的方法，其特征在于，所述在所述第一差值大于第一阈值的情况下，所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令，包括：

在所述第一差值大于所述第一阈值、且所述SurfaceFlinger监听到所述第一信号后合成第二图像的情况下，所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前是否能够完成所述第一图像的合成任务，所述第二信号为所述第一信号的下一个Vsync信号，所述第二图像为用于在所述电子设备的显示屏显示的图像，在所述SurfaceFlinger监听到所述第一信号后合成第二图像的情况下，所述第一图像为所述第二图像的局部区域图像；

若所述显示引擎服务确定所述SurfaceFlinger在监听到所述第二信号之前能够完成所述第一图像的合成任务，则所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令。

5.如权利要求4所述的方法，其特征在于，所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前是否能够完成所述第一图像的合成任务之后，所述方法还包括：

若所述显示引擎服务确定所述SurfaceFlinger在监听到所述第二信号之前不能完成所述第一图像的合成任务，则所述显示引擎服务监听所述第二信号。

6.如权利要求3至5任一项所述的方法，其特征在于，所述第一差值小于或等于第二阈值，所述第二阈值大于所述第一阈值。

7.如权利要求1所述的方法，其特征在于，在所述第一差值满足第一预设条件的情况下，所述显示引擎服务向所述SurfaceFlinger发送第一请求和向所述电子设备的环境光传感器驱动发送采集指令，还包括：

在所述第一差值大于第二阈值的情况下，所述显示引擎服务向所述SurfaceFlinger发送所述第一请求和向所述环境光传感器驱动发送所述采集指令。

8.如权利要求1至7任一项所述的方法，其特征在于，在所述显示引擎服务计算当前时间与第一时间的第一差值之后，所述方法还包括：

在所述第一差值不大于第一阈值的情况下，所述显示引擎服务监听第二信号，所述第二信号为所述第一信号的下一个Vsync信号。

9.如权利要求3至6任一项所述的方法，其特征在于，所述方法还包括：

响应于监听到所述第一信号，所述SurfaceFlinger判断是否合成所述第二图像；

若所述SurfaceFlinger在监听到第三信号之后接收到第一信息，则所述SurfaceFlinger合成所述第二图像，所述第三信号为所述第一信号的前一个Vsync信号，所述第一信息包括用于合成所述第二图像的信息；

若所述SurfaceFlinger在监听到所述第三信号之后未接收到所述第一信息，则所述SurfaceFlinger不合成所述第二图像。

10.如权利要求9所述的方法，其特征在于，在所述SurfaceFlinger合成所述第二图像之后，所述方法还包括：

所述SurfaceFlinger向所述显示引擎服务发送第一响应，所述第一响应用于表示所述SurfaceFlinger已经合成所述第二图像；

相应的，所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前是否能够完成所述第一图像的合成任务，包括：

所述显示引擎服务接收所述第一响应，记录接收所述第一响应的第一时间；

所述显示引擎服务确定监听到所述第二信号的第二时间；

所述显示引擎服务计算所述第二时间和所述第一时间的差，得到第三时间；

若所述第三时间大于第三阈值，则所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前能够完成所述第一图像的合成任务；

若所述第三时间不大于所述第三阈值，则所述显示引擎服务确定所述SurfaceFlinger在监听到所述第二信号之前不能完成所述第一图像的合成任务。

11.如权利要求3至6任一项所述的方法，其特征在于，所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前能够完成所述第一图像的合成任务包括：

所述显示引擎服务确定所述SurfaceFlinger合成所述第二图像的第一时长；

所述显示引擎服务计算Vsync信号的周期和所述第一时长的差值，得到第二时长；

若所述第二时长大于第三阈值，则所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前能够完成所述第一图像的合成任务；

若所述第二时长不大于所述第三阈值，则所述显示引擎服务确定所述SurfaceFlinger在监听到第二信号之前不能完成所述第一图像的合成任务。

12.如权利要求11所述的方法，其特征在于，所述显示引擎服务确定所述SurfaceFlinger合成所述第二图像的第一时长包括：

所述显示引擎服务获取第一预设数量的第一历史时长，所述第一历史时长为所述SurfaceFlinger合成所述第二图像之前合成显示屏图像的时长，所述显示屏图像为所述SurfaceFlinger合成的用于在所述电子设备的显示屏显示的图像；

计算所述第一预设数量的第一历史时长的数据特征值，得到所述第一时长。

13.如权利要求10至12任一项所述的方法，其特征在于，所述方法还包括：

所述显示引擎服务获取第二预设数量的第二历史时长，所述第二历史时长为所述SurfaceFlinger合成所述第二图像之前合成去噪图像的时长，所述去噪图像为所述SurfaceFlinger合成的用于计算环境光传感器采集的环境光数据中的噪声的图像；

计算所述第二预设数量的第二历史时长的数据特征值，得到所述第三阈值。

14.如权利要求3，4，5，6，9，10，11，12或13所述的方法，其特征在于，在所述显示引擎服务向所述SurfaceFlinger发送第一请求和向所述电子设备的环境光传感器驱动发送采集指令之后，所述方法还包括：

所述SurfaceFlinger接收所述第一请求；

所述SurfaceFlinger在合成所述第二图像的情况下，向所述电子设备的软件合成模块发送第二信息；所述第二信息包括用于合成所述第一图像的信息，所述第二信息为用于合成所述第二图像的第一信息的全部信息或部分信息；

所述软件合成模块基于所述第二信息合成所述第一图像，存储所述第一图像；

所述SurfaceFlinger在不合成所述第二图像的情况下，向所述电子设备的软件合成模块发送第三信息，所述第三信息包括用于合成所述第一图像的信息，所述第三信息为用于合成所述SurfaceFlinger合成的最后一个显示屏图像的第四信息的全部信息或部分信息；

所述软件合成模块基于所述第三信息合成所述第一图像，存储所述第一图像；

所述软件合成模块向所述噪声算法库发送所述第一图像的存储地址；

所述噪声算法库基于所述存储地址获取所述第一图像，基于所述第一图像计算第一噪声；

所述环境光传感器驱动接收所述采集指令，所述环境光传感器驱动指示所述电子设备的环境光传感器采集第二值；

所述环境光传感器向所述环境光传感器驱动发送所述第二值；

所述环境光传感器驱动接收所述第二值；所述环境光传感器驱动向所述噪声算法库发送所述第二值；

相应的，所述噪声算法库基于所述第二值和所述第一图像，计算获得第三值，包括：

所述噪声算法库基于所述第二值和所述第一噪声，计算获得所述第三值。

15.如权利要求3，4，5，6，9，10，11，12或13所述的方法，其特征在于，在所述SurfaceFlinger合成所述第二图像之后，所述方法还包括：

所述电子设备的显示屏显示所述第二图像。

16.如权利要求3，4，5，6，9，10，11，12或13所述的方法，其特征在于，所述第二图像为所述第一图像在所述电子设备的显示屏上进行显示时位于所述环境光传感器上方的局部区域图像。

17.一种环境光的检测方法，其特征在于，包括：

响应于监听到第一信号，电子设备计算当前时间与第一时间的第一差值，所述第一时间与所述电子设备的环境光传感器采集第一值的时间相关；

在所述第一差值大于第一阈值、且所述电子设备监听到所述第一信号后合成第二图像的情况下，所述电子设备确定在监听到第二信号之前是否能够完成第一图像的合成任务，所述第二信号为所述第一信号的下一个Vsync信号，所述第二图像为用于在所述电子设备的显示屏显示的图像，在所述电子设备监听到所述第一信号后合成第二图像的情况下，所述第一图像为所述第二图像的局部区域图像；

若所述电子设备确定在监听到所述第二信号之前能够完成所述第一图像的合成任务，则所述电子设备合成所述第一图像和通过所述电子设备的环境光传感器采集第二值；

所述电子设备基于所述第二值和所述第一图像，计算获得第三值。

18.如权利要求17所述的方法，其特征在于，所述电子设备确定在监听到第二信号之前是否能够完成第一图像的合成任务之后，所述方法还包括：

若所述电子设备确定在监听到所述第二信号之前不能完成所述第一图像的合成任务，则监听所述第二信号。

19.如权利要求17或18所述的方法，其特征在于，所述电子设备在计算当前时间与第一时间的第一差值之后，所述方法还包括：

在所述第一差值大于所述第一阈值、且所述电子设备监听到所述第一信号后不合成第二图像的情况下，所述电子设备合成所述第一图像和通过所述电子设备的环境光传感器采集第二值。

20.如权利要求17至19任一项所述的方法，其特征在于，所述第一差值小于或等于第二阈值，所述第二阈值大于所述第一阈值。

21.如权利要求17所述的方法，其特征在于，所述电子设备在计算当前时间与第一时间的第一差值之后，所述方法还包括：

在所述第一差值大于第二阈值的情况下，所述电子设备合成所述第一图像和通过所述电子设备的环境光传感器采集第二值；

在所述第一差值不大于所述第一阈值的情况下，所述电子设备监听所述第二信号，所述第二信号为所述第一信号的下一个Vsync信号。

22.如权利要求17至21任一项所述的方法，其特征在于，所述电子设备合成所述第一图像包括：

所述电子设备在合成所述第二图像的情况下，基于合成所述第二图像的第二信息合成所述第一图像；

所述电子设备在不合成所述第二图像的情况下，基于合成最后一个显示屏图像的第四信息合成所述第一图像。

23.一种电子设备，其特征在于，所述电子设备包括处理器，所述处理器用于运行存储器中存储的计算机程序，以使得所述电子设备实现如权利要求1至16任一项所述的方法或17至22任一项所述的方法。

24.一种芯片系统，其特征在于，包括处理器，所述处理器与存储器耦合，所述处理器执行存储器中存储的计算机程序，以实现如权利要求1至16任一项所述的方法或17至22任一项所述的方法。

25.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储计算机程序，所述计算机程序在处理器上运行时实现如权利要求1至16任一项所述的方法或17至22任一项所述的方法。

Images