CN115016922A - 一种行为识别方法及电子设备 - Google Patents

一种行为识别方法及电子设备 Download PDF

Info

Publication number
CN115016922A
CN115016922A CN202111456628.9A CN202111456628A CN115016922A CN 115016922 A CN115016922 A CN 115016922A CN 202111456628 A CN202111456628 A CN 202111456628A CN 115016922 A CN115016922 A CN 115016922A
Authority
CN
China
Prior art keywords
application
module
request
behavior state
interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111456628.9A
Other languages
English (en)
Other versions
CN115016922B (zh
Inventor
董浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202111456628.9A priority Critical patent/CN115016922B/zh
Publication of CN115016922A publication Critical patent/CN115016922A/zh
Application granted granted Critical
Publication of CN115016922B publication Critical patent/CN115016922B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/50Allocation of resources, e.g. of the central processing unit [CPU]
    • G06F9/5005Allocation of resources, e.g. of the central processing unit [CPU] to service a request
    • G06F9/5027Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals
    • G06F9/505Allocation of resources, e.g. of the central processing unit [CPU] to service a request the resource being a machine, e.g. CPUs, Servers, Terminals considering the load
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26Power supply means, e.g. regulation thereof
    • G06F1/32Means for saving power
    • G06F1/3203Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234Power saving characterised by the action undertaken
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Environmental & Geological Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)

Abstract

本申请实施例提供一种行为识别方法及电子设备,用于解决SCP处理器不稳定,导致的与AR相关的应用频繁连接SCP处理器,造成通信负载严重的问题,以提高系统的稳定性和可靠性。该方法包括:第一应用向AR模块应用发送第一连接请求;第一连接请求用于请求与AR模块建立连接。响应于接收到第一连接请求,在AR模块应用与SCP模块建立连接失败的情况下,若第一应用的包名为预设包名,则AR模块应用向第一应用返回第一信息。该第一信息用于指示AR模块应用与第一应用建立连接成功。若第一应用的包名为非预设包名,则AR模块应用向第一应用返回第二信息。该第二信息用于指示AR模块应用与第一应用建立连接失败。

Description

一种行为识别方法及电子设备
技术领域
本申请涉及行为识别技术领域,尤其涉及一种行为识别方法及电子设备。
背景技术
行为识别(activity recognition,AR)(也可称为活动识别)是指通过底层传感器(如加速度传感器)等器件收集电子设备(如手机)的行为特征。通过对电子设备(如手机)的行为特征的识别,可以检测电子设备(如手机)是否处于车载、骑行、走路、跑步、静止、躺下等用户的活动场景中。
对电子设备(如手机)的当前行为进行识别,有利于对电子设备(如手机)的功耗和性能进行优化。例如,当通过AR检测到电子设备(如手机)处于静止状态时,电子设备中的应用,如省电精灵,可以管控无线保真(wireless-fidelity,WIFI)、蓝牙低功耗(bluetoothlow energy,BLE)的扫描频率,以管控电子设备的后台应用的冷冻或唤醒,从而达到优化电子设备的功耗的目的。又例如,当AR检测到电子设备(如手机)处于运动状态时,电子设备中的应用,如天气模块应用可以及时刷新并显示实时天气数据。
然而,由于实现AR业务的系统协处理器(system companion processor,SCP)不稳定,因此可能导致处理AR业务的过程不稳定,导致系统的稳定性下降,使用户的体验感降低。
发明内容
本申请实施例提供一种行为识别方法及电子设备,用于解决SCP处理器不稳定,导致的与AR相关的应用频繁连接SCP处理器,造成通信负载严重的问题,以提高系统的稳定性和可靠性。
为达到上述目的,本申请的实施例采用如下技术方案:
第一方面,提供了一种行为识别方法。该方法应用于电子设备。其中,电子设备包括第一应用、行为识别(activity recognition,AR)模块应用和系统协处理器处理器(sensor-hub control processor,SCP)模块。第一应用为与AR相关的应用。该方法包括:第一应用向AR模块应用发送第一连接请求;第一连接请求用于请求与AR模块建立连接。响应于接收到第一连接请求,在AR模块应用与SCP模块建立连接失败的情况下,若第一应用的包名为预设包名,则AR模块应用向第一应用返回第一信息。该第一信息用于指示AR模块应用与第一应用建立连接成功。若第一应用的包名为非预设包名,则AR模块应用向第一应用返回第二信息。该第二信息用于指示AR模块应用与第一应用建立连接失败。
在上述第一方面提供的行为识别方法中,第一应用(如位置定位应用)在请求与AR模块建立连接之后,在AR模块应用与SCP模块建立连接失败的情况下,AR模块应用可以根据第一应用的包名向第一应用返回不同的信息。如此可以避免某些应用(如预先存储的预设包名对应的应用)循环请求与SCP模块建立连接,而造成系统的通信负载严重的问题,从而降低系统的通信负载,提高系统的稳定性和可靠性。
一种可能的实现方式中,第一应用向AR模块应用发送第一连接请求之前,上述方法还可以包括:第一应用创建子线程。第一应用向AR模块应用发送第一连接请求,具体可以为:第一应用通过子线程向AR模块发送第一连接请求。在子线程中发送第一连接请求,可以避免AR模块应用长时间不反馈,使第一应用(如位置定位应用)出现ANR无响应的问题,导致系统不稳定(如系统瘫痪)。
一种可能的实现方式中,第一应用通过子线程向AR模块发送第一连接请求,具体可以为:第一应用通过子线程调用连接服务接口,向AR模块发送第一连接请求。
一种可能的实现方式中,电子设备还可以包括HAL接口。HAL接口存储有行为状态列表。该行为状态列表用于指示电子设备所支持识别的行为状态。上述方法还可以包括:响应于接收到第一信息,第一应用通过子线程向AR模块应用发送获取行为状态列表请求。响应于接收到获取行为状态列表请求,AR模块应用从HAL接口获取行为状态列表。响应于获取到行为状态列表,若AR模块应用存储的与SCP模块建立连接的信息为连接成功,则AR模块应用向第一应用返回行为状态列表;若AR模块应用存储的与SCP模块建立连接的信息为连接失败,则AR模块应用向第一应用返回空列表。如此可以进一步避免某些应用(如预先存储的预设包名对应的应用)循环请求与SCP模块建立连接,而造成系统的通信负载严重的问题,从而降低系统的通信负载,提高系统的稳定性和可靠性。
一种可能的实现方式中,电子设备还包括HIDL接口。AR模块应用从HAL接口获取行为状态列表,具体为:AR模块应用通过HIDL接口从HAL接口获取行为状态列表。
一种可能的实现方式中,方法还包括:响应于接收到行为状态列表,AR模块应用存储行为状态列表。当AR模块应用存储行为状态列表之后,后续有AR相关的应用程序(如天气应用)再次请求获取行为状态列表,AR模块应用可以不必从HAL接口获取该行为状态列表,而是直接返回存储的行为状态列表即可,从而简化流程,提高系统运行效率。
一种可能的实现方式中,行为状态包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯和相对静止。
一种可能的实现方式中,第一应用通过子线程向AR模块应用发送获取行为状态列表请求,具体为:第一应用通过子线程调用获取所支持识别的行为状态列表接口,向AR模块应用发送获取行为状态列表请求。在子线程中发送获取行为状态列表请求,可以避免AR模块应用长时间不反馈,使第一应用(如位置定位应用)出现ANR无响应的问题,导致系统不稳定(如系统瘫痪)。
一种可能的实现方式中,电子设备还包括:内核节点。上述方法还可以包括:响应于接收到行为状态列表,第一应用通过子线程向AR模块应用发送订阅行为状态请求。订阅行为状态请求用于订阅电子设备进入或退出第一行为状态。第一行为状态为行为状态列表中的其中一种行为状态。响应于接收到来自于第一应用的订阅行为状态请求,HAL接口创建第一线程(如线程A)和第二线程(如线程B)。HAL接口通过第一线程向内核节点发送订阅行为状态请求。HAL接口通过第二线程监听内核节点的上报信息。
应理解,在MTK的处理器芯片平台下,应用处理器的HAL接口需要通过内核节点与SCP处理器中的SCP模块通信。然而,通常情况下,HAL接口与内核节点之间的通信采用ioctl命令,并且ioctl命令为一个单向通道,会一直占用着HAL接口与内核节点之间的一个线程通道,从而导致HAL接口可能接收不到由内核节点上报的行为状态的数据。因此,HAL接口创建两个线程,其中一个线程(如线程A)用于发送请求(如订阅行为状态请求),另一个线程(如线程B)用于监听内核节点的上报信息。如此,可以使请求(如订阅行为状态请求)能够正常下发,数据(如行为状态数据)能够正常上报。
一种可能的实现方式中,第一应用通过子线程向AR模块应用发送订阅行为状态请求,具体为:第一应用通过子线程调用使能行为状态监控接口,向AR模块应用发送订阅行为状态请求。
一种可能的实现方式中,电子设备还包括HIDL接口。第一应用通过子线程向AR模块应用发送订阅行为状态请求之后,上述方法还可以包括:响应于接收到订阅行为状态请求,AR模块应用通过HIDL接口向HAL接口发送订阅行为状态请求。
一种可能的实现方式中,电子设备还包括:HAL接口和内核节点。上述方法还包括:响应于接收到第一信息,第一应用通过子线程向AR模块应用发送获取当前行为状态请求。获取当前行为状态请求用于请求获取电子设备的当前行为状态。响应于接收到来自于第一应用的获取当前行为状态请求,HAL接口创建第一线程和第二线程。HAL接口通过第一线程向内核节点发送获取当前行为状态请求。HAL接口通过第二线程监听内核节点的上报信息。如此,可以使请求(如获取当前行为状态请求)能够正常下发,数据(如行为状态数据)能够正常上报。
一种可能的实现方式中,第一应用通过子线程向AR模块应用发送获取当前行为状态请求,具体为:第一应用通过子线程调用获取当前行为状态接口,向AR模块应用发送获取当前行为状态请求。
一种可能的实现方式中,电子设备还包括HIDL接口。第一应用通过子线程向AR模块应用发送获取当前行为状态请求之后,方法还包括:响应于接收到获取当前行为状态请求,AR模块应用通过HIDL接口向HAL接口发送获取当前行为状态请求。
一种可能的实现方式中,内核节点存储有当前行为状态的缓存数据。上述方法还可以包括:响应于接收到获取当前行为状态请求,若缓存数据没有失效,则内核节点上报缓存数据至HAL接口;若缓存数据已失效,则内核节点向SCP模块发送获取当前行为状态请求,以请求获取电子设备的当前行为状态数据。通过对SCP模块上报的当前行为状态数据的缓存,并在缓存数据未失效的情况下直接进行数据上报,从而降低内核节点与SCP模块之间的通信负载。
一种可能的实现方式中,内核节点存储有当前行为状态的缓存数据。上述方法还可以包括:响应于接收到获取当前行为状态请求,在内核节点频繁接收到获取当前行为状态请求的情况下,若缓存数据没有失效,则内核节点上报缓存数据至HAL接口。若缓存数据已失效,则内核节点向SCP模块发送获取当前行为状态请求,以请求获取电子设备的当前行为状态数据。在频繁接收某一请求(如获取当前行为状态请求)的情况下,通过对SCP模块上报的当前行为状态数据的缓存,并在缓存数据未失效的情况下直接进行数据上报,从而降低内核节点与SCP模块之间的通信负载。
一种可能的实现方式中,方法还可以包括:响应于接收到来自于SCP模块的当前行为状态数据,内核节点存储并更新缓存数据。
一种可能的实现方式中,方法还可以包括:响应于接收到获取当前行为状态请求,SCP模块获取传感器数据,确定电子设备的当前行为状态数据。
一种可能的实现方式中,订阅行为状态请求包括行为状态索引、上报周期、以及进入或退出的标识。上述方法还可以包括:响应于接收到订阅行为状态请求,SCP模块获取传感器数据,确定电子设备的行为状态,记录在一个上报周期内行为状态索引对应的行为状态的变化情况。
一种可能的实现方式中,电子设备还包括HIDL接口、HAL接口和内核节点。第一应用向AR模块应用发送第一连接请求之前,上述方法还可以包括:AR模块应用通过HIDL接口、HAL接口和内核节点,向SCP模块发送第二连接请求。第二连接请求用于请求与SCP模块建立连接。响应于接收到与SCP模块建立连接成功的反馈,AR模块应用存储与SCP模块建立连接成功。或者,响应于未接收到与SCP模块建立连接成功的反馈,AR模块应用存储与SCP模块建立连接失败。应理解,上述第一连接请求是指第一应用(如位置定位应用)请求与AR模块应用建立连接的请求。该第二连接请求是指AR模块应用请求与SCP模块建立连接的请求。
第二方面,提供一种芯片。该芯片应用于电子设备,该芯片用于支持电子设备执行如上第一方面中任一种可能的实现方式中的方法。
在一种可能的实现方式中,该芯片还包括存储器,该存储器,用于保存电子设备必要的程序指令和数据。
第三方面,提供一种芯片系统。该芯片系统应用于电子设备。该芯片系统包括第一处理器和第二处理器。该第一处理器和第二处理器用于支持电子设备执行如上第一方面中任一种可能的实现方式中的方法。
在一种可能的实现方式中,该芯片还包括存储器,该存储器,用于保存电子设备必要的程序指令和数据。该芯片系统可以由芯片构成,也可以包含芯片和其他分立器件。
第四方面,提供一种电子设备。该电子设备包括:第一处理器和第二处理器。第一处理器和第二处理器与存储器耦合,存储器用于存储程序或指令,当程序或指令被第一处理器或第二处理器执行时,使得电子设备执行如上第一方面中任一种可能的实现方式中的方法。
第五方面,提供一种计算机可读存储介质,其上存储有计算机程序或指令。计算机程序或指令被执行时使得计算机执行如上第一方面中任一种可能的实现方式中的方法。
第六方面,提供了一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机可以执行上述第一方面中任一种可能的实现方式中的方法。
其中,第二方面至第六方面中任一种可能的实现方式所带来的技术效果可参见第一方面中不同实现方式所带来的技术效果,此处不再赘述。
附图说明
图1为本申请实施例提供的一种电子设备的系统架构图;
图2为本申请实施例提供的一种电子设备中应用处理器与SCP处理器的交互流程图;
图3为本申请实施例提供的一种行为识别的方法流程图一;
图4为本申请实施例提供的一种行为识别的方法流程图二;
图5为本申请实施例提供的一种行为识别的方法流程图三;
图6为本申请实施例提供的一种行为识别的方法流程图四;
图7为本申请实施例提供的一种行为识别的方法流程图五;
图8为本申请实施例提供的一种行为识别的方法流程图六;
图9为本申请实施例提供的一种行为识别的方法流程图七;
图10为本申请实施例提供的一种行为识别的方法流程图八;
图11为本申请实施例提供的一种芯片系统的结构示意图。
具体实施方式
行为识别(activity recognition,AR)是指通过底层传感器(如加速度传感器)等器件收集电子设备(如手机)的行为特征。通过对电子设备(如手机)的行为特征的识别,可以检测电子设备(如手机)是否处于车载、骑行、走路、跑步、静止、躺下等用户的活动场景中。
行为识别也可以称为活动识别,为便于说明,本申请实施例中统称为行为识别。
图1为AR业务运行过程的系统架构图。如图1所示,电子设备包括两个处理器,分别为应用处理器和SCP处理器。
在实现AR业务时,电子设备的应用处理器可以按照AR业务的处理逻辑划分为应用层(application layer)、硬件抽象层(hardware abstraction layer)和内核层(kernel)。
应用层上包含有与AR行为识别相关的应用程序,例如省电精灵、天气、显示引擎或位置定位类应用程序(如高德地图、百度地图)。此外,在应用层上还包含有AR模块应用。该AR模块应用可以为与AR行为识别相关的应用程序提供应用程序接口(applicationprogramming interface,API)。与AR行为识别相关的应用程序可以调用AR模块应用的API获取SCP处理器提供的行为数据。
需要说明的是,AR模块应用有时也称为行为识别管理服务(activityrecognition management service,ARMS)。该ARMS也可以设置在应用层与硬件抽象层之间的应用框架层上(图1中未示出应用框架层)。
AR模块应用提供的API可以包括连接服务(connectService)接口、获取所支持识别的行为状态列表(getSupportedMovements)接口、使能行为状态监控(enableMovementEvent)接口和获取当前行为状态(getCurrentMovement)接口等。
其中,连接服务接口,用于请求与SCP处理器建立连接。获取所支持识别的行为状态列表接口,用于请求获取电子设备所支持识别的行为状态列表;该行为状态列表可以包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止等行为状态,以及上述行为状态对应的索引。使能行为状态监控接口,用于请求订阅电子设备的行为状态;例如,可以用于请求订阅进入车载状态或退出车载状态。获取当前行为状态接口,用于请求获取电子设备的当前行为状态,电子设备的当前行为状态可以是车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止中的一个。
硬件抽象层包括硬件抽象层接口定义语言(HAL interface definitionlanguage,HIDL)服务层和本地(native)服务层。其中HIDL服务层包括HIDL接口。本地服务层包括与AR对应的HAL接口。其中HAL接口为一些与AR对应的HIDL接口的软件实现。AR模块应用可以通过HIDL接口与HAL接口建立连接,以实现AR行为状态的订阅、行为状态数据的获取等。
内核层包括内核节点。该内核节点用于实现HAL接口与SCP处理器之间的通信。
电子设备的SCP处理器集成有传感器集线器(sensorhub)系统,该SCP处理器包括SCP模块。该SCP模块为SCP处理器通过传感器集线器系统实现行为状态获取的软件实现。该SCP模块可以与电子设备中内置的传感器通信连接,以获取传感器数据并根据传感器数据分析电子设备的行为状态。电子设备中内置的传感器可以包括压力传感器,陀螺仪传感器,气压传感器,磁传感器,加速度传感器,距离传感器,接近光传感器,指纹传感器,温度传感器,触摸传感器,环境光传感器,骨传导传感器等。
此外,该SCP模块用于根据AR相关的应用程序下发的请求,获取当前的行为状态数据或者行为状态的变化数据,并对当前的行为状态数据或者行为状态的变化数据进行上报等。
以位置定位应用为例,该位置定位应用用于对电子设备当前所处的位置进行定位,以定位用户当前所处的位置。
可以理解的是,若位置定位应用盲目地周期性启动位置定位,会增加电子设备的功耗。为了降低位置定位类应用引起的功耗,位置定位应用可以在发现电子设备(即用户)处于跑步或走路等状态且持续一段时间后,才启动位置定位。这样一来,位置定位类应用可以调用AR模块应用中的API,监听电子设备的行为状态变化,或者主动获取电子设备的行为状态。
示例地,如图2所示,以位置定位应用调用AR模块应用提供的API为例,对电子设备中的应用处理器与SCP处理器之间的交互进行说明。
S201,电子设备开机初始化时,应用处理器向SCP处理器发送建立连接请求。
在电子设备开机时,应用处理器和SCP处理器进行初始化,应用处理器可以向SCP处理器发送建立连接请求,以使应用处理器中的AR模块应用与SCP处理器中的SCP模块建立通信连接,从而便于后续位置定位应用调用AR模块应用提供的API,从SCP处理器中的SCP模块获取行为状态数据。该行为状态数据可以包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止中的一种,或者该行为状态数据可以包括在一个上报周期(如5秒)内,进入或退出某种行为状态的次数和时间,如在一个上报周期内,进入或退出跑步状态的次数和时间。
S202,SCP处理器向应用处理器返回建立连接成功。
当SCP处理器与应用处理器之间建立连接成功时,应用处理器中的位置定位应用可以调用AR模块应用提供的获取所支持识别的状态列表接口,以获取AR所支持识别的行为状态列表,例如该AR所支持识别的状态列表包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止等行为状态。
S203,应用处理器向SCP处理器发送订阅行为状态请求。
在应用处理器与SCP处理器建立连接成功后,应用处理器中的位置定位应用可以调用使能行为状态监控接口,以使应用处理器向SCP处理器中的SCP模块发送订阅行为状态请求。该订阅行为状态请求携带有行为状态索引、上报周期、以及进入或退出行为状态的标识。
其中,行为状态索引是指:行为状态列表中各个行为状态对应的索引,每个行为状态对应的索引互不相同。例如,车载状态对应的索引为0;骑行状态对应的索引为1;走路状态对应的索引为2;跑步状态对应的索引为3;绝对静止状态对应的索引为4;快走状态对应的索引为5;步行状态对应的索引为6;电梯状态对应的索引为7;相对静止状态对应的索引为8。
上报周期是指:从订阅时间点开始或者从上一次上报结束的时间点开始,在一个上报周期内,如果有订阅的状态产生,则将在一个上报周期的节点进行数据上报(即状态信息的上报)。也就是说,在一个上报周期内,SCP模块会记录在一个周期内的行为状态产生的时间以及行为状态产生的次数。当一个上报周期结束,SCP模块可以将记录的一个周期内的行为状态产生的时间以及行为状态产生的次数作为行为状态数据上报至应用处理器,以使与AR相关的应用(如位置定位应用)获取该上报的行为状态数据。
进入或退出行为状态的标识,用于区分订阅进入行为状态或订阅退出行为状态。例如,进入行为状态的可以用0作为标识,退出行为状态可以用1作为标识。也就是说,0表示订阅进入行为状态,1表示订阅退出行为状态。
S204,SCP处理器向应用处理器返回行为状态数据。
当SCP处理器中的SCP模块接收到订阅行为状态请求,SCP模块可以获取传感器数据,并确定电子设备的行为状态,记录在一个上报周期内的行为状态的变化,作为行为状态数据。在一个上报周期结束时,SCP模块可以将记录的行为状态数据返回给应用处理器,以位置定位应用使用。
S205,应用处理器向SCP处理器发送获取当前行为状态请求。
在应用处理器与SCP处理器建立连接成功后,应用处理器中的位置定位应用可以调用获取当前行为状态接口,以使应用处理器向SCP处理器中的SCP模块发送获取当前行为状态请求,以请求获取电子设备的当前行为状态。
S206,SCP处理器向应用处理器返回当前行为状态数据。
当SCP处理器中的SCP模块接收到获取当前行为状态请求,SCP模块可以获取传感器数据,并确定电子设备的当前行为状态,将当前行为状态数据返回给应用处理器,以供位置定位应用使用。
需要说明的是,在某些处理器平台(如联发科(MediaTek.Inc,MTK)平台)上传感器集线器(sensorhub)系统,也即SCP处理器不稳定,可能导致SCP处理器反复重启,从而导致应用处理器与SCP处理器连接不上,导致AR业务不可用。具体地,在SCP处理器反复重启或者功能出现问题的情况下,应用处理器频繁触发与SCP处理器的连接,导致通信负载严重,系统不稳定。此外,针对AR业务中调用频率较高的应用程序接口(application programminginterface,API),可能出现AP处理器与SCP处理器之间的通信负载较重的问题,从而可能导致与AR相关的应用产生应用无响应(application not responding,ANR)问题,使AR相关的应用卡顿。
基于上述问题,本申请实施例提供了一种行为识别方法。该方法可以在AR业务的执行过程中,针对应用处理器的多层结构之间的交互以及与SCP处理器之间的交互流程进行优化,提高AR业务执行过程中的稳定性,从而提高电子设备的系统稳定性,提高用户体验。
下面将结合附图,对本申请实施例提供的一种行为识别方法进行详细说明。
如图3所示,本申请实施例提供的一种行为识别方法,包括以下步骤S300-S310。
S300,第一应用创建子线程。
通常情况下,当第一应用在调用AR模块应用所提供的API时,第一应用会在主线程中调用AR模块应用所提供的API。此时,若AR模块应用长时间无反馈,则第一应用可能出现ANR无响应,从而导致系统瘫痪。
在本申请实施例中,可以在应用层制定调用AR模块应用提供的API的使用规范。例如,可以在使用规范中规定,当第一应用调用AR模块应用提供的API时,对AR模块应用提供的API的调用在子线程中实现。
示例地,按照上述规定,当第一应用调用AR模块应用提供的API(例如连接服务接口、获取当前行为状态接口等)时,第一应用可以创建一个子线程,以实现调用AR模块应用提供的API,从而避免第一应用出现ANR无响应问题导致系统瘫痪。
S301,第一应用通过子线程调用AR模块应用提供的第一接口。其中,第一接口用于指示AR模块应用向HIDL接口发送第一请求信息。
第一应用是指与AR相关的应用程序,例如省电精灵、天气、显示引擎或位置定位类应用程序(如高德地图、百度地图)。
第一接口可以是AR模块应用提供的与AR行为识别相关的应用程序提供的API,例如连接服务接口、获取AR所支持识别的行为状态列表接口、使能行为状态监控接口、获取当前行为状态接口等。其中,连接服务接口可以用于指示AR模块应用向HIDL接口发送连接请求。当第一应用调用AR模块应用提供的连接服务接口时,AR模块应用会向HIDL接口发送连接请求信息。使能行为状态监控接口可以用于指示AR模块应用向HIDL接口发送订阅行为状态的请求信息。当第一应用调用AR模块应用提供的使能行为状态监控接口时,AR模块应用会向HIDL接口发送订阅行为状态的请求信息。获取当前行为状态接口用于指示AR模块应用向HIDL接口发送获取当前行为状态的请求信息。当第一应用调用AR模块应用提供的获取当前行为状态接口时,AR模块应用会向HIDL接口发送获取当前行为状态的请求信息。
当第一应用需要获取SCP模块提供的行为数据时,第一应用可以调用相关的API。例如,在第一应用与SCP模块连接成功的情况下,第一应用可以调用获取当前行为状态接口,以获取电子设备(如手机)的当前行为状态。
应理解,为了确定第一应用与SCP模块是否连接成功,第一应用在调用其他接口(如获取当前行为状态接口)之前,第一应用会先调用连接服务接口,以请求与SCP模块建立通信连接。
S302,AR模块应用向HIDL接口发送第一请求信息。
示例性地,当第一应用调用连接服务接口时,AR模块应用向HIDL接口发送连接请求信息。当第一应用调用使能行为状态监控接口时,AR模块应用向HIDL接口发送订阅行为状态的请求信息。
需要说明的是,通常情况下,在电子设备开机启动时,AR模块应用会向HIDL接口发送连接请求信息,以请求与SCP模块建立连接。在AR模块应用接收到与SCP模块建立连接的信息之后,AR模块可以存储与SCP模块建立连接的信息,如建立连接成功或建立连接失败。
当第一应用调用连接服务接口,向AR模块应用发送连接请求信息时,AR模块应用可以根据存储的与SCP模块建立连接的信息,向第一应用反馈建立连接成功或建立连接失败。
S303,响应于接收到第一请求信息,HIDL接口向HAL接口发送第一请求信息。
示例性地,响应于接收到第一请求信息,HIDL接口建立binder线程,通过binder线程将第一请求信息发送HAL接口。
需要说明的是,在本申请实施例中,当HIDL接口接收到第一请求信息时,HIDL接口可以根据接收到的请求信息的数量(接收到的不同的请求信息可能对应不同的业务),调整HIDL接口创建的binder线程的数目。例如,当有多个应用(如三个应用)同时调用AR模块应用提供的API时,AR模块应用会针对多个应用向HIDL接口发送多个请求信息,此时HIDL接口可以针对多个请求信息建立多个binder线程(如3个binder线程)。
S304,响应于接收到第一请求信息,HAL接口向内核节点发送第一请求信息。
在MTK的处理器芯片平台下,应用处理器的HAL接口需要通过内核节点与SCP处理器中的SCP模块通信。然而,通常情况下,HAL接口与内核节点之间的通信采用ioctl命令,并且ioctl命令为一个单向通道,会一直占用着HAL接口与内核节点之间的一个线程通道。
在本申请实施例中,为了使HAL接口能够向内核节点下发相应的配置请求(如第一请求信息),并且HAL接口也能够接收内核节点反馈的数据或者响应(如第一反馈信息),HAL接口在初始化时可以建立两个线程,如线程A和线程B。
示例性地,如图4所示,HAL接口向内核节点发送第一请求信息,可以包括S304a-S304c。
S304a,HAL接口创建线程A和线程B。
S304b,HAL接口通过线程A向内核节点发送第一请求信息。
例如,当第一应用调用AR模块应用的使能行为状态监控接口,用于请求订阅AR行为状态中的车载状态时,第一请求信息可以包括如下参数:行为状态索引(例如车载状态的索引为0)、上报周期、进入行为状态(如车载状态)的标识。
S304c,HAL接口通过线程B监听内核节点的上报信息。
示例地,在HAL接口在线程A中通过ioctl命令向内核节点发送第一请求信息之后,HAL接口还可以在线程B中启动循环,监听是否有来自于内核节点的netlink消息上报。
S305,响应于接收到第一请求信息,内核节点向SCP模块发送第一请求信息。
当内核节点接收到HAL接口发送的ioctl命令时,内核节点可以通过ioctl处理函数对ioctl命令进行解析,以获得第一请求信息。
在本申请实施例中,为降低应用处理器中的内核节点与SCP处理器中的SCP模块之间的通信负载,内核节点中缓存有频繁接收的第一请求信息对应的反馈数据,内核节点可以根据在预设周期内接收到第一请求信息的次数以及缓存是否有效,确定是否将缓存数据作为第一请求信息的反馈数据上报。在内核节点将缓存数据作为反馈数据上报的情况下,内核节点不再向SCP模块发送第一请求信息,以降低内核节点与SCP模块之间的通信负载。在内核节点不将缓存数据作为反馈数据上报的情况下,内核节点再向SCP模块发送第一请求信息,以请求获取最新的反馈数据,提高数据的可靠性。
示例性地,如图5所示,内核节点向SCP模块发送第一请求信息,包括:
S305b,内核节点统计在预设周期内接收第一请求信息的次数。
应理解,内核节点接收到的第一请求信息可以与AR模块应用提供的某一API对应。例如,AR模块应用中的使能行为状态监控接口作为第一接口被调用时,第一请求信息对应着AR模块应用的使能行为状态监控接口。又例如,AR模块应用中的获取当前行为状态接口作为第一接口被调用时,第一请求信息对应着AR模块应用的获取当前行为状态接口。
当内核节点接收到第一请求信息时,内核节点可以根据在预设周期内接收到的第一请求信息的数量以及间隔时间,得到第一请求信息对应的API的调用次数和频率。
S305c,内核节点判断是否频繁接收第一请求信息。
示例地,若在预设周期内接收到第一请求信息的次数超过预设阈值(如每1秒内接收到第一请求信息的次数超过1次),则内核节点可以确定频繁接收第一请求信息。
若内核节点确定频繁接收第一请求信息,则执行S305d。相应地,若内核节点确定未频繁接收第一请求信息,则执行S305e。
S305d,内核节点判断缓存数据是否失效。
通常情况下,电子设备的行为状态的变化频率相对较低,针对高频调用的API(如获取当前行为状态接口),内核节点会频繁接收到相应的请求信息,此时可以设置数据的缓存机制。例如,当内核节点接收到SCP模块针对第一请求信息的第一反馈信息时,内核节点可以将第一反馈信息进行缓存,并设置缓存有效期(例如2秒)。
若内核节点判断缓存数据的缓存时间未超过缓存有效期(2秒),则表示缓存数据未失效,执行S305f,将内核节点缓存的第一反馈数据发送至HAL接口。若内核节点判断缓存数据的缓存时间超过缓存有效期,则执行S305e,将第一请求信息发送至SCP模块,以接收SCP模块反馈的新的第一反馈数据。
这样,当第一反馈信息被缓存时,当内核节点在缓存有效期内再次接收到第一请求信息,则内核节点可以直接将缓存的第一反馈信息发送至HAL,以反馈给第一应用,从而降低内核节点与SCP模块之间的通信负载,提高内核节点与SCP模块之间通信的稳定性和可靠性。
S305e,内核节点向SCP模块发送第一请求信息,以请求SCP模块反馈第一反馈数据。
例如,当第一应用调用AR模块应用的使能行为状态监控接口,用于请求订阅AR行为状态中的车载状态时,使能行为状态监控接口为非高频调用的API(也即内核节点未频繁接收到订阅行为状态请求)。此时,内核节点可以将第一请求信息(即订阅行为状态请求)以及该请求包括的各参数(如行为状态索引、上报周期、进入或退出状态的标识)发送至SCP模块。
S305f,内核节点将第一请求信息对应的缓存数据作为第一反馈数据发送至HAL接口。
例如,当第一应用调用AR模块应用的获取当前行为状态接口,用于请求获取电子设备(如手机)的当前行为状态。由于内核节点判断获取当前行为状态接口为高频调用的API(也即内核节点频繁接收到获取当前行为状态请求),因此内核节点在接收到第一请求信息时,若内核节点判断缓存数据的缓存时间未超过缓存有效期,则内核节点可以直接将缓存的第一反馈数据发送至HAL接口,避免重复与SCP模块通信,从而降低内核节点与SCP模块的通信负载。
S306,响应于接收到第一请求信息,SCP模块向内核节点发送第一反馈信息。第一反馈信息为第一请求信息的反馈信息。
示例性地,若第一请求信息用于请求与SCP模块建立连接时,第一反馈信息用于反馈与SCP模块是否建立连接成功。
当然,若第一请求信息包括订阅行为状态的参数时,SCP模块接收到订阅行为状态的参数时,会启动对行为状态的监听。此时,若SCP模块监测到第一应用订阅的行为状态已发生(例如车载状态产生),则SCP模块会向内核节点发送行为状态变化的数据(例如进入某一种行为状态时间等)。相应地,若SCP模块监测到第一应用订阅的行为状态已退出(如退出车载状态),则SCP模块会向内核节点发送行为状态退出的数据(例如退出某一种行为状态时间等)。此时,上述行为状态发送的数据或者行为状态退出的数据即为第一反馈信息。
S307,响应于接收到第一反馈信息,内核节点向HAL接口发送第一反馈信息;或者,响应于未接收到第一反馈信息,内核节点向HAL接口发送第二反馈信息。其中,第二反馈信息指示内核节点与SCP模块连接失败。
示例性地,若内核节点接收到SCP模块反馈的第一反馈信息,则内核节点可以解析接收到的第一反馈信息,并通过线程B以netlink机制向HAL发送第一反馈信息。
然而,当内核节点未接收到SCP模块反馈的第一反馈信息时,表示内核节点与SCP模块之间的通信连接断开。例如,第一反馈信息用于反馈与SCP模块的连接状态时,若内核节点与SCP模块未连接成功时,SCP模块可能接收不到内核节点发送的第一请求信息,相应地,内核节点也接收不到SCP模块反馈的第一反馈信息。此时,若内核节点未接收到SCP模块反馈的第一反馈信息时,内核节点向HAL接口发送第二反馈信息,以指示内核节点与SCP模块连接失败。
S308,响应于接收到第一反馈信息或第二反馈信息,HAL接口向HIDL接口发送第一反馈信息或第二反馈信息。
示例性地,当HAL接口接收到第一反馈信息或第二反馈信息时,HAL接口可以通过binder线程向HIDL接口发送第一反馈信息或第二反馈信息。
S309,响应于接收到第一反馈信息或第二反馈信息,HIDL接口向AR模块应用发送第一反馈信息或第二反馈信息。
S310,响应于接收到第一反馈信息,AR模块应用向第一应用发送第一反馈信息;或者响应于接收到第二反馈信息,AR模块应用向第一应用发送第三反馈信息。
示例性地,若在S301中,第一应用调用AR模块应用中的连接服务接口时,第一反馈信息可以表示第一应用(或应用处理器)与SCP模块连接成功。第二反馈信息表示第一应用(或应用处理器)与SCP模块连接失败。
为了避免在第一应用(或应用处理器)与SCP模块连接失败的情况下,第一应用循环请求与SCP模块建立连接,影响电子设备的稳定性。如图6所示,本申请实施例中的AR模块应用接收到第一反馈信息或第二反馈信息之后,上述方法还包括:
S310a,判断AR模块应用与SCP模块是否建立连接成功。
当AR模块应用与SCP模块建立连接成功时,执行S310c和S310d。当AR模块应用与SCP模块建立连接失败时,也执行S310c和S310e。
需要说明的是,当AR模块应用与SCP模块建立连接成功时,AR模块应用可以将建立连接成功以句柄的形式保存在AR模块应用中。当AR模块应用于SCP模块建立连接失败时,AR模块应用可以将建立连接失败以句柄的形式保存在AR模块应用中。
当第一应用调用AR模块应用的其他API(如获取所支持识别的行为状态列表接口)时,若AR模块应用与SCP模块建立连接成功,则继续执行S302-S310以完成后续的流程;若AR模块应用与SCP模块建立连接失败,则AR模块应用直接向第一应用发送空数据(即第三反馈信息)。
S310b,判断AR模块应用向HIDL接口发送连接请求的次数是否超过预设阈值。
若AR模块应用向HIDL接口发送连接请求的次数超过预设阈值,则执行S310c。若AR模块应用向HIDL接口发送连接请求的次数没有超过预设阈值(如15次),则在间隔预设时间间隔(如1秒)之后,再次执行S302-S309,以请求与SCP模块建立连接,然后再循环执行上述S310a。
S310c,AR模块应用向第一应用发送第一反馈信息(即连接成功)。
S310d,将AR模块应用与SCP模块建立连接成功,保存在AR模块应用中。
S310e,将AR模块应用与SCP模块建立连接失败,保存在AR模块应用中。
需要说明的是,在一些实施例中,当手机系统启动时,AR模块应用初始化,AR模块应用会请求与SCP处理器中的SCP模块建立连接。此时,该建立连接的方法可以包括上述S302-S309,S310a,S310b,S310d和S310e。
下面以位置定位应用为例,结合AR业务流程的分层架构,对上述行为识别方法进行举例说明。
如图7所示,在电子设备开机阶段时,电子设备可以执行S701a-S701j。
S701a,AR模块应用向HIDL接口发送与SCP模块建立连接请求。
在电子设备(如手机)的开机阶段,AR模块应用初始化时,会尝试与SCP模块建立连接,此时AR模块应用可以向HIDL接口发送与SCP模块建立连接的请求。
S701b,HIDL接口向HAL接口发送与SCP模块建立连接请求。
响应于接收到与SCP模块建立连接请求,根据AR模块应用于SCP模块的交互流程,HIDL接口会继续向HAL接口发送与SCP模块建立连接请求。
S701c,HAL接口创建线程A。
此时,获取连接的请求已经到达HAL接口。响应于接收到与SCP模块建立连接请求,HAL接口可以创建一个线程A,用于向内核节点发送相应的请求,如与SCP模块建立连接请求。
S701d,HAL接口通过线程A向内核节点发送与SCP模块建立连接请求。
当HAL接口创建完成线程A时,HAL接口可以通过线程A向内核节点发送与SCP模块建立连接请求,以请求与SCP模块建立连接。示例地,通常情况下,HAL接口与内核节点通过ioctl命令进行交互,因此在本申请实施例中HAL接口可以在线程A中调用ioctl命令,以向内核节点发送与SCP模块建立连接的请求。其中,该ioctl命令的参数用于指示请求与SCP模块建立连接。
S701e,内核节点向SCP模块发送与SCP模块建立连接请求。
示例性地,当内核节点接收到来自于HAL接口的ioctl命令时,内核节点可以通过ioctl处理函数对ioctl命令进行解析,获取与SCP模块建立连接的请求。
当内核节点获取到与SCP模块建立连接的请求时,内核节点可以向SCP模块发送与SCP模块建立连接请求。
需要说明的是,当内核节点向SCP模块发送与SCP模块建立连接请求失败时,SCP模块不会接收到建立连接请求。此外,在SCP模块接收到建立连接请求之后,若SCP模块出现异常重启现象,SCP模块会出现无响应。在SCP模块未接收到建立连接请求或者SCP模块异常重启且无响应的情况下,SCP模块不会向内核节点反馈连接状态。
S701f,内核节点确定超过预设时间阈值未收到与SCP模块建立连接成功。
针对SCP不会向内核节点反馈连接状态的情况,若内核节点确定在超过预设时间阈值的情况下,仍然未收到与SCP模块建立连接成功,则内核节点可以确定与SCP模块建立连接失败。
S701g,内核节点向HAL接口反馈与SCP模块建立连接失败。
当内核节点确定与SCP模块建立连接失败时,内核节点可以向HAL接口反馈与SCP模块建立连接失败。
S701h,HAL接口向HIDL接口反馈与SCP模块建立连接失败。
响应于接收到与SCP模块建立连接失败,HAL接口可以向HIDL接口反馈与SCP模块建立连接失败
S701i,HIDL接口向AR模块应用反馈与SCP模块建立连接失败。
响应于接收到与SCP模块建立连接失败,HIDL接口可以向AR模块应用反馈与SCP模块建立连接失败。
S701j,AR模块应用存储与SCP模块建立连接失败。
响应于接收到与SCP模块建立连接失败,AR模块应用可以将与SCP模块建立连接失败的信息存储起来,以便与AR相关的应用程序(如位置定位应用)调用AR模块应用的连接服务接口时,根据存储的与SCP模块建立连接的信息,向位置定位应用反馈不同的信息,适应不同的应用出现的问题,提高电子设备的稳定性。
需要说明的是,为了提高电子设备系统的稳定性和可靠性,避免因AR模块应用与SCP模块建立连接失败时,与AR相关的应用程序不能获取电子设备的行为状态,AR模块应用与SCP模块建立连接失败的情况下,AR模块应用可以多次重复请求与SCP模块建立连接,直到AR模块应用于SCP模块建立连接成功或者重复请求次数达到预设次数(如15次)。
例如,若AR模块应用接收到与SCP模块建立连接失败,AR模块应用每间隔预设时间(如1秒)可以重复执行S701a,以请求再次与SCP模块建立连接,直到AR模块应用于SCP模块建立连接成功或者重复请求次数达到预设次数(如15次)。
当然,若经过重复请求后,AR模块应用仍然接收到与SCP模块建立连接失败,则AR模块应用执行S701j,将与SCP模块建立连接失败的信息存储起来。
还需要说明的是,若在上述S701e内核节点向SCP模块发送与SCP模块建立连接请求之后,SCP模块接收到该连接请求,并且该SCP模块正常运行,SCP模块会向内核节点反馈与SCP模块建立连接成功。当内核节点在预设时间内接收到与SCP模块建立连接成功的反馈,内核节点依次通过HAL接口、HIDL接口反馈与SCP模块建立连接成功至AR模块应用中。当AR模块应用接收到与SCP模块建立连接成功,则AR模块应用存储与SCP模块建立连接成功。
在应用运行阶段,例如位置定位应用请求与AR模块应用建立连接时,如图7所示,位置定位应用请求与AR模块建立连接的方法,包括S702-S706。
S702,位置定位应用创建子线程。
根据上述S301的描述,通常情况下,当位置定位应用调用AR模块应用提供的连接服务接口时,位置定位应用会直接在主线程中调用连接服务接口。此时,若AR模块应用长时间无反馈,则位置定位应用可能出现ANR无响应的问题,导致系统不稳定(如系统瘫痪)。
然而,若位置定位应用在子线程中调用连接服务接口时,即使AR模块应用长时间不反馈,位置定位应用也不会出现ANR无响应的问题。
因此在本申请实施例中,在位置定位应用调用AR模块应用提供的API(如连接服务接口)之前,位置定位应用可以先创建一个子线程,以使该子线程用于调用AR模块应用提供的API(如连接服务接口)。
S703,位置定位应用通过子线程调用AR模块应用中的连接服务接口,发送连接请求,该连接请求用于与AR模块应用建立连接。
当位置定位应用创建完成子线程之后,位置定位应用可以通过创建的子线程调用AR模块应用中的连接服务接口,以便发送连接请求,以请求与AR模块应用建立连接。
S704,AR模块应用基于存储的与SCP模块建立连接的信息为连接失败,获取当前调用连接服务接口的应用的包名,并确定应用包名是否为预设包名。
示例性地,若某一应用通过binder机制与AR模块应用建立连接,则AR模块应用可以通过binder机制可以获得当前调用连接服务接口的应用的包名。例如,若位置定位应用调用连接服务接口,则AR模块应用获取位置定位应用的包名。
其中,预设包名是预先存储在AR模块应用中的部分与AR相关的应用程序的包名。该预设包名可以包括一个或多个应用的包名。
需要说明的是,对于一部分与AR相关的应用程序,当该应用接收到与SCP模块建立连接失败时,该应用可能会死循环请求与SCP模块建立连接,从而造成系统的稳定性问题。
在本申请实施例中,可以将在与SCP模块建立连接失败之后仍然循环请求与SCP模块建立连接的应用的包名,作为预设包名存储在AR模块应用中,以便AR模块应用获取到应用的包名为预设包名时,制定相应的逃生方案,避免循环请求与SCP模块建立连接,而造成系统的稳定性降低的问题。
当然,对于另一部分与AR相关的应用程序,当该应用接收到与SCP模块建立连接失败时,该应用不会循环请求与SCP模块建立连接,则AR模块应用可以直接向该应用反馈与SCP模块建立连接失败。该部分应用不会作为预设包名存储在AR模块应用中,即该部分应用为非预设包名。
对于该示例,若位置定位应用的包名为预设包名,则执行S705。若位置定位应用的包名为非预设包名,则执行S706。
S705,若当前调用连接服务接口的应用的包名为预设包名,则AR模块应用向位置定位应用返回建立连接成功。
在AR模块应用存储的与SCP模块建立连接的信息为连接失败的情况下,若位置定位应用的包名为预设包名,则需要制定逃生方案,例如即使AR模块应用与SCP模块建立连接失败,AR模块应用也会向位置定位应用返回建立连接成功,以避免位置定位应用循环请求与SCP模块建立连接。
S706,若当前调用连接服务接口的应用的包名为非预设包名,则AR模块应用向位置定位应用返回建立连接失败。
当位置定位应用的包名为非预设包名时,在位置定位应用接收到与SCP模块建立连接失败的情况下,该位置定位应用不会循环请求与SCP模块建立连接,则AR模块应用直接向位置定位应用返回建立连接失败即可。
可以理解的是,当AR模块应用中存储的与SCP模块建立连接的信息为连接成功时,AR模块应用可以与SCP模块正常进行交互,而不关心应用包名是否为预设包名。因此,AR模块应用不需要获取应用包名,而是可以直接向位置定位应用返回建立连接成功。
在位置定位应用接收到AR模块应用返回的与SCP模块建立连接成功之后,位置定位应用可以调用AR模块应用提供的获取所支持识别的状态列表接口,以获取SCP模块所支持识别的状态列表。如图8所示,位置定位应用获取SCP模块所支持识别的状态列表,包括S801-S809。
S801,位置定位应用通过子线程调用获取所支持识别的行为状态列表接口,发送获取所支持识别的行为状态列表请求。
根据上文S702中的描述,位置定位应用可以在子线程中调用AR模块应用提供的API,以避免AR模块应用长时间不反馈,造成位置定位应用出现ANR问题。
因此,在位置定位应用调用获取所支持识别的行为状态列表接口,以请求获取电子设备所支持识别的行为状态列表的情况下,位置定位应用可以复用S802中创建的子线程。也就是说,位置定位应用仍然通过子线程调用获取所支持识别的行为状态列表接口。
S802,AR模块应用向HIDL接口发送获取行为状态列表请求。
当AR模块应用接收到获取所支持识别的行为状态列表请求时,AR模块应用可以向HIDL接口发送获取行为状态列表请求。
S803,HIDL接口向HAL接口发送获取行为状态列表请求。
当HIDL接口接收到获取行为状态列表请求时,HIDL接口可以向HAL接口发送获取行为状态列表请求。
S804,HAL接口向HIDL接口返回行为状态列表。
通常情况下,在与SCP模块连接的传感器以及SCP模块固定的情况下,AR所支持识别的行为状态列表也是固定的,例如该行为状态列表可以包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止。在HAL接口中可以预先存储AR所支持识别的行为状态列表。
当HAL接口接收到获取行为状态列表请求时,HAL接口可以将存储的AR所支持识别的行为状态列表反馈给HIDL接口。
S805,HIDL接口向AR模块应用返回行为状态列表。
当HIDL接口接收到行为状态列表时,HIDL接口可以向AR模块应用反馈行为状态列表。
S806,AR模块应用确定存储的与SCP模块建立连接的信息是否为连接成功。
在上述S805,若位置定位应用包名为预设包名,则即使AR模块应用与SCP模块建立连接失败,AR模块应用也会向位置定位应用返回建立连接成功。
因此,在该S806中,AR模块应用确定存储的与SCP模块建立连接的信息是否为连接成功,AR模块应用向位置定位应用返回的数据是不同的。
具体地,当AR模块应用存储的与SCP模块建立连接的信息是为连接成功,则执行S807。当AR模块应用存储的与SCP模块建立连接的信息是为连接失败时,则执行S808。
S807,若AR模块应用存储的与SCP模块建立连接的信息是为连接成功,则AR模块应用向位置定位应用返回行为状态列表。
应理解,在AR模块应用存储的与SCP模块建立连接的信息是为连接成功的情况下,在AR模块应用向位置定位应用返回行为状态列表之后,位置定位应用可以根据行为状态列表中的各行为状态的索引,订阅电子设备的某一种行为状态。例如,订阅电子设备的进入跑步状态。又例如,订阅电子设备的退出走路状态。
S808,若AR模块应用存储的与SCP模块建立连接的信息是为连接失败,则AR模块应用向位置定位应用返回空的行为状态列表。
应理解,在AR模块应用存储的与SCP模块建立连接的信息是为连接失败的情况下,AR模块应用与SCP模块连接失败,位置定位应用不能使用AR模块应用的功能,例如不能订阅电子设备的行为状态或者获取电子设备当前的行为状态。
此时,为了避免位置定位应用继续执行后续的操作,如调用使能行为状态监控接口,AR模块应用可以返回空的行为状态列表给位置定位应用。当位置定位应用接收到空的行为状态列表时,位置定位应用将不再执行后续的操作。
S809,AR模块应用存储行为状态列表。
为了简化流程,AR模块应用可以将获取得到的行为状态列表存储下来,以便后续有AR相关的应用程序(如天气应用)再次调用所支持识别的行为状态列表接口时,AR模块应用直接根据存储的与SCP模块建立连接的信息是否为连接成功,向AR相关的应用程序(如天气应用)反馈行为状态列表或者空的行为状态列表。
由此可以不必执行S802-S805,从而简化流程,提高系统运行效率。
当位置定位应用获取到该电子设备所支持识别的行为状态列表之后,位置定位应用可以根据需要订阅电子设备的某一种行为状态,例如位置定位应用可以订阅电子设备进入跑步状态,以便根据跑步状态的持续时间为电子设备的位置进行定位。
下面以位置定位应用订阅电子设备进入跑步状态为例,对应用订阅电子设备的行为状态的流程进行说明。
如图9所示,位置定位应用订阅进入跑步状态的流程包括S901-S914。
S901,位置定位应用通过子线程调用使能行为状态监控接口,发送订阅进入跑步状态请求。该请求用于订阅电子设备进入跑步状态,且该请求中携带有跑步对应的状态索引、上报周期、进入跑步状态标识。
根据上文S702中的描述,位置定位应用可以在子线程中调用AR模块应用提供的API,以避免AR模块应用长时间不反馈,造成位置定位应用出现ANR问题。
因此,在位置定位应用调用使能行为状态监控接口,以请求订阅电子设备的进入跑步状态的情况下,位置定位应用可以复用S702中创建的子线程。也就是说,位置定位应用仍然通过子线程调用使能行为状态监控接口。
示例地,上述订阅进入跑步状态的请求中携带的参数可以包括跑步状态对应的行为状态索引(如3)、上报周期(如5秒)、进入跑步状态。也就是说,位置定位应用在此次调用使用行为状态监控接口时,规定此次需要订阅进入跑步状态,并且每隔5秒上报一次行为状态数据。
其中,该行为状态数据中包括进入跑步状态的次数以及每次进入跑步状态的时间。
S902,AR模块应用向HIDL接口发送订阅进入跑步状态请求。
响应于接收到订阅进入跑步状态请求,AR模块应用可以向HIDL接口发送订阅进入跑步状态请求。
S903,HIDL接口向HAL接口发送订阅进入跑步状态请求。
响应于接收到订阅进入跑步状态请求,HIDL接口可以向HAL接口发送订阅进入跑步状态请求
S904,HAL接口创建线程B。
根据上述S304中的描述,在MTK的处理器芯片平台下,应用处理器的HAL接口需要通过内核节点与SCP处理器中的SCP模块通信。然而,通常情况下,HAL接口与内核节点之间的通信采用ioctl命令,并且ioctl命令为一个单向通道,会一直占用着HAL接口与内核节点之间的一个线程通道,从而导致HAL接口可能接收不到由内核节点上报的行为状态的数据。
因此,HAL接口会创建两个线程,其中一个线程用于发送请求(如订阅行为状态的情况),另一个线程用于监听内核节点的上报信息。
此外,由于HAL接口在执行上述S701c已经创建了线程A,因此在该S904中,HAL接口再创建一个线程B即可。
S905,HAL接口通过线程A向内核节点发送订阅进入跑步状态请求。
当HAL接口接收到来自于HIDL接口的订阅进入跑步状态请求时,HAL接口可以复用上述S701c创建的线程A,并通过线程A发送订阅进入跑步状态请求。
示例地,通常情况下,HAL接口与内核节点通过ioctl命令进行交互,因此在本申请实施例中HAL接口可以在线程A中调用ioctl命令,以向内核节点发送订阅进入跑步状态请求,并携带跑步对应的状态索引、上报周期、进入跑步状态标识等参数。
S906,HAL接口通过线程B监听内核节点的上报信息。
在HAL接口通过线程A发送订阅进入跑步状态请求之后,HAL接口可以通过线程B监听内核节点的上报信息。当内核节点有上报信息时,线程B则可以监听到,以便接收内核节点的上报信息。
S907,内核节点向SCP模块发送订阅进入跑步状态请求。
示例性地,当内核节点接收到来自于HAL接口的ioctl命令时,内核节点可以通过ioctl处理函数对ioctl命令进行解析,获取订阅进入跑步状态请求。
当内核节点获取到订阅进入跑步状态请求时,内核节点向SCP模块发送订阅进入跑步状态请求。
S908,SCP模块获取与跑步状态相关的传感器的数据,确定电子设备的行为状态,记录一个上报周期内的电子设备的行为状态变化。
当SCP接收到订阅进入跑步状态请求时,SCP模块可以获取与跑步状态相关的传感器的数据,确定电子设备的行为状态,例如是否进入跑步状态。
在一个上报周期内,SCP模块可以记录电子设备的行为状态变化,如进入跑步状态的次数,以及每次进入跑步状态的时间节点。
S909,当一个上报周期结束,SCP模块向内核节点上报行为状态数据。
通常情况下,位置定位应用在发送订阅进入跑步状态请求时,携带有上报周期。当一个上报周期结束时,SCP模块可以将这个上报周期内电子设备的行为状态变化,作为行为状态数据上报给内核节点。
S910,内核节点向HAL接口上报行为状态数据。
当内核节点接收到行为状态数据时,内核节点可以向HAL接口上报行为状态数据。
S911,HAL接口向HIDL接口上报行为状态数据。
在线程B中,HAL接口可以监听内核节点的上报信息。因此,当内核节点向HAL接口上报行为状态数据,内核节点可以在线程B中监听到内核节点上报的行为状态数据。
当HAL接口监听到有行为状态数据上报时,HAL接口可以向HIDL接口上报行为状态数据。
S912,HIDL接口向AR模块应用上报行为状态数据。
当HIDL接收到行为状态数据时,HIDL接口可以向AR模块应用上报行为状态数据。
S913,AR模块应用向位置定位应用上报行为状态数据。
当AR模块应用接收到行为状态数据时,AR模块应用可以向位置定位应用上报行为状态数据。
S914,位置定位应用根据上报的行为状态数据进行分析处理。
当位置定位应用接收到行为状态数据时,位置定位应用可以根据上报的行为状态数据进行分析处理。例如,当位置定位应用接收到进入跑步状态的时间节点和次数,位置定位应用可以选择对电子设备进行定位的时机,避免持续对电子设备进行定位,以降低电子设备的功耗。
通常情况下,订阅电子设备的某一种行为状态(如跑步状态),需要调用两次AR模块应用提供的使能行为状态监控接口。其中一次调用使能行为状态监控接口订阅电子设备进入跑步状态,此时使能行为状态监控接口携带的参数包括跑步对应的行为状态索引(如3)、上报周期(如每隔5秒上报一次)、进入跑步状态标识。另一次调用使能行为状态监控接口订阅电子设备退出跑步状态,此时使能行为状态监控接口携带的参数包括跑步对应的行为状态索引(如3)、上报周期(如每隔5秒上报一次)、退出跑步状态标识。具体调用过程与上述S901-S913类似,此处不再赘述。
当然,在某些情况下,位置定位应用需要根据电子设备的当前行为状态智能化对电子设备的位置进行定位,此时位置定位应用可以调用获取当前行为状态接口,以请求获取电子设备的当前行为状态。如图10所示,位置定位应用获取当前行为状态的流程如下:
S1001,位置定位应用通过子线程调用获取当前行为状态接口,发送获取当前行为状态请求。
根据上文S702中的描述,位置定位应用可以在子线程中调用AR模块应用提供的API,以避免AR模块应用长时间不反馈,造成位置定位应用出现ANR问题。
因此,在位置定位应用调用获取当前行为状态接口,以请求获取电子设备的当前行为状态的情况下,位置定位应用可以复用S702中创建的子线程。也就是说,位置定位应用仍然通过子线程调用获取当前行为状态接口。
S1002,AR模块应用向HIDL接口发送获取当前行为状态请求。
当AR模块应用接收到获取当前行为状态请求时,AR模块应用向HIDL接口发送获取当前行为状态请求。此时,当前行为状态请求可以对应上述S303中的第一请求信息。
S1003,HIDL接口向HAL接口发送获取当前行为状态请求。
当HIDL接口接收到获取当前行为状态请求,HIDL接口可以向HAL接口发送获取当前行为状态请求。
此时,当前行为状态请求可以对应上述S303中的第一请求信息。
S1004,HAL接口创建线程B。
根据上述S304中的描述,在MTK的处理器芯片平台下,应用处理器的HAL接口需要通过内核节点与SCP处理器中的SCP模块通信。然而,通常情况下,HAL接口与内核节点之间的通信采用ioctl命令,并且ioctl命令为一个单向通道,会一直占用着HAL接口与内核节点之间的一个线程通道,从而导致HAL接口可能接收不到由内核节点上报的行为状态的数据。
因此,HAL接口会创建两个线程,其中一个线程用于发送请求(如订阅行为状态的情况),另一个线程用于监听内核节点的上报信息。
此外,由于HAL接口在执行上述S701c已经创建了线程A,因此在该S1004中,HAL接口再创建一个线程B即可。
S1005,HAL接口通过线程A向内核节点发送获取当前行为状态请求。
当HAL接口接收到来自于HIDL接口的获取当前行为状态请求时,HAL接口可以复用上述S701c创建的线程A,并通过线程A发送获取当前行为状态请求。
示例地,通常情况下,HAL接口与内核节点通过ioctl命令进行交互,因此在本申请实施例中HAL接口可以在线程A中调用ioctl命令,以向内核节点发送获取当前行为状态请求。
此时,当前行为状态请求可以对应上述S304中的第一请求信息。
S1006,HAL接口通过线程B监听内核节点的上报信息。
在HAL接口通过线程A发送获取当前行为状态请求之后,HAL接口可以通过线程B监听内核节点的上报信息。当内核节点有上报信息时,线程B则可以监听到,以便接收内核节点的上报信息。
S1007,内核节点确定是否频繁接收到获取当前行为状态请求。
在一些实施例中,根据上述S305中的描述,为降低应用处理器中的内核节点与SCP处理器中的SCP模块之间的通信负载,内核节点可以根据是否频繁接收到某一请求(如此处的获取当前行为状态请求),来确定是否缓存相应的上报数据(如对应获取当前行为状态请求的当前行为状态数据),以及确定是否执行S1008,以根据缓存数据是否失效,来确定是否将缓存数据作为当前行为状态数据上报。
在另一些实施例中,内核节点也可以不执行S1007。此时,内核节点可以对SCP模块上报的信息均进行缓存,当接收到新的请求(如获取当前行为状态请求)时,直接执行S1008判断缓存是否失效,以根据缓存数据是否失效,来确定是否将缓存数据作为当前行为状态数据上报。
S1008,内核节点判断缓存是否失效。
通常情况下,内核节点设置了缓存有效期,如2秒。当缓存数据(如当前行为状态数据)超过缓存有效期,则表示缓存数据已失效。相反地,当缓存数据(如当前行为状态数据)未超过缓存有效期,则表示缓存数据未失效。
S1009,若缓存数据没有失效,则内核节点将缓存数据作为当前行为状态数据上报。
在缓存数据没有失效的情况下,内核节点将缓存数据作为当前行为状态数据上报至HAL接口,以降低内核节点与SCP模块之间的通信负载。
S1010,若缓存数据已失效,则内核节点向SCP模块发送获取当前行为状态请求。
在缓存数据已失效的情况下,内核节点向SCP模块发送获取当前行为状态请求,以请求SCP模块反馈最新的当前行为状态数据,从而保证数据的准确性,进而提高AR数据的可靠性。
S1011,SCP模块获取传感器的数据,确定电子设备的当前行为状态。
当SCP模块接收到获取当前行为状态请求,SCP模块从传感器中获取相应的数据,以确定电子设备的当前行为状态。该当前行为状态可以是车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止中的一种。
S1012,SCP模块向内核节点上报当前行为状态数据。
当SCP模块获取到电子设备的当前行为状态时,SCP模块可以向内核节点上报当前行为状态数据,如车载、骑行、走路、跑步、绝对静止、快走、步行、电梯、相对静止中的一种。
S1013,内核节点向HAL接口上报当前行为状态数据。
当内核节点获取到电子设备的当前行为状态数据时,内核节点可以向HAL接口上报当前行为状态数据。
S1014,内核节点存储并更新缓存的当前行为状态数据。
根据上述S1007-S1009,为了降低内核节点与SCP模块的通信负载,内核节点获取到电子设备的当前行为状态数据时,内核节点可以存储并更新缓存的当前行为状态数据,以供下一次请求获取当前行为状态数据时使用。
S1015,HAL接口向HIDL接口上报当前行为状态数据。
当HAL接口接收到当前行为状态数据时,HAL接口可以向HIDL接口上报当前行为状态数据。
S1016,HIDL接口向AR模块应用上报当前行为状态数据。
当HIDL接口接收到当前行为状态数据时,HIDL接口可以向AR模块应用上报当前行为状态数据。
S1017,AR模块应用向位置定位应用上报当前行为状态数据。
当AR模块应用接收到当前行为状态数据时,AR模块应用可以向位置定位应用上报当前行为状态数据。
S1018,根据当前行为状态数据进行分析处理。
当位置定位应用接收到当前行为状态数据时,位置定位应用可以根据当前行为状态数据进行分析处理。例如,当位置定位应用接收到当前行为状态数据为绝对静止状态时,位置定位应用可以暂时不启动对电子设备的位置定位。
本申请实施例提供了一种电子设备,该电子设备包括:应用处理器(即第一处理器)、SCP处理器(即第二处理器)、存储器。存储器中存储有一个或多个计算机程序,一个或多个计算机程序包括指令。当应用处理器或SCP处理器执行计算机指令时,电子设备可执行上述方法实施例中电子设备执行的各个功能或者步骤。
本申请实施例还提供一种芯片系统。该芯片系统可以应用于电子设备。如图11所示,该芯片系统包括第一处理器1101(如应用处理器)、第二处理器1103(如SCP处理器)和至少一个接口电路1102。第一处理器1101、第二处理器1103和接口电路1102可通过线路互联。例如,接口电路1102可用于从其它装置(例如电子设备的存储器)接收信号。又例如,接口电路1102可用于向其它装置(例如第一处理器1101和第二处理器1103)发送信号。示例性的,接口电路1102可读取存储器中存储的指令,并将该指令发送给第一处理器1101或第二处理器1103。当所述指令被第一处理器1101或第二处理器1103执行时,可使得电子设备执行上述实施例中的各个步骤。当然,该芯片系统还可以包含其他分立器件,本申请实施例对此不作具体限定。
本申请实施例还提供一种计算机存储介质,该计算机存储介质包括计算机指令,当所述计算机指令在上述可折叠的电子设备上运行时,使得该电子设备执行上述方法实施例中手机执行的各个功能或者步骤。
本申请实施例还提供一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行上述方法实施例中手机执行的各个功能或者步骤。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的系统,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请实施例各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:快闪存储器、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请实施例的具体实施方式,但本申请实施例的保护范围并不局限于此,任何在本申请实施例揭露的技术范围内的变化或替换,都应涵盖在本申请实施例的保护范围之内。因此,本申请实施例的保护范围应以所述权利要求的保护范围为准。

Claims (23)

1.一种行为识别方法,其特征在于,应用于电子设备;所述电子设备包括第一应用和行为识别AR模块应用;所述第一应用为与行为识别相关的应用;
所述方法包括:
所述第一应用向所述AR模块应用发送第一连接请求;所述第一连接请求用于请求与所述AR模块建立连接;
响应于接收到所述第一连接请求,在所述AR模块应用与系统协处理器SCP模块建立连接失败的情况下,
若所述第一应用的包名为预设包名,则所述AR模块应用向所述第一应用返回第一信息;所述第一信息用于指示所述AR模块应用与所述第一应用建立连接成功;
若所述第一应用的包名为非预设包名,则所述AR模块应用向所述第一应用返回第二信息;所述第二信息用于指示所述AR模块应用与所述第一应用建立连接失败;
所述SCP模块包含在所述电子设备中。
2.根据权利要求1所述的方法,其特征在于,所述第一应用向所述AR模块应用发送第一连接请求之前,所述方法还包括:
所述第一应用创建子线程;
所述第一应用向所述AR模块应用发送第一连接请求,具体为:
所述第一应用通过所述子线程向所述AR模块发送第一连接请求。
3.根据权利要求2所述的方法,其特征在于,所述第一应用通过所述子线程向所述AR模块发送第一连接请求,具体为:
所述第一应用通过所述子线程调用连接服务接口,向所述AR模块发送第一连接请求。
4.根据权利要求2或3所述的方法,其特征在于,所述电子设备还包括HAL接口;所述HAL接口存储有行为状态列表;所述行为状态列表用于指示所述电子设备所支持识别的行为状态;
所述方法还包括:
响应于接收到所述第一信息,所述第一应用通过所述子线程向所述AR模块应用发送获取行为状态列表请求;
响应于接收到所述获取行为状态列表请求,所述AR模块应用从所述HAL接口获取所述行为状态列表;
响应于获取到所述行为状态列表,
若所述AR模块应用存储的与SCP模块建立连接的信息为连接成功,则所述AR模块应用向所述第一应用返回所述行为状态列表;
若所述AR模块应用存储的与SCP模块建立连接的信息为连接失败,则所述AR模块应用向所述第一应用返回空列表。
5.根据权利要求4所述的方法,其特征在于,所述电子设备还包括HIDL接口;所述AR模块应用从所述HAL接口获取所述行为状态列表,具体为:
所述AR模块应用通过所述HIDL接口从所述HAL接口获取所述行为状态列表。
6.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:
响应于接收到所述行为状态列表,所述AR模块应用存储所述行为状态列表。
7.根据权利要求4-6任一项所述的方法,其特征在于,所述行为状态包括车载、骑行、走路、跑步、绝对静止、快走、步行、电梯和相对静止。
8.根据权利要求4-7任一项所述的方法,其特征在于,所述第一应用通过所述子线程向所述AR模块应用发送获取行为状态列表请求,具体为:
所述第一应用通过所述子线程调用获取所支持识别的行为状态列表接口,向所述AR模块应用发送获取行为状态列表请求。
9.根据权利要求4-8任一项所述的方法,其特征在于,所述电子设备还包括:内核节点;所述方法还包括:
响应于接收到所述行为状态列表,所述第一应用通过所述子线程向所述AR模块应用发送订阅行为状态请求;所述订阅行为状态请求用于订阅电子设备进入或退出第一行为状态;所述第一行为状态为所述行为状态列表中的其中一种行为状态;
响应于接收到来自于所述第一应用的所述订阅行为状态请求,所述HAL接口创建第一线程和第二线程;
所述HAL接口通过所述第一线程向所述内核节点发送订阅行为状态请求;
所述HAL接口通过所述第二线程监听所述内核节点的上报信息。
10.根据权利要求9所述的方法,其特征在于,所述第一应用通过所述子线程向所述AR模块应用发送订阅行为状态请求,具体为:
所述第一应用通过所述子线程调用使能行为状态监控接口,向所述AR模块应用发送订阅行为状态请求。
11.根据权利要求9或10所述的方法,其特征在于,所述电子设备还包括HIDL接口;所述第一应用通过所述子线程向所述AR模块应用发送订阅行为状态请求之后,所述方法还包括:
响应于接收到所述订阅行为状态请求,所述AR模块应用通过所述HIDL接口向所述HAL接口发送订阅行为状态请求。
12.根据权利要求2-11任一项所述的方法,其特征在于,所述电子设备还包括:HAL接口和内核节点;所述方法还包括:
响应于接收到所述第一信息,所述第一应用通过所述子线程向所述AR模块应用发送获取当前行为状态请求;所述获取当前行为状态请求用于请求获取所述电子设备的当前行为状态;
响应于接收到来自于所述第一应用的所述获取当前行为状态请求,所述HAL接口创建第一线程和第二线程;
所述HAL接口通过所述第一线程向所述内核节点发送获取当前行为状态请求;
所述HAL接口通过所述第二线程监听所述内核节点的上报信息。
13.根据权利要求12所述的方法,其特征在于,所述第一应用通过所述子线程向所述AR模块应用发送获取当前行为状态请求,具体为:
所述第一应用通过所述子线程调用获取当前行为状态接口,向所述AR模块应用发送获取当前行为状态请求。
14.根据权利要求12或13所述的方法,其特征在于,所述电子设备还包括HIDL接口;所述第一应用通过所述子线程向所述AR模块应用发送获取当前行为状态请求之后,所述方法还包括:
响应于接收到所述获取当前行为状态请求,所述AR模块应用通过所述HIDL接口向所述HAL接口发送获取当前行为状态请求。
15.根据权利要求12-14任一项所述的方法,其特征在于,所述内核节点存储有所述当前行为状态的缓存数据;所述方法还包括:
响应于接收到所述获取当前行为状态请求,
若所述缓存数据没有失效,则所述内核节点上报所述缓存数据至所述HAL接口;
若所述缓存数据已失效,则所述内核节点向所述SCP模块发送获取当前行为状态请求,以请求获取所述电子设备的当前行为状态数据。
16.根据权利要求12-14任一项所述的方法,其特征在于,所述内核节点存储有所述当前行为状态的缓存数据;所述方法还包括:
响应于接收到所述获取当前行为状态请求,在所述内核节点频繁接收到所述获取当前行为状态请求的情况下,
若所述缓存数据没有失效,则所述内核节点上报所述缓存数据至所述HAL接口;
若所述缓存数据已失效,则所述内核节点向所述SCP模块发送获取当前行为状态请求,以请求获取所述电子设备的当前行为状态数据。
17.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:
响应于接收到来自于所述SCP模块的所述当前行为状态数据,所述内核节点存储并更新所述缓存数据。
18.根据权利要求15-17任一项所述的方法,其特征在于,所述方法还包括:
响应于接收到所述获取当前行为状态请求,所述SCP模块获取传感器数据,确定所述电子设备的当前行为状态数据。
19.根据权利要求9-11任一项所述的方法,其特征在于,所述订阅行为状态请求包括行为状态索引、上报周期、以及进入或退出的标识;所述方法还包括:
响应于接收到所述订阅行为状态请求,所述SCP模块获取传感器数据,确定所述电子设备的行为状态,记录在一个所述上报周期内所述行为状态索引对应的行为状态的变化情况。
20.根据权利要求1-19任一项所述的方法,其特征在于,所述电子设备还包括HIDL接口、HAL接口和内核节点;所述第一应用向所述AR模块应用发送第一连接请求之前,所述方法还包括:
所述AR模块应用通过所述HIDL接口、所述HAL接口和所述内核节点,向所述SCP模块发送第二连接请求;所述第二连接请求用于请求与所述SCP模块建立连接;
响应于接收到与所述SCP模块建立连接成功的反馈,所述AR模块应用存储与所述SCP模块建立连接成功;或者,
响应于未接收到与所述SCP模块建立连接成功的反馈,所述AR模块应用存储与所述SCP模块建立连接失败。
21.一种芯片,其特征在于,应用于电子设备,所述芯片用于支持所述电子设备执行如权利要求1-17任一项所述的方法。
22.一种电子设备,其特征在于,包括:第一处理器和第二处理器;
所述第一处理器和所述第二处理器均与存储器耦合,所述存储器用于存储程序或指令,当所述程序或指令被所述第一处理器或所述第二处理器执行时,使得所述电子设备执行如权利要求1至20中任一项所述的方法。
23.一种计算机可读存储介质,其上存储有计算机程序或指令,其特征在于,所述计算机程序或指令被执行时使得电子设备执行如权利要求1至20中任一项所述的方法。
CN202111456628.9A 2021-12-01 2021-12-01 一种行为识别方法及电子设备 Active CN115016922B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111456628.9A CN115016922B (zh) 2021-12-01 2021-12-01 一种行为识别方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111456628.9A CN115016922B (zh) 2021-12-01 2021-12-01 一种行为识别方法及电子设备

Publications (2)

Publication Number Publication Date
CN115016922A true CN115016922A (zh) 2022-09-06
CN115016922B CN115016922B (zh) 2023-03-24

Family

ID=83064634

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111456628.9A Active CN115016922B (zh) 2021-12-01 2021-12-01 一种行为识别方法及电子设备

Country Status (1)

Country Link
CN (1) CN115016922B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115902766A (zh) * 2022-11-22 2023-04-04 荣耀终端有限公司 一种测量方法及相关装置
CN117271170A (zh) * 2023-11-23 2023-12-22 荣耀终端有限公司 活动事件处理方法及相关设备

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120180071A1 (en) * 2010-10-11 2012-07-12 Hsbc Technologies Inc. Computer architecture and process for application processing engine
CN103914337A (zh) * 2014-03-24 2014-07-09 小米科技有限责任公司 服务调用方法、装置及终端
CN104298639A (zh) * 2014-09-23 2015-01-21 天津国芯科技有限公司 主处理器与若干协处理器的嵌入式连接方法及连接接口
US20160226985A1 (en) * 2014-05-15 2016-08-04 Samsung Electronics Co., Ltd. Terminal, cloud apparatus, driving method of terminal, method for processing cooperative data, computer readable recording medium
CN106941533A (zh) * 2017-04-07 2017-07-11 北京奇虎科技有限公司 一种降低功耗的方法、装置及移动终端
CN107133297A (zh) * 2017-04-26 2017-09-05 努比亚技术有限公司 数据交互方法、系统及计算机可读存储介质
CN112245903A (zh) * 2020-10-26 2021-01-22 腾讯科技(深圳)有限公司 云应用中网络状态指示方法、操作系统、装置及存储介质
CN112740638A (zh) * 2018-09-17 2021-04-30 三星电子株式会社 分组数据单元(pdu)会话控制方法和设备

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120180071A1 (en) * 2010-10-11 2012-07-12 Hsbc Technologies Inc. Computer architecture and process for application processing engine
CN103914337A (zh) * 2014-03-24 2014-07-09 小米科技有限责任公司 服务调用方法、装置及终端
US20160226985A1 (en) * 2014-05-15 2016-08-04 Samsung Electronics Co., Ltd. Terminal, cloud apparatus, driving method of terminal, method for processing cooperative data, computer readable recording medium
CN104298639A (zh) * 2014-09-23 2015-01-21 天津国芯科技有限公司 主处理器与若干协处理器的嵌入式连接方法及连接接口
CN106941533A (zh) * 2017-04-07 2017-07-11 北京奇虎科技有限公司 一种降低功耗的方法、装置及移动终端
CN107133297A (zh) * 2017-04-26 2017-09-05 努比亚技术有限公司 数据交互方法、系统及计算机可读存储介质
CN112740638A (zh) * 2018-09-17 2021-04-30 三星电子株式会社 分组数据单元(pdu)会话控制方法和设备
CN112245903A (zh) * 2020-10-26 2021-01-22 腾讯科技(深圳)有限公司 云应用中网络状态指示方法、操作系统、装置及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115902766A (zh) * 2022-11-22 2023-04-04 荣耀终端有限公司 一种测量方法及相关装置
CN115902766B (zh) * 2022-11-22 2023-11-07 荣耀终端有限公司 一种测量方法及相关装置
CN117271170A (zh) * 2023-11-23 2023-12-22 荣耀终端有限公司 活动事件处理方法及相关设备
CN117271170B (zh) * 2023-11-23 2024-04-16 荣耀终端有限公司 活动事件处理方法及相关设备

Also Published As

Publication number Publication date
CN115016922B (zh) 2023-03-24

Similar Documents

Publication Publication Date Title
CN115016922B (zh) 一种行为识别方法及电子设备
CN109167820A (zh) 一种应用程序的下载方法、装置、存储介质及终端
CN111757305B (zh) 业务执行终端的切换方法、装置、系统及存储介质
CN113592209A (zh) 一种模型训练任务管理方法、装置、终端和存储介质
CN115328563B (zh) 系统启动方法及电子设备
CN113535207A (zh) 车辆及其车载软件的更新方法、移动终端
CN113672297A (zh) 一种recovery模式升级过程中的重启方法及终端
CN113039517B (zh) 一种音频资源调用的方法、装置及电子设备
CN115981670A (zh) 容器集群业务部署方法、装置、服务器及存储介质
CN114020311A (zh) 固件升级方法、装置及电子设备
CN113885969A (zh) 嵌入式设备、嵌入式软件加载方法与存储介质
CN116610648A (zh) 日志保存方法、装置、电子设备及存储介质
CN117130627B (zh) 配件升级方法及电子设备
CN115174504B (zh) 一种界面显示方法、终端设备和存储介质
CN111083719A (zh) 一种网元容量弹性调整的方法、装置和存储介质
KR101596062B1 (ko) 개인 장치간 이벤트 및 데이터 공유 방법 및 시스템
CN117440088B (zh) 通话方法及相关设备
CN116701134B (zh) 一种数据处理方法和电子设备
CN117290164B (zh) 重启时的信息记录方法、电子设备及可读存储介质
CN114915437B (zh) 开发包认证方法及相关设备
CN112558905B (zh) 一种投屏方法、设备和系统
CN117135600A (zh) 一种蓝牙广播请求的处理方法及设备
JP2009146206A (ja) マルチアプリケーション実行装置、マルチアプリケーション実行支援方法、およびプログラム
CN115002877A (zh) 网络搜索方法和装置
WO2023229736A1 (en) Techniques for deploying workloads in a cloud-computing environment

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant