CN116708661B - 一种音频通话的处理方法、电子设备及存储介质 - Google Patents

一种音频通话的处理方法、电子设备及存储介质 Download PDF

Info

Publication number
CN116708661B
CN116708661B CN202211318159.9A CN202211318159A CN116708661B CN 116708661 B CN116708661 B CN 116708661B CN 202211318159 A CN202211318159 A CN 202211318159A CN 116708661 B CN116708661 B CN 116708661B
Authority
CN
China
Prior art keywords
state information
pose
distance state
distance
identifier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202211318159.9A
Other languages
English (en)
Other versions
CN116708661A (zh
Inventor
苏俊峰
高骏鹏
李海涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211318159.9A priority Critical patent/CN116708661B/zh
Publication of CN116708661A publication Critical patent/CN116708661A/zh
Application granted granted Critical
Publication of CN116708661B publication Critical patent/CN116708661B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02DCLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00Reducing energy consumption in communication networks
    • Y02D30/70Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Environmental & Geological Engineering (AREA)
  • Telephone Function (AREA)

Abstract

本申请提供一种音频通话的处理方法及相关电子设备,该方法包括:检测到所述第一应用进入通话状态;所述电子设备发射第一音频信号;所述电子设备接收反射回的第一音频信号;所述电子设备基于所述反射回的第一音频信号通过第一算法得到第一距离状态信息,所述第一距离状态信息用于表征所述电子设备与用户的距离状态为接近状态或远离状态;所述电子设备基于所述第一距离状态信息确定距离状态;所述电子设备通过第二算法计算位姿状态信息,所述位姿状态信息用于指示所述电子设备当前的位姿状态为拿起状态或放下状态;所述电子设备基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确。

Description

一种音频通话的处理方法、电子设备及存储介质
技术领域
本申请涉及电子设备音频通话领域,尤其涉及一种音频通话的处理方法及相关电子设备。
背景技术
在使用电子设备进行通话的过程中会发现:当电子设备接收来电后,在用户点击电子设备屏幕上的通话控件到用户将电子设备靠近耳朵与他人进行通话的过程中,电子设备与用户的距离会越来越小。当电子设备与用户的距离缩小到某一特定阈值时,电子设备会熄灭屏幕。当用户与电子设备的距离增大到某一阈值时,电子设备又会唤醒屏幕,显示界面。当用户使用电子设备与他人通话时,若电子设备离用户的距离越来越近,当电子设备与用户的距离缩小到某一门限值时,电子设备会将其屏幕熄灭,当使电子设备远离用户到一定的距离时,电子设备的屏幕又被唤醒,显示用户界面。又或者,电子设备的屏幕处于工作状态时,当物体靠近电子设备屏幕上方一定距离时,电子设备屏幕的亮度会自动调高。当物体远离电子设备的屏幕上方一定距离时,电子设备屏幕的亮度会自动调低。
上述过程中,电子设备在用户进行通话时,需要判断电子设备的状态时接近状态还是远离状态。若是接近状态,电子设备会熄灭屏幕,防止用户误触。若是远离状态,电子设备不熄灭屏幕。因此,如何在用户使用电子设备进行通话时,提高判断电子设备接近/远离状态的成功率,是技术人员日益关注的问题。
发明内容
本申请实施例提供了一种音频通话的处理方法及相关电子设备,该方法解决了在用户通话过程中进行熄屏/亮屏的准确率问题。
第一方面,本申请实施例提供了一种音频通话的处理方法,应用于具备显示屏的电子设备,该电子设备包括第一应用,该方法包括:检测到第一应用进入通话状态;该电子设备发射第一音频信号;该电子设备接收反射回的第一音频信号;该电子设备基于反射回的第一音频信号通过第一算法得到第一距离状态信息,第一距离状态信息用于表征该电子设备与用户的距离状态为接近状态或远离状态;该电子设备基于第一距离状态信息确定距离状态;该电子设备通过第二算法计算位姿状态信息,该位姿状态信息用于指示该电子设备当前的位姿状态为拿起状态或放下状态;该电子设备基于位姿状态信息和第一距离状态信息判断距离状态是否正确。
在上述实施例中,电子设备通过结合电子设备的位姿状态信息判断电子设备的距离状态是否正确,并将判断结果上传到云端服务器,从而有利于后台根据判断结果优化计算超声波测距算法(第一算法),以便提高该算法的准确度。此外,超声波接近光判断模块还可以根据判断结果对第一距离状态信息进行修正,并将修正后的第一距离状态信息发送给第一应用。由于修正后的第一距离状态信息的准确度提升,因此,第一应用根据修正后的第一距离状态信息对屏幕进行熄屏/亮屏操作,更符合用户当前的应用场景,提升用户的通话体验和使用体验。
结合第一方面,在一种可能实现的方式中,第一距离状态信息包括第一标识或第二标识,第一标识表征电子设备与用户的距离状态为接近状态,第二标识表征电子设备与用户的距离状态为远离状态;位姿状态信息包括第一位姿标识或第二位姿标识,第一位姿标识用于表征电子设备当前的位姿状态为拿起状态,第二位姿标识用于表征电子设备当前的位姿状态为放下状态。这样,电子设备可以通过识别位姿信息中的位姿标识来获取电子设备的位姿状态是拿起状态还是放下状态。
结合第一方面,在一种可能实现的方式中,电子设备基于位姿状态信息和第一距离状态信息判断距离状态是否正确,具体包括:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,电子设备判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,电子设备判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,电子设备判断所述距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,所述电子设备判断距离状态正确。
结合第一方面,在一种可能实现的方式中,电子设备基于位姿状态信息和第一距离状态信息判断距离状态是否正确,具体包括:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,电子设备判断所述距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,电子设备判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,电子设备判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,电子设备判断所述距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,电子设备判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,电子设备判断距离状态错误。
结合第一方面,在一种可能实现的方式中,电子设备基于位姿状态信息和第一距离状态信息判断距离状态是否正确之后,还包括:在判断距离状态错误,且第一状态距离状态信息包括第一标识的情况下,将第一距离状态信息中的第一标识更改为第二标识;在判断距离状态错误,且第一状态距离状态信息包括第二标识的情况下,将第一距离状态信息中的第二标识更改为第一标识;第一应用根据更改后的第一距离状态信息控制显示屏;其中,若第一距离状态信息包括第一标识,第一应用控制显示屏熄屏,若第一距离状态信息包括第二标识,第一应用控制显示屏亮屏。
结合第一方面,在一种可能实现的方式中,电子设备还包括听筒、麦克风、传感器数字信号处理模块、超声波接近光判断模块和音频数字信号处理模块,方法包括:第一应用进入通话状态;第一应用启动传感器数字信号处理模块和音频数字信号处理模块;音频数字信号处理模块生成第一音频信号;音频数字信号处理模块通过听筒将第一音频信号发射出去;音频数字信号处理模块通过麦克风接收反射回的第一音频信号;音频数字信号处理模块基于反射回的第一音频信号通过第一算法得到第一距离状态信息;音频数字信号将第一距离状态信息发送给超声波接近光判断模块;传感器数字信号处理模块通过第二算法计算位姿状态信息;传感器数字信号处理模块将位姿状态信息发送给超声波接近光判断模块;超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确。
结合第一方面,在一种可能实现的方式中,超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确,具体包括:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,超声波接近光判断模块判断距离状态正确。
结合第一方面,在一种可能实现的方式中,超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确,具体包括:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第一标识,超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第二标识,超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第二标识,超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第一标识,超声波接近光判断模块判断距离状态错误。
结合第一方面,在一种可能实现的方式中,超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确之后,还包括:在判断距离状态错误,且第一状态距离状态信息包括第一标识的情况下,超声波接近光判断模块将第一距离状态信息中的第一标识更改为第二标识;在判断距离状态错误,且第一状态距离状态信息包括第二标识的情况下,超声波接近光判断模块将第一距离状态信息中的第二标识更改为第一标识;超声波接近光判断模块将更改后的第一距离状态信息发送给第一应用;第一应用根据更改后的第一距离状态信息控制显示屏;其中,若第一距离状态信息包括第一标识,第一应用控制显示屏熄屏,若第一距离状态信息包括第二标识,第一应用控制显示屏亮屏。
结合第一方面,在一种可能实现的方式中,超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确之后,还包括:超声波接近光判断模块将判断结果发送给云端服务器。
第二方面,本申请实施例提供了一种电子设备,该电子设备包括:一个或多个处理器、显示屏、听筒、麦克风和存储器;该存储器与该一个或多个处理器耦合,该存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令,该一个或多个处理器调用该计算机指令以使得该电子设备执行:检测到第一应用进入通话状态;通过听筒发射第一音频信号;通过麦克风接收反射回的第一音频信号;基于反射回的第一音频信号通过第一算法得到第一距离状态信息,第一距离状态信息用于表征与用户的距离状态为接近状态或远离状态;基于第一距离状态信息确定距离状态;通过第二算法计算位姿状态信息,位姿状态信息用于指示当前的位姿状态为拿起状态或放下状态;基于位姿状态信息和第一距离状态信息判断距离状态是否正确。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,判断所述距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,判断距离状态正确。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,判断所述距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,判断所述距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,判断距离状态错误。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在判断距离状态错误,且第一状态距离状态信息包括第一标识的情况下,将第一距离状态信息中的第一标识更改为第二标识;在判断距离状态错误,且第一状态距离状态信息包括第二标识的情况下,将第一距离状态信息中的第二标识更改为第一标识;第一应用根据更改后的第一距离状态信息控制显示屏;其中,若第一距离状态信息包括第一标识,第一应用控制显示屏熄屏,若第一距离状态信息包括第二标识,第一应用控制显示屏亮屏。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:第一应用进入通话状态;通过第一应用启动传感器数字信号处理模块和音频数字信号处理模块;通过音频数字信号处理模块生成第一音频信号;通过音频数字信号处理模块通过听筒将第一音频信号发射出去;通过音频数字信号处理模块通过麦克风接收反射回的第一音频信号;通过音频数字信号处理模块基于反射回的第一音频信号通过第一算法得到第一距离状态信息;通过音频数字信号将第一距离状态信息发送给超声波接近光判断模块;通过传感器数字信号处理模块通过第二算法计算位姿状态信息;通过传感器数字信号处理模块将位姿状态信息发送给超声波接近光判断模块;通过超声波接近光判断模块基于位姿状态信息和第一距离状态信息判断距离状态是否正确。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,通过超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,通过超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,通过超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,通过超声波接近光判断模块判断距离状态正确。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第一标识,通过超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第一标识,通过超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第一位姿标识的情况下,若第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第二标识,通过超声波接近光判断模块判断距离状态错误;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第二标识,通过超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第二标识,通过超声波接近光判断模块判断距离状态正确;在位姿状态信息包括第二位姿标识的情况下,若第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第一标识,通过超声波接近光判断模块判断距离状态错误。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:在判断距离状态错误,且第一状态距离状态信息包括第一标识的情况下,通过超声波接近光判断模块将第一距离状态信息中的第一标识更改为第二标识;在判断距离状态错误,且第一状态距离状态信息包括第二标识的情况下,通过超声波接近光判断模块将第一距离状态信息中的第二标识更改为第一标识;通过超声波接近光判断模块将更改后的第一距离状态信息发送给第一应用;通过第一应用根据更改后的第一距离状态信息控制显示屏;其中,若第一距离状态信息包括第一标识,通过第一应用控制显示屏熄屏,若第一距离状态信息包括第二标识,通过第一应用控制显示屏亮屏。
结合第二方面,在一种可能实现的方式中,该一个或多个处理器调用该计算机指令以使得该电子设备执行:通过超声波接近光判断模块将判断结果发送给云端服务器。
第三方面,本申请实施例提供了一种电子设备,包括:触控屏、摄像头、一个或多个处理器和一个或多个存储器;所述一个或多个处理器与所述触控屏、所述摄像头、所述一个或多个存储器耦合,所述一个或多个存储器用于存储计算机程序代码,计算机程序代码包括计算机指令,当所述一个或多个处理器执行所述计算机指令时,使得所述电子设备执行如第一方面或第一方面的任意一种可能实现的方式所述的方法。
第四方面,本申请实施例提供了一种芯片系统,该芯片系统应用于电子设备,该芯片系统包括一个或多个处理器,该处理器用于调用计算机指令以使得该电子设备执行如第一方面或第一方面的任意一种可能实现的方式所述的方法。
第五方面,本申请实施例提供了一种包含指令的计算机程序产品,当该计算机程序产品在电子设备上运行时,使得该电子设备执行如第一方面或第一方面的任意一种可能实现的方式所述的方法。
第六方面,本申请实施例提供了一种计算机可读存储介质,包括指令,当该指令在电子设备上运行时,使得该电子设备执行如第一方面或第一方面的任意一种可能实现的方式所述的方法。
附图说明
图1是本申请实施例提供的一种用户使用电子设备进行语音通话的场景图;
图2A是本申请实施例提供的一种电子设备100的外观示例图;
图2B是本申请实施例提供的一种超声波测距原理示例图;
图3是本申请是实施例提供的一种音频通话的处理方法的流程图;
图4是本申请实施例提供的电子设备100的硬件结构示意图;
图5是本申请实施例提供的电子设备100的软件架构图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或者特性可以包含在本实施例申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是相同的实施例,也不是与其它实施例互斥的独立的或是备选的实施例。本领域技术人员可以显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及所述附图中术语“第一”、“第二”、“第三”等是区别于不同的对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们的任何变形,意图在于覆盖不排他的包含。例如,包含了一系列步骤或单元,或者可选地,还包括没有列出的步骤或单元,或者可选地还包括这些过程、方法、产品或设备固有的其它步骤或单元。
附图中仅示出了与本申请相关的部分而非全部内容。在更加详细地讨论示例性实施例之前,应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
在本说明书中使用的术语“部件”、“模块”、“系统”、“单元”等用于表示计算机相关的实体、硬件、固件、硬件和软件的组合、软件或执行中的软件。例如,单元可以是但不限于在处理器上运行的进程、处理器、对象、可执行文件、执行线程、程序和/或分布在两个或多个计算机之间。此外,这些单元可从在上面存储有各种数据结构的各种计算机可读介质执行。单元可例如根据具有一个或多个数据分组(例如来自与本地系统、分布式系统和/或网络间的另一单元交互的第二单元数据。例如,通过信号与其它系统交互的互联网)的信号通过本地和/或远程进程来通信。
在使用电子设备的过程中会发现:当电子设备接收来电时,在用户单击屏幕上的通话控件到用户将电子设备靠近耳朵进行通话过程中,电子设备与用户的距离会越来越小。当电子设备与用户的距离缩小到某一特定阈值时,电子设备会熄灭屏幕。当用户与电子设备的距离增大到某一阈值时,电子设备又会唤醒屏幕,显示界面。
上述应用场景为对电子设备判断接近/远离状态场景的示例性说明,即:当用户使用电子设备在与他人进行通话时,电子设备首先会检测当前的状态是否为通话状态。若为通话状态,电子设备会计算用户与电子设备之间的距离,从而判断电子设备相较于用户而言是接近状态还是远离状态。若是接近状态,电子设备会熄灭屏幕,若是远离状态,电子设备不熄灭屏幕。这样,当用户在语音通话中,不会因为电子设备靠得太近(例如,用户将电子设备放在耳边接听电话),用户的目标无法注视电子设备的屏幕,导致用户误触电子设备屏幕中的控件,进而影响用户通话的进程。
如图1所示为用户使用电子设备进行语音通话的场景图,用户A在T1时刻接收到用户B的来电。此时,电子设备100与用户A的距离为d1,电子设备100判断与用户A之间的距离状态为远离状态,因此,电子设备100在屏幕上显示用户界面10。在T2时刻,用户A拿起电子设备100准备接听电话。此时,电子设备100与用户A的距离为d2,虽然d2小于d1,但此时,电子设备100依旧判断与用户A之间的距离状态为远离状态。因此,电子设备100在界面上显示用户界面11。在T3时刻,用户A手持电子设备100在耳边接听电话。此时,电子设备100与用户A的距离为d3,电子设备100判断与用户A之间的距离状态为接近状态,为了防止用户A在通话过程中误触控件(例如,用户界面11中的挂断控件111),影响通话。因此,电子设备100会熄灭屏幕,这样,在用户A触控屏幕时,电子设备100不会响应,从而保证用户A在与他人进行语音通话的过程中,不会因为误触通话界面中的控件,而影响通话过程(例如,误触控件,挂断电话)。
电子设备可以对通话事件进行检测,即电子设备可以判断是否有通话事件发生(用户是否进行语音通话),具体表现为:当电子设备检测到有通话进程启动时,电子设备判断存在通话事件。在确定存在通话事件的情况下,电子设备可以动态地/周期性地判断与用户之间的距离状态为接近状态还是远离状态,以便电子设备根据电子设备的判断结果来决定是否对屏幕进行熄屏操作。电子设备可以通过超声波测距算法判断电子设备与用户的状态为接近状态还是远离状态,具体原理如下:
如图2A所示,在电子设备100中包括听筒201和麦克风202。如图2B所示,在电子设备进行通话过程中,电子设备100的听筒会向外发送固定频率的超声波,超声波在接触到障碍物后会在接触面产生反射,反射回的部分超声波会被麦克风接收。由于超声波在反射过程中会发生损耗,障碍物与电子设备100的距离越远,损耗越大,反射回的超声波的能量就越低。障碍物与电子设备100的距离越近,损耗就越小,反射回的超声波的能量就越大。当障碍物距离听筒和麦克风较远时,麦克风接收的超声波的能量较小,当障碍物距离听筒和麦克风越近时,麦克风接收的超声波的能量较大。因此,电子设备100可以通过计算麦克风接收的反射的超声波的能量大小,来判断电子设备100与用户之间的距离状态是接近状态还是远离状态。例如,当电子设备100计算出麦克风接收的超声波的能量大于为第一阈值时,电子设备100确定与用户的距离状态为接近状态。当电子设备100计算出麦克风接收的超声波的能量小于或等于第一阈值时,电子设备100确定与用户的距离状态为远离状态。
在一种可能实现的方式中,电子设备100也可以通过计算听筒发射超声波与麦克风接收返回的超声波的时间差来判断电子设备100与用户之间的状态是接近状态还是远离状态。
但是,仅检测电子设备与用户之前的接近/远离状态,而缺乏其它数据参照,可能造成计算出的接近/远离状态不符合用户的使用场景需求。例如,用户A使用电子设备100与用户B进行语音通话,此时电子设备100离用户A的距离较近,通过超声波测距算法可以判断出用户A和电子设备100之间的距离状态为接近状态,电子设备100进行熄屏操作。但是,对于用户A而言,用户A并没有将电子设备100放在耳边,且电子设备100的屏幕在用户A的视线范围。用户A在通话过程中误触屏幕上控件的机率较小,电子设备100也不需要熄屏。电子设备100熄屏后,可能中断用户在通话过程中的其它操作(例如,在通话过程中使用浏览器查找资料)等。此时,用户必须要重新唤醒屏幕才能继续操作,这大大降低了用户的使用体验。
因此,针对上述问题,本申请实施例提出了一种音频通话的处理方法,该方法包括:在电子设备在通过超声波测距算法计算距离状态时,电子设备可以同时获取电子设备的位姿状态信息。然后,电子设备结合位姿状态信息判断电子设备计算的距离状态是否正确,并上传判断结果。这样,以便于电子设备的后台根据判断结果不断优化超声波测距算法,使得超声波测距算法计算出的距离状态更符合用户当前通话的应用场景,提高电子设备在用户通话过程中进行熄屏/亮屏的准确率。
下面,对本申请实施例提出的一种音频通话的处理方法的流程图进行介绍。请参见图3,图3是本申请是实施例提供的一种音频通话的处理方法的流程图。在图3中,电子设备中包括第一应用、通话事件记录模块、超声波接近光判断模块、传感器数字信号处理模块、音频数字信号处理模块、加速度传感器,具体流程如下:
步骤301:第一应用启动,进入通话状态。
具体地,第一应用可以为电子设备中,具有语音通话功能的应用。例如,电子设备中的微信应用、电话应用等。通话状态可以为用户拨号后,与其他用户进行语音通话的状态。
步骤302:第一应用向通话事件记录模块注册通话事件。
具体地,第一应用在进入通话状态时,会向位于内核层的通话事件记录模块注册通话事件,用于提示通话事件记录模块当前第一应用已进入通话状态。
示例性的,第一应用可以向位于应用程序框架层的音频服务模块发送注册通话事件的请求信息。然后,再由音频模块向位于硬件抽象层的音频模块申请注册通话事件。最后,由音频模块向位于内核层的通话事件记录模块注册通话事件。
步骤303:通话事件记录模块向超声波接近光判断模块发送第一状态指示信息。
具体地,该第一状态指示信息用于指示第一应用是否处于通话状态。通话事件记录模块在注册第一应用的通话事件后,可以向超声波接近光判断模块发送第一状态指示信息,第一状态指示信息用于表征第一应用为通话状态和结束通话状态。此外,第一状态指示信息还可以包括第一应用的标识信息。通话事件记录模块可以通过位于硬件抽象层的通话状态检测模块将第一状态指示信息发送给超声波接近光判断模块。
示例性的,第一状态指示信息可以为第一指示标识和第二指示标识,当第一状态指示信息为第一指示标识时,表明第一应用当前的状态为通话状态,当第一状态指示信息为第二指示标识时,表明第一应用当前已结束通话状态。
可选地,在第一状态信息为第二指示标识时,在通话事件记录模块向超声波接近光判断模块发送第一状态指示信息,第一应用可以向音频服务模块发送注册通话结束事件。然后,再由音频模块向音频模块申请注册通话结束事件。最后,由音频模块向通话事件记录模块注册通话结束事件。
步骤304:第一应用触发启动传感器数字信号处理模块和音频数字信号处理模块。
具体地,第一应用在进入通话状态后,会向传感器数字信号处理模块(SensorDSP)和音频数字信号处理模块(Audio DSP)发送触发消息,从而触发传感器数字信号处理模块和音频数字信号处理模块工作。
示例性的,第一应用可以将触发消息发送给位于应用程序框架层的传感器服务模块(Sensor Service)。然后,再由传感器服务模块将触发消息发送给位于硬件抽象层的接近光模块,再由接近光模块将触发消息发送给传感器数字信号处理模块。传感器数字信号处理模块接收到触发消息后启动,并将该触发消息发送给音频数字信号处理模块,从而触发音频数字信号处理模块工作。
步骤305:音频数字信号处理模块生成第一音频信号,并将所述第一音频信号通过第一听筒发射出去,所述第一音频信号的频率为第一频率。
具体地,音频数字信号处理模块启动后,会生成频率为第一频率的第一音频信号,并将第一音频信号通过第一听筒发射出去。其中,第一音频信号可以为超声波信号,本申请实施例对此不做限制。
步骤306:音频数字信号处理模块通过第一麦克风接收反射回的第一音频信号。
具体地,音频数字信号将第一音频信号发射出去后,第一音频信号遇到障碍物后,会发生反射,反射回来的回波信号会被电子设备的第一麦克风接收。音频数字信号处理模块可以根据第一麦克风接收的音频信号的频率来判断是否为第一听筒发送的第一音频信号。若第一麦克风接收的音频信号的频率为第一频率,则确定第一麦克风接收的音频信号为反射回来的第一音频信号。
步骤307:音频数字信号处理模块基于接收的第一音频信号,通过第一算法,得到超声波接近光状态信息,所述超声波接近光状态信息用于指示所述电子设备的超声波接近光状态。
具体地,第一麦克风在接收到反射回来的第一音频信号后,音频数字信号处理模块可以通过第一算法计算电子设备的超声波接近光状态。其中,第一算法可以为超声波测距算法,电子设备的超声波接近光状态可以为远离状态或接近状态。超声波接近光状态信息可以包括第一状态标识或第二状态标识,当超声波接近光状态信息包括第一状态标识时,表示电子设备的超声波接近光状态为远离状态。当超声波接近光状态信息包括第二状态标识时,标识电子设备的产生波接近光状态为接近状态。
示例性的,音频数字信号处理模块通过第一算法计算超声波接近光状态的具体过程可以为:音频数字信号处理模块计算第一麦克风接收的第一音频信号的能量强度。然后,音频数字信号处理模块可以根据第一麦克风接收的第一音频信号的能量强度与听筒发送的第一音频信号的能量强度的变化值来确定电子设备的超声波接近光状态。能量强度的变化值大于或等于第一阈值,则确定电子设备的超声波接近光状态为远离状态,若能量强度的变化值小于第一阈值,则确定电子设备的超声波接近光状态为接近状态。其中,远离状态可以理解为电子设备距离用户距离远,接近状态可以理解为电子设备离用户距离近。
在一种可能实现的方式中,音频数字信号处理模块还可以通过计算听筒发射第一音频信号与麦克风接收第一音频信号的时间差来判断电子设备的超声波接近光状态是接近状态还是远离状态。
步骤308:音频数字信号处理模块向传感器数字信号处理模块发送超声波接近光状态信息。
具体地,音频数字信号处理模块在计算出电子设备的超声波接近光状态信息后,将该超声波接近光状态信息发送给传感器数字信号处理模块。
步骤309:传感器数字信号处理模块将超声波接近光状态信息发送给超声波接近光判定模块。
具体地,传感器数字信号处理模块在接收到音频数字信号处理模块发送的超声波接近光状态信息后,可以将该超声波接近光状态信息发送给超声波接近光判定模块。传感器数字信号处理模块可以直接将超声波接近光状态信息发送给超声波接近光判定模块。传感器数字信号处理模块也可以先将超声波接近光状态信息发送给位于硬件抽象层的接近光模块,再由接近光模块将超声波接近光状态信息发送给超声波接近光判定模块。
可选地,传感器数字信号处理模块还可以将超声波接近光状态信息发送给第一应用,以便第一应用可以根据超声波接近光状态信息对屏幕进行熄屏/亮屏操作。例如,当超声波接近光状态信息表征远离状态时,第一应用可以保持屏幕亮屏。当超声波接近光状态表征接近状态时,第一应用可以控制屏幕熄屏。传感器数字信号处理模块可以先将超声波接近光状态信息发送给接近光模块,再由接近光模块将超声波接近光状态信息发送给位于硬件抽象层的Sensor Hal模块。然后,再由Sensor Hal模块将超声波接近光状态信息发送给位于应用程序框架层的Sensor Service模块,再由Sensor Service模块将超声波接近光状态信息发送给第一应用。
步骤310:传感器数字信号处理模块向加速度传感器发送第一请求消息。
具体地,第一请求消息用户指示加速度传感器向传感器数字信号处理模块发送加速度数据。
步骤311:加速度传感器向传感器数字处理模块发送加速度数据。
具体地,加速度传感器在接收到传感器数字信号处理模块发送的第一请求消息后,向传感器数字信号处理模块发送电子设备的加速度数据。
步骤312:传感器数字信号处理模块根据接收的加速度数据,通过第二算法计算位姿状态信息,所述位姿状态信息用于表征用户对电子设备的持有状态。
具体地,传感器数字信号处理模块在接收到加速度传感器发送的加速度数据后,传感器数字信号处理模块可以通过第二算法计算电子设备的位姿状态信息。其中,第二算法可以为位姿识别算法,电子设备的位姿状态信息用于表征用户对电子设备的持有状态,加速度数据可以包括电子设备的倾斜角数据。电子设备的位姿状态可以包括拿起状态和放下状态。
示例性的,传感器数字信号处理模块通过第二算法计算电子设备的位姿状态信息的具体过程可以为:传感器数字信号处理模块可以根据加速度数据计算电子设备当前的倾斜角数据,然后根据电子设备可以根据当前的倾斜角数据判断用户当前的对电子设备的持有状态是拿起状态还是放下状态。例如,当电子设备的倾斜角大于或等于第二阈值时,可以确定用户当前对电子设备的持有状态为拿起状态,当电子设备的倾斜角小于第二阈值时,可以确定用户当前对电子设备的持有状态为放下状态。
应当理解的是,步骤312可以在步骤307之前执行,也可以在步骤307之后执行,也可以和步骤307同时执行,本申请实施例不做限制。
步骤313:传感器数字信号处理模块将位姿状态信息发送给超声波接近光判定模块。
具体的,传感器数字信号处理模块在计算出电子设备的位姿状态信息后,可以将位姿状态信息发送给超声波接近光判断模块。传感器数字信号处理模块可以先将位姿状态信息发送给位于硬件抽象层的接近光模块,再由接近光模块再将位姿状态信息发送给超声波接近光模块。或者,传感器数字信号处理模块可以直接将位姿状态信息发送给超声波接近光判断模块,本申请实施例对此不作限制。
示例性的,位姿状态信息可以为第一位姿标识或第二位姿标识。当位姿状态信息为第一位姿标识时,表示用户对电子设备的持有状态为拿起状态,当位姿状态信息为第二位姿标识时,表示用户对电子设备的持有状态为放下状态。
应当理解的是,步骤313可以在步骤308之前执行,也可以在步骤313之后执行,也可以和步骤309同时执行,本申请实施例不做限制。
步骤314:超声波接近光判断模块根据第一状态指示信息判断第一应用是否处于通话状态。
具体的,超声波接近光判断模块根据第一状态指示信息判断第一应用是否处于通话状态。超声波接近光判断模块若识别到第一状态指示信息包括第一指示标识时,确定第一应用当前的状态为通话状态。超声波接近光判断模块若识别到第一状态指示信息包括第二指示标识时,超声波接近光判断模块确定第一应用当前的状态为结束通话的状态。
步骤315:若第一应用处于通话状态,超声波接近光判断模块根据超声波接近光状态信息是否与位姿状态信息相匹配,并得到第一判断结果。
具体的,在第一应用处于通话状态的情况下,超声波接近光判断模块会判断超声波接近光状态信息是否与位姿状态信息相匹配,得到第一判断结果。超声波接近光状态根据超声波接近光状态信息是否与位姿状态信息相匹配主要有以下四种情况:
第一种情况:位姿状态信息包括第一位姿标识的情况下,超声波接近光状态信息包括第一状态标识。当位姿状态信息包括第一位姿标识时,代表用户当前持有电子设备的状态为拿起状态,即:用户将电子设备放在耳边进行通话。此时,若超声波接近光判断模块接收的超声波接近光状态信息包括第一状态标识时,代表电子设备与用户处于接近状态。这就表明,电子设备当前的超声波接近光状态与当前用户持有电子设备的状态是相吻合的,当第一应用通过识别超声波接近光状态信息对屏幕进行熄屏操作时,能够解决用户在通话过程中,由于视线不能聚焦屏幕,导致误触控件,进而影响通话的问题。因此,超声波接近光判断模块可以确定超声波接近光判断模块会判断超声波接近光状态信息与位姿状态信息相匹配,得到第一判断结果。其中,第一判断结果包括第一标识,第一标识用于指示超声波接近光状态信息指示的超声波接近光状态是正确的。
第二种情况:位姿状态信息包括第一位姿标识的情况下,超声波接近光状态信息包括第二状态标识。当位姿状态信息包括第一位姿标识时,代表用户当前持有电子设备的状态为拿起状态,即:用户将电子设备放在耳边进行通话。此时,若超声波接近光判断模块接收的超声波接近光状态信息包括第二状态标识时,代表电子设备与用户处于远离状态。这就表明,电子设备当前的超声波接近光状态与当前用户持有电子设备的状态是不吻合的,即:用户没有将电子设备放在耳边进行通话,用户的实现可以聚焦屏幕,没有必要进行熄屏。当第一应用通过识别超声波接近光状态信息对屏幕进行熄屏操作时,可能会影响用户在通话过程中对电子设备的其他操作(例如,用浏览器查找资料)。因此,超声波接近光判断模块可以确定超声波接近光判断模块会判断超声波接近光状态信息与位姿状态信息不匹配,得到第一判断结果。其中,第一判断结果包括第二标识,第二标识用于指示超声波接近光状态信息指示的超声波接近光状态是错误的。
在一种可能实现的方式中,在位姿状态信息包括第一位姿标识的情况下,超声波接近光状态信息包括第二状态标识时,若在超声波接近光判断模块在第一时长后,接收的超声波接近光状态信息包括第一状态标识。那么,超声波接近光判断模块生成的第一判断结果包括第一标识,即超声波接近光判断模块确定超声波接近光状态信息指示的超声波接近光状态是正确的。其中,第一时长可以基于历史经验值得到,也可以基于实验数据得到,还可以基于历史数据得到,本申请实施例不做限制。
第三种情况:位姿状态信息包括第二位姿标识的情况下,超声波接近光状态信息包括第一状态标识。当位姿状态信息包括第二位姿标识时,代表用户当前持有电子设备的状态为番放下状态,即:用户没有将电子设备放在耳边进行通话。此时,若超声波接近光判断模块接收的超声波接近光状态信息包括第一状态标识时,代表电子设备与用户处于接近状态。这就表明,电子设备当前的超声波接近光状态与当前用户持有电子设备的状态是不吻合的,即:用户没有将电子设备放在耳边进行通话,用户的实现可以聚焦屏幕,没有必要进行熄屏。当第一应用通过识别超声波接近光状态信息对屏幕进行熄屏操作时,可能会影响用户在通话过程中对电子设备的其他操作(例如,用浏览器查找资料)。因此,超声波接近光判断模块可以确定超声波接近光判断模块会判断超声波接近光状态信息与位姿状态信息不匹配,得到第一判断结果。其中,第一判断结果包括第二标识,第二标识用于指示超声波接近光状态信息指示的超声波接近光状态是错误的。
在一种可能实现的方式中,在位姿状态信息包括第二位姿标识的情况下,超声波接近光状态信息包括第一状态标识时,若在超声波接近光判断模块在第一时长后,接收的超声波接近光状态信息包括第二状态标识。那么,超声波接近光判断模块生成的第一判断结果包括第一标识,即超声波接近光判断模块确定超声波接近光状态信息指示的超声波接近光状态是正确的。其中,第一时长可以基于历史经验值得到,也可以基于实验数据得到,还可以基于历史数据得到,本申请实施例不做限制。
第四种情况:位姿状态信息包括第二位姿标识的情况下,超声波接近光状态信息包括第二状态标识。当位姿状态信息包括第二位姿标识时,代表用户当前持有电子设备的状态为番放下状态,即:用户没有将电子设备放在耳边进行通话。此时,若超声波接近光判断模块接收的超声波接近光状态信息包括第二状态标识时,代表电子设备与用户处于远离状态。这就表明,电子设备当前的超声波接近光状态与当前用户持有电子设备的状态是吻合的,即:用户没有将电子设备放在耳边进行通话,用户的实现可以聚焦屏幕,没有必要进行熄屏。当第一应用通过识别超声波接近光状态信息对屏幕进行亮屏操作时,不会影响用户在通话过程中对电子设备的其他操作(例如,用浏览器查找资料)。因此,超声波接近光判断模块可以确定超声波接近光判断模块会判断超声波接近光状态信息与位姿状态信息匹配,得到第一判断结果。其中,第一判断结果包括第一标识。
步骤316:超声波接近光判断模块将第一判断结果发送到云端服务器。
具体的,超声波接近光判断模块在得到第一判断结果后,可以向云端服务器发送判断结果数据帧。该判断结果数据帧可以包括第一判断结果,该判断结果数据帧还可以包括电子设备的机型信息,该判断结果数据帧还可以包括第一应用的标识信息,本申请实施例不做限制。
这样,将第一判断结果发送到云端服务器后,可以便于后台统计超声波接近光状态信息的正确率,从而根据有针对性地对第一算法进行优化,以提高第一算法计算的正确率。
可选的,超声波接近光判断模块在计算出第一判断结果后,可以根据第一判断结果向第一应用对超声波接近光状态信息进行修正,并将修正后的超声波接近光状态信息发送给第一应用。示例性的,在超声波接近光状态信息指示电子设备的接近光状态为接近状态(第一状态标识)的情况下,若第一判断结果为第一标识,则超声波接近光判断模块向第一应用发送超声波接近光状态信息,所述超声波接近光状态信息包括第一状态标识。在超声波接近光状态信息指示电子设备的接近光状态为接近状态(第一状态标识)的情况下,若第一判断结果为第二标识,则超声波接近光判断模块将超声波接近光状态信息进行修正(将第一状态标识修改为第二状态标识),并向第一应用发送修正后的超声波接近光状态信息,所述超声波接近光状态信息包括第二状态标识。这样,超声波接近光判断模块将修正后的超声波接近光状态信息发送给第一应用后,第一应用可以根据修正后的超声波接近光状态信息对屏幕进行熄屏/亮屏操作,提高了熄屏/亮屏的准确性,使之更贴近用户的通话场景,提高用户的使用体验。
本申请实施例,电子设备通过结合电子设备的位姿状态信息判断电子设备的超声波接近光状态信息是否正确,并将判断结果上传到云端服务器,从而有利于后台根据判断结果优化计算超声波接近光状态信息的超声波测距算法,以便提高该算法的准确度。此外,超声波接近光判断模块还可以根据判断结果对超声波接近光状态信息进行修正,并将修正后的超声波接近光状态信息发送给第一应用。由于修正后的超声波接近光状态信息的准确度提升,因此,第一应用根据修正后的超声波接近光状态信息对屏幕进行熄屏/亮屏操作,更符合用户当前的应用场景,提升用户的通话体验和使用体验。
下面对电子设备100的结构进行介绍。请参阅图4,图4是本申请实施例提供的电子设备100的硬件结构示意图。
电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,接近光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图4示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图4示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如Wi-Fi网络),蓝牙(BlueTooth,BT),BLE广播,全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号、降噪、还可以识别声音来源,实现定向录音功能等。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
接近光传感器180L为能够感知环境红外光的传感器,当红外光照射到接近光传感器上后,接近光传感器会发生光电效应,将红外光信号转换为电信号。在接近光传感器启动后,在每个脉冲周期内对红外光的电信号进行电流积分,在每个脉冲周期结束后,会计算得到一个接近光参数。
在本申请实施例中,电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
如图5所示,该电子设备可包括应用处理器模块(Aplication Processor,AP),AP包括:应用程序层、应用程序框架层、硬件抽象层(hardware abstraction layer,HAL)、内核层以及硬件层。其中:
应用程序层可以包括一系列应用程序包。如图5所示,应用程序包可以包括相机应用,图库,日历,第一应用,地图,导航,Wifi,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。如图5所示,应用程序框架层可以包括通知管理器、SersorService、音频服务模块等。其中,SensorService用于实现与第一应用和Sensorhal的通信,将第一应用的信息(例如,用于指示接近光传感器工作的信息)发送给Sensorhal,将Sensorhal发送的信息(例如,接近光状态信息)发送给第一应用。音频服务模块用于实现与第一应用与通话事件记录模块进行通信,将第一应用的信息发送给通话事件记录模块。
硬件抽象层可以包括:多个功能模块。例如,SensorHal、接近光模块、音频模块、超声波接近光判断模块等。SensorHal用于实现应用程序框架层与协应用层之间的通信,例如,SensorHal可以将接近光模块发送的超声波接近光状态信息发送给应用程序框架层中的SensorService,也可以将SensorService发送的用于启动Audio DSP和Sensor DSP的触发消息发送给Sensor DSP。接近光模块用于将SensorHal模块发送的用于启动Audio DSP和Sensor DSP的触发消息发送给Sensor DSP,也可以将Sensor DSP发送的超声波接近光状态信息发送给SensorHal,也可以将Sensor DSP发送的超声波接近光状态信息和位姿状态信息发送给超声波接近光判定模块。音频模块用于音频服务模块与通话事件记录模块之间的通信。超声波接近光判断模块用于判断超声波接近光状态信息的准确度,并生成判断结果,将判断结果上传到云端服务器。
内核层包括:通话事件记录模块,通话事件记录模块用于注册第一应用的通话事件,并将第一状态指示信息发送给超声波接近光判定模块。
硬件层包括:传感器数字信号处理模块、音频数字信号处理模块以及加速度传感器。其中,传感器数字信号处理模块用于基于加速度数据计算电子设备的位姿状态信息,并将位姿状态信息和超声波接近光状态信息发送给接近光模块。音频数字信息好处理模块用于基于反射回的第一音频信号计算超声波接近光状态信息,并将该超声波接近光状态信息发送给传感器数字信号处理模块。
需要说明的是,对与上述方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但本领域技术人员应当知悉,本发明并不受所描述的动作顺序的限制。其次,本领域技术人员也应当知悉,说明书中所述的实施例均属优选实施例,所涉及的动作并不一定是本发明所必须的。
本申请的实施方式可以任意进行组合,以实现不同的技术效果。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如,DVD)、或者半导体介质(例如固态硬盘Solid StateDisk)等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,可以由计算机程序来指令相关的硬件完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。而前述的存储介质包括:ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。
总之,以上所述仅为本发明技术方案的实施例,并非用于限定本发明的保护范围。凡根据本发明的揭露,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种音频通话的处理方法,其特征在于,应用于具备显示屏的电子设备,所述电子设备包括第一应用,所述方法包括:
检测到所述第一应用进入通话状态;
所述电子设备发射第一音频信号;
所述电子设备接收反射回的第一音频信号;
所述电子设备基于所述反射回的第一音频信号通过第一算法得到第一距离状态信息,所述第一距离状态信息用于表征所述电子设备与用户的距离状态为接近状态或远离状态;
所述电子设备基于所述第一距离状态信息确定距离状态;
所述电子设备通过第二算法计算位姿状态信息,所述位姿状态信息用于指示所述电子设备当前的位姿状态为拿起状态或放下状态;
所述电子设备基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确;
所述第一距离状态信息包括第一标识或第二标识,所述第一标识表征所述电子设备与用户的距离状态为接近状态,所述第二标识表征所述电子设备与用户的距离状态为远离状态;
所述位姿状态信息包括第一位姿标识或第二位姿标识,所述第一位姿标识用于表征所述电子设备当前的位姿状态为拿起状态,所述第二位姿标识用于表征所述电子设备当前的位姿状态为放下状态;
所述电子设备基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确,具体包括:
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第一标识,所述电子设备判断所述距离状态正确;
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第二标识,所述电子设备判断所述距离状态错误;或者若所述第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,所述电子设备判断所述距离状态错误;或者若所述第一距离状态信息包括第二标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,所述电子设备判断所述距离状态正确;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第一标识,所述电子设备判断所述距离状态错误;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第二标识,所述电子设备判断所述距离状态正确;或者若所述第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第二标识,所述电子设备判断所述距离状态正确;或者若所述第一距离状态信息包括第一标识,且在第一时长内计算得到的第一距离状态信息包括第一标识,所述电子设备判断所述距离状态错误。
2.如权利要求1所述的方法,其特征在于,所述电子设备基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确之后,还包括:
在判断所述距离状态错误,且所述第一距离状态信息包括所述第一标识的情况下,将所述第一距离状态信息中的第一标识更改为第二标识;
在判断所述距离状态错误,且所述第一距离状态信息包括所述第二标识的情况下,将所述第一距离状态信息中的第二标识更改为第一标识;
所述第一应用根据更改后的第一距离状态信息控制显示屏;
其中,若所述第一距离状态信息包括所述第一标识,所述第一应用控制所述显示屏熄屏,若所述第一距离状态信息包括所述第二标识,所述第一应用控制所述显示屏亮屏。
3.如权利要求1所述的方法,其特征在于,所述电子设备还包括听筒、麦克风、传感器数字信号处理模块、超声波接近光判断模块和音频数字信号处理模块,所述方法包括:
所述第一应用进入通话状态;
所述第一应用启动所述传感器数字信号处理模块和所述音频数字信号处理模块;
所述音频数字信号处理模块生成所述第一音频信号;
所述音频数字信号处理模块通过所述听筒将所述第一音频信号发射出去;
所述音频数字信号处理模块通过所述麦克风接收所述反射回的第一音频信号;
所述音频数字信号处理模块基于所述反射回的第一音频信号通过第一算法得到第一距离状态信息;
所述音频数字信号将所述第一距离状态信息发送给所述超声波接近光判断模块;
所述传感器数字信号处理模块通过第二算法计算位姿状态信息;
所述传感器数字信号处理模块将所述位姿状态信息发送给所述超声波接近光判断模块;
所述超声波接近光判断模块基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确。
4.如权利要求3所述的方法,其特征在于,所述超声波接近光判断模块基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确,具体包括:
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第一标识,所述超声波接近光判断模块判断所述距离状态正确;
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第二标识,所述超声波接近光判断模块判断所述距离状态错误;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第一标识,所述超声波接近光判断模块判断所述距离状态错误;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第二标识,所述超声波接近光判断模块判断所述距离状态正确。
5.如权利要求3所述的方法,其特征在于,所述超声波接近光判断模块基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确,具体包括:
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第一标识,所述超声波接近光判断模块判断所述距离状态正确;
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第一标识,所述超声波接近光判断模块判断所述距离状态正确;
在所述位姿状态信息包括第一位姿标识的情况下,若所述第一距离状态信息包括第二标识,且在第一时长内接收到的第一距离状态信息包括第二标识,所述超声波接近光判断模块判断所述距离状态错误;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第二标识,所述超声波接近光判断模块判断所述距离状态正确;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第二标识,所述超声波接近光判断模块判断所述距离状态正确;
在所述位姿状态信息包括第二位姿标识的情况下,若所述第一距离状态信息包括第一标识,且在第一时长内接收到的第一距离状态信息包括第一标识,所述超声波接近光判断模块判断所述距离状态错误。
6.如权利要求4-5任一项所述的方法,其特征在于,所述超声波接近光判断模块基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确之后,还包括:
在判断所述距离状态错误,且所述第一距离状态信息包括所述第一标识的情况下,所述超声波接近光判断模块将所述第一距离状态信息中的第一标识更改为第二标识;
在判断所述距离状态错误,且所述第一距离状态信息包括所述第二标识的情况下,所述超声波接近光判断模块将所述第一距离状态信息中的第二标识更改为第一标识;
所述超声波接近光判断模块将更改后的第一距离状态信息发送给所述第一应用;
所述第一应用根据更改后的第一距离状态信息控制显示屏;
其中,若所述第一距离状态信息包括所述第一标识,所述第一应用控制所述显示屏熄屏,若所述第一距离状态信息包括所述第二标识,所述第一应用控制所述显示屏亮屏。
7.如权利要求4-5任一项所述的方法,其特征在于,所述超声波接近光判断模块基于所述位姿状态信息和所述第一距离状态信息判断所述距离状态是否正确之后,还包括:
所述超声波接近光判断模块将判断结果发送给云端服务器。
8.一种电子设备,其特征在于,包括:存储器、处理器和触控屏;其中:
所述触控屏用于显示内容;
所述存储器,用于存储计算机程序,所述计算机程序包括程序指令;
所述处理器用于调用所述程序指令,使得所述电子设备执行如权利要求1-7任一项所述的方法。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时,实现如权利要求1-7任意一项所述的方法。
CN202211318159.9A 2022-10-26 2022-10-26 一种音频通话的处理方法、电子设备及存储介质 Active CN116708661B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211318159.9A CN116708661B (zh) 2022-10-26 2022-10-26 一种音频通话的处理方法、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211318159.9A CN116708661B (zh) 2022-10-26 2022-10-26 一种音频通话的处理方法、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN116708661A CN116708661A (zh) 2023-09-05
CN116708661B true CN116708661B (zh) 2024-05-03

Family

ID=87843991

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211318159.9A Active CN116708661B (zh) 2022-10-26 2022-10-26 一种音频通话的处理方法、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN116708661B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106797416A (zh) * 2016-10-31 2017-05-31 北京小米移动软件有限公司 屏幕控制方法及装置
CN108196778A (zh) * 2017-12-29 2018-06-22 努比亚技术有限公司 屏幕状态的控制方法、移动终端及计算机可读存储介质
EP3373032A1 (en) * 2017-03-07 2018-09-12 Guangdong OPPO Mobile Telecommunications Corp., Ltd. Method and device for determining status of terminal, and terminal
CN108810271A (zh) * 2018-06-06 2018-11-13 Oppo广东移动通信有限公司 控制方法、控制装置、电子装置、存储介质和计算机设备
CN110502109A (zh) * 2019-07-31 2019-11-26 Oppo广东移动通信有限公司 信息处理方法、装置、电子设备及存储介质
CN114125148A (zh) * 2022-01-11 2022-03-01 荣耀终端有限公司 电子设备运行模式的控制方法、电子设备及可读存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102232045B1 (ko) * 2019-01-08 2021-03-25 삼성전자주식회사 전자 장치, 전자 장치의 제어 방법 및 컴퓨터 판독 가능 매체.

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106797416A (zh) * 2016-10-31 2017-05-31 北京小米移动软件有限公司 屏幕控制方法及装置
EP3373032A1 (en) * 2017-03-07 2018-09-12 Guangdong OPPO Mobile Telecommunications Corp., Ltd. Method and device for determining status of terminal, and terminal
CN108196778A (zh) * 2017-12-29 2018-06-22 努比亚技术有限公司 屏幕状态的控制方法、移动终端及计算机可读存储介质
CN108810271A (zh) * 2018-06-06 2018-11-13 Oppo广东移动通信有限公司 控制方法、控制装置、电子装置、存储介质和计算机设备
CN110502109A (zh) * 2019-07-31 2019-11-26 Oppo广东移动通信有限公司 信息处理方法、装置、电子设备及存储介质
CN114125148A (zh) * 2022-01-11 2022-03-01 荣耀终端有限公司 电子设备运行模式的控制方法、电子设备及可读存储介质

Also Published As

Publication number Publication date
CN116708661A (zh) 2023-09-05

Similar Documents

Publication Publication Date Title
CN110138937B (zh) 一种通话方法、设备及系统
WO2020041952A1 (zh) 一种基于快递消息控制快递柜的方法及电子设备
WO2021052214A1 (zh) 一种手势交互方法、装置及终端设备
CN112289313A (zh) 一种语音控制方法、电子设备及系统
CN112492193B (zh) 一种回调流的处理方法及设备
CN114173204A (zh) 一种提示消息的方法、电子设备和系统
WO2020216098A1 (zh) 一种跨电子设备转接服务的方法、设备以及系统
CN115437541A (zh) 一种对电子设备的操作方法及电子设备
CN107765251B (zh) 距离检测方法和终端设备
US20230041696A1 (en) Image Syntheis Method, Electronic Device, and Non-Transitory Computer-Readable Storage Medium
CN114070928B (zh) 一种防误触的方法及电子设备
WO2021000817A1 (zh) 环境音处理方法及相关装置
WO2020019355A1 (zh) 一种可穿戴设备的触控方法、可穿戴设备及系统
WO2024087900A1 (zh) 一种摄像头切换方法及相关电子设备
CN115543700A (zh) 手写笔检测方法、装置及终端设备
CN114822525A (zh) 语音控制方法和电子设备
WO2022100219A1 (zh) 数据转移方法及相关装置
EP3862853A1 (en) Touch operation locking method and electronic device
CN110827830B (zh) 基于语音数据的声纹识别方法、装置、终端及存储介质
CN116708661B (zh) 一种音频通话的处理方法、电子设备及存储介质
EP4336356A1 (en) Screen projection method and related apparatus
CN110007761B (zh) 可穿戴设备及其控制方法、计算机可读存储介质
CN109361792B (zh) 一种移动终端、控制方法及装置
CN114079809A (zh) 终端及其输入方法与装置
CN112822246A (zh) 一种设备的识别方法及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant