CN116684517A - 发送响应消息的方法和装置 - Google Patents

发送响应消息的方法和装置 Download PDF

Info

Publication number
CN116684517A
CN116684517A CN202211198538.9A CN202211198538A CN116684517A CN 116684517 A CN116684517 A CN 116684517A CN 202211198538 A CN202211198538 A CN 202211198538A CN 116684517 A CN116684517 A CN 116684517A
Authority
CN
China
Prior art keywords
notification message
module
response message
message
notification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211198538.9A
Other languages
English (en)
Inventor
于泓涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honor Device Co Ltd
Original Assignee
Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honor Device Co Ltd filed Critical Honor Device Co Ltd
Priority to CN202211198538.9A priority Critical patent/CN116684517A/zh
Publication of CN116684517A publication Critical patent/CN116684517A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. SMS or e-mail

Abstract

本申请涉及终端领域,提供了一种发送响应消息的方法和装置。该方法包括:第一终端设备从第二终端设备接收通知消息,所述通知消息包括第一指示信息,第一指示信息指示通知消息的响应消息的接收端为第二终端设备的APP;当通知消息包含动作时,第一终端设备将第一指示信息更新为第二指示信息,第二指示信息指示响应消息的接收端为第一终端设备的通知消息处理模块;第一终端设备通过系统UI模块显示通知消息的UI;第一终端设备接收用户对UI的操作,操作用于触发第一终端设备生成并发送响应消息;第一终端设备通过系统UI模块和通知消息处理模块响应操作,向第二终端设备发送响应消息。该方法能够实现跨设备发送通知消息的回复内容。

Description

发送响应消息的方法和装置
技术领域
本申请涉及终端领域,具体涉及一种发送响应消息的方法和装置。
背景技术
用户在使用终端设备时可能会遇到下述场景。终端设备A收到通知消息,用户正在使用终端设备B工作,终端设备A将通知消息传递至终端设备B,终端设备B将通知消息展示给用户。在一些情况下,用户阅读通知消息后需要向通知消息的发送方发送回复内容,如何通过终端设备B发送回复内容是当前需要解决的问题。
发明内容
本申请实施例提供了一种发送响应消息的方法和装置,能够实现跨设备发送通知消息的回复内容。
第一方面,提供了一种发送响应消息的方法,该方法包括:第一终端设备从第二终端设备接收通知消息,所述通知消息包括第一指示信息,所述第一指示信息指示所述通知消息的响应消息的接收端为所述第二终端设备的APP;所述第一终端设备确定所述通知消息是否包含动作;当所述通知消息包含所述动作时,所述第一终端设备将所述第一指示信息更新为第二指示信息,所述第二指示信息指示所述响应消息的接收端为所述第一终端设备的通知消息处理模块;所述第一终端设备通过系统UI模块显示所述通知消息的UI;所述第一终端设备接收用户对所述UI的操作,所述操作用于触发所述第一终端设备生成并发送所述响应消息;所述第一终端设备通过所述系统UI模块和所述通知消息处理模块响应所述操作,向所述第二终端设备发送所述响应消息,其中,所述系统UI模块根据所述第二指示信息将所述响应消息发送至所述通知消息处理模块,所述通知消息处理模块用于向所述第二终端设备发送所述响应消息。
当通知消息包含动作时,通常需要用户触发第一终端设备执行该动作,例如,该动作为回复动作,用户可以对通知消息的UI进行回复操作,触发系统UI模块生成包含回复内容的响应消息。通知消息中的第一指示信息用于指示回复内容的接收对象(即,第二终端设备的APP),由于通知消息是第二终端设备的APP生成的,在未对通知消息进行更新前,第一终端设备的系统UI模块需要将响应消息发送至第二终端设备的APP,然而,第一终端设备的系统UI模块无法直接与第二终端设备的APP进行通信,因此,不对通知消息进行更新会导致响应消息传输失败。本申请提供的发送响应消息的方法中,第一终端设备的通知消息处理模块收到通知消息后,将通知消息中的第一指示信息更新为第二指示信息,这样,系统UI模块生成响应消息(包含通知消息的回复内容)后,可以将响应消息传递至通知消息处理模块,由通知消息处理模块将响应消息传递至第二终端设备,从而实现了跨设备发送通知消息的回复内容。
可选地,所述第一指示信息承载于第一PendingIntent中,所述第一终端设备将所述第一指示信息更新为第二指示信息,包括:所述第一终端设备通过所述通知消息处理模块将所述第一PendingIntent更新为第二PendingIntent,所述第二PendingIntent包括所述第二指示信息。
可选地,所述第二PendingIntent还包括第三指示信息,所述第三指示信息指示所述系统UI模块在收到所述操作后通过广播方式发送所述响应消息。
若通过调用接口方式直接传输响应消息,会导致代码耦合。通过广播方式发送响应消息,能够避免模块之间调用接口导致的代码耦合,有利于代码维护。
可选地,所述第一终端设备通过所述系统UI模块和所述通知消息处理模块响应所述操作,包括:所述系统UI模块响应于所述操作,生成所述响应消息;所述系统UI模块根据所述第三指示信息发送广播消息;所述通知消息处理模块接收所述广播消息;所述通知消息响应于所述广播消息,执行onReceive方法获取所述响应消息。
可选地,所述向所述第二终端设备发送所述响应消息,包括:所述通知消息处理模块调用通信模块向所述第二终端设备发送所述响应消息。
可选地,所述响应消息包括所述通知消息的回复内容、所述通知消息的标识和所述第一终端设备的标识。
当第二终端设备向多个终端设备发送多个通知消息时,响应消息携带通知消息的标识和第一终端设备的标识能够使第二终端设备识别出响应消息对应的通知消息。
可选地,所述回复内容包括用户编辑的内容或者用户选择的快速回复内容标识。
可选地,所述向所述第二终端设备发送所述响应消息,包括:所述通知消息处理模块将所述响应消息打包为json格式后向所述第二终端设备发送所述响应消息。
第二方面,提供了一种发送响应消息的装置,包括用于执行第一方面中任一种方法的单元。该装置可以是终端设备,也可以是终端设备内的芯片。该装置可以包括输入单元和处理单元。
当该装置是终端设备时,该处理单元可以是处理器,该输入单元可以是通信接口;该终端设备还可以包括存储器,该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该终端设备执行第一方面中的任一种方法。
当该装置是终端设备内的芯片时,该处理单元可以是芯片内部的逻辑处理单元,该输入单元可以是输出接口、管脚或电路等;该芯片还可以包括存储器,该存储器可以是该芯片内的存储器(例如,寄存器、缓存等),也可以是位于该芯片外部的存储器(例如,只读存储器、随机存取存储器等);该存储器用于存储计算机程序代码,当该处理器执行该存储器所存储的计算机程序代码时,使得该芯片执行第一方面的任一种方法。
在一种可能的实现方式中,发送响应消息的装置包括:
接收单元,用于从第二终端设备接收通知消息,所述通知消息包括第一指示信息,所述第一指示信息指示所述通知消息的响应消息的接收端为所述第二终端设备的APP;
处理单元,用于执行:确定所述通知消息是否包含动作;当所述通知消息包含所述动作时,将所述第一指示信息更新为第二指示信息,所述第二指示信息指示所述响应消息的接收端为所述发送响应消息的装置的通知消息处理模块;
显示单元,用于显示所述通知消息的UI;
交互单元,用于接收用户对所述UI的操作,所述操作用于触发所述发送响应消息的装置生成并发送所述响应消息;
所述处理单元还用于通过所述交互单元和所述通知消息处理模块响应所述操作,向所述第二终端设备发送所述响应消息,其中,所述交互单元根据所述第二指示信息将所述响应消息发送至所述通知消息处理模块,所述通知消息处理模块用于向所述第二终端设备发送所述响应消息。
第三方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序代码,当所述计算机程序代码被发送响应消息的装置运行时,使得该装置执行第一方面中的任一种方法。
第四方面,提供了一种计算机程序产品,所述计算机程序产品包括:计算机程序代码,当所述计算机程序代码被发送响应消息的装置运行时,使得该装置执行第一方面中的任一种方法。
附图说明
图1是一种适用于本申请的应用场景的示意图;
图2是一种适用于本申请的装置的硬件系统的示意图;
图3是一种适用于本申请的装置的软件系统的示意图;
图4是本申请提供的一种发送响应消息的方法的示意图;
图5是本申请提供的一种在第一终端设备上显示的通知消息的UI的示意图;
图6是本申请提供的一种在通知消息的UI进行回复操作的示意图;
图7是本申请提供的一种在通知消息的UI进行输入操作的示意图;
图8是本申请提供的一种在通知消息的UI进行发送操作的示意图;
图9是本申请提供的一种发送通知消息的信息流的示意图;
图10是本申请提供的一种发送响应消息的信息流的示意图;
图11是本申请提供的另一种发送响应消息的方法的示意图;
图12是本申请提供的再一种发送响应消息的方法的示意图。
具体实施方式
下面将结合附图,对本申请实施例中的技术方案进行描述。
图1是一种适用于本申请的应用场景的示意图。
手机与平板电脑(PAD)之间通过通信连接(如,蓝牙连接)进行通信。手机收到短信后,在屏幕上显示短信内容,并将通过通知消息将短信内容发送至PAD。PAD收到通知消息后,获取短信内容,将短信内容显示在屏幕上,这样,即使用户未使用手机,也能通过PAD看到短信,减小了错过重要通知的概率。PAD显示的短信内容除了包括手机显示的短信内容外,还包括“来自您的Magic3”,用于提示用户该短信内容的来源。
在一些情况下,用户需要回复短信。但是,PAD并不是接收短信的设备,PAD仅仅显示了手机收到的短信,当用户使用PAD回复短信时,会出现回复失败的现象,下面将详细介绍本申请提供的解决方案。
首先介绍适用于本申请的装置的硬件系统和软件系统。
图2示出了一种适用于本申请的装置的硬件系统。
装置100可以是手机、可折叠电子设备、平板电脑、桌面型计算机、膝上型计算机、手持计算机、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、蜂窝电话、个人数字助理(personal digital assistant,PDA)、增强现实(augmented reality,AR)设备、虚拟现实(virtual reality,VR)设备、人工智能(artificial intelligence,AI)设备、可穿戴式设备、车载设备、智能家居设备或智慧城市设备。本申请实施例对该装置100的具体类型不作特殊限制。
装置100可以包括处理器110、外部存储器接口120、内部存储器121、通用串行总线(universal serial bus,USB)接口130、充电管理模块140、电源管理模块141、电池142、天线1、天线2、移动通信模块150、无线通信模块160、音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D、传感器模块180、按键190、马达191、指示器192、摄像模组193、显示屏194以及用户标识模块(subscriber identification module,SIM)卡接口195。其中传感器模块180可以包括压力传感器180A、陀螺仪传感器180B、气压传感器180C、磁传感器180D、加速度传感器180E、距离传感器180F、接近光传感器180G、指纹传感器180H、温度传感器180J、触摸传感器180K、环境光传感器180L和骨传导传感器180M等。
需要说明的是,图2所示的结构并不构成对装置100的具体限定。在本申请另一些实施例中,装置100可以包括比图2所示的部件更多或更少的部件,或者,装置100可以包括图2所示的部件中某些部件的组合,或者,装置100可以包括图2所示的部件中某些部件的子部件。图2示的部件可以以硬件、软件、或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元。例如,处理器110可以包括以下处理单元中的至少一个:应用处理器(application processor,AP)、调制解调处理器、图形处理器(graphics processing unit,GPU)、图像信号处理器(image signal processor,ISP)、控制器、视频编解码器、数字信号处理器(digital signal processor,DSP)、基带处理器、神经网络处理器(neural-network processing unit,NPU)。其中,不同的处理单元可以是独立的器件,也可以是集成的器件。
控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。例如,处理器110可以包括以下接口中的至少一个:内部集成电路(inter-integrated circuit,I2C)接口、内部集成电路音频(inter-integrated circuit sound,I2S)接口、脉冲编码调制(pulse codemodulation,PCM)接口、通用异步接收传输器(universal asynchronous receiver/transmitter,UART)接口、移动产业处理器接口(mobile industry processor interface,MIPI)、通用输入输出(general-purpose input/output,GPIO)接口、SIM接口、USB接口。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K、充电器、闪光灯、摄像模组193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现装置100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样、量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194和摄像模组193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI)、显示屏串行接口(display serial interface,DSI)等。在一些实施例中,处理器110和摄像模组193通过CSI接口通信,实现装置100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现装置100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号接口,也可被配置为数据信号接口。在一些实施例中,GPIO接口可以用于连接处理器110与摄像模组193,显示屏194、无线通信模块160、音频模块170和传感器模块180。GPIO接口还可以被配置为I2C接口、I2S接口、UART接口或MIPI接口。
图2所示的各模块间的连接关系只是示意性说明,并不构成对装置100的各模块间的连接关系的限定。可选地,装置100的各模块可以采用与上述实施例中的连接方式不同的接口连接方式,或者,装置100的各模块可以采用上述实施例中多种连接方式的组合。
USB接口130是符合USB标准规范的接口,例如可以是迷你(Mini)USB接口、微型(Micro)USB接口或C型USB(USB Type C)接口。USB接口130可以用于连接充电器为装置100充电,也可以用于装置100与外围设备之间传输数据,还可以用于连接耳机以通过耳机播放音频。USB接口130还可以用于连接其他装置,例如AR设备。
充电管理模块140用于从充电器接收电力。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的电流。在一些无线充电的实施例中,充电管理模块140可以通过装置100的无线充电线圈接收电磁波(电流路径如虚线所示)。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为装置100供电。
电源管理模块141用于连接电池142、充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110、内部存储器121、显示屏194、摄像模组193和无线通信模块160供电。电源管理模块141还可以用于监测电池容量、电池循环次数和电池健康状态(例如,漏电、阻抗)等参数。可选地,电源管理模块141可以设置于处理器110中,或者,电源管理模块141和充电管理模块140可以设置于同一个器件中。
装置100的无线通信功能可以通过天线1、天线2、移动通信模块150、无线通信模块160、调制解调处理器以及基带处理器等器件实现。
天线1和天线2用于发射和接收电磁波信号。装置100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在装置100上的无线通信的解决方案,例如下列方案中的至少一个:第二代(2th generation,2G)移动通信解决方案、第三代(3thgeneration,3G)移动通信解决方案、第四代(4th generation,5G)移动通信解决方案、第五代(5th generation,5G)移动通信解决方案。移动通信模块150可以包括至少一个滤波器、开关、功率放大器和低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波和放大等处理,随后传送至调制解调处理器进行解调。移动通信模块150还可以放大经调制解调处理器调制后的信号,放大后的该信号经天线1转变为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(例如,扬声器170A和受话器170B)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
与移动通信模块150类似,无线通信模块160也可以提供应用在装置100上的无线通信解决方案,例如下列方案中的至少一个:无线局域网(wireless local areanetworks,WLAN)、蓝牙(bluetooth,BT)、全球导航卫星系统(global navigationsatellite system,GNSS)、调频(frequency modulation,FM)、近场通信(near fieldcommunication,NFC)、红外(infrared,IR)。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,并将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频和放大,该信号经天线2转变为电磁波辐射出去。
在一些实施例中,装置100的天线1和移动通信模块150耦合,装置100的天线2和无线通信模块160耦合。
装置100可以通过GPU、显示屏194以及应用处理器实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194可以用于显示图像或视频。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light-emitting diode,OLED)、有源矩阵有机发光二极体(active-matrix organic light-emitting diode,AMOLED)、柔性发光二极管(flex light-emitting diode,FLED)、迷你发光二极管(mini light-emitting diode,Mini LED)、微型发光二极管(micro light-emitting diode,Micro LED)、微型OLED(Micro OLED)或量子点发光二极管(quantum dotlight emitting diodes,QLED)。在一些实施例中,装置100可以包括1个或N个显示屏194,N为大于1的正整数。
装置100可以通过摄像模组193、ISP、DSP、视频编解码器、GPU、显示屏194以及应用处理器等实现拍摄功能。
摄像模组193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的红绿蓝(red green blue,RGB),YUV等格式的图像信号。在一些实施例中,装置100可以包括1个或N个摄像模组193,N为大于1的正整数。
ISP用于处理摄像模组193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP可以对图像的噪点、亮度和色彩进行算法优化,ISP还可以优化拍摄场景的曝光和色温等参数。在一些实施例中,ISP可以设置在摄像模组193中。
DSP用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当装置100在频点选择时,DSP用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。装置100可以支持一种或多种视频编解码器。这样,装置100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1、MPEG2、MPEG3和MPEG4。
NPU是一种借鉴生物神经网络结构的处理器,例如借鉴人脑神经元之间传递模式对输入信息快速处理,还可以不断地自学习。通过NPU可以实现装置100的智能认知等功能,例如:图像识别、人脸识别、语音识别和文本理解。
在一些实施例中,摄像模组193可以由彩色摄像模组和3D感测模组组成。
在一些实施例中,彩色摄像模组的摄像头的感光元件可以是CCD或CMOS光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。
在一些实施例中,3D感测模组可以是飞行时间(time of flight,TOF)3D感测模块或结构光(structured light)3D感测模块。其中,结构光3D感测是一种主动式深度感测技术,结构光3D感测模组的基本零组件可包括IR发射器、IR相机模等。结构光3D感测模组的工作原理是先对被拍摄物体发射特定图案的光斑(pattern),再接收该物体表面上的光斑图案编码(light coding),进而比对与原始投射光斑的异同,并利用三角原理计算出物体的三维坐标。该三维坐标中就包括装置100距离被拍摄物体的距离。其中,TOF 3D感测可以是主动式深度感测技术,TOF 3D感测模组的基本组件可包括IR发射器、IR相机模等。TOF 3D感测模组的工作原理是通过红外线折返的时间去计算TOF 3D感测模组跟被拍摄物体之间的距离(即深度),以得到3D景深图。
结构光3D感测模组还可应用于人脸识别、体感游戏机、工业用机器视觉检测等领域。TOF 3D感测模组还可应用于游戏机、AR/VR等领域。
在另一些实施例中,摄像模组193还可以由两个或更多个摄像头构成。这两个或更多个摄像头可包括彩色摄像头,彩色摄像头可用于采集被拍摄物体的彩色图像数据。这两个或更多个摄像头可采用立体视觉(stereo vision)技术来采集被拍摄物体的深度数据。立体视觉技术是基于人眼视差的原理,在自然光源下,透过两个或两个以上的摄像头从不同的角度对同一物体拍摄影像,再进行三角测量法等运算来得到装置100与被拍摄物之间的距离信息,即深度信息。
在一些实施例中,装置100可以包括1个或多个摄像模组193。例如,装置100可以包括1个前置摄像模组193以及1个后置摄像模组193。其中,前置摄像模组193通常可用于采集面对显示屏194的拍摄者自己的彩色图像数据以及深度数据,后置摄像模组可用于采集拍摄者所面对的拍摄对象(如人物、风景等)的彩色图像数据以及深度数据。
在一些实施例中,处理器110中的CPU、GPU或NPU可以对摄像模组193所采集的彩色图像数据和深度数据进行处理。在一些实施例中,NPU可以通过骨骼点识别技术所基于的神经网络算法,例如卷积神经网络算法来识别摄像模组193所采集的彩色图像数据,以确定被拍摄人物的骨骼点。CPU或GPU也可来运行神经网络算法以实现根据彩色图像数据确定被拍摄人物的骨骼点。在一些实施例中,CPU、GPU或NPU还可用于根据摄像模组193(可以是3D感测模组)所采集的深度数据和已识别出的骨骼点来确认被拍摄人物的身材(如身体比例、骨骼点之间的身体部位的胖瘦情况),并可以进一步确定针对该被拍摄人物的身体美化参数,最终根据该身体美化参数对被拍摄人物的拍摄图像进行处理,以使得该拍摄图像中该被拍摄人物的体型被美化。
外部存储器接口120可以用于连接外部存储卡,例如安全数码(secure digital,SD)卡,实现扩展装置100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐和视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能(例如,声音播放功能和图像播放功能)所需的应用程序。存储数据区可存储装置100使用过程中所创建的数据(例如,音频数据和电话本)。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如:至少一个磁盘存储器件、闪存器件和通用闪存存储器(universal flash storage,UFS)等。处理器110通过运行存储在内部存储器121的指令和/或存储在设置于处理器中的存储器的指令,执行装置100的各种处理方法。
装置100可以通过音频模块170、扬声器170A、受话器170B、麦克风170C、耳机接口170D以及应用处理器等实现音频功能,例如,音乐播放和录音。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也可以用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170或者音频模块170的部分功能模块可以设置于处理器110中。
扬声器170A,也称为喇叭,用于将音频电信号转换为声音信号。装置100可以通过扬声器170A收听音乐或免提通话。
受话器170B,也称为听筒,用于将音频电信号转换成声音信号。当用户使用装置100接听电话或语音信息时,可以通过将受话器170B靠近耳朵接听语音。
麦克风170C,也称为话筒或传声器,用于将声音信号转换为电信号。当用户拨打电话或发送语音信息时,可以通过靠近麦克风170C发声将声音信号输入麦克风170C。装置100可以设置至少一个麦克风170C。在另一些实施例中,装置100可以设置两个麦克风170C,以实现降噪功能。在另一些实施例中,装置100还可以设置三个、四个或更多麦克风170C,以实现声音信号采集、降噪、识别声音来源和定向录音等功能。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动装置100平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,例如可以是电阻式压力传感器、电感式压力传感器或电容式压力传感器。电容式压力传感器可以是包括至少两个具有导电材料的平行板,当力作用于压力传感器180A,电极之间的电容改变,装置100根据电容的变化确定压力的强度。当触摸操作作用于显示屏194时,装置100根据压力传感器180A检测所述触摸操作。装置100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令;当触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定装置100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定装置100围绕三个轴(即,x轴、y轴和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。例如,当快门被按下时,陀螺仪传感器180B检测装置100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消装置100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航和体感游戏等场景。
气压传感器180C用于测量气压。在一些实施例中,装置100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。装置100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当装置100是翻盖机时,装置100可以根据磁传感器180D检测翻盖的开合。装置100可以根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测装置100在各个方向上(一般为x轴、y轴和z轴)加速度的大小。当装置100静止时可检测出重力的大小及方向。加速度传感器180E还可以用于识别装置100的姿态,作为横竖屏切换和计步器等应用程序的输入参数。
距离传感器180F用于测量距离。装置100可以通过红外或激光测量距离。在一些实施例中,例如在拍摄场景中,装置100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(light-emitting diode,LED)和光检测器,例如,光电二极管。LED可以是红外LED。装置100通过LED向外发射红外光。装置100使用光电二极管检测来自附近物体的红外反射光。当检测到反射光时,装置100可以确定附近存在物体。当检测不到反射光时,装置100可以确定附近没有物体。装置100可以利用接近光传感器180G检测用户是否手持装置100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式或口袋模式的自动解锁与自动锁屏。
环境光传感器180L用于感知环境光亮度。装置100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测装置100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。装置100可以利用采集的指纹特性实现解锁、访问应用锁、拍照和接听来电等功能。
温度传感器180J用于检测温度。在一些实施例中,装置100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,装置100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,装置100对电池142加热,以避免低温导致装置100异常关机。在其他一些实施例中,当温度低于又一阈值时,装置100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称为触控器件。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,触摸屏也称为触控屏。触摸传感器180K用于检测作用于其上或其附近的触摸操作。触摸传感器180K可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于装置100的表面,并且与显示屏194设置于不同的位置。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键和音量键。按键190可以是机械按键,也可以是触摸式按键。装置100可以接收按键输入信号,实现与按键输入信号相关的功能。
马达191可以产生振动。马达191可以用于来电提示,也可以用于触摸反馈。马达191可以对作用于不同应用程序的触摸操作产生不同的振动反馈效果。对于作用于显示屏194的不同区域的触摸操作,马达191也可产生不同的振动反馈效果。不同的应用场景(例如,时间提醒、接收信息、闹钟和游戏)可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态和电量变化,也可以用于指示消息、未接来电和通知。
SIM卡接口195用于连接SIM卡。SIM卡可以插入SIM卡接口195实现与装置100的接触,也可以从SIM卡接口195拔出实现与装置100的分离。装置100可以支持1个或N个SIM卡接口,N为大于1的正整数。同一个SIM卡接口195可以同时插入多张卡,所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容外部存储卡。装置100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,装置100采用嵌入式SIM(embedded-SIM,eSIM)卡,eSIM卡可以嵌在装置100中,不能和装置100分离。
上文详细描述了装置100的硬件系统,下面介绍装置100的软件系统。软件系统可以采用分层架构、事件驱动架构、微核架构、微服务架构或云架构,本申请实施例以分层架构为例,示例性地描述装置100的软件系统。
如图2所示,采用分层架构的软件系统分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,软件系统可以分为五层,从上至下分别为应用程序层、应用程序框架层、原生(native)层、硬件抽象层(hardware abstractlayer,HAL)以及内核层。
应用程序层可以包括一系列应用程序包。
应用程序包可以包括短信、系统用户界面(user interface,UI)、超级通知、音乐、视频、图库、通话、导航和蓝牙等应用程序(application,APP)。
应用程序框架层为应用程序层的应用程序提供应用程序编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层可以包括一些预定义的函数。
例如,应用程序框架层包括应用应用接继续框架、视图系统和管理器,其中,管理器可以包括活动管理器、通知管理器、窗口管理器、输入管理器和资源管理器。
应用接继续框架用于APP之间的数据传递,例如,应用接继续框架可以接收超级通知APP发送的通知消息,随后通过蓝牙模块和蓝牙驱动将通知消息发送出去。应用接继续框架也可以通过蓝牙驱动和蓝牙模块接收该通知消息的响应消息,并将响应消息传递至超级通知APP。
视图系统包括可视控件,例如显示文字的控件和显示图片的控件。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成,例如,包括短信通知图标的显示界面可以包括显示文字的视图以及显示图片的视图。
活动管理器可以提供活动管理服务(activity manager service,AMS),AMS可以用于系统组件(例如,活动、服务、内容提供者和广播接收器)的启动、切换、调度以及应用进程的管理和调度工作。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于下载完成告知和消息提醒。通知管理器还可以管理以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知。通知管理器还可以管理以对话窗口形式出现在屏幕上的通知,例如在状态栏提示文本信息、发出提示音、电子设备振动以及指示灯闪烁。
窗口管理器提供窗口管理服务(window manager service,WMS),WMS可以用于窗口管理、窗口动画管理、surface管理以及作为输入系统的中转站。
输入管理器可以提供输入管理服务(input manager service,IMS),IMS可以用于管理系统的输入,例如,触摸屏输入、按键输入和传感器输入等。IMS从输入设备节点取出事件,通过和WMS的交互,将事件分配至合适的窗口。
资源管理器为应用程序提供各种资源,比如本地化字符串、图标、图片、布局文件和视频文件。
native层又称为系统运行库层,包含原生C/C++库和安卓运行时(AndroidTMruntime,ART)。
原生C/C++库可以包括多个功能模块,例如:表面管理器(surface manager)、媒体框架(media framework)、3D图形处理库(例如,嵌入系统开放图形库(open graphicslibrary for embedded system,OpenGL ES))、2D图形引擎(例如,影像图形库(skiagraphics library,SGL))和C标准库(C standard library,libc)。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D图层和3D图层的融合。
媒体框架支持多种音频格式的回放和录制、多种视频格式回放和录制以及静态图像文件。媒体框架可以支持多种音视频编码格式,例如:MPEG4、H.264、动态图像专家组音频层面Ⅲ(moving picture experts group audio layerⅢ,MP3)、高级音频编码(advancedaudio coding,AAC)、自适应多速率(adaptive multi-rate,AMR)、联合图像专家组(jointphotographic experts group,JPEG)和便携式网络图形(portable network graphics,PNG)。
SGL是2D绘图的绘图引擎。
OpenGL ES可以用于实现3D图形绘图、图像渲染、合成和图层处理。
libc用于提供基本的C语言函数。
ART主要负责将源代码转换为机器码。ART还具有内存管理和垃圾回收等功能。
ART包括核心库和虚拟机。
核心库主要用于提供基本的Java类库,例如基础数据结构、数学、输入/输出(input/output,I/O)、工具、网络等库。核心库还为开发人员提供了系统API。
虚拟机可以是Dalvik虚拟机或者ART虚拟机,其中,Dalvik虚拟机采用即时(justin time,JIT)编译策略将源代码转换为机器码,ART虚拟机采用提前(ahead or time,AOT)编译策略将源代码转换为机器码。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件转换为二进制文件。虚拟机用于执行对象生命周期的管理、堆栈管理、线程管理、安全和异常的管理、以及垃圾回收等功能。
硬件抽象层运行于用户空间(user space),对内核层驱动进行封装,向上层提供调用接口。硬件抽象层例如包含音频模块、蓝牙模块、相机模块和显示模块。
内核层是硬件和软件之间的层。内核层例如包含音频驱动、蓝牙驱动、相机驱动和显示驱动。
可以理解的是,图2和图3所示的硬件结构和软件架构仅仅是对装置100的示例性介绍,不构成对装置100在硬件和软件上的限制,装置100还可以具有其他类型的硬件结构和软件架构。
下面结合触控场景,示例性说明装置100的软件系统以及硬件系统的工作流程。
当用户在触摸传感器180K上进行触摸操作时,相应的硬件中断被发送至操作系统层,操作系统层将触摸操作加工成原始输入事件,该原始输入事件例如包括触摸操作的坐标和时间戳等信息。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该原始输入事件所对应的控件。当上述触摸操作为单击操作、上述控件为短信APP的发送控件时,上述控件调用应用程序框架层的接口,将单击操作传递至短信APP,随后,短信APP通过调用内核层的蓝牙驱动,通过无线通信模块160将回复内容发送出去。
图4是本申请提供的一种发送响应消息的方法。该方法包括以下内容。
S410,第一终端设备从第二终端设备接收通知消息,所述通知消息包括第一指示信息,所述第一指示信息指示所述通知消息的响应消息的接收端为所述第二终端设备的APP。
第一终端设备的一个示例是图1中的PAD,第二终端设备的一个示例是图1中的手机,本申请实施例对第一终端设备和第二终端设备的具体类型不做限定。
第一终端设备可以通过无线连接从第二终端设备接收通知消息,该无线连接可以是蓝牙连接,也可以是无线保真(wireless fidelity,WiFi)连接、蜂群(ZigBee)连接或超宽带(ultra wide band,UWB)连接,本申请实施例对第一终端设备从第二终端设备接收通知消息的具体方式不做限定。
通知消息可以包含图1中的短信内容。由于通知消息是短信APP生成的,因此,通知消息还包括指示通知消息的响应消息的接收端(即,短信APP)的信息(即,第一指示信息)。
S420,所述第一终端设备确定所述通知消息是否包含动作。
第一终端设备收到通知消息后,需要确定通知消息是否包含动作(action),该动作可以是回复、忽略或提醒。通知消息可以包含一个动作,也可以包含多个动作。用户可以执行与动作相关的操作,例如,当动作为回复时,用户可以输入回复内容。
若通知消息包含动作,说明第一终端设备需要将用户执行与动作相关的操作的结果反馈给第二终端设备,第一终端设备需要对通知消息进行特殊处理(如S430所示),以确保用户的操作结果能够反馈至第二终端设备。
S430,当所述通知消息包含所述动作时,所述第一终端设备将所述第一指示信息更新为第二指示信息,所述第二指示信息指示所述响应消息的接收端为所述第一终端设备的通知消息处理模块。
当通知消息包含动作时,第一终端设备需要将第一指示信息更新为第二指示信息,以便于系统UI模块能够将用户的操作结果反馈给第一终端设备的通知消息处理模块。第一终端设备的通知消息处理模块例如是图3所示的超级通知APP。
可选地,第一指示信息承载于第一PendingIntent中,第一终端设备可以通过通知消息处理模块将第一PendingIntent更新为第二PendingIntent,第二PendingIntent包括第二指示信息。
S440,所述第一终端设备通过系统UI模块显示所述通知消息的UI。
通知消息的UI如图1中PAD显示的短信界面所示。
S450,所述第一终端设备接收用户对所述UI的操作,所述操作用于触发所述第一终端设备生成并发送所述响应消息。
如图5所示,当用户准备回复短信时,用户可以点击UI上的“回复”图标,触发第一终端设备显示图6所示的UI,随后,用户可以通过点击软键盘输入回复内容,也可以通过点击预设文字快速输入回复内容,快速输入回复内容的示例如图7所示。回复内容输入完成后,用户可以点击发送图标,如图8所示,触发第一终端设备生成包含回复内容的响应消息。第一终端设备可以执行S460向第二终端设备发送响应消息。
可选地,第二PendingIntent还包括第三指示信息,第三指示信息指示系统UI模块在收到用户的发送操作后通过广播方式发送响应消息。
若通过调用接口方式直接传输响应消息,会导致代码耦合。通过广播方式发送响应消息,能够避免模块之间调用接口导致的代码耦合,有利于代码维护。
S460,所述第一终端设备通过所述系统UI模块和所述通知消息处理模块响应所述操作,向所述第二终端设备发送所述响应消息,其中,所述系统UI模块根据所述第二指示信息将所述响应消息发送至所述通知消息处理模块,所述通知消息处理模块用于向所述第二终端设备发送所述响应消息。
系统UI模块响应于用户的发送操作,生成响应消息,并执行第二PendingIntent。在执行第二PendingIntent时,系统UI模块根据第二PendingIntent中的第三指示信息发送广播消息。通知消息处理模块接收到广播消息后,执行onReceive方法获取所述响应消息。该响应消息可以是Intent消息。
可选地,响应消息包括通知消息的回复内容、通知消息的标识(sbnKey)和第一终端设备的标识(nodeID)。
当第二终端设备向多个终端设备发送多个通知消息时,响应消息携带通知消息的标识和第一终端设备的标识能够使第二终端设备识别出响应消息对应的通知消息。
可选地,回复内容可以是用户编辑的内容,也可以是用户选择的快速回复内容标识。
通知消息处理模块获取响应消息后,可以调用通信模块向第二终端设备发送响应消息。通信模块可以是图3所示的应用接续框架。可选地,通知消息处理模块可以将响应消息打包为脚本对象简谱(javascript object notation,json)格式后向第二终端设备发送响应消息。
第二终端设备收到响应消息后,可以通过第二终端设备的通知消息处理模块将响应消息传递至短信APP,由短信APP将回复内容发送出去。
由上述实施例可知,当通知消息包含动作时,通常需要用户触发第一终端设备执行该动作。由于通知消息是短信APP生成的,通知消息中的第一指示信息指示的回复内容的接收对象为第二终端设备的短信APP,在未对通知消息进行更新前,第一终端设备的系统UI模块需要将响应消息发送至第二终端设备的短信APP,然而,第一终端设备的系统UI模块无法直接与第二终端设备的短信APP进行通信,因此,不对通知消息进行更新会导致响应消息传输失败。在上述方法中,第一终端设备的通知消息处理模块收到通知消息后,将通知消息中的第一指示信息更新为第二指示信息,这样,系统UI模块生成响应消息(包含通知消息的回复内容)后,可以将响应消息传递至通知消息处理模块,由通知消息处理模块将响应消息传递至第二终端设备,从而实现了跨设备发送通知消息的回复内容。
下面,再从模块交互的角度解释本申请提供的发送响应消息的方法。
如图9所示,手机的短信APP收到短信后,生成包含短信内容的通知消息,该通知消息还包括第一PendingIntent。随后,短信APP将该通知消息传递至超级通知APP,超级通知APP对该通知消息写入动作并进行编码,生成json格式的通知消息。超级通知APP调用应用接续框架,将通知消息传递至应用接续框架。应用接续框架通过蓝牙模块将应用接续框架传递至蓝牙驱动,蓝牙驱动控制手机蓝牙芯片将通知消息发送至PAD蓝牙芯片。
PAD蓝牙芯片收到通知消息后,将通知消息传递至PAD的蓝牙驱动,随后,通知消息被逐级传递至超级通知APP,超级通知APP执行S420和S430后,将通知消息中的第一PendingIntent更新为第二PendingIntent,随后,通知消息被传递至系统UI模块,系统UI模块将通知消息中的短信内容解析出来并显示PAD的屏幕上。
用户在PAD的屏幕上输入通知消息的回复内容后,点击发送图标,触发PAD执行发送响应消息的流程。
PAD执行发送响应消息的流程如图10所示。
系统UI模块获取用户输入的回复内容,生成响应消息(如,intent消息),该响应消息还可以包括消息的回复内容、sbnKey和nodeID。其中,当用户使用软键盘输入文字时,回复内容为用户输入的问题;当用户使用快速回复功能时,回复内容为快速回复内容标识(clickID)。
系统UI模块执行第二PendingIntent,发送广播消息,PAD的超级通知APP收到广播消息后,执行onReceive方法,从系统UI模块获取响应消息。随后,PAD的超级通知APP对通知消息进行编码,生成json格式的响应消息。响应消息通过应用接续框架、蓝牙模块和蓝牙驱动被传递至PAD蓝牙芯片。PAD蓝牙芯片将响应消息传递至手机蓝牙芯片。
手机蓝牙芯片收到响应消息后,将响应消息传递至手机的蓝牙驱动,随后,响应消息被逐级传递至超级通知APP,超级通知APP基于sbnKey和nodeID确定响应消息对应的通知消息,执行Notification.Action将回复内容传递至该通知消息对应的APP(短信APP)。
图11是本申请实施例提供的另一种发送响应消息的方法。该方法包括以下内容。
S1101,手机的超级通知APP接收通知消息。
该通知消息可以是短信APP发送的消息。
S1102,手机的超级通知APP对通知消息写action后封装。
超级通知APP可以根据通知消息的类型确定是否写action,例如,若通知消息为从短信APP接收的消息,这种消息通常需要用户处理,超级通知APP可以对通知消息写action;若通知消息为从即时通讯APP收到的登录成功消息,这种消息通常不需要用户处理,超级通知APP可以不对通知消息写action。
超级通知APP对通知消息写action后,将通知消息封装为json格式,随后执行下列步骤。
S1103,手机的超级通知APP将通知消息发送至手机的应用接续框架。
S1104,手机的应用接续框架将通知消息发送至PAD的应用接续框架。
手机的应用接续框架可以通过蓝牙连接发送通知消息,也可以通过其他连接发送通知消息。
S1105,PAD的应用接续框架将通知消息发送至PAD的超级通知APP。
S1106,PAD的超级通知APP判断通知消息是否有action,当确定通知消息含有action时,通过更新通知消息中的PendingIntent,指示通过广播方式发送响应消息,并且,指示响应消息的接收端为超级通知。
超级通知APP可以将通知消息携带的第一PendingIntent更新为第二PendingIntent,第二PendingIntent包含第二指示信息和第三指示信息,第二指示信息指示该通知消息的响应消息的接收端为PAD的超级通知APP,第三指示信息指示系统UI模块在收到用户的发送操作后通过广播方式发送响应消息。
S1107,PAD的超级通知APP将通知消息发送至系统UI。
S1108,系统UI显示通知消息的UI。
系统UI将通知消息的UI显示在屏幕上,若action包括回复、忽略和提醒,则通知消息的UI如图5所示。
用户可以对通知消息的UI进行操作,例如,用户可以点击通知消息的UI的回复图标,调出输入框和软键盘,随后输入回复内容。最后,用户可以点击发送图标(即,用户对系统UI执行了发送操作),触发系统UI发送回复内容。
S1109,系统UI接收用户对UI的操作,生成响应消息,并执行通知消息中的PendingIntent。
该响应消息除了包括用户输入的内容外,还包括sbnKey和nodeID,sbnKey用于标识该响应消息对应的通知消息,nodeID用于标识响应消息的来源(即,PAD)。
系统UI执行通知消息中的PendingIntent(即,第二PendingIntent),确定通过广播方式发送响应消息。
S1110,系统UI发送广播消息。
S1111,PAD的超级通知APP收到广播消息后,执行onReceive方法,获取响应消息。
PAD的超级通知APP将响应消息封装为json格式,随后执行下列步骤。
S1112,PAD的超级通知APP向PAD的应用接续框架发送响应消息。
S1113,PAD的应用接续框架向手机的应用接续框架发送响应消息。
PAD的应用接续框架可以通过蓝牙连接发送响应消息,也可以通过其他连接发送响应消息。
S1114,手机的应用接续框架向手机的超级通知APP发送响应消息。
S1115,手机的超级通知APP获取响应消息中的回复内容,发送该回复内容。
超级通知APP基于sbnKey和nodeID确定响应消息对应的通知消息,执行Notification.Action将回复内容发送至该通知消息对应的APP(如,短信APP)。
图12是本申请实施例提供的另一种发送响应消息的方法。该方法包括以下内容。
S1201,手机的超级通知管理器接收通知消息。
超级通知管理器(SuperNotificationManager)是超级通知APP的子模块。超级通知管理器收到的通知消息可以是短信APP发送的消息。
S1202,超级通知管理器执行onNotificationPosted。
执行onNotificationPosted方法用于启动通知消息的流转(即,将通知消息发送至PAD)。
S1203,超级通知管理器将通知消息发送至通知转移模块。
S1204,通知转移模块对通知消息进行编码,并写入action。
通知转移模块(NotificationTransfer)是超级通知APP的子模块。通知转移模块基于超级通知管理器的调用对通知消息执行写action(writeActions)操作,并对通知消息编码(encode),生成json格式的通知消息。
S1205,通知转移模块将包含action的通知消息传递至超级通知管理器。
S1206,超级通知管理器将包含action的通知消息传递至手机的应用接续框架(HandoffSdkDelegate)。
S1207,手机的应用接续框架将包含action的通知消息传递至PAD的应用接续框架。
手机的应用接续框架可以通过手机的蓝牙模块调用蓝牙驱动,通过蓝牙驱动将包含action的通知消息传递至PAD的蓝牙驱动,随后,PAD的蓝牙驱动将包含action的通知消息传递至PAD的应用接续框架。
S1208,PAD的应用接续框架将包含action的通知消息传递至远端消息接收模块。
远端消息接收模块(RemoteMessageReceiverlmpl)是PAD的超级通知APP的子模块。
S1209,远端消息接收模块将包含action的通知消息传递至通知通用助手模块。
通知通用助手模块(NotificationCommonHelper)是PAD的超级通知APP的子模块,远端消息接收模块可以调用通知通用助手模块的sendPadNotification接口将包含action的通知消息传递至通知通用助手模块。
S1210,通知通用助手模块执行getActions,确定通知消息是否包含action。
S1211,当确定通知消息含有action时,通知通用助手模块执行getPendingIntentForNotification,更新通知消息中的PendingIntent。
通知通用助手模块可以将通知消息携带的第一PendingIntent更新为第二PendingIntent,第二PendingIntent包含第二指示信息和第三指示信息,第二指示信息指示该通知消息的响应消息的接收端为PAD的超级通知APP,第三指示信息指示系统UI模块在收到用户的发送操作后通过广播方式发送响应消息。
S1212,通知通用助手模块向系统UI模块发送通知消息,该通知消息包含action和更新后的PendingIntent。
通知通用助手模块可以调用通知管理器的doSendNotification接口,通过通知管理器将通知消息传递系统UI模块。需要说明的是,为了简洁,本申请实施例中的发送通常只写出了通信链路的关键节点,例如,通知管理器向系统UI模块传递通知消息还需要经过多个步骤,本领域技术人员可以依据现有技术实实现这种数据传递,故在此不再赘述。
S1213,系统UI显示通知消息的UI。
系统UI将通知消息的UI显示在屏幕上,若action包括回复、忽略和提醒,则通知消息的UI如图5所示。
用户可以对通知消息的UI进行操作,例如,用户可以点击通知消息的UI的回复图标,调出输入框和软键盘,随后输入回复内容。最后,用户可以点击发送图标(即,用户对系统UI执行了发送操作),触发系统UI发送回复内容。
S1214,系统UI接收用户对UI的操作,生成响应消息,并执行通知消息中的PendingIntent。
该响应消息除了包括用户输入的内容外,还包括sbnKey和nodeID,sbnKey用于标识该响应消息对应的通知消息,nodeID用于标识响应消息的来源(即,PAD)。
系统UI执行通知消息中的PendingIntent(即,第二PendingIntent),确定通过广播方式发送响应消息。
S1215,系统UI发送广播消息。
S1216,响应通知接收模块收到广播消息后,执行onReceive方法,获取响应消息。
响应通知接收模块(RespondNotifReceiver)是PAD的超级通知APP的子模块。
S1217,响应通知接收模块执行setMessage,封装响应消息。
响应通知接收模块将响应消息封装为json格式,随后执行下列步骤。
S1218,响应通知接收模块执行replyMessage,发送响应消息。
S1219,响应通知接收模块向PAD的应用接续框架发送响应消息。
S1220,PAD的应用接续框架向手机的应用接续框架发送响应消息。
PAD的应用接续框架可以通过PAD的蓝牙模块调用蓝牙驱动,通过蓝牙驱动将响应消息传递至手机的蓝牙驱动,随后,手机的蓝牙驱动将响应消息传递至手机的应用接续框架。
S1221,手机的应用接续框架向消息接收模块发送响应消息。
消息接收模块(MessageReceiverlmpl)是手机的超级通知APP的子模块。
S1222,消息接收模块向超级通知管理器发送响应消息。
S1223,超级通知管理器执行Notification.Action,发送响应消息。
超级通知管理器基于sbnKey和nodeID确定响应消息对应的通知消息,执行Notification.Action将回复内容发送至该通知消息对应的APP(如,短信APP)。
本申请还提供了一种计算机程序产品,该计算机程序产品被处理器执行时实现本申请中任一方法实施例所述的方法。
该计算机程序产品可以存储在存储器中,经过预处理、编译、汇编和链接等处理过程最终被转换为能够被处理器执行的可执行目标文件。
该计算机程序产品也可以固化在芯片中的代码。本申请对计算机程序产品的具体形式不做限定。
本申请还提供了一种计算机可读存储介质,其上存储有计算机程序,该计算机程序被计算机执行时实现本申请中任一方法实施例所述的方法。该计算机程序可以是高级语言程序,也可以是可执行目标程序。
该计算机可读存储介质可以是易失性存储器或非易失性存储器,或者,可以同时包括易失性存储器和非易失性存储器。其中,非易失性存储器可以是只读存储器(read-only memory,ROM)、可编程只读存储器(programmable ROM,PROM)、可擦除可编程只读存储器(erasable PROM,EPROM)、电可擦除可编程只读存储器(electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(random access memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(static RAM,SRAM)、动态随机存取存储器(dynamic RAM,DRAM)、同步动态随机存取存储器(synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(double data rateSDRAM,DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(directrambus RAM,DR RAM)。
本领域的技术人员可以清楚地了解到,为了描述的方便和简洁,上述描述的装置和设备的具体工作过程以及产生的技术效果,可以参考前述方法实施例中对应的过程和技术效果,在此不再赘述。
在本申请所提供的几个实施例中,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的方法实施例的一些特征可以忽略,或不执行。以上所描述的装置实施例仅仅是示意性的,单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,多个单元或组件可以结合或者可以集成到另一个系统。另外,各单元之间的耦合或各个组件之间的耦合可以是直接耦合,也可以是间接耦合,上述耦合包括电的、机械的或其它形式的连接。
应理解,在本申请的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请的实施例的实施过程构成任何限定。
另外,本文中术语“系统”和“网络”在本文中常被可互换使用。本文中的术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
总之,以上所述仅为本申请技术方案的较佳实施例而已,并非用于限定本申请的保护范围。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。

Claims (10)

1.一种发送响应消息的方法,其特征在于,所述方法包括:
第一终端设备从第二终端设备接收通知消息,所述通知消息包括第一指示信息,所述第一指示信息指示所述通知消息的响应消息的接收端为所述第二终端设备的APP;
所述第一终端设备确定所述通知消息是否包含动作;
当所述通知消息包含所述动作时,所述第一终端设备将所述第一指示信息更新为第二指示信息,所述第二指示信息指示所述响应消息的接收端为所述第一终端设备的通知消息处理模块;
所述第一终端设备通过系统UI模块显示所述通知消息的UI;
所述第一终端设备接收用户对所述UI的操作,所述操作用于触发所述第一终端设备生成并发送所述响应消息;
所述第一终端设备通过所述系统UI模块和所述通知消息处理模块响应所述操作,向所述第二终端设备发送所述响应消息,其中,所述系统UI模块根据所述第二指示信息将所述响应消息发送至所述通知消息处理模块,所述通知消息处理模块用于向所述第二终端设备发送所述响应消息。
2.根据权利要求1所述的方法,其特征在于,所述第一指示信息承载于第一PendingIntent中,所述第一终端设备将所述第一指示信息更新为第二指示信息,包括:
所述第一终端设备通过所述通知消息处理模块将所述第一PendingIntent更新为第二PendingIntent,所述第二PendingIntent包括所述第二指示信息。
3.根据权利要求2所述的方法,其特征在于,所述第二PendingIntent还包括第三指示信息,所述第三指示信息指示所述系统UI模块在收到所述操作后通过广播方式发送所述响应消息。
4.根据权利要求3所述的方法,其特征在于,所述第一终端设备通过所述系统UI模块和所述通知消息处理模块响应所述操作,包括:
所述系统UI模块响应于所述操作,生成所述响应消息;
所述系统UI模块根据所述第三指示信息发送广播消息;
所述通知消息处理模块接收所述广播消息;
所述通知消息响应于所述广播消息,执行onReceive方法获取所述响应消息。
5.根据权利要求4所述的方法,其特征在于,所述向所述第二终端设备发送所述响应消息,包括:
所述通知消息处理模块调用通信模块向所述第二终端设备发送所述响应消息。
6.根据权利要求1至5中任一项所述的方法,其特征在于,所述响应消息包括所述通知消息的回复内容、所述通知消息的标识和所述第一终端设备的标识。
7.根据权利要求6所述的方法,其特征在于,所述回复内容包括用户编辑的内容或者用户选择的快速回复内容标识。
8.根据权利要求1至7中任一项所述的方法,其特征在于,所述向所述第二终端设备发送所述响应消息,包括:
所述通知消息处理模块将所述响应消息打包为json格式后向所述第二终端设备发送所述响应消息。
9.一种发送响应消息的装置,其特征在于,包括处理器和存储器,所述处理器和所述存储器耦合,所述存储器用于存储计算机程序,当所述计算机程序被所述处理器执行时,使得所述装置执行权利要求1至8中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机程序,当所述计算机程序被处理器执行时,使得包含所述处理器的装置执行权利要求1至8中任一项所述的方法。
CN202211198538.9A 2022-09-29 2022-09-29 发送响应消息的方法和装置 Pending CN116684517A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211198538.9A CN116684517A (zh) 2022-09-29 2022-09-29 发送响应消息的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211198538.9A CN116684517A (zh) 2022-09-29 2022-09-29 发送响应消息的方法和装置

Publications (1)

Publication Number Publication Date
CN116684517A true CN116684517A (zh) 2023-09-01

Family

ID=87777597

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211198538.9A Pending CN116684517A (zh) 2022-09-29 2022-09-29 发送响应消息的方法和装置

Country Status (1)

Country Link
CN (1) CN116684517A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013196228A (ja) * 2012-03-18 2013-09-30 Spinshell Co Ltd インスタントメッセージの送受信を行うための方法、システム、サーバ装置、端末装置およびプログラム
CN107278367A (zh) * 2016-02-29 2017-10-20 华为技术有限公司 一种移动终端、可穿戴设备和消息传送方法
CN107404425A (zh) * 2016-05-18 2017-11-28 中兴通讯股份有限公司 终端间的通知消息提示方法及终端
WO2021169538A1 (zh) * 2020-02-25 2021-09-02 华为技术有限公司 一种避免通知消息重复提醒的方法和终端
WO2022068513A1 (zh) * 2020-09-30 2022-04-07 华为技术有限公司 无线通信方法和终端设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013196228A (ja) * 2012-03-18 2013-09-30 Spinshell Co Ltd インスタントメッセージの送受信を行うための方法、システム、サーバ装置、端末装置およびプログラム
CN107278367A (zh) * 2016-02-29 2017-10-20 华为技术有限公司 一种移动终端、可穿戴设备和消息传送方法
CN107404425A (zh) * 2016-05-18 2017-11-28 中兴通讯股份有限公司 终端间的通知消息提示方法及终端
WO2021169538A1 (zh) * 2020-02-25 2021-09-02 华为技术有限公司 一种避免通知消息重复提醒的方法和终端
WO2022068513A1 (zh) * 2020-09-30 2022-04-07 华为技术有限公司 无线通信方法和终端设备

Similar Documents

Publication Publication Date Title
CN113885759B (zh) 通知消息处理方法、设备、系统及计算机可读存储介质
CN113254120B (zh) 数据处理方法和相关装置
CN113722058B (zh) 一种资源调用方法及电子设备
CN113887264B (zh) 扫码方法、系统及相关装置
CN114553814B (zh) 处理推送消息的方法和装置
CN115914461B (zh) 位置关系识别方法和电子设备
CN111249728B (zh) 一种图像处理方法、装置及存储介质
CN115309547B (zh) 处理异步binder调用的方法和装置
CN114625525A (zh) 一种资源管控方法及设备
CN111886849B (zh) 一种传输信息的方法及电子设备
CN115017498B (zh) 小应用程序的操作方法和电子设备
CN116684517A (zh) 发送响应消息的方法和装置
CN115016666B (zh) 触控处理方法、终端设备以及存储介质
CN116723410B (zh) 调节帧间隔的方法和装置
CN115002939B (zh) 加入WiFi群组的方法和装置
CN114691248B (zh) 显示虚拟现实界面的方法、装置、设备和可读存储介质
CN116033341B (zh) 触发围栏事件的方法和装置
CN116051351B (zh) 一种特效处理方法和电子设备
CN115686182B (zh) 增强现实视频的处理方法与电子设备
US20230368710A1 (en) Vr display control method, electronic device, and computer-readable storage medium
CN116931802A (zh) 控制方法及中控设备
CN116939303A (zh) 一种视频生成方法、系统及电子设备
CN117917632A (zh) 一种显示方法、电子设备和系统
CN117251223A (zh) 一种云函数插件配置、调度方法、系统和电子设备
CN116744118A (zh) 确定拍摄参数的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination