CN116527811A - 一种音频通知的显示方法及电子设备 - Google Patents

一种音频通知的显示方法及电子设备 Download PDF

Info

Publication number
CN116527811A
CN116527811A CN202210084100.1A CN202210084100A CN116527811A CN 116527811 A CN116527811 A CN 116527811A CN 202210084100 A CN202210084100 A CN 202210084100A CN 116527811 A CN116527811 A CN 116527811A
Authority
CN
China
Prior art keywords
window
audio
application
user
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210084100.1A
Other languages
English (en)
Inventor
毛艳艳
苑腾飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Priority to CN202210084100.1A priority Critical patent/CN116527811A/zh
Priority to PCT/CN2022/139121 priority patent/WO2023138267A1/zh
Publication of CN116527811A publication Critical patent/CN116527811A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M19/00Current supply arrangements for telephone systems
    • H04M19/02Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone
    • H04M19/04Current supply arrangements for telephone systems providing ringing current or supervisory tones, e.g. dialling tone or busy tone the ringing-current being generated at the substations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72484User interfaces specially adapted for cordless or mobile telephones wherein functions are triggered by incoming communication events
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72406User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by software upgrading or downloading
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725Cordless telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Databases & Information Systems (AREA)
  • Telephone Function (AREA)

Abstract

本申请提供了一种音频通知的显示方法及电子设备,电子设备可以是PC等,PC可以同时播放来源于多个应用和/或网页的音频,当接收到通话请求时,PC可以根据焦点态显示的应用窗口和/或网页,在显示屏上聚合显示通话请求的提示窗口、非焦点态的应用和/或网页对应的音频操作窗口,每一个音频操作窗口包括一个或多个控件,便于用户通过音频操作窗口控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,保证通话过程不会被其他输出的音频干扰;在用户结束通话之后,PC显示屏上可以聚合显示除了通话请求的提示窗口之外的其他音频操作窗口,便于用户快捷地恢复音频的播放,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。

Description

一种音频通知的显示方法及电子设备
技术领域
本申请涉及电子技术领域,尤其涉及一种音频通知的显示方法及电子设备。
背景技术
随着数字智能时代和电子设备的发展,用户使用的电子设备的种类和数量越来越多,且每一个电子设备的功能越来越丰富,用户可以同时使用一个电子设备的不同功能。
示例性的,以个人电脑(personal computer,PC)和手机的多屏协同过程为例,一种可能的场景中,用户可能同时在PC上运行一个或多个能够输出对应的音频的应用程序,或打开一个或多个能够输出音频的网页界面。此外,PC还可以同时运行了具有即时通信功能的应用程序,或者运行手机端的即时通信功能的应用程序,例如应用、/>应用、畅联通话应用、游戏类等具有语音通话、视频通话等即时通信功能的应用。当用户通过PC同时播放多个来源于不同应用程序的音频时,如果PC又接收到语音通话、视频通话等即时通话请求时,PC的显示屏上将弹出与该即时通信相关的提示窗口,该提示窗口用于提醒用户及时处理当前接收到的语音通话、视频通话等即时通话请求。
在上述场景中,PC播放的音频将影响用户的语音通话、视频通话等即时通信,用户需要先触发将待暂停的音频窗口或网页显示在焦点态,再点击该焦点态的音频窗口或网页中的播放控件暂停播放该应用窗口输出的音频。如果用户开启的能够输出音频的应用窗口或网页界面较多时,即PC同时输出了多个音频的状态下,用户执行的操作步骤将会更多。因此,当PC接收到语音通话、视频通话等即时通话请求时,如何为用户提供一种便捷控制多个音频播放的方法,是当前亟需解决的问题。
发明内容
本申请提供了一种音频通知的显示方法及电子设备,当接收到通话请求时,该方法可以根据焦点态显示的应用窗口和/或网页,在电子设备显示屏上聚合显示通话请求的提示窗口、非焦点态的应用和/或网页对应的音频操作窗口,便于用户通过音频操作窗口控制每一个音频的播放,保证通话过程不会被其他输出的音频干扰;在用户结束通话之后,在电子设备显示屏上聚合显示除了通话请求的提示窗口之外的其他音频操作窗口,便于用户快捷地恢复音频的播放,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
第一方面,提供了一种音频通知的显示方法,应用于包括显示屏的第一电子设备,所述方法包括:接收通话请求,所述通话请求包括语音通话请求或视频通话请求;响应于所述通话请求,确定在所述第一电子设备上输出音频的一个或多个应用;聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口,所述第一音频操作窗口包括用于控制第一应用的音频播放的第一控件,所述第二音频操作窗口包括用于控制第二应用的音频播放的第二控件,所述通话提示窗口包括用于控制通话的第三控件,其中,所述第一应用、所述第二应用是在所述第一电子设备上输出音频的所述一个或多个应用中的应用。
可选地,“通话请求”可以来源于即时通信类应用。“即时通信类应用”可以包括应用、/>应用、畅联通话应用、游戏类具有语音通话、视频通话等通话功能的应用,该即时通信类应用接收到其他好友发送的通话请求时,会及时地弹出音频操作窗口以提醒用户需要处理该通话请求。
或者,该“通话请求”还可以来自于电话应用、短信息应用等应用。示例性的,当电子设备是手机、平板等设备时,可能接收到其他联系人拨打的电话、通过短信息应用发起的通话等。
应理解,在后续实施例的介绍中,将以上任意应用的语音通话请求、视频通话请求等统一称为“通话请求”。
可选地,所述通话请求对应的应用可以是安装并实际运行在第一电子设备(例如PC)的本地应用;或者,在第一电子设备(例如PC)和第二电子设备(例如手机)的多屏协同连接场景中,所述通话请求对应的应用还可以是安装并实际运行在第二电子设备(例如手机)的应用,本申请实施例对此不作限定。
可选地,本申请所说的“一个或多个应用”可以是第一电子设备(例如PC)上能够输出音频的应用。示例性的,第一电子设备上运行了音乐应用,音乐应用能够输出歌曲等音频,但是当前可以没有正在输出音频。
或者,该“一个或多个应用”可以是第一电子设备(例如PC)上正在播放音频的一个或多个应用。示例性的,第一电子设备上运行了音乐应用A和音乐应用B,该音乐应用A和音乐应用B都能够输出歌曲等音频,但是当前音乐应用A正在输出音频,音乐应用B没有输出音频。应理解,以上不同的场景都可以包括在本申请实施例的保护范围内,都可以适用本申请实施例提供的显示音频通知的方法,后续不再赘述。
通过上述音频通知的显示方法,第一电子设备(例如PC)可以播放一个或多个应用输出的音频,当第一电子设备(例如PC)接收到通话请求时,响应于该通话请求,第一电子设备(例如PC)可以确定当前正在播放音频的一个或多个应用,以及显示屏上焦点态显示的应用窗口,并自动弹出的一个或多个应用的音频操作窗口。其中,每一个音频操作窗口中可以包括一个或多个操作控件。用户可以通过音频操作窗口中的控件快捷地控制音频的播放,避免用户需要执行繁琐的操作,才可以暂停播放音频,使得用户可以尽快接听通话,并可以保证用户的通话过程不被PC输出的其他音频干扰,提高了用户的操作体验。
结合第一方面,在第一方面的某些实现方式中,接收用户对所述第一控件的操作,响应于对所述第一控件的所述操作,暂停播放所述第一应用的音频;接收用户对所述第二控件的操作,响应于对所述第二控件的所述操作,暂停播放所述第二应用的音频;接收用户对所述第三控件的操作,响应于对所述第三控件的所述操作,接听通话。
通过上述过程,用户可以通过每一个音频操作窗口中的控件快捷地控制每一个应用音频的播放,例如点击播放控件以暂停对应音频的播放。从而避免用户需要执行繁琐的操作,才可以暂停播放音频,使得用户可以尽快接听通话,并可以保证用户的通话过程不被PC输出的其他音频干扰。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,响应于结束所述通话的操作,显示第四音频操作窗口和第五音频操作窗口,所述第四音频操作窗口包括第四控件,所述第四控件用于控制所述第一应用的音频播放,所述第五音频窗口包括第五控件,所述第五控件用于控制所述第二应用的音频播放。
当用户结束通话时,第一电子设备(例如PC)显示屏上还可以自动弹出一个或多个音频操作窗口,便于用户重新控制一个或多个应用和/或网页继续播放音频。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,接收用户对所述第四控件的操作,响应于对所述第四控件的所述操作,恢复播放所述第一应用的音频;接收用户对所述第五控件的操作,响应于对所述第五控件的所述操作,恢复播放所述第二应用的音频。
应理解,所述第四音频操作窗口和前述的所述第一音频操作窗口都用于控制第一应用的音频播放,可以显示不同或相同的控件,例如所述第一音频操作窗口显示播放控件,所述第四音频操作窗口显示暂停控件,可以都称为“第一应用的音频操作窗口”。
通过上述过程,当用户结束通话之后,第一电子设备(例如PC)可以显示除了所述通话提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复第一电子设备(例如PC)至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
可选地,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和第一电子设备(例如PC)接收到通话请求时显示的音频操作窗口保持一致,或者,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和PC接收到通话请求时显示的音频操作窗口有所不同,本申请实施例对此不作限定。
示例性的,在用户接通电话的过程中,第一电子设备(例如PC)运行的应用可能不变。例如用户接通电话的过程中,没有关闭或更改第一电子设备(例如PC)的应用运行情况,结束通话时,所述第一电子设备(例如PC)继续运行有第一应用、第二应用和第三应用,相应地,响应于结束所述通话的操作,所述第一电子设备(例如PC)聚合显示用于控制所述第一应用的音频操作窗口(即第四音频操作窗口)、用于控制所述第二应用音频操作窗口(即第五音频操作窗口)。
或者,在用户接通电话的过程中,第一电子设备(例如PC)运行的应用也可能发生变化。例如,用户接通电话的过程中,关闭了第一应用,又运行了第四应用且第四应用也是能够在第一电子设备(例如PC)输出音频的应用。相应地,响应于结束所述通话的操作,所述第一电子设备(例如PC)可以聚合显示用于控制所述第二应用音频操作窗口(即第五音频操作窗口)、用于控制所述第四应用音频操作窗口,以上不同的音频通知的显示方法都落入本申请保护的范围。
应理解,在第一电子设备(例如PC)显示音频通知的过程中,除了可以根据以上介绍的方法确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示位置之外,还可以根据多种可能的方式确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸。例如可以根据焦点态的第三应用的窗口确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸,或者根据预设尺寸显示预设大小的所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸,本申请实施例对此不作限定。
通过上述方法,丰富了本申请音频通知的显示方法的适用场景,不论在通话过程中用户执行了何种操作,关闭或者重新运行了其他应用,都可以通过该方法,在通话结束后,根据第一电子设备(例如PC)运行的应用等,显示音频通知,快捷地恢复音频的播放,或者实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,所述聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口,包括:根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,所述第三应用的窗口在所述显示屏上显示为焦点态。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,所述根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,包括:在所述第三应用的窗口的任意边框处,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口;或者,在所述第三应用的窗口的内部,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
应理解,上述方式可以具体结合第一电子设备(例如PC)显示屏上剩余显示区域的位置和大小进行判断,本申请实施例对此不作限定。
示例性的,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口可以聚合显示在焦点态的第三应用的窗口边框之外的区域,即所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口与焦点态的第三应用的窗口可以不重叠。该显示方式可以避免遮挡焦点态的第三应用的窗口,方便用户操作且便于用户查看第一电子设备显示屏上更多的界面内容。
或者,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口可以聚合显示在焦点态的第三应用的窗口的内部,换言之,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口与焦点态的第三应用的窗口可以具有重叠区域,例如部分重叠区域,或者全部重叠区域。该显示方式可以为用户提供更加醒目的显示效果,使得提示更加明显。
应理解,用户在使用第一电子设备(例如PC)的过程中,焦点态的应用窗口可以不断地发生变化。当焦点态的应用窗口发生变化时,响应于该通话请求,第一电子设备(例如PC)自动弹出的窗口数量、窗口对应的应用和窗口显示内容也可以发生适应性变化。
通过上述方案,当第一电子设备(例如PC)接收到通话请求之后,可以检测显示屏上处于焦点态的应用窗口、处于非焦点态的应用窗口,并在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口。换言之,当第一电子设备(例如PC)显示屏上焦点态的应用窗口和/或非焦点态的应用窗口不同时,自动弹出的音频操作窗口的数量、种类、显示位置、显示尺寸也会不同。
当确定第一电子设备的显示屏上没有处于焦点态的应用窗口时,第一电子设备(例如PC)也可以通过同步模块汇总当前所有的音频任务,在所述显示屏的预设位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
可选地,该预设位置可以是第一电子设备(例如PC)显示屏的显示区域的上边界且位于显示屏的宽度方向的中心位置。或者,该预设位置可以是第一电子设备(例如PC)显示屏的显示区域的下边界且位于显示屏的宽度方向的中心位置。又或者,该预设位置可以是第一电子设备(例如PC)显示屏的左上角的固定位置。又或者,该预设位置可以是第一电子设备(例如PC)显示屏的右下角的固定位置等,本申请实施例对此不作限定。
另一种可能的显示方式中,第一电子设备(例如PC)自动弹出的所述通话提示窗口、用于控制第一应用的音频播放所述第一音频操作窗口、用于控制第二应用的音频播放的所述第二音频操作窗口可以以“一个窗口”的形式,显示在第一电子设备(例如PC)显示屏上。
可选地,该“一个窗口”中可以同时包括第一控件、第二控件和第三控件;或者,该一个操作窗口中可以包括2个控件,其中控件1可以同时控制第一应用的音频播放和第二应用的音频播放,控件2可以用于控制接听通话;又或者,该一个操作窗口中可以包括1个控件,该控件可以同时控制第一应用的音频播放和第二应用的音频播放、以及控制接听通话,本申请实施例对此不作限定。
或者,第一电子设备(例如PC)显示屏上可以自动弹出2个窗口,窗口1用于控制第一应用的音频播放和第二应用的音频播放等。应理解,以上多种可能的音频通知的显示方式都落入本申请实施例保护的范围,此处不再一一举例。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,当所述显示屏上显示为焦点态的第三应用的窗口中显示有多个网页时,所述第一电子设备接收所述通话请求之后,所述方法还包括:检测所述第三应用的窗口中输出音频的第一网页,所述第一网页在所述第三应用的窗口中显示为非焦点态;根据所述第三应用的窗口的显示位置,显示第六音频操作窗口,所述第六音频操作窗口包括用于控制所述第一网页的音频播放的第六控件。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,所述第三应用是浏览器应用。
示例性的,当所述第三应用是浏览器应用时,所述第三应用的窗口中可以显示两个或两个以上能够输出音频的网页。第一电子设备的焦点监控模块可以监测显示屏上焦点态的应用窗口,以及窗口中网页界面的切换过程,例如确定所述第三应用的窗口中的第一网页在第一电子设备上输出音频的,且第一网页为非焦点态,相应地,第一电子设备还可以聚合显示该第一网页对应的音频操作窗口,用于控制第一网页的音频播放。其中,该第一网页对应的音频操作窗口的显示可以参照前述所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口的显示规则。
结合第一方面和上述实现方式,在第一方面的某些实现方式中,所述第一应用和/或所述第二应用和/或所述第三应用在第二电子设备上运行,所述第二电子设备与所述第一电子设备相连接。
需要说明的是,第一电子设备(例如PC)可以不区分输出音频的一个或多个应用的应用来源,直接安装上述音频通知的显示方式,仅根据显示屏上显示的焦点态的应用窗口和/或应用窗口中显示的网页,确定音频通知的显示方式。
另一种可能的实现方式中,接收到通话请求之后,第一电子设备(例如PC)可以判断输出音频的一个或多个应用是否都来自于第一电子设备(例如PC)的本地应用,或者包括来源于第二电子设备的应用,所述第二电子设备与所述第一电子设备相连接。例如,多屏协同场景下的第二电子设备(例如手机和PC建立多屏协同连接)的场景。
在该多屏协同的场景中,第一电子设备(例如PC)还可以确定所有能够输出音频的应用的来源,例如判断所述一个或多个应用中是否包括第二电子设备(例如手机)前台运行或后台运行的应用。当所述第一电子设备(例如PC)显示屏上包括多屏协同主窗口且所述多屏协同主窗口处于焦点态显示时,接收到所述通话请求之后,可以:在所述多屏协同主窗口中聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。或者,根据所述多屏协同主窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。又或者,检测所述一个或多个应用中是否包括来源于所述第二电子设备的应用,当所述一个或多个应用中包括来源于所述第二电子设备的第五应用时,在所述多屏协同主窗口中显示所述第五应用的音频操作窗口,且根据所述多屏协同主窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。再或者,当所述通话请求来源于所述第二电子设备时,在所述多屏协同主窗口中显示所述通话请求对应的通话提示界面,且根据所述多屏协同主窗口的显示位置,聚合显示所述第一音频操作窗口和所述第二音频操作窗口。
综上所述,在用户使用PC等电子设备的过程中,PC可以同时播放来源于多个应用和/或网页的音频,多个应用可以包括PC的本地应用,也可以包括和PC建立多屏协同连接的手机侧的应用。具体地,当接收到通话请求时,PC可以根据焦点态显示的应用窗口和/或网页,例如在显示屏上显示非焦点态的应用和/或网页对应的音频操作窗口,由此用户可以通过音频操作窗口快捷地控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,再接听通话,保证通话过程不会被其他输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
其次,在用户结束通话之后,PC显示屏上可以自动弹出除了通话请求的提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
再者,在PC和手机的多屏协同过程中,PC上弹出的音频操作窗口可以避免用户切换手机处理通话请求,无需用户主动切换当前使用的PC到手机端,能够实现操作任务的连续性,一定程度上也提高了用户的使用体验。
第二方面,提供了一种第一电子设备,所述第一电子设备包括显示屏一个或多个处理器;一个或多个存储器;安装有多个应用程序的模块;所述存储器存储有一个或多个程序,其中,所述一个或多个程序被存储在所述存储器中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:接收通话请求,所述通话请求包括语音通话请求或视频通话请求;响应于所述通话请求,确定在所述第一电子设备上输出音频的一个或多个应用;聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口,所述第一音频操作窗口包括用于控制第一应用的音频播放的第一控件,所述第二音频操作窗口包括用于控制第二应用的音频播放的第二控件,所述通话提示窗口包括用于控制通话的第三控件,其中,所述第一应用、所述第二应用是在所述第一电子设备上输出音频的所述一个或多个应用中的应用。
结合第二方面,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:接收用户对所述第一控件的操作,响应于对所述第一控件的所述操作,暂停播放所述第一应用的音频;接收用户对所述第二控件的操作,响应于对所述第二控件的所述操作,暂停播放所述第二应用的音频;接收用户对所述第三控件的操作,响应于对所述第三控件的所述操作,接听通话。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:响应于结束所述通话的操作,显示第四音频操作窗口和第五音频操作窗口,所述第四音频操作窗口包括第四控件,所述第四控件用于控制所述第一应用的音频播放,所述第五音频窗口包括第五控件,所述第五控件用于控制所述第二应用的音频播放。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:接收用户对所述第四控件的操作,响应于对所述第四控件的所述操作,恢复播放所述第一应用的音频;接收用户对所述第五控件的操作,响应于对所述第五控件的所述操作,恢复播放所述第二应用的音频。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,所述第三应用的窗口在所述显示屏上显示为焦点态。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:在所述第三应用的窗口的任意边框处,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口;或者,在所述第三应用的窗口的内部,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行以下步骤:检测所述第三应用的窗口中输出音频的第一网页,所述第一网页在所述第三应用的窗口中显示为非焦点态;根据所述第三应用的窗口的显示位置,显示第六音频操作窗口,所述第六音频操作窗口包括用于控制所述第一网页的音频播放的第六控件。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,所述第三应用是浏览器应用。
结合第二方面和上述实现方式,在第二方面的某些实现方式中,所述第一应用和/或所述第二应用和/或所述第三应用在第二电子设备上运行,所述第二电子设备与所述第一电子设备相连接。
第三方面,提供了一种电子设备,包括:触摸显示屏;一个或多个处理器;存储器;多个应用程序;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述任一方面任一项可能的实现中所述第一电子设备执行的所述音频通知的显示方法。
第四方面,提供了一种电子设备上的图形用户界面系统,所述电子设备具有显示屏、一个或多个存储器、以及一个或多个处理器,所述一个或多个处理器用于执行存储在所述一个或多个存储器中的一个或多个计算机程序,所述图形用户界面系统包括所述电子设备执行如第一方面和第一方面中任一项所述的方法时显示的图形用户界面。
第五方面,提供了一种装置,该装置包含在电子设备中,该装置具有实现上述第一方面和第一方面中任一项所述的方法中所述第一电子设备行为的功能。该功能可以通过硬件实现,也可以通过硬件执行相应的软件实现。硬件或软件包括一个或多个与上述功能相对应的模块或单元。例如,显示模块或单元、检测模块或单元、处理模块或单元等。
第六方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如第一方面和第一方面中任一项所述第一电子设备能够执行的方法。
第七方面,提供了一种计算机程序产品,当计算机程序产品在电子设备上运行时,使得电子设备执行上述第一方面或者第一方面的任意一项所述第一电子设备能够执行的方法。
附图说明
图1是一例PC上显示音频通知的图形用户界面示意图。
图2是另一例PC上显示音频通知的图形用户界面示意图。
图3是本申请实施例提供的一例电子设备的结构示意图。
图4是本申请实施例的一例多屏协同场景下手机和PC的软件结构框图。
图5是本申请实施例提供的一例PC上显示音频通知的示意图。
图6是本申请实施例提供的一例通话结束后PC上显示音频通知的示意图。
图7是本申请实施例提供的另一例PC上显示音频通知的示意图。
图8是本申请实施例提供的另一例通话结束后PC上显示音频通知的示意图。
图9是本申请实施例提供的又一例PC上显示音频通知的示意图。
图10是本申请实施例提供的又一例通话结束后PC上显示音频通知的示意图。
图11是本申请实施例提供的再一例PC上显示音频通知的示意图。
图12是本申请实施例提供的再一例通话结束后PC上显示音频通知的示意图。
图13是本申请实施例提供的一例多屏协同过程中PC上显示音频通知的示意图。
图14是本申请实施例提供的另一例多屏协同过程中PC上显示音频通知的示意图。
图15是本申请实施例提供的一例通话结束后PC上显示音频通知的示意图。
图16是本申请实施例提供的又一例多屏协同过程中PC上显示音频通知的示意图。
图17是本申请实施例提供的又一例通话结束后PC上显示音频通知的示意图。
图18是本申请实施例提供的一例音频通知的显示方法的示意性流程图。
具体实施方式
为了便于理解,下面将以手机、PC等电子设备为例,结合附图,针对音频通知在手机、PC等的不同的电子设备上的显示过程,进行具体阐述。
图1是一例PC上显示音频通知的图形用户界面(graphical user interface,GUI)示意图。
一种可能的场景中,用户在独立使用PC的过程中,可能同时运行PC上安装的一个或多个应用程序,每个应用程序可以在PC的显示屏上显示不同的应用窗口,且每个应用程序可以输出对应的音频。同时,用户还可以通过PC的浏览器应用打开一个或多个网页界面,该一个或多个网页界面可以包括能够输出音频的界面。
示例性的,如图1所示的场景,假设用户运行PC上安装的音乐应用且正在播放歌曲2,PC的显示屏上显示了音乐应用的窗口10。可选地,该音乐应用的窗口10可以显示如图1所示的界面,该界面可以包括用户名称的信息,私人调频(frequency modulation,FM)、收藏列表、我的音乐、最近播放等多个歌曲列表名称,以及“每日推荐”菜单对应的界面中包括的歌曲列表1、歌曲列表2等多个歌曲列表等内容,本申请实施例对该音乐应用的窗口10的显示内容不作限定。
此外,假设用户还通过浏览器应用打开了歌曲1的在线播放网页,相应地,PC的显示屏上可以显示并在该浏览器应用的窗口20中显示了歌曲1的在线播放网页,该界面可以包括歌曲1的歌曲名称、歌手图片、歌曲播放进度条、歌词显示界面等内容,本申请实施例对此不作限定。
假设当前用户通过该音乐应用正在播放歌曲2,在图1示出的音乐应用的窗口10中,歌曲2所在选项包括播放控件101,标识当前PC的音乐应用输出的音乐为该歌曲2。同时,用户通过该浏览器应用的窗口20正在播放歌曲1,即图1示出的该浏览器应用的窗口20中,显示了歌曲1的播放控件20-2。
对于上述介绍的场景,当PC的显示屏上显示了音乐应用的窗口10和浏览器应用的窗口20时,在PC显示屏的底部导航区域可以显示该音乐应用的窗口10对应的应用图标10-1和该浏览器应用的窗口20对应的应用图标20-1。
应理解,当PC具有不同的软件系统时,该应用图标10-1和应用图标20-1可能显示在显示屏的不同位置,或者以不同的方式进行显示,本申请实施例对此不作限定。
还应理解,PC一般设置有多个音频器件,例如PC可以包括耳机、麦克风和扬声器等不同的音频器件。其中,能够输出音频且播放音频的器件称为“音频播放器件”,PC上的音频播放器件可以不限于为PC的内置器件或外接器件。例如,PC通过耳机接口连接耳机,耳机可以作为PC的外接的音频播放器件,扬声器为PC的内置的音频播放器件,本申请实施例对PC的音频播放器件的数量和种类不作限定。
还应理解,PC可以同时输出并播放多个音频,或者,PC还可以通过不同的音频播放器件或相同的音频播放器件同时播放不同来源的音频。
示例性的,结合图1所示的场景,用户可以设置PC同时通过耳机接口连接的耳机播放该音乐应用正在播放的歌曲2和浏览器应用的窗口20输出的歌曲1。或者,用户还可以设置PC通过耳机接口连接的耳机播放该音乐应用正在播放的歌曲2,且同时通过PC的扬声器播放浏览器应用的窗口20输出的歌曲1。又或者,用户可以设置PC同时通过扬声器播放该音乐应用正在播放的歌曲2和浏览器应用的窗口20输出的歌曲1等。当PC同时输出多个音频时,本申请实施例对该多个音频对应的音频播放器件的种类不作限定。
对于上述场景,当PC正在播放一个或多个音频时,如果PC同时运行了即时通信应用,例如应用、/>应用、畅联通话应用、游戏类等具有语音通话、视频通话等功能的即时通信应用,当PC接收到来自于即时通信应用的通话请求时,PC的显示屏上将弹出提示窗口,该提示窗口用于提醒用户有需要处理的通话请求。
示例性的,如图1所示,以PC运行的应用作为该即时通信应用,当/>应用接收到来自于用户“Miss Ma”的通话请求时,响应于该通话请求,PC的显示屏的右下角区域(或其他预设的固定区域)可以自动弹出提示窗口30,该提示窗口30用于提醒用户当前有需要处理的通话请求。此外,还可以在显示屏的底部导航区域可以显示该微信应用的应用图标30-1,且该微信应用的应用图标30-1可以呈现不同颜色的闪烁状态,以提醒用户当前有来自于/>应用的即时消息。
可选地,如图1所示,该提示窗口30中可以显示用户“Miss Ma”的图像、备注名、挂断控件30-2和接听控件30-3等内容,用户可以根据自己的需求,点击该接听控件30-3,和用户“Miss Ma”进行语音通话,也可以点击该挂断控件30-2,拒绝来自于用户“Miss Ma”的通话请求。
当用户期望接听来自于“Miss Ma”进行通话时,为了保证通话不受其他音频的干扰和影响,不会掺杂其他音频,首先,用户需要先暂停PC当前正在播放的音频,再点击接听控件30-3,和用户“Miss Ma”进行语音通话。示例性的,在图1所示的场景中,用户可能需要点击该浏览器应用的窗口20的任意区域,使得该浏览器应用的窗口20显示在焦点态,再点击该浏览器应用的窗口20中歌曲1的播放控件20-2,暂停播放歌曲1。此外,用户还需要点击该音乐应用的窗口10的任意区域,使得该音乐应用的窗口10的显示在焦点态,再点击该音乐应用的窗口10的中的播放控件101,暂停音乐应用正在播放的歌曲2。
在上述过程中,如果用户将音乐应用的窗口10或该浏览器应用的窗口20切换至最小化状态或退至后台运行状态,那么当用户需要再次浏览或者操作的时候,可能需要执行更多的步骤才可以调出该音乐应用的窗口10或该浏览器应用的窗口20,再依次暂停播放该音乐应用的窗口10或该浏览器应用的窗口20输出的音频。该过程操作繁琐,当用户开启的应用窗口过多,或者打开的网页界面较多时,需要用户依次暂停不同应用窗口或网页界面的音频之后,再接听语音通话,用户的操作步骤将会更多,降低了用户的操作体验。
这里需要说明的是,在本申请实施例的描述中,所说的“点击”、“双击”等不同的用户操作可以是用户通过鼠标、键盘等PC的外设输入设备执行的操作;或者,对于具有触摸显示屏的PC、手机等电子设备,“用户操作”还可以是用户通过手指等在触摸显示屏上执行的操作,例如触摸操作、点击操作、双击操作、滑动操作等,本申请实施例对用户操作的类型和方式不作限定,为了简便,后续不再赘述。
还需要说明的是,本申请实施例的“焦点态”可以理解为该应用对应的窗口处于最上面层级的显示状态,位于焦点态的该应用对应的中窗口可以直接接收用户的操作。示例性的,如图1所示的场景,该浏览器应用的窗口20显示在焦点态,那么该浏览器应用的窗口20显示在音乐应用的窗口10的上一层级,用户可以直接对浏览器应用的窗口20中的某控件执行期望的操作。如果用户期望将音乐应用的窗口10切换至焦点态,那么可以点击该音乐应用的窗口10的任意位置,使得该音乐应用的窗口10显示在该浏览器应用的窗口20的上一层级,本申请实施例不再赘述。
图2是另一例PC上显示音频通知的图形用户界面示意图。
另一种可能的场景中,用户可以使用手机和PC进行多屏协同。在手机和PC的多屏协同过程中,用户可以在PC上运行手机侧安装的一个或多个应用程序,PC的显示屏上将显示一个或多个手机窗口。此外,用户还可以同时运行了PC本地安装的一个或多个应用程序,或者通过PC的浏览器应用打开一个或多个网页界面。在手机和PC的多屏协同的场景下,PC可以同时输出多个音频,且输出的多个音频可以包括来源于手机侧的应用程序输出的音频,还可以包括来源于PC侧的应用程序和/或网页界面输出的音频。
示例性的,图2中的(a)图示出了手机和PC多屏协同的场景,其中,手机在解锁模式下,可以显示如图所示的主界面,该主界面可以包括顶端状态栏显示区域、天气时钟组件以及多款应用程序(application,App)等。可选地,顶端状态栏显示区域可以显示运营商的通讯信号图标、无线保真(wireless fidelity,Wi-Fi)网络图标、电池图标和当前的时钟信息等内容,多款应用程序可以包括电话、信息、华为音乐和微信等。应理解,该主界面还可以包括其他更多的应用程序或显示更多的内容,本申请实施例对此不作限定。
如图2中的(a)图所示,PC的显示屏上显示了多屏协同的主窗口40,且该多屏协同的主窗口40的显示内容可以和手机的主界面的显示内容保持一致。假设用户运行了该多屏协同的主窗口40的音乐应用,PC上可以独立地显示1个子窗口——音乐应用的窗口10,用户还通过PC本地的浏览器应用打开了歌曲1的在线播放网页。相应地,PC的显示屏上可以显示浏览器应用的窗口20,该浏览器应用的窗口20中显示歌曲1的在线播放网页。
可选地,在本申请实施例中,如果用户启动并运行了该多屏协同的主窗口40中多款手机侧的应用程序,每一款应用程序可以以独立的子窗口的形式显示在PC的显示屏上,也可以以页签的形式在该多屏协同的主窗口40中显示不同应用的运行界面。示例性的,当用户运行该多屏协同的主窗口40中的手机侧的音乐应用时,该音乐应用的运行界面可以如图2中的(a)图所示显示独立的音乐应用的窗口10之外,该音乐应用的运行界面还可以显示在该多屏协同的主窗口40中,本申请实施例对手机和PC多屏协协同过程中的窗口显示规则不作限定。
应理解,对于图2中的(a)图所示的多屏协同场景,如果PC上同时显示了手机侧的音乐应用的窗口10、浏览器应用的窗口20和多屏协同的主窗口40,相应地,在PC显示屏的底部导航区域可以显示该音乐应用的窗口10对应的应用图标10-1、该浏览器应用的窗口20对应的应用图标20-1和多屏协同的主窗口40对应的图标40-1。
示例性的,当用户设置音乐应用的窗口10正在播放歌曲2,同时设置浏览器应用的窗口20在线播放歌曲1时,即PC同时播放多个音频时,如果此时手机上的微信应用接收到来自于用户“Miss Ma”的通话请求时,响应于该通话请求,手机可以显示如图2中的(b)图所示的语音通话界面,该语音通话界面包括的用户“Miss Ma”的图像、备注名、挂断控件202-1和接听控件202-2等内容。
同时,响应于该通话请求,PC上的多屏协同的主窗口40可以在当前显示的主界面上弹出悬浮的提示窗口40-2,该提示窗口40-2可以显示用户“Miss Ma”的图像、备注名、挂断控件和接听控件等内容,用于在PC上提示用户当前接收到的通话请求。或者,响应于该通话请求,PC上的该多屏协同的主窗口40也可以和手机的显示界面保持一致,都显示该语音通话界面包括的内容,本申请实施例对此不作限定。
可选地,当手机上接收到来自于用户“Miss Ma”的通话请求时,响应于该通话请求,PC的显示屏的右下角区域(或其他预设的固定区域)还可以自动弹出提示窗口30,该提示窗口30用于提醒用户当前有需要处理的通话请求。此外,响应于该通话请求,PC的显示屏的底部导航区域可以自动弹出该微信应用的应用图标30-1,且该微信应用的应用图标30-1可以呈现不同颜色的闪烁状态。用户可以根据自己的需求,点击该接听控件30-3,和用户“Miss Ma”进行通话,也可以点击该挂断控件30-2,拒绝来自于用户“Miss Ma”的通话请求。
当用户期望接听来自于“Miss Ma”进行通话时,为了保证通话不受其他音频的干扰和影响,不会掺杂其他音频,用户需要先暂停PC当前正在播放的多个音频中的每一个音频,再点击该提示窗口30中的接听控件30-3,和用户“Miss Ma”进行语音通话;或者,点击该多屏协同的主窗口40中的接听控件40-3,和用户“Miss Ma”进行语音通话;又或者,用户可以根据PC上的提示,去手机端点击该语音通话界面的接听控件202-2,和用户“Miss Ma”进行通话,本申请实施例对用户接听通话的方式不作限定。
在上述实现过程中,用户暂停PC当前正在播放的多个音频时,和图1介绍的场景相类似,用户需要执行多个操作,先触发将待操作的应用窗口显示在焦点态,再点击该焦点态的应用窗口中的播放控件暂停播放该应用窗口输出的音频。如果用户开启的能够输出音频的应用窗口过多,或者打开的能够输出音频的网页界面较多时,即PC同时输出了多个音频的状态下,用户期望暂停多个音频中暂停一个或多个音频的播放时,用户需要执行的操作步骤将会更多。特别是当用户将能够输出音频的一个或多个窗口切换至最小化状态或退至后台运行状态时,如果用户期望暂停播放的多个音频时,可能需要执行更多的步骤和操作,该过程操作繁琐,影响了用户的使用体验。
此外,在图2中的(b)图所示的多屏协同的场景中,当接收到来自于用户“Miss Ma”的通话请求时,PC的显示屏在该多屏协同的窗口40中显示提示窗口40-2,同时在显示屏的右下角区域(或其他预设的固定区域)显示提示窗口30,且提示窗口30和提示窗口40-2都用于提醒用户当前有需要处理的即时通信消息,在PC的显示屏上会重复显示。
再者,又一种可能的场景中,如果用户在使用PC的过程中,看见了PC显示屏上的提示窗口,可以根据PC上的提示内容,拿起手机并在在手机端点击该语音通话界面的接听控件202-2,和用户“Miss Ma”进行通话。该实现过程虽然也可以避免PC上输出的多个音频的干扰,无需用户在PC上执行暂停多个音频的操作,但是该过程依赖于用户主动切换当前使用的设备到手机,并使用手机来接听通话,无法实现操作任务的连续,一定程度上也影响了用户的使用体验。
综上所述,不论是对于图1示出的用户使用PC的多个本地应用的场景,还是对于图2示出的PC和手机多屏协同的场景,当用户在使用PC的过程,且PC同时输出了多个音频时,如果PC上接收到通话请求时,为了避免PC同时输出的多个音频的干扰,用户需要执行繁琐的操作或步骤,才可以实现多个音频的暂停播放,该繁琐的操作过程或者显示方式等,都会影响用户的使用体验。
针对上述问题,本申请实施例将提供一种音频通知的显示方法及电子设备,当电子设备接收到突发的即时通信类的请求或消息时,该音频通知的显示方法可以针对不同的场景,提供不同的音频通知的显示方案,能够为用户提供便捷的切换电子设备音频的操作方式,从而提高用户的使用体验。
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。在介绍本申请实施例中的技术方案之前,先介绍可以应用本申请实施例提供的音频通知的显示方法的电子设备所具有的硬件结构和软件结构。
本申请实施例提供的音频通知的显示方法可以应用于手机、平板、PC、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等电子设备上,本申请实施例对电子设备的具体类型不作任何限制。
图3是本申请实施例提供的一例电子设备的结构示意图。
应理解,本申请实施例的PC或手机等电子设备可以包括图3示出的电子设备100部分结构或全部结构,或者还可以包括更多的其他未示出的结构,或者包括更少的结构,本申请实施例对此不作限定。
示例性的,如图3所示,电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户标识模块(subscriber identificationmodule,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在本申请实施例中,电子设备100既可以是图1所示的场景中用户独立使用的PC,也可以是图2所示的多屏协同场景中的PC或手机。电子设备100的处理器110存储有实现该音频通知的显示方法所对应的计算机程序或指令。
示例性的,以PC为例,PC可以同时播放来源于多个应用和/或网页的音频。当接收到通话请求时,PC可以检测显示屏上处于焦点态的应用窗口和/或网页、处于非焦点态的应用窗口和/或网页,并在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口。此外,当PC显示屏上焦点态的应用窗口和/或网页、非焦点态的应用窗口和/或网页不同时,PC上自动弹出的音频操作窗口的数量、种类、显示位置、显示尺寸也会变化不同。
具体地,通过本申请实施例提供的音频通知的显示方法,PC根据焦点态显示的应用窗口和/或网页,可以按照以下任意一种可能的方式在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口,例如:
1)在焦点态的应用窗口的周围,聚合显示处于非焦点态的应用和/或网页对应的音频操作窗口、焦点态的应用和/或网页对应的音频操作窗口和通话请求的提示窗口;
2)在焦点态的应用窗口的周围,优先地聚合显示处于非焦点态的应用和/或网页对应的音频操作窗口和通话请求的提示窗口。当显示屏的可用显示区域充足时,再显示焦点态的应用和/或网页对应的音频操作窗口;
3)在焦点态的应用窗口的周围,仅聚合显示处于非焦点态的应用和/或网页对应的音频操作窗口和通话请求的提示窗口,不显示焦点态的应用和/或网页对应的音频操作窗口。
该显示方式可以便于用户通过音频操作窗口快捷地控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,再接听通话,保证通话过程不会被其他输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
此外,在用户结束通话之后,PC显示屏上可以自动弹出除了通话请求的提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
需要说明的是,在PC和手机多屏协同的过程中,PC可以同时播放来源于多个应用和/或网页的音频,多个应用可以包括PC的本地应用,还可以包括手机侧的应用。
具体地,通过本申请实施例提供的音频通知的显示方法,当PC上显示了焦点态的多屏协同窗口时,可以将手机侧的应用的音频操作窗口显示在多屏协同窗口中,将PC的本地应用的音频操作窗口显示在多屏协同窗口的周围。
当多屏协同窗口为非焦点态或后台运行状态时,可以将手机侧的应用的音频操作窗口和PC的本地应用的音频操作窗口都显示在焦点态的应用窗口的周围,便于用户通过音频操作窗口快捷地控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,再接听通话,保证通话过程不会被其他输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户标识模块(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G/6G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
示例性的,在本申请实施例的一种可能的场景中,图2中所示的手机和PC可以建立多屏协同连接,本申请实施例对手机和PC之间连接多屏协同连接的方式不作限定。
可选地,在本申请实施例中,手机和PC作为两个不同的电子设备,可以都包括无线通信模块160。
一种可能的实现方式中,手机和PC可以为连接在同一个Wi-Fi网络下的设备;或者,手机和PC之间可以建立蓝牙连接;又或者,手机和PC之间可以基于碰一碰等NFC技术建立连接;再或者,手机和PC之间可以基于红外技术(infrared,IR)等无线通信的方式建立连接等。相应地,手机和PC之间就可以以对应的方式进行通信,支持多屏协同过程中数据或信息的传递,本申请实施例对手机和PC之间的通信方式不作限定。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),MiniLED,MicroLED,Micro-OLED,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
应理解,在本申请实施例中,手机和PC等电子设备可以都具有显示屏194。
示例性的,以图2所示手机和PC的多屏协同过程为例,用户可能使用PC播放来源于多个应用的音频,多个应用可以包括PC的本地应用,还可以包括手机侧的应用,PC的显示屏194可以为用户显示相应的应用界面或应用的窗口。
当PC接收到通话请求时,响应于接收到的该通话请求,PC可以根据当前显示屏上是否有焦点态显示的应用窗口和/或网页,以及PC在输出音频的应用等,确定显示屏194自动弹出的窗口的数量、种类和显示内容。当显示屏194上包括焦点态的应用窗口时,PC可以根据焦点态的应用窗口的显示位置和/或显示尺寸确定该显示屏194上每一个音频操作窗口的显示位置和/或显示尺寸等。例如,PC可以在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口,具体的显示方法可以参见实施例的详细介绍,在此不再赘述。此外,在用户结束通话之后,PC的显示屏194上可以自动聚合显示除了通话提示窗口之外的其他音频操作窗口,便于用户快捷地控制应用和/或网页继续播放音频。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
可选地,在本申请实施例中,如果PC和手机是具有触摸屏的电子设备,那么PC和手机可以具有该触摸传感器180K,该触摸传感器180K可以检测用户的触摸、点击等操作,生成操作事件,并将该操作事件传递给处理器110,由处理器110确定该操作事件包括触摸点的坐标、触摸状态等相关参数,根据该操作事件做出响应。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用eSIM,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的系统为例,示例性说明电子设备100的软件结构。
图4是本申请实施例的一例多屏协同场景下手机和PC的软件结构框图。其中,该软件结构框图示出了PC的软件结构、手机可能的软件结构,该软件结构框图可以支持手机和PC之间的多屏协同过程。
可选地,本申请实施例的PC和手机可以都为系统,具有图4所示的分层架构,该分层架构可以包括若干个层,每一层都有清晰的角色和分工,且层与层之间通过软件接口通信。
具体地,对于手机的软件结构,以系统为例,分层的结构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将系统从上至下分别包括应用程序(application,APP)层,应用程序框架(framework)层,系统库、内核层以及网络传输层等。
应用程序层可以包括一系列应用程序包。如图4所示,应用程序层可以包括备备忘录、音乐、视频、设置等应用程序,本申请实施例对此不作限定。
应用程序框架层可以包括多种服务程序或者一些预先定义的函数。应用程序框架层可以为应用程序层的应用程序提供应用编程接口(application programminginterface,API)和编程框架。
在本申请实施例中,如图4所示,应用程序框架层可以包括内容提供器,视图系统,通知管理器、窗口管理器、音频任务监控模块、音频播放控制模块、焦点监控模块、多屏框架服务模块、信息同步模块等。
其中,内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频等不同类型的数据。
视图系统包括提供给用户的可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序的显示界面。显示界面可以由一个或多个视图组成的。例如,对于包括不同应用程序的图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,显示的通知信息可以短暂停留后自动消失,无需用户交互,或者接受用户的关闭操作等。消息管理器还可以传递手机的不同应用程序之间的消息,或者传递手机和PC之间的消息等,本申请实施例对此不作赘述。
窗口管理器用于管理电子设备的窗口程序。具体地,在手机和PC的多屏协同过程中,手机的窗口管理器可以获取手机上待显示的应用窗口的大小,获取该待显示的应用窗口的界面内容或显示数据等。应理解,手机的待显示的应用窗口可以包括手机的界面上正在显示的窗口,还可以包括手机后台运行的一个或多个应用程序的窗口等。
应理解,在本申请实施例中,PC或手机中可以都存在音频任务监控模块、音频播放控制模块、焦点监控模块、多屏框架服务模块、信息同步模块等,下面每个模块可以具有的功能。
音频任务监控模块可以负责监控电子设备当前的音频任务。例如,在手机和PC的多屏协同过程中,手机和PC都具有该音频任务监控模块,可以监控是否有音频任务。
示例性的,以PC为例,当PC的音乐应用播放歌曲时,音频任务监控模块将音乐应用记录到音频应用列表中。当音乐应用退出或被关闭,或者长时间不再播放歌曲时,PC可以将音乐应用从音频应用列表中移除。
示例性的,以PC为例,为了实现音频任务的监控,PC的音频任务监控模块可以从音频系统的音频处理对象(Audio Processing Objects,APO)框架中获取音频的流音效(stream effects,SFX),SFX可以将应用输出的音频数据作为输入,经过处理后,输出到模式音效(mode effects,MFX)进行混音,当应用的音频信息经过SFX时,音频任务监控模块可以记录应用的标识,进而记录应用信息。因此,PC可以准确知道当前正在输出的音频来源于哪一个应用。
音频播放控制模块可以控制一个或多个音频的播放。
示例性的,以PC为例,音频播放控制模块可以控制一个或多个应用的音频的播放。当用户关闭或暂停某一个应用的音频任务时,该音频任务对应的SFX可以将该应用输出的音频数据配置成静音模式;当用户调低音量时,音频播放控制模块可以降低PC输出的音频数据的音量,进而实现控制一个或多个音频的播放。
焦点监控模块可以监测电子设备的显示屏上焦点态的应用窗口和焦点态的应用窗口的切换过程,以及检测显示屏上某一个应用窗口中,处于焦点态的网页和焦点态的网页的切换过程。
示例性的,以PC为例,焦点监控模块可以监测PC的显示屏上处于焦点态的应用窗口,并记录该焦点态的应用窗口的信息,例如显示屏上音乐应用的窗口和浏览器应用的窗口中哪一个处于焦点态;当用户切换焦点态的应用窗口时,该焦点监控模块可以监测焦点态窗口的变化过程。
或者,进一步地,对于浏览器应用,一个浏览器应用的窗口中可以以页签的形式显示多个网页。该场景中,焦点监控模块可以监测浏览器应用的窗口中焦点态显示的网页。在本申请实施例中,“焦点态的网页”可以理解为该浏览器应用的窗口处于焦点态且该网页在浏览器应用的窗口中位于顶层显示,其他网页在浏览器应用的窗口中位于非顶层显示的状态。
多屏框架服务模块可以用于实现手机和PC之间的多屏协同过程。
可选地,在本申请实施例中,可以在应用程序层和应用程序框架层之间设置“多屏框架服务层”,或者在应用程序框架层设置“多屏框架服务模块”,换言之,该多屏框架服务模块也可以被划分到应用程序框架层,本申请实施例对此不作限定。
示例性的,多屏框架服务模块可以进一步用于实现多屏协同过程中的窗口管理、窗口状态监听与同步、窗口坐标同步、反向控制等功能,每一种功能可以由相应的模块实现。换言之,多屏框架服务模块可以进一步包括窗口状态监听与同步模块、窗口坐标同步模块、反向控制模块等。
其中,窗口状态监听与同步单元可以监听手机上应用的运行状态,或者监听PC发送的某个协同的手机窗口中应用的运行状态变化、用户在该手机窗口中的操作等,并做出响应,以保持手机的应用的界面内容和PC上的该应用对应的手机窗口的界面内容的同步。
窗口坐标同步单元可以确定手机的待显示窗口在PC显示屏上的坐标。当PC上显示的某个手机窗口被放大、缩小、隐藏、最小化等,窗口坐标同步单元可以获取该窗口在PC上经过更新后的新的位置坐标等。
反向控制单元可以和窗口状态监听与同步单元、窗口坐标同步单元等相互配合,监听到的用户的操作事件之后,手机可以将操作结果等发送给PC,实现信息的同步;或者可以接受PC发送的用户的操作事件等,根据用户的操作事件做出响应,以保持手机的应用的界面内容和PC上的该应用对应的手机窗口的界面内容的同步。
信息同步模块可以根据用户的操作,暂停或继续播放某个音频任务。此外,信息同步模块还可以将手机侧的电话音频同步到PC端,由音频播放控制模块播放电话音频数据。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),三维图形处理库(例如:OpenGL ES),二维图形引擎(例如:SGL)等。
其中,表面管理器用于对手机的显示子系统进行管理,并且为多个应用程序提供了二维和三维图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
二维图形引擎是二维绘图的绘图引擎。
安卓运行时(Android runtime)包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
内核层是硬件和软件之间的层。内核层至少包含显示驱动、蓝牙驱动、无线保真(wireless fidelity,WIFI)驱动、近距离无线通讯技术(near-field communication,NFC)驱动等。
网络传输层可以用于不同设备之间的通信、数据传输等,例如蓝牙模块,通过在手机和PC之间建立蓝牙通道,通过蓝牙通道传输数据或消息、指令等,此处不再赘述。
在本申请实施例中,手机和PC之间的通信可以有多种不同的方式,例如手机和PC之间连接可以包括有线连接或者无线连接等多种不同连接方式。
可选地,手机和PC之间的有线连接可以是通过USB数据线连接,或者,手机100和PC之间的无线连接可以是通过建立Wi-Fi连接的方式。在本申请实施例中,当手机和PC之间为无线连接时,手机的内核层可以包括用于手机连接无线保真(wireless fidelity,WIFI)模块,用于进行无线连接。
或者,借助于手机和PC支持近场通信(near field communication,NFC)的功能,手机和PC之间通过“碰一碰”功能进行靠近连接。当手机和PC之间为NFC连接时,内核层还可以包括近距离无线通讯技术(near-field communication,NFC)模块,用于通过NFC实现手机和PC的连接。
又或者,通过手机和PC通过蓝牙扫码连接等。
又或者,随着通信技术的发展,通信带宽和速率逐渐提高,手机和PC之间可能在不建立近场通信连接的情况下也可以传输数据。示例性的,未来的第五代(5th generation,5G)移动通信系统等高速率通信方式的普及,手机和PC可能通过5G通信就可以实现在PC上显示手机的窗口,例如,通过在手机和PC上安装不同或相同的应用,借助于5G通信网络传输数据。
应理解,本申请实施例对手机和PC之间建立连接的方式不作限定。
此外,图4中还示出了PC参与本申请实施例的网络传输层、多屏框架服务模块、音频任务监控模块、音频播放控制模块、焦点监控模块、信息同步模块等。PC和手机连接之后,该网络传输层用于和手机建立连接,多屏框架服务模块用于显示手机的一个或多个窗口,例如手机的多屏协同主窗口、不同应用的子窗口等。
应理解,PC可以包括多层架构,例如预研层、PC软件层、操作系统(operatingsystem,OS)层以及基础只读存储器(read only memory,ROM)多屏框架层等,其中,PC软件层可以运行可执行文件(executable file,exe)。例如在本申请中,PC可以预置用于多屏框架服务模块的exe程序,该多屏框架服务模块的exe程序可以在PC上体现为App的形式,或者通过运行该多屏框架服务模块的exe程序使得PC具有显示手机的窗口的功能。
或者,PC也可以具有和手机相同的多层架构,本申请实施例对此不作限定。
示例性的,以手机和PC之间的多屏协同过程为例,本申请将PC的提供显示手机的窗口的功能模块称为“多屏框架服务模块”,下面将重点介绍用于PC上用于显示手机的窗口的多屏框架服务模块。
PC的多屏框架服务模块可以提供对应于手机的多屏框架服务模块的相关服务的功能,多屏框架服务模块也可以包括多窗口管理器、窗口状态监听与同步单元、手机窗口显示器、反向控制单元等。
其中,多窗口管理器可以接收手机发送的窗口显示数据,并根据窗口显示数据显示一个或多个手机窗口,该窗口显示数据可以包括手机窗口的坐标信息、手机窗口的显示界面的内容信息等。多窗口管理器可以根据手机窗口的坐标信息,确定在PC的显示屏上显示手机的一个或多个窗口。窗口显示数据的传输可以基于前述图4的相关内容中介绍的任意一种通信方式,此处不再赘述。
应理解,在本申请实施例中,可以将PC上显示的手机的应用窗口称为“手机窗口”,其中,手机窗口中用于显示手机的主界面的窗口称为“主窗口”或者“多屏协同窗口”,将PC上独立于“主窗口(或多屏协同窗口)”且用于显示手机运行的某个应用的界面的窗口称为“子窗口”或者“XXX应用的窗口”。
示例性的,可以根据某个窗口显示在PC显示屏上的时间,确定最先显示的第一个窗口是主窗口,在显示第一个窗口之后再显示的第二个窗口、第三个窗口等是子窗口,本申请实施例对此不作限定。
还应理解,本申请实施例所称的“多屏协同窗口”中的“协同”并不限定该PC上的主窗口和手机界面的显示保持一致,换言之,多屏协同窗口和手机的主界面的显示内容可以一致、也可以不同。此外,用户在PC上运行手机的任意一个应用时,该应用可以在手机的后台运行,不影响手机的屏幕的显示内容,本申请实施例对手机的屏幕显示内容不作限定。
为了便于理解,本申请以下实施例将以具有图3和图4所示结构的电子设备100为例,例如PC或手机等,下面将结合附图和应用场景,对本申请实施例提供的音频通知的显示方法进行具体阐述。
一种可能的场景中,用户在独立使用PC的过程中,可以同时运行PC上安装的一个或多个应用程序,每个应用程序可以输出对应的音频。同时,用户还可以通过PC的浏览器应用打开一个或多个网页界面,该一个或多个网页界面可以包括能够输出音频的界面。
应理解,在本申请实施例中,“独立使用PC”指的是:用户当前使用或运行的应用程序都是来自于PC的本地应用。具体地,“独立使用PC”可以包括PC没有和其他任意的电子设备建立连接,用户单独地使用PC并运行一个或多个PC的本地应用的场景,还可以包括PC和其他电子设备建立连接,用户使用PC的过程中仅运行了PC的本地应用的场景,本申请实施例对此不作限定。
可选地,本申请实施例的“通话请求”可以来源于即时通信类应用。可选地,“即时通信类应用”可以包括应用、/>应用、畅联通话应用、游戏类具有语音通话、视频通话等通话功能的应用,该即时通信类应用接收到其他好友发送的通话请求时,会及时地弹出音频操作窗口以提醒用户需要处理该通话请求。
或者,该“通话请求”还可以来自于电子设备的电话应用、短信息应用等应用。示例性的,当电子设备是手机、平板等设备时,可能接收到其他联系人拨打的电话、通过短信息应用发起的通话等。
应理解,本申请实施例的“通话请求”的来源不限于前述列举的“即时通信类应用”,以及电话应用、短信息应用等多种可能的其他应用,本申请实施例对此不作限定。
在后续实施例的介绍中,将以上任意应用的语音通话请求、视频通话请求等统一称为“通话请求”。
一种可能的实现方式中,用户在使用PC的过程中,如果PC接收到通话请求,响应于接收到的该通话请求,PC可以根据当前能够输出音频的一个或多个应用、显示屏上焦点态显示的应用,确定需要自动弹出的窗口的数量、窗口对应的应用,并显示给用户。
图5是本申请实施例提供的一例PC上显示音频通知的示意图。
假设用户在独立使用PC的过程中,同时运行PC上安装的多个应用:音乐应用、浏览器应用、即时通信应用。示例性的,如图5中的(a)图所示,音乐应用和浏览器应用在前台运行,PC的显示屏上可以显示音乐应用的窗口10和浏览器应用的窗口20。音乐应用的窗口10中显示有音乐应用的运行界面,浏览器应用的窗口20中显示有歌曲1的在线播放网页。即时通信应用在后台运行,后台运行的即时通信应用的窗口可以不显示在PC的显示屏上。PC显示屏的底部导航区域可以相应地显示该音乐应用的窗口10对应的应用图标10-1和该浏览器应用的窗口20对应的应用图标20-1。
在图5中的(a)图所示的场景中,浏览器应用的窗口20显示在该音乐应用的窗口10的上一层级,且处于焦点态。当接收到来自于即时通信应用的通话请求时,响应于接收到的该即时通信应用的通话请求,PC的显示屏可以显示如图5中的(b)图所示的音频通知界面,该音频通知界面上显示有自动弹出提示窗口30和音乐应用的音频操作窗口10-2。其中,该提示窗口30用于提醒用户当前有需要处理的通话请求,该音乐应用的音频操作窗口10-2可以包括一个或多个控件,便于用户通过该音乐应用的音频操作窗口10-2控制歌曲2的播放。
可选地,该提示窗口30和音乐应用的音频操作窗口10-2的显示位置和/或显示尺寸可以根据该浏览器应用的窗口20的显示位置和/或显示尺寸进行自适应调节。
一种可能的显示方式中,该提示窗口30和音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的周围。
可选地,该提示窗口30和音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的任意边框位置处。该显示方式中,提示窗口30和音乐应用的音频操作窗口10-2显示在焦点态的窗口附近,可以方便用户操作。
可选地,该提示窗口30、音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20边框之外的区域,即该提示窗口30、音乐应用的音频操作窗口10-2与焦点态的浏览器应用的窗口20可以不重叠。该显示方式可以避免提示窗口30、音乐应用的音频操作窗口10-2遮挡焦点态的浏览器应用的窗口20,便于用户查看更多的界面内容。
或者,该提示窗口30、音乐应用的音频操作窗口10-2的部分区域显示在焦点态的浏览器应用的窗口20内,换言之,该提示窗口30、音乐应用的音频操作窗口10-2与焦点态的浏览器应用的窗口20可以具有重叠区域。该显示方式可以为用户提供更加醒目的显示效果,使得提示更加明显。
示例性的,如图5中的(b)图所示,如果焦点态的浏览器应用的窗口20显示在PC显示屏的右下角区域,当接收到通话请求时,响应于该通话请求,PC可以确定待显示的提示窗口30,同时检测到音乐应用正在播放歌曲2且该音乐应用的窗口10处于非焦点态显示,因此,PC可以确定还需要自动弹出与非焦点态的音乐应用相关联的音频操作窗口。
在该场景中,PC确定了当前需要自动弹出的窗口数量为两个,以及确定了两个音频操作窗口中的每一个窗口关联的应用之后,可以根据焦点态的浏览器应用的窗口20的显示位置确定两个音频操作窗口中每一个窗口的显示位置。示例性的,如图5中的(b)图所示,弹出的两个音频操作窗口可以紧靠显示在该焦点态的浏览器应用的窗口20的上边框位置处,两个音频操作窗口呈现横向排列,两个音频操作窗口具有相同的横向显示宽度,相同的纵向显示高度,且两个音频操作窗口的横向显示宽度之和等于浏览器应用的窗口20横向显示宽度。
另一种可能的显示方式中,PC可以根据显示屏上的显示内容、显示区域确定一个或多个音频操作窗口的显示位置和/或显示尺寸。
示例性的,如图5中的(c)图所示,假设PC判断该焦点态的浏览器应用的窗口20之外的显示区域中,左侧的剩余显示区域的面积最大。PC可以确定将自动弹出的两个音频操作窗口显示在该焦点态的浏览器应用的窗口20的左侧边框的位置处。
可选地,两个音频操作窗口可以纵向排列,两个音频操作窗口中位于下方显示的音乐应用的音频操作窗口10-2的下边框可以和该浏览器应用的窗口20的下侧边框保持平齐。且该提示窗口30和音乐应用的音频操作窗口10-2具有相同的横向显示宽度,不同的纵向显示高度。
应理解,该显示方式可以保证显示屏上的多个窗口具有整齐的排列样式,提供给用户更好的视觉体验。
又一种可能的显示方式中,PC上自动弹出的一个或多个音频操作窗口具有预设位置和/或显示尺寸。
可选地,该预设位置可以是PC显示屏的显示区域的上边界且位于显示屏的宽度方向的中心位置。或者,该预设位置可以是PC显示屏的显示区域的下边界且位于显示屏的宽度方向的中心位置。又或者,该预设位置可以是PC显示屏的左上角的固定位置。又或者,该预设位置可以是PC显示屏的右下角的固定位置等,本申请实施例对此不作限定。
示例性的,如图5中的(d)图所示,该提示窗口30和音乐应用的音频操作窗口10-2可以显示在PC显示屏的顶端中间区域,紧靠显示屏显示区域的上边界,且该提示窗口30和音乐应用的音频操作窗口10-2具有相同的横向显示宽度和纵向显示高度。
应理解,当PC上自动弹出的音频操作窗口的数量为三个时,可以将三个窗口并排排列显示在显示屏的顶端中间区域,当PC上自动弹出音频操作窗口的数量更多时,还可以进一步增加窗口排列的行数,继续排列显示更多的窗口,为了简便,此处不再一一举例赘述。
可选地,对于不同的应用,每一个应用对应的音频操作窗口可以具有预设的显示尺寸,显示尺寸可以包括“横向显示宽度”和“纵向显示高度”。示例性的,系统根据每一个应用对应的待显示的控件种类、控件数量等,确定该应用的音频操作窗口的横向显示宽度和/或纵向显示高度。
这里需要说明的是,在本申请实施例中,“横向显示宽度”、“纵向显示高度”或者“高度”、“宽度”等显示尺寸可以以像素(pixel,px)为单位,像素的高低直接影响显示屏的分辨率。示例性的,假设PC的显示屏的分辨率为1680×1050,可以理解为该显示屏的横向显示宽度所包括的像素点数是固定的,因此,该PC的显示屏上显示的任意一个窗口的尺寸、应用程序的图标的尺寸等都可以以横向像素数量×纵向的像素数量来表示,后续不再赘述。
可选地,该提示窗口30和音乐应用的音频操作窗口10-2中包括的控件种类和/或控件数量等显示内容可以是预设的。
示例性的,如图5中的(b)图所示,该提示窗口30用于提示用户当前有需要处理的通话请求,该提示窗口30可以包括用户“Miss Ma”的图像、备注名、电话号码、接听控件、挂断控件等一个或多个控件,以便于用户查看通话请求的来源、以及便于用户点击接听控件、挂断控件执行快捷操作,本申请实施例对该提示窗口30的显示内容不作限定。
示例性的,如图5中的(b)图所示,该音乐应用的音频操作窗口10-2中可以包括播放控件、上一曲控件、下一曲控件、收藏控件、分享控件等一个或多个控件。应理解,用户在准备接听通话时,一般希望暂停播放歌曲2以避免音频干扰。因此,该音乐应用的音频操作窗口10-2中包括的控件可以便于用户快速执行暂停播放的操作。可选地,该提示窗口30和音乐应用的音频操作窗口10-2中包括的控件种类和/或控件数量等显示内容可以是用户手动选择的。
示例性的,开发者可以在音乐应用中为用户提供设置入口,用户可以通过该设置入口手动选择PC上主动弹出音乐应用的音频操作窗口10-2时,所期望显示在窗口中的控件种类和/或控件数量等内容,本申请实施例对用户手动设置每一个音频操作窗口中的控件的方式不作限定。
当PC的显示屏上显示图5中的(b)图、或(c)图、或(d)图所示的音频通知界面时,用户可以根据自己的需求,通过该提示窗口30、音乐应用的音频操作窗口10-2控制音频的播放。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2中的播放控件,暂停音乐应用播放歌曲2的进程;还可以点击该焦点态的浏览器应用的窗口20的播放控件20-2,暂停浏览器应用在线播放歌曲1的进程。用户可以在暂停了PC的所有音频播放之后,再点击该提示窗口30的接听控件,和“Miss Ma”进行通话,通话音频不会被PC播放歌曲等干扰,本申请实施例对此不作赘述。
上述过程中,PC可以根据焦点态的浏览器应用的窗口20的显示位置确定该提示窗口30和音乐应用的音频操作窗口10-2的显示位置。考虑到用户可以直接点击焦点态的浏览器应用的窗口20中的播放控件20-2控制音频的播放,PC可以不为焦点态的浏览器应用显示音频操作窗口。从而减少屏幕上显示的音频操作窗口数量,节省屏幕显示区域,可以为用户呈现更精简的显示效果。
这里需要说的是,本申请实施例对PC的显示屏上自动弹出的一个或多个音频操作窗口的显示时长不作限定。
可选地,每一个音频操作窗口的显示时长可以为预设时长,例如显示5秒后自动消失。
或者,每一个音频操作窗口的显示时长可以为用户设置的固定时长,例如用户设置固定时长为3秒。
又或者,每一个音频操作窗口的显示时长可以与用户的操作相关。
示例性的,当PC检测到用户对该音乐应用的音频操作窗口10-2中的播放控件的点击操作之后,在图5中的(b)图、(c)图和(d)图所示的任意音频通知界面上显示的该音乐应用的音频操作窗口10-2可以自动消失;当PC没有检测到用户对该音乐应用的音频操作窗口10-2中的任意控件的操作,该音乐应用的音频操作窗口10-2可以显示预设时长(例如5秒)之后自动消失,本申请实施例对此不作限定。
通过上述介绍的音频通知的显示方法,用户在独立使用PC的场景中,可以通过PC播放一个或多个应用输出的音频,当PC接收到通话请求时,响应于该通话请求,PC可以确定当前正在播放音频的一个或多个应用,以及显示屏上焦点态显示的应用窗口,并自动弹出的一个或多个应用的音频操作窗口,该一个或多个应用的音频操作窗口可以显示在焦点态显示的应用窗口的周围。其中,每一个音频操作窗口中可以包括一个或多个操作控件。用户可以通过音频操作窗口中的控件快捷地控制音频的播放,避免用户需要执行繁琐的操作,才可以暂停播放音频,使得用户可以尽快接听通话,并可以保证用户的通话过程不被PC输出的其他音频干扰,提高了用户的操作体验。
此外,本申请实施例提供的音频通知的显示方法,除了在PC接收到通话请求时,可以将PC当前涉及音频输出的所有应用和/或网页都以对应的音频操作窗口的形式显示。当用户结束通话时,PC还可以自动弹出一个或多个音频操作窗口,便于用户重新控制一个或多个应用和/或网页继续播放音频。
图6是本申请实施例提供的一例通话结束后PC上显示音频通知的示意图。
示例性的,假设PC接收到来自即时通信应用的通话请求时,显示如图5中的(b)图、(c)图或(d)图所示的任意一种音频通知界面,用户点击该音乐应用的音频操作窗口10-2中的播放控件,暂停播放歌曲2;点击该浏览器应用的窗口20中的播放控件20-2,暂停播放歌曲1,再点击该提示窗口30的接听控件,和“Miss Ma”进行通话。当用户和“Miss Ma”结束通话之后,PC可以进一步显示图6所示的音频通知界面。
可选地,在图6所示的音频通知界面上显示有该音乐应用的音频操作窗口10-2,且该音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的周围。
示例性的,该音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的任意边框位置处,例如可以和图5中的(b)图、(c)图或(d)图所示的该音乐应用的音频操作窗口10-2保持一致,具有相同的显示位置和/或显示尺寸,本申请实施例对此不作限定。
上述显示方式中,用户通话结束之后,再次弹出该音乐应用的音频操作窗口10-2,并显示在焦点态的应用窗口附近,可以方便用户操作,继续控制音乐应用播放歌曲2。
这里需要说明的是,用户在图5中的(b)图、(c)图或(d)图中所示的该音乐应用的音频操作窗口10-2,点击了播放控件,已经暂停播放歌曲2,因此图6中的该音乐应用的音频操作窗口10-2再次弹出时,窗口中的原播放控件显示为“暂停播放”的状态,本申请实施例称为“暂停控件”。同样地,用户暂停播放歌曲1,在焦点态的浏览器应用的窗口20中,原播放控件20-2也显示为暂停控件20-4,该音乐应用的窗口10中显示的原播放控件101也变化显示为暂停控件102,后续实施例对控件的显示形态不作赘述。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2的暂停控件,PC继续播放音乐应用的歌曲2;点击浏览器应用的窗口20中的暂停控件20-4,PC继续播放浏览器应用的网页输出的歌曲1。
应理解,上述实施例以用户通过点击某个音频操作窗口包括的播放控件,以暂停播放音频为例,避免多个音频干扰用户的语音通话。此外,每一个音频操作窗口还可以包括“音量调节控件”、“静音控件”等,用户还可以通过该音频操作窗口的“音量调节控件”、“静音控件”等将音频切换为静音播放。当用户结束语音通话,可以再次弹出相应的音频操作窗口,结束音频的静音播放,该过程可以参照前述实施例,本申请实施例对此不作限定。
上述实现过程,当用户结束通话之后,PC可以显示通话提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
需要说明的是,用户在使用PC的过程中,焦点态的应用窗口可能不断地发生变化。当焦点态的应用窗口发生变化时,响应于该通话请求,PC自动弹出的窗口、窗口显示内容和窗口对应的应用也可以发生适应性变化。
图7是本申请实施例提供的另一例PC上显示音频通知的示意图。
示例性的,本申请实施例继续以图5中的(a)图介绍的场景为例,假设用户在独立使用PC的过程中,同时运行PC上安装的多个应用:音乐应用、浏览器应用、即时通信应用。其中,音乐应用和浏览器应用在前台运行,显示屏上显示音乐应用的窗口10和浏览器应用的窗口20,且该浏览器应用的窗口20显示为焦点态。在后台运行的即时通信应用的窗口未显示在显示屏上。
示例性的,当用户执行如图7中的(a)图所示的操作,点击该音乐应用的窗口10的任意显示区域时,响应于用户的操作,PC的显示屏可以如图7中的(b)图所示。区别于图5中的(a)图,在图7中的(b)图中,音乐应用的窗口10切换显示为焦点态(图中以黑色粗实线边框的窗口示出),浏览器应用的窗口20切换显示为非焦点态,音乐应用的窗口10显示在该浏览器应用的窗口20的上一层级。
在图7中的(b)图所示的场景中,如果PC接收到来自于即时通信应用的通话请求时,响应于接收到的通话请求,PC的显示屏可以进一步显示如图7中的(c)图所示的界面,该界面上将自动弹出提示窗口30和浏览器应用的音频操作窗口20-3。其中,提示窗口30用于提醒用户当前有需要处理的通话请求,浏览器应用的音频操作窗口20-3可以包括一个或多个能够接收用户操作的控件,便于用户通过该浏览器应用的音频操作窗口20-3的控件控制歌曲1的播放。
一种可能的显示方式中,提示窗口30和浏览器应用的音频操作窗口20-3可以靠近显示在焦点态的音乐应用的窗口10的周围。
可选地,提示窗口30和浏览器应用的音频操作窗口20-3可以显示在焦点态的音乐应用的窗口10的任意边框位置处,便于用户操作。
可选地,提示窗口30、浏览器应用的音频操作窗口20-3可以和焦点态的音乐应用的窗口10具有重叠区域,或者显示在音乐应用的窗口10之外的区域,不具有重叠区域。
可选地,PC可以根据焦点态的音乐应用的窗口10的显示位置和/或显示尺寸,自适应调节该提示窗口30和浏览器应用的音频操作窗口20-3的显示位置和/或显示尺寸。
应理解,以上多种可能的窗口显示方式可以参照图5中的相关描述,为了简便,此处不再赘述。
示例性的,如图7中的(c)图所示,焦点态的音乐应用的窗口10显示在显示屏的左上角区域且紧靠PC显示屏的边框处。响应于接收到的通话请求,PC可以确定当前正在播放来源于浏览器应用的音频,且浏览器应用的窗口20处于非焦点态,则可以确定需要显示浏览器应用的音频操作窗口20-3。此外,还可以确定当前需要及时为用户显示即时通话请求的提示窗口30。
可选地,提示窗口30和浏览器应用的音频操作窗口20-3可以紧靠显示在焦点态的该音乐应用的窗口10的右边框处,该提示窗口30和浏览器应用的音频操作窗口20-3可以呈现上下纵向排列,且该提示窗口30和浏览器应用的音频操作窗口20-3可以具有相同的横向显示宽度和纵向显示高度。
可选地,该提示窗口30还可以和图5中的(b)图和(c)图具有相同的显示内容,即显示相同类型和相同数量的控件。
可选地,浏览器应用的音频操作窗口20-3可以不同于图5中的(b)图和(c)图示出的音乐应用的音频操作窗口10-2,两个音频操作窗口可以包括不同数量和/或不同类型的控件,本申请实施例对此不作限定。
示例性的,图5中的(b)图和(c)图所示的音乐应用的音频操作窗口10-2可以包括分享控件、上一曲控件、播放控件、下一曲控件和收藏控件,相比之下,图7中的(c)图所示的该浏览器应用的音频操作窗口20-3可以包括分享控件、上一曲控件、播放控件、下一曲控件、下载控件、音量调节控件等。
应理解,即使当前PC的浏览器应用和音乐应用都输出的都是音乐音频,用户通过浏览器的网页在线播放歌曲1时,一般不需要用户登录个人账号就可以实现歌曲的在线播放,因此“收藏控件”可以不包括在该浏览器应用的音频操作窗口20-3中,而“下载控件”可以显示在该浏览器应用的音频操作窗口20-3中,便于用户可以根据自己的需要执行下载歌曲等操作。
当PC的显示屏上显示图7中的(c)图所示的界面时,用户可以根据自己的需求,通过该提示窗口30、该浏览器应用的音频操作窗口20-3快捷控制每一个音频的播放。
示例性的,用户可以点击该浏览器应用的音频操作窗口20-3中的播放控件,PC暂停播放歌曲1;点击音乐应用窗口10中的播放控件101,PC暂停播放歌曲2。用户可以再点击该提示窗口30的接听控件,和“Miss Ma”进行通话。如此,通话音频不会被PC播放的歌曲等干扰。相关描述请参见前文,为了简便,此处不再赘述。
通过上述图5和图7的对比可知,本申请实施例提供的音频通知的显示方法,当接收到通话请求之后,PC可以检测显示屏上处于焦点态的应用窗口、处于非焦点态的应用窗口,并在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口。换言之,当PC显示屏上焦点态的应用窗口和/或非焦点态的应用窗口不同时,自动弹出的音频操作窗口的数量、种类、显示位置、显示尺寸也会不同。类似地,当用户结束通话时,PC可以自动弹出一个或多个音频操作窗口,便于用户快捷地控制应用和/或网页继续播放音频。
图8是本申请实施例提供的另一例通话结束后PC上显示音频通知的示意图。
示例性的,假设PC接收到来自即时通信应用的通话请求时,显示如图7中的(c)图所示的音频通知界面,用户点击该浏览器应用的音频操作窗口20-3中的播放控件,暂停播放歌曲1;点击音乐应用窗口10中的播放控件101,PC暂停播放歌曲2。再点击该提示窗口30的接听控件,和“Miss Ma”进行通话。当用户和“Miss Ma”结束通话之后,PC可以进一步显示图8所示的音频通知界面。
可选地,在图8所示的音频通知界面上显示有:PC自动弹出的浏览器应用的音频操作窗口20-3,且该浏览器应用的音频操作窗口20-3可以显示在焦点态的浏览器应用的窗口20的周围。
示例性的,该浏览器应用的音频操作窗口20-3可以显示在焦点态的浏览器应用的窗口20的上边框位置处,相比于图7中的(c)图,该浏览器应用的音频操作窗口20-3的显示位置可以向上移动,保持和焦点态的音乐应用的窗口10的长边框平齐,显示尺寸保持一致,本申请实施例对此不作限定。
示例性的,用户可以点击该浏览器应用的音频操作窗口20-3的暂停控件,PC继续播放浏览器应用的网页输出的歌曲1;点击焦点态的音乐应用的窗口10中的暂停控件102,PC继续播放音乐应用的歌曲2。
通过图6和图8的对比,当显示屏上处于焦点态的应用窗口发生变化时,用户结束通话之后,PC上自动弹出的音频操作窗口也会变化。例如,PC可以重新检测当前PC显示屏上处于焦点态的应用窗口,并在焦点态的应用窗口的周围聚合显示音频操作窗口,具体的显示方法可以参见上文的介绍,此处不再赘述。
又一种可能的场景中,用户可能通过PC上安装的浏览器应用打开了多个能够输出音频的网页,该多个网页可以以页签的形式显示在一个浏览器应用的窗口中,或者,该输出网页可以以独立的子窗口的形式显示。
当用户通过浏览器应用打开了多个能够输出音频的网页时,本申请实施例也提供相应的音频通知的显示方法,PC可以检测并识别该浏览器应用对应的多个能够输出音频的网页,如果接收到通话请求,PC可以根据焦点态的应用窗口和/或焦点态的网页,确定需要自动弹出的音频操作窗口的数量、对应的应用来源等。
这里需要说明的是,对于浏览器应用,当多个网页以页签的形式显示在一个浏览器应用的窗口中,“焦点态的网页”可以理解为该浏览器应用的窗口处于焦点态,且该网页在浏览器应用的窗口中位于顶层显示,其他网页在浏览器应用的窗口中位于非顶层显示的状态。当多个网页以独立的子窗口的形式显示时,“焦点态的网页”可以理解为该网页对应的浏览器应用的子窗口位于焦点态,该场景可以参照前述实施例中介绍的焦点态的窗口,后续实施例将不再赘述。
图9是本申请实施例提供的又一例PC上显示音频通知的示意图。
示例性的,如图9中的(a)图所示,假设用户在独立使用PC的过程中,同时运行PC上安装的多个应用:音乐应用、浏览器应用、即时通信应用。其中,音乐应用和浏览器应用在前台运行,显示屏上显示有音乐应用的窗口10和浏览器应用的窗口20,该浏览器应用的窗口20显示为焦点态。浏览器应用打开了歌曲1的在线播放网页和调频(frequencymodulation,FM)广播(调频频率为XX Hz)在线播放网页,两个网页均以页签的形式显示在浏览器应用的窗口20中。其中,歌曲1的在线播放网页以焦点态显示在浏览器应用的窗口中,FM广播在线播放网页以非焦点态显示在浏览器应用的窗口中。在后台运行的即时通信应用的窗口未显示在显示屏上。
此时,如果接收到通话请求,响应于该通话请求,PC的显示屏可以显示如图9中的(b)图所示的音频通知界面。如图9中的(b)图所示,该音频通知界面上显示有:自动弹出的提示窗口30、音乐应用的音频操作窗口10-2以及浏览器应用FM广播网页的音频操作窗口20-5。该浏览器应用FM广播网页的音频操作窗口20-5用于用户控制FM广播的在线播放,如该浏览器应用FM广播网页的音频操作窗口20-5可以显示一个暂停控件,用户可以点击该暂停控件就可以暂停播放FM广播的音频。该提示窗口30、该音乐应用的音频操作窗口10-2的相关描述可以参考上文,在此不再赘述。换言之,当浏览器应用打开了多个能够输出音频的网页时,PC可以检测上述网页在浏览器应用的窗口中是否为焦点态,并在显示屏上显示非焦点态的网页对应的音频操作窗口。
可选地,提示窗口30、音乐应用的音频操作窗口10-2、浏览器应用FM广播网页的音频操作窗口20-5的显示位置等窗口显示方式可以参照图5、图7等前述实施例中的相关描述,在此不再赘述。
类似地,当用户结束通话之后,PC可以进一步显示图10所示的音频通知界面。
图10是本申请实施例提供的又一例通话结束后PC上显示音频通知的示意图。当用户通话结束后,PC可以自动弹出音乐应用的音频操作窗口10-2和浏览器应用FM广播网页的音频操作窗口20-5。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2的暂停控件,PC继续播放音乐应用的歌曲2;点击该浏览器应用FM广播网页的音频操作窗口20-5的播放控件,PC继续播放的FM广播;点击焦点态的浏览器应用的窗口20中的暂停控件20-4,PC的浏览器应用继续播放歌曲1。
由此可知,当PC上浏览器应用等通过多个网页分别输出音频时,PC还可以检测到每一个音频的来源,用户结束通话之后,PC上自动弹出的音频操作窗口可以包括非焦点态的应用和/或网页对应的音频操作窗口,PC可以不显示焦点态的应用和/或网页对应的音频操作窗口,便于用户快捷恢复一个或多个应用和/或网页继续播放音频,简化了操作流程,提高了用户的操作体验。
需要说明的是,用户在使用PC的过程中,用户的操作可能导致焦点态的浏览器应用包括的多个网页不断地发生变化。当浏览器应用的窗口中显示的焦点态的网页发生变化时,PC自动弹出的窗口、窗口显示内容和窗口对应的应用也可以发生适应性变化。
图11是本申请实施例提供的再一例PC上显示音频通知的示意图。
示例性的,假设用户在独立使用PC的过程中,同时运行PC上安装的多个应用:音乐应用、浏览器应用、即时通信应用。其中,音乐应用和浏览器应用在前台运行,显示屏上显示有音乐应用的窗口10和浏览器应用的窗口20,该浏览器应用的窗口20处于焦点态。其中,歌曲1的在线播放网页以焦点态显示在浏览器应用的窗口中,FM广播在线播放网页以非焦点态显示在浏览器应用的窗口中。即时通信应用在后台运行,该即时通信应用的窗口未显示在显示屏中。当用户执行如图11中的(a)图所示的操作,点击该浏览器应用的窗口20的FM广播在线播放网页对应的页签时,响应于用户操作,如图11中的(b)图所示,该浏览器应用的窗口20中显示的网页:由歌曲1的在线播放网页切换为FM广播在线播放网页。由此,该FM广播在线播放网页切换为焦点态,该歌曲1的在线播放网页切换为非焦点态。
可选地,以“页签区域的阴影状态”表示该页签对应的网页为焦点态,如图11中的(b)图所示,该浏览器应用的窗口20顶端的页签区域中FM广播在线播放网页对应的页签区域可以显示为阴影。
可选地,该浏览器应用的窗口中的FM广播在线播放网页可以如图11中的(b)图所示,显示播放控件、听高清版控件、分享控件等一个或多个控件,以及FM广播电台列表等与FM广播播放过程相关的内容,本申请实施例对此不作限定。
示例性的,PC接收到通话请求时,响应于该通话请求,PC的显示屏可以显示如图11中的(c)图所示的音频通知界面。该音频通知界面上显示有自动弹出的窗口:提示窗口30、音乐应用的音频操作窗口10-2以及浏览器应用的音频操作窗口20-3。用户可以根据自己的需求,通过该音乐应用的音频操作窗口10-2、该浏览器应用的音频操作窗口20-3和焦点态的浏览器应用的窗口20中的控件,快捷控制每一个音频的播放。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2中的播放控件,PC暂停播放歌曲2;点击该浏览器应用的音频操作窗口20-3中的播放控件,PC暂停播放歌曲1;点击该浏览器应用的窗口20中FM广播在线播放的播放控件20-6,PC暂停播放FM广播。用户还可以点击该提示窗口30的接听控件,和“Miss Ma”进行通话,如此,通话音频不会被PC播放的歌曲等干扰。其他相关描述请参见前文,为了简便,此处不再赘述。
示例性的,该音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3呈现上下排列,提示窗口30和两个音频操作窗口可以具有相同的横向显示宽度,且两个音频操作窗口的纵向显示高度之和等于该提示窗口30的纵向显示高度。该显示方式便于用户操作,可以使得自动弹出的提示窗口30和两个音频操作窗口具有简洁、整齐的排列方式,为用户提供更加美观的视觉效果。其他相关描述请参见前文,此处不再赘述。
类似地,当用户结束通话之后,PC可以进一步显示图12所示的音频通知界面。
图12是本申请实施例提供的再一例通话结束后PC上显示音频通知的示意图。用户结束通话之后,在图12所示的音频通知界面上显示有:PC自动弹出的该音乐应用的音频操作窗口10-2和该浏览器应用的音频操作窗口20-3,且该音乐应用的音频操作窗口10-2和该浏览器应用的音频操作窗口20-3显示在焦点态的浏览器应用的窗口20的周围。
示例性的,如图12所示,该音乐应用的音频操作窗口10-2和该浏览器应用的音频操作窗口20-3显示在焦点态的浏览器应用的窗口20的上边框位置处,显示位置和显示尺寸相比于图11中的(c)图可以保持不变,且仍然为上下排列,本申请实施例对此不作限定。
上述显示方式在用户语音通话前后,音频操作窗口保持不变的显示位置和/或显示尺寸,更符合用户的使用习惯,以及不会对用户造成较大的视觉变化的效果,从而给用户带来更好的使用和操作体验。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2的暂停控件,PC继续播放音乐应用的歌曲2;点击该浏览器应用的音频操作窗口20-3的暂停控件,PC继续播放音乐应用的歌曲1;点击焦点态的浏览器应用的窗口20中在线播放FM广播网页界面的暂停控件20-7,PC继续播放FM广播。
由此可知,当浏览器应用中显示的焦点态的网页不同时,用户结束通话之后,PC上自动弹出的音频操作窗口也会不同。
综上所述,通过上述图5至图12介绍的实施例和音频通知的显示方法,用户在使用PC时,可以同时播放来源于多个应用和/或网页的音频。当接收到通话请求时,PC可以根据焦点态显示的应用窗口和/或网页,在显示屏上聚合显示非焦点态的应用和/或网页对应的音频操作窗口便于用户通过音频操作窗口快捷地控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,再接听通话,保证通话过程不会被其他应用输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
此外,在用户结束通话之后,PC显示屏上可以自动弹出除了通话请求的提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
需要说明的是,在图5至图12中介绍的实施例中,以用户结束通话之后显示通话提示窗口之外的其他音频操作窗口为例进行说明,其中,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和PC接收到通话请求时显示的音频操作窗口保持一致,或者,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和PC接收到通话请求时显示的音频操作窗口有所不同,本申请实施例对此不作限定。
示例性的,前述图5至图12中介绍的实施例中,响应于通话请求,PC可以检测正在输出音频的应用包括应用A、应用B和应用C,那么可以显示应用A、应用B、应用C的音频操作窗口和通话提示窗口。如果用户在接听通话的过程中没有关闭或更改PC的应用运行情况,结束通话之后,PC也显示应用A、应用B、应用C的音频操作窗口。
如果用户在接听通话的过程中关闭了应用A,运行了应用D且应用D也是能够输出音频的应用,相应地,结束通话之后,PC可以显示应用B、应用C和应用D的音频操作窗口,不同的音频显示方法都落入本申请保护的范围,后续实施例不再赘述。在另一种可能的场景中,用户可以使用手机和PC进行多屏协同。在手机和PC的多屏协同过程中,用户可以在PC上运行手机侧安装的一个或多个应用程序,PC的显示屏上将显示一个或多个手机窗口。此外,用户还可以同时运行了PC本地安装的一个或多个应用程序,或者通过PC的浏览器应用打开一个或多个网页界面。在手机和PC的多屏协同的场景下,PC可以同时输出多个音频,多个音频可以包括来源于手机侧的应用程序的音频,还可以包括来源于PC侧的应用程序和/或网页界面的音频。
图13是本申请实施例提供的一例多屏协同过程中PC上显示音频通知的示意图。
示例性的,图13中的(a)图示出了手机和PC多屏协同的场景,手机在解锁模式下,可以显示如图所示的主界面,PC的显示屏上显示了多屏协同的主窗口40、音乐应用的窗口10和浏览器应用的窗口20,该多屏协同的主窗口40显示为焦点态,该浏览器应用的窗口20显示在音乐应用的窗口10的上一层级。该多屏协同的主窗口40的显示内容可以和手机的主界面的显示内容保持一致,为了简便,此处不再赘述。
相应地,在PC显示屏的底部导航区域可以显示该音乐应用的窗口10对应的应用图标10-1、该浏览器应用的窗口20对应的应用图标20-1和多屏协同的主窗口40对应的图标40-1。
可选地,音乐应用和浏览器应用中的任意一个应用可以是手机侧安装的应用,也可以是PC的本地应用,本申请实施例对此不作限定。
一种可能的场景中,在图13中的(a)图中,假设音乐应用、浏览器应用都是PC的本地应用。
示例性的,用户执行如图13中的(a)图所示的操作,点击该多屏协同的主窗口40的控制区域的最小化控件,响应于用户的操作,PC显示图13中的(b)图所示的界面,该多屏协同的主窗口40为后台运行,不显示在PC的显示屏上,该界面上前台显示该音乐应用的窗口10和浏览器应用的窗口20,且浏览器应用的窗口20显示为焦点态,图中以黑色粗实线边框表示该焦点态显示的应用窗口。
应理解,在PC和手机多屏协同过程中,即时通信应用可以是PC上安装的本地应用,也可以是手机侧安装的应用,用户可以在PC上使用手机侧的应用,本申请实施例对此不作限定。
另一种可能的场景中,假设即时通信应用是手机侧安装的应用,当手机侧的即时通信应用接收到来自于用户“Miss Ma”的通话请求时,响应于该通话请求,手机可以显示如图13中的(c)图所示的通话提示界面。可选地,该通话提示界面可以包括用户“Miss Ma”的图像、备注名、挂断控件202-1和接听控件202-2等一种或多种内容,本申请实施例对此不作限定。
响应于该通话请求,PC的显示屏可以显示如图13中的(c)图所示的音频通知界面,该音频通知界面上显示有:自动弹出的提示窗口30和音乐应用的音频操作窗口10-2。
一种可能的显示方式中,当PC显示屏上有焦点态的应用窗口时,自动弹出的该提示窗口30和音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的周围。
可选地,该提示窗口30和音乐应用的音频操作窗口10-2可以显示在焦点态的浏览器应用的窗口20的任意边框处,便于用户操作。
可选地,该提示窗口30、音乐应用的音频操作窗口10-2可以和焦点态的浏览器应用的窗口20具有重叠区域,或者显示在浏览器应用的窗口20之外的区域,不具有重叠区域。
可选地,PC可以根据焦点态的浏览器应用的窗口20的显示位置和/或显示尺寸,自适应调节该提示窗口30和音乐应用的音频操作窗口10-2的显示位置和/或显示尺寸。
应理解,以上多种可能的窗口显示方式可以参照前述实施例的相关描述,为了简便,此处不再赘述。
示例性的,如图13中的(c)图所示,该提示窗口30和音乐应用的音频操作窗口10-2可以上下排列显示在该浏览器应用的窗口20的右边框位置,该提示窗口30和该音乐应用的音频操作窗口10-2的具有相同的横向显示宽度和纵向显示高度,本申请实施例对此不作限定。
应理解,图13中的(c)图所示的场景中,当PC接收到通话请求,响应于该通话请求,PC可以先检测焦点态的应用窗口,确定PC显示屏上是否显示有多屏协同的主窗口。当PC显示屏上没有显示多屏协同的主窗口时,自动弹出通话请求的提示窗口和非焦点态的应用对应的音频操作窗口,且将其聚合显示在焦点态的应用窗口周围,以便于用户操作。
当PC的显示屏上显示图13中的(c)图所示的音频通知界面时,用户可以根据自己的需求,通过该音乐应用的音频操作窗口10-2快捷地控制音频的播放。
示例性的,用户可以点击该音乐应用的音频操作窗口10-2中的播放控件,PC暂停播放歌曲2;点击该焦点态的浏览器应用的窗口20的播放控件20-2,PC暂停播放歌曲1。用户可以再点击该提示窗口30的接听控件,和“Miss Ma”进行通话,如此,通话音频不会被PC播放的歌曲等干扰。相关描述请参见前文,为了简便,此处不再赘述。
图14是本申请实施例提供的另一例多屏协同过程中PC上显示音频通知的示意图。
示例性的,图14中的(a)图和图13中的(b)图都是手机和PC多屏协同的场景,假设在PC接收到通话请求之前,用户执行了如图14中的(a)图所示的操作,点击该焦点态的浏览器应用的窗口20的控制区域的最小化控件,响应于用户的操作,PC显示图14中的(b)图所示的界面,该界面上仅显示该音乐应用的窗口10,且该音乐应用的窗口10为焦点态。多屏协同的主窗口40和浏览器应用的窗口20为处于后台运行状态。
当手机侧的即时通信应用接收到来自于用户“Miss Ma”的通话请求时,响应于该通话请求,手机可以显示如图14中的(c)图所示的通话提示界面。响应于该通话请求,PC的显示屏可以显示如图14中的(c)图所示的音频通知界面,自动弹出非焦点态的应用的音频操作窗口,例如提示窗口30和浏览器应用的音频操作窗口20-3。
一种可能的显示方式中,自动弹出非焦点态的应用的音频操作窗口可以具有预设的显示策略,例如自动弹出的该提示窗口30和浏览器应用的音频操作窗口20-3可以显示在预设位置,和/或具有预设的显示尺寸。
示例性的,如图14中的(c)图所示,该提示窗口30和浏览器应用的音频操作窗口20-3可以上下排列显示在PC显示屏的右下角显示区域,且该提示窗口30和浏览器应用的音频操作窗口20-3具有相同的横向显示宽度,不同的纵向显示高度,本申请实施例对此不作限定。
可选地,该提示窗口30和浏览器应用的音频操作窗口20-3还可以参照前述多个实施例以及附图中介绍的可能的多种显示方式进行显示,例如,该提示窗口30和浏览器应用的音频操作窗口20-3横向排列并显示在PC显示屏的底部导航区域的中间位置,或者该提示窗口30和浏览器应用的音频操作窗口20-3显示在焦点态的音乐应用的窗口10的周围等,请参照前述介绍,为了简便,此处不再一一列举。
还应理解,对比图13中的(c)图和图14中的(c)图,在手机和PC的多屏协同场景中,当PC显示屏上焦点态的应用窗口不同时,如果PC接收到通话请求,响应于接收到的该通话请求,PC自动弹出的窗口、窗口显示内容和窗口对应的应用也可以发生适应性变化。
当PC的显示屏上显示图14中的(c)图所示的音频通知界面时,用户可以根据自己的需求,通过该音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3快捷控制每一个音频的播放。
示例性的,用户可以点击该浏览器应用的音频操作窗口20-3的播放控件,PC暂停播放歌曲1;点击音乐应用窗口10中的播放控件101,PC暂停播放歌曲2。用户可以再点击该提示窗口30的接听控件,和“Miss Ma”进行通话。如此,通话音频不会被PC播放的歌曲等干扰。相关描述请参见前文,为了简便,此处不再赘述。
当用户结束通话时,PC还可以自动弹出一个或多个音频操作窗口,便于用户快捷地恢复应用和/或网页继续播放音频。
图15是本申请实施例提供的一例通话结束后PC上显示音频通知的示意图。
示例性的,假设PC接收到来自即时通信应用的通话请求时,显示如图14中的(c)图所示的音频通知界面,则用户可以点击在该音频通知界面上显示的该浏览器应用的音频操作窗口20-3的播放控件,PC暂停播放歌曲1;点击音乐应用窗口10中的播放控件101,PC暂停播放歌曲2。点击该提示窗口30的接听控件,和“Miss Ma”进行通话。当用户和“Miss Ma”的结束通话之后,PC可以进一步显示图15所示的音频通知界面。
可选地,在图15所示的音频通知界面上显示有:自动弹出的浏览器应用的音频操作窗口20-3,且该浏览器应用的音频操作窗口20-3可以显示在显示屏的右下角等预设位置处,本申请实施例对此不作限定。
示例性的,用户可以点击浏览器应用的音频操作窗口20-3的暂停控件,PC继续播放在线网页输出的歌曲1。
应理解,上述显示方式可以和PC接收到通话请求时的自动弹窗的显示策略保持一致,遵循预设位置和/或显示尺寸,该显示方式更符合用户的使用习惯,不会对用户造成较大的视觉变化的效果,从而给用户带来更好的视觉体验和操作体验。
在又一种可能的场景中,在手机和PC的多屏协同过程中,PC显示屏上可能显示多屏协同的主窗口,假设多屏协同的主窗口前台显示且为焦点态,针对PC播放的音频对应的不同来源,例如PC输出的多个音频可以包括来源于手机侧的应用程序的音频,还可以包括来源于PC侧的应用程序和/或网页的音频。当PC接收到通话请求时,响应于通话请求,PC显示屏可以自动弹出一个或多个音频操作窗口,且一个或多个音频操作窗口可以对应不同的显示方式。
图16是本申请实施例提供的又一例多屏协同过程中PC上显示音频通知的示意图。
示例性的,图16中的(a)图示出了手机和PC多屏协同的场景,手机显示解锁模式下的主界面,PC的显示屏上显示了:多屏协同的主窗口40、音乐应用的窗口10和焦点态的浏览器应用的窗口20。该多屏协同的主窗口40的显示内容可以和手机的主界面的显示内容保持一致,为了简便,此处不再赘述。
示例性的,用户执行如图16中的(a)图所示的操作1,点击焦点态的浏览器应用的窗口20的控制区域的最小化控件,再执行如图16中的(a)图所示的操作2,点击该音乐应用的窗口10的控制区域的最小化控件,响应于用户的操作,PC的显示屏可以进一步显示如图16中的(b)图所示的界面,该界面上仅显示了该多屏协同的主窗口40,且该多屏协同的主窗口40显示为焦点态,图中以黑色粗实线边框示出。
应理解,该场景下,PC显示屏上的音乐应用的窗口10、浏览器应用的窗口20都为后台运行状态,可以继续播放对应的音频。
还应理解,后台运行的音乐应用、浏览器应用、即时通信应用可以是手机侧的应用,也可以是PC上安装的本地应用。当音乐应用、浏览器应用、即时通信应用等具有不同的来源时,如果PC接收到通话请求时,响应于该通话请求,PC显示屏自动弹出的音频操作窗口可以对应不同的显示方式。
下面将针对不同的场景进行介绍:
场景1:音乐应用、浏览器应用、即时通信应用都是PC上安装的应用
一种可能的场景中,当音乐应用、浏览器应用、即时通信应用都是PC上安装的本地应用时,该过程可以参考前述图5至图12介绍的过程,将该多屏协同的主窗口40作为焦点态的应用窗口,根据焦点态的该多屏协同的主窗口40确定需要自动弹出的音频操作窗口的数量、每一个音频操作窗口的显示内容、显示位置、显示尺寸等。
示例性的,针对图16中的(b)图所示的场景,当PC接收到通话请求时,响应于该通话请求,PC显示屏可以显示图16中的(c)图所示的音频通知界面。示例性的,该音频通知界面上显示有:自动弹出的提示窗口30、浏览器应用的音频操作窗口20-3和该音乐应用的音频操作窗口10-2。其中,该提示窗口30、音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3显示在焦点态的该多屏协同的主窗口40的周围。例如,该提示窗口30、音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3可以以上下排列的方式显示在该多屏协同的主窗口40的左边框位置处,且上下排列的三个音频操作窗口中位于最上面的该提示窗口30的上边框和该多屏协同的主窗口40的上边框保持平齐,该提示窗口30、音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3具有相等的横向显示宽度和纵向显示高度,本申请实施例对此不作限定。
场景2:音乐应用、浏览器应用是PC上安装的应用,即时通信应用是手机侧应用
一种可能的场景中,当音乐应用、浏览器应用都是PC上安装的本地应用,即时通信应用是手机侧应用时,该过程也可以参考前述图5至图12介绍的过程,将该多屏协同的主窗口40作为焦点态的应用窗口,根据焦点态的该多屏协同的主窗口40确定需要自动弹出的音频操作窗口的数量、每一个音频操作窗口的显示内容、显示位置、显示尺寸等显示策略。
示例性的,针对图16中的(b)图所示的场景,当PC接收到通话请求时,响应于该通话请求,PC显示屏可以显示图16中的(c)图所示的音频通知界面,参照上述介绍,此处不再赘述。
另一种可能的显示方式中,由于即时通信应用是手机侧安装的应用,当手机侧的即时通信应用接收到的通话请求时,该多屏协同的主窗口40中的显示界面可以和手机的显示界面保持一致。换言之,该多屏协同的主窗口40可以替代前述实施例中的该提示窗口30,用于提醒用户当前有需要处理的通话请求。
示例性的,针对图16中的(b)图所示的场景,当PC接收到通话请求时,响应于该通话请求,PC显示屏可以显示图16中的(d)图所示的音频通知界面。可选地,该音频通知界面上显示有:PC自动弹出的该音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3,且该音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3可以以上下排列的方式显示在焦点态的多屏协同的主窗口40的左边框位置处,且上下排列的两个音频操作窗口中位于上面的浏览器应用的音频操作窗口20-3的上边框和该多屏协同的主窗口40的上边框保持平齐,该音乐应用的音频操作窗口10-2和浏览器应用的音频操作窗口20-3具有相等的横向显示宽度和纵向显示高度。
此外,响应于该通话请求,PC显示屏上的该多屏协同的主窗口40中显示通话提示界面,该通话提示界面和手机显示的通话提示界面包括的内容可以保持一致,例如可以显示用户“Miss Ma”的图像、备注名、挂断控件202-1和接听控件202-2等一种或多种内容,本申请实施例对此不作限定。
场景3:浏览器应用是PC上安装的应用,音乐应用、即时通信应用是手机侧应用
一种可能的场景中,当浏览器应用都是PC上安装的本地应用,音乐应用和即时通信应用是手机侧的应用时,当PC接收到通话请求时,PC上弹出的手机侧的应用对应的音频操作窗口可以显示在该多屏协同的主窗口40中,PC上安装的浏览器应用等对应的音频操作窗口可以显示在焦点态的该多屏协同的主窗口40的周围。
示例性的,针对图16中的(b)图所示的场景,当PC接收到通话请求时,响应于接收到的该通话请求,PC显示屏可以显示图16中的(e)图所示的音频通知界面。可选地,PC自动弹出该浏览器应用的音频操作窗口20-3,该浏览器应用的音频操作窗口20-3可以显示在焦点态的该多屏协同的主窗口40的下边框位置处,且和该多屏协同的主窗口40具有相等的横向显示宽度。
此外,响应于该通话请求,PC显示屏的该多屏协同的主窗口40中显示该音乐应用的音频操作窗口10-2和该提示窗口30,且该提示窗口30和音乐应用的音频操作窗口10-2具有相等的横向显示宽度,本申请实施例对此不作限定。
上述显示方式,在手机和PC多屏协同过程中,PC输出的多个音频对应的应用可以包括手机侧的应用,也可以包括PC的本地应用。当PC显示屏上显示了焦点态的多屏协同的主窗口40时,如果接收到通话请求,PC可以在该多屏协同的窗口40中显示手机侧的应用对应的音频操作窗口,在该多屏协同的窗口40之外的显示区域显示PC的本地应用对应的音频操作窗口。该音频通知的显示方式可以提醒用户当前有需要处理的通话请求,且避免了在PC的显示屏上重复显示的问题,可以减少屏幕上显示的音频操作窗口数量,节省屏幕显示区域,为用户呈现更精简的显示效果,提高了用户的视觉体验。
场景4:浏览器应用、音乐应用、即时通信应用都是手机侧应用
一种可能的场景中,当浏览器应用、音乐应用、即时通信应用都是手机侧应用,PC接收到通话请求时,PC上弹出的手机侧的应用对应的所有的音频操作窗口可以显示在该多屏协同的主窗口40中。
示例性的,针对图16中的(b)图所示的场景,当浏览器应用、音乐应用、即时通信应用都是手机侧应用,PC接收到通话请求时,响应于该通话请求,PC显示屏可以显示图16中的(f)图所示的音频通知界面。可选地,可以在该多屏协同的主窗口40中显示自动弹出的音乐应用的音频操作窗口10-3、语音通话提示窗口30-4和该浏览器应用的音频操作窗口20-3。
可选地,该音乐应用的音频操作窗口10-3、该语音通话提示窗口30-4和该浏览器应用的音频操作窗口20-3可以以上下排列组合的方式显示在多屏协同的主窗口40中,且该音乐应用的音频操作窗口10-3、该语音通话提示窗口30-4和该浏览器应用的音频操作窗口20-3可以具有相等的横向显示宽度。
可选地,该音乐应用的音频操作窗口10-3、该语音通话提示窗口30-4和该浏览器应用的音频操作窗口20-3可以具有和在PC显示屏上不同的显示样式和/或不同的显示内容。
应理解,该多屏协同的主窗口40一般可能显示为竖长的矩形框样式,和手机的屏幕尺寸的长宽比保持统一。例如该多屏协同的主窗口40的横向显示宽度一般小于纵向显示高度,因此,当某个应用的音频操作窗口显示在该多屏协同的主窗口40中时,可以适配该多屏协同的主窗口40的竖长的矩形框样式,调整显示样式和/或显示内容,以更加符合用户的视觉要求,提高用户的视觉体验。
示例性的,如图16中的(f)图所示,该音乐应用的音频操作窗口10-3可以不同于前述实施例(例如图16中的(e)图所示的该音乐应用的音频操作窗口10-2)的显示样式和/或显示内容,可选地,该音乐应用的音频操作窗口10-3可以显示当前正在播放的歌曲2的名称、歌手名、歌手写真、播放进度条等更多或更少的内容。
可选地,该语音通话提示窗口30-4可以和前述介绍的提示窗口30包括相同数量和/或类型的控件,接听控件和挂断控件等控件可以具有不同的显示位置和/或显示尺寸,以更好的适配该多屏协同的主窗口40的竖长的矩形框样式。
可选地,该浏览器应用的音频操作窗口20-3可以和前述实施例(例如图16中的(e)图所示的该浏览器应用的音频操作窗口20-3)中列举的显示样式和/或显示内容保持一致,为了简便,此处不再赘述。
还应理解,以上场景4中,多屏协同的主窗口40为焦点态显示时,PC自动弹出的每一个应用对应的音频操作窗口可以都显示在该多屏协同的主窗口40中。
可选地,当浏览器应用、音乐应用、即时通信应用不都是手机侧应用,或者都是PC的本地应用时,即对于前述列举的场景1-场景3等可能的场景,也可以按照场景4介绍的显示方式,将一个或多个音频操作窗口都显示在该多屏协同的主窗口40中,以合理地利用PC显示屏的显示区域,避免影响用户使用显示屏上的其他显示区域,节省屏幕显示区域,避免了在PC的显示屏上会重复显示的问题,为用户呈现更精简的显示效果。
针对以上列举的任意一种可能的场景,当PC的显示屏上显示图16中的(c)图、(d)图、(e)图和(f)图所示的音频通知界面时,用户可以根据自己的需求,通过音频操作窗口快捷控制每一个音频的播放。
示例性的,以图16中的(f)图为例,用户可以点击该音乐应用的音频操作窗口10-3中的播放控件,PC暂停播放歌曲2;点击该浏览器应用的音频操作窗口20-3的播放控件,PC暂停播放歌曲。用户可以再点击该语音通话提示窗口30-4的接听控件,和“Miss Ma”进行通话,如此,通话音频不会被PC播放的歌曲等干扰。相关描述请参见前文,为了简便,此处不再赘述。
当用户结束通话时,PC还可以自动弹出一个或多个音频操作窗口,便于用户快捷地恢复应用和/或网页继续播放音频。
图17是本申请实施例提供的又一例通话结束后PC上显示音频通知的示意图。
示例性的,用户点击该音乐应用的音频操作窗口10-3中的播放控件,PC暂停播放歌曲2;点击该浏览器应用的音频操作窗口20-3的播放控件,PC暂停播放歌曲。用户再点击该语音通话提示窗口30-4的接听控件,和“Miss Ma”进行通话。当用户和“Miss Ma”的结束通话之后,PC可以进一步显示图17所示的音频通知界面。
可选地,在图17所示的音频通知界面上显示有:音乐应用的音频操作窗口10-3、该浏览器应用的音频操作窗口20-3,且该音乐应用的音频操作窗口10-3和该浏览器应用的音频操作窗口20-3可以以上下排列的方式显示在该多屏协同的主窗口40中。
示例性的,用户可以点击该音乐应用的音频操作窗口10-3的暂停控件,PC继续播放音乐应用的歌曲2;点击该浏览器应用的音频操作窗口20-3的暂停控件,PC继续播放浏览器应用在线网页输出的歌曲1。
综上所述,通过上述图13至图17介绍的实施例和音频通知的显示方法,在PC和手机多屏协同的过程中,PC可以同时播放来源于多个应用和/或网页的音频,多个应用可以包括PC的本地应用,还可以包括手机侧的应用。具体地,当PC上显示了焦点态的多屏协同窗口时,可以将手机侧的应用的音频操作窗口显示在多屏协同窗口中,将PC的本地应用的音频操作窗口显示在多屏协同窗口的周围;当多屏协同窗口为非焦点态或后台运行状态时,可以将手机侧的应用的音频操作窗口和PC的本地应用的音频操作窗口都显示在焦点态的应用窗口的周围,便于用户通过音频操作窗口快捷地控制每一个音频的播放,保证通话过程不会被其他输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
此外,该音频通知的显示方式避免了在PC的显示屏上重复显示的问题,可以减少屏幕上显示的音频操作窗口数量,节省屏幕显示区域,为用户呈现更精简的显示效果,提高了用户的视觉体验。
其次,在用户结束通话之后,PC显示屏上可以自动弹出并聚合显示除了通话请求的提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
再者,上述多屏协同过程中,PC上弹出的音频操作窗口可以避免用户切换其他电子设备(例如手机)处理通话请求,无需用户主动切换当前使用的PC到手机端,能够实现操作任务的连续性,一定程度上也提高了用户的使用体验。
针对图5至图17介绍的应用场景,从用户交互层面介绍了PC上音频通知的可能显示过程和实现方式,下面将从底层实现策略层面,介绍本申请实施例提供的音频通知的显示方法对应的底层实现过程。
图18是本申请实施例提供的一例音频通知的显示方法的示意性流程图。
应理解,本申请实施例提供的音频通知的显示过程,可以发生在如前述图5至图12介绍的用户独立使用PC的过程中,也可以发生在图13至图17介绍的PC和手机的多屏协同过程中,本申请实施例对该音频通知的显示方法所适用的场景不作限定。
具体地,将前述实施例中介绍的PC作为第一电子设备,手机作为第二电子设备,其中,第一电子设备和第二电子设备可以具有图3所示的硬件结构和图4所示的软件结构。下面结合图18的多个步骤,介绍音频通知的显示方法对应的底层实现过程。
如图18所示,该方法1800可以包括以下步骤:
1801,第一电子设备接收通话请求,所述通话请求包括语音通话请求或视频通话请求。
可选地,所述通话请求可以来源于应用、/>应用、畅联通话应用、电话应用、短信息应用、游戏等具有语音通话、视频通话功能的任意一个应用。应理解,该类应用接收到其他设备或好友发送的通话请求时,会及时地弹出通话提示窗口以提醒用户需要处理通话请求,本申请实施例对此不作赘述。
可选地,所述通话请求对应的应用可以是安装并实际运行在第一电子设备(例如PC)的本地应用;或者,在第一电子设备(例如PC)和第二电子设备(例如手机)的多屏协同连接场景中,所述通话请求对应的应用还可以是安装并实际运行在第二电子设备(例如手机)的应用,本申请实施例对此不作限定。
1802,响应于所述通话请求,确定在所述第一电子设备上输出音频的一个或多个应用。
可选地,本申请实施例所说的“一个或多个应用”可以是第一电子设备(例如PC)上能够输出音频的应用。示例性的,第一电子设备上运行了音乐应用,音乐应用能够输出歌曲等音频,但是当前可以没有正在输出音频。
或者,该“一个或多个应用”可以是第一电子设备(例如PC)上正在播放音频的一个或多个应用。示例性的,第一电子设备上运行了音乐应用A和音乐应用B,该音乐应用A和音乐应用B都能够输出歌曲等音频,但是当前音乐应用A正在输出音频,音乐应用B没有输出音频。应理解,以上不同的场景都可以包括在本申请实施例的范围内,都可以适用本申请实施例提供的显示音频通知的方法,后续不再赘述。
示例性的,在本申请实施例中,假设当前第一电子设备(例如PC)运行了所述通话请求对应的应用、第一应用、第二应用等,其中,第一应用、第二应用是在所述第一电子设备上输出音频的所述一个或多个应用中的应用。
一种可能的实现方式中,用户在使用第一电子设备(例如PC)的过程中,第一电子设备(例如PC)的音频任务监控模块可以监控到每一个应用的运行情况、应用正在执行的进程信息或任务信息等,并进行记录。相应地,第一电子设备(例如PC)可以根据音频任务监控模块记录的进程信息或任务信息,获取运行的一个或多个应用中每一个应用的显示状态,例如在第一电子设备的显示屏上显示了哪些应用的窗口,以及哪一个应用的窗口显示为焦点态。
针对显示屏上是否包括焦点态显示的应用窗口,分为以下两种场景:
场景1:显示屏上显示有焦点态的第三应用的窗口
当确定第三应用的窗口显示为焦点态时,第一电子设备(例如PC)可以通过同步模块汇总当前所有的音频任务,并将所有的音频任务以音频操作窗口的形式显示到显示屏。执行以下步骤1803:
1803,聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口。其中,所述第一音频操作窗口包括用于控制第一应用的音频播放的第一控件,所述第二音频操作窗口包括用于控制第二应用的音频播放的第二控件,所述通话提示窗口包括用于控制通话的第三控件。
一种可能的显示方式中,当显示屏上包括焦点态的第三应用的窗口时,第一电子设备(例如PC)可以根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
可选地,第一电子设备(例如PC)可以在所述第三应用的窗口的任意边框处,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
示例性的,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口可以聚合显示在焦点态的第三应用的窗口边框之外的区域,即所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口与焦点态的第三应用的窗口可以不重叠。该显示方式可以避免遮挡焦点态的第三应用的窗口,方便用户操作且便于用户查看第一电子设备显示屏上更多的界面内容。
可选地,第一电子设备(例如PC)还可以在所述第三应用的窗口的内部,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
示例性的,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口可以聚合显示在焦点态的第三应用的窗口的内部,换言之,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口与焦点态的第三应用的窗口可以具有重叠区域,例如部分重叠区域,或者全部重叠区域,本申请实施例对此不作限定。该显示方式可以为用户提供更加醒目的显示效果,使得提示更加明显。
应理解,上述方式可以具体结合第一电子设备(例如PC)显示屏上剩余显示区域的位置和大小进行判断,本申请实施例对此不作限定。
一种可能的场景中,当所述显示屏上处于焦点态的第三应用的窗口中显示有多个网页时,第一电子设备(例如PC)音频任务监控模块还可以监控到该第三应用的每一个网页是否能够输出音频,或者正在输出音频;以及监测输出音频的网页的显示状态,例如是否是焦点态显示,或者非焦点态显示。
可选地,所述第一电子设备接收所述通话请求之后,还可以检测所述第三应用的窗口中输出音频的第一网页,所述第一网页在所述第三应用的窗口中显示为非焦点态,并根据所述第三应用的窗口的显示位置,显示第六音频操作窗口,所述第六音频操作窗口包括用于控制所述第一网页的音频播放的第六控件。
可选地,所述第三应用可以是浏览器应用。
示例性的,当所述第三应用是浏览器应用时,所述第三应用的窗口中可以显示两个或两个以上能够输出音频的网页。第一电子设备的焦点监控模块可以监测显示屏上焦点态的应用窗口,以及窗口中网页界面的切换过程,例如确定所述第三应用的窗口中的第一网页在第一电子设备上输出音频的,且第一网页为非焦点态,相应地,第一电子设备还可以聚合显示该第一网页对应的音频操作窗口,用于控制第一网页的音频播放。其中,该第一网页对应的音频操作窗口的显示可以参照前述所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口的显示规则,此处不再赘述。
另一种可能的场景中,用户在使用第一电子设备(例如PC)的过程中,焦点态的应用窗口可以不断地发生变化。当焦点态的应用窗口发生变化时,响应于该通话请求,第一电子设备(例如PC)自动弹出的窗口数量、窗口对应的应用和窗口显示内容也可以发生适应性变化。
通过上述方案,当第一电子设备(例如PC)接收到通话请求之后,可以检测显示屏上处于焦点态的应用窗口、处于非焦点态的应用窗口,并在焦点态的应用窗口的周围聚合显示音频操作窗口和通话请求的提示窗口。换言之,当第一电子设备(例如PC)显示屏上焦点态的应用窗口和/或非焦点态的应用窗口不同时,自动弹出的音频操作窗口的数量、种类、显示位置、显示尺寸也会不同。
场景2:显示屏上无焦点态的应用窗口
当确定第一电子设备的显示屏上没有处于焦点态的应用窗口时,第一电子设备(例如PC)也可以通过同步模块汇总当前所有的音频任务,并将所有的音频任务以音频操作窗口的形式显示到显示屏。执行以下步骤1804:
1804,在所述显示屏的预设位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
一种可能的显示方式中,第一电子设备(例如PC)上自动弹出的所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口具有预设位置。
需要说明的是,对于场景1,当第一电子设备(例如PC)显示有焦点态的第三应用的窗口时,所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口也可以按照步骤1804的显示方式,在显示屏的预设位置聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,该方式也落入本申请实施例的保护范围。
可选地,该预设位置可以是第一电子设备(例如PC)显示屏的显示区域的上边界且位于显示屏的宽度方向的中心位置。或者,该预设位置可以是第一电子设备(例如PC)显示屏的显示区域的下边界且位于显示屏的宽度方向的中心位置。又或者,该预设位置可以是第一电子设备(例如PC)显示屏的左上角的固定位置。又或者,该预设位置可以是第一电子设备(例如PC)显示屏的右下角的固定位置等,本申请实施例对此不作限定。
另一种可能的显示方式中,自动弹出的所述通话提示窗口、用于控制第一应用的音频播放所述第一音频操作窗口、用于控制第二应用的音频播放的所述第二音频操作窗口可以以“一个窗口”的形式,显示在第一电子设备(例如PC)显示屏上。
可选地,该“一个窗口”中可以同时包括第一控件、第二控件和第三控件;或者,该一个操作窗口中可以包括2个控件,其中控件1可以同时控制第一应用的音频播放和第二应用的音频播放,控件2可以用于控制接听通话;又或者,该一个操作窗口中可以包括1个控件,该控件可以同时控制第一应用的音频播放和第二应用的音频播放、以及控制接听通话,本申请实施例对此不作限定。
或者,第一电子设备(例如PC)显示屏上可以自动弹出2个窗口,窗口1用于控制第一应用的音频播放和第二应用的音频播放等。应理解,以上多种可能的音频通知的显示方式都落入本申请实施例保护的范围,此处不再一一举例。
通过上述步骤可知,在第一电子设备(例如PC)接收到通话请求时,可以将第一电子设备(例如PC)当前涉及音频输出的所有应用和/或网页都以对应的音频操作窗口的形式显示,每一个音频操作窗口中可以包括一个或多个操作控件。用户可以通过每一个音频操作窗口中的控件快捷地控制音频的播放。因此,该方法1800还可以包括以下步骤1805:
1805,接收用户对所述第一控件的操作,响应于对所述第一控件的所述操作,暂停播放所述第一应用的音频;接收用户对所述第二控件的操作,响应于对所述第二控件的所述操作,暂停播放所述第二应用的音频;接收用户对所述第三控件的操作,响应于对所述第三控件的所述操作,接听通话。
具体地,用户可以通过每一个音频操作窗口中的控件快捷地控制每一个应用音频的播放,例如点击播放控件以暂停对应音频的播放。从而避免用户需要执行繁琐的操作,才可以暂停播放音频,使得用户可以尽快接听通话,并可以保证用户的通话过程不被PC输出的其他音频干扰。
当用户结束通话时,第一电子设备(例如PC)显示屏上还可以自动弹出一个或多个音频操作窗口,便于用户重新控制一个或多个应用和/或网页继续播放音频。相应地,该方法1800还可以包括以下步骤1806:
1806,响应于结束所述通话的操作,显示第四音频操作窗口和第五音频操作窗口,所述第四音频操作窗口包括第四控件,所述第四控件用于控制所述第一应用的音频播放,所述第五音频窗口包括第五控件,所述第五控件用于控制所述第二应用的音频播放。
1807,接收用户对所述第四控件的操作,响应于对所述第四控件的所述操作,恢复播放所述第一应用的音频;接收用户对所述第五控件的操作,响应于对所述第五控件的所述操作,恢复播放所述第二应用的音频。
应理解,所述第四音频操作窗口和前述的所述第一音频操作窗口都用于控制第一应用的音频播放,可以显示不同或相同的控件,例如所述第一音频操作窗口显示播放控件,所述第四音频操作窗口显示暂停控件,可以都称为“第一应用的音频操作窗口”,本申请实施例对此不作限定。
还应理解,当用户结束通话之后,第一电子设备(例如PC)的信息同步模块可以停止通话的音频数据的同步,通话数据停止播放。再通过音频任务监控模块和同步模块汇总音频信息,在显示屏上自动显示目标应用集合包括的每一个应用的音频操作窗口。再检测用户的操作,根据用户的操作,音频播放控制模块解除其他应用的静音状态,恢复原来的音频播放。
上述实现过程,当用户结束通话之后,第一电子设备(例如PC)可以显示除了所述通话提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复第一电子设备(例如PC)至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
可选地,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和第一电子设备(例如PC)接收到通话请求时显示的音频操作窗口保持一致,或者,“其他音频操作窗口”对应的应用、窗口的数量、显示位置、显示尺寸等可以和PC接收到通话请求时显示的音频操作窗口有所不同,本申请实施例对此不作限定。
示例性的,在用户接通电话的过程中,第一电子设备(例如PC)运行的应用可能不变。例如用户接通电话的过程中,没有关闭或更改第一电子设备(例如PC)的应用运行情况,结束通话时,所述第一电子设备(例如PC)继续运行有第一应用、第二应用和第三应用,相应地,响应于结束所述通话的操作,所述第一电子设备(例如PC)聚合显示用于控制所述第一应用的音频操作窗口(即第四音频操作窗口)、用于控制所述第二应用音频操作窗口(即第五音频操作窗口)。
或者,在用户接通电话的过程中,第一电子设备(例如PC)运行的应用也可能发生变化。例如,用户接通电话的过程中,关闭了第一应用,又运行了第四应用且第四应用也是能够在第一电子设备(例如PC)输出音频的应用。相应地,响应于结束所述通话的操作,所述第一电子设备(例如PC)可以聚合显示用于控制所述第二应用音频操作窗口(即第五音频操作窗口)、用于控制所述第四应用音频操作窗口,以上不同的音频通知的显示方法都落入本申请保护的范围。
应理解,在第一电子设备(例如PC)显示音频通知的过程中,除了可以根据以上介绍的方法确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示位置之外,还可以根据多种可能的方式确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸。例如可以根据焦点态的第三应用的窗口确定所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸,或者根据预设尺寸显示预设大小的所述通话提示窗口、第一音频操作窗口和第二音频操作窗口的显示尺寸,本申请实施例对此不作限定。
需要说明的是,第一电子设备(例如PC)可以不区分输出音频的一个或多个应用的应用来源,直接安装上述步骤1801-步骤1807,仅根据显示屏上显示的焦点态的应用窗口和/或应用窗口中显示的网页,确定音频通知的显示方式。
另一种可能的实现方式中,接收到通话请求之后,第一电子设备(例如PC)可以判断输出音频的一个或多个应用是否都来自于第一电子设备(例如PC)的本地应用,或者包括来源于第二电子设备的应用,所述第二电子设备与所述第一电子设备相连接。例如,多屏协同场景下的第二电子设备(例如手机和PC建立多屏协同连接)的场景。
在该场景中,第一电子设备(例如PC)还可以执行以下步骤:
步骤1,确定所有能够输出音频的应用的来源,例如判断所述一个或多个应用中是否包括第二电子设备(例如手机)前台运行或后台运行的应用。
步骤2,判断所述第一电子设备(例如PC)显示屏上是否包括焦点态显示的应用的窗口?
步骤3,当所述第一电子设备(例如PC)显示屏上不包括焦点态显示的任意应用的窗口时,根据预设位置和/或显示尺寸,在所述显示屏上自动显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
步骤4,当所述第一电子设备(例如PC)显示屏上包括多屏协同主窗口且所述多屏协同主窗口处于焦点态显示时,接收到所述通话请求之后,可以根据以下不同的方式聚合显示多个窗口:
(1)在所述多屏协同主窗口中聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
示例性的,当所述多屏协同主窗口为PC上的焦点态窗口,可以将所述通话提示窗口和每一个应用的音频操作窗口都聚合显示在多屏协同主窗口中。
(2)根据所述多屏协同主窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
示例性的,按照前述步骤1801-步骤1804的实现过程,仅仅将多屏协同主窗口作为一个焦点态窗口,将所述通话提示窗口和每一个应用的音频操作窗口都聚合在多屏协同主窗口的周围,例如任意边框位置等,请参照前述介绍,此处不再赘述。
(3)检测所述一个或多个应用中是否包括来源于所述第二电子设备的应用,当所述一个或多个应用中包括来源于所述第二电子设备的第五应用时,在所述多屏协同主窗口中显示所述第五应用的音频操作窗口,且根据所述多屏协同主窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
(4)当所述通话请求来源于所述第二电子设备时,在所述多屏协同主窗口中显示所述通话请求对应的通话提示界面,且根据所述多屏协同主窗口的显示位置,聚合显示所述第一音频操作窗口和所述第二音频操作窗口。
应理解,本申请实施例提供的音频通知的显示方法,可以包括以上介绍的全部步骤,或者仅包括以上的部分步骤,换言之,上述过程的部分步骤可以是可选的步骤,本申请实施例对此不作限定。
综上所述,在用户使用PC等电子设备的过程中,PC可以同时播放来源于多个应用和/或网页的音频,多个应用可以包括PC的本地应用,也可以包括和PC建立多屏协同连接的手机侧的应用。具体地,当接收到通话请求时,PC可以根据焦点态显示的应用窗口和/或网页,例如在显示屏上显示非焦点态的应用和/或网页对应的音频操作窗口,由此用户可以通过音频操作窗口快捷地控制每一个音频的播放,例如用户通过音频操作窗口暂停音频的播放,再接听通话,保证通话过程不会被其他输出的音频干扰,避免用户需要执行繁琐的操作暂停音频的播放,简化了操作流程,提高了用户的操作体验。
其次,在用户结束通话之后,PC显示屏上可以自动弹出除了通话请求的提示窗口之外的其他音频操作窗口,用户可以通过其他的音频操作窗口快捷地恢复音频的播放,例如用户可以点击暂停控件恢复应用和/或网页播放音频,能够快速恢复PC至接收通话请求之前的音频播放状态,实现了音频播放的快速切换,操作便捷,提高了用户的操作体验。
再者,在PC和手机的多屏协同过程中,PC上弹出的音频操作窗口可以避免用户切换手机处理通话请求,无需用户主动切换当前使用的PC到手机端,能够实现操作任务的连续性,一定程度上也提高了用户的使用体验。
需要说明的是,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
应理解,本申请实施例中的方式、情况、类别以及实施例的划分仅是为了描述的方便,不应构成特别的限定,各种方式、类别、情况以及实施例中的特征在不矛盾的情况下可以相结合。
还应理解,本申请实施例中的术语“第一”、“第二”以及“第三”仅为了区分,不应对本申请构成任何限定。例如,本申请实施例中的“第一应用”、“第二应用”等,表示不同的应用;“第一音频操作窗口”、“第二音频操作窗口”、“第三音频操作窗口”等表示不同应用和/或网页对应的音频操作窗口,每一个音频操作窗口可以包括不同数量、不同类型的控件。
还应理解,在本申请的各种实施例中,各过程的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
还需要说明的是,本申请实施例中,“预设位置”、“预设尺寸”等可以通过在电子设备中预先保存相应的代码、表格或其他可用于指示相关信息的方式来实现,本申请对于其具体的实现方式不做限定。例如,本申请实施例中“预设位置”可以表示PC显示屏上的某个固定位置等,如PC显示屏的右下角紧靠显示屏的显示区域的边界处。
可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分,例如,可以对应各个功能划分各个功能模块,也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是,本实施例中对模块的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
在采用对应各个功能划分各个功能模块的情况下,上述实施例中涉及的电子设备的一种可能的组成示意图,该电子设备可以包括:显示单元、检测单元和处理单元。其中,显示单元、检测单元和处理单元相互配合,可以用于支持电子设备执行上述步骤等,和/或用于本文所描述的技术的其他过程。
需要说明的是,上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述,在此不再赘述。
本实施例提供的电子设备,用于执行上述音频通知的显示方法,因此可以达到与上述实现方法相同的效果。
在采用集成的单元的情况下,电子设备可以包括处理模块、存储模块和通信模块。其中,处理模块可以用于对电子设备的动作进行控制管理,例如,可以用于支持电子设备执行上述显示单元、检测单元和处理单元执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。通信模块,可以用于支持电子设备与其他设备的通信。
其中,处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,数字信号处理(digital signal processing,DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
在一个实施例中,当处理模块为处理器,存储模块为存储器时,本实施例所涉及的电子设备(例如第一电子设备、第二电子设备)可以为具有图3所示结构的设备。
本实施例还提供一种计算机可读存储介质,该计算机可读存储介质中存储有计算机指令,当该计算机指令在电子设备上运行时,使得电子设备执行上述相关方法步骤实现上述实施例中的音频通知的显示方法。
本实施例还提供了一种计算机程序产品,当该计算机程序产品在计算机上运行时,使得计算机执行上述相关步骤,以实现上述实施例中的音频通知的显示方法。
另外,本申请的实施例还提供一种装置,这个装置具体可以是芯片,组件或模块,该装置可包括相连的处理器和存储器;其中,存储器用于存储计算机执行指令,当装置运行时,处理器可执行存储器存储的计算机执行指令,以使芯片执行上述各方法实施例中的音频通知的显示方法。
其中,本实施例提供的电子设备、计算机可读存储介质、计算机程序产品或芯片均用于执行上文所提供的对应的方法,因此,其所能达到的有益效果可参考上文所提供的对应的方法中的有益效果,此处不再赘述。
通过以上实施方式的描述,所属领域的技术人员可以了解到,为描述的方便和简洁,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个装置,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是一个物理单元或多个物理单元,即可以位于一个地方,或者也可以分布到多个不同地方。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个可读取存储介质中。基于这样的理解,本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该软件产品存储在一个存储介质中,包括若干指令用以使得一个设备(可以是单片机,芯片等)或处理器(processor)执行本申请各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上内容,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以权利要求的保护范围为准。

Claims (12)

1.一种音频通知的显示方法,其特征在于,应用于包括显示屏的第一电子设备,所述方法包括:
接收通话请求,所述通话请求包括语音通话请求或视频通话请求;
响应于所述通话请求,确定在所述第一电子设备上输出音频的一个或多个应用;
聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口,所述第一音频操作窗口包括用于控制第一应用的音频播放的第一控件,所述第二音频操作窗口包括用于控制第二应用的音频播放的第二控件,所述通话提示窗口包括用于控制通话的第三控件,其中,所述第一应用、所述第二应用是在所述第一电子设备上输出音频的所述一个或多个应用中的应用。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
接收用户对所述第一控件的操作,响应于对所述第一控件的所述操作,暂停播放所述第一应用的音频;
接收用户对所述第二控件的操作,响应于对所述第二控件的所述操作,暂停播放所述第二应用的音频;
接收用户对所述第三控件的操作,响应于对所述第三控件的所述操作,接听通话。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
响应于结束所述通话的操作,显示第四音频操作窗口和第五音频操作窗口,所述第四音频操作窗口包括第四控件,所述第四控件用于控制所述第一应用的音频播放,所述第五音频窗口包括第五控件,所述第五控件用于控制所述第二应用的音频播放。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
接收用户对所述第四控件的操作,响应于对所述第四控件的所述操作,恢复播放所述第一应用的音频;
接收用户对所述第五控件的操作,响应于对所述第五控件的所述操作,恢复播放所述第二应用的音频。
5.根据权利要求1至4中任一项所述的方法,其特征在于,所述聚合显示通话提示窗口、第一音频操作窗口和第二音频操作窗口,包括:
根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,所述第三应用的窗口在所述显示屏上显示为焦点态。
6.根据权利要求5所述的方法,其特征在于,所述根据第三应用的窗口的显示位置,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口,包括:
在所述第三应用的窗口的任意边框处,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口;或者,
在所述第三应用的窗口的内部,聚合显示所述通话提示窗口、所述第一音频操作窗口和所述第二音频操作窗口。
7.根据权利要求1至6中任一项所述的方法,其特征在于,当所述显示屏上处于焦点态的第三应用的窗口中显示有多个网页时,所述第一电子设备接收所述通话请求之后,所述方法还包括:
检测所述第三应用的窗口中输出音频的第一网页,所述第一网页在所述第三应用的窗口中显示为非焦点态;
根据所述第三应用的窗口的显示位置,显示第六音频操作窗口,所述第六音频操作窗口包括用于控制所述第一网页的音频播放的第六控件。
8.根据权利要求7所述的方法,其特征在于,所述第三应用是浏览器应用。
9.根据权利要求1至8中任一项所述的方法,其特征在于,所述第一应用和/或所述第二应用和/或第三应用在第二电子设备上运行,所述第二电子设备与所述第一电子设备相连接。
10.一种电子设备,其特征在于,包括:
显示屏;
一个或多个处理器;
一个或多个存储器;
安装有多个应用程序的模块;
所述存储器存储有一个或多个程序,当所述一个或者多个程序被所述处理器执行时,使得所述电子设备执行如权利要求1至9中任一项所述的方法。
11.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至9中任一项所述的方法。
12.一种计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1至9中任一项所述的方法。
CN202210084100.1A 2022-01-22 2022-01-22 一种音频通知的显示方法及电子设备 Pending CN116527811A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210084100.1A CN116527811A (zh) 2022-01-22 2022-01-22 一种音频通知的显示方法及电子设备
PCT/CN2022/139121 WO2023138267A1 (zh) 2022-01-22 2022-12-14 一种音频通知的显示方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210084100.1A CN116527811A (zh) 2022-01-22 2022-01-22 一种音频通知的显示方法及电子设备

Publications (1)

Publication Number Publication Date
CN116527811A true CN116527811A (zh) 2023-08-01

Family

ID=87347778

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210084100.1A Pending CN116527811A (zh) 2022-01-22 2022-01-22 一种音频通知的显示方法及电子设备

Country Status (2)

Country Link
CN (1) CN116527811A (zh)
WO (1) WO2023138267A1 (zh)

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1995936B1 (de) * 2007-05-22 2017-01-04 Swisscom AG System und Verfahren zum Anfordern und Wiedergeben von Audioinhalten
CN102594975B (zh) * 2011-01-08 2015-08-12 深圳富泰宏精密工业有限公司 通话控制系统及方法
US10387104B2 (en) * 2015-06-07 2019-08-20 Apple Inc. Audio control for web browser
CN109151172A (zh) * 2018-07-23 2019-01-04 Oppo广东移动通信有限公司 音频输出控制方法及相关设备
CN110602312B (zh) * 2019-08-21 2021-05-11 华为技术有限公司 通话方法、电子设备及计算机可读存储介质

Also Published As

Publication number Publication date
WO2023138267A1 (zh) 2023-07-27

Similar Documents

Publication Publication Date Title
WO2021018067A1 (zh) 一种悬浮窗口的管理方法及相关装置
WO2021027747A1 (zh) 一种界面显示方法及设备
WO2021129326A1 (zh) 一种屏幕显示方法及电子设备
EP3974970A1 (en) Full-screen display method for mobile terminal, and apparatus
WO2021103981A1 (zh) 分屏显示的处理方法、装置及电子设备
WO2021017889A1 (zh) 一种应用于电子设备的视频通话的显示方法及相关装置
WO2020052529A1 (zh) 全屏显示视频中快速调出小窗口的方法、图形用户接口及终端
WO2020134869A1 (zh) 电子设备的操作方法和电子设备
EP4131911A1 (en) Application interface interaction method, electronic device, and computer readable storage medium
WO2021036770A1 (zh) 一种分屏处理方法及终端设备
CN114397979A (zh) 一种应用显示方法及电子设备
WO2021036585A1 (zh) 一种柔性屏显示方法和电子设备
WO2020093988A1 (zh) 一种图像处理方法及电子设备
CN110543289A (zh) 控制音量的方法和电子设备
CN114040242B (zh) 投屏方法、电子设备和存储介质
CN113961157B (zh) 显示交互系统、显示方法及设备
WO2021078032A1 (zh) 用户界面的显示方法及电子设备
US20230117194A1 (en) Communication Service Status Control Method, Terminal Device, and Readable Storage Medium
EP3958106A1 (en) Interface display method and electronic device
EP4283454A1 (en) Card widget display method, graphical user interface, and related apparatus
WO2021052407A1 (zh) 一种电子设备操控方法及电子设备
EP4036700A1 (en) Display element display method and electronic device
CN110989961A (zh) 一种声音处理方法及其装置
WO2024045801A1 (zh) 用于截屏的方法、电子设备、介质以及程序产品
WO2023241209A1 (zh) 桌面壁纸配置方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination