CN113225838A - 一种麦克风的控制方法、音频接收设备及音频采集设备 - Google Patents

一种麦克风的控制方法、音频接收设备及音频采集设备 Download PDF

Info

Publication number
CN113225838A
CN113225838A CN202010072494.XA CN202010072494A CN113225838A CN 113225838 A CN113225838 A CN 113225838A CN 202010072494 A CN202010072494 A CN 202010072494A CN 113225838 A CN113225838 A CN 113225838A
Authority
CN
China
Prior art keywords
audio
equipment
receiving
microphone
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010072494.XA
Other languages
English (en)
Inventor
耿炳钰
王龙龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Mobile Communications Technology Co Ltd
Original Assignee
Hisense Mobile Communications Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Mobile Communications Technology Co Ltd filed Critical Hisense Mobile Communications Technology Co Ltd
Priority to CN202010072494.XA priority Critical patent/CN113225838A/zh
Publication of CN113225838A publication Critical patent/CN113225838A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/15Setup of multiple wireless link connections
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)

Abstract

本发明公开了一种麦克风的控制方法、音频接收设备及音频采集设备,用以实现范围较大音频输入。本发明实施例音频接收设备查找能够提供外接麦克风功能的备选音频采集设备;向目标音频采集设备发送配对请求消息;接收配对确认消息后,与目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将目标音频采集设备的麦克风作为音频接收设备的外接麦克风。由于WiFi Direct连接的传输时延低且带宽高,音频接收设备可以接收低时延、高保真音质的音频数据,音频采集设备可以在WiFi Direct连接的有效信号范围之内作为音频接收设备的麦克风使用,物理限制更少,提升用户体验。

Description

一种麦克风的控制方法、音频接收设备及音频采集设备
技术领域
本发明涉及终端显示技术领域,尤其涉及一种麦克风的控制方法、音频接收设备及音频采集设备。
背景技术
通信终端的音频输入可以通过通信终端上的麦克风,也可以通过外接的有线耳机上的话筒或蓝牙耳机上的话筒,但这些音频输入设备支持的距离有限,如果远离音频输入设备时,收音效果会收到周围环境噪音的影响以及麦克风收音能力的限制,而当距离太远或有隔断时,这些音频输入设备则无法使用。
虽然目前的蓝牙耳机可以保持一定范围的音频输入,但蓝牙连接要求工作范围为十米以内且无隔断,而且蓝牙连接带宽受限,当范围较大或对音质要求较高时,则无法满足用户需求。
综上,目前的麦克风音频输入不能满足范围较大的传输。
发明内容
本发明示例性的实施方式中提供一种麦克风的控制方法、音频接收设备及音频采集设备,用以实现范围较大或高保真音质的音频输入。
根据示例性的实施方式中的第一方面,提供一种音频接收设备,包括显示屏和处理器;
所述显示屏用于显示用户界面;
所述处理器用于:
响应于用户触发的使用外接麦克风的操作,查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,向所述目标音频采集设备发送配对请求消息;
接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
本发明实施例可以将目标音频采集设备的麦克风通过WiFi Direct连接作为音频接收设备的麦克风使用,由于WiFi Direct连接的传输时延低且带宽高,音频采集设备可以为音频接收设备提供低时延、高保真音质的音频数据,且由于WiFiDirect连接信号覆盖范围广,音频采集设备可以在WiFi Direct连接的有效信号范围之内作为音频接收设备的麦克风使用,物理限制更少,更加方便快捷,提升用户体验。
一种可能的实施方式,所述处理器具体用于:
接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
由于本发明实施例音频接收设备通过询问消息查找能够提供外接麦克风功能的备选音频采集设备,能够为用户查找到当前WiFi Direct连接信号覆盖范围内所有能够提供外接麦克风功能的备选音频采集设备,更加方便快捷,提升用户体验。
一种可能的实施方式,所述处理器还用于:
在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
由于本发明实施例音频接收设备可以向音频采集设备发送录音参数,以使音频采集设备根据录音参数进行音频采集,可以个性化的满足用户需求,为用户提供高品质的音频;并且音频接收设备可以通过WiFi Direct连接接收目标音频采集设备发送的音频数据,并对音频数据进行处理,可以实时使用音频采集设备采集的音频,从而实现了将音频采集设备的麦克风作为音频接收设备的麦克风使用,提升用户体验。
根据示例性的实施方式中的第二方面,提供一种音频采集设备,包括显示屏、麦克风和处理器;
所述显示屏用于显示用户界面;
所述麦克风,用于采集音频数据;
所述处理器用于:
接收音频接收设备发送的配对请求消息;
接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
响应于用户触发的确认配对的操作,向所述音频接收设备发送配对确认消息;
与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,所述处理器还用于:
接收所述音频接收设备发送的用于表示音频质量的录音参数;
根据所述录音参数通过自身的麦克风采集音频数据;
将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
根据示例性的实施方式中的第三方面,提供一种麦克风的控制方法,应用于音频接受设备,该方法包括:
响应于用户触发的使用外接麦克风的操作,音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,所述音频接收设备向所述目标音频采集设备发送配对请求消息;
所述音频接收设备接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,所述音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,包括:
所述音频接收设备接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,所述音频接收设备将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
一种可能的实施方式,在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,还包括:
所述音频接收设备向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
所述音频接收设备通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
根据示例性的实施方式中的第四方面,提供一种麦克风的控制方法,应用于音频采集设备,该方法包括:
目标音频采集设备接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
响应于用户触发的确认配对的操作,所述目标音频采集设备向所述音频接收设备发送配对确认消息;
所述目标音频采集设备与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,在所述目标音频采集设备通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风之后,还包括:
所述目标音频采集设备接收所述音频接收设备发送的用于表示音频质量的录音参数;
所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
所述目标音频采集设备将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
根据示例性的实施方式中的第五方面,提供一种计算机存储介质,所述计算机存储介质中存储有计算机程序指令,当所述指令在计算机上运行时,使得所述计算机执行如上第三方面或第四方面所述的麦克风的控制方法。
在符合本领域常识的基础上,上述各优选条件,可任意组合,即得本发明各较佳实施例。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种通信终端的结构示意图;
图2示例性示出了本发明实施例提供的一种通信终端的软件架构示意图;
图3示例性示出了本发明实施例提供的通信终端的用户界面示意图;
图4示例性示出了本发明实施例提供的显示设备与控制装置之间操作场景的示意图;
图5示例性示出了本发明实施例提供的图4中控制装置400的配置框图;
图6示例性示出了本发明实施例提供的图4中显示设备410的配置框图;
图7示例性示出了本发明实施例提供的显示设备410存储器中操作系统的架构配置框图;
图8示例性示出了本发明实施例提供的一种麦克风的控制系统示意图;
图9示例性示出了本发明实施例提供的第一种场景示意图;
图10示例性示出了本发明实施例提供的第二种场景示意图;
图11示例性示出了本发明实施例提供的第三种场景示意图;
图12示例性示出了本发明实施例提供的第四种场景示意图;
图13示例性示出了本发明实施例提供的一种音频接收设备的用户界面示意图;
图14示例性示出了本发明实施例提供的一种音频接收设备的用户界面示意图;
图15示例性示出了本发明实施例提供的一种音频接收设备与目标音频采集设备配对过程示意图;
图16示例性示出了本发明实施例提供的一种完整的麦克风控制方法流程图;
图17示例性示出了本发明实施例提供的一种音频接收设备的注册以及使用过程示意图;
图18示例性示出了本发明实施例提供的一种音频接收设备结构示意图;
图19示例性示出了本发明实施例提供的一种音频采集设备结构示意图;
图20示例性示出了本发明实施例提供的一种音频接收装置结构示意图;
图21示例性示出了本发明实施例提供的一种音频采集装置结构示意图;
图22示例性示出了本发明实施例提供的一种应用于音频接收设备的麦克风的控制方法流程图;
图23示例性示出了本发明实施例提供的一种应用于音频采集设备的麦克风的控制方法流程图。
具体实施方式
下面将结合附图对本申请实施例中的技术方案进行清除、详尽地描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;文本中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况,另外,在本申请实施例的描述中,“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
下面对文中出现的一些术语进行解释:
1、本发明实施例中术语“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
2、本发明实施例中术语“流媒体”,是指将一连串的媒体数据压缩后,以流的方式在网络中分段传送,实现在网络上实时传输影音以供观赏的一种技术。
本发明实施例中的音频采集设备与音频接收设备可以为通信终端,图1示出了通信终端100的结构示意图。
下面以通信终端100为例对实施例进行具体说明。应该理解的是,图1所示通信终端100仅是一个范例,并且通信终端100可以具有比图1中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
图1中示例性示出了根据示例性实施例中通信终端100的硬件配置框图。如图1所示,通信终端100包括:射频(radio frequency,RF)电路110、存储器120、显示单元130、摄像头140、传感器150、音频电路160、无线保真(Wireless Fidelity,Wi-Fi)模块170、处理器180、蓝牙模块181、以及电源190等部件。
RF电路110可用于在收发信息或通话过程中信号的接收和发送,可以接收基站的下行数据后交给处理器180处理;可以将上行数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等器件。
存储器120可用于存储软件程序及数据。处理器180通过运行存储在存储器120的软件程序或数据,从而执行通信终端100的各种功能以及数据处理。存储器120可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。存储器120存储有使得通信终端100能运行的操作系统。本申请中存储器120可以存储操作系统及各种应用程序,还可以存储执行本申请实施例所述方法的代码。
显示单元130可用于接收输入的数字或字符信息,产生与通信终端100的用户设置以及功能控制有关的信号输入,具体地,显示单元130可以包括设置在通信终端100正面的触摸屏131,可收集用户在其上或附近的触摸操作,例如点击按钮,拖动滚动框等。
显示单元130还可用于显示由用户输入的信息或提供给用户的信息以及终端100的各种菜单的图形用户界面(graphical user interface,GUI)。具体地,显示单元130可以包括设置在通信终端100正面的显示屏132。其中,显示屏132可以采用液晶显示器、发光二极管等形式来配置。显示单元130可以用于显示本申请中所述的各种图形用户界面。
其中,触摸屏131可以覆盖在显示屏132之上,也可以将触摸屏131与显示屏132集成而实现通信终端100的输入和输出功能,集成后可以简称触摸显示屏。本申请中显示单元130可以显示应用程序以及对应的操作步骤。
摄像头140可用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给处理器180转换成数字图像信号。
通信终端100还可以包括至少一种传感器150,比如加速度传感器151、距离传感器152、指纹传感器153、温度传感器154。通信终端100还可配置有陀螺仪、气压计、湿度计、温度计、红外线传感器、光传感器、运动传感器等其他传感器。
音频电路160、扬声器161、麦克风162可提供用户与通信终端100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出。通信终端100还可配置音量按钮,用于调节声音信号的音量。另一方面,麦克风162将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出至RF电路110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理。本申请中麦克风162可以获取用户的语音。
Wi-Fi属于短距离无线传输技术,通信终端100可以通过Wi-Fi模块170帮助用户收发电子邮件、浏览网页和访问流媒体等,它为用户提供了无线的宽带互联网访问。
处理器180是通信终端100的控制中心,利用各种接口和线路连接整个终端的各个部分,通过运行或执行存储在存储器120内的软件程序,以及调用存储在存储器120内的数据,执行通信终端100的各种功能和处理数据。在一些实施例中,处理器180可包括一个或多个处理单元;处理器180还可以集成应用处理器和基带处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,基带处理器主要处理无线通信。可以理解的是,上述基带处理器也可以不集成到处理器180中。本申请中处理器180可以运行操作系统、应用程序、用户界面显示及触控响应,以及本申请实施例所述的处理方法。另外,处理器180与显示单元130耦接。
蓝牙模块181,用于通过蓝牙协议来与其他具有蓝牙模块的蓝牙设备进行信息交互。例如,通信终端100可以通过蓝牙模块181与同样具备蓝牙模块的可穿戴电子设备(例如智能手表)建立蓝牙连接,从而进行数据交互。
通信终端100还包括给各个部件供电的电源190(比如电池)。电源可以通过电源管理系统与处理器180逻辑相连,从而通过电源管理系统实现管理充电、放电以及功耗等功能。通信终端100还可配置有电源按钮,用于终端的开机和关机,以及锁屏等功能。
图2是本发明实施例的通信终端100的软件结构框图。
分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将Android系统分为四层,从上至下分别为应用程序层,应用程序框架层,安卓运行时(Android runtime)和系统库,以及内核层。
应用程序层可以包括一系列应用程序包。
如图2所示,应用程序包可以包括相机,图库,日历,通话,地图,导航,WLAN,蓝牙,音乐,视频,短信息等应用程序。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括窗口管理器,内容提供器,视图系统,电话管理器,资源管理器,通知管理器等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。用户界面可以由一个或多个视图组成的。例如,包括短信通知图标的用户界面,可以包括显示文字的视图以及显示图片的视图。
电话管理器用于提供通信终端100的通信功能。例如通话状态的管理(包括接通,挂断等)。
资源管理器为应用程序提供各种资源,比如本地化字符串,图标,图片,布局文件,视频文件等等。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,通信终端振动,指示灯闪烁等。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(Media Libraries),三维图形处理库(例如:OpenGL ES),2D图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
三维图形处理库用于实现三维图形绘图,图像渲染,合成,和图层处理等。
2D图形引擎是2D绘图的绘图引擎。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
下面结合捕获拍照场景,示例性说明通信终端100软件以及硬件的工作流程。
当触摸屏131接收到触摸操作,相应的硬件中断被发给内核层。内核层将触摸操作加工成原始输入事件(包括触摸坐标,触摸操作的时间戳等信息)。原始输入事件被存储在内核层。应用程序框架层从内核层获取原始输入事件,识别该输入事件所对应的控件。以该触摸操作是触摸单击操作,该单击操作所对应的控件为相机应用图标的控件为例,相机应用调用应用框架层的接口,启动相机应用,进而通过调用内核层启动摄像头驱动,通过摄像头140捕获静态图像或视频。
本申请实施例中的通信终端100可以为手机、平板电脑、可穿戴设备、笔记本电脑以及电视等。
图3是用于示出通信终端(例如图1的通信终端100)上的用户界面的示意图。在一些具体实施中,当音频接收设备为通信终端时,用户通过触摸用户界面上的应用图标可以打开相应的应用程序,在应用程序中需要使用音频输入设备时,将音频采集设备作为外接麦克风使用。
本发明实施例中的音频接收设备还可以为显示设备,例如电视机,图4中示例性示出了显示设备与控制装置之间操作场景的示意图。如图4所示,控制装置400和显示设备410之间可以有线或无线方式进行通信。用户可以通过操作控制装置400来控制显示设备410进行音频接收以及音频数据的使用过程。
其中,控制装置400被配置为控制显示设备410,其可接收用户输入的操作指令,且将操作指令转换为显示设备410可识别和响应的指令,起着用户与显示设备400之间交互的中介作用。如:用户通过操作控制装置400上频道加减键,显示设备410响应频道加减的操作。
控制装置400可以是遥控器400A,包括红外协议通信或蓝牙协议通信,及其他短距离通信方式等,通过无线或其他有线方式来控制显示设备410。用户可以通过遥控器上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备410。如:用户可以通过遥控器上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备410的功能。
控制装置400也可以是智能设备,如移动终端400B、平板电脑、计算机、笔记本电脑等。例如,使用在智能设备上运行的应用程序控制显示设备410。该应用程序通过配置可以在与智能设备关联的屏幕上,通过直观的用户界面(UI)为用户提供各种控制。
示例性的,移动终端400B可与显示设备410安装软件应用,通过网络通信协议实现连接通信,实现一对一控制操作的和数据通信的目的。如:可以使移动终端400B与显示设备410建立控制指令协议,通过操作移动终端400B上提供的用户界面的各种功能键或虚拟按钮,来实现如遥控器400A布置的实体按键的功能。也可以将移动终端400B上显示的音视频内容传输到显示设备410上,实现同步显示功能。
显示设备410可提供广播接收功能和计算机支持功能的网络电视功能。显示设备可以实施为,数字电视、网络电视、互联网协议电视(IPTV)等。
显示设备410,可以是液晶显示器、有机发光显示器、投影设备。具体显示设备类型、尺寸大小和分辨率等不作限定。
显示设备410还与服务器420通过多种通信方式进行数据通信。这里可允许显示设备410通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器420可以向显示设备410提供各种内容和互动。示例的,显示设备410可以发送和接收信息,例如:接收电子节目指南(EPG)数据、接收软件程序更新、或访问远程储存的数字媒体库。服务器420可以一组,也可以多组,可以一类或多类服务器。通过服务器420提供视频点播和广告服务等其他网络服务内容。
图5中示例性示出了控制装置400的配置框图。如图5所示,控制装置400包括控制器510、存储器520、通信器530、用户输入接口540、输出接口550、供电电源560。
控制器510包括随机存取存储器(RAM)511、只读存储器(ROM)512、处理器513、通信接口以及通信总线。控制器510用于控制控制装置400的运行和操作,以及内部各部件之间的通信协作、外部和内部的数据处理功能。
示例性的,当检测到用户按压在遥控器400A上布置的按键的交互或触摸在遥控器400A上布置的触摸面板的交互时,控制器510可控制产生与检测到的交互相应的信号,并将该信号发送到显示设备410。
存储器520,用于在控制器510的控制下存储驱动和控制控制装置400的各种运行程序、数据和应用。存储器520,可以存储用户输入的各类控制信号指令。
通信器530在控制器510的控制下,实现与显示设备410之间控制信号和数据信号的通信。如:控制装置400经由通信器530将控制信号(例如触摸信号或按钮信号)发送至显示设备410上,控制装置400可经由通信器530接收由显示设备410发送的信号。通信器530可以包括红外信号接口531和射频信号接口532。例如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备410。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备410。
用户输入接口540,可包括麦克风541、触摸板542、传感器543、按键544等中至少一者,从而用户可以通过语音、触摸、手势、按压等将关于控制显示设备410的用户指令输入到控制装置400。
输出接口550,通过将用户输入接口540接收的用户指令输出至显示设备410,或者,输出由显示设备410接收的图像或语音信号。这里,输出接口550可以包括LED接口551、产生振动的振动接口552、输出声音的声音输出接口553和输出图像的显示器554等。例如,遥控器400A可从输出接口550接收音频、视频或数据等输出信号,并且将输出信号在显示器554上显示为图像形式、在声音输出接口553输出为音频形式或在振动接口552输出为振动形式。
供电电源560,用于在控制器510的控制下为控制装置400各元件提供运行电力支持。形式可以为电池及相关控制电路。
图6中示例性示出了显示设备410的硬件配置框图。如图6所示,显示设备410中可以包括调谐解调器610、通信器620、检测器630、外部装置接口640、控制器650、存储器660、用户接口665、视频处理器670、显示器675、音频处理器680、音频输出接口685、供电电源690。
调谐解调器610,通过有线或无线方式接收广播电视信号,可以进行放大、混频和谐振等调制解调处理,用于从多个无线或有线广播电视信号中解调出用户所选择的电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据)。
调谐解调器610,可根据用户选择,以及由控制器650控制,响应用户选择的电视频道的频率以及该频率所携带的电视信号。
调谐解调器610,根据电视信号的广播制式不同,可以接收信号的途径有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,可以数字调制方式或模拟调制方式;以及根据接收电视信号的种类不同,可以解调模拟信号和数字信号。
在其他一些示例性实施例中,调谐解调器610也可在外部设备中,如外部机顶盒等。这样,机顶盒通过调制解调后输出电视信号,经过外部装置接口640输入至显示设备410中。
通信器620,是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如显示设备410可将内容数据发送至经由通信器620连接的外部设备,或者,从经由通信器620连接的外部设备浏览和下载内容数据。通信器620可以包括WIFI模块621、蓝牙通信协议模块622、有线以太网通信协议模块623等网络通信协议模块或近场通信协议模块,从而通信器620可根据控制器650的控制接收控制装置400的控制信号,并将控制信号实现为WIFI信号、蓝牙信号、射频信号等。
检测器630,是显示设备410用于采集外部环境或与外部交互的信号的组件。检测器630可以包括声音采集器631,如麦克风,可以用于接收用户的声音,如用户控制显示设备410的控制指令的语音信号;或者,可以采集用于识别环境场景类型的环境声音,实现显示设备410可以自适应环境噪声。
在其他一些示例性实施例中,检测器630,还可以包括图像采集器632,如相机、摄像头等,可以用于采集外部环境场景,以自适应变化显示设备410的显示参数;以及用于采集用户的属性或与用户交互手势,以实现显示设备与用户之间互动的功能。
在其他一些示例性实施例中,检测器630,还可以包括光接收器,用于采集环境光线强度,以自适应显示设备410的显示参数变化等。
在其他一些示例性实施例中,检测器630,还可以包括温度传感器,如通过感测环境温度,显示设备410可自适应调整图像的显示色温。示例性的,当温度偏高的环境时,可调整显示设备410显示图像色温偏冷色调;当温度偏低的环境时,可以调整显示设备410显示图像色温偏暖色调。
外部装置接口640,是提供控制器650控制显示设备410与外部设备间数据传输的组件。外部装置接口640可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口640可以包括:高清多媒体接口(HDMI)端子641、复合视频消隐同步(CVBS)端子642、模拟或数字分量端子643、通用串行总线(USB)端子644、组件(Component)端子(图中未示出)、红绿蓝(RGB)端子(图中未示出)等任一个或多个。
控制器650,通过运行存储在存储器660上的各种软件控制程序(如操作系统和各种应用程序),来控制显示设备410的工作和响应用户的操作。
如图6所示,控制器650包括随机存取存储器(RAM)651、只读存储器(ROM)652、图形处理器653、CPU处理器654、通信接口655、以及通信总线656。其中,RAM651、ROM652以及图形处理器653、CPU处理器654通信接口655通过通信总线656相连接。
ROM652,用于存储各种系统启动指令。如在接收到开机信号时,显示设备410电源开始启动,CPU处理器654运行ROM652中的系统启动指令,将存储在存储器660的操作系统拷贝至RAM651中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器654再将存储器660中各种应用程序拷贝至RAM651中,然后,开始运行启动各种应用程序。
图形处理器653,用于产生各种图形对象,如图标、操作菜单、以及用户输入指令显示图形等。图形处理器653可以包括运算器,用于通过接收用户输入各种交互指令进行运算,进而根据显示属性显示各种对象;以及包括渲染器,用于产生基于运算器得到的各种对象,将进行渲染的结果显示在显示器675上。
CPU处理器654,用于执行存储在存储器660中的操作系统和应用程序指令。以及根据接收的用户输入指令,来执行各种应用程序、数据和内容的处理,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器654,可以包括多个处理器。多个处理器可包括一个主处理器以及多个或一个子处理器。主处理器,用于在显示设备预加载模式中执行显示设备410的一些初始化操作,和/或,在正常模式下显示画面的操作。多个或一个子处理器,用于执行在显示设备待机模式等状态下的一种操作。
通信接口655,可包括第一接口到第n接口。这些接口可以是经由网络被连接到外部设备的网络接口。
控制器650可以控制显示设备410的整体操作。例如:响应于接收到用于选择在显示器675上显示的GUI对象的用户输入命令,控制器650便可以执行与由用户输入命令选择的对象有关的操作。
其中,该对象可以是可选对象中的任何一个,例如超链接或图标。该与所选择的对象有关的操作,例如显示连接到超链接页面、文档、图像等操作,或者执行与对象相对应的程序的操作。该用于选择GUI对象的用户输入命令,可以是通过连接到显示设备410的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器660,用于存储驱动和控制显示设备410运行的各种类型的数据、软件程序或应用程序。存储器660可以包括易失性和/或非易失性存储器。而术语“存储器”包括存储器660、控制器650的RAM651和ROM652、或显示设备410中的存储卡。
在一些实施例中,存储器660具体用于存储驱动显示设备410中控制器650的运行程序;存储显示设备410内置的和用户从外部设备下载的各种应用程序;存储用于配置由显示器675提供的各种GUI、与GUI相关的各种对象及用于选择GUI对象的选择器的视觉效果图像等数据。
在一些实施例中,存储器660具体用于存储调谐解调器610、通信器620、检测器630、外部装置接口640、视频处理器670、显示器675、音频处理器680等的驱动程序和相关数据,例如从外部装置接口接收的外部数据(例如音视频数据)或用户接口接收的用户数据(例如按键信息、语音信息、触摸信息等)。
在一些实施例中,存储器660具体存储用于表示操作系统(OS)的软件和/或程序,这些软件和/或程序可包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,以及其它程序所实施的功能(如所述中间件、API或应用程序);同时,内核可以提供接口,以允许中间件、API或应用程序访问控制器,以实现控制或管理系统资源。
图7中示例性示出了显示设备410存储器中操作系统的架构配置框图。该操作系统架构从上到下依次是应用层、中间件层和内核层。
应用层,系统内置的应用程序以及非系统级的应用程序都是属于应用层。负责与用户进行直接交互。应用层可包括多个应用程序,如设置应用程序、电子帖应用程序、媒体中心应用程序等。这些应用程序可被实现为Web应用,其基于WebKit引擎来执行,具体可基于HTML5、层叠样式表(CSS)和JavaScript来开发并执行。
这里,HTML,全称为超文本标记语言(HyperText Markup Language),是一种用于创建网页的标准标记语言,通过标记标签来描述网页,HTML标签用以说明文字、图形、动画、声音、表格、链接等,浏览器会读取HTML文档,解释文档内标签的内容,并以网页的形式显示出来。
CSS,全称为层叠样式表(Cascading Style Sheets),是一种用来表现HTML文件样式的计算机语言,可以用来定义样式结构,如字体、颜色、位置等的语言。CSS样式可以直接存储与HTML网页或者单独的样式文件中,实现对网页中样式的控制。
JavaScript,是一种应用于Web网页编程的语言,可以插入HTML页面并由浏览器解释执行。其中Web应用的交互逻辑都是通过JavaScript实现。JavaScript可以通过浏览器,封装JavaScript扩展接口,实现与内核层的通信。
中间件层,可以提供一些标准化的接口,以支持各种环境和系统的操作。例如,中间件层可以实现为与数据广播相关的中间件的多媒体和超媒体信息编码专家组(MHEG),还可以实现为与外部设备通信相关的中间件的DLNA中间件,还可以实现为提供显示设备内各应用程序所运行的浏览器环境的中间件等。
内核层,提供核心系统服务,例如:文件管理、内存管理、进程管理、网络管理、系统安全权限管理等服务。内核层可以被实现为基于各种操作系统的内核,例如,基于Linux操作系统的内核。
内核层也同时提供系统软件和硬件之间的通信,为各种硬件提供设备驱动服务,例如:为显示器提供显示驱动程序、为摄像头提供摄像头驱动程序、为遥控器提供按键驱动程序、为WIFI模块提供WiFi驱动程序、为音频输出接口提供音频驱动程序、为电源管理(PM)模块提供电源管理驱动等。
用户接口665,接收各种用户交互。具体的,用于将用户的输入信号发送给控制器650,或者,将从控制器650的输出信号传送给用户。示例性的,遥控器400A可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户接口665,再由用户接口665转送至控制器650;或者,遥控器400A可接收经控制器650处理从用户接口665输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示器675上显示的图形用户界面(GUI)输入用户命令,则用户接口665通过GUI接收用户输入命令。确切的说,用户接口665可接收用于控制选择器在GUI中的位置以选择不同的对象或项目的用户输入命令。
或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户接口665通过传感器识别出声音或手势,来接收用户输入命令。视频处理器670,用于接收外部的视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在显示器675上显示或播放的视频信号。
示例的,视频处理器670,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2流(基于数字存储媒体运动图像和语音的压缩标准),则解复用模块将其进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频图像进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的60Hz视频的帧率转换为120Hz或240Hz的帧率,通常的格式采用如插帧方式实现。
显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示器显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
显示器675,用于接收源自视频处理器670输入的图像信号,进行显示视频内容、图像以及菜单操控界面。显示视频内容,可以来自调谐解调器610接收的广播信号中的视频内容,也可以来自通信器620或外部装置接口640输入的视频内容。显示器675,同时显示显示设备410中产生且用于控制显示设备410的用户操控界面UI。
以及,显示器675可以包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。或者,倘若显示器675为一种投影显示器,还可以包括一种投影装置和投影屏幕。
音频处理器680,用于接收外部的音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换、和放大处理等音频数据处理,得到可以在扬声器686中播放的音频信号。
示例性的,音频处理器680可以支持各种音频格式。例如MPEG-2、MPEG-4、高级音频编码(AAC)、高效AAC(HE-AAC)等格式。
音频输出接口685,用于在控制器650的控制下接收音频处理器680输出的音频信号,音频输出接口685可包括扬声器686,或输出至外接设备的发生装置的外接音响输出端子687,如耳机输出端子。
在其他一些示例性实施例中,视频处理器670可以包括一个或多个芯片组成。音频处理器680,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器670和音频处理器680,可以为单独的芯片,也可以与控制器650一起集成在一个或多个芯片中。
供电电源690,用于在控制器650的控制下,将外部电源输入的电力为显示设备410提供电源供电支持。供电电源690可以是安装在显示设备410内部的内置电源电路,也可以是安装在显示设备410外部的电源。
本发明实施例提供一种麦克风的控制系统,如图8所示,包括至少一个音频接收设备801和至少一个音频采集设备802。响应于用户触发的使用外接麦克风的操作,音频接收设备801查找能够提供外接麦克风功能等的备选音频采集设备,并将查找到的备选音频采集设备展示给用户,用户从至少一个备选音频采集设备中选择目标音频采集设备802,音频接收设备801向音频采集设备802发送配对请求消息,音频采集设备802向音频接收设备返回配对确认消息,音频接收设备801和音频采集设备802建立WiFi Direct连接,音频接收设备801通过建立的WiFi Direct连接将目标音频采集设备802的麦克风作为音频接收设备801的外接麦克风。
本发明实施例提供的麦克风控制方法,音频接收设备查找能够提供外接麦克风功能的音频采集设备,并从查找到的至少一个音频采集设备中选择目标音频采集设备,在音频接收设备与目标音频采集设备配对成功后,通过WiFi Direct连接将目标音频采集设备的麦克风作为音频接收设备的外接麦克风。本发明实施例可以将目标音频采集设备的麦克风通过WiFi Direct连接作为音频接收设备的麦克风使用,由于WiFi Direct连接的传输时延低且带宽高,音频采集设备可以为音频接收设备提供低时延、高保真音质的音频数据,且由于WiFiDirect连接信号覆盖范围广,音频采集设备可以在WiFi Direct连接的有效信号范围之内作为音频接收设备的麦克风使用,物理限制更少,更加方便快捷,提升用户体验。
一种可能的实施方式,本发明实施例中的音频接收设备可以为智能手机、智能电视、电脑等设备;音频采集设备可以为耳机、智能手表,智能手机等具有麦克风和WiFiDirect功能的设备。
本发明实施例第一种可能的场景,如图9所示,音频接收设备为智能电视,音频采集设备为手机,手机可以将自身的麦克风通过WiFi Direct连接作为智能电视的麦克风使用,用户可以将手机的麦克风作为智能电视的麦克风在智能电视的卡拉OK、语音输入、录音等应用程序中使用,由于WiFi Direct连接也支持一对多的连接方式,可以将多个手机的麦克风通过WiFi Direct连接作为智能电视的麦克风使用,从而实现多人同时唱歌等功能。
本发明实施例第二种可能的场景,如图10所示,音频接收设备与音频采集设备均为手机,则手机A可以通过WiFi Direct连接作为手机B的麦克风使用,用户可以将手机A的麦克风作为手机B的音频输入,在语音聊天、电话等应用程序中使用。
本发明实施例第三种可能的场景,如图11所示,一台音频采集设备的麦克风可以作为多台音频接收设备的麦克风使用,音频采集设备可以按照不同的音频接收设备的IP地址,将采集到的音频数据发给指定的音频接收设备,也可以将采集到的音频数据同时发送给多给音频接收设备。
本发明实施例第四种可能的场景,如图12所示,音频接收设备可以为电脑、智能电视等设备,音频采集设备可以为通信终端,以音频接收设备作为电话会议的中心设备,可以将多个音频采集设备同时通过WiFi Direct连接接入中心设备,即可将多个音频采集设备的麦克风作为中心设备的麦克风使用,从而实现多人的电话会议。
一种可能的实施方式,用户可以在音频接收设备的音频输入设备的设置界面选择外接麦克风选项触发使用外接麦克风的操作;例如,以音频接收设备为手机为例,如图13所示的音频接收设备的用户界面,用户点击“外接麦克风”选项,触发使用外接麦克风操作。
响应于用户触发的使用外接麦克风的操作,音频接收设备查找能够提供外接麦克风功能的备选音频采集设备。
在具体实施中,用户在音频输入设备中选择“外接麦克风”后,音频接收设备检查当前是否开启了WiFi Direct功能,若音频接收设备检查当前未开启WiFi Direct功能,则提醒用户打开WiFi Direct功能;在WiFi Direct功能开启的前提下,音频接收设备接收音频采集设备发送的广播消息,其中,广播消息是音频采集设备在开启WiFi Direct功能的状态下发送的。
音频接收设备接收音频采集设备发送的广播消息后,向音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息。
音频采集设备在接收到音频接收设备发送的问询消息后,在确定音频采集设备具有麦克风功能时,向音频接收设备返回用于表示能够提供外接麦克风功能的确认消息。
音频接收设备在收到音频采集设备发送的确认消息后,将发送该确认消息的音频采集设备作为备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户。
例如,以音频接收设备为手机为例,如图14所示的音频接收设备的用户界面示意图,音频接收设备将查找到的至少一个备选音频采集设备展示在外接麦克风选项下的备选设备列表中。
用户从至少一个备选音频采集设备中选择目标音频采集设备,音频接收设备向目标音频采集设备发送配对请求消息,目标音频采集设备在接收到音频接收设备发送的配对请求后,用户操作目标音频采集设备选择同意音频接收设备发送的配对请求消息,目标音频采集设备向音频接收设备返回配对确认消息。
例如,如图15所示,音频接收设备向目标音频采集设备发送配对请求消息,目标音频采集设备在用户选择同意配对后,向音频接受设备返回配对确认消息。
音频接收设备在接收到目标音频采集设备返回的配对确认消息后,与目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将目标音频采集设备的麦克风作为音频接收设备的外接麦克风。
在音频接收设备通过建立的WiFi Direct连接将目标音频采集设备的麦克风作为音频接收设备的外接麦克风之后,音频接收设备向目标音频采集设备发送用于表示音频质量的录音参数,目标音频采集设备根据录音参数采集音频数据;
需要说明的是,录音参数包括采样率、是否立体声、是否降噪等信息中的部分或全部。
一种可能的实施方式,用户在音频接收设备上触发使用麦克风的操作,音频接收设备向目标音频采集设备发送开启指令,目标音频采集设备在接收到开启指令后通过麦克风采集音频数据。
在具体实施中,用户在音频接收设备上触发使用麦克风的操作,可以为开启录音功能、接通或拨打电话、发送语音信息等操作。
一种可能的实施方式,接收设备通过WiFi Direct连接中的控制链路向目标发送设备发送用于开启WiFi麦克风功能的开启指令。
目标音频采集设备将采集到的音频数据通过WiFi Direct连接发送给音频接收设备,音频接收设备在接收到音频数据后对音频数据进行处理。
一种可能的实施方式,目标音频采集设备通过WiFi Direct连接中的流媒体链路向音频接收设备发送采集到的音频数据。
在具体实施中,音频接收设备在接收到音频数据后,可以根据开启指令对应的应用程序中对音频数据的要求对音频数据进行处理。
例如,若开启指令对应的为用户在音频接收设备中发送语音信息的操作,则音频接收设备在接收到目标音频采集设备发送的音频数据后,将音频数据存储为音频文件,作为语音信息发送;
或者,若开启指令对应的为用户在音频接收设备中的唱歌应用程序中开始唱歌的操作,则音频接收设备在接收到目标音频采集设备发送的音频数据后,直接将音频数据输出到唱歌应用程序中。
如图16所示,为本发明实施例提供的一种完整的麦克风控制方法流程图,包括以下步骤:
步骤S1601、音频采集设备发送广播消息;
步骤S1602、响应于用户触发的使用外接麦克风的操作,音频接收设备向音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
步骤S1603、音频采集设备向音频接受设备返回用于表示能够提供外接麦克风的确认消息;
步骤S1604、音频接收设备将发送确认消息的音频采集设备作为备选音频采集设备;
步骤S1605、响应于用户从至少一个备选音频采集设备中选择音频采集设备为目标音频采集设备的操作,音频接收设备向目标音频采集设备发送配对请求消息;
步骤S1606、目标音频采集设备向音频接收设备返回配对确认消息;
步骤S1607、音频接收设备与目标音频采集设备建立WiFi Direct连接;
步骤S1608、音频接收设备向目标音频采集设备发送用于表示音频质量的录音参数;
步骤S1609、音频接收设备向目标音频采集设备发送开启指令;
步骤S1610、音频采集设备通过麦克风采集音频数据;
步骤S1611、音频采集设备将采集到的音频数据通过WiFi Direct连接发送给音频接收设备;
步骤S1612、音频接收设备对音频数据进行处理。
本发明实施例音频接收设备将音频采集设备注册到音频设备管理器以及音频接收设备通过音频采集设备对音频数据进行接收和使用的过程,如图17所示,包括以下步骤:
1、在WiFIDirect连接建立成功后,音频接收设备生成一个与音频采集设备对应的虚拟的WifiDirectAudio(WifiDirect音频)设备,音频接收设备向Android系统的AudioPolicyManagerService(音频管理服务)注册WifiDirectAudio设备,以使音频接收设备需要使用音频输入设备时用户可以选择音频采集设备;
2、用户选择音频采集设备作为音频输入设备使用时,会调用音频接收设备Android音频系统的AudioFlingerService(音频服务)与音频采集设备建立录音通路,此时AudioFlingerService中的AudioFlingerPolicyService(音频数据服务)先向AudioPolicyManagerService(音频管理服务)查询可用设备,由于在步骤1中已经注册了WifiDirectAudio设备,AudioPolicyManagerService会返回WifiDirectAudio设备作为音频输入设备;
3、AudioFlingerService获取到音频输入设备之后,会调用音频接收设备的WifiDirectAudioHal(WifiDirect硬件抽象层),通过对应的open接口,开启WifiDirectAudio设备,通过音频接收设备的WifiDirect音频传输模块与音频采集设备建立起TCP连接,即与音频采集设备通过Wifi建立起网络连接服务;
4、TCP连接建立完成后,将接收到的音频数据送到WifiDirect音频编解码模块解码,转换为PCM数据;
5、AudioFlingerService通过不断的调用read方法读取PCM数据,然后将PCM数据传输给需要使用音频输入设备的应用程序;
6、应用程序结束使用音频输入设备时,会下发stop指令,停止读取音频数据。AudioFlingerService在收到stop指令之后会停止读取数据,下发close指令关闭WifiDirectAudio设备。
7、WifiDirectAudio设备收到close指令之后,调用各模块的close函数,停止接收数据,关闭网络连接,释放资源。
如图18所示,本发明实施例提供一种音频接收设备,包括显示屏1801和处理器1802;
所述显示屏1801用于显示用户界面;
所述处理器1802用于:
响应于用户触发的使用外接麦克风的操作,查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,向所述目标音频采集设备发送配对请求消息;
接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,处理器1802具体用于:
接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
一种可能的实施方式,处理器1802还用于:
在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
如图19所示,本发明实施例提供一种音频采集设备,包括显示屏1901、麦克风1902和处理器1903;
所述显示屏1901用于显示用户界面;
所述麦克风1902,用于采集音频数据;
所述处理器1903用于:
接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
响应于用户触发的确认配对的操作,向所述音频接收设备发送配对确认消息;
与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,处理器1903还用于:
接收所述音频接收设备发送的用于表示音频质量的录音参数;
根据所述录音参数通过自身的麦克风采集音频数据;
将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
如图20所示,本发明实施例提供一种音频接收装置,可以应用于音频接收设备,包括:
查找模块2001,用于响应于用户触发的使用外接麦克风的操作,查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
配对模块2002,用于响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,向所述目标音频采集设备发送配对请求消息;
第一接收模块2003,用于接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,查找模块2001具体用于:
接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
一种可能的实施方式,配对模块2002还用于:
在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
如图21所示,本发明实施例提供一种音频采集装置,可以应用于音频采集设备,包括:
第二接收模块2101,接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
确认模块2102,用于响应于用户触发的确认配对的操作,向所述音频接收设备发送配对确认消息;
连接模块2103,用于与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
一种可能的实施方式,连接模块2102还用于:
接收所述音频接收设备发送的用于表示音频质量的录音参数;
根据所述录音参数通过自身的麦克风采集音频数据;
将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
基于同一发明构思,本发明实施例提供一种麦克风的控制方法,应用于音频接收设备,如图22所示,包括以下步骤:
步骤S2201、响应于用户触发的使用外接麦克风的操作,音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
步骤S2202、响应于用户触发的从至少一个备选音频采集设备中选择目标音频采集设备的操作,音频接收设备向目标音频采集设备发送配对请求消息;
步骤S2203、音频接收设备接收到目标音频采集设备返回的配对确认消息后,与目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将目标音频采集设备的麦克风作为音频接收设备的外接麦克风。
一种可能的实施方式,所述音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,包括:
所述音频接收设备接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,所述音频接收设备将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
一种可能的实施方式,在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,还包括:
所述音频接收设备向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
所述音频接收设备通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
基于同一发明构思,本发明实施例提供一种麦克风的控制方法,应用于音频采集设备,如图23所示,包括以下步骤:
步骤S2301、目标音频采集设备接收音频接收设备发送的配对请求消息;其中,目标音频采集设备为用户从至少一个备选音频采集设备中选择的;
步骤S2302、响应于用户触发的确认配对的操作,目标音频采集设备向音频接收设备发送配对确认消息;
步骤S2303、目标音频采集设备与音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为音频接收设备的外接麦克风。
一种可能的实施方式,在所述目标音频采集设备通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风之后,还包括:
所述目标音频采集设备接收所述音频接收设备发送的用于表示音频质量的录音参数;
所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
所述目标音频采集设备将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
本发明实施例还提供一种计算机可存储介质,其上存储有计算机程序,该程序被处理器执行时实现如上述任一方法的步骤。
由于本发明实施例中的通信终端和计算机存储介质可以应用于上述处理方法,因此,其所能获得的技术效果也可参考上述方法实施例,本发明的实施例在此不再赘述。
本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
虽然以上描述了本发明的具体实施方式,但是本领域的技术人员应当理解,这些仅是举例说明,本发明的保护范围是由所附权利要求书限定的。本领域的技术人员在不背离本发明的原理和实质的前提下,可以对这些实施方式做出多种变更或修改,但这些变更和修改均落入本发明的保护范围。

Claims (10)

1.一种音频接收设备,其特征在于,包括显示屏和处理器;
所述显示屏用于显示用户界面;
所述处理器用于:
响应于用户触发的使用外接麦克风的操作,查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,向所述目标音频采集设备发送配对请求消息;
接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
2.如权利要求1所述的音频接收设备,其特征在于,所述处理器具体用于:
接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
3.如权利要求1所述的音频接收设备,其特征在于,所述处理器还用于:
在所述通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风之后,向所述目标音频采集设备发送用于表示音频质量的录音参数,以使所述目标音频采集设备根据所述录音参数通过自身的麦克风采集音频数据;
通过WiFi Direct连接接收所述目标音频采集设备发送的所述音频数据,并对接收到的所述音频数据进行处理。
4.一种音频采集设备,其特征在于,包括显示屏、麦克风和处理器;
所述显示屏用于显示用户界面;
所述麦克风,用于采集音频数据;
所述处理器用于:
接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
响应于用户触发的确认配对的操作,向所述音频接收设备发送配对确认消息;
与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
5.如权利要求4所述的音频采集设备,其特征在于,所述处理器还用于:
接收所述音频接收设备发送的用于表示音频质量的录音参数;
根据所述录音参数通过自身的麦克风采集音频数据;
将采集到的所述音频数据通过WiFi Direct连接发送给所述音频接收设备,以使所述音频接收设备对接收到的所述音频数据进行处理。
6.一种麦克风的控制方法,其特征在于,该方法包括:
响应于用户触发的使用外接麦克风的操作,音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,并将查找到的至少一个备选音频采集设备展示给用户;
响应于用户触发的从所述至少一个备选音频采集设备中选择目标音频采集设备的操作,所述音频接收设备向所述目标音频采集设备发送配对请求消息;
所述音频接收设备接收到所述目标音频采集设备返回的配对确认消息后,与所述目标音频采集设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将所述目标音频采集设备的麦克风作为所述音频接收设备的外接麦克风。
7.如权利要求6所述的方法,其特征在于,所述音频接收设备查找能够提供外接麦克风功能的备选音频采集设备,包括:
所述音频接收设备接收到音频采集设备发送的广播消息后,向所述音频采集设备发送用于确认是否能够提供外接麦克风功能的问询消息;
在接收到所述音频采集设备返回的用于表示能够提供外接麦克风功能的确认消息后,所述音频接收设备将发送所述确认消息的音频采集设备作为所述备选音频采集设备。
8.一种麦克风的控制方法,其特征在于,该方法包括:
目标音频采集设备接收音频接收设备发送的配对请求消息;其中,所述目标音频采集设备为所述用户从至少一个备选音频采集设备中选择的;
响应于用户触发的确认配对的操作,所述目标音频采集设备向所述音频接收设备发送配对确认消息;
所述目标音频采集设备与所述音频接收设备建立WiFi Direct连接,并通过建立的WiFi Direct连接将自身的麦克风作为所述音频接收设备的外接麦克风。
9.一种计算机存储介质,其特征在于,所述计算机存储介质中存储有计算机程序指令,当所述指令在计算机上运行时,使得所述计算机执行如权利要求6或7所述的方法。
10.一种计算机存储介质,其特征在于,所述计算机存储介质中存储有计算机程序指令,当所述指令在计算机上运行时,使得所述计算机执行如权利要求8所述的方法。
CN202010072494.XA 2020-01-21 2020-01-21 一种麦克风的控制方法、音频接收设备及音频采集设备 Pending CN113225838A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010072494.XA CN113225838A (zh) 2020-01-21 2020-01-21 一种麦克风的控制方法、音频接收设备及音频采集设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010072494.XA CN113225838A (zh) 2020-01-21 2020-01-21 一种麦克风的控制方法、音频接收设备及音频采集设备

Publications (1)

Publication Number Publication Date
CN113225838A true CN113225838A (zh) 2021-08-06

Family

ID=77085268

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010072494.XA Pending CN113225838A (zh) 2020-01-21 2020-01-21 一种麦克风的控制方法、音频接收设备及音频采集设备

Country Status (1)

Country Link
CN (1) CN113225838A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113965715A (zh) * 2021-09-13 2022-01-21 荣耀终端有限公司 一种设备协同控制方法和装置
CN114360232A (zh) * 2021-12-10 2022-04-15 南昌航天广信科技有限责任公司 采集器开启控制方法、系统、计算机及可读存储介质
CN114553623A (zh) * 2022-02-08 2022-05-27 珠海格力电器股份有限公司 电器设备的语音交互控制方法及语音交互系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827317A (zh) * 2009-09-07 2010-09-08 上海银贵网络科技服务有限公司 一种通过移动终端寻找目标对象的控制方法以及控制装置
CN102843467A (zh) * 2012-08-13 2012-12-26 北京小米科技有限责任公司 一种实时采集和播放音频信号的方法、移动终端及系统
CN103037086A (zh) * 2012-12-11 2013-04-10 腾讯科技(上海)有限公司 移动设备实现麦克风的方法、音频播放方法、设备及系统
CN103686051A (zh) * 2013-11-15 2014-03-26 青岛歌尔声学科技有限公司 一种便携式通信装置、一种智能手表和一种通信系统
CN105791966A (zh) * 2016-03-11 2016-07-20 四川长虹电器股份有限公司 Android智能电视切换麦克风音频设备的方法
WO2018094836A1 (zh) * 2016-11-23 2018-05-31 广州视睿电子科技有限公司 交互设备、数据传输方法和系统
CN109743712A (zh) * 2018-12-29 2019-05-10 Oppo广东移动通信有限公司 数据传输控制方法及相关产品
CN109802949A (zh) * 2018-12-27 2019-05-24 杭州迅宜通信技术有限公司 一种超短延时语音传输装置、方法、电子设备及存储介质
CN110166890A (zh) * 2019-01-30 2019-08-23 腾讯科技(深圳)有限公司 音频的播放采集方法、设备及存储介质

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101827317A (zh) * 2009-09-07 2010-09-08 上海银贵网络科技服务有限公司 一种通过移动终端寻找目标对象的控制方法以及控制装置
CN102843467A (zh) * 2012-08-13 2012-12-26 北京小米科技有限责任公司 一种实时采集和播放音频信号的方法、移动终端及系统
CN103037086A (zh) * 2012-12-11 2013-04-10 腾讯科技(上海)有限公司 移动设备实现麦克风的方法、音频播放方法、设备及系统
CN103686051A (zh) * 2013-11-15 2014-03-26 青岛歌尔声学科技有限公司 一种便携式通信装置、一种智能手表和一种通信系统
CN105791966A (zh) * 2016-03-11 2016-07-20 四川长虹电器股份有限公司 Android智能电视切换麦克风音频设备的方法
WO2018094836A1 (zh) * 2016-11-23 2018-05-31 广州视睿电子科技有限公司 交互设备、数据传输方法和系统
CN109802949A (zh) * 2018-12-27 2019-05-24 杭州迅宜通信技术有限公司 一种超短延时语音传输装置、方法、电子设备及存储介质
CN109743712A (zh) * 2018-12-29 2019-05-10 Oppo广东移动通信有限公司 数据传输控制方法及相关产品
CN110166890A (zh) * 2019-01-30 2019-08-23 腾讯科技(深圳)有限公司 音频的播放采集方法、设备及存储介质

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113965715A (zh) * 2021-09-13 2022-01-21 荣耀终端有限公司 一种设备协同控制方法和装置
CN114360232A (zh) * 2021-12-10 2022-04-15 南昌航天广信科技有限责任公司 采集器开启控制方法、系统、计算机及可读存储介质
CN114360232B (zh) * 2021-12-10 2022-11-11 南昌航天广信科技有限责任公司 采集器开启控制方法、系统、计算机及可读存储介质
CN114553623A (zh) * 2022-02-08 2022-05-27 珠海格力电器股份有限公司 电器设备的语音交互控制方法及语音交互系统

Similar Documents

Publication Publication Date Title
CN111200746B (zh) 显示设备处于待机状态时被唤醒的方法及显示设备
WO2020244266A1 (zh) 智能电视的远程控制方法、移动终端和智能电视
CN112073762B (zh) 基于多系统显示设备的信息获取方法及多系统显示设备
CN111427643A (zh) 一种显示设备以及基于显示设备的操作指南的显示方法
CN111479145A (zh) 显示设备及电视节目的推送方法
CN113225838A (zh) 一种麦克风的控制方法、音频接收设备及音频采集设备
CN111414216A (zh) 一种显示设备以及基于显示设备的操作指南的显示方法
CN111327934A (zh) 通信终端、控制设备及视频多设备同步播放方法
CN111901653B (zh) 一种显示设备外接音响的配置方法及显示设备
CN111954059A (zh) 屏保的展示方法及显示设备
CN112004126A (zh) 搜索结果显示方法及显示设备
CN111654753B (zh) 一种应用程序启动方法及显示设备
CN111654729B (zh) 一种账号登录状态的更新方法及显示设备
CN112004125A (zh) 媒体资源播放方法及显示设备
CN111897641A (zh) 微服务监控调度方法及显示设备
CN113115092A (zh) 一种显示设备及详情页展示方法
CN111182339A (zh) 一种播放媒体项目的方法及显示设备
CN113784186B (zh) 终端设备、服务器和通信控制方法
CN112004127B (zh) 一种信号状态显示方法及显示设备
CN113115093B (zh) 一种显示设备及详情页展示方法
CN115052272B (zh) 一种数据传输方法及相关设备
CN111756413B (zh) 显示设备上蓝牙模式的调整方法及显示设备
CN113438296B (zh) 一种升级包下载方法及显示设备
CN111901686B (zh) 保持用户界面堆栈正常展示的方法及显示设备
CN112040317B (zh) 事件响应方法及显示设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20210806