CN104104769A - 多个音频设备中音频的动态选路 - Google Patents

多个音频设备中音频的动态选路 Download PDF

Info

Publication number
CN104104769A
CN104104769A CN201410273278.6A CN201410273278A CN104104769A CN 104104769 A CN104104769 A CN 104104769A CN 201410273278 A CN201410273278 A CN 201410273278A CN 104104769 A CN104104769 A CN 104104769A
Authority
CN
China
Prior art keywords
equipment
data
user
audio
routing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410273278.6A
Other languages
English (en)
Other versions
CN104104769B (zh
Inventor
克里斯多佛·麦克其洛普
乔治·赫里斯特
霍曼·鲍戈黑
贾斯廷·爱德华·桑塔马利亚
克里斯·赖安
尼汀·加纳特拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN104104769A publication Critical patent/CN104104769A/zh
Application granted granted Critical
Publication of CN104104769B publication Critical patent/CN104104769B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • G06F9/44505Configuring for program initiating, e.g. using registry, configuration files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F13/00Interconnection of, or transfer of information or other signals between, memories, input/output devices or central processing units
    • G06F13/10Program control for peripheral devices
    • G06F13/102Program control for peripheral devices where the programme performs an interfacing function, e.g. device driver
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6058Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
    • H04M1/6066Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone including a wireless connection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/02Details of telephonic subscriber devices including a Bluetooth interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/06Details of telephonic subscriber devices including a wireless LAN interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Software Systems (AREA)
  • Telephone Function (AREA)

Abstract

响应于接收到外部音频设备被连接到电子设备的通知,由用户接口应用在电子设备上显示选路屏幕(1705)。选路屏幕显示内部音频设备(1721,1723)和外部音频设备(1719)的表征。在一个方面,这些表征是按钮。在另一个方面,这些表征是列表中的条目。如果用户选择了这些表征中的一个,则用户接口应用使音频信号被选路到由该选择所表示的音频设备。还可以显示应用控制屏幕,应用控制屏幕具有对象组,这些对象表示用于音频应用的功能。响应于外部音频设备的状态改变,应用控制屏幕上的对象之一被更改。当外部设备被连接时,用户可以选择该对象来访问选路屏幕。

Description

多个音频设备中音频的动态选路
本申请是申请日为2008年5月14日、申请号为200880022347.9、发明名称为“多个音频设备中音频的动态选路”的中国专利申请的分案申请。
技术领域
本发明大体上涉及在电子设备中对音频信号进行选路(route),尤其涉及在多个音频设备中对音频信号进行选路。
背景技术
电子设备(例如计算机系统、或无线蜂窝电话、或其他数据处理系统),可能经常与外围设备一起使用。外围设备(例如有线的或无线的耳麦(headset)、或者有线的或无线的键盘、或者有线的或无线的光标控制设备)耦合到电子设备(可以称为主机系统)。外围设备通常给电子设备提供输入和/或输出能力。
外围设备也可以构造成与仅一个特定的电子设备或主机一同工作。例如,无线耳麦外围设备可以与指定的无线蜂窝电话配对,从而与该指定的无线蜂窝电话而不是该无线耳麦的射频范围内其他的无线蜂窝电话通信。这使得即使该无线耳麦由其射频范围内的其他无线蜂窝电话包围,用户也能够将该无线耳麦与其指定的无线蜂窝电话一起操作。这样,在此情况下的无线耳麦包括某种智能或数据,所述智能或数据使之能够与指定的主机系统选择性地工作,但是无线耳麦中没有进一步的处理能力或感知能力。蓝牙的配对或伴侣关系(partnership)是在外围设备与主机之间创建的关系的一种示例。它由用户创建,从而以安全方式交换信息。在两个设备之间创建蓝牙伴侣关系包括在两个设备上输入相同的个人身份号码(PIN)或密码(passkey);创建这种伴侣关系是一次处理。在创建伴侣关系之后,设备能够识别这种伴侣关系并在不再次输入PIN的情况下交换信息。
在只具有两个内部音频设备(例如听筒和扬声器)的电子设备中对音频信号进行选路需要在这两个设备之间进行切换。但是,如果该电子设备还连接到音频外围设备,则音频信号的选路会混乱。因此,电子设备应当确定如何在多个音频设备之间对音频信号进行选路。通常,对选路进行选择被留给用户。但是,现有技术的电子设备不能在音频应用被初始化的时候允许用户容易地选择音频设备。此外,现有技术的电子设备也不能在执行音频应用的同时允许用户容易地选择新连接的音频外围设备。
发明内容
响应于接收到外部音频设备被连接到电子设备(例如通信设备)的通知,由用户接口应用在电子设备上显示选路屏幕。选路屏幕显示内部音频设备和外部音频设备的表征(representation)。在一个方面,这些表征是按钮。在另一个方面,这些表征是列表中的条目(entry)。如果用户选择了这些表征中的一个,则用户接口应用使得音频信号被选路到由该选择所表示的音频设备。还可以显示应用控制屏幕,应用控制屏幕具有对象(例如按钮)的组,这些对象表示用于音频应用的功能。响应于外部音频设备的状态改变,应用控制屏幕上的对象之一被更改。当外部设备被连接时,用户可以选择该对象来访问选路屏幕。在一个方面,如果在执行音频应用的过程中连接了外部设备,则呈现选路屏幕。在另一个方面,如果由音频设备使音频应用初始化,则呈现应用控制屏幕。
附图说明
本发明将以示例方式进行说明,而不限于附图中的图示,在附图中相同的标号表示相似的要素。
图1示出了一种系统的示例,该系统包括外围设备的示例以及与该外围设备一同使用的数据处理系统的示例。
图2A是本申请中记载的发明的方法的一种实施例的流程图。
图2B是本申请中记载的发明的方法的一种具体实施例的流程图。
图3A以表格的形式示出了来自无线耳麦上的接近度传感器的传感器数据以及来自无线移动蜂窝电话上的接近度传感器的传感器数据如何一起用来对电话和耳麦二者上的音频配置设定进行更改的示例。
图3B示出了用户在具有外围设备(例如无线耳麦)、数据处理系统(例如无线移动蜂窝电话)和汽车适配器的机动车辆中的视图;在该图中,用户正佩戴着该外围设备。
图3C示出了图3B的用户在机动车辆中的另一视图;在该图中,用户没有佩戴外围设备,也没有握持数据处理系统。
图4A是根据本申请中记载的发明的一种实施例的便携式数据处理系统的立体图。
图4B是根据本申请中记载的发明的一种实施例的便携式数据处理系统的立体图。
图4C是根据本申请中记载的发明的一种实施例处于第一构造(例如处于打开的构造)的便携式数据处理系统的立体图。
图4D是根据本申请中记载的发明的一种实施例处于第二构造(例如处于关闭的构造)的便携式数据处理系统的立体图。
图5是能够实施本发明的实施例的一种数据处理系统的框图。
图6是根据本申请中记载的发明的一种实施例的接近度传感器的示意性侧视图。
图7是根据本申请中记载的发明的一种实施例的另一种接近度传感器的示意性侧视图。
图8是示出来自传感器的数据如何被用作对于处理(例如人工智能处理(或其他逻辑处理))的输入的框图,所述处理接着产生动作(例如改变设备的一项或多项配置设定)。
图9A、图9B和图9C是根据本申请中记载的发明的实施例的用户活动的视图。
图10以方框图的形式示出了可以与本申请中记载的一项或多项实施例一起使用的数据处理系统的示例。
图11以方框图的形式示出了具有两个外围设备并具有对接坞或其他连接器的数据处理系统,所述对接坞或连接器将这些外围设备连接到该数据处理系统。
图12是图示了本申请中记载的发明的一种方法的实施例的流程图。
图13是图示了本申请中记载的发明的一种方法的实施例的流程图。
图14是示出了本申请中记载的发明的一种方法的实施例的流程图。
图15是示出另一种方法的流程图。
图16示出了可以用来对电话(例如无线蜂窝电话)的配置设定或偏好设定进行设定的用户接口的示例。
图17A和图17B图示了数据处理系统上显示的应用控制屏幕的实施例。
图17C和图17D图示了响应于图17B的应用控制屏幕上的用户输入而显示的选路菜单屏幕的实施例。
图18图示了用户接口应用的实施例,该应用呈现图17A-图17D的屏幕并与其他部件相互作用以在多个外围设备之间对音频进行选路。
图19、图20和图21是图示了由图18所示用户接口应用的实施例所执行的方法的流程图。
具体实施方式
将参照下文讨论的细节对本发明的各种实施例和各个方面进行说明,附图将图示各种实施例。下面的说明和附图是本发明的示例,而不应认为对本发明的限制。所描述的许多具体细节提供了对本发明各种实施例的完整理解。但是在某些情况下,为了对本发明的实施例提供简要的讨论,将不对公知的或已有的细节进行说明。
下文的具体说明中的某些部分是以算法的形式呈现的,这些算法包括对于计算机存储器内储存的数据进行的操作。算法通常是由造成所需结果的操作构成的自洽序列。这些操作通常需要或包括对于物理量的物理操纵。通常(但并非必需),这些量采取电信号或磁信号的形式,所述电信号或磁信号能够被储存、传输、组合、比较和以其他方式进行操纵。已经发现,有时候(主要是出于日常使用的原因)将这些信号称为位(bit)、值、元素、符号、字符、项、数字等是方便的。
但是应当铭记,这些术语以及类似的术语是与合适的物理量相关联的,并仅仅是对这些量所用的便利符号。应当明白,除非下面的讨论明显以其他方式作出了具体说明,否则在整个说明书中,使用诸如“处理”、“运算”、“计算”、“确定”或“显示”等术语进行的讨论可以指数据处理系统或类似的电子设备的动作和处理,所述动作和处理对系统的寄存器和存储器中以物理(电子)量的形式表现的数据进行操纵并将其转换成系统的存储器或寄存器(或其他的这种信息存储、传输或显示设备)内类似地以物理量的形式表示的其他数据。
本发明可以涉及装置,该装置用于执行本申请中所述的操作中的一项或多项。该装置可以为了所需的目的而专门构造,也可以包括通用计算机,所述通用计算机由该计算机中储存的计算机程序选择性地激活或重构。这样的计算机程序可以包括用于执行本申请中所述操作的指令,并可以储存在机器(例如计算机)可读的存储介质上,所述存储介质例如但不限于:任何类型的盘(包括软盘、光盘、CD-ROM和磁光盘)、只读存储器(ROM)、随机存取存储器(RAM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、磁卡或光卡、或者适于储存电子指令的任何类型的介质,它们各自耦合到总线。
计算机可读(机器可读)的介质包括用于以能够由机器(例如计算机)读取的形式储存或传输信息的任何机构。例如,机器可读介质包括只读存储器(ROM);随机存取存储器(RAM);磁盘存储介质;光存储介质;闪存设备;电的、光的、声的或其他形式的传播信号(例如载波、红外信号、数字信号等)等。
图1示出了系统200的一种示例,该系统200包括外围设备201(也可以称为附件)和数据处理系统203,数据处理系统203被指定为与外围设备201交换数据。在图1的示例中,外围设备201可以是无线耳麦,它经过无线个人局域网(WPAN)接口(例如蓝牙接口)而与数据处理系统203通信,而数据处理系统203可以是无线移动蜂窝电话、个人数字助理(PDA)或通用计算机系统,所述个人数字助理也包括无线移动蜂窝电话或通用计算机系统,所述通用计算机系统例如手持计算机,所述手持计算机包括无线移动蜂窝电话。可以理解,尽管图1示出了特定类型的外围设备和特定类型的数据处理系统,但在替换实施例中也可以使用其他类型的外围设备和数据处理系统。例如,在替换实施例中,外围设备可以是有线耳麦、或者有线的或无线的键盘、或者有线的或无线的光标控制设备、或者其他有线的或无线的输入或输出设备;在其他情况下,外围设备可以看作与PDA、蜂窝电话或通用计算机系统类似的数据处理设备。在替换实施例中,数据处理系统可以是通用计算机系统、或者专用计算机系统、或者娱乐系统、或者PDA或另一设备内的嵌入式设备、或者媒体播放器等。外围设备201包括外围设备处理器205,外围设备处理器205耦合到一个或多个传感器211、音频换能器213(可以是扬声器)、麦克风209以及无线收发器207。外围设备处理器205通过对无线收发器207进行操作以及响应于信号对麦克风209和音频换能器213进行操作,来控制外围设备201的操作,所述无线收发器207例如可以是蓝牙或WiFi收发器或者用来创建无线局域网(WLAN)或WPAN的其他类型收发器,所述信号来自无线收发器和/或传感器和/或外围设备处理器205上执行的处理。外围设备处理器205可以耦合到音频编码解码器(codec,未示出)或其他设备,以驱动或接收分别来自音频换能器和麦克风的输入。在外围设备201是用于电话的无线耳麦的情况下,无线收发器207与电话建立无线通信链路,所述电话用作主机数据处理系统并发送要由扬声器(音频换能器213)播放的音频数据和接收来自麦克风209的音频数据。这样,无线耳麦以与有线耳麦相同的方式作用于电话。传感器211可以是外围设备201上的一个或多个传感器,其被指定来检测或测量用户活动或设备内容(context)。传感器211例如可以包括接近度(proximity)传感器和/或环境光传感器和/或加速度计和/或本申请中所述的其他传感器。(多个)传感器211向外围设备处理器205提供传感器数据(例如接近度数据),外围设备处理器205可以处理该数据或者如下文所述那样将该传感器数据发送到数据处理系统进行处理。
数据处理系统203包括处理系统221(例如一个或多个微处理器构成的组),该处理系统221耦合到无线移动电话收发器223;无线移动电话收发器223可以是无线移动蜂窝电话收发器,其至少在某种程度上受到处理系统221的控制。在一种实施例中,数据处理系统203可以是包括无线蜂窝电话的手持PDA或手持通用计算机。在此情况下,无线蜂窝电话所需的RF电路可以由无线移动电话收发器223来提供。数据处理系统203还包括一个或多个传感器227、存储器229、I/O设备231以及至少一个附加的无线收发器225,它们各自耦合到处理系统221。处理系统221可以包括一个或多个处理器构成的组,这些处理器通过一个或多个总线而耦合到数据处理系统203的其他部分。一个或多个传感器227可以位于数据处理系统203上,并可以被指定来检测或测量用户活动或设备内容,如下文所述。一个或多个传感器227例如可以包括接近度传感器和/或环境光传感器和/或加速度计和/或本申请中所述的其他传感器。来自这一个或多个传感器227的传感器数据被供给处理系统221,如本申请中所述,处理系统221可以处理该数据或者可以将该传感器数据发送到外围设备进行处理,或者,外围设备和处理系统221两者都可以处理传感器数据。I/O(输入/输出)设备231可以包括下列中的一项或多项:(a)键盘;(b)触摸输入面板;(c)光标控制设备(例如游戏杆或跟踪板);(d)扬声器;(e)麦克风;(f)按钮(例如用于蜂窝电话的“发送”和“结束”或其他按钮);(g)显示设备;和(h)其他已知的输入/输出设备。在一种实施例中,触摸输入面板可以与显示设备集成在一起,从而在显示设备的该表面上既提供输入能力又提供输出能力;这在下文中有进一步描述。这些I/O设备使用户能够向处理系统221输入指令、命令或数据,以使该系统能够以用户所需的方式进行操作。存储器229可以是DRAM、闪存或其他类型存储器(例如包括磁性硬盘)的任意组合,存储器229可以通过一个或多个存储器控制器而耦合到处理系统;存储器229可以储存计算机程序指令,包括计算机操作系统(OS)和用户应用程序(例如网页浏览器应用、email应用、日历应用、地址簿应用、以及其他可能的应用)。存储器229还可以储存用户数据,例如地址和/或联系人信息、日历信息(例如事件和任务)、书签/收藏(例如URL)和其他用户数据(例如字处理文档、数据表、演讲稿等)。处理系统221可以从存储器229取回(retrieve)和储存计算机程序指令和数据,以使用户能够对数据处理系统203进行操作。此外,存储器229还可以储存音乐和/或其他媒体,用于在数据处理系统203上回放,这使得用户能够显示和选择音乐和/或其他媒体,以在扬声器(例如听筒)或外围设备(例如外围设备201)的无线耳麦上回放。无线收发器225可以包括向其他设备提供无线连接能力的一个或多个无线收发器,所述其他设备例如外围设备201或无线网络(例如WiFi网络或其他无线局域网(WLAN)或无线个人局域网(WPAN)等)。(多个)无线收发器225耦合到处理系统221,向数据处理系统203提供数据。在一种实施例中,(多个)无线收发器225包括蓝牙兼容的收发器以及WiFi兼容的收发器(liru IEEE802.11a/g兼容的收发器),蓝牙兼容的收发器用于将数据处理系统203以无线方式耦合到外围设备201并可选地耦合到其他外围设备(例如无线键盘),WiFi兼容的收发器用于将系统203以无线方式耦合到无线网络和/或其他设备。外围设备201和数据处理系统203可以用已知的技术(例如本申请中所描述的技术)配对在一起,以创建蓝牙伴侣关系。或者,配对也可以包括其他技术,所述技术将一个设备向另一设备注册,以在外围设备201与数据处理系统203之间提供安全的、经认证的通信通道。
在一种实施例中,外围设备201和数据处理系统203可以具有一起工作的能力,以根据传感器数据确定用户的意向或动作、或者系统的内容,所述传感器数据来自外围设备201或数据处理系统203(或这两者)上的至少一个传感器。例如,一组传感器(例如外围设备上的接近度传感器和环境光传感器)可以提供表示外围设备并未接近用户的数据,而主机上的另一组传感器可以提供表示主机在用户的耳朵附近的数据;在此情况下,外围设备和主机可以交换数据(例如来自传感器的数据)和指令,所述指令响应于传感器数据而自动地使外围设备和/或主机的配置改变。在这种示例中,如果外围设备是无线耳麦、而主机是无线蜂窝电话,则外围设备可以将其传感器数据向主机发送,所述主机对该传感器数据以及来自主机的传感器数据进行处理,以确定用户正将无线蜂窝电话靠在用户的耳朵附近而耳麦不在用户附近,因此主机将自动地许用(enable)主机的扬声器和麦克风,并将向耳麦传送指令以使之禁用(disable)耳麦的扬声器和麦克风。
图2A示出了根据本发明一种实施例的方法的一般示例。在操作250中,从至少一个传感器获得与数据处理系统的状态有关的数据,这至少一个传感器可以在主机处,也可以在外围设备处,还可以既在主机处也在外围设备处。在操作252中,从外围设备处或主机处的至少一个传感器或从这两者处的传感器获得与外围设备的状态有关的数据。可以理解,至少在某些实施例中,方法可以略去操作250或者可以略去操作252,或者可以以与图2A所示顺序不同的顺序来执行这些操作。在操作254中,处理系统根据来自传感器中至少一者的数据,来确定是否改变外围设备或主机(或这两者)的配置。如其他地方所述,主机和外围设备可以交换传感器数据来执行这种确定,主机或外围设备中的一者或两者可以执行操作254的一部分或者全部。然后,在操作256中,外围设备或主机(或这两者)执行配置的改变。配置的这种改变可以包括禁用主机或外围设备中任一者或两者的某种功能,也可以包括许用外围设备或主机(或这两者)的某种功能。例如,配置的改变可以包括开启或关断音频系统(例如扬声器和麦克风),或者开启或关断显示器的背光或用于显示器的其他光源等。可以理解,图2A中所指的主机可以是数据处理系统203,而图2A中所指的外围设备可以是图1所示的外围设备201。
图2B图示了根据本发明一种实施例的具体方法。操作261包括获取来自无线耳麦上的传感器的传感器数据,该无线耳麦是无线电话(例如无线蜂窝电话)的外围设备。图2B中所指的无线耳麦可以是外围设备201,而图2B中所指的无线电话可以是数据处理系统203。无线耳麦可以包括一个或多个传感器,例如接近度传感器、环境光传感器和声音传感器,这些传感器用来获得传感器数据,传感器数据可以被用来确定耳麦是否靠近用户的耳朵。在操作263中,无线耳麦将从其传感器获得的传感器数据向无线电话发送,所述无线电话处理该传感器数据以及来自该无线电话上的传感器的传感器数据。无线电话上的传感器可以包括一个或多个传感器,例如接近度传感器、环境光传感器和加速度计,它们都在无线电话上。无线耳麦可以通过无线个人局域网(WPAN)发送该传感器数据。在图1所示的示例中,无线收发器207可以向数据处理系统发送传感器数据,其由无线收发器225接收。在一种实施例中,无线收发器207可以是蓝牙兼容的收发器,而无线收发器225也可以是蓝牙兼容的收发器。来自无线耳麦的传感器数据和来自无线电话的传感器数据一起受到处理,以确定用户对无线耳麦和电话的使用状态。响应于对该传感器数据进行处理,在操作265中,无线电话自动地根据这两组传感器数据选择用于其自身的配置(例如将无线电话上的扬声器和麦克风切断并将无线耳麦上的扬声器和麦克风接通)并向无线耳麦发送指令以选择配置,例如将耳麦上的扬声器和麦克风接通。对配置的这种选择是响应于对来自无线耳麦和无线电话这二者上的传感器的传感器数据的处理而发生的。可以理解,图2B所示的方法由许多种替换实施方式。例如,来自无线电话的传感器数据可以被发送到无线耳麦,无线耳麦处理来自无线电话的传感器数据以及来自无线耳麦的传感器数据,确定如何对电话和无线耳麦这二者设定配置,并向无线电话发送指令以使无线电话改变其配置。
图3A示出了来自耳麦外围设备的传感器数据和来自数据处理系统(是电话)的传感器数据如何可以给电话和耳麦这二者造成某些动作。标有“耳麦接近度”的那列示出了从耳麦上的接近度传感器获得的接近度传感器数据的特征。标有“电话接近度”的那列示出了来自电话上的接近度传感器的接近度传感器数据的三种不同情形。标有“许用音频”的那列示出了响应于传感器数据的三种不同情形而由耳麦和电话二者自动地采取的动作。情形275示出了这样的情况:耳麦离用户较远,而电话离用户较近。这例如可以发生在耳麦被置于桌上而电话在用户手中的时候。在此情形下,组合的传感器数据(可选地,与其他传感器数据一起)受到分析以确定应当禁用耳麦上的音频系统并应当许用电话上的音频系统,如图3A的情形275所示。在情形277的情况下,来自耳麦上的接近度传感器的传感器数据表明耳麦离用户较近,而来自电话上的接近度传感器的接近度传感器数据表明电话离用户较远。在此情况下,系统(包括耳麦和电话)许用耳麦上的音频系统而禁用电话上的音频系统。在情形279中,来自耳麦和电话上的接近度传感器的传感器数据表明耳麦和电话二者都离用户较近,在此情况下,默认动作(该动作可以自动地发生)是许用耳麦上的音频而禁用电话上的音频。情形279可以表示这样的场合:用户正握着电话,并且用户正在耳朵上戴着耳麦。
可以理解,在一种实施例中,如果两个设备都检测到该用户,则它们试图决定哪一者应当具有优先权。在执行该操作时可以利用其他传感器。例如,根据来自两个设备的声音强度,声音传感器可以发现用户正在无线耳麦中讲话而并非正在电话中讲话。也可以用加速度计来提供针对两个设备中一者或二者的运动和方向数据,以帮助决定如何响应于用户动作的具体情况来配置外围设备和数据处理系统这二者。例如,如果两个设备都在桌上,一者被拿起而另一者未被拿起,则通过利用表明哪一者未被拿起的、来自加速度计的数据,系统可以使未被拿起的设备被禁用。例如,如果电话被留在桌上而无线耳麦被拿起,则电话的音频系统被禁用,而无线耳麦的音频系统被允许用于电话呼叫或其他通信。在某些实施例中,外围设备和数据处理系统的这两个音频系统都可以被许用,直到外围设备和数据处理系统能够决定禁用两个设备中哪一者为止。
图3B和图3C示出了数据处理系统(例如无线蜂窝电话)和外围设备(例如与该数据处理系统一起工作的无线耳麦)如何还可以与另一数据处理系统一起工作,所述另一数据处理系统例如固定到机动车(例如汽车)的适配器设备。在图3B和图3C所示的示例中,用户303坐在轿车301中,轿车301包括电话车载适配器307,该适配器被设计成与数据处理系统309协同工作,数据处理系统309可以是无线蜂窝电话。图1所示的数据处理系统203可以是该数据处理系统309。在图3B的情况下,外围设备305被示出为正戴在用户的耳朵上,而在图3C的情况下,无线耳麦305被示出为处于与用户303相邻的车座上。图1所示的外围设备201可以是该外围设备305(可以是无线耳麦)。电话车载适配器307与数据处理系统309以无线方式通信,使得电话呼入的音频可以被选路经过车上的扬声器和车中的麦克风,而不是无线耳麦上或无线电话309上的麦克风或扬声器。电话车载适配器307还可以使用户能够经过车上的扬声器来回放来自数据处理系统309的媒体。例如,如果数据处理系统309包括用于播放歌曲的媒体播放器,则电话车载适配器307可以配置成通过将来自数据处理系统309的音频向电话车载适配器307(该适配器接着驱动车上的扬声器)传送,而使来自歌曲的音频经过车上的扬声器回放。用户可以对电话车载适配器307进行设定,使其能够响应于传感器数据而自动地配置成将音频选路到车上的扬声器,所述传感器数据来自无线耳麦305和无线电话309中一者或两者上的传感器。在图3B的情况下,无线耳麦305上的接近度传感器或其他传感器表明用户303正戴着无线耳麦。在此情况下,来自无线耳麦的传感器数据可以在无线耳麦中或在无线电话309中受到处理,该处理的结果表明无线耳麦的音频系统应当被许用,同时禁用无线电话309的音频系统并禁止将音频选路到车上的扬声器。在图3C的情况下,无线耳麦305和无线电话309中一者或两者上的扬声器确定两个设备都不在用户附近,并作为响应而使音频被选路到电话车载适配器307(该适配器接着驱动车上的扬声器),还许用汽车的麦克风,使得响应于无线耳麦305和无线电话309中一者或两者上的传感器对于两个设备都不在用户附近进行的确定,而自动地使用户能够使用汽车的音频系统。
本发明的至少某些实施例在外围设备或数据处理系统中的一者或两者上包括一个或多个传感器,以监视用户动作或设备内容。本发明的至少某些实施例还可以包括根据用户动作或外围设备和/或数据处理系统的内容而自动地改变外围设备和/或数据处理系统的状态。这种自动改变例如可以包括根据某些预定的用户动作,自动地改变音频设定、或者激活或解除激活(deactivate)便携式设备的显示设备的背光、或者将便携式设备的显示设备设定到特定状态。
本发明的至少某些实施例可以包括数字媒体播放器(例如便携式音乐和/或视频媒体播放器),该播放器可以包括用来呈现媒体的媒体处理系统和用来存储媒体的存储设备,还可以包括射频(RF)收发器(例如用于蜂窝电话的RF收发器),该射频收发器与天线系统和媒体处理系统耦合。在某些实施例中,远程存储设备上存储的媒体可以通过该RF收发器发送到该媒体播放器。媒体例如可以是音乐或其他音频、静止图片或运动图片中的一项或多项。
便携式媒体播放器可以包括媒体选择设备,例如来自Cupertino,CA的Apple Computer,Inc.的或iPod上的点拨轮(click wheel)设备、触摸屏输入设备、按钮设备、可动指点输入设备或其他输入设备。媒体选择设备可以用来对储存在存储设备和/或远程存储设备上的媒体进行选择。至少在一些实施例中,便携式媒体播放器可以包括显示设备,该显示设备耦合到媒体处理系统以显示媒体的标题或其他标识,所述媒体是通过输入设备选择并正在被呈现的,所述呈现通过扬声器或(多个)耳麦进行,或在该显示设备上进行,或者既在显示设备上进行又在扬声器或(多个)耳麦上进行。公开的美国专利申请No.2003/0095096和2004/0224638中描述了便携式媒体播放器的示例,这两个文献通过引用方式结合于此。
这里所描述的本发明的实施例可以是其他类型数据处理系统的一部分,所述数据处理系统例如娱乐系统或个人数字助理(PDA)、或通用计算机系统、或专用计算机系统、或其他设备内的嵌入设备、或不含媒体播放器的蜂窝电话、或将这些设备的各个方面或功能相组合的设备(例如将媒体播放器(例如)与PDA、娱乐系统和蜂窝电话组合在一个便携式设备中)。
图4B图示了根据本发明一种实施例的数据处理系统;图4B可以被实现,作为图1所示数据处理系统203的实施例,并可以以与图2A所示并结合图2A所述的方式与外围设备一起工作。图4B示出了一种无线设备,其处于具有“糖块”风格的电话构造。在图4B中,无线设备30可以包括外壳32、显示设备34、输入设备36(可以是字母数字键盘)、扬声器38、麦克风40和天线42。无线设备30还可以包括接近度传感器44和加速度计46。可以理解,图4B的实施例可以使用更多或更少的传感器,并可以具有与图4B所示形状因素(form factor)不同的形状因素。
所示显示设备34处于外壳32的上部,而所示输入设备36处于外壳32的下部。所示天线42在外壳32的上部从外壳32延伸。扬声器38还被图示为在外壳32的上部并处于显示设备34上方。所示麦克风40处于外壳32的下部并处于输入设备36的下方。可以理解,扬声器38和麦克风40可以位于外壳的任意位置处,但是通常分别与用户的耳朵和嘴巴相应地定位。所示接近度传感器44处于扬声器38处或其附近,并至少部分地在外壳32之内。所示加速度计46处于外壳32的下部并在外壳32之内。可以理解,在替换实施例中,上述这些特征的具体位置可以不同。
显示设备34例如可以是不具备接收输入的能力的液晶显示器(LCD),也可以是包含LCD的触摸输入屏。输入设备36例如可以包括按钮、开关、拨号盘、滑动件、按键或键盘、导航板、触摸半、触摸屏等。
可以将任何公知的扬声器、麦克风和天线分别用作扬声器38、麦克风40和天线42。
接近度传感器44可以对物体相对于无线设备30的位置(例如离无线设备30的距离)、方向、速度等进行检测。至少在一些实施例中,物体相对于无线设备的位置可以被表示为距离。接近度传感器可以产生位置数据或运动数据,或者既产生位置数据又产生运动数据,这些数据可以用来确定物体相对于便携式设备30和/或接近度传感器44的位置。图6示出了接近度传感器的一种示例。
另外,处理设备(未示出)耦合到(多个)接近度传感器44。处理设备可以用于根据由接近度传感器44提供的位置和/或运动数据,来确定物体相对于便携式设备30或接近度传感器44的距离或相对于这二者的距离。接近度传感器可以连续地或周期性地监视物体位置。接近度传感器还可以能够确定其正在检测的物体的类型。
与接近度传感器有关的更多信息可以在题为“PROXIMITYDETECTOR IN HANDHELD DEVICE”的美国专利申请No.11/241,839、题为“PROXIMITY DETECTOR IN HANDHELD DEVICE”的美国专利申请No.11/240,788、2005年6月23日提交的题为“METHODS ANDAPPARATUS FOR REMOTELY DETECTING PRESENCE”的美国专利申请No.11/165,958及2003年6月24日授权的题为“PROXIMITY/TOUCHDETECTOR AND CALIBRATION CIRCUIT”的美国专利No.6,583,676中找到,这些文献的全部内容通过引用方式结合于此。
根据一种实施例,加速度计46能够检测无线设备的运动)包括加速或减速)。加速度计46可以产生对于多个维度的运动数据,这些数据可以用来确定无线设备的运动方向。例如,当加速度计46检测到便携式设备发生运动时,加速度计46可以产生X、Y、Z轴的加速度信息。在一种实施例中加速度计46可以像美国专利No.6,520,013中描述的那样实现,该文献的全部内容通过引用方式结合于此。或者,加速度计46也可以是来自Kionix的KGF01加速度计,或来自Analog Devices的ADXL311加速度计,或者本领域所知的其他加速度计。
另外,处理设备(未示出)耦合到(多个)加速度计46。处理设备可以用来计算无线设备30的运动方向(也称为运动矢量)。可以根据一个或多个预定的公式,基于由加速度计46提供的运动数据(例如在X、Y、Z方向的运动),来确定运动矢量。处理设备可以与加速度计46集成,或者与便携式设备的其他部件(例如微处理器的芯片组)集成在一起。
加速度计46可以连续地或周期性地监视便携式设备的运动。结果,可以根据由安装到便携式设备的加速度计所提供的运动数据,确定便携式设备在运动之前和运动之后的方位。
与加速度计有关的更多信息可以在2004年11月12日提交并共同在审的美国专利申请No.10/986,730中找到,该文献的全部内容通过引用方式结合于此。
从接近度传感器44和加速度计46获取的数据可以被组合在一起或单独地使用,以收集与用户的活动有关的信息。来自接近度传感器44、加速度计46或这二者的数据例如可以用来将显示器背光激活/解除激活、发起命令、作出选择、对显示器中的卷动或其他运动进行控制、对输入设备的设定进行控制、或者对设备的一项或多项设定进行其他改变。
图4A示出了根据本发明一种实施例的便携式设备50。便携式设备50可以包括外壳52、显示/输入设备54、扬声器56、麦克风48以及可选的天线60(该天线可以在外壳的外部可见,也可以隐藏在外壳内)。便携式设备50还可以包括接近度传感器62和加速度计64,以及可选的其他传感器(例如环境光传感器)。便携式设备50可以是蜂窝电话、或者PDA与蜂窝电话集成在一起的设备、或者媒体播放器与蜂窝电话集成在一起的设备、或者既是娱乐系统(例如用来玩游戏)又是蜂窝电话的设备,或者,便携式设备50可以是本申请中所描述的其他类型的设备。在一种具体实施例中,便携式设备50可以包括蜂窝电话和媒体播放器,以及通用计算机,它们都容纳在外壳52内。便携式设备50可以被实现为图1所示的数据处理系统203的实施例,并可以通过图2A所示并结合图2A所述的方式与外围设备一起工作。便携式设备50可以具有这样的形状因素:其小到足以适合处于普通成年人的手中,并轻到足以由成年人握在一只手中。可以理解,术语“便携式”表示设备能够容易地由成年用户的手(一只或两只)握持;例如,膝上型计算机和iPod是便携式设备。
在一种实施例中,显示/输入设备54除了是显示器(例如LCD)外,还可以包括多点触摸输入屏。在一种实施例中,多点触摸屏是电容感知介质,其构造成对触摸面板的平面中有区别的位置处同时发生的多个触摸(例如与显示器同时接触或接近于接触的用户面部或多个手指在显示器上造成的斑块(blob))或接近于触摸(例如显示器上的斑块)进行检测,并对于该多个触摸中的每一者产生有区别的信号,这些信号表征触摸在触摸面板的平面上所处的位置。与多点输入触摸屏有关的更多信息可以在2004年5月6日提交并共同在审的美国专利申请No.10/840,862(参见公开的美国专利申请20060097991)中找到,该文献的全部内容通过引用方式结合于此。多点输入触摸屏也可以称为多点触摸输入面板。
处理设备(未示出)可以耦合到显示/输入设备54。处理设备可以用来计算触摸面板上的触摸。显示/输入设备54可以使用检测到的触摸(例如用户的面部造成的一个或多个斑块)来例如识别某些对象的位置,并识别与显示/输入设备54接触(或接近于接触)的对象的类型。
如本申请中所述,由接近度传感器62和显示/输入设备54获取的数据可以被合并以收集与用户的活动有关的信息。来自接近度传感器62和显示/输入设备54的数据可以用来改变便携式设备50的一项或多项设定,例如对显示/输入设备54的照明设定进行改变。
在一种实施例中,如同4A所示,显示/输入设备54占据了便携式设备50的外壳52的一个表面(例如顶面)的大部分。在一种实施例中,显示/输入设备54消耗了便携式设备50的几乎整个正面。在另一种实施例中,显示/输入设备54消耗了便携式设备50的外壳52的正面的例如75%。在可替换实施例中,便携式设备50可以包括不具备输入能力的显示器,而该显示器仍然占据便携式设备50的一个表面的大部分。在此情况下,便携式设备50可以包括其他类型的输入设备,例如从便携式设备50的一部分滑出或转出的QWERTY键盘或其他类型键盘。
图4C和图4D图示了根据本发明一种实施例的便携式设备70。便携式设备70可以实现为图1所示数据处理系统203的一种实施例,帮你嘎可以以图2A所示并结合图2A所述的方式与外围设备一起工作。便携式设备70可以是包括铰链87的蜂窝电话,该铰链将显示器外壳89耦合到键盘外壳91。铰链87使得用户能够开启和关闭蜂窝电话,使之能够处于图4C和图4D所示两种不同构造中的至少一者。在一种具体实施例中,铰链87以可旋转的方式将显示器外壳耦合到键盘外壳。尤其是,用户可以开启蜂窝电话,使之处于图4C所示的开启构造;并可以关闭蜂窝电话,使之处于图4D所示的关闭构造。键盘外壳91可以包括键盘95和麦克风97,键盘从用户接收输入(例如电话号码输入或其他字母数字输入),麦克风从用户接收语音输入。显示器外壳89可以在其内表面上包括显示器93(例如LCD)、扬声器98和接近度传感器84;显示器外壳89在其外表面上可以包括扬声器96、温度传感器94、显示器88(例如另一个LCD)、环境光传感器92和接近度传感器84A。因此,在这种实施例中,显示器外壳89可以在其内表面上包括第一接近度传感器并在其外表面上包括第二接近度传感器。第一接近度传感器可以用来对用户的头部或耳朵处于离第一接近度传感器某个距离内进行检测,并使得显示器93和88的照明设定自动地响应于这种检测而改变(例如将对于两个显示器的照明关断,或以其他方式设定在耗能较少的状态)。来自第二接近度传感器的数据可以与来自环境光传感器92的数据和来自温度传感器94的数据一起被用来对蜂窝电话已被置于用户的口袋中进行检测。
在至少一些实施例中,便携式设备70可以包含这样的部件:其提供无线通信设备(例如蜂窝电话、媒体播放器、娱乐系统、PDA或本申请中所描述的其他类型的设备)的一种或多种功能。在一种实施例的实现形式中,便携式设备70可以是集成了媒体播放器的蜂窝电话,该媒体播放器播放MP3文件(例如MP3音乐文件)。
图4A、图4B、图4C和图4D所示设备中的每一者可以是无线通信设备(例如无线蜂窝电话),并可以包括多个部件,这些部件提供了用于无线通信的能力。图5示出了无线设备100的实施例,该设备具备无线通信的能力。无线设备100可以被包括在图4A、图4B、图4C和图4D中所示设备的任何一者中,但是图4A、图4B、图4C和图4D这些设备的替换实施例也可以包括比无线设备100更多或更少的部件。此外,无线设备100的全部或一些部分可以被实施为数据处理系统203的一部分,无线设备100可以以本申请中结合图2A所述的方式与外围设备一起工作。
无线设备100可以包括天线系统101。无线设备100还可以包括数字和/或模拟射频(RF)收发器102,该收发器耦合到天线系统101,通过天线系统101发送和/或接收语音、数字数据和/或媒体信号。
无线设备100还可以包括数字处理系统103,来控制数字RF收发器并管理语音、数字数据和/或媒体信号。数字处理系统103可以是通用处理设备,例如微处理器或控制器。数字处理系统103还可以是专用处理设备,例如ASIC(专用集成电路)、FPGA(现场可编程门阵列)或DSP(数字信号处理器)。数字处理系统103还可以包括本领域所知的其他设备来与无线设备100的其他部件进行接口。例如,数字处理系统103可以包括模拟-数字转换器和数字-模拟转换器,来与无线设备100的其他部件进行接口。数字处理系统103可以包括媒体处理系统109,该媒体处理系统还可以包括通用或专用处理设备来管理媒体(例如音频数据的文件)。
无线设备100还可以包括存储设备104,其耦合到数字处理系统,以存储用于无线设备100的操作程序和/或数据。存储设备104例如可以是任何类型的固态或磁性存储器设备。
无线设备100还可以包括一个或多个输入设备105,其耦合到数字处理系统103以接收用户输入(例如电话号码、姓名、地址、媒体选择等)。输入设备105例如可以是下列一项或多项:键盘、触摸板、触摸屏、与显示设备结合的指点设备、或类似的输入设备。
无线设备100还可以包括至少一个显示设备106,其耦合到数字处理系统103以显示信息,所述信息例如消息、电话呼叫信息、联系人信息、图片、电影和/或通过输入设备105选择的媒体的标题或其他标识。显示设备106例如可以是LCD显示设备。在一种实施例中,显示设备106和输入设备105可以一起集成在同一设备中(例如,多点触摸输入面板之类的触摸屏LCD,其与显示设备(例如LCD显示设备)集成)。公开的美国申请No.20060097991示出了触摸输入面板和显示器集成在一起的示例。显示设备106可以包括背光106a,以在某些环境下对显示设备106进行照明。可以理解,无线设备100可以包括多个显示器。
无线设备100还可以包括电池107以向系统的那些部件(包括数字RF收发器102、数字处理系统103、存储设备104、输入设备105、麦克风105A、音频换能器108、媒体处理系统109、(多个)传感器110、显示设备106)供应操作电能。电池107例如可以是可充电的或不可充电的锂离子电池或镍氢电池。
无线设备100还可以包括音频换能器108以及至少一个麦克风105A,音频换能器可以包括一个或多个扬声器。
无线设备100还可以包括与数字处理系统103耦合的一个或多个传感器110。传感器110例如可以包括下列一项或多项:接近度传感器、加速度计、触摸输入面板、环境光传感器、环境噪声传感器、温度传感器、陀螺仪、铰链检测器、位置确定设备、方位确定设备、运动传感器、声音传感器、射频电磁波传感器、其他类型传感器、以及它们的组合。这些传感器中的一者或多者也可以被包含在外围设备上,,该外围设备被构造成与数据处理系统一起工作(例如与之交换数据)。根据由(多个)传感器110和外围设备上的(多个)传感器获取的数据,可以由数据处理系统或外围设备(或这二者)自动地执行各种响应,例如将背光106a激活或解除激活、改变输入设备105的设定(例如,对于来自输入设备的任何输入数据,在进行处理或当作无意的用户输入而不进行处理之间进行切换)、其他的响应、以及它们的组合。
在一种实施例中,数字RF收发器102、数字处理系统103和/或存储设备104可以包括布置在印刷电路板(PCB)上的一个或多个集成电路。
图6和图7图示了根据本发明实施例的示例性接近度传感器。可以理解,在替换实施例中,可以使用与图6和图7所示接近度传感器不同的其他类型接近度传感器,例如电容传感器或类似声纳的传感器。在图6中,接近度传感器120包括发射器122、检测器124和窗口126。发射器122产生红外(IR)波段的光,并且例如可以是发光二极管(LED)。检测器124构造成对光强的改变进行检测,并且例如是光电三极管。窗口126可以由透明或半透明材料形成。在一种实施例中,窗口126是声学丝网(acoustic mesh),例如便携式设备的麦克风或扬声器中通常所见的丝网。在其他实施例中,窗口126可以是MicroPerf、卷绕成网膜的IR透明线、或冷光镜(cold mirror)。
在操作期间,在物体存在于窗口126上方时,来自发射器122的光照射到物体128并散射。来自发射器的光可以以具有已知频率的方波脉冲的形式发射,从而使检测器124能够将环境光与由物体反射的、来自发射器122并返回到检测器124的光区分开,该物体例如用户的头部或耳朵,或用户口袋中的材料。散射光的至少一部分朝向检测器124反射。检测器124检测到光强的增大,这被处理系统(图6中未示出)解释为表示检测器124的近距离范围内存在物体。如果不存在物体或者物体在距离检测器124某个距离外,则不足的或更少量的发射光朝向检测器124反射回去,这被处理系统(图6中未示出)解释为表示不存在物体或者距离较远。在每一种情形下,接近度传感器对反射光的强度进行测量,该强度与使光反射的物体跟检测器124之间的距离有关。
在一种实施例中,发射器122和检测器124布置在便携式设备的外壳内,例如上文参照图4A-图4D所描述的那样。
在图7中,接近度传感器的发射器122和检测器124相对于彼此向内倾斜,以改善对于反射光的检测,但是图7的接近度检测器在其他方面以与图6的接近度检测器类似的方式工作。
可以理解,本发明的实施例所用传感器中的至少一些可以确定或提供表征模拟值的数据。换言之,该数据表征的值可以是能够连续地或基本上连续地变化的一组可能的值中的任一项,而不是从一个值到下一个值发生了量子化的、离散的跳跃的离散值。此外,该数据表征的值可以不是预定的。例如,在由接近度传感器测量的距离的情况下,距离不是预定的,这与键盘上表征预定值的按键的值不同。例如,接近度传感器可以确定或提供表征距离的数据,该数据以模拟的方式连续地或接近连续地变化;在这样的接近度传感器的情况下,距离可以对应于反射光的强度,该反射光源于接近度传感器的发射器。温度传感器可以确定或提供表征温度的数据,温度是模拟值。光传感器(例如环境光传感器)可以确定或提供表征光强度的数据,光强度是模拟值。运动传感器(例如加速度计)可以确定或提供表征运动的测量值(例如速度或加速度或这二者)的数据。陀螺仪可以确定或提供表征方位的测量值(例如俯仰、偏航、横摇的量)的数据。声音传感器可以确定或提供表征声音强度的测量值的数据。对于其他类型传感器,由传感器所确定或提供的数据可以表征模拟值。
图8示出了根据本发明的至少一种实施例,来自所能使用的传感器的各种输入以及所能执行的动作的示意图。本申请中所述设备(包括图4A-图4D所示的设备、外围设备201以及数据处理系统203)中的任何一种可以根据图8所示人工智能的使用情况来工作。图8左侧的一种或多种输入被从设备的各个传感器接收,并输入到人工智能(AI)逻辑。图8右侧的一种或多种动作可以由AI逻辑自动地响应于这些输入的任何组合来实施。在本实施例的一种实现方式中,在大体上刚由一个或多个传感器感知数据后实现这些动作。
图8的示例性输入例如可以包括:接近度数据、接近度数据和斑块检测数据(例如来自多点触摸输入屏)、接近度数据和加速度计数据、加速度计数据和斑块检测数据、接近度数据和温度数据、接近度数据和环境光数据、以及各种其他可能的组合方式。
图8的示例性动作例如可以包括:许用外围设备和数据处理系统中一者的音频系统,同时禁用另一者的音频系统;关断便携式设备的显示器的背光;抑制用户在用户接口处进行输入的能力(例如将输入设备锁定);改变电话的模式;等等。可以理解,也可以由AI逻辑来实现上述这些动作的组合形式。例如,AI逻辑可以既关断显示器的背光,又抑制用户在用户接口处进行输入的能力。
图8的AI逻辑执行AI(人工智能)处理。在一些实施例中,AI处理可以在没有具体、有意的用户输入的情况下,或在用户输入没有与之相关的预定数据(例如按键输入)的情况下执行。图8的AI逻辑所执行的人工智能处理可以使用各种传统的AI逻辑处理,包括数据的模式识别和/或解释。例如,AI逻辑可以从一个或多个传感器接收数据并将该数据与一个或多个阈值进行比较,并基于这些比较来确定如何解释该数据。在一种实施例中,阈值可以表征距离,该距离被与从接近度传感器的光强度测量值所得出的值进行比较。表征比该阈值更大的距离的光强度测量值表示物体(该物体反射了发射器的光)不在附近,而表征比该阈值更小的距离的光强度测量值表示该物体在附近。此外,输入数据可以受到至少两种解释(例如,来自接近度传感器的数据表示用户的头部在传感器附近,所以关断背光;或者,来自接近度传感器的数据表示用户的头部不在附近,所以将背光留给显示定时器来控制),AI逻辑试图从这至少两种解释进行选择,以挑出预计用户活动的解释。响应于该解释(例如选择一种解释),AI逻辑使得如图8所示那样执行动作,其中,该动作可以更改设备的一项或多项设定。在至少一些实施例中,AI逻辑可以执行这样的AI处理:该AI处理对来自一个或多个传感器的数据进行解释(这种解释需要AI处理在至少两种可能的解释之间进行选择),并且既根据对于传感器数据的解释又根据设备的当前状态(例如,用户当前是否正在通过设备中的电话进行通信)来选择动作(例如更改设备的设定)。
在一些实施例中,AI处理可以对传感器数据执行传统的模式识别方法。例如,设备与用户的耳朵之间距离的改变速率可以具有某种模式(例如随着用户将设备移近其耳朵而表现出减速),距离的改变速率的这种模式可以由模式匹配算法来检测。全文中所用的短语“人工智能”表示从一个或多个传感器可得的数据能够对于用户对设备的使用模式得出结论(无论是明确的还是隐含的)。该结论可以在设备中表示,也可以不在设备中表示出来(例如“用户正在通过电话讲话”),但它可以被映射到对于设备的下述具体动作或设定:如果用户正在以该方式使用该设备,则该动作或设定是合适的。例如,电话可以被预编程,使得无论其何时检测到(1)正在对麦克风发出语音,(2)电话被连接到网络,以及(3)接近度传感器被激活,则屏幕背光将被变暗(dim)。这种预编程可以包括简单的逻辑(例如简单的组合(combinatorial)逻辑),但也可以处在本申请所用的人工智能的范围内。尽管本发明可以使用学习、统计分析、迭代以及其他复杂的AI方面,但它们并不是所称的基本人工智能所必需的。同样,词语“分析”并不暗示复杂的统计分析或其他分析,而是可以包括仅观察单一阈值或数据。
至少在一些实施例中,AI处理可以由耦合到一个或多个传感器的处理器或处理系统(例如数字处理系统103)来执行,所述传感器提供的数据形成对于AI处理的输入。
至少在一些实施例中,根据本申请中所述方法中任一种而工作的设备除了一个或多个传感器之外还可以具有至少一个输入设备(例如键盘、键区或触摸输入面板),所述输入设备被设计来接收有意的用户输入(例如指定具体的用户条目),所述传感器与所述至少一个输入设备区别开并且分开,并且并非被设计来接收有意的用户输入。实际上,用户可能甚至不会意识到设备上存在这样的一个或多个传感器。
图9A-图9C图示了根据由便携式设备的一个或多个传感器所获取的输入数据所能确定的示例性用户活动。示例性用户活动包括但不限于:用户直接观看便携式设备(图9A)、用户将便携式设备握持在其耳朵处或附近(图9B)、用户将便携式设备放在口袋或钱包中(图9C)等。
2004年7月30日提交的题为“GESTURES FOR TOUCH SENSITIVEINPUT DEVICES”的美国专利申请No.10/903,964以及2005年1月18日提交的题为“MODE-BASED GRAPHICAL USER INTERFACES FORTOUCH SENSITIVE INPUT DEVICES”的美国专利申请No.11/038,590公开了与根据本发明的实施例能够被监视的用户活动和/或手势(gesture)有关的更多信息,它们的全部内容通过引用方式结合于此。
现在将说明对于数据处理系统和/或数据处理系统的外围设备,用于自动地响应某些用户活动的方法。该方法包括但不限于:收集传感器数据,该数据意图表示对于便携式设备的用户活动;执行机器可执行代码,以响应于对该用户活动的检测而执行一个或多个预定的自动动作,该方法可以由图4A-图4D所示设备、外围设备201以及数据处理系统203中任一者来执行,并可以使用(也可以不使用)图8所示的人工智能处理。从一个或多个传感器收集传感器数据;该传感器数据提供了与用户活动或设备内容有关的信息。例如,接近度传感器可以表示设备是否在用户的耳朵附近;温度传感器、环境光传感器(或有区别的环境光传感器)和接近度传感器可以一起表示设备在用户的口袋中;陀螺仪和接近度传感器可以一起表示用户正在观看设备。对来自一个或多个传感器的数据进行分析;该分析可以由设备内的一个或多个处理器(包括传感器中一者或多者中的处理器)来执行。该分析试图根据传感器数据来预计用户活动。可以理解,在某些情况下,根据该分析进行的预计可能是错的。例如,如果在用户握持该设备的时候用户将手指放在接近度传感器上方,这可能使该分析错误地得出设备处于用户头部或耳朵附近的结论。在分析之后,可以至少部分地根据对于来自一个或多个传感器的数据的分析而调节一项或多项设备设定。这种调节可以包括改变设备的照明设定或本申请中所述的其他动作。
2006年10月24日提交的题为“AUTOMATED RESPONSE TO ANDSENSING OF USER ACTIVITY IN PORTABLE DEVICES”的美国专利申请No.11/586,862中提供了用于感知数据并自动地响应所感知的数据的方法的其他示例,该申请通过引用方式结合于此。可以理解,可以对于所示的方法进行一些变化,包括对于所感知的数据、对数据的分析、以及对所感知的数据的(多个)响应进行的变化。
可以使用设备的模式来确定是否调节设备的设定以及如何进行调节。设备的模式可以包括多种模式或状况中的任一种,例如免提电话模式或非免提电话模式、电池供电模式或非电池供电模式、呼叫等待模式或非呼叫等待模式、警告模式等,在警告模式下设备可以发出声音(例如告警音)。与设备的模式相管地分析与用户活动有关的数据(例如来自一个或多个传感器(例如接近度传感器和/或触摸输入面板)的数据,该数据能够检测面部造成的斑块),该分析试图确定是否调节设备的设定。根据所感知的用户活动以及设备模式,可以调节一个或多个设备设定。例如,当接近度数据(以及根据情况可选的其他数据(例如来自运动传感器和环境光传感器的数据))表示用户已经将该设备(在此情况下可以是电话)放在用户的耳朵旁边时,设备可以自动地从免提电话模式切换到非免提电话模式。在这种示例中,在没有来自用户的任何有意输入(该输入表示应当发生切换)的情况下,设备已经自动地从免提电话模式切换到非免提电话模式。另一种方法包括根据设备是否在用户的耳朵附近来调节警告或报警的音量。在这种示例中,如果与用户活动有关的数据表示设备与用户的耳朵相邻、并且如果设备的模式被设定为使得警告或报警将使设备发出声音,则设备将自动地把警告或报警的音量水平从第一水平改变到第二水平,第二水平不如第一水平的声音大。
全文中使用的短语“接近度传感器”表示能够对离传感器某个距离以内是否存在物体进行检测的传感器,例如电容的、温度的、电感的、红外的或其他各种传感器。这种检测的主要对象可以是用户的头部(或者可能观看显示屏幕的的任何其他物体)。
本发明的任何实施例可以包括一个或多个用户接口控件,控件使得用户能够推翻(override)一个或多个传感器造成的结果。例如,在接近度传感器使显示器进入了耗能较少的状态之后,空间(例如按钮)可以由用户按压,以使显示器返回全功率的情况。在另一种示例中,用户接口控件可以是对用户与设备的交互(例如摇动设备)进行检测的传感器(或传感器的组),例如加速度计,该用户交互已经被设立以造成对一个或多个传感器所引起的结果的推翻。
本发明的一些实施例可以采用一个或多个提供与光有关的数据的光传感器,该数据被分析以确定是否调节设备(例如无线设备100)的一项或多项设定。可以由环境光传感器提供环境光水平数据,该传感器表示该传感器周围的光强度的水平。可以从设备上不同位置处布置的两个或更多个环境光传感器获得环境光差分数据。例如,一个环境光传感器可以位于设备的一侧,而另一个环境光传感器可以位于设备的另一侧。可以通过对设备不同两侧或不同的两个表面上的这两个环境光传感器的数据进行比较,来确定光强度水平的差异。对于光传感器可以有多种使用方式。光传感器可以与接近度传感器使用,以确定设备何时被置于口袋中,从而使设备被设定在仅振动模式或既响铃又振动的模式。在另一种示例中,响应于光传感器确定的环境光非常弱的情况,并视情况可选地响应于用户已经将设备设定成当环境光很弱时以可见的方式亮起以显示来电呼叫的情况,设备可以自动地在天暗时被置于“光亮铃声”模式,使得并非由设备发出可听到的铃声,而是由显示器以可见方式闪光(例如通过重复地开启和关断背光)以表示来电呼叫。使用光传感器的另一种示例包括将其用作警告,表示暗房间(或环境)已经变得更亮(例如太阳已经升起,或者通向暗房间的门被打开使光进入房间)。光传感器还可以被用来使设备自动地在感知弱环境光水平时用作光源(例如实际作为闪光灯)。
图10示出了根据本发明实施例的设备的另一种示例。该设备可以包括处理器(例如微处理器402)以及存储器404,它们通过总线406彼此耦合。设备400可以视情况可选地包括耦合到微处理器402的缓存器408。该设备还可以可选地包括显示控制器和显示设备410,该显示控制器和显示设备通过总线406耦合到其他部件。一个或多个输入/输出控制器412也耦合到总线406,以提供用于输入/输出设备414的接口,并提供用于一个或多个传感器416的接口,所述传感器用于感知用户活动。总线406可以包括通过各种桥、控制器和/或适配器而彼此连接的一个或多个总线,如本领域所知。输入/输出设备414可以包括键盘或键区,或者光标控制设备(例如触摸输入面板)。此外,输入/输出设备414还可以包括至少一个网络接口,该接口用于有线网络或无线网络(例如RF收发器,例如WiFi或WPAN RF收发器)。传感器416可以是本申请中描述的传感器中任一者,例如接近度传感器或环境光传感器。在设备400的至少一些实施方式中,微处理器402可以从一个或多个传感器416接收数据,并可以以本申请中所述的方式执行该数据的分析。例如,可以通过人工智能处理或以本申请中所述的其他方式对该数据进行分析。作为该分析的结果,微处理器402然后可以自动地造成对设备的一项或多项设备进行调节。
图11-图16涉及本申请中所述发明的另一个方面。在这个方面,数据处理系统203可以将其自身看作相对于另一数据处理系统(例如数据处理系统451)的外围设备,所述另一数据处理系统至少在一些实施例中可以是通用计算机系统(例如图10所示的系统)。图11所示的系统450包括数据处理系统451,数据处理系统451包括网络接口和外围接口,以及存储设备。至少在一些实施例中,数据处理系统451可以是通用计算机系统,其具有键盘、光标控制设备、显示器以及网络接口,网络接口将该数据处理系统耦合到网络459,网络459可以是因特网或其他网络,例如局域网或电话网络,或有线TV系统网络。网络接口可以通过无线连接或有线连接方式连接到网络,并且可以存在多个网络接口,这些接口用于不同网络或者用于连接到同一网络或多个网络的不同方法。数据处理系统通常包括非易失性海量存储设备,该设备可以存储用户程序和操作系统,以及用户数据,用户数据包括地址信息或联系人信息、日历信息、以及URL(例如用于浏览因特网的书签或收藏)。数据处理系统451的外围设备接口用来将数据处理系统451耦合到用于外围设备的对接坞(dock)或其他连接器。该对接坞或其他连接器可以通过外围设备接口以有线或无线的方式连接到数据处理系统451。对接坞或连接器453被设计成连接到一个或多个外围设备,例如第一外围设备457(可以是无线耳麦)和第二外围设备455(可以是无线蜂窝电话,其包括PDA功能)。在一种实施例中,数据处理系统203可以是第二外围设备455,而外围设备201可以是第一外围设备457。对接坞可以以机械方式单独地或同时地夹持这两个外围设备,也可以电连接到这两个外围设备以向这些外围设备提供电能、对这些外围设备的电池进行充电、以及在这些外围设备与数据处理系统451之间交换数据。第二外围设备455可以包括用于用户信息(例如联系人、日历和URL)的存储设备,该用户信息可以被与数据处理系统451上类似类型的用户的数据进行同步。用户可以将一个或全部两个外围设备置于对接坞或连接器453上,以使得某些动作如本申请中所述那样发生,也可以将一个或全部两个外围设备除去,从而也造成某些动作如本申请中所述那样自动发生。对接坞和/或外围设备可以包括机械式传感器或电传感器,以对外围设备被置于对接坞或连接器上以及外围设备从对接坞或连接器除去的情况进行检测。
图12示出了对系统450进行操作的方法的示例。在该示例中,第一外围设备457不是必需的,不过它也可以存在并附接到对接坞453。在操作471中,数据处理系统(例如数据处理系统451)接收通信。该通信可以是通过网络(例如网络459,可以是因特网)的、经IP的语音(VOIP)电话呼叫。或者,该通信也可以是通过网络459的即时消息或email。通过数据处理系统的网络接口(例如数据处理系统451的网络接口)接收该通信。在操作473(该操作是可选的)中,数据处理系统造成产生警告。例如,数据处理系统可以造成产生电话的铃声。在操作475中,系统在该通信的过程中确定无线电话外围设备(例如无线蜂窝电话,可以是第二外围设备455)已被激活还是已从对接坞断开。可以通过对第二外围设备455已被从对接坞除去进行检测而发生这种确定,或者也可以通过第二外围设备上的传感器(例如接近度传感器和加速度计以及其他传感器)来确定。在产生响铃的过程中或者在电话呼叫已开始并且铃声已停止之后,系统可以对用户已拿起第二外围设备455进行检测。在一种实施例中,操作477所示的选路操作可以在通信过程中的任何时间(包括已停止产生铃声之后)被调用,或者只有在产生铃声的过程中才能被调用。在操作477中,如果用户在通信过程中已经激活或拿起电话,则来自该通信的数据(例如电话呼叫的音频数据)被选路以经过无线电话外围设备(例如第二外围设备)。否则,如果用户在通信过程中并未拿起电话,则数据被选路经过数据处理系统的用户接口系统(可以是扬声器和麦克风,它们作为数据处理系统451的输入/输出装置的一部分)。可以理解,在一些实施例中,在通信过程中当第二外围设备455被放回到对接坞上时,系统可以使对数据的选路反转。可以理解,操作477中数据的选路可以通过第二外围设备455和数据处理系统451这二者上的WiFi或WPAN接口来执行。这会使第二外围设备455仍然能够将其无线蜂窝收发器用于经过无线蜂窝网络的电话呼叫。
图13示出了图11的系统450可以采用的另一种方法。在该方法中,假定第一外围设备457和第二外围设备455都耦合或连接到对接坞或连接器453。在操作490中,第二外围设备(可以是具有PDA功能的蜂窝电话)在被对接或以其他方式连接到数据处理系统(例如数据处理系统451)的时候接收通信,例如蜂窝电话呼叫。在操作492中,在正接收通信的时候,确定用户是否已经从对接坞或连接器(例如对接坞或连接器453)除去第一外围设备(例如第一外围设备457)。然后,在操作494中,响应于确定了用户已从对接坞或连接器除去了第一外围设备(可以是无线耳麦),通信的数据被选路以经过第一外围设备。这通常会使第二外围设备455的扬声器和麦克风被禁用,从而仅经过无线耳麦(即第一外围设备457)提供电话呼叫的音频数据。可以理解,在一些实施例中,当第一外围设备回到对接坞时,对数据的选路可以反转。
图14示出了对图11所示系统450进行操作的另一种方法。在此情况下,假定在该方法开始之前,用户已经在通过设备(例如无线蜂窝电话,它可以是第二外围设备455)进行通信。在操作501中,在用户正通过设备进行通信的同时,确定用户已经将设备放在数据处理系统的对接坞或其他连接器上。例如,在用户正处于通过第二外围设备进行通信的过程中时,操作501可以确定第二外围设备455已被置于对接坞上或连接到连接器453。该通信可以是使用第二外围设备455(作为无线蜂窝电话)通过无线蜂窝网络进行的电话呼叫。响应于确定用户已将设备放在对接坞上,操作503使该通信保持待机(on hold),或者将该通信选路经过数据处理系统(例如数据处理系统451)的用户接口。可以理解,在操作503之后,可以发生反转操作,在反转操作中,该通信的选路被返回到蜂窝电话。例如,在操作503之后,用户可以从对接坞除去蜂窝电话,并造成该通信被选路回到第二外围设备455,而不再使用数据处理系统(例如数据处理系统451)的扬声器和麦克风。
图15示出了对系统450进行操作的方法的另一种示例。在操作515中,电话呼叫由数据处理系统(例如数据处理系统451)接收,产生警告(例如电话呼入铃声)。在一种实施例中,数据处理系统451可以包括计算机程序以及必要的硬件,以在数据处理系统上提供经IP的语音(VOIP)功能,该功能能够通过数据处理系统接收并进行经IP的语音的电话呼叫。在操作517中,在电话呼叫过程中(例如在正产生警告的时候,或者,在某些实施例中在已经产生警告之后的电话呼叫过程中),系统确定用户是否已经从数据处理系统的对接坞或其他连接器除去了第一外围设备457(可以是无线耳麦)。如果系统确定用户已经从对接坞除去了无线耳麦,则在操作519中,在电话呼叫过程中响应于用户已从对接坞除去了无线耳麦,来自电话呼叫的数据被选路经过无线耳麦,而不是数据处理系统451的扬声器和麦克风。
可以理解,至少在一些实施例中,数据处理系统(例如数据处理系统451)的用户接口可以使用户能够设定用于电话(例如可以与数据处理系统451一起使用的第二外围设备455)的偏好或配置参数。图16示出了数据处理系统451的显示设备上可以显示的用户接口的示例。该用户接口包括窗口525,该窗口包括几个可能的偏好即,能够由用户来设定或不设定的选项。如果用户选择了复选框531,那么,如果用户在将电话置于对接坞上之前已经在使用电话,图14所示的操作503会在电话被置于对接坞上时将电话呼叫待机。如果用户选择了复选框533,则复选框531自动地变成未被选择,并且操作503使得来自电话呼叫的音频被选路经过数据处理系统451的音频系统。复选框535使得在VOIP电话呼叫过程中,响应于从对接坞拿起第二外围设备,用户能够使系统450对数据处理系统451接收的或发起的VOIP电话呼叫的音频进行选路,以经过第二外围设备455(可以是以图1中的数据处理系统203的形式示出的无线蜂窝电话)的音频系统(例如扬声器和麦克风)。选择复选框535许用这项功能(也示出于图12中);图16示出复选框535已被选择。如果用户选择了复选框537(图16中被示为未选择),则在电话正响铃的同时,当用户从对接坞拿起电话时,系统450将把VOIP电话呼叫转到耳麦。如果选择了复选框539,则响应于将电话置于对接坞上,复选框539使得用户能够将电话(例如第二外围设备455)上的用户数据(例如联系人、日历数据,URL(例如书签)等)自动地与数据处理系统(例如系统451)上用户的类似数据进行同步;如果复选框539未被选择,则这种同步可以通过用户选择同步命令来人工地执行。
如本申请中所述,图1的数据处理系统可以是通信设备,该通信设备将电话能力与其他音频功能(例如音乐播放器)相结合,并与各种类型的外部音频设备(外围设备,例如无线音频耳麦)相互作用。其他音频设备可以对于通信设备而言是内部的(例如听筒和扬声器)。在连接了外部音频设备时,通信设备会确定将音频选路到哪个设备。通信设备还向用户显示一些屏幕,使得用户能够在发起或执行音频应用时选择音频设备来使用。这样的音频应用可以处理来自内部源的音频信号(例如音乐文件或内部存储的语音邮件)或来自外部源的音频信号(例如电话呼叫或者外部存储的语音邮件)。可以理解,本申请中所述的用户接口也可以在具有音频能力的任何电子设备上实现。
图17A和图17B图示了在相应的应用正在通信设备上执行时,向用户显示的应用控制屏幕1701和1703的替换实施例。应用控制屏幕1701包含以按钮的形式显示的一组对象,它们表征用于音频应用的功能,其中之一是音频选路按钮1709。如图所示,音频选路按钮1709包括图标1711和文本1713。如图所示,图标1717是扬声器,而文本1713是词语“扬声器”。应用控制屏幕1701上的其他按钮可以包括图标。按钮1709是选路转换(toggle)按钮,当用户按压了转换按钮1709时,音频选路按钮被突出显示(highlight),以表示音频正被选路到扬声器。当用户再次按压转换按钮1709时,突出显示被移去,表示音频正被选路到另一内部音频设备(例如听筒)。当外部音频设备附接到通信设备时,呈现应用控制屏幕1703。如图所示,选路按钮已改变到选路菜单按钮1715,并包括以蓝牙图标的形式表示的附加图标1715。用于按钮1715的文本1713也改变到“音频源”。当用户按压选路菜单按钮1715时,音频选路屏幕出现,例如图17C和图17D所示的屏幕1705和1707。在一种实施例中,应用控制屏幕是动画式的,使之看起来“翻转”,作为应用控制屏幕的背面而显示音频选路屏幕。在一种实施例中,像2004年10月4日授权给本申请的受让人的、题为“DOUBLE-SIDED,REVERSIBLE ELECTRONIC PAPER”的美国专利5,351,995中所描述的那样实现翻转动画,该文献通过引用方式结合于此。
在图17C的实施例中,选路屏幕1705具有三个按钮:蓝牙耳麦按钮1719、听筒按钮1721、免提电话按钮1723。当前所选择的设备由图标1725表示,在图17中被图示为扬声器。可以容易地想到用于在视觉上表示哪个电话当前被激活的其他机制。在一种替换实施例中,当以按钮形式显示的可用设备太多时,如图17D所示地呈现包含设备列表的选路屏幕1707,其中当前所选择的设备以某种方式在视觉上突出显示。如果列表太长而不能在选路屏幕1707中显示,则选路屏幕1707可被卷动以示出更多的设备。如下文所述,选路屏幕是动态的,并随着外部设备与该通信设备的连接和断开而改变。在一种实施例中,选路屏幕1705和1707被显示某个时间长度(例如五秒钟),并且在经过了该时间长度时会翻转到应用控制屏幕。如果在经过该时间长度之前,用户从列表选择了音频设备,则选路屏幕在翻转到应用控制屏幕之前,将在屏幕上另外保持一段时间长度(例如另外的五秒钟)。
图18图示了用户接口(UI)应用1801,该应用呈现图17A-图17D的屏幕。在一种实施例中,UI应用1801被集成到音频应用(例如音乐播放器或语音邮件)中。在替换实施例中,UI应用1801是通用组件,能够由那些音频应用调用以显示这些平面。如图所示,UI应用1801耦合到音频选路模块1802,该模块将音频信号选路到所选的音频设备。音频设备管理器框架1803对与外部音频设备(例如汽车1809和耳麦1810)的连接进行管理。如图所示,音频设备管理器框架1803包含两种服务:蓝牙服务1805和附加协议服务1807。当外部音频设备被激活或解除激活时,音频设备管理器框架1803调用合适的服务以处理该设备,并向音频选路模块1802通知外部设备的状态改变。音频选路模块1802接着向UI应用1801发送通知,告知已经添加或放弃了外部设备连接。作为接收该通知的结果,UI应用呈现上述应用控制屏幕和音频选路屏幕。当用户选择了音频设备(通过按压图17A中的选路转换按钮、通过按压选路屏幕1705上的按钮之一、或者通过敲击1701所示列表中的设备之一)时,UI应用1801向音频选路模块1802通知当前选择了哪个设备,使得音频选路模块1802可以将音频选路到正确的设备。在一些情况下,UI应用还可以将设备的选择传达给音频设备管理器框架1803。
图19至图21图示了一些方法的示例性实施例,这些方法由UI应用1801执行,以如前所述呈现各个屏幕并发送各个通知。从图19开始,说明初始化音频应用的方法1900的一种实施例。当在设备上发起音频应用时,在方框1901,UI应用1801确定所连接的音频设备。这种确定可以基于由UI应用1801在接收到已经增加了或放弃了外部音频设备的通知时更新的列表。在替换实施例中,在方框1901,UI应用1801还确定哪些音频设备适合该音频应用。例如,如果音频应用是音乐,而外部音频设备之一是专题(monographic)耳麦,则UI应用1801可以排除该单声道耳麦。在另一种实施例中,所连接的设备包括当前未被连接、但可合理地确定能够被连接的音频设备。
如果不存在外部音频设备(方框1903),则在方框1905,该方法1900显示带有选路转换按钮的应用控制屏幕(例如屏幕1701),音频选路模块1802使用缺省的内部选路音频设备(除非用户如下所述按压了选路转换按钮)。如果存在外部设备,则在方框1903,该方法1900显示选路屏幕(例如选路屏幕1705和1707)。该方法对于用户输入等待某个时间长度(方框1909)。在一种实施例中,等待时间约为五秒钟。如果用户按压了选路屏幕上的按钮,则在方框1911,向音频选路模块发送关于用户选择音频设备的通知。如果在等待时间长度期间没有接收到用户输入,则在方框1913,方法1900显示带有选路菜单按钮的应用控制屏幕(例如屏幕1703)。另外如果用户没有按压选路屏幕上的按钮,则音频选路模块1802将音频选路到缺省的音频设备,例如最后使用过的设备或预先规定的内部设备。
在替换实施例中,如果由外部设备将应用初始化(例如在用户用耳麦答复呼入的电话时),则音频选路模块1802将音频选路到进行初始化的该外部设备,该方法1900从方框1901前进到方框1913,以显示带有选路菜单按钮的应用控制屏幕。
现在转向图20,对选路按钮按压方法2000进行说明。如果用户已经按压了选路按钮,当该按钮是选路转换按钮时(方框2001),在方框2003,方法2000向音频选路模块1802发送通知,以将选路切换到其他内部设备。否则,在方框2005,该方法向用户显示选路屏幕。在与上文结合图19的所述类似的那些方框中,方法2000在方框2007等待用户输入,如果用户选择了设备则在方框2009发送通知,并在方框2011显示带有选路菜单方框按钮的应用控制屏幕。
图21图示了在UI应用接收到当正在执行音频应用的同时添加或放弃了新的外部设备的通知的情况下,该UI应用所执行的方法2100。如果该通知是添加新的外部设备(方框2101),则在方框2103,方法2100如前所述确定所连接的那些音频设备。在以虚线示出的替换实施例中,如果方法2100确定不存在合适的外部音频设备(方框2105),则在方框2107,方法2011显示带有选路转换按钮的应用控制屏幕。如果不实施方框2103和2105所表示的可选处理,则方法2100前进到方框2109,显示选路屏幕。方法2100在方框2111等待用户输入,在方框2113发送关于用户选择的任何通知,并在方框2115显示带有选路菜单按钮的应用控制屏幕,如上文结合图19详述的那样。在再一种实施例中,音频选路模块1802自动地将音频切换到新连接的外部音频设备,方法2100从方框2103前进到方框2115以显示带有选路菜单按钮的应用控制屏幕。
现在回到方框2101,如果方法2100接收到关于外部音频设备要被放弃的通知,则方法2100确定该放弃通知是否针对的是当前所选的设备(方框2117)。如果是这样,则方法2100也接收关于音频要被选路到缺省设备的通知(方框2119)。在任意情况下,方法2100都确定是否有任何外部音频设备被连接(方框2121)。如果是这样,则在方框2115,方法2100显示带有选路菜单按钮的应用控制屏幕。如果所放弃的设备是最后被连接的外部设备,则在方框2123,方法2100显示带有选路转换按钮的应用控制屏幕。
前文的说明中已经参照具体示例性实施例对本发明进行了说明。显然,在不脱离由所附权利要求所阐述的广阔的精神和范围的情况下,可以对其进行各种更改。因此,说明书和附图应当认为是举例说明而不是限制性的。

Claims (10)

1.一种用于呈现显示音频设备的表征的选路菜单的计算机实施的方法,所述方法包括:
在电子设备上以对象组的形式呈现多个应用控制功能,这些对象表示对所述电子设备上执行的音频应用进行控制的功能;
响应于连接外部音频设备而更改所呈现的对象中的一者;以及
响应于接收到对更改过的对象的选择而呈现选路菜单,所述选路菜单显示内部音频设备和所述外部音频设备的表征。
2.根据权利要求1所述的计算机实施的方法,还包括:
接收对于所述选路菜单中的所述表征中的一者的选择;以及
使来自音频应用的音频信号被选路到由所述选择所表示的音频设备。
3.根据权利要求1所述的计算机实施的方法,还包括:
响应于连接所述外部音频设备,用所述选路菜单代替所述多个应用控制功能。
4.根据权利要求1所述的计算机实施的方法,还包括:
响应于将全部外部音频设备断开连接,更改所呈现的对象中的所述一者。
5.根据权利要求1所述的计算机实施的方法,还包括:
响应于音频设备对所述音频应用的初始化,在所述电子设备上呈现所述多个应用控制功能。
6.根据权利要求1所述的计算机实施的方法,其中,所述对象包括按钮。
7.根据权利要求1所述的计算机实施的方法,其中,所述表征包括按钮。
8.根据权利要求1所述的计算机实施的方法,还包括:
如果任何外部音频设备被连接到所述电子设备,则响应于所述音频应用的初始化而呈现所述选路菜单。
9.根据权利要求1所述的计算机实施的方法,其中,所述电子设备包括通信设备。
10.一种用于呈现显示音频设备的表征的选路菜单的系统,所述系统包括:
用于在电子设备与多个音频设备之间对音频信号进行选路的装置;和
用于对所述电子设备进行接口的装置,其中,该用于接口的装置在所述电子设备上以对象组的形式呈现多个应用控制功能,这些对象表示用于对所述电子设备上执行的音频应用进行控制的功能,该用于接口的装置还响应于连接外部音频设备而更改所呈现的对象中的一者,并响应于接收到对更改过的对象的选择而呈现选路菜单,所述选路菜单显示内部音频设备和所述外部音频设备的表征。
CN201410273278.6A 2007-06-28 2008-05-14 多个音频设备中音频的动态选路 Active CN104104769B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/770,676 US8068925B2 (en) 2007-06-28 2007-06-28 Dynamic routing of audio among multiple audio devices
US11/770,676 2007-06-28
CN200880022347.9A CN101720550B (zh) 2007-06-28 2008-05-14 多个音频设备中音频的动态选路

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN200880022347.9A Division CN101720550B (zh) 2007-06-28 2008-05-14 多个音频设备中音频的动态选路

Publications (2)

Publication Number Publication Date
CN104104769A true CN104104769A (zh) 2014-10-15
CN104104769B CN104104769B (zh) 2017-02-22

Family

ID=39705167

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201410273278.6A Active CN104104769B (zh) 2007-06-28 2008-05-14 多个音频设备中音频的动态选路
CN200880022347.9A Active CN101720550B (zh) 2007-06-28 2008-05-14 多个音频设备中音频的动态选路

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN200880022347.9A Active CN101720550B (zh) 2007-06-28 2008-05-14 多个音频设备中音频的动态选路

Country Status (6)

Country Link
US (4) US8068925B2 (zh)
EP (2) EP2827566A1 (zh)
KR (1) KR101116487B1 (zh)
CN (2) CN104104769B (zh)
HK (1) HK1206176A1 (zh)
WO (1) WO2009005563A1 (zh)

Cited By (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110537358A (zh) * 2016-02-22 2019-12-03 搜诺思公司 联网麦克风设备控制
CN111586894A (zh) * 2019-02-15 2020-08-25 普天信息技术有限公司 一种宽带集群终端的模式选择方法
US20210089070A1 (en) * 2012-07-02 2021-03-25 Ecolink Intelligent Technology, Inc. Method and apparatus for providing energy device and system status
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US11175888B2 (en) 2017-09-29 2021-11-16 Sonos, Inc. Media playback system with concurrent voice assistance
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11184704B2 (en) 2016-02-22 2021-11-23 Sonos, Inc. Music service selection
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
US11200889B2 (en) 2018-11-15 2021-12-14 Sonos, Inc. Dilated convolutions and gating for efficient keyword spotting
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11302326B2 (en) 2017-09-28 2022-04-12 Sonos, Inc. Tone interference cancellation
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11308961B2 (en) 2016-10-19 2022-04-19 Sonos, Inc. Arbitration-based voice recognition
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US11343614B2 (en) 2018-01-31 2022-05-24 Sonos, Inc. Device designation of playback and network microphone device arrangements
US11354092B2 (en) 2019-07-31 2022-06-07 Sonos, Inc. Noise classification for event detection
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11380322B2 (en) 2017-08-07 2022-07-05 Sonos, Inc. Wake-word detection suppression
US11432030B2 (en) 2018-09-14 2022-08-30 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US11451908B2 (en) 2017-12-10 2022-09-20 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11482978B2 (en) 2018-08-28 2022-10-25 Sonos, Inc. Audio notifications
US11501773B2 (en) 2019-06-12 2022-11-15 Sonos, Inc. Network microphone device with command keyword conditioning
US11501795B2 (en) 2018-09-29 2022-11-15 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
US11500611B2 (en) 2017-09-08 2022-11-15 Sonos, Inc. Dynamic computation of system response volume
US11516610B2 (en) 2016-09-30 2022-11-29 Sonos, Inc. Orientation-based playback device microphone selection
US11513763B2 (en) 2016-02-22 2022-11-29 Sonos, Inc. Audio response playback
US11514898B2 (en) 2016-02-22 2022-11-29 Sonos, Inc. Voice control of a media playback system
US11531520B2 (en) 2016-08-05 2022-12-20 Sonos, Inc. Playback device supporting concurrent voice assistants
US11538460B2 (en) 2018-12-13 2022-12-27 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US11538451B2 (en) 2017-09-28 2022-12-27 Sonos, Inc. Multi-channel acoustic echo cancellation
US11540047B2 (en) 2018-12-20 2022-12-27 Sonos, Inc. Optimization of network microphone devices using noise classification
US11545169B2 (en) 2016-06-09 2023-01-03 Sonos, Inc. Dynamic player selection for audio signal processing
US11551669B2 (en) 2019-07-31 2023-01-10 Sonos, Inc. Locally distributed keyword detection
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11556306B2 (en) 2016-02-22 2023-01-17 Sonos, Inc. Voice controlled media playback system
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11563842B2 (en) 2018-08-28 2023-01-24 Sonos, Inc. Do not disturb feature for audio notifications
US11641559B2 (en) 2016-09-27 2023-05-02 Sonos, Inc. Audio playback settings for voice interaction
US11646023B2 (en) 2019-02-08 2023-05-09 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US11646045B2 (en) 2017-09-27 2023-05-09 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US11664023B2 (en) 2016-07-15 2023-05-30 Sonos, Inc. Voice detection by multiple devices
US11676590B2 (en) 2017-12-11 2023-06-13 Sonos, Inc. Home graph
US11696074B2 (en) 2018-06-28 2023-07-04 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
US11710487B2 (en) 2019-07-31 2023-07-25 Sonos, Inc. Locally distributed keyword detection
US11715489B2 (en) 2018-05-18 2023-08-01 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US11726742B2 (en) 2016-02-22 2023-08-15 Sonos, Inc. Handling of loss of pairing between networked devices
US11727936B2 (en) 2018-09-25 2023-08-15 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11790937B2 (en) 2018-09-21 2023-10-17 Sonos, Inc. Voice detection optimization using sound metadata
US11790911B2 (en) 2018-09-28 2023-10-17 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US11798553B2 (en) 2019-05-03 2023-10-24 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
TWI823211B (zh) * 2021-12-18 2023-11-21 荷蘭商荷蘭移動驅動器公司 車載通訊系統及方法
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11979960B2 (en) 2016-07-15 2024-05-07 Sonos, Inc. Contextualization of voice inputs
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range

Families Citing this family (205)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130198867A1 (en) * 2011-12-09 2013-08-01 Z124 A Docking Station for Portable Devices Providing Authorized Power Transfer and Facility Access
US20090243966A1 (en) * 2006-07-25 2009-10-01 Nikon Corporation Outputting apparatus and image display apparatus
US7774015B2 (en) * 2006-12-11 2010-08-10 General Instrument Corporation Power control apparatus and method for supporting seamless mobility
US8111837B2 (en) * 2007-06-28 2012-02-07 Apple Inc. Data-driven media management within an electronic device
US9954996B2 (en) 2007-06-28 2018-04-24 Apple Inc. Portable electronic device with conversation management for incoming instant messages
US8171177B2 (en) 2007-06-28 2012-05-01 Apple Inc. Enhancements to data-driven media management within an electronic device
US8041438B2 (en) * 2007-06-28 2011-10-18 Apple Inc. Data-driven media management within an electronic device
US7861008B2 (en) 2007-06-28 2010-12-28 Apple Inc. Media management and routing within an electronic device
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
US20090215398A1 (en) * 2008-02-25 2009-08-27 Adler Mitchell D Methods and Systems for Establishing Communications Between Devices
US8036599B2 (en) * 2008-06-05 2011-10-11 Broadcom Corporation Method and system for a wireless headset with a clock
WO2010013944A2 (en) * 2008-07-29 2010-02-04 Lg Electronics Inc. A method and an apparatus for processing an audio signal
US8204533B2 (en) * 2008-08-07 2012-06-19 Broadcom Corporation Method and system for bluetooth HID activity prediction for wireless coexistence throughput optimization
US8913991B2 (en) * 2008-08-15 2014-12-16 At&T Intellectual Property I, L.P. User identification in cell phones based on skin contact
US8326228B2 (en) * 2008-12-19 2012-12-04 At&T Mobility Ii Llc Headset locator device
US8300022B2 (en) * 2009-01-09 2012-10-30 International Business Machines Corporation Dynamically reconfigurable touch screen displays
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US8355031B2 (en) * 2009-03-17 2013-01-15 Harris Corporation Portable electronic devices with adjustable display orientation
US8515340B2 (en) * 2009-06-08 2013-08-20 Mitel Networks Corporation Power management in an internet protocol (IP) telephone
US20110087964A1 (en) * 2009-10-08 2011-04-14 Research In Motion Limited Method for indicating a volume of an audio sink of a portable electronic device
US8055817B2 (en) * 2009-10-30 2011-11-08 International Business Machines Corporation Efficient handling of queued-direct I/O requests and completions
US8934645B2 (en) 2010-01-26 2015-01-13 Apple Inc. Interaction of sound, silent and mute modes in an electronic device
US8358977B2 (en) * 2010-04-22 2013-01-22 Hewlett-Packard Development Company, L.P. Use of mobile computing device sensors to initiate a telephone call or modify telephone operation
US20120045990A1 (en) * 2010-08-23 2012-02-23 Sony Ericsson Mobile Communications Ab Intelligent Audio Routing for Incoming Calls
US8966138B2 (en) 2010-08-31 2015-02-24 Apple Inc. Communication between a host device and an accessory using multiple-endpoint identification
US8509694B2 (en) 2010-08-31 2013-08-13 Apple Inc. Techniques for facilitating communication between a portable media device and an accessory using multiple communication paths
US8699947B2 (en) * 2010-09-03 2014-04-15 Sony Corporation Method for determining the relative position of devices
US9318096B2 (en) * 2010-09-22 2016-04-19 Broadcom Corporation Method and system for active noise cancellation based on remote noise measurement and supersonic transport
US8713098B1 (en) 2010-10-01 2014-04-29 Google Inc. Method and system for migrating object update messages through synchronous data propagation
US8666082B2 (en) * 2010-11-16 2014-03-04 Lsi Corporation Utilizing information from a number of sensors to suppress acoustic noise through an audio processing system
US8886128B2 (en) * 2010-12-10 2014-11-11 Verizon Patent And Licensing Inc. Method and system for providing proximity-relationship group creation
US8989884B2 (en) 2011-01-11 2015-03-24 Apple Inc. Automatic audio configuration based on an audio output device
US20120189140A1 (en) * 2011-01-21 2012-07-26 Apple Inc. Audio-sharing network
CN102158591B (zh) * 2011-01-27 2014-05-28 惠州Tcl移动通信有限公司 一种移动终端及其视频通话的控制方法和装置
RU2011121330A (ru) * 2011-05-27 2012-12-10 Михаил Леонидович Любачев Мобильное звуковоспроизводящее устройство
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
WO2013045976A1 (en) * 2011-09-28 2013-04-04 Sony Ericsson Mobile Communications Ab Controlling power for a headset
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US20130094660A1 (en) * 2011-10-07 2013-04-18 Halo2Cloud Llc Hands-free mobile audio device for wirelessly connecting an electronic device with headphones for transmitting audio signals therethrough
US9094706B2 (en) 2011-10-21 2015-07-28 Sonos, Inc. Systems and methods for wireless music playback
EP2798825B1 (en) 2011-12-30 2016-02-24 GN Netcom A/S Transferring of audio routing in a premises distribution network
CN102833887A (zh) * 2012-08-29 2012-12-19 太仓市同维电子有限公司 一种3g无线路由器
CN102932536B (zh) * 2012-10-18 2014-12-24 小米科技有限责任公司 通信处理方法及装置
KR101978688B1 (ko) * 2012-10-22 2019-05-15 삼성전자주식회사 마이크로폰 장치를 갖는 전자 장치 및 그 운용 방법
CN103118196B (zh) * 2013-02-04 2014-10-22 厦门亿联网络技术股份有限公司 一种实现多种通话模式的信号转换装置
CN103200311A (zh) * 2013-02-25 2013-07-10 华为终端有限公司 一种通讯终端通话音频通路的控制方法、装置及通讯终端
US9996148B1 (en) * 2013-03-05 2018-06-12 Amazon Technologies, Inc. Rule-based presentation of media items
KR102080743B1 (ko) * 2013-03-08 2020-02-24 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US9235422B2 (en) 2013-03-13 2016-01-12 Google Technology Holdings LLC Electronic device mode detection
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
CN103401991B (zh) * 2013-07-11 2016-08-24 宇龙计算机通信科技(深圳)有限公司 一种对终端设备的通信事件进行提示的方法和装置
US9912978B2 (en) 2013-07-29 2018-03-06 Apple Inc. Systems, methods, and computer-readable media for transitioning media playback between multiple electronic devices
TWI533719B (zh) * 2013-09-18 2016-05-11 緯創資通股份有限公司 無線耳機及其音源播放的控制方法
US9792003B1 (en) * 2013-09-27 2017-10-17 Audible, Inc. Dynamic format selection and delivery
CN104793991B (zh) * 2014-01-20 2019-11-05 腾讯科技(深圳)有限公司 一种音频输出设备切换方法及装置
WO2015110850A1 (en) * 2014-01-22 2015-07-30 Sony Corporation Directing audio output based on gestures
US9510083B2 (en) * 2014-03-14 2016-11-29 Apple Inc. Managing connections of a user device
TWI549524B (zh) * 2014-05-06 2016-09-11 宏碁股份有限公司 多媒體播放系統及其聲道控制方法
KR20170007451A (ko) * 2014-05-20 2017-01-18 부가톤 엘티디. 이어폰 출력 스피커로부터의 청각적 측정
EP4365725A2 (en) 2014-05-30 2024-05-08 Apple Inc. Continuity
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
CN105282641B (zh) * 2014-07-16 2019-03-08 宏碁股份有限公司 多媒体播放系统及其声道控制方法
WO2016022496A2 (en) 2014-08-06 2016-02-11 Apple Inc. Reduced-size user interfaces for battery management
US9300348B2 (en) * 2014-08-11 2016-03-29 Alcatel Lucent Dual electrical compact small form-factor pluggable module
CN104184897B (zh) * 2014-08-25 2018-07-06 联想(北京)有限公司 一种信息处理方法及电子设备
CN107079264A (zh) * 2014-08-29 2017-08-18 诺基亚技术有限公司 用于音频和/或视觉内容的输出的系统
EP3189406B1 (en) 2014-09-02 2022-09-07 Apple Inc. Phone user interface
KR102016160B1 (ko) 2014-09-02 2019-08-29 애플 인크. 경고를 관리하기 위한 축소된 크기의 인터페이스
US10127005B2 (en) * 2014-09-23 2018-11-13 Levaughn Denton Mobile cluster-based audio adjusting method and apparatus
US11068234B2 (en) 2014-09-23 2021-07-20 Zophonos Inc. Methods for collecting and managing public music performance royalties and royalty payouts
US11544036B2 (en) 2014-09-23 2023-01-03 Zophonos Inc. Multi-frequency sensing system with improved smart glasses and devices
US11150868B2 (en) 2014-09-23 2021-10-19 Zophonos Inc. Multi-frequency sensing method and apparatus using mobile-clusters
US10656906B2 (en) 2014-09-23 2020-05-19 Levaughn Denton Multi-frequency sensing method and apparatus using mobile-based clusters
KR102016690B1 (ko) * 2014-09-26 2019-08-30 후아웨이 테크놀러지 컴퍼니 리미티드 애플리케이션 프로그램 제어 방법 및 장치, 그리고 전자 장치
US20160104370A1 (en) 2014-10-14 2016-04-14 Logitech Europe S.A Method of controlling an electronic device
SE538331C2 (en) * 2014-11-21 2016-05-17 Melaud Ab Earphones with sensor controlled audio output
TWI584630B (zh) * 2014-12-10 2017-05-21 昇佳電子股份有限公司 用來識別手機與遮蔽物距離之方法與系統
KR101638612B1 (ko) * 2014-12-24 2016-07-11 현대자동차주식회사 외부 기기와 연결되는 차량의 멀티미디어 시스템 및 그 제어방법
US9398361B1 (en) 2015-02-20 2016-07-19 Vxi Corporation Headset system with user-configurable function button
DE102015204203A1 (de) * 2015-03-10 2016-09-15 Bayerische Motoren Werke Aktiengesellschaft Audiosteuerung in Fahrzeugen
KR102386309B1 (ko) * 2015-06-04 2022-04-14 삼성전자주식회사 전자 장치 및 전자 장치에서의 입출력 제어 방법
US9652196B2 (en) 2015-06-29 2017-05-16 Microsoft Technology Licensing, Llc Smart audio routing management
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
US10122421B2 (en) 2015-08-29 2018-11-06 Bragi GmbH Multimodal communication system using induction and radio and method
US9949013B2 (en) 2015-08-29 2018-04-17 Bragi GmbH Near field gesture control system and method
US9843853B2 (en) 2015-08-29 2017-12-12 Bragi GmbH Power control for battery powered personal area network device system and method
US9949008B2 (en) 2015-08-29 2018-04-17 Bragi GmbH Reproduction of ambient environmental sound for acoustic transparency of ear canal device system and method
US9972895B2 (en) 2015-08-29 2018-05-15 Bragi GmbH Antenna for use in a wearable device
US9854372B2 (en) 2015-08-29 2017-12-26 Bragi GmbH Production line PCB serial programming and testing method and system
US9905088B2 (en) 2015-08-29 2018-02-27 Bragi GmbH Responsive visual communication system and method
CN105187663B (zh) * 2015-09-28 2019-07-30 努比亚技术有限公司 自动通话的方法及终端
US9980189B2 (en) 2015-10-20 2018-05-22 Bragi GmbH Diversity bluetooth system and method
US10506322B2 (en) 2015-10-20 2019-12-10 Bragi GmbH Wearable device onboard applications system and method
US10104458B2 (en) 2015-10-20 2018-10-16 Bragi GmbH Enhanced biometric control systems for detection of emergency events system and method
US9866941B2 (en) 2015-10-20 2018-01-09 Bragi GmbH Multi-point multiple sensor array for data sensing and processing system and method
US9847000B2 (en) 2015-10-29 2017-12-19 Immersion Corporation Ambient triggered notifications for rendering haptic effects
US10040423B2 (en) 2015-11-27 2018-08-07 Bragi GmbH Vehicle with wearable for identifying one or more vehicle occupants
US9978278B2 (en) 2015-11-27 2018-05-22 Bragi GmbH Vehicle to vehicle communications using ear pieces
US20170155998A1 (en) * 2015-11-27 2017-06-01 Bragi GmbH Vehicle with display system for interacting with wearable device
US9944295B2 (en) 2015-11-27 2018-04-17 Bragi GmbH Vehicle with wearable for identifying role of one or more users and adjustment of user settings
US10099636B2 (en) 2015-11-27 2018-10-16 Bragi GmbH System and method for determining a user role and user settings associated with a vehicle
US10104460B2 (en) 2015-11-27 2018-10-16 Bragi GmbH Vehicle with interaction between entertainment systems and wearable devices
US9980033B2 (en) 2015-12-21 2018-05-22 Bragi GmbH Microphone natural speech capture voice dictation system and method
US9939891B2 (en) 2015-12-21 2018-04-10 Bragi GmbH Voice dictation systems using earpiece microphone system and method
US10085091B2 (en) 2016-02-09 2018-09-25 Bragi GmbH Ambient volume modification through environmental microphone feedback loop system and method
US10142754B2 (en) 2016-02-22 2018-11-27 Sonos, Inc. Sensor on moving component of transducer
US10085082B2 (en) 2016-03-11 2018-09-25 Bragi GmbH Earpiece with GPS receiver
US10045116B2 (en) 2016-03-14 2018-08-07 Bragi GmbH Explosive sound pressure level active noise cancellation utilizing completely wireless earpieces system and method
US10052065B2 (en) 2016-03-23 2018-08-21 Bragi GmbH Earpiece life monitor with capability of automatic notification system and method
US9807499B2 (en) * 2016-03-30 2017-10-31 Lenovo (Singapore) Pte. Ltd. Systems and methods to identify device with which to participate in communication of audio data
US10015579B2 (en) 2016-04-08 2018-07-03 Bragi GmbH Audio accelerometric feedback through bilateral ear worn device system and method
US10013542B2 (en) 2016-04-28 2018-07-03 Bragi GmbH Biometric interface system and method
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
JP6833244B2 (ja) * 2016-06-29 2021-02-24 フォルシアクラリオン・エレクトロニクス株式会社 音響装置、音響システム
US10216474B2 (en) 2016-07-06 2019-02-26 Bragi GmbH Variable computing engine for interactive media based upon user biometrics
US10201309B2 (en) 2016-07-06 2019-02-12 Bragi GmbH Detection of physiological data using radar/lidar of wireless earpieces
US11085871B2 (en) 2016-07-06 2021-08-10 Bragi GmbH Optical vibration detection system and method
US10582328B2 (en) 2016-07-06 2020-03-03 Bragi GmbH Audio response based on user worn microphones to direct or adapt program responses system and method
US10555700B2 (en) 2016-07-06 2020-02-11 Bragi GmbH Combined optical sensor for audio and pulse oximetry system and method
US10045110B2 (en) 2016-07-06 2018-08-07 Bragi GmbH Selective sound field environment processing system and method
US10888039B2 (en) 2016-07-06 2021-01-05 Bragi GmbH Shielded case for wireless earpieces
US10165350B2 (en) 2016-07-07 2018-12-25 Bragi GmbH Earpiece with app environment
US10158934B2 (en) 2016-07-07 2018-12-18 Bragi GmbH Case for multiple earpiece pairs
US10516930B2 (en) 2016-07-07 2019-12-24 Bragi GmbH Comparative analysis of sensors to control power status for wireless earpieces
US10621583B2 (en) 2016-07-07 2020-04-14 Bragi GmbH Wearable earpiece multifactorial biometric analysis system and method
US10587943B2 (en) 2016-07-09 2020-03-10 Bragi GmbH Earpiece with wirelessly recharging battery
US10397686B2 (en) 2016-08-15 2019-08-27 Bragi GmbH Detection of movement adjacent an earpiece device
US10977348B2 (en) 2016-08-24 2021-04-13 Bragi GmbH Digital signature using phonometry and compiled biometric data system and method
US10409091B2 (en) 2016-08-25 2019-09-10 Bragi GmbH Wearable with lenses
US10104464B2 (en) 2016-08-25 2018-10-16 Bragi GmbH Wireless earpiece and smart glasses system and method
US10313779B2 (en) 2016-08-26 2019-06-04 Bragi GmbH Voice assistant system for wireless earpieces
US11086593B2 (en) 2016-08-26 2021-08-10 Bragi GmbH Voice assistant for wireless earpieces
US10887679B2 (en) 2016-08-26 2021-01-05 Bragi GmbH Earpiece for audiograms
US11200026B2 (en) 2016-08-26 2021-12-14 Bragi GmbH Wireless earpiece with a passive virtual assistant
EP3499856A4 (en) 2016-08-26 2019-08-07 Huawei Technologies Co., Ltd. AUDIO OUTPUT METHOD, ELECTRONIC DEVICE, AND STORAGE MEDIUM
US10200780B2 (en) 2016-08-29 2019-02-05 Bragi GmbH Method and apparatus for conveying battery life of wireless earpiece
US11490858B2 (en) 2016-08-31 2022-11-08 Bragi GmbH Disposable sensor array wearable device sleeve system and method
US10580282B2 (en) 2016-09-12 2020-03-03 Bragi GmbH Ear based contextual environment and biometric pattern recognition system and method
US10598506B2 (en) 2016-09-12 2020-03-24 Bragi GmbH Audio navigation using short range bilateral earpieces
US10852829B2 (en) 2016-09-13 2020-12-01 Bragi GmbH Measurement of facial muscle EMG potentials for predictive analysis using a smart wearable system and method
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US11283742B2 (en) 2016-09-27 2022-03-22 Bragi GmbH Audio-based social media platform
US10460095B2 (en) 2016-09-30 2019-10-29 Bragi GmbH Earpiece with biometric identifiers
US10049184B2 (en) 2016-10-07 2018-08-14 Bragi GmbH Software application transmission via body interface using a wearable device in conjunction with removable body sensor arrays system and method
US10771877B2 (en) 2016-10-31 2020-09-08 Bragi GmbH Dual earpieces for same ear
US10455313B2 (en) 2016-10-31 2019-10-22 Bragi GmbH Wireless earpiece with force feedback
US10942701B2 (en) 2016-10-31 2021-03-09 Bragi GmbH Input and edit functions utilizing accelerometer based earpiece movement system and method
US10698983B2 (en) 2016-10-31 2020-06-30 Bragi GmbH Wireless earpiece with a medical engine
US10117604B2 (en) 2016-11-02 2018-11-06 Bragi GmbH 3D sound positioning with distributed sensors
US10617297B2 (en) 2016-11-02 2020-04-14 Bragi GmbH Earpiece with in-ear electrodes
US10205814B2 (en) 2016-11-03 2019-02-12 Bragi GmbH Wireless earpiece with walkie-talkie functionality
US10821361B2 (en) 2016-11-03 2020-11-03 Bragi GmbH Gaming with earpiece 3D audio
US10062373B2 (en) 2016-11-03 2018-08-28 Bragi GmbH Selective audio isolation from body generated sound system and method
US10225638B2 (en) 2016-11-03 2019-03-05 Bragi GmbH Ear piece with pseudolite connectivity
US10045117B2 (en) 2016-11-04 2018-08-07 Bragi GmbH Earpiece with modified ambient environment over-ride function
US10045112B2 (en) 2016-11-04 2018-08-07 Bragi GmbH Earpiece with added ambient environment
US10058282B2 (en) 2016-11-04 2018-08-28 Bragi GmbH Manual operation assistance with earpiece with 3D sound cues
US10063957B2 (en) 2016-11-04 2018-08-28 Bragi GmbH Earpiece with source selection within ambient environment
US10506327B2 (en) 2016-12-27 2019-12-10 Bragi GmbH Ambient environmental sound field manipulation based on user defined voice and audio recognition pattern analysis system and method
US10324525B2 (en) * 2016-12-31 2019-06-18 Intel Corporation Context aware selective backlighting techniques
US10405081B2 (en) 2017-02-08 2019-09-03 Bragi GmbH Intelligent wireless headset system
US10582290B2 (en) 2017-02-21 2020-03-03 Bragi GmbH Earpiece with tap functionality
US10771881B2 (en) 2017-02-27 2020-09-08 Bragi GmbH Earpiece with audio 3D menu
KR102291021B1 (ko) 2017-03-17 2021-08-18 삼성전자주식회사 오디오 출력을 제어하기 위한 전자 장치 및 그의 동작 방법
US11380430B2 (en) 2017-03-22 2022-07-05 Bragi GmbH System and method for populating electronic medical records with wireless earpieces
US10575086B2 (en) 2017-03-22 2020-02-25 Bragi GmbH System and method for sharing wireless earpieces
US11544104B2 (en) 2017-03-22 2023-01-03 Bragi GmbH Load sharing between wireless earpieces
US11694771B2 (en) 2017-03-22 2023-07-04 Bragi GmbH System and method for populating electronic health records with wireless earpieces
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10708699B2 (en) 2017-05-03 2020-07-07 Bragi GmbH Hearing aid with added functionality
DK201770411A1 (en) * 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US11116415B2 (en) 2017-06-07 2021-09-14 Bragi GmbH Use of body-worn radar for biometric measurements, contextual awareness and identification
US11013445B2 (en) 2017-06-08 2021-05-25 Bragi GmbH Wireless earpiece with transcranial stimulation
US20180365616A1 (en) * 2017-06-20 2018-12-20 Walmart Apollo, Llc Systems and methods for management of inventory audits
WO2019005951A1 (en) 2017-06-29 2019-01-03 Walmart Apollo, Llc SYSTEMS AND METHODS FOR REALIZING AND MONITORING ASSET INSPECTIONS
CN109213467B (zh) * 2017-07-01 2021-11-09 武汉斗鱼网络科技有限公司 获取音频设备声音的方法、存储介质、电子设备及系统
US10344960B2 (en) 2017-09-19 2019-07-09 Bragi GmbH Wireless earpiece controlled medical headlight
US11272367B2 (en) 2017-09-20 2022-03-08 Bragi GmbH Wireless earpieces for hub communications
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
KR102543693B1 (ko) 2017-10-17 2023-06-16 삼성전자주식회사 전자 장치 및 그의 동작 방법
US10187505B1 (en) * 2017-12-22 2019-01-22 Dish Network, L.L.C. Voice-activated call pick-up for mobile device
TWI709322B (zh) * 2017-12-28 2020-11-01 仁寶電腦工業股份有限公司 電子系統的操作方法
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US10555118B1 (en) 2018-07-20 2020-02-04 International Business Machines Corporation Automatic transfer of audio-related task to a smart speaker
JP7111553B2 (ja) * 2018-08-09 2022-08-02 フォルシアクラリオン・エレクトロニクス株式会社 ハンズフリー制御装置、ハンズフリー制御装置の制御方法、及びハンズフリーシステム
US10368169B1 (en) * 2018-08-13 2019-07-30 Qualcomm Incorporated Power and bandwidth efficient true wireless stereo speakers
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
CA3131489A1 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US10743105B1 (en) 2019-05-31 2020-08-11 Microsoft Technology Licensing, Llc Sending audio to various channels using application location information
US10904029B2 (en) 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US10867608B1 (en) 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
CN117170620A (zh) * 2019-05-31 2023-12-05 苹果公司 用于音频媒体控件的用户界面
US11968268B2 (en) 2019-07-30 2024-04-23 Dolby Laboratories Licensing Corporation Coordination of audio devices
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
WO2023050323A1 (en) * 2021-09-30 2023-04-06 Citrix Systems, Inc. Automated transfer of peripheral device operations
EP4351164A1 (en) * 2022-10-07 2024-04-10 Giesecke+Devrient Mobile Security Germany GmbH Headset with secure communication

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3859005A (en) 1973-08-13 1975-01-07 Albert L Huebner Erosion reduction in wet turbines
US5351995A (en) 1992-01-29 1994-10-04 Apple Computer, Inc. Double-sided, reversible electronic paper
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
US7663607B2 (en) 2004-05-06 2010-02-16 Apple Inc. Multipoint touchscreen
SE9800697A0 (sv) 1998-03-05 1999-09-06 Ericsson Telefon Ab L M Förfarande och anordning för trådlös kommunikation
WO1999045958A1 (en) 1998-03-09 1999-09-16 Biogen, Inc. Cd154 blockade therapy for modulation of immune responses to implanted devices
US6520013B1 (en) 2000-10-02 2003-02-18 Apple Computer, Inc. Method and apparatus for detecting free fall
US7688306B2 (en) 2000-10-02 2010-03-30 Apple Inc. Methods and apparatuses for operating a portable device based on an accelerometer
US6583676B2 (en) 2001-06-20 2003-06-24 Apple Computer, Inc. Proximity/touch detector and calibration circuit
US7345671B2 (en) 2001-10-22 2008-03-18 Apple Inc. Method and apparatus for use of rotational user inputs
US20040198464A1 (en) 2003-03-04 2004-10-07 Jim Panian Wireless communication systems for vehicle-based private and conference calling and methods of operating same
US7627343B2 (en) 2003-04-25 2009-12-01 Apple Inc. Media player system
KR100731593B1 (ko) 2004-07-02 2007-06-22 반재경 선조립 콘크리트구조물용 거푸집 구조체 및 이를 이용한 시공방법
US8381135B2 (en) 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
US7653883B2 (en) 2004-07-30 2010-01-26 Apple Inc. Proximity detector in handheld device
US7599044B2 (en) 2005-06-23 2009-10-06 Apple Inc. Method and apparatus for remotely detecting presence
US7904188B2 (en) * 2004-10-26 2011-03-08 Panasonic Corporation Information outputting device, information output controlling method, and information output controlling program
US20060223547A1 (en) * 2005-03-31 2006-10-05 Microsoft Corporation Environment sensitive notifications for mobile devices
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US20070142942A1 (en) 2005-12-16 2007-06-21 Sony Ericsson Mobile Communications Ab Audio profiles for portable music playback device
US8150475B2 (en) * 2006-12-19 2012-04-03 Motorola Mobility, Inc. Method for information signal distribution between communication devices based on operating characteristics of a depletable power supply used by one of the devices
EP1962481B1 (en) * 2007-02-21 2009-12-16 Research In Motion Limited Teleconferencing and call multiplexing with mutiple headsets coupled to a single mobile telephone
US8068925B2 (en) * 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices

Cited By (84)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210089070A1 (en) * 2012-07-02 2021-03-25 Ecolink Intelligent Technology, Inc. Method and apparatus for providing energy device and system status
US11212612B2 (en) 2016-02-22 2021-12-28 Sonos, Inc. Voice control of a media playback system
US11514898B2 (en) 2016-02-22 2022-11-29 Sonos, Inc. Voice control of a media playback system
US11726742B2 (en) 2016-02-22 2023-08-15 Sonos, Inc. Handling of loss of pairing between networked devices
US11863593B2 (en) 2016-02-22 2024-01-02 Sonos, Inc. Networked microphone device control
CN110537358A (zh) * 2016-02-22 2019-12-03 搜诺思公司 联网麦克风设备控制
US11184704B2 (en) 2016-02-22 2021-11-23 Sonos, Inc. Music service selection
US11513763B2 (en) 2016-02-22 2022-11-29 Sonos, Inc. Audio response playback
US11832068B2 (en) 2016-02-22 2023-11-28 Sonos, Inc. Music service selection
US11405430B2 (en) 2016-02-22 2022-08-02 Sonos, Inc. Networked microphone device control
US11556306B2 (en) 2016-02-22 2023-01-17 Sonos, Inc. Voice controlled media playback system
CN110537358B (zh) * 2016-02-22 2021-12-28 搜诺思公司 联网麦克风设备控制
US11750969B2 (en) 2016-02-22 2023-09-05 Sonos, Inc. Default playback device designation
US11736860B2 (en) 2016-02-22 2023-08-22 Sonos, Inc. Voice control of a media playback system
US11983463B2 (en) 2016-02-22 2024-05-14 Sonos, Inc. Metadata exchange involving a networked playback system and a networked microphone system
US11545169B2 (en) 2016-06-09 2023-01-03 Sonos, Inc. Dynamic player selection for audio signal processing
US11664023B2 (en) 2016-07-15 2023-05-30 Sonos, Inc. Voice detection by multiple devices
US11979960B2 (en) 2016-07-15 2024-05-07 Sonos, Inc. Contextualization of voice inputs
US11531520B2 (en) 2016-08-05 2022-12-20 Sonos, Inc. Playback device supporting concurrent voice assistants
US11641559B2 (en) 2016-09-27 2023-05-02 Sonos, Inc. Audio playback settings for voice interaction
US11516610B2 (en) 2016-09-30 2022-11-29 Sonos, Inc. Orientation-based playback device microphone selection
US11308961B2 (en) 2016-10-19 2022-04-19 Sonos, Inc. Arbitration-based voice recognition
US11727933B2 (en) 2016-10-19 2023-08-15 Sonos, Inc. Arbitration-based voice recognition
US11380322B2 (en) 2017-08-07 2022-07-05 Sonos, Inc. Wake-word detection suppression
US11900937B2 (en) 2017-08-07 2024-02-13 Sonos, Inc. Wake-word detection suppression
US11500611B2 (en) 2017-09-08 2022-11-15 Sonos, Inc. Dynamic computation of system response volume
US11646045B2 (en) 2017-09-27 2023-05-09 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US11302326B2 (en) 2017-09-28 2022-04-12 Sonos, Inc. Tone interference cancellation
US11769505B2 (en) 2017-09-28 2023-09-26 Sonos, Inc. Echo of tone interferance cancellation using two acoustic echo cancellers
US11538451B2 (en) 2017-09-28 2022-12-27 Sonos, Inc. Multi-channel acoustic echo cancellation
US11175888B2 (en) 2017-09-29 2021-11-16 Sonos, Inc. Media playback system with concurrent voice assistance
US11893308B2 (en) 2017-09-29 2024-02-06 Sonos, Inc. Media playback system with concurrent voice assistance
US11288039B2 (en) 2017-09-29 2022-03-29 Sonos, Inc. Media playback system with concurrent voice assistance
US11451908B2 (en) 2017-12-10 2022-09-20 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US11676590B2 (en) 2017-12-11 2023-06-13 Sonos, Inc. Home graph
US11343614B2 (en) 2018-01-31 2022-05-24 Sonos, Inc. Device designation of playback and network microphone device arrangements
US11689858B2 (en) 2018-01-31 2023-06-27 Sonos, Inc. Device designation of playback and network microphone device arrangements
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US11797263B2 (en) 2018-05-10 2023-10-24 Sonos, Inc. Systems and methods for voice-assisted media content selection
US11715489B2 (en) 2018-05-18 2023-08-01 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US11696074B2 (en) 2018-06-28 2023-07-04 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US11482978B2 (en) 2018-08-28 2022-10-25 Sonos, Inc. Audio notifications
US11563842B2 (en) 2018-08-28 2023-01-24 Sonos, Inc. Do not disturb feature for audio notifications
US11432030B2 (en) 2018-09-14 2022-08-30 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US11778259B2 (en) 2018-09-14 2023-10-03 Sonos, Inc. Networked devices, systems and methods for associating playback devices based on sound codes
US11790937B2 (en) 2018-09-21 2023-10-17 Sonos, Inc. Voice detection optimization using sound metadata
US11727936B2 (en) 2018-09-25 2023-08-15 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11790911B2 (en) 2018-09-28 2023-10-17 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US11501795B2 (en) 2018-09-29 2022-11-15 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11200889B2 (en) 2018-11-15 2021-12-14 Sonos, Inc. Dilated convolutions and gating for efficient keyword spotting
US11741948B2 (en) 2018-11-15 2023-08-29 Sonos Vox France Sas Dilated convolutions and gating for efficient keyword spotting
US11557294B2 (en) 2018-12-07 2023-01-17 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11538460B2 (en) 2018-12-13 2022-12-27 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US11540047B2 (en) 2018-12-20 2022-12-27 Sonos, Inc. Optimization of network microphone devices using noise classification
US11646023B2 (en) 2019-02-08 2023-05-09 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
CN111586894A (zh) * 2019-02-15 2020-08-25 普天信息技术有限公司 一种宽带集群终端的模式选择方法
US11798553B2 (en) 2019-05-03 2023-10-24 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11854547B2 (en) 2019-06-12 2023-12-26 Sonos, Inc. Network microphone device with command keyword eventing
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11501773B2 (en) 2019-06-12 2022-11-15 Sonos, Inc. Network microphone device with command keyword conditioning
US11354092B2 (en) 2019-07-31 2022-06-07 Sonos, Inc. Noise classification for event detection
US11551669B2 (en) 2019-07-31 2023-01-10 Sonos, Inc. Locally distributed keyword detection
US11714600B2 (en) 2019-07-31 2023-08-01 Sonos, Inc. Noise classification for event detection
US11710487B2 (en) 2019-07-31 2023-07-25 Sonos, Inc. Locally distributed keyword detection
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
US11862161B2 (en) 2019-10-22 2024-01-02 Sonos, Inc. VAS toggle based on device orientation
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
US11869503B2 (en) 2019-12-20 2024-01-09 Sonos, Inc. Offline voice control
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11961519B2 (en) 2020-02-07 2024-04-16 Sonos, Inc. Localized wakeword verification
US11694689B2 (en) 2020-05-20 2023-07-04 Sonos, Inc. Input detection windowing
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
TWI823211B (zh) * 2021-12-18 2023-11-21 荷蘭商荷蘭移動驅動器公司 車載通訊系統及方法

Also Published As

Publication number Publication date
EP2171989B1 (en) 2014-07-30
US20120053715A1 (en) 2012-03-01
US20150112467A1 (en) 2015-04-23
EP2171989A1 (en) 2010-04-07
HK1206176A1 (zh) 2015-12-31
KR20100036351A (ko) 2010-04-07
US8068925B2 (en) 2011-11-29
US20150331699A1 (en) 2015-11-19
CN104104769B (zh) 2017-02-22
US20090003620A1 (en) 2009-01-01
EP2827566A1 (en) 2015-01-21
CN101720550A (zh) 2010-06-02
KR101116487B1 (ko) 2012-03-07
US8958896B2 (en) 2015-02-17
WO2009005563A1 (en) 2009-01-08
CN101720550B (zh) 2014-05-07

Similar Documents

Publication Publication Date Title
CN101720550B (zh) 多个音频设备中音频的动态选路
US8073980B2 (en) Methods and systems for automatic configuration of peripherals
US9958987B2 (en) Automated response to and sensing of user activity in portable devices
CN108605073A (zh) 声音信号处理的方法、终端和耳机
CN106874091A (zh) 一种应用程序调用方法、装置及移动终端
CN110231900A (zh) 一种应用图标显示方法及终端
CN107682770B (zh) 一种应用程序控制方法和移动终端
CN109872501A (zh) 一种报警方法及终端设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant