CN111510821A - 音频响应回放 - Google Patents

音频响应回放 Download PDF

Info

Publication number
CN111510821A
CN111510821A CN202010179593.8A CN202010179593A CN111510821A CN 111510821 A CN111510821 A CN 111510821A CN 202010179593 A CN202010179593 A CN 202010179593A CN 111510821 A CN111510821 A CN 111510821A
Authority
CN
China
Prior art keywords
playback
zone
nmd
media
media playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010179593.8A
Other languages
English (en)
Inventor
乔纳森·P·朗格
马克·普拉格
西蒙·贾维斯
克里斯多夫·巴茨
罗米·卡德里
保罗·安德鲁·贝茨
路易斯·韦加-萨亚斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sonos Inc
Original Assignee
Sonos Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US15/131,244 external-priority patent/US9811314B2/en
Priority claimed from US15/237,133 external-priority patent/US10095470B2/en
Application filed by Sonos Inc filed Critical Sonos Inc
Publication of CN111510821A publication Critical patent/CN111510821A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/162Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/14Speech classification or search using statistical models, e.g. Hidden Markov Models [HMMs]
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R27/00Public address systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/007Monitoring arrangements; Testing arrangements for public address systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/301Automatic calibration of stereophonic sound system, e.g. with test microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/005Discovery of network devices, e.g. terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/22Processing or transfer of terminal data, e.g. status or physical capabilities
    • H04W8/24Transfer of terminal data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/003Digital PA systems using, e.g. LAN or internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/005Audio distribution systems for home, i.e. multi-room use
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • User Interface Of Digital Computer (AREA)
  • Quality & Reliability (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)
  • Diaphragms For Electromechanical Transducers (AREA)

Abstract

可以接收包括由与媒体回放系统相关联的麦克风设备接收的语音命令的第一消息,其中媒体回放系统包括一个或多个区域,每个区域包括一个或多个回放设备。可以从一个或多个区域中选择音频响应区域来播放对语音命令的音频响应。所选区域的一个或多个回放设备中的至少一个回放设备可以播放音频响应。

Description

音频响应回放
分案说明
本申请是申请日为2017年2月21日、申请号为201780025029.7、发明名称为“音频响应回放”的发明专利申请的分案申请。
相关申请的相交引用
根据PCT第8条,本申请要求以下申请的优先权:(i)于2016年4月14日提交的题为“CONTENT MIXING”的美国非临时申请No.15/098,760;(ii)于2016年4月14日提交的题为“DEFAULT PLAYBACK DEVICE DESIGNATION”的美国非临时申请No.15/098,867;(iii)于2016年4月14日提交的题为“DEFAULT PLAYBACK DEVICES”的美国非临时申请No.15/098,892;(iv)于2016年8月15日提交的题为“AUDIO RESPONSE PLAYBACK”的美国非临时申请No.15/237,133;(v)于2016年4月18日提交的题为“METADATA EXCHANGE INVOLVING ANETWORKED PLAYBACK SYSTEM AND A NETWORKED MICROPHONE SYSTEM”的美国非临时申请No.15/131,244;(vi)于2016年4月18日提交的题为“HANDLING OF LOSS OF PAIRINGBETWEEN NETWORKED DEVICES”的美国非临时申请No.15/131,254;(vii)于2016年2月22日提交的题为“DEFAULT PLAYBACK DEVICE(S)”的美国临时申请No.62/298,410;(viii)于2016年2月22日提交的题为“AUDIO RESPONSE PLAYBACK”的美国临时申请No.62/298,418;(ix)于2016年2月22日提交的题为“ROOM-CORRECTED VOICE DETECTION”的美国临时申请No.62/298,433;(x)于2016年2月22日提交的题为“CONTENT MIXING”的美国临时申请No.62/298,439;(xi)于2016年2月22日提交的题为“MUSIC SERVICE SELECTION”的美国临时申请No.62/298,425;(xii)于2016年2月22日提交的题为“METADATA EXCHANGEINVOLVING A NETWORKED PLAYBACK SYSTEM AND A NETWORKED MICROPHONE SYSTEM”的美国临时申请No.62/298,350;(xiii)于2016年2月22日提交的题为“HANDLING OF LOSS OFPAIRING BETWEEN NETWORKED DEVICES”的美国临时申请No.62/298,388;(xiv)于2016年2月22日提交的题为“ACTION BASED ON USER ID”的美国临时申请No.62/298,393;以及(xv)于2016年3月23日提交的题为“VOICE CONTROL OF A MEDIA PLAYBACK SYSTEM”的美国临时申请No.62/312,350。这些申请中的每个申请的内容通过引用全部合并于此。
技术领域
本公开涉及消费者产品,更具体地,涉及与媒体回放或者其某个方面有关的方法、系统、产品、特征、服务和其他元件。
背景技术
在外放的环境中访问和收听数字音频的选项是有限的,直到2003年SONOS公司提交其首批专利申请中题为“Method for Synchronizing Audio Playback betweenMultiple Networked Devices”的专利申请,并在2005年开始出售媒体回放系统为止。Sonos无线HiFi系统使人们能够通过一个或多个联网回放设备体验来自许多源的音乐。通过安装在智能电话、平板电脑或计算机上的软件控制应用,可以在任何具有联网回放设备的房间中播放他或她期望的内容。另外,使用控制器,例如,不同的歌曲可以被流传输到具有回放设备的每个房间,可以将房间分组在一起以进行同步回放,或者可以同步地在所有房间中听到相同的歌曲。
鉴于对数字媒体的兴趣日益增长,仍然需要开发消费者可访问的技术以进一步增强收听体验。
附图说明
参考以下说明书、所附权利要求和附图,将更好地理解本公开的技术的特征、方面和优点,在附图中:
图1示出了可以实施某些实施例的示例媒体回放系统;
图2示出了示例回放设备的功能框图;
图3示出了示例控制设备的功能框图;
图4示出了示例控制器界面;
图5示出了示例的多个网络设备;
图6示出了示例网络麦克风设备的功能框图;
图7是关于回放设备在存在内容输出时调整音频内容的音量的示例流程图;以及
图8是关于回放设备回放内容输出和/或音频内容的另一示例流程图。
图9示出了根据一些实施例的示例方法。
图10示出了根据一些实施例的另一示例方法。
图11示出了根据一些实施例的又一示例方法。
图12示出了用于指定默认回放设备的示例流程图;
图13A-D示出了用于分配网络麦克风设备的示例用户界面;以及
图14示出了用于应用默认回放设备指定的示例流程图。
图15示出了根据本文描述的方面的播放音频响应的示例方法的流程图;以及
图16更详细地示出了根据本文描述的方面的图15的框1508和1512的流程图。
附图用于示出示例实施例的目的,但可以理解,本发明不限于附图所示的布置和手段。
具体实施方式
I.概述
在一种布置中,所描述的实施例尤其可以涉及当网络麦克风设备或回放系统输出与音频内容不同的内容时调整回放系统回放的音频内容的音量。
网络麦克风设备(NMD)可以是通过麦克风阵列接收语音输入并通过扬声器输出内容的设备。语音输入可以是例如人类说话形式的询问,并且内容输出可以是对询问的响应。语音输入可以是人类说话的形式,并且响应于语音输入的内容输出可以采用各种形式,包括语音输出、音调、警报或音乐。网络麦克风设备输出的内容在本文中可以称为NMD输出。
作为示例,NMD可以接收被表述为“谁是来自‘流媒体服务1’的‘曲目1’的‘艺术家1’”的语音输入。NMD可以确定该语音输入是命令,然后响应于语音输入而提供语音输出。语音输出可以是确认在语音输入中询问的艺术家(例如,Prince)的口头响应。
在许多情况下,NMD可以放置在媒体回放系统附近。媒体回放系统可以包括回放音频内容的多个回放设备。这些回放设备可以分布在家庭内的各个位置,并且这些位置可以被称为诸如卧室或起居室之类的区域。回放设备可以在NMD输出内容的同时回放音频内容。结果,当也在播放音频内容时,可能听不到从NMD输出的内容。
在一个方面,回放设备可以被布置成将其音量减小到低于在NMD输出内容时NMD将使用的音量的音量。这样,收听者可以更好地听到从NMD输出的内容。将回放设备的音量减小到低于另一内容的音量的过程在本文中可称为回避(ducking)。
回避的回放设备可以是媒体回放系统中的所有回放设备。在另一示例中,回避的媒体回放设备可以是回放设备的子集。回避的回放设备的子集可以基于NMD是否在相同的一个或多个区域中。备选地,回避的回放设备的子集可以基于NMD是否与回放设备绑定(分组或配对)。
这些也正在回放音频内容的回放设备会直接影响是否听到NMD输出的内容。例如,如果媒体回放系统在厨房和卧室中具有回放设备并且NMD位于厨房中,则厨房回放设备可以与NMD绑定。厨房回放设备和卧室回放设备可能都在回放音频。但是当NMD输出内容时,厨房回放设备可以回避,但卧室回放设备可以不回避。但是,如果回放设备在其中操作的环境是具有不同区域的开放区域,则不同区域中的所有回放设备仍然可能回避。否则,在开放区域中仍然难以听到从NMD输出的内容。
在另一方面,回放设备本身可以回放NMD内容。假设回放设备可能也正在播放音频内容,例如音乐,则回放设备可以以各种方式输出NMD内容。作为一个示例,回放设备可以被布置为从NMD接收NMD内容的指示,并且将NMD内容与回放设备播放的音频内容混合。作为另一示例,可以使正在回放的音频内容静音,并且可以在回放设备上输出NMD内容。作为又一示例,可以暂停正在回放的音频内容,并且可以在回放设备上输出NMD内容。其他示例也是可能的。
在另一种布置中,当媒体回放设备被配置为由NMD接收的语音命令来控制时,为了实现经由联网麦克风系统对媒体回放系统的语音控制,媒体回放系统有时可以有利地与NMD共享元数据,反之亦然。例如,当联网麦克风系统接收到“现在在我的书房中播放这首歌曲”的语音命令时,联网麦克风系统需要知道“这首歌曲”是什么以及哪个媒体回放设备在用户的书房中。联网麦克风系统弄清楚“这首歌曲”是什么以及哪个或哪些媒体回放设备在用户书房中的一种方式是联网麦克风系统从媒体回放系统获得与以下有关的元数据:(i)媒体回放系统当前正在播放的歌曲,以及(ii)媒体回放系统中的媒体回放设备的配置。
本文描述的一些实施例包括媒体回放系统(或者可能地其一个或多个组件)向联网麦克风系统(或者可能地其一个或多个组件)提供元数据,以促进联网麦克风系统对媒体回放系统的语音控制。
一个方面包括在媒体回放系统和联网麦克风系统之间建立元数据交换通道。在一些实施例中,媒体回放系统单独或者与媒体回放系统服务器组合地包括一个或多个媒体回放设备,并且联网麦克风系统单独或者与联网麦克风系统服务器组合地包括一个或多个联网麦克风设备。在一些实施例中,媒体回放系统服务器和/或联网麦克风系统服务器中的一个或两者是基于云的服务器系统。
在操作中,元数据交换通道可以是媒体回放系统的一个或多个组件与如本文所述的联网麦克风系统的一个或多个组件之间的任何类型的通信信道。在一些实施例中,元数据交换通道是媒体回放系统的一个或多个组件与联网麦克风系统的一个或多个组件之间的通信会话。通信会话可以或可以不被特别配置用于元数据的交换实际上,媒体回放系统和联网麦克风系统可以使用现在已知或以后开发的任何类型的通信机制来在两个系统之间交换元数据,包括但不限于通信路径、链路、信道和/或会话(例如,一个或多个路径、链接和/或信道可以支持会话)。
在建立元数据交换通道之后,或者至少在配置媒体回放系统以共享元数据或以其他方式向联网麦克风系统提供元数据之后,媒体回放系统响应于元数据交换触发事件而向联网麦克风系统提供与媒体回放系统相关联的元数据。在一些实施例中,元数据交换触发事件是以下中的任何一个或多个:(i)媒体回放系统回放新的媒体内容项(例如,新的音频曲目),(ii)媒体回放系统经由联网麦克风系统接收到上下文特定的回放命令,(iii)媒体回放系统经由联网麦克风系统接收到上下文特定的信息请求,和/或(iv)经过定义的时间段。
一些实施例包括联网媒体回放系统经由元数据交换通道向联网麦克风系统提供元数据。例如,媒体回放系统可以通过以下中的一个或两个经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据:(i)经由元数据交换通道从媒体回放系统的一个或多个组件向联网麦克风系统的一个或多个组件发送元数据,和/或(ii)授权联网麦克风系统的一个或多个组件经由元数据交换通道访问存储在媒体回放系统的一个或多个组件上的元数据。
在一些实施例中,媒体回放系统向联网麦克风系统提供的元数据包括以下中的一个或多个:(i)媒体回放系统的一个或多个配置参数,(ii)关于当前经由媒体回放系统播放的音频内容的信息,(iii)关于媒体回放系统播放的音频内容的历史信息,(iv)与音频内容有关的用户偏好信息,(v)与媒体回放系统配置有关的用户偏好信息,和/或(vi)任何其他元数据,包括但不限于本文公开和/描述的其他元数据。
一些实施例可以另外包括联网麦克风系统经由元数据交换通道向媒体回放系统提供元数据。例如,联网麦克风系统可以通过以下中的一个或两个操作,经由元数据交换通道提供与联网麦克风系统相关联的元数据:(i)经由元数据交换通道从联网麦克风系统的一个或多个组件向媒体回放系统的一个或多个组件发送元数据,和/或(ii)授权媒体回放系统的一个或多个组件经由元数据交换通道访问存储在联网麦克风系统的一个或多个组件上的元数据。
在一些实施例中,联网麦克风系统向媒体回放系统提供的元数据包括以下中的一个或多个:(i)联网麦克风系统的一个或多个配置参数,(ii)联网麦克风系统的各个联网麦克风设备的配置参数,(iii)关于谁曾经使用(例如,哪个或哪些用户)及何时使用联网麦克风系统来控制媒体回放系统的历史信息,(iv)联网麦克风系统接收到的语音命令,和/或(v)任何其他元数据,包括但不限于本文公开和/或描述的其他元数据。
在又一种布置中,当媒体回放系统被配置为通过经由联网麦克风系统接收到的语音命令来控制时,媒体回放系统执行语音命令并且可能还响应于经由联网麦克风系统接收到的语音命令而提供反馈,这有时可能是有益的。
例如,响应于联网麦克风系统接收到“将这首歌曲添加到我的收藏夹播放列表”的语音命令,有利的是,媒体回放系统(或媒体回放系统的至少一个媒体回放设备)将这首歌曲添加到收藏夹播放列表,并通过一些音频反馈(例如,“已经将[歌曲名称]添加到收藏夹播放列表中”)或一些类似的反馈确认这首歌曲已被添加到用户的收藏夹播放列表中。类似地,响应于联网麦克风系统接收到“这首歌曲的名称是什么?”的语音命令,可能需要媒体回放系统(或媒体回放系统的至少一个媒体回放设备)通过一些音频反馈(例如,“这首歌曲是The Beatles的All You Need is Love”)或者一些类似的反馈向用户通知这首歌曲的名称。
然而,有时一个或多个媒体回放设备可能不可用或者不能响应于联网麦克风系统接收到语音命令而执行语音命令(例如,回放媒体、重新配置媒体回放系统等的命令)或者提供反馈。在这种情况下,可能希望后备设备响应于经由联网麦克风系统接收到的语音命令来回放媒体、执行媒体回放系统重配置和/或提供反馈。
本文描述的一些实施例包括:(i)经由NMD接收语音命令以执行功能(例如,回放媒体内容、添加歌曲到播放列表或从中移除歌曲、购买歌曲等等),该NMD被配置为接收针对媒体回放系统的语音命令,其中,媒体回放系统包括主媒体回放设备,其被配置为响应于经由NMD接收的语音命令而执行功能,(ii)确定主媒体回放设备不可用于响应于语音命令而执行功能,以及(iii)响应于确定主媒体回放设备不可用于响应于语音命令而执行功能,指示后备设备响应于语音命令而执行功能。
本文描述的一些实施例可以附加地或替代地包括:(i)经由NMD接收语音命令,该NMD被配置为接收针对媒体回放系统的语音命令,其中,媒体回放系统包括主媒体回放设备,其被配置为响应于经由NMD接收的语音命令而提供第一反馈,(ii)确定主媒体回放设备不可用于响应于语音命令而提供第一反馈,以及(iii)响应于确定主媒体回放设备不可用于响应于语音命令而提供第一反馈,指示后备设备响应于语音命令而提供第二反馈。
另外,有时联网麦克风系统的一个或多个NMD可能不可用或者不能接收语音命令。在这种情况下,可能需要配置后备麦克风(可能暂时地)以接收针对媒体回放系统的语音命令。
本文描述的一些实施例包括:(i)确定联网麦克风系统的主NMD不可用于接收针对媒体回放系统的语音命令,其中,媒体回放系统包括一个或多个媒体回放设备,以及(ii)响应于确定主NMD不可用于接收语音命令,指定用于接收针对媒体回放系统的语音命令的后备麦克风。
在又一种布置中,本文描述的一些实施例可以涉及在媒体回放系统中指定默认回放设备并应用这种对默认回放设备的指定。在一个实施例中,可以将NMD分配给媒体回放系统中的回放区域。在这种情况下,可以将回放区域中的一个或多个回放设备指定为NMD的默认回放设备。本文的一些示例涉及用于指定默认回放设备和/或将NMD分配给回放区域的方法和过程。其他示例涉及用于使默认回放设备采取某些动作的方法和过程。在实施例中,经由NMD使媒体回放系统执行特定回放命令的命令可以不识别特定回放区域。在这种情况下,可以基于将NMD分配为回放区域的默认回放设备来识别默认回放设备。默认回放设备可以相应地执行特定回放命令。可以在以下部分中找到涉及指定默认回放设备和应用此指定的其他场景和示例。
在一个方面,提供了一种方法。该方法涉及:由计算设备确定NMD可用于被分配给本地回放网络内的一个或多个回放区域,由计算设备显示指示被分配NMD的至少一个回放区域的提示,由计算设备接收指示本地回放网络中将被分配NMD的特定回放区域的输入,以及,由计算设备存储指示NMD到特定回放区域的分配的数据。
在另一方面,提供了一种计算设备。该计算设备包括处理器和存储器,存储器上存储有可由处理器执行以使设备执行功能的指令。这些功能包括:确定NMD可用于分配给本地回放网络内的一个或多个回放区域,显示指示被分配NMD的至少一个回放区域的提示,接收指示本地回放网络中将被分配NMD的特定回放区域的输入,以及存储指示NMD向特定回放区域的分配的数据。
在又一方面,提供了一种非暂时性计算机可读存储器。非暂时性计算机可读存储器上存储有指令,所述指令可由计算设备执行以使计算设备执行功能。这些功能包括:确定NMD可用于分配给本地回放网络内的一个或多个回放区域,显示指示被分配NMD的至少一个回放区域的提示,接收指示本地回放网络中将被分配NMD的特定回放区域的输入,以及存储指示NMD向特定回放区域的分配的数据。
在另一方面,提供了另一种方法。该方法包括:由计算设备维护包括指示NMD的标识向媒体回放系统的回放区域的分配的数据的数据库,由计算设备接收指示(i)NMD的标识和(ii)媒体回放命令的消息,由计算设备基于数据库中的数据和接收到的消息来识别媒体回放系统中的回放区域,以及,由计算设备向回放区域发送指示媒体播放命令的消息。
在另一方面,计算设备可以包括处理器,以及其上存储有指令的存储器,所述指令可由处理器执行以使设备执行功能。这些功能包括:维护包括指示NMD的标识向媒体回放系统的回放区域的分配的数据的数据库,接收指示(i)NMD的标识和(ii)媒体回放命令的消息,基于数据库中的数据和接收到的消息来识别媒体回放系统中的回放区域,以及向回放区域发送指示媒体播放命令的消息。
又一方面可以包括非暂时性计算机可读存储器,其上存储可由计算设备执行以使计算设备执行功能的指令。这些功能可以包括:维护包括指示NMD的标识向媒体回放系统的回放区域的分配的数据的数据库,接收指示(i)NMD的标识和(ii)媒体回放命令的消息,基于数据库中的数据和接收到的消息来识别媒体回放系统中的回放区域,以及向回放区域发送指示媒体播放命令的消息。
在另一种布置中,本文描述的一些实施例可以涉及在媒体回放系统中播放对语音命令的音频响应,以及选择响应设备或区域来播放对语音命令的音频响应。在一个实施例中,响应设备或区域可以是预定的,并且在另一实施例中,可以基于上下文信息动态地选择响应设备或区域。
在一个方面,提供了一种方法。该方法可以涉及从与媒体回放系统相关联的麦克风设备接收语音命令。媒体回放系统可以包括一个或多个区域。可以基于区域的配对信息或能力中的至少一项来选择一个或多个回放设备中的至少一个回放设备或至少一个区域来播放音频响应,并且使得所选择的至少一个回放设备或区域播放音频响应。
在另一方面,提供了一种非暂时性计算机可读介质。非暂时性计算机可读介质上存储有指令,所述指令可由计算设备执行以使计算设备执行功能。这些功能包括:从与媒体回放系统相关联的麦克风设备接收语音命令,并且媒体回放系统可以包括一个或多个区域;基于上下文信息来选择一个或多个回放设备中的至少一个回放设备或者区域来播放音频响应;以及使所选择的至少一个回放设备或区域播放音频响应。
在又一方面,提供了一种装置。该装置包括处理器和存储器。存储器上存储有可由装置执行以使装置执行功能的指令。这些功能包括:经由被分配给包括一个或多个回放设备的区域的麦克风设备接收语音命令;基于区域的配对信息或者能力中的至少一项,选择一个或多个回放设备中的至少一个回放设备来播放音频响应;以及使所选择的至少一个回放设备播放音频响应。
虽然本文描述的一些示例可以涉及由诸如“用户”和/或其他实体之类的给定行动者执行的功能,但是应该理解,这仅仅出于解释的目的。除非权利要求本身的语言明确要求,否则不应将权利要求解释为要求任何此类示例行动者进行动作。本领域普通技术人员将理解,本公开包括许多其他实施例。
II.示例操作环境
图1示出了媒体回放系统100的示例配置,其中可以实施或实现本文公开的一个或多个实施例。如图所示的媒体回放系统100与具有若干房间和空间(例如,主卧室、书房、餐厅和起居室)的示例家庭环境相关联。如图1的示例所示,媒体回放系统100包括回放设备102-124、控制设备126和128、以及有线或无线网络路由器130。
可以在以下部分中找到关于示例媒体回放系统100的不同组件以及不同组件如何交互以向用户提供媒体体验的进一步讨论。虽然本文的讨论总体上可以参考示例媒体回放系统100,但是本文描述的技术不限于在如图1所示的家庭环境等内的应用。例如,本文描述的技术可以在可能需要多区域音频的环境中有用,例如,诸如餐馆、商场或机场之类的商业环境、诸如运动型多用途车(SUV)、公共汽车或汽车、船舶或船只、飞机等的载运工具。
a.示例回放设备
图2示出了示例回放设备200的功能框图,该示例回放设备200可以被配置为图1的媒体回放系统100的回放设备102-124中的一个或多个。回放设备200可以包括一个或多个处理器202、软件组件204、存储器206、音频处理组件208、音频放大器210、扬声器212、包括无线接口216和有线接口218的网络接口214和麦克风220。在一种情况下,回放设备200可以不包括扬声器212,而是包括用于将回放设备200连接到外部扬声器的扬声器接口。在另一种情况下,回放设备200既不包括扬声器212也不包括音频放大器210,而是包括用于将回放设备200连接到外部音频放大器或视听接收器的音频接口。
在一个示例中,一个或多个处理器202可以是一个或多个时钟驱动的计算组件,其被配置为根据存储在存储器206中的指令来处理输入数据。存储器206可以是有形计算机可读介质,其被配置为存储可由一个或多个处理器202执行的指令。例如,存储器206可以是数据存储装置,其可以加载有可由一个或多个处理器202执行以实现某些功能的一个或多个软件组件204。在一个示例中,该功能可以涉及回放设备200从音频源或另一回放设备检索音频数据。在另一示例中,该功能可以涉及回放设备200在网络上向另一设备或回放设备发送音频数据。在又一示例中,该功能可以涉及将回放设备200与一个或多个回放设备配对以创建多声道音频环境。
某些功能可以涉及回放设备200使音频内容的回放与一个或多个其他回放设备同步。在同步回放期间,收听者将优选地不能感知回放设备200和一个或多个其他回放设备回放音频内容之间的时间延迟差异。通过引用合并于此的题为“System and method forsynchronizing operations among a plurality of independently clocked digitaldata processing devices”的美国专利No.8,234,395,更详细地提供了回放设备之间的音频回放同步的一些示例。
存储器206还可以被配置为存储与回放设备200相关联的数据,诸如回放设备200所属的一个或多个区域和/或区域组、回放设备200可访问的音频源、或回放设备200(或某个其他回放设备)相关联的回放序列。该数据可以存储为一个或多个状态变量,这些状态变量被周期性地更新并用于描述回放设备200的状态。存储器206还可以包括与媒体系统的其他设备的状态相关联的数据,并且在设备之间不时地共享,使得一个或多个设备具有与系统相关联的最新数据。其他实施例也是可能的。
音频处理组件208可以包括一个或多个数模转换器(DAC)、音频预处理组件、音频增强组件或数字信号处理器(DSP)等。在一个实施例中,音频处理组件208中的一个或多个可以是一个或多个处理器202的子组件。在一个示例中,音频处理组件208可以处理和/或有意地更改音频内容以产生音频信号。然后可以向音频放大器210提供所产生的音频信号,以通过扬声器212进行放大和回放。具体地,音频放大器210可以包括被配置为将音频信号放大到用于驱动一个或多个扬声器212的电平的设备。扬声器212可以包括单独的换能器(例如“驱动器”)或包括具有一个或多个驱动器的壳体的完整扬声器系统。扬声器212的特定驱动器可包括例如低音炮(例如,用于低频)、中音驱动器(例如,用于中间频率)和/或高频扬声器(例如,用于高频)。在一些情况下,一个或多个扬声器212中的每个换能器可以由音频放大器210的单独对应音频放大器驱动。除了产生用于由回放设备200回放的模拟信号之外,音频处理组件208还可以被配置为处理要向一个或多个其他回放设备发送以进行回放的音频内容。
可以例如通过音频线路输入连接(例如,自动检测3.5mm音频线路输入连接)或网络接口214从外部源接收要由回放设备200处理和/或回放的音频内容。
网络接口214可以被配置为促进数据网络上回放设备200与一个或多个其他设备之间的数据流。这样,回放设备200可以被配置为通过数据网络从与回放设备200通信的一个或多个其他回放设备、局域网内的网络设备或通过诸如互联网之类的广域网从音频内容源接收音频内容。回放设备200可以向网络上的其他设备发送元数据和/或从网络上的其他设备接收元数据,该其他设备包括但不限于本文公开和描述的联网麦克风系统的组件。在一个示例中,由回放设备200发射和接收的音频内容和其他信号(例如,元数据和其他信号)可以以包含基于互联网协议(IP)的源地址和基于IP的目的地地址的数字分组数据的形式发射。在这种情况下,网络接口214可以被配置为解析数字分组数据,使得回放设备200正确地接收和处理去往回放设备200的数据。
如图所示,网络接口214可以包括无线接口216和有线接口218。无线接口216可以为回放设备200提供网络接口功能,以根据通信协议(例如,任何无线标准,包括IEEE802.11a、802.11b、802.11g、802.11n、802.11ac、802.15、4G移动通信标准等)与其他设备(例如,与回放设备200相关联的数据网络内的其他回放设备、扬声器、接收器、网络设备、控制设备)无线通信。有线接口218为回放设备200提供网络接口功能,以根据通信协议(例如,IEEE 802.3)通过有线连接与其他设备进行通信。虽然图2中所示的网络接口214包括无线接口216和有线接口218,但是在一些实施例中,网络接口214可以仅包括无线接口或仅包括有线接口。
麦克风220可以被布置为检测回放设备200的环境中的声音。例如,麦克风可以安装在回放设备的壳体的外壁上。麦克风可以是现在已知或以后开发的任何类型的麦克风,例如电容式麦克风、驻极体电容式麦克风或动态麦克风。麦克风可以对扬声器220的频率范围的一部分敏感。一个或多个扬声器220可以与麦克风220相反地操作。在一些方面,回放设备200可能没有麦克风220。
在一个示例中,回放设备200和一个其他回放设备可以配对以播放音频内容的两个单独的音频分量。例如,回放设备200可以被配置为播放左声道音频分量,而另一回放设备可以被配置为播放右声道音频分量,从而产生或增强音频内容的立体声效果。配对的回放设备(也称为“绑定的回放设备”)还可以与其他回放设备同步地播放音频内容。
在另一示例中,回放设备200可以与一个或多个其他回放设备声音合并以形成单个合并回放设备。合并回放设备可以被配置为与未合并回放设备或配对的回放设备不同地处理和再现声音,这是因为合并回放设备可以具有可以通过其呈现音频内容的附加扬声器驱动器。例如,如果回放设备200是被设计为呈现低频范围音频内容的回放设备(即,低音炮),则回放设备200可以与被设计为呈现全频率范围音频内容的回放设备合并。在这种情况下,当与低频回放设备200合并时,全频率范围回放设备可以被配置为仅呈现音频内容的中频和高频分量,而低频范围回放设备200呈现音频内容的低频分量。合并的回放设备还可以与单个回放设备或另一合并的回放设备配对。
通过示意性方式,SONOS公司目前提供(或已经提供)某些回放设备以供销售,包括“PLAY:1”、“PLAY:3”、“PLAY:5”、“PLAYBAR”、“CONNECT:AMP”、“CONNECT”和“SUB”。任意其他过去、现在、和/或将来的回放设备可以附加地或备选地用于实现本文公开的示例实施例的回放设备。此外,应当理解,回放设备不限于图2中示出的示例或SONOS的产品供应。例如,回放设备可以包括有线或无线耳机。在另一示例中,回放设备可以包括用于个人移动媒体回放设备的扩展基座,或与其交互。在又一示例中,回放设备可以是诸如电视、照明器材或用于室内或室外用途的一些其他设备之类的另一设备或组件的组成部分。
b.示例回放区域配置
返回参考图1的媒体回放系统100,该环境可以具有一个或多个回放区域,每个回放区域具有一个或多个回放设备。媒体回放系统100可以建立有一个或多个回放区域,之后可以添加或移除一个或多个区域以达到图1所示的示例配置。每个区域可以根据不同的房间或空间给出名称,例如书房、浴室、主卧室、卧室、厨房、餐厅、起居室和/或阳台。在一种情况下,单个回放区域可以包括多个房间或空间。在另一种情况下,单个房间或空间可以包括多个回放区域。
如图1所示,阳台、餐厅、厨房、浴室、书房和卧室区域均具有一个回放设备,而起居室和主卧室区域均具有多个回放设备。在起居室区域中,回放设备104、106、108和110可以被配置为作为单独的回放设备、作为一个或多个绑定的回放设备、作为一个或多个合并的回放设备、或其任何组合而同步播放音频内容。类似地,在主卧室的情况下,回放设备122和124可以被配置为作为单独的回放设备、作为绑定的回放设备、或作为合并的回放设备而同步地播放音频内容。
在一个示例中,在图1的环境中的一个或多个回放区域可以各自播放不同的音频内容。例如,用户可以在阳台区域中进行烧烤并且收听由回放设备102播放的嘻哈音乐,而另一用户可以在厨房区域中准备食物并且收听由回放设备114播放的古典音乐。在另一示例中,回放区域可以与另一回放区域同步地播放相同的音频内容。例如,用户可以在书房区域中,在该书房区域中回放设备118正在播放与阳台区域中的回放设备102正在播放的摇滚音乐相同的摇滚音乐。在这种情况下,回放设备102和118可以同步播放摇滚音乐,使得用户在不同回放区域之间移动时可以无缝地(或至少基本上无缝地)享受被大声播放的音频内容。可以以类似于如先前引用的美国专利No.8,234,395中所述的回放设备之间的同步方式来实现回放区域之间的同步。
如上所述,可以动态地修改媒体回放系统100的区域配置,并且在一些实施例中,媒体回放系统100支持多种配置。例如,如果用户将一个或多个回放设备物理地移动到区域或从区域移动,则可以重新配置媒体回放系统100以适应这些改变。例如,如果用户将回放设备102从阳台区域物理地移动到书房区域,则书房区域现在会包括回放.设备118和回放设备102。回放设备102可以经由诸如控制设备126和128之类的控制设备与书房区域配对或分组在一起和/或被重新命名(如果需要)。另一方面,如果一个或多个回放设备被移动到家庭环境中已经不是回放区域的特定区域,则可以针对该特定区域创建新的回放区域。
此外,媒体回放系统100的不同回放区域可以动态地组合成区域组或分成单独的回放区域。例如,餐厅区域和厨房区域114可以组合成用于宴会的区域组,使得回放设备112和114可以同步地呈现(例如,回放)音频内容。另一方面,如果该用户希望在起居室空间中听音乐而另一用户希望看电视,则起居室区域可以被分成包括回放设备104的电视区域和包括回放设备106、108和110的收听区域。
c.示例控制设备
图3示出了示例控制设备300的功能框图,该示例控制设备300可以被配置为媒体回放系统100的控制设备126和128中的一个或两者。如图所示,控制设备300可以包括一个或多个处理器302、存储器304、网络接口306、用户界面308、麦克风310和软件组件312。在一个示例中,控制设备300可以是用于媒体回放系统100的专用控制器。在另一示例中,控制设备300可以是可以在其上安装媒体回放系统控制器应用软件的网络设备,例如iPhoneTM、iPadTM或任何其他智能电话、平板电脑或网络设备(例如,联网计算机,如PC或MacTM)。
一个或多个处理器302可以被配置为执行与促进媒体回放系统100的用户访问、控制和配置相关的功能。存储器304可以是数据存储装置,其可以加载有可由一个或多个处理器302执行以实现这些功能的一个或多个软件组件。存储器304还可以被配置为存储媒体回放系统控制器应用软件以及与媒体回放系统100和用户相关联的其他数据。
在一个示例中,网络接口306可以基于行业标准(例如,包括IEEE 802.3的红外、无线电、有线标准,包括IEEE 802.11a、802.11b、802.11g、802.11n、802.11ac、802.15的无线标准,4G移动通信标准等)。网络接口306可以为控制设备300提供与媒体回放系统100中的其他设备进行通信的手段。在一个示例中,数据和信息(例如,状态变量)可以经由网络接口306在控制设备300与其他设备之间传送。例如,媒体回放系统100中的回放区域和区域组配置可以由控制设备300从回放设备或另一网络设备接收,或者由控制设备300经由网络接口306向另一回放设备或网络设备发送。在一些情况下,其他网络设备可以是另一控制设备。
诸如音量控制和音频回放控制之类的回放设备控制命令也可以经由网络接口306从控制设备300向回放设备传送。如上所述,还可以由用户使用控制设备300来执行对媒体回放系统100的配置的改变。配置改变可以包括向/从区域添加/移除一个或多个回放设备、向/从区域组添加/移除一个或多个区域、形成绑定或合并的播放器、将一个或多个回放设备从绑定或合并的播放器分开等等。因此,控制设备300有时可以被称为控制器,无论控制设备300是专用控制器还是安装有媒体回放系统控制器应用软件的网络设备。
控制设备300可以包括麦克风310。麦克风310可以被布置为检测控制设备300的环境中的声音。麦克风310可以是现在已知或以后开发的任何类型的麦克风,例如电容式麦克风、驻极体电容式麦克风或动态麦克风。麦克风可能对频率范围的一部分敏感。两个或更多个麦克风310可以被布置为捕捉音频源(例如,语音、可听声音)的位置信息和/或帮助过滤背景噪声。
控制设备300的用户界面308可以被配置为通过提供诸如图4中所示的控制器界面400之类的控制器界面来便于用户访问和控制媒体回放系统100。控制器界面400包括回放控制区410、回放区域区420、回放状态区430、回放队列区440和音频内容源区450。所示的用户界面400仅是可以在诸如图3的控制设备300(和/或图1的控制设备126和128)之类的网络设备上提供并且由用户访问以控制诸如媒体回放系统100之类的媒体回放系统的用户界面的一个示例。备选地,可以在一个或多个网络设备上实现不同格式、样式和交互序列的其他用户界面,以提供对媒体回放系统的可比的控制访问。
回放控制区410可以包括可选择(例如,通过触摸或通过使用光标)图标以使得所选回放区域或区域组中的回放设备播放或暂停、快进、倒回、跳到下一个、跳到上一个、进入/退出随机播放模式、进入/退出重复模式、进入/退出交叉淡入淡出模式(cross fademode)。回放控制区410还可以包括可选图标,以修改均衡设置和回放音量等。
回放区域区420可以包括媒体回放系统100内的回放区域的表示。在一些实施例中,回放区域的图形表示可以是可选择的,以引出在媒体回放系统中管理或配置回放区域的附加的可选图标,例如创建绑定区域、创建区域组、区域组分离、和区域组的重命名等。
例如,如图所示,可以在回放区域的每个图形表示内提供“分组”图标。在特定区域的图形表示内提供的“分组”图标可以是可选择的,以引出在媒体回放系统中选择一个或多个其他区域以与特定区域分组在一起的选项。一旦分组,已经与特定区域分组在一起的区域中的回放设备将被配置为与该特定区域中的回放设备同步地播放音频内容。类似地,可以在区域组的图形表示内提供“分组”图标。在这种情况下,“分组”图标可以是可选择的,以引出取消选择区域组中的一个或多个区域以从该区域组中移除的选项。经由诸如用户界面400之类的用户界面对区域进行分组和取消分组的其他交互和实现也是可能的。当回放区域或区域组配置被修改时,可以动态地更新回放区域在回放区域区420中的表示。
回放状态区430可以包括当前正在所选回放区域或区域组中播放、先前播放或安排接下来播放的音频内容的图形表示。可以在用户界面上(例如,在回放区域区420和/或回放状态区430内)可视地区分所选回放区域或区域组。图形表示可以包括曲目标题、艺术家姓名、专辑名称、专辑年份、曲目长度以及当经由用户界面400控制媒体回放系统时用户知晓可以是有用的其他相关信息。
回放队列区440可以包括与所选回放区域或区域组相关联的回放队列中的音频内容的图形表示。在一些实施例中,每个回放区域或区域组可以与回放队列相关联,该回放队列包含与回放区域或区域组回放的零个或多个音频项相对应的信息。例如,回放队列中的每个音频项可以包括统一资源标识符(URI)、统一资源定位符(URL)或一些其他标识符,其可以由回放区域或区域组中的回放设备用于从本地音频内容源或联网音频内容源查找和/或检索音频项,可能供回放设备回放。
在一个示例中,可以将播放列表添加到回放队列,在这种情况下,可以将与播放列表中的每个音频项相对应的信息添加到回放队列。在另一示例中,回放队列中的音频项可以被保存为播放列表。在又一示例中,当回放区域或区域组正在连续播放流式音频内容(例如,可以继续播放直到被停止的网络收音机)而不是具有回放持续时间的分立音频项时,回放队列可以是空的、或者被填充但是“未使用”。在备选实施例中,回放队列可以包括网络收音机和/或其他流式音频内容项,并且当回放区域或区域组正在播放这些项目时“使用中”。其他示例也是可能的。
当回放区域或区域组被“分组”或“取消分组”时,可以清除或重新关联与受影响的回放区域或区域组相关联的回放队列。例如,如果包括第一回放队列的第一回放区域与包括第二回放队列的第二回放区域被分组在一起,则建立的区域组可以具有最初为空的关联回放队列,其包含来自第一回放队列的音频项(例如,如果第二回放区域被添加到第一回放区域),其包含来自第二播放队列的音频项(例如,如果第一回放区域被添加到第二回放区域),或者来自第一和第二回放队列两者的音频项的组合。随后,如果建立的区域组被取消分组,则所得的第一回放区域可以与先前的第一回放队列重新关联,或者与新回放队列相关联,该新回放队列是空的或者包含在建立的区域组被取消分组之前与建立的区域组相关联的回放队列中的音频项。类似地,所得的第二回放区域可以与先前的第二回放队列重新关联,或者与新回放队列相关联,该新回放队列是空的或者包含在建立的区域组被取消分组之前与建立的区域组相关联的回放队列中的音频项。其他示例也是可能的。
返回参考图4的用户界面400,音频内容在回放队列区440中的图形表示可以包括曲目标题、艺术家姓名、曲目长度以及与回放队列中的音频内容相关联的其他相关信息。在一个示例中,音频内容的图形表示可以是可选择的,以引出附加的可选图标来管理和/或操纵回放队列和/或回放队列中表示的音频内容。例如,可以从回放队列中移除所表示的音频内容,将所表示的音频内容移动到回放队列内的不同位置,或者选择所表示的音频内容以立即播放或在任何当前播放的音频内容之后进行播放等。与回放区域或区域组相关联的回放队列可以存储在回放区域或区域组中的一个或多个回放设备上、不存在于回放区域或区域组中的回放设备上、和/或一些其他指定设备上的存储器中。
音频内容源区450可以包括可选音频内容源的图形表示,可以从该图像表示中检索音频内容并由所选择的回放区域或区域组播放。有关音频内容源的讨论可在以下部分中找到。
d.示例音频内容来源
如前所述,区域或区域组中的一个或多个回放设备可以被配置为从各种可用音频内容源检索回放音频内容(例如,根据音频内容的对应URI或URL)。在一个示例中,音频内容可以由回放设备直接从对应的音频内容源(例如,线路输入连接)检索。在另一示例中,音频内容可以经由一个或多个其他回放设备或网络设备经由网络提供给回放设备。
示例音频内容源可以包括:媒体回放系统(例如,图1的媒体回放系统100)中的一个或多个回放设备的存储器、一个或多个网络设备(例如,控制设备、支持网络的个人计算机、或者网络附属存储器(NAS))上的本地音乐库、通过互联网(例如云)提供音频内容的流媒体音频服务、或者通过回放设备或网络设备上的线路输入连接来连接到媒体回放系统的音频源,等等。
在一些实施例中,可以在诸如图1的媒体回放系统100的媒体回放系统中定期添加音频内容源,或从中移除音频内容源。在一个示例中,每当添加、移除或更新一个或多个音频内容源时,可以执行对音频项编索引。对音频项编索引可以包括:扫描媒体回放系统中的回放设备可访问的网络共享的所有文件夹/目录中的可识别音频项,以及生成或更新包含元数据(例如,标题、艺术家、专辑、曲目长度等)及其他关联信息(例如,找到的每个可识别音频项的URI或URL)的音频内容数据库。用于管理和维护音频内容源的其他示例也是可能的。
以上关于回放设备、控制器设备、回放区域配置和媒体内容源的讨论仅提供了操作环境的一些示例,在该操作环境中可以实现下面描述的功能和方法。本文未明确描述的媒体回放系统、回放设备和网络设备的其他操作环境和配置也可以应用且适合于功能和方法的实现。
e.多个联网设备的示例
图5示出了示例多个设备500,其可以被配置为基于语音控制提供音频回放体验。本领域普通技术人员将理解,图5中所示的设备仅用于说明目的,并且包括不同和/或附加(或较少)设备的变型是可能的。如图所示,多个设备500包括计算设备504、506和508;网络麦克风设备(NMD)512、514和516;回放设备(PBD)532、534、536和538;和控制器设备(CR)522。
多个设备500中的每一个可以是具有网络功能的设备,其可以根据一个或多个网络协议(例如,NFC、蓝牙、以太网和IEEE 802.11等),通过一种或多种类型的网络(例如,广域网(WAN)、局域网(LAN)和个人域网(PAN)等),与多个设备中的一个或多个其他设备建立通信。
如图所示,计算设备504、506和508可以是云网络502的一部分。云网络502可以包括附加的计算设备。在一个示例中,计算设备504、506和508可以是不同的服务器。在另一示例中,计算设备504、506和508中的两个或更多个可以是单个服务器的模块。类似地,计算设备504、506和508中的每一个可以包括一个或多个模块或服务器。本文中为了便于说明,计算设备504、506和508中的每一个可以被配置为执行云网络502内的特定功能。例如,计算设备508可以是用于流媒体音乐服务的音频内容源。
如图所示,计算设备504可以被配置为通过通信路径542与NMD 512、514和516对接。NMD 512、514和516可以是一个或多个“智能家居”系统的组件。在一种情况下,NMD 512、514和516可以物理地分布在整个家庭中,类似于图1所示的设备的分布。在另一种情况下,NMD 512、514和516中的两个或更多个可以物理地位于彼此相对靠近的范围内。通信路径542可以包括一种或多种类型的网络,例如,包括互联网的WAN、LAN和/或PAN,等等。
在一个示例中,NMD 512、514和516中的一个或多个可以是被配置为主要用于音频检测的设备。在另一示例中,NMD 512、514和516中的一个或多个可以是具有各种主要实用程序的设备的组件。例如,如上面结合图2和3所讨论的,NMD 512、514和516中的一个或多个可以是回放设备200的麦克风220或网络设备300的麦克风310。此外,在一些情况下,NMD512、514和516中的一个或多个可以是回放设备200或网络设备300。在示例中,NMD 512、514和/或516中的一个或多个可以包括布置在麦克风阵列中的多个麦克风。在一些实施例中,NMD 512、514和/或516中的一个或多个可以是移动计算设备(例如,智能电话、平板电脑或其他计算设备)上的麦克风。
如图所示,计算设备506可以被配置为通过通信路径544与CR 522和PBD 532、534、536和538对接。在一个示例中,CR 522可以是网络设备,例如,图2的网络设备200。因此,CR522可以被配置为提供图4的控制器界面400。类似地,PBD 532、534、536和538可以是回放设备,例如,图3的回放设备300。这样,PBD 532、534、536和538可以物理地分布在整个家庭中,如图1所示。为了说明目的,PBD 536和538可以是绑定区域530的一部分,而PBD 532和534可以是它们各自区域的一部分。如上所述,PBD 532、534、536和538可以被动态地绑定、分组、解除绑定和解除分组。通信路径544可以包括一种或多种类型的网络,例如,包括互联网的WAN、LAN和/或PAN,等等。
在一个示例中,与NMD 512、514和516一样,CR 522和PBD 532、534、536和538也可以是一个或多个“智能家居”系统的组件。在一种情况下,PBD 532、534、536和538与NMD512、514和516分布在相同的家庭中。此外,如上所述,PBD 532、534、536和538中的一个或多个可以是NMD 512、514和516中的一个或多个。
NMD 512、514和516可以是局域网的一部分,并且通信路径542可以包括通过WAN(通信路径未示出)将NMD 512、514和516的局域网链接到计算设备504的接入点。同样地,NMD 512、514和516中的每一个可以通过该接入点彼此通信。
类似地,CR 522和PBD 532、534、536和538可以是如前面部分中讨论的局域网和/或本地回放网络的一部分,并且通信路径544可以包括通过WAN将CR 522和PBD 532、534、536和538的局域网和/或本地回放网络链接到计算设备506的接入点。这样,CR 522和PBD532、534、536和538中的每一个也可以通过该接入点彼此进行通信。
在一个示例中,通信路径542和544可以包括相同的接入点。在示例中,NMD 512、514和516,CR 522和PBD 532、534、536和538中的每一个可以通过家庭的相同接入点来访问云网络502。
如图5所示,NMD 512、514和516,CR 522和PBD 532、534、536和538中的每一个还可以通过通信方式546与一个或多个其他设备直接通信。如本文所述的通信方式546可以涉及根据一个或多个网络协议的、通过一种或多种类型的网络的、在设备之间的一种或多种形式的通信,和/或可以涉及通过一个或多个其他网络设备的通信。例如,通信方式546可以包括,例如,蓝牙TM(IEEE 802.15)、NFC、无线直连和/或专有无线等中的一个或多个。
在一个示例中,CR 522可以通过蓝牙TM与NMD 512通信,并且可以通过另一局域网与PBD 534通信。在另一示例中,NMD 514可以通过另一局域网与CR 522通信,并且可以通过蓝牙与PBD 536通信。在又一示例中,PBD 532、534、536和538中的每一个可以根据生成树协议,通过本地回放网络彼此通信,与此同时,分别通过不同于本地回放网络的局域网与CR522通信。其他示例也是可能的。
在一些情况下,NMD 512、514和516,CR 522和PBD 532、534、536和538之间的通信方式可以根据设备间的通信类型、网络状况和/或延迟要求而改变。例如,当NMD 516首先被引入具有PBD 532、534、536和538的家庭时,可以使用通信方式546。在一种情况下,NMD 516可以通过NFC将对应于NMD 516的标识信息发送到PBD 538,并且作为响应,PBD 538可以通过NFC(或一些其他形式的通信)将局域网信息发送到NMD 516。然而,在家庭内配置了NMD516之后,NMD 516和PBD 538之间的通信方式可能会改变。例如,NMD 516可以随后通过通信路径542、云网络502和通信路径544与PBD 538通信。在另一示例中,NMD和PBD可能不通过本地通信方式546进行通信。在另一示例中,NMD和PBD可以主要通过本地通信方式546进行通信。其他示例也是可能的。
在说明性示例中,NMD 512、514和516可以被配置为接收用于控制PBD 532、534、536和538的语音输入。可用的控制命令可以包括先前讨论的任何媒体回放系统控制,例如,回放音量控制、回放传输控制、音乐源选择和分组,等等。在一种情况下,NMD 512可以接收用于控制PBD 532、534、536和538中的一个或多个的语音输入。响应于接收到语音输入,NMD512可以通过通信路径542将语音输入发送到计算设备504以进行处理。在一个示例中,计算设备504可以将语音输入转换为等效的文本命令,并解析文本命令以识别命令。然后,计算设备504可以随后向计算设备506发送文本命令,然后计算设备506转而可以控制PBD 532-538中的一个或多个来执行命令。在另一示例中,计算设备504可以将语音输入转换为等效的文本命令,然后将文本命令发送到计算设备506。然后,计算设备506可以解析文本命令以识别一个或多个回放命令,然后计算设备506可以另外控制PBD 532-538中的一个或多个以执行命令。
例如,如果文本命令是“在区域1中播放来自流媒体服务1的艺术家1的曲目1”,则计算设备506可以识别(i)流媒体服务1上可用的艺术家1的曲目1的URL,以及(ii)区域1中的至少一个回放设备。在该示例中,来自流媒体服务1的艺术家1的曲目1的URL可以是指向计算设备508的URL,并且区域1可以是绑定区域530。这样,当识别出URL、以及PBD 536和538中的一个或两个时,计算设备506可以通过通信路径544向PBD 536和538中的一个或两个发送所识别的URL,用于回放。作为响应,PBD 536和538中的一个或两个可以根据接收到的URL从计算设备508中检索音频内容,并且开始播放来自流媒体服务1的艺术家1的曲目1。
本领域普通技术人员将理解,以上仅是一个说明性示例,并且其他实现也是可能的。在一种情况下,如上所述,多个设备500中的一个或多个执行的操作可以由多个设备500中的一个或多个其他设备来执行。例如,语音输入到文本命令的转换可以备选地、部分地或完全由另外一个或多个设备来执行,例如NMD 512、计算设备506、PBD 536和/或PBD 538。类似地,URL的标识可以替代地、部分地或完全地由另一个或多个设备执行,例如NMD 512、计算设备504、PBD 536和/或PBD 538。
f.示例网络麦克风设备
图6示出了示例网络麦克风设备600的功能框图,该示例网络麦克风设备600可以被配置为图5的NMD 512、514和516中的一个或多个。如图所示,网络麦克风设备600包括一个或多个处理器602、存储器604、麦克风阵列606(例如,一个或多个麦克风)、网络接口608、用户界面610、软件组件612和扬声器614。本领域普通技术人员将理解,其他网络麦克风设备配置和布置也是可能的。例如,备选地,网络麦克风设备可以不包括扬声器614,或者具有单个麦克风而不是麦克风阵列606。
一个或多个处理器602可以包括一个或多个处理器和/或控制器,其可以采用通用或专用处理器或控制器的形式。例如,一个或多个处理器602可以包括微处理器、微控制器、专用集成电路、数字信号处理器等。存储器604可以是数据存储装置,其可以加载有可由一个或多个处理器602执行以实现这些功能的一个或多个软件组件。因此,存储器604可以包括一个或多个非暂时性计算机可读存储介质,其示例可以包括:易失性存储介质(例如,随机存取存储器、寄存器、高速缓存等)、以及非易失性存储介质(例如,只读存储器、硬盘驱动器、固态驱动器、闪存和/或光存储设备等)。
麦克风阵列606可以是多个麦克风,其被布置为检测网络麦克风设备600的环境中的声音。麦克风阵列606可以包括现在已知或以后开发的任何类型的麦克风,例如,电容式麦克风、驻极体电容式麦克风或动态麦克风等。在一个示例中,麦克风阵列可以被布置为检测来自相对于网络麦克风设备的一个或多个方向的音频。麦克风阵列606可以对一部分频段敏感。在一个示例中,麦克风阵列606的第一子集可以对第一频段敏感,而麦克风阵列的第二子集可以对第二频段敏感。麦克风阵列606还可以被布置为捕获音频源(例如,语音、可听到的声音)的位置信息和/或帮助滤除背景噪声。值得注意的是,在一些实施例中,麦克风阵列可以仅由单个麦克风组成,而不是由多个麦克风组成。
网络接口608可以被配置为促进各种网络设备(例如,参考图5,其中的CR 522、PBD532-538、云网络502中的计算设备504-508,以及其他网络麦克风设备等)之间的无线和/或有线通信。这样,网络接口608可以采用任何合适的形式来执行这些功能,其示例可以包括:以太网接口、串行总线接口(例如,FireWire、USB 2.0等)、适于促进无线通信的芯片组和天线、和/或提供有线和/或无线通信的任何其他接口。在一个示例中,网络接口608可以基于行业标准(例如,包括IEEE 802.3的红外、无线电、有线标准,包括IEEE 802.11a、802.11b、802.11g、802.11n、802.11ac、802.15的无线标准,4G移动通信标准等)。
网络麦克风设备600的用户界面610可以被配置为促进用户与网络麦克风设备的交互。在一个示例中,用户界面608可以包括物理按钮、设置在触敏屏幕和/或表面上的图形界面等中的一个或多个,用于用户直接向网络麦克风设备600提供输入。用户界面610还可以包括灯和扬声器614中的一个或多个,以便向用户提供视觉和/或听觉反馈。在一个示例中,网络麦克风设备600还可以被配置为通过扬声器614回放音频内容。
III.用于内容混合的示例系统、装置和方法
在一种布置中,实施例尤其可以涉及当NMD或回放系统输出与音频内容不同的内容时调整回放系统回放的音频内容的音量。在许多情况下,NMD可以放置在PBD 532-538附近。例如,回放设备可能与NMD放置在同一房间中,使得当回放设备正在回放音频内容时难以听到内容输出。
图7-图8示出了可以在所公开的操作环境中实现的实施例。图7是所执行的使得当回放设备也正在回放音频内容时能够听到NMD输出的内容的功能的流程图。在一些示例中,所描述的这些功能中的一个或多个可以由回放设备执行。在其他示例中,诸如504-508之类的计算设备还可以结合回放设备或代替回放设备来执行这些功能中的一个或多个。计算设备可以与回放设备相关联,并执行与回放设备相关联的处理。
在702处,可以接收消息。该消息可以与NMD相关联。可以经由通信网络546从NMD接收消息。备选地,可以经由通信链路544、546从与NMD相关联的计算设备(例如,504-508)接收消息。其他示例也是可能的。
该消息可以指示由NMD输出的内容,由NMD确定的要输出的内容,和/或由与NMD相关联的计算设备确定的要输出的内容(本文统称为NMD内容)。NMD内容可以采用各种形式,其示例可以包括语音输出、话音、音乐、音调或警报。该消息可以指定NMD可以在回放设备和NMD共同的时钟参考所定义的特定时间输出内容。该消息还可以指定NMD输出的内容的持续时间。其他示例也可以用于指示NMD何时可以输出内容。
可以向回放系统中的一个或多个回放设备发送该消息。在一些情况下,可以向媒体回放系统中的所有回放设备发送该消息。在另一示例中,可以向回放设备的子集发送该消息。回放设备的子集可以基于NMD是否与回放设备处于相同的一个或多个区域。
另外或备选地,回放设备的子集可以基于NMD是否与回放设备绑定。该绑定可以指示回放设备和NMD彼此非常靠近,例如在同一房间或区域中或者同步地播放音频内容。在这方面,这些回放设备可以直接影响是否可以通过例如由回放设备播放的音乐收听NMD内容。
在一些示例中,绑定的回放设备和NMD可以使用各种联网技术来减少它们之间的时延。例如,可以使用本地而非WAN网络连接(LAN或蓝牙)进行通信。作为另一示例,当回放设备被绑定至NMD时,通信可以恢复到本地网络中的不同频率范围,例如从“典型的”2.4Ghz通信切换到5Ghz通信。作为又一示例,通信可以切换到2.4或5Ghz频谱上的保留声道,或者当回放设备和NMD被绑定时,可以减少其他网络流量,例如回放设备可以停止作为其他网络流量的中继节点。其他示例也是可能的。
在704处,回放设备可以在消息中指定的时间调整(例如,减小)其音量使其低于NMD在输出内容时将使用的音量等级。可以在回放设备接收的消息中指定音量,或者音量可以已经由回放设备预定义。可以减小音量达NMD内容的持续时间所定义的时间段。降低音量的目的可以是使得收听者能够在音频内容继续在回放设备上播放的同时较好地收听NMD输出的内容。与NMD内容相比降低音频内容的音量的过程被称为回避。
作为示例,考虑在厨房和卧室中具有回放设备的媒体回放系统,并且NMD位于厨房中。厨房回放设备可以与NMD绑定。厨房回放设备和卧室回放设备可以回放音频。该绑定可能会导致当NMD输出内容时厨房回放设备被回避而不是卧室回放设备。
作为另一示例,所有回放设备可以位于不同区域中。但是回放设备在其中操作的环境可以是诸如具有起居室区域和餐厅区域的起居室和餐厅组合空间之类的开放区域。在这种情况下,NMD可以知道该区域的性质(可能在配置NMD时)。在这种情况下,所有回放设备都可能被回避,这是因为否则仍然难以在开放区域中收听NMD输出的内容。
在706处,回放设备然后可以恢复正在回放的音频内容的音量。例如,在NMD输出内容之后,可以恢复音量。NMD发送的消息可以指示NMD内容的持续时间。在这方面,回放设备能够确定已经输出了NMD内容,然后恢复正在回放的音频内容的音量。备选地,当回放设备要恢复音频内容的音量时,NMD可以向回放设备发送消息,而不是由回放设备做出该确定。在一些实施例中,回放设备可以存储在704处的调整之前回放的内容的音量,以便可以恢复该音量。
作为NMD输出音频内容的替代或补充,媒体回放系统可以输出NMD内容。在这种情况下,NMD可以不输出NMD内容或者可以与回放设备一起输出NMD内容。图8是可以在播放音频内容以及输出NMD内容时执行的功能的流程图。在一些示例中,所描述的功能中的一个或多个可以由回放设备执行。在其他示例中,诸如504-508之类的计算设备还可以结合回放设备或代替回放设备来执行这些功能中的一个或多个。与回放设备相关联的计算设备可以执行与回放设备相关联的处理。
在802处,可以接收消息。该消息可以与NMD相关联,并且来自NMD或来自与NMD相关联的计算设备。可以经由通信网络546从NMD接收消息。备选地,可以经由通信链路544从与NMD相关联的计算设备(例如,504-508)接收消息。其他示例也是可能的。
该消息可以包括对NMD内容的指示。该指示可以是定义内容输出的音频文件。例如,音频文件可以包括代表NMD内容的数字样本。可以向媒体回放系统中绑定至NMD的回放设备和/或所有回放设备发送该消息。
可以以各种方式处理回放设备上输出的NMD内容。作为一个示例,在804处,回放设备可以被布置为将NMD内容与回放设备正在播放的音频内容(例如,歌曲)混合。回放设备可以以固定的采样率回放音频内容。回放设备可以通过降低音频内容的采样率和NMD内容的采样率来将音频内容与NMD内容混合,使得回放设备仍然能够以相同的固定采样率回放混合的音频内容和NMD输出。在该混合过程期间,可以调整音频内容和/或NMD内容的音量以便于收听回放设备上的NMD内容。
作为另一示例,在806处,可以静音在回放设备上回放的音频内容,并且可以在回放设备上输出NMD内容。如果还有其他回放设备502也在同步播放相同的音频内容,则这些回放设备502可以继续回放该音频内容。当回放设备完成输出NMD内容时,回放设备可以继续与其他回放设备同步地回放音频内容。例如,扬声器的左声道可以静音并输出NMD内容,右声道可以继续播放音频内容。然后,回放设备可以通过使用音频内容中的呈现时间戳来继续回放音频内容。呈现时间戳可以指示音频内容的回放定时。基于回放设备输出NMD内容的时间和NMD内容输出的持续时间,回放设备能够使用呈现时间戳确定在输出NMD内容之后开始播放音频内容。在此过程期间,可以调整音频内容和/或NMD内容输出的音量以便于收听媒体回放系统上的NMD内容输出。
作为又一示例,在808处,可以暂停在回放设备上回放的音频内容,并且可以在回放设备上输出NMD内容。当回放设备从暂停状态恢复时,可以在回放设备中断回放的点处回放音频内容。在这种情况下,可以暂停当回放设备输出NMD内容时也同步播放音频内容的任何其他回放设备502。同样,在此过程期间,可以调整音频内容和/或NMD内容输出的音量以便于收听媒体回放系统上的NMD内容输出。
如上所述,回放设备输出的NMD内容可以是基线音量。这可以是先前针对回放设备设置或由NMD在消息中指示的适当音量。在一些实施例中,可以自适应地调整由回放设备输出的NMD内容和/或音频内容的音量。
例如,可以关于基线音量相对于回放设备在回避之前和之后回放的音频内容的音量来调整NMD内容输出的音量。当大幅回避音频内容的音量时,NMD内容输出的音量可以从基线音量大幅下降。另一方面,如果由回放设备回放的音频内容的音量稍微改变,则NMD内容输出的音量可以从基线音量稍微改变。类似地,可以相对于NMD内容的音量来调整音频内容的音量。
如果NMD正在输出内容,则回放设备可以向NMD发送所确定的NMD内容音量的指示,使得NMD可以以该音量输出NMD内容。备选地,回放设备可以在输出NMD内容期间发送(在回避之前或之后)由回放设备播放的音频内容的音量的指示,使得NMD可以确定NMD内容输出的音量。其他示例也是可能的。
因此,如果由回放设备回放的音频内容已经很大声,则NMD内容输出可以不是很大声。类似地,如果正在回放的音频内容已经是柔和的,则NMD内容输出可以不是柔和的。更进一步,在一些实施例中,回放设备或NMD可以根本不调整音频内容的音量或NMD内容的音量。音量可能是可接受的,因此不需要调整。
IV.涉及联网回放系统和联网麦克风系统的元数据交换的示例系统、装置和方法
在另一种布置中,为了促进媒体回放系统的语音控制,在一些情况下可能希望媒体回放系统共享、交换或以其他方式向联网麦克风系统提供元数据(反之亦然)。在一些实施例中,媒体回放系统包括PBD 532、534、536和538以及计算设备506(其被配置为媒体回放系统服务器)中的一个或多个,并且联网麦克风系统包括NMD 512、514和516以及计算设备504(其被配置为联网麦克风系统服务器)中的一个或多个。
从媒体回放系统共享到联网麦克风系统的元数据的示例包括以下中的任何一个或多个:(i)媒体回放系统的一个或多个配置参数,(ii)关于当前经由媒体回放系统播放的音频内容的信息,(iii)关于由媒体回放系统播放的音频内容的历史信息,(iv)与音频内容有关的用户偏好信息,(v)与媒体回放系统配置有关的用户偏好信息,以及(vi)其他元数据,包括但不限于本文公开或描述的任何元数据。从联网麦克风系统共享到媒体回放系统的元数据的示例可以包括以下中的任何一个或多个:(i)联网麦克风系统的一个或多个配置参数,(ii)哪些用户已经使用联网麦克风系统,并且可能在何时使用,(iii)由联网麦克风系统接收的命令类型和/或信息请求,(iv)来自其他信息源的信息,例如本地天气、体育比分、新闻、本地音乐会信息、用户是否通过联网麦克风系统购买了先前通过媒体回放系统播放的专辑,和/或(v)其他元数据,包括但不限于本文公开或描述的任何元数据。在联网麦克风系统和媒体回放系统之间共享的元数据可以涉及与媒体回放系统和联网麦克风系统中的一个或多个有关的任何特征、配置或其他类型的信息,因此可以存在这种元数据的其他示例。
媒体回放系统的配置参数的示例包括各个PBD 532-538所在的区域(例如,厨房、阳台、起居室、卧室等,如图1所示)或给予各个PBD的名称。配置参数还可以包括关于哪些PBD已经被分组在同步组中、被分组到合并的回放设备中、和/或被分组到绑定的回放设备组中的信息。配置参数还可以包括关于特定PBD被配置用于播放的一个或多个音频声道的信息(例如,“左声道”或“左后声道”等)。配置参数还可以包括针对各个PBD或PBD组的均衡设置。在一些实施例中,各个PBD或PBD组的均衡设置可以包括针对各个PBD或PBD组的SonosTrueplayTM设置。配置参数还可以包括各个PBD的定向状态信息,例如特定PBD是正面朝上、倒置还是侧放的。配置参数还可以包括联网信息,例如,特定PBD是操作为回放设备组中的组协调者(例如,“主”)还是操作为回放设备组中的组成员(例如,“从”)。配置参数还可以包括各种其他物理状态信息,例如,PBD的电池电量、PBD是否物理附接到电源插座、PBD是否附接到基座、和/或PBD当前是否在运动中(即被移动)。
配置参数还可以包括可以在其中配置各个PBD的可用(例如,先前存储的)区域场景。单个区域场景可以包括配置有特定配置参数集的特定PBD分组。例如,“晚间爵士”区域场景可以(i)将厨房、餐厅、起居室和阳台(参见图1)中的PBD分组成同步组,以便所有PBD102-114被配置为同步播放相同的媒体内容,(ii)针对各个PBD 102-114配置音量和/或均衡设置,以考虑所有PBD 102-114一起播放的事实,(iii)将各个PBD 102-114的均衡器设置配置为“爵士”设置,和/或(iv)从一个或多个播放列表和/或音乐订阅服务将爵士乐曲目加载到同步PBD 102-114组的回放队列中。在标题为“Controlling and manipulatinggroupings in a multi-zone media system”的美国专利No.8,483,853和标题为“Multiple Groupings in a Playback System”的未决申请14/737,199中描述了区域场景。专利8,483,853和申请14/737,199的全部内容通过引用并入本文以用于所有目的。
关于当前经由媒体回放系统播放的音频内容的信息的示例包括(i)曲目,(ii)标题,(iii)艺术家,(iv)表演者,(v)作者,(vi)专辑,(vii)类型,(viii)年份,(ix)向媒体回放系统提供曲目的音频信息源/媒体服务,(x)曲目已被播放的次数,(xi)曲目是否是用户“最喜欢的”,(xii)曲目所在的播放列表(如果有的话),(xiii)发起曲目回放的用户,(xiv)曲目的当前回放进程(例如,回放时间戳),(xv)收听者是否“喜欢”该曲目以及收听者“喜欢”该曲目的次数(以及可能何时“喜欢”该曲目),和/或(xvi)关于当前播放曲目的任何其他信息。关于由媒体回放系统播放的音频内容的历史信息的示例包括以下中的任何一项或全部:关于音频内容的上述元数据、以及当媒体回放系统播放单独音频内容时的日期和时间、以及可能的播放该内容的特定的一个或多个PBD。关于当前或先前播放的音频的信息还可以包括:关于回放的其他上下文信息,诸如“在Larry的聚会期间播放”、“在圣诞节播放”或“在外面下雨时播放”等。
与音频内容有关的用户偏好信息的示例包括(i)从(例如,Spotify、Pandora、本地曲目库等)获得音乐的优选音频信息源或音乐服务,(ii)优选的歌曲版本(例如,现场版本与演播室版本、特定艺术家或团体的歌曲版本),(iii)优选的音乐风格或类型,以及(iv)与音频内容相关的其他用户偏好。
与媒体回放系统配置有关的用户偏好信息的示例包括(i)优选回放音量,(ii)优选均衡设置,(iii)优选同步组布置,(iv)优选区域场景,和/或(v)其他媒体回放系统设置。
在一些实施例中,在媒体回放系统和联网麦克风系统之间共享任何上述元数据(以及可能的其他元数据)包括:首先在媒体回放系统和联网麦克风系统之间建立元数据交换通道。在操作中,元数据交换通道可以是媒体回放系统的一个或多个组件与如本文所述的联网麦克风系统的一个或多个组件之间的任何类型的通信声道。
在一些实施例中,元数据交换通道是在媒体回放系统的一个或多个组件与联网麦克风系统的一个或多个组件之间发生的通信会话,并且建立元数据交换通道包括建立通信会话。通信会话可以或可以不特别配置用于元数据的交换或以其他方式适于元数据的交换。实际上,媒体回放系统和联网麦克风系统可以使用现在已知或以后开发的任何类型的通信机制来在两个系统之间交换元数据,包括但不限于通信路径、链路、信道和/或会话(例如,一个或多个路径、链接和/或信道可以支持会话)。
在一些实施例中,元数据交换通道可以是以下中的任何一个(i)从媒体回放系统到联网麦克风系统的单向连接,(ii)从联网麦克风系统到媒体回放系统的单向连接,(iii)媒体回放系统和联网麦克风系统之间(即,来回的)双向连接和/或(iv)媒体回放系统的多个组件与联网麦克风系统的多个组件之间的多向连接。
在一些实施例中,PBD 532-538、CR 522和计算设备506中的任何一个或多个可以经由一个或多个单独的或可能共享的元数据多播发送元数据,其中,任何其他PBD 532-538、CR 522、计算设备506、NMD 512-516和计算设备504可以订阅一个或多个元数据多播通道以接收从媒体回放系统的组件发送的元数据。类似地,NMD 512-513和计算设备504中的任何一个或多个可以经由一个或多个单独或共享的元数据多播通道发送元数据,其中,任何其他NMD 512-516、计算设备504、PBD 532-538、CR 522、计算设备506可以订阅一个或多个元数据多播通道以接收从联网麦克风系统的组件发送的元数据。在一些实施例中,元数据多播通道的集合可以形成元数据网格网络,通过该元数据网格网络,联网麦克风系统的组件和媒体回放系统的组件彼此共享元数据。
在一些实施例中,建立元数据交换通道包括:配置媒体回放系统的一个或多个组件(即,被配置为媒体回放系统服务器的PBD 532、534、536、538、CR 522和/或计算设备506中的任何一个或多个)经由通信路径、链路、通道和/或会话与联网麦克风系统的一个或多个组件(即,被配置为联网麦克风系统服务器的NMD 512、514、516和/或计算设备504中的任何一个或多个)通信。建立元数据交换通道可以附加地或替代地包括配置联网麦克风系统的一个或多个组件(即,NMD 512、514、516和/或计算设备504中的任何一个)以经由通信路径、链路、通道和/或会话与媒体回放系统的一个或多个组件(即,PBD 532、534、536、538、CR522和/或计算设备506中的任何一个)通信。
如前所述,在一些实施例中,元数据交换通道是单独的并且也可能是专用的元数据交换通道。然而,在其他实施例中,元数据交换通道可以包括媒体回放系统和联网麦克风系统之间的一个或多个通信路径、连接、链路或类似通信连接,其可以用于以单向、双向和/或多方向的方式在媒体回放系统的组件和联网麦克风系统的组件之间交换元数据或任何其他信息、内容、或者其他数据。
例如,参考图5,在媒体回放系统和联网麦克风系统之间建立元数据交换通道可以包括在媒体回放系统的一个或多个组件(即,PBD 532-538和/或计算设备506中的任何一个)之间建立通信会话,以经由以下中的一个或多个与联网麦克风系统的一个或多个组件(即,NMD 512-513和/或计算设备504中的任何一个)进行通信:(i)本地网络546,(ii)通信路径544,(iii)通信路径542,(iv)云网络502,和/或(v)现在已知或以后开发的任何其他类型的通信路径、链路或其他连接。
在操作中,在建立元数据交换通道之后,媒体回放系统响应于经历元数据交换触发事件而经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据。
在一些实施例中,元数据交换触发事件包括媒体回放系统的一个或多个PBD回放新的媒体内容项。例如,在这样的实施例中,每当媒体回放系统的PBD 532-538中的任何一个开始播放新的媒体曲目时,媒体回放系统(即,PBD 532-538或计算设备506中的任何一个)向联网麦克风系统(即,NMD 512-516或计算设备504中的任何一个)发送任何上述元数据。以这种方式,新媒体曲目的回放是使得媒体回放系统向联网麦克风系统发送元数据的元数据交换触发事件。在这样的实施例中,媒体回放系统在播放每个新曲目时向联网麦克风系统发送元数据,而不管联网麦克风系统是否具体地请求了任何元数据。在联网麦克风系统(或者其组件,例如计算设备504)被配置为存储关于媒体回放系统的历史元数据和/或其他元数据和/或媒体回放系统播放的媒体的情况下,该实现可以是有利的。
在一些实施例中,媒体回放系统可以响应于播放经由联网麦克风系统接收的媒体曲目的语音命令而启动对媒体曲目的回放。附加地或备选地,媒体回放系统可以响应于播放经由被配置为控制媒体回放系统的计算设备(例如,CR 522)接收的媒体曲目的命令而启动对媒体曲目的回放。在任一情况下,启动对媒体曲目的回放可以使媒体回放系统(即,播放媒体曲目的PBD 532-538、被配置为控制媒体回放系统的计算设备(例如,CR 522)和/或计算设备506中的任何一个或多个,单独地或组合地)向联网麦克风系统(即,NMD 512-516或计算设备504中的任何一个或多个,单独地或组合地)发送元数据。
在一些实施例中,元数据交换触发事件附加地或备选地包括媒体回放系统响应于联网麦克风系统从用户接收到上下文特定命令(或可能是其他类型的命令)而接收对元数据的请求。上下文特定命令的示例是“将这首歌曲保存到我的收藏夹播放列表”。该命令是上下文特定的,这是因为联网麦克风系统需要知道“这首歌曲”是什么,以便联网麦克风系统可以指示媒体回放系统将“这首歌曲”添加到用户的收藏夹播放列表。
为了确定“这首歌曲”是什么,联网麦克风系统请求关于媒体回放系统当前正在播放的曲目的元数据。如果媒体回放系统具有多个PBD,其中位于不同区域中的不同PBD正在播放不同的音频曲目(参见图1),则可能需要用于确定“这首歌曲”是什么的功能。例如,如果接收到上下文特定命令的联网麦克风系统的NMD与厨房区域配对(或以其他方式连接到厨房区域或与厨房区域相关联),则联网麦克风系统可以检索当前在厨房区域中由一个或多个PBD播放的音频曲目的元数据。因此,在该示例中,处理上下文特定命令要求联网麦克风系统获得关于媒体回放系统的配置的元数据(即,哪些PBD在厨房区域中)、关于厨房中的一个或多个PBD正在播放的音频内容的元数据、以及还可能是关于用户的播放列表的元数据(即,用户偏好元数据)。
上下文特定命令的另一示例是“播放上周五晚上在起居室中播放的歌曲”。该命令是上下文特定的,这是因为联网麦克风系统需要知道上周五晚上媒体回放系统在起居室区域中播放的歌曲,以便联网麦克风系统可以指示媒体回放系统现在再次播放这些歌曲。
为了确定“上周五晚上在起居室中播放的歌曲”,联网麦克风系统请求与起居室区域中的一个或多个PBD在上个星期五播放的音频曲目的历史有关的元数据。如果媒体回放系统具有多个PBD,其中位于不同区域的不同PBD可以播放不同的音频曲目(参见图1),那么确定哪个或哪些PBD应播放“上周五晚上在起居室播放的歌曲”可能会带来额外的挑战。但是,如果接收到上下文特定回放命令的联网麦克风系统的NMD与书房区域配对(或者以其他方式连接到书房区域或与书房区域相关联),则联网麦克风系统可以检索关于起居室区域中的一个或多个PBD在上个星期五播放的音频曲目的元数据,然后指示书房中的一个或多个PBD现在播放这些音频曲目。因此,在该示例中,处理上下文特定命令需要联网麦克风系统获得关于媒体回放系统的历史配置的元数据(即,哪些PBD在起居室区域中,或者至少上周五在起居室区域中)、关于起居室中的一个或多个PBD上周五播放的音频内容的元数据、以及还可能是关于哪个或哪些PBD当前在书房区域中的元数据。
上下文特定命令的另一示例是“将这首歌曲添加到我的卧室的队列中”。该命令是上下文特定的,这是因为联网麦克风系统需要知道“这首歌曲”是什么以及哪个卧室是“我的卧室”,以便媒体回放系统可以将正确的歌曲添加到媒体回放系统中正确的PBD上的回放队列中。
为了确定“这首歌曲”是什么,联网麦克风系统请求关于媒体回放系统当前正在播放的曲目的元数据。如果媒体回放系统具有多个PBD,其中位于不同区域中的不同PBD正在播放不同的音频曲目(参见图1),则可能需要用于确定“这首歌曲”是什么的功能。例如,如果接收到上下文特定命令的联网麦克风系统的NMD与书房区域配对(或以其他方式连接到书房区域或与书房区域相关联),则联网麦克风系统可以检索当前在书房区域中由一个或多个PBD播放的音频曲目的元数据。
为了确定哪个卧室是“我的卧室”,联网麦克风系统可以对语音命令执行语音识别以确定谁说出该语音命令、访问由媒体回放系统存储的关于用户的元数据(例如,从用户简档)以确定哪个卧室区域对应于该特定用户、访问关于媒体回放设备的配置的元数据以确定哪个或哪些PBD在与用户相对应的卧室区域中、访问关于卧室区域中的一个或多个PBD的配置的元数据以确定哪个PBD是存储卧室区域中的一个或多个PBD的回放队列的用于卧室区域的主区域播放器、以及最后与用于对应于用户的卧室区域中的该PBD的回放队列有关的元数据。
因此,在该示例中,处理上下文特定命令需要联网麦克风系统获得关于媒体回放系统的注册用户的元数据、关于媒体回放系统的配置的元数据(即,哪些PBD在书房和卧室区域中)、关于书房中的一个或多个PBD当前正在播放的音频内容的元数据、关于卧室区域中的一个或多个PBD的回放队列的元数据、和/或可能地其他元数据,以便将书房中播放的歌曲添加到用户卧室的回放队列。
上下文特定命令(或信息请求)的又一示例是“这个乐队下一次何时在城里演奏?”该命令是上下文特定的,这是因为联网麦克风系统需要知道“这个乐队”和这个“城镇”是什么,以便联网麦克风系统可以为用户提供答案,或者可能地指示媒体回放设备向用户提供答案。
为了确定“这个乐队”是什么,联网麦克风系统请求关于媒体回放系统当前正在播放的曲目的元数据。如果媒体回放系统具有多个PBD,其中位于不同区域中的不同PBD正在播放不同的音频曲目(参见图1),则可能需要用于确定“这个乐队”是什么的功能。例如,如果接收到上下文特定命令的联网麦克风系统的NMD与书房区域配对(或以其他方式连接到书房区域或与书房区域相关联),则联网麦克风系统可以检索当前在书房区域中由一个或多个PBD播放的音频曲目的元数据。
为了确定这个“城镇”是什么,联网麦克风系统可以请求关于媒体回放系统的位置的元数据,或者联网麦克风系统可以使用其自己的配置信息。无论哪种方式,一旦联网麦克风系统知道“这个乐队”和“城镇”,则联网麦克风系统就可以查询一个或多个第三方信息源以获得“这个乐队”的巡演日程并向用户提供下一日期,或者可能地指示媒体回放系统通知用户。
例如,在一些实施例中,联网麦克风系统可以指示媒体回放系统(或媒体回放系统的至少一个特定PBD)提供对“这个乐队下一次何时在城里演奏?”的问题的可听响应。在操作中,媒体回放系统的一个或多个PBD可以提供以下可听答案:“滚石乐队11月15日在芝加哥演奏”。在一些实施例中,在联网麦克风系统的控制下,媒体回放设备可另外询问用户“您想要购买门票吗?”,并且如果用户回答“是”,则联网麦克风系统可以通过电子邮件向用户发送购买门票的链接。随后与用户的交互还可能需要联网麦克风系统访问关于媒体回放系统的注册用户的元数据,以获得用于发送购买音乐会门票的链接的电子邮件地址。
上下文特定信息请求的另一示例是“这是什么乐队?”该信息请求是上下文特定的,这是因为联网麦克风系统需要知道当前正在播放的歌曲,使得联网麦克风系统可以(i)向用户通知当前播放的曲目的艺术家或者(ii)指示媒体回放系统向用户通知当前播放的曲目的艺术家。和前面的示例一样,如果媒体回放系统具有多个PBD,其中位于不同区域的不同PBD可以播放不同的音频曲目(参见图1),那么确定哪个或哪些PBD正在播放感兴趣的歌曲可能会带来额外的挑战。但是,如果接收到上下文特定信息请求的NMD与起居室区域配对(或以其他方式连接到起居室区域或与起居室区域相关联),则联网麦克风系统可以检索关于起居室区域中的一个或多个PBD正在播放的音频曲目的元数据。因此,在该示例中,为了处理和响应上下文特定信息请求,联网麦克风系统必须获得关于媒体回放系统的配置的元数据(即,哪些PBD在起居室区域中)和关于起居室中的一个或多个PBD正在播放的音频内容的元数据。
在一些实施例中,元数据交换触发事件包括经过定义的时间段。例如,在一些实施例中,媒体回放系统可以被配置为每1秒、10秒、1分钟、15分钟、每30分钟、每小时或某个其他时间帧向联网麦克风系统发送本文所述的任何(或可能所有)类型的元数据。
在一些实施例中,媒体回放系统可以被配置为每当媒体回放系统有任何改变时向联网麦克风系统发送元数据。例如,媒体回放系统可以被配置为每当(i)媒体回放系统发生配置改变,例如创建或移除同步组、建立区域场景、将媒体回放设备添加到媒体回放系统或移除媒体回放设备、提高或降低音量、改变均衡设置或任何其他配置改变,(ii)开始或停止回放媒体曲目、前进到下一曲目、跳过曲目、重复播放曲目或其他回放命令,(iii)接收到用户“喜欢”或“不喜欢”(例如,竖起拇指或拇指向下的指示)当前正在播放的曲目、专辑或播放列表的指示,(iv)向播放列表添加曲目或专辑或者从播放列表中移除曲目或专辑,和/或(v)将曲目、专辑或播放列表添加到回放队列或从回放队列移除曲目、专辑或播放列表时,向联网麦克风系统发送元数据。在一些实施例中,媒体回放系统可以以连续、基本连续或半连续的方式向联网麦克风系统发送元数据,这是因为媒体回放系统中的不同PBD在播放曲目和执行其他媒体管理功能的同时被配置和重新配置。
在一些实施例中,媒体回放系统经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据(和/或由媒体回放系统播放的媒体)包括:媒体回放系统(或者可能地媒体回放系统的一个或多个组件)向联网麦克风系统(或者可能地联网麦克风系统的一个或多个组件)发送元数据。例如,媒体回放系统向联网麦克风系统发送元数据可以包括以下中的任何一个或多个:(i)PBD之一(即,任何PBD 532-538)经由本地网络546向任何NMD(即,任何NMD 512-516)发送元数据;(ii)计算设备506向计算设备504发送元数据;(iii)CR 522经由网络546向任何NMD 512-516发送元数据;(iv)CR 522向计算设备504发送元数据;(v)PBD 532-538中的一个经由通信链路544向计算设备506发送元数据,并且计算设备506又向计算设备504发送元数据;(vi)PBD 532-538之一经由网络546向NMD 512-516之一发送元数据,并且NMD 512-516之一经由通信链路546向计算设备504发送元数据。其中媒体回放系统的任何一个或多个组件(PBD 532-538和计算设备506)经由图5中所示的任何通信路径(544、542、546)(或任何其他通信路径)向联网麦克风系统的任何一个或多个组件(NMD 512-516和计算设备504)发送、共享、传送、传输或以其他方式提供元数据的每个其他场景都是可能的并且在本文中被设想到。
在一些实施例中,媒体回放系统经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据(和/或由媒体回放系统播放的媒体)包括:媒体回放系统(或者可能地媒体回放系统的一个或多个组件)授权联网麦克风系统(或者可能地联网麦克风系统的一个或多个组件)经由元数据交换通道访问元数据。例如,媒体回放系统授权联网麦克风系统访问元数据可以包括以下中的一个或多个:(i)PBD之一(即,任何PBD 532-538)授权任何NMD(即,任何NMD 512-516)经由本地网络546访问元数据;(ii)计算设备506授权计算设备504访问元数据;(iii)CR 522授权任何NMD 512-516经由网络546访问元数据;(iv)CR522授权计算设备504访问元数据;(v)PBD 532-538中的一个授权计算设备506经由通信链路544访问元数据,并且计算设备506又授权计算设备504访问元数据;(vi)PBD 532-538之一授权NMD 512-516之一经由网络546访问元数据,并且NMD 512-516之一经由通信链路546向计算设备504发送元数据。其中媒体回放系统的任何一个或多个组件(PBD 532-538和计算设备506)授权联网麦克风系统的任何一个或多个组件(NMD 512-516和计算设备504)经由任何图5中示出的通信路径(544、542、546)(或任何其他通信)访问元数据的每个其他场景都是可能的并且在本文中被设想到。
图9中所示的方法900给出了可以在包括或包含例如图1的媒体回放系统100、图2的一个或多个回放设备200、图3的一个或多个控制设备300、图4的用户界面、图5中所示的配置、和/或图6中所示的NMD的操作环境内实现的方法的实施例。
方法900开始于框902,其包括在媒体回放系统和联网麦克风系统之间建立元数据交换通道,其中,联网麦克风系统包括NMD和联网麦克风服务器。
元数据交换通道可以是媒体回放系统的一个或多个组件与如本文所述的联网麦克风系统的一个或多个组件之间的任何类型的通信声道。在一些实施例中,元数据交换通道是媒体回放系统的一个或多个组件与联网麦克风系统的一个或多个组件之间的通信会话。在一些实施例中,通信会话可以被特别配置用于元数据的交换。然而,在其他实施例中,媒体回放系统和联网麦克风系统可以使用现在已知或以后开发的任何类型的通信机制来在两个系统之间交换元数据。
在一些实施例中,媒体回放系统包括至少一个媒体回放设备,并且在媒体回放系统和联网麦克风系统之间建立元数据交换通道包括:在至少一个媒体回放设备与(i)NMD和(ii)联网麦克风服务器中的至少一个之间建立元数据交换通道。
在备选实施例中,媒体回放系统还包括连接到至少一个媒体回放设备的媒体回放服务器,并且在媒体回放系统和联网麦克风系统之间建立元数据交换通道包括:在媒体回放服务器与(i)NMD和(ii)联网麦克风服务器中的至少一个之间建立元数据交换通道。
接下来,方法900前进到框904,其包括在建立元数据交换通道之后,媒体回放系统经历元数据交换触发事件。在操作中,元数据交换触发事件可以包括以下中的任何一项(i)媒体回放系统回放新的媒体内容项,(ii)媒体回放系统通过联网麦克风系统接收上下文特定的回放命令,(iii)媒体回放系统通过联网麦克风系统接收上下文特定的信息请求,(iv)经过了定义的时间段,和/或(v)可用于触发元数据交换的其他配置变化、状态变化、动作、输入或请求。在一些实施例中,媒体回放系统可以持续地向联网麦克风系统发送元数据。
框904可以另外或备选地包括:在建立元数据交换通道之后,联网麦克风系统经历元数据交换触发事件。在操作中,元数据交换触发事件可以包括以下中的任何一项:(i)联网麦克风系统接收新的语音命令,包括但不限于上下文特定的语音命令,(ii)联网麦克风系统接收新的信息语音请求,包括但不限于上下文特定的信息语音请求,(iii)联网麦克风系统的配置改变,(iv)经过了定义的时间段,和/或(v)可用于触发元数据交换的其他配置改变、状态改变、动作、输入或请求。在一些实施例中,联网麦克风系统可以持续地向媒体回放系统发送元数据。
最后,方法900前进到框906,其包括响应于经历元数据交换触发事件,媒体回放系统经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据。
在操作中,元数据包括以下中的至少一个:(i)媒体回放系统的一个或多个配置参数,(ii)关于当前经由媒体回放系统播放的音频内容的信息,(iii)关于由媒体回放系统播放的音频内容的历史信息,(iv)与音频内容有关的用户偏好信息,(v)与媒体回放系统配置有关的用户偏好信息,和/或(vi)本文公开或描述的任何其他元数据。
在一些实施例中,媒体回放系统经由元数据交换通道向联网麦克风系统提供与媒体回放系统相关联的元数据包括以下中的至少一个:(i)媒体回放系统经由元数据交换通道向联网麦克风系统发送元数据或者(ii)媒体回放系统授权联网麦克风系统经由元数据交换通道访问所选择的元数据。
在一些实施例中,框906可以附加地或备选地包括,响应于经历元数据交换触发事件,联网麦克风系统经由元数据交换通道向媒体回放系统提供与联网麦克风系统相关联的元数据。
在操作中,元数据包括以下中的至少一种:(i)联网麦克风系统的一个或多个配置参数,(ii)关于经由联网麦克风系统接收的语音命令和请求的信息,(iii)关于经由联网麦克风系统接收的语音命令和请求的历史信息,(iv)与联网麦克风系统有关的用户偏好信息,(v)与联网麦克风系统配置有关的用户偏好信息,和/或(vi)本文公开和/或描述的任何其他元数据。
在一些实施例中,联网麦克风系统经由元数据交换通道向媒体回放系统提供与联网麦克风系统相关联的元数据包括以下中的至少一项:(i)联网麦克风系统经由元数据交换通道向媒体回放系统发送元数据或者(ii)联网麦克风系统授权媒体回放系统经由元数据交换通道访问所选择的元数据。
V.用于处理联网设备之间配对丢失的示例系统、装置和方法
在又一种布置中,在一些情况下,可能希望媒体回放系统的媒体回放设备之一(例如,任何PBD 532-538)响应于通过联网麦克风系统的NMD(例如,任何NMD 512-516)接收的语音命令而执行功能和/或提供反馈。
在本公开的上下文中,执行功能可以包括响应于语音命令由媒体回放系统的任何一个或多个组件采取的任何动作。例如,响应于经由联网麦克风系统接收的“播放LedZeppelin的歌曲”的语音命令,媒体回放系统(或者可能地媒体回放系统的一个或多个PBD)执行播放乐队Led Zeppelin的歌曲的功能。在另一示例中,响应于经由联网麦克风系统接收的“将厨房和起居室区域组合成同步组”的语音命令,媒体回放系统(或者可能地媒体回放系统的一个或多个PBD单独地或与CR 522和/或计算设备506组合)可以将厨房区域和起居室区域中的PBD配置成同步组,其中,在将厨房和起居室区域中的PBD配置成同步组之后,厨房区域和起居室区域中的PBD被配置为彼此同步地播放媒体,如本文所述。
在本公开的上下文中,反馈是对语音命令的一些可听、可视、有形或其他类型的响应。例如,响应于“外面的当前温度是多少?”的语音命令,联网麦克风系统可以指示媒体回放系统中的一个或多个PBD以当前室外温度进行响应。在一些实施例中,该反馈可以是由媒体回放系统的PBD之一播放的“当前温度是75度”的可听陈述。类似地,响应于“这首歌曲的名称是什么?”的语音命令,联网麦克风系统可以指示媒体回放系统的一个或多个PBD以歌曲的标题进行响应。在一些实施例中,该反馈可以是由媒体回放系统的PBD之一播放的“当前歌曲是The Beatles的All You Need is Love”的可听陈述。在一些实施例中,代替听觉反馈,反馈可以是视觉的或有形的/触觉的,如本文所述。
在一些实施例中,媒体回放系统的特定PBD被指定为用于联网麦克风系统的特定NMD的主PBD。在操作中,用于特定NMD的主PBD是被配置为执行功能和/或提供对由该特定NMD接收的语音命令的反馈的PBD。在一些实施例中,不同的NMD可以具有不同的对应的主PBD。例如,位于厨房区域中的NMD的主PBD可以是也位于厨房区域中的PBD。同样,位于卧室区域的NMD的主PBD也可能是位于卧室区域的PBD。在其他实施例中,单个PBD可以是联网麦克风系统的主PBD。在另外的实施例中,被配置为控制媒体回放系统的计算设备可以在执行功能和/或提供对经由联网麦克风系统的一个或多个NMD接收的语音命令的反馈方面充当主PBD。
在操作中,联网麦克风系统的NMD接收语音命令。语音命令可以是任何类型的命令或信息请求。如果期望或甚至需要对语音命令的响应(即,反馈),则联网麦克风系统指示媒体回放系统响应于语音命令而提供反馈(并且可能地还有反馈的内容)。
在一些实施例中,为了指示媒体回放系统响应于语音命令而提供反馈,联网麦克风系统首先确定与接收到语音命令的NMD相关联的主PBD是否可用于响应于语音命令而提供反馈。备选地,一些实施例可以包括联网麦克风系统指示与接收到语音命令的NMD相关联的主PBD响应于语音命令而提供反馈,而无需首先检查主PBD是否可用于响应于语音命令而提供反馈。
在操作中,确定与接收到语音命令的NMD相关联的主PBD是否可用于响应于语音命令而提供反馈可以包括,确定与接收到语音命令的NMD相关联的主PBD是否是以下中的一项或多项:(i)被静音,(ii)处于不中断状态,(iii)处于省电模式,(iv)经由被配置为支持媒体回放系统和NMD之间通信的网络不可达,(v)未插电,或(vi)断电。如果主PBD已从其典型位置移动,则主PBD可能替代地不可用,使得响应于语音命令而提供反馈可能没有帮助。例如,如果厨房中特定NMD的主PBD从厨房移到卧室,那么主PBD响应于通过厨房中的NMD接收的语音命令而提供反馈可能没有帮助,这是因为当主PBD在卧室中时,厨房中的用户可能听不到来自主PBD的反馈。在一些实施例中,联网麦克风系统可以在联网麦克风系统指示主PBD执行功能或提供反馈但是然后联网麦克风系统未能从主PBD接收到主PBD已执行所需功能或提供所需反馈之后,确定主PBD不可用。
在一些实施例中,媒体回放系统可以向联网麦克风系统通知媒体回放系统中的特定PBD的状态(可用和不可用)。例如,如果媒体回放系统知道PBD 534处于“不中断”状态,因为例如PBD 534正在播放与电影相关联的音频内容,则媒体回放系统可以向联网麦克风系统通知PBD 534不可用,但PBD 532、536和538可用。在一些实施例中,每当PBD的状态从可用状态改变为不可用状态(反之亦然)时,媒体回放系统可以向联网麦克风系统通知PBD的可用性(或不可用性)。在一些实施例中,媒体回放系统可以周期性地或半周期性地通知联网麦克风系统关于媒体回放系统中的哪些PBD可用或不可用。例如,媒体回放系统可以每几秒、每几分钟或者按照某种其他正则或非正则基础向联网麦克风系统通知哪些PBD可用或不可用。
在操作中,媒体回放系统的一个或多个组件(即,PBD 532-538、CR 522和/或计算设备506中的任何一个)可以经由媒体回放系统和联网麦克风系统之间的任何通信路径向联网麦克风系统的任何一个或多个组件(即,NMD 512-516和/或计算设备504中的任何一个)发送状态消息。例如,PBD 532可以通过经由网络546和/或542向联网麦克风系统的一个或多个组件发送状态改变消息来向计算设备504通知PBD 532现在可用于响应于语音命令而执行功能和/或提供反馈。在另一示例中,计算设备506可以向计算设备504通知各个PBD532-538的状态(可用与不可用)。在又一示例中,CR 522可以向联网麦克风系统的一个或多个组件通知各个PBD 532-538的状态(可用与不可用)。媒体回放系统也可以以其他方式向联网麦克风系统通知PBD状态变化。
在一些实施例中,媒体回放系统可以以一个PBD接一个PBD或一个NMD接一个NMD的方式向联网麦克风系统通知媒体回放系统中的特定PBD的状态(可用和不可用)。例如,媒体回放系统可以指示厨房中的活动PBD可用于响应于从厨房中的NMD接收的语音命令来提供反馈,但是其他房间中的活动PBD不可用于响应于从厨房中的NMD接收到的语音命令而提供反馈。
响应于确定与接收到语音命令的NMD相关联的主PBD可用于响应于语音命令而执行功能和/或提供反馈,联网麦克风系统(例如,NMD 512-516或计算设备504中的任何一个,单独地或组合地)指示主PBD响应于语音命令而执行功能和/或提供第一反馈。
在操作中,联网麦克风系统可以指示主PBD直接或间接地执行语音命令中所要求的功能。例如,在一些实施例中,NMD 512-516之一可以直接经由网络546指示主PBD来执行期望的功能。在其他实施例中,NMD 512-516之一可以经由网络546指示CR 522执行语音命令中所要求的功能,然后CR 522可以指示主PBD执行该功能。在另外的实施例中,计算设备504可以指示计算设备506执行语音命令所要求的功能,并且计算设备506然后可以经由网络544指示主PBD执行该功能。在另外的实施例中,计算设备504可以指示CR 522执行语音命令所要求的功能,然后计算设备504可以指示主PBD执行该功能。在另外的实施例中,计算设备504可以直接指示主PBD执行语音命令所要求的功能。联网麦克风系统可以指示主PBD以其他直接或间接方式执行功能。
类似地,在操作中,联网麦克风系统可以指示主PBD直接或间接地提供第一反馈。例如,在一些实施例中,NMD 512-516之一可以直接经由网络546指示主PBD提供第一反馈。在其他实施例中,NMD 512-516之一可以经由网络546指示CR 522提供反馈,然后CR 522可以指示主PBD提供反馈。在另外的实施例中,计算设备504可以指示计算设备506提供反馈,然后计算设备506可以经由网络544指示主PBD提供反馈。在另外的实施例中,计算设备504可以指示CR 522提供反馈,然后计算设备504可以指示主PBD提供反馈。在另外的实施例中,计算设备504可以直接指示主PBD提供反馈。联网麦克风系统也可以指示主PBD以其他直接或间接方式提供第一反馈。
在一些实施例中,联网麦克风系统指示主PBD响应于语音命令而提供第一反馈还可以包括联网麦克风系统向主PBD提供第一反馈的内容。例如,响应于“这个乐队的名称是什么?”的语音命令,联网麦克风系统(即,NMD 512-516或计算设备504中的任何一个,单独地或组合地)可以访问来自联网媒体系统(即,来自任何PBD 532-538和计算设备506,单独地或组合地)的关于媒体回放系统当前正在播放的音频曲目的元数据,以确定演奏当前播放的曲目的乐队的名称,然后指示主PBD提供“乐队的名字是The Beatles”的音频反馈。
但是响应于确定与接收到语音命令的NMD相关联的主PBD不可用于响应于语音命令而执行功能或提供反馈,联网麦克风设备可以指示后备设备响应于语音命令而执行功能或提供第二反馈。
例如,如果特定NMD的主PBD由于某种原因而不能回放音频,则联网麦克风系统(单独地或与媒体回放系统组合)可以指示后备PBD回放音频。
在一些实施例中,当语音命令要求反馈时,第二反馈可以与第一反馈相同。例如,响应于语音命令“这个乐队的名称是什么?”,并非联网麦克风系统指示主PBD提供“乐队的名称是The Beatles”的音频反馈,而是联网麦克风系统可以指示后备设备提供“乐队的名字是The Beatles”的音频反馈。在操作中,第一反馈可以是以下中的一个或多个:(i)音频反馈,例如语音响应(例如,“乐队的名称是The Beatles”)、哔哔声或其他音频指示,(ii)视觉反馈,例如闪光或其他视觉指示,以及(iii)触觉反馈,例如振动或其他触觉指示。
但是在其他实施例中,第二反馈可以与第一反馈不同。在操作中,第二反馈可以是以下中的任何一个或多个:(i)音频反馈,例如语音响应(例如,“乐队的名称是TheBeatles”)、哔哔声或其他音频指示,(ii)视觉反馈,例如通过后退设备的闪光或其他视觉指示(例如,文本消息或应用通知),以及(iii)触觉反馈,例如振动或其他触觉或物理指示。第二反馈与第一反馈相同还是不同可取决于后备设备是否具有与主PBD相同的输出能力。例如,一些后备设备可能没有扬声器来提供音频反馈。在一些实施例中,第二反馈的内容可以与第一反馈不同,这是因为主PBD不可用。例如,在语音命令是“这是什么乐队?”的在先场景中,第二反馈可以是来自后备设备的陈述道“主回放设备离线;乐队的名称是TheBeatles”的音频指示。
在一些实施例中,(根据语音命令的内容)执行功能和/或提供第二反馈的后备设备是以下中的至少一个:(i)媒体回放系统中的另一PBD,(ii)被配置为控制媒体回放系统的计算设备,例如CR 522,(iii)接收到语音命令的NMD,和/或(iv)联网麦克风系统的另一NMD。
在一些实施例中,联网麦克风系统(即,NMD 512-516和计算设备504中的任何一个,单独地或组合地)可以从一个或多个后备设备集合中选择后备设备。在其他实施例中,媒体回放系统(即,PBD 532-538、CR 522和计算设备506中的任何一个,单独地或组合地)可以从一个或多个后备设备集合中选择后备设备。在任一情况下,从一个或多个后备设备集合中选择后备设备包括以下之一:(i)根据预定义的后备设备层次结构选择后备设备,(ii)从被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备,(iii)从先前被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备,或者(iv)选择辅媒体回放设备作为后备设备,其中,主媒体回放设备被配置为回放媒体内容的第一声道,并且其中,辅媒体回放设备被配置为回放媒体内容的第二声道。
例如,一些实施例可以具有预定义的后退设备层次结构以供选择。在一些实施例中,预定义的层次结构可以是用户可配置的。在一些实施例中,预定义的层次结构可以由媒体回放系统的组件的制造商和/或联网麦克风系统的组件的制造商来配置。在一些实施例中,随着联网麦克风系统的配置和/或媒体回放系统的配置随时间改变,计算设备506(或可能地计算设备504)可以不时地改变后备设备的层次结构。
根据一个示例层次结构,联网麦克风系统或媒体回放系统中的一个或两者单独地或组合地可以首先确定主PBD是否是绑定的PBD对的成员,并且如果是,则选择该绑定对中的另一PBD作为后备设备。
但是,如果主PBD不是绑定对的成员,则联网麦克风系统或媒体回放系统中的一个或两者单独地或组合地可以确定主PBD是否是同步组的成员,并且如果是,则从同步组中的其他PBD中选择后备设备。
但是,如果主PBD不是绑定对或同步组的成员,则联网麦克风系统或媒体回放系统中的一个或两者单独地或组合地,可以确定媒体回放设备是否包括任何其他PBD,并且如果是,则从媒体回放系统中的其他PBD之一中选择后备设备。
然后,如果主PBD不是绑定对或同步组的成员,并且如果主PBD是媒体回放系统中的唯一PBD,则联网麦克风系统或媒体回放系统中的一个或两者单独地或者组合地,可以确定被配置为控制媒体回放系统的计算设备(例如,CR 522)是否是活动的,并且如果是,则选择计算设备作为后备设备。在操作中,CR 522可以提供来自其自身扬声器的音频反馈、在屏幕上提供视觉反馈(例如,通过控制媒体回放系统的用户界面应用、通过应用通知、通过文本消息、或通过一些其他视觉反馈)、或提供触觉反馈(例如,振动)。
最后,如果主PBD不是绑定对或同步组的成员,并且主PBD是媒体回放系统中唯一PBD,并且如果被配置为控制媒体回放系统的计算设备不是活动的,则联网麦克风系统或媒体回放系统中的一个或两者单独地或组合地,可以确定媒体回放系统外部的其他网络设备(例如,接收到语音命令的NMD,联网麦克风系统、联网电视、联网的时钟收音机或其他设备中的其他NMD)是否可用于提供反馈,如果是,则从不属于媒体回放系统的可用网络设备集合中选择后备设备。任何组合、顺序或布置的其他预定义的设备层次结构也是可能的。
备选地,在一些实施例中,联网麦克风系统或媒体回放系统中的一个或两者单独地或组合地可以被配置为从与主PBD相关联的一个或多个其他PBD中选择后备设备,而不是具有潜在后备设备层次结构,所述与主PBD相关联的一个或多个其他PBD例如是(i)具有主PBD的合并媒体回放设备中的一个或多个其他PBD,(ii)具有主PBD的绑定对中的一个或多个其他PBD,(iii)具有主PBD的同步组中的一个或多个其他PBD,(iv)先前在具有主PBD的合并回放设备中的一个或多个其他PBD,(v)先前在具有主PBD的绑定对中的一个或多个其他PBD,(vi)先前在具有主PBD的同步组中的一个或多个其他PBD,(vii)具有主PBD的媒体回放系统中的一个或多个其他PBD,(viii)先前在具有主PBD的媒体回放系统中的一个或多个其他PBD。
在一些实施例中,后备设备可以附加地或备选地例如经由(i)音频指示、(ii)视觉指示和(iii)触觉指示中的一个或多个指示主PBD不可用。例如,除了(或可能地代替)提供第二反馈之外,后备设备可以指示(例如,通知用户)通常将响应于语音命令而提供反馈的主PBD当前不可用于响应于语音命令而提供反馈。在一个示例中,主PBD不可用的指示可以是例如陈述道“主回放设备当前不可用”的音频指示。该指示可以是由以下中的任何一项大声播放的音频指示:(i)媒体回放系统中的另一PBD,(ii)被配置为控制媒体回放系统的计算设备(例如,CR 522),(iii)接收到语音命令的NMD,(iv)联网麦克风系统中的另一NMD,或(v)可能地与媒体回放系统和/或联网麦克风系统通信的一些其他设备。备选地,主PBD不可用的指示可以是任何其他类型的听觉、视觉和/或触觉指示。例如,如果后备设备是CR 522,则主PBD不可用的指示可以是在CR 522的屏幕上显示的文本消息或应用通知和/或CR 522设备的振动。
一些实施例可以另外包括控制器设备(例如,CR 522)和PBD,其在主PBD不可用于响应于语音命令而执行功能和/或提供反馈时,执行单独的功能和/或向用户提供单独的反馈。在一个示例中,联网麦克风系统接收语音命令“播放All You need is Love”,并且在确定与接收到语音命令的NMD相关联的主PBD不可用之后,联网麦克风系统(单独或可能地结合媒体回放系统)可以(i)指示后备设备播放该歌曲,并且(ii)指示控制器向用户显示主PBD不可用的消息。因此,以这种方式,后备设备执行功能,而另一设备提供反馈。
上述示例描述了联网麦克风系统(或可能地媒体回放系统)选择后备设备。在操作中,联网麦克风系统选择后备设备可以包括NMD 512-516或计算设备504中的任何一个(单独地或组合地)选择后备设备。类似地,媒体回放系统选择后备设备可以包括PBD 532-538、CR 522或计算设备506中的任何一个(单独地或组合地)选择后备设备。
除了PBD可用于或不可用于响应于语音命令而执行功能和/或提供反馈之外,NMD还可用于或不可用于接收语音命令。与上述具有主PBD的个体NMD的概念类似,在一些实施例中,个体PBD可以具有对应的主NMD。例如,类似于厨房中的特定NMD可以具有也在厨房中的对应的主PBD,厨房中的PDB可以将厨房中的NMD配置为其主NMD。以这种方式,特定NMD可以与特定PBD配对,使得该NMD是PBD的主NMD,并且PBD是NMD的主PBD。并非在所有实施例中需要NMD和PBD之间正式的基于软件的配对,但是在一些实施例中可以存在。
一些实施例包括确定联网麦克风系统的主NMD不可用于接收针对具有一个或多个PBD的媒体回放系统的语音命令。在操作中,主NMD可能不可用,因为NMD(i)处于不中断状态,(ii)处于省电模式,(iii)经由被配置为支持媒体回放系统和NMD之间的通信的网络不可达,(iv)未插电,或(v)断电。如果主NMD已被移动到与其对应的主PBD不同的房间(或者如果NMD的对应主PBD已被移动到不同的房间),则主NMD可能备选地是不可用的。
响应于确定主NMD不可用于接收语音命令,联网麦克风系统和媒体回放系统中的一个或两者单独地或组合地,指定后备麦克风以接收用于整个媒体回放系统的语音命令或用于媒体回放系统的至少一个PBD的语音命令。
在一些实施例中,确定联网麦克风系统的主NMD不可用于接收用于媒体回放系统(或媒体回放系统的至少一个PBD)的语音命令包括:媒体回放系统从联网麦克风系统接收到指示主NMD不可用于接收语音命令的消息。对于其中媒体回放系统中的各个PBD均在联网麦克风系统中具有对应的主NMD的一些实施例,联网麦克风系统可以一个PBD接一个PBD地指示哪些NMD可用而哪些NMD不可用于接收语音命令。
在一些实施例中,联网麦克风系统可以周期性地或半周期性地向媒体回放系统提供关于联网麦克风系统的各个NMD的可用性或不可用性的状态信息。
在一些实施例中,联网麦克风系统可以向媒体回放系统通知联网麦克风系统中的特定NMD的状态(可用与不可用)。例如,如果联网麦克风系统知道NMD 512处于“不中断”状态,因为例如NMD 512正在执行软件或固件升级,则联网麦克风系统可以向媒体回放系统通知NMD 512不可用但NMD 514和516可用。在一些实施例中,每当NMD的状态从可用状态改变为不可用状态(反之亦然)时,联网麦克风系统可以向媒体回放系统通知NMD的可用性(或不可用性)。在一些实施例中,联网麦克风系统可以周期性地或半周期性地向媒体回放系统通知联网麦克风系统中的哪些NMD可用或不可用。例如,联网麦克风系统可以每几秒、每几分钟或者按照某种其他正则或非正则基础向媒体回放系统通知哪些NMD可用或不可用。
在操作中,联网麦克风系统的一个或多个组件(即,NMD 512-516和/或计算设备504中的任何一个)可以经由联网麦克风系统和媒体回放系统之间的任何通信路径向媒体回放系统的任何一个或多个组件(即,PBD 532-538、CR 522和/或计算设备506中的任何一个)发送状态消息。例如,NMD 512可以通过经由网络546和/或544向媒体回放系统的一个或多个组件发送状态改变消息来向计算设备506通知NMD 512现在可用于接收语音命令。在另一示例中,计算设备504可以向计算设备506通知各个NMD 512-516的状态(可用与不可用)。在又一示例中,CR 522可以监测NMD 512-516的可用性,并且向媒体回放系统的一个或多个其他组件通知各个NMD 512-516的状态(可用与不可用)。联网麦克风系统也可以以其他方式向媒体回放系统告知NMD状态改变。
在操作中,联网麦克风系统和媒体回放系统中的一个或两者单独地或组合地可以指定各种可用麦克风中的一个作为后备麦克风以接收语音命令。例如,在一些实施例中,后备麦克风是媒体回放系统中的一个PBD上的麦克风。在其他实施例中,后备麦克风可以是被配置为控制媒体回放系统的计算设备(例如,CR 522)上的麦克风。在其他实施例中,后备麦克风可以是联网麦克风系统的辅NMD上的麦克风。在另外的实施例中,后备麦克风可以是与联网麦克风系统和/或媒体回放系统中的一个或两者通信的某个其他设备上的麦克风。
在一些实施例中,联网麦克风系统和媒体回放系统中的一个或两者单独地或组合地可以根据定义的层次结构来选择后备麦克风。例如,在一些实施例中,联网麦克风系统和媒体回放系统中的一个或两者单独地或组合地,可以首先确定联网麦克风系统是否包括一个或多个附加NMD,并且如果是,则联网麦克风系统和媒体回放系统中的一个或两者单独地或组合地可以选择联网麦克风系统的其他NMD之一作为媒体回放系统的后备麦克风(或选择其他NMD之一作为媒体回放系统的一个或多个PBD的后备麦克风)。
如果联网麦克风系统没有任何其他NMD,则联网麦克风系统和媒体回放系统中的一个或两者可以单独地或组合地选择媒体回放系统的一个PBD以使用其上载有的麦克风(如果如此配备)作为后备麦克风,用于接收针对媒体回放系统(或媒体回放系统的一个或多个PBD)的语音命令。接下来,如果联网麦克风系统没有任何附加NMD,并且如果媒体回放系统中没有PBD具有麦克风,则联网麦克风系统和媒体回放系统中的一个或两者可以单独地或组合地选择被配置为控制媒体回放系统的计算设备(例如,CF 522)以将其麦克风用作后备麦克风,用于接收针对媒体回放系统(或至少针对媒体回放系统的一个或多个PBD)的语音命令。
如果联网麦克风系统没有任何其他NMD,如果媒体回放系统中的所有PBD都没有麦克风(或者如果麦克风不可用或者如果PBD位于使其麦克风不可用或不想用的位置,因为它位于房屋的远程位置),并且如果被配置为控制媒体回放系统的计算设备(例如,CR 522)没有麦克风(或者如果麦克风被CR 522上运行的某个其他应用使用,例如如果CR 522正用于电话呼叫),则联网麦克风系统和媒体回放系统中的一个或两者可以单独地或组合地选择网络上具有麦克风的某个其他设备,以将该麦克风用作后备麦克风,用于接收针对媒体回放系统的语音命令。也可以使用其他后备麦克风选择层次结构,包括任何顺序的上述后备麦克风的任何组合。在一些实施例中,后备麦克风选择层次结构结构可以是用户可配置的。
在一些实施例中,响应于确定主NMD不可用于接收语音命令,联网麦克风系统和媒体回放系统中的一个或两者可以单独地或组合地另外指示另一设备指示主NMD不可用。在操作中,主NMD不可用的指示包括以下中的一个或多个:(i)音频指示,(ii)视觉指示和(iii)触觉指示。在操作中,指示主NMD不可用的另一设备可以包括以下中的任何一个:(i)媒体回放系统中的任何PBD,(ii)联网麦克风系统中的另一个NMD,(iii)被配置为控制媒体回放系统的任何计算设备(例如,CR 522),或(iv)与联网麦克风系统和/或媒体回放系统通信的并且可配置为提供或以其他方式输出主NMD不可用于接收语音命令的指示的任何其他设备。
图10中所示的方法1000给出了可以在包括或包含例如图1的媒体回放系统100、图2的一个或多个回放设备200、图3的一个或多个控制设备300、图4的用户界面、图5中所示的配置、和/或图6的NMD的操作环境内实现的方法的实施例。方法1000可以包括一个或多个操作、功能或动作,如框1002-1006中的一个或多个所示。
方法1000开始于框1002,其包括经由被配置为接收针对媒体回放系统的语音命令的NMD来接收语音命令,其中,媒体回放系统包括主媒体回放设备,其被配置为响应于经由NMD接收的语音命令而提供第一反馈。在一些实施例中,第一反馈是以下中的一种或多种:(i)音频反馈,(ii)视觉反馈,以及(iii)触觉反馈,如本文所述。
在一些实施例中,方法框1002可以附加地或备选地包括经由被配置为接收针对媒体回放系统的语音命令的NMD来接收语音命令,其中,媒体回放系统包括主媒体回放设备,其被配置为响应于经由NMD接收的语音命令而执行功能。在一些实施例中,该功能是以下中的一个或多个:(i)回放功能,例如开始/停止回放、跳过曲目,(ii)播放列表功能,例如从播放列表添加/移除曲目,(iii)回放设备配置功能,例如升高/降低音量、改变均衡器设置,(iv)媒体回放系统配置功能,例如将回放设备分组成同步组、激活区域场景,和/或(v)可以由回放设备单独地执行或由整个媒体回放系统执行的任何其他功能。
接下来,方法1000进行到框1004,其包括确定主媒体回放设备不可用于响应于语音命令而提供第一反馈。在一些实施例中,方法框1004可以附加地或备选地包括确定主媒体回放设备不可用于执行语音命令中所要求的功能。
在一些实施例中,确定主媒体回放设备不可用于响应于语音命令而提供第一反馈和/或执行功能包括确定主媒体回放设备处于以下情形之一:(i)被静音,(ii)处于不中断状态,(iii)处于省电模式,或(iv)通过被配置为支持媒体回放系统与NMD之间的通信的网络不可达。在一些实施例中,确定主媒体回放设备不可用于响应于语音命令而提供第一反馈和/或执行功能包括从媒体回放系统接收指示主媒体回放设备不可用的消息。
在一些实施例中,方法1000另外包括从一个或多个后备设备集合中选择后备设备的可选步骤。在一些实施例中,从一个或多个后备设备集合中选择后备设备包括以下之一:(i)根据预定义的后备设备层次结构选择后备设备,(ii)从被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备,(iii)从先前被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备,或者(iv)选择辅媒体回放设备作为后备设备,其中,主媒体回放设备被配置为回放媒体内容的第一声道,并且其中,辅媒体回放设备被配置为回放媒体内容的第二声道。后备设备可以是以下中的任何一个:(i)媒体回放系统的另一媒体回放设备,(ii)被配置为控制媒体回放系统的计算设备,或(iii)NMD。
最后,方法1000进行到框1006,其包括响应于确定主媒体回放设备不可用于响应于语音命令而提供第一反馈,指示后备设备响应于该语音命令而提供第二反馈。在一些实施例中,第二反馈是以下中的一种或多种:(i)音频反馈,(ii)视觉反馈,以及(iii)触觉反馈,如本文所述。在一些实施例中,第二反馈与第一反馈相同。
在一些实施例中,框1006可以附加地或备选地包括,响应于确定主媒体回放设备不可用于响应于语音命令而执行功能,指示后备设备执行语音命令中所要求的一个或多个功能。
方法1000的一些实施例可以另外包括响应于确定主媒体回放设备不可用于响应于语音命令而提供第一反馈和/或执行功能,另外指示后备设备指示主媒体回放设备不可用,其中,主媒体回放设备不可用的指示包括以下中的一个或多个:(i)音频指示,(ii)视觉指示,以及(iii)触觉指示,如本文所述。
图11中所示的方法1100给出了可以在包括或包含例如图1的媒体回放系统100、图2的一个或多个回放设备200、图3的一个或多个控制设备300、图4的用户界面、图5中所示的配置、和/或图6的NMD的操作环境内实现的方法的实施例。方法1100可以包括一个或多个操作、功能或动作,如框1102-1104中的一个或多个所示。
方法1100开始于框1102,其包括确定联网麦克风系统的主NMD不可用于接收针对媒体回放系统的语音命令,其中,媒体回放系统包括一个或多个媒体回放设备。
在一些实施例中,主NMD可能不可用于接收语音命令,因为NMD(i)处于不中断状态,(ii)处于省电模式,(iii)经由被配置为支持媒体回放系统和NMD之间的通信的网络不可达,(iv)未插电,或(v)断电。如果主NMD已被移动到与其对应的主媒体回放设备不同的房间(或者如果NMD的对应主媒体回放设备已被移动到不同的房间),则主NMD可能备选地是不可用的。在一些实施例中,确定联网麦克风系统的主联网麦克风设备不可用于接收针对媒体回放系统的语音命令包括:接收指示主NMD不可用于接收语音命令的消息。
接下来,方法1100进行到框1104,其包括响应于确定主NMD不可用于接收语音命令,指定后备麦克风来接收针对媒体回放系统的语音命令。在操作中,指定后备麦克风来接收针对媒体回放系统的语音命令的步骤可以由联网麦克风系统的任何组件(例如,参考图5,NMD 512-516或计算设备504中的任何一个,单独地或组合地)来执行,或者由媒体回放系统的任何组件(例如,参考图5,PBD 532-538、CR 522或计算设备506中的任何一个,单独地或组合地)来执行。
在操作中,后备麦克风可以包括以下中的任何一个:(i)媒体回放系统中的媒体回放设备上的麦克风(例如,任何PBD 532-538上的麦克风),(ii)被配置为控制媒体回放系统的计算设备(例如,图5中的CR 522)上的麦克风,(iii)联网麦克风系统的辅NMD上的麦克风,或(iv)与联网麦克风系统和/或媒体回放系统通信的另一设备上的另一麦克风。
在一些实施例中,方法1100可以附加地或备选地包括响应于确定主NMD不可用于接收语音命令,另外指示被配置为控制媒体回放系统的计算设备来指示主NMD不可用的步骤,其中,主NMD不可用的指示包括以下中的一个或多个:(i)音频指示,(ii)视觉指示,以及(iii)触觉指示,如本文所述。此外,在一些实施例中,方法1100可以附加地或备选地包括响应于确定主NMD不可用于接收语音命令,另外指示媒体回放系统的一个或多个媒体回放设备来指示主NMD不可用的步骤,其中,主NMD不可用的指示包括以下中的一个或多个:(i)音频指示,(ii)视觉指示,以及(iii)触觉指示,如本文所述。
VI.用于默认回放设备的示例系统、装置和方法
在又一种布置中,本文描述的实施例可以涉及对媒体回放系统中的默认回放设备的指定、以及这种指定的应用。图12示出了用于指定默认回放设备的示例流程图1200,图14示出了用于应用默认回放设备指定的示例流程图1400。方法1200和1400示出的本方法实施例可以在操作环境内实现,该操作环境包含例如图1的媒体回放系统100、图2的一个或多个回放设备200、图3的一个或多个控制设备和图5的多个设备中的一个或多个设备。方法1200和1400可以包括分别由框1202-1208和框1402-1408中的一个或多个所示的一个或多个操作、功能或动作。
A.默认回放设备指定
在一个方面,媒体回放系统中的默认回放设备的指定可以涉及将NMD分配给媒体回放系统中的一个或多个回放设备,使得一个或多个回放设备成为指定的默认回放设备,用于与该NMD相关联的功能。
如图12所示,方法1200包括:在框1202处确定NMD可用于分配,在框1204处显示指示NMD将被分配至的至少一个回放区域的提示,在框1206处接收指示NMD将被分配至的在媒体回放系统中的特定回放区域的输入,以及在框1208处存储指示NMD被分配至特定回放区域的数据。
出于说明的目的,方法1200可以由图5的CR 522执行,其可以是被配置为控制包括PBD 532、534、536、538或其他回放设备中的一个或多个的媒体回放系统的一个或多个控制器设备之一。然而,本领域普通技术人员将理解,结合方法1200所讨论的功能可以附加地或备选地全部地或部分地,在有或没有适当修改的情况下,通过图5中所示的多个设备500中的一个或多个其他设备执行。
在用户与执行方法1200的计算设备(例如,CR 522)交互的示例场景中,CR 522的用户可以指示将NMD分配给一个或多个回放区域。响应于用户的指示,CR 522可以确定一个或多个NMD是否可用于分配。在一种情况下,用户可以向CR 522输入用户希望分配的NMD的标识信息。在下面提供另外的讨论的另一种情况下,CR 522可以在CR 522的通信范围内寻找可用于分配的NMD。在一个实例中,CR 522可以显示找到的NMD的列表,并提示用户选择要分配的NMD。其他示例也是可能的。
在框1202处,方法1200涉及确定联网麦克风设备可用于分配给本地回放网络内的一个或多个回放区域。在本文的讨论中,本地回放网络上的回放设备和控制器可以形成如以上部分中描述的媒体回放系统。出于说明的目的,联网麦克风设备可以是图5的NMD 512。确定NMD 512可用于分配可以涉及确定NMD 512能够作为局域网的一部分或者通过本地回放网络中的设备与本地回放网络通信。如前所述,CR 522和PBD 532、534、536和538(本文也称为“家用设备”)可以被配置为通过本地回放网络彼此通信。这样,确定NMD 512能够与本地回放网络通信可以涉及确定NMD 512能够与至少一个家用设备通信。在一种情况下,一个或多个家用设备可以被配置为从其他家用设备发送和/或检测指示在本地网络上存在发送设备的消息。当发送设备首先上电时,周期性地和/或响应于来自其他设备的请求,可以发送这样的消息。在这种情况下,确定NMD 512能够与至少一个家用设备通信可以涉及由一个或多个家用设备从NMD 512接收指示存在NMD 512的消息。
在一个示例中,CR 522可以建立通过不同于本地回放网络的第二网络与NMD 512的通信。例如,NMD 512可以建立到局域网(LAN)(CR 522也被配置为通过该局域网(LAN)进行通信)的通信,或者建立通过个域网(PAN)与CR 522的通信。在一个示例中,LAN和/或PAN可以便于根据BluetoothTM(IEEE 802.15)无线技术标准。在一种情况下,在建立通过第二网络的连接后,NMD 512可以向CR 522发送指示NMD 512可用于分配给本地回放网络中的一个或多个回放区域的消息。
在另一示例中,确定NMD 512可用于分配还可以涉及NMD 512加入家用设备的本地回放网络。在一种情况下,CR 522(或任何其他家用设备)与NMD 512之间的通信可以在第二网络上建立,如前所述。然而,在这种情况下,CR 522然后可以通过第二网络向NMD 512发送指示用于加入本地回放网络的参数的数据。用于加入本地回放网络的参数的示例可以包括以下中的一个或多个:服务集标识符(SSID)、网络加密类型、网络密码、网络授权令牌和网络通信信道定义等。在一个实例中,在通过第二网络从NMD 512接收到对网络参数的接收确认和/或指示NMD 512可用于分配的消息之后,CR 522可以确定NMD 512可用于分配。在另一实例中,CR 522可以在通过本地回放网络从NMD 512接收到消息之后确定NMD 512可用于分配。在此实例中,通过本地回放网络来自NMD 512的消息可以或可以不明确地指示NMD 512可用于分配,这是因为CR 522和NMD 512之间通过本地回放网络的通信可能足以指示NMD512可用于分配。
如前所述,NMD 512、514和516中的一个或多个可以是家用设备CR 522和PBD 532、534、536和538中的一个或多个的模块或子组件。在这种情况下,继续上述示例,CR 522可以通过识别NMD 512作为其自身的子组件(在NMD 512是CR 522的模块的情况下)而存在、或者通过确定NMD 512是另一家用设备的子组件来确定NMD 512可用于分配。在一个实例中,如果NMD 512是PBD 532的子组件,则CR 522可以识别NMD 512并且当CR 522和PBD 532建立通信(即,通过本地回放网络)时确定NMD 512可用于分配。其他示例也是可能的。
一旦CR 522确定NMD 512可用于分配,CR 522可以在CR 522的用户界面上提供NMD512可用于分配的指示。出于说明的目的,图13A-D示出了在分配NMD时可能涉及的示例界面1302-1362。图13A的界面1302示出了本地回放网络中的回放区域的表示。在一个示例中,对应于特定回放区域(在此情况下为书房回放区域)的表示的选择(例如,屏幕点击、力触摸和/或右击等)可以使界面显示菜单1304(和/或一系列子菜单),其提供可在所选回放区域上执行的动作的表示。如图所示,可以检测到对“分配麦克风”的选择1306。在一个示例中,可以显示界面1302,并且可以在CR 522确定NMD 512可用于分配之前接收选择1306。在另一示例中,可以显示界面802,并且可以在CR 522已经确定NMD 512可用于分配之后接收选择1306。在这种情况下,“分配麦克风”的选项可以不显示在菜单1304中,或者可以是灰色的,除非CR 522已经确定NMD 512或至少一个其他NMD可用于分配。其他示例也是可能的。
图13B的界面1322示出了消息框1324,其指示已经检测到一个或多个NMD(并且可用于分配)。消息框1324还可以包括可用于分配的NMD的可选表示。例如,表示1326可以是可选择的以进行分配NMD 512。在一个示例中,可以响应于对界面1302的选择1306来提供界面1322。在另一示例中,可以响应于CR 522确定NMD 512(并且在该示例中,NMD 514)可用于分配来提供界面1322。在一种情况下,如果响应于仅仅经由分配麦克风的界面(界面1302)检测到一个或多个NMD而非先前输入来提供界面1322和消息框1324,则消息框1324还可以包括可选择的选项(未示出)以稍后分配检测到的NMD。其他示例也是可能的。
在框1204处,方法1200涉及显示指示要向其分配NMD的至少一个回放区域的提示。在一些情况下,至少一个回放区域可以包括两个或更多个回放设备(例如,图5的绑定区域530,其包括PBD 536和538)。在这种情况下,CR 522还可以显示提示,以指示要向其分配NMD512的至少一个回放区域内的至少一个回放设备。在一些其他情况下,CR 522可以不提示对至少一个区域内的回放设备的选择。在这种情况下,NMD 512可以被分配给绑定区域中的每个回放设备,或者默认地被分配给绑定区域的组协调器。其他示例也是可能的。
在一个实施例中,指示至少一个回放区域的提示可以涉及与至少一个回放区域物理相关的提示动作。在一个示例中,提示可以是用户按下用户希望将NMD 512分配给其的回放区域中的回放设备上的按钮。图13C的界面1342示出了示例消息框1344,其用于提示用户按下用户希望将NMD 512分配给其的回放区域中的回放设备上的按钮。如上所述,可以响应于对界面1322上的表示1326的选择来提供界面1342。在另一示例中,提示可以是用户轻击用户希望将NMD 512分配给其的回放区域中的回放设备上的CR 522。在这种情况下,回放设备可以通过近场通信(NFC)协议检测CR 522。
在涉及与至少一个回放区域物理相关的动作的这样的示例中,对NMD 512将被分配给其的至少一个回放区域内的至少一个回放设备的指示可以本质上是对至少一个回放区域的指示。换句话说,在其上发生按钮按下或CR 522轻击的至少一个回放区域中的回放设备也可以是要分配NMD 512的回放设备。其他示例也是可能的。
在另一实施例中,指示至少一个回放区域的提示可涉及在CR 522的用户界面上的提示动作。在一个示例中,CR 522可以在界面上为本地回放网络中的每个回放区域显示对应的表示(类似于图4的回放区域区420),并且还在界面上显示选择对应于要分配NMD 512的回放区域的表示的提示。图13D的界面1362示出了示例消息框1364,其包括与本地回放网络中的回放区域相对应的可选表示。如上所述,可以响应于对界面1322上的表示1326的选择来提供界面1362。在该示例中,如果所选表示对应于绑定回放区域,例如绑定区域530,则CR 522还可以在界面上显示指示绑定回放区域中的特定回放设备(即,PBD 536或538)的提示。例如,CR 522可以在界面上显示选择所选回放区域中的每个回放设备的对应表示的提示。
在另一实施例中,指示至少一个回放区域的提示可以涉及与至少一个回放区域物理相关的动作和CR 522的用户界面上的动作的某种组合。例如,指示要分配NMD 512的回放区域的提示可以仅涉及CR 522的用户界面上的动作,但是指示回放区域内的回放设备的后续提示可以涉及与要分配NMD 512的回放设备物理相关的动作。其他示例也是可能的。
在又一实施例中,指示至少一个回放区域的提示还可包括建议的至少一个回放区域。在一个示例中,CR 522可以识别(i)NMD 512被赋予包括“主卧室”的名称,以及(ii)本地回放网络中的回放区域也赋予“主卧室”的名称,并且因此指示至少一个回放区域的提示包括或向其添加了主卧室回放区域可以是可以分配NMD 512的合适回放区域的建议。其他示例也是可能的。
在框1206处,方法1200涉及接收指示本地回放网络中将分配NMD的特定回放区域的输入。如上所述,如果该特定包括两个或更多个回放设备,则输入还可以指示特定回放区域中的特定回放设备。
在一个实施例中,如果在框1204处显示的提示涉及与回放区域物理相关的动作,则可以从特定回放区域中的回放设备接收指示特定回放区域的输入。例如,如果响应于框1204处所显示的提示而按下PBD 536上的按钮或者执行借助于CR 522轻击PBD 536,则PBD536可以向CR 522发送指示PBD 536和/或绑定区域530被选择的消息。
在另一实施例中,如果在框1204处显示的提示涉及CR 522的界面上的动作,则可以以用户在界面上进行的选择输入的形式接收指示特定回放区域的输入。其他示例也是可能的。
在框1208处,方法1200涉及存储指示向特定回放区域分配NMD的数据。在一个示例中,继续上述示例,存储指示向绑定区域530分配NMD 512的数据可以涉及在CR 522的本地存储器存储装置上存储指示分配的数据。在另一示例中,存储指示分配的数据可以涉及向一个或多个其他家用设备发送指示分配的数据和使一个或多个其他家用设备存储数据的消息。在又一示例中,存储指示分配的数据可以涉及向服务器(例如,云网络502的计算设备504、506和508中的一个或多个)发送,指示分配的数据和使云网络502的计算设备504、506和508中的一个或多个存储数据的消息。其他示例也是可能的。
如上所述,将NMD分配给特定回放区域还可以涉及将NMD分配给特定回放区域中的至少一个回放设备。这样,如果继续上述示例,则指示将NMD 512分配给绑定区域530的数据可以包括指示将NMD 512分配给PBD 536的数据。在一些情况下,如果未明确指示回放区域中的回放设备,则可以将NMD分配给特定回放区域中的每个回放设备。在其他情况下,如果未明确指示回放区域中的回放设备,则可以自动地和/或智能地识别特定回放区域中的回放设备,并且可以将NMD分配给所识别的回放设备。例如,如果回放区域是绑定区域,则可以识别绑定区域的协调回放设备。在另一实例中,如果回放区域是区域组,则可以识别区域组中的组协调器回放设备。其他示例也是可能的。
在一个实施例中,已经分配的NMD可以对应于一个或多个唯一标识符。例如,NMD可以具有唯一的序列号或对应的MAC地址等。因此,存储指示将NMD 512分配给绑定区域530(和/或PBD 536)的数据可以涉及存储NMD 512的唯一标识符向绑定区域530(和/或PBD536)的分配。
在一个示例中,当最初确定NMD 512可用于分配时,CR 522可以接收用于NMD 512的唯一标识符。在一些情况下,如果NMD未提供唯一标识符,则可以生成唯一标识符并将其分配给NMD。其他示例也是可能的。
在一些实施例中,可以将NMD分配给两个或更多个回放区域。例如,在具有如图1所示的“开放式平面图”的家庭中,NMD可以位于起居室、餐厅和厨房附近的某处。在这种情况下,将NMD分配给两个或更多个回放区域可能是有益的。
在一个示例中,继续上述示例,CR 522可以在界面上显示指示要向其分配NMD 512的第二回放区域的提示,接收指示媒体回放系统中的第二回放区域的输入,并且存储指示将NMD分配给第二回放区域的数据,使得NMD被分配给第一回放区域和第二回放区域两者,类似于框1204-1208。
在一个示例中,可以串行地执行将NMD 512分配给第二回放区域的交互。例如,在框1206处接收到指示要将NMD 512分配给绑定区域530的输入之后,或者在存储指示将NMD512分配给绑定区域530的数据之后,CR 522可以在界面上显示指示要向其分配NMD 512的第二回放区域的提示。
在另一示例中,可以基本上与用于将NMD 512分配给绑定区域530的交互并行地执行将NMD 512分配给第二回放区域的交互。例如,在框1204处指示至少一个回区域的提示可以是指示要向其分配NMD 512的每个回放区域的提示。在这种情况下,如果在框1206处接收的输入仅指示单个回放区域,则在框708处存储的数据可以指示NMD 512仅分配给单个回放区域。另一方面,如果在框1206处接收的输入指示两个或更多个回放区域,则在框1208处存储的数据可以指示NMD 512分配给两个或更多个回放区域中的每一个。
在另一示例中,指示回放区域的提示可以提示用户将要向其分配NMD 512的两个或更多个回放区域分组在一起,使得用户然后可以在界面上从区域的表示中选择对应于该组的表示(或者备选地,物理地选择区域组中的回放设备)以指示要将NMD 512分配给区域组和/或区域组中的回放区域。其他示例也是可能的。
Figure BSA0000204052460000651
表1
出于说明的目的,表1示出了默认回放设备数据库中的一组示例条目。如图所示,表1列出了NMD 512、514和516中的每一个以及它们被分配到的回放区域和回放设备。在该示例中,NMD 512和NMD 516都被分配给主卧室回放区域(绑定区域530)。然而,在该示例中,NMD 512还专门分配给主卧室回放区域的PBD 536,而NMD 516还专门分配给PBD 536和PBD538。此外,在该示例中,NMD 514被分配给起居室回放区域和厨房回放区域。然而,NMD 514还被分配给起居室回放区域中的PBD 534,但未进一步分配给厨房回放区域中的任何回放设备。
本领域普通技术人员将理解,不同的格式、组织和参数集也可以实现与表1类似的功能。在一个示例中,可以将两个或更多个NMD分配给单个回放区域或回放设备。在另一示例中,可以将每个NMD分配给三个或更多个回放区域。在另一示例中,可以将每个NMD分配给一个或多个回放设备,而不是任何回放区域。在又一示例中,表1可以列出本地回放网络中的每个回放区域和/或回放设备,可能并非其中的每个列出的回放区域或回放设备都被分配了一个或多个NMD。其他示例也是可能的。
虽然上述讨论通常可以涉及将一个或多个NMD分配给一个或多个回放区域和/或回放设备,但是本领域普通技术人员将理解,可以根据其他方法和/或协议另外地或备选地建立这样的分配和指定。例如,一个或多个回放区域和/或回放设备可以等效地或备选地被分配一个或多个NMD,并且相应的数据可以本地存储在一个或多个NMD处或远程地存储在诸如计算设备504之类的服务器处。继续表1的示例,可以备选地(或另外地)基于经由与至少NMD 512相对应的界面(即,用于管理和控制至少NMD 512的控制器界面)向NMD 512分配PBD536和/或主卧室回放区域来提供表1中的条目。类似地,书房回放区域和主卧室回放区域可以经由对应于至少NMD 512和516的界面被分配给NMD 516。
另外,两种形式的分配和指定可以共存,使得多个NMD和多个回放设备可以彼此交叉分配。在这种情况下,交叉分配可以完全匹配,也可以不完全匹配。例如,在一些情况下,NMD可以被分配给两个回放设备,但只有一个或两个回放设备都没有被分配给NMD。其他示例也是可能的。
如上所述,将NMD分配给特定回放区域指示特定回放区域被指定为用于NMD的默认回放区域。以下部分提供了这种默认回放区域指定的应用示例。
b.默认回放设备指定的应用
如图14所示,方法1400涉及:在框1402处,维护包括指示将NMD的标识分配给回放区域的数据的数据库;在框1404处,接收指示(i)NMD的标识和(ii)媒体回放命令的消息;在框1406处,基于数据库中的数据和接收到的消息来识别媒体回放系统中的回放区域;以及在框1408处,向回放区域发送指示回放命令的消息。
出于说明的目的,方法1400可由图5的计算设备506执行。然而,本领域普通技术人员将理解,结合方法1400所讨论的功能可以全部地或部分地,在有或没有适当修改的情况下,通过图5中所示的多个设备500中的一个或多个其他设备执行。例如,方法1400可以全部地或部分地由计算设备504和/或508或云网络502执行。
在框1402处,方法1400涉及维护包括指示将NMD的标识分配给媒体回放系统的回放区域的数据的数据库。在一个示例中,维护数据库可以涉及与上面结合图12的方法1200描述的功能类似的功能。另外,维护数据库还可以涉及响应于媒体回放系统和/或本地回放网络的改变而更新数据库。例如,如果已经将NMD重新分配给不同的回放区域和/或回放设备,则可以更新数据库。同样,如果一个或多个设备(包括NMD,如NMD 512、514和516)、回放设备(例如,PBD 532、534、536和538)或控制设备(例如,CR 552)被添加、移除、暂时断开连接、或者重新连接,则可以相应地更新数据库。维护数据库的其他示例也是可能的。
在框1404处,方法1400涉及接收指示(i)NMD的标识和(ii)媒体回放命令的消息。继续上面的示例,计算设备506可以从NMD 514接收消息。
在一个示例中,计算设备506可以经由计算设备504从NMD 514接收消息。如结合图5所讨论的,NMD 514可以经由通信路径542向计算设备504发送语音输入,并且计算设备504可以将语音输入转换为等效文本命令,并且随后向计算设备506发送文本命令。在这种情况下,指示(i)NMD的标识和(ii)媒体回放命令的消息可以包括来自计算设备504的文本命令。
在另一示例中,计算设备506可以直接从NMD 514接收消息。在这种情况下,消息可以包括指示媒体回放命令的数据,而在消息中(即,在消息的数据分组报头/前缀内)识别的消息源可以指示NMD 514。在这种情况下,计算设备506还可以处理语音输入并将其转换为等效文本命令。
在框1406处,方法1400涉及基于数据库中的数据和接收到的消息来识别媒体回放系统中的回放区域。还如结合图5所讨论的,计算设备506然后可以解析文本命令以识别一个或多个回放命令。在解析文本命令以识别一个或多个回放命令期间,计算设备506可以识别特定命令,但是可以确定回放区域来执行未识别的特定命令。在一个示例中,如果未在回放命令中提供区域指示,则计算设备506可以确定回放区域来执行未识别的特定命令。在另一示例中,如果在媒体回放系统中不存在回放命令中提供的区域指示,则计算设备506可以确定回放区域来执行未识别的特定命令。其他示例也是可能的。
无论哪种情况,响应于确定接收到的消息不指示特定回放区域,计算设备1406可以基于接收到的消息中的NMD的标识在数据库中识别媒体回放系统中的回放区域。换句话说,计算设备506可以识别被指定为在接收到的消息中标识的NMD(和/或媒体回放命令源于其)的默认回放区域的回放区域。
继续上面的示例,包括表1,如果接收到的消息未标识有效的回放区域但指示了NMD 512,则计算设备506可以将回放区域“主卧室”和/或PBD 536识别为要执行接收到的消息中的媒体播放命令的回放区域。
如表1所示,在一些情况下,诸如NMD 514或516之类的NMD可以被分配给两个或更多个回放区域(和/或回放设备)。在一个示例中,计算设备506可以将两个或更多个回放区域中的每一个识别为要执行媒体回放命令的回放区域。例如,如果接收到的消息指示NMD514,则计算设备506可以将起居室和厨房都识别为要执行媒体回放命令的回放区域。
在另一示例中,计算设备506可以将两个或更多个回放区域的子集识别为要执行媒体回放命令的回放区域。例如,如果接收到的消息指示NMD 516,则计算设备可以将书房或主卧室中的一个识别为要执行媒体回放命令的回放区域。在一些情况下,计算设备506可以基于诸如上下文信息之类的附加信息来识别子集。
在一种情况下,计算设备506可以基于与两个或更多个回放区域相关联的媒体内容将两个或更多个回放区域的子集识别为将执行媒体回放命令的回放区域。例如,如果两个或更多个回放区域的第一子集当在对应NMD处接收到语音输入时正在播放媒体内容和/或与媒体内容相关联(即,具有相应的回放队列中的媒体内容),而两个或更多个回放区域的第二子集不在播放媒体内容和/或并非与媒体内容相关联,则计算设备506可以将两个或更多个回放区域的第一子集识别为要执行媒体回放命令的回放区域。
另外,计算设备506可以基于媒体回放命令和两个或更多个回放区域的媒体回放状态来识别两个或更多个回放区域的子集。在这种情况下,计算设备506可以被配置为接收和维护媒体回放系统中的每个回放区域的回放状态。例如,如果媒体回放命令涉及当在相应的NMD接收到语音输入时两个或更多个回放区域的第一子集正在播放媒体内容而两个或更多个回放区域的第二子集不在播放媒体内容时暂停对媒体内容的回放,则计算设备506可以基于用户更可能向正在播放媒体内容的回放区域而不是不在播放媒体内容(即,已经暂停)的回放区域提供暂停命令的假设来识别两个或更多个回放区域的第一子集。
在另一种情况下,数据库(或另一数据库)可以被配置为还存储与媒体回放系统内的媒体回放历史有关的信息,和/或更具体地与每个NMD相关联的媒体回放命令历史。例如,数据库中的数据可以指示两个或更多个回放区域的子集更频繁地用于播放媒体内容和/或更频繁地用于响应于经由相应NMD的语音命令来播放媒体内容。在这种情况下,计算设备506可以将两个或更多个回放区域中较为频繁使用的子集识别为要执行媒体回放命令的回放区域。
在另一种情况下,当两个或更多个回放区域的子集更频繁地用于回放媒体内容和/或更频繁地用于响应于语音命令而播放媒体内容时,媒体回放历史和/或媒体回放命令历史还可以指示一天中的次数或一周中的天数等。在这种情况下,计算设备506还可以基于在对应NMD处接收到语音输入的时间来识别要执行媒体回放命令的两个或更多个回放区域的子集。
在又一种情况下,计算设备506还可以基于计算设备506可用的接近度信息将两个或更多个回放区域的子集识别为执行媒体回放命令的回放区域。换句话说,计算设备506可以基于在向对应NMD提供语音输入时用户的物理位置来识别两个或更多个回放区域的子集。
在一个示例中,由NMD检测和处理的语音输入可以包含与语音输入相对应的方向信息。在一个实施例中,在将NMD设置和分配给两个或更多个回放区域期间,NMD可以确定并在存储器中(本地或远程,即计算设备504)存储与NMD相关的两个或更多个回放区域的位置。例如,在NMD的设置和分配期间,或者随着时间的推移,NMD可以检测两个或更多个回放区域对媒体内容的回放,并且将检测到媒体内容的回放的方向与对应的回放区域相关联。这样,可以基于NMD检测到语音输入的方向来确定用户的物理位置。
在另一示例中,如前所述,媒体回放系统中的一个或多个其他设备还可以包括NMD和/或其他传感器。因此,可用传感器网络可以被配置为确定当用户向对应NMD提供语音输入时用户的接近度或对用于进行定位(即,通过三角测量等)。在一种情况下,如果用户持有或最近使用诸如CR 522之类的控制设备,则可以基于控制设备和回放设备之间的信号强度来确定用户的位置或用户与回放设备/回放区域之间的接近度。类似地,由其他NMD检测到的语音输入的音频量级,或者各种设备之间由用户引起的无线信号干扰也可以由计算设备506接收和应用,以确定在检测到语音输入时用户的物理位置,并因此将两个或更多个回放区域的子集识别为要执行媒体回放命令的回放区域。其他示例也是可能的。
在框1408处,方法1400涉及向回放区域发送指示媒体回放命令的消息。如前所述,媒体回放系统中的每个回放区域包括至少一个回放设备。因此,向回放区域发送指示媒体回放命令的消息可以包括向回放区域的相应的至少一个回放设备发送指示媒体回放命令的消息。参考表1和图5,书房回放区域仅包括PBD 532。在这种情况下,向书房回放区域发送指示媒体回放命令的消息可以涉及计算设备506向PBD 532发送指示媒体回放命令的消息。
再次参考表1和图5,绑定区域530(主卧室)包括PBD 536和538。在一个这样的情况下,计算设备506可以向PBD 536和538发送指示媒体回放命令的消息。在另一这样的情况下,计算设备506可以仅向回放区域中的一个回放设备发送指示媒体回放命令的消息。
在一个实例中,计算设备506可以根据数据库选择PBD 536和538中的一个。例如,如果媒体回放命令源自NMD 512,并且计算设备506正在向主卧室回放区域发送指示媒体回放命令的消息,则计算设备506可以向PBD 536发送指示媒体回放命令的消息,这是因为NMD512还被分配给PBD 536而不是PBD 538。
在另一示例中,如果媒体回放命令源自NMD 516,并且计算设备506正在向主卧室回放区域发送指示媒体回放命令的消息,则计算设备506可基于附加信息选择PBD 536或PBD 538中的一个,这是因为NMD 516已被分配给PBD 536和PBD 538,作为向主卧室回放区域的分配的一部分。在一种情况下,计算设备506可以基于一个或多个因素(例如,设备处理能力和网络状况等)选择PBD 536或PBD 538中的一个。另外或备选地,计算设备506可以基于作为绑定区域的协调器的回放设备之一来选择PBD 536或PBD 538中的一个。其他示例也是可能的。
在另一种情况下,如先前所讨论的,计算设备506可以将两个或更多个回放区域识别为要执行媒体回放命令的回放区域。在这种情况下,计算设备506可以向两个或更多个回放区域中的每个中的每个回放设备、两个或更多个回放区域中的每个中的回放设备的子集、或者其某种组合发送指示媒体回放命令的消息。
此外,在被识别为要执行媒体回放命令的回放区域的两个或更多个回放区域的全部或至少一个子集被分组在区域组中的情况下,计算设备506可以识别该区域组中的单个回放设备,以发送指示媒体播放命令的消息而不是向每个回放区域中的回放设备发送消息。在这种情况下,计算设备506可以基于一个或多个因素(例如,设备处理能力和网络状况等)从区域组中选择回放设备。另外或备选地,计算设备506可以基于作为区域组的组协调器的回放设备来从区域组中选择回放设备。其他示例也是可能的。
在一个实施例中,在向回放区域发送指示媒体回放命令的消息之后,计算设备506还可以向计算设备504和/或NMD发送指示回放命令被发送以在回放区域中执行的消息。在一个示例中,计算设备506可以从回放区域中的至少一个回放设备接收指示在向NMD发送指示回放命令被发送以在回放区域中执行的消息之前回放区域正在执行回放命令的消息。
在一种情况下,计算设备506可以直接向NMD发送指示回放命令被发送以在回放区域中执行的消息。在另一种情况下,计算设备506可以经由另一计算设备(例如,云网络502内的计算设备504)向NMD发送指示回放命令被发送以在回放区域中执行的消息。
在又一种情况下,计算设备506可以经由媒体回放系统中的回放设备向NMD发送指示回放命令被发送以在回放区域中执行的消息。例如,计算设备506可以经由通信路径544向PMD 536发送指示回放命令被发送以执行的消息,并且PMD 536可以经由本地通信手段546向NMD 512中继消息。
中继指示回放命令被发送以供执行的消息的回放设备可以是执行媒体回放命令的回放设备。例如,计算设备506在向回放区域发送指示媒体回放命令的消息时,还可以在接收到指示媒体回放命令的消息之后,使所识别的回放区域中的回放设备向相应的NMD发送指示已发送媒体回放命令以供执行的消息。
另外或备选地,计算设备506可以确定媒体回放命令已经被执行或正被执行,并且响应地直接地或经由另一设备向计算设备504和/或NMD发送指示媒体播放命令已被执行或正在执行的消息。
此外,计算设备506在向回放区域发送指示媒体回放命令的消息时,还可以使得所识别的回放区域中的回放设备在完成对媒体回放命令的执行之后或在执行媒体回放命令期间向相应的NMD发送指示媒体播放命令已被执行或正在执行的消息。其他示例也是可能的。
VII.用于音频响应回放的示例系统、装置和方法
在另一布置中,本文描述的实施例可以涉及回放对语音命令的音频响应。图15示出了用于播放音频响应的方法的示例流程图1500,图16示出了更详细地呈现图15的框1508和1512的各方面的示例流程图1600。方法1500和1600的本方法实施例可以在操作环境内实现,该操作环境包含例如图1的媒体回放系统100、图2的一个或多个回放设备200、图3的一个或多个控制设备和图5的系统500中的多个设备中的一个或多个设备。
在方法1500的框1502处,可以将网络麦克风设备512、514或516分配(例如,配对或绑定)给包括一个或多个回放设备(例如,回放设备532、534、536、538)的区域。可以向区域分配NMD,如被标识为标题为“Default Playback Device(s)”的美国临时申请No.62/298,410的申请中所描述的,该申请的内容通过引用整体并入本文。在框1504处,用户可以向包含麦克风(例如,NMD 512、514、516、PBD 532、534、536、538、CR 522)的多个设备500中的一个或多个设备提供语音命令。一个或多个麦克风设备可以向多个设备系统500中的其他设备(例如,云网络502中的一个或多个计算设备504、506、508,NMD 512、514、516,PBD 532、534、536、538)传送语音命令以进行处理。在框1506处,一个或多个处理设备可以处理语音命令并返回要回放的响应。要回放的响应可以以语音响应消息的形式返回,该语音响应消息包括要播放的音频片段、要转换为话音的文本、和/或要播放的预先记录的响应的标识符(例如,URL或URI),其可以本地存储在系统500的设备上。可以经由一个或多个通信路径542、544、546返回响应。
在框1508处,系统500可以选择一个或多个设备或一个或多个区域来播放语音响应。确定或选择播放语音响应的一个或多个设备或区域可取决于多种因素,包括上下文信息、配对信息和/或用户设置。将参考图8更详细地讨论框708。
在框1510处,系统500可以接收指示要播放响应的语音响应消息。在框1512处,系统500可以使在框1508中选择的一个或多个设备来播放语音响应。可以将默认区域分组以用于与另一区域进行同步回放,并且可以基于将参考图16更详细地描述的分组来调整对音频响应的回放。
图16示出了根据本文描述的各方面选择一个或多个区域或设备(例如,单独的设备、包括一个或多个设备的区域)以播放对语音命令的语音响应的说明性流程图。在框1602处,计算设备(例如,NMD、回放设备、控制设备、计算设备)可以确定是使用预定响应设备(例如,默认PBD)或区域(例如,默认区域)还是动态地选择响应设备或区域来播放语音响应。在将新设备添加到系统500时,可以在初始系统设置或配置(例如,分配、配对、绑定)期间确定预定的响应设备或区域。例如,初始设置或配置可以是将新的回放设备添加到系统500和/或将新的NMD添加到或分配给区域(例如,默认区域)。预定响应设备可以由用户选择和/或由系统500自动选择。可以基于诸如上下文信息(例如,位置信息、定向信息、存在信息)之类的各种信息来动态地选择响应设备或区域,所述各种信息可以包括配对信息(例如,取决于用户的位置的配对、取决于麦克风设备的位置的配对)和/或能力信息(例如,可用传感器、可用设备、可用网络、可用处理能力)。
是使用预定设备还是动态地选择音频响应设备的决定可以基于系统500动态地选择响应设备和/或有效确定响应设备的能力。可以使用某些设备和/或硬件以进行动态选择,并且如果某些设备和/或硬件不可用于参与动态选择,则系统500可以默认使用预定的响应设备。例如,系统500可能不具有确定与用户的位置和/或麦克风设备(例如,NMD、PBD、CR)的位置相关的位置信息的能力,该麦克风设备接收或负责处理由用户说出的语音命令,和/或系统500可能先前没有确定系统500中的设备的位置信息。在这样的示例中,确定使用预定设备可以是向用户提供对语音命令的立即确认或响应的最有利途径。作为另一示例,系统500可能缺少诸如传感器、相机或可用于确定上下文信息(例如,位置信息、存在信息等)的其他输入设备之类的硬件。在这种情况下,系统500可以决定使用预定的响应设备(例如,默认区域、默认回放设备)。作为又一示例,系统500可以仅具有一个区域,在这种情况下,系统可以自动地确定将这一个区域设置为默认区域和/或将这一个区域用于所有音频响应。类似地,系统500可以仅具有单个PBD。鉴于此,系统可以选择使用单个PBD作为默认设备和/或预定的音频响应设备。
在一些情况下,可以通过经由通信路径542、544和/或546向云网络502发送由系统500中的设备检测到的信息以进行处理来确定或处理位置信息。云网络502可以拥有比设备NMD 512、514、516、CR 522和PBD 532、534、536、538更多的处理能力。在云网络502不可用的情况下,系统500可以使用预定设备之一,并且可以遵从被存储在用户简档中的用户对特定的预定设备(例如,默认响应设备)的偏好以说出或播放音频响应。在一些方面,位置信息可以由NMD、CR、PBD中的一个或多个本地处理。
如果系统500已经在框1602处确定选择一个或多个预定响应设备或区域来播放对语音命令的音频响应,则方法1600可以进行到框1604。如果系统500已经在框1602处确定动态地选择一个或多个响应设备来播放音频响应,则方法800可以进行到框806。
在框1604处,处理设备(例如,多个设备500中的任何一个)可以确定选择预定区域还是一个或多个预定设备。例如,用户可以在初始设置或配置(例如,分配、配对或绑定)期间指定一个或多个设备或一个或多个区域来播放对任何语音命令的音频响应,并且用户指定可以作为默认设置被保存在与用户关联的用户简档中。用户简档可以存储在多个设备500中的任何设备中。响应于接收到语音命令,接收设备或系统500中的任何其他设备可以检索本地或在另一设备中存储的用户简档,以确定要使用回放设备的哪个或哪些预定扬声器或区域作为播放对语音命令的音频响应的设备。
在一个示例中,NMD可以包括扬声器,并且联网麦克风设备的扬声器可以用于播放语音响应。
在另一方面,可以在对NMD的初始设置期间将音频响应设备(例如,NMD、回放设备、控制设备)中的扬声器配置为播放音频响应。例如,用户可以选择默认区域中的特定设备作为默认响应设备。在其他情况下,默认区域可以包括一个回放设备,并且这一个回放设备可以被识别为默认响应设备。在一些其他情况下,默认区域可以包括多于一个回放设备,并且用户可以选择回放设备之一或两个或更多个回放设备作为默认响应设备。
在一些方面,回放音频响应的区域可以是包括两个或更多个回放设备(例如,PBD536、538)的绑定区域(例如,绑定区域530)。在绑定区域中,音频响应可以由结合区域中的一个或多个回放设备播放,并且结合区域的哪个回放设备播放音频可以取决于回放设备的类型。例如,绑定区域可以包括环绕声系统,其中回放设备可以放置在用户周围的不同位置处并且负责播放一个或多个音频声道。在这种布置中,回放设备可以放置在用户的前面和后面。基于用户至PBD的定向,可以选择用户前面的PBD来播放音频响应。
在一些方面,NMD通常可以是静止的,使得可以在初始设置期间配置相对位置。在一个方面,用户可以识别最靠近NMD的响应设备。响应设备可以是默认区域或另一区域的一部分。在另一方面,最靠近NMD的响应设备可以由附近的响应设备和/或NMD自动识别。例如,可以使用附近的响应设备和/或NMD的麦克风来执行接近度检测。例如,默认区域中的一个或多个回放设备可以发出或播放预定音调。可以在每个回放设备处以相同的功率电平或音量播放预定音调。NMD的麦克风可以接收测试音调并且基于最高功率电平来确定哪个回放设备最靠近NMD。
在一些方面,可以基于回放设备相对于NMD的定向来确定默认响应设备。例如,相比于物理上较为靠近NMD的回放设备,面向NMD的回放设备可以具有较高的优先级作为默认响应设备。类似于使用测试音调来确定最近的回放设备,由NMD的麦克风拾取的测试音调可以用于确定回放设备相对于NMD的定向。NMD可以拾取或检测从回放设备播放的音调,使得面向NMD的扬声器比远离NMD的扬声器被检测为更大声或处于更高的功率。用于接近度或位置确定的其他技术是可能的,包括本文描述的那些技术。
作为另一示例,可以选择所有回放设备来播放对语音命令的音频响应。例如,默认区域(例如,分配了NMD的区域)中的所有回放设备可以播放响应于音频或语音命令的任何或所有音频响应。
在确定一个或多个预定的响应设备之后,该方法可以进行到框1608并确定默认区域是否与另一区域被分组在一起。默认区域可以与另一区域被分组在一起,以进行对媒体项目(例如,音频内容、视频片段、无线电)的同步回放。
返回到框1606,系统500可以动态地选择一个或多个响应设备或一个或多个区域来播放对音频命令的音频响应。可以基于配对信息(例如,基于用户位置和/或设备位置的NMD动态配对)和/或上下文信息(例如,用户的定向、语音命令时的上下文、位置信息)来选择动态选择的音频响应设备。配对信息可以取决于上下文信息。可以独立于配对信息来选择动态选择的设备。被选择用于进行响应的区域或设备可以与分配NMD的设备或区域相同或不同。
如上所述,NMD可以配对至或分配给区域或设备。动态选择的音频响应设备可以是NMD与之配对的设备,其中NMD与另一设备之间的配对可以基于响应于特定事件(例如,用户请求特定区域)可在任何时间确定的用户位置(例如,响应于用户位置的改变而改变)和/或NMD相对于另一设备(例如,NMD、PBD、CR)的位置而动态地改变。例如,在接收到语音命令时或者在向用户播放音频响应时。可以使用多个设备500中的一个或多个以及各种技术来确定用户的位置。例如,多个设备500中的两个或更多个不同设备中的麦克风可以用于确定用户相对于两个或更多个不同设备的位置。
两个或更多个不同的设备可以正在收听用户的语音并通过比较用户语音的量级(例如,音量、功率水平)和/或确定两个或更多个不同设备中的每个设备接收用户的语音的时间之间的延迟或时间差来确定最近的扬声器。作为示例,第一设备(例如,PBD 532)和第二设备(例如,PBD 534)可以与用户位于相同的区域中,并且这些回放设备的麦克风能够拾取用户的语音命令。当用户说出语音命令时,设备能够记录和/或分析用户的话音或语音。记录可以由包括麦克风(例如,NMD、PBD CR)的任何设备500完成,并且分析可以由多个设备500中的任何设备完成。该分析可以包括从一个或多个其他设备接收所记录的用户话音或语音,以及基于时间戳和/或根据说出的单词和/或根据用户的语音的音节或记录的其他特性进行比较。在一些方面,可以在每个单词、音节和/或短语之后执行比较,并且不需要等到用户完成说出语音命令。
不同设备接收到用户语音的声音的时间之间的延迟或时间差可以指示用户和接收设备之间的相对距离,这是因为较靠近用户的设备可以在远离用户的设备之前接收到用户语音的声音。例如,两个或更多个设备均可以具有在语音输入中出现某些声音特性或声音标记时的时间戳,并且比较时间戳以确定两个或更多个设备中的哪个设备首先接收到语音的声音。两个或更多个设备可以保持同步时钟并且可以直接比较声音特性的时间戳以确定哪个设备首先接收到该声音特性。在一些方面,两个或更多个设备可以确定它们各自的时钟之间的时间差,并且在减去它们各自的时钟之间的时间差的同时比较时间戳的差。
用户语音的记录或分析可以由一个或多个设备执行,并且可以由另一设备发起。例如,NMD或包含麦克风的其他设备(例如,CR、PBD)可以总是在收听语音命令,并且当NMD或其他麦克风设备检测到用户已经开始说出命令时,NMD可以通过通过通信连接(例如,542、544、546)向可能或可能不与NMD位于同一区域的其他麦克风设备发送警报(例如,消息)来提醒其他麦克风设备(例如,NMD、CR、PBD)开始接收、记录和/或分析用户的语音命令。
类似地,用户话音的分析可用于确定用户相对于扬声器的定向。例如,用户可以面向第一扬声器并且具有指向用户背面的第二扬声器。在一些情况下,即使用户更靠近第二扬声器,系统500也可以选择第一扬声器来播放音频响应,这是因为可能希望让用户前面的扬声器而不是用户后面的扬声器来播放音频响应。用户前面的设备(例如,PBD、CR、NMD)中的麦克风可以比用户侧面或后面的设备(例如,PBD、CR、NMD)中的麦克风更大声地或以更高的功率拾取或检测用户的语音。
在一些方面,位置信息可包括麦克风设备(例如,NMD、PBD、CR)相对于扬声器的位置。例如,默认区域中的一个或多个回放设备可以发出或播放预定音调。预定音调可以在每个回放设备处以相同的功率水平或音量播放和/或可以在人类听觉范围(例如,大约20Hz至20kHz)之内或之外。NMD的麦克风可以接收测试音调并且基于最高功率电平来确定哪个回放设备最靠近NMD。
在一些方面,NMD 512可以包括麦克风阵列606。使用麦克风阵列606,NMD通常可以通过确定麦克风阵列606中的哪个或哪些麦克风检测到用户语音的最大音量或最高功率来识别用户的方向、距离和/或定向。在一些方面,系统或NMD 500可以先前已经确定回放设备的相对位置和/或已经被编程有回放设备的相对位置,并且NMD能够将回放设备的麦克风与其自身的麦克风组合使用,以在说出语音命令时使用用户的语音确定用户的大概方向、距离和/或定向。用户位置的每个确定可以存储在一个或多个设备500中,并且可以响应于之后的语音命令而对其进行参考,以更快地确定用户的位置和/或定向。
用于确定用户位置的另一种技术可以是使用环境(例如,位置、区域)中无线信号的干扰和/或强度。在一些方面,可以基于用户和PBD和/或NMD所位于的环境中的无线信号来确定用户的位置。无线信号可以包括根据任何无线通信协议的无线通信信号,该无线通信协议例如是工业标准(例如,IEEE 802.11a、802.11b、802.11g、802.11n、802.11ac、802.15、蓝牙、4G移动通信标准、LTE移动通信标准、
Figure BSA0000204052460000791
Figure BSA0000204052460000801
近场通信(NFC)等)。用户可以具有设备(例如,计算设备、移动设备、可穿戴设备、平板电脑等),其包括根据无线通信协议发送无线通信信号的无线接口。从设备发射的无线信号可能会引起与用户所在的环境中存在的其他无线信号的干扰。基于与其他无线信号的干扰强度,可以检测无线信号和干扰的其他设备可以确定用户的位置。
为了基于环境中的无线信号的强度来确定用户的位置,用户的设备可以测量由环境中的任何无线设备发射的信号的信号强度(例如,接收信号强度指示符(RSSI))用户并识别信号强度最强的设备作为离用户最近的设备。类似地,环境中的无线设备(例如,PBD、NMD、无线路由器、信标,NFC)可以测量由用户设备发射的无线信号的信号强度,并且通过其他设备发送和/或收集用户设备的无线信号的信号强度测量结果。可以通过系统500中的任何设备来收集和/或比较信号强度测量结果,并且可以将具有最强信号强度测量结果的设备识别为最靠近用户的设备。
在一些方面,NMD可以变为与区域取消配对和与区域重新配对。如果NMD离开与媒体回放系统相关联的环境(例如,离开家庭环境、离开该区域),移动到通信路径(例如,通信路径542、544和/或546)的范围之外(例如,移动到通信路径的无线信号范围之外),和/或断开与通信路径的连接(例如,断开与网络的连接、从系统或服务中退出、禁用通信接口、进入飞行模式),则可能发生这种取消配对。例如,如果NMD返回到与媒体回放系统相关联的环境(例如,重新进入家庭环境),返回到通信路径的范围内(例如,移动进入通信路径的无线信号范围),和/或重新连接到通信路径(例如,建立到网络的连接、启用通信接口、退出飞行模式),则NMD稍后可以与区域重新配对。
作为示例,用户可以携带NMD并且可以从用户家的房屋中移除NMD。因此,NMD可能会失去与NMD配对的区域或设备的连接。NMD可以存储该最后已知的连接或配对,并且在返回到用户的家中时利用此最后已知的连接或配对来自动尝试重新连接或重新配对。在一些方面,NMD可以基于如本文所述的位置信息动态地配对,并且一旦NMD确定NMD能够与区域或设备配对,则NMD可以自动地进行动态配对。
在NMD被取消配对时由用户说出并由NMD接收的任何语音命令可以在重新配对之后立即处理和/或执行或者排队等待处理和/或执行,并且可以在如本文所述的动态选择的设备上播放对语音命令的任何音频响应。例如,用户可以在家外部播放播放列表并说出在返回家之后继续播放相同的播放列表的语音命令。NMD可以在用户进入家中之前、在与家中的任何设备或区域重新配对之前、在进入家中之后、或与家中的任何设备或区域重新配对之后,开始处理语音命令(例如,开始本地处理、向系统500中的另一设备发送以进行处理)。对语音命令的音频响应可以由与NMD配对的第一区域或设备播放,这可以根据本文描述的动态配对方面。相同的取消配对和重新配对特征可以适用于在不同区域之间移动的用户或NMD。在改变不同区域之间的配对或者与特定区域或设备取消配对和重新配对时,当前播放内容或最后播放内容的状态信息可以与配对过程一起或者与配对过程分开地传送。
在一些情况下,语音命令可以包括要在其中执行命令的特定区域(例如,在厨房中播放音乐)。响应于语音命令中对特定区域(例如,厨房)的请求,NMD可以自动地将其配对改变为厨房区域。语音命令中对特定区域的请求可以覆盖NMD可能基于检测到的用户或NMD的位置而另外做出的动态配对选择。
在美国专利No.9,084,058、美国专利No.9,225,307、美国专利No.8,930,005、美国专利No.9,195,432、2014年9月2日提交的美国申请No.14/475,191以及2015年4月8日提交的美国专利申请No.14/681,735中描述了用于确定与用户或其他设备相关的位置信息的其他技术,这些专利或申请的全部内容通过引用并入本文。
该方法可以进行到框1608,其用于确定所选区域(例如,默认区域或设备或动态选择的区域或设备)是否如上所述与附加区域分组在一起。如果所选区域未与另一区域分组在一起,则在框1610处系统500可以使得可以包括一个或多个响应设备的所选区域播放音频响应。音频响应可以生成或存储在播放音频响应的设备中,和/或可以通过任何通信路径542、544、546从系统500中的任何其他设备向播放音频响应的设备发送音频响应。可以在来自其他设备的消息中接收音频响应和/或所选响应设备可以从处理语音命令的设备(例如,系统500中的任何设备)接收包含与要播放的特定音频响应相对应的标识符的消息。
在一些方面,系统可以确定所选区域(例如,预定区域、默认区域、动态选择区域)或所选设备(例如,预定设备、默认设备、动态选择设备)处于与另一区域分组在一起的区域中并进行至框1612。例如,所选区域以及与所选区域分组在一起的附加区域可以同步播放音频内容(例如,同时同步播放相同的音频内容)。在接收处理语音命令的语音命令和/或播放对语音命令的音频响应时,当前播放的媒体项或音频内容(例如,歌曲、播放列表、无线电广播节目、视频)的回放可以继续保持不中断,同时从所选区域的设备播放音频响应。同时,除了与所选区域分组在一起的任何其他区域之外,还可以在所选区域中播放将作为音频或语音命令的结果而播放的任何媒体项或音频内容。例如,语音命令可以是播放特定歌曲的请求,并且在处理语音命令并且请求歌曲时,任何当前播放的音频内容的音频回放可以继续,同时由动态选择或预定的响应设备播放音频响应。一旦语音命令被处理并且识别并检索到所请求的歌曲,则由所选区域和与默认区域分组在一起的任何区域的所有回放设备进行的回放可以改变至所请求的歌曲。
在一些方面,与响应设备在同一区域中的和与响应设备分组在一起的区域中的所有回放设备都可以播放音频响应。是否要在这些区域中播放音频响应的确定可以基于上下文信息(例如,用户存在)。例如,如果所选响应设备位于被分组用于与第二区域进行同步音频回放的第一区域中,则系统可以确定用户存在于第二区域中并播放音频响应以向其他用户通知接收到的语音命令引起回放状态改变。
在一些方面,可以为单个语音命令提供一个以上的音频响应。例如,响应于接收语音命令的多个设备500中的设备向用户提供已经接收到语音命令的确认或通知,可以播放第一音频响应,并且响应于处理语音命令和/或完成对语音命令的处理可以播放第二音频响应。可以在一个或多个预定设备或动态选择的设备的任何组合上播放第一音频响应和第二音频响应。例如,用户可以说出播放“前40的播放列表”的播放语音命令,并且默认音频响应设备可以播放指示NMD(例如,与默认区域相关联的NMD)已接收到语音命令的第一音频响应(例如,音调、铃声、通知声音、声音片段)。响应于接收到正在处理语音命令或处理完成的指示,可以生成和/或接收诸如“现在正在播放前40的播放列表”之类的第二音频响应。可以在动态选择的设备上播放第二音频响应。根据需要,可以重复图15和图16的各个框,以用于附加音频命令和/或音频响应。
在一些方面,所选择的一个或多个响应设备可以基于各种因素来调整音频响应的回放音量。在接收语音命令之前和/或在播放音频响应之前,一些响应设备可以已经被设置在特定音量等级,并且响应设备可以以该特定音量等级播放音频响应。即使响应设备当前可能不在播放任何媒体内容,也可以将响应设备设置在特定音量等级。可以以大于、小于或等于特定音量等级的音量来播放对语音命令的音频响应。
在一些情况下,系统可能确定所选择的一个或多个区域仍然与用户相距一定距离,并且系统可以以较大的音量播放音频响应,使得用户可以听到音频响应。例如,系统可能已经选择了厨房区域中的回放设备,这是因为厨房回放设备最靠近用户,但是用户可能位于没有回放设备的后院外面。为了使用户能够听到来自回放设备的音频响应,可能需要以较大的音量来播放音频响应。音频响应的音量可以与可以播放媒体内容的音量或响度无关。在这种情况下,NMD也可以在厨房区域中,并且系统可以确定使用NMD接收到的用户语音的响度与音频响应回放的音量之间的反比关系。
是否调整回放音量的确定可以取决于诸如用户位置和/或用户存在信息之类的上下文信息。例如,系统可能已经确定用户距所选回放设备的距离大于阈值距离,或者用户处于特定区域中,该特定区域可以被预定为处于要调整音频响应回放的音量的距离处。在一些方面,如果系统确定另一个人或用户在所选区域中,则系统可能不会将音频响应回放的音量增加到阈值音量等级之上。
在一些方面,当确定播放音频响应的音量时,系统可以使用其他上下文信息,例如一天中的时间、星期几和/或当前播放的媒体内容的音量。可以使用其他上下文信息来区分用户是否与NMD相距一定距离,或者用户是否以低音量(例如,耳语)提供语音命令。例如,当相同位置的其他用户可能正在睡觉时,一天中的时间可能是晚上或深夜。用户可能不希望打扰正在睡觉的其他用户,因此可以以低音量提供语音命令。基于在特定时间(例如,晚上9点)之后的一天中的时间,系统可以确定切换到诸如夜间模式之类的特殊模式并且以与NMD接收语音命令的音量相同或大约相同的音量来播放音频响应。在一些方面,可以向用户提供通过控制设备使用夜间模式的选项。在又一示例中,在周末睡眠时间可能更灵活,因此系统可以确定即使一天中的时间在特定时间之后,系统也可以不使用夜间模式,因为这一天是周末。
另一示例可以是部分地基于可以播放当前播放的音乐的音量来确定音频响应的音量。例如,当音乐音量被设置为低于或等于阈值音量等级时,系统可以决定自动使用夜间模式音频响应音量。用户可能正在以较低的音量播放音乐,以便不会打扰在较高音量下则可能在收听范围内的其他人。在该示例中,音乐回放的音量和/或用户语音的响度与音频响应的音量之间可以存在直接相关性。
系统可以使用本文描述的各种技术从环境中的其他设备接收上下文信息,例如环境中的人的存在信息和/或位置信息。系统可以基于上下文信息和/或位置信息来确定可以从当前音量设置改变要播放音频响应的音量。
在音频响应回放时间段期间,音频响应回放音量可以独立于媒体内容的回放音量的调整或与其结合来调整,或者可以如在2016年4月14日提交的题为“Content Mixing”的美国申请No.15/098,760中描述的在音频响应回放时间段期间调整媒体内容的回放音量,该申请的内容通过引用合并于此。
在使所选择的一个或多个回放设备以调整后的音量播放音频响应时,云网络502中的一个或多个回放设备中的回放设备和/或一个或多个计算设备可以确定调整后的音量。例如,云网络502中的一个或多个计算设备可以确定调整后的音量(例如,音量等级、增益等级、增益调整量)并向所选择的一个或多个回放设备发送调整音量信息。在另一示例中,所选择的一个或多个设备可以确定调整后的音量。
虽然本文描述的特征解决了选择一个或多个设备来播放对语音命令的音频响应,但是代替或者除了播放音频响应之外,所选择的一个或多个设备还可以提供视觉指示作为对语音命令的响应。
VIII.其他示例特征
(特征1)一种用于回放设备的方法,该方法包括:以第一音量等级输出音频内容;接收与网络麦克风设备相关联的消息;以及基于该消息,将音频内容的音量调整到第二音量等级,该第二音量等级低于与网络麦克风设备相关联的内容的音量。
(特征2)根据特征1所述的方法,其中:消息定义与网络麦克风相关联的内容的持续时间,并且音频内容的音量在所定义的持续时间内被调整到第二音量等级。
(特征3)根据特征2所述的方法,还包括在定义的持续时间之后将音频内容的音量恢复至第一音量等级。
(特征4)根据特征1至3中任一项所述的方法,还包括将与网络麦克风设备相关联的内容与音频内容混合以在回放设备上回放。
(特征5)根据特征1至3中任一项所述的方法,其中:调整音频内容的音量包括使音频内容静音或暂停音频内容;并且该方法还包括在音频内容被静音的同时在回放设备上输出与网络麦克风设备相关联的内容。
(特征6)一种计算机可读存储介质,包括用于由处理器执行的指令,所述指令在被执行时使得处理器实现根据任何前述特征的方法。
(特征7)一种回放设备,包括:网络接口,被配置为经由通信网络与网络麦克风设备通信;处理器,被配置为执行根据任何前述特征的方法。
(特征8)一种方法,包括:在媒体回放系统和包括联网麦克风设备和联网麦克风服务器的联网麦克风系统之间建立元数据交换通道;在建立元数据交换通道之后,媒体回放系统经历元数据交换触发事件;以及响应于经历元数据交换触发事件,经由元数据交换通道,从媒体回放系统向联网麦克风系统提供与媒体回放系统相关联的元数据。
(特征9)根据特征8所述的方法,其中,建立元数据交换通道包括在媒体回放系统的至少一个媒体回放设备和媒体回放系统的媒体播放服务器之一与联网麦克风设备和联网麦克风服务器中的至少一个之间建立元数据交换通道。
(特征10)根据前述特征8至9中任一项所述的方法,其中,元数据交换触发事件包括以下之一:媒体回放系统回放新的媒体内容项;响应于联网麦克风系统接收到上下文特定回放命令,从联网麦克风系统接收元数据请求;响应于联网麦克风系统接收到上下文特定信息请求,从联网麦克风系统接收元数据请求;以及经过定义的时间段。
(特征11)根据前述特征8至10中任一项所述的方法,其中,向联网麦克风系统提供元数据包括以下中的至少一项:媒体回放系统经由元数据交换通道向联网麦克风系统发送元数据;媒体回放系统授权联网麦克风系统经由元数据交换通道访问元数据。
(特征12)根据前述特征8至11中任一项所述的方法,其中,所述元数据包括以下中的至少一种:媒体回放系统的一个或多个配置参数;关于当前通过媒体回放系统播放的音频内容的信息;关于媒体回放系统播放的音频内容的历史信息;与音频内容有关的用户偏好信息;以及与媒体回放系统配置有关的用户偏好信息。
(特征13)根据前述特征8至12中任一项所述的方法,其中,所述联网麦克风设备是移动计算设备。
(特征14)一种编码有指令的有形的非暂时性计算机可读介质,其中当一个或多个处理器执行时,所述指令使计算设备执行根据前述特征8至13中任一项所述的方法。
(特征15)一种媒体回放设备,包括:一个或多个处理器;根据特征14的有形的非暂时性计算机可读介质。
(特征16)一种用于联网麦克风设备的方法,所述联网麦克风设备被配置为接收针对媒体回放系统的语音命令,所述媒体回放系统包括被配置为响应于经由联网麦克风设备接收的语音命令而提供第一反馈的主媒体回放设备,所述方法包括:通过联网麦克风设备接收语音命令;确定主媒体回放设备不可用于响应于语音命令而提供第一反馈;作为响应,指示后备设备响应于语音命令而提供第二反馈。
(特征17)根据特征16所述的方法,其中,确定主媒体回放设备不可用于提供第一反馈包括确定主媒体回放设备是以下之一:被静音,处于不中断状态,处于省电模式,或者经由被配置为支持媒体回放系统和联网麦克风设备之间的通信的网络不可达。
(特征18)根据特征16所述的方法,其中,确定主媒体回放设备不可用于提供第一反馈包括从媒体回放系统接收到指示主媒体回放设备不可用的消息。
(特征19)根据前述特征16至18中任一项所述的方法,还包括从一个或多个后备设备集合中选择后备设备,其中,从一个或多个后备设备中选择后备设备包括以下之一:根据预定义的后备设备层次结构选择后备设备;被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备;从先前被配置为与主媒体回放设备同步地回放媒体内容的一个或多个媒体回放设备中选择后备设备;以及选择辅媒体回放设备作为后备设备,其中,主媒体回放设备被配置为回放媒体内容的第一声道,并且其中,辅媒体回放设备被配置为回放媒体内容的第二声道。
(特征20)根据特征16或19所述的方法,其中,所述后备设备是以下之一:被配置为控制媒体回放系统的计算设备;和联网麦克风设备。
(特征21)根据前述特征16至20中任一项所述的方法,其中,第一反馈和/或第二反馈是以下中的一种或多种:音频反馈,视觉反馈和触觉反馈。
(特征22)根据前述特征16至21任一项所述的方法,其中,第一反馈与第二反馈相同。
(特征23)根据前述特征16至22任一项所述的方法,还包括:当指示后备设备提供第二反馈时,另外指示后备设备使用以下中的一个或多个来指示主媒体回放设备不可用:音频指示,视觉指示和触觉指示。
(特征24)一种联网麦克风设备,包括被配置为执行根据前述特征16至23中任一项所述的方法的一个或多个处理器。
(特征25)一种用于与包括一个或多个回放设备的媒体回放系统相关联的计算设备的方法,所述方法包括:确定联网麦克风系统的主联网麦克风设备不可用于接收针对媒体回放系统的语音命令;作为响应,指定后备麦克风来接收针对媒体回放系统的语音命令。
(特征26)根据特征25所述的方法,其中,确定主联网麦克风设备不可用包括接收指示主麦克风设备不可用于接收语音命令的消息。
(特征27)根据特征25或26所述的方法,还包括:响应于确定主联网麦克风设备不可用,另外指示计算设备和一个或多个媒体回放设备中的一个或多个使用以下中的一个或多个来指示主联网麦克风设备不可用:音频指示,视觉指示和触觉指示。
(特征28)根据特征25至27中的任一项所述的方法,其中,后备麦克风包括以下中的一个或多个:媒体回放系统中的媒体回放设备上的麦克风;被配置为控制媒体回放系统的计算设备上的麦克风;以及辅联网麦克风设备上的麦克风。
(特征29)根据特征25至28中任一项所述的方法,其中,计算设备是以下中的一种:联网麦克风设备,媒体回放设备,被配置为控制媒体回放系统的计算设备,被配置为与媒体回放系统通信的服务器系统,以及被配置为与联网麦克风系统通信的服务器系统。
(特征30)一种计算设备,包括被配置为执行根据特征25至29中任一项所述的方法的一个或多个处理器。
(特征31)一种编码有指令的有形的非暂时性计算机可读介质,其中,当被一个或多个处理器执行时,所述指令使得联网麦克风设备执行根据特征16至23和25至29中任一项所述的方法。
(特征32)一种方法,包括:确定联网麦克风设备可用于分配给本地回放网络内的一个或多个回放区域,每个回放区域包括至少一个回放设备;显示指示要被分配网络麦克风设备的至少一个回放区域的提示;接收指示本地回放网络中要被分配网络麦克风设备的特定回放区域的输入;以及存储网络麦克风设备向特定回放区域的分配。
(特征33)根据特征32所述的方法,还包括:在界面上显示指示特定回放区域的两个或更多个回放设备中的特定回放设备的提示;接收指示特定回放区域中的特定回放设备的输入,其中,该分配还指示网络麦克风设备向特定回放区域中的所选择的特定回放设备的分配。
(特征34)根据前述特征32至33中任一项所述的方法,其中,所显示的提示包括按下特定回放区域中的回放设备上的按钮的提示。
(特征35)根据前述特征32至34中任一项所述的方法,还包括显示分别与媒体回放系统中的每个回放区域相对应的多个显示的表示,其中,显示的提示包括从多个显示的表示中选择与所述特定回放区域相对应的表示的提示。
(特征36)根据前述特征32至35中任一项所述的方法,其中确定联网麦克风设备可用于分配给一个或多个回放区域包括:通过第二网络与网络麦克风设备建立通信,其中本地回放网络是第一网络;从网络麦克风设备接收指示网络麦克风可用于分配给本地回放网络内的一个或多个回放设备的消息。
(特征37)根据前述特征32-36中任一项所述的方法,其中确定联网麦克风设备可用于分配给本地回放网络内的一个或多个回放区域包括:通过第二网络与网络麦克风设备建立通信,其中,本地回放网络是第一网络;通过第二网络向网络麦克风设备发送指示用于加入第一网络的参数的数据;以及在向网络麦克风设备发送指示用于加入第一网络的参数的数据之后,接收指示网络麦克风设备可用于分配给第一网络内的一个或多个回放区域的消息。
(特征38)根据特征36或37所述的方法,其中,通过第一网络从回放设备和网络麦克风设备之一接收消息。
(特征39)根据特征37或38所述的方法,其中,该消息指示网络麦克风设备连接到第一网络。
(特征40)根据特征36至39中任一项所述的方法,其中,第二网络是局域网(LAN)和个域网(PAN)之一,优选地根据蓝牙无线技术标准。
(特征41)根据前述特征32至40中任一项所述的方法,其中,存储所述分配包括向服务器发送消息,以使所述服务器存储所述分配。
(特征42)根据前述特征32至41中任一项所述的方法,其中,网络麦克风设备对应于唯一标识符,并且其中,存储分配包括存储指示唯一标识符向特定回放区域的分配的数据。
(特征43)根据前述特征32至42中任一项所述的方法,还包括:接收指示本地回放网络中的第二回放区域的输入;以及存储网络麦克风设备向第二回放区域的分配,使得网络麦克风设备被分配给第一特定回放区域和第二回放区域两者。
(特征44)根据前述特征32至43中任一项所述的方法,其中,网络麦克风设备是本地回放网络中的回放设备的组件。
(特征45)一种计算机可读存储介质,包括用于由处理器执行的指令,所述指令在被执行时使得处理器实现根据前述特征32至44中任一项所述的方法。
(特征46)一种计算设备,被配置为用于本地回放网络的控制器设备,该计算设备包括:处理器,被配置为执行前述特征32至44中任一项所述的方法;以及网络麦克风。
(特征47)一种方法,包括:维护包括指示网络麦克风设备的标识向包括多个回放区域的媒体回放系统的第一回放区域的分配的数据的数据库,每个回放区域包括至少一个回放设备;接收指示网络麦克风设备的标识和媒体回放命令的第一消息;基于数据库中的数据和接收到的第一消息来识别第一回放区域;以及向第一回放区域发送指示媒体回放命令的第二消息。
(特征48)根据特征47所述的方法,其中,向第一回放区域发送第二消息包括向第一回放区域包括的至少一个回放设备发送第二消息。
(特征49)根据权利要求48所述的方法,还包括:向第一回放区域包括的多个回放设备中的每个回放设备发送第二消息。
(特征50)根据特征48所述的方法,其中,发送第二消息包括:选择第一回放区域包括的多个回放设备中的一个回放设备;以及向所选回放设备发送第二消息。
(特征51)根据前述特征47至50中任一项所述的方法,其中,接收第一消息包括从网络麦克风设备接收指示媒体回放命令的消息。
(特征52)根据前述特征47至51中任一项所述的方法,其中,从远程服务器接收第一消息。
(特征53)根据前述特征47至52中任一项所述的方法,其中,识别第一回放区域包括:确定接收到的第一消息未指示第二回放区域;以及响应于确定接收到的消息未指示第二回放区域,基于网络麦克风设备的标识在数据库中识别第一回放区域。
(特征54)根据前述特征47至53中任一项所述的方法,其中,数据库中的数据还指示网络麦克风设备的标识向第二回放区域的分配。
(特征55)根据特征54所述的方法,其中,基于以下中的至少一项来识别第一回放区域:确定第一回放区域与媒体内容相关联;以及确定第二回放区域与媒体内容不相关。
(特征56)根据特征54所述的方法,其中:识别第一回放区域包括识别第一回放区域和第二回放区域;以及向与所识别的第一回放区域或第二回放区域相关联的至少一个回放设备发送第二消息。
(特征57)根据特征54所述的方法,其中:第一消息还指示接近度信息;并且还基于接近度信息来识别第一回放区域。
(特征58)根据前述特征47至57中任一项所述的方法,还包括:向网络麦克风设备发送第三消息,第三消息指示回放命令被发送以在回放区域中执行。
(特征59)根据特征58所述的方法,还包括:在发送第三消息之前,从回放区域中的至少一个回放设备接收第四消息,第四消息指示回放区域正在执行回放命令。
(特征60)根据特征58或59所述的方法,其中,经由第二服务器发送第三消息,其中,计算设备是第一服务器。
(特征61)根据特征58所述的方法,其中,发送第三消息包括使回放区域中的至少一个回放设备向网络麦克风设备发送第三消息。
(特征62)一种计算机可读存储介质,包括用于由处理器执行的指令,所述指令在被执行时使得处理器实现根据前述特征47至61中任一项所述的方法。
(特征63)一种计算设备,包括:处理器;存储有指令的存储器,所述指令可由计算设备执行以执行根据特征47至61中任一项所述的方法。
(特征64)一种用于计算设备的方法,所述方法包括:从与媒体回放系统相关联的麦克风设备接收包括语音命令的第一消息,其中,所述媒体回放系统包括一个或多个区域;从一个或多个区域中选择音频响应区域以播放对语音命令的音频响应,其中,所选择的区域包括一个或多个回放设备;以及使所选择的区域的一个或多个回放设备中的至少一个回放设备播放音频响应。
(特征65)根据特征64所述的方法,其中,选择音频响应区域包括基于上下文信息来选择音频响应区域,该上下文信息包括以下中的至少一项:位置信息:定向信息;用户的定向;存在信息;取决于用户位置的配对信息;取决于麦克风设备位置的配对信息。
(特征66)根据特征65所述的方法,其中,选择音频响应区域包括基于上下文信息动态地选择一个或多个区域中的第一区域作为音频响应区域。
(特征67)根据特征65或66所述的方法,其中,在接收到语音命令之后收集上下文信息。
(特征68)根据前述特征64至67中任一项所述的方法,还包括:基于能力信息,来确定是选择预定区域作为第一区域还是动态地选择一个或多个区域中的区域作为第一区域,其中,能力信息包括以下中的至少一项:可用传感器、可用设备、可用网络和可用处理能力。
(特征69)根据特征68所述的方法,还包括:确定媒体回放系统缺少一个或多个硬件设备;作为响应,基于麦克风设备的配对信息来确定选择预定区域作为音频响应区域。
(特征70)根据前述特征64至69中任一项所述的方法,还包括:确定音频响应区域被分组以与第二区域进行同步回放;并且其中,使至少一个回放设备播放音频响应包括仅使音频响应区域播放音频响应。
(特征71)根据特征65至70中任一项所述的方法,还包括基于上下文信息调整音频响应的回放的音量等级。
(特征72)根据前述特征64至71中任一项所述的方法,其中,选择音频响应设备包括选择被确定为最靠近用户的设备,其中,最靠近用户的回放设备由以下之一确定:通过比较在两个或更多个不同设备处接收的用户语音的量级来确定最靠近的扬声器;确定两个或更多个不同设备中的每个设备接收用户语音的时间之间的延迟或时间差。
(特征73)根据前述特征64至72中任一项所述的方法,其中,选择音频响应设备包括基于检测到的用户定向来选择设备,使得用户面向的设备被选择为音频响应设备。
(特征74)一种存储有指令的有形的非暂时性计算机可读介质,当由处理器执行时,所述指令使计算设备执行根据前述特征64至73中任一项所述的方法。
一种装置,包括处理器,所述处理器被配置为执行根据特征64至73中任一项所述的方法。
IX.结论
以上描述公开了各种示例系统、方法、装置和包括在硬件上执行的固件和/或软件等组件的制品。应当理解的是,这些示例仅是示意性的,而不应当被认为是限制性的。例如,可以想到,这些固件、硬件和/或软件方面或组件中的任意一个或全部可以专门在硬件中实现、专门在软件中实现、专门在固件中实现、或在硬件、软件和/或固件的任意组合中实现。因此,所提供的示例不是实现这些系统、方法、装置和/或制品的唯一方式。
本文公开的方法和其他过程可以包括一个或多个操作、功能或动作。尽管以连续顺序示出了框,但是这些框也可以并行执行,和/或以与本文描述的顺序不同的顺序执行。而且,可以将各种框组合成更少的框,划分成附加框,和/或基于期望的实现来移除。
另外,针对本文公开的方法和其他过程和方法,流程图示出了本实施例的一种可能实现的功能和操作。在这方面,每个框可以表示模块、段或程序代码的一部分,该程序代码包括可由处理器执行的一个或多个指令,用于实现过程中的特定逻辑功能或步骤。程序代码可以存储在任何类型的计算机可读介质上,例如包括磁盘或硬盘驱动器的存储设备。计算机可读介质可以包括非暂时性计算机可读介质,例如,诸如寄存器存储器、处理器高速缓存和随机存取存储器(RAM)之类的短时间存储数据的计算机可读介质。计算机可读介质还可以包括非暂时性介质,例如辅助或持久型长期存储装置,如只读存储器(ROM)、光盘或磁盘、光盘只读存储器(CD-ROM)。计算机可读介质还可以是任何其他易失性或非易失性存储系统。计算机可读介质可以被认为是计算机可读存储介质,例如有形存储设备。另外,附图中的每个框可以表示被连接以执行该过程中的特定逻辑功能的电路。
此外,本文对“实施例”的提及意味着结合实施例描述的特定特征、结构或特性可以包括在本发明的至少一个示例性实施例中。在说明书中各处出现该短语不一定都指代相同的实施例,也不是与其他实施例互斥的分离的或备选的实施例。因此,本领域技术人员应当显式地和隐式地理解的是,本文所描述的实施例可以与其他实施例组合。
主要在说明性的环境、系统、过程、步骤、逻辑块、处理以及直接或间接地与耦合到网络的数据处理设备的操作相类似的其他象征性表示的方面上,提出本说明书。本领域技术人员通常使用这些处理描述和表示,以向本领域技术人员的其他技术人员传播他们的工作内容。阐述了各种具体细节,以提供本公开的透彻理解。然而,本领域技术人员应理解,不需要特定、具体细节就可以实施本公开。在其他实例中,没有描述熟知的方法、过程、组件和电路,以避免不必要地使实施例的方面模糊不清。因此,本公开的范围由随附权利要求、而不是以上实施例的描述来界定。
当随附的任一项权利要求被理解成涵盖纯软件和/或固件的实现时,在此明确限定至少一个示例中的至少一个单元以包括存储软件和/或固件的有形非暂时性介质,如存储器、DVD、CD、蓝光等。

Claims (20)

1.一种计算设备,包括:
至少一个处理器;以及
包括程序指令的非暂时性计算机可读介质,所述程序指令在由所述至少一个处理器执行时使第一回放设备执行包括以下各项的功能:
经由媒体回放系统的网络麦克风设备接收由所述网络麦克风设备的至少一个麦克风检测到的语音命令,其中,所述媒体回放系统包括多个区域,并且其中,所述网络麦克风设备是默认回放区域的成员;
从所述多个区域中动态选择音频响应区域,以播放对语音输入的音频响应以及对所述默认播放区域的前述选择,其中,所选区域包括回放设备,并且其中,所述动态选择包括确定所述网络麦克风设备与所述回放设备配对;以及
使所选区域的所述回放设备播放所述音频响应。
2.根据权利要求1所述的计算设备,其中,所述功能包括:确定所述回放设备与所选区域中的另一回放设备被分组在一起,其中,使所选区域的所述回放设备播放所述音频响应包括:仅使所述音频响应区域播放所述音频响应。
3.根据权利要求1所述的计算设备,其中,所述动态选择还包括:基于上下文信息从所述多个区域中选择所述音频响应区域以播放所述音频响应。
4.根据权利要求3所述的计算设备,其中,所述上下文信息包括音量等级,所述回放设备被设置为以所述音量等级回放媒体内容。
5.根据权利要求3所述的计算设备,其中,所述上下文信息包括存在信息,所述存在信息指示在所述网络麦克风设备和所述回放设备中的至少一个的环境中存在一个或多个用户。
6.根据权利要求1所述的计算设备,其中,所述功能包括:(i)检测一个或多个用户的存在;以及(ii)响应于所述检测,将所述网络麦克风设备和所述回放设备配对。
7.根据权利要求1所述的计算设备,其中,所述回放设备是第一回放设备,所选区域包括第二回放设备,并且所述第二回放设备包括所述网络麦克风设备。
8.一种有形的非暂时性计算机可读介质,在所述有形的非暂时性计算机可读介质上存储有指令,所述指令在由处理器执行时使计算设备执行包括以下各项的功能:
经由媒体回放系统的网络麦克风设备接收由所述网络麦克风设备的至少一个麦克风检测到的语音命令,其中,所述媒体回放系统包括多个区域,并且其中,所述网络麦克风设备是默认回放区域的成员;
从所述多个区域中动态选择音频响应区域,以播放对语音输入的音频响应以及对所述默认播放区域的前述选择,其中,所选区域包括回放设备,并且其中,所述动态选择包括确定所述网络麦克风设备与所述回放设备配对;以及
使所选区域的所述回放设备播放所述音频响应。
9.根据权利要求8所述的计算机可读介质,其中,所述功能包括:确定所述回放设备与所选区域中的另一回放设备被分组在一起,其中,使所选区域的所述回放设备播放所述音频响应包括:仅使所述音频响应区域播放所述音频响应。
10.根据权利要求8所述的计算机可读介质,其中,所述动态选择还包括:基于上下文信息从所述多个区域中选择所述音频响应区域以播放所述音频响应。
11.根据权利要求10所述的计算机可读介质,其中,所述上下文信息包括音量等级,所述回放设备被设置为以所述音量等级回放媒体内容。
12.根据权利要求10所述的计算机可读介质,其中,所述上下文信息包括存在信息,所述存在信息指示在所述网络麦克风设备和所述回放设备中的至少一个的环境中存在一个或多个用户。
13.根据权利要求8所述的计算机可读介质,其中,所述功能包括:(i)检测一个或多个用户的存在;以及(ii)响应于所述检测,将所述网络麦克风设备和所述回放设备配对。
14.根据权利要求8所述的计算机可读介质,其中,所述回放设备是第一回放设备,所选区域包括第二回放设备,并且所述第二回放设备包括所述网络麦克风设备。
15.一种方法,包括:
经由媒体回放系统的网络麦克风设备接收由所述网络麦克风设备的至少一个麦克风检测到的语音命令,其中,所述媒体回放系统包括多个区域,并且其中,所述网络麦克风设备是默认回放区域的成员;
从所述多个区域中动态选择音频响应区域,以播放对语音输入的音频响应以及对所述默认播放区域的前述选择,其中,所选区域包括回放设备,并且其中,所述动态选择包括确定所述网络麦克风设备与所述回放设备配对;以及
使所选区域的所述回放设备播放所述音频响应。
16.根据权利要求15所述的方法,还包括确定所述回放设备与所选区域中的另一回放设备被分组在一起,其中,使所选区域的所述回放设备播放所述音频响应包括:仅使所述音频响应区域播放所述音频响应。
17.根据权利要求15所述的方法,其中,所述动态选择还包括:基于上下文信息从所述多个区域中选择所述音频响应区域以播放所述音频响应。
18.根据权利要求17所述的方法,其中,所述上下文信息包括音量等级,所述回放设备被设置为以所述音量等级回放媒体内容。
19.根据权利要求17所述的方法,其中,所述上下文信息包括存在信息,所述存在信息指示在所述网络麦克风设备和所述回放设备中的至少一个的环境中存在一个或多个用户。
20.根据权利要求15所述的方法,还包括:(i)检测一个或多个用户的存在;以及(ii)响应于所述检测,将所述网络麦克风设备和所述回放设备配对。
CN202010179593.8A 2016-02-22 2017-02-21 音频响应回放 Pending CN111510821A (zh)

Applications Claiming Priority (31)

Application Number Priority Date Filing Date Title
US201662298350P 2016-02-22 2016-02-22
US201662298410P 2016-02-22 2016-02-22
US201662298439P 2016-02-22 2016-02-22
US201662298388P 2016-02-22 2016-02-22
US201662298393P 2016-02-22 2016-02-22
US201662298418P 2016-02-22 2016-02-22
US201662298425P 2016-02-22 2016-02-22
US201662298433P 2016-02-22 2016-02-22
US62/298,425 2016-02-22
US62/298,350 2016-02-22
US62/298,439 2016-02-22
US62/298,388 2016-02-22
US62/298,433 2016-02-22
US62/298,418 2016-02-22
US62/298,410 2016-02-22
US62/298,393 2016-02-22
US201662312350P 2016-03-23 2016-03-23
US62/312,350 2016-03-23
US15/098,892 2016-04-14
US15/098,760 2016-04-14
US15/098,867 2016-04-14
US15/098,760 US10743101B2 (en) 2016-02-22 2016-04-14 Content mixing
US15/098,867 US9826306B2 (en) 2016-02-22 2016-04-14 Default playback device designation
US15/098,892 US9820039B2 (en) 2016-02-22 2016-04-14 Default playback devices
US15/131,254 2016-04-18
US15/131,244 2016-04-18
US15/131,244 US9811314B2 (en) 2016-02-22 2016-04-18 Metadata exchange involving a networked playback system and a networked microphone system
US15/131,254 US10509626B2 (en) 2016-02-22 2016-04-18 Handling of loss of pairing between networked devices
US15/237,133 US10095470B2 (en) 2016-02-22 2016-08-15 Audio response playback
US15/237,133 2016-08-15
CN201780025029.7A CN109076285B (zh) 2016-02-22 2017-02-21 音频响应回放

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201780025029.7A Division CN109076285B (zh) 2016-02-22 2017-02-21 音频响应回放

Publications (1)

Publication Number Publication Date
CN111510821A true CN111510821A (zh) 2020-08-07

Family

ID=59629393

Family Applications (4)

Application Number Title Priority Date Filing Date
CN202010302650.7A Active CN111479196B (zh) 2016-02-22 2017-02-21 媒体回放系统的语音控制方法
CN201780025028.2A Active CN109076284B (zh) 2016-02-22 2017-02-21 媒体回放系统的语音控制
CN202010179593.8A Pending CN111510821A (zh) 2016-02-22 2017-02-21 音频响应回放
CN201780025029.7A Active CN109076285B (zh) 2016-02-22 2017-02-21 音频响应回放

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN202010302650.7A Active CN111479196B (zh) 2016-02-22 2017-02-21 媒体回放系统的语音控制方法
CN201780025028.2A Active CN109076284B (zh) 2016-02-22 2017-02-21 媒体回放系统的语音控制

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201780025029.7A Active CN109076285B (zh) 2016-02-22 2017-02-21 音频响应回放

Country Status (8)

Country Link
US (17) US9820039B2 (zh)
EP (4) EP4258690A3 (zh)
JP (7) JP6511589B2 (zh)
KR (10) KR102584751B1 (zh)
CN (4) CN111479196B (zh)
AU (11) AU2017222436B2 (zh)
CA (2) CA3015496C (zh)
WO (2) WO2017147075A1 (zh)

Families Citing this family (385)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11204729B2 (en) 2000-11-01 2021-12-21 Flexiworld Technologies, Inc. Internet based digital content services for pervasively providing protected digital content to smart devices based on having subscribed to the digital content service
US11467856B2 (en) 2002-12-12 2022-10-11 Flexiworld Technologies, Inc. Portable USB device for internet access service
US10915296B2 (en) 2000-11-01 2021-02-09 Flexiworld Technologies, Inc. Information apparatus that includes a touch sensitive screen interface for managing or replying to e-mails
US9836257B2 (en) * 2001-01-19 2017-12-05 Flexiworld Technologies, Inc. Mobile information apparatus that includes intelligent wireless display, wireless direct display, or transfer of digital content for playing over air the digital content at smart televisions, television controllers, or audio output devices
US20020062398A1 (en) 2000-11-20 2002-05-23 William Ho Chang Controller for mobile and pervasive output
WO2004055638A2 (en) 2002-12-12 2004-07-01 Flexiworld Technologies, Inc. Wireless communication between computing devices
WO2004093149A2 (en) 2003-04-11 2004-10-28 Flexiworld Technologies, Inc. Autorun for integrated circuit memory component
US10972536B2 (en) 2004-06-04 2021-04-06 Apple Inc. System and method for synchronizing media presentation at multiple recipients
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8984431B2 (en) 2009-03-16 2015-03-17 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9674587B2 (en) 2012-06-26 2017-06-06 Sonos, Inc. Systems and methods for networked music playback including remote add to queue
KR102516577B1 (ko) 2013-02-07 2023-04-03 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US9247363B2 (en) 2013-04-16 2016-01-26 Sonos, Inc. Playback queue transfer in a media playback system
US9361371B2 (en) 2013-04-16 2016-06-07 Sonos, Inc. Playlist update in a media playback system
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
KR101922663B1 (ko) 2013-06-09 2018-11-28 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
WO2015020942A1 (en) 2013-08-06 2015-02-12 Apple Inc. Auto-activating smart responses based on activities from remote devices
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US11256294B2 (en) 2014-05-30 2022-02-22 Apple Inc. Continuity of applications across devices
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
US9521497B2 (en) 2014-08-21 2016-12-13 Google Technology Holdings LLC Systems and methods for equalizing audio for playback on an electronic device
CN113824998A (zh) 2014-09-02 2021-12-21 苹果公司 音乐用户界面
US10552009B2 (en) 2014-09-02 2020-02-04 Apple Inc. Stopwatch and timer user interfaces
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US9329831B1 (en) 2015-02-25 2016-05-03 Sonos, Inc. Playback expansion
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10001965B1 (en) 2015-09-03 2018-06-19 Sonos, Inc. Playback system join with base
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10142754B2 (en) 2016-02-22 2018-11-27 Sonos, Inc. Sensor on moving component of transducer
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US10509626B2 (en) 2016-02-22 2019-12-17 Sonos, Inc Handling of loss of pairing between networked devices
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US9820039B2 (en) 2016-02-22 2017-11-14 Sonos, Inc. Default playback devices
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US20190057703A1 (en) * 2016-02-29 2019-02-21 Faraday&Future Inc. Voice assistance system for devices of an ecosystem
WO2017171756A1 (en) * 2016-03-30 2017-10-05 Hewlett-Packard Development Company, L.P. Indicator to indicate a state of a personal assistant application
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US20220043986A1 (en) * 2016-06-09 2022-02-10 Apple Inc. Intelligent automated assistant in a home environment
US9978390B2 (en) 2016-06-09 2018-05-22 Sonos, Inc. Dynamic player selection for audio signal processing
DK179588B1 (en) * 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) * 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10091545B1 (en) * 2016-06-27 2018-10-02 Amazon Technologies, Inc. Methods and systems for detecting audio output of associated device
EP3264802A1 (en) * 2016-06-30 2018-01-03 Nokia Technologies Oy Spatial audio processing for moving sound sources
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US11188289B2 (en) * 2016-07-29 2021-11-30 Hewlett-Packard Development Company, L.P. Identification of preferred communication devices according to a preference rule dependent on a trigger phrase spoken within a selected time from other command data
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10492156B2 (en) * 2016-08-31 2019-11-26 Inizio Capital Llc Dynamic direct multinode (DDM) wireless network
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10043516B2 (en) * 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
CN106656689B (zh) * 2016-10-17 2018-10-30 珠海格力电器股份有限公司 一种基于终端的智能家居的控制方法和终端
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US10127908B1 (en) * 2016-11-11 2018-11-13 Amazon Technologies, Inc. Connected accessory for a voice-controlled device
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11430434B1 (en) * 2017-02-15 2022-08-30 Amazon Technologies, Inc. Intelligent privacy protection mediation
WO2018163378A1 (ja) * 2017-03-09 2018-09-13 ヤマハ株式会社 操作装置、コマンド処理装置、及びコンテンツ再生システム
CN110383797B (zh) * 2017-03-13 2022-06-21 索尼公司 终端装置和通信方法
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
CN107015781B (zh) * 2017-03-28 2021-02-19 联想(北京)有限公司 语音识别方法和系统
US10147439B1 (en) * 2017-03-30 2018-12-04 Amazon Technologies, Inc. Volume adjustment for listening environment
TWI689865B (zh) * 2017-04-28 2020-04-01 塞席爾商元鼎音訊股份有限公司 智慧語音系統、語音輸出調整之方法及電腦可讀取記憶媒體
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
DK179560B1 (en) * 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
AU2018203023B2 (en) * 2017-05-16 2019-09-19 Apple Inc. Transferring playback queues between devices
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
EP3975576A1 (en) 2017-05-16 2022-03-30 Apple Inc. Credential delegation
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10564928B2 (en) 2017-06-02 2020-02-18 Rovi Guides, Inc. Systems and methods for generating a volume- based response for multiple voice-operated user devices
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10847163B2 (en) * 2017-06-20 2020-11-24 Lenovo (Singapore) Pte. Ltd. Provide output reponsive to proximate user input
US10038419B1 (en) 2017-07-06 2018-07-31 Bose Corporation Last mile equalization
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US20190061336A1 (en) * 2017-08-29 2019-02-28 Xyzprinting, Inc. Three-dimensional printing method and three-dimensional printing apparatus using the same
US10438594B2 (en) * 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10902847B2 (en) 2017-09-12 2021-01-26 Spotify Ab System and method for assessing and correcting potential underserved content in natural language understanding applications
US10475454B2 (en) * 2017-09-18 2019-11-12 Motorola Mobility Llc Directional display and audio broadcast
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10446165B2 (en) 2017-09-27 2019-10-15 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US10985982B2 (en) * 2017-09-27 2021-04-20 Sonos, Inc. Proximal playback devices
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10545720B2 (en) * 2017-09-29 2020-01-28 Spotify Ab Automatically generated media preview
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10748533B2 (en) 2017-11-08 2020-08-18 Harman International Industries, Incorporated Proximity aware voice agent
US10458840B2 (en) * 2017-11-08 2019-10-29 Harman International Industries, Incorporated Location classification for intelligent personal assistant
CN107895016B (zh) * 2017-11-14 2022-02-15 百度在线网络技术(北京)有限公司 一种播放多媒体的方法和装置
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
KR102527278B1 (ko) * 2017-12-04 2023-04-28 삼성전자주식회사 전자 장치, 그 제어 방법 및 컴퓨터 판독가능 기록 매체
US10797670B2 (en) 2017-12-04 2020-10-06 Lutron Technology Company, LLC Audio device with dynamically responsive volume
EP3958112A1 (en) * 2017-12-06 2022-02-23 Google LLC Ducking and erasing audio from nearby devices
EP3519910B1 (en) * 2017-12-08 2024-02-14 Google LLC Content source allocation between computing devices
US11182122B2 (en) * 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US10880650B2 (en) 2017-12-10 2020-12-29 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
US10425247B2 (en) 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
EP3622723A1 (en) * 2017-12-12 2020-03-18 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
WO2019122343A1 (en) * 2017-12-22 2019-06-27 British Telecommunications Public Limited Company Managing streamed audio communication sessions
CN107845388B (zh) * 2017-12-25 2021-06-01 青岛海信移动通信技术股份有限公司 语音识别方法及装置
CA3083453A1 (en) 2017-12-27 2019-07-04 Rovi Guides, Inc. Systems and methods for identifying users based on voice data and media consumption data
CN108124510B (zh) * 2017-12-29 2020-06-30 深圳市名宗科技有限公司 一种无线配对系统及配对方法
CN111357048A (zh) * 2017-12-31 2020-06-30 美的集团股份有限公司 用于控制家庭助手装置的方法和系统
US10887387B2 (en) * 2018-01-05 2021-01-05 Barrett Adams Digital media synchronization system and method
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
EP3776880A4 (en) * 2018-01-08 2022-06-22 Polk Audio, LLC SYNCHRONIZED VOICE CONTROL MODULE, SPEAKER SYSTEM AND METHOD OF INCORPORATING VC FUNCTIONALITY INTO A SEPARATE SPEAKER SYSTEM
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
WO2019152722A1 (en) * 2018-01-31 2019-08-08 Sonos, Inc. Device designation of playback and network microphone device arrangements
US20190235831A1 (en) * 2018-01-31 2019-08-01 Amazon Technologies, Inc. User input processing restriction in a speech processing system
US10157042B1 (en) 2018-02-06 2018-12-18 Amazon Technologies, Inc. Audio output control
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
CN117877477A (zh) 2018-03-07 2024-04-12 谷歌有限责任公司 用于基于语音发起定制装置动作的系统和方法
US11183182B2 (en) * 2018-03-07 2021-11-23 Google Llc Systems and methods for voice-based initiation of custom device actions
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10993274B2 (en) 2018-03-30 2021-04-27 Apple Inc. Pairing devices by proxy
CN108600911B (zh) 2018-03-30 2021-05-18 联想(北京)有限公司 一种输出方法及电子设备
US11297369B2 (en) 2018-03-30 2022-04-05 Apple Inc. Remotely controlling playback devices
CN108566634B (zh) * 2018-03-30 2021-06-25 深圳市冠旭电子股份有限公司 降低蓝牙音箱连续唤醒延时的方法、装置及蓝牙音箱
US10803864B2 (en) * 2018-05-07 2020-10-13 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11308947B2 (en) 2018-05-07 2022-04-19 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10847178B2 (en) 2018-05-18 2020-11-24 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
CN112166408B (zh) * 2018-05-25 2024-06-11 三星电子株式会社 用于提供智能响应的方法和设备
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US10944859B2 (en) 2018-06-03 2021-03-09 Apple Inc. Accelerated task performance
JP2021144065A (ja) * 2018-06-12 2021-09-24 ソニーグループ株式会社 情報処理装置および情報処理方法
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
KR102580521B1 (ko) * 2018-07-13 2023-09-21 삼성전자주식회사 전자 장치 및 전자 장치의 음량 조절 방법
US11651043B2 (en) * 2018-07-24 2023-05-16 MachEye, Inc. Leveraging analytics across disparate computing devices
US11341126B2 (en) 2018-07-24 2022-05-24 MachEye, Inc. Modifying a scope of a canonical query
US11841854B2 (en) 2018-07-24 2023-12-12 MachEye, Inc. Differentiation of search results for accurate query output
US11282020B2 (en) * 2018-07-24 2022-03-22 MachEye, Inc. Dynamic playback of synchronized narrated analytics playlists
US11816436B2 (en) 2018-07-24 2023-11-14 MachEye, Inc. Automated summarization of extracted insight data
US11853107B2 (en) 2018-07-24 2023-12-26 MachEye, Inc. Dynamic phase generation and resource load reduction for a query
KR102523982B1 (ko) 2018-08-21 2023-04-20 구글 엘엘씨 자동화된 어시스턴트를 호출하기 위한 다이내믹 및/또는 컨텍스트-특정 핫 워드
US20200168317A1 (en) 2018-08-22 2020-05-28 Centre For Addiction And Mental Health Tool for assisting individuals experiencing auditory hallucinations to differentiate between hallucinations and ambient sounds
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US11206484B2 (en) * 2018-08-28 2021-12-21 Sonos, Inc. Passive speaker authentication
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
CN109147800A (zh) 2018-08-30 2019-01-04 百度在线网络技术(北京)有限公司 应答方法和装置
KR102575697B1 (ko) * 2018-09-06 2023-09-06 주식회사 케이티 음향을 제어하는 공용 단말, 방법 및 컴퓨터 프로그램
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US10587430B1 (en) 2018-09-14 2020-03-10 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
CN109117052A (zh) * 2018-09-21 2019-01-01 深圳市二八智能家居有限公司 多区域音乐播放的控制方法及装置
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11152003B2 (en) * 2018-09-27 2021-10-19 International Business Machines Corporation Routing voice commands to virtual assistants
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11423920B2 (en) * 2018-09-28 2022-08-23 Rovi Guides, Inc. Methods and systems for suppressing vocal tracks
US10871815B2 (en) 2018-09-28 2020-12-22 Sonos, Inc. Network identification of portable electronic devices while changing power states
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10692518B2 (en) 2018-09-29 2020-06-23 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
GB2577879B (en) * 2018-10-08 2022-08-24 B & W Group Ltd Content playback system
US11416209B2 (en) * 2018-10-15 2022-08-16 Sonos, Inc. Distributed synchronization
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10833886B2 (en) * 2018-11-07 2020-11-10 International Business Machines Corporation Optimal device selection for streaming content
DE102018128162A1 (de) * 2018-11-12 2020-05-14 Sennheiser Electronic Gmbh & Co. Kg Verfahren zum Empfangen von Audiodatenströmen mit Mobilgeräten und entsprechend konfiguriertes Mobilgerät
EP3654249A1 (en) 2018-11-15 2020-05-20 Snips Dilated convolutions and gating for efficient keyword spotting
US10958698B2 (en) * 2018-11-16 2021-03-23 Spotify Ab Responding to ambiguous play requests
WO2020118026A1 (en) * 2018-12-06 2020-06-11 D&M Holdings Inc. Virtual media service
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11393478B2 (en) 2018-12-12 2022-07-19 Sonos, Inc. User specific context switching
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11079916B2 (en) * 2019-01-14 2021-08-03 Microsoft Technology Licensing, Llc Multiple source media management
CA3126937A1 (en) 2019-01-18 2020-07-23 Sonos, Inc. Power management techniques for waking-up processors in media playback systems
US11740854B2 (en) * 2019-01-20 2023-08-29 Sonos, Inc. Playing media content in response to detecting items having corresponding media content associated therewith
KR20200092763A (ko) * 2019-01-25 2020-08-04 삼성전자주식회사 사용자 음성을 처리하는 전자장치 및 그 제어 방법
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10694309B1 (en) 2019-02-12 2020-06-23 Sonos, Inc. Systems and methods for authenticating and calibrating passive speakers with a graphical user interface
USD994694S1 (en) 2019-02-13 2023-08-08 Sonos, Inc. Display screen or portion thereof with graphical user interface for podcasts
US11086589B2 (en) 2019-02-13 2021-08-10 Sonos, Inc. Systems and methods for podcast playback
WO2020174289A2 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
WO2020176893A1 (en) 2019-02-28 2020-09-03 Sonos, Inc. Playback transitions between audio devices
EP3709194A1 (en) 2019-03-15 2020-09-16 Spotify AB Ensemble-based data comparison
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CN110069657A (zh) * 2019-04-30 2019-07-30 百度在线网络技术(北京)有限公司 一种交互式音乐点播方法、装置及终端
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11544463B2 (en) * 2019-05-09 2023-01-03 Intel Corporation Time asynchronous spoken intent detection
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11170774B2 (en) * 2019-05-21 2021-11-09 Qualcomm Incorproated Virtual assistant device
GB2597009B (en) * 2019-05-22 2023-01-25 Solos Tech Limited Microphone configurations for eyewear devices, systems, apparatuses, and methods
JP7335979B2 (ja) * 2019-05-24 2023-08-30 エルジー エレクトロニクス インコーポレイティド 音声認識を用いて装置を制御する方法、及びこれを具現する装置
CN112017650B (zh) * 2019-05-31 2024-05-24 百度在线网络技术(北京)有限公司 电子设备的语音控制方法、装置、计算机设备和存储介质
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
US11363382B2 (en) * 2019-05-31 2022-06-14 Apple Inc. Methods and user interfaces for audio synchronization
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US10904029B2 (en) * 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US10802843B1 (en) * 2019-05-31 2020-10-13 Apple Inc. Multi-user configuration
JP7075547B2 (ja) 2019-05-31 2022-05-25 アップル インコーポレイテッド オーディオメディア制御のためのユーザインタフェース
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11943594B2 (en) 2019-06-07 2024-03-26 Sonos Inc. Automatically allocating audio portions to playback devices
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
WO2021010884A1 (en) * 2019-07-18 2021-01-21 Dirac Research Ab Intelligent audio control platform
EP3987725A1 (en) * 2019-07-29 2022-04-27 Siemens Industry, Inc. Building automation system for controlling conditions of a room
CN114514756A (zh) * 2019-07-30 2022-05-17 杜比实验室特许公司 音频设备的协调
US11968268B2 (en) 2019-07-30 2024-04-23 Dolby Laboratories Licensing Corporation Coordination of audio devices
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
KR20210015234A (ko) * 2019-08-01 2021-02-10 삼성전자주식회사 전자 장치, 및 그의 음성 명령에 따른 기능이 실행되도록 제어하는 방법
EP4010781A1 (en) 2019-08-09 2022-06-15 Rajasekaran Ramasubramanian Power management and distributed audio processing techniques for playback devices
US11094319B2 (en) 2019-08-30 2021-08-17 Spotify Ab Systems and methods for generating a cleaned version of ambient sound
US11464055B2 (en) 2019-09-04 2022-10-04 Sonos, Inc. Systems and methods for configuring a media player device on a local network using a graphical user interface
KR20210031265A (ko) 2019-09-11 2021-03-19 삼성전자주식회사 전자 장치 및 그 동작방법
US11483085B1 (en) * 2019-09-16 2022-10-25 Amazon Technologies, Inc. Device time synchronization by networking device
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11551670B1 (en) 2019-09-26 2023-01-10 Sonos, Inc. Systems and methods for generating labeled data to facilitate configuration of network microphone devices
US11172328B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for device localization
US11749265B2 (en) * 2019-10-04 2023-09-05 Disney Enterprises, Inc. Techniques for incremental computer-based natural language understanding
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
KR102135859B1 (ko) * 2019-10-24 2020-07-20 주식회사 유니온플레이스 개인화된 가상 비서를 제공하는 장치
US10891105B1 (en) 2019-11-11 2021-01-12 Sonos, Inc. Systems and methods for displaying a transitional graphical user interface while loading media information for a networked media playback system
USD923656S1 (en) 2019-11-11 2021-06-29 Sonos, Inc. Display screen or portion thereof with graphical user interface
WO2021096957A1 (en) * 2019-11-11 2021-05-20 Apple Inc. User interfaces for time period-based curated playlists
US11636855B2 (en) 2019-11-11 2023-04-25 Sonos, Inc. Media content based on operational data
US11204737B2 (en) 2019-11-11 2021-12-21 Sonos, Inc. Playback queues for shared experiences
WO2021112646A1 (ko) * 2019-12-06 2021-06-10 엘지전자 주식회사 무선 통신 시스템에서 근거리 무선 통신을 이용한 오디오 데이터 전송 방법 및 이에 대한 장치
US11089379B2 (en) * 2019-12-11 2021-08-10 Apple Inc. Preload hinting for low latency HTTP live streaming system
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
CN110764484A (zh) * 2019-12-24 2020-02-07 南京创维信息技术研究院有限公司 家庭设备控制系统
US11129011B2 (en) * 2019-12-26 2021-09-21 Process Integration System Inc. System and method to detect and report to the authorities high level sounds that infringe the law
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11308959B2 (en) 2020-02-11 2022-04-19 Spotify Ab Dynamic adjustment of wake word acceptance tolerance thresholds in voice-controlled devices
US11533116B2 (en) 2020-03-19 2022-12-20 Sonos, Inc. Systems and methods for state detection via wireless radios
CN111540350B (zh) * 2020-03-31 2024-03-01 北京小米移动软件有限公司 一种智能语音控制设备的控制方法、装置及存储介质
WO2021216582A1 (en) 2020-04-21 2021-10-28 Sonos, Inc. Priority media content
US11729464B2 (en) 2020-04-24 2023-08-15 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
US11397967B2 (en) 2020-04-24 2022-07-26 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
US11540011B2 (en) 2020-04-24 2022-12-27 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
USD956593S1 (en) * 2020-04-28 2022-07-05 Vulcan, Inc. Test station terminal
US11183193B1 (en) 2020-05-11 2021-11-23 Apple Inc. Digital assistant hardware abstraction
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11079913B1 (en) 2020-05-11 2021-08-03 Apple Inc. User interface for status indicators
US11810578B2 (en) 2020-05-11 2023-11-07 Apple Inc. Device arbitration for digital assistant-based intercom systems
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
CN113765754A (zh) * 2020-06-02 2021-12-07 云米互联科技(广东)有限公司 音频同步播放方法、设备及计算机可读存储介质
USD954019S1 (en) 2020-06-05 2022-06-07 Sonos, Inc. Headphone
US20210399578A1 (en) 2020-06-17 2021-12-23 Sonos, Inc. Wireless charger for playback devices
CN111726681B (zh) * 2020-06-19 2021-11-02 海信视像科技股份有限公司 一种音频输出设备的选择方法及显示设备
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
EP4205454A1 (en) 2020-08-25 2023-07-05 Sonos, Inc. Smart networking techniques for portable playback devices
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
KR102218201B1 (ko) * 2020-09-01 2021-02-23 주식회사 비젼코스모 지능형 음향 시스템 장치 및 그 동작 방법
US11758326B2 (en) 2020-09-09 2023-09-12 Sonos, Inc. Wearable audio device within a distributed audio playback system
CA3193393A1 (en) 2020-09-25 2022-03-31 Jennifer Mcdevitt Intelligent setup for playback devices
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220101870A1 (en) * 2020-09-29 2022-03-31 Zinfanite Technologies, Inc. Noise filtering and voice isolation device and method
WO2022072154A1 (en) * 2020-10-01 2022-04-07 Arris Enterprises Llc Controlling a media device to provide an improved sonic environment for the reception of a voice command
USD991214S1 (en) 2020-10-08 2023-07-04 Sonos, Inc. Headphone ear cushion attachment mechanism
CN216531736U (zh) 2020-10-08 2022-05-13 搜诺思公司 音频回放耳机系统
US11694684B1 (en) * 2020-11-10 2023-07-04 Amazon Technologies, Inc. Generation of computing functionality using devices
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
US11984124B2 (en) * 2020-11-13 2024-05-14 Apple Inc. Speculative task flow execution
CN112383757B (zh) * 2020-11-16 2022-07-05 四川九洲空管科技有限责任公司 一种无人机综合监视数据多模式回放方法及系统
US11562748B2 (en) * 2020-12-01 2023-01-24 Google Llc Detecting and suppressing commands in media that may trigger another automated assistant
US20240114309A1 (en) * 2020-12-03 2024-04-04 Dolby Laboratories Licensing Corporation Progressive calculation and application of rendering configurations for dynamic applications
EP4231286A4 (en) * 2020-12-11 2024-03-27 Samsung Electronics Co Ltd ELECTRONIC DEVICE AND ASSOCIATED CONTROL METHOD
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
CA3211475A1 (en) 2021-03-08 2022-09-15 William SHOESMITH Updating network configuration parameters
EP4305517A1 (en) 2021-03-08 2024-01-17 Sonos Inc. Off-lan experience for portables
WO2022240854A1 (en) 2021-05-10 2022-11-17 Sonos, Inc. Audio encryption in a media playback system
WO2022240874A1 (en) 2021-05-10 2022-11-17 Sonos, Inc. Managing content quality and related characteristics of a media playback system
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11789691B2 (en) 2021-06-16 2023-10-17 Kyndryl, Inc. Audio management for a priority computing device application
US11599330B2 (en) * 2021-06-29 2023-03-07 Blackberry Limited Audio management for guests
WO2023039294A2 (en) 2021-09-13 2023-03-16 Sonos, Inc. Techniques for flexible control of playback devices
US11575758B1 (en) 2021-09-13 2023-02-07 Amazon Technologies, Inc. Session-based device grouping
US20230099144A1 (en) 2021-09-30 2023-03-30 Sonos, Inc. Enabling and Disabling Microphones and Voice Assistants
US20230104774A1 (en) 2021-09-30 2023-04-06 Sonos, Inc. Media Content Search In Connection With Multiple Media Content Services
WO2023056299A1 (en) * 2021-09-30 2023-04-06 Sonos, Inc. Spatial mapping of media playback system components
WO2024073428A1 (en) 2022-09-26 2024-04-04 Sonos, Inc. Systems and methods for disturbance localization
WO2024073415A1 (en) 2022-09-27 2024-04-04 Sonos, Inc. Configurable multi-band home theater architecture
WO2024073647A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Voice disambiguation techniques in media playback systems
WO2024073674A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Adjustable mounting assembly
WO2024073649A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Network handoff for portable playback devices
WO2024073354A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Localization techniques for playback devices
WO2024073297A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Generative audio playback via wearable playback devices
WO2024073651A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Method of configuring a portable playback device, corresponding playback device and playback system
US20240111483A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Dynamic Volume Control
US11838582B1 (en) * 2022-12-12 2023-12-05 Google Llc Media arbitration

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004354721A (ja) * 2003-05-29 2004-12-16 Shimizu Corp 音声制御装置、音声制御方法および音声制御プログラム
CN104155938A (zh) * 2014-07-21 2014-11-19 惠州Tcl移动通信有限公司 一种家居设备管理方法及系统
US20140363022A1 (en) * 2013-06-05 2014-12-11 Sonos, Inc. Satellite volume control
US20150086034A1 (en) * 2013-09-25 2015-03-26 Motorola Mobility Llc Audio Routing System for Routing Audio Data to and from a Mobile Device
CN104581510A (zh) * 2015-01-22 2015-04-29 广东欧珀移动通信有限公司 音箱音量设置方法及装置
CN105101083A (zh) * 2015-07-15 2015-11-25 魅族科技(中国)有限公司 室内电子设备的控制方法及装置
US20160014536A1 (en) * 2014-09-09 2016-01-14 Sonos, Inc. Playback Device Calibration

Family Cites Families (1226)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US999715A (en) 1911-05-31 1911-08-01 Hans Gundersen Flying-machine.
US3014423A (en) 1959-11-27 1961-12-26 Jersey Prod Res Co Apparatus for drilling boreholes with explosive charges
JPS57116999U (zh) * 1981-01-14 1982-07-20
JPS5988705U (ja) * 1982-12-06 1984-06-15 株式会社明電舎 警報回路
US4941187A (en) 1984-02-03 1990-07-10 Slater Robert W Intercom apparatus for integrating disparate audio sources for use in light aircraft or similar high noise environments
US4741038A (en) 1986-09-26 1988-04-26 American Telephone And Telegraph Company, At&T Bell Laboratories Sound location arrangement
JPS63301998A (ja) 1987-06-02 1988-12-08 日本電気株式会社 音声認識応答装置
US4974213A (en) 1988-12-16 1990-11-27 Siwecki Thomas L Passive active underwater sound detection apparatus
US5036538A (en) 1989-11-22 1991-07-30 Telephonics Corporation Multi-station voice recognition and processing system
US5440644A (en) 1991-01-09 1995-08-08 Square D Company Audio distribution system having programmable zoning features
DE69220342T2 (de) 1991-12-20 1997-11-20 Matsushita Electric Ind Co Ltd Lautsprecherapparat zur Basswiedergabe
US6311157B1 (en) 1992-12-31 2001-10-30 Apple Computer, Inc. Assigning meanings to utterances in a speech recognition system
JPH0883091A (ja) 1994-09-09 1996-03-26 Matsushita Electric Ind Co Ltd 音声認識装置
US5740260A (en) 1995-05-22 1998-04-14 Presonus L.L.P. Midi to analog sound processor interface
US6070140A (en) 1995-06-05 2000-05-30 Tran; Bao Q. Speech recognizer
US5857172A (en) 1995-07-31 1999-01-05 Microsoft Corporation Activation control of a speech recognizer through use of a pointing device
US7174299B2 (en) 1995-08-18 2007-02-06 Canon Kabushiki Kaisha Speech recognition system, speech recognition apparatus, and speech recognition method
FR2739736B1 (fr) 1995-10-05 1997-12-05 Jean Laroche Procede de reduction des pre-echos ou post-echos affectant des enregistrements audio
JP3094900B2 (ja) 1996-02-20 2000-10-03 ヤマハ株式会社 ネットワーク機器およびデータ送受信方法
US6404811B1 (en) 1996-05-13 2002-06-11 Tektronix, Inc. Interactive multimedia system
JP3679526B2 (ja) 1996-10-31 2005-08-03 キヤノン株式会社 画像共有装置、画面制御方法及びコンピュータ可読メモリ
US6469633B1 (en) 1997-01-06 2002-10-22 Openglobe Inc. Remote control of electronic devices
US6078886A (en) 1997-04-14 2000-06-20 At&T Corporation System and method for providing remote automatic speech recognition services via a packet network
US6611537B1 (en) 1997-05-30 2003-08-26 Centillium Communications, Inc. Synchronous network for digital media streams
US6088459A (en) 1997-10-30 2000-07-11 Hobelsberger; Maximilian Hans Loudspeaker system with simulated baffle for improved base reproduction
US6408078B1 (en) 1997-10-30 2002-06-18 Maximilian Hobelsberger Active reactive acoustical elements
US6032202A (en) 1998-01-06 2000-02-29 Sony Corporation Of Japan Home audio/video network with two level device control
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US6301603B1 (en) 1998-02-17 2001-10-09 Euphonics Incorporated Scalable audio processing on a heterogeneous processor array
US6953886B1 (en) 1998-06-17 2005-10-11 Looney Productions, Llc Media organizer and entertainment center
IL127569A0 (en) 1998-09-16 1999-10-28 Comsense Technologies Ltd Interactive toys
US6839410B2 (en) 1998-09-01 2005-01-04 At&T Corp. Method and apparatus for setting user communication parameters based on voice identification of users
KR100620826B1 (ko) 1998-10-02 2006-09-13 인터내셔널 비지네스 머신즈 코포레이션 대화형 컴퓨팅 시스템 및 방법, 대화형 가상 머신, 프로그램 저장 장치 및 트랜잭션 수행 방법
US20020116196A1 (en) 1998-11-12 2002-08-22 Tran Bao Q. Speech recognizer
US6243676B1 (en) 1998-12-23 2001-06-05 Openwave Systems Inc. Searching and retrieving multimedia information
US7130616B2 (en) 2000-04-25 2006-10-31 Simple Devices System and method for providing content, management, and interactivity for client devices
US6256554B1 (en) 1999-04-14 2001-07-03 Dilorenzo Mark Multi-room entertainment system with in-room media player/dispenser
US6414251B1 (en) 1999-04-19 2002-07-02 Breck Colquett Weighing apparatus and method having automatic tolerance analysis and calibration
US7657910B1 (en) 1999-07-26 2010-02-02 E-Cast Inc. Distributed electronic entertainment method and apparatus
GB2352933A (en) 1999-07-31 2001-02-07 Ibm Speech encoding in a client server system
US6542868B1 (en) 1999-09-23 2003-04-01 International Business Machines Corporation Audio notification management system
US6937977B2 (en) 1999-10-05 2005-08-30 Fastmobile, Inc. Method and apparatus for processing an input speech signal during presentation of an output audio signal
US6611604B1 (en) 1999-10-22 2003-08-26 Stillwater Designs & Audio, Inc. Ultra low frequency transducer and loud speaker comprising same
US7725307B2 (en) * 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
US6594630B1 (en) 1999-11-19 2003-07-15 Voice Signal Technologies, Inc. Voice-activated control for electrical device
US6522886B1 (en) 1999-11-22 2003-02-18 Qwest Communications International Inc. Method and system for simultaneously sharing wireless communications among multiple wireless handsets
US6219645B1 (en) 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
ES2277419T3 (es) 1999-12-03 2007-07-01 Telefonaktiebolaget Lm Ericsson (Publ) Un metodo para producir simultaneamente ficheros de audio en dos telefonos.
KR20010054622A (ko) 1999-12-07 2001-07-02 서평원 음성 인식 시스템의 음성 인식률 향상 방법
US20010042107A1 (en) 2000-01-06 2001-11-15 Palm Stephen R. Networked audio player transport protocol and architecture
US7661107B1 (en) 2000-01-18 2010-02-09 Advanced Micro Devices, Inc. Method and apparatus for dynamic allocation of processing resources
WO2001053963A1 (en) 2000-01-24 2001-07-26 Zapmedia, Inc. System and method for the distribution and sharing of media assets between media players devices
WO2001053994A2 (en) 2000-01-24 2001-07-26 Friskit, Inc. Streaming media search and playback system
AU2001240986A1 (en) 2000-02-18 2001-08-27 Bridgeco Ag Multi-portal bridge for providing network connectivity
JP2001236093A (ja) 2000-02-24 2001-08-31 Omron Corp 電子機器制御装置および電子機器
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US6631410B1 (en) 2000-03-16 2003-10-07 Sharp Laboratories Of America, Inc. Multimedia wired/wireless content synchronization system and method
AU4219601A (en) 2000-03-31 2001-10-15 Classwave Wireless Inc. Dynamic protocol selection and routing of content to mobile devices
GB2363036B (en) 2000-05-31 2004-05-12 Nokia Mobile Phones Ltd Conference call method and apparatus therefor
US20050164664A1 (en) 2000-07-21 2005-07-28 Difonzo Daniel F. Dynamically reconfigurable wireless networks (DRWiN) and methods for operating such networks
US20040105566A1 (en) 2000-07-27 2004-06-03 International Business Machines Corporation Body set type speaker unit
WO2002023389A1 (en) 2000-09-15 2002-03-21 Robert Fish Systems and methods for translating an item of information using a distal computer
US6934756B2 (en) 2000-11-01 2005-08-23 International Business Machines Corporation Conversational networking via transport, coding and control conversational protocols
US20020054685A1 (en) 2000-11-09 2002-05-09 Carlos Avendano System for suppressing acoustic echoes and interferences in multi-channel audio systems
US20020072816A1 (en) 2000-12-07 2002-06-13 Yoav Shdema Audio system
US7016847B1 (en) 2000-12-08 2006-03-21 Ben Franklin Patent Holdings L.L.C. Open architecture for a voice user interface
US6778869B2 (en) 2000-12-11 2004-08-17 Sony Corporation System and method for request, delivery and use of multimedia files for audiovisual entertainment in the home environment
US7143939B2 (en) 2000-12-19 2006-12-05 Intel Corporation Wireless music device and method therefor
US20020124097A1 (en) 2000-12-29 2002-09-05 Isely Larson J. Methods, systems and computer program products for zone based distribution of audio signals
US20020095294A1 (en) * 2001-01-12 2002-07-18 Rick Korfin Voice user interface for controlling a consumer media data storage and playback device
US7617099B2 (en) 2001-02-12 2009-11-10 FortMedia Inc. Noise suppression by two-channel tandem spectrum modification for speech signal in an automobile
GB2372864B (en) 2001-02-28 2005-09-07 Vox Generation Ltd Spoken language interface
US6885989B2 (en) 2001-04-02 2005-04-26 International Business Machines Corporation Method and system for collaborative speech recognition for small-area network
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
US7136934B2 (en) 2001-06-19 2006-11-14 Request, Inc. Multimedia synchronization method and device
KR100420069B1 (ko) 2001-08-23 2004-02-25 한국과학기술원 인지 특성을 반영한 메뉴 설계 및 아이템 제시방법
US6892083B2 (en) 2001-09-05 2005-05-10 Vocera Communications Inc. Voice-controlled wireless communications system and method
US7536704B2 (en) 2001-10-05 2009-05-19 Opentv, Inc. Method and apparatus automatic pause and resume of playback for a popup on interactive TV
CA2408045A1 (en) 2001-10-16 2003-04-16 Audio Products International Corp. Loudspeaker with large displacement motional feedback
CA2407123C (en) 2001-10-16 2007-12-18 Audio Products International Corp. Low distortion loudspeaker cone suspension
US7006639B2 (en) 2001-11-20 2006-02-28 Maximilian Hans Hobelsberger Active noise-attenuating duct element
US7103542B2 (en) 2001-12-14 2006-09-05 Ben Franklin Patent Holding Llc Automatically improving a voice recognition system
US7391791B2 (en) 2001-12-17 2008-06-24 Implicit Networks, Inc. Method and system for synchronization of content rendering
DE10163213A1 (de) * 2001-12-21 2003-07-10 Philips Intellectual Property Verfahren zum Betrieb eines Spracherkennungssystems
US8103009B2 (en) 2002-01-25 2012-01-24 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
US7853341B2 (en) 2002-01-25 2010-12-14 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
JP4086280B2 (ja) 2002-01-29 2008-05-14 株式会社東芝 音声入力システム、音声入力方法及び音声入力プログラム
JP2005518734A (ja) 2002-02-20 2005-06-23 メシュネットワークス、インコーポレイテッド チャンネル間で802.11データトラフィックをルーティングしてアドホックネットワーク容量を増大するシステムおよび方法
JP3715584B2 (ja) 2002-03-28 2005-11-09 富士通株式会社 機器制御装置および機器制御方法
JP4555072B2 (ja) 2002-05-06 2010-09-29 シンクロネイション インコーポレイテッド ローカライズされたオーディオ・ネットワークおよび関連するディジタル・アクセサリ
EP1504367A4 (en) 2002-05-09 2009-04-08 Netstreams Llc AUDIO NETWORK DISTRIBUTION SYSTEM
US6961423B2 (en) 2002-06-24 2005-11-01 Freescale Semiconductor, Inc. Method and apparatus for performing adaptive filtering
JP3815388B2 (ja) 2002-06-25 2006-08-30 株式会社デンソー 音声認識システムおよび端末
US8060225B2 (en) 2002-07-31 2011-11-15 Hewlett-Packard Development Company, L. P. Digital audio device
EP1389853B1 (en) 2002-08-14 2006-03-29 Sony Deutschland GmbH Bandwidth oriented reconfiguration of wireless ad hoc networks
JP3910898B2 (ja) 2002-09-17 2007-04-25 株式会社東芝 指向性設定装置、指向性設定方法及び指向性設定プログラム
US7228275B1 (en) 2002-10-21 2007-06-05 Toyota Infotechnology Center Co., Ltd. Speech recognition system having multiple speech recognizers
JP2004163590A (ja) 2002-11-12 2004-06-10 Denso Corp 再生装置及びプログラム
KR20040042242A (ko) 2002-11-13 2004-05-20 삼성전자주식회사 홈서버를 이용하는 홈로봇 및 이를 포함하는 홈네트워크시스템
US7295548B2 (en) 2002-11-27 2007-11-13 Microsoft Corporation Method and system for disaggregating audio/visual components
CN100392723C (zh) 2002-12-11 2008-06-04 索夫塔马克斯公司 在稳定性约束下使用独立分量分析的语音处理系统和方法
US7076428B2 (en) 2002-12-30 2006-07-11 Motorola, Inc. Method and apparatus for selective distributed speech recognition
KR100668297B1 (ko) 2002-12-31 2007-01-12 삼성전자주식회사 음성인식방법 및 장치
US6823050B2 (en) 2003-02-13 2004-11-23 International Business Machines Corporation System and method for interfacing with a personal telephony recorder
EP1602051A2 (en) 2003-03-03 2005-12-07 America Online, Inc. Source audio identifiers for digital communications
JP2004347943A (ja) 2003-05-23 2004-12-09 Clarion Co Ltd データ処理装置、楽曲再生装置、データ処理装置の制御プログラムおよび楽曲再生装置の制御プログラム
US8234395B2 (en) * 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US9207905B2 (en) * 2003-07-28 2015-12-08 Sonos, Inc. Method and apparatus for providing synchrony group status information
US7961892B2 (en) 2003-07-28 2011-06-14 Texas Instruments Incorporated Apparatus and method for monitoring speaker cone displacement in an audio speaker
US20050031140A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using a capacitance measurement
US20050031139A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using impedance
US20050031132A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Control system
US20050031134A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using infrared light
US20060104451A1 (en) 2003-08-07 2006-05-18 Tymphany Corporation Audio reproduction system
US20050031137A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Calibration of an actuator
US20050031131A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of modifying dynamics of a system
US20050031138A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of measuring a cant of an actuator
US20050031133A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Process for position indication
KR20050023841A (ko) 2003-09-03 2005-03-10 삼성전자주식회사 비선형 왜곡 저감 방법 및 장치
US7099821B2 (en) 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
US20050077843A1 (en) 2003-10-11 2005-04-14 Ronnie Benditt Method and apparatus for controlling a performing arts show by an onstage performer
US20070071255A1 (en) 2003-10-24 2007-03-29 Koninklijke Philips Electronics N.V. Adaptive Sound Reproduction
DE602004021716D1 (de) 2003-11-12 2009-08-06 Honda Motor Co Ltd Spracherkennungssystem
US7705565B2 (en) 2003-12-31 2010-04-27 Motorola, Inc. Method and system for wireless charging
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
JP4269973B2 (ja) 2004-02-27 2009-05-27 株式会社デンソー カーオーディオシステム
US7415117B2 (en) 2004-03-02 2008-08-19 Microsoft Corporation System and method for beamforming using a microphone array
US7483538B2 (en) 2004-03-02 2009-01-27 Ksc Industries, Inc. Wireless and wired speaker hub for a home theater system
JP4059214B2 (ja) 2004-03-04 2008-03-12 ソニー株式会社 情報再生システムの制御方法、情報再生システム、情報提供装置、および情報提供プログラム
US10200504B2 (en) 2007-06-12 2019-02-05 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US7372966B2 (en) 2004-03-19 2008-05-13 Nokia Corporation System for limiting loudspeaker displacement
JP2005284492A (ja) 2004-03-29 2005-10-13 Mitsubishi Electric Corp 音声利用操作装置
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US7630501B2 (en) 2004-05-14 2009-12-08 Microsoft Corporation System and method for calibration of an acoustic system
US7792311B1 (en) 2004-05-15 2010-09-07 Sonos, Inc., Method and apparatus for automatically enabling subwoofer channel audio based on detection of subwoofer device
US7346846B2 (en) 2004-05-28 2008-03-18 Microsoft Corporation Strategies for providing just-in-time user assistance
US7006938B2 (en) 2004-06-16 2006-02-28 Ami Semiconductor, Inc. Reactive sensor modules using Pade' Approximant based compensation and providing module-sourced excitation
US7672845B2 (en) 2004-06-22 2010-03-02 International Business Machines Corporation Method and system for keyword detection using voice-recognition
US20060004834A1 (en) 2004-06-30 2006-01-05 Nokia Corporation Dynamic shortcuts
JP2006092482A (ja) 2004-09-27 2006-04-06 Yamaha Corp 音声認識通報装置
US7720232B2 (en) 2004-10-15 2010-05-18 Lifesize Communications, Inc. Speakerphone
US8386523B2 (en) 2004-12-30 2013-02-26 Texas Instruments Incorporated Random access audio decoder
TWI272860B (en) 2005-01-03 2007-02-01 Lite On Technology Corp Audio receiver and volume reminder method
US20070189544A1 (en) 2005-01-15 2007-08-16 Outland Research, Llc Ambient sound responsive media player
CA2594670C (en) 2005-01-21 2014-12-23 Certicom Corp. Elliptic curve random number generation
US20060190968A1 (en) 2005-01-31 2006-08-24 Searete Llc, A Limited Corporation Of The State Of The State Of Delaware Sharing between shared audio devices
EP1715669A1 (en) 2005-04-19 2006-10-25 Ecole Polytechnique Federale De Lausanne (Epfl) A method for removing echo in an audio signal
WO2006111370A1 (en) 2005-04-19 2006-10-26 Epfl (Ecole Polytechnique Federale De Lausanne) A method and device for removing echo in a multi-channel audio signal
US7720684B2 (en) 2005-04-29 2010-05-18 Nuance Communications, Inc. Method, apparatus, and computer program product for one-step correction of voice interaction
US7991167B2 (en) 2005-04-29 2011-08-02 Lifesize Communications, Inc. Forming beams with nulls directed at noise sources
US9300790B2 (en) 2005-06-24 2016-03-29 Securus Technologies, Inc. Multi-party conversation analyzer and logger
JP4760160B2 (ja) 2005-06-29 2011-08-31 ヤマハ株式会社 集音装置
JP4804052B2 (ja) 2005-07-08 2011-10-26 アルパイン株式会社 音声認識装置、音声認識装置を備えたナビゲーション装置及び音声認識装置の音声認識方法
US20070018844A1 (en) * 2005-07-19 2007-01-25 Sehat Sutardja Two way remote control
JP4285457B2 (ja) 2005-07-20 2009-06-24 ソニー株式会社 音場測定装置及び音場測定方法
CN101233783B (zh) 2005-07-29 2011-12-21 松下电器产业株式会社 扬声器装置
CN1909625A (zh) 2005-08-05 2007-02-07 鸿富锦精密工业(深圳)有限公司 一种自动调整音量的电视装置及控制方法
US20090076821A1 (en) * 2005-08-19 2009-03-19 Gracenote, Inc. Method and apparatus to control operation of a playback device
US20070060054A1 (en) 2005-09-15 2007-03-15 Sony Ericsson Mobile Communications Ab Wireless home communication system method and apparatus
JP4519041B2 (ja) 2005-09-20 2010-08-04 ローランド株式会社 楽器用スピーカ装置
CN101427154A (zh) 2005-09-21 2009-05-06 皇家飞利浦电子股份有限公司 使用远程位置麦克风进行语音激活控制的超声成像系统
US8270957B2 (en) 2005-11-07 2012-09-18 Telecom Italia S.P.A. Method for managing a conference call in a telephone network
JP4929685B2 (ja) 2005-11-15 2012-05-09 ヤマハ株式会社 遠隔会議装置
CA2629801C (en) 2005-11-15 2011-02-01 Yamaha Corporation Remote conference apparatus and sound emitting/collecting apparatus
US20070140058A1 (en) 2005-11-21 2007-06-21 Motorola, Inc. Method and system for correcting transducer non-linearities
US7600194B2 (en) 2005-12-02 2009-10-06 Microsoft Corporation Start menu operation for computer user interface
JP2007174233A (ja) 2005-12-21 2007-07-05 Pioneer Electronic Corp スピーカー装置及び携帯電話機
JP4677341B2 (ja) 2005-12-21 2011-04-27 パイオニア株式会社 スピーカー装置及び携帯電話機
US20160066087A1 (en) 2006-01-30 2016-03-03 Ludger Solbach Joint noise suppression and acoustic echo cancellation
KR100762636B1 (ko) 2006-02-14 2007-10-01 삼성전자주식회사 네트워크 단말의 음성 검출 제어 시스템 및 방법
JP4422692B2 (ja) 2006-03-03 2010-02-24 日本電信電話株式会社 伝達経路推定方法、残響除去方法、音源分離方法、これらの装置、プログラム、記録媒体
US8284982B2 (en) 2006-03-06 2012-10-09 Induction Speaker Technology, Llc Positionally sequenced loudspeaker system
EP2005319B1 (en) 2006-04-04 2017-01-11 Johnson Controls Technology Company System and method for extraction of meta data from a digital media storage device for media selection in a vehicle
DE602006005228D1 (de) 2006-04-18 2009-04-02 Harman Becker Automotive Sys System und Verfahren zur Mehrkanal-Echokompensation
KR100786108B1 (ko) 2006-05-01 2007-12-18 김준식 음파통신 네트워크
US9208785B2 (en) 2006-05-10 2015-12-08 Nuance Communications, Inc. Synchronizing distributed speech recognition
DE602006007685D1 (de) 2006-05-10 2009-08-20 Harman Becker Automotive Sys Kompensation von Mehrkanalechos durch Dekorrelation
US8041057B2 (en) 2006-06-07 2011-10-18 Qualcomm Incorporated Mixing techniques for mixing audio
JP4984683B2 (ja) 2006-06-29 2012-07-25 ヤマハ株式会社 放収音装置
US8207936B2 (en) 2006-06-30 2012-06-26 Sony Ericsson Mobile Communications Ab Voice remote control
US8189765B2 (en) 2006-07-06 2012-05-29 Panasonic Corporation Multichannel echo canceller
US20080037814A1 (en) 2006-08-09 2008-02-14 Jeng-Jye Shau Precision audio speakers
WO2008018099A1 (en) 2006-08-10 2008-02-14 Claudio Lastrucci Improvements to systems for acoustic diffusion
US10013381B2 (en) 2006-08-31 2018-07-03 Bose Corporation Media playing from a docked handheld media device
US8483853B1 (en) 2006-09-12 2013-07-09 Sonos, Inc. Controlling and manipulating groupings in a multi-zone media system
US8473618B2 (en) 2006-09-19 2013-06-25 Motorola Solutions, Inc. Method and system for processing multiple communication sessions in a communication network
JP2008079256A (ja) 2006-09-25 2008-04-03 Toshiba Corp 音響信号処理装置、音響信号処理方法及びプログラム
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US7747293B2 (en) 2006-10-17 2010-06-29 Marvell Worl Trade Ltd. Display control for cellular phone
AU2007312942A1 (en) 2006-10-17 2008-04-24 Altec Lansing Australia Pty Ltd Unification of multimedia devices
TWI435591B (zh) 2006-10-17 2014-04-21 Marvell World Trade Ltd 用於蜂巢電話之顯示控制
US8391501B2 (en) 2006-12-13 2013-03-05 Motorola Mobility Llc Method and apparatus for mixing priority and non-priority audio signals
US9124650B2 (en) 2006-12-13 2015-09-01 Quickplay Media Inc. Digital rights management in a mobile environment
US20080146289A1 (en) 2006-12-14 2008-06-19 Motorola, Inc. Automatic audio transducer adjustments based upon orientation of a mobile communication device
JP2008158868A (ja) 2006-12-25 2008-07-10 Toyota Motor Corp 移動体、及びその制御方法
US7973857B2 (en) 2006-12-27 2011-07-05 Nokia Corporation Teleconference group formation using context information
US20090013255A1 (en) 2006-12-30 2009-01-08 Matthew John Yuschik Method and System for Supporting Graphical User Interfaces
KR101316750B1 (ko) 2007-01-23 2013-10-08 삼성전자주식회사 수신된 위치 정보에 따라 오디오 파일을 재생하는 장치 및그 방법
TW200833152A (en) 2007-01-31 2008-08-01 Bluepacket Comm Co Ltd Multimedia switching system
WO2008096414A1 (ja) 2007-02-06 2008-08-14 Pioneer Corporation コンテンツ取得装置、コンテンツ取得方法、コンテンツ取得プログラムおよび記録媒体
US20090228919A1 (en) 2007-11-16 2009-09-10 Zott Joseph A Media playlist management and viewing remote control
US20080208594A1 (en) 2007-02-27 2008-08-28 Cross Charles W Effecting Functions On A Multimodal Telephony Device
JP4728982B2 (ja) 2007-03-05 2011-07-20 株式会社東芝 利用者と対話する装置、方法およびプログラム
US8996379B2 (en) 2007-03-07 2015-03-31 Vlingo Corporation Speech recognition text entry for software applications
US8635243B2 (en) 2007-03-07 2014-01-21 Research In Motion Limited Sending a communications header with voice recording to send metadata for use in speech recognition, formatting, and search mobile search application
US8886545B2 (en) 2007-03-07 2014-11-11 Vlingo Corporation Dealing with switch latency in speech recognition
US8019076B1 (en) 2007-03-14 2011-09-13 Clearone Communications, Inc. Portable speakerphone device and subsystem utilizing false doubletalk detection
GB0706074D0 (en) 2007-03-28 2007-05-09 Skype Ltd Detection of communication states
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8983051B2 (en) 2007-04-03 2015-03-17 William F. Barton Outgoing call classification and disposition
US8406439B1 (en) 2007-04-04 2013-03-26 At&T Intellectual Property I, L.P. Methods and systems for synthetic audio placement
US8848879B1 (en) 2007-05-03 2014-09-30 Avaya Inc. Customizable notification based on recent communication history
US8041565B1 (en) 2007-05-04 2011-10-18 Foneweb, Inc. Precision speech to text conversion
US8032383B1 (en) 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
KR100827613B1 (ko) 2007-05-04 2008-05-07 삼성전자주식회사 휴대용 단말기의 마이크 제어 장치 및 방법
US8136040B2 (en) 2007-05-16 2012-03-13 Apple Inc. Audio variance for multiple windows
US8374636B2 (en) 2007-05-18 2013-02-12 Shorthand Mobile, Inc. System and method for enhanced communications via small data rate communication systems
US20080291916A1 (en) * 2007-05-22 2008-11-27 Bo Xiong Systems and methods for dynamic quality of service
EP1998446A1 (en) 2007-05-31 2008-12-03 Alcatel Lucent Remote control for devices with connectivity to a service delivery platform
US8068925B2 (en) 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
JP4985151B2 (ja) 2007-06-29 2012-07-25 ヤマハ株式会社 コンテンツ配信システム及びセンタ装置
JP4916394B2 (ja) 2007-07-03 2012-04-11 富士通株式会社 エコー抑圧装置、エコー抑圧方法及びコンピュータプログラム
WO2009020617A1 (en) 2007-08-06 2009-02-12 Orison Corporation System and method for three-dimensional ultrasound imaging
US20090046866A1 (en) 2007-08-15 2009-02-19 Fortemedia, Inc. Apparatus capable of performing acoustic echo cancellation and a method thereof
US8073125B2 (en) 2007-09-25 2011-12-06 Microsoft Corporation Spatial audio conferencing
US7844724B2 (en) * 2007-10-24 2010-11-30 Social Communications Company Automated real-time data stream switching in a shared virtual area communication environment
US8639214B1 (en) 2007-10-26 2014-01-28 Iwao Fujisaki Communication device
US8013720B2 (en) 2007-11-02 2011-09-06 Reverse Control, Inc. Signal apparatus for facilitating safe backup of vehicles
JP5441710B2 (ja) 2007-11-20 2014-03-12 パナソニック株式会社 スピーカ、映像機器、および携帯型情報処理装置
US9247346B2 (en) 2007-12-07 2016-01-26 Northern Illinois Research Foundation Apparatus, system and method for noise cancellation and communication for incubators and related devices
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US9386154B2 (en) 2007-12-21 2016-07-05 Nuance Communications, Inc. System, method and software program for enabling communications between customer service agents and users of communication devices
US8473081B2 (en) 2007-12-25 2013-06-25 Personics Holdings, Inc. Method and system for event reminder using an earpiece
WO2009086599A1 (en) 2008-01-07 2009-07-16 Avega Systems Pty Ltd A user interface for managing the operation of networked media playback devices
US9992314B2 (en) 2008-01-24 2018-06-05 Garmin Switzerland Gmbh Automatic device mode switching
DE102008039329A1 (de) 2008-01-25 2009-07-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zur Berechnung von Steuerinformationen für ein Echounterdrückungsfilter und Vorrichtung und Verfahren zur Berechnung eines Verzögerungswerts
DE102008039330A1 (de) 2008-01-31 2009-08-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung und Verfahren zum Berechnen von Filterkoeffizienten zur Echounterdrückung
US8072905B2 (en) * 2008-02-04 2011-12-06 Sony Ericsson Mobile Communications Ab Intelligent interaction between devices in a local network
US8213598B2 (en) 2008-02-26 2012-07-03 Microsoft Corporation Harmonic distortion residual echo suppression
US8638908B2 (en) 2008-02-28 2014-01-28 Computer Products Introductions, Corp Contextual conversation processing in telecommunication applications
US8194882B2 (en) 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US9113240B2 (en) 2008-03-18 2015-08-18 Qualcomm Incorporated Speech enhancement using multiple microphones on multiple devices
US20090249222A1 (en) * 2008-03-25 2009-10-01 Square Products Corporation System and method for simultaneous media presentation
US20090248397A1 (en) 2008-03-25 2009-10-01 Microsoft Corporation Service Initiation Techniques
US7516068B1 (en) 2008-04-07 2009-04-07 International Business Machines Corporation Optimized collection of audio for speech recognition
CN101562671A (zh) * 2008-04-18 2009-10-21 鸿富锦精密工业(深圳)有限公司 音频设备的音量控制方法及通信装置
JP5423670B2 (ja) 2008-04-30 2014-02-19 日本電気株式会社 音響モデル学習装置および音声認識装置
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US8831948B2 (en) 2008-06-06 2014-09-09 At&T Intellectual Property I, L.P. System and method for synthetically generated speech describing media content
US8385557B2 (en) 2008-06-19 2013-02-26 Microsoft Corporation Multichannel acoustic echo reduction
US8325909B2 (en) 2008-06-25 2012-12-04 Microsoft Corporation Acoustic echo suppression
US8693663B2 (en) 2008-06-27 2014-04-08 Centurylink Intellectual Property Llc System and method for implementing do-not-disturb during playback of media content
US8364481B2 (en) 2008-07-02 2013-01-29 Google Inc. Speech recognition with parallel recognition tasks
US8505056B2 (en) 2008-07-10 2013-08-06 Apple Inc. Updating properties of remote A/V performance nodes
EP2146519B1 (en) 2008-07-16 2012-06-06 Nuance Communications, Inc. Beamforming pre-processing for speaker localization
US8781833B2 (en) 2008-07-17 2014-07-15 Nuance Communications, Inc. Speech recognition semantic classification training
US8639830B2 (en) 2008-07-22 2014-01-28 Control4 Corporation System and method for streaming audio
US8325938B2 (en) * 2008-08-12 2012-12-04 Sony Corporation Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method
JP5206234B2 (ja) 2008-08-27 2013-06-12 富士通株式会社 雑音抑圧装置、携帯電話機、雑音抑圧方法及びコンピュータプログラム
US8676586B2 (en) 2008-09-16 2014-03-18 Nice Systems Ltd Method and apparatus for interaction or discourse analytics
KR20100034229A (ko) 2008-09-23 2010-04-01 삼성전자주식회사 이어폰 회로를 포함하는 휴대 단말기 및 이의 운용방법
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
KR20180019752A (ko) 2008-11-10 2018-02-26 구글 엘엘씨 멀티센서 음성 검출
US8386261B2 (en) 2008-11-14 2013-02-26 Vocollect Healthcare Systems, Inc. Training/coaching system for a voice-enabled work environment
US8095368B2 (en) 2008-12-04 2012-01-10 At&T Intellectual Property I, L.P. System and method for voice authentication over a computer network
JP5347472B2 (ja) 2008-12-12 2013-11-20 ヤマハ株式会社 遠隔制御装置および遠隔制御システム
US8548812B2 (en) 2008-12-22 2013-10-01 Avaya Inc. Method and system for detecting a relevant utterance in a voice session
KR101467796B1 (ko) * 2009-01-12 2014-12-10 엘지전자 주식회사 이동단말기 및 그 제어 방법
US8351617B2 (en) 2009-01-13 2013-01-08 Fortemedia, Inc. Method for phase mismatch calibration for an array microphone and phase calibration module for the same
US20100179874A1 (en) 2009-01-13 2010-07-15 Yahoo! Inc. Media object metadata engine configured to determine relationships between persons and brands
US20130283166A1 (en) 2012-04-24 2013-10-24 Social Communications Company Voice-based virtual area navigation
US8428758B2 (en) * 2009-02-16 2013-04-23 Apple Inc. Dynamic audio ducking
FR2943875A1 (fr) 2009-03-31 2010-10-01 France Telecom Procede et dispositif de classification du bruit de fond contenu dans un signal audio.
KR101064976B1 (ko) 2009-04-06 2011-09-15 한국과학기술원 음원위치추정시스템 및 이를 구비한 음원에 반응하는 로봇
US8243949B2 (en) 2009-04-14 2012-08-14 Plantronics, Inc. Network addressible loudspeaker and audio play
JP5384721B2 (ja) 2009-04-15 2014-01-08 フラウンホーファー−ゲゼルシャフト・ツール・フェルデルング・デル・アンゲヴァンテン・フォルシュング・アインゲトラーゲネル・フェライン 音響エコー抑制ユニットと会議開催フロントエンド
US8483398B2 (en) 2009-04-30 2013-07-09 Hewlett-Packard Development Company, L.P. Methods and systems for reducing acoustic echoes in multichannel communication systems by reducing the dimensionality of the space of impulse responses
JP5550456B2 (ja) 2009-06-04 2014-07-16 本田技研工業株式会社 残響抑圧装置、及び残響抑圧方法
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
JP4820434B2 (ja) 2009-06-08 2011-11-24 レノボ・シンガポール・プライベート・リミテッド マイクロフォンのミュート・コントロール
US20100332236A1 (en) 2009-06-25 2010-12-30 Blueant Wireless Pty Limited Voice-triggered operation of electronic devices
US8478982B2 (en) 2009-08-06 2013-07-02 Broadcom Corporation Media access control security management in physical layer
US8625775B2 (en) 2009-08-06 2014-01-07 Hti Ip, L.L.C. Method and system for reducing echo and noise in a vehicle passenger compartment environment
JP5440053B2 (ja) 2009-09-14 2014-03-12 ソニー株式会社 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
JP5342005B2 (ja) 2009-09-17 2013-11-13 株式会社日立メディコ 超音波探触子及び超音波撮像装置
US20110091055A1 (en) 2009-10-19 2011-04-21 Broadcom Corporation Loudspeaker localization techniques
US8600073B2 (en) 2009-11-04 2013-12-03 Cambridge Silicon Radio Limited Wind noise suppression
KR101301535B1 (ko) 2009-12-02 2013-09-04 한국전자통신연구원 하이브리드 번역 장치 및 그 방법
US20110145581A1 (en) 2009-12-14 2011-06-16 Verizon Patent And Licensing, Inc. Media playback across devices
JP5641186B2 (ja) 2010-01-13 2014-12-17 ヤマハ株式会社 雑音抑圧装置およびプログラム
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
NO332437B1 (no) 2010-01-18 2012-09-17 Cisco Systems Int Sarl Apparat og fremgangsmate for a supprimere et akustisk ekko
WO2011091402A1 (en) 2010-01-25 2011-07-28 Justin Mason Voice electronic listening assistant
US8718290B2 (en) 2010-01-26 2014-05-06 Audience, Inc. Adaptive noise reduction using level cues
US8713571B2 (en) 2010-02-17 2014-04-29 Microsoft Corporation Asynchronous task execution
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9209987B2 (en) 2010-03-02 2015-12-08 Microsoft Technology Licensing, Llc Social media playback
EP2375779A3 (en) 2010-03-31 2012-01-18 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Apparatus and method for measuring a plurality of loudspeakers and microphone array
US9112989B2 (en) 2010-04-08 2015-08-18 Qualcomm Incorporated System and method of smart audio logging for mobile devices
US9514476B2 (en) 2010-04-14 2016-12-06 Viacom International Inc. Systems and methods for discovering artists
US8538035B2 (en) 2010-04-29 2013-09-17 Audience, Inc. Multi-microphone robust noise suppression
US8437339B2 (en) 2010-04-28 2013-05-07 Hewlett-Packard Development Company, L.P. Techniques to provide integrated voice service management
JP5572445B2 (ja) 2010-04-30 2014-08-13 本田技研工業株式会社 残響抑圧装置、及び残響抑圧方法
CN102959544B (zh) 2010-05-04 2016-06-08 沙扎姆娱乐有限公司 用于同步媒体的方法和系统
EP2567554B1 (en) 2010-05-06 2016-03-23 Dolby Laboratories Licensing Corporation Determination and use of corrective filters for portable media playback devices
US9307340B2 (en) 2010-05-06 2016-04-05 Dolby Laboratories Licensing Corporation Audio system equalization for portable media playback devices
US9736600B2 (en) 2010-05-17 2017-08-15 Iii Holdings 4, Llc Devices and methods for collecting acoustic data
US20110289506A1 (en) 2010-05-18 2011-11-24 Google Inc. Management of computing resources for applications
US8395653B2 (en) 2010-05-18 2013-03-12 Polycom, Inc. Videoconferencing endpoint having multiple voice-tracking cameras
US9558755B1 (en) 2010-05-20 2017-01-31 Knowles Electronics, Llc Noise suppression assisted automatic speech recognition
US8831761B2 (en) 2010-06-02 2014-09-09 Sony Corporation Method for determining a processed audio signal and a handheld device
JP2011259097A (ja) 2010-06-07 2011-12-22 Sony Corp 音声信号処理装置及び音声信号処理方法
US8588849B2 (en) 2010-07-09 2013-11-19 Blackberry Limited System and method for resuming media
US8699723B2 (en) * 2010-07-20 2014-04-15 International Business Machines Corporation Audio device volume manager using measured volume perceived at a first audio device to control volume generation by a second audio device
US8762144B2 (en) 2010-07-21 2014-06-24 Samsung Electronics Co., Ltd. Method and apparatus for voice activity detection
US9025782B2 (en) 2010-07-26 2015-05-05 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for multi-microphone location-selective processing
US9349368B1 (en) 2010-08-05 2016-05-24 Google Inc. Generating an audio notification based on detection of a triggering event
US8731939B1 (en) 2010-08-06 2014-05-20 Google Inc. Routing queries based on carrier phrase registration
US8359020B2 (en) 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
JP5819965B2 (ja) * 2010-08-27 2015-11-24 インテル・コーポレーション システム及び装置
US8861756B2 (en) 2010-09-24 2014-10-14 LI Creative Technologies, Inc. Microphone array system
US20120078635A1 (en) 2010-09-24 2012-03-29 Apple Inc. Voice control system
JP5259020B2 (ja) 2010-10-01 2013-08-07 三菱電機株式会社 音声認識装置
US9240111B2 (en) 2010-10-06 2016-01-19 Microsoft Technology Licensing, Llc Inferring building metadata from distributed sensors
WO2012046582A1 (ja) 2010-10-08 2012-04-12 日本電気株式会社 信号処理装置、信号処理方法、及び信号処理プログラム
WO2012054872A2 (en) * 2010-10-22 2012-04-26 Phorus Llc Media distribution architecture
EP2444967A1 (en) 2010-10-25 2012-04-25 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Echo suppression comprising modeling of late reverberation components
US9552840B2 (en) 2010-10-25 2017-01-24 Qualcomm Incorporated Three-dimensional sound capturing and reproducing with multi-microphones
US9226069B2 (en) 2010-10-29 2015-12-29 Qualcomm Incorporated Transitioning multiple microphones from a first mode to a second mode
EP2456199A3 (en) 2010-11-22 2014-07-16 DDS Newco Inc. Method and systems of dynamically managing content for use by a media playback device
US20120148075A1 (en) 2010-12-08 2012-06-14 Creative Technology Ltd Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
JP6012621B2 (ja) 2010-12-15 2016-10-25 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. リモートノイズ検知器を使用したノイズ削減システム
JP5771002B2 (ja) 2010-12-22 2015-08-26 株式会社東芝 音声認識装置、音声認識方法および音声認識装置を搭載したテレビ受像機
US9241227B2 (en) 2011-01-06 2016-01-19 Bose Corporation Transducer with integrated sensor
JP2012150237A (ja) 2011-01-18 2012-08-09 Sony Corp 音信号処理装置、および音信号処理方法、並びにプログラム
US8929564B2 (en) 2011-03-03 2015-01-06 Microsoft Corporation Noise adaptive beamforming for microphone arrays
CN102123188A (zh) 2011-03-03 2011-07-13 曾超宁 移动电话耳麦装置
KR20120100514A (ko) 2011-03-04 2012-09-12 삼성전자주식회사 디바이스 그룹핑 방법 및 이를 적용한 서버
US8804977B2 (en) 2011-03-18 2014-08-12 Dolby Laboratories Licensing Corporation Nonlinear reference signal processing for echo suppression
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
KR20120128542A (ko) 2011-05-11 2012-11-27 삼성전자주식회사 멀티 채널 에코 제거를 위한 멀티 채널 비-상관 처리 방법 및 장치
US9342516B2 (en) 2011-05-18 2016-05-17 Microsoft Technology Licensing, Llc Media presentation playback annotation
US8320577B1 (en) 2011-05-20 2012-11-27 Google Inc. Method and apparatus for multi-channel audio processing using single-channel components
EP2715972B1 (en) 2011-05-31 2016-02-24 Google, Inc. Muting participants in a communication session
US8897465B2 (en) 2011-06-01 2014-11-25 Robert Bosch Gmbh Class D micro-speaker
US8958571B2 (en) 2011-06-03 2015-02-17 Cirrus Logic, Inc. MIC covering detection in personal audio devices
US8738925B1 (en) 2013-01-07 2014-05-27 Fitbit, Inc. Wireless portable biometric device syncing
US9307321B1 (en) 2011-06-09 2016-04-05 Audience, Inc. Speaker distortion reduction
US9226088B2 (en) 2011-06-11 2015-12-29 Clearone Communications, Inc. Methods and apparatuses for multiple configurations of beamforming microphone arrays
US9762967B2 (en) 2011-06-14 2017-09-12 Comcast Cable Communications, Llc System and method for presenting content with time based metadata
US8731765B2 (en) 2011-06-28 2014-05-20 GM Global Technology Operations LLC Method and apparatus for fault detection in a torque machine of a powertrain system
US20130018659A1 (en) 2011-07-12 2013-01-17 Google Inc. Systems and Methods for Speech Command Processing
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US20130024018A1 (en) 2011-07-22 2013-01-24 Htc Corporation Multimedia control method and multimedia control system
JP5289517B2 (ja) 2011-07-28 2013-09-11 株式会社半導体理工学研究センター センサネットワークシステムとその通信方法
US9148742B1 (en) 2011-07-29 2015-09-29 Google Inc. Proximity detection via audio
WO2013018138A1 (ja) 2011-08-03 2013-02-07 パイオニア株式会社 音声伝送方法、スピーカーシステム、音声伝送装置、スピーカーおよびプログラム
JP5640918B2 (ja) 2011-08-05 2014-12-17 ブラザー工業株式会社 サーバ装置、対応付け方法、及び携帯機器用プログラム
EP2555598A1 (en) 2011-08-05 2013-02-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method and device for generating optical radiation by means of electrically operated pulsed discharges
US20130039527A1 (en) 2011-08-08 2013-02-14 Bang & Olufsen A/S Modular, configurable speaker and a method of operating it
KR101252167B1 (ko) 2011-08-18 2013-04-05 엘지전자 주식회사 가전기기 진단장치 및 그 진단방법
US20130211826A1 (en) 2011-08-22 2013-08-15 Claes-Fredrik Urban Mannby Audio Signals as Buffered Streams of Audio Signals and Metadata
US8750677B2 (en) 2011-08-23 2014-06-10 Microsoft Corporation Method for transferring media playback from a different device
US20130073293A1 (en) 2011-09-20 2013-03-21 Lg Electronics Inc. Electronic device and method for controlling the same
US9094539B1 (en) 2011-09-22 2015-07-28 Amazon Technologies, Inc. Dynamic device adjustments based on determined user sleep state
US8996381B2 (en) 2011-09-27 2015-03-31 Sensory, Incorporated Background speech recognition assistant
US8768707B2 (en) 2011-09-27 2014-07-01 Sensory Incorporated Background speech recognition assistant using speaker verification
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US9729631B2 (en) 2011-09-30 2017-08-08 Apple Inc. Asynchronous data manipulation
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US8971546B2 (en) 2011-10-14 2015-03-03 Sonos, Inc. Systems, methods, apparatus, and articles of manufacture to control audio playback devices
CN103052001B (zh) 2011-10-17 2015-06-24 联想(北京)有限公司 智能设备及其控制方法
GB201118784D0 (en) 2011-10-31 2011-12-14 Omnifone Ltd Djml
GB2496660B (en) 2011-11-18 2014-06-04 Skype Processing audio signals
US8983089B1 (en) 2011-11-28 2015-03-17 Rawles Llc Sound source localization using multiple microphone arrays
CN102567468B (zh) 2011-12-06 2014-06-04 上海聚力传媒技术有限公司 一种用于对媒体文件的播放音量进行调节的方法与设备
GB2497343B (en) 2011-12-08 2014-11-26 Skype Processing audio signals
KR101649499B1 (ko) 2011-12-13 2016-08-19 인텔 코포레이션 연결된 미디어 장치들에서의 키워드 선택을 통한 채널 네비게이션
US9084058B2 (en) 2011-12-29 2015-07-14 Sonos, Inc. Sound field calibration using listener localization
KR102022318B1 (ko) 2012-01-11 2019-09-18 삼성전자 주식회사 음성 인식을 사용하여 사용자 기능을 수행하는 방법 및 장치
US8825020B2 (en) 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
US9654817B2 (en) 2012-01-27 2017-05-16 Avaya Inc. System and method to synchronize video playback on mobile devices
US9431980B2 (en) 2012-01-30 2016-08-30 Echostar Ukraine Llc Apparatus, systems and methods for adjusting output audio volume based on user location
US9401058B2 (en) 2012-01-30 2016-07-26 International Business Machines Corporation Zone based presence determination via voiceprint location awareness
US9173025B2 (en) 2012-02-08 2015-10-27 Dolby Laboratories Licensing Corporation Combined suppression of noise, echo, and out-of-location signals
US9418658B1 (en) 2012-02-08 2016-08-16 Amazon Technologies, Inc. Configuration of voice controlled assistant
US9947333B1 (en) 2012-02-10 2018-04-17 Amazon Technologies, Inc. Voice interaction architecture with intelligent background noise cancellation
US8453058B1 (en) 2012-02-20 2013-05-28 Google Inc. Crowd-sourced audio shortcuts
EP2632141B1 (en) 2012-02-22 2014-10-15 Dialog Semiconductor B.V. Postfilter for Spectral Domain Echo Cancellers to handle Non-linear Echo Components
US9065895B2 (en) 2012-02-22 2015-06-23 Broadcom Corporation Non-linear echo cancellation
US9838810B2 (en) 2012-02-27 2017-12-05 Qualcomm Technologies International, Ltd. Low power audio detection
US20130238326A1 (en) 2012-03-08 2013-09-12 Lg Electronics Inc. Apparatus and method for multiple device voice control
US9361878B2 (en) 2012-03-30 2016-06-07 Michael Boukadakis Computer-readable medium, system and method of providing domain-specific information
US9198204B2 (en) 2012-04-11 2015-11-24 Google Inc. Apparatus and method for seamless commissioning of wireless devices
EP2839391A4 (en) 2012-04-20 2016-01-27 Maluuba Inc CONVERSATION AGENT
US9633186B2 (en) 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
US9117449B2 (en) 2012-04-26 2015-08-25 Nuance Communications, Inc. Embedded system for construction of small footprint speech recognition with user-definable constraints
WO2013166080A1 (en) 2012-04-30 2013-11-07 Creative Technology Ltd A universal reconfigurable echo cancellation system
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
US8886524B1 (en) 2012-05-01 2014-11-11 Amazon Technologies, Inc. Signal processing based on audio context
US20130294611A1 (en) 2012-05-04 2013-11-07 Sony Computer Entertainment Inc. Source separation by independent component analysis in conjuction with optimization of acoustic echo cancellation
US9584909B2 (en) 2012-05-10 2017-02-28 Google Inc. Distributed beamforming based on message passing
US9768829B2 (en) 2012-05-11 2017-09-19 Intel Deutschland Gmbh Methods for processing audio signals and circuit arrangements therefor
US8908879B2 (en) * 2012-05-23 2014-12-09 Sonos, Inc. Audio content auditioning
US9633368B2 (en) 2012-05-25 2017-04-25 Apple Inc. Content ranking and serving on a multi-user device or interface
CN103456332A (zh) * 2012-05-28 2013-12-18 富泰华工业(深圳)有限公司 音频播放装置及音量调节方法
US20130324031A1 (en) 2012-05-31 2013-12-05 Nokia Corporation Dynamic allocation of audio channel for surround sound systems
US9060224B1 (en) 2012-06-01 2015-06-16 Rawles Llc Voice controlled assistant with coaxial speaker and microphone arrangement
EP2856690B1 (en) 2012-06-01 2020-12-02 BlackBerry Limited Universal synchronization engine based on probabilistic methods for guarantee of lock in multiformat audio systems
US9997069B2 (en) 2012-06-05 2018-06-12 Apple Inc. Context-aware voice guidance
US8903526B2 (en) 2012-06-06 2014-12-02 Sonos, Inc. Device playback failure recovery and redistribution
US9881616B2 (en) 2012-06-06 2018-01-30 Qualcomm Incorporated Method and systems having improved speech recognition
US9301073B2 (en) 2012-06-08 2016-03-29 Apple Inc. Systems and methods for determining the condition of multiple microphones
US9183845B1 (en) 2012-06-12 2015-11-10 Amazon Technologies, Inc. Adjusting audio signals based on a specific frequency range associated with environmental noise characteristics
US9142215B2 (en) 2012-06-15 2015-09-22 Cypress Semiconductor Corporation Power-efficient voice activation
US9031255B2 (en) 2012-06-15 2015-05-12 Sonos, Inc. Systems, methods, apparatus, and articles of manufacture to provide low-latency audio
US9674587B2 (en) 2012-06-26 2017-06-06 Sonos, Inc. Systems and methods for networked music playback including remote add to queue
US10354650B2 (en) 2012-06-26 2019-07-16 Google Llc Recognizing speech with mixed speech recognition models to generate transcriptions
US8880648B1 (en) * 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
US9106192B2 (en) 2012-06-28 2015-08-11 Sonos, Inc. System and method for device playback calibration
US9137564B2 (en) 2012-06-28 2015-09-15 Sonos, Inc. Shift to corresponding media in a playback queue
US9225307B2 (en) 2012-06-28 2015-12-29 Sonos, Inc. Modification of audio responsive to proximity detection
US9384737B2 (en) 2012-06-29 2016-07-05 Microsoft Technology Licensing, Llc Method and device for adjusting sound levels of sources based on sound source priority
US20140006825A1 (en) 2012-06-30 2014-01-02 David Shenhav Systems and methods to wake up a device from a power conservation state
US9497544B2 (en) 2012-07-02 2016-11-15 Qualcomm Incorporated Systems and methods for surround sound echo reduction
US20140003635A1 (en) 2012-07-02 2014-01-02 Qualcomm Incorporated Audio signal processing device calibration
US9615171B1 (en) 2012-07-02 2017-04-04 Amazon Technologies, Inc. Transformation inversion to reduce the effect of room acoustics
KR101972955B1 (ko) 2012-07-03 2019-04-26 삼성전자 주식회사 음성을 이용한 사용자 디바이스들 간 서비스 연결 방법 및 장치
US9536528B2 (en) 2012-07-03 2017-01-03 Google Inc. Determining hotword suitability
US8972762B2 (en) 2012-07-11 2015-03-03 Blackberry Limited Computing devices and methods for resetting inactivity timers on computing devices
KR20140008870A (ko) * 2012-07-12 2014-01-22 삼성전자주식회사 컨텐츠 정보 제공 방법 및 이를 적용한 방송 수신 장치
US10075801B2 (en) * 2012-07-13 2018-09-11 Sony Corporation Information processing system and storage medium
US8983844B1 (en) 2012-07-31 2015-03-17 Amazon Technologies, Inc. Transmission of noise parameters for improving automatic speech recognition
US8831957B2 (en) 2012-08-01 2014-09-09 Google Inc. Speech recognition models based on location indicia
KR20230048452A (ko) 2012-08-03 2023-04-11 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 발광 장치, 전자 장치 및 조명 장치
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
DK3190587T3 (en) 2012-08-24 2019-01-21 Oticon As Noise estimation for noise reduction and echo suppression in personal communication
US9532153B2 (en) 2012-08-29 2016-12-27 Bang & Olufsen A/S Method and a system of providing information to a user
JP2014052469A (ja) * 2012-09-06 2014-03-20 Sony Corp 音声処理装置、音声処理方法、及び、プログラム
US9088336B2 (en) 2012-09-06 2015-07-21 Imagination Technologies Limited Systems and methods of echo and noise cancellation in voice communication
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
US20140075306A1 (en) * 2012-09-12 2014-03-13 Randy Rega Music search and retrieval system
US8798598B2 (en) 2012-09-13 2014-08-05 Alain Rossmann Method and system for screencasting Smartphone video game software to online social networks
US9532139B1 (en) 2012-09-14 2016-12-27 Cirrus Logic, Inc. Dual-microphone frequency amplitude response self-calibration
US8983383B1 (en) 2012-09-25 2015-03-17 Rawles Llc Providing hands-free service to multiple devices
US9319816B1 (en) 2012-09-26 2016-04-19 Amazon Technologies, Inc. Characterizing environment using ultrasound pilot tones
JP2014071138A (ja) 2012-09-27 2014-04-21 Xing Inc カラオケ装置
KR102091236B1 (ko) 2012-09-28 2020-03-18 삼성전자 주식회사 전자기기 및 그 제어방법
US8725125B2 (en) * 2012-09-28 2014-05-13 United Video Properties, Inc. Systems and methods for controlling audio playback on portable devices with vehicle equipment
US9107001B2 (en) 2012-10-02 2015-08-11 Mh Acoustics, Llc Earphones having configurable microphone arrays
US8484025B1 (en) 2012-10-04 2013-07-09 Google Inc. Mapping an audio utterance to an action using a classifier
US9640194B1 (en) 2012-10-04 2017-05-02 Knowles Electronics, Llc Noise suppression for speech processing based on machine-learning mask estimation
CN102902253B (zh) 2012-10-09 2015-07-15 鸿富锦精密工业(深圳)有限公司 具有语音控制功能的智能开关及智能控制系统
US20140108010A1 (en) 2012-10-11 2014-04-17 Intermec Ip Corp. Voice-enabled documents for facilitating operational procedures
US9232310B2 (en) 2012-10-15 2016-01-05 Nokia Technologies Oy Methods, apparatuses and computer program products for facilitating directional audio capture with multiple microphones
CN105074452B (zh) 2012-10-15 2018-12-04 Msi蒂法特公司 半混响外壳中的直接场声学测试
DE102012020271A1 (de) 2012-10-17 2014-04-17 Wolfgang Klippel Anordnung und Verfahren zur Steuerung von Wandlern
CN104871196A (zh) * 2012-10-18 2015-08-26 迪曼森多媒体信息技术有限公司 具有服务器和在不同地理位置处的分布式播放器设备的媒体系统
WO2014064531A1 (en) * 2012-10-22 2014-05-01 Spotify Ab Systems and methods for pre-fetching media content
KR101978688B1 (ko) 2012-10-22 2019-05-15 삼성전자주식회사 마이크로폰 장치를 갖는 전자 장치 및 그 운용 방법
US20150228274A1 (en) 2012-10-26 2015-08-13 Nokia Technologies Oy Multi-Device Speech Recognition
KR20140054643A (ko) 2012-10-29 2014-05-09 삼성전자주식회사 음성인식장치 및 음성인식방법
US9584642B2 (en) 2013-03-12 2017-02-28 Google Technology Holdings LLC Apparatus with adaptive acoustic echo control for speakerphone mode
US10381001B2 (en) 2012-10-30 2019-08-13 Google Technology Holdings LLC Voice control user interface during low-power mode
US8761349B2 (en) 2012-10-31 2014-06-24 Citrix Systems, Inc. Systems and methods of monitoring performance of acoustic echo cancellation
US9275637B1 (en) 2012-11-06 2016-03-01 Amazon Technologies, Inc. Wake word evaluation
KR20140060040A (ko) 2012-11-09 2014-05-19 삼성전자주식회사 디스플레이장치, 음성취득장치 및 그 음성인식방법
US9275642B2 (en) 2012-11-13 2016-03-01 Unified Computer Intelligence Corporation Voice-operated internet-ready ubiquitous computing device and method thereof
CN102999161B (zh) 2012-11-13 2016-03-02 科大讯飞股份有限公司 一种语音唤醒模块的实现方法及应用
US9685171B1 (en) 2012-11-20 2017-06-20 Amazon Technologies, Inc. Multiple-stage adaptive filtering of audio signals
US9070367B1 (en) 2012-11-26 2015-06-30 Amazon Technologies, Inc. Local speech recognition of frequent utterances
US9875741B2 (en) 2013-03-15 2018-01-23 Google Llc Selective speech recognition for chat and digital personal assistant systems
US9124966B2 (en) * 2012-11-28 2015-09-01 Qualcomm Incorporated Image generation for collaborative sound systems
US20140149118A1 (en) 2012-11-28 2014-05-29 Lg Electronics Inc. Apparatus and method for driving electric device using speech recognition
US9203045B2 (en) 2012-11-29 2015-12-01 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
US9171092B2 (en) 2012-12-07 2015-10-27 Empire Technology Development Llc Personal assistant context building
US20140161263A1 (en) 2012-12-10 2014-06-12 Microsoft Corporation Facilitating recognition of real-time content
US9704486B2 (en) 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
US9226071B2 (en) 2012-12-13 2015-12-29 Maxim Integrated Products, Inc. Direct measurement of an input signal to a loudspeaker to determine and limit a temperature of a voice coil of the loudspeaker
US9300910B2 (en) 2012-12-14 2016-03-29 Biscotti Inc. Video mail capture, processing and distribution
US9271111B2 (en) 2012-12-14 2016-02-23 Amazon Technologies, Inc. Response endpoint selection
US9607046B2 (en) 2012-12-14 2017-03-28 Microsoft Technology Licensing, Llc Probability-based state modification for query dialogues
US9978260B2 (en) 2012-12-18 2018-05-22 Samsung Electronics Co., Ltd. Method and apparatus for controlling a home device remotely in a home network system
US9047857B1 (en) 2012-12-19 2015-06-02 Rawles Llc Voice commands for transitioning between device states
US9098467B1 (en) 2012-12-19 2015-08-04 Rawles Llc Accepting voice commands based on user identity
WO2014102722A1 (en) 2012-12-26 2014-07-03 Sia Technology Ltd. Device, system, and method of controlling electronic devices via thought
CN103021403A (zh) * 2012-12-31 2013-04-03 威盛电子股份有限公司 基于语音识别的选择方法及其移动终端装置及信息系统
US9620115B2 (en) 2013-01-03 2017-04-11 Telenav, Inc. Content delivery system with barge-in mechanism and method of operation thereof
KR102051588B1 (ko) 2013-01-07 2019-12-03 삼성전자주식회사 휴대 단말기의 오디오 컨텐츠 재생 방법 및 그 장치
US9318125B2 (en) 2013-01-15 2016-04-19 Intel Deutschland Gmbh Noise reduction devices and noise reduction methods
JP2014137590A (ja) 2013-01-18 2014-07-28 Yoji Fukinuki 音楽コンテンツ配信方法
US9646605B2 (en) 2013-01-22 2017-05-09 Interactive Intelligence Group, Inc. False alarm reduction in speech recognition systems using contextual information
DE102013001219B4 (de) 2013-01-25 2019-08-29 Inodyn Newmedia Gmbh Verfahren und System zur Sprachaktivierung eines Software-Agenten aus einem Standby-Modus
US20140215332A1 (en) 2013-01-31 2014-07-31 Hewlett-Packard Development Company, Lp Virtual microphone selection corresponding to a set of audio source devices
TWI593294B (zh) 2013-02-07 2017-07-21 晨星半導體股份有限公司 收音系統與相關方法
US9818407B1 (en) 2013-02-07 2017-11-14 Amazon Technologies, Inc. Distributed endpointing for speech recognition
KR102516577B1 (ko) 2013-02-07 2023-04-03 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US9300266B2 (en) 2013-02-12 2016-03-29 Qualcomm Incorporated Speaker equalization for mobile devices
US9237384B2 (en) 2013-02-14 2016-01-12 Sonos, Inc. Automatic configuration of household playback devices
US9842489B2 (en) 2013-02-14 2017-12-12 Google Llc Waking other devices for additional data
US9172747B2 (en) 2013-02-25 2015-10-27 Artificial Solutions Iberia SL System and methods for virtual assistant networks
US9195432B2 (en) 2013-02-26 2015-11-24 Sonos, Inc. Pre-caching of audio content
BR112015020150B1 (pt) 2013-02-26 2021-08-17 Mediatek Inc. Aparelho para gerar um sinal de fala, e, método para gerar um sinal de fala
CN104010251B (zh) 2013-02-27 2018-06-19 晨星半导体股份有限公司 收音系统与相关方法
US10395651B2 (en) 2013-02-28 2019-08-27 Sony Corporation Device and method for activating with voice input
US9460715B2 (en) 2013-03-04 2016-10-04 Amazon Technologies, Inc. Identification using audio signatures and additional characteristics
US20140258292A1 (en) 2013-03-05 2014-09-11 Clip Interactive, Inc. Apparatus, system, and method for integrating content and content services
JP6429465B2 (ja) 2013-03-07 2018-11-28 株式会社半導体エネルギー研究所 装置及びその作製方法
US9349386B2 (en) 2013-03-07 2016-05-24 Analog Device Global System and method for processor wake-up based on sensor data
EP2952012B1 (en) 2013-03-07 2018-07-18 Apple Inc. Room and program responsive loudspeaker system
US9161126B2 (en) 2013-03-08 2015-10-13 Cirrus Logic, Inc. Systems and methods for protecting a speaker
CN104053088A (zh) 2013-03-11 2014-09-17 联想(北京)有限公司 一种麦克风阵列调整方法、麦克风阵列及电子设备
TWI533686B (zh) 2013-03-11 2016-05-11 緯創資通股份有限公司 虛擬頻道之管理方法、具有虛擬頻道之網路多媒體重現系統和電腦可讀取記錄媒體
US9763008B2 (en) 2013-03-11 2017-09-12 Apple Inc. Timbre constancy across a range of directivities for a loudspeaker
WO2014165032A1 (en) 2013-03-12 2014-10-09 Aawtend, Inc. Integrated sensor-array processor
KR20140111859A (ko) * 2013-03-12 2014-09-22 삼성전자주식회사 콘텐트 공유 방법 및 이를 위한 디바이스
US9173021B2 (en) 2013-03-12 2015-10-27 Google Technology Holdings LLC Method and device for adjusting an audio beam orientation based on device location
WO2014159581A1 (en) 2013-03-12 2014-10-02 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9357306B2 (en) 2013-03-12 2016-05-31 Nokia Technologies Oy Multichannel audio calibration method and apparatus
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
US9060052B2 (en) 2013-03-13 2015-06-16 Accusonus S.A. Single channel, binaural and multi-channel dereverberation
KR101571338B1 (ko) 2013-03-13 2015-11-24 삼성전자주식회사 복수의 재생 장치들이 스트리밍 컨텐트를 동기화하여 재생하는 방법 및 이를 위한 장치
KR102152754B1 (ko) 2013-03-14 2020-09-07 삼성전자주식회사 블루루스 디바이스에서 통신 연결 방법 및 그 장치
US20140274185A1 (en) * 2013-03-14 2014-09-18 Aliphcom Intelligence device connection for wireless media ecosystem
JP6013951B2 (ja) 2013-03-14 2016-10-25 本田技研工業株式会社 環境音検索装置、環境音検索方法
AU2014243797B2 (en) 2013-03-14 2016-05-19 Apple Inc. Adaptive room equalization using a speaker and a handheld listening device
US10133546B2 (en) * 2013-03-14 2018-11-20 Amazon Technologies, Inc. Providing content on multiple devices
US9854081B2 (en) * 2013-03-15 2017-12-26 Apple Inc. Volume control for mobile device using a wireless device
US9626436B2 (en) 2013-03-15 2017-04-18 Spotify Ab Systems, methods, and computer readable medium for generating playlists
US9201865B2 (en) 2013-03-15 2015-12-01 Bao Tran Automated assistance for user request that determines semantics by domain, task, and parameter
US20140278933A1 (en) 2013-03-15 2014-09-18 F. Gavin McMillan Methods and apparatus to measure audience engagement with media
EP2976897B8 (en) 2013-03-21 2020-07-01 Cerence Operating Company System and method for identifying suboptimal microphone performance
KR102233619B1 (ko) 2013-03-26 2021-03-30 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 발광 장치, 전자 기기, 및 조명 장치
CA2897539C (en) 2013-04-04 2016-05-17 James S. RAND Unified communications system and method
JP6300589B2 (ja) 2013-04-04 2018-03-28 株式会社半導体エネルギー研究所 半導体装置の作製方法
JP6198432B2 (ja) 2013-04-09 2017-09-20 小島プレス工業株式会社 音声認識制御装置
US20140310614A1 (en) 2013-04-15 2014-10-16 Chacha Search, Inc Method and system of increasing user interaction
US9501533B2 (en) 2013-04-16 2016-11-22 Sonos, Inc. Private queue for a media playback system
US9875494B2 (en) 2013-04-16 2018-01-23 Sri International Using intents to analyze and personalize a user's dialog experience with a virtual personal assistant
US9304736B1 (en) 2013-04-18 2016-04-05 Amazon Technologies, Inc. Voice controlled assistant with non-verbal code entry
USRE48569E1 (en) 2013-04-19 2021-05-25 Panasonic Intellectual Property Corporation Of America Control method for household electrical appliance, household electrical appliance control system, and gateway
US9936290B2 (en) 2013-05-03 2018-04-03 Qualcomm Incorporated Multi-channel echo cancellation and noise suppression
US9892729B2 (en) 2013-05-07 2018-02-13 Qualcomm Incorporated Method and apparatus for controlling voice activation
KR102230139B1 (ko) 2013-05-17 2021-03-18 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 조명 장치, 발광 장치, 및 전자 기기
CN105122353B (zh) 2013-05-20 2019-07-09 英特尔公司 用于语音识别的计算装置和用于计算装置上的语音识别的方法
US9472201B1 (en) 2013-05-22 2016-10-18 Google Inc. Speaker localization by means of tactile input
US20140358535A1 (en) 2013-05-28 2014-12-04 Samsung Electronics Co., Ltd. Method of executing voice recognition of electronic device and electronic device using the same
US9390708B1 (en) 2013-05-28 2016-07-12 Amazon Technologies, Inc. Low latency and memory efficient keywork spotting
EP4068695A1 (en) * 2013-05-29 2022-10-05 Sonos Inc. Playback queue control via a playlist on a mobile device
US9215545B2 (en) 2013-05-31 2015-12-15 Bose Corporation Sound stage controller for a near-field speaker-based audio system
US20140357248A1 (en) 2013-06-03 2014-12-04 Ford Global Technologies, Llc Apparatus and System for Interacting with a Vehicle and a Device in a Vehicle
US20140365225A1 (en) 2013-06-05 2014-12-11 DSP Group Ultra-low-power adaptive, user independent, voice triggering schemes
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9654073B2 (en) * 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN105284168B (zh) 2013-06-09 2019-06-14 苹果公司 蓝牙警示通知服务
US9787273B2 (en) * 2013-06-13 2017-10-10 Google Technology Holdings LLC Smart volume control of device audio output based on received audio input
US20140368737A1 (en) 2013-06-17 2014-12-18 Spotify Ab System and method for playing media during navigation between media streams
US8953778B2 (en) 2013-06-17 2015-02-10 Avaya Inc. Real-time intelligent mute interactive features
US9494683B1 (en) 2013-06-18 2016-11-15 Amazon Technologies, Inc. Audio-based gesture detection
US9324322B1 (en) 2013-06-18 2016-04-26 Amazon Technologies, Inc. Automatic volume attenuation for speech enabled devices
US9311298B2 (en) 2013-06-21 2016-04-12 Microsoft Technology Licensing, Llc Building conversational understanding systems using a toolset
US9697831B2 (en) 2013-06-26 2017-07-04 Cirrus Logic, Inc. Speech recognition
US9747899B2 (en) 2013-06-27 2017-08-29 Amazon Technologies, Inc. Detecting self-generated wake expressions
US9640179B1 (en) 2013-06-27 2017-05-02 Amazon Technologies, Inc. Tailoring beamforming techniques to environments
US10255930B2 (en) 2013-06-28 2019-04-09 Harman International Industries, Incorporated Wireless control of linked devices
US9298415B2 (en) 2013-07-09 2016-03-29 Sonos, Inc. Systems and methods to provide play/pause content
US20150019201A1 (en) 2013-07-09 2015-01-15 Stanley F. Schoenbach Real-time interpreting systems and methods
US9293480B2 (en) 2013-07-10 2016-03-22 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device and display device including the semiconductor device
US9396727B2 (en) 2013-07-10 2016-07-19 GM Global Technology Operations LLC Systems and methods for spoken dialog service arbitration
CN110096253B (zh) 2013-07-11 2022-08-30 英特尔公司 利用相同的音频输入的设备唤醒和说话者验证
DE102014109122A1 (de) 2013-07-12 2015-01-15 Gm Global Technology Operations, Llc Systeme und Verfahren für ergebnisbezogene Arbitrierung in Sprachdialogsystemen
WO2015009748A1 (en) 2013-07-15 2015-01-22 Dts, Inc. Spatial calibration of surround sound systems including listener position estimation
US9445196B2 (en) 2013-07-24 2016-09-13 Mh Acoustics Llc Inter-channel coherence reduction for stereophonic and multichannel acoustic echo cancellation
US9772994B2 (en) 2013-07-25 2017-09-26 Intel Corporation Self-learning statistical natural language processing for automatic production of virtual personal assistants
US9431014B2 (en) 2013-07-25 2016-08-30 Haier Us Appliance Solutions, Inc. Intelligent placement of appliance response to voice command
US9666187B1 (en) 2013-07-25 2017-05-30 Google Inc. Model for enabling service providers to address voice-activated commands
WO2015017303A1 (en) 2013-07-31 2015-02-05 Motorola Mobility Llc Method and apparatus for adjusting voice recognition processing based on noise characteristics
US9418651B2 (en) 2013-07-31 2016-08-16 Google Technology Holdings LLC Method and apparatus for mitigating false accepts of trigger phrases
US9548047B2 (en) 2013-07-31 2017-01-17 Google Technology Holdings LLC Method and apparatus for evaluating trigger phrase enrollment
US10186262B2 (en) 2013-07-31 2019-01-22 Microsoft Technology Licensing, Llc System with multiple simultaneous speech recognizers
US10873997B2 (en) 2013-08-01 2020-12-22 Fong-Min Chang Voice controlled artificial intelligent smart illumination device
US9565497B2 (en) 2013-08-01 2017-02-07 Caavo Inc. Enhancing audio using a mobile device
DE102013012811B4 (de) 2013-08-01 2024-02-22 Wolfgang Klippel Anordnung und Verfahren zur Identifikation und Korrektur der nichtlinearen Eigenschaften elektromagnetischer Wandler
WO2015026933A2 (en) 2013-08-21 2015-02-26 Honeywell International Inc. Devices and methods for interacting with an hvac controller
EP2862164B1 (en) 2013-08-23 2017-05-31 Nuance Communications, Inc. Multiple pass automatic speech recognition
US9190043B2 (en) 2013-08-27 2015-11-17 Bose Corporation Assisting conversation in noisy environments
TWI520127B (zh) 2013-08-28 2016-02-01 晨星半導體股份有限公司 應用於音訊裝置的控制器與相關的操作方法
US9514747B1 (en) 2013-08-28 2016-12-06 Amazon Technologies, Inc. Reducing speech recognition latency
WO2015027480A1 (zh) * 2013-08-30 2015-03-05 华为技术有限公司 一种多终端协同播放多媒体文件的方法和相关装置及系统
WO2015037396A1 (ja) 2013-09-11 2015-03-19 株式会社デンソー 音声出力制御装置、プログラムおよび記録媒体
US9672812B1 (en) 2013-09-18 2017-06-06 Amazon Technologies, Inc. Qualifying trigger expressions in speech-based systems
US9516081B2 (en) 2013-09-20 2016-12-06 Amazon Technologies, Inc. Reduced latency electronic content system
US9848260B2 (en) 2013-09-24 2017-12-19 Nuance Communications, Inc. Wearable communication enhancement device
US9443527B1 (en) 2013-09-27 2016-09-13 Amazon Technologies, Inc. Speech recognition capability generation and control
US9355555B2 (en) 2013-09-27 2016-05-31 Sonos, Inc. System and method for issuing commands in a media playback system
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
CN103546616A (zh) * 2013-09-30 2014-01-29 深圳市同洲电子股份有限公司 一种调节音量的方法及装置
US9122451B2 (en) * 2013-09-30 2015-09-01 Sonos, Inc. Capacitive proximity sensor configuration including a speaker grille
KR102114219B1 (ko) 2013-10-10 2020-05-25 삼성전자주식회사 오디오 시스템 및 오디오 출력 방법, 그리고 스피커 장치
US9245527B2 (en) 2013-10-11 2016-01-26 Apple Inc. Speech recognition wake-up of a handheld portable electronic device
US9300268B2 (en) 2013-10-18 2016-03-29 Apple Inc. Content aware audio ducking
US9633671B2 (en) 2013-10-18 2017-04-25 Apple Inc. Voice quality enhancement techniques, speech recognition techniques, and related systems
TWI642170B (zh) 2013-10-18 2018-11-21 半導體能源研究所股份有限公司 顯示裝置及電子裝置
US9818061B1 (en) 2013-10-22 2017-11-14 Lumin, LLC Collaboration of audio sensors for geo-location and continuous tracking of multiple users in a device-independent artificial intelligence (AI) environment
US10229256B2 (en) 2013-10-25 2019-03-12 Intel Corporation Techniques for preventing voice replay attacks
EP2869599B1 (en) 2013-11-05 2020-10-21 Oticon A/s A binaural hearing assistance system comprising a database of head related transfer functions
JP2015090570A (ja) 2013-11-06 2015-05-11 ソニー株式会社 情報処理装置および制御方法
US10311482B2 (en) * 2013-11-11 2019-06-04 At&T Intellectual Property I, Lp Method and apparatus for adjusting a digital assistant persona
US8775191B1 (en) 2013-11-13 2014-07-08 Google Inc. Efficient utterance-specific endpointer triggering for always-on hotwording
JP6236303B2 (ja) 2013-11-26 2017-11-22 株式会社デンソーアイティーラボラトリ 制御装置、制御方法およびプログラム
US9373321B2 (en) 2013-12-02 2016-06-21 Cypress Semiconductor Corporation Generation of wake-up words
US9704478B1 (en) 2013-12-02 2017-07-11 Amazon Technologies, Inc. Audio output masking for improved automatic speech recognition
US9698999B2 (en) 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device
CN104143326B (zh) 2013-12-03 2016-11-02 腾讯科技(深圳)有限公司 一种语音命令识别方法和装置
US8719039B1 (en) 2013-12-05 2014-05-06 Google Inc. Promoting voice actions to hotwords
US10720153B2 (en) 2013-12-13 2020-07-21 Harman International Industries, Incorporated Name-sensitive listening device
US10055190B2 (en) 2013-12-16 2018-08-21 Amazon Technologies, Inc. Attribute-based audio channel arbitration
US9378651B2 (en) 2013-12-17 2016-06-28 Google Inc. Audio book smart pause
US10224056B1 (en) 2013-12-17 2019-03-05 Amazon Technologies, Inc. Contingent device actions during loss of network connectivity
US9721570B1 (en) 2013-12-17 2017-08-01 Amazon Technologies, Inc. Outcome-oriented dialogs on a speech recognition platform
GB2523984B (en) 2013-12-18 2017-07-26 Cirrus Logic Int Semiconductor Ltd Processing received speech data
US9099974B2 (en) * 2013-12-20 2015-08-04 Vmware, Inc. Volume redirection
US20150179181A1 (en) 2013-12-20 2015-06-25 Microsoft Corporation Adapting audio based upon detected environmental accoustics
US9899021B1 (en) 2013-12-20 2018-02-20 Amazon Technologies, Inc. Stochastic modeling of user interactions with a detection system
CN105723451B (zh) 2013-12-20 2020-02-28 英特尔公司 从低功率始终侦听模式到高功率语音识别模式的转换
EP2890160B1 (en) 2013-12-24 2019-08-14 Nxp B.V. Loudspeaker controller
US9301077B2 (en) 2014-01-02 2016-03-29 Harman International Industries, Incorporated Context-based audio tuning
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
US9443516B2 (en) 2014-01-09 2016-09-13 Honeywell International Inc. Far-field speech recognition systems and methods
EP3092824B1 (en) 2014-01-10 2017-11-01 Dolby Laboratories Licensing Corporation Calibration of virtual height speakers using programmable portable devices
US9300647B2 (en) * 2014-01-15 2016-03-29 Sonos, Inc. Software application and zones
US9288597B2 (en) 2014-01-20 2016-03-15 Sony Corporation Distributed wireless speaker system with automatic configuration determination when new speakers are added
WO2015112137A1 (en) * 2014-01-22 2015-07-30 Pearl Capital Developments Llc Coordinated hand-off of audio data transmission
US9356882B2 (en) 2014-02-04 2016-05-31 Printeron Inc. Streamlined system for the transmission of network resource data
US9443876B2 (en) 2014-02-05 2016-09-13 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic device including the semiconductor device, the display device, and the display module
WO2015118426A2 (en) 2014-02-06 2015-08-13 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, lighting device, and electronic appliance
US9652532B2 (en) 2014-02-06 2017-05-16 Sr Homedics, Llc Methods for operating audio speaker systems
TWI658597B (zh) 2014-02-07 2019-05-01 日商半導體能源研究所股份有限公司 半導體裝置
US9318112B2 (en) 2014-02-14 2016-04-19 Google Inc. Recognizing speech in the presence of additional audio
US9226072B2 (en) * 2014-02-21 2015-12-29 Sonos, Inc. Media content based on playback zone awareness
FR3018024B1 (fr) 2014-02-26 2016-03-18 Devialet Dispositif de commande d'un haut-parleur
FR3018025B1 (fr) 2014-02-26 2016-03-18 Devialet Dispositif de commande d'un haut-parleur
JP6289936B2 (ja) 2014-02-26 2018-03-07 株式会社東芝 音源方向推定装置、音源方向推定方法およびプログラム
US9408008B2 (en) * 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
EP3115905A4 (en) 2014-03-03 2017-10-25 Sony Corporation Information processing apparatus, information processing method, and program
US10015593B2 (en) 2014-03-03 2018-07-03 University Of Utah Digital signal processor for audio extensions and correction of nonlinear distortions in loudspeakers
US9489171B2 (en) 2014-03-04 2016-11-08 Microsoft Technology Licensing, Llc Voice-command suggestions based on user identity
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
US10599287B2 (en) 2014-03-11 2020-03-24 Sonos, Inc. Group volume control
US9640669B2 (en) 2014-03-13 2017-05-02 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic appliance including the semiconductor device, the display device, and the display module
US9264839B2 (en) 2014-03-17 2016-02-16 Sonos, Inc. Playback device configuration based on proximity detection
US9226062B2 (en) 2014-03-18 2015-12-29 Cisco Technology, Inc. Techniques to mitigate the effect of blocked sound at microphone arrays in a telepresence device
US10514747B2 (en) 2014-03-24 2019-12-24 Silicon Laboratories Inc. Low-power communication apparatus with wakeup detection and associated methods
US9654076B2 (en) 2014-03-25 2017-05-16 Apple Inc. Metadata for ducking control
US9648564B1 (en) 2014-03-26 2017-05-09 Amazon Technologies, Inc. Wake-up management for mobile devices
US9916839B1 (en) 2014-03-27 2018-03-13 Amazon Technologies, Inc. Shared audio functionality based on device grouping
US9431021B1 (en) 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
KR102146462B1 (ko) 2014-03-31 2020-08-20 삼성전자주식회사 음성 인식 시스템 및 방법
US9547468B2 (en) 2014-03-31 2017-01-17 Microsoft Technology Licensing, Llc Client-side personal voice web navigation
US8874448B1 (en) * 2014-04-01 2014-10-28 Google Inc. Attention-based dynamic audio level adjustment
US9640183B2 (en) 2014-04-07 2017-05-02 Samsung Electronics Co., Ltd. Speech recognition using electronic device and server
US9560437B2 (en) 2014-04-08 2017-01-31 Doppler Labs, Inc. Time heuristic audio control
US9510094B2 (en) 2014-04-09 2016-11-29 Apple Inc. Noise estimation in a mobile device using an external acoustic microphone signal
US9542948B2 (en) * 2014-04-09 2017-01-10 Google Inc. Text-dependent speaker identification
DE102014005381B3 (de) 2014-04-11 2014-12-11 Wolfgang Klippel Anordnung und Verfahren zur Identifikation und Kompensation nichtlinearer Partialschwingungen elektromechanischer Wandler
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US20150334471A1 (en) 2014-05-15 2015-11-19 Echostar Technologies L.L.C. Multiple simultaneous audio video data decoding
WO2015178950A1 (en) 2014-05-19 2015-11-26 Tiskerling Dynamics Llc Directivity optimized sound reproduction
US9860289B2 (en) 2014-05-23 2018-01-02 Radeeus, Inc. Multimedia digital content retrieval, matching, and syncing systems and methods of using the same
WO2015178562A1 (en) 2014-05-23 2015-11-26 Samsung Electronics Co., Ltd. Method and apparatus for providing notification
US9900723B1 (en) 2014-05-28 2018-02-20 Apple Inc. Multi-channel loudspeaker matching using variable directivity
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
TWI729649B (zh) 2014-05-30 2021-06-01 日商半導體能源研究所股份有限公司 發光元件,發光裝置,電子裝置以及照明裝置
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US10318016B2 (en) 2014-06-03 2019-06-11 Harman International Industries, Incorporated Hands free device with directional interface
US20150355818A1 (en) 2014-06-04 2015-12-10 Sonos, Inc. Continuous Playback Queue
US9720642B2 (en) 2014-06-04 2017-08-01 Sonos, Inc. Prioritizing media content requests
US10624612B2 (en) 2014-06-05 2020-04-21 Chikayoshi Sumi Beamforming method, measurement and imaging instruments, and communication instruments
US9615170B2 (en) 2014-06-09 2017-04-04 Harman International Industries, Inc. Approach for partially preserving music in the presence of intelligible speech
CN104092936B (zh) 2014-06-12 2017-01-04 小米科技有限责任公司 自动对焦方法及装置
US9767159B2 (en) * 2014-06-13 2017-09-19 Google Inc. Ranking search results
US20150363061A1 (en) * 2014-06-13 2015-12-17 Autonomic Controls, Inc. System and method for providing related digital content
US9766702B2 (en) 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
US9520139B2 (en) 2014-06-19 2016-12-13 Yang Gao Post tone suppression for speech enhancement
US9589556B2 (en) 2014-06-19 2017-03-07 Yang Gao Energy adjustment of acoustic echo replica signal for speech enhancement
US20150373100A1 (en) 2014-06-19 2015-12-24 Pavel KRAVETS Context sharing between different clients
US9697828B1 (en) 2014-06-20 2017-07-04 Amazon Technologies, Inc. Keyword detection modeling using contextual and environmental information
US10152987B2 (en) 2014-06-23 2018-12-11 Google Llc Remote invocation of mobile device actions
JP2016009193A (ja) 2014-06-23 2016-01-18 ハーマン インターナショナル インダストリーズ インコーポレイテッド ユーザ適合音声認識
US9632748B2 (en) 2014-06-24 2017-04-25 Google Inc. Device designation for audio input monitoring
US9639854B2 (en) 2014-06-26 2017-05-02 Nuance Communications, Inc. Voice-controlled information exchange platform, such as for providing information to supplement advertising
US9368105B1 (en) 2014-06-26 2016-06-14 Amazon Technologies, Inc. Preventing false wake word detections with a voice-controlled device
US9335819B1 (en) 2014-06-26 2016-05-10 Audible, Inc. Automatic creation of sleep bookmarks in content items
US9691379B1 (en) 2014-06-26 2017-06-27 Amazon Technologies, Inc. Selecting from multiple content sources
US9338493B2 (en) * 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9398392B2 (en) 2014-06-30 2016-07-19 Microsoft Technology Licensing, Llc Audio calibration and adjustment
US9779307B2 (en) 2014-07-07 2017-10-03 Google Inc. Method and system for non-causal zone search in video monitoring
US11330100B2 (en) 2014-07-09 2022-05-10 Ooma, Inc. Server based intelligent personal assistant services
US9374634B2 (en) 2014-07-10 2016-06-21 Nxp B.V. System for controlling displacement of a loudspeaker
US9467737B2 (en) * 2014-07-14 2016-10-11 Sonos, Inc. Zone group control
JP2016024212A (ja) 2014-07-16 2016-02-08 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US9671997B2 (en) 2014-07-23 2017-06-06 Sonos, Inc. Zone grouping
US10209947B2 (en) 2014-07-23 2019-02-19 Sonos, Inc. Device grouping
US9263042B1 (en) 2014-07-25 2016-02-16 Google Inc. Providing pre-computed hotword models
KR20160017253A (ko) 2014-08-01 2016-02-16 삼성전자주식회사 디스플레이 구동용 집적 회로 칩
US9874997B2 (en) 2014-08-08 2018-01-23 Sonos, Inc. Social playback queues
US9548066B2 (en) 2014-08-11 2017-01-17 Amazon Technologies, Inc. Voice application architecture
US9769552B2 (en) 2014-08-19 2017-09-19 Apple Inc. Method and apparatus for estimating talker distance
US20160055847A1 (en) 2014-08-19 2016-02-25 Nuance Communications, Inc. System and method for speech validation
JP6118838B2 (ja) 2014-08-21 2017-04-19 本田技研工業株式会社 情報処理装置、情報処理システム、情報処理方法、及び情報処理プログラム
CN106797512B (zh) 2014-08-28 2019-10-25 美商楼氏电子有限公司 多源噪声抑制的方法、系统和非瞬时计算机可读存储介质
KR20160026317A (ko) 2014-08-29 2016-03-09 삼성전자주식회사 음성 녹음 방법 및 장치
US9560050B2 (en) 2014-09-08 2017-01-31 At&T Intellectual Property I, L.P System and method to share a resource or a capability of a device
US9910634B2 (en) 2014-09-09 2018-03-06 Sonos, Inc. Microphone calibration
US9354687B2 (en) 2014-09-11 2016-05-31 Nuance Communications, Inc. Methods and apparatus for unsupervised wakeup with time-correlated acoustic events
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9747011B2 (en) 2014-09-16 2017-08-29 Google Inc. Continuation of playback of media content by different output devices
US9548053B1 (en) 2014-09-19 2017-01-17 Amazon Technologies, Inc. Audible command filtering
US10645130B2 (en) 2014-09-24 2020-05-05 Sonos, Inc. Playback updates
US9641919B1 (en) 2014-09-30 2017-05-02 Amazon Technologies, Inc. Audio assemblies for electronic devices
JP6624368B2 (ja) 2014-09-30 2019-12-25 パナソニックIpマネジメント株式会社 接客モニタリングシステム及び接客モニタリング方法
GB2525051B (en) 2014-09-30 2016-04-13 Imagination Tech Ltd Detection of acoustic echo cancellation
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9681228B2 (en) 2014-09-30 2017-06-13 Apple Inc. Capacitive position sensing for transducers
WO2016054230A1 (en) 2014-10-01 2016-04-07 XBrain, Inc. Voice and connection platform
US10817672B2 (en) 2014-10-01 2020-10-27 Nuance Communications, Inc. Natural language understanding (NLU) processing based on user-specified interests
US9318107B1 (en) 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
KR102287943B1 (ko) * 2014-10-14 2021-08-09 삼성전자주식회사 전자 기기, 상기 전자 기기의 음량 조절 방법 및 상기 전자 기기의 제어 방법
EP3010251B1 (en) 2014-10-15 2019-11-13 Nxp B.V. Audio system
US20160162469A1 (en) 2014-10-23 2016-06-09 Audience, Inc. Dynamic Local ASR Vocabulary
US9576575B2 (en) * 2014-10-27 2017-02-21 Toyota Motor Engineering & Manufacturing North America, Inc. Providing voice recognition shortcuts based on user verbal input
US9560409B2 (en) 2014-10-30 2017-01-31 Verizon Patent And Licensing Inc. Media service personalization systems and methods
US9530408B2 (en) 2014-10-31 2016-12-27 At&T Intellectual Property I, L.P. Acoustic environment recognizer for optimal speech processing
US10368121B2 (en) 2014-11-07 2019-07-30 Roku, Inc. System and method for collecting data
US9699550B2 (en) 2014-11-12 2017-07-04 Qualcomm Incorporated Reduced microphone power-up latency
US20160134982A1 (en) 2014-11-12 2016-05-12 Harman International Industries, Inc. System and method for estimating the displacement of a speaker cone
JP2016095383A (ja) 2014-11-14 2016-05-26 株式会社ATR−Trek 音声認識クライアント装置及びサーバ型音声認識装置
US10116748B2 (en) 2014-11-20 2018-10-30 Microsoft Technology Licensing, Llc Vehicle-based multi-modal interface
US10431214B2 (en) 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
KR102299330B1 (ko) 2014-11-26 2021-09-08 삼성전자주식회사 음성 인식 방법 및 그 전자 장치
CN107211218B (zh) 2014-11-28 2021-05-18 奥德拉声学公司 高位移声学换能器系统
US10192549B2 (en) 2014-11-28 2019-01-29 Microsoft Technology Licensing, Llc Extending digital personal assistant action providers
US9812126B2 (en) 2014-11-28 2017-11-07 Microsoft Technology Licensing, Llc Device arbitration for listening devices
US10126406B2 (en) 2014-12-02 2018-11-13 Qualcomm Incorporated Method and apparatus for performing ultrasonic presence detection
US9775113B2 (en) 2014-12-11 2017-09-26 Mediatek Inc. Voice wakeup detecting device with digital microphone and associated method
US9779725B2 (en) 2014-12-11 2017-10-03 Mediatek Inc. Voice wakeup detecting device and method
EP3230824A4 (en) 2014-12-11 2018-08-08 Microsoft Technology Licensing, LLC Virtual assistant system to enable actionable messaging
CN104538030A (zh) 2014-12-11 2015-04-22 科大讯飞股份有限公司 一种可以通过语音控制家电的控制系统与方法
US9813812B2 (en) 2014-12-12 2017-11-07 Analog Devices Global Method of controlling diaphragm excursion of electrodynamic loudspeakers
US9552816B2 (en) 2014-12-19 2017-01-24 Amazon Technologies, Inc. Application focus in speech-based systems
US9560441B1 (en) 2014-12-24 2017-01-31 Amazon Technologies, Inc. Determining speaker direction using a spherical microphone array
CN104575504A (zh) 2014-12-24 2015-04-29 上海师范大学 采用声纹和语音识别进行个性化电视语音唤醒的方法
CN104635539A (zh) 2014-12-26 2015-05-20 东莞市掌商信息科技有限公司 一种智能硬件远程语音安全控制方法及其系统
DE112016000287T5 (de) 2015-01-07 2017-10-05 Knowles Electronics, Llc Verwendung von digitalen Mikrofonen zur Niedrigleistung-Schlüsselworterkennung und Rauschunterdrückung
US10572810B2 (en) 2015-01-07 2020-02-25 Microsoft Technology Licensing, Llc Managing user interaction for input understanding determinations
US9934406B2 (en) 2015-01-08 2018-04-03 Microsoft Technology Licensing, Llc Protecting private information in input understanding system
US9584915B2 (en) 2015-01-19 2017-02-28 Microsoft Technology Licensing, Llc Spatial audio with remote speakers
US20160210110A1 (en) 2015-01-21 2016-07-21 Ford Global Technologies, Llc Audio synchronization between vehicles and mobile devices
US9947313B2 (en) * 2015-01-26 2018-04-17 William Drewes Method for substantial ongoing cumulative voice recognition error reduction
KR102351366B1 (ko) 2015-01-26 2022-01-14 삼성전자주식회사 음성 인식 방법 및 장치
CN104572009B (zh) 2015-01-28 2018-01-09 合肥联宝信息技术有限公司 一种自适应外界环境的音频控制方法及装置
US9633661B1 (en) 2015-02-02 2017-04-25 Amazon Technologies, Inc. Speech-responsive portable speaker
GB201501791D0 (en) 2015-02-03 2015-03-18 Microsoft Technology Licensing Llc Non-linear echo path detection
US20160232451A1 (en) 2015-02-09 2016-08-11 Velocee Ltd. Systems and methods for managing audio content
US9521496B2 (en) 2015-02-12 2016-12-13 Harman International Industries, Inc. Media content playback system and method
US10121472B2 (en) 2015-02-13 2018-11-06 Knowles Electronics, Llc Audio buffer catch-up apparatus and method with two microphones
US20160239255A1 (en) 2015-02-16 2016-08-18 Harman International Industries, Inc. Mobile interface for loudspeaker optimization
US20160253050A1 (en) 2015-02-26 2016-09-01 Fingertips Lab, Inc. System and method for audio and tactile based browsing
JPWO2016136062A1 (ja) 2015-02-27 2017-12-07 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10762894B2 (en) 2015-03-27 2020-09-01 Google Llc Convolutional neural networks
US9697826B2 (en) 2015-03-27 2017-07-04 Google Inc. Processing multi-channel audio waveforms
US10192546B1 (en) 2015-03-30 2019-01-29 Amazon Technologies, Inc. Pre-wakeword speech processing
US10034109B2 (en) 2015-04-09 2018-07-24 Audera Acoustics Inc. Acoustic transducer systems with position sensing
US9678707B2 (en) 2015-04-10 2017-06-13 Sonos, Inc. Identification of audio content facilitated by playback device
US10198242B2 (en) 2015-04-14 2019-02-05 Motorola Solutions, Inc. Method and apparatus for a volume of a device
US10178474B2 (en) 2015-04-21 2019-01-08 Google Llc Sound signature database for initialization of noise reduction in recordings
US10079012B2 (en) 2015-04-21 2018-09-18 Google Llc Customizing speech-recognition dictionaries in a smart-home environment
US9472196B1 (en) 2015-04-22 2016-10-18 Google Inc. Developer voice actions system
CN104853405B (zh) 2015-05-12 2018-11-30 浙江生辉照明有限公司 智能联网方法及智能设备
KR102623039B1 (ko) 2015-05-15 2024-01-08 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 발광 장치, 전자 기기 및 조명 장치
EP3096277A1 (en) 2015-05-19 2016-11-23 ResearchGate GmbH Enhanced online user-interaction tracking
US10070237B2 (en) 2015-05-21 2018-09-04 Analog Devices, Inc. Optical and capacitive sensing of electroacoustic transducers
TWI757234B (zh) 2015-05-21 2022-03-11 日商半導體能源研究所股份有限公司 發光元件、顯示裝置、電子裝置、及照明裝置
CN110571341B (zh) 2015-05-21 2022-04-12 株式会社半导体能源研究所 发光装置、电子设备及照明装置
US9837547B2 (en) 2015-05-22 2017-12-05 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device comprising oxide conductor and display device including the semiconductor device
JP2016218852A (ja) 2015-05-22 2016-12-22 ソニー株式会社 情報処理装置および情報処理方法、並びにプログラム
EP3099047A1 (en) 2015-05-28 2016-11-30 Nxp B.V. Echo controller
US9706320B2 (en) 2015-05-29 2017-07-11 Sound United, LLC System and method for providing user location-based multi-zone media
US10657949B2 (en) 2015-05-29 2020-05-19 Sound United, LLC System and method for integrating a home media system and other home systems
US9734822B1 (en) 2015-06-01 2017-08-15 Amazon Technologies, Inc. Feedback based beamformed signal selection
US9864571B2 (en) 2015-06-04 2018-01-09 Sonos, Inc. Dynamic bonding of playback devices
US9672821B2 (en) 2015-06-05 2017-06-06 Apple Inc. Robust speech recognition in the presence of echo and noise using multiple signals for discrimination
US9736578B2 (en) 2015-06-07 2017-08-15 Apple Inc. Microphone-based orientation sensors and related techniques
US10249205B2 (en) 2015-06-08 2019-04-02 Novel Effect, Inc. System and method for integrating special effects with a text source
KR102444075B1 (ko) 2015-06-09 2022-09-16 삼성전자주식회사 전자 장치, 주변 기기 및 그 제어 방법
US10248376B2 (en) 2015-06-11 2019-04-02 Sonos, Inc. Multiple groupings in a playback system
WO2016203350A1 (en) 2015-06-17 2016-12-22 Semiconductor Energy Laboratory Co., Ltd. Iridium complex, light-emitting element, display device, electronic device, and lighting device
US20160373909A1 (en) 2015-06-17 2016-12-22 Hive Life, LLC Wireless audio, security communication and home automation
JP6739907B2 (ja) 2015-06-18 2020-08-12 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 機器特定方法、機器特定装置及びプログラム
US10025447B1 (en) 2015-06-19 2018-07-17 Amazon Technologies, Inc. Multi-device user interface
US9554210B1 (en) 2015-06-25 2017-01-24 Amazon Technologies, Inc. Multichannel acoustic echo cancellation with unique individual channel estimations
KR20170001173A (ko) 2015-06-25 2017-01-04 엘지전자 주식회사 와치 타입 이동 단말기 및 그의 동작 방법
KR102317526B1 (ko) 2015-06-25 2021-10-26 엘지전자 주식회사 헤드셋 및 그 제어 방법
US9472203B1 (en) 2015-06-29 2016-10-18 Amazon Technologies, Inc. Clock synchronization for multichannel system
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
CA2990888A1 (en) 2015-06-30 2017-01-05 Fraunhofer-Gesellschaft Zur Foerderung Der Angewandten Forschung E.V. Method and device for generating a database
KR20240035638A (ko) 2015-07-08 2024-03-15 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 표시 장치, 전자 장치, 및 조명 장치
US10304440B1 (en) 2015-07-10 2019-05-28 Amazon Technologies, Inc. Keyword spotting using multi-task configuration
US9686625B2 (en) 2015-07-21 2017-06-20 Disney Enterprises, Inc. Systems and methods for delivery of personalized audio
WO2017013526A1 (en) 2015-07-21 2017-01-26 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, display device, electronic device, and lighting device
US9769563B2 (en) 2015-07-22 2017-09-19 Harman International Industries, Incorporated Audio enhancement via opportunistic use of microphones
CN111129325B (zh) 2015-07-23 2023-06-09 株式会社半导体能源研究所 发光元件、显示装置、电子装置及照明装置
US20170034263A1 (en) 2015-07-30 2017-02-02 Amp Me Inc. Synchronized Playback of Streamed Audio Content by Multiple Internet-Capable Portable Devices
US10529318B2 (en) 2015-07-31 2020-01-07 International Business Machines Corporation Implementing a classification model for recognition processing
US9691361B2 (en) 2015-08-03 2017-06-27 International Business Machines Corporation Adjusting presentation of content on a display
KR102402512B1 (ko) * 2015-08-04 2022-05-27 삼성전자주식회사 외부장치의 음량을 조정하는 전자장치 및 방법
CN105187907A (zh) * 2015-08-05 2015-12-23 四川长虹电器股份有限公司 智能电视音量控制系统及控制方法
US9913056B2 (en) 2015-08-06 2018-03-06 Dolby Laboratories Licensing Corporation System and method to enhance speakers connected to devices with microphones
US10333904B2 (en) 2015-08-08 2019-06-25 Peter J. Tormey Voice access and control
KR102386854B1 (ko) 2015-08-20 2022-04-13 삼성전자주식회사 통합 모델 기반의 음성 인식 장치 및 방법
US10270041B2 (en) 2015-08-28 2019-04-23 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
WO2017039632A1 (en) 2015-08-31 2017-03-09 Nunntawi Dynamics Llc Passive self-localization of microphone arrays
US10031719B2 (en) * 2015-09-02 2018-07-24 Harman International Industries, Incorporated Audio system with multi-screen application
US10339917B2 (en) 2015-09-03 2019-07-02 Google Llc Enhanced speech endpointing
KR102417682B1 (ko) 2015-09-09 2022-07-07 삼성전자주식회사 음성 인식을 이용한 닉네임 관리 장치 및 방법
US10026399B2 (en) 2015-09-11 2018-07-17 Amazon Technologies, Inc. Arbitration between voice-enabled devices
KR20170031392A (ko) 2015-09-11 2017-03-21 삼성전자주식회사 전자 장치, 음향 시스템 및 오디오 출력 방법
CN105206281B (zh) 2015-09-14 2019-02-15 胡旻波 基于分布式麦克风阵列网络的语音增强方法
KR20170032096A (ko) 2015-09-14 2017-03-22 삼성전자주식회사 전자장치, 전자장치의 구동방법, 음성인식장치, 음성인식장치의 구동 방법 및 컴퓨터 판독가능 기록매체
CN105204357B (zh) 2015-09-18 2018-02-06 小米科技有限责任公司 智能家居设备的情景模式调整方法及装置
US10706873B2 (en) 2015-09-18 2020-07-07 Sri International Real-time speaker state analytics platform
US10289734B2 (en) 2015-09-18 2019-05-14 Samsung Electronics Co., Ltd. Entity-type search system
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
KR102446392B1 (ko) 2015-09-23 2022-09-23 삼성전자주식회사 음성 인식이 가능한 전자 장치 및 방법
KR102420450B1 (ko) 2015-09-23 2022-07-14 삼성전자주식회사 음성인식장치, 음성인식방법 및 컴퓨터 판독가능 기록매체
US9936156B2 (en) 2015-09-24 2018-04-03 Samantha WESTERN Volume adjusting apparatus and method
US10229700B2 (en) 2015-09-24 2019-03-12 Google Llc Voice activity detection
US10186276B2 (en) 2015-09-25 2019-01-22 Qualcomm Incorporated Adaptive noise suppression for super wideband music
CN105162886B (zh) 2015-09-25 2019-04-12 北京奇艺世纪科技有限公司 一种声音控制方法及装置
US9996316B2 (en) 2015-09-28 2018-06-12 Amazon Technologies, Inc. Mediation of wakeword response for multiple devices
EP3357252B1 (en) 2015-09-28 2023-09-06 Google LLC Time-synchronized, multizone media streaming
JP6536320B2 (ja) 2015-09-28 2019-07-03 富士通株式会社 音声信号処理装置、音声信号処理方法及びプログラム
US10241754B1 (en) 2015-09-29 2019-03-26 Amazon Technologies, Inc. Systems and methods for providing supplemental information with a response to a command
KR20170038681A (ko) 2015-09-30 2017-04-07 가부시키가이샤 한도오따이 에네루기 켄큐쇼 발광 소자, 표시 장치, 전자 기기, 및 조명 장치
CN111341927B (zh) 2015-09-30 2023-06-09 株式会社半导体能源研究所 发光元件、显示装置、电子设备及照明装置
US20170092278A1 (en) 2015-09-30 2017-03-30 Apple Inc. Speaker recognition
US9978366B2 (en) 2015-10-09 2018-05-22 Xappmedia, Inc. Event-based speech interactive media player
KR102429260B1 (ko) 2015-10-12 2022-08-05 삼성전자주식회사 음성 에이전트 기반의 제어 명령 처리 장치 및 방법과, 에이전트 장치
US9754580B2 (en) 2015-10-12 2017-09-05 Technologies For Voice Interface System and method for extracting and using prosody features
CN107925818B (zh) 2015-10-15 2020-10-16 华为技术有限公司 用于声音处理节点装置的声音处理节点
US9928840B2 (en) 2015-10-16 2018-03-27 Google Llc Hotword recognition
US9747926B2 (en) 2015-10-16 2017-08-29 Google Inc. Hotword recognition
JP6463710B2 (ja) 2015-10-16 2019-02-06 グーグル エルエルシー ホットワード認識
US10453450B2 (en) 2015-10-20 2019-10-22 Bragi GmbH Wearable earpiece voice command control system and method
KR102444061B1 (ko) 2015-11-02 2022-09-16 삼성전자주식회사 음성 인식이 가능한 전자 장치 및 방법
CN105427861B (zh) 2015-11-03 2019-02-15 胡旻波 智能家居协同麦克风语音控制的系统及其控制方法
US9691378B1 (en) 2015-11-05 2017-06-27 Amazon Technologies, Inc. Methods and devices for selectively ignoring captured audio data
US9653075B1 (en) 2015-11-06 2017-05-16 Google Inc. Voice commands across devices
US10863267B2 (en) 2015-11-10 2020-12-08 Savant Systems, Inc. Volume control for audio/video devices
US9990209B2 (en) 2015-11-12 2018-06-05 Microsoft Technology Licensing, Llc Digital assistance device for facilitating multi-stage setup
US10706852B2 (en) 2015-11-13 2020-07-07 Microsoft Technology Licensing, Llc Confidence features for automated speech recognition arbitration
US10592949B2 (en) 2015-11-13 2020-03-17 [24]7.ai, Inc. Method and apparatus for linking customer interactions with customer messaging platforms
US20170140750A1 (en) 2015-11-17 2017-05-18 Le Holdings (Beijing) Co., Ltd. Method and device for speech recognition
CN105472191B (zh) 2015-11-18 2019-09-20 百度在线网络技术(北京)有限公司 一种跟踪回声时延的方法和装置
US11929088B2 (en) 2015-11-20 2024-03-12 Synaptics Incorporated Input/output mode control for audio processing
JP6570651B2 (ja) 2015-11-25 2019-09-04 三菱電機株式会社 音声対話装置および音声対話方法
US10040423B2 (en) 2015-11-27 2018-08-07 Bragi GmbH Vehicle with wearable for identifying one or more vehicle occupants
US9484030B1 (en) 2015-12-02 2016-11-01 Amazon Technologies, Inc. Audio triggered commands
US9699597B2 (en) 2015-12-07 2017-07-04 Google Inc. Wireless signal forwarding
US9747920B2 (en) 2015-12-17 2017-08-29 Amazon Technologies, Inc. Adaptive beamforming to create reference channels
US10311862B2 (en) 2015-12-23 2019-06-04 Rovi Guides, Inc. Systems and methods for conversations with devices about media using interruptions and changes of subjects
CN105679318A (zh) 2015-12-23 2016-06-15 珠海格力电器股份有限公司 一种基于语音识别的显示方法、装置、显示系统和空调
US10134388B1 (en) 2015-12-23 2018-11-20 Amazon Technologies, Inc. Word generation for speech recognition
CN105632486B (zh) 2015-12-23 2019-12-17 北京奇虎科技有限公司 一种智能硬件的语音唤醒方法和装置
US10026401B1 (en) 2015-12-28 2018-07-17 Amazon Technologies, Inc. Naming devices via voice commands
US9826599B2 (en) 2015-12-28 2017-11-21 Amazon Technologies, Inc. Voice-controlled light switches
US10547942B2 (en) 2015-12-28 2020-01-28 Samsung Electronics Co., Ltd. Control of electrodynamic speaker driver using a low-order non-linear model
US9992642B1 (en) 2015-12-29 2018-06-05 Amazon Technologies, Inc. Automated messaging
US9820036B1 (en) 2015-12-30 2017-11-14 Amazon Technologies, Inc. Speech processing of reflected sound
US9813810B1 (en) 2016-01-05 2017-11-07 Google Inc. Multi-microphone neural network for sound recognition
US10049666B2 (en) 2016-01-06 2018-08-14 Google Llc Voice recognition system
US9743207B1 (en) 2016-01-18 2017-08-22 Sonos, Inc. Calibration using multiple recording devices
KR20170086814A (ko) 2016-01-19 2017-07-27 삼성전자주식회사 음성 인식 기능을 제공하는 전자 장치 및 그 동작 방법
CN105741838B (zh) 2016-01-20 2019-10-15 百度在线网络技术(北京)有限公司 语音唤醒方法及装置
KR102392113B1 (ko) 2016-01-20 2022-04-29 삼성전자주식회사 전자 장치 및 전자 장치의 음성 명령 처리 방법
US9749731B2 (en) 2016-01-21 2017-08-29 Bose Corporation Sidetone generation using multiple microphones
KR20170091913A (ko) 2016-02-02 2017-08-10 삼성전자주식회사 영상 서비스 제공 방법 및 장치
US9659555B1 (en) 2016-02-09 2017-05-23 Amazon Technologies, Inc. Multichannel acoustic echo cancellation
US9653060B1 (en) 2016-02-09 2017-05-16 Amazon Technologies, Inc. Hybrid reference signal for acoustic echo cancellation
EP3414759B1 (en) 2016-02-10 2020-07-01 Cerence Operating Company Techniques for spatially selective wake-up word recognition and related systems and methods
US9898250B1 (en) 2016-02-12 2018-02-20 Amazon Technologies, Inc. Controlling distributed audio outputs to enable voice output
US9858927B2 (en) 2016-02-12 2018-01-02 Amazon Technologies, Inc Processing spoken commands to control distributed audio outputs
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US10509626B2 (en) 2016-02-22 2019-12-17 Sonos, Inc Handling of loss of pairing between networked devices
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9820039B2 (en) 2016-02-22 2017-11-14 Sonos, Inc. Default playback devices
US9779735B2 (en) 2016-02-24 2017-10-03 Google Inc. Methods and systems for detecting and processing speech signals
WO2017147936A1 (zh) 2016-03-04 2017-09-08 茹旷 智能家居助手
US10133612B2 (en) 2016-03-17 2018-11-20 Nuance Communications, Inc. Session processing interaction between two or more virtual assistants
US9769420B1 (en) 2016-03-18 2017-09-19 Thomas Lawrence Moses Portable wireless remote monitoring and control systems
US10373612B2 (en) 2016-03-21 2019-08-06 Amazon Technologies, Inc. Anchored speech detection and speech recognition
US9805714B2 (en) 2016-03-22 2017-10-31 Asustek Computer Inc. Directional keyword verification method applicable to electronic device and electronic device using the same
US10365887B1 (en) 2016-03-25 2019-07-30 Amazon Technologies, Inc. Generating commands based on location and wakeword
US10332508B1 (en) 2016-03-31 2019-06-25 Amazon Technologies, Inc. Confidence checking for speech processing and query answering
US9952827B2 (en) 2016-04-13 2018-04-24 Comcast Cable Communications, Llc Dynamic adjustment of equalization settings of audio components via a sound device profile
KR102297394B1 (ko) 2016-04-18 2021-09-02 구글 엘엘씨 적절한 에이전트의 자동화된 어시스턴트 호출
US10318236B1 (en) 2016-05-05 2019-06-11 Amazon Technologies, Inc. Refining media playback
US20170329397A1 (en) 2016-05-12 2017-11-16 Rovi Guides, Inc. Systems and methods for navigating a media guidance application using gaze control
US10447748B2 (en) 2016-05-12 2019-10-15 Apple Inc. Sharing media information between applications on client devices
US10149049B2 (en) 2016-05-13 2018-12-04 Bose Corporation Processing speech from distributed microphones
US20170330563A1 (en) 2016-05-13 2017-11-16 Bose Corporation Processing Speech from Distributed Microphones
US10187440B2 (en) 2016-05-27 2019-01-22 Apple Inc. Personalization of media streams
US10063965B2 (en) 2016-06-01 2018-08-28 Google Llc Sound source estimation using neural networks
US10474419B2 (en) 2016-06-03 2019-11-12 Crestron Electronics, Inc. Audio digital signal processor utilizing a hybrid network architecture
US10079027B2 (en) 2016-06-03 2018-09-18 Nxp B.V. Sound signal detector
AU2017100581B4 (en) 2016-06-08 2018-02-01 Apple Inc. Intelligent automated assistant for media exploration
US10235124B2 (en) 2016-06-08 2019-03-19 Google Llc Audio announcement prioritization system
US9754605B1 (en) 2016-06-09 2017-09-05 Amazon Technologies, Inc. Step-size control for multi-channel acoustic echo canceller
AU2017100486C4 (en) 2016-06-11 2019-09-05 Apple Inc. Intelligent device arbitration and control
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK179034B1 (en) 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
US10212029B2 (en) 2016-06-15 2019-02-19 Microsoft Technology Licensing, Llc Service provisioning in cloud computing systems
US20170364371A1 (en) 2016-06-15 2017-12-21 Microsoft Technology Licensing, Llc Context-Dependent Digital Action-Assistance Tool
EP3754653A1 (en) 2016-06-15 2020-12-23 Cerence Operating Company Techniques for wake-up word recognition and related systems and methods
KR20170142001A (ko) 2016-06-16 2017-12-27 삼성전자주식회사 전자 장치, 그의 반향 신호 제거 방법 및 비일시적 컴퓨터 판독가능 기록매체
US9749738B1 (en) 2016-06-20 2017-08-29 Gopro, Inc. Synthesizing audio corresponding to a virtual microphone location
US9875740B1 (en) 2016-06-20 2018-01-23 A9.Com, Inc. Using voice information to influence importance of search result categories
ITUA20164622A1 (it) 2016-06-23 2017-12-23 St Microelectronics Srl Procedimento di beamforming basato su matrici di microfoni e relativo apparato
US10091545B1 (en) 2016-06-27 2018-10-02 Amazon Technologies, Inc. Methods and systems for detecting audio output of associated device
US9728188B1 (en) 2016-06-28 2017-08-08 Amazon Technologies, Inc. Methods and devices for ignoring similar audio being received by a system
KR102471499B1 (ko) 2016-07-05 2022-11-28 삼성전자주식회사 영상처리장치, 영상처리장치의 구동방법 및 컴퓨터 판독가능 기록매체
EP3270377B1 (en) 2016-07-12 2020-02-19 Dolby Laboratories Licensing Corporation Assessment and adjustment of audio installation
WO2018013564A1 (en) 2016-07-12 2018-01-18 Bose Corporation Combining gesture and voice user interfaces
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US9860670B1 (en) 2016-07-15 2018-01-02 Sonos, Inc. Spectral correction using spatial calibration
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US9979680B2 (en) 2016-07-21 2018-05-22 Fujitsu Limited Smart notification scheduling and modality selection
US10621992B2 (en) 2016-07-22 2020-04-14 Lenovo (Singapore) Pte. Ltd. Activating voice assistant based on at least one of user proximity and context
US20180033429A1 (en) 2016-07-26 2018-02-01 Ford Global Technologies, Llc Extendable vehicle system
CN106028223A (zh) 2016-07-26 2016-10-12 广东欧珀移动通信有限公司 一种智能音箱的控制方法、装置及智能音箱
KR102575634B1 (ko) 2016-07-26 2023-09-06 삼성전자주식회사 전자 장치 및 전자 장치의 동작 방법
US10431211B2 (en) 2016-07-29 2019-10-01 Qualcomm Incorporated Directional processing of far-field audio
US10459684B2 (en) 2016-08-05 2019-10-29 Sonos, Inc. Calibration of a playback device based on an estimated frequency response
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10026403B2 (en) 2016-08-12 2018-07-17 Paypal, Inc. Location based voice association system
US20180053504A1 (en) 2016-08-19 2018-02-22 Otis Elevator Company Intention recognition for triggering voice recognition system
US9691384B1 (en) 2016-08-19 2017-06-27 Google Inc. Voice action biasing system
US9967382B2 (en) 2016-08-19 2018-05-08 Amazon Technologies, Inc. Enabling voice control of telephone device
CN107767863B (zh) 2016-08-22 2021-05-04 科大讯飞股份有限公司 语音唤醒方法、系统及智能终端
WO2018039045A1 (en) 2016-08-24 2018-03-01 Knowles Electronics, Llc Methods and systems for keyword detection using keyword repetitions
US9972320B2 (en) 2016-08-24 2018-05-15 Google Llc Hotword detection on multiple devices
US10461953B2 (en) 2016-08-29 2019-10-29 Lutron Technology Company Llc Load control system having audio control devices
US10360910B2 (en) 2016-08-29 2019-07-23 Garmin Switzerland Gmbh Automatic speech recognition (ASR) utilizing GPS and sensor data
US10685656B2 (en) 2016-08-31 2020-06-16 Bose Corporation Accessing multiple virtual personal assistants (VPA) from a single device
US10074369B2 (en) 2016-09-01 2018-09-11 Amazon Technologies, Inc. Voice-based communications
US10580404B2 (en) 2016-09-01 2020-03-03 Amazon Technologies, Inc. Indicator for voice-based communications
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
JP6577159B1 (ja) 2016-09-06 2019-09-18 ディープマインド テクノロジーズ リミテッド ニューラルネットワークを使用したオーディオの生成
EP3297298B1 (en) 2016-09-19 2020-05-06 A-Volute Method for reproducing spatially distributed sounds
US9972318B1 (en) 2016-09-21 2018-05-15 Amazon Technologies, Inc. Interpreting voice commands
JP6520878B2 (ja) 2016-09-21 2019-05-29 トヨタ自動車株式会社 音声取得システムおよび音声取得方法
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
JP2018055259A (ja) 2016-09-27 2018-04-05 キヤノン株式会社 情報処理装置、情報処理方法及びプログラム
US10409548B2 (en) 2016-09-27 2019-09-10 Grabango Co. System and method for differentially locating and modifying audio sources
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
US9959861B2 (en) 2016-09-30 2018-05-01 Robert Bosch Gmbh System and method for speech recognition
EP3507798A1 (en) 2016-10-03 2019-07-10 Google LLC Processing voice commands based on device topology
WO2018067402A1 (en) 2016-10-03 2018-04-12 Google Inc. Selection of computational agent for task performance
US10283138B2 (en) 2016-10-03 2019-05-07 Google Llc Noise mitigation for a voice interface device
CN107919116B (zh) 2016-10-11 2019-09-13 芋头科技(杭州)有限公司 一种语音激活检测方法及装置
US10712997B2 (en) 2016-10-17 2020-07-14 Sonos, Inc. Room association based on name
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US20180122372A1 (en) 2016-10-31 2018-05-03 Soundhound, Inc. Distinguishable open sounds
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
KR102241970B1 (ko) 2016-11-07 2021-04-20 구글 엘엘씨 기록된 미디어 핫워드 트리거 억제
US10154496B2 (en) 2016-11-10 2018-12-11 Futurewei Technologies, Inc. System and method for beamformed reference signals in three dimensional multiple input multiple output communications systems
US10382806B2 (en) 2016-11-14 2019-08-13 DISH Technologies L.L.C. Apparatus, systems and methods for controlling presentation of content using a multi-media table
US10170110B2 (en) 2016-11-17 2019-01-01 Robert Bosch Gmbh System and method for ranking of hybrid speech recognition results with neural networks
CN106708403A (zh) 2016-11-30 2017-05-24 努比亚技术有限公司 输入滑动操作时同步播放提示音的方法及装置
US10079015B1 (en) 2016-12-06 2018-09-18 Amazon Technologies, Inc. Multi-layer keyword detection
US10186265B1 (en) 2016-12-06 2019-01-22 Amazon Technologies, Inc. Multi-layer keyword detection to avoid detection of keywords in output audio
US10134396B2 (en) 2016-12-07 2018-11-20 Google Llc Preventing of audio attacks
US10255032B2 (en) 2016-12-13 2019-04-09 EVA Automation, Inc. Wireless coordination of audio sources
US11184764B2 (en) 2016-12-14 2021-11-23 Amzetta Technologies, Llc Methods and systems of establishing communication between devices
CN106531165A (zh) 2016-12-15 2017-03-22 北京塞宾科技有限公司 一种便携式智能家居语音控制系统及控制方法
US10339957B1 (en) 2016-12-20 2019-07-02 Amazon Technologies, Inc. Ending communications session based on presence data
US10068573B1 (en) 2016-12-21 2018-09-04 Amazon Technologies, Inc. Approaches for voice-activated audio commands
US10559309B2 (en) 2016-12-22 2020-02-11 Google Llc Collaborative voice controlled devices
DE112017006486T5 (de) 2016-12-23 2019-09-12 Synaptics Incorporated Online-enthallungsalgorithmus basierend auf gewichtetem vorhersagefehler für lärmbehaftete zeitvariante umgebungen
CN106910500B (zh) 2016-12-23 2020-04-17 北京小鸟听听科技有限公司 对带麦克风阵列的设备进行语音控制的方法及设备
US10546578B2 (en) 2016-12-26 2020-01-28 Samsung Electronics Co., Ltd. Method and device for transmitting and receiving audio data
US10580405B1 (en) 2016-12-27 2020-03-03 Amazon Technologies, Inc. Voice control of remote device
US10593328B1 (en) 2016-12-27 2020-03-17 Amazon Technologies, Inc. Voice control of remote device
US10276161B2 (en) 2016-12-27 2019-04-30 Google Llc Contextual hotwords
US10186266B1 (en) 2016-12-28 2019-01-22 Amazon Technologies, Inc. Message playback using a shared device
US10831366B2 (en) 2016-12-29 2020-11-10 Google Llc Modality learning on mobile devices
US10229680B1 (en) 2016-12-29 2019-03-12 Amazon Technologies, Inc. Contextual entity resolution
US10290302B2 (en) 2016-12-30 2019-05-14 Google Llc Compact home assistant with combined acoustic waveguide and heat sink
US10224031B2 (en) 2016-12-30 2019-03-05 Google Llc Generating and transmitting invocation request to appropriate third-party agent
KR102412202B1 (ko) 2017-01-03 2022-06-27 삼성전자주식회사 냉장고 및 이의 정보 표시 방법
US10248613B2 (en) 2017-01-10 2019-04-02 Qualcomm Incorporated Data bus activation in an electronic device
US10672387B2 (en) 2017-01-11 2020-06-02 Google Llc Systems and methods for recognizing user speech
KR20180084392A (ko) 2017-01-17 2018-07-25 삼성전자주식회사 전자 장치 및 그의 동작 방법
US10306254B2 (en) 2017-01-17 2019-05-28 Seiko Epson Corporation Encoding free view point data in movie data container
US11164570B2 (en) 2017-01-17 2021-11-02 Ford Global Technologies, Llc Voice assistant tracking and activation
KR102556840B1 (ko) 2017-01-20 2023-07-18 삼성전자주식회사 전자 장치 및 그의 제어 방법
KR20180085931A (ko) 2017-01-20 2018-07-30 삼성전자주식회사 음성 입력 처리 방법 및 이를 지원하는 전자 장치
US20180218747A1 (en) 2017-01-28 2018-08-02 Bose Corporation Audio Device Filter Modification
KR20180090586A (ko) 2017-02-03 2018-08-13 삼성전자주식회사 알림을 제공하는 방법 및 그 전자 장치
CA3155437C (en) 2017-02-07 2024-01-09 Lutron Technology Company Llc Audio-based load control system
US10762891B2 (en) 2017-02-10 2020-09-01 Synaptics Incorporated Binary and multi-class classification systems and methods using connectionist temporal classification
CN108446281B (zh) 2017-02-13 2021-03-12 北京嘀嘀无限科技发展有限公司 确定用户亲密度的方法、装置及存储介质
US10311876B2 (en) 2017-02-14 2019-06-04 Google Llc Server side hotwording
US20180293221A1 (en) 2017-02-14 2018-10-11 Microsoft Technology Licensing, Llc Speech parsing with intelligent assistant
US10467509B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Computationally-efficient human-identifying smart assistant computer
US11100384B2 (en) 2017-02-14 2021-08-24 Microsoft Technology Licensing, Llc Intelligent device user interactions
US10431217B2 (en) 2017-02-15 2019-10-01 Amazon Technologies, Inc. Audio playback device that dynamically switches between receiving audio data from a soft access point and receiving audio data from a local access point
US10839795B2 (en) 2017-02-15 2020-11-17 Amazon Technologies, Inc. Implicit target selection for multiple audio playback devices in an environment
US10264358B2 (en) 2017-02-15 2019-04-16 Amazon Technologies, Inc. Selection of master device for synchronized audio
CN106921560B (zh) 2017-02-28 2020-06-02 北京小米移动软件有限公司 语音通信方法、装置及系统
US10089981B1 (en) 2017-03-09 2018-10-02 Amazon Technologies, Inc. Messaging account disambiguation
US20180262793A1 (en) 2017-03-09 2018-09-13 Google Inc. Reverse Casting from a First Screen Device to a Second Screen Device
US10706843B1 (en) 2017-03-09 2020-07-07 Amazon Technologies, Inc. Contact resolution for communications systems
US10540961B2 (en) 2017-03-13 2020-01-21 Baidu Usa Llc Convolutional recurrent neural networks for small-footprint keyword spotting
US10074371B1 (en) 2017-03-14 2018-09-11 Amazon Technologies, Inc. Voice control of remote device by disabling wakeword detection
US10600406B1 (en) 2017-03-20 2020-03-24 Amazon Technologies, Inc. Intent re-ranker
US10499139B2 (en) 2017-03-20 2019-12-03 Bose Corporation Audio signal processing for noise reduction
US10621980B2 (en) 2017-03-21 2020-04-14 Harman International Industries, Inc. Execution of voice commands in a multi-device system
WO2018173293A1 (ja) 2017-03-24 2018-09-27 ヤマハ株式会社 音声端末、音声コマンド生成システム、及び音声コマンド生成システムの制御方法
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US10643609B1 (en) 2017-03-29 2020-05-05 Amazon Technologies, Inc. Selecting speech inputs
CN107135443B (zh) 2017-03-29 2020-06-23 联想(北京)有限公司 一种信号处理方法及电子设备
US10373630B2 (en) 2017-03-31 2019-08-06 Intel Corporation Systems and methods for energy efficient and low power distributed automatic speech recognition on wearable devices
US10825471B2 (en) 2017-04-05 2020-11-03 Avago Technologies International Sales Pte. Limited Voice energy detection
US11188808B2 (en) 2017-04-11 2021-11-30 Lenovo (Singapore) Pte. Ltd. Indicating a responding virtual assistant from a plurality of virtual assistants
US10748531B2 (en) 2017-04-13 2020-08-18 Harman International Industries, Incorporated Management layer for multiple intelligent personal assistant services
CN107122158A (zh) 2017-04-14 2017-09-01 北京小米移动软件有限公司 播放信息提示音频的方法及装置、电子设备
KR102068182B1 (ko) 2017-04-21 2020-01-20 엘지전자 주식회사 음성 인식 장치, 및 음성 인식 시스템
KR102392297B1 (ko) 2017-04-24 2022-05-02 엘지전자 주식회사 전자기기
KR102298947B1 (ko) 2017-04-28 2021-09-08 삼성전자주식회사 음성 데이터 처리 방법 및 이를 지원하는 전자 장치
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10311870B2 (en) 2017-05-10 2019-06-04 Ecobee Inc. Computerized device with voice command input capability
US10013995B1 (en) 2017-05-10 2018-07-03 Cirrus Logic, Inc. Combined reference signal for acoustic echo cancellation
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10628484B2 (en) 2017-05-17 2020-04-21 Board Of Trustees Of The University Of Illinois Vibrational devices as sound sensors
US10403299B2 (en) 2017-06-02 2019-09-03 Apple Inc. Multi-channel speech signal enhancement for robust voice trigger detection and automatic speech recognition
US10564928B2 (en) 2017-06-02 2020-02-18 Rovi Guides, Inc. Systems and methods for generating a volume- based response for multiple voice-operated user devices
US10531196B2 (en) 2017-06-02 2020-01-07 Apple Inc. Spatially ducking audio produced through a beamforming loudspeaker array
US10522146B1 (en) 2019-07-09 2019-12-31 Instreamatic, Inc. Systems and methods for recognizing and performing voice commands during advertisement
US10395650B2 (en) 2017-06-05 2019-08-27 Google Llc Recorded media hotword trigger suppression
US10410635B2 (en) 2017-06-09 2019-09-10 Soundhound, Inc. Dual mode speech recognition
US10983753B2 (en) 2017-06-09 2021-04-20 International Business Machines Corporation Cognitive and interactive sensor based smart home solution
US10984329B2 (en) 2017-06-14 2021-04-20 Ademco Inc. Voice activated virtual assistant with a fused response
US10028069B1 (en) 2017-06-22 2018-07-17 Sonos, Inc. Immersive audio in a media playback system
US10950228B1 (en) 2017-06-28 2021-03-16 Amazon Technologies, Inc. Interactive voice controlled entertainment
US11189273B2 (en) 2017-06-29 2021-11-30 Amazon Technologies, Inc. Hands free always on near field wakeword solution
EP3646161A1 (en) 2017-06-30 2020-05-06 Google LLC Methods, systems, and media for voice-based call operations
US20190013019A1 (en) 2017-07-10 2019-01-10 Intel Corporation Speaker command and key phrase management for muli -virtual assistant systems
US10687353B2 (en) 2017-07-10 2020-06-16 Qualcomm Incorporated Management of conflicting scheduling commands in wireless networks
US10310082B2 (en) 2017-07-27 2019-06-04 Quantenna Communications, Inc. Acoustic spatial diagnostics for smart home management
US11205421B2 (en) 2017-07-28 2021-12-21 Cerence Operating Company Selection system and method
US11798544B2 (en) 2017-08-07 2023-10-24 Polycom, Llc Replying to a spoken command
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
JP6513749B2 (ja) 2017-08-09 2019-05-15 レノボ・シンガポール・プライベート・リミテッド 音声アシストシステム、サーバ装置、その音声アシスト方法、及びコンピュータが実行するためのプログラム
KR102389041B1 (ko) 2017-08-11 2022-04-21 엘지전자 주식회사 이동단말기 및 머신 러닝을 이용한 이동 단말기의 제어방법
US10304475B1 (en) 2017-08-14 2019-05-28 Amazon Technologies, Inc. Trigger word based beam selection
US11062710B2 (en) 2017-08-28 2021-07-13 Roku, Inc. Local and cloud speech recognition
US20190066710A1 (en) 2017-08-28 2019-02-28 Apple Inc. Transparent near-end user control over far-end speech enhancement processing
US11062702B2 (en) 2017-08-28 2021-07-13 Roku, Inc. Media system with multiple digital assistants
US10553235B2 (en) 2017-08-28 2020-02-04 Apple Inc. Transparent near-end user control over far-end speech enhancement processing
US10546583B2 (en) 2017-08-30 2020-01-28 Amazon Technologies, Inc. Context-based device arbitration
US10515625B1 (en) 2017-08-31 2019-12-24 Amazon Technologies, Inc. Multi-modal natural language processing
US10911596B1 (en) 2017-08-31 2021-02-02 Amazon Technologies, Inc. Voice user interface for wired communications system
US10366699B1 (en) 2017-08-31 2019-07-30 Amazon Technologies, Inc. Multi-path calculations for device energy levels
US10847149B1 (en) 2017-09-01 2020-11-24 Amazon Technologies, Inc. Speech-based attention span for voice user interface
US10482895B2 (en) 2017-09-01 2019-11-19 Cirrus Logic, Inc. Acoustic echo cancellation (AEC) rate adaptation
US11361763B1 (en) 2017-09-01 2022-06-14 Amazon Technologies, Inc. Detecting system-directed speech
US20190082255A1 (en) 2017-09-08 2019-03-14 Olympus Corporation Information acquiring apparatus, information acquiring method, and computer readable recording medium
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
JP6571144B2 (ja) 2017-09-08 2019-09-04 シャープ株式会社 監視システム、監視機器、サーバ、および監視方法
US10083006B1 (en) 2017-09-12 2018-09-25 Google Llc Intercom-style communication using multiple computing devices
KR102338376B1 (ko) 2017-09-13 2021-12-13 삼성전자주식회사 디바이스 그룹을 지정하기 위한 전자 장치 및 이의 제어 방법
US11314214B2 (en) 2017-09-15 2022-04-26 Kohler Co. Geographic analysis of water conditions
US9973849B1 (en) 2017-09-20 2018-05-15 Amazon Technologies, Inc. Signal quality beam selection
US10719507B2 (en) 2017-09-21 2020-07-21 SayMosaic Inc. System and method for natural language processing
US10580411B2 (en) 2017-09-25 2020-03-03 Cirrus Logic, Inc. Talker change detection
US10586534B1 (en) 2017-09-27 2020-03-10 Amazon Technologies, Inc. Voice-controlled device control using acoustic echo cancellation statistics
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US11233782B2 (en) 2017-10-04 2022-01-25 Resilience Magnum IP, LLC Single node network connectivity for structure automation functionality
US10897680B2 (en) 2017-10-04 2021-01-19 Google Llc Orientation-based device interface
KR102421255B1 (ko) 2017-10-17 2022-07-18 삼성전자주식회사 음성 신호를 제어하기 위한 전자 장치 및 방법
KR102543693B1 (ko) 2017-10-17 2023-06-16 삼성전자주식회사 전자 장치 및 그의 동작 방법
US10403266B2 (en) 2017-10-18 2019-09-03 Intel Corporation Detecting keywords in audio using a spiking neural network
CN107808670B (zh) 2017-10-25 2021-05-14 百度在线网络技术(北京)有限公司 语音数据处理方法、装置、设备及存储介质
JP2019086903A (ja) 2017-11-02 2019-06-06 東芝映像ソリューション株式会社 音声対話端末、および音声対話端末制御方法
CN107832837B (zh) 2017-11-28 2021-09-28 南京大学 一种基于压缩感知原理的卷积神经网络压缩方法及解压缩方法
US20190163153A1 (en) 2017-11-30 2019-05-30 International Business Machines Corporation Enforcing dynamic volume thresholds of an entertainment device
US10445365B2 (en) 2017-12-04 2019-10-15 Amazon Technologies, Inc. Streaming radio with personalized content integration
US10546593B2 (en) 2017-12-04 2020-01-28 Apple Inc. Deep learning driven multi-channel filtering for speech enhancement
US10510340B1 (en) 2017-12-05 2019-12-17 Amazon Technologies, Inc. Dynamic wakeword detection
US10777189B1 (en) 2017-12-05 2020-09-15 Amazon Technologies, Inc. Dynamic wakeword detection
US20190172452A1 (en) 2017-12-06 2019-06-06 GM Global Technology Operations LLC External information rendering
EP3958112A1 (en) 2017-12-06 2022-02-23 Google LLC Ducking and erasing audio from nearby devices
CN107919123B (zh) 2017-12-07 2022-06-03 北京小米移动软件有限公司 多语音助手控制方法、装置及计算机可读存储介质
US11182122B2 (en) 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US20190179611A1 (en) 2017-12-11 2019-06-13 Sonos, Inc. Systems and Methods of Receiving Voice Input
US10051600B1 (en) 2017-12-12 2018-08-14 Amazon Technologies, Inc. Selective notification delivery based on user presence detections
US10847137B1 (en) 2017-12-12 2020-11-24 Amazon Technologies, Inc. Trigger word detection using neural network waveform processing
US10425247B2 (en) 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
US10374816B1 (en) 2017-12-13 2019-08-06 Amazon Technologies, Inc. Network conference management and arbitration via voice-capturing devices
US10540971B2 (en) 2017-12-15 2020-01-21 Blue Jeans Network, Inc. System and methods for in-meeting group assistance using a virtual assistant
US10663313B2 (en) 2017-12-15 2020-05-26 Google Llc Providing traffic warnings to a user based on return journey
US11409816B2 (en) 2017-12-19 2022-08-09 Motorola Solutions, Inc. Methods and systems for determining an action to be taken in response to a user query as a function of pre-query context information
DE112018002857T5 (de) 2017-12-26 2020-02-27 Robert Bosch Gmbh Sprecheridentifikation mit ultrakurzen Sprachsegmenten für Fern- und Nahfeld-Sprachunterstützungsanwendungen
EP3732626A4 (en) 2017-12-28 2021-09-15 Syntiant ALWAYS ACTIVE KEYWORD DETECTOR
US10614811B2 (en) 2017-12-29 2020-04-07 Intel Corporation Hierarchical speech recognition resolution
CN111512365B (zh) 2017-12-31 2023-06-13 美的集团股份有限公司 对多个家庭装置进行控制的方法和系统
CN111357048A (zh) 2017-12-31 2020-06-30 美的集团股份有限公司 用于控制家庭助手装置的方法和系统
US9972343B1 (en) 2018-01-08 2018-05-15 Republic Wireless, Inc. Multi-step validation of wakeup phrase processing
US10795332B2 (en) 2018-01-16 2020-10-06 Resilience Magnum IP, LLC Facilitating automating home control
CN108198548B (zh) 2018-01-25 2020-11-20 苏州奇梦者网络科技有限公司 一种语音唤醒方法及其系统
US20190237067A1 (en) 2018-01-31 2019-08-01 Toyota Motor Engineering & Manufacturing North America, Inc. Multi-channel voice recognition for a vehicle environment
US10157042B1 (en) 2018-02-06 2018-12-18 Amazon Technologies, Inc. Audio output control
US11024307B2 (en) 2018-02-08 2021-06-01 Computime Ltd. Method and apparatus to provide comprehensive smart assistant services
US11145298B2 (en) 2018-02-13 2021-10-12 Roku, Inc. Trigger word detection with multiple digital assistants
US10425780B1 (en) 2018-02-22 2019-09-24 Amazon Technologies, Inc. Outputting notifications using device groups
US10491962B2 (en) 2018-03-14 2019-11-26 Rovi Guides, Inc. Systems and methods for presenting event notifications, based on active applications in a social group, on devices notwithstanding a user instruction to disable event notifications
US10749828B2 (en) 2018-03-14 2020-08-18 Rovi Guides, Inc. Systems and methods for presenting event notifications, based on trending communications, on devices notwithstanding a user instruction to disable event notifications
US11127405B1 (en) 2018-03-14 2021-09-21 Amazon Technologies, Inc. Selective requests for authentication for voice-based launching of applications
US10438605B1 (en) 2018-03-19 2019-10-08 Bose Corporation Echo control in binaural adaptive noise cancellation systems in headsets
US10685669B1 (en) 2018-03-20 2020-06-16 Amazon Technologies, Inc. Device selection from audio data
US10440440B1 (en) 2018-03-23 2019-10-08 Rovi Guides, Inc. Systems and methods for prompting a user to view an important event in a media asset presented on a first device when the user is viewing another media asset presented on a second device
US10777203B1 (en) 2018-03-23 2020-09-15 Amazon Technologies, Inc. Speech interface device with caching component
US10755706B2 (en) 2018-03-26 2020-08-25 Midea Group Co., Ltd. Voice-based user interface with dynamically switchable endpoints
US10446169B1 (en) 2018-03-26 2019-10-15 Motorola Mobility Llc Pre-selectable and dynamic configurable multistage echo control system for large range level of acoustic echo
US11151991B2 (en) 2018-03-30 2021-10-19 Verizon Media Inc. Electronic message transmission
US11217240B2 (en) 2018-04-05 2022-01-04 Synaptics Incorporated Context-aware control for smart devices
US20190311710A1 (en) 2018-04-06 2019-10-10 Flex Ltd. Device and system for accessing multiple virtual assistant services
US10720166B2 (en) 2018-04-09 2020-07-21 Synaptics Incorporated Voice biometrics systems and methods
US10679629B2 (en) 2018-04-09 2020-06-09 Amazon Technologies, Inc. Device arbitration by multiple speech processing systems
US10928917B2 (en) 2018-04-12 2021-02-23 International Business Machines Corporation Multiple user interaction with audio devices using speech and gestures
CN108520741B (zh) 2018-04-12 2021-05-04 科大讯飞股份有限公司 一种耳语音恢复方法、装置、设备及可读存储介质
US10679615B2 (en) 2018-04-16 2020-06-09 Google Llc Adaptive interface in a voice-based networked system
CN108538305A (zh) 2018-04-20 2018-09-14 百度在线网络技术(北京)有限公司 语音识别方法、装置、设备及计算机可读存储介质
EP3564949A1 (en) 2018-04-23 2019-11-06 Spotify AB Activation trigger processing
US11308947B2 (en) 2018-05-07 2022-04-19 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US10803864B2 (en) 2018-05-07 2020-10-13 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
JP2019204025A (ja) 2018-05-24 2019-11-28 レノボ・シンガポール・プライベート・リミテッド 電子機器、制御方法、及びプログラム
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US10777195B2 (en) 2018-05-31 2020-09-15 International Business Machines Corporation Wake command nullification for digital assistance and voice recognition technologies
US20190371324A1 (en) 2018-06-01 2019-12-05 Apple Inc. Suppression of voice response by device rendering trigger audio
EP3756087A4 (en) 2018-06-05 2021-04-21 Samsung Electronics Co., Ltd. PASSIVE WAKE-UP PROCESSES AND SYSTEMS OF A USER INTERACTION DEVICE
US10433058B1 (en) 2018-06-14 2019-10-01 Sonos, Inc. Content rules engines for audio playback devices
US10762896B1 (en) 2018-06-25 2020-09-01 Amazon Technologies, Inc. Wakeword detection
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
NL2021308B1 (en) 2018-07-16 2020-01-24 Hazelebach & Van Der Ven Holding B V Methods for a voice processing system
JP7000268B2 (ja) 2018-07-18 2022-01-19 株式会社東芝 情報処理装置、情報処理方法、およびプログラム
US11144596B2 (en) 2018-07-24 2021-10-12 Harman International Industries, Incorporated Retroactive information searching enabled by neural sensing
GB2576016B (en) 2018-08-01 2021-06-23 Arm Ip Ltd Voice assistant devices
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
KR102225984B1 (ko) 2018-09-03 2021-03-10 엘지전자 주식회사 음성 인식 서비스를 제공하는 서버
US10622009B1 (en) 2018-09-10 2020-04-14 Amazon Technologies, Inc. Methods for detecting double-talk
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US20200090647A1 (en) 2018-09-14 2020-03-19 Comcast Cable Communications, Llc Keyword Detection In The Presence Of Media Output
US10650807B2 (en) 2018-09-18 2020-05-12 Intel Corporation Method and system of neural network keyphrase detection
KR20200034430A (ko) 2018-09-21 2020-03-31 삼성전자주식회사 전자 장치, 시스템 및 음성 인식 서비스 이용 방법
US10861444B2 (en) 2018-09-24 2020-12-08 Rovi Guides, Inc. Systems and methods for determining whether to trigger a voice capable device based on speaking cadence
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US10950249B2 (en) 2018-09-25 2021-03-16 Amazon Technologies, Inc. Audio watermark encoding/decoding
US11170758B2 (en) 2018-09-27 2021-11-09 Rovi Guides, Inc. Systems and methods for providing notifications within a media asset without breaking immersion
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
KR102606789B1 (ko) 2018-10-01 2023-11-28 삼성전자주식회사 복수의 음성 인식 장치들을 제어하는 방법 및 그 방법을 지원하는 전자 장치
US10971158B1 (en) 2018-10-05 2021-04-06 Facebook, Inc. Designating assistants in multi-assistant environment based on identified wake word received from a user
US20200110571A1 (en) 2018-10-05 2020-04-09 Sonos, Inc. Systems and methods for media content selection
US10346122B1 (en) 2018-10-18 2019-07-09 Brent Foster Morgan Systems and methods for a supplemental display screen
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US10943599B2 (en) 2018-10-26 2021-03-09 Spotify Ab Audio cancellation for voice recognition
US10388272B1 (en) 2018-12-04 2019-08-20 Sorenson Ip Holdings, Llc Training speech recognition systems using word sequences
US10573312B1 (en) 2018-12-04 2020-02-25 Sorenson Ip Holdings, Llc Transcription generation from multiple speech recognition systems
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
KR102570384B1 (ko) 2018-12-27 2023-08-25 삼성전자주식회사 가전기기 및 이의 음성 인식 방법
US11198446B2 (en) 2019-01-04 2021-12-14 Faraday & Future Inc. On-board vehicle query system
JP2020112692A (ja) 2019-01-11 2020-07-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 方法、制御装置、及びプログラム
US11349834B2 (en) 2019-01-30 2022-05-31 Ncr Corporation Multi-factor secure operation authentication
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
CN109712626B (zh) 2019-03-04 2021-04-30 腾讯科技(深圳)有限公司 一种语音数据处理方法及装置
US10943598B2 (en) 2019-03-18 2021-03-09 Rovi Guides, Inc. Method and apparatus for determining periods of excessive noise for receiving smart speaker voice commands
US10964314B2 (en) 2019-03-22 2021-03-30 Cirrus Logic, Inc. System and method for optimized noise reduction in the presence of speech distortion using adaptive microphone array
US10984783B2 (en) 2019-03-27 2021-04-20 Intel Corporation Spoken keyword detection based utterance-level wake on intent system
US20200310751A1 (en) 2019-03-29 2020-10-01 Qualcomm Incorporated System and method of managing device sound level
EP4184949A1 (en) 2019-04-17 2023-05-24 Oticon A/s A hearing device comprising a transmitter
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US20200409926A1 (en) 2019-06-28 2020-12-31 Rovi Guides, Inc. Automated contact creation based on content communications
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11159878B1 (en) 2019-08-15 2021-10-26 Amazon Technologies, Inc. Autonomously motile device with beamforming
JP7191793B2 (ja) 2019-08-30 2022-12-19 株式会社東芝 信号処理装置、信号処理方法、及びプログラム
US11172328B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for device localization
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
KR20210066647A (ko) 2019-11-28 2021-06-07 삼성전자주식회사 전자 장치 및 이의 제어 방법
WO2021118531A1 (en) 2019-12-10 2021-06-17 Rovi Guides, Inc. Systems and methods for local automated speech-to-text processing
US11823659B2 (en) 2019-12-11 2023-11-21 Amazon Technologies, Inc. Speech recognition through disambiguation feedback
US11445301B2 (en) 2020-02-12 2022-09-13 Sonos, Inc. Portable playback devices with network operation modes
CN111341306B (zh) 2020-02-14 2022-06-17 东南大学 基于语音特征复用的关键词唤醒cnn的存储和计算压缩方法
US11206052B1 (en) 2020-06-18 2021-12-21 HAJEN Co., Ltd Smart speaker
US20220050585A1 (en) 2020-08-14 2022-02-17 Apple Inc. Audio media playback user interface

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004354721A (ja) * 2003-05-29 2004-12-16 Shimizu Corp 音声制御装置、音声制御方法および音声制御プログラム
US20140363022A1 (en) * 2013-06-05 2014-12-11 Sonos, Inc. Satellite volume control
US20150086034A1 (en) * 2013-09-25 2015-03-26 Motorola Mobility Llc Audio Routing System for Routing Audio Data to and from a Mobile Device
CN104155938A (zh) * 2014-07-21 2014-11-19 惠州Tcl移动通信有限公司 一种家居设备管理方法及系统
US20160014536A1 (en) * 2014-09-09 2016-01-14 Sonos, Inc. Playback Device Calibration
CN104581510A (zh) * 2015-01-22 2015-04-29 广东欧珀移动通信有限公司 音箱音量设置方法及装置
CN105101083A (zh) * 2015-07-15 2015-11-25 魅族科技(中国)有限公司 室内电子设备的控制方法及装置

Also Published As

Publication number Publication date
EP3974957A1 (en) 2022-03-30
US20170242650A1 (en) 2017-08-24
US11184704B2 (en) 2021-11-23
KR20220103824A (ko) 2022-07-22
US20170242649A1 (en) 2017-08-24
KR20210157487A (ko) 2021-12-28
WO2017147081A1 (en) 2017-08-31
KR102234804B1 (ko) 2021-04-01
KR20190014495A (ko) 2019-02-12
US20220159375A1 (en) 2022-05-19
AU2023203239B2 (en) 2023-11-02
US10225651B2 (en) 2019-03-05
KR102343902B1 (ko) 2021-12-27
US20230054164A1 (en) 2023-02-23
AU2023201078A1 (en) 2023-03-23
US10097919B2 (en) 2018-10-09
KR102187147B1 (ko) 2020-12-04
CA3015496C (en) 2019-05-14
US11006214B2 (en) 2021-05-11
US20190045299A1 (en) 2019-02-07
AU2021202786A1 (en) 2021-06-03
US20170245050A1 (en) 2017-08-24
US20200177989A1 (en) 2020-06-04
AU2017222436B2 (en) 2019-01-31
CN111479196A (zh) 2020-07-31
US20170242653A1 (en) 2017-08-24
JP2019146229A (ja) 2019-08-29
EP3420737A1 (en) 2019-01-02
AU2022291481B2 (en) 2023-02-23
CN109076285B (zh) 2020-03-27
CA3015491A1 (en) 2017-08-31
AU2023237192A1 (en) 2023-10-19
US20190200120A1 (en) 2019-06-27
AU2023203239A1 (en) 2023-06-15
US10743101B2 (en) 2020-08-11
US20170242655A1 (en) 2017-08-24
AU2017223395A1 (en) 2018-10-11
US20200213725A1 (en) 2020-07-02
US9820039B2 (en) 2017-11-14
EP4258690A3 (en) 2024-01-24
KR20190014494A (ko) 2019-02-12
JP2023134786A (ja) 2023-09-27
US10764679B2 (en) 2020-09-01
AU2021202786B2 (en) 2023-02-23
US20210377658A1 (en) 2021-12-02
JP7026078B2 (ja) 2022-02-25
US10555077B2 (en) 2020-02-04
CN109076285A (zh) 2018-12-21
US20200374626A1 (en) 2020-11-26
JP2019509679A (ja) 2019-04-04
US9826306B2 (en) 2017-11-21
AU2023200179B2 (en) 2023-03-02
AU2019202257B2 (en) 2021-02-04
EP3420736A4 (en) 2019-01-23
US11750969B2 (en) 2023-09-05
JP6511589B2 (ja) 2019-05-15
EP3420736A1 (en) 2019-01-02
KR20220069124A (ko) 2022-05-26
KR102584751B1 (ko) 2023-10-05
EP3420737B1 (en) 2023-08-09
AU2023200179A1 (en) 2023-02-16
AU2021212112A1 (en) 2021-08-26
KR20200138421A (ko) 2020-12-09
EP4258690A2 (en) 2023-10-11
US20180070171A1 (en) 2018-03-08
AU2019236722B2 (en) 2021-05-27
KR102095250B1 (ko) 2020-04-01
US20180077488A1 (en) 2018-03-15
KR20230149835A (ko) 2023-10-27
JP2019514237A (ja) 2019-05-30
CN109076284B (zh) 2020-05-12
AU2017222436A1 (en) 2018-10-11
US20210120334A1 (en) 2021-04-22
US10499146B2 (en) 2019-12-03
CN111479196B (zh) 2022-03-29
AU2022291481A1 (en) 2023-02-02
JP2022020760A (ja) 2022-02-01
KR102422270B1 (ko) 2022-07-18
JP2022008837A (ja) 2022-01-14
EP3420736B1 (en) 2021-07-21
CN109076284A (zh) 2018-12-21
KR102080002B1 (ko) 2020-02-24
KR20200022513A (ko) 2020-03-03
EP3420737A4 (en) 2019-01-23
AU2019236722A1 (en) 2019-10-17
CA3015491C (en) 2020-08-11
JP2019168696A (ja) 2019-10-03
JP6511590B1 (ja) 2019-05-15
US9772817B2 (en) 2017-09-26
WO2017147075A1 (en) 2017-08-31
CA3015496A1 (en) 2017-08-31
AU2021212112B2 (en) 2022-09-29
US11212612B2 (en) 2021-12-28
AU2019202257A1 (en) 2019-04-18
JP7346516B2 (ja) 2023-09-19
US11736860B2 (en) 2023-08-22
KR20210035351A (ko) 2021-03-31
US11832068B2 (en) 2023-11-28
US10212512B2 (en) 2019-02-19
KR20200034839A (ko) 2020-03-31
AU2017223395B2 (en) 2019-07-04
US20170245051A1 (en) 2017-08-24

Similar Documents

Publication Publication Date Title
CN109076285B (zh) 音频响应回放
US11881223B2 (en) Systems and methods of operating media playback systems having multiple voice assistant services
US11947870B2 (en) Audio response playback
US20220188066A1 (en) Playback Queues for Shared Experiences
CA3231640A1 (en) Techniques for re-bonding playback devices

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination