JP6511590B1 - Audio control of media playback system - Google Patents

Audio control of media playback system Download PDF

Info

Publication number
JP6511590B1
JP6511590B1 JP2018544254A JP2018544254A JP6511590B1 JP 6511590 B1 JP6511590 B1 JP 6511590B1 JP 2018544254 A JP2018544254 A JP 2018544254A JP 2018544254 A JP2018544254 A JP 2018544254A JP 6511590 B1 JP6511590 B1 JP 6511590B1
Authority
JP
Japan
Prior art keywords
media
command
playback system
user
media playback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018544254A
Other languages
Japanese (ja)
Other versions
JP2019514237A (en
Inventor
サイモン・ジャービス
ニコラス・エイ・ジェイ・ミリントン
キース・コービン
マーク・プラッグ
ロミ・カドリ
クリストファー・バッツ
イェアン−ニアン・ウィリー・チェン
Original Assignee
ソノズ インコーポレイテッド
ソノズ インコーポレイテッド
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US15/131,776 external-priority patent/US9965247B2/en
Priority claimed from US15/223,218 external-priority patent/US9947316B2/en
Application filed by ソノズ インコーポレイテッド, ソノズ インコーポレイテッド filed Critical ソノズ インコーポレイテッド
Application granted granted Critical
Publication of JP6511590B1 publication Critical patent/JP6511590B1/en
Publication of JP2019514237A publication Critical patent/JP2019514237A/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/162Interface to dedicated audio devices, e.g. audio drivers, interface to CODECs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/165Management of the audio stream, e.g. setting of volume, audio stream path
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/14Speech classification or search using statistical models, e.g. Hidden Markov Models [HMMs]
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L12/2807Exchanging configuration information on appliance services in a home automation network
    • H04L12/2809Exchanging configuration information on appliance services in a home automation network indicating that an appliance service is present in a home automation network
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R27/00Public address systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R29/00Monitoring arrangements; Testing arrangements
    • H04R29/007Monitoring arrangements; Testing arrangements for public address systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/301Automatic calibration of stereophonic sound system, e.g. with test microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/302Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303Tracking of listener position or orientation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/005Discovery of network devices, e.g. terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W8/00Network data management
    • H04W8/22Processing or transfer of terminal data, e.g. status or physical capabilities
    • H04W8/24Transfer of terminal data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • H04L2012/2847Home automation networks characterised by the type of home appliance used
    • H04L2012/2849Audio/video appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/003Digital PA systems using, e.g. LAN or internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2227/00Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
    • H04R2227/005Audio distribution systems for home, i.e. multi-room use
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/07Applications of wireless loudspeakers or wireless microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W84/00Network topologies
    • H04W84/02Hierarchically pre-organised networks, e.g. paging networks, cellular networks, WLAN [Wireless Local Area Network] or WLL [Wireless Local Loop]
    • H04W84/10Small scale networks; Flat hierarchical networks
    • H04W84/12WLAN [Wireless Local Area Networks]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • General Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Otolaryngology (AREA)
  • Computational Linguistics (AREA)
  • Databases & Information Systems (AREA)
  • Probability & Statistics with Applications (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • User Interface Of Digital Computer (AREA)
  • Quality & Reliability (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Telephonic Communication Services (AREA)
  • Input Circuits Of Receivers And Coupling Of Receivers And Audio Equipment (AREA)
  • Diaphragms For Electromechanical Transducers (AREA)
  • Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)

Abstract

コマンドワード、1又は複数のメディア変数のインスタンス、及び1又は複数のゾーン変数のインスタンスを含む音声入力が受信される。コマンドワードに対応するメディア再生システムコマンドが決定される。1又は複数のメディア変数のインスタンスに対応するメディアコンテンツが識別される。メディア再生システムは、1又は複数のゾーン変数のインスタンスに基づいて、メディアコンテンツに対してメディア再生システムコマンドを実行する。Voice input is received that includes a command word, one or more instances of media variables, and one or more instances of zone variables. A media playback system command corresponding to the command word is determined. Media content corresponding to an instance of one or more media variables is identified. A media playback system executes media playback system commands on media content based on instances of one or more zone variables.

Description

関連出願の相互参照Cross-reference to related applications

本出願は、特許協力条約第8条の下に(i)「メディア再生システムの音声制御(Voice Control of a Media Playback System)」と題する2016年7月29日に出願された米国非仮特許出願第15/223,218号明細書、(ii)「音楽配信サービスの選択(Music Service Selection)」と題する2016年4月14日に出願された米国非仮特許出願第15/098,718号明細書、(iii)「音声検出の部屋補正(Room−Corrected Voice Detection)」と題する2016年4月14日に出願された米国非仮特許出願第15/098,805号明細書、(iv)「ユーザIDに基づくアクション(Action based on User ID)」と題する2016年4月18日に出願された米国非仮特許出願第15/131,776号明細書、(v)「メディア再生システムの音声制御(Voice Control of a Media Playback System)」と題する2016年3月23日に出願された米国仮特許出願第62/312,350号明細書、(vi)「オーディオ応答の再生(Audio Response Playback)」と題する2016年2月22日に出願された米国仮特許出願第62/298,418号明細書、(vii)「音楽配信サービスの選択(Music Service Selection)」と題する2016年2月22日に出願された米国仮特許出願第62/298,425号明細書、(vii)「ネットワーク再生システム及びネットワークマイクロホンシステムを含むメタデータ交換(Metadata Exchange Involving a Networked Playback System and a Networked Microphone System)」と題する2016年2月22日に出願された米国仮特許出願第62/298,350号明細書、(viii)「ネットワークデバイス間のペアリングロスの処理(Handling of Loss of Pairing Between Networked Devices)」と題する2016年2月22日に出願された米国仮特許出願第62/298,388号明細書、(ix)「デフォルト再生デバイス(Default Playback Device(s))」と題する2016年2月22日に出願された米国仮特許出願第62/298,410号明細書、(x)「音声検出の部屋補正(Room−Corrected Voice Detection)」と題する2016年2月22日に出願された米国仮特許出願第62/298,433号明細書、(xi)「コンテンツの混合(Content Mixing)」とする2016年2月22日に出願された米国仮特許出願第62/298,439号明細書、及び(xii)「ユーザIDに基づくアクション(Action based on User ID)」と題する2016年2月22日に出願された米国仮特許出願第62/298,393号明細書に対する優先権の利益を主張するものである。これらの各出願の内容は、その全体を参照によって本明細書に引用するものとする。   This application is a non-provisional patent application filed on July 29, 2016 entitled "Voice Control of a Media Playback System" under Article 8 of the Patent Cooperation Treaty (i). 15 / 223,218, (ii) US Non-Provisional Patent Application No. 15 / 098,718, filed April 14, 2016, entitled "Music Service Selection". Non-Provisional Patent Application No. 15 / 098,805, filed April 14, 2016, entitled "Room-Corrected Voice Detection", (iv) "iv. Action based on user ID (Action based on Ser. No. 15 / 131,776, filed Apr. 18, 2016, entitled (ser ID), (v) “Voice Control of a Media Playback System” U.S. Provisional Patent Application No. 62 / 312,350, filed March 23, 2016, entitled: "(vi) February 22, 2016, entitled" Audio Response Playback "; U.S. Provisional Patent Application No. 62 / 298,418 filed, (vii) U.S. Provisional Patent Application No. 62, filed February 22, 2016, entitled "Music Service Selection". / 298,425 specification, (vii) "Net US Provisional Patent Application No. 62 / 298,350, filed Feb. 22, 2016, entitled "Metadata Exchange Involving a Networked Microphone System", filed on Feb. 22, 2016. US Provisional Patent Application No. 62 / 298,388, filed Feb. 22, 2016, entitled “Handling of Loss of Pairing Between Networked Devices”. Specification, (ix) “Default Playback Device U.S. Provisional Patent Application No. 62 / 298,410 filed Feb. 22, 2016 entitled: s)) (x) 2016 entitled "Room-Corrected Voice Detection" U.S. Provisional Patent Application No. 62 / 298,433, filed February 22, 2016, (xi) U.S. Provisional Patent Application filed on February 22, 2016 entitled "Content Mixing" U.S. Provisional Patent Application No. 62/298, filed February 22, 2016, entitled "Action based on User ID", and application Ser. No. 62 / 298,439, and (xii). Claim the benefit of priority to the 393 specification. The contents of each of these applications are hereby incorporated by reference in their entirety.

本願は、コンシューマ製品に関するものであり、特に、メディア再生に向けられた方法、システム、製品、機能、サービス、および他の要素に関するものや、それらのいくつかの態様に関する。   The present application relates to consumer products, and more particularly to methods, systems, products, features, services and other elements directed to media playback, and some aspects thereof.

2003年に、ソノズ・インコーポレイテッドが最初の特許出願のうちの1つである「複数のネットワークデバイス間のオーディオ再生を同期する方法」と題する特許出願をし、2005年にメディア再生システムの販売を開始するまで、アウトラウド設定におけるデジタルオーディオへのアクセスおよび試聴のオプションは制限されていた。人々は、ソノズ無線HiFiシステムによって、1つ又は複数のネットワーク再生デバイスを介して多数のソースから音楽を体験できるようになっている。スマートフォン、タブレット、又はコンピュータにインストールされたソフトウェアコントロールアプリケーションを通じて、ネットワーク再生デバイスを備えたいずれの部屋においても、人々は自分が望む音楽を再生することができる。また、例えばコントローラを用いて、再生デバイスを備えた各部屋に異なる歌をストリーミングすることもできるし、同期再生のために複数の部屋をグループ化することもできるし、全ての部屋において同期して同じ歌を聞くこともできる。   In 2003, Sonoz Inc. filed a patent application entitled "How to synchronize audio playback between multiple network devices", which is one of the first patent applications, and in 2005 sold a media playback system Until then, the options for accessing and listening to digital audio in out-loud settings were limited. People are able to experience music from multiple sources via one or more network playback devices with the Sonoz Wireless HiFi system. Through a software control application installed on a smartphone, tablet or computer, people can play the music they want in any room equipped with a network playback device. Also, for example, the controller can be used to stream different songs to each room with playback devices, or multiple rooms can be grouped for synchronized playback, or synchronized in all rooms You can listen to the same song.

これまでのデジタルメディアに対する関心の高まりを考えると、試聴体験を更に向上させることができるコンシューマアクセス可能な技術を更に開発することにニーズがある。   Given the growing interest in digital media so far, there is a need to further develop consumer accessible technologies that can further enhance the listening experience.

本明細書で開示されている技術の特徴、態様、および利点は、以下の記載、添付の特許請求の範囲、および添付の図面を参照するとより理解しやすい。   The features, aspects and advantages of the technology disclosed herein are better understood with reference to the following description, the appended claims and the accompanying drawings.

ある実施形態で実施可能な例示的なメデイア再生システムの構成を示す図である。FIG. 1 illustrates an exemplary media playback system configuration that may be implemented in certain embodiments. 本明細書に記載の態様に係る例示的な再生デバイスの機能ブロック図である。FIG. 7 is a functional block diagram of an example playback device in accordance with aspects described herein. 本明細書に記載の態様に係る例示的な制御デバイスの機能ブロック図である。FIG. 6 is a functional block diagram of an exemplary control device in accordance with aspects described herein. 本明細書に記載の態様に係る例示的なコントローラインタフェースを示す図である。FIG. 7 illustrates an exemplary controller interface in accordance with aspects described herein. 本明細書に記載の態様に係る例示的な複数のネットワークデバイスを示す図である。FIG. 6 illustrates an exemplary plurality of network devices in accordance with aspects described herein. 本明細書に記載の態様に係る例示的なネットワークマイクロホンデバイスの機能ブロック図である。FIG. 6 is a functional block diagram of an example network microphone device in accordance with aspects described herein. ネットワークマイクロホンデバイスに周辺環境の音響特性を提供することに関連した例示的なフロー図である。FIG. 6 is an exemplary flow diagram associated with providing a network microphone device with acoustical characteristics of the surrounding environment. ネットワークマイクロホンデバイスに周辺環境の音響特性を提供することに関連した、別の例示的なフロー図である。FIG. 6 is another example flow diagram associated with providing the network microphone device with acoustical characteristics of the surrounding environment. ネットワークマイクロホンデバイスによって受信された音声入力を解釈することに関連した例示的なフロー図である。FIG. 6 is an exemplary flow diagram associated with interpreting voice input received by a network microphone device. 周辺環境の音響特性を決定することに関連した例示的なフロー図である。FIG. 7 is an exemplary flow diagram associated with determining acoustical characteristics of the surrounding environment. 再生デバイスによって再生されるオーディオコンテンツに指向性を付与することに関連した別の例示的なフロー図である。FIG. 6 is another example flow diagram associated with providing directionality to audio content played back by a playback device. 本明細書に記載の態様に係る音楽制御の例示的な方法のフロー図である。FIG. 6 is a flow diagram of an exemplary method of music control according to aspects described herein. 本明細書に記載の態様に係る構成プロセスの例示的なユーザインタフェースを示す図である。FIG. 7 illustrates an exemplary user interface of a configuration process in accordance with aspects described herein. 本明細書に記載の態様に係る構成プロセスの例示的なユーザインタフェースを示す図である。FIG. 7 illustrates an exemplary user interface of a configuration process in accordance with aspects described herein. 本明細書に記載の態様に係る構成プロセスの例示的なユーザインタフェースを示す図である。FIG. 7 illustrates an exemplary user interface of a configuration process in accordance with aspects described herein. 本明細書に記載の態様に係る構成プロセスの例示的なユーザインタフェースを示す図である。FIG. 7 illustrates an exemplary user interface of a configuration process in accordance with aspects described herein. いくつかの実施形態に係る例示的な方法を示す図である。FIG. 7 illustrates an exemplary method in accordance with some embodiments. いくつかの実施形態に係る別の例示的な方法を示す図である。FIG. 7 illustrates another exemplary method in accordance with some embodiments. ネットワークマイクロホンデバイスを介して音楽ストリーミングサービスを識別することに関連した例示的なフロー図である。FIG. 6 is an exemplary flow diagram associated with identifying a music streaming service via a network microphone device. ネットワークマイクロホンデバイスを介して音楽ストリーミングサービスを識別することに関連した別の例示的なフロー図である。FIG. 6 is another example flow diagram associated with identifying a music streaming service via a network microphone device.

図面は、いくつかの例示的な実施形態を説明することを目的としているが、本発明が、図面に示した配置および手段に限定されるものではないことは理解される。   While the drawings are intended to illustrate some exemplary embodiments, it is understood that the invention is not limited to the arrangements and instrumentality shown in the drawings.

I.概要
一般に、音声コマンドは、本明細書で述べているメディア再生システム制御のうちのいずれかの制御を命じるコマンドであってもよい。たとえば、音声コマンドはメディア再生システムに、メディア再生システムにおける1又は複数の再生デバイスを介したメディアコンテンツの再生を命じるコマンドであってもよい。別の実施例では、音声コマンドは、メディア再生システムにおける1又は複数のメディア再生デバイスの再生設定変更を命じるコマンドであってもよい。再生設定には、たとえば再生音量、再生トランスポートの制御、音楽ソースの選択、及びグループ化などが主として含まれ得る。
I. Overview In general, a voice command may be a command that directs control of any of the media playback system controls described herein. For example, the voice command may be a command that instructs the media playback system to play media content via one or more playback devices in the media playback system. In another embodiment, the voice command may be a command to change the playback settings of one or more media playback devices in the media playback system. The playback settings may mainly include, for example, playback volume, playback transport control, music source selection, and grouping.

1つの態様では、本明細書に記載の例は、ネットワークマイクロホンデバイス(NMD)が動作する周辺環境の音響特性をNMDに提供することに関する。NMDは、NMDによって受信される音声コマンドを解釈する際に周辺環境の音響特性を使用してもよい。   In one aspect, the examples described herein relate to providing the NMD with acoustic characteristics of the surrounding environment in which the network microphone device (NMD) operates. The NMD may use the acoustics of the surrounding environment in interpreting voice commands received by the NMD.

NMDは、マイクロホンアレイを介してたとえばスピーチなどの音声入力を受信し、且つ音声入力に基づいて機能を実行するデバイスであってもよい。たとえば、NMDは音声コマンドを受信し、且つその受信した音声コマンドを解釈してもよい。次いで、NMDは、音声コマンドに基づいて機能を実行してもよい。NMDは、具体的には「ストリーミングサービス1」から「アーティスト1」による「トラック1」の「再生」を命じる音声コマンドを受信し、その音声入力がオーディオコンテンツの再生を命じるコマンドであると判定し、次いで「ストリーミングサービス1」から「アーティスト1」によるオーディオの要求された「トラック1」を再生するように促してもよい。他の構成も可能である。   The NMD may be a device that receives audio input, eg, speech, via a microphone array, and performs functions based on the audio input. For example, the NMD may receive a voice command and interpret the received voice command. The NMD may then perform the function based on the voice command. Specifically, the NMD receives an audio command instructing "playback" of "track 1" by "artist 1" from "streaming service 1", and determines that the audio input is a command instructing playback of audio content. Then, "streaming service 1" may prompt to play the requested "track 1" of audio by "artist 1". Other configurations are also possible.

NMDが動作する周辺環境は特定の音響特性を有する可能性がある。この音響特性により、その周辺環境内で音声がどのように伝わるかが定義される。周辺環境の音響特性を様々な方法で決定してもよい。1つの例として、スピーカ及びマイクロホンを備える再生デバイスはスピーカを介してテストトーンを出力し、マイクロホンを介してそのテストトーンを受信し、且つ受信したテストトーンを解析してその周辺環境の音響特性を決定してもよい。別の例では、別のネットワークデバイス(制御デバイス、第1の再生デバイス、又はNMD自体でさえ)が、第2の再生デバイスのスピーカからテストトーンを受信し、且つ受信したテストトーンを解析して、その周辺環境の音響特性を決定するマイクロホンを備えていてもよい。このテストトーンは異なる周波数のオーディオ音であってもよい。これらの音響特性を、再生デバイス又は通信ネットワーク内のコンピューティングデバイスにおいて、オーディオコンテンツ再生時に再生デバイスが使用する目的で格納してもよい。   The surrounding environment in which the NMD operates may have certain acoustic characteristics. The acoustic characteristics define how speech travels within the surrounding environment. The acoustic characteristics of the surrounding environment may be determined in various ways. As one example, a playback device comprising a speaker and a microphone outputs a test tone through the speaker, receives the test tone through the microphone, and analyzes the received test tone to determine the acoustic characteristics of the surrounding environment. You may decide. In another example, another network device (the control device, the first playback device, or even the NMD itself) receives a test tone from the speaker of the second playback device and analyzes the received test tone , A microphone may be provided to determine the acoustic characteristics of the surrounding environment. This test tone may be an audio sound of a different frequency. These acoustic characteristics may be stored at the playback device or computing device in the communication network for use by the playback device in playing back the audio content.

いくつかの例では、部屋の大きさ、部屋の天井の高さ、部屋にある家具などの周辺環境に関する既知の特性に基づいて、音響特性を推定してもよい。異なる特徴を有する部屋の音響特性をデータベースに格納してもよい。データベースに格納される音響特性を、特定の特徴を有する部屋の以前の解析に基づいて決定していてもよい。ユーザは部屋の特徴を入力してもよく、またデータベースはその周辺環境の音響特性を出力してもよい。また、再生デバイスによる使用のために、再生デバイス自体、又はデータベース内にもこの音響特性を格納してもよい。   In some examples, the acoustic characteristics may be estimated based on known characteristics of the surrounding environment, such as the size of the room, the height of the ceiling of the room, and the furniture in the room. The acoustic characteristics of rooms having different characteristics may be stored in a database. The acoustic characteristics stored in the database may be determined based on previous analysis of a room having a particular feature. The user may enter room characteristics and the database may output acoustic characteristics of the surrounding environment. The acoustic characteristics may also be stored on the playback device itself or in a database for use by the playback device.

また、「再生デバイスのキャリブレーション(Playback Device Calibration)」と題する米国非仮特許出願第14/481,511号明細書、「周辺環境に基づくオーディオ設定(Audio Settings Based on Environment)」と題する米国非仮特許出願第14/216,306号明細書、「移動マイクロホンを用いた空間平均化ルームオーディオキャリブレーションのためのハイブリッドテストトーン(Hybrid Test Tone for Space−Averaged Room Audio Calibration Using a Moving Microphone)」と題する米国非仮特許出願第14/805,140号明細書、「メディアシステムにおけるマルチチャネルペアリング(Multi−Channel Pairing in Media System)」と題する米国非仮特許出願第14/825,961号明細書、及び「デバイスの再生キャリブレーションのためのシステム及び方法(System and Method for Device Playback Calibration」と題する米国特許第9,106,192号明細書において、再生デバイスのキャリブレーションに関する様々な例が記載されており、それらの内容は、その全体を参照によって本明細書にそれぞれ引用するものとする。   Also, U.S. Non-Provisional Patent Application No. 14 / 481,511 entitled "Playback Device Calibration", U.S. Non-patent application entitled "Audio Settings Based on Environment". Provisional Patent Application No. 14 / 216,306, "Hybrid Test Tone for Space-Averaged Room Audio Calibration Using a Moving Microphone" US Non-Provisional Patent Application No. 14 / 805,140, entitled "Media System US Non-Provisional Patent Application No. 14 / 825,961 entitled Multi-Channel Pairing in Media System, and System and Method for Device Regeneration Calibration In U.S. Patent No. 9,106,192 entitled "Playback Calibration", various examples of calibration of playback devices are described, the contents of each of which are incorporated herein by reference in their entirety. It shall be.

NMDは、通常マイクロホン応答を介して音声入力を処理することができる。マイクロホン応答は、周波数に対するマイクロホンの感度の指標である。いくつかの実施形態では、NMDはまた、周辺環境の音響特性を使用して音声入力を処理し、音声入力の歪みを補正してもよい。このようにして、音声入力をより良好に解釈することができる。   The NMD can process audio input, usually via microphone responses. Microphone response is a measure of the sensitivity of the microphone to frequency. In some embodiments, the NMD may also process audio input using acoustical characteristics of the surrounding environment to correct for distortion of the audio input. In this way, speech input can be better interpreted.

再生デバイスは周辺環境の音響特性をNMDに提供してもよい。メディア再生システムは複数の再生デバイスを有していてもよいので、音響特性を提供する再生デバイスはNMDの直近にあるデバイスであってもよい。別の例として、音響特性を提供する再生デバイスは同じゾーンにある再生デバイスであってもよい。場合によっては、再生デバイスをNMDと結合(グループ化又はペアリング)してもよい。この結合は、再生デバイスとNMDとが同じ部屋又はゾーン内にあるか、及び/又はコンテンツを同期して再生しているなど、これらが互いに近接していることを示していてもよい。NMDを再生デバイスと結合している場合、結合された再生デバイスから周辺環境の音響特性を受信するように、NMDを配置してもよい。さらに、NMDを移動させて別の再生デバイスと結合する場合、結合先となる他の再生デバイスが、NMDを配置した周辺環境用の新たな音響特性を提供してもよい。   The playback device may provide the NMD with acoustic characteristics of the surrounding environment. Because the media playback system may have multiple playback devices, the playback device providing the acoustic characteristics may be the device in the immediate vicinity of the NMD. As another example, playback devices providing acoustical properties may be playback devices in the same zone. In some cases, playback devices may be combined (grouped or paired) with the NMD. This coupling may indicate that the playback device and the NMD are in the same room or zone, and / or they are close together, such as playing content synchronously. If the NMD is coupled to a playback device, the NMD may be arranged to receive the acoustic characteristics of the surrounding environment from the coupled playback device. Furthermore, if the NMD is moved and coupled to another playback device, the other playback device to which it is coupled may provide new acoustical properties for the NMD's deployed peripheral environment.

NMDは、NMDが配置された周辺環境の音響特性を使用して、自身の動作を改善してもよい。たとえば、NMDは音響特性に基づいてフィルタを定義してもよい。NMDは、自身が受信した音声入力にフィルタを適用して、たとえば音声入力におけるスペクトル歪み、空間歪み、及び時間歪みなどの周辺環境の音響特性を補正してもよい。このようにして、音声入力をより良好に解釈することができる。   The NMD may use its acoustical properties of the surrounding environment in which the NMD is located to improve its operation. For example, the NMD may define a filter based on acoustic characteristics. The NMD may apply filters to the speech input it receives to correct acoustic characteristics of the surrounding environment such as, for example, spectral distortion, spatial distortion, and temporal distortion in the speech input. In this way, speech input can be better interpreted.

多くの状況において、NMDをメディア再生システムに近接して配置することができる。メディア再生システムは、オーディオコンテンツを再生する複数の再生デバイスを備えていてもよい。これらの再生デバイスを家庭内の様々な場所に分散設置していてもよく、これらの場所は家庭における寝室やリビングルームなどのゾーンであってもよい。結果として、NMDは、メディア再生システムによって同時に再生される音楽などのオーディオコンテンツが流れる中で、音声入力を解釈する必要があり得る。   In many situations, the NMD can be placed in close proximity to the media playback system. The media playback system may include multiple playback devices for playing audio content. These playback devices may be distributed at various places in the home, and these places may be zones such as bedrooms and living rooms in the home. As a result, the NMD may need to interpret audio input while audio content, such as music, is played simultaneously by the media playback system.

いくつかの状況では、再生デバイスは、NMDが音声入力にフィルタを適用して周辺環境の音響特性を補正するだけでなく、再生中のオーディオコンテンツを使用して音声入力が良好に分離されるように、NMDに対して再生中のコンテンツに関する通知を提供してもよい。   In some situations, the playback device will not only allow the NMD to apply a filter to the audio input to correct the acoustics of the surrounding environment, but also allow the audio input to be better separated using the audio content being played May provide the NMD with a notification regarding the content being played back.

付加的に、又は代替的に、NMDは音声入力の指向性を決定することが可能であってもよい。この指向性により、音声入力の発信元の方向を定義してもよい。この指向性をメディア再生システムに提供してもよい。メディア再生システムは複数のスピーカを備える。メディア再生システムはこの指向性を使用して、複数のスピーカのオーディオ出力を調整してもよい。たとえば、メディア再生システムは、1又は複数の再生デバイスから発生させるオーディオ音を音声入力の発信元の方向に向けてもよい。これはリスナーが位置する方向であってもよい。他の構成も可能である。   Additionally or alternatively, the NMD may be able to determine the directivity of the speech input. This directivity may define the direction of the source of voice input. This directivity may be provided to the media playback system. The media playback system comprises a plurality of speakers. Media playback systems may use this directivity to adjust the audio output of multiple speakers. For example, the media playback system may direct audio sound emitted from one or more playback devices to the source of the audio input. This may be the direction in which the listener is located. Other configurations are also possible.

別の態様では、本明細書に記載のいくつかの例は音声入力を介してメディア再生システムを制御することを含む。本明細書で提供されるいくつかの例は、ある方法を含んでいてもよい。本方法は、コマンドワード及び1又は複数のメディア変数のインスタンスを含む音声入力を受信するステップ、その音声入力が音楽制御に対応していると判定するステップを含んでいてもよい。本方法は、コマンドワードに対応するコマンドを決定するステップ、音声入力を処理してそのインテントに対応するメディア再生システムのコマンドを識別するステップをさらに含んでいてもよい。音声入力を処理して、1又は複数の音楽変数のインスタンスに関連するメディアコンテンツを識別し、且つメディアコンテンツ内の1又は複数のメディアアイテムを決定してもよい。メディア再生システムに、1又は複数のメディアアイテムに対してコマンドを実行させるようにしてもよい。   In another aspect, some examples described herein include controlling the media playback system via audio input. Some examples provided herein may include certain methods. The method may include the steps of receiving an audio input comprising a command word and an instance of one or more media variables, and determining that the audio input corresponds to music control. The method may further comprise the steps of determining the command corresponding to the command word, processing the voice input and identifying the media playback system command corresponding to the intent. Voice input may be processed to identify media content associated with one or more instances of music variables, and to determine one or more media items within the media content. The media playback system may cause a command to be executed on one or more media items.

他の例では、非一時的なコンピュータ可読媒体を提供している。この非一時的なコンピュータ可読媒体は、コンピューティングデバイスによって実行可能であり、コンピューティングデバイスに機能を実行させる命令を格納している。この機能には、コマンドワード及び1又は複数のメディア変数のインスタンスを含む音声入力を受信すること、その音声入力が音楽制御に対応していると判定することが含まれる。この機能はさらに、コマンドワードに対応するコマンドを決定すること、音声入力を処理してそのインテントに対応するメディア再生システムコマンドを識別することをさらに含んでいてもよい。音声入力を処理して、1又は複数の音楽変数のインスタンスに関連するメディアコンテンツを識別し、且つメディアコンテンツ内の1又は複数のメディアアイテムを決定してもよい。メディア再生システムに、1又は複数のメディアアイテムに対してコマンドを実行させるようにしてもよい。   Another example provides a non-transitory computer readable medium. The non-transitory computer readable medium is executable by the computing device and stores instructions that cause the computing device to perform the function. The functions include receiving an audio input that includes an instance of a command word and one or more media variables, and determining that the audio input corresponds to music control. The function may further include determining the command corresponding to the command word and processing the voice input to identify the media playback system command corresponding to the intent. Voice input may be processed to identify media content associated with one or more instances of music variables, and to determine one or more media items within the media content. The media playback system may cause a command to be executed on one or more media items.

さらに別の例では、あるシステムを提供している。本システムはプロセッサとメモリとを備える。このメモリは、装置によって実行可能であり、本システムに機能を実行させる命令を格納している。この機能には、コマンドワード及び1又は複数のメディア変数のインスタンスを含む音声入力を受信すること、その音声入力が音楽制御に対応していると判定することが含まれる。この機能はさらに、コマンドワードに対応するコマンドを決定すること、音声入力を処理してそのインテントに対応するメディア再生システムコマンドを識別することをさらに含んでいてもよい。音声入力を処理して、1又は複数の音楽変数のインスタンスに関連するメディアコンテンツを識別し、且つメディアコンテンツ内の1又は複数のメディアアイテムを決定してもよい。メディア再生システムに、1又は複数のメディアアイテムに対してコマンドを実行させるようにしてもよい。   In yet another example, a system is provided. The system comprises a processor and a memory. The memory is executable by the device and stores instructions that cause the system to perform the function. The functions include receiving an audio input that includes an instance of a command word and one or more media variables, and determining that the audio input corresponds to music control. The function may further include determining the command corresponding to the command word and processing the voice input to identify the media playback system command corresponding to the intent. Voice input may be processed to identify media content associated with one or more instances of music variables, and to determine one or more media items within the media content. The media playback system may cause a command to be executed on one or more media items.

さらに別の態様では、本明細書に記載の例は、メディア再生システム(或いは、場合によってはその1又は複数のコンポーネント)が音声コマンドを受信すること、ユーザ識別に基づいてメディア再生システムが実行する適切なアクションを決定することを含む。   In yet another aspect, the examples described herein may include the media playback system (or, optionally, one or more components thereof) receiving a voice command, the media playback system executing based on user identification. Including determining the appropriate action.

大音量でメディアコンテンツを聴取することは、家族、友人、及びゲストが参加する団らんの機会となり得る。メディアコンテンツの一例として、トークラジオ、書籍、テレビからの音声、ローカルドライブに保存された音楽、メディアソース(たとえばPandora(登録商標)Radio、Spotify(登録商標)、Slacker(登録商標)、Radio、Google Play(商標)、iTunes Radio)からの音楽、及びその他の可聴素材を挙げることができる。たとえば、家庭では、人々はパーティーやその他の親睦会で音楽を大音量で再生する場合がある。このような環境では、人々は、各聴取ゾーンの音楽を可聴反響音又は可聴異常音を発生させることなく同期できるように、1つの聴取ゾーン又は複数の聴取ゾーンで同時に音楽を再生することを望む場合がある。人々がオーディオ再生デバイス又はシステムの制御を命じる音声コマンドを使用することができれば、そのような体験はさらに充実する可能性がある。たとえば、人々はオーディオコンテンツ、プレイリスト、又は聴取ゾーンを変更したり、プレイリスト若しくは再生キューに音楽トラックを追加したり、或いは再生設定(たとえば再生、一時停止、次のトラック、前のトラック、再生音量、及びイコライゼーションの設定など)を変更したりすることを望む場合がある。   Listening to media content at high volumes can be an opportunity for family, friends, and guests to join. Examples of media content include talk radio, books, audio from television, music stored on a local drive, media sources (eg Pandora® Radio, Spotify®, Slacker®, Radio, Google Music from Play (TM), iTunes Radio), and other audible material can be mentioned. For example, at home, people may play loud music at parties or other social gatherings. In such an environment, people want to play music simultaneously in one listening zone or multiple listening zones so that the music in each listening zone can be synchronized without producing audible echoes or abnormal sounds There is a case. Such experiences can be further enhanced if people can use voice commands to command control of the audio playback device or system. For example, people change audio content, playlists, or listening zones, add music tracks to playlists or play queues, or play settings (eg play, pause, next track, previous track, play It may be desirable to change the volume, equalization settings, etc.).

大音量でメディアコンテンツを聴取することはまた、個人的な体験となり得る。たとえば、個人は朝出勤前に、エクササイズ中に、夜夕食をとる間に、或いは他の時間において終日にわたり、自宅や職場で自ら大音量で音楽を再生することがある。このように個人で体験するために、個人は単一の聴取ゾーン又は範囲に対してオーディオコンテンツの再生を限定することを選択してもよい。個人が聴取ゾーン、オーディオコンテンツ、及び再生設定などの選択を主として命じる音声コマンドを使用できれば、そのような体験はさらに充実する可能性がある。   Listening to media content at high volume can also be a personal experience. For example, an individual may play music loudly at home or at work, before going to the morning, working out, having dinner at night, or at other times all day. In order to experience in this way, the individual may choose to limit the playback of the audio content to a single listening zone or range. Such an experience may be further enhanced if the individual can use voice commands that primarily dictate the selection of listening zones, audio content, and playback settings.

音声コマンドを実行しようとしている人物を特定することも、このような体験の重要な要素となり得る。その人物が誰であるかと、その人物がメディア再生デバイス又はシステムにしてほしいことは何かとに基づいて音声コマンドを実行することが望ましい場合がある。例示として、家庭におけるパーティーや親睦会では、ホスト又は世帯主がオーディオコンテンツ、聴取ゾーン、又は再生設定の変更を命じる音声コマンドを特定のゲストが使用するのを禁止したい場合がある。場合によっては、ホスト又は世帯主がオーディオコンテンツ、聴取ゾーン、又は再生設定の変更を命じる音声コマンドの使用を特定のゲストに許可する一方で、他のゲストに対してはそのような変更の実施を禁止したい場合がある。ユーザプロファイル又は音声構成設定に基づくユーザ識別は、世帯主の音声とゲストの音声とを区別するのに役立つ可能性がある。   Identifying the person attempting to perform a voice command may also be an important element of such an experience. It may be desirable to execute voice commands based on who the person is and what the person wants the media playback device or system to do. As an example, at a home party or social gathering, the host or householder may wish to forbid certain guests from using audio commands, audio zones, listening zones, or voice commands instructing them to change playback settings. In some cases, the host or householder may allow certain guests to use audio commands to change audio content, listening zones, or playback settings while implementing such changes for other guests. You may want to ban it. User identification based on user profiles or voice configuration settings may help to distinguish between householder voice and guest voice.

別の例では、ユーザ識別を使用して、成人の音声と子供の音声とを区別することができる。場合によっては、世帯主が、子供にとって不適切なオーディオコンテンツの聴取を命じる音声コマンドを子供が使用するのを禁止したい可能性がある。他の場合には、世帯主が、聴取ゾーン又は再生設定を子供が変更するのを禁止したい可能性がある。たとえば、世帯主が特定の音量でオーディオコンテンツを聴取し、且つ子供がそのオーディオコンテンツの音量を変更するのを禁止したい場合がある。ユーザ識別は、子供が特定のコンテンツにアクセスしたり、聴取ゾーン又は再生設定を変更したりするのを禁止する、ペアレンタルコントロール設定や制限設定を設定するのに役立つ可能性がある。たとえば、ユーザプロファイル又は音声構成設定に基づくユーザ識別は、その子供が誰であるか、その子供が何を聴取できるか、或いはその子供がどの設定を変更できるかを判定するのに役立つ可能性がある。   In another example, user identification can be used to distinguish between adult speech and child speech. In some cases, a householder may want to prohibit a child from using voice commands that instruct the child to listen to audio content that is inappropriate. In other cases, the householder may want to prohibit children from changing the listening zone or playback settings. For example, a householder may want to listen to audio content at a particular volume and prohibit children from changing the volume of the audio content. User identification may be useful for setting parental control settings or restriction settings that prohibit children from accessing particular content or changing listening zones or playback settings. For example, user identification based on user profile or voice configuration settings may help to determine who the child is, what the child can listen to, or which setting the child can change is there.

さらに別の例では、ユーザ識別を使用して意図しない音声コマンドを防止してもよい。たとえば、世帯主が、テレビ又は他の任意のオーディオコンテンツからの音声が意図せずに音声コマンドをトリガすることを防止したい場合がある。上記と類似しているが異なる、他の多くの例を本明細書に記載しており、音声認識に基づく様々なタイプのアクションを示している。   In yet another example, user identification may be used to prevent unintended voice commands. For example, a householder may want to prevent voice from television or any other audio content from unintentionally triggering a voice command. Many other examples similar to but different from the above are described herein, and illustrate different types of actions based on speech recognition.

本明細書に記載のいくつかの実施形態は、メディア再生システム(或いは、場合によってはその1又は複数のコンポーネント)が音声コマンドを受信すること、ユーザ識別に基づいてメディア再生システムが実行する適切なアクションを決定することを含む。   Some embodiments described herein may be suitable for the media playback system (or, optionally, one or more components thereof) to receive an audio command, the media playback system to execute based on a user identification. Including determining the action.

例示的な構成では、メディア再生システムは単独の、或いはメディア再生システムサーバなどのコンピューティングデバイスと組み合わせた1又は複数のメディア再生デバイスを備える。別の例示的な構成では、メディア再生システムは、ネットワークマイクロホンシステムサーバ及び1又は複数のNMDを備えるか、又はそれらと通信してもよい。さらに別の例示的な構成では、メディア再生システムサーバ及び/又はネットワークマイクロホンシステムサーバは、クラウドベースのサーバシステムであってもよい。これらのデバイス及び/又はサーバの任意の1つ又は組み合わせは、メディア再生システムに対する音声コマンドを受信してもよい。   In an exemplary configuration, the media playback system comprises one or more media playback devices, either alone or in combination with a computing device such as a media playback system server. In another exemplary configuration, the media playback system may comprise or be in communication with a network microphone system server and one or more NMDs. In yet another exemplary configuration, the media playback system server and / or the network microphone system server may be a cloud based server system. Any one or a combination of these devices and / or servers may receive an audio command to the media playback system.

例示的な動作においては、ネットワークマイクロホンシステム単独で、或いはメディア再生システムと共に1又は複数の機能を実行してもよい。たとえば、音声コマンドを受信することは、ネットワークマイクロホンシステムが1又は複数のNMDを介して音声コマンドを受信すること、その音声コマンドをさらなる処理のためにメディア再生システムに送信することを含んでいてもよい。次いで、メディア再生システムは音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。別の場合には、ネットワークマイクロホンシステムは音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドをメディア再生システムに送信してこれを解析し、且つコマンドを識別してもよい。   In exemplary operation, one or more functions may be performed by the network microphone system alone or in conjunction with the media playback system. For example, receiving a voice command may also include the network microphone system receiving a voice command via one or more NMDs, and transmitting the voice command to the media playback system for further processing. Good. The media playback system may then translate the voice command into an equivalent text command and parse the text command to identify the command. In other cases, the network microphone system may translate the voice command into an equivalent text command, send the text command to the media playback system to parse it, and identify the command.

音声コマンドは、本明細書に記載のメディア再生システム制御のうちのいずれかの制御を命じるコマンドであってもよい。たとえば、いくつかの実施形態では、音声コマンドは、メディア再生システムにメディア再生システムの1又は複数の再生デバイスを介したメディアコンテンツの再生を命じるコマンドであってもよい。いくつかの実施形態では、音声コマンドは、メディア再生システムの1又は複数のメディア再生デバイスの再生設定変更を命じるコマンドであってもよい。再生設定には、たとえば再生音量、再生トランスポートの制御、音楽ソースの選択、及びグループ化などが主として含まれ得る。   The voice command may be a command that commands control of any of the media playback system controls described herein. For example, in some embodiments, the voice command may be a command that instructs the media playback system to play media content through one or more playback devices of the media playback system. In some embodiments, the voice command may be a command to change the playback settings of one or more media playback devices of the media playback system. The playback settings may mainly include, for example, playback volume, playback transport control, music source selection, and grouping.

メディア再生システムのコンピューティングデバイスは、音声コマンドを受信した後、その音声コマンドをメディア再生システムの登録ユーザから受信したかどうかを判定してもよい。たとえば、メディア再生システムを家庭内の特定のユーザ若しくは1又は複数のユーザに対して登録してもよい。メディア再生システムのコンピューティングデバイスを、コンピューティングデバイスに格納されたユーザプロファイルに基づいて、音声コマンドを登録ユーザと関連付けるように構成してもよい。登録ユーザはユーザプロファイルを作成し、これをコンピューティングデバイスに格納するようにしてもよい。ユーザプロファイルはユーザ固有の情報を含んでいてもよい。たとえば、ユーザプロファイルはユーザの年齢、位置情報、好みの再生設定、好みのプレイリスト、好みのオーディオコンテンツ、及びそのユーザに設定されたアクセス制限に関する情報、並びにそのユーザの音声を識別する情報などを主として含んでいてもよい。   After receiving the voice command, the computing device of the media playback system may determine whether the voice command has been received from a registered user of the media playback system. For example, the media playback system may be registered for a particular user or one or more users in the home. The computing device of the media playback system may be configured to associate the voice command with the registered user based on a user profile stored on the computing device. The registered user may create a user profile and store it on the computing device. The user profile may include user specific information. For example, the user profile includes the user's age, location information, preference playback settings, preference playlists, preference audio content, and information on access restrictions set for the user, and information identifying the user's voice It may be mainly contained.

メディア再生システムのコンピューティングデバイスを、ユーザによって設定された音声構成設定に基づいて、音声コマンドをあるユーザと関連付けるように構成してもよい。たとえば、メディア再生システムは、ユーザに音声入力又は一連の音声入力を提供するように要求してもよい。次いで、メディア再生システムのコンピューティングデバイスは音声入力を処理し、その音声入力をユーザと関連付け、且つ情報を格納し、これによってメディア再生システムがユーザからの音声コマンドを認識できるようにしてもよい。   The computing device of the media playback system may be configured to associate voice commands with a user based on voice configuration settings set by the user. For example, the media playback system may require the user to provide voice input or a series of voice inputs. The computing device of the media playback system may then process the voice input, associate the voice input with the user, and store information such that the media playback system can recognize voice commands from the user.

いくつかの例では、メディア再生システムのコンピューティングデバイスを、音声コマンドと関連付けられる信頼性レベルを決定するように構成してもよく、これは、音声コマンドを登録ユーザから受信したかどうかを判定するのにさらに役立つ可能性がある。ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   In some examples, the computing device of the media playback system may be configured to determine the confidence level associated with the voice command, which determines whether the voice command has been received from the registered user It may be more useful. The confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

音声コマンドを登録ユーザから受信したと判定したことに応答して、メディア再生システムのコンピューティングデバイスはメディア再生システムに対する指示を構成してもよい。この指示は音声コマンドの内容と、登録ユーザのユーザプロファイル内の情報とに基づいていてもよい。付加的に又は代替的に、この指示は音声コマンドの内容と、コンピューティングデバイスに格納された音声構成設定とに基づいていてもよい。   In response to determining that the voice command has been received from the registered user, the computing device of the media playing system may configure the indication to the media playing system. This instruction may be based on the content of the voice command and the information in the user profile of the registered user. Additionally or alternatively, the indication may be based on the content of the voice command and voice configuration settings stored on the computing device.

本明細書の例に記載しているように、音声コマンドは様々な内容を含んでいてもよい。1つの例では、音声コマンドの内容は、1又は複数の再生デバイスにメディアコンテンツの再生を命じるコマンドを含んでいてもよい。場合によっては、1又は複数の再生デバイスにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、メディア再生システムのコンピューティングデバイスは、1又は複数の再生デバイスに登録ユーザの好みのメディアソース(たとえば、音楽ストリーミングサービス)からメディアコンテンツを取得させる指示を構成してもよい。次いで、コンピューティングデバイスは、メディア再生システムに、メディア再生システムの1又は複数の再生デバイスを介してメディアコンテンツを再生させる指示を構成してもよい。さらに別の例では、1又は複数の再生デバイスにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイスは、(i)登録ユーザの好みの再生設定の1つ又は複数を用いて1又は複数の再生デバイスを構成し、且つ(ii)メディア再生システムを介し、登録ユーザの好みの再生設定を用いて1又は複数の再生デバイスにメディアコンテンツを再生させる指示を含んでいてもよい。   As described in the examples herein, the voice commands may include various content. In one example, the content of the voice command may include a command instructing one or more playback devices to play the media content. In some cases, the computing device of the media playback system registers the user with one or more playback devices based on the command instructing the one or more playback devices to play the media content and the information in the registered user's user profile An instruction may be configured to obtain media content from a preferred media source (e.g., a music streaming service). The computing device may then configure the media playback system to cause the media playback system to play media content via one or more playback devices of the media playback system. In yet another example, based on the command instructing the one or more playback devices to play the media content and the information in the registered user's user profile, the computing device may: Instructions to configure one or more playback devices using one or more and (ii) via the media playback system to play media content on one or more playback devices using the preferred user's playback settings of the registered user May be included.

別の例では、音声コマンドの内容は、1又は複数の再生デバイスにメディアコンテンツの再生を命じるコマンドを含んでいてもよいが、メディア再生システムの特定の聴取ゾーン又は再生ゾーンを特定しない場合がある。音声コマンドの内容と登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイスは、1又は複数の再生デバイスを介し、メディア再生システムの特定の再生ゾーン内で1又は複数の再生デバイスにメディアコンテンツを再生させる指示を構成してもよい。   In another example, the content of the voice command may include a command instructing one or more playback devices to play the media content, but may not specify a particular listening zone or playing zone of the media playing system . Based on the content of the voice command and the information in the registered user's user profile, the computing device may, via one or more playback devices, media to one or more playback devices within a particular playback zone of the media playback system. An instruction to play back the content may be configured.

さらに別の例では、音声コマンドの内容は、メディア再生システムに再生設定の変更を命じるコマンドを含んでいてもよい。音声コマンドの内容と登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイスは、メディア再生システムにおける1又は複数の再生デバイスの再生設定をメディア再生システムに変更させる指示を構成してもよい。   In yet another example, the content of the voice command may include a command instructing the media playback system to change the playback settings. Based on the content of the voice command and the information in the registered user's user profile, the computing device may configure an instruction to cause the media playback system to change the playback settings of one or more playback devices in the media playback system. .

さらに別の例は、異なるユーザから受信した音声コマンドの競合を解決するために、メディア再生システムが優先順位を決定することを含んでいてもよい。たとえば、メディア再生システムは、登録ゲストから受信した音声コマンドが未登録ゲストよりも高い優先度を有するような優先順位を割り当ててもよい。音声コマンドの競合にはたとえば、あるユーザから受信する曲の再生を命じる音声コマンドと、別のユーザから受信するその曲の再生中止を命じる後続の音声コマンドとが含まれ得る。上記と類似しているが異なる、他の多くの実施例を本明細書に記載している。   Yet another example may include the media playback system determining priorities to resolve conflicts of voice commands received from different users. For example, the media playback system may assign a priority such that voice commands received from registered guests have a higher priority than unregistered guests. The voice command competition may include, for example, a voice command instructing to play a song received from one user and a subsequent voice command instructing to stop playing the song received from another user. Many other examples similar to but different from the above are described herein.

別の例では、メディア再生システムは、登録ユーザ又は登録ゲストユーザと関連付けられた起動ワード又は起動フレーズを受信したことに基づいて作動してもよい。起動ワード又は起動フレーズ(たとえば、「ヘイSonos(Hey Sonos)」)を使用して、受信した起動ワードに基づいてユーザからの追加のコマンドをシステムが受け付ける時間枠をトリガしてもよい。たとえば、ホスト又は許可されたゲストは再生キューへの曲の追加を命じる音声コマンドを送信してもよく(たとえば、「ねえSonos、再生キューに曲を追加して(Hey Sonos, let’s queue up songs)」)、これにより、再生キューへの特定の曲の追加を命じる追加の音声コマンドをホスト又は許可されたゲストが送信できる時間枠(たとえば、5分)が開放されてもよい。上記と類似しているが異なる、他の多くの実施例を本明細書に記載している。   In another example, the media playback system may operate based on receiving an activation word or activation phrase associated with a registered user or registered guest user. The activation word or activation phrase (e.g., "Hey Sonos (Hey Sonos)") may be used to trigger a time frame in which the system accepts additional commands from the user based on the received activation word. For example, the host or authorized guest may send a voice command instructing to add a song to the play queue (for example, "Hey Sonos, add a song to the play queue (Hey Sonos, let's queue up songs) "), which may open up a time frame (e.g., 5 minutes) in which the host or authorized guest can send additional voice commands to command the addition of specific songs to the playback queue. Many other examples similar to but different from the above are described herein.

コンピューティングデバイスのいくつかの実施形態では、メディア再生システムに対する指示又は指示一式を構成した後、その指示又は指示一式をメディア再生システムの1又は複数の再生デバイスに送信してもよい。   In some embodiments of the computing device, after constructing the set of instructions or instructions for the media playback system, the set of instructions or instructions may be sent to one or more playback devices of the media playback system.

さらに別の例では、メディア再生システムのコンピューティングデバイスは音声コマンドを子供から受信したかどうかを判定してもよい。ユーザプロファイル又はゲストプロファイル内の情報に基づいて成人と子供とを区別するように、コンピューティングデバイスを構成してもよい。特に、コンピューティングデバイスは、ユーザの音声のトーン又は周波数に基づいて成人と子供とを区別してもよい。   In yet another example, the computing device of the media playback system may determine whether an audio command has been received from a child. The computing device may be configured to distinguish between adults and children based on information in the user profile or guest profile. In particular, the computing device may distinguish between adults and children based on the tone or frequency of the user's voice.

音声コマンドを子供から受信したと判定したことに応答して、1又は複数の再生デバイスに対して、子供にとって不適切となる恐れのある所与のメディアコンテンツの再生を禁止してもよい。場合によっては、コンピューティングデバイス及び/又は1又は複数の再生デバイスに対して、子供による音声コマンドの内容に基づいた再生設定の変更を禁止してもよい。   In response to determining that a voice command has been received from the child, the one or more playback devices may be prohibited from playing the given media content that may be inappropriate for the child. In some cases, it may be possible to prohibit the computing device and / or one or more playback devices from changing playback settings based on the content of the voice command by the child.

さらに別の例では、いくつかのアクションは、メディア再生システムの登録ユーザではなく、ゲストユーザからコマンドを受信したかどうかを判定することに基づいていてもよい。1つの例では、登録ユーザはゲストユーザ用のゲストプロファイルを作成していてもよい。このゲストプロファイルは、ユーザプロファイルに含まれる任意の情報を含んでいてもよい。別の例では、メディア再生システムのコンピューティングデバイスは、音声コマンドを登録ユーザから受信しなかったと判定し、次いで登録ユーザに対してその音声コマンドが登録ユーザ由来のものであるかを問い合わせてもよい。   In yet another example, some actions may be based on determining whether a command has been received from a guest user rather than a registered user of the media playback system. In one example, a registered user may have created a guest profile for a guest user. This guest profile may include any information contained in the user profile. In another example, the computing device of the media playback system may determine that a voice command has not been received from the registered user and may then query the registered user if the voice command is from a registered user .

音声コマンドをゲストユーザから受信したと判定したことに応答して、メディア再生システムのコンピューティングデバイスは、(1)ゲストユーザに対して制限設定を割り当て、(2)音声コマンドの内容とそのゲストユーザに対して割り当てた制限設定とに基づいて、1又は複数の再生デバイスに対する指示を構成し、且つ(3)その指示を1又は複数の再生デバイスに送信してもよい。制限設定は、メディア再生システムの制御を制限する任意の設定であってもよい。   In response to determining that the voice command has been received from the guest user, the computing device of the media playback system assigns (1) restriction settings to the guest user, and (2) the contents of the voice command and the guest user And may configure an indication to the one or more playback devices, and (3) transmit the indication to the one or more playback devices. The restriction setting may be any setting that restricts control of the media playback system.

さらに別の態様では、本明細書に記載の例は、コマンドに基づいて適切なストリーミングサービス(たとえばオーディオトラックをストリーミングする)を識別し、且つこれにアクセスすることに関する。   In yet another aspect, the examples described herein relate to identifying and accessing an appropriate streaming service (eg, streaming audio tracks) based on a command.

ストリーミングサービスを、NMDによって提供される音声コマンドに基づいて識別し、且つこれにアクセスしてもよい。たとえば、NMDは「Pandora(登録商標)で70年代ロックのラジオを再生して(play Pandora(登録商標)70’s rock radio)」という音声コマンドを受信し、その発言が特定のストリーミングサービスからの特定のラジオ局の再生を命じるコマンドであると判定し、次いでそのサービスからの当該ラジオ局の再生を促してもよい。他の実装形態では、ストリーミングサービスの選択は、制御デバイスのユーザインタフェースを介して入力されるコマンド(たとえばテキスト入力)に基づいていてもよい。他のタイプのコマンドも可能である。   Streaming services may be identified and accessed based on voice commands provided by the NMD. For example, NMD receives an audio command "play Pandora 70's rock radio with Pandora (play Pandora 70's rock radio)" and the message is from a particular streaming service It may be determined that it is a command instructing playback of a specific radio station, and then it may prompt playback of the radio station from the service. In other implementations, the selection of streaming service may be based on commands (eg, text input) input via the control device's user interface. Other types of commands are also possible.

別の例では、ユーザがアクセスを望むストリーミングサービスをコマンドがはっきりと指定しない場合がある。たとえば、ユーザは「クイーンの曲を再生して(play Queen)」又は「70年代ロックを再生して(play 70’s rock)」などのより包括的なコマンドを発行する場合がある。このような場合、既存のシステムでは、どのコンテンツタイプの再生をユーザが望んでいるのか(すなわちアーティストのクイーンなのか、又はアルバムの『クイーン(Queen)』なのか、或いは70年代ロックのラジオ局なのか、又は「ベストオブ」アルバムなのか)を区別する能力に限界がある。また、このようなシステムは、ユーザが意図したコンテンツタイプを各種ストリーミングサービスのコンテンツタイプの機能(すなわちどのサービスがラジオ局、アーティスト、及びアルバムを再生できるか)と合致させることができない。   In another example, the command may not explicitly specify the streaming service that the user wants to access. For example, a user may issue a more comprehensive command such as "play Queen's song" or "play 70's rock". In such a case, in the existing system, which content type the user wants to play back (ie the artist's queen, or the album 'Queen', or a 70's rock radio station? There is a limit to the ability to distinguish between the two or the "best of" album. Also, such a system can not match the content type intended by the user with the content type features of the various streaming services (ie which services can play radio stations, artists and albums).

利用可能なコンテンツ量及びストリーミングサービスの数が絶えず増加していることを考慮すると、ユーザコマンドに基づいてユーザに提供するコンテンツタイプに合致した所望のストリーミングサービスをインテリジェントに選択できるシステムが必要とされている。   Given the ever increasing amount of content available and the number of streaming services, there is a need for a system that can intelligently select a desired streaming service that matches the content type provided to the user based on user commands. There is.

1つの例では、ストリーミングサービスの選択を、複数のネットワーク対応デバイスを含むネットワーク構成によって遂行してもよい。このネットワーク構成はコマンドを受信し、処理し、且つ解析するNMD、再生デバイス、コンピューティングデバイス、及び/又は制御デバイス(たとえばタブレットやスマートフォン)を含んでいてもよい。この構成は、受信したコマンドの処理及び解析に基づいて、1又は複数の音楽コンテンツ配信サーバからのオーディオコンテンツを取得及び/又は要求することをさらに含んでいてもよい。その後、コマンドに基づいてオーディオ再生体験をもたらすために、オーディオコンテンツをNMD、制御デバイス、及び/又は任意の数の再生デバイスによって取得してもよい。また、ネットワーク構成は他の形態をとっていてもよい。   In one example, the selection of streaming services may be accomplished by a network configuration that includes multiple network enabled devices. The network configuration may include an NMD that receives, processes, and analyzes commands, a playback device, a computing device, and / or a control device (eg, a tablet or a smartphone). The configuration may further include obtaining and / or requesting audio content from the one or more music content distribution servers based on processing and analysis of the received command. The audio content may then be obtained by the NMD, the control device, and / or any number of playback devices to provide an audio playback experience based on the command. Also, the network configuration may take other forms.

別の例では、選択はいくつかの基準それぞれに基づいて、或いはこれらを組み合わせたものに基づいていてもよい。ある場合には、ストリーミングサービスの選択は、コマンドによって指定されるコンテンツタイプ(たとえば曲、ジャンル、ラジオ局)と特定のストリーミングサービスが指定されたコンテンツタイプをサポートしているかどうかに依存していてもよい。そのような場合、コンテンツタイプのロジックを使用して、コマンド又はコマンドの一部をコンテンツタイプと関連付けてもよい。次いで、ロジックを通じて識別されたコンテンツタイプを、利用可能なコンテンツタイプを有するストリーミングサービスにマッピングしてもよい。コマンドを通じて指定されるコンテンツタイプの解析を、他の様々な方法で実行してもよい。   In another example, the selection may be based on each of several criteria, or a combination of these. In some cases, the choice of streaming service depends on the content type specified by the command (eg songs, genres, radio stations) and whether the particular streaming service supports the specified content type Good. In such cases, content type logic may be used to associate a command or portion of a command with the content type. The content types identified through logic may then be mapped to streaming services having available content types. Analysis of content types specified through commands may be performed in various other ways.

さらに別の例では、ストリーミングサービスの選択は、ユーザのストリーミングサービスの嗜好性を取り入れることができるユーザ履歴に一部基づいていてもよい。このユーザ嗜好性は、主としてゾーン毎の基準や再生回数が最も多いコンテンツタイプなどに基づいていてもよい。さらに、地理的データ、人口統計データ、及び気象タイプのデータを含むが、これらに限定されない様々な形態の「外部」データを引用してもよい。選択に影響する他のタイプの基準を設けていてもよい。   In yet another example, the selection of streaming service may be based in part on a user history that can incorporate the user's streaming service preferences. This user preference may be mainly based on the criteria for each zone, the content type with the largest number of times of reproduction, or the like. Additionally, various forms of "external" data may be cited including, but not limited to, geographic data, demographic data, and weather type data. Other types of criteria may be provided to influence the selection.

ストリーミングサービスを選択することに加えて、ユーザコマンドの処理によって別の通知が出力されることがある。そのような場合、本システムは、コマンドによって指定されるコンテンツタイプを再生できるストリーミングサービスの提案を出力してもよい。別の例では、本システムは「コンテンツが利用できない」という通知を出力してもよい。そのような通知は、ネットワークマイクロホンデバイス、コントローラで出力されるか、又はNMD若しくはコントローラを介して1又は複数の再生デバイスで出力されてもよい。   In addition to selecting a streaming service, processing of user commands may output another notification. In such a case, the system may output a streaming service proposal that can play the content type specified by the command. In another example, the system may output a "content not available" notification. Such notification may be output at the network microphone device, the controller, or at one or more playback devices via the NMD or controller.

様々な選択基準は、各種ストリーミングサービスの信頼性メトリックを決定するためのアルゴリズムの入力として役立つ可能性がある。信頼性メトリックは、特定のストリーミングサービスがユーザが聴取したいと望むものであるかどうかを示すものであってもよい。たとえば、信頼性レベルは、ストリーミングサービスに対して割り当てられる確率値又はパーセンテージ(たとえば1〜100)であってもよい。1つの実施例では、最高信頼性メトリックを有するストリーミングサービスをストリーミングのために指定してもよい。別の場合には、算出された最高信頼性メトリックが閾値信頼値を超えない場合、或いは上位N個の信頼性レベルが互いに特定の範囲内にある場合に、エラー状態をトリガしてもよい。そのような場合、エラー状態を受けてネットワークマイクロホンデバイスは、(1)「コンテンツが利用できない」という通知を出力し、(2)ユーザにコマンドを繰り返すか、又はこれを詳細指定するように要求し、且つ(3)主として好みのサービスパートナー又はデフォルトサービスなどによってオーディオを再生させてもよい。この信頼性メトリックを、他の多くの方法で各種使用してもよい。   Various selection criteria may serve as input for an algorithm to determine the reliability metrics of the various streaming services. The reliability metric may indicate whether a particular streaming service is what the user wants to listen to. For example, the confidence level may be a probability value or a percentage (eg, 1-100) assigned to the streaming service. In one embodiment, the streaming service with the highest confidence metric may be designated for streaming. In other cases, an error condition may be triggered if the calculated highest confidence metric does not exceed the threshold confidence value, or if the top N confidence levels are within a certain range of one another. In such a case, in response to an error condition, the network microphone device outputs (1) a notification that "content is not available" and (2) requests the user to repeat the command or to specify this in detail And (3) The audio may be played mainly by a service partner or default service of your choice. This reliability metric may be used in various other ways.

本明細書に記載の幾つかの例は、「ユーザ」及び/又は他の実体のような任意の主体によって行われる機能について言及するが、このことは単に例示目的であると理解されるべきである。特許請求の範囲は、特許請求の範囲自体の記載によって明示的に要請されない限り、そのような例示の主体の動作であることを要請するものと解釈されてはならない。当業者にとって、本開示には他の複数の実施形態が含まれることは理解されるであろう。   Although some examples described herein refer to functions performed by any entity, such as "user" and / or other entities, it should be understood that this is merely for illustrative purposes. is there. The claims should not be construed as requiring operation of such example entities unless expressly stated by the claims themselves. Those skilled in the art will appreciate that the present disclosure includes other embodiments.

II.動作環境の例
図1は、本明細書で開示されている1つ又は複数の実施形態で実施可能又は実装可能なメディア再生システム100の例示的な構成を示す。図示されるように、メディア再生システム100は、複数の部屋および空間、例えば、主寝室、オフィス、ダイニングルーム、およびリビングルームを有する例示的なホーム環境と関連付けられている。図1の例に示されるように、メディア再生システム100は、再生デバイス102−124、制御デバイス126および128、有線又は無線のネットワークルータ130を含む。
II. Exemplary Operating Environment FIG. 1 illustrates an exemplary configuration of a media playback system 100 that can or can be implemented in one or more embodiments disclosed herein. As shown, the media playback system 100 is associated with an exemplary home environment having multiple rooms and spaces, eg, a master bedroom, an office, a dining room, and a living room. As shown in the example of FIG. 1, the media playback system 100 includes playback devices 102-124, control devices 126 and 128, and a wired or wireless network router 130.

更に、例示的なメディア再生システム100の異なる構成要素、および異なる構成要素がどのように作用してユーザにメディア体験を提供するかに関しての説明は、以下のセクションで述べられている。本明細書における説明は、概してメディア再生システム100を参照しているが、本明細書で述べられている技術は、図1に示されるホーム環境の用途に限定されるものではない。例えば、本明細書で述べられている技術は、マルチゾーンオーディオが望まれる環境、例えば、レストラン、モール、又は空港のような商業的環境、スポーツ用多目的車(SUV)、バス又は車のような車両、船、若しくはボード、飛行機などの環境において有益である。   Further, descriptions of the different components of the exemplary media playback system 100 and how the different components work to provide the user with a media experience are described in the following sections. Although the description herein generally refers to the media playback system 100, the techniques described herein are not limited to the use of the home environment shown in FIG. For example, the techniques described herein may be used in environments where multi-zone audio is desired, such as commercial environments such as restaurants, malls, or airports, sport utility vehicles (SUVs), buses or vehicles. It is useful in the environment of vehicles, ships, or boards, airplanes, etc.

a.例示的な再生デバイス
図2は、図1のメディア再生システム100の再生デバイス102−124の1つ又は複数を構成する例示的な再生デバイス200の機能ブロック図を示す。再生デバイス200は、プロセッサ202、ソフトウェアコンポーネント204、メモリ206、オーディオ処理コンポーネント208、オーディオアンプ210、スピーカ212、ネットワークインタフェース214、およびマイクロホン220を含んでもよい。ネットワークインタフェース214は、無線インタフェース216および有線インタフェース218を含む。ある場合では、再生デバイス200は、スピーカ212を含まないが、再生デバイス200を外部スピーカに接続するためのスピーカインタフェースを含んでいてもよい。別の場合では、再生デバイス200は、スピーカ212もオーディオアンプ210も含まないが、再生デバイス200を外部オーディオアンプ又はオーディオビジュアルレシーバーに接続するためのオーディオインタフェースを含んでもよい。
a. Exemplary Playback Device FIG. 2 shows a functional block diagram of an exemplary playback device 200 that configures one or more of the playback devices 102-124 of the media playback system 100 of FIG. The playback device 200 may include a processor 202, a software component 204, a memory 206, an audio processing component 208, an audio amplifier 210, a speaker 212, a network interface 214, and a microphone 220. Network interface 214 includes wireless interface 216 and wired interface 218. In some cases, the playback device 200 does not include the speaker 212, but may include a speaker interface for connecting the playback device 200 to an external speaker. In other cases, the playback device 200 does not include the speaker 212 or the audio amplifier 210, but may include an audio interface for connecting the playback device 200 to an external audio amplifier or an audio visual receiver.

ある例では、プロセッサ202は、メモリ206に記憶された命令に基づいて、入力データを処理するように構成されたクロック駆動コンピュータコンポーネントであってもよい。メモリ206は、プロセッサ202によって実行可能な命令を記憶するように構成された非一時的なコンピュータ可読記録媒体であってもよい。例えば、メモリ206は、ある機能を実行するためにプロセッサ202によって実行可能なソフトウェアコンポーネント204の1つ又は複数をロードすることができるデータストレージであってもよい。ある例では、機能は、再生デバイス200がオーディオソース又は別の再生デバイスからオーディオデータを読み出すステップを含んでもよい。別の例では、機能は、再生デバイス200がネットワーク上の別のデバイス又は再生デバイスにオーディオデータを送信するステップを含んでもよい。更に別の例では、機能は、マルチチャンネルオーディオ環境を作るために、再生デバイス200と1つ又は複数の再生デバイスとをペアリングするステップを含んでもよい。   In one example, processor 202 may be a clocked computer component configured to process input data based on instructions stored in memory 206. Memory 206 may be a non-transitory computer readable storage medium configured to store instructions executable by processor 202. For example, memory 206 may be data storage capable of loading one or more of software components 204 executable by processor 202 to perform certain functions. In one example, the function may include the playback device 200 reading audio data from an audio source or another playback device. In another example, the function may include the playback device 200 transmitting audio data to another device on the network or to the playback device. In yet another example, the functionality may include pairing playback device 200 with one or more playback devices to create a multi-channel audio environment.

ある機能は、再生デバイス200が、1つ又は複数の他の再生デバイスと、オーディオコンテンツの再生を同期するステップを含む。再生を同期している間、再生デバイス200によるオーディオコンテンツの再生と1つ又は複数の他の再生デバイスによる再生との間の遅延を、リスナーが気づかないことが好ましい。「複数の独立クロックデジタルデータ処理デバイス間の動作を同期するシステムおよび方法」と題する米国特許第8,234,395号が本明細書に参照として援用されており、それは再生デバイス間のオーディオ再生を同期することが述べられたより詳細な例を提供している。   Certain functions include the playback device 200 synchronizing playback of audio content with one or more other playback devices. Preferably, while synchronizing playback, the listener is not aware of the delay between playback of audio content by playback device 200 and playback by one or more other playback devices. U.S. Pat. No. 8,234,395 entitled "System and Method for Synchronizing Operation Between Multiple Independent Clock Digital Data Processing Devices" is incorporated herein by reference, which provides for audio playback between playback devices. It provides a more detailed example where synchronization is stated.

更に、メモリ206は、データを記憶するように構成されていてもよい。データは、例えば、1つ又は複数のゾーンおよび/又はゾーングループに一部として含まれる再生デバイス200などの再生デバイス200、再生デバイス200によりアクセス可能なオーディオソース、又は再生デバイス200(又は他の再生デバイス)と関連付け可能な再生キュー、に関連付けられている。データは、定期的に更新され、再生デバイス200の状態を示す1つ又は複数の状態変数として記憶されてもよい。また、メモリ206は、メディアシステムの他のデバイスの状態と関連付けられたデータを含んでもよく、デバイス間で随時共有することによって、1つ又は複数のデバイスが、システムと関連するほぼ直近のデータを有してもよい。他の実施形態も可能である。   Additionally, memory 206 may be configured to store data. The data may be, for example, a playback device 200, such as a playback device 200 included as part of one or more zones and / or zone groups, an audio source accessible by the playback device 200, or a playback device 200 (or other playback Associated with the playback queue, which can be associated with the device). The data may be updated periodically and stored as one or more state variables that indicate the state of the playback device 200. Memory 206 may also include data associated with the state of other devices of the media system, with one or more devices at or near their most recent data associated with the system, by sharing between devices at any time. You may have. Other embodiments are also possible.

オーディオ処理コンポーネント208は、とりわけ、1つ又は複数のデジタル−アナログ変換器(DAC)、オーディオ処理コンポーネント、オーディオ強化コンポーネント、又はデジタルシグナルプロセッサ(DSP)などを含んでいてもよい。ある実施形態では、1つ又は複数のオーディオ処理コンポーネント208は、プロセッサ202のサブコンポーネントであってもよい。ある実施形態では、オーディオコンテンツが、オーディオ処理コンポーネント208によって処理および/又は意図的に変更されることによって、オーディオ信号を生成してもよい。生成されたオーディオ信号は、オーディオアンプ210に送信され、増幅され、スピーカ212を通じて再生される。特に、オーディオアンプ210は、1つ又は複数のスピーカ212を駆動できるレベルまでオーディオ信号を増幅するように構成されたデバイスを含んでもよい。スピーカ212は、独立した変換器(例えば、「ドライバ」)又は1つ又は複数のドライバを内包する筐体を含む完全なスピーカシステムを備えてもよい。スピーカ212に備えられたあるドライバは、例えば、サブウーファー(例えば、低周波用)、ミドルレンジドライバ(例えば、中間周波用)、および/又はツイーター(高周波用)を含んでもよい。ある場合では、1つ又は複数のスピーカ212のそれぞれの変換器は、オーディオアンプ210の対応する個々のオーディオアンプによって駆動されてもよい。再生デバイス200で再生するアナログ信号を生成することに加えて、オーディオ処理コンポーネント208は、オーディオコンテンツを処理し、そのオーディオコンテンツを1つ又は複数の他の再生デバイスに再生させるために送信する。   Audio processing component 208 may include, among others, one or more digital-to-analog converters (DACs), audio processing components, audio enhancement components, or digital signal processors (DSPs). In one embodiment, one or more audio processing components 208 may be subcomponents of processor 202. In one embodiment, audio content may be processed and / or intentionally modified by audio processing component 208 to generate an audio signal. The generated audio signal is transmitted to the audio amplifier 210, amplified, and reproduced through the speaker 212. In particular, audio amplifier 210 may include a device configured to amplify the audio signal to a level that can drive one or more speakers 212. The speaker 212 may comprise a complete speaker system, including an independent transducer (e.g., a "driver") or a housing that encloses one or more drivers. Some drivers provided in the speaker 212 may include, for example, a subwoofer (for example, for low frequencies), a middle range driver (for example, for intermediate frequencies), and / or a tweeter (for high frequencies). In some cases, each transducer of one or more speakers 212 may be driven by a corresponding individual audio amplifier of audio amplifier 210. In addition to generating an analog signal for playback on playback device 200, audio processing component 208 processes the audio content and transmits the audio content for playback to one or more other playback devices.

再生デバイス200によって処理および/又は再生されるオーディオコンテンツは、外部ソース、例えば、オーディオライン−イン入力接続(例えば、オートディテクティング3.5mmオーディオラインイン接続)又はネットワークインタフェース214を介して、受信されてもよい。   Audio content to be processed and / or reproduced by the reproduction device 200 is received via an external source, eg, an audio line-in input connection (eg, auto-detecting 3.5 mm audio line-in connection) or the network interface 214. May be

ネットワークインタフェース214は、データネットワーク上で再生デバイス200と1つ又は複数の他のデバイスとの間のデータフローを可能にするように構成されてもよい。このように、再生デバイス200は、再生デバイスと通信する1つ又は複数の他の再生デバイス、ローカルエリアネットワーク内のネットワークデバイス、又は例えば、インターネット等のワイドエリアネットワーク上のオーディオコンテンツソースから、データネットワークを介してオーディオコンテンツを受信するように構成されていてもよい。ある例では、再生デバイス200によって送信および受信されたオーディオコンテンツおよび他の信号は、インターネットプロトコル(IP)に基づくソースアドレスおよびIPに基づく宛先アドレスを含むデジタルパケットの形で送信されてもよい。そのような場合、ネットワークインタフェース214は、デジタルパケットデータを解析することによって、再生デバイス200宛てのデータを、再生デバイス200によって適切に受信して処理することができる。   Network interface 214 may be configured to enable data flow between playback device 200 and one or more other devices over a data network. Thus, the playback device 200 may be a data network from one or more other playback devices in communication with the playback device, a network device in a local area network, or an audio content source on a wide area network such as, for example, the Internet. May be configured to receive audio content. In one example, audio content and other signals sent and received by the playback device 200 may be sent in the form of digital packets that include an Internet Protocol (IP) based source address and an IP based destination address. In such a case, the network interface 214 can appropriately receive and process data addressed to the playback device 200 by the playback device 200 by analyzing the digital packet data.

図示されるように、ネットワークインタフェース214は、無線インタフェース216と有線インタフェース218とを含んでもよい。無線インタフェース216は、再生デバイス200用のネットワークインタフェース機能を提供し、通信プロトコル(例えば、無線規格IEEE802.11a、802.11b、802.11g、802.11n、802.11ac、802.15、4Gモバイル通信基準などを含む無線基準(規格)のいずれか)に基づいて、他のデバイス(例えば、再生デバイス200に関連付けられたデータネットワーク内の他の再生デバイス、スピーカ、レシーバー、ネットワークデバイス、制御デバイス)と無線通信してもよい。有線インタフェース218は、再生デバイス200用のネットワークインタフェース機能を提供し、通信プロトコル(例えば、IEEE802.3)に基づいて他のデバイスとの有線接続を介して通信してもよい。図2に示されるネットワークインタフェース214は、無線インタフェース216と有線インタフェース218との両方を含んでいるが、ネットワークインタフェース214は、ある実施形態において、無線インタフェースのみか、又は有線インタフェースのみを含んでいてもよい。   As shown, network interface 214 may include wireless interface 216 and wired interface 218. The wireless interface 216 provides a network interface function for the playback device 200 and a communication protocol (eg, wireless standard IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.11n, 802.11ac, 802.15, 4G mobile) Other devices (eg, other playback devices, speakers, receivers, network devices, control devices within the data network associated with the playback device 200) based on any of the wireless standards (standards) including communication standards etc. It may communicate wirelessly. The wired interface 218 provides a network interface function for the playback device 200 and may communicate via a wired connection with other devices based on a communication protocol (eg, IEEE 802.3). Although the network interface 214 shown in FIG. 2 includes both the wireless interface 216 and the wired interface 218, the network interface 214 may, in certain embodiments, include only the wireless interface or only the wired interface. Good.

マイクロホン220を、再生デバイス200の周辺環境の音声を検出するように配置してもよい。たとえば、マイクロホンを、再生デバイスのハウジングの外壁に取り付けてもよい。マイクロホンは、コンデンサマイクロホン、エレクトレットコンデンサマイクロホン、又はダイナミックマイクロホンなどの既知であるか、又は今後開発される任意のタイプのマイクロホンであってもよい。マイクロホンはスピーカ220の周波数範囲の一部に敏感であってもよい。1又は複数のスピーカ220は、マイクロホン220とは逆に動作してもよい。いくつかの態様では、再生デバイス200はマイクロホン220を有していない場合がある。   The microphone 220 may be arranged to detect sound in the environment surrounding the playback device 200. For example, a microphone may be attached to the outer wall of the playback device housing. The microphone may be any type of microphone known or later developed such as a condenser microphone, an electret condenser microphone, or a dynamic microphone. The microphone may be sensitive to part of the frequency range of the speaker 220. The one or more speakers 220 may operate in the opposite direction as the microphones 220. In some aspects, the playback device 200 may not have the microphone 220.

ある例では、再生デバイス200と他の再生デバイスとは、ペアにされて、オーディオコンテンツの2つの別々のオーディオコンポーネントを再生してもよい。例えば、再生デバイス200は、左チャンネルオーディオコンポーネントを再生するように構成される一方、他の再生デバイスは、右チャンネルオーディオコンポーネントを再生するように構成されてもよい。これにより、オーディオコンテンツのステレオ効果を生成するか、又は強化することができる。ペアにされた再生デバイス(「結合再生デバイス」とも言う)は、更に、他の再生デバイスと同期してオーディオコンテンツを再生してもよい。   In one example, playback device 200 and another playback device may be paired to play two separate audio components of audio content. For example, playback device 200 may be configured to play left channel audio components, while other playback devices may be configured to play right channel audio components. This can create or enhance stereo effects of the audio content. Paired playback devices (also referred to as "combined playback devices") may also play audio content in synchronization with other playback devices.

別の例では、再生デバイス200は、1つ又は複数の他の再生デバイスと音響的に統合され、単一の統合された再生デバイス(統合再生デバイス)を形成してもよい。統合再生デバイスは、統合されていない再生デバイス又はペアにされた再生デバイスと比べて、サウンドの処理や再現を異なるように構成することができる。なぜならば、統合再生デバイスは、オーディオコンテンツを再生するスピーカ追加することができるからである。例えば、再生デバイス200が、低周波レンジのオーディオコンテンツを再生するように設計されている場合(例えば、サブウーファー)、再生デバイス200は、全周波数レンジのオーディオコンテンツを再生するように設計された再生デバイスと統合されてもよい。この場合、全周波数レンジの再生デバイスは、低周波の再生デバイス200と統合されたとき、オーディオコンテンツの中高周波コンポーネントのみを再生するように構成されてもよい。一方で低周波レンジの再生デバイス200は、オーディオコンテンツの低周波コンポーネントを再生する。更に、統合再生デバイスは、単一の再生デバイス、又は更に他の統合再生デバイスとペアにされてもよい。   In another example, the playback device 200 may be acoustically integrated with one or more other playback devices to form a single integrated playback device (integrated playback device). The integrated playback device can be configured to process and reproduce sound differently as compared to a non-integrated playback device or paired playback device. This is because the integrated playback device can add a speaker for playing back audio content. For example, if the playback device 200 is designed to play audio content in the low frequency range (eg, a subwoofer), the playback device 200 is designed to play audio content in the full frequency range It may be integrated with the device. In this case, the full frequency range playback device may be configured to play only the mid-high frequency component of the audio content when integrated with the low frequency playback device 200. On the other hand, the low frequency range playback device 200 plays back the low frequency component of the audio content. Furthermore, the integrated playback device may be paired with a single playback device, or even another integrated playback device.

例として、現在、ソノズ・インコーポレイテッドは、「PLAY:1」、「PLAY:3」、「PLAY:5」、「PLAYBAR」、「CONNECT:AMP」、「CONNECT」、および「SUB」を含む再生デバイスを販売提供している。他の過去、現在、および/又は将来のいずれの再生デバイスにおいても、追加的に又は代替的に本明細書で開示された実施例の再生デバイスに実装して使用することができる。更に、再生デバイスは、図2に示された特定の例又は提供されるソノズ製品に限定されないことは理解される。例えば、再生デバイスは、有線又は無線のヘッドホンを含んでもよい。別の例では、再生デバイスは、パーソナルモバイルメディア再生デバイス用のドッキングステーションを含むか、又は、それらと対話してもよい。更に別の例では、再生デバイスは、別のデバイス又はコンポーネント、例えば、テレビ、照明器具、又は屋内又は屋外で使用するためのいくつかの他のデバイスと一体化されてもよい。   As an example, Sonoz Inc. currently plays including "PLAY: 1", "PLAY: 3", "PLAY: 5", "PLAYBAR", "CONNECT: AMP", "CONNECT", and "SUB" We offer devices for sale. Any other past, present, and / or future playback devices may additionally or alternatively be implemented and used in the playback devices of the embodiments disclosed herein. Further, it is understood that the playback device is not limited to the particular example shown in FIG. 2 or the provided Sonoz product. For example, the playback device may include wired or wireless headphones. In another example, the playback device may include or interact with a docking station for a personal mobile media playback device. In yet another example, the playback device may be integrated with another device or component, such as a television, a light fixture, or some other device for indoor or outdoor use.

b.例示的な再生ゾーン構成
図1のメディア再生システム100に戻って、環境は、1つ又は複数の再生ゾーンを有しており、それぞれの再生ゾーンは1つ又は複数の再生デバイスを含んでいる。メディア再生システム100は、1つ又は複数の再生ゾーンで形成されており、後で1つ又は複数のゾーンが追加又は削除して、図1に示す例示的な構成としてもよい。それぞれのゾーンは、異なる部屋又は空間、例えば、オフィス、浴室、主寝室、寝室、キッチン、ダイニングルーム、リビングルーム、および/又はバルコニーに基づく名前が与えられてもよい。ある場合では、単一の再生ゾーンは複数の部屋又は空間を含んでいてもよい。別の場合では、単一の部屋又は空間は、複数の再生ゾーンを含んでいてもよい。
b. Exemplary Playback Zone Configuration Returning to the media playback system 100 of FIG. 1, the environment includes one or more playback zones, each playback zone including one or more playback devices. The media playback system 100 is formed of one or more playback zones, and one or more zones may be added or deleted later to provide the exemplary configuration shown in FIG. Each zone may be given a name based on a different room or space, for example an office, a bathroom, a master bedroom, a bedroom, a kitchen, a dining room, a living room, and / or a balcony. In some cases, a single regeneration zone may include multiple rooms or spaces. In another case, a single room or space may include multiple playback zones.

図1に示されるように、バルコニー、ダイニングルーム、キッチン、浴室、オフィス、および寝室のゾーンのそれぞれは、1つの再生デバイスを有する一方、リビングルームおよび主寝室のゾーンのそれぞれは、複数の再生デバイスを有する。リビングルームゾーンは、再生デバイス104,106,108,110が、別々の再生デバイスとしてか、1つ又は複数の結合再生デバイスとしてか、1つ又は複数の統合再生デバイスとしてか、又はこれらのいずれかの組み合わせで、オーディオコンテンツを同期して再生するように構成されてもよい。同様に、主寝室の場合では、再生デバイス122および124が、別々の再生デバイスとしてか、結合再生デバイスとしてか、又は統合再生デバイスとして、オーディオコンテンツを同期して再生するように構成されてもよい。   As shown in FIG. 1, each of the balcony, dining room, kitchen, bathroom, office, and bedroom zones have one playback device, while each of the living room and master bedroom zones has a plurality of playback devices. Have. The living room zone may be either playback devices 104, 106, 108, 110 as separate playback devices, as one or more combined playback devices, as one or more integrated playback devices, or any of these In combination, the audio content may be configured to be synchronized and played back. Similarly, in the case of the master bedroom, the playback devices 122 and 124 may be configured to play audio content synchronously as separate playback devices, as combined playback devices, or as integrated playback devices. .

ある例では、図1の環境における1つ又は複数の再生ゾーンは、それぞれ異なるオーディオコンテンツを再生している。例えば、ユーザは、バルコニーゾーンでグリルしながら、再生デバイス102によって再生されるヒップホップ音楽を聞くことができる。一方、別のユーザは、キッチンゾーンで食事を準備しながら、再生デバイス114によって再生されるクラシック音楽を聞くことができる。別の例では、再生ゾーンは、同じオーディオコンテンツを別の再生ゾーンと同期して再生してもよい。例えば、ユーザがオフィスゾーンにいる場合、オフィスゾーンの再生デバイス118が、バルコニーの再生デバイス102で再生されている音楽と同じ音楽を再生してもよい。そのような場合、再生デバイス102および118は、ロック音楽を同期して再生しているため、ユーザは、異なる再生ゾーン間を移動してもアウト−ラウドで再生されるオーディオコンテンツをシームレス(又は少なくともほぼシームレス)に楽しむことができる。再生ゾーン間の同期は、前述の米国特許第8,234,395号で述べられているような再生デバイス間の同期と同様の方法で行ってもよい。   In one example, one or more playback zones in the environment of FIG. 1 are playing different audio content. For example, the user can listen to hip-hop music played by the playback device 102 while grilling in the balcony zone. Meanwhile, another user can listen to the classical music played by the playback device 114 while preparing a meal in the kitchen zone. In another example, the playback zone may play the same audio content in synchronization with another playback zone. For example, if the user is in the office zone, the office zone playback device 118 may play the same music as the music being played on the balcony playback device 102. In such a case, the playback devices 102 and 118 are playing the rock music synchronously, so that the user moves between different playback zones seamlessly (or at least the audio content played out-loudly). Almost seamless). Synchronization between playback zones may be performed in the same manner as synchronization between playback devices as described in the aforementioned U.S. Patent No. 8,234,395.

上述したように、メディア再生システム100のゾーン構成は、動的に変更してもよく、ある実施形態では、メディア再生システム100は、複数の構成をサポートする。例えば、ユーザが1つ又は複数の再生デバイスを、物理的にゾーンに移動させるか、又はゾーンから移動させる場合、メディア再生システム100は変更に対応するように再構成されてもよい。例えば、ユーザが再生デバイス102をバルコニーゾーンからオフィスゾーンに物理的に移動させる場合、オフィスゾーンは、再生デバイス118と再生デバイス102との両方を含んでもよい。必要に応じて、制御デバイス、例えば制御デバイス126と128とを介して、再生デバイス102が、ペアにされるか、又はオフィスゾーンにグループ化されるか、および/又はリネームされてもよい。一方、1つ又は複数の再生デバイスが、再生ゾーンを未だ設定していないホーム環境において、ある領域に移動させられた場合、新しい再生ゾーンがその領域に形成されてもよい。   As mentioned above, the zone configuration of media playback system 100 may be changed dynamically, and in an embodiment, media playback system 100 supports multiple configurations. For example, if a user physically moves one or more playback devices into or out of a zone, media playback system 100 may be reconfigured to accommodate changes. For example, if the user physically moves the playback device 102 from the balcony zone to the office zone, the office zone may include both the playback device 118 and the playback device 102. If desired, playback devices 102 may be paired, or grouped into office zones, and / or renamed, via control devices, eg, control devices 126 and 128. On the other hand, if one or more playback devices are moved to an area in a home environment where the playback zone has not yet been set, a new playback zone may be formed in that area.

更に、メディア再生システム100の異なる再生ゾーンは、動的にゾーングループに組み合わされてもよいし、又は別々の再生ゾーンに分割されてもよい。例えば、ダイニングルームゾーンとキッチンゾーン114とがディナーパーティ用のゾーングループに組み合わされることによって、再生デバイス112と114とがオーディオコンテンツを同期して再生することができる。一方、あるユーザがテレビを見たい一方、他のユーザがリビングルーム空間の音楽を聞きたい場合、リビングルームゾーンが、再生デバイス104を含むテレビゾーンと、再生デバイス106,108,110を含むリスニングゾーンと、に分けられてもよい。   Further, different playback zones of the media playback system 100 may be dynamically combined into zone groups or may be divided into separate playback zones. For example, by combining the dining room zone and the kitchen zone 114 into a dinner party zone group, the playback devices 112 and 114 can synchronize and play audio content. On the other hand, if one user wants to watch TV while another user wants to listen to music in the living room space, the living room zone includes a television zone including the playback device 104 and a listening zone including the playback devices 106, 108, 110. And may be divided.

c.例示的な制御デバイス
図3は、メディア再生システム100の制御デバイス126と128とうちの一方又は両方を構成する例示的な制御デバイス300の機能ブロック図を示す。図示されるように、制御デバイス300は、プロセッサ302、メモリ304、ネットワークインタフェース306、ユーザインタフェース308、マイクロホン310、及びソフトウェアコンポーネント312を含んでもよい。ある例では、制御デバイス300は、メディア再生システム100専用の制御デバイスであってもよい。別の例では、制御デバイス300は、メディア再生システムコントローラアプリケーションソフトウェアをインストールされたネットワークデバイス、例えば、iPhone(登録商標)、iPad(登録商標)、又は任意の他のスマートフォン、タブレットあるいはネットワークデバイス(例えば、PC又はMac(登録商標)などのネットワークコンピュータ)であってもよい。
c. Exemplary Control Device FIG. 3 shows a functional block diagram of an exemplary control device 300 that configures control device 126 and / or 128 of media playback system 100. As shown, control device 300 may include processor 302, memory 304, network interface 306, user interface 308, microphone 310, and software components 312. In one example, control device 300 may be a control device dedicated to media playback system 100. In another example, the control device 300 may be a network device with media playback system controller application software installed, such as an iPhone®, iPad®, or any other smartphone, tablet or network device (eg, , PC or a network computer such as Mac (registered trademark).

プロセッサ302は、メディア再生システム100のユーザアクセス、コントロール、および構成を可能にすることに関する機能を実行するように構成されてもよい。メモリ304は、プロセッサ302によって実行可能な1つ又は複数のソフトウェアコンポーネントを、それらの機能を実行するために、搭載可能なデータストレージであってもよい。また、メモリ304は、メディア再生システムコントローラアプリケーションソフトウェアと、メディア再生システム100とユーザとに関連付けられた他のデータを記憶するように構成されていてもよい。   Processor 302 may be configured to perform functions related to enabling user access, control, and configuration of media playback system 100. Memory 304 may be one or more software components that can be executed by processor 302 as data storage that can be loaded to perform their functions. Memory 304 may also be configured to store media playback system controller application software and other data associated with media playback system 100 and the user.

ある例では、ネットワークインタフェース306は、工業規格(例えば、赤外線、無線、IEEE802.3などの有線規格、IEEE802.11a、802.11b、802.11g、802.11n、802.11ac、802.15などの無線規格、4G通信規格など)に基づいてもよい。ネットワークインタフェース306においては、制御デバイス300がメディア再生システム100内の他のデバイスと通信するための手段を提供してもよい。ある例では、データおよび情報(例えば、状態変数)は、ネットワークインタフェース306を介して制御デバイス300と他のデバイスとの間で通信されてもよい。例えば、メディア再生システム100における再生ゾーンおよびゾーングループの構成は、制御デバイス300によって、再生デバイス又は別のネットワークデバイスから受信されてもよいし、あるいは制御デバイス300によって、ネットワークインタフェース306を介して別の再生デバイス又はネットワークデバイスに送信されてもよい。ある場合では、他のネットワークデバイスは、別の制御デバイスであってもよい。   In one example, the network interface 306 may be an industrial standard (eg, infrared, wireless, wired standard such as IEEE 802.3, IEEE 802.11a, 802.11b, 802.11g, 802.11n, 802.11n, 802.15, etc. Wireless standard, 4G communication standard, etc.). Network interface 306 may provide a means for control device 300 to communicate with other devices within media playback system 100. In an example, data and information (eg, state variables) may be communicated between control device 300 and other devices via network interface 306. For example, the configuration of playback zones and zone groups in the media playback system 100 may be received by the control device 300 from a playback device or another network device, or alternatively by the control device 300 via the network interface 306. It may be sent to a playback device or a network device. In some cases, the other network device may be another control device.

ボリュームコントロールおよびオーディオ再生コントロールなどの再生デバイス制御コマンドは、ネットワークインタフェース306を介して制御デバイス300から再生デバイスに通信されてもよい。上述したように、メディア再生システム100の構成の変更は、ユーザにより制御デバイス300を用いて行うことができる。構成の変更は、1つ又は複数の再生デバイスをゾーンに追加すること、1つ又は複数の再生デバイスをゾーンから取り除くこと、1つ又は複数のゾーンをゾーングループに追加すること、1つ又は複数のゾーンをゾーングループから取り除くこと、結合プレーヤー又は統合プレーヤーを形成すること、結合プレーヤー又は統合プレーヤーから1つ又は複数の再生デバイスに分けることなどを含んでもよい。このように、制御デバイス300は、コントローラと呼ばれてもよく、制御デバイス300は、メディア再生システムコントローラアプリケーションソフトウェアをインストールした専用のコントローラか、又はネットワークデバイスであってもよい。   Playback device control commands, such as volume control and audio playback control, may be communicated from control device 300 to the playback device via network interface 306. As described above, the configuration change of the media playback system 100 can be performed by the user using the control device 300. Configuration changes include adding one or more playback devices to the zone, removing one or more playback devices from the zone, adding one or more zones to the zone group, one or more May be removed from the zone group, forming a combined player or an integrated player, separating the combined player or integrated player into one or more playback devices, and so on. Thus, control device 300 may be referred to as a controller, which may be a dedicated controller with installed media playback system controller application software or may be a network device.

制御デバイス300はマイクロホン310を備えていてもよい。マイクロホン310を、制御デバイス300の周辺環境の音声を検出するように配置してもよい。マイクロホン310は、コンデンサマイクロホン、エレクトレットコンデンサマイクロホン、又はダイナミックマイクロホンなどの既知であるか、又は今後開発される任意のタイプのマイクロホンであってもよい。マイクロホンは周波数範囲の一部に敏感であってもよい。2つ以上のマイクロホン310を、音源(たとえば、音声、可聴音)の位置情報を捕捉し、及び/又は背景雑音のフィルタリングを補助するように構成してもよい。   Control device 300 may include a microphone 310. The microphone 310 may be arranged to detect sound in the environment surrounding the control device 300. Microphone 310 may be any type of microphone known or later developed such as a condenser microphone, an electret condenser microphone, or a dynamic microphone. The microphone may be sensitive to part of the frequency range. Two or more microphones 310 may be configured to capture positional information of a sound source (e.g., voice, audible sound) and / or assist in filtering background noise.

制御デバイス300のユーザインタフェース308は、図4に示されるコントローラインタフェース400などのようなコントローラインタフェースを提供することによって、メディア再生システム100のユーザアクセスおよび制御を可能にするように構成されていてもよい。コントローラインタフェース400は、再生制御領域410、再生ゾーン領域420、再生ステータス領域430、再生キュー領域440、およびオーディオコンテンツソース領域450を含む。図示されるユーザインタフェース400は、図3の制御デバイス300などのようなネットワークデバイス(および/又は図1の制御デバイス126および128)を設けられたユーザインタフェースの単なる一例であって、ユーザによってメディア再生システム100などのようなメディア再生システムを制御するためにアクセスされるものである。あるいは、様々なフォーマット、スタイル、および対話型シーケンスを他のユーザのインタフェースを1つ又は複数のネットワークデバイスに実装し、メディア再生システムへ類似の制御アクセスを提供してもよい。   User interface 308 of control device 300 may be configured to allow user access and control of media playback system 100 by providing a controller interface, such as controller interface 400 shown in FIG. . The controller interface 400 includes a playback control area 410, a playback zone area 420, a playback status area 430, a playback queue area 440, and an audio content source area 450. The illustrated user interface 400 is merely one example of a user interface provided with a network device (and / or the control devices 126 and 128 of FIG. 1) such as the control device 300 of FIG. It may be accessed to control a media playback system such as system 100. Alternatively, various formats, styles, and interactive sequences may be implemented on other user interfaces on one or more network devices to provide similar control access to the media playback system.

再生制御領域410は、(例えば、タッチ又はカーソルを用いることで)選択可能なアイコンを含んでもよい。このアイコンによって、選択された再生ゾーン又はゾーングループ内の再生デバイスが、再生又は停止、早送り、巻き戻し、次にスキップ、前にスキップ、シャッフルモードのオン/オフ、リピートモードのオン/オフ、クロスフェードモードのオン/オフを行う。再生制御領域410は、別の選択可能なアイコンを含んでもよい。別の選択可能なアイコンは、イコライゼーション設定、再生ボリュームなど他の設定などを変更してもよい。   The playback control area 410 may include an icon that can be selected (e.g., using a touch or a cursor). This icon allows playback devices in the selected playback zone or zone group to play or stop, fast forward, rewind, then skip, skip forward, shuffle mode on / off, repeat mode on / off, cross Turn on / off fade mode. The playback control area 410 may include another selectable icon. Other selectable icons may change other settings such as equalization settings and playback volume.

再生ゾーン領域420は、メディア再生システム100内の再生ゾーンの表示を含んでもよい。ある実施形態では、再生ゾーンのグラフィック表示が選択可能であってもよい。追加の選択可能なアイコンを移動させることによって、メディア再生システム内の再生ゾーンを管理又は構成することができる。例えば、結合ゾーンの作成、ゾーングループの作成、ゾーングループの分割、およびゾーングループのリネームなど他の管理又は構成を行うことができる。   The playback zone area 420 may include an indication of playback zones within the media playback system 100. In one embodiment, graphical display of the playback zone may be selectable. By moving additional selectable icons, playback zones within the media playback system can be managed or configured. For example, other management or configuration may be performed, such as creating combined zones, creating zone groups, splitting zone groups, and renaming zone groups.

例えば、図示されるように、「グループ」アイコンは、再生ゾーンのグラフィック表示のそれぞれに設けられてもよい。あるゾーンのグラフィック表示内の「グループ」アイコンは、メディア再生システム内の1つ又は複数のゾーンを選択して、あるゾーンとグループ化するオプションを出せるように選択可能であってもよい。一度グループ化すると、あるゾーンとグループ化されたゾーン内の再生デバイスは、あるゾーン内の再生デバイスと同期してオーディオコンテンツを再生するように構成される。同様に、「グループ」アイコンは、ゾーングループのグラフィック表示内に設けられてもよい。この場合、「グループ」アイコンは、ゾーングループ内の1つ又は複数のゾーンをゾーングループから取り除くために、ゾーングループ内の1つ又は複数のゾーンを選択から外すというオプションを出すように選択可能であってもよい。ユーザインタフェース400等のユーザインタフェースを介してゾーンをグループ化およびグループ解除するための他の対話をすることも可能であるし、実施することも可能である。再生ゾーン領域420内の再生ゾーンの表示は、再生ゾーン又はゾーングループ構成が変更されると、動的に更新されてもよい。   For example, as shown, a "group" icon may be provided on each of the graphical representations of the playback zone. A "group" icon in the graphic display of a zone may be selectable to select one or more zones in the media playback system to present an option to group with a zone. Once grouped, playback devices in a zone grouped with a zone are configured to play audio content in synchronization with playback devices in the zone. Similarly, a "group" icon may be provided in the graphical representation of the zone group. In this case, the "group" icon is selectable to give the option of deselecting one or more zones in the zone group in order to remove one or more zones in the zone group from the zone group It may be. Other interactions for grouping and ungrouping zones via user interfaces, such as user interface 400, are possible and can be implemented. The display of playback zones in the playback zone area 420 may be dynamically updated as the playback zone or zone group configuration is changed.

再生ステータス領域430は、現在再生されているオーディオコンテンツ、前に再生されたオーディオコンテンツ、又は選択された再生ゾーン又はゾーングループ内で次に再生するように予定されているオーディオコンテンツ、のグラフィック表示を含んでもよい。選択可能な再生ゾーン又は再生グループは、ユーザインタフェース上で、例えば、再生ゾーン領域420および/又は再生ステータス領域430内で視覚的に区別されてもよい。グラフィック表示は、トラックタイトル、アーティスト名、アルバム名、アルバム年、トラックの長さ、およびメディア再生システムを、ユーザインタフェース400を介して制御するときに、ユーザにとって有益な他の関連情報を含んでいてもよい。   The playback status area 430 displays a graphical representation of the currently played audio content, previously played audio content, or audio content scheduled to be played next within the selected playback zone or zone group. May be included. Selectable playback zones or playback groups may be visually distinguished on the user interface, for example, within playback zone region 420 and / or playback status region 430. The graphic display includes the track title, artist name, album name, album year, track length, and other relevant information useful to the user when controlling the media playback system via the user interface 400. It is also good.

再生キュー領域440は、選択された再生ゾーン又はゾーングループと関連付けられた再生キュー内のオーディオコンテンツのグラフィック表示を含んでもよい。ある実施形態では、それぞれの再生ゾーン又はゾーングループは、再生ゾーン又は再生グループによって再生される0以上のオーディオアイテムに対応する情報を含む再生キューと関連付けられていてもよい。例えば、再生キュー内のそれぞれのオーディオアイテムは、ユー・アール・アイ(URI)、ユー・アール・エル(URL)、又は再生ゾーン又はゾーングループ内の再生デバイスによって使用可能な他の識別子を含んでいてもよい。これらによって、ローカルオーディオコンテンツソース又はネットワークオーディオコンテンツソース、からオーディオアイテムを見つけ、および/又は取り出し、再生デバイスによって再生することができる。   The play queue area 440 may include a graphical representation of audio content in a play queue associated with the selected play zone or zone group. In one embodiment, each playback zone or zone group may be associated with a playback queue that includes information corresponding to zero or more audio items played by the playback zone or group. For example, each audio item in the playback queue may include a URL, a URL, or any other identifier that can be used by a playback device within a playback zone or zone group. It may be These allow audio items to be found and / or retrieved from local audio content sources or network audio content sources and played back by the playback device.

ある例では、プレイリストが再生キューに追加されてもよい。この場合、プレイリスト内のそれぞれのオーディオアイテムに対応する情報が再生キューに追加されてもよい。別の例では、再生キュー内のオーディオアイテムは、プレイリストとして保存されてもよい。更に別の例では、再生デバイスがストリーミングオーディオコンテンツ、例えば、再生時間を有することで連続して再生されないオーディオアイテムよりも、停止しない限り連続して再生されるインターネットラジオを再生し続けているとき、再生キューは、空であってもよいし、又は「未使用」であるが埋められていてもよい。別の実施形態では、再生キューは、インターネットラジオおよび/又は他のストリーミングオーディオコンテンツアイテムを含むことができ、且つ再生ゾーン又はゾーングループがそれらのアイテムを再生しているとき「使用中」とすることができる。他の例も可能である。   In one example, a playlist may be added to the play queue. In this case, information corresponding to each audio item in the playlist may be added to the playback queue. In another example, audio items in the play queue may be saved as a playlist. In yet another example, when the playback device continues to play streaming audio content, eg, an internet radio that is played continuously unless stopped, rather than an audio item that is not played continuously by having a play time, The playback queue may be empty or "unused" but filled. In another embodiment, the playback queue may include Internet radio and / or other streaming audio content items, and be "in use" when a playback zone or zone group is playing those items. Can. Other examples are also possible.

再生ゾーン又はゾーングループが「グループ化される」か、又は「グループ解除」されるとき、影響を受ける再生ゾーン又はゾーングループに関連付けられた再生キューは、クリアされてもよいし、又は再び関連付けられてもよい。例えば、第1再生キューを含む第1再生ゾーンが、第2再生キューを含む第2再生ゾーンとグループ化された場合、形成されたゾーングループは、関連付けられた再生キューを有していてもよい。関連付けられた再生キューは、最初は空であるか、(例えば、第2再生ゾーンが第1再生ゾーンに追加された場合、)第1再生キューのオーディオアイテムを含むか、(例えば、第1再生ゾーンが第2再生ゾーンに追加された場合、)第2再生キューのオーディオアイテムを含むか、又は第1再生キューと第2再生キューとの両方のオーディオアイテムを組み合わせられる。その後、形成されたゾーングループがグループ解除された場合、グループ解除された第1再生ゾーンは、前の第1再生キューと再び関連付けられてもよいし、空の新しい再生キューと関連付けられてもよいし、あるいはゾーングループがグループ解除される前にゾーングループと関連付けられていた再生キューのオーディオアイテムを含む新しい再生キューと関連付けられてもよい。同様に、グループ解除された第2再生ゾーンは、前の第2再生キューと再び関連付けられてもよいし、空の新しい再生キューと関連付けられてもよいし、あるいはゾーングループがグループ解除される前にゾーングループと関連付けられていた再生キューのオーディオアイテムを含む新しい再生キューと関連付けられてもよい。他の例も可能である。   When a playback zone or zone group is "grouped" or "ungrouped", the playback queue associated with the affected playback zone or zone group may be cleared or reassociated May be For example, if a first playback zone that includes a first playback queue is grouped with a second playback zone that includes a second playback queue, the formed zone group may have an associated playback queue . The associated play queue is initially empty or contains an audio item of the first play queue (eg, if the second play zone is added to the first play zone) (eg, the first play) If a zone is added to the second playback zone, the audio items of the second playback queue may be included, or audio items of both the first playback queue and the second playback queue may be combined. Thereafter, if the formed zone group is ungrouped, the ungrouped first reproduction zone may be reassociated with the previous first reproduction queue or may be associated with an empty new reproduction queue Or may be associated with a new play queue that includes audio items of the play queue that were associated with the zone group before the zone group was ungrouped. Similarly, the ungrouped second playback zone may be reassociated with the previous second playback queue, may be associated with an empty new playback queue, or before the zone group is ungrouped. , And may be associated with a new playback queue that includes audio items of the playback queue that were associated with the zone group. Other examples are also possible.

図4のユーザインタフェース400に戻って、再生キュー領域440内のオーディオコンテンツのグラフィック表示は、トラックタイトル、アーティスト名、トラックの長さ、および再生キュー内のオーディオコンテンツと関連付けられた他の関連情報を含んでいてもよい。ある例では、オーディオコンテンツのグラフィック表示は、追加の選択可能なアイコンを選択して移動させることができる。これにより、再生キューおよび/又は再生キューに表示されたオーディオコンテンツを管理および/又は操作することができる。例えば、表示されたオーディオコンテンツは、再生キューから取り除いてもよいし、再生キュー内の異なる位置に移動させてもよいし、すぐに再生させるか若しくは現在再生しているオーディオコンテンツの後に再生するように選択されてもよいし、あるいは他の動作を実行してもよい。再生ゾーン又はゾーングループに関連付けられた再生キューは、再生ゾーン又はゾーングループ内の1つ又は複数の再生デバイスのメモリ、再生ゾーン又はゾーングループに入っていない再生デバイスのメモリ、および/又は他の指定のデバイスのメモリに記憶されていてもよい。   Returning to the user interface 400 of FIG. 4, a graphical representation of the audio content in the play queue area 440 includes the track title, artist name, track length, and other relevant information associated with the audio content in the play queue. May be included. In one example, graphical representations of audio content can be moved by selecting additional selectable icons. This allows the management and / or manipulation of the playback cue and / or the audio content displayed in the playback cue. For example, the displayed audio content may be removed from the playback queue, moved to a different position in the playback queue, played immediately or played after the currently playing audio content. May be selected or other operations may be performed. The playback queue associated with the playback zone or zone group may be the memory of one or more playback devices in the playback zone or zone group, the memory of playback devices not in the playback zone or zone group, and / or other designations May be stored in the memory of the device.

オーディオコンテンツソース領域450は、選択可能なオーディオコンテンツソースのグラフィック表示を含んでいてもよい。このオーディオコンテンツソースにおいては、オーディオコンテンツが選択された再生ゾーン又はゾーングループによって取り出され、再生されてもよい。オーディオコンテンツソースに関する説明は、以降のセクションを参照することができる。   Audio content source area 450 may include a graphical representation of selectable audio content sources. In this audio content source, the audio content may be retrieved and played by the selected playback zone or zone group. Descriptions of audio content sources can be found in the following sections.

d.例示的なオーディオコンテンツソース
前回図示したように、ゾーン又はゾーングループ内の1つ又は複数の再生デバイスは、再生するオーディオコンテンツを、(例えば、オーディオコンテンツの対応するURI又はURLに基づいて、)複数の入手可能なオーディオコンテンツソースから取り出すように構成されていてもよい。ある例では、オーディオコンテンツは、再生デバイスによって、対応するオーディオコンテンツソース(例えば、ライン−イン接続)から直接取り出されてもよい。別の例では、オーディオコンテンツは、1つ又は複数の他の再生デバイス若しくはネットワークデバイスを介してネットワーク上の再生デバイスに提供されてもよい。
d. Exemplary Audio Content Source As illustrated previously, one or more playback devices in a zone or zone group may have multiple audio content to play (e.g., based on the corresponding URI or URL of the audio content) May be configured to be retrieved from a source of available audio content. In one example, audio content may be retrieved directly from the corresponding audio content source (eg, line-in connection) by the playback device. In another example, audio content may be provided to playback devices on the network via one or more other playback devices or network devices.

例示的なオーディオコンテンツソースは、メディア再生システム内の1つ又は複数の再生デバイスのメモリを含んでもよい。メディア再生システムとしては、例えば、図1のメディア再生システム100、1つ又は複数のネットワークデバイス上のローカルミュージックライブラリ(例えば、制御デバイス、ネットワーク対応のパーソナルコンピュータ、又はネットワーク接続ストレージ(NAS)など)、インターネット(例えば、クラウド)を介してオーディオコンテンツを提供するストリーミングオーディオサービス、あるいは再生デバイス又はネットワークデバイスのライン−イン入力接続を介してメディア再生システムに接続されるオーディオソース、他の可能なシステムであってもよい。   An exemplary audio content source may include memory of one or more playback devices in a media playback system. As the media playback system, for example, the media playback system 100 of FIG. 1, a local music library on one or more network devices (for example, a control device, a network compatible personal computer, or a network attached storage (NAS)), A streaming audio service providing audio content via the Internet (eg cloud), or an audio source connected to a media playback system via a playback device or a line-in input connection of a network device, or other possible system May be

ある実施形態では、オーディオコンテンツソースは、図1のメディア再生システム100などのようなメディア再生システムに定期的に追加されてもよいし、定期的に取り除かれてもよい。ある例では、1つ又は複数のオーディオコンテンツソースが追加される、取り除かれる、又は更新される度に、オーディオアイテムのインデックス付けが行われてもよい。オーディオアイテムのインデックス付けは、ネットワーク上で共有される全てのフォルダ/ディレクトリ内の識別可能なオーディオアイテムをスキャンすることを含んでもよい。ここで、ネットワークは、メディア再生システム内の再生デバイスによってアクセス可能である。また、オーディオアイテムのインデックス付けは、メタデータ(例えば、タイトル、アーティスト、アルバム、トラックの長さなど)と他の関連情報とを含むオーディオコンテンツデータベースを作成すること、又は更新すること、を含んでもよい。他の関連情報とは、例えば、それぞれの識別可能なオーディオアイテムを見つけるためのURI又はURLを含んでもよい。オーディオコンテンツソースを管理し、且つ維持するための他の例も可能である。   In one embodiment, audio content sources may be periodically added to or removed from media playback systems, such as the media playback system 100 of FIG. In one example, indexing of audio items may be performed each time one or more audio content sources are added, removed or updated. Audio item indexing may include scanning for identifiable audio items in all folders / directories shared over the network. Here, the network is accessible by the playback device in the media playback system. Also, the indexing of audio items may include creating or updating an audio content database that includes metadata (eg, title, artist, album, track length, etc.) and other relevant information. Good. Other relevant information may include, for example, a URI or a URL for finding each identifiable audio item. Other examples for managing and maintaining audio content sources are also possible.

再生デバイス、制御デバイス、再生ゾーン構成、およびメディアコンテンツソースに関しての上述した説明は、以降で述べられている機能および方法を実施可能ないくつかの例示的な動作環境のみを提供している。本発明は、本明細書で明示的に述べられていないメディア再生システム、再生デバイス、およびネットワークデバイスの他の動作環境および構成であっても適用可能であり、その機能および方法を実施するのに適している。   The above description of the playback device, the control device, the playback zone configuration, and the media content source provides only a few exemplary operating environments in which the functions and methods described below can be implemented. The invention is applicable to other operating environments and configurations of media playback systems, playback devices, and network devices not explicitly mentioned herein, and to implement their functions and methods. Is suitable.

e.例示的な複数のネットワークデバイス
図5は、音声制御に基づいてオーディオ再生体験をもたらすように構成され得る例示的な複数のデバイス500を示す。当業者であれば、図5に示したデバイスは例示する目的のみのものであり、異なる及び/又は追加のデバイスを含む変形例が可能であってもよいことを理解する。図示されているように、複数のデバイス500はコンピューティングデバイス504,506,508と、ネットワークマイクロホンデバイス(NMD)512,514,516と、再生デバイス(PBD)532,534,536,538と、制御デバイス(CR)522とを備える。
e. Exemplary Multiple Network Devices FIG. 5 shows an exemplary plurality of devices 500 that may be configured to provide an audio playback experience based on voice control. Those skilled in the art will appreciate that the device shown in FIG. 5 is for illustrative purposes only, and that variations including different and / or additional devices may be possible. As illustrated, the plurality of devices 500 controls computing devices 504, 506, 508, network microphone devices (NMDs) 512, 514, 516, playback devices (PBDs) 532, 534, 536, 538, and And a device (CR) 522.

複数のデバイス500の各々は、主として広域ネットワーク(WAN)、ローカルエリアネットワーク(LAN)、及びパーソナルエリアネットワーク(PAN)などの1又は複数のタイプのネットワークを介し、主としてNFC、Bluetooth(登録商標)、Ethernet、及びIEEE802.11などの1又は複数のネットワークプロトコルに従って、複数のデバイス内の1又は複数の他のデバイスとの通信を確立できるネットワーク対応デバイスであってもよい。   Each of the plurality of devices 500 is mainly NFC, Bluetooth (registered trademark), mainly via one or more types of networks such as wide area network (WAN), local area network (LAN), and personal area network (PAN). It may be a network enabled device that can establish communication with one or more other devices in the plurality of devices according to Ethernet and one or more network protocols such as IEEE 802.11.

図示されているように、コンピューティングデバイス504,506,508はクラウドネットワーク502の一部であってもよい。クラウドネットワーク502は追加のコンピューティングデバイスを備えていてもよい。1つの例では、コンピューティングデバイス504,506,508は異なるサーバであってもよい。別の例では、コンピューティングデバイス504,506,508の2つ以上は単一のサーバのモジュールであってもよい。同様に、コンピューティングデバイス504,506,508の各々は1又は複数のモジュール若しくはサーバを備えていてもよい。本明細書において例示を容易にするために、コンピューティングデバイス504,506,508の各々をクラウドネットワーク502内の特定の機能を実行するように構成してもよい。たとえば、コンピューティングデバイス508は音楽ストリーミングサービス用のオーディオコンテンツのソースであってもよい。   As shown, computing devices 504, 506, 508 may be part of cloud network 502. Cloud network 502 may comprise additional computing devices. In one example, computing devices 504, 506, 508 may be different servers. In another example, two or more of the computing devices 504, 506, 508 may be modules of a single server. Similarly, each of the computing devices 504, 506, 508 may comprise one or more modules or servers. Each of the computing devices 504, 506, 508 may be configured to perform specific functions within the cloud network 502 to facilitate illustration herein. For example, computing device 508 may be a source of audio content for a music streaming service.

図示されているように、コンピューティングデバイス504を、通信経路542を介してNMD512,514,516とインタフェースするように構成してもよい。NMD512,514,516は1又は複数の「スマートホーム」システムのコンポーネントであってもよい。ある場合には、NMD512,514,516を、図1に示すデバイスの配置と同様に、家庭全体に物理的に配置してもよい。別の場合には、NMD512,514,516の2つ以上を、互いに比較的近接して物理的に配置してもよい。通信経路542は主としてインターネットを含むWAN、LAN、及び/又はPANなどの1又は複数のタイプのネットワークを備えていてもよい。   As shown, computing device 504 may be configured to interface with NMDs 512, 514, 516 via communication path 542. NMDs 512, 514, 516 may be components of one or more "smart home" systems. In some cases, the NMDs 512, 514, 516 may be physically located throughout the home, similar to the device placement shown in FIG. In other cases, two or more of the NMDs 512, 514, 516 may be physically located relatively close to one another. Communication path 542 may comprise one or more types of networks such as WANs, including the Internet, LANs, and / or PANs.

1つの例では、NMD512,514,516のうちの1つ又は複数は、主として音声検出用に構成されたデバイスであってもよい。別の例では、NMD512,514,516のうちの1つ又は複数は、様々な一次ユーティリティを有するデバイスのコンポーネントであってもよい。たとえば、図2及び図3に関連して上述したように、NMD512,514,516のうちの1つ又は複数は、再生デバイス200のマイクロホン220又はネットワークデバイス300のマイクロホン310であってもよい。さらに、場合によっては、NMD512,514,516のうちの1つ又は複数は、再生デバイス200又はネットワークデバイス300であってもよい。1つの例では、NMD512、514、及び/又は516のうちの1つ又は複数はマイクロホンアレイに配置される複数のマイクロホンを備えていてもよい。   In one example, one or more of NMDs 512, 514, 516 may be devices configured primarily for voice detection. In another example, one or more of the NMDs 512, 514, 516 may be components of a device having various primary utilities. For example, as described above in connection with FIGS. 2 and 3, one or more of the NMDs 512, 514, 516 may be the microphone 220 of the playback device 200 or the microphone 310 of the network device 300. Furthermore, in some cases, one or more of the NMDs 512, 514, 516 may be the playback device 200 or the network device 300. In one example, one or more of the NMDs 512, 514, and / or 516 may comprise multiple microphones arranged in a microphone array.

図示されているように、コンピューティングデバイス506を、通信経路544を介してCR522と、PBD532,534,536,538とにインタフェースするように構成してもよい。1つの例では、CR522は図2のネットワークデバイス200などのネットワークデバイスであってもよい。したがって、CR522を、図4のコントローラインタフェース400を提供するように構成してもよい。同様に、PBD532,534,536,538は図3の再生デバイス300などの再生デバイスであってもよい。このため、PBD532,534,536,538を、図1に示すように家庭全体に物理的に配置してもよい。例示する目的上、PBD536及び538は結合ゾーン530の一部であってもよく、その一方でPBD532及び534は自身が属するそれぞれのゾーンの一部であってもよい。上述したように、PBD532,534,536,538を動的に結合、グループ化、結合解除、且つグループ解除してもよい。通信経路544は主としてインターネット含むWAN、LAN、及び/又はPANなどの1又は複数のタイプのネットワークを備えていてもよい。   As shown, computing device 506 may be configured to interface with CR 522 and PBDs 532, 534, 536, 538 via communication path 544. In one example, CR 522 may be a network device such as network device 200 of FIG. Thus, the CR 522 may be configured to provide the controller interface 400 of FIG. Similarly, the PBDs 532 534 536 538 may be playback devices such as the playback device 300 of FIG. Thus, the PBDs 532 534 536 538 may be physically located throughout the home as shown in FIG. For illustrative purposes, PBDs 536 and 538 may be part of binding zone 530, while PBDs 532 and 534 may be part of their respective zones. As discussed above, PBDs 532 534 536 538 may be dynamically joined, grouped, unjoined, and ungrouped. Communication path 544 may comprise one or more types of networks such as a WAN, including the Internet, a LAN, and / or a PAN.

1つの例では、NMD512,514,516と同様に、CR522とPBD532,534,536,538とはまた、1又は複数の「Smart Home」システムのコンポーネントであってもよい。ある場合には、PBD532,534,536,538をNMD512,514,516と同じ家庭全体に配置してもよい。さらに、上記で提案したように、PBD532,534,536,538のうちの1つ又は複数はNMD512,514,516の1又は複数であってもよい。   In one example, similar to NMDs 512, 514, 516, CR 522 and PBDs 532 534 536 538 may also be components of one or more "Smart Home" systems. In some cases, PBDs 532, 534, 536, 538 may be located throughout the same home as NMDs 512, 514, 516. Furthermore, as suggested above, one or more of PBDs 532, 534, 536, 538 may be one or more of NMDs 512, 514, 516.

NMD512,514,516はローカルエリアネットワークの一部であってもよく、通信経路542はNMD512,514,516のローカルエリアネットワークをWANを介してコンピューティングデバイス504にリンクする(通信経路は図示せず)アクセスポイントを備えていてもよい。同様に、NMD512,514,516の各々は、そのようなアクセスポイントを介して互いと通信してもよい。   The NMDs 512, 514, 516 may be part of a local area network, and the communication path 542 links the local area networks of the NMDs 512, 514, 516 to the computing device 504 via a WAN (communication path not shown) ) An access point may be provided. Similarly, each of the NMDs 512, 514, 516 may communicate with one another via such access points.

同様に、CR522並びにPBD532,534,536,538は、前項で説明したように、ローカルエリアネットワーク及び/又はローカル再生ネットワークの一部であってもよく、また通信経路544は、CR522及びPBD532,534,536,538のローカルエリアネットワーク及び/又はローカル再生ネットワークをWANを介してコンピューティングデバイス506にリンクするアクセスポイントを備えていてもよい。このため、CR522並びにPBD532,534,536,538の各々はまた、そのようなアクセスポイントを介して互いと通信してもよい。   Similarly, CR 522 as well as PBDs 532 534 536 538 may be part of a local area network and / or local regeneration network as described in the previous paragraph, and communication path 544 may be CR 522 and PBD 532 534. , 536, 538 and / or an access point that links the local playback network to the computing device 506 via the WAN. Thus, each of CR 522 as well as PBDs 532 534 536 538 may also communicate with one another via such access points.

1つの例では、通信経路542及び544は同じアクセスポイントを備えていてもよい。1つの例では、NMD512,514,516、CR522、並びにPBD532,534,536,538の各々は、家庭用の同じアクセスポイントを介してクラウドネットワーク502にアクセスしてもよい。   In one example, communication paths 542 and 544 may comprise the same access point. In one example, each of NMDs 512, 514, 516, CR 522, and PBDs 532, 534, 536, 538 may access cloud network 502 through the same home access point.

図5に示すように、NMD512,514,516、CR522、並びにPBD532,534,536,538の各々はまた、通信手段546を介して他のデバイスの1又は複数と直接通信してもよい。本明細書に記載の通信手段546は、1又は複数のタイプのネットワークを介し、1又は複数のネットワークプロトコルに従ったデバイス間の1又は複数の形式の通信を含んでいてもよく、及び/又は1又は複数の他のネットワークデバイスを介した通信を含んでいてもよい。たとえば、通信手段546はBluetooth(登録商標)(IEEE802.15)、NFC、ワイヤレスダイレクト、及び/又は独自規格ワイヤレスの1又は複数を主として備えていてもよい。   As shown in FIG. 5, each of NMDs 512, 514, 516, CR 522, and PBDs 532, 534, 536, 538 may also communicate directly with one or more of the other devices via communication means 546. The communication means 546 described herein may include one or more types of communication between devices according to one or more network protocols, via one or more types of networks, and / or Communication may be included via one or more other network devices. For example, the communication means 546 may mainly comprise one or more of Bluetooth (registered trademark) (IEEE 802.15), NFC, wireless direct, and / or proprietary wireless.

1つの例では、CR522はBluetooth(登録商標)を介してNMD512と通信してもよく、且つ別のローカルエリアネットワークを介してPBD534と通信してもよい。別の例では、NMD514は別のローカルエリアネットワークを介してCR522と通信してもよく、且つBluetooth(登録商標)を介してPBD536と通信してもよい。さらに別の例では、PBD532,534,536,538の各々はローカル再生ネットワークを介し、スパニングツリープロトコルに従って互いと通信してもよく、一方でローカル再生ネットワークとは異なるローカルエリアネットワークを介してCR522とそれぞれ通信してもよい。他の例も可能である。   In one example, CR 522 may communicate with NMD 512 via Bluetooth and may communicate with PBD 534 via another local area network. In another example, the NMD 514 may communicate with the CR 522 via another local area network, and may communicate with the PBD 536 via Bluetooth. In yet another example, each of the PBDs 532 534 536 538 may communicate with each other according to the Spanning Tree Protocol via a local playback network while CR 522 and with a local area network different from the local playback network. Each may communicate. Other examples are also possible.

場合によっては、NMD512,514,516、CR522、並びにPBD532,534,536,538間の通信手段は、デバイス間の通信のタイプ、ネットワーク状態、及び/又はレイテンシ要求に応じて変化してもよい。たとえば、PBD532,534,536,538と共にNMD516を家庭に最初に導入するときに、通信手段546を使用してもよい。ある場合には、NMD516はNFCを介してPBD538にNMD516に対応する識別情報を送信し、またPBD538はNFC(又は他の何らかの形式の通信)を介してNMD516にローカルエリアネットワーク情報を送信してもよい。しかしながら、ひとたびNMD516が家庭内で構成されれば、NMD516とPBD538との間の通信手段は変化してもよい。たとえば、NMD516は通信経路542、クラウドネットワーク502、及び通信経路544を介して続けてPBD538と通信してもよい。別の例では、NMDとPBDとは、ローカル通信手段546を介しては決して通信しないようにしてもよい。さらに別の例では、NMDとPBDとは、主としてローカル通信手段546を介して通信してもよい。他の例も可能である。   In some cases, the communication means between the NMDs 512, 514, 516, CR 522, and PBDs 532, 534, 536, 538 may change depending on the type of communication between devices, network conditions, and / or latency requirements. For example, the communication means 546 may be used when initially introducing the NMD 516 into a home with the PBDs 532, 534, 536, 538. In some cases, NMD 516 sends identification information corresponding to NMD 516 to PBD 538 via NFC, and PBD 538 sends local area network information to NMD 516 via NFC (or any other form of communication). Good. However, once the NMD 516 is configured in the home, the means of communication between the NMD 516 and the PBD 538 may vary. For example, NMD 516 may continue to communicate with PBD 538 via communication path 542, cloud network 502, and communication path 544. In another example, the NMD and the PBD may never communicate via the local communication means 546. In yet another example, the NMD and PBD may communicate primarily via the local communication means 546. Other examples are also possible.

例示的な例では、NMD512,514,516を、PBD532,534,536,538を制御するための音声入力を受信するように構成してもよい。利用可能な制御コマンドは、主として再生音量の制御、再生トランスポートの制御、音楽ソースの選択、及びグループ化など、前述した任意のメディア再生システム制御を含んでいてもよい。たとえば、NMD512はPBD532,534,536,538の1又は複数を制御するための音声入力を受信してもよい。音声入力を受信したことに応答して、NMD512は通信経路542を介して、処理を目的として音声入力をコンピューティングデバイス504に送信してもよい。1つの例では、コンピューティングデバイス504は音声入力を同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。コンピューティングデバイス504は、その後、続けてコンピューティングデバイス506にテキストコマンド送信してもよい。別の例では、コンピューティングデバイス504は音声入力を同等のテキストコマンドに変換し、次いで、続けてそのテキストコマンドをコンピューティングデバイス506に送信してもよい。次いで、コンピューティングデバイス506は、テキストコマンドを解析して1又は複数の再生コマンドを識別してもよい。   In the illustrative example, the NMDs 512, 514, 516 may be configured to receive audio input to control the PBDs 532, 534, 536, 538. The available control commands may include any of the media playback system controls described above, such as primarily playback volume control, playback transport control, music source selection, and grouping. For example, NMD 512 may receive an audio input to control one or more of PBDs 532, 534, 536, 538. In response to receiving the speech input, NMD 512 may send the speech input to computing device 504 for processing purposes via communication path 542. In one example, computing device 504 may translate speech input into equivalent text commands and parse the text commands to identify the commands. The computing device 504 may then subsequently send text commands to the computing device 506. In another example, computing device 504 may translate speech input into an equivalent text command and then subsequently send the text command to computing device 506. The computing device 506 may then parse the text command to identify one or more playback commands.

たとえば、テキストコマンドが「『ゾーン1』で『ストリーミングサービス1』」から『アーティスト1』による『トラック1』を再生して」である場合、コンピューティングデバイス506は(i)「ストリーミングサービス1」から入手できる「アーティスト1」による「トラック1」のURLと、(ii) 「ゾーン1」内の少なくとも1つの再生デバイスとを識別してもよい。この例では、「ストリーミングサービス1」からの「アーティスト1」による「トラック1」のURLは、コンピューティングデバイス508を指すURLであってもよく、また「ゾーン1」は結合ゾーン530であってもよい。このように、URLとPBD536及び538の一方又は両方とを識別すると、コンピューティングデバイス506は、通信経路544を介してPBD536及び538の一方又は両方に識別された再生用のURLを送信してもよい。PBD536及び538の一方又は両方は迅速に反応して、受信したURLに従ってコンピューティングデバイス508からオーディオコンテンツを取得し、且つ「ストリーミングサービス1」から「アーティスト1」による「トラック1」の再生を開始してもよい。   For example, if the text command is "playing" track 1 "with" zone 1 "to" streaming service 1 "to" artist 1 ", the computing device 506 may (i) from" streaming service 1 " It may identify the available "track 1" URL from "artist 1" and (ii) at least one playback device in "zone 1". In this example, the URL of “track 1” by “artist 1” from “streaming service 1” may be a URL pointing to computing device 508, and even though “zone 1” is a combined zone 530 Good. In this manner, having identified the URL and one or both of PBDs 536 and 538, computing device 506 may also transmit the identified URL for playback to one or both of PBDs 536 and 538 via communication path 544. Good. One or both of the PBDs 536 and 538 react quickly to obtain audio content from the computing device 508 according to the received URL, and to start playing "track 1" by "artist 1" from "streaming service 1" May be

さらに別の例では、コンピューティングデバイス504は何らかの処理を実行してユーザの関連コマンド又はインテントを識別し、且つ当該音声入力に関連したメディアコンテンツに関する情報をコンピューティングデバイス506に提供してもよい。たとえば、コンピューティングデバイス504は音声入力の音声テキスト変換を実行し、且つ音声入力を解析して、コマンド又はインテント(たとえば、再生、一時停止、停止、音量を上げる、音量を下げる、スキップ、次の曲を再生、グループ化、グループ解除)をコマンドの実行方法に関する他の情報と共に生成してもよい。コンピューティングデバイス504又はコンピューティングデバイス506は、コンピューティングデバイス504によって決定されたコマンド又はインテントにどのPBDコマンドが対応しているかを判定してもよい。音声入力から決定されたコマンド若しくはインテント及び/又はコマンドの実行に関連する他の情報を、コンピューティングデバイス504からコンピューティングデバイス506に送信してもよい。コンピューティングデバイス504上での処理はアプリケーション、モジュール、アドオンソフトウェア、ネイティブのネットワークマイクロホンシステムのソフトウェアプラットフォームとの統合、及び/又はネイティブのネットワークマイクロホンシステムのソフトウェアプラットフォームによって実行してもよい。   In yet another example, computing device 504 may perform some processing to identify the user's associated command or intent and provide computing device 506 with information regarding the media content associated with the voice input. . For example, computing device 504 performs speech-to-text conversion of speech input and analyzes speech input to generate commands or intents (eg, play, pause, stop, turn up, turn down, skip, (Play, group, ungroup) may be generated along with other information on how to execute the command. Computing device 504 or computing device 506 may determine which PBD commands correspond to the commands or intents determined by computing device 504. The computing device 504 may transmit the command or intent determined from the speech input and / or other information related to the execution of the command to the computing device 506. Processing on computing device 504 may be performed by applications, modules, add-on software, integration with a native network microphone system software platform, and / or by a native network microphone system software platform.

当業者であれば、上記は単なる1つの例示的な例であり、他の実装形態も可能であることを理解する。ある場合には、上記のように複数のデバイス500の1又は複数によって実行される動作は、複数のデバイス500内の1又は複数の他のデバイスによって実行されてもよい。たとえば、音声入力からテキストコマンドへの変換を、NMD512、コンピューティングデバイス506、PBD536、及び/又はPBD538などの別のデバイス又は複数のデバイスによって代替的に、部分的に、若しくは完全に実行してもよい。同様に、URLの識別をNMD512、コンピューティングデバイス504、PBD536、及び/又はPBD538などの別のデバイス又は複数のデバイスによって代替的に、部分的に、若しくは完全に実行してもよい。   Those skilled in the art will appreciate that the above is only one exemplary example and that other implementations are possible. In some cases, the operations performed by one or more of the plurality of devices 500 as described above may be performed by one or more other devices in the plurality of devices 500. For example, the conversion from speech input to text command may alternatively, partially or completely be performed by another device or devices, such as NMD 512, computing device 506, PBD 536, and / or PBD 538. Good. Similarly, the identification of the URL may be alternatively, partially or completely performed by another device or multiple devices such as NMD 512, computing device 504, PBD 536, and / or PBD 538.

f.例示的なネットワークマイクロホンデバイス
図6は、図5のNMD512,514,516の1又は複数となるように構成され得る例示的なネットワークマイクロホンデバイス600の機能ブロック図を示す。図示されているように、ネットワークマイクロホンデバイス600はプロセッサ602と、メモリ604と、マイクロホンアレイ606と、ネットワークインタフェース608と、ユーザインタフェース610と、ソフトウェアコンポーネント612と、スピーカ614とを備える。当業者であれば、他のネットワークマイクロホンデバイスの構成及び配置も可能であることを理解する。たとえば、ネットワークマイクロホンデバイスは、別法としてスピーカ614を除外するか、或いはマイクロホンアレイ606の代わりに単一のマイクロホンを有していてもよい。
f. Exemplary Network Microphone Device FIG. 6 shows a functional block diagram of an exemplary network microphone device 600 that may be configured to be one or more of the NMDs 512, 514, 516 of FIG. As shown, the network microphone device 600 comprises a processor 602, a memory 604, a microphone array 606, a network interface 608, a user interface 610, a software component 612 and a speaker 614. One skilled in the art will appreciate that other network microphone device configurations and arrangements are possible. For example, the network microphone device may alternatively exclude the speaker 614 or have a single microphone instead of the microphone array 606.

プロセッサ602は、汎用プロセッサ又は専用プロセッサ若しくはコントローラの形態をとり得る1又は複数のプロセッサ及び/又はコントローラを備えていてもよい。たとえば、処理ユニット602はマイクロプロセッサ、マイクロコントローラ、特定用途向け集積回路、及びデジタル信号プロセッサなどを備えていてもよい。メモリ604は、これらの機能を実行するためにプロセッサ602によって実行可能な1又は複数のソフトウェアコンポーネントをロードできるデータ記憶装置であってもよい。したがって、メモリ604は、主として、ランダムアクセスメモリ、レジスタ、キャッシュなどの揮発性記憶媒体と、読取り専用メモリ、ハードディスクドライブ、ソリッドステートドライブ、フラッシュメモリ、及び/又は光学記憶装置などの不揮発性記憶媒体とが例として挙げられる、1又は複数の非一時的なコンピュータ可読記憶媒体を備えていてもよい。   Processor 602 may comprise one or more processors and / or controllers, which may take the form of general purpose processors or special purpose processors or controllers. For example, processing unit 602 may include a microprocessor, microcontroller, application specific integrated circuit, digital signal processor, and the like. Memory 604 may be a data storage device that can load one or more software components executable by processor 602 to perform these functions. Therefore, the memory 604 mainly includes volatile storage media such as random access memory, registers, caches, and non-volatile storage media such as read only memory, hard disk drive, solid state drive, flash memory, and / or optical storage device. May be provided with one or more non-transitory computer readable storage media, as an example.

マイクロホンアレイ606は、ネットワークマイクロホンデバイス600の周辺環境の音声を検出するように配置された複数のマイクロホンであってもよい。マイクロホンアレイ606は、主としてコンデンサマイクロホン、エレクトレットコンデンサマイクロホン、又はダイナミックマイクロホンなどの既知であるか、又は今後開発される任意のタイプのマイクロホンであってもよい。1つの例では、マイクロホンアレイを、ネットワークマイクロホンデバイスに対する1又は複数の方向から音声を検出するように配置してもよい。マイクロホンアレイ606は周波数範囲の一部に敏感であってもよい。1つの例では、マイクロホンアレイ606の第1のサブセットは第1の周波数範囲に敏感である一方で、マイクロホンアレイの第2のサブセットは第2の周波数範囲に敏感であってもよい。マイクロホンアレイ606を、音源(たとえば、音声、可聴音)の位置情報を捕捉し、及び/又は背景雑音のフィルタリングを補助するようにさらに構成してもよい。特に、いくつかの実施形態では、マイクロホンアレイは複数のマイクロホンではなく、単一のマイクロホンのみで構成されていてもよい。   The microphone array 606 may be a plurality of microphones arranged to detect sound in the environment surrounding the network microphone device 600. The microphone array 606 may be any type of microphone known or later developed, primarily a condenser microphone, an electret condenser microphone, or a dynamic microphone. In one example, the microphone array may be arranged to detect speech from one or more directions with respect to the network microphone device. Microphone array 606 may be sensitive to a portion of the frequency range. In one example, a first subset of the microphone array 606 may be sensitive to the first frequency range while a second subset of the microphone array may be sensitive to the second frequency range. Microphone array 606 may be further configured to capture positional information of a sound source (eg, voice, audible sound) and / or assist in filtering background noise. In particular, in some embodiments, the microphone array may be comprised of only a single microphone, rather than multiple microphones.

ネットワークインタフェース608を、図5に関連してCR522、PBD532〜538、クラウドネットワーク502内のコンピューティングデバイス504〜508、及び他のネットワークマイクロホンデバイスなどを主として含む、様々なネットワークデバイス間の無線及び/又は有線通信を容易にするように構成してもよい。このため、ネットワークインタフェース608はこれらの機能を実行するのに適した任意の形態をとっていてもよく、その例としてはEthernetインタフェース、シリアルバスインタフェース(たとえば、FireWire、USB2.0など)、無線通信を容易にするように構成されたチップセット及びアンテナ、並びに/又は有線及び/又は無線通信を提供する他の任意のインタフェースを挙げることができる。1つの例では、ネットワークインタフェース608は業界標準に基づいていてもよい(たとえば、IEEE802.3を含む赤外線規格、無線規格、及び有線規格、IEEE802.11a、802.11b、802.11g、802.11n、802.11ac、802.15を含む無線規格、並びに4Gなどの移動体通信規格など)。   Wireless and / or wireless between various network devices, including primarily network interface 608, CR 522, PBD 532-538, computing devices 504-508 in cloud network 502, and other network microphone devices etc. in conjunction with FIG. It may be configured to facilitate wired communication. Thus, the network interface 608 may take any form suitable for performing these functions, such as Ethernet interface, serial bus interface (eg, FireWire, USB 2.0, etc.), wireless communication May include a chipset and antenna configured to facilitate communication, and / or any other interface that provides wired and / or wireless communication. In one example, network interface 608 may be based on industry standards (eg, infrared standards including IEEE 802.3, wireless standards, and wired standards, IEEE 802.11a, 802.11b, 802.11g, 802.11n Wireless standards including 802.11ac, 802.15, and mobile communication standards such as 4G).

ネットワークマイクロホンデバイス600のユーザインタフェース610を、ネットワークマイクロホンデバイスとのユーザ対話を容易にするように構成してもよい。1つの例では、ユーザインタフェース608は、ユーザがネットワークマイクロホンデバイス600に入力を直接提供できるようにするために、主として物理的ボタン、タッチセンサ画面及び/又は面上に設けられるグラフィカルユーザインタフェースなどの1又は複数を備えていてもよい。ユーザインタフェース610は、視覚的フィードバック及び/又は音声フィードバックをユーザに提供するための1又は複数のライトとスピーカ614とをさらに備えていてもよい。1つの例では、ネットワークマイクロホンデバイス600を、スピーカ614を介してオーディオコンテンツを再生するようにさらに構成してもよい。   The user interface 610 of the network microphone device 600 may be configured to facilitate user interaction with the network microphone device. In one example, the user interface 608 is primarily a physical button, a touch sensor screen and / or a graphical user interface such as provided on a surface to allow the user to provide input directly to the network microphone device 600. Or you may be equipped with two or more. User interface 610 may further include one or more lights and speakers 614 for providing visual and / or audio feedback to the user. In one example, network microphone device 600 may be further configured to play audio content via speaker 614.

III.音声検出の部屋補正のための例示的なシステム、装置、及び方法
多くの場合、ネットワークマイクロホンデバイスを再生デバイスに近接して配置してもよい。たとえば、再生デバイスをネットワークマイクロホンデバイスと同じ部屋に配置してもよい。
III. Exemplary Systems, Apparatuses, and Methods for Voice Detection Room Correction In many cases, a network microphone device may be placed in close proximity to a playback device. For example, the playback device may be located in the same room as the network microphone device.

本明細書に記載の実施例は、NMDが動作する周辺環境の音響特性をNMDに提供することを含む。この周辺環境は、寝室やリビングルームなどの家庭内の部屋であってもよい。周辺環境の音響特性により、音声が室内でどのように伝わるかが定義されてもよい。周辺環境の音響特性は、NMDに向かって発せられた音声入力を解釈するためにNMDが使用してもよい。多くの場合、ネットワークマイクロホンデバイス(NMD)を再生デバイスに近接して配置してもよい。たとえば、再生デバイスをNMDと同じ部屋に配置してもよい。   The embodiments described herein include providing the NMD with acoustic characteristics of the surrounding environment in which the NMD operates. The surrounding environment may be a room in a home such as a bedroom or a living room. The acoustic characteristics of the surrounding environment may define how the sound travels indoors. The acoustic characteristics of the surrounding environment may be used by the NMD to interpret voice input emitted towards the NMD. In many cases, a network microphone device (NMD) may be placed in close proximity to the playback device. For example, the playback device may be located in the same room as the NMD.

音響特性は通常、周辺環境内の表面によって定義される。たとえば、室内の硬い表面が音声を反射することがある。その一方で、柔らかい表面は音声を吸収することがある。周辺環境にこれらの異なるタイプの表面が存在し、且つ配置されることは、その部屋の音響特性とNMDの音声入力を解釈する能力とに影響を与えることになる。   Acoustic properties are usually defined by surfaces in the surrounding environment. For example, hard surfaces in the room may reflect sound. On the other hand, soft surfaces may absorb sound. The presence and location of these different types of surfaces in the surrounding environment will affect the acoustical characteristics of the room and the ability to interpret the NMD's audio input.

NMDはこれらの音響特性を考慮して、発せられた音声入力を正確に回収する必要があり得る。また、場合によっては、オーディオコンテンツは再生デバイスによって、NMDが音声入力を受信すると同時に再生されてもよい。周辺環境及び/又はコンテンツ再生時の音響特性に関する知識を、音声入力を解釈するためにNMDが使用してもよい。   The NMD may need to accurately recover the emitted voice input, taking into account these acoustic characteristics. Also, in some cases, audio content may be played back by the playback device as soon as the NMD receives an audio input. Knowledge of the surrounding environment and / or acoustic characteristics during content playback may be used by the NMD to interpret speech input.

図7〜図11は、開示された動作環境内で実行できる実施形態を提示している。   7-11 present embodiments that can be practiced within the disclosed operating environment.

図7は、NMDによって受信される音声入力の解釈を改善するために実行され得る機能のフローチャートである。いくつかの例では、記載したこれらの機能の1又は複数を再生デバイスによって実行してもよい。他の例では、504〜508などのコンピューティングデバイスはまた、再生デバイスと連携して、或いはこれの代わりにこれらの機能の1又は複数を実行してもよい。コンピューティングデバイスは再生デバイスと関連付けられていてもよく、且つ再生デバイスと関連付けられた処理を実行してもよい。   FIG. 7 is a flowchart of functions that may be performed to improve the interpretation of speech input received by the NMD. In some instances, one or more of these functions described may be performed by the playback device. In other examples, computing devices such as 504-508 may also perform one or more of these functions in conjunction with, or in place of, a playback device. The computing device may be associated with the playback device and may perform processing associated with the playback device.

ステップ702において、周辺環境の音響特性を取得してもよい。この音響特性を、再生デバイスが動作している周辺環境と関連付けてもよい。この音響特性を様々な方法で決定していてもよい。たとえば、再生システムは、いくつかのキャリブレーション段階を通じて周辺環境の音響特性を既に決定していてもよい。メディア再生システムの再生デバイスはマイクロホンとスピーカとを有していてもよい。スピーカは1又は複数のトーンを出力してもよく、また1又は複数のスピーカはそれぞれのマイクロホンを使用してトーンを受信してもよい。このトーンは音声における1又は複数の周波数であってもよい。再生デバイスの各々はトーンを出力してもよい。複数の再生デバイスによって受信されたトーンに基づいて、周辺環境の音響特性を決定することができる。別の例では、別のネットワークデバイス(制御デバイス、第1の再生デバイス、又はNMD自体でさえ)は、第2の再生デバイスのスピーカによって出力されるテストトーンを受信するマイクロホンを備えていてもよい。再生デバイスではなく、或いは再生デバイスに加えて、他のネットワークデバイスは受信したテストトーンを解析して、周辺環境の音響特性を決定してもよい。他の構成も可能である。   At step 702, acoustic characteristics of the surrounding environment may be obtained. This acoustic characteristic may be associated with the surrounding environment in which the playback device is operating. This acoustic property may be determined in various ways. For example, the playback system may have already determined the acoustic characteristics of the surrounding environment through several calibration steps. The playback device of the media playback system may have a microphone and a speaker. The speakers may output one or more tones, and one or more speakers may receive the tones using their respective microphones. This tone may be one or more frequencies in the speech. Each of the playback devices may output a tone. Acoustic characteristics of the surrounding environment can be determined based on the tones received by the plurality of playback devices. In another example, another network device (control device, first playback device, or even the NMD itself) may be equipped with a microphone that receives the test tone output by the speaker of the second playback device . Other playback devices, or in addition to playback devices, other network devices may analyze received test tones to determine the acoustic characteristics of the surrounding environment. Other configurations are also possible.

当該トーンのスペクトル応答、空間応答、及び時間応答によって音響特性を定義してもよい。スペクトル応答は、マイクロホンで受信される音声エネルギーの解析結果であってもよい。空間応答は、マイクロホンで受信される音声エネルギーの方向の解析結果であってもよい。時間応答は、マイクロホンで受信される音声エネルギーの反射に対する解析結果であってもよい。本再生システムはこれらの応答を解析し、場合によっては当該トーンを受信した場所からの方向も考慮して周辺環境の音響特性を決定してもよい。この音響特性を示す通知を、再生デバイス及び/又コンピューティングデバイス504〜508の1又は複数に格納してもよい。   Acoustic characteristics may be defined by the spectral response, spatial response, and temporal response of the tone. The spectral response may be an analysis of the audio energy received at the microphone. The spatial response may be an analysis of the direction of the audio energy received by the microphone. The time response may be an analysis of the reflection of audio energy received at the microphone. The playback system may analyze these responses and possibly determine the acoustic characteristics of the surrounding environment taking into account the direction from where the tone was received. Notifications indicating the acoustic characteristics may be stored on one or more of the playback device and / or computing devices 504-508.

別の例では、部屋の大きさ、部屋の天井の高さ、部屋にある家具などの周辺環境に関する既知の特性に基づいて、音響特性を事前に定義してもよい。コンピューティングデバイス504〜508の1又は複数によって維持されるデータベースにおいて、異なるタイプの特徴を有する部屋の音響特性を格納してもよい。コンピューティングデバイス上に格納される音響特性を、特定の特徴を有する部屋に対する以前の解析に基づいて決定していてもよい。ユーザはメディア再生システムの制御デバイス上に部屋の特徴を入力してもよく、また制御デバイスはこのデータベースにアクセスして部屋の音響特性を決定してもよい。次いで、これらの音響特性を当該環境内に配置された再生デバイスに提供してもよく、或いはこれらをコンピューティングデバイスに格納してもよい。   In another example, the acoustic characteristics may be predefined based on known characteristics of the room size, the ceiling height of the room, the surrounding environment such as furniture in the room. In a database maintained by one or more of the computing devices 504-508, acoustic characteristics of rooms having features of different types may be stored. The acoustic characteristics stored on the computing device may be determined based on previous analysis for a room having a particular feature. The user may enter room characteristics on the control device of the media playback system, and the control device may access this database to determine the room's acoustic characteristics. These acoustic characteristics may then be provided to playback devices located in the environment, or they may be stored on a computing device.

1つの例として、音響特性は部屋の左側に硬い表面が存在し、右側に柔らかい表面が存在し、且つこの部屋が長方形形状であることを示してもよい。要するに、音響特性によって音響的観点からその部屋を特徴付けることができる。   As an example, the acoustical properties may indicate that there is a hard surface on the left side of the room, a soft surface on the right side, and the room is rectangular in shape. In short, acoustic characteristics can characterize the room from an acoustic point of view.

メディア再生システムは複数の再生デバイスを備えていてもよい。再生デバイスの各々は、再生デバイスが動作する周辺環境の音響特性を有していてもよい。ステップ704において、1又は複数のNMDを識別してもよい。1又は複数のNMDは同じ周辺環境内にあってもよい。いくつかの例では、NMDに音響特性を送信する再生デバイスはNMDの直近にある再生デバイスであってもよい。別の例では、NMDに音響特性を送信する再生デバイスはNMDと同じゾーンにある再生デバイスであってもよい。その近接性を再生デバイス及び/又はNMDの設定中、いくつかのキャリブレーションプロセスにおいて示してもよい。たとえば、NMDは自身の存在提示を再生デバイスに対して送信してもよい。この存在の有無を再生デバイス内の状態変数によって提示してもよい。再生デバイスはこの状態変数にアクセスしてNMDを識別してもよい。また、NMDも再生デバイスの存在を識別する同様の状態変数を有していてもよい。   The media playback system may comprise multiple playback devices. Each of the playback devices may have acoustical characteristics of the surrounding environment in which the playback device operates. At step 704, one or more NMDs may be identified. One or more NMDs may be in the same ambient environment. In some instances, the playback device that transmits the acoustical properties to the NMD may be the playback device in the immediate vicinity of the NMD. In another example, the playback device that sends acoustic properties to the NMD may be a playback device that is in the same zone as the NMD. The proximity may be indicated in several calibration processes during setup of the playback device and / or the NMD. For example, the NMD may send its presence presentation to the playback device. This presence or absence may be indicated by state variables in the playback device. The playback device may access this state variable to identify the NMD. The NMD may also have similar state variables that identify the presence of the playback device.

他の例では、メディア再生システムの再生デバイスをNMDと結合(ペアリング又はグループ化)してもよい。この結合はまた、再生デバイスとNMDとが同じ部屋又はゾーン内にあるか、若しくはコンテンツを同期して再生しているなど、これらが互いに近接していることを示してもよい。再生デバイスとNMDとの結合は、いくつかの点で再生デバイスの結合方法と同様であってもよい。この結合を、再生デバイスによって格納された状態変数に反映してもよい。NMDを再生デバイスと結合している場合、NMDを識別するように再生デバイスを配置してもよい。さらに、NMDを移動させて別の再生デバイスと結合する場合、別の再生デバイス内の状態変数を更新して、NMDとの結合を反映するようにしてもよい。同様に、NMDは自身の状態変数を更新して、新たな再生デバイスの存在を反映するようにしてもよい。   In another example, the playback devices of the media playback system may be coupled (paired or grouped) with the NMD. This coupling may also indicate that the playback device and the NMD are in close proximity to one another, such as being in the same room or zone, or playing content synchronously. The coupling between the playback device and the NMD may be similar in some ways to the coupling method of the playback device. This coupling may be reflected in the state variables stored by the playback device. If the NMD is coupled to a playback device, the playback device may be arranged to identify the NMD. Furthermore, if the NMD is moved and coupled to another playback device, the state variable in another playback device may be updated to reflect the binding to the NMD. Similarly, the NMD may update its state variables to reflect the presence of a new playback device.

いくつかの例では、結合された再生デバイス及びNMDにおいて、それらの間のレイテンシを低減するために様々なネットワーキング技術を使用してもよい。たとえば、WANネットワーク接続ではなくローカルネットワーク接続(LAN又はBluetooth(登録商標))を通信に使用してもよい。別の例として、再生デバイスをNMDと結合している間に、通信がたとえば「典型的な」2.4Ghz通信から5Ghz通信に切り替わるなど、ローカルネットワーク内で異なる周波数範囲に戻る可能性がある。さらに別の例として、再生デバイスをNMDと結合した場合に、通信が2.4Ghz又は5Ghzスペクトルのいずれかの予約チャネルに切り替わるか、或いはたとえば、再生デバイスが他のネットワークトラフィックの中継ノードとして機能することを停止するなど、他のネットワークトラフィックが低減される可能性がある。他の構成も可能である。   In some instances, various networking technologies may be used to reduce latency between coupled playback devices and NMDs. For example, local network connection (LAN or Bluetooth) may be used for communication rather than WAN network connection. As another example, while combining the playback device with the NMD, the communication may revert to a different frequency range within the local network, such as switching from “typical” 2.4 Ghz communication to 5 Ghz communication, for example. As yet another example, if the playback device is coupled to the NMD, the communication switches to either a 2.4 Ghz or 5 Ghz spectrum reserved channel or, for example, the playback device acts as a relay node for other network traffic Other network traffic may be reduced, such as stopping things. Other configurations are also possible.

ステップ706において、音声入力に適用させるために音響特性を提供してもよい。1つの実施形態では、通信ネットワーク546の1又は複数を介してNMDに対し、再生デバイスからメッセージとして音響特性を送信してもよい。他の実施形態では、再生デバイスは、コンピューティングデバイス上の音響特性を通信リンク542を介してNMDに送信させてもよい。さらに別の実施形態では、音響特性は再生デバイスと関連付けられたコンピューティングデバイス上にあってもよく、また再生デバイスは、NMDと関連付けられたコンピューティングデバイスに対し音響特性にアクセスさせてもよい。他の構成も可能である。   At step 706, acoustical properties may be provided for application to speech input. In one embodiment, the acoustic characteristics may be transmitted as a message from the playback device to the NMD via one or more of the communication networks 546. In other embodiments, the playback device may cause the NMD to transmit acoustic characteristics on the computing device via the communication link 542. In yet another embodiment, the acoustic property may be on a computing device associated with the playback device, and the playback device may allow the computing device associated with the NMD to access the acoustic property. Other configurations are also possible.

いくつかの実施形態では、再生デバイスは、音響特性をNMDに提供する必要がない場合がある。代わりに、NMDによってコンピューティングデバイス自体から音響特性を取得することが可能であってもよい。NMDは、自身に近接した(結合されているか、ペアリングされているか、又はその他の方法で)再生デバイスの通知を提供してもよく、また、コンピューティングデバイスは周辺環境の音響特性を提供してもよい。他の構成も可能である。   In some embodiments, the playback device may not need to provide acoustical properties to the NMD. Alternatively, it may be possible to obtain acoustical properties from the computing device itself by the NMD. The NMD may provide notification of the playback device in close proximity (coupled, paired or otherwise) with the computing device, and the computing device may provide acoustic characteristics of the surrounding environment. May be Other configurations are also possible.

NMDは、通常マイクロホン応答を介して音声入力を処理することができる。マイクロホン応答は、周波数に対するマイクロホンの感度の指標である。   The NMD can process audio input, usually via microphone responses. Microphone response is a measure of the sensitivity of the microphone to frequency.

いくつかの実施形態では、NMDは自ら受信した音声入力に音響特性を適用して、音声入力における歪みを補正してもよい。このように、NMDによって音声入力を良好に解釈することが可能であってもよい。NMDは、この音響特性を自ら適用してもよく、及び/又はNMDでの処理がクラウドベースであり得る場合に、コンピューティングデバイスに処理をオフロードしてもよい。   In some embodiments, the NMD may apply acoustic characteristics to the self-received speech input to correct for distortion in the speech input. Thus, it may be possible to better interpret speech input by the NMD. The NMD may apply this acoustical property itself and / or offload processing to the computing device if the processing at the NMD may be cloud based.

NMDは、音声入力への音響特性の適用時に音響特性に基づいてフィルタを定義してもよい。このフィルタは、周辺環境におけるスペクトル応答、空間応答、及び時間応答を含んでいてもよい。NMDは、自身が受信した音声入力にフィルタを適用して、音声入力を解釈する前に歪みを補正してもよい。このフィルタを、以下の導出に基づいて決定してもよい。
Xa(w)×P(w)×h(w)×m(w)=Ya(w)
ここで、Xaはキャリブレーショントーンであり、Pは再生デバイスのスピーカ応答であり、hは室内応答(たとえば、室内の音響特性)であり、mはマイクロホン応答であり、Yaは処理応答であり、これは、キャリブレーションプロセス中に送信されるトーンに対応する受信済みトーンであってもよい。符号×は周波数領域の畳み込み関数を表す。Xa、P、m、及びYaは分かっているので、室内応答(たとえば、フィルタ)を次のように算出してもよい。
−1(w):Xa(w)×P(w)×m(w)=Ya(w)×h−1(w)
次いで、音声入力Ybを受信した場合、室内応答h(たとえば、フィルタ)を適用して、音声入力Xbを次のように決定してもよい。
Xb(w)=Yb(w)×h−1(w)×P−1(w)×m−1(w)
The NMD may define a filter based on acoustical properties when applying the acoustical properties to the speech input. This filter may include spectral response, spatial response, and temporal response in the surrounding environment. The NMD may apply a filter to the speech input it receives to correct the distortion before interpreting the speech input. This filter may be determined based on the following derivation.
Xa (w) × P (w) × h (w) × m (w) = Ya (w)
Where Xa is the calibration tone, P is the speaker response of the playback device, h is the room response (eg, room acoustics), m is the microphone response, Ya is the processing response, This may be a received tone that corresponds to the tone sent during the calibration process. The symbol x represents a convolution function in the frequency domain. Since Xa, P, m and Ya are known, the room response (e.g., filter) may be calculated as follows.
h −1 (w): Xa (w) × P (w) × m (w) = Ya (w) × h −1 (w)
Then, when the voice input Yb is received, an indoor response h (for example, a filter) may be applied to determine the voice input Xb as follows.
Xb (w) = Yb (w) × h −1 (w) × P −1 (w) × m −1 (w)

いくつかの実施形態では、再生システムは周辺環境の変化を考慮して、周辺環境の音響特性を周期的に決定してもよい。この場合、NMDが受信した音声入力に最新の音響特性を適用してそれを適切に解釈できるように、1又は複数の再生デバイスは動作702〜706を周期的に実行してもよい。   In some embodiments, the playback system may periodically determine the acoustic characteristics of the surrounding environment, taking into account changes in the surrounding environment. In this case, one or more playback devices may perform operations 702-706 periodically so that the NMD can apply the latest acoustical properties to the received audio input and interpret it appropriately.

図8は、NMDによる音声入力の回収を改善するために実行され得る機能を表した別のフローチャートである。いくつかの例では、記載したこれらの機能の1又は複数を再生デバイスによって実行してもよい。他の例では、コンピューティングデバイス504〜508などはまた、再生デバイスと連携して、或いは再生デバイスの代わりに、これらの機能の1又は複数を実行してもよい。コンピューティングデバイスは再生デバイスと関連付けられていてもよく、且つ再生デバイスと関連付けられた処理を実行してもよい。   FIG. 8 is another flow chart illustrating functions that may be performed to improve the recovery of voice input by the NMD. In some instances, one or more of these functions described may be performed by the playback device. In other examples, computing devices 504-508 or the like may also perform one or more of these functions in conjunction with, or in place of, the playback device. The computing device may be associated with the playback device and may perform processing associated with the playback device.

ステップ802において周辺環境の音響特性を取得してもよく、ステップ804においてNMDを識別してもよく、またステップ806において音響特性を提供してもよい。この音響特性を、NMD及び/又はNMDと関連付けられたコンピューティングデバイスに提供してもよい。   The acoustic characteristics of the surrounding environment may be obtained at step 802, the NMD may be identified at step 804, and the acoustic characteristics may be provided at step 806. This acoustic property may be provided to the NMD and / or computing devices associated with the NMD.

場合によっては、NMDは、メディア再生システムが同時にオーディオコンテンツを再生している周辺環境において動作してもよい。NMDは、オーディオコンテンツが同時に再生されている場合でも音声入力を受信してもよい。   In some cases, the NMD may operate in a peripheral environment where the media playback system is simultaneously playing audio content. The NMD may receive audio input even when audio content is being played simultaneously.

ステップ808において、オーディオコンテンツを提供してもよい。オーディオコンテンツをNMD及び/又はNMDと関連付けられたコンピューティングデバイスに提供してもよい。このコンテンツは、たとえば、再生デバイスによって再生される音楽のストリームであってもよい。再生デバイスは、NMDと同じゾーン内にあるNMDに近接しているNMDに対して、或いはNMDと結合され得る(又はグループ化され得る)NMDに対してオーディオコンテンツを提供してもよい。いくつかの実施形態では、たとえばNMDによる処理がクラウドベースである場合などに、コンピューティングデバイスを介してこのコンテンツをNMDに提供してもよい。さらに別の実施形態では、たとえば、NMD及び/又は再生デバイスによる処理がクラウドベースである場合などに、再生デバイスと関連付けられたコンピューティングデバイスを介してNMDと関連付けられたコンピューティングデバイスに対してコンテンツを提供してもよい。   At step 808, audio content may be provided. Audio content may be provided to the NMD and / or computing devices associated with the NMD. This content may be, for example, a stream of music played by the playback device. The playback device may provide audio content to an NMD that is close to the NMD that is in the same zone as the NMD, or to the NMD that may be combined (or grouped) with the NMD. In some embodiments, this content may be provided to the NMD via a computing device, such as when processing by the NMD is cloud based. In yet another embodiment, the content is for computing devices associated with the NMD via the computing device associated with the playback device, such as when processing by the NMD and / or the playback device is cloud based, etc. May be provided.

ステップ808において、音響特性(及び、必要に応じてオーディオコンテンツ)を音声入力に適用してもよい。たとえば、NMD(又はNMDと関連付けられたコンピューティングデバイス)は、自身が受信した音声入力にフィルタを適用して、その音声入力を解釈してもよい。たとえば、NMD(又はNMDと関連付けられたコンピューティングデバイス)は、音声入力を良好に分離するために、音声入力と共に再生されるオーディオコンテンツを使用してもよい。音声入力を解釈するために、再生デバイスによって再生されるオーディオコンテンツは事実上ノイズであってもよい。この点において、受信した音声入力を良好に分離するために、受信した音声入力からオーディオコンテンツを除去してもよい。   At step 808, acoustical properties (and, optionally, audio content) may be applied to the audio input. For example, the NMD (or a computing device associated with the NMD) may apply a filter to the speech input it receives to interpret that speech input. For example, the NMD (or computing device associated with the NMD) may use audio content played back with the audio input to better isolate the audio input. The audio content played back by the playback device may be noise in nature to interpret the audio input. In this regard, the audio content may be removed from the received audio input to better isolate the received audio input.

図9は、音声入力の解釈時に、NMD及び/又は関連付けられたコンピューティングデバイスによって実行される機能のフローチャートである。ステップ902において、周辺環境の音響特性を示す通知を取得してもよい。ステップ904において、再生デバイスにより再生中のオーディオコンテンツも必要に応じて受信してもよい。再生デバイスは、NMDが配置されている中で同じゾーン内にあるか、又はNMDと結合されていてもよい。ステップ906において、たとえばNMDによって音声入力を受信してもよい。音声入力は音声コマンドであってもよい。NMDは、NMD上の何らかのボタンが押下されたこと、又はそれが音声入力であることを示す音声入力内のコマンドワードによって、音声入力を受信したことを知る場合がある。ステップ908において、フィルタ及び/又は再生デバイスによって再生されるオーディオコンテンツのうちの1又は複数を適用若しくは使用して、受信した音声入力を解釈してもよい。   FIG. 9 is a flowchart of functions performed by an NMD and / or an associated computing device when interpreting voice input. At step 902, a notification may be obtained that indicates the acoustic characteristics of the surrounding environment. At step 904, the audio content being played by the playback device may also be received as needed. The playback device may be in the same zone as the NMD is located or be coupled to the NMD. At step 906, voice input may be received, for example, by the NMD. The voice input may be a voice command. The NMD may know that a speech input has been received by the pressing of some button on the NMD, or by a command word in the speech input indicating that it is a speech input. At step 908, one or more of the audio content played back by the filter and / or playback device may be applied or used to interpret the received audio input.

図10は、たとえば再生デバイスに周辺環境の音響特性を提供させるのではなく、NMDがこれを決定できるようにする機能のフローチャートである。この機能を、再生デバイス及び/又は再生デバイスと関連付けられたコンピューティングデバイスによって実行してもよい。   FIG. 10 is a flow chart of a function that allows, for example, the playback device to provide the acoustic characteristics of the surrounding environment, but allows the NMD to determine this. This function may be performed by the playback device and / or the computing device associated with the playback device.

NMDは、1又は複数の再生デバイスにトーンの再生を命じる指示を送信してもよい。NMDが指示を送信する再生デバイスは、NMDに近接した再生デバイス、及び/又はNMDと結合されている(又はグループ化されている)か、若しくはNMDと同じゾーン内にある再生デバイスを含んでいてもよい。   The NMD may send an instruction to command one or more playback devices to play the tone. The playback device to which the NMD sends instructions includes a playback device close to the NMD, and / or a playback device coupled (or grouped) with the NMD or in the same zone as the NMD It is also good.

ステップ1002において、オーディオトーンの再生を命じる指示を受信してもよい。この指示をNMD又はNMDと関連付けられたコンピューティングデバイスから受信してもよい。これに応答して、ステップ1004において再生デバイスによってオーディオトーンを出力してもよい。NMDはマイクロホンアレイ606を使用してこのトーンを受信してもよい。マイクロホンアレイ606はトーンの振幅を示す通知を提供してもよい。さらに、マイクロホンアレイ606はトーンの方向を示す通知を提供してもよい。この方向を、複数の再生デバイスからのトーン受信に基づいて決定してもよい。次いで、NMD及び/又は関連付けられたコンピューティングデバイスは、複数の再生デバイスからのトーン受信に基づいて周辺環境の音響特性を決定してもよい。このように、NMDはこの音響特性を再生デバイスから取得する必要がない場合がある。   At step 1002, an indication to command playback of the audio tone may be received. This indication may be received from the NMD or a computing device associated with the NMD. In response, an audio tone may be output by the playback device at step 1004. The NMD may receive this tone using a microphone array 606. Microphone array 606 may provide a notification indicating the amplitude of the tone. Additionally, the microphone array 606 may provide a notification indicating the direction of the tone. This direction may be determined based on tone reception from multiple playback devices. The NMD and / or associated computing device may then determine the acoustic characteristics of the surrounding environment based on tone reception from the plurality of playback devices. Thus, the NMD may not need to acquire this acoustical property from the playback device.

マイクロホンアレイ606は、NMDが音声入力の発信元の方向を決定できるようにしてもよい。この方向を、オーディオコンテンツの再生を改善するために再生デバイスによって使用することができる。たとえば、メディア再生システムは、1又は複数の再生デバイスから発生させるオーディオ音を音声入力の発信元と同じ方向に向けてもよい。これはリスナーが位置する方向であってもよい。他の構成も可能である。   Microphone array 606 may allow the NMD to determine the direction of the source of the speech input. This orientation can be used by the playback device to improve playback of the audio content. For example, the media playback system may direct audio sound generated from one or more playback devices in the same direction as the source of the audio input. This may be the direction in which the listener is located. Other configurations are also possible.

図11は、NMDによって決定された指向性を使用することに関連した、再生デバイス及び/又は関連付けられたコンピューティングデバイスによって実行される機能のフローチャートである。   FIG. 11 is a flowchart of functions performed by the playback device and / or the associated computing device in connection with using the directivity determined by the NMD.

ステップ1102において、方向を示す通知を受信してもよい。これをNMD及び/又は関連付けられたコンピューティングデバイスから受信してもよい。この方向は、NMDが音声入力を受信した場所、したがってユーザがその周辺環境において位置し得る場所を示していてもよい。再生デバイスは複数のスピーカを有していてもよく、これらの出力を制御して、再生デバイスによって再生されるオーディオコンテンツの指向性に効果をもたらすようにしてもよい。ステップ1104において、再生デバイスはこの指向性を使用して、複数のスピーカのオーディオ出力を調整してもよい。このオーディオ出力は音楽コンテンツの再生であってもよい。再生デバイスは、スピーカによって出力されるオーディオ信号の位相を調整して、NMDによって指定される指向性に従ってオーディオ出力の指向性を生成してもよい。この点において、オーディオコンテンツはユーザに対して指向され得、したがってオーディオ聴取体験が改善されることになる。付加的に、又は代替的に、再生デバイスがオーディオ出力の振幅(たとえば、音量)を調整することもある。場合によっては、NMDがオーディオ出力を発生させることもある。この音声出力は、音声入力に対する音声応答であるか、又はビープ音やトーンなどの他の何らかのタイプの音声であってもよい。さらに付加的に、又は代替的に、再生デバイスがこの指向性を使用して、NMDの代わりに、若しくはNMDに加えて、当該オーディオ出力を出力するのに適している可能性のある再生デバイスを識別してもよい。たとえば、識別された再生デバイスはリスナーのすぐ手前にあり得、これによってリスナーがオーディオ出力を容易に聴取できる。他の構成も可能である。   At step 1102, a notification indicating a direction may be received. This may be received from the NMD and / or the associated computing device. This direction may indicate where the NMD has received speech input and thus where the user may be located in the surrounding environment. The playback device may have multiple speakers and their output may be controlled to have an effect on the directionality of the audio content played by the playback device. In step 1104, the playback device may use this directivity to adjust the audio output of multiple speakers. The audio output may be playback of music content. The playback device may adjust the phase of the audio signal output by the speaker to generate audio output directivity according to the directivity specified by the NMD. In this regard, audio content may be directed to the user, thus improving the audio listening experience. Additionally or alternatively, the playback device may adjust the amplitude (eg, volume) of the audio output. In some cases, NMD may also generate audio output. The audio output may be an audio response to audio input, or some other type of audio such as a beep or a tone. Additionally or alternatively, the playback device may be suitable for outputting the audio output in place of or in addition to the NMD using this directivity. It may be identified. For example, the identified playback device may be in front of the listener, which allows the listener to easily listen to the audio output. Other configurations are also possible.

IV.メディア再生システムの音声制御のための例示的なシステム、装置、及び方法
本明細書に記載の例は、メディア再生システムを制御することを含んでいてもよい。特に、図12は、音声応答を再生するための方法に関する例示的なフロー図1200を示す。方法1200は、たとえば、図1のメディア再生システム100、図2の再生デバイス200の1又は複数、図3の制御デバイス300の1又は複数、及び図5のシステム500における複数のデバイスの1又は複数を含む動作環境内で実行できる方法の実施形態を提示している。方法1200は、本明細書に記載しているような様々な通信経路を介してネットワークマイクロホンシステムとメディア再生システムとの間で情報の送受信を行うこと、及び/又は「ネットワーク再生システム及びネットワークマイクロホンシステムを含むメタデータ交換(Metadata Exchange Involving a Networked Playback System and a Networked Microphone System)」と題する2016年2月22日に出願された出願第62/298,350号明細書に記載のメタデータ交換チャネルを使用することを含んでもよい。本出願は、その全体を参照によって本明細書に引用するものとする。方法1200は1又は複数の操作、機能、又はアクションを含んでいてもよい。
IV. Exemplary Systems, Devices, and Methods for Audio Control of a Media Playback System The examples described herein may include controlling a media playback system. In particular, FIG. 12 shows an exemplary flow diagram 1200 for a method for playing an audio response. Method 1200 may, for example, be one or more of media playback system 100 of FIG. 1, one or more of playback devices 200 of FIG. 2, one or more of control devices 300 of FIG. 3, and one or more of the plurality of devices in system 500 of FIG. And provides an embodiment of a method that can be performed within an operating environment including: Method 1200 includes transmitting and receiving information between a network microphone system and a media playback system via various communication paths as described herein, and / or “a network playback system and a network microphone system Metadata exchange channel described in Application No. 62 / 298,350 filed Feb. 22, 2016 entitled "Metadata Exchange Involving a Networked Playback System and a Networked Microphone System". It may include using. This application is incorporated herein by reference in its entirety. Method 1200 may include one or more operations, functions, or actions.

いくつかの例では、NMD512,514,516の1又は複数を、1又は複数のネットワーク若しくは通信経路542、546に接続してもよい。NMDを、メディア再生システム(たとえば、コンピューティングデバイス506、CR522、PBD532,534,536,538)と統合又はインタフェースするように構成してもよい。NMDはネットワークマイクロホンシステム(たとえば、NMD512,514,516,504)に含まれていてもよい。   In some examples, one or more of the NMDs 512, 514, 516 may be connected to one or more networks or communication paths 542, 546. The NMD may be configured to integrate or interface with a media playback system (e.g., computing device 506, CR 522, PBD 532, 534, 536, 538). The NMD may be included in a network microphone system (e.g., NMD 512, 514, 516, 504).

ブロック1202において、NMDがメディア再生システムとインタフェースする、又はこれをメディア再生システムと関連付けるようにNMDを構成するために、ユーザは、たとえばブロック1202でNMD又はネットワークマイクロホンシステム若しくはメディア再生システムと関連付けられたアプリケーションを起動するための制御デバイス(たとえば、CR522)を選択してもよい。このアプリケーションは、ネットワークマイクロホンシステム及び/又はメディア再生システムの機能若しくは設定を制御するためのアプリケーションであってもよい。ネットワークマイクロホンシステムは、ネットワークマイクロホンシステムに機能の追加又は強化をもたらすために利用可能な1又は複数の専用アドオン機能を有していてもよい。   At block 1202, the user is associated, for example, at block 1202 with the NMD or network microphone system or media playback system to configure the NMD to interface with or associate the media playback system with the media playback system A control device (e.g., CR 522) may be selected to launch the application. This application may be an application for controlling functions or settings of the network microphone system and / or the media playback system. The network microphone system may have one or more dedicated add-on functions available to bring the network microphone system with additions or enhancements of functions.

ブロック1204において、ネットワークマイクロホンシステム用に利用可能なアドオン機能をユーザが選択できるように表示してもよい。利用可能なアドオン機能を表示している例示的なユーザインタフェース1300を、図13Aに示している。NMDは1又は複数の利用可能なアドオン機能1302,1304,1306を有していてもよい。機能1302は、たとえば、メディア再生システムの再生を制御することができる音楽制御機能であってもよい。ブロック1206において、制御デバイスは、音楽制御機能又はスキルをNMDに追加するためのユーザ入力を受信してもよい。たとえば、ユーザは機能1302を選択することによって、音楽制御機能1302の追加を選択してもよい。音楽制御機能1302は、音楽制御機能又はスキルをユーザのためにネットワークマイクロホンシステムに追加するアプリケーションであってもよい。音楽制御機能1302の追加を選択すると、ディスプレイが切り替わってユーザインタフェース1308が表示され、ユーザからのアカウント情報の入力を促す。   At block 1204, the add-on features available for the network microphone system may be displayed for user selection. An exemplary user interface 1300 displaying available add-on features is shown in FIG. 13A. The NMD may have one or more available add-on features 1302, 1304, 1306. Function 1302 may be, for example, a music control function that can control playback of the media playback system. At block 1206, the control device may receive user input to add music control functions or skills to the NMD. For example, the user may select the addition of music control function 1302 by selecting function 1302. The music control function 1302 may be an application that adds music control functions or skills to the network microphone system for the user. When the addition of the music control function 1302 is selected, the display is switched and the user interface 1308 is displayed, prompting the user to input account information.

ブロック1208において、制御デバイスは、ユーザインタフェース1308と入力フィールド1310及び1312とを介して音楽制御機能を追加するためのアカウント情報を受信してもよい。このアカウント情報は、ユーザがメディア再生システム及び/又は音楽サービスにおいて有するアカウントのものであってもよい。アカウント情報は当該アカウントのユーザ名とパスワードとを含んでいてもよい。ユーザ名をフィールド1310に入力してもよく、またパスワードをフィールド1312に入力してもよい。ユーザは送信ボタン1314などのボタンを選択してユーザ名とパスワードとを送信し、メディア再生システム(たとえば、コンピューティングデバイス506)及び/又は音楽サービス(たとえば、コンピューティングデバイス508)への認証作業を行ってもよい。アカウント情報をコンピューティングデバイス504、コンピューティングデバイス506、及び/又はコンピューティングデバイス508での認証作業のために、通信経路542,544,546及び/又はメタデータ交換チャネルのいずれかを介して送信してもよい。ひとたび認証されると、当該アカウントと関連付けられたユーザ情報はメディア再生システムからネットワークマイクロホンシステムに送信されてもよい。ユーザ情報はカスタム名(たとえば、カスタムゾーン名、カスタムプレイリスト名、カスタム曲名、カスタムアルバム名、カスタムアーティスト名など)、ユーザ情報と関連付けられた世帯識別子、PBD識別子、及び/又はゾーン識別子であってもよい。カスタム名は、ユーザによって指定される任意の名前であってもよい。たとえば、メディア再生システムは、ゾーンに名前を付けるときにユーザが選択できるような共通のゾーン名のリストを提供し、及び/又はユーザにゾーンの名前入力時のオプションを付与してもよい。制御デバイス300のインタフェースは共通のゾーン名のリストを表示し、及び/又は制御デバイス300が入力(たとえば、音声、テキスト)を受け取ることによってユーザがカスタムゾーン名を入力できるフィールドを表示してもよい。カスタム名情報をシステム500内の任意のデバイスに送信するか、又はこれと共有してもよい。   At block 1208, the control device may receive account information for adding music control functionality via the user interface 1308 and the input fields 1310 and 1312. This account information may be that of the account that the user has in the media playback system and / or music service. The account information may include the username and password of the account. A username may be entered in field 1310 and a password may be entered in field 1312. The user selects a button such as send button 1314 to send the username and password, and authenticates the media playback system (eg, computing device 506) and / or the music service (eg, computing device 508) You may go. Send account information via any of the communication paths 542, 544, 546 and / or the metadata exchange channel for authentication work on the computing device 504, computing device 506, and / or computing device 508. May be Once authenticated, user information associated with the account may be transmitted from the media playback system to the network microphone system. The user information may be a custom name (eg, custom zone name, custom playlist name, custom song name, custom album name, custom artist name, etc.), a household identifier associated with the user information, a PBD identifier, and / or a zone identifier. It is also good. The custom name may be any name specified by the user. For example, the media playback system may provide a list of common zone names that can be selected by the user when naming the zone, and / or may give the user an option when entering the zone name. The interface of control device 300 may display a list of common zone names and / or may display fields where the user can enter a custom zone name by receiving input (eg, voice, text) . Custom name information may be sent to or shared with any device in system 500.

ブロック1210において、1つのデフォルトゾーン(たとえば、1又は複数の再生デバイス)又は複数のデフォルトゾーン(たとえば、異なるゾーンにおける少なくとも2つの再生デバイス、少なくとも2つのゾーンのグループ)をNMDに対して決定してもよい。このデフォルトゾーン又は再生デバイスを、「デフォルト再生デバイス」と題する2016年2月22日に出願された出願第62/298,410号明細書に記載されているように決定してもよい。本出願は、その全体を参照によって本明細書に引用するものとする。   At block 1210, a default zone (eg, one or more playback devices) or a plurality of default zones (eg, at least two playback devices in different zones, a group of at least two zones) are determined for the NMD It is also good. This default zone or playback device may be determined as described in Application No. 62 / 298,410 filed Feb. 22, 2016 entitled "Default Playback Device". This application is incorporated herein by reference in its entirety.

いくつかの態様では、ユーザは初期構成又は設定中にデフォルトゾーンを指定してもよい。図13Cに示すユーザインタフェース1316は、NMDと関連付けるためのデフォルト再生ゾーンをユーザが選択できるようにする例示的なユーザインタフェースを示している。ユーザインタフェース1316は、利用可能な再生ゾーン1318のリストを表示してもよい。表示される利用可能な再生ゾーンの名前は、ブロック1208で入力済みのユーザアカウントと関連付けられたカスタム名を含んでいてもよい。たとえば、利用可能な再生ゾーン1318のリストは、「リビングルーム」と、「キッチン」と、カスタムゾーン名である「ニックの部屋(Nick’s Room)」とを含んでいてもよい。表示されるリストは、NMD又は他の制御デバイスによって受信されたコマンドに応答して、音声応答及び/又は音楽を再生するためのデフォルトゾーンをユーザが指定できるように選択可能であってもよい。図13Cは、ユーザがキッチンをデフォルトゾーンとして選択する例を示している。ユーザは、送信ボタンなどのボタン1320を選択してデフォルトゾーンの選択を確定し、且つその選択を送信してもよい。図13Dに示す確認画面1322を表示して、設定プロセスが完了したことをユーザに通知してもよく、またユーザはボタン1326を選択して、確認画面1322を閉じてもよい。   In some aspects, the user may specify a default zone during initial configuration or setup. The user interface 1316 shown in FIG. 13C illustrates an exemplary user interface that allows the user to select a default playback zone to associate with the NMD. User interface 1316 may display a list of available playback zones 1318. The available playback zone names displayed may include a custom name associated with the entered user account at block 1208. For example, the list of available playback zones 1318 may include a "living room", a "kitchen" and a custom zone name "Nick's Room". The displayed list may be selectable to allow the user to specify a default zone for playing audio responses and / or music in response to commands received by the NMD or other control device. FIG. 13C shows an example where the user selects the kitchen as a default zone. The user may select a button 1320, such as a submit button, to confirm the selection of the default zone and transmit the selection. A confirmation screen 1322 shown in FIG. 13D may be displayed to notify the user that the setting process has been completed, or the user may select button 1326 and close the confirmation screen 1322.

ブロック1212において、ユーザ固有の再生情報を、たとえばメディア再生システムからネットワークマイクロホンシステムに送信してもよい。ユーザ固有の情報は、カスタムゾーン名、カスタムプレイリスト、及び/又はカスタムプレイリスト名などのカスタム再生情報であってもよい。いくつかの態様では、ユーザ固有の情報及び/又はユーザアカウントは世帯識別子(HHI)と関連付けられていてもよい。ユーザ固有の再生情報を、たとえばメタデータ交換チャネル及び/又はメディア再生システムとネットワークマイクロホンシステムとの間の他の任意の通信経路を介して、メディア再生システム(たとえば、コンピューティングデバイス506、CR522、PBD532、PBD534、PBD536、及び/又はPBD538)からネットワークマイクロホンシステム(たとえば、コンピューティングデバイス504、NMD512、NMD514、及び/又はNMD516)に対して送信してもよい。   At block 1212, user-specific playback information may be sent, for example, from the media playback system to the network microphone system. The user specific information may be custom playback information such as custom zone names, custom playlists, and / or custom playlist names. In some aspects, user specific information and / or user accounts may be associated with a household identifier (HHI). A media playback system (eg, computing device 506, CR 522, PBD 532) via user specific playback information, eg, via a metadata exchange channel and / or any other communication path between the media playback system and the network microphone system. , PBD 534, PBD 536, and / or PBD 538) to a network microphone system (eg, computing device 504, NMD 512, NMD 514, and / or NMD 516).

コンピューティングデバイス504は、カスタム再生情報を動的変数として格納してもよく、動的変数は様々な変数型と動的に関連付けることができる変数であってもよい。たとえば、「ニックの部屋」はカスタムゾーン名であってもよく、これをゾーン変数型と関連付けられた動的変数として格納してもよい。別の例として、「ニックのお気に入り(Nick’s Faves)」は、ユーザによって作成されたカスタム名を有するカスタムプレイリストであってもよい。「ニックのお気に入り」という名前は動的変数として格納され、且つプレイリスト変数型と関連付けられてもよい。このようにして、ネットワークマイクロホンシステムは、音声入力内でユーザと関連付けられたカスタム情報を認識し、且つ識別してもよい。   The computing device 504 may store custom playback information as dynamic variables, which may be variables that can be dynamically associated with various variable types. For example, the "nick room" may be a custom zone name, which may be stored as a dynamic variable associated with the zone variable type. As another example, "Nick's Faves" may be a custom playlist with a custom name created by the user. The name "nick's favorite" is stored as a dynamic variable and may be associated with a playlist variable type. In this way, the network microphone system may recognize and identify custom information associated with the user in the speech input.

動的変数はテーブル又は他のデータ構造体に格納され、且つ様々な変数型と動的に関連付けられてもよい。たとえば、各動的変数は1又は複数の変数型と関連付けられてもよい。動的変数は、ユーザアカウントと関連付けられた識別子と共に格納されてもよい。たとえば、カスタムゾーン名である「ニックの部屋」を、メディア再生システムのゾーン識別子及び/又は「ニックの部屋」ゾーン内のPBDの識別子と関連付けてもよい。別の例として、カスタムゾーン名である「ニックの部屋」をゾーン識別子タグと共に格納してもよく、及び/又は「ニックの部屋」ゾーン内のPBDの識別子を「ニックの部屋」ゾーンのタグと共に格納してもよい。動的変数は、ユーザによって追加又は削除されるか、又はユーザアカウントと関連付けられた新たなカスタム名を含むように、常時、周期的、若しくは非周期的に更新されてもよい。カスタム名はデータベースに既に存在しているか、又は存在していない可能性のある、ユーザが指定した任意の名前であってもよい。   Dynamic variables may be stored in tables or other data structures and may be dynamically associated with various variable types. For example, each dynamic variable may be associated with one or more variable types. Dynamic variables may be stored with an identifier associated with the user account. For example, a custom zone name "nick room" may be associated with a zone identifier of the media playback system and / or an identifier of a PBD in the "nick room" zone. As another example, a custom zone name "nick's room" may be stored with a zone identifier tag, and / or an identifier of a PBD in the "nick's room" zone with a tag in the "nick's room" zone It may be stored. Dynamic variables may be constantly, periodically or aperiodically updated to be added or deleted by the user, or to include new custom names associated with the user account. The custom name may be any user specified name that may or may not already exist in the database.

いくつかの例では、各動的変数は、メディア再生システムコマンドの動的変数を識別するために使用され得る識別子と共に格納されるか、又はこれと関連付けられてもよい。たとえば、「ニックの部屋」というゾーン名はメディア再生システムに固有のゾーン識別子と共に格納されてもよく、またコマンドが「ニックの部屋」内の再生デバイス上でアクションが実行されることを要求した場合、メディア再生システムコマンドと共に「ニックの部屋」に加えて、又はこれの代わりに「ニックの部屋」のゾーン識別子が提供されてもよい。   In some examples, each dynamic variable may be stored with or associated with an identifier that may be used to identify a dynamic variable of media playback system commands. For example, the zone name "nick room" may be stored with a zone identifier unique to the media playback system, and if the command requires an action to be performed on a playback device in the "nick room" A zone identifier of "nick room" may be provided in addition to or in place of the "nick room" along with media playback system commands.

ブロック1214において、ユーザは、NMDによって受信され得るコマンド又は要求を発することによって、音声入力を提供してもよい。ネットワークマイクロホンシステムは音声入力を音声からテキストへと変換し、且つその言葉を解析して音声入力のシンタックスを決定することができる。音声コマンドは、音楽再生制御の範囲又はドメイン内にあるとネットワークマイクロホンシステムが認識できるような特定のシンタックスを有していてもよい。たとえば、ユーザは「キッチンとニックの部屋でビートルズの曲を再生して(play The Beatles in the Kitchen and Nick’s Room)」と言う場合がある。ネットワークマイクロホンシステムは、「再生して」という言葉を音楽再生と関連付けられたインテントに対応するコマンドか、又はインテントそのものであると認識してもよく、ブロック1216において、この音声コマンドが音楽再生制御の範囲又はドメイン内にあると識別してもよい。   At block 1214, the user may provide voice input by issuing a command or request that may be received by the NMD. The network microphone system can convert speech input from speech to text and analyze the words to determine the syntax of the speech input. The voice command may have a specific syntax that allows the network microphone system to recognize that it is within the scope or domain of music playback control. For example, the user may say, "Play the Beatles in the Kitchen and Nick's Room" in the room of the kitchen and Nick. The network microphone system may recognize the word “play” as a command corresponding to the intent associated with music playback, or the intent itself, and in block 1216 this voice command plays music It may be identified as within the scope or domain of control.

別の例では、1又は複数のメディア変数のインスタンス及び/又は1又は複数のゾーン変数のインスタンスが存在するか、若しくは含まれているということは、「再生して」というコマンドワードが「再生」インテントに対応していることを示していてもよい。ネットワークマイクロホンシステムは、音楽メタデータを含む音楽カタログを検索し、且つ、たとえばアーティストが「ビートルズ(The Beatles)」という名前であると判定することにより、「ビートルズ」がメディア変数のインスタンスに対応していると判定してもよい。ネットワークマイクロホンシステムは、「キッチン」及び/又は「ニックの部屋」が、共通のゾーン名及び/又はゾーン変数型と関連付けられた動的変数に基づいたゾーン名に対応していると判定してもよい。「再生して」というコマンドワードと「ビートルズ」というメディア変数及び/又は「ニックの部屋」との組み合わせにより、ネットワークマイクロホンシステムが、その音声入力が、要求された音楽の再生に関する音楽制御のインテントに対応していると判定できるようにしてもよい。   In another example, the presence or inclusion of one or more instances of media variables and / or one or more instances of zone variables means that the command word "play" is "played". It may indicate that it corresponds to the intent. The network microphone system searches a music catalog containing music metadata and, for example, by determining that the artist is named "The Beatles", "The Beatles" corresponds to an instance of a media variable. It may be determined that there is. The network microphone system may also determine that "kitchen" and / or "nick room" correspond to zone names based on common zone names and / or dynamic variables associated with zone variable types. Good. The combination of the "Play" command word and the "Beatles" media variable and / or the "nick room" allows the network microphone system to have an audio control intent regarding the playback of the requested music. It may be determined that it corresponds to.

音声コマンドが音楽再生制御の範囲又はドメイン内にあると識別されたので、ネットワークマイクロホンシステムは、既知のアーティストである「ビートルズ(The Beatles)」に関連する音楽コンテンツの検索結果の優先度を上げ、既知のアーティストに何ら関連のない同音異義語である「ザ・カブトムシ(the beetles)」に関連する音楽コンテンツの検索結果の優先度を下げるか、又は除外してもよい。換言すれば、当該音声入力が音楽ドメイン内にあると識別したことに応答して、音声テキスト認識に使用される言葉又は語彙一式を、通常辞書では見つからないか、及び/又は辞書に掲載され得る言葉、或いは話し言葉とは異なる文体の言葉を含み得る、音楽ドメインに特有のものとなるように変更してもよい。   Since the voice command has been identified as within the scope or domain of music playback control, the network microphone system prioritizes the search results for music content associated with the known artist "The Beatles" and The search results of the music content related to "the beetles", which is a homonym unrelated to any known artist, may be prioritized or eliminated. In other words, in response to identifying that the speech input is in the music domain, a set of words or vocabulary used for speech-to-text recognition may not be found in the dictionary and / or may be listed in the dictionary It may be modified to be unique to the music domain, which may include words of a style different from words or speech.

たとえば、その音声入力が音楽ドメイン内にあると判定したことに応答して、音声テキスト認識に使用される言葉又は語彙一式を、メディアアイテム(たとえば、アーティスト名、トラック名、アルバム名、曲名)に関するメタデータ情報を含むように更新してもよい。いくつかの態様では、音声入力は、たとえばカスタム名(たとえば、ゾーン、プレイリスト)、メディア変数、及び/又はアーティスト名、アルバム名、及び/又はトラック名などにおいて文字及び/又は記号の入力を含んでいてもよい。別の例として、音声テキスト変換から得られるテキスト中の言葉を、音楽制御コマンドを処理する前に、メディア特有の言葉を使用するように変更してもよい。メディア変数のインスタンス用の音声テキスト変換において、ネットワークマイクロホンシステムに使用される標準的な言葉に加えて、又はそれの代わりに、音楽メタデータ、メディアカタログ、及び/又はカスタム若しくはローカルメディア識別子(たとえば、プレイリスト名、トラック名、アルバム名、アーティスト名など)に見られる言葉を使用してもよい。同様に、ゾーン変数用の音声テキスト変換においてカスタムゾーン名を使用してもよい。   For example, in response to determining that the speech input is in the music domain, a set of words or vocabulary used for speech text recognition relates to the media item (eg, artist name, track name, album name, song name) It may be updated to include metadata information. In some aspects, the audio input includes input of characters and / or symbols, such as in custom names (eg, zones, playlists), media variables, and / or artist names, album names, and / or track names, etc. It may be. As another example, the words in the text resulting from speech-to-text conversion may be modified to use media-specific words before processing the music control commands. Music metadata, media catalogs, and / or custom or local media identifiers (eg, for example, in voice-to-text conversion for instances of media variables, in addition to or instead of the standard language used for network microphone systems You may use words found in playlist names, track names, album names, artist names, etc. Similarly, custom zone names may be used in speech-to-text conversion for zone variables.

ブロック1218において、音楽制御コマンドを含む音声入力を処理してもよい。ネットワークマイクロホンシステムは、ユーザのインテント(たとえば、再生、一時停止、キューへの追加、グループ化、他のトランスポートの制御、制御デバイス300を介して利用可能な制御)と関連付けられた様々な所定のシンタックスを有していてもよい。各インテントは、当該インテントと同じであるか若しくは類似している、又は同じでないか若しくは類似していない可能性のある1又は複数のメディア再生システムコマンドに対応していてもよい。たとえば、第1のゾーンから第2のゾーンへ音楽再生を転送するインテントは、現在再生中のメディアアイテム及び/又は再生キューを第1のゾーンから第2のゾーンに転送するメディア再生システムコマンドに対応していてもよい。別の例では、音楽を転送するインテントはメディア再生システムに第1のゾーンの再生キューを第2のゾーンの再生キューにコピーし、及び/又は第1のゾーンの状態変数を第2のゾーンの状態変数にコピーすることを命じる再生キューコピーコマンドに対応していてもよい。   At block 1218, speech input may be processed, including music control commands. The network microphone system may have various predefined associated with the user's intent (eg, play, pause, add to queue, group, control of other transports, control available through control device 300) It may have the syntax of Each intent may correspond to one or more media playback system commands that may or may not be the same as, or the same as, the intent. For example, the intent to transfer music playback from the first zone to the second zone may be a media playback system command to transfer the currently playing media item and / or playback queue from the first zone to the second zone It may correspond. In another example, the intent to transfer music copies the play queue of the first zone to the play queue of the second zone to the media playback system and / or the state variable of the first zone is the second zone It may correspond to a play queue copy command instructing to copy to the state variable of.

さらに別の例として、音楽を転送するインテントは2つのメディア再生システムコマンドに対応していてもよい。これらの2つのコマンドは、第2のゾーンを第1のゾーンとグループ化し、次いでグループから第1のゾーンを除去して、第1のゾーンの状態を第2のゾーンへと実質的に転送してもよい。   As yet another example, the intent to transfer music may correspond to two media playback system commands. These two commands group the second zone into the first zone and then remove the first zone from the group to substantially transfer the state of the first zone to the second zone. May be

メディア再生システムコマンドは、インテントがメディア再生システムコマンドに対応していると判定したことに応答して呼び出されるアプリケーションプログラムインタフェース(API)を含んでいてもよい。ネットワークマイクロホンシステム及び/又はメディア再生システムは、ユーザのインテントとメディア再生システムコマンドとの間に定義されたマッピング又は対応関係を有していてもよい。   The media playback system command may include an application program interface (API) that is called in response to determining that the intent corresponds to the media playback system command. The network microphone system and / or media playback system may have a mapping or correspondence defined between the user's intent and media playback system commands.

いくつかの例では、メディア再生システムコマンドを、クラウドネットワーク502内のコンピューティングデバイス(たとえば、コンピューティングデバイス504、コンピューティングデバイス506、コンピューティングデバイス508)に格納されたデータに対して実行してもよい。たとえば、別のプレイリスト又は再生キューにメディアアイテム(たとえば、トラック、アルバム、プレイリスト)を追加するインテントを、クラウドネットワーク502に格納されたプレイリスト又は再生キューに追加してもよい。再生キューの一部がクラウドネットワーク502内のプレイリスト又は再生キューの一部若しくは全体と一致するように、PBD532,534,536,538に格納された再生キューを、クラウドネットワーク502に格納された再生リスト又は再生キューの変更に応じて更新してもよい。   In some examples, media playback system commands may also be performed on data stored on computing devices (eg, computing device 504, computing device 506, computing device 508) in cloud network 502. Good. For example, an intent to add media items (eg, tracks, albums, playlists) to another playlist or playback queue may be added to a playlist or playback queue stored in the cloud network 502. The playback cues stored in the PBD 532, 534, 536, 538 are stored in the cloud network 502 so that part of the playback cues matches part or all of the playlists or playback cues in the cloud network 502 It may be updated as the list or playback queue changes.

特定の言葉、シンタックス、及び/又はフレーズを同じインテントと関連付けてもよい。たとえば、音声入力において「再生する」、「聴く」、又は「聞く」というコマンドワードを含むことは、メディア再生システムがメディアコンテンツを再生するというユーザのインテントに対応していてもよい。各インテントは、コマンド又はインテントによって指定されたアクションを実行するために事前に定義された様々なタイプの変数又はスロットを有していてもよい。変数又はスロットは、様々なフレーズ内の所定の場所又は位置にあってもよい。たとえば、「再生」コマンドのシンタックスは、ユーザが再生を望むメディア用のメディア変数を有していてもよく、且つユーザが関連付けられた再生デバイスにメディアコンテンツの再生を望む場所若しくはゾーン用の場所変数又はゾーン変数をさらに有していてもよい。「キッチンでビートルズの曲を再生して(play The Beatles in the Kitchen)」という音声コマンドの例では、メディア変数又は音楽変数のインスタンスは「ビートルズ」であり、ゾーン変数のインスタンスは「キッチン」であってもよい。ネットワークマイクロホンシステム及び/又はメディア再生システムは、メディア変数のインスタンス及び/又はゾーン変数のインスタンスに対応する関連オブジェクトを識別する際に、ゾーン変数とは別個に、及び/又はこれとは異なる形態でメディア変数を処理してもよい。   Specific words, syntax, and / or phrases may be associated with the same intent. For example, including the "play", "listen", or "listen" command words in the audio input may correspond to the user's intent that the media playback system plays media content. Each intent may have various types of variables or slots predefined to perform the action specified by the command or intent. Variables or slots may be at predetermined locations or positions within various phrases. For example, the syntax of the "play" command may have media variables for the media that the user wishes to play, and where the user wishes to play the media content to the associated playback device, or for the zone It may further have variables or zone variables. In the voice command example "play the Beatles in the Kitchen", the instance of the media variable or music variable is "Beatles" and the instance of the zone variable is "Kitchen" May be The network microphone system and / or the media playback system, in identifying associated objects corresponding to the instance of the media variable and / or the instance of the zone variable, the media in a form different from and / or different from the zone variable Variables may be processed.

「再生」インテントと関連付けることができるシンタックス又はフレーズの別の実施例としては、「[ゾーン変数]で[メディア変数]を聞かせて」というシンタックスを挙げることができる。このシンタックスに関する1つの例としては、「エミリーの部屋でポール・サイモンの曲を聞かせて(Let me hear Paul Simon in Emily’s Room)」を挙げることができ、ここでは「聞かせて(Let me hear)」が「再生(play)」インテントと関連付けられていてもよく、「ポール・サイモン(Paul Simon)」がメディア変数のインスタンスであってもよく、また「エミリーの部屋(Emily’s Room)」がゾーン変数のインスタンスであってもよい。ネットワークマイクロホンシステムは音声入力を解析し、ネットワークマイクロホンシステムに格納されたシンタックスのうちのいずれが当該音声入力と一致しているかを判定して、当該音声入力のインテントを識別してもよい。このシンタックスを、ネットワークマイクロホンシステム内の任意のデバイスに格納してもよい。   Another example of a syntax or phrase that can be associated with the “play” intent is the syntax “let's [media variable] with [zone variable]”. One example of this syntax is "Let me hear Paul Simon's song in Emily's room (Let me hear Paul Simon in Emily's Room)", where "Let me (Let me "hear" may be associated with a "play" intent, "Paul Simon" may be an instance of a media variable, and "Emily's Room". ) May be an instance of a zone variable. The network microphone system may analyze the speech input and determine which of the syntaxes stored in the network microphone system match the speech input to identify the intent of the speech input. This syntax may be stored on any device in the network microphone system.

「再生」インテント若しくはコマンドのシンタックス又はフレーズに関するさらに別の例としては、「[ゾーン変数]で[メディア変数]を聞きたい」というシンタックスを挙げることができる。「聴く(listen)」という言葉又は「聴きたい(I want to listen)」という節を「再生(play)」インテントと関連付けてもよい。「再生」インテント用の他のシンタックスも可能である。   As yet another example of the syntax or phrase of the "play" intent or command, the syntax "I want to hear [media variable] with [zone variable]" can be mentioned. The word "listen" or the clause "I want to listen" may be associated with the "play" intent. Other syntaxes for the "play" intent are also possible.

別の例示的なコマンド又はインテントは、メディア再生システム(たとえば、PBD、コンピューティングデバイス506、及び/又はCR522内に)格納され得るキューにメディアコンテンツを追加することに関連していてもよい。例示的なキューに追加シンタックスは、「[ゾーン変数]のキューに[メディア変数]を追加して」であってもよい。本明細書に記載の他の態様と同様に、ゾーン変数は任意のものであり、本システムは様々な技術又は方法(たとえば、デフォルトゾーンを使用する、前回使用したゾーンを使用する、ユーザのプレゼンス情報に基づいて、或いはよくメディアを再生しているゾーンを使用するなど)に基づいて、コマンドが適用されるゾーンを決定してもよい。メディア変数に対応する選択済みメディアコンテンツを、ゾーン内のキューに追加してもよい。   Another example command or intent may relate to adding media content to a queue that may be stored in a media playback system (e.g., in a PBD, computing device 506, and / or CR 522). An example syntax for adding to a queue may be "adding [media variable to queue of [zone variable]"]. As with the other aspects described herein, the zone variables are optional and the system may use various techniques or methods (e.g., using a previously used zone, a user's presence using a previously used zone). Based on the information, or often based on the zone playing the media, etc.), the zone to which the command is applied may be determined. Selected media content corresponding to the media variable may be added to the queue in the zone.

さらに別の例示的なコマンド又はインテントとしては、「次再生コマンド」を挙げることができ、このコマンドによって選択されたメディアコンテンツを、ゾーン内で次に再生されるようにキューの先頭に追加してもよい。このコマンドの例示的なシンタックスは「[メディア変数]を次に再生して」であってもよい。本明細書に記載の他の態様と同様に、ゾーン変数は任意のものであってもよい。   Yet another exemplary command or intent may include a "next play command", which adds the media content selected by this command to the beginning of the queue for next play in the zone. May be An exemplary syntax for this command may be "Play [media variable] next". As with the other aspects described herein, the zone variables may be arbitrary.

コマンド又はインテントに関する別の例としては、「移動コマンド」又は「転送コマンド」を挙げることができ、このコマンドによって、現在再生中の音楽及び/又はゾーンの再生キューをあるゾーンから別のゾーンに移動又は転送してもよい。たとえば、ユーザは、「音楽を[ゾーン変数]に移動させて」という音声入力を発してもよく、ここで「移動」又は「転送」というコマンドワードは、再生状態を別のゾーンに移動させるインテントに対応していてもよい。   Another example of a command or intent may be a "move command" or a "transfer command", which causes the currently playing music and / or zone playback cues from one zone to another. It may move or transfer. For example, the user may make an audio input of "Move music to [zone variable]", where the command word "Move" or "Transfer" moves the playback state to another zone. It may correspond to a tent.

本明細書に記載のコマンド及びインテントは例示のものであり、他のインテント又はコマンドも可能である。たとえば、本明細書に記載した、メディア再生システムを制御するために制御デバイス300を介して利用可能な制御の各々は、本システムを制御するために利用可能な対応するインテントを有していてもよい。たとえば、制御コマンドの名前はインテントに対応していてもよい。制御コマンドが1又は複数のメディアアイテムを含む場合、そのコマンドのシンタックスは1又は複数のメディア変数を含んでいてもよい。制御コマンドが1又は複数のゾーンを含む場合、そのコマンドのシンタックスは1又は複数のゾーン変数を含んでいてもよい。異なるインテントと共に使用される他の変数が存在していてもよい。   The commands and intents described herein are exemplary and other intents or commands are possible. For example, each of the controls available through control device 300 to control the media playback system described herein have corresponding intents available to control the system. It is also good. For example, control command names may correspond to intents. If the control command includes one or more media items, the syntax of the command may include one or more media variables. If the control command includes one or more zones, the syntax of the command may include one or more zone variables. There may be other variables used with different intents.

メディア再生システムを制御するために制御デバイス300を介して利用可能な制御の例としては、トランスポート制御コマンドを挙げることができる。これらのコマンド又はインテントは現在再生中のメディアアイテムに関連しており、これらにはトランスポートコマンド(たとえば、停止、一時停止、スキップ、巻き戻し、早送り、前の曲に戻る、音量調整など)、又は現在再生中のメディアアイテムの保存、若しくは別の再生キュー或いはプレイリストへのこれの追加に関連するコマンドが含まれる。現在再生中のメディアアイテムに対して実行されるインテント又はアクションのシンタックスはより簡素であり、且つトランスポート制御の名前に対応していてもよい。たとえば、音楽再生を一時停止するインテント用の音声入力は、「一時停止」という音声入力であってもよい。   Examples of controls available through control device 300 to control the media playback system may include transport control commands. These commands or intents are associated with the media item currently playing, such as transport commands (eg stop, pause, skip, rewind, fast forward, return to previous song, adjust volume etc) Or a command associated with saving the currently playing media item or adding it to another play queue or playlist. The syntax of the intent or action performed on the currently playing media item is simpler and may correspond to the name of the transport control. For example, the voice input for the intent for pausing music playback may be voice input of "pause".

様々なコマンドのシンタックスにおいては様々なタイプの変数を使用してもよい。メディア変数の場合、メディア変数は、ユーザが聴取又は再生を望むメディアコンテンツを音声入力を介して指定する可能性が高い、シンタックス内の変数又はスロットであってもよい。メディア変数は音楽に関連した特徴又は特性(たとえば、メディア変数のタイプ)であってもよく、これらはアルバム名、アーティスト名、曲名、プレイリスト名、カスタムプレイリスト名、ジャンル(たとえば、ポップ、クラシック、カントリー、ロック、R&Bなど)、雰囲気(たとえば、ロマンチックな、エクササイズ向けの、生産性を高めるなど)、音楽のテンポ(たとえば、アップビート、スロー)、ラジオ局名、作曲者名、音楽の時代性(バロック、ロマン派、古典派、20世紀音楽など)、期間(たとえば、80年代、90年代)、プレイリストの作成者名、ランキング(たとえば、ベスト、トップ40)及び/又は他の音楽的識別に関する特徴を含むが、これらには限定されない。音楽変数は、ユーザアカウントのユーザが作成したカスタムプレイリスト名であり得るカスタム名、及び/又は他のカスタム名(たとえば、カスタム曲名、カスタムアルバム名、カスタムアーティスト名)を有していてもよい。   Different types of variables may be used in different command syntaxes. In the case of media variables, the media variable may be a variable or slot in syntax that is likely to specify via audio input the media content that the user wishes to listen to or play back. Media variables may be music related features or characteristics (eg, type of media variable), such as album name, artist name, song name, playlist name, custom playlist name, genre (eg, pop, classic) , Country, rock, R & B etc., atmosphere (eg romantic, exercise, productivity etc), music tempo (eg upbeat, slow), radio station name, composer name, age of music Sex (Baroque, Romantic, Classical, 20th Century Music, etc.), Period (eg, 80's, 90's), Playlist Creator Name, Ranking (eg, Best, Top 40) and / or other musical This includes, but is not limited to, features related to identification. Music variables may have custom names that may be custom playlist names created by the user of the user account, and / or other custom names (eg, custom song names, custom album names, custom artist names).

ゾーン変数の場合、ゾーン変数は、ユーザが要求したアクション又はインテント(たとえば、リクエストした音楽を再生するなど)を実行する場所若しくはゾーンを音声入力を介して指定する可能性が高い、シンタックス内の変数又はスロットであってもよい。ユーザは音声入力にゾーンインスタンスを含める場合もあるが、含めない場合もある。ユーザがたとえば単に「ビートルズの曲を再生して(play some Beatles)」と発言してゾーンを指定しなかった場合、ネットワークマイクロホンシステム及び/又はメディア再生システムは、他の入力(たとえば、ユーザのプレゼンス情報、コンテキスト情報、位置情報)に基づいて、デフォルトゾーン及び/又は他のゾーンで「ビートルズの曲を再生する」決定を下してもよい。ゾーン変数は、ユーザが指定したカスタムゾーン名用の動的変数を含んでいてもよい。別の例として、カスタムゾーン名は、たとえば「ニックの部屋」又は「3階の会議室(3rd Floor Conference Room)」であってもよい。   In the case of zone variables, zone variables are likely to specify, via speech input, a location or zone to perform the action or intent requested by the user (eg, play the requested music, etc.) May be a variable or a slot of Users may or may not include zone instances in their speech input. If the user does not specify a zone, for example simply saying "play some Beatles", then the network microphone system and / or the media playback system may have other inputs (eg, the presence of the user) Based on the information, context information, location information), a "play Beatles song" decision may be made in the default zone and / or other zones. Zone variables may include dynamic variables for user-specified custom zone names. As another example, the custom zone name may be, for example, a "nick room" or a "3rd Floor Conference Room".

いくつかの例では、シンタックスは、音声入力を実行するためのメディアサービス又はアプリケーション若しくは他のメディア関連サービス、製品或いはアプリケーション(たとえば、メディア再生システム)用のメディアサービス変数を含んでいてもよい。本システムは、すべてのメディア関連コンテンツのデフォルトの再生システム又はゾーンを識別し、或いは様々な再生システム又はゾーンを様々なサービスと関連付けてもよい。たとえば、ユーザは「寝室でジョシュ・グローバンをSpotifyで再生して(play on Spotify Josh Groban in the bedroom)」と発言する可能性がある。本システム(たとえば、ネットワークマイクロホンシステム及び/又はメディア再生システム)は、メディアサービス変数のインスタンスとして「Spotify」を、音楽変数のインスタンスとして「ジョシュ・グローバン(Josh Groban)」を、ゾーン変数のインスタンスとして「寝室」を認識してもよい。本システムは、本明細書で述べている「ジョシュ・グローバン」に関連するメディアコンテンツを、メディアサービスSpotify(登録商標)のメディアカタログ内で検索してもよい。   In some examples, the syntax may include media services or applications for performing voice input or media service variables for other media related services, products or applications (eg, media playback system). The system may identify a default playback system or zone for all media related content or may associate different playback systems or zones with different services. For example, the user may say, "Play on Spotify Josh Groban in the bedroom" in the bedroom. The present system (for example, a network microphone system and / or a media reproduction system) uses "Spotify" as an instance of a media service variable, "Josh Groban" as an instance of a music variable, and You may recognize "bedroom". The system may search for media content related to "Josh Groban" as described herein in the media catalog of the media service Spotify®.

あるタイプの変数は、同じ変数の2つ以上のインスタンスを含むベクトル又はセット型に形成されるという点で、スカラ型であり得る。スカラ変数のベクトルは、「[第1のスカラ変数]及び[第2のスカラ変数]」、「[第1のスカラ変数]、[第2のスカラ変数]、及び[第3のスカラ変数]」、又は「[第1のスカラ変数] [第2のスカラ変数] [第3のスカラ変数]」のユーザが発言する際のフォーマット或いはシンタックスを有していてもよい。たとえば、ゾーン変数はスカラ変数であってもよく、またユーザは「キッチン、リビングルーム、ダイニングルーム」などの複数の場所でメディアコンテンツを再生するように指定してもよい。いくつかの態様では、スカラ変数のベクトル又は所定のセットに名前を付与してもよい。たとえば、「階下」と名付けられた所定のベクトルを、家庭環境内の階下にあるすべてのゾーンと関連付けてもよい。図1に示す例示的な周辺環境では、「階下」は「リビングルーム」、「ダイニングルーム」、「オフィス」、「主寝室」、「寝室」、及び「浴室」ゾーンであってもよい。制御デバイス300はゾーンのリストを表示することができ、ユーザはそのゾーンのリストから「階下」という名前又はラベルと関連付けるゾーンを選択することができる。   Certain types of variables may be scalar types in that they are formed into a vector or set type that includes two or more instances of the same variable. The vectors of scalar variables are “[first scalar variable] and [second scalar variable]”, “[first scalar variable], [second scalar variable], and [third scalar variable]” Or “[first scalar variable] [second scalar variable] [third scalar variable]” may have a format or syntax when the user speaks. For example, the zone variable may be a scalar variable, and the user may specify to play media content in multiple places such as "kitchen, living room, dining room". In some aspects, the vector or predetermined set of scalar variables may be named. For example, a predetermined vector named "downstairs" may be associated with all zones downstairs in the home environment. In the exemplary ambient environment shown in FIG. 1, the "downstairs" may be the "living room", "dining room", "office", "master bedroom", "bedroom" and "bathroom" zones. The control device 300 can display a list of zones, and the user can select a zone from the list of zones to associate with the name or label "downstairs".

いくつかの例では、メディア変数はスカラ変数であってもよい。同じタイプの音楽変数の2つ以上が単一のコマンドフレーズで発せられてもよく、各メディア変数のインスタンスを、他のメディア変数のインスタンスとは別個に、又は他のメディア変数のインスタンスと組み合わせて、対応するメディアアイテム用に処理してもよい。たとえば、音声入力は「ビートルズとビーチボーイズの曲を聴こう(Let’s listen to music from The Beatles and the Beach Boys)」であってもよく、これは「[第1のメディア変数]と[第2のメディア変数]の曲を聴こう」というシンタックスに対応していてもよい。1つの態様では、「ビートルズ」の第1のメディア変数のインスタンスを、「ビーチボーイズ(the Beach Boys)」とは別個に処理してもよい。「ビーチボーイズ」とは別個に「ビートルズ」を処理する場合、「ビートルズ」をビートルズに関連するあらゆるメディアアイテムに対して処理してもよく、また「ビーチボーイズ」を「ビーチボーイズ」に関連するあらゆるメディアアイテムに対して処理してもよく、これはブロック1218に関連してより詳細に記載される。別の態様では、「ビートルズ」の第1のメディア変数のインスタンスと「ビーチボーイズ」の第2のメディア変数のインスタンスとを1つの組み合わせとして処理してもよく、ここで本システムは、「ビートルズ」及び「ビーチボーイズ」双方に関連するメディアアイテム(たとえば、ビートルズとビーチボーイズとが演奏していたり、及び/又は彼らがアーティストとしてリストされている曲)に対して処理してもよい。   In some instances, media variables may be scalar variables. Two or more of the same type of music variables may be emitted in a single command phrase, and each media variable instance may be combined with other media variable instances separately or with other media variable instances , May be processed for the corresponding media item. For example, the audio input may be "Let's listen to the Beatles and the Beach Boys", which says "[first media variable] and [first It may correspond to the syntax of "listen to media variables of 2". In one aspect, an instance of the "Beatles" first media variable may be processed separately from "the Beach Boys". When processing the Beatles separately from the Beach Boys, the Beatles may be processed for any media item related to the Beatles, and any Beach Boys related to the Beach Boys. Media items may be processed, which are described in more detail in connection with block 1218. In another aspect, an instance of a first media variable of "Beatles" and an instance of a second media variable of "Beachboys" may be treated as one combination, wherein the system is configured to And “Beach Boys” may be processed for media items (eg, the songs played by the Beatles and Beach Boys and / or the songs for which they are listed as artists).

ネットワークマイクロホンシステム及び/又はメディア再生システムは、ゾーン変数のインスタンスのベクトル又はセットをグループ化コマンドと関連付けてもよい。たとえば、ネットワークマイクロホンシステム及び/又はメディア再生システムは、ルーム変数用のスカラ変数のシンタックスを認識し、ゾーン変数内で指定されたインスタンスをグループ化するメディア再生システムのコマンドにこのシンタックスが対応していると判定してもよい。1つの例として、ユーザは「リビングルーム、キッチン、及びニックの部屋」でメディアコンテンツを再生するように指定してもよい。システム500(たとえば、ネットワークマイクロホンシステム及び/又はメディア再生システム)は、「ニックの部屋」がフレーズとして発せられた場所又は位置に基づいて「ニックの部屋」をゾーン変数として認識し、且つ「ニックの部屋」に対応するカスタムゾーン名の動的変数を格納しているテーブルを検索してもよい。この検索をコンピューティングデバイス504及び/又はコンピューティングデバイス506によって実行してもよく、また当該テーブルの検索に基づいて、カスタムゾーン名及び/又は識別子をコンピューティングデバイス504とコンピューティングデバイス506との間で送信してもよい。この送信はメタデータ交換チャネル、及び/又はコンピューティングデバイス504とコンピューティングデバイス506との間の他の任意の通信経路を介して行われてもよい。   The network microphone system and / or the media playback system may associate a vector or set of instances of zone variables with the grouping command. For example, the network microphone system and / or the media playback system recognizes the syntax of scalar variables for room variables, and this syntax corresponds to the command of the media playback system that groups instances specified in zone variables. It may be determined that As one example, the user may specify to play media content in the "Living Room, Kitchen, and Nick's Room". The system 500 (eg, the network microphone system and / or the media playback system) recognizes the "nick room" as a zone variable based on the location or location where the "nick room" was uttered as a phrase, and It is also possible to search a table storing dynamic variables of custom zone names corresponding to "room". This search may be performed by computing device 504 and / or computing device 506, and based on the search of the table, custom zone names and / or identifiers may be generated between computing device 504 and computing device 506. It may be sent by This transmission may occur via a metadata exchange channel and / or any other communication path between computing device 504 and computing device 506.

メディア再生システムによってグループ化コマンドとして認識され得るシンタックスに関する別の例としては、「[ゾーン変数]を追加する」又は「[ゾーン変数]でも再生する」を挙げることができる。たとえば、ネットワークマイクロホンシステムは、「追加する」という言葉又は「でも再生する」というフレーズを、グループ化インテント若しくはコマンドに対応するものとして認識してもよい。本システムは、そのシンタックスのコマンドワードの位置に「追加する」又は「でも再生する」というコマンワードを含む音声入力のみに基づいて、或いはコマンドワード及びゾーン変数のインスタンスを含む音声入力に基づいて、当該インテントを決定してもよい。このタイプのグループ化は、その音楽が既にどのゾーンで再生中であるかを示すコンテキストを例とするコンテキストに基づいていてもよい。メディア再生システムは、任意の通信経路及び/又はメタデータ交換チャネルを介して、この情報をネットワークマイクロホンシステムに送信してもよい。いくつかの態様では、メディア再生システムは情報を受信してもよく、また1又は複数のゾーンで現在再生中の音楽を指定されたゾーンでも再生し、及び/又はその指定されたゾーンを既存のグループに含めればよいことを理解する。   Another example of a syntax that can be recognized as a grouping command by the media playback system can be "add [zone variable]" or "play also with [zone variable]". For example, the network microphone system may recognize the word "add" or the phrase "also reproduce" as corresponding to a grouping intent or command. The system is based solely on speech input containing command words "add" or "play back" at the position of the command word in its syntax, or based on speech input containing instances of command words and zone variables. The intent may be determined. This type of grouping may be based on a context as an example of which zone the music is already playing in. The media playback system may send this information to the network microphone system via any communication path and / or metadata exchange channel. In some aspects, the media playback system may receive information, and also play music currently playing in one or more zones in a designated zone, and / or existing the designated zone. Understand that it should be included in the group

いくつかの例では、音楽変数はスカラ変数であってもよい。たとえば、ユーザは「90年代のバックストリート・ボーイズの曲を再生する(play Backstreet Boys music from the 90’s)」ことを指定できる。「バックストリート・ボーイズ(Backstreet Boys)」はアーティスト名であってもよく、「90年代」はその楽曲が属する期間であってもよい。別の実施例としては、「マドンナのアメリカン・パイを再生する(play American Pie by Madonna)」を挙げることができ、ここでは「アメリカン・パイ(American Pie)」はトラック名であってもよく、「マドンナ(Madonna)」はアーティスト名であってもよい。   In some instances, the music variable may be a scalar variable. For example, the user can specify "play Backstreet Boys music from the 90's". "Backstreet Boys" may be an artist name, and "90's" may be a period to which the music belongs. Another example may be "play American Pie by Madonna" where "American Pie" may be the track name, "Madonna" may be an artist name.

音楽変数を、特定の音楽変数に関連する情報について音楽データベースを検索することによって処理してもよい。このデータベースは、コンピューティングデバイス504、コンピューティングデバイス506、及び/又はコンピューティングデバイス508における音楽のデータベースであってもよい。たとえば、ユーザは「アメリカン・パイを再生して(play American Pie)」と発言してもよい。ネットワークマイクロホンシステムは、「アメリカン・パイ」に関連する任意の音楽情報をコンピューティングデバイス504で検索してもよい。コンピューティングデバイス504は、たとえばその音楽変数と同じ名前のアルバムを有するアーティスト、その音楽変数と一致又は類似しているアルバム名、その音楽変数の名前が付いたトラック、その音楽変数のラジオ局、その音楽変数の名前が付いたプレイリスト、その音楽変数に関連するコンテンツのストリーミングサービスプロバイダ識別子に関する検索結果、及び/又は生の音声テキスト変換結果を返してもよい。「アメリカン・パイ」の例を使用した場合、当該検索結果は、「ドン・マクリーン(Don McLean)」というアーティスト、「アメリカン・パイ」という名前のアルバム、「アメリカン・パイ」という名前のトラック、「アメリカン・パイ」という名前のラジオ局(たとえば、Pandoraのラジオ局用の「アメリカン・パイ」の識別子)、音楽サービス(たとえば、Spotify(登録商標)又はPandora(登録商標)などの音楽ストリーミングサービス)、「アメリカン・パイ」というトラックのトラック識別子(たとえば、Spotify(登録商標)用の「アメリカン・パイ」のトラック識別子、URI、及び/又はURL)に関する検索結果、及び/又は「アメリカン・パイ」に関する生の音声テキスト変換結果を返してもよい。ネットワークマイクロホンシステムは、データベース検索による結果一式をメディア再生システムに提供してもよい。この検索結果を、メタデータ交換チャネル及び/又はネットワークマイクロホンシステムとメディア再生システムとの間に確立された他の任意の通信経路を介して提供してもよい。   Music variables may be processed by searching a music database for information related to particular music variables. This database may be a database of music on computing device 504, computing device 506, and / or computing device 508. For example, the user may say "play American Pie". The network microphone system may search the computing device 504 for any music information associated with “American Pi”. The computing device 504 may, for example, an artist having an album with the same name as the music variable, an album name matching or similar to the music variable, a track with the name of the music variable, a radio station of the music variable, A playlist with the music variable's name, search results for streaming service provider identifiers of content associated with the music variable, and / or raw speech-to-text conversion results may be returned. Using the example of "American Pie", the search results show the artist "Don McLean", the album named "American Pie", the track named "American Pie", " A radio station named "American Pie" (for example, an identifier of "American Pie" for Pandora's radio station), a music service (for example a music streaming service such as Spotify® or Pandora®), Search results for track identifiers for tracks "American Pie" (eg, track identifiers, URIs, and / or URLs for "American Pie" for Spotify®), and / or live for "American Pie" Text to speech conversion It may be a return. The network microphone system may provide a set of database search results to the media playback system. This search result may be provided via a metadata exchange channel and / or any other communication path established between the network microphone system and the media playback system.

いくつかの例では、たとえば「アルバムアメリカン・パイを再生して(play the American Pie album)」など、音声コマンドは特定のメディアコンテンツ(たとえば、曲やアーティスト)又はメディアコンテンツのセット(たとえば、アルバム)を再生するように指定してもよく、この場合、当該検索結果は 「アメリカン・パイ」という名前のアルバムと、「アメリカン・パイ」という名前のアルバム用の音楽サービス識別子とを返してもよい。   In some examples, the voice command may be a specific media content (eg, a song or artist) or a set of media content (eg, an album), such as, for example, "play the American Pie album". May be specified, in which case the search results may return an album named "American Pie" and a music service identifier for an album named "American Pie".

別の実施例として、ユーザは「foofooを再生して(play foofoo)」というコマンドを発してもよく、ここでは音楽変数は「foofoo」となる。「foofoo」はいずれの音楽的特徴又は特性にも対応していない可能性があり、その結果データベースは、「foofoo」という音楽変数に対応するアーティスト、アルバム及び/又はトラックを何ら有していない可能性がある。この例では、返された検索結果は「foofoo」の音声テキスト変換を行った結果に過ぎない可能性がある。音声テキスト変換又は生テキストを使用して、カスタム名(たとえば、カスタムアルバム名、カスタム曲名、カスタムアーティスト名)を検索してもよい。この生テキストを使用して、デバイス(たとえば、CR522)又はネットワーク対応記憶装置(たとえば、ネットワーク接続記憶装置(NAS))に格納されたコンテンツを検索してもよい。ネットワーク対応記憶装置を、通信経路542,544,546を介して、メディア再生システム及び/又はネットワークマイクロホンシステムと通信できるようにしてもよい。場合によっては、ユーザがカスタムコンテンツをコンピューティングデバイス508に格納してもよい。システム500内の任意のデバイス上でネットワーク対応記憶装置内のコンテンツに索引付けしてもよく、且つこれらは生テキストに基づいて検索可能であってもよい。   As another example, the user may issue the command "play foofoo" where the music variable is "foofoo". "Foofoo" may not correspond to any musical feature or characteristic, so that the database may not have any artist, album and / or track corresponding to the music variable "foofoo" There is sex. In this example, the returned search results may only be the result of performing a speech-to-text conversion of "foofoo". Speech-to-text conversion or raw text may be used to search for custom names (eg, custom album names, custom song names, custom artist names). This raw text may be used to retrieve content stored on a device (e.g., CR 522) or network-enabled storage (e.g., network attached storage (NAS)). Network enabled storage may be enabled to communicate with the media playback system and / or the network microphone system via communication paths 542, 544, 546. In some cases, a user may store custom content on computing device 508. The content in the network enabled storage may be indexed on any device in system 500, and these may be searchable based on the raw text.

さらに別の例として、ユーザは「ビートルズの曲を再生して(play Beatles)」というコマンドを発してもよい。音楽的なコンテキストとしての「ビートルズ(Beatles)」ではなく、「カブトムシ(beetles)」に対応するものとして解釈される場合があり、これは、それらの言葉が同音異義語であるためである。ブロック716で音声コマンドが音楽制御の範囲内にあると識別され得るので、ネットワークマイクロホンシステムは、「ビートルズの曲を再生して」という音声コマンドにおいて「ビートルズ」は「ビートルズ」という名前のアーティスト又は他の音楽コンテンツに対応している可能性が高いことを認識してもよい。データベースの検索により、ビートルズというアーティスト、各種ストリーミングサービス用のビートルズのアーティスト識別子、ビートルズというアーティストに基づく推薦プレイリストの識別子に関する検索結果、及び/又は「ビートルズ」という発言の音声テキスト変換に関する生の結果を生成してもよい。   As yet another example, the user may issue a command "Play Beatles". It may be interpreted as corresponding to "beetles" as opposed to "Beatles" as a musical context, as those words are homonyms. Because the voice command may be identified as being within the music control at block 716, the network microphone system may be configured to indicate that the Beatles is an artist or the like named "The Beatles" in the voice command "Play Beatles Song". It may be recognized that it is likely to be compatible with the music content of Search the database to search for Beatles artists, Beatles artist identifiers for various streaming services, Beatles artists based on recommended playlist identifiers, and / or live results for voice text conversions of "Beatles" remarks It may be generated.

別の例として、ユーザが発する音声入力は「ジャズを再生して(play Jazz)」であってもよい。システム500は、ジャンルのリストを格納しているデータベースの検索に基づいて、「ジャズ」を1つのジャンルとして識別してもよい。本システムは、ジャズというジャンルに対応している関連メディアコンテンツを検索してもよい。この検索結果は、たとえば各種音楽サービスのデータベースにある「ジャズ」というジャンルの識別子、及び/又は「ジャズ」というジャンルに対応しているプレイリストのプレイリスト名若しくは識別子となってもよい。   As another example, the voice input uttered by the user may be "play jazz". The system 500 may identify "Jazz" as one genre based on a search of a database storing a list of genres. The system may search for related media content that corresponds to the genre of jazz. The search result may be, for example, an identifier of a genre “jazz” in the database of various music services and / or a playlist name or an identifier of a playlist corresponding to the genre “jazz”.

いくつかの例では、音声入力は順次発せられる2つのコマンド又はフレーズを含んでいてもよい。ネットワークマイクロホンシステムは、順次発せられる2つのコマンドが関連している可能性があることを認識してもよい。第1のコマンドは第1の変数型を含んでいてもよく、第2のコマンドは第1の変数型のサブセットを含んでいてもよい。たとえば、ユーザは「クラシック音楽を再生して(play some classical music)」の後に続けて、「ロマン派の曲を再生して(play something romantic)」という音声入力を提供してもよい。2つのコマンドの間に中断の時間があってもよい。システム500は、音楽変数におけるクラシックのインスタンスと関連付けられたクラシック音楽の時代を有していてもよい。システム500は、「ロマン派」はクラシック音楽におけるロマン派の時代を指していると認識してもよく、このコマンドを、ロマンチックな雰囲気の曲の再生を命じているのではなく、ロマン派の時代の曲の再生を命じるコマンドとして処理してもよい。別の例として、ユーザは「イン・シンクの曲を再生して(play some *NSync)」の後に短い中断を挟んでから、「ノー・ストリングス・アタッチト(No Strings Attached)を再生して」と発言してもよい。システム500は、「ノー・ストリングス・アタッチト(No Strings Attached)」がイン・シンク(*NSync)というアーティストによるアルバムであることを認識してもよく、また別のアーティストによる「ノー・ストリングス・アタッチト(No Strings Attached)」という名前のアルバムではなく、このアルバムを再生してもよい。   In some instances, the speech input may include two commands or phrases that are issued sequentially. The network microphone system may recognize that two commands issued sequentially may be related. The first command may include a first variable type, and the second command may include a subset of the first variable type. For example, the user may provide a voice input of "play some romantic music" followed by "play something romantic". There may be a time of interruption between the two commands. System 500 may have an age of classical music associated with instances of classical in music variables. System 500 may recognize that "romantic" refers to the romantic era in classical music, and does not command this command to play a song with a romantic atmosphere, but rather the romantic era It may be processed as a command to command playback of a song. As another example, the user may "play some * NSync" followed by a short pause, then "play No Strings Attached" You may speak. The system 500 may recognize that “No Strings Attached” is an album by an artist named In Sync (* NSync), and “No Strings Attached by another artist”. You may play this album instead of the album named "No Strings Attached".

いくつかの例では、コマンドはメディア再生システムの名前用のシステム名変数を含んでいてもよい。メディア再生システムを、メディア再生システムメーカーの名前(たとえば、SONOS(登録商標))、カスタム名、及び/又は他の名前を例とする名前と関連付けてもよい。音声入力は、コマンド又はインテントを実行するユーザアカウントと関連付けられた特定のシステムを識別するためのシステムの名前を含んでいてもよい。場合によっては、ブロック1216で音声コマンド内のメディア再生システム名変数の存在を使用して、その音声入力が音楽制御の範囲内にあると自動的に識別してもよい。   In some instances, the command may include a system name variable for the name of the media playback system. The media playback system may be associated with a media playback system manufacturer's name (eg, SONOS®), a custom name, and / or another name as an example. The voice input may include the name of a system to identify a particular system associated with the user account executing the command or intent. In some cases, at block 1216, the presence of the media playback system name variable in the voice command may be used to automatically identify that voice input is within the scope of music control.

ブロック1220において、メディア再生システムは、解析されたコマンド及び変数の各々を実行することによって、音楽制御音声コマンドを実行してもよい。メディア再生システムは、ネットワークマイクロホンシステム及び/又は1又は複数のメディア再生システムコマンドから検索結果を受信してもよい。メディア再生システムコマンド及び/又はメディア情報(たとえば、検索結果)を、メディア再生システムによってネットワークマイクロホンシステムから1又は複数のメッセージの形態で受信してもよい。この検索結果に基づいて、メディア再生システム(たとえば、コンピューティングデバイス506、制御デバイス522、及び/又は再生デバイス532,534,536,538)は再生するメディアコンテンツ又は再生するキューを、音声コマンドに応答して決定してもよい。生のテキスト音声変換に加えて検索結果を受信した場合に、音声コマンドに応答して何を再生すべきかについて様々な技術を使用して決定してもよい。   At block 1220, the media playback system may execute the music control voice command by executing each of the analyzed commands and variables. The media playback system may receive search results from the network microphone system and / or one or more media playback system commands. Media playback system commands and / or media information (eg, search results) may be received by the media playback system from the network microphone system in the form of one or more messages. Based on the search results, the media playback system (eg, computing device 506, control device 522, and / or playback devices 532, 534, 536, 538) responds to the voice command with the media content to be played or the queue to be played. You may decide. When receiving search results in addition to raw text-to-speech conversion, various techniques may be used to determine what to play in response to speech commands.

いくつかの態様では、メディア再生システムは様々なデータポイント及び/又は嗜好性に基づいて、異なる検索結果に重み付けを行ってもよい。たとえば、異なる検索結果に対する重み付けは、注目度、ユーザの再生履歴、ユーザアカウントと関連付けられた音楽サービス、メディア再生システムで利用可能な音楽サービス、メディア再生システムと関連付けられた記憶装置に格納されている音楽、及び/又はユーザ嗜好性のいずれかに基づいていてもよい。1つの例として、異なるアーティストによる曲が同じ曲名となることがある。異なるアーティストによる同じ曲名の曲を検索結果が返した場合、より注目度の高い曲により多く重み付けし、及び/又はこれを選択してもよい。曲の注目度を、ユーザの再生回数、ラジオ再生回数、音楽チャートランキング、売上枚数、及び/又は他の利用可能なデータなどの様々なソースに基づいて決定してもよい。別の例として、ユーザによって最近再生されたメディアアイテムに対してより多く重み付けしてもよい。   In some aspects, the media playback system may weight different search results based on various data points and / or preferences. For example, the weights for different search results are stored in the degree of interest, the user's playback history, the music service associated with the user account, the music service available in the media playback system, and the storage associated with the media playback system It may be based on either music and / or user preference. As an example, songs by different artists may have the same song name. If the search results return a song with the same song name by a different artist, it may be more weighted and / or selected for a song of higher interest. The interest of a song may be determined based on various sources such as the user's number of plays, radio views, music chart rankings, number of sales, and / or other available data. As another example, more weight may be placed on media items recently played by the user.

いくつかの例では、ユーザはメディア変数に対して、選択すべきメディアアイテムの優先順位を指定してもよい。たとえば、ユーザは、カスタムプレイリストが最も優先され、そしてラジオ局、選曲されたプレイリスト、トラック、アルバム、アーティストと続くように指定してもよい。本システムは、ユーザ嗜好性に基づいて、より高い優先度を有するメディア変数型に対してより多くの重みを付与してもよい。ユーザ嗜好性を、ネットワークマイクロホンシステム及び/又はメディア再生システムに送信できるように、ユーザプロファイルに格納し、及び/又はその他の場合はユーザアカウントとこれを関連付けてもよい。いくつかのメディア変数型には等しい優先度又は重みを付与してもよい。   In some examples, the user may specify for media variables the priority of media items to be selected. For example, the user may specify that custom playlists have the highest priority, followed by radio stations, selected playlists, tracks, albums, artists, and so on. The system may assign more weight to media variable types with higher priority based on user preference. User preferences may be stored in the user profile and / or otherwise associated with the user account so that it can be transmitted to the network microphone system and / or media playback system. Some media variable types may be given equal priority or weight.

いくつかの例では、ユーザがユーザ嗜好性を提供していない場合、デフォルトの優先順位設定を使用してもよい。本システムは、異なるメディア変数型に対して任意の組み合わせの優先度を使用してもよい。たとえば、本システムは生テキストに対応する変換結果に先行して、アルバムに続いてアーティストとトラックとに対応するメディアコンテンツを優先してもよい。   In some instances, default prioritization may be used if the user has not provided user preference. The system may use any combination of priorities for different media variable types. For example, the system may prioritize media content corresponding to artist and track following an album prior to conversion results corresponding to raw text.

別の例として、メディア変数のインスタンスはアーティストの名前であってもよく、そのアーティストはプレイリスト及びラジオ局に対応していてもよい。メディア変数のインスタンスの場合、ラジオ局の再生をプレイリストの再生よりも優先してもよい。   As another example, an instance of a media variable may be the name of an artist, which may correspond to playlists and radio stations. For instances of media variables, radio station playback may be prioritized over playlist playback.

さらに別の例として、メディア再生システムは、ユーザ及び/又はメディア再生システムがアクセスしていない音楽サービスと関連付けられた検索結果を除外してもよい。アクセス履歴のない検索結果を除外した後、メディア再生システムは、本明細書に記載の様々な方法又は技術に基づいて再生するメディアコンテンツを選択してもよい。   As yet another example, the media playback system may exclude search results associated with music services not accessed by the user and / or the media playback system. After excluding search results without access history, the media playback system may select media content to play based on various methods or techniques described herein.

本明細書に記載の選択方法は例示のものであり、「再生」コマンドに応答して再生するメディアアイテムを選択するための方法又は技術に関する他の例を採用してもよい。   The selection methods described herein are exemplary and other examples of methods or techniques for selecting media items to play in response to a "play" command may be employed.

「再生」コマンド又はインテントを受信したことに応答して再生するコンテンツを選択すると、メディア再生システムは、検索結果から提供される識別子及び/又は他の識別情報を使用して、そのコンテンツのソースを識別してもよい。この識別子は、対応するコンテンツをメディア再生システムによって取得するネットワークアドレス又はリンクであってもよく、その例としては、ネットワーク記憶場所若しくはユニフォームリソースロケータ(URL)及び/又はメタデータ(たとえば、アーティスト名、アルバム名、トラック番号、ラジオ局名、プレイリスト名、メディアサービス名など)を挙げることができる。   Upon selecting content to play in response to receiving a "play" command or intent, the media playback system uses the identifier and / or other identifying information provided by the search results to source the content. May be identified. This identifier may be a network address or link that obtains the corresponding content by the media playback system, examples being a network storage location or uniform resource locator (URL) and / or metadata (eg artist name, Album names, track numbers, radio station names, playlist names, media service names, etc.

いくつかの例では、コマンド又はインテントはトランスポートコマンド(たとえば、一時停止、一時停止後の再生、スキップ、前の曲に戻る、巻き戻し、早送りなど)であってもよい。上述したように、システム500は、当該コマンド又はインテントに対応するメディア再生システムコマンドを決定し、その対応しているメディア再生システムコマンドを実行してもよい。ネットワークマイクロホンシステムは、当該インテント(たとえば、再生、一時停止など)に対応するコマンドを識別するためのコマンド情報と、そのコマンドの関連オブジェクト(たとえば、ゾーン名などの変数、ゾーン識別子、グループ識別子、メディア識別子など)とを含むメッセージをメディア再生システムに対して送信することにより、メディア再生システムにこのコマンドを実行させることができる。たとえば、トランスポートコマンドは、コマンドを実行すべきゾーン用のゾーン変数(たとえば、ニックの部屋、キッチン、又はそのゾーン用の他の識別子)のインスタンスを含んでいてもよい。   In some examples, the command or intent may be a transport command (eg, pause, play after pause, skip, return to the previous song, rewind, fast forward, etc.). As described above, system 500 may determine a media playback system command corresponding to the command or intent and execute the corresponding media playback system command. The network microphone system includes command information for identifying a command corresponding to the intent (for example, playback, pause, etc.), an associated object of the command (for example, a variable such as a zone name, a zone identifier, a group identifier, The media playback system can execute this command by transmitting a message including the media identifier and the like to the media playback system. For example, the transport command may include an instance of a zone variable (eg, nick's room, kitchen, or other identifier for that zone) for the zone in which the command is to be performed.

音声入力に基づいてPBD上でアクションを起こしたことに応答して、メディア再生システムは、PBDによって実行されるアクションに関する状態情報を更新及び/又は格納してもよい。たとえば、PBDは、当該ゾーン又は特定の再生デバイスが特定のメディアアイテムを現在再生中であり、及び/又はPBDに格納されたキューに対して特定のメディアアイテムが追加されたことなどの当該ゾーンの状態を示すために、状態変数を更新してもよい。システム500内の各種デバイスからのシームレスな再生及び/又は制御を可能にするために、この状態変数に対してはシステム500内のいかなるデバイスもアクセスしてもよい。   In response to taking action on the PBD based on voice input, the media playback system may update and / or store state information regarding the action performed by the PBD. For example, the PBD may indicate that the zone or particular playback device is currently playing a particular media item, and / or that the particular media item has been added to a queue stored in the PBD, etc. State variables may be updated to indicate the state. This state variable may be accessed by any device in system 500 to allow seamless playback and / or control from various devices in system 500.

本方法及びシステムを、メディアコンテンツ(たとえば、音楽コンテンツ、ビデオコンテンツ)に関連して本明細書に記載したが、本明細書に記載の本方法及びシステムを、メディア再生システムによって再生できる関連オーディオを有し得る様々なコンテンツに適用してもよい。たとえば、音楽カタログの一部ではない可能性のある事前に録音された音声を、音声入力に応答して再生してもよい。1つの例として、「ナイチンゲールはどのように鳴くの?」という音声入力を挙げることができる。この音声入力に対するネットワークマイクロホンシステムの応答は、識別子を伴う音楽コンテンツではなく、代わりに短いオーディオクリップであってもよい。メディア再生システムは、短いオーディオクリップの再生と関連付けられた情報(たとえば、記憶アドレス、リンク、URL、ファイル)と、その短いオーディオクリップを再生するためのメディア再生システムコマンドとを受信してもよい。ポッドキャスト、ニュースクリップ、通知音、アラームなどを含む他の例も可能である。   Although the methods and systems are described herein in the context of media content (eg, music content, video content), the methods and systems described herein can be associated audio that can be played back by a media playback system It may be applied to various contents that can be possessed. For example, pre-recorded audio that may not be part of a music catalog may be played back in response to audio input. One example is the voice input "How does Nightingale sound?" The response of the network microphone system to this voice input may not be music content with an identifier, but instead may be a short audio clip. The media playback system may receive information associated with the playback of a short audio clip (e.g., storage address, link, URL, file) and media playback system commands for playing the short audio clip. Other examples are also possible, including podcasts, news clips, notification sounds, alarms, etc.

V.ユーザ識別に基づくアクションのための例示的なシステム、装置、及び方法
本明細書に記載の実施例は、メディア再生システム(或いは、場合によってはその1又は複数のコンポーネント)が音声コマンドを受信すること、ユーザ識別に基づいて(或いは、少なくともその音声コマンドを発したユーザに基づいて)、メディア再生システムが実行すべき適切なアクションを決定することを含む。いくつかの例では、メディア再生システムは、PBD532,534,536,538の1又は複数とコンピューティングデバイス506(メディア再生システムサーバとして構成されている)とを備えていてもよい。いくつかの実施形態では、メディア再生システムは、NMD512,514,516の1又は複数とコンピューティングデバイス504(ネットワークマイクロホンシステムサーバとして構成されている)とを備えるネットワークマイクロホンシステムを備えるか、又はこれと通信してもよい。
V. Exemplary Systems, Devices, and Methods for User Identity-Based Actions The embodiments described herein provide that a media playback system (or possibly one or more components thereof) receive a voice command. And determining, based on the user identification (or at least based on the user issuing the voice command), an appropriate action to be performed by the media playback system. In some examples, the media playback system may comprise one or more of PBDs 532 534 536 538 and a computing device 506 (configured as a media playback system server). In some embodiments, the media playback system comprises or includes a network microphone system comprising one or more of the NMDs 512, 514, 516 and a computing device 504 (configured as a network microphone system server). It may communicate.

通常、本明細書に記載の1又は複数の機能を、ネットワークマイクロホンシステム単独で、又はメディア再生システムと共に実行してもよいことが理解される。コンピューティングデバイス506によって実行される1又は複数の機能を、メディア再生システムのCR522及び/又はPBD532,534,536,538の1又は複数によって実行してもよいことがさらに理解される。   It is generally understood that one or more of the functions described herein may be performed by the network microphone system alone or in conjunction with a media playback system. It is further understood that one or more functions performed by computing device 506 may be performed by one or more of CR 522 and / or PBDs 532, 534, 536, 538 of the media playback system.

先に述べたように、音声コマンドの例は、前述したメディア再生システム制御のうちのいずれかの制御を命じるコマンドを含む。たとえば、音声コマンドは、メディア再生システムにメディア再生システムの1又は複数の再生デバイスを介したメディアコンテンツの再生を命じるコマンドであってもよい。別の例では、音声コマンドは、最初の音声コマンドと関連付けられた追加の音声コマンドを受信するための時間枠又は時間ウィンドウのトリガを命じるコマンドであってもよい。さらに別の例では、音声コマンドは、メディア再生システムにおける1又は複数のメディア再生デバイスの再生設定変更を命じるコマンドであってもよい。再生設定には、たとえば再生音量、再生トランスポートの制御、音楽ソースの選択、及びグループ化などが主として含まれ得る。   As noted above, examples of voice commands include commands that direct control of any of the media playback system controls described above. For example, the voice command may be a command that instructs the media playback system to play media content via one or more playback devices of the media playback system. In another example, the voice command may be a command to trigger a time frame or window for receiving an additional voice command associated with the first voice command. In yet another example, the voice command may be a command to change the playback settings of one or more media playback devices in the media playback system. The playback settings may mainly include, for example, playback volume, playback transport control, music source selection, and grouping.

メディアコンテンツの例としては、トークラジオ、書籍、テレビからの音声、ローカルドライブに保存された音楽、又はメディアソースからの音楽などを挙げることができる。メディアソースの例としては、Pandora(登録商標)Radio、Spotify(登録商標)、Slacker(登録商標)、Radio、Google Play(商標)、及びiTunes Radioなどを挙げることができる。   Examples of media content may include talk radio, books, audio from a television, music stored on a local drive, or music from a media source. Examples of media sources may include Pandora (R) Radio, Spotify (R), Slacker (R), Radio, Google Play (TM), iTunes Radio, and the like.

ユーザ識別の例としては、ユーザを登録ユーザ、ゲストユーザ、子供、又は不明なユーザとして識別することを挙げることができる。   Examples of user identification may include identifying the user as a registered user, a guest user, a child, or an unknown user.

例示的な登録ユーザは、主としてユーザプロファイル、及び/又は音声構成設定などによってメディア再生システムとリンク又は関連付けられた、1又は複数のユーザを含む。例示的なユーザプロファイルは、ユーザの年齢、位置情報、好みの再生設定、好みのプレイリスト、好みのオーディオコンテンツ、及びそのユーザに設定されたアクセス制限に関する情報、並びにそのユーザの音声、ユーザ履歴を識別する情報などを主として含んでいてもよい。ユーザの音声を識別する例示的な情報は、ユーザの音声のトーン又は周波数、年齢、性別、及びユーザ履歴などを主として含む。例示的な音声構成設定は、メディア再生システムがユーザを認識し、且つこれを関連付けるための音声入力又は一連の音声入力を提供するように、ユーザに要求する設定を含んでいてもよい。   Exemplary registered users include one or more users linked or associated with the media playback system primarily through user profiles and / or voice configuration settings and the like. An exemplary user profile includes the user's age, location information, preference playback settings, preference playlists, preference audio content, and information on access restrictions set for the user, as well as the user's voice, user history The identification information may be mainly included. Exemplary information identifying the user's voice includes primarily the user's voice tone or frequency, age, gender, user history, and the like. An exemplary voice configuration setting may include a setting that requests the user to provide a voice input or a series of voice inputs for the media playback system to recognize the user and associate it.

例示的なゲストユーザは、登録ユーザのユーザプロファイル、又は登録ユーザによって作成されたか、或いは登録ユーザの許可を得てゲストユーザによって作成されたゲストプロファイルにより、メディア再生システムとリンク又は関連付けられた、1又は複数のユーザを含む。例示的なゲストプロファイルは、ユーザプロファイルに含まれるあらゆるタイプの情報を含むことができる。   An exemplary guest user is linked or associated with the media playback system by the registered user's user profile or by a guest profile created by the registered user or created by the guest user with the permission of the registered user 1 Or include multiple users. An exemplary guest profile can include any type of information contained in a user profile.

いくつかの例では、自宅に自分用のメディア再生システムを所有するゲストは、自分用のメディア再生システムと関連付けられたユーザプロファイルをコンピューティングデバイス506内に格納していてもよい。ゲストがホストの家に到着し、音声コマンドを使用してホスト所有のメディア再生システムを制御しようとすると、ホストの再生システムに接続されたコンピューティングデバイス506が、(i)そのゲストがユーザアカウントを有している音楽サービス、(ii)そのゲストのプレイリスト、(iii)ホストがそのゲストに対して、ホストのメディア再生システムを制御するためのゲストアクセス権を付与したかどうか、及び/又は(iv)場合によってはそのゲストのユーザプロファイル内にある他のユーザ情報などを含むが、これらに限定されない、そのゲストのユーザプロファイル設定にアクセスできるようにしてもよい。   In some examples, a guest who owns his own media playback system at home may store a user profile associated with his own media playback system in computing device 506. When a guest arrives at the host's home and tries to control the host-owned media playback system using voice commands, the computing device 506 connected to the host's playback system (i) that guest has a user account (I) the guest's music service, (ii) the guest's playlist, (iii) whether the host has granted the guest access to control the host's media playback system, and / or ( iv) You may be able to access the guest's user profile settings, including, but not limited to, other user information etc., possibly within the guest's user profile.

子供のユーザを、たとえばその子供がメディア再生システムの登録ユーザの1人であった場合には、ユーザプロファイル内の情報、ゲストプロファイル内の情報、及び/又はユーザの音声のトーン若しくは周波数によって識別してもよい。   Identify the child's user, for example if the child is one of the registered users of the media playback system, by the information in the user profile, the information in the guest profile, and / or the tone or frequency of the user's voice May be

いくつかの例では、音声コマンドを受信することは、メディア再生システムが、PBD532,534,536,538の1又は複数及び/又はコンピューティングデバイス506(メディア再生システムサーバとして構成されている)を介して音声コマンドを受信することを含む。コンピューティングデバイス506は音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。   In some examples, receiving the voice command may be via the media playback system via one or more of the PBDs 532 534 536 538 and / or the computing device 506 (configured as a media playback system server) Including receiving an audio command. The computing device 506 may translate the voice command into an equivalent text command and parse the text command to identify the command.

さらに別の例では、1又は複数の機能をネットワークマイクロホンシステム単独で、又はメディア再生システムと共に実行してもよい。たとえば、音声コマンドを受信することは、ネットワークマイクロホンシステムが、NMD512、514、又は516の1又は複数を介して音声コマンドを受信すること、その音声コマンドをさらなる処理のためにコンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に送信することを含む。コンピューティングデバイス506は音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。場合によっては、ネットワークマイクロホンシステムは、音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドをコンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に送信してこれを解析し、且つコマンドを識別してもよい。   In yet another example, one or more functions may be performed by the network microphone system alone or in conjunction with the media playback system. For example, receiving the voice command may cause the network microphone system to receive the voice command via one or more of the NMDs 512, 514, or 516, the computing device 506 and / or the voice command for further processing. Or transmitting to one or more of PBDs 532, 534, 536, 538. The computing device 506 may translate the voice command into an equivalent text command and parse the text command to identify the command. In some cases, the network microphone system converts voice commands into equivalent text commands and sends the text commands to one or more of computing devices 506 and / or PBDs 532, 534, 536, 538 for analysis. , And may identify a command.

コンピューティングデバイス506及び/又はPBD532,534,536,538のうちの1つ又は複数は、音声コマンドを受信した後、その音声コマンドをメディア再生システムの登録ユーザから受信したかどうかを判定してもよい。いくつかの例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、その音声コマンドと関連付けられたユーザプロファイルがメディア再生システムに格納されているかどうかを、コンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数が判定することを含んでいてもよい。たとえば、コンピューティングデバイス506及び/又はPBD532,534,536,538のうちの1つ又は複数は音声コマンドを、メディア再生システムに格納されたユーザプロファイルに含まれ得るユーザの音声を識別する情報と照合しようと試みてもよい。ネットワークマイクロホンシステムは単独で、又はメディア再生システムと共に、コンピューティングデバイス506と通信することによって、音声コマンドをメディア再生システムの登録ユーザから受信したかどうかを判定してもよい。   One or more of computing device 506 and / or PBDs 532, 534, 536, 538 may also determine whether they have received the voice command from the registered user of the media playback system after receiving the voice command. Good. In some examples, determining whether a voice command has been received from a registered user may include whether the user profile associated with the voice command is stored in the media playback system and / or the computing device 506 and / or One or more of PBDs 532 534 536 538 may include determining. For example, one or more of computing device 506 and / or PBDs 532, 534, 536, 538 match voice commands with information identifying the user's voice which may be included in a user profile stored in the media playback system. You may try. The network microphone system, alone or in conjunction with the media playback system, may communicate with the computing device 506 to determine whether an audio command has been received from a registered user of the media playback system.

さらに別に例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、メディア再生システムの音声構成設定内の音声入力とその音声コマンドとが一致しているかどうかを、コンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数が判定することを含んでいてもよい。たとえば、ユーザは、メディア再生システムがユーザを認識し、且つこれを関連付けるための音声入力又は一連の音声入力を提供することによって、ユーザの音声を認識するようにメディア再生システムを事前に構成していてもよい。音声入力又は一連の音声入力を、コンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に格納してもよい。いくつかの実施形態では、音声入力又は一連の音声入力をネットワークマイクロホンシステムに格納してもよい。   In yet another example, determining whether a voice command has been received from a registered user may include determining whether the voice input in the voice configuration settings of the media playback system and the voice command match. One or more of PBDs 532 534 536 538 may also include determining. For example, the user pre-configures the media playback system to recognize the user's voice by providing the voice input or a series of voice inputs for the media playback system to recognize the user and associate it. May be Voice input or a series of voice inputs may be stored on one or more of computing device 506 and / or PBDs 532, 534, 536, 538. In some embodiments, the voice input or series of voice inputs may be stored in a network microphone system.

さらに別の例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、コンピューティングデバイス506、CR522、及び/又はPBD532,534,536,538の1又は複数が単独で、又はこれらを組み合わせて、受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   In yet another example, determining whether a voice command has been received from a registered user may be performed by one or more of computing device 506, CR 522, and / or PBDs 532, 534, 536, 538 alone or in combination. In combination, determining may include determining a confidence level associated with the received voice command. The confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

たとえば、メディア再生システムは、キッチンにいる登録ユーザから第1の音声コマンドを受信し、且つ受信した音声コマンドに基づいて信頼性レベルを決定してもよい。メディア再生システムは、NMD512〜513、CR522、及びPBD532〜538のうちの任意の1又は複数から第1の音声コマンドを受信してもよい。さらに、メディア再生システムは、ユーザの自宅の別の部屋にいる登録ユーザから同じ音声コマンドを受信し、且つ受信した音声コマンドに基づいて信頼性レベルを決定してもよい。メディア再生システムは、NMD512〜513、CR522、及びPBD532〜538のうちの任意の1又は複数から第2の音声コマンドを受信してもよい。次いで、メディア再生システムは、ユーザの自宅全体を通じてそれぞれ異なるコンピューティングデバイス(たとえば、CR522)、NMD、及び/又はPBDから受信したコマンドに基づいて、新たな信頼性レベルを決定してもよい。これにより、音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを、メディア再生システムにおいて得ることができる。   For example, the media playback system may receive a first voice command from a registered user at the kitchen and determine the confidence level based on the received voice command. The media playback system may receive the first voice command from any one or more of NMDs 512-513, CR 522, and PBDs 532-538. In addition, the media playback system may receive the same voice command from a registered user in another room of the user's home, and may determine the confidence level based on the received voice command. The media playback system may receive a second voice command from any one or more of NMDs 512-513, CR 522, and PBDs 532-538. The media playback system may then determine the new confidence level based on commands received from different computing devices (eg, CR 522), NMDs, and / or PBDs throughout the user's home. This allows for a higher confidence level in the media playback system to indicate that a voice command has been received from a registered user.

別の場合には、メディア再生システムは登録ユーザから音声コマンドを受信し、且つユーザ履歴に基づいて信頼性レベルを決定してもよい。動作中、メディア再生システムは、NMD512〜513、CR522、及びPBD532〜538のうちの任意の1又は複数から音声コマンドを受信してもよい。音声コマンドを受信した後、受信した音声コマンドがアーティスト、プレイリスト、ジャンル、又はユーザプロファイルで確認できる他のあらゆる情報など、その登録ユーザと通常関連付けられている情報を含む場合、コンピューティングデバイス506、CR522、及び/又はPBD532,534,536,538のうちの1つ又は複数は単独で、又はこれらを組み合わせてより高い信頼性レベルを決定してもよい。たとえば、登録ユーザが通常マイケル・ジャクソン(Michael Jackson)の曲を聴取している場合、マイケル・ジャクソンによる「スリラー(Thriller)」の再生を命じる音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを、メディア再生システムにおいて得ることができる。上記と類似しているが異なる、他の多くの例が可能である。   In other cases, the media playback system may receive voice commands from the registered user and may determine the confidence level based on the user history. In operation, the media playback system may receive voice commands from any one or more of NMDs 512-513, CR 522, and PBDs 532-538. The computing device 506 if, after receiving the voice command, the received voice command includes information normally associated with the registered user, such as artist, playlist, genre, or any other information that can be identified in the user profile. One or more of CR 522 and / or PBDs 532 534 536 538 may be used alone or in combination to determine higher confidence levels. For example, if a Registered User is listening to Michael Jackson songs normally, a higher confidence indicating that Michael Jackson has received a voice command from the Registered User instructing it to play "Thriller". Sex levels can be obtained in the media playback system. Many other examples similar to but different from the above are possible.

さらに別の場合には、メディア再生システムは、ユーザプロファイルで確認できる登録ユーザの音声コマンドのパターンに基づいて信頼性レベルを構築してもよい。たとえば、メディア再生システムは、登録ユーザからブリトニー・スピアーズ(Britney Spears)による特定の曲の再生を命じるコマンドを受信し、且つその受信した音声コマンドに基づいて信頼性レベルを決定してもよい。メディア再生システムが同じ音声コマンド、又はたとえばブリトニー・スピアーズによる別の曲の再生を命じるコマンドなどの類似した音声コマンドを受信するたびに、メディア再生システムはより高い信頼性レベルを構築してもよく、したがって、その音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを得ることができる。   In yet another case, the media playback system may build a confidence level based on patterns of voice commands of registered users that can be verified in the user profile. For example, the media playback system may receive a command from the registered user instructing playback of a particular song by Britney Spears, and may determine the confidence level based on the received voice command. The media playback system may build a higher confidence level each time the media playback system receives the same voice command, or a similar voice command, such as a command to command another song to be played by Britney Spears, for example. Thus, a higher confidence level can be obtained indicating that the voice command has been received from the registered user.

前述したように、本明細書に記載の1又は複数の機能を、通常ネットワークマイクロホンシステム単独で、又はメディア再生システムと共に実行してもよいことが理解される。コンピューティングデバイス506によって実行される1又は複数の機能を、メディア再生システムのCR522及び/又はPBD532,534,536,538の1又は複数、並びに/又は場合によってはNMD512,514,516の1又は複数によって実行してもよいことがさらに理解される。   As mentioned above, it is understood that one or more of the functions described herein may typically be performed by the network microphone system alone or in conjunction with a media playback system. One or more functions to be performed by computing device 506, one or more of CR 522 and / or PBD 532, 534, 536, 538 of the media playback system, and / or one or more of NMD 512, 514, 516 as the case may be. It is further understood that may be performed by

いくつかの例では、信頼性レベルを決定することは、メディア再生システムがコンピューティングデバイス506(メディア再生システムサーバとして構成されている)、CR522、及び/又はPBD532,534,536,538の1又は複数が単独で、又は互いに組み合わせて信頼性レベルを決定することを含む。たとえば、CR522、及び/又はPBD532,534,536,538のうちの1つ又は複数は、(i)受信した音声コマンドと関連付けられる信頼性レベルを決定し、(ii)決定された信頼性レベルに基づいて、その音声コマンドを登録ユーザから受信したと判定し、且つ(iii)その音声コマンドの実行を命じる指示をコンピューティングデバイス506(メディア再生システムサーバとして構成されている)に送信してもよい。別の場合には、CR522、及び/又はPBD532,534,536,538のうちの1つ又は複数は、(i)受信した音声コマンドと関連付けられる信頼性レベルを決定し、且つ(ii)その信頼性レベルと関連付けられたデータをさらなる処理のためにコンピューティングデバイス506へと送信してもよい。次いで、コンピューティングデバイス506は、(i)決定された信頼性レベルに基づいて、その音声コマンドを登録ユーザから受信したと判定し、且つ(ii)その音声コマンドの実行を命じる指示をCR522、及び/又はPBD 532,534,536,538の1又は複数に送信してもよい。   In some instances, determining the confidence level may be determined by the media playback system being one of the computing device 506 (configured as a media playback system server), CR 522, and / or PBD 532 534 536 538 or A plurality includes determining reliability levels either alone or in combination with each other. For example, CR 522 and / or one or more of PBDs 532, 534, 536, 538 (i) determine the confidence level associated with the received voice command, and (ii) to the determined confidence level Based on the determination that the voice command has been received from the registered user, and (iii) an instruction instructing execution of the voice command may be sent to the computing device 506 (configured as a media playback system server) . In other cases, CR 522 and / or one or more of PBDs 532, 534, 536, 538 determine (i) the confidence level associated with the received voice command, and (ii) that confidence Data associated with the sex level may be sent to the computing device 506 for further processing. The computing device 506 then determines (i) that the voice command has been received from the registered user based on the determined confidence level, and (ii) instructs CR522 to command the execution of the voice command, and And / or may be transmitted to one or more of the PBDs 532, 534, 536, 538.

さらに別の例では、信頼性レベルを決定することは、メディア再生システムが単独で、又はネットワークマイクロホンシステムと共に信頼性レベルを決定することを含む。たとえば、メディア再生システムはメディア再生システムのCR522及び/又はPBD532,534,536,538の1又は複数、及び/又は場合によってはNMD512,514,516の1又は複数を介して、音声コマンドを受信してもよい。受信した音声コマンドに応答して、メディア再生システムは、信頼性レベルと関連付けられたデータをNMD512,514,516の1又は複数に送信してもよい。次いで、ネットワークマイクロホンは、(i)受信したデータと関連付けられる信頼性レベルを決定し、且つ(ii)コマンドを実行するか、又はコマンドの実行を命じる指示をメディア再生システムに送信してもよい。その音声コマンドを登録ユーザから受信したと判定したことに応答して、コンピューティングデバイス506は、メディア再生システムの1又は複数のPBDに対する指示を構成してもよい。この指示は音声コマンドの内容と、登録ユーザのユーザプロファイル内の情報とに基づいていてもよい。付加的に又は代替的に、この指示は、音声コマンドの内容と、コンピューティングデバイス506、PBD532,534,536,538の1又は複数、又はネットワークマイクロホンシステムに格納された音声構成設定とに基づいていてもよい。   In yet another example, determining the confidence level includes determining the confidence level by the media playback system alone or with the network microphone system. For example, the media playback system may receive voice commands via one or more of the media playback system CR 522 and / or PBDs 532 534 536 538 and / or possibly one or more NMDs 512 516 516. May be In response to the received voice command, the media playback system may transmit data associated with the confidence level to one or more of the NMDs 512, 514, 516. The network microphone may then (i) determine the confidence level associated with the received data, and (ii) execute the command or send an indication to command execution of the command to the media playback system. In response to determining that the voice command has been received from the registered user, the computing device 506 may configure an indication for one or more PBDs of the media playback system. This instruction may be based on the content of the voice command and the information in the user profile of the registered user. Additionally or alternatively, this indication is based on the content of the voice command and voice configuration settings stored in the computing device 506, one or more of PBDs 532, 534, 536, 538, or a network microphone system. May be

いくつかの例では、音声コマンドの内容は、メディア再生システムの1又は複数のPBDにメディアコンテンツの再生を命じるコマンドを含んでいてもよい。いくつかの実施形態では、メディア再生システムにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、PBDの1又は複数に登録ユーザの好みのメディアソースからメディアコンテンツを取得させる指示若しくは指示一式を構成してもよい。   In some examples, the content of the voice command may include a command that instructs one or more PBDs of the media playback system to play the media content. In some embodiments, based on the command instructing the media playback system to play the media content and the information in the registered user's user profile, the computing device 506 may select one or more of the PBD's preferred media for the registered user. It may constitute an instruction or a set of instructions to get media content from the source.

別の例では、メディア再生システムにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、メディア再生システムにメディア再生システムの1又は複数のPBDを介してメディアコンテンツを再生させる指示を構成してもよい。たとえば、コンピューティングデバイス506は、(i)登録ユーザの好みの再生設定の1つ又は複数を用いてメディア再生システムを構成し、且つ(ii)登録ユーザの好みの再生設定を用いて1又は複数のPBDにメディアコンテンツを再生させる指示を備えていてもよい。   In another example, based on the command instructing the media playback system to play the media content and the information in the registered user's user profile, the computing device 506 may send the media playback system one or more PBDs of the media playback system. An instruction to play back the media content may be configured. For example, computing device 506 may (i) configure the media playback system with one or more of the registered user's preferred playback settings, and (ii) use one or more of the registered user preferred playback settings. The PBD may have an instruction to play media content.

好みの再生設定は、登録ユーザのユーザプロファイルに格納される好みの再生設定であってもよい。付加的に又は代替的に、好みの再生設定は、登録ユーザのユーザプロファイルに格納されたユーザ履歴に基づいていてもよい。ユーザ履歴は、ユーザがメディアコンテンツを再生するために通常使用する、又は以前に使用した再生設定を含んでいてもよい。   The preference reproduction setting may be a preference reproduction setting stored in the user profile of the registered user. Additionally or alternatively, the preferred playback settings may be based on user history stored in the registered user's user profile. The user history may include playback settings that the user typically or previously used to play media content.

さらに別の例では、音声コマンドの内容は、メディア再生システムにメディアコンテンツの再生を命じるコマンドを含んでいてもよいが、メディア再生システムの特定の再生ゾーンを特定しない場合がある。コマンドの内容とユーザ履歴などの登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、(i)メディア再生システムに、メディア再生システムの特定の再生ゾーン内で1又は複数のPBDを介してメディアコンテンツを再生させる指示を構成し、且つ(ii)1又は複数のPBDを介してメディアコンテンツを再生するように構成された指示を実行してもよい。   In yet another example, the content of the voice command may include a command instructing the media playback system to play the media content, but may not specify a particular playback zone of the media playback system. Based on the content of the command and the information in the registered user's user profile, such as the user history, the computing device 506 may (i) send to the media playback system one or more PBDs within a particular playback zone of the media playback system. , And (ii) execute instructions configured to play the media content via the one or more PBDs.

さらに別の例では、音声コマンドの内容は、メディア再生システムに再生設定の変更を命じるコマンドを含んでいてもよい。メディア再生システムに再生設定の変更を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、(i)メディア再生システムにおける1又は複数のPBDの再生設定をメディア再生システムに変更させる指示を構成し、且つ(ii)1又は複数のPBDを介して再生設定を変更するように構成された指示を実行してもよい。   In yet another example, the content of the voice command may include a command instructing the media playback system to change the playback settings. Based on the command instructing the media playback system to change the playback settings and the information in the registered user's user profile, the computing device 506 may (i) play back the playback settings of one or more PBDs in the media playback system. And (ii) execute instructions configured to change playback settings via one or more PBDs.

さらに別の例は、メディア再生システムが音声コマンドを子供から受信したかどうかを判定することを含んでいてもよい。たとえば、コンピューティングデバイス506は、その子供がメディア再生システムの登録ユーザの1人である場合に、ユーザプロファイル内の情報に基づいて成人と子供とを区別してもよい。別の場合には、コンピューティングデバイス506は、ユーザの音声のトーン又は周波数に基づいて成人と子供とを区別してもよい。   Yet another example may include determining whether the media playback system has received a voice command from a child. For example, computing device 506 may distinguish between adults and children based on information in the user profile if the child is one of the registered users of the media playback system. In other cases, computing device 506 may distinguish between adults and children based on the tone or frequency of the user's voice.

さらに別の場合には、音声コマンドを子供から受信したかどうかを判定することは、コンピューティングデバイス506、CR522、及び/又はPBD532,534,536,538の1又は複数(単独で、或いは共に)が受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。上述したように、ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   In still other cases, it may be determined whether a voice command has been received from the child by one or more of computing device 506, CR 522, and / or PBDs 532, 534, 536, 538 (alone or together) May include determining a confidence level associated with the received voice command. As discussed above, the confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

例示的な動作において、メディア再生システムは、子供がいる可能性の高い特定の部屋(たとえば、子供の寝室、遊び部屋、地下室など)に設置されたNMD又はPBDから音声コマンドを受信してもよい。子供がいる可能性の高い部屋に設置されたデバイス(NMD又はPBD)から音声コマンドを受信したため、その音声コマンドを子供から受信したことを示すより高い信頼性レベルをメディア再生システムにおいて得ることができる。   In an exemplary operation, the media playback system may receive voice commands from an NMD or PBD located in a particular room (eg, a child's bedroom, play room, basement, etc.) where children are likely to be present . Having received a voice command from a device (NMD or PBD) installed in a room likely to have children, a higher confidence level can be obtained in the media playback system indicating that the voice command has been received from the child .

別の例では、メディア再生システムは特定のタイプのコンテンツ用の音声コマンドを受信し、そのコンテンツのタイプに基づいて、音声コマンドを子供から受信したことを示すより高い信頼性レベルを決定してもよい。たとえば、メディア再生システムがアニメ番組やアニメ映画のサウンドトラックの再生を命じる音声コマンドを受信した場合、その音声コマンドを子供から受信したことを示すより高い信頼性レベルをメディア再生システムにおいて得ることができる。上記と類似しているが異なる、他の多くの例が可能である。   In another example, the media playback system may receive an audio command for a particular type of content and, based on the type of content, also determine a higher confidence level indicating that an audio command has been received from a child. Good. For example, if the media playback system receives a voice command instructing to play an animation program or movie movie soundtrack, a higher reliability level can be obtained in the media playback system indicating that the voice command has been received from the child. . Many other examples similar to but different from the above are possible.

音声コマンドを子供から受信したと判定したことに応答して、いくつかの例は、子供にとって不適切となる恐れのある所与のメディアの再生を1又は複数のPBDに対して禁止することを含んでいてもよい。場合によっては、子供の音声によるコマンドの内容に基づいて、コンピューティングデバイス506及び/又は1又は複数のPBDに対して再生設定の変更を禁止してもよい。たとえば、コンピューティングデバイス506及び/又は1又は複数のPBDは、1又は複数のPBDの音量を上げることを命じる子供の音声によるコマンドを無視してもよい。   In response to determining that a voice command has been received from a child, some examples may prohibit the playback of a given media that may be inappropriate for a child to one or more PBDs. May be included. In some cases, based on the content of the child's voice command, the computing device 506 and / or one or more PBDs may be prohibited from changing the playback settings. For example, computing device 506 and / or one or more PBDs may ignore children's voice commands that command the volume up of one or more PBDs.

場合によっては、メディア再生システムは、その音声コマンドがメディア再生システムの登録ユーザではなくゲストユーザ由来のものであるかどうかを判定することに基づいて作動してもよい。たとえば、コンピューティングデバイス506は、特定のゲストと関連付けられ得る、以前に作成したゲストプロファイルを格納していてもよい。別の例では、コンピューティングデバイス506は音声コマンドを登録ユーザから受信しなかったと判定し、次いで登録ユーザに対して、その音声コマンドがゲスト由来のものであるかどうかを確認してもよい。次いで、登録ユーザは必要に応じて、コンピューティングデバイス506及び/又は1又は複数のPBDに対して音声コマンドの内容のすべて又は一部を実行することを禁止してもよい。   In some cases, the media playback system may operate based on determining whether the voice command is from a guest user rather than a registered user of the media playback system. For example, computing device 506 may store a previously created guest profile that may be associated with a particular guest. In another example, the computing device 506 may determine that a voice command has not been received from a registered user, and then may ask the registered user if the voice command is from a guest. The registered user may then be prohibited from performing all or part of the content of the voice command on the computing device 506 and / or one or more PBDs, as desired.

さらに別の例では、音声コマンドをゲストユーザから受信したかどうかを判定することは、コンピューティングデバイス506、CR522、及び/又はPBD532,534,536,538の1又は複数が(単独で、又は共に)受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。上述したように、ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   In yet another example, determining whether a voice command has been received from a guest user may be performed by one or more of computing device 506, CR 522, and / or PBDs 532 534 536 538 B) determining the level of confidence associated with the received voice command. As discussed above, the confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

音声コマンドをゲストユーザから受信したと判定したことに応答して、コンピューティングデバイス506は、(1)ゲストユーザに対して制限設定を割り当て、(2)音声コマンドの内容とそのゲストユーザに対して割り当てた制限設定とに基づいて、1又は複数のPBDに対する指示を構成し、且つ(3)その指示を実行させるために1又は複数のPBDに送信してもよい。ある例では、ゲストユーザに対して制限設定を割り当てることは、コンピューティングデバイス506及び/又は1又は複数のPBDに格納された特定のゲストプロファイルと音声コマンドとをコンピューティングデバイス506が照合することを含んでいてもよい。ゲストプロファイルは、制限設定と、前述した情報の中でも主としてゲストの音声の周波数又はトーンなどの特定のゲストユーザの音声に関する情報とを含んでいてもよい。制限設定は、メディア再生システムの制御を制限する任意の設定であってもよい。   In response to determining that the voice command has been received from the guest user, the computing device 506 (1) assigns restriction settings to the guest user, and (2) the contents of the voice command and the guest user Based on the assigned restriction settings, instructions for one or more PBDs may be configured and (3) transmitted to one or more PBDs to cause the instructions to be performed. In one example, assigning restriction settings to a guest user may cause computing device 506 to match voice commands with a particular guest profile stored in computing device 506 and / or one or more PBDs. May be included. The guest profile may include restricted settings and information about the voice of a particular guest user, such as the frequency or tone of the voice of the guest primarily among the information described above. The restriction setting may be any setting that restricts control of the media playback system.

さらに別の例は、異なるユーザから受信した音声コマンドの競合を解決するために、メディア再生システムが優先順位を決定することを含む。競合する音声コマンドはたとえば、あるユーザから受信する曲の再生を命じる音声コマンドと、別のユーザから受信するその曲の再生中止を命じる後続の音声コマンドとであってもよい。あるユーザから受信する1又は複数のPBD532,534,536,538の音量を上げることを命じる音声コマンド、及び別のユーザから受信する音量を下げることを命じる後続の音声コマンドなど、他の例も可能である。   Yet another example includes the media playback system determining priorities to resolve conflicts of voice commands received from different users. The competing voice commands may be, for example, a voice command instructing playback of a song received from one user and a subsequent voice command instructing suspension of playback of the song received from another user. Other examples are possible, such as a voice command to command to increase the volume of one or more PBDs 532, 534, 536, 538 received from one user, and a subsequent voice command to command to decrease the volume received from another user It is.

具体的には、メディア再生システムは(NMD512〜516、CR522、PBD532〜538、及び/又はコンピューティングデバイス506のうちの1又は複数を介して)登録ユーザ又はホストから再生ゾーンでの曲の再生を命じる音声コマンドを受信してもよい。次いで、メディア再生システムは未登録ユーザ又はゲストから再生ゾーンでの曲の再生中止を命じる、競合する音声コマンドを受信する場合がある。この競合を解決するために、メディア再生システムは、登録ユーザから受信した音声コマンドが未登録ユーザ又はゲストよりも高い優先度を有するような優先順位を適用してもよい。   Specifically, the media playback system plays the song in the playback zone from the registered user or host (via one or more of NMD 512-516, CR 522, PBD 532-538, and / or computing device 506) It may receive a voice command to be commanded. The media playback system may then receive conflicting voice commands from the unregistered user or guest instructing it to stop playing the song in the playback zone. To resolve this conflict, the media playback system may apply a priority such that voice commands received from registered users have higher priority than unregistered users or guests.

別の例では、メディア再生システムは、登録ゲストから受信した音声コマンドが未登録ゲストよりも高い優先度を有するような優先順位を割り当ててもよい。場合によっては、ある登録ゲストから受信した音声コマンドが別の登録ゲストよりも高い優先度を有していてもよい。付加的又は代替的に、成人から受信した音声コマンドは子供よりも高い優先度を有していてもよい。   In another example, the media playback system may assign a priority such that voice commands received from registered guests have a higher priority than unregistered guests. In some cases, voice commands received from one registered guest may have a higher priority than another registered guest. Additionally or alternatively, voice commands received from adults may have higher priority than children.

さらに別の例では、メディア再生システムによって受信されたコントローラ発行コマンド(たとえば、メディア再生システムを制御するように構成されたCR522又は別のコンピューティングデバイスによって発行されるコマンド)は登録ユーザよりも低い優先度を有していてもよいが、未登録ユーザ又はゲストよりは高い優先度を有していてもよい。場合によっては、一部の登録ゲストはコントローラ発行コマンドよりも高い優先度を有していてもよい。優先順位の決定及び割当てに関する他の例も可能である。   In yet another example, a controller issue command received by the media playback system (e.g., a command issued by a CR 522 or another computing device configured to control the media playback system) has a lower priority than registered users. It may have a degree, but may have a higher priority than unregistered users or guests. In some cases, some registered guests may have higher priority than controller issue commands. Other examples of priority determination and assignment are also possible.

また、メディア再生システムは、登録ユーザと関連付けられた起動ワード又は起動フレーズを受信したことに基づいて作動してもよい。起動ワード又は起動フレーズは、登録ユーザのプロファイルに格納された特定の言葉又はフレーズ(たとえば、「ねえ、Sonos」)を含んでいてもよい。場合によっては、ユーザはそれぞれ、異なる起動ワード又は起動フレーズ用にメディア再生システムを構成してもよい。他の場合には、メディア再生システムを、すべての(又は任意の)ユーザに対して同じ起動ワード又は起動フレーズで構成してもよい。   The media playback system may also operate upon receiving an activation word or activation phrase associated with a registered user. The activation word or activation phrase may include a specific word or phrase (e.g., "Hey, Sonos") stored in the registered user's profile. In some cases, users may configure the media playback system for different activation words or activation phrases, respectively. In other cases, the media playback system may be configured with the same activation word or activation phrase for all (or any) users.

いくつかの例では、登録ユーザは、メディア再生システムが登録ユーザ、ゲスト、及び/又は未登録ユーザからの起動ワード又は起動フレーズと関連付けられた追加の音声コマンドを受信するための時間枠又は時間ウィンドウをトリガするような、共通の起動ワード又は起動フレーズを有していてもよい。たとえば、登録ユーザ又はホストは、再生キューへの曲の追加を命じる音声コマンド(たとえば、「ねえSonos、再生キューに曲を追加して」)を送信してもよく、これにより、再生キューへの特定の曲の追加を命じる追加の音声コマンド(たとえば、「マイケル・ジャクソンのスリラーを追加して(Add Thriller by Michael Jackson)」を登録ユーザが送信できる時間枠又は時間ウィンドウ(たとえば、5分)が開放されてもよい。別の例では、登録ユーザ又はホストは、ユーザ定義の若しくはデフォルトの時間枠又は時間ウィンドウにおける、或いは特定の時間帯における他の機能(たとえば、「ねえSonos、自宅システムの管理を今から4時間開いて(Hey Sonos, open control for my house system for the next 4 hours)、或いは「ねえSonos、自宅システムの管理を今から土曜日の午後2時まで開いて(Hey Sonos, open control for my house system from now until Saturday at 2pm)」)のうち、自宅内のすべてのゲストに対して、主として再生キューへの曲の追加、曲の再生、又は音量の変更などを命じる音声コマンドの送信を許可する音声コマンド(たとえば、「ねえSonos、自宅システムの管理を開いて(Hey Sonos, open control for my house system)」)を送信してもよい。場合によっては、登録ユーザ又はホストは、再生ゾーンの1又は複数のPBD532,534,536,538、及び/又はコンピューティングデバイス506を制御することを命じる音声コマンドの送信を、ある時間枠又は時間ウィンドウにおいて一部のゲストにのみ許可する音声コマンド(たとえば、「ねえSonos、リビングの管理者を許可されたゲストに限定して(Hey Sonos, restrict control for my living room to authorized guests)」)を送信してもよい。   In some instances, the registered user may have a time window or window for the media playback system to receive additional voice commands associated with the activation word or activation phrase from the registered user, guest, and / or unregistered user. May trigger a common activation word or activation phrase. For example, a registered user or host may send a voice command (eg, “Hey Sonos, add a song to a playback queue”) to command the addition of a song to the playback queue, thereby causing the playback queue to Additional voice commands (eg, "Add Thriller by Michael Jackson") can be sent by the registered user to send a specific song (eg, 5 minutes). In another example, the registered user or host may have other functions in a user-defined or default time frame or time window, or in a specific time zone (e.g. Open for 4 hours from now (Hey Sonos, open con "Hey Sonos open management of home system from now until 2 pm on Saturday (Hey Sonos, open control for my house system from now until Saturday at 2pm)" A voice command (for example, “Hey Sonos,” for example) that allows all guests at home to send a voice command that mainly instructs to add a song to a playback queue, play a song, or change the volume etc. You may open the management of the home system (Hey Sonos, open control for my house system), and in some cases, the registered user or host may Voices that allow the transmission of voice commands to control one or more PBDs 532, 534, 536, 538 and / or computing devices 506 in a certain time frame or time window to only some guests The command (eg, "Hey Sonos, restricting the administrator of the living to authorized guests") may be transmitted.

別の例では、登録ユーザは、起動ワード又は起動フレーズと関連付けられた追加の音声コマンドを、メディア再生システムが受信するための時間枠又は時間ウィンドウをトリガするそれぞれの音声コマンドに対して、異なる起動ワード又は起動フレーズを有していてもよい。たとえば、登録ユーザ又はホストは、再生キューへの曲の追加を命じる音声コマンドを送信するためのユーザ固有の起動ワード又は起動フレーズを(たとえば、「ねえSonos、再生キューに曲を追加して」、「おいSonos、キューに曲を追加して(Yo, Sonos, queue songs)」、及び「曲をアルファベット順に(Alpha song queue)」など)有していてもよく、またメディア再生システムの制御を自宅にいるゲストに許可するためのユーザ固有の起動ワード又は起動フレーズ(たとえば、「ねえSonos、アクセスを開いて(Hey Sonos, open access)」、及び「パーティーの時間だよ(It’s party time)」など)をそれぞれ有していてもよい。   In another example, the registered user launches differently for each voice command that triggers the time slot or window for the media playback system to receive additional voice commands associated with the wake-up word or launch phrase. It may have a word or activation phrase. For example, a registered user or host may use a user-specific activation word or activation phrase to send a voice command to command the addition of a song to the playback queue (e.g. "Hey Sonos, add a song to the playback queue", "Dee Sonos, add songs to the queue (Yo, Sonos, queue songs)" and "Alpha songs queue, etc." and may have control of the media playback system at home A user-specific activation word or activation phrase (eg, “Hey Sonos, open access”) and “It's party time” to allow guests in the room (eg, Hey Sonos, open access) Etc.) may be provided.

さらに別の例では、登録ユーザ又はホストは、自宅にいる特定のゲストがある時間枠又は時間ウィンドウにおいて、メディア再生システムを限定的に制御することを許可する音声コマンドを送信するための、ユーザ固有若しくは共通の起動ワード又は起動フレーズを有していてもよい。参照によりその全体を本明細書に引用している、「ゲストアクセスによってクラウドソースのプレイリストを提供するための製造者のシステム、方法、装置、及び製品(Systems, Methods, Apparatus, and Articles of Manufacture to Provide a Crowd−Sourced Playlist with Guest Access)」と題する米国特許出願公開第2013/0346859号明細書において、メディア再生システムの限定的な制御に関するいくつかの例がより詳細に提供されている。   In yet another example, a registered user or host may be user specific to send voice commands that allow limited control of the media playback system during certain time frames or windows of particular guests at home. Alternatively, it may have a common activation word or activation phrase. "Manufacturer's System, Method, Apparatus, and Products for Providing Crowdsource Playlists by Guest Access (Systems, Methods, Apparatus, and Articles of Manufacture, which is incorporated herein by reference in its entirety) In U.S. Patent Application Publication No. 2013/0346859, entitled "Provide to Crowd-Sourced Playlist with Guest Access," several examples of limited control of media playback systems are provided in more detail.

さらに別の例では、登録ユーザ又はホストは、自宅にいる登録ゲストがある時間枠又は時間ウィンドウにおいて、メディア再生システムを自由に制御又は限定的に制御することを許可する音声コマンドを送信するための、ユーザ固有若しくは共通の起動ワード又は起動フレーズを有していてもよく、その一方で未登録ゲストによる制御を禁止していてもよい。場合によっては、登録ユーザ又はホストは、自宅にいる成人がある時間枠又は時間ウィンドウにおいて、メディア再生システムを自由に制御又は限定的に制御することを許可する音声コマンドを送信するための、ユーザ固有若しくは共通の起動ワード又は起動フレーズを有していてもよく、その一方で子供による制御を禁止していてもよい。上記と類似しているが異なる、他の多くの例が可能である。   In yet another example, a registered user or host may send a voice command allowing a registered guest at home to freely or limitedly control the media playback system in a certain time frame or window. , And may have a user-specific or common activation word or activation phrase, while prohibiting control by an unregistered guest. In some cases, the registered user or host may be user specific to send voice commands that allow the adult user at home to freely or limitedly control the media playback system in a certain time frame or window. Alternatively, it may have a common activation word or activation phrase, while the child control may be prohibited. Many other examples similar to but different from the above are possible.

場合によっては、登録ユーザ又はホストは、メディア再生システムが追加の音声コマンドを受信するための時間枠又は時間ウィンドウを指定してもよい。たとえば、登録ユーザ又はホストは、メディア再生システムの制御を命じる追加の音声コマンドを指定した時間枠内(たとえば、1時間)にゲストが送信することを許可する音声コマンド(たとえば、「ねえSonos、自宅システムの管理を1時間開いて(Hey, Sonos, open control for my house system for one hour)」)を送信してもよい。上記と類似しているが異なる、他の多くの例が可能である。   In some cases, a registered user or host may specify a time frame or window for the media playback system to receive additional voice commands. For example, a registered user or host may allow a guest to transmit within a specified time frame (e.g., one hour) a voice command (e.g., "Hey Sonos, Home") that specifies additional voice commands to control the media playback system. You may open the management of the system for one hour (Hey, Sonos, open control for my house system for one hour). Many other examples similar to but different from the above are possible.

さらに別の場合には、登録ユーザ又はホストは、最初の起動ワード又は起動フレーズと関連付けられた追加の音声コマンドを受信するための時間枠又は時間ウィンドウを閉じるか、若しくは解除してもよい。たとえば、登録ユーザ又はホストが、追加の音声コマンドを受信するための時間枠又は時間ウィンドウを1時間開放する起動ワード又は起動フレーズを用いて音声コマンドを発した場合、その登録ユーザ又はホストは、1時間の時間枠が終了する前に、その1時間の時間枠又は時間ウィンドウを解除することを命じる別の音声コマンド(たとえば、「ねえSonos、キューへの曲の追加は完了だよ(Hey Sonos, queue songs complete)」)を送信してもよい。上記と類似しているが異なる、他の多くの例が可能である。   In yet another case, the registered user or host may close or release the time window or window for receiving additional voice commands associated with the initial activation word or activation phrase. For example, if the registered user or host issues a voice command using an activation word or activation phrase that opens a time frame or window for receiving an additional voice command for one hour, the registered user or host Another voice command (for example, “Hey Sonos, adding songs to the queue is complete (Hey Sonos, queue songs complete) ") may be sent. Many other examples similar to but different from the above are possible.

さらに別に例は、メディア再生システムが、登録ユーザと関連付けられた起動ワード又は起動フレーズを受信したことに基づいて作動することを含んでいてもよい。登録ゲストユーザは、起動ワード又は起動フレーズをゲストプロファイル内に格納していてもよい。起動ワード又は起動フレーズをゲストユーザから受信したと判定したことに応答して、メディア再生システムは、(i)ゲストユーザと関連付けられた制限設定があるかどうかを判定し、(ii)起動ワード又は起動フレーズと、そのゲストユーザに対して割り当てた制限設定とに基づいて、1又は複数のPBDに対する指示を構成し、且つ(iii)その指示を実行させるために1又は複数のPBDに送信してもよい(たとえば、これによって、起動ワードコマンドと関連付けられた追加の音声コマンドを受信するための時間枠若しくは時間ウィンドウを開放する)。   Yet another example may include the media playback system operating upon receipt of an activation word or activation phrase associated with a registered user. The registered guest user may store the activation word or activation phrase in the guest profile. In response to determining that the activation word or activation phrase has been received from the guest user, the media playback system determines (i) whether there is a restriction setting associated with the guest user, (ii) the activation word or Based on the activation phrase and the restriction settings assigned to the guest user, configure instructions for one or more PBDs, and (iii) send to one or more PBDs to execute the instructions. (E.g., this opens up a time frame or window for receiving additional voice commands associated with the activation word command).

場合によっては、メディア再生システムは、登録ゲストユーザから起動ワード又は起動フレーズを受信したことに基づいて作動することを控えてもよく、この例としては、メディア再生システムが登録ユーザ又はホストから起動ワード若しくは起動フレーズを含む音声コマンドを既に受信していたり、追加のコマンドを受信するための時間枠又は時間ウィンドウの有効期限が終了していなかったりする場合が挙げられる。   In some cases, the media playback system may refrain from acting upon receipt of an activation word or activation phrase from a registered guest user, and in this example, the media reproduction system may activate activation words from a registered user or host Alternatively, there may be a case where a voice command including an activation phrase has already been received, or a time frame or time window for receiving an additional command has not expired.

さらに別の場合には、メディア再生システムは、登録ゲストユーザから起動ワード又は起動フレーズを受信したことに基づいて作動し、次いでメディア再生デバイスが登録ユーザ又はホストから音声コマンドを受信した場合に、追加の音声コマンドを受信するための時間枠又は時間ウィンドウをその後閉じるか、或いは解除してもよい。いくつかの実施形態では、登録ゲストは、時間枠又は時間ウィンドウの有効期限が終了する前にこれを閉じるか、或いは解除してもよい。他の実施形態では、登録ゲストが子供である場合、時間枠又は時間ウィンドウの有効期限が終了する前に成人がこれを閉じるか、或いは解除してもよい。上記と類似しているが異なる、他の多くの例が可能である。   In yet another case, the media playback system operates upon receipt of the activation word or activation phrase from the registered guest user, and then adding if the media reproduction device receives an audio command from the registered user or host. The time frame or window for receiving the voice command may then be closed or released. In some embodiments, the registered guest may close or cancel before the expiration of the time frame or time window expires. In another embodiment, if the registered guest is a child, the adult may close or cancel it before the time frame or time window expires. Many other examples similar to but different from the above are possible.

メディア再生システムに対する指示を構成した後、いくつかの例は、その指示を実行させるためにメディア再生システムの1又は複数のPBDにその指示を送信することを含んでいてもよい。いくつかの例では、メディア再生システムはその指示をコンピューティングデバイス506に送信してもよい。他の例では、メディア再生システムはその指示をネットワークマイクロホンシステムに送信してもよい。   After configuring the indication to the media playback system, some examples may include transmitting the indication to one or more PBDs of the media playback system to cause the indication to be performed. In some examples, the media playback system may send the indication to the computing device 506. In another example, the media playback system may send the indication to the network microphone system.

図14に示す方法1400は、たとえば図1のメディア再生システム100、図2の1又は複数の再生デバイス200、図3の1又は複数の制御デバイス300、図4のユーザインタフェース、及び/又は図5に示す構成を含むか、或いは包含する動作環境内で実行できる方法の実施形態を提示している。方法1400は、ブロック1402〜1406の1又は複数によって示しているように、1又は複数の操作、機能、又はアクションを含んでいてもよい。   The method 1400 shown in FIG. 14 may be, for example, the media playback system 100 of FIG. 1, one or more playback devices 200 of FIG. 2, one or more control devices 300 of FIG. 3, a user interface of FIG. An embodiment of a method that can be implemented within an operating environment including or including the configuration shown in FIG. Method 1400 may include one or more operations, functions, or actions, as illustrated by one or more of blocks 1402-1406.

方法1400は、メディア再生システムに対する音声コマンドを受信することを含むブロック1402で開始される。いくつかの実施形態では、音声コマンドを受信することは、メディア再生システムがPBD532,534,536,538の1又は複数、及び/又はコンピューティングデバイス506(メディア再生システムサーバとして構成されている)を介して音声コマンドを受信することを含む。1つの例では、コンピューティングデバイス506は音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。   The method 1400 starts at block 1402, which includes receiving a voice command for a media playback system. In some embodiments, receiving the voice command may cause the media playback system to include one or more of PBDs 532, 534, 536, 538, and / or computing device 506 (configured as a media playback system server). Including receiving voice commands through. In one example, computing device 506 may translate the voice command into an equivalent text command and parse the text command to identify the command.

1つの例では、ネットワークマイクロホンシステム単独で、又はメディア再生システムと共に1又は複数の機能を実行してもよい。いくつかの実施形態では、音声コマンドを受信することは、ネットワークマイクロホンシステムがNMD512、514、又は516の1又は複数を介して音声コマンドを受信すること、その音声コマンドをさらなる処理のためにコンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に送信することを含む。別の例では、コンピューティングデバイス506及び/又はPBD532,534,536,538のうちの1つ又は複数は音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。さらに別の例では、ネットワークマイクロホンシステムは音声コマンドを同等のテキストコマンドに変換し、そのテキストコマンドをコンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に送信してこれを解析し、且つコマンドを識別してもよい。   In one example, one or more functions may be performed by the network microphone system alone or in conjunction with the media playback system. In some embodiments, receiving the voice command causes the network microphone system to receive the voice command via one or more of the NMDs 512, 514, or 516, computing the voice command for further processing. Transmitting to device 506 and / or one or more of PBDs 532, 534, 536, 538. In another example, one or more of computing device 506 and / or PBDs 532, 534, 536, 538 convert voice commands into equivalent text commands and parse the text commands to identify the commands. It is also good. In yet another example, the network microphone system converts voice commands into equivalent text commands and sends the text commands to one or more of computing devices 506 and / or PBDs 532, 534, 536, 538 for analysis. And may identify the command.

次いで、方法1400は、音声コマンドをメディア再生システムの登録ユーザから受信したかどうかを判定することを含むブロック1404に進む。いくつかの例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、コンピューティングデバイス506が、その音声コマンドと関連付けられたユーザプロファイルがメディア再生システムに格納されているかどうかを判定することを含んでいてもよい。たとえば、コンピューティングデバイス506はその音声コマンドを、ユーザプロファイル内のユーザの音声を識別する情報と照合しようと試みてもよい。   The method 1400 then proceeds to block 1404, which includes determining whether a voice command has been received from a registered user of the media playback system. In some examples, determining whether a voice command has been received from a registered user, the computing device 506 determines whether a user profile associated with the voice command is stored in the media playback system. May be included. For example, computing device 506 may attempt to match the voice command to information identifying the user's voice in the user profile.

別の例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、その音声コマンドがメディア再生システムの音声構成設定に格納された音声入力と一致しているかどうかを判定することを含んでいてもよい。たとえば、ユーザは、メディア再生システムがユーザを認識し、且つこれを関連付けるための音声入力又は一連の音声入力を提供することによって、ユーザの音声を認識するようにメディア再生システムを事前に構成していてもよい。音声構成設定をコンピューティングデバイス506及び/又はPBD532,534,536,538の1又は複数に格納してもよい。或いは、コンピューティングデバイス506は、音声構成設定を格納するためにネットワークマイクロホンシステムと通信してもよい。   In another example, determining whether a voice command has been received from a registered user includes determining whether the voice command matches a voice input stored in the media playback system's voice configuration settings. It may be. For example, the user pre-configures the media playback system to recognize the user's voice by providing the voice input or a series of voice inputs for the media playback system to recognize the user and associate it. May be Voice configuration settings may be stored on one or more of computing device 506 and / or PBDs 532, 534, 536, 538. Alternatively, computing device 506 may communicate with a network microphone system to store voice configuration settings.

さらに別の例では、音声コマンドを登録ユーザから受信したかどうかを判定することは、受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。このレベルはそのコマンドを発した人物と関連付けられた信頼性レベルであってもよく、これにはたとえば、通常そのコマンドを登録ユーザから受信したことを示す信頼性レベル、そのコマンドを特定の登録ユーザから受信したことを示す信頼性レベル、そのコマンドを登録ユーザ以外から受信したことを示す信頼性レベル、そのコマンドを登録ゲストから受信したことを示す信頼性レベル、そのコマンドを子供から受信したことを示す信頼性レベル、及び/又はそのコマンドを特定の子供から受信したことを示す信頼性レベルなどがある。このレベルはその要求の内容と関連付けられた信頼性レベルであってもよく、これについては、その要求が、たとえば「ヘイシード・ディキシー(Hayseed Dixie)」ではなく「AC/DC」を再生する要求であったことを示す信頼性レベルを一例として挙げることができる(これらは、非常によく似た響きの名前を有する2つの全く異なるバンドである)。ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、この信頼性レベルを決定してもよい。動作中、信頼性レベルの決定をCR522、PBD532〜538、NMD512〜516、及び/又はコンピューティングデバイス504〜508のうちの任意の1又は複数によって単独で、又はこれらの組み合わせによって実行してもよい。   In yet another example, determining whether a voice command has been received from a registered user may include determining a confidence level associated with the received voice command. This level may be a confidence level associated with the person who issued the command, such as, for example, a confidence level that normally indicates that the command has been received from a registered user, a particular registered user of the command Reliability level indicating that the command was received, reliability level indicating that the command was received from other than the registered user, reliability level indicating that the command was received from the registered guest, and that the command was received from the child There may be a confidence level indicated, and / or a confidence level indicating that the command has been received from a particular child. This level may be a confidence level associated with the content of the request, for which, for example, the request is a request to regenerate "AC / DC" rather than "Hayseed Dixie". Confidence levels can be mentioned as an example (these are two quite different bands with very similar sounding names). This confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile. During operation, the determination of the confidence level may be performed by any one or more of CR 522, PBD 532-538, NMDs 512-516, and / or computing devices 504-508 alone or in combination thereof .

例示的な動作において、メディア再生システムはキッチンにいる登録ユーザから音声コマンドを受信し、且つ受信した音声コマンドに基づいて信頼性レベルを決定してもよい。メディア再生デバイスは、CR522、NMD512〜516、及び/又はPBD532〜538のうちの任意の1又は複数から音声コマンドを受信してもよい。次いで、メディア再生システムは、ユーザの自宅内の別の部屋にいる登録ユーザから同じ音声コマンドを受信し、且つ受信した音声コマンドに基づいて信頼性レベルを決定してもよい。次いで、メディア再生システムは、ユーザの自宅全体を通じて異なる部屋の異なるデバイスから受信したコマンドに基づく新たな信頼性レベルを、その音声コマンドを受信した部屋に少なくとも一部基づいて決定してもよい。これにより、音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを、メディア再生システムにおいて得ることができる。   In an exemplary operation, the media playback system may receive a voice command from a registered user at the kitchen and determine the confidence level based on the received voice command. The media playback device may receive voice commands from any one or more of CR 522, NMDs 512-516, and / or PBDs 532-538. The media playback system may then receive the same voice command from a registered user in another room in the user's home and may determine the confidence level based on the received voice command. The media playback system may then determine a new confidence level based on commands received from different devices in different rooms throughout the user's home based at least in part on the room that received the voice command. This allows for a higher confidence level in the media playback system to indicate that a voice command has been received from a registered user.

別の例では、メディア再生システムは登録ユーザから音声コマンドを受信し、且つユーザ履歴に基づいて信頼性レベルを決定してもよい。具体的には、メディア再生システムは、受信した音声コマンドがアーティスト、プレイリスト、ジャンル、又はユーザプロファイルで確認できる他の任意の情報など、その登録ユーザと通常関連付けられている情報を含む場合、より高い信頼性レベルを決定してもよい。たとえば、登録ユーザが通常マイケル・ジャクソン(Michael Jackson)の曲を聴取している場合、「スリラーの再生(Play Thriller)」を命じる音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを、メディア再生システムにおいて得ることができる。同様に、登録ユーザが通常マイケル・ジャクソンの曲又は1980年代の曲を聴取している場合、「スリラーの再生(Play Thriller)」を命じる音声コマンドはフォール・アウト・ボーイ(Fall Out Boy)というバンドによる「スリラー(Thriller)」という曲ではなく、マイケル・ジャクソンというアーティストによる「スリラー」という曲の再生を命じるコマンドであることを示すより高い信頼性レベルを、メディア再生システムにおいて得ることができる。上記と類似しているが異なる、他の多くの例が可能である。   In another example, the media playback system may receive a voice command from a registered user, and may determine the confidence level based on the user history. Specifically, if the media playback system includes information that is normally associated with the registered user, such as when the received voice command includes an artist, playlist, genre, or any other information that can be identified in the user profile, High confidence levels may be determined. For example, if the registered user is typically listening to Michael Jackson's song, a higher confidence level may indicate that a voice command has been received from the registered user instructing "Play Thriller." , Media playback system. Similarly, if the registered user is usually listening to a Michael Jackson song or a 1980s song, the voice command to order "Play Thriller" is a band called Fall Out Boy. A higher reliability level can be obtained in the media playback system to indicate that it is not the song "Thriller" according to but the command to command the playback of the song "Thriller" by the artist Michael Jackson. Many other examples similar to but different from the above are possible.

さらに別の例では、メディア再生システムは、ユーザプロファイルで確認できる登録ユーザの音声コマンドのパターンに基づいて信頼性レベルを構築してもよい。たとえば、メディア再生システムは、登録ユーザからブリトニー・スピアーズ(Britney Spears)による特定の曲の再生を命じるコマンドを受信し、且つその受信した音声コマンドに基づいて信頼性レベルを決定してもよい。メディア再生システムが同じ音声コマンド、又はたとえばブリトニー・スピアーズによる別の曲の再生を命じるコマンドなどの類似した音声コマンドを受信するたびに、メディア再生システムはより高い信頼性レベルを構築してもよく、且つその音声コマンドを登録ユーザから受信したことを示すより高い信頼性レベルを得ることができる。   In yet another example, the media playback system may build a confidence level based on patterns of voice commands of registered users that can be verified in a user profile. For example, the media playback system may receive a command from the registered user instructing playback of a particular song by Britney Spears, and may determine the confidence level based on the received voice command. The media playback system may build a higher confidence level each time the media playback system receives the same voice command, or a similar voice command, such as a command to command another song to be played by Britney Spears, for example. And a higher confidence level can be obtained which indicates that the voice command has been received from the registered user.

最後に、方法1400は、音声コマンドを登録ユーザから受信したと判定したことに応答して、音声コマンドの内容と登録ユーザのユーザプロファイル内の情報とに基づいて、メディア再生システムに対する指示を構成することを含むブロック1406に進む。   Finally, in response to determining that the voice command has been received from the registered user, method 1400 constructs an indication to the media playback system based on the content of the voice command and the information in the registered user's user profile. Proceed to block 1406, which contains the

いくつかの例では、音声コマンドの内容は、メディア再生システムの1又は複数のPBDにメディアコンテンツの再生を命じるコマンドを含んでいてもよい。場合によっては、1又は複数のPBDにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、メディア再生システムに登録ユーザの好みのメディアソースからメディア又はオーディオコンテンツを取得させる指示を構成してもよい。   In some examples, the content of the voice command may include a command that instructs one or more PBDs of the media playback system to play the media content. In some cases, based on the commands instructing the one or more PBDs to play the media content and the information in the registered user's user profile, the computing device 506 sends media from the preferred media source of the registered user to the media playback system. Alternatively, an instruction to obtain audio content may be configured.

さらに別の場合には、メディア再生システムにメディアコンテンツの再生を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、メディア再生システムは、メディア再生システムにメディア再生システムの1又は複数のPBDを介してメディアコンテンツを再生させる指示を構成してもよい。具体的には、コンピューティングデバイス506は、(i)登録ユーザの好みの再生設定の1又は複数を用いてメディア再生システムを構成し、且つ(ii)登録ユーザの好みの再生設定を用いて、メディア再生システムの1又は複数のPBDにメディアコンテンツを再生させる指示を含んでいてもよい。好みの再生設定は、登録ユーザのユーザプロファイルに格納される好みの再生設定であってもよい。付加的に又は代替的に、好みの再生設定は、登録ユーザのユーザプロファイルに格納されたユーザ履歴に基づいていてもよい。ユーザ履歴は、ユーザがメディアコンテンツを再生するために通常使用する、又は以前に使用した再生設定を含んでいてもよい。   In yet another case, based on the command instructing the media playback system to play the media content and the information in the registered user's user profile, the media playback system may send the media playback system one or more PBDs of the media playback system. May be configured to play back media content. Specifically, the computing device 506 configures the media playback system using (i) one or more of the registered user's preferred playback settings, and (ii) using the registered user's preferred playback settings, Instructions may be included to cause the media content to be played back by one or more PBDs of the media playback system. The preference reproduction setting may be a preference reproduction setting stored in the user profile of the registered user. Additionally or alternatively, the preferred playback settings may be based on user history stored in the registered user's user profile. The user history may include playback settings that the user typically or previously used to play media content.

場合によっては、音声コマンドの内容は、メディア再生システムの1又は複数のPBDにメディアコンテンツの再生を命じるコマンドを含んでいてもよいが、メディア再生システムの特定の聴取ゾーン又は再生ゾーンを特定しない場合がある。コマンドの内容とユーザ履歴などの登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、メディア再生システムにメディア再生システムの特定の再生ゾーン内で1又は複数のメディア再生デバイスを介してメディアコンテンツを再生させる指示若しくは指示一式を構成してもよい。   In some cases, the content of the voice command may include a command to command one or more PBDs of the media playback system to play the media content, but does not specify a particular listening zone or playback zone of the media playback system. There is. Based on the content of the command and information in the registered user's user profile, such as the user history, the computing device 506 may send to the media playback system via one or more media playback devices within a particular playback zone of the media playback system. May constitute a set of instructions or instructions for playing the media content.

別の場合には、音声コマンドの内容は、メディア再生システムに再生設定の変更を命じるコマンドを含んでいてもよい。メディア再生システムに再生設定の変更を命じるコマンドと登録ユーザのユーザプロファイル内の情報とに基づいて、コンピューティングデバイス506は、(i)メディア再生システムにおける1又は複数のPBDの再生設定をメディア再生システムに変更させる指示若しくは指示一式を構成し、且つ(ii)1又は複数のPBDを介して再生設定を変更するように構成された指示又は指示一式を実行してもよい。   In other cases, the content of the voice command may include a command instructing the media playback system to change the playback settings. Based on the command instructing the media playback system to change the playback settings and the information in the registered user's user profile, the computing device 506 may (i) (i) play back the playback settings of one or more PBDs in the media playback system. And / or (ii) execute a set of instructions or instructions configured to change playback settings via one or more PBDs.

さらに別の例は、メディア再生システムが音声コマンドを子供から受信したかどうかを判定することを含んでいてもよい。たとえば、コンピューティングデバイス506は、その子供がメディア再生システムの登録ユーザの1人である場合に、ユーザプロファイル内の情報に基づいて成人と子供とを区別してもよい。別の例では、コンピューティングデバイス506は、ユーザの音声のトーン又は周波数に基づいて成人と子供とを区別してもよい。   Yet another example may include determining whether the media playback system has received a voice command from a child. For example, computing device 506 may distinguish between adults and children based on information in the user profile if the child is one of the registered users of the media playback system. In another example, computing device 506 may distinguish between adults and children based on the tone or frequency of the user's voice.

さらに別の例では、音声コマンドを子供から受信したかどうかを判定することは、受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。上述したように、ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   In yet another example, determining whether a voice command has been received from a child may include determining a confidence level associated with the received voice command. As discussed above, the confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

場合によっては、メディア再生システムは、子供がいる可能性の高い特定の部屋(たとえば、子供の寝室、遊び部屋、地下室など)にあるデバイス(たとえば、NMD512〜516又はPBD532〜538のいずれか)を介して音声コマンドを受信してもよい。子供がいる可能性の高い部屋に設置されたデバイスからこの音声コマンドを受信したため、このコマンドを子供から受信したことを示すより高い信頼性レベルをメディア再生システムにおいて得ることができる。   In some cases, the media playback system may have a device (eg, either NMD 512-516 or PBD 532-538) in a particular room (eg, a child's bedroom, play room, basement, etc.) where children are likely to be present. Voice commands may be received via Having received this voice command from a device installed in a room that is likely to have a child, a higher confidence level can be obtained in the media playback system indicating that this command has been received from the child.

さらに別の場合には、メディア再生システムは音声コマンドを受信し、その音声コマンドの内容に基づいて、その音声コマンドを子供から受信したことを示す信頼性レベルを決定してもよい。たとえば、メディア再生システムがアニメ番組やアニメ映画のサウンドトラックの再生を命じる音声コマンドを受信した場合、その音声コマンドを子供から受信したことを示すより高い信頼性レベルをメディア再生システムにおいて得ることができる。上記と類似しているが異なる、他の多くの例が可能である。   In yet another case, the media playback system may receive a voice command and, based on the content of the voice command, determine a confidence level indicating that the voice command has been received from a child. For example, if the media playback system receives a voice command instructing to play an animation program or movie movie soundtrack, a higher reliability level can be obtained in the media playback system indicating that the voice command has been received from the child. . Many other examples similar to but different from the above are possible.

音声コマンドを子供から受信したと判定したことに応答して、いくつかの例は、子供にとって不適切となる恐れのある所与のメディアの再生をメディア再生システムの1又は複数のPBDに対して禁止することを含んでいてもよい。いくつかの例は、子供の音声によるコマンドの内容に基づいて、コンピューティングデバイス506及び/又は1又は複数のPBDに対して再生設定の変更を禁止することを含んでいてもよい。たとえば、コンピューティングデバイス506は、1又は複数のPBDの音量を上げることを命じる子供の音声によるコマンドを無視してもよい。   In response to determining that a voice command has been received from the child, some examples may play the given media, which may be inappropriate for the child, to one or more PBDs of the media playback system. It may include prohibition. Some examples may include prohibiting the computing device 506 and / or one or more PBDs from changing the playback settings based on the content of the verbal command of the child. For example, computing device 506 may ignore a child's voice command that instructs it to turn up the volume of one or more PBDs.

また、さらに別の実施例は、その音声コマンドをメディア再生システムの登録ユーザではなくゲストユーザから受信したかどうかを判定することに基づくアクションを含んでいてもよい。場合によっては、コンピューティングデバイス506は、特定のゲストと関連付けられ得る、以前に作成したゲストプロファイルを格納していてもよい。さらに別の場合には、コンピューティングデバイス506は音声コマンドを登録ユーザから受信しなかったと判定し、次いで登録ユーザに対して、その音声コマンドがゲスト由来のものであるかどうかを確認してもよい。   Yet another alternative may include an action based on determining whether the voice command has been received from a guest user rather than a registered user of the media playback system. In some cases, computing device 506 may store a previously created guest profile that may be associated with a particular guest. In yet another case, the computing device 506 may determine that it has not received a voice command from the registered user and may then ask the registered user if the voice command is from a guest .

さらに、音声コマンドをゲストユーザから受信したかどうかを判定することは、メディア再生システムが受信した音声コマンドと関連付けられる信頼性レベルを決定することを含んでいてもよい。上述したように、ユーザ履歴及び位置情報に個別に基づいて、或いはユーザプロファイルで通常確認できる他の任意の情報と組み合わせたものに基づいて、信頼性レベルを決定してもよい。   Further, determining whether a voice command has been received from a guest user may include determining a confidence level associated with the received voice command by the media playback system. As discussed above, the confidence level may be determined based on the user history and location information individually or in combination with any other information that can typically be identified in the user profile.

音声コマンドをゲストユーザから受信したと判定したことに応答して、コンピューティングデバイス506は、(1)ゲストユーザに対して制限設定を割り当て、(2)音声コマンドの内容とそのゲストユーザに対して割り当てた制限設定とに基づいて、1又は複数のPBDに対する指示を構成し、且つ(3)その指示を実行させるために1又は複数のPBDに送信してもよい。いくつかの実施形態では、ゲストユーザに対して制限設定を割り当てることは、コンピューティングデバイス506に格納された特定のゲストプロファイルと音声コマンドとをコンピューティングデバイス506が照合することを含んでいてもよい。   In response to determining that the voice command has been received from the guest user, the computing device 506 (1) assigns restriction settings to the guest user, and (2) the contents of the voice command and the guest user Based on the assigned restriction settings, instructions for one or more PBDs may be configured and (3) transmitted to one or more PBDs to cause the instructions to be performed. In some embodiments, assigning restriction settings to a guest user may include the computing device 506 collating voice commands with a particular guest profile stored on the computing device 506. .

さらに別の例は、異なるユーザから受信した音声コマンドの競合を解決するために、メディア再生システムが優先順位を適用することを含んでいてもよい。競合する音声コマンドはたとえば、あるユーザから受信する曲の再生を命じる音声コマンドと、別のユーザから受信するその曲の再生中止を命じる後続の音声コマンドとであってもよい。あるユーザから受信する1又は複数の再生デバイス(たとえば、PBD532,534,536,538)の音量を上げることを命じる音声コマンド、及び別のユーザから受信する音量を下げることを命じる後続の音声コマンドなど、他の例も可能である。具体的には、メディア再生システムは登録ユーザ又はホストから再生ゾーンでの曲の再生を命じる音声コマンドを受信してもよい。次いで、メディア再生システムは未登録ユーザ又はゲストから再生ゾーンでの曲の再生中止を命じる、競合する音声コマンドを受信する場合がある。この競合を解決するために、メディア再生システムは、登録ユーザから受信した音声コマンドが未登録ユーザ又はゲストから受信した音声コマンドよりも高い優先度を有するような優先順位を適用してもよい。   Yet another example may include the media playback system applying a priority to resolve conflicts of voice commands received from different users. The competing voice commands may be, for example, a voice command instructing playback of a song received from one user and a subsequent voice command instructing suspension of playback of the song received from another user. A voice command instructing to increase the volume of one or more playback devices (for example, PBD 532, 534, 536, 538) received from one user, and a subsequent voice command instructing to decrease the volume received from another user, etc. , Other examples are also possible. Specifically, the media playback system may receive an audio command from the registered user or host instructing the playback of the song in the playback zone. The media playback system may then receive conflicting voice commands from the unregistered user or guest instructing it to stop playing the song in the playback zone. To resolve this conflict, the media playback system may apply a priority such that voice commands received from registered users have higher priority than voice commands received from unregistered users or guests.

ある例では、メディア再生システムは、登録ゲストから受信した音声コマンドが未登録ゲストから受信した音声コマンドよりも高い優先度を有するような優先順位を割り当ててもよい。たとえば、ある登録ゲストから受信した音声コマンドが別の登録ゲストよりも高い優先度を有していてもよい。別の場合には、成人から受信した音声コマンドは子供よりも高い優先度を有していてもよい。   In one example, the media playback system may assign a priority such that voice commands received from registered guests have higher priority than voice commands received from unregistered guests. For example, voice commands received from one registered guest may have a higher priority than another registered guest. In other cases, voice commands received from adults may have higher priority than children.

さらに別の場合には、メディア再生システムによって受信されたコントローラ発行コマンド(たとえば、メディア再生システムを制御するように構成されたCR522又は他のコンピューティングデバイスから受信されるコマンド、或いは場合によってはコンピューティングデバイス506から受信されるコマンド)は登録ユーザよりも低い優先度を有していてもよいが、未登録ユーザ又はゲストよりは高い優先度を有していてもよい。いくつかの実施形態では、一部の登録ゲストはコントローラ発行コマンドよりも高い優先度を有していてもよい。優先順位の決定及び割当てに関する他の例も可能である。   In yet another case, a controller issue command received by the media playback system (e.g., a command received from a CR 522 or other computing device configured to control the media playback system, or in some cases computing) The command received from the device 506 may have lower priority than registered users, but may have higher priority than unregistered users or guests. In some embodiments, some registered guests may have higher priority than controller issue commands. Other examples of priority determination and assignment are also possible.

メディア再生システムに対する指示を構成した後、いくつかの実施形態では、その指示を実行させるためにメディア再生システムの1又は複数のPBDにこれを送信してもよい。いくつかの実施形態では、コンピューティングデバイス506はネットワークマイクロホンシステムに指示を送信してもよい。   After configuring the instructions for the media playback system, in some embodiments, it may be sent to one or more PBDs of the media playback system to cause the instructions to be performed. In some embodiments, computing device 506 may send instructions to a network microphone system.

図15に示す方法1500は、たとえば図1のメディア再生システム100、図2の1又は複数の再生デバイス200、図3の1又は複数の制御デバイス300、図4のユーザインタフェース、及び/又は図5に示す構成を含むか、或いは包含する動作環境内で実行できる方法の実施形態を提示している。方法1500は、ブロック1502〜1506の1又は複数によって示しているように、1又は複数の操作、機能、又はアクションを含んでいてもよい。   The method 1500 shown in FIG. 15 may be, for example, the media playback system 100 of FIG. 1, one or more playback devices 200 of FIG. 2, one or more control devices 300 of FIG. 3, a user interface of FIG. An embodiment of a method that can be implemented within an operating environment including or including the configuration shown in FIG. Method 1500 may include one or more operations, functions, or actions as illustrated by one or more of blocks 1502-1506.

方法1500は、メディア再生システムに対する音声コマンドと関連付けられた起動ワード又は起動フレーズを受信することを含むブロック1502で開始される。上述したように、起動ワード又は起動フレーズは、ユーザプロファイルに格納された特定の言葉又はフレーズ(たとえば、「ねえ、Sonos」)であってもよい。いくつかの実施形態では、メディア再生システムは、登録ユーザの音声コマンドと関連付けられた共通の起動ワード又は起動フレーズ(たとえば、「ねえ、Sonos」)を受信してもよい。付加的に又は代替的に、メディア再生システムは、登録ゲストユーザの音声コマンドと関連付けられた共通の起動ワード又は起動フレーズを受信してもよい。場合によっては、登録ユーザがそれぞれ異なる起動ワード又は起動フレーズを有するように、メディア再生システムを構成してもよい。   Method 1500 begins at block 1502 with receiving an activation word or activation phrase associated with a voice command for a media playback system. As mentioned above, the activation word or activation phrase may be a specific word or phrase (e.g. "Hey Sonos") stored in the user profile. In some embodiments, the media playback system may receive a common activation word or activation phrase (eg, "Hey, Sonos") associated with the registered user's voice command. Additionally or alternatively, the media playback system may receive a common activation word or activation phrase associated with the registered guest user's voice command. In some cases, the media playback system may be configured such that registered users have different activation words or activation phrases.

具体的には、登録ユーザはそれぞれ異なる音声コマンド用に、ユーザ固有の起動ワード又は起動フレーズを有していてもよい。たとえば、メディア再生システムは、再生キューに曲を追加するための起動ワード又は起動フレーズを(たとえば、「ねえSonos、再生キューに曲を追加して」、「おいSonos、キューに曲を追加して」、及び「曲をアルファベット順に」など)受信してもよく、またメディア再生システムの制御を自宅にいるゲストに許可するためのユーザ固有の起動ワード又は起動フレーズ(たとえば、「ねえSonos、アクセスを開いて」、及び「パーティーの時間だよ」など)をそれぞれ受信してもよい。   Specifically, registered users may have user-specific activation words or activation phrases for different voice commands. For example, the media playback system may use an activation word or activation phrase to add a song to the playback queue (eg, "Hey Sonos, add a song to the playback queue," "Hey Sonos, add a song to the queue , And “listen in alphabetical order” etc.), and a user-specific activation word or activation phrase (eg, “Hey Sonos, access to allow the guest at home to control the media playback system” "Open" and "It's Party Time" may be received respectively.

次いで、方法1500は、音声コマンドと関連付けられた起動ワードをメディア再生システムの登録ユーザから受信したかどうかを判定することを含むブロック1504に進む。いくつかの実施形態では、音声コマンドと関連付けられた起動ワードを登録ユーザから受信したかどうかを判定することは、方法1400のブロック1404に記載した、音声コマンドを登録ユーザから受信したかどうかを判定することと同様であってもよい。   The method 1500 then proceeds to block 1504, which includes determining whether an activation word associated with the voice command has been received from a registered user of the media playback system. In some embodiments, determining whether the activation word associated with the voice command has been received from the registered user determines whether the voice command has been received from the registered user as described in block 1404 of the method 1400. It may be the same as doing.

最後に、方法1500は、音声コマンドと関連付けられた起動ワードを登録ユーザから受信したと判定したことに応答して、受信した起動ワードと、音声コマンドの内容と、登録ユーザのユーザプロファイル内の情報とに基づいて、メディア再生システムに対する指示を構成することを含むブロック1506に進む。   Finally, in response to determining that the activation word associated with the voice command has been received from the registered user, the method 1500 receives the received activation word, the content of the voice command, and information in the registered user's user profile. And proceed to block 1506, which comprises configuring an indication to the media playback system.

いくつかの例では、メディア再生システムに対する指示は、登録ユーザ、ゲスト、及び/又は未登録ユーザから受信した起動ワードと関連付けられた追加の音声コマンドを、メディア再生システムが受信するための時間枠又は時間ウィンドウを開放することを命じる指示を含んでいてもよい。たとえば、再生キューに曲を追加するための起動ワードを登録ユーザから受信したと判定したことに応答して、再生キューへの特定の曲の追加を命じる追加の音声コマンド(たとえば、「マイケル・ジャクソンのスリラーを追加して」)を登録ユーザが送信できる時間枠(たとえば、5分)をメディア再生システムが開放してもよい。   In some examples, the indication to the media playback system may be a time frame or other time for the media playback system to receive additional voice commands associated with activation words received from registered users, guests, and / or unregistered users. It may include an instruction instructing to open the time window. For example, an additional voice command (eg, "Michael Jackson") that commands the addition of a particular song to the playback queue in response to determining that an activation word for adding a song to the playback queue has been received from a registered user The media playback system may open a time frame (e.g., 5 minutes) in which the registered user can transmit "with the thriller".

別の例では、メディア再生システムの制御をすべてのゲストに許可するための起動ワードを登録ユーザから受信したと判定したことに応答して、メディア再生システムは、自宅内のすべてのゲストに対して、主として再生キューへの曲の追加、曲の再生、又は音量の変更などを命じる音声コマンドを、ユーザ定義の若しくはデフォルトの時間枠又は時間ウィンドウにおいて送信することを許可するために時間枠(たとえば、1時間)を開放してもよい。   In another example, in response to determining that an activation word has been received from a registered user to allow control of the media playback system to all guests, the media playback system may be configured for all guests at home. A time frame (e.g., to allow transmission of voice commands, such as adding a song to a play queue, playing a song, or changing the volume, etc., in a user-defined or default time frame or window). You may open 1 hour).

次いで、方法1500は、起動ワードを登録ユーザから受信したと判定したことに応答して、受信した起動ワード又は起動フレーズと、音声コマンドの内容と、登録ユーザのユーザプロファイル内の情報とに基づいて、その起動ワードが制限設定と関連付けられているかどうかを判定することを含むブロック1506に進む。   Method 1500 may then, responsive to determining that the activation word has been received from the registered user, based on the received activation word or activation phrase, the content of the voice command, and information in the registered user's user profile. Proceed to block 1506, which includes determining whether the activation word is associated with a restriction setting.

いくつかの例では、メディア再生システムは、登録ユーザ又は登録ゲストユーザのユーザプロファイル内の制限設定に基づいて指示を構成してもよい。登録ユーザから受信した起動ワードは、特定のゲスト用の制限設定と関連付けられていてもよい。たとえば、登録ユーザ又はホストは、再生ゾーンの1又は複数のPBD532,534,536,538、及び/又はコンピューティングデバイス506を制御することを命じる追加の音声コマンドの送信を、ある時間枠又は時間ウィンドウにおいて登録ゲストに許可する音声コマンド(たとえば、「ねえSonos、リビングの管理者を許可されたゲストに限定して」)を送信してもよく、その一方で未登録ゲストによる追加の音声コマンドの送信を禁止していてもよい。別の場合には、受信した起動ワードは子供用の制限設定と関連付けられていてもよい。上記と類似しているが異なる、他の多くの例が可能であり、これらは本明細書の他の箇所に記載した例を含むが、それらに限定されるものではない。   In some examples, the media playback system may configure the indication based on the restriction settings in the registered user or registered guest user's user profile. The activation word received from the registered user may be associated with a specific guest restriction setting. For example, the registered user or host may send one or more PBDs 532, 534, 536, 538 in the playback zone and / or additional voice commands to control the computing device 506 for a time frame or time window. Voice commands to allow registered guests at (for example, "Sorry, Sonos, restrict the living administrator to allowed guests") may be sent, while sending additional voice commands by unregistered guests May be prohibited. In other cases, the received activation word may be associated with a child restriction setting. Many other examples similar to but different from the above are possible, including but not limited to the examples described elsewhere herein.

さらに別の例では、登録ユーザから受信した起動ワードは、特定のゲストがある時間枠又は時間ウィンドウにおいて、メディア再生システムを限定的に制御することを許可する制限設定と関連付けられていてもよい。参照によりその全体を本明細書に引用している、「ゲストアクセスによってクラウドソースのプレイリストを提供するための製造者のシステム、方法、装置、及び製品(Systems, Methods, Apparatus, and Articles of Manufacture to Provide a Crowd−Sourced Playlist with Guest Access)」と題する米国特許出願公開第2013/0346859号明細書において、メディア再生システムの限定的な制御に関するいくつかの例がより詳細に提供されている。   In yet another example, the activation word received from the registered user may be associated with a restriction setting that allows a particular guest to have limited control over the media playback system in a certain time frame or time window. "Manufacturer's System, Method, Apparatus, and Products for Providing Crowdsource Playlists by Guest Access (Systems, Methods, Apparatus, and Articles of Manufacture, which is incorporated herein by reference in its entirety) In U.S. Patent Application Publication No. 2013/0346859, entitled "Provide to Crowd-Sourced Playlist with Guest Access," several examples of limited control of media playback systems are provided in more detail.

起動ワード又は起動フレーズをゲストユーザから受信したと判定したことに応答して、メディア再生システムは、(i)ゲストユーザと関連付けられた制限設定があるかどうかを判定し、(ii)起動ワード又は起動フレーズと、そのゲストユーザに対して割り当てた制限設定とに基づいて、1又は複数のPBDに対する指示を構成し、且つ(iii)その指示を実行させるために1又は複数のPBDに送信してもよい(たとえば、これによって、起動ワードコマンドと関連付けられた追加の音声コマンドを受信するための時間枠若しくは時間ウィンドウを開放する)。   In response to determining that the activation word or activation phrase has been received from the guest user, the media playback system determines (i) whether there is a restriction setting associated with the guest user, (ii) the activation word or Based on the activation phrase and the restriction settings assigned to the guest user, configure instructions for one or more PBDs, and (iii) send to one or more PBDs to execute the instructions. (E.g., this opens up a time frame or window for receiving additional voice commands associated with the activation word command).

いくつかの例では、メディア再生システムは1又は複数のPBD532,534,536,538、及び/又はコンピューティングデバイス506を介して、登録ゲストユーザから起動ワード又は起動フレーズを受信したことに基づいて作動することを控えてもよく、この例としては、メディア再生システムが登録ユーザ又はホストから起動ワード若しくは起動フレーズを含む音声コマンドを既に受信していたり、追加のコマンドを受信するための時間枠又は時間ウィンドウの有効期限が終了していなかったりする場合が挙げられる。   In some examples, the media playback system operates based on receipt of an activation word or activation phrase from a registered guest user via one or more PBDs 532, 534, 536, 538 and / or computing devices 506. In this example, the time period or time for the media playback system to have already received a voice command including the activation word or activation phrase from the registered user or host, or to receive an additional command. There are cases where the window has not expired.

メディア再生システムに対する指示を構成した後、いくつかの例は、その指示を実行させるためにコマンドをメディア再生システムの1又は複数のPBDに送信することを含んでいてもよい。いくつかの例では、コンピューティングデバイス506は、コマンド又はコマンド一式をメディア再生システムの1又は複数のPBDに送信してもよい。   After configuring the instructions for the media playback system, some examples may include sending a command to one or more PBDs of the media playback system to cause the instructions to be performed. In some examples, computing device 506 may send a command or set of commands to one or more PBDs of the media playback system.

場合によっては、メディア再生システムに実行を命じる指示を構成した後、登録ユーザ又はホストは、その指示と関連付けられた追加の音声コマンドを受信するための時間枠又は時間ウィンドウを閉じるか、或いは解除してもよい。たとえば、登録ユーザ又はホストが、追加の音声コマンドを受信するための時間枠又は時間ウィンドウを1時間開放する起動ワード又は起動フレーズを用いて音声コマンドを送信した場合、その登録ユーザ又はホストは、1時間の時間枠が終了する前に、その1時間の時間枠又は時間ウィンドウを解除することを命じる別の音声コマンド(たとえば、「ねえSonos、キューへの曲の追加は完了だよ」)を送信してもよい。上記と類似しているが異なる、他の多くの例が可能である。   In some cases, after configuring an indication instructing the media playback system to perform, the registered user or host closes or releases the time frame or window for receiving additional voice commands associated with the indication. May be For example, if the registered user or host sends a voice command using an activation word or activation phrase that opens a time window or window for receiving an additional voice command for one hour, the registered user or host may Send another voice command (for example, "Hey Sonos, the addition of songs to the queue is complete") to command that one hour window or window be released before the time window is over You may Many other examples similar to but different from the above are possible.

さらに別の例は、メディア再生システムが、登録ゲストユーザから起動ワード又は起動フレーズを受信したことに基づいて作動し、次いでメディア再生デバイスが登録ユーザ又はホストから音声コマンドを受信した場合に、追加の音声コマンドを受信するための時間枠又は時間ウィンドウをその後閉じるか、或いは解除することを含んでいてもよい。いくつかの実施形態では、登録ゲストは、時間枠又は時間ウィンドウの有効期限が終了する前にこれを閉じるか、或いは解除してもよい。他の実施形態では、登録ゲストが子供である場合、時間枠又は時間ウィンドウの有効期限が終了する前に成人がこれを閉じるか、或いは解除してもよい。上記と類似しているが異なる、他の多くの例が可能である。   Yet another example is that the media playback system is activated based on receipt of the activation word or activation phrase from the registered guest user, and then the media reproduction device receives an additional voice command from the registered user or host. It may then include closing or releasing the time frame or window for receiving the voice command. In some embodiments, the registered guest may close or cancel before the expiration of the time frame or time window expires. In another embodiment, if the registered guest is a child, the adult may close or cancel it before the time frame or time window expires. Many other examples similar to but different from the above are possible.

VI.音楽配信サービスの選択のための例示的なシステム、装置、及び方法
本明細書に記載の例は、コマンドに基づいて適切なストリーミングサービス(たとえば、オーディオトラックをストリーミングする)を識別し、且つこれにアクセスすることに関する。
VI. Exemplary Systems, Devices, and Methods for Selection of Music Delivery Service The example described herein identifies an appropriate streaming service (eg, streaming audio tracks) based on a command, and On accessing.

図16及び図17に示す方法1600並びに1700は、たとえば図1のメディア再生システム100、図2の再生デバイス200の1又は複数、及び図3の制御デバイス300の1又は複数を含む動作環境内で実行できる方法の実施形態を提示している。方法1600及び1700は、ブロック1602〜1614及び1702〜1708の1又は複数によって示しているように、1又は複数の操作、機能、又はアクションを含んでいてもよい。   The methods 1600 and 1700 illustrated in FIGS. 16 and 17 may be implemented, for example, in an operating environment including the media playback system 100 of FIG. 1, one or more of the playback devices 200 of FIG. 2, and one or more of the control devices 300 of FIG. An embodiment of a method that can be performed is presented. Methods 1600 and 1700 may include one or more operations, functions, or actions as illustrated by one or more of blocks 1602-1614 and 1702-1708.

図16は、ストリーミング向けの音楽サービスを識別するプロセスに関する例示的なフロー図である。ブロック1602において、NMD512〜516又はCR522は、ストリーミングサービスから再生するためのオーディオコンテンツを提供するように指示するコマンドの通知を受信してもよい。場合によっては、NMD512〜516によって受信されるコマンドは音声コマンドの形式をとっていてもよく、その一方で、CR522によって受信されるコマンドはユーザインタフェース上のテキストコマンド入力であってもよい。   FIG. 16 is an exemplary flow diagram of a process for identifying a music service for streaming. At block 1602, the NMDs 512-516 or CR 522 may receive notification of a command instructing to provide audio content for playback from the streaming service. In some cases, the commands received by the NMDs 512-516 may be in the form of voice commands, while the commands received by the CR 522 may be text command input on the user interface.

受信されるコマンドは、通常、1又は複数のオーディオコンテンツのタイプに関する情報を含んでいてもよい。場合によっては、コマンドはアーティスト名、曲名、アルバム名、又はジャンル名を含んでいてもよい(すなわち「レッド・ツェッペリンの曲を再生して(play Led Zeppelin)」、「70年代ロックを再生して」など)。また、コマンドは、コンテンツタイプをさらに詳細に示す接頭辞及び/又は接尾辞タイプの情報(たとえば、「ベストオブ...」、「...ラジオ」、及び「...プレイリスト」など)を含んでいてもよい。たとえば、「レッド・ツェッペリンの曲をラジオで再生して(play Led Zeppelin radio)」というコマンドは、特定のアーティストの曲をラジオ形式で聴取したいというユーザの願望を示していてもよい。受信されるコマンドは、コンテンツタイプを示す他の様々な形態の情報も含んでいてもよい。   The commands received may typically include information regarding the type of one or more audio content. In some cases, the command may include an artist name, a song name, an album name, or a genre name (ie "play Led Zeppelin", "play 70's rock" "Such). Also, the command may be prefix and / or suffix type information indicating the content type in more detail (e.g. "best of ...", "... radio", and "... playlist") May be included. For example, the command "Play Led Zeppelin radio" may indicate the user's desire to listen to a particular artist's song in radio format. The received command may also include various other forms of information indicating the content type.

ブロック1602で受信したコマンドに関する通知を様々な方法で処理してもよい。1つの実装形態では、コマンドの処理をクラウドネットワーク502を介して遂行してもよい。このような場合、NMD512〜516によって受信された音声コマンドは、音声入力を処理するために通信ネットワーク546を介してこれをコンピューティングデバイス504〜508の1又は複数に送信させてもよい。クラウドコンピューティングデバイスは音声入力を同等のテキストコマンドに変換し、このテキストコマンドを解析してコマンドを識別してもよい。別の構成では、クラウドコンピューティングデバイスは音声入力を同等のテキスト形式に変換することのみを行い、構文解析及びコマンド識別のために、その同等のテキストを第2のコンピューティングデバイスに送信してもよい。他の場合には、NMD512〜516は、通信ネットワーク546を介して音声入力を送信する前にこれをテキストに変換するか、又は音声入力のテキスト変換と、コマンド識別のための構文解析の実行とを両方行ってもよい。CR522がテキストコマンドを受信した場合、構文解析及びコマンド識別のために、通信ネットワーク546を介してテキスト入力をコンピューティングデバイス504〜508の1つに送信してもよい。別の場合には、CR522がテキスト入力の構文解析を実行して、コマンドを識別してもよい。   Notifications regarding commands received at block 1602 may be processed in various manners. In one implementation, processing of commands may be performed via the cloud network 502. In such a case, voice commands received by the NMDs 512-516 may be sent via the communication network 546 to one or more of the computing devices 504-508 to process voice input. The cloud computing device may translate speech input into equivalent text commands and parse the text commands to identify the commands. In another configuration, the cloud computing device only translates the speech input into an equivalent text format, and sends the equivalent text to a second computing device for parsing and command identification. Good. In other cases, the NMDs 512 to 516 convert the speech input into text before sending it through the communication network 546, or convert the speech input into text and execute parsing for command identification. You may do both. When CR 522 receives a text command, text input may be sent to one of computing devices 504-508 via communication network 546 for parsing and command identification. In other cases, CR 522 may perform parsing of the text input to identify the command.

別の実装形態では、コマンドの処理をローカルネットワークを介してローカルに遂行してもよい。このような場合、NMD512〜516によって受信された音声コマンドは、音声入力を処理するためにローカルネットワークを介してこれを1又は複数のローカルコンピューティングデバイスに送信させてもよい。ローカルコンピューティングデバイスは音声入力を同等のテキストコマンドに変換し、そのテキストコマンドを解析してコマンドを識別してもよい。別の構成では、ローカルコンピューティングデバイスは音声入力を同等のテキスト形式に変換することのみを行い、構文解析及びコマンド識別のために、その同等のテキスト形式を第2のローカルコンピューティングデバイスに送信してもよい。他の場合には、NMD512〜16は、ローカルネットワークを介して音声入力を送信する前にこれをテキストに変換するか、又は音声入力のテキスト変換と、コマンド識別のための構文解析の実行とを両方行ってもよい。CR522がテキストコマンドを受信した場合、構文解析及びコマンド識別のために、ローカルネットワークを介してテキスト入力をローカルコンピューティングデバイスに送信してもよい。別の場合には、CR522がテキスト入力の構文解析を実行して、コマンドを識別してもよい。コマンドを処理するための他の構成があってもよい。   In another implementation, processing of commands may be performed locally via a local network. In such cases, voice commands received by the NMDs 512-516 may cause them to be sent over the local network to one or more local computing devices to process voice input. The local computing device may translate speech input into equivalent text commands and parse the text commands to identify the commands. In another configuration, the local computing device only converts speech input into an equivalent text form, and sends the equivalent text form to a second local computing device for parsing and command identification. May be In other cases, the NMDs 512-16 either convert the speech input into text before sending it over the local network, or convert the speech input into text and perform parsing for command identification. Both may be done. If the CR 522 receives a text command, text input may be sent to the local computing device via the local network for parsing and command identification. In other cases, CR 522 may perform parsing of the text input to identify the command. There may be other configurations for processing commands.

ブロック1604において、コンピューティングデバイスはコマンドによって指定されるコンテンツタイプを識別してもよい。クラウドネットワーク502又はローカルネットワークを介してローカルに、コンテンツタイプの識別を遂行してもよい。   At block 1604, the computing device may identify the content type specified by the command. Content type identification may be performed locally via the cloud network 502 or a local network.

1つの実装形態では、コンピューティングデバイスはコンテンツタイプのロジックを使用して、コマンド又はコマンドの一部をコンテンツタイプと関連付けてもよい。前述の「レッド・ツェッペリンの曲をラジオで再生して」の例を使用した場合、コンピューティングデバイスはそのコンテンツタイプを「アーティスト又はラジオ局」として識別してもよい。別の例では、「エレクトロニック・ダンス・ミュージックの曲を再生して(Play Electronic Dance Music)」というコマンドによって、そのコンテンツタイプが「ジャンル」として識別されてもよい。他の様々なコンテンツタイプに対しても同様の識別を行うことができる。たとえば「ダンスミュージック」などのコマンド内のキーワードを入力することによってコンテンツタイプの識別を遂行してもよく、またデータベースは、ジャンルなどのコンテンツタイプに関する通知にそのキーワードをマッピングしてもよい。いくつかの例では、データベースはコンピューティングデバイス又はネットワークマイクロホンデバイス上にあってもよい。   In one implementation, the computing device may use content type logic to associate a command or portion of a command with the content type. Using the example of “Playing Red Zeppelin on Radio” above, the computing device may identify its content type as “artist or radio station”. In another example, the content type may be identified as a "genre" by the command "Play Electronic Dance Music". Similar identifications can be made for various other content types. For example, identification of content types may be accomplished by entering keywords in commands such as "dance music", or the database may map the keywords to notifications regarding content types such as genres. In some examples, the database may be on a computing device or a network microphone device.

ブロック1608においていずれのコンテンツタイプも識別されていないと判定した場合、本方法は直ちにブロック1614に進んでもよい。ユーザの入力エラー、不十分な音声入力品質、背景雑音、或いは単にそのようなコンテンツタイプを確認できないなどのいくつかの理由から、コンテンツタイプを識別できない場合がある。たとえば、不明瞭なアーティスト名を示すコマンドのコンテンツタイプは識別できない可能性がある。   If it is determined at block 1608 that no content type has been identified, the method may immediately proceed to block 1614. Content types may not be identified for several reasons, such as user input errors, poor voice input quality, background noise, or simply not being able to identify such content types. For example, the content type of a command indicating an obscure artist name may not be identifiable.

ブロック1614において、コンピューティングデバイスによって「このコンテンツは利用できない」と示す通知を出力し、且つこれを通信ネットワーク546を介してNMD512〜516、PBD532〜538、又はCR522のいずれか又はすべてに送信してもよい。利用可能なコンテンツがないという通知を、その後ユーザに聴覚的又は視覚的に提示してもよい。たとえば、NMD及びPBDは可聴通知を出力してもよく、その一方で、CRが可聴通知及び視覚通知の両方を出力できるようにしてもよい。付加的に又は代替的に、この通知の送信によってユーザにコマンドを再入力するように促す提案を出力させてもよい。たとえば、この提案は、コンテンツタイプの識別を補助するために、ユーザにいくつかの追加の識別特性を指定させるものであってもよい。   At block 1614, the computing device outputs a notification indicating "this content is not available" and sends it via communication network 546 to any or all of NMD 512-516, PBD 532-538, or CR 522. It is also good. A notification that there is no content available may then be presented to the user aurally or visually. For example, the NMD and PBD may output an audible notification, while enabling the CR to output both audible and visual notifications. Additionally or alternatively, sending this notification may cause the user to output a suggestion to re-enter the command. For example, the proposal may allow the user to specify some additional identifying characteristics to aid in the identification of the content type.

しかしながら、ブロック1606においてコンテンツタイプが識別されたと判定した場合、本方法はブロック1608に進み、ブロック1604で識別されたコンテンツタイプを再生することができるストリーミングサービスを識別してもよい。一般に、個々のストリーミングサービスは、提供するオーディオコンテンツのみならずコンテンツの表示方法に至るまで、他のストリーミングサービスと大きく異なる可能性がある。たとえば、各ストリーミングサービスは、特定のアーティスト又はアルバムの音楽コンテンツをストリーミングするための比較的独占的な権利を有することができる。別の場合には、Pandora(登録商標)などのいくつかのストリーミングサービスがラジオ局形式でしかストリーミング配信できない一方で、Spotify(登録商標)などの他のサービスは、アーティスト、曲、アルバム、又はラジオ局によるオンデマンドの音楽ストリーミング配信が可能である場合がある。この事実に鑑みて、704で識別されたコンテンツタイプをすべてのストリーミングサービスがストリーミング配信できるわけではないことが明らかである。   However, if it is determined at block 1606 that the content type has been identified, then the method may proceed to block 1608 and identify a streaming service capable of playing the content type identified at block 1604. In general, individual streaming services can differ significantly from other streaming services, ranging from the presentation of audio content as well as the presentation of the content. For example, each streaming service may have a relatively exclusive right to stream music content of a particular artist or album. In other cases, while some streaming services such as Pandora® can only stream in the form of radio stations, other services such as Spotify® can be artists, songs, albums, or radios. On-demand music streaming delivery by stations may be possible. In light of this fact, it is clear that not all streaming services can stream the content type identified at 704.

たとえば、コンピューティングデバイスは、利用可能なコンテンツのエントリ、及び各種ストリーミングサービス用に提供する際のそのコンテンツの対応形式を含み得るルックアップテーブルと、識別されたコンテンツタイプのメタデータとを比較することにより、適切なストリーミングサービスを識別してもよい。場合によっては、コンピューティングデバイスは、利用可能なストリーミングサービス全体にクエリを送信してもよい。他の場合には、コンピューティングデバイスは、利用可能なストリーミングサービスのサブセットのみをクエリしてもよい。そのようなサブセットを、ユーザが登録しているストリーミングサービス、ユーザが最後にストリーミングサービスを使用してからの日数、ストリーミングサービスの注目度、及びユーザ設定など含むいくつかの要因それぞれのみに基づいて、或いはこれらを組み合わせたものに基づいて、コンピューティングデバイスによって選択してもよい。たとえば、ユーザがPandora(登録商標)、Spotify(登録商標)、及びDeezer(登録商標)のみに登録している場合、コンピューティングデバイスはこれらのストリーミングサービスのみをクエリして、適切なサービスを決定してもよい。   For example, the computing device may compare the metadata of the identified content type with a look-up table which may include entries of available content and the corresponding form of that content as provided for various streaming services. May identify an appropriate streaming service. In some cases, the computing device may send queries across available streaming services. In other cases, the computing device may query only a subset of available streaming services. Such subsets are based solely on each of several factors, including the streaming service that the user has registered, the number of days since the user last used the streaming service, the attention level of the streaming service, and user preferences. Alternatively, it may be selected by the computing device based on a combination of these. For example, if the user is only registered with Pandora (R), Spotify (R), and Deezer (R), the computing device queries only these streaming services to determine the appropriate service. May be

このようなルックアップテーブルをコンピューティングデバイスのメモリに、又はコンピューティングデバイスや音楽サービス上などの外部の場所に格納してもよい。様々なルックアップテーブルが各種音楽サービスの間に配布され得る場合、コンピューティングデバイスは適合するサービスを検出するために、各音楽サービスを同時に又は順次クエリしてもよい。適切なストリーミングサービスを識別する他の方法が可能である。   Such look-up tables may be stored in memory of the computing device, or in an external location such as on a computing device or music service. If various look-up tables may be distributed between the various music services, the computing device may query each music service simultaneously or sequentially to detect matching services. Other ways of identifying the appropriate streaming service are possible.

1つの実装形態では、ブロック1608においてストリーミングサービスを識別することは、ユーザが登録しているストリーミングサービスにおいて現在利用可能な再生容量を決定することをさらに含んでいてもよい。一般に、いくつかのストリーミングサービスは、任意の所与の時間に登録アカウントで利用可能となるアクティブなストリームの数を制限している可能性がある。たとえば、Spotify(登録商標)は登録アカウントごとに1つのアクティブなストリームのみを許可し得る。たとえば、コンピューティングデバイスは、ユーザが登録しているサービスに使用状況(すなわち、アクティブなストリームがいくつあるか)をクエリし、次いでその使用状況を制限データ容量と比較することによって(すなわち、Spotifyは1つのアクティブなストリームのみ)、現在利用可能な再生容量を決定してもよい。別の例では、クエリに応答してストリームが利用可能かどうかを示すために、ストリーミングサービスはバイナリ値を出力してもよい。利用可能な再生容量を他の方法で決定してもよい。   In one implementation, identifying the streaming service at block 1608 may further include determining currently available playback capacity at the streaming service that the user is registering. In general, some streaming services may limit the number of active streams available to a registered account at any given time. For example, Spotify® may only allow one active stream per registered account. For example, the computing device can query the service the user is registering for (i.e. how many active streams there are) and then compare that usage to the limited data capacity (i.e. Spotify Only one active stream may determine the currently available playback capacity. In another example, the streaming service may output binary values to indicate whether a stream is available in response to a query. The available regeneration capacity may be determined in other ways.

本実装形態では、コンピューティングデバイスはブロック1608において、コマンドによって指定されたコンテンツタイプをサポートしているものとして登録中のサービスを識別し、さらにその登録中のサービスには利用可能なストリームが存在しないと判定してもよい。たとえば、あるユーザとその配偶者双方がSpotify(登録商標)のアカウントを共有しており、ジムにいる配偶者のスマートフォンデバイスに音楽がストリーミング配信されている場合において、そのユーザが「アイ・オブ・ザ・タイガーを再生して(Play Eye of the Tiger)」というコマンドを発するとき、コンピューティングデバイスは、その曲を再生できるものとしてSpotify(登録商標)を識別し、同時にストリームが利用不可能であると判定してもよい。このような場合、コンピューティングデバイスにそのコンテンツタイプをサポートすることができる、Apple Music(登録商標)などの別のストリーミングサービスを識別させてもよい。   In this implementation, the computing device identifies at block 1608 the service being registered as supporting the content type specified by the command, and there is no available stream for the service being registered. It may be determined that For example, if a user and his / her spouse both share a Spotify® account, and the music is being streamed to the spouse's smartphone device in the gym, the user sees “eye of When issuing the command "Play Eye of the Tiger", the computing device identifies Spotify® as capable of playing the song and at the same time the stream is unavailable. It may be determined that In such a case, the computing device may be made to identify another streaming service, such as Apple Music®, that can support the content type.

別の場合には、コンピューティングデバイスが、そのコンテンツタイプをサポートすることができる別のストリーミングサービスを識別できないことがある。これは、たとえばユーザが1つのストリーミングサービスによって独占的に提供されるコンテンツを要求したときに、コンピューティングデバイスがストリーミングサービスのサブセットのみを考慮する場合などに主として起こり得る。このような場合、コンピューティングデバイスは、そのコマンドに対応するコンテンツを提供するにあたり使用するべく、現在アクティブなストリームを「盗用する」ようにする可能性がある。前述の例を使用すると、他のいずれのストリーミングサービスも「アイ・オブ・ザ・タイガー」をサポートできない場合、ジムにいる配偶者へのストリーム配信をキャンセルして、これをユーザ自身に提供することができる。   In other cases, the computing device may not be able to identify another streaming service that can support that content type. This can occur primarily if, for example, the computing device considers only a subset of the streaming service, such as when a user requests content provided exclusively by one streaming service. In such a case, the computing device may be made to "stole" the currently active stream for use in providing content corresponding to the command. Using the example above, if none of the other streaming services can support "eye of the tiger", then cancel streaming to the spouse at Jim and provide it to yourself. Can.

たとえば、ブロック1610において識別されたコンテンツタイプをサポートできるものとしてある利用可能なストリーミングサービスが識別された場合、本プロセスはブロック1612に進み、PBD532〜538における任意の組み合わせにオーディオコンテンツを再生させてもよい。当該音楽サービスに対しては、たとえばサービスAPIにコンテンツをクエリし、且つそのコンテンツをストリーミングすることによってアクセスしてもよい。PBD532〜538又はコンピューティングデバイス504〜506のいずれかからの要求に応じて、コンピューティングデバイス508から直接、或いは音楽ストリーミングサービスと関連付けられた他の各種コンピューティングデバイスからPBD532〜538に対して直接、オーディオコンテンツをストリーミングしてもよい。ストリーミングメディアコンテンツの再生を開始し、且つこれをもたらす他の方法も存在する。   For example, if an available streaming service is identified as being able to support the content type identified in block 1610, the process may proceed to block 1612 to play audio content in any combination in PBDs 532-538. Good. The music service may be accessed by, for example, querying the service API for content and streaming the content. Directly from computing device 508, or from various other computing devices associated with the music streaming service, to PBD 532-538, as requested by either PBD 532-538 or computing devices 504-506, Audio content may be streamed. There are other ways to initiate and bring about the playback of streaming media content.

別の場合には、ブロック710において識別されたストリーミングサービスが現在利用可能でない場合(すなわち、アプリケーションがインストールされておらず、ユーザが登録されていない)、コンピューティングデバイスは714で、音楽サービスを使用可能にする一連の行動を提案することに関して、通知の出力を行ってもよい。NMD512〜516、PBD532〜538、又はCR522の任意の組み合わせにこの通知を送信してもよく、また、これによって当該コンテンツタイプをサポートできる識別された音楽サービスを示すような聴覚的及び/又は視覚的提案を行ってもよく、及び/又はその音楽サービスへの登録方法、ダウンロード方法、或いはその利用方法などに関する指示を提示してもよい。   In another case, if the streaming service identified in block 710 is not currently available (ie, the application is not installed and the user is not registered), the computing device uses the music service at 714 A notification may be output regarding proposing a series of actions to enable. This notification may be sent to any combination of NMD 512-516, PBD 532-538, or CR 522, and this may be audible and / or visual as indicating an identified music service that can support the content type in question. A suggestion may be made and / or instructions regarding how to register for the music service, how to download, or how to use it may be presented.

図17は、図16のブロック1610及び1612における音楽ストリーミングサービスを識別するための例示的なプロセスに関する別の例示的なフロー図である。ブロック1702において、コンピューティングデバイスは、コマンドによって識別されたコンテンツタイプに少なくとも一部基づいて、ストリーミングサービスに対して信頼性メトリック又はメトリクスを決定させてもよい。一般に、信頼性メトリックは、ストリーミングサービス又は複数のストリーミングサービスに対して算出される数値又はパーセント値(たとえば1〜100)であり得る。このような信頼性メトリックは、ストリーミングオーディオを提供する特定の音楽サービスを選択することが、ユーザに所望のコンテンツを提供する結果をもたらす可能性を反映し得る。たとえば、数値が高くなるほどより高い信頼性レベルの適合性を示している場合、「80」の信頼性メトリックを割り当てられたストリーミングサービスは、信頼性メトリックが「45」のストリーミングサービスよりもコンテンツの提供に適している可能性がある。   FIG. 17 is another example flow diagram of an example process for identifying the music streaming service at blocks 1610 and 1612 of FIG. At block 1702, the computing device may cause the streaming service to determine a credibility metric or metrics based at least in part on the content type identified by the command. In general, the reliability metric may be a numeric value or percentage value (eg, 1-100) calculated for the streaming service or multiple streaming services. Such reliability metrics may reflect the possibility that selecting a particular music service to provide streaming audio results in providing the user with the desired content. For example, if higher numbers indicate higher confidence level conformance, then streaming services assigned an "80" reliability metric will provide more content than streaming services with a "45" reliability metric. May be suitable for

ストリーミングサービスに対して算出される信頼性メトリックは、コンテンツタイプ、再生容量、使用履歴、外部データなどのいくつかの基準に基づいていてもよい。このような基準を様々なデータ型によって構成していてもよく、且つこれをNMD、CR、PBD、コンピューティングデバイス、音楽サービス、及び外部の各種ソースなどの様々なソースから取得してもよい。このデータを集約して、コンピューティングデバイス504又は506と関連付けられたデータベースなどの中央の場所に、又は分散する形式で格納してもよい。   The reliability metric calculated for the streaming service may be based on several criteria such as content type, playback capacity, usage history, external data and so on. Such criteria may be configured by various data types and may be obtained from various sources such as NMD, CR, PBD, computing devices, music services, and various external sources. This data may be aggregated and stored at a central location, such as a database associated with computing device 504 or 506, or in a distributed fashion.

たとえば、信頼性メトリックにおいて、コマンドによって指定されるコンテンツタイプをサポートするストリーミングサービスの適合性を考慮してもよい。コンテンツタイプを提供する各種ストリーミングサービスの適合性を決定することは、識別されたコンテンツタイプに関連するメタデータをルックアップテーブルにマッピングすること、又は各種音楽サービスのテーブルをクエリすること、一致するフィールド数に値を割り当てることを含んでいてもよい。1つの例として、「ジャクソン5のプレイリストを再生する(play Jackson 5 playlist)」ことを指定するコマンドは、「アーティスト又はプレイリスト」というコンテンツタイプを有していてもよい。このような場合、Pandora(登録商標)及びSpotify(登録商標)などの2つのストリーミングサービスにおけるルックアップテーブルは、双方がアーティストフィールドにおいてジャクソン5への参照を含んでいる可能性がある。ただし、Pandora(登録商標)はそのコンテンツタイプのプレイリストをサポートしていないため、Spotify(登録商標)のみがJackson5を識別するプレイリストフィールドを含んでいる可能性がある。そのような場合、Pandora(登録商標)にはコンテンツタイプ値「2」が与えられ、Spotify(登録商標)には値「1」が与えられる。   For example, the reliability metric may consider the suitability of streaming services that support the content type specified by the command. Determining the suitability of the various streaming services providing the content type, mapping metadata associated with the identified content type to a lookup table, or querying a table of various music services, matching fields It may include assigning values to numbers. As one example, the command specifying "play Jackson 5 playlist" may have a content type of "artist or playlist". In such a case, look-up tables in two streaming services such as Pandora® and Spotify® may both contain a reference to Jackson 5 in the artist field. However, because Pandora® does not support playlists of that content type, only Spotify® may include a playlist field that identifies Jackson 5. In such case, Pandora® is given a content type value of “2” and Spotify® is given a value of “1”.

付加的に、又は代替的に、フィールドマッチングの強度を採用してもよい。前述の例を使用して、Spotify(登録商標)のサービスがジャクソン5に対応するアーティストフィールドを含まないが、音楽メタデータを利用してコンピューティングデバイスによってジャクソン5の元メンバーであると識別され得るマイケル・ジャクソンのアーティストエントリを有していると仮定する。このような場合、Spotify(登録商標)のサービスのアーティストフィールドに0の値が与えられるのではなく、このサービスには1未満の調整値が与えられてもよい。ストリーミングサービスのコンテンツタイプの適合性値を決定する上で、他の形態も可能である。   Additionally or alternatively, the strength of field matching may be employed. Using the previous example, the Spotify® service does not include the artist field corresponding to Jackson 5 but may be identified as a former member of Jackson 5 by the computing device using music metadata Assume that you have Michael Jackson's artist entry. In such a case, instead of being given a value of 0 in the artist field of the Spotify® service, this service may be given an adjustment value of less than one. Other forms are also possible in determining the content type suitability value of the streaming service.

別の場合には、様々な形態の使用履歴データの一部において信頼性メトリックを算出してもよい。様々な履歴データ型をNMD、CR、PBD、コンピューティングデバイス、音楽サービス、及び外部の各種ソースなどの様々なソースから取得してもよい。このデータを集約して、コンピューティングデバイス504又は506と関連付けられたデータベースなどの中央の場所に、又は分散する形式で格納してもよい。   In other cases, reliability metrics may be calculated on portions of various forms of usage history data. Various historical data types may be obtained from various sources such as NMD, CR, PBD, computing devices, music services, and various external sources. This data may be aggregated and stored at a central location, such as a database associated with computing device 504 or 506, or in a distributed fashion.

たとえば、使用状況データは、ユーザが所与のストリーミングサービスにアクセスする頻度を示している可能性がある。別の例として、使用状況データは、1日のうちで何時間、1週間のうちで何日間、且つ1年のうちで何カ月間にわたって通常そのサービスをユーザが使用しているかを識別するための時間ベースのデータを含んでいてもよい。たとえば、ユーザは午前中にiHeartRadio(登録商標)を聴取し、夜になるとTidal(登録商標)を聴取することを好む場合がある。別の例として、このような使用状況データは、マルチゾーン環境においてゾーンごとにストリーミングサービスに関するユーザ嗜好性を示している場合がある。たとえば、ユーザが浴室ゾーンで90%の確率でSpotify(登録商標)にアクセスし、リビングエリアのゾーンで80%の確率でDeezer(登録商標)にアクセスしている場合、Spotify(登録商標)とDeezer(登録商標)とに対応する信頼性メトリックは、ユーザがどのゾーンでオーディオをストリーミングしようとしているかに依存して、大きく異なる可能性がある。このような場合、ユーザが浴室で音楽を聴取することを望む場合、Spotify(登録商標)がはるかに良い選択肢となり得る。他の様々なタイプの使用履歴データも同様に存在し得る。   For example, usage data may indicate how often a user accesses a given streaming service. As another example, the usage data may be used to identify how many hours of a day, days of a week, and months of a year to which the user is typically using the service. It may contain base data. For example, a user may prefer to listen to iHeartRadio® in the morning and to listen to Tidal® at night. As another example, such usage data may indicate user preference for streaming services on a zone-by-zone basis in a multi-zone environment. For example, if a user accesses Spotify® in the bathroom zone with 90% probability and accesses Deezer® in the living area zone with 80% probability, then Spotify® and Deezer will be accessed. The reliability metrics corresponding to (registered trademark) may differ significantly depending on which zone the user is trying to stream audio. In such a case, Spotify® may be a much better option if the user wants to listen to music in the bathroom. Various other types of usage history data may be present as well.

また、「外部の」各種データ型に基づいて、一部信頼性メトリックを決定してもよい。このようなデータは、地理的な位置、人口統計データなどを主として取り入れることができるマクロタイプのデータを含んでいてもよい。たとえば、そのようなマクロデータは、世界中で一部の地域又はある国の地域で特定のストリーミングサービスが利用可能でなく、且つ不評であることを示す場合があり、これにより、信頼性メトリックが低下する可能性がある。そのような場合、そのストリーミングサービスの信頼性メトリックは地理的な位置に依存して変化する可能性がある。「外部」データの型にはさらに気象データが含まれていてもよく、これにより、たとえば涼しく乾燥した夏の晩にパティオでSpotify(登録商標)を聴取するなど、あるユーザ嗜好性を取り入れることができる。さらに、休日や、このような特定の日に通常ストリーミング配信される音楽サービスを識別するものとして、カレンダデータを考慮に入れてもよい。他の形式の外部データも存在し得る。   Also, some reliability metrics may be determined based on various "external" data types. Such data may include macro-type data that can mainly incorporate geographic location, demographic data, and the like. For example, such macro data may indicate that certain streaming services are not available and unpopular in some regions or regions of the world around the world, which causes credibility metrics to It may decrease. In such cases, the reliability metric of the streaming service may change depending on the geographical location. The type of "external" data may also include weather data, which may, for example, introduce certain user preferences, such as listening to Spotify® on the patio on a cool, dry summer evening. it can. In addition, calendar data may be taken into account as identifying holidays and music services that are usually streamed on such a particular day. Other forms of external data may also be present.

さらに、様々な基準を組み合わせて、所与のストリーミングサービスの信頼性メトリックを決定することも可能である。たとえば、あるユーザはリビングルームでPandora(登録商標)を使用して多種多様なクラシック音楽を聴取することを好むが、寝室では専らAppleMusic(登録商標)を使用して好きなアーティストのフルアルバムを聴取する場合がある。このような場合、特定の音楽サービスの信頼性メトリックを決定するために、コンテンツタイプ(ジャンルやアーティスト)を特定の音楽サービスの利用場所に関するユーザ履歴と組み合わせてもよい。他の多くの組み合わせが存在し得る。   Furthermore, various criteria may be combined to determine the reliability metric of a given streaming service. For example, one user may prefer to listen to a wide variety of classical music using Pandora (R) in the living room, but only in the bedroom using AppleMusic (R) to listen to the full album of their favorite artist May. In such cases, the content type (genre or artist) may be combined with the user's history of where the particular music service is used to determine the credibility metric of the particular music service. Many other combinations may exist.

コンピュータ実装アルゴリズムは、上記の基準をストリーミングサービスの信頼性メトリックにマッピングすることができる。たとえば、信頼性メトリックを出力するテーブルに1又は複数の基準をマッピングすることができる。いくつかの実施形態では、このアルゴリズムはコンテンツタイプ、使用履歴、及び/又は「外部データ」などの様々な基準の重み付けを含んでいてもよい。このアルゴリズムは、相対的重要度に基づいて様々な基準に異なる重みを割り当ててもよい。たとえば、ユーザ嗜好性をより影響力があるものと見なしてもよく、またこれに対して、人口統計データよりも多く重み付けを与えてもよい。データの重み付けをシステムによって、又はユーザ設定によって定義してもよく、或いはこれはユーザのフィードバックに基づいて動的に調整可能であってもよい。重み付けされたデータの各々をテーブルにマッピングしてもよく、これらをたとえば、信頼性メトリックに対してマッピングし、次いでこれらを組み合わせて、全体として音楽サービスのための集約された信頼性メトリックを形成してもよい。   A computer implemented algorithm can map the above criteria to the streaming service reliability metric. For example, one or more criteria can be mapped to a table that outputs a reliability metric. In some embodiments, this algorithm may include weighting of various criteria such as content type, usage history, and / or "external data". The algorithm may assign different weights to the various criteria based on relative importance. For example, user preferences may be considered more influential, and may be weighted more than demographic data. Data weighting may be defined by the system or by user settings, or it may be dynamically adjustable based on user feedback. Each of the weighted data may be mapped to a table, for example, mapping them to reliability metrics and then combining them to form an aggregated reliability metric for the music service as a whole May be

ブロック1704において、コンピューティングデバイス504又は506は、所与のストリーミングサービスが信頼性条件を満たしているかどうかを判定してもよい。この信頼性条件をいくつかの方法で満たすことができる。たとえば、所与のストリーミングサービスの信頼性メトリックがある信頼性レベル閾値を超えた場合、その信頼性条件を満たすことができ、この信頼性レベル閾値はデフォルトのシステム設定値であるか、又はユーザによって調整可能であってもよい。たとえば、閾値信頼性レベルが80である状況で、3つの信頼性メトリックをService1=85、Service2=83、Service3=25のように算出した場合、(ブロック1614に関連して上述したように)ブロック1706においてService1がストリーミングのために出力されるか、又はユーザに提案されることになり得る。   At block 1704, the computing device 504 or 506 may determine if the given streaming service meets the reliability condition. This reliability condition can be met in several ways. For example, if the reliability metric for a given streaming service exceeds a certain reliability level threshold, then that reliability condition may be met, which is the default system setting or by the user It may be adjustable. For example, if three reliability metrics are calculated as Service1 = 85, Service2 = 83, Service3 = 25, and the threshold reliability level is 80 (as described above in connection with block 1614) At 1706, Service 1 may be output for streaming or may be proposed to the user.

別の場合には、(1)そのストリーミングサービスにおいて算出される信頼性メトリックが閾値信頼性レベルを超えており、且つ(2)算出される2つの最高信頼性メトリックが互いに閾値範囲内にないときにのみ、信頼性条件が満たされ得る。たとえば、すぐ上で述べた事例で信頼性レベルの範囲が3であった場合、Service1及びService2の信頼性メトリックに起因して、信頼性条件は満たされないことになる。この信頼性条件には、付加的に又は代替的に、他の様々なルールを引用してもよい。   In the other case, (1) the reliability metric calculated in the streaming service exceeds the threshold reliability level and (2) the two highest reliability metrics calculated are not within the threshold range of each other Only the reliability conditions can be met. For example, if the confidence level range is 3 in the case immediately above, then the confidence criteria will not be met due to the Service1 and Service2 confidence metrics. Various other rules may additionally or alternatively be cited for this reliability condition.

ブロック1708において信頼性条件が満たされていないと判定した場合、コンピューティングデバイス504又は506のいずれかによってブロック1708においてエラー状態をトリガしてもよい。エラー状態は、1616に関連して述べたように、コンテンツが利用不可能であるという通知を出力するなど、特定のイベントが生じるようにトリガしてもよい。別の場合には、エラー状態をトリガすることにより、コンテンツをデフォルトのストリーミングサービス又は好みのパートナーサービスを介してストリーミング配信させてもよい。さらに別の場合には、このエラー状態により、コンピューティングデバイスがNMD512〜516、PBD532〜538、又はCR522のうちの1つ又はすべてに対して指示を出力して、既に受信したコマンドに関してさらなる情報を取得するように促す指示又はクエリを聴覚的若しくは視覚的に提示させるようにしてもよい。   If it is determined at block 1708 that the reliability condition is not met, an error condition may be triggered at block 1708 by either computing device 504 or 506. An error condition may trigger a specific event to occur, such as outputting a notification that the content is unavailable, as described in connection with 1616. In other cases, triggering an error condition may cause the content to be streamed via a default streaming service or a preferred partner service. In yet another case, this error condition causes the computing device to output an indication to one or all of NMDs 512-516, PBDs 532-538, or CR 522 to further information about the commands already received. Instructions or queries prompting for acquisition may be presented aurally or visually.

たとえば、ユーザはアーティスト又はアルバムなどの追加のコンテンツタイプを指定するように指示されてもよい。たとえば、最初のコマンドが「ラジオ局を再生して(Play radio station)」であった場合、ユーザは「ジャンルを指定してください(Please provide genre)」と指示されてもよい。   For example, the user may be instructed to specify additional content types such as artist or album. For example, if the first command is "Play radio station", the user may be instructed to "Please specify genre".

別の場合には、ユーザは、最初のコマンドの調整を促進し、これによって各種ストリーミングサービスの信頼性メトリックの調整を促進するような質問又は一連の質問を受けてもよい。たとえば、最初のコマンドが「エレクトロニック(Electronic)」という広範なジャンルを対象とした場合、ユーザは「ドラムとベース(Drum and Bass)」又は「トランス(Trance)」などの特定のサブジャンルを好むかどうか質問されてもよい。付加的に又は代替的に、ユーザがどのサブジャンルの聴取を望んでいるかを推定するために、ユーザは「何をしていますか?(What are you doing?)」や「気分はいかがですか?(How do you feel?)」などの音楽に無関係な質問を受けることもある。たとえば、ユーザが前述の質問に対して「読書中(Reading)」及び/又は「くつろいでいる(Relaxed)」と回答した場合、ユーザはサブジャンルのトランスの聴取を望んでいると推定され得る。クエリに関して、他の様々な例が可能である。   In other cases, the user may be prompted with a question or set of questions that facilitates the adjustment of the initial command, thereby facilitating the adjustment of the reliability metrics of the various streaming services. For example, if the first command targets a broad genre called "Electronic", do users prefer a particular sub-genre such as "Drum and Bass" or "Trance" You may be asked a question. Additionally or alternatively, the user may ask "What are you doing?" Or "feel like" to estimate which sub-genre the user wants to listen to You may be asked questions related to music such as 'How do you feel?' For example, if the user answers "Reading" and / or "Relaxed" to the above question, it may be inferred that the user wishes to listen to the sub-genre transformer. Various other examples are possible for queries.

指示又は質問に対するユーザの応答は、NMDによって受信される音声入力又はCRのグラフィカルインタフェースを介したテキスト入力の形式をとっていてもよい。このユーザの応答によってプロセス1600が繰り返され、その結果として信頼性条件が満たされるか、或いは別途エラー状態がトリガされることになる。   The user's response to the prompt or question may be in the form of voice input received by the NMD or text input via the graphical interface of the CR. This user response causes the process 1600 to be repeated, resulting in either the reliability condition being met or a separate error condition being triggered.

VII.さらに別の例示的な特徴
(特徴1)少なくとも1つの再生デバイスと、マイクロホンデバイスを備えるネットワークデバイスとを備える再生システムのための方法であって、再生デバイスを設置した周辺環境の音響特性を取得するステップ、前記再生デバイスの周辺環境内にあるネットワークマイクロホンデバイスを識別するステップ、前記音響特性を前記ネットワークマイクロホンデバイスに提供するステップ、前記ネットワークマイクロホンデバイスが受信した音声入力に、前記ネットワークマイクロホンデバイスによって前記音響特性を適用するステップを含む、方法。
VII. Yet another exemplary feature (Feature 1) A method for a playback system comprising at least one playback device and a network device comprising a microphone device, wherein acoustic characteristics of a surrounding environment in which the playback device is installed are acquired Identifying a network microphone device within a peripheral environment of the playback device, providing the audio characteristic to the network microphone device, audio input by the network microphone device to the audio input by the network microphone device A method comprising the steps of applying a characteristic.

(特徴2)前記再生デバイスによって前記周辺環境内で再生中のオーディオコンテンツを前記ネットワークマイクロホンデバイスに提供するステップ、前記ネットワークマイクロホンデバイスが受信した前記音声入力に、前記提供されたオーディオコンテンツを前記マイクロホンデバイスによって適用するステップをさらに含む、特徴1に記載の方法。   (Feature 2) Providing to the network microphone device audio content being played back in the surrounding environment by the playback device, the audio content provided to the voice input received by the network microphone device being the microphone device The method according to Feature 1, further comprising the step of applying according to

(特徴3)前記識別されたネットワークマイクロホンデバイスは、前記再生デバイスと結合されている及び前記再生デバイスと同じゾーン内にあるのうちの少なくとも一方である、特徴1又は2に記載の方法。   (Feature 3) The method according to feature 1 or 2, wherein the identified network microphone device is at least one of coupled with the playback device and in the same zone as the playback device.

(特徴4)前記マイクロホンデバイスに前記音響特性を送信する前記再生デバイスは、前記メディア再生システムの複数の前記再生デバイスのうちで前記マイクロホンデバイスの直近にある再生デバイスである、特徴1から3のいずれか一項に記載の方法。   (Feature 4) Any of the features 1 to 3, wherein the reproduction device transmitting the acoustic characteristic to the microphone device is a reproduction device closest to the microphone device among the plurality of reproduction devices of the media reproduction system. Or the method described in a paragraph

(特徴5)前記ネットワークマイクロホンデバイスから、前記音声入力の方向を示す通知を受信するステップ、前記受信した前記音声入力の方向を示す通知に基づいて、前記再生デバイスによって再生されるオーディオコンテンツの指向性を調整するステップをさらに含む、特徴1から4のいずれか一項に記載の方法。   (Feature 5) receiving a notification indicating the direction of the voice input from the network microphone device; directivity of audio content reproduced by the reproduction device based on the notification indicating the direction of the received voice input The method according to any one of the preceding claims, further comprising the step of adjusting.

(特徴6)前記ネットワークマイクロホンデバイスに自身が受信した音声入力に対して前記音響特性を適用させることは、前記受信した音声入力に適用される前記音響特性基づいて、前記再生デバイスにフィルタを適用させることを含む、特徴1から5のいずれか一項に記載の方法。   (Characteristic 6) The application of the acoustic characteristic to the voice input received by the network microphone device causes the reproduction device to apply a filter based on the acoustic characteristic applied to the received voice input. The method according to any one of the features 1 to 5, including.

(特徴7)前記周辺環境の音響特性は、1又は複数の前記再生デバイスが1又は複数のトーンを出力し、前記ネットワークデバイスの前記マイクロホンが前記1又は複数の再生デバイスによって出力された前記トーンを受信し、及び前記受信したトーンを解析して、前記周辺環境の音響特性を決定するようなキャリブレーション段階において取得されている、特徴1から6のいずれか一項に記載の方法。   (Feature 7) The acoustic characteristic of the surrounding environment is that one or more of the reproduction devices output one or more tones, and the microphone of the network device outputs the tones output by the one or more reproduction devices. 6. A method according to any of the features 1 to 6, which has been obtained in a calibration step such as receiving and analyzing the received tones to determine the acoustic characteristics of the surrounding environment.

(特徴8)前記マイクロホンデバイスに前記音響特性を提供するステップは、前記マイクロホンデバイスに前記音響特性をメッセージとして送信すること、前記マイクロホンデバイスに前記音響特性へのアクセスを提供することのうちの一方を含む、特徴1から7のいずれか一項に記載の方法。   (Feature 8) The step of providing the acoustic characteristic to the microphone device includes transmitting the acoustic characteristic as a message to the microphone device, and providing the microphone device with access to the acoustic characteristic. The method according to any one of the features 1 to 7, comprising.

(特徴9)実行されると、特徴1から8のいずれか一項に係る方法をプロセッサに実行させる、前記プロセッサによって実行するための命令を備える、コンピュータ可読記憶媒体。   (Feature 9) A computer readable storage medium comprising instructions for being executed by the processor, which, when executed, cause the processor to perform the method according to any one of the features 1 to 8.

(特徴10)少なくとも1つの再生デバイスと、マイクロホンデバイスを備えるネットワークデバイスとを備えるメディア再生システムであって、特徴1から9のいずれか一項に記載の方法を実行するように構成されている、メディア再生システム。   (Feature 10) A media playback system comprising at least one playback device and a network device comprising a microphone device, wherein the media playback system is configured to perform the method according to any one of the features 1 to 9, Media playback system.

(特徴11)コンピューティングデバイスのための方法であって、コマンドワード、1又は複数のメディア変数のインスタンス、及び1又は複数のゾーン変数のインスタンスを含む音声入力を受信するステップ、前記コマンドワードに対応するメディア再生システムコマンドを決定するステップ、前記1又は複数のメディア変数のインスタンスに対応するメディアコンテンツを識別するステップ、前記メディア再生システムに、前記1又は複数のゾーン変数のインスタンスに基づいて、前記メディアコンテンツに対して前記メディア再生システムコマンドを実行させるステップを含む、方法。   (Feature 11) A method for a computing device, comprising receiving a voice input comprising a command word, an instance of one or more media variables, and an instance of one or more zone variables, corresponding to the command word Determining media playback system commands to be performed, identifying media content corresponding to the one or more instances of the media variable, the media playback system based on the instance of the one or more zone variables, the media Performing the media playback system command on content.

(特徴12)前記メディア再生システムコマンドが前記コマンドワードに対応していると決定する前に、前記音声入力が音楽制御に対応していると判定することを含み、前記コマンドワードに対応する前記メディア再生システムコマンドは、音楽制御に対応する利用可能なコマンドに基づいて決定される、ことをさらに含む、特徴11に記載の方法。   (Feature 12) determining that the voice input corresponds to music control, before determining that the media playback system command corresponds to the command word, the media corresponding to the command word A method according to Feature 11, further comprising: playback system commands are determined based on available commands corresponding to music control.

(特徴13)前記識別されたメディアコンテンツから1又は複数のメディアアイテムを決定するステップ、前記1又は複数のメディアアイテムのネットワーク記憶場所を示す識別子を送信するステップをさらに含む、特徴11又は12に記載の方法。   (Feature 13) The feature 11 or 12, further comprising: determining one or more media items from the identified media content; and transmitting an identifier indicating a network storage location of the one or more media items. the method of.

(特徴14)前記コマンドワードが第1の位置にあることに基づいて、前記音声入力において前記コマンドワードを識別するステップ、前記1又は複数のメディア変数のインスタンスが第2の位置にあることに基づいて、前記音声入力において前記1又は複数のメディア変数のインスタンスを識別するステップ、前記1又は複数のゾーン変数のインスタンスが第3の位置にあることに基づいて、前記音声入力において前記1又は複数のゾーン変数のインスタンスを識別するステップをさらに含む、特徴11から13のいずれか一項に記載の方法。   (Feature 14) identifying the command word in the speech input based on the command word being in a first position, based on the instance of the one or more media variables being in a second position Identifying an instance of the one or more media variables in the speech input, based on the instance of the one or more zone variables being in a third position, the one or more speech inputs in the speech input. A method according to any one of features 11 to 13, further comprising the step of identifying an instance of a zone variable.

(特徴15)前記コマンドワードに対応する前記メディア再生システムコマンドを決定するステップは、前記コマンドワードに対応するインテントを決定すること、前記インテントに対応する前記メディア再生システムコマンドを決定することを含む、特徴11から14のいずれか一項に記載の方法。   (Feature 15) The step of determining the media playback system command corresponding to the command word may include determining an intent corresponding to the command word, and determining the media playback system command corresponding to the intent. The method according to any one of the features 11 to 14, comprising.

(特徴16)前記受信した音声入力における1又は複数のゾーン変数のインスタンスは、メディア再生システムの1又は複数のゾーンであって、前記1又は複数のゾーンは1又は複数の再生デバイスを備える、ゾーンを示している、特徴11から15のいずれか一項に記載の方法。   (Feature 16) The instance of one or more zone variables in the received voice input is one or more zones of a media playback system, the one or more zones comprising one or more playback devices The method according to any one of the features 11-15, wherein

(特徴17)前記メディア再生システムに、前記メディアコンテンツに対して前記メディア再生システムコマンドを実行させるステップは、前記メディア再生システムコマンドと、前記1又は複数のメディア変数のインスタンスに対応しているメディアコンテンツを識別するメディア情報と、前記1又は複数のゾーン変数のインスタンスに対応している1又は複数のゾーン識別子とを識別するコマンド情報を含むメッセージを、前記コンピューティングデバイスから前記メディア再生システムに送信することを含む、特徴11から16のいずれか一項に記載の方法。   (Feature 17) The step of causing the media playback system to execute the media playback system command on the media content comprises: the media playback system command, and media content corresponding to an instance of the one or more media variables Sending from the computing device to the media playback system a message including command information identifying media information identifying the one or more zone identifiers corresponding to the one or more zone variables. The method according to any one of the features 11 to 16, including.

(特徴18)コンピューティングデバイスの1又は複数のプロセッサによって実行されると、特徴11から17のいずれか一項に記載の方法を前記コンピューティングデバイスに実行させる命令を格納している、有形の非一時的なコンピュータ可読媒体。   (Feature 18) A tangible non-transitory, storing instructions that, when executed by one or more processors of a computing device, cause the computing device to perform the method according to any one of the features 11 to 17. Temporary computer readable medium.

(特徴19)コンピューティングデバイスであって、1又は複数プロセッサと、前記1又は複数のプロセッサによって実行されると、特徴11から17のいずれか一項に記載の方法を前記コンピューティングデバイスに実行させる命令を格納しているメモリとを備える、コンピューティングデバイス。   (Feature 19) A computing device, which, when executed by one or more processors and the one or more processors, causes the computing device to execute the method according to any one of the features 11 to 17. And a memory storing instructions.

(特徴20)メディア再生システムに対する音声コマンドを受信するステップ、前記音声コマンドを前記メディア再生システムの登録ユーザから受信したかどうかを判定するステップ、前記音声コマンドを登録ユーザから受信した場合に、前記音声コマンドの内容と前記登録ユーザのユーザプロファイル内の情報とに基づいて、前記メディア再生システムに対する指示を構成するステップを含む、方法。   (Feature 20) a step of receiving a voice command for a media playback system, a step of determining whether the voice command is received from a registered user of the media playback system, the voice when the voice command is received from a registered user Configuring an indication for the media playback system based on the content of the command and the information in the registered user's user profile.

(特徴21)前記メディア再生システムの1又は複数の再生デバイスに前記指示を送信することをさらに含む、特徴20に記載の方法。   21. The method of feature 20, further comprising transmitting the indication to one or more playback devices of the media playback system.

(特徴23)前記音声コマンドは、前記メディア再生システムにメディアコンテンツの再生を命じるコマンドである、特徴21又は22に記載の方法。   (Feature 23) The method according to feature 21 or 22, wherein the voice command is a command that instructs the media playback system to play media content.

(特徴24)前記構成した指示は、前記登録ユーザの好みのメディアソースから前記メディアコンテンツを取得するように前記メディア再生システムに指示する、特徴23に記載の方法。   24. The method of feature 23, wherein the configured instruction instructs the media playback system to obtain the media content from a preferred media source of the registered user.

(特徴25)前記構成した指示により、前記メディア再生システムは、前記メディア再生システムの1又は複数のメディア再生デバイスを介して前記メディアコンテンツを再生する、特徴23に記載の方法。   25. The method of feature 23, wherein the configured instruction causes the media playing system to play the media content via one or more media playing devices of the media playing system.

(特徴26)前記構成した指示は、前記登録ユーザの好みの再生設定の1つ又は複数を用いて前記メディア再生システムを構成し、及び前記メディア再生システムを介し、前記登録ユーザの好みの再生設定を用いて前記メディア再生システムに前記メディアコンテンツを再生させる指示を含む、特徴23に記載の方法。   (Feature 26) The configured instruction configures the media playback system using one or more of the registered user's preferred playback settings, and via the media playback system, the registered user's preferred playback settings A method according to Feature 23, comprising instructions to cause the media playback system to play the media content using

(特徴27)前記登録ユーザの好みの再生設定は、好みの再生音量及び好みのオーディオイコライゼーションの設定のうちの1又は複数を含む、特徴26に記載の方法。   (Feature 27) The method according to feature 26, wherein the registered user preference playback settings include one or more of a preference playback volume and a preference audio equalization setting.

(特徴28)前記音声コマンドは、前記メディア再生システムに再生設定の変更を命じるコマンドであり、前記構成した指示により、前記メディア再生システムは、前記メディア再生システムにおける1又は複数のメディア再生デバイスの再生設定を変更する、特徴21又は22に記載の方法。   (Feature 28) The voice command is a command for commanding the media playback system to change the playback setting, and according to the configured instruction, the media playback system plays back one or more media playback devices in the media playback system. A method according to feature 21 or 22, wherein the setting is changed.

(特徴29)前記音声コマンドを登録ユーザから受信しなかった場合に、前記音声コマンドをゲストユーザから受信したかどうかを判定するステップ、前記音声コマンドをゲストユーザから受信した場合に、前記ゲストユーザに対して制限設定を割り当てるステップ、前記音声コマンドの内容と前記ゲストユーザに対して割り当てた前記制限設定とに基づいて、前記メディア再生システムに対する指示を構成するステップ、前記指示を前記メディア再生システムに送信するステップをさらに含む、特徴20から28のいずれか一項に記載の方法。   (Feature 29) determining whether or not the voice command is received from the guest user when the voice command is not received from the registered user; and when the voice command is received from the guest user, Assigning a restriction setting to the media playback system based on the content of the voice command and the restriction setting assigned to the guest user, configuring an instruction for the media reproduction system, transmitting the instruction to the media reproduction system The method of any one of features 20-28, further comprising the step of:

(特徴30)前記メディア再生システムは再生ネットワークと、1又は複数の再生デバイスとを備える、特徴20から29のいずれか一項に記載の方法。   (Feature 30) The method according to any one of the features 20 to 29, wherein the media playback system comprises a playback network and one or more playback devices.

(特徴31)前記音声コマンドを登録ユーザから受信しなかった場合に、前記音声コマンドを無視することをさらに含む、特徴20から30のいずれか一項に記載の方法。   (Feature 31) The method according to any one of features 20 to 30, further comprising ignoring the voice command if the voice command is not received from a registered user.

(特徴32)1又は複数のプロセッサによって実行されると、特徴20から31のいずれか一項に係る方法をコンピューティングデバイスに実行させる命令をエンコードしている、有形の非一時的なコンピュータ可読媒体。   (Feature 32) A tangible non-transitory computer readable medium encoding instructions that, when executed by one or more processors, cause the computing device to perform the method according to any one of features 20 to 31. .

(特徴33)1又は複数のプロセッサと、特徴32に係る有形の非一時的なコンピュータ可読媒体とを備える、メディア再生システム。   (Feature 33) A media playback system comprising one or more processors and a tangible non-transitory computer readable medium according to feature 32.

(特徴34)コンテンツに関する通知を受信するステップ、前記受信した通知に基づいて少なくとも1つのコンテンツタイプを識別するステップ、前記少なくとも1つのコンテンツタイプをサポートしている少なくとも1つの音楽サービスを、複数の音楽サービスの中から決定するステップ、前記少なくとも1つの音楽サービスが前記少なくとも1つのコンテンツタイプをサポートしていることに基づいて、前記コンテンツタイプと関連付けられたオーディオコンテンツを前記少なくとも1つの音楽サービスに送信させるステップを含む、方法。   (Feature 34) receiving a notification about content, identifying at least one content type based on the received notification, at least one music service supporting the at least one content type, a plurality of music Determining among services, causing audio content associated with the content type to be transmitted to the at least one music service based on the at least one music service supporting the at least one content type A method, including steps.

(特徴35)前記コンテンツに関する通知をネットワークマイクロホンデバイスを介して受信する、特徴34に記載の方法。   (Feature 35) The method according to feature 34, wherein the notification regarding the content is received via a network microphone device.

(特徴36)前記少なくとも1つの音楽サービスを決定するステップは、前記複数の音楽サービスの中から決定した前記少なくとも1つの音楽サービスに対応する信頼性メトリックを決定することを含む、特徴34又は35に記載の方法。   (Feature 36) In the feature 34 or 35, the step of determining the at least one music service includes determining a reliability metric corresponding to the at least one music service determined from among the plurality of music services. Method described.

(特徴37)前記少なくとも1つの音楽サービスを決定するステップは、信頼性レベルの条件が満たされているかどうかを判定することを含む、特徴34又は35に記載の方法。   (Feature 37) The method according to feature 34 or 35, wherein the step of determining the at least one music service comprises determining whether a reliability level condition is met.

(特徴38)前記信頼性メトリックは、前記複数の音楽サービスの中のある音楽サービスへのアクセス履歴に基づいている、特徴37に記載の方法。   (Feature 38) The method according to feature 37, wherein the reliability metric is based on access history to a music service among the plurality of music services.

(特徴39)前記信頼性メトリックは、前記特定の音楽サービスの特定の利用場所にさらに基づいている、特徴38に記載の方法。   (Feature 39) The method according to feature 38, wherein the reliability metric is further based on a specific use place of the specific music service.

(特徴40)コンテンツに関する第2の通知を受信するステップ、前記受信した通知に基づいて少なくとも1つのコンテンツタイプを識別するステップ、前記複数の音楽サービスの中のいずれの音楽サービスも前記少なくとも1つのコンテンツタイプをサポートしていないと判定するステップ、エラー状態がトリガされるようにするステップをさらに含む、特徴34から39のいずれか一項に記載の方法。   (Feature 40) receiving a second notification about content, identifying at least one content type based on the received notification, any music service of the plurality of music services being the at least one content A method according to any of the features 34 to 39, further comprising: determining that the type is not supported; and causing an error condition to be triggered.

(特徴41)前記コンテンツタイプはアーティスト、ジャンル、曲、アルバム、及びラジオ局からなる群より選択される、特徴34から40のいずれかに一項に記載の方法。   (Feature 41) The method according to any one of features 34 to 40, wherein the content type is selected from the group consisting of artist, genre, song, album, and radio station.

(特徴42)前記少なくとも1つの音楽サービスを決定するステップは、前記複数のストリーミングサービス用に利用可能なコンテンツのエントリを含むルックアップテーブルにアクセスすることを含む、特徴34から41のいずれか一項に記載の方法。   (Feature 42) Any one of the features 34 to 41, wherein the step of determining the at least one music service comprises accessing a look-up table including entries of content available for the plurality of streaming services. The method described in.

(特徴43)前記複数の音楽サービスの中から、前記ユーザが登録している音楽サービスのみをクエリすることをさらに含む、特徴34から42のいずれか一項に記載の方法。   (Feature 43) The method according to any one of features 34 to 42, further comprising querying only the music service registered by the user among the plurality of music services.

(特徴44)前記コンテンツタイプを識別した後に、前記コンテンツに関する最初の通知で指定された前記コンテンツタイプをさらに特定するための1又は複数の質問を前記ユーザに対して行うステップ、より具体的なコンテンツタイプを示すようなさらに別のユーザ入力を受信するステップ、前記より具体的なコンテンツタイプに基づいて1又は複数の音楽サービスを決定するステップをさらに含む、特徴34から43のいずれか一項に記載の方法。   (Feature 44) A step of asking the user one or more questions for further specifying the content type specified in the first notification about the content after identifying the content type, more specific content 34. Any of the features 34 to 43, further comprising the steps of: receiving further user input, such as indicating a type; determining one or more music services based on the more specific content type. the method of.

(特徴45)ネットワークを介して複数のネットワークデバイスと通信するように構成されたネットワークインタフェースと、プロセッサであって、実行されると、特徴34から44のいずれか一項に係る方法を前記プロセッサに実行させる命令を備える、プロセッサとを備える、ネットワークデバイス。   (Feature 45) A network interface configured to communicate with a plurality of network devices via a network, and a processor, which, when executed, causes the method according to any one of features 34 to 44 to be said processor And a processor comprising instructions for execution.

(特徴46)実行されると、特徴34から44のいずれか一項に係る方法をプロセッサに実行させる、前記プロセッサによって実行するための命令を備える、コンピュータ可読記憶媒体。   (Feature 46) A computer readable storage medium comprising instructions for being executed by the processor, which, when executed, cause the processor to perform the method according to any one of the features 34 to 44.

VI.結論
本明細書は、様々な例示のシステム、方法、装置、および製品などを開示しており、それらは、他のコンポーネントの中で、ハードウェア上で実行されるファームウェアおよび/又はソフトウェアを含む。そのような例は、単なる例示であり、限定されるものとみなすべきではないと理解される。例えば、これらのファームウェア、ハードウェア、および/又はソフトウェアの態様又はコンポーネントのいくつか又はすべてが、専らハードウェアに、専らソフトウェアに、専らファームウェアに、又はハードウェア、ソフトウェア、および/又はファームウェアの任意の組み合わせを実施することができることが意図されている。したがって、提供されているそれらの例は、それらのシステム、方法、装置、および/又は生産物を実施する唯一の方法ではない。
VI. Conclusion The present specification discloses various exemplary systems, methods, apparatuses, products and the like, which include, among other components, firmware and / or software executed on hardware. It is understood that such examples are merely illustrative and should not be considered limiting. For example, some or all of these firmware, hardware and / or software aspects or components may be exclusively in hardware, exclusively in software, exclusively in firmware, or any of hardware, software and / or firmware It is intended that combinations can be implemented. Thus, those examples provided are not the only way to implement those systems, methods, devices, and / or products.

本明細書に開示した方法及び他のプロセスは、1又は複数の操作、機能、又はアクションを含んでいてもよい。ブロックを順番に図示しているが、これらのブロックを同時に、及び/又は本明細書に記載の順序とは異なる順序で実行してもよい。また、様々なブロックをより少数のブロックにまとめるか、ブロックを追加のブロックに分割するか、及び/又は所望の実装形態に基づいてこれらを除去してもよい。   The methods and other processes disclosed herein may include one or more operations, functions, or actions. Although the blocks are illustrated in sequence, the blocks may be performed simultaneously and / or in an order different from the order described herein. Also, the various blocks may be combined into fewer blocks, the blocks may be divided into additional blocks, and / or they may be removed based on the desired implementation.

さらに、本明細書に開示した本方法及び他のプロセス及び方法について、フローチャートは、本実施形態で想定される1つの実装形態における機能と動作とを示している。この点において、各ブロックは、プロセス内の特定の論理機能又は工程を実施するためにプロセッサによって実行可能な1又は複数の命令を含むモジュール、セグメント、又はプログラムコードの一部を表していてもよい。このプログラムコードを、たとえばディスク又はハードドライブを含む記憶装置などの、任意のタイプのコンピュータ可読媒体に格納してもよい。このコンピュータ可読媒体として、たとえばレジスタメモリ、プロセッサキャッシュ及びランダムアクセスメモリ(RAM)のようにデータを短期間記憶するコンピュータ可読媒体などの、非一時的なコンピュータ可読媒体を挙げることができる。このコンピュータ可読媒体にはまた、たとえば読取り専用メモリ(ROM)、光学ディスク又は磁気ディスク、コンパクトディスク読取り専用メモリ(CD−ROM)のように二次的な、又は永続的な長期記憶装置などの非一時的な媒体が含まれていてもよい。コンピュータ可読媒体はまた、他の任意の揮発性又は不揮発性の記憶システムであってもよい。コンピュータ可読媒体を、たとえば、コンピュータ可読記憶媒体又は有形の記憶装置と考えてもよい。また、図中の各ブロックは、プロセス内の特定の論理機能を実施するために有線接続された回路を表していてもよい。   Further, for the present method and other processes and methods disclosed herein, the flowchart shows the functions and operations in one implementation contemplated in this embodiment. In this regard, each block may represent a module, segment, or portion of the program code that includes one or more instructions executable by the processor to perform particular logical functions or steps in the process. . The program code may be stored on any type of computer readable medium, such as, for example, a storage device including a disk or a hard drive. The computer readable media may include non-transitory computer readable media, such as computer readable media that store data for a short period of time, such as, for example, register memory, processor cache and random access memory (RAM). The computer readable medium also includes non-volatile or non-volatile long-term storage such as read only memory (ROM), optical or magnetic disks, compact disk read only memory (CD-ROM), etc. Temporary media may be included. Computer readable media may also be any other volatile or non-volatile storage system. Computer readable media may be considered, for example, computer readable storage media or tangible storage. Also, each block in the figure may represent a wired circuit to perform a specific logic function in the process.

更に、本明細書において「実施形態」は、実施形態に関連して述べられた特定の特徴、構造、又は特性が、本発明の少なくとも1つの実施例に含まれ得ることを示している。本明細書の様々な場所でこの語句が用いられているが、すべてが同じ実施形態を言及するものではなく、又、他の実施形態を除いた別個の実施形態又は代替の実施形態でもない。このように、本明細書で述べられた実施形態は、明示的におよび暗黙的に、当業者によって、他の実施形態と組み合わせることができることが理解される。   Further, "embodiments" as used herein indicate that certain features, structures or characteristics described in connection with the embodiments may be included in at least one embodiment of the invention. Although this phrase is used in various places throughout the specification, it is not all referring to the same embodiment, nor is it a separate or alternative embodiment excluding the other embodiments. Thus, it is understood that the embodiments described herein may be combined with other embodiments, by those skilled in the art, explicitly and implicitly.

本明細書は、例示的な環境、システム、手順、ステップ、論理ブロック、処理、および他のシンボル表現に関して広く示されており、それらは直接又は間接的にネットワークに接続されるデータ処理デバイスの動作に類似するものである。これらの処理説明および表現は、一般的に当業者によって使用され、それらの仕事の内容を他の当業者に最も効率良く伝えることができる。多くの具体的な内容が、本開示を理解するために提供されている。しかしながら、当業者にとって、本開示の特定の実施形態が特定の、具体的な詳細なしに実施され得ることは理解される。他の例では、周知の方法、手順、コンポーネント、および回路が、実施形態を不必要に曖昧にすることを避けるため、詳細に説明していない。したがって、本開示の範囲は、上記した実施形態よりむしろ添付された特許請求の範囲によって定義される。   The specification broadly describes exemplary environments, systems, procedures, steps, logic blocks, processes, and other symbolic representations that operate directly or indirectly on data processing devices connected to a network. It is similar to These process descriptions and representations are commonly used by those skilled in the art to most effectively convey the substance of their work to others skilled in the art. Many specific details are provided to understand the present disclosure. However, it will be understood by one of ordinary skill in the art that certain embodiments of the present disclosure may be practiced without the specific details. In other instances, well-known methods, procedures, components and circuits have not been described in detail to avoid unnecessarily obscuring the embodiments. Accordingly, the scope of the present disclosure is defined by the appended claims rather than the embodiments described above.

添付の特許請求の範囲のいずれかが単にソフトウェアおよび/又はファームウェアへの実装をカバーするように読み取ると、少なくとも1つの例における要素の1つ又は複数は、本明細書では、ソフトウェアおよび/又はファームウェアを記憶する有形の非一時的な記憶媒体、例えば、メモリ、DVD、CD、Blu−ray(登録商標)等を含むことが明確に定められている。   When any of the appended claims simply reads to cover an implementation in software and / or firmware, one or more of the elements in at least one example may, herein, be software and / or firmware. It is clearly defined that it includes tangible, non-transitory storage media storing such as, for example, memory, DVD, CD, Blu-ray (registered trademark) and the like.

Claims (33)

コンピューティングデバイスのための方法であって、
音声入力を受信するステップ、
ここで、前記音声入力は、
コマンドワード、
1又は複数のメディア変数のインスタンス、及び
1又は複数のゾーン変数のインスタンス、
を備える、
前記音声入力が音楽制御に対応していると決定するステップ、
前記コマンドワードに対応するメディア再生システムコマンドを決定するステップ、
ここで、前記コマンドワードに対応する前記メディア再生システムコマンドは、音楽制御に対応する利用可能なコマンドに基づいて決定される、
前記1又は複数のメディア変数のインスタンスに対応するメディアコンテンツを識別するステップ、及び
前記メディア再生システムに、前記1又は複数のゾーン変数のインスタンスに基づいて、前記メディアコンテンツに対して前記メディア再生システムコマンドを実行させるステップ、
を含む、方法。
A method for computing devices,
Receiving voice input,
Here, the voice input is
Command word,
An instance of one or more media variables, and an instance of one or more zone variables,
Equipped with
Determining that the voice input corresponds to music control;
Determining a media playback system command corresponding to the command word;
Here, the media playback system command corresponding to the command word is determined based on an available command corresponding to music control,
Identifying media content corresponding to an instance of the one or more media variables, and the media playback system commanding the media playback system command for the media content based on the instance of the one or more zone variables Step to execute
Method, including.
さらに、
前記識別されたメディアコンテンツから1又は複数のメディアアイテムを決定するステップ、及び
前記1又は複数のメディアアイテムのネットワーク記憶場所を示す識別子を送信するステップ、
含む、請求項に記載の方法。
further,
Determining one or more media items from the identified media content; and transmitting an identifier indicative of a network storage location of the one or more media items.
Comprising The method of claim 1.
さらに、
前記コマンドワードが第1の位置にあることに基づいて、前記音声入力において前記コマンドワードを識別するステップ、
前記1又は複数のメディア変数のインスタンスが第2の位置にあることに基づいて、前記音声入力において前記1又は複数のメディア変数のインスタンスを識別するステップ、及び
前記1又は複数のゾーン変数のインスタンスが第3の位置にあることに基づいて、前記音声入力において前記1又は複数のゾーン変数のインスタンスを識別するステップ、
を含む、請求項1又は請求項2に記載の方法。
further,
Identifying the command word at the speech input based on the command word being in a first position;
Identifying an instance of the one or more media variables in the speech input based on the instance of the one or more media variables being at a second position; and an instance of the one or more zone variables Identifying an instance of the one or more zone variables in the speech input based on being in a third position;
The method according to claim 1 or claim 2 , comprising
前記コマンドワードに対応する前記メディア再生システムコマンドを決定するステップは、
前記コマンドワードに対応するインテントを決定すること、及び
前記インテントに対応する前記メディア再生システムコマンドを決定すること、
を備える、請求項1から請求項のいずれか一項に記載の方法。
Determining the media playback system command corresponding to the command word:
Determining an intent corresponding to the command word; and determining the media playback system command corresponding to the intent.
The provided method according to any one of claims 1 to 3.
前記受信した音声入力における1又は複数のゾーン変数のインスタンスは、メディア再生システムの1又は複数のゾーンを示し、前記1又は複数のゾーンは1又は複数の再生デバイスを備える、
請求項1から請求項のいずれか一項に記載の方法。
An instance of one or more zone variables in the received audio input indicates one or more zones of a media playback system, the one or more zones comprising one or more playback devices.
The method according to any one of claims 1 to 4 .
前記メディア再生システムに、前記メディアコンテンツに対して前記メディア再生システムコマンドを実行させるステップは、前記コンピューティングデバイスから前記メディア再生システムに、コマンド情報を含むメッセージを送信することを備える、
ここで、前記コマンド情報は、
前記メディア再生システムコマンド、
前記1又は複数のメディア変数のインスタンスに対応しているメディアコンテンツを識別するメディア情報、及び
前記1又は複数のゾーン変数のインスタンスに対応している1又は複数のゾーン識別子、
を識別する、
請求項1から請求項のいずれか一項に記載の方法。
Causing the media playback system to execute the media playback system command on the media content comprises transmitting a message including command information from the computing device to the media playback system.
Here, the command information is
The media playback system command,
Media information identifying media content corresponding to an instance of the one or more media variables, and one or more zone identifiers corresponding to an instance of the one or more zone variables,
To identify
The method according to any one of claims 1 to 5 .
前記受信した1又は複数のメディア変数のインスタンスは、メディアコンテンツに関する通知を備える、
さらに、
前記受信した通知に基づいて少なくとも1つのコンテンツタイプを識別するステップ、
前記少なくとも1つのコンテンツタイプをサポートしている少なくとも1つの音楽サービスを、複数の音楽サービスの中から決定するステップ、
前記少なくとも1つの音楽サービスが前記少なくとも1つのコンテンツタイプをサポートしていることに基づいて、前記コンテンツタイプと関連付けられたオーディオコンテンツを前記少なくとも1つの音楽サービスに送信させるステップ、
を含む、請求項1から請求項のいずれか一項に記載の方法。
The received instance of one or more media variables comprises a notification regarding media content,
further,
Identifying at least one content type based on the received notification;
Determining at least one music service supporting the at least one content type from among a plurality of music services;
Sending audio content associated with the content type to the at least one music service based on the at least one music service supporting the at least one content type;
The method according to any one of claims 1 to 6 , comprising
コンテンツに関する前記通知は、ネットワークマイクロホンデバイスを介して受信される、
請求項に記載の方法。
The notification about content is received via a network microphone device
The method of claim 7 .
前記少なくとも1つの音楽サービスを決定するステップは、
前記複数の音楽サービスの中の前記少なくとも1つの音楽サービスに対応する信頼性メトリックを決定すること、及び
前記少なくとも1つの音楽サービスを決定することが、信頼性レベルの条件が満たされているかどうかを判定することを含むこと、
のうちの少なくとも一方を含む、請求項又は請求項に記載の方法。
The step of determining the at least one music service comprises:
Determining a reliability metric corresponding to the at least one music service of the plurality of music services and determining whether the at least one music service satisfies a reliability level condition Including determining,
The method according to claim 7 or 8 , comprising at least one of:
前記信頼性メトリックは、
前記複数の音楽サービスの中のある音楽サービスへのアクセス履歴、及び
前記特定の音楽サービスの特定の利用場所、
のうちの少なくとも一方に基づいている、請求項に記載の方法。
The reliability metric is
An access history to a music service among the plurality of music services, and a specific use place of the specific music service,
10. The method of claim 9 , wherein the method is based on at least one of:
さらに、
コンテンツに関する第2の通知を受信するステップ、
前記受信した通知に基づいて少なくとも1つのコンテンツタイプを識別するステップ、及び
前記複数の音楽サービスの中のいずれの音楽サービスも前記少なくとも1つのコンテンツタイプをサポートしていないと判定した場合に、エラー状態がトリガされるようにするステップ、
を含む、請求項から請求項10のいずれか一項に記載の方法。
further,
Receiving a second notification about the content;
Identifying at least one content type based on the received notification; and an error condition if it is determined that none of the music services of the plurality of music services support the at least one content type Allowing to be triggered,
The method according to any one of claims 7 to 10 , comprising
前記コンテンツタイプは、アーティスト、ジャンル、曲、アルバム、及びラジオ局からなる群より選択される、請求項から請求項11のいずれか一項に記載の方法。 The method according to any one of claims 7 to 11 , wherein the content type is selected from the group consisting of artist, genre, song, album, and radio station. 前記少なくとも1つの音楽サービスを決定するステップは、前記複数のストリーミングサービス用に利用可能なコンテンツのエントリを含むルックアップテーブルにアクセスすることを備える、
請求項1から請求項12のいずれか一項に記載の方法。
The step of determining the at least one music service comprises accessing a lookup table including entries of content available for the plurality of streaming services.
The method according to any one of claims 1 to 12.
さらに、
前記複数の音楽サービスの中から、前記ユーザが登録している音楽サービスのみをクエリするステップ、
含む、請求項1から請求項13のいずれか一項に記載の方法。
further,
Querying only the music service registered by the user among the plurality of music services;
Comprising A method according to any one of claims 13 claim 1.
さらに、前記コンテンツタイプを識別した後に、
前記コンテンツに関する最初の通知で指定された前記コンテンツタイプをさらに特定するための1又は複数の質問を前記ユーザに対して行うステップ、
より具体的なコンテンツタイプを示すようなさらに別のユーザ入力を受信するステップ、及び
前記より具体的なコンテンツタイプに基づいて前記1又は複数の音楽サービスを決定するステップ、
を含む、請求項1から請求項14のいずれか一項に記載の方法。
Furthermore, after identifying the content type:
Asking the user one or more questions to further identify the content type specified in an initial notification about the content;
Receiving yet another user input, such as indicating a more specific content type, and determining the one or more music services based on the more specific content type,
Including method according to any one of claims 14 to claim 1.
さらに、
前記音声入力を前記メディア再生システムの登録ユーザから受信したかどうかを判定するステップ、及び
前記音声コマンドを登録ユーザから受信したと判定した場合に、前記登録ユーザのユーザプロファイル内の情報にさらに基づいて、前記メディア再生システムコマンドを決定するステップ、
を含む、請求項1から請求項15のいずれか一項に記載の方法。
further,
Determining whether the voice input has been received from a registered user of the media playback system; and if it is determined that the voice command has been received from a registered user, further based on information in the user profile of the registered user. Determining the media playback system command,
Including method according to any one of claims 1 to 15.
前記メディア再生システムコマンドは、前記登録ユーザの好みのメディアソースから前記メディアコンテンツを取得するように前記メディア再生システムに指示する、
請求項16に記載の方法。
The media playback system command instructs the media playback system to obtain the media content from a preferred media source of the registered user.
The method of claim 16 .
前記メディア再生システムコマンドは、
前記登録ユーザの好みの再生設定の1つ又は複数を用いて前記メディア再生システムを構成し、及び
前記メディア再生システムを介し、前記登録ユーザの好みの再生設定を用いて前記メディア再生システムに前記メディアコンテンツを再生させる
指示を含む、請求項16又は請求項17に記載の方法。
The media playback system command is
Configuring the media playback system with one or more of the registered user's preferred playback settings, and via the media playback system using the registered user's preferred playback settings to the media playback system The method according to claim 16 or claim 17 including an instruction to play back the content.
前記登録ユーザの好みの再生設定は、
好みの再生音量、及び
好みのオーディオイコライゼーションの設定
のうちの1又は複数を含む、
請求項18に記載の方法。
The registered user's favorite playback settings are
Include one or more of your preferred playback volume and your preferred audio equalization settings,
The method according to claim 18 .
さらに、
前記メディア再生システムに再生設定を変更するように指示する第2の音声入力を受信するステップ、及び
前記メディア再生システムにおける1又は複数のメディア再生デバイスの前記再生設定を変更するように前記メディア再生システムに指示するメディア再生システムコマンドを決定するステップ、
含む、請求項16から請求項19のいずれか一項に記載の方法。
further,
Receiving a second audio input instructing the media playback system to change playback settings; and the media playback system to change the playback settings of one or more media playback devices in the media playback system. Determining a media playback system command to direct to
Comprising A method according to any one of claims 19 claim 16.
さらに、
前記音声コマンドを登録ユーザから受信しなかった場合に、前記音声コマンドをゲストユーザから受信したかどうかを判定するステップ、
前記音声コマンドをゲストユーザから受信した場合に、
前記ゲストユーザに対して制限設定を割り当てるステップ、
前記音声コマンドの内容と前記ゲストユーザに対して割り当てた前記制限設定とに基づいて、前記メディア再生システムに対する指示を構成するステップ、及び
前記指示を前記メディア再生システムに送信するステップ、
を含む、請求項16から請求項20のいずれか一項に記載の方法。
further,
Determining whether the voice command has been received from a guest user when the voice command has not been received from a registered user;
If the voice command is received from a guest user,
Assigning restriction settings to the guest user;
Configuring an instruction for the media playback system based on the content of the voice command and the restriction setting assigned to the guest user; and transmitting the instruction to the media playback system.
21. A method according to any one of claims 16 to 20 , comprising
さらに、
前記メディア再生システムの1又は複数の再生デバイスに前記メディア再生システムコマンドを送信するステップを含み、
前記メディア再生システムコマンドは、前記メディア再生システムの1又は複数のメディア再生デバイスを介して前記メディアコンテンツを前記メディア再生システムに再生させる、
請求項16から請求項21のいずれか一項に記載の方法。
further,
Sending the media playback system command to one or more playback devices of the media playback system,
The media playback system command causes the media playback system to play the media content via one or more media playback devices of the media playback system.
22. A method according to any one of claims 16 to 21 .
さらに、
再生デバイスを設置した周辺環境の音響特性を取得するステップ、
前記再生デバイスの周辺環境内にあるネットワークマイクロホンデバイスを識別するステップ、
前記音響特性を前記ネットワークマイクロホンデバイスに提供するステップ、及び
前記ネットワークマイクロホンデバイスが受信した音声入力に、前記ネットワークマイクロホンデバイスによって前記音響特性を適用するステップ、
を含む、請求項1から請求項22のいずれか一項に記載の方法。
further,
Acquiring acoustic characteristics of the surrounding environment in which the reproduction device is installed;
Identifying a network microphone device within the environment surrounding the playback device;
Providing the acoustic characteristic to the network microphone device; and applying the acoustic characteristic by the network microphone device to an audio input received by the network microphone device.
Including method according to any one of claims 22 claim 1.
前記周辺環境の音響特性は、キャリブレーション段階において取得される、
前記キャリブレーション段階において、
1又は複数の前記再生デバイスが1又は複数のトーンを出力する、
前記ネットワークデバイスの前記マイクロホンが前記1又は複数の再生デバイスによって出力された前記トーンを受信する、及び
前記受信したトーンを解析して、前記周辺環境の音響特性を決定する、
請求項23に記載の方法。
The acoustic properties of the surrounding environment are obtained in a calibration stage,
In the calibration step,
One or more of the playback devices output one or more tones,
The microphone of the network device receives the tone output by the one or more playback devices, and analyzes the received tone to determine an acoustic characteristic of the surrounding environment.
24. The method of claim 23 .
さらに、
前記再生デバイスによって前記周辺環境内で再生中のオーディオコンテンツを前記ネットワークマイクロホンデバイスに提供するステップ、
前記ネットワークマイクロホンデバイスが受信した前記音声入力に、前記提供されたオーディオコンテンツを前記マイクロホンデバイスによって適用するステップ、
を含む、請求項23又は請求項24に記載の方法。
further,
Providing audio content being played back in the environment by the playback device to the network microphone device;
Applying the provided audio content by the microphone device to the audio input received by the network microphone device;
25. A method according to claim 23 or claim 24 , comprising
前記識別されたネットワークマイクロホンデバイスは、
前記再生デバイスと結合されている、及び
前記再生デバイスと同じゾーン内にある、
のうちの少なくとも一方である、請求項23から請求項25のいずれか一項に記載の方法。
The identified network microphone device is
Coupled to the playback device, and in the same zone as the playback device,
It is at least one of a method according to any one of claims 25 to claim 23.
前記マイクロホンデバイスに前記音響特性を送信する前記再生デバイスは、前記メディア再生システムの複数の前記再生デバイスのうちで前記マイクロホンデバイスの直近にある再生デバイスである、
請求項23から請求項26のいずれか一項に記載の方法。
The playback device that transmits the acoustic characteristic to the microphone device is a playback device that is closest to the microphone device among the plurality of playback devices of the media playback system.
27. A method according to any one of claims 23 to 26 .
さらに、
前記ネットワークマイクロホンデバイスから、前記音声入力の方向を示す通知を受信するステップ、及び
前記受信した前記音声入力の方向を示す通知に基づいて、前記再生デバイスによって再生されるオーディオコンテンツの指向性を調整するステップ、
を含む、請求項23から請求項27のいずれか一項に記載の方法。
further,
Adjusting the directivity of audio content to be reproduced by the reproduction device based on the notification indicating the direction of the voice input from the network microphone device and the notification indicating the direction of the received voice input Step,
28. A method according to any one of claims 23 to 27 , comprising.
前記ネットワークマイクロホンデバイスに自身が受信した音声入力に対して前記音響特性を適用させるステップは、前記受信した音声入力に適用される前記音響特性に基づいて、前記再生デバイスにフィルタを適用させることを備える、
請求項23から請求項28のいずれか一項に記載の方法。
The step of causing the network microphone device to apply the acoustic characteristic to the audio input received by the network microphone device comprises applying a filter to the reproduction device based on the acoustic characteristic applied to the received audio input ,
A method according to any one of claims 23 to 28 .
前記マイクロホンデバイスに前記音響特性を提供するステップは、
前記マイクロホンデバイスに前記音響特性をメッセージとして送信すること、及び
前記マイクロホンデバイスに前記音響特性へのアクセスを提供すること、
のうちの一方を含む、請求項23から請求項29のいずれか一項に記載の方法。
Providing the acoustic characteristic to the microphone device comprises
Transmitting the acoustical properties to the microphone device as a message, and providing the microphone device with access to the acoustical properties;
30. A method according to any one of claims 23 to 29 , comprising one of:
コンピューティングデバイスの1又は複数のプロセッサによって実行されると、請求項1から請求項30のいずれか一項に記載の方法を前記コンピューティングデバイスに実行させる命令を格納している、有形の非一時的なコンピュータ可読媒体。 31. A non-transitory tangible non-transitory storing instructions which, when executed by one or more processors of a computing device, cause the computing device to perform the method according to any one of claims 1 to 30. Computer readable medium. コンピューティングデバイスであって、
1又は複数プロセッサ、及び
前記1又は複数のプロセッサによって実行されると、請求項1から請求項30のいずれか一項に記載の方法を前記コンピューティングデバイスに実行させる命令を格納しているメモリ、
を備える、コンピューティングデバイス。
A computing device,
One or more processors, and when executed by the one or more processors, a memory for storing instructions for executing the method according to the computing device of claims 1 to claims 30,
A computing device.
請求項1から請求項30のいずれか1つに記載の方法をプロセッサに実行させるためのコンピュータプログラム。31. A computer program for causing a processor to execute the method according to any one of the preceding claims.
JP2018544254A 2016-02-22 2017-02-21 Audio control of media playback system Active JP6511590B1 (en)

Applications Claiming Priority (27)

Application Number Priority Date Filing Date Title
US201662298393P 2016-02-22 2016-02-22
US201662298439P 2016-02-22 2016-02-22
US201662298433P 2016-02-22 2016-02-22
US201662298410P 2016-02-22 2016-02-22
US201662298388P 2016-02-22 2016-02-22
US201662298350P 2016-02-22 2016-02-22
US201662298425P 2016-02-22 2016-02-22
US201662298418P 2016-02-22 2016-02-22
US62/298,439 2016-02-22
US62/298,425 2016-02-22
US62/298,350 2016-02-22
US62/298,388 2016-02-22
US62/298,433 2016-02-22
US62/298,410 2016-02-22
US62/298,418 2016-02-22
US62/298,393 2016-02-22
US201662312350P 2016-03-23 2016-03-23
US62/312,350 2016-03-23
US15/098,718 2016-04-14
US15/098,718 US10097919B2 (en) 2016-02-22 2016-04-14 Music service selection
US15/098,805 US9772817B2 (en) 2016-02-22 2016-04-14 Room-corrected voice detection
US15/098,805 2016-04-14
US15/131,776 2016-04-18
US15/131,776 US9965247B2 (en) 2016-02-22 2016-04-18 Voice controlled media playback system based on user profile
US15/223,218 US9947316B2 (en) 2016-02-22 2016-07-29 Voice control of a media playback system
US15/223,218 2016-07-29
PCT/US2017/018739 WO2017147081A1 (en) 2016-02-22 2017-02-21 Voice control of a media playback system

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2019073349A Division JP7026078B2 (en) 2016-02-22 2019-04-08 Audio control of media playback system

Publications (2)

Publication Number Publication Date
JP6511590B1 true JP6511590B1 (en) 2019-05-15
JP2019514237A JP2019514237A (en) 2019-05-30

Family

ID=59629393

Family Applications (7)

Application Number Title Priority Date Filing Date
JP2018544254A Active JP6511590B1 (en) 2016-02-22 2017-02-21 Audio control of media playback system
JP2018544253A Active JP6511589B2 (en) 2016-02-22 2017-02-21 Audio response playback
JP2019073349A Active JP7026078B2 (en) 2016-02-22 2019-04-08 Audio control of media playback system
JP2019073348A Pending JP2019146229A (en) 2016-02-22 2019-04-08 Audio response playback
JP2021163622A Active JP7346516B2 (en) 2016-02-22 2021-10-04 audio response playback
JP2021181224A Pending JP2022020760A (en) 2016-02-22 2021-11-05 Voice control of media reproduction system
JP2023118922A Pending JP2023134786A (en) 2016-02-22 2023-07-21 audio response playback

Family Applications After (6)

Application Number Title Priority Date Filing Date
JP2018544253A Active JP6511589B2 (en) 2016-02-22 2017-02-21 Audio response playback
JP2019073349A Active JP7026078B2 (en) 2016-02-22 2019-04-08 Audio control of media playback system
JP2019073348A Pending JP2019146229A (en) 2016-02-22 2019-04-08 Audio response playback
JP2021163622A Active JP7346516B2 (en) 2016-02-22 2021-10-04 audio response playback
JP2021181224A Pending JP2022020760A (en) 2016-02-22 2021-11-05 Voice control of media reproduction system
JP2023118922A Pending JP2023134786A (en) 2016-02-22 2023-07-21 audio response playback

Country Status (8)

Country Link
US (17) US9772817B2 (en)
EP (4) EP4258690A3 (en)
JP (7) JP6511590B1 (en)
KR (10) KR20220103824A (en)
CN (4) CN109076284B (en)
AU (11) AU2017222436B2 (en)
CA (2) CA3015496C (en)
WO (2) WO2017147075A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022534692A (en) * 2019-05-24 2022-08-03 エルジー エレクトロニクス インコーポレイティド A method for controlling a device using voice recognition, and a device that implements the same
US11789691B2 (en) 2021-06-16 2023-10-17 Kyndryl, Inc. Audio management for a priority computing device application

Families Citing this family (382)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11204729B2 (en) 2000-11-01 2021-12-21 Flexiworld Technologies, Inc. Internet based digital content services for pervasively providing protected digital content to smart devices based on having subscribed to the digital content service
US10915296B2 (en) 2000-11-01 2021-02-09 Flexiworld Technologies, Inc. Information apparatus that includes a touch sensitive screen interface for managing or replying to e-mails
US7609402B2 (en) * 2001-01-19 2009-10-27 Flexiworld, Inc. Methods for universal data output
US11467856B2 (en) 2002-12-12 2022-10-11 Flexiworld Technologies, Inc. Portable USB device for internet access service
US6947995B2 (en) 2000-11-20 2005-09-20 Flexiworld Technologies, Inc. Mobile and pervasive output server
WO2004055638A2 (en) 2002-12-12 2004-07-01 Flexiworld Technologies, Inc. Wireless communication between computing devices
EP1618598A4 (en) 2003-04-11 2008-07-16 Flexiworld Technologies Inc Autorun for integrated circuit memory component
US10972536B2 (en) 2004-06-04 2021-04-06 Apple Inc. System and method for synchronizing media presentation at multiple recipients
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8689128B2 (en) 2009-03-16 2014-04-01 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US10706096B2 (en) 2011-08-18 2020-07-07 Apple Inc. Management of local and remote media items
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9674587B2 (en) 2012-06-26 2017-06-06 Sonos, Inc. Systems and methods for networked music playback including remote add to queue
KR20150104615A (en) 2013-02-07 2015-09-15 애플 인크. Voice trigger for a digital assistant
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9361371B2 (en) 2013-04-16 2016-06-07 Sonos, Inc. Playlist update in a media playback system
US9247363B2 (en) 2013-04-16 2016-01-26 Sonos, Inc. Playback queue transfer in a media playback system
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
CN105264524B (en) 2013-06-09 2019-08-02 苹果公司 For realizing the equipment, method and graphic user interface of the session continuity of two or more examples across digital assistants
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014003653B4 (en) 2013-08-06 2024-04-18 Apple Inc. Automatically activate intelligent responses based on activities from remote devices
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
KR102201095B1 (en) 2014-05-30 2021-01-08 애플 인크. Transition from use of one device to another
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10339293B2 (en) 2014-08-15 2019-07-02 Apple Inc. Authenticated device used to unlock another device
US9521497B2 (en) 2014-08-21 2016-12-13 Google Technology Holdings LLC Systems and methods for equalizing audio for playback on an electronic device
CN113824998A (en) 2014-09-02 2021-12-21 苹果公司 Music user interface
WO2016036436A1 (en) 2014-09-02 2016-03-10 Apple Inc. Stopwatch and timer user interfaces
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US9329831B1 (en) 2015-02-25 2016-05-03 Sonos, Inc. Playback expansion
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10001965B1 (en) 2015-09-03 2018-06-19 Sonos, Inc. Playback system join with base
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9811314B2 (en) 2016-02-22 2017-11-07 Sonos, Inc. Metadata exchange involving a networked playback system and a networked microphone system
US9772817B2 (en) 2016-02-22 2017-09-26 Sonos, Inc. Room-corrected voice detection
US10097939B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Compensation for speaker nonlinearities
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US20190057703A1 (en) * 2016-02-29 2019-02-21 Faraday&Future Inc. Voice assistance system for devices of an ecosystem
EP3437329A4 (en) * 2016-03-30 2019-10-23 Hewlett-Packard Development Company, L.P. Indicator to indicate a state of a personal assistant application
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US9978390B2 (en) 2016-06-09 2018-05-22 Sonos, Inc. Dynamic player selection for audio signal processing
US20220043986A1 (en) * 2016-06-09 2022-02-10 Apple Inc. Intelligent automated assistant in a home environment
DK179309B1 (en) * 2016-06-09 2018-04-23 Apple Inc Intelligent automated assistant in a home environment
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10091545B1 (en) * 2016-06-27 2018-10-02 Amazon Technologies, Inc. Methods and systems for detecting audio output of associated device
EP3264802A1 (en) * 2016-06-30 2018-01-03 Nokia Technologies Oy Spatial audio processing for moving sound sources
US10152969B2 (en) * 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
WO2018022085A1 (en) * 2016-07-29 2018-02-01 Hewlett-Packard Development Company, L.P. Identification of preferred communication devices
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10492156B2 (en) * 2016-08-31 2019-11-26 Inizio Capital Llc Dynamic direct multinode (DDM) wireless network
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US9794720B1 (en) 2016-09-22 2017-10-17 Sonos, Inc. Acoustic position measurement
US10043516B2 (en) * 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
CN106656689B (en) * 2016-10-17 2018-10-30 珠海格力电器股份有限公司 A kind of control method and terminal of the smart home based on terminal
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US10127908B1 (en) * 2016-11-11 2018-11-13 Amazon Technologies, Inc. Connected accessory for a voice-controlled device
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US11430434B1 (en) * 2017-02-15 2022-08-30 Amazon Technologies, Inc. Intelligent privacy protection mediation
WO2018163378A1 (en) * 2017-03-09 2018-09-13 ヤマハ株式会社 Operation device, command processing device, and content reproduction system
WO2018168200A1 (en) * 2017-03-13 2018-09-20 ソニー株式会社 Terminal device and communication method
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
CN107015781B (en) * 2017-03-28 2021-02-19 联想(北京)有限公司 Speech recognition method and system
US10147439B1 (en) * 2017-03-30 2018-12-04 Amazon Technologies, Inc. Volume adjustment for listening environment
TWI689865B (en) * 2017-04-28 2020-04-01 塞席爾商元鼎音訊股份有限公司 Smart voice system, method of adjusting output voice and computre readable memory medium
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. User interface for correcting recognition errors
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. Low-latency intelligent automated assistant
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
AU2018203023B2 (en) * 2017-05-16 2019-09-19 Apple Inc. Transferring playback queues between devices
US20200270871A1 (en) 2019-02-27 2020-08-27 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
CN111343060B (en) 2017-05-16 2022-02-11 苹果公司 Method and interface for home media control
EP3593538B1 (en) 2017-05-16 2021-12-08 Apple Inc. Credential delegation
US20220279063A1 (en) 2017-05-16 2022-09-01 Apple Inc. Methods and interfaces for home media control
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
DK179560B1 (en) * 2017-05-16 2019-02-18 Apple Inc. Far-field extension for digital assistant services
US10564928B2 (en) 2017-06-02 2020-02-18 Rovi Guides, Inc. Systems and methods for generating a volume- based response for multiple voice-operated user devices
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US10847163B2 (en) * 2017-06-20 2020-11-24 Lenovo (Singapore) Pte. Ltd. Provide output reponsive to proximate user input
US10038419B1 (en) 2017-07-06 2018-07-31 Bose Corporation Last mile equalization
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US20190061336A1 (en) * 2017-08-29 2019-02-28 Xyzprinting, Inc. Three-dimensional printing method and three-dimensional printing apparatus using the same
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10438594B2 (en) * 2017-09-08 2019-10-08 Amazon Technologies, Inc. Administration of privileges by speech for voice assistant system
US10902847B2 (en) 2017-09-12 2021-01-26 Spotify Ab System and method for assessing and correcting potential underserved content in natural language understanding applications
US10475454B2 (en) * 2017-09-18 2019-11-12 Motorola Mobility Llc Directional display and audio broadcast
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10985982B2 (en) * 2017-09-27 2021-04-20 Sonos, Inc. Proximal playback devices
US10446165B2 (en) 2017-09-27 2019-10-15 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10545720B2 (en) 2017-09-29 2020-01-28 Spotify Ab Automatically generated media preview
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10748533B2 (en) 2017-11-08 2020-08-18 Harman International Industries, Incorporated Proximity aware voice agent
US10458840B2 (en) * 2017-11-08 2019-10-29 Harman International Industries, Incorporated Location classification for intelligent personal assistant
CN107895016B (en) * 2017-11-14 2022-02-15 百度在线网络技术(北京)有限公司 Method and device for playing multimedia
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
KR102527278B1 (en) * 2017-12-04 2023-04-28 삼성전자주식회사 Electronic apparatus, method for controlling thereof and the computer readable recording medium
US10797670B2 (en) * 2017-12-04 2020-10-06 Lutron Technology Company, LLC Audio device with dynamically responsive volume
WO2019112660A1 (en) * 2017-12-06 2019-06-13 Google Llc Ducking and erasing audio from nearby devices
WO2019112623A1 (en) * 2017-12-08 2019-06-13 Google Llc Content source allocation between computing devices
US11182122B2 (en) * 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US10880650B2 (en) 2017-12-10 2020-12-29 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
US10425247B2 (en) 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
CN111466121A (en) * 2017-12-12 2020-07-28 乐威指南公司 System and method for modifying playback of a media asset in response to a spoken command unrelated to the playback of the media asset
EP3729770B1 (en) * 2017-12-22 2022-07-20 British Telecommunications public limited company Managing streamed audio communication sessions
CN107845388B (en) * 2017-12-25 2021-06-01 青岛海信移动通信技术股份有限公司 Voice recognition method and device
CN111527541A (en) 2017-12-27 2020-08-11 乐威指南公司 System and method for identifying user based on voice data and media consumption data
CN108124510B (en) * 2017-12-29 2020-06-30 深圳市名宗科技有限公司 Wireless pairing system and pairing method
WO2019128550A1 (en) * 2017-12-31 2019-07-04 Midea Group Co., Ltd. Method and system for controlling home assistant devices
US10887387B2 (en) * 2018-01-05 2021-01-05 Barrett Adams Digital media synchronization system and method
EP3776880A4 (en) * 2018-01-08 2022-06-22 Polk Audio, LLC Synchronized voice-control module, loudspeaker system and method for incorporating vc functionality into a separate loudspeaker system
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
US20190235831A1 (en) * 2018-01-31 2019-08-01 Amazon Technologies, Inc. User input processing restriction in a speech processing system
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
WO2019152722A1 (en) * 2018-01-31 2019-08-08 Sonos, Inc. Device designation of playback and network microphone device arrangements
US10157042B1 (en) * 2018-02-06 2018-12-18 Amazon Technologies, Inc. Audio output control
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
JP7130761B2 (en) 2018-03-07 2022-09-05 グーグル エルエルシー System and method for voice-based activation of custom device actions
US11183182B2 (en) * 2018-03-07 2021-11-23 Google Llc Systems and methods for voice-based initiation of custom device actions
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
CN108566634B (en) * 2018-03-30 2021-06-25 深圳市冠旭电子股份有限公司 Method and device for reducing continuous awakening delay of Bluetooth sound box and Bluetooth sound box
CN108600911B (en) 2018-03-30 2021-05-18 联想(北京)有限公司 Output method and electronic equipment
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US10993274B2 (en) 2018-03-30 2021-04-27 Apple Inc. Pairing devices by proxy
US11297369B2 (en) 2018-03-30 2022-04-05 Apple Inc. Remotely controlling playback devices
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US11308947B2 (en) 2018-05-07 2022-04-19 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US10803864B2 (en) 2018-05-07 2020-10-13 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10847178B2 (en) 2018-05-18 2020-11-24 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
EP3752910A4 (en) * 2018-05-25 2021-04-14 Samsung Electronics Co., Ltd. Method and apparatus for providing an intelligent response
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. Virtual assistant operation in multi-device environments
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK179822B1 (en) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10496705B1 (en) 2018-06-03 2019-12-03 Apple Inc. Accelerated task performance
JP2021144065A (en) * 2018-06-12 2021-09-24 ソニーグループ株式会社 Information processing device and information processing method
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
KR102580521B1 (en) * 2018-07-13 2023-09-21 삼성전자주식회사 Electronic apparatus and method of adjusting sound volume thereof
US11341126B2 (en) 2018-07-24 2022-05-24 MachEye, Inc. Modifying a scope of a canonical query
US11853107B2 (en) 2018-07-24 2023-12-26 MachEye, Inc. Dynamic phase generation and resource load reduction for a query
US11282020B2 (en) * 2018-07-24 2022-03-22 MachEye, Inc. Dynamic playback of synchronized narrated analytics playlists
US11816436B2 (en) 2018-07-24 2023-11-14 MachEye, Inc. Automated summarization of extracted insight data
US11841854B2 (en) 2018-07-24 2023-12-12 MachEye, Inc. Differentiation of search results for accurate query output
US11651043B2 (en) * 2018-07-24 2023-05-16 MachEye, Inc. Leveraging analytics across disparate computing devices
US11423890B2 (en) 2018-08-21 2022-08-23 Google Llc Dynamic and/or context-specific hot words to invoke automated assistant
US20200168317A1 (en) 2018-08-22 2020-05-28 Centre For Addiction And Mental Health Tool for assisting individuals experiencing auditory hallucinations to differentiate between hallucinations and ambient sounds
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US11206484B2 (en) * 2018-08-28 2021-12-21 Sonos, Inc. Passive speaker authentication
CN109147800A (en) * 2018-08-30 2019-01-04 百度在线网络技术(北京)有限公司 Answer method and device
KR102575697B1 (en) * 2018-09-06 2023-09-06 주식회사 케이티 Common device, method and computer program for controlling sound
US10587430B1 (en) 2018-09-14 2020-03-10 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
CN109117052A (en) * 2018-09-21 2019-01-01 深圳市二八智能家居有限公司 The control method and device of multizone music
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11152003B2 (en) * 2018-09-27 2021-10-19 International Business Machines Corporation Routing voice commands to virtual assistants
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US10871815B2 (en) 2018-09-28 2020-12-22 Sonos, Inc. Network identification of portable electronic devices while changing power states
US11423920B2 (en) * 2018-09-28 2022-08-23 Rovi Guides, Inc. Methods and systems for suppressing vocal tracks
US10692518B2 (en) 2018-09-29 2020-06-23 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
GB2577879B (en) 2018-10-08 2022-08-24 B & W Group Ltd Content playback system
US11416209B2 (en) 2018-10-15 2022-08-16 Sonos, Inc. Distributed synchronization
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10833886B2 (en) * 2018-11-07 2020-11-10 International Business Machines Corporation Optimal device selection for streaming content
DE102018128162A1 (en) * 2018-11-12 2020-05-14 Sennheiser Electronic Gmbh & Co. Kg Method for receiving audio data streams with mobile devices and appropriately configured mobile device
EP3654249A1 (en) 2018-11-15 2020-05-20 Snips Dilated convolutions and gating for efficient keyword spotting
US10958698B2 (en) * 2018-11-16 2021-03-23 Spotify Ab Responding to ambiguous play requests
WO2020118026A1 (en) * 2018-12-06 2020-06-11 D&M Holdings Inc. Virtual media service
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11393478B2 (en) 2018-12-12 2022-07-19 Sonos, Inc. User specific context switching
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11079916B2 (en) * 2019-01-14 2021-08-03 Microsoft Technology Licensing, Llc Multiple source media management
WO2020150595A1 (en) 2019-01-18 2020-07-23 Sonos, Inc. Power management techniques for waking-up processors in media playback systems
US11740854B2 (en) * 2019-01-20 2023-08-29 Sonos, Inc. Playing media content in response to detecting items having corresponding media content associated therewith
KR20200092763A (en) * 2019-01-25 2020-08-04 삼성전자주식회사 Electronic device for processing user speech and controlling method thereof
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US10694309B1 (en) 2019-02-12 2020-06-23 Sonos, Inc. Systems and methods for authenticating and calibrating passive speakers with a graphical user interface
US11086589B2 (en) 2019-02-13 2021-08-10 Sonos, Inc. Systems and methods for podcast playback
USD994694S1 (en) 2019-02-13 2023-08-08 Sonos, Inc. Display screen or portion thereof with graphical user interface for podcasts
WO2020176893A1 (en) * 2019-02-28 2020-09-03 Sonos, Inc. Playback transitions between audio devices
EP3709194A1 (en) 2019-03-15 2020-09-16 Spotify AB Ensemble-based data comparison
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
CN110069657A (en) * 2019-04-30 2019-07-30 百度在线网络技术(北京)有限公司 A kind of interactive music order method, device and terminal
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11544463B2 (en) 2019-05-09 2023-01-03 Intel Corporation Time asynchronous spoken intent detection
US11170774B2 (en) * 2019-05-21 2021-11-09 Qualcomm Incorproated Virtual assistant device
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
JP7350092B2 (en) * 2019-05-22 2023-09-25 ソロズ・テクノロジー・リミテッド Microphone placement for eyeglass devices, systems, apparatus, and methods
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11363382B2 (en) * 2019-05-31 2022-06-14 Apple Inc. Methods and user interfaces for audio synchronization
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
US11363071B2 (en) 2019-05-31 2022-06-14 Apple Inc. User interfaces for managing a local network
US10867608B1 (en) * 2019-05-31 2020-12-15 Apple Inc. Multi-user configuration
KR102656129B1 (en) 2019-05-31 2024-04-11 애플 인크. User interfaces for audio media control
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
CN112017650B (en) * 2019-05-31 2024-05-24 百度在线网络技术(北京)有限公司 Voice control method and device of electronic equipment, computer equipment and storage medium
US10904029B2 (en) * 2019-05-31 2021-01-26 Apple Inc. User interfaces for managing controllable external devices
US10996917B2 (en) 2019-05-31 2021-05-04 Apple Inc. User interfaces for audio media control
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. User activity shortcut suggestions
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US11943594B2 (en) 2019-06-07 2024-03-26 Sonos Inc. Automatically allocating audio portions to playback devices
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
WO2021010884A1 (en) * 2019-07-18 2021-01-21 Dirac Research Ab Intelligent audio control platform
WO2021021096A1 (en) * 2019-07-29 2021-02-04 Siemens Industry, Inc. Building automation system for controlling conditions of a room
JP2022542388A (en) * 2019-07-30 2022-10-03 ドルビー ラボラトリーズ ライセンシング コーポレイション Coordination of audio equipment
US11968268B2 (en) 2019-07-30 2024-04-23 Dolby Laboratories Licensing Corporation Coordination of audio devices
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
KR20210015234A (en) * 2019-08-01 2021-02-10 삼성전자주식회사 Electronic apparatus, and method of controlling to execute function according to voice command thereof
US20220276828A1 (en) 2019-08-09 2022-09-01 Allen Antony Power management and distributed audio processing techniques for playback devices
US11094319B2 (en) 2019-08-30 2021-08-17 Spotify Ab Systems and methods for generating a cleaned version of ambient sound
US11464055B2 (en) 2019-09-04 2022-10-04 Sonos, Inc. Systems and methods for configuring a media player device on a local network using a graphical user interface
KR20210031265A (en) 2019-09-11 2021-03-19 삼성전자주식회사 Electronic device and operating method for the same
US11483085B1 (en) * 2019-09-16 2022-10-25 Amazon Technologies, Inc. Device time synchronization by networking device
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
US11551670B1 (en) 2019-09-26 2023-01-10 Sonos, Inc. Systems and methods for generating labeled data to facilitate configuration of network microphone devices
US11172329B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for target device prediction
US11749265B2 (en) * 2019-10-04 2023-09-05 Disney Enterprises, Inc. Techniques for incremental computer-based natural language understanding
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
KR102135859B1 (en) * 2019-10-24 2020-07-20 주식회사 유니온플레이스 Apparatus of providing personalized virtual assistant
US10891105B1 (en) 2019-11-11 2021-01-12 Sonos, Inc. Systems and methods for displaying a transitional graphical user interface while loading media information for a networked media playback system
USD923656S1 (en) 2019-11-11 2021-06-29 Sonos, Inc. Display screen or portion thereof with graphical user interface
US11636855B2 (en) 2019-11-11 2023-04-25 Sonos, Inc. Media content based on operational data
US11204737B2 (en) 2019-11-11 2021-12-21 Sonos, Inc. Playback queues for shared experiences
US11656838B2 (en) * 2019-11-11 2023-05-23 Apple Inc. User interfaces for time period-based curated playlists
WO2021112646A1 (en) 2019-12-06 2021-06-10 엘지전자 주식회사 Method for transmitting audio data by using short-range wireless communication in wireless communication system, and apparatus for same
US11089379B2 (en) * 2019-12-11 2021-08-10 Apple Inc. Preload hinting for low latency HTTP live streaming system
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
CN110764484A (en) * 2019-12-24 2020-02-07 南京创维信息技术研究院有限公司 Household equipment control system
US11129011B2 (en) * 2019-12-26 2021-09-21 Process Integration System Inc. System and method to detect and report to the authorities high level sounds that infringe the law
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11308959B2 (en) 2020-02-11 2022-04-19 Spotify Ab Dynamic adjustment of wake word acceptance tolerance thresholds in voice-controlled devices
US11533116B2 (en) 2020-03-19 2022-12-20 Sonos, Inc. Systems and methods for state detection via wireless radios
CN111540350B (en) * 2020-03-31 2024-03-01 北京小米移动软件有限公司 Control method, device and storage medium of intelligent voice control equipment
AU2021259316B2 (en) 2020-04-21 2023-11-23 Sonos, Inc. Priority media content
US11397967B2 (en) 2020-04-24 2022-07-26 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
US11540011B2 (en) 2020-04-24 2022-12-27 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
US11729464B2 (en) 2020-04-24 2023-08-15 Capital One Services, Llc Methods and systems for transition-coded media, measuring engagement of transition-coded media, and distribution of components of transition-coded media
USD956593S1 (en) * 2020-04-28 2022-07-05 Vulcan, Inc. Test station terminal
US11038934B1 (en) 2020-05-11 2021-06-15 Apple Inc. Digital assistant hardware abstraction
US11513667B2 (en) 2020-05-11 2022-11-29 Apple Inc. User interface for audio message
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11810578B2 (en) 2020-05-11 2023-11-07 Apple Inc. Device arbitration for digital assistant-based intercom systems
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
CN113765754A (en) * 2020-06-02 2021-12-07 云米互联科技(广东)有限公司 Audio synchronous playing method and device and computer readable storage medium
USD954019S1 (en) 2020-06-05 2022-06-07 Sonos, Inc. Headphone
US20210399578A1 (en) 2020-06-17 2021-12-23 Sonos, Inc. Wireless charger for playback devices
CN111726681B (en) * 2020-06-19 2021-11-02 海信视像科技股份有限公司 Audio output device selection method and display device
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
AU2021331071A1 (en) 2020-08-25 2023-05-04 Sonos, Inc. Smart networking techniques for portable playback devices
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
KR102218201B1 (en) * 2020-09-01 2021-02-23 주식회사 비젼코스모 Intelligent sound system apparatus and operating method thereof
EP4211904A1 (en) 2020-09-09 2023-07-19 Sonos Inc. Wearable audio device within a distributed audio playback system
US20220104015A1 (en) 2020-09-25 2022-03-31 Sonos, Inc. Intelligent Setup for Playback Devices
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
US20220101870A1 (en) * 2020-09-29 2022-03-31 Zinfanite Technologies, Inc. Noise filtering and voice isolation device and method
US20220108695A1 (en) * 2020-10-01 2022-04-07 Arris Enterprises Llc System and method for controlling a media device to provide an improved sonic environment for the reception of a voice command
DE202021105460U1 (en) 2020-10-08 2022-01-17 Sonos, Inc. Mechanism for attaching headphone ear pads
USD991214S1 (en) 2020-10-08 2023-07-04 Sonos, Inc. Headphone ear cushion attachment mechanism
US11694684B1 (en) * 2020-11-10 2023-07-04 Amazon Technologies, Inc. Generation of computing functionality using devices
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
US11984124B2 (en) * 2020-11-13 2024-05-14 Apple Inc. Speculative task flow execution
CN112383757B (en) * 2020-11-16 2022-07-05 四川九洲空管科技有限责任公司 Unmanned aerial vehicle comprehensive monitoring data multi-mode playback method and system
US11562748B2 (en) * 2020-12-01 2023-01-24 Google Llc Detecting and suppressing commands in media that may trigger another automated assistant
WO2022120091A2 (en) * 2020-12-03 2022-06-09 Dolby Laboratories Licensing Corporation Progressive calculation and application of rendering configurations for dynamic applications
EP4231286A4 (en) * 2020-12-11 2024-03-27 Samsung Electronics Co Ltd Electronic device and control method thereof
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
EP4305864A1 (en) 2021-03-08 2024-01-17 Sonos, Inc. Updating network configuration parameters
US20240160401A1 (en) 2021-03-08 2024-05-16 Sonos, Inc. Off-LAN Experience for Portables
JP2024520930A (en) 2021-05-10 2024-05-27 ソノズ インコーポレイテッド Audio Encryption in Media Playback Systems
EP4338421A1 (en) 2021-05-10 2024-03-20 Sonos Inc. Managing content quality and related characteristics of a media playback system
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
US11960615B2 (en) 2021-06-06 2024-04-16 Apple Inc. Methods and user interfaces for voice-based user profile management
US11599330B2 (en) * 2021-06-29 2023-03-07 Blackberry Limited Audio management for guests
US11575758B1 (en) 2021-09-13 2023-02-07 Amazon Technologies, Inc. Session-based device grouping
WO2023039294A2 (en) 2021-09-13 2023-03-16 Sonos, Inc. Techniques for flexible control of playback devices
WO2023056028A1 (en) 2021-09-30 2023-04-06 Sonos, Inc. Media content search in connection with multiple media content services
WO2023056026A1 (en) 2021-09-30 2023-04-06 Sonos, Inc. Enabling and disabling microphones and voice assistants
WO2023056299A1 (en) * 2021-09-30 2023-04-06 Sonos, Inc. Spatial mapping of media playback system components
WO2024073428A1 (en) 2022-09-26 2024-04-04 Sonos, Inc. Systems and methods for disturbance localization
WO2024073415A1 (en) 2022-09-27 2024-04-04 Sonos, Inc. Configurable multi-band home theater architecture
WO2024073651A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Method of configuring a portable playback device, corresponding playback device and playback system
US20240111483A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Dynamic Volume Control
WO2024073297A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Generative audio playback via wearable playback devices
WO2024073649A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Network handoff for portable playback devices
WO2024073354A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Localization techniques for playback devices
WO2024073647A1 (en) * 2022-09-30 2024-04-04 Sonos, Inc. Voice disambiguation techniques in media playback systems
WO2024073674A1 (en) 2022-09-30 2024-04-04 Sonos, Inc. Adjustable mounting assembly
US11838582B1 (en) * 2022-12-12 2023-12-05 Google Llc Media arbitration

Family Cites Families (1233)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US999715A (en) 1911-05-31 1911-08-01 Hans Gundersen Flying-machine.
US3014423A (en) 1959-11-27 1961-12-26 Jersey Prod Res Co Apparatus for drilling boreholes with explosive charges
JPS57116999U (en) * 1981-01-14 1982-07-20
JPS5988705U (en) * 1982-12-06 1984-06-15 株式会社明電舎 alarm circuit
US4941187A (en) 1984-02-03 1990-07-10 Slater Robert W Intercom apparatus for integrating disparate audio sources for use in light aircraft or similar high noise environments
US4741038A (en) 1986-09-26 1988-04-26 American Telephone And Telegraph Company, At&T Bell Laboratories Sound location arrangement
JPS63301998A (en) 1987-06-02 1988-12-08 日本電気株式会社 Voice recognition responder
US4974213A (en) 1988-12-16 1990-11-27 Siwecki Thomas L Passive active underwater sound detection apparatus
US5036538A (en) 1989-11-22 1991-07-30 Telephonics Corporation Multi-station voice recognition and processing system
US5440644A (en) 1991-01-09 1995-08-08 Square D Company Audio distribution system having programmable zoning features
DE69220342T2 (en) 1991-12-20 1997-11-20 Matsushita Electric Ind Co Ltd Loudspeaker for bass reproduction
US6311157B1 (en) 1992-12-31 2001-10-30 Apple Computer, Inc. Assigning meanings to utterances in a speech recognition system
JPH0883091A (en) 1994-09-09 1996-03-26 Matsushita Electric Ind Co Ltd Voice recognition device
US5740260A (en) 1995-05-22 1998-04-14 Presonus L.L.P. Midi to analog sound processor interface
US6070140A (en) 1995-06-05 2000-05-30 Tran; Bao Q. Speech recognizer
US5857172A (en) 1995-07-31 1999-01-05 Microsoft Corporation Activation control of a speech recognizer through use of a pointing device
US7174299B2 (en) 1995-08-18 2007-02-06 Canon Kabushiki Kaisha Speech recognition system, speech recognition apparatus, and speech recognition method
FR2739736B1 (en) 1995-10-05 1997-12-05 Jean Laroche PRE-ECHO OR POST-ECHO REDUCTION METHOD AFFECTING AUDIO RECORDINGS
JP3094900B2 (en) 1996-02-20 2000-10-03 ヤマハ株式会社 Network device and data transmission / reception method
US6404811B1 (en) 1996-05-13 2002-06-11 Tektronix, Inc. Interactive multimedia system
JP3679526B2 (en) 1996-10-31 2005-08-03 キヤノン株式会社 Image sharing apparatus, screen control method, and computer-readable memory
US6469633B1 (en) 1997-01-06 2002-10-22 Openglobe Inc. Remote control of electronic devices
US6078886A (en) 1997-04-14 2000-06-20 At&T Corporation System and method for providing remote automatic speech recognition services via a packet network
US6611537B1 (en) 1997-05-30 2003-08-26 Centillium Communications, Inc. Synchronous network for digital media streams
US6408078B1 (en) 1997-10-30 2002-06-18 Maximilian Hobelsberger Active reactive acoustical elements
US6088459A (en) 1997-10-30 2000-07-11 Hobelsberger; Maximilian Hans Loudspeaker system with simulated baffle for improved base reproduction
US6032202A (en) 1998-01-06 2000-02-29 Sony Corporation Of Japan Home audio/video network with two level device control
US20020002039A1 (en) 1998-06-12 2002-01-03 Safi Qureshey Network-enabled audio device
US6301603B1 (en) 1998-02-17 2001-10-09 Euphonics Incorporated Scalable audio processing on a heterogeneous processor array
US6953886B1 (en) 1998-06-17 2005-10-11 Looney Productions, Llc Media organizer and entertainment center
IL127569A0 (en) 1998-09-16 1999-10-28 Comsense Technologies Ltd Interactive toys
US6839410B2 (en) 1998-09-01 2005-01-04 At&T Corp. Method and apparatus for setting user communication parameters based on voice identification of users
CN1151488C (en) 1998-10-02 2004-05-26 国际商业机器公司 System for efficient voice navigation through generic hierarchical objects
US20020116196A1 (en) 1998-11-12 2002-08-22 Tran Bao Q. Speech recognizer
US6243676B1 (en) 1998-12-23 2001-06-05 Openwave Systems Inc. Searching and retrieving multimedia information
US7130616B2 (en) 2000-04-25 2006-10-31 Simple Devices System and method for providing content, management, and interactivity for client devices
US6256554B1 (en) 1999-04-14 2001-07-03 Dilorenzo Mark Multi-room entertainment system with in-room media player/dispenser
US6414251B1 (en) 1999-04-19 2002-07-02 Breck Colquett Weighing apparatus and method having automatic tolerance analysis and calibration
US7657910B1 (en) 1999-07-26 2010-02-02 E-Cast Inc. Distributed electronic entertainment method and apparatus
GB2352933A (en) 1999-07-31 2001-02-07 Ibm Speech encoding in a client server system
US6542868B1 (en) 1999-09-23 2003-04-01 International Business Machines Corporation Audio notification management system
US6937977B2 (en) 1999-10-05 2005-08-30 Fastmobile, Inc. Method and apparatus for processing an input speech signal during presentation of an output audio signal
US6611604B1 (en) 1999-10-22 2003-08-26 Stillwater Designs & Audio, Inc. Ultra low frequency transducer and loud speaker comprising same
US7725307B2 (en) 1999-11-12 2010-05-25 Phoenix Solutions, Inc. Query engine for processing voice based queries including semantic decoding
US6594630B1 (en) 1999-11-19 2003-07-15 Voice Signal Technologies, Inc. Voice-activated control for electrical device
US6522886B1 (en) 1999-11-22 2003-02-18 Qwest Communications International Inc. Method and system for simultaneously sharing wireless communications among multiple wireless handsets
US6219645B1 (en) 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
ATE354247T1 (en) 1999-12-03 2007-03-15 Ericsson Telefon Ab L M METHOD FOR PLAYING AUDIO SIGNALS IN TWO PHONES SIMULTANEOUSLY
KR20010054622A (en) 1999-12-07 2001-07-02 서평원 Method increasing recognition rate in voice recognition system
US20010042107A1 (en) 2000-01-06 2001-11-15 Palm Stephen R. Networked audio player transport protocol and architecture
US7661107B1 (en) 2000-01-18 2010-02-09 Advanced Micro Devices, Inc. Method and apparatus for dynamic allocation of processing resources
WO2001053994A2 (en) 2000-01-24 2001-07-26 Friskit, Inc. Streaming media search and playback system
AU2001231115A1 (en) 2000-01-24 2001-07-31 Zapmedia, Inc. System and method for the distribution and sharing of media assets between mediaplayers devices
ATE372625T1 (en) 2000-02-18 2007-09-15 Bridgeco Ag MULTI-GATE BRIDGE FOR DELIVERING NETWORK CONNECTIONS
JP2001236093A (en) 2000-02-24 2001-08-31 Omron Corp Electronic equipment controller and electronic equipment
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US6631410B1 (en) 2000-03-16 2003-10-07 Sharp Laboratories Of America, Inc. Multimedia wired/wireless content synchronization system and method
US20020022453A1 (en) 2000-03-31 2002-02-21 Horia Balog Dynamic protocol selection and routing of content to mobile devices
GB2363036B (en) 2000-05-31 2004-05-12 Nokia Mobile Phones Ltd Conference call method and apparatus therefor
US20050164664A1 (en) 2000-07-21 2005-07-28 Difonzo Daniel F. Dynamically reconfigurable wireless networks (DRWiN) and methods for operating such networks
US20040105566A1 (en) 2000-07-27 2004-06-03 International Business Machines Corporation Body set type speaker unit
WO2002023389A1 (en) 2000-09-15 2002-03-21 Robert Fish Systems and methods for translating an item of information using a distal computer
US6934756B2 (en) 2000-11-01 2005-08-23 International Business Machines Corporation Conversational networking via transport, coding and control conversational protocols
US20020054685A1 (en) 2000-11-09 2002-05-09 Carlos Avendano System for suppressing acoustic echoes and interferences in multi-channel audio systems
US20020072816A1 (en) 2000-12-07 2002-06-13 Yoav Shdema Audio system
US7016847B1 (en) 2000-12-08 2006-03-21 Ben Franklin Patent Holdings L.L.C. Open architecture for a voice user interface
US6778869B2 (en) 2000-12-11 2004-08-17 Sony Corporation System and method for request, delivery and use of multimedia files for audiovisual entertainment in the home environment
US7143939B2 (en) 2000-12-19 2006-12-05 Intel Corporation Wireless music device and method therefor
US20020124097A1 (en) 2000-12-29 2002-09-05 Isely Larson J. Methods, systems and computer program products for zone based distribution of audio signals
US20020095294A1 (en) * 2001-01-12 2002-07-18 Rick Korfin Voice user interface for controlling a consumer media data storage and playback device
US7617099B2 (en) 2001-02-12 2009-11-10 FortMedia Inc. Noise suppression by two-channel tandem spectrum modification for speech signal in an automobile
GB2372864B (en) 2001-02-28 2005-09-07 Vox Generation Ltd Spoken language interface
US6885989B2 (en) 2001-04-02 2005-04-26 International Business Machines Corporation Method and system for collaborative speech recognition for small-area network
US6757517B2 (en) 2001-05-10 2004-06-29 Chin-Chi Chang Apparatus and method for coordinated music playback in wireless ad-hoc networks
US7136934B2 (en) 2001-06-19 2006-11-14 Request, Inc. Multimedia synchronization method and device
KR100420069B1 (en) 2001-08-23 2004-02-25 한국과학기술원 Method for developing adaptive menus
US6892083B2 (en) 2001-09-05 2005-05-10 Vocera Communications Inc. Voice-controlled wireless communications system and method
US7536704B2 (en) 2001-10-05 2009-05-19 Opentv, Inc. Method and apparatus automatic pause and resume of playback for a popup on interactive TV
CA2408045A1 (en) 2001-10-16 2003-04-16 Audio Products International Corp. Loudspeaker with large displacement motional feedback
CA2407123C (en) 2001-10-16 2007-12-18 Audio Products International Corp. Low distortion loudspeaker cone suspension
US7006639B2 (en) 2001-11-20 2006-02-28 Maximilian Hans Hobelsberger Active noise-attenuating duct element
US7103542B2 (en) 2001-12-14 2006-09-05 Ben Franklin Patent Holding Llc Automatically improving a voice recognition system
AU2002361767A1 (en) 2001-12-17 2003-07-09 Becomm Corporation Method and system for synchronization of content rendering
DE10163213A1 (en) * 2001-12-21 2003-07-10 Philips Intellectual Property Method for operating a speech recognition system
US8103009B2 (en) 2002-01-25 2012-01-24 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
US7853341B2 (en) 2002-01-25 2010-12-14 Ksc Industries, Inc. Wired, wireless, infrared, and powerline audio entertainment systems
JP4086280B2 (en) 2002-01-29 2008-05-14 株式会社東芝 Voice input system, voice input method, and voice input program
WO2003071818A2 (en) 2002-02-20 2003-08-28 Meshnetworks, Inc. A system and method for routing 802.11 data traffic across channels to increase ad-hoc network capacity
JP3715584B2 (en) 2002-03-28 2005-11-09 富士通株式会社 Device control apparatus and device control method
US7657224B2 (en) 2002-05-06 2010-02-02 Syncronation, Inc. Localized audio networks and associated digital accessories
AU2003241405B2 (en) 2002-05-09 2008-06-19 Netstreams, Llc Audio network distribution system
US6961423B2 (en) 2002-06-24 2005-11-01 Freescale Semiconductor, Inc. Method and apparatus for performing adaptive filtering
JP3815388B2 (en) 2002-06-25 2006-08-30 株式会社デンソー Speech recognition system and terminal
US8060225B2 (en) 2002-07-31 2011-11-15 Hewlett-Packard Development Company, L. P. Digital audio device
DE60210177T2 (en) 2002-08-14 2006-12-28 Sony Deutschland Gmbh Bandwidth-oriented reconfiguration of ad hoc wireless networks
JP3910898B2 (en) 2002-09-17 2007-04-25 株式会社東芝 Directivity setting device, directivity setting method, and directivity setting program
US7228275B1 (en) 2002-10-21 2007-06-05 Toyota Infotechnology Center Co., Ltd. Speech recognition system having multiple speech recognizers
JP2004163590A (en) 2002-11-12 2004-06-10 Denso Corp Reproducing device and program
KR20040042242A (en) 2002-11-13 2004-05-20 삼성전자주식회사 home robot using home server and home network system having the robot
US7295548B2 (en) 2002-11-27 2007-11-13 Microsoft Corporation Method and system for disaggregating audio/visual components
CN100392723C (en) 2002-12-11 2008-06-04 索夫塔马克斯公司 System and method for speech processing using independent component analysis under stability restraints
US7076428B2 (en) 2002-12-30 2006-07-11 Motorola, Inc. Method and apparatus for selective distributed speech recognition
KR100668297B1 (en) 2002-12-31 2007-01-12 삼성전자주식회사 Method and apparatus for speech recognition
US6823050B2 (en) 2003-02-13 2004-11-23 International Business Machines Corporation System and method for interfacing with a personal telephony recorder
WO2004079929A2 (en) 2003-03-03 2004-09-16 America Online, Inc. Source audio identifiers for digital communications
JP2004347943A (en) 2003-05-23 2004-12-09 Clarion Co Ltd Data processor, musical piece reproducing apparatus, control program for data processor, and control program for musical piece reproducing apparatus
JP2004354721A (en) 2003-05-29 2004-12-16 Shimizu Corp Controller by speech, speech control method, and speech control program
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US9207905B2 (en) * 2003-07-28 2015-12-08 Sonos, Inc. Method and apparatus for providing synchrony group status information
US8234395B2 (en) * 2003-07-28 2012-07-31 Sonos, Inc. System and method for synchronizing operations among a plurality of independently clocked digital data processing devices
US7961892B2 (en) 2003-07-28 2011-06-14 Texas Instruments Incorporated Apparatus and method for monitoring speaker cone displacement in an audio speaker
US20060104451A1 (en) 2003-08-07 2006-05-18 Tymphany Corporation Audio reproduction system
US20050031134A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using infrared light
US20050031137A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Calibration of an actuator
US20050031131A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of modifying dynamics of a system
US20050031132A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Control system
US20050031139A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using impedance
US20050031133A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Process for position indication
US20050031140A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Position detection of an actuator using a capacitance measurement
US20050031138A1 (en) 2003-08-07 2005-02-10 Tymphany Corporation Method of measuring a cant of an actuator
KR20050023841A (en) 2003-09-03 2005-03-10 삼성전자주식회사 Device and method of reducing nonlinear distortion
US7099821B2 (en) 2003-09-12 2006-08-29 Softmax, Inc. Separation of target acoustic signals in a multi-transducer arrangement
US20050077843A1 (en) 2003-10-11 2005-04-14 Ronnie Benditt Method and apparatus for controlling a performing arts show by an onstage performer
CN1871874A (en) 2003-10-24 2006-11-29 皇家飞利浦电子股份有限公司 Adaptive sound reproduction
JP4516527B2 (en) 2003-11-12 2010-08-04 本田技研工業株式会社 Voice recognition device
US7705565B2 (en) 2003-12-31 2010-04-27 Motorola, Inc. Method and system for wireless charging
US7707039B2 (en) 2004-02-15 2010-04-27 Exbiblio B.V. Automatic modification of web pages
JP4269973B2 (en) 2004-02-27 2009-05-27 株式会社デンソー Car audio system
US7415117B2 (en) 2004-03-02 2008-08-19 Microsoft Corporation System and method for beamforming using a microphone array
US7483538B2 (en) 2004-03-02 2009-01-27 Ksc Industries, Inc. Wireless and wired speaker hub for a home theater system
JP4059214B2 (en) 2004-03-04 2008-03-12 ソニー株式会社 Information reproducing system control method, information reproducing system, information providing apparatus, and information providing program
US10200504B2 (en) 2007-06-12 2019-02-05 Icontrol Networks, Inc. Communication protocols over internet protocol (IP) networks
US7372966B2 (en) 2004-03-19 2008-05-13 Nokia Corporation System for limiting loudspeaker displacement
JP2005284492A (en) 2004-03-29 2005-10-13 Mitsubishi Electric Corp Operating device using voice
US9374607B2 (en) 2012-06-26 2016-06-21 Sonos, Inc. Media playback system with guest access
US7630501B2 (en) * 2004-05-14 2009-12-08 Microsoft Corporation System and method for calibration of an acoustic system
US7792311B1 (en) 2004-05-15 2010-09-07 Sonos, Inc., Method and apparatus for automatically enabling subwoofer channel audio based on detection of subwoofer device
US7346846B2 (en) 2004-05-28 2008-03-18 Microsoft Corporation Strategies for providing just-in-time user assistance
US7006938B2 (en) 2004-06-16 2006-02-28 Ami Semiconductor, Inc. Reactive sensor modules using Pade' Approximant based compensation and providing module-sourced excitation
US7672845B2 (en) 2004-06-22 2010-03-02 International Business Machines Corporation Method and system for keyword detection using voice-recognition
US20060004834A1 (en) 2004-06-30 2006-01-05 Nokia Corporation Dynamic shortcuts
JP2006092482A (en) 2004-09-27 2006-04-06 Yamaha Corp Sound recognition reporting apparatus
US7720232B2 (en) 2004-10-15 2010-05-18 Lifesize Communications, Inc. Speakerphone
US8386523B2 (en) 2004-12-30 2013-02-26 Texas Instruments Incorporated Random access audio decoder
TWI272860B (en) 2005-01-03 2007-02-01 Lite On Technology Corp Audio receiver and volume reminder method
US20070189544A1 (en) 2005-01-15 2007-08-16 Outland Research, Llc Ambient sound responsive media player
EP1844392B1 (en) 2005-01-21 2012-07-04 Certicom Corp. Elliptic curve random number generation
US20060190968A1 (en) 2005-01-31 2006-08-24 Searete Llc, A Limited Corporation Of The State Of The State Of Delaware Sharing between shared audio devices
WO2006111370A1 (en) 2005-04-19 2006-10-26 Epfl (Ecole Polytechnique Federale De Lausanne) A method and device for removing echo in a multi-channel audio signal
EP1715669A1 (en) 2005-04-19 2006-10-25 Ecole Polytechnique Federale De Lausanne (Epfl) A method for removing echo in an audio signal
US7720684B2 (en) 2005-04-29 2010-05-18 Nuance Communications, Inc. Method, apparatus, and computer program product for one-step correction of voice interaction
US7991167B2 (en) 2005-04-29 2011-08-02 Lifesize Communications, Inc. Forming beams with nulls directed at noise sources
US9300790B2 (en) 2005-06-24 2016-03-29 Securus Technologies, Inc. Multi-party conversation analyzer and logger
JP4760160B2 (en) 2005-06-29 2011-08-31 ヤマハ株式会社 Sound collector
JP4804052B2 (en) 2005-07-08 2011-10-26 アルパイン株式会社 Voice recognition device, navigation device provided with voice recognition device, and voice recognition method of voice recognition device
US20070018844A1 (en) 2005-07-19 2007-01-25 Sehat Sutardja Two way remote control
JP4285457B2 (en) 2005-07-20 2009-06-24 ソニー株式会社 Sound field measuring apparatus and sound field measuring method
CN101233783B (en) 2005-07-29 2011-12-21 松下电器产业株式会社 Loudspeaker device
CN1909625A (en) 2005-08-05 2007-02-07 鸿富锦精密工业(深圳)有限公司 Volume self-regulation television device and its control method
WO2007022533A2 (en) 2005-08-19 2007-02-22 Gracenote, Inc. Method and system to control operation of a playback device
US20070060054A1 (en) 2005-09-15 2007-03-15 Sony Ericsson Mobile Communications Ab Wireless home communication system method and apparatus
JP4519041B2 (en) 2005-09-20 2010-08-04 ローランド株式会社 Speaker device for musical instrument
CN101427154A (en) 2005-09-21 2009-05-06 皇家飞利浦电子股份有限公司 Ultrasound imaging system with voice activated controls using remotely positioned microphone
WO2007051493A1 (en) 2005-11-07 2007-05-10 Telecom Italia S.P.A. Method for managing a conference call in a telephone network
JP4929685B2 (en) 2005-11-15 2012-05-09 ヤマハ株式会社 Remote conference equipment
WO2007058130A1 (en) 2005-11-15 2007-05-24 Yamaha Corporation Teleconference device and sound emission/collection device
US20070140058A1 (en) 2005-11-21 2007-06-21 Motorola, Inc. Method and system for correcting transducer non-linearities
US7600194B2 (en) 2005-12-02 2009-10-06 Microsoft Corporation Start menu operation for computer user interface
JP2007174233A (en) 2005-12-21 2007-07-05 Pioneer Electronic Corp Speaker instrument and portable telephone
JP4677341B2 (en) 2005-12-21 2011-04-27 パイオニア株式会社 Speaker device and mobile phone
US20160066087A1 (en) 2006-01-30 2016-03-03 Ludger Solbach Joint noise suppression and acoustic echo cancellation
KR100762636B1 (en) 2006-02-14 2007-10-01 삼성전자주식회사 System and nethod for controlling voice detection of network terminal
JP4422692B2 (en) 2006-03-03 2010-02-24 日本電信電話株式会社 Transmission path estimation method, dereverberation method, sound source separation method, apparatus, program, and recording medium
US8284982B2 (en) 2006-03-06 2012-10-09 Induction Speaker Technology, Llc Positionally sequenced loudspeaker system
CN101449538A (en) 2006-04-04 2009-06-03 约翰逊控制技术公司 Text to grammar enhancements for media files
ATE423433T1 (en) 2006-04-18 2009-03-15 Harman Becker Automotive Sys SYSTEM AND METHOD FOR MULTI-CHANNEL ECHO COMPENSATION
KR100786108B1 (en) 2006-05-01 2007-12-18 김준식 Sound communication networks
DE602006007685D1 (en) 2006-05-10 2009-08-20 Harman Becker Automotive Sys Compensation of multi-channel echoes by decorrelation
US9208785B2 (en) 2006-05-10 2015-12-08 Nuance Communications, Inc. Synchronizing distributed speech recognition
US8041057B2 (en) 2006-06-07 2011-10-18 Qualcomm Incorporated Mixing techniques for mixing audio
JP4984683B2 (en) 2006-06-29 2012-07-25 ヤマハ株式会社 Sound emission and collection device
US8207936B2 (en) 2006-06-30 2012-06-26 Sony Ericsson Mobile Communications Ab Voice remote control
US8189765B2 (en) 2006-07-06 2012-05-29 Panasonic Corporation Multichannel echo canceller
US20080037814A1 (en) 2006-08-09 2008-02-14 Jeng-Jye Shau Precision audio speakers
US8428278B2 (en) 2006-08-10 2013-04-23 Claudio Lastrucci Improvements to systems for acoustic diffusion
US10013381B2 (en) 2006-08-31 2018-07-03 Bose Corporation Media playing from a docked handheld media device
US8483853B1 (en) 2006-09-12 2013-07-09 Sonos, Inc. Controlling and manipulating groupings in a multi-zone media system
US8473618B2 (en) 2006-09-19 2013-06-25 Motorola Solutions, Inc. Method and system for processing multiple communication sessions in a communication network
JP2008079256A (en) 2006-09-25 2008-04-03 Toshiba Corp Acoustic signal processing apparatus, acoustic signal processing method, and program
US8073681B2 (en) 2006-10-16 2011-12-06 Voicebox Technologies, Inc. System and method for a cooperative conversational voice user interface
US7747293B2 (en) 2006-10-17 2010-06-29 Marvell Worl Trade Ltd. Display control for cellular phone
TWI435591B (en) 2006-10-17 2014-04-21 Marvell World Trade Ltd Display control for cellular phone
WO2008046141A1 (en) 2006-10-17 2008-04-24 Avega Systems Pty Ltd Unification of multimedia devices
US9124650B2 (en) 2006-12-13 2015-09-01 Quickplay Media Inc. Digital rights management in a mobile environment
US8391501B2 (en) 2006-12-13 2013-03-05 Motorola Mobility Llc Method and apparatus for mixing priority and non-priority audio signals
US20080146289A1 (en) 2006-12-14 2008-06-19 Motorola, Inc. Automatic audio transducer adjustments based upon orientation of a mobile communication device
JP2008158868A (en) 2006-12-25 2008-07-10 Toyota Motor Corp Mobile body and control method
US7973857B2 (en) 2006-12-27 2011-07-05 Nokia Corporation Teleconference group formation using context information
US20090013255A1 (en) 2006-12-30 2009-01-08 Matthew John Yuschik Method and System for Supporting Graphical User Interfaces
KR101316750B1 (en) 2007-01-23 2013-10-08 삼성전자주식회사 Apparatus and method for playing audio file according to received location information
TW200833152A (en) 2007-01-31 2008-08-01 Bluepacket Comm Co Ltd Multimedia switching system
WO2008096414A1 (en) 2007-02-06 2008-08-14 Pioneer Corporation Contents acquiring device, contents acquiring method, contents acquiring program and recording medium
US20090228919A1 (en) 2007-11-16 2009-09-10 Zott Joseph A Media playlist management and viewing remote control
US20080208594A1 (en) 2007-02-27 2008-08-28 Cross Charles W Effecting Functions On A Multimodal Telephony Device
JP4728982B2 (en) 2007-03-05 2011-07-20 株式会社東芝 Apparatus, method and program for interacting with user
US8635243B2 (en) 2007-03-07 2014-01-21 Research In Motion Limited Sending a communications header with voice recording to send metadata for use in speech recognition, formatting, and search mobile search application
US8886545B2 (en) 2007-03-07 2014-11-11 Vlingo Corporation Dealing with switch latency in speech recognition
US8880405B2 (en) 2007-03-07 2014-11-04 Vlingo Corporation Application text entry in a mobile environment using a speech processing facility
US8019076B1 (en) 2007-03-14 2011-09-13 Clearone Communications, Inc. Portable speakerphone device and subsystem utilizing false doubletalk detection
GB0706074D0 (en) 2007-03-28 2007-05-09 Skype Ltd Detection of communication states
US8983051B2 (en) 2007-04-03 2015-03-17 William F. Barton Outgoing call classification and disposition
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8406439B1 (en) 2007-04-04 2013-03-26 At&T Intellectual Property I, L.P. Methods and systems for synthetic audio placement
US8848879B1 (en) 2007-05-03 2014-09-30 Avaya Inc. Customizable notification based on recent communication history
US8032383B1 (en) 2007-05-04 2011-10-04 Foneweb, Inc. Speech controlled services and devices using internet
KR100827613B1 (en) 2007-05-04 2008-05-07 삼성전자주식회사 Apparatus and method for mic controlling in portable terminal
US8041565B1 (en) 2007-05-04 2011-10-18 Foneweb, Inc. Precision speech to text conversion
US8136040B2 (en) 2007-05-16 2012-03-13 Apple Inc. Audio variance for multiple windows
BRPI0810285A2 (en) 2007-05-18 2014-12-30 Shorthand Mobile Inc "SYSTEM AND PROCESS FOR IMPROVED COMMUNICATIONS VIA SMALL DATA RATE COMMUNICATION SYSTEMS"
US20080291916A1 (en) * 2007-05-22 2008-11-27 Bo Xiong Systems and methods for dynamic quality of service
EP1998446A1 (en) 2007-05-31 2008-12-03 Alcatel Lucent Remote control for devices with connectivity to a service delivery platform
US8068925B2 (en) 2007-06-28 2011-11-29 Apple Inc. Dynamic routing of audio among multiple audio devices
JP4985151B2 (en) 2007-06-29 2012-07-25 ヤマハ株式会社 Content distribution system and center device
JP4916394B2 (en) 2007-07-03 2012-04-11 富士通株式会社 Echo suppression device, echo suppression method, and computer program
WO2009020617A1 (en) 2007-08-06 2009-02-12 Orison Corporation System and method for three-dimensional ultrasound imaging
US20090046866A1 (en) 2007-08-15 2009-02-19 Fortemedia, Inc. Apparatus capable of performing acoustic echo cancellation and a method thereof
US8073125B2 (en) 2007-09-25 2011-12-06 Microsoft Corporation Spatial audio conferencing
US7844724B2 (en) * 2007-10-24 2010-11-30 Social Communications Company Automated real-time data stream switching in a shared virtual area communication environment
US8639214B1 (en) 2007-10-26 2014-01-28 Iwao Fujisaki Communication device
US8013720B2 (en) 2007-11-02 2011-09-06 Reverse Control, Inc. Signal apparatus for facilitating safe backup of vehicles
JP5441710B2 (en) 2007-11-20 2014-03-12 パナソニック株式会社 Speaker, video equipment, and portable information processing apparatus
US9247346B2 (en) 2007-12-07 2016-01-26 Northern Illinois Research Foundation Apparatus, system and method for noise cancellation and communication for incubators and related devices
US20090153289A1 (en) 2007-12-12 2009-06-18 Eric James Hope Handheld electronic devices with bimodal remote control functionality
US9386154B2 (en) 2007-12-21 2016-07-05 Nuance Communications, Inc. System, method and software program for enabling communications between customer service agents and users of communication devices
US8473081B2 (en) 2007-12-25 2013-06-25 Personics Holdings, Inc. Method and system for event reminder using an earpiece
US8423893B2 (en) 2008-01-07 2013-04-16 Altec Lansing Australia Pty Limited User interface for managing the operation of networked media playback devices
US9992314B2 (en) 2008-01-24 2018-06-05 Garmin Switzerland Gmbh Automatic device mode switching
DE102008039329A1 (en) 2008-01-25 2009-07-30 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. An apparatus and method for calculating control information for an echo suppression filter and apparatus and method for calculating a delay value
DE102008039330A1 (en) 2008-01-31 2009-08-13 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Apparatus and method for calculating filter coefficients for echo cancellation
US8072905B2 (en) 2008-02-04 2011-12-06 Sony Ericsson Mobile Communications Ab Intelligent interaction between devices in a local network
US8213598B2 (en) 2008-02-26 2012-07-03 Microsoft Corporation Harmonic distortion residual echo suppression
US8638908B2 (en) 2008-02-28 2014-01-28 Computer Products Introductions, Corp Contextual conversation processing in telecommunication applications
US8194882B2 (en) 2008-02-29 2012-06-05 Audience, Inc. System and method for providing single microphone noise suppression fallback
US8255224B2 (en) 2008-03-07 2012-08-28 Google Inc. Voice recognition grammar selection based on context
US9113240B2 (en) 2008-03-18 2015-08-18 Qualcomm Incorporated Speech enhancement using multiple microphones on multiple devices
US20090248397A1 (en) 2008-03-25 2009-10-01 Microsoft Corporation Service Initiation Techniques
WO2009120301A2 (en) * 2008-03-25 2009-10-01 Square Products Corporation System and method for simultaneous media presentation
US7516068B1 (en) 2008-04-07 2009-04-07 International Business Machines Corporation Optimized collection of audio for speech recognition
CN101562671A (en) * 2008-04-18 2009-10-21 鸿富锦精密工业(深圳)有限公司 Volume control mehtod of audio device and communicator
US8751227B2 (en) 2008-04-30 2014-06-10 Nec Corporation Acoustic model learning device and speech recognition device
US8589161B2 (en) 2008-05-27 2013-11-19 Voicebox Technologies, Inc. System and method for an integrated, multi-modal, multi-device natural language voice services environment
US8831948B2 (en) 2008-06-06 2014-09-09 At&T Intellectual Property I, L.P. System and method for synthetically generated speech describing media content
US8385557B2 (en) 2008-06-19 2013-02-26 Microsoft Corporation Multichannel acoustic echo reduction
US8325909B2 (en) 2008-06-25 2012-12-04 Microsoft Corporation Acoustic echo suppression
US8693663B2 (en) 2008-06-27 2014-04-08 Centurylink Intellectual Property Llc System and method for implementing do-not-disturb during playback of media content
US8364481B2 (en) 2008-07-02 2013-01-29 Google Inc. Speech recognition with parallel recognition tasks
US8505056B2 (en) 2008-07-10 2013-08-06 Apple Inc. Updating properties of remote A/V performance nodes
EP2146519B1 (en) 2008-07-16 2012-06-06 Nuance Communications, Inc. Beamforming pre-processing for speaker localization
US8781833B2 (en) 2008-07-17 2014-07-15 Nuance Communications, Inc. Speech recognition semantic classification training
US8639830B2 (en) * 2008-07-22 2014-01-28 Control4 Corporation System and method for streaming audio
US8325938B2 (en) * 2008-08-12 2012-12-04 Sony Corporation Handsfree call apparatus, acoustic reproducing apparatus with handsfree call function, and handsfree call method
JP5206234B2 (en) 2008-08-27 2013-06-12 富士通株式会社 Noise suppression device, mobile phone, noise suppression method, and computer program
US8676586B2 (en) 2008-09-16 2014-03-18 Nice Systems Ltd Method and apparatus for interaction or discourse analytics
KR20100034229A (en) 2008-09-23 2010-04-01 삼성전자주식회사 Potable device including earphone circuit and operation method using the same
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
KR101734450B1 (en) 2008-11-10 2017-05-11 구글 인코포레이티드 Multisensory speech detection
US8386261B2 (en) 2008-11-14 2013-02-26 Vocollect Healthcare Systems, Inc. Training/coaching system for a voice-enabled work environment
US8095368B2 (en) 2008-12-04 2012-01-10 At&T Intellectual Property I, L.P. System and method for voice authentication over a computer network
JP5347472B2 (en) 2008-12-12 2013-11-20 ヤマハ株式会社 Remote control device and remote control system
US8548812B2 (en) 2008-12-22 2013-10-01 Avaya Inc. Method and system for detecting a relevant utterance in a voice session
KR101467796B1 (en) * 2009-01-12 2014-12-10 엘지전자 주식회사 Mobile terminal and method for controlling the same
US20100179874A1 (en) 2009-01-13 2010-07-15 Yahoo! Inc. Media object metadata engine configured to determine relationships between persons and brands
US8351617B2 (en) 2009-01-13 2013-01-08 Fortemedia, Inc. Method for phase mismatch calibration for an array microphone and phase calibration module for the same
US20130283169A1 (en) 2012-04-24 2013-10-24 Social Communications Company Voice-based virtual area navigation
US8428758B2 (en) 2009-02-16 2013-04-23 Apple Inc. Dynamic audio ducking
FR2943875A1 (en) 2009-03-31 2010-10-01 France Telecom METHOD AND DEVICE FOR CLASSIFYING BACKGROUND NOISE CONTAINED IN AN AUDIO SIGNAL.
KR101064976B1 (en) 2009-04-06 2011-09-15 한국과학기술원 System for identifying the acoustic source position in real time and robot which reacts to or communicates with the acoustic source properly and has the system
US8243949B2 (en) 2009-04-14 2012-08-14 Plantronics, Inc. Network addressible loudspeaker and audio play
BRPI0924007B1 (en) 2009-04-15 2021-08-03 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. ACOUSTIC ECHO SUPPRESSION AND FRONT-END CONFERENCE UNIT
US8483398B2 (en) 2009-04-30 2013-07-09 Hewlett-Packard Development Company, L.P. Methods and systems for reducing acoustic echoes in multichannel communication systems by reducing the dimensionality of the space of impulse responses
JP5550456B2 (en) 2009-06-04 2014-07-16 本田技研工業株式会社 Reverberation suppression apparatus and reverberation suppression method
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
JP4820434B2 (en) 2009-06-08 2011-11-24 レノボ・シンガポール・プライベート・リミテッド Microphone mute control
US20100332236A1 (en) 2009-06-25 2010-12-30 Blueant Wireless Pty Limited Voice-triggered operation of electronic devices
US8478982B2 (en) 2009-08-06 2013-07-02 Broadcom Corporation Media access control security management in physical layer
US8625775B2 (en) 2009-08-06 2014-01-07 Hti Ip, L.L.C. Method and system for reducing echo and noise in a vehicle passenger compartment environment
JP5440053B2 (en) 2009-09-14 2014-03-12 ソニー株式会社 Information processing apparatus, information processing method, and computer program
WO2011033887A1 (en) 2009-09-17 2011-03-24 株式会社日立メディコ Ultrasound probe and ultrasound imaging device
US20110091055A1 (en) 2009-10-19 2011-04-21 Broadcom Corporation Loudspeaker localization techniques
US8600073B2 (en) 2009-11-04 2013-12-03 Cambridge Silicon Radio Limited Wind noise suppression
KR101301535B1 (en) 2009-12-02 2013-09-04 한국전자통신연구원 Hybrid translation apparatus and its method
US20110145581A1 (en) * 2009-12-14 2011-06-16 Verizon Patent And Licensing, Inc. Media playback across devices
JP5641186B2 (en) 2010-01-13 2014-12-17 ヤマハ株式会社 Noise suppression device and program
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
NO332437B1 (en) 2010-01-18 2012-09-17 Cisco Systems Int Sarl Apparatus and method for suppressing an acoustic echo
WO2011091402A1 (en) 2010-01-25 2011-07-28 Justin Mason Voice electronic listening assistant
US8718290B2 (en) 2010-01-26 2014-05-06 Audience, Inc. Adaptive noise reduction using level cues
US8713571B2 (en) 2010-02-17 2014-04-29 Microsoft Corporation Asynchronous task execution
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9209987B2 (en) 2010-03-02 2015-12-08 Microsoft Technology Licensing, Llc Social media playback
EP2375779A3 (en) 2010-03-31 2012-01-18 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Apparatus and method for measuring a plurality of loudspeakers and microphone array
US9112989B2 (en) 2010-04-08 2015-08-18 Qualcomm Incorporated System and method of smart audio logging for mobile devices
US9514476B2 (en) 2010-04-14 2016-12-06 Viacom International Inc. Systems and methods for discovering artists
US8538035B2 (en) 2010-04-29 2013-09-17 Audience, Inc. Multi-microphone robust noise suppression
US8437339B2 (en) 2010-04-28 2013-05-07 Hewlett-Packard Development Company, L.P. Techniques to provide integrated voice service management
JP5572445B2 (en) 2010-04-30 2014-08-13 本田技研工業株式会社 Reverberation suppression apparatus and reverberation suppression method
KR101490576B1 (en) 2010-05-04 2015-02-11 샤잠 엔터테인먼트 리미티드 Methods and systems for syschronizing media
JP2013530420A (en) 2010-05-06 2013-07-25 ドルビー ラボラトリーズ ライセンシング コーポレイション Audio system equalization processing for portable media playback devices
US9307340B2 (en) 2010-05-06 2016-04-05 Dolby Laboratories Licensing Corporation Audio system equalization for portable media playback devices
US9736600B2 (en) 2010-05-17 2017-08-15 Iii Holdings 4, Llc Devices and methods for collecting acoustic data
US8395653B2 (en) 2010-05-18 2013-03-12 Polycom, Inc. Videoconferencing endpoint having multiple voice-tracking cameras
US20110289506A1 (en) 2010-05-18 2011-11-24 Google Inc. Management of computing resources for applications
US9558755B1 (en) 2010-05-20 2017-01-31 Knowles Electronics, Llc Noise suppression assisted automatic speech recognition
US8831761B2 (en) 2010-06-02 2014-09-09 Sony Corporation Method for determining a processed audio signal and a handheld device
JP2011259097A (en) 2010-06-07 2011-12-22 Sony Corp Audio signal processing device and audio signal processing method
US8588849B2 (en) 2010-07-09 2013-11-19 Blackberry Limited System and method for resuming media
US8699723B2 (en) * 2010-07-20 2014-04-15 International Business Machines Corporation Audio device volume manager using measured volume perceived at a first audio device to control volume generation by a second audio device
US8762144B2 (en) 2010-07-21 2014-06-24 Samsung Electronics Co., Ltd. Method and apparatus for voice activity detection
US9025782B2 (en) 2010-07-26 2015-05-05 Qualcomm Incorporated Systems, methods, apparatus, and computer-readable media for multi-microphone location-selective processing
US9349368B1 (en) 2010-08-05 2016-05-24 Google Inc. Generating an audio notification based on detection of a triggering event
US8359020B2 (en) 2010-08-06 2013-01-22 Google Inc. Automatically monitoring for voice input based on context
US8731939B1 (en) 2010-08-06 2014-05-20 Google Inc. Routing queries based on carrier phrase registration
EP2609734A4 (en) * 2010-08-27 2015-02-25 Intel Corp Capture and recall of home entertainment system session
US8861756B2 (en) 2010-09-24 2014-10-14 LI Creative Technologies, Inc. Microphone array system
US20120078635A1 (en) 2010-09-24 2012-03-29 Apple Inc. Voice control system
WO2012042578A1 (en) 2010-10-01 2012-04-05 三菱電機株式会社 Speech recognition device
US9240111B2 (en) 2010-10-06 2016-01-19 Microsoft Technology Licensing, Llc Inferring building metadata from distributed sensors
WO2012046582A1 (en) 2010-10-08 2012-04-12 日本電気株式会社 Signal processing device, signal processing method, and signal processing program
KR20140035310A (en) * 2010-10-22 2014-03-21 포러스, 인코포레이티드 Media distribution architecture
US9552840B2 (en) 2010-10-25 2017-01-24 Qualcomm Incorporated Three-dimensional sound capturing and reproducing with multi-microphones
EP2444967A1 (en) 2010-10-25 2012-04-25 Fraunhofer-Gesellschaft zur Förderung der Angewandten Forschung e.V. Echo suppression comprising modeling of late reverberation components
US9226069B2 (en) 2010-10-29 2015-12-29 Qualcomm Incorporated Transitioning multiple microphones from a first mode to a second mode
US8799395B2 (en) 2010-11-22 2014-08-05 Deluxe Media Inc. Methods and systems of dynamically managing content for use by a media playback device
US20120148075A1 (en) 2010-12-08 2012-06-14 Creative Technology Ltd Method for optimizing reproduction of audio signals from an apparatus for audio reproduction
WO2012080907A1 (en) 2010-12-15 2012-06-21 Koninklijke Philips Electronics N.V. Noise reduction system with remote noise detector
JP5771002B2 (en) 2010-12-22 2015-08-26 株式会社東芝 Speech recognition apparatus, speech recognition method, and television receiver equipped with speech recognition apparatus
US9241227B2 (en) 2011-01-06 2016-01-19 Bose Corporation Transducer with integrated sensor
JP2012150237A (en) 2011-01-18 2012-08-09 Sony Corp Sound signal processing apparatus, sound signal processing method, and program
CN102123188A (en) 2011-03-03 2011-07-13 曾超宁 Earphone device of mobile phone
US8929564B2 (en) 2011-03-03 2015-01-06 Microsoft Corporation Noise adaptive beamforming for microphone arrays
KR20120100514A (en) 2011-03-04 2012-09-12 삼성전자주식회사 Method for grouping a device and server applying the same
US8804977B2 (en) 2011-03-18 2014-08-12 Dolby Laboratories Licensing Corporation Nonlinear reference signal processing for echo suppression
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US8938312B2 (en) 2011-04-18 2015-01-20 Sonos, Inc. Smart line-in processing
US9493130B2 (en) 2011-04-22 2016-11-15 Angel A. Penilla Methods and systems for communicating content to connected vehicle users based detected tone/mood in voice input
KR20120128542A (en) 2011-05-11 2012-11-27 삼성전자주식회사 Method and apparatus for processing multi-channel de-correlation for cancelling multi-channel acoustic echo
US9342516B2 (en) 2011-05-18 2016-05-17 Microsoft Technology Licensing, Llc Media presentation playback annotation
US8320577B1 (en) 2011-05-20 2012-11-27 Google Inc. Method and apparatus for multi-channel audio processing using single-channel components
KR101569863B1 (en) 2011-05-31 2015-11-27 구글 인코포레이티드 Muting participants in a communication session
US8897465B2 (en) 2011-06-01 2014-11-25 Robert Bosch Gmbh Class D micro-speaker
US8958571B2 (en) 2011-06-03 2015-02-17 Cirrus Logic, Inc. MIC covering detection in personal audio devices
US8738925B1 (en) 2013-01-07 2014-05-27 Fitbit, Inc. Wireless portable biometric device syncing
US9307321B1 (en) 2011-06-09 2016-04-05 Audience, Inc. Speaker distortion reduction
US9264553B2 (en) 2011-06-11 2016-02-16 Clearone Communications, Inc. Methods and apparatuses for echo cancelation with beamforming microphone arrays
US9762967B2 (en) 2011-06-14 2017-09-12 Comcast Cable Communications, Llc System and method for presenting content with time based metadata
US8731765B2 (en) 2011-06-28 2014-05-20 GM Global Technology Operations LLC Method and apparatus for fault detection in a torque machine of a powertrain system
US20130018659A1 (en) 2011-07-12 2013-01-17 Google Inc. Systems and Methods for Speech Command Processing
US9042556B2 (en) 2011-07-19 2015-05-26 Sonos, Inc Shaping sound responsive to speaker orientation
US20130024018A1 (en) 2011-07-22 2013-01-24 Htc Corporation Multimedia control method and multimedia control system
JP5289517B2 (en) 2011-07-28 2013-09-11 株式会社半導体理工学研究センター Sensor network system and communication method thereof
US9148742B1 (en) 2011-07-29 2015-09-29 Google Inc. Proximity detection via audio
WO2013018138A1 (en) 2011-08-03 2013-02-07 パイオニア株式会社 Audio transmission method, speaker system, audio transmission device, speaker, and program
JP5640918B2 (en) 2011-08-05 2014-12-17 ブラザー工業株式会社 Server device, association method, and portable device program
EP2555598A1 (en) 2011-08-05 2013-02-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Method and device for generating optical radiation by means of electrically operated pulsed discharges
EP2557813A2 (en) 2011-08-08 2013-02-13 Bang & Olufsen A/S A modular, configurable speaker system and a method of operating it
KR101252167B1 (en) 2011-08-18 2013-04-05 엘지전자 주식회사 Diagnostic system and method for home appliance
US20130211826A1 (en) 2011-08-22 2013-08-15 Claes-Fredrik Urban Mannby Audio Signals as Buffered Streams of Audio Signals and Metadata
US8750677B2 (en) 2011-08-23 2014-06-10 Microsoft Corporation Method for transferring media playback from a different device
US20130073293A1 (en) 2011-09-20 2013-03-21 Lg Electronics Inc. Electronic device and method for controlling the same
US9094539B1 (en) 2011-09-22 2015-07-28 Amazon Technologies, Inc. Dynamic device adjustments based on determined user sleep state
US8996381B2 (en) 2011-09-27 2015-03-31 Sensory, Incorporated Background speech recognition assistant
US8768707B2 (en) 2011-09-27 2014-07-01 Sensory Incorporated Background speech recognition assistant using speaker verification
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US9729631B2 (en) 2011-09-30 2017-08-08 Apple Inc. Asynchronous data manipulation
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US8971546B2 (en) 2011-10-14 2015-03-03 Sonos, Inc. Systems, methods, apparatus, and articles of manufacture to control audio playback devices
CN103052001B (en) 2011-10-17 2015-06-24 联想(北京)有限公司 Intelligent device and control method thereof
GB201118784D0 (en) 2011-10-31 2011-12-14 Omnifone Ltd Djml
GB2496660B (en) 2011-11-18 2014-06-04 Skype Processing audio signals
US8983089B1 (en) 2011-11-28 2015-03-17 Rawles Llc Sound source localization using multiple microphone arrays
CN102567468B (en) 2011-12-06 2014-06-04 上海聚力传媒技术有限公司 Method for adjusting player volume of media files and equipment utilizing same
GB2497343B (en) 2011-12-08 2014-11-26 Skype Processing audio signals
CN103988515A (en) 2011-12-13 2014-08-13 英特尔公司 Channel navigation in connected media devices through keyword selection
US9084058B2 (en) 2011-12-29 2015-07-14 Sonos, Inc. Sound field calibration using listener localization
KR102022318B1 (en) 2012-01-11 2019-09-18 삼성전자 주식회사 Method and apparatus for performing user function by voice recognition
US8825020B2 (en) 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
US9654817B2 (en) 2012-01-27 2017-05-16 Avaya Inc. System and method to synchronize video playback on mobile devices
US9401058B2 (en) 2012-01-30 2016-07-26 International Business Machines Corporation Zone based presence determination via voiceprint location awareness
WO2013115748A1 (en) 2012-01-30 2013-08-08 Echostar Ukraine, L.L.C. Apparatus, systems and methods for adjusting output audio volume based on user location
US9418658B1 (en) 2012-02-08 2016-08-16 Amazon Technologies, Inc. Configuration of voice controlled assistant
US9173025B2 (en) 2012-02-08 2015-10-27 Dolby Laboratories Licensing Corporation Combined suppression of noise, echo, and out-of-location signals
US9947333B1 (en) 2012-02-10 2018-04-17 Amazon Technologies, Inc. Voice interaction architecture with intelligent background noise cancellation
US8453058B1 (en) 2012-02-20 2013-05-28 Google Inc. Crowd-sourced audio shortcuts
EP2632141B1 (en) 2012-02-22 2014-10-15 Dialog Semiconductor B.V. Postfilter for Spectral Domain Echo Cancellers to handle Non-linear Echo Components
US9065895B2 (en) 2012-02-22 2015-06-23 Broadcom Corporation Non-linear echo cancellation
US9838810B2 (en) 2012-02-27 2017-12-05 Qualcomm Technologies International, Ltd. Low power audio detection
US20130238326A1 (en) 2012-03-08 2013-09-12 Lg Electronics Inc. Apparatus and method for multiple device voice control
US9361878B2 (en) 2012-03-30 2016-06-07 Michael Boukadakis Computer-readable medium, system and method of providing domain-specific information
US9198204B2 (en) 2012-04-11 2015-11-24 Google Inc. Apparatus and method for seamless commissioning of wireless devices
WO2013155619A1 (en) 2012-04-20 2013-10-24 Sam Pasupalak Conversational agent
US9633186B2 (en) 2012-04-23 2017-04-25 Apple Inc. Systems and methods for controlling output of content based on human recognition data detection
US9117449B2 (en) 2012-04-26 2015-08-25 Nuance Communications, Inc. Embedded system for construction of small footprint speech recognition with user-definable constraints
EP2845189B1 (en) 2012-04-30 2018-09-05 Creative Technology Ltd. A universal reconfigurable echo cancellation system
US11452153B2 (en) 2012-05-01 2022-09-20 Lisnr, Inc. Pairing and gateway connection using sonic tones
US8886524B1 (en) 2012-05-01 2014-11-11 Amazon Technologies, Inc. Signal processing based on audio context
US20130294611A1 (en) 2012-05-04 2013-11-07 Sony Computer Entertainment Inc. Source separation by independent component analysis in conjuction with optimization of acoustic echo cancellation
US9584909B2 (en) 2012-05-10 2017-02-28 Google Inc. Distributed beamforming based on message passing
US9768829B2 (en) 2012-05-11 2017-09-19 Intel Deutschland Gmbh Methods for processing audio signals and circuit arrangements therefor
US8908879B2 (en) * 2012-05-23 2014-12-09 Sonos, Inc. Audio content auditioning
US9633368B2 (en) 2012-05-25 2017-04-25 Apple Inc. Content ranking and serving on a multi-user device or interface
CN103456332A (en) * 2012-05-28 2013-12-18 富泰华工业(深圳)有限公司 Audio playing device and volume adjusting method
US20130324031A1 (en) 2012-05-31 2013-12-05 Nokia Corporation Dynamic allocation of audio channel for surround sound systems
US9060224B1 (en) 2012-06-01 2015-06-16 Rawles Llc Voice controlled assistant with coaxial speaker and microphone arrangement
AU2013270397B2 (en) 2012-06-01 2015-11-12 Blackberry Limited Universal synchronization engine based on probabilistic methods for guarantee of lock in multiformat audio systems
US9997069B2 (en) 2012-06-05 2018-06-12 Apple Inc. Context-aware voice guidance
US8903526B2 (en) 2012-06-06 2014-12-02 Sonos, Inc. Device playback failure recovery and redistribution
US9881616B2 (en) 2012-06-06 2018-01-30 Qualcomm Incorporated Method and systems having improved speech recognition
US9301073B2 (en) 2012-06-08 2016-03-29 Apple Inc. Systems and methods for determining the condition of multiple microphones
US9183845B1 (en) 2012-06-12 2015-11-10 Amazon Technologies, Inc. Adjusting audio signals based on a specific frequency range associated with environmental noise characteristics
US9142215B2 (en) 2012-06-15 2015-09-22 Cypress Semiconductor Corporation Power-efficient voice activation
US9031255B2 (en) 2012-06-15 2015-05-12 Sonos, Inc. Systems, methods, apparatus, and articles of manufacture to provide low-latency audio
US10354650B2 (en) 2012-06-26 2019-07-16 Google Llc Recognizing speech with mixed speech recognition models to generate transcriptions
US9674587B2 (en) 2012-06-26 2017-06-06 Sonos, Inc. Systems and methods for networked music playback including remote add to queue
US8880648B1 (en) * 2012-06-27 2014-11-04 Audible, Inc. Automated transition of content consumption across devices
US9106192B2 (en) 2012-06-28 2015-08-11 Sonos, Inc. System and method for device playback calibration
US9225307B2 (en) 2012-06-28 2015-12-29 Sonos, Inc. Modification of audio responsive to proximity detection
US9706323B2 (en) * 2014-09-09 2017-07-11 Sonos, Inc. Playback device calibration
US9137564B2 (en) 2012-06-28 2015-09-15 Sonos, Inc. Shift to corresponding media in a playback queue
US9384737B2 (en) 2012-06-29 2016-07-05 Microsoft Technology Licensing, Llc Method and device for adjusting sound levels of sources based on sound source priority
US20140006825A1 (en) 2012-06-30 2014-01-02 David Shenhav Systems and methods to wake up a device from a power conservation state
US9615171B1 (en) 2012-07-02 2017-04-04 Amazon Technologies, Inc. Transformation inversion to reduce the effect of room acoustics
US9497544B2 (en) 2012-07-02 2016-11-15 Qualcomm Incorporated Systems and methods for surround sound echo reduction
US20140003635A1 (en) 2012-07-02 2014-01-02 Qualcomm Incorporated Audio signal processing device calibration
US9536528B2 (en) 2012-07-03 2017-01-03 Google Inc. Determining hotword suitability
KR101972955B1 (en) 2012-07-03 2019-04-26 삼성전자 주식회사 Method and apparatus for connecting service between user devices using voice
US8972762B2 (en) 2012-07-11 2015-03-03 Blackberry Limited Computing devices and methods for resetting inactivity timers on computing devices
KR20140008870A (en) * 2012-07-12 2014-01-22 삼성전자주식회사 Method for providing contents information and broadcasting receiving apparatus thereof
US10075801B2 (en) * 2012-07-13 2018-09-11 Sony Corporation Information processing system and storage medium
US8983844B1 (en) 2012-07-31 2015-03-17 Amazon Technologies, Inc. Transmission of noise parameters for improving automatic speech recognition
US8831957B2 (en) 2012-08-01 2014-09-09 Google Inc. Speech recognition models based on location indicia
KR20150038093A (en) 2012-08-03 2015-04-08 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, light-emitting device, electronic device, and lighting device
US8930005B2 (en) 2012-08-07 2015-01-06 Sonos, Inc. Acoustic signatures in a playback system
EP3462452A1 (en) 2012-08-24 2019-04-03 Oticon A/s Noise estimation for use with noise reduction and echo cancellation in personal communication
US9532153B2 (en) 2012-08-29 2016-12-27 Bang & Olufsen A/S Method and a system of providing information to a user
JP2014052469A (en) * 2012-09-06 2014-03-20 Sony Corp Sound processing device, sound processing method and program
US9088336B2 (en) 2012-09-06 2015-07-21 Imagination Technologies Limited Systems and methods of echo and noise cancellation in voice communication
US20140075311A1 (en) 2012-09-11 2014-03-13 Jesse William Boettcher Methods and apparatus for controlling audio volume on an electronic device
US20140075306A1 (en) 2012-09-12 2014-03-13 Randy Rega Music search and retrieval system
US8798598B2 (en) 2012-09-13 2014-08-05 Alain Rossmann Method and system for screencasting Smartphone video game software to online social networks
US9532139B1 (en) 2012-09-14 2016-12-27 Cirrus Logic, Inc. Dual-microphone frequency amplitude response self-calibration
US8983383B1 (en) 2012-09-25 2015-03-17 Rawles Llc Providing hands-free service to multiple devices
US9319816B1 (en) 2012-09-26 2016-04-19 Amazon Technologies, Inc. Characterizing environment using ultrasound pilot tones
JP2014071138A (en) 2012-09-27 2014-04-21 Xing Inc Karaoke device
US8725125B2 (en) * 2012-09-28 2014-05-13 United Video Properties, Inc. Systems and methods for controlling audio playback on portable devices with vehicle equipment
KR102091236B1 (en) 2012-09-28 2020-03-18 삼성전자 주식회사 Electronic apparatus and control method of the same
EP2759147A1 (en) 2012-10-02 2014-07-30 MH Acoustics, LLC Earphones having configurable microphone arrays
US8484025B1 (en) 2012-10-04 2013-07-09 Google Inc. Mapping an audio utterance to an action using a classifier
US9640194B1 (en) 2012-10-04 2017-05-02 Knowles Electronics, Llc Noise suppression for speech processing based on machine-learning mask estimation
CN102902253B (en) 2012-10-09 2015-07-15 鸿富锦精密工业(深圳)有限公司 Intelligent switch with voice control function and intelligent control system
US20140108010A1 (en) 2012-10-11 2014-04-17 Intermec Ip Corp. Voice-enabled documents for facilitating operational procedures
WO2014062729A1 (en) 2012-10-15 2014-04-24 Msi Dfat Llc Direct field acoustic testing in a semi-reverberant enclosure
US9232310B2 (en) 2012-10-15 2016-01-05 Nokia Technologies Oy Methods, apparatuses and computer program products for facilitating directional audio capture with multiple microphones
DE102012020271A1 (en) 2012-10-17 2014-04-17 Wolfgang Klippel Arrangement and method for controlling converters
CN104871196A (en) * 2012-10-18 2015-08-26 迪曼森多媒体信息技术有限公司 A media system with a server and distributed player devices at different geographical locations
KR101978688B1 (en) 2012-10-22 2019-05-15 삼성전자주식회사 Electronic device with microphone device and method for operating the same
WO2014064531A1 (en) * 2012-10-22 2014-05-01 Spotify Ab Systems and methods for pre-fetching media content
US20150228274A1 (en) 2012-10-26 2015-08-13 Nokia Technologies Oy Multi-Device Speech Recognition
KR20140054643A (en) 2012-10-29 2014-05-09 삼성전자주식회사 Voice recognition apparatus and voice recogniton method
US9584642B2 (en) 2013-03-12 2017-02-28 Google Technology Holdings LLC Apparatus with adaptive acoustic echo control for speakerphone mode
US10381001B2 (en) 2012-10-30 2019-08-13 Google Technology Holdings LLC Voice control user interface during low-power mode
US8761349B2 (en) 2012-10-31 2014-06-24 Citrix Systems, Inc. Systems and methods of monitoring performance of acoustic echo cancellation
US9275637B1 (en) 2012-11-06 2016-03-01 Amazon Technologies, Inc. Wake word evaluation
KR20140060040A (en) 2012-11-09 2014-05-19 삼성전자주식회사 Display apparatus, voice acquiring apparatus and voice recognition method thereof
US9275642B2 (en) 2012-11-13 2016-03-01 Unified Computer Intelligence Corporation Voice-operated internet-ready ubiquitous computing device and method thereof
CN102999161B (en) 2012-11-13 2016-03-02 科大讯飞股份有限公司 A kind of implementation method of voice wake-up module and application
US9685171B1 (en) 2012-11-20 2017-06-20 Amazon Technologies, Inc. Multiple-stage adaptive filtering of audio signals
US9070367B1 (en) 2012-11-26 2015-06-30 Amazon Technologies, Inc. Local speech recognition of frequent utterances
US9124966B2 (en) * 2012-11-28 2015-09-01 Qualcomm Incorporated Image generation for collaborative sound systems
US20140149118A1 (en) 2012-11-28 2014-05-29 Lg Electronics Inc. Apparatus and method for driving electric device using speech recognition
US9875741B2 (en) 2013-03-15 2018-01-23 Google Llc Selective speech recognition for chat and digital personal assistant systems
US9203045B2 (en) 2012-11-29 2015-12-01 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
WO2014088588A1 (en) 2012-12-07 2014-06-12 Empire Technology Development Llc Personal assistant context building
US20140161263A1 (en) 2012-12-10 2014-06-12 Microsoft Corporation Facilitating recognition of real-time content
US9704486B2 (en) 2012-12-11 2017-07-11 Amazon Technologies, Inc. Speech recognition power management
US9226071B2 (en) 2012-12-13 2015-12-29 Maxim Integrated Products, Inc. Direct measurement of an input signal to a loudspeaker to determine and limit a temperature of a voice coil of the loudspeaker
US9607046B2 (en) 2012-12-14 2017-03-28 Microsoft Technology Licensing, Llc Probability-based state modification for query dialogues
US9271111B2 (en) 2012-12-14 2016-02-23 Amazon Technologies, Inc. Response endpoint selection
US9300910B2 (en) 2012-12-14 2016-03-29 Biscotti Inc. Video mail capture, processing and distribution
KR102102246B1 (en) 2012-12-18 2020-04-22 삼성전자주식회사 Method and apparatus for controlling a home device remotely in a home network system
US9047857B1 (en) 2012-12-19 2015-06-02 Rawles Llc Voice commands for transitioning between device states
US9098467B1 (en) 2012-12-19 2015-08-04 Rawles Llc Accepting voice commands based on user identity
US20150338917A1 (en) 2012-12-26 2015-11-26 Sia Technology Ltd. Device, system, and method of controlling electronic devices via thought
CN103021403A (en) * 2012-12-31 2013-04-03 威盛电子股份有限公司 Voice recognition based selecting method and mobile terminal device and information system thereof
US9620115B2 (en) 2013-01-03 2017-04-11 Telenav, Inc. Content delivery system with barge-in mechanism and method of operation thereof
KR102051588B1 (en) 2013-01-07 2019-12-03 삼성전자주식회사 Method and apparatus for playing audio contents in wireless terminal
US9318125B2 (en) 2013-01-15 2016-04-19 Intel Deutschland Gmbh Noise reduction devices and noise reduction methods
JP2014137590A (en) 2013-01-18 2014-07-28 Yoji Fukinuki Music content distribution method
US9646605B2 (en) 2013-01-22 2017-05-09 Interactive Intelligence Group, Inc. False alarm reduction in speech recognition systems using contextual information
DE102013001219B4 (en) 2013-01-25 2019-08-29 Inodyn Newmedia Gmbh Method and system for voice activation of a software agent from a standby mode
US20140215332A1 (en) 2013-01-31 2014-07-31 Hewlett-Packard Development Company, Lp Virtual microphone selection corresponding to a set of audio source devices
US9818407B1 (en) 2013-02-07 2017-11-14 Amazon Technologies, Inc. Distributed endpointing for speech recognition
KR20150104615A (en) 2013-02-07 2015-09-15 애플 인크. Voice trigger for a digital assistant
TWI593294B (en) 2013-02-07 2017-07-21 晨星半導體股份有限公司 Sound collecting system and associated method
US9300266B2 (en) 2013-02-12 2016-03-29 Qualcomm Incorporated Speaker equalization for mobile devices
US9237384B2 (en) 2013-02-14 2016-01-12 Sonos, Inc. Automatic configuration of household playback devices
US9842489B2 (en) 2013-02-14 2017-12-12 Google Llc Waking other devices for additional data
US9172747B2 (en) 2013-02-25 2015-10-27 Artificial Solutions Iberia SL System and methods for virtual assistant networks
JP6519877B2 (en) 2013-02-26 2019-05-29 聯發科技股▲ふん▼有限公司Mediatek Inc. Method and apparatus for generating a speech signal
US9195432B2 (en) 2013-02-26 2015-11-24 Sonos, Inc. Pre-caching of audio content
CN104010251B (en) 2013-02-27 2018-06-19 晨星半导体股份有限公司 Radio system and correlation technique
US10395651B2 (en) 2013-02-28 2019-08-27 Sony Corporation Device and method for activating with voice input
US9460715B2 (en) 2013-03-04 2016-10-04 Amazon Technologies, Inc. Identification using audio signatures and additional characteristics
US20140258292A1 (en) 2013-03-05 2014-09-11 Clip Interactive, Inc. Apparatus, system, and method for integrating content and content services
JP6429465B2 (en) 2013-03-07 2018-11-28 株式会社半導体エネルギー研究所 Apparatus and manufacturing method thereof
EP2952012B1 (en) 2013-03-07 2018-07-18 Apple Inc. Room and program responsive loudspeaker system
US9349386B2 (en) 2013-03-07 2016-05-24 Analog Device Global System and method for processor wake-up based on sensor data
US9161126B2 (en) 2013-03-08 2015-10-13 Cirrus Logic, Inc. Systems and methods for protecting a speaker
TWI533686B (en) 2013-03-11 2016-05-11 緯創資通股份有限公司 Method for virtual channel management, network-based multimedia reproduction system with virtual channel, and computer readable storage medium
JP6211677B2 (en) 2013-03-11 2017-10-11 アップル インコーポレイテッド Tonal constancy across the loudspeaker directivity range
CN104053088A (en) 2013-03-11 2014-09-17 联想(北京)有限公司 Microphone array adjustment method, microphone array and electronic device
KR20140111859A (en) * 2013-03-12 2014-09-22 삼성전자주식회사 Method and device for sharing content
US9173021B2 (en) 2013-03-12 2015-10-27 Google Technology Holdings LLC Method and device for adjusting an audio beam orientation based on device location
US11393461B2 (en) 2013-03-12 2022-07-19 Cerence Operating Company Methods and apparatus for detecting a voice command
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
EP2946383B1 (en) 2013-03-12 2020-02-26 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9443529B2 (en) 2013-03-12 2016-09-13 Aawtend, Inc. Integrated sensor-array processor
US9357306B2 (en) 2013-03-12 2016-05-31 Nokia Technologies Oy Multichannel audio calibration method and apparatus
US9060052B2 (en) 2013-03-13 2015-06-16 Accusonus S.A. Single channel, binaural and multi-channel dereverberation
KR101571338B1 (en) 2013-03-13 2015-11-24 삼성전자주식회사 Method and apparatus for allowing plural media players to perform synchronized play of streaming content
US20140274185A1 (en) 2013-03-14 2014-09-18 Aliphcom Intelligence device connection for wireless media ecosystem
JP6013951B2 (en) 2013-03-14 2016-10-25 本田技研工業株式会社 Environmental sound search device and environmental sound search method
KR101764660B1 (en) 2013-03-14 2017-08-03 애플 인크. Adaptive room equalization using a speaker and a handheld listening device
KR102152754B1 (en) 2013-03-14 2020-09-07 삼성전자주식회사 Communication connecting method for bluetooth device and apparatus therefor
US10133546B2 (en) * 2013-03-14 2018-11-20 Amazon Technologies, Inc. Providing content on multiple devices
US20140278933A1 (en) 2013-03-15 2014-09-18 F. Gavin McMillan Methods and apparatus to measure audience engagement with media
US9201865B2 (en) 2013-03-15 2015-12-01 Bao Tran Automated assistance for user request that determines semantics by domain, task, and parameter
US9626436B2 (en) 2013-03-15 2017-04-18 Spotify Ab Systems, methods, and computer readable medium for generating playlists
US9854081B2 (en) * 2013-03-15 2017-12-26 Apple Inc. Volume control for mobile device using a wireless device
WO2014149050A1 (en) 2013-03-21 2014-09-25 Nuance Communications, Inc. System and method for identifying suboptimal microphone performance
KR102173936B1 (en) 2013-03-26 2020-11-04 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, light-emitting device, electronic device, and lighting device
JP6300589B2 (en) 2013-04-04 2018-03-28 株式会社半導体エネルギー研究所 Method for manufacturing semiconductor device
WO2014161091A1 (en) 2013-04-04 2014-10-09 Rand James S Unified communications system and method
JP6198432B2 (en) 2013-04-09 2017-09-20 小島プレス工業株式会社 Voice recognition control device
US20140310614A1 (en) 2013-04-15 2014-10-16 Chacha Search, Inc Method and system of increasing user interaction
US9875494B2 (en) 2013-04-16 2018-01-23 Sri International Using intents to analyze and personalize a user's dialog experience with a virtual personal assistant
US9501533B2 (en) 2013-04-16 2016-11-22 Sonos, Inc. Private queue for a media playback system
US9304736B1 (en) 2013-04-18 2016-04-05 Amazon Technologies, Inc. Voice controlled assistant with non-verbal code entry
USRE48569E1 (en) 2013-04-19 2021-05-25 Panasonic Intellectual Property Corporation Of America Control method for household electrical appliance, household electrical appliance control system, and gateway
US9936290B2 (en) 2013-05-03 2018-04-03 Qualcomm Incorporated Multi-channel echo cancellation and noise suppression
US9892729B2 (en) 2013-05-07 2018-02-13 Qualcomm Incorporated Method and apparatus for controlling voice activation
KR102230139B1 (en) 2013-05-17 2021-03-18 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, lighting device, light-emitting device, and electronic device
WO2014189486A1 (en) 2013-05-20 2014-11-27 Intel Corporation Natural human-computer interaction for virtual personal assistant systems
US9472201B1 (en) 2013-05-22 2016-10-18 Google Inc. Speaker localization by means of tactile input
EP2816554A3 (en) 2013-05-28 2015-03-25 Samsung Electronics Co., Ltd Method of executing voice recognition of electronic device and electronic device using the same
US9390708B1 (en) 2013-05-28 2016-07-12 Amazon Technologies, Inc. Low latency and memory efficient keywork spotting
CN110120876B (en) * 2013-05-29 2021-06-15 搜诺思公司 Playback queue control via playlist on mobile device
US9215545B2 (en) 2013-05-31 2015-12-15 Bose Corporation Sound stage controller for a near-field speaker-based audio system
US20140357248A1 (en) 2013-06-03 2014-12-04 Ford Global Technologies, Llc Apparatus and System for Interacting with a Vehicle and a Device in a Vehicle
US20140365225A1 (en) 2013-06-05 2014-12-11 DSP Group Ultra-low-power adaptive, user independent, voice triggering schemes
US9438193B2 (en) 2013-06-05 2016-09-06 Sonos, Inc. Satellite volume control
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
US9654073B2 (en) * 2013-06-07 2017-05-16 Sonos, Inc. Group volume control
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
WO2014200887A1 (en) 2013-06-09 2014-12-18 Apple Inc. Bluetooth alert notification service
US9787273B2 (en) * 2013-06-13 2017-10-10 Google Technology Holdings LLC Smart volume control of device audio output based on received audio input
US8953778B2 (en) 2013-06-17 2015-02-10 Avaya Inc. Real-time intelligent mute interactive features
US9043850B2 (en) 2013-06-17 2015-05-26 Spotify Ab System and method for switching between media streams while providing a seamless user experience
US9494683B1 (en) 2013-06-18 2016-11-15 Amazon Technologies, Inc. Audio-based gesture detection
US9324322B1 (en) 2013-06-18 2016-04-26 Amazon Technologies, Inc. Automatic volume attenuation for speech enabled devices
US9311298B2 (en) 2013-06-21 2016-04-12 Microsoft Technology Licensing, Llc Building conversational understanding systems using a toolset
US9697831B2 (en) 2013-06-26 2017-07-04 Cirrus Logic, Inc. Speech recognition
US9640179B1 (en) 2013-06-27 2017-05-02 Amazon Technologies, Inc. Tailoring beamforming techniques to environments
US9747899B2 (en) 2013-06-27 2017-08-29 Amazon Technologies, Inc. Detecting self-generated wake expressions
EP3014610B1 (en) 2013-06-28 2023-10-04 Harman International Industries, Incorporated Wireless control of linked devices
US20150019201A1 (en) 2013-07-09 2015-01-15 Stanley F. Schoenbach Real-time interpreting systems and methods
US9298415B2 (en) 2013-07-09 2016-03-29 Sonos, Inc. Systems and methods to provide play/pause content
US9396727B2 (en) 2013-07-10 2016-07-19 GM Global Technology Operations LLC Systems and methods for spoken dialog service arbitration
US9293480B2 (en) 2013-07-10 2016-03-22 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device and display device including the semiconductor device
CN110096253B (en) 2013-07-11 2022-08-30 英特尔公司 Device wake-up and speaker verification with identical audio input
DE102014109122A1 (en) 2013-07-12 2015-01-15 Gm Global Technology Operations, Llc Systems and methods for result-based arbitration in speech dialogue systems
US9426598B2 (en) 2013-07-15 2016-08-23 Dts, Inc. Spatial calibration of surround sound systems including listener position estimation
US9445196B2 (en) 2013-07-24 2016-09-13 Mh Acoustics Llc Inter-channel coherence reduction for stereophonic and multichannel acoustic echo cancellation
US9772994B2 (en) 2013-07-25 2017-09-26 Intel Corporation Self-learning statistical natural language processing for automatic production of virtual personal assistants
US9666187B1 (en) 2013-07-25 2017-05-30 Google Inc. Model for enabling service providers to address voice-activated commands
US9431014B2 (en) 2013-07-25 2016-08-30 Haier Us Appliance Solutions, Inc. Intelligent placement of appliance response to voice command
US9548047B2 (en) 2013-07-31 2017-01-17 Google Technology Holdings LLC Method and apparatus for evaluating trigger phrase enrollment
WO2015017303A1 (en) 2013-07-31 2015-02-05 Motorola Mobility Llc Method and apparatus for adjusting voice recognition processing based on noise characteristics
US10186262B2 (en) 2013-07-31 2019-01-22 Microsoft Technology Licensing, Llc System with multiple simultaneous speech recognizers
US9418651B2 (en) 2013-07-31 2016-08-16 Google Technology Holdings LLC Method and apparatus for mitigating false accepts of trigger phrases
US10873997B2 (en) 2013-08-01 2020-12-22 Fong-Min Chang Voice controlled artificial intelligent smart illumination device
US9565497B2 (en) 2013-08-01 2017-02-07 Caavo Inc. Enhancing audio using a mobile device
DE102013012811B4 (en) 2013-08-01 2024-02-22 Wolfgang Klippel Arrangement and method for identifying and correcting the nonlinear properties of electromagnetic transducers
US10047970B2 (en) 2013-08-21 2018-08-14 Honeywell International Inc. Devices and methods for interacting with an HVAC controller
EP2862164B1 (en) 2013-08-23 2017-05-31 Nuance Communications, Inc. Multiple pass automatic speech recognition
US9190043B2 (en) 2013-08-27 2015-11-17 Bose Corporation Assisting conversation in noisy environments
US9514747B1 (en) 2013-08-28 2016-12-06 Amazon Technologies, Inc. Reducing speech recognition latency
TWI520127B (en) 2013-08-28 2016-02-01 晨星半導體股份有限公司 Controller for audio device and associated operation method
EP2879345A4 (en) * 2013-08-30 2015-08-19 Huawei Tech Co Ltd Method for multiple terminals to play multimedia file cooperatively and related apparatus and system
JP6037026B2 (en) 2013-09-11 2016-11-30 株式会社デンソー Audio output control device, program, and recording medium
US9672812B1 (en) 2013-09-18 2017-06-06 Amazon Technologies, Inc. Qualifying trigger expressions in speech-based systems
US9516081B2 (en) 2013-09-20 2016-12-06 Amazon Technologies, Inc. Reduced latency electronic content system
US9848260B2 (en) 2013-09-24 2017-12-19 Nuance Communications, Inc. Wearable communication enhancement device
US9668052B2 (en) 2013-09-25 2017-05-30 Google Technology Holdings LLC Audio routing system for routing audio data to and from a mobile device
US9355555B2 (en) 2013-09-27 2016-05-31 Sonos, Inc. System and method for issuing commands in a media playback system
US9443527B1 (en) 2013-09-27 2016-09-13 Amazon Technologies, Inc. Speech recognition capability generation and control
CN103546616A (en) * 2013-09-30 2014-01-29 深圳市同洲电子股份有限公司 Volume adjusting method and device
US9288596B2 (en) 2013-09-30 2016-03-15 Sonos, Inc. Coordinator device for paired or consolidated players
US9122451B2 (en) * 2013-09-30 2015-09-01 Sonos, Inc. Capacitive proximity sensor configuration including a speaker grille
KR102114219B1 (en) 2013-10-10 2020-05-25 삼성전자주식회사 Audio system, Method for outputting audio, and Speaker apparatus thereof
US9245527B2 (en) 2013-10-11 2016-01-26 Apple Inc. Speech recognition wake-up of a handheld portable electronic device
TWI642170B (en) 2013-10-18 2018-11-21 半導體能源研究所股份有限公司 Display device and electronic device
US9300268B2 (en) 2013-10-18 2016-03-29 Apple Inc. Content aware audio ducking
US9633671B2 (en) 2013-10-18 2017-04-25 Apple Inc. Voice quality enhancement techniques, speech recognition techniques, and related systems
US9818061B1 (en) 2013-10-22 2017-11-14 Lumin, LLC Collaboration of audio sensors for geo-location and continuous tracking of multiple users in a device-independent artificial intelligence (AI) environment
US10229256B2 (en) 2013-10-25 2019-03-12 Intel Corporation Techniques for preventing voice replay attacks
EP3796678A1 (en) 2013-11-05 2021-03-24 Oticon A/s A binaural hearing assistance system allowing the user to modify a location of a sound source
JP2015090570A (en) 2013-11-06 2015-05-11 ソニー株式会社 Information processor and control method
US10311482B2 (en) * 2013-11-11 2019-06-04 At&T Intellectual Property I, Lp Method and apparatus for adjusting a digital assistant persona
US8775191B1 (en) 2013-11-13 2014-07-08 Google Inc. Efficient utterance-specific endpointer triggering for always-on hotwording
JP6236303B2 (en) 2013-11-26 2017-11-22 株式会社デンソーアイティーラボラトリ Control device, control method and program
US9698999B2 (en) 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device
US9704478B1 (en) 2013-12-02 2017-07-11 Amazon Technologies, Inc. Audio output masking for improved automatic speech recognition
US9373321B2 (en) 2013-12-02 2016-06-21 Cypress Semiconductor Corporation Generation of wake-up words
CN104143326B (en) 2013-12-03 2016-11-02 腾讯科技(深圳)有限公司 A kind of voice command identification method and device
US8719039B1 (en) 2013-12-05 2014-05-06 Google Inc. Promoting voice actions to hotwords
US10720153B2 (en) 2013-12-13 2020-07-21 Harman International Industries, Incorporated Name-sensitive listening device
US10055190B2 (en) 2013-12-16 2018-08-21 Amazon Technologies, Inc. Attribute-based audio channel arbitration
US9721570B1 (en) 2013-12-17 2017-08-01 Amazon Technologies, Inc. Outcome-oriented dialogs on a speech recognition platform
US9378651B2 (en) 2013-12-17 2016-06-28 Google Inc. Audio book smart pause
US10224056B1 (en) 2013-12-17 2019-03-05 Amazon Technologies, Inc. Contingent device actions during loss of network connectivity
GB2523984B (en) 2013-12-18 2017-07-26 Cirrus Logic Int Semiconductor Ltd Processing received speech data
US9099974B2 (en) 2013-12-20 2015-08-04 Vmware, Inc. Volume redirection
US20150179181A1 (en) 2013-12-20 2015-06-25 Microsoft Corporation Adapting audio based upon detected environmental accoustics
US9899021B1 (en) 2013-12-20 2018-02-20 Amazon Technologies, Inc. Stochastic modeling of user interactions with a detection system
EP3084760A4 (en) 2013-12-20 2017-08-16 Intel Corporation Transition from low power always listening mode to high power speech recognition mode
EP2890160B1 (en) 2013-12-24 2019-08-14 Nxp B.V. Loudspeaker controller
US9301077B2 (en) 2014-01-02 2016-03-29 Harman International Industries, Incorporated Context-based audio tuning
US9443516B2 (en) 2014-01-09 2016-09-13 Honeywell International Inc. Far-field speech recognition systems and methods
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
EP3092824B1 (en) 2014-01-10 2017-11-01 Dolby Laboratories Licensing Corporation Calibration of virtual height speakers using programmable portable devices
US9300647B2 (en) * 2014-01-15 2016-03-29 Sonos, Inc. Software application and zones
US9288597B2 (en) 2014-01-20 2016-03-15 Sony Corporation Distributed wireless speaker system with automatic configuration determination when new speakers are added
CN106415721B (en) * 2014-01-22 2019-08-16 苹果公司 The coordination switching of audio data transmission
US9356882B2 (en) 2014-02-04 2016-05-31 Printeron Inc. Streamlined system for the transmission of network resource data
US9443876B2 (en) 2014-02-05 2016-09-13 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic device including the semiconductor device, the display device, and the display module
US9929368B2 (en) 2014-02-06 2018-03-27 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, lighting device, and electronic appliance
US9652532B2 (en) 2014-02-06 2017-05-16 Sr Homedics, Llc Methods for operating audio speaker systems
TWI658597B (en) 2014-02-07 2019-05-01 日商半導體能源研究所股份有限公司 Semiconductor device
US9318112B2 (en) 2014-02-14 2016-04-19 Google Inc. Recognizing speech in the presence of additional audio
US9226072B2 (en) * 2014-02-21 2015-12-29 Sonos, Inc. Media content based on playback zone awareness
FR3018024B1 (en) 2014-02-26 2016-03-18 Devialet DEVICE FOR CONTROLLING A SPEAKER
JP6289936B2 (en) 2014-02-26 2018-03-07 株式会社東芝 Sound source direction estimating apparatus, sound source direction estimating method and program
FR3018025B1 (en) 2014-02-26 2016-03-18 Devialet DEVICE FOR CONTROLLING A SPEAKER
US9408008B2 (en) * 2014-02-28 2016-08-02 Sonos, Inc. Playback zone representations
US10015593B2 (en) 2014-03-03 2018-07-03 University Of Utah Digital signal processor for audio extensions and correction of nonlinear distortions in loudspeakers
EP3739460A1 (en) 2014-03-03 2020-11-18 Sony Corporation Information processing apparatus, information processing method, and program
US9489171B2 (en) 2014-03-04 2016-11-08 Microsoft Technology Licensing, Llc Voice-command suggestions based on user identity
US9679054B2 (en) 2014-03-05 2017-06-13 Sonos, Inc. Webpage media playback
US10599287B2 (en) 2014-03-11 2020-03-24 Sonos, Inc. Group volume control
US9640669B2 (en) 2014-03-13 2017-05-02 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device, display device including the semiconductor device, display module including the display device, and electronic appliance including the semiconductor device, the display device, and the display module
US9264839B2 (en) 2014-03-17 2016-02-16 Sonos, Inc. Playback device configuration based on proximity detection
US9226062B2 (en) 2014-03-18 2015-12-29 Cisco Technology, Inc. Techniques to mitigate the effect of blocked sound at microphone arrays in a telepresence device
US10514747B2 (en) 2014-03-24 2019-12-24 Silicon Laboratories Inc. Low-power communication apparatus with wakeup detection and associated methods
US9654076B2 (en) 2014-03-25 2017-05-16 Apple Inc. Metadata for ducking control
US9648564B1 (en) 2014-03-26 2017-05-09 Amazon Technologies, Inc. Wake-up management for mobile devices
US9916839B1 (en) 2014-03-27 2018-03-13 Amazon Technologies, Inc. Shared audio functionality based on device grouping
US9431021B1 (en) * 2014-03-27 2016-08-30 Amazon Technologies, Inc. Device grouping for audio based interactivity
KR102146462B1 (en) 2014-03-31 2020-08-20 삼성전자주식회사 Speech recognition system and method
US9547468B2 (en) 2014-03-31 2017-01-17 Microsoft Technology Licensing, Llc Client-side personal voice web navigation
US8874448B1 (en) * 2014-04-01 2014-10-28 Google Inc. Attention-based dynamic audio level adjustment
US9640183B2 (en) 2014-04-07 2017-05-02 Samsung Electronics Co., Ltd. Speech recognition using electronic device and server
US9560437B2 (en) 2014-04-08 2017-01-31 Doppler Labs, Inc. Time heuristic audio control
US9542948B2 (en) * 2014-04-09 2017-01-10 Google Inc. Text-dependent speaker identification
US9510094B2 (en) 2014-04-09 2016-11-29 Apple Inc. Noise estimation in a mobile device using an external acoustic microphone signal
DE102014005381B3 (en) 2014-04-11 2014-12-11 Wolfgang Klippel Arrangement and method for the identification and compensation of non-linear partial vibrations of electromechanical converters
US20150302856A1 (en) 2014-04-17 2015-10-22 Qualcomm Incorporated Method and apparatus for performing function by speech input
US20150334471A1 (en) 2014-05-15 2015-11-19 Echostar Technologies L.L.C. Multiple simultaneous audio video data decoding
WO2015178950A1 (en) 2014-05-19 2015-11-26 Tiskerling Dynamics Llc Directivity optimized sound reproduction
US9860289B2 (en) 2014-05-23 2018-01-02 Radeeus, Inc. Multimedia digital content retrieval, matching, and syncing systems and methods of using the same
CN110839109B (en) 2014-05-23 2022-02-25 三星电子株式会社 Method and apparatus for providing notification
US9900723B1 (en) 2014-05-28 2018-02-20 Apple Inc. Multi-channel loudspeaker matching using variable directivity
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
TWI729649B (en) 2014-05-30 2021-06-01 日商半導體能源研究所股份有限公司 Light-emitting element, light-emitting device, electronic device, and lighting device
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10318016B2 (en) 2014-06-03 2019-06-11 Harman International Industries, Incorporated Hands free device with directional interface
US20150355818A1 (en) 2014-06-04 2015-12-10 Sonos, Inc. Continuous Playback Queue
US9720642B2 (en) 2014-06-04 2017-08-01 Sonos, Inc. Prioritizing media content requests
US10624612B2 (en) 2014-06-05 2020-04-21 Chikayoshi Sumi Beamforming method, measurement and imaging instruments, and communication instruments
US9615170B2 (en) 2014-06-09 2017-04-04 Harman International Industries, Inc. Approach for partially preserving music in the presence of intelligible speech
CN104092936B (en) 2014-06-12 2017-01-04 小米科技有限责任公司 Atomatic focusing method and device
US20150363061A1 (en) 2014-06-13 2015-12-17 Autonomic Controls, Inc. System and method for providing related digital content
US9767159B2 (en) 2014-06-13 2017-09-19 Google Inc. Ranking search results
US20150373100A1 (en) 2014-06-19 2015-12-24 Pavel KRAVETS Context sharing between different clients
US9520139B2 (en) 2014-06-19 2016-12-13 Yang Gao Post tone suppression for speech enhancement
US9589556B2 (en) 2014-06-19 2017-03-07 Yang Gao Energy adjustment of acoustic echo replica signal for speech enhancement
US9766702B2 (en) 2014-06-19 2017-09-19 Apple Inc. User detection by a computing device
US9697828B1 (en) 2014-06-20 2017-07-04 Amazon Technologies, Inc. Keyword detection modeling using contextual and environmental information
US10152987B2 (en) 2014-06-23 2018-12-11 Google Llc Remote invocation of mobile device actions
US20150371628A1 (en) 2014-06-23 2015-12-24 Harman International Industries, Inc. User-adapted speech recognition
US9632748B2 (en) 2014-06-24 2017-04-25 Google Inc. Device designation for audio input monitoring
US9368105B1 (en) 2014-06-26 2016-06-14 Amazon Technologies, Inc. Preventing false wake word detections with a voice-controlled device
US9335819B1 (en) 2014-06-26 2016-05-10 Audible, Inc. Automatic creation of sleep bookmarks in content items
US9691379B1 (en) 2014-06-26 2017-06-27 Amazon Technologies, Inc. Selecting from multiple content sources
US9639854B2 (en) 2014-06-26 2017-05-02 Nuance Communications, Inc. Voice-controlled information exchange platform, such as for providing information to supplement advertising
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US9398392B2 (en) 2014-06-30 2016-07-19 Microsoft Technology Licensing, Llc Audio calibration and adjustment
US9170707B1 (en) 2014-09-30 2015-10-27 Google Inc. Method and system for generating a smart time-lapse video clip
US11330100B2 (en) 2014-07-09 2022-05-10 Ooma, Inc. Server based intelligent personal assistant services
US9374634B2 (en) 2014-07-10 2016-06-21 Nxp B.V. System for controlling displacement of a loudspeaker
US9467737B2 (en) * 2014-07-14 2016-10-11 Sonos, Inc. Zone group control
JP2016024212A (en) 2014-07-16 2016-02-08 ソニー株式会社 Information processing device, information processing method and program
CN104155938B (en) * 2014-07-21 2018-01-09 惠州Tcl移动通信有限公司 A kind of home equipment management method and system
US9671997B2 (en) 2014-07-23 2017-06-06 Sonos, Inc. Zone grouping
US10209947B2 (en) 2014-07-23 2019-02-19 Sonos, Inc. Device grouping
US9263042B1 (en) 2014-07-25 2016-02-16 Google Inc. Providing pre-computed hotword models
KR20160017253A (en) 2014-08-01 2016-02-16 삼성전자주식회사 Display driver integrated circuit chip
US9874997B2 (en) 2014-08-08 2018-01-23 Sonos, Inc. Social playback queues
US9548066B2 (en) 2014-08-11 2017-01-17 Amazon Technologies, Inc. Voice application architecture
US9769552B2 (en) 2014-08-19 2017-09-19 Apple Inc. Method and apparatus for estimating talker distance
US20160055847A1 (en) 2014-08-19 2016-02-25 Nuance Communications, Inc. System and method for speech validation
JP6118838B2 (en) 2014-08-21 2017-04-19 本田技研工業株式会社 Information processing apparatus, information processing system, information processing method, and information processing program
CN106797512B (en) 2014-08-28 2019-10-25 美商楼氏电子有限公司 Method, system and the non-transitory computer-readable storage medium of multi-source noise suppressed
KR20160026317A (en) 2014-08-29 2016-03-09 삼성전자주식회사 Method and apparatus for voice recording
US9560050B2 (en) 2014-09-08 2017-01-31 At&T Intellectual Property I, L.P System and method to share a resource or a capability of a device
US9910634B2 (en) 2014-09-09 2018-03-06 Sonos, Inc. Microphone calibration
US9354687B2 (en) 2014-09-11 2016-05-31 Nuance Communications, Inc. Methods and apparatus for unsupervised wakeup with time-correlated acoustic events
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US9747011B2 (en) 2014-09-16 2017-08-29 Google Inc. Continuation of playback of media content by different output devices
US9548053B1 (en) 2014-09-19 2017-01-17 Amazon Technologies, Inc. Audible command filtering
US10645130B2 (en) 2014-09-24 2020-05-05 Sonos, Inc. Playback updates
US9681228B2 (en) 2014-09-30 2017-06-13 Apple Inc. Capacitive position sensing for transducers
JP6624368B2 (en) 2014-09-30 2019-12-25 パナソニックIpマネジメント株式会社 Customer service monitoring system and customer service monitoring method
US9641919B1 (en) 2014-09-30 2017-05-02 Amazon Technologies, Inc. Audio assemblies for electronic devices
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
GB2525051B (en) 2014-09-30 2016-04-13 Imagination Tech Ltd Detection of acoustic echo cancellation
WO2016054230A1 (en) 2014-10-01 2016-04-07 XBrain, Inc. Voice and connection platform
US10817672B2 (en) 2014-10-01 2020-10-27 Nuance Communications, Inc. Natural language understanding (NLU) processing based on user-specified interests
US9318107B1 (en) 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
US9812128B2 (en) 2014-10-09 2017-11-07 Google Inc. Device leadership negotiation among voice interface devices
KR102287943B1 (en) * 2014-10-14 2021-08-09 삼성전자주식회사 Electronic device, method of controlling volume in the electronic device, and method of controlling the electronic device
EP3010251B1 (en) 2014-10-15 2019-11-13 Nxp B.V. Audio system
US20160162469A1 (en) 2014-10-23 2016-06-09 Audience, Inc. Dynamic Local ASR Vocabulary
US9576575B2 (en) * 2014-10-27 2017-02-21 Toyota Motor Engineering & Manufacturing North America, Inc. Providing voice recognition shortcuts based on user verbal input
US9967610B2 (en) 2014-10-30 2018-05-08 Verizon Patent And Licensing Inc. Methods and systems for providing context-based customer support for a user interface view associated with a television service
US9530408B2 (en) 2014-10-31 2016-12-27 At&T Intellectual Property I, L.P. Acoustic environment recognizer for optimal speech processing
US10368121B2 (en) 2014-11-07 2019-07-30 Roku, Inc. System and method for collecting data
US9699550B2 (en) 2014-11-12 2017-07-04 Qualcomm Incorporated Reduced microphone power-up latency
US20160134982A1 (en) 2014-11-12 2016-05-12 Harman International Industries, Inc. System and method for estimating the displacement of a speaker cone
JP2016095383A (en) 2014-11-14 2016-05-26 株式会社ATR−Trek Voice recognition client device and server-type voice recognition device
US10116748B2 (en) 2014-11-20 2018-10-30 Microsoft Technology Licensing, Llc Vehicle-based multi-modal interface
US10431214B2 (en) 2014-11-26 2019-10-01 Voicebox Technologies Corporation System and method of determining a domain and/or an action related to a natural language input
KR102299330B1 (en) 2014-11-26 2021-09-08 삼성전자주식회사 Method for voice recognition and an electronic device thereof
CN107211218B (en) 2014-11-28 2021-05-18 奥德拉声学公司 High displacement acoustic transducer system
US10192549B2 (en) 2014-11-28 2019-01-29 Microsoft Technology Licensing, Llc Extending digital personal assistant action providers
US9812126B2 (en) 2014-11-28 2017-11-07 Microsoft Technology Licensing, Llc Device arbitration for listening devices
US10126406B2 (en) 2014-12-02 2018-11-13 Qualcomm Incorporated Method and apparatus for performing ultrasonic presence detection
CN104538030A (en) 2014-12-11 2015-04-22 科大讯飞股份有限公司 Control system and method for controlling household appliances through voice
CN111414222A (en) 2014-12-11 2020-07-14 微软技术许可有限责任公司 Virtual assistant system capable of actionable messaging
US9775113B2 (en) 2014-12-11 2017-09-26 Mediatek Inc. Voice wakeup detecting device with digital microphone and associated method
US9779725B2 (en) 2014-12-11 2017-10-03 Mediatek Inc. Voice wakeup detecting device and method
US9813812B2 (en) 2014-12-12 2017-11-07 Analog Devices Global Method of controlling diaphragm excursion of electrodynamic loudspeakers
US9552816B2 (en) 2014-12-19 2017-01-24 Amazon Technologies, Inc. Application focus in speech-based systems
US9560441B1 (en) 2014-12-24 2017-01-31 Amazon Technologies, Inc. Determining speaker direction using a spherical microphone array
CN104575504A (en) 2014-12-24 2015-04-29 上海师范大学 Method for personalized television voice wake-up by voiceprint and voice identification
CN104635539A (en) 2014-12-26 2015-05-20 东莞市掌商信息科技有限公司 Intelligent hardware remote voice security control method and system thereof
WO2016112113A1 (en) 2015-01-07 2016-07-14 Knowles Electronics, Llc Utilizing digital microphones for low power keyword detection and noise suppression
US10572810B2 (en) 2015-01-07 2020-02-25 Microsoft Technology Licensing, Llc Managing user interaction for input understanding determinations
US9934406B2 (en) 2015-01-08 2018-04-03 Microsoft Technology Licensing, Llc Protecting private information in input understanding system
US9584915B2 (en) 2015-01-19 2017-02-28 Microsoft Technology Licensing, Llc Spatial audio with remote speakers
US20160210110A1 (en) 2015-01-21 2016-07-21 Ford Global Technologies, Llc Audio synchronization between vehicles and mobile devices
CN104581510B (en) * 2015-01-22 2018-01-16 广东欧珀移动通信有限公司 Audio amplifier volume method to set up and device
US9947313B2 (en) * 2015-01-26 2018-04-17 William Drewes Method for substantial ongoing cumulative voice recognition error reduction
KR102351366B1 (en) 2015-01-26 2022-01-14 삼성전자주식회사 Method and apparatus for voice recognitiionand electronic device thereof
CN104572009B (en) 2015-01-28 2018-01-09 合肥联宝信息技术有限公司 A kind of audio control method and device of adaptive external environment
US9633661B1 (en) 2015-02-02 2017-04-25 Amazon Technologies, Inc. Speech-responsive portable speaker
GB201501791D0 (en) 2015-02-03 2015-03-18 Microsoft Technology Licensing Llc Non-linear echo path detection
US20160232451A1 (en) 2015-02-09 2016-08-11 Velocee Ltd. Systems and methods for managing audio content
US9521496B2 (en) 2015-02-12 2016-12-13 Harman International Industries, Inc. Media content playback system and method
US10121472B2 (en) 2015-02-13 2018-11-06 Knowles Electronics, Llc Audio buffer catch-up apparatus and method with two microphones
US20160239255A1 (en) 2015-02-16 2016-08-18 Harman International Industries, Inc. Mobile interface for loudspeaker optimization
US20160253050A1 (en) 2015-02-26 2016-09-01 Fingertips Lab, Inc. System and method for audio and tactile based browsing
JPWO2016136062A1 (en) 2015-02-27 2017-12-07 ソニー株式会社 Information processing apparatus, information processing method, and program
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10762894B2 (en) 2015-03-27 2020-09-01 Google Llc Convolutional neural networks
US9697826B2 (en) 2015-03-27 2017-07-04 Google Inc. Processing multi-channel audio waveforms
US10192546B1 (en) 2015-03-30 2019-01-29 Amazon Technologies, Inc. Pre-wakeword speech processing
US10034109B2 (en) 2015-04-09 2018-07-24 Audera Acoustics Inc. Acoustic transducer systems with position sensing
US9678707B2 (en) 2015-04-10 2017-06-13 Sonos, Inc. Identification of audio content facilitated by playback device
US10198242B2 (en) 2015-04-14 2019-02-05 Motorola Solutions, Inc. Method and apparatus for a volume of a device
US10079012B2 (en) 2015-04-21 2018-09-18 Google Llc Customizing speech-recognition dictionaries in a smart-home environment
US10178474B2 (en) 2015-04-21 2019-01-08 Google Llc Sound signature database for initialization of noise reduction in recordings
US9472196B1 (en) 2015-04-22 2016-10-18 Google Inc. Developer voice actions system
CN104853405B (en) 2015-05-12 2018-11-30 浙江生辉照明有限公司 Intelligent networking method and smart machine
KR102623039B1 (en) 2015-05-15 2024-01-08 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, light-emitting device, electronic device, and lighting device
US10282424B2 (en) 2015-05-19 2019-05-07 Researchgate Gmbh Linking documents using citations
DE112016002297T5 (en) 2015-05-21 2018-03-15 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, display device, electronic device and lighting device
TWI757234B (en) 2015-05-21 2022-03-11 日商半導體能源研究所股份有限公司 Light-emitting element, display device, electronic device, and lighting device
US10070237B2 (en) 2015-05-21 2018-09-04 Analog Devices, Inc. Optical and capacitive sensing of electroacoustic transducers
JP2016218852A (en) 2015-05-22 2016-12-22 ソニー株式会社 Information processor, information processing method, and program
US9837547B2 (en) 2015-05-22 2017-12-05 Semiconductor Energy Laboratory Co., Ltd. Semiconductor device comprising oxide conductor and display device including the semiconductor device
EP3099047A1 (en) 2015-05-28 2016-11-30 Nxp B.V. Echo controller
US9584935B2 (en) 2015-05-29 2017-02-28 Sound United, Llc. Multi-zone media system and method for providing multi-zone media
US10657949B2 (en) 2015-05-29 2020-05-19 Sound United, LLC System and method for integrating a home media system and other home systems
US9734822B1 (en) 2015-06-01 2017-08-15 Amazon Technologies, Inc. Feedback based beamformed signal selection
US9864571B2 (en) 2015-06-04 2018-01-09 Sonos, Inc. Dynamic bonding of playback devices
US9672821B2 (en) 2015-06-05 2017-06-06 Apple Inc. Robust speech recognition in the presence of echo and noise using multiple signals for discrimination
US9736578B2 (en) 2015-06-07 2017-08-15 Apple Inc. Microphone-based orientation sensors and related techniques
US10249205B2 (en) 2015-06-08 2019-04-02 Novel Effect, Inc. System and method for integrating special effects with a text source
KR102444075B1 (en) 2015-06-09 2022-09-16 삼성전자주식회사 Electronic device, peripheral device, and control method thereof
US10248376B2 (en) 2015-06-11 2019-04-02 Sonos, Inc. Multiple groupings in a playback system
US20160373909A1 (en) 2015-06-17 2016-12-22 Hive Life, LLC Wireless audio, security communication and home automation
KR20180017077A (en) 2015-06-17 2018-02-20 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Iridium complexes, light-emitting devices, display devices, electronic devices, and lighting devices
JP6739907B2 (en) 2015-06-18 2020-08-12 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Device specifying method, device specifying device and program
US10025447B1 (en) 2015-06-19 2018-07-17 Amazon Technologies, Inc. Multi-device user interface
US9554210B1 (en) 2015-06-25 2017-01-24 Amazon Technologies, Inc. Multichannel acoustic echo cancellation with unique individual channel estimations
KR102317526B1 (en) 2015-06-25 2021-10-26 엘지전자 주식회사 Headset and controlling mrthod thereof
KR20170001173A (en) 2015-06-25 2017-01-04 엘지전자 주식회사 Watch-type mobile terminal operating method thereof
US9472203B1 (en) 2015-06-29 2016-10-18 Amazon Technologies, Inc. Clock synchronization for multichannel system
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
EP3317878B1 (en) 2015-06-30 2020-03-25 Fraunhofer Gesellschaft zur Förderung der Angewand Method and device for creating a database
KR20240035638A (en) 2015-07-08 2024-03-15 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, display device, electronic device, and lighting device
US10304440B1 (en) 2015-07-10 2019-05-28 Amazon Technologies, Inc. Keyword spotting using multi-task configuration
CN105101083A (en) * 2015-07-15 2015-11-25 魅族科技(中国)有限公司 Method and device for controlling indoor electronic device
US9686625B2 (en) 2015-07-21 2017-06-20 Disney Enterprises, Inc. Systems and methods for delivery of personalized audio
WO2017013526A1 (en) 2015-07-21 2017-01-26 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, display device, electronic device, and lighting device
US9769563B2 (en) 2015-07-22 2017-09-19 Harman International Industries, Incorporated Audio enhancement via opportunistic use of microphones
KR102616411B1 (en) 2015-07-23 2023-12-26 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting devices, display devices, electronic devices, and lighting devices
US20170034263A1 (en) 2015-07-30 2017-02-02 Amp Me Inc. Synchronized Playback of Streamed Audio Content by Multiple Internet-Capable Portable Devices
US10529318B2 (en) 2015-07-31 2020-01-07 International Business Machines Corporation Implementing a classification model for recognition processing
US9691361B2 (en) 2015-08-03 2017-06-27 International Business Machines Corporation Adjusting presentation of content on a display
KR102402512B1 (en) * 2015-08-04 2022-05-27 삼성전자주식회사 Electronic device and method for controlling external device
CN105187907A (en) * 2015-08-05 2015-12-23 四川长虹电器股份有限公司 Volume control system and control method for smart television
US9913056B2 (en) 2015-08-06 2018-03-06 Dolby Laboratories Licensing Corporation System and method to enhance speakers connected to devices with microphones
US10333904B2 (en) 2015-08-08 2019-06-25 Peter J. Tormey Voice access and control
KR102386854B1 (en) 2015-08-20 2022-04-13 삼성전자주식회사 Apparatus and method for speech recognition based on unified model
US10270041B2 (en) 2015-08-28 2019-04-23 Semiconductor Energy Laboratory Co., Ltd. Light-emitting element, light-emitting device, electronic device, and lighting device
WO2017039632A1 (en) 2015-08-31 2017-03-09 Nunntawi Dynamics Llc Passive self-localization of microphone arrays
EP3142389B1 (en) 2015-09-02 2020-07-08 Harman International Industries, Inc. Audio system with multi-screen application
US10339917B2 (en) 2015-09-03 2019-07-02 Google Llc Enhanced speech endpointing
KR102417682B1 (en) 2015-09-09 2022-07-07 삼성전자주식회사 Method and apparatus for managing nick name using a voice recognition
US10026399B2 (en) 2015-09-11 2018-07-17 Amazon Technologies, Inc. Arbitration between voice-enabled devices
KR20170031392A (en) 2015-09-11 2017-03-21 삼성전자주식회사 Electronic apparatus, sound system and audio output method
CN105206281B (en) 2015-09-14 2019-02-15 胡旻波 Sound enhancement method based on distributed microphone array network
KR20170032096A (en) 2015-09-14 2017-03-22 삼성전자주식회사 Electronic Device, Driving Methdo of Electronic Device, Voice Recognition Apparatus, Driving Method of Voice Recognition Apparatus, and Computer Readable Recording Medium
US10289734B2 (en) 2015-09-18 2019-05-14 Samsung Electronics Co., Ltd. Entity-type search system
CN105204357B (en) 2015-09-18 2018-02-06 小米科技有限责任公司 The contextual model method of adjustment and device of intelligent home device
US10706873B2 (en) 2015-09-18 2020-07-07 Sri International Real-time speaker state analytics platform
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
KR102420450B1 (en) 2015-09-23 2022-07-14 삼성전자주식회사 Voice Recognition Apparatus, Voice Recognition Method of User Device and Computer Readable Recording Medium
KR102446392B1 (en) 2015-09-23 2022-09-23 삼성전자주식회사 Electronic device and method for recognizing voice of speech
US9936156B2 (en) 2015-09-24 2018-04-03 Samantha WESTERN Volume adjusting apparatus and method
US10229700B2 (en) 2015-09-24 2019-03-12 Google Llc Voice activity detection
CN105162886B (en) 2015-09-25 2019-04-12 北京奇艺世纪科技有限公司 A kind of audio control method and device
US10186276B2 (en) 2015-09-25 2019-01-22 Qualcomm Incorporated Adaptive noise suppression for super wideband music
JP6536320B2 (en) 2015-09-28 2019-07-03 富士通株式会社 Audio signal processing device, audio signal processing method and program
US10334306B2 (en) 2015-09-28 2019-06-25 Google Llc Time-synchronized, multizone medial streaming
US9996316B2 (en) 2015-09-28 2018-06-12 Amazon Technologies, Inc. Mediation of wakeword response for multiple devices
US10241754B1 (en) 2015-09-29 2019-03-26 Amazon Technologies, Inc. Systems and methods for providing supplemental information with a response to a command
TW202316695A (en) 2015-09-30 2023-04-16 日商半導體能源研究所股份有限公司 Light-emitting element, display device, electronic device, and lighting device
KR20170038681A (en) 2015-09-30 2017-04-07 가부시키가이샤 한도오따이 에네루기 켄큐쇼 Light-emitting element, display device, electronic device, and lighting device
US20170092278A1 (en) 2015-09-30 2017-03-30 Apple Inc. Speaker recognition
US9978366B2 (en) 2015-10-09 2018-05-22 Xappmedia, Inc. Event-based speech interactive media player
KR102429260B1 (en) 2015-10-12 2022-08-05 삼성전자주식회사 Apparatus and method for processing control command based on voice agent, agent apparatus
US9754580B2 (en) 2015-10-12 2017-09-05 Technologies For Voice Interface System and method for extracting and using prosody features
EP3311590B1 (en) 2015-10-15 2019-08-14 Huawei Technologies Co., Ltd. A sound processing node of an arrangement of sound processing nodes
CN107016999B (en) 2015-10-16 2022-06-14 谷歌有限责任公司 Hot word recognition
US9747926B2 (en) 2015-10-16 2017-08-29 Google Inc. Hotword recognition
US9928840B2 (en) 2015-10-16 2018-03-27 Google Llc Hotword recognition
US10453450B2 (en) 2015-10-20 2019-10-22 Bragi GmbH Wearable earpiece voice command control system and method
KR102444061B1 (en) 2015-11-02 2022-09-16 삼성전자주식회사 Electronic device and method for recognizing voice of speech
CN105427861B (en) 2015-11-03 2019-02-15 胡旻波 The system and its control method of smart home collaboration microphone voice control
US9691378B1 (en) 2015-11-05 2017-06-27 Amazon Technologies, Inc. Methods and devices for selectively ignoring captured audio data
US9653075B1 (en) 2015-11-06 2017-05-16 Google Inc. Voice commands across devices
US10863267B2 (en) 2015-11-10 2020-12-08 Savant Systems, Inc. Volume control for audio/video devices
US9990209B2 (en) 2015-11-12 2018-06-05 Microsoft Technology Licensing, Llc Digital assistance device for facilitating multi-stage setup
US10706852B2 (en) 2015-11-13 2020-07-07 Microsoft Technology Licensing, Llc Confidence features for automated speech recognition arbitration
US10592949B2 (en) 2015-11-13 2020-03-17 [24]7.ai, Inc. Method and apparatus for linking customer interactions with customer messaging platforms
US20170140750A1 (en) 2015-11-17 2017-05-18 Le Holdings (Beijing) Co., Ltd. Method and device for speech recognition
CN105472191B (en) 2015-11-18 2019-09-20 百度在线网络技术(北京)有限公司 A kind of method and apparatus tracking echo delay time
US11929088B2 (en) 2015-11-20 2024-03-12 Synaptics Incorporated Input/output mode control for audio processing
DE112015007147T5 (en) 2015-11-25 2018-08-09 Mitsubishi Electric Corporation Speech dialogue device and speech dialogue method
US10040423B2 (en) 2015-11-27 2018-08-07 Bragi GmbH Vehicle with wearable for identifying one or more vehicle occupants
US9484030B1 (en) 2015-12-02 2016-11-01 Amazon Technologies, Inc. Audio triggered commands
US9699597B2 (en) 2015-12-07 2017-07-04 Google Inc. Wireless signal forwarding
US9747920B2 (en) 2015-12-17 2017-08-29 Amazon Technologies, Inc. Adaptive beamforming to create reference channels
US10134388B1 (en) 2015-12-23 2018-11-20 Amazon Technologies, Inc. Word generation for speech recognition
US10311862B2 (en) 2015-12-23 2019-06-04 Rovi Guides, Inc. Systems and methods for conversations with devices about media using interruptions and changes of subjects
CN105679318A (en) 2015-12-23 2016-06-15 珠海格力电器股份有限公司 Display method and device based on speech recognition, display system and air conditioner
CN105632486B (en) 2015-12-23 2019-12-17 北京奇虎科技有限公司 Voice awakening method and device of intelligent hardware
US10547942B2 (en) 2015-12-28 2020-01-28 Samsung Electronics Co., Ltd. Control of electrodynamic speaker driver using a low-order non-linear model
US9826599B2 (en) 2015-12-28 2017-11-21 Amazon Technologies, Inc. Voice-controlled light switches
US10026401B1 (en) 2015-12-28 2018-07-17 Amazon Technologies, Inc. Naming devices via voice commands
US9992642B1 (en) 2015-12-29 2018-06-05 Amazon Technologies, Inc. Automated messaging
US9820036B1 (en) 2015-12-30 2017-11-14 Amazon Technologies, Inc. Speech processing of reflected sound
US9813810B1 (en) 2016-01-05 2017-11-07 Google Inc. Multi-microphone neural network for sound recognition
US10049666B2 (en) 2016-01-06 2018-08-14 Google Llc Voice recognition system
US9743207B1 (en) 2016-01-18 2017-08-22 Sonos, Inc. Calibration using multiple recording devices
KR20170086814A (en) 2016-01-19 2017-07-27 삼성전자주식회사 Electronic device for providing voice recognition and method thereof
CN105741838B (en) 2016-01-20 2019-10-15 百度在线网络技术(北京)有限公司 Voice awakening method and device
KR102392113B1 (en) 2016-01-20 2022-04-29 삼성전자주식회사 Electronic device and method for processing voice command thereof
US9749731B2 (en) 2016-01-21 2017-08-29 Bose Corporation Sidetone generation using multiple microphones
KR20170091913A (en) 2016-02-02 2017-08-10 삼성전자주식회사 Method and apparatus for providing video service
US9659555B1 (en) 2016-02-09 2017-05-23 Amazon Technologies, Inc. Multichannel acoustic echo cancellation
US9653060B1 (en) 2016-02-09 2017-05-16 Amazon Technologies, Inc. Hybrid reference signal for acoustic echo cancellation
US11437020B2 (en) 2016-02-10 2022-09-06 Cerence Operating Company Techniques for spatially selective wake-up word recognition and related systems and methods
US9898250B1 (en) 2016-02-12 2018-02-20 Amazon Technologies, Inc. Controlling distributed audio outputs to enable voice output
US9858927B2 (en) 2016-02-12 2018-01-02 Amazon Technologies, Inc Processing spoken commands to control distributed audio outputs
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9772817B2 (en) * 2016-02-22 2017-09-26 Sonos, Inc. Room-corrected voice detection
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US9811314B2 (en) 2016-02-22 2017-11-07 Sonos, Inc. Metadata exchange involving a networked playback system and a networked microphone system
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US9779735B2 (en) 2016-02-24 2017-10-03 Google Inc. Methods and systems for detecting and processing speech signals
WO2017147936A1 (en) 2016-03-04 2017-09-08 茹旷 Smart home assistant
US10133612B2 (en) 2016-03-17 2018-11-20 Nuance Communications, Inc. Session processing interaction between two or more virtual assistants
US9769420B1 (en) 2016-03-18 2017-09-19 Thomas Lawrence Moses Portable wireless remote monitoring and control systems
US10373612B2 (en) 2016-03-21 2019-08-06 Amazon Technologies, Inc. Anchored speech detection and speech recognition
US9805714B2 (en) 2016-03-22 2017-10-31 Asustek Computer Inc. Directional keyword verification method applicable to electronic device and electronic device using the same
US10365887B1 (en) 2016-03-25 2019-07-30 Amazon Technologies, Inc. Generating commands based on location and wakeword
US10332508B1 (en) 2016-03-31 2019-06-25 Amazon Technologies, Inc. Confidence checking for speech processing and query answering
US9952827B2 (en) 2016-04-13 2018-04-24 Comcast Cable Communications, Llc Dynamic adjustment of equalization settings of audio components via a sound device profile
JP6686226B2 (en) 2016-04-18 2020-04-22 グーグル エルエルシー Call the appropriate agent automation assistant
US10318236B1 (en) 2016-05-05 2019-06-11 Amazon Technologies, Inc. Refining media playback
US10447748B2 (en) 2016-05-12 2019-10-15 Apple Inc. Sharing media information between applications on client devices
US20170329397A1 (en) 2016-05-12 2017-11-16 Rovi Guides, Inc. Systems and methods for navigating a media guidance application using gaze control
US10149049B2 (en) 2016-05-13 2018-12-04 Bose Corporation Processing speech from distributed microphones
US20170330565A1 (en) 2016-05-13 2017-11-16 Bose Corporation Handling Responses to Speech Processing
US10187440B2 (en) 2016-05-27 2019-01-22 Apple Inc. Personalization of media streams
US10063965B2 (en) 2016-06-01 2018-08-28 Google Llc Sound source estimation using neural networks
US10079027B2 (en) 2016-06-03 2018-09-18 Nxp B.V. Sound signal detector
US10474419B2 (en) 2016-06-03 2019-11-12 Crestron Electronics, Inc. Audio digital signal processor utilizing a hybrid network architecture
US10235124B2 (en) 2016-06-08 2019-03-19 Google Llc Audio announcement prioritization system
AU2017100581B4 (en) 2016-06-08 2018-02-01 Apple Inc. Intelligent automated assistant for media exploration
US9754605B1 (en) 2016-06-09 2017-09-05 Amazon Technologies, Inc. Step-size control for multi-channel acoustic echo canceller
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
AU2017100486C4 (en) 2016-06-11 2019-09-05 Apple Inc. Intelligent device arbitration and control
DK179034B1 (en) 2016-06-12 2017-09-04 Apple Inc Devices, methods, and graphical user interfaces for dynamically adjusting presentation of audio outputs
US10212029B2 (en) 2016-06-15 2019-02-19 Microsoft Technology Licensing, Llc Service provisioning in cloud computing systems
US11600269B2 (en) 2016-06-15 2023-03-07 Cerence Operating Company Techniques for wake-up word recognition and related systems and methods
US20170364371A1 (en) 2016-06-15 2017-12-21 Microsoft Technology Licensing, Llc Context-Dependent Digital Action-Assistance Tool
KR20170142001A (en) 2016-06-16 2017-12-27 삼성전자주식회사 Electric device, acoustic echo cancelling method of thereof and non-transitory computer readable recording medium
US9749738B1 (en) 2016-06-20 2017-08-29 Gopro, Inc. Synthesizing audio corresponding to a virtual microphone location
US9875740B1 (en) 2016-06-20 2018-01-23 A9.Com, Inc. Using voice information to influence importance of search result categories
ITUA20164622A1 (en) 2016-06-23 2017-12-23 St Microelectronics Srl BEAMFORMING PROCEDURE BASED ON MICROPHONE DIES AND ITS APPARATUS
US10091545B1 (en) 2016-06-27 2018-10-02 Amazon Technologies, Inc. Methods and systems for detecting audio output of associated device
US9728188B1 (en) 2016-06-28 2017-08-08 Amazon Technologies, Inc. Methods and devices for ignoring similar audio being received by a system
KR102471499B1 (en) 2016-07-05 2022-11-28 삼성전자주식회사 Image Processing Apparatus and Driving Method Thereof, and Computer Readable Recording Medium
EP3270377B1 (en) 2016-07-12 2020-02-19 Dolby Laboratories Licensing Corporation Assessment and adjustment of audio installation
WO2018013564A1 (en) 2016-07-12 2018-01-18 Bose Corporation Combining gesture and voice user interfaces
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US9860670B1 (en) 2016-07-15 2018-01-02 Sonos, Inc. Spectral correction using spatial calibration
US9979680B2 (en) 2016-07-21 2018-05-22 Fujitsu Limited Smart notification scheduling and modality selection
US10621992B2 (en) 2016-07-22 2020-04-14 Lenovo (Singapore) Pte. Ltd. Activating voice assistant based on at least one of user proximity and context
KR102575634B1 (en) 2016-07-26 2023-09-06 삼성전자주식회사 Electronic device and method for operating the same
CN106028223A (en) 2016-07-26 2016-10-12 广东欧珀移动通信有限公司 Control method and device of intelligent loudspeaker box and the intelligent loudspeaker box
US20180033429A1 (en) 2016-07-26 2018-02-01 Ford Global Technologies, Llc Extendable vehicle system
US10431211B2 (en) 2016-07-29 2019-10-01 Qualcomm Incorporated Directional processing of far-field audio
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10459684B2 (en) 2016-08-05 2019-10-29 Sonos, Inc. Calibration of a playback device based on an estimated frequency response
US10026403B2 (en) 2016-08-12 2018-07-17 Paypal, Inc. Location based voice association system
US9691384B1 (en) 2016-08-19 2017-06-27 Google Inc. Voice action biasing system
US10326869B2 (en) 2016-08-19 2019-06-18 Amazon Technologies, Inc. Enabling voice control of telephone device
US20180053504A1 (en) 2016-08-19 2018-02-22 Otis Elevator Company Intention recognition for triggering voice recognition system
CN107767863B (en) 2016-08-22 2021-05-04 科大讯飞股份有限公司 Voice awakening method and system and intelligent terminal
WO2018039045A1 (en) 2016-08-24 2018-03-01 Knowles Electronics, Llc Methods and systems for keyword detection using keyword repetitions
US9972320B2 (en) 2016-08-24 2018-05-15 Google Llc Hotword detection on multiple devices
US10360910B2 (en) 2016-08-29 2019-07-23 Garmin Switzerland Gmbh Automatic speech recognition (ASR) utilizing GPS and sensor data
US10461953B2 (en) 2016-08-29 2019-10-29 Lutron Technology Company Llc Load control system having audio control devices
US10685656B2 (en) 2016-08-31 2020-06-16 Bose Corporation Accessing multiple virtual personal assistants (VPA) from a single device
US10580404B2 (en) 2016-09-01 2020-03-03 Amazon Technologies, Inc. Indicator for voice-based communications
US10074369B2 (en) 2016-09-01 2018-09-11 Amazon Technologies, Inc. Voice-based communications
US10057698B2 (en) 2016-09-02 2018-08-21 Bose Corporation Multiple room communication system and method
CN112289342B (en) 2016-09-06 2024-03-19 渊慧科技有限公司 Generating audio using neural networks
EP3297298B1 (en) 2016-09-19 2020-05-06 A-Volute Method for reproducing spatially distributed sounds
US9972318B1 (en) 2016-09-21 2018-05-15 Amazon Technologies, Inc. Interpreting voice commands
JP6520878B2 (en) 2016-09-21 2019-05-29 トヨタ自動車株式会社 Voice acquisition system and voice acquisition method
US10409548B2 (en) 2016-09-27 2019-09-10 Grabango Co. System and method for differentially locating and modifying audio sources
JP2018055259A (en) 2016-09-27 2018-04-05 キヤノン株式会社 Information processing apparatus, information processing method and program
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9959861B2 (en) 2016-09-30 2018-05-01 Robert Bosch Gmbh System and method for speech recognition
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
JP6882463B2 (en) 2016-10-03 2021-06-02 グーグル エルエルシーGoogle LLC Computer-based selection of synthetic speech for agents
US10283138B2 (en) 2016-10-03 2019-05-07 Google Llc Noise mitigation for a voice interface device
KR20200035476A (en) 2016-10-03 2020-04-03 구글 엘엘씨 Processing voice commands based on device topology
CN107919116B (en) 2016-10-11 2019-09-13 芋头科技(杭州)有限公司 A kind of voice-activation detecting method and device
US10712997B2 (en) 2016-10-17 2020-07-14 Sonos, Inc. Room association based on name
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US20180122372A1 (en) 2016-10-31 2018-05-03 Soundhound, Inc. Distinguishable open sounds
US10783883B2 (en) 2016-11-03 2020-09-22 Google Llc Focus session at a voice interface device
EP3637414B1 (en) 2016-11-07 2024-01-03 Google LLC Recorded media hotword trigger suppression
US10154496B2 (en) 2016-11-10 2018-12-11 Futurewei Technologies, Inc. System and method for beamformed reference signals in three dimensional multiple input multiple output communications systems
US10382806B2 (en) 2016-11-14 2019-08-13 DISH Technologies L.L.C. Apparatus, systems and methods for controlling presentation of content using a multi-media table
US10170110B2 (en) 2016-11-17 2019-01-01 Robert Bosch Gmbh System and method for ranking of hybrid speech recognition results with neural networks
CN106708403A (en) 2016-11-30 2017-05-24 努比亚技术有限公司 The method and device of synchronizing playing notification tone while inputting slide operation
US10079015B1 (en) 2016-12-06 2018-09-18 Amazon Technologies, Inc. Multi-layer keyword detection
US10186265B1 (en) 2016-12-06 2019-01-22 Amazon Technologies, Inc. Multi-layer keyword detection to avoid detection of keywords in output audio
US10134396B2 (en) 2016-12-07 2018-11-20 Google Llc Preventing of audio attacks
US10241748B2 (en) 2016-12-13 2019-03-26 EVA Automation, Inc. Schedule-based coordination of audio sources
US11184764B2 (en) 2016-12-14 2021-11-23 Amzetta Technologies, Llc Methods and systems of establishing communication between devices
CN106531165A (en) 2016-12-15 2017-03-22 北京塞宾科技有限公司 Portable smart home voice control system and control method adopting same
US10339957B1 (en) 2016-12-20 2019-07-02 Amazon Technologies, Inc. Ending communications session based on presence data
US10068573B1 (en) 2016-12-21 2018-09-04 Amazon Technologies, Inc. Approaches for voice-activated audio commands
US10559309B2 (en) 2016-12-22 2020-02-11 Google Llc Collaborative voice controlled devices
CN106910500B (en) 2016-12-23 2020-04-17 北京小鸟听听科技有限公司 Method and device for voice control of device with microphone array
WO2018119470A1 (en) 2016-12-23 2018-06-28 Synaptics Incorporated Online dereverberation algorithm based on weighted prediction error for noisy time-varying environments
US10546578B2 (en) 2016-12-26 2020-01-28 Samsung Electronics Co., Ltd. Method and device for transmitting and receiving audio data
US10276161B2 (en) 2016-12-27 2019-04-30 Google Llc Contextual hotwords
US10593328B1 (en) 2016-12-27 2020-03-17 Amazon Technologies, Inc. Voice control of remote device
US10580405B1 (en) 2016-12-27 2020-03-03 Amazon Technologies, Inc. Voice control of remote device
US10186266B1 (en) 2016-12-28 2019-01-22 Amazon Technologies, Inc. Message playback using a shared device
US10831366B2 (en) 2016-12-29 2020-11-10 Google Llc Modality learning on mobile devices
US10229680B1 (en) 2016-12-29 2019-03-12 Amazon Technologies, Inc. Contextual entity resolution
US10224031B2 (en) 2016-12-30 2019-03-05 Google Llc Generating and transmitting invocation request to appropriate third-party agent
US10290302B2 (en) 2016-12-30 2019-05-14 Google Llc Compact home assistant with combined acoustic waveguide and heat sink
KR102412202B1 (en) 2017-01-03 2022-06-27 삼성전자주식회사 Refrigerator and method of displaying information thereof
US10248613B2 (en) 2017-01-10 2019-04-02 Qualcomm Incorporated Data bus activation in an electronic device
US10672387B2 (en) 2017-01-11 2020-06-02 Google Llc Systems and methods for recognizing user speech
US11164570B2 (en) 2017-01-17 2021-11-02 Ford Global Technologies, Llc Voice assistant tracking and activation
KR20180084392A (en) 2017-01-17 2018-07-25 삼성전자주식회사 Electronic device and operating method thereof
US10306254B2 (en) 2017-01-17 2019-05-28 Seiko Epson Corporation Encoding free view point data in movie data container
KR102556840B1 (en) 2017-01-20 2023-07-18 삼성전자주식회사 User terminal device and method for control thereof
KR20180085931A (en) 2017-01-20 2018-07-30 삼성전자주식회사 Voice input processing method and electronic device supporting the same
US20180218747A1 (en) 2017-01-28 2018-08-02 Bose Corporation Audio Device Filter Modification
KR20180090586A (en) 2017-02-03 2018-08-13 삼성전자주식회사 Method for providing notification and an electronic device thereof
CA3155434A1 (en) 2017-02-07 2018-08-16 Lutron Technology Company Llc Audio-based load control system
US10762891B2 (en) 2017-02-10 2020-09-01 Synaptics Incorporated Binary and multi-class classification systems and methods using connectionist temporal classification
CN108446281B (en) 2017-02-13 2021-03-12 北京嘀嘀无限科技发展有限公司 Method, device and storage medium for determining user intimacy
US20180293221A1 (en) 2017-02-14 2018-10-11 Microsoft Technology Licensing, Llc Speech parsing with intelligent assistant
US10467510B2 (en) 2017-02-14 2019-11-05 Microsoft Technology Licensing, Llc Intelligent assistant
US10311876B2 (en) 2017-02-14 2019-06-04 Google Llc Server side hotwording
US11100384B2 (en) 2017-02-14 2021-08-24 Microsoft Technology Licensing, Llc Intelligent device user interactions
US10431217B2 (en) 2017-02-15 2019-10-01 Amazon Technologies, Inc. Audio playback device that dynamically switches between receiving audio data from a soft access point and receiving audio data from a local access point
US10839795B2 (en) 2017-02-15 2020-11-17 Amazon Technologies, Inc. Implicit target selection for multiple audio playback devices in an environment
US10264358B2 (en) 2017-02-15 2019-04-16 Amazon Technologies, Inc. Selection of master device for synchronized audio
CN106921560B (en) 2017-02-28 2020-06-02 北京小米移动软件有限公司 Voice communication method, device and system
US20180262793A1 (en) 2017-03-09 2018-09-13 Google Inc. Reverse Casting from a First Screen Device to a Second Screen Device
US10706843B1 (en) 2017-03-09 2020-07-07 Amazon Technologies, Inc. Contact resolution for communications systems
US10089981B1 (en) 2017-03-09 2018-10-02 Amazon Technologies, Inc. Messaging account disambiguation
US10540961B2 (en) 2017-03-13 2020-01-21 Baidu Usa Llc Convolutional recurrent neural networks for small-footprint keyword spotting
US10074371B1 (en) 2017-03-14 2018-09-11 Amazon Technologies, Inc. Voice control of remote device by disabling wakeword detection
US10499139B2 (en) 2017-03-20 2019-12-03 Bose Corporation Audio signal processing for noise reduction
US10600406B1 (en) 2017-03-20 2020-03-24 Amazon Technologies, Inc. Intent re-ranker
US10621980B2 (en) 2017-03-21 2020-04-14 Harman International Industries, Inc. Execution of voice commands in a multi-device system
WO2018173293A1 (en) 2017-03-24 2018-09-27 ヤマハ株式会社 Speech terminal, speech command generation system, and method for controlling speech command generation system
US11183181B2 (en) 2017-03-27 2021-11-23 Sonos, Inc. Systems and methods of multiple voice services
US10643609B1 (en) 2017-03-29 2020-05-05 Amazon Technologies, Inc. Selecting speech inputs
CN107135443B (en) 2017-03-29 2020-06-23 联想(北京)有限公司 Signal processing method and electronic equipment
US10373630B2 (en) 2017-03-31 2019-08-06 Intel Corporation Systems and methods for energy efficient and low power distributed automatic speech recognition on wearable devices
US10825471B2 (en) 2017-04-05 2020-11-03 Avago Technologies International Sales Pte. Limited Voice energy detection
US11188808B2 (en) 2017-04-11 2021-11-30 Lenovo (Singapore) Pte. Ltd. Indicating a responding virtual assistant from a plurality of virtual assistants
US10748531B2 (en) 2017-04-13 2020-08-18 Harman International Industries, Incorporated Management layer for multiple intelligent personal assistant services
CN107122158A (en) 2017-04-14 2017-09-01 北京小米移动软件有限公司 The method and device of broadcast information prompting audio, electronic equipment
KR102068182B1 (en) 2017-04-21 2020-01-20 엘지전자 주식회사 Voice recognition apparatus and home appliance system
KR102392297B1 (en) 2017-04-24 2022-05-02 엘지전자 주식회사 electronic device
KR102298947B1 (en) 2017-04-28 2021-09-08 삼성전자주식회사 Voice data processing method and electronic device supporting the same
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US10013995B1 (en) 2017-05-10 2018-07-03 Cirrus Logic, Inc. Combined reference signal for acoustic echo cancellation
US10311870B2 (en) 2017-05-10 2019-06-04 Ecobee Inc. Computerized device with voice command input capability
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. Far-field extension for digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10628484B2 (en) 2017-05-17 2020-04-21 Board Of Trustees Of The University Of Illinois Vibrational devices as sound sensors
US10531196B2 (en) 2017-06-02 2020-01-07 Apple Inc. Spatially ducking audio produced through a beamforming loudspeaker array
US10564928B2 (en) 2017-06-02 2020-02-18 Rovi Guides, Inc. Systems and methods for generating a volume- based response for multiple voice-operated user devices
US10403299B2 (en) 2017-06-02 2019-09-03 Apple Inc. Multi-channel speech signal enhancement for robust voice trigger detection and automatic speech recognition
US10522146B1 (en) 2019-07-09 2019-12-31 Instreamatic, Inc. Systems and methods for recognizing and performing voice commands during advertisement
US10395650B2 (en) 2017-06-05 2019-08-27 Google Llc Recorded media hotword trigger suppression
US10983753B2 (en) 2017-06-09 2021-04-20 International Business Machines Corporation Cognitive and interactive sensor based smart home solution
US10410635B2 (en) 2017-06-09 2019-09-10 Soundhound, Inc. Dual mode speech recognition
US10984329B2 (en) 2017-06-14 2021-04-20 Ademco Inc. Voice activated virtual assistant with a fused response
US10028069B1 (en) 2017-06-22 2018-07-17 Sonos, Inc. Immersive audio in a media playback system
US10950228B1 (en) 2017-06-28 2021-03-16 Amazon Technologies, Inc. Interactive voice controlled entertainment
US11189273B2 (en) 2017-06-29 2021-11-30 Amazon Technologies, Inc. Hands free always on near field wakeword solution
US11264019B2 (en) 2017-06-30 2022-03-01 Google Llc Methods, systems, and media for voice-based call operations
US10687353B2 (en) 2017-07-10 2020-06-16 Qualcomm Incorporated Management of conflicting scheduling commands in wireless networks
US20190013019A1 (en) 2017-07-10 2019-01-10 Intel Corporation Speaker command and key phrase management for muli -virtual assistant systems
US10310082B2 (en) 2017-07-27 2019-06-04 Quantenna Communications, Inc. Acoustic spatial diagnostics for smart home management
US11205421B2 (en) 2017-07-28 2021-12-21 Cerence Operating Company Selection system and method
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US11798544B2 (en) 2017-08-07 2023-10-24 Polycom, Llc Replying to a spoken command
JP6513749B2 (en) 2017-08-09 2019-05-15 レノボ・シンガポール・プライベート・リミテッド Voice assist system, server device, voice assist method thereof, and program for execution by computer
KR102389041B1 (en) 2017-08-11 2022-04-21 엘지전자 주식회사 Mobile terminal and method using machine learning for controlling mobile terminal
US10304475B1 (en) 2017-08-14 2019-05-28 Amazon Technologies, Inc. Trigger word based beam selection
US11062710B2 (en) 2017-08-28 2021-07-13 Roku, Inc. Local and cloud speech recognition
US20190066710A1 (en) 2017-08-28 2019-02-28 Apple Inc. Transparent near-end user control over far-end speech enhancement processing
US10553235B2 (en) 2017-08-28 2020-02-04 Apple Inc. Transparent near-end user control over far-end speech enhancement processing
US11062702B2 (en) 2017-08-28 2021-07-13 Roku, Inc. Media system with multiple digital assistants
US10546583B2 (en) 2017-08-30 2020-01-28 Amazon Technologies, Inc. Context-based device arbitration
US10911596B1 (en) 2017-08-31 2021-02-02 Amazon Technologies, Inc. Voice user interface for wired communications system
US10515625B1 (en) 2017-08-31 2019-12-24 Amazon Technologies, Inc. Multi-modal natural language processing
US10366699B1 (en) 2017-08-31 2019-07-30 Amazon Technologies, Inc. Multi-path calculations for device energy levels
US11361763B1 (en) 2017-09-01 2022-06-14 Amazon Technologies, Inc. Detecting system-directed speech
US10482895B2 (en) 2017-09-01 2019-11-19 Cirrus Logic, Inc. Acoustic echo cancellation (AEC) rate adaptation
US10847149B1 (en) 2017-09-01 2020-11-24 Amazon Technologies, Inc. Speech-based attention span for voice user interface
JP6571144B2 (en) 2017-09-08 2019-09-04 シャープ株式会社 Monitoring system, monitoring device, server, and monitoring method
US20190082255A1 (en) 2017-09-08 2019-03-14 Olympus Corporation Information acquiring apparatus, information acquiring method, and computer readable recording medium
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US10083006B1 (en) 2017-09-12 2018-09-25 Google Llc Intercom-style communication using multiple computing devices
KR102338376B1 (en) 2017-09-13 2021-12-13 삼성전자주식회사 An electronic device and Method for controlling the electronic device thereof
US11314215B2 (en) 2017-09-15 2022-04-26 Kohler Co. Apparatus controlling bathroom appliance lighting based on user identity
US9973849B1 (en) 2017-09-20 2018-05-15 Amazon Technologies, Inc. Signal quality beam selection
US10719507B2 (en) 2017-09-21 2020-07-21 SayMosaic Inc. System and method for natural language processing
US10580411B2 (en) 2017-09-25 2020-03-03 Cirrus Logic, Inc. Talker change detection
US10586534B1 (en) 2017-09-27 2020-03-10 Amazon Technologies, Inc. Voice-controlled device control using acoustic echo cancellation statistics
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10051366B1 (en) 2017-09-28 2018-08-14 Sonos, Inc. Three-dimensional beam forming with a microphone array
US10897680B2 (en) 2017-10-04 2021-01-19 Google Llc Orientation-based device interface
US11233782B2 (en) 2017-10-04 2022-01-25 Resilience Magnum IP, LLC Single node network connectivity for structure automation functionality
KR102543693B1 (en) 2017-10-17 2023-06-16 삼성전자주식회사 Electronic device and operating method thereof
KR102421255B1 (en) 2017-10-17 2022-07-18 삼성전자주식회사 Electronic device and method for controlling voice signal
US10403266B2 (en) 2017-10-18 2019-09-03 Intel Corporation Detecting keywords in audio using a spiking neural network
CN107808670B (en) 2017-10-25 2021-05-14 百度在线网络技术(北京)有限公司 Voice data processing method, device, equipment and storage medium
JP2019086903A (en) 2017-11-02 2019-06-06 東芝映像ソリューション株式会社 Speech interaction terminal and speech interaction terminal control method
CN107832837B (en) 2017-11-28 2021-09-28 南京大学 Convolutional neural network compression method and decompression method based on compressed sensing principle
US20190163153A1 (en) 2017-11-30 2019-05-30 International Business Machines Corporation Enforcing dynamic volume thresholds of an entertainment device
US10546593B2 (en) 2017-12-04 2020-01-28 Apple Inc. Deep learning driven multi-channel filtering for speech enhancement
US10445365B2 (en) 2017-12-04 2019-10-15 Amazon Technologies, Inc. Streaming radio with personalized content integration
US10777189B1 (en) 2017-12-05 2020-09-15 Amazon Technologies, Inc. Dynamic wakeword detection
US10510340B1 (en) 2017-12-05 2019-12-17 Amazon Technologies, Inc. Dynamic wakeword detection
WO2019112660A1 (en) 2017-12-06 2019-06-13 Google Llc Ducking and erasing audio from nearby devices
US20190172452A1 (en) 2017-12-06 2019-06-06 GM Global Technology Operations LLC External information rendering
CN107919123B (en) 2017-12-07 2022-06-03 北京小米移动软件有限公司 Multi-voice assistant control method, device and computer readable storage medium
US11182122B2 (en) 2017-12-08 2021-11-23 Amazon Technologies, Inc. Voice control of computing devices
US20190179611A1 (en) 2017-12-11 2019-06-13 Sonos, Inc. Systems and Methods of Receiving Voice Input
US10847137B1 (en) 2017-12-12 2020-11-24 Amazon Technologies, Inc. Trigger word detection using neural network waveform processing
US10051600B1 (en) 2017-12-12 2018-08-14 Amazon Technologies, Inc. Selective notification delivery based on user presence detections
US10425247B2 (en) 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
US10374816B1 (en) 2017-12-13 2019-08-06 Amazon Technologies, Inc. Network conference management and arbitration via voice-capturing devices
US10540971B2 (en) 2017-12-15 2020-01-21 Blue Jeans Network, Inc. System and methods for in-meeting group assistance using a virtual assistant
US10663313B2 (en) 2017-12-15 2020-05-26 Google Llc Providing traffic warnings to a user based on return journey
US11409816B2 (en) 2017-12-19 2022-08-09 Motorola Solutions, Inc. Methods and systems for determining an action to be taken in response to a user query as a function of pre-query context information
US11295748B2 (en) 2017-12-26 2022-04-05 Robert Bosch Gmbh Speaker identification with ultra-short speech segments for far and near field voice assistance applications
CN116189670A (en) 2017-12-28 2023-05-30 森田公司 Always-on keyword detector
US10614811B2 (en) 2017-12-29 2020-04-07 Intel Corporation Hierarchical speech recognition resolution
WO2019128550A1 (en) 2017-12-31 2019-07-04 Midea Group Co., Ltd. Method and system for controlling home assistant devices
CN111512365B (en) 2017-12-31 2023-06-13 美的集团股份有限公司 Method and system for controlling multiple home devices
US9972343B1 (en) 2018-01-08 2018-05-15 Republic Wireless, Inc. Multi-step validation of wakeup phrase processing
US10795332B2 (en) 2018-01-16 2020-10-06 Resilience Magnum IP, LLC Facilitating automating home control
CN108198548B (en) 2018-01-25 2020-11-20 苏州奇梦者网络科技有限公司 Voice awakening method and system
US20190237067A1 (en) 2018-01-31 2019-08-01 Toyota Motor Engineering & Manufacturing North America, Inc. Multi-channel voice recognition for a vehicle environment
US10157042B1 (en) 2018-02-06 2018-12-18 Amazon Technologies, Inc. Audio output control
US11024307B2 (en) 2018-02-08 2021-06-01 Computime Ltd. Method and apparatus to provide comprehensive smart assistant services
US11145298B2 (en) 2018-02-13 2021-10-12 Roku, Inc. Trigger word detection with multiple digital assistants
US10425780B1 (en) 2018-02-22 2019-09-24 Amazon Technologies, Inc. Outputting notifications using device groups
US11127405B1 (en) 2018-03-14 2021-09-21 Amazon Technologies, Inc. Selective requests for authentication for voice-based launching of applications
US10749828B2 (en) 2018-03-14 2020-08-18 Rovi Guides, Inc. Systems and methods for presenting event notifications, based on trending communications, on devices notwithstanding a user instruction to disable event notifications
US10491962B2 (en) 2018-03-14 2019-11-26 Rovi Guides, Inc. Systems and methods for presenting event notifications, based on active applications in a social group, on devices notwithstanding a user instruction to disable event notifications
US10438605B1 (en) 2018-03-19 2019-10-08 Bose Corporation Echo control in binaural adaptive noise cancellation systems in headsets
US10685669B1 (en) 2018-03-20 2020-06-16 Amazon Technologies, Inc. Device selection from audio data
US10440440B1 (en) 2018-03-23 2019-10-08 Rovi Guides, Inc. Systems and methods for prompting a user to view an important event in a media asset presented on a first device when the user is viewing another media asset presented on a second device
US10777203B1 (en) 2018-03-23 2020-09-15 Amazon Technologies, Inc. Speech interface device with caching component
US10755706B2 (en) 2018-03-26 2020-08-25 Midea Group Co., Ltd. Voice-based user interface with dynamically switchable endpoints
US10446169B1 (en) 2018-03-26 2019-10-15 Motorola Mobility Llc Pre-selectable and dynamic configurable multistage echo control system for large range level of acoustic echo
US11151991B2 (en) 2018-03-30 2021-10-19 Verizon Media Inc. Electronic message transmission
CN111868824A (en) 2018-04-05 2020-10-30 辛纳普蒂克斯公司 Context aware control of smart devices
US20190311710A1 (en) 2018-04-06 2019-10-10 Flex Ltd. Device and system for accessing multiple virtual assistant services
US10720166B2 (en) 2018-04-09 2020-07-21 Synaptics Incorporated Voice biometrics systems and methods
US10679629B2 (en) 2018-04-09 2020-06-09 Amazon Technologies, Inc. Device arbitration by multiple speech processing systems
CN108520741B (en) 2018-04-12 2021-05-04 科大讯飞股份有限公司 Method, device and equipment for restoring ear voice and readable storage medium
US10928917B2 (en) 2018-04-12 2021-02-23 International Business Machines Corporation Multiple user interaction with audio devices using speech and gestures
US10679615B2 (en) 2018-04-16 2020-06-09 Google Llc Adaptive interface in a voice-based networked system
CN108538305A (en) 2018-04-20 2018-09-14 百度在线网络技术(北京)有限公司 Audio recognition method, device, equipment and computer readable storage medium
EP3564949A1 (en) 2018-04-23 2019-11-06 Spotify AB Activation trigger processing
US10803864B2 (en) 2018-05-07 2020-10-13 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11308947B2 (en) 2018-05-07 2022-04-19 Spotify Ab Voice recognition system for use with a personal media streaming appliance
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
JP2019204025A (en) 2018-05-24 2019-11-28 レノボ・シンガポール・プライベート・リミテッド Electronic apparatus, control method, and program
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US10777195B2 (en) 2018-05-31 2020-09-15 International Business Machines Corporation Wake command nullification for digital assistance and voice recognition technologies
US20190371324A1 (en) 2018-06-01 2019-12-05 Apple Inc. Suppression of voice response by device rendering trigger audio
EP3753017B1 (en) 2018-06-05 2023-08-02 Samsung Electronics Co., Ltd. A voice assistant device and method thereof
US10433058B1 (en) 2018-06-14 2019-10-01 Sonos, Inc. Content rules engines for audio playback devices
US10762896B1 (en) 2018-06-25 2020-09-01 Amazon Technologies, Inc. Wakeword detection
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
NL2021308B1 (en) 2018-07-16 2020-01-24 Hazelebach & Van Der Ven Holding B V Methods for a voice processing system
JP7000268B2 (en) 2018-07-18 2022-01-19 株式会社東芝 Information processing equipment, information processing methods, and programs
US11144596B2 (en) 2018-07-24 2021-10-12 Harman International Industries, Incorporated Retroactive information searching enabled by neural sensing
GB2576016B (en) 2018-08-01 2021-06-23 Arm Ip Ltd Voice assistant devices
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
KR102225984B1 (en) 2018-09-03 2021-03-10 엘지전자 주식회사 Device including battery
US10622009B1 (en) 2018-09-10 2020-04-14 Amazon Technologies, Inc. Methods for detecting double-talk
US20200090647A1 (en) 2018-09-14 2020-03-19 Comcast Cable Communications, Llc Keyword Detection In The Presence Of Media Output
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US10650807B2 (en) 2018-09-18 2020-05-12 Intel Corporation Method and system of neural network keyphrase detection
KR20200034430A (en) 2018-09-21 2020-03-31 삼성전자주식회사 Electronic apparatus, system and method for using speech recognition service
US10861444B2 (en) 2018-09-24 2020-12-08 Rovi Guides, Inc. Systems and methods for determining whether to trigger a voice capable device based on speaking cadence
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US10950249B2 (en) 2018-09-25 2021-03-16 Amazon Technologies, Inc. Audio watermark encoding/decoding
US11170758B2 (en) 2018-09-27 2021-11-09 Rovi Guides, Inc. Systems and methods for providing notifications within a media asset without breaking immersion
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
KR102606789B1 (en) 2018-10-01 2023-11-28 삼성전자주식회사 The Method for Controlling a plurality of Voice Recognizing Device and the Electronic Device supporting the same
US10971158B1 (en) 2018-10-05 2021-04-06 Facebook, Inc. Designating assistants in multi-assistant environment based on identified wake word received from a user
US20200110571A1 (en) 2018-10-05 2020-04-09 Sonos, Inc. Systems and methods for media content selection
US10346122B1 (en) 2018-10-18 2019-07-09 Brent Foster Morgan Systems and methods for a supplemental display screen
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US10943599B2 (en) 2018-10-26 2021-03-09 Spotify Ab Audio cancellation for voice recognition
US10388272B1 (en) 2018-12-04 2019-08-20 Sorenson Ip Holdings, Llc Training speech recognition systems using word sequences
US10573312B1 (en) 2018-12-04 2020-02-25 Sorenson Ip Holdings, Llc Transcription generation from multiple speech recognition systems
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
KR102570384B1 (en) 2018-12-27 2023-08-25 삼성전자주식회사 Home appliance and method for voice recognition thereof
US11198446B2 (en) 2019-01-04 2021-12-14 Faraday & Future Inc. On-board vehicle query system
JP2020112692A (en) 2019-01-11 2020-07-27 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America Method, controller and program
US11349834B2 (en) 2019-01-30 2022-05-31 Ncr Corporation Multi-factor secure operation authentication
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
CN109712626B (en) 2019-03-04 2021-04-30 腾讯科技(深圳)有限公司 Voice data processing method and device
US10943598B2 (en) 2019-03-18 2021-03-09 Rovi Guides, Inc. Method and apparatus for determining periods of excessive noise for receiving smart speaker voice commands
US10964314B2 (en) 2019-03-22 2021-03-30 Cirrus Logic, Inc. System and method for optimized noise reduction in the presence of speech distortion using adaptive microphone array
US10984783B2 (en) 2019-03-27 2021-04-20 Intel Corporation Spoken keyword detection based utterance-level wake on intent system
US20200310751A1 (en) 2019-03-29 2020-10-01 Qualcomm Incorporated System and method of managing device sound level
EP3726856B1 (en) 2019-04-17 2022-11-16 Oticon A/s A hearing device comprising a keyword detector and an own voice detector
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US20200409926A1 (en) 2019-06-28 2020-12-31 Rovi Guides, Inc. Automated contact creation based on content communications
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US11159878B1 (en) 2019-08-15 2021-10-26 Amazon Technologies, Inc. Autonomously motile device with beamforming
JP7191793B2 (en) 2019-08-30 2022-12-19 株式会社東芝 SIGNAL PROCESSING DEVICE, SIGNAL PROCESSING METHOD, AND PROGRAM
US11172329B2 (en) 2019-09-27 2021-11-09 Sonos, Inc. Systems and methods for target device prediction
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
KR20210066647A (en) 2019-11-28 2021-06-07 삼성전자주식회사 Electronic device and Method for controlling the electronic device thereof
CA3143944A1 (en) 2019-12-10 2021-06-17 Rovi Guides, Inc. Systems and methods for local automated speech-to-text processing
US11823659B2 (en) 2019-12-11 2023-11-21 Amazon Technologies, Inc. Speech recognition through disambiguation feedback
US11445301B2 (en) 2020-02-12 2022-09-13 Sonos, Inc. Portable playback devices with network operation modes
CN111341306B (en) 2020-02-14 2022-06-17 东南大学 Storage and calculation compression method for keyword awakening CNN based on speech feature multiplexing
US11206052B1 (en) 2020-06-18 2021-12-21 HAJEN Co., Ltd Smart speaker
US20220050585A1 (en) 2020-08-14 2022-02-17 Apple Inc. Audio media playback user interface

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022534692A (en) * 2019-05-24 2022-08-03 エルジー エレクトロニクス インコーポレイティド A method for controlling a device using voice recognition, and a device that implements the same
JP7335979B2 (en) 2019-05-24 2023-08-30 エルジー エレクトロニクス インコーポレイティド A method for controlling a device using voice recognition, and a device that implements the same
US11789691B2 (en) 2021-06-16 2023-10-17 Kyndryl, Inc. Audio management for a priority computing device application

Also Published As

Publication number Publication date
US9772817B2 (en) 2017-09-26
JP7346516B2 (en) 2023-09-19
KR102187147B1 (en) 2020-12-04
KR102422270B1 (en) 2022-07-18
US11184704B2 (en) 2021-11-23
US20180077488A1 (en) 2018-03-15
KR102095250B1 (en) 2020-04-01
US20170245050A1 (en) 2017-08-24
US10225651B2 (en) 2019-03-05
US20210377658A1 (en) 2021-12-02
US20180070171A1 (en) 2018-03-08
CN109076284A (en) 2018-12-21
KR102584751B1 (en) 2023-10-05
US20210120334A1 (en) 2021-04-22
AU2021212112A1 (en) 2021-08-26
AU2021202786B2 (en) 2023-02-23
KR20230149835A (en) 2023-10-27
KR102234804B1 (en) 2021-04-01
KR20210035351A (en) 2021-03-31
CA3015491C (en) 2020-08-11
US11736860B2 (en) 2023-08-22
AU2019236722A1 (en) 2019-10-17
WO2017147075A1 (en) 2017-08-31
EP3420737A4 (en) 2019-01-23
JP2019146229A (en) 2019-08-29
US20170242650A1 (en) 2017-08-24
AU2017223395B2 (en) 2019-07-04
KR20200138421A (en) 2020-12-09
KR20200034839A (en) 2020-03-31
JP7026078B2 (en) 2022-02-25
JP2019509679A (en) 2019-04-04
AU2023200179B2 (en) 2023-03-02
JP2022008837A (en) 2022-01-14
US10212512B2 (en) 2019-02-19
KR20190014494A (en) 2019-02-12
KR102343902B1 (en) 2021-12-27
US10764679B2 (en) 2020-09-01
EP4258690A2 (en) 2023-10-11
EP4258690A3 (en) 2024-01-24
EP3420736B1 (en) 2021-07-21
AU2022291481B2 (en) 2023-02-23
CN109076285B (en) 2020-03-27
AU2017222436B2 (en) 2019-01-31
US20170242653A1 (en) 2017-08-24
US20230054164A1 (en) 2023-02-23
US11750969B2 (en) 2023-09-05
US10097919B2 (en) 2018-10-09
EP3420736A4 (en) 2019-01-23
US10499146B2 (en) 2019-12-03
EP3974957A1 (en) 2022-03-30
US11832068B2 (en) 2023-11-28
AU2019202257B2 (en) 2021-02-04
US20170245051A1 (en) 2017-08-24
US20200177989A1 (en) 2020-06-04
US20170242655A1 (en) 2017-08-24
US10555077B2 (en) 2020-02-04
AU2023203239B2 (en) 2023-11-02
KR20190014495A (en) 2019-02-12
KR102080002B1 (en) 2020-02-24
KR20200022513A (en) 2020-03-03
AU2021202786A1 (en) 2021-06-03
WO2017147081A1 (en) 2017-08-31
AU2023201078A1 (en) 2023-03-23
CN111479196A (en) 2020-07-31
AU2019202257A1 (en) 2019-04-18
US20220159375A1 (en) 2022-05-19
AU2023200179A1 (en) 2023-02-16
EP3420736A1 (en) 2019-01-02
AU2023237192A1 (en) 2023-10-19
JP2019514237A (en) 2019-05-30
AU2023203239A1 (en) 2023-06-15
JP2023134786A (en) 2023-09-27
AU2019236722B2 (en) 2021-05-27
US20200374626A1 (en) 2020-11-26
CA3015496C (en) 2019-05-14
CN109076284B (en) 2020-05-12
US11212612B2 (en) 2021-12-28
JP2019168696A (en) 2019-10-03
AU2017223395A1 (en) 2018-10-11
CN109076285A (en) 2018-12-21
CA3015491A1 (en) 2017-08-31
US20190045299A1 (en) 2019-02-07
AU2017222436A1 (en) 2018-10-11
EP3420737A1 (en) 2019-01-02
JP2022020760A (en) 2022-02-01
AU2021212112B2 (en) 2022-09-29
EP3420737B1 (en) 2023-08-09
US10743101B2 (en) 2020-08-11
JP6511589B2 (en) 2019-05-15
KR20210157487A (en) 2021-12-28
US20200213725A1 (en) 2020-07-02
AU2022291481A1 (en) 2023-02-02
KR20220103824A (en) 2022-07-22
CN111479196B (en) 2022-03-29
KR20220069124A (en) 2022-05-26
US20170242649A1 (en) 2017-08-24
US9820039B2 (en) 2017-11-14
CN111510821A (en) 2020-08-07
US20190200120A1 (en) 2019-06-27
US11006214B2 (en) 2021-05-11
US9826306B2 (en) 2017-11-21
CA3015496A1 (en) 2017-08-31

Similar Documents

Publication Publication Date Title
JP6511590B1 (en) Audio control of media playback system
US20230297329A1 (en) Voice Controlled Media Playback System
US10971139B2 (en) Voice control of a media playback system

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20181022

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181022

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20181022

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20190225

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190408

R150 Certificate of patent or registration of utility model

Ref document number: 6511590

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250