CN105144023A - 针对附加数据唤醒其它装置 - Google Patents

针对附加数据唤醒其它装置 Download PDF

Info

Publication number
CN105144023A
CN105144023A CN201480021305.9A CN201480021305A CN105144023A CN 105144023 A CN105144023 A CN 105144023A CN 201480021305 A CN201480021305 A CN 201480021305A CN 105144023 A CN105144023 A CN 105144023A
Authority
CN
China
Prior art keywords
signal
input signal
sensor
main device
slave device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201480021305.9A
Other languages
English (en)
Other versions
CN105144023B (zh
Inventor
G·夏尔斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN105144023A publication Critical patent/CN105144023A/zh
Application granted granted Critical
Publication of CN105144023B publication Critical patent/CN105144023B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/32—Multiple recognisers used in sequence or in parallel; Score combination systems therefor, e.g. voting systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/02—Details
    • H04L12/12—Arrangements for remote connection or disconnection of substations or of equipment thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2816—Controlling appliance services of a home automation network by calling their functionalities
    • H04L12/282—Controlling appliance services of a home automation network by calling their functionalities based on user interaction within the home
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/10—Power supply of remote control devices
    • G08C2201/12—Power saving techniques of remote control or controlled devices
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00—Transmission systems of control signals via wireless link
    • G08C2201/30—User interface
    • G08C2201/32—Remote control based on movements, attitude of remote control device
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/50—Reducing energy consumption in communication networks in wire-line communication networks, e.g. low power modes or reduced link rate

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Acoustics & Sound (AREA)
  • Automation & Control Theory (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Selective Calling Equipment (AREA)

Abstract

所公开的主题提供主装置和至少一个从装置。该至少一个从装置和主装置可以彼此协作并且与其它联网组件协作地工作，以提供诸如改进的语音和其它信号识别操作等的改进的性能。通过使用改进的识别结果，提供对可控装置生成适当命令的更高可能性。

Description

针对附加数据唤醒其它装置
背景技术
存在保持低功率状态直到需要为止的装置。该装置可以接收诸如鼓掌等的信号以从低功率状态转变为高功率状态来进行某些功能。通常，低功率装置提供诸如用以点亮灯的开关或用以向系统提供输入等的特定功能。这些装置通常不与其装置协作地工作来提供输入命令的增强识别或提供改进的系统性能。
发明内容
根据所公开的主题的实现，可以提供包括接收触发输入信号的方法。响应于接收到触发输入信号，主装置可以将唤醒信号输出至从装置。主装置可以接收来自从装置的输入信号和来自主装置传感器的输入信号。可以响应于主装置的输入信号和从装置的输入信号而生成命令信号。
根据所公开的主题的实现，可以提供包括主装置的系统。主装置可以包括长持续时间的电源、传感器和处理器。处理器可以被配置为从外部装置接收触发输入信号。处理器还可以被配置为将唤醒信号输出至从装置。处理器可以接收来自从装置的输入信号和来自主装置的传感器的输入信号。响应于主装置的输入信号和从装置的输入信号，处理器可以生成用以进行与所识别出的输入信号相关的动作的命令信号。
根据所公开的主题的实现，可以提供包括主装置和从装置的系统。主装置可以包括长持续时间的电源、传感器和处理器。该处理器可以被配置为响应于接收到触发信号而将唤醒信号发送至从装置。从装置可以包括短持续时间供电、传感器、存储器和处理器。该处理器可以被配置为响应于从主装置接收到唤醒信号而使得能够发送从装置的传感器所检测到的输入信号。
所公开的主题的附加特征、优势和实现可以通过考虑以下详细说明、附图和权利要求书来阐述或显而易见。此外，应当理解，上述发明内容和以下详细说明二者均包括意在在不限制权利要求书的范围的情况下提供进一步说明的示例。
附图说明
用于提供所公开的主题的进一步理解的附图包括在本说明书并且构成本说明书的一部分。附图还示出所公开的主题的实现以及用以解释所公开的主题的实现的原理的详细说明。并非试图示出比所公开的主题和实践的各种方法的基本理解所需的结构细节更详细的结构细节。
图1示出根据所公开的主题的实现的流程图。
图2示出根据所公开的主题的实现的组件布局。
图3示出根据所公开的主题的实现的计算机。
图4示出根据所公开的主题的实现的网络结构。
具体实施方式
若干装置可以协作地工作以提供输入的增强识别。主装置(main/primarydevice)和至少一个从装置(secondarydevice)可以彼此协作地工作以控制环境内的装置。主装置和从装置可以彼此共处于诸如房间、办公空间、汽车、礼堂或户外区域等的环境中。环境中的主装置和从装置各自可以具有从环境检测输入的传感器。可以从所有主装置的传感器和从装置的传感器获得输入的多个采样。通过使用多个所检测到的输入，处理器可以提供所检测到的输入的改进的识别结果以达到改进的识别结果。例如，主装置可以包括对声音命令进行响应的音频系统控制器。主装置可以包括用以接收声音命令的麦克风。从装置可以是包括发送器和麦克风的更小的电池工作装置。主装置和从装置二者都可以接收声音命令。从装置可以将其检测到的与声音命令相关的信号转发至主装置。主装置可以使用从从装置接收到的声音命令来增大由主装置麦克风所接收到的声音命令的处理。通过使用输入的组合，主装置可以提供具有更高可能性的识别结果。
主装置可以接收表示用户正在接近主装置的信号，并且使得传感器能够从环境检测输入信号。主装置可以发送唤醒信号以警告从装置启动其传感器也开始从环境检测输入信号。作为响应，从装置可以检测对主装置所接收到的输入信号进行补充的输入信号。可以利用识别算法来识别来自主装置和从装置的所检测到的输入信号。输入信号的组合可以允许有改进的识别结果。通过使用所识别出的输入信号，可以识别用户命令输入并且可以生成命令信号。关于供电，主装置可以具有可插入墙壁并且定位于房间内的不起眼的地方的交流电源。可选地，由于主装置相比从装置可以更常地或在更长时间段内针对输入信号来监视环境，因此可以利用具有足够的电力以在诸如12～24小时等的长持续时间内对主装置供电的电池来对主装置进行电池供电。另一方面，由于从装置可能不会那样长时间或频繁工作，因此从装置电池的电池寿命可能比主装置电池的电池寿命短。例如，主装置可以是智能电话，并且从装置可以是其内包含有传感器的小的电池工作的桌上装置或可壁装的装置。两种装置中的传感器可以是麦克风、IR检测器、RF检测器和它们的组合。例如，智能电话可以执行使得智能电话能够控制诸如音频装置和电视机等的装置以及诸如空调、加热器、冰箱和烤箱等的电器的应用。输入至应用的控制输入例如可以是声音命令。智能电话可以连续地或频繁地输出触发信号以唤醒该智能电话的特定距离(例如，10～25英尺)内的从装置。智能电话和从装置二者都可以检测声音命令输入信号。从装置可以将所检测到的声音命令输入信号提供给智能电话、控制器、远程服务器或它们的组合。可以将所检测到的声音命令信号提供给控制器或远程服务器，以识别两种装置所检测到的声音命令。附加地或可选地，智能电话可以将其麦克风所检测到的音频信号与从从装置接收到的音频信号结合使用以增强各个信号并且识别所检测到的声音命令。智能电话或控制器还可以生成用以进行与所识别出的声音命令相关联的动作的命令信号。
图1示出根据所公开的主题的实现的方法100的流程图。在步骤110中，主装置可以在步骤110中接收触发输入信号。触发输入信号可以是诸如特定单词、若干不同的单词和单词的组合中的至少之一等的语音。可选地，或除语音外，触发信号还可以是红外线信号、射频信号、运动或它们的组合。主装置可以使信号与触发输入信号的列表进行比较并且确定要发送至从装置的唤醒信号。主装置可以使用本地存储器来进行比较，或者将信号发送至可以进行比较并且将比较结果返回至主装置的控制器或基于云的服务器。
响应于所接收到的触发输入信号，可以在步骤120中将唤醒信号输出至从装置。唤醒信号可以是红外线信号、光学信号或射频信号等。响应于接收到唤醒信号，从装置可以从低功率状态转变为高功率状态。通过使用传感器，从装置可以从环境检测输入信号。例如，如果从装置传感器是麦克风，则从装置可以检测语音输入。随着向高功率状态的转变，可以启动从装置内的附加电路或传感器。例如，可以将用于实现发送器的电路包括在从装置内。在步骤130中，主装置或控制器可以接收从从装置发送来的输入信号。输入信号可以是语音、红外线、手势或射频等。在其它示例中，尽管从装置处于低功率模式，但从装置仍可以在预定时间段内检测输入信号并且将所检测到的输入信号数据缓存在存储装置中。预定时间段可以取决于可以具有足够的容量来储存大约半秒(0.5秒)～大约五(5)分钟的输入数据的存储装置的数据容量。响应于接收到唤醒信号，从装置可以在发送其正在实时收集的输入信号之前开始发送所缓存的输入数据。结果，在该示例中，从从装置发送来的输入信号相对于通常可以由主装置所接收的实时输入信号而言可能具有时间延迟。在一些实现中，这种滞后可以足够短以使得不被人类用户所感知。可以使用缓存数据来确认在特定从装置接收到“唤醒”信号之前启用的诸如主装置等的装置所先前检测到的任何输入信号。在预定时间段之后，缓存数据被新输入的数据盖写，或者从从装置的存储器删除。
主装置还可以包括诸如麦克风等的传感器。除从装置传感器所检测到的输入信号外，主装置上的传感器也可以在步骤140中接收输入信号。在以上示例中，至主装置传感器和从装置传感器的输入信号可以是语音输入。当然，两种装置中的传感器可以是红外线或其它类型的传感器，并且可以从环境接收这些类型的输入。主装置在步骤150中可以识别主装置传感器所接收到的输入信号，并且还可以识别从从装置接收到的输入信号。如果所检测到的输入信号是语音输入，则可以利用主装置中的处理器对输入信号应用已知的语音识别算法。可选地，主装置可以将所检测到的输入信号发送至可以进行语音识别的系统控制器或远程服务器。与在何处进行语音识别无关地，系统可以分开识别来自主装置和一个或多个从装置各自的输入信号，并且针对各个装置提供单独的识别结果。通过使用单独的识别结果，主装置、控制器或服务器可以验证最终识别结果。该验证可以是简单的比较。例如，如果特定识别结果(例如，“将频道改变为185”)比其它结果(例如，“将明暗度改变为185”)更常出现，则可以判断最终识别结果为“改变频道”。当然，可以使用或可以不使用更精密和复杂的识别算法。除电视机外，还可以使用语音命令来控制诸如机顶盒、灯、百叶窗和音频设备等的其它可控装置。
响应于根据主装置和从装置的输入信号的识别的识别结果，主装置可以生成用以进行与所识别出的输入信号相关的动作的命令信号(步骤160)。例如，如果正在操作电视机并且最终识别结果是“将频道改变为185”，则主装置可以生成用以将电视频道改变为频道编号185的信号。为了提供该功能，主装置可以具有多个输入和输出，以经由有线连接(例如直接有线连接或电力线通信等)来连接至电视机、音频装置、机顶盒以及其它装置和电器。可选地，主装置可以具有无线通信能力，并且能够与电视机以及其它装置和电器进行无线通信。主装置还能够经由有线和无线通信路径二者来进行通信。
在图2中示出可以利用所公开的主题的环境。环境200可以与家庭的生活区域、商业中的休息室或办公空间等类似。该环境可以包括座位区域A、B和C以及桌子245A～C、电视机250、音频系统255、百叶窗257、入口门260以及至少一个外部感测装置275。外部感测装置275可以连接至诸如LAN、Wi-Fi网络、蜂窝网络、Z-wave、Zigbee网络或家庭安全网络等的网络。外部感测装置275可以位于环境200内的任何区域，并且可以检测运动、NFC信号、诸如Wi-Fi、Z-wave、X-10和Zigbee等的RF信号、红外线信号或蜂窝信号。例如，外部感测装置275可以是诸如与家庭安全系统相关联的检测器等的运动检测器，并且可以向主装置220提供输入。
图2还示出根据所公开的主题的实现的系统组件。该系统的组件可以包括主装置220和若干从装置210A～F。可以将主装置和从装置210A～F定位在整个环境200中。主装置220可以包括处理器、存储器、通信电路、至少一个传感器和长持续时间的电源。例如，可以由诸如交流电源等的恒定电源、或者由诸如能够提供数十小时的电力的电池等的长持续时间的电源来对主装置220供电。
主装置220可以包括与诸如电视机250、音频系统225、百叶窗257、灯(未示出)、机顶盒(未示出)、游戏装置(未示出)、计算机(未示出)和其它装置或电器等的环境中的其它装置和电器的连接。通过使用与环境200中的其它装置和电器的连接，主装置220可以控制各个装置或电器250、255和257的工作。可以将主装置220定位在环境200中的任何位置。然而，可以将交流供电的主装置220定位在交流插座附近以使得可以容易地将主装置220插入交流插座来接收电力，或者还可以将主装置220放置在充电板等上。主装置220可以包括若干传感器。例如，这些传感器可以是麦克风、运动传感器、红外线(IR)传感器和/或诸如近场通信(NFC)传感器等的射频传感器。当然，还可以使用其它类型的传感器。主装置220还可以包括若干通信电路(例如，收发器)，诸如蓝牙收发器、Wi-Fi收发器、近场通信(NFC)传感器、Z-wave、Zigbee、电力线通信调制解调器、以及其它射频收发器等。这些主装置220的收发器还可以用作传感器来检测诸如用户装置280等的装置，其中，这些装置尝试例如使用蓝牙或Wi-Fi信号来连接至其它装置或网络、或者从可能在环境200内具有自己的传感器的诸如安全系统等的系统来接收信号。主装置220的传感器可以“始终”(或周期性地)从环境检测例如语音、运动、IR信号或射频信号等的输入。
从装置210A～F可以包括处理器、存储器、通信电路和电源，并且还可以具有与主装置中的传感器类似的传感器。然而，从装置210A～F的电源相比主装置220的电源可以具有更短的持续时间和/或更低的电力输出。还可以使用太阳能电池板或交流电源等向从装置提供电力。从装置210A～F可以是尺寸更小的低功率装置并且可以在未使用的情况下保持低功率或“睡眠”状态以节省电力。可以将从装置210A～F定位在环境200中的各种地方。例如，从装置210C、210D和210F可以分别位于各座位区域A～C附近，例如在桌子245A～C上，以从坐在座位区域中的人检测诸如语音等的输入信号。可选地或附加地，还可以将从装置210A、210B和210E定位在环境200周围的从其检测输入的各种地方。
在工作时，如参考图1所讨论的，主装置可以处于活动或“开启”状态并检测输入，并且从装置可以处于低功率状态(即，“睡眠”状态)。主装置220可以包括被配置为对从外部装置所接收到的诸如热词或特定短语、射频信号、近场通信信号、蓝牙信号或Wi-Fi信号等的触发信号进行响应的处理器。例如，触发信号可以是来自用户装置280的NFC信号，其向主装置220表示用户正在接近并且该主装置应该开始预期输入命令信号。在其它示例中，主装置220上的传感器可以是正在检测环境200中的语音的麦克风。引起来自主装置220的响应的语音输入可以是环境200中所检测到的某种触发信号或者单词，诸如唤醒热词或自然语言短语等。
例如，在用户进入环境200并且提供“开启”电视机的触发信号的情况下，主装置220可以输出唤醒信号。从装置210A～F可以接收该唤醒信号。主装置220可以确认电视机开启命令并且生成用以开启电视机的信号。在主装置220从环境200检测到触发信号输入的情况下，主装置220可以输出指示从装置210A～F中至少之一从低功率状态“唤醒”并且开始从环境200检测输入的唤醒信号。从装置210A～F还可以具有麦克风并且开始检测房间内的语音。
可选地，可以从通信地连接至主装置220的若干不同的系统接收触发信号。例如，主装置220可以通信地连接至安全系统或无线网络。在安全系统实现的示例中，外部感测装置275可以是通信地连接至主装置220的安全系统运动检测器。安全系统运动检测器275可以检测环境200中的运动，并且向主装置220发送触发信号。响应于该触发信号，主装置220可以生成唤醒信号。同样地，外部感测装置275可以是判断诸如用户的智能电话或平板等的启动了蓝牙、Wi-Fi或NFC的装置是否已经进入环境200的蓝牙、NFC或Wi-Fi装置。例如，外部感测装置275可以利用蓝牙、Wi-Fi或NFC信号来轮询环境200并且等待响应。与此相对，外部感测装置275可以检测红外线、蓝牙、Wi-Fi或NFC频率范围内的信号。响应于检测到用户装置对蓝牙信号、Wi-Fi接入点信号或NFC信号进行轮询或响应，外部感测装置275可以向主装置220发送触发信号。
可选地或附加地，主装置220可以包括红外线(IR)和/或射频(RF)传感器，并且例如可以定位在诸如电视机250等的远程可控装置附近的位置。在IR或RF远程控制朝向电视机250的情况下，主装置220可以将IR或RF信号解读为触发信号。如利用图1所讨论的，主装置220可以响应于触发信号生成并且发送唤醒信号。除发送唤醒信号外，主装置220还可以启动诸如麦克风等的其它主装置传感器。其它触发信号可以包括运动或手势。例如，主装置220可以包括检测运动并且生成触发信号的运动检测器。或者，主装置220中的处理器可以分析和处理所检测到的运动数据来识别任何手势。可选地，控制器(未示出)或远程服务器(未示出)可以分析手势并且将识别结果返回至主装置220。手势例如可以表示诸如关闭百叶窗、将灯调暗、开启或关闭电视机或这些动作的组合等的特定命令。
响应于接收到触发信号，从装置210A～F可以从低功率或“睡眠”状态转变并且转变为更高功率状态。在更高功率状态中，可以启动并且操作从装置210A～F的诸如传感器和收发器等的组件。如上所述，从装置210A～F可以包括预定时间段内对诸如麦克风等的从装置传感器所检测到的数据进行缓存的存储器。该预定时间可以是大约0.5秒至大约5分钟。在各时间段结束时可以盖写缓存数据，并且在从装置关断电源的情况下可以完全删除缓存数据，因此不会永久地储存数据。可选地，可以仅在接收到来自主装置220的“唤醒”信号时启动从装置210A～F来检测和发送传感器所检测到的输入信号。从装置210A～F可以在不尝试识别语音的情况下将诸如语音信号等的检测数据发送至主装置220。同样地，将诸如IR或RF信号等的其它类型的检测输入传递至主装置220来处理。主装置220可以从从装置210A～F接收输入语音信号并且开始处理数据。例如，如果来自从装置210A～F的输入数据是语音信号，则主装置220的处理器可以对从从装置210A～F所接收的数据应用至少一个语音识别算法。所应用的语音识别算法可以针对从各个从装置210A-F接收到的输入信号来返回识别结果。除从装置数据外，主装置220的传感器还可以向主装置220的处理器提供输入信号。在主装置220的传感器是麦克风的情况下，可以向主装置220的处理器提供语音信号。还可以对主装置220的传感器所接收到的输入信号应用识别算法并且可以返回识别结果。来自所接收到的主装置输入信号的识别结果与来自所接收到的从装置输入信号的识别结果可以彼此比较以确认识别结果，或者可以进行结合以提供识别用的增强信号。例如，该确认可以基于投票方案，其中，在该投票方案中，将特定识别结果的若干匹配相加、加权或者加权相加，并且获胜者是具有最多票数的识别。可选地，可以将作为主装置220或例如最接近用户的从装置210A～F的一个装置看作为提供主识别结果，并且可以使用全部其它识别结果来验证该主识别结果是否正确。可选地，可以以增强识别所要使用的信号的方式来组合音频信号。
在实现中，可以将主装置220和从装置210A～F所检测到的语音发送至本地控制装置(未示出)，或者发送至远程服务器(未示出)。在本地控制装置或远程服务器处识别该语音时，可以将命令信号发送至各个电器(电视机250、音频/娱乐装置255、游戏装置等(未示出))或其它装置(例如，诸如元件257等的百叶窗、灯、空调)。
其它输入信号可以代表用于控制环境200中的装置的用户命令，并且通过使用来自主装置220和从装置210A～F的识别结果，可以生成用以执行动作的命令信号。
在实现中，主装置220可以是诸如用户装置280等的智能电话或平板装置。用户装置280可以是远程控制、智能电话、膝上型计算机、平板电脑或一些其它用户便携式装置。例如，用户装置280可以通过如上所述向从装置210A～F发送唤醒信号，使用蓝牙、Wi-Fi或NFC来宣告其存在于环境200中。在具体示例中，诸如移动电话等的用户装置280可以是主装置220并且可以通过位于从装置210A～F中的特定从装置的指定范围内使该特定从装置唤醒。该指定范围可以是多个从装置210A～F中的一个从装置的蓝牙或近场通信(NFC)范围。在一个实现中，一个从装置(例如，最接近入口260的210B)可以被用户装置280唤醒，并且可以向其它从装置210A和210C～F发送信号以唤醒它们并且开始检测输入信号。
在实现中，从装置210A～F和用户装置280可以通过诸如家庭网络、Wi-Fi网络、局域网或家庭自动化网络等的计算机网络(参见图4)彼此通信。在用户装置280上执行的计算机应用可以将信号发送至从装置210A～F并且从从装置210A～F接收信号。
可选地，主装置220可以通过生成使多个从装置210A～F开始检测语音输入的唤醒信号来对诸如电视遥控信号等的红外线(IR)输入作出反应。然后，可以使用语音输入向电视机或其它系统(诸如音频系统等)发送命令。
当前所公开的主题的实现可以在各种组件和网络架构中实现并且与各种组件和网络架构一起使用。图3是适合实现诸如主装置和从装置等的当前所公开的主题的实现的计算机20。计算机20包括总线21，该总线21与诸如中央处理器24、存储器27(通常是RAM，但也可以包括ROM或闪速RAM等)、输入/输出控制器28、用户显示器22(诸如经由显示适配器的显示屏等)、用户输入接口26(可以包括一个或多个控制器以及诸如键盘和鼠标等的相关用户输入装置、或者诸如麦克风、IR传感器、NFC传感器和Wi-Fi传感器等的传感器，并且可以紧密连接至I/O控制器28)、固定存储器23(诸如硬盘驱动器、闪速存储器、光纤通道网络、SAN装置和SCSI装置等)以及可移除介质组件25(可以被配置为控制和容纳光盘和闪存驱动器等)等的计算机20的主要组件互相连接。
总线21使得能够在如前所述的中央处理器24和可以包括只读存储器(ROM)或闪速存储器(均未示出)以及随机存取存储器(RAM)(未示出)的存储器27之间进行数据通信。RAM一般是载入有操作系统和应用程序的主存储器。ROM或闪速存储器可以包含其他代码中的对诸如与周边组件的交互等的基本硬件操作进行控制的基本输入输出系统(BIOS)。安装在计算机20的应用程序一般存储在诸如硬盘驱动器(例如，固定存储器23)、光盘、软盘或其他存储介质25等的计算机可读介质上并且经由该计算机可读介质来访问。
固定存储器23可以与计算机20为一体，也可以分开并且经由其它接口来访问。网络接口29可以提供经由电话链路向远程服务器以及经由因特网服务提供商(ISP)向因特网的直接连接，或者提供经由直接网络链路向远程服务器以及经由POP(出现点)技术或其它技术向因特网的直接连接。网络接口29可以使用包括数字蜂窝电话连接、蜂窝连接、Wi-Fi网络连接、Z-wave网络连接、Zigbee网络连接、安全系统连接或数字卫星数据连接等的无线技术来提供这种连接。例如，如图2所示，网络接口29可以使得计算机能够经由一个或多个局域、广域或其它网络与其它计算机、电器或装置进行通信。
可以以同样的方式来连接许多其它装置或组件(未示出)(例如，文件扫描仪、数字照相机、电视机、音频系统、游戏系统和便携式用户装置等)。与此相对，不需要呈现图3所示的全部组件来实践本发明。组件可以以与所示方式不同的方式来相互连接。诸如图3所示的计算机的工作在本领域已经是公知的并且不在本申请中详细讨论。可以将用以实现本发明的代码储存在诸如存储器27、固定存储器23、可移除介质25中的一个或多个等的计算机可读存储介质中、或储存在远程存储位置上。
图4示出根据所公开的主题的实现的示例网络配置。如上参考图1～3所述的主装置10和一个或多个从装置11可以经由一个或多个网络7和47连接至其它装置。网络7和47可以是局域网、广域网、因特网或任何其它合适的通信网络，并且可以在包括有线和/或无线网络的任何合适的平台上实现。经由网络7，从装置11可以将输入信号发送至主装置10、控制器16或二者的组合，并且从主装置10、控制器16或二者的组合接收唤醒和其它信号。主装置10和从装置11可以经由诸如因特网或蜂窝网等的外部网络47与一个或多个服务器43和/或数据库45进行通信。控制器16还可以连接至网络7并且将命令信号提供给诸如电器13和/或娱乐系统15等的装置。电器13可以是机顶盒、灯、百叶窗、电视机、计算机系统、音频系统和空调系统等。控制器16还可以提供诸如语音识别等的信号识别服务或者诸如IR或NFC等的其它信号的标识服务。可选地，控制器16或主装置10可以经由局域网7和外部网络47向服务器43发送输入信号以进行识别和/或确认或验证。例如可以将热词和/或用户命令的列表存储在主装置13或控制器16可访问的数据库45中。主装置10和从装置11可以直接访问装置13和15，或者一个或多个其它装置可以提供诸如服务器13对数据库15中所存储的资源提供访问等的中间访问。主装置10和从装置11还可以访问远程平台57或诸如云计算配置和服务等的由远程平台57提供的服务，或者被远程平台57或诸如云计算配置和服务等的由远程平台57提供的服务访问。远程平台57可以包括一个或多个服务器43和/或数据库45。远程平台57还可以是能够与从装置11、控制器16和/或服务器43进行通信的诸如智能电话或平板等的用户装置。
更一般地，当前所公开的主题的各种实现可包括计算机实现的处理以及用于实践这些处理的设备、或者以计算机实现的处理以及用于实践这些处理的设备的形式来实施。还可以以具有包括诸如软盘、CD-ROM、硬盘驱动器、USB(通用串行总线)驱动器或任何其它机器可读存储介质等的非易失性和/或有形介质中所体现的指令的计算机程序代码的计算机程序产品的形式来实施这些实现，其中，在计算机载入并且执行该计算机程序代码的情况下，该计算机变成用于实践所公开的主题的实现的设备。还可以以例如计算机程序代码是否存储在存储介质中、是否由计算机载入和/或执行、或者是否诸如经由电气电线或电缆、经由光纤或经由电磁辐射等的经由一些传输介质传输的形式来实施这些实现，其中，在计算机载入并且执行该计算机程序代码的情况下，该计算机变成用于实践所公开的主题的实现的设备。在通用微处理器上实现的情况下，计算机程序代码段配置微处理器以创建特定逻辑电路。在一些配置中，可以利用通用处理器来实现计算机可读存储介质上所存储的计算机可读指令集，这可以使通用处理器或包含通用处理器的装置转变为被配置为实现或执行这些指令的专用装置。这些实现可以使用可包括诸如通用微处理器等的处理器和/或将根据所公开的主题的实现的全部或部分技术在硬件和/或固件中实施的专用集成电路(ASIC)的硬件来实现。处理器可以连接至诸如RAM、ROM、闪速存储器、硬盘或能够存储电气信息的任何其它装置等的存储器。存储器可以存储适于由处理器来执行以进行根据所公开的主题的实现的技术的指令。
已经参考特定实现描述了以解释为目的的上述说明。然而，上述说明性的讨论并非意在将所公开的主题的实现穷举或限制为所公开的精确形式。有鉴于上述启示，许多修改和变化也是可以的。实现是为了解释所公开的主题的实现的原理及其实际应用而选择和说明的，由此使得本领域的其他技术人员能够利用这些实现连同具有可适于所预期的特殊用途的各种修改的各种实现。

Claims (20)

1.一种方法，包括：
接收触发输入信号；
响应于所接收到的触发输入信号，将唤醒信号输出至从装置；
接收来自所述从装置的输入信号；
接收来自主装置的传感器的输入信号；以及
响应于所述主装置的输入信号和所述从装置的输入信号，生成用以进行与所识别出的输入信号相关的动作的命令信号。
2.根据权利要求1所述的方法，其中，还包括：
将所述触发输入信号与触发输入信号的列表进行比较；以及
确定要发送至所述从装置的唤醒信号。
3.根据权利要求1所述的方法，其中，还包括：
响应于接收到所述唤醒信号，利用所述从装置检测来自环境的输入信号。
4.根据权利要求1所述的方法，其中，还包括：
响应于接收到所述唤醒信号，利用所述从装置发送缓存输入数据，其中所述缓存输入数据是在接收到所述唤醒信号之前在预定时间段所收集到的输入数据。
5.根据权利要求4所述的方法，其中，所述预定时间段为大致0.5秒至大致5分钟。
6.根据权利要求1所述的方法，其中，还包括：
使用所识别出的所述主装置的输入信号和来自所述从装置的输入数据来验证最终识别结果。
7.根据权利要求1所述的方法，其中，针对所述主装置和所述从装置的输入信号是口语输入。
8.根据权利要求1所述的方法，其中，所述触发输入信号是特定口语单词。
9.根据权利要求1所述的方法，其中，所述触发输入信号是红外线信号；以及
针对所述从装置的输入信号是口语。
10.根据权利要求1所述的方法，其中，所述触发输入信号是射频信号；以及
针对所述主装置和所述从装置的输入信号是口语。
11.根据权利要求1所述的方法，其中，所述触发输入信号是运动；以及
针对所述主装置和所述从装置的输入信号是口语。
12.一种系统，包括：
主装置，其包括长持续时间电源、传感器和处理器，其中所述主装置的处理器被配置为：
接收来自外部源的触发输入信号；
将唤醒信号输出至从装置；
接收来自所述从装置的输入信号；
接收来自所述主装置的传感器的输入信号；以及
响应于识别出所述主装置的输入信号和所述从装置的输入信号，生成用以进行与所识别出的输入信号相关的动作的命令信号。
13.根据权利要求12所述的系统，其中，所述主装置还包括Wi-Fi收发器、蓝牙收发器和近场通信收发器中的至少一个。
14.根据权利要求12所述的系统，其中，还包括：
从装置，其包括短持续时间电源、传感器、存储器和处理器，
其中，所述从装置的处理器被配置为：
响应于接收到来自所述主装置的所述唤醒信号，使得能够发送所述从装置的传感器所检测到的输入信号。
15.一种系统，包括：
主装置，其包括长持续时间电源、传感器和被配置为接收输入和发送信号的处理器，其中所述主装置的处理器被配置为响应于接收到触发信号而发送唤醒信号；以及
从装置，其包括短持续时间电源、传感器、存储器和处理器，其中所述从装置的处理器被配置为响应于接收到来自所述主装置的所述唤醒信号而使得能够发送所述从装置的传感器所检测到的输入信号。
16.根据权利要求15所述的系统，其中，所述主装置的传感器和所述从装置的传感器是麦克风，以及所述主装置的处理器还被配置为：
识别所述主装置的传感器所接收到的语音；
接收从所述从装置发送来的音频数据信号，其中所述音频数据信号表示所述从装置的传感器所接收到的语音；
分析所述音频数据信号和所识别出的语音以提供增强的语音识别结果；以及
判断所述增强的语音识别结果是否包含用以进行动作的声音命令。
17.根据权利要求15所述的系统，其中，所述主装置的传感器是麦克风，以及所述主装置的处理器还被配置为：
存储所述主装置的传感器所接收到的音频数据；
接收从所述从装置发送来的音频数据，其中从所述从装置发送来的音频数据表示所述从装置的传感器所接收到的语音；以及
将所述主装置的音频数据和所述从装置的音频数据发送至控制器。
18.根据权利要求15所述的系统，其中，所述主装置的传感器是麦克风，以及所述主装置的处理器还被配置为：
存储所述主装置的传感器所接收到的音频数据；
接收从所述从装置发送来的音频数据，其中从所述从装置发送来的音频数据表示所述从装置的传感器所接收到的语音；以及
将所述主装置的音频数据和所述从装置的音频数据发送至控制器。
19.根据权利要求15所述的系统，其中，所述主装置的传感器还包括运动传感器、红外线传感器、蓝牙检测器和近场通信检测器中的至少一个，以及所述主装置的处理器还被配置为：
响应于运动传感器、红外线传感器、蓝牙检测器和近场通信检测器中的所述至少一个所接收到的触发信号而生成唤醒信号。
20.根据权利要求15所述的系统，其中，所述长持续时间电源能够选自交流/直流有线电源或者持续时间比所述从装置中的电池更长的电池。
CN201480021305.9A 2013-02-14 2014-02-12 针对附加数据唤醒其它装置 Active CN105144023B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US13/766,878 2013-02-14
US13/766,878 US9842489B2 (en) 2013-02-14 2013-02-14 Waking other devices for additional data
PCT/US2014/015964 WO2014126971A1 (en) 2013-02-14 2014-02-12 Waking other devices for additional data

Publications (2)

Publication Number Publication Date
CN105144023A true CN105144023A (zh) 2015-12-09
CN105144023B CN105144023B (zh) 2018-12-18

Family

ID=50236266

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480021305.9A Active CN105144023B (zh) 2013-02-14 2014-02-12 针对附加数据唤醒其它装置

Country Status (4)

Country Link
US (1) US9842489B2 (zh)
EP (1) EP2956837B1 (zh)
CN (1) CN105144023B (zh)
WO (1) WO2014126971A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106441408A (zh) * 2016-07-25 2017-02-22 肇庆市小凡人科技有限公司 一种低功耗的测量系统
CN106875946A (zh) * 2017-03-14 2017-06-20 巨数创新（深圳）科技有限公司 语音控制交互系统
CN110473542A (zh) * 2019-09-06 2019-11-19 北京安云世纪科技有限公司 语音指令执行功能的唤醒方法、装置及电子设备

Families Citing this family (190)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10032452B1 (en) 2016-12-30 2018-07-24 Google Llc Multimodal transmission of packetized data
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US10013986B1 (en) 2016-12-30 2018-07-03 Google Llc Data structure pooling of voice activated data packets
US11017428B2 (en) 2008-02-21 2021-05-25 Google Llc System and method of data transmission rate adjustment
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US9922334B1 (en) 2012-04-06 2018-03-20 Google Llc Providing an advertisement based on a minimum number of exposures
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US10776830B2 (en) 2012-05-23 2020-09-15 Google Llc Methods and systems for identifying new computers and providing matching services
US10152723B2 (en) 2012-05-23 2018-12-11 Google Llc Methods and systems for identifying new computers and providing matching services
US10735552B2 (en) 2013-01-31 2020-08-04 Google Llc Secondary transmissions of packetized data
US10650066B2 (en) 2013-01-31 2020-05-12 Google Llc Enhancing sitelinks with creative content
KR20150104615A (ko) 2013-02-07 2015-09-15 애플 인크. 디지털 어시스턴트를 위한 음성 트리거
US10395651B2 (en) * 2013-02-28 2019-08-27 Sony Corporation Device and method for activating with voice input
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9504132B2 (en) * 2013-05-28 2016-11-22 Abl Ip Holding Llc Distributed processing using resources of intelligent lighting elements of a lighting system
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US9747899B2 (en) 2013-06-27 2017-08-29 Amazon Technologies, Inc. Detecting self-generated wake expressions
JP2015011170A (ja) * 2013-06-28 2015-01-19 株式会社ＡＴＲ−Ｔｒｅｋ ローカルな音声認識を行なう音声認識クライアント装置
CN105453026A (zh) 2013-08-06 2016-03-30 苹果公司 基于来自远程设备的活动自动激活智能响应
US9769550B2 (en) 2013-11-06 2017-09-19 Nvidia Corporation Efficient digital microphone receiver process and system
US9454975B2 (en) * 2013-11-07 2016-09-27 Nvidia Corporation Voice trigger
US9929873B2 (en) * 2013-12-06 2018-03-27 Vivint, Inc. Voice control using multi-media rooms
US20150221307A1 (en) * 2013-12-20 2015-08-06 Saurin Shah Transition from low power always listening mode to high power speech recognition mode
KR102210433B1 (ko) * 2014-01-21 2021-02-01 삼성전자주식회사 전자 장치 및 이의 음성 인식 방법
US9591565B2 (en) * 2014-05-16 2017-03-07 Intel Corporation Method, system and apparatus for providing coexistence between low power stations and non-low power stations
US10553098B2 (en) 2014-05-20 2020-02-04 Ooma, Inc. Appliance device integration with alarm systems
US9633547B2 (en) 2014-05-20 2017-04-25 Ooma, Inc. Security monitoring and control
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
TWI566107B (zh) 2014-05-30 2017-01-11 蘋果公司 用於處理多部分語音命令之方法、非暫時性電腦可讀儲存媒體及電子裝置
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US11330100B2 (en) * 2014-07-09 2022-05-10 Ooma, Inc. Server based intelligent personal assistant services
US20160055847A1 (en) * 2014-08-19 2016-02-25 Nuance Communications, Inc. System and method for speech validation
US9318107B1 (en) * 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
KR102246120B1 (ko) 2014-11-21 2021-04-29 삼성전자주식회사 디스플레이 장치를 제어하기 위한 사용자 단말 및 이의 제어 방법
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
EP3067884B1 (en) 2015-03-13 2019-05-08 Samsung Electronics Co., Ltd. Speech recognition system and speech recognition method thereof
JP6564058B2 (ja) 2015-04-10 2019-08-21 華為技術有限公司Ｈｕａｗｅｉ Ｔｅｃｈｎｏｌｏｇｉｅｓ Ｃｏ．，Ｌｔｄ． 音声認識方法、音声ウェイクアップ装置、音声認識装置、および端末
US10009286B2 (en) 2015-05-08 2018-06-26 Ooma, Inc. Communications hub
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10200824B2 (en) 2015-05-27 2019-02-05 Apple Inc. Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device
US9826483B2 (en) 2015-06-22 2017-11-21 Intel Corporation Apparatus, system and method of communicating a wakeup packet
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10740384B2 (en) 2015-09-08 2020-08-11 Apple Inc. Intelligent automated assistant for media search and playback
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10331312B2 (en) 2015-09-08 2019-06-25 Apple Inc. Intelligent automated assistant in a media environment
US10119330B2 (en) * 2015-09-18 2018-11-06 The Watt Stopper Inc. Hardwired and wirelessly controlled motorized window shades system and method of use
US9542941B1 (en) 2015-10-01 2017-01-10 Lenovo (Singapore) Pte. Ltd. Situationally suspending wakeup word to enable voice command input
CN105242556A (zh) * 2015-10-28 2016-01-13 小米科技有限责任公司 智能设备的语音控制方法、装置、控制设备及智能设备
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10074364B1 (en) * 2016-02-02 2018-09-11 Amazon Technologies, Inc. Sound profile generation based on speech recognition results exceeding a threshold
US10431218B2 (en) * 2016-02-15 2019-10-01 EVA Automation, Inc. Integration and probabilistic control of electronic devices
US9965247B2 (en) 2016-02-22 2018-05-08 Sonos, Inc. Voice controlled media playback system based on user profile
US9947316B2 (en) 2016-02-22 2018-04-17 Sonos, Inc. Voice control of a media playback system
US9772817B2 (en) 2016-02-22 2017-09-26 Sonos, Inc. Room-corrected voice detection
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US9811314B2 (en) 2016-02-22 2017-11-07 Sonos, Inc. Metadata exchange involving a networked playback system and a networked microphone system
US9779735B2 (en) * 2016-02-24 2017-10-03 Google Inc. Methods and systems for detecting and processing speech signals
WO2017184169A1 (en) * 2016-04-22 2017-10-26 Hewlett-Packard Development Company, L.P. Communications with trigger phrases
US10079027B2 (en) * 2016-06-03 2018-09-18 Nxp B.V. Sound signal detector
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US9978390B2 (en) 2016-06-09 2018-05-22 Sonos, Inc. Dynamic player selection for audio signal processing
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
TWI584270B (zh) * 2016-06-15 2017-05-21 瑞昱半導體股份有限公司 語音控制系統及其方法
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US10152969B2 (en) 2016-07-15 2018-12-11 Sonos, Inc. Voice detection by multiple devices
US10438583B2 (en) * 2016-07-20 2019-10-08 Lenovo (Singapore) Pte. Ltd. Natural language voice assistant
US10621992B2 (en) * 2016-07-22 2020-04-14 Lenovo (Singapore) Pte. Ltd. Activating voice assistant based on at least one of user proximity and context
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
KR102499378B1 (ko) * 2016-08-30 2023-02-13 삼성전자주식회사 통신 장치 및 통신 방법
US9942678B1 (en) 2016-09-27 2018-04-10 Sonos, Inc. Audio playback settings for voice interaction
US9743204B1 (en) 2016-09-30 2017-08-22 Sonos, Inc. Multi-orientation playback device microphones
KR102623272B1 (ko) * 2016-10-12 2024-01-11 삼성전자주식회사 전자 장치 및 이의 제어 방법
US10181323B2 (en) 2016-10-19 2019-01-15 Sonos, Inc. Arbitration-based voice recognition
US10593329B2 (en) * 2016-12-30 2020-03-17 Google Llc Multimodal transmission of packetized data
US10708313B2 (en) 2016-12-30 2020-07-07 Google Llc Multimodal transmission of packetized data
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10311876B2 (en) 2017-02-14 2019-06-04 Google Llc Server side hotwording
KR101925034B1 (ko) * 2017-03-28 2018-12-04 엘지전자 주식회사 스마트 컨트롤링 디바이스 및 그 제어 방법
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US20180336275A1 (en) 2017-05-16 2018-11-22 Apple Inc. Intelligent automated assistant for media exploration
US10664533B2 (en) 2017-05-24 2020-05-26 Lenovo (Singapore) Pte. Ltd. Systems and methods to determine response cue for digital assistant based on context
CN107395467B (zh) 2017-06-21 2021-08-17 北京小米移动软件有限公司 智能家居的初始化方法及装置
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
KR102338376B1 (ko) 2017-09-13 2021-12-13 삼성전자주식회사 디바이스 그룹을 지정하기 위한 전자 장치 및 이의 제어 방법
US10446165B2 (en) 2017-09-27 2019-10-15 Sonos, Inc. Robust short-time fourier transform acoustic echo cancellation during audio playback
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10621981B2 (en) 2017-09-28 2020-04-14 Sonos, Inc. Tone interference cancellation
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10880650B2 (en) 2017-12-10 2020-12-29 Sonos, Inc. Network microphone devices with automatic do not disturb actuation capabilities
US10818290B2 (en) 2017-12-11 2020-10-27 Sonos, Inc. Home graph
WO2019152722A1 (en) 2018-01-31 2019-08-08 Sonos, Inc. Device designation of playback and network microphone device arrangements
CN108428452B (zh) * 2018-03-14 2019-12-13 百度在线网络技术（北京）有限公司 终端支架和远场语音交互系统
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US11151991B2 (en) * 2018-03-30 2021-10-19 Verizon Media Inc. Electronic message transmission
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10847178B2 (en) 2018-05-18 2020-11-24 Sonos, Inc. Linear filtering for noise-suppressed speech detection
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
CN108683512A (zh) * 2018-05-25 2018-10-19 英业达科技有限公司 电讯传输装置、电讯传输方法及智能灯具系统
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10681460B2 (en) 2018-06-28 2020-06-09 Sonos, Inc. Systems and methods for associating playback devices with voice assistant services
US20200067760A1 (en) * 2018-08-21 2020-02-27 Vocollect, Inc. Methods, systems, and apparatuses for identifying connected electronic devices
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US10461710B1 (en) 2018-08-28 2019-10-29 Sonos, Inc. Media playback system with maximum volume setting
US10587430B1 (en) 2018-09-14 2020-03-10 Sonos, Inc. Networked devices, systems, and methods for associating playback devices based on sound codes
US10878811B2 (en) 2018-09-14 2020-12-29 Sonos, Inc. Networked devices, systems, and methods for intelligently deactivating wake-word engines
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
US10811015B2 (en) 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10692518B2 (en) 2018-09-29 2020-06-23 Sonos, Inc. Linear filtering for noise-suppressed speech detection via multiple network microphone devices
US11899519B2 (en) * 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10777186B1 (en) * 2018-11-13 2020-09-15 Amazon Technolgies, Inc. Streaming real-time automatic speech recognition service
EP3654249A1 (en) 2018-11-15 2020-05-20 Snips Dilated convolutions and gating for efficient keyword spotting
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US10602268B1 (en) 2018-12-20 2020-03-24 Sonos, Inc. Optimization of network microphone devices using noise classification
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11315556B2 (en) 2019-02-08 2022-04-26 Sonos, Inc. Devices, systems, and methods for distributed voice processing by transmitting sound data associated with a wake word to an appropriate device for identification
US10867604B2 (en) 2019-02-08 2020-12-15 Sonos, Inc. Devices, systems, and methods for distributed voice processing
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11227599B2 (en) 2019-06-01 2022-01-18 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US10586540B1 (en) 2019-06-12 2020-03-10 Sonos, Inc. Network microphone device with command keyword conditioning
US11361756B2 (en) 2019-06-12 2022-06-14 Sonos, Inc. Conditional wake word eventing based on environment
US11200894B2 (en) 2019-06-12 2021-12-14 Sonos, Inc. Network microphone device with command keyword eventing
US11138975B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
US10871943B1 (en) 2019-07-31 2020-12-22 Sonos, Inc. Noise classification for event detection
US11138969B2 (en) 2019-07-31 2021-10-05 Sonos, Inc. Locally distributed keyword detection
DE102019213519A1 (de) * 2019-09-05 2021-03-11 Robert Bosch Gmbh Verfahren zum Betreiben von Sensoren
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11556307B2 (en) 2020-01-31 2023-01-17 Sonos, Inc. Local voice data processing
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11043220B1 (en) 2020-05-11 2021-06-22 Apple Inc. Digital assistant hardware abstraction
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence
US11202121B2 (en) 2020-05-13 2021-12-14 Roku, Inc. Providing customized entertainment experience using human presence detection
US11736767B2 (en) * 2020-05-13 2023-08-22 Roku, Inc. Providing energy-efficient features using human presence detection
US11395232B2 (en) * 2020-05-13 2022-07-19 Roku, Inc. Providing safety and environmental features using human presence detection
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11727919B2 (en) 2020-05-20 2023-08-15 Sonos, Inc. Memory allocation for keyword spotting engines
US11308962B2 (en) 2020-05-20 2022-04-19 Sonos, Inc. Input detection windowing
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones
US11698771B2 (en) 2020-08-25 2023-07-11 Sonos, Inc. Vocal guidance engines for playback devices
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
US11551700B2 (en) 2021-01-25 2023-01-10 Sonos, Inc. Systems and methods for power-efficient keyword detection
US11501276B1 (en) * 2021-08-16 2022-11-15 International Business Machines Corporation Resiliency in point of service transactions using distributed computing
CN115731927A (zh) * 2021-08-30 2023-03-03 华为技术有限公司 语音唤醒的方法、装置、设备、存储介质及程序产品
US12021806B1 (en) 2021-09-21 2024-06-25 Apple Inc. Intelligent message delivery

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6219645B1 (en) * 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
US20080167868A1 (en) * 2007-01-04 2008-07-10 Dimitri Kanevsky Systems and methods for intelligent control of microphones for speech recognition applications
CN101266791A (zh) * 2007-03-12 2008-09-17 佳世达科技股份有限公司 协同识别语音命令的方法及其相关系统
CN102323853A (zh) * 2010-06-04 2012-01-18 微软公司 通过用户交互控制电子设备的功率级

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020178003A1 (en) * 2001-03-09 2002-11-28 Motorola, Inc. Method and apparatus for providing voice recognition service to a wireless communication device
US20030144837A1 (en) * 2002-01-29 2003-07-31 Basson Sara H. Collaboration of multiple automatic speech recognition (ASR) systems
US7072697B2 (en) * 2002-10-22 2006-07-04 Nokia Corporation Method and device for transponder aided wake-up of a low power radio device by a wake-up event
US7418392B1 (en) * 2003-09-25 2008-08-26 Sensory, Inc. System and method for controlling the operation of a device by voice commands
US8326636B2 (en) * 2008-01-16 2012-12-04 Canyon Ip Holdings Llc Using a physical phenomenon detector to control operation of a speech recognition engine
US8606574B2 (en) * 2009-03-31 2013-12-10 Nec Corporation Speech recognition processing system and speech recognition processing method
EP2290901A1 (fr) * 2009-08-26 2011-03-02 Gemalto SA Dispositif électronique nomade configuré pour établir une communication sans fil sécurisé
US8340975B1 (en) * 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US9043210B1 (en) * 2012-10-02 2015-05-26 Voice Security Systems, Inc. Biometric voice command and control switching device and method of use
US20150228274A1 (en) * 2012-10-26 2015-08-13 Nokia Technologies Oy Multi-Device Speech Recognition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6219645B1 (en) * 1999-12-02 2001-04-17 Lucent Technologies, Inc. Enhanced automatic speech recognition using multiple directional microphones
US20080167868A1 (en) * 2007-01-04 2008-07-10 Dimitri Kanevsky Systems and methods for intelligent control of microphones for speech recognition applications
CN101266791A (zh) * 2007-03-12 2008-09-17 佳世达科技股份有限公司 协同识别语音命令的方法及其相关系统
CN102323853A (zh) * 2010-06-04 2012-01-18 微软公司 通过用户交互控制电子设备的功率级

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106441408A (zh) * 2016-07-25 2017-02-22 肇庆市小凡人科技有限公司 一种低功耗的测量系统
CN106875946A (zh) * 2017-03-14 2017-06-20 巨数创新（深圳）科技有限公司 语音控制交互系统
CN110473542A (zh) * 2019-09-06 2019-11-19 北京安云世纪科技有限公司 语音指令执行功能的唤醒方法、装置及电子设备
CN110473542B (zh) * 2019-09-06 2022-04-15 北京安云世纪科技有限公司 语音指令执行功能的唤醒方法、装置及电子设备

Also Published As

Publication number Publication date
US9842489B2 (en) 2017-12-12
EP2956837A1 (en) 2015-12-23
US20140229184A1 (en) 2014-08-14
CN105144023B (zh) 2018-12-18
EP2956837B1 (en) 2021-04-07
WO2014126971A1 (en) 2014-08-21

Similar Documents

Publication Publication Date Title
CN105144023A (zh) 针对附加数据唤醒其它装置
CN110800273B (zh) 虚拟传感器系统
CN108091331B (zh) 一种基于语音控制的智能家居系统及其控制方法
USRE48569E1 (en) Control method for household electrical appliance, household electrical appliance control system, and gateway
CN105116859A (zh) 一种利用无人飞行器实现的智能家居系统及方法
CN206097455U (zh) 一种语音识别控制设备
US20160189506A1 (en) Alarm Arming With Open Entry Point
CN204903983U (zh) 一种智能家居系统及其无人飞行器、智能中枢设备
US20200334931A1 (en) Access control and location tracking system
CN107736045A (zh) 控制外围设备的方法和装置
US10121029B2 (en) Locating radio energy-producing tag
US11875659B2 (en) Privacy-preserving radar-based fall monitoring
KR20170044419A (ko) 사용자의 위치를 인식하는 사용자단말장치 및 방법
US20160155223A1 (en) Systems, devices, and methods for mapping devices to realize building automation and energy management
CN105765899A (zh) 在家庭网络系统中基于组来控制家庭设备的方法和装置
CN112513786B (zh) 电子装置及其控制方法
CN105699936B (zh) 一种智能家庭室内定位方法
CN105099839B (zh) 智能插座及网络连接方法和系统、无线网关及配对方法
CN109144971B (zh) 设备绑定方法及匹配系统
CN111766795A (zh) 一种基于物联网的智能家居总控系统及方法
WO2017183044A1 (en) Access control and location tracking system
WO2014030377A1 (ja) 無線装置、それによって制御される制御対象機器、無線装置および制御対象機器を備える制御システム、および無線装置において制御対象機器の制御をコンピュータに実行させるためのプログラム
Shawon et al. Voice controlled smart home automation system using bluetooth technology
WO2018023515A1 (zh) 一种手势及情感识别家居控制系统
CN111383375B (zh) 酒店客房的电力控制方法及电力控制系统、酒店管理系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

GR01 Patent grant
GR01 Patent grant