CN116597836A - 记录的媒体热词触发抑制 - Google Patents

记录的媒体热词触发抑制 Download PDF

Info

Publication number
CN116597836A
CN116597836A CN202310618091.4A CN202310618091A CN116597836A CN 116597836 A CN116597836 A CN 116597836A CN 202310618091 A CN202310618091 A CN 202310618091A CN 116597836 A CN116597836 A CN 116597836A
Authority
CN
China
Prior art keywords
audio
audio data
watermark
hotword
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310618091.4A
Other languages
English (en)
Inventor
R·A·加西亚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN116597836A publication Critical patent/CN116597836A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L19/00—Speech or audio signals analysis-synthesis techniques for redundancy reduction, e.g. in vocoders; Coding or decoding of speech or audio signals, using source filter models or psychoacoustic analysis
    • G10L19/018—Audio watermarking, i.e. embedding inaudible data in the audio signal
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

公开了用于当检测到记录的媒体中的热词时抑制热词触发的方法、系统和用户设备，包括在计算机存储介质上编码的计算机程序。在一方面，一种方法，包括：在数据处理硬件处接收与媒体内容项目的回放相对应的音频数据，所述音频数据包括音频水印和由热词在前的命令的话语；由数据处理硬件确定接收的音频数据包括热词；由数据处理硬件处理音频数据，以：识别包括在音频数据中的音频水印；以及确定音频水印的相对应的比特流；以及基于确定的音频水印的相对应的比特流，由数据处理硬件在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过执行由热词在前的命令。

Description

记录的媒体热词触发抑制
本申请是申请日为2018年03月13日，申请号为201880008785.3，发明名称为“记录的媒体热词触发抑制”的发明专利申请的分案申请。
技术领域
本说明书一般涉及自动语音识别。
背景技术
支持语音的住所或其他环境——也就是用户在其中仅需要出声地讲出查询或命令并且基于计算机的系统将处理并应答该查询和/或致使命令得以执行的住所或其他环境——的现实正在到来。支持语音的环境(例如，住所、工作场所、学校等)能够使用分布在该环境的各个房间或区域各处的被连接的麦克风设备的网络来实施。通过这样的麦克风的网络，用户有能力从基本上该环境中的任何地方口头查询系统而无需在他/她的前方或者甚至在其附近具有计算机或其他设备。例如，当在厨房中烹饪时，用户可以询问系统“三杯是多少毫升？”，并且作为响应而从系统接收到回答，例如，以合成语音输出的形式的回答。可替换地，用户可以询问系统诸如“离我最近的加油站什么时候关门”，或者在准备离开房子时询问“我今天应当穿外套吗？”。
此外，用户可以询问系统的查询和/或发出命令，该查询或命令涉及用户的个人信息。例如，用户可以询问系统“我与John何时会面？”或者命令系统“当我回家时提醒我给John打电话。”
发明内容
对于支持语音的系统，用户与系统交互的方式被设计为主要(如果不是专门地)凭借语音输入来进行。因此，可能拾取周围环境中所发出的包括并非指向系统的那些话语在内的所有话语的系统必须以某些方式来辨别任何给定的话语何时是指向该系统而不是例如指向出现在该环境中的个人。一种实现该目的的方式是使用热词(hotword)，该热词通过环境中的用户间的协定被预留作为预定词语，其被讲出以唤起系统的注意。在示例环境中，用来唤起系统的注意的热词是词语“OK computer”(OK计算机)。因此，每次词语“OKcomputer”被讲出时，其就被麦克风所拾取，传达至系统，该系统执行语音识别技术或使用音频特征和神经网络来确定热词是否被讲出，并且如果是，则等待随后的命令或查询。因此，指向系统的话语采用[热词][查询]([HOTWORD][QUERY])的一般形式，其中本示例中的“热词”是“OK computer”并且“查询”能够是任何问题、命令、声明、或者能够由系统单独或者经由网络与服务器结合来进行语音识别、解析、以及按照其实施动作的其他请求。
除了检测热词之外，计算设备可以被配置为检测嵌入在热词的音频中的音频水印。音频水印可以是人类听不见的高频水印，或者是听起来类似于背景噪声或静态的水印。计算设备可以被配置为根据音频水印不同地响应热词。例如，可以创建媒体内容的一部分，其中包括一个演员说：“OK computer，给我去火车站的方向”。为了防止播放媒体内容的电视机附近范围内的任何计算设备提供去火车站的方向，媒体内容的创建者可以包括与热词重叠的音频水印。检测媒体内容的音频的计算设备可以提取音频水印并将音频水印与音频水印数据库进行比较。音频水印数据库可以包括计算设备应该何时对随热词和该特定音频水印之后的音频执行语音识别的规则，以及对于其他音频水印的附加规则。应当理解，本文描述的方法和系统中的至少一些可以使计算设备能够选择性地确定何时响应通过计算设备附近的扬声器输出的口头话语。
用于媒体内容的音频水印的规则可以包括计算设备在进一步处理来自媒体内容的音频之前应该满足的条件。示例规则可以是：如果计算设备当前没有提供方向、移动速度不超过每小时10英里、是智能扬声器、以及位于用户住所处，则计算设备应该作出响应。规则的另一示例可以是：只有当计算设备在与媒体内容的所有者或创建者相关联的场所内并且水印指示话语具有高优先级时，计算设备才应该响应。如果计算设备满足这些规则，则计算设备可以对随热词之后的部分执行语音识别。如果转录是“给我去火车站的方向”，则计算设备可以显示或可听地提供去火车站的方向。如果计算设备不满足规则，则计算设备不对随热词之后的音频部分执行语音识别，并且不响应于音频执行进一步的动作。
在一些实施方式中，音频水印可以编码数据，这可以消除计算设备将音频水印与音频水印数据库进行比较的需要。编码的数据可以包括计算设备应该何时执行语音识别的规则、标识符、动作或任何其他类似数据。在一些实施方式中，计算设备可以结合音频水印数据库使用编码的数据来确定是否对随热词之后的音频执行语音识别。
根据本申请中描述的主题的创新方面，一种用于当检测到记录的媒体中的热词时抑制热词触发的方法包括以下动作：由计算设备接收与媒体内容项的回放相对应的音频；由计算设备确定音频包括预定义热词的话语以及确定音频包括音频水印；由计算设备分析音频水印；以及基于对音频水印进行分析，由计算设备确定是否对随预定义热词之后的音频部分执行语音识别。
这些和其他实施方式可以各自可选地包括一个或多个以下特征。分析音频水印的动作包括将音频水印与一个或多个音频水印进行比较。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于将音频水印与一个或多个音频水印进行比较。音频水印是与媒体内容项的回放相对应的音频的听不见的部分。这些动作还包括：基于对音频水印进行分析，标识与媒体内容项的回放相对应的音频源。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于与媒体内容项的回放相对应的音频源。这些动作还包括：基于对音频水印进行分析，标识与媒体内容项的回放相对应的音频源；以及更新日志文件以指示与媒体内容项回放相对应的音频源。
音频水印包括在包括预定义热词的话语的音频部分中。这些动作还包括确定附加计算设备的类型。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于附加计算设备的类型。由计算设备确定是否对随预定义热词之后的音频部分执行语音识别的动作包括确定对随预定义热词之后的音频部分执行语音识别。这些动作还包括由自动语音识别器生成随预定义热词之后的音频转录；以及执行与随预定义热词之后的音频转录相对应的动作。由计算设备确定是否对随预定义热词之后的音频部分执行语音识别的动作包括确定不对随预定义热词之后的音频部分执行语音识别。这些动作还包括抑制对应于与媒体内容项的回放相对应的音频的动作。
这些动作还包括确定附加计算设备的位置。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于附加计算设备的位置。这些动作还包括确定附加计算设备的用户设置。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于附加计算设备的用户设置。由计算设备确定音频包括预定义热词的话语以及确定音频包括音频水印的动作包括确定音频包括预定义热词的话语；以及基于确定音频包括预定义热词的话语，确定音频包括音频水印。由计算设备确定音频包括预定义热词的话语以及确定音频包括音频水印的动作包括确定音频包括预定义热词的话语；以及在确定音频包括预定义热词的话语之后，确定音频包括音频水印。
分析音频水印的动作包括提取编码在音频水印中的数据。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于编码在音频水印中的数据。这些动作还包括：基于对音频水印进行分析，标识与媒体内容项的回放相对应的音频的媒体内容的类型；以及更新日志文件以指示与媒体内容项的回放相对应的音频的媒体内容的类型。这些动作还包括：基于对音频水印进行分析，标识与媒体内容项的回放相对应的音频的媒体内容的类型。确定是否对随预定义热词之后的音频部分执行语音识别的动作还基于与媒体内容项的回放相对应的音频的媒体内容的类型。这些动作还包括：基于对音频水印进行分析，由计算设备确定是否对随预定义热词之后的音频部分执行自然语言处理。
该方面的其他实施例包括相应系统、装置和记录在计算机存储设备上的计算机程序，每个被配置为执行这些方法的操作。
可以实施本说明书中描述的主题的特定实施例，以便实现一个或多个以下优点。计算设备可以响应仅包括特定音频水印的热词，从而节省计算设备的电池电量和处理能力。在接收到带有音频水印的热词时，可以用较少的计算设备执行搜索查询来保持网络带宽。另外，音频水印可以被用来使用户的计算设备在用户可能无法听到它(如果它是例如经由位于用户附近的扬声器输出的信息)的情形下向用户传达信息(例如，对口头询问的响应或某种警告)。这样的用户可以包括那些有听力障碍的人或者那些经由连接到他们的音频设备的个人扬声器(例如，头戴式耳机)收听其他音频的人。例如，特定音频水印可以被计算设备理解为指示高优先级，在这种情况下，计算设备可以对经由主音频接收的查询作出响应。
根据本公开的实施例的一种方法，包括：在数据处理硬件处接收与媒体内容项目的回放相对应的音频数据，所述音频数据包括音频水印和由热词在前的命令的话语；由数据处理硬件确定接收的音频数据包括热词；由数据处理硬件处理音频数据，以：识别包括在音频数据中的音频水印；以及确定音频水印的相对应的比特流；以及基于确定的音频水印的相对应的比特流，由数据处理硬件在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过执行由热词在前的命令。
根据本公开的实施例的一种系统，包括：数据处理硬件；和存储器硬件，与数据处理硬件通信并存储指令，当在数据处理硬件上执行时，所述指令使数据处理硬件执行操作，包括：接收与媒体内容项目的回放相对应的音频数据，所述音频数据包括音频水印和由热词在前的命令的话语；确定接收的音频数据包括热词；处理音频数据，以：识别包括在音频数据中的音频水印；以及确定音频水印的相对应的比特流；以及基于确定的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过执行由热词在前的命令。
根据本公开的实施例的一种计算机实现的方法，当在用户设备的数据处理硬件上执行时，使数据处理硬件执行操作，包括：当用户设备处于睡眠模式时，接收由用户设备的麦克风捕获的音频数据，所述音频数据与从用户设备附近的音频源输出的媒体内容项目的回放相对应；当用户设备保持在睡眠模式时，处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流；以及基于确定的编码在音频数据中的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过对音频数据执行语音识别。
根据本公开的实施例的一种用户设备，包括：数据处理硬件；和存储器硬件，与数据处理硬件通信并存储指令，当在数据处理硬件上执行时，所述指令使数据处理硬件执行操作，包括：当用户设备处于睡眠模式时，接收由用户设备的麦克风捕获的音频数据，所述音频数据与从用户设备附近的音频源输出的媒体内容项目的回放相对应；当用户设备保持在睡眠模式时，处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流；以及基于确定的编码在音频数据中的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过对音频数据执行语音识别。
本说明书中描述的主题的一个或多个实施例的细节在附图和以下描述中阐述。从说明书、附图和权利要求书中，主题的其他特征、方面和优点将变得显而易见。
附图说明
图1示出了用于当检测到记录的媒体中的热词时抑制热词触发的示例系统。
图2是用于当检测到记录的媒体中的热词时抑制热词触发的示例过程的流程图。
图3是计算设备和移动计算设备的示例。
不同附图中相同的参考标号和名称表示相同的元件。
具体实施方式
图1示出了用于当检测到记录的媒体中的热词时抑制热词触发的示例系统100。简而言之，如下文更详细描述的，计算设备102和104接收从音频源106(例如，电视机)输出的音频108。音频108包括预定义热词的话语和音频水印。计算设备102和104都处理音频108，并确定音频108包括预定义热词。计算设备102和104标识音频水印。基于音频水印和计算设备102和104的上下文或特性，计算设备102和104中的每一个可以对音频执行语音识别。
在图1所示的示例中，音频源106正在播放与鸡块世界(Nugget World)相关联的媒体内容。在媒体内容期间，媒体内容中的演员说出话语108“OK computer，鸡块中有什么？”。话语108包括热词110“Ok computer”和查询112“鸡块中有什么？”。音频源106通过扬声器输出话语108。附近任何带有麦克风的计算设备都能够检测话语108。
话语108的音频包括可听部分114和音频水印116。媒体内容的创建者可以添加音频水印116，以确保特定计算设备正确地响应话语108。在一些实施方式中，音频水印116可以包括高于或低于人类听觉范围的音频频率。例如，音频水印116可以包括大于20kHz或小于20Hz的频率。在一些实施方式中，音频水印116可以包括在人类听觉范围内但因为其声音类似于噪声所以人类检测不到的音频。例如，音频水印116可以包括8至10kHz之间的频率模式。不同频带的强度对于人来说可能是察觉不到的，但是可以被计算设备检测到。如音频108的频域表示118所示，包括在比可听部分114更高的频率范围内的音频水印116。
计算设备102和104可以是能够通过麦克风接收音频的任何类型的设备。例如，计算设备102和104可以是台式计算机、膝上型计算机、平板计算机、可穿戴计算机、蜂窝电话、智能电话、音乐播放器、电子书阅读器、导航系统、智能扬声器和家庭助理、无线(例如，蓝牙)耳机、助听器、智能手表、智能眼镜、活动跟踪器或任何其他合适的计算设备。如图1所示，计算设备102是智能电话，并且计算设备104是台式计算机。音频源106可以是任何音频源，诸如，例如，电视机、收音机、音乐播放器、台式计算机、膝上型计算机、平板计算机、可穿戴计算机、蜂窝电话或智能电话。如图1所示，音频源106是电视机。
计算设备102和104各自通过麦克风接收音频。关于计算设备102，麦克风可以是音频子系统120的一部分。音频子系统120可以包括缓冲器、滤波器、模数转换器，每个都被设计成初始地处理通过麦克风接收的音频。缓冲器可以存储通过麦克风接收并由音频子系统120处理的当前音频。例如，缓冲器存储前五秒的音频数据。类似地，计算设备104的麦克风可以是音频子系统122的一部分。音频子系统122可以包括缓冲器、滤波器、模数转换器，每个都被设计成初始地处理通过麦克风接收的音频。缓冲器可以存储通过麦克风接收并由音频子系统122处理的当前音频。例如，缓冲器存储前三秒的音频数据。
计算设备102和104各自分别包括热词器124和126。热词器124和126各自被配置为标识通过麦克风接收的和/或存储在缓冲器中的音频中的热词。在一些实施方式中，热词器124和126可以在计算设备102和104通电的任何时候都是活动的。热词器124连续分析存储在缓冲器中的音频数据。热词器124计算反映缓冲器中的当前音频数据包括热词的可能性的热词置信度得分。为了计算热词置信度得分，热词器124可以从音频数据中提取音频特征，诸如滤波器组能量(filterbank energy)或梅尔频率倒谱系数(mel-frequencycepstral coefficient)。热词器124可以使用分类窗口来处理这些音频特征，诸如通过使用支持向量机或神经网络进行处理。在一些实施方式中，热词器124不执行语音识别来确定热词置信度得分。如果热词置信度得分满足热词置信度得分阈值，则热词器124确定音频包括热词。例如，如果热词置信度得分为0.8并且热词置信度得分阈值为0.7，则热词器124确定对应于话语108的音频包括热词110。热词器126在功能上类似于热词器124。
计算设备102和104各自分别包括音频水印标识器128和130。音频水印标识器128和130各自被配置为处理通过麦克风接收的和/或存储在缓冲器中的音频，并标识包括在音频中的音频水印。音频水印标识器128和130可以各自被配置为检测扩频和心理声学整形(psychacoustic shaping)类型的水印。这些类型的水印可以位于与对应音频的频带重叠的频带中。人类可能会将这些类型的水印视为噪声。音频水印标识器128和130也可以各自被配置为检测高频水印。这些类型的水印可以位于对应音频的频带之上的频带中。高频水印的频带可能高于人类听觉的阈值。音频水印标识器128和130也可以各自被配置为检测低频水印。这些类型的水印可以位于对应音频的频带之下的频带中。低频水印的频带可能低于人类听觉的阈值。在一些实施方式中，音频水印标识器128和130响应于相应的热词器124和126检测到热词来处理音频。
音频水印标识器128和130可以各自被配置为分离音频水印和主音频。主音频可以是添加音频水印的音频部分。例如，主音频可以包括可听部分114，该可听部分114包括与“OK computer，鸡块中有什么？”相对应但没有水印116的音频。音频水印标识器128将通过计算设备102的麦克风接收到的音频118分离成主音频132和音频水印134。类似地，音频水印标识器130将通过计算设备104的麦克风接收到的音频118分离成主音频136和音频水印138。在一些实施方式中，音频水印和主音频可以在时域中重叠。
在一些实施方式中，音频水印标识器128和130可以分别处理音频水印134和138，以标识音频水印的对应比特流。例如，音频水印标识器128可以处理音频水印134，并确定音频水印134对应于比特流0101101110101。音频水印标识器130可以对音频水印138进行类似的处理。
音频水印比较器140和144各自将相应的音频水印134和138分别与音频水印142和146进行比较。例如，音频水印比较器140可以将水印134的频率模式或比特流与音频水印142进行比较。音频水印比较器140可以确定音频水印134匹配鸡块世界的音频水印。音频水印比较器144可以做出类似的确定。
音频水印142和146可以包含各种实体嵌入包含热词的媒体内容的音频或其他分布式或广播音频中的音频水印。鸡块世界可以在音频108中包括水印，以确保只有特定设备对热词作出响应，对音频执行语音识别，并执行查询112。鸡块世界可以提供音频水印116以包括在音频水印142和146中，以及对于设备何时应该响应带有音频水印116的热词的指令。例如，鸡块世界可以在音频水印142和146中包括对于位于鸡块世界餐馆中的具有鸡块世界用户标识符的任何设备的指令，以对带有音频水印116的热词作出响应。在一些实施方式中，音频水印142和146存储在计算设备102和104上，并且定期更新，例如，每天一次。在一些实施方式中，音频水印142或146、音频水印标识器128和130和/或音频水印比较器140和144可以位于远程服务器上。在这种情况下，计算设备102或104可以通过网络与远程服务器通信。
计算设备102提取音频水印134并将音频水印134与鸡块世界水印相匹配。基于音频水印142中对于鸡块世界水印的指令，计算设备102可以对主音频132执行语音识别，并执行包括在对应转录中的任何查询或命令。指令可以包括计算设备102要遵循以确定是否执行语音识别的一组规则。
计算设备102包括位置检测器156。位置检测器156可以生成反映计算设备位置的地理位置数据。位置检测器156可以使用任何地理定位技术，例如，全球定位系统(GlobalPosition System，GPS)、三角测量和/或任何其他类似的定位技术。在一些实施方式中，位置检测器156可以访问指示各种感兴趣点的位置的地图或位置数据。位置检测器156可以进一步标识计算设备所在的兴趣点。例如，位置检测器156可以确定计算设备102位于鸡块世界处。
计算设备102包括设备标识符158。设备标识符158包括标识计算设备102的设备类型的设备身份160。设备身份160可以是台式计算机、膝上型计算机、平板计算机、可穿戴计算机、蜂窝电话、智能电话、音乐播放器、电子书阅读器、导航系统、智能扬声器和家庭助理或任何其他合适的计算设备。例如，计算设备102的设备身份160是电话。
计算设备102包括用户标识符162。用户标识符162包括标识计算设备102的用户的用户身份164。用户身份164可以是电子邮件地址、电话号码或任何其他类似类型的唯一用户标识符。例如，计算设备102的用户身份164是user@example.com。用户标识符162可以由用户154输入。
计算设备102包括用户设置152。用户设置152可以由用户154提供，并且可以包括对于计算设备102应该如何响应热词的附加规则。例如，用户设置152可以包括计算设备102不响应包括音频水印的任何热词，除非计算设备102在住所时接收到包括音频水印的热词的规则。作为另一示例，用户设置152可以包括计算设备102不响应包括与特定实体(例如，媒体内容的所有者或创建者)(诸如鸡肉世界)相对应的音频水印的热词的规则。在一些实施方式中，用户154可以同意允许计算设备102对带有特定实体的水印的热词作出响应。
在图1所示的示例中，语音识别器166保持非活动，如语音识别器状态168所示。计算设备102基于将存储在音频水印中的与音频水印134相对应的指令应用于设备位置、用户设置152、设备身份160和用户身份164，将语音识别器状态168设置为非活动。例如，与音频水印134相对应的指令可以是如果用户身份164是鸡块世界标识符并且设备位于鸡块世界餐馆，则将语音识别器状态168设置为活动的。对于计算设备102，用户身份164不是鸡块世界标识符。因此，语音识别器状态168是非活动的。
在一些实施方式中，计算设备102的用户界面生成器148可以向计算设备的显示器提供图形界面的数据。图形界面可以指示在计算设备执行过程或动作时、之前或之后的计算设备102的过程或动作。例如，用户界面生成器148可以显示指示计算设备102正在处理接收到的音频、计算设备102正在标识音频水印134、语音识别器状态168和/或所标识的音频水印134的任何属性或规则的界面。
在一些实施方式中，用户界面生成器148可以生成指示语音识别器状态168是非活动的界面。该界面还可以包括用户可选选项来覆盖(override)语音识别器状态168。例如，用户154可以选择将语音识别器状态168设置为活动的选项。在听到查询112“鸡块中有什么”后，用户154可能会好奇并请求计算设备102处理查询112并提供输出。
在一些实施方式中，计算设备102可以包括音频水印日志170。音频水印日志170可以包括指示计算设备102已经接收到每个音频水印的次数的数据。例如，每当计算设备102接收并标识音频水印134时，计算设备102可以在音频水印日志170中存储指示音频水印134的接收的数据。数据可以包括时间戳、设备位置、任何相关用户设置、用户标识符和任何其他类似信息。在一些实施方式中，计算设备102可以将音频水印日志170的数据提供给服务器上的聚合音频水印日志，该聚合音频水印日志组合来自接收音频水印的不同计算设备的音频水印日志。聚合音频水印日志可以包括对于接收计算设备的用户身份、设备标识符和存储在音频水印日志170中的数据。在一些实施方式中，聚合音频水印日志和音频水印日志170中的数据可以同步。在这种情况下，音频水印日志170可以包括来自不同设备的附加日志数据以及标识不同设备、不同用户、位置信息、时间戳数据和其他相关信息的数据。
在一些实施方式中，用于特定音频水印的指令可以包括与存储在音频水印日志170中的数据相关的指令。指令可以涉及用特定音频水印标记的热词应该激活语音识别器的特定次数。例如，指令可以指示在24小时内，音频水印116应该只激活语音识别器166一次。
在一些实施方式中，音频设备106上的媒体内容的创建者可以访问聚合音频水印日志，以标识与热词110和对应音频水印116每次激活语音识别器相关的细节。在一些实施方式中，用户可以通过设备上的用户设置指示计算设备不将音频水印日志上传到聚合音频水印日志。
计算设备104以与处理音频水印134的计算设备102类似的方式处理音频水印138。具体地，计算设备104提取音频水印138并将音频水印138与鸡块世界水印相匹配。基于音频水印146中对于鸡块世界水印的指令，计算设备102可以对主音频136执行语音识别，并执行包括在对应转录中的任何查询或命令。指令可以包括计算设备104要遵循以确定是否执行语音识别的一组规则。
计算设备104包括位置检测器176。位置检测器176可以生成反映计算设备位置的地理位置数据。位置检测器176可以使用任何地理定位技术，例如，GPS、三角测量和/或任何其他类似的定位技术。在一些实施方式中，位置检测器176可以访问指示各种感兴趣点的位置的地图或位置数据。位置检测器176可以进一步标识计算设备104所在的兴趣点。例如，位置检测器176可以确定计算设备104位于鸡块世界处。
计算设备104包括设备标识符178。设备标识符178包括标识计算设备104的设备类型的设备身份180。设备身份180可以是台式计算机、膝上型计算机、平板计算机、可穿戴计算机、蜂窝电话、智能电话、音乐播放器、电子书阅读器、导航系统、智能扬声器和家庭助理或任何其他合适的计算设备。例如，计算设备104的设备身份180是台式计算机。
计算设备104包括用户标识符182。用户标识符182包括标识计算设备104的用户的用户身份184。用户身份184可以是电子邮件地址、电话号码或任何其他类似类型的唯一用户标识符。例如，计算设备108的用户身份184是store@nuggetworld.com。用户标识符182可以由用户输入。
计算设备104包括用户设置186。用户设置186可以由用户提供，并且可以包括对于计算设备104应该如何响应热词的附加规则。例如，用户设置186可以包括计算设备104不响应包括音频水印的任何热词除非计算设备104位于鸡块世界餐馆的规则。作为另一示例，用户设置186可以包括计算设备104不响应除了那些标记有来自鸡块世界的音频水印的热词之外的任何热词的规则。作为另一示例，用户设置186可以指示计算设备104在鸡块世界的开放时间之外不响应带有任何类型的音频水印的任何热词。
在图1所示的示例中，语音识别器172是活动的，如语音识别器状态174所示。计算设备104基于将存储在音频水印中的与音频水印138相对应的指令应用于设备位置、用户设置186、设备身份180和用户身份184，将语音识别器状态174设置为活动的。例如，与音频水印134相对应的指令可以是如果用户身份184是鸡块世界标识符并且设备位于鸡块世界餐馆，则将语音识别器状态174设置为活动的。对于计算设备104，用户身份184是鸡块世界标识符，并且位置在鸡块世界处。因此，语音识别器状态174是活动的。
语音识别器172对主音频136执行语音识别。语音识别器172生成转录“鸡块中有什么”。如果转录对应于查询，则计算设备104可以向搜索引擎提供转录。如果转录对应于命令，则计算设备可以执行命令。在图1的示例中，计算设备104向搜索引擎提供主音频136的转录。搜索引擎返回结果，并且计算设备104可以通过扬声器输出结果，扬声器可以是例如计算设备的扬声器，或者连接到计算设备的个人扬声器，诸如头戴式耳机(headphone)、耳机(earphone)、耳塞式耳机(earbud)等。经由个人扬声器输出结果可能是有用的，例如对于如果信息作为主音频的一部分输出，则当用户将无法听到该信息时，使信息被提供给用户是有用的。例如，在鸡块世界的示例中，计算设备104可以输出音频190“鸡块包含鸡肉”。在一些实施方式中，用户界面生成器150可以在计算设备104的显示器上显示搜索结果。这对于如果信息作为主音频的一部分输出或者经由与计算设备相关联的扬声器输出，则使信息被提供给可能无法听到信息的诸如听力受损的用户是尤其有用的。
在一些实施方式中，用户界面生成器150可以提供附加界面。图形界面可以指示在计算设备104执行过程或动作时、之前或之后的计算设备104的过程或动作。例如，用户界面生成器150可以显示指示计算设备104正在处理接收到的音频、计算设备104正在标识音频水印138、语音识别器状态174和/或所标识的音频水印138的任何属性或规则的界面。
在一些实施方式中，用户界面生成器150可以生成指示语音识别器状态174是活动的界面。该界面还可以包括用户可选选项来覆盖语音识别器状态174。例如，用户可以选择设置语音识别器状态174的选项来抑制与转录相关的任何动作。在一些实施方式中，用户界面生成器150可以生成基于最近接收到的覆盖和计算设备104的当前属性来更新用户设置186的界面。用户界面生成器148还可以在接收到覆盖命令后提供类似的界面。
在一些实施方式中，计算设备104可以包括音频水印日志188。音频水印日志188可以基于由计算设备104接收的音频水印来存储类似于音频水印日志170的数据。音频水印日志188可以以类似于音频水印日志170的方式与聚合音频水印日志交互。
在一些实施方式中，计算设备102和104可以不依赖存储在音频水印142和146中的规则，而分别对主音频134和138执行语音识别。音频水印142和146可以包括与部分基于转录执行主音频的动作相关的规则。
图2示出了用于当检测到记录的媒体中的热词时抑制热词触发的示例过程200。通常，过程200基于包括热词和水印的音频对与媒体内容相对应的音频执行语音识别。过程200将被描述为由包括一个或多个计算机(例如，图1所示的计算设备102或104)的计算机系统来执行。
系统接收与媒体内容项的回放相对应的音频(210)。在一些实施方式中，音频可以通过系统的麦克风来接收。音频可以对应于在电视机或收音机上播放的媒体内容的音频。
系统确定音频包括预定义热词的话语和音频水印(220)。在一些实施方式中，音频水印是音频的听不见的部分。例如，音频水印可以位于高于或低于人类听觉的频带的频带中。在一些实施方式中，音频水印是可听的，但是听起来类似于噪声。在一些实施方式中，音频水印与预定义热词的音频重叠。在一些实施方式中，系统确定音频包括预定义热词。响应于该确定，系统处理音频以确定音频是否包括音频水印。
系统将音频水印与一个或多个音频水印进行比较(230)。在一些实施方式中，系统可以将音频水印与音频水印数据库进行比较。数据库可以存储在系统上或不同的计算设备上。系统可以在时域和/或频域中比较音频水印的数字表示或音频水印的模拟表示。系统可以标识匹配音频水印，并根据数据库中对于所标识的音频水印指定的规则来处理音频。在一些实施方式中，系统可以标识音频水印的源或所有者。例如，源或所有者可能是实体鸡块世界。系统可以更新日志文件，以指示系统接收到带有鸡块世界音频水印的热词。
系统基于将音频水印与一个或多个音频水印进行比较，确定是否对随预定义热词之后的音频部分执行语音识别(240)。基于数据库中对于所标识的音频水印指定的规则、音频水印的源以及系统的上下文，系统确定是否对随预定义热词之后的音频执行语音识别。系统的上下文可以基于系统类型、系统位置和任何用户设置的任意组合。例如，该规则可以指定位于用户住所处的移动电话在从用户居住的公寓的管理公司接收到带有特定水印的热词时应该对音频执行语音识别。在一些实施方式中，系统基于音频水印与一个或多个水印的比较或者基于对音频水印进行分析来确定是否对随预定义热词之后的音频部分执行自然语言处理。该系统可以除语音识别之外或者代替语音识别而执行自然语言处理。
在系统确定执行语音识别的情况下，系统生成随热词之后的音频转录。系统执行转录中包括的命令，诸如为公寓楼会议添加日程表约会，或者向搜索引擎提交查询。系统可以通过系统的扬声器、或者在系统的显示器上、或者两者输出搜索结果。
在系统确定不执行语音识别的情况下，系统可以保持睡眠模式、待机模式或低能耗模式。系统在处理音频时可以处于睡眠模式、待机模式或低能耗模式，并且，如果系统不对音频执行语音识别，则可以保持睡眠模式、待机模式或低能耗模式。在一些实施方式中，在计算设备102接收音频118时，用户154可能正在使用计算设备102。例如，用户154可能正在听音乐或观看照片应用。在这种情况下，热词和音频水印处理可以在背景中发生，并且用户的活动可以是不间断的。在一些实施方式中，音频可以不包括音频水印。在这种情况下，系统可以在热词以后对音频执行语音识别，并执行音频中包括的任何命令或查询。
在一些实施方式中，系统可以确定音频的媒体内容的类型。系统可以将音频水印与包括在音频水印数据库中的音频水印进行比较。系统可以标识音频水印数据库中的匹配的音频水印，并且匹配的音频水印可以标识对于该特定音频水印的媒体内容的类型。系统可以将规则应用于所标识的类型的媒体内容。例如，音频水印数据库可以指示音频水印包括在销售媒体、定向媒体、商业媒体、政治媒体或任何其他类型的媒体中。在这种情况下，系统可以遵循媒体类型的一般规则。例如，规则可能是仅当系统位于住所处时才执行商业媒体的语音识别。规则也可以是特定于接收到的音频水印的规则。在一些实施方式中，系统还可以在音频水印日志中记录媒体内容的类型。
在一些实施方式中，系统可以分析音频水印。系统可以分析音频水印来代替比较音频水印与音频水印数据库，或者与比较音频水印与音频水印数据库相结合。音频水印可以编码动作、标识符、规则或任何其他类似的数据。系统可以解码音频水印并根据解码的音频水印处理音频。音频水印可以被编码为报头和有效载荷。系统可以标识报头，该报头可以是所有或几乎所有音频水印所共有的，或者可以标识特定的音频水印组。有效载荷可以在报头之后并编码动作、标识符、规则或其他类似数据。
系统可以应用编码在音频水印中的规则。例如，规则可以是如果系统是位于与存储在系统中的用户标识符相对应的位置的智能扬声器，则系统对随热词之后的音频部分执行语音识别。在这种情况下，系统可能不需要访问音频水印数据库。在一些实施方式中，系统可以将编码在音频水印中的规则添加到音频水印数据库中。
系统可以结合音频水印数据库使用编码在音频水印中的数据。例如，编码在音频水印中的数据可以指示音频是政治媒体内容。系统可以访问对应于音频水印的规则，并且该规则指定当系统位于用户住所中时，系统对包括政治媒体内容水印或商业媒体内容水印的音频执行语音识别。在这种情况下，音频水印可以包括报头或系统可以用来标识音频水印数据库中对应音频水印的其他部分。有效载荷可以编码媒体内容的类型或其他数据，诸如动作、标识符或规则。
图3示出了可以用于实施这里描述的技术的计算设备300和移动计算设备350的示例。计算设备300意图表示各种形式的数字计算机，诸如膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片服务器、大型主机和其他合适的计算机。移动计算设备350意图表示各种形式的移动设备，诸如个人数字助理、蜂窝电话、智能电话、无线(例如，蓝牙)耳机、助听器、智能手表、智能眼镜、活动跟踪器和其他类似的计算设备。这里所示的组件、它们的连接和关系以及它们的功能仅是示例，而不是意味着作为限制。
计算设备300包括处理器302、存储器304、存储设备306、连接到存储器304和多个高速扩展端口310的高速接口308、以及连接到低速扩展端口314和存储设备306的低速接口312。处理器302、存储器304、存储设备306、高速接口308、高速扩展端口310和低速接口312中的每一个都使用各种总线互连，并且可以安装在公共主板上或者以其他适当的方式安装。处理器302可以对用于在计算设备300内执行的指令进行处理，该指令包括存储在存储器304中或存储设备306上以显示用于外部输入/输出设备(诸如耦合到高速接口308的显示器316)上的GUI的图形信息的指令。在其他实施方式中，可以视情况使用多个处理器和/或多个总线，连同多个存储器以及多种类型的存储器。并且，可以连接多个计算设备，其中每个设备提供必要操作的一部分(例如，作为服务器组、刀片服务器群组、或者多处理器系统)。
存储器304存储计算设备300内的信息。在一些实施方式中，存储器304是一个或多个易失性存储器单元。在一些实施方式中，存储器304是一个或多个非易失性存储器单元。存储器304还可以是另一形式的计算机可读介质，诸如磁盘或光盘。
存储设备306能够提供用于计算设备300的大型存储。在一些实施方式中，存储设备306可以是计算机可读介质或包含计算机可读介质，诸如软盘设备、硬盘设备、光盘设备、或磁带设备、闪存或其他类似的固态存储器设备、或者设备阵列，包括在存储区域网络或其他配置中的设备。指令可以被存储在信息载体中。该指令当被一个或多个处理设备(例如处理器302)执行时执行诸如以上所描述的那些的一种或多种方法。该指令还可以由诸如计算机或机器可读介质的一个或多个存储设备(例如，存储器304、存储设备306、或者处理器302上的存储器)来存储。
高速接口308对计算设备300的带宽密集型操作进行管理，而低速控制器312对较低带宽密集型操作进行管理。这样的功能分配仅是示例性的。在一些实施方式中，高速接口308耦合到存储器304、显示器316(例如，通过图形处理器或加速器来耦合)，并且耦合到可以接受各种扩展卡(未示出)的高速扩展端口310。在该实施方式中，低速接口312耦合到存储设备306和低速扩展端口314。可以包括各种通信端口(例如，USB、蓝牙、以太网、无线以太网)的低速扩展端口314可以耦合到诸如键盘、指示设备、扫描仪、麦克风、扬声器的一个或多个输入/输出设备，或者例如通过网络适配器耦合到诸如交换机或路由器的联网设备。
如图所示，可以以多种不同形式来实施计算设备300。例如，计算设备300可以被实施为标准服务器320，或者多次被实施在这样的服务器的群组中。另外，计算设备300可以在诸如膝上型计算机322的个人计算机中实施。计算设备300也可以被实施为机架式服务器系统324的一部分。可替换地，来自计算设备300的组件可以与诸如移动计算设备350的移动设备(未示出)中的其他组件进行组合。这样的设备中的每一个可以包含计算设备300和移动计算设备350中的一个或多个，并且整个系统可以由相互通信的多个计算设备组成。
移动计算设备350包括处理器352、存储器364、诸如支持触摸的显示器354的输入/输出设备、通信接口366和收发器368，以及其他组件。移动计算设备350还可以提供有存储设备，诸如微驱动器或其他设备，以提供额外的存储。处理器352、存储器364、显示器354、通信接口366和收发器368中的每一个都使用各种总线互连，并且几个组件可以安装在公共主板上或者以其他适当的方式安装。
处理器352可以执行移动计算设备350内的指令，包括存储在存储器364中的指令。处理器352可以被实施为包括单独的和多个模拟和数字处理器的芯片的芯片组。例如，处理器352可以提供对移动计算设备350的其他组件的协调，诸如对用户接口、移动计算设备350所运行的应用、以及移动计算设备350所进行的无线通信的控制。
处理器352可以通过耦合到显示器354的控制接口358和显示接口356与用户进行通信。例如，显示器354可以是TFT(Thin-Film-Transistor Liquid Crystal Display，薄膜晶体管液晶显示器)显示器或OLED(Organic Light Emitting Diode，有机发光二极管)显示器或者其他适当的显示技术。显示接口356可以包括用于驱动显示器354以向用户呈现图形和其他信息的适当电路。控制接口358可以接收来自用户的命令并且对该命令进行转换以用于向处理器352提交。另外，可以提供与处理器352通信的外部接口362，以便使得移动计算设备350能够与其他设备进行近区域通信。例如，以太接口363在一些实施方式中可以提供有线通信，或者在其他实施方式中提供无线通信，并且还可以使用多个接口。
存储器364存储移动计算设备350内的信息。存储器364可以被实施为一个或多个计算机可读介质或媒体、一个或多个易失性存储器单元、或者一个或多个非易失性存储器单元。也可以提供扩展存储器374并通过扩展接口372连接至设备350，例如，该扩展接口可以包括SIMM(Single In Line Memory Module，单列直插内存模块)卡接口。扩展存储器374可以为移动计算设备350提供额外的存储空间，或者还可以存储用于移动计算设备350的应用和其他信息。具体地，扩展存储器374可以包括指令以执行或补充以上所描述的过程，并且还可以包括安全信息。因此，例如，扩展存储器374可以作为移动计算设备350的安全模块来提供，并且可以被编程有许可对移动计算设备350进行安全使用的指令。另外，安全应用连同附加信息可以经由SIMM卡来提供，诸如以不可非法侵入的方式在SIMM卡上设置标识信息。
如以下所讨论的，例如，存储器可以包括闪存和/或NVRAM存储器(non-volatilerandom access memory，非易失性随机存取存储器)。在一些实施方式中，指令被存储在信息载体中。该指令当被一个或多个处理设备(例如，处理器352)执行时，执行诸如以上所描述的那些方法中的一种或多种方法。该指令还能够被诸如一个或多个计算机可读或机器可读介质的一个或多个存储设备(例如，存储器364、扩展存储器374、或者处理器352上的存储器)所存储。在一些实施方式中，例如，该指令能够通过收发器368或外部接口362来以传播信号的方式被接收。
在必要的情况下，移动计算设备350可以通过通信接口366来无线地通信，该通信接口366可以包括数字信号处理电路。通信接口366可以提供在各种模式或协议下的通信，诸如GSM语音通话(Global System for Mobile communication，全球移动通信系统)、SMS(Short Message Service，短消息服务)、EMS(Enhanced Messaging Service，增强型消息服务)、或MMS消息(Multimedia Messaging Service，多媒体消息服务)、CDMA(codedivision multiple access，码分多址)、TDMA(time division multiple access，时分多址)、PDC(Personal Digital Cellular，个人数字蜂窝)、WCDMA(Wideband Code DivisionMultiple Access，宽带码分多址)、CDMA2000、或GPRS(General Packet Radio Service，通用分组无线电服务)、以及其他。例如，这样的通信可以通过收发器368使用射频来发生。另外，诸如使用蓝牙、WiFi、或其他这样的收发器(未示出)可以发生短距离通信。另外，GPS(全球定位系统)接收器模块370可以向移动计算设备350提供附加的导航相关和位置相关的无线数据，该无线数据可由在移动计算设备350上运行的应用视情况使用。
移动计算设备350还可以使用音频编解码器360可听地通信，该音频编解码器360可以从用户接收口头信息并将其转换成可用的数字信息。音频编解码器360同样可以诸如通过扬声器为用户生成可听声音，例如，在移动计算设备350的手机中。这种声音可以包括来自语音电话呼叫的声音，可以包括记录的声音(例如，语音消息、音乐文件等)并且还可以包括由在移动计算设备350上运行的应用生成的声音。
如图所示，移动计算设备350可以以多种不同的形式来实施。例如，移动计算设备350可以被实施为蜂窝电话380。移动计算设备350也可以被实施为智能电话382、个人数字助理或其他类似移动设备的一部分。
这里所描述的系统和技术的各种实施方式可以以数字电子电路、集成电路、专门设计的ASIC(application specific integrated circuit，专用集成电路)、计算机硬件、固件、软件、和/或以上的组合来实现。这些各种实施方式可以包括一个或多个计算机程序中的实施方式，该计算机程序可以在包括至少一个可编程处理器、至少一个输入设备和至少一个输出设备的可编程系统上执行和/或解释，该可编程处理器是专用或通用的，被耦合以从存储系统接收数据和指令以及向存储系统发送数据和指令。
这些计算机程序(也被称作程序、软件、软件应用、或代码)包括用于可编程处理器的机器指令，并且可以以高级程序语言和/或面向对象的编程语言、和/或汇编/机器语言来实施。如本文所使用的，术语机器可读介质和计算机可读介质是指被用来向可编程处理器提供机器指令和/或数据的任何计算机程序产品、装置和/或设备(例如，磁盘、光盘、存储器、可编程逻辑设备(Programmable Logic Device，PLD))，包括接收作为机器可读信号的机器指令的机器可读介质。术语机器可读信号是指用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供与用户的交互，这里所描述的系统和技术可在具有下述的计算机上实施：用于向用户显示信息的显示设备(例如，CRT(cathode ray tube，阴极射线管)或LCD(liquid crystal display，液晶显示器)监视器)，以及用户通过其可以向计算机提供输入的键盘和指示设备(例如，鼠标或轨迹球)。还可以使用其他类型的设备来提供与用户的交互；例如，提供给用户的反馈可以为任何形式的感官反馈(例如，视觉反馈、听觉反馈、或触觉反馈)；并且可以以任何形式来接收来自用户的输入，该形式包括声音、语音、或触觉输入。
这里所描述的系统和技术可以以计算系统来实施，该计算系统包括：后端组件(例如，作为数据服务器)，或者包括中间组件(例如，应用服务器)，或者包括前端组件(例如，具有用户通过其可以与这里所描述的系统和技术的实施方式进行交互的图形用户界面或Web浏览器的客户端计算机)，或者这样的后端、中间件、或前端组件的任何组合。该系统的组件可以通过任何形式或介质的数字数据通信(例如，通信网络)互连。通信网络的示例包括局域网(local area network，LAN)、广域网(wide area network，WAN)、和互联网。
计算系统能够包括客户端和服务器。客户端和服务器通常彼此远离并且典型地通过通信网络进行交互。客户端和服务器的关系借助在各自计算机上运行并且彼此具有客户端—服务器关系的计算机程序产生。
虽然上文中已经详细描述了一些实施方式，但是其他修改也是可能的。例如，虽然客户端应用被描述为访问(多个)委托，但是在其他实施方式中，(多个)委托可以被一个或多个处理器所实施的其他应用(诸如在一个或多个服务器上运行的应用)所采用。另外，在图中所描绘的逻辑流不需要所示出的特定顺序或连续顺序来实现所期望的结果。另外，可以提供其他动作，或者可以从所描述的流中消除动作，并且可以向所描述的系统添加其他组件或者从其去除其他组件。因此，其他实施方式在以下的权利要求书的范围之内。

Claims (40)

1.一种方法，包括：
在数据处理硬件处接收与媒体内容项目的回放相对应的音频数据，所述音频数据包括音频水印和由热词在前的命令的话语；
由数据处理硬件确定接收的音频数据包括热词；
由数据处理硬件处理音频数据，以：
识别包括在音频数据中的音频水印；以及
确定音频水印的相对应的比特流；以及
基于确定的音频水印的相对应的比特流，由数据处理硬件在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过执行由热词在前的命令。
2.根据权利要求1所述的方法，其中，所述音频水印由媒体内容项目的创建者添加到音频数据中。
3.根据权利要求1所述的方法，其中，处理所述音频数据以识别音频数据中的音频水印包括检测扩频整形类型的水印。
4.根据权利要求1所述的方法，其中，确定所述接收的音频数据包括热词，包括：
在不执行语音识别的情况下，计算指示音频数据包括热词的可能性的热词置信度得分；以及
确定热词置信度得分满足热词置信度得分阈值。
5.根据权利要求1所述的方法，其中：
所述数据处理硬件驻留在用户设备上；
当接收音频数据、确定接收的音频数据包括热词并处理音频数据时，用户设备处于睡眠模式、待机模式或低能耗模式之一；并且
在确定绕过执行由热词在前的命令之后，用户设备保持在睡眠模式、待机模式或低能耗模式之一。
6.如权利要求1所述的方法，其中，确定绕过执行所述由热字在前的命令包括绕过对接收的音频中与所述命令的话语相对应的一部分执行语音识别。
7.根据权利要求1所述的方法，还包括：
由数据处理硬件分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的源，
其中，确定绕过执行所述由热词在前的命令还基于与媒体内容项目的回放相对应的音频数据的源。
8.根据权利要求7所述的方法，还包括由数据处理硬件更新日志文件，以指示与媒体内容项目的回放相对应的音频数据的源。
9.根据权利要求1所述的方法，还包括：
由数据处理硬件分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的源，
其中，确定绕过执行所述由热词在前的命令还基于与媒体内容项目的回放相对应的音频数据的源。
10.根据权利要求1所述的方法，其中，所述音频水印被包括在包括热词的音频数据的一部分中。
11.一种系统，包括:
数据处理硬件；和
存储器硬件，与数据处理硬件通信并存储指令，当在数据处理硬件上执行时，所述指令使数据处理硬件执行操作，包括：
接收与媒体内容项目的回放相对应的音频数据，所述音频数据包括音频水印和由热词在前的命令的话语；
确定接收的音频数据包括热词；
处理音频数据，以：
识别包括在音频数据中的音频水印；以及
确定音频水印的相对应的比特流；以及
基于确定的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过执行由热词在前的命令。
12.根据权利要求11所述的系统，其中，所述音频水印由媒体内容项目的创建者添加到音频数据中。
13.根据权利要求11所述的系统，其中，处理所述音频数据以识别音频数据中的音频水印包括检测扩频整形类型的水印。
14.根据权利要求11所述的系统，其中，确定所述接收的音频数据包括热词，包括：
在不执行语音识别的情况下，计算指示音频数据包括热词的可能性的热词置信度得分；以及
确定热词置信度得分满足热词置信度得分阈值。
15.根据权利要求11所述的系统，其中：
所述数据处理硬件驻留在用户设备上；
当接收音频数据、确定接收的音频数据包括热词并处理音频数据时，用户设备处于睡眠模式、待机模式或低能耗模式之一；并且
在确定绕过执行由热词在前的命令之后，用户设备保持在睡眠模式、待机模式或低能耗模式之一。
16.如权利要求11所述的系统，其中，确定绕过执行所述由热字在前的命令包括绕过对接收的音频中与所述命令的话语相对应的一部分执行语音识别。
17.根据权利要求11所述的系统，其中，所述操作还包括：
分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的源，
其中，确定绕过执行所述由热词在前的命令还基于与媒体内容项目的回放相对应的音频数据的源。
18.根据权利要求17所述的系统，其中，所述操作还包括更新日志文件，以指示与媒体内容项目的回放相对应的音频数据的源。
19.根据权利要求11所述的系统，其中，所述操作还包括：
分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的源，
其中，确定绕过执行所述由热词在前的命令还基于与媒体内容项目的回放相对应的音频数据的源。
20.根据权利要求11所述的系统，其中，所述音频水印被包括在包括热词的音频数据的一部分中。
21.一种计算机实现的方法，当在用户设备的数据处理硬件上执行时，使数据处理硬件执行操作，包括：
当用户设备处于睡眠模式时，接收由用户设备的麦克风捕获的音频数据，所述音频数据与从用户设备附近的音频源输出的媒体内容项目的回放相对应；
当用户设备保持在睡眠模式时，处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流；以及
基于确定的编码在音频数据中的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过对音频数据执行语音识别。
22.根据权利要求21所述的计算机实现的方法，其中，所述音频数据包括由热词在前的命令的话语。
23.根据权利要求22所述的计算机实现的方法，其中，确定绕过对音频数据执行语音识别包括绕过对接收的音频数据中与所述命令的话语相对应的一部分执行语音识别。
24.根据权利要求22所述的计算机实现的方法，其中，所述音频水印被编码在包括热词的音频数据的一部分中。
25.根据权利要求22所述的计算机实现的方法，其中，所述操作还包括，在处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流之前，确定接收的音频数据包括热词。
26.根据权利要求25所述的计算机实现的方法，其中，确定所述接收的音频数据包括热词，包括：
在不执行语音识别的情况下，计算指示音频数据包括热词的可能性的热词置信度得分；以及
确定热词置信度得分满足热词置信度得分阈值。
27.根据权利要求21所述的计算机实现的方法，其中，当用户设备保持在睡眠状态时处理音频数据还包括处理音频数据以通过检测扩频整形类型的水印来识别编码在音频数据中的音频水印。
28.根据权利要求21所述的计算机实现的方法，其中，在确定绕过对音频数据执行语音识别之后，所述用户设备保持在睡眠模式。
29.根据权利要求21所述的计算机实现的方法，其中，所述操作还包括：
分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的音频源，
其中，确定绕过对所述音频数据执行语音识别还基于与媒体内容项目的回放相对应的音频数据的音频源。
30.根据权利要求9所述的计算机实现的方法，其中，所述操作还包括更新日志文件，以指示与媒体内容项目的回放相对应的音频数据的源。
31.一种用户设备，包括:
数据处理硬件；和
存储器硬件，与数据处理硬件通信并存储指令，当在数据处理硬件上执行时，所述指令使数据处理硬件执行操作，包括：
当用户设备处于睡眠模式时，接收由用户设备的麦克风捕获的音频数据，所述音频数据与从用户设备附近的音频源输出的媒体内容项目的回放相对应；
当用户设备保持在睡眠模式时，处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流；以及
基于确定的编码在音频数据中的音频水印的相对应的比特流，在不访问音频水印数据库来识别匹配音频水印的情况下，确定绕过对音频数据执行语音识别。
32.根据权利要求31所述的用户设备，其中，所述音频数据包括由热词在前的命令的话语。
33.根据权利要求32所述的用户设备，其中，确定绕过对音频数据执行语音识别包括绕过对接收的音频数据中与所述命令的话语相对应的一部分执行语音识别。
34.根据权利要求32所述的用户设备，其中，所述音频水印被编码在包括热词的音频数据的一部分中。
35.根据权利要求32所述的用户设备，其中，所述操作还包括，在处理音频数据以确定编码在音频数据中的音频水印的相对应的比特流之前，确定接收的音频数据包括热词。
36.根据权利要求35所述的用户设备，其中，确定所述接收的音频数据包括热词，包括：
在不执行语音识别的情况下，计算指示音频数据包括热词的可能性的热词置信度得分；以及
确定热词置信度得分满足热词置信度得分阈值。
37.根据权利要求31所述的用户设备，其中，当用户设备保持在睡眠状态时处理音频数据还包括处理音频数据以通过检测扩频整形类型的水印来识别编码在音频数据中的音频水印。
38.根据权利要求31所述的用户设备，其中，在确定绕过对音频数据执行语音识别之后，所述用户设备保持在睡眠模式。
39.根据权利要求31所述的用户设备，其中，所述操作还包括：
分析音频水印，以识别与媒体内容项目的回放相对应的音频数据的音频源，
其中，确定绕过对所述音频数据执行语音识别还基于与媒体内容项目的回放相对应的音频数据的音频源。
40.根据权利要求39所述的用户设备，其中，所述操作还包括更新日志文件，以指示与媒体内容项目的回放相对应的音频数据的音频源。
CN202310618091.4A 2017-06-05 2018-03-13 记录的媒体热词触发抑制 Pending CN116597836A (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US15/614,213 2017-06-05
US15/614,213 US10395650B2 (en) 2017-06-05 2017-06-05 Recorded media hotword trigger suppression
CN201880008785.3A CN110214351B (zh) 2017-06-05 2018-03-13 记录的媒体热词触发抑制
PCT/US2018/022101 WO2018226283A1 (en) 2017-06-05 2018-03-13 Recorded media hotword trigger suppression

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201880008785.3A Division CN110214351B (zh) 2017-06-05 2018-03-13 记录的媒体热词触发抑制

Publications (1)

Publication Number Publication Date
CN116597836A true CN116597836A (zh) 2023-08-15

Family

ID=61837845

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201880008785.3A Active CN110214351B (zh) 2017-06-05 2018-03-13 记录的媒体热词触发抑制
CN202310618091.4A Pending CN116597836A (zh) 2017-06-05 2018-03-13 记录的媒体热词触发抑制

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201880008785.3A Active CN110214351B (zh) 2017-06-05 2018-03-13 记录的媒体热词触发抑制

Country Status (6)

Country Link
US (3) US10395650B2 (zh)
EP (3) EP3430618B1 (zh)
JP (3) JP6750125B2 (zh)
KR (1) KR102296238B1 (zh)
CN (2) CN110214351B (zh)
WO (1) WO2018226283A1 (zh)

Families Citing this family (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9820039B2 (en) 2016-02-22 2017-11-14 Sonos, Inc. Default playback devices
US10264030B2 (en) 2016-02-22 2019-04-16 Sonos, Inc. Networked microphone device control
US10095470B2 (en) 2016-02-22 2018-10-09 Sonos, Inc. Audio response playback
US9811314B2 (en) 2016-02-22 2017-11-07 Sonos, Inc. Metadata exchange involving a networked playback system and a networked microphone system
US10134399B2 (en) 2016-07-15 2018-11-20 Sonos, Inc. Contextualization of voice inputs
US10115400B2 (en) 2016-08-05 2018-10-30 Sonos, Inc. Multiple voice services
US10347247B2 (en) 2016-12-30 2019-07-09 Google Llc Modulation of packetized audio signals
US10395650B2 (en) 2017-06-05 2019-08-27 Google Llc Recorded media hotword trigger suppression
US10475449B2 (en) 2017-08-07 2019-11-12 Sonos, Inc. Wake-word detection suppression
EP3668101B1 (en) * 2017-08-10 2024-03-20 Saturn Licensing, LLC Transmission device, transmission method, reception device, and reception method
US10048930B1 (en) 2017-09-08 2018-08-14 Sonos, Inc. Dynamic computation of system response volume
US11600270B2 (en) * 2017-09-15 2023-03-07 Saturn Licensing Llc Information processing apparatus and information processing method
US10482868B2 (en) 2017-09-28 2019-11-19 Sonos, Inc. Multi-channel acoustic echo cancellation
US10466962B2 (en) 2017-09-29 2019-11-05 Sonos, Inc. Media playback system with voice assistance
US10276175B1 (en) 2017-11-28 2019-04-30 Google Llc Key phrase detection with audio watermarking
CN108172224B (zh) * 2017-12-19 2019-08-27 浙江大学 基于机器学习的防御无声指令控制语音助手的方法
US11175880B2 (en) 2018-05-10 2021-11-16 Sonos, Inc. Systems and methods for voice-assisted media content selection
US10692496B2 (en) * 2018-05-22 2020-06-23 Google Llc Hotword suppression
US10959029B2 (en) 2018-05-25 2021-03-23 Sonos, Inc. Determining and adapting to changes in microphone performance of playback devices
US11076035B2 (en) 2018-08-28 2021-07-27 Sonos, Inc. Do not disturb feature for audio notifications
US11024331B2 (en) 2018-09-21 2021-06-01 Sonos, Inc. Voice detection optimization using sound metadata
US10811015B2 (en) * 2018-09-25 2020-10-20 Sonos, Inc. Voice detection optimization based on selected voice assistant service
US11100923B2 (en) 2018-09-28 2021-08-24 Sonos, Inc. Systems and methods for selective wake word detection using neural network models
US11089348B2 (en) * 2018-10-03 2021-08-10 At&T Intellectual Property I, L.P. Method and apparatus for determining the accuracy of targeted advertising
US11227310B2 (en) * 2018-10-16 2022-01-18 At&T Intellectual Property I, L.P. Method and apparatus for targeted advertising selection
US11210699B2 (en) * 2018-10-18 2021-12-28 At&T Intellectual Property I, L.P. Method and apparatus for targeted advertising
US11899519B2 (en) 2018-10-23 2024-02-13 Sonos, Inc. Multiple stage network microphone device with reduced power consumption and processing load
US11183183B2 (en) 2018-12-07 2021-11-23 Sonos, Inc. Systems and methods of operating media playback systems having multiple voice assistant services
US11132989B2 (en) 2018-12-13 2021-09-28 Sonos, Inc. Networked microphone devices, systems, and methods of localized arbitration
US11074914B2 (en) 2019-03-08 2021-07-27 Rovi Guides, Inc. Automated query detection in interactive content
US11011169B2 (en) 2019-03-08 2021-05-18 ROVl GUIDES, INC. Inaudible frequency transmission in interactive content
US11522619B2 (en) 2019-03-08 2022-12-06 Rovi Guides, Inc. Frequency pairing for device synchronization
US11120794B2 (en) 2019-05-03 2021-09-14 Sonos, Inc. Voice assistant persistence across multiple network microphone devices
US10956123B2 (en) 2019-05-08 2021-03-23 Rovi Guides, Inc. Device and query management system
US11189286B2 (en) 2019-10-22 2021-11-30 Sonos, Inc. VAS toggle based on device orientation
US20220406306A1 (en) * 2019-11-21 2022-12-22 Sony Group Corporation Information processing system, information processing device, information processing method, and program
US11200900B2 (en) 2019-12-20 2021-12-14 Sonos, Inc. Offline voice control
US11562740B2 (en) 2020-01-07 2023-01-24 Sonos, Inc. Voice verification for media playback
US11308958B2 (en) 2020-02-07 2022-04-19 Sonos, Inc. Localized wakeword verification
US11170793B2 (en) * 2020-02-13 2021-11-09 Adobe Inc. Secure audio watermarking based on neural networks
KR102348091B1 (ko) 2020-04-01 2022-01-10 한국원자력연구원 증기 발생기 사고 대처 시스템
RU2767962C2 (ru) 2020-04-13 2022-03-22 Общество С Ограниченной Ответственностью «Яндекс» Способ и система для распознавания воспроизведенного речевого фрагмента
US11482224B2 (en) 2020-05-20 2022-10-25 Sonos, Inc. Command keywords with input detection windowing
US11776549B2 (en) * 2020-11-06 2023-10-03 Google Llc Multi-factor audio watermarking
US11984123B2 (en) 2020-11-12 2024-05-14 Sonos, Inc. Network device interaction by range
CN112767917B (zh) * 2020-12-31 2022-05-17 科大讯飞股份有限公司 语音识别方法、装置及存储介质
US11483427B1 (en) * 2021-04-28 2022-10-25 Zoom Video Communications, Inc. Call recording authentication
US11915711B2 (en) 2021-07-20 2024-02-27 Direct Cursus Technology L.L.C Method and system for augmenting audio signals

Family Cites Families (147)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4363102A (en) 1981-03-27 1982-12-07 Bell Telephone Laboratories, Incorporated Speaker identification system using word recognition templates
JPS59180599A (ja) 1983-03-31 1984-10-13 日本電気ホームエレクトロニクス株式会社 車載用音声認識制御装置
JPS59170599A (ja) 1983-12-07 1984-09-26 Ishikawajima Harima Heavy Ind Co Ltd 低温液体用タンク
US5659665A (en) 1994-12-08 1997-08-19 Lucent Technologies Inc. Method and apparatus for including speech recognition capabilities in a computer system
JP3674990B2 (ja) 1995-08-21 2005-07-27 セイコーエプソン株式会社 音声認識対話装置および音声認識対話処理方法
US6023676A (en) 1996-12-12 2000-02-08 Dspc Israel, Ltd. Keyword recognition system and method
SE511418C2 (sv) 1997-03-13 1999-09-27 Telia Ab Metod för talarverifiering/identifiering via modellering av typiska icke-typiska egenskaper.
US6076055A (en) 1997-05-27 2000-06-13 Ameritech Speaker verification method
US5897616A (en) 1997-06-11 1999-04-27 International Business Machines Corporation Apparatus and methods for speaker verification/identification/classification employing non-acoustic and/or acoustic models and databases
JPH1152976A (ja) 1997-07-29 1999-02-26 Nec Home Electron Ltd 音声認識装置
JP3524370B2 (ja) 1998-02-19 2004-05-10 富士通テン株式会社 音声起動システム
US6141644A (en) 1998-09-04 2000-10-31 Matsushita Electric Industrial Co., Ltd. Speaker verification and speaker identification based on eigenvoices
US6744860B1 (en) 1998-12-31 2004-06-01 Bell Atlantic Network Services Methods and apparatus for initiating a voice-dialing operation
US6671672B1 (en) 1999-03-30 2003-12-30 Nuance Communications Voice authentication system having cognitive recall mechanism for password verification
US6408272B1 (en) 1999-04-12 2002-06-18 General Magic, Inc. Distributed voice user interface
JP3357629B2 (ja) 1999-04-26 2002-12-16 旭化成株式会社 設備制御システム
DE10015960C2 (de) 2000-03-30 2003-01-16 Micronas Munich Gmbh Spracherkennungsverfahren und Spracherkennungsvorrichtung
US6567775B1 (en) 2000-04-26 2003-05-20 International Business Machines Corporation Fusion of audio and video based speaker identification for multimedia information access
US6826159B1 (en) 2000-05-24 2004-11-30 Cisco Technology, Inc. System and method for providing speaker identification in a conference call
EP1168736A1 (en) 2000-06-30 2002-01-02 Alcatel Telecommunication system and method with a speech recognizer
US7016833B2 (en) 2000-11-21 2006-03-21 The Regents Of The University Of California Speaker verification system using acoustic data and non-acoustic data
US6973426B1 (en) 2000-12-29 2005-12-06 Cisco Technology, Inc. Method and apparatus for performing speaker verification based on speaker independent recognition of commands
US6701293B2 (en) 2001-06-13 2004-03-02 Intel Corporation Combining N-best lists from multiple speech recognizers
KR100552468B1 (ko) * 2001-07-19 2006-02-15 삼성전자주식회사 음성인식에 따른 오동작을 방지 및 음성인식율을 향상 할수 있는 전자기기 및 방법
JP4207445B2 (ja) 2002-03-28 2009-01-14 セイコーエプソン株式会社 付加情報埋め込み方法
JP4224250B2 (ja) 2002-04-17 2009-02-12 パイオニア株式会社 音声認識装置、音声認識方法および音声認識プログラム
US20030231746A1 (en) 2002-06-14 2003-12-18 Hunter Karla Rae Teleconference speaker identification
TW200409525A (en) 2002-11-26 2004-06-01 Lite On Technology Corp Voice identification method for cellular phone and cellular phone with voiceprint password
EP1429314A1 (en) 2002-12-13 2004-06-16 Sony International (Europe) GmbH Correction of energy as input feature for speech processing
US7222072B2 (en) 2003-02-13 2007-05-22 Sbc Properties, L.P. Bio-phonetic multi-phrase speaker identity verification
US8290603B1 (en) 2004-06-05 2012-10-16 Sonos, Inc. User interfaces for controlling and manipulating groupings in a multi-zone media system
US7571014B1 (en) 2004-04-01 2009-08-04 Sonos, Inc. Method and apparatus for controlling multimedia players in a multi-zone system
US20070198262A1 (en) 2003-08-20 2007-08-23 Mindlin Bernardo G Topological voiceprints for speaker identification
US20050165607A1 (en) 2004-01-22 2005-07-28 At&T Corp. System and method to disambiguate and clarify user intention in a spoken dialog system
JP2005338454A (ja) 2004-05-27 2005-12-08 Toshiba Tec Corp 音声対話装置
US8214447B2 (en) 2004-06-08 2012-07-03 Bose Corporation Managing an audio network
US7720012B1 (en) 2004-07-09 2010-05-18 Arrowhead Center, Inc. Speaker identification in the presence of packet losses
US8412521B2 (en) 2004-08-20 2013-04-02 Multimodal Technologies, Llc Discriminative training of document transcription system
US8521529B2 (en) 2004-10-18 2013-08-27 Creative Technology Ltd Method for segmenting audio signals
KR100679043B1 (ko) 2005-02-15 2007-02-05 삼성전자주식회사 음성 대화 인터페이스 장치 및 방법
US8041570B2 (en) 2005-05-31 2011-10-18 Robert Bosch Corporation Dialogue management using scripts
US8709018B2 (en) 2005-09-16 2014-04-29 Applied Medical Technology, Inc. Non-balloon low profile feed device with insertion/removal tool
US7603275B2 (en) 2005-10-31 2009-10-13 Hitachi, Ltd. System, method and computer program product for verifying an identity using voiced to unvoiced classifiers
KR100711094B1 (ko) 2005-11-29 2007-04-27 삼성전자주식회사 분산 통신 환경에서의 이동체들 간의 자원 할당 방법
JP2006227634A (ja) 2006-03-29 2006-08-31 Seiko Epson Corp 音声認識を用いた機器制御方法および音声認識を用いた機器制御システムならびに音声認識を用いた機器制御プログラムを記録した記録媒体
CN1996847B (zh) 2006-12-27 2010-05-19 中国科学院上海技术物理研究所 基于协作网格的图像及多媒体数据通信与存储系统
US8099288B2 (en) 2007-02-12 2012-01-17 Microsoft Corp. Text-dependent speaker verification
US8838457B2 (en) 2007-03-07 2014-09-16 Vlingo Corporation Using results of unstructured language model based speech recognition to control a system-level function of a mobile communications facility
US20110060587A1 (en) 2007-03-07 2011-03-10 Phillips Michael S Command and control utilizing ancillary information in a mobile voice-to-speech application
US20080252595A1 (en) 2007-04-11 2008-10-16 Marc Boillot Method and Device for Virtual Navigation and Voice Processing
US8503686B2 (en) 2007-05-25 2013-08-06 Aliphcom Vibration sensor and acoustic voice activity detection system (VADS) for use with electronic systems
US8385233B2 (en) 2007-06-12 2013-02-26 Microsoft Corporation Active speaker identification
GB2450886B (en) 2007-07-10 2009-12-16 Motorola Inc Voice activity detector and a method of operation
US8528033B2 (en) * 2007-10-22 2013-09-03 At&T Intellectual Property I, L.P. Method and system for providing subscription data
GB2458461A (en) 2008-03-17 2009-09-23 Kai Yu Spoken language learning system
US8504365B2 (en) 2008-04-11 2013-08-06 At&T Intellectual Property I, L.P. System and method for detecting synthetic speaker verification
US8805689B2 (en) * 2008-04-11 2014-08-12 The Nielsen Company (Us), Llc Methods and apparatus to generate and use content-aware watermarks
US8145482B2 (en) 2008-05-25 2012-03-27 Ezra Daya Enhancing analysis of test key phrases from acoustic sources with key phrase training models
KR101056511B1 (ko) 2008-05-28 2011-08-11 (주)파워보이스 실시간 호출명령어 인식을 이용한 잡음환경에서의음성구간검출과 연속음성인식 시스템
GB2463231B (en) 2008-09-01 2012-05-30 Sony Corp Audio watermarking apparatus and method
US8676586B2 (en) 2008-09-16 2014-03-18 Nice Systems Ltd Method and apparatus for interaction or discourse analytics
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9922640B2 (en) 2008-10-17 2018-03-20 Ashwin P Rao System and method for multimodal utterance detection
KR101519104B1 (ko) 2008-10-30 2015-05-11 삼성전자 주식회사 목적음 검출 장치 및 방법
US20110066437A1 (en) * 2009-01-26 2011-03-17 Robert Luff Methods and apparatus to monitor media exposure using content-aware watermarks
US8326637B2 (en) 2009-02-20 2012-12-04 Voicebox Technologies, Inc. System and method for processing multi-modal device interactions in a natural language voice services environment
US8209174B2 (en) 2009-04-17 2012-06-26 Saudi Arabian Oil Company Speaker verification system
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
CN101923853B (zh) 2009-06-12 2013-01-23 华为技术有限公司 说话人识别方法、设备和系统
US8819172B2 (en) * 2010-11-04 2014-08-26 Digimarc Corporation Smartphone-based methods and systems
US8311838B2 (en) 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US8626511B2 (en) 2010-01-22 2014-01-07 Google Inc. Multi-dimensional disambiguation of voice commands
KR101672212B1 (ko) 2010-06-15 2016-11-04 엘지전자 주식회사 휴대 단말기 및 그 동작 방법
US8719018B2 (en) 2010-10-25 2014-05-06 Lockheed Martin Corporation Biometric speaker identification
EP2494545A4 (en) 2010-12-24 2012-11-21 Huawei Tech Co Ltd METHOD AND DEVICE FOR DETECTING LANGUAGE ACTIVITIES
US9294869B2 (en) * 2013-03-13 2016-03-22 Aliphcom Methods, systems and apparatus to affect RF transmission from a non-linked wireless client
US9159324B2 (en) 2011-07-01 2015-10-13 Qualcomm Incorporated Identifying people that are proximate to a mobile device user via social graphs, speech models, and user context
WO2013012112A1 (ko) * 2011-07-21 2013-01-24 엘지전자 주식회사 쿠폰 검색을 수행하는 전자 기기 및 소셜 커머스 서버
US8660847B2 (en) 2011-09-02 2014-02-25 Microsoft Corporation Integrated local and cloud based speech recognition
EP2758956B1 (en) * 2011-09-23 2021-03-10 Digimarc Corporation Context-based smartphone sensor logic
US8340975B1 (en) 2011-10-04 2012-12-25 Theodore Alfred Rosenberger Interactive speech recognition device and system for hands-free building control
US9031847B2 (en) 2011-11-15 2015-05-12 Microsoft Technology Licensing, Llc Voice-controlled camera operations
EP2783365B1 (en) 2011-11-21 2018-02-21 Robert Bosch GmbH Method and system for adapting grammars in hybrid speech recognition engines for enhancing local speech recognition performance
US8825020B2 (en) 2012-01-12 2014-09-02 Sensory, Incorporated Information access and device control using mobile phones and audio in the home environment
US9536528B2 (en) 2012-07-03 2017-01-03 Google Inc. Determining hotword suitability
JP6131537B2 (ja) 2012-07-04 2017-05-24 セイコーエプソン株式会社 音声認識システム、音声認識プログラム、記録媒体及び音声認識方法
TWI474317B (zh) 2012-07-06 2015-02-21 Realtek Semiconductor Corp 訊號處理裝置以及訊號處理方法
US8983836B2 (en) 2012-09-26 2015-03-17 International Business Machines Corporation Captioning using socially derived acoustic profiles
US9401153B2 (en) * 2012-10-15 2016-07-26 Digimarc Corporation Multi-mode audio recognition and auxiliary data encoding and decoding
US9305559B2 (en) 2012-10-15 2016-04-05 Digimarc Corporation Audio watermark encoding with reversing polarity and pairwise embedding
US8996372B1 (en) 2012-10-30 2015-03-31 Amazon Technologies, Inc. Using adaptation data with cloud-based speech recognition
SG11201502432UA (en) * 2012-11-30 2015-05-28 Hitachi Maxell Picture display device, and setting modification method and setting modification program therefor
WO2014103099A1 (ja) * 2012-12-28 2014-07-03 パナソニック株式会社 音声認識付き機器及び音声認識方法
FR3000632A1 (fr) * 2012-12-28 2014-07-04 Thomson Licensing Procede d'affichage de donnees dans un reseau et dispositif mobile associe
US9530409B2 (en) * 2013-01-23 2016-12-27 Blackberry Limited Event-triggered hands-free multitasking for media playback
EP4236281A3 (en) * 2013-01-23 2023-10-11 BlackBerry Limited Event-triggered hands-free multitasking for media playback
US9349386B2 (en) 2013-03-07 2016-05-24 Analog Device Global System and method for processor wake-up based on sensor data
US9171450B2 (en) * 2013-03-08 2015-10-27 Qualcomm Incorporated Emergency handling system using informative alarm sound
US9093064B2 (en) * 2013-03-11 2015-07-28 The Nielsen Company (Us), Llc Down-mixing compensation for audio watermarking
US9384754B2 (en) * 2013-03-12 2016-07-05 Comcast Cable Communications, Llc Removal of audio noise
US9361885B2 (en) 2013-03-12 2016-06-07 Nuance Communications, Inc. Methods and apparatus for detecting a voice command
US9312826B2 (en) 2013-03-13 2016-04-12 Kopin Corporation Apparatuses and methods for acoustic channel auto-balancing during multi-channel signal extraction
US8768687B1 (en) 2013-04-29 2014-07-01 Google Inc. Machine translation of indirect speech
US9679053B2 (en) * 2013-05-20 2017-06-13 The Nielsen Company (Us), Llc Detecting media watermarks in magnetic field data
US9285886B2 (en) * 2013-06-24 2016-03-15 Sonos, Inc. Intelligent amplifier activation
WO2015025330A1 (en) 2013-08-21 2015-02-26 Kale Aaditya Kishore A system to enable user to interact with an electronic processing device using voice of the user
US9286943B2 (en) * 2013-08-23 2016-03-15 International Business Machines Corporation Enhancing karaoke systems utilizing audience sentiment feedback and audio watermarking
US9865255B2 (en) 2013-08-29 2018-01-09 Panasonic Intellectual Property Corporation Of America Speech recognition method and speech recognition apparatus
US8775191B1 (en) 2013-11-13 2014-07-08 Google Inc. Efficient utterance-specific endpointer triggering for always-on hotwording
US9373321B2 (en) 2013-12-02 2016-06-21 Cypress Semiconductor Corporation Generation of wake-up words
US8918326B1 (en) * 2013-12-05 2014-12-23 The Telos Alliance Feedback and simulation regarding detectability of a watermark message
WO2015100430A1 (en) * 2013-12-24 2015-07-02 Digimarc Corporation Methods and system for cue detection from audio input, low-power data processing and related arrangements
US8938394B1 (en) 2014-01-09 2015-01-20 Google Inc. Audio triggers based on context
CN104978968A (zh) 2014-04-11 2015-10-14 鸿富锦精密工业（深圳）有限公司 水印加载装置及水印加载的方法
US10770075B2 (en) * 2014-04-21 2020-09-08 Qualcomm Incorporated Method and apparatus for activating application by speech input
CN104023247B (zh) * 2014-05-29 2015-07-29 腾讯科技（深圳）有限公司 获取、推送信息的方法和装置以及信息交互系统
US9357320B2 (en) 2014-06-24 2016-05-31 Harmon International Industries, Inc. Headphone listening apparatus
KR102208477B1 (ko) * 2014-06-30 2021-01-27 삼성전자주식회사 마이크 운용 방법 및 이를 지원하는 전자 장치
US9368124B2 (en) 2014-08-12 2016-06-14 Tata Consultancy Services Ltd. Computer implemented system for audio watermarking
US9548053B1 (en) 2014-09-19 2017-01-17 Amazon Technologies, Inc. Audible command filtering
US9424841B2 (en) 2014-10-09 2016-08-23 Google Inc. Hotword detection on multiple devices
US9318107B1 (en) 2014-10-09 2016-04-19 Google Inc. Hotword detection on multiple devices
KR20160043267A (ko) 2014-10-13 2016-04-21 한국전자통신연구원 음향 채널 왜곡에 강인한 워터마크 전송 장치 및 방법
KR102299330B1 (ko) * 2014-11-26 2021-09-08 삼성전자주식회사 음성 인식 방법 및 그 전자 장치
US9418395B1 (en) * 2014-12-31 2016-08-16 The Nielsen Company (Us), Llc Power efficient detection of watermarks in media signals
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10153113B2 (en) * 2015-08-31 2018-12-11 Deako, Inc. Systems and methods for occupancy prediction
US9875081B2 (en) 2015-09-21 2018-01-23 Amazon Technologies, Inc. Device selection for providing a response
US9928840B2 (en) * 2015-10-16 2018-03-27 Google Llc Hotword recognition
US9747926B2 (en) * 2015-10-16 2017-08-29 Google Inc. Hotword recognition
CN107016999B (zh) * 2015-10-16 2022-06-14 谷歌有限责任公司 热词识别
KR20170046958A (ko) * 2015-10-22 2017-05-04 삼성전자주식회사 전자 장치 및 그의 음성 인식을 이용한 기능 실행 방법
US20180254042A1 (en) * 2015-10-23 2018-09-06 Samsung Electronics Co., Ltd. Electronic device and control method therefor
US10028023B2 (en) * 2016-01-20 2018-07-17 Google Llc Methods and systems for automatic media output based on user proximity
TWI633425B (zh) * 2016-03-02 2018-08-21 美律實業股份有限公司 麥克風裝置
TWI584270B (zh) * 2016-06-15 2017-05-21 瑞昱半導體股份有限公司 語音控制系統及其方法
US10332513B1 (en) * 2016-06-27 2019-06-25 Amazon Technologies, Inc. Voice enablement and disablement of speech processing functionality
KR102241970B1 (ko) * 2016-11-07 2021-04-20 구글 엘엘씨 기록된 미디어 핫워드 트리거 억제
US10079015B1 (en) * 2016-12-06 2018-09-18 Amazon Technologies, Inc. Multi-layer keyword detection
US10559309B2 (en) * 2016-12-22 2020-02-11 Google Llc Collaborative voice controlled devices
US10902001B1 (en) * 2017-02-27 2021-01-26 Amazon Technologies, Inc. Contact presence aggregator
US10074371B1 (en) * 2017-03-14 2018-09-11 Amazon Technologies, Inc. Voice control of remote device by disabling wakeword detection
US10102855B1 (en) * 2017-03-30 2018-10-16 Amazon Technologies, Inc. Embedded instructions for voice user interface
US10170112B2 (en) 2017-05-11 2019-01-01 Google Llc Detecting and suppressing voice queries
US10242680B2 (en) * 2017-06-02 2019-03-26 The Nielsen Company (Us), Llc Methods and apparatus to inspect characteristics of multichannel audio
US10395650B2 (en) 2017-06-05 2019-08-27 Google Llc Recorded media hotword trigger suppression
JP7202214B2 (ja) 2019-02-26 2023-01-11 ヤンマーパワーテクノロジー株式会社 自動走行システム

Also Published As

Publication number Publication date
EP3723083A1 (en) 2020-10-14
US10395650B2 (en) 2019-08-27
US11244674B2 (en) 2022-02-08
KR20190103308A (ko) 2019-09-04
JP2020511682A (ja) 2020-04-16
US20200035232A1 (en) 2020-01-30
EP4220629A1 (en) 2023-08-02
EP3430618A1 (en) 2019-01-23
EP3430618B1 (en) 2020-07-15
EP3723083B1 (en) 2023-05-10
CN110214351B (zh) 2023-05-30
JP7114660B2 (ja) 2022-08-08
CN110214351A (zh) 2019-09-06
KR102296238B1 (ko) 2021-08-31
JP2022136197A (ja) 2022-09-15
JP2020190752A (ja) 2020-11-26
JP7461416B2 (ja) 2024-04-03
JP6750125B2 (ja) 2020-09-02
US20180350356A1 (en) 2018-12-06
US11798543B2 (en) 2023-10-24
US20220139387A1 (en) 2022-05-05
WO2018226283A1 (en) 2018-12-13

Similar Documents

Publication Publication Date Title
CN110214351B (zh) 记录的媒体热词触发抑制
US11967323B2 (en) Hotword suppression
US11893995B2 (en) Generating additional synthesized voice output based on prior utterance and synthesized voice output provided in response to the prior utterance
KR102449760B1 (ko) 음성 쿼리들 검출 및 억제
CN118016067A (zh) 多设备上的热词检测
JP2020500331A (ja) 記録されたメディアホットワードトリガ抑制

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination