CN105745615B - 用于移动设备的始终进行的音频控制 - Google Patents

用于移动设备的始终进行的音频控制 Download PDF

Info

Publication number
CN105745615B
CN105745615B CN201480061595.XA CN201480061595A CN105745615B CN 105745615 B CN105745615 B CN 105745615B CN 201480061595 A CN201480061595 A CN 201480061595A CN 105745615 B CN105745615 B CN 105745615B
Authority
CN
China
Prior art keywords
audio
memory
sample
memory controller
circuit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201480061595.XA
Other languages
English (en)
Other versions
CN105745615A (zh
Inventor
T·J·米利特
M·古拉蒂
M·F·卡波特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Computer Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Computer Inc filed Critical Apple Computer Inc
Publication of CN105745615A publication Critical patent/CN105745615A/zh
Application granted granted Critical
Publication of CN105745615B publication Critical patent/CN105745615B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3206—Monitoring of events, devices or parameters that trigger a change in power modality
    • G06F1/3228—Monitoring task completion, e.g. by use of idle timers, stop commands or wait commands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/26—Power supply means, e.g. regulation thereof
    • G06F1/32—Means for saving power
    • G06F1/3203—Power management, i.e. event-based initiation of a power-saving mode
    • G06F1/3234—Power saving characterised by the action undertaken
    • G06F1/3287—Power saving characterised by the action undertaken by switching off individual functional units in the computer system
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)
  • Power Sources (AREA)
  • Stored Programmes (AREA)
  • Artificial Intelligence (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

在一个实施方案中，集成电路可包括一个或多个CPU、存储器控制器以及被配置为当SOC的其余部分断电时保持上电的电路。该电路可被配置为从麦克风接收音频样本，并且将这些音频样本与预先确定的图案进行匹配，以检测来自包括SOC的设备的用户的可能的命令。响应于检测到预先确定的图案，该电路可使得存储器控制器上电，使得音频样本可被存储在存储器控制器耦接到的存储器中。该电路也可使得CPU上电并且被初始化，并且操作系统(OS)可启动。在CPU正在初始化并且OS正在启动的时间期间，该电路和存储器可正在捕获音频样本。

Description

用于移动设备的始终进行的音频控制
技术领域
本发明涉及移动设备领域，并且更具体地涉及移动设备的语音/音频控制。
背景技术
移动设备已变得无所不在。移动设备可包括被设计成在便携式电源(例如，电池)上操作并且用户容易携带的任何电子设备。移动设备可包括移动电话、“智能”电话、个人数字助理(PDA)(诸如iTouchTM)、娱乐设备(诸如iPodTM和MP3播放器)、膝上型计算机、网络计算机、平板设备(诸如iPadTM和基于的平板电脑)等。这些设备中的大多数设备包括无线连接(例如，WiFi、蜂窝连接等)，因此除了提供可直接在设备上运行的各种本地应用程序之外还可用作信息源。
移动设备可通过用户界面来进行控制，诸如各种指向设备(例如，鼠标、触摸板等)、为设备的一部分或连接到设备的触摸屏、键盘等。最近，语音控制已开始变得更加普遍。例如，Apple的i-设备(iPhoneTM、iPadTM等)中的一些i-设备已经由Siri应用程序而采用语音控制。用户可拿起设备、按住按钮、并且等待Siri响应。当Siri响应时，用户可口头地问问题或提供命令，Siri将解释该问题或命令并试图满足。按住按钮直到Siri响应的动作用于唤醒设备(如果其处于空闲状态)、对操作系统进行初始化以及激活Siri应用程序使其准备好接受输入。
一些移动设备已开始在设备处于空闲时实现有限的语音命令激活功能。如果设备呈现给用户是“关闭的”(即使用户知道设备是打开的，因为其可接受电子通信诸如电子邮件、电话呼叫或者文本消息)，则设备可为空闲的。空闲状态通常不使显示屏打开，并且许多内部部件可断电并且需要被初始化以用于设备的全功能。在具有有限语音命令激活功能的移动设备中，用户可说出关键字词或短语以使得设备“打开”并接受进一步的语音控制。例如，一个此类短语是用于Android智能手机的“嗨，谷歌即时资讯”。
利用该有限的命令激活，用户在发出关键短语之后必须停止并且等待该设备准备好用于进一步的输入的视觉指示和/或音频指示。在设备空闲时，设备具有打开的麦克风并且利用离散数字信号处理器(DSP)来监听关键字词/短语。一旦关键字词/短语已被识别，DSP可发信号通知设备的其余部分进行初始化(或者启动)并且在准备好时对用户进行响应。发出关键字词/短语与然后发出期望的问题/命令之间的延迟使得该界面不实用。因此，有限的命令激活相对于上面所述的拿起设备并按压/保持按钮仅是很小的改善。
发明内容
在一个实施方案中，集成电路(例如，片上系统或SOC)可包括一个或多个中央处理单元(CPU)、存储器控制器以及被配置为在SOC的其余部分断电时保持上电的电路。该电路可被配置为接收与由麦克风感测到的声音对应的音频样本，并且被进一步配置为将这些音频样本与预先确定的图案匹配，以检测来自包括该SOC的设备的用户的可能的命令。例如，预先确定的图案可表示发出关键字词或短语的用户的语音。响应于在这些样本中检测到预先确定的图案，该电路使得存储器控制器上电，使得音频样本可被存储在存储器控制器耦接到的存储器中。该电路可被配置为继续缓冲样本直到存储器控制器被初始化，并且然后可将样本写入到存储器。该电路还可使得CPU上电并被初始化，并且操作系统(OS)可启动。在CPU正在初始化并且OS正在启动的时间期间，该电路和存储器可正在捕获音频样本。OS(或者运行在OS上的应用程序)可处理来自存储器的样本以确定命令/请求。
在一个实施方案中，捕获存储器中的样本可允许以其他方式捕获不被记录的样本。因此，用户可说出期望的命令/问题，而无需等待设备指示其准备好输入，并且命令/问题可由在CPU上执行的软件准确地处理。设备的界面可因此更加简单并且更加自然，因此用户可更加倾向于使用设备的语音命令特征。
附图说明
现在对附图进行简要说明，下面的具体说明将参照附图进行描述。
图1是设备的一个实施方案的框图。
图2是示出了图1所示的音频滤波电路的一个实施方案的操作的流程图。
图3是示出了存储器控制器和音频滤波电路的初始化的一个实施方案的流程图。
图4是示出了图1所示的设备的一个实施方案的操作的时序图。
尽管本发明易受各种修改形式和替代形式的影响，但附图中以举例的方式示出了其具体实施方案并将在本文中详细描述。然而，应当理解，附图以及对该附图的详细描述并非旨在将本发明限制于所公开的特定形式，而正相反，其目的在于覆盖落在由所附权利要求所限定的本发明的实质和范围内的所有修改形式、等同形式和替代形式。本文所使用的标题仅用于组织的目的，并非意在用于限制说明书的范围。如在整个专利申请中所使用的那样，以允许的意义(即，意味着具有可能性)而不是强制的意义(即，意味着必须)来使用字词“可能”。类似地，字词“包括”(“include”，“including”，和“includes”)是指包括但不限于。
各种单元、电路或其他部件可被描述为“被配置为”执行一项或多项任务。在此类上下文中，“被配置为”是对通常意味着“具有”在操作期间执行这一项或多项任务的“电路”的结构的宽泛表述。如此，单元/电路/部件可被配置为即使在单元/电路/部件当前未接通时也执行该任务。一般来讲，形成与“被配置为”对应的结构的电路可包括硬件电路和/或存储可执行以实现该操作的程序指令的存储器。存储器可包括易失性存储器(诸如静态随机存取存储器或动态随机存取存储器)和/或非易失性存储器(诸如光学存储装置或磁盘存储装置、闪存存储器、可编程只读存储器等)。类似地，为了描述中的方便，可将各种单元/电路/部件描述为执行一项或多项任务。此类描述应当被解释成包括短语“被配置为”。详述被配置为执行一项或多项任务的单元/电流/组件意在明确地不援引35U.S.C.§112，第六段对该单元/电路/组件的的解释。
本说明书包括参考“一个实施方案”(“one embodiment”或“an embodiment”)。短语“在一个实施方案中”或“在实施方案中”的出现不一定指相同的实施方案，尽管通常设想包括特征的任何组合的实施方案，除非在此明确地否认。特定特征、结构或特性可以与本公开一致的任何适当的方式结合。
具体实施方式
现在转向图1，其示出了设备5的一个实施方案的框图。在所示实施方案中，设备5可包括集成电路(IC)10，在该示例中该集成电路(IC)10可为SOC。SOC 10可耦接到存储器12、外部音频编码器/解码器(编解码器)16以及电源管理单元(PMU)20。音频编解码器16可耦接到统称为传感器26的一个或多个音频传感器。例如，音频编解码器16可耦接到一个或多个麦克风(mic)26A-26B和一个或多个扬声器(spkr)26C-26D。
正如其名称所暗示的，SOC 10的部件可被集成到单个半导体基板上作为集成电路“芯片”。在一些实施方案中，部件可在系统中的两个或更多个芯片上实现。另外，各种部件可集成在任何集成电路上(即，它不一定是SOC)。然而，SOC 10在本文将被用作示例。在所示的实施方案中，SOC 10的部件包括中央处理单元(CPU)复合体14、外围部件18A-18B(更简单地，“外围设备”)、存储器控制器22、音频滤波电路24、电源管理电路(PMGR)28以及通信构造27。部件14、18A-18B、22、24和28可全部耦接到通信构造27。存储器控制器22在使用期间可耦接到存储器12。类似地，外围设备18A可为在使用期间耦接到音频编解码器16的接口单元(IFU)，音频编解码器16在使用期间被进一步耦接到音频传感器26。
设备5可为任何类型的便携式电子设备，诸如移动电话、智能电话、PDA、膝上型计算机、网络计算机、平板设备、娱乐设备等。在一些实施方案中，设备5可为非便携式电子设备，诸如台式计算机。此类非便携式设备也可得益于本文所述的音频设备控制特征。
在设备5为空闲的时间期间，SOC 10的部分可断电。具体地，PMGR 28的一部分、CPU复合体14、存储器控制器22、外围设备18B以及互连件27可断电。如果设备5是空闲的但是不完全断电，则在另一方面，音频滤波电路24可保持上电，IFU 18A可如此。当设备5空闲时，在SOC 10外部的部件可根据需要上电或断电。具体地，存储器12可保持上电，因此能够保留存储于其中的数据。在其中存储器12是各种类型中的一种类型的DRAM的实施方案中，存储器12可被放置在自刷新模式中，以在设备5空闲的时间期间保留所存储的数据。
在空闲时间期间，音频滤波电路24可被配置为通过IFU 18A从音频编解码器16接收音频样本，并且可尝试在样本中检测预先确定的图案(例如，用于唤醒设备5以便服务由用户发出的命令或请求的关键字词/短语)。预先确定的图案可被编程到音频滤波电路24中或者可被硬编码在音频滤波电路24中。在实施方案中，预先确定的图案可从口头发出关键字词/短语的用户捕获，训练设备5以实现用户的特定语音。在另一个实施方案中，预先确定的图案可为表示利用多种转调、声调等说出的关键字词/短语的通用图案。
响应于检测到该图案，音频滤波器24可被配置为使得存储器控制器被上电并被初始化(使得匹配样本并且下面的样本可被存储在存储器中)，并且还可被配置为使得CPU复合体14被上电以启动操作系统(以及SOC 10的潜在的其他部分，这依赖于该具体实施)。在实施方案中，存储器控制器22可相对快速地上电。用于存储器控制器22的锁相环路可被锁定，并且存储器控制器22可被初始化并具有比操作系统的启动更短的完全可预测的延迟。互连件27同样可被上电，使得音频滤波电路24可传输下面提及的参数并且写存储器操作将样本写入到存储器12。音频滤波电路24可包括样本缓冲区30，并且音频滤波电路24可被配置为在样本缓冲区30中暂时缓冲样本，以用于与预先确定的图案进行比较，并且一旦图案被检测到，便进一步缓冲样本，直到存储器控制器22准备好接收写入到存储器12。因此，样本缓冲区30的尺寸可基于从检测到图案直到存储器控制器22准备好的延迟。在一些实施方案中，样本缓冲区30的尺寸被设定成允许缓冲匹配预先确定的图案的样本、基于直到存储器控制器准备好的延迟的随后接收的样本以及在匹配预先确定的图案的样本之前的一个或多个样本(即，关键字词/短语/声音)。先前的样本可被处理，以确定被麦克风捕获的背景噪音，这可有助于更加准确地处理随后的样本。
在一些实施方案中，存储器控制器22可支持高级DRAM技术，该高级DRAM技术可涉及训练存储器控制器22和存储器12，以正确地同步它们之间的链接。直接由硬件经由训练或由软件，存储器控制器22配置的参数可被编程到存储器控制器22中(附图标号34A)。为了更快速地从音频滤波电路24恢复存储器控制器22以进行操作，音频滤波电路24可映像该参数(附图标号34B)。另选地，参数34B可为已知的参数的保守集，以在所有版本的DRAM上以及设备10中的所有操作条件下正确地操作。音频滤波电路24可将参数34B传送到存储器控制器22，以确保存储器控制器准备好写存储器12。
CPU可开始执行操作系统，并且可确定SOC 10正在重新激活的原因是音频滤波器24检测到关键字词/短语。CPU可从存储器12读取样本，并且可验证关键字词/短语确实被检测到。例如，在一些实施方案中，音频滤波器24可使用比可被由CPU执行的代码所支持的匹配进程更加简单并且更加粗糙(更不精确的)的匹配进程。CPU可验证代码被检测到，并且可继续处理所接收的音频样本的其余部分，以确定在关键字词/短语之后说出的命令/请求。
在另一个实施方案中，CPU复合体14可不与存储器控制器22被并行唤醒。例如，在一些实施方案中，音频滤波电路24可被配置为执行对随后的样本的处理(但是可对存储器控制器22上电，以使其自身利用存储器12中的空间来存储样本)。在另一个实施方案中，音频滤波电路24还可被配置为在设备5空闲时执行其他操作，并且音频滤波电路24可使用存储器12来存储该操作中的一些操作。在此类实施方案中，存储器控制器22可被上电，而无需使CPU复合体14上电。
使SOC 10的各种部件上电可包括与PMU 20进行通信。在实施方案中，音频滤波电路24可被配置为与PMU 20进行通信，以使得其他SOC电路部分上电。另选地，片上电源门控可被实现为使SOC 10的各种部件上电/断电。内部PMGR 28可被配置为实现该片上电源门控并且音频滤波电路24可被配置为与PMGR 28进行通信，以使得上电。在其他实施方案中，可使用PMGR 28和PMU 20的组合。在另一个实施方案中，PMGR 28可被配置为与PMU 20进行通信并且音频滤波电路24可将上电请求传递到PMGR 28，该PMGR 28可根据需要与PMU 20进行通信。
在样本缓冲区30和存储器12之间，来自一个或多个麦克风26A-26B的音频数据中的样本损耗可能小到没有。因此，用户可说出关键字词/短语，并且没有任何所需的犹豫继续说出请求/命令。
在各种实施方案中，音频滤波电路24可包括固定的硬件和/或用于执行软件的一个或多个处理器的任何组合。软件可为被包括在音频滤波电路24中的固件(例如，被存储在音频滤波电路24中的非易失性存储器中)。另选地，固件可被包括在待访问的设备5中的其他非易失性存储装置中以用于执行。如果使用了固定的硬件具体实施，则样本图案可仍然被编程为该固定的硬件的输入。此类可编程性可允许不同的关键字词/短语/声音被使用、针对多种语言被支持等等。实现固定的硬件音频滤波电路24可提供比处理器执行软件所提供的解决方法更加高效的解决方法来监测音频样本。
需注意，尽管这里的描述可指可用于激活命令模式的关键字词或短语，一般来讲，在各种实施方案中可使用任何声音(例如，口哨、拍手、非语言口头生成的声音等等)。
如本文所用，术语“上电”可指将电力施加到当前断电(或关机)的电路。在一些实施方案中，给定的电路可支持多于一种的电力状态(例如，电压和频率组合)。上电可指建立由电路所支持的任何电力状态。上电还可指开机。术语“断电”或“关机”可指减小电源电压大小到零伏。
音频编解码16可为音频数据的通用编码器/解码器。编解码器可包括模数转换器，该模数转换器被配置为将从自麦克风26A-26B所接收的信号转换成可被传输到SOC 10的数字样本。编解码器可包括数模转换器，该数模转换器被配置为从SOC 10接收数字音频数据，并且将该数字音频数据转换成在扬声器上播放的模拟信号。在一个实施方案中，音频编解码器16可支持一种或多种低功率模式，该一种或多种低功率模式可在设备5空闲的时间期间使用。例如，音频编解码器16可减少打开的(或者“接通的”)麦克风的数量并且可关闭扬声器。在一些实施方案中，音频采样速率在低功率模式中可降低。
CPU复合体14可包括用作SOC 10中的CPU的一个或多个处理器。系统的CPU包括用于执行系统的主控制软件诸如操作系统的一个或多个处理器。一般来讲，由CPU在使用期间所执行的软件可控制设备5/SOC 10的其他部件，以实现设备5的期望功能。CPU处理器还可执行其他软件，诸如应用程序。应用程序可为用户提供功能，并且可依赖于操作系统以用于更低级的设备控制。因此，CPU处理器还可被称为应用处理器。CPU复合体还可包括其他硬件诸如2级(L2)高速缓存和/或至系统的其他部件的接口(例如，至通信构造27的接口)。
外围设备18A-18B可为被包括在SOC 10中的附加硬件功能的任何集合。更具体地，外围设备18A可为被配置为耦接到音频编解码器16的接口单元。可使用任何接口(例如，串行外围设备接口(SPI)、串行端口或并行端口、用于音频编解码器16的合适的接口等等)。外围设备18B可包括视频外围设备诸如视频编码器/解码器、缩放器、旋转器、混合器、图形处理单元、显示控制器等等。外围设备可包括用于SOC 10外部的各种接口的接口控制器，该各种接口包括接口诸如通用串行总线(USB)、包括外围部件互连件标准(PCIe)的PCI、串行端口以及并行端口等等。外围设备可包括联网外围设备诸如媒体访问控制器(MAC)。可包括硬件的任何集合。
存储器控制器22可通常包括用于从SOC 10的其他部件接收存储器请求并且用于访问存储器12以完成存储器请求的电路。存储器控制器22可被配置为访问任何类型的存储器12。例如，存储器12可是静态随机存取存储器(SRAM)、动态RAM(DRAM)诸如包括双倍数据速率(DDR、DDR2、DDR3等)DRAM的同步的DRAM(SDRAM)。可支持DDR DRAM的低功率/移动版本(例如，LPDDR、mDDR等)。在一些实施方案中，存储器12可独立于SOC 10进行封装(例如，在单列直插内存模块(SIMM)、双列直插内存模块(DIMM)或者被安装到SOC 10所安装到的电路板的一个或多个DRAM芯片中)。在其他实施方案中，存储器12可利用SOC 10进行封装(例如，在封装上封装(package-on-package)配置或者芯片上芯片(chip-on-chip)配置中)。
通信构造27可为用于在SOC 10的部件间进行通信的任何通信互连件或协议。通信构造27可为基于总线的，包括共享总线配置、交叉杆配置以及具有网桥的分级总线。通信构造27还可为基于封装的，并且可利用网桥、交叉杆、点到点或其他互连件进行分级。
如上所述，电源管理器28可管理SOC 10内的内部电源排序。电源管理器28可被配置为在SOC 10内的各种部件中建立各种电源/性能状态，以平衡设备5中的计算需求和电力消耗。电源管理器28可可利用期望的电力/性能状态进行编程并且可基于所编程的状态来管理各种部件的开机/关机和时钟频率设置。
PMU 20可通常负责向设备5的部件提供电力，包括SOC 10、音频编解码器16、外围设备26A-26D以及存储器12。PMU 20可被耦接以从部件中的至少一些部件(例如，SOC 10)接收电压大小请求，并且可包括被配置为提供所请求的电压的稳压器。SOC 10可接收多个电压(例如，用于CPU复合体14的CPU电压、用于SOC 10中的存储器阵列诸如高速缓存的存储器电压、用于SOC中的其他部件的一个或多个SOC电压等)。
麦克风26A-26B可为能够接收声音并提供表示所接收的声音的输出信号的任何设备。在一些情况下，可需要多于一个麦克风。例如，在具有视频能力的智能电话中，可期望包括当进行语音呼叫时靠近用户的嘴巴的麦克风，以及靠近摄像机以用于捕获来自正被拍摄的对象的声音的麦克风。在各种实施方案中可包括任何数量的麦克风，并且当设备5空闲时所包括的任何数量的麦克风中可为打开的。
扬声器26C-26D可为能够接收输入信号并生成由该信号所表示的声音的任何设备。在一些情况下，可需要多于一个扬声器。例如，多个扬声器可允许立体类型的声音效果，并且多个扬声器可允许基于设备的取向来优化声音制作。任何数量的扬声器可被包括在各种实施方案中。
需注意，不同的实施方案之间的SOC 10的部件的数量(以及图1中所示的那些部件的子部件的数量，诸如CPU复合体14内的部件的子部件的数量)可变化。可存在比图1中所示的数量更多或更少的每个部件/子部件。类似地，在SOC 10外部但在设备5中的部件的类型和数量可变化，并且可包括图1中未示出的其他部件(例如，向用户提供视觉界面的显示器(其可为触摸显示器)、联网部件、天线、射频部件诸如wifi或蜂窝电话部件等)。
接着转到图2，图2示出了流程图，该流程图示出了在SOC 10(或者至少CPU复合体14和存储器控制器22)断电以节省电力的时间期间(例如，当设备5是空闲的时)音频滤波电路24和设备5的某些其他部件的一个实施方案的操作。然而，为了便于理解，框图以特定顺序示出，也可使用其他顺序。框可由音频滤波电路24中的组合逻辑电路并行执行(包括图2中明确地并行示出的框以及可能的其他框)。框、框的组合和/或流程图作为一个整体可在多个时钟周期内为管线式的。在一些实施方案中，框可由处理器执行软件来实现，或者框可为固定的硬件或者它们的任意组合。音频滤波电路24可被配置为实现图2中所示的操作。
音频滤波电路24可从音频编解码器16接收一个或多个音频样本到样本缓冲区30中(框40)，并且可将这些样本与用作关键字词/短语/声音的预先确定的图案进行比较以激活设备5中的语音命令模式(框42)。如果不存在匹配(决策框44，“no”分支)，则音频滤波电路24可继续接收样本到样本缓冲区30中并对样本进行比较。一旦样本缓冲区30充满，样本缓冲区30便可利用新的样本来重写最旧的样本。即，具有N条样本的样本缓冲区30(其中N是正整数)在任何给定时间点可具有最新的N个样本。
响应于检测到匹配(决策框44，“yes”分支)，音频滤波电路24可被配置为请求CPU复合体14和存储器控制器22被上电(框46)。取决于该具体实施，该请求可被传输到PMU 20、PMGR 28或者两者的组合。如先前所提及的，在其他实施方案中，仅存储器控制器22可被上电。另选地，存储器控制器22可首先被上电，并且CPU复合体14可随后被上电。此类交错上电可用于其中使存储器控制器22(和构造27)与CPU复合体14并行上电可具有超过上电期间允许的电流大小的可能性的情况(所谓的“侵入电流”)。
存储器控制器22可被上电，并且来自音频滤波电路24的存储器控制器参数34B可被恢复成存储器控制器22中的参数34A(框48)。如果参数34B是存储器控制器22中使用的最新参数34A的映像(在使存储器控制器22断电之前)，则参数可被“恢复”。如上所述，在另一个实施方案中，参数34B可为保守的“已知良好”参数的集合，该保守的“已知良好”参数将成功地允许访问存储器12，但可不被优化以用于最佳性能。在这种情况下，“恢复”参数可指将保守的参数34B建立为参数34A。随后，存储器控制器22可被训练到存储器12并且参数可被修改。在一个实施方案中，音频滤波电路24可通过存储器控制器22将来自样本缓冲区30的匹配样本和后续的样本写入到存储器12，并且可继续写入样本直到操作被CPU复合体14终止(框50)。
另外，CPU复合体14中的处理器在被上电以及重置之后可被引入到操作系统中(框52)。在CPU复合体14上执行的操作系统可对被存储在存储器12中的样本进行处理，以验证关键字词/短语/声音确实被检测到并且确定用户的请求是什么。设备5可尝试执行该命令/请求(框54)。
启动操作系统可包括测试SOC 10的各种部件并对其进行编程，并且与对存储器控制器22进行上电和恢复相比这可能是耗时任务。操作系统可被设计来检查启动的理由是否归因于在启动进程早期检测到关键字词/短语/声音，并且可对表示关键字词/短语/声音的至少样本进行处理以验证该检测。如果操作系统确定音频滤波电路24的检测是错误的，则操作系统停止启动进程并且将设备5返回到空闲状态(使CPU复合体14和存储器控制器22断电)。
图3是示出了训练存储器控制器22并将映像存储器控制器参数提供到音频滤波电路24的操作系统的一个实施方案的操作的流程图。然而，为了便于理解，框图以特定顺序示出，也可使用其他顺序。在一些实施方案中，框可由处理器执行操作系统软件来实现，如上所述。
操作系统可激活存储器控制器22中的训练以使得存储器控制器22与存储器12同步并且建立到存储器12的高性能连接(框60)。响应于训练完成，参数34A可表示配置。操作系统可将参数34A复制到映像参数34B(框62)。另外，该映像可以硬件实现。在另一个实施方案中，参数的不同集合可被提供给映像参数34B，以确保当由于检测到关键字词/短语/声音而被恢复时存储器控制器22可正确地操作。
现在转向图4，其示出了显示设备5的一个实施方案的操作的时序图。在图4中从左到右时间增加。在时序图的开始处，在左边，设备5可是空闲的，因此音频滤波电路24可正在监测音频样本。SOC 10的其他部分诸如存储器控制器22和CPU复合体14可被断电。跨越时序图的顶部的句子可由用户发出，并且在该示例中关键短语可为“嗨，Siri”。然而任何关键字词/短语可用于各种实施方案中。
当响应于麦克风所生成的音频样本被音频滤波器24处理时，音频滤波器24可检测关键短语(附图标号70)。响应于该检测，音频滤波器24可请求使存储器控制器22和CPU复合体14上电(参考标号72和74)。音频滤波器24可从参数34B恢复存储器控制器22，使得存储器控制器22可变得可用于接受写操作。随后，音频滤波器24可将与图案匹配的音频样本，以及后续的样本(表示“最近的披萨餐厅在哪儿？”)写入到存储器(附图标号76)。
同时，CPU可上电、重置并启动操作系统(附图标号74和78)。如图4所示，启动操作系统直到音频样本处理可开始的点(附图标号80)可花费比存储器控制器22的恢复更长的时间。只要操作系统在启动之后正在捕获字词，由存储器控制器接收并捕获的样本例如紧跟着关键字词的一个或多个字词将不被捕获。因此，用户连续说话可被捕获并且更加自然的接口(对用户来说)是可用的。如先前所提及的，在一些实施方案中，CPU可不与存储器控制器22并行上电。
一旦充分理解了以上公开，则很多变型和修改对于本领域的技术人员而言将变得显而易见。本发明旨在使以下权利要求书被解释为涵盖所有此类变型和修改。

Claims (16)

1.一种集成电路，包括：
一个或多个处理器；
至少一个存储器控制器；和
第一电路，所述第一电路耦接到所述一个或多个处理器并且耦接到所述存储器控制器，其中所述第一电路被配置为在所述存储器控制器和所述一个或多个处理器断电的时间期间保持上电，并且其中所述第一电路被配置为在所述存储器控制器和所述一个或多个处理器断电的时间期间接收由一个或多个音频输入设备所捕获的音频样本并且在所述音频样本中检测预先确定的模式，并且其中所述第一电路被配置为响应于检测到所述预先确定的模式来使得所述存储器控制器和所述一个或多个处理器上电，并且其中所述第一电路被配置为在所述存储器控制器可用于接收写操作但所述一个或多个处理器未准备好处理样本的时间期间通过所述存储器控制器来将匹配所述预先确定的模式的所述音频样本和随后接收的样本写入到存储器。
2.根据权利要求1所述的集成电路，其中所述预先确定的模式表示包含一个或多个字词的言语表达的声音。
3.根据权利要求2所述的集成电路，其中所述预先确定的模式从用户的语音捕获。
4.根据权利要求1所述的集成电路，其中所述预先确定的模式表示包含非言语声音的声音。
5.根据权利要求1所述的集成电路，其中所述第一电路被配置为向所述存储器控制器提供一个或多个存储器控制器参数，以对所述存储器控制器进行编程以用于与所述存储器一起操作。
6.根据权利要求1所述的集成电路，其中所述第一电路包括被配置为存储多个音频样本的缓冲区，其中所述多个音频样本的数量足以存储匹配所述模式的所述音频样本以及所述随后接收的样本，直到所述存储器控制器可用于接收所述音频样本到所述存储器的写入。
7.根据权利要求1所述的集成电路，其中所述第一电路包括处理器，所述处理器被配置为执行多个指令以至少执行在所述音频样本中检测所述预先确定的模式以及使得所述处理器和所述存储器控制器上电。
8.根据权利要求1所述的集成电路，其中所述第一电路包括被配置为在所述音频样本中检测所述预先确定的模式的硬件电路。
9.一种用于音频控制的系统，包括：
音频输入设备；
音频编码器/解码器即音频编解码器，所述音频编解码器耦接到所述音频输入设备并且被配置为从由所述音频输入设备所检测到的声音生成音频样本；
存储器；和
根据权利要求1所述的集成电路，其中所述集成电路耦接到所述音频编解码器和所述存储器。
10.根据权利要求9所述的系统，其中所述音频输入设备是被包括在所述系统中的多个麦克风中的一个麦克风，并且其中所述多个麦克风中的其他麦克风在所述存储器控制器断电的时间期间被禁用。
11.根据权利要求9所述的系统，其中所述第一电路被配置为响应于在所述音频样本中检测到所述预先确定的模式来使得所述一个或多个处理器与所述存储器控制器并行上电。
12.根据权利要求11所述的系统，其中所述一个或多个处理器被配置为执行多个指令，以验证所述预先确定的模式已被检测到并且解释所述随后接收的音频样本。
13.一种用于音频控制的方法，包括：
使得集成电路中的中央处理单元CPU复合体和存储器控制器断电；
在所述CPU复合体和所述存储器控制器断电的时间期间，在所述集成电路内的保持上电的第一电路中监测音频样本；
在所述存储器控制器和所述CPU复合体断电的时间期间在所述第一电路中检测所述音频样本中的预先确定的模式；
响应于所述检测来请求对至少所述存储器控制器上电；以及
通过在所述第一电路中缓冲所述音频样本和随后接收的音频样本直到所述存储器控制器可用并且将所缓冲的音频样本写入到存储器来确保所述音频样本和随后接收的音频样本不丢失，从而在所述存储器中音频样本的连续流可用于处理，并且其中在所述存储器控制器可用于接收写操作但所述CPU复合体未准备好处理样本的时间期间音频样本被写入到所述存储器。
14.根据权利要求13所述的方法，还包括请求对所述CPU复合体上电。
15.根据权利要求14所述的方法，还包括：
在所述CPU复合体上启动操作系统；以及
处理来自所述存储器的所缓冲的音频样本。
16.根据权利要求15所述的方法，其中所述处理包括：
验证所述预先确定的模式被检测到；以及
解释所述随后接收的音频样本。
CN201480061595.XA 2013-11-12 2014-09-29 用于移动设备的始终进行的音频控制 Active CN105745615B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201361903002P 2013-11-12 2013-11-12
US61/903,002 2013-11-12
US14/109,101 US10079019B2 (en) 2013-11-12 2013-12-17 Always-on audio control for mobile device
US14/109,101 2013-12-17
PCT/US2014/057958 WO2015073125A1 (en) 2013-11-12 2014-09-29 Always-on audio control for mobile device

Publications (2)

Publication Number Publication Date
CN105745615A CN105745615A (zh) 2016-07-06
CN105745615B true CN105745615B (zh) 2019-03-22

Family

ID=53044518

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480061595.XA Active CN105745615B (zh) 2013-11-12 2014-09-29 用于移动设备的始终进行的音频控制

Country Status (8)

Country Link
US (7) US10079019B2 (zh)
EP (1) EP3069226B1 (zh)
JP (1) JP6170625B2 (zh)
KR (1) KR101770932B1 (zh)
CN (1) CN105745615B (zh)
AU (1) AU2014349166B2 (zh)
TW (1) TWI562130B (zh)
WO (1) WO2015073125A1 (zh)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9467785B2 (en) 2013-03-28 2016-10-11 Knowles Electronics, Llc MEMS apparatus with increased back volume
US9503814B2 (en) 2013-04-10 2016-11-22 Knowles Electronics, Llc Differential outputs in multiple motor MEMS devices
US9633655B1 (en) 2013-05-23 2017-04-25 Knowles Electronics, Llc Voice sensing and keyword analysis
US9712923B2 (en) 2013-05-23 2017-07-18 Knowles Electronics, Llc VAD detection microphone and method of operating the same
US10020008B2 (en) 2013-05-23 2018-07-10 Knowles Electronics, Llc Microphone and corresponding digital interface
US9711166B2 (en) 2013-05-23 2017-07-18 Knowles Electronics, Llc Decimation synchronization in a microphone
US20180317019A1 (en) 2013-05-23 2018-11-01 Knowles Electronics, Llc Acoustic activity detecting microphone
US10028054B2 (en) 2013-10-21 2018-07-17 Knowles Electronics, Llc Apparatus and method for frequency detection
US9386370B2 (en) 2013-09-04 2016-07-05 Knowles Electronics, Llc Slew rate control apparatus for digital microphones
US9502028B2 (en) 2013-10-18 2016-11-22 Knowles Electronics, Llc Acoustic activity detection apparatus and method
US9147397B2 (en) 2013-10-29 2015-09-29 Knowles Electronics, Llc VAD detection apparatus and method of operating the same
US10079019B2 (en) 2013-11-12 2018-09-18 Apple Inc. Always-on audio control for mobile device
WO2015094369A1 (en) * 2013-12-20 2015-06-25 Intel Corporation Transition from low power always listening mode to high power speech recognition mode
US9712915B2 (en) 2014-11-25 2017-07-18 Knowles Electronics, Llc Reference microphone for non-linear and time variant echo cancellation
WO2016112113A1 (en) 2015-01-07 2016-07-14 Knowles Electronics, Llc Utilizing digital microphones for low power keyword detection and noise suppression
WO2016118480A1 (en) 2015-01-21 2016-07-28 Knowles Electronics, Llc Low power voice trigger for acoustic apparatus and method
US10121472B2 (en) 2015-02-13 2018-11-06 Knowles Electronics, Llc Audio buffer catch-up apparatus and method with two microphones
US9866938B2 (en) 2015-02-19 2018-01-09 Knowles Electronics, Llc Interface for microphone-to-microphone communications
US9883270B2 (en) 2015-05-14 2018-01-30 Knowles Electronics, Llc Microphone with coined area
US10291973B2 (en) 2015-05-14 2019-05-14 Knowles Electronics, Llc Sensor device with ingress protection
US9478234B1 (en) 2015-07-13 2016-10-25 Knowles Electronics, Llc Microphone apparatus and method with catch-up buffer
US10045104B2 (en) 2015-08-24 2018-08-07 Knowles Electronics, Llc Audio calibration using a microphone
US10018977B2 (en) * 2015-10-05 2018-07-10 Savant Systems, Llc History-based key phrase suggestions for voice control of a home automation system
CN106653010B (zh) 2015-11-03 2020-07-24 络达科技股份有限公司 电子装置及其透过语音辨识唤醒的方法
US10168985B2 (en) * 2015-12-21 2019-01-01 Intel Corporation Dynamic audio codec enumeration
US9894437B2 (en) 2016-02-09 2018-02-13 Knowles Electronics, Llc Microphone assembly with pulse density modulated signal
US10880833B2 (en) * 2016-04-25 2020-12-29 Sensory, Incorporated Smart listening modes supporting quasi always-on listening
US10499150B2 (en) 2016-07-05 2019-12-03 Knowles Electronics, Llc Microphone assembly with digital feedback loop
US10257616B2 (en) 2016-07-22 2019-04-09 Knowles Electronics, Llc Digital microphone assembly with improved frequency response and noise characteristics
EP3526789B1 (en) * 2016-10-17 2022-12-28 Harman International Industries, Incorporated Voice capabilities for portable audio device
CN110024281B (zh) 2016-10-28 2024-05-07 三星电子株式会社 换能器组件和方法
WO2018126151A1 (en) 2016-12-30 2018-07-05 Knowles Electronics, Llc Microphone assembly with authentication
US10121494B1 (en) * 2017-03-30 2018-11-06 Amazon Technologies, Inc. User presence detection
US11025356B2 (en) 2017-09-08 2021-06-01 Knowles Electronics, Llc Clock synchronization in a master-slave communication system
WO2019067334A1 (en) 2017-09-29 2019-04-04 Knowles Electronics, Llc MULTICORDER AUDIO PROCESSOR WITH FLEXIBLE MEMORY ALLOCATION
CN107861618A (zh) * 2017-11-10 2018-03-30 联想(北京)有限公司 电子设备控制方法和控制系统
WO2020055923A1 (en) 2018-09-11 2020-03-19 Knowles Electronics, Llc Digital microphone with reduced processing noise
US10908880B2 (en) 2018-10-19 2021-02-02 Knowles Electronics, Llc Audio signal circuit with in-place bit-reversal
GB201821048D0 (en) 2018-12-21 2019-02-06 Sae Hearing As System for monitoring sound
CN109785845B (zh) 2019-01-28 2021-08-03 百度在线网络技术（北京）有限公司 语音处理方法、装置及设备
CN110806990A (zh) * 2019-10-15 2020-02-18 四川豪威尔信息科技有限公司 一种存储器集成电路及其预取方法
CN113126740A (zh) * 2019-12-30 2021-07-16 美光科技公司 管理降低功率的存储器操作

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102037428A (zh) * 2008-05-22 2011-04-27 Ati技术无限责任公司 具有用于提供降低电源消耗的睡眠状态的次要存储器控制器的集成电路及方法
US8078800B2 (en) * 2009-06-05 2011-12-13 Apple Inc. Dynamic operating point modification in an integrated circuit
CN104247280A (zh) * 2013-02-27 2014-12-24 视听公司 话音控制的通信连接

Family Cites Families (110)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5615296A (en) 1993-11-12 1997-03-25 International Business Machines Corporation Continuous speech recognition and voice response system and method to enable conversational dialogues with microprocessors
US5461588A (en) * 1994-11-15 1995-10-24 Digital Equipment Corporation Memory testing with preservation of in-use data
JP3674990B2 (ja) 1995-08-21 2005-07-27 セイコーエプソン株式会社 音声認識対話装置および音声認識対話処理方法
US5774841A (en) * 1995-09-20 1998-06-30 The United States Of America As Represented By The Adminstrator Of The National Aeronautics And Space Administration Real-time reconfigurable adaptive speech recognition command and control apparatus and method
US6593845B1 (en) 1998-01-09 2003-07-15 Intermac Ip Corp. Active RF tag with wake-up circuit to prolong battery life
WO2001054753A2 (en) * 2000-01-21 2001-08-02 Medical Research Group, Inc. Microprocessor controlled ambulatory medical apparatus with hand held communication device
US6748548B2 (en) 2000-12-29 2004-06-08 Intel Corporation Computer peripheral device that remains operable when central processor operations are suspended
JP2003023252A (ja) 2001-07-10 2003-01-24 Ibiden Co Ltd 多層プリント配線板
US6408396B1 (en) * 2001-05-04 2002-06-18 Intel Corporation Method and apparatus for supporting wake-on voice and wake-on MIC technology
US6775750B2 (en) 2001-06-29 2004-08-10 Texas Instruments Incorporated System protection map
JP4640667B2 (ja) 2001-12-03 2011-03-02 横浜特殊船舶株式会社 レンタル自転車の錠システム
JP4436583B2 (ja) 2001-12-19 2010-03-24 富士フイルム株式会社 デジタルカメラ
EP1331539B1 (en) 2002-01-16 2016-09-28 Texas Instruments France Secure mode for processors supporting MMU and interrupts
JP2003278418A (ja) * 2002-03-22 2003-10-02 Denso Corp 車載無線機装置
EP1351146A1 (en) 2002-04-04 2003-10-08 Hewlett-Packard Company Power management system and method with recovery after power failure
US7134028B2 (en) 2003-05-01 2006-11-07 International Business Machines Corporation Processor with low overhead predictive supply voltage gating for leakage power reduction
US7418392B1 (en) 2003-09-25 2008-08-26 Sensory, Inc. System and method for controlling the operation of a device by voice commands
US8864822B2 (en) 2003-12-23 2014-10-21 Mitralign, Inc. Devices and methods for introducing elements into tissue
US8112618B2 (en) 2004-04-08 2012-02-07 Texas Instruments Incorporated Less-secure processors, integrated circuits, wireless communications apparatus, methods and processes of making
JP2006107127A (ja) 2004-10-05 2006-04-20 Nec Electronics Corp 半導体集積回路装置
US7797523B2 (en) 2006-09-25 2010-09-14 Hewlett-Packard Development Company, L.P. Method and system of executing stack-based memory reference code
US8117475B2 (en) 2006-12-15 2012-02-14 Microchip Technology Incorporated Direct memory access controller
US8041968B2 (en) 2007-01-04 2011-10-18 Apple Inc. Power management for driving display with baseband portion when application portion is in low power mode
KR100862316B1 (ko) * 2007-03-08 2008-10-13 주식회사 하이닉스반도체 반도체 메모리장치, 반도체 메모리장치의 ｚｑ캘리브래이션동작 제어회로 및 반도체 메모리장치의 ｚｑ캘리브래이션방법
US7991992B2 (en) 2007-03-13 2011-08-02 Intel Corporation Power reduction for system on chip
US8065546B2 (en) 2007-05-03 2011-11-22 Microchip Technology Incorporated Interrupt/wake-up of an electronic device in a low power sleep mode when detecting a sensor or frequency source activated frequency change
US7941682B2 (en) 2007-05-09 2011-05-10 Gainspan, Inc. Optimum power management of system on chip based on tiered states of operation
EP2058725A3 (en) * 2007-06-11 2015-07-22 Mediatek Inc. Method of and apparatus for reducing power consumption within an integrated circuit
EP2166433B1 (en) 2007-07-09 2017-03-15 Sony Corporation Electronic apparatus and method for controlling the same
JP4949956B2 (ja) 2007-07-20 2012-06-13 株式会社リコー 画像形成装置
US9613215B2 (en) 2008-04-10 2017-04-04 Nvidia Corporation Method and system for implementing a secure chain of trust
US20090259865A1 (en) 2008-04-11 2009-10-15 Qualcomm Incorporated Power Management Using At Least One Of A Special Purpose Processor And Motion Sensing
US8533504B2 (en) * 2008-05-29 2013-09-10 International Business Machines Corporation Reducing power consumption during execution of an application on a plurality of compute nodes
US8065540B2 (en) 2008-10-31 2011-11-22 Dell Products, Lp Power control for information handling system having shared resources
US8103803B2 (en) 2008-11-21 2012-01-24 Nvidia Corporation Communication between a processor and a controller
JP5080510B2 (ja) 2009-02-12 2012-11-21 株式会社日立製作所 宅内ゲートウェイ装置
US8405505B2 (en) 2009-05-26 2013-03-26 Qualcomm Incorporated Power management of sensors within a mobile device
US8515609B2 (en) 2009-07-06 2013-08-20 Honeywell International Inc. Flight technical control management for an unmanned aerial vehicle
GB2472050B (en) 2009-07-22 2013-06-19 Wolfson Microelectronics Plc Power management apparatus and methods
KR101624903B1 (ko) 2009-09-16 2016-05-30 삼성전자주식회사 휴대용 단말기에서 전력 소모를 줄이기 위한 장치 및 방법
US9098274B2 (en) 2009-12-03 2015-08-04 Intel Corporation Methods and apparatuses to improve turbo performance for events handling
JP2011129041A (ja) 2009-12-21 2011-06-30 Fujitsu Ltd 情報処理装置、認証処理制御プログラムおよび認証処理制御方法
US8656198B2 (en) 2010-04-26 2014-02-18 Advanced Micro Devices Method and apparatus for memory power management
US20110291801A1 (en) * 2010-06-01 2011-12-01 Sommer William R Personal warning device
US8751802B2 (en) 2010-06-30 2014-06-10 Sandisk Il Ltd. Storage device and method and for storage device state recovery
US8438416B2 (en) 2010-10-21 2013-05-07 Advanced Micro Devices, Inc. Function based dynamic power control
US9483103B2 (en) * 2010-10-22 2016-11-01 Hewlett-Packard Development Company, L.P. Process state of a computing machine
US8706172B2 (en) 2010-10-26 2014-04-22 Miscrosoft Corporation Energy efficient continuous sensing for communications devices
US9226069B2 (en) * 2010-10-29 2015-12-29 Qualcomm Incorporated Transitioning multiple microphones from a first mode to a second mode
US9135213B2 (en) 2011-01-13 2015-09-15 Xilinx, Inc. Extending a processor system within an integrated circuit and offloading processes to process-specific circuits
US20120254878A1 (en) 2011-04-01 2012-10-04 Lama Nachman Mechanism for outsourcing context-aware application-related functionalities to a sensor hub
US9229489B2 (en) 2011-05-03 2016-01-05 Facebook, Inc. Adjusting mobile device state based on user intentions and/or identity
US20120311009A1 (en) * 2011-06-01 2012-12-06 Jarrett Ben D Hybrid adder using dynamic and static circuits
US20130124891A1 (en) 2011-07-15 2013-05-16 Aliphcom Efficient control of power consumption in portable sensing devices
US8954017B2 (en) 2011-08-17 2015-02-10 Broadcom Corporation Clock signal multiplication to reduce noise coupled onto a transmission communication signal of a communications device
US8862917B2 (en) 2011-09-19 2014-10-14 Qualcomm Incorporated Dynamic sleep for multicore computing devices
US8768707B2 (en) 2011-09-27 2014-07-01 Sensory Incorporated Background speech recognition assistant using speaker verification
EP2769272A1 (en) 2011-10-18 2014-08-27 Slyde Watch SA A method and circuit for switching a wristwatch from a first power mode to a second power mode
US8812761B2 (en) 2011-10-28 2014-08-19 Apple Inc. System and method for adjusting power usage to reduce interrupt latency
US8972180B1 (en) * 2011-11-08 2015-03-03 Marvell International Ltd. Method and apparatus for managing multiple sensors in a navigation system
US8666751B2 (en) * 2011-11-17 2014-03-04 Microsoft Corporation Audio pattern matching for device activation
US9281827B2 (en) 2011-11-21 2016-03-08 Cirrus Logic International Semiconductor Ltd. Clock generator
US9564131B2 (en) 2011-12-07 2017-02-07 Qualcomm Incorporated Low power integrated circuit to analyze a digitized audio stream
WO2013089686A1 (en) 2011-12-13 2013-06-20 Intel Corporation A method and system for providing instant responses to sleep state transitions with non-volatile random access memory
US9377830B2 (en) 2011-12-30 2016-06-28 Samsung Electronics Co., Ltd. Data processing device with power management unit and portable device having the same
CN102622079B (zh) 2012-02-25 2015-02-04 华为终端有限公司 一种休眠方法、唤醒方法和移动终端设备
US9838810B2 (en) 2012-02-27 2017-12-05 Qualcomm Technologies International, Ltd. Low power audio detection
US9063574B1 (en) 2012-03-14 2015-06-23 Amazon Technologies, Inc. Motion detection systems for electronic devices
US8892269B2 (en) 2012-03-30 2014-11-18 Intel Corporation Power down and quick start of thermal sensor
US9552037B2 (en) * 2012-04-23 2017-01-24 Google Inc. Switching a computing device from a low-power state to a high-power state
US9117449B2 (en) 2012-04-26 2015-08-25 Nuance Communications, Inc. Embedded system for construction of small footprint speech recognition with user-definable constraints
US20130318382A1 (en) 2012-05-23 2013-11-28 Canon Kabushiki Kaisha Power management apparatus, image forming apparatus and power management method
US9182999B2 (en) 2012-05-30 2015-11-10 Advanced Micro Devices, Inc. Reintialization of a processing system from volatile memory upon resuming from a low-power state
KR101896666B1 (ko) 2012-07-05 2018-09-07 삼성전자주식회사 이미지 센서 칩, 이의 동작 방법, 및 이를 포함하는 시스템
KR102045511B1 (ko) 2012-07-18 2019-11-15 삼성전자 주식회사 센서 허브를 포함하는 단말기 및 단말기의 제어 방법
US9063731B2 (en) 2012-08-27 2015-06-23 Samsung Electronics Co., Ltd. Ultra low power apparatus and method to wake up a main processor
US9152205B2 (en) 2012-08-28 2015-10-06 Intel Corporation Mechanism for facilitating faster suspend/resume operations in computing systems
TWI492545B (zh) 2012-09-14 2015-07-11 Univ Nat Chiao Tung 具有增益校正之鎖相迴路、用於鎖相迴路之增益量測方法、校正方法及抖動量測方法
US9208371B2 (en) 2012-09-28 2015-12-08 Synaptics Incorporated Low power navigation devices, systems and methods
KR101927096B1 (ko) 2012-10-19 2018-12-10 삼성전자주식회사 어플리케이션 프로세서, 이를 구비하는 모바일 기기 및 어플리케이션 프로세서를 위한 클럭 신호 선택 방법
WO2014063330A1 (en) 2012-10-25 2014-05-01 Intel Corporation Anti-theft in firmware
CN103838339B (zh) * 2012-11-21 2016-08-17 华硕电脑股份有限公司 功率整合模块及电子装置
US9760150B2 (en) 2012-11-27 2017-09-12 Nvidia Corporation Low-power states for a computer system with integrated baseband
US9081571B2 (en) 2012-11-29 2015-07-14 Amazon Technologies, Inc. Gesture detection management for an electronic device
KR102179811B1 (ko) * 2012-12-03 2020-11-17 엘지전자 주식회사 포터블 디바이스 및 음성 인식 서비스 제공 방법
US9794736B2 (en) 2012-12-21 2017-10-17 Qualcomm Incorporated Low power always-on determination of indoor versus outdoor state
US20140223214A1 (en) 2013-02-01 2014-08-07 Broadcom Corporation Dynamic power mode switching per rail
US20140218372A1 (en) 2013-02-05 2014-08-07 Apple Inc. Intelligent digital assistant in a desktop environment
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US9542933B2 (en) 2013-03-08 2017-01-10 Analog Devices Global Microphone circuit assembly and system with speech recognition
US9335809B2 (en) 2013-03-15 2016-05-10 Seagate Technology Llc Volatile memory storing system data during low power mode operation and monitoring the voltage supplied to the memory during low power mode
US9189248B2 (en) 2013-04-25 2015-11-17 Insyde Software Corp. Specialized boot path for speeding up resume from sleep state
US9541984B2 (en) 2013-06-05 2017-01-10 Apple Inc. L2 flush and memory fabric teardown
US9338003B2 (en) 2013-06-18 2016-05-10 Maxim Integrated Products, Inc. Secure modules using unique identification elements
CN110096253B (zh) 2013-07-11 2022-08-30 英特尔公司 利用相同的音频输入的设备唤醒和说话者验证
US9756699B2 (en) 2013-08-30 2017-09-05 Avago Technologies General Ip (Singapore) Pte. Ltd Low-power data acquisition system and sensor interface
US20150089245A1 (en) 2013-09-26 2015-03-26 Asher M. Altman Data storage in persistent memory
US9171133B2 (en) 2013-10-11 2015-10-27 Landis+Gyr Innovations, Inc. Securing a device and data within the device
US20150127300A1 (en) 2013-11-03 2015-05-07 Microsoft Corporation Sensor Selection Based on Context and Policy
US10079019B2 (en) * 2013-11-12 2018-09-18 Apple Inc. Always-on audio control for mobile device
US20150149801A1 (en) 2013-11-26 2015-05-28 Synaptics Incorporated Complex wakeup gesture framework
CN103619056B (zh) 2013-12-02 2018-01-12 华为终端（东莞）有限公司 一种上报传感器数据的方法和终端
US9836113B2 (en) 2013-12-23 2017-12-05 Intel Corporation Method and apparatus to manage power usage in a processor
WO2015099802A1 (en) 2013-12-28 2015-07-02 Intel Corporation Techniques for increasing energy efficiency of sensor controllers
US9443111B2 (en) 2014-02-28 2016-09-13 Seagate Technology Llc Device security using an encrypted keystore data structure
US9348358B2 (en) 2014-04-18 2016-05-24 Fujitsu Limited Clock multiplication and distribution
US9619377B2 (en) 2014-05-29 2017-04-11 Apple Inc. System on a chip with always-on processor which reconfigures SOC and supports memory-only communication mode
US9778728B2 (en) 2014-05-29 2017-10-03 Apple Inc. System on a chip with fast wake from sleep
US10031000B2 (en) 2014-05-29 2018-07-24 Apple Inc. System on a chip with always-on processor
US10540043B2 (en) 2016-03-02 2020-01-21 Synaptics Incorporated Hybrid in-cell sensor topology

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102037428A (zh) * 2008-05-22 2011-04-27 Ati技术无限责任公司 具有用于提供降低电源消耗的睡眠状态的次要存储器控制器的集成电路及方法
US8078800B2 (en) * 2009-06-05 2011-12-13 Apple Inc. Dynamic operating point modification in an integrated circuit
CN104247280A (zh) * 2013-02-27 2014-12-24 视听公司 话音控制的通信连接

Also Published As

Publication number Publication date
US10431224B1 (en) 2019-10-01
KR101770932B1 (ko) 2017-08-23
WO2015073125A1 (en) 2015-05-21
US20180350369A1 (en) 2018-12-06
US20200184976A1 (en) 2020-06-11
US20240144932A1 (en) 2024-05-02
TW201521010A (zh) 2015-06-01
JP2017506353A (ja) 2017-03-02
TWI562130B (en) 2016-12-11
EP3069226B1 (en) 2019-12-18
US20190287532A1 (en) 2019-09-19
KR20160074656A (ko) 2016-06-28
AU2014349166B2 (en) 2017-02-16
EP3069226A1 (en) 2016-09-21
JP6170625B2 (ja) 2017-07-26
US20210287677A1 (en) 2021-09-16
US11049503B2 (en) 2021-06-29
US10276165B2 (en) 2019-04-30
US10079019B2 (en) 2018-09-18
AU2014349166A1 (en) 2016-04-14
US10573319B2 (en) 2020-02-25
US20150134331A1 (en) 2015-05-14
US11862173B2 (en) 2024-01-02
CN105745615A (zh) 2016-07-06
US20190378514A1 (en) 2019-12-12

Similar Documents

Publication Publication Date Title
CN105745615B (zh) 用于移动设备的始终进行的音频控制
US11714477B2 (en) Low-power ambient computing system with machine learning
KR101994569B1 (ko) 상시-온 컴포넌트에서의 클록 스위칭
CN106255937B (zh) 具有始终通电的处理器的片上系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant