CN107615377A - 用于家庭自动化系统的语音控制的基于历史的关键短语建议 - Google Patents

Abstract

在一个实施例中，提供了用于家庭自动化系统的语音控制的基于历史的关键短语建议。主控制器构建历史数据库，其保持事件的历史，每个事件指示被家庭自动化系统激活的一个或多个服务、被其激活的一个或多个场景或由其呈现的一个或多个类型的媒体内容。主控制器上的预测过程基于家庭自动化系统的当前条件而选择历史数据库的事件的子集以产生预测数据集。遥控装置或移动设备上的语法过程基于预测数据集从语音识别引擎所使用的列表中选择一个或多个意图。每个意图包括与动作配对的关键短语。语音用户接口（UI）过程在遥控装置或移动设备上的语音控制UI中建议来自一个或多个所选意图的关键短语。

Description

用于家庭自动化系统的语音控制的基于历史的关键短语建议

技术领域

本公开一般地涉及家庭自动化系统，并且更具体地涉及家庭自动化系统的语音控制。

背景技术

家庭自动化系统在住宅和商业建筑两者中正在变得越来越流行。此类系统可以能够控制各种各样的设备、在其之间切换数据以及以其它方式与其进行交互，所述设备包括照明设备、安全设备、音频/视频（A/V）设备、暖通和制冷（HVAC）设备和/或其它类型的设备。传统上，家庭自动化系统已经提供了各种类型的以按钮为中心或基于触摸屏的控制。最近，已经存在提供语音控制的尝试。然而，语音控制的各种限制已妨碍了其在家庭自动化系统中的广泛采用，使得其与针对以按钮为中心或基于触摸屏的控制的直接替换相比更多地是好奇。

语音控制的一个问题是用户常常不确定要对家庭自动化系统说什么以产生期望的结果。许多语音识别系统被配置成仅理解每个被映射到控制动作的有限数目的关键短语（关键短语的词典）。为了触发动作，用户必须说出词典中的关键短语中的一个。用户可以在最初经由用户手册、教程或其它种类的培训材料被教授关键短语。然而，随着时间推移，他们可能忘记用于某些期望动作的关键短语，并且当他们不能促使家庭自动化系统以期望方式进行响应时变得沮丧。在尝试解决这个问题时，某些家庭自动化系统被配置成提供所有关键短语的按需列表。然而，整个词典的显示常常将用户压垮，将与他们当前的期望有关的信息掩埋在很大程度上与他们当前正在尝试要做的不相关的其它关键短语的列表之中。

因此，存在对用于在家庭自动化系统中实现语音控制的改进技术的需要。

发明内容

提供了用以通过在语音控制用户接口（UI）中提供基于历史的关键短语建议来改善家庭自动化系统中的语音控制的示例性技术。此类关键短语建议可以向用户提示关于在给定用户的历史使用模式的情况下可能适当的话音输入。关键短语建议可以是有限数目的，从而不会用大量的信息将用户压垮。

在一个示例性实施例中，主控制器上的主活动记录软件可以构建历史数据库，其保持在家庭自动化系统中已发生的事件。每个事件可以指示被激活的一个或多个服务、被激活的一个或多个场景、被呈现的一个或多个类型的媒体内容或其它历史信息。家庭自动化系统的主控制器上的预测过程可以基于家庭自动化系统的当前条件（例如，时间）从历史数据库中选择事件的子集以产生预测数据集。例如，该预测过程可以选择在与当前的周中日相同的周中日、在包含任何周中日的当前日中时的时间窗中或者在包含与当前周中日相同的周中日的当前日中时的时间窗中发生的历史数据库中的事件。遥控装置或移动设备上的语音建议软件可以基于预测数据集从意图列表中选择一个或多个意图，其中每个意图包括与响应于关键短语而在家庭自动化系统中执行的动作配对的语音识别引擎所识别的关键短语。语音建议软件可以在遥控装置或移动设备的屏幕上显示语音控制UI，其将来自一个或多个所选意图的关键短语呈现为关键短语建议。响应于此类提示，用户可以说出关键短语。给定从用户输入的此话音，遥控装置或移动设备上的语音识别引擎可以针对意图列表的关键短语比较话音输入以发现匹配的意图，并且触发与该匹配意图相关联的动作。

应理解的是除了在本发明内容中讨论的那些之外，可以实现多种附加的特征和替换实施例。本发明内容仅意图作为给读者的简要介绍，并且未指示或暗示在本文中提到示例涵盖本公开的所有方面或者是本公开的必要或必不可少的方面。

附图说明

以下描述参考示例性实施例的附图，在所述附图中：

图1是可操作用于关于建筑物（structure）而控制设备的家庭自动化系统的示例性架构的框图；

图2是示出了可以将家庭自动化系统中的历史活动的记录作为事件保持在历史数据库中的示例性主软件（包括主活动记录软件）的框图；

图3是示出了可以在遥控装置或移动设备上执行的示例性应用程序（包括语音识别引擎）的框图；

图4是可以动态地构建的意图的示例性列表的关键短语的示例性列表；

图5是主软件的预测过程和应用程序的示例性语音建议软件的框图；

图6是可以在遥控装置或移动设备上显示的示例性语音控制UI的屏幕快照；以及

图7是可以实现以提供基于历史的关键短语建议的步骤序列的流程图。

具体实施方式

定义

如本文所使用的，术语“家庭自动化系统”应被宽泛地解释成包括各种类型的家庭控制、“智能家庭”和/或可以控制建筑物（诸如住宅寓所或商业建筑）内的设备（例如，照明设备、安全设备、A/V设备、HVAC设备、电子门锁和/或其它类型的设备）的设备控制系统。家庭自动化系统可以控制多种不同类型的设备或仅特定类型的设备（例如，仅照明设备、仅A/V设备等）。

如本文所使用的，术语“移动设备”指代执行通用操作系统并适于在设备的人上运输的电子设备。诸如智能电话和平板计算机之类的设备应被视为移动设备。一般地不应将台式计算机、服务器或其它主要固定的计算设备视为移动设备。

如本文所使用的，术语“服务”指的是由家庭自动化系统提供的涉及到家庭自动化系统的一个或多个设备之间的交互的活动。服务可以但不需要定义适用于活动的状态反馈和命令的列表。

如本文所使用的，术语“场景”指的是在被激活时以预定义方式控制家庭自动化系统的一个或多个设备的一组指令。可以但不需要在家庭自动化系统的初始配置期间定义场景。

如本文所使用的，术语“媒体内容”指的是记录、广播和/或流式传输音频和/或视频。媒体内容可以包括电缆或卫星电视台、流（streaming）或广播无线电台、存储的电影或电视演出、存储的音乐等。

如本文所使用的，术语“意图”指的是能够存储由语音识别引擎识别的关键短语与响应于该关键短语而执行的动作之间的关系的数据结构。

示例性家庭自动化系统

图1是可操作用于关于建筑物（例如，住宅寓所或商业建筑）而控制设备的家庭自动化系统的示例性架构100的框图。在系统的核心处的是被耦合到家中局域网（LAN）（例如，Wi-Fi网络）150的主控制器110。主控制器可以包括硬件部件，诸如处理器、存储器和存储设备，其共同地存储并执行主软件111，该主软件111被配置成监视、控制设备112—122的操作以及提供UI解释、系统管理和监视、与云服务180和移动设备160的同步、活动记录、活动预测及其它类型的功能。

主控制器110可以在其存储设备中保持家庭数据库130，其存储配置信息，该配置信息包括家庭自动化系统被配置成提供的服务、诸如针对家庭自动化系统的用户配置的场景之类的用户内容、与家庭自动化系统的用户相关联的媒体内容（例如，喜好）、指示家庭自动化系统的当前条件的系统状态信息以及其它类型的数据。家庭数据库130可以进一步保持家庭自动化系统中的历史活动的记录。家庭数据库的此类部分可以称为历史数据库132。应理解的是在某些替换实施例中，历史数据库132可以是单独数据库而不是家庭数据库130的一部分，并且可以由云服务180保持在主控制器110的存储设备中或者在别处。

家庭自动化系统的设备112—122可以包括照明设备112，诸如照明控制器、灯模块、调光器模块、开关、键区、风扇控制器等；安全设备114，诸如家庭监视器/相机、运动传感器、家庭保健传感器、相关控制器等；音频设备116和视频设备118（共同地A/V设备），诸如A/V设备控制器、红外（IR）增强器（blaster）、矩阵开关、媒体服务器、音频放大器、电缆箱等；电子门锁120及其它类型的马达或继电器操作设备；HVAC设备122，诸如恒温器；以及其它类型的设备。

取决于实施方式，家庭自动化系统的设备112—122的通信能力可以改变。例如，设备中的至少某些可以包括将使得其能够经由家中LAN 150与主控制器110及其它设备通信的LAN接口两者。同样地，其它设备可以仅具有用于有线或点到点无线通信的端口或收发机（例如，RS-232端口、红外（IR）收发机、继电器控制端口、通用输入/输出（GPIO）端口等）并使用此类端口与主控制器110及其它设备通信。此外，某些设备可以包括LAN接口（例如，Wi-Fi接口），但未被配置成直接地通过家中LAN 150与主控制器110通信，而是替代地首先经由因特网170和第三方基础设施190与云服务180通信。应理解的是虽然在图1中将HVAC设备122示为可以以此方式通信的一个类型的设备的示例，但是其它类型的设备112—122可以替换地使用此通信方法，并且反之亦然。

用户可以使用通过家中LAN 150（例如，经由Wi-Fi）来与主控制器110或者直接地与主控制器110（例如经由IR或射频RF信号）通信的遥控装置140来控制家庭自动化系统。遥控装置140可以包括硬件部件，诸如处理器、存储器和存储设备，其存储并执行软件（例如，应用程序（app）），除了其它功能之外，该软件被配置成与主控制器110和云服务180对接、生成并显示家庭自动化控制UI（包括语音控制UI），并且识别用户话音输入（例如，使用语音识别引擎）。除了其它部件之外，遥控装置140还可以包括用于示出家庭自动化控制UI（包括语音控制UI）的显示屏（例如，触摸屏）和用于接收用户话音输入的扩音器。

用户可以进一步使用经由家中LAN 150与主控制器110通信的移动设备160或者使用到因特网170的移动数据连接来控制家庭自动化系统。移动设备160可以包括硬件部件，诸如处理器、存储器和存储设备，其存储并执行应用程序162（例如，移动应用程序），除了其它功能之外，该应用程序162被配置成与主控制器110和/或云服务180对接、生成并显示家庭自动化控制UI（包括语音控制UI），并且识别用户话音输入（例如，使用语音识别引擎）。除了其它部件之外，移动设备160还可以包括用于示出家庭自动化控制UI（包括语音控制UI）的显示屏（例如，触摸屏）和用于接收用户话音输入的扩音器。

主控制器110和移动设备160可以经由因特网170与云服务180和主应用程序接口（API）182和移动API 184通信。除了其它功能之外，云服务180可以提供对家庭自动化控制的远程访问、家庭数据库130的持久性备份（将数据存储在配置数据库186中）、到第三方基础设施的接口（经由第三方适配器188）、用户简档和使用跟踪（将数据存储在用户数据库189中）、用于空中更新的机制、主机崩溃报告以及许可管理。

活动记录

图2是示出了可以将家庭自动化系统中的历史活动的记录作为事件保持在历史数据库132中的示例性主软件111（包括主活动记录软件200）的框图。软件200可以包括活动过程210，其经由过程间通信（IPC）从其它软件（例如，在主控制器110上）接收关于被激活的服务、被激活的场景、由家庭自动化系统呈现的媒体内容等的消息。活动过程210可以将这些消息向前传递至消息路由器过程220。活动过程210可以从消息路由器过程220将对关于家庭自动化系统中的活动的请求的响应接收回来。活动过程210可以将这些响应传递到其它软件，诸如预测过程，如下面进一步讨论的。

消息路由器过程220执行多个功能，包括将来自活动过程210的消息变换成事件230、将事件230路由至记录器接口250以及将对请求的响应路由回到活动过程210。事件230是保持描述家庭自动化系统中的历史活动的信息的对象，包括被激活的服务、被激活的场景、所呈现的媒体内容的类型等。每个事件230可以包括指示触发事件的用户的用户性质、描述事件的类型的类型性质、将相似类型的事件集合在一起的群组密钥、描述被激活的服务的服务性质（或者如果事件未涉及到服务则为空）、指示事件发生的时间的时间性质（包括周中日和日中时）以及存储附加信息的自变量（argument）性质。

请求240是表示来自客户端过程的用于关于可以从记录器260—270可获得的家庭自动化系统中的活动的数据的查询的对象。可以发出请求240的其它客户端过程是预测过程，如下面更详细地讨论的。

除了其它使用之外，记录器接口250可以提供到接受事件230和请求240的记录器过程（诸如馈送过程260和历史过程270）的接口。馈送过程260可以生成活动馈送，其提供家庭自动化系统中的事件230的简要历史并将其向前传递至云服务180。历史过程270可以将事件230存储在历史数据库132中，记录包括用户、类型、群组密钥、服务、时间和自变量的性质。

语音控制

如上文所讨论的，家庭自动化系统可以是语音控制的，使得响应于话音输入，对应用户接口动作被触发。此类语音控制可以由语音识别引擎实现，该语音识别引擎被配置成识别有限数目的关键短语，其每个与家庭自动化系统中的动作相关联（例如，以激活服务、激活场景、呈现媒体内容等）。

图3是示出了可以在遥控装置140或移动设备160上执行的示例性应用程序162（包括语音识别引擎300）的框图。语音识别引擎300可以包括执行多种不同功能的语法过程310。语法过程310的一个功能可以是构建意图列表320（例如，被结构化为意图查找表）。每个意图包括被语音识别引擎识别的与由家庭自动化系统响应于关键短语而执行的动作配对的关键短语。动作可以包括控制家庭自动化系统控制UI的一个或多个方面的UI动作370和控制家庭自动化系统的服务、场景、媒体内容或其它操作的系统动作380。可以使用从家庭数据库130获得的数据来动态地构建意图列表320。该数据可以包括配置信息330，诸如家庭自动化系统被配置成提供的服务的指示；用户内容340，诸如在家庭自动化系统中定义的场景或与用户相关联的媒体内容（例如，喜好）；以及系统状态350，诸如活动服务的指示。可以使动态构建适合于当前用户的身份和用户位于其中的建筑物的房间（例如，基于如在特定房间中的遥控装置140或移动设备160的动态确定位置或遥控装置140或移动设备160到特定房间的绑定）。动态构建可以向列表添加与当前配置信息330、用户内容340、系统状态350、用户和房间相关的意图，同时省略不适用的意图（例如，用于在房间中当前未配置的服务、用于在房间中未定义的场景、用于并非当前用户的喜好的用户内容、用于除当前系统状态之外的操作条件等的意图）。语法过程310可以持续地监视配置信息330、用户内容340、系统状态350、用户和房间，并且根据需要重新构建意图列表。为了改善效率，可以仅重新构建受到变化影响的意图列表的那些部分（例如，部分更新）。

语法过程310可以执行的另一功能是确认意图的关键短语以确保其被识别器过程360可识别。其关键短语未被确认的意图可以被从意图列表删除。一旦被确认，语法过程310可以将意图输出到识别器过程360。识别器过程360可以将话音输入（例如，经由遥控装置140或移动设备160的扩音器接收）与意图列表的关键短语进行比较，并且在匹配时触发对应动作。

更进一步地，如下面更详细地讨论的，语法过程310还可以在选择其关键短语将在语音控制UI中被显示为关键短语建议的意图中起作用。

图4是可以动态地构建的意图的示例性列表的关键短语400的示例性列表。可以将意图分类成多个种类，包括服务意图、场景意图、喜好意图、命令意图和导航意图。可以将服务意图确定范围（scope）至房间，包括与影响房间中的服务的动作配对的关键字。可以将服务意图的关键短语格式化为“服务”，其中单独地提供服务的名称（例如，“苹果电视”、“蓝光”、“有线电视（cable）”等）或者作为“观看服务”，其中服务的名称前面是命令“观看”（例如，“观看苹果电视”、“观看蓝光”、“观看有线电视”等）。可以将这些关键短语与激活服务的音频/视频版本的动作相关联。还可以将服务意图的关键短语格式化为“收听服务”，其中服务的名称前面是命令“收听”（例如，“收听苹果电视直播”、“收听CD”、“收听收音机”等）。可以将这些关键短语与激活服务的仅音频版本的动作（如果可用的话）相关联。

场景意图可以包括与对当前用户的场景进行激活、安排或取消安排的动作配对的关键字。可以将场景意图确定范围至当前用户，包括与影响与用户相关联的场景的动作配对的关键字。可以将场景意图的关键短语格式化为“场景”，其中单独地提供场景的名称（例如，“宴会”、“晚安”、“游戏时间”等）。可以将这些关键短语与激活场景的动作相关联。还可以将场景意图的关键短语格式化为“安排场景”，其中场景的名称前面是命令“安排”（例如，“安排宴会”、“安排晚安”、“安排游戏时间”等）。可以将这些关键短语与激活场景的安排（如果其已被配置的话）的动作相关联。此外，还可以将场景意图的关键短语格式化为“取消安排场景”，其中场景的名称前面是命令“取消安排”。可以将这些关键短语与将场景的安排（如果有效的话）解激活的动作相关联。

喜好意图可以包括与呈现由当前用户选择的一个或多个类型的媒体内容的动作配对的关键字。可以将喜好意图确定范围至当前用户和房间两者，包括与影响存在于房间中且与用户相关联的媒体内容的动作配对的关键字。喜好意图的动作可以首先激活服务，并且然后设定频道或选择与该服务一起使用的媒体文件或流。可以将喜好意图的关键短语格式化为“服务”，其中单独地提供服务的名称（例如，“ABC”、“CBS”、“CNN”等）或者“观看服务”，其中服务的名称前面是命令“观看”（例如，“观看ABC”、“观看CBS”、“观看CNN”等）。可以将这些关键短语与激活被设定到对应频道（或使用对应媒体文件或流）的服务的音频/视频版本的动作相关联。还可以将喜好意图的关键短语格式化为“收听服务”，其中服务的名称前面是命令“收听”。可以将这些关键短语与激活被设定到对应频道（或使用对应媒体文件或流）的服务的仅音频版本（如果可用的话）的动作相关联。

命令意图可以包括与发送出可与家庭自动化系统的当前状态（即上下文）有关的单个命令的动作配对的关键字。可以将命令意图确定范围至房间。命令意图的关键短语可以是来自预定义命令列表，例如包括与增加或降低房间中的光水平的动作配对的关键短语（诸如“更亮”或“更暗”）或者例如包括与降低或增加房间中的温度的动作配对的关键短语（诸如“我热”或“我冷”）。

导航意图可以包括与在家庭自动化控制UI中提供导航快捷方式（shortcut）的动作配对的关键字。导航意图在范围方面可以改变，某些是全局的（global），而其它的取决于有效（active）服务或房间。示例性导航意图可以包括与要切换至家庭自动化控制UI中的当前有效服务（如果可用的话）的键区屏幕的动作配对的关键短语“键区”。另一示例性导航意图可以包括与要切换至家庭自动化控制UI中的场景捕捉屏幕的动作配对的关键短语“捕捉”。

应理解的是可以在家庭自动化系统中提供各种各样的其它类型的意图。

基于历史的关键短语建议

可以利用历史数据库132和意图列表320来产生在给定用户的历史使用模式的情况下可能对用户有用的关键短语建议。这些基于历史的关键短语建议可以在遥控装置140或移动设备160上的语音控制UI中显示以向用户提示关于可以产生期望结果的话音输入。

图5是主软件111的预测过程510和应用程序162的示例性语音建议软件500的框图。最初，预测过程510可以向活动过程210发出一个或多个请求以确定（基于历史数据库132）当家庭自动化系统处于与其当前条件类似的条件中时的各种类型的事件的频率。此类相似性可以是基于时间（例如，日中时和周中日两者），使得请求寻求在与当前周中日相同的周中日、在包括任何周中日的当前日中时的时间窗中、在包括相同周中日的当前日中时的时间窗中或者基于某些其它时间相关准则的事件的频率。预测过程510可以对响应于该请求返回的结果应用评分。该评分可以是基于频率以及在选择事件中使用的时间窗的长度，其中较短的时间窗引起比较长时间窗更高的分数。此外，可以基于事件的类型来调整评分，其中指示更特定用户动作的事件类型接收比指示更不特定的用户动作的事件更高的分数。然后可以将评分结果作为预测数据集提供到遥控装置140或移动设备160上的语音建议软件500。

语音建议软件500可以包括用来与主控制器110（其将预测数据集传递至建议过程530）对接的通信API 520。建议过程530获取预测数据集并将其处理成对语法过程310有用的形式，例如选择预定数目的最频繁事件。此类处理可以将预测数据集变换成可以容易地与来自意图列表320的意图相关联的形式。已处理的预测数据集和意图列表320被提供到语法过程310，其将来自预测数据集的事件与来自列表320的意图相关联，以选择意图。来自此类所选意图的至少关键短语然后被提供到语音U过程540。语音UI过程540在遥控装置140或移动设备160的显示屏上将所选意图的关键短语显示为语音控制UI中的关键短语建议。

图6是可以在遥控装置140或移动设备160上显示的示例性语音控制UI 600的屏幕快照。可以与到用户的用以使其试图作为话音输入的提示相结合地在列表中显示关键短语建议610。在某些实施方式中，可以在遥控装置140或移动设备160的触摸屏上显示语音控制UI 600，并且关键短语建议还可以充当可选择按钮。在按钮上的触摸可以被视为等价于说出关键短语，并且触发意图的对应动作。

概述和结论

图7是可以实现以提供基于历史的关键短语建议的步骤序列的流程图。步骤序列700提供上文所讨论的各种操作的高级概述，但省略了某些细节以更好地举例说明总体操作流程。在步骤710处，主控制器110上的主活动记录软件200（具体地，与活动过程210和消息路由器过程200一起工作的历史记录器270）可以构建保持已发生的事件的历史数据库132。每个事件可以例如指示被激活的一个或多个服务、被激活的一个或多个场景或所呈现的一个或多个类型的媒体内容。在步骤720处，主控制器110上的预测过程510（与活动过程210一起工作）可以基于家庭自动化系统的当前条件（例如，时间）来选择历史数据库132的事件的子集以产生预测数据集。在步骤730处，遥控装置140或移动设备160上的语音建议软件500（具体地，建议过程530和语法过程310）基于预测数据集可以从意图列表中选择一个或多个意图，其中每个意图包括与响应于关键短语而执行的动作配对的语音识别引擎300所识别的关键短语。在步骤740处，语音建议软件500（具体地，语音UI过程540）可以在遥控装置140或移动设备160的显示屏上显示语音控制UI 600，其将来自一个或多个所选意图的关键短语呈现为关键短语建议610。最后，在步骤750处，响应于来自用户的话音输入，遥控装置140或移动设备160上的语音识别引擎300（具体地，识别器过程360）可以针对意图列表的关键短语比较话音输入以找到匹配意图，并触发与匹配意图相关联的动作。

应理解的是可以对上文所讨论的步骤序列和上文提供的公开的其它部分进行各种修改和改变。虽然上文提供的实施例涉及到包括多种不同类型的设备（诸如照明设备、安全设备、A/V设备、电子门锁、HVAC设备等）的家庭自动化系统，但应记住的是本技术可以适于与更有限类型的家庭自动化系统一起使用。例如，可以将所述技术与仅提供照明控制的家庭自动化系统（即，照明控制系统）、仅提供A/V控制的家庭自动化系统（即，A/V控制系统）等一起使用。

此外，虽然上文提供的公开暗示各种软件过程可以在特定设备上（诸如在主控制器110、遥控装置140或移动设备160等上）执行，但是应理解的是可以在不同的硬件设备上执行软件过程，包括在作为云服务180的一部分的基于云的硬件上。

另外，虽然上文描述了基于历史的关键短语建议可以是基于已在家庭自动化系统本身中发生的事件的历史，但应理解的是还可以考虑已在其它家庭自动化系统中发生的事件。例如，云服务180可以将来自多个家庭自动化系统的事件聚合，并且可以对此组合事件集应用预测算法以形成关键短语建议。通过考虑较大的用户基础，在单个家庭自动化系统的情况下可能不可辨别的各种使用模式可以变成统计上显著的。

此外，应理解的是可以用硬件来实现在上文建议成用软件实现的功能中的至少某些。一般而言可以用软件、硬件或其各种组合来实现功能。软件实施方式可以包括存储在非临时电子设备可读介质（例如，非临时计算机可读介质）（诸如易失性或持久性存储器、硬盘、紧凑式磁盘（CD）或其它有形介质）中的电子设备可执行指令（例如，计算机可执行指令）。硬件实施方式可包括逻辑电路、专用集成电路和/或其它类型的硬件部件。此外，组合的软件/硬件实施方式可以包括存储在非临时电子设备可读介质中的电子设备可执行指令以及一个或多个硬件部件（例如，处理器、存储器等）两者。最重要的是，应理解上述实施例意图仅仅作为示例来被理解。

Claims (24)

1.一种用于提供用于家庭自动化系统的语音控制的基于历史的关键短语建议的方法，包括：

在存储设备上构建保持在家庭自动化系统中已发生的事件的历史数据库，每个事件指示被家庭自动化系统激活的一个或多个服务、被其激活的一个或多个场景或由其呈现的一个或多个类型的媒体内容；

基于家庭自动化系统的当前条件来选择历史数据库的事件的子集以产生预测数据集；

基于预测数据集，从意图列表中选择一个或多个意图，其中每个意图包括与响应于关键短语而执行的动作配对的语音识别引擎所识别的关键短语；以及

在家庭自动化系统的遥控装置或移动设备上的用户接口中向当前用户显示来自一个或多个所选意图的关键短语作为关键短语建议。

2.权利要求1的方法，其中历史数据库中的每个事件与时间相关联，家庭自动化系统的当前条件包括当前时间，并且所述选择是基于每个事件的时间与当前时间的比较。

3.权利要求2的方法，其中所述当前时间包括当前日中时和当前周中日，并且所述比较确定在与当前的周中日相同的周中日、在包括任何周中日的当前日中时的时间窗中或者在包括与当前周中日相同的周中日的当前日中时的时间窗中发生的历史数据库中的事件。

4.权利要求1的方法，其中所述预测数据集是被评分预测数据集，并且所述选择还包括确定不同类型的事件的频率并至少部分地基于该频率对不同类型的事件评分。

5.权利要求4的方法，其中所述选择至少部分地基于每个事件的时间与时间窗的比较，并且所述评分是基于时间窗的长度，其中较短的时间窗引起比较长时间窗更高的分数。

6.权利要求4的方法，其中由基于事件的类型的因数来调整所述评分，其中指示更特定用户动作的事件类型接收比指示更不特定的用户动作的事件更高的分数。

7.权利要求1的方法，还包括：

基于用于家庭自动化系统的配置信息、在家庭自动化系统中定义的用户内容或家庭自动化系统的系统状态中的至少一个来动态地生成意图列表。

8.权利要求1的方法，还包括：

基于当前用户或正被控制的房间来动态地生成意图列表。

9.权利要求1的方法，还包括：

将历史数据库存储在通过网络与遥控装置或移动设备通信的主控制器上。

10.权利要求1的方法，其中意图列表包括一个或多个服务意图，其动作在被执行时激活房间内的一个或多个服务。

11.权利要求1的方法，其中意图列表包括一个或多个场景意图，其动作在被执行时激活一个或多个场景。

12.权利要求1的方法，其中意图列表包括一个或多个喜好意图，其动作在被执行时呈现与当前用户相关联的一个或多个类型的媒体内容。

13.权利要求1的方法，还包括：

在语音识别引擎处从遥控装置或移动设备的扩音器接收话音输入；

由语音识别引擎针对意图列表的关键短语而比较所述话音输入以找到匹配意图；以及

触发与匹配意图相关联的动作。

14.权利要求13的方法，其中所述动作是在家庭自动化系统中激活一个或多个服务、激活一个或多个场景或呈现一个或多个类型的媒体内容的系统动作。

15.权利要求13的方法，其中所述动作是控制家庭自动化系统控制UI的一个或多个方面的用户接口（UI）动作。

16.一种提供用于语音控制的基于历史的关键短语建议的家庭自动化系统，包括：

主控制器，其被耦合到并被配置成控制建筑物内的一个或多个音频/视频（A/V）设备、照明设备、暖通和制冷（HVAC）设备或安全设备以提供家庭自动化，所述主控制器包括：

主活动记录软件，其构建历史数据库，所述历史数据库保持已在建筑物中发生的事件，每个事件指示被激活的一个或多个服务、被激活的一个或多个场景或者被呈现的一个或多个类似的媒体内容，和

预测过程，其被配置成基于家庭自动化系统的当前条件来选择历史数据库的事件的子集以产生预测数据集；以及

遥控装置或移动设备，其通过网络与主控制器通信，所述遥控装置或移动设备包括：

语音识别引擎，以及

语音建议软件，其被配置成基于预测数据集从意图列表中选择一个或多个意图，其中每个意图包括与响应于关键短语而执行的动作配对的语音识别引擎所识别的关键短语，并且在遥控装置或移动设备的屏幕上向家庭自动化系统的当前用户显示来自一个或多个所选意图的关键短语作为关键短语建议。

17.权利要求16的家庭自动化系统，事件历史中的每个事件至少包括与事件相关联的时间的指示，家庭自动化系统的当前条件包括当前时间，并且所述选择是基于每个事件的时间与当前时间的比较。

18.权利要求16的家庭自动化系统，其中所述语音建议软件包括语法过程，其被配置成基于用于家庭自动化系统的配置信息、在家庭自动化系统中定义的用户内容或家庭自动化系统的系统状态中的至少一个来动态地生成意图列表。

19.权利要求16的家庭自动化系统，其中所述语音建议软件包括语法过程，其被配置成基于当前用户或被控制的房间而动态地生成意图列表。

20.权利要求16的家庭自动化系统，其中所述语音识别引擎包括识别器过程，其被配置成从遥控装置或移动设备的扩音器接收话音输入，针对意图列表的关键短语比较该话音输入以找到匹配意图，并且触发与匹配意图相关联的动作。

21.一种存储软件的非临时电子设备可读介质，所述软件当在一个或多个处理器上执行时可操作用于：

接收包括在与当前时间相关联的先前时间在家庭自动化系统中发生的事件的预测数据集，每个事件指示被家庭自动化系统激活的一个或多个服务、被其激活的一个或多个场景或由其呈现的一个或多个类型的媒体内容；

基于该预测数据集，从家庭自动化系统的语音识别引擎所使用的关键短语列表中选择一个或多个关键短语；

向用户显示所选的一个或多个关键短语作为一个或多个关键短语建议；

从用户接收对应于一个或多个关键短语选择中的一个的话音输入；

针对被语音识别引擎用来找到匹配的关键短语列表比较话音输入；以及

触发与匹配关键短语相关联的动作，其中所述动作在家庭自动化系统中激活一个或多个服务、激活一个或多个场景或呈现一个或多个类型的媒体内容。

22.权利要求22的非临时电子设备可读介质，其中关键短语的列表是意图列表的一部分，其中每个意图将关键短语和响应于该关键短语而执行的动作配对，并且一个或多个关键短语的选择包括一个或多个意图的选择。

23.权利要求22的非临时电子设备可读介质，其中所述软件当在一个或多个处理器上执行时进一步可操作用于：

基于用于家庭自动化系统的配置信息、在家庭自动化系统中定义的用户内容或家庭自动化系统的系统状态中的至少一个来动态地生成意图列表。

24.权利要求22的非临时电子设备可读介质，其中所述软件当在一个或多个处理器上执行时进一步可操作用于：

基于当前用户或被控制的房间来动态地生成意图列表。