CN107430724A - 活动触发 - Google Patents

活动触发 Download PDF

Info

Publication number
CN107430724A
CN107430724A CN201680018932.6A CN201680018932A CN107430724A CN 107430724 A CN107430724 A CN 107430724A CN 201680018932 A CN201680018932 A CN 201680018932A CN 107430724 A CN107430724 A CN 107430724A
Authority
CN
China
Prior art keywords
user
activity
action
condition
triggered
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680018932.6A
Other languages
English (en)
Inventor
弗格斯·杰勒德·赫尔利
罗宾·杜瓦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN107430724A publication Critical patent/CN107430724A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/10Office automation; Time management
    • G06Q10/109Time management, e.g. calendars, reminders, meetings or time accounting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44Arrangements for executing specific programs
    • G06F9/445Program loading or initiating
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00Arrangements for program control, e.g. control units
    • G06F9/06Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/46Multiprogramming arrangements
    • G06F9/54Interprogram communication
    • G06F9/542Event management; Broadcasting; Multicasting; Notifications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/12Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Data Mining & Analysis (AREA)
  • General Business, Economics & Management (AREA)
  • Tourism & Hospitality (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Telephonic Communication Services (AREA)

Abstract

用于动作项、用户定义动作、和触发活动的方法、系统和设备,包括在计算机存储介质上编码的计算机程序。在一个方面中,一种方法包括:在用户装置处接收用户定义动作的输入,该用户定义动作包括多个词项;通过该用户装置接收对用户定义触发活动的选择,该触发活动指示用于触发要呈现的该用户定义动作的活动的用户行为;确定该用户装置所位于的环境的至少一个环境条件;基于用户信息和该至少一个环境条件来确定通过该触发活动指示的该活动的用户行为;以及通过该用户装置向该用户的该用户装置呈现该用户定义动作的通知。

Description

活动触发
技术领域
本发明涉及数据处理和通知递送,并且具体地但不排他地涉及处理与动作项、用户定义动作和触发活动相关的数据。
背景技术
基于云的服务、搜索引擎、以及其它服务和媒体的出现在过去十年期间已大大扩展了用户装置的实用性。尤其是移动装置和智能电话的许多用户装置现在提供除了语音和数据访问之外的服务和应用。此外,随着处理系统方面的最近进步,许多用户现在想要利用其用户装置流畅且直观的用户体验。
可被用户利用的许多这些应用服务通过使用命令输入进行实例化。一个这样的服务是动作(例如,提醒)的设定。例如,用户可以将输入[提醒我今晚买牛奶]说出(或者键入)到智能手机中,并且该智能手机使用命令解析应用(或者可替选地,与命令解析服务进行通信)将会调用可以从用户恳求附加信息的动作过程。这样的信息可以在用户期望在特定时间被提醒的情况下包括时间,并且/或者在用户期望在用户到达位置时被提醒的情况下包括位置。虽然此类动作的设定是非常有用的且是相对流畅的用户体验,但是用户常常忘记做他们想要做的事情,因为他们不能够基于他们需要在里面以能够完成手上任务的情景设置提醒。
发明内容
一般而言,在本说明书中描述的主题的一个创新方面能够用一种方法加以实施,该方法包括以下动作:在用户装置处接收用户定义动作的输入,该用户定义动作包括多个词项;通过该用户装置接收对用户定义触发活动的选择,该触发活动指示用于触发要呈现的该用户定义动作的活动的用户行为;确定该用户装置所位于的环境的至少一个环境条件;基于用户信息和该至少一个环境条件来确定通过该触发活动指示的该活动的用户行为;以及通过该用户装置向该用户的该用户装置呈现该用户定义动作的通知。这方面的其它实施例包括相对应的系统、设备和计算机程序,该计算机程序被配置成执行该方法的该动作,被编码在计算机存储装置上。
能够实现本说明书中描述的主题的特定实施方式,以便实现以下优点中的一个或多个。
能够按照直观格式以高效的方式输入指定用于执行特定任务的提醒的数据,从而表达日常活动而不是要求指定一系列参数的复杂过程,这促进了提醒的配置。这因此能够减少用户必须与其装置、设备或系统交互,以便配置提供提醒的时间。这可以减少用户的装置的显示器是活动的总时间,并且因此,可以减少电力使用。在移动装置的情景中,这可以节省电池电力并且可以帮助降低电池需要充电的频率。除了减少电力使用之外,本文中描述的方法、设备和系统减少装置的用户界面组件上的工作量,并且还可以用作对用户减少认知负担。
情况还可以是这样的,即因为用户的日常工作改变,所以预先指定的时间或位置可能变得不适于提醒,并且所以能够通过避免潜在冗余数据的存储,以及即使该日常工作改变,也存储指定很有可能维持与用户的日常工作相关的触发的数据来增加本发明的有效性。这样的好处改进了提醒通知的灵活性和可靠性。这样做的必然好处是,可以减少对配置并存储多个提醒以在第一提醒由于指定参数不适当而丢失的情况下用作保护措施的需要。
通过基于环境条件来确定活动的行为,能够准确地标识该活动的行为,这还改进提醒通知的可靠性。
在下面描述的主题的实施方式在创建动作并被通知动作(例如,提醒)时允许直观且更准确的用户体验。通过用户对他们想要在向他们提供有用户定义动作(像是,提醒)时执行的一个或多个活动的选择允许用户在他们更可能将会具有时间、资源、或其它手段来完成用户定义动作时定制任务并向他们提醒任务。
例如,如果用户在他们正在[驾车]时选择[买果汁]的用户定义动作,则用户是在他们的车辆里,在他们的车辆里在他们能够在他们出去时产生到商店行程。在许多情形下这将使用户免于必须为针对活动触发指定特定时间或者搜索特定位置。这减少了必要的用户要保持特定日程表,并且能够在系统确定活动的存在使得他们更有可能将会具有时间、资源或其它手段以完成用户定义动作的用户行为时,在灵活又适当的时间处完成向用户提供用户定义动作。
在以下附图和描述中阐述了本说明书中描述的主题的一个或多个实施例的细节。本主题的其它特征、方面和优点将根据本说明书、附图和权利要求书变得显而易见。
附图说明
图1是其中为用户定义动作和活动触发而处理命令输入的示例环境的框图。
图2是当确定要执行触发活动时用于创建并被通知用户定义动作的示例过程的流程图。
图3A是在用户装置处的、其中创建用户定义动作的用户界面的图示。
图3B是在其中用户通过在动作限制的区域中选择来创建动作限制的用户装置处的用户界面的图示。
图3C是在其中提供触发活动列表的用户装置处的用户界面的图示。
图3D是在其中在用户定义动作下呈现触发活动的用户装置处的用户界面的图示。
图4A是在其中创建活动条件的用户装置处的用户界面的图示。
图4B是在其中活动条件已被添加到动作项的用户装置处的用户界面的图示。
图5是在其中提供用户定义动作的列表的用户装置处的用户界面的图示。
图6是用于基于在不同时间段处的环境来确定至少一个环境条件的示例过程的流程图。
图7是用于为了确定触发活动的用户行为而使用置信度评分和置信度评分阈值的示例过程的流程图。
图8是示例移动计算装置的框图。
在各个附图中相同的附图标记和标号指示相同的元件。
具体实施方式
动作处理系统促进创建用户定义动作和触发活动。在操作中,该动作处理系统从用户接收描述用户定义动作的词项的集合的输入。用户能够选择一个或多个触发活动,该一个或多个触发活动指示要由用户行为以触发要向用户呈现的用户定义动作的活动。附加地,用户能够选择一个或多个活动条件,该一个或多个活动条件指示要在确定用户已执行通过触发活动指示的活动中满足的条件。例如,用户可以在“步行(Walking)”的触发活动情况下选择“打电话给Larry(Call Larry)”的用户定义动作。该用户定义动作将不会被触发以在用户装置上向用户呈现,直到该动作处理系统确定了用户在“步行(Walking)”。另外,在一些实施方式中,活动触发可以包括用以触发用户定义动作的附加情境信息。例如,基于先前示例,活动触发可能包括步行到特定地点(例如,步行回家或步行到杂货店)。基于在下面进一步描述的环境条件、用户历史和用户情景,该动作处理系统能够确定是否已存在活动触发的用户行为。
附加地,基于以上先前示例,用户可以创建除了满足活动之外还需要满足的活动条件。示例活动条件可能是“星期六下午(Saturday afternoon)”的时间段。因此,基于包括活动条件,用户定义动作将不会被触发以向用户呈现,直到动作处理系统确定了用户在“星期六下午(Saturday afternoon)”“步行(Walking)”。
为了确定是否存在触发活动的用户行为,动作处理系统能够例如基于用户的用户装置来评估用户的至少一个环境条件。该环境条件可以由与用户装置或动作处理系统相关联的传感器来分析,并且能够包括例如传感器以监视移动和速度、风速、光和光变化性、温度、湿度、高度、噪声水平和噪声变化等。
附加地,该动作处理系统能够分析用户信息以确定触发活动的用户行为。如本文中所使用的是,用户信息是与感测的环境数据相结合地使用以确定触发活动的用户行为的信息。用户信息是从除生成传感器数据的传感器以外的源收集或者接收的信息。例如,用户信息能够包括包含过去的用户数据的用户历史。例如,用户历史可以包括与用户装置相关联的用户的先前动作、活动和位置。
另外,用户信息能够包括指示当前用户数据的用户情景,所述当前用户数据可以包括天气和用户装置的位置以及用户的在用户装置和/或用户的另一装置上的日历。例如,如果来自针对用户装置的位置的天气服务的天气数据指示温度为华氏50度并且用于确定用户装置周围的环境条件的传感器指示温度为72华氏度,则动作处理系统能够使用此用户信息和传感器数据来确定用户的用户装置106是在室内。
该动作处理系统能够被实现在用户装置中或者在与用户装置分离的计算机系统(诸如服务器系统)中。在后者的情况下,服务器系统从用户装置接收输入并且向用户装置发送数据,以处理并设定动作项。在下面对这些特征和附加特征进行更加详细的描述。
图1是其中为动作项、用户定义动作、和触发活动而处理命令输入的环境100的框图。计算机网络102(诸如互联网)或其组合提供用于电子装置与系统之间的数据通信。计算机网络102还可以包括一个或多个无线网络103,或者借助于一个或多个网关与一个或多个无线网络103进行数据通信。
用户装置106是在用户的控制下并且能够通过网络102请求和接收资源、与其它用户装置建立通信信道(例如,语音通信)以及还能够执行其它动作的电子装置。示例用户装置106包括能够通过网络102来发送和接收数据的个人计算机、移动通信装置、和其它装置。在图1的示例中,用户装置106是智能电话。在下面参考图8对示例智能电话进行描述。用户装置106可以借助于与网络102和103的有线和无线连接、通过网络102和103通信。如参考图8所描述的,用户装置可以能够为各种程序和能力而执行装置动作的集合。
用户装置106与用户帐户(诸如由提供多个服务的云服务提供者112托管的帐户)相关联。这些服务可以包括web邮件、社交网络、消息传送、文档存储和编辑、电子助理服务等。帐户数据114可以存储特定于用户装置106的帐户的数据。另外,尽管在图1中仅示出了一个用户装置106,然而可以包括多个用户装置106。
动作处理系统120接收来自用户装置的命令输入并且处理所述输入,以确定那些(若有的话)动作将会响应于该输入而被采取。虽然在图1中动作处理系统120被作为单独的实体而示出,但是能够在云服务提供者112中或者甚至在用户装置106中实现动作处理系统120。
输入可以调用如由动作处理系统120确定的各种动作。例如,输入可以被解释为搜索查询命令,在此情况下搜索查询被发送到搜索服务。同样地,输入可以被解释为发起电话呼叫的命令,在此情况下用户装置106试图通过网络103建立语音通信。同样地,输入可以被解释为用户定义动作,在此情况下可以生成具有用户定义动作的动作项。在下面对生成动作项、用户定义动作、以及处理此类项进行更详细的描述。
在一些实施方式中,每个输入由输入解析器122处理,所述输入解析器122被编程为对所输入的词项进行解析并且确定应该采取什么动作(若有的话)。在一些实施方式中,输入解析器122可以访问语言模型以确定要采取那些命令或动作。此类语言模型可以是基于统计的,例如,模型可以包括指派给被确定为与特定命令语义上相关的特定单词和短语的权重,或者是基于规则的,例如描述用于特定命令的句子结构的语法。可以使用各种其它语言和文本输入处理系统。
如上所述,用户可以在用户装置106上输入命令,并且动作处理系统120处理命令输入以确定该命令输入是否分解为用户装置被配置成执行的用户装置动作。针对本文档的剩余部分,被处理的示例输入将会分解为基于操作的输入。因此,省略用于其它命令输入类型的其它命令处理特征的描述。
在一些实施方式中,动作处理系统120包括与输入解析器122进行通信的动作处理器124。动作处理器124还访问动作数据126和用户信息数据128。动作处理器124能够接收在用户装置106上的、由用户设定的用户定义动作的用户输入。用户定义动作可以是例如要在用户装置上向用户呈现的提醒或可以完成的动作。用户定义动作可以包括多个词项,并且可以是例如“打电话给Larry(Call Larry)”、“洗车(Wash Car)”、“打扫房屋(Clean theHouse)”或任何其它动作。动作处理器124将会针对特定提醒将用户定义动作存储在动作数据126中。可以在动作数据126中存储有多个动作项AI1、AI2、...AIn,并且所述多个动作项中的每个可以具有为该动作项定义的一个或多个用户定义动作A1、A2、...。
附加地,所述多个动作项中的每个可以具有与该动作项相关联的一个或多个触发活动TA1、TA2、...TAn。触发活动可以指示用于触发要呈现的用户定义动作的活动的用户行为。活动的用户行为可以包括预测用户装置106的用户将会执行触发活动、用户装置106的用户正在执行触发活动、和/或用户装置106的用户已经执行触发活动。如在下面所讨论的是,用户历史和用户情景能够用于确定并分析何时存在动作的用户行为(包括将来的行为)。
触发活动可以是身体活动或情境活动。身体活动是可以直接从环境传感器数据(包括位置数据、音频数据、加速计数据)感测的活动。附加地,活动可以是基于由动作处理系统120生成的推理,所述动作处理系统120可以并入通过环境传感器数据感测到的信息,以推理由用户装置106的用户执行的活动。示例包括步行、驾车、骑自行车、跑步、游泳等。情境活动是可以从环境传感器数据以及当与环境数据组合是指示活动时的其它数据推理的活动。示例包括阅读、看电视、烹饪、睡觉等。在一些实施方式中,可以选择多于一个活动。作为示例,用户可以将触发活动选择为“阅读(reading)”和“睡觉(in bed)”。然而,如果用户能够选择多于一个活动,则动作处理器124可以防止用户选择不能够同时做的两个或更多个活动(例如,“游泳(Swimming)”和“烹饪(cooking)”);然而,这样的配置不是必需的,并且在一些实施方式中,用户可以提供要在提供用户定义动作之前执行的触发活动的序列。在一些实施方式中,可以从提供给用户的列表中选择触发活动。
附加地,在一些实施方式中,用户可以提供与每个动作项的一个或多个触发活动和用户定义动作相关联的活动条件Ac1、Ac2、...Acn。可以为一个或多个动作项设定多个类型的活动条件。活动条件除了该活动之外还指定要在确定通过触发活动指示的活动的用户行为中满足的条件。例如,活动条件可以是一个或多个时间段条件、位置区域条件、或人接近条件等。时间段条件可以是日期、日期范围、时刻、或时刻范围等。例如,AI1可以包括“打电话给Larry(Call Larry)”的用户定义动作(A1)和“步行(Walking)”的触发活动(TA1),并且用户还可以包括“星期六下午(Saturday afternoon)”的活动条件(Ac1),其可以是关于特定星期六(例如,下一个星期六)、每个星期六、所选择的星期六、或星期六的模式(例如,每月的第一个星期六)的默认或用户设定的时间范围(例如,1PM-5PM)。基于动作项AI1的此示例,除非确定了如通过活动条件Ac1定义的在“星期六下午(Saturday afternoon)”“步行(Walking)”的触发活动(TA1)的用户行为,否则将不会触发用户定义动作“打电话给Larry(Call Larry)”(A1)。附加地,如先前描述的是,活动触发相对于活动可以是更特定的,并且活动触发可以包括用于该活动的更多情境的情景(例如,从工作场所步行回家)。
位置区域条件可以是特定位置(例如,房屋地址)周围的区域或者用户装置对于要满足的活动条件来说要处于内部或附近的位置的类型(例如,杂货店、机场、医院)。例如,位置区域条件可以是“近的杂货店(Near Grocery Store)”,其可以被定义为特定杂货店或任何杂货店。附加地,“近的(Near)”能够是通过不同的交通模式(例如,通过汽车、公共交通、步行)从所标识的位置离开的特定距离(例如,英尺或英里)或时间量。因此,如果用户定义动作被设定为“买杂货(Buy Groceries)”并且触发活动被设定为“驾车(Driving)”,则用户能够选择“近的杂货店(Near Grocery Store)”的附加条件。如果当用户在杂货店附近(在当前示例中包括用户在杂货店附近驾车)时动作处理器124确定触发活动被触发并且满足活动条件,则用户装置然后将会向用户通知用户定义动作“买杂货(Buy Groceries)”。相反,如果用户跑步出去并且是在杂货店附近,则将不会提醒用户买杂货,因为用户将会很可能针对用户跑步的其余部分不想携带杂货。
附加地,活动条件可以是人接近条件。如果用户的用户装置106离特定人或群体的标识的用户装置在一定距离内,则可以满足人接近条件。在一些实施方式中,用户装置106离标识的用户装置的距离可以由动作处理器124来提供或者用户可以能够调整该距离。另外,在一些实施方式中,为让动作处理器124识别特定人或群体的用户装置,用户装置106可能需要包括该特定人或群体作为联系人或者以其它方式标识该人或群体。然而,在其它实施方式中,动作处理器124能够标识用户装置106周围的特定人和群体的用户装置。例如,用户可以创建包括“讨论假期(Discuss vacation)”的用户定义动作、“吃晚餐(eatingdinner)”的触发活动以及“大卫(David)”的人接近条件的动作项。当动作处理器124确定用户正在“烹饪(cooking)”并且与“大卫(David)”在一起时用户装置106然后通知用户以“讨论假期(Discuss vacation)”。附加地,用户还可以包括时间段条件和/或位置区域条件。
用户装置106能够确定其中用户装置位于的环境的环境条件,并且根据所感测的数据,能够确定某些活动是否正在被执行。在一些实施方式中,用户装置106可以包括能够评估周围环境的传感器108。例如,传感器108可以监视移动和速度(例如,使用加速计)、风速、光和光变化性、温度、湿度、高度、噪声水平和噪声变化等。传感器108可以在用户装置106的内部内和/或在用户装置106的外部上,并且传感器108可以将由传感器108感测到的数据传送到用户装置106和/或动作处理器124。传感器108能够连续地或周期性地监视用户装置106的周围环境。
能够基于由传感器108进行的个别数据检测和/或由传感器108在不同时间处进行的数据检测来评估周围环境。例如,如果传感器108检测到在照明明亮且温度为70度的情况下以每小时7英里行进的用户装置106的移动,则传感器108能够提供用户装置106和/或动作处理器124检测到的数据,以评估与该用户装置相关联的用户的环境条件。针对上面提供的环境条件,用户装置106和动作处理器124能够使用该信息以及用户信息,以确定例如与用户装置106相关联的用户正在户外跑步。在一些实施方式中,环境条件可以由动作处理系统120的组件或者能够检测环境条件并与动作处理系统120或用户装置106通信的任何其它装置或组件来确定。例如,在一些实施方式中,传感器108可以被包括在能够感测并确定用户的信息和活动的不同组件中。
附加地,如先前提及的,可以使用并组合传感器108在不同时间处的检测数据,以确定用户装置106的环境条件。例如,在第一时间处,传感器108可以检测到未移动的用户装置106、高水平的人造光、和低噪声水平。在第二时间(例如,在第一时间之后的十分钟)处,传感器108可以检测到未移动的用户装置106、低水平的人造光、和高噪声水平。可以将来自不同时间的此传感器数据提供给用户装置106和/或动作处理器124,以确定与用户装置106相关联的用户的环境条件。基于以上示例,用户装置106和/或动作处理器124可以确定在第一时间与第二时间之间的、包括固定用户装置106的用户装置的环境条件,并且在人造照明和噪声水平中存在变化性。针对上面提供的环境条件,用户装置106和/或动作处理器124能够使用该信息以及用户信息,以确定例如与用户装置106相关联的用户正在看电视。
可以根据与用户相关联的用户信息数据128、用户装置106或还可以与用户信息数据128和/或用户装置106包括在一起的其它信息(例如,位置、天气、日历)确定与用户装置106相关联的用户的用户信息。能够根据用户历史和用户情景确定用户信息。
例如,用户历史可以包括针对描述与用户装置106相关联的用户的先前动作、活动和位置的数据。用户历史信息能够由动作处理器124使用,以确定与用户装置106相关联的用户的兴趣、偏好、日程表、和模式。例如,如果用户在许多场合醒来之后约三十分钟内带着用户装置106步行,则动作处理器124能够在其触发活动分析中使用该模式信息。因此,如果触发活动例如是“步行(Walking)”并且分析时间是在早晨,则动作处理器124能够把用户模式作为因素计入到确定用户是否在那时正带着用户装置106步行的分析中。用户历史还可以包括用户已在用户装置106上执行的动作和/或针对用户装置106应用的活动的水平以及在用户装置106上使用应用的时间。附加地,其它信息能够从用户历史被获得并被包括在用户历史中。
用户情景包括当前用户数据,该当前用户数据可以包括天气和用户装置106的位置,以及用户的在用户装置106和/或用户的另一装置上的日历。例如,如果用户装置106的位置中的天气指示温度为华氏50度并且用于确定用户装置106周围的环境条件的传感器108指示温度为72华氏度,则动作处理器124能够使用该信息,以确定用户的用户装置106在室内。附加地,用户情景可以包括用户正在用户装置106和/或在用户装置106上打开或者正被使用的应用上执行的动作。
用户情景可以包括例如指示用户装置106的浏览器中的内容(例如,食谱)的数据,或者用户情景可以指示阅读应用在用户装置106中被打开。此外,可以在确定应用当前在用户装置106的视口中还是在用户装置106的视口的后台中时在用户情景方面进行区分。例如,如果用户情景包括用户装置106在用户装置106的视口中以食谱打开网页,则用户情景能够将此用户信息提供给动作处理器124,以执行触发活动分析。基于先前示例,如果触发活动是“烹饪(cooking)”,则动作处理器124能够包括用于确定与用户装置106相关联的用户是否已触发了触发活动的用户信息和环境条件。此外,用户历史和用户情景可以用于确定是否存在触发活动的用户行为,并且可以基于由传感器108检测到的当前用户动作和用户情景以及用户历史的过去的活动和动作来进行推理。
另外,在一些实施方式中,为了确定是否已存在触发活动的用户行为,可以确定置信度评分,以指示触发活动被执行了的置信水平。例如,当用户情景包括用户装置106在用户装置106的视口中以食谱打开(或正打开)网页时可以由动作处理器124为“烹饪(cooking)”的触发活动确定置信度评分。如果用户装置106上的用户日历指示例如用户在此特定时间处被安排与“Larry”共进晚餐,则可以确定更高的置信度评分。此外,如果与“Larry”相关的人接近条件被包括在动作项中,并且动作处理器124确定“Larry”的用户装置在与用户相关联的用户装置106的接近范围内,则可能确定甚至更高的置信度评分。另外,在一些实施方式中,为了确定触发活动的用户行为,可以由动作处理器124定义阈值置信度评分,所述阈值置信度评分可以由动作处理器124或用户装置的用户来调整或者修改。
图2是当触发活动的用户行为已经发生时用于创建并被通知用户定义动作的示例过程200的流程图。过程200能够例如由用户装置106和/或动作处理器124来实现。在一些实施方式中,示例过程200的操作能够被实现为在非暂时性计算机可读介质上存储的指令,其中指令使数据处理设备执行示例处理200的操作。
在用户装置106处接收用户定义动作的输入(202)。动作处理器124能够接收在用户装置106上由用户设定的用户定义动作的用户输入。用户定义动作是用户在触发活动的用户行为被确定时想要被提醒或者执行的事情。用户定义动作可以是提醒并且可以包括多个词项,并且可以是例如用户想要被提醒或者执行的“打电话给Larry(Call Larry)”、“洗车(Wash Car)”、“打扫房屋(Clean the House)”,或者任何其它任务。动作处理器124将会针对特定动作项将用户定义动作存储在动作数据126中。
在用户装置106处接收对用户定义触发活动的选择(204)。触发活动指示要由用户执行的、以触发用户定义动作的活动。触发活动可以是身体活动或情境活动。在一些实施方式中,可以选择多于一个的活动。
在一些实施方式中,能够在用户装置106处选择活动条件(206)。活动条件指示要在确定用户已经执行通过触发活动指示的活动中满足的条件。例如,活动条件如先前描述的那样可以是一个或多个时间段条件、位置区域条件、或人接近条件。
确定其中用户装置位于的环境的环境条件(208)。在一些实施方式中,用户装置106可以包括能够评估周围环境的传感器108。例如,传感器108可以监视移动和速度(例如,使用加速计)、风速、光和光变化性、温度、湿度、高度、噪声水平和噪声变化等。能够基于由传感器108进行的个别数据检测和/或由传感器108在不同时间处进行的数据检测来评估周围环境。在一些实施方式中,能够将环境条件提供给动作处理器124。
接下来,该方法基于用户信息和环境条件来确定是否已存在通过触发活动指示的活动的用户行为(210)。在确定触发活动是否已被执行的分析中,可以包括用户信息,所述用户信息可以从与用户相关联的用户信息数据128、用户装置106、或者还可以与用户信息数据128和/或用户装置106包括在一起的其它信息(例如,位置、天气、日历)获得。能够根据用户历史和用户情景确定用户信息。附加地,活动的用户行为可以包括预测用户装置106的用户将会执行触发活动、用户装置106的用户正在执行触发活动、和/或用户装置106的用户已经执行触发活动。
用户历史可以包括过去的用户数据。例如,用户历史可以包括与用户装置106相关联的针对用户的先前动作、活动和位置。用户历史信息能够由动作处理器124使用,以确定与用户装置106相关联的用户的兴趣、偏好、日程表和模式。附加地,能够从用户历史获得并在用户历史中包括其它信息。
另外,用户情景可以被包括在用户信息中。用户情景包括当前用户数据,该当前用户数据可以包括天气和用户装置106的位置,以及用户的在用户装置106和/或用户的另一装置上的日历。附加地,用户情景可以包括用户正在用户装置106上和/或在用户装置106上打开或者正被使用的应用上执行的动作。用户情景可以包括例如指示用户装置106的浏览器中的内容(例如,食谱)的数据,或者用户情景可以指示阅读应用在用户装置106中被打开。
在确定触发活动的用户行为之后,可以如下面所描述的将用户定义动作向用户的用户装置106呈现(212)。用户定义动作还可以具有与通知相关联的警报。附加地,在一些实施方式中,用户装置106或动作处理系统120可以执行用户定义动作。例如,如果用户定义动作是“打开空调(Turn on air conditioner)”并且触发活动是“驾车回家(drivinghome)”。当“驾车回家(driving home)”的用户行为被确定时,用户装置106或动作处理系统120可以执行打开空调的动作。可以将用户定义动作向用户呈现,用于选择以在触发活动的用户行为被确定时完成用户定义动作,或者在其它实施方式中,可以自动地执行用户定义动作。附加地,用户历史可以用于确定要将空调设定到的温度。
如果用户定义动作由用户装置106或动作处理系统120来执行,则可以向用户装置106的用户呈现用户定义动作已被执行的通知。然而,如果触发活动尚未被执行,则过程可以继续执行步骤210。此外,在一些实施方式中,可以将用户定义动作的呈现提供给除用户装置106以外的装置。例如,可以将呈现提供给被确定为靠近用户的装置或用户将会看到或者正看的装置。例如,如果用户的用户装置106当前对用户不可见,但是用户正在查看另一装置,则动作处理系统120可以确定要将用户定义动作呈现给用户正在查看的装置。
过程200可以受到用户确认,并且还在图3A-3D的情景中进行描述。特别地,图3A是在用户装置300处创建用户定义动作的用户界面302a的图示。在用户定义动作输入字段304处,用户可以键入当触发活动的用户行为被确定时用户想要被呈现有的用户定义动作。在图3A中,用户定义动作在被输入到用户定义动作输入字段304中的过程中。在当前用户装置300上,用户可以使用用户装置300的触摸屏,以录入针对用户定义动作的词项和字符。然而,这样的配置不是必需的,并且其它方法和用户装置类型可以用于输入字符和词项。
在图3B中,提供了用户界面302b,其中已经在用户定义动作输入字段中输入了用户定义动作,并且用户能够通过在动作限制的区域306中选择来创建动作限制。在在动作限制的区域306中选择之后,用户被呈现有限制选项,所述限制选项在当前实施方式中包括时间段条件306a、位置区域条件306b、人接近条件306c、触发活动306d、和世界知识选项306e。然而,此类限制选项不是必需的,并且可以提供不同的和/或更多或更少的限制选项。
另外,在图3C中,提供了用户界面302c,其中在用户选择触发活动306d之后,可以提供触发活动列表308d。在当前实施方式中,触发活动列表308d包括针对每个活动的图形表示以及指示该活动的文本。例如,触发活动列表308d包括“驾车(Driving)”、“骑自行车(Biking)”、“步行(Walking)”、“看电视(Watching TV)”的活动,并且可以随着用户在用户装置300上的触发活动列表308d内向下滚动而提供其它活动。然而,这样的触发活动列表308d不是必需的,并且可以提供包括不同的活动和不同的列表布局的不同类型的列表。
在图3D中,提供了用户界面302d,其中在用户选择了“步行(Walking)”的触发活动之后,动作限制306包括在用户定义动作输入字段304中的用户定义动作“打电话给Larry(Call Larry)”下面的触发活动“步行(Walking)”。附加地,用户可以将如通过动作限制306中的添加动作限制选项309看到的附加动作限制添加到“添加另一个(Add another)”。用户可以通过例如选择保存选项310来指示动作项是完成的,或者可以提供其它选项用于完成动作项。
如图4A中看到的,提供了用户界面402a,其中如果用户选择添加动作限制选项309(在图3D中看到),则如图3B中同样地看到和描述的是,用户可以被呈现有限制选项。如在过程200中在可选步骤206中看到的和上面所描述的是,图4A和图4B提供添加活动条件的描述。如果用户选择限制选项的时间段条件306a,则用户可以选择必须在内部执行触发活动以便触发向用户装置的用户呈现用户定义动作的时间段。该时间段可以是例如时刻(例如,早晨、下午、晚上)、白天内的时间范围(例如,2PM-5PM)、特定日(例如,星期六或2015年3月1日)、循环时间段、日期或日期的范围(例如,每月的第一个星期六)或日期的范围(例如,2015年3月1日至2015年4月15日)等。
如图4B中看到的是,提供了用户界面402b,其中用户已经选择一天、“星期六(Saturday)”和一个时间段“早晨(Morning)”。因此,在当前示例中,用户必须在时间段条件“星期六早晨(Saturday Morning)”期间执行触发活动“步行(Walking)”,以便要向用户装置的用户呈现用户定义动作“打电话给Larry(Call Larry)”。附加地,如图3D中描述的是,用户可以通过选择添加动作限制选项309来添加附加动作限制。
图5是在用户装置300处其中提供动作项的列表的用户界面502的图示。可以基于过滤器504来过滤动作项的列表。在当前实施方式中,过滤器504包括“全部(ALL)”、“时间(TIME)”和“位置(LOCATION)”。然而,在其它实施方式中,可以提供不同的过滤器和更多或更少的过滤器。另外,在当前实施方式中提供了动作项506、508、510和512。动作项506包括在图3A-4B中创建和定义的用户定义动作、触发活动、和活动条件。附加地,可以通过选择添加动作选项514来从用户界面502创建动作项。在一些实施方式中,通过选择添加动作选项514,可以将用户导向图3A中提供的用户界面302。
图6是用于基于在不同时间段处的环境条件来确定其中用户装置位于的环境的环境条件的示例过程600的流程图。过程600能够例如由用户装置106和/或动作处理器124来实现。在一些实施方式中,示例过程600的操作能够被实现为在非暂时计算机可读介质上存储的指令,其中这些指令使数据处理设备执行示例过程600的操作。
在第一时间处,确定用户装置106位于其中的环境条件(602)。如上面所讨论的是,可以使用并组合传感器108在不同时间处的检测数据,以确定用户装置106的环境条件。例如,在第一时间,传感器108可以检测到未移动的用户装置106、高水平的人造光、和低噪声水平。
在第二时间处(例如,在第一时间之后的五分钟),确定用户装置106位于其中的环境条件(604)。例如,在第二时间处,传感器108可以检测到未移动的用户装置106、低水平的人造光、和高噪声水平。基于第一时间和第二时间的环境条件,可以确定用户装置106位于其中的环境的环境条件(606)。来自可以是多于第一时间和第二时间的不同时间的传感器数据能够检测与用户装置106相关联的用户的环境条件的改变和变化性,这可以有助于确定用户的活动。例如,基于以上传感器数据,用户装置106和/或动作处理器124可以确定在第一时间与第二时间之间的、包括固定用户装置106的用户装置的环境条件以及人造照明和噪声水平的变化性。针对上面提供的环境条件,用户装置106和/或动作处理器124能够使用该信息以及用户信息,以确定例如与用户装置106相关联的用户正在看电视。
图7还是用于为了确定触发活动的用户行为而使用置信度评分和置信度评分阈值的示例过程700的流程图。过程700能够例如由用户装置106和/或动作处理器124来实现。在一些实施方式中,示例过程700的操作能够被实现为在非暂时性计算机可读介质上的存储指令,其中这些指令使数据处理设备执行示例过程700的操作。
在示例过程700中,为了确定触发活动的用户行为,可以确定置信度评分,用于指示触发活动的用户行为的置信水平(702)。例如,当用户情景包括用户装置106在用户装置106的视口中以食谱打开网页时,可以由动作处理器124为“烹饪”的触发活动确定置信度评分。如果用户装置106上的用户日历指示例如用户被安排在此特定时间处与“Larry”共进晚餐,则可以确定更高的置信度评分。此外,如果与“Larry”相关的人接近条件被包括在动作项中,并且动作处理器124确定“Larry”的用户装置在与用户相关联的用户装置106的接近范围内,则可能确定甚至更高的置信度评分。
为了确定触发活动的用户行为,可以做出关于置信度评分是否满足置信度评分阈值的确定(704)。如果置信度评分满足置信度评分阈值,则动作处理器124和/或用户装置106可以确定触发活动的用户行为(706)。然而,如果置信度评分不满足置信度评分阈值,则可以做出这里尚不存在触发活动的用户行为的确定(708)。在那种情况下,动作处理器124和/或用户装置106可以继续监视用户信息和环境条件,以确定是否已经存在由用户装置106的用户进行的触发活动的用户行为。
在其中本文中讨论的系统收集关于用户的个人信息或者可以利用个人信息的情形下,用户可以被提供有用于控制程序或特征是否收集用户信息(例如,关于用户的社交网络、社交动作或活动、职业、用户的偏好、或用户的当前位置的信息),或者可以被提供有用于控制是否和/或如何从内容服务器接收可能与用户更相关的内容的机会。此外,某些数据可以在它被存储或者使用之前以一个或多个方式被处理,使得个人地可标识的信息被去除。例如,用户的身份可以被处理,使得对该用户来说个人可标识的信息是不可确定的,或者可以在获得了位置信息的情况下使用户的地理位置一般化(诸如一般化到城市、邮政编码、或州级别),使得用户的特定位置不能够被确定。因此,用户可以在信息如何关于用户被收集并且由内容服务器使用上具有控制。
图8是示例移动计算装置的框图。在此图示中,移动计算装置810被描绘为手持式移动电话(例如,智能电话或应用电话),其包括用于向移动计算装置810的用户呈现内容并且接收基于触摸的用户输入的触摸屏显示装置812。如同可以提供各种不同的输入组件,还可以提供其它视觉、触觉和听觉输出部件(例如,LED灯、用于触觉输出的振动机构、或用于提供音调、语音生成的、或记录的输出的扬声器)。
以显示装置812的形式的示例视觉输出机构可以采取具有电阻或电容触摸能力的显示器的形式。显示装置可以是用于显示视频、图形、图像、和文本,并且是用于使用户触摸输入位置与显示的信息的位置协调,使得装置810能够使在显示项的位置处的用户联系人与该项相关联。移动计算装置810还可以采取可替选的形式,其包括作为膝上型计算机、平板或纯平板计算机、个人数字助理、嵌入式系统(例如,汽车导航系统)、台式个人计算机、或计算机化工作站。
移动计算装置810可以能够确定与触摸屏显示装置812物理接触的位置(例如,由手指或输入笔接触的位置)。使用触摸屏812,可以产生各种“虚拟”输入机制,其中用户通过接触图形用户界面元素来与触摸屏512上描绘的图形用户界面元素交互。“虚拟”输入机制的示例是“软件键盘”,其中键盘被显示在触摸屏上并且用户通过按压与每个键相相对应的触摸屏812的区域来选择键。
移动计算装置810可以包括机械或触敏按钮818a-d。附加地,移动计算装置可以包括用于调整由一个或多个扬声器820输出的音量的按钮,以及用于打开或关闭移动计算装置的按钮。麦克风822允许移动计算装置810将可听声音转换成电信号,所述电信号可以被数字编码并存储在计算机可读存储器中,或者将其发送到另一计算装置。移动计算装置810还可以包括数字罗盘、加速计、接近传感器、和环境光传感器。
操作系统可以提供移动计算装置的硬件(例如,输入/输出机制和执行从计算机可读介质中检索的指令的处理器)和软件之间的接口。操作系统可以为促进计算装置与用户之间的交互的应用程序的执行提供平台。
移动计算装置810可以利用触摸屏812呈现图形用户界面。图形用户界面是一个或多个图形界面元素的合集并且可以是静态的(例如,显示器似乎在一定时间段上保持不变),或者可以是动态的(例如,图形用户界面包括在没有用户输入的情况下动画化的图形界面元素)。
图形界面元素可以是文本、线、形状、图像或其组合。例如,图形界面元素可以是在桌面上被显示的图标和该图标的关联文本。在一些示例中,图形界面元素可利用用户输入来选择。例如,用户可以通过按压与图形界面元素的显示相对应的触摸屏的区域来选择图形界面元素。在一些示例中,用户可以操纵轨迹球以使单个图形界面元素突出为具有焦点。对图形界面元素的用户选择可以由移动计算装置调用预定义动作。对按钮的用户选择可以调用预定义动作。
移动计算装置810可以包括其它应用、计算子系统、和硬件。语音识别服务872可以接收由移动计算装置的麦克风822接收到的语音通信数据,并且将语音通信翻译成相对应的文本数据或者执行语音识别。能够将经处理的语音数据输入到在命令模型数据122中存储的命令模型,以确定用于生成语音数据的语音输入是否如上面描述的针对特定应用调用特定动作。下面的应用、服务和单元中的一个或多个可以具有通过此类语音命令调用的相对应动作。
呼叫处理单元可以接收传入电话呼叫的指示并且向用户提供对应答该传入电话呼叫的能力。媒体播放器可以允许用户收听音乐或者播放在移动计算装置810的本地存储器中被存储的电影。移动装置810可以包括数码相机传感器,以及相对应的图像和视频捕获和编辑软件。互联网浏览器可以使用户能够通过键入与web网页相对应的地址或者选择到该web页面的链接来查看来自web页面的内容。
操作基站的网络的服务提供者可以将移动计算装置810连接到网络850以使移动计算装置810与提供服务860的其它计算系统之间能够通信。尽管可以通过不同的网络(例如,服务提供者的内部网络、公用交换电话网、和互联网)提供服务860,然而网络850被图示为单个网络。服务提供者可以操作服务器系统852,所述服务器系统852路由移动计算装置810和与服务860相关联的计算系统之间的信息分组和语音数据。
网络850可以将移动计算装置810连接到公用交换电话网(PSTN)862,以便在移动计算装置810与另一计算装置之间建立语音或传真通信。例如,服务提供者服务器系统852可以从PSTN 862接收针对移动计算装置810的传入呼叫的指示。相反地,移动计算装置810可以向服务提供者服务器系统852发送通信,从而使用与能够通过PSTN 862访问的装置相关联的电话号码来发起电话呼叫。
网络850可以将移动计算装置810与网际协议语音电话(VoIP)服务864连接,所述VoIP服务864通过IP网络路由语音通信,与PSTN截然相反。例如,移动计算装置810的用户可以调用VoIP应用并且使用该程序来发起呼叫。服务提供者服务器系统852可以将来自呼叫的语音数据转发到VoIP服务,所述VoIP服务可以潜在地使用用于连接的最后一段的PSTN,通过互联网将呼叫路由到相对应的计算装置。
应用商店866可以向移动计算装置810的用户提供用于浏览用户可以通过网络850下载并将其安装在移动计算装置810上的远程存储的应用程序的列表的能力。应用商店866可以用作由第三方应用开发人员开发的应用的储存库。被安装在移动计算装置810上的应用程序可以能够通过网络850与为应用程所指定的服务器系统通信。例如,可以从应用商店866下载VoIP应用程序,从而使用户能够与VoIP服务864通信。
移动计算装置810可以通过网络850访问互联网868上的内容。例如,移动计算装置810的用户可以调用从在指定的通用资源位置处可访问的远程计算装置请求数据的web浏览器应用。在各种示例中,这些服务860中的一些能够通过互联网访问。
移动计算装置可以与个人计算机870进行通信。例如,个人计算机870可以是移动计算装置810的用户的家庭计算机。因此,用户可以能够从他的个人计算机870流式传输媒体。用户还可以查看他的个人计算机870的文件结构,并且在计算机化装置之间发送选择的文档。
移动计算装置810可以与社交网络874进行通信。社交网络可以包括许多成员,其中的一些已经同意被关联为熟人。移动计算装置810上的应用程序可以访问社交网络874以检索基于移动计算装置的用户的熟人的信息。例如,“地址簿”应用程序可以检索用户的熟人的电话号码。在各种示例中,可以基于从用户到成员的社交网络图中的其它成员的社交网络距离和连接关系将内容递送到移动计算装置810。例如,可以基于由“靠近”于用户的成员(例如,作为“朋友”或“朋友的朋友”的成员)与此类内容进行的交互的水平来为用户选择广告和新闻文章内容。
移动计算装置810可以通过网络850访问个人联系人的集合876。每个联系人可以标识个体并且包括关于那个个体的信息(例如,电话号码、电子邮件地址、和生日)。因为联系人的集合被远程托管到移动计算装置810,所以用户可以将跨越若干装置的联系人876作为公共联系人的集合来访问和维护。
移动计算装置810可以访问基于云的应用程序878。云计算提供从移动计算装置810远程托管的应用程序(例如,文字处理器或电子邮件程序),并且可以由装置810使用web浏览器或专用程序来访问。
地图服务880能够向移动计算装置810提供有街道地图、路线规划信息、和卫星图像。地图服务880还可以接收查询并返回位置特定结果。例如,移动计算装置810可以向地图服务880发送移动计算装置的估计位置和针对“比萨饼地点(pizza place)”用户录入的查询。地图服务880可以返回具有在地图上叠加的“标记(marker)”的街道地图,所述“标记(marker)”标识附近的“比萨饼地点(pizza place)”的地理位置。
分路段服务882可以向移动计算装置810提供有到用户供应的目的地的分路段路线指引。例如,分路段服务882可以向装置810流式传输该装置的估计位置的街道级视图以及用于提供将装置810的用户导向到目的地的音频命令和叠加箭头的数据。
通过移动计算装置810可以请求各种形式的流媒体884。例如,计算装置810可以请求用于预录制视频文件、直播电视节目、或直播无线电节目的流。
微博服务886可以从移动计算装置810接收不标识发布(post)的接收者的用户输入发布。微博服务886可以将该发布散布给同意订阅该用户的微博服务886的其它成员。
搜索引擎888可以从移动计算装置810接收用户录入的文本的或口头的查询,从而确定响应于该查询的互联网可访问的文档的集合,并且向装置810提供信息以显示用于该响应文档的搜索结果的列表。在其中接收到口头查询的示例中,语音识别服务872可以将所接收到的音频翻译成被发送到搜索引擎的文本查询。
可以在服务器系统890中实现这些和其它服务。服务器系统可以是提供服务或服务的集合的硬件和软件的组合。例如,物理上分离且联网的计算机化装置的集合可以一起作为逻辑服务器系统单元来操作,以处理向数百个计算装置提供服务所必需的操作。服务器系统在本文中还被称为计算系统。
在各种实施方式中,如果在先操作是不成功的(例如,如果未执行确定),则不执行“响应于”另一操作(例如,确定或标识)或“作为”另一操作“的结果”而执行的操作。被“自动地”执行的操作是在没有用户干预(例如,介入用户输入)的情况下而执行的操作。在本文档中用条件语言描述的特征可以描述可选的实施方式。在一些示例中,从第一装置“发送”到第二装置包括第一装置将数据放置到网络中用于由第二装置接收,但可以不包括第二装置接收该数据。相反地,从第一装置“接收”可以包括从网络接收数据,但可以不包括第一装置发送该数据。
由计算系统“确定”能够包括该计算系统请求另一装置执行该确定并且将该结果供应给计算系统。此外,由计算系统“显示”或者“呈现”能够包括该计算系统发送用于使另一装置显示或者呈现所引用的信息的数据。
在本说明书中描述的主题和操作的实施例可用数字电子电路或者用计算机软件、固件或硬件(包括本说明书中所公开的结构及其结构等同物)或者用它们中的一个或多个的组合加以实现。在本说明书中描述的主题的实施例能够作为在计算机存储介质上编码以供由数据处理设备执行或者控制数据处理设备的操作的一个或多个计算机程序(即,计算机程序指令的一个或多个模块)被实现。可替选地或此外,能够将程序指令编码在人工生成的传播信号(例如,机器生成的电、光学或电磁信号)上,所述传播信号被生成来对信息进行编码以便传输到适合的接收器设备以供由数据处理设备执行。计算机存储介质可以是或者被包括在计算机可读存储装置、计算机可读存储基板、随机或串行存取存储器阵列或装置或它们中的一个或多个的组合中。此外,当计算机存储介质不是传播信号时,计算机存储介质可以是编码在人工生成的传播信号中的计算机程序指令的源或目的地。计算机存储介质还可以是或者被包括在一个或多个单独的物理组件或介质(例如,多个CD、磁盘或其它存储装置)中。
在本说明书中描述的操作能够作为由数据处理装置对存储在一个或多个计算机可读存储装置上或者从其它源接收的数据执行的操作被实现。
术语“数据处理设备”包含用于处理数据的所有种类的设备、装置和机器,作为示例包括可编程处理器、计算机、片上系统或上述中的多个或组合。该设备能够包括专用逻辑电路,例如,FPGA(现场可编程门阵列)或ASIC(专用集成电路)。该设备除了包括硬件之外还可以包括为所述计算机程序创建执行环境的代码,例如,构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时环境、虚拟机或它们中的一个或多个的组合的代码。该设备和执行环境能够实现各种不同的计算模型基础设施,诸如web服务、分布式计算和网格计算基础设施。
计算机程序(还被称为程序、软件、软件应用、脚本或代码)可用任何形式的编程语言(包括编译或解释语言、说明性或过程语言)编写,并且它能够被以任何形式部署,包括作为独立程序或者作为适合于在计算环境中使用的模块、组件、子例行程序、对象或其它单元。计算机程序可以但未必相对应于文件系统中的文件。能够在保持其它程序或数据(例如,存储在标记语言文档中的一个或多个脚本)的文件的一部分中、在专用于所述程序的单个文件中或者在多个协调文件(例如,存储一个或多个模块、子程序或代码的部分的文件)中存储程序。计算机程序能够被部署成在一个计算机上或者在位于一个站点处或者跨越多个站点分布并通过通信网络互连的多个计算机上执行。
在本说明书中描述的过程和逻辑流程能够通过一个或多个可编程处理器执行一个或多个计算机程序以通过对输入数据进行操作并生成输出来执行动作来执行。过程和逻辑流程还能够由专用逻辑电路来执行,并且设备还能够作为专用逻辑电路被实现,所述专用逻辑电路例如为FPGA(现场可编程门阵列)或ASIC(专用集成电路)。
作为示例,适合于执行计算机程序的处理器包括既通用又专用微处理器以及任何种类的数字计算机的任何一个或多个处理器。通常,处理器将从只读存储器或随机存取存储器或两者接收指令和数据。计算机的必要元件是用于依照指令执行动作的处理器以及用于存储指令和数据的一个或多个存储器装置。通常,计算机还将包括或者在操作上耦合以从用于存储数据的一个或多个海量存储装置(例如,磁盘、磁光盘或光盘)接收数据或者向用于存储数据的一个或多个海量存储装置转移数据或两者。然而,计算机不必具有此类装置。此外,计算机能够被嵌入在另一装置中,所述另一装置例如移动电话、个人数字助理(PDA)、移动音频或视频播放器、游戏控制台、全球定位系统(GPS)接收器或便携式存储装置(例如,通用串行总线(USB)闪存驱动器)等。适合于存储计算机程序指令和数据的装置包括所有形式的非易失性存储器、介质和存储器件,作为示例包括半导体存储器件,例如EPROM、EEPROM和闪速存储器件;磁盘,例如内部硬盘或可移动盘;磁光盘;以及CD ROM和DVD-ROM盘。处理器和存储器能够由专用逻辑电路来补充,或者并入专用逻辑电路。
为了提供与用户的交互,能够在计算机上实现本说明书中描述的主题的实施例,所述计算机具有用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或LCD(液晶显示)监视器)以及用户可用来向计算机提供输入的键盘和指点装置,例如鼠标或轨迹球。其它种类的装置还能够用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的感觉反馈,例如视觉反馈、听觉反馈或触觉反馈;并且能够按照任何形式(包括声、语音或触觉输入)接收来自用户的输入。此外,计算机能够通过向由用户所使用的装置发送文档并且从由用户所使用的装置接收文档来与用户交互;例如,通过响应于从web浏览器接收到的请求而向用户的用户装置上的web浏览器发送web页面。
能够在计算系统中实现本说明书中描述的主题的实施例,所述计算系统包括后端组件(例如,作为数据服务器),或者包括中间件组件(例如,应用服务器),或者包括前端组件,例如,具有用户能够用来与本说明书中描述的主题的实施方式交互的图形用户界面或Web浏览器的用户计算机,或者一个或多个此类后端、中间件或前端组件的任何组合。本系统的组件能够通过任何形式或介质的数字数据通信(例如,通信网络)来互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、网络间(例如,互联网)以及对等网络(例如,自组织对等网络)。
该计算系统能够包括用户和服务器。用户和服务器通常彼此远离并且典型地通过通信网络来交互。用户和服务器的关系借助于在相应计算机上运行并且彼此具有用户-服务器关系的计算机程序而产生。在一些实施例中,服务器向用户装置发送数据(例如,HTML页面)(例如,为了向与用户装置交互的用户显示数据并且从与用户装置交互的用户接收用户输入的目的)。能够在服务器处从用户装置接收在用户装置处生成的数据(例如,用户交互的结果)。
虽然本说明书包含许多特定实施方式细节,但是这些不应该被解释为对任何发明的或可以要求保护的东西的范围构成限制,而是相反被解释为特定于特定发明的特定实施例的特征的描述。还能够在单个实施例中相结合地实现在本说明书中在单独的实施例的情景中描述的某些特征。相反,还能够单独地在多个实施例中或者在任何适合的子组合中实现在单个实施例的情景中描述的各种特征。此外,尽管特征可以在上面被描述为按照某些组合行动并且因此甚至最初要求保护,然而在某些情况下能够从组合中删除来自要求保护的组合的一个或多个特征,并且所要求保护的组合可以针对子组合或子组合的变化。
类似地,虽然在附图中以特定次序描绘操作,但是这不应该被理解为要求以所示特定次序或者以顺序次序执行此类操作,或者执行所有图示的操作以实现所希望的结果。在某些情况下,多任务处理和并行处理可以是有利的。此外,上述实施例中的各种系统组件的分离不应该被理解为在所有实施例中要求这样的分离,并且应该理解的是,所描述的程序组件和系统通常能够被一起集成在单个软件产品中或者封装到多个软件产品中。
因此,已经对主题的特定实施例进行了描述。其它实施例在以下权利要求的范围内。在一些情况下,权利要求中所记载的动作能够被以不同次序执行并且仍然实现所希望的结果。此外,附图中所描绘的过程不一定要求所示特定次序或顺序次序来实现所希望的结果。在某些实施方式中,多任务处理和并行处理可以是有利的。

Claims (20)

1.一种方法,包括:
在用户装置处接收用户定义动作的输入,所述用户定义动作包括多个词项;
通过所述用户装置接收对用户定义触发活动的选择,所述触发活动指示用于触发要呈现的所述用户定义动作的活动的用户行为;
确定所述用户装置所位于的环境的至少一个环境条件;
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为;以及
通过所述用户装置向所述用户的所述用户装置呈现所述用户定义动作的通知。
2.根据权利要求1所述的方法,其中,所述用户定义动作是提醒任务,并且所述触发活动是身体活动和情境活动中的至少一个。
3.根据权利要求1或2所述的方法,进一步包括至少一个活动条件,其中,确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
通过所述用户装置接收对至少一个活动条件的选择,所述至少一个活动条件指示要在确定通过所述触发活动指示的所述活动的所述用户行为中满足的条件;
通过所述用户装置确定所述至少一个活动条件;
通过所述用户装置确定已经满足所述至少一个活动条件;以及
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为。
4.根据权利要求3所述的方法,其中,所述至少一个活动条件是时间段条件、位置区域条件和人接近条件中的至少一个。
5.根据前述权利要求中的任一项所述的方法,其中,确定所述用户装置所位于的环境的所述至少一个环境条件进一步包括:
通过与所述用户装置相关联的一个或多个传感器并且在第一时间确定所述用户装置所位于的所述环境;
通过与所述用户装置相关联的所述一个或多个传感器并且在第二时间确定所述用户装置所位于的所述环境;以及
通过所述用户装置基于至少所述第一时间和所述第二时间的所述环境来确定所述用户装置所位于的所述环境的至少一个环境条件。
6.根据前述权利要求中的任一项所述的方法,其中,向所述用户的所述用户装置呈现所述用户定义动作的所述通知进一步包括:
通过所述用户装置执行所述用户定义动作;以及
通过所述用户装置向所述用户的所述用户装置呈现所述用户定义动作已经被执行的通知。
7.根据前述权利要求中的任一项所述的方法,其中,基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
确定指示通过所述触发活动指示的所述活动的用户行为的置信水平的置信度评分;
确定所述置信度评分满足置信度评分阈值。
8.一种系统,包括:
处理器;以及
计算机可读介质,所述计算机可读介质耦合到所述处理器并且具有在其上存储的指令,所述指令在由所述处理器执行时使所述处理器执行操作,所述操作包括:
接收用户定义动作的输入,所述用户定义动作包括多个词项;
接收对用户定义触发活动的选择,所述触发活动指示用于触发要呈现的所述用户定义动作的活动的用户行为;
确定用户装置所位于的环境的至少一个环境条件;
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为;以及
向所述用户的所述用户装置呈现所述用户定义动作的通知。
9.根据权利要求8所述的系统,其中,所述用户定义动作是提醒任务,并且所述触发活动是身体活动和情境活动中的至少一个。
10.根据权利要求8或9所述的系统,进一步包括至少一个活动条件,其中,确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
接收对至少一个活动条件的选择,所述至少一个活动条件指示要在确定通过所述触发活动指示的所述活动的所述用户行为中满足的条件;
确定所述至少一个活动条件;
确定已经满足所述至少一个活动条件;以及
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为。
11.根据权利要求10所述的系统,其中,所述至少一个活动条件是时间段条件、位置区域条件和人接近条件中的至少一个。
12.根据权利要求8至11中的任一项所述的系统,其中,确定所述用户装置所位于的环境的所述至少一个环境条件进一步包括:
通过与所述用户装置相关联的一个或多个传感器并且在第一时间确定所述用户装置所位于的所述环境;
通过与所述用户装置相关联的所述一个或多个传感器并且在第二时间确定所述用户装置所位于的所述环境;以及
通过所述用户装置基于至少所述第一时间和所述第二时间的所述环境来确定所述用户装置所位于的所述环境的至少一个环境条件。
13.根据权利要求8至12中的任一项所述的系统,其中,向所述用户的所述用户装置呈现所述用户定义动作的所述通知进一步包括:
执行所述用户定义动作;以及
向所述用户的所述用户装置呈现所述用户定义动作已经被执行的通知。
14.根据权利要求8至13中的任一项所述的系统,其中,基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
确定指示通过所述触发活动指示的所述活动的用户行为的置信水平的置信度评分;
确定所述置信度评分满足置信度评分阈值。
15.一种具有其上存储的指令的计算机可读介质,所述指令在由处理器执行时使所述处理器执行操作,所述操作包括:
接收用户定义动作的输入,所述用户定义动作包括多个词项;
接收对用户定义触发活动的选择,所述触发活动指示用于触发要呈现的所述用户定义动作的活动的用户行为;
确定所述用户装置所位于的环境的至少一个环境条件;
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为;以及
向所述用户的所述用户装置呈现所述用户定义动作的通知。
16.根据权利要求15所述的计算机可读介质,进一步包括至少一个活动条件,其中,确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
接收对至少一个活动条件的选择,所述至少一个活动条件指示要在确定通过所述触发活动指示的所述活动的所述用户行为中满足的条件;
确定所述至少一个活动条件;
确定已经满足所述至少一个活动条件;以及
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为。
17.根据权利要求15或16所述的计算机可读介质,其中,确定所述用户装置所位于的环境的环境条件进一步包括:
通过与所述用户装置相关联的一个或多个传感器并且在第一时间确定所述用户装置所位于的所述环境;
通过与所述用户装置相关联的所述一个或多个传感器并且在第二时间确定所述用户装置所位于的所述环境;以及
通过所述用户装置基于至少所述第一时间和所述第二时间的所述环境来确定所述用户装置所位于的所述环境的至少一个环境条件。
18.根据权利要求15至17中的任一项所述的计算机可读介质,其中,向所述用户的所述用户装置呈现所述用户定义动作的所述通知进一步包括:
执行所述用户定义动作;以及
向所述用户的所述用户装置呈现所述用户定义动作已经被执行的通知。
19.根据权利要求15至18中的任一项所述的计算机可读介质,其中,基于用户信息和所述环境条件来确定通过所述触发活动指示的所述活动的所述用户行为进一步包括:
确定指示通过所述触发活动指示的所述活动的用户行为的置信水平的置信度评分;
确定所述置信度评分满足置信度评分阈值。
20.一种方法,包括:
通过数据处理设备接收用户定义动作的输入,所述用户定义动作包括多个词项;
通过所述数据处理设备接收对用户定义触发活动的选择,所述触发活动指示用于触发要呈现的所述用户定义动作的活动的用户行为;
通过所述数据处理设备确定用户所位于的环境的至少一个环境条件;
基于用户信息和所述至少一个环境条件来确定通过所述触发活动指示的所述活动的用户行为;以及
通过所述数据处理设备提供所述用户定义动作的通知。
CN201680018932.6A 2015-05-11 2016-04-22 活动触发 Pending CN107430724A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/708,642 US20160335139A1 (en) 2015-05-11 2015-05-11 Activity triggers
US14/708,642 2015-05-11
PCT/US2016/028819 WO2016182712A1 (en) 2015-05-11 2016-04-22 Activity triggers

Publications (1)

Publication Number Publication Date
CN107430724A true CN107430724A (zh) 2017-12-01

Family

ID=55949102

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680018932.6A Pending CN107430724A (zh) 2015-05-11 2016-04-22 活动触发

Country Status (4)

Country Link
US (2) US20160335139A1 (zh)
EP (1) EP3295393A1 (zh)
CN (1) CN107430724A (zh)
WO (1) WO2016182712A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115550304A (zh) * 2018-08-22 2022-12-30 谷歌有限责任公司 确定一组用户的活动实例集合的方法、设备和存储介质

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
CN113470641B (zh) 2013-02-07 2023-12-15 苹果公司 数字助理的语音触发器
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10133443B2 (en) 2015-06-14 2018-11-20 Google Llc Systems and methods for smart home automation using a multifunction status and entry point icon
USD812076S1 (en) 2015-06-14 2018-03-06 Google Llc Display screen with graphical user interface for monitoring remote video camera
USD803241S1 (en) 2015-06-14 2017-11-21 Google Inc. Display screen with animated graphical user interface for an alert screen
US9361011B1 (en) 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10263802B2 (en) 2016-07-12 2019-04-16 Google Llc Methods and devices for establishing connections with remote cameras
USD882583S1 (en) * 2016-07-12 2020-04-28 Google Llc Display screen with graphical user interface
USD843398S1 (en) 2016-10-26 2019-03-19 Google Llc Display screen with graphical user interface for a timeline-video relationship presentation for alert events
US10386999B2 (en) 2016-10-26 2019-08-20 Google Llc Timeline-video relationship presentation for alert events
US11238290B2 (en) 2016-10-26 2022-02-01 Google Llc Timeline-video relationship processing for alert events
DK180048B1 (en) 2017-05-11 2020-02-04 Apple Inc. MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770411A1 (en) 2017-05-15 2018-12-20 Apple Inc. MULTI-MODAL INTERFACES
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
USD878402S1 (en) * 2017-05-22 2020-03-17 Subsplash Ip, Llc Display screen or portion thereof with transitional graphical user interface
US10972685B2 (en) 2017-05-25 2021-04-06 Google Llc Video camera assembly having an IR reflector
US10352496B2 (en) 2017-05-25 2019-07-16 Google Llc Stand assembly for an electronic device providing multiple degrees of freedom and built-in cables
US10819921B2 (en) 2017-05-25 2020-10-27 Google Llc Camera assembly having a single-piece cover element
DE112019000515T5 (de) * 2018-01-24 2020-10-08 Sony Corporation Steuervorrichtung, steuerverfahren, programm, und mobiles objekt
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
JP7241499B2 (ja) * 2018-10-10 2023-03-17 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報処理方法、情報処理装置及び情報処理プログラム
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11307752B2 (en) * 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11468890B2 (en) 2019-06-01 2022-10-11 Apple Inc. Methods and user interfaces for voice-based control of electronic devices
US11061543B1 (en) 2020-05-11 2021-07-13 Apple Inc. Providing relevant data items based on context
US11490204B2 (en) 2020-07-20 2022-11-01 Apple Inc. Multi-device audio adjustment coordination
US11438683B2 (en) 2020-07-21 2022-09-06 Apple Inc. User identification using headphones

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040019603A1 (en) * 2002-05-29 2004-01-29 Honeywell International Inc. System and method for automatically generating condition-based activity prompts
CN102413231A (zh) * 2011-10-10 2012-04-11 宇龙计算机通信科技(深圳)有限公司 移动终端和日程提醒方法
CN103221948A (zh) * 2010-08-16 2013-07-24 诺基亚公司 用于基于情境感知来执行设备动作的方法和装置
CN103856635A (zh) * 2014-03-12 2014-06-11 宇龙计算机通信科技(深圳)有限公司 终端装置及其日程事项的处理方法
CN104506707A (zh) * 2014-11-21 2015-04-08 惠州Tcl移动通信有限公司 一种情景感知模式的控制方法及控制系统
CN104519203A (zh) * 2014-09-02 2015-04-15 冯林 一种闹钟设置的提示方法及系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090157672A1 (en) * 2006-11-15 2009-06-18 Sunil Vemuri Method and system for memory augmentation
US20090320047A1 (en) * 2008-06-23 2009-12-24 Ingboo Inc. Event Bundling
US10057736B2 (en) * 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US9167388B2 (en) * 2013-01-18 2015-10-20 Apple Inc. Method and apparatus for automatically adjusting the operation of reminders based on device event history

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040019603A1 (en) * 2002-05-29 2004-01-29 Honeywell International Inc. System and method for automatically generating condition-based activity prompts
CN103221948A (zh) * 2010-08-16 2013-07-24 诺基亚公司 用于基于情境感知来执行设备动作的方法和装置
CN102413231A (zh) * 2011-10-10 2012-04-11 宇龙计算机通信科技(深圳)有限公司 移动终端和日程提醒方法
CN103856635A (zh) * 2014-03-12 2014-06-11 宇龙计算机通信科技(深圳)有限公司 终端装置及其日程事项的处理方法
CN104519203A (zh) * 2014-09-02 2015-04-15 冯林 一种闹钟设置的提示方法及系统
CN104506707A (zh) * 2014-11-21 2015-04-08 惠州Tcl移动通信有限公司 一种情景感知模式的控制方法及控制系统

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115550304A (zh) * 2018-08-22 2022-12-30 谷歌有限责任公司 确定一组用户的活动实例集合的方法、设备和存储介质
CN115550304B (zh) * 2018-08-22 2023-10-10 谷歌有限责任公司 确定一组用户的活动实例集合的方法、设备和存储介质
US11843655B2 (en) 2018-08-22 2023-12-12 Google Llc Automatically resolving, with reduced user inputs, a set of activity instances for a group of users
US12126668B2 (en) 2018-08-22 2024-10-22 Google Llc Automatically resolving, with reduced user inputs, a set of activity instances for a group of users

Also Published As

Publication number Publication date
US20160335139A1 (en) 2016-11-17
EP3295393A1 (en) 2018-03-21
WO2016182712A1 (en) 2016-11-17
US20170357395A1 (en) 2017-12-14

Similar Documents

Publication Publication Date Title
CN107430724A (zh) 活动触发
CN103404118B (zh) 移动计算设备上的自知简档切换
CN106845644B (zh) 一种通过相互关系学习用户及移动应用的联系的异构网络
US10783166B2 (en) List accumulation and reminder triggering
JP6791569B2 (ja) ユーザプロファイル生成方法および端末
CN105229575B (zh) 基于多个语言模型的文本预测
CN103282957B (zh) 基于上下文自动监测话音输入
CN102713908B (zh) 用于自适应提问和推荐的装置和方法
US10917485B2 (en) Implicit contacts in an online social network
US20130024456A1 (en) Method and apparatus for category based navigation
CN107924506A (zh) 推断通信的用户可用性和基于用户可用性或上下文改变通知设置
WO2016191737A2 (en) Systems and methods for proactively identifying and surfacing relevant content on a touch-senstitive device
CN106164869A (zh) 用于并行处理的混合客户端/服务器架构
CN102792320A (zh) 智能自动化助理
JP2016530613A (ja) オブジェクトベースのコンテキストメニューの制御
CN105683847A (zh) 通过物联网集成平台的物理环境配置
CN105830065A (zh) 在在线社交网络上生成推荐的搜索查询
EP2732426A2 (en) Situation-aware user sentiment social interest models
EP2817738B1 (en) Predictive service access
KR102011294B1 (ko) 컨텐츠의 사용자 공유 유도
CN107969167A (zh) 物理认知动作触发
KR20190076870A (ko) 연락처 정보를 추천하는 방법 및 디바이스
Kernchen et al. Context-awareness in MobiLife
AU2012283928B2 (en) Method and apparatus for category based navigation
Hwang et al. A Lifelog Browser for Visualization and Search of Mobile Everyday‐Life

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: American California

Applicant after: Google limited liability company

Address before: American California

Applicant before: Google Inc.

CB02 Change of applicant information
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20171201

WD01 Invention patent application deemed withdrawn after publication