CN110753927A - 在计算设备之间同步访问控制 - Google Patents
在计算设备之间同步访问控制 Download PDFInfo
- Publication number
- CN110753927A CN110753927A CN201980002194.XA CN201980002194A CN110753927A CN 110753927 A CN110753927 A CN 110753927A CN 201980002194 A CN201980002194 A CN 201980002194A CN 110753927 A CN110753927 A CN 110753927A
- Authority
- CN
- China
- Prior art keywords
- client device
- component
- processing system
- data processing
- digital
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004044 response Effects 0.000 claims abstract description 73
- 238000012545 processing Methods 0.000 claims description 317
- 238000000034 method Methods 0.000 claims description 87
- 230000005236 sound signal Effects 0.000 claims description 84
- 238000003058 natural language processing Methods 0.000 claims description 48
- 230000002452 interceptive effect Effects 0.000 claims description 26
- 238000012546 transfer Methods 0.000 claims description 24
- 230000004048 modification Effects 0.000 claims description 6
- 238000012986 modification Methods 0.000 claims description 6
- 238000012795 verification Methods 0.000 claims description 5
- 238000013475 authorization Methods 0.000 claims description 4
- 230000000977 initiatory effect Effects 0.000 claims description 4
- 238000011112 process operation Methods 0.000 claims 2
- 230000009471 action Effects 0.000 description 63
- 238000004891 communication Methods 0.000 description 19
- 230000008569 process Effects 0.000 description 15
- 238000004590 computer program Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 10
- 230000000694 effects Effects 0.000 description 8
- 230000003993 interaction Effects 0.000 description 6
- 238000013515 script Methods 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 6
- 238000001914 filtration Methods 0.000 description 5
- 230000000670 limiting effect Effects 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 230000000644 propagated effect Effects 0.000 description 3
- 239000000523 sample Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000003066 decision tree Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000033001 locomotion Effects 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 235000012054 meals Nutrition 0.000 description 2
- 238000003909 pattern recognition Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000012384 transportation and delivery Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- IRLPACMLTUPBCL-KQYNXXCUSA-N 5'-adenylyl sulfate Chemical compound C1=NC=2C(N)=NC=NC=2N1[C@@H]1O[C@H](COP(O)(=O)OS(O)(=O)=O)[C@@H](O)[C@H]1O IRLPACMLTUPBCL-KQYNXXCUSA-N 0.000 description 1
- 241000838698 Togo Species 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 235000021167 banquet Nutrition 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000011143 downstream manufacturing Methods 0.000 description 1
- 239000000446 fuel Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000013468 resource allocation Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000013179 statistical model Methods 0.000 description 1
- 239000000758 substrate Substances 0.000 description 1
- 238000012549 training Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
- 230000003442 weekly effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/604—Tools and structures for managing or administering access control systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
- G06F21/62—Protecting access to data via a platform, e.g. using keys or access control rules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/205—Parsing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
- H04L63/102—Entity profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/14—Session management
- H04L67/141—Setup of application sessions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/50—Network services
- H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2221/00—Indexing scheme relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/21—Indexing scheme relating to G06F21/00 and subgroups addressing additional information or applications relating to security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F2221/2141—Access rights, e.g. capability lists, access control lists, access tables, access matrices
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Software Systems (AREA)
- Bioethics (AREA)
- Computing Systems (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Automation & Control Theory (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- Computational Linguistics (AREA)
- Information Transfer Between Computers (AREA)
- Mobile Radio Communication Systems (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
提供对计算设备之间的访问控制的同步。系统从第一设备接收请求。所述系统响应于确定不兼容性而执行到第二设备的会话移交。所述系统修改访问控制数据库中的参数。所述系统从第三设备接收请求。所述系统将数字组件提供给所述第三设备。
Description
相关申请的交叉引用
本申请根据35 U.S.C.§119要求2018年5月7日提交的美国临时专利申请No.62/668,218的优先权,所述美国临时专利申请在此以全文引用的方式并入本文中。
背景技术
不同的计算设备可能具有不同的能力,诸如不同的输入或输出接口或计算效能能力。
发明内容
本公开大体涉及在计算设备之间同步访问控制。由于有限的输入或输出接口,或不同设备上可用的其他处理能力,从某些类型的设备访问某些类型的数字组件或修改此类数字组件的访问控制参数会具有挑战性或不可能实现。本技术方案的系统和方法允许会话从第一设备访问或修改数字组件,然后将会话移交到第二设备以完成访问或修改。可以在可由多个设备使用的数字访问控制数据库中修改访问控制参数,以便访问数字组件。
至少一个方面涉及一种用于在计算设备之间同步访问控制的系统。所述系统可以包括具有一个或多个处理器的数据处理系统。所述数据处理系统可以执行交互式数据交换组件、兼容性检查器组件、会话转移组件和访问控制器组件。所述交互式数据交换组件可以经由所述数据处理系统的接口接收数据分组,所述数据分组包括由与账户标识符链接的第一客户端设备的传感器检测到的输入音频信号。所述交互式数据交换组件可以基于自然语言处理技术来解析包括所述输入音频信号的所述数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字。所述交互式数据交换组件可以与所述第一客户端设备建立会话。所述交互式数据交换组件可以基于数字访问控制数据库中存储的针对所述数字组件的策略来生成输入提示,所述输入提示具有响应于与所述账户标识符链接的所述第一客户端设备对所述数字组件的所述请求的字段。所述兼容性检查器组件可以确定所述输入提示与所述第一客户端设备不兼容。响应于确定所述输入提示与所述第一客户端设备不兼容,所述会话转移组件可以识别和与所述第一客户端设备链接的所述账户标识符链接的第二客户端设备的状态。所述兼容性检查器可以基于所述会话转移组件识别的所述状态来确定所述输入提示与所述第二客户端设备兼容。所述会话转移组件可以将所述会话移交到所述第二客户端设备,并终止与所述第一客户端设备的所述会话的一部分。响应于所述移交,所述交互式数据交换组件可以将所述输入提示传输到所述第二客户端设备。所述交互式数据交换组件可以接收响应于所述输入提示而经由所述第二客户端设备输入的数据分组。所述访问控制器组件可以基于经由所述第二客户端设备输入的所述数据分组来修改针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的参数。所述交互式数据交换组件可以接收在与所述账户标识符链接的第三客户端设备上执行所述数字组件的请求。响应于由所述访问控制器组件对针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的所述参数的验证,以及由所述兼容性检查器组件对所述数字组件与所述第三客户端设备兼容的确定,所述数据处理系统可以提供所述数字组件以供所述第三客户端设备执行。
至少一个方面涉及一种在计算设备之间同步访问控制的方法。所述方法可以由具有一个或多个处理器和存储器的数据处理系统执行。所述方法可以包括:所述数据处理系统接收数据分组,所述数据分组包括由与账户标识符链接的第一客户端设备的传感器检测到的输入音频信号。所述方法可以包括:所述数据处理系统基于自然语言处理技术来解析具有输入音频信号的所述数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字。所述方法可以包括:所述数据处理系统与所述第一客户端设备建立会话。所述方法可以包括:所述数据处理系统基于数字访问控制数据库中存储的针对所述数字组件的策略来生成输入提示,所述输入提示具有响应于与所述账户标识符链接的所述第一客户端设备对所述数字组件的所述请求的字段。所述方法可以包括:所述数据处理系统通过所述数据处理系统确定所述输入提示与所述第一客户端设备不兼容。所述方法可以包括:响应于确定所述输入提示与所述第一客户端设备不兼容,所述数据处理系统识别和与所述第一客户端设备链接的所述账户标识符链接的第二客户端设备的状态。所述方法可以包括:所述数据处理系统基于所述会话转移组件识别的所述状态来确定所述输入提示与所述第二客户端设备兼容。所述方法可以包括:所述数据处理系统执行将所述会话移交到所述第二客户端设备,并终止与所述第一客户端设备的所述会话的部分。所述方法可以包括:响应于所述移交,所述数据处理系统将所述输入提示传输到所述第二客户端设备。所述方法可以包括:所述数据处理系统接收响应于所述输入提示而经由所述第二客户端设备输入的数据分组。所述方法可以包括:所述数据处理系统基于经由所述第二客户端设备输入的所述数据分组来修改针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的参数。所述方法可以包括:所述数据处理系统接收在与所述账户标识符链接的第三客户端设备上执行所述数字组件的请求。所述方法可以包括:响应于由所述访问控制器组件对针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的所述参数的验证,以及由所述兼容性检查器组件对所述数字组件与所述第三客户端设备兼容的确定,所述数据处理系统可以提供所述数字组件以供所述第三客户端设备执行。
每个方面可以可选地包括以下特征中的一个或多个。识别与所述账户标识符链接的多个客户端设备;识别所述多个客户端设备的、与所述数字组件兼容的子集;以及响应于所述参数的修改,提供所述数字组件以用于在所述多个客户端设备的所述子集上执行。基于所述第三客户端设备的所述状态来转换所述数字组件的格式。从所述第三客户端设备接收执行第二数字组件的请求;基于在所述访问控制数据库中针对所述第二数字组件存储的参数,确定所述第三客户端设备未被核准执行所述第二数字组件;向所述第二客户端设备传输针对所述第二数字组件的输入提示;响应于经由所述第二客户端设备提供的输入而核准所述第三客户端设备。针对所述数字组件在所述访问控制数据库中存储一个或多个规则。修改所述参数以提供对所述第三客户端设备执行所述数字组件的核准。基于所述数字组件的类型来确定所述参数的类型;并基于所述类型来修改所述参数。识别所述输入提示中的多个字段;为所述多个字段中的每个字段生成音频查询;以及响应于为所述多个字段中的每个字段生成的所述音频查询而接收一个或多个输入音频信号。所述会话可以包括访问控制会话,可以响应于经由所述第一客户端设备检测到的所述输入音频信号来发起所述访问控制会话;暂停所述第一客户端设备上的所述访问控制会话;将所述访问控制会话从所述第一客户端设备移交到所述第二客户端设备;以及响应于经由所述第二客户端设备、响应于所述输入提示而输入的所述数据分组,终止所述访问控制会话。所述数字组件可以由第三方计算设备提供。所述数据处理系统可以指令第三方计算设备提供所述数字组件以供所述第三客户端设备执行。所述第一客户端设备可以执行第一表面或用户接口类型,所述第二客户端设备可以执行第二表面或用户接口类型,并且所述第三客户端设备可以执行与所述第一表面和所述第二表面不同的第三表面或用户接口类型。所述数据处理系统可以被配置来提供所述数字组件以供所述第三表面和所述第二表面执行。提供针对所述账户标识符的、所述数字访问控制数据库上的所述数字组件的所述参数,以用于在所述第三客户端设备的存储器中存储;响应于经由所述第二客户端设备、响应于所述输入提示而输入的所述数据分组,更新所述第三客户端设备的所述存储器中存储的所述数字组件的所述参数。识别在第一数字助理设备的预定距离内的设备;并且其中,所述第二设备是基于在所述第一数字助理设备的预定距离内的所识别的设备来选择的。
在下文详细讨论这些和其他方面以及实施方式。前述信息和以下详细描述包括各个方面和实施方式的说明性示例,并且提供用于理解所要求保护的方面和实施方式的性质和特性的概述或框架。附图提供了对各个方面和实施方式的说明和进一步理解,并且被并入本说明书中并构成本说明书的一部分。
附图说明
附图不意图按比例绘制。在各个附图中,相同的附图标记和名称表示相同的元件。为了清楚起见,并非每个组件都会在每个附图中标记。在附图中:
图1是用于在计算设备之间同步访问控制的示例系统的图示;
图2是用于在计算设备之间同步访问控制的系统的示例操作的图示;
图3是用于在计算设备之间同步访问控制的示例方法的图示;以及
图4是示出计算机系统的总体架构的框图,所述计算机系统可以用来实现本文描述和示出的系统和方法的元素,包括例如图1和2中描绘的系统以及图3中描绘的方法。
具体实施方式
以下是与经由计算机网络路由分组化动作的方法、装置和系统有关的各种概念以及其实施方式的各种概念的更详细描述。可以以许多方式中的任何一种来实现上文介绍的和下文将更详细讨论的各种概念。
本公开大体上涉及在计算设备之间同步访问控制。由于有限的输入或输出接口,或不同设备上可用的其他处理能力,从某些类型的设备访问某些类型的数字组件或修改此类数字组件的访问控制参数会具有挑战性或不可能实现。本技术方案的系统和方法允许会话从第一设备访问或修改数字组件,然后将会话移交到第二设备以完成访问或修改。可以在可由多个设备使用的数字访问控制数据库中修改访问控制参数,以便访问数字组件。
通过提供一种数据处理系统——所述数据处理系统可以自动确定第一数字助理设备缺少或未最佳配置成处理某些类型的命令或指令,并且然后将会话移交到第二数字助理设备,所述数据处理系统提供了利用第一和第二数字助理设备的属性的引导交互过程。数据处理系统可以减少第一数字助理设备进行的不必要的处理,同时通过无缝地将会话转移到第二数字助理来提供调整或修改访问控制的附加技术功能。此外,数据处理系统可以维护访问控制数据库,所述访问控制数据库可以包括针对数字组件的参数或规则。访问控制数据库可以是中央定位的访问控制数据库。通过维护或管理访问控制数据库,数据处理系统可以促进将数字组件提供给被核准执行数字组件的设备。本方案可以减少资源消耗、处理器利用、电池消耗、带宽利用、音频文件大小,或第一数字助理设备所消耗的时间量,所述第一数字助理设备可能不包括要核准或认证命令以修改数字组件的访问控制的输入或输出端口、接口或组件。
例如,可以经由诸如对话应用编程接口的数字助理人机接口(在本文中称为表面)来请求数字组件。这可以包括请求应用内项目、订用或付费应用,并且可以由第三方开发者在他们的可以使用数字助理组件或表面的应用中提供。当访问数字组件(例如,有声读物、数字货币、电子文件或数字音乐)时,数据处理系统可以提供此数字组件,以供与账户链接的一些或所有数字助理表面或应用使用。例如,可以在可以是扬声器的第一数字助理设备上请求有声读物,然后随后在智能电话上执行。
数据处理系统可以在中央数据库中记录数字组件的请求或访问控制参数,所述中央数据库捕获由用户跨不同的数字助理表面所调整的访问控制参数。当使用特定的数字助理表面或应用时,数字助理表面可以向中央数据库请求账户的数字组件访问控制参数。万一在特定设备上无法完成访问控制调整,则可以进行设备移交(例如,将会话转移到智能电话以确认电子交易)。例如,如果需要认证但在第一数字助理设备中未提供认证,则数据处理系统可以将会话转移到第二数字助理设备(例如智能电话)以进行认证。完成认证后,与账户链接并且与数字组件兼容的设备可以使用数字组件。因此,本技术方案的系统和方法可以允许经由跨任何数字助理设备、表面或应用的语音接口获得数字组件,然后提供所述数字组件以供在被配置成执行数字组件的任何数字助理设备、表面或应用上执行。
图1示出用于在计算设备之间同步访问控制的示例系统100。系统100可以包括内容选择基础架构。系统100可以包括数据处理系统102。数据处理系统102可以经由网络105与内容提供者计算设备154、第三方设备156或本地计算设备140中的一个或多个通信。网络105可以包括:计算机网络,例如互联网、局域网、广域网、城域网或其他域网、内联网、卫星网络以及其他通信网络,诸如语音或数据移动电话网络。网络105可以用于访问信息资源,例如网页、网站、域名或统一资源定位符,这些信息资源可以在至少一个本地计算设备140(例如膝上型计算机、台式机、平板电脑、数字助理设备、智能电话、便携式计算机或扬声器)上呈现、输出、渲染或显示。例如,经由网络105,本地计算设备140的用户可以访问由内容提供者154提供的信息或数据。例如,计算设备140可以或可以不包括显示器;例如,计算设备可以包括有限类型的用户接口,例如麦克风和扬声器。在一些情况下,计算设备140的主用户接口可以是麦克风和扬声器,或语音接口。
本地计算设备140可以指位于公共场所——诸如旅馆、办公室、餐厅、零售店、购物中心、公园或者私人场所——诸如住宅的计算设备或客户端设备。术语本地可以指计算设备位于用户可以使用语音输入或其他输入与计算设备进行交互的位置。本地计算设备可以位于远离例如数据处理系统102的远程服务器的位置。因此,本地计算设备140可以位于旅馆房间、购物中心、小隔间或其他建筑物或住所,在该处用户可以使用语音输入与本地计算设备140进行交互,而数据处理系统102可以远程地位于数据中心中。本地计算设备140可以被称为数字助理设备。
网络105可以包括或构成显示网络,例如,互联网上可用的、与内容放置或搜索引擎结果系统相关联的信息资源子集,或有资格包括第三方数字组件作为数字组件放置宣传活动的一部分的信息资源子集。数据处理系统102可以使用网络105来访问信息资源,例如可以通过本地客户端计算设备140呈现、输出、渲染或显示的网页、网站、域名或统一资源定位符。例如,经由网络105,本地客户端计算设备140的用户可以访问由内容提供者计算设备154或服务提供者计算设备108提供的信息或数据。
网络105可以是任何类型或形式的网络,并且可以包括以下中任何一种:点对点网络、广播网络、广域网、局域网、电信网络、数据通信网络、计算机网络、ATM(异步传输模式)网络、SONET(同步光网络)网络、SDH(同步数字体系)网络、无线网络和有线网络。网络105可以包括无线链路,例如红外信道或卫星频带。网络105的拓扑结构可以包括总线、星形或环形网络拓扑。所述网络可以包括移动电话网络,其使用任何一种或多种用于在移动设备间进行通信的协议,包括高级移动电话协议(“AMPS”)、时分多址(“TDMA”)、码分多址(“CDMA”)、全球移动通信系统(“GSM”)、通用分组无线电业务(“GPRS”)或通用移动电信系统(“UMTS”)。可以经由不同的协议传输不同类型的数据,或者可以经由不同的协议传输相同类型的数据。
系统100可以包括至少一个数据处理系统102。数据处理系统102可以包括至少一个逻辑设备,例如具有处理器以经由网络105与例如计算设备140、内容提供者计算设备154(内容提供者154)或第三方设备156(或第三方156)进行通信的计算设备。数据处理系统102可以包括至少一个计算资源、服务器、处理器或存储器。例如,数据处理系统102可以包括位于至少一个数据中心中的多个计算资源或服务器。数据处理系统102可以包括多个逻辑分组的服务器,并且促进分布式计算技术。服务器的逻辑群组可以被称为数据中心、服务器群或机器群。服务器也可以在地理位置上分散。数据中心或机器群可以作为单个实体进行管理,或者所述机器群可以包括多个机器群。每个机器群中的服务器可以是异构的,服务器或机器中的一个或多个可以根据一种或多种类型的操作系统平台进行操作。
机器群中的服务器可以与相关联的存储系统一起存储在高密度机架系统中,并且位于企业数据中心中。例如,通过在本地化的高性能网络上定位服务器和高性能存储系统,以这种方式整合服务器可以提高系统可管理性、数据安全性、系统的物理安全性以及系统性能。将包括服务器和存储系统在内的所有或一些数据处理系统102的组件集中化,以及将它们与高级系统管理工具耦合在一起,可以更有效率地利用服务器资源,从而节省功率和处理需求并减少带宽使用。
系统100可以包括、访问或以其他方式与至少一个第三方设备156交互。第三方设备156可以包括至少一个逻辑设备,例如具有处理器以经由网络105与例如计算设备140、数据处理系统102或内容提供者154进行通信的计算设备。第三方设备156可以包括至少一个计算资源、服务器、处理器或存储器。例如,第三方设备156可以包括位于至少一个数据中心中的多个计算资源或服务器。
内容提供者设备154可以提供基于音频的数字组件,以供本地计算设备140显示为音频输出数字组件。数字组件可以包括商品或服务的提议,例如说出以下内容的基于语音的消息:“Would you like me to order you a taxi?(您需要我为您叫出租车吗?)”例如,内容提供者计算设备154可以包括存储器,所述存储器用于存储可以响应于基于语音的查询而提供的一系列的音频数字组件。内容提供者计算设备154还可以将基于音频的数字组件(或其他数字组件)提供给数据处理系统102,其中所述数字组件可以存储在数据存储库122中。数据处理系统102可以选择音频数字组件并将音频数字组件提供(或指令内容提供者计算设备154提供)给本地客户端计算设备140。基于音频的数字组件可以只为音频,也可以与文本、图像或视频数据组合。
第三方设备156可以包括数据处理系统102、与之耦合或以其他方式与其通信。第三方设备156可以包括本地计算设备140、与之耦合或以其他方式与其通信。第三方设备156可以包括计算设备140,与之耦合或以其他方式与之通信,该计算设备140可以是移动计算设备。第三方设备156可以包括内容提供者设备154、与之耦合或以其他方式与之通信。例如,第三方设备156可以将数字组件提供给本地计算设备140以供本地计算设备140执行。第三方设备156可以将数字组件提供给数据处理系统102以供数据处理系统102存储。第三方设备156可以将与数字组件相关的规则或参数提供给数据处理系统102以用于存储在访问控制数据库132中。
本地计算设备140可以包括至少一个传感器144、换能器146、音频驱动器148或预处理器150,与之耦合或以其他方式与之通信。本地计算设备140可以包括光源142或显示设备152,例如光指示器、发光二极管(“LED”)、有机发光二极管(“OLED”)或被配置成提供视觉输出或光输出的其他视觉指示器。传感器144可以包括例如环境光传感器、接近传感器、温度传感器、加速度计、陀螺仪、运动检测器、GPS传感器、位置传感器、麦克风或触摸传感器。换能器146可以包括扬声器或麦克风。音频驱动器148可以向硬件换能器146提供软件接口。音频驱动器可以执行音频文件或由数据处理系统102提供的其他指令,以控制换能器146来生成对应的声波或音波。预处理器150可以包括具有硬件的处理单元,所述硬件被配置成检测关键字并基于关键字执行动作。在将一个或多个词项传输到数据处理系统102以进行进一步处理之前,预处理器150可以滤除词项或修改词项。预处理器150可以将由麦克风检测到的模拟音频信号转换为数字音频信号,并经由网络105将携载数字音频信号的一个或多个数据分组传输到数据处理系统102。在一些情况下,处理器150可以响应于检测到执行这种传输的指令来传输携载一些或全部输入音频信号的数据分组。指令可以包括例如触发器关键字或其他关键字或批准,以将包括输入音频信号的数据分组传输到数据处理系统102。
本地客户端计算设备140可以与最终用户相关联,所述最终用户将语音查询作为音频输入(经由传感器144)录入到本地客户端计算设备140中,并且以计算机生成的语音形式接收音频输出,所述音频输出可以从数据处理系统102(或内容提供者计算设备154或服务提供者计算设备108)提供到本地客户端计算设备140,从换能器146(例如,扬声器)输出。计算机生成的语音可以包括来自真人的录音或计算机生成的语言。
数据存储库122可以包括一个或多个本地或分布式数据库,并且可以包括数据库管理系统。数据存储库122可以包括计算机数据存储或存储器,并且可以存储一个或多个签名和账户信息124、已链接设备信息126、内容数据128、模板数据130和访问控制数据库132,以及其他数据。访问控制数据库132可以包括或存储参数134、规则136和数字组件138(或数字组件138的标识符或参考标识符)。签名和账户信息124可以包括声学签名或语音签名,所述声学签名或语音签名可以由说话者辨识组件112用于识别与本地计算设备140的用户相对应的账户。签名124可以包括声学或音频签名。签名124可以指声学指纹(其可以包括压缩的数字概要)、从音频信号确定性地生成的指纹——所述指纹可以用于识别音频样本或快速定位音频数据库中的类似项。签名124可以包括促进由说话者辨识组件112识别简档的数据。
账户信息可以包括或引用简档信息、偏好、电子账户信息或与访问控制数据库132相对应的账户。已链接设备信息126可以包括或是指与账户124相关联的设备标识符(例如,本地计算设备140、第一数字助理设备280、第二数字助理设备282或第三数字助理设备284)。已链接设备信息126可以包括已经由数据处理系统102提供以与账户一起使用的设备。已链接设备信息126可以包括或引用根据访问控制数据库132被核准或经认证来访问数字组件138的设备。内容数据128可以包括用于音频输出的数字组件或相关联的元数据,以及输入音频消息,其可以是与本地客户端计算设备140的一个或多个通信会话的一部分。内容数据128可以包括例如内容宣传活动信息、内容群组、内容选择标准、数字组件对象,或由内容提供者154提供或由数据处理系统获得或确定以促进内容选择的其他信息。内容数据128可以包括例如内容宣传活动的历史效能。
模板数据130可以包括或是指用于生成输入提示或其他提示、通知或警示的模板。模板130可以例如基于本地计算设备140上可用的可用用户接口、输入接口或输出接口来存储为不同类型的本地计算设备140配置的不同模板。模板130可以由第三方设备156建立,并提供给数据处理系统102进行存储和使用,或者模板130可以由数据处理系统102的管理员创建或基于规则或策略生成。
访问控制数据库(“DB”)132可以包括有关数字组件138的信息。数字组件138可以指或包括可以由本地计算设备140或已链接设备(例如,第三数字助理设备284)执行的电子数据或数据文件。数字组件138可以指代或包括有声读物、数字音乐文件、数字影片文件、多媒体文件、电子游戏、程序、脚本,应用程序接口或数字货币。可以将数字组件138存储在访问控制数据库132中,或者可以将数字组件138的引用或标识符存储在访问控制数据库132中。例如,可以将数字组件138(或其数据文件)存储在第三方设备156(例如,数字组件138的提供者或开发者),并且访问控制数据库132可以存储指向数字组件138的深层链接、统一资源定位符或其他引用标识符。访问控制数据库132可以存储参数134。参数134可以指对数字组件138的访问或访问控制的类型。参数134可以包括例如阈值、距离、时间间隔、持续时间、分值或权重。参数可以包括值。所述值可以是数字、二进制、字母数字或符号。例如,参数可以指示与账户相关联的本地计算设备140可以访问数字组件138,还是本地计算设备140不能访问数字组件138。参数134可以是[Authorized(已授权)],且值可以是[Yes]或[No]。参数134可以是[subscription_type(订用类型)],且值可以是[one_time_use(一次性使用)]、[number_of_uses(使用次数)]、[unlimited_use(无限使用)]或[time_interval(时间间隔)],其中时间间隔可以是按周、按月或按年。其他参数134可以由第三方设备156或数字组件138的开发者或提供者来建立。规则136可以指或包括数字组件的策略或特性,这些策略或特性可以用于为数字组件138建立参数134。例如,规则可以是:如果数字组件类型是有声读物,则参数值可以是[one_time_use]、[number_of_uses]、[unlimited_use]或[time_interval]。规则可以是:如果数字组件是数字货币,则参数值可以是[exchangeable(可交换)]。规则可以是:如果数字组件正在流式多媒体文件,则参数是[downloading_prohibited(禁止下载)]或[monthly subscription(按月订用)]。因此,通过允许针对不同的数字组件138用不同的规则136和参数134配置访问控制数据库132,访问控制数据库132可以在中央数据处理系统102中维护或管理不同类型的数字组件及其访问控制。数据处理系统可以将一个或多个规则存储在数字组件的访问控制数据库中。
数据处理系统102可以包括具有至少一个计算资源或服务器的内容放置系统。数据处理系统102可以包括至少一个接口106、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个自然语言处理器组件108、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个直接动作应用编程接口(“API”)110、与之耦合或以其他方式与之通信。接口106、自然语言处理组件108和直接动作API 110可以形成交互式数据交换组件104。数据处理系统102可以包括至少一个交互式数据交换组件104、与之耦合或以其他方式与之通信。交互式数据交换组件104可以包括或引用对话API或数字助理功能。交互式数据交换组件104可以与一个或多个基于语音的接口或各种数字助理设备或表面通信或耦合,以便提供数据或接收数据或执行其他功能。
数据处理系统102可以包括至少一个内容选择器组件120、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个说话者辨识组件112、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个数据存储库122、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个访问控制器组件114、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个兼容性检查器组件116、与之耦合或以其他方式与之通信。数据处理系统102可以包括至少一个会话转移组件118、与之耦合或以其他方式与之通信。
交互式数据交换组件104、接口106、自然语言处理器组件108、直接动作API 110、说话者辨识组件112、访问控制器组件114、兼容性检查器组件116、会话转移组件118或内容选择器组件120均可以包括至少一个处理单元或其他逻辑设备,例如可编程逻辑阵列引擎,或被配置成与数据库存储库122或数据库通信的模块。交互式数据交换组件104、接口106、自然语言处理器组件108、直接动作API 110、说话者辨识组件112、访问控制器组件114、兼容性检查器组件116、会话转移组件118或内容选择器组件120和数据存储库122可以是分开的组件、单个组件或数据处理系统102的一部分。系统100及其组件——例如数据处理系统102,可以包括硬件元件,例如一个或多个处理器、逻辑设备或电路。
数据处理系统102可以获得与多个本地计算设备140(或计算设备或数字助理设备)相关联的匿名计算机网络活动信息。本地计算设备140或移动计算设备的用户可以肯定地核准数据处理系统102获得与本地计算设备140或移动计算设备相对应的网络活动信息。例如,数据处理系统102可以提示计算设备140的用户同意获得一种或多种类型的网络活动信息。本地计算设备140可以包括移动计算设备,例如智能电话、平板电脑、智能手表或可穿戴设备。本地计算设备140的用户的身份可以保持匿名,并且计算设备140可以与唯一标识符(例如,由数据处理系统或计算设备的用户提供的用户或计算设备的唯一标识符)相关联。数据处理系统可以将每个观察结果与对应的唯一标识符相关联。
内容提供者154可以建立电子内容宣传活动。电子内容宣传活动可以作为内容数据128存储在数据存储库122中。电子内容宣传活动可以指与公共题目相对应的一个或多个内容群组。内容宣传活动可以包括分层数据结构,所述分层数据结构包括内容群组、数字组件数据对象和内容选择标准。为了创建内容宣传活动,内容提供者154可以指定内容宣传活动的宣传活动层级参数的值。宣传活动层级参数可以包括例如宣传活动名称、用于放置数字组件对象的优选内容网络、用于内容宣传活动的资源的值、内容宣传活动的开始日期和结束日期、内容宣传活动的持续时间、数字组件对象放置的时程、语言、地理位置、其上提供数字组件对象的计算设备的类型。在一些情况下,闪现(impression)可以指何时从数字组件对象的来源(例如,数据处理系统102或内容提供者154)中获取数字组件对象,并且所述闪现是可计数的。在一些情况下,由于可能会发生点击欺诈,因此可以过滤并排除机器人活动而不作为闪现。因此,在一些情况下,闪现可以指web服务器对来自浏览器的页面请求的响应的测量,所述测量是从机器人活动和错误代码中过滤出来的,并且在尽可能接近渲染数字组件对象以供在计算设备140上显示的机会的点处记录。在一些情况下,闪现可以指可见或可听闪现;例如,数字组件对象至少部分地(例如20%、30%、30%、40%、50%、60%、70%或更多)在本地客户端计算设备140的显示设备152上至少部分地可见,或经由计算设备140的扬声器136可听。单击或选择可以指与数字组件对象的用户交互,例如对可听闪现的语音响应、鼠标点击、触摸交互、手势、摇动、音频交互或键盘点击。转化可以指用户针对数字组件异议采取期望的动作;例如,购买产品或服务、完成群体调查、访问与数字组件相对应的实体商店或完成电子交易。
内容提供者154可以进一步为内容宣传活动建立一个或多个内容群组。内容群组包括一个或多个数字组件对象和对应的内容选择标准,例如关键字、词语、词项、短语、地理位置、计算设备的类型、日内时间、兴趣、话题或垂直元。同一内容宣传活动下的内容群组可以共享相同的宣传活动层级参数,但是可以具有针对特定内容群组级别参数的定制规范,例如关键字、否定关键字(例如,在主要内容上存在否定关键字的情况下阻止数字组件的放置上)、关键字竞价或与竞价或内容宣传活动相关联的参数。
为了创建新的内容群组,内容提供者可以为内容群组的内容群组级别参数提供值。内容群组级别参数包括例如内容群组名称或内容群组题目,以及针对不同内容放置机会(例如,自动放置或受管理放置)或效果(例如,点击、闪现或转化)的竞价。内容群组名称或内容群组题目可以是一个或多个词项,内容提供者154可以使用这些词项捕获要为其选择内容群组的数字组件对象以进行显示的话题或主题。例如,汽车经销商可以为其所经营的每种品牌的车辆创建不同的内容群组,并且可以进一步为其所经营的每种型号的车辆创建不同的内容群组。汽车经销商可以使用的内容群组题目的示例包括例如“Make A sportscar(品牌A跑车)”、“Make B sports car(品牌B跑车)”、“Make C sedan(品牌C轿车)”、“Make C truck(品牌C卡车)”、“Make C hybrid(品牌C混合动力车)”或“Make D hybrid(品牌D混合动力车)”。示例内容宣传活动题目可以是“hybrid(混合动力车)”,并且包括“MakeC hybrid”和“Make D hybrid”的内容群组。
内容提供者154可以向每个内容群组提供一个或多个关键字和数字组件对象。关键字可以包括有关与数字组件对象相关联或由数字组件对象标识的产品或服务的词项。关键字可以包括一个或多个词项或短语。例如,汽车经销商可以包括“sports car(跑车)”、”V-6engine(V-6发动机)”、“four-wheel drive(四轮驱动)”、“fuel efficiency(燃油效率)”作为内容群组或内容宣传活动的关键字。在一些情况下,内容提供者可以指定否定关键字,以避免、防止、阻止或禁用某些词项或关键字的内容放置。内容提供者可以指定用于选择数字组件对象的匹配类型,例如精确匹配、短语匹配或广泛匹配。
内容提供者154可以提供一个或多个关键字,以供数据处理系统102用来选择由内容提供者154提供的数字组件对象。内容提供者154可以识别一个或多个要竞价的关键字,并且进一步提供各个关键字的竞价金额。内容提供者154可以提供附加的内容选择标准,以供数据处理系统102用来选择数字组件对象。多个内容提供者154可以对相同或不同的关键字竞价,并且数据处理系统102可以响应于接收到电子消息的关键字的指示而运行内容选择过程或广告竞拍。
内容提供者154可以提供一个或多个数字组件对象,以供数据处理系统102选择。数据处理系统102(例如,经由内容选择器组件120)在这样的内容放置机会变为可用时可以选择当内容放置机会变为可用时:该内容放置机会与资源分配、内容时程、最大竞价、关键字以及为内容群组指定的其他选择标准相匹配。内容群组中可以包括不同类型的数字组件对象,例如语音数字组件、音频数字组件、文本数字组件、图像数字组件、视频数字组件、多媒体数字组件或数字组件链接。数字组件对象(或数字组件)可以包括例如内容项、在线文档、音频、图像、视频、多媒体内容或赞助内容。在选择了数字组件之后,数据处理系统102可以传输数字组件对象以在计算设备140或计算设备140的显示设备152上进行渲染。渲染可以包括在显示设备上显示数字组件,或经由计算设备140的扬声器播放数字组件。数据处理系统102可以向计算设备140提供指令以渲染数字组件对象。数据处理系统102可以指令计算设备140或计算设备140的音频驱动器148生成音频信号或声波。
数据处理系统102可以包括被设计、配置、构造或操作为使用例如数据分组来接收和传输信息的接口106(或接口组件)。接口106可以使用一种或多种协议(例如网络协议)来接收和传输信息。接口106可以包括硬件接口、软件接口、有线接口或无线接口。接口106可以促进将数据从一种格式转换或重定格式为另一种格式。例如,接口106可以包括应用编程接口,所述应用编程接口包括用于在例如软件组件的各种组件之间进行通信的定义。接口106可以经由网络105与本地计算设备140、内容提供者设备154或第三方设备156中的一个或多个通信。
数据处理系统102可以与安装在本地客户端计算设备140上的应用、脚本或程序(例如应用)耦合,以将输入音频信号传送到数据处理系统102的接口106,并驱动本地客户端计算设备的组件以渲染输出音频信号。数据处理系统102可以接收包括或标识音频输入信号的数据分组或其他信号。
数据处理系统102或交互式数据交换组件104可以包括自然语言处理器(”NLP”)组件108。例如,数据处理系统102可以执行或运行NLP组件108以接收或获得音频信号并解析音频信号。例如,NLP组件108可以提供人与计算机之间的交互。NLP组件108可以配置有用于理解自然语言并允许数据处理系统102从人类或自然语言输入中导出含义的技术。NLP组件108可以包括或配置有基于例如统计机器学习的机器学习的技术。NLP组件108可以利用决策树、统计模型或概率模型来解析输入音频信号。NLP组件108可以执行例如诸如以下的功能:命名实体辨识(例如,在给定文本流的情况下,确定文本中的哪些项映射到例如人或地方的专有名称,以及每个此类名称的类型,例如人、位置或组织)、自然语言生成(例如,将计算机数据库中的信息或语义意图转换为可理解的人类语言)、自然语言理解(例如,将文本转换为更正式的表示形式,例如计算机模块可以操纵的一阶逻辑结构)、机器翻译(例如,自动将文本从一种人类语言翻译为另一种人类语言)、词法切分(例如,将词语分离为个体词素并识别词素的类别,这基于所考虑语言的词语的词法或结构的复杂性而能够有挑战性)、问题回答(例如,确定对人类语言问题的回答,其可以是特定的或开放式的)、语义处理(例如,在识别词语并对其含义进行编码以使所识别的词语与具有相似含义的其他词语相关之后可以进行的处理)。
通过将音频输入信号与存储的代表性音频波形集(例如,在数据存储库122中存储的)进行比较并选择最接近的匹配,NLP组件108可以将输入信号转换为辨识的文本。音频波形集可以存储在数据存储库122或数据处理系统102可访问的其他数据库中。代表性波形跨大用户集而生成,然后可以用来自用户的话音样本进行增强。在音频信号被转换为辨识的文本之后,NLP组件108将文本与这样的词语匹配:所述词语例如经由跨用户的训练或通过手动指定与数据处理系统102可以服务的动作相关联。NLP组件108的方面或功能可以由数据处理系统102或本地计算设备140执行。例如,本地NLP组件可以在本地计算设备140上执行,以执行将输入音频信号转换为文本以及经由数据分组将文本传输到数据处理系统102以进行进一步自然语言处理的各方面。
音频输入信号可以由本地客户端计算设备140的传感器144或换能器146(例如,麦克风)检测。经由换能器146、音频驱动器148或本地客户端计算设备140的其他组件可以将音频输入信号提供给数据处理系统102(例如,经由网络105),其中可以接收音频输入信号(例如,通过接口106)并将其提供给NLP组件108或存储在数据存储库122中。
本地计算设备140可以包括音频驱动器148、换能器146、传感器144和预处理器组件150。传感器144可以接收或检测输入的音频信号(例如,语音输入)。预处理器组件150可以耦合到音频驱动器、换能器和传感器。预处理器组件150可以对输入音频信号进行滤波以创建经滤波的输入音频信号(例如,通过去除某些频率或抑制噪声)。预处理器组件150可以(例如,使用软件或硬件数模转换器)将经滤波的输入音频信号转换为数据分组。在一些情况下,预处理器组件150可以将未滤波的输入音频信号转换为数据分组,并将数据分组传输到数据处理系统102。预处理器组件150可以将数据分组传输到数据处理系统102,所述数据处理系统102包括执行自然语言处理器组件、接口、说话者辨识组件和直接动作应用编程接口的一个或多个处理器和存储器。
数据处理系统102可以经由接口从预处理器组件接收数据分组,所述数据分组包括由传感器检测到的经滤波的(或未滤波的)输入音频信号。数据处理系统102可以从输入音频信号中识别声学签名。数据处理系统102可以基于在数据存储库中的查找(例如,查询数据库)来识别与声学签名相对应的电子账户。响应于电子账户的识别,数据处理系统102可以建立会话和用于所述会话的账户。账户可以包括具有一个或多个策略的简档。数据处理系统102可以解析输入音频信号以识别请求和与所述请求相对应的触发关键字。
数据处理系统102可以向本地计算设备140的预处理器组件提供状态。本地计算设备140可以接收状态的指示。音频驱动器可以接收简档状态的指示,并根据指示生成输出信号。音频驱动器可以将指示转换为输出信号,例如声音信号或声学输出信号。音频驱动器可以基于由音频驱动器生成的输出信号来驱动换能器146(例如,扬声器)以产生声音。
在一些情况下,本地计算设备140可以包括光源。光源可以包括一个或多个LED、灯、显示器或被配置成提供光学或视觉输出的其他组件或设备。预处理器组件可以使光源提供与状态相对应的视觉指示。例如,视觉指示可以是:打开的状态指示灯、灯的颜色变化、具有一种或多种颜色的灯模式或文本或图像的视觉显示。
NLP组件108可以获得输入音频信号。根据输入音频信号,NLP组件108可以识别至少一个请求或与所述请求相对应的至少一个触发关键字。请求可以指示输入音频信号的意图或主题。触发关键字可以指示可能采取的动作类型。触发关键字可以是向本地计算设备140指示将随后的音频输入转换为文本并将所述文本传输到数据处理系统102以进行进一步处理的唤醒信号或热词。例如,NLP组件108可以解析输入音频信号,以识别晚上离开家赴宴和看电影的至少一个请求。触发关键字可以包括至少一个词语、短语,词根或部分词语,或指示要采取的动作的派生词。例如,来自输入音频信号的触发关键字“go(去…)”或“togo to(前往…)”可以指示需要交通工具。在此示例中,输入音频信号(或所识别的请求)没有直接表达交通运输的意图,但是触发关键字指示交通运输是请求所指示的至少一个其他动作的辅助动作。
NLP组件108可以解析输入音频信号以识别、确定、检索或以其他方式获得请求和触发关键字。例如,NLP组件108可以将语义处理技术应用于输入音频信号以识别触发关键字或请求。NLP组件108可以将语义处理技术应用于输入音频信号以识别包括一个或多个触发关键字(例如第一触发关键字和第二触发关键字)的触发短语。例如,输入音频信号可以包括语句“I want to purchase an audiobook(我想购买有声读物)”。NLP组件108可以将语义处理技术或其他自然语言处理技术应用于包括所述语句的数据分组以识别触发短语“want to purchase(想购买)”和“audiobook(有声读物)”。NLP组件108可以进一步识别多个触发关键字,例如购买和有声读物。例如,NLP组件108可以确定触发短语包括触发关键字和第二触发关键字。
NLP组件108可以对输入音频信号进行过滤以识别触发关键字。例如,携载输入音频信号的数据分组可以包括“It would be great if I could get someone that couldhelp me go to the airport(如果我能找到会助我去机场的人就好了)”,在这种情况下,NLP组件108可以滤除一个或多个词项,如下所示:“it”、“would”、“be”、“great”、“if”、“I”、“could”、“get”、“someone”、“that”、“could”、或“help”。通过滤除这些词项,NLP组件108可以更准确和可靠地识别触发关键字,例如“go to the airport(去机场)”,并确定这是对出租车或乘车共享服务的请求。
在一些情况下,NLP组件可以确定携载输入音频信号的数据分组包括一个或多个请求。例如,输入音频信号可以包括语句“I want to purchase an audiobook andmonthly subscription to movies(我想购买有声读物和对电影的按月订用)”。NLP组件108可以确定这是对有声读物和流式多媒体服务的请求。NLP组件108可以确定这是单个请求还是多个请求。NLP组件108可以确定这是两个请求:对提供有声读物的服务提供者的第一请求,以及对提供电影流媒体的服务提供者的第二请求。在一些情况下,NLP组件108可以将多个确定的请求组合成单个请求,并将所述单个请求传输到第三方设备156。在一些情况下,NLP组件108可以将个体请求传输到另一个服务提供者设备,或将两个请求分开地传输到同一第三方设备156。
数据处理系统102可以包括直接动作API 110,所述直接动作API110被设计和构造成基于触发关键字生成响应于请求的动作数据结构。数据处理系统102的处理器可以调用直接动作API 110来执行脚本,所述脚本生成数据结构以提供给第三方设备156或其他服务提供者来获得数字组件、订购服务或产品,例如来自汽车共享服务的汽车,或有声读物。直接动作API 110可以从数据存储库122获得数据,以及在最终用户同意的情况下从本地客户端计算设备140接收的数据,以确定位置、时间、用户账户、物流或其他信息,允许第三方设备156执行例如从汽车共享服务预约汽车的操作。使用直接动作API 110,数据处理系统102还可以与第三方设备156通信,以在此示例中通过进行汽车共享接车预约来完成转化。
直接动作API 110可以执行指定的动作以满足最终用户的意图,如由数据处理系统102所确定。取决于其输入中指定的动作以及数据存储库122中的参数或规则,直接动作API 110可以执行识别满足用户请求所需的参数的代码或对话脚本。此类代码可以例如在数据存储库122中查找例如家庭自动化服务或第三方服务的名称的附加信息,或者它可以提供音频输出以在本地客户端计算设备140处进行渲染以询问最终用户问题,例如请求的出租车的意图目的地。直接动作API 110可以确定参数,并且可以将信息打包成动作数据结构,然后可以将其发送到另一组件——例如内容选择器组件120,或者发送到服务提供者计算设备108以被履行。
直接动作API 110可以从NLP组件108或数据处理系统102的其他组件接收指令或命令,以生成或构造动作数据结构。直接动作API110可以确定动作的类型以便从存储在数据存储库122中的模板存储库122中选择模板。动作的类型可以包括例如服务、产品、预约、票务、多媒体内容、有声读物、管理订用、调整订用、汇转数字货币、进行购买或音乐。动作的类型可以进一步包括服务或产品的类型。例如,服务的类型可以包括汽车共享服务、送餐服务、洗衣服务、侍佣服务、维修服务、家政服务、设备自动化服务或媒体流送服务。产品的类型可以包括例如衣服、鞋、玩具、电子产品、计算机、书籍或珠宝。预约的类型可以包括例如晚餐预约或美发沙龙预约。票务的类型可以包括例如电影票、运动场馆票或机票。在一些情况下,可以根据价格、位置、运输类型、可用性或其他属性对服务、产品、预约或票务的类型进行分类。
NLP组件108可以解析输入音频信号以识别请求和与所述请求相对应的触发关键字,并将所述请求和触发关键字提供给直接动作API110,以使所述直接动作API 110基于触发关键字来生成响应所述请求的第一动作数据结构。直接动作API 110在识别请求的类型后可以从模板存储库122访问对应的模板。模板可以包括结构化数据集中的字段,所述字段可以由直接动作API 110填充以推进经由第三方设备156的本地计算设备140检测到的输入音频所请求的操作(例如,指派出租车在接车位置接最终用户并将其送到目的地位置的操作)。直接动作API110可以在模板储存库122中执行查找以选择与触发关键字和请求的一个或多个特征匹配的模板。例如,如果请求对应于对汽车或到目的地的乘车的请求,则数据处理系统102可以选择汽车共享服务模板。汽车共享服务模板可以包括以下字段中的一个或多个:设备标识符、接车位置、目的地位置、乘客人数或服务类型。直接动作API 110可以用值填充字段。为了用值填充字段,直接动作API 110可以向计算设备140的一个或多个传感器144或设备140的用户接口查探(ping)、轮询或以其他方式获得信息。例如,直接动作API110可以使用位置传感器(例如GPS传感器)检测源位置。直接动作API 110可以通过向计算设备140的用户端提交调查、提示或查询来获得进一步的信息。直接动作API可以经由数据处理系统102的接口106和计算设备140的用户接口(例如,音频接口、基于语音的用户接口,显示器或触摸屏)来提交调查、提示或查询。因此,直接动作API 110可以基于触发关键字或请求为动作数据结构选择模板,用一个或多个传感器144检测到的或经由用户接口获得的信息填充模板中的一个或多个字段,并且生成、创建或以其他方式构造动作数据结构以促进第三方设备156执行操作。
为了构造或生成动作数据结构,数据处理系统102可以识别所选模板中的一个或多个字段以用值来填充。可以使用数字值、字符串、Unicode值、布尔逻辑、二进制值、十六进制值、标识符、位置坐标、地理区域、时间戳或其他值填充这些字段。字段或数据结构本身可以被加密或掩码以维护数据安全性。
在确定模板中的字段之后,数据处理系统102可以识别字段的值以填充模板的字段从而创建动作数据结构。数据处理系统102可以通过在数据存储库122上执行查找或其他查询操作来获得、检索、确定或以其他方式识别字段的值。
在一些情况下,数据处理系统102可以确定数据存储库122中缺少字段的信息或值。数据处理系统102可以确定数据存储库122中存储的信息或值过期、陈旧或以其他方式不适合构建响应于NLP组件108所识别的触发关键字和请求的动作数据结构的目的(例如,本地客户端计算设备140的位置可能是旧位置而不是当前位置;账户可能已过期;目标餐厅可能已移至新位置;体育活动信息;或交通方式)。
如果数据处理系统102确定其当前在数据处理系统102的存储器中无法访问模板字段的值或信息,则数据处理系统102可以获取值或信息。数据处理系统102可以通过查询或轮询本地客户端计算设备140的一个或多个可用传感器、针对所述信息向本地客户端计算设备140的最终用户进行提示或使用HTTP协议访问在线的基于web的资源来获取或获得信息。例如,数据处理系统102可以确定其不具有本地客户端计算设备140的当前位置,所述当前位置可能是模板的所需字段。数据处理系统102可以向本地客户端计算设备140查询位置信息。数据处理系统102可以请求本地客户端计算设备140使用一个或多个位置传感器144(例如全球定位系统传感器、WIFI三角测量、小区塔三角测量、蓝牙信标、IP地址或其他位置感测技术)来提供位置信息。
在一些情况下,数据处理系统102可以使用第二简档来生成动作数据结构。然后,数据处理系统102可以确定使用第二简档生成的动作数据结构是否与第一简档兼容。例如,第一简档可以包括阻止一种类型的动作数据结构的策略,例如,经由本地计算设备140从电子在线零售商购买产品。本地计算设备140检测到的输入音频可能已包括从电子在线零售商购买产品的请求。数据处理系统102可能已经使用第二简档来识别与电子在线零售商相关联的账户信息,然后生成了购买产品的动作数据结构。动作数据结构可以包括与和说话者辨识组件112所识别的声学签名相关联的电子账户相对应的账户标识符。
数据处理系统102可以包括说话者辨识组件112,所述说话者辨识组件设计、构造和操作用于接收由本地计算设备140检测到的音频输入信号、识别声学签名以及识别与所述声学签名相对应的电子账户。说话者辨识组件112可以经由接口106接收包括由本地计算设备140的传感器144或换能器146检测到的输入音频信号的数据分组。说话者辨识组件112可以从输入音频信号中识别声学签名。说话者辨识组件112可以基于在数据存储库122中的查找来识别与声学签名相对应的电子账户。
说话者辨识组件112可以接收具有携载输入音频信号的有效载荷的数据分组。说话者辨识组件112可以对输入音频信号执行预滤波或预处理以去除音频的某些频率。预滤波可以包括例如低通滤波器、高通滤波器或带通滤波器的滤波器。滤波器可以应用于频域。可以使用数字信号处理技术来应用滤波器。滤波器可以被配置成保持与人类语音或人类话音的频率,同时消除落在人类话音的典型频率之外的频率。例如,带通滤波器可以被配置成去除低于第一阈值(例如,70Hz、75Hz、80Hz、85Hz、90Hz、95Hz、100Hz或105Hz)以及高于第二阈值(例如200Hz、205Hz、210Hz、225Hz、235Hz、245Hz或255Hz)的频率。应用带通滤波器可以减少下游处理中的计算资源利用。在一些情况下,本地计算设备140上的预处理器150可以在将输入音频信号传输到数据处理系统102之前应用带通滤波器,从而减少了网络带宽利用。然而,基于本地计算设备140可用的计算资源,将输入音频信号提供给数据处理系统102以允许数据处理系统102执行滤波可能更有效率。
说话者辨识组件112可以应用附加的预处理或预滤波技术来促进识别与说话者相对应的电子账户。例如,说话者辨识组件112可以应用降噪技术以减少可能干扰说话者辨识的环境噪声水平。降噪技术可以提高说话者辨识的准确度和速度,从而提高数据处理系统102识别电子账户的效能。
说话者辨识组件112可以访问存储在数据存储库122中的签名124。说话者辨识组件112可以分析经滤波的输入音频信号以识别签名,并使用所述签名来识别电子账户。因此,说话者辨识组件112可以执行说话者辨识或语音辨识,以识别与输入音频信号的签名相对应的电子账户。
说话者辨识组件112可以配置有例如模式辨识的一种或多种说话者辨识技术。说话者辨识组件112可以配置有与文本无关的说话者辨识过程。在与文本无关的说话者辨识过程中,用于建立电子账户的文本可以与后来用于辨识说话者的文本不同。
例如,说话者辨识组件112可以识别输入音频信号中输入话音源之间不同的声学特征。声学特征可以反映可以与唯一输入话音源相对应的物理模式或所学习的模式。声学特征可以包括例如语音声调或说话风格。用于识别、处理和存储签名的技术可以包括频率估计(例如,瞬时基频或离散能量分离算法)、隐马尔可夫模型(例如,用于对随机变化的系统进行建模的随机模型,其中未来状态取决于当前状态,且其中被建模的系统具有未观察到的状态)、高斯混合模型(例如,以高斯组件密度的加权和表示的参数概率密度函数)、模式匹配算法、神经网络、矩阵表示、矢量量子化(例如,信号处理中的量子化技术,所述技术允许通过原型矢量的分布来对概率密度函数进行建模)或决策树。其他技术可以包括去说话者技术,例如群队(cohort)模型和世界模型。说话者辨识组件112可以配置有机器学习模型以促进模式辨识或适应说话者特性。
在识别输入音频信号中的声学签名后,说话者辨识组件112可以在数据存储库122或签名数据结构(例如,签名和账户124)中执行查找。签名数据结构中存储的签名可以映射到电子账户的标识符。说话者辨识组件112可以使用在输入音频信号中识别的签名在签名数据结构中执行查找,以检索与输入音频的签名相对应的电子账户。
在一些情况下,说话者辨识组件112可以基于查找确定不存在与声学签名相对应的电子账户。例如,签名可能未存储在签名数据结构124中,或者可能尚未建立针对签名的电子账户。查找可能返回空值或空集。响应于确定不存在签名或电子账户,说话者辨识组件112可以在数据存储库中创建电子账户。说话者辨识组件112可以更新签名数据结构124以包括根据输入音频信号构建的新签名和对应的电子账户。说话者辨识组件112可以将电子账户映射到新的声学签名。
因此,数据处理系统102可以包括交互式数据交换组件104,其可以经由数据处理系统102的接口106接收数据分组,所述数据分组包括由与账户标识符链接的本地计算设备140(例如,第一客户端设备或第一数字助理设备)的传感器144检测到的输入音频信号。交互式数据交换组件104可以基于自然语言处理技术(例如,通过NLP组件108)来解析包括输入音频信号的数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字。交互式数据交换组件104可以与本地计算设备140建立会话,并且基于针对数字访问控制数据库132中存储的数字组件的策略或规则136来生成输入提示,其中所述输入提示具有响应与所述账户标识符链接的所述第一客户端设备对数字组件的请求的字段。
例如,交互式数据交换组件104可以与访问控制数据库132或访问控制器组件114进行通信,以确定:为满足请求,可能需要附加输入。附加输入可以是用户凭证、电子账户信息、支付信息、交易信息或认证信息。与数据存储库122或访问控制器组件114通信的交互式数据交换组件104可以使用模板130来生成输入提示。模板130可以是针对参数134的值,其是由针对所请求的数字组件138建立的规则136所确定的。例如,如果请求是听有声读物,则如果用户想要流送该有声读物或下载该有声读物,如果用户想要建立对有声读物提供者的按月订用,或如果用户想要建立一次性的仅流送配置,或由提供有声读物服务的第三方设备156使其可用的或提供的任何其他类型的配置,则数据处理系统102可以生成输入提示,以获取有关用户希望如何为音频付费的信息。因此,输入提示可以包括具有一个或多个输入文本框或下拉菜单或按钮或其他图形用户界面微件的一个或多个域。数据处理系统102可以针对会话计算环境转换输入文本框。数据处理系统102可以确定输入文本框不适合基于语音的对话计算环境,例如,数据处理系统102可以确定转换输入文本框可能是麻烦的、低效的、安全性较低的、处理器密集的,或导致交易延迟。
数据处理系统102可以包括兼容性检查器组件116、与兼容性检查器组件116耦合或以其他方式对其访问,所述兼容性检查器组件116被设计、构造和操作用于确定输入提示是否与本地计算设备140兼容。数据处理系统102可以确定输入提示与链接至用户账户的第一客户端设备不兼容。数据处理系统102可以确定输入提示与链接至用户账户的第二客户端设备兼容。
兼容性检查器组件116可以确定与所生成的输入提示相关联的输入或输出的类型。兼容性检查器组件116可以接收与本地计算设备140相关联的设备信息。兼容性检查器组件116可以将与所生成的输入提示相关联的输入或输出的类型与本地计算设备140上可用的输入和输出接口进行比较。如果兼容性检查器组件116确定所生成的输入提示所需的输入类型在本地计算设备140上不可用,则兼容性检查器组件116可以确定本地计算设备140与所生成的输入提示不兼容。例如,输入提示可以要求输入电子交易帐号,但是本地计算设备140可能不包括键盘、鼠标或触摸屏。因此,本地计算设备140可能无法提供用于输入电子帐号的机制。尽管有可能提供音频信号或说出编号,但是数据处理系统102可以确定以语音方式提供电子账户信息可能并不安全。因此,数据处理系统102可以确定不兼容性。
兼容性检查器组件116可以确定本地计算设备140是公共或不安全的计算设备140,不足够安全来接收账户信息或认证信息,因此是不兼容的。兼容性检查器组件116可以使用各种策略或技术来基于资源消耗、设备配置、接口可用性、偏好或安全性来确定不兼容性。兼容性检查器组件116可以基于针对用户所请求的数字组件的规则来确定策略。例如,针对请求的数字组件的规则可以是生物特征认证,例如指纹作为优选的认证技术,但是本地计算设备140可能不包括生物特征传感器。因此,兼容性检查器组件116可以确定本地计算设备140对于所生成的输入提示不兼容。
在确定本地计算设备140与所生成的输入提示不兼容时,数据处理系统102可以识别第二计算设备。例如,数据处理系统102可以包括会话转移组件118、与会话转移组件118耦合或以其他方式对其访问,所述会话转移组件118设计、构造和操作用于响应于确定输入提示与第一客户端设备不兼容而识别第二客户端设备的状态,该第二客户端设备和与第一客户端设备链接的账户标识符链接。第一和第二客户端设备可以包括本地计算设备140的一个或多个组件或功能。第二客户端设备可以与输入提示兼容,因为它可以包括所需的输入接口、输出接口、应用、程序、计算资源或其他功能。
为了识别第二客户端设备,数据处理系统102(例如,经由会话转移组件118)可以如已链接设备数据结构126中所指示来轮询与账户链接的一个或多个设备。数据处理系统102可以使用账户标识符在已链接设备数据结构126中执行查找,以确定已链接设备的设备标识符,然后轮询此类设备。数据处理系统102可以使用其他轮询技术来识别附近的设备或连接到第一客户端设备的设备(例如,经由无线连接)。会话转移组件116可以接收第二客户端设备的设备信息,以确定客户端设备的状态。状态可以指示用于填充或满足或响应所生成的输入提示的输入接口、输出接口、计算资源或其他功能的可用性。例如,会话转移组件118可以向第二客户端设备轮询关于键盘输入或触摸屏输入接口的可用性的状态信息,并且所述状态信息可以指示触摸屏接口是可用的。
兼容性检查器组件116可以基于所述会话转移组件识别的状态来确定输入提示与第二客户端设备兼容。然后,兼容性检查器组件116可以指令会话转移组件116来移交会话。会话转移组件118可以将会话移交到第二客户端设备,并终止与第一客户端设备的会话的一部分。移交会话可以指或包括将与第一设备的会话转移到第二设备。移交会话可以指或包括发起会话以与第二设备执行请求的电子交易。移交会话可以指或包括终止与第一客户端设备的会话,并且然后与第二客户端设备继续该会话。移交会话可以指或包括发起与第二客户端设备的第二会话。移交会话可以指或包括将与经由第一客户端设备进行的会话的一部分相关联的信息提供给第二客户端设备。移交会话可以指或包括向第二客户端设备传输或转发所生成的输入提示。
会话可以包括或指访问控制会话。访问控制会话可以指或包括与获得、请求、授权或核准对数字组件的访问相关联的一个或多个数据通信或连接。数据处理系统102可以响应于经由第一客户端设备(例如,本地计算设备140)检测到的输入音频信号而发起访问控制会话。响应于确定所生成的输入提示与本地计算设备140或第一客户端设备不兼容,数据处理系统102可以暂停第一客户端设备上的访问控制会话。数据处理系统102可以将访问控制会话从第一客户端设备移交到第二客户端设备。响应于经由第二客户端设备、响应于输入提示而输入的数据分组,数据处理系统102可以终止访问控制会话。
在转移或移交会话后,交互式数据交换组件104可以响应于移交而将输入提示传输到第二客户端设备。交互式数据交换组件104可以接收响应于输入提示而经由第二客户端设备输入的数据分组。
数据处理系统102可以包括访问控制器组件114、与访问控制器组件114耦合或以其他方式对其访问,所述访问控制器组件114设计、构造和操作用于基于经由第二客户端设备输入的数据分组来修改针对账户标识符的、数字访问控制数据库中存储的数字组件的参数。访问控制器组件114可以维护访问控制数据库132。访问控制器组件114可以修改、调整、操纵或更新访问控制数据库132。例如,访问控制器组件114可以更新访问控制数据库132中存储的针对数字组件的订用服务参数,以指示按月订用、一次性查看、按年订用或其他购买类型。例如,访问控制器组件114可以为针对账户的数字组件更新参数的值,以指示与账户链接的设备被核准执行、渲染、处理或以其他方式呈现数字组件。
访问控制器组件114可以维护访问控制数据库132中任何类型的数字组件的订用、购买或访问信息。访问控制器组件114可以被配置成解析或处理与一种类型的数字组件138相对应的规则136以更新参数134的值。访问控制器组件114可以从第三方设备156或数字组件的其他提供者接收更新的规则或新规则,并将更新的规则或新规则存储在访问控制数据库132中。因此,访问控制器组件114可以代表第三方设备156或除了第三方设备156之外也维护、修改、添加、去除、删除或以其他方式操纵或调整对数字组件的访问控制。
然后,数据处理系统102可以提供数字组件以供客户端设备执行。例如,数据处理系统102可以接收在与账户标识符链接的第三客户端设备上执行数字组件的请求。数据处理系统102(例如,经由访问控制器组件114)可以基于针对账户标识符的数字访问控制数据库中存储的参数信息来验证第二客户端设备有权访问数字组件。数据处理系统102(例如,经由兼容性检查器组件116)可以确定数字组件与第三客户端设备兼容。例如,执行、呈现或渲染数字组件所需的应用类型在第三客户端设备上可用(例如,应用版本,操作系统版本);计算资源(例如处理器速度、存储器、带宽、存储)足以处理或执行数字组件;或用于呈现数字组件的接口(例如,显示器、输入、键盘、触摸屏、传感器、加速度计、GPS或扬声器)在客户端设备上可用。兼容性检查器组件114可以轮询第三客户端设备来获得状态信息以确定兼容性。因此,响应于验证数字组件的访问和兼容性,数据处理系统102可以提供数字组件以供第三客户端设备执行。
兼容性检查器组件116可以基于设备的状态来确定设备所请求的数字组件不能兼容以供设备执行。数据处理系统102可以基于第三客户端设备的状态来转换数字组件的格式。数据处理系统102可以响应于兼容性信息或状态信息而将数字组件从第一格式转换为第二格式。例如,设备可以包括具有第一分辨率的显示器;然后,数据处理系统102可以调整数字组件的分辨率以与显示器兼容。设备可以配置有图形驱动器,所述图形驱动器能够支持二维图像和视频而非三维视频;数据处理系统102可以将数字组件转换用于二维显示。
数据处理系统102(例如,兼容性检查器116)可以识别与账户标识符链接的多个客户端设备。兼容性检查器116可以识别与数字组件兼容的多个客户端设备的子集。兼容性检查器116可以响应于参数的修改而提供数字组件以供在多个客户端设备的子集上执行。因此,访问控制器组件114可以通过提供对第三客户端设备执行数字组件的核准来修改参数。访问控制器组件114可以基于数字组件的类型来确定参数的类型,并基于所述类型来修改参数。
例如,数据处理系统102可以包括设计、构造、配置或操作用于选择数字组件对象的内容选择器组件120。为了选择数字组件以在基于语音的环境中显示,数据处理系统102(例如,经由NLP组件108)可以解析输入音频信号以识别关键字(例如,触发关键字),并使用关键字来基于广泛匹配、精确匹配或短语匹配来选择匹配数字组件。例如,内容选择器组件120可以分析、解析或以其他方式处理候选数字组件的主题,以确定候选数字组件的主题是否对应于由本地客户端设备140的麦克风检测到的输入音频信号的关键字或短语的主题。内容选择器组件120可以使用图像处理技术、字符辨识技术、自然语言处理技术或数据库查找来识别、分析或辨识候选数字组件的语音、音频、词项、字符、文本、符号或图像。候选数字组件可以包括指示候选数字组件的主题的元数据,在这种情况下,内容选择器组件120可以处理元数据以确定候选数字组件的主题是否对应于输入音频信号。
内容选择器组件120可以进一步利用简档堆栈中提供的信息来执行内容选择。内容选择器组件120可以利用第二简档层,所述第二简档层可以对应于与提供了由本地计算设备140检测的输入音频信号的说话者相关联的电子账户。内容选择器120还可以使用与第一简档层相关联的信息,所述第一简档层可以对应于第三方设备156提供的默认简档层。内容提供者154提供的内容宣传活动可以包括内容选择标准,数据处理系统102可以将所述内容选择标准与第二简档层或第一简档层中指示的标准相匹配。
内容提供者154在建立包括数字组件的内容宣传活动时可以提供其他指示符。内容提供者154可以在内容宣传活动或内容群组层级上提供信息,内容选择器组件120可以通过使用关于候选数字组件的信息进行查找来识别该信息。例如,候选数字组件可以包括唯一标识符,其可以映射到内容群组、内容宣传活动或内容提供者。内容选择器组件120可以基于数据存储库122中的内容宣传活动数据结构中存储的信息来确定关于内容提供者154的信息。
数据处理系统102可以经由计算机网络接收对在计算设备140上呈现内容的请求。数据处理系统102可以通过处理由本地客户端计算设备140的麦克风检测到的输入音频信号来识别所述请求。请求可以包括请求的选择标准,例如设备类型、位置以及与请求相关联的关键字。请求可以包括动作数据结构或动作数据结构。
响应于请求,数据处理系统102可以从数据存储库122或与内容提供者154相关联的数据库中选择数字组件对象,并通过网络105提供用于经由计算设备140呈现的数字组件。可以由不同于第三方设备156的内容提供者设备154提供数字组件对象。数字组件可以对应于与动作数据结构的服务类型不同的服务类型(例如,出租车服务相对于送餐服务)。计算设备140可以与数字组件对象进行交互。计算设备140可以接收对数字组件的音频响应。计算设备140可以接收选择与数字组件对象相关联的超链接或其他按钮的指示,所述指示使或允许计算设备140识别内容提供者设备154或第三方设备156、向内容提供者设备154或第三方设备156请求服务、指令内容提供者设备154或第三方设备156执行服务、将信息传输到内容提供者设备154或第三方设备156,或以其他方式查询内容提供者设备154或第三方设备156。
数据处理系统102(例如,经由接口106和网络105)可以传输数据分组,该数据分组包括响应于输入音频信号或其请求或查询的输出信号。输出信号可以使本地计算设备140的音频驱动器组件138或由本地计算设备140执行的音频驱动器组件138驱动本地计算设备140的扬声器(例如,换能器146)以生成与输出信号相对应的声波。
图2是在计算设备之间同步访问控制的系统200的操作的图示。系统200可以包括图1中描绘的系统100或图4中描绘的系统400的一个或多个组件。例如,系统200可以包括数据处理系统102。系统200可以包括第一数字助理设备280、第二数字助理设备282或第三数字助理设备284,或与之耦合或通信。第一数字助理设备280、第二数字助理设备282和第三数字助理设备284可以包括本地计算设备140的一个或多个组件或功能。第一数字助理设备280、第二数字助理设备282和第三数字助理设备284可以包括彼此不同的功能或接口。例如,第一数字助理设备280可以是不包括显示设备152的扬声器数字助理;第二数字助理设备282可以是包括触摸屏的移动计算设备,并且第三数字助理设备284可以是膝上型计算机。
在动作202,第一数字助理设备280接收输入音频信号。输入音频信号可以包括请求、一个或多个关键字或触发短语或关键字。输入音频信号可以包括用于访问内容的查询。例如,输入音频信号可以是“I would like to sign up for a monthly subscription toCompany_A streaming service(我想注册公司_A流送服务的按月订用)”。输入音频信号可以是“I want to purchase AudioBook_B(我想购买有声读物_B)”。输入音频信号可以是“Iwant to purchase Album_C using digital currency_D(我想使用数字货币_D购买专辑_C)。”输入音频信号可以是“I want to get a free trial version of VideoGame_E(我想获得视频游戏_E的免费试用版)。”
在动作204,第一数字助理设备280可以经由网络105将输入音频信号(或其文本版本或数据分组)传输到数据处理系统102。数据处理系统102可以接收数据分组。在动作206,数据处理系统102可以识别请求。例如,数据处理系统102可以使用数据处理系统102的交互式数据交换组件的NLP组件来识别请求。
在动作208,数据处理系统102可以执行关于是否修改访问控制的决策框。决策框可以指或包括:数据处理系统确定是否修改访问控制参数以便提供数字组件。决策框可以指或包括:数据处理系统102确定第一数字助理设备280是否已被核准访问所请求的数字组件。如果在与动作208相对应的决策框处,数据处理系统102确定不必针对与第一数字助理设备280相对应的账户标识符来修改所请求的数字组件的访问控制参数,则数据处理系统可以进行至决策框210,以确定数字组件是否兼容以供第一数字助理设备280执行。如果在决策框210,数据处理系统102确定数字组件与第一数字助理设备280兼容(例如,基于第一数字助理设备280的状态或设备信息),则在动作214处,数据处理系统可以将数字组件传输到第一数字助理设备280以供执行。
然而,如果在决策框210处数据处理系统102确定数字组件与第一数字助理设备280不兼容,则在动作212处,数据处理系统102可以确定对数字组件重定格式以与第一数字助理设备280兼容。如果在动作212处数据处理系统102可以对数字组件重定格式,则数据处理系统102进行至重定格式,并在动作214处将重定格式的数字组件传输到第一数字助理设备280以供执行。如果数据处理系统102无法将数字组件重定格式为兼容格式,则在动作242,数据处理系统102进行至会话移交,或者可以退出循环。动作242处的会话移交可以包括:识别链接至账户的兼容数字助理设备,以及传输数字组件以供在链接的兼容数字助理设备上执行。
如果在决策框208,数据处理系统102确定修改访问控制参数,则在动作216,数据处理系统可以进行至生成输入提示。数据处理系统102可以基于所请求的数字组件的类型以及与数字组件的类型相关联的规则来生成输入提示。数据处理系统102可以生成具有可以在其中输入值的一个或多个域的输入提示。在动作218,数据处理系统102可以确定所生成的输入提示是否与第一数字助理设备280兼容。如果所生成的输入提示与第一数字助理设备兼容,则在动作220,数据处理系统102可以将所生成的输入提示传输到第一数字助理设备。在动作22,数据处理系统102可以接收响应于输入提示的输入数据。例如,数据处理系统102可以接收账户信息、选择、支付信息、时间间隔信息、偏好或其他信息。在动作224,数据处理系统102可以利用来自第一数字助理设备280的接收的输入数据来更新访问控制数据库。
然而,如果在动作218处数据处理系统102确定所生成的输入提示与第一数字助理设备280不兼容,则在动作226,数据处理系统可以轮询兼容的第二设备。数据处理系统102可以广播轮询或查探以识别第一数字助理设备280范围内的设备。例如,数据处理系统102可以指令第一数字助理设备280使用通信协议或广播协议来广播轮询或查探或信标,以识别其他数字助理设备282。数据处理系统102可以在已链接设备数据结构中执行查找,以识别链接至与第一数字助理设备280链接的账户的其他设备。
在识别第二数字助理设备282后,在动作228,数据处理系统可以执行会话移交。数据处理系统102可以暂停、保持或终止先前与第一数字助理设备280建立或者经由第一助理设备280发起的会话。数据处理系统102可以移交会话,因为数据处理系统102可以确定第一数字助理设备280不兼容或者无法操作来执行与调整访问控制以执行数字组件相关联的进一步的处理或功能。
在动作230,并且响应于动作228处的会话移交,数据处理系统102可以将所生成的输入提示传输到第二数字助理设备282。响应于在动作230处接收到所生成的输入提示,在动作232,第二数字助理设备282可以提供输入数据。在动作224,数据处理系统102可以更新访问控制数据库,以调整、更新、修改或添加针对该账户的数字组件的参数和值。
在动作234,数据处理系统102可以从第三数字助理设备284接收对数字组件的请求。在决策框236,数据处理系统102可以确定第三数字助理设备284是否被核准执行、访问、接收或以其他方式使用数字组件。如果在决策框236处数据处理系统确定第三数字助理设备284被核准访问所请求的数字组件(例如,基于对访问控制数据库132中的更新参数的查找),则在动作238,数据处理系统102可以指令第三方设备156将数字组件提供给第三数字助理设备284。在动作240,第三方设备256可以将数字组件提供给第三数字助理设备284以供执行。
然而,如果在动作236处数据处理系统102确定第三数字助理设备284未被核准访问数字组件(例如,参数仅允许第二数字助理设备的访问或访问时间间隔或地理边界已期满),则数据处理系统102可以进行到动作208以修改数字组件的访问控制参数。
因此,数据处理系统102可以集中管理针对不同类型的数字组件和跨不同类型的数字助理设备的访问控制,使得第三方设备156或数字组件的提供者可不必管理。第三方设备156可以响应于来自数据处理系统102的提供数字组件的指令来提供数字组件,而数据处理系统102执行确定数字助理设备是否被核准接收数字组件以及允许数字助理设备购买数字组件的功能。数据处理系统102可以使用可以从第一数字助理设备获得并随后在第二数字助理设备上使用的数字货币来执行电子交易。例如,第二数字助理设备可以接收数字货币,但是用户可以使用第三数字助理设备来花费或与另一数字组件交换数字货币。
第一数字助理设备280、第二数字助理设备282和第三数字助理设备284可以是不同的物理设备,也可以是由一个或多个设备执行或提供的应用或表面。
数据处理系统可以从第三客户端设备接收执行第二数字组件的请求。数据处理系统可以基于在访问控制数据库中为第二数字组件存储的参数来确定第三客户端设备未被核准执行第二数字组件(例如,图2中描绘的决策框236)。数据处理系统可以将用于第二数字组件的输入提示(例如,图2中描绘的动作208、216、218、226、228、230)传输到第二客户端设备。数据处理系统可以响应于经由第二客户端设备提供的输入而核准第三客户端设备。
数据处理系统可以识别输入提示中的多个字段。数据处理系统可以针对多个字段中的每个字段生成音频查询。数据处理系统可以响应于为多个字段中的每个字段生成的音频查询而接收一个或多个输入音频信号。例如,针对数字组件的规则可以指示生成带有被配置成转换为音频的字段的输入提示并接收音频输入。数据处理系统可以确定将输入提示提供给第一数字助理设备(例如,图2中描绘的动作218和220)。
第一客户端设备(或数字助理设备280)可以执行第一表面或用户接口类型,第二客户端设备(或数字助理设备282)可以执行第二表面或用户接口类型,并且第三客户端设备(或数字助理设备284)可以执行与第一表面和第二表面不同的第三表面或用户接口类型。数据处理系统可以提供数字组件以供第三表面和第二表面执行。
一个或多个客户端设备可以将账户信息存储在本地存储或存储器中。例如,数据处理系统可以提供针对账户标识符的、数字访问控制数据库上的数字组件的参数,用于存储在第三客户端设备的存储器中。响应于经由第二客户端设备、响应于输入提示而输入的数据分组,数据处理系统可以更新存储在第三客户端设备的存储器中的数字组件的参数。
图3是在计算设备之间同步访问控制的示例方法的图示。方法300可以由图1中描绘的系统100、图2中描绘的系统200或图4中描绘的系统400的一个或多个组件、系统或元件来执行。例如,方法300可以由数据处理系统来执行。在动作302,数据处理系统可以从第一设备接收请求。数据处理系统可以接收数据分组,所述数据分组包括由与账户标识符链接的第一客户端设备的传感器检测到的输入音频信号。数据处理系统可以基于自然语言处理技术来解析包括输入音频信号的数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字。数据处理系统可以与第一客户端设备建立会话。数据处理系统可以基于数字访问控制数据库中存储的数字组件的策略(或规则)来生成输入提示,所述输入提示具有响应于与账户标识符链接的第一客户端设备对数字组件的请求的字段。
在动作304,数据处理系统可以将会话移交到第二设备。例如,数据处理系统可以确定输入提示与第一客户端设备不兼容。响应于确定输入提示与第一客户端设备不兼容,数据处理系统可以识别和与第一客户端设备链接的账户标识符链接的第二客户端设备的状态。数据处理系统可以基于会话转移组件识别的状态来确定输入提示与第二客户端设备兼容。响应于确定,数据处理系统可以执行将会话移交到第二客户端设备,并终止与第一客户端设备的会话的一部分。响应于移交,数据处理系统可以将输入提示传输到第二客户端设备。
在动作306,数据处理系统可以修改访问控制数据库。例如,数据处理系统可以接收响应于输入提示而经由第二客户端设备输入的数据分组。数据处理系统可以基于经由第二客户端设备输入的数据分组来修改针对账户标识符的数字访问控制数据库中存储的数字组件的参数。
在动作308,数据处理系统可以从第三设备接收请求。数据处理系统可以接收在与账户标识符链接的第三客户端设备上执行数字组件的请求。在动作310,数据处理系统可以向第三设备提供数字组件。响应于由所述访问控制器组件对针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的所述参数的验证,以及由所述兼容性检查器组件对所述数字组件与所述第三客户端设备兼容的确定,所述数据处理系统可以提供所述数字组件以供所述第三客户端设备执行。
图4是示例计算机系统400的框图。计算机系统或计算设备400可以包括或用于实现系统100或其组件,例如数据处理系统102,或系统600或其组件,例如状态引擎634。数据处理系统102可以包括智能个人助理或基于语音的数字助理。计算系统400包括总线405或用于传送信息的其他通信组件,以及耦合到总线405以用于处理信息的处理器410或处理电路。计算系统400还可以包括耦合到总线以处理信息的一个或多个处理器410或处理电路。计算系统400还包括主存储器415,例如随机存取存储器(RAM)或其他动态存储设备,其耦合到总线405以用于存储信息以及将由处理器410执行的指令。主存储器415可以是或包括数据存储库145。主存储器415还可以用于存储位置信息、临时变量或由处理器410执行指令期间的其他中间信息。计算系统400还可以包括耦合到总线405用于存储处理器410的静态信息和指令的只读存储器(ROM)420,或其他静态存储设备。存储设备425(例如,固态设备、磁盘或光盘)可以耦合到总线405,以持久存储信息和指令。存储设备425可以包括或者是数据存储库145的一部分。
计算系统400可以经由总线405耦合到显示器435,例如液晶显示器或有源矩阵显示器,以向用户显示信息。输入设备430,例如包括字母数字和其他键的键盘,可以耦合到总线405,用于将信息和命令选择传送给处理器410。输入设备430可以包括触摸屏显示器435。输入设备430还可以包括光标控制,例如鼠标、轨迹球或光标方向键,用于将方向信息和命令选择传送给处理器410,并用于控制显示器435上的光标移动。例如,显示器435可以是图1的数据处理系统102、客户端计算设备140或其他组件的一部分。
可以通过计算系统400响应于处理器410执行主存储器415中包含的指令布置来实现本文描述的过程、系统和方法。这些指令可以从例如存储设备425的另一计算机可读介质读取到主存储器415中。执行主存储器415中包含的指令布置能使计算系统400执行本文描述的说明性过程。也可以采用多处理布置中的一个或多个处理器来执行主存储器415中包含的指令。可以代替软件指令或与软件指令结合来与本文描述的系统和方法一起使用硬连线电路。本文描述的系统和方法不限于硬件电路和软件的任何特定组合。
尽管在图4中已经描述了示例计算系统,但是包括在本说明书中描述的操作的主题可以在其他类型的数字电子电路中或在计算机软件、固件或硬件中实现,包括在本说明书中公开的结构及其等同结构,或者以其中的一个或多个的组合来实现。
对于本文讨论的系统收集有关用户的个人信息或可以利用个人信息的情形,可以为用户提供机会来控制程序或特征是否可以收集个人信息(例如,有关用户的社交网络、社交动作或活动、用户的偏好或用户的位置的信息),或控制是否从内容服务器或其他数据处理系统接收与用户更相关的内容或如何接收该内容。另外,某些数据可以在存储或使用之前以一种或多种方式匿名化,以便在生成参数时删除个人可识别信息。例如,可以对用户的身份进行匿名化,以便无法确定所述用户的任何个人可识别信息,或者可以在获得位置信息的情况下将用户的地理位置泛化(例如,泛化至城市、邮政编码或州层级),是的无法确定用户的具体位置。因此,用户可以控制如何收集有关他或她的信息以及内容服务器如何使用他或她的信息。
在本说明书中描述的主题和操作可以在其他类型的数字电子电路中或在计算机软件、固件或硬件中实现——包括在本说明书中公开的结构及其等同结构,或者以其中的一个或多个的组合来实现。本说明书中描述的主题可以被实现为一个或多个计算机程序——例如计算机程序指令的一个或多个电路,其被编码在一个或多个计算机存储介质上以由数据处理装置执行或控制数据处理装置的操作。替选地或另外,程序指令可以被编码在人工生成的传播信号上,例如机器生成的电、光或电磁信号,生成所述信号以对信息进行编码,从而传输到合适的接收器设备以供数据处理设备执行。计算机存储介质可以是以下或包括在以下中:计算机可读存储设备、计算机可读存储基板、随机或串行存取存储器阵列或设备,或它们中的一个或多个的组合中。虽然计算机存储介质不是传播信号,但是计算机存储介质可以是编码在人工生成的传播信号中的计算机程序指令的源或目的地。计算机存储介质还可以是一个或多个单独的组件或介质(例如,多个CD、磁盘或其他存储设备)或包含在其中。本说明书中描述的操作可以被实现为由数据处理装置对存储在一个或多个计算机可读存储设备上的数据或从其他源接收到的数据执行的操作。
术语“数据处理系统”、“计算设备”、“组件”或“数据处理装置”涵盖用于处理数据的各种装置、设备和机器,例如包括可编程处理器、计算机、芯片上系统,或上述中的多个,或上述的组合。所述装置可以包括专用逻辑电路,例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。除了硬件之外,所述装置还可以包括为所讨论的计算机程序创建执行环境的代码,例如,构成处理器固件、协议栈、数据库管理系统、操作系统、跨平台运行时的环境、虚拟机或其中一个或多个的组合的代码。装置和执行环境可以实现各种不同的计算模型基础架构,例如web服务、分布式计算和网格计算基础架构。例如,直接动作API 110、内容选择器组件120或NLP组件108和其他数据处理系统102组件可以包括或共享一个或多个数据处理装置、系统、计算设备或处理器。
计算机程序(也称为程序、软件、软件应用、应用、脚本或代码)可以用任何形式的编程语言编写,包括编译或解释语言、声明性语言或过程性语言,并且可以以任何形式部署,包括作为独立程序或作为模块、组件、子例程、对象或适合在计算环境中使用的其他单元。计算机程序可以对应于文件系统中的文件。计算机程序可以存储在保持其他程序或数据的文件的一部分中(例如,存储在标记语言文档中的一个或多个脚本),在专用于所讨论程序的单个文件中,或在多个协同文件中(例如,存储一个或多个模块、子程序或代码的部分的文件)。可以部署计算机程序以在一台计算机或在位于一个站点或跨多个站点分布并通过通信网络互连的多台计算机上执行。
可以通过执行一个或多个计算机程序(例如,数据处理系统102的组件)的一个或多个可编程处理器来执行本说明书中描述的过程和逻辑流程,以通过对输入数据进行操作并生成输出来执行动作。过程和逻辑流程也可以由专用逻辑电路执行,并且装置也可以实现为专用逻辑电路,例如FPGA(现场可编程门阵列)或ASIC(专用集成电路)。适用于存储计算机程序指令和数据的设备包括所有形式的非易失性存储器、介质和存储器设备,包括例如半导体存储器设备,例如EPROM、EEPROM和闪存设备;磁盘,例如内部硬盘或可移动盘;磁光盘;以及CD ROM和DVD-ROM磁盘。处理器和存储器可以由专用逻辑电路补充或并入专用逻辑电路中。
本文描述的主题可以在这样的计算系统中实现:该计算系统包括后端组件(例如,作为数据服务器)或包括中间件组件(例如,应用服务器)或包括前端组件(例如,具有图形用户界面或web浏览器的客户端计算机,用户可通过所述图形用户界面或web浏览器与本说明书中描述的主题的实施方式进行交互)或一个或多个此类后端组件、中间件组件或前端组件的组合。系统的组件可以通过任何形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”)和广域网(“WAN”)、互联网络(例如互联网)和对等网络(例如点对点对等网络)。
例如系统100或系统400之类的计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离,并且通常通过通信网络(例如,网络105)进行交互。客户端和服务器之间的关系是通过在相应计算机上运行并彼此具有客户端-服务器关系的计算机程序产生的。在一些实施方式中,服务器将数据(例如,表示数字组件的数据分组)传输到客户端设备(例如,出于向与客户端设备交互的用户显示数据并从用户接收用户输入的目的)。可以在服务器处从客户端设备接收在客户端设备生成的数据(例如,用户交互的结果)(例如,由数据处理系统102从本地计算设备140或内容提供者计算设备154或第三方设备156接收)。
虽然在附图中以特定次序描绘了操作,但是不需要以所示的特定次序或以顺序的次序来执行此类操作,并且不需要执行所有示出的操作。本文描述的动作可以以不同的次序执行。
各个系统组件的分离并不需要在所有实施方式中都进行分离,并且所描述的程序组件可以包含在单个硬件或软件产品中。例如,NLP组件108或内容选择器组件120可以是单个组件、应用或程序,或者是具有一个或多个处理电路的逻辑设备,或者是数据处理系统102的一个或多个服务器的一部分。
现在已描述了一些说明性实施方式,应了解,前述内容是说明性而非限制性的,已经以示例的方式呈现。具体的,虽然本文呈现的许多示例涉及方法动作或系统元件的特定组合,但是可以以其他方式组合那些动作和那些元件以实现相同的目标。结合一个实施方式所讨论的动作、元素和特征不意图被排除在其他实施方式的类似职能之外。
本文使用的措辞和术语是出于描述的目的,而不应被视为限制性。本文中“包括”、“具有”、“包含”、“涉及”、“特征在于”及其变化形式的使用意在涵盖其后列出的项、其等同物和其他项,以及仅由其后列出的项组成的替选实施方式。在一个实施方式中,本文描述的系统和方法由所描述的元素、动作或组件中的一个、一个上的每种组合或全部组成。
对本文中的系统和方法的实施方式或元素或动作以单数形式的任何引用也可以涵盖包括多个这些元素的实施方式,并且对本文中的任何实施方式或元素或动作的复数形式的任何引用也可以涵盖包括仅单个元素的实施方式。单数或复数形式的引用无意将当前公开的系统或方法、其组件、动作或元素限制为单个或多个配置。对基于任何信息、动作或元素的任何动作或元素的引用可以包括其中所述动作或元素至少部分基于任何信息、动作或元素的实施方式。
本文公开的任何实施方式可以与任何其他实施方式或实施例组合,并且对“实施方式”、“一些实施方式”、“一个实施方式”等的引用不一定是互斥的,并且旨在指示结合所述实施方式描述的特定的特征、结构或特性可以被包括在至少一个实施方式或实施例中。如本文所使用的此类术语不一定全部指代相同的实施方式。任何实施方式可以以与本文公开的方面和实施方式一致的任何方式包含地或排他地与任何其他实施方式相结合。
对“或”的引用可以被解释为包括性的,因此使用“或”描述的任何术语可以指示单个、一个以上和所有所描述术语中的任何一个。例如,对“‘A’和‘B’中的至少一个”的引用可以包括仅‘A’、仅‘B’以及‘A’和‘B’二者。结合“包括”或其他开放式术语使用的此类引用可以包括附加项。
在附图、具体实施方式或任何权利要求中的技术特征后跟附图标记的情况下,已经包括了附图标记以增加附图、具体实施方式和权利要求的可理解性。因此,存在或不存在附图标记对任何权利要求元素的范围没有任何限制作用。
在不脱离其特性的情况下,本文中描述的系统和方法可以体现为其他特定形式。前述实施方式是说明性的,而非限制所描述的系统和方法。因此,本文描述的系统和方法的范围由所附权利要求书而非前述描述来指示,并且在权利要求书的等同的含义和范围内的改变包含在其中。
Claims (21)
1.一种用于在设备之间同步访问控制以处理操作的系统,包括:
交互式数据交换组件,所述交互式数据交换组件由包括一个或多个处理器和存储器的数据处理系统执行,用于:
经由所述数据处理系统的接口接收数据分组,所述数据分组包括由与账户标识符链接的第一客户端设备的传感器检测到的输入音频信号;
基于自然语言处理技术来解析包括所述输入音频信号的所述数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字;以及
与所述第一客户端设备建立会话,并且基于数字访问控制数据库中存储的针对所述数字组件的策略来生成输入提示,所述输入提示具有响应于与所述账户标识符链接的所述第一客户端设备对所述数字组件的所述请求的字段;
兼容性检查器组件,所述兼容性检查器组件由所述数据处理系统执行以确定所述输入提示与所述第一客户端设备不兼容;
会话转移组件,所述会话转移组件由所述数据处理系统执行以响应于确定所述输入提示与所述第一客户端设备不兼容,识别和与所述第一客户端设备链接的所述账户标识符链接的第二客户端设备的状态;
所述兼容性检查器用于基于所述会话转移组件识别的所述状态来确定所述输入提示与所述第二客户端设备兼容;
所述会话转移组件用于将所述会话移交到所述第二客户端设备,并终止与所述第一客户端设备的所述会话的一部分;
所述交互式数据交换组件用于:
响应于所述移交,将所述输入提示传输到所述第二客户端设备;以及
接收响应于所述输入提示而经由所述第二客户端设备输入的数据分组;
访问控制器组件,所述访问控制器组件由所述数据处理系统执行以基于经由所述第二客户端设备输入的所述数据分组来修改针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的参数;以及
所述交互式数据交换组件用于:
接收在与所述账户标识符链接的第三客户端设备上执行所述数字组件的请求;以及
响应于由所述访问控制器组件对针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的所述参数的验证,以及由所述兼容性检查器组件对所述数字组件与所述第三客户端设备兼容的确定,提供所述数字组件以供所述第三客户端设备执行。
2.根据权利要求1所述的系统,包括所述数据处理系统,用于:
识别与所述账户标识符链接的多个客户端设备;
识别所述多个客户端设备的、与所述数字组件兼容的子集;以及
响应于所述参数的修改,提供所述数字组件以供在所述多个客户端设备的所述子集上执行。
3.根据权利要求1或2所述的系统,包括所述数据处理系统,用于:
基于所述第三客户端设备的所述状态来转换所述数字组件的格式。
4.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
从所述第三客户端设备接收执行第二数字组件的请求;
基于在所述访问控制数据库中针对所述第二数字组件存储的参数,确定所述第三客户端设备未被核准执行所述第二数字组件;
向所述第二客户端设备传输针对所述第二数字组件的输入提示;以及
响应于经由所述第二客户端设备提供的输入而核准所述第三客户端设备。
5.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
针对所述数字组件在所述访问控制数据库中存储一个或多个规则。
6.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
修改所述参数以提供对所述第三客户端设备执行所述数字组件的核准。
7.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
基于所述数字组件的类型来确定所述参数的类型;以及
基于所述类型来修改所述参数。
8.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
识别所述输入提示中的多个字段;
为所述多个字段中的每个字段生成音频查询;以及
响应于为所述多个字段中的每个字段生成的所述音频查询而接收一个或多个输入音频信号。
9.根据任一前述权利要求所述的系统,其中,所述会话包括访问控制会话,所述系统包括所述数据处理系统,用于:
响应于经由所述第一客户端设备检测到的所述输入音频信号,发起所述访问控制会话;
暂停所述第一客户端设备上的所述访问控制会话;
将所述访问控制会话从所述第一客户端设备移交到所述第二客户端设备;以及
响应于经由所述第二客户端设备、响应于所述输入提示而输入的所述数据分组,终止所述访问控制会话。
10.根据任一前述权利要求所述的系统,其中,所述数字组件是由第三方计算设备提供的。
11.根据任一前述权利要求所述的系统,包括:
所述数据处理系统,用于指令第三方计算设备提供所述数字组件以供所述第三客户端设备执行。
12.根据任一前述权利要求所述的系统,其中,所述第一客户端设备执行第一表面,所述第二客户端设备执行第二表面,并且所述第三客户端设备执行与所述第一表面和所述第二表面不同的第三表面,所述系统包括:
所述数据处理系统,被配置来提供所述数字组件以供所述第三表面和所述第二表面执行。
13.根据任一前述权利要求所述的系统,包括所述数据处理系统,用于:
提供针对所述账户标识符的、所述数字访问控制数据库上的所述数字组件的所述参数,用于存储在所述第三客户端设备的存储器中;
响应于经由所述第二客户端设备、响应于所述输入提示而输入的所述数据分组,更新存储在所述第三客户端设备的所述存储器中的所述数字组件的所述参数。
14.根据任一前述权利要求所述的系统,包括:
识别在所述第一数字助理设备的预定距离内的一个或多个设备;以及
其中,所述第二设备是基于在所述第一数字助理设备的预定距离内的所识别的一个或多个设备来选择的。
15.一种用于在设备之间同步访问控制以处理操作的方法,所述方法包括:
由包括一个或多个处理器和存储器的数据处理系统接收数据分组,所述数据分组包括由与账户标识符链接的第一客户端设备的传感器检测到的输入音频信号;
由所述数据处理系统基于自然语言处理技术来解析包括所述输入音频信号的所述数据分组,以识别对数字组件的请求以及与所述请求相对应的一个或多个关键字;
由所述数据处理系统与所述第一客户端设备建立会话,并且基于数字访问控制数据库中存储的针对所述数字组件的策略来生成输入提示,所述输入提示具有响应于与所述账户标识符链接的所述第一客户端设备对所述数字组件的所述请求的字段;
由所述数据处理系统确定所述输入提示与所述第一客户端设备不兼容;
由所述数据处理系统响应于确定所述输入提示与所述第一客户端设备不兼容,识别和与所述第一客户端设备链接的所述账户标识符链接的第二客户端设备的状态;
由所述数据处理系统基于所述会话转移组件识别的所述状态来确定所述输入提示与所述第二客户端设备兼容;
由所述数据处理系统执行将所述会话移交到所述第二客户端设备,并终止与所述第一客户端设备的所述会话的一部分;
由所述数据处理系统响应于所述移交,将所述输入提示传输到所述第二客户端设备;
由所述数据处理系统接收响应于所述输入提示而经由所述第二客户端设备输入的数据分组;
由所述数据处理系统基于经由所述第二客户端设备输入的所述数据分组来修改针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的参数;
由所述数据处理系统接收在与所述账户标识符链接的第三客户端设备上执行所述数字组件的请求;
响应于由所述访问控制器组件对针对所述账户标识符的、在所述数字访问控制数据库中存储的所述数字组件的所述参数的验证,以及由所述兼容性检查器组件对所述数字组件与所述第三客户端设备兼容的确定,提供所述数字组件以供所述第三客户端设备执行。
16.根据权利要求15所述的方法,包括:
识别与所述账户标识符链接的多个客户端设备;
识别所述多个客户端设备的、与所述数字组件兼容的子集;以及
响应于所述参数的修改,提供所述数字组件以供在所述多个客户端设备的所述子集上执行。
17.根据权利要求15或16所述的方法,包括:
从所述第三客户端设备接收执行第二数字组件的请求;
基于在所述访问控制数据库中针对所述第二数字组件存储的参数,确定所述第三客户端设备未被核准执行所述第二数字组件;
向所述第二客户端设备传输针对所述第二数字组件的输入提示;以及
响应于经由所述第二客户端设备提供的输入而核准所述第三客户端设备。
18.根据权利要求15至17中的任一项所述的方法,包括:
针对所述数字组件在所述访问控制数据库中存储一个或多个规则。
19.根据权利要求15至18中的任一项所述的方法,包括:
修改所述参数以提供对所述第三客户端设备执行所述数字组件的核准。
20.根据权利要求15至19中的任一项所述的方法,包括:
识别所述输入提示中的多个字段;
为所述多个字段中的每个字段生成音频查询;以及
响应于为所述多个字段中的每个字段生成的所述音频查询而接收一个或多个输入音频信号。
21.根据权利要求15至20中的任一项所述的方法,其中所述会话包括访问控制会话,所述方法包括:
响应于经由所述第一客户端设备检测到的所述输入音频信号,发起所述访问控制会话;
暂停所述第一客户端设备上的所述访问控制会话;
执行将所述访问控制会话从所述第一客户端设备移交到所述第二客户端设备;以及
响应于经由所述第二客户端设备、响应于所述输入提示而输入的所述数据分组,终止所述访问控制会话。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310899020.6A CN117056947A (zh) | 2018-05-07 | 2019-02-13 | 在计算设备之间同步访问控制 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862668218P | 2018-05-07 | 2018-05-07 | |
US62/668,218 | 2018-05-07 | ||
PCT/US2019/017806 WO2019216969A1 (en) | 2018-05-07 | 2019-02-13 | Synchronizing access controls between computing devices |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310899020.6A Division CN117056947A (zh) | 2018-05-07 | 2019-02-13 | 在计算设备之间同步访问控制 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110753927A true CN110753927A (zh) | 2020-02-04 |
CN110753927B CN110753927B (zh) | 2023-08-11 |
Family
ID=65729423
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980002194.XA Active CN110753927B (zh) | 2018-05-07 | 2019-02-13 | 在计算设备之间同步访问控制 |
CN202310899020.6A Pending CN117056947A (zh) | 2018-05-07 | 2019-02-13 | 在计算设备之间同步访问控制 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310899020.6A Pending CN117056947A (zh) | 2018-05-07 | 2019-02-13 | 在计算设备之间同步访问控制 |
Country Status (6)
Country | Link |
---|---|
US (3) | US10999281B2 (zh) |
EP (2) | EP3596652B1 (zh) |
JP (2) | JP7004834B2 (zh) |
KR (2) | KR102513999B1 (zh) |
CN (2) | CN110753927B (zh) |
WO (1) | WO2019216969A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111709052A (zh) * | 2020-06-01 | 2020-09-25 | 支付宝(杭州)信息技术有限公司 | 一种隐私数据识别和处理方法、装置、设备和可读介质 |
CN114080817A (zh) * | 2020-06-09 | 2022-02-22 | 谷歌有限责任公司 | 从可视内容生成交互式音轨 |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11694256B1 (en) | 2013-10-10 | 2023-07-04 | Wells Fargo Bank, N.A. | Mobile enabled activation of a bank account |
US10026226B1 (en) * | 2014-06-10 | 2018-07-17 | Ripple Inc | Rendering an augmented reality object |
US10930038B2 (en) | 2014-06-10 | 2021-02-23 | Lab Of Misfits Ar, Inc. | Dynamic location based digital element |
US10529015B1 (en) | 2016-04-01 | 2020-01-07 | Wells Fargo Bank, N.A. | Systems and methods for onboarding customers through a short-range communication channel |
US11949677B2 (en) * | 2019-04-23 | 2024-04-02 | Microsoft Technology Licensing, Llc | Resource access based on audio signal |
US11316867B2 (en) | 2019-04-23 | 2022-04-26 | Microsoft Technology Licensing, Llc | Generated audio signal granting access to resource |
US11281794B2 (en) * | 2019-09-26 | 2022-03-22 | Microsoft Technology Licensing, Llc | Fine grained access control on procedural language for databases based on accessed resources |
US11658966B2 (en) * | 2019-12-17 | 2023-05-23 | Fisher-Rosemount Systems, Inc. | Personnel profiles and fingerprint authentication for configuration engineering and runtime applications |
US20230033622A1 (en) * | 2021-08-02 | 2023-02-02 | Microsoft Technology Licensing, Llc | Context-aware observational entity recognition and capture |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1145711A (zh) * | 1994-03-11 | 1997-03-19 | 贝尔索斯公司 | 通过蜂窝式网络的控制信道传送数据的方法和设备 |
CN101370204A (zh) * | 2007-04-10 | 2009-02-18 | 捷讯研究有限公司 | 媒体转发和控制系统 |
CN102834819A (zh) * | 2009-11-27 | 2012-12-19 | 谷歌公司 | 客户端-服务器输入法编辑器体系结构 |
CN104050967A (zh) * | 2013-03-14 | 2014-09-17 | 本田技研工业株式会社 | 语音接口系统和方法 |
US20170064550A1 (en) * | 2015-08-24 | 2017-03-02 | Ayla Networks, Inc. | Linked user accounts for an internet-of-things platform |
CN106933500A (zh) * | 2015-12-29 | 2017-07-07 | 伊姆西公司 | 访问存储在存储系统中的数据对象的方法和系统 |
CN107070863A (zh) * | 2016-01-29 | 2017-08-18 | 谷歌公司 | 本地设备认证 |
US20170257456A1 (en) * | 2013-01-31 | 2017-09-07 | Google Inc. | Secondary transmissions of packetized data |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH04338817A (ja) * | 1991-05-16 | 1992-11-26 | Sony Corp | 電子機器の制御装置及び制御方法 |
JPH089053A (ja) * | 1994-06-15 | 1996-01-12 | Casio Comput Co Ltd | 情報転送方法及び情報転送システム並びにそれに用いられる情報転送装置、情報受信端末 |
TW396254B (en) | 1997-06-20 | 2000-07-01 | Exxon Production Research Co | Pipeline distribution network systems for transportation of liquefied natural gas |
US20060004627A1 (en) | 2004-06-30 | 2006-01-05 | Shumeet Baluja | Advertisements for devices with call functionality, such as mobile phones |
US20170237801A1 (en) * | 2004-06-30 | 2017-08-17 | Google Inc. | Device configuration-based function delivery |
JP4741267B2 (ja) * | 2005-03-28 | 2011-08-03 | ソニー株式会社 | コンテンツ推薦システム、通信端末およびコンテンツ推薦方法 |
JP2008311855A (ja) * | 2007-06-13 | 2008-12-25 | Toshiba Corp | 通信端末装置 |
US9043474B2 (en) * | 2010-01-20 | 2015-05-26 | Microsoft Technology Licensing, Llc | Communication sessions among devices and interfaces with mixed capabilities |
JP2015179313A (ja) * | 2014-03-18 | 2015-10-08 | 株式会社リコー | データ転送システム、情報処理装置、データ転送方法およびプログラム |
CN105279168B (zh) * | 2014-06-24 | 2019-04-23 | 华为技术有限公司 | 支持自然语言的数据查询方法、开放平台及用户终端 |
US20160070580A1 (en) | 2014-09-09 | 2016-03-10 | Microsoft Technology Licensing, Llc | Digital personal assistant remote invocation |
KR20170028628A (ko) * | 2015-09-04 | 2017-03-14 | 삼성전자주식회사 | 음성인식장치, 음성인식장치의 구동방법 및 컴퓨터 판독가능 기록매체 |
JP6703822B2 (ja) * | 2015-11-27 | 2020-06-03 | ヤフー株式会社 | 選択装置、選択方法、及び選択プログラム |
CN108604254B (zh) | 2016-05-13 | 2022-04-12 | 谷歌有限责任公司 | 语音控制的隐藏字幕显示 |
US10074369B2 (en) * | 2016-09-01 | 2018-09-11 | Amazon Technologies, Inc. | Voice-based communications |
-
2019
- 2019-02-13 WO PCT/US2019/017806 patent/WO2019216969A1/en unknown
- 2019-02-13 KR KR1020227012703A patent/KR102513999B1/ko active IP Right Grant
- 2019-02-13 KR KR1020207024632A patent/KR102389331B1/ko active IP Right Grant
- 2019-02-13 EP EP19710514.1A patent/EP3596652B1/en active Active
- 2019-02-13 EP EP21202672.8A patent/EP3964994B1/en active Active
- 2019-02-13 JP JP2020545591A patent/JP7004834B2/ja active Active
- 2019-02-13 CN CN201980002194.XA patent/CN110753927B/zh active Active
- 2019-02-13 CN CN202310899020.6A patent/CN117056947A/zh active Pending
- 2019-02-19 US US16/345,009 patent/US10999281B2/en active Active
-
2021
- 2021-04-30 US US17/245,382 patent/US11595391B2/en active Active
-
2022
- 2022-01-04 JP JP2022000175A patent/JP7241934B2/ja active Active
-
2023
- 2023-02-15 US US18/169,390 patent/US11855988B2/en active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1145711A (zh) * | 1994-03-11 | 1997-03-19 | 贝尔索斯公司 | 通过蜂窝式网络的控制信道传送数据的方法和设备 |
CN101370204A (zh) * | 2007-04-10 | 2009-02-18 | 捷讯研究有限公司 | 媒体转发和控制系统 |
CN102834819A (zh) * | 2009-11-27 | 2012-12-19 | 谷歌公司 | 客户端-服务器输入法编辑器体系结构 |
US20170257456A1 (en) * | 2013-01-31 | 2017-09-07 | Google Inc. | Secondary transmissions of packetized data |
CN104050967A (zh) * | 2013-03-14 | 2014-09-17 | 本田技研工业株式会社 | 语音接口系统和方法 |
US20170064550A1 (en) * | 2015-08-24 | 2017-03-02 | Ayla Networks, Inc. | Linked user accounts for an internet-of-things platform |
CN106933500A (zh) * | 2015-12-29 | 2017-07-07 | 伊姆西公司 | 访问存储在存储系统中的数据对象的方法和系统 |
CN107070863A (zh) * | 2016-01-29 | 2017-08-18 | 谷歌公司 | 本地设备认证 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111709052A (zh) * | 2020-06-01 | 2020-09-25 | 支付宝(杭州)信息技术有限公司 | 一种隐私数据识别和处理方法、装置、设备和可读介质 |
CN114080817A (zh) * | 2020-06-09 | 2022-02-22 | 谷歌有限责任公司 | 从可视内容生成交互式音轨 |
Also Published As
Publication number | Publication date |
---|---|
WO2019216969A1 (en) | 2019-11-14 |
CN110753927B (zh) | 2023-08-11 |
EP3596652B1 (en) | 2021-11-10 |
JP2022051741A (ja) | 2022-04-01 |
US10999281B2 (en) | 2021-05-04 |
US20230198988A1 (en) | 2023-06-22 |
JP2021520531A (ja) | 2021-08-19 |
KR20200115589A (ko) | 2020-10-07 |
EP3964994B1 (en) | 2023-07-19 |
CN117056947A (zh) | 2023-11-14 |
US11855988B2 (en) | 2023-12-26 |
JP7241934B2 (ja) | 2023-03-17 |
US20210051148A1 (en) | 2021-02-18 |
KR20220051427A (ko) | 2022-04-26 |
EP3596652A1 (en) | 2020-01-22 |
JP7004834B2 (ja) | 2022-01-21 |
EP3964994A1 (en) | 2022-03-09 |
KR102513999B1 (ko) | 2023-03-24 |
US20210250354A1 (en) | 2021-08-12 |
KR102389331B1 (ko) | 2022-04-21 |
US11595391B2 (en) | 2023-02-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11855988B2 (en) | Synchronizing access controls between computing devices | |
AU2020203865B2 (en) | System for securing a personal digital assistant with stacked data structures | |
US11508371B2 (en) | Digital assistant processing of stacked data structures | |
JP6995966B2 (ja) | スタック形式のデータ構造のデジタルアシスタント処理 | |
CN115812193A (zh) | 经由数字助理传递兼容的补充内容 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |