CN111684783A - 通过移动计算设备自动执行动作 - Google Patents
通过移动计算设备自动执行动作 Download PDFInfo
- Publication number
- CN111684783A CN111684783A CN201980011480.2A CN201980011480A CN111684783A CN 111684783 A CN111684783 A CN 111684783A CN 201980011480 A CN201980011480 A CN 201980011480A CN 111684783 A CN111684783 A CN 111684783A
- Authority
- CN
- China
- Prior art keywords
- computing device
- user
- calling
- call
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000009471 action Effects 0.000 title description 16
- 238000000034 method Methods 0.000 claims abstract description 79
- 230000004044 response Effects 0.000 claims abstract description 55
- 238000012545 processing Methods 0.000 claims description 33
- 238000010801 machine learning Methods 0.000 claims description 13
- 230000003993 interaction Effects 0.000 claims description 9
- 230000005236 sound signal Effects 0.000 claims description 7
- 238000004590 computer program Methods 0.000 abstract description 11
- 230000015654 memory Effects 0.000 description 34
- 238000004891 communication Methods 0.000 description 16
- 230000008569 process Effects 0.000 description 12
- 230000006855 networking Effects 0.000 description 6
- 238000013135 deep learning Methods 0.000 description 5
- 238000013528 artificial neural network Methods 0.000 description 4
- 230000000007 visual effect Effects 0.000 description 4
- 230000003213 activating effect Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000013475 authorization Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 238000000926 separation method Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 238000013518 transcription Methods 0.000 description 2
- 230000035897 transcription Effects 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/487—Arrangements for providing information services, e.g. recorded voice services or time announcements
- H04M3/4872—Non-interactive information services
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/50—Centralised arrangements for answering calls; Centralised arrangements for recording messages for absent or busy subscribers ; Centralised arrangements for recording messages
- H04M3/527—Centralised call answering arrangements not requiring operator intervention
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/10—Office automation; Time management
- G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
- G06Q10/1093—Calendar-based scheduling for persons or groups
- G06Q10/1095—Meeting or appointment
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/64—Automatic arrangements for answering calls; Automatic arrangements for recording messages for absent subscribers; Arrangements for recording conversations
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
- H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42025—Calling or Called party identification service
- H04M3/42085—Called party identification service
- H04M3/42102—Making use of the called party identifier
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42348—Location-based services which utilize the location information of a target
- H04M3/42357—Location-based services which utilize the location information of a target where the information is provided to a monitoring entity such as a potential calling party or a call processing server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/42365—Presence services providing information on the willingness to communicate or the ability to communicate in terms of media capability or network connectivity
- H04M3/42374—Presence services providing information on the willingness to communicate or the ability to communicate in terms of media capability or network connectivity where the information is provided to a monitoring entity such as a potential calling party or a call processing server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/436—Arrangements for screening incoming calls, i.e. evaluating the characteristics of a call before deciding whether to answer it
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M3/00—Automatic or semi-automatic exchanges
- H04M3/42—Systems providing special services or facilities to subscribers
- H04M3/436—Arrangements for screening incoming calls, i.e. evaluating the characteristics of a call before deciding whether to answer it
- H04M3/4365—Arrangements for screening incoming calls, i.e. evaluating the characteristics of a call before deciding whether to answer it based on information specified by the calling party, e.g. priority or subject
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/08—Speech classification or search
- G10L2015/088—Word spotting
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Entrepreneurship & Innovation (AREA)
- Strategic Management (AREA)
- Multimedia (AREA)
- Acoustics & Sound (AREA)
- General Physics & Mathematics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Computational Linguistics (AREA)
- Evolutionary Computation (AREA)
- Mathematical Physics (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Medical Informatics (AREA)
- Economics (AREA)
- Artificial Intelligence (AREA)
- General Engineering & Computer Science (AREA)
- Computing Systems (AREA)
- Environmental & Geological Engineering (AREA)
- Computer Networks & Wireless Communication (AREA)
- Telephone Function (AREA)
- Mobile Radio Communication Systems (AREA)
Abstract
方法、系统和装置,包括编码在计算机存储介质上的计算机程序,用于在与被叫用户相关联的移动计算设备处从与主叫用户相关联的主叫计算设备接收呼叫;响应于接收到该呼叫,通过移动计算设备确定与被叫用户相关联的数据指示被叫用户将不会响应该呼叫;响应于确定被叫用户将不会响应该呼叫,通过移动计算设备推断主叫用户的信息需求;以及从移动计算设备向主叫计算设备自动提供与被叫用户相关联并且满足推断出的主叫用户的信息需求的信息。
Description
技术领域
本说明书涉及通过移动计算设备执行的过程的自动化。
背景技术
当接收到呼叫时,移动计算设备的用户可能无法(或不愿)应答呼叫-用户可能正在驾驶、开会或以其他方式不可用。但是,主叫用户可能需要在被叫用户不可用时与被叫用户进行交互。
因此,可能需要一种用于当使用移动设备和电话时,特别是在正在驾驶时改善安全性的方法和系统。还可能进一步需要改善移动设备的用户界面的操作的自动化。这可以改善其在各种情况和场景下的可用性和功能性。
发明内容
描述了用于在移动计算设备的用户无法接听电话时自动执行动作的系统和方法。具体地,被叫用户与移动计算设备(例如,智能手机、智能手表或其他智能设备)相关联。该移动计算设备从诸如智能手机、智能手表、固定电话、网际协议语音(VoIP)电话或其他配置成发起电话呼叫的其它计算设备的主叫计算设备接收来自主叫用户的呼叫。移动计算设备响应于接收到来自主叫用户的呼叫而确定与被叫用户相关联的数据指示被叫用户将不会响应呼叫–例如,被叫用户无法“应答”主叫用户的呼叫,或者不愿“应答”呼叫。例如,被叫用户可能正忙、正在驾驶、或者以其它方式无法参与主叫用户的呼叫。
移动计算设备可以通过多种方法确定被叫用户将不会响应呼叫。例如,移动计算设备可以访问与被叫用户相关联的日历数据、位置数据、电子邮件数据、社交媒体数据和/或网络数据,以确定被叫用户正“忙”–例如,在主叫用户正在呼叫时该被叫用户当前参加日历上排程的约会。移动计算设备可以进一步访问加速度计或GPS数据以确定被叫用户正在驾驶并且将不会响应该呼叫,并且/或者访问麦克风数据以确定该用户(例如,在商务会议中)正在与其他用户交谈并且不会响应该呼叫。在一些示例中,用户设置与移动计算设备相关联的参数(例如,请勿打扰可选用户界面元素),以指示该用户将不会响应该呼叫(例如,被叫用户无法响应该呼叫或者不愿响应呼叫)。该参数可以(例如,针对所有呼叫)被全局设置,或者基于个人呼叫被设置。
响应于确定被叫用户将不会响应呼叫,移动计算设备可以推断主叫用户的信息需求。例如,移动计算设备可以推断主叫用户的信息需求是被叫用户的当前位置,或者是被叫用户到主叫用户的估计到达时间。可以通过处理主叫用户提供的音频数据(诸如通过将机器学习应用于音频数据)来确定主叫用户的信息需求。主叫用户的信息需求的其他示例可以包括向主叫用户提供与被叫用户相关联的排程/日历数据。在一些示例中,在移动计算设备推断出主叫用户的信息需求之前,移动计算设备可以通知主叫计算设备被叫用户将不会响应呼叫。作为响应,主叫用户可以通过主叫计算设备向移动计算设备提供音频数据(例如,语音数据),这可以有助于推断主叫用户的信息需求。
移动计算设备可以自动地向主叫计算设备提供与被叫用户相关联的满足推断出的主叫用户的信息需求的信息。提供信息可以包括提供被叫用户的当前位置,或被叫用户到主叫用户的估计到达时间。在一些情况下,可以基于信息需求在移动计算设备上执行任务,诸如将约会添加到与被叫用户相关联的日历上或将任务添加到与被叫用户相关联的任务管理应用。在一些情况下,可以基于信息需求标记任务以在特定(以后)的时间或特定情况下执行。
本说明书中描述的主题的创新方面可以体现在方法中,所述方法包括以下动作:在与被叫用户相关联的计算设备处从与主叫用户相关联的主叫计算设备接收呼叫;响应于接收到呼叫,通过计算设备确定与被叫用户相关联的数据指示被叫用户将不会响应该呼叫;响应于确定被叫用户将不会响应呼叫,通过计算设备推断主叫用户的信息需求;以及从计算设备向主叫计算设备自动提供与被叫用户相关联并且满足推断出的主叫用户的信息需求的信息。
因此,可以改善移动设备的安全性和可用性,特别是(但不仅限于)在驾驶时。用户界面的操作的自动化也可以被改善。在各种情况和场景下,移动设备的功能也可以被改善。
这些方面的其他实施例包括相应系统、装置和计算机程序,其被配置成执行在计算机存储设备上编码的动作。
这些和其他实施例可以均可选地包括下述特征中的一个或多个。例如,在确定与用户相关联的数据指示用户将不会响应呼叫之后,从主叫计算设备接收音频数据,其中,推断呼叫者的信息需求包括处理音频数据以识别呼叫者的信息需求。处理音频数据进一步包括确定音频数据的文本表示;将文本表示的一个或多个文本片段与数据存储的一个或多个关键字进行匹配;以及标识与数据存储中的所匹配的关键字相关联的信息需求。处理音频数据进一步包括将机器学习应用于音频数据以标识主叫用户的信息需求。响应于推断出主叫用户的信息需求,基于该信息需求在移动计算设备上执行任务。该任务包括基于i)主叫用户的信息需求和ii)日历应用的当前状态,在移动计算设备的日历应用内添加日历约会。任务包括基于呼叫者的信息需要在移动计算设备的任务管理应用内添加任务。推断出的主叫用户的信息需求是与被叫用户相关联的当前位置,其中自动提供满足呼叫者的信息需求的信息包括将与被叫用户相关联的当前位置提供给主叫计算设备。推断出的主叫用户的信息需求是被叫用户到主叫用户的位置的估计到达时间,该方法进一步包括访问移动计算设备的位置应用以确定被叫用户的当前位置;接收主叫用户的位置;以及比较被叫用户的当前位置和主叫用户的位置以确定被叫用户到主叫用户位置的估计到达时间。独立于用户输入来访问移动计算设备的位置应用。响应于接收到主叫用户的位置,通过移动计算设备的位置应用独立于用户输入将主叫用户的位置设置为目标目的地位置。将被叫用户的当前位置提供给主叫计算设备。
特征进一步包括独立于被叫用户与移动计算设备的用户交互而自动地执行满足提供呼叫者的信息需求的信息。提供满足主叫用户的信息需求的信息包括向主叫计算设备提供包括满足主叫用户的信息需求的信息的音频信号。确定与用户相关联的数据指示被叫用户将不会响应呼叫包括访问与被叫用户相关联的日历元数据、位置元数据、电子邮件元数据和社交网络数据以及移动计算设备的加速度计数据和麦克风数据中的至少一项;处理日历元数据、位置元数据、电子邮件元数据、社交网络数据、加速度计数据和麦克风数据中的一项或多项以确定用户将不会响应呼叫;以及响应于该处理,确定用户将不会响应该呼叫。处理日历元数据、位置元数据、电子邮件元数据和社交网络数据中的一个或多个包括从日历元数据、电子邮件元数据和社交网络数据中的一个或多个中标识与被叫用户相关联的事件;标识与事件相关联的时间窗口;确定接收到呼叫的时间与时间窗口一致;以及响应于确定接收到呼叫的时间与时间窗口一致,确定用户将不会响应该呼叫。响应于确定用户将不会响应呼叫,将日历元数据的一部分提供给主叫计算设备。处理移动计算设备的加速度计数据包括,基于移动计算设备的加速度计数据,确定被叫用户正在驾驶,并且作为响应,确定用户将不会响应呼叫。处理移动计算设备的麦克风数据包括,基于移动计算设备的麦克风数据,标识与一个或多个其他个人相关联的一个或多个音频信号,并且作为响应,确定用户将不会响应呼叫。
本说明书中描述的主题的创新方面可以体现在包括以下动作的方法中:在移动设备处接收从呼叫者到被叫用户的传入呼叫;基于在移动设备处可用的信息确定被叫用户将不应答呼叫;通过移动设备应答呼叫;在呼叫期间在移动设备处接收呼叫者信息;基于接收到的呼叫者信息和在移动设备上可用的数据,确定对呼叫者的响应;以及将响应提供给呼叫者。
这些方面的其他实施例包括被配置成执行在计算机存储设备上编码的方法的动作的对应的系统、装置和计算机程序。
这些和其他实施例可以均可选地包括以下特征中的一个或多个。例如,呼叫者信息在呼叫期间作为音频数据被接收。通过移动设备应答呼叫的步骤进一步包括使移动设备的扬声器静音并且在不激活移动设备的显示器的情况下应答呼叫。将在呼叫期间在移动设备处接收到的呼叫者信息作为音频数据被接收。在呼叫期间,将对呼叫者的响应作为音频数据被提供。响应是被叫用户的位置、被叫用户的排程以及被叫用户何时将会应答电话的指示中的任何一个或多个。从接收到的呼叫者信息确定紧急程度的步骤,并且如果该紧急程度高于预定的紧急程度,则在移动设备上启动警报。该警报是音频和/或视觉警报。接收到的呼叫者信息包括一个或多个关键字,并且确定紧急程度的步骤基于一个或多个关键字与一个或多个相关联的紧急程度匹配。在移动设备上可用的信息包括请勿打扰设置、日历数据、传输数据的模式和呼叫振铃时间的到期中的任何一个或多个。
可以实施本说明书中描述的主题的特定实现方式使得实现以下优点中的一个或多个。例如,本主题的实现方式通过自动执行由移动计算设备执行的任务而无需移动计算设备的用户进行交互来提供计算机资源的有效利用。因此,可以避免额外的处理步骤,其包括,与通知用户此类任务、等待来自用户的输入以及随后向用户通知此类任务的执行有关的处理步骤。这提供对移动计算设备的计算机资源的流线型使用,在执行相同任务的同时使处理步骤最小化,否则如果存在用户输入则将通过附加处理步骤执行所述相同的任务。所以这另外减少移动计算装置的存储器的使用,因为当动作由移动计算装置自动执行时不需要将用户的输入存储用于后续动作。
对呼叫者的信息需求的推断还使得系统能够向主叫用户提供与被叫用户相关联的信息,该信息满足推断出的主叫用户的信息需求。这是一个非常规的处理步骤,其能够选择或生成要提供给主叫用户的信息而无需主叫用户的明确请求。
本说明书中描述的主题的一个或多个实施例的细节在附图和以下描述中阐述。根据说明书、附图和权利要求书,本主题的其他潜在特征、方面和优点将变得显而易见。
附图说明
图1描绘用于当被叫用户不可用时自动执行动作的系统。
图2描绘用于当被叫用户不可用时自动执行动作的示例过程的流程图。
图3描绘可以被用于实现本文描述的技术的示例计算系统和移动计算设备。
具体实施方式
图1描绘用于在确定被叫用户不可用时自动执行动作的系统100。系统100包括移动计算设备102、主叫计算设备104和网络106。移动计算设备102通过网络106与主叫计算设备104通信。移动计算设备102可以与被叫用户110相关联,并且主叫计算设备104可以与主叫用户112相关联。在一些示例中,移动计算设备102和主叫计算设备104可以是任何类型的计算设备。移动计算设备102可以包括用户状态模块116、推断模块120和任务管理器122。
在步骤A处,移动计算设备102从主叫计算设备104接收呼叫114。具体地,移动计算设备102通过网络106从主叫计算设备104接收数据,该数据包括来自主叫计算设备104的电话呼叫。换句话说,移动计算设备102接收从主叫用户112到被叫用户110的传入呼叫114。
在步骤B处,移动计算设备102响应于接收到呼叫114,确定与被叫用户110相关联的指示被叫用户110将不会响应呼叫114的数据。具体而言,用户状态模块116访问与被叫用户110和/或移动计算设备102相关联的数据,处理这样的数据,并且作为响应,确定被叫用户110将不会响应呼叫114。
在一些实施例中,通过访问与被叫用户110相关联的日历元数据、位置元数据、电子邮件元数据和社交网络数据中的一个或者多个;并且/或者访问移动计算设备102的加速度计数据和麦克风数据中的一个或多个,由用户状态模块116确定被叫用户110将不会响应呼叫114(例如,计算设备确定被叫用户110将无法响应呼叫114或宁愿不响应呼叫114)。在一些示例中,日历元数据、位置元数据、电子邮件元数据和社交网络数据由移动计算设备102存储,并且/或者用户状态模块116通过网络106访问此类数据。用户状态模块116可以处理日历元数据、位置元数据、电子邮件元数据、社交网络数据、加速度计数据和/或麦克风数据中的一个或多个,以确定用户将不会响应呼叫;并且响应于该处理,确定被叫用户110将不会响应呼叫114。
在一些示例中,用户状态模块116基于主叫用户112的身份来确定被叫用户110将不会响应呼叫114。例如,用户状态模块106可以处理与被叫用户110和/或移动计算设备102相关联的联系人,并基于与联系人相关联的参数,确定被叫用户110将不会响应呼叫114。例如,主叫用户112与由移动计算设备112存储的联系人相关联,该联系人与指示被叫用户110将不会响应来自主叫用户112的呼叫的数据相关联。另外,在一些示例中,与被叫用户110和/或移动计算设备102相关联的联系人的子集可以与指示被叫用户110将响应的数据相关联。
在一些示例中,通过用户状态模块116处理日历元数据、位置元数据、电子邮件元数据和社交网络数据可以包括从日历元数据、电子邮件元数据和社交网络数据中的一个或者多个中标识与被叫用户110相关联的事件。例如,这样的元数据和数据可以指示被叫用户110被排程参加的事件。用户状态模块116可以进一步标识与事件相关联的时间窗口,并且确定移动计算设备102接收到呼叫114的时间与该时间窗口一致。用户状态模块116可以响应于确定接收到呼叫114的时间与事件的时间窗口一致,确定被叫用户110将不会响应呼叫114。
在一些示例中,通过用户状态模块116处理移动计算设备102的加速度计数据可以包括通过用户状态模块116基于该加速度计数据确定被叫用户110正在驾驶。响应于确定被叫用户110正在驾驶,用户状态模块116确定被叫用户110将不会响应呼叫114。例如,加速度计数据可以指示被叫用户110当前移动的速度速率,并仅基于此类数据或与其他数据(诸如日历元数据、位置元数据、电子邮件元数据和社交网络数据)相结合,用户状态模块116可以确定被叫用户110正在驾驶(例如,驾驶机动车辆)。与通过其他方法(例如,通过使用移动计算设备102的全球定位系统/或地图绘制系统)确定用户正在驾驶相比,基于加速度计数据确定用户正在驾驶可以节省计算资源、网络资源和能量资源。仍然,在一些示例中,基于从全球定位系统的卫星接收到的信息和/或从蜂窝塔接收到的信息(例如,小区ID位置确定)执行用户110正在驾驶的上面讨论的确定。
在一些示例中,通过用户状态模块116处理移动计算设备102的麦克风数据可以包括,通过用户状态模块116基于麦克风数据,标识与一个或多个其他个人相关联的音频信号。响应于标识其他音频信号,用户状态模块116确定被叫用户110将不会响应呼叫114。例如,麦克风数据可以指示其他个人接近被叫用户110和移动计算设备102,并且被叫用户110可以积极参与与其他用户的对话(例如,被叫用户110正处于与其他个人进行商务会议或社交环境中)。用户状态模块116可以仅基于麦克风数据或与其他数据(诸如日历元数据、位置元数据、电子邮件元数据和社交网络数据)组合来确定被叫用户110将不会响应呼叫114。与其他方法相比,基于麦克风数据确定用户将不会进行响应可以节省计算资源、能源资源和网络资源。在一些示例中,用户状态模块116可以使用用于预测被叫用户110是否会响应呼叫114的信号(例如,麦克风数据、日历元数据、位置元数据、电子邮件元数据和社交网络数据)的组合在移动计算设备102处利用机器学习模型来确定被叫用户110将不会响应呼叫114。
在一些示例中,用户状态模块116基于在移动计算设备102处可用的信息来确定被叫用户110将不会应答呼叫114。例如,该信息可以包括移动计算设备102的请勿打扰设置被设置或激活、日历数据、传输数据的模式以及呼叫振铃时间的到期。在一些示例中,用户状态模块116基于指示用户将不会响应呼叫的与移动计算设备相关联的请勿打扰参数(标志)的状态来确定被叫用户110将不会响应呼叫114。例如,用户可以调整请勿打扰可选用户界面元素的状态,以指示该用户将响应或不会响应该呼叫。可以全局地(例如,针对所有呼叫)或在单个呼叫的基础上(例如,在移动计算设备显示呼入呼叫的指示之后)设置参数。
在一些示例中,在确定与被叫用户110相关联的数据指示被叫用户110将不会响应呼叫114之后,移动计算设备102自动应答呼叫114。在一些示例中,移动计算设备102独立于被叫用户110的动作来应答呼叫114。在一些示例中,通过移动计算设备102应答呼叫114可以包括使移动计算设备102的扬声器静音、使移动计算设备102的麦克风静音、和/或在不激活移动计算设备102的显示器的情况下应答呼叫114。在一些示例中,由移动计算设备102自动应答呼叫114可以包括代表被叫用户110执行动作,如本文进一步描述的。
在步骤C处,移动计算设备102在确定与被叫用户110相关联的数据指示被叫用户110将不会响应呼叫114之后,例如通过网络106从主叫计算设备104接收音频数据130。在一些示例中,移动计算设备102可以通过网络106向主叫计算设备104提供指示被叫用户110将不会响应呼叫114的数据。例如,所提供的数据可以包括指示被叫用户110将不会响应呼叫114的音频数据,和/或可以包括被叫用户110将不会响应呼叫114的文本数据(例如,文本消息或推送通知)。响应于接收指示被叫用户110将不会响应呼叫114的这样提供的数据,主叫计算设备104将音频数据130提供给移动计算设备102。音频数据130可以包括由主叫用户112诸如通过主叫计算设备104的麦克风提供的数据。在一些示例中,主叫计算设备104向移动计算设备102提供除了音频数据130之外的其他非音频数据(例如,当主叫计算设备104是诸如移动计算设备的“智能”设备时)。
在步骤D处,响应于确定被叫用户110将不会响应呼叫114,移动计算设备102特别是推断模块120推断主叫用户112的信息需求136。可以从与主叫用户相关联的数据和/或与被叫用户相关联的数据中推断出主叫用户的信息需求136。这样的数据定义由推断模块120确定的各种上下文,并且推断模块120基于数据和上下文进行推断。推断模块120可以是机器学习的或基于规则的(例如,使用诸如长短期存储器(LSTM)的技术的意图提取模型)。在机器学习的情况下,可以使用训练数据并且可以监督机器学习。例如,主叫用户可以在主叫用户地址的位置具有约会,并且被叫用户可以具有应用(例如,映射应用),该应用被打开指示被叫用户正在前往主叫用户地址的途中。通过使用监督学习,推断模块120可以获悉信息需求是主叫用户的到达时间或被叫用户的当前位置中的一个或多个。
更具体地,可以针对多种不同情况生成训练数据集,不同情况例如主叫用户和被叫用户两者将要出席的会议;仅被叫用户或主叫用户出席的会议;主叫用户正在呼叫被叫用户而同时被叫用户正在驾驶的情况等等。每种情况可以被设计为具有一个或多个需要推断的信息,并且推断模块可以获悉期望推断。
信息需求136可以由响应于该信息需求136的特定信息来满足。训练推断模块120以响应于该信息需求136来标识和提供数据,或者该推断模块120访问定义特定数据以提供特定信息需求的规则。例如,当主叫用户正在呼叫正在驾驶的被叫用户时,主叫用户112的信息需求136可以被确定为被叫用户的当前位置和估计的到达时间。因此,可以通过包括与被叫用户110相关联的当前位置或者被叫用户110到主叫用户112的位置的估计到达时间的数据来满足信息需求136。信息需求136的其他示例取决于所期待的应用也是可能的。
在一些示例中,通过推断模块120推断主叫用户112的信息需求可以包括处理音频数据130以标识主叫用户112的信息需求136。例如,推断模块120可以包括音频处理器。推断模块120可以确定音频数据130的文本表示,并且将音频数据130的文本片段与数据存储(未示出)的关键词进行匹配。然后,推断模块120可以标识与数据存储中的所匹配的关键词相关联的信息需求136。在一些示例中,推断模块120可以通过将机器学习应用于音频数据130(诸如应用人工神经网络或深度学习)来推断主叫用户112的信息需求。在一些示例中,独立于主叫用户112的输入,由推断模块120推断主叫用户112的信息需求。在一些示例中,通过推断模块120单独地推断主叫用户112的信息需求。
在步骤E处,移动计算设备102通过网络106向主叫计算设备104自动提供与被叫用户110相关联的满足主叫用户112的推断信息需求136的信息138。例如,移动计算设备102基于接收到的音频数据130(例如,呼叫者信息)和移动计算设备102处可用的数据(例如,日历元数据、位置元数据、电子邮件元数据、社交网络数据、加速度计数据和麦克风数据)确定对呼叫114和主叫用户112的响应。信息138可以包括满足主叫用户112的信息需求136的音频(例如,生成的语音)、视频、文本或任何类型的数据。例如,当信息需求136包括被叫用户110的当前位置时,移动计算设备102可以向主叫计算设备104自动提供包括被叫用户110的当前位置的信息138。在一些示例中,仅在通过移动计算设备102确定允许给予此类信息的授权(例如,设置授权标志)之后才提供信息138。例如,被叫用户110设置与提供信息138相关联的参数,例如,用于提供信息138的时间帧、向其提供信息138的联系人集合、移动计算设备102提供可访问的所有信息的子集。
在一些示例中,移动计算设备102将与被叫用户110相关联的当前位置自动提供给主叫计算设备104。也就是说,移动计算设备102(例如,基于对音频数据130的处理)确定主叫用户112的信息需求136包括与被叫用户相关联的当前位置。例如,移动计算设备102确定被叫用户110正在驾驶(如本文所述),并且进一步确定主叫用户112的信息需求136包括被叫用户110的当前位置。响应于此,移动计算设备102可以将被叫用户110的当前位置自动提供给主叫计算设备104。
在一些示例中,移动计算设备102可以访问移动计算设备102的位置应用以确定被叫用户110的当前位置。例如,移动计算设备102可以通过GPS接收机、小区三角测量和/或加速度计确定被叫用户110的当前位置。此外,移动计算设备102可以接收主叫用户112的位置,并且将被叫用户110和主叫用户112的当前位置进行比较以确定被叫用户110到主叫用户112的位置的估计到达时间。可以独立于用户交互来访问移动计算设备102的位置应用。
在一些示例中,独立于被叫用户110与移动计算设备102的用户交互,移动计算设备102自动提供满足主叫用户112的信息需求136的信息138。即,移动计算设备102能够i)从计算设备104接收呼叫114,ii)确定被叫用户110将不会响应呼叫114,iii)推断主叫用户112的信息需求136,并且iv)在无需被叫用户110与移动计算设备102进行用户交互的情况下,将信息138提供给主叫计算设备104。
在一些示例中,移动计算设备102提供给主叫计算设备104的信息138包括满足主叫用户112的信息需求136的音频数据。例如,当信息需求136包括被叫用户110的当前位置时,信息138的音频数据可以包括传达被叫用户110的位置的音频数据。
在一些示例中,移动计算设备102提供给主叫计算设备104的信息138可以包括与被叫用户110相关联的日历元数据的一部分。例如,当信息需求136包括主叫用户112对被叫用户110的约会进行排程时,移动计算设备102可以将日历元数据的相关部分(例如,围绕与信息需求136相关联的日期的部分)自动提供给主叫计算设备104。在一些示例中,响应于接收到日历元数据的一部分,主叫计算设备104可以通过网络106将附加数据提供返回给移动计算设备102。例如,附加数据可以包括(例如,使用深度学习对话)与被叫用户110在移动计算设备102内的日历元数据相关联的约会。
在一些示例中,移动计算设备102提供给主叫计算设备104的信息138可以包括指示被叫用户110何时将应答/响应呼叫114的数据。例如,基于与被叫用户110相关联的日历元数据或当前驾驶路线的确定长度,移动计算设备102可以确定被叫用户110的可用性。移动计算设备102可以在提供给主叫计算设备104的信息138中提供这种可用性。例如,信息138可以指示当下一次打开与和被叫用户110相关联的日历元数据相关联时,并且被叫用户100将在下一次打开时适当地进行响应。
在一些示例中,在步骤F处,响应于推断主叫用户112的信息需求136,移动计算设备102,特别是任务管理器122,基于信息需求在移动计算设备102处执行任务150。也就是说,任务管理器122可以基于主叫用户112的信息需求136在移动计算设备102的任务管理应用内添加任务。例如,信息需求136可以是与诸如“回叫主叫用户112”的任务相关联。任务管理器122可以将任务150添加到与“回叫主叫用户112”有关的移动计算设备102的任务管理应用中。任务150可以进一步包括与信息需求136有关的信息。如本文所提及的,主叫用户112的信息需求136可以包括与被叫用户110相关联的当前位置。在一些示例中,任务160可以包括,独立于用户输入,通过移动计算设备102的位置应用设置主叫用户112的位置作为被叫用户110的目标目的地位置。
在一些示例中,任务管理器122可以添加任务150以便以后由移动计算设备102执行。例如,可以基于信息需求136在特定时间或特定情况下执行任务150。例如,任务150可以与“在下午5点回叫主叫用户112”、“当被叫用户110离开当前位置时呼叫主叫用户112”或“当被叫用户的电池电量少于10%时通知主叫用户112”相关。
如本文中提到的,主叫计算设备104向移动计算设备102提供音频数据130和/或其他非音频数据。在一些其他示例中,音频数据130和/或其他非音频数据可以指示紧急程度。即,主叫用户112可以指示与呼叫114相关联的紧急程度,例如,紧急或非紧急(或紧急精细程度)。响应于从主叫计算设备104接收到音频数据130和/或其他非音频数据,移动计算设备102可以处理指示紧急程度的数据,并且如果紧急程度高于与移动计算设备102相关联的预定紧急程度,在移动计算设备102上启动警报。在一些示例中,警报可以包括由移动计算设备102提供的音频和/或视觉警报。在一些示例中,音频数据130和/或其他指示紧急程度的非音频数据可以包括一个或多个关键字。移动计算设备102可以将指示紧急程度的一个或多个关键字与一个或多个相关联的紧急程度(例如,如由数据存储所存储的)相匹配,并基于这种匹配来确定紧急程度。在一些示例中,移动计算设备102可以通过将机器学习应用于音频数据130(诸如应用人工神经网络或深度学习)来确定紧急程度。例如,可以在标记有紧急的文本转录上训练模型,并使用此模型来推断音频数据130的转录的紧急程度。又一示例可以包括使用各种特性(例如,频率,速度)来分析来自音频数据130的情感以推断音频数据130的紧急程度。
图2描绘用于当被叫用户110不可用时自动执行动作的示例过程200的流程图。可以使用一个或多个计算设备来执行示例过程200。例如,移动计算设备102和/或主叫计算设备104可以用于执行示例过程200,但是可以附加地或替代地使用其他计算系统,诸如用作呼叫中的中介或监控系统的基于云的计算系统。在一些实施方式中,例如,在发短信的个人向收短信的个人发送消息并且收短信的个人不可用时,针对文本消息收发会话执行本文所述的操作。在这样的情况下,计算系统可以确定收短信的个人不可用(例如,因为收短信的人在驾驶),并且可以向发短信的人提供指示收短信的人何时将可用或到达发短信的人的位置的文本通知。
在202处,移动计算设备102从主叫计算设备104接收呼叫114。在204处,移动计算设备102确定被叫用户110是否能够响应呼叫114。在206处,移动计算设备102确定与被叫用户110相关联的数据指示被叫用户110能够响应呼叫114。在208处,移动计算设备102应答呼叫114。
在210处,移动计算设备102确定与被叫用户110相关联的数据指示被叫用户110将不会响应呼叫114。具体地,用户状态模块116访问与被叫用户110和/或移动计算设备102相关联的数据,处理此类数据,并作为响应,确定被叫用户110将不会响应呼叫114。可选地,在212处,移动计算设备102在确定与被叫用户110相关联的数据指示被叫用户110将不会响应呼叫114之后从主叫计算设备104接收音频数据130。在214处,响应于确定被叫用户110将不会响应呼叫114,移动计算设备102,并且特别是推断模块120推断主叫用户112的信息需求136。
在216处,移动计算设备102通过网络106向主叫计算设备104自动提供与被叫用户110相关联的满足推断出的主叫用户112的信息需求136的信息138。响应于推断主叫用户112的信息需求136,移动计算设备102,特别是任务管理器122,基于信息需求136在移动计算设备102处执行任务150。
除了以上描述之外,可以向用户提供控件,该控件允许用户对本文所述的系统、程序或特征是否以及何时可以使能够收集用户信息(例如,关于用户的呼叫、文本消息、位置、日历约会等的信息)进行选择。如果被叫用户激活启用本公开中描述的功能的一个或多个设置,则被叫用户的移动计算设备可以仅分析信息并响应主叫用户。主叫用户可能类似地不得不激活一个或多个设置以启用这种功能和/或可能不得不在呼叫期间例如响应于请求来自主叫用户的信息的提示而实时同意本公开中描述的技术的操作。简而言之,用户可以控制收集关于用户的哪些信息、如何使用该信息以及将哪些信息提供给用户。
图3示出通用计算机设备300和通用移动计算机设备350,其可以与这里描述的技术一起使用。计算设备300旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作站、个人数字助理、服务器、刀片服务器、大型机和其他适当的计算机。计算设备350旨在表示各种形式的移动设备,诸如,个人数字助理、蜂窝电话、智能电话和其他类似的计算设备。此处所示的部件、它们的连接和关系以及它们的功能意味着仅是示例性的,并不意味着限制本文档中描述和/或保护的本发明的实施方式。
计算设备300包括处理器302、存储器304、存储设备306、连接到存储器304和高速扩展端口310的高速接口308以及连接到低速总线314和存储设备306的低速接口312。部件302、304、306、308、310和312中的每一个都使用各种总线互连,并且可以安装在通用主板上或视情况以其他方式安装。处理器302可以处理用于在计算设备300内执行的指令,包括存储在存储器304或存储设备306中的指令,以在外部输入/输出设备(诸如,耦合到高速接口308的显示器316)上显示GUI的图形信息。在其他实施方式中,可以适当地使用多个处理器和/或多个总线,以及多个存储器和存储器类型。同样,可以连接多个计算设备300,每个设备提供必要操作的部分(例如,作为服务器组、刀片服务器组或多处理器系统)。
存储器304将信息存储在计算设备300内。在一种实施方式中,存储器304是一个或多个易失性存储单元。在另一实施方式中,存储器304是一个或多个非易失性存储单元。存储器304也可以是另一种形式的计算机可读介质,诸如,磁盘或光盘。
存储设备306能够为计算设备300提供大容量存储。在一种实施方式中,存储设备306可以是或包含计算机可读介质,诸如,软盘设备、硬盘设备、光盘设备、磁带设备、闪存或其他类似的固态存储设备或设备阵列,包括存储区域网络或其他配置中的设备。计算机程序产品可以有形地体现在信息载体中。该计算机程序产品还可以包含在被执行时执行一种或多种方法(诸如,上述方法)的指令。信息载体是计算机或机器可读介质,诸如,存储器304、存储设备306或处理器302上的存储器。
高速控制器308管理计算设备300的带宽密集型操作,而低速控制器312管理较低带宽密集型操作。这种功能分配仅是示例性的。在一种实施方式中,高速控制器308(例如,通过图形处理器或加速器)耦合至存储器304、显示器316,以及耦合至可以接受各种扩展卡(未示出)的高速扩展端口310。在计算设备300中包括图形处理器或加速器(未示出)的情况下,图形处理器或加速器也可能能够应用和/或加速机器学习,诸如人工神经网络和/或深度学习。图形处理器可能能够在更少的时间或使用更少的计算和/或能源资源应用机器学习。在该实施方式中,低速控制器312耦合到存储设备306和低速扩展端口314。低速扩展端口(其可以包括各种通信端口(例如,USB、蓝牙、以太网、无线以太网))可以例如通过网络适配器耦合到诸如键盘、指示设备、扫描仪的一个或多个输入/输出设备或诸如交换机或路由器的网络设备。
计算设备300可以以多种不同的形式实现,如图所示。例如,它可以被实现为标准服务器320,或者在一组这样的服务器中被实现多次。它也可以实现为机架服务器系统324的一部分。此外,它还可以实现在诸如膝上型计算机322之类的个人计算机中。可替代地,来自计算设备300的部件可以与诸如设备350的移动设备(未示出)中的其他部件组合。每个这样的设备可以包含一个或多个计算设备300、350,并且整个系统可以由彼此通信的多个计算设备300、350组成。
除了其他部件之外,计算设备350包括处理器352、存储器364、诸如显示器354的输入/输出设备、通信接口366和收发器368。设备350还可以配备有存储设备,诸如,微驱动器或其他设备,以提供附加的存储。部件350、352、364、354、366和368中的每一个都使用各种总线互连,并且部件中的若干个可以安装在通用主板上或视情况以其他方式安装。
处理器352可以在计算设备350内执行指令,包括存储在存储器364中的指令。处理器可以被实现为包括单独的以及多个模拟和数字处理器的芯片的芯片组。处理器可以提供例如用于设备350的其他部件的协调(诸如,对用户接口的控制)、由设备350运行的应用以及由设备350进行的无线通信。
处理器352可以通过控制接口358和耦合到显示器354的显示接口356与用户通信。显示器354可以是例如TFT LCD(薄膜晶体管液晶显示器)或OLED(有机发光二极管)显示器或其他合适的显示技术。显示接口356可以包括用于驱动显示器354向用户呈现图形和其他信息的适当电路。显示接口可以包括图形处理器/加速器。在计算设备300中包括图形处理器或加速器(未示出)的情况下,图形处理器或加速器也可能能够应用和/或加速机器学习,诸如人工神经网络和/或深度学习。图形处理器可能能够在更少的时间或使用更少的计算和/或能源资源应用机器学习。控制接口358可以从用户接收命令并且将它们转换以提交给处理器352。另外,可以提供与处理器352通信的外部接口362,以便实现设备350与其他设备的近区域通信。外部接口362可以例如在一些实施方式中提供用于有线通信,或者在其他实施方式中提供用于无线通信,并且也可以使用多个接口。
存储器364将信息存储在计算设备350内。存储器364可以被实现为计算机可读介质、易失性存储单元或一个或多个非易失性存储单元中的一个或多个。还可以提供扩展存储器334,并通过扩展接口332将其连接到设备350,扩展接口332可以包括例如SIMM(单列存储器模块)卡接口。这样的扩展存储器334可以为设备350提供额外的存储空间,或者还可以为设备350存储应用或其他信息。例如,扩展存储器334可以包括用于执行或补充上述过程的指令,并且还可以包括安全信息。因此,例如,扩展存储器334可以被提供为设备350的安全模块,并且可以用允许安全使用设备350的指令来编程。此外,可以经由SIMM卡以及附加信息(诸如,以不可入侵的方式在SIMM卡上放置标识信息)来提供安全应用。
存储器可包括例如闪存和/或NVRAM存储器,如下所述。在一种实施方式中,计算机程序产品有形地体现在信息载体中。该计算机程序产品包含在被执行时执行一种或多种方法(诸如,上述方法)的指令。信息载体是计算机或机器可读介质,诸如,存储器364、扩展存储器334或处理器352上的存储器,或者可以例如通过收发器368或外部接口362接收到的传播信号。
设备350可以通过通信接口366进行无线通信,该通信接口在必要时可以包括数字信号处理电路。通信接口366可以提供各种模式或协议下(诸如,GSM语音呼叫、SMS、EMS或MMS消息收发、CDMA、TDMA、PDC、WCDMA、CDMA2000或GPRS等等)的通信。这样的通信可以例如通过射频收发器368发生。此外,短距离通信可能发生,诸如,使用蓝牙、WiFi或其他这样的收发器(未示出)。此外,GPS(全球定位系统)接收器模块330可以向设备350提供其他与导航和位置相关的无线数据,设备350上运行的应用可以适当地使用上述数据。
设备350还可以使用音频编解码器360以听觉方式进行通信,该音频编解码器可以从用户接收语音信息并将其转换为可用的数字信息。音频编解码器360可以类似地诸如通过扬声器在设备350的听筒中为用户生成可听见的声音。这种声音可以包括来自语音电话呼叫的声音,可以包括记录的声音(例如,语音消息、音乐文件等)并且还可以包括由在设备350上运行的应用生成的声音。
如图所示,可以以多种不同形式来实现计算设备350。例如,它可以被实现为蜂窝电话380。它也可以被实现为智能电话382、个人数字助理或其他类似的移动设备的一部分。
条款1.一种计算机实现的方法,包括:在与被叫用户相关联的移动计算设备处,从与主叫用户相关联的主叫计算设备接收呼叫;响应于接收到所述呼叫,通过所述移动计算设备确定与所述被叫用户相关联的数据指示所述被叫用户将不会响应所述呼叫;响应于确定所述被叫用户将不会响应所述呼叫,通过所述移动计算设备推断所述主叫用户的信息需求;以及从所述移动计算设备向所述主叫计算设备自动提供与所述被叫用户相关联并且满足推断出的所述主叫用户的信息需求的信息。
条款2.根据条款1所述的方法,进一步包括:在确定与所述用户相关联的所述数据指示所述用户将不会响应所述呼叫之后,从所述主叫计算设备接收音频数据,其中,推断所述呼叫者的信息需求包括处理所述音频数据以标识所述呼叫者的信息需求。
条款3.根据条款2所述的方法,其中处理所述音频数据进一步包括:确定所述音频数据的文本表示;将所述文本表示的一个或多个文本片段与数据存储的一个或多个关键字进行匹配;以及标识与所述数据存储中的所匹配的关键字相关联的所述信息需求。
条款4.根据条款2所述的方法,其中处理所述音频数据进一步包括将机器学习应用于所述音频数据以标识所述主叫用户的信息需求。
条款5.根据条款1至4中的任一项所述的方法,进一步包括:响应于推断出所述主叫用户的信息需求,基于所述信息需求在所述移动计算设备处执行任务。
条款6.根据条款5所述的方法,其中所述任务包括基于i)所述主叫用户的信息需求和ii)所述日历应用的当前状态,在所述移动计算设备的日历应用中添加日历约会。
条款7.根据条款5或6所述的方法,其中所述任务包括基于所述呼叫者的信息需求在所述移动计算设备的任务管理应用中添加任务。
条款8.根据条款1至7中的任一项所述的方法,其中,推断出的所述主叫用户的信息需求是与所述被叫用户相关联的当前位置,其中自动提供满足所述呼叫者的信息需求的所述信息包括,将与所述被叫用户相关联的所述当前位置提供到所述主叫计算设备。
条款9.根据条款1至8中的任一项所述的方法,其中,推断出的所述主叫用户的信息需求是所述被叫用户到所述主叫用户的位置的估计到达时间,所述方法进一步包括,访问所述移动计算设备的位置应用以确定所述被叫用户的当前位置;接收所述主叫用户的位置;以及比较所述被叫用户的当前位置和所述主叫用户的位置以确定所述被叫用户到所述主叫用户的位置的估计到达时间。
条款10.根据条款9所述的方法,其中,独立于用户输入来访问所述移动计算设备的所述位置应用。
条款11.根据条款9或10所述的方法,进一步包括,响应于接收到所述主叫用户的位置,独立于用户输入通过所述移动计算设备的所述位置应用将所述主叫用户的位置设置为目标目的地位置。
条款12.根据条款9至11中的任一项所述的方法,进一步包括将所述被叫用户的当前位置提供给所述主叫计算设备。
条款13.根据条款1至12中的任一项所述的方法,其中,独立于所述被叫用户与所述移动计算设备的用户交互而执行自动提供满足所述主叫用户的信息需求的所述信息。
条款14.根据条款1至13中的任一项所述的方法,其中提供满足所述主叫用户的信息需求的所述信息包括向所述主叫计算设备提供包括满足所述主叫用户的信息需求的信息的音频信号。
条款15.根据条款1至14中的任一项所述的方法,其中确定与所述用户相关联的所述数据指示所述被叫用户将不会响应所述呼叫包括:访问与所述被叫用户相关联的日历元数据、位置元数据、电子邮件元数据和社交网络数据以及所述移动计算设备的加速度计数据和麦克风数据中的至少一项;处理所述日历元数据、所述位置元数据、所述电子邮件元数据、所述社交网络数据、所述加速度计数据和所述麦克风数据中的一项或多项以确定所述用户将不会响应所述呼叫;以及响应于所述处理,确定所述用户将不会响应所述呼叫。
条款16.根据条款15所述的方法,其中处理所述日历元数据、所述位置元数据、所述电子邮件元数据和所述社交网络数据中的一项或多项包括:从所述日历元数据、所述电子邮件元数据和所述社交网络数据中的一项或多项中标识与所述被叫用户相关联的事件;标识与所述事件相关联的时间窗;确定接收到所述呼叫的时间与时间窗口一致;以及响应于确定接收到所述呼叫的时间与所述时间窗口一致,确定所述用户将不会响应所述呼叫。
条款17.根据条款16所述的方法,进一步包括:响应于确定所述用户将不会响应所述呼叫,将所述日历元数据的一部分提供给所述主叫计算设备。
条款18.根据条款15至17中的任一项所述的方法,其中处理所述移动计算设备的加速度计数据包括:基于所述移动计算设备的加速度计数据,确定所述被叫用户正在驾驶,并且作为响应,确定所述用户将不会响应所述呼叫。
条款19.根据条款15至18中的任一项所述的方法,其中处理所述移动计算设备的麦克风数据包括:基于所述移动计算设备的麦克风数据,标识与一个或多个其他个人相关联的一个或多个音频信号,并且作为响应,确定所述用户将不会响应所述呼叫。
条款20.根据条款1至19中的任一项所述的方法,进一步包括:在移动设备处接收从呼叫者到被叫用户的传入呼叫;基于在所述移动设备处可用的信息确定所述被叫用户将不应答所述呼叫;通过所述移动设备应答所述呼叫;在所述呼叫期间在移动设备处接收呼叫者信息;基于接收到的呼叫者信息和在所述移动设备处可用的数据确定对所述呼叫者的响应;以及将所述响应提供给所述呼叫者。
条款21.根据条款20所述的方法,其中在所述呼叫期间将所述呼叫者信息作为音频数据被接收。
条款22.根据条款20或21所述的方法,其中,通过所述移动设备应答所述呼叫的步骤进一步包括,使所述移动设备的扬声器静音并且在不激活所述移动设备的显示器的情况下应答所述呼叫。
条款23.根据条款1至22中的任一项所述的方法,其中,将在所述呼叫期间在所述移动设备处接收到的所述呼叫者信息作为音频数据被接收。
条款24.根据条款1至23中的任一项所述的方法,其中,在所述呼叫期间将对所述呼叫者的响应作为音频数据被提供。
条款25.根据条款1至24中的任一项所述的方法,其中,所述响应是下述中的任意一个或者多个:所述被叫用户的位置、所述被叫用户的排程以及所述被叫用户何时应答呼叫的指示。
条款26.根据条款1至25中的任一项所述的方法,进一步包括以下步骤:从接收到的呼叫者信息确定紧急程度,并且如果高于预定紧急程度,则在所述移动设备上启动警报。
条款27.根据条款1-26中的任一项所述的方法,其中所述警报是音频和/或视觉警报。
条款28;根据条款27中的任一项所述的方法,其中,接收到的呼叫者信息包括一个或多个关键字,并且确定紧急程度的步骤基于所述一个或多个关键字与一个或多个相关联的紧急程度进行匹配。
条款29.根据条款1至28中的任一项所述的方法,其中在所述移动设备上可用的所述信息包括下述中的任何一个或者多个:请勿打扰设置、日历数据、传输数据的模式以及呼叫振铃时间的到期。
条款30.一种系统,包括:一个或多个计算机和一个或多个存储设备,存储可操作的指令,所述指令当由一个或多个计算机执行时,所述指令使所述一个或多个计算机执行根据条款1至29中的任一项所述的方法。
条款31.一种存储软件的非暂时性计算机可读介质,所述软件包括可由一个或多个计算机执行的指令,所述指令在被执行时使所述一个或多个计算机执行根据条款1至29中的任一项所述的方法。
这里描述的系统和技术的各种实现方式可以用数字电子电路、集成电路、专门地设计的ASIC(专用集成电路)、计算机硬件、固件、软件和/或其组合加以实现。这些各种实现方式可以包括在可编程系统上可执行和/或可解释的一个或多个计算机程序中的实现方式,所述可编程系统包括至少一个可编程处理器,所述至少一个可编程处理器可以是专用的或通用的,耦合以从存储系统、至少一个输入装置和至少一个输出装置接收数据和指令,并且向存储系统、至少一个输入装置和至少一个输出装置传输数据和指令。
这些计算机程序(也称为程序、软件、软件应用或代码)包括用于可编程处理器的机器指令,并且可以用高级过程和/或面向对象编程语言和/或用汇编/机器语言加以实现。如本文所使用的,术语“机器可读介质”、“计算机可读介质”是指用于向可编程处理器提供机器指令和/或数据的任何计算机程序产品、设备和/或装置(例如,磁盘、光盘、存储器、可编程逻辑器件(PLD)),包括将机器指令作为机器可读信号接收的机器可读介质。术语“机器可读信号”是指用于向可编程处理器提供机器指令和/或数据的任何信号。
为了提供用于与用户交互,可以在计算机上实现这里描述的系统和技术,所述计算机具有用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或LCD(液晶显示器)监视器)以及用户可以用来向该计算机提供输入的键盘和指点装置(例如,鼠标或轨迹球)。其它种类的装置也可以用于提供用于与用户交互;例如,提供给用户的反馈可以是任何形式的感觉反馈(例如,视觉反馈、听觉反馈或触觉反馈);并且可以以任何形式接收来自用户的输入,包括声、语音或触觉输入。
可以在计算系统中实现这里描述的系统和技术,所述计算系统包括后端组件(例如,作为数据服务器),或者包括中间件组件(例如,应用服务器),或者包括前端组件(例如,具有用户可以用来与这里描述的系统和技术的实现方式交互的图形用户接口或Web浏览器的客户端计算机),或此类后端、中间件或前端组件的任何组合。系统的组件可以通过任何形式或介质的数字数据通信(例如,通信网络)来互连。通信网络的示例包括局域网(LAN)、广域网(WAN)和因特网。
计算系统可以包括客户端和服务器。客户端和服务器一般地彼此远离并且通常通过通信网络来交互。客户端和服务器之间的关系借助于在相应计算机上运行并且彼此具有客户端-服务器关系的计算机程序而发生。
尽管本公开包括一些细节,但是这些细节不应被解释为对本公开的范围或所要求保护的范围的限制,而是对本公开的示例实施方式的特征的描述。也可以在单个实施方式中组合提供在单独的实施方式的上下文中在本公开中描述的某些特征。相反,在单个实施方式的上下文中描述的各种特征也可以分别在多个实施方式中或以任何合适的子组合来提供。而且,尽管以上可以将特征描述为以某些组合起作用并且甚至最初是这样要求保护,但是在一些情况下可以从该组合中删去所要求保护的组合中的一个或多个特征,并且所要求保护的组合可以针对子组合或子组合的变体。
类似地,尽管在附图中以特定顺序描绘了操作,但这不应理解为要求以所示的特定顺序或以连续的顺序执行这样的操作,或者执行所有图示的操作以实现期望的效果。结果。在某些情况下,多任务和并行处理可能是有利的。此外,在上述实施方式中的各种系统组件的分离不应被理解为在所有实施方式中都需要这种分离,并且应理解,所描述的程序组件和系统通常可以集成在单个软件产品中或打包成多个软件产品。
因此,已经描述了本公开的特定实施方式。其他实施方式在所附权利要求的范围内。例如,权利要求中记载的动作可以以不同的顺序执行并且仍然实现期望的结果。已经描述了许多实施方式。然而,将理解的是,在不脱离本公开的精神和范围的情况下,可以做出各种修改。例如,在对步骤进行重新排序、添加或移除的情况下,可以使用上面所示的各种形式的流程。因此,其他实施方式在所附权利要求的范围内。
Claims (15)
1.一种计算机实现的方法,包括:
在与被叫用户相关联的计算设备处,从与主叫用户相关联的主叫计算设备接收呼叫;
响应于接收到所述呼叫,通过所述计算设备确定与所述被叫用户相关联的数据指示所述被叫用户将不会响应所述呼叫;
响应于确定所述被叫用户将不会响应所述呼叫,通过所述计算设备推断所述主叫用户的信息需求;以及
从所述计算设备向所述主叫计算设备自动提供与所述被叫用户相关联并且满足推断出的所述主叫用户的信息需求的信息。
2.根据权利要求1所述的方法,进一步包括:
在确定与所述被叫用户相关联的所述数据指示所述被叫用户将不会响应所述呼叫之后,从所述主叫计算设备接收音频数据,其中,推断所述主叫用户的信息需求包括处理所述音频数据以标识所述主叫用户的信息需求。
3.根据权利要求2所述的方法,其中处理所述音频数据进一步包括:
确定所述音频数据的文本表示;
将所述文本表示的一个或多个文本片段与数据存储的一个或多个关键字进行匹配;以及
标识与所述数据存储中的所匹配的一个或者多个关键字相关联的所述信息需求作为需求。
4.根据权利要求2或者3中的任一项所述的方法,其中处理所述音频数据进一步包括将机器学习应用于所述音频数据以标识所述主叫用户的信息需求。
5.根据权利要求1至4中的任一项所述的方法,进一步包括,响应于推断出所述主叫用户的信息需求,基于所述信息需求在所述移动计算设备处执行任务。
6.根据权利要求5所述的方法,其中执行所述任务包括:
基于所述主叫用户的信息需求和日历应用的当前状态,在所述日历应用内添加日历约会;或者
基于所述主叫用户的信息需求,在任务管理应用内添加所述任务。
7.根据权利要求1至6中的任一项所述的方法,其中,推断出的所述主叫用户的信息需求是与所述被叫用户相关联的当前位置,
其中自动提供满足推断出的所述主叫用户的信息需求的所述信息包括将与所述被叫用户相关联的所述当前位置提供给所述主叫计算设备。
8.根据权利要求1至7中的任一项所述的方法,其中,独立于所述被叫用户与所述计算设备的用户交互而执行自动提供满足推断出的所述主叫用户的信息需求的所述信息。
9.根据权利要求1至8中的任一项所述的方法,其中,提供满足推断出的所述主叫用户的信息需求的所述信息包括,向所述主叫计算设备提供包括满足所述主叫用户的信息需求的所述信息的音频信号。
10.根据权利要求1至9中的任一项所述的方法,其中确定与所述被叫用户相关联的指示所述被叫用户将不会响应所述呼叫的数据包括指示所述被叫用户将不会响应所述呼叫的日历元数据、位置元数据、电子邮件元数据、社交网络数据、加速度计数据或麦克风数据中的至少一项。
11.根据权利要求10所述的方法,进一步包括:
从所述日历元数据、所述电子邮件元数据和所述社交网络数据中的一项或多项中标识与所述被呼叫用户相关联的事件;
标识与所述事件相关联的时间窗口;
确定接收到所述呼叫的时间与所述时间窗口一致;以及
响应于确定接收到所述呼叫的所述时间与所述时间窗口一致,确定所述被叫用户将不会响应所述呼叫。
12.根据权利要求11所述的方法,进一步包括:
响应于确定所述被叫用户将不会响应所述呼叫,将所述日历元数据的一部分提供给所述主叫计算设备。
13.根据权利要求1至12中的任一项所述的方法,进一步包括:
确定所述呼叫的紧急程度;以及
响应于确定所述紧急程度高于预定紧急程度,在所述计算设备上启动警报。
14.一种移动计算设备,包括至少一个处理器,所述至少一个处理器被配置成执行根据权利要求1至13中的任一项所述的方法。
15.一种包括指令的计算机可读存储介质,所述指令在被执行时配置移动计算设备的至少一个处理器执行根据权利要求1至13中的任一项所述的方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201862677477P | 2018-05-29 | 2018-05-29 | |
US62/677,477 | 2018-05-29 | ||
PCT/US2019/031614 WO2019231631A1 (en) | 2018-05-29 | 2019-05-09 | Automatically performing actions by a mobile computing device |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111684783A true CN111684783A (zh) | 2020-09-18 |
Family
ID=66794088
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201980011480.2A Pending CN111684783A (zh) | 2018-05-29 | 2019-05-09 | 通过移动计算设备自动执行动作 |
Country Status (4)
Country | Link |
---|---|
US (1) | US11805208B2 (zh) |
CN (1) | CN111684783A (zh) |
DE (1) | DE112019000305T5 (zh) |
WO (1) | WO2019231631A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9801059B2 (en) | 2015-07-09 | 2017-10-24 | Google Inc. | Security for wireless broadcasts |
CN111684783A (zh) | 2018-05-29 | 2020-09-18 | 谷歌有限责任公司 | 通过移动计算设备自动执行动作 |
WO2022137246A1 (en) * | 2020-12-24 | 2022-06-30 | Telefonaktiebolaget Lm Ericsson (Publ) | Function node and method in a communications network |
US11889019B2 (en) * | 2021-10-12 | 2024-01-30 | T-Mobile Usa, Inc. | Categorizing calls using early call information systems and methods |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030112941A1 (en) * | 2001-12-17 | 2003-06-19 | International Business Machines Corporation | Identifying a context for a call |
CN1859742A (zh) * | 2005-12-07 | 2006-11-08 | 华为技术有限公司 | 一种呼叫处理方法、终端设备及通信系统 |
US20080075236A1 (en) * | 2006-09-22 | 2008-03-27 | Venkatesh Raju | System and Method of Generating Multimedia Ringback Based on Deduced User Intent |
CN102065368A (zh) * | 2009-11-13 | 2011-05-18 | 中国移动通信集团北京有限公司 | 一种用户状态自动播放的方法、系统及装置 |
US20140118465A1 (en) * | 2012-10-31 | 2014-05-01 | Telstra Corporation Limited | Callee rejection information for rejected voice calls |
CN104767860A (zh) * | 2015-04-23 | 2015-07-08 | 小米科技有限责任公司 | 来电提示方法、装置及终端 |
CN105009556A (zh) * | 2013-03-11 | 2015-10-28 | 高通股份有限公司 | 用于交互式远程通信中的增强响应的意图引擎 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040235462A1 (en) * | 2003-05-23 | 2004-11-25 | Lasken Richard D. | Notification of calling party when mobile called party becomes available |
US8331539B2 (en) | 2005-10-13 | 2012-12-11 | Cisco Technology, Inc. | Method and system for representing the attributes of an incoming call |
US8594318B2 (en) | 2005-11-23 | 2013-11-26 | Bessy Wen-Han Liang | Method and apparatus for indicating a caller's intent |
US20080247529A1 (en) | 2007-04-03 | 2008-10-09 | Microsoft Corporation | Incoming Call Classification And Disposition |
US8145199B2 (en) * | 2009-10-31 | 2012-03-27 | BT Patent LLC | Controlling mobile device functions |
US20140133656A1 (en) | 2012-02-22 | 2014-05-15 | Qualcomm Incorporated | Preserving Security by Synchronizing a Nonce or Counter Between Systems |
US20140024347A1 (en) * | 2012-07-18 | 2014-01-23 | Mike Carter | Wireless Device Driving Deactivation System and Support |
US10264113B2 (en) * | 2014-01-10 | 2019-04-16 | Onepin, Inc. | Automated messaging |
WO2015106130A1 (en) * | 2014-01-10 | 2015-07-16 | Onepin, Inc. | Automated messaging |
US10298740B2 (en) * | 2014-01-10 | 2019-05-21 | Onepin, Inc. | Automated messaging |
US9043602B1 (en) | 2014-06-10 | 2015-05-26 | Google Inc. | Generating and using ephemeral identifiers and message integrity codes |
JP2017017545A (ja) * | 2015-07-01 | 2017-01-19 | シャープ株式会社 | 通話システムおよび電話機 |
EP3403425B1 (en) * | 2016-01-12 | 2024-03-27 | OnePin, Inc. | Automated messaging |
KR101776750B1 (ko) * | 2016-04-05 | 2017-09-08 | 현대자동차 주식회사 | 운전자의 통화가능정보를 제공하는 서버, 장치 및 방법이 구현된 컴퓨터로 판독 가능한 기록매체 |
CN111684783A (zh) | 2018-05-29 | 2020-09-18 | 谷歌有限责任公司 | 通过移动计算设备自动执行动作 |
-
2019
- 2019-05-09 CN CN201980011480.2A patent/CN111684783A/zh active Pending
- 2019-05-09 WO PCT/US2019/031614 patent/WO2019231631A1/en active Application Filing
- 2019-05-09 DE DE112019000305.4T patent/DE112019000305T5/de active Pending
- 2019-05-09 US US16/771,630 patent/US11805208B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030112941A1 (en) * | 2001-12-17 | 2003-06-19 | International Business Machines Corporation | Identifying a context for a call |
CN1859742A (zh) * | 2005-12-07 | 2006-11-08 | 华为技术有限公司 | 一种呼叫处理方法、终端设备及通信系统 |
US20080075236A1 (en) * | 2006-09-22 | 2008-03-27 | Venkatesh Raju | System and Method of Generating Multimedia Ringback Based on Deduced User Intent |
CN102065368A (zh) * | 2009-11-13 | 2011-05-18 | 中国移动通信集团北京有限公司 | 一种用户状态自动播放的方法、系统及装置 |
US20140118465A1 (en) * | 2012-10-31 | 2014-05-01 | Telstra Corporation Limited | Callee rejection information for rejected voice calls |
CN105009556A (zh) * | 2013-03-11 | 2015-10-28 | 高通股份有限公司 | 用于交互式远程通信中的增强响应的意图引擎 |
CN104767860A (zh) * | 2015-04-23 | 2015-07-08 | 小米科技有限责任公司 | 来电提示方法、装置及终端 |
Also Published As
Publication number | Publication date |
---|---|
US11805208B2 (en) | 2023-10-31 |
US20200358901A1 (en) | 2020-11-12 |
DE112019000305T5 (de) | 2020-09-17 |
WO2019231631A1 (en) | 2019-12-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11805208B2 (en) | Automatically performing actions by a mobile computing device | |
US9262175B2 (en) | Systems and methods for storing record of virtual agent interaction | |
US9276802B2 (en) | Systems and methods for sharing information between virtual agents | |
US9148394B2 (en) | Systems and methods for user interface presentation of virtual agent | |
US9659298B2 (en) | Systems and methods for informing virtual agent recommendation | |
US9679300B2 (en) | Systems and methods for virtual agent recommendation for multiple persons | |
US9560089B2 (en) | Systems and methods for providing input to virtual agent | |
RU2694273C2 (ru) | Основанная на местоположении передача аудиосообщений | |
US20140164532A1 (en) | Systems and methods for virtual agent participation in multiparty conversation | |
CN112470454A (zh) | 使用话音和文本的同步通信 | |
US20140164953A1 (en) | Systems and methods for invoking virtual agent | |
US20140297288A1 (en) | Telephone voice personal assistant | |
US10931607B2 (en) | Urgency and emotion state matching for automated scheduling via artificial intelligence | |
EP2912567A1 (en) | System and methods for virtual agent recommendation for multiple persons | |
US20130078958A1 (en) | System and method for managing transient notifications using sensors | |
KR20150046100A (ko) | 전자 디바이스에 대한 가상 에이전트 통신 | |
US20180288227A1 (en) | System and Method for Selective Voicemail Transcription | |
US11244685B2 (en) | Network computer system to generate voice response communications | |
US11381675B2 (en) | Command based interactive system and a method thereof | |
CN112513978A (zh) | 热词辨识和被动辅助 | |
US20230388422A1 (en) | Determination and display of estimated hold durations for calls | |
US11765274B2 (en) | Determination and display of estimated hold durations for calls | |
KR20220074967A (ko) | 자동 전화 분류 및 스크리닝 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200918 |