CN111247393B - 免提助手请求的通信的系统和方法 - Google Patents

免提助手请求的通信的系统和方法 Download PDF

Info

Publication number
CN111247393B
CN111247393B CN201780096094.9A CN201780096094A CN111247393B CN 111247393 B CN111247393 B CN 111247393B CN 201780096094 A CN201780096094 A CN 201780096094A CN 111247393 B CN111247393 B CN 111247393B
Authority
CN
China
Prior art keywords
user
electronic device
generating
notification
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780096094.9A
Other languages
English (en)
Other versions
CN111247393A (zh
Inventor
D.诺伊
G.莫施奇
S.施莫尼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Google LLC
Original Assignee
Google LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Google LLC filed Critical Google LLC
Publication of CN111247393A publication Critical patent/CN111247393A/zh
Application granted granted Critical
Publication of CN111247393B publication Critical patent/CN111247393B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096733Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place
    • G08G1/09675Systems involving transmission of highway information, e.g. weather, speed limits where a selection of the information might take place where a selection from the received information takes place in the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3691Retrieval, searching and output of information related to real-time traffic, weather, or environmental conditions
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3629Guidance using speech or audio output, e.g. text-to-speech
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3641Personalized guidance, e.g. limited guidance on previously travelled routes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3652Guidance using non-audiovisual output, e.g. tactile, haptic or electric stimuli
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3679Retrieval, searching and output of POI information, e.g. hotels, restaurants, shops, filling stations, parking facilities
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3697Output of additional, non-guidance related information, e.g. low fuel level
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72457User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to geographic location
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/027Services making use of location information using location based information parameters using movement velocity, acceleration information
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30Services specially adapted for particular environments, situations or purposes
    • H04W4/40Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W76/00Connection management
    • H04W76/10Connection setup
    • H04W76/14Direct-mode setup
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6075Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle
    • H04M1/6083Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system
    • H04M1/6091Portable telephones adapted for handsfree use adapted for handsfree use in a vehicle by interfacing with the vehicle audio system including a wireless interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/74Details of telephonic subscriber devices with voice recognition means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/023Services making use of location information using mutual or relative location information between multiple location based services [LBS] targets or of distance thresholds

Abstract

提供了用于在用户和电子设备之间建立免提通信会话的系统和方法。检测用于与导航应用的用户建立通信会话的触发事件。触发事件可以包括由电子设备标识来自数据源的当前期望通信给用户的信息。生成信息的重要性级别并根据所确定的重要性级别生成通知,通知在第一实例中具有第一属性且在第二实例中具有第二属性。当生成通知之后,接收到来自用户的建立通信会话的许可,可以建立电子设备和用户之间的包括电子设备的语音输出和用户的语音输入的通信会话。

Description

免提助手请求的通信的系统和方法
技术领域
本申请总体上涉及经由软件助手在电子设备和用户之间建立免提通信。
背景技术
本文提供的背景描述是出于总体上呈现本公开的上下文的目的。在此背景技术部分中所描述的范围内,目前指名的发明人的工作以及在提交时可能无法视为现有技术的描述的各方面既不明示也不暗示地承认为本公开的现有技术。
配置为接收来自用户的语音命令并通过基于语音的通信进行响应的软件应用已在电子设备中流行。一般来说,电子设备和用户之间的基于语音的通信可以通过用户发起与电子设备的通信来发起,也可以通过电子设备发起与用户的通信来发起。用户发起的通信的一个问题是用户可能并不总是知道有新的或相关的信息可用。例如,在导航软件的背景下,当今许多人使用导航软件来获取驾驶、行走、骑车等的方向的信息,用户可能不知道附近可能有交通事故,因此可能不知道发起与电子设备的通信以询问交通状况。另一方面,设备发起的通信可能是打扰式的,并可能在不适当的时间打断用户。例如,在许多情况下,收听广播或通过电话交谈的用户可能不想被设备发起的通信打断。此外,用户可能偏好在某些时间不接收设备发起的通信或相对较不重要的通知。
发明内容
在一个方面,提供了一种用于在用户和电子设备之间建立与导航相关的通信会话的方法。通信会话包括电子设备的语音输出和用户的语音输入,并且电子设备配置为从数据源存取信息。方法包括由电子设备中的一个或多个处理器检测用于与导航应用的用户建立通信会话的触发事件,其中检测触发事件包括由电子设备标识来自数据源的当前期望通信给用户的信息;由一个或多个处理器确定信息的重要性级别;由一个或多个处理器根据所确定的重要性级别生成通知,包括生成在第一实例中具有第一属性的通知和生成在第二实例中具有第二属性的通知;此外,该方法包括,在生成通知之后,由一个或多个处理器从用户接收许可以建立通信会话;以及响应于接收到许可,在电子设备和所述之间建立通信会话。
在另一方面,提供一种电子设备,用于与用户建立与导航相关的通信会话。电子设备包括一个或多个处理器和其上存储有指令的非暂时性计算机可读存储器。当指令由一个或多个处理器执行时,使电子设备检测用于与导航应用的用户建立通信会话的触发事件,其中触发事件包括由电子设备标识来自数据源的当前期望通信给用户的信息;确定信息的重要性级别;根据所确定的重要性级别生成通知,通知在第一实例中具有第一属性且在第二实例中具有第二属性;在生成通知之后,从用户接收许可以建立通信会话;以及响应于接收到许可,在电子设备和用户之间建立通信会话。
附图说明
图1示出了示例环境,在该示例环境中,本公开的技术可以用于在用户和电子设备之间建立与导航相关的通信会话;
图2是可以在图1的系统中操作的示例电子设备和示例车载媒体单元的框图;
图3示出了示例车辆路线,在该示例车辆路线中,本公开的技术可以用于在用户和电子设备之间建立与导航相关的通信会话;以及
图4是用于在用户和电子设备之间建立与导航相关的通信会话的示例方法的流程图。
具体实施方式
概述
在电子设备中,应用可以包括虚拟语音助手,或者与虚拟语音助手配合使用,该虚拟语音助手配置为在应用标识与电子设备的用户进行通信的原因时生成通知。所识别的原因或“触发事件”可以与可传递给用户的信息有关。例如,可传递给用户的信息可以是与用户的日历上即将到来的约会有关的公告。作为另一示例,当应用是导航应用时,可传递给用户的信息可以是用户正在接近的兴趣点(POI)的通知。作为另一示例,可传递给用户的信息可以是用户可能会迟于用户日历上即将到来的会议(即,基于估计的到达时间)的指示。在某些情况下,应用可以与用户通信,以便获得将用户的ETA的更新发送(例如,经由文本、电子邮件等)给其他会议参与者的许可。触发事件还可以与用户会预期需要并愿意与应用或与该应用相关的任何关联在线服务共享的信息相关。例如,在通知用户天气预报后,应用可以确定用户会预期需要有关天气的更新(例如,预报是否准确)。作为另一示例,当应用是导航应用时,导航应用可以确定用户刚刚通过了较早报告的事故的地点,并且可以确定用户会预期需要有关事故的更新(例如,交通仍然延误,事故现场被清除)。
在各种实施方式中,语音助手以以下形式生成通知:闪光、短音、文本显示、弹出式显示(例如,接管(takeover)或横幅,或其他视觉信号)、触觉信号(例如,振动)等等,或者这些信号中两个或多个的适当组合。从概念上讲,此通知基本类似于学生在课堂上举手,即,请求许可以进行发言。用户可以接受或拒绝此请求(例如,经由语音命令:“是,继续”或“现在不行”,经由诸如轻击的手势,或者只是忽略通知),且应用仅在请求被接受或信息足够重要以超越(override)用户的偏好时,才与用户进行通信。以此方式,应用可以提高用户避免不期望中断的可能性。在某些情况下,通知可以是用户已授予许可的通信的“捎带(piggyback)”。例如,如果用户已经授予与导航相关的通信的许可,则该通知可以包含在导航指令通信中。作为更具体的示例,通知可以说:“在路线101上继续行驶10分钟。您的助理有两条待处理信息。说“好的,继续”以了解更多。”
此外,鉴于通知的重要性和/或上下文,语音助手可以改变通知的一个或多个参数。通知的参数可以包括信号的类型(例如,音频、触觉、文本)和信号的属性(例如,音量、强度、音高、持续时间、重复频率、模式)。例如,在导航上下文中,语音助手可以确定指出附近的旅游目的地是低重要性的通信,而附近的警车或附近的事故是高重要性的通信。例如,语音助手还可以根据其他信号来提高或降低通知的重要性级别,诸如车辆的速度或用户当前是否正在使用智能手机进行电话交谈。因此,在某些场景下,考虑到车辆相对较慢的速度以及当前用户不在通话或收听广播,语音助手可以确定关于沿途地标建筑的相对不重要的通知可以被视为更重要的通知。
因此,语音助手可以根据所确定的通信的重要性来改变通知的参数。例如,语音助手可以对于低重要性通信输出光信号,但是对于高重要性通信输出声音。如上所述,在某些情况下,对于非常高重要性的通信(例如紧急通信),语音助手甚至可能会超越或绕过许可请求并打断用户。
尽管下面的示例主要集中于导航,但是本公开的至少一些技术也可以在其他合适的计算系统中使用。例如,语音助手可以在用户家中作为虚拟助手来操作,以向用户提供信息和/或向用户征求信息或指令。有利地,通过等待用户许可以提供或征求信息,家庭助理应用确保在提供或征求信息之前用户实际上在附近、正在注意并有意与助手进行通信。也就是说,如果提供信息时,用户在家里的另一个房间,则用户可能无法意识到设备提供的信息。此外,如果用户与设备位于同一房间,用户可能在睡觉,忙碌,没有注意等,或以其他方式在特定时间不倾向于与助手进行通信。因此,一旦用户注意到通知并希望进行通信,则用户可以授予许可。
示例计算环境
参考图1,可以在其中实现上述技术的示例环境100包括电子设备102和带有车载媒体单元(head unit)106的车辆104。电子设备102可以是智能电话、平板计算机、可穿戴计算机等。电子设备102经由通信链路108与车辆104的车载媒体单元106通信,该通信链路可以是有线的(例如,通用串行总线(USB))或无线的(例如,蓝牙,Wi-Fi Direct)。电子设备102还可以经由无线通信网络与各种内容提供商、服务器等进行通信。
在操作中,电子设备102向车载媒体单元106提供与导航有关的信息,该信息可以包括数字地图图像、文本和音频。车载媒体单元106经由显示器110显示该信息。在一些实施方式中,显示器110是触摸屏,并且包括用于输入文本输入的软件键盘,文本输入可以包括目的地、起点等的名称或地址。另一种类型的显示器110可以是与非触摸输入设备(例如,旋转控制器)或单独的触摸板一起提供的相对复杂的屏幕。通常,显示器110不需要能够显示文本和图像两者。例如,另一辆车辆中的车载媒体单元可以包括简单的显示器,其仅只能在一行或几行上显示字母数字字符。
车载媒体单元106可以包括硬件输入控件,例如按钮、旋钮等。这些控件可以设置在车载媒体单元106上或车辆104中的其他位置。例如,图1中的车辆104包括车载媒体单元106上的导航控件112以及与车载媒体单元106通信耦接的方向盘控件114。控件112和114可以映射到电子设备102上的各种导航控制功能。在一些实施方式中,控件112和114也可以用于输入字母数字字符。
车辆104还可以包括音频输入和输出组件,例如麦克风116和扬声器118。麦克风116可以配置为捕获来自用户的语音输入,而扬声器118可以配置为与用户通信与导航有关的信息。类似于硬件控件112和114,麦克风116和扬声器118可以直接设置在车载媒体单元106上或车辆104中的其他位置。另外,车辆104可以包括其他合适的传感器120,例如图像传感器,其也可以直接设置在车载媒体单元106上或车辆104中的其他位置,并且可以配置为捕获来自用户的其他类型的输入(例如,手势命令)。车辆104还可包括一个或多个内部灯指示器122。
当然,在一些实施例中,电子设备102可以包括车载媒体单元106的一些或全部特征。也就是说,电子设备102可以包括显示器、键盘、诸如按钮、旋钮等的硬件输入控件、导航控件、音频输入和输出组件、各种传感器和/或灯等,例如关于车载媒体单元106所描述的那些。此外,在一些实施例中,电子设备102可以执行车载媒体单元106的一些或全部功能,例如,与导航有关的通信/显示信息等。因此,在一些实施例中,诸如电子设备102的电子设备可以代替本文所述的车载媒体单元106,即,一些实施例可以根本不包括车载媒体单元。
参考图2,示出了电子设备102和车载媒体单元106的示例实施方式。如上所述,车载媒体单元106包括显示器110、硬件控件112、114、音频输入单元116、音频输出单元118、一个或多个传感器120、以及内部灯122。车载媒体单元106还可以包括处理器124和一个或若干个短距离通信单元126。
该组传感器120可以包括例如全球定位系统(GPS)模块,用于确定安装了车载媒体单元106的车辆的当前位置;惯性测量单元(IMU),用于测量车辆的速度、加速度和当前方向;气压计,用于确定车辆的高度;图像传感器,配置为识别车辆操作者做出的响应手势,等等。尽管图2描绘了车载媒体单元106内部的一组传感器120,但是需注意的是,传感器120不必是车载媒体单元106的整体组件。而是,车辆可以在各个位置包括任何数量的传感器,并且车载媒体单元14可以在操作期间从这些传感器接收数据。此外,一些或全部的传感器可以设置在电子设备102处,或者以其他方式通信地连接到电子设备102。
取决于实施方式,处理器124可以是执行存储在计算机读取器存储器(未示出)上的指令的通用处理器,或者是实现车载媒体单元106的功能的专用集成电路(ASIC)。在任何情况下,处理器124都可以操作为格式化、发送、接收和/或处理车载媒体单元106与电子设备102之间的通信,经由显示器110显示地图图像和/或通知,经由音频输出118播放音频通知/通信,等等。
短距离通信单元126允许车载媒体单元106与电子设备102通信。短距离通信单元126可以支持有线或无线通信,例如USB、蓝牙、Wi-Fi Direct、近场通信(NFC)等。类似地,电子设备102可以包括用于与车载媒体单元106通信的短距离通信单元128。类似于短距离通信单元126,短距离通信单元128可以支持一种或多种通信方案,诸如USB、蓝牙、Wi-FiDirect等。
电子设备102还可包括存储器130、一个或多个处理器132、诸如GPS单元134的定位模块、音频输入单元136和音频输出单元138、一个或多个传感器140、显示器142、振动单元144和光源146(例如LED)。这些组件可以与描述为车载媒体单元106的一部分的类似组件类似地操作,并且在某些情况下可以仅包括在电子设备102中。此外,电子设备102可以包括远距离通信单元148,以经由例如3G蜂窝网络、4G蜂窝网络、LTE蜂窝网络、Wi-Fi网络、或任何其他合适的网络152向导航服务器150发送数据和从导航服务器150接收数据。导航服务器152可以包括处理器154和存储器156,并且可以配置为从一个或多个导航数据库158存取与导航有关的数据。
此外,存储器130可以存储导航应用160的指令。导航应用160可以包括编译指令和/或以运行时可解释的任何合适的可编程语言的指令,并在一个或多个处理器132上执行。通常,导航应用生成路线,或从导航服务器150接收路线,该路线将驾驶员从当前位置引导到用户已选择的目的地。作为一个示例,路线可以包含一系列步骤,每个步骤描述路线段(例如,道路的名称或编号、距离、行驶时间、限速)和操纵(例如,左转弯、向右并道、直行))以访问下一个路线段。导航应用还可以生成和提供关于沿途的兴趣点(POI)的信息,以及与用户有关的其他信息。
导航应用160可以实现与用户通信的语音助手。替代地,语音助手被实现为独立于导航应用160在电子设备102上执行的任务。在另一实施方式中,语音助手在一个或多个网络服务器上操作。在任何情况下,语音助手都可以经由音频输出118和/或138与用户通信。例如,语音助手可以经由电子设备102或车载媒体单元106的音频输出将路线引导和其他与导航有关的信息通信给用户。在某些情况下,语音助手还可以向用户请求与导航有关的信息。此外,语音助手可以响应用户的输入,例如语音命令,手势等,其由例如音频输入116和/或136,或任何其他传感器140检测到。用户输入可以包括例如用户的选择或许可。
语音助手可以尝试在用户与某个本地或远程数据源之间建立通信会话。例如,当与触发事件有关的信息起源于电子设备102之外时,导航服务器150和导航数据库158可以是数据源。导航数据库158可以存储与其他驾驶员或自动化系统报告的道路事故有关的信息。电子设备102可以配置为从导航数据库158的周期性地存取数据。在其他情况下,电子设备102本身可以是数据源。导航应用160例如可以在导航期间标识即将到来的操纵。此外,当例如电子设备102和车载媒体单元106通信地耦接时,以及当车载媒体单元102具有与车辆有关的某些信息要报告时,在车载媒体单元106中操作的某些组件可以是数据源。
在与用户建立通信会话之前,语音助手可以生成非打扰式通知,该通知配置为警告用户导航应用160有事项要通信给用户或者导航应用160向用户请求信息。通知可以是例如声音信号、光信号、特定消息的显示、振动信号等,并且可以基于通信和/或对信息的请求的重要性而有所不同。例如,对于更重要的通信或请求,语音助手可以生成更大的声音或更亮的光。作为另一个示例,语音助手可以为较重要的通信/请求生成声音,为较不重要的通信/请求生成灯光。在注意到通知时,用户可以使用语音命令来指示语音助手进行通信的许可。因此,仅当接收到用户许可时,导航应用160才可以与用户建立通信会话。有利地,在导航上下文中,用户可以经由语音命令授予许可,而无需从车辆的方向盘移开他或她的手。
与语音助手的示例交互
图3示意性地示出了一些示例情况,在其中本公开的技术可以用于建立与导航有关的通信会话。在这些示例中,电子设备102设置在行驶路线段302的车辆104中。导航应用160生成用于将车辆104的驾驶员沿着包括路线段302的特定路线引导到目的地的导航方向。该路线段建立了导航应用160和语音助手(其可以作为导航应用160的组件或作为单独的应用操作)的当前上下文。根据所建立的上下文,语音助手可以基于某些触发事件来生成尝试与用户建立通信的通知。
导航应用160可以尝试与用户建立通信以便提供与触发事件有关的信息。例如,使用GPS 134和/或从导航数据库158存取的信息,导航应用160可以确定车辆靠近(例如,五英里远、一英里远、100英尺远,等)即将到来的转弯,例如出口304。因此,导航应用160可以生成触发事件,以与可以是车辆104的驾驶员或乘客的用户建立通信会话,以通知她或他正在接近转弯,并可以使语音助手请求许可以建立通信会话。该请求可以是通知的形式,具有与信号类型、信号强度的强度等相关的某些属性。更具体地,基于车辆102离出口304有多近,通知可以指示更大或更小的重要性。例如,当车辆102离出口304五英里时,通知可以指示触发事件较不重要,但是当车辆102离出口304仅100英尺时,通知可以指示触发事件比较重要。一旦用户通过语音命令(“继续”,“怎么了?”,“请讲话”等)授权许可以进行通信,则导航应用160可以建立通信会话并提供必要的信息(例如,“转弯接近五英里。”)。
在其他情况下,用户当时可以不授予导航应用160建立通信的许可(例如,无响应,“现在请不要讲话”,“我现在正忙”,“请勿打扰”等)。另外,在某些情况下,用户可以授权延迟的许可以使导航应用160建立通信(例如,“一分钟内提醒我”,“现在不行,但在五分钟后提醒我”等。)。导航应用160分配给通知的优先级别可以帮助某些用户确定是否应授予许可。
作为另一个示例,车辆驾驶员的各个兴趣点(POI),例如旅游景点304(例如地标、纪念碑、历史遗址、博物馆)、加油站306、旅店308等可以沿着或靠近路线段302布置。在某些情况下,POI可以是拼车乘客的接送点(未示出以避免混乱),或者该乘客的下车点(也未示出)。使用GPS 134和/或从导航数据库158存取的信息,导航应用160可以确定车辆104和一个或多个POI之间的距离。车辆和某个POI之间的距离可以是导航应用160用于生成通知以尝试与用户建立通信会话的信号之一。例如,当车辆104在拼车乘客的接载点附近时,导航应用160可以生成通知以尝试与用户建立通信会话(例如,以通知用户附近的乘客接载点,以建议用户应致电乘客等)。类似地,当车辆104在乘客的下车点的一定距离内时,导航应用160可以生成通知以尝试与用户建立通信会话(例如,以通知用户正在接近下车点,以征求用户对乘客的评价等)。如关于出口或转弯的接近度所讨论的,通知的重要性可以与POI的接近度有关。例如,如果POI距离100英尺,则通知可以比POI距离5英里的情况指示更大的重要性。
此外,通知指示的重要性可以与POI的类型有关。例如,附近的旅游景点304可以不如加油站306重要,特别是如果车辆104的燃料不足。例如,传感器120或140可以配置为检测车辆104中剩余的燃料。因此,低燃料和附近加油站306的组合可导致导航应用160为用户分配高(或至少较高)的重要性通知。作为另一示例,传感器120或140可以配置为检测用户可能疲劳的指示。例如,应用可以推断用户可能在晚上或清晨,或者一次旅行行驶了一定英里后感到疲劳,等等。在某些情况下,指示疲劳的用户和附近的旅店308或用户可以订购咖啡的其他位置的信号的组合可以导致导航应用160分配高重要性通知,以向用户建议咖啡停歇。更一般而言,导航应用160在为通知分配重要性级别时可以权衡任何合适数量的信号。除了如上所述的距离(取决于情景,到POI或下一操纵的位置而测定)和来自汽车传感器的信号之外,导航应用160可以使用如下示例信号(i)明示的用户偏好(例如,“警告我收费站”,“让我知道哪里可以喝咖啡”),(ii)暗示的用户偏好,前提是用户已经表明他或她期望导航应用160考虑这些偏好(例如,咖啡店,考虑到用户过去查看过的咖啡店的数量),(iii)用户当前是否在通话中,(iv)用户当前是否正在收听收音机,或(v)车辆中的当前噪音水平。
一旦用户注意到高重要性通知,用户很可能授权许可以建立通信(例如,“请讲”,“继续”,“怎么了?”)。当接收到来自用户的许可,导航应用160可以建立通信会话。例如,导航应用160可以通过扬声器118或138来“讲话”,“燃油低,但是在1英里内有一个加油站。您要我改变路线到加油站吗?”。然后,用户可以相应地做出响应,例如用语音命令“是,改变路线”,导航应用160可以相应地向加油站306改变路线。
在其他情况下,导航应用160可以使用语音助手来尝试与用户建立通信会话,以便向用户请求与触发事件有关的信息。语音助手可以对用户可用的信息和用户可能可用的信息使用不同类型的通知。例如,语音助手可以将绿光信号用于与向用户提供信息有关的通知,将蓝光信号用于与从用户征求信息有关的通知。用户以这种方式可以立即识别语音助手正在请求的大致通信方向。
为了向用户提供信息和从用户征求信息二者,触发事件可以是车辆104的当前位置。回到图2,例如,导航服务器150可以将与交通和事故有关的信息存储在导航数据库158中。导航数据库158中的交通事故数据可以包括诸如交通事故的日期和时间、交通事故的位置、交通事故的严重程度等信息。导航服务器150可以在某个时刻确定车辆104当前位于最近报告的事故的现场附近。导航服务器150因此可以请求导航应用160使用语音助手来从用户征求有关该事故的信息。因此,导航应用160可以使用语音助手来请求与用户的通信会话以获得关于事故的新信息。例如,用户可以注意到通知,并可以授予许可以建立通信(例如,“怎么了?”)。语音助手进而可以问用户“您是否看到了在主大街(Main Street)和州大街(State Street)发生的交通事故?”如果用户确认自己已经看到交通事故,语音助手可以问一个或多个跟进问题,例如“看起来很糟吗?”,“道路被堵塞吗?”等,用户可以经由语音助手向导航应用160提供信息来对此做出响应,例如“不,看起来不严重”,“是,道路被堵塞”等。通过与用户建立通信会话,导航应用160可以获取有关交通事故的其他信息和/或更新的信息,并且在某些情况下可以经由网络152将信息传输到导航服务器150,以添加到导航数据库158中。来自更新的导航数据库158的数据可用于其他用户的其他电子设备中的导航应用。
作为另一个示例,触发事件可以是车辆速度的变化。例如,传感器120或140(其中的一个或多个可以例如是速度计或加速度计)可以配置为检测车辆是否已经减速了一定量(例如,每小时英里数(mph)的阈值,或之前速度的百分比,等等)。因此,导航应用160可以使用语音助手来请求与用户的通信会话,以获得关于减速原因的信息。注意,取决于场景,导航服务器150或导航应用160可以发起尝试向用户征求信息。用户可以注意到通知并可以授予许可以建立通信(例如,“继续”。)。语音助手可以进而问用户“您是因为交通不畅而减速吗?”例如,用户可以确认实际上减速的原因,或者可以提供其他原因。例如,用户可以说“不,我因为速度限制已更改而减速”,“不,我因为附近有警车而减速”,“不,我在减速,因为我不想错过出口”,“不,我在减速,因为这是建筑区域”,“不,我在减速,因为正在下雨”,等等。基于用户的回应,导航应用160可以问一个或多个后续问题,以获取有关减速原因的更多信息。因此,通过经由语音助手与用户建立通信会话,导航应用160可以获得关于车辆减速的可能原因的附加信息和/或更新的信息,其中一些可能影响其他用户,并且在某些情况下可经由网络152将该信息发送到导航服务器150,以添加到导航数据库158。来自更新的导航数据库158的数据进而可以被其他用户的其他电子设备的导航应用访问,并且可以提供更准确的导航信息。
现在参考图4,用于建立与导航有关的通信会话的示例方法400可以在在导航应用(例如导航应用160)中操作的语音助手中实现,或者作为单独的任务来实现。无论如何,方法400可以被实现为指令集,其存储在计算机可读存储器上并且可以在电子设备102或另一个合适的计算系统的一个或多个处理器上执行。尽管示例方法400主要集中在导航上,但是在一些实施例中,方法400的至少一些步骤也可以在其他合适的计算系统中使用。例如,语音助手可以在用户家中作为虚拟助手来操作,以向用户提供通知和/或向用户征求信息。
在框402,可以检测用于与导航应用的用户建立通信会话的触发事件。在某些情况下,检测触发事件可以包括确定有可用的要传达给用户的导航信息。例如,要传达给用户的导航信息可以是用户应该采取的即将到来的转弯。作为另一个示例,导航信息可以是关于附近交通拥堵或附近交通事故的信息。作为又一个示例,导航信息可以是更快的路线可用的指示。作为又一个示例,导航信息可以是关于附近地标的信息。
在语音助手作为虚拟助手在用户家中操作的实施例中,检测触发事件可以包括确定有可用的要传达给用户的与家庭有关的信息。例如,虚拟助手可以在其通勤路线上的通行量超过正常情况时通知用户,并建议更早的出发时间。作为另一个示例,虚拟助手可以通知用户该用户的日历上即将到来的会议已被取消。
附加地或替代地,检测触发事件可以包括确定来自用户的对信息的请求是可用的。例如,触发事件可以是指示车辆已减速的传感器数据,而来自用户的对信息的请求可以是用户当前是否在交通中驾驶的问题。作为另一示例,触发事件可以是确定车辆的位置在先前报告的交通事故阻塞道路附近,并且来自用户的相应的对信息的请求可以询问有关此先前报告的交通事故的更新信息,例如,该事故是否仍在阻塞道路。
在语音助手作为虚拟助手在用户家中操作的实施例中,触发事件可以是潜在的安全漏洞,例如,家中的门或窗户已经打开的指示,以及来自用户的相应的对信息的请求可以询问有关门或窗是否实际打开,和/或门或窗是否由用户打开(即是否有入侵者)的更新。
作为另一示例,当虚拟助手基于先前的用户请求来跟踪股票价格时,虚拟助手可以在股票达到用户正在等待的价格点时通知用户,并且可以向用户征求进一步的指示,关于用户是否应该购买和/或出售股票。作为另一示例,当虚拟助手在基于先前的用户请求执行后台操作(例如,完成在线订单)时,虚拟助手可以通知用户存在需要用户注意的更新或问题,并可以向用户征求进一步的指示,关于是否继续该订单、取消该订单等。
在框404,可以确定触发事件的重要性级别。在某些情况下,可以确定电子设备的当前地理上下文,且可以使用电子设备的当前地理上下文确定触发事件的重要性级别。可以使用一个或多个信号来建立电子设备的当前地理上下文,例如电子设备的当前位置、电子设备的当前速度、车内的收音机是否打开,等等。电子设备的当前位置和/或电子设备的当前速度可以代表设置有电子设备的车辆的当前位置和/或速度。
例如,可以确定电子设备的当前位置,且可以基于电子设备的当前位置确定触发事件的重要性级别。作为更具体的示例,如果触发事件与特定位置相关,则可以确定电子设备的当前位置和该特定位置之间的距离,且触发事件的重要性级别可以至少部分地基于所确定的距离。例如,当电子设备的当前位置和与触发事件相关的位置之间的距离较短时,触发事件的重要性级别可以更高或更大。例如,如果电子设备的位置靠近即将到来的出口或转弯,则重要性级别会更高,但是如果电子设备的位置离即将到来的出口或转弯较远,则重要性级别会较低。在语音助手作为虚拟助手在用户家中操作的实施例中,触发事件的重要性级别可以例如基于,要提供或征求的信息的时间敏感性,直到提供或征求的信息变得至关重要为止的剩余时间。
例如,可以确定电子设备的当前速度,且可以基于电子设备的当前速度确定触发事件的重要性级别。可以将电子设备的当前速度与阈值进行比较,并且确定触发事件的重要性级别可以基于电子设备的当前速度和阈值之间的比较。例如,当电子设备的当前速度大于阈值时,触发事件的重要性级别可以较高或较大。例如,如果电子设备的当前速度高于速度限制,相比电子设备的当前速度低于速度限制的情况,触发事件可以对应于高重要性。
在框406,可以根据所确定的重要性级别生成通知。在某些情况下,可以基于所确定的重要性级别确定提供通知的特定时间。通知可以在第一实例中具有第一属性在第二实例中具有第二属性。在一些实施例中,具有第一属性的通知可以包括第一音量的音频信号,而具有第二属性的通知可以包括第二音量的音频信号。在某些情况下,第一音量可以指示较高重要性的触发事件,而第二音量可以指示较低重要性的触发事件。作为一个示例,较高音量可以指示较高重要性的触发事件,而第二音量可以指示较低重要性的触发事件。
附加地或替代地,具有第一属性的通知可以包括具有第一声音模式的音频信号,而具有第二属性的通知可以包括具有第二声音模式的音频信号。声音模式可以包括蜂鸣声或一系列蜂鸣声、音调或一系列音调、短旋律等。在某些情况下,第一声音模式可以指示较高重要性的触发事件,而第二声音模式可以指示较低重要性的触发事件。作为一个示例,第一声音模式可以是一系列蜂鸣声,而第二声音模式可以是单个蜂鸣声。
仍然附加地或替代地,具有第一属性的通知可以包括第一视觉提示,而具有第二属性的通知可以包括第二视觉提示。视觉提示可以包括例如显示器、灯(例如连续、闪烁、闪光、颜色或各种颜色等)。在某些情况下,第一视觉提示可以指示较高重要性的触发事件,而第二视觉提示可以指示较低重要性的触发事件。作为一个示例,第一视觉提示可以是红灯,而第二视觉提示可以是绿灯。
另外,具有第一属性的通知可以包括第一振动信号,而具有第二属性的通知可以包括第二振动信号。振动信号例如可以是电子设备的较短或较长的振动,电子设备的一系列振动等。在某些情况下,第一振动信号可以指示较高重要性的触发事件,而第二振动信号可以指示较低重要性的触发事件。作为一个示例,第一振动信号可以是较长的振动持续时间,而第二振动信号可以是较短的振动持续时间。
在一些实施例中,具有第一属性的通知可以包括一种类型的信号(例如,音频信号、视觉信号和/或触觉信号),而具有第二属性的通知可以包括不同类型的信号。例如,具有第一属性的通知可以包括音频信号,而具有第二属性的通知可以包括视觉信号。在某些情况下,例如,音频信号可以指示具有较高重要性级别的触发事件,而视觉信号可以指示具有较低重要性级别的触发事件。
在框408处,可以作出是否已经从用户接收到许可以建立通信会话的查询。如果没有接收到许可,则流程不继续进行,并保持在框408处。在一些实施方式中,在框408处可以使用计时器来确定语音助手何时可以中止等待并终止方法400。计时器可以与要提供的信息的时间敏感性有关。例如,如果信息与下午4:30的会议有关,则等待可以在下午4:30后中止。
如果接收到许可,则流程前进到框410,并且可以建立包括来自用户的语音输入和导航应用的语音输出的通信会话。在一些实施例中,建立通信会话可以包括从用户接收语音输入并经由电子设备的用户接口提供语音输出。附加地或替代地,建立通信会话可以包括从用户接收语音输入并经由车辆的车载媒体单元提供语音输出。例如,电子设备可以经由短距离通信链路通信地耦接到车载媒体单元。
在一些实施方式中,建立通信会话可以包括经由消息传送或电子邮件将一些信息提供给用户。例如,语音助手可以将正在接近的地标通知用户,并使导航应用以弹出屏幕、视频、文本消息或电子邮件的形式提供详细内容,用户可以稍后学习这些内容,等等。
在某些情况下,来自用户的语音命令可以指示用户不希望将来建立特定类型的通信会话。例如,如果通信会话包括用户已超过速度限制的指示,而用户不希望接收此类指示,则用户可以请求禁止将来进行此类通信会话。因此,下次用户超过速度限制时,将不会生成任何通知,也不会建立通信会话。
附加的注意事项
以下附加的注意事项适用于前面的讨论。在整个说明书中,多个实例可以实现描述为单个实例的组件、操作或结构。尽管将一种或多种方法的各个操作图示和描述为单独的操作,但是可以同时执行一个或多个单独的操作,并且不需要按照所示顺序执行这些操作。在示例配置中呈现为单独的组件的结构和功能可以实现为组合的结构或组件。类似地,呈现为单个组件的结构和功能可以实现为单独的组件。这些和其他变型、修改、添加和改进落入本公开的主题的范围内。
另外,本文将某些实施例描述为包括逻辑或多个组件、模块或机制。模块可以构成软件模块(例如,存储在机器可读介质中的代码)或硬件模块。硬件模块是能够执行某些操作的有形单元,并且可以以某种方式配置或布置。在示例实施例中,一个或多计算机系统(例如独立的、客户端或服务器计算机系统)或计算机系统的一个或多个硬件模块(例如,处理器或一组处理器)可以由软件(例如,应用程序或应用程序部分)配置为操作为执行本文所述的某些操作的硬件模块。
例如,硬件模块可以包括永久配置的专用电路或逻辑(例如,作为专用处理器,比如现场可编程门阵列(FPGA)或专用集成电路(ASIC))以执行某些操作。硬件模块还可以包括可编程逻辑或电路(例如,包含在通用处理器或其他可编程处理器中),其由软件临时配置以执行某些操作。应当理解的是,在成本和时间方面的考虑可能决定在专用且永久配置的电路中、或在临时配置的电路(例如,由软件配置)中实现硬件模块的决定。
因此,术语“硬件”应理解为包含有形实体,是经过物理构造、永久配置(例如,硬接线)或临时配置(例如,编程)以某种方式操作或执行本文描述的某些操作的实体。考虑到其中硬件模块被临时配置(例如,编程)的实施例,每个硬件模块不需要在任何一个实例上及时配置或实例化。例如,在硬件模块包括使用软件配置的通用处理器的情况下,可以将通用处理器在不同时间配置为相应的不同的硬件模块。例如,可以相应地在处理器上配置软件,以在一个时间实例构成特定的硬件模块,并在不同的时间实例构成不同的硬件模块。
硬件和软件模块可以向其他硬件提供信息,或从其他硬件和/或软件模块接收信息。因此,所描述的硬件模块可以被认为是通信耦接的。如果同时存在多个这样的硬件模块,则可以通过连接硬件或软件模块的信号传输(例如,通过适当的电路和总线)来实现通信。在其中在不同时间配置或实例化多个硬件或软件模块的实施例中,例如,可以通过在多个硬件或软件模块可以访问的存储器结构中存储和取回信息来实现这些硬件或软件模块之间的通信。例如,一个硬件或软件模块可以执行操作并将该操作的输出存储在与之通信耦接的存储器装置中。然后,另一硬件或软件模块可以在以后的时间访问存储器装置以取回和处理所存储的输出。硬件或软件模块还可以启动与输入或输出装置的通信,并且可以在资源(例如,信息的集合)上操作。
本文处描述的示例方法的各种操作可以至少部分地由临时配置(例如,通过软件)或永久配置为执行相关操作的一个或多个处理器执行。无论是临时配置还是永久配置,此类处理器都可以构成处理器实现的模块,这些模块操作为执行一个或多个操作或功能。在一些示例实施例中,本文所指的模块可以包括处理器实现的模块。
类似地,本文描述的方法或例程可以至少部分地由处理器实现。例如,方法的至少一些操作可以由一个或多个处理器或者处理器实现的硬件模块执行。某些操作的性能可能会分布在一个或多个处理器之间,不仅驻留在单个计算机中,而是会部署在多个计算机上。在某些示例实施例中,一个或多个处理器可以位于单个位置(例如,在家庭环境、办公室环境中或作为服务器场),而在其他实施例中,处理器可以分布在多个位置。
一个或多个处理器也可以在“云计算”环境中或作为SaaS操作来支持相关操作的性能。例如,如上所述,至少一些操作可以由一组计算机(例如包括处理器的机器的示例)执行,这些操作可以经由网络(例如,互联网)并经由一个或多个适当的接口(例如,API)来访问。
某些操作的性能可能会分布在一个或多个处理器之间,不仅驻留在单个计算机中,而是会部署在多个计算机上。在一些示例实施例中,一个或多个处理器或处理器实现的模块可以位于单个地理位置(例如,在家庭环境、办公室环境或服务器场中)。在其他示例实施例中,一个或多个处理器或处理器实现的模块可以分布在多个地理位置。
本说明书的某些部分以算法或对存储在机器存储器(例如计算机存储器)中的位或二进制数字信号的数据的操作的符号表示形式表示。这些算法或符号表示是数据处理领域的普通技术人员用来将其工作的实质传达给本领域其他技术人员的技术的示例。如本文所使用的,“算法”或“例程”是导致期望结果的操作或类似处理的自洽序列。在这种情况下,算法、例程和操作涉及对物理量的物理操纵。通常,但并非必须,此类量可以采取能够通过机器存储、访问、传输、组合、比较或以其他方式操纵的电、磁或光信号的形式。主要出于通常用法的原因,有时会方便地使用诸如“数据”、“内容”、“位”、“值”、“元素”、“符号”、“字符”、“项”、“数字”,“数目”等之类的词来指代此类信号。但是,这些词仅是方便的标签,并且应与适当的物理量相关联。
除非另有明确说明,否则本文中使用“处理”、“计算”、“预测”、“确定”、“呈现”、“显示”等词语进行的讨论可表示机器(例如,计算机)的动作或过程,其在一个或多个接收、存储、传输或显示信息的存储器(例如,易失性存储器、非易失性存储器或其组合)、寄存器或其他机器组件中操纵或转换表示为物理(例如,电子、磁性或光学)量的数据。
如本文所使用的,对“一个实施例”或“实施例”的任何引用表示结合该实施例描述的特定元件、特征、结构或特性包括在至少一个实施例中。说明书中各个地方出现的短语“在一个实施例中”不一定全都指同一实施例。
可以使用表述“耦接”和“连接”及其派生词来描述一些实施例。例如,可以使用术语“耦接”来描述一些实施例,以表示两个或更多个元件直接物理或电接触。但是,术语“耦接”也可以表示两个或多个元素彼此不直接接触,但仍然彼此协作或交互。实施例不限于此上下文。
如本文所使用的,术语“包括”,“包含”、“包括有”、“包含有”、“具有”,“含有”或其任何其他变型旨在涵盖非排他性的包含。例如,包括元件列表的过程、方法、制品或设备不一定仅限于那些元素,而可以包括未明确列出或这些过程、方法,制品或设备固有的其他元素。此外,除非有相反的明确说明,否则“或”是指包含性的“或”而不是排他性的“或”。例如,条件A或B满足以下任一条件:A为真(或存在),B为假(或不存在);A为假(或不存在),B为真(或存在);以及A和B都为真(或存在)。
另外,使用“一个”或“一种”来描述本文实施例的元件和组件。这样做仅是为了方便并给出一般性的描述。该描述应该被理解为包括一个或至少一个,并且单数也包括复数,除非很明显地意味着另外的意思。
在阅读了本公开之后,本领域的技术人员将理解通过本文公开的原理用于建立与导航有关的通信会话的另外的替代结构和功能设计。因此,尽管已经图示和描述了特定的实施例和应用,但是应当理解,所公开的实施例不限于本文所公开的精确构造和组件。在不脱离所附权利要求书所限定的精神和范围的情况下,可以对本文公开的方法和设备的布置、操作和细节进行对本领域技术人员而言显而易见的各种修改、改变和变化。

Claims (19)

1.一种用于建立用户和电子设备之间的与导航相关的虚拟语音助手通信会话的方法,所述虚拟语音助手通信会话包括由所述电子设备输出的语音和由所述用户输入的语音,所述电子设备配置为从数据源存取信息,所述方法包括:
由所述电子设备中的一个或多个处理器检测用于与导航应用的用户建立虚拟语音助手通信会话的触发事件,其中检测所述触发事件包括由所述电子设备标识来自所述数据源的当前期望通信给所述用户的信息,或来自所述用户的要通信给所述数据源的信息;
由所述一个或多个处理器确定所述信息的重要性级别;
由所述一个或多个处理器根据所确定的重要性级别生成通知,包括生成在第一实例中具有第一属性的通知和生成在第二实例中具有第二属性的通知;
在生成所述通知之后,由所述一个或多个处理器从所述用户接收许可以建立所述虚拟语音助手通信会话;以及
响应于接收到所述许可,在所述电子设备和所述用户之间建立所述虚拟语音助手通信会话。
2.如权利要求1所述的方法,其中所述数据源包括远程服务器。
3.如权利要求2所述的方法,其中所述数据源包括所述电子设备的存储器。
4.如权利要求1所述的方法,其中所述电子设备配置为周期性地从所述数据源存取信息。
5.如权利要求1所述的方法,其中生成具有所述第一属性的通知包括生成具有第一音量的音频信号,且生成具有所述第二属性的通知包括生成具有第二音量的音频信号。
6.如权利要求1所述的方法,其中生成具有所述第一属性的通知包括生成具有第一声音模式的音频信号,且生成具有所述第二属性的通知包括生成具有第二声音模式的音频信号。
7.如权利要求1所述的方法,其中生成具有所述第一属性的通知包括生成第一视觉提示,且生成具有所述第二属性的通知包括生成第二视觉提示。
8.如权利要求1所述的方法,其中生成具有所述第一属性的通知包括生成第一振动信号,且生成具有所述第二属性的通知包括生成第二振动信号。
9.如权利要求1所述的方法,其中生成具有所述第一属性的通知包括生成以下中的一个:(i)音频信号,(ii)视觉信号,或(iii)触觉信号,且生成具有所述第二属性的通知包括生成信号(i)–(iii)中的不同的一个。
10.如权利要求1所述的方法,其中根据所确定的重要性级别生成所述通知包括根据所确定的重要性级别来确定提供所述通知的时间。
11.如权利要求1所述的方法,其中确定所述信息的重要性级别包括:
确定所述电子设备的当前地理上下文,以及
使用所述电子设备的所确定的当前地理上下文来确定所述信息的重要性级别。
12.如权利要求11所述的方法,其中确定所述电子设备的当前地理上下文包括确定所述电子设备的当前位置,且其中确定所述信息的重要性级别包括确定所述电子设备的当前位置和与所述信息相关的位置之间的距离。
13.如权利要求11所述的方法,其中确定所述电子设备的当前地理上下文包括确定所述电子设备的当前速度,且其中确定所述信息的重要性级别包括将所述电子设备的所确定的当前速度与阈值进行比较。
14.如权利要求1中所述的方法,其中建立所述虚拟语音助手通信会话包括经由消息传送或电子邮件将信息提供给所述用户。
15.如权利要求1中所述的方法,其中检测所述触发事件包括确定有可用的要传达给所述用户的导航信息。
16.如权利要求1中所述的方法,其中检测所述触发事件包括确定来自所述用户的对信息的请求是可用的,其中所述对信息的请求与交通状况相关。
17.如权利要求1中所述的方法,其中建立所述虚拟语音助手通信会话包括从所述用户接收语音输入并经由所述电子设备的用户接口提供语音输出。
18.如权利要求1-17中任一项所述的方法,其中建立所述虚拟语音助手通信会话包括以下中的至少一个:从所述用户接收语音输入和经由车辆的车载媒体单元提供语音输出,其中所述电子设备经由短距离通信链路通信地耦接到所述车辆的车载媒体单元。
19.一种电子设备,包括:一个或多个处理器,和其上存储有指令的非暂时性计算机可读存储器,当所述指令由所述一个或多个处理器执行时,使所述电子设备实现如权利要求1-18中任一项所述的方法。
CN201780096094.9A 2017-09-12 2017-09-12 免提助手请求的通信的系统和方法 Active CN111247393B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/US2017/051167 WO2019054988A1 (en) 2017-09-12 2017-09-12 SYSTEMS AND METHODS FOR HANDS-FREE COMMUNICATION REQUESTED BY AN ASSISANT

Publications (2)

Publication Number Publication Date
CN111247393A CN111247393A (zh) 2020-06-05
CN111247393B true CN111247393B (zh) 2024-04-23

Family

ID=59974862

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780096094.9A Active CN111247393B (zh) 2017-09-12 2017-09-12 免提助手请求的通信的系统和方法

Country Status (3)

Country Link
US (2) US11145203B2 (zh)
CN (1) CN111247393B (zh)
WO (1) WO2019054988A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9633547B2 (en) 2014-05-20 2017-04-25 Ooma, Inc. Security monitoring and control
US10553098B2 (en) 2014-05-20 2020-02-04 Ooma, Inc. Appliance device integration with alarm systems
US11330100B2 (en) * 2014-07-09 2022-05-10 Ooma, Inc. Server based intelligent personal assistant services
US10009286B2 (en) 2015-05-08 2018-06-26 Ooma, Inc. Communications hub
US10302446B2 (en) * 2016-06-12 2019-05-28 Apple Inc. Context driven navigation presentation
WO2019054988A1 (en) * 2017-09-12 2019-03-21 Google Llc SYSTEMS AND METHODS FOR HANDS-FREE COMMUNICATION REQUESTED BY AN ASSISANT
JP7276096B2 (ja) * 2019-11-22 2023-05-18 トヨタ自動車株式会社 情報処理装置、情報処理方法、およびシステム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009216437A (ja) * 2008-03-07 2009-09-24 Denso Corp 車載用ナビゲーション装置及びプログラム
JP2012073076A (ja) * 2010-09-28 2012-04-12 Sanyo Electric Co Ltd 車載用電子機器
EP2975852A1 (en) * 2013-03-13 2016-01-20 Panasonic Intellectual Property Corporation of America Spot notification method, spot notification device, and spot notification device program

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6823184B1 (en) 2000-09-08 2004-11-23 Fuji Xerox Co., Ltd. Personal digital assistant for generating conversation utterances to a remote listener in response to a quiet selection
US7287056B2 (en) * 2001-09-28 2007-10-23 Microsoft Corporation Dispatching notification to a device based on the current context of a user with the device
US9008628B2 (en) * 2008-05-19 2015-04-14 Tbm, Llc Interactive voice access and notification system
US8126435B2 (en) * 2008-05-30 2012-02-28 Hewlett-Packard Development Company, L.P. Techniques to manage vehicle communications
TWI382157B (zh) * 2008-09-26 2013-01-11 Mitac Int Corp 具有會話系統之可攜式導航裝置及其處理方法
US8583373B2 (en) * 2008-11-17 2013-11-12 At&T Services, Inc. Methods and apparatuses for providing enhanced navigation services
US9164175B2 (en) * 2009-02-27 2015-10-20 Blackberry Limited Wireless communications system providing notification-based mobile device navigation features and related methods
US8660788B2 (en) * 2009-12-09 2014-02-25 Telenav, Inc. Navigation system with audio and method of operation thereof
US20200357074A1 (en) * 2012-11-27 2020-11-12 Metropolitan Life Insurance Co. Systems and methods for providing group insurance
US10387961B1 (en) * 2013-03-08 2019-08-20 United Services Automobile Association (Usaa) Intelligent methods of inspection for property and casualty insurance claims
US10360343B2 (en) * 2013-03-15 2019-07-23 Adityo Prakash Facilitating integrated behavioral support through personalized adaptive data collection
US9719797B2 (en) 2013-03-15 2017-08-01 Apple Inc. Voice and touch user interface
US9462115B2 (en) * 2013-04-04 2016-10-04 James S. Rand Unified communications system and method
US9324120B2 (en) * 2013-06-07 2016-04-26 Emergency University, Inc. Method and apparatus for emergency response notification
US9807559B2 (en) 2014-06-25 2017-10-31 Microsoft Technology Licensing, Llc Leveraging user signals for improved interactions with digital personal assistant
US11023872B2 (en) * 2014-08-29 2021-06-01 My Opine Llc Systems for collecting retailer-specific data
US9509820B2 (en) * 2014-12-03 2016-11-29 Harman International Industries, Incorporated Methods and systems for controlling in-vehicle speakers
US11374888B2 (en) * 2015-09-25 2022-06-28 Microsoft Technology Licensing, Llc User-defined notification templates
US11170445B2 (en) * 2015-12-16 2021-11-09 Alegeus Technologies, Llc Systems and methods for allocating resources using information technology infrastructure
US10824932B2 (en) * 2016-04-29 2020-11-03 Microsoft Technology Licensing, Llc Context-aware digital personal assistant supporting multiple accounts
GB201613138D0 (en) * 2016-07-29 2016-09-14 Unifai Holdings Ltd Computer vision systems
US10304463B2 (en) * 2016-10-03 2019-05-28 Google Llc Multi-user personalization at a voice interface device
US10719757B2 (en) * 2016-12-02 2020-07-21 Microsoft Technology Licensing, Llc System for interpreting and managing imprecise temporal expressions
WO2019054988A1 (en) * 2017-09-12 2019-03-21 Google Llc SYSTEMS AND METHODS FOR HANDS-FREE COMMUNICATION REQUESTED BY AN ASSISANT
US20190130707A1 (en) * 2017-10-31 2019-05-02 Ecolink Intelligent Technology, Inc. Event notification using an intelligent digital assistant
US10599469B2 (en) * 2018-01-30 2020-03-24 Motorola Mobility Llc Methods to present the context of virtual assistant conversation
US10735597B1 (en) * 2018-03-23 2020-08-04 Amazon Technologies, Inc. Selecting user device during communications session
US11532007B2 (en) * 2018-08-16 2022-12-20 Frank S. Maggio Systems and methods for implementing user-responsive reactive advertising via voice interactive input/output devices

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009216437A (ja) * 2008-03-07 2009-09-24 Denso Corp 車載用ナビゲーション装置及びプログラム
JP2012073076A (ja) * 2010-09-28 2012-04-12 Sanyo Electric Co Ltd 車載用電子機器
EP2975852A1 (en) * 2013-03-13 2016-01-20 Panasonic Intellectual Property Corporation of America Spot notification method, spot notification device, and spot notification device program

Also Published As

Publication number Publication date
US11145203B2 (en) 2021-10-12
WO2019054988A1 (en) 2019-03-21
CN111247393A (zh) 2020-06-05
US20200211387A1 (en) 2020-07-02
US20210407289A1 (en) 2021-12-30

Similar Documents

Publication Publication Date Title
CN111247393B (zh) 免提助手请求的通信的系统和方法
CA3035259C (en) Identifying matched requestors and providers
KR102341810B1 (ko) 위치-의존적 운전 제한을 피하기 위한 시스템 및 방법
US10423292B2 (en) Managing messages in vehicles
US9228851B2 (en) Display of estimated time to arrival at upcoming personalized route waypoints
US20130324160A1 (en) Managing alerts based on context
CN110785630B (zh) 用于选择poi与导航操纵相关联的系统和方法
JP2013171502A (ja) 警告装置、警告方法
JP2004294429A (ja) 情報提示装置および情報提示方法
JP7065897B2 (ja) 環状交差点通知装置、環状交差点通知システム及び環状交差点通知方法
US20180266835A1 (en) Navigation system, user terminal, and navigation method
JP2016169976A (ja) 案内態様決定システム、案内端末、案内態様決定装置、案内態様決定方法、及び案内態様決定プログラム
JP2008026241A (ja) 車載用ナビゲーション装置
JP2017019349A (ja) 車載機器、情報システムおよび出力制御方法
CN113739816A (zh) 车辆导航控制方法、装置及车辆
JP2017009403A (ja) ナビゲーション装置および走行予定経路の設定方法
JP2020079996A (ja) 車両の制御装置、入力装置及び入出力装置
JP2012127708A (ja) ナビゲーション装置とその経路探索方法
JP5831936B2 (ja) 車載機器システム及び車載機器
JP2011237286A (ja) ナビゲーション装置および施設表示方法
JP2014085844A (ja) 車載システム
JP2012037403A (ja) ナビゲーション装置とそのナビゲーション方法
JP2013088236A (ja) 情報端末、プログラムおよび運転支援方法
JP2015114877A (ja) 検索支援装置、通信システム、検索支援方法及びプログラム
JP2012128730A (ja) 車載装置、情報収集システムおよび情報収集装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant