CN106662461A - 向驾驶员提供方向提示的方法和装置 - Google Patents

向驾驶员提供方向提示的方法和装置 Download PDF

Info

Publication number
CN106662461A
CN106662461A CN201580046927.1A CN201580046927A CN106662461A CN 106662461 A CN106662461 A CN 106662461A CN 201580046927 A CN201580046927 A CN 201580046927A CN 106662461 A CN106662461 A CN 106662461A
Authority
CN
China
Prior art keywords
vehicle
event
signal
user
passenger compartment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201580046927.1A
Other languages
English (en)
Inventor
N·戈尔斯
J·斯皮拉
W·F·加农
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Serenes operations
Original Assignee
Nuance Communications Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nuance Communications Inc filed Critical Nuance Communications Inc
Publication of CN106662461A publication Critical patent/CN106662461A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13—Receivers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3661—Guidance output on an external device, e.g. car radio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/13—Acoustic transducers and sound field adaptation in vehicles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Mechanical Engineering (AREA)

Abstract

方法和装置用于：针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与所述路线中的即将到来的事件的方向相对应的位置处激活视觉指示器；以及生成音频信号，以在所述车辆乘客舱中的与所述即将到来的事件的所述方向相对应的位置处激活声音源，以用于向用户提供空间信息。在一个实施例中，在接收到用户已经根据所述路线导航所述事件的信息时，可以生成验证信号以激活确认指示器。

Description

向驾驶员提供方向提示的方法和装置
背景技术
如本领域中公知的，很大百分比的人对确定左右方向有困难。大约百分之十五的北美人口在区分左右方向方面经历了困难，这是被称为“左右混淆”的状况。经历左右混淆的人通常需要片刻以便确定左/右方向。在用于车辆导航的GPS系统中，例如当驾驶员被指导到“向左转”时，这可能出现问题。驾驶员的延迟和混淆可能导致交通事故等等。
发明内容
本发明的实施例提供了一种用于减轻一些人在区分左右方向方面具有的困难的方式。在实施例中，GPS系统提供了用于增强GPS视觉和音频信号以利用横向刺激响应兼容性和/或监控驾驶员对指令的响应的功能。如果驾驶员不遵循指令，则系统可以作出反应并告知驾驶员动作与遵循路线不一致。
在本发明的一个方面中，一种方法包括：针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与路线中即将到来的事件的方向相对应的位置处激活视觉指示器；以及生成音频信号，以在车辆乘客舱中的与即将到来的事件的方向相对应的位置处激活声音源，以向用户提供空间信息。
方法还可以包括以下特征中的一个或多个：在接收到用户已经根据路线对事件进行导航的信息时，生成验证信号以激活确认指示器，GPS系统被配置用于车辆以及用于向驾驶车辆的用户提供路线指令，视觉指示器包括箭头，视觉提示信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的视觉指示器，音频信号适于在即将到来的事件包括左转弯时激活车辆乘客舱的左侧的音频源，音频源包括扬声器并且音频信号包括用于生成来自扬声器的特定声音的信号，音频信号包括用于向左转弯的口语指令并且扬声器位于车辆乘客舱的左侧上，验证信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的确认指示器，验证信号适于激活视觉显示，验证信号适于激活声音发生器，和/或如果事件未根据路线被导航则生成警告信号。
在本发明的另一个方面中，一种制品包括：非暂时性计算机可读介质，其具有存储的指令，该指令使得机器能够：针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与路线中即将到来的事件的方向相对应的位置处激活视觉指示器；以及生成音频信号，以在车辆乘客舱中的与即将到来的事件的方向相对应的位置处激活声音源，以向用户提供空间信息。
制品还可以包括以下特征中的一个或多个：在接收到用户已经根据路线对事件进行导航的信息时，生成验证信号以激活确认指示器，GPS系统被配置用于车辆以及用于向驾驶车辆的用户提供路线指令，视觉指示器包括箭头，视觉提示信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的视觉指示器，音频信号适于在即将到来的事件包括左转弯时激活车辆乘客舱的左侧的音频源，音频源包括扬声器并且音频信号包括用于生成来自扬声器的特定声音的信号，音频信号包括用于向左转弯的口语指令并且扬声器位于车辆乘客舱的左侧上，验证信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的确认指示器，验证信号适于激活视觉显示，验证信号适于激活声音发生器，和/或如果事件未根据路线被导航则生成警告信号。
在本发明的另一个方面中，一种系统包括：存储器和处理器，该处理器被配置为：针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与路线中即将到来的事件的方向相对应的位置处激活视觉指示器；以及生成音频信号，以在车辆乘客舱中的与即将到来的事件的方向相对应的位置处激活声音源，以向用户提供空间信息。
系统还可以包括被配置为提供以下特征中的一个或多个特征的处理器：在接收到用户已经根据路线对事件进行导航的信息时，生成验证信号以激活确认指示器，GPS系统被配置用于车辆以及用于向驾驶车辆的用户提供路线指令，视觉指示器包括箭头，视觉提示信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的视觉指示器，音频信号适于在即将到来的事件包括左转弯时激活车辆乘客舱的左侧的音频源，音频源包括扬声器并且音频信号包括用于生成来自扬声器的特定声音的信号，音频信号包括用于向左转弯的口语指令并且扬声器位于车辆乘客舱的左侧上，验证信号适于在即将到来的事件包括左转弯时激活位于车辆乘客舱的左侧上的确认指示器，验证信号适于激活视觉显示，验证信号适于激活声音发生器，和/或如果事件未根据路线被导航则生成警告信号。
附图说明
根据对附图的以下描述，可以更充分地理解本发明的前述特征以及发明本身，在附图中：
图1是用于提供方向提示的导航系统的示意图表示；
图2是示出了用于提供方向提示的GPS系统的另外的信息的示意图表示；
图3是示出了用于生成方向提示的一系列步骤的流程图；
图4是驾驶员注意力监控系统的示意图表示；
图4A是示出了驾驶员注意力监控系统的另外的细节的示意图表示；
图5是驾驶员注意力处理的流程图；
图6是驾驶员低分心系统的示意图表示；
图7是驾驶员低分心处理的流程图；
图8是道路标志和危险监控系统的示意图表示；以及
图9是可以执行本文中描述的处理的至少一部分的例示性计算机的示意性表示。
具体实施方式
图1示出了GPS(全球定位卫星)系统100，其可以生成至用户输入的目的地的路线并向车辆的驾驶员提供逐弯导航(turn-by-turn)指令以到达目的地。GPS系统100可以临时地或永久地安装在车辆的车舱102中，例如在驾驶员的视野内。
在一个实施例中，GPS系统100耦合到左视觉指示器104和右视觉指示器106。在一个特定实施例中，视觉指示器104、106可以被提供在GPS的屏幕上。在另一个实施例中，视觉指示器104、106与车辆的左/右转向灯或闪光灯对应。左视觉指示器104可以具有从驾驶员的视角指向左边的箭头形状。类似地，右视觉指示器106可以包括右箭头。GPS系统可以在路线规划中的左转弯之前激活(例如，照亮)左箭头一段时间。例如，在GPS生成“前方200码左转”的音频消息的时候，左视觉指示器104可以被照亮。
在实施例中，GPS系统100耦合到左音频源108和右音频源110。左音频源108和右音频源110可以被提供为例如扬声器。左扬声器108可以被激活用于左转弯指令并且右扬声器110可以被激活用于右转弯指令以向驾驶员提供空间信息。
在实施例中，视觉指示器104、106和音频指示器108、110可以被GPS系统控制以向驾驶员提供另外的信息。在一个实施例中，左视觉指示器104可以以与距左转弯的位置的距离相对应地控制亮度的方式被激活。在一个实施例中，GPS系统可以在与音频指令相对应的时间短暂地激活左视觉指示器104。左视觉指示器104随后可以以增加的亮度进行闪烁，直到转弯位置。类似地，左扬声器108可以生成左转弯指令并发出声音或一连串声音，以向驾驶员提供持续的方向信息。
应当理解，视觉和音频指示器可以形成车辆中的标准装备的部分或者可以是便携式GPS系统的部件。对于嵌入到车辆中的系统，左视觉指示器104可以对应于汽车中的左转向灯。将意识到，左转向灯向驾驶员以及向具有GPS系统100的驾驶员后方的车辆的驾驶员提供视觉提示。
图2示出了GPS系统200，其具有耦合到路线规划器204的用户界面202，以使得用户能够输入目的地信息，在这之后，GPS系统提供至目的地的路线。GPS系统200还包括提示发生器模块206以向驾驶员提供与指令的方向相对应的视觉和/或音频(空间)信息。例如，提示发生器206可以为图1中的左和右视觉指示器104、106以及左和右音频源108、110提供控制信号。
在其它实施例中，可以由视觉和/或空间指示器提供各种路线相关的信息。例如，可以使用路线上的兴趣点自身的那侧上的扬声器来宣布兴趣点，例如在右扬声器上生成口语的“在右边即将到星巴克”。
在一个实施例中，视觉/音频指示器可以根据路线和/或未根据转弯指令执行转弯的指示而为用户提供对转弯的验证。例如，用于右箭头的验证闪烁信号可以在路线中的右转弯期间或之后生成。对于从路线离开，可以生成音频信号以告知用户偏离。例如，如果似乎用户未遵循转弯指令，则驾驶员可以接收到可听警告以及转弯指令的重复。在实施例中，警告音量和/或音调可以取决于情况而变化。
总体上，驾驶员响应可以以各种方式被监控。例如，如果驾驶员激活用于车辆的方向信号，则这可以被集成GPS系统监控。也就是说，可以从GPS获得反馈。由于后者正在收集关于当前位置的信息，因此可以确定汽车是在例如进行左转弯还是右转弯，这可与用于验证驾驶员在按照给定指令转弯。在其它系统中，例如仪表板上的箭头可以被例如可穿戴式计算机(例如，GOOGLE GLASS)解码。在一个实施例中，由可穿戴式计算机在用户显示器上提供箭头。在其它实施例中，可以检测并评估激活的方向信号的噪声。
应当理解，可以以各种方式提供和定制音频提示。例如，对于90度转弯，系统可以使相反的扬声器的音量减小选定量，例如，75％。对于不那么激烈的转弯，相反的扬声器的音量可以减小大约50％。此外，口语方向可以动态地定位在三维空间内。此外，相位提示可以与音量一起使用。也就是说，可以使用某些音频集中技术以参照目的地在驾驶员的物理环境中何处来空间地定位音频反馈，例如TTS提示等等。换句话说，驾驶员的声场与目的地的地理位置匹配。这可以例如通过调节音量、摇动、和/或使音频反馈移相来实现。在其它实施例中，三维空间用于方向定位。
通过向驾驶员提供用于路线指令的视觉和/或空间提示，实现了对GPS指令的较快速且更可靠的响应。此外，提供对路线遵守的用户反馈可以增加具有方向混淆的驾驶员的用户信心并为每个人提高道路安全性。
图3示出了用于针对GPS导航系统生成方向提示信号的例示性步骤序列。在步骤300中，从用户接收目的地信息，并且在步骤302中，确定逐弯导航路线以到达目的地。在步骤304中，在距事件选定距离的位置处检测到路线中的第一事件。例如，事件可以包括左转弯。在步骤306中，生成视觉提示信号以激活与事件的方向对应的视觉指示器，例如左箭头。在步骤308中，生成音频提示信号以激活与事件的方向对应的音频源，例如左扬声器。
在本发明的另一个方面中，一种系统提供了对驾驶员视觉注意力的监控。如公知的，分心驾驶是机动车事故的主要原因。通过增加驾驶员对汽车和道路的注意力，提高了道路安全性。
图4示出了用于监控车辆驾驶员的视觉注意力以及生成信号以通知驾驶员低注意力的系统400。系统400包括驾驶员监控模块402，其可以包括眼睛追踪系统404和/或头部追踪系统406。眼睛追踪系统404监控并测量驾驶员眼睛凝视方向并向驾驶员监控系统402提供信息。注意力模型模块408基于各种参数来创建实时驾驶员注意力模型，如下面更充分描述的。信号发生器模块410可以将测量到的信息与参考模型408进行比较并生成对驾驶员的警告。系统400可以包括驾驶员界面模块412，以使得用户能够输入偏好、辨识信息、导航信息等。例如，如果驾驶员意识到疲倦的感觉，则驾驶员可以选择对警告生成的激烈水平的偏好。在一个实施例中，驾驶员可以选择警告的优选形式，例如音频、视觉，例如闪烁LED、座椅震动等。在一个实施例中，系统400包括奖励模块414以激励专心驾驶。
头部追踪系统406监控并测量驾驶员的头部的位置并向驾驶员监控模块402提供信息。在例示性的实施例中，眼睛追踪系统404和头部追踪系统406位于车辆仪表板上并使用视频分析来监控驾驶员的眼睛和头部信息。在实施例中，除了眼睛和头部定位，还检测打哈欠和其他驾驶员行为。在一个实施例中，监控生理信号，例如眨眼、讲话、呼吸率和心率。将理解，眼睛和头部追踪系统在本领域中是公知的。
在一个实施例中，注意力模块408包括辨识信息和统计信息。可以使用面部识别技术来计算的辨识信息用于基于驾驶员身份来选择特定注意力模型。统计信息可以包括来自眼睛和头部追踪模块404、406的持续更新的驾驶员眼睛凝视方向和头部旋转信息。
在驾驶时，驾驶员注意力模块408例如与针对正在驾驶的特定车辆的参考注意力模块持续进行比较。在一个实施例中，参考模块定义车辆的特定区域。信号发生器模块410可以将测量到的信息与参考模型区域进行比较并生成警报信号，例如音频警告。例如，如果观察到驾驶员在所选择的时间间隔内至少一次看向车辆的模型区域的方向，则可以确定驾驶员正在注意道路，例如，驾驶员注意力在一个或多个阈值以上。如果确定驾驶员不专心，则信号发生器模块410可以生成警报信号。在一个实施例中，参考模型408可以包括用于眼睛凝视、头部旋转角度、凝视持续时间等的参数。例示性的参数包括水平眼睛位置、水平眼睛速度、垂直眼睛位置、垂直眼睛速度、眼睛凝视持续时间、眼睛凝视角度、眼睛凝视固定距离、眨眼持续时间、头部旋转角度、头部旋转速度、和头部位置持续时间。
例示性的“注意力区域”可以包括前挡风玻璃的特定区/边界、仪表群、娱乐信息节目群/中控台、侧视镜、盲点、后视镜等。应当理解的是，可以使用各种各样的信息来确定驾驶员注意力。例如，在高速公路上的连续车辆加速和减速例如可以基于车辆里程表和道路信息来指示缺乏注意力。系统还可以基于看向前挡风玻璃所花费的持续时间来确定驾驶员注意力。基于连续分析，信号发生器模块402可以在任何给定时刻测量不看向前挡风玻璃所花费的时间量并在适当时生成警报。
要理解，在检测到驾驶员注意力已经降到至少一个阈值以下时，可以由信号发生器410生成各种各样的警报和信号。例如，在检测到过多哈欠(例如，在X分钟内多于N个哈欠)时，信号发生器410/驾驶员界面412可以触发向用户提供可听的选项列表的“聊天机器人”，例如，欢快的音乐频道、有旅馆的最近出口、最近休息区、有咖啡提供的最近位置、或其它位置感知选项。
奖励模块414可以提供一系列奖励来激励和加强关于较好的注意力的积极驾驶员行为。在一个实施例中，奖励模块414可以指导驾驶员界面412为驾驶员生成文字到语音(TTS)消息，例如“感谢您注意道路”。在另一个实施例中，奖励模块414可以存储驾驶员行为，从而可以生成折扣券形式的奖励，例如车险折扣。
图4A示出了用于监控驾驶员的视觉注意力的系统450的另外的细节。数据获取系统452包括眼睛追踪系统454和头部追踪系统456。分析系统458包括特征检测模块460，其接收注意力信息并向估计模块462和生物信息模块464输出信息，生物信息模块464可以包括例如面部识别以辨识驾驶员或确认驾驶员身份。
比较模块466包括注意力监控模块468以将所获取的信息与车辆参考注意力模型470进行比较。在一个实施例中，车辆参考注意力模型470包括将视线坐标(x，y，z)的线映射到车辆区(例如，前挡风玻璃)，以及将车辆区映射到时间限制，例如对中央显示器的三秒最大凝视时间。要理解，比较可以包括额外的参数，例如眨眼持续时间、打哈欠频率等，以满足特定应用的需要。
警告系统472可以为用户生成具有一系列形式的各种各样的警告。在一个实施例中，可以在中央显示器474、集群显示器476、镜面显示器478、和音频系统480中的一个或多个中生成警告信息。
奖励系统482可以接收分析子系统458和比较子系统466的输出并将用户信息存储在用户注意力模型数据库484中。在一个实施例中，用户注意力模型数据库可以生成奖励，该奖励可以被传递到例如智能手机。用户注意力模型数据库可以被实时更新并可以在稍后进行分析。
可以使数据库对用户以及第三方可用以进行分析。这通过将数据库从系统(图4)传递到例如智能手机、或实体(例如保险公司)处的服务器来促成。
图5示出了用于监控驾驶员注意力的示例性步骤序列。在步骤500中，接收驾驶员注意力，例如眼睛和头部追踪系统。在步骤502中，可以将驾驶员注意力信息与参考模型进行比较，参考模型可以包括例如应当被驾驶员监控的车辆的参考区域。在步骤504中，如果驾驶员在一个或多个注意力阈值以下，可以生成警报以修改驾驶员行为并增加注意力。在可选的步骤506中，系统可以与驾驶员进行交流，例如通过提供包括音乐、出口、位置感知的地点等一系列选项。在可选的步骤508中，可以针对专心驾驶为驾驶员生成奖励。例示性的奖励包括可听消息和折扣。
驾驶员注意力系统的实施例使得驾驶员注意力模型能够被创建并针对各种驾驶员和车辆进行更新。驾驶员注意力可以被测量并与模型进行比较，以使得能够为用户生成警报。可以通过提供积极反馈、折扣或其它刺激来奖励专心驾驶。
在本发明的另一方面中，提供了用于低分心模式驾驶的方法和装置。尽管驾驶员通常期望在驾驶时保持连接到电子设备，但是车辆中的低分心模式可以提高总体道路安全性。
图6示出了系统600，其具有低分心模块602和设备控制模块604，低分心模块602具有一系列用于获得信息的模块，以检测潜在的分心，设备控制模块604基于用户的分心水平来控制设备。基于检测到的信息的驾驶员注意力可以用于触发低分心模式。
在例示的实施例中，低分心模块602包括车辆传感器模块606以获得车辆传感器信息，例如下雨、速度、道路颠簸、环境光线水平等。例如晚上下雨可以触发低分心模式。下载信息模块608获得可以被下载或者以其它方式从远程源接收的信息。例如，下载模块608可以获得交通信息，例如交通堵塞、道路施工、事故等。驾驶条件模块610接收关于驾驶条件的信息，驾驶条件可以包括例如天气预报预测下雨、新月、或影响驾驶条件的其它信息。这种信息可以例如触发低分心模式。
时间表模块612结合GPS模块614可以访问用户日历、获得会议位置、以及判断驾驶员是否将准时到达会议。例如，如果本地时间为1:45pm，会议安排在2pm，并且GPS指示会议位置为40分钟远，则时间表模块612可以确定驾驶员将不能准时到达会议。在该情形下，时间表模块612可以为用户生成可听消息。如以下描述的，该情形会触发低分心模式。
驾驶员状态模块616可以检测驾驶员的情绪状态。在一个实施例中，语音识别系统可以分析用户音调、讲话速率、和其它语音特征以确定用户例如是生气还是沮丧。此外，可以对来自用户的视觉提示进行分析以确定用户情绪状态。当检测到某些情绪状态时，可以触发低分心模式，如下面更充分描述的。将理解的是，系统的各种部件(例如驾驶员状态模块)可以例如在远程服务器上实现。
总体上，一旦触发低分心模式，则在低分心模式中，设备控制模块604就修改设备性能和/或与用户的交互，以便减少用户分心。在例示的实施例中，可以由音频/视觉模块618调整和/或关闭某些设备。例如，音频/视觉模块618可以调低音乐/广播的幅度和/或关闭与驾驶不相关的视觉显示。注意，GPS显示将通常不被关闭。在一个实施例中，当GPS将给出路线指令时，音频/视觉模块618可以关闭所有其它音频、播放GPS指令、并重新打开音频。
TTS(文字到语音)模块620可以控制某些操作以使低分心模式下的用户分心最小化。例如，可以例如通过使得TTS语句较短(例如，较少的词语、不那么冗长)、使用所谓的“耳标”、符号(非语音)声音、和/或说得更快来适应TTS SMS、电子邮件、和电话操作。
电话模块622可以控制用户与用户的移动设备的交互。例如，当存在即将到来的电话或IM时，电话模块622可以自动响应(取决于检测到的分心的水平，告知或不告知驾驶员)。在一个实施例中，可以生成选定的发出消息，例如“我现在忙着开车，如果我们过会儿再说会更好”。电话模块622可以包括例外清单，从而用户预先标识的呼叫者将能够联系驾驶员。如上面讨论的分心的水平可以用于确定设备可以如何与驾驶员交互。对本领域普通技术人员来说，各种用户可配置的选项将显而易见。例如，电话模块622可以为用户播放到来的电话，并允许用户接听电话。此外，当离开低分心模式或到达时，呼叫者被发送到语音信箱以及可选地被回放。此外，可以提议给那个人回电。
要理解，取决于检测到的信息，可以提供多个分心水平。例如，晚上的大暴雨可以对应于用户的最高分心水平。检测到沮丧的用户可以对应于最低的分心水平。不同的分心水平可以用于相应地调整设备。
例如，当确定驾驶员将迟到会议时，约会模块624结合时间表模块612和GPS模块614可以为会议参加者生成消息。例如，当确定驾驶员将迟到所安排的会议时，约会模块624为会议主持人和/或参加者生成电子邮件和/或SMS消息。可以询问驾驶员关于是否应当发送消息。在一个实施例中，可以生成重新安排的提议。
图7示出了用于进入低分心模式和在低分心模式下控制设备的例示性步骤序列。在步骤700中，分析了各种信息以判断是否应当进入低分心模式，并且在步骤702中，一旦处于低分心模式，就控制各种设备以减轻用户分心。
在步骤704中，分析车辆信息，例如速度，并且在步骤706中，分析下载的信息，例如交通。在步骤708中，分析驾驶条件，例如下雨。在步骤710中，结合GPS分析用户时间表以基于直到到达目的地的时间量和会议开始时间来判断用户是否将迟到会议。如果用户将不能准时到达会议，则可以进入低分心模式。
在步骤712中，可以分析用户状态以判断是否应当进入低分心模式。例如，如果语音识别系统检测到用户生气，则可以进入低分心模式。
一旦进入低分心模式，在步骤702中，就可以控制设备以减少用户分心。在步骤714中，设备的音频/视觉操作可以被修改以减少分心，例如通过将显示器关闭。在步骤716中，可以调整TTS以缩短语句。在步骤718中，可以修改电话交互以减少分心，例如通过在用户知道或不知道的情况下自动响应。在步骤720中，可以使用关于用户约会的信息来在用户将迟到会议的情况下为会议主持人或参加者生成消息。
在本发明的另一方面中，提供了用于自动监控以及报告道路危险和信息的方法和装置。在到达危险之前，驾驶员通常不知道道路危险，这导致驾驶员有较少的时间来采取必要预防措施(例如，调整速度、改变车道、采用替代路线、等等……)以减轻危险的影响。不熟悉地区的驾驶员可能忽略道路规则和警告(例如，学校区域、施工区域、限速、玩耍的儿童、野生动物跨越道)，导致交通违章或事故。
图8示出了导航系统800，其具有用户界面802和图像获取系统804以及处理系统806，用户界面802告知驾驶员道路危险、交通规则和警告(其可以是静态的或动态的)，图像获取系统804捕获道路标志，处理系统806处理并识别所捕获的标志信息。例如，GPS模块808可以将警告等包括到路线和路线提议中，以用于从交通网站下载的事件。
可以由图像获取系统804捕获的例示性标志包括动态道路危险(例如事故、恶劣天气、和施工作业区域)、静态交通规则和警告(例如限速、普通限速、学校限速区域、施工限速区域)、以及警告(例如，急弯、自行车车道、铁路交叉口、玩耍的儿童、残疾人区、野生动物跨越道以及交通摄像头)。适当的图像获取系统804在本领域中是公知的，以使用摄像装备来获取图像。例如，所获取的图像和符号的图像处理是公知的，并且牌照阅读器例如在美国高速公路系统上是普遍存在的。
在一个实施例中，处理模块806提供解码的标志信息，在这之后，用户界面802触发语境适当的语音提示，其提前告知驾驶员即将到来的事故或警告。在例示性的实施例中，用户界面802在某些条件下发起对话。基于使用语境、操作的导航系统模式、和/或事故/警告的类型而触发提示。
系统800可以包括一系列用户可配置的选项。例如，用户可以优选音频提示，而另一用户可以优选视频提示。用户可以被给予按照类型启用或禁用提示的能力，例如禁用与野生动物跨越道警告相对应的提示。
在一个实施例中，GPS模块806可以从用户接收目的地信息并规划至目的地的路线。用户界面模块802结合GPS模块806可以告知用户沿所规划的/当前路线的危险、告知用户要合并到哪条车道、告知用户时间延迟等。
此外，由于GPS模块806向用户给出关于目的地的路线指导，因此用户界面模块802可以提供避免危险的至目的地的替代路线。在静态交通规则/警告的情形下，用户界面802可以向用户宣布规则/警告。
在一个实施例中，对于动态道路危险，基于与正常交通状况有关的期望延迟而触发提示。基于车辆当前位置与危险的距离、危险的时间(在事故或恶劣天气的情况下)、以及受影响的道路上的当前交通状况来计算期望的延迟。对于静态交通规则或警告，在驾驶员通过物理标记之前或者之时触发提示。
图9示出了可以执行本文中描述的处理的至少部分的示例性计算机900。计算机900包括处理器902、易失性存储器904、非易失性存储器906(例如，硬盘)、输出设备907和图形用户界面(GUI)908(例如，触摸屏显示器)。非易失性存储器906存储计算机指令912、操作系统916和数据918。在一个示例中，计算机指令912由易失性存储器904外部的处理器902执行。在一个实施例中，制品920包括非暂时性计算机可读指令。
可以在硬件、软件或二者的组合中实现处理。可以在计算机程序中实现处理，该计算机程序在可编程计算机/机器上执行，该可编程计算机/机器均包括处理器、可由处理器读取的存储介质或其它制造的制品(包括易失性和非易失性存储器和/或存储元件)、至少一个输入设备、以及一个或多个输出设备。程序代码可以应用于使用输入设备输入的数据以执行处理和生成输出信息。
系统可以至少部分地经由计算机程序产品(例如，在机器可读存储设备中)来执行处理，以便由数据处理装置(例如，可编程处理器、计算机、或多个计算机)执行，或者控制数据处理装置的操作。每个这种程序可以用高级程序语言或面向对象的编程语言实现以便与计算机系统进行通信。然而，程序可以用组件或机器语言实现。语言可以是编译或解释语言，并且其可以以任何形式部署，包括作为独立式程序或作为模块、部件、子例程、或适于在计算环境中使用的其它单元。计算机程序可被部署为在一台计算机上或者在一个站点处的或者跨多个站点分布并通过通信网络互连的多台计算机上执行。计算机程序可以存储在存储介质或设备(例如，CD-ROM、硬盘、或磁盘)上，存储介质或设备可由通用或专用可编程计算机读取以便在存储介质或设备由计算机读取时对计算机进行配置和操作。处理也可以被实现为机器可读存储介质，利用计算机程序来配置，一旦执行，计算机程序中的指令使得计算机进行操作。
处理可以由执行一个或多个计算机程序的一个或多个可编程处理器执行以执行系统的功能。系统的全部或部分可以被实现为专用逻辑电路(例如，FPGA(现场可编程门阵列))和/或ASIC(专用集成电路)。
已经描述了本发明的示例性实施例，现在对本领域普通技术人员来说将变得显而易见的是，也可以使用包括它们的概念的其它实施例。本文中包含的示例不应当限于所公开的实施例，而是应当仅由所附权利要求的精神和范围来限定。通过引用将本文中引用的所有公开物和参考物全部明确并入本文。

Claims (20)

1.一种方法，包括：
针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与所述路线中的即将到来的事件的方向相对应的位置处激活视觉指示器；以及
生成音频信号，以在所述车辆乘客舱中的与所述即将到来的事件的所述方向相对应的位置处激活声音源，以用于向用户提供空间信息。
2.根据权利要求1所述的方法，还包括：在接收到所述用户已经根据所述路线导航所述事件的信息时，生成验证信号以激活确认指示器。
3.根据权利要求1所述的方法，其中，所述GPS系统被配置用于车辆以及用于向驾驶所述车辆的所述用户提供路线指令。
4.根据权利要求1所述的方法，其中，所述视觉指示器包括箭头。
5.根据权利要求1所述的方法，其中，所述视觉提示信号适于在所述即将到来的事件包括左转弯时激活位于所述车辆乘客舱的左侧上的所述视觉指示器。
6.根据权利要求1所述的方法，其中，所述音频信号适于在所述即将到来的事件包括左转弯时激活所述车辆乘客舱的左侧上的所述音频源。
7.根据权利要求6所述的方法，其中，所述音频源包括扬声器并且所述音频信号包括用于生成来自所述扬声器的特定声音的信号。
8.根据权利要求7所述的方法，其中，所述音频信号包括用于向左转弯的口语指令，并且所述扬声器位于所述车辆乘客舱的左侧上。
9.根据权利要求1所述的方法，其中，所述验证信号适于在所述即将到来的事件包括左转弯时激活位于所述车辆乘客舱的左侧上的所述确认指示器。
10.根据权利要求1所述的方法，其中，所述验证信号适于激活视觉显示。
11.根据权利要求1所述的方法，其中，所述验证信号适于激活声音发生器。
12.根据权利要求1所述的方法，还包括：如果所述事件未根据所述路线被导航则生成警告信号。
13.一种制品，包括：
非暂时性计算机可读介质，所述非暂时性计算机可读介质具有存储的指令，所述指令使得机器能够：
针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与所述路线中的即将到来的事件的方向相对应的位置处激活视觉指示器；以及
生成音频信号，以在所述车辆乘客舱中的与所述即将到来的事件的所述方向相对应的位置处激活声音源，以用于向用户提供空间信息。
14.根据权利要求13所述的制品，还包括用于在接收到所述用户已经根据所述路线导航所述事件的信息时生成验证信号以激活确认指示器的指令。
15.根据权利要求13所述的制品，其中，所述视觉提示信号适于在所述即将到来的事件包括左转弯时激活位于所述车辆乘客舱的左侧上的所述视觉指示器。
16.根据权利要求13所述的制品，其中，所述音频信号适于在所述即将到来的事件包括左转弯时激活所述车辆乘客舱的左侧上的所述音频源。
17.根据权利要求16所述的制品，其中，所述音频源包括扬声器并且所述音频信号包括用于生成来自所述扬声器的特定声音的信号。
18.一种系统，包括：
存储器和处理器，所述处理器被配置为：
针对GPS系统定向的路线生成视觉提示信号，以在车辆乘客舱中的与所述路线中的即将到来的事件的方向相对应的位置处激活视觉指示器；以及
生成音频信号，以在所述车辆乘客舱中的与所述即将到来的事件的所述方向相对应的位置处激活声音源，以用于向用户提供空间信息。
19.根据权利要求18所述的系统，其中，所述处理器和所述存储器还被配置为：在接收到所述用户已经根据所述路线导航所述事件的信息时，生成验证信号以激活确认指示器。
20.根据权利要求18所述的系统，其中，所述视觉提示信号被配置为在所述即将到来的事件包括左转弯时激活位于所述车辆乘客舱的左侧上的所述视觉指示器。
CN201580046927.1A 2014-09-02 2015-07-14 向驾驶员提供方向提示的方法和装置 Pending CN106662461A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/474,641 2014-09-02
US14/474,641 US20160059775A1 (en) 2014-09-02 2014-09-02 Methods and apparatus for providing direction cues to a driver
PCT/US2015/040321 WO2016036439A1 (en) 2014-09-02 2015-07-14 Methods and apparatus for providing direction cues to a driver

Publications (1)

Publication Number Publication Date
CN106662461A true CN106662461A (zh) 2017-05-10

Family

ID=55401567

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580046927.1A Pending CN106662461A (zh) 2014-09-02 2015-07-14 向驾驶员提供方向提示的方法和装置

Country Status (4)

Country Link
US (1) US20160059775A1 (zh)
EP (1) EP3177894A4 (zh)
CN (1) CN106662461A (zh)
WO (1) WO2016036439A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107444257A (zh) * 2017-07-24 2017-12-08 驭势科技（北京）有限公司 一种用于在车辆内呈现信息的方法与设备
CN107748884A (zh) * 2017-11-30 2018-03-02 天津所托瑞安汽车科技有限公司 一种多功能的车辆主动安全硬件处理平台及运行方法
CN109808696A (zh) * 2017-11-15 2019-05-28 欧姆龙株式会社 警报控制装置、警报控制方法以及记录介质
CN111527379A (zh) * 2017-12-29 2020-08-11 哈曼国际工业有限公司 用于车辆的空间信息娱乐呈现系统
TWI721917B (zh) * 2020-06-30 2021-03-11 造隆股份有限公司 儀表導航顯示模組

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3268241A1 (en) * 2015-03-13 2018-01-17 Project Ray Ltd. System and method for adapting the user-interface to the user attention and driving conditions
BR112018001759B1 (pt) * 2015-07-27 2022-07-26 Nissan Motor Co., Ltd Dispositivo de exibição de faixa e método de exibição de faixa
CN106445461B (zh) * 2016-10-25 2022-02-15 北京小米移动软件有限公司 文字信息处理方法及装置
JP6575934B2 (ja) * 2017-03-29 2019-09-18 マツダ株式会社 車両運転支援システム及び車両運転支援方法
DE102017215641A1 (de) 2017-09-06 2019-03-07 Ford Global Technologies, Llc System zum Informieren eines Fahrzeuginsassen über eine bevorstehende Kurven-fahrt sowie Kraftfahrzeug
JP2019091254A (ja) * 2017-11-15 2019-06-13 オムロン株式会社 警報制御装置、警報制御方法、および警報制御のためのプログラム
US10442442B2 (en) * 2017-12-06 2019-10-15 Komatsu Ltd. Work vehicle periphery monitoring system and work vehicle periphery monitoring method
EP3566921A1 (en) * 2017-12-27 2019-11-13 The Hi-Tech Robotic Systemz Ltd Providing relevant alerts to a driver of a vehicle
FR3076506B1 (fr) * 2018-01-05 2021-04-16 Cosmo Connected Dispositif de signalisation de vehicules a deux roues
US10477338B1 (en) 2018-06-11 2019-11-12 Here Global B.V. Method, apparatus and computer program product for spatial auditory cues
DE102018216621B3 (de) * 2018-09-27 2020-03-05 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Bereitstellen eines interaktiven Feedbacks für Fahrzeuginsassen, eine Steuereinheit, eine Sprachausgabeeinrichtung und ein Fahrzeug
US10668930B1 (en) * 2019-02-04 2020-06-02 State Farm Mutual Automobile Insurance Company Determining acceptable driving behavior based on vehicle specific characteristics
US11396305B2 (en) 2020-07-30 2022-07-26 Toyota Research Institute, Inc. Systems and methods for improving driver warnings during automated driving
US20240036806A1 (en) * 2022-08-01 2024-02-01 Crestron Electronics, Inc. System and method for generating a visual indicator to identify a location of a ceiling mounted loudspeaker

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5406492A (en) * 1992-12-04 1995-04-11 Kabushikaisha Equos Research Directional voice-type navigation apparatus
CN1934416A (zh) * 2004-03-22 2007-03-21 日本先锋公司 导航装置、导航方法、导航程序和计算机可读取记录介质
CN201053875Y (zh) * 2007-05-17 2008-04-30 金正彦 带有转向警示的车载导航仪
US20090306891A1 (en) * 2008-06-10 2009-12-10 Jeon Myounghoon Navigation device and method of controlling the same
CN102494693A (zh) * 2011-11-27 2012-06-13 苏州迈普信息技术有限公司 基于路口形态的路口转向信息语音播报方法
KR20130135656A (ko) * 2012-06-01 2013-12-11 현대엠엔소프트 주식회사 네비게이션 장치, 이를 이용한 차량 제어 시스템 및 방법
KR20140007227A (ko) * 2012-07-09 2014-01-17 임주은 방향바꿈표시수단이 마련된 네비게이션 단말기 및 그 방법
WO2014069763A1 (ko) * 2012-10-30 2014-05-08 팅크웨어(주) 광각 렌즈 카메라 영상을 이용한 내비게이션 안내 장치 및 방법

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7366607B2 (en) * 2003-11-28 2008-04-29 Fujitsu Ten Limited Navigation apparatus
EP1860918B1 (en) * 2006-05-23 2017-07-05 Harman Becker Automotive Systems GmbH Communication system and method for controlling the output of an audio signal
KR101384528B1 (ko) * 2007-03-02 2014-04-11 삼성전자주식회사 입체 음향을 이용한 방향 안내 처리 방법 및 그를 적용한네비게이션 시스템
JP5034931B2 (ja) * 2007-12-26 2012-09-26 ソニー株式会社 表示装置、プログラム、及び記録媒体

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5406492A (en) * 1992-12-04 1995-04-11 Kabushikaisha Equos Research Directional voice-type navigation apparatus
CN1934416A (zh) * 2004-03-22 2007-03-21 日本先锋公司 导航装置、导航方法、导航程序和计算机可读取记录介质
CN201053875Y (zh) * 2007-05-17 2008-04-30 金正彦 带有转向警示的车载导航仪
US20090306891A1 (en) * 2008-06-10 2009-12-10 Jeon Myounghoon Navigation device and method of controlling the same
CN102494693A (zh) * 2011-11-27 2012-06-13 苏州迈普信息技术有限公司 基于路口形态的路口转向信息语音播报方法
KR20130135656A (ko) * 2012-06-01 2013-12-11 현대엠엔소프트 주식회사 네비게이션 장치, 이를 이용한 차량 제어 시스템 및 방법
KR20140007227A (ko) * 2012-07-09 2014-01-17 임주은 방향바꿈표시수단이 마련된 네비게이션 단말기 및 그 방법
WO2014069763A1 (ko) * 2012-10-30 2014-05-08 팅크웨어(주) 광각 렌즈 카메라 영상을 이용한 내비게이션 안내 장치 및 방법

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107444257A (zh) * 2017-07-24 2017-12-08 驭势科技（北京）有限公司 一种用于在车辆内呈现信息的方法与设备
CN107444257B (zh) * 2017-07-24 2020-06-30 驭势科技（北京）有限公司 一种用于在车辆内呈现信息的方法与设备
CN109808696A (zh) * 2017-11-15 2019-05-28 欧姆龙株式会社 警报控制装置、警报控制方法以及记录介质
CN107748884A (zh) * 2017-11-30 2018-03-02 天津所托瑞安汽车科技有限公司 一种多功能的车辆主动安全硬件处理平台及运行方法
CN111527379A (zh) * 2017-12-29 2020-08-11 哈曼国际工业有限公司 用于车辆的空间信息娱乐呈现系统
TWI721917B (zh) * 2020-06-30 2021-03-11 造隆股份有限公司 儀表導航顯示模組

Also Published As

Publication number Publication date
EP3177894A4 (en) 2018-04-04
EP3177894A1 (en) 2017-06-14
US20160059775A1 (en) 2016-03-03
WO2016036439A1 (en) 2016-03-10

Similar Documents

Publication Publication Date Title
CN106662461A (zh) 向驾驶员提供方向提示的方法和装置
US11375338B2 (en) Method for smartphone-based accident detection
US10046601B2 (en) Smartwatch blackbox
CN105136156B (zh) 基于用户行为模式的自适应导航与基于位置的服务
US9815478B2 (en) Driving assistance system and driving assistance method
US9959780B2 (en) Real-time driver observation and progress monitoring
EP3006297B1 (en) Driving characteristics diagnosis device, driving characteristics diagnosis system, driving characteristics diagnosis method, information output device, and information output method
EP3125211A1 (en) Information presentation device and information presentation method
JP6061798B2 (ja) 運転操作管理装置
US20160346695A1 (en) Vehicle entertainment system
WO2015126318A1 (en) Detection of abnormal behavior in a vehicle
US10373499B1 (en) Cognitively filtered and recipient-actualized vehicle horn activation
US20200209850A1 (en) Methods and systems to facilitate monitoring center for ride share and safe testing method based for selfdriving cars to reduce the false call by deuddaction systems based on deep learning machine
US9984298B2 (en) Method for outputting a drowsiness warning and control unit
EP3279897A1 (en) Safety device for a vehicle
Osman et al. Impact of time-to-collision information on driving behavior in connected vehicle environments using a driving simulator test bed
KR20210113070A (ko) 주의 기반 알림
CN112602130A (zh) 步行者装置、通信装置以及信息分发方法
JP5469419B2 (ja) 運転支援装置
CN113401129A (zh) 信息处理装置、记录介质以及信息处理方法
Kashevnik et al. Context-based driver support system development: Methodology and case study
Landry et al. Getting active with passive crossings: Investigating the use of in-vehicle auditory alerts for highway-rail grade crossings
JP2019525340A (ja) 車両のために逆走状況を警告するための方法、装置、およびシステム
CN114454890A (zh) 用于限制驾驶员分心的系统和方法
JP2007034348A (ja) 音声感知システム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20200917

Address after: Massachusetts, USA

Applicant after: Serenes operations

Address before: Massachusetts, USA

Applicant before: Nuance Communications, Inc.

RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510