CN109059953B - 唤醒支持系统和唤醒支持方法 - Google Patents

唤醒支持系统和唤醒支持方法 Download PDF

Info

Publication number
CN109059953B
CN109059953B CN201810539854.5A CN201810539854A CN109059953B CN 109059953 B CN109059953 B CN 109059953B CN 201810539854 A CN201810539854 A CN 201810539854A CN 109059953 B CN109059953 B CN 109059953B
Authority
CN
China
Prior art keywords
voice
driver
response time
dialogue
response
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810539854.5A
Other languages
English (en)
Other versions
CN109059953A (zh
Inventor
井上淳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN109059953A publication Critical patent/CN109059953A/zh
Application granted granted Critical
Publication of CN109059953B publication Critical patent/CN109059953B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066—Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0055—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements
    • G05D1/0061—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots with safety arrangements for transition from automatic pilot to manual pilot and vice versa
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/027—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising intertial navigation means, e.g. azimuth detector
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B60W2040/0827—Inactivity or incapacity of driver due to sleepiness
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/089—Driver voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/21—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/30—Driving style

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mechanical Engineering (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Transportation (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Mathematical Physics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)

Abstract

本发明公开了唤醒支持系统和唤醒支持方法。唤醒支持系统包括：对话处理单元，其被配置成以问题的形式输出对话语音并且获得作为驾驶员对对话语音的应答的应答语音；应答时间测量单元，其被配置成测量从对话处理单元输出对话语音直到对话处理单元获得应答语音的应答时间；数据库，其存储由应答时间测量单元测量的应答时间；统计计算单元，其被配置成基于存储在数据库中的一个或更多个应答时间来计算应答时间的统计值；以及第一估计单元，其被配置成基于由应答时间测量单元测量的应答时间以及由统计计算单元计算的统计值来得到驾驶员的觉醒度的估计值。

Description

唤醒支持系统和唤醒支持方法
技术领域
本发明涉及唤醒支持系统和唤醒支持方法。
背景技术
在相关技术中，已知用于车辆的疲劳驾驶预防系统，该系统使用以下技术：该技术用于在检测到驾驶员疲劳驾驶时借助于声音或光吸引驾驶员的注意力。一种类型的疲劳驾驶预防系统通过语音向驾驶员进行询问，并且当在给定时间段内没有检测到来自驾驶员的应答时，检测到疲劳驾驶(表示驾驶员觉醒度的降低)。
例如，根据日本专利申请公开第2001-163080号(JP 2001-163080 A)中公开的技术，当车辆行驶达给定时间段或更长时，系统开始通过语音向驾驶员进行询问，并且当自询问开始起的给定时间段内没有来自驾驶员的应答时，确定驾驶员极有可能困倦，以发起防止疲劳驾驶的指导。
发明内容
然而，根据JP 2001-163080 A的技术，作为开始通过语音向驾驶员询问所基于的标准的给定的时间段以及作为开始用于防止疲劳驾驶的引导所基于的标准的给定的时间段是固定的，并且对于未指定数目的人而言是共用的。因此，甚至在驾驶员实际上一点也没有感到困倦的情况下，也可能开始用于防止疲劳驾驶的引导，并且在检测疲劳驾驶的精度方面存在一些改进的空间。
本发明提供了一种唤醒支持系统，该唤醒支持系统通过适合于驾驶员的个人差异的估计方法以高精度估计驾驶员的觉醒度水平。
根据本公开内容的第一方面的唤醒支持系统包括：对话处理单元，其被配置成以问题的形式输出对话语音并且获得作为驾驶员对对话语音的应答的应答语音；应答时间测量单元，其被配置成测量从对话处理单元输出对话语音直到对话处理单元获得应答语音的应答时间；数据库，其存储由应答时间测量单元测量的应答时间；统计计算单元，其被配置成基于存储在数据库中的一个或更多个应答时间来计算应答时间的统计值；以及第一估计单元，其被配置成基于由应答时间测量单元测量的应答时间以及由统计计算单元计算的统计值来得到驾驶员的觉醒度的估计值。
根据本公开内容的第二方面的唤醒支持系统包括电子控制单元，该电子控制单元被配置成：以问题的形式输出对话语音；获得作为驾驶员对对话语音的应答的应答语音；测量从对话语音被输出直到应答语音被获得的应答时间；存储应答时间；基于一个或更多个存储的应答时间来计算应答时间的统计值；基于所测量的应答时间和所计算的统计值来得到驾驶员的觉醒度的估计值；以及输出与该估计值对应的信号。
根据本公开内容的第三方面的唤醒支持方法包括：以问题的形式输出对话语音；获得作为驾驶员对对话语音的应答的应答语音；测量从对话语音被输出直到应答语音被获得的应答时间；存储应答时间；基于一个或更多个存储的应答时间来计算应答时间的统计值；以及基于所测量的应答时间和所计算的统计值来得到驾驶员的觉醒度的估计值。
根据如上所述的方面，基于以驾驶员他/她自己过去的应答时间为基础计算的统计值来得到驾驶员的觉醒度的估计值。驾驶员他/她自己过去的应答时间准确地反映各个驾驶员之间应答问题的方式的差异。因此，利用该配置，可以以高精度估计驾驶员的觉醒度水平。
在上述方面中，统计计算单元可以被配置成计算存储在数据库中的多个应答时间的平均应答时间。
在上述方面中，唤醒支持系统还可以包括：指定词提取单元，其被配置成提取应答语音中包括的指定词；以及第二估计单元，其被配置成基于由指定词提取单元提取指定词的结果来得到驾驶员的觉醒度的估计值。
利用上述配置，根据驾驶员实际发出的应答语音的内容来估计驾驶员的觉醒度水平。驾驶员发出的应答语音的内容准确地表示驾驶员他/她自己表达的该驾驶员的当前状态(觉醒度)。因此，可以以高精度估计驾驶员的觉醒度水平。
在上述方面中，根据假定的应答时间的长度，多个对话语音可以被分类为多个对话语音组，并且当属于多个对话语音组之一的对话语音被输出至驾驶员时，统计计算单元可以被配置成：基于当属于多个对话语音组之一的对话语音在过去被输出至驾驶员时获得并存储在数据库中的应答时间来计算应答时间的统计值。
利用上述配置，基于以与问题的内容对应的适当的过去的应答时间为基础计算的统计值来得到驾驶员的觉醒度的估计值。因此，可以以高精度估计驾驶员的觉醒度水平。
因此，可以通过适合于驾驶员的个人差异的估计方法以高精度估计驾驶员的觉醒度水平。
附图说明
下面将参照附图来描述本发明的示例性实施方式的特征、优点以及技术和工业意义，其中相同的附图标记表示相同的元素，并且在附图中：
图1是示出了根据一个实施方式的唤醒支持系统的系统配置的视图；
图2是图示了根据实施方式的导航装置的控制器的处理的过程的流程图；
图3A是示出了由根据实施方式的导航装置(觉醒度降低检测单元)参考的表格的一个示例的视图；
图3B是示出了由根据实施方式的导航装置(觉醒度降低检测单元)参考的表格的一个示例的视图；
图4是图示了由根据实施方式的导航装置(觉醒度降低检测单元)执行的检测操作的过程的流程图；
图5是图示了由根据实施方式的导航装置和中央服务器处理的对话的过程的流程图；
图6是图示了由根据实施方式的导航装置(估计单元)执行的觉醒度估计操作的过程的流程图；
图7是示出了由根据实施方式的导航装置(觉醒度恢复检测单元)参考的表格的一个示例的视图；以及
图8是图示了由根据实施方式的导航装置(觉醒度恢复检测单元)执行的觉醒度恢复检测操作的过程的流程图。
具体实施方式
将参照附图来描述根据本发明的一个实施方式的唤醒支持系统。
唤醒支持系统10的系统配置
图1示出了根据实施方式的唤醒支持系统10的功能配置。图1所示的唤醒支持系统10包括导航装置100和中央服务器200。唤醒支持系统10向车辆如机动车的驾驶员提供唤醒支持服务。当检测到驾驶员的觉醒度降低时，通过以下操作来提供唤醒支持服务以便提高驾驶员的觉醒度：利用由中央服务器200提供的对话服务，以问题的形式向驾驶员输出对话语音。具体地，本实施方式的唤醒支持服务使得可以通过与驾驶员的对话以高精度估计驾驶员的觉醒度水平。例如，使用唤醒支持服务估计的驾驶员的觉醒度水平被发送至车辆中包括的各个处理单元(例如，基于觉醒度水平鼓励驾驶员休息一下的处理单元、执行觉醒度水平的记录的处理单元等)。
中央服务器200
当导航装置100利用唤醒支持服务时，中央服务器200向导航装置100提供对话服务。对话服务向导航装置100提供表示指向驾驶员的对话语音的对话语音数据。
中央服务器200安装在车辆外部的设施(例如，由对话服务提供者管理的设施)中。中央服务器200能够经由中央服务器200与导航装置100之间的无线通信(例如，Wi-Fi(注册商标)等)向导航装置100发送各种类型的数据(例如，对话语音数据、应答语音数据等)并且从导航装置100接收所述各种类型的数据。
如图1所示，中央服务器200包括通信I/F(接口)201和控制器210。
通信I/F 201经由无线通信控制与导航装置100的通信，以便向导航装置100发送各种类型的数据并且从导航装置100接收各种类型的数据。例如，通信I/F 201从导航装置100接收对获取指向驾驶员的对话语音数据的请求。例如，通信I/F 201还将指向驾驶员并从对话语音提供单元211提供的对话语音数据发送至导航装置100。例如，通信I/F 201还从导航装置100接收驾驶员的应答语音的语音识别结果数据(语音文本)。
控制器210执行操作以向导航装置100提供对话服务。如图1所示，控制器210包括对话语音提供单元211、应答语音分析单元212和状态检测单元213作为其功能。
当经由通信I/F 201接收到对获取指向驾驶员的对话语音的请求时，对话语音提供单元211将指向驾驶员的对话语音数据提供至导航装置100。例如，如下面将说明的，对话语音提供单元211可以提供假定的应答时间相对短的第一对话语音组的对话语音数据和假定的应答时间相对长的第二对话语音组的对话语音数据。
第一对话语音组的对话语音数据的示例如下。
“你想和我谈一谈吗？”
“前方交通堵塞。你想搜索路线来避开它吗？”
“燃料越来越少。你想搜索加油站吗？”
第二对话语音组的对话语音数据的示例如下。
“你今天午饭吃的什么？”
“你最近看了什么电影？”
“你想去哪里旅行？”
当经由通信I/F 201接收到驾驶员的应答语音的识别结果数据(语音文本)时，应答语音分析单元212基于识别结果数据来分析驾驶员的应答语音。更具体地，应答语音分析单元212对驾驶员的应答语音的识别结果数据(语音文本)执行已知的解析(或语法分析)操作和意图理解操作(指定词提取操作)。
例如，由应答语音分析单元212获得的分析结果被反馈回到对话语音提供单元211。因此，对话语音提供单元211可以根据驾驶员的应答的内容来得到下一个更合适的对话语音(更健谈的对话语音)。
此外，例如，根据问题的内容和驾驶员的应答的内容，由应答语音分析单元212获得的分析结果被反馈回至导航装置100的适当的处理单元。例如，如果问题是：“前方交通堵塞。你想搜索路线来避开它吗？”，并且驾驶员的应答为“是”，则由应答语音分析单元212获得的分析结果被反馈回至导航装置100的路线搜索单元。因此，导航装置100的路线搜索单元将搜索路线以避免交通堵塞。
当经由通信I/F 201接收驾驶员的应答语音的识别结果数据(语音文本)时，状态检测单元213通过已知方法(例如，通过检测来自语音文本的指定的一个或多个词)基于识别结果数据来检测驾驶员的状态(例如，紧张水平、压力水平等)。例如，由状态检测单元213获得的检测结果被反馈回至对话语音提供单元211。因此，对话语音提供单元211可以根据驾驶员的状态来得到下一个更合适的对话语音。
控制器210包括诸如CPU(中央处理单元)、主存储装置(例如，ROM(只读存储器)、RAM(随机存取存储器)等)和辅助存储装置(例如，HDD(硬盘驱动器)、快闪存储器等)的硬件。例如，当CPU(计算机)执行存储在主存储装置或辅助存储装置中的相应程序时，实现如上所述的控制器210的每个功能。
中央服务器200可以由物理上单个的信息处理单元或物理上两个或更多个的信息处理单元构成。在后一种情况下，两个或更多个信息处理单元可以经由网络彼此连接。
导航系统100
导航装置100安装在车辆上。导航装置100具有“唤醒支持系统”的功能以及一般导航装置的功能(例如，路线搜索功能、路线引导功能等)。导航装置100可以经由导航装置100与中央服务器200之间的无线通信线路(例如，在终端处具有基站的移动电话网络、Wi-Fi等)向中央服务器200发送各种类型的数据(例如，对话语音数据、应答语音数据、应答语音的识别结果数据等)并且从中央服务器200接收所述各种类型的数据。
如图1所示，导航装置100包括输入装置101、显示器102、GPS(全球定位系统)单元103、扬声器104、通信I/F 105、麦克风106、地图DB111、设施信息DB 112和控制器120。
当用户输入各种类型的信息时，使用输入装置101。输入装置101的示例包括触摸面板、操作按钮、横向键(cross key)等。显示器102是显示各种类型的信息的装置。显示器102的示例包括液晶显示器、有机EL(电致发光)显示器等。
GPS单元103基于从GPS卫星接收的GPS信号来检测导航装置100的当前位置(经度和纬度)。扬声器104输出各种类型的语音(例如，指向驾驶员的对话语音等)。
通信I/F 105经由无线通信控制与中央服务器200的通信，以便向中央服务器200发送各种类型的数据并且从中央服务器200接收各种类型的数据。例如，通信I/F 105向中央服务器200发送获取指向驾驶员的对话语音数据的请求。例如，通信I/F 105还接收指向驾驶员并从中央服务器200(对话语音提供单元211)提供的对话语音数据。例如，通信I/F105还向中央服务器200发送驾驶员的应答语音的语音识别结果数据(语音文本)。
麦克风106安装在驾驶室中的驾驶员座位附近，并且用于输入由驾驶员产生的语音。可以将并入导航装置100的主体中的麦克风、与导航装置100的主体分开设置的外部麦克风等用作麦克风106。
地图DB 111存储地图数据。地图数据包括多条节点数据和多条链路数据。每条节点数据对应于十字路口。每条链路数据对应于两个节点之间的路段。
设施信息DB 112存储关于多个设施的信息。例如，关于每个设施的信息包括设施的名称、位置信息(经度和纬度)、类别、地址、邮政编码、电话号码、详细评论、图像等。
当从导航装置100使用唤醒支持服务时，控制器120实现“唤醒支持系统”的功能，并且控制导航装置100侧的处理。如图1所示，控制器120包括信息获取单元121、觉醒度降低检测单元122、觉醒度恢复检测单元123、对话处理单元124和估计处理单元130。
信息获取单元121获取与驾驶员所驾驶的车辆有关的车辆信息以及与车辆正在行驶的道路有关的道路信息。更具体地，信息获取单元121获取用于确定某一事件的发生(需要谨慎的操作(通常，优选地使驾驶员谨慎的操作)和正常操作)的车辆信息和道路信息，以便检测驾驶员的觉醒度降低。例如，由信息获取单元121获得的车辆信息和道路信息可以从如下所示的车辆信息和道路信息中选择(但不限于车辆信息和道路信息的这些项目)。车辆信息的这些项目可以从例如安装在车辆上的各种ECU(电子控制单元)、各种传感器等获得。此外，道路信息的这些项目可以从例如地图DB 111等获得。
由信息获取单元121获得的车辆信息的示例包括车辆速度信号、加速踏板位置信号、制动信号、转向角信号、加速度传感器输出信号、来自车道偏离报警系统的输出信号、转向灯(turn-signal)点亮信号、车辆行驶方向信息和驾驶时间。由信息获取单元121获得的道路信息的示例包括单向交通信息、限速、停车标志信息和弯道信息。
觉醒度降低检测单元122基于由信息获取单元121获得的车辆信息和道路信息来检测驾驶员的觉醒度降低。更具体地，觉醒度降低检测单元122基于由信息获取单元121获得的车辆信息和道路信息来确定与车辆的行驶有关的给定的需要谨慎的操作的发生。然后，觉醒度降低检测单元122使用与给定的需要谨慎的操作相关联的扣除点的数目对得分执行点扣除。得分提供由觉醒度降低检测单元122检测驾驶员的觉醒度降低的基础，并且还提供由觉醒度恢复检测单元123检测驾驶员的觉醒度恢复的基础。例如，得分的初始值被设置为“0”。当得分等于或低于“-10”时，觉醒度降低检测单元122确定“驾驶员的觉醒度已经降低”。稍后将使用图3A和图3B来描述需要谨慎的操作以及被扣除的点的数目的示例。稍后将使用图4来描述由觉醒度降低检测单元122执行的觉醒度降低检测操作的细节。
在觉醒度降低检测单元122检测到驾驶员的觉醒度降低之后，觉醒度恢复检测单元123基于由信息获取单元121获得的车辆信息和道路信息来检测驾驶员的觉醒度从其降低状态的恢复。更具体地，觉醒度恢复检测单元123基于由信息获取单元121获得的车辆信息和道路信息来确定与车辆的行驶有关的给定正常操作的发生。然后，觉醒度恢复检测单元123使用与给定正常操作相关联的点的数目对得分执行点增加。然后，当得分超过预定阈值(例如，其等于作为初始值的“0”，但不限于“0”)时，觉醒度恢复检测单元123确定“驾驶员的觉醒度已经从降低状态恢复”。稍后将使用图7来描述给定正常操作以及增加的点的数目的示例。稍后将使用图8来描述由觉醒度恢复检测单元123执行的觉醒度恢复检测操作的细节。
对话处理单元124具有与驾驶员的语音对话。更具体地，对话处理单元124首先向中央服务器200发送对获取指向驾驶员的对话语音数据的请求。因此，对话处理单元124从中央服务器200获取指向驾驶员的对话语音数据。然后，对话处理单元124使扬声器104基于对话语音数据输出对话语音。随后，对话处理单元124获得经由麦克风106输入的驾驶员的应答语音。然后，对话处理单元124对应答语音执行语音识别处理，以便生成应答语音的语音文本。此外，对话处理单元124将通过语音识别处理创建的语音文本发送至中央服务器200。
当觉醒度降低检测单元122检测到驾驶员的觉醒度降低时，对话处理单元124输出对话语音作为用于与驾驶员交互的语音。当觉醒度恢复检测单元123检测到驾驶员的觉醒度从降低状态恢复时，在输出对话语音之后，对话处理单元124结束对话语音的输出。
估计处理单元130包括应答时间测量单元131、应答时间DB 132、统计计算单元133、指定词提取单元134、第一估计单元135和第二估计单元136。
应答时间测量单元131测量从输出对话语音的时间到驾驶员用应答语音对其进行应答的时间的应答时间。例如，应答时间测量单元131测量从对话处理单元124输出对话语音的时间到对话处理单元124获得驾驶员的应答语音的时间的应答时间。例如，应答时间测量单元131可以使用包括在导航装置100中的定时器功能或者基于导航装置100的系统时间来测量应答时间。
每当由应答时间测量单元131测量应答时间时，如此测量的应答时间被记录在应答时间DB 132中。以这种方式，由应答时间测量单元131测量的应答时间按时间顺序累积在应答时间DB 132中。
统计计算单元133接收记录在应答时间DB 132中的多个应答时间，并且计算这些应答时间的平均应答时间。更具体地，统计计算单元133针对两个或更多个对话语音组(在本实施方式中，第一对话语音组和第二对话语音组)中的每个对话语音组接收记录在应答时间DB 132中的最近的三个应答时间，并且计算这三个应答时间的平均应答时间。然而，要注意的是，多个应答时间不限于最近的三个应答时间。
指定词提取单元134基于通过对话处理单元124的语音识别处理创建的语音文本来提取驾驶员的应答语音中包括的指定的一个或多个词。优选地，由指定词提取单元134提取的指定词是暗示驾驶员觉醒度降低的那些词，并且可以例如从以下词中选择(但不限于这些词)。
指定词包括例如“困乏”、“累”、“无聊”、“想休息一下”、“嗨嗬(heigh-ho)”以及“哦，天啊”。
第一估计单元135基于由应答时间测量单元131测量的应答时间以及由统计计算单元133计算的平均应答时间来得到驾驶员的觉醒度的估计值。更具体地，当由应答时间测量单元131测量的应答时间是由统计计算单元133计算的平均应答时间的1.8倍或更多倍时，第一估计单元135得到指示“驾驶员的觉醒度已经降低”的估计值。在这一点上，当由应答时间测量单元131测量的应答时间是应答第一对话语音组的问题所花费的时间时，第一估计单元135基于由统计计算单元133计算的第一对话语音组的平均应答时间来得到驾驶员的觉醒度的估计值。另一方面，当由应答时间测量单元131测量的应答时间是应答第二对话语音组的问题所花费的时间时，第一估计单元135基于由统计计算单元133计算的第二对话语音组的平均应答时间来得到驾驶员的觉醒度的估计值。
第一估计单元135可以基于由应答时间测量单元131测量的应答时间以及由统计计算单元133计算的平均应答时间来得到驾驶员的觉醒程度作为估计值。在这种情况下，当由应答时间测量单元131测量的应答时间大于由统计计算单元133计算的平均应答时间时，第一估计单元135可以将驾驶员的觉醒程度确定为使得觉醒程度变得更小。
此外，第一估计单元135可以基于由应答时间测量单元131测量的应答时间以及由统计计算单元133计算的平均应答时间来选择性地得到预定的两个或更多个估计值中的一个估计值。在这种情况下，当由应答时间测量单元131测量的应答时间大于由统计计算单元133计算的平均应答时间时，第一估计单元135可以选择指示驾驶员的觉醒度水平较低的估计值中的一个估计值。
第二估计单元136基于由指定词提取单元134提取指定词的结果来得到驾驶员的觉醒度的估计值。更具体地，当指定词提取单元134从应答语音中提取(一个或更多个)任何指定词预定次数或更多次数(例如，在过去的15分钟期间两次或更多次)时，第二估计单元136得到指示“驾驶员的觉醒度已经降低”的估计值。
第二估计单元136可以基于由指定词提取单元134提取指定词的结果来得到驾驶员的觉醒程度作为估计值。在这种情况下，当由指定词提取单元134提取的指定词的数目更大时，第二估计单元136可以将驾驶员的觉醒程度确定为使得觉醒程度变得更小。
此外，第二估计单元136可以基于由指定词提取单元134提取指定词的结果来选择性地得到预定的两个或更多个估计值中的一个估计值。在这种情况下，当由指定词提取单元134提取的指定词的数目更大时，第二估计单元136可以选择指示驾驶员的觉醒度水平较低的估计值中的一个估计值。
控制器120将由第一估计单元135得到的驾驶员的觉醒度的估计值以及由第二估计单元136得到的驾驶员的觉醒度的估计值输出至需要这些估计值的各个处理单元。控制器120可以分别输出这两个估计值。此外，控制器120可以通过基于这些估计值执行某些计算来计算要输出的估计值，并且输出如此计算的估计值。
控制器120包括诸如CPU、主存储装置(例如，ROM、RAM等)、辅助存储装置(例如，HDD、快闪存储器等)等的硬件。在控制器120中，图1所示的控制器120的每个功能由CPU(计算机)在其执行存储在主存储装置或辅助存储装置中的相应程序时实现。
由CPU执行的每个程序可以在其预先被安装在导航装置100中的情况下提供，或者可以从外部提供并加载到导航装置100中。在后一种情况下，程序可以经由外部存储介质(例如，USB存储器、存储卡、CD-ROM等)来提供，或者可以被提供为使得其从网络(例如，因特网等)上的服务器被下载。
导航装置100的控制器120的处理的过程
图2是图示了由根据实施方式的导航装置100的控制器120执行的处理的过程的流程图。例如，在车辆行驶时，图2所示的控制例程由导航装置100重复执行。
首先，信息获取单元121获取与驾驶员驾驶的车辆有关的车辆信息以及与车辆行驶的道路有关的道路信息(步骤S201)。然后，觉醒度降低检测单元122基于在步骤S201中获得的车辆信息和道路信息来执行觉醒度降低检测操作，以检测驾驶员的觉醒度降低(步骤S202)。将使用图3A、图3B和图4来描述由觉醒度降低检测单元122执行的觉醒度降低检测操作的细节。
如果在步骤S202的觉醒度降低检测操作中没有检测到驾驶员的觉醒度降低(步骤S203：否)，则控制器120返回至步骤S201。另一方面，如果在步骤S202的觉醒度降低检测操作中检测到驾驶员的觉醒度降低(步骤S203：是)，则对话处理单元124输出对话语音作为用于与驾驶员交互的语音(步骤S204)。稍后将使用图5来描述对话处理单元124的对话处理的细节。
随后，估计处理单元130执行觉醒度估计操作，以估计驾驶员的觉醒度水平(步骤S205)。稍后将使用图6来描述由估计处理单元130执行的觉醒度估计操作的细节。
此外，信息获取单元121获取与驾驶员所驾驶的车辆有关的车辆信息以及与车辆行驶的道路有关的道路信息(步骤S206)。然后，觉醒度恢复检测单元123基于在步骤S206中获得的车辆信息和道路信息来执行觉醒度恢复检测操作，以检测驾驶员的觉醒度从其降低状态的恢复(步骤S207)。稍后将使用图7和图8来描述由觉醒度恢复检测单元123执行的觉醒度恢复检测操作的细节。
如果在步骤S207的觉醒度恢复检测操作中没有检测到驾驶员的觉醒度从降低状态恢复(步骤S208：否)，则控制器120返回至步骤S204。另一方面，如果在步骤S207的觉醒度恢复检测操作中检测到驾驶员的觉醒度从降低状态恢复(步骤S208：是)，则对话处理单元124结束对话语音的输出(步骤S209)。然后，控制器120完成图2所示的例程。
由觉醒度降低检测单元122参考的表格的示例
图3A和图3B示出了由根据实施方式的导航装置100(觉醒度降低检测单元122)参考的表格的示例。在图3A所示的表格300中，针对与车辆行驶有关的给定的需要谨慎的操作中的每一个来设置被扣除的点的数目。在图3B所示的表格310中，针对从发生给定的需要谨慎的操作的时间起每个经过的时间来设置要与被扣除的点的数目相乘的系数。例如，表格300、310预先存储在控制器120中包括的存储器中。当检测到驾驶员的觉醒度降低时，导航装置100的觉醒度降低检测单元122参考表格300、310。
觉醒度降低检测操作的过程
图4是图示了由根据实施方式的导航装置100(觉醒度降低检测单元122)执行的觉醒度降低检测操作的过程的流程图。参照图4，将详细描述图2的流程图中的觉醒度降低检测操作(步骤S202)的处理内容。
首先，觉醒度降低检测单元122基于由信息获取单元121获得的车辆信息和道路信息来确定表格300中列出的任何需要谨慎的操作的发生(步骤S401)。
例如，觉醒度降低检测单元122可以基于车辆速度信号、制动信号、加速度传感器输出信号等来确定“突然制动(普通道路)”的发生。此外，例如，觉醒度降低检测单元122可以基于车辆速度信号、制动信号、加速度传感器输出信号、转向信号等来确定“突然制动(当向右或向左转弯时)”的发生。
此外，例如，觉醒度降低检测单元122可以基于转向信号等来确定“突然转向”的发生。此外，例如，觉醒度降低检测单元122可以基于来自车道偏离报警系统的输出信号等来确定“车道偏离(一次)”的发生。
此外，例如，觉醒度降低检测单元122可以基于停车标志信息、制动信号、车辆速度信号等来确定“在停车标志处停车失败”的发生。此外，例如，觉醒度降低检测单元122可以基于单向交通信息、关于车辆行驶方向的信息等来确定“错路驾驶”的发生。
此外，例如，觉醒度降低检测单元122可以基于转向灯点亮信号、转向信号、车辆速度信号等来确定“在右/左转弯灯亮着时，直行30秒或更长时间”的发生。此外，例如，觉醒度降低检测单元122可以基于转向灯点亮信号、车辆速度信号等来确定“在危险灯亮着时，行驶30秒或更长时间”的发生。
如果在步骤S401中确定没有发生需要谨慎的操作(步骤S401：否)，则觉醒度降低检测单元122结束图4所示的例程的当前周期。另一方面，如果在步骤S401中确定发生了任何需要谨慎的操作(步骤S401：是)，则觉醒度降低检测单元122通过参考图3A的表格300来指定与步骤S401中指定的需要谨慎的操作相关联的被扣除的点的数目(步骤S402)。例如，当指定的需要谨慎的操作是“突然制动(普通道路)”时，觉醒度降低检测单元122从表格300中选择“-4点”，并且将其指定为被扣除的点的数目。此外，例如，当指定的需要谨慎的操作是“突然制动(当向右或向左转弯时)”时，觉醒度降低检测单元122从表格300中选择“-8点”，并且将其指定为被扣除的点的数目。
觉醒度降低检测单元122还指定从在步骤S401中指定的需要谨慎的操作发生的时间起经过的时间(步骤S403)。觉醒度降低检测单元122还通过参考图3B的表格310来指定与在步骤S403中指定的经过的时间相关联的系数(步骤S404)。觉醒度降低检测单元122将在步骤S402中指定的扣除点与在步骤S404中指定的系数相乘(步骤S405)。例如，当在步骤S403中指定的经过的时间是“经过了5分钟”时，觉醒度降低检测单元122从表格310中选择“0.9”以将其指定为系数，并且将在步骤S402中指定的扣除点与该系数相乘。此外，当在步骤S403中指定的经过的时间是“经过了8分钟”时，觉醒度降低检测单元122从表格310中选择“0.7”以将其指定为系数，并且将在步骤S402中指定的扣除点与该系数相乘。
然后，觉醒度降低检测单元122使用在步骤S405中乘以系数之后获得的扣除点来减少得分(初始值＝0)(步骤S406)。此外，觉醒度降低检测单元122通过步骤S406中的点扣除来确定得分是否已经减少到等于或低于“-10”(步骤S407)。
如果在步骤S407中确定得分不是等于或低于“-10”(步骤S407：否)，则觉醒度降低检测单元122结束图4所示的例程的当前周期。另一方面，如果在步骤S407中确定得分等于或低于“-10”(步骤S407：是)，则觉醒度降低检测单元122确定“驾驶员的觉醒度已经降低”(步骤S408)。然后，觉醒度降低检测单元122结束图4所示的例程的当前周期。
对话处理的过程
图5是示出了由实施方式的导航装置100(对话处理单元124)和中央服务器200执行的对话处理的过程的序列图。参照图5，将详细描述图2的流程图(步骤S204)中开始的对话处理的内容。
首先，在导航装置100中，对话处理单元124经由通信I/F 105向中央服务器200发送对获取指向驾驶员的对话语音数据的请求(步骤S501)。
在中央服务器200中，如果通信I/F 201接收到从导航装置100发送的获取请求(步骤S502)，则对话语音提供单元211提供指向驾驶员的对话语音数据(步骤S503)。然后，对话语音提供单元211经由通信I/F 201向导航装置100发送在步骤S503中提供的对话语音数据(步骤S504)。
在导航装置100中，如果通信I/F 105接收到从中央服务器200发送的对话语音数据(步骤S505)，则对话处理单元124使扬声器104基于对话语音数据输出对话语音(步骤S506)。
随后，如果对话处理单元124获得经由麦克风106输入的驾驶员的应答语音(步骤S507)，则对话处理单元124对应答语音执行语音识别处理，并且创建应答语音的语音文本(步骤S508)。此外，对话处理单元124向中央服务器200发送在步骤S508中创建的语音文本(步骤S509)。
在中央服务器200中，如果通信I/F 201接收到从导航装置100发送的语音测试(步骤S510)，则应答语音分析单元212对语音文本执行分析处理(步骤S511)。此外，状态检测单元213基于语音文本来检测驾驶员的状态(步骤S512)。
在图5的处理中，中央服务器200可以将在步骤S511中执行的分析处理的结果以及在步骤S512中检测到的驾驶员的状态反馈回至对话语音提供单元211。因此，对话语音提供单元211可以使接下来要提供的对话语音适合于驾驶员的状态和驾驶员的应答的内容。
觉醒度估计操作的过程
图6是图示了由根据实施方式的导航装置100(估计处理单元130)执行的觉醒度估计操作的过程的流程图。参照图6，将详细描述图2的流程图中的觉醒度估计操作(步骤S205)的处理内容。
最初，应答时间测量单元131在由对话处理单元124执行的对话处理中测量应答时间(从指向驾驶员的对话语音被输出的时间到驾驶员的应答语音被获得的时间的应答时间)(步骤S601)。然后，应答时间测量单元131将在步骤S601中测量的应答时间记录在应答时间DB 132中(步骤S602)。
此外，统计计算单元133基于记录在应答时间DB 132中的应答时间来计算多个应答时间的平均时间(步骤S603)。然后，第一估计单元135基于在步骤S601中测量的应答时间以及在步骤S603中计算的平均应答时间来得到驾驶员的觉醒度的估计值(步骤S604)。
此外，指定词提取单元134基于驾驶员的应答语音的语音识别处理的结果(语音文本)来提取驾驶员的应答语音中包括的指定的一个或多个词，语音识别处理的结果在对话处理单元124中执行的对话处理中被创建(步骤S605)。然后，第二估计单元136基于在步骤S605中执行的提取操作的结果来得到驾驶员的觉醒度的估计值(步骤S606)。然后，估计处理单元130完成图6所示的觉醒度估计操作。
由觉醒度恢复检测单元123参考的表格的示例
图7示出了根据实施方式的导航装置100(觉醒度恢复检测单元123)参考的表格的一个示例。在图7所示的表格700中，针对与车辆的行驶有关的给定正常操作中的每一个来设置要增加的点。例如，表格700预先被存储在控制器120中包括的存储器中。然后，当导航装置100的觉醒度恢复检测单元123检测到驾驶员从觉醒度(水平)降低的状态恢复时，它参考表格700。
觉醒度恢复检测操作的过程
图8是图示了由根据实施方式的导航装置100(觉醒度恢复检测单元123)执行的觉醒度恢复检测操作的过程的流程图。参照图8，将详细描述图2的流程图中的觉醒度恢复检测操作(步骤S207)的处理内容。
首先，觉醒度恢复检测单元123基于由信息获取单元121获得的车辆信息和道路信息来确定是否发生了表格700中指示的任何正常操作(步骤S801)。
例如，觉醒度恢复检测单元123可以基于车辆速度信号、制动信号、加速度传感器输出信号等来确定已经发生了“缓慢减速操作”。此外，例如，觉醒度恢复检测单元123可以基于转向灯点亮信号、转向角度信号、车辆速度信号等来确定已经发生了“在右/左转弯灯正常打开时右转或左转”。此外，例如，觉醒度恢复检测单元123可以基于来自车道偏离报警系统的输出信号等来确定已经发生了“在给定时间段内没有车道偏离”。
如果在步骤S801中确定没有发生正常操作(步骤S801：否)，则觉醒度恢复检测单元123结束图8所示的例程的当前周期。另一方面，如果在步骤S801中确定已经发生了任何正常操作(步骤S801：是)，则觉醒度恢复检测单元123通过参考图7的表格700来指定与在步骤S801中指定的正常操作相关联的要增加的点的数目(步骤S802)。例如，当指定的正常操作是“缓慢减速操作”时，觉醒度恢复检测单元123从表格700中选择“+1点”并且将其指定为增加的点。
然后，觉醒度恢复检测单元123将在步骤S802中指定的点与得分相加(步骤S803)。此外，觉醒度恢复检测单元123确定在步骤S803中已经与点相加的得分是否超过预定阈值(步骤S804)。
如果在步骤S804中确定得分没有超过预定阈值(步骤S804：否)，则觉醒度恢复检测单元123结束图8所示的例程的当前周期。另一方面，如果在步骤S804中确定得分超过预定阈值(步骤S804：是)，则觉醒度恢复检测单元123确定“驾驶员的觉醒度已经从降低状态恢复”(步骤S805)。然后，觉醒度恢复检测单元123结束图8所示的例程。
如上所述，根据本实施方式的导航装置100可以测量驾驶员通过语音应答对话语音所需的应答时间，并且基于测量的应答时间以及基于应答时间的历史所计算的统计值来得到驾驶员的觉醒度的估计值。利用这种配置，基于以驾驶员他/她自己的过去的应答时间为基础所计算的统计值来得到驾驶员的觉醒度的估计值。驾驶员他/她自己的过去的应答时间准确地反映驾驶员之间对问题应答的个体差异。因此，根据本实施方式的导航装置100可以以高精度估计驾驶员的觉醒度水平。
此外，根据本实施方式的导航装置100可以基于提取来自驾驶员的应答语音中包括的指定词的结果来得到驾驶员的觉醒度的估计值。利用该配置，根据驾驶员实际发出的应答语音的内容来估计驾驶员的觉醒度水平。驾驶员发出的应答语音的内容准确地反映驾驶员他/她自己的当前状况(觉醒度)。因此，根据本实施方式的导航装置100能够以高精度估计驾驶员的觉醒度水平。
此外，当属于两个或更多个对话语音组之一的对话语音被输出给驾驶员时，根据本实施方式的导航装置100可以基于当上面指示的一个对话语音组的对话语音在过去被输出给驾驶员时获得的应答时间的历史来计算应答时间的统计值。利用该配置，基于以与问题的内容对应的适当的过去的应答时间为基础计算的统计值来得到驾驶员的觉醒度的估计值。因此，根据本实施方式的导航装置100可以以高精度估计驾驶员的觉醒度水平。
此外，当基于车辆信息检测到驾驶员的觉醒度降低时，根据本实施方式的导航装置100可以输出对话语音作为用于与驾驶员交互的语音，并且当在对话语音输出之后基于车辆信息检测到驾驶员的觉醒度从降低状态恢复时，结束对话语音的输出。利用这种配置，在驾驶员的觉醒度实际上降低时，导航装置100与驾驶员对话。因此，根据本实施方式的导航装置100可以根据驾驶员的状态来适当地调整与驾驶员对话的时间段。
此外，每当基于车辆信息确定给定的需要谨慎的操作发生时，根据本实施方式的导航装置100从得分中扣除与给定的需要谨慎的操作相关联的点，并且当得分变得等于或低于预定阈值时，可以检测驾驶员的觉醒度降低。利用这种配置，当在驾驶员操作车辆时反复发生某个需要谨慎的操作时，开始与驾驶员对话。本文中提到的需要谨慎的操作可以在驾驶员的觉醒度降低的情况下发生。因此，根据本实施方式的导航装置100可以根据驾驶员的状态来适当地调整与驾驶员对话的开始时间。
此外，每当基于车辆信息确定给定的正常操作发生时，根据本实施方式的导航装置100将与给定的正常操作相关联的点与得分相加，并且当得分超过预定阈值时，可以检测驾驶员的觉醒度从降低状态恢复。利用这种配置，当在驾驶员操作车辆时反复发生某个正常操作时，与驾驶员的对话结束。本文中提到的正常操作可以在驾驶员的觉醒度已经恢复的情况下发生。因此，根据本实施方式的导航装置100可以根据驾驶员的状态来适当地调整与驾驶员对话的结束时间。
尽管已经详细描述了本发明的优选实施方式，但是本发明不限于本实施方式，而是在不脱离所附权利要求中所述的本发明的原理的情况下，可以对实施方式进行各种修改或改变。
例如，可以在导航装置100或其他信息处理单元中提供所示实施方式中的中央服务器200中提供的功能中的一个或更多个功能(例如，应答语音分析功能)。
此外，可以在中央服务器200或其他信息处理单元中提供导航装置100中提供的功能中一个或更多个。例如，对话处理单元124可以设置在中央服务器200或其他信息处理单元中。在这种情况下，对话处理单元124以问题的形式向导航装置100输出表示对话语音的对话语音数据，使得基于对话语音数据的对话语音从导航装置100的扬声器104被输出。此外，当经由导航装置100的麦克风106输入驾驶员应答对话语音的应答语音时，对话处理单元124从导航装置100获取表示应答语音的应答语音数据。
尽管导航装置100被用作所示实施方式中的“唤醒支持系统”的一个示例，但是“唤醒支持系统”的功能可以由除了导航装置100以外的信息处理单元(例如，车载音频系统、智能电话、平板计算机等)来实现。

Claims (5)

1.一种唤醒支持系统，其特征在于包括：
对话处理单元，其被配置成：以问题的形式输出对话语音，并且获得作为驾驶员对所述对话语音的应答的应答语音；
应答时间测量单元，其被配置成测量从所述对话处理单元输出所述对话语音直到所述对话处理单元获得所述应答语音的应答时间；
数据库，其存储由所述应答时间测量单元测量的应答时间；
统计计算单元，其被配置成基于存储在所述数据库中的一个或更多个应答时间来计算所述应答时间的统计值；以及
第一估计单元，其被配置成：基于由所述应答时间测量单元测量的应答时间以及由所述统计计算单元计算的统计值来得到所述驾驶员的觉醒度的估计值，
其中根据假定的应答时间的长度，多个对话语音被分类为多个对话语音组；以及
当属于所述多个对话语音组之一的对话语音被输出给所述驾驶员时，所述统计计算单元被配置成：基于当属于所述多个对话语音组之一的对话语音在过去被输出给所述驾驶员时获得并存储在所述数据库中的应答时间来计算所述应答时间的统计值。
2.根据权利要求1所述的唤醒支持系统，其特征在于：
所述统计计算单元被配置成计算存储在所述数据库中的多个应答时间的平均应答时间。
3.根据权利要求1或2所述的唤醒支持系统，其特征在于还包括：
指定词提取单元，其被配置成提取所述应答语音中包括的指定词；以及
第二估计单元，其被配置成：基于由所述指定词提取单元提取所述指定词的结果来得到所述驾驶员的觉醒度的估计值。
4.一种唤醒支持方法，其特征在于包括：
以问题的形式输出对话语音；
获得作为驾驶员对所述对话语音的应答的应答语音；
测量从所述对话语音被输出直到所述应答语音被获得的应答时间；
存储所述应答时间；
基于一个或更多个存储的应答时间来计算所述应答时间的统计值；以及
基于所测量的应答时间和所计算的统计值来得到所述驾驶员的觉醒度的估计值，
其中根据假定的应答时间的长度，多个对话语音被分类为多个对话语音组；以及
当属于所述多个对话语音组之一的对话语音被输出给所述驾驶员时，基于当属于所述多个对话语音组之一的对话语音在过去被输出给所述驾驶员时获得并存储在所述数据库中的应答时间来计算所述应答时间的统计值。
5.一种唤醒支持系统，包括：
电子控制单元，其被配置成：
以问题的形式输出对话语音；
获得作为驾驶员对所述对话语音的应答的应答语音；
测量从所述对话语音被输出直到所述应答语音被获得的应答时间；
存储所述应答时间；
基于一个或更多个存储的应答时间来计算所述应答时间的统计值；
基于所测量的应答时间和所计算的统计值来得到所述驾驶员的觉醒度的估计值；以及
输出与所述估计值对应的信号，
其中根据假定的应答时间的长度，多个对话语音被分类为多个对话语音组；以及
当属于所述多个对话语音组之一的对话语音被输出给所述驾驶员时，所述电子控制单元被配置成：基于当属于所述多个对话语音组之一的对话语音在过去被输出给所述驾驶员时获得并存储在所述数据库中的应答时间来计算所述应答时间的统计值。
CN201810539854.5A 2017-06-07 2018-05-30 唤醒支持系统和唤醒支持方法 Active CN109059953B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2017112741A JP6848702B2 (ja) 2017-06-07 2017-06-07 覚醒支援装置および覚醒支援方法
JP2017-112741 2017-06-07

Publications (2)

Publication Number Publication Date
CN109059953A CN109059953A (zh) 2018-12-21
CN109059953B true CN109059953B (zh) 2022-03-18

Family

ID=64562919

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810539854.5A Active CN109059953B (zh) 2017-06-07 2018-05-30 唤醒支持系统和唤醒支持方法

Country Status (3)

Country Link
US (2) US10525980B2 (zh)
JP (1) JP6848702B2 (zh)
CN (1) CN109059953B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110435660A (zh) * 2019-08-13 2019-11-12 东风小康汽车有限公司重庆分公司 一种车辆驾驶情景模式的自动控制方法及装置
JP7446085B2 (ja) * 2019-11-07 2024-03-08 株式会社富士通エフサス 情報処理装置、音声チャット制御方法および音声チャット制御プログラム
JP2023036262A (ja) * 2021-09-02 2023-03-14 株式会社トランストロン 通報装置、通報方法及び通報プログラム
US11767036B1 (en) * 2022-05-03 2023-09-26 Plusai, Inc. Determining acceptable responses for navigating a vehicle that accounts for external conditions of the vehicle
CN115565535B (zh) * 2022-09-21 2024-04-12 南京浮点智算数字科技有限公司 一种智能语音客服系统

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6236968B1 (en) * 1998-05-14 2001-05-22 International Business Machines Corporation Sleep prevention dialog based car system
US6575902B1 (en) * 1999-01-27 2003-06-10 Compumedics Limited Vigilance monitoring system
JP4328434B2 (ja) 1999-12-08 2009-09-09 クラリオン株式会社 車両運転時の居眠り防止装置
JP3900995B2 (ja) * 2002-04-03 2007-04-04 オムロン株式会社 情報処理端末、サーバ、情報処理プログラムおよびこれを記録したコンピュータ読み取り可能な記録媒体
JP2006279796A (ja) * 2005-03-30 2006-10-12 Yamaha Corp 携帯電話、携帯電話用ホルダ、携帯電話用プログラム、および半導体素子
US20070024454A1 (en) * 2005-08-01 2007-02-01 Singhal Tara C System and method for mental impairment determination using reaction time test
JP2008225537A (ja) * 2007-03-08 2008-09-25 Tamagawa Seiki Co Ltd 自動車の安全装置
JP2009098937A (ja) * 2007-10-17 2009-05-07 Xanavi Informatics Corp 居眠り検出装置
US9878663B1 (en) * 2016-12-07 2018-01-30 International Business Machines Corporation Cognitive dialog system for driving safety
CN106377228B (zh) * 2016-09-21 2019-07-09 中国人民解放军国防科学技术大学 基于Kinect的无人机操作员状态监视与分层控制方法
US10832148B2 (en) * 2016-12-07 2020-11-10 International Business Machines Corporation Cognitive dialog system for driving safety

Also Published As

Publication number Publication date
US20200122733A1 (en) 2020-04-23
US11511755B2 (en) 2022-11-29
CN109059953A (zh) 2018-12-21
JP6848702B2 (ja) 2021-03-24
JP2018206197A (ja) 2018-12-27
US20180354522A1 (en) 2018-12-13
US10525980B2 (en) 2020-01-07

Similar Documents

Publication Publication Date Title
CN109059953B (zh) 唤醒支持系统和唤醒支持方法
US20190003848A1 (en) Facility-information guidance device, server device, and facility-information guidance method
CN109017614B (zh) 意识支持装置和意识支持方法
US10929652B2 (en) Information providing device and information providing method
US20130325478A1 (en) Dialogue apparatus, dialogue system, and dialogue control method
CN109389849B (zh) 信息提供装置和信息提供系统
EP2701137B1 (en) Information provision device for use in vehicle
JP6612707B2 (ja) 情報提供装置
JP2014020877A (ja) 行先提案システム、行先提案方法、およびプログラム
JP6339545B2 (ja) 情報処理装置、情報処理方法及びプログラム
US20120214457A1 (en) Technique for signalling telephone calls during a route guidance
WO2017015882A1 (en) Navigation device and navigation method
CN108932290B (zh) 地点提案装置及地点提案方法
US9194710B1 (en) Parked car location
US20180267546A1 (en) Navigation system, navigation method, and recording medium
JP6619316B2 (ja) 駐車位置探索方法、駐車位置探索装置、駐車位置探索プログラム及び移動体
CN111238514A (zh) 生成装置、生成装置的控制方法以及存储介质
CN114690896A (zh) 信息处理装置、信息处理方法及存储介质
CN114691979A (zh) 信息提供装置、信息提供方法及存储介质
CN110893859B (zh) 驾驶辅助装置及其控制方法、车辆驾驶辅助系统和存储程序的非暂时性记录介质
KR20210073461A (ko) 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법
CN114119293A (zh) 信息处理装置、信息处理系统、程序以及车辆
CN114834456A (zh) 向车辆的驾驶员提供辅助信息的方法和装置
US20150229727A1 (en) System and method for providing real-time, location-dependent entertainment
US20170371619A1 (en) Information output system and information output method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant