CN108225366A - 车载装置与路线信息提示系统 - Google Patents
车载装置与路线信息提示系统 Download PDFInfo
- Publication number
- CN108225366A CN108225366A CN201711397933.9A CN201711397933A CN108225366A CN 108225366 A CN108225366 A CN 108225366A CN 201711397933 A CN201711397933 A CN 201711397933A CN 108225366 A CN108225366 A CN 108225366A
- Authority
- CN
- China
- Prior art keywords
- user
- mood
- information
- main vehicle
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000036651 mood Effects 0.000 claims abstract description 273
- 230000005540 biological transmission Effects 0.000 claims abstract description 8
- 230000002996 emotional effect Effects 0.000 claims description 68
- 230000008921 facial expression Effects 0.000 claims description 15
- 238000001514 detection method Methods 0.000 claims description 13
- 230000001815 facial effect Effects 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 description 23
- 238000000034 method Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 7
- 239000000284 extract Substances 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 230000008451 emotion Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 238000000205 computational method Methods 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000004209 hair Anatomy 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3484—Personalized, e.g. from learned user behaviour or user-defined profiles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3407—Route searching; Route guidance specially adapted for specific applications
- G01C21/343—Calculating itineraries, i.e. routes leading from a starting point to a series of categorical destinations using a global route restraint, round trips, touristic trips
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/3453—Special cost functions, i.e. other than distance or default speed limit of road segments
- G01C21/3461—Preferred or disfavoured areas, e.g. dangerous zones, toll or emission zones, intersections, manoeuvre types, segments such as motorways, toll roads, ferries
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3608—Destination input or retrieval using speech input, e.g. using speech recognition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3617—Destination input or retrieval using user history, behaviour, conditions or preferences, e.g. predicted or inferred from previous use or current movement
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3605—Destination input or retrieval
- G01C21/3623—Destination input or retrieval using a camera or code reader, e.g. for optical or magnetic codes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3626—Details of the output of route guidance instructions
- G01C21/3641—Personalized guidance, e.g. limited guidance on previously travelled routes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3664—Details of the user input interface, e.g. buttons, knobs or sliders, including those provided on a touch screen; remote controllers; input using gestures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3667—Display of a road map
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/34—Route searching; Route guidance
- G01C21/36—Input/output arrangements for on-board computers
- G01C21/3697—Output of additional, non-guidance related information, e.g. low fuel level
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
- G06V40/175—Static expression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/20—Movements or behaviour, e.g. gesture recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
- G10L25/63—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Social Psychology (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Theoretical Computer Science (AREA)
- Artificial Intelligence (AREA)
- Psychiatry (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Child & Adolescent Psychology (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Hospice & Palliative Care (AREA)
- Navigation (AREA)
- Traffic Control Systems (AREA)
- Instructional Devices (AREA)
Abstract
一种车载装置,包括:识别单元,配置为识别主车辆用户;获取单元,配置为获取主车辆的当前位置和目的地;传输单元,配置为将表明主车辆用户、当前位置和目的地的第一信号发送至主车辆外部的外部装置;接收单元,配置为接收来自外部装置的表明从当前位置到目的地的行驶路线的第二信号,其中,行驶路线是使用外部装置中的1)第一情绪地图和2)第二情绪地图搜索到的;以及提示单元,配置为提示由第二信号表明的行驶路线。
Description
技术领域
本发明涉及车载装置与路线信息提示系统的技术领域,该车载装置与路线信息提示系统收集与车辆的用户有关的信息,并基于收集到的信息提示行驶路线。
背景技术
对于这类装置,例如,已经提出了一种装置(参见第2015-227785号日本未经审查的专利申请公开(JP 2015-227785A)),其提取与驾驶员当前行驶目的相对应的偏好,检测从当前位置到目的地的多条行驶路线中的每一条行驶路线的特征,并选择具有与提取出的喜好相符合的特征的行驶路线。替代性地,还提出了一种装置(参见第2016-180600号日本未经审查的专利申请公开(JP 2016-180600A)),其使用Dijkstra算法搜索从当前位置到目的地的行驶路线,并且设定成本值的计算参考,以便搜索到符合用户偏好的行驶路线。替代性地,还提出了一种装置(参见第2016-186461号日本未经审查的专利申请公开(JP 2016-186461A)),其基于行驶历史根据用户的偏好来获取优先道路,基于优先道路确定通过用户的指定来搜索的设施的优先级,并且根据所确定的优先级引导所搜索到的设施。
发明内容
根据上述的相关技术,是根据包括在行驶历史中的行驶路线的特征(例如行驶时间、是否使用收费道路、车道数量、交通灯数量等)来估计用户的偏好的。然而,例如,即使是具有道路类型或结构的道路,例如车道数量、行驶频率较高而类似于道路(即,可能被评估为用户喜欢的道路),根据周围环境(例如停放的车辆或行人的数量,或道路周围的建筑物或行道树的情况),其也不是总是符合用户的偏好。也就是说,在上述相关技术中,从道路特征估计用户的偏好,并且基于所估计的偏好推荐行驶路线存在提升的空间。
本发明提供能够向用户提示合适的行驶路线的车载装置和路线信息提示系统。
本发明的第一方面涉及一种车载设备,包括识别单元、获取单元、传输单元、接收单元和提示单元。识别单元配置为将主车辆上的用户识别为主车辆用户。获取单元配置为获取主车辆的当前位置和目的地。传输单元配置为将第一信号发送至主车辆外部的外部装置,第一信号表明主车辆用户、当前位置和目的地的。接收单元配置为从外部装置接收第二信号,第二信号表明从当前位置到目的地的行驶路线。该行驶路线是在外部装置中使用i)第一情绪地图和ii)第二情绪地图搜索到的。第一情绪地图是基于情绪信息和地图信息生成的信息,情绪信息是在对应于多个用户且表明道路上的多个点中的每个点处的情绪状态的多种情绪信息之中,对应于主车辆用户的情绪信息,并第一情绪地图是将由对应于主车辆用户的情绪信息所表明的主车辆用户在道路上的多个点中的每个点处的情绪状态、与所述地图信息相关联而生成的信息。第二情绪地图是基于多种情绪信息的至少一部分和地图信息生成的信息,并且是将多种情绪信息的至少一部分所表明的多个用户中的每个用户在道路上的多个点中的每个点处的情绪状态、与地图信息相关联而生成的信息。提示单元配置为提示由第二信号表明的行驶路线。
“第一情绪地图”是主车辆用户在道路上的每一个点处的情绪(例如喜悦、愤怒、哀愁、快乐)的信息与地图信息相关联而生成的信息,并且作为一种概念,例如表明主车辆用户的情绪在地图上的分布的信息。类似地,“第二情绪地图”是每个用户在道路上的每一个点处的情绪与地图信息相关联而生成的信息,并且作为一种概念,例如表明用户的情绪在地图上的分布的信息。第二情绪地图可能是根据任意条件,例如时间带、星期几、季节、用户年龄和性别所提取的每个用户的情绪与地图信息相关联生成的信息。
可以根据由第一情绪地图表明的积极情绪(例如“喜悦”、“快乐”)的分布和由第一情绪地图表明的消极情绪(例如“愤怒”、“哀愁”)的分布估计主车辆用户将更喜欢的道路,以及主车辆用户应当避免的道路。此外,可以根据由第二情绪地图表明的积极情绪的分布和由第二情绪地图表明的消极情绪的分布估计主车辆用户通常会更喜欢的道路,以及主车辆用户应当避免的道路。出于这一原因,使用第一情绪地图和第二情绪地图搜索到的从当前位置到目的地的行驶路线被预期为是主车辆用户优选的行驶路线。相应地,利用车载装置,可以向主车辆用户提示合适的行驶路线。
根据本发明的第一方面的车载装置还可以包括情绪状态估计单元,该情绪状态估计单元配置为检测主车辆用户的生物信息,以及基于检测到的生物信息估计主车辆用户的情绪状态。传输单元可以配置为将第三信号发送至外部装置,第三信号表明将估计出的情绪状态和信息、主车辆的位置及主车辆用户彼此关联而生成的信息。根据本发明的第一方面,可以在主车辆行驶时的每个点处收集主车辆用户的情绪状态,并且可以在外部装置中收集表明主车辆用户情绪的信息。可以基于例如表情、动作或语音等生物信息评估情绪状态。
根据本发明的第一方面的车载装置还可以包括车载摄像头,该车载摄像头配置为对主车辆的车厢内进行成像。情绪状态估计单元配置为从车载摄像头拍摄的图像中检测用户。
根据本发明的第一方面的车载装置,生物信息还可以包括用户的面部信息。情绪状态估计单元可以配置为识别检测到的用户的面部表情,并基于识别到的面部表情的特征估计主车辆用户的情绪状态。
在根据本发明的第一方面的车载装置中,生物信息可以包括用户的手势。情绪状态估计单元可以配置为识别检测到的用户的手势,并基于识别到的手势的特征估计主车辆用户的情绪状态。
根据本发明的第一方面的车载装置还可以包括麦克风,该麦克风配置为检测主车辆的车厢内的声音。生物信息可以包括用户的语音。情绪状态估计单元可以配置为从麦克风所检测到的车厢内的声音中识别语音,以及基于识别到的语音估计主车辆用户的情绪状态。
在根据本发明的第一方面的车载装置中,第二情绪地图可能是根据时间带、星期几、季节、用户年龄和性别中的任意条件所提取的每个用户的情绪与地图信息相关联而生成的信息。
本发明的第二方面涉及路线信息提示系统,包括车载装置、设置在搭载有车载装置的车辆的外部的外部装置。车载装置配置为将车辆中的用户识别为主车辆用户,获取车辆的当前位置和目的地,并且发送第一信号至外部装置,第一信号表明主车辆用户、当前位置和目的地的。外部装置包括情绪数据库和地图数据库,该情绪数据库配置为存储对应于多个用户且表明道路上的多个点中的每个点处的情绪状态的多种情绪信息,地图数据库配置为存储地图信息。外部装置配置为基于所存储的第一情绪信息中与由第一信号表明的主车辆用户相对应的情绪信息和所存储的地图信息生成第一情绪地图,基于所存储的多种情绪信息中的至少一部分和所存储的地图信息生成第二情绪地图,使用第一情绪地图和第二情绪地图搜索从由第一信号表明的当前位置到由第一信号表明的目的地的行驶路线,并且将由搜索到的行驶路线表明的第二信号发送至车辆,其中,第一情绪地图是由对应于主车辆用户的情绪信息表明的主车辆用户在道路上的多个点中的每个点处的情绪状态、与所存储的地图信息相关联而生成的信息,第二情绪地图是由将由所存储的多种情绪信息的至少一部分表明的多个用户中的每个用户在道路上的多个点中的每个点处的情绪状态、与所存储的地图信息相关联而生成的信息。车载装置还配置为提示由接收到的第二信号表明的行驶路线。
类似于根据本发明的第一方面的车载装置,利用根据本发明的第二方面的路线信息提示系统,可以向主车辆用户提示合适的行驶路线。具体地,可能基于根据情绪信息中的例如时间带、星期几、季节、用户年龄和性别中的任意条件提取出的情绪信息(即情绪信息的一部分)来生成第二情绪地图。
在根据本发明的第二方面的路线信息提示系统中,车载装置可以配置为检测主车辆用户的生物信息,基于检测到的生物信息估计主车辆用户的情绪状态,并将第三信号发送至外部装置,四三信号表明将估计出的情绪状态、主车辆的位置和主车辆用户相关联而生成的信息。可以通过由第三信号表明的信息来构造或更新情绪数据库。根据本发明的第二方面,可以相对容易地在主车辆行驶时的每个点处收集车辆用户的情绪状态,并用利用收集到的情绪状态构造或更新情绪数据库。
根据本发明的第二方面的路线信息提示系统还可以包括车载摄像头,该车载摄像头配置为对主车辆的车厢内进行成像。车载装置可以配置为从车载摄像头拍摄的图像中检测用户。
根据本发明第二方面的路线信息提示系统,生物信息可以是用户的面部信息。车载装置可以配置为识别检测到的用户的面部表情,并基于识别出的面部表情的特征估计主车辆用户的情绪状态。
在根据本发明的第二方面的路线信息提示系统中,生物信息可以是用户的手势。车载装置可以配置为识别检测到的用户的手势,并基于识别出的手势估计主车辆用户的情绪状态。
根据本发明第二方面的路线信息提示系统还可以包括麦克风,该麦克风配置为检测主车辆的车厢内的声音。生物信息可能是用户的语音。车载装置可以配置为从麦克风检测到的车厢内的声音中识别语音,并基于识别出的语音的特征估计主车辆用户的情绪状态。
在根据本发明的第二方面的路线信息提示系统中,第二情绪地图可以是将根据时间带、星期几、季节、用户年龄和性别中的任意条件提取出的多个用户中的每个用户的情绪信息、与地图信息相关联而生成的信息。
本发明的操作和其他优点将通过以下描述的具体实施例而变得明显。
附图说明
下面参照附图的描述有助于更好地理解本发明的示例性实施例的特征、优势,以及技术和工业意义。附图中相同或相似的附图标记代表相同或相似的部件。
图1为根据本发明的实施例的路线信息提示系统的结构框图;
图2A为根据本发明的实施例的情绪估计操作的流程图;
图2B为根据本发明的实施例的一般情绪数据库的构建操作的流程图;
图3A为根据本发明的实施例的用户的简况分析方法的例子的示意图;
图3B为根据本发明的实施例的用户的分析方法的例子的示意图;
图4为根据本发明的实施例的一般情绪地图的例子的示意图;
图5A为根据本发明的实施例的行驶路线的计算方法的例子的示意图;
图5B为根据本发明的实施例的行驶路线的计算方法的例子的示意图;
图6为根据本发明的实施例的行驶路线的显示屏的一个例子的图;
图7A为根据本发明的实施例的行驶路线搜索和提示操作的流程图;
图7B为根据本发明的实施例的行驶路线搜索和提示操作的流程图。
具体实施方式
以下将参照图1至图7B描述根据本发明的实施例的路线信息提示系统。
系统结构
以下将参照图1描述根据本发明的实施例的路线信息提示系统。图1为根据本发明的实施例的路线信息提示系统的结构框图。
在图1中,路线信息提示系统1包括安装在车辆10中的导航装置100和设置在车辆10外部的中心20。除了导航装置100以外,车辆10包括检测车厢内的声音的麦克风11以及对车厢内进行成像的车载摄像头12。根据本实施例的“导航装置100”和“中心20”分别是“车载装置”和“外部装置”的例子。
导航装置100包括控制器101、通信模块102、时钟103、显示单元104、语音输出单元105、操作单元106、全球定位系统接收单元107、情绪估计单元108、个人识别单元109以及个人ID数据库110。
中心20包括控制器21、通信单元22、时钟23、地图数据库24、一般情绪数据库25、个人信息数据库26、一般情绪地图数据库27和个人情绪地图分析单元28。
情绪数据收集
接着,将参照图2A和图2B的流程图并且结合图1,来描述在车辆10侧执行的车辆10的用户的情绪的估计方法,以及在中心20侧执行的一般情绪数据库25的构造方法。
1、情绪估计
导航装置100的情绪估计单元108基于车辆10上的用户的面部表情、手势和音调来估计用户的情绪。
具体地,情绪估计单元108从车载摄像头12拍摄到的图像中检测用户(至少检测用户的面部区域),并且识别检测到的用户的面部表情。情绪估计单元108基于识别出的面部表情的特征(例如眼睛、眉毛和嘴巴中的每一个的形状的特征)来计算多种情绪(例如“中性”、“快乐”、“愤怒”、“恐惧”、“疲劳”等)中的每种情绪的程度。情绪估计单元108从车载摄像头12拍摄到的图像中检测用户,并且识别检测到的用户的手势(即运动)。情绪估计单元108基于识别出的手势的特征(例如,面部表情、脸和手之间的位置关系、视线或脸部方向等)来计算每个情绪的程度。
情绪估计单元108从麦克风11检测到的车辆内部的声音中识别语音,并且基于识别出的语音(即音调)的特征(例如,频率分布等)来计算每个情绪的程度。麦克风11优选是定向麦克风。然后,在车辆10中优选设置多个麦克风11。采用这种设置,由于可以从麦克风的方向性指定语音的生成源(即声源),因此即使在车辆10上有多个人在的情况下或者开着汽车音响的情况下,也可以识别用户的语音。
情绪估计单元108配置为计算每种情绪的程度的原因是,在情绪实际产生的情况下,极少出现单个情绪,常常出现多种基本情绪混合的复杂情绪。
情绪估计单元108通过例如简单地求取(i)基于面部表情的每个情绪的程度、(ii)基于手势的每个情绪的程度以及(iii)基于音调的每个情绪的程度的平均值,或者使用预先获悉的权重进行加权平均,可以获得每种情绪的总体程度。
为了将注意力集中在情绪的暂时变化上,情绪估计单元108获得(i)在相对较短的第一时段(例如1秒等)中的多种情绪中的每一种情绪的总体程度,以及(ii)在比第一时段长的第二时段(例如30秒等)中的多种情绪中的每一种情绪的总体程度。
当人们经历了情绪(精神状态)的变化时,人们经常会通过面部表情、手势或者语调有意识或无意识地表现出情绪(精神状态)的变化。由于这个原因,获得了在比较短的第一时段中的每种情绪的总体程度,从而可以估计用户的复杂情绪或真实情绪。另一方面,获得了相对长的第二时段中的每种情绪的总体程度,从而可以减少噪声,并且提高情绪估计单元108估计的可靠性。
情绪估计单元108最终基于第一时段中的每种情绪的程度和第二时段中的每种情绪的程度来估计用户的情绪。这时,情绪估计单元108基于每种情绪的程度以及情绪的分类将用户的情绪数字化(例如,在0到100的范围内进行数字化的情况下,“喜悦为50”等)。
情绪估计单元108估计情绪分类如下。亦即,例如当在第一时段中“恐惧”的程度最高且第二时段中“快乐”的程度最高的情况下,若(1)在第一时段中“恐惧”的程度大于预定阈值,那么情绪估计单元108估计用户的情绪为“恐惧”,若(2)在第一时段中“恐惧”的程度等于或小于预定阈值,那么情绪估计单元108估计用户的情绪为“快乐”。其原因在于,在第一时段中的“恐惧”的程度大于预定阈值的情况下,很大可能“恐惧”是用户在瞬间表现出的真实情绪,而在第一时段中的“恐惧”的程度小于或等于阈值的情况下,很可能“恐惧”是噪声。
现在,在图2A所示的流程图中,导航装置100的控制器101获取由情绪估计单元108估计的用户的情绪和由个人识别单元109指定的用户的ID。个人识别单元109基于车载摄像头12拍摄到的图像识别用户,并且参考个人ID数据库指定识别出的用户的ID。
此外,控制器101基于GPS接收单元107接收到的GPS信号获取车辆10的位置,并且从时钟103获取时间。接着,控制器101将用户的情绪、用户的ID、位置和时间彼此关联(步骤S111)。可以考虑情绪估计单元108中的估计的时间来校正车辆10的位置和时间。
控制器101通过通信单元102将表明相互关联的用户的情绪、用户的ID、位置和时间的信号发送至中心20(步骤S112)。此后,控制器101在第一预定时间过去之后再次执行步骤S111的处理流程。
情绪估计单元108可能对车辆10的所有乘员进行情绪估计,或者可能对车辆10的乘员中的驾驶员进行情绪估计。除了面部表情、手势和音调之外,情绪估计单元108还可以根据例如血压或脉搏估计用户的情绪。根据实施例的“面部表情”、“手势”和“音调(语音)”是“生物信息”的示例。
2、一般情绪数据库构建
中心20的控制器21从包括车辆10的多辆车中的每一个车辆依次地获取相互关联的用户情绪、用户ID、用户位置、时间。控制器21针对每个用户ID收集相互关联的用户情绪、用户ID、用户位置、时间,从而构建一般情绪数据库25。亦即,可以说,一般情绪数据库25是用户的情绪数据库的集合。
在某一用户在某一点处的情绪被多次估计的情况下,控制器21可能按时间(或时间带)对情绪进行分类,并且可能收集用户的情绪,或者可能获得数字化的情绪的(i)简化值、(ii)乘积和、(iii)平均值,或(iv)归一化值,并且可能将所获得的值收集为用户的情绪。
现在,在图2B所示的流程图中,控制器21判定是否从包括车辆10的任意车辆接收到表明情绪的数据(即相互关联的用户的情绪、用户的ID、位置和时间)(步骤S121)。在判定没有接收到表明情绪的数据的情况下(步骤S121:否),控制器21在第二预定时间过去之后再次执行步骤S121的判定。
在步骤S121中判定接收到表明情绪的数据的情况下(步骤S121:是),控制器21基于接收到的表明情绪的数据来构建或更新一般情绪数据库25(步骤S122)。
搜索并提示行驶路线
接下来,将参考图3A到图7B并且结合图1描述路线信息提示系统1中的行驶路线的搜索和提示方法。
除了地图信息之外,中心20的地图数据库24还存储候选目的地(例如车站、医院、酒店、景区、商店、办事处等)的信息和道路的特征信息(例如海边、风景好的地方、小的坡度、学校区域等)。个人信息数据库26存储与用户的简况(例如,年龄、性别等)相关联的用户的ID。
个人情绪地图分析单元28根据与在一般情绪数据库25中收集的任意用户(例如,由控制器21表明的用户)相关的情绪数据库和存储在地图数据库24中的地图信息生成个人情绪地图。个人情绪地图是在与地图信息相关联的用户在道路上的多个点中的每个点处的用户情绪的信息。
个人情绪地图分析单元28基于所生成的个人情绪地图来执行与个人情绪地图对应的用户的简况分析。作为简况分析的结果,指定或估计用户的相对频繁的情绪、偏好、期望的候选目的地等。例如,在与夜间山路有关的情绪是“快乐”的情况下,将会估计出“喜欢夜间的山路”的偏好。或者,在棒球场附近情绪为“愉悦”的程度相对大时,将“棒球场”估计为期望的候选目的地。
以下将参考图3A和3B进一步描述个人情绪地图分析单元28的简况分析。在图3A中,实线表示车辆10在19:00至21:00的时间段内行驶的所沿着的行驶路线。图3A的标志“×”表示估计出车辆10的用户的情绪的点(即与情绪相关联的位置)。可以说,图3A是具有与车辆10的用户的情绪数据相关联的行驶路线(即地图)的个人情绪地图的示例。图3B示出了当车辆10沿着图3A所示的行驶路线行驶时用户的情绪(在这种情况下为“快乐”)的程度的变化。
个人情绪地图分析单元28从一般情绪数据库25中提取在某一时间段(在图3A和3B中19:00至21:00)中与车辆10的用户相关的情绪数据,并且根据存储在地图数据库24中的地图信息生成如图3A所示的个人情绪地图。
接着,个人情绪地图分析单元28基于包括在地图信息中的特征信息(在图3A和3B中为“海边”、“山路”、“市区”)计算例如车辆10的用户对于道路的每个特征的情绪的平均值。在图3B所示的例子中,假设在“海边”的“情绪”平均值为30,在“山路”的“快乐”的平均值为80,在“市区”的“快乐”的平均值为10。
接着,个人情绪地图分析单元28参照例如对道路的每个特征的情绪的平均值来执行对车辆10的用户的简况分析。在图3A和图3B所示的例子中,由于在“山路”上“快乐”的平均值超过并且高于其他平均值,个人情绪地图分析单元28估计车辆10的用户的偏好为例如“喜爱夜间的山路”。
个人情绪地图分析单元28将与简况分析的结果连同受分析的用户的ID发送至控制器21。控制器21基于用户的ID和分析结果更新存储在个人信息数据库26中并且与用户的ID相关联的简况。
考虑与特定用户相关的情绪数据库(作为一般情绪数据库25的一部分)的更新频率等,个人情绪地图分析单元28可能定期或不定期地再次生成用户的个人情绪地图,并且可能执行简况分析。
在从车辆10接收到表明用户的ID和车辆10的当前位置以及目的地的信号的情况下,中心20的控制器21基于由接收到的信号表明的用户的ID从个人信息数据库26中获取用户的简况。在个人情绪地图分析单元28已经进行个人情绪地图的分析(即用户的简况分析)的情况下,除了年龄或性别之外,在从个人信息数据库26中获得的简况中包括例如偏好、期望的候选目的地等。
控制器21基于从个人信息数据库26获取的简况和从时钟23获取的当前时间,根据一般情绪数据库25和存储在地图数据库24中的地图信息中生成一个或多个一般情绪地图。类似于上述的个人情绪地图,一般情绪地图是多个用户中的每个用户在道路上的多个点中的每个点处的的情绪与地图信息相关联而生成的信息。在图4中,深半色调圆和浅半色调圆代表彼此不同的情绪。半色调圆的大小表明情绪的强度(程度)。
控制器21可以在任意条件下生成一般情绪地图。在从个人信息数据库26获取的简况是例如“20岁,男”、当前时间是“19:20”的情况下,控制器从一般情绪数据库25中提取例如一个20岁的男性在19:00-20:00的情绪,和与情绪相关的位置,并根据提取出的情绪和位置以及地图信息生成一般情绪地图。在从个人信息数据库26获取的简况是例如“喜欢在山路行驶的女性”、当前时间是“9:50”的情况下,控制器从一般情绪数据库25中提取例如一个女性在9:00-10:00的情绪和与情绪相关的位置,并且根据提取出的情绪和位置以及地图信息生成一般情绪地图。
控制器21基于获取到的简况和生成的一个或多个一般情绪地图计算从车辆10的当前位置到目的地的行驶路线。此时,控制器21可能计算一条行驶路线,或者可能根据一个一般情绪地图计算多条行驶路线。可选地,控制器21可能根据多个一般情绪地图计算一条行驶路线。
具体地,控制器21计算从车辆10的当前位置到目的地的行驶路线,从而包括与在上述“二十岁,男性”和“19:20”条件下生成的一般情绪地图表明的“快乐”等积极情绪相关联的较大数量的点,或者没有包括或包括很少与“愤怒”等消极情绪相关联的点。在这种情况下,由于除了“二十岁,男性”之外没有其他条件(即简况),所以在计算行驶路线时主要考虑情绪。
可选地,控制器21计算从车辆10的当前位置到目的地的行驶路线,从而包括在与上述“偏好在山路上行驶”和“9:50”的条件下生成的一般情绪地图表明的例如积极情绪相关联的点中与山路相关联的数量比较大的点。在这种情况下,由于存在“偏好在山路上行驶,女性”的条件,在计算行驶路线时,除了考虑情绪外,还考虑了地形。
以下将参照图5A和5B进一步描述由控制器21对行驶路线的计算。在图5A中,假设黑色圆圈表明车辆10的当前位置,黑色三角形表明车辆10的目的地。“A路线”和“B路线”是从车辆10的当前位置到目的地的候选行驶路线。图5B示出(i)沿着A路线(上侧)行驶的情况下的情绪(在这种情况下为“快乐”)的程度的变化,以及(ii)在从一般情绪地图提取的B路线(下侧)行驶的情况下的情绪的程度的变化。
控制器21基于与车辆10的用户相关的简况和从时钟23获取的当前时间,根据一般情绪数据库25和地图信息生成一般情绪地图。与生成一般情绪地图并行地,控制器21基于地图信息计算从车辆10的当前位置到目的地的候选行驶路线。
接下来,控制器21获得与候选行驶路线相关的情绪特征。在图5B所示的例子中,对于A路线,假设“快乐”的平均值为45,“快乐”的最大值为60,并且在“快乐”的程度大于或等于例如70的情况下点的数量为零。对于B路线,假设“快乐”的平均值为70,“快乐”的最大值为90,并且在“快乐”的程度大于或等于例如70的情况下点的数量为6。
接下来,控制器21基于与候选行驶路线相关的情绪特征,将适合于车辆10的用户的行驶路线候选设置为行驶路线。在如图5A和图5B所示的例子中,由于B路线中的“快乐”优于A路线,所以控制器21将B路线设置为行驶路线。应该注意的是,优势取决于平均值、最大值和点数。除了平均值、最大值和点数之外,还可以使用其他指标来确定行驶路线。
控制器21通过通信单元22向车辆10发送表明包括计算出的行驶路线的路线信息的信号。在从中心20接收到表明路线信息的信号的情况下,车辆10的导航装置100的控制器101在显示单元104上显示与由接收到的信号表明的与行驶路线有关的信息。在这里,“与行驶路线有关的信息”不限于行驶路线本身,也可以是表明行驶路线的特征的文件等(参见图6)(或用于计算行驶路线的参考)。
控制器21可能预先生成例如具有相对高通用性的一般情绪地图,例如,按年龄的一般情绪地图,并且可能将一般情绪地图存储在一般情绪地图数据库27中。此外,控制器21可能定期或不定期地更新存储在一般情绪地图数据库27中的一般情绪地图。
根据本实施例的“一般情绪数据库25”、“个人情绪地图”以及“一般情绪地图”分别是“情绪数据库”、“第一情绪地图”和“第二情绪地图”的例子。
现在,在图7A中,导航装置100的控制器101判定是否存在目的地设置(步骤S211)。在通过作为用户界面的操作单元106设定目的地的情况下,控制器101判定存在目的地设置。
在步骤S211判定了存在目的地设置的情况下(步骤S211:是),控制器101通过通信单元102向中心20发送表明由个人识别单元109指定的用户的ID、基于由GPS接收单元107接收到的GPS信号指定的车辆10的位置、以及目的地的信号(步骤S212)。
接着,控制器101判定是否从中心20接收表明路线信息的信号(步骤S213)。在判定没有接收到表明路线信息的信号的情况下(步骤S213:否),控制器再次执行步骤S213的判定(即控制器101处于待机状态,直到接收到表明路线信息的信号为止)。即使在步骤S212的处理流程中发送表明用户的ID等信号之后已经过去了第三预定时间,当没有接收到表明路线信息的信号的情况下,控制器101会暂时中止如图7A所示的处理流程。
在步骤S213中判定接收到表明路线信息的信号的情况下(步骤S213:是),控制器101在显示单元104上显示与由所接收到的信号表明的行驶路线有关的信息(例如,参见图6所示的“1、[情绪]来自你的偏好”、“2、[情绪]来自像你的人”、“3、[情绪]当前推荐”)(步骤S214)。
图6所示的“1、[情绪]来自你的偏好”的行驶路线,是鉴于例如包括在简况中的“偏好在山路行驶”或“偏好在海边的路上行驶”,例如“偏好在山路行驶,女性”或“偏好在海边的路上行驶,男性”,根据一般情绪地图计算出的行驶路线。如图6所示的“2、[情绪]来自像你的人”的行驶路线是根据例如按年龄的一般情绪地图,或者当从一般情绪数据库25中提取出具有相同偏好的用户的情绪(例如“偏好在海边的路上行驶”)时生成的一般情绪地图,计算出的行驶路线。如图6所示的“3、[情绪]当前推荐”的行驶路线是根据例如按时间带的一般情绪地图,或者当从一般情绪数据库25中提取最后30分钟的情绪时生成的一般情绪地图,计算出的行驶路线。
与如图7A所示的处理流程并行地,控制器101可能基于在导航装置100中的地图信息(未图示)计算从车辆10的当前位置到目的地的行驶路线。然后,在步骤S214的处理流程中,除了与由接收到的信号表明的行驶路线相关的信息之外,控制器101可能在显示单元104上显示与计算出的行驶路线相关的信息(例如,参见图6的“4、最短路线”、“5、通畅道路优先”)。
例如,当在显示单元104上显示如图6所示的行驶路线的信息时,在车辆10的用户通过操作单元106选择了一条行驶路线的情况下,控制器101执行适当的控制,使得显示单元104和语音输出单元105将车辆10引导至所选择的行驶路线。
在步骤S211中判定没有设定目的地的情况下(步骤S211:否),控制器101通过通信模块102向中心20发送表明由个人识别单元109指定的用户的ID的信号和基于GPS接收单元接收到的GPS信号的车辆10的位置的信息(步骤S215)。
接着,控制器101判定是否接收到从中心20发来的表明目的地的信号(步骤S216)。“目的地信息”是表明推荐车辆通过的点(所谓的下车目的地)和/或推荐车辆行驶的路线(所谓的目的地路线)的信息。
在步骤S216中判定没有接收到表明目的地信息的信号的情况下(步骤S216:否),控制器101再次执行步骤S216的判定(即控制器101处于待机状态,直到接收到表明目的地信息的信号)。即使在步骤S215的处理流程中在发送了表明用户的ID等的信号后已经过了第四预定时间,在没有接收到表明目的地信息的信号的情况下,控制器101会暂时中止如图7A所示的处理流程。
在步骤S216中判定接收到表明目的地信息的信号的情况下(步骤S216:是),控制器101在显示单元104上显示与由接收到的信号表明的目的地相关的信息,从而建议目的地(步骤S217)。
在图7B中,中心20的控制器21判定是否从包括车辆10的任意车辆中接收到至少包括用户ID和车辆位置的信号(步骤S221)。在判定没有接收到车辆信号的情况下(步骤S211:否),控制器21在第五预定时间过去之后再次执行步骤S221的判定。
当步骤S211中判定接收到车辆的信号时,控制器21判定是否分析包含在车辆信号中的用户ID相对应的个人情绪地图(步骤S222)。
在步骤S222中判定分析了个人情绪地图的情况下(步骤S222:是),控制器21执行如下所述的步骤S224的过程。在步骤S222中判定还没有分析个人情绪地图的情况下(步骤S222:否),控制器21生成与包括在车辆信号中的用户ID相对应的个人情绪地图,并执行控制使得个人情绪地图分析单元28对生成的个人情绪地图进行分析(步骤S223)。
接着,控制器21判定在车辆信号中是否包括目的地(步骤S224)。在判定不包括目的地的情况下(步骤S224:是),控制器21从个人信息数据库26中获取与包括在车辆信号里的用户ID相对应的简况,并从时钟23中获取当前时间。控制器21基于获取到的简况和当前时间,根据一般情绪数据库25和存储在地图数据库24中的地图信息生成一个或多个一般情绪地图(步骤S225)。
接着,控制器21基于所获取的简况和所生成的一般情绪地图计算从车辆10的当前位置到目的地的行驶路线(步骤S226)。接着,控制器21通过通信单元22向车辆10发送表明路线信息的信号,该路线信息包括计算出的行驶路线(步骤S227)。
当在步骤S224中判定没有包括目的地的情况下(步骤S224:否),控制器21从一般情绪数据库25中提取最后30分钟的情绪以及与情绪有关的位置,并且根据提取出的情绪和位置以及存储在地图数据库24中的地图信息生成一般情绪地图。可选地,控制器21可能从一般情绪数据库25提取例如具有与包含在获取到的简况中的偏好相同的的用户的情绪以及与情绪相关联的位置,并根据提取出的情绪和位置以及地图信息生成一般情绪地图(步骤S228)。接下来,控制器21参考所获取到的简况从生成的一般情绪地图中搜索与特定的情绪(例如,积极情绪,如“快乐的”,或消极情绪,如“愤怒”)相关联的点,或特定情绪的强度相对较大的点,并且判定推荐车辆通过的点和/或推荐车辆沿着行驶的路线(步骤S229)。
接着,控制器21通过通信单元22向车辆10发送表明目的地信息的信号,该目的地信息包括推荐车辆通过的点和/或推荐车辆沿着行驶的路线(步骤S230)。
根据本实施例的“控制器101”、“显示单元104”、“个人识别单元109”和“个人情绪地图分析单元28”分别是“获取单元”、“提示单元”、“识别单元”和“第一生成单元”的示例。根据本实施例的“通信单元102”是“传输单元”和“接收单元”的示例。根据本实施例的“控制器21”是“第二生成单元”和“搜索单元”的示例。
技术效果
在路线信息提示系统1中,根据与车辆10的用户有关的个人情绪地图来估计用户的偏好等,并从一般情绪地图中搜索根据用户的简况的行驶路线,该一般情绪地图基于包括估计出的偏好等的简况等生成。也就是说,在路线信息提示系统1中,使用个人情绪地图和一般情绪地图搜索从车辆10的当前位置到目的地的行驶路线。
根据车辆行驶的道路的风景或交通情况的好坏,或当车辆行驶在充满回忆或有特殊情绪的地方附近时,会引发车辆上的乘员的情绪。也就是说,可以说,车上的乘员的情绪与道路(或行驶路线)之间存在因果关系。出于这个原因,上述的从车辆10的当前位置到目的地的行驶路线预计是车辆10的用户的优选的行驶路线。相应地,利用这个路线信息提示系统1,可以向车辆10的用户提示合适的行驶路线。
变形例
在由于用户未设定目的地而推荐所谓的下落目的地或下落路线的情况下(参照步骤S215至S217、S228至S230),中央20的控制单元21可能向车辆10发送表明根据最后30分钟生成的情绪、与情绪相关联的位置和地图信息生成的一般情绪地图的信息,而不是或除了目的地信息。在这种情况下,车辆10的导航装置100的控制单元101可能在显示单元104上显示一般情绪地图,而不是或者除了建议目的地。
采用这样的结构,车辆10的用户(驾驶员)自己可以在选择与特定情绪(例如积极情绪)相关联的点的同时驾驶车辆10。
本发明不限于上述实施例,并且在不脱离可从权利要求和说明书全文理解的本发明的本质的前提下可以作出变形。包括这些变形的车载装置和路线信息提示系统同样包含在本发明的技术范围之内。
Claims (14)
1.一种车载装置,其特征在于,包括:
识别单元,配置为将主车辆上的用户识别为主车辆用户;
获取单元,配置为获取所述主车辆的当前位置和目的地;
传输单元,配置为将第一信号发送至位于所述主车辆外部的外部装置,所述第一信号表明所述主车辆用户、所述当前位置和所述目的地;
接收单元,配置为从所述外部装置接收第二信号,所述第二信号表明从所述当前位置到所述目的地的行驶路线,
该行驶路线是在所述外部装置中使用1)第一情绪地图和2)第二情绪地图搜索到的,
所述第一情绪地图是基于情绪信息和地图信息生成的信息,所述情绪信息是在对应于多个用户且表明道路上的多个点中的每个点处的情绪状态的多种情绪信息之中、对应于所述主车辆用户的情绪信息,并且所述第一情绪地图是将由对应于所述主车辆用户的情绪信息所表明的所述主车辆用户在所述道路上的所述多个点中的每个点处的情绪状态、与所述地图信息相关联而生成的信息,
所述第二情绪地图是基于所述多种情绪信息的至少一部分和所述地图信息生成的信息,并且是将所述多种情绪信息的至少一部分所表明的所述多个用户中的每个用户在所述道路上的所述多个点中的每个点处的情绪状态、与所述地图信息相关联而生成的信息;以及
提示单元,配置为提示由所述第二信号表明的所述行驶路线。
2.根据权利要求1所述的车载装置,其特征在于,还包括情绪状态估计单元,所述情绪状态估计单元配置为检测所述主车辆用户的生物信息,并基于检测到的生物信息估计所述主车辆用户的情绪状态,
其中,所述传输单元配置为将第三信号发送至所述外部装置,所述第三信号表明将估计出的情绪状态、主车辆位置及主车辆用户彼此关联而生成的信息。
3.根据权利要求2所述的车载装置,其特征在于,还包括车载摄像头,所述车载摄像头配置为对主车辆的车厢内进行成像,
其中,所述情绪状态估计单元配置为从所述车载摄像头拍摄的图像中检测用户。
4.根据权利要求3所述的车载装置,其特征在于,
所述生物信息包括所述用户的面部信息;以及
所述情绪估计单元配置为识别检测到的用户的面部表情,并基于识别出的面部表情的特征估计所述主车辆用户的情绪状态。
5.根据权利要求3或4所述的车载装置,其特征在于,
所述生物信息包括用户的手势;以及
所述情绪估计单元配置为识别检测到的用户的手势,并基于识别出的手势的特征估计所述主车辆用户的情绪状态。
6.根据权利要求2至5中任一项所述的车载装置,其特征在于,还包括麦克风,所述麦克风配置为检测所述主车辆的车厢内的声音,其中:
所述生物信息包括所述用户的语音;以及
所述情绪估计单元配置为从所述麦克风检测到的车厢内的声音中识别语音,并基于识别出的语音的特征估计所述主车辆用户的情绪状态。
7.根据权利要求1至6中任一项所述的车载装置,其特征在于,所述第二情绪地图是将根据时间带、星期几、季节、用户年龄和性别中的任意条件所提取的所述多个用户中的每个用户的情绪、与所述地图信息相关联而生成的信息。
8.一种路线信息提示系统,其特征在于,包括:
车载装置;以及
外部装置,其设置在搭载有所述车载装置的车辆的外部;其中:
所述车载装置配置为:
将车辆中的用户识别为主车辆用户,
获取所述车辆的当前位置和目的地,以及
将第一信号发送至所述外部装置,所述第一信号表明所述主车辆用户、所述当前位置和所述目的地;
所述外部装置包括情绪数据库和地图数据库,
所述情绪数据库配置为存储对应于多个用户且表明道路上的多个点中的每个点处的情绪状态的多种情绪信息,所述地图数据库配置为存储地图信息;
所述外部装置配置为:
基于所存储的多种情绪信息之中与由所述第一信号表明的所述主车辆用户相对应的情绪信息和所存储的地图信息生成第一情绪地图,所述第一情绪地图是将由对应于所述主车辆用户的所述情绪信息表明的所述主车辆用户在所述道路上的所述多个点中的每个点处的情绪状态、与所存储的地图信息相关联而生成的信息;
基于所存储的多种情绪信息的至少一部分和所存储的地图信息生成第二情绪地图,所述第二情绪地图是将由所存储的多种情绪信息的至少一部分表明的所述多个用户中的每个用户在所述道路上的所述多个点中的每个点处的情绪状态、与所存储的地图信息相关联而生成的信息;
使用所述第一情绪地图和所述第二情绪地图搜索从由所述第一信号表明的所述当前位置到由所述第一信号表明的所述目的地的行驶路线;并且
所述车载装置还配置为提示由接收到的第二信号表明的行驶路线。
9.根据权利要求8所述的路线信息提示系统,其特征在于:
所述车载装置配置为:
检测所述主车辆用户的生物信息,并基于检测到的生物信息估计所述主车辆用户的情绪状态,并将第三信号发送至所述外部装置,所述第三信号表明将估计出的情绪状态、主车辆位置和主车辆用户相关联而生成的信息;并且
所述情绪数据库通过由所述第三信号表明的信息来构造或更新。
10.根据权利要求9所述的路线信息提示系统,其特征在于,还包括车载摄像头,所述车载摄像头配置为对所述主车辆的车厢内进行成像,
其中,所述车载装置配置为从所述车载摄像头拍摄的图像中检测用户。
11.根据权利要求10所述的路线信息提示系统,其特征在于:
所述生物信息是所述用户的面部信息;以及
所述车载装置配置为识别检测到的用户的面部表情,并基于识别出的面部表情的特征估计所述主车辆用户的情绪状态。
12.根据权利要求10或11所述的路线信息提示系统,其特征在于:
所述生物信息是所述用户的手势;以及
所述车载装置配置为识别检测到的用户的手势,并基于识别出的手势估计所述主车辆用户的情绪状态。
13.根据权利要求9至12中任一项所述的路线信息提示系统,其特征在于,还包括麦克风,所述麦克风配置为检测所述主车辆的车厢内的声音,其中:
所述生物信息是所述用户的语音;以及
所述车载装置配置为从所述麦克风检测到的所述车厢内的声音中识别语音,并基于识别出的语音的特征估计所述主车辆用户的情绪状态。
14.根据权利要求9至13中任一项所述的路线信息提示系统,其特征在于,所述第二情绪地图是将根据时间带、星期几、季节、用户年龄和性别中的任意条件提取出的所述多个用户中的每个用户的情绪、与所述地图信息相关联而生成的信息。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016-248118 | 2016-12-21 | ||
JP2016248118A JP2018100936A (ja) | 2016-12-21 | 2016-12-21 | 車載装置及び経路情報提示システム |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108225366A true CN108225366A (zh) | 2018-06-29 |
Family
ID=60569775
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711397933.9A Pending CN108225366A (zh) | 2016-12-21 | 2017-12-21 | 车载装置与路线信息提示系统 |
Country Status (8)
Country | Link |
---|---|
US (1) | US20180172464A1 (zh) |
EP (1) | EP3343175A1 (zh) |
JP (1) | JP2018100936A (zh) |
KR (1) | KR20180072543A (zh) |
CN (1) | CN108225366A (zh) |
BR (1) | BR102017027622A2 (zh) |
RU (1) | RU2681429C1 (zh) |
TW (1) | TW201830350A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110517085A (zh) * | 2019-08-27 | 2019-11-29 | 新华网股份有限公司 | 生成展示报告方法、电子设备及计算机可读存储介质 |
CN110826436A (zh) * | 2019-10-23 | 2020-02-21 | 上海能塔智能科技有限公司 | 情绪数据传输及处理方法、装置、终端设备、云平台 |
CN110920628A (zh) * | 2018-09-03 | 2020-03-27 | 现代自动车株式会社 | 车辆和车辆系统 |
CN111415679A (zh) * | 2020-03-25 | 2020-07-14 | Oppo广东移动通信有限公司 | 站点识别方法、装置、终端及存储介质 |
CN113532456A (zh) * | 2020-04-21 | 2021-10-22 | 百度在线网络技术(北京)有限公司 | 用于生成导航路线的方法及装置 |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6513069B2 (ja) * | 2016-12-27 | 2019-05-15 | 本田技研工業株式会社 | 運転支援装置および運転支援方法 |
JP6499682B2 (ja) * | 2017-01-31 | 2019-04-10 | 本田技研工業株式会社 | 情報提供システム |
US11042619B2 (en) * | 2019-01-17 | 2021-06-22 | Toyota Motor North America, Inc. | Vehicle occupant tracking and trust |
JP7195161B2 (ja) * | 2019-01-22 | 2022-12-23 | 本田技研工業株式会社 | 案内システム、案内方法、およびプログラム |
JP2020148613A (ja) * | 2019-03-13 | 2020-09-17 | いすゞ自動車株式会社 | 情報処理装置 |
GB2583960A (en) * | 2019-05-16 | 2020-11-18 | Continental Automotive Gmbh | Method and system using mapped emotions |
JPWO2020250082A1 (zh) * | 2019-06-14 | 2020-12-17 | ||
JP2022054820A (ja) * | 2020-09-28 | 2022-04-07 | マツダ株式会社 | 走行経路設定装置 |
JP7453889B2 (ja) | 2020-10-02 | 2024-03-21 | フォルシアクラリオン・エレクトロニクス株式会社 | 演算装置およびプログラム |
WO2022180770A1 (ja) * | 2021-02-26 | 2022-09-01 | 享 山中 | プログラム、情報処理装置、及び情報処理方法 |
US20220357172A1 (en) * | 2021-05-04 | 2022-11-10 | At&T Intellectual Property I, L.P. | Sentiment-based navigation |
KR20240077627A (ko) * | 2022-11-24 | 2024-06-03 | 주식회사 피씨엔 | 비언어적 요소 기반 확장현실을 위한 사용자 감정 상호 작용 방법 및 시스템 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102538810A (zh) * | 2010-12-14 | 2012-07-04 | 国际商业机器公司 | 用于导航规划和地图的人类情感度量的方法和系统 |
WO2015162949A1 (ja) * | 2014-04-21 | 2015-10-29 | ソニー株式会社 | 通信システム、制御方法、および記憶媒体 |
WO2016121174A1 (ja) * | 2015-01-30 | 2016-08-04 | ソニー株式会社 | 情報処理システムおよび制御方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10302677A1 (de) * | 2003-01-24 | 2004-07-29 | Robert Bosch Gmbh | Navigationsvorrichtung |
GB0520576D0 (en) * | 2005-10-10 | 2005-11-16 | Applied Generics Ltd | Using traffic monitoring information to provide better driver route planning |
RU103415U1 (ru) * | 2010-04-19 | 2011-04-10 | Общество с ограниченной ответственностью "Производственная компания "АТПП" | Цифровое электронное устройство контроля и регистрации движения транспортного средства и режимов труда и отдыха водителя |
JP6464572B2 (ja) | 2014-05-30 | 2019-02-06 | 日産自動車株式会社 | 経路情報提示システム及び経路情報提示方法 |
JP6487739B2 (ja) | 2015-03-23 | 2019-03-20 | アイシン・エィ・ダブリュ株式会社 | 経路探索システム、経路探索方法及びコンピュータプログラム |
JP6455277B2 (ja) | 2015-03-27 | 2019-01-23 | アイシン・エィ・ダブリュ株式会社 | 施設案内システム、施設案内方法および施設案内プログラム |
-
2016
- 2016-12-21 JP JP2016248118A patent/JP2018100936A/ja active Pending
-
2017
- 2017-11-30 US US15/827,673 patent/US20180172464A1/en not_active Abandoned
- 2017-11-30 TW TW106141737A patent/TW201830350A/zh unknown
- 2017-12-01 KR KR1020170164287A patent/KR20180072543A/ko not_active Application Discontinuation
- 2017-12-04 RU RU2017142093A patent/RU2681429C1/ru active
- 2017-12-04 EP EP17205094.0A patent/EP3343175A1/en not_active Withdrawn
- 2017-12-20 BR BR102017027622-8A patent/BR102017027622A2/pt not_active IP Right Cessation
- 2017-12-21 CN CN201711397933.9A patent/CN108225366A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102538810A (zh) * | 2010-12-14 | 2012-07-04 | 国际商业机器公司 | 用于导航规划和地图的人类情感度量的方法和系统 |
WO2015162949A1 (ja) * | 2014-04-21 | 2015-10-29 | ソニー株式会社 | 通信システム、制御方法、および記憶媒体 |
WO2016121174A1 (ja) * | 2015-01-30 | 2016-08-04 | ソニー株式会社 | 情報処理システムおよび制御方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110920628A (zh) * | 2018-09-03 | 2020-03-27 | 现代自动车株式会社 | 车辆和车辆系统 |
CN110517085A (zh) * | 2019-08-27 | 2019-11-29 | 新华网股份有限公司 | 生成展示报告方法、电子设备及计算机可读存储介质 |
CN110517085B (zh) * | 2019-08-27 | 2022-06-07 | 新华网股份有限公司 | 生成展示报告方法、装置、电子设备及存储介质 |
CN110826436A (zh) * | 2019-10-23 | 2020-02-21 | 上海能塔智能科技有限公司 | 情绪数据传输及处理方法、装置、终端设备、云平台 |
CN111415679A (zh) * | 2020-03-25 | 2020-07-14 | Oppo广东移动通信有限公司 | 站点识别方法、装置、终端及存储介质 |
CN111415679B (zh) * | 2020-03-25 | 2023-02-28 | Oppo广东移动通信有限公司 | 站点识别方法、装置、终端及存储介质 |
CN113532456A (zh) * | 2020-04-21 | 2021-10-22 | 百度在线网络技术(北京)有限公司 | 用于生成导航路线的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
KR20180072543A (ko) | 2018-06-29 |
JP2018100936A (ja) | 2018-06-28 |
TW201830350A (zh) | 2018-08-16 |
EP3343175A1 (en) | 2018-07-04 |
US20180172464A1 (en) | 2018-06-21 |
RU2681429C1 (ru) | 2019-03-06 |
BR102017027622A2 (pt) | 2018-08-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108225366A (zh) | 车载装置与路线信息提示系统 | |
AU2018270758B2 (en) | Using telematics data to identify a type of a trip | |
CN107209019B (zh) | 信息处理系统和控制方法 | |
CN106293032B (zh) | 便携终端设备及其控制方法和装置 | |
US9305317B2 (en) | Systems and methods for collecting and transmitting telematics data from a mobile device | |
US9152609B2 (en) | Vehicle state detection | |
US9141975B2 (en) | Inferring user risk profile from travel patterns | |
CN107886045B (zh) | 设施满意度计算装置 | |
CN107402397B (zh) | 基于移动终端的用户活动状态确定方法、装置及移动终端 | |
JP2010020702A (ja) | バリア情報提供システム及び方法とこれに用いる低速車両 | |
CN107391604A (zh) | 基于活动状态的地图样式显示方法、装置及移动终端 | |
CN110100153B (zh) | 信息提供系统 | |
JP2020165692A (ja) | 制御装置、制御方法およびプログラム | |
US20220357172A1 (en) | Sentiment-based navigation | |
JP6478221B2 (ja) | 人物特定装置およびプログラム | |
US11657626B2 (en) | Emotion estimation apparatus | |
CN113320537A (zh) | 一种车辆控制方法和系统 | |
KR20220014943A (ko) | 주행 환경 연동 운전자 감정 판단 방법 및 시스템 | |
KR20120070888A (ko) | 제보방법, 이를 수행하는 전자기기 및 기록매체 | |
Bedogni et al. | Texting and driving recognition exploiting subsequent turns leveraging smartphone sensors | |
JP2023136194A (ja) | 情報処理装置、移動体、それらの制御方法、プログラム、及び記憶媒体 | |
CN116416192A (zh) | 一种检测的方法及装置 | |
CA2986992A1 (en) | In-vehicle device and route information presentation system | |
US20220306124A1 (en) | Information providing apparatus | |
CN107146445A (zh) | 移动终端路况信息提示方法、装置及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20180629 |