CN110100153A - 信息提供系统 - Google Patents

信息提供系统 Download PDF

Info

Publication number
CN110100153A
CN110100153A CN201680091678.2A CN201680091678A CN110100153A CN 110100153 A CN110100153 A CN 110100153A CN 201680091678 A CN201680091678 A CN 201680091678A CN 110100153 A CN110100153 A CN 110100153A
Authority
CN
China
Prior art keywords
information
emotion
route
mentioned
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680091678.2A
Other languages
English (en)
Other versions
CN110100153B (zh
Inventor
鹿内新平
铃木章平
稻井由香里
中岛泰子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN110100153A publication Critical patent/CN110100153A/zh
Application granted granted Critical
Publication of CN110100153B publication Critical patent/CN110100153B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3453Special cost functions, i.e. other than distance or default speed limit of road segments
    • G01C21/3484Personalized, e.g. from learned user behaviour or user-defined profiles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/3407Route searching; Route guidance specially adapted for specific applications
    • G01C21/343Calculating itineraries, i.e. routes leading from a starting point to a series of categorical destinations using a global route restraint, round trips, touristic trips
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/764Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/52Network services specially adapted for the location of the user terminal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/50Network services
    • H04L67/535Tracking the activity of the user
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Multimedia (AREA)
  • Automation & Control Theory (AREA)
  • Social Psychology (AREA)
  • Medical Informatics (AREA)
  • Signal Processing (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Computation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Navigation (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明的目的在于提供信息提供系统,该信息提供系统能够根据作为驾驶员的用户提供合适的信息。具有路线提案部(71),该路线提案部(71)根据由检测用户(3)的情感的情感检测部(70)检测出的情感信息和与情感信息相关联的地点信息提出路线,路线提案部(71)设定从出发地点到最终引导地点的期间的作为目标的情感类别,并且根据情感信息和地点信息来提出包含与所设定的情感类别对应的地点的路线。

Description

信息提供系统
技术领域
本发明涉及信息提供系统。
背景技术
以往,提出了自动搜索到达指定的目的地的路线并进行引导的导航系统。这样的导航系统搜索从当前位置到指定的目的地的移动距离或时间为最短的路线,并向用户提示搜索结果,或者对用户进行基于搜索结果的路线引导。
作为这样的系统,以往公开了如下技术:该系统具有确定一起行动的多个用户的用户确定部、估计所确定出的多个用户的关联性的估计部以及根据估计出的多个用户的关联性来生成针对多个用户的引导信息的生成部,考虑到多个用户的关联性而进一步生成最佳的引导信息(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:WO2016/121174公报
发明内容
发明要解决的课题
但是,这样的导航系统将情感作为一个检测参数来对待,从而提出了路线,但并不是用户通过所提出的路线而成为所要求的情感的路线设定,因而要求改善。
因此,本发明的目的在于,提供一种根据用户来适当提出设定成用户所要求的情感的路线的系统。
用于解决课题的手段
为了达成上述目的,本发明的信息提供系统的特征在于,具有路线提案单元(71),该路线提案单元(71)根据由检测用户(3)的情感的情感检测单元(70)检测出的情感信息和与上述情感信息相关联的地点信息来提出路线,上述路线提案单元(71)设定在从出发地点到最终引导地点的期间作为目标的情感类别,并且根据上述情感信息和上述地点信息,提出包含与所设定的上述情感类别对应的地点的路线。
在上述结构中,也可以具有情感信息记录单元(64),该情感信息记录单元(64)将上述情感信息、上述地点信息以及外部信息关联起来进行记录,上述路线提案单元(71)根据与上述情感类别相关联的上述外部信息,提出经过处于与作为上述目标的情感类别相关联的外部状况的地点的路线。
并且,在上述结构中,上述路线提案单元(71)也可以根据多个上述用户(3)的情感信息来设定多个上述用户的性格类别,根据与作为对象的用户(3)的性格类别相同的其他用户(3)的情感类别来设定上述目标情感类别。
在上述结构中,上述路线提案单元(71)也可以提出经过与作为不同的上述目标的情感类别相关联的多个地点的路线。
在上述结构中,也可以对上述情感类别设定积极标志或消极标志,将上述地点中的设定了上述积极标志的地点设为最终引导地点。
发明效果
在本发明中,具有路线提案单元,该路线提案单元根据由检测用户的情感的情感检测单元检测出的情感信息和与情感信息相关联的地点信息来提出路线,路线提案单元设定从出发地点到最终引导地点的期间的作为目标的情感类别,并且根据情感信息和地点信息来提出包含与所设定的情感类别对应的地点的路线。由此,能够对用户提出经过处于目标情感类别的地点的路线。其结果是,能够以产生情感的起伏的方式设定路线,用户能够进行有故事感的路线的行驶。
另外,具有将情感信息、地点信息以及外部信息关联起来进行记录的情感信息记录单元,路线提案单元部根据与情感类别相关联的外部信息,提出经过处于与目标情感类别相关联的外部状况的地点的路线。由此,能够对用户提出与使得成为目标情感类别的外部状况对应的路线。
并且,路线提案单元根据多个用户的情感信息来设定多个用户的性格类别,根据与作为对象的用户的性格类别相同的其他用户的情感类别来设定目标情感类别。由此,能够根据用户的性格类别来较多地收集与情感类别相关联的地点信息,能够提出基于较多的地点信息的路线。
并且,路线提案单元提出经过与设为不同目标的情感类别相关联的多个地点的路线。由此,能够以在一条路线中处于不同的情感类别的方式提出路线。
并且,对情感类别设定积极标志或消极标志,将地点中的设定了积极标志的地点设为最终引导地点。由此,能够提出用户处于积极情感的最终引导地点的路线。
附图说明
图1是示出本发明的实施方式的信息提供系统的图。
图2是示出终端装置和服务器的硬件结构的框图。
图3是示出情感信息的记录例的图。
图4是示出设定了目标情感类别的例子的图。
图5是示出设定了目标情感类别的其他例子的图。
图6是示出情感的检测动作的流程图。
图7是示出路线提案动作的流程图。
图8是示出阅览信息生成动作的流程图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
图1是示出本发明的实施方式的信息提供系统的图。
信息提供系统1是如下的系统:该系统具有分别搭载在作为车辆的机动二轮车2中的各个机动二轮车上的终端装置10和能够经由通信网络25与终端装置10进行通信的服务器60,提供与作为机动二轮车2的驾驶员的用户3的路线设定或路线记录相关的信息。
通信网络25是在机动二轮车2行驶的期间能够与终端装置10进行无线通信的广域通信网络25。通信网络25可以是因特网等开放的网络,也可以是封闭的通信网络。在通信网络25是开放的网络的情况下,终端装置10和服务器60也可以使用VPN(Virtual PrivateNetwork:虚拟专用网络)技术等在通信网络25上执行安全的通信。另外,通信网络25的网络结构和通信协议没有特别限定。
图2是示出终端装置10和服务器60的硬件结构的框图。
终端装置10具有终端侧通信部11、终端侧控制部12、终端侧存储部13、显示部14、声音输入输出部15、操作部16、驾驶信息取得部20、外部信息取得部21、活体信息取得部22以及地点信息取得部23。终端侧通信部11在终端侧控制部12的控制下进行遵循无线通信协议的通信处理,从而经由通信网络25与服务器60进行通信。
终端侧控制部12由处理器和周边电路构成,通过利用处理器来执行存储在终端侧存储部13中的程序,从而作为进行终端装置10的各部的控制和实现各种功能的处理的计算机单元来发挥功能。
终端侧存储部13存储终端装置10进行各种处理所需的程序及数据。在该终端侧存储部13中可以广泛地应用公知的存储设备。
存储于终端侧存储部13的数据包含可分别识别出终端装置10、安装有该终端装置10的机动二轮车2以及驾驶机动二轮车2的用户3的识别信息。通过将该识别信息发送到服务器60,能够在服务器60侧确定终端装置10、机动二轮车2以及用户3。
显示部14例如由液晶面板或有机EL(Electro-Luminescence:电致发光)面板等显示面板构成,通过使用显示面板,能够利用文字或图形等任意的图像来传递各种各样的信息。
显示部14在终端侧控制部12的控制下通过显示向用户3通知信息。
声音输入输出部15在终端侧控制部12的控制下,从未图示的扬声器输出合成声音等声音,并且经由未图示的麦克风对用户3的声音进行收集。另外,声音输入输出部15在终端侧控制部12的控制下通过声音向用户3通知信息。
另外,在本实施方式中,构成为通过使终端装置10的各部(终端侧控制部12、声音输入输出部15、显示部14等)和服务器60联动地进行动作,能够与用户3进行对话。
操作部16具有接受用户3等的各种操作的操作件,将对操作件的操作输出到控制部。操作件可以应用多个硬件开关或设置于显示部14的触摸面板等。构成为能够通过该操作部16从外部设定可识别出终端装置10、机动二轮车2以及用户3的识别信息,或者能够输入期望的信息。
驾驶信息取得部20取得从机动二轮车2输出的与驾驶相关的信息(以下,称为驾驶信息),并将取得的驾驶信息输出到终端侧控制部12。
机动二轮车2具有节气门传感器30、制动传感器31、车速传感器32、变速齿轮传感器33以及倾斜角传感器34。
节气门传感器30检测机动二轮车2的节气门开度。制动传感器31检测机动二轮车2的前后有无制动操作。变速齿轮传感器33检测机动二轮车2的当前使用的变速齿轮。车速传感器32检测机动二轮车2的当前车速。倾斜角传感器34检测机动二轮车2的当前倾斜角。
该节气门传感器30、制动传感器31、车速传感器32、变速齿轮传感器33以及倾斜角传感器34的检测结果作为驾驶信息而被输出到驾驶信息取得部20。
驾驶信息取得部20也可以根据从机动二轮车2发送的检测结果,取得机动二轮车2的加速度。进而,在机动二轮车2具有TCS(牵引力控制系统)的情况下,还包含TCS是否工作的信息,在机动二轮车2具有ABS(Antilock Brake System:防抱死制动系统)的情况下,还包含ABS是否工作的信息。
驾驶信息取得部20能够根据这些取得的驾驶信息,判断机动二轮车2正在被稳定地驾驶,还是以不稳定的状态被驾驶。另外,也可以根据驾驶信息来判断用户的情感或特性。
另外,作为驾驶信息,并不限定于上述信息,例如可以追加与机动二轮车2的方向指示灯开关、头灯开关等操作系统的操作相关的信息、选择驾驶模式的模式选择器的信息等任意信息。
外部信息检测部40具有:前部摄像头41,其对机动二轮车2的前方进行拍摄;后部摄像头42,其对机动二轮车2的后方进行拍摄;气温传感器43,其检测气温;以及外部环境用麦克风44。
前部摄像头41和后部摄像头42可以搭载于机动二轮车2,也可以搭载于终端装置10,还可以搭载于头盔。
前部摄像头41对机动二轮车2的前方的景色、在前方行驶的车辆、例如直行、转弯等行驶道路的状况、行驶时的天气等进行拍摄。后部摄像头42对机动二轮车2的后方的景色、在后方行驶的车辆、行驶时的天气等进行拍摄。
由前部摄像头41和后部摄像头42拍摄到的图像被输出到终端装置10的外部信息取得部21,外部信息取得部21通过对发送来的图像进行解析,取得机动二轮车2的前方或后方的外部信息。
另外,可以设置雷达装置来代替前部摄像头41和后部摄像头42,或者除了前部摄像头41和后部摄像头42之外还设置雷达装置,也可以使电波、红外线、激光等进行扫描而取得外部信息。
另外,外部信息也可以是搭载于车辆的外部信息检测部40以外的信息,即,通过通信网络25从服务器60或终端设备10获得信息。此外,也可以从其他用户3所持有的终端装置10获得信息。在该情况下,例如,可以从服务器60获得目前要前往的其他地域的天气、气温、道路状况等信息,此外,可以获得其他用户3所持有的终端装置10所取得的外部信息。这样,在无法通过用户3的终端装置10取得外部信息时等也会变得方便。
气温传感器43检测机动二轮车2的外部的气温,并输出到外部信息取得部21。气温传感器43可以搭载于机动二轮车2,也可以搭载于终端装置10。
另外,除了气温传感器43之外,也可以追加湿度传感器、气压传感器、高度传感器等能够取得外部信息的其他传感器。
外部环境用麦克风44对机动二轮车2的周边的外部声音进行收集,并作为外部声音信息输出到外部信息取得部21。外部环境用麦克风44可以搭载于机动二轮车2,也可以搭载于终端装置10。
另外,地点信息取得部23取得从GPS装置45取得的机动二轮车2的当前地点。虽然未图示,但GPS装置45具有接收来自人造卫星的电波的GPS天线、方位传感器(陀螺仪传感器)、车速传感器、地图数据等公知的单元。
在地图数据中,除了道路信息之外,还包含加油站信息、超市或便利店等商业设施信息、餐厅等饮食店信息、火车站信息。进而,在本实施方式中,除此之外,在地图数据中还包含观光地(风景地)等人工建造设施信息、景色优美的场所等自然景观信息等。
活体信息取得部22发送从活体信息检测部50输出的活体信息。
活体信息检测部50具有面部摄像头51、体温传感器52、脉搏传感器53、汗液传感器54以及血压传感器55。
面部摄像头51拍摄用户3的表情,其可以搭载于头盔的内部,也可以搭载于机动二轮车2或终端装置10。
体温传感器52检测用户3的体温。脉搏传感器53检测用户3的脉搏。汗液传感器54检测用户3的出汗状态。血压传感器55检测用户的血压。
体温传感器52、脉搏传感器53以及汗液传感器54能够应用公知的生命传感器等,该体温传感器52、脉搏传感器53以及汗液传感器54可以构成为一个单元,也可以分别构成为各个传感器。
活体信息取得部22通过对从面部摄像头51发送的图像进行解析,例如取得是愉快的表情还是紧张的表情之类的用户3的表情。另外,根据从活体信息检测部50的体温传感器52、脉搏传感器53、汗液传感器54以及血压传感器55发送的检测结果,取得用户3的活体信息。
另外,活体信息检测部50并不限定于这些,可以根据需要使用任意的活体传感器。
另外,上述终端装置10也可以搭载于机动二轮车2,例如,也可以像智能手机或平板终端等那样是可携带的终端装置10。进而,也可以构成为GPS装置45具有作为终端装置10的功能。
接着,对服务器60进行说明。
如图2所示,服务器60具有服务器侧通信部61、服务器侧控制部62以及服务器侧存储部63。
服务器侧通信部61在服务器侧控制部62的控制下,通过进行遵循无线通信协议的通信处理,经由通信网络25(图1)而在服务器侧通信部61与多个终端装置10之间进行通信。
服务器侧控制部62具有处理能力比终端装置10的终端侧控制部12强的处理器,通过执行存储在服务器侧存储部63中的程序而作为进行服务器60的各部的控制以及实现各种功能的处理的计算机单元来发挥功能。
该服务器侧控制部62通过具有使用人工智能(AI)技术的一个或多个构成要素而作为人工智能来发挥功能。服务器侧控制部62作为人工智能来发挥功能,由此,实现了根据来自各终端装置10的信息来推测各用户3的情感的推测功能和根据推测结果来提出与各用户3的情感对应的路线的信息提供功能。
作为人工智能技术,例如使用了各种过滤、独立成分分析、SVM(Support VectorMachine:支持向量机)及轮廓提取等图像处理技术、模式识别(例如,语音识别、面部识别等)、自然语言处理、知识信息处理、强化学习、贝叶斯网络、SOM(自组织映射)、神经网络以及Deep Learning(深层学习)等机器学习等。另外,服务器侧控制部62中的推测以及信息提供的决定(包含指令的响应)等是基于通过机器学习等预先得到的算法来进行的。
服务器侧存储部63能够广泛地应用公知的存储设备,存储有服务器60进行各种处理所需的程序及服务器侧控制部62使用的算法等数据。作为算法,例如具有用于检测情感的情感检测算法、用于提出适合用户3的路线的路线提案算法以及用于生成阅览信息的阅览信息生成算法等。
服务器侧存储部63具有作为情感信息记录单元的情感信息数据库(情感信息DB)64、路线信息数据库(路线信息DB)65以及作为阅览信息记录单元的阅览信息数据库(阅览信息DB)66。
服务器侧控制部62具有作为情感检测单元的情感检测部70、作为路线提案单元的路线提案部71以及作为阅览信息生成单元的阅览信息生成部72。
情感检测部70被输入从终端装置10发送的驾驶信息、外部信息、活体信息及地点信息,并根据从面部摄像头51获得的用户3的表情、体温、脉搏等活体信息来检测用户3的情感。即,情感检测部70通过使用了情感检测算法的人工智能技术,检测在什么样的外部状况时会是什么样的情感。
情感的类别包括例如开心、快乐、幸福感、放松之类的积极的情感以及例如痛苦、恐惧、不安、愤怒、厌恶之类的消极的情感。
情感检测部70检测这种积极的情感或消极的情感在什么样的外部状况时出现。
并且,通过还使用由活体信息取得部22取得的活体信息,能够考虑到用户3的表情、脉搏、血压、表情、出汗量等活体信息来对情感进行检测,容易进行与人所判断的同样的高精度的情感推测,能够进行高精度的检测。
另外,在出现了预料之外的外部因素而使情感发生了变化的情况下,情感检测部70通过检测情感相对于可预料的外部因素的差分,也可以对情感的检测结果进行加权。
情感检测部70例如根据由前部摄像头41拍摄到的图像,检测在不存在其他行驶车辆时为积极的情感还是在前方存在其他行驶车辆时为积极的情感,另外,通过前部摄像头41,检测在道路状况为高速公路等直线道路上行驶时为积极的情感,还是在山路等弯道较多的道路上为积极的情感,或者因驾驶变得慎重、感到紧张(压力)而成为消极的情感,另外,通过后部摄像头42,检测在后方存在其他行驶车辆的情况下是否感到紧张和压力而成为消极的情感之类的与外部状况对应的情感。
另外,情感检测部70还根据驾驶信息来检测与驾驶状况对应的情感。例如,在节气门开度等大致恒定且驾驶操作没有大变化的情况下,推测为正在放松地驾驶,在节气门开度、制动操作等驾驶操作存在急剧变化的情况下,能够推测为对用户3施加了某些外在因素而施加了压力。
另外,情感检测部70根据人工建造设施或自然景观信息,通过正路过的地点的景色来检测是积极的情感还是消极的情感,其中,该人工建造设施或自然景观信息是基于由前部摄像头41拍摄到的景色或地点信息而从地图数据取得的。进而,情感检测部70根据由前部摄像头41等取得的天气或由气温传感器43检测出的气温,检测在什么样的天气或气温时会是什么样的情感。情感检测部70根据由外部环境用麦克风44收集的外部声音信息,通过行驶时的外部声音来检测在什么样的外部声音下会是什么样的情感。
另外,这些都只是示例,基于外部状况的情感的检测并不限定于这些。
这样,情感检测部70根据外部信息或地点信息,检测活体信息和驾驶信息是如何变化的。
然后,情感检测部70根据检测出的情感信息,设定情感类别。如上所述,由于在情感中存在积极的情感和消极的情感,所以情感检测部70判断情感类别,判断检测出的情感信息是积极的情感还是消极的情感。情感检测部70在积极的情感的情况下设置积极标志,在消极的情感的情况下设置消极标志。
情感检测部70在判断出情感类别之后,将该情感类别与外部信息和地点信息关联起来地记录在情感信息数据库64中。
图3是示出记录在情感信息数据库64中的情感信息的例子的图。
如图3所示,在情感信息数据库64中,将用户3(在该例中为“用户A”)的情感类别与作为外部信息的天气、外部气温、外部声音、同行者的有无、由前部摄像头41取得的图像信息以及地点信息分别关联起来。
情感检测部70在用户3驾驶机动二轮车2时始终检测用户3的情感,从而与情感类别对应的外部信息和地点信息关联起来地存储在情感信息数据库64中。
通过这样储存用户3的情感信息,情感检测部70能够根据这些储存的情感信息判断用户3的喜好。例如,能够判断出用户3在没有其他行驶车辆而放松地驾驶的情况下容易产生积极的情感、在自然景观优美的地点容易产生积极的情感之类的用户3的喜好或性格。作为用户3的性格,例如可想到行动派、慎重派、挑战派等。另外,用户3的性格不仅可以通过情感检测部70来进行判断,也可以通过用户3自己的输入或来自其他用户3的评价等而作为性格信息进行储存。
在该情况下,情感检测部70也可以在判断情感类别时判断情感等级。例如,在将情感等级设定为5个等级的情况下,像从稍微高兴(积极等级1)到非常高兴(积极等级5)、从稍微痛苦(消极等级1)到非常痛苦(消极等级5)那样将情感类别进一步按情感等级进行分类。
这样,通过以考虑到情感等级的方式对情感类别进行分类,能够判断用户3的更细致的喜好和性格。
另外,除了以上那样的情感等级以外,还可以将情感等级的变化量超过某规定水平时的外部信息与该变化量一起储存在情感信息数据库64中。例如,可以将用户3的情感从消极等级1~5切换为积极等级5的地点信息视为比从积极等级3切换为积极等级5的地点信息高的积极等级而对信息进行储存。
路线提案部71根据储存在情感信息数据库64中的情感信息,设定并提出符合用户3的喜好的路线。路线的提案例如是在用户3对终端装置10的操作部16进行操作而进行了路线提案的指示的情况下开始的。
路线提案部71设定在从出发地点到最终引导地点的期间作为目标的情感类别。此时,关于出发地点,可以将当前终端装置10所处的地点作为出发地点,也可以由用户3通过终端装置10的操作部16来自行输入。另外,最终引导地点可以由用户3通过终端装置10的操作部16来自己输入,也可以不由用户3输入而委托给路线提案部71。
图4是示出设定了从出发地点到最终引导地点的目标情感类别的情况下的例子的图。
根据该图4的例子,设定为从出发点开始立即为轻微的积极情感(例如,积极等级1),接着为消极情感(例如,消极等级1)、稍大的积极情感(例如,积极等级2)、稍大的消极情感(例如,消极等级3),最后为非常积极的情感(例如,积极等级5)。
该目标情感类别的设定只是一个例子,能够设定任意的目标情感类别。
当然,也可以设定为在从出发地点到最终引导地点的期间全部为积极的情感,但例如即使在处于“痛苦”之类的消极情感的情况下,在跨过了痛苦的局面时,根据用户3的性格,有时也会因成就感而变成积极的情感。
因此,路线提案部71根据用户3的性格来设定目标情感类别,该用户3的性格是基于记录在情感信息数据库64中的情感信息来判断出的。
另外,路线提案部71也可以将从出发地点到最终引导地点的情感类别设定为多个。例如,提出了较多地表现积极情感的设定、较多地表现消极情感的设定、仅表现积极情感的设定等的路线,只要由用户3来选择即可。
此时,优选路线提案部71所设定的情感类别被设定为在作为最终引导地点的最终到达地点必须以设置了积极标志的积极情感结束。
另外,路线提案部71所设定的目标情感类别也可以考虑用户3的性格。在该情况下,如上所述,根据由情感检测部70判断出的性格信息,路线提案部71设定用户3的性格类别。即,性格类别例如是行动型性格或者是慎重型性格等,将用户3按照每种性格进行分类。
然后,路线提案部71在设定目标情感类别时,根据具有与用户3的性格类别相同的性格类别的其他用户3的情感信息来进行设定。通过这样设定,能够设定与用户3的性格对应的目标情感类别。
路线提案部71在设定了目标情感类别之后,设定用于达成目标情感类别的路线。
路线提案部71根据所设定的目标情感类别,使用GPS装置45的地图数据来设定成为所设定的目标情感类别的路线。例如,根据记录在情感信息数据库64中的情感信息以及与其相关联的地点信息,检索成为目标情感类别的地点,并选择为地点候补。
路线提案部71根据所选择的地点候补来设定从出发地点到最终引导地点的最佳路线。
另外,除了基于记录在情感信息数据库64中的情感信息的情况之外,路线提案部71还可以设定包含用户3还没有访问过的地点的路线。
在该情况下,路线提案部71根据记录在情感信息数据库64中的情感信息,推测可成为相似的情感类别的外部状况,并预测有可能成为该外部状况的地点。然后,路线提案部71设定包含所预测的地点的路线。
另外,与记录在情感信息数据库64中的情感信息相关联的天气、气温等外部状况不一定必须与要设定路线时的外部状况一致。
因此,路线提案部71预测因外部状况的变化而产生的情感。例如,当情感信息在晴天、气温为20℃的外部状况下为积极情感的情况下,在设定路线时的外部状况为阴天、气温为10℃时,路线提案部71参考其他同样的外部状况时的情感信息,预测情感是积极的情感还是消极的情感,判断是否用于路线的设定。
进而,在设定包含用户3还没有访问过的地点的路线的情况下,路线提案部71也可以根据其他用户3的情感信息,选择其他用户3具有积极的情感的地点或者具有消极的情感的地点来设定路线。当在服务器60的情感信息数据库64中记录有大量的情感信息的情况下,也可以参考其他用户3的情感信息。
另外,也可以经由通信网络25例如取得因特网的天气网站或交通信息网站等的信息,从而对要设定的路线上的天气、气温或有无其他行驶车辆等的信息进行判断。或者,也可以使用从其他行驶车辆或定点摄像头等取得的大数据来进行判断。
这样,设定在从出发地点到最终引导地点的期间作为目标的情感类别,并设定基于目标情感类别的路线,因此,能够以产生情感起伏的方式设定路线,用户3能够进行有故事感的路线的行驶。
在通过路线提案部71完成了路线的设定之后,路线提案部71经由通信部向终端装置10发送所提出的路线,并显示于终端装置10的显示部14。由此,用户3能够确认路线提案部71所设定的路线。确认是经由操作部16进行的。
在该情况下,路线提案部71也可以提出多个路线。路线提案部71也可以将多个路线显示于显示部14,让用户3通过操作部16来进行选择。另外,在所提出的路线中,也可以提出向关联有不同的目标情感类别的多个地点进行引导的路线。
在由用户3确认或选择了路线的情况下,从终端装置10经由通信部发送到服务器60,记录在服务器60的路线信息数据库65中。
另外,例如也可以应用于在旅行等中多个用户3在同一路线上行驶的情况。
在该情况下,通过终端装置10的活体信息取得部22取得多个各用户3的活体信息,并经由终端侧通信部11、通信网络25以及服务器侧通信部61发送到服务器60。
服务器60的情感检测部70检测各用户3的情感信息,在分别将每个用户3与情感信息和外部信息关联起来的状态下记录在情感信息数据库64中。
接着,路线提案部71与1个用户3的情况同样地设定作为目标的情感类别。在该情况下,目标情感类别是基于多个用户3的情感信息来创建的。但是,对于每个用户3,可认为成为积极情感的地点和成为消极情感的地点是不同的。
因此,如上所述,也可以根据用户3的性格类别来设定目标情感类别。即,根据性格类别的比例高的用户3(例如在行动型性格的用户3较多的情况下)的情感信息,设定目标情感类别。
另外,路线提案部71只要在记录于情感信息数据库64的情感信息中例如将在所有用户3中成为积极情感的比例高的地点或成为消极情感的比例高的地点选择为成为积极情感的地点或成为消极情感的地点即可。在该情况下,也可以设定包含各用户3还没有访问过的地点的路线。
然后,路线提案部71根据所设定的目标情感类别,检索成为目标情感类别的地点,并选择为地点候补。路线提案部71根据所选择的地点候补来设定从出发地点到最终引导地点的最佳路线。
这样设定的路线对于某个用户3来说可能是快乐的路线,但对于某个用户3来说也可能是痛苦的路线。因此,对于对整体路线可能具有消极情感的用户3,也可以进行较多地取入该用户3为积极情感的地点的路线设定等,进行与用户3对应的调整。
阅览信息生成部72在由情感检测部70检测出的情感信息为规定的情感类别时,生成阅览信息并记录在阅览信息数据库66中。
如上所述,在情感类别中有积极的情感和消极的情感,在情感等级超过规定的范围而发生变动的情况下,生成阅览信息。例如,在积极情感的情感等级超过规定的值而发生变动的情况下,或在消极情感的情感等级超过规定的值而发生变动的情况下,生成阅览信息。另外,例如,在从消极情感向积极情感变动的情况下,或相反地从积极情感向消极情感变动的情况下,生成阅览信息。
阅览信息主要是将由前部摄像头41或后部摄像头42拍摄到的图像与情感信息关联起来而生成的信息。在该情况下,图像可以是静态图像,也可以是动态图像。
阅览信息也可以是仅生成情感类别为规定的情感类别时的地点的图像的信息。此外,例如,当用户3在由路线提案部71提出的路线上行驶的情况下,也可以在行驶于路线的期间依次记录成为规定的情感类别的地点的图像,在行驶完全部路线之后,自动编辑各地点的图像,生成在设定路线上行驶时的一系列动态图像。
阅览信息生成部72将生成的阅览信息经由服务器侧通信部61、通信网络25以及终端侧通信部11而发送到终端装置10。
关于该终端装置10,不仅发送到作为检测了情感信息的对象的用户3的终端装置10,还发送到其他用户3的终端装置10。例如,用户3可以通过操作部16的操作来选择或指定要发送的用户3或终端设备10。
在用户3(阅览者)阅览所发送的阅览信息时,终端装置10通过活体信息取得部22取得阅览者的活体信息。所取得的活体信息经由终端侧通信部11、通信网络25以及服务器侧通信部61而发送到服务器60,并通过情感检测部70进行情感信息的检测。
即,在该情况下,能够检测阅览者的情感信息,由此,能够判断阅览者对阅览信息的情感类别。情感检测部70能够判断阅览者的情感类别是积极的情感还是消极的情感,这些也作为阅览者情感信息而与阅览信息关联起来地记录在情感信息数据库64中。
图5是示出记录在情感信息数据库64中的情况下的例子的图。
如图5所示,在情感信息数据库64中,将用户3(从“用户A”到“用户D”)的情感类别与作为外部信息的地点、天气、外部气温、外部声音、同行者的有无以及情感信息的取得时期(行驶中还是阅览中)分别关联起来。
这样,不仅是行驶中的用户,正在阅览阅览信息的用户的情感信息也可以记录在情感信息数据库64中而用于以后的路线设定等。
接着,对本实施方式的动作进行说明。
图6是示出检测情感信息的情况下的动作的流程图。
如图6所示,首先,在用户3开始驾驶机动二轮车2的情况下(ST1),终端装置10在终端侧控制部12的控制下开始通过驾驶信息取得部20取得驾驶信息,通过外部信息取得部21取得外部信息,通过活体信息取得部22取得活体信息,通过地点信息取得部23取得地点信息(ST2)。这些信息在终端侧控制部12的控制下经由终端侧通信部11、通信网络25以及服务器侧通信部61而实时地发送到服务器60(ST3)。
当发送各信息时,服务器60的情感检测部70根据从终端装置10发送的信息,实时地检测用户3的情感(ST4)。
然后,在检测出用户3为积极的情感或消极的情感(ST5:是)之后,作为情感信息而与外部信息和地点信息关联起来地记录在情感信息数据库64中(ST6)。
图7是示出提出路线的情况下的动作的流程图。
如图7所示,在用户3对终端装置10的操作部16进行操作而指示了路线提案之后(ST11),路线提案部71设定作为目标的情感类别(ST12)。
在设定了目标情感类别之后,路线提案部71根据记录于情感信息数据库64的情感信息和地点信息检索成为目标情感类别的地点,并选择为地点候补(ST13)。
路线提案部71根据所选择的地点候补来设定从出发地点到最终引导地点的最佳路线(ST14)。
在通过路线提案部71完成了路线的设定之后,路线提案部71将提出的路线经由服务器侧通信部61、通信网络25以及终端侧通信部11而发送到终端装置10(ST15),并显示于终端装置10的显示部14(ST16)。
在用户3确认了路线之后(ST17:是),终端装置10按照从路线提案部71提出的路线,使用GPS装置45开始路线引导(ST18)。
图8是示出生成阅览信息的情况下的动作的流程图。
如图8所示,在由情感检测部70检测出的情感信息为规定的情感类别时(ST21:是),阅览信息生成部72判断该情感类别的情感等级是否为规定的等级以上(ST22)。在该情感类别的情感等级为规定的等级以上的情况下(ST22:是),生成阅览信息(ST23),并记录在阅览信息数据库66中(ST24)。
阅览信息生成部72将生成的阅览信息经由服务器侧通信部61、通信网络25以及终端侧通信部11而发送到规定的用户3的终端装置10(ST25)。
在用户3正在阅览所发送的阅览信息时,终端装置10通过活体信息取得部22取得阅览者的活体信息(ST26),所取得的活体信息经由终端侧通信部11、通信网络25以及服务器侧通信部61而发送到服务器60,通过情感检测部70进行情感的检测(ST27)。情感检测部70能够判断阅览者的情感类别,这些也作为阅览者情感信息而与阅览信息关联起来地记录在情感信息数据库64中(ST28)。
如以上说明的那样,在本实施方式中,具有路线提案部71(路线提案单元),该路线提案部71根据由检测用户3的情感的情感检测部70(情感检测单元)检测出的情感信息和与情感信息相关联的地点信息来提出路线,路线提案部71设定在从出发地点到最终引导地点的期间作为目标的情感类别,并且根据情感信息和地点信息,提出包含与所设定的情感类别对应的地点的路线。
由此,能够对用户3提出通过了成为目标情感类别的地点的路线。其结果是,能够以产生情感的起伏的方式设定路线,用户3能够进行有故事感的路线的行驶。
在本实施方式中,具有将情感信息、地点信息以及外部信息关联起来进行记录的情感信息数据库64(情感信息记录单元),路线提案部71根据与情感类别相关联的外部信息,提出通过了处于与目标情感类别相关联的外部状况的地点的路线。
由此,能够对用户3提出与使得成为目标情感类别的外部状况对应的路线。
在本实施方式中,路线提案部71根据多个用户3的情感信息来设定多个用户3的性格类别,根据与作为对象的用户3的性格类别相同的其他用户3的情感类别来设定目标情感类别。
由此,根据用户3的性格类别,能够较多地收集与情感类别相关联的地点信息,能够提出基于较多的地点信息的路线。
在本实施方式中,路线提案部71提出通过了与不同目标的情感类别相关联的多个地点的路线。
由此,能够以在一条路线中处于不同的情感类别的方式提出路线。
在本实施方式中,对情感类别设定积极标志或消极标志,将地点中的设定了积极标志的地点设为最终引导地点。
由此,能够提出用户3处于积极情感的最终引导地点的路线。
在本实施方式中,具有:情感信息数据库64(情感信息记录单元),其记录由检测用户3的情感的情感检测部70(情感检测单元)检测出的情感信息和与情感信息相关联的外部信息;以及阅览信息生成部72(阅览信息生成单元),在通过情感检测单元检测出规定的情感类别时,该阅览信息生成部72生成基于外部信息的阅览信息。
由此,能够得到记录了规定的情感类别时的外部信息的阅览信息。
在本实施方式中,情感检测部70按照每个情感类别以具有情感等级的方式进行检测,阅览信息生成部72在情感等级超过规定的范围而发生了变动时生成阅览信息。
由此,能够得到记录了情感等级超过规定的值的外部信息的阅览信息。
在本实施方式中,阅览信息生成部72将生成的阅览信息发送到与用户3不同的用户3。
由此,不同的用户3能够确认情感等级超过了规定的值时的阅览信息。
在本实施方式中,情感检测部70将正在阅览外部信息时的不同的用户3的情感按照每个情感类别来进行检测,在成为规定的情感类别时,将不同的用户3的情感信息与外部信息关联起来地记录在情感信息数据库64中。
由此,能够将阅览阅览信息的其他用户3的情感信息与外部信息关联起来进行记录。
另外,所述实施方式只不过是本发明的一个实施方式,在不脱离本发明的主旨的范围内能够任意地变形和应用。
例如,在所述实施方式中,对由终端装置10和能够与终端装置10进行通信的服务器60构成信息提供系统的情况进行了说明,但并不限定于此,终端装置10也可以具有情感检测部70、路线提案部71以及阅览信息生成部72的功能,由能够与其他终端装置10进行通信的终端装置10单体构成。
另外,在所述实施方式中,作为车辆的一例,对机动二轮车2的情况进行了说明,但并不限定于此,本发明也可以应用于踏板型车辆、ATV等三轮车及四轮车等鞍乘型车辆、汽车、自行车等各种各样的车辆。
标号说明
1:信息提供系统;2:机动二轮车;3:用户;10:终端装置;11:终端侧通信部;12:终端侧控制部;20:驾驶信息取得部;21:外部信息取得部;22:活体信息取得部;23:地点信息取得部;25:通信网络;40:外部信息检测部;45:GPS装置;50:活体信息检测部;60:服务器;61:服务器侧通信部;62:服务器侧控制部;63:服务器侧存储部;64:情感信息数据库;65:路线信息数据库;66:阅览信息数据库;70:情感检测部;71:路线提案部;72:阅览信息生成部。
权利要求书(按照条约第19条的修改)
1.(修改后)一种信息提供系统,其特征在于,
该信息提供系统具有路线提案单元(71),该路线提案单元(71)根据由检测用户(3)的情感的情感检测单元(70)检测出的情感信息和与上述情感信息相关联的地点信息来提出路线,
上述路线提案单元(71)设定在从出发地点到最终引导地点的期间作为目标的情感类别,并且根据上述情感信息和上述地点信息,提出包含与所设定的上述情感类别对应的地点的路线,
上述路线提案单元(71)根据多个上述用户(3)的情感信息来设定多个上述用户的性格类别,根据与作为对象的用户(3)的性格类别相同的其他用户(3)的情感类别来设定作为上述目标的情感类别。
2.根据权利要求1所述的信息提供系统,其特征在于,
该信息提供系统具有情感信息记录单元(64),该情感信息记录单元(64)将上述情感信息、上述地点信息以及外部信息关联起来进行记录,
上述路线提案单元(71)根据与上述情感类别相关联的上述外部信息,提出经过处于与作为上述目标的情感类别相关联的外部状况的地点的路线。
3.(修改后)根据权利要求1或2所述的信息提供系统,其特征在于,
上述路线提案单元(71)提出经过与作为不同的上述目标的情感类别相关联的多个地点的路线。
4.(修改后)根据权利要求3所述的信息提供系统,其特征在于,
对上述情感类别设定积极标志或消极标志,将上述地点中的设定了上述积极标志的地点设为最终引导地点。
5.(修改后)一种服务器,其特征在于,该服务器具有:
情感检测部(70),其检测用户(3)的情感信息;
路线提案部(71),其根据上述情感信息和与上述情感信息相关联的地点信息来提出路线;以及
通信部(61),其与用户(3)的终端装置进行发送和接收,
利用通信部(61)从用户(3)的终端装置接收上述情感信息,
上述路线提案部(71)设定在从出发地点到最终引导地点的期间作为目标的情感类别,并且根据上述情感信息和上述地点信息,提出包含与所设定的上述情感类别对应的地点的路线,
上述路线提案部(71)根据多个上述用户(3)的情感信息来设定多个上述用户的性格类别,根据与作为对象的用户(3)的性格类别相同的其他用户(3)的情感类别来设定作为上述目标的情感类别,
上述路线提案部(71)根据上述情感类别来从通信部(61)对与上述用户(3)不同的用户(3)的终端装置进行发送。
说明或声明(按照条约第19条的修改)
权利要求书中的权利要求1增加了申请时的权利要求3。
权利要求书中的权利要求3和权利要求4是将申请时的权利要求4和权利要求5变更序号而得到的。
与此相应地删除了申请时的权利要求3。
另外,在权利要求5中追加了“服务器”的发明。权利要求5的修改以申请时的说明书的0032~0058段中记载的事项为依据。
在国际检索报告中,得到了权利要求3和5具有创造性的见解。因此,增加了申请时的权利要求3后的权利要求1具有创造性。权利要求5是具有与权利要求1同样的技术特征的服务器,同样具有创造性。

Claims (5)

1.一种信息提供系统,其特征在于,
该信息提供系统具有路线提案单元(71),该路线提案单元(71)根据由检测用户(3)的情感的情感检测单元(70)检测出的情感信息和与上述情感信息相关联的地点信息来提出路线,
上述路线提案单元(71)设定在从出发地点到最终引导地点的期间作为目标的情感类别,并且根据上述情感信息和上述地点信息,提出包含与所设定的上述情感类别对应的地点的路线。
2.根据权利要求1所述的信息提供系统,其特征在于,
该信息提供系统具有情感信息记录单元(64),该情感信息记录单元(64)将上述情感信息、上述地点信息以及外部信息关联起来进行记录,
上述路线提案单元(71)根据与上述情感类别相关联的上述外部信息,提出经过处于与作为上述目标的情感类别相关联的外部状况的地点的路线。
3.根据权利要求1或2所述的信息提供系统,其特征在于,
上述路线提案单元(71)根据多个上述用户(3)的情感信息来设定多个上述用户的性格类别,根据与作为对象的用户(3)的性格类别相同的其他用户(3)的情感类别来设定上述目标情感类别。
4.根据权利要求1~3中的任意一项所述的信息提供系统,其特征在于,
上述路线提案单元(71)提出经过与作为不同的上述目标的情感类别相关联的多个地点的路线。
5.根据权利要求4所述的信息提供系统,其特征在于,
对上述情感类别设定积极标志或消极标志,将上述地点中的设定了上述积极标志的地点设为最终引导地点。
CN201680091678.2A 2016-12-28 2016-12-28 信息提供系统 Active CN110100153B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/089195 WO2018123055A1 (ja) 2016-12-28 2016-12-28 情報提供システム

Publications (2)

Publication Number Publication Date
CN110100153A true CN110100153A (zh) 2019-08-06
CN110100153B CN110100153B (zh) 2023-05-12

Family

ID=62710475

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680091678.2A Active CN110100153B (zh) 2016-12-28 2016-12-28 信息提供系统

Country Status (4)

Country Link
US (1) US11237009B2 (zh)
JP (1) JP6752901B2 (zh)
CN (1) CN110100153B (zh)
WO (1) WO2018123055A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111832639A (zh) * 2020-06-30 2020-10-27 山西大学 一种基于迁移学习的绘画情感预测方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11302106B2 (en) * 2016-12-28 2022-04-12 Honda Motor Co., Ltd. Information provision system
JP7359092B2 (ja) * 2020-07-17 2023-10-11 トヨタ自動車株式会社 車両ユーザ支援システム、及び車両ユーザ支援装置
JP2022054820A (ja) * 2020-09-28 2022-04-07 マツダ株式会社 走行経路設定装置
JPWO2023286827A1 (zh) * 2021-07-14 2023-01-19

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1278090A (zh) * 1999-06-17 2000-12-27 现代自动车株式会社 瞌睡驾驶警告系统的驾驶员瞌睡检测方法
JP2003210833A (ja) * 2002-01-17 2003-07-29 Aruze Corp 対話ゲームシステム、対話ゲーム方法及びプログラム
US20040183685A1 (en) * 2003-03-18 2004-09-23 Ford Global Technologies, Llc Drowsy driver monitoring and prevention system
JP2005303734A (ja) * 2004-04-13 2005-10-27 Ntt Docomo Inc 通信装置およびサーバシステム
JP2006227236A (ja) * 2005-02-17 2006-08-31 Seiko Epson Corp 画像記録装置、画像記録方法および制御プログラム
JP2009049951A (ja) * 2007-08-23 2009-03-05 Sony Corp 撮像装置、撮像方法
CN102024157A (zh) * 2009-09-09 2011-04-20 索尼公司 信息处理装置、信息处理方法和信息处理程序
US20120150430A1 (en) * 2010-12-14 2012-06-14 International Business Machines Corporation Human Emotion Metrics for Navigation Plans and Maps
US20140309933A1 (en) * 2013-04-12 2014-10-16 Electronics And Telecommunications Research Institute Apparatus and method for providing route guidance based on emotion
CN106255866A (zh) * 2014-04-21 2016-12-21 索尼公司 通信系统、控制方法以及存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110118969A1 (en) * 2009-11-17 2011-05-19 Honeywell Intellectual Inc. Cognitive and/or physiological based navigation
US20150300831A1 (en) * 2014-04-18 2015-10-22 AppTripper s.r.l. Emotion Based Travel Guide System and Method
US9733097B2 (en) * 2014-10-31 2017-08-15 Toyota Jidosha Kabushiki Kaisha Classifying routes of travel
US10302444B2 (en) * 2015-01-30 2019-05-28 Sony Corporation Information processing system and control method
US20180032126A1 (en) * 2016-08-01 2018-02-01 Yadong Liu Method and system for measuring emotional state
US10192171B2 (en) * 2016-12-16 2019-01-29 Autonomous Fusion, Inc. Method and system using machine learning to determine an automotive driver's emotional state
US10648821B2 (en) * 2017-04-17 2020-05-12 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methodologies for route planning

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1278090A (zh) * 1999-06-17 2000-12-27 现代自动车株式会社 瞌睡驾驶警告系统的驾驶员瞌睡检测方法
JP2003210833A (ja) * 2002-01-17 2003-07-29 Aruze Corp 対話ゲームシステム、対話ゲーム方法及びプログラム
US20040183685A1 (en) * 2003-03-18 2004-09-23 Ford Global Technologies, Llc Drowsy driver monitoring and prevention system
JP2005303734A (ja) * 2004-04-13 2005-10-27 Ntt Docomo Inc 通信装置およびサーバシステム
JP2006227236A (ja) * 2005-02-17 2006-08-31 Seiko Epson Corp 画像記録装置、画像記録方法および制御プログラム
JP2009049951A (ja) * 2007-08-23 2009-03-05 Sony Corp 撮像装置、撮像方法
CN102024157A (zh) * 2009-09-09 2011-04-20 索尼公司 信息处理装置、信息处理方法和信息处理程序
US20120150430A1 (en) * 2010-12-14 2012-06-14 International Business Machines Corporation Human Emotion Metrics for Navigation Plans and Maps
CN102538810A (zh) * 2010-12-14 2012-07-04 国际商业机器公司 用于导航规划和地图的人类情感度量的方法和系统
US8352179B2 (en) * 2010-12-14 2013-01-08 International Business Machines Corporation Human emotion metrics for navigation plans and maps
US20140309933A1 (en) * 2013-04-12 2014-10-16 Electronics And Telecommunications Research Institute Apparatus and method for providing route guidance based on emotion
CN106255866A (zh) * 2014-04-21 2016-12-21 索尼公司 通信系统、控制方法以及存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111832639A (zh) * 2020-06-30 2020-10-27 山西大学 一种基于迁移学习的绘画情感预测方法

Also Published As

Publication number Publication date
WO2018123055A1 (ja) 2018-07-05
JP6752901B2 (ja) 2020-09-09
JPWO2018123055A1 (ja) 2019-10-31
US20190376808A1 (en) 2019-12-12
US11237009B2 (en) 2022-02-01
CN110100153B (zh) 2023-05-12

Similar Documents

Publication Publication Date Title
CN110100153A (zh) 信息提供系统
JP7105305B2 (ja) 多段画像ベースの物体検出および認識
JP6341311B2 (ja) ドライバの動的道路シーンに対する精通度インデックスのリアルタイム作成
KR102060662B1 (ko) 차량의 주행 이벤트를 검출하는 전자 장치 및 방법
US10875525B2 (en) Ability enhancement
US20200309548A1 (en) Control apparatus, control method, and non-transitory computer-readable storage medium storing program
JP4258585B2 (ja) 目的地設定装置
JP4193300B2 (ja) エージェント装置
CN109291929A (zh) 用于自动驾驶系统的深度集成融合架构
CN110062937A (zh) 信息提供系统
CN108052097A (zh) 用于训练异构感测系统的方法和异构感测系统
CN109416733A (zh) 便携式个性化
EP3994426B1 (en) Method and system for scene-aware interaction
KR102458664B1 (ko) 차량의 주행을 보조하는 전자 장치 및 방법
KR20180072525A (ko) 경로 안내를 위한 전자 장치 및 이의 제어 방법
US11460309B2 (en) Control apparatus, control method, and storage medium storing program
CN113723528A (zh) 车载语视融合多模态交互方法及系统、设备、存储介质
WO2021185468A1 (en) Technique for providing a user-adapted service to a user
DE112020003033T5 (de) Verfahren und Vorrichtung zum Verbessern einer Geolokalisierungsdatenbank
CN106933955A (zh) 适应性车载内容服务系统和装置及其方法
CN113320537A (zh) 一种车辆控制方法和系统
US20230211744A1 (en) Technique for providing a user-adapted service to a user
JP5865708B2 (ja) 施設、自然、歴史、ルートに関する画像及び音声の再生及びデータの制作方法
US11211079B2 (en) Artificial intelligence device with a voice recognition
Rasouli The Role of Context in Understanding and Predicting Pedestrian Behavior in Urban Traffic Scenes

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant