CN117985032A - 车载装置以及系统 - Google Patents

Abstract

本公开的目的在于提供一种技术，能够在合适的时机收集与向车辆的乘客提供多媒体信息的车载装置的操作感有关的信息。向车辆的乘客提供多媒体信息的车载装置在乘客对车载装置进行操作的过程中从乘客发出的声音中含有表示乘客不愉快的第1声音的情况下，将包含取得了该声音的时刻在内的规定期间中的车载装置的操作日志发送至服务器装置。

Description

车载装置以及系统

技术领域

本公开涉及向车辆的乘客提供多媒体信息的车载装置以及系统。

背景技术

在专利文献1中公开了车辆用显示系统。专利文献1中记载的车辆用显示系统具备显示器以及多媒体信息部。显示器以车辆的驾驶员能够目视确认的方式设置于车辆。多媒体信息取得部取得多媒体信息。多媒体信息是文本或图像的形式的信息。在显示器中，以与表示车辆的外部环境的信息所包含的其他车辆重叠的方式显示多媒体信息。

专利文献1：日本特开2019－133260号公报

发明内容

本公开的目的在于提供一种技术，能够在合适的时机收集与向车辆的乘客提供多媒体信息的车载装置的操作感有关的信息。

本公开的第一方式所涉及的车载装置是向车辆的乘客提供多媒体信息的车载装置，其中，

上述车载装置具备控制部，

当在上述乘客对上述车载装置进行操作的过程中从上述乘客发出的声音中含有表示上述乘客不愉快的第1声音的情况下，上述控制部执行如下处理，即：将包含取得了上述声音的时刻在内的规定期间中的上述车载装置的操作日志发送至服务器装置。

本公开的第二方式所涉及的系统是包含向车辆的乘客提供多媒体信息的车载装置、以及经由网络与上述车载装置进行通信的服务器装置的系统，其中，

当在上述乘客对上述车载装置进行操作的过程中从上述乘客发出的声音中含有表示上述乘客不愉快的第1声音的情况下，上述车载装置将包含取得了上述声音的时刻在内的规定期间中的上述车载装置的操作日志发送至上述服务器装置。

本公开的其他方式是上述车载装置执行的方法、用于使计算机执行该方法的程序或存储有该程序的非临时性存储介质。

根据本公开，能够在合适的时机收集与向车辆的乘客提供多媒体信息的车载装置的操作感有关的信息。

附图说明

图1是表示实施方式所涉及的信息管理系统的简要结构的图。

图2是表示车载装置中的由乘客操作的操作部的结构的一例的图。

图3是用于说明由信息管理系统进行的信息收集的流程的图。

图4是概略地示出车载装置的功能结构的一例的框图。

图5是表示存储于日志信息数据库的日志信息的图。

图6是表示在车载装置中执行的信息处理的流程的流程图。

图7是表示在管理服务器中执行的信息处理的流程的流程图。

附图标记说明：

1…信息管理系统；10…车辆；100…车载装置；110…通信部；120…控制部；130…日志信息数据库；200…麦克风；300…管理服务器。

具体实施方式

本公开的第一方式所涉及的车载装置向车辆的乘客提供多媒体信息。多媒体信息例如是包含地图信息、与至目的地为止的路径有关的信息、与车辆的状态有关的信息、与车辆的周围的状况有关的信息、交通信息、新闻、SNS(Social networkingservice：社交网络服务)、电子邮件、广告或娱乐信息(音乐、电视、收音机或电影等)在内的信息。多媒体信息在搭载有车载装置的车辆内作为图像(静态图像或动态图像)、文本或声音而被提供。

另外，车载装置是由车辆的乘客进行操作的装置。乘客对车载装置的操作例如也可以经由触摸面板显示器或硬件按钮来进行。另外，乘客对车载装置的操作也可以通过乘客发出声音来进行。另外，车载装置与服务器装置能够经由网络进行通信。服务器装置是设置于搭载有车载装置的车辆的外部的装置。

车载装置具备控制部。而且，在车辆的乘客操作车载装置的过程中从乘客发出的声音中含有第1声音的情况下，控制部将规定期间中的车载装置的操作日志发送至服务器装置。这里，第1声音是表示乘客不愉快的声音。另外，规定期间是包含取得了含有第1声音的声音的时刻在内的期间。

在车辆的乘客对车载装置进行操作时，例如，在想要的操作难以进行或操作的方法难以了解的情况下，乘客有可能对车载装置的操作感到不快。另外，在乘客对车载装置的操作感到不快的情况下，乘客有可能发出第1声音。车载装置取得包含在这种时候发出的第1声音在内的声音。

在车辆的乘客发出表示不愉快的第1声音的主要原因在于车载装置的操作的情况下，在规定期间的操作日志中包含乘客感到不快的车载装置的操作的日志的可能性高。因此，通过解析从车载装置发送至服务器装置的操作日志，能够确定乘客感到不快的车载装置的操作。

根据本公开，在车辆的乘客对车载装置的操作感到不快的情况下，能够将该操作的日志实时地收集到服务器装置。另外，能够避免收集与乘客感到不快的车载装置的操作无关的日志。

以下，基于附图对本公开的具体实施方式进行说明。针对在本实施方式中记载的构成部件的尺寸、材质、形状及其相对配置等，除非有特别记载，否则主旨并不在于将本公开的技术范围仅限定于这些。

＜第1实施方式＞

(系统结构)

图1是表示本实施方式的信息管理系统的简要结构的图。信息管理系统1是收集与车载装置的操作感有关的信息的系统。车载装置100搭载于车辆10。车载装置100是向车辆10的乘客(驾驶员或同乘者)提供多媒体信息的装置。

在信息管理系统1中，车载装置100经由网络N1与管理服务器300连接。这里，作为网络N1，例如，也可以采用因特网等世界规模的公用通信网即WAN(Wide Area Network：广域网)或移动电话等的电话通信网。

车载装置100构成为包含计算机。构成车载装置100的计算机具有处理器101、主存储部102、辅助存储部103以及通信接口(通信I/F)104。

这里，处理器101例如是CPU(Central Processing Unit：中央处理器)或DSP(Digital Signal Processor：数字信号处理器)。主存储部102例如是RAM(Random AccessMemory：随机存取存储器)。辅助存储部103例如是ROM(Read Only Memory：只读存储器)、HDD(Hard Disk Drive：硬盘驱动器)或闪存。另外，辅助存储部103也可以包括可移动介质(可移动记录介质)。这里，可移动介质例如是USB存储器、SD卡或CD－ROM、DVD盘、或蓝光盘那样的盘记录介质。

在辅助存储部103中储存有操作系统(OS)、各种程序以及各种信息表等。而且，通过处理器101将存储于辅助存储部103的程序下载到主存储部102并执行该程序来实现后述那样的各种处理。

通信I/F104是用于根据规定的无线通信标准经由网络N1与管理服务器300之间进行无线通信的接口。作为规定的无线通信标准，能够例示3G(3rd Generation：第三代)、LTE(Long Term Evolution：长期演进)或5G(5th Generation：第五代)。通信I/F104构成为包含用于无线通信的无线通信电路。

此外，车载装置100不一定需要由单一的物理结构来实现，也可以由相互协作的多台计算机构成。另外，车载装置100中的一部分或全部功能也可以由如ASIC、FPGA那样的硬件电路来实现。

另外，车载装置100由车辆10的乘客进行操作。图2是表示车载装置100中的由乘客操作的操作部的结构的一例的图。车载装置100具备触摸面板显示器20作为操作部。在触摸面板显示器20显示向乘客提供的信息，且显示被乘客触摸操作的1个或多个按钮20a及杆20b。并且，车载装置100除触摸面板显示器20之外，还具备1个或多个硬件按钮21作为操作部。而且，若操作部被乘客操作，则车载装置100将该操作日志作为日志信息来进行存储。

另外，在车辆10的车室内设置有麦克风200。麦克风200对车辆10的乘客发出的声音进行收音。这里，当乘客在对车载装置100的操作部进行操作时对该操作感到不快的情况下，乘客有可能发出表示乘客不愉快的第1声音。此时从乘客发出的第1声音也与其他声音同样地被麦克风200收音。

而且，信息管理系统1利用由麦克风200收音的声音来收集与车载装置100的操作感有关的信息。图3是用于说明由信息管理系统1进行的信息收集的流程的图。若在车辆10中乘客发出的声音被麦克风200收音，则从麦克风200向车载装置100发送声音信息。

在车载装置100中，若在车载装置100被乘客操作的过程中从麦克风200接收声音信息，则判别在该声音信息中是否包含表示乘客不愉快的第1声音。然后，在声音信息中含有第1声音的情况下，车载装置100将包含接收到该声音信息的时刻在内的规定期间中的操作日志经由网络N1发送至管理服务器300。由此，在车辆10的乘客对车载装置100进行操作的过程中发出第1声音的情况下，与此时的操作有关的操作日志被收集到管理服务器300。

(功能结构)

接下来，基于图4说明车载装置100的功能结构。图4是概略地表示车载装置100的功能结构的一例的框图。此外，在本实施方式中，车载装置100相当于本公开的车载装置。

车载装置100具有通信部110、控制部120以及日志信息数据库(日志信息DB)130作为功能部。通信部110具有将车载装置100与网络N1连接起来的功能。通信部110能够由通信I/F104来实现。

控制部120具有进行用于控制车载装置100的运算处理的功能。控制部120能够由处理器101来实现。控制部120具有日志生成部1201、声音信息取得部1202、判别部1203以及提取部1204作为功能部。

若车载装置100被车辆10的乘客操作，则日志生成部1201生成操作日志。由日志生成部1201生成的操作日志作为日志信息存储于日志信息DB130。图5是表示存储于日志信息DB130的日志信息(操作日志)的图。如图5所示，存储于日志信息DB130的操作日志包含操作日期时间和操作内容。每当车载装置100被车辆10的乘客操作，则在日志信息DB130中追加日志信息。此外，日志信息DB130通过由处理器101执行数据库管理系统(DatabaseManagement System)的程序而被构建在辅助存储部103中。

声音信息取得部1202取得从麦克风200发送出的声音信息。每当车辆10的乘客发出的声音被麦克风200收音，则声音信息取得部1202取得声音信息。然后，在乘客对上述车载装置100进行操作的过程中声音信息已被声音信息取得部1202取得的情况下，判别部1203判别在已取得的声音信息中是否含有第1声音。

这里，在表示乘客不愉快的声音中，存在各种模式。车载装置100也可以将相当于第1声音的多个模式的声音文本预先存储于辅助存储部103。然后，判别部1203也可以判别在已由声音信息取得部1202取得的声音信息中的声音的文本中是否包含预先存储的相当于第1声音的多个模式的声音文本中的任1个。

另外，在声音信息中是否包含第1声音的判别也可以基于声音的音调来进行。在该情况下，车载装置100也可以将相当于第1声音的多个模式的声音的音调预先存储于辅助存储部103。然后，判别部1203也可以判别在已由声音信息取得部1202取得的声音信息中的声音中是否包含预先存储的相当于第1声音的多个模式的声音的音调中的任1个。

另外，判别部1203也可以通过使用已由机器学习生成的训练完毕的机器学习模型来对在声音信息中是否包含第1声音进行判别。在该情况下，机器学习模型具备用于执行推断处理的运算的1个以上的运算参数。可以适当地调整机器学习模型的运算参数的值，使得能够通过使用了学习数据的机器学习来完成对在所给予的声音信息中是否包含第1声音进行判别的推断处理。此外，机器学习模型的种类可以根据实施方式适当地选择。机器学习模型例如可以是神经网络。

在判别部1203中判定为在已由声音信息取得部1202取得的声音信息中含有第1声音的情况下，提取部1204从日志信息DB130中提取包含取得了该声音信息的时刻在内的规定期间中的操作日志。这里，规定期间被预先确定为如下期间，即：认为操作日志示出的车载装置100的操作与声音信息示出的乘客的声音可能具有关联性的期间。

然后，若通过提取部1204提取操作日志，则控制部120执行将提取出的操作日志经由通信部110发送至管理服务器300的处理。

在管理服务器300中，通过对从车载装置100接收到的操作日志进行解析，来确定使乘客感到不快的车载装置100的操作。在车辆10的乘客发出第1声音的主要原因在于车载装置100的操作的情况下，在规定期间中的操作日志中包含使乘客感到不快的车载装置100的操作的日志的可能性高。因此，通过对从车载装置100接收到的操作日志进行解析，能够确定使乘客感到不快的车载装置100的操作。

(信息处理)

接下来，基于图6说明为了日志信息收集而在车载装置100中执行的信息处理的流程。图6是表示在车载装置100中执行的信息处理的流程的流程图。本流程由车载装置100的控制部120来执行。

在本流程中，首先，在S101中，取得从麦克风200发送出的声音信息。接下来，在S102中，判别是否处于车载装置100被乘客操作的过程中。在S102中判定为否定的情况下，即，在车载装置100未被操作的情况下，结束执行本流程。

另一方面，在S102中判定为肯定的情况下，接下来执行S103的处理。在S103中，判别在S101中已取得的声音信息中是否含有第1声音。在S103中判定为否定的情况下，即，在声音信息中未含有第1声音的情况下，结束执行本流程。在该情况下，不将操作日志发送至管理服务器300。

另一方面，在S103中判定为肯定的情况下，接下来执行S104的处理。在S104中，从日志信息DB130中提取包含在S101中已取得声音信息的时刻在内的规定期间中的操作日志。接下来，在S105中，将在S104中提取出的操作日志发送至管理服务器300。之后，结束执行本流程。

根据本实施方式的信息管理系统1，在车辆10的乘客对车载装置100的操作感到不快的情况下，能够将该操作的日志实时地收集到管理服务器300。另外，能够避免收集与乘客感到不快的车载装置100的操作无关的日志。

此外，在上述实施方式中，车载装置100的操作通过作为操作部而设置的触摸面板显示器20或硬件按钮21来进行，但车载装置100也可以通过乘客的声音来进行操作。即使在该情况下，若通过乘客发出的声音来操作车载装置100，则也将该操作日志存储于日志信息DB130。

＜第2实施方式＞

本实施方式所涉及的信息管理系统的简要结构与上述的第1实施方式的信息管理系统的简要结构相同。另外，本实施方式所涉及的车载装置的功能结构与上述的第1实施方式的车载装置的功能结构相同。但是，在本实施方式中，在车载装置100中，不仅是操作日志，除操作日志以外的日志也作为日志信息被存储于日志信息DB130。

具体而言，在车载装置100中，用于向乘客提供多媒体信息的处理的日志(以下有时也称为“处理日志”)由日志生成部1201生成。然后，将所生成的处理日志作为日志信息存储于日志信息DB130。并且，在车载装置100中，车载装置100与其他设备之间的通信的日志(以下有时也称为“通信日志”)由日志生成部1201生成。这里，与车载装置100通信的其他设备例如也可以是乘客所持的终端、搭载于车辆10的设备(ECU等)或存在于车辆10的外部的通信设备。然后，将所生成的通信日志作为日志信息存储于日志信息DB130。车载装置100中的处理日志以及通信日志的生成以规定的分辨能力来执行。

也可能存在即使在乘客对车载装置100进行操作的过程中发出表示不愉快的第1声音其主要原因也是除车载装置100的操作以外的情况。例如，在车载装置100中，也可能存在在为了向乘客提供多媒体信息而本来应该执行的处理由于车载装置100的不良状况而未被执行的情况下乘客发出第1声音的情况。另外，在车载装置100中，也可能存在在本来应该执行的与其他设备的通信由于车载装置100的不良状况或通信故障而未被执行的情况下乘客发出第1声音的情况。

因此，在本实施方式所涉及的车载装置100中，在乘客对上述车载装置100进行操作的过程中取得的声音信息中含有第1声音的情况下，除规定期间中的操作日志之外，还从日志信息DB130中提取规定期间中的处理日志以及通信日志。然后，将提取出的操作日志、处理日志以及通信日志发送至管理服务器300。

由此，当车辆10的乘客在车载装置100的操作中对车载装置100的操作、处理或通信感到不愉快的情况下，能够将表示该不愉快的主要原因的日志实时地收集到管理服务器300。然后，在管理服务器300中，通过对从车载装置100接收到的操作日志、处理日志以及通信日志进行解析，确定乘客感到不快的主要原因。

但是，在管理服务器300中，存在即使对各种日志进行解析也无法确定乘客感到不快的主要原因的情况。例如，即使用于向乘客提供多媒体信息的处理的不良状况或与其他设备通信的不良状况是乘客不愉快的主要原因，如果未将表示该不良状况的日志储存于日志信息DB130，则在管理服务器300中，即使对处理日志以及通信日志进行解析，也无法确定乘客感到不快的主要原因。

因此，管理服务器300在即使对各种日志进行解析也无法确定乘客感到不快的主要原因的情况下，对车载装置100发送使日志生成部1201生成处理日志以及通信日志的分辨能力暂时高于规定的分辨能力的指令。在车载装置100中，通过提高由日志生成部1201生成处理日志以及通信日志的分辨能力，有可能生成以规定的分辨能力无法检出的表示不良状况的处理日志或通信日志，并将其储存于日志信息DB130。然后，如果表示不良状况的处理日志或通信日志储存于日志信息DB130，则通过管理服务器300中的对这些日志的解析，能够确定乘客感到不快的主要原因。

(信息处理)

这里，基于图7说明在管理服务器300中在日志解析时执行的信息处理的流程。图7是表示在管理服务器300中执行的信息处理的流程的流程图。

在本流程中，首先，在S201中，执行从车载装置100接收到的各种日志的解析。接下来，在S202中，根据S201中的各种日志的解析来判别是否确定出了乘客感到不快的主要原因。在S202中判定为肯定的情况下，即，在确定出乘客感到不快的主要原因的情况下，结束执行本流程。

另一方面，在S202中判定为否定的情况下，接下来执行S203的处理。在S203中，将使生成处理日志以及通信日志的分辨能力暂时高于规定的分辨能力的指令发送至车载装置100。之后，结束执行本流程。在车载装置100中，若接收从管理服务器300发送出的指令，则使生成处理日志以及通信日志的分辨能力暂时高于规定的分辨能力。然后，将以暂时高于规定的分辨能力的分辨能力生成的处理日志以及通信日志存储于日志信息DB130。

此外，在上述实施方式中，在车载装置100中，作为除操作日志以外的日志，生成处理日志以及通信日志这双方，并将它们作为日志信息存储于日志信息DB130。然后，将处理日志以及通信日志这双方与操作日志一起从车载装置100发送至管理服务器300。然而，在车载装置100中生成并被发送至管理服务器300的除操作日志以外的日志也可以仅是处理日志以及通信日志中的任一方。

＜其他实施方式＞

上述实施方式只是一例，本公开能够在不脱离其主旨的范围内适当地变更来实施。另外，在本公开中进行了说明的处理、方法只要在技术上不产生矛盾，能够自由地组合来实施。

另外，说明为通过1个装置进行的处理也可以由多个装置分担执行。或者，说明为通过不同装置进行的处理也可以由1个装置执行。在计算机系统中，能够灵活地变更通过怎样的硬件结构(服务器结构)来实现各功能。

本公开也可以通过将安装有在上述实施方式中已说明的功能的计算机程序供给到计算机并且该计算机具有的1个以上的处理器读出程序并执行来实现。这样的计算机程序可以通过可与计算机的系统总线连接的非临时性计算机可读存储介质提供给计算机，也可以经由网络提供给计算机。非临时性计算机可读存储介质例如包括如磁盘(软盘(注册商标)、硬盘驱动器(HDD)等)、光盘(CD－ROM、DVD盘、蓝光盘等)等任意类型的盘、读入专用存储器(ROM)、随机存取存储器(RAM)、EPROM、EEPROM、磁卡、闪存或光学式卡那样的适合用于储存电子命令的任意类型的介质。

Claims (11)

1.一种车载装置，向车辆的乘客提供多媒体信息，其中，

所述车载装置具备控制部，

当在所述乘客对所述车载装置进行操作的过程中从所述乘客发出的声音中含有表示所述乘客不愉快的第1声音的情况下，所述控制部执行如下处理，即：将包含取得了所述声音的时刻在内的规定期间中的所述车载装置的操作日志发送至服务器装置。

2.根据权利要求1所述的车载装置，其中，

所述控制部基于所述声音的文本来判别是否在所述声音中含有所述第1声音。

3.根据权利要求1所述的车载装置，其中，

所述控制部基于所述声音的音调来判别是否在所述声音中含有所述第1声音。

4.根据权利要求1～3中任一项所述的车载装置，其中，

所述控制部将在所述规定期间中在所述车载装置中执行的用于提供多媒体信息的处理的日志，与所述规定期间中的所述车载装置的操作日志一起，发送至所述服务器装置。

5.根据权利要求1～3中任一项所述的车载装置，其中，

所述控制部将所述规定期间中的所述车载装置与其他设备之间的通信的日志，与所述规定期间中的所述车载装置的操作日志一起，发送至所述服务器装置。

6.一种系统，包含向车辆的乘客提供多媒体信息的车载装置、和经由网络与所述车载装置进行通信的服务器装置，其中，

当在所述乘客对所述车载装置进行操作的过程中从所述乘客发出的声音中含有表示所述乘客不愉快的第1声音的情况下，所述车载装置将包含取得了所述声音的时刻在内的规定期间中的所述车载装置的操作日志发送至所述服务器装置。

7.根据权利要求6所述的系统，其中，

所述车载装置基于所述声音的文本来判别是否在所述声音中含有所述第1声音。

8.根据权利要求6所述的系统，其中，

所述车载装置基于所述声音的音调来判别是否在所述声音中含有所述第1声音。

9.根据权利要求6～8中任一项所述的系统，其中，

所述车载装置将在所述规定期间中在所述车载装置中执行的用于提供多媒体信息的处理的日志、或所述规定期间中的所述车载装置与其他设备之间的通信的日志，与所述规定期间中的所述车载装置的操作日志一起，发送至所述服务器装置。

10.根据权利要求9所述的系统，其中，

所述服务器装置基于从所述车载装置接收到的日志的解析结果，对所述车载装置发送使生成所述处理的日志或所述通信的日志的分辨能力提高的指令。

11.根据权利要求10所述的系统，其中，

所述服务器装置在通过对从所述车载装置接收到的日志进行解析而未能确定出与所述乘客的不愉快有关的日志的情况下，对所述车载装置发送使生成所述处理的日志或所述通信的日志的分辨能力提高的指令。