CN111667333A - 智能体装置、智能体装置的控制方法及存储介质 - Google Patents

智能体装置、智能体装置的控制方法及存储介质 Download PDF

Info

Publication number
CN111667333A
CN111667333A CN202010149145.3A CN202010149145A CN111667333A CN 111667333 A CN111667333 A CN 111667333A CN 202010149145 A CN202010149145 A CN 202010149145A CN 111667333 A CN111667333 A CN 111667333A
Authority
CN
China
Prior art keywords
display
agent
animation
occupant
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010149145.3A
Other languages
English (en)
Inventor
久保田基嗣
中山裕贵
古屋佐和子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Honda Motor Co Ltd
Original Assignee
Honda Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Honda Motor Co Ltd filed Critical Honda Motor Co Ltd
Publication of CN111667333A publication Critical patent/CN111667333A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G06Q30/0601—Electronic shopping [e-shopping]
    • G06Q30/0631—Item recommendations
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3629—Guidance using speech or audio output, e.g. text-to-speech
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3661—Guidance output on an external device, e.g. car radio
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3679—Retrieval, searching and output of POI information, e.g. hotels, restaurants, shops, filling stations, parking facilities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/12—Hotels or restaurants
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/37—Details of the operation on graphic patterns
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Automation & Control Theory (AREA)
  • General Engineering & Computer Science (AREA)
  • General Health & Medical Sciences (AREA)
  • Tourism & Hospitality (AREA)
  • Computer Hardware Design (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Primary Health Care (AREA)
  • Development Economics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)

Abstract

提供一种智能体装置、智能体装置的控制方法及存储介质。智能体装置具备：智能体功能部，其根据车辆的乘员的讲话，提供包含使输出部输出通过声音进行的响应的服务；以及显示控制部，其使设置于所述车辆内的显示部显示与所述智能体功能部对应的智能体所相关的动画，所述显示控制部，在使所述显示部的第一显示区域显示所述动画的情况下和使所述车辆内的位置与所述第一显示区域不同的第二显示区域显示所述动画的情况下，使所述动画的显示类型不同。

Description

智能体装置、智能体装置的控制方法及存储介质
技术领域
本发明涉及智能体装置、智能体装置的控制方法及存储介质。
背景技术
以往，公开了与智能体功能相关的技术，该智能体功能一边与车辆的乘员进行对话，一边提供与乘员的要求相应的驾驶支援相关的信息、车辆的控制、其他应用程序等(日本特开2006-335231号公报)。
发明内容
近年来，关于将智能体及智能体功能向车辆的搭载，正在推进实用化，但是，关于智能体功能启动时的显示类型，没有充分进行研究。因此，在以往的技术中，存在无法以合适的形态显示的情况。
本发明是考虑这样的情形而完成的，目的之一在于，提供一种能够以合适的形态实现智能体提供智能体功能的情况下的车内显示的智能体装置、智能体装置的控制方法及存储介质。
本发明的智能体装置、智能体装置的控制方法及存储介质采用了以下的结构。
(1)：本发明的一方案的智能体装置具备：智能体功能部，其根据车辆的乘员的讲话，提供包含使输出部输出通过声音进行的响应的服务；以及显示控制部，其使设置于所述车辆内的显示部显示与所述智能体功能部对应的智能体所相关的动画，所述显示控制部在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
(2)：在上述(1)的方案中，所述第一显示区域与所述第二显示区域相比，在所述车辆内的位置靠近设想驾驶员的头部的位置。
(3)：在上述(1)或(2)的方案中，所述显示控制部在使所述第一显示区域显示所述智能体的动画的情况下，与使所述第二显示区域显示所述智能体的动画的情况相比，以简洁的形态使所述显示部显示所述智能体的动画。
(4)：在上述(3)的方案中，所述显示控制部在根据所述乘员的讲话而使所述第一显示区域显示所述智能体的动画的情况下，与使所述第二显示区域显示所述智能体的动画的情况相比，以简洁的形态使所述显示部显示所述智能体的动画。
(5)：在上述(3)或(4)的方案中，所述简洁的形态包括动作小的形态。
(6)：在上述(1)～(5)的方案中，所述显示控制部根据所述车辆的驾驶状况，变更与所述智能体相关的动画的显示位置和显示类型中的至少一方。
(7)：在上述(1)～(6)的方案中，所述显示控制部使所述显示部显示根据所述乘员的讲话而提供的智能体信息，在使所述第一显示区域显示的情况下与在使所述第二显示区域显示的情况下，使所述智能体信息的显示类型不同。
(8)：在上述(7)的方案中，所述显示控制部在使所述第一显示区域显示所述智能体信息的情况下，与使所述第二显示区域显示所述智能体信息的情况相比，减少信息量。
(9)：在上述(7)的方案中，所述显示控制部在由所述乘员使用操作部指定了正显示于所述第二显示区域的所述智能体信息的一部分的情况下，将所述第一显示区域的显示变更为基于由所述乘员指定了的所述智能体信息的一部分得到的信息。
(10)：在上述(1)～(9)的方案中，所述智能体功能部取得进行了讲话的乘员在所述车辆内的座位位置，所述显示控制部基于进行了讲话的所述乘员在所述车辆内的座位位置，使所述第一显示区域和所述第二显示区域中的与设想进行了讲话的所述乘员的头部的位置靠近的那一方的显示区域显示所述动画。
(11)：在上述(10)的方案中，所述显示控制部在进行了讲话的所述乘员是驾驶员座的乘员的情况下，相比于所述第一显示区域和所述第二显示区域中的与设想进行了讲话的所述乘员的头部的位置靠近的那一方的显示区域，使与设想进行了讲话的所述乘员的头部的位置远离的那一方的显示区域显示基于由所述智能体功能部取得的信息得到的更详细的信息。
(12)：本发明的另一方案的智能体装置的控制方法使计算机进行如下处理：使用智能体功能，根据车辆的乘员的讲话而提供包含使输出部输出通过声音进行的响应的服务；使设置于所述车辆内的显示部显示与所述智能体功能相关的动画；以及在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
(13)：本发明的另一方案的存储介质存储有程序，所述程序使计算机执行如下处理：使用智能体功能，根据车辆的乘员的讲话而提供包含使输出部输出通过声音进行的响应的服务；使设置于所述车辆内的显示部显示与所述智能体功能相关的动画；以及在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
根据上述(1)～(13)的方案，能够以合适的形态实现智能体提供智能体功能的情况下的车内显示。
附图说明
图1是包含智能体装置的智能体系统的结构图。
图2是示出第一实施方式的智能体装置的结构和搭载于车辆的设备的图。
图3是示出显示·操作装置的配置例的图。
图4是示出扬声器单元的配置例的图。
图5是用于对声像定位的位置确定的原理进行说明的图。
图6是示出驾驶员座用画面和副驾驶员座用画面的一例的图。
图7是示出第一显示器的画面例的图。
图8是示出AG动画的一例的图。
图9是示出AG动画的另一例的图。
图10是示出副驾驶员座的乘员进行了讲话的情况下的画面的一例的图。
图11是示出驾驶员座的乘员进行了讲话的情况下的画面的一例的图。
图12是示出驾驶员座的乘员进行了讲话的情况下的画面的另一例的图。
图13是示出由显示控制部进行的处理的一例的流程图。
图14是示出由显示控制部进行的处理的另一例的流程图。
具体实施方式
以下，参照附图，对本发明的智能体装置、智能体装置的控制方法及存储介质的实施方式进行说明。智能体装置是实现智能体系统的一部分或全部的装置。以下，作为智能体装置的一例，对搭载于车辆(以下，车辆M)并具备多个种类的智能体功能的智能体进行说明。所谓智能体功能，例如是如下功能：一边与车辆M的乘员进行对话，一边进行基于乘员的讲话中所包含的要求(指令)的各种信息提供，或者居间于网络服务，或者进行从智能体侧的提议。多个种类的智能体各自起到的功能、处理步骤、控制、输出形态·内容也可以分别不同。智能体功能中，可以存在具有进行车辆内的设备(例如与驾驶控制、车身控制相关的设备)的控制等的功能的智能体功能。
智能体功能例如除了识别乘员的声音的声音识别功能(将声音文本化的功能)之外，还综合地利用自然语言处理功能(理解文本的构造、意思的功能)、对话管理功能、经由网络而检索其他装置或检索自身装置所持有的规定的数据库的网络检索功能等来实现。这些功能的一部分或全部可以利用AI(Artificial Intelligence)技术来实现。用于进行这些功能的结构的一部分(尤其是，声音识别功能、自然语言处理解释功能)也可以搭载于能够经由车辆M的车载通信装置或被带入到车辆M中的通用通信装置而进行通信的智能体服务器(外部装置)。在以下的说明中，将结构的一部分搭载于智能体服务器且智能体装置与智能体服务器协同配合而实现智能体系统作为前提。作为智能体系统，将智能体装置与智能体服务器协同配合而假想地出现的服务提供主体(服务·实体)称作智能体。
<整体结构>
图1是包含智能体装置100的智能体系统1的结构图。智能体系统1例如具备智能体装置100和多个智能体服务器200-1、200-2、200-3、…。附图标记的末尾的连字符以下数字设为用于对智能体进行区分的标识符。在不对是哪一个智能体服务器进行区分的情况下，存在简称作智能体服务器200的情况。在图1中示出了3个智能体服务器200，但是，智能体服务器200的数量既可以是2个，也可以是4个以上。同一智能体也可以具有多个智能体服务器。各智能体服务器200由互不相同的智能体的提供者运营。因此，本发明中的智能体是由互不相同的提供者实现的智能体。作为提供者，例如可以举出机动车制造商、网络服务商、电子商贸商、便携终端的销售者、制造者等，任意的主体(法人、团体、个人等)都能够成为智能体系统的提供者。
智能体装置100经由网络NW而与多个种类的智能体服务器200通信。网络NW例如包括互联网、蜂窝网、Wi-Fi网、WAN(Wide Area Network)、LAN(Local Area Network)、公用线路、电话线、无线基地站等中的一部分或全部。网络NW连接有各种网页服务器300，智能体服务器200或智能体装置100能够经由网络NW而从各种网页服务器300取得网页。
智能体装置100与车辆M的乘员进行对话，将来自乘员的声音向智能体服务器200发送，将从智能体服务器200得到的回答以声音输出、图像显示的形式向乘员提示。
<第一实施方式>
[车辆]
图2是示出第一实施方式的智能体装置100的结构和搭载于车辆M的设备的图。在车辆M例如搭载有一个以上的话筒10、显示·操作装置20、扬声器单元30、导航装置40、车辆设备50、车载通信装置60、乘员识别装置80及智能体装置100。存在智能手机等通用通信装置70被带入到车室内，作为通信装置或智能体系统的一部分而被使用的情况。这些装置通过CAN(Controller Area Network)通信线等多路通信线、串行通信线、无线通信网等而互相连接。图2所示的结构只不过是一例，既可以省略结构的一部分，也可以还追加别的结构。
话筒10是收集在车室内产生的声音的收音部。为了取得车辆的多个乘员的讲话，话筒10也可以存在多个。显示·操作装置20是显示图像并且能够接受输入操作的装置(或装置群)。显示·操作装置20例如包括作为触摸面板而构成的显示器装置。显示·操作装置20也可以还包括HUD(Head Up Display)、机械式的输入装置、输出装置。扬声器单元30例如包括配设于车室内的互不相同的位置的多个扬声器(声音输出部)。显示·操作装置20也可以在智能体装置100和导航装置40间共用。关于它们的详情后述。
导航装置40具备导航HMI(Human machine Interface)、GPS(Global PositioningSystem)等位置测定装置、存储有地图信息的存储装置、及进行路径搜索等的控制装置(导航控制器)。话筒10、显示·操作装置20及扬声器单元30中的一部分或全部也可以作为导航HMI而被使用。导航装置40搜索用于从由位置测位装置确定出的车辆M的位置移动至由乘员输入的目的地的路径(导航路径)，使用导航HMI输出引导信息，以便车辆M能够沿着路径行驶。路径搜索功能也可以处于能够经由网络NW访问的导航服务器中。在该情况下，导航装置40从导航服务器取得路径而输出引导信息。智能体装置100也可以以导航控制器为基础而构筑，在该情况下，导航控制器与智能体装置100硬件上构成为一体。
车辆设备50例如包括发动机、行驶用马达等驱动力输出装置、发动机的启动马达、车门锁定装置、车门开闭装置、车窗、车窗的开闭装置及车窗的开闭控制装置、座椅、座椅位置的控制装置、车室内后视镜及其角度位置控制装置、车辆内外的照明装置及其控制装置、刮水器、除雾器及各自的控制装置、方向指示灯及其控制装置、空调装置、行驶距离、轮胎的空气压的信息、燃料的剩余量信息等的车辆信息装置等。
车载通信装置60例如是能够利用蜂窝网、Wi-Fi网而无关直接·间接地访问网络NW的无线通信装置。在此，所谓间接是经由路由器等外部通信终端访问网络NW。
乘员识别装置80例如包括就座传感器、车室内相机、生物体认证系统、图像识别装置等。就座传感器包括设置于座位的下部的压力传感器、安装于座椅安全带的张力传感器等。车室内相机是设置于车室内的CCD(Charge Coupled Device)相机、CMOS(Complementary Metal Oxide Semiconductor)相机。图像识别装置对车室内相机的图像进行解析，识别每个座位的乘员的有无、面部朝向等。在本实施方式中，乘员识别装置80是就座位置识别部的一例。
图3是示出显示·操作装置20的配置例的图。显示·操作装置20例如包括第一显示器21、第二显示器22、第三显示器23、操作开关ASSY26。显示·操作装置20也可以还包括HUD28。
在车辆M中，例如存在设置有转向盘SW的驾驶员座DS、和相对于驾驶员座DS设置于车宽方向(图中Y方向)的副驾驶员座AS。第一显示器21设置于与驾驶员座DS对置地设置的仪表MT的附近。第二显示器22是从仪表板中的驾驶员座DS与副驾驶员座AS的中间附近延伸至与副驾驶员座AS的左端部对置的位置的横长形状的显示器装置。第三显示器23设置于驾驶员座DS与副驾驶员座AS的车宽方向上的中间附近且第二显示器22的下方。
第一显示器21是包括第一显示区域的一例，第二显示器22是包括第二显示区域的一例。第一显示区域与第二显示区域相比，本车辆M内的位置靠近设想驾驶员的头部的位置。第二显示器22也可以具有第一显示区域和第二显示区域。在该情况下，第二显示器22优选延伸至驾驶员座DS的右端部。
例如，第一显示器21、第二显示器22及第三显示器23均作为触摸面板而构成，具备LCD(Liquid Crystal Display)、有机EL(Electroluminescence)、等离子体显示器等作为显示部。操作开关ASSY26是拨码开关、按钮式开关等集聚而成的。显示·操作装置20将由乘员进行了的操作的内容向智能体装置100输出。第一显示器21、第二显示器22及第三显示器23显示的内容可以由智能体装置100决定。
图4是示出扬声器单元30的配置例的图。扬声器单元30例如包括扬声器30A～30H。扬声器30A设置于驾驶员座DS侧的窗柱(所谓的A柱)。扬声器30B设置于靠近驾驶员座DS的车门的下部。扬声器30C设置于副驾驶员座AS侧的窗柱。扬声器30D设置于靠近副驾驶员座AS的车门的下部。扬声器30E设置于靠近右侧后部座位BS1侧的车门的下部。扬声器30F设置于靠近左侧后部座位BS2侧的车门的下部。扬声器30G设置于第二显示器24的附近。扬声器30H设置于车室的顶棚(roof)。
在该配置中，例如，在专门使扬声器30A及30B输出了声音的情况下，声像会定位于驾驶员座DS附近。在专门使扬声器30C及30D输出了声音的情况下，声像会定位于副驾驶员座AS附近。在专门使扬声器30E输出了声音的情况下，声像会定位于右侧后部座位BS1附近。在专门使扬声器30F输出了声音的情况下，声像会定位于左侧后部座位BS2附近。在专门使扬声器30G输出了声音的情况下，声像会定位于车室的前方附近，在专门使扬声器30H输出了声音的情况下，声像会定位于车室的上方附近。不限定于此，扬声器单元30能够通过使用混音器、放大器调整各扬声器输出的声音的分配，来使声像定位于车室内的任意的位置。
[智能体装置]
返回图2，智能体装置100具备管理部110、智能体功能部150-1、150-2、150-3、配对应用执行部152。管理部110例如具备声响处理部112、按每个智能体WU(Wake Up)判定部114、指示接受部115、显示控制部116、声音控制部118。在不对是哪一个智能体功能部进行区分的情况下，简称作智能体功能部150。示出了3个智能体功能部150，这不过是与图1中的智能体服务器200的数量对应的一例，智能体功能部150的数量也可以是2个，还可以是4个以上。图2所示的软件配置是为了说明而简易地示出，实际上，能够像例如也可以在智能体功能部150与车载通信装置60之间介入有管理部110那样任意地改变。
智能体装置100的各构成要素例如通过由CPU(Central Processing Unit)等硬件处理器执行程序(软件)来实现。这些构成要素中的一部分或全部既可以通过LSI(LargeScale Integration)、ASIC(Application Specific Integrated Circuit)、FPGA(Field-Programmable Gate Array)、GPU(Graphics Processing Unit)等硬件(包括电路部；circuitry)来实现，也可以通过软件与硬件的协同配合来实现。程序既可以预先保存于HDD(Hard Disk Drive)、闪存器等存储装置(具备非暂时性的存储介质的存储装置)中，也可以保存于DVD、CD-ROM等可装卸的存储介质(非暂时性的存储介质)并通过将存储介质装配于驱动装置而安装。
管理部110通过执行OS(Operating System)、中间件等程序而发挥功能。
管理部110的声响处理部112对被输入的声音进行声响处理，以使得成为适于识别针对每个智能体预先设定的唤醒词的状态。
按每个智能体WU判定部114与智能体功能部150-1、150-2、150-3分别对应地存在，识别针对每个智能体预先设定的唤醒词。按每个智能体WU判定部114从进行了声响处理的声音(声音流)识别声音的意思。首先，按每个智能体WU判定部114基于声音流中的声音波形的振幅和零交叉来检测声音区间。按每个智能体WU判定部114也可以进行通过基于混合高斯分布模型(GMM；Gaussian mixture model)的帧单位的声音识别及非声音识别而实现的区间检测。
接着，按每个智能体WU判定部114判定检测到的声音区间中的声音是否符合唤醒词。在判定为是唤醒词的情况下，按每个智能体WU判定部114使对应的智能体功能部150启动，使智能体启动。与按每个智能体WU判定部114相当的功能也可以搭载于智能体服务器200。在该情况下，管理部110将由声响处理部112进行了声响处理的声音流向智能体服务器200发送，在智能体服务器200判定为是唤醒词的情况下，按照来自智能体服务器200的指示，智能体功能部150启动。各智能体功能部150可以始终启动且自行进行唤醒词的判定。在该情况下，无需管理部110具备按每个智能体WU判定部114。
智能体功能部150与对应的智能体服务器200协同配合而使智能体出现，根据车辆的乘员的讲话，提供包含通过声音进行的响应的智能体功能。在智能体功能部150中可以包含被赋予了控制车辆设备50的权限的功能部。智能体功能部150中可以存在经由配对应用执行部152而与通用通信装置70协作来与智能体服务器200通信的功能部。例如，对智能体功能部150-1赋予了控制车辆设备50的权限。智能体功能部150-1经由车载通信装置60而与智能体服务器200-1通信。智能体功能部150-2经由车载通信装置60而与智能体服务器200-2通信。智能体功能部150-3经由配对应用执行部152而与通用通信装置70协作来与智能体服务器200-3通信。配对应用执行部152例如通过Bluetooth(注册商标)与通用通信装置70进行配对，使智能体功能部150-3与通用通信装置70连接。智能体功能部150-3电可以通过利用了USB(Universal Serial Bus)等的有线通信而连接于通用通信装置70。以下，存在将智能体功能部150-1与智能体服务器200-1协同配合而出现的智能体称作智能体1，将智能体功能部150-2与智能体服务器200-2协同配合而出现的智能体称作智能体2，将智能体功能部150-3与智能体服务器200-3协同配合而出现的智能体称作智能体3的情况。
指示接受部115使用显示·操作装置20接受来自乘员的指示。不限定于此，指示接受部115也可以具备声音识别功能，基于车内声音来识别声音的意思，由此，接受来自乘员的指示。车内声音包括从话筒10输入的声音、由声响处理部112进行了声响处理的声音(声音流)等。
显示控制部116根据来自智能体功能部150的指示，使第一显示器21、第二显示器22或第三显示器23显示图像、动态图像。
以下，设为显示控制部116按照来自智能体功能部150的指示，生成驾驶员座用画面用的图像和副驾驶员座用画面用的图像，使第一显示器21显示驾驶员座用画面的图像，使第二显示器22显示副驾驶员座用画面的图像。关于驾驶员座用画面的图像和副驾驶员座用画面用的图像后述。作为副驾驶员座用图像、驾驶员座用图像的一部分，显示控制部116例如生成在车室内进行与乘员的交流的拟人化了的智能体的动画(以下，称作AG动画)，使第一显示器21和第二显示器22显示所生成的AG动画。
AG动画例如是表示智能体的形象、智能体的图标等的动画。AG动画例如是人、拟人化了的物对乘员搭话的形态的图像或动态图像。AG动画例如可以包含至少由观看者(乘员)识别表情、面部朝向的程度的面部图像。例如，AG动画可以是，在面部区域中呈现模仿眼睛、鼻子的部件，基于面部区域中的部件的位置而识别表情、面部朝向。AG动画也可以被立体地感受，通过包含三维空间中的头部图像而由观看者识别智能体的面部朝向，通过包含主体(身躯、手脚)的图像而由观看者识别智能体的活动(动作、举止)、姿态等。
例如，显示控制部116在智能体功能部150处于启动中的情况下，使第一显示器21和第二显示器22等显示AG动画。显示控制部116也可以根据乘员的讲话而使AG动画的活动不同。例如，显示控制部116也可以在智能体的待机中，使AG动画执行小的活动，在智能体执行与乘员的讲话相应的处理的情况下，使AG动画执行与所执行的处理相应的活动。
声音控制部118根据来自智能体功能部150的指示，使扬声器单元30所包含的扬声器中的一部分或全部输出声音。声音控制部118也可以进行使用多个扬声器单元30而使智能体声音的声像定位于与AG动画的显示位置对应的位置的控制。所谓与AG动画的显示位置对应的位置，例如是被预测为乘员感到AG动画正在讲出智能体声音的位置，具体而言，是AG动画的显示位置附近(例如，2～3[cm]以内)的位置。所谓声像定位，例如是通过调节向乘员的左右耳传递的声音的大小、时机来设定乘员感到的声源的空间上的位置。
[智能体服务器]
图5是示出智能体服务器200的结构和智能体装置100的结构的一部分的图。以下，与智能体服务器200的结构一起，对智能体功能部150等的动作进行说明。在此，省略关于从智能体装置100到网络NW的物理上的通信的说明。
智能体服务器200具备通信部210。通信部210例如是NIC(NetworkInterfaceCard)等网络接口。而且，智能体服务器200例如具备声音识别部220、自然语言处理部222、对话管理部224、网络检索部226、响应文生成部228。这些构成要素例如通过由CPU等硬件处理器执行程序(软件)来实现。这些构成要素中的一部分或全部既可以通过LSI、ASIC、FPGA、GPU等硬件(包括电路部；circuitry)来实现，也可以通过软件与硬件的协同配合来实现。程序既可以预先保存于HDD、闪存器等存储装置(具备非暂时性的存储介质的存储装置)中，也可以保存于DVD、CD-ROM等可装卸的存储介质(非暂时性的存储介质)并通过将存储介质装配于驱动装置而安装。
智能体服务器200具备存储部250。存储部250通过上述各种存储装置来实现。在存储部250中保存有个人简介252、字典DB(数据库)254、知识库DB256、响应规则DB258等数据、程序。
在智能体装置100中，智能体功能部150将声音流或进行了压缩、编码等处理的声音流向智能体服务器200发送。智能体功能部150可以在识别到能够进行本地处理(不经由智能体服务器200的处理)的声音指令的情况下，进行通过声音指令要求的处理。所谓能够进行本地处理的声音指令，是通过参照智能体装置100所具备的存储部(未图示)而能够回答的声音指令，在智能体功能部150-1的情况下是控制车辆设备50的声音指令(例如，打开空调装置的指令等)。因此，智能体功能部150也可以具有智能体服务器200所具备的功能的一部分。
当取得声音流后，声音识别部220进行声音识别并将文本化了的文字信息输出，自然语言处理部222针对文字信息一边参照字典DB254一边进行意思解释。字典DB254中，对于文字信息，抽象化了的意思信息建立了对应关系。字典DB254也可以包含同义词、近义词的一览信息。声音识别部220的处理和自然语言处理部222的处理可以不明确分阶段，而是接受自然语言处理部222的处理结果而声音识别部220修正识别结果等相互影响地进行。
自然语言处理部222例如在识别到“今天的天气是”、“天气怎么样”等意思作为识别结果的情况下，生成置换为标准文字信息“今天的天气”的指令。由此，即便在请求的声音存在了表述差异的情况下，也能够容易地进行与要求相符的对话。自然语言处理部222例如也可以使用利用了概率的机器学习处理等人工智能处理来识别文字信息的意思，生成基于识别结果的指令。
对话管理部224基于自然语言处理部222的处理结果(指令)，一边参照个人简介252、知识库DB256、响应规则DB258，一边决定针对车辆M的乘员的讲话的内容。个人简介252包含针对每个乘员保存着的乘员的个人信息、兴趣偏好、过去的对话的履历等。知识库DB256是规定了事物的关系性的信息。响应规则DB258是规定了针对指令而智能体应该进行的动作(回答、设备控制的内容等)的信息。
对话管理部224也可以通过使用从声音流得到的特征信息而与个人简介252进行对照，来确定乘员。在该情况下，个人简介252中，例如声音的特征信息与个人信息建立了对应关系。所谓声音的特征信息，例如是与声音的高度、语调、节奏(声音的高低的模式)等说话方式的特征、基于梅尔频率倒谱系数(Mel Frequency Cepstrum Coefficients)等的特征量相关的信息。声音的特征信息例如是在乘员的初始登记时使乘员对规定的单词、句子等进行发声，通过识别发出的声音而得到的信息。
对话管理部224在指令是要求能够经由网络NW而检索的信息的指令的情况下，使网络检索部226进行检索。网络检索部226经由网络NW而访问各种网页服务器300，取得期望的信息。所谓“能够经由网络NW而检索的信息”，例如是处于车辆M的周边的餐厅的由一般用户评价的评价结果，或者是与当天的车辆M的位置相应的天气预报。
响应文生成部228以使得由对话管理部224决定出的讲话的内容向车辆M的乘员传达的方式，生成响应文，并向智能体装置100发送。响应文生成部228也可以在确定了乘员是在个人简介中登记了的乘员的情况下，呼叫乘员的名字，生成模仿乘员的说话方式的说话方式的响应文。
智能体功能部150当取得响应文后，指示声音控制部118进行声音合成并输出声音。智能体功能部150指示显示控制部116与声音输出相配合地显示AG动画。这样，假想地出现的智能体对车辆M的乘员进行响应的智能体功能得以实现。
[显示控制]
显示控制部116使第一显示器21和第二显示器22显示与智能体功能部150提供的服务、智能体等相关的信息，并且在使第一显示器21显示的情况下与在使第二显示器22显示的情况下，使AG动画的显示类型不同。例如，显示控制部116在使第一显示器21显示AG动画的情况下，与使第二显示器22显示AG动画的情况相比，以简洁的形态显示。所谓简洁的形态，是用于不吸引观看者(乘员)的注意的显示类型。
简洁的形态中，例如关于AG动画的动作，包括减少动作、放缓动作、减小动作(使得紧凑)、使动作简朴等。简洁的形态中，关于AG动画的色彩，包括减弱对比、减少所使用的颜色的数量、使颜色搭配朴素(暗淡)等。不限定于这些，简洁的形态中，例如可以包括减小AG动画的大小、使AG动画的表情贫乏、不使AG动画的主体(身躯、手脚)显示而仅使面部显示、不使任何道具与AG动画一起显示、在中途不使AG动画的颜色变化等。
换言之，也可以说是，显示控制部116在使第二显示器22显示AG动画的情况下，与使第一显示器21显示AG动画的情况相比，以丰富的形态显示。所谓丰富的形态，是用于吸引观看者(乘员)的注意的显示类型。丰富的形态，是上述的简洁的形态的相反的，例如，关于AG动画的动作，包括增加动作、加快动作、增大动作(使得活跃)、使动作表现丰富等。丰富的形态中，关于AG动画的色彩，包括加强对比、增多所使用的颜色的数量、使颜色搭配花哨(鲜明)等。不限定这些，丰富的形态中，例如可以包括加大AG动画的大小、使AG动画的表情丰富、使AG动画的主体(身躯、手脚)显示、使某道具与AG动画一起显示、在根据乘员的讲话而智能体功能部150的应对发生了变化的情况下使AG动画的颜色变化等。
显示控制部116也可以在根据乘员的讲话而使第一显示器21显示AG动画的情况下，与使第二显示器22显示AG动画的情况相比，以简洁的形态显示。例如，在根据乘员的讲话而使AG动画执行规定的活动(动作、举止)的情况下，显示控制部116使显示于第二显示器22的AG动画执行与乘员的讲话相应的活动，但是不使显示于第一显示器21的AG动画执行与乘员的讲话相应的活动。不限定于此，在乘员的讲话中包含唤醒词、“以简洁形态”等规定的内容的情况下，显示控制部116也可以在使第一显示器21显示AG动画的情况下，与使第二显示器22显示AG动画的情况相比，以简洁的形态显示。
显示控制部116也可以使显示·操作装置20显示根据乘员的讲话而提供的智能体信息。智能体信息中，例如包括智能体向乘员推荐的推荐列表、基于乘员要求的条件使用检索引擎检索到的检索结果等。
显示控制部116也可以在使第一显示器21显示智能体信息的情况下与在使第二显示器22显示智能体信息的情况下，使智能体信息的显示类型不同。例如，显示控制部116在使第一显示器21显示智能体信息的情况下，与使第二显示器22显示智能体信息的情况相比，减少显示于显示器的信息量。不限定于此，显示控制部116也可以在使第一显示器21显示智能体信息的情况下，与使第二显示器22显示智能体信息的情况相比，以简洁的形态显示。
在以AG动画显示由智能体功能部150进行的相同意思的活动的情况下，显示控制部116既可以在相同时机使第一显示器21和第二显示器22显示，也可以在不同时机使第一显示器21和第二显示器22显示。关于由智能体功能部150取得的同一智能体信息的一部分，显示控制部116既可以在相同时机使第一显示器21和第二显示器22显示，也可以在不同时机使第一显示器21和第二显示器22显示。
[画面例其一]
图6是示出驾驶员座用画面和副驾驶员座用画面的一例的图。驾驶员座用画面501包括服务标题510、推荐列表520、AG动画550。副驾驶员座用画面601包括服务标题610、推荐列表620、限定条件630、周边地图640、AG动画650。在此，对提供推荐服务的例子进行说明，即，智能体功能部150-1与智能体服务器200-1协同配合，经由网络NW访问各种网页服务器300，取得与乘员的要求相应的推荐信息，向乘员提供所取得的推荐信息。在由乘员选择了推荐信息之一作为目的地的情况下，智能体功能部150-1也可以控制车辆设备50而使本车辆M朝向所选择的目的地行驶。
服务标题510、610表示智能体功能部150-1提供的服务的概要。推荐列表520、620表示由智能体功能部150-1取得的推荐信息的一部分。推荐列表520、620中例如包括与本车辆M的周边的餐饮店相关的信息。推荐列表620包括多个推荐要素621、622、623、624…，针对每个推荐要素而汇总了各餐饮店的信息。
限定条件630表示锁定(限定)显示于推荐列表620的信息的条件。周边地图640表示推荐列表520所包含的各餐饮店的位置。AG动画550、650是与智能体功能部150-1对应的智能体的动画。在此，与智能体功能部150-1对应的智能体例如是例如拟人化了的圆球那样的外观，给看到的人带来相同那样的印象的动画。由此，能够使乘员识别到虽然表现形态不同但是是相同的智能体功能部150-1的智能体。
服务标题510与服务标题610相比，显示的文字数少。服务标题510以一句话来表现智能体提供的服务，服务标题610以详细的句子来表现智能体提供的服务。通过这样，驾驶员座DS的乘员能够以短的时间推测显示着的信息的内容，能够抑制驾驶员座DS的乘员注视显示器。
推荐列表520与推荐列表620相比，显示着的文字数、信息量少。在推荐列表520中例如显示餐饮店的名称、到餐饮店的所需要时间、餐饮店的评价。在推荐列表620中，除了餐饮店名的名称、到餐饮店的所需要时间、餐饮店的评价之外，例如可以还包括到餐饮店的距离、餐饮店的营业时间、餐饮店的口碑、价格范围、示意图像等。不仅是显示项目的数量的不同，即便是在推荐列表520、620的双方显示的信息，其显示也可以不同。例如，关于餐饮店的评价，推荐列表620利用星的插图来表现星的数量，推荐列表520利用数字来表现星的数量。通过这样，驾驶员座DS的乘员能够得到关于周边的餐饮店的简单的信息。能够抑制驾驶员座DS的乘员想要看显示着的许多信息而注视显示器。
AG动画550与AG动画650相比，以简洁的形态显示。例如，AG动画550既不动作，表情也不变化。另一方面，AG动画650上下持续动作，视线的朝向、嘴的位置、形状变化。AG动画550与AG动画650相比，大小小，表情沉稳，色彩也简朴。通过这样，能够防止驾驶员座DS的乘员注视AG动画550、眼睛追随AG动画550的变化。
显示控制部116也可以通过仅使第二显示器22显示限定条件630、周边地图640，而不使第一显示器21显示，来使显示类型不同。通过使第二显示器22显示限定条件630，指示接受部115从副驾驶员座AS的乘员接受条件的限定指示，能够进一步锁定显示于推荐列表620的信息。副驾驶员座AS的乘员能够通过自己的判断或按照驾驶员座DS的乘员的指示来操作限定条件630。显示控制部116通过不使第一显示器21显示限定条件630，能够抑制驾驶员座DS的乘员通过手动操作输入针对智能体的指示。通过仅使第二显示器22显示周边地图640，能够抑制驾驶员座DS的乘员注视细致的地图。条件的限定指示不限定于由第二显示器22接受，也可以由指示接受部115使用声音识别功能来接受。在该情况下，副驾驶员座AS的乘员也能够观看限定条件630来进行确认，从而指示条件的限定，便利性提高。
显示控制部116也可以使AG动画执行与乘员的讲话相应的活动。活动例如包括动作、举止、表情等。例如，在等待着乘员进行的讲话的情况下，AG动画可以采取沉稳地等待着那样的活动。在寻找与乘员的讲话相应的信息的情况下，AG动画也可以采取透过放大镜而寻找着什么那样的活动。
[画面例其二]
显示控制部116在由副驾驶员座AS的乘员使用显示·操作装置20指定了显示于第二显示器22的智能体信息的一部分的情况下，也可以将第一显示器21的显示变更为基于由副驾驶员座AS的乘员指定的智能体信息的一部分得到的信息。智能体信息的一部分的指定也可以由指示接受部115使用声音识别功能来接受。
图7是示出第一显示器21的画面例的图。推荐列表520(t1)和AG动画550(t1)与图6所示的显示类型相同。例如，显示控制部116在由副驾驶员座AS的乘员触摸了显示于第二显示器22的推荐要素621(图6参照)的情况下，指示接受部115接受推荐要素621被指定，向显示控制部116通知该意旨。显示控制部116使第一显示器21显示与推荐要素621所对应的餐饮店相关的信息。例如，显示控制部116使第一显示器21显示如图7所示的推荐列表520(t2)和AG动画550(t2)。
推荐列表520(t2)中包括与同推荐要素621对应的餐饮店相关的、餐饮店的名称、到餐饮店的所需要时间、餐饮店的评价及示意图像。即，在由乘员选择了显示于第二显示器22的一个推荐要素的情况下，显示控制部116减少显示于推荐列表520的推荐要素的数量。由此，显示控制部116能够使显示于推荐列表520(t2)的文字的大小比推荐列表520(t1)大，从而使推荐列表520(t2)显示在推荐列表520(t1)中没有显示的示意图像。通过这样，驾驶员座DS的乘员容易看到与副驾驶员座AS的乘员所选择的餐饮店相关的信息，与通过显示许多细小的字等而难以观看的画面相比，能够防止驾驶员座DS的乘员注视显示器。副驾驶员座AS的乘员能够关于去往自己喜欢的餐饮店，向驾驶员座DS的乘员寻得同意。
在由乘员选择了显示于第二显示器22的一个推荐要素的情况下，显示控制部116也可以使AG动画550(t2)比AG动画550(t1)小，且显示位置变更为画面的端部。
[画面例其三]
在使AG动画执行与乘员的讲话相应的活动的情况下，显示控制部116也可以使显示于第一显示器21的AG动画的活动和显示于第二显示器22的AG动画的活动不同。例如，显示控制部116使显示于第一显示器21的AG动画的活动与显示于第二显示器22的AG动画的活动相比，成为简洁的形态。此处的简洁的形态，例如包括表情沉稳、动作沉稳、举止冷静、以使观看者受到的刺激变弱的方式进行表现等。
图8是示出AG动画的一例的图。例如，设为乘员讲出了“告诉我附近的餐厅”。根据该讲话，智能体功能部150-1与智能体服务器200-1协同配合，从各种网页服务器300取得与本车辆M的周边的餐饮店相关的信息。然后，显示控制部116使第一显示器21和第二显示器22分别显示如图6所示的推荐列表520、620和如图8所示的AG动画550(t11)、650(t11)。然后，声音控制部118使用多个扬声器单元30输出智能体声音“明白了”、“锁定检索结果吗？”。
AG动画550(t11)是闭着眼的沉稳的动画，没有动作。AG动画650(t11)是稍微吐出舌头而肚子饿了那样的动画，上下动作着。
接下来，设为乘员讲出了“寿司或中餐”、“30分钟以内到的地方”。根据该讲话，智能体功能部150-1从自各种网页服务器300取得的信息中，提取与“寿司或中餐”的派系且从本车辆M的位置30分钟以内抵达的餐厅相关的信息。然后，显示控制部116基于所提取的信息，变更推荐列表520、620，使第一显示器21、第二显示器22分别显示AG动画550(t12)、650(t12)。然后，声音控制部118使用多个扬声器单元30输出智能体声音“锁定”。
AG动画550(t12)是睁着眼的简朴的动画，没有动作。AG动画650(t12)是将放大镜放在眼前而寻找着什么那样的动画，左右动作着。
接下来，设为乘员讲出了“去往○○食堂”。根据该讲话，智能体功能部150-1控制车辆设备50，使本车辆M朝向○○食堂的地址行驶。然后，显示控制部116使第一显示器21、第二显示器22分别显示AG动画550(t13)、650(t13)。然后，声音控制部118使用多个扬声器单元30输出智能体声音“明白了”、“预定15分钟后抵达”。
AG动画550(t13)是简单的笑脸的动画，没有动作。AG动画650(t13)是做出高兴的表情并用手指表现OK(好的)标志的动画，尺寸一会大一会小地变化着。AG动画650(t13)以与AG动画650(t11)不同的色彩表示。
这样，通过改变AG动画的活动，能够抑制驾驶员座DS的乘员注视显示器，并且能够使副驾驶员座AS的乘员愉快。
[画面例其四]
显示控制部116也可以根据本车辆M的驾驶状况，变更AG动画的显示位置和显示类型中的至少一方。例如，显示控制部116在本车辆M的驾驶状况满足了规定条件的情况下，变更AG动画的显示位置和显示类型中的至少一方。规定条件中例如包括走弯道、时速成为阈值以上、在高速道路上行驶、在住宅街行驶、变更车道、赶超前方车辆、变更目的地等。
例如，显示控制部116在本车辆M的驾驶状况满足了规定条件的情况下，使AG动画的显示位置向靠近画面的外缘的那一方移动。不限定于此，显示控制部116也可以在本车辆M的驾驶状况满足了规定条件的情况下，使驾驶员座用的AG动画移动到副驾驶员座用画面。显示控制部116也可以在本车辆M的驾驶状况满足了规定条件的情况下，与本车辆M的驾驶状况不满足规定条件的情况相比，以简洁的形态显示AG动画。
图9是示出AG动画的另一例的图。在此，仅对AG动画的显示进行说明，关于其他显示内容的说明省略。AG动画550(t21)显示于驾驶员座用画面501的中央，AG动画650(t21)显示于副驾驶员座用画面601的中央。AG动画550(t21)是闭着眼的沉稳的动画，没有动作。AG动画650(t21)是张开眼而视线朝向与驾驶员座DS相反一侧的动画，上下动作着。
在此，在本车辆M的驾驶状况满足了规定条件的情况下，显示控制部116使驾驶员座用画面501显示AG动画550(t22)，使副驾驶员座用画面601显示AG动画650(t22)。AG动画550(t22)显示于驾驶员座用画面501的左侧的边角，AG动画650(t22)显示于副驾驶员座用画面601的左侧的边角。即，在本车辆M的驾驶状况满足了规定条件的情况下，AG动画向靠近画面的端部的那一方移动了。
AG动画550(t22)是与AG动画550(t21)相同的动画。AG动画650(t22)中，视线向驾驶员座DS侧变化，动作消失了。AG动画650(t22)与AG动画650(t21)相比，尺寸变小了。即，在本车辆M的驾驶状况满足了规定条件的情况下，AG动画的显示类型变化为简洁的形态。
在本车辆M的驾驶状况满足了规定条件的情况下，显示控制部116也可以使副驾驶员座用画面601显示AG动画550(t23)和AG动画650(t23)。AG动画550(t23)显示于副驾驶员座用画面601的右侧的边角，AG动画650(t23)显示于副驾驶员座用画面601的左侧的边角。即，在本车辆M的驾驶状况满足了规定条件的情况下，AG动画550(t23)从驾驶员座用画面501移动到副驾驶员座用画面601。
AG动画550(t23)是与AG动画550(t21)相同的动画。AG动画650(t23)中，视线向驾驶员座DS侧变化，成为了惊讶那样的表情，动作消失了。AG动画650(t23)与AG动画650(t21)相比，尺寸变小了。
通过这样，在本车辆M的驾驶状况满足了规定条件的情况下，能够使得驾驶员座DS的乘员不被显示于驾驶员座用画面501的AG动画550分散精力。在副驾驶员座AS的乘员注意到AG动画650的变化的情况下，识别到驾驶状况满足了规定条件，能够节制对驾驶员座DS的乘员搭话等的行为。由此，能够营造驾驶员座DS的乘员集中精力驾驶的环境。
[画面例其五]
显示控制部116也可以基于进行了讲话的乘员在本车辆M内的座位位置，使第一显示器21及第二显示器22中的靠近设想乘员的头部的位置的那一方的显示器显示AG动画。靠近设想驾驶员座DS的乘员的头部的位置的那一方的显示器例如是第一显示器21，靠近设想副驾驶员座AS的乘员的头部的位置的那一方的显示器例如是第二显示器22。
进行了讲话的乘员在本车辆M内的座位位置例如基于话筒10的输出，由智能体功能部150确定发出了声音的方向，来确定被推定为进行了讲话的乘员坐着的座位。不限定于此，智能体功能部150也可以基于乘员识别装置80的输出，从图像中检测“嘴在动的乘员”，将检测到的乘员的座位位置决定为进行了讲话的乘员在本车辆M内的座位位置。
图10是示出副驾驶员座的乘员进行了讲话的情况下的画面的一例的图。在副驾驶员座AS的乘员讲出了“告诉我附近的餐厅”的情况下，显示控制部116使第二显示器21显示推荐列表620-1和AG动画650-1。在推荐列表620-1显示有如图6所示的推荐信息的详情。另一方面，显示控制部116使第一显示器21既不显示推荐列表也不显示AG动画。
通过这样，在通过副驾驶员座AS的乘员的委托而智能体提供服务的情况下，能够向驾驶员座DS的乘员保密智能体信息的内容、智能体启动了的情况。能够防止在驾驶员座用画面501显示驾驶员没有要求的信息、智能体，营造驾驶员座DS的乘员集中精力驾驶的环境。
[画面例其六]
在进行了讲话的乘员是驾驶员座DS的乘员的情况下，显示控制部116也可以使与第一显示器21及第二显示器22中的、靠近设想进行了讲话的乘员的头部的位置的那一方的第一显示器21相比，使远离设想进行了讲话的乘员的头部的位置的那一方的第二显示器22显示基于由智能体功能部取得的智能体信息得到的更详细的信息。
图11是示出驾驶员座的乘员进行了讲话的情况下的画面的一例的图。在驾驶员座DS的乘员讲出了“告诉我附近的餐厅”的情况下，显示控制部116使第一显示器21显示AG动画550-2，使第二显示器21显示推荐列表620-2。AG动画550-2与图10所示的AG动画650-1相比，是简洁的显示类型。在推荐列表620-2显示有如图6所示的推荐信息的详情。
通过这样，在通过驾驶员座DS的乘员的委托而智能体提供服务的情况下，通过将AG动画550-2显示于第一显示器21，能够向驾驶员座DS的乘员传达智能体正在提供服务，能够向副驾驶员座AS的乘员提供由智能体取得的信息的详情。
在进行了讲话的乘员是驾驶员座DS的乘员的情况下，显示控制部116也可以使靠近设想进行了讲话的乘员的头部的位置的那一方的第一显示器21显示基于智能体信息的概要，使远离设想进行了讲话的乘员的头部的位置的那一方的第二显示器22显示基于智能体信息得到的更详细的信息。
图12是示出驾驶员座的乘员进行了讲话的情况下的画面的另一例的图。在驾驶员座DS的乘员讲出了“告诉我附近的餐厅”的情况下，显示控制部116使第一显示器21显示推荐列表520-3和AG动画550-3，使第二显示器21显示推荐列表620-3。AG动画550-2与图10所示的AG动画650-1、图11所示的AG动画650-2相比，是简洁的显示类型。在推荐列表620-3显示有如图6所示的推荐信息的详情。在推荐列表520-3中，信息量比推荐列表620-3少。通过这样，能够向驾驶员座DS的乘员也提供智能体所取得的推荐信息的一部分。
[流程图]
图13是示出由显示控制部116进行的处理的一例的流程图。显示控制部116以规定的时机反复进行以下说明的处理。
显示控制部116判定是否使第一显示器21等显示驾驶员座用的AG动画(步骤S101)。在使第一显示器21等显示驾驶员座用的AG动画的情况下，显示控制部116与显示副驾驶员座用的AG动画的情况相比，以简洁的形态显示(步骤S102)。显示控制部116判定是否使驾驶员座用的AG动画执行活动(步骤S103)。在使驾驶员座用的AG动画执行活动的情况下，显示控制部116与使副驾驶员座用的AG动画执行活动的情况相比，以简洁的形态显示(步骤S104)。
接下来，显示控制部116判定是否将推荐列表显示于第一显示器21(步骤S105)。在将推荐列表显示于第一显示器21的情况下，显示控制部116与将推荐列表显示于第二显示器22的情况相比，减少信息量而显示(步骤S106)。显示控制部116判定是否显示于第二显示器22的推荐列表中的一个推荐要素被选择了(步骤S107)。在一个推荐要素被选择了的情况下，显示控制部116使第一显示器21显示被选择了的推荐要素(步骤S108)。
接下来，显示控制部116判定驾驶状况是否满足了规定条件(步骤S109)。在驾驶状况满足了规定条件的情况下，显示控制部116变更驾驶员座用的AG动画、副驾驶员座用的AG动画的显示位置、显示类型(步骤S110)。
图14是示出由显示控制部116进行的处理的另一例的流程图。显示控制部116以规定的时机反复进行以下说明的处理。显示控制部116判定进行了讲话的乘员在本车辆M内的座位位置是否是副驾驶员座(步骤S201)。在进行了讲话的乘员的本车辆M内的座位位置是副驾驶员座的情况下，显示控制部116使第二显示器22显示AG动画和推荐列表的详情(步骤S202)。然后，显示控制部116禁止将AG动画和推荐列表显示于第一显示器21(步骤S203)。
另一方面，在步骤S201中进行了讲话的乘员在本车辆M内的座位位置不是副驾驶员座的情况下，显示控制部116判定进行了讲话的乘员在本车辆M内的座位位置是否是驾驶员座(步骤S204)。在进行了讲话的乘员在本车辆M内的座位位置是驾驶员座的情况下，显示控制部116将AG动画显示于第一显示器21(步骤S205)。在步骤S205中，显示控制部116也可以使第一显示器21还显示推荐的概要。显示控制部116使第二显示器21显示推荐列表的详情(步骤S206)。
根据上述说明的第一实施方式的智能体装置100，能够以合适的形态实现智能体提供服务的情况下的车内显示。
以上使用实施方式说明了本发明的具体实施方式，但本发明丝毫不被这样的实施方式限定，在不脱离本发明的主旨的范围内能够施加各种变形及替换。
例如，副驾驶员座用画面也可以显示于第三显示器23。

Claims (13)

1.一种智能体装置，其中，
所述智能体装置具备：
智能体功能部，其根据车辆的乘员的讲话，提供包含使输出部输出通过声音进行的响应的服务；以及
显示控制部，其使设置于所述车辆内的显示部显示与所述智能体功能部对应的智能体所相关的动画，
所述显示控制部在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
2.根据权利要求1所述的智能体装置，其中，
所述第一显示区域与所述第二显示区域相比，在所述车辆内的位置靠近设想驾驶员的头部的位置。
3.根据权利要求1或2所述的智能体装置，其中，
所述显示控制部在使所述第一显示区域显示所述智能体的动画的情况下，与使所述第二显示区域显示所述智能体的动画的情况相比，以简洁的形态使所述显示部显示所述智能体的动画。
4.根据权利要求3所述的智能体装置，其中，
所述显示控制部在根据所述乘员的讲话而使所述第一显示区域显示所述智能体的动画的情况下，与使所述第二显示区域显示所述智能体的动画的情况相比，以简洁的形态使所述显示部显示所述智能体的动画。
5.根据权利要求3或4所述的智能体装置，其中，
所述简洁的形态包括动作小的形态。
6.根据权利要求1～5中任一项所述的智能体装置，其中，
所述显示控制部根据所述车辆的驾驶状况，变更与所述智能体相关的动画的显示位置和显示类型中的至少一方。
7.根据权利要求1～6中任一项所述的智能体装置，其中，
所述显示控制部使所述显示部显示根据所述乘员的讲话而提供的智能体信息，在使所述第一显示区域显示的情况下与在使所述第二显示区域显示的情况下，使所述智能体信息的显示类型不同。
8.根据权利要求7所述的智能体装置，其中，
所述显示控制部在使所述第一显示区域显示所述智能体信息的情况下，与使所述第二显示区域显示所述智能体信息的情况相比，减少信息量。
9.根据权利要求7或8所述的智能体装置，其中，
所述显示控制部在由所述乘员使用操作部指定了正显示于所述第二显示区域的所述智能体信息的一部分的情况下，将所述第一显示区域的显示变更为基于由所述乘员指定了的所述智能体信息的一部分得到的信息。
10.根据权利要求1～9中任一项所述的智能体装置，其中，
所述智能体功能部取得进行了讲话的乘员在所述车辆内的座位位置，
所述显示控制部基于进行了讲话的所述乘员在所述车辆内的座位位置，使所述第一显示区域和所述第二显示区域中的与设想进行了讲话的所述乘员的头部的位置靠近的那一方的显示区域显示所述动画。
11.根据权利要求10所述的智能体装置，其中，
所述显示控制部在进行了讲话的所述乘员是驾驶员座的乘员的情况下，相比于所述第一显示区域和所述第二显示区域中的与设想进行了讲话的所述乘员的头部的位置靠近的那一方的显示区域，使与设想进行了讲话的所述乘员的头部的位置远离的那一方的显示区域显示基于由所述智能体功能部取得的信息得到的更详细的信息。
12.一种智能体装置的控制方法，其中，
所述智能体装置的控制方法使计算机进行如下处理：
使用智能体功能，根据车辆的乘员的讲话而提供包含使输出部输出通过声音进行的响应的服务；
使设置于所述车辆内的显示部显示与所述智能体功能相关的动画；以及
在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
13.一种存储介质，其存储有程序，其中，
所述程序使计算机执行如下处理：
使用智能体功能，根据车辆的乘员的讲话而提供包含使输出部输出通过声音进行的响应的服务；
使设置于所述车辆内的显示部显示与所述智能体功能相关的动画；以及
在使所述显示部的第一显示区域显示所述动画的情况下与在使第二显示区域显示所述动画的情况下，使所述动画的显示类型不同，所述第二显示区域在所述车辆内的位置与所述第一显示区域在所述车辆内的位置不同。
CN202010149145.3A 2019-03-08 2020-03-05 智能体装置、智能体装置的控制方法及存储介质 Pending CN111667333A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-042917 2019-03-08
JP2019042917A JP7222757B2 (ja) 2019-03-08 2019-03-08 エージェント装置、エージェント装置の制御方法、およびプログラム

Publications (1)

Publication Number Publication Date
CN111667333A true CN111667333A (zh) 2020-09-15

Family

ID=72334994

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010149145.3A Pending CN111667333A (zh) 2019-03-08 2020-03-05 智能体装置、智能体装置的控制方法及存储介质

Country Status (3)

Country Link
US (1) US20200286452A1 (zh)
JP (1) JP7222757B2 (zh)
CN (1) CN111667333A (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7264139B2 (ja) * 2020-10-09 2023-04-25 トヨタ自動車株式会社 車両用エージェント装置、車両用エージェントシステム、及び車両用エージェントプログラム
CN113782020A (zh) * 2021-09-14 2021-12-10 合众新能源汽车有限公司 车内语音交互方法和系统
US20230335138A1 (en) * 2022-04-14 2023-10-19 Gulfstream Aerospace Corporation Onboard aircraft system with artificial human interface to assist passengers and/or crew members

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06183286A (ja) * 1992-09-16 1994-07-05 Zanabui Infuomateikusu:Kk 車載用情報表示装置
JP2000043652A (ja) * 1998-07-31 2000-02-15 Alpine Electronics Inc 車載用装置の表示制御方式
JP2006335231A (ja) * 2005-06-02 2006-12-14 Denso Corp エージェントキャラクタ表示を利用した表示システム
US20070219709A1 (en) * 2006-03-14 2007-09-20 Denso Corporation System and apparatus for drive assistance
CN101669090A (zh) * 2007-04-26 2010-03-10 福特全球技术公司 情绪提示系统和方法
US20140145933A1 (en) * 2012-11-27 2014-05-29 Hyundai Motor Company Display and method capable of moving image
US20160207399A1 (en) * 2013-09-24 2016-07-21 Denso Corporation Vehicle display processing apparatus
CN106662918A (zh) * 2014-07-04 2017-05-10 歌乐株式会社 车载交互式系统以及车载信息设备
CN108973857A (zh) * 2017-06-02 2018-12-11 本田技研工业株式会社 车辆控制系统、车辆控制方法及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4946200B2 (ja) * 2006-06-23 2012-06-06 株式会社Ｊｖｃケンウッド エージェント装置、プログラム、及びエージェント装置におけるキャラクタ表示方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH06183286A (ja) * 1992-09-16 1994-07-05 Zanabui Infuomateikusu:Kk 車載用情報表示装置
JP2000043652A (ja) * 1998-07-31 2000-02-15 Alpine Electronics Inc 車載用装置の表示制御方式
JP2006335231A (ja) * 2005-06-02 2006-12-14 Denso Corp エージェントキャラクタ表示を利用した表示システム
US20070219709A1 (en) * 2006-03-14 2007-09-20 Denso Corporation System and apparatus for drive assistance
CN101669090A (zh) * 2007-04-26 2010-03-10 福特全球技术公司 情绪提示系统和方法
US20140145933A1 (en) * 2012-11-27 2014-05-29 Hyundai Motor Company Display and method capable of moving image
US20160207399A1 (en) * 2013-09-24 2016-07-21 Denso Corporation Vehicle display processing apparatus
CN106662918A (zh) * 2014-07-04 2017-05-10 歌乐株式会社 车载交互式系统以及车载信息设备
CN108973857A (zh) * 2017-06-02 2018-12-11 本田技研工业株式会社 车辆控制系统、车辆控制方法及存储介质

Also Published As

Publication number Publication date
US20200286452A1 (en) 2020-09-10
JP7222757B2 (ja) 2023-02-15
JP2020144081A (ja) 2020-09-10

Similar Documents

Publication Publication Date Title
CN111661068B (zh) 智能体装置、智能体装置的控制方法及存储介质
US11380325B2 (en) Agent device, system, control method of agent device, and storage medium
CN111667333A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111752686A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111667824A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111660955A (zh) 车载智能体系统、车载智能体系统的控制方法及存储介质
CN111746435B (zh) 信息提供装置、信息提供方法及存储介质
CN111731320B (zh) 智能体系统、智能体服务器及其控制方法、存储介质
CN111559328B (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111660966A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111724777A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111717142A (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111559317B (zh) 智能体装置、智能体装置的控制方法及存储介质
US11542744B2 (en) Agent device, agent device control method, and storage medium
US11437035B2 (en) Agent device, method for controlling agent device, and storage medium
US11518399B2 (en) Agent device, agent system, method for controlling agent device, and storage medium
US11797261B2 (en) On-vehicle device, method of controlling on-vehicle device, and storage medium
CN111667823A (zh) 智能体装置、智能体装置的控制方法及存储介质
JP2020157853A (ja) 車載エージェントシステム、車載エージェントシステムの制御方法、およびプログラム
CN111754288A (zh) 服务器装置、信息提供系统、信息提供方法及存储介质
CN111824174B (zh) 智能体装置、智能体装置的控制方法及存储介质
CN111726772A (zh) 智能体系统及其控制方法、服务器装置、存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20200915