KR102467397B1 - 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법 - Google Patents

에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법 Download PDF

Info

Publication number
KR102467397B1
KR102467397B1 KR1020200167353A KR20200167353A KR102467397B1 KR 102467397 B1 KR102467397 B1 KR 102467397B1 KR 1020200167353 A KR1020200167353 A KR 1020200167353A KR 20200167353 A KR20200167353 A KR 20200167353A KR 102467397 B1 KR102467397 B1 KR 102467397B1
Authority
KR
South Korea
Prior art keywords
control content
change
control
occupant
content
Prior art date
Application number
KR1020200167353A
Other languages
English (en)
Other versions
KR20210073461A (ko
Inventor
에이이치 마에다
Original Assignee
도요타지도샤가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 도요타지도샤가부시키가이샤 filed Critical 도요타지도샤가부시키가이샤
Publication of KR20210073461A publication Critical patent/KR20210073461A/ko
Application granted granted Critical
Publication of KR102467397B1 publication Critical patent/KR102467397B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/332—Query formulation
    • G06F16/3329—Natural language query formulation or dialogue systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/10—Interpretation of driver requests or demands
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B60K35/265—Voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/087—Interaction between the driver and the control system where the control system corrects or modifies a request from the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62J—CYCLE SADDLES OR SEATS; AUXILIARY DEVICES OR ACCESSORIES SPECIALLY ADAPTED TO CYCLES AND NOT OTHERWISE PROVIDED FOR, e.g. ARTICLE CARRIERS OR CYCLE PROTECTORS
    • B62J45/00—Electrical equipment arrangements specially adapted for use as accessories on cycles, not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
    • B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING 
    • B63B49/00—Arrangements of nautical instruments or navigational aids
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B64—AIRCRAFT; AVIATION; COSMONAUTICS
    • B64D—EQUIPMENT FOR FITTING IN OR TO AIRCRAFT; FLIGHT SUITS; PARACHUTES; ARRANGEMENT OR MOUNTING OF POWER PLANTS OR PROPULSION TRANSMISSIONS IN AIRCRAFT
    • B64D43/00—Arrangements or adaptations of instruments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/334—Query execution
    • G06F16/3343—Query execution using phonetics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/33—Querying
    • G06F16/3331—Query processing
    • G06F16/334—Query execution
    • G06F16/3344—Query execution using natural language analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/044—Recurrent networks, e.g. Hopfield networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/04—Architecture, e.g. interconnection topology
    • G06N3/045—Combinations of networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/16—Speech classification or search using artificial neural networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/045—Occupant permissions
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Data Mining & Analysis (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Transportation (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Evolutionary Computation (AREA)
  • Chemical & Material Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Security & Cryptography (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Computer Hardware Design (AREA)
  • Ocean & Marine Engineering (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

유저의 문의에 따라 제안한 조작 기능을 유저 대신 실행할 수 있는 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법을 제공한다.
에이전트 관리 장치(30)는, 하드웨어를 갖는 프로세서를 구비하고, 프로세서는, 탑승자로부터의 문의에 대한 회답에 해당하는 이동체의 제어 변경을 실행할 수 있는지 여부를 판정하고, 제어 변경을 실행할 수 있다고 판정한 경우, 탑승자에게 상기 제어 변경을 실행할지 여부를 문의하고, 탑승자가 상기 제어 변경을 승인한 경우, 제어 변경을 실행한다.

Description

에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법{AGENT MANAGEMENT DEVICE, PROGRAM, AND AGENT MANAGEMENT METHOD}
본 개시는 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법에 관한 것이다.
유저에게 최적의 정보를 리코멘드하는 기술이 알려져 있다(예를 들어 특허문헌 1 참조). 이 기술에서는, 차량의 운전 상황을 학습한 학습 결과와, 유저의 휴대 단말 장치에 축적된 차 밖에서의 입수 정보에 기초하여, 유저와의 커뮤니케이션 행위를 결정하고, 이 커뮤니케이션 행위를 의인화한 에이전트에 의하여 조작 기능의 설명 등의 리코멘드를 행한다.
일본 특허 공개 제2006-195578호 공보
상술한 특허문헌 1에서는, 유저의 문의에 대하여 에이전트로부터 조작 기능의 설명이 이루어진 경우이더라도, 유저가 그 조작 기능의 설명의 내용을 이해하여 판단할 수 없을 때가 있다. 이 경우, 유저 자신이 에이전트로부터 설명받은 조작 기능을 실행할 수 없다는 문제점이 있었다.
본 개시는 상기를 감안하여 이루어진 것이며, 유저의 문의에 따라 제안한 조작 기능을 유저 대신 실행할 수 있는 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법을 제공하는 것을 목적으로 한다.
본 개시에 관한 에이전트 관리 장치는, 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치이며, 상기 프로세서는, 상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고, 상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하고, 상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경한다.
본 개시에 관한 프로그램은, 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치이며, 상기 프로세서는, 상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고, 상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하고, 상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경한다.
본 개시에 관한 에이전트 관리 방법은, 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치가, 상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고, 상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 상기 이동체의 스피커로부터 출력하고, 상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경한다.
본 개시에 따르면, 유저의 문의에 따라 제안한 조작 기능을 유저 대신 실행할 수 있다는 효과를 발휘한다.
도 1은 일 실시 형태에 관한 운전 지원 시스템의 개략 구성을 도시하는 모식도이다.
도 2는 운전 지원 장치(10)의 기능 구성을 도시하는 블록도이다.
도 3은 에이전트 관리 장치(30)의 기능 구성을 도시하는 블록도이다.
도 4는 에이전트 관리 장치(30)가 실행하는 처리의 개요를 도시하는 흐름도이다.
도 5는 도 4의 승인 확인 처리의 개요를 도시하는 흐름도이다.
도 6은 도 4의 승인 완료 처리의 개요를 도시하는 흐름도이다.
이하, 본 개시를 실시하기 위한 형태를 도면과 함께 상세히 설명한다. 또한 이하의 실시 형태에 의하여 본 개시가 한정되는 것은 아니다. 또한 이하에 있어서, 동일한 부분에는 동일한 부호를 붙여서 설명한다.
〔운전 지원 시스템의 구성〕
도 1은, 일 실시 형태에 관한 운전 지원 시스템의 개략 구성을 도시하는 모식도이다. 도 1에 도시하는 운전 지원 시스템(1)은, 이동체(2)에 탑재된 운전 지원 장치(10)와, 네트워크(20)를 통해 운전 지원 장치(10)와 쌍방향으로 통신을 행하는 에이전트 관리 장치(30)를 구비한다. 이 네트워크(20)는, 예를 들어 인터넷 회선망 또는 휴대 전화 회선망 등으로 이루어진다. 또한 이하의 설명에서는 이동체(2)로서 자동차를 예로 들어 설명하지만, 이에 한정되는 일 없이 바이크, 전동 킥보드, 드론, 비행기, 선박 및 전철 등이어도 된다.
〔운전 지원 장치의 구성〕
먼저, 운전 지원 장치(10)의 기능 구성에 대하여 설명한다. 도 2는, 운전 지원 장치(10)의 기능 구성을 도시하는 블록도이다.
도 2에 도시하는 운전 지원 장치(10)는 이동체(2)에 탑재되어, 이 이동체(2)에 탑재된 다른 ECU(Electronic Control Unit)와 연계하면서 이동체(2) 내의 탑승자의 운전 시의 조작을 지원한다. 운전 지원 장치(10)는 음성 입력부(11)와 음성 출력부(12)와 표시부(13)와 통신부(14)와 검출부(15)와 기록부(16)와 제어부(17)를 구비한다.
음성 입력부(11)는, 탑승자 등이 발한 음성의 입력을 접수하고, 이 접수한 음성에 대하여 A/D 변환 처리 등을 행함으로써 음성 데이터를 생성한다. 음성 입력부(11)는 음성 데이터를 제어부(17)에 출력한다. 음성 입력부(11)는, 음성의 입력을 접수하여 음성 신호를 생성하는 마이크, 마이크로부터 입력된 아날로그 음성 신호에 대하여 증폭을 행하는 증폭기, 및 증폭기로부터 입력된 아날로그 음성 신호를 디지털 음성 신호로 변환하는 A/D 변환 회로 등을 이용하여 실현된다.
음성 출력부(12)는, 제어부(17)로부터 입력된 음성 신호에 대응하는 음성을 출력한다. 음성 출력부(12)는, 제어부(17)로부터 입력된 디지털 음성 신호를 아날로그 음성 신호로 변환하는 D/A 변환 회로, 아날로그 음성 신호를 증폭하는 증폭기, 증폭기로부터 입력된 음성 신호에 대응하는 음성을 출력하는 스피커 등을 이용하여 실현된다.
표시부(13)는 제어부(17)의 제어 하, 각종 정보를 표시한다. 예를 들어 표시부(13)는 제어부(17)의 제어 하, 이동체(2)의 제어 동작에 관한 설명을 표시한다. 표시부(13)는, 유기 EL(Electro Luminescence)이나 액정 등의 표시 모니터 등을 이용하여 실현된다.
통신부(14)는 제어부(17)의 제어 하, 소정의 통신 규격에 따라 에이전트 관리 장치(30)와 통신을 행한다. 여기서 소정의 통신 규격이란, 예를 들어 4G, 5G, Wi-Fi(Wireless Fidelity)(등록 상표) 및 Bluetooth(등록 상표) 중 어느 것이다. 통신부(14)는, 무선 통신 가능한 통신 모듈을 이용하여 실현된다.
검출부(15)는 이동체(2)의 상태를 검출하고, 이 검출 결과를 제어부(17)에 출력한다. 구체적으로는, 검출부(15)는 이동체(2)의 현재의 동작 모드나 상태를 검출하고, 이 검출 결과를 제어부(17)에 출력한다. 예를 들어 검출부(15)는, 이동체(2)가 실행 가능한 복수의 제어 동작의 하나인 트랙션 컨트롤의 온오프 상태를 검출하고, 이 검출 결과를 제어부(17)에 출력한다. 검출부(15)는, 이동체(2)의 차륜의 회전을 검출하는 센서나 차속을 검출하는 센서 등의 각종 센서, 이동체(2)에 탑재된 각종 액추에이터의 온오프 상태를 검출하는 센서 및 ECU 등을 이용하여 실현된다.
기록부(16)는, 운전 지원 장치(10)에 관한 각종 정보, 운전 지원 장치(10)가 실행하는 각종 프로그램, 제어부(17)가 행하는 처리 중의 각종 정보를 기록한다. 또한 기록부(16)는, 이동체(2)의 차종을 나타내는 차종 정보를 기록한다. 차종 정보란, 차종명 및 차종의 연식이다. 기록부(16)는, DRAM(Dynamic Random Access Memory), ROM(Read Only Memory) 및 Flash 메모리 등을 이용하여 실현된다.
제어부(17)는, 운전 지원 장치(10)를 구성하는 각 부의 동작을 제어한다. 제어부(17)는, 메모리와, CPU(Central Processing Unit) 등의 하드웨어를 갖는 프로세서를 이용하여 실현된다. 또한 제어부(17)는, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 입력된 지시 신호에 따라 이동체(2)의 제어 변경을 행한다. 예를 들어 제어부(17)는, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 입력된 지시 신호가, 트랙션 컨트롤을 오프하는 지시 신호인 경우, 이동체(2)의 트랙션 컨트롤을 온 상태로부터 오프 상태로 변경한다.
〔에이전트 관리 장치의 구성〕
다음으로, 에이전트 관리 장치(30)의 기능 구성에 대하여 설명한다. 도 3은, 에이전트 관리 장치(30)의 기능 구성을 도시하는 블록도이다.
도 3에 도시하는 에이전트 관리 장치(30)는, 네트워크(20) 및 이동체(2)에 탑재된 운전 지원 장치(10)를 통해 탑승자로부터 문의된 질문의 의도를 이해하고, 이 이해한 질문의 내용에 따른 회답, 탑승자에 대한 문의, 및 이동체(2)의 제어 변경을 행한다. 에이전트 관리 장치(30)는 통신부(31)와 기록부(32)와 제어부(33)와 제1 에이전트부(34)와 제2 에이전트부(35)를 구비한다.
통신부(31)는 제어부(33)의 제어 하, 소정의 통신 규격에 따라 운전 지원 장치(10)와 통신을 행한다. 통신부(31)는, 무선 통신 가능한 통신 모듈을 이용하여 실현된다.
기록부(32)는, 에이전트 관리 장치(30)가 실행하는 각종 프로그램, 에이전트 관리 장치(30)가 처리 중인 각종 정보를 기록한다. 기록부(32)는, HDD(Hard Disk Drive), SSD(Solid State Drive), Flash 메모리, DRAM 및 ROM 등을 이용하여 실현된다. 기록부(32)는, 에이전트 관리 장치(30)가 실행하는 각종 프로그램을 기록하는 프로그램 기록부(321)를 갖는다.
제어부(33)는, 에이전트 관리 장치(30)를 구성하는 각 부를 제어한다. 제어부(33)는, CPU, FPGA(Field Programmable Gate Array), ASIC(Application Specific Integrated Circuit) 등의 하드웨어를 갖는 프로세서를 이용하여 구성된다. 제어부(33)는 음성 인식부(331)와 의도 이해부(332)와 응답 생성부(333)와 음성 합성부(334)를 갖는다.
음성 인식부(331)는, 통신부(31)로부터 입력된 음성 신호에 대하여 음성 인식을 행하고, 이 음성 인식 결과를 의도 이해부(332)에 출력한다. 음성 인식부(331)는, 예를 들어 음성 신호를 텍스트 데이터로 변환하여 의도 이해부(332)에 출력한다. 음성 인식부(331)는, 주지의 음성 변환 기술을 이용하여 실현된다.
의도 이해부(332)는, 음성 인식부(331)로부터 입력된 음성 인식 결과에 기초하여 탑승자의 문의(질문)의 의도를 처리 인텐트 ID(인텐트 라벨)로서 추정한다. 여기서 처리 인텐트 ID란, 이동체(2)가 실행 가능한 복수의 제어 내용(조작 기능)의 각각과 복수의 회답을 연관지은 번호이다. 그리고 의도 이해부(332)는 복수의 에이전트부 중에서, 추정한 질문의 내용에 해당하는 최적의 회답을 행할 수 있는 에이전트를 선택하고, 선택한 에이전트부에 대하여 탑승자의 문의의 회답을 의뢰한다. 의도 이해부(332)는, 미리 복수의 질문에 대하여 학습된 학습 모델을 이용하여 실현된다. 구체적으로는, 의도 이해부(332)는, 음성 인식부(331)에 의하여 변환된 텍스트 데이터를 입력 데이터로 하고, 출력 데이터로서, 복수의 에이전트로부터 질문의 내용의 회답에 적합한 에이전트를 추정하여 출력한다. 의도 이해부(332)는, 예를 들어 미리 복수의 질문의 텍스트 데이터 또는 음성 데이터를 교사 데이터로 하여 기계 학습하고, 출력으로서, 복수의 에이전트로부터 질문의 내용의 회답에 적합한 에이전트를 추정(선택)하여 출력하는 학습 모델 등을 이용하여 실현된다. 또한 기계 학습의 종류는 특별히 한정되지 않지만, 예를 들어 질문과 회답을 연관지은 교사용 데이터나 학습용 데이터를 준비하고, 이 교사용 데이터나 학습용 데이터를, 다층 신경망에 기초한 계산 모델에 입력하여 학습해도 된다. 또한 기계 학습의 수법으로서는, 예를 들어 CNN(Convolutional Neural Network), 3D-CNN 등의 다층의 신경망 DNN(Deep Neural Network)에 기초하는 수법이 이용된다. 또한 음성 데이터와 같은 시간적으로 연속하는 시계열 데이터를 대상으로 하는 경우, 기계 학습의 수법으로서는, 재귀형 신경망(Recurrent Neural Network: RNN)이나 RNN을 확장한 LSTM(Long Short-Term Memory units) 등에 기초하는 수법이 이용된다.
응답 생성부(333)는 의도 이해부(332)를 통해, 복수의 에이전트부 중 어느 것으로부터 입력된 이동체(2)의 제어 내용(조작 기능)을 나타내는 처리 인텐트 ID에 따른 회답을 생성하고, 이 회답을 통신부(31)를 통해 이동체(2)에 출력한다. 구체적으로는, 응답 생성부(333)는, 미리 기록된 이동체(2)의 복수의 처리 인텐트 ID의 각각에 대응지어진 복수의 회답 중에서, 의도 이해부(332)를 통하고 나서 입력된 처리 인텐트 ID에 따른 회답을 선택한다. 그리고 응답 생성부(333)는, 의도 이해부(332)로부터 입력된 처리 인텐트 ID에 따라 선택한 회답 또는 이동체(2)의 제어 내용을 변경하라는 변경 신호를 생성한다.
음성 합성부(334)는, 의도 이해부(332)로부터 입력된 처리 인텐트 ID에 따른 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 이동체(2)에 출력한다. 구체적으로는, 음성 합성부(334)는, 미리 기록된 복수의 제어 내용의 각각에 대응지어진 복수의 음성 데이터 중에서, 의도 이해부(332)로부터 입력된 처리 인텐트 ID에 따른 음성 데이터를 선택한다. 그리고 음성 합성부(334)는, 의도 이해부(332)로부터 입력된 처리 인텐트 ID에 따른 선택한 음성 데이터를 생성한다.
제1 에이전트부(34)는, 의도 이해부(332)로부터 입력된 탑승자의 문의의 회답에 해당하는 이동체(2)의 제어 변경에 관한 정보를 추정하고, 이 추정 결과를 의도 이해부(332)에 출력한다. 제1 에이전트부(34)는 대화 제어부(341)와 에이전트 의도 이해부(342)를 갖는다. 또한 제1 에이전트부(34)는 차량 정보 데이터베이스(343)(이하, 「차량 정보 DB(343)」라 함)와 회답 정보 데이터베이스(344)(이하, 「회답 정보 DB(344)」라 함)와 로그 데이터 정보 데이터베이스(345)(이하, 「로그 데이터 정보 DB(345)」라 함)와 단어 정규화 데이터베이스(346)(이하, 「단어 정규화 DB(346)」라 함)를 갖는다.
대화 제어부(341)는, 의도 이해부(332)로부터 입력된 탑승자의 문의에 따른 대화 및 HMI(Human Machine Interface)를 제어한다. 대화 제어부(341)는, CPU의 하드웨어를 갖는 프로세서 등을 이용하여 실현된다.
에이전트 의도 이해부(342)는, 대화 제어부(341) 및 의도 이해부(332)를 통해 음성 인식부(331)로부터 입력된 음성 인식 결과에 기초하여, 탑승자의 문의(질문)에 따른 처리 인텐트 ID를 추정한다. 구체적으로는, 에이전트 의도 이해부(342)는, 후술하는 차량 정보 DB(343), 회답 정보 DB(344), 로그 데이터 정보 DB(345) 및 단어 정규화 DB(346)를 참조하여, 탑승자의 문의(질문)에 따른 처리 인텐트 ID를 추정한다. 에이전트 의도 이해부(342)는, 추정한 처리 인텐트 ID를 대화 제어부(341) 및 의도 이해부(332)를 통해 응답 생성부(333)에 출력한다. 에이전트 의도 이해부(342)는, 미리 복수의 질문에 대하여 학습된 학습 모델을 이용하여 실현된다. 구체적으로는, 에이전트 의도 이해부(342)는, 음성 인식부(331)에 의하여 변환된 텍스트 데이터를 입력 데이터로 하고, 출력 데이터로서, 탑승자의 문의에 대응하는 회답에 해당하는 처리 인텐트 ID를 추정하여 출력한다.
차량 정보 DB(343)는, 이동체(2)의 차종과 연식과 조작 매뉴얼을 대응지은 차량 정보를 기록한다. 차량 정보 DB(343)는, SSD(Solid State Drive) 및 HDD(Hard Disk Drive) 등을 이용하여 실현된다.
회답 정보 DB(344)는, 복수의 처리 인텐트 ID의 각각에 대응하는, 회답하기 위한 회답 정보를 기록한다. 회답 정보 DB(344)는, SSD 및 HDD 등을 이용하여 실현된다.
로그 데이터 정보 DB(345)는, 탑승자의 조작 내용을 나타내는 조작 정보, 및 제1 에이전트부(34)에 의한 응답 내용을 나타내는 응답 정보 등을 기록한다. 로그 데이터 정보 DB(345)는, SSD 및 HDD 등을 이용하여 실현된다.
단어 정규화 DB(346)는, 에이전트 의도 이해부(342)가 의도 이해의 전처리에 사용할 단어의 정규화용의 데이터를 기록한다. 단어 정규화 DB(346)는, SSD 및 HDD 등을 이용하여 실현된다.
제2 에이전트부(35)는, 의도 이해부(332)로부터 입력된 탑승자의 문의의 회답에 해당하는 이동체(2)의 그 외의 변경에 관한 정보를 추정하고, 이 추정 결과를 의도 이해부(332)에 출력한다. 여기서 그 외의 변경이란, 예를 들어 음악의 변경, 내비게이션에 의한 목적지의 변경 등이다. 또한 제2 에이전트부(35)는 제1 에이전트부(34)와 마찬가지의 구성을 갖기 때문에, 상세한 구성의 설명은 생략한다.
〔에이전트 관리 장치에 의한 처리〕
다음으로, 에이전트 관리 장치(30)에 의한 처리에 대하여 설명한다. 도 4는, 에이전트 관리 장치(30)가 실행하는 처리의 개요를 도시하는 흐름도이다. 또한 이하에서는, 이동체(2)의 탑승자가 에이전트 관리 장치(30)에 문의하여, 예를 들어 탑승자가 「에이전트」로서 문의하여 에이전트 관리 장치(30)가 기동하고 있는 상태의 처리에 대하여 설명한다.
도 4에 도시한 바와 같이 먼저, 음성 인식부(331)는 통신부(31)를 통해, 이동체(2)의 탑승자가 문의한 질문을 취득한다(스텝 S101). 구체적으로는, 음성 인식부(331)는 통신부(31)를 통해, 이동체(2)의 탑승자가 문의한 질문의 음성 신호를 취득한다. 이 경우, 음성 인식부(331)는, 통신부(31)를 통해 취득한, 이동체(2)의 탑승자가 문의한 질문의 음성 신호에 대하여 음성 인식을 행한다.
계속해서, 의도 이해부(332)는, 음성 인식부(331)로부터 입력된 음성 인식 결과에 기초하여, 탑승자가 문의한 질문의 의도를 이해한다(스텝 S102).
그 후, 의도 이해부(332)는, 탑승자로부터의 문의가, 이동체(2)의 제어 내용에 관한 내용에 대응 가능한 제1 에이전트부(34)인지 여부를 추정하고(스텝 S103), 탑승자로부터의 문의가, 이동체(2)의 제어 내용에 관한 내용에 대응하는 제1 에이전트부(34)라고 추정한 경우(스텝 S103: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S104로 이행한다. 이에 대하여, 탑승자로부터의 문의가, 이동체(2)의 제어 내용에 관한 내용에 대응 가능한 제1 에이전트부(34)가 아니라고 추정한 경우(스텝 S103: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S107로 이행한다.
스텝 S104에 있어서, 의도 이해부(332)는, 음성 인식부(331)로부터 입력된 음성 인식 결과에 기초하여, 탑승자로부터의 문의 중에, 이동체(2)의 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있는지 여부를 추정한다. 의도 이해부(332)에 의하여 탑승자의 문의 중에, 이동체(2)의 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있다고 추정한 경우(스텝 S104: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S106으로 이행한다. 예를 들어 의도 이해부(332)는, 탑승자가 문의한 내용이 「눈길에서 미끄러져 나아가지 않는다. 트랙션 컨트롤을 꺼도 된다.」인 경우, 「트랙션 컨트롤을 꺼도 된다」가 포함되어 있기 때문에, 이동체(2)의 제어 내용을 변경하기 위한 승인이 포함되어 있다고 추정한다. 이에 대하여, 의도 이해부(332)에 의하여 탑승자의 문의 중에, 이동체(2)의 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있지 않다고 추정한 경우(스텝 S104: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S105로 이행한다. 예를 들어 의도 이해부(332)는, 탑승자가 문의한 내용이 「눈길에서 미끄러져 나아가지 않는다.」인 경우, 이동체(2)의 제어 내용을 변경하기 위한 승인이 포함되어 있지 않다고 추정한다.
스텝 S105에 있어서, 에이전트 관리 장치(30)는, 탑승자의 문의의 회답에 해당하는 이동체(2)의 제어 내용을 변경할지 여부를 탑승자에게 질문하고, 탑승자에게 승인된 경우에 이동체(2)의 제어 내용을 변경하는 승인 확인 처리를 실행한다. 스텝 S105 후, 에이전트 관리 장치(30)는 본 처리를 종료한다. 또한 승인 확인 처리의 상세는 후술한다.
스텝 S106에 있어서, 에이전트 관리 장치(30)는, 탑승자의 승인 완료라고 추정하여, 탑승자에게 이동체(2)의 제어 내용으로 변경할지 여부의 질문을 출력하지 않고 이동체(2)의 제어 내용을 변경하는 승인 완료 처리를 실행한다. 스텝 S106 후, 에이전트 관리 장치(30)는 본 처리를 종료한다. 또한 승인 완료 처리의 상세는 후술한다.
스텝 S107에 있어서, 제2 에이전트부(35)는, 의도 이해부(332)에 의하여 추정된 그 외의 에이전트에 의한 제어 내용으로 변경한다. 예를 들어 제2 에이전트부(35)는, 탑승자의 질문이 「음악을 재생해」인 경우에 있어서, 이동체(2)에 있어서 음성 데이터가 재생되고 있지 않을 때, 이동체(2)에 음악 데이터를 송신하여 재생하는 제어 내용으로 변경한다. 스텝 S107 후, 에이전트 관리 장치(30)는 본 처리를 종료한다.
〔승인 확인 처리의 개요〕
다음으로, 도 4의 스텝 S105에 있어서 설명한 승인 확인 처리의 상세에 대하여 설명한다. 도 5는, 승인 확인 처리의 개요를 도시하는 흐름도이다.
도 5에 도시한 바와 같이 의도 이해부(332)는 제1 에이전트부(34)에 대하여, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용을 추정한 추정 결과를 나타내는 처리 인텐트 ID를 송신한다(스텝 S201).
계속해서, 제1 에이전트부(34)는, 의도 이해부(332)에 의하여 추정된 처리 인텐트 ID에 기초하여 처리 인텐트 ID의 기능을 설명한다(스텝 S202). 구체적으로는 먼저, 에이전트 의도 이해부(342)는 처리 인텐트 ID에 기초하여, 이동체(2)에 관한 것, 또는 이동체(2)의 제어 내용에 관한 것인지 여부를 추정한다. 그리고 대화 제어부(341)는 에이전트 의도 이해부(342)의 추정 결과에 기초하여, 차량 정보 DB(343) 및 회답 정보 DB(344) 중 어느 한쪽으로부터 처리 인텐트 ID에 대응하는 회답을 취득한다. 회로를 취득한 후, 대화 제어부(341)는, 취득한 처리 인텐트 ID의 기능에 관한 회답을 응답 생성부(333)에 출력한다. 이 경우, 응답 생성부(333)는, 처리 인텐트 ID의 기능에 관한 회답의 텍스트 데이터를 생성하고, 이 텍스트 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 또한 음성 합성부(334)는, 처리 인텐트 ID의 기능에 관한 회답의 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 이 경우, 운전 지원 장치(10)의 제어부(17)는 통신부(14)를 통해 텍스트 데이터 및 음성 데이터를 수신하고, 수신한 텍스트 데이터에 대응하는 정보를 표시부(13)에 표시시키고, 또한 음성 데이터에 대응하는 음성을 음성 출력부(12)에 출력시킨다. 예를 들어 제어부(17)는 음성 출력부(12)에 음성으로서 「트랙션 컨트롤을 오프로 하면 눈길로부터 탈출하기 쉬워진다.」고 출력시킨다.
대화 제어부(341)는 처리 인텐트 ID에 기초하여, 처리 인텐트 ID에 대응하는 해당 제어 내용의 이동체(2)의 동작 상황을 확인한다(스텝 S203). 구체적으로는, 대화 제어부(341)는 통신부(31)를 통해 운전 지원 장치(10)로부터 이동체(2)의 현재의 동작 상황을 취득한다. 더 구체적으로는, 대화 제어부(341)는 통신부(31)를 통해 운전 지원 장치(10)로부터 이동체(2)의 현재의 동작 모드, 예를 들어 트랙션 컨트롤의 온오프 상황을 취득한다. 또한 대화 제어부(341)는 운전 지원 장치(10)로부터뿐 아니라, 예를 들어 운전 지원 장치(10)가 이동체(2)의 동작 상황을 소정의 간격으로 축차 송신하고 있는 외부의 서버로부터 이동체(2)의 현재의 동작 상황을 취득해도 된다.
계속해서, 대화 제어부(341)는, 이동체(2)의 현재의 동작 상황에 기초하여, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경 가능한지 여부를 판정한다(스텝 S204). 대화 제어부(341)에 의하여 처리 인텐트 ID에 해당하는 해당 제어 내용의 변경 가능하다고 판정된 경우(스텝 S204: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S205로 이행한다. 이에 대하여, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경 가능하지 않다고 판정된 경우(스텝 S204: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S213로 이행한다.
스텝 S205에 있어서, 대화 제어부(341)는, 처리 인텐트 ID에 해당하는 해당 제어 내용의 변경 가부 판단의 결과를 제어부(33)에 출력한다. 이 경우, 대화 제어부(341)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경 가능한 것을 나타내는 정보를 제어부(33)에 출력한다.
계속해서, 제어부(33)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할지 여부의 질문을 운전 지원 장치(10)를 향하여 출력한다(스텝 S206). 구체적으로는, 응답 생성부(333)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할지 여부를 질문하기 위한 텍스트 데이터를 생성하고, 이 텍스트 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 또한 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할지 여부를 질문하기 위한 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 이 경우, 운전 지원 장치(10)의 제어부(17)는 통신부(14)를 통해 텍스트 데이터 및 음성 데이터를 수신하고, 수신한 텍스트 데이터에 대응하는 정보를 표시부(13)에 표시시키고, 또한 음성 데이터에 대응하는 음성을 음성 출력부(12)에 출력시킨다. 예를 들어 제어부(17)는 음성 출력부(12)에 음성으로서 「이쪽에서 오프로 할까요?」라고 출력시킨다.
그 후, 의도 이해부(332)는 통신부(31)를 통해 운전 지원 장치(10)로부터 탑승자의 회답을 취득하고(스텝 S207), 탑승자로부터의 회답에 승인이 있는지 여부를 추정한다(스텝 S208). 의도 이해부(332)에 의하여 탑승자로부터의 회답에 승인이 있다고 추정된 경우(스텝 S208: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S209로 이행한다. 예를 들어 의도 이해부(332)는 탑승자로부터의 회답에 「부탁해.」, 「좋아.」, 「해」 및 「실행해.」 등이 있는 경우, 탑승자로부터의 회답에 승인이 있다고 추정한다. 이에 대하여, 의도 이해부(332)에 의하여 탑승자로부터의 회답에 승인이 없다고 추정된 경우(스텝 S208: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S212로 이행한다.
스텝 S209에 있어서, 의도 이해부(332)는, 탑승자의 회답이 일련의 질문에 대한 승인인지 여부를 추정한다. 예를 들어 의도 이해부(332)는, 탑승자의 회답이 일정 시간 내(예를 들어 5초 내)에 있어서 에이전트 관리 장치(30)가 질문한 내용에 대응하는 승인인지 여부를 추정한다. 의도 이해부(332)에 의하여, 탑승자의 회답이 일련의 질문에 대한 승인이라고 추정된 경우(스텝 S209: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S210으로 이행한다. 이에 대하여, 의도 이해부(332)에 의하여 탑승자의 회답이, 일련의 질문에 대한 승인이 아니라고 추정된 경우(스텝 S209: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S211로 이행한다.
스텝 S210에 있어서, 응답 생성부(333)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경한다. 구체적으로는, 응답 생성부(333)는 통신부(31)를 통해 이동체(2)의 운전 지원 장치(10)에, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경하라는 변경 신호를 송신한다. 이 경우, 운전 지원 장치(10)의 제어부(17)는 이동체(2)의 상태를, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 수신한 변경 신호에 따른 해당 제어 내용으로 변경한다. 예를 들어 운전 지원 장치(10)는, 에이전트 관리 장치(30)로부터 이동체(2)의 트랙션 컨트롤의 상태를 오프 상태로 변경하라는 변경 신호가 입력된 경우, 이동체(2)의 트랙션 컨트롤을 오프 상태로 변경한다. 이 경우, 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할 것을 나타내는 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 그리고 운전 지원 장치(10)는, 에이전트 관리 장치(30)로부터 수신한 음성 데이터에 대응하는 음성, 예를 들어 「알겠습니다.」 등을 음성 출력부(12)에 출력시킨다. 이것에 의하여 탑승자는, 에이전트 관리 장치(30)의 제어 하, 이동체(2)의 트랙션 컨트롤이 오프 상태로 된 것을 파악할 수 있다. 스텝 S210 후, 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다.
스텝 S211에 있어서, 음성 합성부(334)는, 탑승자의 회답이 의도치 않은 회답이기 때문에, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할 수 없다는 것을 출력한다. 구체적으로는, 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어의 동작을 변경할 수 없다는 취지의 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 출력한다. 이 경우, 운전 지원 장치(10)는, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 수신한 음성 데이터에 대응하는 음성, 예를 들어 「도움을 드리지 못해 죄송합니다.」를 음성 출력부(12)에 출력시킨다. 스텝 S211 후, 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다.
스텝 S212에 있어서, 통신부(31)를 통해 운전 지원 장치(10)로부터 탑승자의 회답을 취득하고 나서 소정 시간(예를 들어 3초) 경과한 경우(스텝 S212: 예), 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다. 이에 대하여, 통신부(31)를 통해 운전 지원 장치(10)로부터 탑승자의 회답을 취득하고 나서 소정 시간 경과하지 않은 경우(스텝 S212: 아니오), 에이전트 관리 장치(30)는 스텝 S207로 되돌아간다.
스텝 S213에 있어서, 대화 제어부(341)는, 처리 인텐트 ID에 해당하는 해당 제어 내용의 변경 가부 판단의 결과를 제어부(33)에 출력한다. 이 경우, 대화 제어부(341)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할 수 없다는 것을 나타내는 정보를 제어부(33)에 출력한다.
계속해서, 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할 수 없다는 것을 출력한다(스텝 S214). 구체적으로는, 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어의 동작을 변경할 수 없다는 취지의 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 출력한다. 이 경우, 운전 지원 장치(10)는, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 수신한 음성 데이터에 대응하는 음성, 예를 들어 「도움을 드리지 못해 죄송합니다.」를 음성 출력부(12)에 출력시킨다. 스텝 S214 후, 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다.
〔승인 완료 처리의 개요〕
다음으로, 도 4의 스텝 S106에 있어서 설명한 승인 완료 처리의 상세에 대하여 설명한다. 도 6은, 승인 완료 처리의 개요를 도시하는 흐름도이다.
도 6에 도시한 바와 같이 먼저, 의도 이해부(332)는 제1 에이전트부(34)에 대하여, 탑승자로부터의 문의에 대한 회답에 해당하는 이동체(2)의 제어 변경을 추정한 추정 결과를 나타내는 처리 인텐트 ID를 송신한다(스텝 S301).
계속해서, 대화 제어부(341)는 처리 인텐트 ID에 기초하여, 처리 인텐트 ID에 대응하는 해당 제어 내용의 이동체(2)의 동작 상황을 확인한다(스텝 S302).
그 후, 대화 제어부(341)는 이동체(2)의 현재의 동작 상황에 기초하여, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경 가능한지 여부를 판정한다(스텝 S303). 대화 제어부(341)에 의하여 처리 인텐트 ID에 해당하는 해당 제어의 동작 변경이 가능하다고 판정된 경우(스텝 S303: 예), 에이전트 관리 장치(30)는 후술하는 스텝 S304로 이행한다. 이에 대하여, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경 가능하지 않다고 판정된 경우(스텝 S303: 아니오), 에이전트 관리 장치(30)는 후술하는 스텝 S305로 이행한다.
스텝 S304에 있어서, 응답 생성부(333)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경한다. 구체적으로는, 응답 생성부(333)는 통신부(31)를 통해 이동체(2)의 운전 지원 장치(10)에, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경하라는 변경 신호를 출력한다. 이 경우, 운전 지원 장치(10)의 제어부(17)는 이동체(2)의 상태를, 통신부(14)를 통해 에이전트 관리 장치(30)로부터 수신한 변경 신호에 따른 해당 제어 내용으로 변경한다. 예를 들어 운전 지원 장치(10)는, 에이전트 관리 장치(30)로부터 이동체(2)의 트랙션 컨트롤의 상태를 오프 상태로 변경하라는 변경 신호가 입력된 경우, 이동체(2)의 트랙션 컨트롤을 오프 상태로 변경한다. 이 경우, 음성 합성부(334)는, 처리 인텐트 ID에 해당하는 해당 제어 내용으로 변경할 것을 나타내는 음성 데이터를 생성하고, 이 음성 데이터를 통신부(31)를 통해 운전 지원 장치(10)에 송신한다. 그리고 운전 지원 장치(10)는, 에이전트 관리 장치(30)로부터 수신한 음성 데이터에 대응하는 음성, 예를 들어 「알겠습니다.」를 음성 출력부(12)에 출력시킨다. 이것에 의하여 탑승자는, 에이전트 관리 장치(30)의 제어 하, 이동체(2)의 트랙션 컨트롤이 오프 상태로 된 것을 파악할 수 있다. 스텝 S210 후, 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다.
스텝 S305 및 스텝 S306은, 상술한 도 5의 스텝 S213 및 스텝 S214 각각에 대응한다. 스텝 S306 후, 에이전트 관리 장치(30)는 도 4의 메인 루틴으로 되돌아가 본 처리를 종료한다.
이상 설명한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용을 변경 가능한지 여부를 판정한다. 그리고 에이전트 관리 장치(30)는, 이동체(2)의 제어 내용을 변경 가능하다고 판정한 경우, 탑승자에게 이동체(2)의 제어 변경을 실행할지 여부의 질문을 출력한다. 그리고 에이전트 관리 장치(30)는, 탑승자가 제어 내용으로 변경할 것을 승인한 경우, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경한다. 이 때문에, 유저의 문의에 따라 제안한 조작 내용을, 유저의 승인을 얻어 대신 실행할 수 있다. 이 결과, 이동체(2)의 운전 조작의 난이도를 낮출 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가, 탑승자로부터의 문의 중에, 이동체(2)의 제어 내용으로 변경할 것을 승인하는 내용이 포함되어 있는지 여부를 판정한다. 그리고 에이전트 관리 장치(30)는, 탑승자의 승인이 포함되어 있다고 판정한 경우, 탑승자에게 제어 내용으로 변경할지 여부의 질문을 출력하지 않고 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경한다. 이것에 의하여, 탑승자가 지시한 이동체(2)의 제어 내용으로 원활히 변경할 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가, 탑승자로부터의 문의가 이동체(2)의 제어 내용에 관한 내용인지 여부를 추정한다. 그리고 에이전트 관리 장치(30)는, 이동체(2)의 제어 내용에 관한 내용이라고 추정한 경우, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경 가능한지 여부를 판정한다. 이 때문에 복수의 에이전트 중에서, 이동체(2)의 제어 내용을 변경하기 위한 회답에 적합한 에이전트를 선택할 수 있으므로, 탑승자가 문의한 이동체(2)의 제어 변경의 내용에 관하여 원활히 회답할 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경 가능하다고 판정한 후에, 이동체(2)의 제어 내용에 관한 설명을 탑승자에게 회답한다. 이것에 의하여, 탑승자가 이동체(2)의 제어 내용을 파악할 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가 이동체(2)의 동작 상황을 취득하고, 이동체(2)의 동작 상황에 기초하여, 이동체(2)의 제어 내용으로 변경 가능한지 여부를 판정한다. 그리고 에이전트 관리 장치(30)는, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경 가능하다고 판정한 경우, 이동체(2)의 제어 내용을 변경한다. 이 때문에, 탑승자가 승인한 이동체(2)의 제어 내용으로 원활히 변경할 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가 탑승자에게 이동체(2)의 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 탑승자로부터의 회답이, 이동체(2)의 제어 내용으로 변경할 것을 승인하기 위한 일련의 회답인지 여부를 판정한다. 그리고 에이전트 관리 장치(30)는, 일련의 회답인 경우, 탑승자로부터의 문의의 회답에 해당하는 이동체(2)의 제어 내용으로 변경한다. 이것에 의하여, 탑승자가 의도치 않은 제어 변경이 실행되는 것을 방지할 수 있다.
또한 일 실시 형태에 따르면, 에이전트 관리 장치(30)가 탑승자에게 이동체(2)의 제어 내용으로 변경할지 여부를 문의한 후에, 탑승자가 소정 시간 내에 이동체(2)의 제어 내용으로 변경할 것을 승인한 경우, 제어 내용을 변경한다는 회답을 출력한다. 이에 대하여, 에이전트 관리 장치(30)는, 탑승자가 소정 시간 내에 제어 내용으로 변경할 것을 승인하지 않는 경우, 이동체(2)의 제어 내용을 변경하지 않는다는 회답을 출력한다. 이것에 의하여 탑승자가, 에이전트 관리 장치(30)에 의한 제어 내용의 변경 결과를 파악할 수 있다.
또한 상술한 일 실시 형태에서는, 상술한 「부」를 「회로」 등으로 대신하여 읽을 수 있다. 예를 들어 제어부는 제어 회로로 대신하여 읽을 수 있다.
또한 상술한 일 실시 형태에 관한 에이전트 관리 장치에 실행시키는 프로그램은, 인스톨 가능한 형식 또는 실행 가능한 형식의 파일 데이터로 CD-ROM, 플렉시블 디스크(FD), CD-R, DVD(Digital Versatile Disk), USB 매체, 플래시 메모리 등의, 컴퓨터에서 판독 가능한 기록 매체에 기록되어 제공된다.
또한 상술한 일 실시 형태에 관한 에이전트 관리 장치에 실행시키는 프로그램은, 인터넷 등의 네트워크에 접속된 컴퓨터 상에 저장하고 네트워크 경유로 다운로드시킴으로써 제공하도록 구성해도 된다.
또한 본 명세서에 있어서의 흐름도의 설명에서는, 「먼저」, 「그 후」, 「계속해서」 등의 표현을 이용하여 스텝 간의 처리의 전후 관계를 명시하고 있었지만, 본 실시 형태를 실시하기 위하여 필요한 처리의 순서는, 그것들 표현에 의하여 일의적으로 정해지는 것은 아니다. 즉, 본 명세서에서 기재한 흐름도에 있어서의 처리의 순서는, 모순이 없는 범위에서 변경할 수 있다.
추가적인 효과나 변형예는 당업자에 의하여 용이하게 도출할 수 있다. 본 발명의 더 광범위한 양태는, 이상과 같이 나타내고 또한 기술한 특정 상세 및 대표적인 실시 형태에 한정되는 것은 아니다. 따라서 첨부된 클레임 및 그 균등물에 의하여 정의되는 총괄적인 발명의 개념의 정신 또는 범위로부터 일탈하는 일 없이 다양한 변경이 가능하다.
1: 운전 지원 시스템
2: 이동체
10: 운전 지원 장치
11: 음성 입력부
12: 음성 출력부
13: 표시부
14, 31: 통신부
15: 검출부
16, 32: 기록부
17, 33: 제어부
20: 네트워크
30: 에이전트 관리 장치
31: 통신부
34: 제1 에이전트부
35: 제2 에이전트부
213: 스텝
321: 프로그램 기록부
331: 음성 인식부
332: 의도 이해부
333: 응답 생성부
334: 음성 합성부
341: 대화 제어부
342: 에이전트 의도 이해부
343: 차량 정보 데이터베이스
344: 회답 정보 데이터베이스
345: 로그 데이터 정보 데이터베이스
346: 단어 정규화 데이터베이스

Claims (20)

  1. 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치이며,
    상기 프로세서는,
    상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하고,
    상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경하고,
    상기 탑승자로부터의 문의 중에, 상기 제어 내용으로 변경할 것을 승인하는 내용이 포함되어 있는지 여부를 판정하고,
    상기 문의 중에 상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있지 않다고 판정한 경우,
    상기 문의의 회답에 해당하는 상기 이동체의 제어 내용을 추정하고, 추정한 제어 내용을 출력하는 것을 특징으로 하는,
    에이전트 관리 장치.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하지 않고 상기 제어 내용으로 변경하는,
    에이전트 관리 장치.
  3. 제1항 또는 제2항에 있어서,
    상기 프로세서는,
    상기 탑승자로부터의 문의가 상기 제어 내용에 관한 내용인지 여부를 추정하고,
    상기 제어 내용에 관한 내용이라고 추정한 경우, 상기 제어 내용으로 변경할 수 있는지 여부를 판정하는,
    에이전트 관리 장치.
  4. 제1항 또는 제2항에 있어서,
    상기 프로세서는,
    상기 제어 내용으로 변경 가능하다고 판정한 후에, 상기 제어 내용에 관한 설명을 상기 탑승자에게 출력하는,
    에이전트 관리 장치.
  5. 제1항 또는 제2항에 있어서,
    상기 프로세서는,
    상기 이동체의 동작 상황을 취득하고,
    상기 동작 상황에 기초하여, 상기 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 제어 내용으로 변경하는,
    에이전트 관리 장치.
  6. 제1항 또는 제2항에 있어서,
    상기 프로세서는,
    상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 상기 탑승자로부터의 회답이, 상기 제어 내용으로 변경할 것을 승인하기 위한 일련의 회답인지 여부를 판정하고,
    상기 일련의 회답인 경우, 상기 제어 내용으로 변경하는,
    에이전트 관리 장치.
  7. 제1항 또는 제2항에 있어서,
    상기 프로세서는,
    상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 상기 탑승자가 소정 시간 내에 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경한다는 회답을 출력하는 한편,
    상기 탑승자가 소정 시간 내에 상기 제어 내용으로 변경할 것을 승인하지 않는 경우, 상기 제어 내용으로 변경하지 않는다는 회답을 출력하는,
    에이전트 관리 장치.
  8. 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치에,
    상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하고,
    상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경하고,
    상기 탑승자로부터의 문의 중에, 상기 제어 내용으로 변경할 것을 승인하는 내용이 포함되어 있는지 여부를 판정하고,
    상기 문의 중에 상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있지 않다고 판정한 경우,
    상기 문의의 회답에 해당하는 상기 이동체의 제어 내용을 추정하고, 추정한 제어 내용을 출력하는 것을 특징으로 하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  9. 제8항에 있어서,
    상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력하지 않고 상기 제어 내용으로 변경하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  10. 제8항 또는 제9항에 있어서,
    상기 탑승자로부터의 문의가 상기 제어 내용에 관한 내용인지 여부를 추정하고,
    상기 제어 내용에 관한 내용이라고 추정한 경우, 상기 제어 내용으로 변경할 수 있는지 여부를 판정하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  11. 제8항 또는 제9항에 있어서,
    상기 제어 내용으로 변경 가능하다고 판정한 후에, 상기 제어 내용에 관한 설명을 상기 탑승자에게 출력하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  12. 제8항 또는 제9항에 있어서,
    상기 이동체의 동작 상황을 취득하고,
    상기 동작 상황에 기초하여, 상기 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 제어 내용으로 변경하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  13. 제8항 또는 제9항에 있어서,
    상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 상기 탑승자로부터의 회답이, 상기 제어 내용으로 변경할 것을 승인하기 위한 일련의 회답인지 여부를 판정하고,
    상기 일련의 회답인 경우, 상기 제어 내용으로 변경하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  14. 제8항 또는 제9항에 있어서,
    상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 상기 탑승자가 소정 시간 내에 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경한다는 회답을 출력하는 한편,
    상기 탑승자가 소정 시간 내에 상기 제어 내용으로 변경할 것을 승인하지 않는 경우, 상기 제어 내용으로 변경하지 않는다는 회답을 출력하는,
    기록 매체에 저장된 컴퓨터 프로그램.
  15. 하드웨어를 갖는 프로세서를 구비하고, 이동체의 탑승자로부터의 문의에 대한 회답을 생성하는 에이전트 관리 장치가,
    상기 이동체의 제어 내용을, 상기 이동체의 탑승자로부터의 문의의 회답에 해당하는 상기 이동체의 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 상기 이동체의 스피커로부터 출력하고,
    상기 탑승자가 상기 제어 내용으로 변경할 것을 승인한 경우, 상기 제어 내용으로 변경하고,
    상기 탑승자로부터의 문의 중에, 상기 제어 내용으로 변경할 것을 승인하는 내용이 포함되어 있는지 여부를 판정하고,
    상기 문의 중에 상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있지 않다고 판정한 경우,
    상기 문의의 회답에 해당하는 상기 이동체의 제어 내용을 추정하고, 추정한 제어 내용을 출력하는 것을 특징으로 하는,
    에이전트 관리 방법.
  16. 제15항에 있어서,
    상기 제어 내용을 변경할 것을 승인하는 내용이 포함되어 있다고 판정한 경우, 상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 상기 스피커로부터 출력하지 않고 상기 제어 내용으로 변경하는,
    에이전트 관리 방법.
  17. 제15항 또는 제16항에 있어서,
    상기 탑승자로부터의 문의가 상기 제어 내용에 관한 내용인지 여부를 추정하고,
    상기 제어 내용에 관한 내용이라고 추정한 경우, 상기 제어 내용으로 변경할 수 있는지 여부를 판정하는,
    에이전트 관리 방법.
  18. 제15항 또는 제16항에 있어서,
    상기 제어 내용으로 변경 가능하다고 판정한 후에, 상기 제어 내용에 관한 설명을 상기 스피커로부터 상기 탑승자에게 출력하는,
    에이전트 관리 방법.
  19. 제15항 또는 제16항에 있어서,
    상기 이동체의 동작 상황을 취득하고,
    상기 동작 상황에 기초하여, 상기 제어 내용으로 변경 가능한지 여부를 판정하고,
    상기 제어 내용으로 변경 가능하다고 판정한 경우, 상기 제어 내용으로 변경하는,
    에이전트 관리 방법.
  20. 제15항 또는 제16항에 있어서,
    상기 탑승자에게 상기 제어 내용으로 변경할지 여부의 질문을 출력한 후에, 상기 탑승자로부터의 회답이, 상기 제어 내용으로 변경할 것을 승인하기 위한 일련의 회답인지 여부를 판정하고,
    상기 일련의 회답인 경우, 상기 제어 내용으로 변경하는,
    에이전트 관리 방법.
KR1020200167353A 2019-12-10 2020-12-03 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법 KR102467397B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019222932A JP7287258B2 (ja) 2019-12-10 2019-12-10 エージェント管理装置、プログラムおよびエージェント管理方法
JPJP-P-2019-222932 2019-12-10

Publications (2)

Publication Number Publication Date
KR20210073461A KR20210073461A (ko) 2021-06-18
KR102467397B1 true KR102467397B1 (ko) 2022-11-16

Family

ID=73020036

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020200167353A KR102467397B1 (ko) 2019-12-10 2020-12-03 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법

Country Status (7)

Country Link
US (1) US11505200B2 (ko)
EP (1) EP3835106A1 (ko)
JP (1) JP7287258B2 (ko)
KR (1) KR102467397B1 (ko)
CN (1) CN113051377A (ko)
BR (1) BR102020024696A2 (ko)
RU (1) RU2764958C1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7198122B2 (ja) * 2019-03-07 2022-12-28 本田技研工業株式会社 エージェント装置、エージェント装置の制御方法、およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070265844A1 (en) * 2003-12-05 2007-11-15 Kabushikikaisha Kenwood Audio Device Control Device, Audio Device Control Method, and Program
US20080048908A1 (en) 2003-12-26 2008-02-28 Kabushikikaisha Kenwood Device Control Device, Speech Recognition Device, Agent Device, On-Vehicle Device Control Device, Navigation Device, Audio Device, Device Control Method, Speech Recognition Method, Agent Processing Method, On-Vehicle Device Control Method, Navigation Method, and Audio Device Control Method, and Program
KR101688762B1 (ko) * 2013-04-05 2016-12-21 구글 인코포레이티드 자율 주행 차량에 대한 제어를 운전자에게 이행하기 위한 시스템들 및 방법들

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6209037B1 (en) * 1995-05-30 2001-03-27 Roy-G-Biv Corporation Motion control systems using communication map to facilitating communication with motion control hardware
DE10030819A1 (de) * 2000-06-23 2002-01-10 Werner Wolfgang Baum Verwendung eines satellitengestützten Sende- und Ortungssystems in Verbindung mit einem Kraftfahrzeug
JP4371057B2 (ja) 2005-01-11 2009-11-25 トヨタ自動車株式会社 車両用エージェント装置、エージェントシステム及びエージェント制御方法
DE102006008381A1 (de) * 2006-02-21 2007-08-30 Ford Global Technologies, LLC, Dearborn Verfahren und System zur Information eines Fahrers eines Kraftfahrzeugs über auftretende Meldungen eines Fahrzeugüberwachungssystems
JP4983587B2 (ja) * 2007-12-19 2012-07-25 株式会社デンソー 単音節入力装置
GB201215968D0 (en) * 2012-09-06 2012-10-24 Jaguar Cars Vehicle control system and method
KR101527518B1 (ko) * 2012-09-25 2015-06-09 한라비스테온공조 주식회사 차량용 제어장치
KR20140054652A (ko) * 2012-10-29 2014-05-09 한라비스테온공조 주식회사 차량용 제어장치
US9085303B2 (en) * 2012-11-15 2015-07-21 Sri International Vehicle personal assistant
US8874301B1 (en) * 2013-07-09 2014-10-28 Ford Global Technologies, Llc Autonomous vehicle with driver presence and physiological monitoring
US9443507B2 (en) * 2013-07-15 2016-09-13 GM Global Technology Operations LLC System and method for controlling a speech recognition system
US9454150B2 (en) * 2013-07-17 2016-09-27 Toyota Motor Engineering & Manufacturing North America, Inc. Interactive automated driving system
US20150066284A1 (en) 2013-09-05 2015-03-05 Ford Global Technologies, Llc Autonomous vehicle control for impaired driver
JP6236303B2 (ja) 2013-11-26 2017-11-22 株式会社デンソーアイティーラボラトリ 制御装置、制御方法およびプログラム
GB2523203B (en) * 2014-02-18 2017-01-11 Jaguar Land Rover Ltd Control System and method
JP6011584B2 (ja) * 2014-07-08 2016-10-19 トヨタ自動車株式会社 音声認識装置及び音声認識システム
DE112015003379T5 (de) * 2014-07-22 2017-04-27 GM Global Technology Operations LLC Systeme und Verfahren für eine adaptive Schnittstelle, um Anwendererfahrungen in einem Fahrzeug zu verbessern
DE102014225383A1 (de) 2014-12-10 2016-06-16 Robert Bosch Gmbh Verfahren zum Betreiben eines Kraftfahrzeugs, Kraftfahrzeug
US9752370B2 (en) * 2015-07-13 2017-09-05 Ford Global Technologies, Llc Rain onset detection auto-close user interface
US9467839B1 (en) * 2015-12-16 2016-10-11 International Business Machines Corporation Management of dynamic events and moving objects
US10166995B2 (en) * 2016-01-08 2019-01-01 Ford Global Technologies, Llc System and method for feature activation via gesture recognition and voice command
US10347245B2 (en) * 2016-12-23 2019-07-09 Soundhound, Inc. Natural language grammar enablement by speech characterization
JP6787269B2 (ja) * 2017-07-21 2020-11-18 トヨタ自動車株式会社 音声認識システム及び音声認識方法
KR102441067B1 (ko) * 2017-10-12 2022-09-06 현대자동차주식회사 차량의 사용자 입력 처리 장치 및 사용자 입력 처리 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070265844A1 (en) * 2003-12-05 2007-11-15 Kabushikikaisha Kenwood Audio Device Control Device, Audio Device Control Method, and Program
US20080048908A1 (en) 2003-12-26 2008-02-28 Kabushikikaisha Kenwood Device Control Device, Speech Recognition Device, Agent Device, On-Vehicle Device Control Device, Navigation Device, Audio Device, Device Control Method, Speech Recognition Method, Agent Processing Method, On-Vehicle Device Control Method, Navigation Method, and Audio Device Control Method, and Program
KR101688762B1 (ko) * 2013-04-05 2016-12-21 구글 인코포레이티드 자율 주행 차량에 대한 제어를 운전자에게 이행하기 위한 시스템들 및 방법들

Also Published As

Publication number Publication date
CN113051377A (zh) 2021-06-29
JP2021092651A (ja) 2021-06-17
US20210171053A1 (en) 2021-06-10
RU2764958C1 (ru) 2022-01-24
EP3835106A1 (en) 2021-06-16
BR102020024696A2 (pt) 2021-06-15
KR20210073461A (ko) 2021-06-18
JP7287258B2 (ja) 2023-06-06
US11505200B2 (en) 2022-11-22

Similar Documents

Publication Publication Date Title
US10929652B2 (en) Information providing device and information providing method
JP2020004378A (ja) 情報プッシュ方法及び装置
JP6150077B2 (ja) 車両用音声対話装置
US20190337532A1 (en) Autonomous vehicle providing driver education
CN111402925A (zh) 语音调节的方法、装置、电子设备、车载系统和可读介质
CN109059953B (zh) 唤醒支持系统和唤醒支持方法
JP2018059960A (ja) 情報提供装置
WO2017168465A1 (ja) 鞍乗型車両用処理装置
US11620531B2 (en) Technique for efficient retrieval of personality data
KR102467397B1 (ko) 에이전트 관리 장치, 프로그램, 및 에이전트 관리 방법
JP2019121970A (ja) 対話装置
US11074915B2 (en) Voice interaction device, control method for voice interaction device, and non-transitory recording medium storing program
WO2021149593A1 (ja) 情報処理装置、情報処理方法、情報処理プログラム及び記憶媒体
WO2018163552A1 (ja) 運転モード切替制御装置、方法およびプログラム
JP2021123133A (ja) 情報処理装置、情報処理方法、及び情報処理プログラム
CN111128143B (zh) 驾驶辅助设备、车辆、驾驶辅助方法及存储程序的非暂时性存储介质
JP2006313287A (ja) 音声対話装置
JP2021117940A (ja) エージェント装置、エージェントシステム及びプログラム
CN107888652B (zh) 处理结果异常检测装置、存储介质、检测方法和移动体
JP2020162003A (ja) エージェント装置、エージェント装置の制御方法、およびプログラム
JP2021096710A (ja) エージェント装置、エージェントシステム、及びエージェントプログラム
JP7276165B2 (ja) エージェント装置、エージェントシステム、及びエージェントプログラム
JP2021117205A (ja) 情報処理装置
JP2023160628A (ja) 特定装置
JP2023170239A (ja) 出力制御方法及び出力制御装置

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right