CN109572702B - 车辆控制装置和包括该车辆控制装置的车辆 - Google Patents

车辆控制装置和包括该车辆控制装置的车辆 Download PDF

Info

Publication number
CN109572702B
CN109572702B CN201810926662.XA CN201810926662A CN109572702B CN 109572702 B CN109572702 B CN 109572702B CN 201810926662 A CN201810926662 A CN 201810926662A CN 109572702 B CN109572702 B CN 109572702B
Authority
CN
China
Prior art keywords
vehicle
passenger
determining
control apparatus
message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810926662.XA
Other languages
English (en)
Other versions
CN109572702A (zh
Inventor
吴知原
朴金货
赵恩贞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN109572702A publication Critical patent/CN109572702A/zh
Application granted granted Critical
Publication of CN109572702B publication Critical patent/CN109572702B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3605—Destination input or retrieval
    • G01C21/3608—Destination input or retrieval using speech input, e.g. using speech recognition
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/03—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for supply of electrical power to vehicle subsystems or for
    • B60R16/0315—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for supply of electrical power to vehicle subsystems or for using multiplexing techniques
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/10—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device
    • B60R25/102—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles actuating a signalling device a signal being sent to a remote location, e.g. a radio signal being transmitted to a police station, a security company or the owner
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
    • B60R25/20—Means to switch the anti-theft system on or off
    • B60R25/25—Means to switch the anti-theft system on or off using biometry
    • B60R25/257—Voice recognition
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/28—Constructional details of speech recognition systems
    • G10L15/30—Distributed recognition, e.g. in client-server systems, for mobile phones or network applications
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L17/00—Speaker identification or verification techniques
    • G10L17/22—Interactive procedures; Man-machine interfaces
    • G10L17/24—Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/148—Instrument input by voice
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/04—Real-time or near real-time messaging, e.g. instant messaging [IM]
    • H04L51/046—Interoperability with other network applications or services

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Computational Linguistics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Business, Economics & Management (AREA)
  • Evolutionary Computation (AREA)
  • Game Theory and Decision Science (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

车辆控制装置和包括该车辆控制装置的车辆。本公开涉及用于车辆的车辆控制装置，该车辆具有语音输入单元、音频输出单元和显示器。该车辆控制装置可以包括：通信单元，该通信单元被配置成与所述语音输入单元、所述音频输出单元和所述显示器中的至少一个进行通信；以及处理器，该处理器被配置成控制所述通信单元，以在发生预设事件时以听觉方式和视觉方式中的至少一种输出用于引发车上乘客说话的消息，并且基于通过所述语音输入单元接收到所述乘客对所述消息的响应来识别所述乘客，并且基于所识别的所述乘客来执行不同的功能。

Description

车辆控制装置和包括该车辆控制装置的车辆
技术领域
本公开涉及安装在车辆上用于识别车上乘客的语音的车辆控制装置和包括该车辆控制装置的车辆。
背景技术
车辆意指能够利用动能使人或行李移动的交通运输工具。车辆的代表性示例包括汽车和摩托车。
为了使用车辆的用户的安全和方便，在车辆中设置各种传感器和装置，并且车辆的功能是多样化的。
车辆的功能可分为方便驾驶员的便利功能和确保驾驶员和/或行人安全的安全功能。
首先，便利功能的目的在于与驾驶员的便利相关的发展，诸如，赋予车辆信息娱乐(信息+娱乐)功能，支持部分自动驾驶功能或协助确保诸如夜视或盲点的驾驶员视野。例如，存在主动巡航控制(ACC)、智能停车辅助系统(SPAS)、夜视(NV)、平视显示器(head updisplay,HUD)、全景监视器(AVM)和自适应前照灯系统(AHS)。
安全功能是用于确保驾驶员和/或行人安全的技术，包括车道偏离警告系统(LDWS)、车道保持辅助系统(LKAS)、自动紧急制动(AEB)功能等。
车辆设置有用于车上的至少一名乘客的一个或更多个显示器，并且随着车辆功能变得多样化，通过显示器来提供各种驾驶信息。随着显示器从简单传递信息的装置变成与用户通信的装置，需要开发可以控制车辆内的显示器的用户界面。
随着车辆从简单的机械装置演变成包括各种电子装置的电子装置，应该受法律保护的个人信息正被存储在车辆中。个人信息是关于生命个体的信息，可以识别个体并且必须只向个人信息的信息主体披露。因此，车辆必须识别车上乘客，并且选择性只提供与乘客对应的信息。
此外，在由各种人共享车辆的情况下，必须提供适于使用车辆的人的功能。
发明内容
本公开的目的是解决以上提到的问题和其它问题。
本公开的目的在于提供能够使用乘客的语音来识别乘客的车辆控制装置和包括该车辆控制装置的车辆。更具体地，本公开的目的是提供在不经过附加认证处理的情况下仅通过与用户通信而能向用户提供优化用户界面的车辆控制装置和包括该车辆控制装置的车辆。
本公开的目的在于提供能够根据乘客来选择性地提供存储在车辆中的个人信息的车辆控制装置和包括该车辆控制装置的车辆。此外，本公开的目的在于提供增强安全性以允许仅获得授权的人使用车辆的车辆控制装置和包括该车辆控制装置的车辆。
本公开的目的在于提供只使用语音允许多名乘客执行车辆中的各种功能的车辆控制装置和包括该车辆控制装置的车辆。
根据实施方式，一种用于车辆的车辆控制装置，该车辆控制装置可以包括：通信单元，所述通信单元被配置成与语音输入单元以及所述车辆的音频输出单元、触觉输出单元或显示器中的至少一个进行通信，所述语音输入单元包括至少一个麦克风；至少一个处理器；以及计算机可读介质，所述计算机可读介质联接到已经存储有指令的所述至少一个处理器，当所述至少一个处理器执行所述指令时，致使所述至少一个处理器执行以下操作：确定已经发生预设事件；基于确定已经发生所述预设事件，指示所述通信单元输出被配置成提示来自所述车辆的第一乘客的第一声音响应的消息，所述消息是视觉类型、听觉类型或触觉类型中的至少一种；通过所述语音输入单元从所述车辆的所述第一乘客接收所述第一声音响应；响应于接收到所述第一声音响应，确定所述第一乘客的身份；以及根据所述第一乘客的身份来执行与所述车辆关联的功能。
根据实施方式，所述操作可以包括：通过所述语音输入单元从所述车辆的第二乘客接收第二声音响应；响应于接收到所述第二声音响应，确定所述第二乘客的身份；基于所述第一乘客的身份，执行与所述第一乘客关联的第一语音识别服务；以及基于所述第二乘客的身份，执行与所述第二乘客关联的第二语音识别服务。
根据实施方式，所述操作可以包括：确定所述音频输出单元的与所述第一乘客的位置对应的第一扬声器；通过所述第一语音识别服务来确定针对所述第一乘客的第一听觉消息；指示所述通信单元通过所述第一扬声器输出所述第一听觉消息；确定所述音频输出单元的与所述第二乘客的位置对应的第二扬声器；通过所述第二语音识别服务来确定针对所述第二乘客的第二听觉消息；以及指示所述通信单元通过所述第二扬声器输出所述第二听觉消息。
根据实施方式，所述操作可以包括：通过所述第一语音识别服务来确定针对所述第一乘客的第一听觉消息；指示所述通信单元用第一音调输出所述第一听觉消息；通过所述第二语音识别服务来确定针对所述第二乘客的第二听觉消息；以及指示所述通信单元用与所述第一音调不同的第二音调来输出所述第二听觉消息。
根据实施方式，所述第一语音识别服务和所述第二语音识别服务可以是不同类型的语音识别服务。
根据实施方式，所述操作可以包括：基于所确定的所述第一乘客的身份，从多个语音识别服务中选择与所述第一乘客关联的第一语音识别服务；以及基于所述选择，执行与所述第一乘客关联的所述第一语音识别服务。
根据实施方式，所述操作可以包括：确定与所述第一乘客关联的一个或更多个特征；根据与所述第一乘客关联的所述一个或更多个特征来确定所述第一乘客执行安装在所述车辆上的应用的权限；以及根据所确定的所述第一乘客的权限，允许所述第一乘客执行安装在所述车辆上的应用。
根据实施方式，所述操作可以包括：通过所述语音输入单元从所述车辆的第二乘客接收第二声音响应，所述第二声音响应包括用于执行功能的请求；确定与所述第二乘客关联的一个或更多个特征；根据与所述第二乘客关联的所述一个或更多个特征来确定所述第二乘客执行安装在所述车辆上的应用的权限；确定在所述第二乘客的权限下不允许所述第二乘客请求执行的功能；以及基于确定在所述第二乘客的权限下不允许所述第二乘客请求的功能，指示所述通信单元输出请求所述第一乘客批准执行所述功能的引导消息。
根据实施方式，所述操作可以包括：通过所述语音输入单元从所述第一乘客接收批准执行所述第二乘客所请求的功能的第三声音响应；以及响应于从所述第一乘客接收到批准执行所述第二乘客所请求的功能的第三声音响应，执行所述第二乘客所请求的功能。
根据实施方式，所述操作可以包括：确定所述第一乘客的身份与所述车辆的所存储用户不匹配；确定所述车辆的状态；以及基于确定所述第一乘客的身份与所述车辆的所存储用户不匹配，根据所述车辆的状态来防止执行与所述车辆关联的功能。
根据实施方式，防止执行功能的操作可以包括：接收启动所述车辆的启动命令；以及防止所述车辆启动。
根据实施方式，所述操作可以包括：指示所述通信单元通过所述显示器来输出被配置成接收用于允许所述车辆启动的密码的锁定画面。
根据实施方式，指示所述通信单元输出被配置成接收密码的锁定画面的操作可以包括：确定所述第一乘客占据的第一座位；以及指示所述通信单元只在与第一乘客所占据的第一座位对应的第一显示器上输出所述锁定画面。
根据实施方式，防止执行功能的操作可以包括：确定所述车辆正在运行；以及基于确定所述车辆正在运行，将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态。
根据实施方式，所述操作可以包括：确定所述车辆处于所述锁定状态下；以及基于确定所述车辆处于所述锁定状态下，指示所述通信单元输出被配置为提示来自所存储用户的第四声音响应的附加消息，所述附加消息是所述视觉类型或所述听觉类型中的一种。
根据实施方式，所述操作可以包括：确定所述车辆处于所述锁定状态下；以及基于确定所述车辆处于所述锁定状态下，将所述车辆的速度限制为参考速度。
根据实施方式，所述操作可以包括：确定所述车辆处于所述锁定状态下；基于确定所述车辆处于所述锁定状态下，允许所述车辆自动驾驶到预定目的地；确定所述车辆通过所述自动驾驶已经到达所述预定目的地；以及基于确定所述车辆通过所述自动驾驶已经到达所述预定目的地，去除所述车辆的动力。
根据实施方式，所述操作可以包括：确定所述第一乘客的身份与所述车辆的所存储用户不匹配；以及基于确定所述第一乘客的身份与所述车辆的所存储用户不匹配，将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态，并且指示所述通信单元向所述所存储用户的终端发送通知消息。
根据实施方式，所述操作可以包括：通过所述通信单元从所述所存储用户的终端接收解锁命令；以及响应于接收到所述解锁命令，将所述车辆的状态切换成解锁状态。
根据实施方式，所述操作可以包括：确定在从输出被配置为提示所述第一声音响应的消息起预定时间段内还未接收到来自所述第一乘客的所述第一声音响应；以及基于确定在预定时间段内还未接收到来自所述第一乘客的所述第一声音响应，将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态。
此外，本公开可以扩展到设置有以上车辆控制装置的车辆和/或使用该车辆控制装置进行的车辆控制方法。
将如下地描述根据本公开的车辆控制装置和包括车辆控制装置的车辆的效果。
即使乘客自然地与虚拟助理通信而无需处理附加的认证过程，乘客也可以执行登录到车辆的系统并且接收为他自己或她自己自定义的用户界面。
即使当未经授权操作车辆的人拥有智能钥匙时，车辆控制装置也可以限制功能执行。换句话讲，由于通过语音识别来确定用户是否具有真正的权限，因此车辆的安全性可以提升一级。
附图说明
附图被包括进来以提供对本发明的进一步理解，并且被并入且构成本说明书的部分，附图例示了本发明的实施方式并且与说明书一起用来说明本发明的原理。
在附图中：
图1是例示了根据本公开的实施方式的车辆的外观的图；
图2是从外部以各种角度看到的根据本公开的实施方式的车辆的图；
图3和图4是例示了根据本公开的实施方式的车辆的内部的图；
图5和图6是为了说明根据本公开的实施方式的对象而参照的图；
图7是用于说明根据本公开的实施方式的车辆的框图；
图8是用于说明根据本公开的实施方式的车辆控制装置的概念图；
图9是用于说明图8中的车辆控制装置的控制方法的流程图；
图10A和图10B是用于说明图9中的控制方法的示例性图；
图11是用于说明车辆控制装置的根据语音识别所识别的乘客的操作的概念图；
图12是用于说明当所识别的乘客不对应于预设用户时的控制方法的流程图；
图13是用于说明输出附加消息以搜索预设用户的操作的示例性图；
图14是用于说明当多名乘客在车上时的控制方法的概念图和流程图；
图15、图16A和图16B是用于说明图14中的控制方法的示例性图；
图17是用于说明提供语音识别服务的方法的概念图；
图18是用于说明当感测到驾驶员的异常状态时的控制方法的概念图；以及
图19是用于说明当在预定时间段内接收到多条语音命令时的控制方法的概念图。
具体实施方式
下文中，将参照附图来详细描述本公开的优选实施方式，并且用相同的参考标号来指定相同或相似的元件，而不顾及附图中的标号，并且将省略对其的冗余描述。用于以下描述中公开的构成元件的后缀“模块”或“单元”仅仅是旨在方便描述本说明书，而后缀本身并没有给出任何特殊的含义或功能。此外，在描述本公开时，当对本发明所属公知技术的具体描述被判断为使本公开的主旨模糊不清时，将省略详细描述。使用附图来帮助容易地理解本公开的技术思路，并且应该理解，本公开的思路不受附图限制。
应该理解，虽然在本文中可使用术语“第一”、“第二”等来描述各种元件，但这些元件不应该受这些术语限制。这些术语通常只是用于将一个元件与另一个元件区分开。
应该理解，当一个元件被称为与另一个元件“连接”时，该元件可直接与其它元件连接，或者也可存在中间元件。相比之下，当一个元件被称为与另一个元件“直接连接”时，不存在中间元件。
单数表示可以包括复数表示，只要它代表与上下文截然不同的含义。
本文中使用的术语“包括”或“具有”应当理解为，它们旨在指示说明书中公开的特征、数字、步骤、构成元件、组件或其组合的存在，并且还可以理解，预先不排除存在或附加一个或更多个其它特征、数字、步骤、构成元件、组件或其组合的可能性。
本说明书中描述的车辆可以是包括汽车、摩托车的概念。下文中，将基于汽车来描述车辆。
根据本公开的实施方式的车辆可以是包括用引擎作为动力源的内燃机车辆、用引擎和电动马达作为动力源的混合动力车辆、用电动马达作为动力源的电动车辆等的全部的概念。
在下面的描述中，车辆左侧是指车辆行驶方向上的左侧，车辆右侧是指行驶方向上的右侧。
图1是例示了根据本公开的实施方式的车辆的外观的图。
图2是从外部以各种角度看到的根据本公开的实施方式的车辆的图。
图3和图4是例示了根据本公开的实施方式的车辆的内部的图。
图5和图6是为了说明根据本公开的实施方式的对象而参照的图。
图7是用于说明根据本公开的实施方式的车辆的框图。
参照图1至图7，车辆100可以包括在动力源作用下旋转的车轮和用于调节车辆100的行驶方向的转向输入装置510。
车辆100可以是自动驾驶车辆。
这里，自动驾驶被定义为基于预设算法来控制加速度、减速度和行驶方向中的至少一个。换句话讲，自动驾驶表示即使在没有向驾驶操作装置输入用户输入时也自动操作驾驶操作装置。
基于用户输入，车辆100可以切换成自动模式或手动模式。
例如，基于通过用户界面设备200接收的用户输入，车辆可以从手动模式转换成自动模式或者从自动模式转换成手动模式。
车辆100可以基于行驶环境信息而切换成自动模式或手动模式。可以基于从对象检测设备300提供的对象信息来生成行驶环境信息。
例如，基于对象检测设备300中生成的行驶环境信息，车辆100可以从手动模式转换成自动模式或者从自动模式转换成手动模式。
例如，基于通过通信设备400接收的行驶环境信息，车辆100可以从手动模式转换成自动模式或者从自动模式转换成手动模式。
例如，基于从外部装置提供的信息、数据或信号，车辆100可以从手动模式转换成自动模式或者从自动模式转换成手动模式。
当车辆100以自动模式驾驶时，可以基于操作系统700来驾驶自动车辆100。
例如，可以基于在驾驶系统710、停车驶出系统740和停车系统750中生成的信息、数据或信号来驾驶自动车辆100。
当以自动模式驾驶车辆100时，自动车辆100可以通过驾驶控制设备500接收用于驾驶的用户输入。可以基于通过驾驶控制设备500接收到的用户输入来驾驶车辆100。
整体长度是指从车辆100的前端到后端的长度，宽度是指车辆100的宽度，并且高度是指从车轮底部到车顶的长度。在下面的描述中，整体长度方向L可以指作为测量车辆100的整体长度的标准的方向，宽度方向W可以指作为测量车辆100宽度的标准的方向，并且高度方向H可以指作为测量车辆100高度的标准的方向。
如图7中例示的，车辆100可以包括用户界面设备200、对象检测设备300、通信设备400、驾驶控制设备500、车辆操作设备600、操作系统700、导航系统770、感测单元120、接口单元130、存储器140、控制器170和电源单元190。
根据实施方式，车辆100可以包括除了本说明书中要说明的组件之外的更多组件，或者可以不包括要在本说明书中说明的那些组件中的一些。
用户界面设备200是用于车辆100和用户之间通信的设备。用户界面装置200可以接收用户输入并且将在车辆100中生成的信息提供给用户。车辆200可以通过用户界面设备200来实现用户界面(UI)或用户体验(UX)。
用户界面设备200可以包括输入单元210、内部相机220、生物感测单元230、输出单元250和处理器270。
根据实施方式，用户界面设备200可以包括除了本说明书中要说明的组件之外的更多组件，或者可以不包括要在本说明书中说明的那些组件中的一些。
输入单元200可以使得用户能够输入信息。输入单元200中收集的数据可以被处理器270分析并且被处理为用户的控制命令。
输入单元210可以设置在车辆内。例如，输入单元200可以设置在方向盘的一个区域、仪表板的一个区域、座椅的一个区域、每个立柱的一个区域、车门的一个区域、中央控制台的一个区域、顶蓬的一个区域、遮阳板的一个区域、挡风玻璃的一个区域、窗户的一个区域等。
输入单元210可以包括语音输入模块211、姿势输入模块212、触摸输入模块213和机械输入模块214。
语音输入模块211可以将用户的语音输入转换成电信号。转换后的电信号可以被提供到处理器270或控制器170。
语音输入模块211可以包括至少一个麦克风。
姿势输入模块212可以将用户的姿势输入转换成电信号。转换后的电信号可以被提供到处理器270或控制器170。
姿势输入模块212可以包括用于检测用户姿势输入的红外传感器和图像传感器中的至少一个。
根据实施方式，姿势输入模块212可以检测用户的三维(3D)姿势输入。为此，姿势输入模块212可以包括输出多个红外线的发光二极管或多个图像传感器。
姿势输入模块212可以通过飞行时间(TOF)方法、结构光方法或视差方法(disparity method)来检测用户的3D姿势输入。
触摸输入模块213可以将用户的触摸输入转换成电信号。转换后的电信号可以被提供到处理器270或控制器170。
触摸输入模块213可以包括用于检测用户触摸输入的触摸传感器。
根据实施方式，触摸输入模块213可以与显示单元251集成以便实现触摸屏。触摸屏可以提供车辆100和用户之间的输入界面和输出界面。
机械输入模块214可以包括按钮、圆顶开关、滚轮和轻摇开关中的至少一种。机械输入模块214生成的电信号可以被提供到处理器270或控制器170。
机械输入模块214可以布置在方向盘、中心仪表板、中央控制台、驾驶室模块、车门等上。
内部相机220可以获取车辆的内部图像。处理器270可以基于车辆的内部图像来检测用户的状态。处理器270可以从车辆的内部图像获取与用户注视相关的信息。处理器270可以通过车辆的内部图像检测用户姿势。
生物感测单元230可以获取用户的生物信息。生物感测单元230可以包括用于检测用户的生物信息的传感器，并且使用传感器来获取关于用户的指纹信息和心率信息。可以使用生物信息进行用户认证。
输出单元250可以生成与视觉、听觉或触觉信号相关的输出。
输出单元250可以包括显示模块251、音频输出模块252和触觉输出模块253中的至少一种。
显示模块251可以输出与各种类型信息对应的图形对象。
显示模块251可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、三维(3D)显示器和电子墨水显示器中的至少一种。
显示模块251可以是具有触摸输入模块213的夹层结构或与触摸输入模块213集成的结构，以实现触摸屏。
显示模块251可以被实现为平视显示器(HUD)。当显示模块251被实现为HUD时，显示模块251可以设置有投影模块，以便通过投影在挡风玻璃或窗户上的图像来输出信息。
显示模块251可以包括透明显示器。透明显示器可以附接于挡风玻璃或窗户。
透明显示器可以具有预定的透明度并且在其上输出预定画面。透明显示器可以包括透明TFEL(薄膜电致发光)、透明OLED(有机发光二极管)、透明LCD(液晶显示器)、透射型透明显示器和透明LED(发光二极管)中的至少一种，以便具有透明度。透明显示器可以具有可调节的透明度。
此外，用户界面装置200可以包括多个显示模块251a至251g。
显示模块251可以设置在方向盘的一个区域、仪表板的一个区域251a、251b、251e、座椅的一个区域251d、每个支柱的一个区域251f、车门的一个区域251g、中央控制台的一个区域、顶蓬的一个区域或遮阳板的一个区域上，或者在挡风玻璃的一个区域251c或窗户的一个区域251h上实现。
音频输出模块252将从处理器270或控制器170提供的电信号转换成音频信号，以便输出。为此，音频输出模块252可以包括至少一个扬声器。
触觉输出模块253生成触觉输出。例如，触觉输出单元253可以使方向盘、安全带或座椅110FL、110FR、110RL、110RR振动，使得用户能够识别此输出。
处理器270可以控制用户界面设备200的每个单元的整体操作。
根据实施方式，用户界面设备200可以包括多个处理器270或者可以不包括任何处理器270。
当处理器270不包括在用户界面设备200中时，用户界面设备200可以根据车辆100内另一个设备的处理器或控制器170的控制而进行操作。
此外，用户界面设备200可以被称为车辆的显示设备。
用户界面设备200可以根据控制器170的控制进行操作。
对象检测设备300是用于检测位于车辆100外部的对象的设备。
对象可以是与车辆100的驾驶(操作)关联的各种对象。
参照图5和图6，对象(O)可以包括通车车道OB10、另一车辆OB11、行人OB12、两轮车OB13、交通信号OB14和OB15、灯、道路、结构、减速路脊、地理特征、动物等。
车道OB01可以是行车车道、挨着行车车道的车道或另一车辆沿着与车辆100相反的方向行驶的车道。车道OB10可以是包括形成车道的左标线和右标线的概念。
另一车辆OB11可以是正在车辆100周围移动的车辆。另一车辆OB11可以是距离车辆100预定距离内的车辆。例如，另一车辆OB11可以是在车辆100前或在车辆100后移动的车辆。
行人OB12可以是位于车辆100附近的人。行人OB12可以是距离车辆100预定距离内的人。例如，行人OB12可以是位于人行道或道路上的人。
两轮车辆OB13可以是指位于车辆100附近并且使用两个车轮移动的车辆(运输设备)。两轮车辆OB13可以距离车辆100预定距离内并且具有两个车轮的车辆。例如，两轮车辆OB13可以是位于人行道或道路上的摩托车或自行车。
交通信号可以包括交通信号灯OB15、交通标志OB14和在路面上绘制的图案或文字。
光可以是从设置在另一车辆上的灯发射的光。光可以是从路灯产生的光。光可以是太阳光。
道路可以包括路面、弯道、上坡、下坡等。
结构可以是位于道路附近并且固定在地面上的对象。例如，结构可以包括路灯、路边树、建筑物、电线杆、交通信号灯、桥梁等。
地理特征可以包括山、丘陵等。
此外，对象可以被分类成移动对象和固定对象。例如，移动对象可以是包括另一车辆和行人的概念。固定对象可以是包括交通信号、道路和结构的概念。
对象检测设备300可以包括相机310、雷达320、激光雷达330、超声波传感器340、红外传感器350和处理器370。
根据实施方式，对象检测设备300还可以包括除了所描述的组件之外的其它组件，或者可以不包括所描述组件中的一些组件。
相机310可以位于车辆外部的适宜部分处，用于获取车辆的外部图像。相机310可以是单色相机、立体相机310a、AVM(全景监视)相机310b或360度相机。
例如，相机310可以在车辆内与前挡风玻璃相邻设置，用于获取车辆的前方图像。或者，相机310可以与前保险杠或散热器格栅相邻地设置。
例如，相机310可以在车辆内与后窗玻璃相邻地设置，用于获取车辆的后方图像。或者，相机310可以与后保险杠、行李箱或尾门相邻地设置。
例如，相机310可以在车辆内与侧窗玻璃中的至少一个相邻地设置，用于获取车辆的侧面图像。或者，相机310可以与外后视镜、挡泥板或车门相邻地设置。
相机310可以将所获取的图像提供到处理器370。
雷达320可以包括电波发送和接收部分。根据发送电波的原理，雷达320可以被实现为脉冲雷达或连续波雷达。根据连续波雷达方案当中的信号波形，雷达320可以按调频连续波(FMCW)方案或频移键控(FSK)方案来实现。
雷达320可以通过电波介质按飞行时间(TOF)方式或相移方式检测对象，并且检测所检测对象的位置、距所检测对象的距离和与所检测对象的相对速度。
雷达320可以设置在车辆外部的适宜位置处，用于检测位于车辆前方、后方或侧面的对象。
激光雷达330可以包括激光发送和接收部分。激光雷达330可以按飞行时间(TOF)方式或相移方式来实现。
激光雷达330可以被实现为驾驶型或非驾驶型。
对于驾驶型，激光雷达330可以在马达作用下旋转并且检测车辆100附近的对象。
对于非驾驶型，激光雷达330可以通过光转向来检测位于基于车辆100的预定范围内的对象。车辆100可以包括多个非驾驶型激光雷达330。
激光雷达330可以通过激光光学介质按飞行时间(TOF)方式或相移方式检测对象，并且检测所检测对象的位置、距所检测对象的距离和与所检测对象的相对速度。
激光雷达330可以设置在车辆外部的适宜位置处，用于检测位于车辆前方、后方或侧面的对象。
超声波传感器340可以包括超声波发送和接收部分。超声波传感器340可以基于超声波来检测对象，并且检测所检测对象的位置、距所检测对象的距离和与所检测对象的相对速度。
超声波传感器340可以设置在车辆外部的适宜位置处，用于检测位于车辆前方、后方或侧面的对象。
红外传感器350可以包括红外光发送和接收部分。红外传感器350可以基于红外光来检测对象，并且检测所检测对象的位置、距所检测对象的距离和与所检测对象的相对速度。
红外传感器350可以设置在车辆外部的适宜位置处，用于检测位于车辆前方、后方或侧面的对象。
处理器370可以控制对象检测设备300的每个单元的整体操作。
处理器370可以基于所获取图像来检测对象，并且跟踪该对象。处理器370可以通过图像处理算法来执行诸如计算与对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的电磁波被对象反射得到的反射电磁波来检测对象，并且跟踪该对象。处理器370可以基于电磁波来执行诸如计算与对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的激光束被对象反射得到的反射激光束来检测对象，并且跟踪该对象。处理器370可以基于激光束来执行诸如计算与对象的距离、计算与对象的相对速度等的操作。
处理器370可以基于所发射的超声波被对象反射得到的反射超声波来检测对象，并且跟踪该对象。处理器370可以基于超声波来执行诸如计算与对象的距离、计算与对象的相对速度等的操作。
处理器可以基于所发射的红外光被对象反射得到的反射红外光来检测对象，并且跟踪该对象。处理器370可以基于红外光来执行诸如计算与对象的距离、计算与对象的相对速度等的操作。
根据实施方式，对象检测设备300可以包括多个处理器370或者可以不包括任何处理器370。例如，相机310、雷达320、激光雷达330、超声波传感器340和红外传感器350中的每个都可以按独立方式包括处理器。
当处理器370不包括在对象检测设备300中时，对象检测设备300可以根据车辆100内设备的处理器或控制器170的控制进行操作。
对象检测设备300可以根据控制器170的控制进行操作。
通信设备400是用于与外部装置执行通信的设备。这里，外部装置可以是另一车辆、移动终端或服务器。通信设备400可以被称为“无线通信单元”。
通信设备400可以通过包括用于实现各种通信协议的发送天线、接收天线和射频(RF)电路和RF装置中的至少一种来执行通信。
通信设备400可以包括短距离通信单元410、位置信息单元420、V2X通信单元430、光学通信单元440、广播收发器450和处理器470。
根据实施方式，通信设备400还可以包括除了所描述的组件之外的其它组件，或者可以不包括所描述组件中的一些组件。
短距离通信单元410是促进短距离通信的单元。用于实现这种短距离通信的合适技术包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。
短距离通信单元410可以构建用于实现车辆100和至少一个外部装置之间的短距离通信的短距离区域网络。
位置信息单元420是用于获取位置信息的单元。例如，位置信息单元420可以包括全球定位系统(GPS)模块或差分全球定位系统(DGPS)模块。
V2X通信单元430是与服务器(车与设施(Vehicle to Infra)：V2I)、另一车辆(车与车(Vehicle to Vehicle)：V2V)或行人(车与行人(Vehicle to Pedestrian)：V2P)执行无线通信的单元。V2X通信单元430可以包括实现与设施的通信协议(V2I)、车辆之间的通信协议(V2V)和与行人的通信协议(V2P)的RF电路。
光学通信单元440是用于通过光介质与外部装置执行通信的单元。光学通信单元440可以包括用于将电信号转换成光学信号并且将光学信号发送到外部的发光二极管以及用于将接收到的光学信号转换成电信号的光电二极管。
根据实施方式，发光二极管可以与设置在车辆100上的灯集成。
广播收发器450是用于经由广播信道从外部广播管理实体接收广播信号或者向广播管理实体发送广播信号的单元。广播信道可以包括卫星信道、地面信道或这二者。广播信号可以包括TV广播信号、无线电广播信号和数据广播信号。
处理器470可以控制通信设备400的每个单元的整体操作。
根据实施方式，通信设备400可以包括多个处理器470或者可以不包括任何处理器470。
当通信设备400中不包括处理器470时，通信设备400可以根据车辆100内另一个装置的处理器或控制器170的控制进行操作。
此外，通信设备400可以与用户界面设备200一起实现车辆的显示设备。在这种情形下，车辆的显示设备可以被称为车载设备或音频视频导航(AVN)设备。
通信设备400可以根据控制器170的控制进行操作。
驾驶控制设备500是接收用于驾驶的用户输入的设备。
在手动模式下，车辆100可以基于驾驶控制设备500提供的信号进行操作。
驾驶控制设备500可以包括转向输入装置510、加速度输入装置530和制动输入装置570。
转向输入装置510可以从用户接收关于车辆100的行驶(前进)方向的输入。转向输入装置510优选地按照使得能够以旋转方式进行转向输入的方向盘的形式进行配置。根据一些实施方式，转向输入装置还可以被配置为触摸屏、触摸板或按钮的形状。
加速度输入装置530可以从用户接收使车辆100加速的输入。制动输入装置570可以从用户接收使车辆100制动的输入。加速度输入装置530和制动输入装置570中的每个优选地按照踏板的形式配置。根据一些实施方式，加速度输入装置或制动输入装置可以被配置为触摸屏、触摸板或按钮的形状。
驾驶控制设备500可以根据控制器170的控制进行操作。
车辆操作设备600是用于对车辆100内的各种装置进行电气控制的设备。
车辆操作设备600可以包括传动系操作单元610、底盘操作单元620、门/窗操作单元630、安全设备操作单元640、灯操作单元650和空调操作单元660。
根据一些实施方式，除了所描述的组件之外，车辆操作设备600还可以包括其它组件，或者可以不包括所描述组件中的一些。
此外，车辆操作设备600可以包括处理器。车辆操作设备600的每个单元可以独立地包括处理器。
传动系操作单元610可以控制传动系装置的操作。
传动系操作单元610可以包括动力源操作部分611和变速箱操作部分612。
动力源操作部分611可以对车辆100的动力源执行控制。
例如，在使用基于化石燃料的引擎作为动力源时，动力源操作部分611可以对引擎执行电子控制。因此，能够控制引擎的输出扭矩等。动力源操作部分611可以根据控制器170的控制来调节引擎输出扭矩。
例如，在使用基于电能的引擎作为动力源时，动力源操作部分611可以对马达执行控制。动力源操作部分611可以根据控制器170的控制来调节马达的旋转速度、扭矩等。
变速箱操作部分612可以对变速箱执行控制。
变速箱操作部分612可以调节变速箱的状态。变速箱操作部分612可以将变速箱的状态变为驾驶(前进)(D)、倒车(R)、空档(N)或停车(P)。
此外，当引擎是动力源时，变速箱操作部分612可以在驾驶(D)状态下调节齿轮的锁定状态。
底盘操作单元620可以控制底盘装置的操作。
底盘操作单元620可以包括转向操作部分621、制动操作部分622和悬架(suspension)操作部分623。
转向操作部分621可以对车辆100内的转向设备执行电子控制。转向操作部分621可以改变车辆的行驶方向。
制动操作部分622可以对车辆100内的制动设备执行电子控制。例如，制动操作部分622可以控制车轮处设置的制动器的操作，以降低车辆100的速度。
此外，制动操作部分622可以独立地控制多个制动器中的每个。制动操作部分622可以不同地控制施加到多个车轮中的每个的制动力。
悬架操作部分623可以对车辆100内的悬架设备执行电子控制。例如，悬架操作部分623可以控制悬架装置，以减小在道路上出现隆起物时车辆100的振动。
此外，悬架操作部分623可以独立地控制多个悬架中的每个。
门/窗操作单元630可以对车辆100内的门设备或窗设备执行电子控制。
门/窗操作单元630可以包括门操作部分631和窗操作部分632。
门操作部分631可以对门设备执行控制。门操作部分631可以控制车辆100的多个门的打开或关闭。门操作部分631可以控制行李箱或背门的打开或关闭。门操作部分631可以控制天窗的打开或关闭。
窗操作部分632可以对窗设备执行电子控制。窗操作部分632可以控制车辆100的多个窗的打开或关闭。
安全设备操作单元640可以对车辆100内的各种安全设备执行电子控制。
安全设备操作单元640可以包括气囊操作部分641、安全带操作部分642和行人保护设备操作部分643。
气囊操作部分641可以对车辆100内的气囊设备执行电子控制。例如，气囊操作部分641可以在检测到风险时控制气囊展开。
安全带操作部分642可以对车辆100内的安全带设备执行电子控制。例如，安全带操作部分642可以在检测到风险时使用安全带来控制乘客静止坐在座椅110FL、110FR、110RL、110RR中。
行人保护设备操作部分643可以对用于引擎罩把手和行人安全气囊执行电子控制。例如，行人保护设备操作部分643可以在检测到行人碰撞时控制引擎罩把手和行人安全气囊打开。
灯操作单元650可以对车辆100内的各种灯设备执行电子控制。
空调操作单元660可以对车辆100内的空调执行电子控制。例如，当车辆的内部温度高时，空调操作单元660可以控制空调向车内供应冷空气。
车辆操作设备600可以包括处理器。车辆操作设备600的每个单元可以独立地包括处理器。
车辆操作设备600可以根据控制器170的控制进行操作。
操作系统700是控制车辆100的各种驾驶模式的系统。操作系统700可以按自动驾驶模式进行操作。
操作系统700可以包括驾驶系统710、停车驶出系统(parking exit system)740和停车系统750。
根据实施方式，除了所描述的组件之外，操作系统700还可以包括其它组件，或者可以不包括所描述组件中的一些。
此外，操作系统700可以包括处理器。操作系统700的每个单元可以独立地包括处理器。
此外，根据实施方式，当操作系统实现为软件配置时，操作系统可以是控制器170的子概念。
此外，根据实施方式，操作系统700可以是包括用户界面设备200、对象检测设备300、通信设备400，车辆操作设备600和控制器170中的至少一个的概念。
驾驶系统710可以执行使车辆100行驶。
驾驶系统710可以从导航系统770接收导航信息，向车辆操作设备600发送控制信号，并且执行使车辆100行驶。
驾驶系统710可以从对象检测设备300接收对象信息，向车辆操作设备600发送控制信号，并且执行使车辆100行驶。
驾驶系统710可以通过通信设备400从外部装置接收信号，向车辆操作设备600发送控制信号，并且执行使车辆100行驶。
停车驶出系统740可以执行使车辆100从停车场驶出。
停车驶出系统740可以从导航系统770接收导航信息，向车辆操作设备600发送控制信号，并且执行使车辆100从停车场驶出。
停车驶出系统740可以从对象检测设备300接收对象信息，向车辆操作设备600发送控制信号，并且执行使车辆100从停车场驶出。
停车驶出系统740可以通过通信设备400从外部装置接收信号，向车辆操作设备600发送控制信号，并且执行使车辆100从停车场驶出。
停车系统750可以执行使车辆100停车。
停车系统750可以从导航系统770接收导航信息，向车辆操作设备600发送控制信号，并且使车辆100停车。
停车系统750可以从对象检测设备300接收对象信息，向车辆操作设备600发送控制信号，并且使车辆100停车。
停车系统750可以通过通信设备400从外部装置接收信号，向车辆操作设备600发送控制信号并且使车辆100停车。
导航系统770可以提供导航信息。导航信息可以包括地图信息、关于设定目的地的信息、根据设定目的地的路径信息、关于路径上各种对象的信息、车道信息和车辆当前位置信息中的至少一个。
导航系统770可以包括存储器和处理器。存储器可以存储导航信息。处理器可以控制导航系统770的操作。
根据实施方式，导航系统770可以通过利用通信设备400从外部装置接收信息来更新预先存储的信息。
根据实施方式，导航系统770可以被分类为用户界面设备200的子组件。
感测单元120可以感测车辆100的状态。感测单元120可以包括姿势传感器(例如，偏航传感器、侧倾传感器、俯仰传感器等)、碰撞传感器、车轮传感器、速度传感器、倾斜传感器、重量检测传感器、航向传感器、陀螺仪传感器、位置模块、车辆前进/后退移动传感器、电池传感器、燃料传感器、轮胎传感器、通过转动手柄的转向传感器、车辆内部温度传感器、车辆内部湿度传感器、超声波传感器、照度传感器、加速器位置传感器、制动踏板位置传感器等。
感测单元120可以获取相对于诸如姿势、碰撞、方向、位置(GPS信息)、角度、速度、加速度、倾斜度、前进/后退移动、电池、燃料、轮胎、灯、内部温度、内部湿度、方向盘的旋转角度、外部照明、施加到加速器的压力、施加到制动踏板的压力等的车辆相关信息的感测信号。
感测单元120还可以包括加速度传感器、压力传感器、引擎速度传感器、空气流量传感器(AFS)、空气温度传感器(ATS)、水温传感器(WTS)、节气门位置传感器(TPS)、TDC传感器、曲柄转角传感器(CAS)等。
接口单元130可以用作使得车辆100能够与连接到它的各种类型外部装置通过接口连接的路径。例如，接口单元130可以设置有能与移动终端连接的端口，并且通过该端口与移动终端连接。在这种情形下，接口单元130可以与移动终端交换数据。
此外，接口单元130可以用作用于向所连接的移动终端供应电能的路径。当移动终端与接口单元130电连接时，接口单元130可以根据控制器170的控制将从电源单元190供应的电能供应到移动终端。
存储器140电连接到控制器170。存储器140可以存储用于各单元的基础数据、用于控制各单元操作的控制数据和输入/输出数据。存储器140可以是硬件中的诸如ROM、RAM、EPROM、闪存驱动器、硬盘驱动器等的各种存储装置。存储器140可以存储诸如用于对控制器170进行处理或控制的程序的用于车辆100的整体操作的各种数据。
根据实施方式，存储器140可以与控制器170集成或者实现为控制器170的子组件。
控制器170可以控制车辆100的每个单元的整体操作。控制器170可以被称为电子控制单元(ECU)。
电源单元190可以根据控制器170的控制来供应操作每个组件所需的电力。具体地，电源单元190可以接收从车辆的内部电池等供应的电力。
包括在车辆100中的至少一个处理器和控制器170可以使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器和执行其它功能的电气单元中的至少一个来实现。
下文中，将详细描述设置在车辆100中的车辆控制装置800。
车辆控制装置800可以设置在车辆100中，并且配置有独立装置，该独立装置能从车辆100拆卸或者一体安装在车辆100中作为车辆100的局部组件。
下文中，为了便于说明，车辆控制装置800将被描述为与车辆100的控制器170分离的组件。然而，这仅仅是本公开的实施方式，并且本说明书中描述的所有显示装置800的操作和控制方法可以由车辆100的控制器170来执行。换句话讲，车辆控制装置800的处理器830所执行的操作和/或控制方法可以由车辆800的控制器170执行。
图8是用于说明根据本公开的实施方式的车辆控制装置的概念图。
参照图8，车辆控制装置800包括通信单元810和处理器830。
通信单元810被配置成与图7中描述的各种组件执行通信。例如，通信单元810可以接收通过控制器局域网(CAN)提供的各种信息。在另一示例中，通信单元810可以与诸如车辆、移动终端和服务器这样的所有可通信装置和另一车辆执行通信。这可以被称为V2X(车对一切)通信。V2X通信可以被定义为在驾驶时与道路基础设施和其它车辆通信的同时交换或共享诸如交通状况这样的信息的技术。
通信单元810被配置成与车辆100中设置的一个或更多个显示器执行通信。
此外，通信单元810可以从设置在车辆100中的大多数装置接收与车辆驾驶相关的信息。从车辆100发送到显示装置800的信息被称为“车辆驾驶信息”。
车辆驾驶信息包括车辆信息和车辆的周围信息。与相对于车辆100的车身的车辆内部相关的信息可以被定义为车辆信息，并且与车辆外部相关的信息可以被定义为周围信息。
车辆信息表示车辆本身的信息。例如，车辆信息可以包括驾驶速度、驾驶方向、加速度、角速度、位置(GPS)、车辆重量、车辆乘客的数目、车辆的制动力、车辆的最大制动力、每个车轮的气压、施加到车辆的离心力、车辆的驾驶模式(是自动驾驶模式还是手动驾驶模式)、车辆的停车模式(自主停车模式、自动停车模式、手动停车模式)、用户是否上车、与用户相关的信息等中的至少一个。
周围信息表示与位于车辆周围的预定范围内的另一对象相关的信息和与车辆外部相关的信息。例如，周围信息可以是在车辆正在行驶时的道路表面的状态(摩擦力)、天气、与前方(或后方)车辆的距离、前方(或后方)车辆的相对速度、当车辆正在行驶的车道弯曲时弯道的曲率、车辆周围的亮度、与基于车辆的参考区域(预定区域)中存在的对象相关的信息、对象是进入还是离开预定区域、车辆周围是否存在用户、与用户相关的信息(例如，用户是否是经认证的用户等)。
另外，周围信息包括环境亮度、温度、太阳的位置、与位于附近的对象(人、另一车辆、标志等)相关的信息、行驶路面的类型、地标、标线信息、驾驶车道信息以及自主驾驶/自主停车/自动停车/手动停车模式所需的信息中的至少一个。
此外，周围信息还可以包括从车辆周围存在的对象到车辆100的距离、碰撞的可能性、对象的类型、车辆的停车位、标识停车位的对象(例如，停车标线、绳子、另一车辆、墙壁等)等。
车辆驾驶信息不限于上述示例，并且可以包括用设置在车辆100中的组件生成的所有信息。
此外，处理器830被配置成使用通信单元810来控制设置在车辆100中的一个或更多个显示器。
具体地，处理器830可以基于通过通信单元810接收到的车辆驾驶信息来确定是否满足预先设置的多个条件中的至少一个。取决于满足的条件，处理器830可以按不同方式来控制一个或更多个显示器。
关于预设条件，处理器830可以感测车辆100中设置的电气产品和/或应用中的事件的发生，并且确定感测到的事件是否满足预设条件。此时，处理器830还可以用通过通信单元810接收的信息感测事件的发生。
应用是包括窗口小部件、主启动器(home launcher)等的概念，并且涉及可以在终端上运行的所有类型的程序。因此，应用可以是执行网页浏览器、视频回放、消息发送/接收、日程安排管理和应用更新的功能的程序。
此外，应用可以包括前方碰撞警告(FCW)、盲点检测(BSD)、车道偏离警告(LDW)、行人检测(PD)、弯道速度警告(CSW)和路线规划导航(TBT)中的至少一个。
例如，事件的发生可以包括存在未接电话时、要更新应用时、消息到达时、启动、出发、自动行驶开/关、LCD唤醒键、警报、来电、未接通知等。
又如，事件的发生可以是由高级驾驶员辅助系统(ADAS)设置的警报的发生、在ADAS中设置的功能被执行时等。例如，当发生前方碰撞警告、发生盲点检测、发生车道偏离警报、发生车道保持辅助警告时以及执行自动紧急制动功能时，可以认为发生了事件。
再如，当从前进档变成倒车档时，当产生大于预定值的加速度时，当产生大于预定值的减速度时，当动力装置从内燃机变成马达时，或者当动力装置从马达变成内燃机时，可以认为发生了事件。
另外，当车辆100中设置的各种ECU执行特定功能时，可以认为发生了事件。
当所产生的事件满足预设条件时，处理器830控制通信单元810在一个或更多个显示器上显示与所满足的条件对应的信息。
下文中，将参照附图来更详细地描述车辆控制装置800的操作。
图9是用于说明图8中的车辆控制装置的控制方法的流程图，图10A和图10B是用于说明图9中的控制方法的示例性图。
首先，处理器830感测预设事件的发生(S910)。
处理器830可以基于通过通信单元810接收的车辆驾驶信息来感测预设事件的发生。具体地，当设置在车辆上的传感器感测到有乘客登乘时，感测到的信息可以通过通信单元810发送到车辆控制装置800。处理器830可以基于感测到的信息来确定是否产生了预设事件。
预设事件表示被设置为向车上乘客授予使用车辆所需的权限的条件。
例如，预设事件可以包括以下事件中的至少一个：当乘客正登上车辆时，当乘客坐在车辆的座位上时，当启动命令被输入车辆时，当乘客说话时，当更换了驾驶员时以及当乘客输入用于请求执行预设功能的用户输入时。又如，每当车辆进入预设位置时或者在每个预设时间，可以确定发生预设事件。
预设事件可以在车辆控制装置装运时被预先设置，或者在装运后经由互联网进行更新。
当发生预设事件时，处理器830输出用于引发登上车辆100的乘客说话的消息(S930)。
处理器830控制通信单元810以听觉方式和视觉方式中的至少一种输出消息。该消息在以听觉方式输出时通过音频输出模块252输出，并且在以视觉方式输出时通过显示单元251输出。
该消息被预设，以便引发登上车辆100的乘客说话，并且用语言表示预定的信息。
处理器830可以使用语音识别服务来执行虚拟助理的角色。
虚拟助理是包括用于识别语音、文本、图像等的接口和用于处理所获得数据的脑部的人工智能平台。脑部分析与诸如自然语言处理、搜索等引擎结合的界面处察觉的情形，并且呈现结果。
该消息允许乘客自然地与由自然语言组成的虚拟助理进行交互。此外，该消息可以由乘客必须对其进行回答的问句组成。
存储器140可以存储在发生预设事件时要输出的多个消息。此外，处理器830可以使用深度学习来生成未存储在存储器140中的消息，或者更新或删除存储在存储器140中的消息。
预设事件所输出的消息的内容可根据所产生事件而有所不同。具体地，当第一事件发生时可以输出第一消息，并且当第二事件发生时可以输出第二消息。
另外，构成该消息的语言的类型可以根据乘客而有所不同。具体地，处理器830可以选择消息中的任一条，基于乘客将所选择的消息翻译成特定语言，并且输出翻译后的消息。
例如，如图10A中例示的，当第一乘客登上车辆时，可以输出诸如“山姆，你的帽子真棒！”的第一消息，或者如图10B中例示的，当第二乘客登上车辆时，可以输出诸如“你今天怎么样？”的第二消息。
当乘客登上车辆时，处理器830可以从拍摄车辆100内部的相机接收图像，并且分析接收到的图像，以分析乘客的特征。另外，处理器830可以基于经分析的特征来选择存储在存储器中的多个消息中的至少一个，并且输出所选择的消息。
可以通过诸如设置在座位中的重量传感器感测到的重量信息、指纹识别、虹膜识别和面部识别的各种算法来分析乘客的特征。
接下来，接收乘客对消息的响应(S950)。
处理器830可以通过语音输入模块211接收乘客对消息的响应。可以在消息输出完成之后对时间段进行计时，并且当在预定时间段内没有接收到乘客的响应时，可以再次输出先前输出的消息或者可以输出新消息。
在接收到乘客的响应以前，可以限制车辆的功能执行。例如，当乘客输入用于设置目的地的用户输入以便接收路线引导信息时，可以输出该消息。尽管用户进行了输入，但是可以保持目的地设置，而不再进行目的地设置，直到产生对消息的响应为止。
当接收到乘客对消息的响应时，处理器830识别乘客并且基于所识别的乘客来执行不同功能(S970)。
通过通信单元810从语音输入模块211接收乘客的响应。乘客的响应可以包括自然语言，并且处理器830可以使用语音识别功能从自然语言中提取声音的特征，并且基于所提取的特征来识别乘客。例如，可以从乘客的响应中提取音高、响度、持续时间和音色中的至少一个。
处理器830可以确定所识别的乘客是否对应于先前存储的用户，并且相应地执行不同的功能。
例如，如图10A中例示的，处理器830可以接收对第一消息的第一响应中的“我是希拉里”。处理器830可以根据第一响应中将登上车辆100的乘客识别为“希拉里”。由于“希拉里”对应于已经存储的用户，因此处理器830用“希拉里”执行登录，并且控制通信单元810，以显示被设置用于“希拉里”的主画面页面。
相反，如图10B中例示的，处理器830可以接收对第二消息的第二响应中的“不太好”。处理器830可以根据第二响应确定登上车辆100的乘客是不可识别(或匿名)的人。换句话讲，可以确定用户与先前存储的用户不对应。在这种情况下，处理器830可以通过功能的有限执行来执行锁定状态，以防止存储在车辆100中的个人信息或应用被匿名人员共享。在锁定状态下，显示单元251可以显示被配置成接收密码的锁定画面。
将参照图11来详细描述不同功能。
图11是用于说明根据语音识别所识别的乘客的车辆控制装置的操作的概念图。
如图11中例示的，当驾驶员启动车辆时，可以调用虚拟助理。虚拟助理可以选择至少一个消息来认证驾驶员，并且输出所选择的消息。当接收到对该消息的响应时，识别乘客，并且根据所识别的乘客来执行不同功能。
例如，当驾驶员登上车辆时，虚拟助理可以调用先前存储的用户名字，或者输出引发驾驶员的语音反馈的诸如“请说出你的名字”的消息。
需要用智能钥匙来启动车辆100。智能钥匙指的是与车辆100执行双向通信的装置，并且用户可以通过仅拥有智能钥匙来解锁车辆，并且启动车辆。
用户的信息可以被存储在智能钥匙中。通过与智能钥匙通信，处理器830可以确定所识别的乘客是否与存储在智能钥匙中的用户对应。
当用户与存储在智能钥匙中的用户对应时，处理器830可以启动所识别乘客可用于车辆的所有功能。
尽管没有被存储在智能钥匙中，但是关于经授权为车辆100的驾驶员的人员的信息可以被存储在车辆的存储器140中。
例如，只有丈夫的信息被存储在智能钥匙中，并且丈夫的信息和妻子的信息可以被存储在车辆的存储器140中。当妻子在握住智能钥匙的同时启动车辆时，处理器可以基于妻子的信息确定妻子经授权为驾驶员。
当乘客与存储在存储器140中的用户对应时，处理器830可以作为用户执行登录，并且提供设置用于用户的用户界面。
具体地，处理器830可以根据所识别乘客的特征来授予不同的权限。可执行应用的数目可以根据所授予权限而有所不同。
例如，当丈夫启动车辆时，系统用丈夫的ID登录，并且可以提供丈夫所设置的第一主画面页面。此时，可以由车辆控制装置800只执行由丈夫设置或安装的应用。相反，当妻子启动车辆时，系统用妻子的ID登录，并且可以提供妻子所设置的第二主画面页面。
根据所识别乘客来输出第一主画面页面和第二主画面页面中的任一个，其中，包括在第一主画面页面中的图标和包括在第二主画面页面中的图标是不同的。这是因为，根据所识别乘客授予了不同的权限。
另一方面，所识别乘客可以对应于匿名者，或者可能在从输出消息的时间起预定时间内没有通过语音输入单元接收到乘客的响应。
在这种情况下，可以限制车辆被启动，限制对存储在存储器140中的个人信息的访问，限制至少一个应用的执行或者执行切换到需要在解锁状态下输入密码的锁定状态。
另外，处理器830可以控制通信单元810向预先存储的用户终端发送通知消息。由于车辆100可能是被盗车辆，所以可以将通知消息发送到预先存储的用户终端，由此尽可能快地将车辆100的状态通知给预先存储的用户。预先存储的用户可以使用通知消息来确认车辆100的状态。
终端可以提供能够输出通知消息以及确定是否释放车辆100的锁定状态的用户界面。终端可以基于用户输入来生成用于车辆100的解锁命令。
响应于从终端接收到解锁命令，处理器830可以将车辆100的锁定状态切换成解锁状态。并非预先存储用户的乘客可以根据预先存储用户的许可来使用车辆100。
如上所述，即使乘客自然地与虚拟助理通信而无需处理附加的认证过程，乘客也可以执行登录到车辆100的系统并且接收为他自己或她自己自定义的用户界面。
即使当未经授权操作车辆的人拥有智能钥匙时，车辆控制装置800也可以限制功能执行。换句话讲，由于通过语音识别来确定用户是否具有真正的权限，因此车辆的安全性可以提升一级。
此外，根据本公开的车辆控制装置800的处理器830可以在所识别的乘客与预先存储的用户不对应时根据车辆100的状态来执行不同的功能。
图12是用于说明当所识别的乘客与预设用户不对应时的控制方法的流程图。
在图12中例示了根据所识别的乘客是否对应于预设用户来执行不同功能的方法。
当乘客对应于预设用户时，授予预设权限(S1210)。例如，当第一用户和第二用户被存储在存储器140中时，可以向第一用户授予第一权利并且可以向第二用户授予第二权利。如果自定义的权限未被单独存储，则可以授予设置为默认选项的权限。可以通过用户输入来添加、更新或删除预定用户的预定权限。
当乘客不对应于预定用户时，可以根据车辆100的启动是否打开来执行不同的功能。
首先，将描述车辆熄火的情况。
当所识别的乘客不对应于预先存储用户并且车辆的启动未打开时，即使在输入了启动命令时，处理器830也控制车辆100不开启车辆的启动(S1230)。换句话说，车辆启动基本上被阻止。
然而，由于在语音识别功能中可能存在错误，因此处理器830在控制车辆100不开启车辆100的启动的同时，控制通信单元830在显示单元251上显示被设置用于接收密码的锁定画面(S1232)。
即使在车辆未启动时，处理器830也可以控制电源单元190向声音输入模块211、音频输出模块252和显示模块251供应电力。
为了高效使用电力，处理器830可以控制通信单元基于乘客的登乘位置来选择设置在车辆100中的多个显示器中的至少一个，并且只针对所选择的显示器来显示锁定画面。未选择的剩余显示器将保持打开状态。
即使当车辆启动时，也可以基于从乘客接收到的响应来识别乘客。即使在车辆启动时，只要产生了预设事件，也可以使用语音识别来执行乘客识别过程。
处理器830可以将车辆切换成锁定状态，使得当所识别的乘客不对应于预先存储用户并且开启车辆的启动时，也不执行安装在车辆中的应用中的至少一个(S1250)。
当车辆启动所有功能都受到限制时，可能发生事故。因此，处理器830可以限制某些预设功能。
例如，可以将“家”或“公司”设置为导航功能的常用目的地。由于目的地与个人信息对应，因此即使当执行导航功能时，也不执行将目的地设置为“家”或者将目的地设置为“公司”的功能。
此外，处理器830可以控制通信单元830，使得车辆100的速度变成低于锁定状态下的参考速度，由此防止车辆100被盗和被操作。例如，参考速度可以被设置成大约30km/h(30km/h比人的跑动速度慢)，使得车辆100不能逃离。
当允许车辆100执行自动驾驶时，处理器830可以控制通信单元810，以允许车辆100在锁定状态下执行通向预定目的地的自动驾驶，并且基于到达预定目的地而关闭车辆100的启动。预定目的地可以是警察局或基于车辆100的位置车辆100能够停放的最接近的地点。
在执行自动驾驶时，驾驶员对加速器踏板或方向盘的操作可以被忽略。换句话讲，虽然制动器进行操作，但是不执行改变转向方向或执行加速的操作。
由于即使乘客不是预设用户也根据车辆100的状态来执行不同的功能，因此优先确保登上车辆100的乘客的安全。
图13是用于说明输出附加消息以搜索预设用户的操作的示例性图。
当车辆100的预设用户受到饮酒影响时，用户不能操作车辆100。在这种情况下，预设用户可以呼叫代驾代表他/她进行驾驶。代驾可能是个问题，因为他或她不是预设用户。
车辆100可以被匿名者登乘。处理器830可以选择消息“你是谁？”并且输出该消息。
匿名者可以对消息作出响应“我是代驾”。处理器830可以对该响应执行语音识别，以确定该匿名用户不对应于预设用户。
在这种情况下，处理器830可以控制通信单元810以听觉方式或视觉方式中的至少一种输出用于引发先前存储的用户说话的附加消息。
附加消息可以包括关于预先存储用户的信息。例如，如图14中例示的，先前存储用户的名字可以被包括在附加消息中。由于附加消息指定了要被认证的用户，因此它可以引发指定用户说话。
当预设用户对附加消息进行响应时，车辆100可以将车辆的锁定状态切换成解锁状态或者授予操作车辆100的权限。
再次参照图9，处理器830基于乘客的响应来识别乘客，并且基于所识别的乘客来执行不同功能。
到目前为止，已经描述了以下的实施方式：向乘客授予具有不同功能的不同的权限。
不同功能的另一个示例可以是执行包括在乘客响应中的预定命令。换句话讲，可以响应于乘客的响应来提供虚拟助理的各种功能。将参照以下附图来详细描述虚拟助理所提供的各种语音识别服务。
图14是用于说明当多名乘客登乘时的控制方法的概念图和流程图，图15、图16A和图16B是用于说明图14中的控制方法的示例性图。
响应于该消息，可以在预定时间段内通过语音输入模块211接收第一乘客的第一响应和第二乘客的第二响应(S1410)。换句话讲，多名乘客可以登上车辆100，并且每个乘客可以执行不同的响应。
例如，如图15中例示的，处理器830可以输出诸如“你想要去哪里？”的消息。第一乘客执行第一响应“我们回家吧”，第二乘客可以执行第二响应“我们去超市吧”。
处理器830可以基于第一响应来识别第一乘客，并且基于第二响应来识别第二乘客。
当第一乘客和第二乘客都不是预设用户时，执行图12中描述的以上操作。
当第一乘客是匿名者而第二乘客是预设用户时，可以不执行与包括在第一响应中的语音命令对应的第一功能，而可以执行与包括在第二响应中的语音命令对应的第二功能。例如，通过第一响应，将车辆100的目的地设置成“超市”，而不是“家”。
当第一乘客和第二乘客二者都是预设用户时，处理器830可以向第一乘客授予第一权利并且向第二乘客授予第二权利(S1430)。
当第一乘客和第二乘客输入冲突的语音命令时，可以通过授予每名乘客的权限来确定优先级。例如，当第一乘客输入第一命令以提高车辆100的速度并且第二乘客输入第二命令以降低车辆100的速度时，可以根据授予每名乘客的权限只执行与任一命令对应的功能。另选地，可以根据授予每名乘客的权限来改变与第一命令和第二命令对应的功能的执行次序。
例如，如图16中例示的，当第一乘客坐在驾驶员座位上而第二乘客坐在乘客座位上时，可以向坐在驾驶员座位中的第一乘客授予较高级别的权限，并且可以向坐在乘客座位中的第二乘客授予较低级别的权限。因此，车辆100的目的地可以被设置成“家”而非“超市”。
接下来，处理器830可以执行针对第一乘客的第一语音识别服务和针对第二乘客的第二语音识别服务(S1450)。
这里，语音识别服务可以表示虚拟助理。更具体地，语音识别服务可以被定义为用于通过具有预定音调的虚拟助理向特定乘客用语音提供各种信息，对特定乘客的语音命令进行响应并且与特定乘客执行通信的服务。
可以从与第一乘客占据的位置对应的第一音频输出模块输出第一语音识别服务所提供的消息，并且可以从与第二乘客占据的位置对应的第二音频输出模块输出第二语音识别服务所提供的消息。由于不同的信息不是从一个扬声器同时输出的而是被独立输出到与相应乘客对应的扬声器，因此多名乘客可以准确地收听提供给他们的信息。
此外，处理器830可以控制通信单元810用第一音调输出第一语音识别服务所提供的消息，并且用第二音调输出第二语音识别服务所提供的消息。由于针对第一乘客的第一信息和针对第二乘客的第二信息是用不同音调输出的，因此多名乘客可以更准确地收听提供给他们的信息。
例如，如图15中例示的，处理器830可以基于授予第一乘客和第二乘客的权利而将目的地设置成“家”而非“超市”。由于针对第一乘客的第一语音识别服务和针对第二乘客的第二语音识别服务是同时执行的，因此可以从不同的音频输出模块输出不同的消息。具体地，可以用来自与驾驶员座位相邻设置的第一音频输出模块的女性语音来输出第一消息“我要回家”，并且可以用来自与副驾驶座位相邻设置的第二音频输出模块的男性语音来输出第二消息“下次再去超市。我要回家”。
第一乘客可以与第一语音识别服务执行通信，并且第二乘客可以与第二语音识别服务执行通信。
近年来，随着人工智能技术的涌现，已经开发出能够通过自然语言执行通信的各种语音识别服务。例如，LG、Apple、Google、Amazon、Microsoft、Samsung、SK和Naver分别了提供诸如q语音、siri、assistant、alexa、cortana、bixby、nugu和clova的语音识别服务。
车辆100可以配备有上述语音识别服务当中的至少两个语音识别服务。此外，存储在存储器140中的用户可以设置要由他自己或她自己使用的特定语音识别服务。换句话讲，语音识别服务的类型可以是自定义的。
利用该自定义，处理器830可以基于所识别的乘客来选择性执行多个语音识别服务中的任一个。换句话讲，提供给第一乘客的第一语音识别服务和提供给第二乘客的第二语音识别服务可以是不同类型的语音服务。
另一方面，可以根据为每名乘客设置的权限来执行不同的功能。
当在被授予第一权限的第一乘客和被授予第二权限的第二乘客登上车辆时第二乘客请求超出第二权限的功能时，处理器830可以控制通信单元810输出用于引导第二位乘客请求的引导消息。
驾驶员可以被授予无限的权限。例如，如图16A中例示的，当与驾驶员对应的第一乘客输入用于请求目的地改变的语音命令时，处理器830可以响应于该语音命令而立即改变车辆100的目的地。
相反，对不是驾驶员的人进行限制，不允许他们执行只允许驾驶员执行的功能。例如，允许驾驶员执行而不允许乘客执行诸如前照灯开/关、启动/关闭、目的地改变、速度控制和制动控制的功能。
例如，如图16B中例示的，当不是驾驶员的第二乘客输入用于请求目的地改变的语音命令时，处理器830限制执行与语音命令对应的功能。换句话讲，语音命令可以被忽略。
然而，处理器830可以输出用于引导第二乘客的请求的引导消息，由此引导第一乘客获得第二乘客的请求。例如，如图16B中例示的，可以通过第一语言识别服务从第一音频输出模块输出消息“你想改道去超市吗？”。
处理器830可以基于是否通过语音输入模块211接收到第一乘客对引导消息的响应消息来确定是否执行超出第二权利的功能。例如，当第一乘客批准了超出第二权利的功能时执行该功能，但是当第一乘客拒绝了超出第二权利的功能时不执行该功能。
另一方面，当乘客的年龄小于参考年龄时，可以向相关乘客授予儿童的权利。例如，当授予儿童的权利时，可以限制执行设置儿童锁的功能(诸如，打开或关闭车辆100的车门的功能或调节扬声器音量的功能)。
根据乘客和/或乘客就座的座位的特征，授予乘客的权限会有所不同。
图17是用于说明提供语音识别服务的方法的概念图。
当输入语音命令的乘客被识别为比参考年龄小的孩子时，授予儿童的权利。因此，可以限制执行儿童输入的语音命令，但是处理器830可以向有权限的人(或驾驶员)输出检验是否要执行功能的引导消息。
当输入语音命令的乘客是成年人但不是预先存储的用户时，在登上车辆100的乘客中的至少一名是预先存储的用户时，可以执行与语音命令对应的功能。预先存储的用户可以随时终止该功能的执行。
图18是用于说明当感测到驾驶员的异常状态时的控制方法的概念图。
当驾驶员输入语音命令时，处理器830可以通过分析声学特性来分析困倦、饮酒或健康状态。
此外，当估计驾驶员的健康状况有问题时，处理器830可以询问能确定驾驶员状况的问题。当通过语音输入模块211接收到对该问题的回答时，可以分析接收到的回答，以分析驾驶员的健康状态。
此时，从拍摄车辆100内部的相机接收到的图像也可以用于分析驾驶员的状况。
当确定驾驶员的健康状况有问题时，处理器830可以撤回驾驶员对车辆100的控制。更具体地，处理器830对车辆100执行自动驾驶，并且忽略驾驶员的操作输入。
此外，处理器830可以将呼叫连接至预设联系人，并且允许第三方获得对车辆100的控制。另选地，处理器830可以通知预设服务器在车辆100中发生了紧急情况。
图19是用于说明当在预定时间段内接收到多条语音命令时的控制方法的概念图。
可以几乎同时向一个语音识别服务输入多条语音命令。例如，第一乘客可以输入第一语音命令，同时第二乘客可以输入第二语音命令。在这种情况下，处理器830可以顺序地执行首先输入的语音命令中的多条语音命令。
当在根据第一乘客的第一语音命令执行第一功能的同时接收到第二乘客的第二语音命令时，处理器830可以在完成第一功能的执行之后根据第二语音命令执行第二功能。另选地，处理器830可以同时执行第一功能和第二功能，并且通过不同的音频输出模块来同时输出与第一功能和第二功能中的每个有关的信息。
另一方面，本公开可以扩展到具有参照图8至图19描述的车辆控制装置800的车辆100。
以上的本公开可以在用程序编写的介质上被实现为计算机可读的代码(或应用或软件)。可以通过存储在存储器等中的代码来实现自动驾驶车辆的以上控制方法。
计算机可读介质包括所有类型的记录装置，计算机系统可读取的数据可被存储在这些记录装置中。计算机可读介质的示例可以包括ROM、RAM、CD-ROM、磁带、软盘和光学数据存储装置等，并且还包括以载波形式(例如，通过互联网传输)实现的装置。另外，计算机可以包括移动终端的控制器。以上实施方式仅仅是示例，将不被视为限制本公开。应当通过对所附权利要求的合理解释来确定本发明的范围，并且落入本发明的等同范围内的所有改变都被包括在本发明的范围内。

Claims (18)

1.一种用于车辆的车辆控制装置，该车辆控制装置包括：
通信单元，所述通信单元被配置成与语音输入单元以及所述车辆的音频输出单元、触觉输出单元或显示器中的至少一个进行通信，所述语音输入单元包括至少一个麦克风；
至少一个处理器；以及
计算机可读介质，所述计算机可读介质联接到已经存储有指令的所述至少一个处理器，当所述至少一个处理器执行所述指令时，致使所述至少一个处理器执行以下操作：
确定已经发生预设事件；
基于确定已经发生所述预设事件，指示所述通信单元输出被配置成提示来自所述车辆的第一乘客的第一声音响应的消息，所述消息是视觉类型、听觉类型或触觉类型中的至少一种；
通过所述语音输入单元从所述车辆的所述第一乘客接收所述第一声音响应；
响应于接收到所述第一声音响应，确定所述第一乘客的身份；以及
根据所述第一乘客的身份来执行与所述车辆关联的功能，
其中，所述操作包括：
通过所述语音输入单元从所述车辆的第二乘客接收第二声音响应；
响应于接收到所述第二声音响应，确定所述第二乘客的身份；
基于所述第一乘客的身份，执行与所述第一乘客关联的第一语音识别服务；以及
基于所述第二乘客的身份，执行与所述第二乘客关联的第二语音识别服务，
其中，所述操作包括：
确定所述音频输出单元的与所述第一乘客的位置对应的第一扬声器；
通过所述第一语音识别服务来确定针对所述第一乘客的第一听觉消息；
指示所述通信单元通过所述第一扬声器输出所述第一听觉消息；
确定所述音频输出单元的与所述第二乘客的位置对应的第二扬声器；
通过所述第二语音识别服务来确定针对所述第二乘客的第二听觉消息；
指示所述通信单元通过所述第二扬声器输出所述第二听觉消息；
确定在所述第二乘客的权限下不允许所述第二乘客请求执行的功能；以及
基于确定在所述第二乘客的权限下不允许所述第二乘客请求的功能，指示所述通信单元通过所述第一扬声器输出请求所述第一乘客批准执行所述功能的引导消息。
2.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
通过所述第一语音识别服务来确定针对所述第一乘客的第一听觉消息；
指示所述通信单元用第一音调输出所述第一听觉消息；
通过所述第二语音识别服务来确定针对所述第二乘客的第二听觉消息；以及
指示所述通信单元用与所述第一音调不同的第二音调来输出所述第二听觉消息。
3.根据权利要求1所述的车辆控制装置，其中，所述第一语音识别服务和所述第二语音识别服务是不同类型的语音识别服务。
4.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
基于所确定的所述第一乘客的身份，从多个语音识别服务中选择与所述第一乘客关联的第一语音识别服务；以及
基于所述选择，执行与所述第一乘客关联的所述第一语音识别服务。
5.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
确定与所述第一乘客关联的一个或更多个特征；
根据与所述第一乘客关联的所述一个或更多个特征来确定所述第一乘客执行安装在所述车辆上的应用的权限；以及
根据所确定的所述第一乘客的权限，允许所述第一乘客执行安装在所述车辆上的应用。
6.根据权利要求5所述的车辆控制装置，其中，所述操作包括：
通过所述语音输入单元从所述车辆的第二乘客接收第二声音响应，所述第二声音响应包括用于执行功能的请求；
确定与所述第二乘客关联的一个或更多个特征；
根据与所述第二乘客关联的所述一个或更多个特征来确定所述第二乘客执行安装在所述车辆上的应用的权限。
7.根据权利要求6所述的车辆控制装置，其中，所述操作包括：
通过所述语音输入单元从所述第一乘客接收批准执行所述第二乘客所请求的功能的第三声音响应；以及
响应于从所述第一乘客接收到批准执行所述第二乘客所请求的功能的第三声音响应，执行所述第二乘客所请求的功能。
8.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
确定所述第一乘客的身份与所述车辆的所存储用户不匹配；
确定所述车辆的状态；以及
基于确定所述第一乘客的身份与所述车辆的所存储用户不匹配，根据所述车辆的状态来防止执行与所述车辆关联的功能。
9.根据权利要求8所述的车辆控制装置，其中，防止执行功能的操作包括：
接收启动所述车辆的启动命令；以及
防止所述车辆启动。
10.根据权利要求9所述的车辆控制装置，其中，所述操作包括：
指示所述通信单元通过所述显示器来输出被配置成接收用于允许所述车辆启动的密码的锁定画面。
11.根据权利要求10所述的车辆控制装置，其中，指示所述通信单元输出被配置成接收密码的锁定画面的操作包括：
确定所述第一乘客占据的第一座位；以及
指示所述通信单元只在与第一乘客所占据的第一座位对应的第一显示器上输出所述锁定画面。
12.根据权利要求8所述的车辆控制装置，其中，防止执行功能的操作包括：
确定所述车辆正在运行；以及
基于确定所述车辆正在运行，将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态。
13.根据权利要求12所述的车辆控制装置，其中，所述操作包括：
确定所述车辆处于所述锁定状态下；以及
基于确定所述车辆处于所述锁定状态下，指示所述通信单元输出被配置为提示来自所存储用户的第四声音响应的附加消息，所述附加消息是所述视觉类型或所述听觉类型中的一种。
14.根据权利要求12所述的车辆控制装置，其中，所述操作包括：
确定所述车辆处于所述锁定状态下；以及
基于确定所述车辆处于所述锁定状态下，将所述车辆的速度限制为参考速度。
15.根据权利要求12所述的车辆控制装置，其中，所述操作包括：
确定所述车辆处于所述锁定状态下；
基于确定所述车辆处于所述锁定状态下，允许所述车辆自动驾驶到预定目的地；
确定所述车辆通过所述自动驾驶已经到达所述预定目的地；以及
基于确定所述车辆通过所述自动驾驶已经到达所述预定目的地，去除所述车辆的动力。
16.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
确定所述第一乘客的身份与所述车辆的所存储用户不匹配；以及
基于确定所述第一乘客的身份与所述车辆的所存储用户不匹配，
将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态，并且
指示所述通信单元向所述所存储用户的终端发送通知消息。
17.根据权利要求16所述的车辆控制装置，其中，所述操作包括：
通过所述通信单元从所述所存储用户的终端接收解锁命令；以及
响应于接收到所述解锁命令，将所述车辆的状态切换成解锁状态。
18.根据权利要求1所述的车辆控制装置，其中，所述操作包括：
确定在从输出被配置为提示所述第一声音响应的消息起预定时间段内还未接收到来自所述第一乘客的所述第一声音响应；以及
基于确定在预定时间段内还未接收到来自所述第一乘客的所述第一声音响应，将所述车辆的状态切换成被配置为限制执行安装在所述车辆上的至少一个应用的锁定状态。
CN201810926662.XA 2017-09-25 2018-08-15 车辆控制装置和包括该车辆控制装置的车辆 Active CN109572702B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170123685A KR101930462B1 (ko) 2017-09-25 2017-09-25 차량 제어 장치 및 그것을 포함하는 차량
KR10-2017-0123685 2017-09-25

Publications (2)

Publication Number Publication Date
CN109572702A CN109572702A (zh) 2019-04-05
CN109572702B true CN109572702B (zh) 2021-10-22

Family

ID=63524162

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810926662.XA Active CN109572702B (zh) 2017-09-25 2018-08-15 车辆控制装置和包括该车辆控制装置的车辆

Country Status (4)

Country Link
US (1) US10598504B2 (zh)
EP (1) EP3470276B1 (zh)
KR (1) KR101930462B1 (zh)
CN (1) CN109572702B (zh)

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11283877B2 (en) * 2015-11-04 2022-03-22 Zoox, Inc. Software application and logic to modify configuration of an autonomous vehicle
WO2017079341A2 (en) 2015-11-04 2017-05-11 Zoox, Inc. Automated extraction of semantic information to enhance incremental mapping modifications for robotic vehicles
US9606539B1 (en) 2015-11-04 2017-03-28 Zoox, Inc. Autonomous vehicle fleet service and system
US10401852B2 (en) 2015-11-04 2019-09-03 Zoox, Inc. Teleoperation system and method for trajectory modification of autonomous vehicles
JP6965783B2 (ja) * 2018-02-13 2021-11-10 トヨタ自動車株式会社 音声提供方法および音声提供システム
US10649727B1 (en) * 2018-05-14 2020-05-12 Amazon Technologies, Inc. Wake word detection configuration
US11912295B2 (en) * 2018-06-19 2024-02-27 Nissan Motor Co., Ltd. Travel information processing apparatus and processing method
JP6962280B2 (ja) * 2018-06-26 2021-11-05 株式会社デンソー 車両制御方法、車両制御システム、及び車両制御装置
JP7379892B2 (ja) * 2018-07-25 2023-11-15 株式会社デンソー 車両用電子制御システム、車両側システム及び携帯端末
WO2020022265A1 (ja) * 2018-07-25 2020-01-30 株式会社デンソー 車両用電子制御システム、プログラム更新の承諾判定方法及びプログラム更新の承諾判定プログラム
FR3091604B1 (fr) * 2019-01-04 2021-01-08 Faurecia Interieur Ind Procédé, dispositif, et programme de personnalisation et d’activation d’un système d’assistant virtuel personnel de véhicules automobiles
KR20210113224A (ko) * 2019-01-04 2021-09-15 세렌스 오퍼레이팅 컴퍼니 음성 상호작용을 사용하여 자율 주행 차량의 안전성과 유연성을 향상시키기 위한 방법 및 시스템
CN109934624A (zh) * 2019-02-28 2019-06-25 北京物资学院 一种基于即时交通的广告推送方法
EP3774453B1 (en) * 2019-02-28 2023-09-20 Google LLC Modalities for authorizing access when operating an automated assistant enabled vehicle
JP7286368B2 (ja) * 2019-03-27 2023-06-05 本田技研工業株式会社 車両機器制御装置、車両機器制御方法、およびプログラム
WO2020196960A1 (ko) * 2019-03-28 2020-10-01 엘지전자 주식회사 차량용 전자 장치 및 차량용 전자 장치의 동작 방법
CN110061984B (zh) * 2019-04-12 2022-03-18 广州小鹏汽车科技有限公司 车载系统的账号切换方法、车载系统及车辆
CN110001549A (zh) * 2019-04-17 2019-07-12 百度在线网络技术（北京）有限公司 用于控制车辆的方法和装置
US11787288B2 (en) * 2019-07-24 2023-10-17 Harman International Industries, Incorporated Systems and methods for user interfaces in a vehicular environment
KR20210016196A (ko) * 2019-08-02 2021-02-15 현대자동차주식회사 차량 및 차량의 제어방법
KR20210017515A (ko) * 2019-08-08 2021-02-17 현대자동차주식회사 차량의 모션 인식 장치 및 방법
FR3102274A1 (fr) * 2019-10-17 2021-04-23 Psa Automobiles Sa Procédé et système pour déterminer des suggestions fournies par un assistant personnel virtuel d’un véhicule automobile
CN110816470B (zh) * 2019-11-18 2022-03-08 上海擎感智能科技有限公司 基于车载终端的用户授权添加方法、系统、介质及车载终端
WO2021100918A1 (ko) * 2019-11-21 2021-05-27 엘지전자 주식회사 지능형 대화 서비스 제공 방법 및 지능형 대화 시스템
US11307045B2 (en) * 2019-12-19 2022-04-19 Lenovo (Singapore) Pte. Ltd. Method and system to determine navigation actions based on instructions from a directional dialogue
DE112021000497T5 (de) * 2020-01-10 2022-11-24 Magna Electronics, Inc. Kommunikationssystem und -verfahren
JP7306284B2 (ja) * 2020-01-31 2023-07-11 トヨタ自動車株式会社 車両および車両制御インターフェース
CN111332315B (zh) * 2020-02-19 2021-07-13 广州小马智行科技有限公司 自动驾驶车辆的控制方法及装置、存储介质和运载工具
US11590929B2 (en) * 2020-05-05 2023-02-28 Nvidia Corporation Systems and methods for performing commands in a vehicle using speech and image recognition
KR102428079B1 (ko) * 2020-06-15 2022-08-04 주식회사 스쿨버스 통학차량 탑승자 관리 시스템 및 그 제어 방법
CN111703385B (zh) * 2020-06-28 2022-03-11 广州易点智慧出行科技有限公司 一种内容互动方法以及一种车辆
CN113961165A (zh) * 2020-07-20 2022-01-21 广州汽车集团股份有限公司 智能座舱系统的音源播放控制方法、装置和系统
JP7310756B2 (ja) * 2020-08-24 2023-07-19 トヨタ自動車株式会社 自動走行カートの安全管理装置
US12002458B1 (en) * 2020-09-04 2024-06-04 Amazon Technologies, Inc. Autonomously motile device with command processing
CN112086098B (zh) * 2020-09-22 2024-04-19 深圳易美诺科技有限公司 一种驾乘人员分析方法、装置及计算机可读存储介质
TWI815046B (zh) * 2020-10-14 2023-09-11 友達光電股份有限公司 行車輔助方法及車載裝置
FR3115506A1 (fr) 2020-10-27 2022-04-29 Psa Automobiles Sa Procédé et dispositif d’assistance vocale pour un conducteur et un passager
US11741836B2 (en) 2020-10-29 2023-08-29 Toyota Motor Engineering & Manufacturing North America, Inc. Methods and systems for performing correlation-based parking availability estimation
US11408745B2 (en) 2020-10-29 2022-08-09 Toyota Motor Engineering & Manufacturing North America, Inc Methods and systems for identifying safe parking spaces
CN112622797A (zh) * 2020-12-24 2021-04-09 宜宾凯翼汽车有限公司 一种倒车影像控制系统及方法
CN112820284A (zh) * 2020-12-28 2021-05-18 恒大新能源汽车投资控股集团有限公司 语音交互方法、装置、电子设备及计算机可读存储介质
CN112667980A (zh) * 2021-01-05 2021-04-16 上海博泰悦臻网络技术服务有限公司 车辆、车机系统、车辆交互方法及装置
CN113380246A (zh) * 2021-06-08 2021-09-10 阿波罗智联(北京)科技有限公司 指令执行方法、相关装置及计算机程序产品
WO2022271162A1 (en) * 2021-06-23 2022-12-29 Google Llc Supporting multiple roles in voice-enabled navigation
CN114802098A (zh) * 2021-06-23 2022-07-29 长城汽车股份有限公司 车辆控制方法、装置和车辆
CN113734075A (zh) * 2021-09-29 2021-12-03 安徽江淮汽车集团股份有限公司 用于儿童乘客的车载智能交互系统
CN114248712A (zh) * 2021-12-28 2022-03-29 中通客车股份有限公司 一种智能驾驶客车数字配电控制系统及方法
CN115440208A (zh) * 2022-04-15 2022-12-06 北京罗克维尔斯科技有限公司 车辆控制方法、装置、设备及计算机可读存储介质
CN115019810A (zh) * 2022-05-30 2022-09-06 中国第一汽车股份有限公司 一种车载多音区智能语音安全交互系统及运行方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012112300A1 (en) * 2011-02-18 2012-08-23 Honda Motor Co., Ltd. System and method for responding to driver behavior
WO2017034282A1 (en) * 2015-08-26 2017-03-02 Lg Electronics Inc. Driver assistance apparatus and method for controlling the same
CN107097793A (zh) * 2016-02-23 2017-08-29 Lg电子株式会社 驾驶员辅助设备和具有该驾驶员辅助设备的车辆

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5774858A (en) * 1995-10-23 1998-06-30 Taubkin; Vladimir L. Speech analysis method of protecting a vehicle from unauthorized accessing and controlling
US6292782B1 (en) * 1996-09-09 2001-09-18 Philips Electronics North America Corp. Speech recognition and verification system enabling authorized data transmission over networked computer systems
US9071367B2 (en) * 2006-03-17 2015-06-30 Fatdoor, Inc. Emergency including crime broadcast in a neighborhood social network
US10096038B2 (en) * 2007-05-10 2018-10-09 Allstate Insurance Company Road segment safety rating system
US8115656B2 (en) * 2008-02-25 2012-02-14 Recovery Systems Holdings, Llc Vehicle security and monitoring system
JP5141463B2 (ja) * 2008-09-18 2013-02-13 日産自動車株式会社 車載機器及び通信の接続先選択方法
US9348492B1 (en) * 2011-04-22 2016-05-24 Angel A. Penilla Methods and systems for providing access to specific vehicle controls, functions, environment and applications to guests/passengers via personal mobile devices
US20140310379A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Vehicle initiated communications with third parties via virtual personality
US9638537B2 (en) * 2012-06-21 2017-05-02 Cellepathy Inc. Interface selection in navigation guidance systems
US9779723B2 (en) * 2012-06-22 2017-10-03 Visteon Global Technologies, Inc. Multi-pass vehicle voice recognition systems and methods
US9665101B1 (en) * 2012-09-28 2017-05-30 Waymo Llc Methods and systems for transportation to destinations by a self-driving vehicle
US9950708B1 (en) * 2012-11-02 2018-04-24 Waymo Llc Adaptation of autonomous driving behaviour based on occupant presence and position
KR20140067687A (ko) 2012-11-27 2014-06-05 현대자동차주식회사 대화형 음성인식이 가능한 차량 시스템
KR102091161B1 (ko) * 2013-12-05 2020-03-19 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
US9205805B2 (en) * 2014-02-14 2015-12-08 International Business Machines Corporation Limitations on the use of an autonomous vehicle
US10369967B2 (en) * 2014-04-01 2019-08-06 Mico Latta Inc. Vehicle and program for vehicle
US9563998B2 (en) * 2014-06-11 2017-02-07 Veridium Ip Limited System and method for facilitating user access to vehicles based on biometric information
US9440660B2 (en) * 2014-07-22 2016-09-13 Toyota Motor Engineering & Manufacturing North America, Inc. Method for remote communication with and through a vehicle
KR102353485B1 (ko) 2015-04-20 2022-01-20 엘지전자 주식회사 이동단말기 및 그 제어방법
US9608976B2 (en) * 2015-05-26 2017-03-28 Google Inc. In-vehicle shared-screen system with write back to multiple user accounts
US10147257B2 (en) * 2015-10-23 2018-12-04 Faraday&Future Inc. Systems and methods for user based vehicle access control
KR20170077328A (ko) * 2015-12-28 2017-07-06 현대자동차주식회사 자동차 관리 시스템 및 방법
WO2017138934A1 (en) * 2016-02-10 2017-08-17 Nuance Communications, Inc. Techniques for spatially selective wake-up word recognition and related systems and methods
US20190057703A1 (en) * 2016-02-29 2019-02-21 Faraday&Future Inc. Voice assistance system for devices of an ecosystem
CN105717814A (zh) * 2016-03-18 2016-06-29 浙江吉利控股集团有限公司 车辆远程控制系统及其控制方法
US9889861B2 (en) * 2016-04-19 2018-02-13 Hemanki Doshi Autonomous car decision override
US10032453B2 (en) * 2016-05-06 2018-07-24 GM Global Technology Operations LLC System for providing occupant-specific acoustic functions in a vehicle of transportation
US10318442B2 (en) * 2016-05-20 2019-06-11 Faraday & Future Inc. Pairing of input device and display in vehicle infotainment systems
US10493957B2 (en) * 2016-08-18 2019-12-03 Toyota Motor Engineering & Manufacturing North America, Inc. Operational mode change based on vehicle occupancy for an autonomous vehicle
US10031523B2 (en) * 2016-11-07 2018-07-24 Nio Usa, Inc. Method and system for behavioral sharing in autonomous vehicles
US10515390B2 (en) * 2016-11-21 2019-12-24 Nio Usa, Inc. Method and system for data optimization
JP7337699B2 (ja) * 2017-03-23 2023-09-04 ジョイソン セイフティ システムズ アクイジション エルエルシー 口の画像を入力コマンドと相互に関連付けるシステム及び方法
US10551838B2 (en) * 2017-08-08 2020-02-04 Nio Usa, Inc. Method and system for multiple sensor correlation diagnostic and sensor fusion/DNN monitor for autonomous driving application

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012112300A1 (en) * 2011-02-18 2012-08-23 Honda Motor Co., Ltd. System and method for responding to driver behavior
WO2017034282A1 (en) * 2015-08-26 2017-03-02 Lg Electronics Inc. Driver assistance apparatus and method for controlling the same
CN107097793A (zh) * 2016-02-23 2017-08-29 Lg电子株式会社 驾驶员辅助设备和具有该驾驶员辅助设备的车辆

Also Published As

Publication number Publication date
EP3470276A1 (en) 2019-04-17
KR101930462B1 (ko) 2018-12-17
EP3470276B1 (en) 2020-04-22
US20190094038A1 (en) 2019-03-28
US10598504B2 (en) 2020-03-24
CN109572702A (zh) 2019-04-05

Similar Documents

Publication Publication Date Title
CN109572702B (zh) 车辆控制装置和包括该车辆控制装置的车辆
CN109204325B (zh) 安装在车辆上的车辆控制装置和控制车辆的方法
CN107867296B (zh) 安装在车辆上的车辆控制装置和控制该车辆的方法
CN107878362B (zh) 自主行驶车辆
US10800428B2 (en) Vehicle driving assistance method and vehicle
CN108806033B (zh) 车辆的智能钥匙、控制系统及方法
CN109849906B (zh) 自主行驶车辆及其控制方法
EP3456576B1 (en) Vehicle control device and vehicle including the same
US11440503B2 (en) Vehicle terminal and control method of transportation system including same
KR101929820B1 (ko) 차량 제어 장치
EP3453589B1 (en) Vehicle control device mounted on vehicle and method for controlling vehicle
KR20180051977A (ko) 차량용 사용자 인터페이스 장치 및 차량
KR20220018102A (ko) 차량 제어 장치 및 그것을 포함하는 차량
KR20210143344A (ko) 차량 제어 장치 및 그 장치의 제어 방법
KR102212777B1 (ko) 영상 출력 장치
KR101988263B1 (ko) 차량에 구비된 차량 제어 장치 및 차량의 제어방법
KR102023995B1 (ko) 차량 제어 방법
KR102089955B1 (ko) 차량에 구비된 차량용 로봇 및 차량용 로봇의 제어방법
KR101982535B1 (ko) 차량에 구비된 차량 제어 장치
KR20200064188A (ko) 디스플레이 장치 및 그것을 포함하는 차량
KR101955984B1 (ko) 차량에 구비된 차량 제어 장치
KR101910055B1 (ko) 차량용 멀티미디어 장치
KR101916428B1 (ko) 차량용 디스플레이 장치
KR20210118066A (ko) 차량 제어 방법, 장치, 차량을 이용한 배달 서비스 방법 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant