CN109484328A - 车辆的用户接口装置 - Google Patents

车辆的用户接口装置 Download PDF

Info

Publication number
CN109484328A
CN109484328A CN201811067611.2A CN201811067611A CN109484328A CN 109484328 A CN109484328 A CN 109484328A CN 201811067611 A CN201811067611 A CN 201811067611A CN 109484328 A CN109484328 A CN 109484328A
Authority
CN
China
Prior art keywords
display
user
processor
input
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811067611.2A
Other languages
English (en)
Other versions
CN109484328B (zh
Inventor
李政俊
李时衡
吴京泰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN109484328A publication Critical patent/CN109484328A/zh
Application granted granted Critical
Publication of CN109484328B publication Critical patent/CN109484328B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B60R16/0231Circuits relating to the driving or the functioning of the vehicle
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera

Abstract

本发明提供一种车辆的用户接口装置,包括:第一显示器;第二显示器,配置于与所述第一显示器隔开的位置;输入部,获取用户输入;以及处理器,根据预先设定的控制模式,基于通过所述输入部获取的对所述第一显示器的用户输入来控制第二显示器。

Description

车辆的用户接口装置
技术领域
本发明涉及车辆的用户接口装置。
背景技术
车辆是用于将乘坐的用户朝所需的方向移动的装置。作为代表性的可举例有汽车。
另外,为了给利用车辆的用户提供便利,车辆中配备各种传感器和电子装置成为一种趋势。特别是,为了用户的驾驶便利而积极进行关于车辆驾驶辅助系统(ADAS:Advanced Driver Assistance System)的研究。进一步,积极开展有关于自主驾驶汽车(Autonomous Vehicle)的开发。
车辆可以设置有用户接口装置以与用户进行交流。用户接口装置可以由一个装置来一体地执行用于从用户接收输入的功能和用于向用户提供车辆中生成的信息的功能,或者由多个装置分别划分接收功能和提供功能并执行。
在用户接口装置可以设置有用于检测用户的输入的输入部。并且,在用户接口装置可以设置有多个显示部。在各个显示部可以显示彼此不同的内容。为了操作这样的各个显示部,需要设置分别单独的输入装置,或者在使用一个输入装置时,存在有操作方法烦琐的问题。
并且,当在驾驶中驾驶者试图操作各个显示部上显示的内容时,将会分散驾驶者的集中力,从而降低行驶安全性。
因此,亟需提供一种改进的用户接口装置,使得驾驶者在驾驶中也能够安全且简便地操作多个显示器。
发明内容
为了解决上述的问题,本发明的实施例的目的在于提供一种用户接口装置,驾驶者在驾驶中也能够安全地操作设置有多个显示器的用户接口装置。
并且,本发明的实施例的目的在于提供一种用户接口装置,用户能够简便地变更多个显示器中要控制的对象。
本发明的目的并不限定于以上提及到的目的,本领域的技术人员能够通过以下的记载明确理解未被提及到的其它目的。
为了实现所述目的,本发明的实施例的车辆的用户接口装置包括:第一显示器;第二显示器,配置于与所述第一显示器隔开的位置;输入部,获取用户输入;以及处理器,根据被选择的控制模式,基于通过所述输入部获取的对所述第一显示器的用户输入来控制所述第二显示器。
所述控制模式可以包含:第一模式,基于对所述第一显示器的用户输入来控制所述第一显示器;以及第二模式,基于对所述第一显示器的用户输入来控制所述第二显示器。
在所述第一显示器的画面关闭(off)的状态下,所述处理器可以基于对所述第一显示器的用户输入来控制所述第二显示器。
在本发明的一实施例中,用户接口装置可以还包括用户视线检测部。
当利用所述用户视线检测部检测出朝向所述第二显示器的用户的视线时,所述处理器可以基于对所述第一显示器的用户输入来控制所述第二显示器。
在本发明的一实施例中,在检测出预先存储的模式转换用户输入的情况下,所述处理器可以将所述控制模式从所述第一模式转换为所述第二模式,或者从所述第二模式转换为所述第一模式。
在本发明的一实施例中,在检测出对所述第一显示器的第一区域的用户输入的情况下,所述处理器可以以所述第二模式进行控制,在检测出对所述第一显示器的除了所述第一区域以外的区域的用户输入的情况下,所述处理器以所述第一模式进行控制。
在本发明的一实施例中,所述处理器可以基于行驶状况信息以及所述第二显示器上显示的影像信息中的至少一个来判断所述控制模式。
在本发明的一实施例中,在车辆的速度为预先设定的值以上的情况下,所述处理器可以判断所述控制模式为所述第二模式。
在本发明的一实施例中,当在所述第二显示器显示要求用户输入的信息的状态下,检测出对所述第一显示器的用户输入时,所述处理器可以判断所述控制模式为所述第二模式。
在本发明的一实施例中,所述处理器可以基于通过所述输入部获取的用户输入来识别第一用户输入和第二用户输入。在检测出所述第一用户输入的情况下,所述处理器可以判断所述控制模式为所述第一模式,在检测出所述第二用户输入的情况下,所述处理器判断所述控制模式为所述第二模式。
在本发明的一实施例中,在检测出对所述第一显示器的用户输入且所述控制模式为所述第一模式的情况下,所述处理器可以控制所述第二显示器,以在所述第二显示器上显示所述第一显示器上显示的影像中的至少一部分。
在本发明的一实施例中,在车辆正在行驶的情况下,所述处理器可以控制所述第二显示器,以在所述第二显示器上显示所述第一显示器上显示的影像中的至少一部分。
在本发明的一实施例中,在所述第一显示器上显示的影像显示于所述第二显示器的情况下,所述处理器可以控制所述第一显示器,从而使所述第一显示器上显示的影像的亮度减小,或者使所述第一显示器关闭。
在本发明的一实施例中,所述处理器可以控制所述第二显示器,以使所述第一显示器上显示的影像中与用户输入相关的一部分显示于所述第二显示器。
在本发明的一实施例中,所述处理器可以控制所述第二显示器,以与对所述第一显示器的用户输入对应地显示图形客体。
在本发明的一实施例中,在检测出对所述第一显示器的一区域的用户输入的情况下,所述处理器可以控制所述第二显示器,以在与所述第一显示器的一区域对应的所述第二显示器的一区域显示图形客体。
在本发明的一实施例中,在检测出对所述第一显示器的用户输入从第一地点移动至第二地点的情况下,所述处理器可以控制所述第二显示器,以显示从一地点移动至另一地点的图形客体。
在本发明的一实施例中,在检测出对所述第一显示器的用户输入从第一地点移动至第二地点的情况下,所述处理器可以控制所述第二显示器,以使显示图形客体的位置从一地点变更为另一地点。
在本发明的一实施例中,所述处理器可以基于通过所述输入部获取的用户输入来识别彼此不同的第三用户输入和第四用户输入。在检测出所述第三用户输入的情况下,所述处理器可以控制所述第二显示器,以在所述第二显示器上与离车辆近的对象对应地显示图形客体。在检测出所述第四用户输入的情况下,所述处理器可以控制所述第二显示器,以在所述第二显示器上与离车辆远的对象对应地显示图形客体。
在本发明的一实施例中,所述输入部可以包括与所述第一显示器以整体的方式构成的触摸输入部。所述处理器可以基于所述触摸输入部提供的信号来控制所述第二显示器。
在本发明的一实施例中,所述输入部可以包括能够获取车辆内部影像的内部相机或红外线传感器。所述处理器可以基于所述内部相机或红外线传感器提供的信号来控制所述第二显示器。
在本发明的一实施例中,所述处理器可以控制所述第二显示器,以在所述第二显示器中,与行驶状况信息相关的影像以与所述第一显示器上显示的影像相重叠的方式显示。
在本发明的一实施例中,所述处理器可以控制所述第二显示器,以在所述第二显示器上显示的影像中,在一区域显示所述第一显示器上显示的影像,在另一区域显示与行驶状况信息相关的影像。
为了实现所述目的,本发明的另一实施例的车辆的用户接口装置包括:接口部;显示器;以及处理器,通过所述接口部从移动终端获取用户输入信息,基于从所述移动终端获取的用户输入信息来控制所述显示器。
在本发明的另一实施例中,在所述移动终端的画面关闭(off)的状态下,所述处理器可以基于从所述移动终端获取的用户输入信息来控制所述显示器。
在本发明的另一实施例中,所述处理器可以控制所述显示器,以在所述显示器上与对所述移动终端的用户输入对应地显示图形客体。
为了实现所述目的,本发明的另一实施例的车辆的用户接口装置包括:接口部;显示器;以及处理器,通过所述接口部从移动终端获取用户输入信息,基于从所述移动终端获取的用户输入信息来控制所述显示器。
其它实施例的具体事项包括于详细的说明及附图中。
本发明的实施例具有如下效果的一种或其以上。
第一、能够以相同的方式选择性地控制第一显示器或第二显示器,从而使用户能够简便地操作设置有多个显示器的用户接口装置。
第二、通过提供用户能够简便地操作的用户接口装置,使得驾驶者在驾驶中能够安全地操作用户接口装置。
本发明的效果并不限定于以上提及到的效果,本领域的技术人员能够从权利要求书的记载明确理解未被提及到的其它效果。
附图说明
图1是示出本发明的实施例的车辆的外观的图。
图2是从外部的多种角度看去本发明的实施例的车辆的图。
图3至图4是示出本发明的实施例的车辆的内部的图。
图5至图6是在说明本发明的实施例的对象时作为参照的图。
图7是在说明本发明的实施例的车辆时作为参照的框图。
图8是本发明的实施例的用户接口装置的框图。
图9A及图9B是本发明的实施例的用户接口装置的控制流程图。
图10A、图10B以及图10C是用于说明本发明的一实施例的用户接口装置的图。
图11A及图11B是用于说明本发明的一实施例的用户接口装置的图。
图12A及图12B是用于说明本发明的一实施例的用户接口装置的图。
图13A及图13B是用于说明本发明的一实施例的用户接口装置的图。
图14A及图14B是用于说明本发明的一实施例的用户接口装置的图。
图15A及图15B是用于说明本发明的一实施例的用户接口装置的图。
图16A及图16B是用于说明本发明的一实施例的用户接口装置的图。
图17A及图17B是用于说明本发明的一实施例的用户接口装置的图。
图18及图19是用于说明本发明的一实施例的用户接口装置的图。
图20是用于说明本发明的另一实施例的用户接口装置的图。
附图标记的说明
100:车辆;200:用户接口装置;210:输入部;810:第一显示器;820:第二显示器;830:接口部;840:存储器;870:处理器;880:用户视线检测部;890:供电部
具体实施方式
以下参照附图对本说明书所揭示的实施例进行详细的说明,在此,与附图标记无关的对相同或类似的结构要素赋予相同的参照标记,并将省去对其重复的说明。在以下说明中使用的针对结构要素的接尾词“模块”及“部”仅是考虑到便于说明书的撰写而被赋予或混用,其自身并不带有相互划分的含义或作用。并且,在对本发明揭示的实施例进行说明的过程中,如果判断为对于相关的公知技术的具体说明会导致混淆本说明书所揭示的实施例的技术思想,则将省去对其详细的说明。并且,所附的附图仅是为了容易理解本说明书所揭示的实施例,不应由所附的附图来限定本发明所揭示的技术思想,而是应当涵盖了本发明的思想及技术范围中所包括的所有变更、均等物乃至替代物。
第一、第二等包含序数的术语可用于说明多种结构要素,但是所述结构要素并不由所述术语所限定。所述术语仅是用于将一个结构要素与其它结构要素划分的目的来使用。
如果提及到某个结构要素“连接”或“接触”于另一结构要素,其可能是直接连接于或接触于另一结构要素,但也可被理解为是他们中间存在有其它结构要素。反之,如果提及到某个结构要素“直接连接”或“直接接触”于另一结构要素,则应当被理解为是他们之间不存在有其它结构要素。
除非在上下文明确表示有另行的含义,单数的表达方式应包括复数的表达方式。
在本申请中,“包括”或“具有”等术语仅是为了指定说明书上记载的特征、数字、步骤、动作、结构要素、部件或其组合的存在,而并不意在排除一个或其以上的其它特征或数字、步骤、动作、结构要素、部件或其组合的存在或添加的可能性。
本说明书中说明的车辆可以是包括汽车、摩托车的概念。以下,对于车辆将以汽车为主进行说明。
本说明书中所述的车辆可以是将作为动力源具有引擎的内燃机车辆、作为动力源具有引擎和电动电机的混合动力车辆、作为动力源具有电动电机的电动汽车等均涵盖的概念。
在以下的说明中,车辆的左侧表示车辆的行驶方向的左侧,车辆的右侧表示车辆的行驶方向的右侧。
图1是示出本发明的实施例的车辆的外观的图。
图2是从外部的多种角度看去本发明的实施例的车辆的图。
图3至图4是示出本发明的实施例的车辆的内部的图。
图5至图6是在说明本发明的实施例的对象时作为参照的图。
图7是在说明本发明的实施例的车辆时作为参照的框图。
参照图1至图7,车辆100可包括:利用动力源进行旋转的车轮;转向输入装置510,用于调节车辆100的行驶方向。
车辆100可以是自主行驶车辆。
车辆100可基于用户输入而转换为自主行驶模式或手动模式(manual mode)。
例如,车辆100可基于通过用户接口装置200接收的用户输入,从手动模式转换为自主行驶模式,或者从自主行驶模式转换为手动模式。
车辆100可基于行驶状况信息转换为自主行驶模式或手动模式。
行驶状况信息可包含车辆外部的对象信息、导航信息以及车辆状态信息中的一种以上。
例如,车辆100可基于对象检测装置300生成的行驶状况信息,从手动模式转换为自主行驶模式,或者从自主行驶模式转换为手动模式。
例如,车辆100可基于通过通信装置400接收的行驶状况信息,从手动模式转换为自主行驶模式,或者从自主行驶模式转换为手动模式。
车辆100可基于外部设备提供的信息、数据、信号,从手动模式转换为自主行驶模式,或者从自主行驶模式转换为手动模式。
在车辆100以自主行驶模式运行的情况下,自主行驶车辆100可基于运行系统700来运行。
例如,自主行驶车辆100可基于行驶系统710、出车系统740、驻车系统750中生成的信息、数据或信号来运行。
在车辆100以手动模式运行的情况下,自主行驶车辆100可通过驾驶操作装置500接收用于驾驶的用户输入。车辆100可基于通过驾驶操作装置500接收的用户输入来运行。
总长度(overall length)表示从车辆100的前部分至后部分的长度,总宽度(width)表示车辆100的宽度,总高度(height)表示从车轮下部至车顶的长度。在以下的说明中,总长度方向L可表示作为车辆100的总长度测量的基准的方向,总宽度方向W可表示作为车辆100的总宽度测量的基准的方向,总高度方向H可表示作为车辆100的总高度测量的基准的方向。
如图7所示,车辆100可包括:用户接口装置200、对象检测装置300、通信装置400、驾驶操作装置500、车辆驱动装置600、运行系统700、导航系统770、检测部120、接口部130、存储器140、控制部170以及供电部190。
根据实施例,车辆100可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
用户接口装置200是用于车辆100和用户进行交流的装置。用户接口装置200可接收用户输入,并向用户提供车辆100生成的信息。车辆100可通过用户接口装置200实现用户接口(User Interfaces,UI)或用户体验(User Experience,UX)。
用户接口装置200可包括:输入部210、内部相机220、身体特征检测部230、输出部250以及处理器270。
根据实施例,用户接口装置200可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
输入部210用于供用户输入信息,从输入部210收集的数据可被处理器270分析并处理为用户的控制指令。
输入部210可配置在车辆内部。例如,输入部210可配置在方向盘(steeringwheel)的一区域、仪表板(instrument panel)的一区域、座椅(seat)的一区域、各柱饰板(pillar)的一区域、车门(door)的一区域、中控台(center console)的一区域、顶板(headlining)的一区域、遮阳板(sun visor)的一区域、风挡(windshield)的一区域或车窗(window)的一区域等。
输入部210可包括:语音输入部211、手势(gesture)输入部212、触摸输入部213以及机械式输入部214。
语音输入部211可将用户的语音输入转换为电信号。被转换的电信号可提供给处理器270或控制部170。
语音输入部211可包括一个以上的麦克风。
手势输入部212可将用户的手势输入转换为电信号。被转换的电信号可提供给处理器270或控制部170。
手势输入部212可包括用于检测用户的手势输入的红外线传感器以及图像传感器中的一种以上。
根据实施例,手势输入部212可检测用户的三维手势输入。为此,手势输入部212可包括用于输出多个红外线光的光输出部或多个图像传感器。
手势输入部212可通过TOF(Time of Flight)方式、结构光(Structured light)方式或视差(Disparity)方式来检测用户的三维手势输入。
触摸输入部213可将用户的触摸输入转换为电信号。被转换的电信号可提供给处理器270或控制部170。
触摸输入部213可包括用于检测用户的触摸输入的触摸传感器。
根据实施例,触摸输入部213可通过与显示部251形成一体来实现触摸屏。这样的触摸屏可一同提供车辆100和用户之间的输入接口以及输出接口。
机械式输入部214可包括按键、圆顶开关(dome switch)、调节旋钮(jog wheel)以及轻摇开关(jog switch)中的一种以上。由机械式输入部214生成的电信号可提供给处理器270或控制部170。
机械式输入部214可配置在方向盘、中控仪表盘(center fascia)、中控台(centerconsole)、驾驶舱模块(cockpit module)、车门等。
内部相机220可获取车辆内部影像。处理器270可基于车辆内部影像检测用户的状态。处理器270可从车辆内部影像中获取用户的视线信息。处理器270可从车辆内部影像中检测用户的手势。
身体特征检测部230可获取用户的身体特征信息。身体特征检测部230包括可获取用户的身体特征信息的传感器,利用传感器获取用户的指纹信息、心率信息等。身体特征信息可被利用于用户认证。
输出部250用于产生与视觉、听觉或触觉等相关的输出。
输出部250可包括显示部251、音响输出部252以及触觉输出部253中的一种以上。
显示部251可显示与多种信息对应的图形客体。
显示部251可包括液晶显示器(liquid crystal display,LCD)、薄膜晶体管液晶显示器(thin film transistor-liquid crystal display,TFT LCD)、有机发光二极管(organic light-emitting diode、OLED)、柔性显示器(flexible display)、3D显示器(3Ddisplay)、电子墨水显示器(e-ink display)中的一种以上。
显示部251可通过与触摸输入部213构成相互层次结构或一体地形成,从而实现触摸屏。
显示部251可由平视显示器(Head Up Display,HUD)来实现。在显示部251由HUD实现的情况下,显示部251可设置有投射模块,从而通过投射在风挡或车窗的图像来输出信息。
显示部251可包括透明显示器。透明显示器可贴附在风挡或车窗。
透明显示器能够以具有规定的透明度的方式显示规定的画面。为使透明显示器具有透明度,透明显示器可包括透明薄膜电致发光(Thin Film Electroluminescent,TFEL)、透明有机发光二极管(Organic Light-Emitting Diode,OLED)、透明LCD(Liquid CrystalDisplay)、透过型透明显示器、透明LED(Light Emitting Diode)显示器中的一种以上。透明显示器的透明度可进行调节。
另外,用户接口装置200可包括多个显示部251a-251g。
显示部251可配置在方向盘的一区域、仪表板的一区域251a、251b、251e、座椅的一区域251d、各柱饰板的一区域251f、车门的一区域251g、中控台的一区域、顶板(headlining)的一区域,遮阳板(sunvisor)的一区域,或者可实现于风挡的一区域251c、车窗的一区域251h。
音响输出部252将处理器270或控制部170提供的电信号变换为音频信号并输出。为此,音响输出部252可包括一个以上的扬声器。
触觉输出部253用于产生触觉方式的输出。例如,触觉输出部253可通过振动方向盘、安全带、座椅110FL、110FR、110RL、110RR,来使用户能够认知输出。
处理器270可控制用户接口装置200的各单元的整体上的动作。
根据实施例,用户接口装置200可包括多个处理器270,或者可不包括处理器270。
在用户接口装置200不包括处理器270的情况下,用户接口装置200可根据车辆100内其它装置的处理器或控制部170的控制来进行动作。
另外,可将用户接口装置200称为车辆用显示装置。
用户接口装置200可根据控制部170的控制进行动作。
对象检测装置300是用于检测位于车辆100外部的对象的装置。对象检测装置300可基于检测数据来生成对象信息。
对象信息可包含:与对象的存在与否相关的信息、对象的位置信息、车辆100与对象的距离信息以及车辆100与对象的相对速度信息。
对象可以是与车辆100的运行相关的多种物体。
参照图5至图6,对象O可包含车道OB10、其它车辆OB11、行人OB12、二轮车OB13、交通信号OB14、OB15、光、道路、结构物、限速带、地形物、动物等。
车道OB10(Lane)可以是行驶车道、行驶车道的旁边车道、会车的车辆行驶的车道。车道OB10(Lane)可以是包含形成车道(Lane)的左右侧的线(Line)的概念。车道可以是包括交叉路的概念。
其它车辆OB11可以是在车辆100的周边行驶中的车辆。其它车辆可以是距车辆100位于规定距离以内的车辆。例如,其它车辆OB11可以是比车辆100前行或后行的车辆。
行人OB12可以是位于车辆100的周边的人。行人OB12可以是距车辆100位于规定距离以内的人。例如,行人OB12可以是位于人行道或行车道上的人。
二轮车OB13可表示位于车辆100的周边并且可利用两个车轮移动的供乘坐的装置。二轮车OB13可以是距车辆100位于规定距离以内的具有两个车轮的供乘坐的装置。例如,二轮车OB13可以是位于人行道或行车道上的摩托车或自行车。
交通信号可包含:交通信号灯OB15、交通标识牌OB14、画在道路面的纹样或文本。
光可以是设置在其它车辆的车灯中生成的光。光可以是路灯中生成的光。光可以是太阳光。
道路可包括道路面、弯道(curve)、上坡、下坡等倾斜等。
结构物可以是位于道路周边并且固定在地面的物体。例如,结构物可包括路灯、行道树、建筑物、电线杆、信号灯、桥、路边石、桥。
地形物可包括山、丘等。
另外,对象可被分类为移动对象和静止对象。例如,移动对象可以是包含移动中的其它车辆、移动中的行人的概念。例如,静止对象可以是包含交通信号、道路、结构物、静止的其它车辆、静止的行人的概念。
对象检测装置300可包括:相机310、雷达320、激光雷达330、超声波传感器340、红外线传感器350以及处理器370。
根据实施例,对象检测装置300可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
为了获取车辆外部影像,相机310可位于车辆的外部的适当的位置。相机310可以是单色相机、立体相机310a、环视监控(Around View Monitoring,AVM)相机310b或360度相机。
相机310可利用多种影像处理算法获取对象的位置信息、与对象的距离信息或与对象的相对速度信息。
例如,相机310可从获取的影像中基于与时间对应的对象大小的变化来获取与对象的距离信息以及相对速度信息。
例如,相机310可通过小孔(pin hole)模型、路面轮廓绘制(road profiling)等来获取与对象的距离信息以及相对速度信息。
例如,相机310可在从立体相机310a获取的立体影像中,基于视差(disparity)信息获取与对象的距离信息以及相对速度信息。
例如,为了获取车辆前方的影像,相机310可在车辆的室内与前风挡相靠近地配置。或者,相机310可配置在前保险杠或散热器格栅周边。
例如,为了获取车辆后方的影像,相机310可在车辆的室内与后窗玻璃相靠近地配置。或者,相机310可配置在后保险杠、后备箱或尾门周边。
例如,为了获取车辆侧方的影像,相机310可在车辆的室内与侧窗中的至少一方相靠近地配置。或者,相机310可配置在侧镜、挡泥板或车门周边。
相机310可将获取的影像提供给处理器370。
雷达320可包括电磁波发送部、接收部。雷达320在电波发射原理上可实现为脉冲雷达(Pulse Radar)方式或连续波雷达(Continuous Wave Radar)方式。雷达320在连续波雷达方式中可根据信号波形而实现为调频连续波(Frequency Modulated ContinuousWave,FMCW)方式或频移监控(Frequency Shift Keying,FSK)方式。
雷达320能够以电磁波作为媒介,基于飞行时间(Time of Flight,TOF)方式或相移(phase-shift)方式来检测对象,并检测被检测出的对象的位置、与检测出的对象的距离以及相对速度。
为了检测位于车辆的前方、后方或侧方的对象,雷达320可配置在车辆的外部的适当的位置。
激光雷达330可包括激光发送部、接收部。激光雷达330可实现为TOF(Time ofFlight)方式或相移(phase-shift)方式。
激光雷达330可由驱动式或非驱动式来实现。
在由驱动式来实现的情况下,激光雷达330可通过电机进行旋转,并检测车辆100周边的对象。
在由非驱动式来实现的情况下,激光雷达330可利用光偏转(light steering)来检测以车辆100为基准位于规定范围内的对象。车辆100可包括多个非驱动式激光雷达330。
激光雷达330能够以激光作为媒介,基于TOF(Time of Flight)方式或相移(phase-shift)方式检测对象,并检测被检测出的对象的位置、与检测出的对象的距离以及相对速度。
为了检测位于车辆的前方、后方或侧方的对象,激光雷达330可配置在车辆的外部的适当的位置。
超声波传感器340可包括超声波发送部、接收部。超声波传感器340可基于超声波检测对象,并检测被检测出的对象的位置、与检测出的对象的距离以及相对速度。
为了检测位于车辆的前方、后方或侧方的对象,超声波传感器340可配置在车辆的外部的适当的位置。
红外线传感器350可包括红外线发送部、接收部。红外线传感器350可基于红外线光检测对象,并检测被检测出的对象的位置、与检测出的对象的距离以及相对速度。
为了检测位于车辆的前方、后方或侧方的对象,红外线传感器350可配置在车辆的外部的适当的位置。
处理器370可控制对象检测装置300的各单元的整体上的动作。
处理器370可对相机310、雷达320、激光雷达330、超声波传感器340以及红外线传感器350检测出的数据与预先存储的数据进行比较,从而检测出对象或进行分类。
处理器370可基于获取的影像检测对象并进行跟踪。处理器370可通过影像处理算法执行与对象的距离计算、与对象的相对速度计算等动作。
例如,处理器370可从获取的影像中基于与时间对应的对象大小的变化来获取与对象的距离信息以及相对速度信息。
例如,处理器370可通过小孔(pin hole)模型、路面轮廓绘制(road profiling)等来获取与对象的距离信息以及相对速度信息。
例如,处理器370可在从立体相机310a获取的立体影像中,基于视差(disparity)信息获取与对象的距离信息以及相对速度信息。
处理器370可基于发送的电磁波被对象反射回的反射电磁波来检测对象并进行跟踪。处理器370可基于电磁波执行与对象的距离计算、与对象的相对速度计算等动作。
处理器370可基于发送的激光被对象反射回的反射激光来检测对象并进行跟踪。处理器370可基于激光执行与对象的距离计算、与对象的相对速度计算等动作。
处理器370可基于发送的超声波被对象反射回的反射超声波来检测对象并进行跟踪。处理器370可基于超声波执行与对象的距离计算、与对象的相对速度计算等动作。
处理器370可基于发送的红外线光被对象反射回的反射红外线光来检测对象并进行跟踪。处理器370可基于红外线光执行与对象的距离计算、与对象的相对速度计算等动作。
根据实施例,对象检测装置300可包括多个处理器370,或者可不包括处理器370。例如,相机310、雷达320、激光雷达330、超声波传感器340以及红外线传感器350可分别单独地包括处理器。
在对象检测装置300中不包括处理器370的情况下,对象检测装置300可根据车辆100内装置的处理器或控制部170的控制来进行动作。
对象检测装置300可根据控制部170的控制进行动作。
通信装置400是用于与外部设备执行通信的装置。其中,外部设备可以是其它车辆、移动终端或服务器。
为了执行通信,通信装置400可包括发送天线、接收天线、可实现各种通信协议的无线射频(Radio Frequency,RF)电路以及RF元件中的一种以上。
通信装置400可包括:近距离通信部410、位置信息部420、V2X通信部430、光通信部440、广播收发部450、智能交通系统(Intelligent Transport Systems,ITS)通信部460以及处理器470。
根据实施例,通信装置400可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
近距离通信部410是用于进行近距离通信(Short range communication)的单元。近距离通信部410可利用蓝牙(BluetoothTM)、射频识别(Radio FrequencyIdentification,RFID)、红外数据协会(Infrared Data Association;IrDA)、超宽带(Ultra Wideband,UWB)、无线个域网(ZigBee)、近场通信(Near Field Communication,NFC)、无线高保真(Wireless-Fidelity,Wi-Fi)、无线高保真直连(Wi-Fi Direct)、无线通用串行总线(Wireless Universal Serial Bus,Wireless USB)技术中的一种以上来支持近距离通信。
近距离通信部410可利用形成近距离无线通信网(Wireless Area Networks)来执行车辆100和至少一个外部设备之间的近距离通信。
位置信息部420是用于获取车辆100的位置信息的单元。例如,位置信息部420可包括全球定位系统(Global Positioning System,GPS)模块或差分全球定位系统(Differential Global Positioning System,DGPS)模块。
V2X通信部430是用于执行与服务器(V2I:Vehicle to Infra)、其它车辆(V2V:Vehicle to Vehicle)或行人(V2P:Vehicle to Pedestrian)的无线通信的单元。V2X通信部430可包括能够实现与基础设施(infra)的通信(V2I)、车辆间通信(V2V)、与行人的通信(V2P)协议的RF电路。
光通信部440是以光作为媒介与外部设备执行通信的单元。光通信部440可包括:光发送部,将电信号转换为光信号并向外部发送;以及光接收部,将接收到的光信号转换为电信号。
根据实施例,光发送部可与车辆100中包括的车灯以整体的方式形成。
广播收发部450是通过广播频道从外部的广播管理服务器接收广播信号,或者向广播管理服务器发送广播信号的单元。广播频道可包括卫星频道、地面波频道。广播信号可包含TV广播信号、电台广播信号、数据广播信号。
ITS通信部460可与交通系统进行信息、数据或信号交换。ITS通信部460可向交通系统提供所获取的信息、数据。ITS通信部460可接收交通系统提供的信息、数据或信号。例如,ITS通信部460可从交通系统接收道路交通信息并提供给控制部170。例如,ITS通信部460可从交通系统接收控制信号,并提供给设置在控制部170或车辆100内部的处理器。
处理器470可控制通信装置400的各单元的整体上的动作。
根据实施例,通信装置400可包括多个处理器470,或者可不包括处理器470。
在通信装置400中不包括处理器470的情况下,通信装置400可根据车辆100内其它装置的处理器或控制部170的控制来进行动作。
另外,通信装置400可与用户接口装置200一同实现车辆用显示装置。在此情况下,可将车辆用显示装置称为车载信息系统(telematics)装置或影音导航(Audio VideoNavigation,AVN)装置。
通信装置400可根据控制部170的控制进行动作。
驾驶操作装置500是用于接收用于驾驶的用户输入的装置。
在手动模式的情况下,车辆100可基于驾驶操作装置500提供的信号来运行。
驾驶操作装置500可包括:转向输入装置510、加速输入装置530以及制动输入装置570。
转向输入装置510可接收来自用户的车辆100的行驶方向输入。转向输入装置510优选地形成为轮(wheel)形态,以能够通过旋转实现转向输入。根据实施例,转向输入装置可形成为触摸屏、触摸板或按键形态。
加速输入装置530可接收来自用户的用于车辆100的加速的输入。制动输入装置570可接收来自用户的用于车辆100的减速的输入。加速输入装置530和制动输入装置570优选地形成为踏板形态。根据实施例,加速输入装置或制动输入装置可形成为触摸屏、触摸板或按键形态。
驾驶操作装置500可根据控制部170的控制进行动作。
车辆驱动装置600是以电性方式控制车辆100内各种装置的驱动的装置。
车辆驱动装置600可包括:传动(power train)驱动部610、底盘驱动部620、车门/车窗驱动部630、安全装置驱动部640、车灯驱动部650以及空调驱动部660。
根据实施例,辆驱动装置600可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
另外,车辆驱动装置600可包括处理器。车辆驱动装置600的各单元可分别单独地包括处理器。
传动驱动部610可控制传动装置的动作。
传动驱动部610可包括动力源驱动部611以及变速器驱动部612。
动力源驱动部611可执行针对车辆100的动力源的控制。
例如,在以基于化石燃料的引擎作为动力源的情况下,动力源驱动部611可执行针对引擎的电子式控制。由此,能够控制引擎的输出扭矩等。动力源驱动部611可根据控制部170的控制而调节引擎输出扭矩。
例如,在以基于电的电机作为动力源的情况下,动力源驱动部611可执行针对电机的控制。动力源驱动部611可根据控制部170的控制而调节电机的转速、扭矩等。
变速器驱动部612可执行针对变速器的控制。
变速器驱动部612可调节变速器的状态。变速器驱动部612可将变速器的状态调节为前进D、倒车R、空挡N或驻车P。
另外,在引擎为动力源的情况下,变速器驱动部612可在前进D状态下调节齿轮的啮合状态。
底盘驱动部620可控制底盘装置的动作。
底盘驱动部620可包括:转向驱动部621、制动驱动部622以及悬架驱动部623。
转向驱动部621可执行针对车辆100内的转向装置(steering apparatus)的电子式控制。转向驱动部621可变更车辆的行驶方向。
制动驱动部622可执行针对车辆100内的制动装置(brake apparatus)的电子式控制。例如,可通过控制配置在车轮的制动器的动作来减小车辆100的速度。
另外,制动驱动部622可对多个制动器分别单独地进行控制。制动驱动部622可对施加给多个车轮的制动力相互不同地进行控制。
悬架驱动部623可执行针对车辆100内的悬架装置(suspension apparatus)的电子式控制。例如,在道路面存在有曲折的情况下,悬架驱动部623可通过控制悬架装置来减小车辆100的振动。
另外,悬架驱动部623可对多个悬架分别单独地进行控制。
车门/车窗驱动部630可执行针对车辆100内的车门装置(door apparatus)或车窗装置(window apparatus)的电子式控制。
车门/车窗驱动部630可包括车门驱动部631以及车窗驱动部632。
车门驱动部631可执行针对车门装置的控制。车门驱动部631可控制车辆100中包括的多个车门的开放、关闭。车门驱动部631可控制后备箱(trunk)或尾门(tail gate)的开放或关闭。车门驱动部631可控制天窗(sunroof)的开放或关闭。
车窗驱动部632可执行针对车窗装置(window apparatus)的电子式控制。车窗驱动部632可控制车辆100中包括的多个车窗的开放或关闭。
安全装置驱动部640可执行针对车辆100内的各种安全装置(safety apparatus)的电子式控制。
安全装置驱动部640可包括:气囊驱动部641、安全带驱动部642以及行人保护装置驱动部643。
气囊驱动部641可执行针对车辆100内的气囊装置(airbag apparatus)的电子式控制。例如,在检测出危险时,气囊驱动部641可控制气囊被展开。
安全带驱动部642可执行针对车辆100内的安全带装置(seatbelt apparatus)的电子式控制。例如,在检测出危险时,安全带驱动部642可利用安全带将乘坐者固定在座椅110FL、110FR、110RL、110RR。
行人保护装置驱动部643可执行针对发动机罩升降机和行人气囊的电子式控制。例如,在检测出与行人的碰撞时,行人保护装置驱动部643可控制发动机罩被提升(hoodlift up)以及行人气囊被展开。
车灯驱动部650可执行针对车辆100内的各种车灯装置(lamp apparatus)的电子式控制。
空调驱动部660可执行针对车辆100内的空调装置(air conditioner)的电子式控制。例如,在车辆内部的温度高的情况下,空调驱动部660可控制空调装置进行动作,从而向车辆内部供应冷气。
车辆驱动装置600可包括处理器。车辆驱动装置600的各单元可分别单独地包括处理器。
车辆驱动装置600可根据控制部170的控制进行动作。
运行系统700是控制车辆100的各种运行的系统。运行系统700可在自主行驶模式下进行动作。
运行系统700可包括:行驶系统710、出车系统740以及驻车系统750。
根据实施例,运行系统700可还包括除了所描述的结构要素以外的其它结构要素,或者可不包括所描述的结构要素中的一部分。
另外,运行系统700可包括处理器。运行系统700的各单元可分别单独地包括处理器。
另外,根据实施例,在运行系统700以软件方式实现的情况下,运行系统700可以是控制部170的下位概念。
另外,根据实施例,运行系统700可以是包括用户接口装置200、对象检测装置300、通信装置400、驾驶操作装置500、车辆驱动装置600、导航系统770、检测部120以及控制部170中的一种以上的概念。
行驶系统710可执行车辆100的行驶。
行驶系统710可接收导航系统770提供的导航信息,并向车辆驱动装置600提供控制信号以执行车辆100的行驶。
行驶系统710可接收对象检测装置300提供的对象信息,并向车辆驱动装置600提供控制信号来执行车辆100的行驶。
行驶系统710可通过通信装置400接收外部设备提供的信号,并向车辆驱动装置600提供控制信号来执行车辆100的行驶。
行驶系统710可以是包括用户接口装置270、对象检测装置300、通信装置400、驾驶操作装置500、车辆驱动装置600、导航系统770、检测部120以及控制部170中的一种以上,从而执行车辆100的行驶的系统概念。
这样的行驶系统710可命名为车辆行驶控制装置。
出车系统740可执行车辆100的出车。
出车系统740可接收导航系统770提供的导航信息,并向车辆驱动装置600提供控制信号来执行车辆100的出车。
出车系统740可接收对象检测装置300提供的对象信息,并向车辆驱动装置600提供控制信号来执行车辆100的出车。
出车系统740可通过通信装置400接收外部设备提供的信号,并向车辆驱动装置600提供控制信号来执行车辆100的出车。
出车系统740可以是包括用户接口装置270、对象检测装置300、通信装置400、驾驶操作装置500、车辆驱动装置600、导航系统770、检测部120以及控制部170中的一种以上,从而执行车辆100的出车的系统概念。
这样的车辆的出车系统740可以命名为车辆出车控制装置。
驻车系统750可执行车辆100的驻车。
驻车系统750可接收导航系统770提供的导航信息,并向车辆驱动装置600提供控制信号来执行车辆100的驻车。
驻车系统750可接收对象检测装置300提供的对象信息,并向车辆驱动装置600提供控制信号来执行车辆100的驻车。
驻车系统750可通过通信装置400接收外部设备提供的信号,并向车辆驱动装置600提供控制信号来执行车辆100的驻车。
驻车系统750可以是包括用户接口装置270、对象检测装置300、通信装置400、驾驶操作装置500、车辆驱动装置600、导航系统770、检测部120以及控制部170中的一种以上,从而执行车辆100的驻车的系统概念。
这样的车辆的驻车系统750可以命名为车辆驻车控制装置。
导航系统770可提供导航信息。导航信息可包含地图(map)信息、所设定的目的地信息、与所述目的地设定对应的路径信息、关于路径上的多种对象的信息、车道信息以及车辆的当前位置信息中的一种以上。
导航系统770可包括存储器、处理器。存储器可存储导航信息。处理器可控制导航系统770的动作。
根据实施例,导航系统770可通过通信装置400从外部设备接收信息,并对预先存储的信息进行更新。
根据实施例,导航系统770可被分类为用户接口装置200的下位结构要素。
检测部120可检测车辆的状态。检测部120可包括内部导航单元(inertialnavigation unit,IMU)传感器、碰撞传感器、车轮传感器(wheel sensor)、速度传感器、倾斜传感器、重量检测传感器、航向传感器(heading sensor)、定位模块(position module)、车辆前进/倒车传感器、电池传感器、燃料传感器、轮胎传感器、基于方向盘旋转的转向传感器、车辆内部温度传感器、车辆内部湿度传感器、超声波传感器、照度传感器、加速踏板位置传感器、制动踏板位置传感器等。
另外,内部导航单元(inertial navigation unit,IMU)传感器可包括加速度传感器、陀螺仪传感器、磁传感器中的一种以上。
检测部120可获取车辆姿势信息、车辆运动(motion)信息、车辆横摆(yaw)信息、车辆滚动(roll)信息、车辆斜角(pitch)信息、车辆碰撞信息、车辆方向信息、车辆位置信息(GPS信息)、车辆角度信息、车辆速度信息、车辆加速度信息、车辆斜率信息、车辆前进/倒车信息、电池信息、燃料信息、轮胎信息、车灯信息、车辆内部温度信息、车辆内部湿度信息、关于方向盘旋转角度、车辆外部照度、施加给加速踏板的压力、施加给制动踏板的压力等的检测信号。
除此之外,检测部120可还包括加速踏板传感器、压力传感器、引擎转速传感器(engine speed sensor)、空气流量传感器(AFS)、吸气温度传感器(ATS)、水温传感器(WTS)、节气门位置传感器(TPS)、TDC传感器、曲轴转角传感器(CAS)等。
检测部120可基于检测数据生成车辆状态信息。车辆状态信息可以是基于设置在车辆内部的各种传感器中检测出的数据来生成的信息。
例如,车辆状态信息可包含车辆的姿势信息、车辆的速度信息、车辆的斜率信息、车辆的重量信息、车辆的方向信息、车辆的电池信息、车辆的燃料信息、车辆的胎压信息、车辆的转向信息、车辆室内温度信息、车辆室内湿度信息、踏板位置信息以及车辆引擎温度信息等。
接口部130可执行与和车辆100相连接的多种外部装置的通道作用。例如,接口部130可设置有可与移动终端相连接的端口,通过所述端口能够与移动终端进行连接。在此情况下,接口部130可与移动终端进行数据交换。
另外,接口部130可执行向连接的移动终端供应电能的通道作用。在移动终端与接口部130进行电连接的情况下,根据控制部170的控制,接口部130将供电部190供应的电能提供给移动终端。
存储器140与控制部170进行电连接。存储器140可存储关于单元的基本数据、用于单元的动作控制的控制数据、输入输出的数据。存储器140在硬件上可以是ROM、RAM、EPROM、闪存盘、硬盘等多种存储装置。存储器140可存储用于控制部170的处理或控制的程序等、用于车辆100整体上的动作的多种数据。
根据实施例,存储器140可与控制部170以整体的方式形成,或者作为控制部170的下位结构要素来实现。
控制部170可控制车辆100内的各单元的整体上的动作。可将控制部170称为电子控制单元(Electronic Control Unit,ECU)。
供电部190可根据控制部170的控制而供应各结构要素的动作所需的电源。特别是,供电部190可接收车辆内部的电池等供应的电源。
车辆100中包括的一个以上的处理器以及控制部170可利用专用集成电路(application specific integrated circuits,ASICs)、数字信号处理器(digitalsignal processors,DSPs)、数字信号处理设备(digital signal processing devices,DSPDs)、可编程逻辑设备(programmable logic devices,PLDs)、现场可编程门阵列(fieldprogrammable gate arrays,FPGAs)、处理器(processors)、控制器(controllers)、微控制器(micro-controllers)、微处理器(microprocessors)、用于执行其它功能的电性单元中的一种以上来实现。
第一实施例
图8是本发明的实施例的用户接口装置的框图。
用户接口装置200可以包括:输入部210、显示部251、接口部830、存储器840、处理器870以及供电部890。显示部251可以包括第一显示器810以及第二显示器820。
输入部210用于接收用户输入的信息,输入部210中收集到的数据可以被处理器870进行分析,从而被处理为用户的控制指令。
输入部210可以检测对第一显示器810的用户的手势。
用户的手势可以包含诸如触摸的一维手势、诸如拖拽的二维手势以及诸如空间上的移动的三维手势。
输入部210可以包括手势输入部212及触摸输入部213中的一种以上。
手势输入部212可以将用户的手势输入转换为电信号。被转换的电信号可以提供给处理器870或控制部170。
手势输入部212可以包括能够获取车辆内部影像的内部相机或红外线传感器。
根据实施例,内部相机可以是RGB相机和/或能够拍摄黑白影像的B/W相机。在此情况下,手势输入部212可以检测用户的二维手势输入。
根据实施例,手势输入部212可以包括输出多个红外线光的光输出部或多个图像传感器。
根据实施例,手势输入部212可以检测用户的三维手势输入。为此,手势输入部212可以由深度相机构成。深度相机可以是立体式相机。
触摸输入部213可以将用户的触摸输入转换为电信号。被转换的电信号可以提供给处理器870或控制部170。
触摸输入部213可以包括用于检测用户的触摸输入的触摸传感器。
触摸输入部213可通过与第一显示器810构成一体,从而实现触摸屏。
根据实施例,触摸输入部213可通过与第一显示器810构成相互层次结构,从而实现触摸屏。
如上所述构成的第一显示器810可以一并提供车辆100和用户之间的输入接口及输出接口。
第一显示器810可以显示与多种信息对应的图形客体。
图形客体可以包含圆形、多边形或图形图像中的一种以上。图形客体可以是手指模样的图像。由此,能够使用户直观地进行识别,从而能够提高识别度。
第一显示器810可包括液晶显示器(liquid crystal display,LCD)、薄膜晶体管液晶显示器(thin film transistor-liquid crystal display,TFT LCD)、有机发光二极管(organic light-emitting diode、OLED)、柔性显示器(flexible display)、3D显示器(3D display)、电子墨水显示器(e-ink display)中的一种以上。
第一显示器810可通过与触摸输入部213构成相互层次结构或一体地形成,从而能够实现触摸屏。
第一显示器810可以配置于车辆100内部的一区域。
例如,第一显示器810可以实现于仪表板的一区域(图3的251a、251b、图4的251e)。
第一显示器810可以利用处理器870进行控制。
第一显示器810中可以适用前述的显示部251相关的说明。
以下,以第一显示器810为车辆的中央信息显示器(center informationdisplay,CID)的情况为例进行说明。
第二显示器820可以显示与多种信息对应的图形客体。
第二显示器820可包括液晶显示器(liquid crystal display,LCD)、薄膜晶体管液晶显示器(thin film transistor-liquid crystal display,TFT LCD)、有机发光二极管(organic light-emitting diode、OLED)、柔性显示器(flexible display)、3D显示器(3D display)、电子墨水显示器(e-ink display)中的一种以上。
第二显示器820可以配置于与第一显示器隔开的位置。
第二显示器820可以由平视显示器(Head Up Display,HUD)实现。
在第二显示器820由HUD实现的情况下,第二显示器820可以设置有投射模块,从而通过向风挡或车窗投射的图像来输出信息。
在第二显示器820由HUD实现的情况下,第二显示器820可以向风挡或车窗的全部或一部分投射图像。
例如,第二显示器820可以向风挡或车窗投射图像,从而通过以与实际通过风挡看到的车辆外部环境相重叠的方式显示图像,来实现增强现实(augmented reality,AR)。
或者,在第二显示器820由HUD实现的情况下,可以通过向组合器(combiner)投射图像来输出信息。
第二显示器820可以利用处理器870进行控制,从而显示与第一显示器810上显示的影像和对第一显示器810的手势对应地移动的图形客体。
第二显示器820上显示的影像可以是,使第一显示器810上显示的影像直接显示于第二显示器820。
第二显示器820上显示的影像可以是,使第一显示器810上显示的影像以仅变更其颜色、亮度或清晰度等而未变更影像上显示的信息的程度显示于第二显示器820。
第二显示器820可以利用处理器870进行控制,从而使第一显示器810上显示的影像中的一部分显示于第二显示器820。
第二显示器820可以基于输入部210提供的信号来利用处理器870进行控制。
例如,第二显示器820可以基于触摸输入部213提供的信号来利用处理器870进行控制。
例如,第二显示器820可以基于内部相机或红外线传感器提供的信号来利用处理器870进行控制。
第二显示器820可以利用处理器870进行控制,从而显示行驶状况信息。
例如,第二显示器820可以利用处理器870进行控制,从而使与行驶状况信息相关的影像以与所述显示器上显示的影像相重叠的方式追加显示。
例如,第二显示器820可以利用处理器870进行控制,从而在第二显示器820上显示的影像中,在一区域显示第一显示器810上显示的影像,在另一区域显示与行驶状况信息相关的影像。
第二显示器820中可以适用前述的显示部251相关的说明。
以下,以第二显示器820为向车辆的风挡显示影像的平视显示器HUD的情况为例进行说明。
接口部830可以执行与和车辆100相连接的多个种类的外部装置的通道作用。其可以执行与车辆100中包括的其它装置的信息、信号或数据交换。接口部830可以将接收到的信息、信号或数据传送给处理器870。接口部830可以将处理器870中生成或处理的信息、信号或数据传送给车辆100中包括的其它装置。
例如,接口部830可以从对象检测装置300、通信装置400以及其它设备中的一种以上获取行驶状况信息。
例如,接口部830可以与移动终端以有线或无线方式进行电连接。
接口部830可以执行向与之连接的移动终端供应电能的通道作用。
接口部830可以与前述的接口部130在结构上、功能上相分离或整合。
接口部830中可以适用前述的接口部130相关的说明。
存储器840可以存储用于处理器870的处理或控制的程序等、用于用户接口装置200整体上的动作的多种数据。
存储器840可以与前述的存储器140在结构上、功能上相分离或整合。
根据实施例,存储器840可以与处理器870以整体的方式形成,或者实现为处理器870的下位结构要素。
处理器870可以控制用户接口装置200内的各单元的整体上的动作。
处理器870可以利用专用集成电路(application specific integratedcircuits,ASICs)、数字信号处理器(digital signal processors,DSPs)、数字信号处理设备(digital signal processing devices,DSPDs)、可编程逻辑设备(programmable logicdevices,PLDs)、现场可编程门阵列(field programmable gate arrays,FPGAs)、处理器(processors)、控制器(controllers)、微控制器(micro-controllers)、微处理器(microprocessors)、用于执行其它功能的电性单元中的一种以上来实现。
并且,接口部830、存储器840、第一显示器810、第二显示器820以及供电部890可以具有分别单独的处理器或者被整合于处理器870。
处理器870可以控制第一显示器810和/或第二显示器820,以显示与多种信息对应的图形客体。
处理器870可以从输入部210接收用户的手势相关的信号。
手势相关的信号可以是用户的手势输入被手势输入部212转换为电信号的信号。
手势相关的信号可以是在接收到手势输入部212中被转换的电信号的输入部210内的处理器生成的手势相关的信息。
处理器870可以控制第一显示器810,从而显示与多种信息对应的图形客体。
处理器870可以按照选择的控制模式,基于通过输入部210获取的对第一显示器810的用户输入来控制第二显示器820。
控制模式可以包含基于对第一显示器810的用户输入来控制第一显示器810的第一模式。控制模式可以包含基于对第一显示器810的用户输入来控制第二显示器820的第二模式。
控制模式可以基于用户的输入来进行选择,或者由处理器870进行选择。
处理器870可以根据第一显示器810的运行状态来判断控制模式。
例如,当在第一显示器810的画面关闭(Off)的状态下,检测出对第一显示器810的用户输入时,处理器870可以判断控制模式为第二模式并进行控制。
例如,当在第一显示器810的画面开启(on)的状态下,检测出对第一显示器810的用户输入时,处理器870可以判断控制模式为第一模式并进行控制。
当利用用户视线检测部880检测出朝向第二显示器820的用户的视线时,处理器870可以基于对第一显示器810的用户输入来控制第二显示器820。
在利用用户视线检测部880检测出朝向第二显示器820的用户的视线的情况下,处理器870可以将控制模式设定为第二模式。
在利用用户视线检测部880判断出用户的视线朝向实现第二显示器820的车辆前方的情况下,处理器870可以将控制模式设定为第二模式。
处理器870可以基于用户输入来转换控制模式。
在检测出预先存储的模式转换用户输入的情况下,处理器870可以将控制模式从第一模式转换为第二模式,或者从第二模式转换为第一模式。
在检测出用户输入之前的控制模式为第一模式的情况下,当检测出存储器840中预先存储的模式转换用户输入时,处理器870可以将控制模式设定为第二模式。在检测出用户输入之前的控制模式为第二模式的情况下,当检测出存储器840中预先存储的模式转换用户输入时,处理器870可以将控制模式设定为第一模式。
在通过语音输入部211接收到与存储器840中存储的条件相符合的用户的语音输入的情况下,处理器870可以转换控制模式。在此情况下,模式转换用户输入可以是预先设定的用户语音输入。
在通过手势输入部212接收到与存储器840中存储的条件相符合的用户的手势输入的情况下,处理器870可以转换控制模式。在此情况下,模式转换用户输入可以是预先设定的用户手势输入。
例如,用于转换控制模式的用户的手势输入可以是从第一显示器810的一侧向另一侧移动的手势输入(又称划动,swipe)。在接收到对第一显示器810的划动手势输入的情况下,处理器870可以转换控制模式。
例如,在接收到对第一显示器810从左向右划动的手势输入的情况下,处理器870可以将控制模式从第一模式转换为第二模式。在接收到对第一显示器810从右向左划动的手势输入的情况下,处理器870可以将控制模式从第二模式转换为第一模式。
在通过触摸输入部213接收到与存储器840中存储的条件相符合的用户的触摸输入的情况下,处理器870可以转换控制模式。在此情况下,模式转换用户输入可以是预先设定的用户触摸输入。
例如,用于转换控制模式的用户触摸输入可以是在预先设定的时间内两次以上触摸第一显示器810的输入。在接收到在预先设定的时间内两次以上触摸第一显示器810的用户输入的情况下,处理器870可以转换控制模式。
例如,用于转换控制模式的用户触摸输入可以是按预先设定的值以上的压力触摸第一显示器810的输入。在接收到按预先设定的值以上的压力触摸第一显示器810的用户输入的情况下,处理器870可以转换控制模式。
例如,用于转换控制模式的用户触摸输入可以是从第一显示器810的一地点向另一地点以保持触摸的状态移动的输入(又称划动,swipe)。在接收到对第一显示器810的划动触摸输入的情况下,处理器870可以转换控制模式。
例如,在接收到对第一显示器810从左向右划动的触摸输入的情况下,处理器870可以将控制模式从第一模式转换为第二模式。在接收到对第一显示器810从右向左划动的触摸输入的情况下,处理器870可以将控制模式从第二模式转换为第一模式。
在通过机械式输入部214接收到用户的按键输入的情况下,处理器870可以转换控制模式。在此情况下,模式转换用户输入可以是用户按下控制模式按键的输入。
处理器870可以通过接口部830从对象检测装置300、通信装置400以及其它设备中的一种以上获取行驶状况信息。处理器870可以基于行驶状况信息判断控制模式。
例如,处理器870可以基于车辆的速度来判断控制模式。
例如,在车辆的速度为预先设定的值以上的情况下,处理器870可以判断控制模式为第二模式。
处理器870可以基于行驶状况信息来判断向用户要求的注意程度。在判断出的注意程度为预先设定的值以上的情况下,处理器870可以判断控制模式为第二模式,在判断出的注意程度小于预先设定的值的情况下,判断控制模式为第一模式。
例如,在车辆在直线道路上行驶中且车辆的移动路径上不存在对象的情况下,处理器870可以判断为向用户要求的注意程度为“低(low)”。当在向用户要求的注意程度为“低(low)”的状态下,获取到对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第一显示器810。即,处理器870可以按第一模式控制第一显示器810和/或第二显示器820。
例如,在车辆的移动路径上存在有对象的情况下,或者车辆的速度为预先设定的值以上的情况下,处理器870可以判断为向用户要求的注意程度为“高(high)”。当在向用户要求的注意程度为“高(high)”的状态下,获取到对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第二显示器820。即,处理器870可以按第二模式控制第一显示器810和/或第二显示器820。
由此,在要求驾驶者注意的状况下,通过使驾驶者仅能够操作平视显示器上显示的内容,能够预防因驾驶者的注意分散(distraction)引起的事故。
处理器870可以基于第二显示器820上显示的影像信息来判断控制模式。
当在第二显示器820上显示预先设定的种类的影像的状态下,接收到对第一显示器810的用户输入时,处理器870可以判断控制模式为第二模式。即,当在第二显示器820上显示预先设定的种类的影像的状态下,接收到对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第二显示器820。
在存储器840中,向第二显示器820显示的影像的种类可以存储为第一群组和第二群组。
当在第二显示器820上显示属于第一群组的影像的状态下,接收到对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第一显示器810。
当在第二显示器820上显示属于第二群组的影像的状态下,接收到对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第二显示器820。
在检测出对第一显示器810的用户输入且控制模式为第一模式的情况下,处理器870可以控制第二显示器820,从而在第二显示器820上显示第一显示器810上显示的影像中的至少一部分。
在检测出对第一显示器810的用户输入且控制模式为第一模式的情况下,处理器870可以控制第二显示器820,从而按预先设定的时间显示第一显示器810上显示的影像中的至少一部分。
在检测出对第一显示器810的用户输入且控制模式为第一模式的情况下,处理器870可以控制第二显示器820,从而在持续检测出用户输入的期间,在第二显示器820上显示第一显示器810上显示的影像中的至少一部分。
例如,处理器870可以控制第二显示器820,从而在用户触摸第一显示器810期间,在第二显示器820上显示第一显示器810上显示的影像中的至少一部分。
例如,在车辆行驶中的情况下,处理器870可以控制第二显示器820,从而在第二显示器820上显示第一显示器810上显示的影像中的至少一部分。处理器870可以基于车辆驱动装置600提供的信号来判断车辆100是否正在行驶中。
在第一显示器810上已显示或要显示的影像显示于第二显示器820的情况下,处理器870可以控制第一显示器810,从而使第一显示器810上显示的影像的亮度减小。
或者,在第一显示器810上已显示或要显示的影像显示于第二显示器820的情况下,处理器870可以控制为使第一显示器810的画面关闭(off)。即,在能够显示于第一显示器810的影像显示于第二显示器820的情况下,处理器870可以控制为使所述影像不显示于第一显示器810。
在如上所述构成的用户接口装置200中,在行驶中引导驾驶者的视线固定于风挡,从而能够防止注意分散并提高行驶稳定度。
处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像中与用户输入相关的一部分显示于第二显示器820。
处理器870可以基于对第一显示器810的用户输入来判断第一显示器810上显示的影像中与用户输入相关的一部分。
处理器870可以在第一显示器810上显示的内容中,将包含有施加用户输入的内容及与之相关的内容的部分(或者区域)显示于第二显示器820。
例如,用户可以在第一显示器810上显示作为控制音响输出部252的输出的菜单的收音机、MP3以及移动终端的菜单的状态下,选择收音机菜单。处理器870可以控制为,将包含有作为用户选择的菜单的收音机菜单和作为与之相关的音响输出部252的构件的MP3及移动终端菜单的影像显示于第二显示器820。
当未接收到追加的用户输入时,处理器870可以在经过预先设定的时间后,中断使第一显示器810上显示的影像中的至少一部分显示于第二显示器820的操作。
当在第一显示器810上显示的影像中的至少一部分在第二显示器820上显示预定时间并消失后,检测出对第一显示器810的用户输入时,处理器870可以基于用户输入来控制第二显示器820。
处理器870可以控制第二显示器820,从而与对第一显示器810的用户输入对应地显示图形客体。
图形客体可以包含圆形、多边形或图形图像中的一种以上。
图形客体可以是手指模样的图像。由此,使用户能够直观地进行识别,从而能够提高识别度。
例如,处理器870可以控制第二显示器820,从而使图形客体在第二显示器820上移动手势的实际移动距离。
例如,处理器870可以控制第二显示器820,从而使图形客体与手势的移动距离成比例地移动。在此情况下,图形客体在第二显示器820上移动的距离可能会与手势的实际移动距离不一致。
例如,处理器870可以控制第二显示器820,从而利用预先设定的算法将手势的三维移动变换为图形客体的二维移动并显示于第二显示器820。
预先设定的算法可以是,以手势输入部212的传感器或相机为基准,将手势的三维移动向第一显示器810上进行投影,从而将三维移动变换为二维移动。
处理器870可以基于输入部210提供的信号来控制第二显示器820。
处理器870可以基于输入部210提供的信号来判断用户的控制意图。
处理器870可以基于用户的控制意图来控制第二显示器820。
用户的控制意图包含关于控制什么的控制要素和关于如何控制的控制方法,其可以由处理器870进行判断。
例如,当判断为用户为了执行菜单而输入手势时,处理器870可以控制第二显示器820以执行所述菜单。
例如,当判断为用户为了执行菜单而输入移动手指的手势时,处理器870可以控制第二显示器820,从而显示朝向所述菜单移动的图形客体。
处理器870可以基于手势输入部212提供的信号来控制第二显示器820。
处理器870可以基于手势输入部212提供的信号来判断用户的控制意图。或者,处理器870可以基于触摸输入部213提供的信号来控制第二显示器820。
例如,在基于输入部210提供的信号判断为检测出手势的情况下,处理器870可以控制第二显示器820开启。
例如,在基于车辆驱动装置600提供的信号判断为车辆100正在行驶的情况下,处理器870可以控制第二显示器820开启。
例如,在控制第二显示器820开启的情况下,处理器870可以控制第一显示器810,从而使第一显示器810上显示的影像的亮度减小或使第一显示器810关闭。
在如上所述构成的用户接口装置200中,在行驶中引导驾驶者的视线固定于风挡,从而能够防止注意分散并提高行驶稳定度。
处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像中的一部分显示于第二显示器820。
例如,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像中与控制意图相关的一部分显示于第二显示器820。
用户的控制意图包含关于控制什么的控制要素和关于如何控制的控制方法,其可以由处理器870进行判断。
第一显示器810上显示的影像中与用户的控制意图相关的一部分可以包含:用户打算直接控制的控制要素以及与之相关的附属的控制要素。
例如,在用户与音响输出部252的输出相关地输入了选择收音机、MP3或移动终端中的一个的菜单的手势的情况下,处理器870可以控制第二显示器820,从而将包含有作为用户选择的菜单的收音机和作为与之相关的音响输出部252的构件的MP3及移动终端菜单的影像显示于第二显示器820。
处理器870可以控制第二显示器820,从而使行驶状况信息追加显示于第二显示器820。
例如,处理器870可以控制第二显示器820,从而使与行驶状况信息相关的影像以与第一显示器810上显示的影像相重叠的方式追加显示。
例如,处理器870可以控制第二显示器820,从而在第二显示器820上显示的影像中,在一区域显示第一显示器810上显示的影像,在另一区域显示与行驶状况信息相关的影像。
在如上所述构成的用户接口装置200中,通过使用户对第一显示器810输入手势,能够获得与对第二显示器820的控制要素输入手势同等的效果。
如上所述构成的用户接口装置200能够以亲和用户的方式控制车辆和/或显示部,并且能够防止驾驶者的注意分散(distraction)。
以下,对处理器870控制显示图形客体的方法进行详细的说明。
用户接口装置200可以还包括用户视线检测部880。
用户视线检测部880可以与输入部210在结构上、功能上相分离或整合。
用户视线检测部880可以包括用于检测用户的视线的红外线传感器及图像传感器中的一种以上。
用户视线检测部880可以由内部相机构成,从而获取车辆内部影像。
根据实施例,内部相机可以是RGB相机和/或能够拍摄黑白影像的B/W相机(black/white camera)。
用户视线检测部880可以对从内部相机获取的车辆内部影像进行影像处理(imageprocessing),从而检测出与第一显示器隔开的用户的手势输入。
例如,用户视线检测部880可以被设置为检测从与第一显示器相距20cm以内的地方提供的用户的手势输入。
用户视线检测部880可以基于行驶状况信息来判断用户是否正在注视车辆的前方。
用户视线检测部880可以从对象检测装置300、通信装置400或外部设备获取行驶状况信息。
例如,当用户与车辆100前方的对象对应地操作了驾驶操作装置500时,用户视线检测部880可以判断为用户正在注视车辆的前方。
例如,在通过车辆100的驾驶操作装置500检测出以预先设定的范围以上变化的用户输入的情况下,用户视线检测部880可以判断为用户正在注视车辆的前方。
例如,在通过转向输入装置510接收到以预先设定的角度以上转向的用户输入的情况下,用户视线检测部880可以判断为用户正在注视车辆的前方。
例如,在通过加速输入装置530接收到以预先设定的值以上加速的用户输入的情况下,用户视线检测部880可以判断为用户正在注视车辆的前方。
例如,在通过制动输入装置570接收到以预先设定的值以上减速的用户输入的情况下,用户视线检测部880可以判断为用户正在注视车辆的前方。
由此,用户视线检测部880即使不直接检测用户的视线,也可以间接地判断用户的视线是否朝向前方。
另外,在基于行驶状况信息间接地判断用户的视线的情况下,用户视线检测部880可以与处理器870在结构上、功能上相整合而实现。即,处理器870可以基于行驶状况信息来判断用户是否正在注视车辆的前方。
供电部890可以根据处理器870的控制而供应各结构要素的动作所需的电源。供电部890可以接收车辆内部的电池等供应的电源。
图9A及图9B是本发明的实施例的用户接口装置的控制流程图。
处理器870可以通过输入部210获取对于第一显示器810的用户输入(步骤S100)。
输入部210可以包括:语音输入部211、手势输入部212、触摸输入部213以及机械式输入部214。
处理器870可以从语音输入部211、手势输入部212、触摸输入部213以及机械式输入部214中的一种以上获取被转换为电信号的用户输入。
处理器870也可以通过内部相机220获取对于第一显示器810的用户输入。具体而言,处理器870可以对从内部相机220获取的车辆内部影像进行影像处理。处理器870可以通过影像处理来生成用户输入相关的信息。
处理器870可以根据控制模式,基于对第一显示器810的用户输入来控制第二显示器820(步骤S200)。
在接收到对第一显示器810的用户输入的情况下,处理器870可以基于用户输入来判断是要控制第一显示器810(第一模式)还是要控制第二显示器820(第二模式)(步骤S210)。
例如,处理器870可以基于通过接口部830从车辆的至少一种设备获取的行驶状况信息来判断控制模式。
例如,在基于存储器840中存储的用户输入相关的信息的情况下,当接收到第一用户输入时,处理器870可以判断控制模式为第一模式。
例如,在基于存储器840中存储的用户输入相关的信息的情况下,当接收到第二用户输入时,处理器870可以判断控制模式为第二模式。
处理器870可以根据控制模式,基于对第一显示器810的用户输入来控制第二显示器820(步骤S220)。
例如,在基于存储器840中存储的用户输入相关的信息的情况下,当接收到第一用户输入时,处理器870可以按照第一模式控制第一显示器810和/或第二显示器820。
例如,在基于存储器840中存储的用户输入相关的信息的情况下,当接收到第二用户输入时,处理器870可以按照第二模式控制第一显示器810和/或第二显示器820。
以下对处理器870控制第二显示器820的方法进行更加详细的说明。
图10A、图10B以及图10C是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图10A及图10B,用户接口装置200可以包括第一显示器810与触摸输入部210构成一体的触摸屏。
处理器870可以从触摸屏的触摸输入部210获取被变换为电信号的用户的触摸输入G。
处理器870可以按照控制模式,基于对第一显示器810的用户输入G来控制第二显示器820。
参照图10A,第二显示器820可以是向车辆的风挡投射图像的平视显示器。
处理器870可以控制第二显示器820,从而显示图形客体1011、1012。
当在第一显示器810的画面关闭(off)的状态下,接收到对第一显示器810的用户输入G时,处理器870可以基于用户输入G来控制第二显示器820。
例如,在第一显示器810的画面关闭(off)的状态下,处理器870可以控制第二显示器820,从而在与用户输入G对应的位置显示图形客体1020。
例如,在第一显示器810的画面关闭(off)的状态下,处理器870可以控制第二显示器820,从而显示与用户输入G对应地移动的图形客体1020。
例如,当在预先设定的时间期间未发生对第一显示器810的用户输入时,处理器870可以使第一显示器810关闭(off)。
例如,当用户以触摸触摸屏的状态不松开手并移动时,处理器870可以控制第二显示器820,从而显示与触摸的手指的移动对应地移动的图形客体1020。
图形客体可以包含点、线、圆形、多边形或图形图像中的一种以上。或者,图形客体可以由手指模样的图像构成,从而能够提高识别力以使用户直观地进行识别。
例如,图形客体可以使第二显示器820上显示的影像的特定部分的亮度与其它部分不同地进行显示。
例如,图形客体可以是人的手指模样的预先存储的图像。图形客体可以是实时拍摄用户的手的图像。除此之外,只要能够将对第一显示器810的用户的手势G输入的位置和/或移动显示于第二显示器820上,其可以是任意的图形客体。
处理器870可以基于输入部210提供的信号来判断手势G在第一显示器810上的坐标,并且在第二显示器820上显示的影像上的与相应坐标对应的位置显示图形客体1020。
处理器870可以控制第二显示器820,从而使图形客体在第二显示器820上移动手势的实际移动长度。
例如,在用户将手指接触第一显示器810的第一地点,并且以保持接触的状态从第一地点向第二地点移动的情况下,处理器870可以控制第二显示器820,从而使图形客体1020从第二显示器820显示的影像上的所述第一地点向第二地点移动。
此时,以第一显示器810为基准的坐标系中第二地点的位置与以第二显示器820上显示的影像为基准的坐标系中图形客体1020的第二地点的位置相同。
另外,虽未图示,处理器870可以基于手势输入部212提供的信号来控制第二显示器820。
处理器870可以接收从手势输入部212提供的用户的二维手势输入信号。在此情况下,手势输入部212可以包括RGB相机、能够拍摄黑白影像的黑白相机以及红外线传感器中的一种以上。
处理器870可以接收从手势输入部212提供的用户的三维手势输入信号。在此情况下,手势输入部212可以是立体相机。
参照图10B,当在第一显示器810的画面开启(on)的状态下,接收到对第一显示器810的用户输入G时,处理器870可以基于用户输入G来控制第一显示器810。
例如,当用户将由触摸屏构成的第一显示器810进行触摸后松开手时,处理器870可以使第一显示器810开启(on)。
当在第一显示器810开启(on)的状态下,用户触摸触摸屏时,处理器870可以控制将第一显示器810的影像显示于第二显示器820上。
当用户以触摸触摸屏的状态不松开手并移动时,处理器870可以控制第二显示器820,从而显示与触摸的手指的移动对应地移动的图形客体1020。
参照图10C,当要显示于第一显示器810的影像显示于第二显示器820时,处理器870可以控制第一显示器810,从而使第一显示器810的影像的亮度减小。
例如,在基于车辆驱动装置600提供的信号判断为车辆100正在行驶的情况下,处理器870可以控制第一显示器810,从而使第一显示器810上显示的影像的亮度减小或者使第一显示器810关闭。
例如,在判断为除了驾驶者以外没有乘坐者的情况下,处理器870可以控制第一显示器810,从而使第一显示器810上显示的影像的亮度减小,或者使第一显示器810关闭。
在如上所述构成的用户接口装置200中,在行驶中引导驾驶者的视线固定于风挡,从而能够防止注意分散(distraction)并提高行驶稳定度。
虽未图示,当要显示于第一显示器810的影像显示于第二显示器820时,处理器870可以控制使第一显示器810关闭。
在如上所述构成的用户接口装置中,能够根据第一显示器810的开启/关闭状态以相同的用户输入控制第一显示器810或第二显示器820,从而使用户能够方便地操作用户接口装置。
并且,无需设置用于操作由平视显示器实现的第二显示器的额外的操作装置,也能够利用车辆上一般提供的触摸屏(例如,CID)来操作平视显示器上显示的内容。
图11A及图11B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图11A及图11B,用户接口装置200可以包括第一显示器810与触摸输入部210构成一体的触摸屏。用户接口装置200可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。
处理器870可以从触摸屏的触摸输入部210获取与用户的触摸输入G对应的电信号。
在检测出对第一显示器810的第一区域的用户输入G的情况下,处理器870可以控制为第一模式。
第一区域可以是预先设定的第一显示器810的一部分区域。
或者,第一区域可以是基于第一显示器810上显示的影像而由处理器870判断的一区域。
处理器870可以控制第二显示器820,从而在第一模式下,使第一显示器810上显示的影像中的一部分显示于第二显示器820。
处理器870可以控制为,在第一模式下,使第一区域显示于第二显示器820。
例如,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像中与控制意图相关的一部分显示于第二显示器820。
用户的控制意图包含关于控制什么的控制要素和关于如何控制的控制方法,其可以由处理器870进行判断。
第一显示器810上显示的影像中与用户的控制意图相关的一部分可以包含:用户打算直接控制的控制要素以及与之相关的附属的控制要素。
参照图11A,在检测出对显示有菜单1110的第一显示器810上的第一区域的用户输入G的情况下,处理器870可以控制第二显示器820,从而在第二显示器820上显示菜单影像1120。
处理器870可以控制为,将包含有与用户的手势输入G直接相关的菜单以及与之间接相关的附属的菜单的上位菜单1110显示于第二显示器820。
处理器870可以控制第二显示器820,从而在风挡上显示包含有与手势G直接相关的菜单和间接相关的菜单的上位菜单1120。
处理器870可以控制第二显示器820,从而在风挡上与菜单1320一起显示图形客体1130。
处理器870可以控制第二显示器820,从而显示与对显示有菜单1110的第一显示器810上的第一区域的用户输入G对应地移动的图形客体1130。
如上所述构成的用户显示装置800能够向用户有效地提供信息,并且以亲和用户的方式提供操作环境。
参照图11B,在检测出对第一显示器810的除了第一区域以外的区域的用户输入的情况下,处理器870可以控制为第二模式。
处理器870可以控制第二显示器820,从而显示一个以上的内容1140。
在检测出对第一显示器810上的第一区域的用户输入G的情况下,处理器870可以控制第二显示器820,从而与对第一显示器810的用户输入G对应地显示图形客体1130。
如上所述构成的用户接口装置200可以根据第一显示器810检测出的用户输入来控制平视显示器的内容。
由此,通过使用诸如车辆的CID那样用户熟练操作的装置,用户能够以与之相同的操作方法简便地操作平视显示器的内容。
图12A及图12B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入信息。
参照图12A及图12B,用户接口装置200可以包括第一显示器810与触摸输入部210构成一体的触摸屏。用户接口装置200可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。
处理器870可以从触摸屏的触摸输入部210获取被变换为电信号的用户的触摸输入G。
当检测出对第一显示器810的用户输入G时,处理器870可以基于第二显示器820上显示的内容来判断控制模式。
当在第二显示器820显示要求用户输入G的信息的状态下,检测出对第一显示器810的用户输入G时,处理器870可以判断控制模式为第二模式。
要求用户输入G的信息可以被定义为,要求用户不管以何种方法进行预定的输入的内容,而并不是单纯地向用户提供提醒。
例如,要求用户输入G的信息可以是要求用户的选择的菜单。
例如,要求用户输入G的信息可以是向用户提供的提醒信息,其为了解除提醒而需要用户进行预定的输入。
例如,要求用户输入G的信息可以是用于询问是否要执行车辆的至少一种功能的菜单。
参照图12A,在第二显示器820显示用于询问是否要执行自动巡航控制(automaticcruise control,AAC)的菜单1210的状态下,当接收到对第一显示器810的用户输入G时,处理器870可以控制第二显示器820,从而与用户输入G对应地显示图形客体1220。
另外,在第二显示器820显示要求用户输入G的信息的状态,或者未显示内容的状态下,处理器870可以判断控制模式为第二模式。
参照图12B,在第二显示器820未显示需要用户输入G的内容的状态下,当检测出对第一显示器810的用户输入G时,处理器870可以控制第一显示器810及第二显示器820,从而将第一显示器810的影像的镜像影像1230显示于第二显示器820。
在此情况下,处理器870可以控制第一显示器810及第二显示器820,从而与对第一显示器810的用户输入G对应地显示图形客体1220。
当使用如上所述构成的用户接口装置200时,用户能够更加直观地操作平视显示器。并且,具有能够提供亲和用户的接口的优点。
图13A及图13B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图13A及图13B,用户接口装置200可以包括第一显示器810与触摸输入部210构成一体的触摸屏。用户接口装置200可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。
处理器870可以从触摸屏的触摸输入部210获取被变换为电信号的用户的触摸输入G。
处理器870可以基于通过输入部210获取的用户输入来识别彼此不同的第一用户输入和第二用户输入。
例如,第一用户输入可以是用户利用一个手指触摸触摸屏的输入。第二用户输入可以是同时触摸第一显示器810的多个地点的输入。第二用户输入可以是用户利用两个手指触摸触摸屏的输入。
例如,第一用户输入可以是用户以小于预先设定的强度的压力来触摸触摸屏的输入。第二用户输入可以是用户以预先设定的强度以上的压力来触摸触摸屏的输入。
在检测出第一用户输入的情况下,处理器870可以判断控制模式为第一模式。在检测出第二用户输入的情况下,处理器870可以判断控制模式为第二模式。
参照图13A,当检测出对第一显示器810的用户的输入为利用两个手指的触摸输入时,处理器870可以按照第二模式控制触摸屏及第二显示器820。
处理器870可以控制第二显示器820,从而与对第一显示器810的第二用户输入(利用两个手指的触摸输入)对应地显示图形客体1320。
参照图13B,在用户利用一个手指触摸触摸屏的情况下,处理器870可以按照第一模式控制触摸屏及第二显示器820。
当检测出对第一显示器810的第一用户输入(利用一个手指的触摸输入)时,处理器870可以控制第二显示器820,从而在第二显示器820显示第一显示器810的影像的镜像影像1330。
处理器870可以控制第二显示器820,从而在与对第一显示器810的第一用户输入对应的位置显示图形客体1320。
根据如上所述构成的用户接口装置200,通过根据彼此区别的用户输入来操作触摸屏的内容或平视显示器的内容,能够使用户方便地操作用户接口装置。
即,用户可以将显示于不易直接操作的位置的平视显示器上的内容,以与操作能够较为容易地操作的触摸屏的方式类似的方式来方便地进行操作。
图14A及图14B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图14A及图14B,第一显示器810可以是以整体的方式设置有触摸输入部210的触摸屏。第二显示器820可以是向车辆的风挡投射图像的平视显示器。
处理器870可以从触摸屏的触摸输入部210获取被变换为电信号的用户的触摸输入G。
参照图14A,第一显示器810可以被划分为多个虚拟区域。
例如,第一显示器810可以从左侧上端的虚拟区域A1到右侧下端的虚拟区域A9被分割为九个虚拟区域。另外,第一显示器810可以被分割为比九个更少的数目或更多的数目的虚拟区域。
例如,第一显示器810可以被划分为各个为四边形的多个虚拟区域。另外,第一显示器810可以将不是四边形的其它多边形或彼此不同的形状划分为多个虚拟区域。
参照图14B,第二显示器820可以被划分为与第一显示器810的虚拟区域对应的数目的虚拟区域。
例如,如图14A所示,在第一显示器810被划分成各个为四边形的九个虚拟区域的情况下,第二显示器820也可以被划分成各个为四边形的九个虚拟区域。
例如,第二显示器820可以包括与第一显示器810的第一虚拟区域A1对应的第二显示器820的第一虚拟区域B1。第二显示器820可以包括与第一显示器810的第二虚拟区域A2对应的第二显示器820的第二虚拟区域B2。如上所述,第二显示器820可以包括与第一显示器810的多个虚拟区域A1~A9对应的第二显示器820的多个虚拟区域B1~B9。
在检测出对第一显示器810的一区域的用户输入的情况下,处理器870可以控制第二显示器820,从而在与第一显示器810的一区域对应的第二显示器820的一区域显示图形客体。
图14B示出通过车辆风挡显示包括车辆外部的对象1411、1412在内的车辆外部的情形。
为了显示与第一对象1411相关的信息,处理器870能够以用户的视线为基准,在与车辆外部的第一对象1411邻近的位置显示第一图形客体1421。此时,处理器870能够以第二显示器820的画面为基准,将与位于B4虚拟区域的第一对象1411相关的第一图形客体1421显示于B1虚拟区域。
为了显示与第二对象1412相关的信息,处理器870能够以用户的视线为基准,在与车辆外部的第二对象1412邻近的位置显示第二图形客体1422。此时,处理器870能够以第二显示器820的画面为基准,将与位于B6虚拟区域的第二对象1412相关的第二图形客体1422显示于B3虚拟区域。
在检测出对第一显示器810的A3虚拟区域的用户输入G的情况下,处理器870可以使与第一显示器810的A3虚拟区域对应的、位于第二显示器820的B3虚拟区域的第二图形客体1422进行强调显示。例如,处理器870可以控制第二显示器820,从而使第二图形客体的亮度、颜色或大小改变。
另外,虽未图示,第二显示器820也可以不被划分为必须与第一显示器810的虚拟区域对应的数目的虚拟区域。第二显示器820也可以为与第一显示器810的虚拟区域的数目相同或更少数目的虚拟区域。在此情况下,第一显示器810的各个虚拟区域可以与第二显示器820的某一个虚拟区域对应地进行设定,使当触摸第一显示器810的一虚拟区域时,在第二显示器820的一地点显示图形客体。
图15A及图15B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入信息。
图15A示出了第一显示器810和对第一显示器810的用户的手势G。
参照图15A及图15B,用户接口装置200可以包括第一显示器810与触摸输入部210构成一体的触摸屏。用户接口装置200可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。
处理器870可以从触摸屏的触摸输入部210获取被变换为电信号的用户的触摸输入G。
参照图15A,第一显示器810可以被划分为多个虚拟区域。
例如,第一显示器810可以从左侧上端的虚拟区域A1到右侧下端的虚拟区域A9被分隔为九个虚拟区域。
参照图15B,第二显示器820可以被划分为与第一显示器810的虚拟区域对应的数目的虚拟区域。
例如,如图15A所示,在第一显示器810被划分为各个为四边形的九个虚拟区域的情况下,第二显示器820也可以被划分为各个为四边形的九个虚拟区域。
在检测出对第一显示器810的用户输入从第一地点移动至第二地点的情况下,处理器870可以控制第二显示器820,从而显示从一地点移动至另一地点的图形客体。
例如,处理器870可以控制第二显示器820,从而使图形客体在第二显示器820上移动手势的实际移动距离。
例如,处理器870可以控制第二显示器820,从而使图形客体与手势的移动距离成比例地移动。在此情况下,图形客体在第二显示器820上移动的距离可能会与手势的实际移动距离不一致。
例如,处理器870可以控制第二显示器820,从而利用预先设定的算法将手势的三维移动变换为图形客体的二维移动并显示于第二显示器820。
预先设定的算法可以是,以手势输入部212的传感器或相机为基准,将手势的三维移动向第一显示器810上进行投影,从而将三维移动变换为二维移动。
参照图15A,用户可以将从第一显示器810的A8虚拟区域向A6虚拟区域移动的触摸输入G施加于触摸屏。
参照图15B,当检测出对第一显示器810的用户输入G时,处理器870可以控制第二显示器820,从而在预先设定的位置(例如,第二显示器820的中央,B5虚拟区域)显示图形客体1520。
处理器870可以显示与从第一显示器810的A8虚拟区域向A6虚拟区域移动的用户输入G对应地从第二显示器820的B5虚拟区域向B3虚拟区域移动的图形客体1520。
处理器870可以控制为,使第二显示器820的图形客体1520与对第一显示器810的用户输入的矢量值对应地进行移动。
例如,在第一显示器810的左右长度和第二显示器820的左右长度的比为1:1.5的情况下,当对第一显示器810的用户输入G从左向右移动5cm时,处理器870可以控制为,使第二显示器820的图形客体1520从左向右移动7.5cm。同样地,处理器870可以控制为,使图形客体1520与第一显示器810和第二显示器820的上下比率成比例地进行移动。
即,处理器870可以控制第二显示器820,从而使图15B的图形客体1520的移动距离矢量(包含方向和距离)和图15A的手势G的移动距离矢量彼此相同或具有比例关系。
处理器870可以控制第二显示器820,从而使图形客体朝与手势G的移动方向相同的方向移动,并且使图形客体按与手势G的移动距离成比例地移动。在此情况下,图形客体的移动距离可以与手势G的实际移动距离不一致。
处理器870可以变更作为图形客体1520移动的位置的B3虚拟区域上显示的图像1510的亮度、颜色或大小中的一种以上。例如,在图形客体1520移动到与图像1510相重叠的位置的情况下,处理器870可以控制为使图像1510进行闪烁(blink)。
在如上所述构成的用户接口装置200中,用户无需注视第一显示器也能够简便地操作平视显示器的内容。
图16A及图16B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图16A及图16B,第一显示器810可以与触摸输入部210以整体的方式实现,从而构成为触摸屏。第二显示器820可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。第二显示器820可以与通过风挡看到的车辆外部的对象对应地显示图像,从而实现增强现实(augmentedreality,AR)。
处理器870可以从第一显示器810的触摸输入部210获取被变换为电信号的用户输入G。
参照图16A,第一显示器810可以被划分为多个虚拟区域。
例如,第一显示器810可以从左侧上端的虚拟区域A1到右侧下端的虚拟区域A9被划分为九个虚拟区域。
参照图16B,第二显示器820可以被划分为多个虚拟区域。处理器870可以基于车辆外部的对象1610和/或第二显示器820上显示的图形客体1621、1622的位置,将第二显示器820划分为多个虚拟区域。
例如,如图16B所示,处理器870可以将第二显示器820划分为外部对象1610所处的虚拟区域B11、第一图形客体1621所处的虚拟区域B12、第二图形客体1622所处的虚拟区域B13。
处理器870可以设定与第一显示器810的多个虚拟区域A1~A9分别对应的第二显示器820的虚拟区域B11、B12、B13。
例如,处理器870可以设定为第一显示器的A1、A4、A7虚拟区域与B11虚拟区域对应。处理器870可以设定为第一显示器的A2、A5、A8虚拟区域与B12虚拟区域对应。处理器870可以设定为第一显示器的A3、A6、A9虚拟区域与B13虚拟区域对应。
在检测出对第一显示器810的用户输入从第一地点移动至第二地点的情况下,处理器870可以控制第二显示器820,从而使显示图形客体的位置从一地点变更为另一地点。
其中,显示图形客体的位置变更的含义可以被定义为,显示相同的图形客体的位置进行变更,或者显示于彼此不同的位置的图形客体中的某些以更强调(highlight)的方式显示。
参照图16A,用户可以将从第一显示器810的A8虚拟区域向A6虚拟区域移动的触摸输入G施加于触摸屏。
当在第一显示器810的A8虚拟区域检测出用户输入G时,处理器870可以控制第二显示器820,从而使与A8虚拟区域对应的B12虚拟区域的第一图形客体1621强调显示。
参照图16B,当检测出从第一显示器810的A8虚拟区域向A6虚拟区域移动的用户输入G时,处理器870可以控制第二显示器820,从而使与A6虚拟区域对应的B13虚拟区域的第二图形客体1622强调显示。
另外,与参照图15A及图15B所述的图形客体与用户输入对应地进行相对移动的情形相同地,处理器870可以控制为,使强调显示的图形客体的位置与用户输入对应地进行相对移动。
即,当在A8虚拟区域检测出用户输入G时,处理器870可以使位于第二显示器820上的中央的B12虚拟区域的第一图形客体1621强调显示。随后,随着用户输入G在触摸屏上从A8虚拟区域向A6虚拟区域移动,处理器870可以使位于第二显示器820上的B13虚拟区域的第二图形客体1622高亮显示。
处理器870可以通过诸如图形客体的颜色、大小、模样、位置、闪烁等使用户唤起注意的显示方法来强调显示图形客体。
另外,处理器870可以控制第二显示器820,从而使被选择的对象或图形客体与朝第一方向移动的用户输入对应地朝第一方向改变。即,与用户输入对应地,可以使被选择(或者强调)的图形客体相对地进行变更。
例如,在位于图16B的B12虚拟区域的第一图形客体1621被选择的状态下,当检测出从A8向A6划动(swipe)的用户输入时,处理器870可以控制第二显示器820,从而使比第一图形客体位于更右侧的位置的第二图形客体1622被选择。处理器870可以使被选择的图形客体进行强调显示。
当以第二显示器820为基准,与地面平行的方向规定为X轴方向、与地面垂直的方向规定为Y轴方向时,处理器870可以判断图形客体1621、1622的X轴方向坐标或Y轴方向坐标。
在用户施加X轴方向或Y轴方向的划动(swipe)输入的情况下,处理器870可以根据图形客体1621、1622的X轴坐标或Y轴坐标来变更被选择的图形客体。
图形客体的X轴坐标可以是利用预定的规则对各个图形客体计算出的值。例如,图形客体的X轴坐标可以是以图形客体的中心为基准计算出的值。例如,图形客体的X轴坐标可以是以图形客体的左侧最下端为基准决定的值。例如,图形客体的X轴坐标能够以图形客体的左侧末端或右侧末端为基准进行判断。
图形客体的Y轴坐标可以是利用预定的规则对各个图形客体进行计算的值。例如,图形客体的Y轴坐标可以是以图形客体的中心为基准计算出的值。例如,图形客体的Y轴坐标可以是以图形客体的左侧最下端为基准决定的值。例如,图形客体的Y轴坐标能够以图形客体的最上端或最下端为基准进行判断。
划动输入可以被定义为朝一方向移动预定距离的输入。例如,划动输入可以是以触摸触摸屏的状态从左向右移动后松开触摸的情形。例如,划动输入可以是虽未接触显示器,但是在预定距离以内从左向右移动后,脱离预定距离以上的手势。
例如,在图16B中选择外部对象1610的状态下,当用户从左向右施加划动输入时,可以选择以X轴方向为基准比外部对象1610位于更右侧的位置的第一图形客体1621。此时,当用户从左向右再次施加划动输入时,可以选择以X轴方向为基准比第一图形客体1621位于更右侧的位置的第二图形客体1622。
利用如上所述的方式,在用户的上下或左右划动输入时,处理器870可以变更被选择的对象或图形客体。
图17A及图17B是用于说明本发明的一实施例的用户接口装置的图。
处理器870可以通过输入部210获取对第一显示器810的用户输入G。
参照图17A及图17B,第一显示器810可以与触摸输入部210以整体的方式实现,从而构成触摸屏。第二显示器820可以包括由向车辆的风挡投射图像的平视显示器实现的第二显示器820。第二显示器820可以与通过风挡看到的车辆外部的对象对应地显示图像,从而实现增强现实(augmentedreality,AR)。
处理器870可以从设置于车辆内部的用户视线检测部880获取驾驶者的视线信息。
或者,处理器870可以从内部相机获取车辆内部影像,并通过影像处理来生成驾驶者视线信息。
处理器870可以基于驾驶者的视线信息来控制第二显示器820,以与通过风挡看到的车辆外部的对象对应地显示图像,从而实现增强现实(augmented reality,AR)。
处理器870可以从第一显示器810的触摸输入部210获取被变换为电信号的用户输入G。
触摸输入部210可以构成为,根据触摸压力而生成不同的电信号。
处理器870可以基于通过输入部210获取的用户输入来识别彼此不同的第三用户输入和第四用户输入。
第三用户输入可以是满足存储器840中存储的第三用户输入条件的用户输入。第四用户输入可以是满足存储器840中存储的第四用户输入条件的用户输入。
例如,第三用户输入可以是按小于预先设定的值的压力按压触摸屏的触摸输入。第四用户输入可以是按预先设定的值以上的压力按压触摸屏的触摸输入。
例如,第三用户输入可以是按小于预先设定的值的时间期间按压触摸屏的触摸输入。第四用户输入可以是按预先设定的值以上的时间期间按压触摸屏的触摸输入。
在检测出第三用户输入的情况下,处理器870可以控制第二显示器,从而在第二显示器820上与离车辆近的对象对应地显示图形客体。在检测出第四用户输入的情况下,处理器870可以控制第二显示器,从而在第二显示器上与离车辆远的对象对应地显示图形客体。
图17A及图17B示出了以驾驶者的视点为基准,当用户通过车辆的风挡观看车辆外部时,看到第一对象1711和第二对象1712彼此重叠的状况。
当检测出按小于预先设定值的压力按压第一显示器810的第三用户输入时,处理器870可以显示与彼此重叠的第一对象1711和第二对象1712中离车辆的距离更近的第二对象1712对应的图形对象。
以参照图17A来举例的话,处理器870可以通过参照图14A至图16B说明的过程,控制第二显示器820,从而显示用于强调第二对象1712的图形客体。
参照图17B,当在显示用于强调第二对象1712的图形客体的状态下,用户以预定强度以上进行触摸时,处理器870可以控制第二显示器820,从而显示用于强调与第二对象1712重叠显示且离车辆的距离更远的第一对象1711的图形客体。
处理器870可以控制第二显示器820,从而利用与对象的形状相同或与之对应的形状的图像,并且按设定的颜色显示图形客体以强调对象。
用于强调对象的图形客体可以是包围对象的边框形状或指向对象的图形形状。处理器870也可以控制第二显示器820,从而显示作为包围对象的边框形状或指向对象的图形形状的图形客体。
在如上所述构成的用户接口装置200中,在对平视显示器上显示的内容进行操作时,能够提供亲和用户的控制环境。
图18及图19是用于说明本发明的一实施例的用户接口装置的图。
参照图18,处理器870可以控制第二显示器820,从而将与行驶状况信息相关的影像显示于第二显示器820。
处理器870可以控制第二显示器820,从而在第二显示器820显示第一显示器810上显示的影像和与对第一显示器810的手势对应地移动的图形客体1820。
行驶状况信息可以包含车辆外部的对象信息、导航信息以及车辆状态信息中的至少一个。
例如,处理器870可以控制第二显示器820,从而使与行驶状况信息相关的影像1811、1812以与第一显示器810上显示的影像相重叠的方式追加显示。
参照图18,在控制为使与行驶状况信息相关的影像1811、1812以与第一显示器810上显示的影像相重叠的方式追加显示的情况下,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像和图形客体1820的亮度减小显示。
例如,在控制为使与行驶状况信息相关的影像1811、1812以与第一显示器810上显示的影像相重叠的方式追加显示的情况下,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像和图形客体1820的阴影减小显示。
除了以上所述的例以外,在控制为使要比第二显示器820上原先显示的影像更优先显示的、与行驶状况信息相关的影像1811、1812以与第一显示器810上显示的影像相重叠的方式追加显示的情况下,处理器870可以控制第二显示器820,从而使驾驶者能够有效地识别与行驶状况信息相关的影像1811、1812。
例如,处理器870可以控制第二显示器820,从而使与行驶状况信息相关的影像1811、1812以与第一显示器810上显示的影像中的一部分相重叠的方式追加显示。
在此情况下,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像中与和行驶状况信息相关的影像1811、1812相重叠的区域的亮度和/或阴影减小显示。
另外,虽未图示,在显示行驶状况信息的情况下,处理器870可以控制第二显示器820,从而使第一显示器810上显示的影像和图形客体1820暂时不进行显示。
在如上所述构成的用户接口装置200中,通过在驾驶中有效地向用户显示需要提示的行驶状况信息,能够提高行驶安全性。
参照图19,处理器870可以控制第二显示器820,从而在第二显示器820显示第一显示器810上显示的影像和与对第一显示器810的手势对应地移动的图形客体1920。
处理器870可以控制第二显示器820,从而将与行驶状况信息相关的影像1911、1912、1913显示于第二显示器820。
行驶状况信息可以包含车辆外部的对象信息、导航信息以及车辆状态信息中的一种以上。
例如,处理器870可以控制第二显示器820,从而在第二显示器820上显示的影像中,在一区域A1910显示第一显示器810上显示的影像,在另一区域A1920显示与行驶状况信息相关的影像1911、1912、1913。
例如,处理器870可以控制第二显示器820,从而在输入部210检测出手势G之前,使与行驶状况信息相关的影像1911、1912、1913显示于第二显示器820的全体区域A1910、A1920。处理器870可以控制第二显示器820,从而在输入部210检测出手势G之后,在一区域A1910显示第一显示器810上显示的影像,在另一区域A1920显示与行驶状况信息相关的影像1911、1912、1913。
在如上所述构成的用户接口装置200中,用户不需要为了确认对输入部的手势输入而注视输入部,也能够通过输出部上显示的图形客体来确认手势输入,从而能够在驾驶中安全地操作车辆。
并且,用户接口装置200还具有用户能够直观且便利地操作车辆的优点。
第二实施例
图20是用于说明本发明的另一实施例的用户接口装置的图。
本实施例的用户接口装置200’可以包括:接口部830、显示器820以及处理器870。
本实施例的用户接口装置200’还可以包括用户视线检测部880。
在本发明的第二实施例中,用户接口装置200’的结构可以与第一实施例的用户接口装置200相同。
显示器820可以由向车辆的风挡投射图像的平视显示器实现。显示器820可以与通过风挡看到的车辆外部的对象对应地显示图像,从而实现增强现实(augmented reality,AR)。
处理器870可以基于从用户视线检测部880获取的驾驶者视线信息,与通过风挡看到的车辆外部的对象对应地显示图像,从而实现增强现实(augmented reality,AR)。
显示器820中可以适用第一实施例的第二显示器820相关的说明。
接口部830可以与移动终端M以有线或无线方式进行电连接。
移动终端M可以被定义为诸如便携电话、掌上电脑的可携带的计算装置。
当移动终端M安装于车辆内的特定位置时,接口部830可以自动地与移动终端M相连接。
例如,当移动终端M安装于车辆内的置物架时,接口部830可以自动地与移动终端M相连接。
接口部830可以从移动终端M获取用户输入信息。
用户输入信息可以是由对移动终端M的用户输入而生成的信息。
例如,移动终端M可以包括触摸屏,触摸屏的触摸检测部将用户输入变换为电信号并发送给移动终端M的处理器。移动终端M的处理器可以基于被变换为电信号的用户输入来生成用户输入信息。
接口部830可以执行向与之连接的移动终端M供应电能的通道作用。
接口部830可以适用前述的第一实施例的接口部830相关的说明。
处理器870可以控制用户接口装置200内的各单元的整体上的动作。
处理器870可以适用前述的第一实施例的处理器870相关的说明。
处理器870可以通过接口部830从移动终端M获取用户输入信息。处理器870可以基于从移动终端M获取的用户输入信息来控制显示器820。
与第一实施例的处理器870基于从输入部210获取的用户输入信息来控制第一显示器810和/或第二显示器的情形相同地,第二实施例的处理器870也可以基于从移动终端M获取的用户输入信息来控制显示器820。
在第二实施例中,仅变更了用于提供用户输入信息的对象,处理器870可以利用获取的用户输入信息来以相同或类似的方式控制显示器820。
例如,当在移动终端M的画面关闭(off)的状态下向移动终端M施加用户输入时,处理器870可以基于从移动终端M获取的用户输入信息来控制显示器820。
另外,在移动终端M的画面开启(on)的状态下,移动终端M的处理器可以基于用户输入信息来控制移动终端M。
作为又一例,处理器870可以控制显示器820,从而在显示器820上与对移动终端M的用户输入对应地显示图形客体2020。
例如,在检测出对移动终端M的显示器的一区域的用户输入的情况下,处理器870可以控制为,在与移动终端显示器的一区域对应的显示器820的一区域显示图形客体2020。
例如,在施加有从移动终端M的触摸屏上的第一地点向第二地点移动的用户输入的情况下,处理器870可以控制为,显示从显示器820上的一地点向另一地点移动的图形客体2020。
除此之外,参照图9A至图19说明的基于对第一显示器810的用户输入来控制第二显示器820的方法可以同样适用于基于对移动终端M的用户输入来控制显示器820的情况。
如上所述构成的用户接口装置200’将移动终端用作用于操作平视显示器的输入部,从而无需在车辆内设置额外的输入部,也能够基于从移动终端获取的用户输入信息来控制平视显示器的内容。
前述的本发明可由在记录有程序的介质中计算机可读取的代码来实现。计算机可读取的介质包括存储有可由计算机系统读取的数据的所有种类的记录装置。计算机可读取的介质的例有硬盘驱动器(Hard Disk Drive,HDD)、固态盘(Solid State Disk,SSD)、硅盘驱动器(Silicon Disk Drive,SDD)、ROM、RAM、CD-ROM、磁带、软盘、光数据存储装置等,并且也能够以载波(例如,基于因特网的传输)的形态实现。并且,所述计算机也可包括处理器或控制部。因此,以上所述的详细的说明在所有方面上不应被理解为限制性的,而是应当被理解为是例示性的。本发明的范围应当由对所附的权利要求书的合理的解释而定,本发明的等价范围内的所有变更应当落入本发明的范围。

Claims (20)

1.一种车辆的用户接口装置,其中,
包括:
第一显示器;
第二显示器,配置于与所述第一显示器隔开的位置;
输入部,获取用户输入;以及
处理器,根据被选择的控制模式,基于通过所述输入部获取的对所述第一显示器的用户输入来控制所述第二显示器。
2.根据权利要求1所述的车辆的用户接口装置,其中,
所述控制模式包含:
第一模式,基于对所述第一显示器的用户输入来控制所述第一显示器和/或所述第二显示器;以及
第二模式,基于对所述第一显示器的用户输入来控制所述第二显示器。
3.根据权利要求2所述的车辆的用户接口装置,其中,
在所述第一显示器的画面关闭的状态下,所述处理器基于对所述第一显示器的用户输入来控制所述第二显示器。
4.根据权利要求2所述的车辆的用户接口装置,其中,
还包括用户视线检测部;
当利用所述用户视线检测部检测出朝向所述第二显示器的用户的视线时,所述处理器基于对所述第一显示器的用户输入来控制所述第二显示器。
5.根据权利要求2所述的车辆的用户接口装置,其中,
在检测出预先存储的模式转换用户输入的情况下,所述处理器将所述控制模式从所述第一模式转换为所述第二模式,或者从所述第二模式转换为所述第一模式。
6.根据权利要求2所述的车辆的用户接口装置,其中,
在检测出对所述第一显示器的第一区域的用户输入的情况下,所述处理器以所述第二模式进行控制,
在检测出对所述第一显示器的除了所述第一区域以外的区域的用户输入的情况下,所述处理器以所述第一模式进行控制。
7.根据权利要求2所述的车辆的用户接口装置,其中,
所述处理器基于行驶状况信息以及所述第二显示器上显示的影像信息中的至少一个来判断所述控制模式。
8.根据权利要求7所述的车辆的用户接口装置,其中,
在车辆的速度为预先设定的值以上的情况下,所述处理器判断所述控制模式为所述第二模式。
9.根据权利要求7所述的车辆的用户接口装置,其中,
当在所述第二显示器上显示要求用户输入的信息的状态下,检测出对所述第一显示器的用户输入时,所述处理器判断所述控制模式为所述第二模式。
10.根据权利要求2所述的车辆的用户接口装置,其中,
所述处理器基于通过所述输入部获取的用户输入来识别第一用户输入和第二用户输入,
在检测出所述第一用户输入的情况下,所述处理器判断所述控制模式为所述第一模式,
在检测出所述第二用户输入的情况下,所述处理器判断所述控制模式为所述第二模式。
11.根据权利要求2所述的车辆的用户接口装置,其中,
在检测出对所述第一显示器的用户输入且所述控制模式为所述第一模式的情况下,所述处理器控制所述第二显示器,以在所述第二显示器上显示所述第一显示器上显示的影像中的至少一部分。
12.根据权利要求11所述的车辆的用户接口装置,其中,
在车辆正在行驶的情况下,所述处理器控制所述第二显示器,以在所述第二显示器上显示所述第一显示器上显示的影像中的至少一部分。
13.根据权利要求11所述的车辆的用户接口装置,其中,
在所述第一显示器上显示的影像显示于所述第二显示器的情况下,所述处理器控制所述第一显示器,以使所述第一显示器上显示的影像的亮度减小,或者使所述第一显示器关闭。
14.根据权利要求11所述的车辆的用户接口装置,其中,
所述处理器控制所述第二显示器,以使所述第一显示器上显示的影像中与用户输入相关的一部分显示于所述第二显示器。
15.根据权利要求1所述的车辆的用户接口装置,其中,
所述处理器控制所述第二显示器,以与对所述第一显示器的用户输入对应地显示图形客体。
16.根据权利要求15所述的车辆的用户接口装置,其中,
在检测出对所述第一显示器的用户输入从第一地点移动至第二地点的情况下,所述处理器控制所述第二显示器,以显示从一地点移动至另一地点的图形客体。
17.根据权利要求15所述的车辆的用户接口装置,其中,
在检测出对所述第一显示器的用户输入从第一地点移动至第二地点的情况下,所述处理器控制所述第二显示器,以使显示图形客体的位置从一地点变更为另一地点。
18.根据权利要求15所述的车辆的用户接口装置,其中,
所述处理器基于通过所述输入部获取的用户输入来识别彼此不同的第三用户输入和第四用户输入,
在检测出所述第三用户输入的情况下,所述处理器控制所述第二显示器,以在所述第二显示器上与离车辆近的对象对应地显示图形客体,
在检测出所述第四用户输入的情况下,所述处理器控制所述第二显示器,以在所述第二显示器上与离车辆远的对象对应地显示图形客体。
19.一种车辆的用户接口装置,其中,
包括:
接口部;
显示器;以及
处理器,通过所述接口部从移动终端获取用户输入信息,并基于从所述移动终端获取的用户输入信息来控制所述显示器。
20.根据权利要求19所述的车辆的用户接口装置,其中,
在所述移动终端的画面关闭的状态下,所述处理器基于从所述移动终端获取的用户输入信息来控制所述显示器。
CN201811067611.2A 2017-09-13 2018-09-13 车辆的用户接口装置 Active CN109484328B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170117383A KR102005443B1 (ko) 2017-09-13 2017-09-13 사용자 인터페이스 장치
KR10-2017-0117383 2017-09-13

Publications (2)

Publication Number Publication Date
CN109484328A true CN109484328A (zh) 2019-03-19
CN109484328B CN109484328B (zh) 2023-06-13

Family

ID=65690490

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811067611.2A Active CN109484328B (zh) 2017-09-13 2018-09-13 车辆的用户接口装置

Country Status (2)

Country Link
KR (1) KR102005443B1 (zh)
CN (1) CN109484328B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112181236A (zh) * 2019-07-04 2021-01-05 广州汽车集团股份有限公司 一种电子车辆手册及其操作方法、车辆信息提供装置
CN112297842A (zh) * 2019-07-31 2021-02-02 宝马股份公司 具有多种显示模式的自动驾驶车辆
CN113147598A (zh) * 2021-05-06 2021-07-23 黑龙江天有为电子有限责任公司 应用于车辆的座舱系统及其控制方法、车辆

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103635346A (zh) * 2011-05-17 2014-03-12 大众汽车有限公司 用于在交通工具内提供用户界面的方法和系统
CN104603577A (zh) * 2012-09-12 2015-05-06 丰田自动车株式会社 便携终端装置、车载装置以及车载系统
US20170001650A1 (en) * 2015-07-03 2017-01-05 Lg Electronics Inc. Driver assistance apparatus and vehicle including the same
US20170054842A1 (en) * 2015-08-21 2017-02-23 Lg Electronics Inc. Apparatus and method for controlling portable device in vehicle
US20170212633A1 (en) * 2016-01-26 2017-07-27 Samsung Electronics Co., Ltd. Automotive control system and method for operating the same

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102029842B1 (ko) * 2013-12-19 2019-10-08 현대자동차 주식회사 차량 제스처 인식 시스템 및 그 제어 방법
JP2017507828A (ja) * 2014-01-06 2017-03-23 ジョンソン コントロールズ テクノロジー カンパニーJohnson Controls Technology Company 車両におけるオーディオビジュアルコンテンツの提示及びこれとの相互作用

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103635346A (zh) * 2011-05-17 2014-03-12 大众汽车有限公司 用于在交通工具内提供用户界面的方法和系统
CN104603577A (zh) * 2012-09-12 2015-05-06 丰田自动车株式会社 便携终端装置、车载装置以及车载系统
US20170001650A1 (en) * 2015-07-03 2017-01-05 Lg Electronics Inc. Driver assistance apparatus and vehicle including the same
CN106314152A (zh) * 2015-07-03 2017-01-11 Lg电子株式会社 车辆驾驶辅助装置及具有其的车辆
US20170054842A1 (en) * 2015-08-21 2017-02-23 Lg Electronics Inc. Apparatus and method for controlling portable device in vehicle
US20170212633A1 (en) * 2016-01-26 2017-07-27 Samsung Electronics Co., Ltd. Automotive control system and method for operating the same

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
无: "《carplay carlife 宝马3系 宝马5系家装功能", 《CARPLAY CARLIFE 宝马3系 宝马5系家装功能》 *
无: "《宝马carplay系统》", 《宝马CARPLAY系统》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112181236A (zh) * 2019-07-04 2021-01-05 广州汽车集团股份有限公司 一种电子车辆手册及其操作方法、车辆信息提供装置
CN112181236B (zh) * 2019-07-04 2022-04-29 广州汽车集团股份有限公司 一种电子车辆手册及其操作方法、车辆信息提供装置
CN112297842A (zh) * 2019-07-31 2021-02-02 宝马股份公司 具有多种显示模式的自动驾驶车辆
CN113147598A (zh) * 2021-05-06 2021-07-23 黑龙江天有为电子有限责任公司 应用于车辆的座舱系统及其控制方法、车辆

Also Published As

Publication number Publication date
KR20190030089A (ko) 2019-03-21
CN109484328B (zh) 2023-06-13
KR102005443B1 (ko) 2019-07-30

Similar Documents

Publication Publication Date Title
EP3421285B1 (en) Interface system for vehicle
CN108725350B (zh) 安装在车辆上的车辆控制设备和车辆的控制方法
CN108216032B (zh) 车辆用环视监控装置、车辆运行控制装置以及车辆
CN107867296B (zh) 安装在车辆上的车辆控制装置和控制该车辆的方法
EP3456577B1 (en) User interface apparatus for vehicle
EP3398820B1 (en) Smart key for vehicle
CN108688554A (zh) 车辆用灯泡
CN108928351A (zh) 车辆用用户界面装置
CN108974122A (zh) 停车辅助系统
CN109532837A (zh) 设置于车辆的电子装置、车辆以及计算机可读取的介质
CN109693665A (zh) 自动驻车装置及其控制方法
CN109910749A (zh) 设于车辆的车辆控制装置及车辆的控制方法
CN110001547B (zh) 输入输出装置以及包括输入输出装置的车辆
CN109542096A (zh) 控制车辆的运行系统的方法及车辆的运行系统
KR101969805B1 (ko) 차량 제어 장치 및 그것을 포함하는 차량
CN107878362A (zh) 自主行驶车辆
CN108928342A (zh) 车辆用驻车系统及车辆
CN109895788A (zh) 安装在车辆上的车辆控制装置以及用于控制车辆的方法
CN109849906A (zh) 自主行驶车辆及其控制方法
CN109664887A (zh) 自主行驶车辆及其控制方法
EP3495189B1 (en) Vehicle control device
CN109703363B (zh) 显示装置及包括其的车辆
KR20190088090A (ko) 차량에 구비된 디스플레이 장치
CN109398223A (zh) 车辆用灯及车辆
CN109572708A (zh) 车辆行驶控制装置及车辆行驶方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant