CN106915302A - 用于车辆的显示装置及其控制方法 - Google Patents

用于车辆的显示装置及其控制方法 Download PDF

Info

Publication number
CN106915302A
CN106915302A CN201610718958.3A CN201610718958A CN106915302A CN 106915302 A CN106915302 A CN 106915302A CN 201610718958 A CN201610718958 A CN 201610718958A CN 106915302 A CN106915302 A CN 106915302A
Authority
CN
China
Prior art keywords
vehicle
image
information
processor
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610718958.3A
Other languages
English (en)
Other versions
CN106915302B (zh
Inventor
李在浩
金完
金一完
崔盛晥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106915302A publication Critical patent/CN106915302A/zh
Application granted granted Critical
Publication of CN106915302B publication Critical patent/CN106915302B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/365Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/61Control of cameras or camera modules based on recognised objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/207Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using multi-purpose displays, e.g. camera image and navigation or video on same display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/301Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with other obstacle sensor information, e.g. using RADAR/LIDAR/SONAR sensors for estimating risk of collision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/804Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for lane monitoring
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems

Abstract

一种用于车辆的显示装置及其控制方法,并且该显示装置包括:相机,所述相机被配置成获取所述车辆周围的图像;显示单元,所述显示单元被配置成在所述车辆的挡风玻璃上显示图形图像;以及处理器,所述处理器被配置成:检测包括在被所述车辆的驾驶员观看到的所获取的图像中的至少一个对象,确定所检测的对象的信息,所述信息包括所述挡风玻璃的观看到所述对象的区域的位置和尺寸以及所述对象的类型,并且基于所确定的所述对象的信息来控制所述显示单元以在所述挡风玻璃的区域上显示所述图形图像。

Description

用于车辆的显示装置及其控制方法
技术领域
本公开涉及一种用于车辆的显示装置以及包括该显示装置的车辆。
背景技术
车辆是一种在他或她想去的方向上移动用户的设备。车辆的代表性示例可以是汽车。根据所使用的发动机,汽车被分成内燃机汽车、外燃机汽车、燃气轮机汽车以及电动车辆。
电动车辆是指通过使用电力作为能量来运行电动机的汽车,并且包括纯电动车辆、混合电动车辆(HEV)、插电式混合电动车辆(PHEV)、燃料电池型电动车辆(FCEV)等。近来,为了驾驶员、行人等的安全或便利性,正在积极地开发智能车辆。
特别地,为了当驾驶员凝视前方时传递必要的信息,在车辆的挡风玻璃上显示图形图像的平视显示器正受到关注。由于这样的平视显示器在车辆的挡风玻璃上显示图形图像,因此具有防止驾驶员的目光变得分散的优点。
然而,由于存在以下技术限制:其中,目前在平视显示器上显示的大多数图形图像仅在固定位置处显示预设信息,因此存在以下缺点:其中,难以根据车辆周围的情形主动传递适合于该情形的信息。最近正在开发将车辆周围的对象与图形图像相结合以实现增强现实的技术,但存在以下限制:其中,图形图像阻挡了驾驶员的视线。
发明内容
实施方式提供了一种用于车辆的显示装置以及包括该显示装置的车辆,该显示装置通过根据行驶情形使用最佳的显示方法而在车辆的挡风玻璃上显示图形图像。
如在本文中所体现和广泛描述地,为了实现这些和其它的优点并且根据本发明的目的,在一个方面,本发明提供了一种用于车辆的显示装置,并且该显示装置包括:相机,所述相机被配置成获取所述车辆周围的图像;显示单元,所述显示单元被配置成在所述车辆的挡风玻璃上显示图形图像;以及处理器,所述处理器被配置成:检测包括在被所述车辆的驾驶员观看到的所获取的图像中的至少一个对象,确定所检测的对象的信息,所述信息包括所述挡风玻璃的观看到所述对象的区域的位置和尺寸以及所述对象的类型,并且基于所确定的所述对象的信息来控制所述显示单元以在所述挡风玻璃的区域上显示所述图形图像。在另一方面,本发明提供了一种控制对应的显示装置的方法。
根据下文给出的详细描述,本发明的进一步适用范围将变得显而易见。然而,由于根据这种详细描述,本发明的精神和范围内的各种改变和修改对于本领域技术人员而言将变得显而易见,因此仅通过例示的方式给出了表示本发明的优选实施方式的详细描述和具体示例。
附图说明
根据下文给出的详细描述和附图,本发明将被更加全面地理解,这些详细描述和附图仅是通过例示的方式给出的,且因此并非对本发明的限制,并且其中:
图1表示根据实施方式的用于车辆的显示装置的外观。
图2表示根据实施方式的用于车辆的显示装置的框图。
图3表示根据实施方式的检测车辆内情形的方法的示例。
图4是根据实施方式的用于车辆的显示装置的平面图。
图5表示根据实施方式的相机的示例。
图6和图7是例示根据实施方式的从来自相机的图像中生成图像信息的方法的示例的示图。
图8是示出根据实施方式的包括用于车辆的显示装置的车辆的内部的示图。
图9是通过根据实施方式的用于车辆的显示装置根据车辆周围的情形显示图形图像的处理的流程图。
图10A、图10B、图10C和图10D是例示当驾驶时由根据实施方式的用于车辆的显示装置显示导航图像的方法的示图。
图11A和图11B是例示通过根据实施方式的用于车辆的显示装置监测驾驶员并根据所监测的信息显示图形图像的方法的示图。
图12A和图12B是例示通过根据实施方式的用于车辆的显示装置根据显示区域的大小显示图形图像的方法的示图。
图13A和图13B是例示通过根据实施方式的用于车辆的显示装置根据车辆的速度显示图形图像的方法的示图。
图14A和图14B是例示通过根据实施方式的用于车辆的显示装置根据车辆周围的交通来显示图形图像的方法的示图。
图15A、图15B和图15C是例示通过根据实施方式的用于车辆的显示装置显示用于警示盲点中的危险对象的图形图像的方法的示图。
图16A和图16B是例示通过根据实施方式的用于车辆的显示装置显示用于警示车道偏离的图形图像的方法的示图。
图17是例示当碰撞风险对象与驾驶员的视线方向不匹配时通过根据实施方式的用于车辆的显示装置显示图形图像的方法的示图。
图18A和图18B是例示通过根据实施方式的用于车辆的显示装置显示与车辆周围的对象交叠的图形图像的方法的示图。
图19是表示通过根据实施方式的用于车辆的显示装置显示导航图像的示例的示图。
图20A和图20B是例示表示通过根据实施方式的用于车辆的显示装置显示导航图像的另一示例的示图。
图21表示通过根据实施方式的用于车辆的显示装置显示表示关于兴趣点的信息的图形图像的方法。
图22是例示当检测到具有高风险程度的对象时通过根据实施方式的用于车辆的显示装置显示图形图像的方法的示图。
图23是例示通过根据实施方式的用于车辆的显示装置根据导航信息改变并显示图形图像的方法的示图。
图24是图1中包括上述用于车辆的显示装置的车辆的内部框图的示例。
具体实施方式
下文中,参照附图详细描述实施方式,并且不管附图的标号,相同或类似的组件被分配有相同的参考标号,且因此省略对其的重复描述。由于下面描述中使用的组件的后缀“模块”和“单元”是为了方便做出本公开而提供的并且可互换,所以它们没有区别性的含义或功能。另外,使用附图有助于容易理解本文中公开的实施方式,但本公开中公开的技术思想不限于此。应理解,还包括在本发明内容的构思和技术范围内包含的所有变更、等同或替代。
尽管可以使用术语“第一”和“第二”来描述各种组件,但这些组件不应限于这些术语。使用这些术语仅是为了将组件与另一组件区分开。当提到任何组件“连接”或“接入”至另一组件时,应理解,前者可以直接连接到后者,或者之间可以存在其它组件。相反,当任何组件被称为“直接连接”或“直接接入”至另一组件时,应理解,之间可以没有其它组件。
除非另外指明,否则单数形式的术语包括复数形式。应理解,术语“包括”或“具有”是指存在本公开中表示的特性、数量、步骤、操作、组件、部件或其组合,但不排除存在或增加一个或更多个其它特性、数量、步骤、操作、组件、部件或其组合。
本公开中讨论的车辆可以包括汽车或摩托车。下文中,大多讨论的是车辆中的汽车。本公开中讨论的车辆可以涵盖包括发动机作为动力源的所有内燃机车辆、包括发动机和电动机作为动力源的混合动力型车辆和包括电动机作为动力源的电动车辆。
在下面的描述中,车辆右侧是指车辆的驾驶方向的左侧,且车辆左侧是指车辆的驾驶方向的右侧。在下面的描述中,除非相反地提及,否则大多描述的是左座驾驶(LHD)车辆。
另外,在下面的描述中,用于车辆的显示装置是被设置在车辆中并且通过与车辆之间的数据通信发送和接收必要信息以执行驾驶员辅助功能的单独装置。然而,也可以将车辆中的一些单元定义为用于车辆的显示装置。
当用于车辆的显示装置是单独装置时,用于车辆的显示装置的至少一些单元(参见图2)不能被包括在用于车辆的显示装置中,而是可以是车辆的单元或在车辆中装载的另一装置的单元。另外,通过经由用于车辆的显示装置的接口单元发送和接收数据,这些外部单元可以被理解为被包括在该用于车辆的显示装置中。
为便于描述,下面描述用于车辆的显示装置直接包括图2中所示的单元。下面,参照附图详细描述根据实施方式的用于车辆的显示装置。
参照图1,根据实施方式的车辆700包括:通过动力源转动的车轮13FL和13RL以及用于车辆的显示装置100。用于车辆的显示装置100可以检测车辆周围的情形,根据车辆周围的情形检测驾驶员必须观察的对象,并且然后根据对象的位置和驾驶员的视线在挡风玻璃上显示图形图像。即,用于车辆的显示装置100可以检测车辆周围的对象,根据与车辆周围的对象有关的信息确定在挡风玻璃上显示图形图像的方法,并且向驾驶员提供适合于车辆周围的情形的图形图像。
这里,图形图像显示方法可以包括图形图像在挡风玻璃上的位置、图形图像的透明度、饱和度、颜色和尺寸以及通过图形图像显示的信息量中的至少一个。例如,用于车辆的显示装置100可以设置显示区域,使得通过挡风玻璃示出的对象不与图形图像交叠,并且可以显示适合于显示区域的大小的图形图像,以在不阻挡驾驶员的视线的情况下有效地传递必要信息。
下面,参照附图2至图8详细描述根据实施方式的用于车辆的显示装置100。参照图2,用于车辆的显示装置100可以包括输入单元110、通信单元120、接口单元130、存储器140、监测单元150、传感器单元760、处理器170、显示单元180、音频输出单元185以及供电单元190。然而,本公开中要描述的用于车辆的显示装置100可以具有比上述列举的更多或更少的组件。
用于车辆的显示装置100可以包括检测用户输入的输入单元110。例如,通过输入单元110,用户可以设置在用于车辆的显示装置100的挡风玻璃上显示图形图像的功能,或者开启/关闭用于车辆的显示装置100的电源。
这样的输入单元110包括检测用户手势的手势输入单元(例如,光学传感器)、检测触摸的触摸输入单元(例如,触摸传感器、触摸键或机械键)以及检测语音输入的麦克风中的至少一个,并且输入单元110可以检测用户输入。接下来,用于车辆的显示装置100可以包括与另一车辆510、终端600、服务器500等进行通信的通信单元120。
用于车辆的显示装置100可以通过通信单元120接收通信信息,该通信信息包括导航信息、另一车辆的驾驶信息和交通信息中的至少一条。另外,这些信息当中的必要信息可以根据情形被显示在用于车辆的显示装置100上。而且,通信单元120还可以从移动终端600和/或服务器500接收位置信息、天气信息以及道路交通信息(例如,传输协议专家组(TPEG)信息)中的至少一条。
通信单元120可以从包括智能运输系统(ITS)的服务器500接收交通信息。这里,交通信息可以包括交通灯信息、车道信息等。通信单元120也可以从服务器500和/或移动终端600接收导航信息。这里,导航信息可以包括与车辆驾驶有关的地图信息、车道信息、关于车辆的位置信息、预设目的地信息以及取决于目的地的路线信息中的至少一条。
通信单元120可以通过导航信息来接收车辆700的实时位置。例如,通信单元120可以包括全球定位系统(GPS)模块或无线保真(WiFi)模块,以获取车辆的位置。
通信单元120可以从另一车辆510接收关于另一车辆510的驾驶信息,并且发送关于车辆700的驾驶信息以与车辆共享驾驶信息。这里,被共享的驾驶信息可以包括方向信息、位置信息、车速信息、加速信息、行驶路线信息、向前/向后移动信息、相邻的车辆信息以及转向信号信息中的至少一条。
而且,当用户进入车辆700中时,用户的移动终端600和用于车辆的显示装置100也可以自动地执行配对或通过由用户执行应用来执行配对。通信单元120可以与另一车辆510、移动终端600或服务器500无线地交换数据。
具体地,通信单元120可以通过使用无线数据通信来执行无线通信。该无线数据通信可以使用用于移动通信的技术标准或通信技术(例如,全球移动通信系统(GSM)、码分多址(CDMA)、码分多址2000(CDMA2000)、增强型语音-数据优化或增强型语音-数据唯一(EV-DO)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)、高级长期演进(LTE-A))。
通信单元120可以使用无线互联网技术,该无线互联网技术可以包括:例如,无线LAN(WLAN)、Wi-Fi、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波互联接入(WiMAX)、HSDPA、HSUPA、LTE、LTE-A等。通信单元120可以使用短程通信,并且可以通过使用以下技术中的至少一种来支持短程通信:例如,蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、Wi-Fi、Wi-Fi直连以及无线通用串行总线(无线USB)。
用于车辆的显示装置100可以使用短程通信来执行与车辆中的移动终端的配对,并且可以使用移动终端中的无线通信模块来与另一车辆510和服务器500无线地交换数据。
接下来,用于车辆的显示装置100可以包括接口单元130,该接口单元130接收与车辆有关的数据,或者向外部发送由处理器170处理或生成的信号。具体地,用于车辆的显示装置100可以通过接口单元130接收导航信息和传感器信息中的至少一条。另外,根据情形可以在用于车辆的显示装置100上显示这些信息当中的必要信息。
用于车辆的显示装置100可以通过接口单元130发送用于执行在挡风玻璃上显示图形图像的功能的控制信号或由用于车辆的显示装置100所生成的信息。因此,接口单元130可以通过有线或无线通信执行与车辆内部的控制单元770、音视频导航(AVN)装置400以及感测单元760中的至少一个的数据通信。
具体地,接口单元130可以通过与控制单元770、AVN装置400和/或单独的导航装置之间的数据通信来接收导航信息。接口单元130可以从控制单元770或感测单元760接收传感器信息。
这里,传感器信息可以包括以下信息中的至少一条:车辆700的方向信息、位置信息、车速信息、加速信息、倾斜信息、向前/向后移动信息、燃料信息、关于到前方和后方车辆的距离的信息、关于车辆与车道之间的距离的信息以及转向信号信息。
可以从前进方向传感器、偏航传感器、陀螺仪传感器、位置模块、车辆向前/向后移动传感器、车轮传感器、车速传感器、车体倾斜传感器、电池传感器、燃料传感器、轮胎传感器、通过方向盘的转动的转向传感器、车辆内部温度传感器、车辆内部湿度传感器、门传感器等获取传感器信息。位置模块可以包括用于GPS信息接收的GPS模块。
另外,接口单元130可以接收通过车辆700的用户输入单元110或通过控制单元770接收的用户输入。即,当输入单元被设置为车辆内部的组件时,可以通过接口单元130接收用户输入。
接口单元130也可以接收从服务器500获取的交通信息。即,服务器500可以是位于控制交通的交通控制中心处的服务器。例如,当通过车辆700的通信单元120从服务器500接收到交通信息时,接口单元130也可以从控制单元770接收交通信息。
接下来,存储器140可以存储用于车辆的显示装置100的全部操作的各种数据,诸如用于由处理器170处理或控制的程序。具体地,存储器140可以存储在用于车辆的显示装置100上执行的许多应用程序或应用,或者可以存储用于车辆的显示装置100的操作的数据和命令。可以通过无线通信从外部服务器下载至少一些应用程序。
而且,当车辆出厂时,针对用于车辆的显示装置100的基本功能(例如,在挡风玻璃上显示图形图像的功能),至少一些应用程序可以存在于用于车辆的显示装置100中。另外,应用程序可以被存储在存储器140中,并且能使用于车辆的显示装置100的操作(或功能)被处理器170执行。
存储器140也可以存储用于验证图像中的对象的数据。例如,存储器140可以存储用于当从通过相机160获取的车辆周围的图像中检测到特定对象时通过特定算法来检查对象是什么的数据。在另一示例中,存储器140可以存储用于当通过相机160获取的图像包括诸如车道、交通标志板、双轮车辆或行人的特定对象时通过特定算法检查对象是什么的数据。
存储器140可以包括作为硬件的各种类型存储介质中的至少一种,包括闪存式存储器、硬盘式存储器、固态盘(SSD)式存储器、硅盘驱动器(SDD)式存储器、微型多媒体卡式存储器、卡式存储器(例如,SD或XD存储器)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘以及光盘。用于车辆的显示装置100也可以与网络存储器结合来操作,该网络存储器在互联网上执行存储器140的存储功能。
接下来,监测单元150可以获取用户的生物特征信息。特别地,监测单元150可以检测驾驶员的目光,并且获取它以作为监测信息。另外,当显示图形图像时,可以使用所获取的关于驾驶员的目光的信息。例如,用于车辆的显示装置100可以根据驾驶员的目光确定驾驶员通过挡风玻璃所观察的视线区域,并且从与视线区域对应的相机中获取图像。然后,用于车辆的显示装置100可以在所获取的图像中设置显示区域,并且在显示区域中显示图形图像以在挡风玻璃上显示该图形图像,使得该挡风玻璃图像与驾驶员的视线相匹配。
具体地,监测单元150可以针对生物特征获取用户的图像。即,监测单元150可以包括被设置在车辆内部的图像获取模块。例如,参照图3,监测单元150可以包括拍摄车辆内部的图像的监测相机以拍摄驾驶员在车辆内的图像,并且可以检测驾驶员的视力方向以获取作为监测信息的面部识别。
监测单元150检测的生物特征信息还可以包括图像信息中的至少一种,包括用户的图像、指纹信息、虹膜扫描信息、视网膜扫描信息、手形信息以及语音识别信息。
用于车辆的显示装置100还可以包括检测车辆700周围的对象的传感器单元。用于车辆的显示装置100也可以包括单独的传感器单元来检测车辆周围的对象,并且也可以通过接口单元130来接收由车辆700本身的感测单元760所获取的传感器信息。特别地,传感器单元可以包括检测对象位置的距离传感器以及拍摄车辆周围的图像以获取图像的相机160。
距离传感器也可以精确地检测从本车辆700到对象的方向和距离以及该对象移动的方向。距离传感器可以连续测量与所检测对象之间的位置关系,以准确地检测位置关系中的变量。距离传感器可以包括各种距离测量传感器,诸如激光雷达传感器、激光传感器、超声波传感器、立体相机等。
例如,距离传感器可以是激光传感器,并且可以根据激光信号调制方法通过使用飞行时间(TOF)和/或相移来测量车辆700与对象之间的位置关系。具体地,TOF可以通过发射脉冲激光信号和测量从测量范围内的对象反射的脉冲信号到达接收器的时间来测量到对象的距离和方向。
用于车辆的显示装置100可以包括拍摄车辆周围的图像的相机160。另外,所获得的车辆周围的图像能够使处理器170检测车辆周围的对象和对象的属性,以生成图像信息。
这里,该图像信息是至少一种信息,诸如对象的类型、对象示出的信号信息、对象与车辆之间的距离以及对象的位置,并且可以被包括在传感器信息中。具体地,处理器170可以执行对象分析,诸如通过图像处理从所拍摄的图像中检测图像,追踪对象、测量到对象的距离等,以生成图像信息。
这种相机160可以被设置在各种位置处。具体地,参照图4,相机160可以包括在车辆内部拍摄车辆700前方的图像以获取前方图像的内部相机160f。而且,多个相机160可以分别被设置在车辆700的左侧、后侧、右侧、前侧以及顶棚(ceiling)中的至少一个处。
左相机160b可以被设置在环绕左侧视镜的壳体中。另选地,左相机160b可以被设置在环绕左侧视镜的壳体外部。左相机160b也可以被设置在左前门、左后门或左挡泥板外部的区域中。
而且,右相机160c可以被设置在环绕右侧视镜的壳体中。另选地,右相机160c可以被设置在环绕右侧视镜的壳体外部。右相机160c也可以被设置在右前门、右后门或右挡泥板外部的区域中。
而且,后相机160d可以被设置在后牌照或后备箱开关附近,并且前相机160a可以被设置在标志或散热器护栅附近。处理器170也可以合成在所有方向上拍摄的图像以根据车辆700的顶视图提供全景图像。当生成全景图像时,在图像区域间产生边界。可以通过图像混合来自然地显示这些边界。
而且,顶相机160e可以被设置在车辆700的顶棚上以拍摄车辆700的前、后、左和右的图像。这种相机160也可以包括图像传感器和图像处理模块。相机160可以处理由图像传感器(例如,CMOS或CCD)获取的静态图像或视频。图像处理模块可以处理由图像传感器获取的静态图像或视频以提取必要图像信息,并且将所提取的图像信息传递给处理器170。
为了使处理器170更加容易地执行对象分析,相机160可以是与拍摄图像同时地测量到对象的距离的立体相机。即,在实施方式中,传感器单元可以通过立体相机实现距离传感器和相机160。即,立体相机可以同时获得图像并检测与对象之间的位置关系。
下面,参照附图5至附图7更加详细地描述通过使用立体相机由处理器170检测图像信息的方法。首先参照图5,立体相机160可以包括第一相机160a和第二相机160b,该第一相机160a包括第一镜头163a,该第二相机160b包括第二镜头163b。用于车辆的显示装置还可以包括分别用于防止光进入第一镜头163a和第二镜头163b的第一遮光罩162a和第二遮光罩162b。用于车辆的显示装置可以从第一相机160a和第二相机160b获取车辆周围的立体图像,基于该立体图像执行视差检测,基于该视差信息对至少一个立体图像执行对象检测,并且在对象检测之后,继续追踪对象的运动。
接下来,图6是处理器170的内部框图的示例,并且用于车辆的显示装置中的处理器170可以包括图像预处理器410、视差计算器420、对象检测器434、对象追踪单元440以及应用单元450。尽管在图5和下面的描述中,描述了按照图像预处理器410、视差计算器420、对象检测器434、对象追踪单元440和应用单元450的顺序来处理图像,但实施方式不限于此。
图像预处理器410可以从相机160接收图像以执行预处理。具体地,图像预处理器410可以对图像执行降低噪声、校正、校准、色彩增强、色彩空间转换(CSC)、内插、相机160增益控制等。因此,可以获取比由相机160拍摄的立体图像更清晰的图像。
视差计算器420可以接收被图像预处理器410信号处理后的图像,对所接收的图像执行立体匹配,并且根据立体匹配来获取视差图。即,可以获取关于车辆前方的立体图像的视差信息。
在这种情况下,可以在立体图像的像素或预定块的基础上执行立体匹配。视差图可以指利用数值表示关于立体图像(即,左图像和右图像)的双眼视差信息的图。
分段单元432可以基于来自视差计算器420的视差信息对至少一个图像执行分段和聚集。具体地,分段单元432可以基于视差信息将至少一个立体图像的背景与前景分开。例如,可以将视差信息小于或等于预定值的视差图的区域作为背景来进行计算,并且排除相应的部分。
因此,前景可以相对地被分开。作为另一示例,可以将视差信息等于或大于预定值的视差图的区域作为前景来进行计算,并且提取相应的部分。因此,前景可以被分开。因此,通过基于在立体图像基础上所提取的视差信息将前景与背景分开,可以在后续检测到对象时减小信号处理速度、信号处理量等。
接下来,对象检测器434可以基于来自分段单元432的图像片段来检测对象。即,对象检测器434可以基于视差信息从至少一个图像中检测对象。具体地,对象检测器434可以从至少一个图像中检测对象。例如,可以从被图像片段分开的前景中检测对象。
接下来,对象验证单元436可以分类并验证所分开的对象。因此,对象验证单元436可以使用以下方法:使用神经网络的识别方法、支持向量机(SVM)方法、通过使用Haar型特征的AdaBoost的识别方法、梯度方向直方图(HOG)方法等。
对象验证单元436也可以将存储器140中所存储的对象与所检测到的对象进行对比以验证对象。例如,对象验证单元436可以验证车辆周围的周边车辆、车道、路面、路标、危险区域、隧道等。
另外,对象追踪单元440可以执行对所验证对象的追踪。例如,依次可以在所获取的立体图像中验证对象、计算所验证对象的运动或运动矢量、并且基于计算出的运动或运动向量追踪相应对象的运动。因此,可以追踪车辆周围的周边车辆、车道、路面、路标、危险区域、隧道等。
接下来,应用单元450可以基于车辆周围的各种对象(诸如另一车辆、车道、路面、路标等)来计算车辆的风险程度。而且,可以计算与前方汽车碰撞的可能性、车辆是否打滑等。
另外,基于所计算的风险程度、碰撞可能性或打滑可能性,应用单元450可以输出用于向用户通知这种信息的消息,以作为驾驶员辅助信息。另选地,也可以生成用于姿势控制或驾驶控制的控制信号,以作为车辆控制信息。
图像预处理器410、视差计算器420、分段单元432、对象检测器434、对象验证单元436、对象追踪单元440以及应用单元450可以是处理器170中的图像处理器的内部组件。根据实施方式,处理器170可以仅包括图像预处理器410、视差计算器420、分段单元432、对象检测器434、对象验证单元436、对象追踪单元440以及应用单元450中的一些。如果相机160包括单目相机160或全景相机160,则视差计算器420可以被排除。根据实施方式,也可以不包括分段单元432。
参照图7,相机160可以获取针对第一帧部分的立体图像。处理器170中的视差计算器420可以接收被图像预处理器410信号处理后的立体图像FR1a和FR1b,并且对所接收的立体图像FR1a和FR1b执行立体匹配以获取视差图520。
视差图520根据等级表示立体图像FR1a与FR1b之间的视差,并且可以计算出视差等级越高,到车辆的距离越短,以及视差等级越低,到车辆的距离越长。当需要显示这种视差图时,该视差图也可以被显示成视差等级较高时具有高亮度以及视差等级较低时具有低亮度。
图7例示出在视差图520中第一车道528a至第四车道528d分别具有对应的视差等级,并且施工区域522、第一前方车辆524以及第二前方车辆526分别具有对应的视差等级。分段单元432、对象检测器434以及对象验证单元436基于视差图520对立体图像FR1a和FR1b中的至少一个执行分段、对象检测以及对象验证。
图7也例示出如何通过使用视差图520来检测并验证在第二立体图像FR1b上的对象。即,在图像530中,可以对第一车道538a至第四车道538d、施工区域532、第一前方车辆534以及第二前方车辆536执行对象检测和验证。
通过这样的图像处理,用于车辆的显示装置100可以获取对象信息,诸如车辆周围的对象的位置、大小、类型以及运动方向。具体地,用于车辆的显示装置100可以对与驾驶员通过挡风玻璃看到的情形对应的图像进行图像处理,并且获取图像中的对象信息以从驾驶员的角度确定显示图形图像的方法。即,用于车辆的显示装置100可以通过利用以上处理的对象信息在挡风玻璃上显示图形图像,以将对象与图形图像进行结合来向驾驶员提供增强现实。
接下来,用于车辆的显示装置100还可以包括显示单元180,该显示单元180显示用于辅助车辆驾驶的图形图像。这种显示单元180可以包括多个显示器。具体地,参照图8,显示单元可以包括第一显示单元180a,该第一显示单元180a将图形图像I投射并显示在车辆的挡风玻璃上。
即,第一显示单元180a可以是平视显示器(HUD),并且包括将图形图像I投射到挡风玻璃W上的投影模块。另外,被投影模块投射的图形图像I可以具有预定透明度。因此,用户也可以同时看到图形图像I以及该图形图像I背后的视野。
另外,图形图像I也可以与被投射到挡风玻璃W上的对象一起实现增强现实(AR)。显示单元可以包括被单独设置在车辆内部以显示与驾驶员辅助功能有关的图像的第二显示单元180b。具体地,第二显示单元180b可以是车辆内部的车辆导航装置或前仪表组(cluster)的显示器。
第二显示单元180b可以包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFTLCD)、有机发光二极管(OLED)、柔性显示器、3D显示器以及电子墨水显示器中的至少一个。这种第二显示单元180b可以与手势输入单元进行结合以形成触摸屏。车辆前方的图像可以被显示在这种第二显示单元180b上,并且除了前方的图像之外,图形图像I还可以被显示成辅助车辆驾驶,使得可以实现增强现实。
尽管在下面的描述中,主要描述第一显示单元180a,但车辆前方的图像可以被显示在第二显示单元180b上,并且当除了前方的图像之外用于辅助车辆驾驶的图形图像I也被显示在其上时,第一显示单元180a的描述也可以被应用于第二显示单元180b。
用于车辆的显示装置100还可以包括音频输出单元185和供电单元190。具体地,音频输出单元185可以通过声音输出对用于车辆的显示装置100的功能的描述、检查是否执行该功能的消息等。即,除了通过显示单元180的视觉显示之外,用于车辆的显示装置100还可以通过音频输出单元185的声音输出来补充对用于车辆的显示装置100的功能的描述。
供电单元190可以通过处理器170的控制来接收外部电力或内部电力,以供应各个组件的操作所需的电力。最后,用于车辆的显示装置100可以包括处理器170,该处理器170控制用于车辆的显示装置100中的各个单元的整体操作。
处理器170可以控制参照图3所讨论的组件中的至少一些,以便执行应用程序。而且,处理器170可以结合并操作用于车辆的显示装置100内的组件中的至少两个,以便执行应用程序。
处理器170可以通过使用以下中的至少一个来实现:专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器以及用于执行其它功能的电单元。
另外,这种处理器170可以被控制单元控制或通过控制单元来控制车辆700的各种功能。另外,除了与存储器140中存储的应用程序有关的操作之外,处理器170通常控制用于车辆的显示装置100的整体操作。处理器170可以处理通过上述组件输入或输出的信号、数据、信息等,或执行存储器140中存储的应用程序以向用户提供合适的信息或功能,或者处理相关的信息或功能。
具体地,处理器170可以确定与关于所检测的车辆周围的对象的信息对应的图形图像显示方法,并且能使显示单元根据所确定的图形图像显示方法来显示图形图像。这里,图形图像显示方法的确定可以是下列中的至少一个:图形图像在挡风玻璃上的位置、大小、透明度、饱和度、图形图像的颜色以及图形图像所显示的信息量。即,处理器170可以显示与关于车辆周围的对象的信息对应的图形图像,以提高图形图像识别水平并防止驾驶员的视线变得分散。
下面,描述确定与关于车辆周围的对象的信息对应的图形图像显示方法的各种示例。下面,参照图9描述根据车辆周围的情形通过用于车辆的显示装置100在挡风玻璃上显示图形图像的处理,并且图10A至图10D被提供以用于示例。
首先,在步骤S101中,用于车辆的显示装置100中的监测单元150可以获取关于驾驶员的目光的信息。获取关于驾驶员的目光的信息的理由是为了检查驾驶员通过挡风玻璃的哪个区域来观看外部对象。具体地,处理器170可以检测挡风玻璃中看到外部对象的区域,并基于所检测的区域确定图形图像显示方法,诸如图形图像的显示位置或大小或者图形图像所显示的信息量。
即,鉴于与挡风玻璃中看到外部对象的投影区域之间的位置关系而在挡风玻璃上显示图形图像。因此,监测单元150可以获取驾驶员的面部图像,并且处理器170可以检测驾驶员的面部的位置或驾驶员的视力方向,以获取关于驾驶员的目光的信息。
另外,在步骤S103中,用于车辆的显示装置100可以获取与通过相机160获取的驾驶员的目光相匹配的挡风玻璃的图像。具体地,相机160可以获取与驾驶员通过挡风玻璃看到的图像具有相同视点的挡风玻璃图像。即,通过相机160获取的挡风玻璃图像可以与驾驶员通过挡风玻璃看到的车辆外部的情形相匹配。
因此,处理器170也可以分析挡风玻璃图像以从该挡风玻璃图像中检测对象,并根据对象的位置和所占据的区域显示图形图像。例如,图10A例示了驾驶员通过挡风玻璃看到的车辆外部的情形,并且可以是通过相机160获取的挡风玻璃图像。
接下来,在步骤S105中,处理器170可以从挡风玻璃图像中检测车辆周围的对象。这里,车辆周围的对象可以是当驾驶时驾驶员应仔细观察的对象,并且可以包括另一车辆、行人、表示交通信息的交通信号(例如,车道、交通灯或人行横道)以及其它对象(例如,路边、街道树木或建筑物)。
如果图形图像被显示在驾驶员应仔细观察的对象上,则驾驶员的目光可能被分散,可能难以准确识别,并且因为图形图像与对象交叠,所以可能难以识别。因此,用于车辆的显示装置100可以检测驾驶员应关注的车辆周围的对象、显示图形图像以使得挡风玻璃上投射有所检测的对象的区域不交叠,并且从而可以防止驾驶员的目光变得分散并提高图形图像识别水平。
而且,这些对象可以仅是那些在距车辆预定距离之内的对象。即,因为在等于或大于距车辆的预定距离的距离处的对象并不是驾驶员应关注的对象,并且并不影响图形图像识别,所以它们可以被排除。例如,参照图10A,处理器170可以从挡风玻璃图像中检测作为车辆周围的对象的车道23、左转交通标志24、交通灯22、第一前方车辆21、第二前方车辆25以及周围的建筑物26和27。
另外,可以鉴于所检测到的车辆周围的对象来确定图形图像显示位置。具体地,如果图形图像被显示在前方车辆上,则驾驶员可能难以识别前方车辆,并且尤其难以确定到前方车辆的距离。因此,处理器170需要检测驾驶时驾驶员应观察的对象,并且显示图形图像,使得它不会妨碍对所检测的对象的识别。
因此,处理器170可以确定车道23、左转交通标志24、交通灯22、周围建筑物、第一前方车辆21和第二前方车辆25是车辆周围的对象。然而,可以确定周围建筑物当中的在预定距离之内的建筑物26和27是车辆周围的对象,并且在等于或大于预定距离的距离处的建筑物31和32可以被排除。
在步骤S107中,如果车辆周围的对象被检测到,则处理器170可以检测显示区域以显示图形图像。具体地,处理器170可以设置除了在其上投射有车辆周围的对象的挡风玻璃图像的区域之外的剩余区域以作为显示区域来显示图形图像。
例如,参照图10B,处理器170可以使用图形图像显示用于路线引导的导航图像。在这种情况下,处理器170可以在行驶道路L和行驶道路L的上方区域(例如,背景垂直于行驶道路)上显示导航图像,以使驾驶员能够更加直观地接收导航信息。
即,处理器170可以将行驶道路L和从行驶道路L的上方区域中排除前方车辆21之外的剩余区域设置为显示区域DA1和DA2。具体地,可以将前方车辆21下方的行驶道路L设置为第一显示区域DA1,以及将前方车辆21的上方区域设置为第二显示区域DA2。
即,处理器170可以将挡风玻璃上用于显示图形图像的位置设置为显示区域,使得行驶道路L上的前方车辆21不与图形图像交叠。另外,在步骤S109中,处理器170可以根据显示区域显示图形图像。
具体地,处理器170可以根据尺寸和位置确定要在显示区域上显示的图形图像,并且在显示区域上显示所确定的图形图像。例如,参照图10C,当第一显示区域DA1具有足够的尺寸时,处理器170可以在第一显示区域DA1上显示导航图像I。如果车辆与前方车辆21之间的距离逐渐增大,并且第一显示区域DA1的尺寸减小且因此等于或小于预定尺寸,则可能难以在第一显示区域DA1上显示导航图像I。
参照图10D,如果第一显示区域DA1小于预定尺寸,则处理器170可以在第二显示区域DA2上显示图形图像,该第二显示区域DA2为前方车辆21的上方区域(在行驶道路L的上方)。即,处理器170可以根据车辆周围的情形变化继续检测显示区域,并且可以在所检测到的显示区域上显示图形图像。另一方面,当到前方车辆21的距离等于或大于预定距离时,处理器170可以在行驶道路L上显示导航图像I,并且如果通过行驶,到前方车辆21的距离小于或等于预定距离时,则处理器170可以在前方车辆21的上方显示导航图像I。
总之,如果确定挡风玻璃上的行驶道路L的区域尺寸足够,则处理器170可以在行驶道路L上显示导航图像I,并且如果前方车辆21遮挡了行驶道路L,则处理器170可以在前方车辆21的上方显示导航图像I,使得驾驶员可以继续识别导航图像I。即,根据实施方式的用于车辆的显示装置100可以根据周围环境在合适的位置处显示图形图像,以防止驾驶员的目光变得分散并且提供具有高识别水平的图形图像显示功能。
下面,参照图11A至图23描述用于车辆的显示装置100根据车辆周围的具体情形的变化通过使用各种显示方法显示图形图像的具体示例。参照图11A,用于车辆的显示装置100可以检测驾驶员D的视力方向,并基于所检测的视力方向在挡风玻璃上显示图形图像I。具体地,如先前所述,可以在与通过挡风玻璃看见的行驶道路L或行驶道路L的上方区域对应的挡风玻璃的区域处显示图形图像I。
然而,如图11B所示,如果驾驶员D的视力方向改变,则通过其看见行驶道路L的挡风玻璃的区域也随之改变,从而如果图形图像I被显示在与之前相同的位置处,则可能限制驾驶员D看到对象与图形图像I交叠的视图。
即,当图形图像I和周围图像形成并显示增强现实时,如果驾驶员D的视力方向改变,则图形图像I与周围对象之间的位置关系可能会出错。为防止此,处理器170可以根据驾驶员D的视力方向的改变来校正并同时移动图形图像I的位置,使得周围对象与图形图像I之间的位置关系被恒定地维持。
即,如果检测到驾驶员D的目光的变化,则处理器170可以根据所检测到的目光的变化同时移动图形图像I,使得驾驶员D识别出图形图像I与参考对象之间的位置关系是固定的。
接下来,用于车辆的显示装置100可以根据显示区域的尺寸和位置来改变要被显示的图形图像I的信息量或尺寸。具体地,参照图12A,处理器170可以检测到作为车辆周围的对象的前方车辆41以及左边和右边的建筑物42,并将不包括它们的区域设置为显示区域DA3。在这种情况下,与挡风玻璃的水平方向对应的显示区域DA3可以具有相对较大的尺寸。
因此,处理器170可以增大要被显示在显示区域DA3上的图形图像I上的信息量。例如,处理器170不仅还可以包括作为要被显示为图形图像I的信息的导航图像I,而且还可以包括周围交通信息、当前车速、新进入地区的信息等。即,如图12A所示,图形图像I1可以具有与显示区域DA3的尺寸对应的条状,并且可以包括表示周围交通信息、当前车速以及新进入地区的信息的图像。
处理器170可以检测到显示区域的尺寸被周围对象减小。参照图12B,可以看出由于挡风玻璃中看见周围建筑物42的区域增大,所以显示区域DA4的尺寸减小。如果显示区域DA4的尺寸减小,则处理器170可以减少与显示区域DA4的减小的尺寸对应的图形图像I2上的信息量。
例如,如图12B所示,处理器170可以仅显示在显示区域DA4上具有高度重要性的导航图像I2。即,如果处理器170检测到在车辆周围存在许多对象,并且因此存在复杂的情形,则处理器170可以简单地显示图形图像I,以增加具有高度重要性的信息的传递,并且如果在车辆周围存在很少的对象,且因此要显示图形图像I的区域变宽,则可以提供大量信息以提高驾驶员的便利性。
接下来,用于车辆的显示装置100也可以根据车辆的速度来改变并显示图形图像I。处理器170可以在挡风玻璃的下端上显示条状的图形图像。具体地,由于挡风玻璃的下部区域是看见车辆的发动机罩的区域,因此可以将下部区域固定为显示区域,并显示条状的图形图像。
当车辆的速度较低时,处理器170可以增加要被显示在显示区域上的图形图像I上的信息量。例如,处理器170不仅还可以包括作为要被显示为图形图像I的信息的导航图像,而且还可以包括周围交通信息、当前车速、新进入地区的信息等。
即,如图13A所示,图形图像I3可以具有与挡风玻璃的水平方向对应的条状尺寸,并且可以包括表示周围交通信息、当前车速、新进入地区的信息的图像。处理器170可以从传感器信息中检测出车辆的速度等于或高于预定速度。
另外,如果检测到车辆的速度等于或高于预定速度,则处理器170可以减少图形图像上的信息量并且减小图形图像的尺寸。例如,如图13B所示,处理器170可以在显示区域上仅显示具有高度重要性的导航图像I4。
即,当车辆快速行驶时,用于车辆的显示装置100可以简单地显示图形图像I4,以增加具有高度重要性的信息的传递,并且当车辆慢速行驶并且因此显示图形图像I3的区域变宽时,可以提供大量信息以提高驾驶员的便利性。
接下来,用于车辆的显示装置100可以根据周围交通来确定并显示图形图像显示方法。具体地,参照图14A,处理器170可以检测到车辆正在社区或当地道路上运行,且因此没有车辆或有少数车辆。
在具有很少的交通流量的地区中,处理器170可以增加图形图像I上的信息量。例如,处理器170不仅还可以包括作为要被显示为图形图像I的信息的导航图像I6,而且还可以包括周围交通信息I7、限速信息I8等。即,如图14A所示,当在社区道路上行驶时,处理器170可以在显示区域DA中显示表示“保护儿童”地区的图形图像I7、导航图像I6以及表示限速的图形图像I8。
如果在车辆周围检测到许多其它车辆,则处理器170可以确定存在大量的交通流量。参照图14B,可以看出检测到许多周围车辆51,且因此存在繁忙的交通状况。在存在大量的交通流量的地区中,处理器170可以减少图形图像I9上的信息量,并且可以减小图形图像I9的尺寸。
例如,如图14B所示,处理器170可以在显示区域上仅显示具有高度重要性的导航图像I9。即,当存在大量的周边交通流量时,用于车辆的显示装置100可以简单地显示图形图像I9,以增加具有高度重要性的信息的传递,并且当存在很少的交通流量时,可以提供大量信息以提高驾驶员的便利性。
接下来,如果从盲点检测到具有碰撞风险的对象,则用于车辆的显示装置100可以显示警示图形图像。参照图15A,通过传感器单元,用于车辆的显示装置100可以从在挡风玻璃上看不见的左盲点LBS和右盲点RBS中检测到对象O。
具体地,如果处理器170检测到从左盲点LBS向右移动或从右盲点RBS向左移动的对象O,则可以确定该对象是碰撞风险对象O。如果从盲点中检测到碰撞风险对象,则处理器170可以显示警示具有碰撞风险对象的图形图像。
具体地,参照图15B,处理器170可以显示第一图形图像I11,该第一图形图像I11表示碰撞风险对象在与碰撞风险对象所位于的方向对应的挡风玻璃的区域上的存在和方向。具体地,当从右盲点RBS中检测到碰撞风险对象时,处理器170可以显示用右箭头表示并在挡风玻璃的最右边上进行警示的第一图形图像I11。
另外,处理器170可以显示在挡风玻璃的四个边缘上显示的第二图形图像I12,以向驾驶员清楚地传递警示的含义。处理器170可以根据碰撞风险的程度(对象与车辆之间的距离)逐渐地显示具有高识别水平的图形图像。
例如,到碰撞风险对象的距离越短,处理器170可以增大图形图像的饱和度、亮度或尺寸,并且反复显示图形图像以提高识别水平。考虑到驾驶员的视线区域,用于车辆的显示装置100也可以显示警示碰撞风险的图形图像I。
具体地,由于驾驶员很难看一眼就能看见整个挡风玻璃,因此处理器170可以通过监测单元150来检测驾驶员主要看见的视线区域。例如,处理器170可以将一般人的视线角度设置为约60度,并且可以确定基于驾驶员的视力方向的60度以内的挡风玻璃的区域为驾驶员的视线区域。
更具体地,参照图15C,可以将视线区域的上边界线指定为挡风玻璃的上边界线,将其下边界线指定为看见车辆的发动机罩的点,将其左边界线指定为挡风玻璃的左边界线,以及将右边界线指定为从驾驶员的视力方向减少了60度的点(例如,在右侧距离驾驶员的目光约为103cm的点)。
另外,如上述警示碰撞风险的第一图形图像I11和第二图形图像I12可以被显示在驾驶员的视线区域中。具体地,如图15C所示,处理器170可以在驾驶员的视线区域的边缘上显示第二图形图像I12,并且可以在驾驶员的视线区域的右边界线上显示第一图形图像I11。
即,用于车辆的显示装置100可以在挡风玻璃的与驾驶员的视力方向对应的区域中显示图形图像I,以向驾驶员清楚地传递警示信息。用于车辆的显示装置100也可以显示图形图像,使得该图像在特殊情形中与车辆周围的对象交叠。具体地,用于车辆的显示装置100可以从传感器信息中检测车辆的转向状态,并且如果预测到转向状态的车辆偏离车道,则可以显示警示偏离车道23的图形图像。
参照图16A,由于当前的转向状态,用于车辆的显示装置100可以在从其执行偏离的车道61处显示表示偏离车道61的风险的图形图像I22,以便有效地警示偏离车道61。用于车辆的显示装置100可以预测车辆的行进方向,以便将车辆移动至的地方显示为虚拟的图形图像I22,使得可以更加直观地传递图形图像I22为警示偏离车道61的图像。
即,用于车辆的显示装置100可以基于车辆的转向和速度检测车辆偏离的车道61,并且可以在所检测的车道61中显示警示偏离车道的图形图像I22,使得驾驶员直观地觉察到他或她处于偏离车道61的情形。
用于车辆的显示装置100还可以在挡风玻璃的下端以条状显示表示导航图像、行进速度等的图形图像I23。另外,在诸如偏离车道的紧急情形下,用于车辆的显示装置100可以使用在下端设置的条状来向驾驶员警示该紧急情形。
例如,如图16B所示,用于车辆的显示装置100可以用表示紧急情形的图形图像I24取代典型显示的条状图形图像I23,以更加清楚地向驾驶员传递紧急情形。而且,如果检测到紧急情形并且确定驾驶员未能看见紧急情形,则用于车辆的显示装置100也可以在驾驶员的视力方向上显示表示紧急情形的图形图像I。
具体地,参照图17,当前方车辆70突然减速时,处理器170可以通过传感器单元检测到紧急情形。在这种情况下,处理器170可以显示表示与前方车辆70碰撞的风险的第一图形图像I31,使得该图像与前方车辆70交叠。另外,处理器170可以检测到通过监测单元150检测到的驾驶员的目光面向另一区域(例如,左上端),而不是面向前方车辆70。
即,如果发生紧急情形的地方与驾驶员的视力方向不匹配,则处理器170可以在与驾驶员的视力方向对应的挡风玻璃的区域中显示指示发生紧急情形的地方的图形图像I32,以使驾驶员的目光能够移动到发生紧急情形的地方。
即,用于车辆的显示装置100可以将警示碰撞风险的第一图形图像I31与碰撞风险对象交叠,并且在驾驶员的视力方向上显示指示碰撞风险的第二图形图像I32,以使驾驶员能够快速觉察到碰撞风险情形,因此可以降低事故的风险。
在另一特殊情形中,用于车辆的显示装置100可以显示图形图像I,使得该图像与车辆周围的对象交叠。具体地,参照图18A,当到大车辆80的距离较短时,因为挡风玻璃的大部分区域被前方大车辆80遮挡,所以用于车辆的显示装置100可以检测到没有区域显示图形图像。
即,用于车辆的显示装置100可以将前方车辆80中的预定区域指定为显示区域,而不是将不包括前方车辆80的区域指定为显示区域。具体地,参照图18B,处理器170可以将前方车辆80的中间区域指定为显示区域DA20,并且可以在该显示区域中显示导航图像I40。
即,处理器170可以检测要显示图形图像I40的空白区域,将该空白区域指定为显示区域DA20,并且然后在其中显示图形图像I40。用于车辆的显示装置100可以通过具有预定透明度的地毯式(carpet)图像来显示导航图像。该地毯式图像可以引导到车辆行驶所在的特定车道以提供详细的导航信息,使得驾驶员可以更加容易地驾驶。
具体地,参照图19,如果通过挡风玻璃能很好地看见行驶道路,则用于车辆的显示装置100可以在行驶道路上显示地毯式图像I42以执行路线引导。在这种情况下,用于车辆的显示装置100还可以显示突出表示在行驶道路上所显示的各种交通信息的对象的图形图像I42和I43,使得地毯式图像I42不遮挡交通信息,且从而驾驶员识别出交通信息。
用于车辆的显示装置100可以根据道路周围情形的变化有效地显示地毯式图像。而且,参照图20A,为了在提高行驶道路的识别水平的同时有效地示出行驶道路,用于车辆的显示装置100可以使用多个具有预定透明度的箭头,以显示导航图像I51。另外,用于车辆的显示装置100也可以在挡风玻璃的下端显示表示车辆的速度和未来路线引导的图形图像I52。
参照图20B,由于另一车辆93进入到行驶道路,因此导航图像I51的显示区域可能会减小。即,如果检测到在行驶道路上显示的导航图像I的区域被一定程度地遮挡,则处理器170可以在遮挡导航图像I的另一车辆93周围显示附加的导航图像I53。
即,当驾驶员难以识别现有的图形图像I时,用于车辆的显示装置100可以继续检测车辆周围的情形,并且可以显示附加的图形图像I53。用于车辆的显示装置100还可以显示表示关于车辆周围的兴趣点(POI)的信息的图形图像。例如,如果在车辆的目的地或车辆周围存在驾驶员感兴趣的商务,则用于车辆的显示装置100还可以显示表示POI的图形图像。
参照图21,当车辆靠近目的地时,用于车辆的显示装置100还可以包括表示目的地95的图形图像I61。然而,当另一对象94遮挡了目的地95时,图形图像I61可能不能传递准确的信息。
为了克服这种限制,当目的地95被对象94遮挡时,用于车辆的显示装置100可以检测目的地95的位置,并且显示包括从目的地延伸的箭头图像和表示目的地信息的图像的图形图像I61。用于车辆的显示装置100可以确定所检测对象的风险程度,并且可以根据风险程度来改变图形图像的显示方法。
这里,对象的风险程度可以基于对象的类型被确定,且例如,风险程度可以按照行人、两轮车辆和车辆的顺序降低。对象的风险程度可以由到车辆的距离、碰撞的风险程度等来确定。
另外,当检测到具有高风险程度的对象时,用于车辆的显示装置100可以根据所检测到的对象信息改变并显示图形图像。例如,参照图22,当检测到行人96时,用于车辆的显示装置100可以显示突出行人96的图形图像I71,并且可以控制先前所显示的导航图像I72的饱和度、亮度、尺寸等,以降低图像的识别水平。例如,突出行人的第一图形图像171可以使用具有高亮度的红色以提高识别水平,并且可以相对地降低导航图像I72的亮度或以浅色显示该图像以降低识别水平。
用于车辆的显示装置100可以根据车辆导航信息来改变图形图像显示方法。具体地,参照图23,如果表示右转的导航图像I81到交叉路口具有较长距离,则用于车辆的显示装置100可以相对地减小导航图像I81的尺寸,并且随着与交叉路口的距离的减小,增大导航图像I82的尺寸。例如,随着到交叉路口的距离的减小,用于车辆的显示装置100可以增大右转标志,使得可以向驾驶员传递直观的路线引导信息。
总之,用于车辆的显示装置100可以检测在挡风玻璃上看见的车辆周围的对象、根据关于车辆周围的对象的信息改变图形图像I的显示方法、提高图形图像I的识别水平并且同时阻止驾驶员的目光变得分散。
也可以在车辆中安装并实现这种用于车辆的显示装置100。参照图24,先前描述的用于车辆的显示装置可以被包括在车辆中。该车辆可以包括通信单元710、输入单元720、感测单元760、输出单元740、车辆驱动单元750、存储器730、接口单元780、控制单元770、供电单元790、用于车辆的显示装置100和AVN装置400。这里,描述了在用于车辆的显示装置100中的单元和车辆700中的单元当中具有相同名称的单元被包括在车辆700中。
通信单元710可以包括能实现车辆和移动终端600之间、车辆与外部服务器510之间或车辆与其它车辆520之间的无线通信的一个或更多个模块。通信单元710可以包括将车辆连接至一个或更多个网络的一个或更多个模块。通信单元710可以包括广播接收模块711、无线互联网模块712、短距离通信模块713、位置信息模块714和光学通信模块715。
广播接收模块711通过广播信道从外部广播管理服务器接收广播信号或广播相关信息。在该示例中,广播包括无线电或TV广播。无线互联网模块712指示用于无线互联网接入的模块并且可以内置于或外置于车辆。无线互联网模块712被配置为根据无线互联网技术在通信网络中发送/接收无线信号。
无线互联网技术可以包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直接、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作(WiMAX)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、长期演进(LTE)和长期演进-高级(LTE-A),并且无线互联网模块712根据至少一种无线互联网技术(包括以上没有列出的互联网技术)发送/接收数据。例如,无线互联网模块712可以与外部服务器510无线地交换数据。无线互联网模块712可以从外部服务器510接收天气信息或道路交通信息(例如,TPEG)。
短距离通信模块713可以通过使用蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直接和无线通用串行总线(无线USB)技术中的至少一种来支持短距离通信。
该短距离通信模块713可以形成无线域网(WAN)以在车辆和至少一个外部装置之间执行短距离通信。例如,短距离通信模块713可以与移动终端600交换数据。短距离通信模块713可以从移动终端600接收天气信息或道路交通信息(例如,TPEG)。如果用户进入车辆,则用户的移动终端600和车辆可以自动地或者通过由用户执行应用来执行彼此配对。
作为典型示例,位置信息模块714是用于获取车辆位置的模块并且包括GPS模块。例如,当使用GPS模块时,车辆可以使用由GPS卫星发送的信号来获取车辆的位置。
光学通信模块715可以包括光发射单元和光接收单元。光接收单元可以将光信号转换成电信号以接收信息。光接收单元可以包括用于接收光的光电二极管(PD)。PD可以将光转换成电信号。例如,光接收单元可以通过从前方车辆中包括的光源发射的光接收关于前方车辆的信息。
光发射单元可以包括用于将电信号转换成光信号的至少一个发光元件。在该示例中,发光元件可以是发光二极管(LED)。光发射单元可以将电信号转换成光信号,以将光信号发送到外部。例如,光发射单元可以通过开/关对应于预定频率的发光元件来将光信号发送到外部。根据实施方式,光发射单元可以包括多个发光元件阵列。根据实施方式,光发射单元可以被集成在安装于车辆的灯中。例如,光发射单元可以是前灯、尾灯、刹车灯、转向信号灯和侧灯中的至少一个。例如,光学通信模块715可以通过光学通信与其它车辆520交换数据。
输入单元720可以包括驾驶操纵单元721、相机722、麦克风723和用户输入单元724。驾驶操纵单元721接收用于驾驶车辆的用户输入,并且包括转向输入机构721A、换挡输入机构721D、加速输入机构721C和制动输入机构721B(参见图8)。
转向输入机构721A从用户接收对车辆的行驶方向的输入,并且可以是轮盘,使得可以通过转动来执行转向输入。根据实施方式,转向输入机构721A也可以被形成为触摸屏、触摸板或按钮。
换挡输入机构721D从用户接收针对车辆的停驶P、驾驶D、空挡N和后退R的输入。换挡输入机构721D可以形成为操纵杆的形式。根据实施方式,换挡输入机构721D还可以形成为触摸屏、触摸板或按钮。
加速输入机构721C从用户接收用于车辆加速的输入。制动输入机构721B从用户接收用于车辆减速的输入。加速输入机构721C和制动输入机构721B可以形成为踏板的形式。根据实施方式,加速输入机构721C或制动输入机构721B还可以形成为触摸屏、触摸板或按钮。
相机722可以包括图像传感器和图像处理模块。相机722可以处理由图像传感器(例如,CMOS或CCD)获得的静态图像或视频。图像处理模块可以处理由图像传感器获取的静态图像或视频以提取必要的信息,并且将所提取的信息发送到处理器770。
车辆可以包括拍摄车辆前方的图像或车辆周围的图像的相机722以及拍摄车辆内部的图像的监测单元150。监测单元150可以获取乘客的图像。监测单元150可以获取乘客的生物特征的图像。
尽管图24示出了监测单元150和相机722被包括在输入单元720中,但是相机722也可以被包括在上述用于车辆的显示装置中。麦克风723可以将外部声音信号处理成电信号。可以根据在车辆处执行的功能按各种方法来使用处理后的数据。麦克风723可以将用户的语音命令转换成电信号。通过转换而获得的电数据可以被发送到控制单元770。
根据实施方式,相机722或麦克风723还可以是包括在感测单元760而不包括在输入单元720中的组件。用户输入单元724从用户接收信息。当通过用户输入单元724输入信息时,控制单元770可以对应于输入信息来控制车辆的操作。用户输入单元724可以包括触摸型输入装置或机械输入装置。根据实施方式,用户输入单元724可以设置在方向盘的区域中。在这种情况下,驾驶员可以用他或她的手指来操纵用户输入单元724,同时握住方向盘。
感测单元760感测与车辆的驾驶相关的信号。因此,感测单元760可以包括轮盘传感器、速度传感器、倾斜传感器、重量传感器、航向传感器、偏航传感器、陀螺仪传感器、位置模块、车辆前/后移动传感器、电池传感器、燃料传感器、轮胎传感器、利用方向盘旋转的转向传感器、车辆温度传感器、车辆湿度传感器、超声传感器、雷达、激光雷达等。
因此,感测单元760可以获取针对车辆碰撞信息、车辆方向信息、车辆位置信息(GPS信息)、车辆角度信息、车辆速度信息、车辆加速度信息、车辆倾斜信息、车辆前/后移动信息、电池信息、燃料信息、轮胎信息、车辆灯信息、车辆温度信息、车辆湿度信息、方向盘旋转角度等的感测信号。
感测单元760还可以包括加速踏板传感器、大气压传感器、发动机速度传感器、气流传感器(AFS)、空气温度传感器(ATS)、水温传感器(WTS)、油门位置传感器(TPS)、TDC传感器、曲轴位置传感器(CAS)等。
感测单元760可以包括生物计量识别信息感测单元。生物计量识别信息感测单元感测并获取关于乘客的生物计量识别信息。生物计量识别信息可以包括指纹信息、虹膜扫描信息、视网膜扫描信息、掌纹信息、面部识别信息和语音识别信息。生物计量识别信息感测单元可以包括感测乘客的生物计量识别信息的传感器。在这种情况下,监测单元150和麦克风723可以操作为传感器。生物计量识别信息感测单元可以通过监测单元150获取掌纹信息和面部识别信息。
输出单元740用于输出由控制单元770处理的信息并且可以包括显示单元741、声音输出单元742和触觉输出单元743。显示单元741可以显示由控制单元770处理的信息。例如,显示单元741可以显示车辆相关信息。在该示例中,车辆相关信息可以包括用于直接控制车辆的车辆控制信息或用于对驾驶员进行驾驶指导的驾驶员辅助信息。车辆相关信息可以包括指示车辆当前状态的车辆状态信息或与操作车辆相关的车辆操作信息。
显示单元741可以包括LCD、TFT LCD、OLED、柔性显示器、3D显示器和电子墨水显示器中的至少一种。显示单元741可以与触摸传感器形成交互层结构或者可以一体地形成以实现触摸屏。触摸屏可以用作提供车辆和用户之间的输入界面的用户输入单元,并且还提供车辆和用户之间的输出界面。
在这种情况下,显示单元741可以包括感测对显示单元741的触摸从而能够接收利用触摸的控制命令的触摸传感器。因此,当触摸显示单元741时,触摸传感器感测该触摸并且控制单元770可以基于该触摸生成对应于触摸的控制命令。由触摸输入的内容可以是可以按各种模式指示或指定的字母、数字或菜单条目。
显示单元741可以包括群集显示器(cluster),使得驾驶员可以在驾驶的同时看到车辆状态信息或车辆操作信息。群集显示器可以位于仪表盘上。在这种情况下,驾驶员可以看到群集显示器上显示的信息,从而保持前视。
根据实施方式,显示单元741可以被实现为HUD。当显示单元741被实现为HUD时,可以通过安装在挡风玻璃上的透明显示器来输出信息。另选地,显示单元741可以包括投影模块,以通过使用投射到挡风玻璃上的图像来输出信息。
声音输出单元742将来自控制单元770的电信号转换成音频信号并且输出该音频信号。因此,声音输出单元742可以包括扬声器等。声音输出单元742还可以对应于用户输入单元724的操作来输出声音。触觉输出单元743产生触觉输出。例如,触觉输出单元743可以能使方向盘、安全带和座椅振动,使得用户可以识别到输出。
车辆驱动单元750可以控制车辆的各种设备的操作。车辆驱动单元750可以包括动力源驱动单元751、转向驱动单元752、制动驱动单元753、灯驱动单元754、空调驱动单元755、窗户驱动单元756、气囊驱动单元757、天窗驱动单元758和悬架驱动单元759。
动力源驱动单元751可以执行对车辆内的动力源的电控制。例如,当动力源是基于化石燃料的发动机时,动力源驱动单元751可以对发动机执行电控制。因此,可以控制发动机的输出转矩。当动力源驱动单元751是发动机时,可以限制发动机的输出转矩,以限制车辆的速度。
作为另一示例,当动力源是基于电力的电机时,动力源驱动单元751可以控制电机。因此,可以控制电机的速度、转矩等。转向驱动单元752可以对车辆内的转向设备执行电控制。因此,可以改变车辆的驾驶方向。
制动驱动单元753可以对车辆内的制动设备执行电控制。例如,可以控制安装在车轮上的制动器的操作,以降低车辆的速度。作为另一示例,通过分别启用设置在左轮和右轮处的制动器来执行不同操作,可以将车辆的驾驶方向调节成向左或向右。
灯驱动单元754可以控制设置在车辆内部和外部的灯的开/关。另外,可以控制从灯发射的光的强度、方向等。例如,可以控制转向信号灯、刹车灯等。空调驱动单元755可以对车辆内的空调执行电控制。例如,当车辆内部的温度很高时,可以操作空调,使得冷空气被供应到车辆内。
窗户驱动单元756可以对车辆内的窗户设备执行电控制。例如,可以打开或关闭车辆的左窗和右窗。气囊驱动单元757可以对车辆内的气囊设备执行电控制。例如,可以在危险情形下操作气囊。
天窗驱动单元758可以对车辆内的天窗设备执行电控制。例如,可以打开或关闭天窗。悬架驱动单元759可以对车辆内的悬架设备执行电控制。例如,当道路表面不平时,可以控制悬架设备以减小车辆的振动。
存储器730电连接到控制单元770。存储器730可以存储关于单元的基础数据、用于对单元进行操作控制的控制数据以及输入和输出数据。存储器730可以是作为硬件的各种存储装置,诸如ROM、RAM、EPROM、闪存驱动器和硬盘驱动器。存储器730可以存储用于车辆整体操作的各条数据(诸如,供控制单元770处理或控制的程序)。
接口730可以用作通向与车辆连接的各种类型的外部装置的路径。例如,接口单元780可以包括可与移动终端600连接的端口并且通过该端口连接到移动终端600。在这种情况下,接口单元780可以与移动终端600交换数据。
接口单元780可以用作向移动终端600供应电能所通过的路径。当移动终端600电连接到接口单元780时,接口单元780根据控制单元770的控制将从供电单元790供应的电能供应到移动终端600。
控制单元770可以控制车辆内的各单元的整体操作。控制单元770可以被命名为电子控制单元(ECU)。该控制单元770可以根据用于车辆的显示装置100的执行信号发送来执行对应于被发送的信号的功能。
可以通过使用ASIC、DSP、DSPD、PLD、FPGA、处理器、控制器、微控制器、微处理器和用于执行功能的其它电子单元中的至少一个来实现控制单元770。控制单元770可以执行上述处理器170的作用。即,驾驶员辅助设备100中的处理器170可以被直接设置到车辆的控制单元770。在这种实施方式中,可以理解的是,用于车辆的显示装置100涉及车辆的一些组件。
另选地,控制单元770还可以控制组件,以发送由处理器170请求的信息。供电单元790可以根据控制单元770的控制来供应各组件操作所需的电力。具体地,供电单元790可以从车辆内的电池接收电力。
AVN设备400可以与控制单元770交换数据。控制单元770可以从AVN设备400或单独的导航设备接收导航信息。在该示例中,导航信息可以包括设定目的地信息、根据目的地的路线信息、车辆驾驶相关的地图信息或车辆位置信息。
根据实施方式的用于车辆的显示装置可以根据车辆周围的对象的位置在挡风玻璃上显示图形图像,以通过根据车辆周围的情形使用最佳显示方法来向驾驶员提供图形图像,使得可以在不干扰驾驶员驾驶的情况下有效地提供信息。
具体地,用于车辆的显示装置可以设置显示区域,使得通过挡风玻璃示出的对象不与图形图像交叠,并且可以显示适合于显示区域的尺寸的图形图像,以在不阻挡驾驶员的视线的情况下有效地传递必要信息。
用于车辆的显示装置可以根据驾驶员目光的变化一起移动图形图像,以使驾驶员能够识别出该图形图像与参照对象之间的位置关系固定,因此可以提高图形图像的识别水平。而且,如果用于车辆的显示装置检测到在车辆周围存在许多对象并且因此存在复杂情形,则它可以简单地显示图形图像以增加具有高度重要性的信息的传递,并且如果在车辆周围存在很少的对象并且因此显示图形图像的区域变宽,则可以提供大量信息以提高驾驶员的便利性。
当车辆快速行驶时,用于车辆的显示装置可以简单地显示图形图像,以增加具有高度重要性的信息的传递,并且当车辆慢速行驶且因此显示图形图像的区域变宽时,可以提供大量信息,以提高驾驶员的便利性。
而且,当存在大量的周边交通流量时,用于车辆的显示装置可以简单地显示图形图像,以增加具有高度重要性的信息的传递,并且当存在很少的交通流量时,可以提供大量信息,以提高驾驶员的便利性。如果从盲点检测到碰撞风险对象,则用于车辆的显示装置可以显示警示存在碰撞风险对象的图形图像。
用于车辆的显示装置可以在挡风玻璃的与驾驶员的视力方向对应的区域中显示图形图像,以清楚地向驾驶员传递警示信息。
本发明包含对本文中所讨论的各个示例和实施方式的各种修改。根据本发明,在以上一种实施方式或示例中所描述的一个或更多个特征同样可以应用于上述另一实施方式或示例。上述一种或更多种实施方式或示例的特征可以被结合到上述各实施方式或示例中。本发明的一种或更多种实施方式或示例的任何全部或部分结合也是本发明的一部分。
由于在不脱离其精神或必要特征的情况下本发明可以按照多种形式来实现,因此也应理解的是,除非另有说明,否则上述实施方式不受以上描述的任何细节限制,而是应在所附权利要求书中所限定的其精神和范围内广泛地解释,且因此落入权利要求书的界限和边界或该界限和边界的等同物内的所有改变和修改因此旨在被所附权利要求书涵盖。

Claims (20)

1.一种用于车辆的显示装置,该显示装置包括:
相机,所述相机被配置成获取所述车辆周围的图像;
显示单元,所述显示单元被配置成在所述车辆的挡风玻璃上显示图形图像;以及
处理器,所述处理器被配置成:
检测包括在被所述车辆的驾驶员观看到的所获取的图像中的至少一个对象,
确定所检测的对象的信息,所述信息包括所述挡风玻璃的观看到所述对象的区域的位置和尺寸以及所述对象的类型,并且
基于所确定的所述对象的信息来控制所述显示单元以在所述挡风玻璃的区域上显示所述图形图像。
2.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成基于所检测的对象来控制所述显示单元以显示被包括在所述图形图像中的信息量。
3.根据权利要求1所述的用于车辆的显示装置,其中,所检测的对象包括:在被所述驾驶员观看到的所获取的图像中包括的另一车辆、交通标志和行人中的至少一个,并且
其中,所述处理器被配置成控制所述显示单元以在不包括观看到所检测的对象的透明区域的挡风玻璃区域上显示所述图形图像。
4.根据权利要求3所述的用于车辆的显示装置,其中,所述图形图像是示出所述车辆的路线的导航图像,并且
其中,所述处理器被配置成:
将观看到所述车辆行驶的行驶道路的投影区域设置为第一显示区域,
将观看到所述行驶道路的上方区域的投影区域设置为第二显示区域,并且
控制所述显示单元以在所述第一显示区域或所述第二显示区域中显示所述导航图像。
5.根据权利要求4所述的用于车辆的显示装置,其中,所述处理器被配置成:
当所述第一显示区域的尺寸等于或大于预定尺寸时,控制所述显示单元以在所述第一显示区域中显示所述导航图像,并且
当所述第一显示区域的尺寸小于所述预定尺寸时,控制所述显示单元以在所述第二显示区域中显示所述导航图像。
6.根据权利要求4所述的用于车辆的显示装置,其中,所述处理器被配置成:
当到在所述车辆的前方驾驶的前方车辆的距离等于或大于预定距离时,控制所述显示单元以在所述第一显示区域中显示所述导航图像,并且
当到所述前方车辆的距离小于所述预定距离时,控制所述显示单元以在所述第二显示区域中显示所述导航图像。
7.根据权利要求4所述的用于车辆的显示装置,其中,所述处理器被配置成:
控制所述显示单元以在所述第一显示区域中使用地毯式图像来显示所述导航图像,并且
控制所述显示单元以在所述第二显示区域中使用箭头图像来显示所述导航图像。
8.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:
当在被所述驾驶员观看到的所获取的图像中存在大量的交通流量时,减少所述图形图像的尺寸或所述图形图像上的信息量,并且
当在被所述驾驶员观看到的所获取的图像中存在少量的交通流量时,增加所述图形图像的尺寸或所述图形图像上的信息量。
9.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:
当所述车辆的速度低于预定速度时,控制所述显示单元以显示包括导航图像和周围交通信息的所述图形图像,并且
当所述车辆的速度等于或高于所述预定速度时,控制所述显示单元仅显示所述导航图像。
10.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:响应于从盲点中检测到碰撞风险对象,控制所述显示单元以在所述挡风玻璃上显示指示所述碰撞风险对象的位置的第一图形图像。
11.根据权利要求10所述的用于车辆的显示装置,其中,所述处理器被配置成:响应于检测到所述碰撞风险对象,控制所述显示单元以在所述挡风玻璃的边缘上显示表示碰撞风险的第二图形图像。
12.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:控制所述显示单元来显示交叠的图形图像以便与观看到所检测的对象的区域交叠。
13.根据权利要求12所述的用于车辆的显示装置,其中,所述交叠的图形图像是用于警示所述车辆偏离车道的图像,并且在偏离预测点上被显示成与车道交叠。
14.根据权利要求12所述的用于车辆的显示装置,其中,所述交叠的图形图像是用于警示包括在被所述驾驶员观看到的所获取的图像中的碰撞风险对象的图像,并且被显示成与所述碰撞风险对象交叠。
15.根据权利要求14所述的用于车辆的显示装置,其中,所述处理器被配置成:检测所述驾驶员的目光,并且
当所述目光的方向与所述碰撞风险对象的方向不匹配时,控制所述显示单元以在与所检测的所述驾驶员的目光方向对应的挡风玻璃区域中显示指示所述碰撞风险对象的所述图形图像。
16.根据权利要求1所述的用于车辆的显示装置,其中,所检测的对象是前方车辆,并且
其中,所述处理器被配置成:当所述挡风玻璃的观看到所述前方车辆的区域的尺寸等于或大于预定尺寸时,控制所述显示单元以在所述挡风玻璃的观看到所述前方车辆的区域中显示所述图形图像。
17.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:
控制所述显示单元以在观看到行驶道路的挡风玻璃区域中通过第一图形图像显示示出所述车辆的路线的地毯式图像,并且
当所述地毯式图像被所述对象遮挡时,控制所述显示单元以在所述对象附近通过箭头图像显示第二图形图像。
18.根据权利要求1所述的用于车辆的显示装置,其中,所述处理器被配置成:当从包括在被所述驾驶员观看到的所获取的图像中的对象中检测到碰撞风险对象时,控制所述显示单元以显示突出所述碰撞风险对象的第一图形图像,并且在识别水平上将不包括所述第一图形图像的剩余图形图像显示成相对低于所述第一图形图像。
19.一种控制用于车辆的显示装置的方法,该方法包括以下步骤:
经由相机获取所述车辆周围的图像;
经由显示单元在所述车辆的挡风玻璃上显示图形图像;
经由处理器检测包括在被所述车辆的驾驶员观看到的所获取的图像中的至少一个对象;
经由所述处理器确定所检测的对象的信息,所述信息包括所述挡风玻璃的观看到所述对象的区域的位置和尺寸以及所述对象的类型;以及
基于所确定的所述对象的信息,经由所述显示单元在所述挡风玻璃的区域上显示所述图形图像。
20.根据权利要求19所述的方法,该方法还包括以下步骤:
基于所检测的对象来显示被包括在所述图形图像中的信息量。
CN201610718958.3A 2015-12-24 2016-08-24 用于车辆的显示装置及其控制方法 Active CN106915302B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0186607 2015-12-24
KR1020150186607A KR101916993B1 (ko) 2015-12-24 2015-12-24 차량용 디스플레이 장치 및 그 제어방법

Publications (2)

Publication Number Publication Date
CN106915302A true CN106915302A (zh) 2017-07-04
CN106915302B CN106915302B (zh) 2021-12-24

Family

ID=56511358

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610718958.3A Active CN106915302B (zh) 2015-12-24 2016-08-24 用于车辆的显示装置及其控制方法

Country Status (4)

Country Link
US (1) US10924679B2 (zh)
EP (1) EP3184365B1 (zh)
KR (1) KR101916993B1 (zh)
CN (1) CN106915302B (zh)

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107622241A (zh) * 2017-09-21 2018-01-23 百度在线网络技术(北京)有限公司 用于移动设备的显示方法和装置
CN107672525A (zh) * 2017-11-03 2018-02-09 辽宁工业大学 一种逆光行车时预见前方路况的日间辅助驾驶装置及其方法
CN108613683A (zh) * 2018-06-26 2018-10-02 威马智慧出行科技(上海)有限公司 车载导航装置、方法和汽车
CN109421535A (zh) * 2017-08-29 2019-03-05 矢崎总业株式会社 车辆用显示装置和显示控制方法
CN109427199A (zh) * 2017-08-24 2019-03-05 北京三星通信技术研究有限公司 用于辅助驾驶的增强现实的方法及装置
CN109484299A (zh) * 2017-09-12 2019-03-19 大众汽车有限公司 控制增强现实显示装置的显示的方法、装置、存储介质
CN109556625A (zh) * 2018-11-30 2019-04-02 努比亚技术有限公司 基于前挡风玻璃的导航方法、装置、导航设备及存储介质
CN109584596A (zh) * 2018-12-20 2019-04-05 奇瑞汽车股份有限公司 车辆驾驶提示方法及装置
CN109960036A (zh) * 2017-12-14 2019-07-02 现代自动车株式会社 用于控制车辆的显示的设备和方法、以及车辆系统
CN110008918A (zh) * 2019-04-11 2019-07-12 成都合纵连横数字科技有限公司 一种摩托车模拟器驾驶员姿态识别方法
CN110491345A (zh) * 2019-08-12 2019-11-22 铁将军汽车电子股份有限公司 行车记录仪及其背光亮度调整方法
CN110855906A (zh) * 2018-07-24 2020-02-28 黑芝麻智能科技(上海)有限公司 利用安装在车辆周围的摄像机和雷达进行360度全景环视的拼接光学图像的方法
CN111076742A (zh) * 2019-12-17 2020-04-28 百度国际科技(深圳)有限公司 一种ar导航的显示方法、装置、电子设备及存储介质
CN111727132A (zh) * 2017-11-29 2020-09-29 三星电子株式会社 电子设备及其文本提供方法
WO2020238850A1 (en) * 2019-05-29 2020-12-03 Ningbo Geely Automobile Research & Development Co., Ltd. A system and method for providing a desired view for a vehicle occupant
CN112082569A (zh) * 2019-06-12 2020-12-15 丰田自动车株式会社 信息显示装置、控制方法及存储介质
CN113306565A (zh) * 2020-02-26 2021-08-27 丰田自动车株式会社 行驶辅助装置
CN113544757A (zh) * 2019-03-14 2021-10-22 索尼集团公司 信息处理装置、信息处理方法,以及移动体装置
CN113566836A (zh) * 2021-06-28 2021-10-29 阿波罗智联(北京)科技有限公司 道路指引方法、装置、电子设备及存储介质
WO2023102915A1 (zh) * 2021-12-10 2023-06-15 华为技术有限公司 图像显示方法和装置
WO2023202384A1 (zh) * 2022-04-18 2023-10-26 长城汽车股份有限公司 一种增强现实抬头显示方法、装置、终端设备及存储介质

Families Citing this family (74)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101867915B1 (ko) * 2015-01-16 2018-07-19 현대자동차주식회사 차량에서 웨어러블 기기를 이용한 기능 실행 방법 및 이를 수행하는 차량
DE112015006458B4 (de) * 2015-04-17 2019-05-23 Mitsubishi Electric Corporation Anzeigesteuervorrichtung, Anzeigesystem, Anzeigesteuerverfahren und Anzeigesteuerprogramm
JP6488922B2 (ja) * 2015-07-06 2019-03-27 株式会社デンソー 運転者異常検出装置
JP2017138350A (ja) * 2016-02-01 2017-08-10 アルプス電気株式会社 画像表示装置
CN107180220B (zh) * 2016-03-11 2023-10-31 松下电器(美国)知识产权公司 危险预测方法
CN105644444B (zh) * 2016-03-17 2018-02-06 京东方科技集团股份有限公司 一种车载显示系统
JP6383376B2 (ja) * 2016-03-31 2018-08-29 株式会社Subaru 周辺リスク表示装置
US10121372B2 (en) * 2016-04-18 2018-11-06 Rit Innovations, Llc Method and system for displaying speed information
CN106127292B (zh) * 2016-06-29 2019-05-07 上海小蚁科技有限公司 流量计数方法和设备
KR102581359B1 (ko) * 2016-09-02 2023-09-20 엘지전자 주식회사 차량용 사용자 인터페이스 장치 및 차량
KR102561132B1 (ko) * 2016-09-21 2023-07-28 엘지전자 주식회사 차량에 구비된 차량 제어 장치 및 차량의 제어방법
US9919648B1 (en) * 2016-09-27 2018-03-20 Robert D. Pedersen Motor vehicle artificial intelligence expert system dangerous driving warning and control system and method
KR20180056867A (ko) * 2016-11-21 2018-05-30 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
US10366286B2 (en) * 2016-12-13 2019-07-30 Google Llc Detection of traffic light signal changes
JP6896416B2 (ja) * 2016-12-27 2021-06-30 アルパイン株式会社 車載システム
CN106788727B (zh) * 2017-01-06 2019-09-06 京东方科技集团股份有限公司 车载可见光发射系统和接收系统以及通信网络
JP6616340B2 (ja) * 2017-01-31 2019-12-04 矢崎総業株式会社 車両用表示装置および車両用表示装置の表示方法
KR102310379B1 (ko) * 2017-06-09 2021-10-12 현대자동차주식회사 주행 정보 안내 장치 및 방법, 그리고 차량 시스템
FR3068481B1 (fr) * 2017-06-29 2019-07-26 Airbus Operations (S.A.S.) Systeme et procede d'affichage pour un aeronef
JP6883759B2 (ja) 2017-06-30 2021-06-09 パナソニックIpマネジメント株式会社 表示システム、表示システムの制御方法、プログラム、及び移動体
US10311726B2 (en) * 2017-07-21 2019-06-04 Toyota Research Institute, Inc. Systems and methods for a parallel autonomy interface
DE102017213679A1 (de) * 2017-08-07 2019-02-07 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Vorrichtung zur Fahrerzustandsbewertung sowie Fahrzeug
US10067737B1 (en) 2017-08-30 2018-09-04 Daqri, Llc Smart audio augmented reality system
US10127731B1 (en) * 2017-08-30 2018-11-13 Daqri, Llc Directional augmented reality warning system
US10435035B2 (en) * 2017-10-17 2019-10-08 Denso International America, Inc. Screen reduction system for autonomous vehicles
CN107678162A (zh) * 2017-10-25 2018-02-09 京东方科技集团股份有限公司 一种显示控制组件及其控制方法、平视显示系统、车辆
JP6666892B2 (ja) * 2017-11-16 2020-03-18 株式会社Subaru 運転支援装置及び運転支援方法
US11787287B2 (en) 2017-11-17 2023-10-17 Aisin Corporation Vehicle drive assist system, vehicle drive assist method, and vehicle drive assist program
KR102504225B1 (ko) * 2018-01-05 2023-02-27 현대자동차주식회사 3 채널 카메라를 활용한 차간거리 산출 장치 및 방법
DE102018203121B4 (de) * 2018-03-02 2023-06-22 Volkswagen Aktiengesellschaft Verfahren zur Berechnung einer AR-Einblendung von Zusatzinformationen für eine Anzeige auf einer Anzeigeeinheit, Vorrichtung zur Durchführung des Verfahrens sowie Kraftfahrzeug und Computerprogramm
WO2019189271A1 (en) * 2018-03-28 2019-10-03 Ricoh Company, Ltd. Image control apparatus, display apparatus, mobile body, image data generation method, and program
JP2019174461A (ja) * 2018-03-28 2019-10-10 株式会社リコー 画像制御装置、表示装置、移動体、画像データ生成方法、及びプログラム
JP7037764B2 (ja) * 2018-03-29 2022-03-17 株式会社リコー 移動ルート案内装置、移動体、移動ルート案内方法及びプログラム
CN111937055A (zh) * 2018-04-05 2020-11-13 三菱电机株式会社 驾驶辅助装置
US11900672B2 (en) * 2018-04-23 2024-02-13 Alpine Electronics of Silicon Valley, Inc. Integrated internal and external camera system in vehicles
DE102018208703A1 (de) * 2018-06-01 2019-12-05 Volkswagen Aktiengesellschaft Verfahren zur Berechnung einer "augmented reality"-Einblendung für die Darstellung einer Navigationsroute auf einer AR-Anzeigeeinheit, Vorrichtung zur Durchführung des Verfahrens sowie Kraftfahrzeug und Computerprogramm
SE542680C2 (en) * 2018-07-10 2020-06-23 Scania Cv Ab A method for controlling a vehicle lighting device, a control device, a vehicle lighting device, a vehicle, a computer program and a computer-readable medium
WO2020059924A1 (ko) * 2018-09-21 2020-03-26 엘지전자 주식회사 차량용 사용자 인터페이스 장치 및 차량용 사용자 인터페이스 장치의 동작 방법
DE102018128634A1 (de) * 2018-11-15 2020-05-20 Valeo Schalter Und Sensoren Gmbh Verfahren zum Bereitstellen einer visuellen Information über zumindest einen Teil einer Umgebung, Computerprogrammprodukt, mobiles Kommunikationsgerät und Kommunikationssystem
DE102018219481A1 (de) * 2018-11-15 2020-05-20 Robert Bosch Gmbh Baugruppe für einen LiDAR-Sensor und LiDAR-Sensor
KR20200057480A (ko) * 2018-11-16 2020-05-26 삼성전자주식회사 증강 현실 제어 장치, 이를 이용한 증강 현실 구현 방법, 및 이를 포함하는 증강 현실 구현 시스템
US11688297B2 (en) * 2018-11-19 2023-06-27 The Boeing Company Virtual reality with virtualization in trainers and test environments
EP3884300A4 (en) * 2018-11-19 2022-07-27 Suteng Innovation Technology Co., Ltd. LIDAR SIGNAL RECEIVING CIRCUITS, LIDAR SIGNAL GAIN CONTROL METHODS, AND LIDARS USING SAME
KR20200075328A (ko) * 2018-12-18 2020-06-26 현대자동차주식회사 차량의 주행 정보 제공 방법, 장치 및 기록매체
WO2020159247A1 (ko) * 2019-01-31 2020-08-06 엘지전자 주식회사 영상 출력 장치
US10565863B1 (en) * 2019-01-31 2020-02-18 StradVision, Inc. Method and device for providing advanced pedestrian assistance system to protect pedestrian preoccupied with smartphone
US10882398B2 (en) * 2019-02-13 2021-01-05 Xevo Inc. System and method for correlating user attention direction and outside view
JP7005115B2 (ja) * 2019-04-05 2022-01-21 矢崎総業株式会社 車両用表示装置
DE102019111512B4 (de) * 2019-05-03 2022-09-01 Mekra Lang Gmbh & Co. Kg Sichtsystem und Spiegelersatzsystem für ein Fahrzeug
JP2021039085A (ja) * 2019-09-02 2021-03-11 アイシン・エィ・ダブリュ株式会社 重畳画像表示装置、重畳画像描画方法及びコンピュータプログラム
CN110598031A (zh) * 2019-09-10 2019-12-20 天津同阳科技发展有限公司 机动车尾气信息处理方法、装置、系统、终端及存储介质
JP7332449B2 (ja) * 2019-11-27 2023-08-23 京セラ株式会社 ヘッドアップディスプレイモジュール、ヘッドアップディスプレイシステム及び移動体
US11715273B2 (en) 2019-12-03 2023-08-01 Lg Electronics Inc. Method for displaying AR navigation screen, and AR navigation system
KR102599269B1 (ko) * 2019-12-31 2023-11-06 현대오토에버 주식회사 증강현실 내비게이션 장치 및 그 제어 방법
KR20210087271A (ko) * 2020-01-02 2021-07-12 삼성전자주식회사 3d 증강 현실 내비게이션 정보 표시 방법 및 장치
GB2591745A (en) * 2020-01-31 2021-08-11 Mclaren Automotive Ltd Augmented reality system
US11455744B2 (en) * 2020-02-07 2022-09-27 Toyota Research Institute, Inc. Systems and methods for determining a viewing direction of a user
JPWO2021186853A1 (zh) * 2020-03-19 2021-09-23
KR20210131129A (ko) * 2020-04-23 2021-11-02 현대자동차주식회사 이동 수단용 ui 생성 장치 및 ui 생성 방법
DE102020114269A1 (de) * 2020-05-28 2021-12-02 Audi Aktiengesellschaft Verfahren zum Betreiben eines Brennstoffzellen-Fahrzeuges sowie Brennstoffzellen-Fahrzeug
JP2021196941A (ja) * 2020-06-16 2021-12-27 トヨタ自動車株式会社 ドライバ監視システム
WO2022025689A1 (ko) * 2020-07-30 2022-02-03 엘지전자 주식회사 경로 안내 장치 및 그것의 경로 안내 방법
US11482010B2 (en) * 2020-11-25 2022-10-25 GM Global Technology Operations LLC Methods and systems to utilize cameras to predict driver intention and highlight useful data
US20220176996A1 (en) * 2020-12-07 2022-06-09 Korea Automotive Technology Institute System and method for controlling vehicle
US20240042855A1 (en) * 2020-12-25 2024-02-08 Nissan Motor Co., Ltd. Information processing device and information processing method
CN112428945B (zh) * 2020-12-29 2022-04-01 深圳市博维远景科技有限公司 一种智能驾驶辅助控制设备
JP2022139953A (ja) * 2021-03-12 2022-09-26 本田技研工業株式会社 注意喚起システム、及び注意喚起方法
JP2022139951A (ja) * 2021-03-12 2022-09-26 本田技研工業株式会社 注意喚起システム、及び注意喚起方法
JP2022184350A (ja) * 2021-06-01 2022-12-13 マツダ株式会社 ヘッドアップディスプレイ装置
CN115503609A (zh) * 2021-06-07 2022-12-23 英业达科技有限公司 侦测系统
JP2023012793A (ja) * 2021-07-14 2023-01-26 株式会社アイシン 重畳画像表示装置
KR20230035977A (ko) * 2021-09-06 2023-03-14 현대자동차주식회사 디스플레이 타입 차량용 스위치 조작 장치 및 방법
US20230306690A1 (en) * 2022-03-22 2023-09-28 Snap Inc. Situational-risk-based ar display
DE102022205932A1 (de) 2022-06-10 2023-12-21 Volkswagen Aktiengesellschaft Verfahren und Warnvorrichtung für ein Fahrzeug zur Warnung eines Nutzers eines Fahrzeugs vor einer temporären Gefahrensituation in einem Fahrzeugumfeld

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040193331A1 (en) * 2003-03-28 2004-09-30 Denso Corporation Display method and apparatus for changing display position based on external environment
CN1629930A (zh) * 2003-12-17 2005-06-22 株式会社电装 机动车信息显示系统
US20050134479A1 (en) * 2003-12-17 2005-06-23 Kazuyoshi Isaji Vehicle display system
CN101913357A (zh) * 2009-04-02 2010-12-15 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上标记兴趣点位置
US20140368540A1 (en) * 2013-06-14 2014-12-18 Denso Corporation In-vehicle display apparatus and program product
WO2015001796A1 (ja) * 2013-07-02 2015-01-08 株式会社デンソー ヘッドアップディスプレイ及びプログラム
WO2015118859A1 (ja) * 2014-02-05 2015-08-13 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法
US20150331238A1 (en) * 2012-12-21 2015-11-19 Harman Becker Automotive Sytems Gmbh System for a vehicle

Family Cites Families (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10131720B4 (de) 2001-06-30 2017-02-23 Robert Bosch Gmbh Head-Up Display System und Verfahren
JP4085928B2 (ja) * 2003-08-22 2008-05-14 株式会社デンソー 車両用ナビゲーションシステム
EP1521059A1 (en) * 2003-09-30 2005-04-06 Mazda Motor Corporation Route guidance apparatus, method and program
US8195386B2 (en) 2004-09-28 2012-06-05 National University Corporation Kumamoto University Movable-body navigation information display method and movable-body navigation information display unit
JP2006284458A (ja) * 2005-04-01 2006-10-19 Denso Corp 運転支援情報表示システム
JP2007125968A (ja) * 2005-11-02 2007-05-24 Mitsubishi Fuso Truck & Bus Corp 車両用白線表示装置
JP4575275B2 (ja) * 2005-11-02 2010-11-04 三菱ふそうトラック・バス株式会社 車両用表示装置
JP4887980B2 (ja) 2005-11-09 2012-02-29 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
US9201504B2 (en) * 2007-11-29 2015-12-01 Daesung Electric Co., Ltd. Vehicular glance lighting apparatus and a method for controlling the same
US8009024B2 (en) * 2008-01-25 2011-08-30 Denso Corporation Automotive display device showing virtual image spot encircling front obstacle
JP2011118482A (ja) 2009-11-30 2011-06-16 Fujitsu Ten Ltd 車載装置および認知支援システム
JP5706874B2 (ja) * 2010-03-03 2015-04-22 本田技研工業株式会社 車両の周辺監視装置
DE102011006347B4 (de) * 2011-03-29 2023-02-09 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Ausgabe von grafischen Fahrhinweisen
JP2013203374A (ja) * 2012-03-29 2013-10-07 Denso It Laboratory Inc 車両用表示装置、その制御方法及びプログラム
WO2014002167A1 (ja) 2012-06-25 2014-01-03 パイオニア株式会社 情報表示装置、情報表示方法、情報表示プログラム及び記録媒体
KR102028720B1 (ko) * 2012-07-10 2019-11-08 삼성전자주식회사 위험 요소에 대한 정보를 디스플레이하는 투명 디스플레이 장치 및 그 방법
KR101957943B1 (ko) * 2012-08-31 2019-07-04 삼성전자주식회사 정보 제공 방법 및 이를 위한 정보 제공 차량
JP5783155B2 (ja) * 2012-10-05 2015-09-24 株式会社デンソー 表示装置
CN105008170B (zh) * 2013-02-22 2018-11-13 歌乐株式会社 车辆用平视显示器装置
JP2014181927A (ja) 2013-03-18 2014-09-29 Aisin Aw Co Ltd 情報提供装置、及び情報提供プログラム
US9280901B2 (en) * 2013-03-25 2016-03-08 E-Lead Electronic Co., Ltd. Method for displaying the vehicle safety distance
US20160216521A1 (en) * 2013-10-22 2016-07-28 Nippon Seiki Co., Ltd. Vehicle information projection system and projection device
JP6201690B2 (ja) * 2013-11-28 2017-09-27 日本精機株式会社 車両情報投影システム
KR20150056323A (ko) 2013-11-15 2015-05-26 현대오트론 주식회사 헤드업 디스플레이를 이용한 길 안내 정보 표시 장치 및 방법
JP2015104930A (ja) 2013-11-28 2015-06-08 株式会社デンソー ヘッドアップディスプレイ装置
JP6481846B2 (ja) 2014-03-27 2019-03-13 日本精機株式会社 車両用警報装置
JP6176541B2 (ja) * 2014-03-28 2017-08-09 パナソニックIpマネジメント株式会社 情報表示装置、情報表示方法及びプログラム
KR101587147B1 (ko) 2014-06-10 2016-01-20 엘지전자 주식회사 차량용 어라운드뷰 제공 장치 및 이를 구비한 차량
DE112015004431B4 (de) * 2014-09-29 2021-07-29 Yazaki Corporation Fahrzeuganzeigevorrichtung
JP6485732B2 (ja) * 2014-12-10 2019-03-20 株式会社リコー 情報提供装置、情報提供方法及び情報提供用制御プログラム
US9713956B2 (en) * 2015-03-05 2017-07-25 Honda Motor Co., Ltd. Vehicle-to-vehicle communication system providing a spatiotemporal look ahead and method thereof
JP6239186B2 (ja) * 2015-06-30 2017-11-29 三菱電機株式会社 表示制御装置及び表示制御方法及び表示制御プログラム
MX366506B (es) * 2015-09-18 2019-07-11 Nissan Motor Aparato de despliegue vehicular y metodo de despliegue vehicular.

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040193331A1 (en) * 2003-03-28 2004-09-30 Denso Corporation Display method and apparatus for changing display position based on external environment
CN1629930A (zh) * 2003-12-17 2005-06-22 株式会社电装 机动车信息显示系统
US20050134479A1 (en) * 2003-12-17 2005-06-23 Kazuyoshi Isaji Vehicle display system
JP2005182306A (ja) * 2003-12-17 2005-07-07 Denso Corp 車両用表示装置
CN101913357A (zh) * 2009-04-02 2010-12-15 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上标记兴趣点位置
US20150331238A1 (en) * 2012-12-21 2015-11-19 Harman Becker Automotive Sytems Gmbh System for a vehicle
US20150331236A1 (en) * 2012-12-21 2015-11-19 Harman Becker Automotive Systems Gmbh A system for a vehicle
US20140368540A1 (en) * 2013-06-14 2014-12-18 Denso Corporation In-vehicle display apparatus and program product
WO2015001796A1 (ja) * 2013-07-02 2015-01-08 株式会社デンソー ヘッドアップディスプレイ及びプログラム
WO2015118859A1 (ja) * 2014-02-05 2015-08-13 パナソニックIpマネジメント株式会社 車両用表示装置および車両用表示装置の表示方法

Cited By (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109427199A (zh) * 2017-08-24 2019-03-05 北京三星通信技术研究有限公司 用于辅助驾驶的增强现实的方法及装置
CN109421535B (zh) * 2017-08-29 2022-02-25 矢崎总业株式会社 车辆用显示装置和显示控制方法
CN109421535A (zh) * 2017-08-29 2019-03-05 矢崎总业株式会社 车辆用显示装置和显示控制方法
CN109484299A (zh) * 2017-09-12 2019-03-19 大众汽车有限公司 控制增强现实显示装置的显示的方法、装置、存储介质
CN107622241A (zh) * 2017-09-21 2018-01-23 百度在线网络技术(北京)有限公司 用于移动设备的显示方法和装置
CN107672525B (zh) * 2017-11-03 2024-04-05 辽宁工业大学 一种逆光行车时预见前方路况的日间辅助驾驶装置及其方法
CN107672525A (zh) * 2017-11-03 2018-02-09 辽宁工业大学 一种逆光行车时预见前方路况的日间辅助驾驶装置及其方法
CN111727132B (zh) * 2017-11-29 2023-07-25 三星电子株式会社 电子设备及其文本提供方法
CN111727132A (zh) * 2017-11-29 2020-09-29 三星电子株式会社 电子设备及其文本提供方法
CN109960036A (zh) * 2017-12-14 2019-07-02 现代自动车株式会社 用于控制车辆的显示的设备和方法、以及车辆系统
CN109960036B (zh) * 2017-12-14 2022-05-13 现代自动车株式会社 用于控制车辆的显示的设备和方法、以及车辆系统
CN108613683A (zh) * 2018-06-26 2018-10-02 威马智慧出行科技(上海)有限公司 车载导航装置、方法和汽车
CN110855906A (zh) * 2018-07-24 2020-02-28 黑芝麻智能科技(上海)有限公司 利用安装在车辆周围的摄像机和雷达进行360度全景环视的拼接光学图像的方法
CN110855906B (zh) * 2018-07-24 2022-06-17 黑芝麻智能科技(上海)有限公司 拼接全景光学图像的方法
CN109556625A (zh) * 2018-11-30 2019-04-02 努比亚技术有限公司 基于前挡风玻璃的导航方法、装置、导航设备及存储介质
CN109584596A (zh) * 2018-12-20 2019-04-05 奇瑞汽车股份有限公司 车辆驾驶提示方法及装置
CN113544757A (zh) * 2019-03-14 2021-10-22 索尼集团公司 信息处理装置、信息处理方法,以及移动体装置
CN110008918B (zh) * 2019-04-11 2023-06-06 成都合纵连横数字科技有限公司 一种摩托车模拟器驾驶员姿态识别方法
CN110008918A (zh) * 2019-04-11 2019-07-12 成都合纵连横数字科技有限公司 一种摩托车模拟器驾驶员姿态识别方法
WO2020238850A1 (en) * 2019-05-29 2020-12-03 Ningbo Geely Automobile Research & Development Co., Ltd. A system and method for providing a desired view for a vehicle occupant
CN112082569A (zh) * 2019-06-12 2020-12-15 丰田自动车株式会社 信息显示装置、控制方法及存储介质
CN112082569B (zh) * 2019-06-12 2023-12-05 丰田自动车株式会社 信息显示装置、控制方法及存储介质
CN110491345A (zh) * 2019-08-12 2019-11-22 铁将军汽车电子股份有限公司 行车记录仪及其背光亮度调整方法
US11566913B2 (en) 2019-12-17 2023-01-31 Apollo Intelligent Connectivity (Beijing) Technology Co., Ltd. Method, apparatus, electronic device and storage medium for displaying AR navigation
CN111076742A (zh) * 2019-12-17 2020-04-28 百度国际科技(深圳)有限公司 一种ar导航的显示方法、装置、电子设备及存储介质
CN113306565A (zh) * 2020-02-26 2021-08-27 丰田自动车株式会社 行驶辅助装置
CN113566836A (zh) * 2021-06-28 2021-10-29 阿波罗智联(北京)科技有限公司 道路指引方法、装置、电子设备及存储介质
WO2023102915A1 (zh) * 2021-12-10 2023-06-15 华为技术有限公司 图像显示方法和装置
WO2023202384A1 (zh) * 2022-04-18 2023-10-26 长城汽车股份有限公司 一种增强现实抬头显示方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
KR101916993B1 (ko) 2018-11-08
US20170187963A1 (en) 2017-06-29
CN106915302B (zh) 2021-12-24
EP3184365A2 (en) 2017-06-28
US10924679B2 (en) 2021-02-16
EP3184365B1 (en) 2018-09-19
EP3184365A3 (en) 2017-07-19
KR20170076395A (ko) 2017-07-04

Similar Documents

Publication Publication Date Title
CN106915302A (zh) 用于车辆的显示装置及其控制方法
CN107891809B (zh) 自动驻车辅助装置、提供自动驻车功能的方法以及车辆
EP3481692B1 (en) Driver assistance apparatus
CN106314152B (zh) 车辆驾驶辅助装置及具有其的车辆
CN109843676B (zh) 自动泊车辅助装置以及包括其的车辆
CN106448260B (zh) 驾驶员辅助设备和包括该驾驶员辅助设备的车辆
CN107226027B (zh) 显示装置及包括其的车辆
CN106467060B (zh) 显示装置及包括该显示装置的车辆
EP3211616A2 (en) Driver assistance apparatus
KR102551099B1 (ko) 어라운드뷰 제공장치, 제공방법 및 이를 구비한 차량
CN106696701A (zh) 驾驶员辅助设备以及包括该驾驶员辅助设备的车辆
CN107499307A (zh) 自动停车辅助装置以及包括该自动停车辅助装置的车辆
CN106205175A (zh) 用于车辆的显示设备和车辆
KR101843538B1 (ko) 차량 운전 보조장치 및 이의 차량 운전 보조방법
KR101962348B1 (ko) 차량 운전 보조장치 및 이를 포함하는 차량
KR102168041B1 (ko) 차량 제어장치 및 차량 제어방법
KR101752798B1 (ko) 차량 및 그 제어방법
KR101888259B1 (ko) 차량 보조장치 및 이를 포함하는 차량
KR101894636B1 (ko) 차량 운전 보조장치 및 이를 포함하는 차량
US11314346B2 (en) Vehicle control device and vehicle control method
US20230415652A1 (en) Camera module, information processing system, information processing method, and information processing apparatus

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant