CN113874778A - 用于为车辆乘员提供期望的画面的系统和方法 - Google Patents

用于为车辆乘员提供期望的画面的系统和方法 Download PDF

Info

Publication number
CN113874778A
CN113874778A CN202080039043.4A CN202080039043A CN113874778A CN 113874778 A CN113874778 A CN 113874778A CN 202080039043 A CN202080039043 A CN 202080039043A CN 113874778 A CN113874778 A CN 113874778A
Authority
CN
China
Prior art keywords
vehicle
vehicle occupant
view
interest
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080039043.4A
Other languages
English (en)
Other versions
CN113874778B (zh
Inventor
J·约翰逊
E·林德伯格·尼尔森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ningbo Geely Automobile Research and Development Co Ltd
Original Assignee
Ningbo Geely Automobile Research and Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo Geely Automobile Research and Development Co Ltd filed Critical Ningbo Geely Automobile Research and Development Co Ltd
Publication of CN113874778A publication Critical patent/CN113874778A/zh
Application granted granted Critical
Publication of CN113874778B publication Critical patent/CN113874778B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/268—Signal distribution or switching
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/102—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

一种用于为车辆乘员(5)提供期望的感兴趣的摄像机画面的系统、方法和计算机程序产品，该方法包括：步骤(S1)，通过至少第一内景摄像机(22a、22b)来获得车辆乘员(5)的面部和/或头部的至少第一内部画面(iv1、iv2)；步骤(S2)，基于至少第一内部画面(iv1、iv2)确定车辆乘员(5)的注视方向和头部方向中的至少任一者，以理解车辆乘员正在看哪里；步骤(S3)，确定车辆乘员感兴趣的画面至少部分地在至少第一外景摄像机(12a‑12j)的至少第一外部画面(ev1‑ev10)内；以及步骤(S4)，通过至少第一显示器(30)向车辆乘员(5)显示至少第一外部画面(ev1‑ev10)。

Description

用于为车辆乘员提供期望的画面的系统和方法
技术领域
本发明涉及为车辆乘员提供可视性的领域。
背景技术
对于车辆乘员而言，期望对车辆的周围环境具有良好的可视性。当今大多数车辆都配备了提供车辆周围的多个方向上的景象的车窗。使用反射镜来通过反射镜向车辆乘员提供例如车辆的后方景象也是非常常见的。车辆的各侧的侧视镜提供车辆的各侧的后方景象。通常安装在车辆舱室内部的后视镜提供车辆后面的情况的后方景象。现代车辆还通常配备有倒车摄像机，以在显示器上提供后方景象，以用于当例如进行车辆倒车时，车辆乘员更好地观察车辆后面的情况。此种倒车摄像机通常在选择了车辆的倒档时被自动激活。倒车摄像机的显示器通常安装在车辆舱室中，以为车辆乘员提供该倒车摄像机的画面。
发明内容
需要一种更容易且更方便、直观的方法使车辆乘员能更好地看到车辆周围的景象。具体而言，需要在任何时候都能更好地看到车辆周围的景象，而不仅仅是在例如使车辆倒车时沿某个方向。还存在沿多个方向都具有摄像机的车辆，例如自动驾驶的自主车辆，其中，该摄像机例如用于探测在车辆周围环境中的对象。此种摄像机通常由车辆中的车载计算机使用，并且来自各摄像机的信息由计算机处理，以例如确定在车辆周围环境中的对象。然而，如果此种摄像机向车辆乘员提供车辆周围的景象，那么车辆乘员必须手动选择例如提供沿某一方向的期望的摄像机画面的摄像机的摄像机画面，以在显示器上看到沿该方向的摄像机画面。另一个示例是停车辅助摄像机，其被配置成能够当停放车辆时，提供沿某些方向的景象。此种停车辅助摄像机的摄像机画面方向通常是预设的，并且通过车辆舱室中的显示器呈现给车辆乘员。
发明人已经认识到，对于车辆乘员来说，在操纵车辆的同时获得显示在显示器上的某一摄像机画面通常是繁琐的。例如，为了获得提供多个画面的停车辅助摄像机的某一画面，车辆乘员需要手动输入和/或调整或选择要显示在显示器上的期望的摄像机画面。该交互可使得车辆乘员在与显示器和摄像机系统(例如停车辅助摄像机)交互时，暂时地失去对车辆周围环境的注意。本公开内容的目的是提供用于为车辆乘员提供期望的感兴趣的摄像机画面的车辆摄像机控制系统和方法，其寻求单独地或任意组合地减轻、缓解或消除本领域中的上述确定的缺陷和缺点中的一个或多个。
本公开内容提出了一种用于为车辆乘员提供期望的感兴趣的摄像机画面的车辆摄像机控制系统。该车辆摄像机控制系统包括至少第一外景摄像机、至少第一内景摄像机和至少第一显示器，其中，至少第一外景摄像机被配置成能够获得车辆外部周围环境的至少第一外部画面，至少第一内景摄像机被配置成能够获得车辆内部的车辆乘员的至少第一内部画面，至少第一显示器被配置成能够显示至少第一外部画面。车辆摄像机控制系统还包括处理电路，该处理电路可操作地连接到至少第一外景摄像机、至少第一内部摄像机和至少第一显示器。处理电路被配置成能够使车辆摄像机控制系统通过至少第一内景摄像机来获得车辆乘员的面部和/或头部的至少第一内部画面，并且基于该至少第一内部画面来确定车辆乘员的注视方向和头部方向中的至少任一者，以理解车辆乘员正在看哪里。处理电路还被配置成能够使车辆摄像机控制系统基于确定的注视方向和确定的头部方向中的至少任一者来确定车辆乘员感兴趣的画面，并且确定车辆乘员感兴趣的画面至少部分地在至少第一外景摄像机的至少第一外部画面内，并且通过至少第一显示器向车辆乘员显示至少第一外部画面。车辆摄像机控制系统的优点在于，利用确定的注视方向和/或确定的头部方向，在至少第一显示器处向车辆乘员自动地显示感兴趣的画面，这意味着车辆乘员可保持全神贯注于车辆周围的周围环境。
根据一个方面，确定车辆乘员感兴趣的画面与通过车辆的至少第一车窗的景象相对应。这意味着，当车辆乘员具有与通过至少第一车窗的景象相对应的注视方向和/或头部方向时，通过至少第一显示器向车辆乘员提供与通过至少第一车窗的景象相对应的至少第一外部画面。
根据一个方面，确定车辆乘员感兴趣的画面与车辆的至少第一反射镜的镜中景象相对应。换言之，这意味着当车辆乘员具有朝向至少第一反射镜的注视方向和/或头部方向时，通过至少第一显示器向车辆乘员提供与通常通过至少第一反射镜看到的景象相对应的至少第一外部画面。
根据一个方面，还基于车辆乘员在至少预定的第一时间段期间保持某一注视方向或头部方向来确定车辆乘员感兴趣的画面。这意味着，为了改变至少第一显示器的画面，车辆乘员必须在某一时间段期间对特定的感兴趣的画面表示出兴趣。这有助于车辆乘员看到期望的感兴趣的画面。
根据一个方面，确定车辆乘员感兴趣的画面与车辆周围的多个方向上的多个景象相对应，并且通过至少第一显示器向车辆乘员显示多个外部画面。该方面的优点在于，车辆乘员可以具有多个感兴趣的画面，并且通过至少第一显示器向车辆乘员提供与多个感兴趣的画面相对应的多个外部画面。
根据一个方面，多个外部画面与车辆周围的360度景象相对应。这意味着通过至少第一显示器向车辆乘员提供与感兴趣的360度景象相对应的多个外部画面。这有助于车辆乘员看到期望的感兴趣的画面。
根据一个方面，还基于车辆乘员在预定的第二时间段内多次改变注视方向或头部方向来确定车辆乘员感兴趣的画面。换言之，如果车辆乘员在预定的第二时间段内对多个不同的画面表示出兴趣，那么基于多个不同的注视和/或头部方向来确定感兴趣的画面。这有助于车辆乘员看到期望的感兴趣的画面。
本公开内容还提出了一种用于为车辆乘员提供期望的感兴趣的摄像机画面的方法。该方法包括以下步骤：通过至少第一内景摄像机获得车辆乘员的面部和/或头部的至少第一内部画面；基于至少第一内部画面来确定车辆乘员的注视方向和头部方向中的至少任一者，以理解车辆乘员正在看哪里。该方法还包括步骤：确定车辆乘员感兴趣的画面至少部分地在至少第一外景摄像机的至少第一外部画面内；以及通过至少第一显示器向车辆乘员显示至少第一外部画面。车辆摄像机控制系统的优点在于，使用确定的注视方向和/或确定的头部方向，在至少第一显示器处向车辆乘员自动地显示感兴趣的画面，这意味着车辆乘员可以全神贯注于车辆周围的周围环境。
根据一个方面，确定车辆乘员感兴趣的画面与通过车辆的至少第一车窗的景象相对应。这意味着，当车辆乘员具有与通过至少第一车窗的景象相对应的注视方向和/或头部方向时，通过至少第一显示器向车辆乘员提供与通过至少第一车窗的景象相对应的至少第一外部画面。
根据一个方面，确定车辆乘员感兴趣的画面与车辆的至少第一反射镜的镜中景象相对应。换言之，这意味着当车辆乘员具有朝向至少第一反射镜的注视方向和/或头部方向时，通过至少第一显示器向车辆乘员提供与通常通过至少第一反射镜看到的景象相对应的至少第一外部画面。
根据一个方面，还基于车辆乘员在至少预定的第一时间段期间保持某一注视方向或头部方向来确定车辆乘员感兴趣的画面。换言之，这意味着当车辆乘员具有朝向至少第一反射镜的注视方向和/或头部方向时，通过至少第一显示器向车辆乘员提供与通常通过至少第一反射镜看到的景象相对应的至少第一外部画面。这有助于车辆乘员看到期望的感兴趣的画面。
根据一个方面，确定车辆乘员感兴趣的画面与车辆周围的多个方向上的多个景象相对应，并且通过至少第一显示器向车辆乘员显示多个外部画面。该方面的优点在于，车辆乘员可以具有多个感兴趣的画面，并且通过至少第一显示器向车辆乘员提供与多个感兴趣的画面相对应的多个外部画面。
根据一个方面，多个外部画面与车辆周围的360度景象相对应。这意味着通过至少第一显示器向车辆乘员提供与感兴趣的360度景象相对应的多个外部画面。这有助于车辆乘员看到期望的感兴趣的画面。
根据一个方面，还基于车辆乘员在预定的第二时间段内多次改变注视方向或头部方向来确定车辆乘员感兴趣的画面。换言之，如果车辆乘员在预定的第二时间段内对多个不同的画面表示出兴趣，那么基于多个不同的注视方向和/或头部方向来确定感兴趣的画面。
本公开内容还提出一种计算机程序产品，其包括非瞬时性计算机可读介质，在该包括非瞬时性计算机可读介质上具有包含程序指令的计算机程序，该计算机程序可载入到处理电路中，并被配置成能够在该计算机程序由至少一个处理电路运行时引起执行该方法。
附图说明
根据在附图中例示的示例性实施例的在下文中的更详细的描述，前述内容将变得显而易见，在附图中，贯穿不同视图，相同的附图标记指代相同的部分。附图不一定按比例绘制，而是将重点放在说明示例性实施例上。
图1a例示了根据本公开内容的一个方面的车辆摄像机控制系统的概览图。
图1b例示了根据本公开内容的一个方面的车辆摄像机控制系统的外景摄像机的外部画面。
图2a例示了根据本公开内容的一个方面的、当车辆乘员感兴趣的画面与通过至少第一车窗的景象相对应时的示例。
图2b例示了根据本公开内容的一个方面的、当车辆乘员感兴趣的画面与镜中景象相对应时的示例。
图3例示了根据本公开内容的一些方面的方法步骤的流程图。
图4例示了根据本公开内容的一些方面的计算机程序产品。
具体实施方式
下文将参照附图更全面地描述本公开内容的方面。然而，本文中公开的方法和设备可以以许多不同的形式实现，并且不应被解释为限于本文中阐述的方面。贯穿附图，附图中相同的符号指代相同的元素。
本文中使用的术语仅用于描述本公开内容的具体方面，且不意图限制本公开内容。如在本文中使用的，单数形式“一”、“一个”和“该”意图也包括复数形式，除非在上下文中另有明确说明。
在一些实施方式中，且根据本公开内容的一些方面，框中所说明的功能或步骤可不按操作例示中所说明的次序发生。例如，取决于所涉及的功能/动作，连续示出的两个框实际上可基本上同时执行，或者这些框有时可以相反的顺序执行。
在附图和说明书中，已公开了本公开内容的示例性方面。然而，在基本上不脱离本公开内容的原理的情况下，可以对这些方面进行许多变型和修改。因此，本公开内容应当被认为是例示性的而非限制性的，并且不限于以上讨论的特定方面。因此，尽管采用了特定用语，但它们仅是以一般性和描述性的意义使用，而不是出于限制的目的来使用。
应当注意，词语“包括”不一定排除存在除所列出的元素或步骤以外的其他元素或步骤，并且在元素之前的词语“一”或者“一个”不排除存在多个此种元素。还应当注意，任何附图标记都不限制权利要求的范围，示例性实施例可以至少部分地借助于硬件和软件两者来实现，并且几个“器件”、“单元”或“设备”可以由相同的硬件项来表示。
需要一种更容易且更方便、直观的方法来使车辆乘员能更好地看到车辆周围的景象。还存在沿多个方向都具有摄像机的车辆，例如自动驾驶的自主车辆，其中，摄像机用于例如探测在车辆的周围环境中的对象。此种摄像机通常由车辆中的车载计算机使用，并且来自各摄像机的信息由计算机处理，以例如确定在车辆周围环境中的对象。然而，车辆乘员必须手动选择例如提供沿某一方向的期望的摄像机画面的摄像机的摄像机画面，以在显示器上看到沿该方向的摄像机画面。另一个示例是停车辅助摄像机，其被配置成能够当停放车辆时，提供沿某些方向的景象。此种停车辅助摄像机的摄像机画面方向通常是预设的，并且通过车辆舱室中的显示器来呈现给车辆乘员。
发明人已经认识到，对于车辆乘员来说，在操纵车辆的同时获得显示在显示器上的某一摄像机画面通常是繁琐的。例如，为了获得停车辅助摄像机的某一画面，车辆乘员需要手动输入和/或调整或选择要显示在显示器上的期望的摄像机画面。该交互可使得车辆乘员在与显示器和摄像机系统(例如停车辅助摄像机)交互时，暂时地失去对车辆周围环境的注意。本公开内容的目的是提供用于为车辆乘员提供期望的感兴趣的摄像机画面的车辆摄像机控制系统和方法，其寻求单独地或任意组合地减轻、缓解或消除本领域中上述确定的缺陷和缺点中的一个或多个。
本公开内容提出了一种用于为车辆乘员5提供期望的感兴趣的摄像机画面的车辆摄像机控制系统100。
如图1a和1b所示，车辆摄像机控制系统100包括至少第一外景摄像机12a-12j，该至少第一外景摄像机12a-12j被配置成能够获得车辆1的外部周围环境的至少第一外部画面ev1-ev10。在一个示例中，至少第一外景摄像机12a-12j安装在车辆的外部或车辆的内部。根据一个方面，至少第一外景摄像机12a-12j集成到车辆的车身中。至少第一外景摄像机12a-12j获得车辆1的外部周围环境的至少第一外部画面ev1-ev10。根据一个方面，至少第一外部画面ev1-ev10是由至少第一外景摄像机12a-12j的广角透镜提供的车辆1的外部周围环境的广角画面。根据一个方面，至少第一外部画面ev1-ev10是由至少第一外景摄像机12a-12j的长焦透镜提供的车辆1的外部周围环境的长焦画面。根据一个方面，车辆摄像机控制系统100包括用于提供车辆1的外部周围环境的广角画面和长焦画面二者的不同外景摄像机12a-12j的组合。根据一个方面，如图1b所示，第一外景摄像机12h和第二外景摄像机12g被配置成能够获得重叠的至少第一外部画面ev7和至少第二外部画面ev6。
车辆摄像机控制系统100还包括至少第一内景摄像机22a、22b，该至少第一内景摄像机22a、22b被配置成能够获得车辆1内部的车辆乘员5的至少第一内部画面iv1、iv2。在如图1a所示的示例中，第一内景摄像机22a和第二内景摄像机22b安装在车辆乘员5的前方，以便于获得车辆乘员5的第一内部画面iv1和第二内部画面iv2。在一个示例中，安装至少第一内景摄像机22a和至少第二内景摄像机22b，以从车辆乘员周围的不同角度提供车辆乘员5的至少第一内部画面iv1和至少第二内部画面iv2。根据一个方面，至少第一内景摄像机22a、22b被配置成能够执行所拍摄的车辆乘员5的图像的图像处理。根据一个方面，至少第一内景摄像机22a、22b被配置成能够探测车辆乘员5的脸和眼睛中的至少一者。
车辆摄像机控制系统100还包括至少第一显示器30，该至少第一显示器30被配置成能够显示由至少第一外景摄像机12a-12j提供的至少第一外部画面ev1-ev10。根据一个方面，至少第一显示器30是车辆娱乐系统的一部分。根据一个方面，至少第一显示器30集成在车辆的仪表板中。根据一个方面，至少第一显示器30是在车辆的至少第一车窗40a、40b、40c、40d处或上可见的平视显示器。根据一个方面，至少第一显示器30是可由车辆乘员5放置在车辆1中的期望位置处的单独的显示单元。
车辆摄像机控制系统100还包括处理电路102。根据一个方面，处理电路102是车载车辆计算机的处理电路。根据一个方面，处理电路102是被包含在通过无线通信网络连接到车辆摄像机控制系统100的电子装置中的处理电路。根据一个方面，处理电路102可操作地连接到用于存储和管理数据的存储器。根据一个方面，存储器是车载车辆计算机的存储器。根据一个方面，存储器被包含在通过无线通信网络连接到车辆摄像机控制系统100的电子装置中。
处理电路102可操作地连接到至少第一外景摄像机12a-12j、至少第一内部摄像机22a、22b和至少第一显示器30。处理电路102被配置成能够使车辆摄像机控制系统100通过至少第一内景摄像机22a、22b来获得车辆乘员5的面部和/或头部的至少第一内部画面iv1、iv2，并且基于至少第一内部画面iv1、iv2来确定车辆乘员5的注视方向gd和头部方向hd中的至少任一者，以理解车辆乘员正在看哪里。根据一个方面，至少第一内部摄像机22a、22b相对于车辆的位置被用于确定车辆乘员5相对于车辆的相对注视方向gd和头部方向hd。根据一个方面，至少第一内部摄像机22a、22b沿朝向车辆乘员5的某一方向安装，并且将车辆乘员5的面部和/或眼睛的位置坐标与至少第一内部摄像机22a、22b的位置坐标进行比较。根据一个方面，至少第一内景摄像机22a、22b被配置成能够探测车辆乘员5的面部和眼睛中的至少一者，以确定车辆乘员5的注视方向gd和/或头部方向hd。
图2a例示了示例注视方向gd，示例注视方向gd在图2a中用从车辆乘员的眼睛穿过右侧后车窗40c到位于车辆1的外部周围环境中的自行车的虚线例示。图2a还例示了车辆乘员5的示例头部方向hd，示例头部方向hd在图2a中用在车辆乘员5的头部上方的箭头示出。根据一个方面，头部方向hd与注视方向gd相关。根据一个方面，头部方向hd给出车辆乘员5的注视方向的指示。在一个示例中，如果使用少量的外景摄像机12a-12j，那么头部方向hd可能足以用于理解车辆乘员正在看哪里。在一个示例中，如果使用大量外景摄像机12a-12j，那么可能需要注视方向gd，以理解车辆乘员正在看哪里。
处理电路102还被配置成能够使车辆摄像机控制系统100基于确定的注视方向gd和确定的头部方向hd中的至少任一者来确定车辆乘员5感兴趣的画面。在图2a所示的示例中，注视方向朝向位于车辆1外部周围环境中的自行车。处理电路102还被配置成能够确定车辆乘员感兴趣的画面至少部分地在至少第一外景摄像机12a-12j的至少第一外部画面ev1-ev10内。换言之，在图2a中的示例中，感兴趣的画面、即自行车在至少第一外景摄像机12e的外部画面ev4内。处理电路102还被配置成能够通过至少第一显示器30向车辆乘员5显示至少第一外部画面ev1-ev10。在如图2a所示的示例中，通过至少第一显示器30向车辆乘员5显示自行车的外部画面ev4。该方面的优点在于，至少第一外景摄像机12e可以提供比车辆乘员5通过车窗40c可以看到的更多的外部画面ev4的细节。因此，车辆摄像机控制系统100的优点在于，使用确定的注视方向gd和/或确定的头部方向hd，在至少第一显示器30处向车辆乘员自动地显示感兴趣的画面，这意味着车辆乘员可保持全神贯注于车辆1周围的周围环境。
根据一个方面，确定车辆乘员5感兴趣的画面与通过车辆1的至少第一车窗40a、40b、40c、40d的景象相对应。这意味着，当车辆乘员具有与通过至少第一车窗40a、40b、40c、40d的景象相对应的注视方向gd和/或头部方向hd时，通过至少第一显示器30向车辆乘员5提供与通过至少第一车窗40a、40b、40c、40d的景象相对应的至少第一外部画面ev1-ev10。这意味着车辆乘员5对车辆1周围的周围环境的某一方向的景象感兴趣。根据一个方面，确定车辆乘员5感兴趣的画面与为车辆乘员5的盲点的景象相对应。在一个示例中，确定车辆乘员对车辆1周围的周围环境的某一方向的例如被车辆的柱子挡住的景象感兴趣。在该示例中，车辆乘员5可以通过柱子旁边的车窗看到该景象的一部分。然而，感兴趣的画面仍然可以确定为沿支柱所在方向的景象，以便向车辆乘员5显示沿该方向在支柱后面的至少第一外部画面ev1-ev10。例如当某物(例如乘客、额外的装在)挡住视线时，当车辆乘员5沿某一方向看时，这同样适用。
根据一个方面，确定车辆乘员5感兴趣的画面与车辆1的至少第一反射镜50a、50b的镜中景象mv相对应。换言之，这意味着当车辆乘员具有朝向至少第一反射镜50a、50b的注视方向gd和/或头部方向hd时，通过至少第一显示器30向车辆乘员5提供与通常通过至少第一反射镜50a、50b看到的景象相对应的至少第一外部画面ev1-ev10。根据一个方面，至少第一反射镜50a、50b是车辆的侧视镜。根据一个方面，至少第一反射镜是车辆的后视镜。
图2b例示了当确定车辆乘员5感兴趣的画面与车辆1的至少第一反射镜50a的镜中景象mv相对应时的示例。根据一个方面，当确定朝向至少第一反射镜50a、50b的注视方向gd和/或头部方向hd时，车辆乘员5感兴趣的画面是至少第一反射镜50a、50b的反射镜区域。根据一个方面，车辆乘员5的眼睛相对于车辆1的位置通过至少第一内部摄像机22a、22b确定。根据一个方面，车辆乘员5的眼睛相对于车辆1的位置被用于确定与通常通过至少第一反射镜50a、50b看到的景象相对应的至少第一外部画面ev1-ev10。在如图2b所示的示例中，通常通过至少第一反射镜50a看到的景象与在车辆1的右后方处的外景摄像机12f的外部画面ev5相关。在图2b的示例中，该景象是车辆1后面的交通状况。在该交通状况的示例中，通过至少第一显示器30向车辆乘员5提供外部画面ev5。
根据一个方面，还基于车辆乘员5在至少预定的第一时间段t1期间保持某一注视方向gd或头部方向hd来确定车辆乘员5感兴趣的画面。这意味着，为了改变至少第一显示器30的画面，车辆乘员必须在某一时间段期间对特定的感兴趣的画面表示出兴趣。这有助于车辆乘员看到期望的感兴趣的画面。
在一个示例中，可能期望不改变至少第一显示器30的画面，除非车辆乘员5在至少预定的第一时间段t1中对特定的画面表示出兴趣。在一个示例中，该预定的第一时间段t1是2秒。根据一个方面，预定的第一时间段t1可以由车辆乘员来设置，以便提供车辆摄像机控制系统100的期望的用户体验。例如，如果车辆乘员5知道感兴趣的画面基于车辆乘员5在至少预定的第一时间段t1期间保持某一注视方向gd或头部方向hd来确定，那么车辆乘员可以有意地保持头部专注和/或注视预定的第一时间段t1，例如3秒。在一个示例中，保持至少第一显示器30的画面是最后确定的感兴趣的画面，直到确定新的感兴趣的画面。
根据一个方面，确定车辆乘员5感兴趣的画面与车辆1周围的多个方向上的多个景象相对应，并且通过至少第一显示器30向车辆乘员5显示多个外部画面ev1-ev10。该方面的优点在于，车辆乘员5可以具有多个感兴趣的画面，并且通过至少第一显示器30向车辆乘员5提供与多个感兴趣的画面相对应的多个外部画面ev1-ev10。在一个示例中，例如当在红灯处右转时，车辆乘员5对沿车辆右侧的景象感兴趣。在该示例中，感兴趣的画面被确定为与图2b所示的外部画面ev2-ev4相对应的沿着车辆1的右侧的多个景象。然后通过至少第一显示器30向车辆乘员5提供多个画面。根据一个方面，当确定车辆乘员5感兴趣的画面与车辆1周围的多个方向上的多个景象相对应时，基于车辆乘员5在多个画面中的各个画面中在至少预定的第一时间段t1期间保持某一注视方向gd或头部方向hd，来确定各个感兴趣的画面。根据一个方面，通过至少第一显示器30向车辆乘员5提供多个确定的感兴趣的画面。根据一个方面，通过至少第一显示器30向车辆乘员5提供多个最后确定的感兴趣的画面。在一个示例中，通过至少第一显示器30向车辆乘员5提供最后三个确定的感兴趣的画面。在另一个示例中，当确定了新的感兴趣的画面时，替换最早确定的感兴趣的画面，使得通过至少第一显示器30向车辆乘员5提供最后三个确定的感兴趣的画面。
根据一个方面，多个外部画面ev1-ev10与车辆1周围的360度景象相对应。这意味着通过至少第一显示器30向车辆乘员5提供与感兴趣的360度景象相对应的多个外部画面ev1-ev10。这有助于车辆乘员看到期望的感兴趣的画面。在一个示例中，当车辆乘员5将车辆1停放在两辆其他车辆之间时，车辆乘员沿多个方向看，并且车辆摄像机控制系统100确定多个感兴趣的画面。根据一个方面，还基于车辆乘员5在预定的第二时间段t2内多次改变注视方向或头部方向来确定车辆乘员5感兴趣的画面。换言之，如果车辆乘员在预定的第二时间段t2内对多个不同的画面表示出兴趣，那么基于多个不同的注视方向和/或头部方向来确定感兴趣的画面。在一个示例中，预定的第二时间段t2为2秒，并且如果在预定的第二时间段t2期间确定了多个感兴趣的画面，那么在第二时间段t2期间基于多个不同的注视方向和/或头部方向来确定感兴趣的画面。根据一个方面，当选择车辆1的倒挡时，仅能确定多个外部画面ev1-ev10与车辆1周围的360度景象相对应。
根据一个方面，车辆摄像机控制系统100可被配置成，使得某一感兴趣的画面不会引起车辆摄像机控制系统100通过至少第一显示器30向车辆乘员5显示与该某一感兴趣的画面相对应的至少第一外部画面ev1-ev10。例如，如果确定某一感兴趣的画面是通过前窗(即挡风玻璃)的景象。根据一个方面，要排除的某个景象或某些景象可以由车辆乘员设置，以便提供车辆摄像机控制系统100的期望的用户体验。在一个示例中，车辆乘员可能期望，当确定用于改变至少第一显示器30的画面的感兴趣的画面时，不考虑通过前排侧窗或前窗的景象。
本公开内容还提出了一种用于为车辆乘员5提供感兴趣的期望摄像机画面的方法。根据一方面，所述车辆摄像机控制系统100被配置成能够执行方法的方面中的任一个或多个方面。
该方法的步骤如图3所示。该方法包括：步骤S1，通过至少第一内景摄像机22a、22b获得车辆乘员5的面部和/或头部的至少第一内部画面iv1、iv2；步骤S2，基于至少第一内部画面iv1、iv2来确定车辆乘员5的注视方向和头部方向中的至少任一者，以理解车辆乘员正在看哪里。该方法还包括：步骤S3，确定车辆乘员感兴趣的画面至少部分地在至少第一外景摄像机12a-12j的至少第一外部画面ev1-ev10内；以及步骤S4，通过至少第一显示器30向车辆乘员5显示至少第一外部画面ev1-ev10。车辆摄像机控制系统100的优点在于，使用确定的注视方向gd和/或确定的头部方向hd，在至少第一显示器30处向车辆乘员自动地显示感兴趣的画面，这意味着车辆乘员可以保持全神贯注于车辆周围的周围环境。
根据一个方面，确定车辆乘员5感兴趣的画面与通过车辆1的至少第一车窗40a、40b、40c、40d的景象相对应。这意味着，当车辆乘员具有与通过至少第一车窗40a、40b、40c、40d的景象相对应的注视方向gd和/或头部方向hd时，通过至少第一显示器30向车辆乘员5提供与通过至少第一车窗40a、40b、40c、40d的景象相对应的至少第一外部画面ev1-ev10。
根据一个方面，确定车辆乘员5感兴趣的画面与车辆1的至少第一反射镜50a、50b、50c的镜中景象mv相对应。换言之，这意味着当车辆乘员具有朝向至少第一反射镜50a、50b的注视方向gd和/或头部方向hd时，通过至少第一显示器30向车辆乘员5提供与通常通过至少第一反射镜50a、50b看到的景象相对应的至少第一外部画面ev1-ev10。
根据一个方面，还基于车辆乘员5在至少预定的第一时间段t1期间保持某一注视方向gd或头部方向hd来确定车辆乘员5感兴趣的画面。换言之，这意味着当车辆乘员具有朝向至少第一反射镜50a、50b的注视方向gd和/或头部方向hd时，通过至少第一显示器30向车辆乘员5提供与通常通过至少第一反射镜50a、50b看到的景象相对应的至少第一外部画面ev1-ev10。
根据一个方面，确定车辆乘员5感兴趣的画面与车辆1周围的多个方向上的多个景象相对应，并且通过至少第一显示器30向车辆乘员5显示多个外部画面ev1-ev10。该方面的优点在于，车辆乘员5可以具有多个感兴趣的画面，并且通过至少第一显示器30向车辆乘员5提供与多个感兴趣的画面相对应的多个外部画面ev1-ev10。
根据一个方面，多个外部画面ev1-ev10与围绕车辆1的360度景象相对应。这意味着通过至少第一显示器30向车辆乘员5提供与感兴趣的360度景象相对应的多个外部画面ev1-ev10。
根据一个方面，还基于车辆乘员5在预定的第二时间段t2内多次改变注视方向gd或头部方向hd来确定车辆乘员5感兴趣的画面。换言之，如果车辆乘员在预定的第二时间段t2内对多个不同的画面表示出兴趣，那么基于多个不同的注视方向和/或头部方向来确定感兴趣的画面。
本公开内容还提出一种计算机程序产品，其包括非瞬时性计算机可读介质，在该非瞬时性计算机可读介质上具有包含程序指令的计算机程序，该计算机程序可载入到处理电路中，并被配置成能够在该计算机程序由至少一个处理电路运行时引起执行方法。
如图4中所示，本公开内容还提出一种计算机程序产品500，其包括非瞬时性计算机可读介质，在该非瞬时性计算机可读介质上具有包含程序指令的计算机程序，该计算机程序可载入到处理电路102中，并被配置成能够在该计算机程序由该处理电路102运行时引起执行方法。
根据一方面，车辆摄像机控制系统100被配置成能够执行所述方法的方面中的任一个或多个方面。根据本公开内容的一个方面，通过在车辆摄像机控制系统100中下载并运行的软件程序中的指令来执行该方法。
在附图和说明书中，已公开了示例性实施例。然而，可对这些实施例进行许多变型和修改。因此，尽管采用了特定用语，但它们仅是以一般性和描述性的意义进行使用，而不是出于限制的目使用，实施例的范围由后面的权利要求限定。

Claims (15)

1.一种用于为车辆乘员(5)提供期望的感兴趣的摄像机画面的车辆摄像机控制系统(100)，所述车辆摄像机控制系统(100)包括：
·至少第一外景摄像机(12a-12j)，其被配置成能够获得车辆(1)外部的周围环境的至少第一外部画面(ev1-ev10)；
·至少第一内景摄像机(22a、22b)，其被配置成能够获得所述车辆(1)内部的所述车辆乘员(5)的至少第一内部画面(iv1、iv2)；
·至少第一显示器(30)，其被配置成能够显示所述至少第一外部画面(ev1-ev10)；和
·处理电路(102)，其可操作地连接到所述至少第一外景摄像机(12a-12j)、所述至少第一内景摄像机(22a、22b)和所述至少第一显示器(30)，并且被配置成能够使所述车辆摄像机控制系统(100)：
-通过所述至少第一内景摄像机(22a、22b)来获得所述车辆乘员(5)的面部和/或头部的至少第一内部画面(iv1、iv2)；
-基于所述至少第一内部画面(iv1、iv2)来确定所述车辆乘员(5)的注视方向(gd)和头部方向(hd)中的至少任一者，以理解所述车辆乘员正在看哪里；
-基于确定的注视方向(gd)和确定的头部方向(hd)中的至少任一者来确定所述车辆乘员(5)的感兴趣的画面；
-确定所述车辆乘员感兴趣的画面至少部分地在所述至少第一外景摄像机(12a-12j)的至少第一外部画面(ev1-ev10)内；以及
-通过所述至少第一显示器(30)向所述车辆乘员(5)显示所述至少第一外部画面(ev1-ev10)。
2.根据权利要求1所述的车辆摄像机控制系统(100)，其中，确定所述车辆乘员(5)感兴趣的画面与通过所述车辆(1)的至少第一车窗(40a、40b、40c、40d)的景象相对应。
3.根据权利要求1或2所述的车辆摄像机控制系统(100)，其中，确定所述车辆乘员(5)感兴趣的画面与所述车辆(1)的至少第一反射镜(50a、50b)的镜中景象(mv)相对应。
4.根据上述权利要求中任一项所述的车辆摄像机控制系统(100)，其中，还基于所述车辆乘员(5)在至少预定的第一时间段(t1)期间保持某一注视方向(gd)或头部方向(hd)来进一步确定所述车辆乘员(5)感兴趣的画面。
5.根据权利要求1所述的车辆摄像机控制系统(100)，其中，确定所述车辆乘员(5)感兴趣的画面与所述车辆(1)周围的多个方向上的多个景象相对应，并且通过所述至少第一显示器(30)向所述车辆乘员(5)显示多个外部画面(ev1-ev10)。
6.根据权利要求5所述的车辆摄像机控制系统(100)，其中，所述多个外部画面(ev1-ev10)与所述车辆(1)周围的360度景象相对应。
7.根据上述权利要求中任一项所述的车辆摄像机控制系统(100)，其中，还基于所述车辆乘员(5)在预定的第二时间段(t2)内多次改变所述注视方向或所述头部方向来确定所述车辆乘员(5)感兴趣的画面。
8.一种用于为车辆乘员(5)提供期望的感兴趣的摄像机画面的方法，所述方法包括：
-步骤(S1)，通过所述至少第一内景摄像机(22a、22b)来获得所述车辆乘员(5)的面部和/或头部的至少第一内部画面(iv1、iv2)；
-步骤(S2)，基于所述至少第一内部画面(iv1、iv2)确定所述车辆乘员(5)的注视方向和头部方向中的至少任一者，以理解所述车辆乘员正在看哪里；
-步骤(S3)，确定所述车辆乘员感兴趣的画面至少部分地在所述至少第一外景摄像机(12a-12j)的至少第一外部画面(ev1-ev10)内；以及
-步骤(S4)，通过所述至少第一显示器(30)向所述车辆乘员(5)显示所述至少第一外部画面(ev1-ev10)。
9.根据权利要求8所述的方法，其中，确定所述车辆乘员(5)感兴趣的画面与通过所述车辆(1)的至少第一车窗(40a、40b、40c、40d)的景象相对应。
10.根据权利要求8或9所述的方法，其中，确定所述车辆乘员(5)感兴趣的画面与所述车辆(1)的至少第一反射镜(50a、50b、50c)的镜中景象(mv)相对应。
11.根据权利要求8-10中任一项所述的方法，其中，还基于所述车辆乘员(5)在至少预定的第一时间段(t1)期间保持某一注视方向(gd)或头部方向(hd)来确定所述车辆乘员(5)感兴趣的画面。
12.根据权利要求8所述的方法，其中，确定所述车辆乘员(5)感兴趣的画面与所述车辆(1)周围的多个方向上的多个景象相对应，并通过所述至少第一显示器(30)向所述车辆乘员(5)显示多个外部画面(ev1-ev10)。
13.根据权利要求12所述的方法，其中，所述多个外部画面(ev1-ev10)与所述车辆(1)周围的360度景象相对应。
14.根据权利要求8-13中任一项所述的方法，其中，还基于所述车辆乘员(5)在预定的第二时间段(t2)内多次改变所述注视方向(gd)或所述头部方向(hd)来确定所述车辆乘员(5)感兴趣的画面。
15.一种包括非瞬时性计算机可读介质的计算机程序产品(500)，在该非瞬时性计算机可读介质上具有包括程序指令的计算机程序，所述计算机程序能加载到处理电路(102)中，并且被配置成能够当所述计算机程序由至少一个处理电路(102)运行时，执行根据权利要求8至14中任一项所述的方法。
CN202080039043.4A 2019-05-29 2020-05-25 用于为车辆乘员提供期望的画面的系统和方法 Active CN113874778B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP19177328.2 2019-05-29
EP19177328.2A EP3744568B1 (en) 2019-05-29 2019-05-29 A system and method for providing a desired view for a vehicle occupant
PCT/CN2020/092104 WO2020238850A1 (en) 2019-05-29 2020-05-25 A system and method for providing a desired view for a vehicle occupant

Publications (2)

Publication Number Publication Date
CN113874778A true CN113874778A (zh) 2021-12-31
CN113874778B CN113874778B (zh) 2024-05-28

Family

ID=66676399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080039043.4A Active CN113874778B (zh) 2019-05-29 2020-05-25 用于为车辆乘员提供期望的画面的系统和方法

Country Status (4)

Country Link
US (1) US20220080890A1 (zh)
EP (1) EP3744568B1 (zh)
CN (1) CN113874778B (zh)
WO (1) WO2020238850A1 (zh)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004034358A1 (de) * 2004-07-13 2006-02-09 Volkswagen Ag Vorrichtung und Verfahren zur Darstellung von Informationen in einem Kraftfahrzeug
JP2007015663A (ja) * 2005-07-11 2007-01-25 Toyota Motor Corp 車両用監視モニタシステム
US20090268025A1 (en) * 2005-11-17 2009-10-29 Aisin Seiki Kabushiki Kaisha Vehicle surrounding area display device
CN103063224A (zh) * 2011-10-18 2013-04-24 罗伯特·博世有限公司 用于操作导航系统的方法
EP2743133A2 (en) * 2012-12-13 2014-06-18 Nissan Motor Manufacturing (UK) Ltd. Camera system
CN104252229A (zh) * 2013-06-28 2014-12-31 哈曼国际工业有限公司 用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感兴趣的设备和方法
CN107920734A (zh) * 2015-06-03 2018-04-17 托比股份公司 视线检测方法和装置
WO2018206213A1 (de) * 2017-05-11 2018-11-15 Volkswagen Aktiengesellschaft Verfahren und vorrichtung zur ortsaufgelösten detektion von einem fahrzeugexternen objekt mithilfe eines in einem fahrzeug verbauten sensors

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101231510B1 (ko) * 2010-10-11 2013-02-07 현대자동차주식회사 운전자 주시방향 연동 전방충돌 위험경보 시스템, 그 방법 및 그를 이용한 차량
DE102011084217A1 (de) * 2011-10-10 2013-04-11 Continental Automotive Gmbh Kommunikationssystem eines Kraftfahrzeuges
CN103767715B (zh) * 2014-01-15 2015-10-28 中国人民解放军国防科学技术大学 一种驾驶员安全驾驶状态检测装置
KR101916993B1 (ko) * 2015-12-24 2018-11-08 엘지전자 주식회사 차량용 디스플레이 장치 및 그 제어방법
WO2018031441A1 (en) * 2016-08-09 2018-02-15 Contrast, Inc. Real-time hdr video for vehicle control
DE102017116702A1 (de) * 2017-07-24 2019-01-24 SMR Patents S.à.r.l. Verfahren zum Bereitstellen einer Anzeige in einem Kraftfahrzeug, sowie Kraftfahrzeug
US10872254B2 (en) * 2017-12-22 2020-12-22 Texas Instruments Incorporated Digital mirror systems for vehicles and methods of operating the same
US11221741B2 (en) * 2018-08-30 2022-01-11 Sony Corporation Display control of interactive content based on direction-of-view of occupant in vehicle
US10882398B2 (en) * 2019-02-13 2021-01-05 Xevo Inc. System and method for correlating user attention direction and outside view

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102004034358A1 (de) * 2004-07-13 2006-02-09 Volkswagen Ag Vorrichtung und Verfahren zur Darstellung von Informationen in einem Kraftfahrzeug
JP2007015663A (ja) * 2005-07-11 2007-01-25 Toyota Motor Corp 車両用監視モニタシステム
US20090268025A1 (en) * 2005-11-17 2009-10-29 Aisin Seiki Kabushiki Kaisha Vehicle surrounding area display device
CN103063224A (zh) * 2011-10-18 2013-04-24 罗伯特·博世有限公司 用于操作导航系统的方法
EP2743133A2 (en) * 2012-12-13 2014-06-18 Nissan Motor Manufacturing (UK) Ltd. Camera system
CN104252229A (zh) * 2013-06-28 2014-12-31 哈曼国际工业有限公司 用于通过跟踪驾驶员眼睛视线来检测驾驶员是否对广告感兴趣的设备和方法
CN107920734A (zh) * 2015-06-03 2018-04-17 托比股份公司 视线检测方法和装置
WO2018206213A1 (de) * 2017-05-11 2018-11-15 Volkswagen Aktiengesellschaft Verfahren und vorrichtung zur ortsaufgelösten detektion von einem fahrzeugexternen objekt mithilfe eines in einem fahrzeug verbauten sensors

Also Published As

Publication number Publication date
CN113874778B (zh) 2024-05-28
WO2020238850A1 (en) 2020-12-03
EP3744568A1 (en) 2020-12-02
EP3744568B1 (en) 2022-01-19
US20220080890A1 (en) 2022-03-17

Similar Documents

Publication Publication Date Title
DE102015214744B4 (de) Head-up-Display-System und Verfahren zum Kalibrieren eines Head-up-Display-Systems
US20160229412A1 (en) Cognitive displays
JP5093611B2 (ja) 車両周辺確認装置
DE102013005342A1 (de) Kraftfahrzeug, -bedienvorrichtung, und Bedienverfahren hierfür
US20090189831A1 (en) Automobile windshield display
KR102130059B1 (ko) 디지털 백미러 제어 유닛 및 방법
US10391844B2 (en) Vehicle display screen safety and privacy system
JP6639437B2 (ja) 情報提示装置
CN112046470A (zh) 控制后视图像显示的方法、装置、介质、控制器及车辆
EP3166307B1 (en) Capturing device for a motor vehicle, driver assistance system as well as motor vehicle
US9710713B2 (en) Methods and apparatus to perform image masking based on relative motion of objects
WO2020088902A1 (de) Verfahren zur vermeidung einer sichtfeldstörung für eine bedienperson eines objektes, vorrichtung zur durchführung des verfahrens sowie fahrzeug und computerprogramm
CN110194109B (zh) 一种显示车辆外部影像的方法、影像系统及车辆
JP2016119558A (ja) 映像処理装置、及び車載映像処理システム
JP7278829B2 (ja) 情報処理装置及び情報処理方法
CN113874778B (zh) 用于为车辆乘员提供期望的画面的系统和方法
US20170072855A1 (en) Rearview video full windshield projector
US9283893B2 (en) Vision-controlled interaction for data spectacles
CN109835259B (zh) 车辆成像系统
WO2016059765A1 (ja) 映像処理装置、及び車載映像処理システム
EP3785994A1 (en) A system and method for highlighting of an object to a vehicle occupant
KR20190062639A (ko) 긴급상황에 대처가 가능한 자동차의 사이드뷰 카메라 시스템
US11694573B1 (en) Augmented reality system for educating drivers of vehicle dimensions
US20240331328A1 (en) Interactive Vision-Based Child Seat Mounting Assistance
JP2019180074A (ja) 運転支援システム、画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant