CN113243028B - 用于调整视觉辅助系统的显示视图的方法 - Google Patents

用于调整视觉辅助系统的显示视图的方法 Download PDF

Info

Publication number
CN113243028B
CN113243028B CN201980083408.0A CN201980083408A CN113243028B CN 113243028 B CN113243028 B CN 113243028B CN 201980083408 A CN201980083408 A CN 201980083408A CN 113243028 B CN113243028 B CN 113243028B
Authority
CN
China
Prior art keywords
vehicle
display view
assistance system
vision assistance
settings
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201980083408.0A
Other languages
English (en)
Other versions
CN113243028A (zh
Inventor
汉斯·德拉加登
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volvo Truck Corp
Original Assignee
Volvo Truck Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volvo Truck Corp filed Critical Volvo Truck Corp
Publication of CN113243028A publication Critical patent/CN113243028A/zh
Application granted granted Critical
Publication of CN113243028B publication Critical patent/CN113243028B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/67—Focus control based on electronic image sensor signals
    • H04N23/675—Focus control based on electronic image sensor signals comprising setting of focusing regions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及一种用于调整车辆(10)的视觉辅助系统(1)的显示视图的方法，该方法包括下列步骤：识别(S1)应当使用视觉辅助系统的特定情况；接收(S2)针对特定情况的显示视图设置，其中，所述显示视图设置基于来自于已经经历特定情况的另一车辆的至少一个其它视觉辅助系统的至少一个先前显示视图设置，其中，至少一个先前显示视图设置与特定情况有关；以及根据接收到的显示视图设置调整(S3)视觉辅助系统(1)的显示视图。本发明也涉及一种系统，涉及一种用于接收显示视图设置并将其发送到具有视觉辅助系统的车辆队列(100)的方法，涉及一种用于接收显示视图设置并将其发送到车辆队列(100)的系统(20)，涉及一种计算机程序和/或涉及一种携带该计算机程序的计算机可读介质。

Description

用于调整视觉辅助系统的显示视图的方法
技术领域
本发明涉及一种用于调整车辆的视觉辅助系统的显示视图的方法。此外，本发明涉及一种用于车辆的视觉辅助系统，涉及一种用于接收显示视图设置并将该显示视图设置发送给具有视觉辅助系统的车辆队列的方法，涉及一种用于接收显示视图设置并将该显示视图设置发送给车辆队列的系统，涉及一种计算机程序和/或涉及一种携带计算机程序的计算机可读介质。
本发明可以应用于诸如卡车这样的重型车辆、公共汽车和建筑设备。尽管将关于重型卡车描述本发明，但是本发明不限于该特定车辆，而是还可以用于其它车辆，诸如轻型卡车，铰接式运输车，挖掘机，轮式装载机和反铲装载机。
背景技术
环视系统(Surround view system)和其它视觉辅助系统每天在车辆中变得越来越普遍，这主要是出于安全、防卫和效率方面的原因。简单的视觉辅助系统通常包括倒车相机和显示器，而更先进的系统可能包括若干个相机，图像处理，诸如视频图像的拼接和视频图像的处理，以进行对象识别和分类。三维(3D)成像系统也变得越来越普遍，其中可以选择虚拟相机的位置及其缩放。有许多可能性可以改变这些系统的显示输出。
为了获得最佳的驾驶支持，几乎有无数种可能性来配置功能以及(一个或多个)显示器的内容，但是根据当前或即将发生的情况来调整设置通常很困难且很耗时。当在交通拥挤的情况下驾驶时，通常是没有这种时间的，否则可能会严重影响安全性和驾驶员舒适度。
已知的是，视觉辅助系统可以提供显示视图设置的自动改变，从而示出特定相机视图，这种自动改变由例如转向信号的启用或倒挡的选择而触发。这样做的缺点在于，视觉支持的系统调整在决定转向，改变车道和/或倒车已经开始/完成后才会完成并且变得可用。
发明内容
鉴于上述问题，本发明的目的在于提供一种改进方法，一种视觉辅助系统和/或一种包括为车辆的用户提供改善支持的视觉辅助系统的车辆。
根据第一方面，该目的通过根据本发明所述的方法实现。根据第二方面，该目的通过根据本发明所述的视觉辅助系统实现。根据第三方面，该目的通过根据本发明所述的车辆实现。根据第六方面，该目的通过根据本发明所述的计算机程序实现。根据第七方面，该目的通过根据本发明所述的包括计算机程序的计算机可读介质实现。在下面的说明中公开了本发明的进一步优点和有利特征。
根据本发明的第一方面，该目的通过一种用于调整车辆的视觉辅助系统的显示视图的方法来实现，该方法包括下列步骤：
识别应当使用视觉辅助系统的特定情况；
接收针对该特定情况的显示视图设置，其中，显示视图设置基于来自于已经经历了该特定情况的另一车辆的至少一个其它视觉辅助系统的至少一个先前显示视图设置，其中，该至少一个先前显示视图设置与该特定情况有关；以及
根据接收到的显示视图设置来调整视觉辅助系统的显示视图。
通过提供本文所公开的方法，提供了一种对车辆的视觉辅助系统的显示视图的改善调整。更特别地，通过使用来自于已经处于相同的对应特定情况并且已经根据该特定情况调整了它/它们自身的显示视图设置的至少一个其它车辆的经验，该/这些显示视图设置可以被用于还未经历该特定情况的车辆。通过在车辆第一次遇到该特定情况时接收该/这些先前显示视图设置，然后相应地调整显示视图，可以例如更早地进行调整。由此，视觉辅助系统可能能够在特定情况期间为车辆的用户提供改善的支持。另外，可以进行调整，使得基于来自于已经处于特定情况下的至少一个其它车辆的(一个或多个)较早经验来优化显示视图。例如，(一个或多个)先前显示视图设置可以已经被设置成使得它/它们提供对物体的特定关注，物体可以是障碍物、路缘石或可能对于当处于特定情况下的车辆用户观看显示器上的视图有帮助的任何其它事物。
本文中使用的表述“显示视图”是指由车辆的视觉辅助系统的显示单元呈现的图像视图。显示单元例如可以是位于车辆仪表板上或附近的显示屏，但是它也可以例如是可以由车辆的用户使用的手持式显示单元。通常，显示单元是被配置成向车辆的用户呈现视觉信息的单元。
本文中使用的表述“显示视图设置”是指向车辆的用户呈现的显示视图的设置，例如，配置。
本文中使用的表述“特定情况”是指车辆正经历和/或暴露于的情况，诸如当在某一路段上行驶时，当执行某一任务时等。
可选地，显示视图设置可以对应于具有至少一个添加的校正参数的至少一个先前显示视图设置。通过使用校正参数，可以调整显示视图设置，使得其适合于正处于特定情况下的车辆和/或车辆的用户。即已经认识到，在当前车辆暴露于特定情况时，可能需要调整先前显示视图设置以适合于当前车辆。因此，并且可选地，至少一个校正参数可以指示用户偏好，视觉辅助系统的特性和车辆的特性中的任何一项。仍然可选地，该方法可以进一步包括下列步骤：通过来自于车辆用户的至少一个手动输入来接收(一个或多个)用户偏好。因此，车辆的用户可以决定可以何时以及如何调整显示视图设置，由此进一步改善并定制针对特定用户的显示视图设置。根据一个示例实施例，该方法可以进一步包括下列步骤：分析随时间来自于用户的一个以上的手动输入，并且据此提供校正参数，该校正参数对应于随时间来自于用户的该一个以上的手动输入。仅作为示例，随时间的手动输入可以用于为用户偏好提供平均值，然后将平均值用作用于校正/调整先前显示视图设置的校正参数。作为另一非限制性示例，可以对随时间的手动输入执行统计评价，并且由此可以提供校正参数。例如，统计评价可以是机器学习算法的一部分，该机器学习算法学习对于用户来说哪个是最优选的显示视图设置。
可选地，特定情况可以包括暴露于车辆的一系列步骤，其中，显示视图设置包括与该一系列步骤相关联的对应的一系列特定显示视图。因此，显示视图设置可以包括在特定情况期间固定的一个显示视图设置，或者可以根据特定情况期间暴露于车辆的一系列步骤在该特定情况期间调整显示视图设置。特定情况期间的一系列步骤可以例如是车辆执行的特定任务，诸如建筑设备车辆或卡车的工作任务。纯粹作为示例，该一系列步骤可以是当卡车正在装载和/或卸载材料时，诸如自卸卡车在卡车后方的地面上卸载其材料。在这样的特定情况期间，可能需要根据例如倾卸顺序(tipping sequence)来调整显示视图设置。
可选地，显示视图设置可以包括有关以下至少一项的信息：视觉辅助系统的传感器视图的焦点中心、传感器视图的缩放水平、传感器视图的覆盖面积、传感器视图关于车辆定向的方向以及传感器视图的关于用户关于车辆的位置的方向。
可选地，可以配置显示视图设置，使得呈现给用户的显示视图包括供用户控制车辆的特定参数的装置(means)。可以针对特定情况对该装置进行优化/调整，和/或可以在特定情况之前或期间使该装置出现在屏幕上。例如，该装置可以是设置在触摸屏上的按钮等，以控制自卸车车体的倾卸顺序。作为另一示例，该装置可以是设置在触摸屏上的按钮等，以控制车辆的起重臂或挖掘臂。作为又另一示例，该装置可以是设置在触摸屏上的控件，使得用户可以控制图像视图的缩放水平和/或车辆的空气悬架系统的高度水平等。
可选地，识别出的特定情况可以是车辆和/或视觉辅助系统的地理位置，车辆和/或视觉辅助系统所处的地理区域，车辆关于物体的特定定向，车辆正在进行的特定任务，特定时间和/或日期，车辆状态和车辆正在其上行驶的特定路线，环境状况(诸如天气和周围光照水平)中的至少一个。
可选地，方法可以进一步包括下列步骤：从至少一个其它车辆、外部数据库、基于云的服务、车辆的数据库等接收先前显示视图设置和/或显示视图设置。
可选地，显示视图设置可以基于来自于已经经历了特定情况的其它车辆的多个其它视觉辅助系统的先前显示视图设置的汇编集合。例如，可以分析先前显示视图设置的汇编集合，并且可以针对该特定情况从中选择最常用的显示视图设置。可替选地，作为另一示例，可以使用先前显示视图设置的汇编集合的平均值和/或中值。因此，当处于特定情况下时，可以为车辆的用户提供更优化的显示视图设置。
根据本发明的第二方面，该目的通过一种用于车辆的视觉辅助系统来实现，该视觉辅助系统包括：传感器系统，该传感器系统包括至少一个传感器，以用于生成车辆的周围环境的至少一部分的图像视图；至少一个显示单元，所述至少一个显示单元用于显示图像视图；以及控制单元，所述控制单元被配置成执行根据本发明的第一方面的任何一个实施例的方法的步骤。应注意，第一方面的所有实施例都能够应用于第二方面的所有实施例，反之亦然。第二方面的优点与第一方面的优点类似。
可选地，传感器系统可以是以下中的任何一种：包括至少一个相机的相机系统；包括至少一个LIDAR传感器的LIDAR系统；以及包括至少一个RADAR传感器的RADAR系统。
可选地，传感器系统可以是三维传感器系统，以生成车辆的周围环境的至少一部分的三维图像，优选地是围绕车辆的360度三维图像。仅作为示例，三维传感器系统可以是三维相机系统。
可选地，视觉辅助系统可以进一步包括通信单元，该通信单元被配置成优选地以无线接收器和/或发送器的形式来接收和/或发送显示视图设置。
根据本发明的第三方面，该目的通过一种包括根据第二方面的任何一个实施例的视觉辅助系统的车辆实现。应注意，第一和第二方面的所有实施例都能够应用于第三方面的所有实施例，反之亦然。第三方面的优点与第一和第二方面的优点类似。
可选地，车辆可以是商用车辆，例如卡车(诸如重型卡车)，建筑设备车辆以及公共汽车中的任何一种。
本发明的另一目的在于提供一种用于接收显示视图设置并将该显示视图设置发送到车辆队列的改善方法和/或系统，使得对车辆的用户的支持得以改善。
根据第四方面，该目的通过根据本发明所述的方法实现。根据第五方面，该目的通过根据本发明所述的系统实现。根据第六方面，该目的通过根据本发明所述的计算机程序实现。根据第七方面，该目的通过根据本发明所述的包括计算机程序的计算机可读介质实现。在下面的说明中公开了本发明的进一步优点和有利特征。
根据本发明的第四方面，该目的通过一种用于接收显示视图设置并将该显示视图设置发送到具有视觉辅助系统的车辆队列的方法来实现，该方法包括下列步骤：
从至少一个车辆接收至少一个显示视图设置，该至少一个显示视图设置与该至少一个车辆的特定情况相关联，
将具有相关联的特定情况的该至少一个显示视图设置发送到至少一个其它车辆，其中，当识别出该至少一个其它车辆正在经历该特定情况时，该至少一个其它车辆能够根据该至少一个显示视图设置来调整其视觉辅助系统的显示视图。应注意，第一、第二和第三方面的所有实施例都能够应用于第四方面的所有实施例，反之亦然。第四方面的优点与第一、第二和第三方面的优点类似。
根据本发明的第五方面，该目的通过一种用于接收显示视图设置并将该显示视图设置发送到车辆队列的系统来实现，该系统包括：用于接收并发送显示视图设置的装置；以及控制单元，该控制单元被配置成执行第四方面的任何一个实施例所述的方法的步骤。应注意，第一、第二、第三和第四方面的所有实施例都能够应用于第五方面的所有实施例，反之亦然。第五方面的优点与第一、第二、第三和第四方面的优点类似。
根据本发明的第六方面，该目的通过一种计算机程序来实现，该计算机程序包括程序代码装置，当所述程序在计算机上运行时，所述程序代码装置执行根据本发明的第一和第四方面的任何一个方法的步骤。
根据本发明的第七方面，该目的通过一种携带计算机程序的计算机可读介质来实现，该计算机程序包括程序代码装置，当所述程序产品在计算机上运行时，所述程序代码装置执行根据本发明的第一和第四方面的任何一个方法的步骤。
附图说明
参考附图，下面是作为示例引用的本发明的实施例的更详细说明。
在附图中：
图1示出了包括根据本发明示例实施例的视觉辅助系统的卡车的立体图；
图2示出了根据本发明第一方面的示例实施例的方法的流程图；
图3示出了从上方观察的包括根据本发明示例实施例的视觉辅助系统的卡车；
图4示出了包括根据本发明另一示例实施例的视觉辅助系统的卡车的立体图；
图5示出了包括根据本发明另一示例实施例的视觉辅助系统的卡车的立体图；
图6示出了根据本发明示例实施例的用于接收并发送显示视图设置的系统；以及
图7示出了根据本发明示例实施例的用于接收并发送显示视图设置的流程图。
附图示出了本发明的概略例证性实施例，因而不必按比例绘制。应理解，所示出的和所述的实施例是例证性的，并且本发明不限于这些实施例。还应注意，附图中的一些细节可能被夸大以更好地描述和说明本发明。除非另有说明，否则在整个说明中，相同的附图标记都指代相同的元件。
具体实施方式
在图1中示出了包括视觉辅助系统1的车辆10的前立体图。在该实施例中，车辆为重型卡车。视觉辅助系统1包括传感器系统3’、3”，这里，该传感器系统是具有一个以上的相机、以用于生成卡车10的周围环境的至少一部分的图像视图的相机系统。在附图中可以看到两个相机3’和3”，其中一个相机3’位于卡车10的右手侧上(沿卡车的行进方向观察)，另一个相机3”位于卡车10的前面处。更特别地，在该实施例中，相机3”位于卡车的挡风玻璃后方，并且向外面向卡车的前方。视觉辅助系统1进一步包括：至少一个显示单元4，以用于显示图像视图；以及控制单元(未示出)，该控制单元被配置成执行根据本发明的第一方面的任一个实施例所述方法的步骤。图1中所示的卡车10包括位于卡车的用户舱中的三个显示单元4。这些显示单元4例如可以是设置在车舱中的仪表板(未示出)上和/或车舱中的左侧和右侧上的显示屏。控制单元可以是位于卡车10中的任何位置的处理单元。例如，控制单元可以是也被用于执行卡车10的其它任务的处理单元。处理单元也可以连接到存储器单元，根据本发明的第六实施例的计算机程序可以存储在该存储器单元中，并且该计算机程序由处理单元使用以执行方法的步骤。根据示例实施例，显示单元4可以是人机接口(HMI)的一部分，该人机接口包括：至少一个输出端，该至少一个输出端可以是屏幕的视觉输出端；以及至少一个人类输入端。该至少一个人类输入端可以是例如键盘等，触摸屏等。在一个示例实施例中，人类输入端可以被用来输入用户偏好。根据本发明的示例实施例，用户偏好可以在特定情况之前和/或在特定情况期间输入。优选地，在特定情况之前输入用户偏好，由此避免在特定情况期间的任何不必要的干扰。
现在将关于图1和图2描述根据本发明的方法的实施例。
在第一步骤S1中，卡车10的控制单元识别应当采用视觉辅助系统1的特定情况。特定情况的识别可以通过不同的方式完成。例如，卡车可以包括GNSS(全球导航卫星系统)系统(未示出)，其识别卡车的地理位置。GNSS系统的示例为GPS，GLONASS和Galileo。位置可以通过被存储在例如数据库中的一系列预先已知的位置映射。数据库可以位于卡车中，和/或可以位于远处，诸如被包括在所谓的基于云的服务中。基于位置，可以识别出应当采用视觉辅助系统1。
在图1中所示的示例中，卡车10在位于两个建筑物之间的狭窄路段上行驶，在卡车的左侧有路缘石，并且不能从驾驶室立即看到路缘石。基于与应当采用视觉辅助系统1时相关联的卡车10的识别出的位置，在第二步骤S2中，控制单元接收针对特定情况的显示视图设置。显示视图设置基于来自于已经经历了该特定情况的另一车辆的至少一个其它视觉辅助系统的至少一个先前显示视图设置，其中，该至少一个先前显示视图设置与该特定情况相关。更特别地，在该示例中，该至少一个先前显示视图设置被配置成提供卡车10左手侧的路缘石的图像。
基于该至少一个先前显示视图设置，控制单元在步骤S3中调整显示单元4的显示视图，从而将路缘石的图像提供给用户。由此，用户(在这种情况下是卡车10的驾驶员)可以通过观看显示单元4提供的图像视图来避免碰到路缘石。根据示例实施例，可以在没有用户的任何直接参与的情况下自动执行调整，诸如在特定情况的初始阶段期间和/或在特定情况的整个阶段期间执行调整。
在针对特定情况(在该示例中为狭窄路段)有一个以上的先前显示视图设置的情况下，这些先前显示视图设置可能会有所不同。例如，先前显示视图设置之一可能被配置成聚焦在路缘石上，而另一先前显示视图设置可能被配置成聚焦在车辆的右手侧上，这是因为在右手侧上还有另一障碍物。在这种情况下，用于视觉辅助系统1的显示视图设置可以基于先前显示视图设置而被配置成提供左手侧和右手侧两者的图像。可替选地，显示视图设置可以被配置成根据最频繁使用的先前显示视图设置来提供图像。例如，可以得出结论，在狭窄路段中的其它视觉辅助系统最常提供在车辆的左手侧上的图像。
在图3中，从上方示出卡车10，其中卡车包括具有四个相机3、3’、3”和3”’的视觉辅助系统1。这些相机被设置在卡车的所有四侧上，由此能够生成卡车周围的360度相机视图。视觉辅助系统1包括至少一个显示单元(未示出)和至少一个控制单元(未示出)，以执行根据本发明的第一方面的方法的步骤。
在图4和图5中示出了针对车辆10的两个不同的特定情况。每一个特定情况都对应于地理位置，并且对应于车辆状态以及车辆关于障碍物5的定向中的至少一个。车辆状态可以是车辆向前行驶或向后行驶中的任一者。车辆关于障碍物5的定向可以是车辆被设置成以其前方面向障碍物5(如图4所示)或者车辆以其后方面向障碍物5(如图5所示)中的任一者。取决于特定情况的环境，相应地调整显示视图，并且基于来自于已经处于相同的相应的特定情况的另一车辆的至少一个其它视觉辅助系统的先前显示视图设置来进行该调整。
在图5中也进一步示出了用户2可以通过远程HMI单元从外部操作车辆，该HMI单元包括显示单元4，该显示单元4无线连接到车辆10的视觉辅助系统1。由此，取决于用户关于车辆10的位置2，相机视图可以例如朝向障碍物5，该障碍物5对于用户来说是隐藏的和/或该障碍物5对于用户成功地执行其任务来说很重要。显示单元4的显示视图设置基于来自于已经经历了特定情况的另一视觉辅助系统的至少一个先前显示视图设置。根据示例实施例，显示视图设置也可以包括诸如到物体的距离，车速等信息。因此，显示视图设置也可以包括与图像信息不同的其它信息。
图6和图7涉及本发明的第四和第五方面的实施例。图6示出了系统20，图7示出了方法的示例实施例的流程图。系统被配置成用于接收显示视图设置并将该显示视图设置发送到车辆队列100。车辆队列100在该示例中为多个重型卡车。系统20包括用于接收并发送显示视图设置的装置。在该实施例中，装置是无线接收器和发送器(未示出)，该无线接收器和发送器被配置成用于与车辆队列100(包括卡车10’和卡车100’)通信。无线通信可以通过任何已知的无线技术来实现，诸如经由3g，4g，5g等实现。根据一个示例实施例，系统20也可以被称为基于云的系统，其中远离车辆队列100储存信息。系统进一步包括控制单元(未示出)，该控制单元被配置成执行例如图7中所示的方法的步骤。方法包括第一步骤S10，以用于从至少一个车辆10’接收至少一个显示视图设置，该至少一个显示视图设置与针对该至少一个车辆10’的特定情况相关联。如上文所述，情况可以是任何类型的情况，诸如当处于某一地理位置处时或者当车辆正在进行特定任务时，诸如装载和/或卸载负载时。在第二步骤S20中，系统20将具有相关联的特定情况的该至少一个显示视图设置发送到至少一个其它车辆100’，其中，当识别出该至少一个其它车辆100’正在经历该特定情况时，该至少一个其它车辆100’可以根据该至少一个显示视图设置来调整其视觉辅助系统的显示视图。
应理解，本发明不限于上文所述和附图中所示的实施例；本领域技术人员应认识到，可以在所附权利要求的范围内做出许多改变和修改。

Claims (23)

1.一种用于调整车辆(10)的视觉辅助系统(1)的显示视图的方法，所述方法包括下列步骤：
-S1：识别应当使用所述视觉辅助系统的特定情况；
-S2：接收针对所述特定情况的显示视图设置，其中，所述显示视图设置基于来自于已经经历了所述特定情况的另一车辆的至少一个其它视觉辅助系统的至少一个先前显示视图设置，其中，所述至少一个先前显示视图设置与所述特定情况有关；以及
-S3：根据接收到的显示视图设置来调整所述视觉辅助系统(1)的所述显示视图。
2.根据权利要求1所述的方法，其中，所述显示视图设置对应于具有至少一个添加的校正参数的所述至少一个先前显示视图设置。
3.根据权利要求2所述的方法，其中，所述至少一个添加的校正参数指示用户偏好、所述视觉辅助系统的特性和所述车辆的特性中的任何一项。
4.根据权利要求3所述的方法，进一步包括下列步骤：通过来自于所述车辆的用户的至少一个手动输入来接收所述用户偏好。
5.根据权利要求4所述的方法，其中，所述方法进一步包括下列步骤：分析随时间来自于所述用户的一个以上的手动输入，并且据此提供校正参数，所述校正参数对应于随时间来自于所述用户的所述一个以上的手动输入。
6.根据前述权利要求中的任一项所述的方法，其中，所述特定情况包括暴露于所述车辆(10)的一系列步骤，其中，所述显示视图设置包括与所述一系列步骤相关联的对应的一系列特定显示视图。
7.根据前述权利要求1-5中的任一项所述的方法，其中，所述显示视图设置包括有关以下至少一项的信息：所述视觉辅助系统的传感器视图的焦点中心；所述传感器视图的缩放水平；所述传感器视图的覆盖面积；所述传感器视图关于车辆定向的方向；以及所述传感器视图的关于用户相对于所述车辆(10)的位置(2)的方向。
8.根据前述权利要求1-5中的任一项所述的方法，其中，所识别的特定情况是下列至少一项：所述车辆和/或所述视觉辅助系统的地理位置；所述车辆和/或所述视觉辅助系统所处的地理区域；所述车辆关于物体的特定定向；所述车辆正在进行的特定任务；特定时间和/或日期；车辆状态和所述车辆正在其上行驶的特定路线；环境状况。
9.根据前述权利要求1-5中的任一项所述的方法，其中，所述方法进一步包括下列步骤：从至少一个其它车辆、外部数据库、基于云的服务、所述车辆的数据库接收所述先前显示视图设置和/或所述显示视图设置。
10.根据前述权利要求1-5中的任一项所述的方法，其中，所述显示视图设置基于来自于已经经历了所述特定情况的其它车辆的多个其它视觉辅助系统的先前显示视图设置的汇编集合。
11.根据权利要求8所述的方法，其中，所述环境状况包括天气和周围光照水平。
12.一种用于车辆(10)的视觉辅助系统(1)，所述视觉辅助系统(1)包括：
-传感器系统，所述传感器系统包括至少一个传感器，以用于生成所述车辆的周围环境的至少一部分的图像视图；
-至少一个显示单元(4)，所述至少一个显示单元(4)用于显示所述图像视图；以及
-控制单元，所述控制单元被配置成执行根据权利要求1至11中任一项所述的方法的步骤。
13.根据权利要求12所述的视觉辅助系统(1)，其中，所述传感器系统是三维传感器系统，以用于生成所述车辆的周围环境的至少一部分的三维图像。
14.根据权利要求13所述的视觉辅助系统(1)，其中，所述三维图像是围绕所述车辆的360度三维图像。
15.根据权利要求12或14中的任一项所述的视觉辅助系统(1)，进一步包括通信单元，所述通信单元被配置成接收和/或发送显示视图设置。
16.根据权利要求15所述的视觉辅助系统(1)，其中，所述通信单元被配置成以无线接收器和/或发送器的形式来接收和/或发送显示视图设置。
17.一种包括根据权利要求12至16中的任一项所述的视觉辅助系统(1)的车辆(10)。
18.根据权利要求17所述的车辆(10)，其中，所述车辆是商用车辆。
19.根据权利要求18所述的车辆(10)，其中，所述商用车辆是卡车、建筑设备车辆以及公共汽车中的任何一种。
20.根据权利要求19所述的车辆(10)，其中，所述卡车是重型卡车。
21.一种用于接收显示视图设置并将所述显示视图设置发送到具有视觉辅助系统(1)的车辆队列(100)的方法，所述方法包括下列步骤：
-S10：从至少一个车辆(10’)接收至少一个显示视图设置，所述至少一个显示视图设置与所述至少一个车辆的特定情况相关联，
-S20：将具有相关联的特定情况的所述至少一个显示视图设置发送到至少一个其它车辆，其中，当识别出所述至少一个其它车辆正在经历所述特定情况时，所述至少一个其它车辆根据所述至少一个显示视图设置来调整其视觉辅助系统的显示视图。
22.一种用于接收显示视图设置并将所述显示视图设置发送到车辆队列的系统(20)，所述系统(20)包括：
-用于接收并发送显示视图设置的装置，
-控制单元，所述控制单元被配置成执行根据权利要求21所述的方法的步骤。
23.一种携带计算机程序的计算机可读介质，所述计算机程序包括程序代码装置，当所述程序在计算机上运行时，所述程序代码装置用于执行根据权利要求1至11或21中的任一项所述方法的步骤。
CN201980083408.0A 2019-01-30 2019-01-30 用于调整视觉辅助系统的显示视图的方法 Active CN113243028B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/EP2019/052189 WO2020156648A1 (en) 2019-01-30 2019-01-30 A method for adjusting a display view of a vision aid system

Publications (2)

Publication Number Publication Date
CN113243028A CN113243028A (zh) 2021-08-10
CN113243028B true CN113243028B (zh) 2023-07-28

Family

ID=65411835

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980083408.0A Active CN113243028B (zh) 2019-01-30 2019-01-30 用于调整视觉辅助系统的显示视图的方法

Country Status (4)

Country Link
US (1) US11679722B2 (zh)
EP (1) EP3918589B1 (zh)
CN (1) CN113243028B (zh)
WO (1) WO2020156648A1 (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004114202A1 (en) * 2003-06-13 2004-12-29 Sarnoff Corporation Vehicular vision system
EP3389026A1 (en) * 2017-04-12 2018-10-17 Volvo Car Corporation Apparatus and method for road vehicle driver assistance

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5119587B2 (ja) * 2005-10-31 2013-01-16 株式会社デンソー 車両用表示装置
US20170247000A1 (en) * 2012-03-14 2017-08-31 Autoconnect Holdings Llc User interface and virtual personality presentation based on user profile
US9145139B2 (en) * 2013-06-24 2015-09-29 Google Inc. Use of environmental information to aid image processing for autonomous vehicles
DE102013020875A1 (de) * 2013-12-13 2015-06-18 Man Truck & Bus Ag Verfahren zur Anzeige der Außensichtverhältnisse bei einem Fahrzeug, insbesondere Nutzfahrzeug
JP6043320B2 (ja) * 2014-06-18 2016-12-14 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理方法および情報処理システム
US10106172B2 (en) * 2014-08-18 2018-10-23 Ford Global Technologies, Llc Shared vehicle system
US20160189304A1 (en) * 2014-12-30 2016-06-30 Paypal, Inc. Detection of users and vehicle usage for variable insurance terms
CN108028873B (zh) * 2015-09-14 2019-09-17 科布拉电子有限公司 交通工具摄像机系统
DE102016007522B4 (de) * 2016-06-20 2022-07-07 Mekra Lang Gmbh & Co. Kg Spiegelersatzsystem für ein Fahrzeug
US10031523B2 (en) * 2016-11-07 2018-07-24 Nio Usa, Inc. Method and system for behavioral sharing in autonomous vehicles
US10515390B2 (en) * 2016-11-21 2019-12-24 Nio Usa, Inc. Method and system for data optimization
US10322696B2 (en) * 2017-01-18 2019-06-18 Gm Global Technology Operations Llc. Vehicle environment imaging systems and methods
US10935978B2 (en) * 2017-10-30 2021-03-02 Nio Usa, Inc. Vehicle self-localization using particle filters and visual odometry
US10551207B2 (en) * 2018-06-18 2020-02-04 Nio Usa, Inc. Autonomous vehicle sensor data and map integration
CN108920717B (zh) * 2018-07-27 2020-03-13 百度在线网络技术（北京）有限公司 用于显示信息的方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2004114202A1 (en) * 2003-06-13 2004-12-29 Sarnoff Corporation Vehicular vision system
EP3389026A1 (en) * 2017-04-12 2018-10-17 Volvo Car Corporation Apparatus and method for road vehicle driver assistance

Also Published As

Publication number Publication date
EP3918589B1 (en) 2022-11-09
WO2020156648A1 (en) 2020-08-06
US20220080893A1 (en) 2022-03-17
CN113243028A (zh) 2021-08-10
US11679722B2 (en) 2023-06-20
EP3918589A1 (en) 2021-12-08

Similar Documents

Publication Publication Date Title
CN108227703B (zh) 信息处理装置和方法、被操作车辆及记录程序的记录介质
CA3069114C (en) Parking assistance method and parking assistance device
US9555832B2 (en) Display system utilizing vehicle and trailer dynamics
CN108621943B (zh) 用于在车辆电子显示器上动态显示图像的系统和方法
US10477102B2 (en) Method and device for determining concealed regions in the vehicle environment of a vehicle
CN109987099B (zh) 车辆控制系统、车辆控制方法及存储介质
EP2974909A1 (en) Periphery surveillance apparatus and program
JP6410879B2 (ja) 車両用ミラー代替システム
CN111833627B (zh) 车辆视觉范围扩展方法、装置、系统和计算机设备
US20140043466A1 (en) Environment image display apparatus for transport machine
KR20200023443A (ko) 주차 제어 방법 및 주차 제어 장치
US11772634B2 (en) Parking control method and parking control device
CN112349256B (zh) 显示控制装置、显示控制方法及存储介质
JP2020077219A (ja) 車両情報提供装置
US20180231975A1 (en) Vehicle entertainment system
CN111587572A (zh) 图像处理装置、图像处理方法和程序
JP6824856B2 (ja) 表示制御装置および表示制御方法
CN113243028B (zh) 用于调整视觉辅助系统的显示视图的方法
JP2020120268A (ja) 表示システム、走行制御装置、表示制御方法およびプログラム
US11030468B2 (en) Image processing apparatus
US20230209206A1 (en) Vehicle camera dynamics
US11897541B2 (en) Method for guiding a vehicle
JP2017174043A (ja) 表示装置
JP7517308B2 (ja) 制御装置、表示装置、車両、および携帯端末
US20240317256A1 (en) Vehicular driving assistance system with enhanced road curve management

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant