CN107968806A - 车辆通信和图像投影系统 - Google Patents

车辆通信和图像投影系统 Download PDF

Info

Publication number
CN107968806A
CN107968806A CN201610916493.2A CN201610916493A CN107968806A CN 107968806 A CN107968806 A CN 107968806A CN 201610916493 A CN201610916493 A CN 201610916493A CN 107968806 A CN107968806 A CN 107968806A
Authority
CN
China
Prior art keywords
vehicle
image
processing unit
projection system
communication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201610916493.2A
Other languages
English (en)
Inventor
安东尼·皮尔斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Priority to CN201610916493.2A priority Critical patent/CN107968806A/zh
Priority to US15/785,108 priority patent/US20180111554A1/en
Publication of CN107968806A publication Critical patent/CN107968806A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/12Picture reproducers
    • H04N9/31Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141Constructional details thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/052Detecting movement of traffic to be counted or controlled with provision for determining speed or overspeed
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096791Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is another vehicle
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/20Monitoring the location of vehicles belonging to a group, e.g. fleet of vehicles, countable or determined number of vehicles
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/12Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/30Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing vision in the non-visible spectrum, e.g. night or infrared vision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/102Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using 360 degree surveillance camera system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/202Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used displaying a blind spot scene on the vehicle part responsible for the blind spot
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/40Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components
    • B60R2300/406Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the details of the power supply or the coupling to vehicle components using wireless transmission
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/50Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the display information being shared, e.g. external display, data transfer to other traffic participants or centralised traffic controller
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8033Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for pedestrian protection
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8066Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring rearward traffic
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture

Abstract

一种车队的车辆中的通信和图像投影系统包括:被构造成捕获车辆周围的图像的图像传感器单元;被构造成接收并处理所述图像和由外侧车辆捕获的外侧图像的处理单元;以及被构造成接收来自处理单元的外侧图像并将外侧图像投影至车辆的乘客可见的表面的投影单元。

Description

车辆通信和图像投影系统
技术领域
本公开总体涉及车辆通信和图像投影系统,具体涉及允许车辆乘客看到周围车辆的另一侧的车辆通信和图像投影系统。
背景技术
随着汽车技术以及通信技术的发展,车辆能够彼此近距离行驶。例如,由于能够控制速度以及车辆间的安全距离,车队中的自主车辆可排着长队行驶。因此,一些车辆中的乘客可能仅能看到周围扎堆的车辆,而无法看到周围车辆的另一面。因而需要提供一种系统来打开视景,并减少车辆乘客的拥挤感知。
发明内容
根据一方面,提供一种车队的车辆中的通信和图像投影系统。该通信和图像投影系统包括:被构造成捕获车辆周围的图像的图像传感器单元;被构造成接收并处理该图像以及由外侧车辆捕获到的外侧图像的处理单元;以及被构造成接收来自于处理单元的外侧图像并将外侧图像投影到车辆乘客可见的表面上的投影单元。
在一个实施例中,图像传感器单元可包括摄像头以捕获车辆前、后以及两侧的图像或包括360度摄像头。
在另一个实施例中,表面可为车辆的窗户,并且其中,该窗户包括能够显示来自于投影系统的图像的材料。
在另一个实施例中,窗户可包括透镜,以能够显示投影图像。
在另一个实施例中,窗户可包括能将投影图像转变成相应的可见发光图像的透明荧光屏。
在另一个实施例中,表面可为车辆的内部表面或车辆中的显示器或屏幕。
在另一个实施例中,表面可为车辆的周围车辆的外部表面。
在另一个实施例中,通信和投影系统还可包括GPS。处理单元可与云服务器通信,以接收并处理附加信息,将附加信息传输给投影单元,并指示投影单元将附加信息投影到表面上。附加信息可包括车辆速度、当前位置、行驶方向、到达时间、道路交通状况、安全警告、限速标志警告以及广告中的至少一个。
根据另一方面,一种车辆车队包括第一车辆和邻近第一车辆行驶的第二车辆。第一车辆包括第一通信和投影系统,并且第二车辆包括第二通信和投影系统。第一通信和投影系统可包括:第一图像传感器单元,用以捕获第一车辆周围的图像;第一处理单元,被构造成接收第一图像和由外侧车辆捕获到的第一外侧图像,并处理第一图像和第一外侧图像;以及第一处理单元,被构造成接收并将第一外侧图像投影到第一车辆的乘客可见的第一表面上。第二通信和投影系统可包括:第二图像传感器单元,被构造成捕获第二车辆周围的第二图像;第二处理单元,被构造成接收第二图像和第一图像,并处理第一图像和第二图像;以及第二投影单元,被构造成接收来自于第二处理单元的第一图像,并将包括外景的第一图像投影到第二车辆的乘客可见的第二表面上。
在一个实施例中,第一通信和投影系统和第二通信和投影系统可分别包括GPS和速度传感器中的至少一个。第一处理单元可进一步被构造为根据来自于GPS和速度传感器的信息,确定第一车辆和第二车辆的位置,识别包括外景的第一图像,并将包括外景的第一图像传输给第二车辆。第二处理单元可进一步被构造为根据来自于GPS和速度传感器的信息,确定第一车辆和第二车辆的位置;识别包括外景的第二图像,并将包括外景的第二图像传输给第二车辆。第一车辆接收到的第一外侧图像可为包括外景的第二图像,而第二车辆接收到的第一图像可为包括外景的第一图像。
在另一个实施例中,第一表面可为第一车辆的窗户,并且第二表面可为第二车辆的窗户。
在另一个实施例中,第一表面可为与第一车辆相邻的第二车辆的外部表面,并且第二表面可为与第二车辆相邻的第一车辆的外部表面。
在另一个实施例中,第一车辆和第二车辆可大体并排行驶,并且第一车辆可在第二车辆的右侧且靠近道路一侧行驶,而第二表面为第一车辆的左侧外部表面。
在另一个实施例中,第一车辆还可包括位于左侧外部表面上的视觉标记,并且第一处理单元将包括外景的第一图像与视觉标记连接。第二图像传感器单元可捕获视觉标记,并传输给第二处理单元。第二处理单元可被构造成识别相连的第一图像和视觉标记,并指示第二投影单元将包括外景的第一图像投影到第二表面上。
在另一个实施例中,第二处理单元可被构造成根据视觉标记确定投影的方位。视觉标记可由数字、字母、2D条形码或一串点中的一个组成。
在另一个实施例中,第一车辆可为车队中的领头车辆,而第二车辆可为车队中的第二辆车辆。第二表面可为第一车辆的后表面,而第一图像可为第一车辆前面的景色,并被第二车辆的第二投影单元投影到第一车辆的后表面上。
在另一个实施例中,车队可包括第三车辆,其为车队中的第三辆车辆。第三车辆可包括第三通信和投影系统。第三通信和投影系统可包括第三图像传感器单元,其被构造成捕获第三车辆周围的图像;第三处理单元,其被构造成接收第三图像、包括外景的第一图像和第二图像,并处理包括外景的第一图像、第二图像和第三图像;第三投影单元,其被构造成将包括外景的第一图像投影到第二车辆的后表面上。包括外景的第一图像可直接从第一处理单元传输至第三处理单元,或从第一处理单元传输至第二处理单元,再从第二处理单元传输至第三处理单元。
在另一个实施例中,第一车辆可为车队最后面的车辆,而第二车辆可为车队中的倒数第二辆车辆。第二表面可为第一车辆的前表面,而第一图像可包括第一车辆后面的景色,并可被投影到第一车辆的前表面上。
根据又一方面,本公开提供一种用于操作车队的车辆中的通信和图像投影系统的方法。车辆可包括通信和图像投影系统,其包括图像传感器单元、处理单元以及投影单元。该方法包括:接收由车队中的外侧车辆捕获到的外侧图像;以及将外侧图像投影到车辆乘客可见的表面上。
在一个实施例中,方法还可包括:图像传感器单元捕获车辆周围的图像;处理单元处理图像,并将图像传输给另一车辆。
在另一个实施例中,方法还可包括:确定车辆的位置;识别包括外景的图像;以及将包括外景的图像传输给另一车辆。
在另一个实施例中,车辆乘客可见的表面可为车辆的窗户。
在另一个实施例中,车辆乘客可见的表面可为相邻车辆的外部表面。
在另一个实施例中,处理单元可通过专用短程通信或wifi或云服务器与车队中的其他车辆的处理单元通信。
本公开的车辆通信和图像投影系统具有优势,因为其允许车辆乘客看到本来会被周围车辆遮挡的景色。
附图说明
图1为道路上的车辆车队的示意性平面图,其示出在具有根据本公开的一个实施例的通信和图像投影系统的车辆间的图像传输和投影的实例。
图2为道路上的车辆车队的示意性平面图,其示出根据本公开的车辆间的传输和投影的另一实例。
图3为两车中的第一通信和图像投影系统和第二通信和图像投影系统的方框图。
图4展示两车之间的图像传输和投影的实施例。
图5为根据本公开的另一个实施例的车辆中的通信和投影系统的方框图。
图6展示在具有图5所示的通信和投影系统的车辆的内部上的图像投影。
图7为示出操作车队中的车辆中的通信和图像投影系统的方法的流程图。
具体实施方式
通过结合附图阅读下面详细的描述,将能更好地理解所公开的通信和图像投影系统。所提供的详细描述和附图仅仅为本文描述的各种发明的实例。本领域的技术人员将了解,所公开的实例可在不脱离本文描述的本发明的范围的情况下,经过变形、修改和改变。针对各种应用和设计考虑可以设想出多种变形,然而,为了简洁,并非每种设想的变形都一一描述在下面的详细描述中。
所提供的各种通信和图像投影系统的实例遍及下面的详细描述。实例中的相关部件可与不同实例中的相同、类似或不同。为了简洁,相关部件将不在各实例中过多解释。然而,相关部件名称的使用则暗示读者,具有相关部件名称的部件可能与之前实例中解释的相关部件类似。给定实例中特有的部件将在该特定实例中进行描述。读者应了解,给定部件无需与任意给定附图或实例中的相关部件的具体描绘相同或类似。
本公开的车辆的一示范性通信和图像投影系统可包括图像传感器单元以捕获车辆周围的图像,处理单元,其被构造成接收并处理来自于图像传感器单元的图像和从其他车辆传输过来的图像以及相关数据,以及投影单元,其被构造成将选定图像投影到车辆乘客可见的表面上。在一些实施例中,表面可为车辆的窗户。在一些实施例中,表面可为周围车辆的外部表面。传输图像可为由行驶在车队的前侧、外侧和后侧且面向外景的车辆捕获到的图像。图像可为反映周围实时景象的视频图像。这样,乘客可看到本来会被周围车辆遮挡的景色。
图1为路上车队的示意性俯视图,其示出使用根据本公开的一个实施例的示范性通信和图像投影系统的车辆间的图像传输和投影的实例。在本应用中,车队指的是一组靠近行驶的车辆,或一组受到集中管理的车辆。车辆可为任意车辆,诸如汽车、公共汽车、飞机和船舶。车辆可为自主车辆。图1示出在D方向上行驶的车队,并且路边风景位于车队的右侧。车队中的各车辆可包括通信和图像投影系统,其允许车辆内的乘客看到被车队中的其他车辆遮挡的扩大的视图或视图。例如,位于车队中间的车辆2中的乘客无法看到位于车队右侧的右侧风景。然而,通信和投影系统可接收并将右侧图像投影到车辆1的左外部表面上,从而使乘客能够看到路边风景,其具体细节描述如下。图1示出车队中大体并排行驶的车辆间的图像传输和投影。在图1中,图像传输路径用虚线示出,而图像投影路径用实线示出。从图中可以看出,车辆1、2和3大体并排行驶,并且车辆2被其右侧的车辆1包围。车辆2的处理单元可接收车辆1的图像传感器单元捕获到的图像20。在所示实例中,车辆1为车队的外侧车辆且是车辆2的周围车辆。周围车辆被定义为邻近或紧挨一车辆的车辆。图像20可经传输路径10传输给车辆2。车辆2的投影单元可经投影路径14,将图像20投影到车辆1的外部表面12上。
车辆3的乘客也可通过使用车辆通信和图像投影系统,看到路边风景。例如,车辆3的处理单元可接收车辆1的图像传感器单元捕获到的图像20。在一些实施例中,图像20可从车辆1(即外侧车辆)经过传输路径10直接传输过来。在一些实施例中,图像20可从车辆1传输至车辆2,再从车辆2(即车辆3的周围车辆)传输至车辆3的处理单元。即,图像20可分程传递至车辆3的处理单元。车辆3的投影单元可经过投影路径18,将图像20投影到车辆2的外部表面16上。这样,车辆3的乘客可通过透过车辆3的右车窗看外部表面16,看到右侧风景。
类似地,车辆5的图像传感器单元捕获到的图像可在车队中大体并排行驶的车辆5、6和7之间传输,并被投影到车辆5和6的外部表面上。
使用类似原理,道路左侧的风景也可被传输和投影。例如,车辆3捕获到的左侧风景可传输给车辆2,并被投影到车辆3的右外部表面上,从而使得车辆2的乘客能够从车辆2的左车窗看到左侧风景。类似地,车辆3捕获到的左侧风景可进一步传输给车辆1,并被投影到车辆2的右外部表面上,从而使车辆1的乘客能够从车辆1的左车窗看到左侧风景。
图1进一步示出列队行驶时,前景图像的传输和投影。车辆2的乘客可通过使用通信和图像投影系统,看到车队前面的风景。例如,车辆4、2和6在同一车队中。车辆2的处理单元可接收车辆4的图像传感器单元捕获到的图像40。图像40为车辆4的图像传感器单元捕获到的前景。在所示实例中,车辆4为车队的外侧车辆或领头车辆,并且是车辆2的周围车辆。图像40可经经传输路径42传输至车辆2的处理单元。车辆2的投影单元可经投影路径46,将图像40投影到车辆4的后表面44或车辆4的后备箱部上。
车辆6(车队中最后面的车辆)的乘客也可通过使用车辆通信和图像投影系统,看到前面的风景。例如,车辆6的处理单元可接收图像40。在一些实施例中,图像40可从车辆4(即领头车辆或外侧车辆)经传输路径42直接传输给车辆6。。在一些实施例中,图像40可从车辆4传输至车辆2(即车辆6的包围车辆),再从车辆2传输至车辆6的处理单元。即,图像40可分程传递至车辆6的处理单元。车辆6的投影单元可经投影路径48,将图像40投影到车辆2的后外部表面47或后备箱部上。这样,车辆6的乘客可透过车辆6的前窗看外部表面47,看到前面的风景。
类似地,车辆3的图像传感器单元捕获到的图像可在车队中大体并排的车辆3、7和8之间传输,并被投影到车辆3和7的外部表面上。类似地,车辆1的图像传感器单元捕获到的图像可在车队中大体列队的车辆1和5之间传输,并被投影到车辆1的外部表面上。
图2为路上车队的示意性俯视图,其示出根据本公开的一个实施例,由车队中最后面的车辆捕获到的图像的传输和投影的实例。车辆3(车队中的领头车辆)的乘客可通过使用车辆通信和图像投影系统,看到后面的风景。例如,车辆8的处理单元可接收图像50。在一些实施例中,图像50可经传输路径52,直接从车辆8(即最后面的车辆或外侧车辆)传输至车辆3。在一些实施例中,图像50可经传输路径54,从车辆8传输至车辆7,再从车辆7经传输路径56,传输至车3的处理单元。即,图像50可分程传递至车辆3的处理单元。车辆3的投影单元可经投影路径58,将图像50投影到车辆7的前表面57或引擎盖部上。这样,车辆3的乘客可透过车辆3的后窗看外部表面57,看到后面的风景。类似地,车辆7的投影单元可经由传输路径54接收图像50,并经投影路径59,将图像50投影到外部表面55(车辆8的引擎盖)上。
图3分别为车辆1和车辆2中的第一和第二通信和图像投影系统100和200的方框图,其示出车辆1和2之间的通信。车辆1和2可为车队中相邻的车辆。例如,车辆1和2可为图1所示的车辆1和2,其中,车辆1和2并排行驶,并且车辆1靠近道路的一侧行驶。应理解,下面描述的通信和投影可应用于位于车队中不同位置的车辆。例如,车辆1和2可列队行驶,并且车辆1位于车辆2的前面。在另一实例中,车辆1和2行驶在同一车队中,并且车辆1位于车辆2的后面。车辆1的通信和图像投影系统100可包括第一图像传感器单元102、第一处理单元104和第一投影单元106。附加地或可替代地,车辆通信和图像投影系统100可包括其它传感器单元108,例如,其可包括GPS和/或速度传感器。类似地,车辆2的通信和图像投影系统200可包括第二图像传感器单元202、第二处理单元204和第二投影单元206和/或其他传感器单元208。通信和图像投影系统100和200可相似。出于简洁,此处将详细描述通信和图像投影系统100的第一图像传感器单元102、第一图像处理单元104和第一投影单元106。
第一图像传感器单元102可被构造成捕获车辆1周围的第一图像。第一图像可包括车辆1前侧、外侧和和后侧的景色。第一图像传感器单元102可为能够捕获车辆1的前部图像、左右侧图像以及后部图像的任意合适图像传感器。例如,第一图像传感器单元102可包括多个设置在车辆1的不同位置上的摄像头,或设置在车辆同一位置上的多个摄像头。在另一实例中,第一图像传感器单元102可为能够捕获车辆1四周的图像的360度摄像头,并且360度摄像头可设置在车辆1的一位置上,例如,位于车辆1的车顶上。在又一实例中,第一图像传感器单元102可包括能够在夜晚捕获较好图像的夜视摄像头。第一图像传感器102可为捕获直播流图像的摄像机。在一些实施例中,车辆1为自主车辆,并且图像传感器单元可为用于控制车辆驾驶的系统中使用的摄像系统。第一图像传感器捕获到的图像可包括设置在车辆2的外部表面上的视觉标记210。
第一处理单元104可被构造为接收并处理图像和数据。第一处理单元104可包括提供计算资源的处理器。第一处理单元104可用于执行可加载到存储单元中的软件指令。指令可包括程序代码、计算机可用程序代码或计算机可读程序代码。存储单元可为能够存储信息,如但不局限于:数据、功能形式的程序代码和/或临时和/或永久存储的其他合适信息,的存储装置。例如,存储单元可包括随机存取存储器或其他任意合适的易失性或非易失性存储装置以及永续储存器。永续储存器可为一个或多个装置,诸如硬盘驱动器、闪速存储器、可重写光盘、可重写磁带或上述的某种结合。
在一些实施例中,第一处理单元104可被构造成接收来自于第一图像传感器单元102的第一图像以及车队的外侧车辆捕获到的第一外侧图像。附加地或可替代地,第一处理单元104可接收与车辆间传输的图像相关的其他信息/数据。在一实例中,第一外侧图像为由车辆2的图像传感器单元202捕获到的外侧图像,并且其他信息包括车辆2的视觉标记210。第一处理单元104可进一步处理用于传输给其他车辆的第一图像。在一些实施例中,第一处理单元104可识别包括外景的第一图像,并将包括外景的第一图像传输给其他车辆。
在一些实施例中,第一处理单元104可根据车辆1周围的图像,确定车辆1在车队中的位置。如果前部图像显示为空白,或车辆与车辆1相距一定距离行驶,右侧图像显示风景,左侧图像显示包围的车辆,而后部图像显示后面包围的车辆,图像处理单元102可确定车辆1是车队中的领头车辆且也是车队中的外侧车辆,如图1所示。
当确定车辆位置时,第一处理单元104可处理第一图像,并确定将第一图像传输给其他车辆。在图1所示的实例中,处理单元104可将具有右侧风景的图像传输给车辆2,并且将具有前景的第一图像传输给车辆后面的车辆(诸如图1中的车辆6)。
在其他实施例中,第一处理单元可在未识别包括外景的第一图像的情况下,将第一图像传输给另一车辆。另一车辆的处理单元可处理第一图像,并确定包括外景的第一图像并传输给投影单元用于投影。
第一图像处理单元104可进一步处理车队的外侧车辆捕获到的第一外侧图像。第一外侧图像可包括车辆1的乘客无法看到的图像。例如,第一外侧图像可包括由车队左侧的外侧车辆捕获到的图像,其可为迎面车流的景象(即与车队方向相反的车流)或道路左侧的风景。如果车辆2为行驶在车辆1左侧的外侧车辆,第一外侧图像可为车辆2的图像传感器单元202捕获到的图像,且从车辆2的处理单元204传输至车辆1的处理单元104。
第一处理单元104可在指示第一投影单元106将第一外侧图像投影到车辆2的外部表面之前,处理附加信息。在一些实施例中,车辆可包括设置在其外部表面上的视觉标记。例如,车辆2可包括具有条形码或其他信号的视觉标记210。车辆2的处理单元204可将视觉标记210与要传输给车辆1的图像连接。第一处理单元104可分析第一图像传感器单元捕获到的视觉标记210的图像以及来自于第二处理单元204的相连图像,以确定投影相连图像的表面。第一处理单元104可进一步根据视觉标记以及车辆1和2的位置和速度,确定投影方位。
在一些实施例中,车辆捕获到的所有图像均可播送给车队中的剩余车辆,并且各广播图像伴有关联数据。接收车辆的处理单元可根据关联数据,从广播图像中选择用于投影的最佳图像。在一实例中,可通过检测相连视觉标记或通过GPS或伴随广播图像的其他位置数据进行选择。在另一实例中,与图像一起传输的关联数据可包括图像源的指示,例如,图像是否为外侧图像。接收车辆的处理单元可基于关联数据,决定投影哪张图像。例如,图1中的车辆2可具有来自于其他所有车辆1、3、4、5、6、7和8的可得图像数据,并可根据关联数据选择最佳或最适合的图像用于投影。
在一些实施例中,为排除车辆2的侧窗,车辆2的外部表面可包括多个标志,以界定投影包括外景的第一图像的区域。基于标志形成的形状,处理单元104可确定投影区域。在一些实施例中,第二处理单元204可传输有关车辆类型的信息,从而使得处理单元104能够根据车型信息确定除了窗户之外的投影区域。
第一投影单元106可接收并投影第一图像或包括外景的第一图像。第一投影单元106可为能够将风景展现投影到表面上的任意合适投影单元,例如视频投影机、LED投影仪或镭射投影仪。投影单元106可包括多个投影装置。在一些实施例中,投影装置可设置在车辆1的前侧、两外侧和后侧上。在一些实施例中,投影单元106可为与多个投影装置集成的单一元件,并且投影单元106可设置在车辆1的车顶上。在图1所示的实例中,包括车辆2左侧风景的第一外侧图像可被投影到车辆2的右外部表面上,从而使得车辆1内的乘客当透过车辆1的左窗向外看时,能够看到被车辆2遮挡的外景。
第一通信和图像投影系统100还可包括其它传感器,以便于传输和投影。在一实例中,其它传感器可包括全球定位系统(GPS)或其他合适的本地定位系统。GPS可与第一处理单元104通信,以确认车辆1在车队中的位置。GPS可进一步提供有关迎面而来的交通车辆的信息,从而使得车辆1不会将图像投影到相邻的迎面车辆上。其他传感器单元108可包括检测车辆1的速度的速度传感器。第一处理单元104可通过比较从第二处理单元204接收到的车辆1的速度和车辆2的速度,估算车辆1和2的相对速度,并确定相邻车辆是同向还是逆向行驶。进一步地,第一处理单元104可根据位置和车辆1和车辆2间的相对速度,调整投影角度。
第一通信和图像投影系统100还可包括与第一处理单元104电力连接的投影致动器110。乘客可通过激活投影致动器110,选择是否观看外景。投影致动器110可临近窗户设置,并且可包括针对左景、右景、前景和后景的多个按钮,以控制这些景观在相应表面上的投影。
第一处理单元104可进一步与车辆1或车队的云服务器和/或提供第三方内容的第三方云服务器通信。这样,第一投影单元106可投影附加信息,其包括但不局限于:车辆1的速度、当前位置、到达时间、道路交通状况、安全警告、限速标志警告以及广告。附加信息还可包括由车辆1或其他车辆识别的视觉指示器。视觉指示器可投影到车辆的外部表面上,以区分投影图像和未遮挡的风景视野。
现在转向车辆2的第二通信和图像投影系统200,系统200可包括第二图像传感器单元202、第二处理单元204和第二投影单元206和/或其他传感器单元208。第二图像传感器单元202可被构造成捕获车辆2周围的第二图像,并将第二图像传输给第二处理单元204。第二处理单元204可接收来自于图像传感器单元202的第二图像和处理单元104传输的第一图像。第二处理单元204可如上所述处理第二图像以及第一图像,并将包括外景的第一图像传输给第二投影单元206并将第二图像传输给车辆1的处理单元104和/或其他车辆。在图1所示的实例中,第一图像可被投影到车辆1的左外部表面上,从而使得车辆2的乘客能够看到右侧风景。
类似于车辆1,车辆2的通信和投影系统200可包括投影致动器210,并可与云服务器或第三方服务器通信。
应理解,车辆1和车辆2可位于车队中不同于上面所述的位置。例如,车辆1和车辆2可在车队的同一车队上。然而,上述车辆间的通信和投影原理,依然可适用。
图4示出车辆A和车辆B之间的图像传输和投影的实施例的示意图。在所示实例中,车辆A和车辆B在相邻车道向方向D行驶。车辆A和B包括上述的通信和投影系统。在一些实施例中,车辆A和B可通过专用短程通信、Wifi、广播或任意合适的车对车通信协议通信。通信可在车辆A和B中的处理单元间进行。例如,包括图像或数据的信号300可在车辆A和B间传输。从图4中可以看出,车辆A的图像传感器单元302捕获左侧道路上的图像304。车辆A的处理单元可连接图像304至设置在车辆A的外部表面308上的视觉标记306。视觉标记306可为数字和/或字母、2D条形码或一串点。相连图像304可包括与视觉标记306相关的标识符。车辆B的图像传感器单元310可捕获视觉标记306,并将其传输给车辆B的处理单元。车辆B的处理单元可确定从多个车辆接收到的图像中要投影的图像。在所示实例中,车辆B的处理单元可比较接收图像以及视觉标记306,并在确定相连图像304中的标识符匹配视觉标记306时,选择与视觉标记306连接的图像304作为要投影的图像。车辆B的处理单元可进一步指示投影单元312将图像304投影到外部表面308上。
在一些实施例中,车辆B可一并投影图像304和视觉觉指示器314。视觉指示器314可用于识别投影到外部表面308上的图像304为捕获到的图像,从而使得车辆B的驱动系统知道其左侧存在的是车辆而非风景,并相应控制驾驶。
在一些实施例中,车辆A和B可通过云服务器通信。例如,车辆A和车辆B都可连接至其订购的云服务器100。服务器100可提供附加投影信息,其包括但不限制于交通状况、限速标志警告、安全警告和/或其他第三方内容(诸如广告)。车辆B可进一步将附加信息316投影到外部表面308上。
在一些实施例中,车辆B的通信和投影系统可连续比较图像304与其他车辆的数据传输,以确认车辆A依然是投影图像的最近车辆。附加地或可替代地,车辆B的通信和投影系统可比较来自于GPS的数据,并确定其相对于车辆A的位置。如果车辆B的通信和投影系统确定车辆A不再是车辆B的最近车辆(例如,车辆A远远行驶在车辆B的前面或车辆B的后面),车辆B关闭传输。如果车辆B的通信和投影系统确定车辆B是最近车辆,并且无其他车辆在投影,其将打开投影单元312。延迟/滞后可被构造在打开和关闭事件之间,以防止频繁切换。
在一些实施例中,车辆A捕获到的所有图像均可与各图像的关联数据一并播送给车辆B。车辆B的处理单元可根据关联数据,从广播图像中选择用于投影的最佳图像。关联数据可为车辆B外部表面上的视觉标记或指示图像源的其他位置数据(诸如,左、右、前或后图像)。在所示实例中,与视觉标记信息相连的图像区分其他图像,例如,包括车辆A的前景、后景、右景的图像。这样,车辆B的处理单元可选择图像304投影到外部表面308上。
在一些实施例中,车辆A和B可连续接收图像,并在行驶时投影图像。在一些实施例中,投影可由车辆的乘客通过连接到通信和投影系统的致动器激活。
图5为根据本公开的另一个实施例的车辆中的通信和投影系统400的方框图。通信和图像投影系统400被构造成将图像投影带车辆的内部表面上。车辆可靠近车队中的其他车辆行驶。其他车辆可包括与通信和图像投影系统400类似的通信和投影系统。通信和图像投影系统400可包括图像传感器单元402、处理单元404、投影单元406以及可包括GPS和/或速度传感器的其他传感器408。图像传感器单元402可捕获车辆周围的图像,并将图像传输给处理单元404。处理单元404可接收来自于图像传感器单元402的图像和来自于其他车辆的处理单元的外侧图像和/数据。外侧图像可被投影到车辆的内部表面上。
在一些实施例中,投影单元406可将图像投影到车辆内部的左、右、前以及后窗。处理单元404可确定要投影的图像以及用于投影图像的窗户。在一些实施例中,处理单元404可通过检查外侧图像确定外侧图像是否位于车辆的左侧、右侧、前侧和后侧。例如,向车辆后面移动且包括路边风景的景象可表示左侧或右侧风景。包括路面线条的图像可表示前或后风景。在一些实施例中,处理单元404可接收来自于GPS408的信息,其能够告知车辆在车队中的位置。类似地,外侧车辆可通过GPS了解其在车队中的位置,并将外侧图像连同位置数据一起传输给车辆。当确定外侧图像的捕获源时,图像处理单元404可指示投影单元406将图像投影到特定窗户上。投影单元406可包括前窗、侧窗以及后窗投影仪,其接收并分别投影展示车队前景、侧景以及后景的图像。在一些实施例中,车队中的其他车辆捕获到的所有图像均可播送给车辆,并且各传入图像伴有关联数据。处理单元404可根据关联数据,从广播图像中选择用于投影的最佳图像。在一实例中,关联数据可与摄像头的代码或摄像头捕获具体图像的视野相关,以便于处理单元404了解,例如,图像是前景、后景,还是侧景。在另一实例中,关联数据可包括GPS数据或其他位置数据,以识别图像,例如,图像是否是外侧图像或周围车辆另一侧的景色,或者图像是左景、右景,还是侧景。应理解,关联数据可为识别传输给车辆的图像的任意合适数据。
任意合适的车对车通信可用于图像传输。附加信息可与外侧图像一并传输给车辆的处理单元404。例如,其他车辆的速度和位置可传送给处理单元404。通过比较车辆与其他车辆的速度和位置,处理单元404可选择能够反映车辆未被周围车辆遮挡时能够看到的实时风景的外侧图像,并指示投影单元406将外侧图像投影到特定表面上。
车辆可与车辆的云服务器和/或提供第三方内容的第三方云服务器通信。投影单元406可投影附加信息,其包括但不局限于:车辆的速度、当前位置、到达时间、道路交通状况、安全警告、限速标志警告以及广告。
车辆的窗户可由能够显示投影图像的任意合适材料制成。在一些实施例中,窗户可包括透镜,以能够显示投影图像。在一些实施例中,窗户可包括能将投影图像转变成相应可见发光图像的透明荧光屏。
在一些实施例中,外侧图像可显示在车辆内部的显示器或屏幕上。在一些实施例中,图像可显示在车辆外部的显示器或屏幕上。
在一些实施例中,图像可在车辆的窗户上连续投影,以便于即使视野受到附近行驶的车辆的遮挡,乘客依然能够拥有风景的扩大的视图。
在一些实施例中,投影可由乘客激活。通信和图像投影系统400还可包括投影致动器410。致动器410可位于窗户的框架上,以允许乘客选择是否想要看到被其他车辆遮挡的景色。致动器410可允许乘客选择投影到窗户上的景色。例如,乘客可选择要左侧外景投影到左窗上,右侧外景投影到右窗上,后侧外景投影到后窗上和/或前侧外景投影到前窗上。选定的景色既可满足乘客的需求,同时与将图像投影到所有窗户上相比,也可节省能量。
图6展示具有与图5所示的系统400相似的通信和投影系统的车辆500的内部上的图像投影。车辆500可在车队中行驶。在所示实例中,车辆500可包括投影单元502,其被构造成将图像投影到左窗504和右窗506中的至少一个上。从图中可以看出,展示道路左侧风景的图像508被投影到左窗504上。展示道路右侧风景的图像510被投影到右窗506上。
在一些实施例中,致动器512可临近左窗504设置。坐在左窗504旁边的乘客如果想看被行驶在车辆左侧的车辆遮挡的景色时,可使用致动器512打开通信和投影系统。类似地,致动器514可临近右窗506设置。坐在右窗504旁边的乘客如果想看被行驶在车辆右侧的车辆遮挡的景色时,可使用致动器514打开通信和投影系统。
图7为示出用于操作车队的车辆中的通信和图像投影系统的方法600的流程图。通信和投影系统可包括以上参考图3和图5论述的图像传感器单元、图像处理单元和投影单元。车辆的通信和投影系统可与其他车辆的通信和投影系统通信。在602中,方法600可包括接收外侧车辆捕获到的外侧图像以及与图像投影相关的其他信息。外侧车辆可为行驶在车队外侧的车辆。外侧车辆可为与车辆同列行驶的领头车辆或后面车辆,或为与车辆大体并排行驶的左外侧或右外侧车辆。
在604中,方法可包括将外侧图像投影到车辆的乘客可见的表面上。车辆的处理单元可处理外侧图像,确定投影外侧图像的表面,并指示投影单元投影外侧图像。在一些实施例中,车辆的处理单元可根据外侧图像中的景色和/或诸如外侧车辆的位置等其他信息确定外侧图像源(即前景、后景、左景或右景)。可替代地或附加地,处理单元接收到的外侧图像经由外侧车辆处理,并且与外侧图像一并传输的其他信息包括用于识别外侧图像源的关联数据。在一些实施例中,车队中的其他车辆捕获到的所有图像均可为播送给车辆,并且各图像伴有关联数据。车辆的处理单元可根据关联数据确定要投影的最佳图像或外侧图像。
投影单元接收处理单元的指令,并将外侧图像投影到车辆的相应侧面上。在一些实施例中,车辆乘客可见的表面可为车辆的窗户。在一些实施例中,车辆乘客可见的表面可为相邻车辆的外部表面。包括车辆前、右侧、左侧和后侧景色的图像可分别投影到车辆的前、右、左和后表面上。包括车辆上方和下方景色的图像可分别投影到车辆的内部车顶或底板上。例如,车辆下方的图像可提供前方地面地形的景象。车辆上方的图像可提供乘客感兴趣的上方视野或风景。要投影的图像可通过致动器手动选择或由系统自动选择。
当车辆接收外侧图像时,车辆可捕获车辆周围的图像,处理并将图像传输给另一车辆。在606中,方法600可包括通过图像传感器单元捕获车辆周围的图像。图像可包括车辆的前、右侧、左侧、后侧、上方和下方的景色。接着,在608中,方法600可通过处理单元处理图像。在一些实施例中,方法600可包括确定车辆在车队中的位置,并识别包括外景的图像。在一些实施例中,车辆在车队中的位置可根据车辆周围的图像确定。例如,如果前景显示前方的街道,而左、右和后景显示同向行驶的附近车辆时,方法600可确定,车辆是车队中的领头车辆,并被其他车辆包围。在本实例中,方法600可确定包括外景,即前景的图像。应理解,车辆在车队中的位置可通过任意合适的方法,例如,GPS或车队的云服务器,或通过车对车通信,确定。在一些实施例中,处理单元可将捕获到的图像与数据或代码相关联,以使得接收车辆的处理单元能够选择图像投影到合适表面上。
接着,在610中,方法600可包括将图像传输给车队中的至少另一车辆。在一些实施例中,传输图像可包括图像以及关联数据和/或与图像相关的其他信息。例如,关联数据可识别图像源,即车队的前、后、左或右侧风景,或识别车辆在车队中的位置。在一些实施例中,方法600可将车辆捕获到的所有图像传输给其他车辆。在一些实施例中,方法600可将选择的图像(诸如外侧图像)传输给选定车辆。例如,方法600可将图像传输给与车辆大体同排或同列行驶的其他车辆。例如,如果确定车辆是领头车辆,包括外景的图像是由车辆的图像传感器单元捕获到的前部图像。图像可传输给与车辆同列行驶且位于车后的车辆,如图1所示。在另一实例中,如果车辆为车队右外侧的车辆,包括外景的图像还包括由车辆的图像处理单元捕获到的右侧风景。图像被传输给与车辆大体并排行驶且位于车辆右侧的车辆。
上述方法使乘客能够通过看有投影图像的表面,观看本来被相邻车辆遮挡的景色。
应理解,尽管投影图像被描述为外侧图像,但是投影图像可为展示最近车辆的另一面的交通的图像。乘客可通过激活致动器选择观看外侧图像或展示最近车辆另一面的交通的图像。
请注意,本文包括的实例控制和估计程序可与各种车辆系统构造配套使用。本文描述的专用程序可表示一个或多个任意数量的处理策略,诸如事件驱动、中断驱动、多任务、多线程等。同样地,所示的动作、操作或功能可按所示顺序执行、并行执行,或在一些情况下省去。同样地,处理顺序的提供是便于说明和描述,其不一定需要实现本文描述的示范性实施例的特征和优势。一个或多个所示动作或功能可根据使用的特定策略重复执行。进一步地,所述动作可以图解形式表示要被程序设置进控制系统中的计算机可读存储介质中的代码。
以上公开包括多个具有独立实用的不同发明。尽管这些发明中的每一个都已以特定形式公开,但是上面公开和说明的特定实施例不应被视为限制性的,因为很多变形都是可能的。本发明的主题包括上述公开的和对本领域技术人员来说这些发明所固有的各种元件、部件、功能和/或属性的所有新颖和非明显结合和子结合。本公开或随后提交的权利要求书中使用“元件”、“第一”元件或其他这样的等效术语时,本公开或权利要求书应理解为集成一个或多个元件,其既不需要也不排除两个或更多这样的元件。
申请人有权提出针对所公开发明中被认为是新颖和非明显的结合和子结合的权利要求。体现于部件、功能、元件和/或属性的其他组合和子组合的发明可通过本申请或相关申请中的权利要求的修改或提出新的权利要求来得到保护。这些修改的或新的权利要求,与最初的权利要求相比,无论其是针对同一发明,还是不同发明,并且无论其范围是不同、更宽广、更狭窄或相等,其应被视为涵盖在本文描述的发明的主题之内。

Claims (20)

1.一种车队的车辆中的通信和图像投影系统,包括:
图像传感器单元,所述图像传感器单元被构造成捕获所述车辆周围的图像;
处理单元,所述处理单元被构造成接收和处理所述图像以及由外侧车辆捕获的外侧图像;以及
投影单元,所述投影单元被构造成接收来自所述处理单元的所述外侧图像并且将所述外侧图像投影至所述车辆的乘客可见的表面。
2.根据权利要求1所述的通信和图像投影系统,其中,所述图像传感器单元包括用以捕获所述车辆的前侧、后侧、左侧和右侧的图像或所述车辆的上方和下方的图像的摄像头或包括360度摄像头。
3.根据权利要求1所述的通信和图像投影系统,其中,所述表面为所述车辆的窗户,并且其中,所述窗户包括能够显示来自所述投影系统的所述图像的材料。
4.根据权利要求3所述的通信和图像投影系统,其中,所述窗户包括能够显示投影图像的透镜。
5.根据权利要求3所述的通信和图像投影系统,其中,所述窗户包括将投影图像转变成相应的可视发光图像的透明荧光屏。
6.根据权利要求1所述的通信和图像投影系统,其中,所述表面为所述车辆的内部表面或所述车辆中的显示器或屏幕。
7.根据权利要求1所述的通信和图像投影系统,其中,所述表面为所述车辆的周围车辆的外部表面或所述车辆外部上的显示器或屏幕。
8.根据权利要求1所述的通信和图像投影系统,进一步包括GPS,其中,所述处理单元与云服务器通信,其中,所述处理单元接收和处理附加信息,并指示所述投影单元将所述附加信息投影至所述表面,其中,所述附加信息包括所述车辆的速度、行驶方向、当前位置、到达时间、道路交通状况、安全警告、限速标志警告以及广告中的至少一个。
9.一种车辆车队,包括:
第一车辆,所述第一车辆包括第一通信和投影系统,包括:
第一图像传感器单元,用以捕获所述第一车辆周围的第一图像;
第一处理单元,所述第一处理单元被构造成接收所述第一图像以及由外侧车辆捕获的第一外侧图像,并处理所述第一图像和所述第一外侧图像;以及
第一投影单元,所述第一投影单元被构造成接收所述第一外侧图像并将所述第一外侧图像投影至所述第一车辆的乘客可见的第一表面;
第二车辆,所述第二车辆邻近所述第一车辆且包括第二通信和投影系统,所述第二通信和投影系统包括:
第二图像传感器单元,所述第二图像传感器单元被构造成捕获所述第二车辆周围的第二图像;
第二处理单元,所述第二处理单元被构造成接收所述第二图像和所述第一图像,并处理所述第一图像和所述第二图像;
第二投影单元,所述第二投影单元被构造成接收来自所述第二处理单元的所述第一图像,并将包括外景的所述第一图像投影至所述第二车辆的乘客可见的第二表面。
10.根据权利要求9所述的车辆车队,其中,所述第一通信和投影系统和所述第二通信和投影系统分别包括GPS和速度传感器中的至少一个;其中,所述第一处理单元进一步被构造成根据来自所述GPS和所述速度传感器的信息确定所述第一车辆和所述第二车辆的位置,识别包括所述外景的所述第一图像,并将包括所述外景的所述第一图像传输给所述第二车辆;其中,所述第二处理单元进一步被构造成根据来自所述GPS和所述速度传感器的信息确定所述第一车辆和所述第二车辆的位置,识别包括外景的第二图像,并将包括所述外景的所述第二图像传输给所述第二车辆,并且其中,由所述第一车辆接收的所述第一外侧图像为包括所述外景的所述第二图像;并且由所述第二车辆接收的所述第一图像为包括所述外景的所述第一图像。
11.根据权利要求9所述的车辆车队,其中,所述第一表面为所述第一车辆的窗户,并且所述第二表面为所述第二车辆的窗户。
12.根据权利要求9所述的车辆车队,其中,所述第一表面为所述第二车辆的邻近所述第一车辆的外部表面,并且所述第二表面为所述第一车辆的邻近所述第二车辆的外部表面。
13.根据权利要求12所述的车辆车队,其中,所述第一车辆和所述第二车辆大体上成排行驶,并且所述第一车辆在所述第二车辆的右侧且邻近道路的侧面行驶,其中,所述第二表面为所述第一车辆的左侧外部表面,所述第一车辆还包括位于所述左侧外部表面上的视觉标记,并且所述第一处理单元将包括所述外景的所述第一图像与所述视觉标记相链接,其中,所述第二图像传感器单元捕获所述视觉标记并传输至所述第二处理单元,其中,所述第二处理单元被构造成识别链接的第一图像和所述视觉标记,并指示所述第二投影单元将包括所述外景的所述第一图像投影至所述第二表面。
14.根据权利要求12所述的车辆车队,其中,所述第一车辆为队列中的领头车辆,并且所述第二个车辆为所述队列中的第二车辆,并且其中,所述第一图像具有所述第一车辆前方的景色并且被所述第二车辆的所述第二投影单元投影到所述第一车辆的后表面上。
15.根据权利要求14所述的车辆车队,还包括第三车辆,所述第三车辆为所述队列中的第三个车辆,所述第三车辆包括第三通信和投影系统,包括:
第三图像传感器单元,所述第三图像传感器单元被构造成捕获所述第三车辆周围的第三图像;
第三处理单元,所述第三处理单元被构造成接收所述第三图像、包括外景的第一图像、以及所述第二图像,并且处理包括所述外景的所述第一图像、所述第二图像、以及所述第三图像;以及
第三投影单元,所述第三投影单元被构造成将包括所述外景的所述第一图像投影到所述第二车辆的后表面上;
其中,包括所述外景的所述第一图像从所述第一处理单元被直接传输至所述第三处理单元,或从所述第一处理单元被传输至所述第二处理单元,然后从所述第二处理单元被传输至所述第三处理单元。
16.一种操作车队中的车辆中的通信和图像投影系统的方法,所述通信和图像投影系统包括图像传感器单元、处理单元和投影单元,所述方法包括:
接收由所述车队中的外侧车辆捕获的外侧图像;以及
将所述外侧图像投影至所述车辆的乘客可见的表面。
17.根据权利要求16所述的方法,进一步包括:
通过所述图像传感器单元捕获所述车辆周围的图像;以及
通过所述处理单元处理所述图像并且将所述图像传输给另一车辆。
18.根据权利要求17所述的方法,还包括:
确定所述车辆的位置;
识别包括外景的图像;以及
将包括所述外景的所述图像传输给所述另一车辆。
19.根据权利要求17所述的方法,其中,所述车辆的所述乘客可见的所述表面为所述车辆的窗户或相邻车辆的外部表面。
20.根据权利要求17所述的方法,其中,所述处理单元经由专用短程通信或wifi或云服务器与所述车队中的其他车辆的处理单元通信。
CN201610916493.2A 2016-10-20 2016-10-20 车辆通信和图像投影系统 Withdrawn CN107968806A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610916493.2A CN107968806A (zh) 2016-10-20 2016-10-20 车辆通信和图像投影系统
US15/785,108 US20180111554A1 (en) 2016-10-20 2017-10-16 Vehicle communication and image projection systems

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610916493.2A CN107968806A (zh) 2016-10-20 2016-10-20 车辆通信和图像投影系统

Publications (1)

Publication Number Publication Date
CN107968806A true CN107968806A (zh) 2018-04-27

Family

ID=61971264

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610916493.2A Withdrawn CN107968806A (zh) 2016-10-20 2016-10-20 车辆通信和图像投影系统

Country Status (2)

Country Link
US (1) US20180111554A1 (zh)
CN (1) CN107968806A (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10845693B2 (en) * 2016-12-20 2020-11-24 Dennis FRIMPONG Vehicle information device and a method of providing information pertaining to a vehicle
KR102479492B1 (ko) * 2018-01-08 2022-12-20 삼성전자주식회사 차량 주변의 이미지를 제공하는 전자 장치 및 방법
US10733402B2 (en) * 2018-04-11 2020-08-04 3M Innovative Properties Company System for vehicle identification
JP7128037B2 (ja) * 2018-06-11 2022-08-30 本田技研工業株式会社 表示制御装置及びプログラム
JP6988750B2 (ja) * 2018-09-14 2022-01-05 トヨタ自動車株式会社 情報処理システム、情報処理装置、及び、車両への広告情報配信方法
JP7122707B2 (ja) * 2018-09-24 2022-08-22 パナソニックIpマネジメント株式会社 複数の車両を使用してノーマディック移動サービス車両をサポートするための方法
US10796567B1 (en) * 2019-04-17 2020-10-06 Capital One Services, Llc Vehicle identification based on machine-readable optical marker
US11682216B2 (en) * 2019-10-22 2023-06-20 Ford Global Technologies, Llc Vehicle exterior imaging systems

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5238281A (en) * 1991-03-28 1993-08-24 Chen Shih Chung Car capable of showing video images
JP2008250503A (ja) * 2007-03-29 2008-10-16 Aisin Aw Co Ltd 運転支援装置
US20110106380A1 (en) * 2009-11-02 2011-05-05 Denso Corporation Vehicle surrounding monitoring device
CN102778754A (zh) * 2011-05-12 2012-11-14 罗伯特·博世有限公司 用于使车辆的投影装置的投影对齐的方法和装置
WO2012172923A1 (ja) * 2011-06-16 2012-12-20 アイシン精機株式会社 車両周辺監視装置
US8483612B2 (en) * 2007-02-20 2013-07-09 Nec Corporation Vehicle-to-roadside and vehicle-to-vehicle communication system, communication method, and communication control program thereof
CN103514824A (zh) * 2013-10-13 2014-01-15 刘峰 交通工具外壳投影显像系统
DE102012213132A1 (de) * 2012-07-26 2014-05-22 Bayerische Motoren Werke Aktiengesellschaft Fusion von Kameraaufnahmen von zumindest zwei Fahrzeugen
CN104349026A (zh) * 2013-08-06 2015-02-11 现代自动车株式会社 用于提供环视监视图像的装置和方法
US20150062168A1 (en) * 2013-03-15 2015-03-05 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US20150165978A1 (en) * 2012-05-31 2015-06-18 Robert Bosch Gmbh Device and method for recording images of a vehicle underbody
US20150353010A1 (en) * 2014-06-10 2015-12-10 Lg Electronics Inc. Around view provision apparatus and vehicle including the same
CN105763649A (zh) * 2016-04-26 2016-07-13 谢奇 一种车辆间通信方法和系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101741433B1 (ko) * 2015-06-09 2017-05-30 엘지전자 주식회사 운전자 보조 장치 및 그 제어방법

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5238281A (en) * 1991-03-28 1993-08-24 Chen Shih Chung Car capable of showing video images
US8483612B2 (en) * 2007-02-20 2013-07-09 Nec Corporation Vehicle-to-roadside and vehicle-to-vehicle communication system, communication method, and communication control program thereof
JP2008250503A (ja) * 2007-03-29 2008-10-16 Aisin Aw Co Ltd 運転支援装置
US20110106380A1 (en) * 2009-11-02 2011-05-05 Denso Corporation Vehicle surrounding monitoring device
CN102778754A (zh) * 2011-05-12 2012-11-14 罗伯特·博世有限公司 用于使车辆的投影装置的投影对齐的方法和装置
WO2012172923A1 (ja) * 2011-06-16 2012-12-20 アイシン精機株式会社 車両周辺監視装置
US20150165978A1 (en) * 2012-05-31 2015-06-18 Robert Bosch Gmbh Device and method for recording images of a vehicle underbody
DE102012213132A1 (de) * 2012-07-26 2014-05-22 Bayerische Motoren Werke Aktiengesellschaft Fusion von Kameraaufnahmen von zumindest zwei Fahrzeugen
US20150062168A1 (en) * 2013-03-15 2015-03-05 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
CN104349026A (zh) * 2013-08-06 2015-02-11 现代自动车株式会社 用于提供环视监视图像的装置和方法
CN103514824A (zh) * 2013-10-13 2014-01-15 刘峰 交通工具外壳投影显像系统
US20150353010A1 (en) * 2014-06-10 2015-12-10 Lg Electronics Inc. Around view provision apparatus and vehicle including the same
CN105291979A (zh) * 2014-06-10 2016-02-03 Lg电子株式会社 车辆用全景环视装置及具有该装置的车辆
CN105763649A (zh) * 2016-04-26 2016-07-13 谢奇 一种车辆间通信方法和系统

Also Published As

Publication number Publication date
US20180111554A1 (en) 2018-04-26

Similar Documents

Publication Publication Date Title
CN107968806A (zh) 车辆通信和图像投影系统
CN111664854B (zh) 物体位置指示器系统和方法
CN109427199B (zh) 用于辅助驾驶的增强现实的方法及装置
US9507345B2 (en) Vehicle control system and method
CN113423627B (zh) 在遮挡的情况下根据道路使用者反应建模来操作自动车辆
US8712103B2 (en) Method and device for determining processed image data about a surround field of a vehicle
US8340902B1 (en) Remote vehicle management system by video radar
CN103969831B (zh) 车辆抬头显示装置
US20120218125A1 (en) Two-way video and 3d transmission between vehicles and system placed on roadside
CN109249939A (zh) 用于车辆的驱动系统和车辆
CN110497919B (zh) 自动车辆从自主模式转换到手动模式的物体位置历史回放
CN102556071A (zh) 全挡风玻璃平视显示器上的车辆威胁识别
EP2629237A1 (en) Remote vehicle management system by video radar
CN107406072B (zh) 车辆辅助系统
JP6930971B2 (ja) 表示装置、表示システム、および移動体
JP7006235B2 (ja) 表示制御装置、表示制御方法および車両
JP2007156756A (ja) 車車間通信システム
CN109017781A (zh) 基于道路资源的车辆辅助或自动驾驶方法和系统
JP2019032739A (ja) 再生装置および再生方法ならびにそのプログラムならびに記録装置および記録装置の制御方法等
JP2007156755A (ja) 車車間通信システム
DE102021128156A1 (de) Augmented reality-fähige kommandozentrale für autonome fahrzeuge
JP3883033B2 (ja) 車両用表示装置
EP3702864B1 (en) Accounting for latency in teleoperated remote driving
JP2012059139A (ja) 交通監視システム
CN113126294A (zh) 一种多层次成像系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20180427