CN106485198B - 使用全光摄像机自主代客停车的系统和方法 - Google Patents

使用全光摄像机自主代客停车的系统和方法 Download PDF

Info

Publication number
CN106485198B
CN106485198B CN201610678044.9A CN201610678044A CN106485198B CN 106485198 B CN106485198 B CN 106485198B CN 201610678044 A CN201610678044 A CN 201610678044A CN 106485198 B CN106485198 B CN 106485198B
Authority
CN
China
Prior art keywords
vehicle
parking
controller
image
parking space
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610678044.9A
Other languages
English (en)
Other versions
CN106485198A (zh
Inventor
拉里·迪恩·埃利
道格拉斯·斯科特·罗德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ford Global Technologies LLC
Original Assignee
Ford Global Technologies LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ford Global Technologies LLC filed Critical Ford Global Technologies LLC
Publication of CN106485198A publication Critical patent/CN106485198A/zh
Application granted granted Critical
Publication of CN106485198B publication Critical patent/CN106485198B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G06T7/55—Depth or shape recovery from multiple images
    • G06T7/557—Depth or shape recovery from multiple images from light fields, e.g. from plenoptic cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units, or advanced driver assistance systems for ensuring comfort, stability and safety or drive control systems for propelling or retarding the vehicle
    • B60W30/06—Automatic manoeuvring for parking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D15/00—Steering not otherwise provided for
    • B62D15/02—Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027—Parking aids, e.g. instruction means
    • B62D15/0285—Parking performed automatically
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00—Measuring arrangements characterised by the use of optical techniques
    • G01B11/22—Measuring arrangements characterised by the use of optical techniques for measuring depth
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/13—Receivers
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/0088—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0251—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/0274—Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means using mapping information stored in a memory device
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/35—Categorising the entire scene, e.g. birthday party or wedding scene
    • G06V20/38—Outdoor scenes
    • G06V20/39—Urban scenes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/09623—Systems involving the acquisition of information from passive traffic signs by means mounted on the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/143—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces inside the vehicles
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/144—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces on portable or mobile units, e.g. personal digital assistant [PDA]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/146—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is a limited parking space, e.g. parking garage, restricted space
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/147—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is within an open public zone, e.g. city centre
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10052—Images from lightfield camera

Abstract

示例性实施例提供基于从多个全光(光场)摄像机获取的图像自主代客停放车辆的系统和方法。根据一个实施例，一种自主停车系统包含全光摄像机和控制器，其中全光摄像机被配置为：获取车辆的外部的图像，以及针对图像生成包括图像中的对象的位置信息的深度图；控制器被配置为：使用深度图来生成表示围绕车辆的多个区域中的每个是否被占用的占用地图，以及使用占用地图来控制车辆导航到所需的停车位。

Description

使用全光摄像机自主代客停车的系统和方法
技术领域
本发明总体上涉及一种使用全光(光场)摄像机自主代客停车的系统和方法。更具体地，本发明的自主代客停车系统被配置为使用全光摄像机来获取车辆的外部的图像，且使用那些图像来识别可用停车位并且自主地控制车辆导航到可用停车位且停放在可用停车位。
背景技术
可以自主停放的车辆变得越来越普遍。这些已知的车辆用来启用自主停车的传感器(比如超声波传感器、雷达(RADAR)和/或激光雷达(LIDAR))具有优点和缺点。虽然超声波传感器廉价，但是它们相对不准确。例如，当对象的几何形状和/或材料不能提供强烈的回馈时，超声波传感器难以检测某些对象，比如路缘形状乃至其它车辆。此外，超声波传感器不能输出精确的方向信息，因为超声波传感器波束图型是宽的。LIDAR提供相对好的对象距离和航向信息，但价格昂贵。RADAR提供相对好的对象距离变化率信息，但难以检测一些对象并且价格昂贵。需要用于自主停放车辆的新的感测系统和方法。
发明内容
本申请由所附权利要求来限定。说明书概述了实施例的方面并且不应该用来限制权利要求。根据本文所描述的技术，可以预期其它实施方式，如一经审查下面的附图和具体实施方式，对于本领域的普通技术人员而言将是显而易见的，并且这样的实施方式旨在落入本申请的范围内。
示例性实施例提供基于从多个全光(光场)摄像机所获取的图像来自主代客停放车辆的系统和方法。
根据一个实施例，自主代客停车系统包含全光摄像机和控制器，其中该全光摄像机被配置为：获取车辆的外部的图像，并且针对图像生成包括图像中的对象的位置信息的深度图；该控制器被配置为：使用深度图生成表示围绕车辆的多个区域中的每个是否被占用的占用地图，并且使用占用地图控制车辆导航到所需的停车位。
根据另一个实施例，一种自主代客停车的方法包含通过全光摄像机获取车辆的外部的图像、通过全光摄像机生成包括图像中的对象的位置信息的深度图、使用深度图通过控制器生成表示围绕车辆的多个区域中的每个是否被占用的占用地图、以及使用占用地图通过控制器控制车辆导航到所需的停车位。
附图说明
为了更好地理解本发明，可以参照下面附图中所示的实施例。附图中的部件不一定按比例并且相关元件可以被省略以便强调且清楚地说明本文所描述的新颖特征。此外，系统部件可以不同地设置，如本领域中已知的。在附图中，贯穿不同的附图，相同的附图标记可以指代相同的部件，除非另有说明。
图1是使用本发明的自主代客停车系统生成深度图和占用地图的示例过程或方法100的流程图；
图2A、2B和2C示出了包括本发明的自主代客停车系统并且利用图1的过程使用全光摄像机生成深度图且使用车辆控制器生成占用地图的车辆；
图3是使用本发明的自主代客停车系统使用占用地图和存储的停车区域地图自主代客停放车辆的示例过程或方法的流程图；
图4A、4B和4C示出了包括本发明的自主代客停车系统并且使用自主代客停车系统以使用图3的过程将车辆自主停放在停车区域的车辆；
图5是使用本发明的自主代客停车系统使用占用地图且不使用车辆的位置自主代客停放车辆的示例过程或方法的流程图；
图6是使用本发明的自主代客停车系统将车辆自主代客停放在指定停车位的示例过程或方法的流程图；
图7示出了包括本发明的自主代客停车系统的一个实施例的部件的框图。
具体实施方式
使用全光摄像机自主代客停车
尽管本发明的系统和方法可以以各种形式来体现，但是存在附图中示出，并且将在下文中描述的系统和方法的一些示例性和非限制性实施例。本发明被认为是系统和方法的例示并且不旨在将系统和方法限制为本文所示的和所描述的具体实施例。然而，不是所有本发明中所描述的描绘部件是需要的，并且一些实施例可以包括与本文明确描述的更多的、不同的或更少的部件。可以对部件的设置和类型的做出变化，而不脱离本文所阐述的权利要求的精神或范围。
本发明的各种实施例提供一种使用全光摄像机自主代客停车的系统和方法。通常，自主代客停车系统被配置为使用全光摄像机来获取车辆的外部的图像，并且使用那些图像识别可用的停车位且自主地控制车辆导航到可用的停车位且停放在可用的停车位。更具体地，自主代客停车系统被配置为使用多个全光摄像机来获取车辆的外部的图像并且生成所获取的图像的深度图。深度图包括用于图像中的一个或多个对象的位置信息。在生成深度图之后，全光摄像机将深度图发送到车辆控制器。深度图使车辆控制器能够确定车辆的外表面和围绕车辆的对象(比如路缘、行人、其它车辆等等)之间的距离。车辆控制器使用所接收的深度图，通过将围绕车辆的区域分成多个不同的区域，并且基于深度图中的位置信息来将每个区域分类为占用的(例如，被对象的所有或部分)或未占用的，从而生成占用地图。车辆控制器然后以各种不同的方式识别所需的停车位，并且使用占用地图控制车辆通过行驶经过占用地图中未占用的区域来导航到所需的停车位且停放在所需的停车位。
本发明的自主代客停车系统的部件(下面详细地描述)可以包括在车辆上、车辆内、或以其他方式与车辆集成。自主代客停车系统的一个或多个部件可以共享现有车辆系统——比如(但不限于)导航系统——的一个或多个部件。
自主代客停车系统可以被包括在任何合适的车辆内或以其他方式与任何合适的车辆一起使用，任何合适的车辆比如(但不限于)：(1)非商业乘用车辆，比如轿车或卡车；(2)商用车辆，比如牵引式拖车；或(3)非民用车辆，比如执法机构、政府机构、应急响应机构(例如，火灾响应机构)、或医疗响应机构(例如，医院)使用的车辆。这个列表不是详尽的且仅被提供用于示例性的目的。
尽管对应于本文所描述的自主代客停车系统的车辆和特征在车辆正在移动的情况下在下面进行了描述，但是当车辆处于静止状态(例如，驻车、停在红灯处或遇上堵车)时相同的特征可以适用也在本发明的范围内。
1.生成深度图和占用地图
在各种实施例中，在自主代客停车系统可以自主代客停放车辆之前，自主代客停车系统生成提供关于车辆可以安全地行驶的区域的信息的占用地图。
图1是使用本发明的自主代客停车系统生成深度图和占用地图的示例过程或方法100的流程图。在各种实施例中，过程100通过存储在一个或多个存储器中且通过一个或多个处理器(如结合图7在下面描述的那些)执行的一组指令来表示。尽管过程100参照图1中所示的流程图进行了描述，但是执行与该所示的过程100相关联的动作的许多其它过程可以采用。例如，某些所示的框的顺序可以改变、某些所示的框可以是可选的、和/或某些所示的框可以不被采用。
在该实施例的操作中，自主代客停车系统使用一个或多个且优选多个全光摄像机获取图像，如通过框102所示。例如，车辆的前置全光摄像机获取车辆前方的外部的图像、车辆的右置全光摄像机获取车辆右侧的外部的图像、车辆的后置全光摄像机获取车辆后方的外部的图像、车辆的左置全光摄像机获取车辆左侧的外部的图像。在该示例实施例中，全光照摄像机结合以提供围绕车辆的360度的视角区域。每个全光摄像机生成用于它所获取的图像的深度图，如通过框104所示。用于图像的深度图包括位置信息，该位置信息表示图像中对象的表面距固定到车辆或固定在车辆坐标系统中的参考点——比如获取该图像的全光摄相机的位置或任何其它合适的点——的距离。全光摄像机然后将生成的深度图(包括位置信息)发送到车辆控制器，如通过框106所示。
车辆控制器使用从全光摄像机接收的深度图，并且具体地使用那些深度图中的位置信息来生成占用地图，如通过框108所示。具体地，车辆控制器首先将深度图转换或结合到常用车辆坐标系统，并且然后通过使用车辆坐标系统、将围绕车辆的区域分成多个不同的区域，并且基于深度图中的位置信息将每个区域分类为占用的(即对象的所有或部分位于该区域中)或未占用的(即没有对象位于该区域中)，从而生成占用地图。具体地，因为车辆控制器知道相对于车辆的区域的位置(使用车辆坐标系统)，并且基于深度图中的位置信息、围绕车辆的对象的位置，对于每个区域车辆控制器能够确定对象的所有或部分是否位于该区域内。如果占用地图中的区域未被占用，则该区域是车辆可以安全行驶的行驶区域，并且如果占用地图中的区域被占用，则该区域不是行驶区域并且在那区域车辆不能安全行驶。在该实施例中，只要在车辆通电，则过程100连续不断地重复以使车辆控制器实时更新占用地图。
图2A、2B和2C示出了包括本发明的自主代客停车系统和通过过程100使用全光摄像机生成深度图且使用车辆控制器生成占用地图的车辆。为了简洁和清楚起见，该示例实施例包括单个全光摄像机，尽管下面的描述可以适合于应用到多个全光摄像机。图2A示出了包括具有视场300a的前置全光摄像机300的车辆200。自主代客停车系统使用全光摄像机300以获取图2B中所示的图像。全光摄像机300然后生成用于图2B中所示的图像的深度图(未示出)。深度图包括位置信息，该位置信息表示图像中的每个表面——比如车辆200的前方的车辆的外表面上的各个点、路缘上的各个点、草地上的各个点、人行道上的各个点、道路上的各个点等——距全光摄像机300的距离。全光摄像机300然后将深度图发送到自主代客停车系统的车辆控制器。
如图2C所示，车辆控制器使用深度图，并且更具体地，使用深度图中的位置信息来生成占用地图400。具体地，车辆控制器将围绕车辆300的区域分成多个区域并且使用深度图中的位置信息来确定每个区域是否被对象占用(如上所述)。在图2C中，占用地图中的阴影区域是占用的(并且因此不是行驶区域)且非阴影区域是未占用的(并且因此是行驶区域)。
尽管占用地图在图2C中被示出为是二维的，但是在其它实施例中，占用地图是三维的(例如，每个区域具有非零长度、宽度和高度)。占用地图可以包括基于各种因素(比如精确性、计算能力、存储器和车辆控制器计划使用占用地图的所需功能)而具有任何合适的形状和任何合适的大小的区域的任何合适数量的区域。例如，在一个实施例中，该区域约10平方厘米。
2.使用占用地图和停车区域的地图将车辆自主代客停放在停车区域
在各种实施例中，自主代客停车系统被配置为使用停车区域的地图与占用地图一起来将车辆自主代客停放在停车区域。
图3是使用本发明的自主代客停车系统使用占用地图和存储的停车区域地图来自主代客停放车辆的示例过程或方法500的流程图。在各种实施例中，过程500通过存储在一个或多个存储器中并且通过一个或多个处理器(如结合图7在下面描述的那些)执行的一组指令来表示。尽管过程500参照图3的流程图进行了描述，但是执行与该所示过程500相关联的动作的许多其它过程可以采用。例如，某些所示的框和/或菱形的顺序可以改变、某些所示的框和/或菱形可以是可选的、和/或某些所示的框和/或菱形可以不被采用。
在本实施例的操作中，自主代客停车系统接收自动代客停车输入，如通过框502所示。自主代客停车系统可以以任何合适的方式——比如通过到车辆的触摸屏的输入——接收自动代客停车输入。在该实施例中，为了使车辆控制器能够使用停车区域地图导航到可用的停车位且停放在可用的停车位，车辆控制器首先确定车辆的位置。在此，车辆控制器通过将由全光摄像机获取的图像与停车区域地图进行比较来完成，如通过框504所示。更具体地，在该实施例中，全光摄像机持续不断地获取图像、生成用于图像的深度图、并且将那些图像和对应的深度图发送到车辆控制器。车辆控制器分析图像以识别包括在图像中的任何对象，比如路缘、标志、行人、其它车辆、树木、街灯、房屋等等。为了确定车辆的位置，自主代客停车系统将任何识别的对象与包括在停车区域地图中的对象进行比较(在该示例实施例中自主代客停车系统存储在存储器中)，并且然后使用三角测量技术来确定车辆的位置。
自主代客停车系统基于车辆的位置和存储的停车区域地图确定导航车辆到哪里以找到可用的停车位，如通过框506所示。自主代客停车系统使用占用地图控制车辆导航到停车区域中确定的位置，如通过框508所示。具体地，车辆控制器控制车辆在未占用的行驶区域中行驶而不在被占用的区域中行驶。当自主代客停车系统导航车辆到确定的位置时，自主代客停车系统使用全光摄像机持续不断地获取图像，如通过框510所示。车辆控制器分析所获取的图像以确定它们是否包括可用的停车位，如通过菱形512所示。例如，车辆控制器分析所获取的图像以识别表示可用的停车位的指定对象，比如路面上油漆的特定结构。如果图像包括可用的停车位，则自主代客停车系统控制车辆导航到可用的停车位并且停放在可用的停车位，如通过框514所示。如果图像中不包括可用的停车位，则车辆控制器确定车辆是否已到达指定位置，如通过菱形516所示。如果车辆还没有到达指定位置，则过程500返回到框510。如果，在另一方面，车辆控制器在菱形516确定车辆已到达指定位置，则过程500返回到框506。
图4A、4B和4C示出了包括本发明的自主代客停车系统和使用自主代客停车系统以使用过程500将车辆自主代客停放在停车区域中的车辆。图4A示出了包括前置全光摄像机300的车辆200。在此，车辆200的自主代客停车系统已经生成占用地图400并且已接收来自驾驶员的自动代客停车输入。自主代客停车系统分析从全光摄像机300获取的图像并且识别建筑物602、路灯604和606，以及停车位608a至608j。自主代客停车系统将这些识别的对象与包括在停车区域地图中的对象进行比较并且确定车辆的位置。
自主代客停车系统基于车辆的位置和存储的停车区域地图确定采取左侧转弯并且开始寻找可用的停车位。图4B示出了采取左侧转弯之后的车辆200。尽管自主代客停车系统导航车辆，但是全光摄像机300持续不断地获取图像且将图像发送到车辆控制器，该车辆控制器持续不断地分析那些图像以试图识别可用的停车位。在此，车辆控制器识别可用的停车位608f并且，如图4C所示，控制车辆200停放在停车位608f。
在某些实施例中，自主代客停车系统将停车区域的地图存储在存储器(下面描述的)中。在其它实施例中，自主代客停车系统可以通过无线的(或有线的)连接从远程位置(比如服务器)访问和/或下载停车区域地图。
3.使用占用地图而不依赖于车辆的位置将车辆自主代客停放在停车区域中
在各种实施例中，自主代客停车系统被配置为使用占用地图而不依赖于车辆位置将车辆自主代客停放在停车区域中。
图5是使用本发明的自主代客停车系统使用占用地图自主代客停放车辆的示例过程或方法700的流程图。在各种实施例中，过程700通过存储在一个或多个存储器中并且通过一个或多个处理器(如结合图7在下面描述的那些)执行的一组指令来表示。尽管过程700参照图5的流程图进行了描述，但是执行与该所示过程700相关联的动作的许多其它过程可以采用。例如，某些所示的框和/或菱形的顺序可以改变、某些所示的框和/或菱形可以是可选的、和/或某些所示的框和/或菱形可以不被采用。
在该实施例的操作中，自主代客停车系统接收自动代客停车输入，如通过框702所示。在该实施例中，全光摄像机持续不断地获取图像并且将那些图像发送到车辆控制器。车辆控制器分析这些获取的图像以识别包含在图像中的任何对象，比如路缘、标志、行人、其它车辆、树木、街灯、房屋、路面上的油漆等等。车辆控制器分析所获取的图像以试图识别可用的停车位，如通过框704所示，并且确定停车位是否是可用的，如通过框706所示。如果停车位是不可用的，则车辆控制器使用占用地图来控制车辆导航到停车区域中的另一个位置，如通过框710所示，并且过程700返回到框704。另一方面，如果车辆控制器在菱形706确定停车位是可用的，则车辆控制器控制车辆导航到可用的停车位并且停放在可用的停车位，如通过框708所示。
例如，在一个实施例中，停车区域(比如停车场、停车库、或其它结构)包括车辆控制器能够识别并且使用来将车辆引导到停车位或多个停车位的集合(例如，特别是停车库的地板)的多个标记。例如，停车区域可以包括贴纸、油漆、或车辆控制器可以识别且为车辆提供“面包屑痕迹”以遵循进入停车位的特定结构。
4.将车辆自主代客停放在指定停车位
在各种实施例中，自主代客停车系统被配置为将车辆自主代客停放在指定停车位，比如在公寓大厦的停车库中或在驾驶员的雇主的停车场处的指定停车位。
图6是使用本发明的自主代客停车系统将车辆自主代客停放在特定停车位的示例过程或方法800的流程图。在各种实施例中，过程800通过存储在一个或多个存储器中并且通过一个或多个处理器(如结合图7在下面描述的那些)执行的一组指令来表示。尽管过程800参照图6的流程图进行了描述，但是执行与该所示过程800相关联的动作的许多其它过程可以采用。例如，某些所示的框和/或菱形的顺序可以改变、某些所示的框和/或菱形可以是可选的、和/或某些所示的框和/或菱形可以不被采用。
在该实施例的操作中，自主代客停车系统接收自动代客停车输入，如通过框802所示。自主代客停车系统以任何合适的方式——比如通过全球定位系统(GPS)或通过将获取的图像中识别的对象与指定停车位所处的停车区域的地图进行比较——确定车辆的位置。车辆控制器控制车辆导航到指定停车位的位置，如通过框806所示。指定停车位的位置可以存储在自主代客停车系统的存储器中或以其他方式通过自动化代客停车系统访问。在到达之后，自主代客停车系统分析所获取的特定停车位的图像，以确定特定的停车位是否是可用的，如通过菱形808所示。如果自主代客停车系统确定特定停车位是可用的，则车辆控制器控制车辆停放在特定停车位，如通过框810所示。另一方面，如果自主代客停车系统在菱形806确定特定停车位是不可用的(例如，另一个车辆停放在那里或垃圾桶挡道)，自主代客停车系统生成并且发送错误消息给驾驶员，比如给驾驶员的手机。
5.变化
在某些实施例中，全光摄像机以红外光谱进行操作，而在其它实施例中全光摄像机以可见光光谱进行操作。在各种不同的实施例中，全光摄像机包括提供足够的光以使全光摄像机能够获取可用的图像的光源(当环境光线不可接受地低时)。
在某些实施例中，车辆控制器被配置为使用GPS或通过将获取的图像中的对象与停车区域的地图进行比较来确定车辆的位置。在一个这样的实施例中，在默认的情况下车辆控制器使用GPS来确定车辆的位置并且当GPS不可用时(例如，当车辆位于地下停车库时)切换到对象比较方法。
在某些实施例中，当在车辆到达停车区域时，停车区域主机指定车辆的停车位。在该实施例中，自主代客停车系统被配置为使用类似于关于图6上面所描述的方法导航车辆到指定停车位且停放在指定停车位。例如，在一个示例实施例中，当车辆到达停车区域时，自主代客停车系统建立与通过停车区域假设的服务器通信并且从服务器接收指定停车位。在另一个示例实施例中，当车辆到达停车区域时，驾驶员接收包括指定停车位的票证。在该实施例中，自主代客停车系统接收来自驾驶员的指定停车位的指示，比如通过触摸屏。
在各种实施例中，自主代客停车系统被配置为同时使用位置和映射实时地创建停车区域的地图。具体地，当车辆导航通过停车区域并且分析所获取的可用的停车位的图像时，自主代客停车系统也通过指出各个对象(比如路缘、建筑物、路标、街道标记等等)的位置映射停车区域。这使自主代客停车系统能够在下次车辆访问该停车区域时更快确定车辆的位置和可用停车位的位置。
在某些实施例中，自主代客停车系统被配置为报告(比如通过车辆对车辆通信或车辆对服务器通信)停车位的可用性(例如，停车位定位的位置和那些停车位是否是可用的)以便于其它车辆找到停车位。在某些实施例中，停车位可用性信息的接收可以取决于收到来自驾驶员的费用。也就是说，在这些实施例中，驾驶员必须付费来接收停车位可用性信息。
在某些实施例中，自主代客停车系统使驾驶员能够输入一个或多个停车位偏好并且使用那些停车位偏好来至少部分地确定停放车辆的停车位。例如，自主代客停车系统可以接收以下的偏好：在阴凉处的停车位、不包括水坑的停车位、和不靠近大卡车的停车位。自主代客停车系统使用传感器反馈以识别满足这些条件的停车位。
自主代客停车系统的各种实施例包括或使用一个或多个其它传感器和/或除了全光摄像机的摄像机以确定占用地图、导航车辆、和/或识别可用的停车位。
全光摄像机可以是任何合适的全光摄像机，比如可向Pelican图像公司购买的那些。
6.自主代客停车系统部件
图7示出了自主代客停车系统900的一个示例实施例。自主代客停车系统的其他实施例可以包括与下面所描述的和图7中所示的那些不同的、更少的或更多的部件。
自主代客停车系统900包括控制器902，该控制器902包含与存储一组指令908的主存储器906通信的至少一个处理器904。处理器904被配置为与主存储器906通信、访问该组指令908、并且执行该组指令908以使自主代客停车系统900执行本文所描述的任何方法、过程和特征。
处理器904可以是任何合适的处理装置或一组处理装置，比如，但不限于：微处理器、基于微控制器的平台、合适的集成电路、或被配置为执行该组指令908的一个或多个专用集成电路(ASIC)。主存储器906可以是任何合适的存储装置，比如，但不限于：易失性存储器(例如，随机存取存储器(RAM)，其可以包括非易失性RAM、磁性RAM、铁电性RAM、和任何其它合适的形式)、非易失性存储器(例如，磁盘存储器、快闪存储器、电可编程只读存储器(EPROM)、电可擦可编程只读存储器(EEPROM)、基于忆阻器的非易失性固态存储器等)、不可改变的存储器(例如，EPROM)、和/或只读存储器。
自主代客停车系统900包括与控制器902通信的一个或多个全光摄像机910(如上所述)。
自主代客停车系统900包括通信接口912。通信接口912包含能够与外部网络990通信的有线和/或无线网络接口。外部网络990可以是一个或多个网络的集合，包括基于标准的网络(例如，2G、3G、4G、通用移动通信系统(UMTS)、全球移动通信系统(GSM(R))联盟，长期演进技术(LTE)(TM)，或更多)、全球互通微波存取(WiMAX)、蓝牙、近场通信(NFC)、WiFi(包括802.11的a/b/g/n/ac或其它的)、无线吉比特联盟(WiGig)、全球定位系统(GPS)网络、以及在本申请的递交时或可以在将来发展的可用的其他网络。此外，外部网络可以是公共网络(比如因特网)、专用网络(比如内联网)、或它们的组合，并且可以利用现在可用的或以后发展的多种网络协议，包括但不限于基于TCP/IP的网络协议。
在一些实施例中，存储在主存储器906上并且可执行以启用自主代客停车系统900的功能性的一组指令908可以通过外部网络990从站外服务器下载。此外，在一些实施例中，自主代客停车系统900可以通过外部网络990与中央命令服务器通信。例如，自主代客停车系统900可以通过控制通信接口912以通过外部网络990将图像传送到中央命令服务器来将由自主代客停车系统900的全光摄像机910获取的图像信息传送到中央命令服务器。自主代客停车系统900还可以将任何生成的数据地图传送到中央命令服务器。
自主代客停车系统900被配置为与多个车辆部件和车辆系统通信(比如通过一个或多个通信总线(未示出))，该部件和系统包括：一个或多个输入装置914、一个或多个输出装置916、磁盘驱动器922、包括GPS接收器且被配置为与GPS交互以提供基于位置的信息和方向(如本领域中已知的)的导航自主代客停车系统928、和可用来控制车辆的操作(比如通过控制加速器、制动器等)的车辆控制系统930。
输入装置914可以包括使车辆的驾驶员或乘客能够输入修改或更新由如本文所描述的自主代客停车系统900参照的信息的任何合适的输入装置。输入装置914可以包括，例如，控制旋钮、仪表板、键盘、扫描仪、用于图像捕捉和/或视觉命令识别的数字摄像机、触摸屏、音频输入装置(例如，舱室麦克风)、按钮、鼠标、或触控板。
输出装置916可以包括组合仪表输出(例如，拨号盘、照明装置)、致动器、显示器920(例如，液晶显示器(“LCD”)、有机发光二极管(“OLED”)、平板显示器、固态显示器、阴极射线管(“CRT”)或抬头显示器)和扬声器918。
磁盘驱动器922被配置为接收计算机可读介质924。在某些实施例中，磁盘驱动器922接收可以嵌入一组或多组指令926(比如用于操作自主代客停车系统900的软件)的计算机可读介质924。此外，指令926可以体现如本文所描述的一个或多个方法或逻辑。在特定实施例中，指令926可以完全或至少部分地驻留在主存储器906、计算机可读介质924内，和/或在由处理器904执行指令期间的处理器904中的任何一个或多个内。
尽管所示的计算机可读介质是单个介质，但是术语“计算机可读介质”包括单个介质或多个介质，比如集中式或分布式数据库，和/或存储一组或多组指令的相关联的缓存和服务器。术语“计算机可读介质”也应当包括能够存储、编码或携带通过处理器执行的一组指令或使计算机自主代客停车系统执行本文所公开的任何一种或多种方法和操作的任何有形介质。
附图中的任何过程描述或框应该被理解为表示模块、段、或包括用于实施过程中的特定逻辑功能或步骤的一个或多个可执行指令的代码的一部分，并且供选择的实施方式被包括在本文所描述的实施例的范围内，其中功能可以不按所示或所讨论的顺序执行，包括大体上同时或以相反的顺序，这取决于涉及的功能，如本领域的普通技术的人员理解的那样。
上面所描述的实施例特别是任何“优选”实施例是实施方式的可能示例，并且仅仅阐述用于清楚理解本发明的原则。可以对上面所描述的实施例做出许多变化和修改而不实质脱离本文所描述的技术的精神和原则。所有这样的修改旨在在此被包括在本发明的范围内且通过下面的权利要求来保护。

Claims (18)

1.一种自主停车系统，包含：
全光摄像机，所述全光摄像机被配置为：
获取车辆的外部的图像，以及
针对所述图像，生成包括所述图像中的对象的位置信息的深度图；以及
控制器，所述控制器被配置为：
使用所述深度图生成表示围绕所述车辆的多个同心组区域中的占用区域的占用地图；以及
使用所述占用地图控制所述车辆导航到所需的停车位。
2.根据权利要求1所述的系统，其中所述控制器被配置为通过分析所述图像以确定所述图像是否包括可用的停车位来识别所述所需的停车位。
3.根据权利要求2所述的系统，其中所述控制器被配置为将所述可用的停车位指定为所述所需的停车位。
4.根据权利要求1所述的系统，其中所述所需的停车位是具有存储在所述控制器的存储器中的位置的指定停车位。
5.根据权利要求1所述的系统，其中所述位置信息包括从所述对象的表面上的点到所述全光摄像机的距离。
6.根据权利要求1所述的系统，其中所述控制器被配置为通过将所述图像中的任何对象与包括在停车区域的停车区域地图中的多个对象进行比较来确定停车区域中所述车辆的位置。
7.根据权利要求6所述的系统，其中所述控制器被配置为使用所述占用地图、所述车辆的位置和所述停车区域地图来导航所述车辆到所述停车区域内停车位所处的位置。
8.根据权利要求7所述的系统，其中所述控制器被配置为通过分析所述图像以确定所述图像是否包括可用的停车位来识别所述所需的停车位。
9.根据权利要求8所述的系统，其中所述控制器被配置为将所述可用的停车位指定为所述所需的停车位。
10.一种自主停车方法，包含：
通过全光摄像机来获取车辆的外部的图像；
通过所述全光摄像机来生成包括所述图像中对象的位置信息的深度图；
使用所述深度图，通过控制器生成表示围绕所述车辆的多个同心组区域中的占用区域的占用地图；以及
使用所述占用地图，通过所述控制器控制所述车辆导航到所需的停车位。
11.根据权利要求10所述的方法，所述方法包括由所述控制器通过分析所述图像以确定所述图像是否包括可用的停车位来识别所述所需的停车位。
12.根据权利要求11所述的方法，所述方法包括通过所述控制器将所述可用的停车位指定为所述所需的停车位。
13.根据权利要求10所述的方法，其中所述所需的停车位是具有存储在所述控制器的存储器中的位置的指定停车位。
14.根据权利要求10所述的方法，其中所述位置信息包括从所述对象的表面上的点到所述全光摄像机的距离。
15.根据权利要求10所述的方法，所述方法包括由所述控制器通过将所述图像中的任何对象与包括在停车区域的停车区域地图中的多个对象进行比较来确定停车区域中所述车辆的位置。
16.根据权利要求15所述的方法，所述方法包括通过所述控制器并且使用所述占用地图、所述车辆的位置和所述停车区域地图来导航所述车辆到所述停车区域内停车位所处的位置。
17.根据权利要求16所述的方法，所述方法包括由所述控制器通过分析所述图像以确定所述图像是否包括可用的停车位来识别所述所需的停车位。
18.根据权利要求17所述的方法，所述方法包括通过所述控制器将所述可用的停车位指定为所述所需的停车位。
CN201610678044.9A 2015-08-24 2016-08-17 使用全光摄像机自主代客停车的系统和方法 Active CN106485198B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US14/834,203 2015-08-24
US14/834,203 US9557741B1 (en) 2015-08-24 2015-08-24 System and method for autonomous valet parking using plenoptic cameras

Publications (2)

Publication Number Publication Date
CN106485198A CN106485198A (zh) 2017-03-08
CN106485198B true CN106485198B (zh) 2022-09-20

Family

ID=57867601

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610678044.9A Active CN106485198B (zh) 2015-08-24 2016-08-17 使用全光摄像机自主代客停车的系统和方法

Country Status (5)

Country Link
US (3) US9557741B1 (zh)
CN (1) CN106485198B (zh)
DE (1) DE102016115541A1 (zh)
MX (1) MX2016010747A (zh)
RU (1) RU2016134255A (zh)

Families Citing this family (107)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014115292A1 (de) * 2014-10-21 2016-04-21 Connaught Electronics Ltd. Verfahren zum Bereitstellen von Bilddateien von einem Kamerasystem, Kamerasystem und Kraftfahrzeug
JP6354542B2 (ja) 2014-11-26 2018-07-11 株式会社デンソー 車両自動運転システム
US9557741B1 (en) * 2015-08-24 2017-01-31 Ford Global Technologies, Llc System and method for autonomous valet parking using plenoptic cameras
CN107031523A (zh) 2015-11-30 2017-08-11 法乐第未来公司 利用已知目标进行基于摄像头的车辆位置确定
DE102016200794A1 (de) * 2016-01-21 2017-07-27 Robert Bosch Gmbh Verfahren und Vorrichtung zum Lokalisieren eines Kraftfahrzeugs
US11242051B1 (en) 2016-01-22 2022-02-08 State Farm Mutual Automobile Insurance Company Autonomous vehicle action communications
US10824145B1 (en) 2016-01-22 2020-11-03 State Farm Mutual Automobile Insurance Company Autonomous vehicle component maintenance and repair
US11719545B2 (en) 2016-01-22 2023-08-08 Hyundai Motor Company Autonomous vehicle component damage and salvage assessment
US11441916B1 (en) 2016-01-22 2022-09-13 State Farm Mutual Automobile Insurance Company Autonomous vehicle trip routing
CA3214444A1 (en) 2016-04-12 2017-10-19 Quidient, Llc Quotidian scene reconstruction engine
WO2017179198A1 (ja) * 2016-04-15 2017-10-19 三菱電機株式会社 駐車支援装置
CN107444264A (zh) * 2016-05-31 2017-12-08 法拉第未来公司 使用相机检测车辆附近的物体
US10025317B2 (en) * 2016-09-30 2018-07-17 Faraday&Future Inc. Methods and systems for camera-based autonomous parking
US10369988B2 (en) 2017-01-13 2019-08-06 Ford Global Technologies, Llc Autonomous parking of vehicles inperpendicular parking spots
US10692252B2 (en) * 2017-02-09 2020-06-23 GM Global Technology Operations LLC Integrated interface for situation awareness information alert, advise, and inform
KR102340356B1 (ko) * 2017-04-25 2021-12-16 주식회사 만도모빌리티솔루션즈 자동주차제어장치 및 자동주차제어방법
JP6809364B2 (ja) * 2017-05-09 2021-01-06 株式会社デンソー 自動バレー駐車システム、自動バレー車両、及び自動バレー駐車方法
KR102120108B1 (ko) * 2017-05-12 2020-06-09 엘지전자 주식회사 자율주행 차량 및 그 제어 방법
US10852153B2 (en) 2017-05-12 2020-12-01 Lg Electronics Inc. Autonomous vehicle and method of controlling the same
US10683034B2 (en) 2017-06-06 2020-06-16 Ford Global Technologies, Llc Vehicle remote parking systems and methods
US10593212B2 (en) * 2017-06-12 2020-03-17 GM Global Technology Operations LLC Autonomous parking methods and systems for autonomous vehicles
US11126195B2 (en) * 2017-06-12 2021-09-21 Faraday & Future Inc. System and method for detecting occluded objects based on image processing
US10234868B2 (en) 2017-06-16 2019-03-19 Ford Global Technologies, Llc Mobile device initiation of vehicle remote-parking
US10585430B2 (en) 2017-06-16 2020-03-10 Ford Global Technologies, Llc Remote park-assist authentication for vehicles
US10775781B2 (en) 2017-06-16 2020-09-15 Ford Global Technologies, Llc Interface verification for vehicle remote park-assist
DE102017212533A1 (de) * 2017-07-21 2019-01-24 Robert Bosch Gmbh Vorrichtung und Verfahren zum Bereitstellen einer Zustandsinformation eines automatischen Valet Parking Systems
US10706297B2 (en) * 2017-09-20 2020-07-07 International Business Machines Corporation Management of parking spaces
US10580304B2 (en) 2017-10-02 2020-03-03 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for voice controlled autonomous parking
US10281921B2 (en) 2017-10-02 2019-05-07 Ford Global Technologies, Llc Autonomous parking of vehicles in perpendicular parking spots
JP6825537B2 (ja) * 2017-10-23 2021-02-03 トヨタ自動車株式会社 送迎システム
KR102061516B1 (ko) * 2017-10-27 2020-01-02 주식회사 만도 주차 지원 장치 및 방법
US10627811B2 (en) 2017-11-07 2020-04-21 Ford Global Technologies, Llc Audio alerts for remote park-assist tethering
GB2568306A (en) * 2017-11-14 2019-05-15 Continental Automotive Gmbh Method and system for finding vehicle in parking facility
US10336320B2 (en) 2017-11-22 2019-07-02 Ford Global Technologies, Llc Monitoring of communication for vehicle remote park-assist
US10578676B2 (en) 2017-11-28 2020-03-03 Ford Global Technologies, Llc Vehicle monitoring of mobile device state-of-charge
CN108121345A (zh) * 2017-12-20 2018-06-05 东风汽车集团有限公司 一种适用于停车场的车位寻址系统及方法
CN108269421B (zh) * 2017-12-29 2020-11-06 东南大学 基于视频感知的路内停车泊位实时检测方法、装置及系统
US11148661B2 (en) 2018-01-02 2021-10-19 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10974717B2 (en) 2018-01-02 2021-04-13 Ford Global Technologies, I.LC Mobile device tethering for a remote parking assist system of a vehicle
US10583830B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10737690B2 (en) 2018-01-02 2020-08-11 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10688918B2 (en) 2018-01-02 2020-06-23 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10585431B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10814864B2 (en) 2018-01-02 2020-10-27 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10684773B2 (en) 2018-01-03 2020-06-16 Ford Global Technologies, Llc Mobile device interface for trailer backup-assist
US10747218B2 (en) 2018-01-12 2020-08-18 Ford Global Technologies, Llc Mobile device tethering for remote parking assist
US10917748B2 (en) 2018-01-25 2021-02-09 Ford Global Technologies, Llc Mobile device tethering for vehicle systems based on variable time-of-flight and dead reckoning
CN108288386A (zh) * 2018-01-29 2018-07-17 深圳信路通智能技术有限公司 基于视频的路内停车跟踪方法
US10684627B2 (en) 2018-02-06 2020-06-16 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for position aware autonomous parking
GB201802475D0 (en) * 2018-02-15 2018-04-04 Jaguar Land Rover Ltd Controller and vehicle
US11188070B2 (en) 2018-02-19 2021-11-30 Ford Global Technologies, Llc Mitigating key fob unavailability for remote parking assist systems
US10507868B2 (en) 2018-02-22 2019-12-17 Ford Global Technologies, Llc Tire pressure monitoring for vehicle park-assist
CN108482366A (zh) * 2018-03-23 2018-09-04 重庆长安汽车股份有限公司 基于车辆自动驾驶的代客泊车系统及方法
DE102018204993A1 (de) 2018-04-04 2019-10-10 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Auffinden eines Fahrzeug-Unterstellplatzes zum Schutz vor einem erwarteten Unwetter
US10732622B2 (en) 2018-04-05 2020-08-04 Ford Global Technologies, Llc Advanced user interaction features for remote park assist
US10683004B2 (en) 2018-04-09 2020-06-16 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10759417B2 (en) 2018-04-09 2020-09-01 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10793144B2 (en) 2018-04-09 2020-10-06 Ford Global Technologies, Llc Vehicle remote park-assist communication counters
US10493981B2 (en) 2018-04-09 2019-12-03 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US11294060B2 (en) 2018-04-18 2022-04-05 Faraday & Future Inc. System and method for lidar-based vehicular localization relating to autonomous navigation
US11875476B2 (en) 2018-05-02 2024-01-16 Quidient, Llc Codec for processing scenes of almost unlimited detail
US20210245734A1 (en) * 2018-07-26 2021-08-12 Hitachi Automotive Systems, Ltd. Vehicle control device and automatic driving system using same
US10384605B1 (en) 2018-09-04 2019-08-20 Ford Global Technologies, Llc Methods and apparatus to facilitate pedestrian detection during remote-controlled maneuvers
US10717432B2 (en) 2018-09-13 2020-07-21 Ford Global Technologies, Llc Park-assist based on vehicle door open positions
US10821972B2 (en) 2018-09-13 2020-11-03 Ford Global Technologies, Llc Vehicle remote parking assist systems and methods
JP7216507B2 (ja) * 2018-09-14 2023-02-01 パナソニックホールディングス株式会社 歩行者装置、移動体誘導システムおよび移動体誘導方法
US11105639B2 (en) * 2018-09-18 2021-08-31 Faraday&Future Inc. Map refinement using feature extraction from images
US10967851B2 (en) 2018-09-24 2021-04-06 Ford Global Technologies, Llc Vehicle system and method for setting variable virtual boundary
US10529233B1 (en) 2018-09-24 2020-01-07 Ford Global Technologies Llc Vehicle and method for detecting a parking space via a drone
CN109263512A (zh) * 2018-09-28 2019-01-25 上汽通用五菱汽车股份有限公司 电动汽车的停车方法、装置和存储介质
CN109495845A (zh) * 2018-09-29 2019-03-19 百度在线网络技术（北京）有限公司 场景切换方法和设备
US10908603B2 (en) 2018-10-08 2021-02-02 Ford Global Technologies, Llc Methods and apparatus to facilitate remote-controlled maneuvers
US10628687B1 (en) 2018-10-12 2020-04-21 Ford Global Technologies, Llc Parking spot identification for vehicle park-assist
KR20200046160A (ko) * 2018-10-16 2020-05-07 현대자동차주식회사 자율 주차 장치 및 방법
US11097723B2 (en) 2018-10-17 2021-08-24 Ford Global Technologies, Llc User interfaces for vehicle remote park assist
US11137754B2 (en) 2018-10-24 2021-10-05 Ford Global Technologies, Llc Intermittent delay mitigation for remote vehicle operation
JP2022028093A (ja) * 2018-12-20 2022-02-15 ソニーグループ株式会社 車両制御装置、車両制御方法、情報処理装置、情報処理方法、及び、プログラム
KR102651412B1 (ko) * 2018-12-31 2024-03-27 현대자동차주식회사 자율 발렛 주차를 지원하는 시스템 및 방법, 그리고 이를 위한 인프라 및 차량
US11789442B2 (en) 2019-02-07 2023-10-17 Ford Global Technologies, Llc Anomalous input detection
US11195344B2 (en) 2019-03-15 2021-12-07 Ford Global Technologies, Llc High phone BLE or CPU burden detection and notification
CN111739332B (zh) * 2019-03-25 2022-09-23 大陆泰密克汽车系统（上海）有限公司 一种停车场管理系统
US11169517B2 (en) 2019-04-01 2021-11-09 Ford Global Technologies, Llc Initiation of vehicle remote park-assist with key fob
US11275368B2 (en) 2019-04-01 2022-03-15 Ford Global Technologies, Llc Key fobs for vehicle remote park-assist
JP2020187624A (ja) * 2019-05-16 2020-11-19 本田技研工業株式会社 車両制御装置、車両制御方法、及びプログラム
US11294385B2 (en) * 2019-06-28 2022-04-05 Robert Bosch Gmbh System and method for generating a representation of an environment
US10940793B1 (en) 2019-09-05 2021-03-09 Ford Global Technologies, Llc Ingress and egress for autonomous vehicle
DE112019007696T5 (de) * 2019-09-09 2022-06-23 Mitsubishi Electric Corporation Mobiler Körper und Verfahren zur Steuerung eines mobilen Körpers
CN110660267A (zh) * 2019-09-18 2020-01-07 恒大智慧科技有限公司 停车管理方法、停车管理系统及存储介质
CN110740294A (zh) * 2019-09-18 2020-01-31 恒大智慧科技有限公司 车辆智能入库方法、车辆及存储介质
CN110562249B (zh) * 2019-09-26 2021-06-04 上汽通用汽车有限公司 自动泊车辅助方法、可读存储介质和电子设备
WO2021099761A1 (en) * 2019-11-21 2021-05-27 Bae Systems Plc Imaging apparatus
EP3826283A1 (en) * 2019-11-21 2021-05-26 BAE SYSTEMS plc Imaging apparatus comprising at least a light source and a plenoptic camera
CN110696822A (zh) * 2019-11-25 2020-01-17 安徽江淮汽车集团股份有限公司 自动泊车控制方法、装置、设备及存储介质
US11164457B2 (en) * 2020-02-25 2021-11-02 Ford Global Technologies, Llc Vehicle control system
JP7243669B2 (ja) * 2020-03-30 2023-03-22 トヨタ自動車株式会社 自動運転システム
JP7238838B2 (ja) * 2020-03-30 2023-03-14 トヨタ自動車株式会社 自動運転システム
CN111754806A (zh) * 2020-05-09 2020-10-09 深圳市天鼎微波科技有限公司 基于雷达监测的车位管理方法、装置及系统
US11560143B2 (en) 2020-05-26 2023-01-24 Magna Electronics Inc. Vehicular autonomous parking system using short range communication protocols
JP2021195080A (ja) * 2020-06-18 2021-12-27 フォルシアクラリオン・エレクトロニクス株式会社 車載装置、及び制御方法
US11827244B2 (en) * 2020-12-04 2023-11-28 Ford Global Technologies, Llc Enhanced vehicle operation
US11769409B2 (en) * 2020-12-15 2023-09-26 Charter Communications Operating, Llc Automated parking lot digital map generation and use thereof
CN112677960B (zh) * 2020-12-28 2023-01-13 广州小马慧行科技有限公司 自动驾驶车辆的停车处理方法、装置、设备及存储介质
US11783597B2 (en) * 2020-12-30 2023-10-10 Continental Autonomous Mobility US, LLC Image semantic segmentation for parking space detection
CN112820137B (zh) * 2020-12-31 2022-04-19 金茂智慧科技(广州)有限公司 一种停车场的管理方法及装置
CN113104028B (zh) * 2021-03-31 2022-09-13 东风汽车集团股份有限公司 基于停放场地的控制方法、装置、可移动载体及存储介质
CN113218398A (zh) * 2021-05-11 2021-08-06 深圳市豪位科技有限公司 Avp车辆室内导航方法及装置、存储介质
CN114572100B (zh) * 2022-02-24 2023-10-13 岚图汽车科技有限公司 代客泊车的灯光迎宾方法、装置、设备及可读存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006003675A1 (de) * 2006-01-26 2007-08-02 Volkswagen Ag Verfahren und Vorrichtung zur Festlegung einer bevorzugten Endorientierung eines Kraftfahrzeugs in einer Parklücke
CN101231527A (zh) * 2008-01-24 2008-07-30 浙江大学 自动导引车分布式测控装置及停车定位控制方法
CN103728624A (zh) * 2012-10-12 2014-04-16 现代摩比斯株式会社 泊车辅助装置和方法以及利用该泊车辅助装置和方法的泊车辅助系统
CN104380349A (zh) * 2013-04-15 2015-02-25 弗莱克斯电子有限责任公司 车辆入侵者警报检测和指示
WO2015024871A1 (en) * 2013-08-19 2015-02-26 Basf Se Optical detector

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7620309B2 (en) * 2006-04-04 2009-11-17 Adobe Systems, Incorporated Plenoptic camera
US7737866B2 (en) 2007-09-27 2010-06-15 Automotive Research & Testing Center Auto-parking device
KR100955483B1 (ko) * 2008-08-12 2010-04-30 삼성전자주식회사 3차원 격자 지도 작성 방법 및 이를 이용한 자동 주행 장치의 제어 방법
US8587681B2 (en) * 2008-11-21 2013-11-19 Omnivision Technologies, Inc. Extended depth of field for image sensor
KR101182853B1 (ko) 2008-12-19 2012-09-14 한국전자통신연구원 자동 주차 대행 시스템 및 방법
AU2011251660B2 (en) * 2010-05-10 2017-01-05 Tkh Security Llc Method and system for managing a parking lot based on intelligent imaging
US8799037B2 (en) * 2010-10-14 2014-08-05 Palto Alto Research Center Incorporated Computer-implemented system and method for managing motor vehicle parking reservations
EP2638524A2 (en) * 2010-11-09 2013-09-18 The Provost, Fellows, Foundation Scholars, & the other members of Board, of the College of the Holy & Undiv. Trinity of Queen Elizabeth near Dublin Method and system for recovery of 3d scene structure and camera motion from a video sequence
US9241147B2 (en) * 2013-05-01 2016-01-19 Legend3D, Inc. External depth map transformation method for conversion of two-dimensional images to stereoscopic images
US20120323643A1 (en) * 2011-03-24 2012-12-20 Premier Parking LLC Parking management systems and methods
FR2974669B1 (fr) * 2011-04-28 2013-06-07 Commissariat Energie Atomique Dispositif imageur destine a evaluer des distances d'elements dans une image
US9429943B2 (en) 2012-03-05 2016-08-30 Florida A&M University Artificial intelligence valet systems and methods
US9609284B2 (en) * 2012-05-22 2017-03-28 Otoy, Inc. Portable mobile light stage
US20150077560A1 (en) * 2013-03-22 2015-03-19 GM Global Technology Operations LLC Front curb viewing system based upon dual cameras
CN104428826B (zh) * 2013-04-15 2017-05-17 自动连接控股有限责任公司 用于车辆交通的自动化控制的中央网络
WO2014198629A1 (en) * 2013-06-13 2014-12-18 Basf Se Detector for optically detecting at least one object
DE102013213064B4 (de) 2013-07-04 2017-03-09 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum autonomen Einparken eines Fahrzeugs mit externer Überwachung
DE102013215208A1 (de) * 2013-08-02 2015-02-05 Ford Global Technologies, Llc Verfahren und Vorrichtung zur Einparkunterstützung eines Fahrzeuges
JP2015060053A (ja) * 2013-09-18 2015-03-30 株式会社東芝 固体撮像装置、制御装置及び制御プログラム
US20150149265A1 (en) * 2013-11-27 2015-05-28 GM Global Technology Operations LLC Controlled parking of autonomous vehicles
US9557741B1 (en) * 2015-08-24 2017-01-31 Ford Global Technologies, Llc System and method for autonomous valet parking using plenoptic cameras

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006003675A1 (de) * 2006-01-26 2007-08-02 Volkswagen Ag Verfahren und Vorrichtung zur Festlegung einer bevorzugten Endorientierung eines Kraftfahrzeugs in einer Parklücke
CN101231527A (zh) * 2008-01-24 2008-07-30 浙江大学 自动导引车分布式测控装置及停车定位控制方法
CN103728624A (zh) * 2012-10-12 2014-04-16 现代摩比斯株式会社 泊车辅助装置和方法以及利用该泊车辅助装置和方法的泊车辅助系统
CN104380349A (zh) * 2013-04-15 2015-02-25 弗莱克斯电子有限责任公司 车辆入侵者警报检测和指示
WO2015024871A1 (en) * 2013-08-19 2015-02-26 Basf Se Optical detector

Also Published As

Publication number Publication date
US20170137024A1 (en) 2017-05-18
RU2016134255A (ru) 2018-03-01
US9809218B2 (en) 2017-11-07
US9557741B1 (en) 2017-01-31
DE102016115541A1 (de) 2017-03-02
CN106485198A (zh) 2017-03-08
MX2016010747A (es) 2017-02-23
US20180056990A1 (en) 2018-03-01
US10046760B2 (en) 2018-08-14

Similar Documents

Publication Publication Date Title
CN106485198B (zh) 使用全光摄像机自主代客停车的系统和方法
US11599123B2 (en) Systems and methods for controlling autonomous vehicles that provide a vehicle service to users
US11747808B2 (en) Systems and methods for matching an autonomous vehicle to a rider
US11378980B2 (en) Cellular device location discovery systems and methods for autonomous vehicles
CN111226253B (zh) 用于实时改变自主车辆的目的地的系统和方法
US20190096250A1 (en) Systems and Methods for Determining Whether an Autonomous Vehicle Can Provide a Requested Service for a Rider
US11544868B2 (en) Object location coordinate determination
CN110942665A (zh) 一种车辆的定位方法、车载设备及存储介质
US11300419B2 (en) Pick-up/drop-off zone availability estimation using probabilistic model
WO2020154670A1 (en) Vehicle routing with local and general routes
US20190111838A1 (en) Systems and Methods for Signaling Intentions to Riders
US11113968B2 (en) Method for mobile parking assistance
EP3903068B1 (en) Learned intersection map from long term sensor data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant