WO2018189076A1 - Method for detecting parking spaces in an environment region of a motor vehicle, evaluating apparatus, parking assistance system, motor vehicle and networked system - Google Patents

Method for detecting parking spaces in an environment region of a motor vehicle, evaluating apparatus, parking assistance system, motor vehicle and networked system Download PDF

Info

Publication number
WO2018189076A1
WO2018189076A1 PCT/EP2018/058973 EP2018058973W WO2018189076A1 WO 2018189076 A1 WO2018189076 A1 WO 2018189076A1 EP 2018058973 W EP2018058973 W EP 2018058973W WO 2018189076 A1 WO2018189076 A1 WO 2018189076A1
Authority
WO
WIPO (PCT)
Prior art keywords
sensor data
parking space
parking
vehicle
motor vehicle
Prior art date
Application number
PCT/EP2018/058973
Other languages
German (de)
French (fr)
Inventor
Markus Heimberger
Jean-Francois Bariant
Original Assignee
Valeo Schalter Und Sensoren Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Schalter Und Sensoren Gmbh filed Critical Valeo Schalter Und Sensoren Gmbh
Publication of WO2018189076A1 publication Critical patent/WO2018189076A1/en

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/141—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces
    • G08G1/143—Traffic control systems for road vehicles indicating individual free spaces in parking areas with means giving the indication of available parking spaces inside the vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/586—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of parking space
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0108—Measuring and analyzing of parameters relative to traffic conditions based on the source of data
    • G08G1/0112—Measuring and analyzing of parameters relative to traffic conditions based on the source of data from the vehicle, e.g. floating car data [FCD]
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125—Traffic data processing
    • G08G1/0133—Traffic data processing for classifying traffic situation
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/0104—Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0137—Measuring and analyzing of parameters relative to traffic conditions for specific applications
    • G08G1/0141—Measuring and analyzing of parameters relative to traffic conditions for specific applications for traffic information dissemination
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/14—Traffic control systems for road vehicles indicating individual free spaces in parking areas
    • G08G1/145—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas
    • G08G1/147—Traffic control systems for road vehicles indicating individual free spaces in parking areas where the indication depends on the parking areas where the parking area is within an open public zone, e.g. city centre

Definitions

  • the invention relates to a method for detecting parking spaces in a
  • Vehicle-side sensor device detected from the surrounding area first
  • the invention also relates to an evaluation device for a
  • Parking assistance system a parking assistance system for a motor vehicle, a motor vehicle and a networked system.
  • Parking assistance systems which can assist a driver of a motor vehicle during parking operations are already known from the prior art.
  • Parking assistance systems detect parking spaces or parking space-like subregions in an environmental region of the motor vehicle when the motor vehicle passes the parking space-like subregions, for example by limiting objects bounding the parking space-like subarea as well as dimensions or geometric dimensions of the parking space
  • Parking assistance systems usually the parking space and recognize, for example, a length, a width and a depth of the parking space and a relative position of the
  • Parking space with respect to the motor vehicle is detected by vehicle-mounted distance sensors, for example ultrasound sensors.
  • Valid parking spaces that can be parked are, for example, those parking zones in which the motor vehicle may be parked or parked in compliance with traffic regulations. Invalid parking spaces are, for example, no parking zones, house and courtyard entrances, bus stops, green areas, fire brigade access zones, etc. These invalid parking spaces are indeed
  • DE 10 2012 216 994 A1 describes a method for parking space switching, wherein road users determine information about free parking and transmit the information to a cloud computing system.
  • the cloud computing system retrieves information about the free parking spaces on a free parking card.
  • Such information which is determined on the vehicle side and transmitted to the cloud computing system, may be, for example, meta information about the parking spaces, which are obtained, for example, by a sign recognition performed on the vehicle side.
  • signs are, for example, no-stopping signs or signs for the identification of residents, disabled, family, women or private parking, which by a vehicle-mounted camera system and a
  • Image processing are detected and linked to the corresponding information about the parking lot.
  • a disadvantage of this prior art is that such a camera-based information recognition requires a high computing power and thus corresponding resources must be provided on the vehicle side.
  • first signals detected by the surroundings region are detected by at least one first vehicle-side sensor device
  • Received sensor data from a vehicle-side evaluation and detected a parking space-like portion of the surrounding area in the first sensor data.
  • Sensor device from the parking space-like portion detected second sensor data requested by the evaluation as soon as the parking space-like portion is detected in the first sensor data.
  • the requested second sensor data as well
  • At least one information about the parking space-like subarea determined on the basis of the first sensor data is transmitted to a central, vehicle-external computer unit for classifying the parking space-like subarea as a valid parking or invalid parking space that can not be parked.
  • a parking assistance system which is designed to assist a driver of the motor vehicle in the search for free parking spaces or free parking spaces.
  • the detected first sensor data are received and analyzed by the vehicle-side evaluation device, which can be integrated, for example, in a vehicle-side control unit.
  • distance sensor data of at least one distance sensor device on the vehicle side in particular ultrasound sensor data and / or, are preferably the first sensor data
  • Such a parking space-like subarea is, in particular, an uncovered subarea in the surrounding area, which suggests that it represents a parking space for the motor vehicle.
  • Part of the area can be recognized, for example, that it is limited by two objects spaced apart from each other, for example other motor vehicles, and has a specific geometry, for example a certain length, a certain width and / or a certain depth.
  • the two objects bounding the parking space-like subarea as well as the geometry or geometric dimensions of the subarea can be detected and determined on the basis of the first sensor data. On the basis of the first sensor data, however, it is not possible to detect whether it is a valid, parkingable parking space or an invalid parking space that can not be parked, for example a parking space for the disabled or a fire service access area.
  • the at least one first and the at least one second sensor device differ in particular in their measuring principles.
  • the second sensor data are preferably camera data or camera images, which can be detected by at least one vehicle-side camera.
  • the second sensor data is requested for evaluation, in particular, only when the presence of the parking space-like subarea has already been detected or recorded on the basis of the first sensor data.
  • the detection of the parking space-like subarea based on the first sensor data thus serves as trigger or trigger for the request of the second sensor data. For example, in the case of a second area continuously monitoring the surrounding area
  • Evaluation be transmitted and stored there, if based on the first sensor data of the parking space-like sub-area was detected.
  • the video sequence can be searched for that image or those images whose or their time stamp corresponds to a time of detection of the parking space-like subregion based on the first sensor data, in particular matches.
  • the second sensor data as well as the at least one information about the parking space-like partial area are transmitted to the vehicle-external, central computer unit.
  • the at least one based on the first
  • Information determined by sensor data for example, the first sensor data itself can be transmitted to the central computing device.
  • the first sensor data are thus enriched with the second sensor data and transmitted to the central computer unit.
  • the at least one information about the parking space-like subarea the at least one geometric dimension of the parking space-like subarea can be transmitted to the central computer unit.
  • the second sensor data are thereby in particular unprocessed to the central computer unit.
  • the second sensor data that is to say, for example, the camera data
  • the central, vehicle-external computer device for evaluation or analysis.
  • the processing and evaluation of second sensor data in the form of camera images requires a high computing power
  • Transfer computer unit which were detected in a predetermined period, wherein the predetermined period of time with a time of detection of
  • those second sensor data are transmitted to the computer unit, which were recorded simultaneously with or shortly after those first sensor data, on the basis of which the parking space-like subarea was detected. If, for example, the parking space-like subarea has been detected on the basis of the distance sensor data, a camera image is taken or selected which shows the parking space-like subarea. So only the second sensor data will be sent to the
  • Transfer vehicle external unit based on which the classification of the parking space-like sub-range can be performed by the vehicle-external computer unit. This avoids that unnecessarily large amounts of data are stored by a memory unit of the evaluation and transmitted from the motor vehicle to the vehicle-external computing device. Thus, advantageously, a low bandwidth in the transmission of the sensor data from the
  • Storage space in the vehicle-mounted storage unit can be saved.
  • Information about the park-gap-like sub-area transmitted to a designed as a cloud computing system computer unit In the case of cloud computing systems, IT infrastructures and IT services are used that are not held locally on local computers, for example on the vehicle-side evaluation device, but rented as a service and accessed via a network, for example the Internet, can be accessed. Through this network, the information determined by the cloud computing system, ie the classification of the cloud computing system.
  • park-gap-like subarea as a valid, parkable or an invalid, not parkable parking space, a variety of end users, for example
  • end users can provide information to the cloud computing system. This creates an artificial neural network, which the
  • a parking space-like partial area which previously by the central computer unit was classified as a parking space
  • the parking assistance system of a motor vehicle are offered directly without this again the second sensor data must be transmitted to the evaluation for the cloud computing system.
  • the essential advantage of the cloud computing system is that location-independent and also virtually memory-independent information can be stored centrally and thus a separate storage medium in the motor vehicle can be dispensed with. At the same time, large amounts of data can be stored and processed within the cloud computing system. This can increase computing capacity on the
  • Evaluation device generates a trigger signal for the second sensor device as soon as the parking space-like subregion has been detected on the basis of the first sensor data, wherein the second sensor device by the trigger signal for detecting the second
  • Sensor data from the surrounding area comprising the parking space-like sub-area is controlled.
  • the second sensor data that is, for example, the images from the surrounding area with the parking space-like
  • Evaluation device was generated. This means, for example, that the
  • Vehicle-side camera is only for detecting the camera image or a short video sequence of the parking space-like portion is driven when the parking space-like portion in the first sensor data, for example in the
  • the second sensor data of those second sensor device are requested, their detection range at least partially with a
  • the invention is based on the finding that a plurality of second sensor devices, for example a plurality of cameras, is generally arranged on the motor vehicle.
  • a plurality of second sensor devices for example a plurality of cameras
  • the motor vehicle In order to reduce a size of the amount of data to be stored and transmitted as well as a time in the analysis of the second sensor data, only those second sensor data are requested which originate from the parking space-like subarea. in the Case of camera images so only those camera images are requested, which show the park-gap-like sub-area.
  • the second sensor data are analyzed by the central computer unit, classified the parking space-like sub-area and the
  • Classification returned to the vehicle-side evaluation Because only those second sensor data are transmitted to the computer unit which are suitable for classifying the parking space-like partial area as an invalid or valid parking space, the computer unit can quickly carry out the classification and report back the classification. For example, it may be that only a few seconds, approximately two seconds, pass between the transmission of the second sensor data to the computer unit and the feedback of the classification to the evaluation device, so that the evaluation device classifies the computer
  • the evaluation can respond by offering this parking space, for example, for a parking operation and / or performs the parking process in this parking space autonomously or automatically.
  • the second sensor data are searched for predetermined markings indicating an invalid parking space at the parking space-like subarea and the parking space-like subarea is classified as an invalid parking space in the presence of at least one of the markings.
  • markings indicative of an invalid parking space marker on the park gap-like sub-area, for example, be an indication of a disabled parking, a women's parking, a family car park, a no-parking zone or a private house or courtyard entrance.
  • a marking may be, for example, a pictogram, which on a floor of the parking space-like portion and / or on a sign on the
  • Image processing device of the central computer unit to be recognized. Therefore, it is advantageous if the second sensor data are designed as camera images. As soon as a marking, for example such a pictogram, has been recognized in the images, the parking space-like partial area can be classified as an invalid parking space.
  • an environment map with the classified parking space-like subregions is created by the central computer unit, which is suitable for a plurality of Evaluation facilities is provided for retrieval.
  • the environment map is created in particular in a world coordinate system and the park-gap-like
  • Subareas deposited at their global positions in the area map are deposited at their global positions in the area map. For this purpose, in particular in addition to the second sensor data and the at least one information about the parking space-like subarea, the global position data or coordinates of the motor vehicle from the evaluation device to the central
  • the global position of the motor vehicle can be determined, for example, by means of GPS.
  • Creating the environment type here also means updating an existing environment map, for example HERE.
  • This environment map is available in the cloud and can be used by a large number of end users, for example the parking assistance systems of other vehicles.
  • the computer unit can use the first and / or second sensor data to provide geometric information about the information classified as valid
  • geometric information is, for example, the depth, width and / or length of the parking space and a height of a curb in the parking space. This embodiment is based on the finding that not every parking space that has been evaluated as valid is equally suitable for every motor vehicle. For example, it may be that a parking space is valid, but this is only suitable for small vehicles. Also, a parking space may have a curb, which is drive over without damage only for certain motor vehicle. Such parking spaces with certain restrictions can then be proposed for example only to the drivers of corresponding vehicles. Alternatively or additionally, all valid parking spaces and additionally the geometric information can be provided to the drivers, so that they can decide on the basis of the geometric information whether the parking space is suitable for their specific motor vehicle.
  • the invention also relates to an evaluation device for a parking assistance system of a motor vehicle, which is designed to perform those embodiments of the method according to the invention, which relate to the vehicle-side steps.
  • the evaluation device is thus in particular for receiving and
  • An inventive parking assistance system for a motor vehicle for detecting parking spaces in an environmental region of the motor vehicle comprises a first
  • Sensor device for detecting first sensor data from the surrounding area, a second sensor device different from the first sensor device
  • the first sensor device is designed in particular as a distance sensor device and the second sensor device as a camera.
  • the invention also relates to a motor vehicle with an inventive
  • the motor vehicle is designed in particular as a passenger car.
  • the invention relates to a networked system comprising at least one
  • the evaluation unit according to the invention and a computer-external computer unit, wherein the computer unit is adapted to perform those embodiments of the method according to the invention, which relate to the computer-side steps.
  • the computer unit is designed in particular as a cloud computing system.
  • the computer unit and the vehicle-side evaluation devices are designed to communicate bidirectionally wirelessly, for example via the Internet.
  • Fig. 1 is a schematic representation of an embodiment of a
  • Fig. 2 is a schematic representation of the motor vehicle of FIG. 1 in the
  • Fig. 3 is a schematic representation of a networked system
  • Fig. 1 shows a motor vehicle 1 according to the present invention.
  • the motor vehicle 1 is designed in the present case as a passenger car and includes a parking assistance system 2, which supports a driver of the motor vehicle 1 in search of valid parking spaces 3 which can be parked.
  • the parking assistance system 2 can also be configured to park the motor vehicle 1 in a parking space 3 that can be parked, at least semi-autonomously, in particular fully autonomously.
  • first sensor data from an environmental region 6 of the motor vehicle 1 can be detected by means of at least one first sensor device 5 of the parking assistance system 2.
  • Sensor data can be received and analyzed by an evaluation device 7 of the parking assistance system 2.
  • the first sensor device 5 can as
  • Distance sensor device for example, be designed as an ultrasonic sensor and / or radar sensor and / or laser scanner, so that as the first sensor data In particular distance sensor data from the evaluation device 7 are received.
  • the evaluation device 7 can be integrated, for example, in a vehicle-side control unit.
  • Subarea 8 are detected in the surrounding area 6.
  • This parking space-like subarea 8 may be, for example, an unoccupied area in the surrounding area 8, which is bounded by objects 9.
  • the delimiting objects 9 are formed here as other vehicles 10, which are parked in parking spaces 1 1 next to the parking space-like portion 8.
  • This area between the two delimiting objects 9 can be measured by recognizing at least one geometric dimension of the area, in particular a width B and a depth T, based on the first sensor data. Based on the width B and the depth T, it can be recognized that the partial area 8 can be a potential parking space for the motor vehicle 1.
  • Disabled parking which is marked by a marker 13 and on which the motor vehicle 1 may not be parked.
  • the motor vehicle 1 has at least one second sensor device 14.
  • the second sensor device 14 detects second sensor data from the surrounding area 6.
  • the second sensor device 14 is designed as a camera and records camera images and / or video sequences as the second sensor data.
  • Evaluation 7 was detected or identified based on the first sensor data of the park space-like sub-area 8, the evaluation device 7 requests from the second sensor device 14 second sensor data from the park-gap-like sub-area 8. In particular, only the second sensor data of those second
  • the detection range overlaps at least partially with a detection range 15 of the first sensor device 5.
  • only those second sensor data requested which were detected approximately at the same time as those first sensor data, based on which the parking space-like sub-area 8 was detected.
  • the camera can then capture an image or snapshot of the parking space-like partial area 8 as soon as the parking space-like partial area 8 has been detected on the basis of the first sensor data.
  • the detection of the parking space-like subarea 8 is thus a trigger signal or trigger for the at least one second sensor device 14.
  • Subarea 8 for example the geometry T, B of the parking space-like subarea 8, and the unprocessed second sensor data are transmitted from the evaluation device 7 of the parking assistance system 2 to a central, vehicle-external computing device 16.
  • the vehicle-external computing device 16 can communicate with the evaluation device 7 of the motor vehicle 1, for example, via a wireless network connection.
  • the motor vehicle 1, in particular the evaluation device 7 of the parking assistance system 2, and the central computer device 16 thus form a networked system S or a neural network.
  • the computer device 16 is designed to analyze the second sensor data and to classify the parking space-like subarea 8 as a valid parking space 3 or as an invalid parking space 12.
  • the computing device 16, the marker 13 in the form of a on the
  • the computer device 16 can classify the parking space-like subarea 8 as invalid and this the
  • the central computing device 16 may be configured as a cloud computing system 17. It can not only the
  • Evaluation device 7 of the motor vehicle 1 communicate with the central computer device 16, but also, for example, evaluation devices 18 of
  • the cloud computing system 17 for example, provide an environment map, in which classified
  • park-gap-like subarea 8 are deposited at their global positions and which of the evaluation devices 7, 18 can be retrieved.
  • the environment map can be continuously updated by the evaluation devices 7, 18 transmit information, for example, first and second sensor data to the cloud computing system 17.
  • the cloud computing system 17 can use the information transmitted to classify the parking space-like subregions 8 perform and report this classification back to the evaluation 7, 18 in order to offer the drivers of motor vehicles 1, 10 valid parking lots 3 can.
  • the cloud computing system 17 may be adapted to further, in particular geometric, information about valid parking spaces 3 in the
  • Map of the environment may, for example, the geometric dimensions B, T and a height of a curb in the
  • Parking space 3 be. Based on the information provided by the environment map, the driver of a motor vehicle 1, 10 and / or the evaluation device 7, 18 decide whether the valid parking space 3 for the specific motor vehicle 1, 10 is suitable.

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)

Abstract

The invention relates to a method for identifying parking spaces (3, 12) in an environment region (6) of a motor vehicle (1), wherein first sensor data captured from the environment region (6) by at least one first vehicle sensor apparatus (5) are received by a vehicle-side evaluating apparatus (7) and a parking-space-type partial region (8) of the environment region (6) is identified in the first sensor data, wherein second sensor data captured from the parking-space-type partial region (8) by at least one second vehicle-side sensor apparatus (14) are requested by the evaluating apparatus (7) as soon as the parking-space-type partial region (8) is identified in the first sensor data and the requested second sensor data and at least one piece of information about the parking-space-type partial region (8), which piece of information was determined on the basis of the first sensor data, are transmitted to a central computing unit (16) external to the vehicle for classification of the parking-space-type partial region (8) as a valid parking space (3) for parking or an invalid parking space (12) not for parking. The invention also relates to an evaluating apparatus (7), to a parking assistance system (2), to a motor vehicle (1) and to a networked system (S).

Description

Verfahren zum Erfassen von Parklücken in einem Umgebungsbereich eines Kraftfahrzeugs, Auswerteeinrichtung, Parkassistenzsystem, Kraftfahrzeug sowie vernetztes System  Method for detecting parking spaces in a surrounding area of a motor vehicle, evaluation device, parking assistance system, motor vehicle and networked system
Die Erfindung betrifft ein Verfahren zum Erfassen von Parklücken in einem The invention relates to a method for detecting parking spaces in a
Umgebungsbereich eines Kraftfahrzeugs, wobei durch zumindest eine erste Surrounding area of a motor vehicle, wherein at least a first
fahrzeugseitige Sensoreinrichtung aus dem Umgebungsbereich erfasste erste Vehicle-side sensor device detected from the surrounding area first
Sensordaten von einer fahrzeugseitigen Auswerteeinrichtung empfangen werden und ein parklückenartiger Teilbereich des Umgebungsbereiches in den ersten Sensordaten erkannt wird. Die Erfindung betrifft außerdem eine Auswerteeinrichtung für ein Sensor data from a vehicle-side evaluation are received and a parking space-like portion of the surrounding area is detected in the first sensor data. The invention also relates to an evaluation device for a
Parkassistenzsystem, ein Parkassistenzsystem für ein Kraftfahrzeug, ein Kraftfahrzeug sowie ein vernetztes System. Parking assistance system, a parking assistance system for a motor vehicle, a motor vehicle and a networked system.
Parkassistenzsysteme, welche einen Fahrer eines Kraftfahrzeugs bei Parkvorgängen unterstützen können, sind bereits aus dem Stand der Technik bekannt. Solche Parking assistance systems which can assist a driver of a motor vehicle during parking operations are already known from the prior art. Such
Parkassistenzsysteme erkennen Parklücken bzw. parklückenartige Teilbereiche in einem Umgebungsbereich des Kraftfahrzeugs bei einer Vorbeifahrt des Kraftfahrzeugs an den parklückenartigen Teilbereichen, indem beispielsweise den parklückenartigen Teilbereich begrenzende Objekte sowie Ausmaße bzw. geometrische Abmessungen des Parking assistance systems detect parking spaces or parking space-like subregions in an environmental region of the motor vehicle when the motor vehicle passes the parking space-like subregions, for example by limiting objects bounding the parking space-like subarea as well as dimensions or geometric dimensions of the parking space
parklückenartigen Teilbereiches erkannt werden. Dazu vermessen die Parklückenartigen part of the area are detected. To measure the
Parkassistenzsysteme in der Regel die Parklücke und erkennen beispielsweise eine Länge, eine Breite und eine Tiefe der Parklücke sowie eine relative Position der Parking assistance systems usually the parking space and recognize, for example, a length, a width and a depth of the parking space and a relative position of the
Parklücke bezüglich des Kraftfahrzeugs. Zumeist werden solche Parklückeninformationen mit fahrzeugseitigen Abstandssensoren, beispielsweise Ultraschallsensoren, erfasst. Parking space with respect to the motor vehicle. In most cases, such parking space information is detected by vehicle-mounted distance sensors, for example ultrasound sensors.
Allerdings ist es für solche Parkassistenzsystem üblicherweise nicht möglich, bei erfassten parklückenartigen Teilbereichen zwischen gültigen, beparkbaren Parklücken und ungültigen, nicht parkbaren Parklücken zu unterscheiden. Gültige, beparkbare Parklücke sind beispielsweise solche Parkzonen, in welchen das Kraftfahrzeug verkehrsregelkonform abgestellt bzw. geparkt werden darf. Ungültige Parklücken sind beispielsweise Parkverbotszonen, Haus-und Hofeinfahrten, Bushaltestellen, Grünstreifen, Feuerwehranfahrtszonen, etc. Diese ungültigen Parklücken werden zwar However, for such parking assistance systems, it is usually not possible to distinguish between valid, parking spaces that can be parked and invalid, non-parkable parking spaces in the case of registered parking space-like partial areas. Valid parking spaces that can be parked are, for example, those parking zones in which the motor vehicle may be parked or parked in compliance with traffic regulations. Invalid parking spaces are, for example, no parking zones, house and courtyard entrances, bus stops, green areas, fire brigade access zones, etc. These invalid parking spaces are indeed
assistenzsystemseitig erkannt und dem Fahrer als potentielle Parklücken bereitgestellt bzw. angezeigt, jedoch darf das Kraftfahrzeug in einer solchen ungültigen Parklücke nicht abgestellt werden. recognized on the system side and provided to the driver as potential parking spaces or displayed, but the motor vehicle may not be parked in such an invalid parking space.
Die DE 10 2012 216 994 A1 beschreibt ein Verfahren zur Parkplatzvermittlung, wobei Verkehrsteilnehmer Informationen über freie Parkplätze ermitteln und die Informationen an ein Cloud-Computing-System übermitteln. Das Cloud-Computing-System nimmt Informationen über die freien Parkplätze in eine freie Parkplatzkarte abrufbar auf. Solche Informationen, welche fahrzeugseitig bestimmt und an das Cloud-Computing-System übermittelt werden, können beispielsweise Meta-Informationen über die Parkplätze sein, welche beispielsweise durch eine fahrzeugseitig durchgeführte Schildererkennung gewonnen werden. Solche Schilder sind beispielsweise Halteverbotsschilder oder Schilder zur Kennzeichnung von Anwohner-, Behinderten-, Familien-, Frauen- oder Privatparkplätzen, welche durch ein fahrzeugseitiges Kamerasystem und eine DE 10 2012 216 994 A1 describes a method for parking space switching, wherein road users determine information about free parking and transmit the information to a cloud computing system. The cloud computing system retrieves information about the free parking spaces on a free parking card. Such information, which is determined on the vehicle side and transmitted to the cloud computing system, may be, for example, meta information about the parking spaces, which are obtained, for example, by a sign recognition performed on the vehicle side. Such signs are, for example, no-stopping signs or signs for the identification of residents, disabled, family, women or private parking, which by a vehicle-mounted camera system and a
Bildverarbeitung erkannt werden und mit den entsprechenden Informationen über den Parkplatz verknüpft werden. Nachteilig an diesem Stand der Technik ist es, dass eine solche kamerabasierte Informationserkennung eine hohe Rechenleistung benötigt und dadurch fahrzeugseitig entsprechende Ressourcen bereitgestellt werden müssen. Image processing are detected and linked to the corresponding information about the parking lot. A disadvantage of this prior art is that such a camera-based information recognition requires a high computing power and thus corresponding resources must be provided on the vehicle side.
Es ist Aufgabe der vorliegenden Erfindung, eine Lösung bereitzustellen, wie Parklücken in einem Umgebungsbereich eines Kraftfahrzeugs auf besonders einfache, zuverlässige und ressourcenschonende Weise erkannt und klassifiziert werden können. It is an object of the present invention to provide a solution, as parking spaces can be detected and classified in a surrounding area of a motor vehicle in a particularly simple, reliable and resource-saving manner.
Diese Aufgabe wird erfindungsgemäß durch ein Verfahren, eine Auswerteeinrichtung, ein Parkassistenzsystem, ein Kraftfahrzeug sowie ein vernetztes System gemäß den jeweiligen unabhängigen Ansprüchen gelöst. Vorteilhafte Ausführungsformen der Erfindung sind Gegenstand der abhängigen Ansprüche, der Beschreibung sowie der Figuren. This object is achieved by a method, an evaluation, a parking assistance system, a motor vehicle and a networked system according to the respective independent claims. Advantageous embodiments of the invention are the subject of the dependent claims, the description and the figures.
Bei einem Aspekt eines erfindungsgemäßen Verfahrens zum Erfassen von Parklücken in einem Umgebungsbereich eines Kraftfahrzeugs werden durch zumindest eine erste fahrzeugseitige Sensoreinrichtung aus dem Umgebungsbereich erfasste erste In one aspect of a method according to the invention for detecting parking spaces in an environmental region of a motor vehicle, first signals detected by the surroundings region are detected by at least one first vehicle-side sensor device
Sensordaten von einer fahrzeugseitigen Auswerteeinrichtung empfangen und ein parklückenartiger Teilbereich des Umgebungsbereiches in den ersten Sensordaten erkannt. Darüber hinaus werden durch zumindest eine zweite fahrzeugseitige Received sensor data from a vehicle-side evaluation and detected a parking space-like portion of the surrounding area in the first sensor data. In addition, by at least a second vehicle-side
Sensoreinrichtung aus dem parklückenartigen Teilbereich erfasste zweite Sensordaten von der Auswerteeinrichtung angefordert, sobald der parklückenartige Teilbereich in den ersten Sensordaten erkannt wird. Die angeforderten zweiten Sensordaten sowie zumindest eine anhand der ersten Sensordaten bestimmte Information über den parklückenartigen Teilbereich werden an eine zentrale, fahrzeugexterne Rechnereinheit zur Klassifizierung des parklückenartigen Teilbereiches als eine gültige, beparkbare oder eine ungültige, nicht beparkbare Parklücke übermittelt. Sensor device from the parking space-like portion detected second sensor data requested by the evaluation as soon as the parking space-like portion is detected in the first sensor data. The requested second sensor data as well At least one information about the parking space-like subarea determined on the basis of the first sensor data is transmitted to a central, vehicle-external computer unit for classifying the parking space-like subarea as a valid parking or invalid parking space that can not be parked.
Mittels des Verfahrens kann ein Parkassistenzsystem realisiert werden, welches dazu ausgelegt ist, einen Fahrer des Kraftfahrzeugs bei der Suche nach freien Parklücken bzw. freien Parkplätzen zu unterstützen. Dazu können die ersten Sensordaten aus dem By means of the method, a parking assistance system can be realized, which is designed to assist a driver of the motor vehicle in the search for free parking spaces or free parking spaces. For this purpose, the first sensor data from the
Umgebungsbereich während einer Fahrt des Kraftfahrzeugs in dem Umgebungsbereich mittels der zumindest einen ersten fahrzeugseitigen Sensoreinrichtung, insbesondere kontinuierlich, erfasst werden. Die erfassten ersten Sensordaten werden von der fahrzeugseitigen Auswerteeinrichtung, welche beispielsweise in ein fahrzeugseitiges Steuergerät integriert sein kann, empfangen und analysiert. Als die ersten Sensordaten werden dabei vorzugsweise Abstandsensordaten zumindest einer fahrzeugseitigen Abstandssensoreinrichtung, insbesondere Ultraschallsensordaten und/oder Ambient area during a journey of the motor vehicle in the surrounding area by means of the at least one first vehicle-side sensor device, in particular continuously detected. The detected first sensor data are received and analyzed by the vehicle-side evaluation device, which can be integrated, for example, in a vehicle-side control unit. In this case, distance sensor data of at least one distance sensor device on the vehicle side, in particular ultrasound sensor data and / or, are preferably the first sensor data
Radarsensordaten und/oder Laserscannerdaten, von der fahrzeugseitigen Radar sensor data and / or laser scanner data, from the vehicle side
Auswerteeinrichtung empfangen. Solche Abstandssensordaten können in vorteilhafter Weise schnell, nahezu in Echtzeit, und mit geringer Rechenleistung ausgewertet werden. Receive evaluation. Such distance sensor data can advantageously be evaluated quickly, almost in real time, and with low computing power.
Anhand der ersten Sensordaten kann der parklückenartige Teilbereich in dem On the basis of the first sensor data, the parking space-like subarea in the
Umgebungsbereich erkannt werden. Ein solcher parklückenartiger Teilbereich ist insbesondere ein unbelegter Teilbereich in dem Umgebungsbereich, welcher vermuten lässt, dass er eine Parklücke für das Kraftfahrzeug darstellt. Der parklückenartige Environment area are detected. Such a parking space-like subarea is, in particular, an uncovered subarea in the surrounding area, which suggests that it represents a parking space for the motor vehicle. The park-gap-like
Teilbereich kann beispielsweise daran erkannt werden, dass er durch zwei zueinander beabstandete Objekte, beispielsweise andere Kraftfahrzeuge, begrenzt ist, und eine bestimmte Geometrie, beispielsweise eine bestimmte Länge, eine bestimmte Breite und/oder eine bestimmte Tiefe, aufweist. Die beiden, den parklückenartigen Teilbereich begrenzenden Objekte sowie die Geometrie bzw. geometrischen Abmessungen des Teilbereiches können anhand der ersten Sensordaten erfasst und bestimmt werden. Anhand der ersten Sensordaten kann jedoch nicht erkannt werden, ob es sich um eine gültige, beparkbare Parklücke oder eine ungültige, nicht beparkbare Parklücke, beispielsweise einen Behindertenparkplatz oder eine Feuerwehranfahrtszone, handelt. Part of the area can be recognized, for example, that it is limited by two objects spaced apart from each other, for example other motor vehicles, and has a specific geometry, for example a certain length, a certain width and / or a certain depth. The two objects bounding the parking space-like subarea as well as the geometry or geometric dimensions of the subarea can be detected and determined on the basis of the first sensor data. On the basis of the first sensor data, however, it is not possible to detect whether it is a valid, parkingable parking space or an invalid parking space that can not be parked, for example a parking space for the disabled or a fire service access area.
Zur Klassifizierung des parklückenartigen Teilbereiches als gültige oder ungültige To classify the parking space-like subarea as valid or invalid
Parklücke werden daher die zweiten Sensordaten der zumindest einen zweiten Parking space will therefore be the second sensor data of the at least one second
Sensoreinrichtung verwendet. Die die zumindest eine erste und die zumindest eine zweite Sensoreinrichtung unterscheiden sich dabei insbesondere in ihren Messprinzipien. Die zweiten Sensordaten sind vorzugsweise Kameradaten bzw. Kamerabilder, welche von zumindest einer fahrzeugseitigen Kamera erfasst werden können. Dabei ist es vorgesehen, dass die zweiten Sensordaten insbesondere nur dann zur Auswertung angefordert werden, wenn das Vorhandsein des parklückenartigen Teilbereiches bereits anhand der ersten Sensordaten erkannt bzw. erfasst wurde. Die Erfassung des parklückenartigen Teilbereiches anhand der ersten Sensordaten dient somit als Trigger bzw. Auslöser für die Anforderung der zweiten Sensordaten. So können beispielsweise, im Falle einer den Umgebungsbereich kontinuierlich überwachenden zweiten Sensor device used. The at least one first and the at least one second sensor device differ in particular in their measuring principles. The second sensor data are preferably camera data or camera images, which can be detected by at least one vehicle-side camera. In this case, it is provided that the second sensor data is requested for evaluation, in particular, only when the presence of the parking space-like subarea has already been detected or recorded on the basis of the first sensor data. The detection of the parking space-like subarea based on the first sensor data thus serves as trigger or trigger for the request of the second sensor data. For example, in the case of a second area continuously monitoring the surrounding area
Sensoreinrichtung, die zweiten Sensordaten nur dann an die fahrzeugseitige Sensor device, the second sensor data only on the vehicle side
Auswerteeinrichtung übermittelt und dort abgespeichert werden, falls anhand der ersten Sensordaten der parklückenartige Teilbereich erkannt wurde. Dazu kann im Falle einer bereits erfassten Videosequenz die Videosequenz nach demjenigen Bild oder denjenigen Bildern durchsucht werden, dessen oder deren Zeitstempel mit einem Zeitpunkt der Erfassung des parklückenartigen Teilbereiches anhand der ersten Sensordaten korrespondiert, insbesondere übereinstimmt. Evaluation be transmitted and stored there, if based on the first sensor data of the parking space-like sub-area was detected. For this purpose, in the case of an already recorded video sequence, the video sequence can be searched for that image or those images whose or their time stamp corresponds to a time of detection of the parking space-like subregion based on the first sensor data, in particular matches.
Außerdem ist vorgesehen, dass die zweiten Sensordaten sowie die zumindest eine Information über den parklückenartigen Teilbereich an die fahrzeugexterne, zentrale Rechnereinheit übermittelt werden. Als die zumindest eine, anhand der ersten In addition, it is provided that the second sensor data as well as the at least one information about the parking space-like partial area are transmitted to the vehicle-external, central computer unit. As the at least one, based on the first
Sensordaten ermittelte Information können beispielsweise die ersten Sensordaten selbst an die zentrale Recheneinrichtung übertragen werden. Die ersten Sensordaten werden also mit den zweiten Sensordaten angereichert und an die zentrale Rechnereinheit übertragen. Alternativ oder zusätzlich kann als die zumindest eine Information über den parklückenartigen Teilbereich die zumindest eine geometrische Abmessung des parklückenartigen Teilbereiches an die zentrale Rechnereinheit übertragen werden. Die zweiten Sensordaten werden dabei insbesondere unverarbeitet an die zentrale Information determined by sensor data, for example, the first sensor data itself can be transmitted to the central computing device. The first sensor data are thus enriched with the second sensor data and transmitted to the central computer unit. Alternatively or additionally, as the at least one information about the parking space-like subarea, the at least one geometric dimension of the parking space-like subarea can be transmitted to the central computer unit. The second sensor data are thereby in particular unprocessed to the central
Recheneinheit übertragen. Anders ausgedrückt, werden die zweiten Sensordaten, also beispielsweise die Kameradaten, insbesondere nicht fahrzeugseitig analysiert bzw. ausgewertet, sondern zur Auswertung bzw. Analyse an die zentrale, fahrzeugexterne Rechnereinrichtung übertragen. Gerade die Verarbeitung und Auswertung von zweiten Sensordaten in Form von Kamerabildern benötigt eine hohe Rechenleistung, Transfer computer. In other words, the second sensor data, that is to say, for example, the camera data, are not analyzed or evaluated in particular on the vehicle side, but instead are transmitted to the central, vehicle-external computer device for evaluation or analysis. Especially the processing and evaluation of second sensor data in the form of camera images requires a high computing power,
insbesondere wenn sie in kurzer Zeit durchgeführt werden soll. Daher werden insbesondere diejenigen Sensordaten, welche nicht in Echtzeit ausgewertet müssen, zum Analysieren an die fahrzeugexterne Rechnereinheit gesendet. Daraus ergibt sich der Vorteil, dass fahrzeugseitig Rechnerressourcen und Rechenleistung gespart werden können, da die Auswertung der zweiten Sensordaten und damit die Klassifizierung des parklückenartigen Teilbereiches fahrzeugextern erfolgen. Dabei werden insbesondere nur diejenigen zweiten Sensordaten an die zentrale especially if it should be done in a short time. Therefore, in particular, those sensor data which need not be evaluated in real time are sent to the on-vehicle computer unit for analysis. This results in the advantage that computer resources and computing power can be saved on the vehicle side since the evaluation of the second sensor data and thus the classification of the parking space-like subarea are carried out on the vehicle. In particular, only those second sensor data are sent to the central one
Rechnereinheit übertragen, welche in einem vorbestimmten Zeitraum erfasst wurden, wobei der vorbestimmte Zeitraum mit einem Zeitpunkt der Erkennung des Transfer computer unit, which were detected in a predetermined period, wherein the predetermined period of time with a time of detection of
parklückenartigen Teilbereiches anhand der ersten Sensordaten korrespondiert. Parklückenartigen subarea corresponding to the first sensor data.
Insbesondere werden diejenigen zweiten Sensordaten an die Rechnereinheit übertragen, welche zeitgleich mit oder kurz nach denjenigen ersten Sensordaten erfasst wurden, anhand welchen der parklückenartige Teilbereich erkannt wurde. Wenn beispielsweise der parklückenartige Teilbereich anhand der Abstandssensordaten erkannt wurde, so wird eine Kamerabild aufgenommen oder ausgewählt, welches den parklückenartigen Teilbereich zeigt. Es werden also nur diejenigen zweiten Sensordaten an die In particular, those second sensor data are transmitted to the computer unit, which were recorded simultaneously with or shortly after those first sensor data, on the basis of which the parking space-like subarea was detected. If, for example, the parking space-like subarea has been detected on the basis of the distance sensor data, a camera image is taken or selected which shows the parking space-like subarea. So only the second sensor data will be sent to the
fahrzeugexterne Rechnereinheit übertragen, anhand welchen die Klassifizierung des parklückenartigen Teilbereiches von der fahrzeugexternen Rechnereinheit durchgeführt werden kann. Dadurch wird vermieden, dass unnötig große Datenmengen durch eine Speichereinheit der Auswerteeinrichtung gespeichert und von dem Kraftfahrzeug an die fahrzeugexterne Rechnereinrichtung übertragen werden. Somit kann in vorteilhafter Weise eine geringe Bandbreite bei der Übertragung der Sensordaten von der Transfer vehicle external unit, based on which the classification of the parking space-like sub-range can be performed by the vehicle-external computer unit. This avoids that unnecessarily large amounts of data are stored by a memory unit of the evaluation and transmitted from the motor vehicle to the vehicle-external computing device. Thus, advantageously, a low bandwidth in the transmission of the sensor data from the
Auswerteeinrichtung an die Rechnereinheit verwendet werden und außerdem Evaluation are used to the computer unit and also
Speicherplatz in der fahrzeugseitigen Speichereinheit gespart werden. Storage space in the vehicle-mounted storage unit can be saved.
Besonders bevorzugt werden die zweiten Sensordaten sowie die zumindest eine Particularly preferred are the second sensor data and the at least one
Information über den parklückenartigen Teilbereich an eine als Cloud-Computing-System ausgestaltete Rechnereinheit übermittelt. Bei Cloud-Computing-Systemen werden IT- Infrastrukturen und IT-Dienstleistungen genutzt, die nicht vor Ort auf lokalen Rechnern, also beispielsweise auf der fahrzeugseitigen Auswerteeinrichtung, vorgehalten werden, sondern als Dienst gemietet werden und auf die über ein Netzwerk, beispielsweise das Internet, zugegriffen werden kann. Über dieses Netzwerk können die durch das Cloud- Computing-System bestimmten Informationen, also die Klassifizierung des Information about the park-gap-like sub-area transmitted to a designed as a cloud computing system computer unit. In the case of cloud computing systems, IT infrastructures and IT services are used that are not held locally on local computers, for example on the vehicle-side evaluation device, but rented as a service and accessed via a network, for example the Internet, can be accessed. Through this network, the information determined by the cloud computing system, ie the classification of the
parklückenartigen Teilbereiches als eine gültige, beparkbare oder eine ungültige, nicht beparkbare Parklücke, einer Vielzahl von Endnutzern, beispielsweise auch park-gap-like subarea as a valid, parkable or an invalid, not parkable parking space, a variety of end users, for example
Parkassistenzsystemen anderer Kraftfahrzeuge, zur Verfügung gestellt werden. Parking assistance systems of other motor vehicles are provided.
Gleichzeitig können die Endnutzer dem Cloud-Computing-System Informationen zur Verfügung stellen. So entsteht ein künstliches neuronales Netz, welches den At the same time, end users can provide information to the cloud computing system. This creates an artificial neural network, which the
Umgebungsbereich der Kraftfahrzeuge erlernt, indem ihm Informationen aus diesem Umgebungsbereich, beispielsweise in Form der Sensordaten, bereitgestellt werden. So kann beispielsweise ein parklückenartiger Teilbereich, welcher bereits zuvor durch die zentrale Rechnereinheit als eine Parklücke klassifiziert wurde, dem Parkassistenzsystem eines Kraftfahrzeugs direkt angeboten werden, ohne dass dieses erneut die zweiten Sensordaten zur Auswertung an das Cloud-Computing-System übertragen muss. Aus dem Cloud-Computing-System ergibt sich der wesentliche Vorteil, dass ortsunabhängig und auch nahezu speicherunabhängig Informationen zentral gespeichert werden können und somit auf ein separates Speichermedium im Kraftfahrzeug verzichtet werden kann. Gleichzeitig können große Datenmengen innerhalb des Cloud-Computing-Systems gespeichert und verarbeiten werden. Dadurch kann Rechenkapazität auf der Surrounding area of the motor vehicle learned by information from this environment area, for example in the form of sensor data, are provided. Thus, for example, a parking space-like partial area, which previously by the central computer unit was classified as a parking space, the parking assistance system of a motor vehicle are offered directly without this again the second sensor data must be transmitted to the evaluation for the cloud computing system. The essential advantage of the cloud computing system is that location-independent and also virtually memory-independent information can be stored centrally and thus a separate storage medium in the motor vehicle can be dispensed with. At the same time, large amounts of data can be stored and processed within the cloud computing system. This can increase computing capacity on the
kraftfahrzeuginternen Auswerteeinrichtung eingespart und für andere Zwecke saved in-vehicle evaluation device and for other purposes
bereitgestellt werden. to be provided.
In einer Ausführungsform der Erfindung wird von der fahrzeugseitigen In one embodiment of the invention, the vehicle-side
Auswerteeinrichtung ein Auslösesignal für die zweite Sensoreinrichtung generiert, sobald der parklückenartige Teilbereich anhand der ersten Sensordaten erfasst wurde, wobei die zweite Sensoreinrichtung durch das Auslösesignal zum Erfassen der zweiten Evaluation device generates a trigger signal for the second sensor device as soon as the parking space-like subregion has been detected on the basis of the first sensor data, wherein the second sensor device by the trigger signal for detecting the second
Sensordaten aus dem Umgebungsbereich aufweisend den parklückenartigen Teilbereich angesteuert wird. Gemäß dieser Ausführungsform werden die zweiten Sensordaten, also beispielsweise die Bilder aus dem Umgebungsbereich mit dem parklückenartigen Sensor data from the surrounding area comprising the parking space-like sub-area is controlled. According to this embodiment, the second sensor data, that is, for example, the images from the surrounding area with the parking space-like
Teilbereich, nur dann erfasst, wenn das Auslösesignal von der fahrzeugseitigen Part area, detected only when the trigger signal from the vehicle side
Auswerteeinrichtung generiert wurde. Dies bedeutet beispielsweise, dass die Evaluation device was generated. This means, for example, that the
fahrzeugseitige Kamera nur dann zum Erfassen des Kamerabildes oder einer kurzen Videosequenz des parklückenartigen Teilbereiches angesteuert wird, wenn der parklückenartige Teilbereich in den ersten Sensordaten, beispielsweise in den Vehicle-side camera is only for detecting the camera image or a short video sequence of the parking space-like portion is driven when the parking space-like portion in the first sensor data, for example in the
Ultraschallsensordaten, identifiziert wurde. Das Verfahren ist somit besonders Ultrasound sensor data has been identified. The process is thus special
energiesparend ausgebildet. Außerdem kann so gewährleistet werden, dass nur diejenigen zweiten Sensordaten an die zentrale Rechnereinheit übertragen werden, anhand welchen die Rechnereinheit die Parklücke schnell und einfach klassifizieren kann. designed to save energy. In addition, it can be ensured that only those second sensor data are transmitted to the central computer unit, based on which the computer unit can classify the parking space quickly and easily.
Insbesondere werden die zweiten Sensordaten derjenigen zweiten Sensoreinrichtung angefordert, deren Erfassungsbereich zumindest bereichsweise mit ein In particular, the second sensor data of those second sensor device are requested, their detection range at least partially with a
Erfassungsbereich der ersten Sensoreinrichtung überlappt. Der Erfindung liegt hierbei die Erkenntnis zugrunde, dass am Kraftfahrzeug in der Regel eine Vielzahl von zweiten Sensoreinrichtungen, beispielsweise ein Vielzahl von Kameras angeordnet ist. Um dabei eine Größe der abzuspeichernden und zu übertragenden Datenmenge sowie eine Zeit bei der Analyse der zweiten Sensordaten zu reduzieren, werden nur diejenigen zweiten Sensordaten angefordert, welche aus dem parklückenartigen Teilbereich stammen. Im Falle von Kamerabildern werden also nur diejenigen Kamerabilder angefordert, welche den parklückenartigen Teilbereich zeigen. Detection area of the first sensor device overlaps. The invention is based on the finding that a plurality of second sensor devices, for example a plurality of cameras, is generally arranged on the motor vehicle. In order to reduce a size of the amount of data to be stored and transmitted as well as a time in the analysis of the second sensor data, only those second sensor data are requested which originate from the parking space-like subarea. in the Case of camera images so only those camera images are requested, which show the park-gap-like sub-area.
In einer vorteilhaften Weiterbildung werden die zweiten Sensordaten durch die zentrale Rechnereinheit analysiert, der parklückenartige Teilbereich klassifiziert und die In an advantageous development, the second sensor data are analyzed by the central computer unit, classified the parking space-like sub-area and the
Klassifizierung an die fahrzeugseitige Auswerteeinrichtung zurückgemeldet. Dadurch, dass lediglich diejenigen zweiten Sensordaten an die Rechnereinheit übermittelt werden, welche zur Klassifizierung des parklückenartigen Teilbereiches als ungültige oder gültige Parklücke geeignet sind, kann die Rechnereinheit die Klassifizierung schnell durchführen und die Klassifizierung zurückmelden. So kann es beispielsweise sein, dass zwischen dem Übermitteln der zweiten Sensordaten an die Rechnereinheit und der Rückmeldung der Klassifizierung an die Auswerteeinrichtung nur ein paar Sekunden, etwa zwei Sekunden, vergehen, sodass die Auswerteeinrichtung die Klassifizierung des Classification returned to the vehicle-side evaluation. Because only those second sensor data are transmitted to the computer unit which are suitable for classifying the parking space-like partial area as an invalid or valid parking space, the computer unit can quickly carry out the classification and report back the classification. For example, it may be that only a few seconds, approximately two seconds, pass between the transmission of the second sensor data to the computer unit and the feedback of the classification to the evaluation device, so that the evaluation device classifies the computer
parklückenartigen Teilbereiches verwenden kann. Wenn der parklückenartige Teilbereich durch die Rechnereinheit beispielsweise als gültige Parklücke klassifiziert wurde, so kann die Auswerteeinrichtung reagieren, indem sie diese Parklücke beispielsweise für einen Einparkvorgang anbietet und/oder den Einparkvorgang in diese Parklücke autonom bzw. automatisch durchführt. can use parklückenartigen subarea. If the parking space-like subarea has been classified by the computer unit, for example, as a valid parking space, so the evaluation can respond by offering this parking space, for example, for a parking operation and / or performs the parking process in this parking space autonomously or automatically.
Es kann vorgesehen sein, dass die zweiten Sensordaten nach vorbestimmten, auf eine ungültige Parklücke hinweisenden Markierungen an dem parklückenartigen Teilbereich durchsucht werden und der parklückenartige Teilbereich bei Vorliegen zumindest einer der Markierungen als ungültige Parklücke klassifiziert wird. Eine solche, auf eine ungültige Parklücke hinweisende Markierung an dem parklückenartigen Teilbereich kann beispielsweise ein Hinweis auf einen Behindertenparkplatz, einen Frauenparkplatz, einen Familienparkplatz, eine Parkverbotszone oder eine private Haus-oder Hofeinfahrt sein. Eine solche Markierung kann beispielsweise ein Piktogramm sein, welches auf einen Boden des parklückenartigen Teilbereiches und/oder auf einem Schild an dem It can be provided that the second sensor data are searched for predetermined markings indicating an invalid parking space at the parking space-like subarea and the parking space-like subarea is classified as an invalid parking space in the presence of at least one of the markings. Such, indicative of an invalid parking space marker on the park gap-like sub-area, for example, be an indication of a disabled parking, a women's parking, a family car park, a no-parking zone or a private house or courtyard entrance. Such a marking may be, for example, a pictogram, which on a floor of the parking space-like portion and / or on a sign on the
parklückenartigen Teilbereich angebracht ist. Solche Piktogramme können besonders gut mittels Bilderkennungsalgorithmen, beispielsweise durch eine Parklückenartigen section is attached. Such pictograms can very well by means of image recognition algorithms, for example by a
Bildverarbeitungseinrichtung der zentralen Rechnereinheit, erkannt werden. Daher ist es vorteilhaft, wenn die zweiten Sensordaten als Kamerabilder ausgebildet sind. Sobald eine Markierung, beispielsweise ein solches Piktogramm, in den Bildern erkannt wurde, kann der parklückenartige Teilbereich als ungültige Parklücke klassifiziert werden.  Image processing device of the central computer unit to be recognized. Therefore, it is advantageous if the second sensor data are designed as camera images. As soon as a marking, for example such a pictogram, has been recognized in the images, the parking space-like partial area can be classified as an invalid parking space.
Besonders bevorzugt wird durch die zentrale Rechnereinheit eine Umgebungskarte mit den klassifizierten parklückenartigen Teilbereichen erstellt, welche für eine Vielzahl von Auswerteeinrichtungen zum Abrufen bereitgestellt wird. Die Umgebungskarte wird insbesondere in einem Weltkoordinatensystem erstellt und die parklückenartigen Particularly preferably, an environment map with the classified parking space-like subregions is created by the central computer unit, which is suitable for a plurality of Evaluation facilities is provided for retrieval. The environment map is created in particular in a world coordinate system and the park-gap-like
Teilbereiche an ihren globalen Positionen in der Umgebungskarte hinterlegt. Dazu werden insbesondere zusätzlich zu den zweiten Sensordaten und der zumindest einen Information über den parklückenartigen Teilbereich die globalen Positionsdaten bzw. Koordinaten des Kraftfahrzeugs von der Auswerteeinrichtung an die zentrale Subareas deposited at their global positions in the area map. For this purpose, in particular in addition to the second sensor data and the at least one information about the parking space-like subarea, the global position data or coordinates of the motor vehicle from the evaluation device to the central
Rechnereinheit übermittelt. Die globale Position des Kraftfahrzeugs kann beispielsweise mittels GPS bestimmt werden. Unter Erstellen der Umgebungsarte ist hier auch das Aktualisieren einer bereits vorhandenen Umgebungskarte, beispielweise HERE, zu verstehen. Diese Umgebungskarte ist dabei in der Cloud abrufbar und kann von einer Vielzahl von Endnutzern, beispielsweise den Parkassistenzsystemen anderer Fahrzeuge, genutzt werden. Computer unit transmitted. The global position of the motor vehicle can be determined, for example, by means of GPS. Creating the environment type here also means updating an existing environment map, for example HERE. This environment map is available in the cloud and can be used by a large number of end users, for example the parking assistance systems of other vehicles.
In einer Weiterbildung können durch die Rechnereinheit anhand der ersten und/oder zweiten Sensordaten geometrische Informationen über die als gültig klassifizierte In a development, the computer unit can use the first and / or second sensor data to provide geometric information about the information classified as valid
Parklücke bestimmt und in die Umgebungskarte eingetragen werden. Solche Parking space determined and registered in the map. Such
geometrischen Informationen sind beispielsweise die Tiefe, Breite und/oder Länge der Parklücke und eine Höhe eines Bordsteins in der Parklücke. Dieser Ausführungsform liegt die Erkenntnis zugrunde, dass nicht jede Parklücke, welche als gültig bewertet wurde, für jedes Kraftfahrzeug gleichermaßen geeignet ist. So kann es beispielsweise sein, dass eine Parklücke zwar gültig ist, diese aber nur für kleine Fahrzeuge geeignet ist. Auch kann eine Parklücke einen Bordstein aufweisen, welcher nur für bestimmte Kraftfahrzeug beschädigungsfrei überfahrbar ist. Solche Parklücken mit gewissen Einschränkungen können dann beispielsweise nur den Fahrern entsprechender Fahrzeuge vorgeschlagen werden. Alternativ oder zusätzlich können den Fahrern alle gültigen Parklücken und zusätzlich die geometrischen Informationen bereitgestellt werden, sodass diese anhand der geometrischen Informationen entscheiden können, ob die Parklücke für ihr konkretes Kraftfahrzeugs geeignet ist. geometric information is, for example, the depth, width and / or length of the parking space and a height of a curb in the parking space. This embodiment is based on the finding that not every parking space that has been evaluated as valid is equally suitable for every motor vehicle. For example, it may be that a parking space is valid, but this is only suitable for small vehicles. Also, a parking space may have a curb, which is drive over without damage only for certain motor vehicle. Such parking spaces with certain restrictions can then be proposed for example only to the drivers of corresponding vehicles. Alternatively or additionally, all valid parking spaces and additionally the geometric information can be provided to the drivers, so that they can decide on the basis of the geometric information whether the parking space is suitable for their specific motor vehicle.
Die Erfindung betrifft außerdem eine Auswerteeinrichtung für ein Parkassistenzsystem eines Kraftfahrzeugs, welche dazu ausgelegt ist, diejenigen Ausführungsformen des erfindungsgemäßen Verfahrens durchzuführen, welche die fahrzeugseitigen Schritte betreffen. Die Auswerteeinrichtung ist also insbesondere zum Empfangen und The invention also relates to an evaluation device for a parking assistance system of a motor vehicle, which is designed to perform those embodiments of the method according to the invention, which relate to the vehicle-side steps. The evaluation device is thus in particular for receiving and
Analysieren der ersten Sensordaten, zum Anfordern der zweiten Sensordaten und zum Weiterleiten der ersten und zweiten Sensordaten an die zentrale Rechnereinheit ausgebildet. Ein erfindungsgemäßes Parkassistenzsystem für ein Kraftfahrzeug zum Erfassen von Parklücken in einem Umgebungsbereich des Kraftfahrzeugs umfasst eine erste Analyzing the first sensor data, for requesting the second sensor data and for forwarding the first and second sensor data formed to the central processing unit. An inventive parking assistance system for a motor vehicle for detecting parking spaces in an environmental region of the motor vehicle comprises a first
Sensoreinrichtung zum Erfassen von ersten Sensordaten aus dem Umgebungsbereich, eine zu ersten Sensoreinrichtung unterschiedliche zweite Sensoreinrichtung zum Sensor device for detecting first sensor data from the surrounding area, a second sensor device different from the first sensor device
Erfassen von zweiten Sensordaten aus dem Umgebungsbereich und eine Capture second sensor data from the environment area and a
erfindungsgemäße Auswerteeinrichtung. Die erste Sensoreinrichtung ist insbesondere als eine Abstandssensoreinrichtung und die zweite Sensoreinrichtung als eine Kamera ausgebildet. Evaluation device according to the invention. The first sensor device is designed in particular as a distance sensor device and the second sensor device as a camera.
Die Erfindung betrifft außerdem ein Kraftfahrzeug mit einem erfindungsgemäßen The invention also relates to a motor vehicle with an inventive
Parkassistenzsystem. Das Kraftfahrzeug ist insbesondere als ein Personenkraftwagen ausgebildet. Parking assistance system. The motor vehicle is designed in particular as a passenger car.
Ferner betrifft die Erfindung ein vernetztes System aufweisend zumindest eine Furthermore, the invention relates to a networked system comprising at least one
erfindungsgemäße Auswerteeinrichtung sowie eine fahrzeugexterne Rechnereinheit, wobei die Rechnereinheit dazu ausgelegt ist, diejenigen Ausführungsformen des erfindungsgemäßen Verfahrens durchzuführen, welche die rechnerseitigen Schritte betreffen. Die Rechnereinheit ist insbesondere als Cloud-Computing-System ausgebildet. Die Rechnereinheit und die fahrzeugseitigen Auswerteeinrichtungen sind dazu ausgelegt, drahtlos, beispielsweise über das Internet, bidirektional zu kommunizieren. The evaluation unit according to the invention and a computer-external computer unit, wherein the computer unit is adapted to perform those embodiments of the method according to the invention, which relate to the computer-side steps. The computer unit is designed in particular as a cloud computing system. The computer unit and the vehicle-side evaluation devices are designed to communicate bidirectionally wirelessly, for example via the Internet.
Die mit Bezug auf das erfindungsgemäße Verfahren vorgestellten bevorzugten The preferred embodiments presented with reference to the process according to the invention
Ausführungsformen und deren Vorteile gelten entsprechend für die erfindungsgemäße Auswerteeinrichtung, das erfindungsgemäße Parkassistenzsystem, das Embodiments and their advantages apply correspondingly to the evaluation device according to the invention, the parking assistance system according to the invention, the
erfindungsgemäße Kraftfahrzeug sowie das erfindungsgemäße vernetzte System. Motor vehicle according to the invention and the networked system according to the invention.
Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen, sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Further features of the invention will become apparent from the claims, the figures and the description of the figures. The features and feature combinations mentioned above in the description, as well as the features and feature combinations mentioned below in the description of the figures and / or shown alone in the figures, are not only in the respectively indicated combination but also in others
Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen. Es sind somit auch Ausführungen von der Erfindung als umfasst und offenbart anzusehen, die in den Figuren nicht explizit gezeigt und erläutert sind, jedoch durch separierte Merkmalskombinationen aus den erläuterten Ausführungen hervorgehen und erzeugbar sind. Es sind auch Ausführungen und Merkmalskombinationen als offenbart anzusehen, die somit nicht alle Merkmale eines ursprünglich formulierten unabhängigen Anspruchs aufweisen. Es sind darüber hinaus Ausführungen und Combinations or alone, without departing from the scope of the invention. Thus, embodiments of the invention are to be regarded as encompassed and disclosed, which are not explicitly shown and explained in the figures, however, emerge and can be produced by separated combinations of features from the embodiments explained. There are also embodiments and combinations of features to be regarded as disclosed, which thus not all the features of an originally formulated independent Have claim. There are also versions and
Merkmalskombinationen, insbesondere durch die oben dargelegten Ausführungen, als offenbart anzusehen, die über die in den Rückbezügen der Ansprüche dargelegten Merkmalskombinationen hinausgehen oder abweichen. Feature combinations, in particular by the above-mentioned embodiments, to be regarded as disclosed that go beyond the feature combinations set forth in the back covers of the claims or deviate.
Dabei zeigen: Showing:
Fig. 1 eine schematische Darstellung einer Ausführungsform eines Fig. 1 is a schematic representation of an embodiment of a
erfindungsgemäßen Kraftfahrzeugs bei der Parklückensuche in einem Umgebungsbereich mit einer gültigen Parklücke;  motor vehicle according to the invention in the parking space search in a surrounding area with a valid parking space;
Fig. 2 eine schematische Darstellung des Kraftfahrzeugs gemäß Fig. 1 bei der Fig. 2 is a schematic representation of the motor vehicle of FIG. 1 in the
Parklückensuche in einem Umgebungsbereich mit einer ungültigen Parklücke; und  Parking space search in an area with an invalid parking space; and
Fig. 3 eine schematische Darstellung eines vernetzten Systems aus Fig. 3 is a schematic representation of a networked system
Kraftfahrzeugen und einem Cloud-Computing-System.  Motor vehicles and a cloud computing system.
In den Figuren sind gleiche sowie funktionsgleiche Elemente mit den gleichen In the figures are the same as well as functionally identical elements with the same
Bezugszeichen versehen. Provided with reference numerals.
Fig. 1 zeigt ein Kraftfahrzeug 1 gemäß der vorliegenden Erfindung. Das Kraftfahrzeug 1 ist im vorliegenden Fall als ein Personenkraftwagen ausgebildet und umfasst ein Parkassistenzsystem 2, welches einen Fahrer des Kraftfahrzeugs 1 auf der Suche nach gültigen, beparkbaren Parklücken 3 unterstützt. Auch kann das Parkassistenzsystem 2 dazu ausgebildet sein, das Kraftfahrzeug 1 zumindest semi-autonom, insbesondere vollautonom, in eine beparkbare Parklücke 3 einzuparken. Fig. 1 shows a motor vehicle 1 according to the present invention. The motor vehicle 1 is designed in the present case as a passenger car and includes a parking assistance system 2, which supports a driver of the motor vehicle 1 in search of valid parking spaces 3 which can be parked. The parking assistance system 2 can also be configured to park the motor vehicle 1 in a parking space 3 that can be parked, at least semi-autonomously, in particular fully autonomously.
Zum Erkennen von Parklücken 3 kann sich das Kraftfahrzeug 1 beispielsweise in Vorwärtsrichtung F auf einer Fahrbahn 4 fortbewegen. Dabei können mittels zumindest einer ersten Sensoreinrichtung 5 des Parkassistenzsystems 2 erste Sensordaten aus einem Umgebungsbereich 6 des Kraftfahrzeugs 1 erfasst werden. Die ersten For detecting parking spaces 3, the motor vehicle 1, for example, in the forward direction F on a roadway 4 move. In this case, first sensor data from an environmental region 6 of the motor vehicle 1 can be detected by means of at least one first sensor device 5 of the parking assistance system 2. The first
Sensordaten können von einer Auswerteeinrichtung 7 des Parkassistenzsystems 2 empfangen und analysiert werden. Die erste Sensoreinrichtung 5 kann als Sensor data can be received and analyzed by an evaluation device 7 of the parking assistance system 2. The first sensor device 5 can as
Abstandssensoreinrichtung, beispielsweise als Ultraschallsensor und/oder Radarsensor und/oder Laserscanner ausgebildet sein, sodass als die ersten Sensordaten insbesondere Abstandsensordaten von der Auswerteeinrichtung 7 empfangen werden. Die Auswerteeinrichtung 7 kann beispielsweise in ein fahrzeugseitiges Steuergerät integriert sein. Distance sensor device, for example, be designed as an ultrasonic sensor and / or radar sensor and / or laser scanner, so that as the first sensor data In particular distance sensor data from the evaluation device 7 are received. The evaluation device 7 can be integrated, for example, in a vehicle-side control unit.
In den ersten Sensordaten kann ein parklückenähnlicher bzw. parklückenartiger In the first sensor data, a parking space-like or parking space-like
Teilbereich 8 in dem Umgebungsbereich 6 erkannt werden. Dieser parklückenartige Teilbereich 8 kann beispielsweise ein unbelegter Bereich in dem Umgebungsbereich 8 sein, welcher von Objekten 9 begrenzt ist. Die begrenzenden Objekte 9 sind hier als andere Fahrzeuge 10 ausgebildet, welche in Parklücken 1 1 neben dem parklückenartigen Teilbereich 8 geparkt sind. Dieser Bereich zwischen den zwei begrenzenden Objekten 9 kann vermessen werden, indem anhand der ersten Sensordaten zumindest eine geometrische Abmessung des Bereiches, insbesondere eine Breite B und eine Tiefe T, erkannt wird. Anhand der Breite B und der Tiefe T kann erkannt werden, dass es sich bei dem Teilbereich 8 um eine potentielle Parklücke für das Kraftfahrzeug 1 handeln kann. Es kann jedoch anhand der ersten Sensordaten nicht klassifiziert werden, ob es sich um eine gültige, für das Kraftfahrzeug 1 beparkbare Parklücke 3 oder um eine ungültige, für das Kraftfahrzeug 1 nicht beparkbare Parklücke 12 handelt, wie sie beispielsweise in Fig. 2 gezeigt ist. Bei gültigen Parklücke 3 gemäß Fig. 1 handelt es sich um eine freie Subarea 8 are detected in the surrounding area 6. This parking space-like subarea 8 may be, for example, an unoccupied area in the surrounding area 8, which is bounded by objects 9. The delimiting objects 9 are formed here as other vehicles 10, which are parked in parking spaces 1 1 next to the parking space-like portion 8. This area between the two delimiting objects 9 can be measured by recognizing at least one geometric dimension of the area, in particular a width B and a depth T, based on the first sensor data. Based on the width B and the depth T, it can be recognized that the partial area 8 can be a potential parking space for the motor vehicle 1. However, based on the first sensor data, it can not be classified whether it is a valid parking space 3 that can be parked for the motor vehicle 1 or an invalid parking space 12 that can not be parked for the motor vehicle 1, as shown for example in FIG. 2. In the case of a valid parking space 3 according to FIG. 1, this is a free one
Parklücke, in welcher das Kraftfahrzeug 1 verkehrsregelkonform abgestellt werden kann. Bei der ungültigen Parklücke 12 gemäß Fig. 2 handelt es sich hier um einen Parking space in which the motor vehicle 1 can be parked in accordance with traffic regulations. In the case of the invalid parking space 12 according to FIG. 2, this is a case
Behindertenparkplatz, welcher durch eine Markierung 13 gekennzeichnet ist und auf welchem das Kraftfahrzeug 1 nicht abgestellt werden darf. Disabled parking, which is marked by a marker 13 and on which the motor vehicle 1 may not be parked.
Um den parklückenartigen Teilbereich 8 klassifizieren zu können, weist das Kraftfahrzeug 1 zumindest eine zweite Sensoreinrichtung 14 auf. Die zweite Sensoreinrichtung 14 erfasst zweite Sensordaten aus dem Umgebungsbereich 6. Die zweite Sensoreinrichtung 14 ist im vorliegenden Fall als eine Kamera ausgebildet und erfasst Kamerabilder und/oder Videosequenzen als die zweiten Sensordaten. Sobald nun durch die In order to be able to classify the parking space-like subarea 8, the motor vehicle 1 has at least one second sensor device 14. The second sensor device 14 detects second sensor data from the surrounding area 6. In the present case, the second sensor device 14 is designed as a camera and records camera images and / or video sequences as the second sensor data. As soon as through the
Auswerteeinrichtung 7 anhand der ersten Sensordaten der parklückenartige Teilbereich 8 erkannt bzw. identifiziert wurde, fordert die Auswerteeinrichtung 7 von der zweiten Sensoreinrichtung 14 zweite Sensordaten aus dem parklückenartigen Teilbereich 8 an. Dabei werden insbesondere nur die zweiten Sensordaten derjenigen zweiten Evaluation 7 was detected or identified based on the first sensor data of the park space-like sub-area 8, the evaluation device 7 requests from the second sensor device 14 second sensor data from the park-gap-like sub-area 8. In particular, only the second sensor data of those second
Sensoreinrichtung 14 angefordert, deren Erfassungsbereich zumindest bereichsweise mit einem Erfassungsbereich 15 der ersten Sensoreinrichtung 5 überlappt. Im vorliegenden Fall bedeutet dies, dass nur die Kamerabilder derjenigen Kamera angefordert werden, welche den parklückenartigen Teilbereich 8 zeigen, also hier die Bilder der Kamera an einem rechtsseitigen Außenspiegel des Kraftfahrzeugs 1 . Außerdem werden insbesondere nur diejenigen zweiten Sensordaten angefordert, welche in etwa zeitgleich mit denjenigen ersten Sensordaten erfasst wurden, anhand welchen der parklückenartige Teilbereich 8 erkannt wurde. Beispielsweise kann von der Kamera dann ein Bild bzw. Schnappschuss des parklückenartigen Teilbereiches 8 erfasst werden, sobald der parklückenartige Teilbereich 8 anhand der ersten Sensordaten erfasst wurde. Die Erfassung des parklückenartigen Teilbereiches 8 ist somit ein Auslösesignal bzw. Trigger für die zumindest eine zweite Sensoreinrichtung 14. Sensor device 14 requested, the detection range overlaps at least partially with a detection range 15 of the first sensor device 5. In the present case, this means that only the camera images of that camera are requested, which show the parking space-like sub-area 8, so here are the images of the camera on a right-side exterior mirror of the motor vehicle first In addition, will In particular, only those second sensor data requested, which were detected approximately at the same time as those first sensor data, based on which the parking space-like sub-area 8 was detected. For example, the camera can then capture an image or snapshot of the parking space-like partial area 8 as soon as the parking space-like partial area 8 has been detected on the basis of the first sensor data. The detection of the parking space-like subarea 8 is thus a trigger signal or trigger for the at least one second sensor device 14.
Zumindest eine anhand der ersten Sensordaten bestimmte Information über den At least one of the first sensor data information about the
Teilbereich 8, beispielsweise die Geometrie T, B des parklückenartigen Teilbereiches 8, sowie die unverarbeiteten zweiten Sensordaten werden von der Auswerteeinrichtung 7 des Parkassistenzsystem 2 an eine zentrale, fahrzeugexterne Rechnereinrichtung 16 übertragen. Die fahrzeugexterne Rechnereinrichtung 16 kann beispielsweise über eine drahtlose Netzwerkverbindung mit der Auswerteeinrichtung 7 des Kraftfahrzeugs 1 kommunizieren. Das Kraftfahrzeug 1 , insbesondere die Auswerteeinrichtung 7 des Parkassistenzsystems 2, sowie die zentrale Rechnereinrichtung 16 bilden somit ein vernetztes System S bzw. ein neuronales Netzwerk. Die Rechnereinrichtung 16 ist dazu ausgelegt, die zweiten Sensordaten zu analysieren und den parkplatzartigen Teilbereich 8 als gültige Parklücke 3 oder als ungültige Parklücke 12 zu klassifizieren. Beispielsweise kann die Rechnereinrichtung 16 die Markierung 13 in Form von einem auf den Subarea 8, for example the geometry T, B of the parking space-like subarea 8, and the unprocessed second sensor data are transmitted from the evaluation device 7 of the parking assistance system 2 to a central, vehicle-external computing device 16. The vehicle-external computing device 16 can communicate with the evaluation device 7 of the motor vehicle 1, for example, via a wireless network connection. The motor vehicle 1, in particular the evaluation device 7 of the parking assistance system 2, and the central computer device 16 thus form a networked system S or a neural network. The computer device 16 is designed to analyze the second sensor data and to classify the parking space-like subarea 8 as a valid parking space 3 or as an invalid parking space 12. For example, the computing device 16, the marker 13 in the form of a on the
Behindertenparkplatz hinweisenden Piktogramm erkennen und somit erkennen, dass es sich um einen ungültigen Parkplatz 12 handelt. Dadurch kann die Rechnereinrichtung 16 den parklückenartigen Teilbereich 8 als ungültig klassifizieren und dies der Detect disabled parking space pictogram and thus recognize that it is an invalid parking 12. As a result, the computer device 16 can classify the parking space-like subarea 8 as invalid and this the
Auswerteeinrichtung 7 des Kraftfahrzeugs 1 zurückmelden. Report back evaluation 7 of the motor vehicle 1.
Die zentrale Rechnereinrichtung 16 kann beispielsweise, wie in Fig. 3 gezeigt, als ein Cloud-Computing-System 17 ausgebildet sein. Dabei kann nicht nur die For example, as shown in FIG. 3, the central computing device 16 may be configured as a cloud computing system 17. It can not only the
Auswerteeinrichtung 7 des Kraftfahrzeugs 1 mit der zentralen Rechnereinrichtung 16 kommunizieren, sondern beispielsweise auch Auswerteeinrichtungen 18 von Evaluation device 7 of the motor vehicle 1 communicate with the central computer device 16, but also, for example, evaluation devices 18 of
Parkassistenzsystemen 19 anderer Fahrzeugel O. Das Cloud-Computing-System 17 kann beispielsweise eine Umgebungskarte bereitstellen, in welcher klassifizierte Parking assistance systems 19 of other vehicle O. The cloud computing system 17, for example, provide an environment map, in which classified
parklückenartige Teilbereich 8 an ihren globalen Positionen hinterlegt sind und welche von den Auswerteeinrichtungen 7, 18 abgerufen werden kann. Gleichzeitig kann die Umgebungskarte kontinuierlich aktualisiert werden, indem die Auswerteeinrichtungen 7, 18 Informationen, beispielsweise erste und zweite Sensordaten, an das Cloud- Computing-System 17 übermitteln. Das Cloud-Computing-System 17 kann anhand der übermittelten Informationen die Klassifizierung der parklückenartigen Teilbereiche 8 durchführen und diese Klassifizierung an die Auswerteeinrichtungen 7, 18 zurückmelden, um den Fahrern der Kraftfahrzeuge 1 , 10 gültige Parkplätze 3 anbieten zu können. park-gap-like subarea 8 are deposited at their global positions and which of the evaluation devices 7, 18 can be retrieved. At the same time, the environment map can be continuously updated by the evaluation devices 7, 18 transmit information, for example, first and second sensor data to the cloud computing system 17. The cloud computing system 17 can use the information transmitted to classify the parking space-like subregions 8 perform and report this classification back to the evaluation 7, 18 in order to offer the drivers of motor vehicles 1, 10 valid parking lots 3 can.
Außerdem kann das Cloud-Computing-System 17 dazu ausgelegt sein, weitere, insbesondere geometrische Informationen, über gültige Parklücken 3 in der In addition, the cloud computing system 17 may be adapted to further, in particular geometric, information about valid parking spaces 3 in the
Umgebungskarte zu hinterlegen. Solche weiteren Informationen können beispielsweise die geometrischen Abmessungen B, T sowie eine Höhe eines Bordsteines in der Map of the environment. Such further information may, for example, the geometric dimensions B, T and a height of a curb in the
Parklücke 3 sein. Anhand der durch die Umgebungskarte bereitgestellten Informationen kann der Fahrer eines Kraftfahrzeugs 1 , 10 und/oder die Auswerteeinrichtung 7, 18 entscheiden, ob die gültige Parklücke 3 für das konkrete Kraftfahrzeug 1 , 10 geeignet ist. Parking space 3 be. Based on the information provided by the environment map, the driver of a motor vehicle 1, 10 and / or the evaluation device 7, 18 decide whether the valid parking space 3 for the specific motor vehicle 1, 10 is suitable.

Claims

Patentansprüche claims
Verfahren zum Erkennen von Parklücken (3, 12) in einem Umgebungsbereich (6) eines Kraftfahrzeugs (1 ), wobei durch zumindest eine erste fahrzeugseitige Sensoreinrichtung (5) aus dem Umgebungsbereich (6) erfasste erste Sensordaten von einer fahrzeugseitigen Auswerteeinrichtung (7) empfangen werden und ein parklückenartiger Teilbereich (8) des Umgebungsbereiches (6) in den ersten Sensordaten erkannt wird, Method for detecting parking spaces (3, 12) in an environmental area (6) of a motor vehicle (1), wherein first sensor data detected by at least one first vehicle-side sensor device (5) from the surrounding area (6) is received by a vehicle-side evaluation device (7) and a parking space-like subarea (8) of the surrounding area (6) is detected in the first sensor data,
dadurch gekennzeichnet, dass characterized in that
- durch zumindest eine zweite fahrzeugseitige Sensoreinrichtung (14) aus dem parklückenartigen Teilbereich (8) erfasste zweite Sensordaten von der  - Second sensor data detected by at least one second vehicle-side sensor device (14) from the parking space-like partial region (8)
Auswerteeinrichtung (7) angefordert werden, sobald der parklückenartige Evaluation device (7) to be requested as soon as the parking space-like
Teilbereich (8) in den ersten Sensordaten erkannt wird; und Part area (8) is detected in the first sensor data; and
- die angeforderten zweiten Sensordaten sowie zumindest eine anhand der ersten Sensordaten bestimmte Information über den parklückenartigen Teilbereich (8) an eine zentrale, fahrzeugexterne Rechnereinheit (16) zur Klassifizierung des parklückenartigen Teilbereiches (8) als eine gültige, beparkbare Parklücke (3) oder eine ungültige, nicht beparkbare Parklücke (12) übermittelt werden.  - The requested second sensor data and at least one determined on the basis of the first sensor data information about the parking space-like sub-area (8) to a central, vehicle-external computer unit (16) for classifying the parking space-like sub-area (8) as a valid, parkable parking space (3) or an invalid , non-parkable parking spaces (12) are transmitted.
Verfahren nach Anspruch 1 , Method according to claim 1,
dadurch gekennzeichnet, dass characterized in that
die zweiten Sensordaten sowie die zumindest eine Information über den parklückenartigen Teilbereich (8) an eine als Cloud-Computing-System (17) ausgestaltete Rechnereinheit (16) übermittelt werden. the second sensor data and the at least one information about the parking space-like subarea (8) are transmitted to a computer unit (16) configured as a cloud computing system (17).
Verfahren nach einem der vorhergehenden Ansprüche, Method according to one of the preceding claims,
dadurch gekennzeichnet, dass characterized in that
als die ersten Sensordaten Abstandssensordaten zumindest einer fahrzeugseitigen Abstandssensoreinrichtung, insbesondere Ultraschallsensordaten und/oder Radarsensordaten und/oder Laserscannerdaten, von der fahrzeugseitigen Auswerteeinrichtung (7) empfangen werden. as the first sensor data distance sensor data of at least one vehicle-side distance sensor device, in particular ultrasonic sensor data and / or radar sensor data and / or laser scanner data, from the vehicle side Evaluation device (7) are received.
4. Verfahren nach einem der vorhergehenden Ansprüche, 4. The method according to any one of the preceding claims,
dadurch gekennzeichnet, dass  characterized in that
als die zweiten Sensordaten Kamerabilder zumindest einer fahrzeugseitigen Kamera von der fahrzeugseitigen Auswerteeinrichtung (7) empfangen werden.  camera images of at least one vehicle-side camera are received by the vehicle-side evaluation device (7) as the second sensor data.
5. Verfahren nach einem der vorhergehenden Ansprüche, 5. The method according to any one of the preceding claims,
dadurch gekennzeichnet, dass  characterized in that
sobald der parklückenartige Teilbereich (8) anhand der ersten Sensordaten erfasst wurde, von der fahrzeugseitigen Auswerteeinrichtung (7) ein Auslösesignal für die zumindest eine zweite Sensoreinrichtung (14) generiert wird, durch welches die zweite Sensoreinrichtung (14) zum Erfassen der zweiten Sensordaten aus dem Umgebungsbereich (6) aufweisend den parklückenartigen Teilbereich (8) angesteuert wird.  as soon as the parking space-like subarea (8) has been detected on the basis of the first sensor data, the vehicle-side evaluation device (7) generates a triggering signal for the at least one second sensor device (14), by which the second sensor device (14) detects the second sensor data from the second sensor device Surrounding area (6) comprising the parking space-like portion (8) is driven.
6. Verfahren nach einem der vorhergehenden Ansprüche, 6. The method according to any one of the preceding claims,
dadurch gekennzeichnet, dass  characterized in that
die zweiten Sensordaten derjenigen zweiten Sensoreinrichtung (14) angefordert werden, deren Erfassungsbereich zumindest bereichsweise mit einem  the second sensor data of those second sensor device (14) are requested, the detection range at least partially with a
Erfassungsbereich (15) der ersten Sensoreinrichtung (5) überlappt.  Detection area (15) of the first sensor device (5) overlaps.
7. Verfahren nach einem der vorhergehenden Ansprüche, 7. The method according to any one of the preceding claims,
dadurch gekennzeichnet, dass  characterized in that
zumindest eine, anhand der ersten Sensordaten bestimmte geometrische  at least one, determined based on the first sensor data geometric
Abmessung (B, T) des parklückenartigen Teilbereiches (8) als die zumindest eine Information über den parklückenartigen Teilbereich (8) an die zentrale  Dimension (B, T) of the parking space-like subarea (8) as the at least one information about the parking space-like portion (8) to the central
Rechnereinheit (16) übertragen wird.  Computer unit (16) is transmitted.
8. Verfahren nach einem der vorhergehenden Ansprüche, 8. The method according to any one of the preceding claims,
dadurch gekennzeichnet, dass  characterized in that
die zweiten Sensordaten durch die zentrale Rechnereinheit (16) analysiert werden, der parklückenartige Teilbereich (8) klassifiziert wird und die Klassifizierung an die fahrzeugseitige Auswerteeinrichtung (7) zurückgemeldet wird. the second sensor data are analyzed by the central computer unit (16), the parking space-like partial area (8) is classified and the classification is reported back to the vehicle-side evaluation device (7).
9. Verfahren nach Anspruch 8, 9. The method according to claim 8,
dadurch gekennzeichnet, dass  characterized in that
die zweiten Sensordaten nach vorbestimmten, auf eine ungültige Parklücke (12) hinweisenden Markierungen (13) an dem parklückenartigen Teilbereich (8) durchsucht werden und der parklückenartige Teilbereich (8) bei Vorliegen zumindest einer der Markierungen (13) als ungültige Parklücke (12) klassifiziert wird.  the second sensor data are searched for predetermined markings (13) pointing to an invalid parking space (12) on the parking space-like subarea (8) and the parking space-like subarea (8) is classified as an invalid parking space (12) if at least one of the markings (13) is present becomes.
10. Verfahren nach Anspruch 8 oder 9, 10. The method according to claim 8 or 9,
dadurch gekennzeichnet, dass  characterized in that
durch die zentrale Rechnereinheit (16) eine Umgebungskarte mit den klassifizierten parklückenartigen Teilbereichen (8) erstellt wird, welche für eine Vielzahl von Auswerteeinrichtungen (7, 18) zum Abrufen bereitgestellt wird.  by the central computer unit (16) an environment map with the classified parking space-like sub-areas (8) is created, which is provided for retrieving a plurality of evaluation devices (7, 18).
1 1 . Verfahren nach einem der Ansprüche 8 bis 10, 1 1. Method according to one of claims 8 to 10,
dadurch gekennzeichnet, dass  characterized in that
durch die Rechnereinheit (7) anhand der ersten und/oder zweiten Sensordaten geometrische Informationen über die als gültig klassifizierte Parklücke (3) bestimmt und in die Umgebungskarte eingetragen werden.  geometric information about the parking space classified as valid (3) determined by the computer unit (7) on the basis of the first and / or second sensor data and entered into the local map.
12. Auswerteeinrichtung (7) für ein Parkassistenzsystem (2) eines Kraftfahrzeugs (1 ), welche dazu ausgelegt ist, ein Verfahren nach einem der Ansprüche 1 bis 7 durchzuführen. 12. evaluation device (7) for a parking assistance system (2) of a motor vehicle (1), which is adapted to perform a method according to one of claims 1 to 7.
13. Parkassistenzsystem (2) für ein Kraftfahrzeug (1 ) zum Erfassen von Parklücken (3, 12) in einem Umgebungsbereich (6) des Kraftfahrzeugs (1 ) aufweisend zumindest eine erste Sensoreinrichtung (5) zum Erfassen von ersten Sensordaten aus dem Umgebungsbereich (6), zumindest eine zu der zumindest einen ersten 13. Parking assistance system (2) for a motor vehicle (1) for detecting parking spaces (3, 12) in an environmental area (6) of the motor vehicle (1) comprising at least a first sensor device (5) for detecting first sensor data from the surrounding area (6 ), at least one to the at least one first
Sensoreinrichtung (5) unterschiedliche zweite Sensoreinrichtung (14) zum Erfassen von zweiten Sensordaten aus dem Umgebungsbereich (6) und eine  Sensor device (5) different second sensor means (14) for detecting second sensor data from the surrounding area (6) and a
Auswerteeinrichtung (7) nach Anspruch 12.  Evaluation device (7) according to claim 12.
14. Kraftfahrzeug (1 ) mit einem Parkassistenzsystem (2) nach Anspruch 13. 14. Motor vehicle (1) with a parking assistance system (2) according to claim 13.
15. Vernetztes System (S) aufweisend zumindest eine Auswerteeinrichtung (7) nach Anspruch 12 sowie eine fahrzeugexterne, zentrale Rechnereinheit (16), welche dazu ausgelegt ist, ein Verfahren nach einem der Ansprüche 8 bis 1 1 durchzuführen. 15. Networked system (S) comprising at least one evaluation device (7) according to claim 12 and a vehicle-external, central computer unit (16) which is adapted to perform a method according to any one of claims 8 to 1 1.
PCT/EP2018/058973 2017-04-10 2018-04-09 Method for detecting parking spaces in an environment region of a motor vehicle, evaluating apparatus, parking assistance system, motor vehicle and networked system WO2018189076A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017107700.6 2017-04-10
DE102017107700.6A DE102017107700A1 (en) 2017-04-10 2017-04-10 Method for detecting parking spaces in a surrounding area of a motor vehicle, evaluation device, parking assistance system, motor vehicle and networked system

Publications (1)

Publication Number Publication Date
WO2018189076A1 true WO2018189076A1 (en) 2018-10-18

Family

ID=61972106

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2018/058973 WO2018189076A1 (en) 2017-04-10 2018-04-09 Method for detecting parking spaces in an environment region of a motor vehicle, evaluating apparatus, parking assistance system, motor vehicle and networked system

Country Status (2)

Country Link
DE (1) DE102017107700A1 (en)
WO (1) WO2018189076A1 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112644479A (en) * 2021-01-07 2021-04-13 广州小鹏自动驾驶科技有限公司 Parking control method and device
CN113129640A (en) * 2019-12-31 2021-07-16 北京四维图新科技股份有限公司 Automatic parking method and equipment
US11348343B1 (en) 2020-12-18 2022-05-31 Ford Global Technologies, Llc Vehicle parking navigation
CN115979270A (en) * 2022-12-27 2023-04-18 国广顺能(上海)能源科技有限公司 Navigation control system based on automatic binding of navigation point and parking lot number in garage scene

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020200232A1 (en) * 2020-01-10 2021-07-15 Continental Automotive Gmbh Method for the automated provision of a parking space map and method for displaying an available parking space for a motor vehicle
DE102020206152A1 (en) 2020-05-15 2021-11-18 Robert Bosch Gesellschaft mit beschränkter Haftung Device for determining whether a parking space in a lateral front area and / or rear area of a vehicle is suitable for the vehicle, a driver assistance system with such a device and a vehicle with such a driver assistance system
DE102020129520A1 (en) 2020-11-10 2022-05-12 Valeo Schalter Und Sensoren Gmbh METHOD OF OPERATING A PARKING ASSISTANCE SYSTEM, COMPUTER PROGRAM PRODUCT, PARKING ASSISTANCE SYSTEM, VEHICLE AND SYSTEM
CN112820141B (en) * 2021-01-14 2022-04-19 浙江吉利控股集团有限公司 Parking space detection method and system
DE102022208059B3 (en) 2022-08-03 2024-02-08 Continental Autonomous Mobility Germany GmbH Method for determining environmental information describing a parking space using a convolutional neural network
FR3142030A1 (en) * 2022-11-10 2024-05-17 Psa Automobiles Sa Method and device for validating the movement of a vehicle by equipment of a mobile communication network infrastructure

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8432297B2 (en) * 2010-07-31 2013-04-30 Eric Sonnabend Parking information collection system and method
DE102012216994A1 (en) 2012-09-21 2014-03-27 Robert Bosch Gmbh Method for providing free-parking assistance for vehicle, involves receiving information about free-parking spaces in parking card by cloud computing system and providing suitable free-parking for vehicle based on vehicle dimensions
DE102014009627A1 (en) * 2014-06-27 2014-11-27 Daimler Ag Method for reporting a free parking space for a vehicle
DE102014217900A1 (en) * 2014-09-08 2016-03-10 Bayerische Motoren Werke Aktiengesellschaft Apparatus and method for collecting information about availability of free parking
DE102015206822A1 (en) * 2015-04-15 2016-10-20 Robert Bosch Gmbh Driver assistance method and driver assistance system to assist a driver in performing parking operations
DE102015211514A1 (en) * 2015-06-23 2016-12-29 Robert Bosch Gmbh Method and device for driver assistance

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8432297B2 (en) * 2010-07-31 2013-04-30 Eric Sonnabend Parking information collection system and method
DE102012216994A1 (en) 2012-09-21 2014-03-27 Robert Bosch Gmbh Method for providing free-parking assistance for vehicle, involves receiving information about free-parking spaces in parking card by cloud computing system and providing suitable free-parking for vehicle based on vehicle dimensions
DE102014009627A1 (en) * 2014-06-27 2014-11-27 Daimler Ag Method for reporting a free parking space for a vehicle
DE102014217900A1 (en) * 2014-09-08 2016-03-10 Bayerische Motoren Werke Aktiengesellschaft Apparatus and method for collecting information about availability of free parking
DE102015206822A1 (en) * 2015-04-15 2016-10-20 Robert Bosch Gmbh Driver assistance method and driver assistance system to assist a driver in performing parking operations
DE102015211514A1 (en) * 2015-06-23 2016-12-29 Robert Bosch Gmbh Method and device for driver assistance

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113129640A (en) * 2019-12-31 2021-07-16 北京四维图新科技股份有限公司 Automatic parking method and equipment
US11348343B1 (en) 2020-12-18 2022-05-31 Ford Global Technologies, Llc Vehicle parking navigation
CN112644479A (en) * 2021-01-07 2021-04-13 广州小鹏自动驾驶科技有限公司 Parking control method and device
CN115979270A (en) * 2022-12-27 2023-04-18 国广顺能(上海)能源科技有限公司 Navigation control system based on automatic binding of navigation point and parking lot number in garage scene

Also Published As

Publication number Publication date
DE102017107700A1 (en) 2018-10-11

Similar Documents

Publication Publication Date Title
WO2018189076A1 (en) Method for detecting parking spaces in an environment region of a motor vehicle, evaluating apparatus, parking assistance system, motor vehicle and networked system
DE102015207804B4 (en) Method for detecting parking areas and / or open spaces
DE102017130488A1 (en) A method for classifying parking spaces in a surrounding area of a vehicle with a neural network
EP2954506A1 (en) Method for displaying parking spaces
DE102014223363A1 (en) Method and device for localizing a motor vehicle in a fixed reference card
DE102016215931B4 (en) System and method for retrievably providing and updating classification data on parking spaces
DE102014217900A1 (en) Apparatus and method for collecting information about availability of free parking
DE102015203016A1 (en) Method and device for optical self-localization of a motor vehicle in an environment
DE102012021403A1 (en) Method for identifying a vehicle detected by a sensor device
DE102016209810A1 (en) Method for detecting at least one parking space for a vehicle
WO2018104191A1 (en) Automated open space identification by means of difference analysis for vehicles
DE102017210112A1 (en) Method and system for performing a calibration of a sensor
DE102009031319A1 (en) Method and system for determining a vehicle class
DE102015216352A1 (en) Method for detecting a possible collision of a vehicle with a pedestrian on the basis of high-resolution recordings
DE102017212513A1 (en) Method and system for detecting a free area within a parking lot
DE102018201111B4 (en) Method for monitoring at least one parking space for availability and system for performing the method
DE102017209370B4 (en) Method for determining overtaking information
EP3688659A1 (en) Method for automatically identifying parking areas and/or non-parking areas
DE102018210852A1 (en) Procedure for the determination of illegal driving behavior by a vehicle
DE102019005480A1 (en) Procedure for detecting and evaluating a condition of lane markings
DE102016222215A1 (en) Motor vehicle with a driver assistance system, which has a camera
DE102020215298A1 (en) Method and system for driver assistance, wherein free parking spaces are detected in a vehicle environment
DE102020119856A1 (en) System and method for providing a parking space suggestion for a truck
WO2021047800A1 (en) Method and assistance system for using a digital map in a vehicle
DE102020206144A1 (en) Parking assistant and method for adaptive parking of a vehicle to optimize a comprehensive sensor detection area of a traffic environment

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 18717559

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 18717559

Country of ref document: EP

Kind code of ref document: A1