WO2024013048A1 - Verfahren und fahrunterstützungssystem zum sequentiellen verarbeiten von sequentiell bereitgestellten sätzen von sensorinformationen - Google Patents

Verfahren und fahrunterstützungssystem zum sequentiellen verarbeiten von sequentiell bereitgestellten sätzen von sensorinformationen Download PDF

Info

Publication number
WO2024013048A1
WO2024013048A1 PCT/EP2023/068959 EP2023068959W WO2024013048A1 WO 2024013048 A1 WO2024013048 A1 WO 2024013048A1 EP 2023068959 W EP2023068959 W EP 2023068959W WO 2024013048 A1 WO2024013048 A1 WO 2024013048A1
Authority
WO
WIPO (PCT)
Prior art keywords
sensor information
valid
current set
sets
previous
Prior art date
Application number
PCT/EP2023/068959
Other languages
English (en)
French (fr)
Inventor
Maxime Courtois
Anshuman Singh
Original Assignee
Valeo Schalter Und Sensoren Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Schalter Und Sensoren Gmbh filed Critical Valeo Schalter Und Sensoren Gmbh
Publication of WO2024013048A1 publication Critical patent/WO2024013048A1/de

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/93Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/86Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/52004Means for monitoring or calibrating
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/52Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S15/00
    • G01S7/523Details of pulse systems
    • G01S7/526Receivers
    • G01S7/53Means for transforming coordinates or for evaluating data, e.g. using computers

Definitions

  • the present invention relates to a method for sequentially processing sequentially provided sets of sensor information, in particular sensor information from an ultrasonic sensor of a driving support system for a vehicle for detecting an environment of the vehicle, with a control unit, in particular for providing a driving support function for the vehicle.
  • the present invention also relates to a driving support system for a vehicle with an ultrasonic sensor, which is designed to sequentially provide sets of sensor information, and a control unit, which is designed to sequentially process sets of sensor information, in particular for detecting an environment of the vehicle, the driving support system being carried out is to carry out the above procedure.
  • the sensor information is provided as a sequence of sets of sensor information, i.e. the sensor information is provided discontinuously and the sets of sensor information are usually completed.
  • the sensor information obtained is therefore recorded and transmitted in individual sentences, for example to a control unit. Due to data processing and/or data transmission, there may well be overlaps in the acquisition and transmission of sensor information.
  • the sets of sensor information can also be provided as a quasi-continuous data stream and/or without interruption, although this does not contradict the provision of the sensor information as a sequence of completed sets. Such completed sets of sensor information are provided by the ultrasonic sensors, for example as results of individual ultrasonic measurements.
  • the sets of sensor information can be replaced by information relating to individual, in Ultrasonic echoes contained in a received ultrasonic echo signal are formed. Alternatively or additionally, the sets of sensor information can be formed by the received ultrasonic echo signal itself, for example in the manner of an envelope curve.
  • the driving support systems can each include the required ultrasonic sensors themselves, or the sensor information can be provided together for several support functions.
  • the ultrasonic sensors can therefore be shared by multiple driving support systems without necessarily being part of the corresponding driving support system.
  • blind spot monitoring In order to detect potential obstacles in the blind spot of the vehicle and warn the driver of the vehicle or to generate and further process a corresponding warning, for example as part of autonomous driving functions.
  • the English term “blind spot detection” (BSD) is also used for blind spot monitoring or blind spot warning.
  • BSD blind spot detection
  • Currently, blind spot monitoring is mostly based on sensor information provided exclusively by ultrasonic sensors.
  • the ultrasonic sensors are sophisticated and also available at low cost, but they have a disadvantage because they are physically dependent on the current environmental conditions due to the speed of propagation of sound in the air, which is around 340m/s under normal conditions, together with a monitoring range of typically around five meters can only provide a few sets of sensor information per second.
  • a maximum of around 30 sets of sensor information can be obtained per second.
  • ultrasonic sensors often have an update rate of around 25 Hz, meaning a set of sensor information is generated every 40 ms.
  • a blind spot warning can only be updated with a corresponding delay.
  • a short reaction time is often crucial because the driver needs to be warned of an obstacle in the blind spot as quickly as possible.
  • blind spot monitoring is primarily aimed at warning of obstacles at higher or lower speeds. With a relative speed between the obstacle and the vehicle of, for example, 30 km/h, the distance changes by approximately 0.333 m at an update rate of 25 Hz, ie a set of sensor information is provided every 40 ms.
  • the document DE 10 2010 033 207 A1 relates to a method for monitoring the environment for a vehicle, wherein a transmission signal is sent out by at least one ultrasonic sensor at predetermined measurement times and at least one echo signal is received in response to the transmission signal, with a corresponding transit time being evaluated for each received echo signal distance information to a possible object is determined.
  • the distance information determined at a measurement time becomes a distance pattern of the received echo signals for the corresponding one measurement time determined.
  • parameters of distance patterns are compared with one another, which are recorded at at least two consecutive measurement times.
  • the invention is therefore based on the object of specifying a method for sequentially processing sequentially provided sets of sensor information and a driving support system for a vehicle for carrying out the method, which provides improved sequential processing of sequentially provided sets of sensor information enable, and which in particular at least reduce or even prevent interruptions and processing errors based on them in the sequential processing of sequentially provided sentences.
  • a method for sequentially processing sequentially provided sets of sensor information in particular sensor information from an ultrasonic sensor of a driving support system for a vehicle for detecting an environment of the vehicle, with a control unit, in particular for providing a driving support function for the vehicle, is specified, comprising the steps Determining an availability of a current set of valid sensor information, and if availability of a current set of valid sensor information is negative, providing a current set of valid sensor information based on at least one previous set of sensor information.
  • a driving support system for a vehicle is also specified with an ultrasonic sensor, which is designed to sequentially provide sets of sensor information, and a control unit, which is designed to sequentially process sets of sensor information, in particular for detecting an environment of the vehicle, wherein the driving support system is carried out is to carry out the above procedure.
  • the basic idea of the present invention is therefore to detect possible sources of error for the sequential processing of sequentially provided sets of sensor information in advance by determining the availability of a current set of valid sensor information, and to overcome these sources of error if necessary.
  • a current set of valid sensor information is provided based on at least one previous set of sensor information. The subsequent processing can therefore be carried out continuously based on the currently provided set of valid sensor information.
  • the invention relates to general methods for sequentially processing sequentially provided sets of sensor information.
  • the sensor information is provided as a sequence of sets of sensor information, i.e. the sensor information is provided discontinuously and the sets of sensor information are usually completed.
  • the sets of sensor information can be provided and processed at regular intervals or in any time sequence. It is only important that the acquisition and transmission of the sensor information obtained as well as the processing of the sensor information in individual sentences takes place sequentially. This concerns processing of current sets of sensor information in immediate operation, but not downstream processing in the sense of, for example, usual “post processing”.
  • the sensor information obtained is therefore recorded and transmitted in individual sentences, for example to the control unit. Due to data processing and/or data transmission, there may well be overlaps in the acquisition and transmission of sensor information.
  • the sets of sensor information can also be provided as a quasi-continuous data stream and/or without interruption, although this does not contradict the provision of the sensor information as a sequence of completed sets. Such completed sets of sensor information are provided, for example, by ultrasonic sensors as results of individual ultrasonic measurements.
  • the sets of sensor information can be formed by information relating to individual ultrasonic echoes contained in an ultrasonic echo signal received by the ultrasonic sensor. Alternatively or additionally, the sets of sensor information can each be determined by the received ultrasonic echo signal themselves are formed, with a set of sensor information being, for example, an envelope of the received ultrasonic echo signal.
  • the sensor information is typically used in a driving support system to record the surroundings of the vehicle.
  • the environment can be sensed with one or more ultrasonic sensors, each providing sets of sensor information.
  • the ultrasonic sensor is connected to the control unit via a data connection, which is designed in particular as a data bus, for example according to one of the CAN, LIN, LON or Flexray standards, via which the sets of sensor information are transmitted.
  • the control unit is typically referred to as an ECU (electronic control unit).
  • the control unit accordingly receives the sets of sensor information from the ultrasonic sensor via the data connection.
  • the sensor information from each ultrasonic sensor can be processed individually, or the sensor information from multiple ultrasonic sensors can be processed together. This may depend on the type of support function.
  • the control unit receives the sets of sensor information and performs processing. In blind spot monitoring, the sets of sensor information from a correspondingly positioned ultrasonic sensor, which is arranged in a position to the side and rear of the vehicle, are typically processed for each of these ultrasonic sensors alone. In principle, however, it is possible that additional sensor information from adjacently arranged ultrasonic sensors is processed, or that sensor information from other types of environmental detection sensors such as LiDAR-based environmental detection sensors, optical cameras and / or radar sensors are additionally processed.
  • the method is particularly relevant with respect to ultrasonic sensors that have a cycle time for providing a set of sensor information that is long in relation to the respective driving assistance function.
  • the method is also particularly relevant with regard to driving support functions that require a short reaction time and continuous processing of the sets of sensor information, as is the case, for example, with high differential speeds between the vehicle and possible obstacles or other road users. Both apply in particular when the provision of a set of Sensor information cannot be accelerated in any other way, but depends on physical limits, as is the case with ultrasonic sensors, and/or if the processing of the sets of sensor information cannot be improved in any other way or can only be improved with great effort.
  • the driving support system can thus provide various driving support functions for the vehicle. Particularly relevant in this context are driving support functions such as those for blind spot monitoring or blind spot warning or others that are based on the use of ultrasonic sensors and where high differential speeds can occur between the vehicle and possible obstacles or other road users.
  • Determining availability of a current set of valid sensor information can be done in different ways, as detailed below.
  • the availability of a current set of valid sensor information can be determined proactively by monitoring the function of the ultrasonic sensor and/or the control unit and, in particular, by monitoring low level functions in relation to the ultrasonic sensor. If the ultrasonic sensor is unavailable to provide a current set of valid sensor information, this can be captured and displayed, thereby determining the negative availability.
  • the availability of a current set of valid sensor information can be determined based on a check of a received set of sensor information by checking the corresponding current set of sensor information for its information content, i.e. whether the corresponding current set of sensor information is valid. If the information content indicates negative availability, the corresponding current set of sensor information may be discarded and replaced with a set of valid sensor information based on at least one previous set of sensor information.
  • a current set of valid sensor information is negatively available, a current set of valid sensor information is provided based on at least one previous set of sensor information. Also for providing the current set of valid sensor information based on at least one There are various options for the previous set of sensor information, as detailed below. It is important that a current set of valid sensor information is available for processing, that is, a set of sensor information is available and the sensor information is valid. Then the sequential processing does not have to be interrupted and can continue without any problems.
  • determining the availability of a current set of valid sensor information includes determining the availability of a current set of valid sensor information based on task planning of an operating system.
  • One reason for negative availability of a current set of valid sensor information may be due to the provision of processing.
  • the sensor information can be delayed by an OS scheduler if, for example, different programs or tasks are processed in cycles of different lengths. For example, if a measurement cycle of the ultrasonic sensor takes 42ms and a cycle for signal processing in the control unit takes 40ms, the deadline for sequential processing will not be met every ⁇ 21 cycles. As a result, a current set of sensor information is not available every ⁇ 21 cycles, which delays the processing of the sensor information.
  • Such missing sets of sensor information can be detected based on the task scheduling of the operating system and, for example, displayed in advance, so that a current set of valid sensor information based on at least one previous set of sensor information can be provided in a timely manner.
  • determining an availability of a current set of valid sensor information includes determining an availability of the ultrasonic sensor to provide a current set of valid sensor information, in particular based on requirements for a calibration of the ultrasonic sensor and / or a change in a measurement strategy with the ultrasonic sensor .
  • a configuration regarding the ultrasonic sensor can also be carried out during operation, whereby the operation of the ultrasonic sensor is interrupted, for example to change a measurement sequence, i.e. a system strategy for carrying out the measurement in interaction with several other environmental sensors, in particular other ultrasonic sensors. As a result, at least one set of sensor information cannot be provided in the cases mentioned.
  • determining the availability of a current set of valid sensor information includes determining invalid information in the current set of sensor information.
  • a set of sensor information is available, i.e. the operation of the ultrasonic sensor was not interrupted. However, it may happen that the ultrasonic measurement could not be carried out correctly, i.e. the set of sensor information is not valid. For example, an echo of an object in the area surrounding the vehicle is not included in the set of sensor information.
  • the current set of sensor information is examined in terms of its validity.
  • the invalid information can be determined by a lack of expected information and/or a presence of unexpected information.
  • determining invalid information in the current set of sensor information includes providing a movable window with a plurality of sets of previous sensor information and determining the invalid information in the current set of sensor information based on the window with the majority of sets of previous sensor information. For this purpose, information contained in the respective set of sensor information such as number, distance, amplitude and/or standard deviation of received echoes can be evaluated. Based on the sets of previous sensor information, an information content of the current set of sensor information can be checked for validity. For example, if a single echo that can be tracked by its distance and amplitude across multiple sets of sensor information but cannot be identified in the current set of sensor information, this may indicate that the current set of sensor information is invalid.
  • the window preferably includes 5 to 10 previous sets of sensor information.
  • providing a movable window with a plurality of sets of previous sensor information includes providing a movable window with a plurality of sets of previous, valid sensor information.
  • the validity of which has itself already been determined the validity of the current set of sensor information can be checked with improved reliability. Random effects in the validity of the current set of sensor information are largely excluded.
  • providing a current set of sensor information based on at least one previous set of sensor information includes providing a previous set of sensor information as a current set of valid sensor information, in particular providing the immediately previous set of valid sensor information.
  • a particularly simple way of providing a previous set of sensor information as the current set of valid sensor information is to use the previous set of sensor information as the current set of sensor information.
  • This Set of sensor information is defined as valid.
  • the last set of previous, valid sensor information may have no temporal relevance to the current set of sensor information.
  • the current set of valid sensor information may be provided as a previous set of sensor information. This can be achieved by a time limit for the selection of the immediately previous set of valid sensor information, for example as a window that moves with the current set of sensor information.
  • providing a current set of valid sensor information based on at least one previous set of sensor information includes providing the current set of valid sensor information as a synthetic set of sensor information based on a plurality of previous sets of sensor information.
  • a set of sensor information can be synthesized based on a plurality of previous sets of sensor information, for example taking into account changes in the sensor information.
  • the current set of valid sensor information can thus be provided with better reliability. This applies in particular to cases in which relevant echoes for the respective support function are contained in the sensor signals, for example echoes from overtaken or overtaking third-party vehicles in blind spot monitoring or similar.
  • providing the current set of valid sensor information as a synthetic set of sensor information based on a plurality of previous sets of sensor information includes providing the current set of valid sensor information based on a linear regression based on the previous sets of sensor information a duplication of Properties of the previous sets of sensor information, based on an adaptation of the sensor information to a curve for expected sensor information depending on a current driving situation, and / or a Markov chain with probabilities for generating the synthetic set of sensor information.
  • Various methods such as interpolation or extrapolation can therefore be used to provide the current set of valid sensor information as a synthetic set of sensor information.
  • the mentioned methods for providing the synthetic set of sensor information can be used in particular in driving situations in which relevant echoes for the respective support function are contained in the sensor signals, for example echoes from overtaken or overtaking third-party vehicles, echoes when approaching a guardrail or when moving away from an area a guardrail, generating the set of sensor information with a high relevance for subsequent processing. This makes it possible, for example, to generate reliable blind spot warnings when monitoring blind spots, or something similar.
  • the driving support system has a processing unit which is designed to receive the sequentially provided sets of sensor information from the ultrasonic sensor, to determine the availability of a current set of valid sensor information, and if the availability of a current set of valid sensor information is negative, a current one To provide a set of valid sensor information based on at least one previous set of sensor information, and to transmit a corresponding current set of valid sensor information to the control unit.
  • the control unit typically performs processing on the sets of sensor information but has no access to underlying functions. For example, OS scheduling or calibration of the ultrasonic sensor are implemented as embedded functions that are at least functionally controlled by the control unit.
  • the processing unit can preferably also be provided “embedded” so that it can gain access to corresponding information and, based on this, determine the availability of a current set of valid sensor information.
  • the processing unit can preferably also be provided “embedded” so that it can gain access to corresponding information and, based on this, determine the availability of a current set of valid sensor information.
  • FIG. 1 shows a schematic view of a vehicle with a driving support system comprising a plurality of ultrasonic sensors and a control unit, which are connected to one another via a data connection, according to a first, preferred embodiment
  • Fig. 2 is a schematic representation of a sequential provision of sets of sensor information by an ultrasonic sensor and a sequential processing of the sequentially provided sets of sensor information in the control unit, whereby in diagram a) in some cases no current sets of valid sensor information are provided and can be processed, and in diagram b) the sequential processing of the sequentially provided sets of sensor information takes place without interruption by providing current sets of valid sensor information,
  • 3 shows an exemplary course of an echo signal received with an ultrasound sensor with limit values for determining echoes in the received echo signal
  • 4 shows an exemplary course of the availability of a current set of valid sensor information for an individual object over a plurality of sets of sensor information sequentially provided by the ultrasonic sensor
  • FIG. 5 shows a schematic representation of a first, exemplary set of sensor information with an echo of an object in the area surrounding the vehicle contained therein, together with a curve of a limit value for valid echoes and a limit value for freespace,
  • FIG. 6 shows a schematic representation of a second, exemplary set of sensor information, which has no echo of an object in the area surrounding the vehicle, together with the course of the limit value for valid echoes and the limit value for freespace,
  • FIG. 7 shows a schematic representation of a third, exemplary set of sensor information, which has an invalid echo of an object in the environment of the vehicle, together with the course of the limit value for valid echoes and the limit value for freespace,
  • FIG. 8 shows a schematic representation of a fourth, exemplary set of sensor information with an echo of an object in the area surrounding the vehicle contained therein, together with the course of the limit value for valid echoes and the limit value for freespace, and
  • FIG. 9 shows a flowchart of a method for sequentially processing sequentially provided sets of sensor information provided by the ultrasonic sensors of the driving support system from FIG. 1, the method being carried out with the driving support system from FIG. 1.
  • Figure 1 shows a vehicle 10 according to a first, preferred embodiment.
  • the vehicle 10 includes a driving support system 12, which in this exemplary embodiment is designed to carry out blind spot monitoring or blind spot warning.
  • a driving support system 12 is also known by the English term “blind spot detection” (BSD).
  • the driving support system 12 includes a plurality of ultrasonic sensors 14, which are arranged in two groups along a front and a rear of the vehicle 10.
  • Each of the ultrasonic sensors 14 is designed to sequentially capture and provide sets 24 of sensor information.
  • the sensor information is thus provided as a sequence of sets 24 of sensor information, i.e. the sensor information is provided discontinuously and the sets 24 of sensor information are each completed.
  • the sets 24 of sensor information can be provided at regular time intervals or in any desired time sequence. It is only important that the acquisition and transmission of the sensor information obtained is carried out in sequence by the ultrasonic sensors 14.
  • the driving support system 12 further includes a control unit 16, which is connected to the ultrasonic sensors 14 via a data bus 18.
  • the control unit 16 is a computing unit typically referred to in the automotive sector as an ECU (electronic control unit).
  • the data bus 18 is designed, for example, according to one of the CAN, LIN, LON or Flexray standards.
  • the ultrasonic sensors 14 sequentially provide the sets 24 of sensor information and transmit them to the control unit 16, which receives the sets 24 of sensor information and processes them sequentially, ie in the predetermined order, to detect the environment 20 of the vehicle 10.
  • the vehicle 10 drives in Direction of travel 22, as shown in Figure 1.
  • the sensor information is thus also processed as a sequence of sets 24 of sensor information by the control unit 16.
  • the sets 24 of sensor information can be processed at regular time intervals or in any desired time sequence. The only important thing is that the sensor information is processed sequentially in individual sentences. This concerns the processing of current sentences 24 of sensor information in immediate operation, but not downstream processing in the sense of, for example, “post processing”.
  • the sets 24 of sensor information can also be provided as a quasi-continuous data stream and/or without interruption, although this does not contradict the provision of the sensor information as a sequence of completed sets 24 of sensor information.
  • Such completed sets 24 of sensor information are provided by the ultrasonic sensors 14 as results of individual ultrasonic measurements.
  • the sets 24 of sensor information can be formed by information relating to individual ultrasonic echoes contained in an ultrasonic echo signal received by the respective ultrasonic sensor 14.
  • the sets 24 of sensor information can each be formed by the received ultrasonic echo signal itself, with a set 24 of sensor information being, for example, an envelope of the received ultrasonic echo signal.
  • control unit 16 processes the sets 24 of sensor information that are provided by the ultrasonic sensors 14 arranged on the rear right or left in order to detect potential obstacles in the blind spot of the vehicle 10 and to warn the driver of the vehicle 10 or a corresponding one To generate and further process warnings, for example as part of autonomous driving functions.
  • the control unit 16 carries out processing of the sequential sets 24 of sensor data, as can be seen from FIG. 2 and is explained in detail below.
  • a method for sequentially processing sequentially provided sets 24 of sensor information which is carried out with the driving support system 12 of the vehicle from FIG. 1, is described below with reference to FIG. 9. The method is explained with additional reference to FIGS. 2 to 8.
  • the method begins in step S100 with determining the availability of a current set 24 of valid sensor information.
  • the availability of the current set 24 of sensor information is first determined, ie a check is carried out as to whether a current set 24 of sensor information is available for processing.
  • the availability of a current set 24 of sensor information is determined proactively by monitoring the function of the respective ultrasonic sensor 14 and/or the control unit 16. In particular, low level functions in relation to the ultrasonic sensor 14 are monitored in order to determine whether the respective ultrasonic sensor 14 is available to provide a current set 24 of valid sensor information or not.
  • the availability of a current set 24 of valid sensor information is determined based on task planning of an operating system.
  • the provision of the sets 24 of sensor information by the respective ultrasonic sensor 14 and the processing of the sets 24 of sensor information by the control unit 16 are shown below.
  • the availability of a current set 24 of sensor information is also currently determined by an availability of the respective ultrasonic sensor 14 to provide a current set 24 of valid sensor information based on requirements for a calibration of the respective ultrasonic sensor 14 and / or a change in a measurement strategy with the ultrasonic sensor 14 is determined. Calibrations may be required based on a temperature compensation algorithm to compensate for temperature changes during operation. The same can apply to other, changeable environmental conditions, for example air pressure or relative humidity. Depending on current or previous precipitation, an adjustment to the occurrence of spray can also be carried out. When performing the calibration, at least one set 24 of sensor information may not be provided. If a current set 24 of sensor information is available, it is additionally checked whether this sensor information is valid.
  • the validity of the current set 24 of valid sensor information is therefore determined by checking the corresponding current set 24 of sensor information for its information content. This includes identifying invalid information in the current set 24 of sensor information.
  • the invalid information can be due to a lack of expected information and/or a presence of unexpected information.
  • this set 24 of sensor information may be invalid, for example if the reflected energy of the object's echo received by the ultrasonic sensor 14 does not meet a minimum threshold exceeds and is filtered out, for example, as part of noise filtering or is below a limit value for the reception of echoes.
  • FIG. 3 shows an exemplary course of an ultrasonic echo signal 28, as recorded by the ultrasonic sensor 14.
  • Various exemplary peaks can be seen at times ti, t2 and ts.
  • a limit value of 30 is marked for valid echoes. If the ultrasonic echo signal 28 exceeds the limit 30 for valid echoes, this is recognized as an echo and is therefore part of the corresponding set 24 of sensor information, as at time t 3 .
  • a limit value of 32 is shown for freespace, which is not considered here.
  • the ultrasonic echo signal 28 is below both limit values 30, 32. No valid echo is detected and the peak does not become part of a set 24 of sensor information.
  • the ultrasonic echo signal 28 is above the limit value 32 for freespace, but below the limit value 30 for valid echoes. No valid echo is detected and the peak does not become part of a set 24 of sensor information.
  • the window 34 here includes five previous sets 24 of valid sensor information. In the event that the previous sets 24 of sensor information partially contain invalid sensor information, the five previous sets 24 of valid sensor information can be taken from an overwindow 36. If there are fewer than five previous sets 24 of valid sensor information in the overwindow 36, the step is performed with the previous sets 24 of valid sensor information in the overwindow 36, regardless of their number. Window 34 and overwindow 36 move with the current set 24 of sensor information. Window 34 and overwindow 36 are shown schematically in Figure 2 as they belong to the set 24 of sensor information labeled “908”.
  • each set 24 of sensor information such as number, distance, amplitude and/or standard deviation of received echoes can be evaluated to check whether the sensor information is valid. For example, if a single echo that can be tracked by its distance and amplitude across multiple sets 24 of sensor information but is not included in the current set 24 of sensor information, this may indicate that the current set 24 of sensor information is invalid.
  • Determining the availability of a current set 24 of valid sensor information is schematically visualized in FIG. 4 using a single object 38.
  • the object 38 is not detected.
  • no set 24 of current sensor information is provided based on a delay by the OS scheduler, as discussed above with respect to Figure 2.
  • the object 38 is also not detected because no set 24 of current sensor information is provided due to a calibration of the ultrasonic sensor 14.
  • Figures 5 to 8 relate to tracking of a single object 38 in sets 24 of sensor information according to step IDs 934 to 937, as shown in Figure 4.
  • Figures 5 to 8 each show a progression of the limit value 30 for valid echoes and the limit value 32 for freespace.
  • FIG. 5 shows step ID 934, in which the object 38 is detected by its echo above the course of the limit values 30, 32.
  • an example is a peak for the echo received by the object 38 above the course of the limit values 30, 32 marked.
  • the set 24 of sensor information belonging to step ID 934 is thus recognized as valid.
  • step ID 935 no echo is detected for the object 38.
  • step ID 936 an echo is detected for the object 38 which lies below the course of the limit values 30, 32.
  • An exemplary peak for the echo received by the object 38 is marked below the course of the limit values 30, 32.
  • the sets 24 of sensor information belonging to the step IDs 935 and 936 are therefore recognized as not valid.
  • Figure 8 shows a corresponding representation for step ID 937.
  • the object 38 is again detected by its echo above the course of the limit values 30, 32.
  • a peak for the echo received by the object 38 is again marked above the course of the limit values 30, 32.
  • the set 24 of sensor information belonging to step ID 937 is thus recognized as valid.
  • step S110 involves providing a current set 24 of valid sensor information based on at least one previous set 24 of sensor information. In Figure 4, this concerns the missing sets 24 of sensor information from step IDs 928, 933, 935 and 936.
  • a previous, valid set 24 of sensor information is provided as a current set 24 of valid sensor information.
  • This is shown schematically in Figure 2 b) in that the previous sets 24 of valid sensor information are each repeatedly provided to the control unit 16, as there for the sets 24 of sensor information that are labeled “68” or “908” and sets 24 with valid sensor information is shown schematically.
  • the current set 24 of valid sensor information can alternatively be provided by the previous set 24 of sensor information regardless of its validity. This can be done if, for example, there is no set 24 of valid sensor information in the window 34.
  • providing a current set 24 of valid sensor information based on at least one previous set 24 of sensor information includes providing the current set 24 of valid sensor information as a synthetic set 24 of sensor information based on a plurality of previous sets 24 of valid sensor information.
  • the synthetic set 24 of sensor information is provided in the window 34 based on the previous sets 24 of sensor information.
  • the current set 24 of valid sensor information can be based on a linear regression starting from the previous sets 24 of sensor information, based on a duplication of properties the previous sets 24 of sensor information, based on an adaptation of the sensor information to a curve for expected sensor information depending on a current driving situation, and / or a Markov chain with probabilities for generating the synthetic set 24 of sensor information are provided.
  • step S120 the current set 24 of valid sensor information is processed, wherein the current set 24 of valid sensor information was either provided by the ultrasonic sensor 14, or was provided in step S110 based on at least one previous set 24 of sensor information.

Abstract

Die Erfindung betrifft ein Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen (24) von Sensorinformationen, insbesondere von Sensorinformationen eines Ultraschallsensors (14) eines Fahrunterstützungssystems (12) für ein Fahrzeug (10) zur Erfassung einer Umgebung (20) des Fahrzeugs (10), mit einer Steuerungseinheit (16), insbesondere zur Bereitstellung einer Fahrunterstützungsfunktion für das Fahrzeug (10), umfassend die Schritte Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen, und bei negativer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen Bereitstellen eines aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz (24) von Sensorinformationen. Die Erfindung betrifft außerdem ein Fahrunterstützungssystem (12) für ein Fahrzeug (10) mit einem Ultraschallsensor (14), der ausgeführt ist, sequentiell Sätze (24) von Sensorinformationen bereitzustellen, und einer Steuerungseinheit (16), die ausgeführt ist, Sätze (24) von Sensorinformationen sequentiell zu verarbeiten, insbesondere zur Erfassung einer Umgebung (20) des Fahrzeugs (10), wobei das Fahrunterstützungssystem (12) ausgeführt ist, das obige Verfahren durchzuführen.

Description

Verfahren und Fahrunterstützungssystem zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen
Die vorliegende Erfindung betrifft ein Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen, insbesondere von Sensorinformationen eines Ultraschallsensors eines Fahrunterstützungssystems für ein Fahrzeug zur Erfassung einer Umgebung des Fahrzeugs, mit einer Steuerungseinheit, insbesondere zur Bereitstellung einer Fahrunterstützungsfunktion für das Fahrzeug.
Auch betrifft die vorliegende Erfindung ein Fahrunterstützungssystem für ein Fahrzeug mit einem Ultraschallsensor, der ausgeführt ist, sequentiell Sätze von Sensorinformationen bereitzustellen, und einer Steuerungseinheit, die ausgeführt ist Sätze von Sensorinformationen sequentiell zu verarbeiten, insbesondere zur Erfassung einer Umgebung des Fahrzeugs, wobei das Fahrunterstützungssystem ausgeführt ist, das obige Verfahren durchzuführen.
Aktuelle Fahrzeuge umfassen typischerweise eine Mehrzahl an Ultraschallsensoren, die für dessen Fahrunterstützungssystem(e) Sensorinformationen zur Erfassung einer Umgebung des Fahrzeugs bereitstellen. Die Sensorinformationen werden als Sequenz von Sätzen Sensorinformationen bereitgestellt, d.h. die Sensorinformationen werden diskontinuierlich bereitgestellt und die Sätze Sensorinformationen sind üblicherweise abgeschlossen.
Es erfolgt also eine Erfassung und Übertragung der gewonnenen Sensorinformationen in einzelnen Sätzen beispielsweise an eine Steuerungseinheit. Dabei kann es aufgrund der Datenverarbeitung und/oder der Datenübertragung durchaus zu Überschneidungen bei der Erfassung und Übertragung der Sensorinformationen kommen. Auch können die Sätze der Sensorinformationen quasi als kontinuierlicher Datenstrom und/oder unterbrechungsfrei bereitgestellt werden, wobei dies nicht der Bereitstellung der Sensorinformationen als Sequenz von abgeschlossenen Sätzen widerspricht. Solche abgeschlossenen Sätze von Sensorinformationen werden von den Ultraschallsensoren beispielsweise als Ergebnisse einzelner Ultraschallmessungen bereitgestellt. Dabei können die Sätze von Sensorinformationen durch Information in Bezug auf einzelne, in einem empfangenen Ultraschallechosignal enthaltene Ultraschallechos gebildet werden. Alternativ oder zusätzlich kann können die Sätze von Sensorinformationen durch das empfangene Ultraschallechosignal selbst gebildet werden, beispielsweise nach der Art einer Hüllkurve.
Im automobilen Bereich sind verschiedene Fahrunterstützungssysteme bekannt, welche basierend auf Sensorinformationen von entsprechenden Ultraschallsensoren verschiedene Unterstützungsfunktionen bereitstellen können. Dabei können die Fahrunterstützungssysteme jeweils die erforderlichen Ultraschallsensoren selbst umfassen, oder die Sensorinformationen werden für mehrere Unterstützungsfunktionen gemeinsam bereitgestellt. Somit können die Ultraschallsensoren von mehreren Fahrunterstützungssystemen gemeinsam genutzt werden, ohne notwendigerweise Teil des entsprechenden Fahrunterstützungssystems zu sein.
Eine solche Unterstützungsfunktion ist die Totwinkelüberwachung bzw. Totwinkelwarnung, um potentielle Hindernisse im toten Winkel des Fahrzeugs zu erfassen und den Führer des Fahrzeugs zu warnen oder eine entsprechende Warnung beispielsweise im Rahmen von autonomen Fahrfunktionen zu erzeugen und weiter zu verarbeiten. Für die Totwinkelüberwachung bzw. Totwinkelwarnung ist auch der englische Begriff „blind spot detection“ (BSD) gebräuchlich. Aktuell basiert die Totwinkelüberwachung meist auf Sensorinformationen, die ausschließlich von Ultraschallsensoren bereitgestellt werden. Die Ultraschallsensoren sind ausgereift und auch kostengünstig verfügbar, haben jedoch einen Nachteil, da sie physikalisch bedingt durch die Ausbreitungsgeschwindigkeit von Schall in der Luft, die bei Normalbedingungen etwa 340m/s beträgt abhängig von aktuellen Umgebungsbedingungen ist, zusammen mit einen Überwachungsbereich von typischerweise etwa fünf Metern nur wenige Sätze von Sensorinformationen pro Sekunde bereitstellen können. Bei einem Überwachungsbereich von beispielsweise fünf Metern können daher maximal etwa 30 Sätze von Sensorinformationen pro Sekunde gewonnen werden. In der Praxis haben solche Ultraschallsensoren oftmals eine Aktualisierungsrate von etwa 25 Hz, d.h. alle 40 ms wird ein Satz Sensorinformationen erzeugt. Damit kann auch eine Totwinkelwarnung nur mit einer entsprechenden Verzögerung aktualisiert werden. Eine kurze Reaktionszeit ist aber oftmals von entscheidender Bedeutung, da der Fahrer so schnell wie möglich vor einem Hindernis im toten Winkel gewarnt werden soll. So zielt beispielsweise die Totwinkelüberwachung hauptsächlich darauf ab, vor Hindernissen mit höheren oder niedrigeren Geschwindigkeiten zu warnen. Bei einer relativen Geschwindigkeit zwischen dem Hindernis und dem Fahrzeug von beispielsweise 30 km/h ergibt sich, dass sich der Abstand bei einer Aktualisierungsrate von 25 Hz, d.h. alle 40ms wird ein Satz Sensorinformationen bereitgestellt, um etwa 0,333 m ändert. Wenn also ein Satz Sensorinformationen fehlt, kann sich der Abstand zwischen dem Hindernis und dem Fahrzeug bereits um 0,666m geändert haben. Dies ist in Bezug auf die Totwinkelüberwachung eine sehr relevante Änderung. Je größer die Differenzgeschwindigkeit zwischen dem Hindernis und dem Fahrzeug, desto wichtiger ist eine zuverlässige und kontinuierliche Bereitstellung und Verarbeitung der Sensorinformationen.
Allerdings kann es in der Praxis aus verschiedenen Gründen vorkommen, dass nicht jeder Satz Sensorinformationen verzögerungsfrei bereitgestellt und/oder verarbeitet werden kann, wodurch es zu Unterbrechungen bei der Erzeugung der Totwinkelwarnungen kommen kann. Wenn keine aktualisierten Daten verfügbar sind, wird eine Funktion zur Verarbeitung der Sensorinformationen entweder nicht ausgeführt, oder sie wird ohne Daten ausgeführt. Dies kann in beiden Fällen dazu führen, dass Totwinkelwarnungen ausbleiben. Dies kann nicht nur für den Zeitraum der Unterbrechung relevant sein, sondern abhängig von der Ermittlung der Totwinkelwarnung auch drüber hinaus, wenn beispielsweise die Totwinkelwarnung basierend auf mehreren aufeinanderfolgenden Sätzen von Sensorinformationen erzeugt wird.
Das Dokument DE 10 2010 033 207 A1 betrifft ein Verfahren zur Umfeldüberwachung für ein Fahrzeug, wobei zu vorgegebenen Messzeitpunkten von mindestens einem Ultraschallsensor ein Sendesignal ausgesendet und in Reaktion auf das Sendesignal mindesten ein Echosignal empfangen wird, wobei für jedes empfangene Echosignal durch Auswertung einer korrespondierenden Laufzeit eine Abstandsinformation zu einem möglichen Objekt ermittelt. Um eine Analyse der empfangenen Echosignale zur Erkennung von realen Objekten und/oder von Störquellen als mögliche Objekte zu ermöglichen, wird aus den zu einem Messzeitpunkt ermittelten Abstandsinformationen ein Abstandsmuster der empfangenen Echosignale für den korrespondierenden Messzeitpunkt bestimmt. Zur Erkennung eines realen Objekts und/oder einer Störquelle als mögliches Objekt werden Parameter von Abstandsmustern miteinander verglichen, welche zu mindestens zwei aufeinander folgenden Messzeitpunkten erfasst werden.
Ausgehend von dem oben genannten Stand der Technik liegt der Erfindung somit die Aufgabe zugrunde, ein Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen sowie ein Fahrunterstützungssystem für ein Fahrzeug zur Durchführung des Verfahrens anzugeben, die eine verbessertes sequentielles Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen ermöglichen, und die insbesondere Unterbrechungen und darauf basierende Verarbeitungsfehler bei dem sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen zumindest reduzieren oder sogar verhindern.
Die Lösung der Aufgabe erfolgt erfindungsgemäß durch die Merkmale der unabhängigen Ansprüche. Vorteilhafte Ausgestaltungen der Erfindung sind in den Unteransprüchen angegeben.
Erfindungsgemäß ist somit ein Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen, insbesondere von Sensorinformationen eines Ultraschallsensors eines Fahrunterstützungssystems für ein Fahrzeug zur Erfassung einer Umgebung des Fahrzeugs, mit einer Steuerungseinheit, insbesondere zur Bereitstellung einer Fahrunterstützungsfunktion für das Fahrzeug, angegeben, umfassend die Schritte Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen, und bei negativer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen Bereitstellen eines aktuellen Satzes von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen.
Erfindungsgemäß ist außerdem ein Fahrunterstützungssystem für ein Fahrzeug mit einem Ultraschallsensor, der ausgeführt ist, sequentiell Sätze von Sensorinformationen bereitzustellen, und einer Steuerungseinheit, die ausgeführt ist Sätze von Sensorinformationen sequentiell zu verarbeiten, insbesondere zur Erfassung einer Umgebung des Fahrzeugs, angegeben, wobei das Fahrunterstützungssystem ausgeführt ist, das obige Verfahren durchzuführen. Grundidee der vorliegenden Erfindung ist es also, mögliche Fehlerquellen für das sequentielle Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen vorab zu erfassen, indem die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen ermittelt wird, und diese Fehlerquellen ggf. zu überwinden. Dazu wird ein aktueller Satz von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen bereitgestellt. Die nachfolgende Verarbeitung kann also kontinuierlich basierend auf dem jeweils aktuell bereitgestellten Satz von gültigen Sensorinformationen durchgeführt werden.
Wie sich in der Praxis herausgestellt hat, ist es nämlich für die Verarbeitung von sequentiellen Sätzen von Sensordaten vorteilhaft, die Verarbeitung mit einem aktuellen Satz von gültigen Sensorinformationen fortzusetzen, auch wenn dieser aktuelle Satz von gültigen Sensorinformationen auf zumindest einem vorherigen Satz von Sensorinformationen basiert und kein aktueller Satz von gültigen Sensorinformationen ist, der aktuell von dem Ultraschallsensor bereitgestellt worden ist. Dabei wird unter anderem ausgenutzt, dass sequentiell bereitgestellte Sätze von Sensorinformationen oftmals nur einen nur geringfügig abweichenden Informationsgehalt aufweisen, so dass eine Verarbeitung eines aktuellen Satzes von gültigen Sensorinformationen, der auf zumindest einem vorherigen Satz von Sensorinformationen basiert und kein aktueller Satz von gültigen Sensorinformationen ist, oftmals ein Verarbeitungsergebnis liefert, das besser ist, als die Verarbeitung der Sensorinformationen auszusetzen oder einen leeren Satz von Sensorinformationen zu verarbeiten. Dies gilt umso mehr, wenn bei der Verarbeitung mehrere Sätze von gültigen Sensorinformationen gemeinsam verwendet werden. In diesem Fall wird das Verarbeitungsergebnis durch die Verwendung eines aktuellen Satzes von gültigen Sensorinformationen, der auf zumindest einem vorherigen Satz von Sensorinformationen basiert und kein aktueller Satz von gültigen Sensorinformationen ist, nur geringfügig beeinflusst.
Dies gilt ganz besonders, wenn sich die in den Sensorinformationen enthaltenen Informationen kontinuierlich ändern. Somit können beispielsweise Bewegungen von Objekten auch beim Fehlen eines aktuellen Satzes von gültigen Sensorinformationen zuverlässig erfasst und entsprechend verarbeitet werden, beispielsweise um eine Umgebung eines Fahrzeugs bei einem Fahrunterstützungssystem zu erfassen. Damit können weiter beispielsweise in einem Fahrunterstützungssystem zur Erzeugung von Totwinkelwarnungen entsprechende Totwinkelwarnungen zuverlässig erzeugt werden. Selbst wenn im Stand der Technik ein fehlender Satz von Sensorinformationen als solches gekennzeichnet werden kann, und die Verarbeitung dadurch nicht durch Null- Daten „fehlgeleitet“ wird, kann durch die Bereitstellung eines aktuellen Satzes von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen, eine größere Anzahl Sätze von Sensorinformationen zur Verarbeitung bereitgestellt und das Ergebnis der Verarbeitung somit typischerweise gegenüber dem Stand der Technik verbessert werden.
Die Erfindung betrifft allgemeine Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen. Die Sensorinformationen werden als Sequenz von Sätzen Sensorinformationen bereitgestellt, d.h. die Sensorinformationen werden diskontinuierlich bereitgestellt und die Sätze Sensorinformationen sind üblicherweise abgeschlossen. Dabei können die Sätze Sensorinformationen zu regelmäßigen Zeitabständen oder in einer beliebigen zeitlichen Abfolge bereitgestellt und auch verarbeitet werden. Wichtig ist lediglich, dass die Erfassung und Übertragung der gewonnenen Sensorinformationen wie auch die Verarbeitung der Sensorinformationen in einzelnen Sätzen sequentiell erfolgen. Dies betrifft eine Verarbeitung von aktuellen Sätzen von Sensorinformationen im unmittelbaren Betrieb, nicht jedoch eine nachgelagerte Verarbeitung im Sinne beispielsweise eines üblichen „post processing“.
Es erfolgt also eine Erfassung und Übertragung der gewonnenen Sensorinformationen in einzelnen Sätzen beispielsweise an die Steuerungseinheit. Dabei kann es aufgrund der Datenverarbeitung und/oder der Datenübertragung durchaus zu Überschneidungen bei der Erfassung und Übertragung der Sensorinformationen kommen. Auch können die Sätze der Sensorinformationen quasi als kontinuierlicher Datenstrom und/oder unterbrechungsfrei bereitgestellt werden, wobei dies nicht der Bereitstellung der Sensorinformationen als Sequenz von abgeschlossenen Sätzen widerspricht. Solche abgeschlossenen Sätze von Sensorinformationen werden beispielsweise von Ultraschallsensoren als Ergebnisse einzelner Ultraschallmessungen bereitgestellt. Dabei können die Sätze von Sensorinformationen durch Informationen in Bezug auf einzelne, in einem von dem Ultraschallsensor empfangenen Ultraschallechosignal enthaltene Ultraschallechos gebildet werden. Alternativ oder zusätzlich kann können die Sätze von Sensorinformationen jeweils durch das empfangene Ultraschallechosignal selbst gebildet werden, wobei ein Satz Sensorinformationen beispielsweise eine Hüllkurve des empfangenen Ultraschallechosignals ist.
Die Sensorinformationen dienen typischerweise in einem Fahrunterstützungssystem der Erfassung der Umgebung des Fahrzeugs. Die Umgebung kann mit einem oder mit mehreren Ultraschallsensor(en) erfasst werden, die jeweils Sätze von Sensorinformationen bereitstellen. Der Ultraschallsensor ist mit der Steuerungseinheit über eine Datenverbindung, die insbesondere als Datenbus ausgeführt ist, beispielsweise nach einem der Standards CAN, LIN, LON oder Flexray, verbunden, über die die Sätze von Sensorinformationen übertragen werden. Die Steuerungseinheit wird im automobilen Bereich typischerweise als ECU (electronic control unit) bezeichnet.
Die Steuerungseinheit empfängt entsprechend über die Datenverbindung die Sätze der Sensorinformationen von dem Ultraschallsensor. Bei mehreren Ultraschallsensoren können die Sensorinformationen von jedem Ultraschallsensor individuell verarbeitet werden, oder die Sensorinformationen von mehreren Ultraschallsensoren werden gemeinsam verarbeitet. Dies kann von der Art der Unterstützungsfunktion abhängen. Die Steuerungseinheit empfängt die Sätze der Sensorinformationen und führt die Verarbeitung durch. Bei einer Totwinkelüberwachung werden typischerweise die Sätze der Sensorinformationen eines entsprechend positionierten Ultraschallsensors, der in einer Position seitlich und hinten an dem Fahrzeug angeordnet ist, für jeden dieser Ultraschallsensoren allein verarbeitet. Prinzipiell ist es aber möglich, dass zusätzlich Sensorinformationen von benachbart angeordneten Ultraschallsensoren verarbeitet werden, oder dass Sensorinformationen von anderen Arten von Umgebungserfassungssensoren wie LiDAR-basierten Umgebungserfassungssensoren, optischen Kameras und/oder Radarsensoren zusätzlich verarbeitet werden.
Das Verfahren ist besonders relevant in Bezug auf Ultraschallsensoren, die eine Zykluszeit zur Bereitstellung eines Satzes von Sensorinformationen aufweisen, der lang ist in Bezug auf die jeweilige Fahrunterstützungsfunktion. Das Verfahren ist außerdem besonders relevant in Bezug auf Fahrunterstützungsfunktionen, die eine geringe Reaktionszeit und eine kontinuierliche Verarbeitung der Sätze von Sensorinformationen erfordern, wie es beispielsweise bei hohen Differenzgeschwindigkeiten zwischen dem Fahrzeug und möglichen Hindernissen oder anderen Verkehrsteilnehmern der Fall ist. Beides gilt insbesondere, wenn sich die Bereitstellung eines Satzes von Sensorinformationen nicht auf andere Weise beschleunigen lässt, sondern wie bei den Ultraschallsensoren von physikalischen Grenzen abhängt, und/oder wenn sich die Verarbeitung der Sätze von Sensorinformationen nicht oder nur mit großem Aufwand auf andere Weise verbessern lässt.
Das Fahrunterstützungssystem kann somit verschiedene Fahrunterstützungsfunktionen für das Fahrzeug bereitstellen. Besonders relevant in diesem Zusammenhang sind Fahrunterstützungsfunktionen wie solche zur Totwinkelüberwachung bzw. Totwinkelwarnung oder auch andere, welche auf der Verwendung von Ultraschallsensoren basieren, und wobei hohe Differenzgeschwindigkeiten zwischen dem Fahrzeug und möglichen Hindernissen oder anderen Verkehrsteilnehmern auftreten können.
Das Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen kann auf unterschiedliche Weise erfolgen, wie nachfolgend im Detail angegeben ist. Dabei kann die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen einerseits proaktiv ermittelt werden, indem die Funktion des Ultraschallsensors und/oder der Steuerungseinheit überwacht wird und insbesondere low level Funktionen in Bezug auf den Ultraschallsensor überwacht werden. Wenn der Ultraschallsensor nicht für die Bereitstellung eines aktuellen Satzes von gültigen Sensorinformationen zur Verfügung steht, kann dies erfasst und angezeigt werden, wodurch die negative Verfügbarkeit festgestellt wird. Andererseits kann die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen basierend auf einer Überprüfung eines empfangenen Satzes von Sensorinformationen ermittelt werden, indem der entsprechende aktuelle Satz von Sensorinformationen auf seinen Informationsgehalt überprüft wird, d.h. ob der entsprechende aktuelle Satz von Sensorinformationen gültig ist. Wenn der Informationsgehalt die negative Verfügbarkeit anzeigt, kann der entsprechende aktuelle Satz von Sensorinformationen verworfen und durch einen Satz von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen ersetzt werden.
Bei negativer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen wird ein aktueller Satz von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen bereitgestellt. Auch für das Bereitstellen des aktuellen Satzes von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen gibt es verschiedene Möglichkeiten, wie nachstehend ausgeführt ist. Wichtig ist, dass für die Verarbeitung ein aktueller Satz von gültigen Sensorinformationen bereitsteht, d.h. es steht ein Satz von Sensorinformationen bereit und die Sensorinformationen sind gültig. Dann muss die sequentielle Verarbeitung nicht unterbrochen werden und kann störungsfrei weitergeführt werden.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen ein Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen basierend auf einer Task-Planung eines Betriebssystems. Ein Grund für eine negative Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen kann in der Bereitstellung der Verarbeitung liegen. Beispielsweise können die Sensorinformationen durch einen OS- Scheduler verzögert werden, wenn zum Beispiel verschiedene Programme oder Tasks in unterschiedlich langen Zyklen abgearbeitet werden. Wenn z.B. ein Messzyklus des Ultraschallsensors 42ms dauert, und ein Zyklus für die Signalverarbeitung in der Steuerungseinheit 40ms, wird alle ~21 Zyklen die Frist für die sequentielle Verarbeitung nicht eingehalten. Dadurch steht alle ~21 Zyklen kein aktueller Satz von Sensorinformationen bereit, wodurch die Verarbeitung der Sensorinformationen verzögert wird. Solche fehlenden Sätze von Sensorinformationen können basierend auf der Task-Planung des Betriebssystems erkannt und beispielsweise vorab angezeigt werden, so dass rechtzeitig ein aktueller Satz von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen bereitgestellt werden kann. Entsprechendes gilt bei anderen geplanten, wiederkehrenden, insbesondere zyklischen Gründen, welche die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen beeinträchtigen können, beispielsweise designbedingt.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen ein Ermitteln einer Verfügbarkeit des Ultraschallsensors zur Bereitstellung eines aktuellen Satzes von gültigen Sensorinformationen, insbesondere basierend auf Anforderungen an eine Kalibrierung des Ultraschallsensors und/oder einer Änderung einer Messstrategie mit dem Ultraschallsensor. Dies betrifft also ein Ermitteln der negativen Verfügbarkeit, die keine geplanten, wiederkehrenden Ursachen hat, sondern die auf einem aktuellen Grund basiert. Ein solcher Grund kann in der Durchführung anderer Aufgaben mit dem Ultraschallsensor liegen. So ist es beispielsweise bei Ultraschallsensoren üblich, im Betrieb wiederholte Kalibrierungen durchzuführen. So kann basierend auf einem Temperaturkompensationsalgorithmus zur Kompensation von Temperaturänderungen im Betrieb eine Kalibrierung erforderlich werden. Entsprechendes kann für andere, veränderliche Umgebungsbedingungen erforderlich sein, beispielsweise Luftdruck oder relative Luftfeuchtigkeit. Auch kann abhängig von aktuellem oder vorherigem Niederschlag eine Anpassung an das Auftreten von Gischt durchgeführt werden. Auch kann im Betrieb eine Konfiguration betreffend den Ultraschallsensor durchgeführt werden, wodurch der Betrieb des Ultraschallsensors unterbrochen wird, beispielsweise zur Änderung einer Messreihenfolge, also einer Systemstrategie zur Durchführung der Messung im Zusammenspiel mit mehreren anderen Umgebungssensoren, insbesondere anderen Ultraschallsensoren. Dadurch kann in den genannten Fällen zumindest ein Satz Sensorinformationen nicht bereitgestellt werden.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Ermitteln einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen ein Ermitteln ungültiger Informationen in dem aktuellen Satz von Sensorinformationen. In diesem Fall liegt also ein Satz Sensorinformationen vor, d.h. der Betrieb des Ultraschallsensors wurde nicht unterbrochen. Allerdings kann es vorkommen, dass die Ultraschallmessung nicht korrekt durchgeführt werden konnte, d.h. der Satz Sensorinformationen ist nicht gültig. Es ist also beispielsweise ein Echo eines Objekts in der Umgebung des Fahrzeugs nicht in dem Satz Sensorinformationen enthalten. Dies kann vorkommen, wenn ein Objekt aufgrund seines Materials zu viel der auftreffenden Ultraschallenergie absorbiert und/oder aufgrund seiner Form die auftreffende Ultraschallenergie nur zu einem kleinen Teil zu dem Ultraschallsensor reflektiert, so dass die von dem Ultraschallsensor empfangene reflektierte Energie des Echos eine Mindestschwelle nicht überschreitet und beispielsweise im Rahmen einer Rauschfilterung herausgefiltert wird. Es erfolgt eine Untersuchung des aktuellen Satzes von Sensorinformationen in Bezug auf seine Gültigkeit. Die ungültige Information kann durch ein Fehlen einer erwarteten Information und/oder ein Vorhandensein einer nicht erwarteten Information ermittelt werden.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Ermitteln ungültiger Informationen in dem aktuellen Satz von Sensorinformationen ein Bereitstellen eines beweglichen Fensters mit einer Mehrzahl Sätze vorheriger Sensorinformationen und ein Ermitteln der ungültigen Informationen in dem aktuellen Satz von Sensorinformationen basierend auf dem Fenster mit der Mehrzahl Sätze vorheriger Sensorinformationen. Dazu können in dem jeweiligen Satz Sensorinformationen enthaltene Informationen wie Anzahl, Entfernung, Amplitude und/oder Standardabweichung von empfangenen Echos ausgewertet werden. Basierend auf den Sätzen vorheriger Sensorinformationen kann ein Informationsgehalt des aktuellen Satzes von Sensorinformationen auf Gültigkeit geprüft werden. Wenn beispielsweise ein einzelnes Echo, das über seine Entfernung und Amplitude über mehrere Sätze Sensorinformationen verfolgt werden kann, aber in dem aktuellen Satz Sensorinformationen nicht identifiziert werden kann, kann dies anzeigen, dass der aktuelle Satz Sensorinformationen ungültig ist. Das Fenster umfasst vorzugsweise 5 bis 10 vorherige Sätze Sensorinformationen.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Bereitstellen eines beweglichen Fensters mit einer Mehrzahl Sätze vorheriger Sensorinformationen ein Bereitstellen eines beweglichen Fensters mit einer Mehrzahl Sätze vorheriger, gültiger Sensorinformationen. Durch die Verwendung des Fensters mit der Mehrzahl Sätze vorheriger Sensorinformationen, deren Gültigkeit selber bereits ermittelt wurde, kann die Gültigkeit des aktuellen Satzes Sensorinformationen mit einer verbesserten Zuverlässigkeit überprüft werden. Zufallseffekte bei der Gültigkeit des aktuellen Satzes Sensorinformationen werden weitgehend ausgeschlossen. Bei nur wenigen Sätzen vorheriger, gültiger Sensorinformationen ist es vorteilhaft, die Größe des Fensters mit der Mehrzahl Sätze vorheriger, gültiger Sensorinformationen zu begrenzen, so dass eine zeitliche Relevanz der Sätze vorheriger, gültiger Sensorinformationen für den aktuellen Satz Sensorinformationen sichergestellt wird. Dies kann durch eine zeitliche Beschränkung für die Sätze vorheriger, gültiger Sensorinformationen erreicht werden, beispielsweise als Überfenster, das mit dem aktuellen Satz von Sensorinformationen mitwandert.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Bereitstellen eines aktuellen Satzes von Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen ein Bereitstellen eines vorherigen Satzes von Sensorinformationen als aktuellen Satz von gültigen Sensorinformationen, insbesondere ein Bereitstellen des unmittelbar vorherigen Satzes von gültigen Sensorinformationen. Eine besonders einfache Art des Bereitstellens eines vorherigen Satzes von Sensorinformationen als aktuellen Satz von gültigen Sensorinformationen besteht darin, den vorherigen Satz von Sensorinformationen als aktuellen Satz von Sensorinformationen zu verwenden. Dieser Satz von Sensorinformationen wird als gültig definiert. Durch das Bereitstellen des unmittelbar vorherigen Satzes von gültigen Sensorinformationen, deren Gültigkeit selber also bereits ermittelt wurde, kann sichergestellt werden, dass der aktuelle Satz von Sensorinformationen ebenfalls gültig ist oder zumindest näher an einem gültigen Satz von Sensorinformationen ist. Wenn der letzte Satz vorheriger, gültiger Sensorinformationen zu lange zurückliegt, kann der letzte Satz vorheriger, gültiger Sensorinformationen ohne zeitliche Relevanz für den aktuellen Satz Sensorinformationen sein. In dem Fall kann der aktuelle Satz gültiger Sensorinformationen als vorheriger Satz von Sensorinformationen bereitgestellt werden. Dies kann durch eine zeitliche Beschränkung für die Auswahl des unmittelbar vorherigen Satzes von gültigen Sensorinformationen erreicht werden, beispielsweise als Fenster, das mit dem aktuellen Satz von Sensorinformationen mitwandert.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Bereitstellen eines aktuellen Satzes von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen ein Bereitstellen des aktuellen Satzes von gültigen Sensorinformationen als synthetischen Satz von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze von Sensorinformationen. Im Gegensatz zu der Verwendung des vorherigen Satzes von Sensorinformationen als aktuellem Satz von gültigen Sensorinformationen kann bei dem Bereitstellen des synthetischen Satzes von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze von Sensorinformationen ein Satz von Sensorinformationen synthetisiert werden, der beispielsweise Änderungen in den Sensorinformationen berücksichtigt. Der aktuelle Satz von gültigen Sensorinformationen kann somit mit einer besseren Zuverlässigkeit bereitgestellt werden. Dies gilt insbesondere für Fälle, in denen relevante Echos für die jeweilige Unterstützungsfunktion in den Sensorsignalen enthalten sind, beispielsweise Echos von überholten oder überholenden Drittfahrzeugen bei der Totwinkelüberwachung oder ähnliches.
In vorteilhafter Ausgestaltung der Erfindung umfasst das Bereitstellen des aktuellen Satzes von gültigen Sensorinformationen als synthetischen Satz von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze von Sensorinformationen ein Bereitstellen des aktuellen Satzes von gültigen Sensorinformationen basierend auf einer linearen Regression ausgehend von den vorherigen Sätzen von Sensorinformationen, basierend auf einer Duplizierung von Eigenschaften der vorherigen Sätze von Sensorinformationen, basierend auf eine Anpassung der Sensorinformationen an eine Kurve für erwartete Sensorinformationen abhängig von einer aktuellen Fahrsituation, und/oder einer Markov-Kette mit Wahrscheinlichkeiten für das Erzeugen des synthetischen Satzes von Sensorinformationen. Es können also verschieden Verfahren wie Interpolation oder Extrapolation verwendet werden, um den aktuellen Satz von gültigen Sensorinformationen als synthetischen Satz von Sensorinformationen bereitzustellen. Die genannten Verfahren zum Bereitstellen des synthetischen Satzes von Sensorinformationen können insbesondere in Fahrsituationen, in denen relevante Echos für die jeweilige Unterstützungsfunktion in den Sensorsignalen enthalten sind, beispielsweise Echos von überholten oder überholenden Drittfahrzeugen, Echos beim Annähern an eine Leitplanke oder beim Entfernen von einem Bereich mit einer Leitplanke, den Satz von Sensorinformationen mit einer hohen Relevanz für die nachfolgende Verarbeitung erzeugen. Dadurch können beispielsweise bei der Totwinkelüberwachung zuverlässige Totwinkelwarnungen erzeugt werden, oder ähnliches.
In vorteilhafter Ausgestaltung der Erfindung weist das Fahrunterstützungssystem eine Verarbeitungseinheit auf, die ausgeführt ist, die sequentiell bereitgestellten Sätzen von Sensorinformationen von dem Ultraschallsensor zu empfangen, die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen zu ermitteln, bei negativer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen einen aktuellen Satz von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz von Sensorinformationen bereitzustellen, und einen entsprechenden aktuellen Satz von gültigen Sensorinformationen an die Steuerungseinheit zu übertragen. In der Praxis führt die Steuerungseinheit typischerweise eine Verarbeitung der Sätze von Sensorinformationen durch, hat jedoch keinen Zugriff auf darunterliegende Funktionen. Beispielsweise werden ein OS-Scheduling oder auch eine Kalibrierung des Ultraschallsensors als Embedded-Funktionen realisiert, die zumindest funktional von der Steuerungseinheit. Die Verarbeitungseinheit kann vorzugsweise ebenfalls „embedded“ bereitgestellt werden, so dass sie Zugriff auf entsprechende Informationen erhalten und darauf basierend die Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen ermitteln kann. Merkmale wie auch Vorteile des beschriebenen Verfahrens lassen sich ohne Weiteres auf das beschriebene Fahrunterstützungssystem übertragen und umgekehrt. Auch können einzelne Schritte des Verfahrens in einer an sich beliebigen Reihenfolge durchgeführt werden. Das Verfahren ist nicht auf die beispielhaft beschriebene Abfolge der Verfahrensschritte beschränkt, wie sich für den Fachmann offensichtlich aus der Beschreibung ergibt.
Nachfolgend wird die Erfindung unter Bezugnahme auf die anliegende Zeichnung anhand bevorzugter Ausführungsformen näher erläutert. Die dargestellten Merkmale können sowohl jeweils einzeln als auch in Kombination einen Aspekt der Erfindung darstellen. Merkmale verschiedener Ausführungsbeispiele sind übertragbar von einem Ausführungsbeispiel auf ein anderes.
Es zeigt
Fig. 1 eine schematische Ansicht eines Fahrzeugs mit einem Fahrunterstützungssystem umfassend eine Mehrzahl Ultraschallsensoren und einer Steuerungseinheit, die über einen Datenverbindung miteinander verbunden sind, gemäß einer ersten, bevorzugten Ausführungsform,
Fig. 2 eine schematische Darstellung einer sequentiellen Bereitstellung von Sätzen von Sensorinformationen durch einen Ultraschallsensor und einer sequentiellen Verarbeitung der sequentiell bereitgestellten Sätze von Sensorinformationen in der Steuerungseinheit, wobei in Diagramm a) teilweise keine aktuellen Sätze von gültigen Sensorinformationen bereitgestellt werden und verarbeitet werden können, und in Diagramm b) die sequentielle Verarbeitung der sequentiell bereitgestellten Sätze von Sensorinformationen unterbrechungsfrei erfolgt, indem jeweils aktuelle Sätze von gültigen Sensorinformationen bereitgestellt werden,
Fig. 3 einen beispielhaften Verlauf eines mit einem Ultraschalsensor empfangenen Echosignals mit Grenzwerten zur Bestimmung von Echos in dem empfangenen Echosignal, Fig. 4 einen beispielhaften Verlauf einer Verfügbarkeit eines aktuellen Satzes von gültigen Sensorinformationen für ein einzelnes Objekt über eine Mehrzahl von dem Ultraschallsensor sequentiell bereitgestellte Sätze von Sensorinformationen,
Fig. 5 eine schematische Darstellung eines ersten, beispielhaften Satzes von Sensorinformationen mit einem darin enthaltenen Echo eines Objekts in der Umgebung des Fahrzeugs zusammen mit einem Verlauf eines Grenzwerts für valide Echos und eines Grenzwerts für freespace,
Fig. 6 eine schematische Darstellung eines zweiten, beispielhaften Satzes von Sensorinformationen, der kein Echo eines Objekts in der Umgebung des Fahrzeugs aufweist, zusammen mit dem Verlauf des Grenzwerts für valide Echos und des Grenzwerts für freespace,
Fig. 7 eine schematische Darstellung eines dritten, beispielhaften Satzes von Sensorinformationen, der ein ungültiges Echo eines Objekts in der Umgebung des Fahrzeugs aufweist, zusammen mit dem Verlauf des Grenzwerts für valide Echos und des Grenzwerts für freespace,
Fig. 8 eine schematische Darstellung eines vierten, beispielhaften Satzes von Sensorinformationen mit einem darin enthaltenen Echo eines Objekts in der Umgebung des Fahrzeugs zusammen mit dem Verlauf des Grenzwerts für valide Echos und des Grenzwerts für freespace, und
Fig. 9 ein Ablaufdiagramm eines Verfahrens zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen, die von den Ultraschallsensoren des Fahrunterstützungssystems aus Fig. 1 bereitgestellt werden, wobei das Verfahren mit dem Fahrunterstützungssystems aus Fig. 1 durchgeführt wird. Die Figur 1 zeigt ein Fahrzeug 10 gemäß einer ersten, bevorzugten Ausführungsform. Das Fahrzeug 10 umfasst ein Fahrunterstützungssystem 12, das in diesem Ausführungsbeispiel zur Durchführung einer Totwinkelüberwachung bzw. Totwinkelwarnung ausgeführt ist. Ein solches Fahrunterstützungssystem 12 ist auch unter dem englischen Begriff „blind spot detection“ (BSD) bekannt.
Das Fahrunterstützungssystem 12 umfasst in diesem Ausführungsbeispiel mehrere Ultraschallsensoren 14, die in zwei Gruppen entlang einer Vorderseite und einer Rückseite des Fahrzeugs 10 angeordnet sind. Jeder der Ultraschallsensoren 14 ist ausgeführt, sequentiell Sätze 24 von Sensorinformationen zu erfassen und bereitzustellen. Die Sensorinformationen werden somit als Sequenz von Sätzen 24 von Sensorinformationen bereitgestellt, d.h. die Sensorinformationen werden diskontinuierlich bereitgestellt und die Sätze 24 von Sensorinformationen sind jeweils abgeschlossen. Dabei können die Sätze 24 von Sensorinformationen zu regelmäßigen Zeitabständen oder in einer beliebigen zeitlichen Abfolge bereitgestellt werden. Wichtig ist lediglich, dass die Erfassung und Übertragung der gewonnenen Sensorinformationen in ihrer Abfolge durch die Ultraschallsensoren 14 erfolgen.
Das Fahrunterstützungssystem 12 umfasst weiterhin eine Steuerungseinheit 16, die über einen Datenbus 18 mit den Ultraschallsensoren 14 verbunden ist. Die Steuerungseinheit 16 ist eine im automobilen Bereich typischerweise als ECU (electronic control unit) bezeichnete Recheneinheit. Der Datenbus 18 ist beispielsweise nach einem der Standards CAN, LIN, LON oder Flexray ausgeführt.
Die Ultraschallsensoren 14 stellen sequentiell die Sätze 24 von Sensorinformationen bereit und übertragen diese an die Steuerungseinheit 16, welche die Sätze 24 von Sensorinformationen empfängt und sequentiell, d.h. in der vorgegebenen Reihenfolge, verarbeitet zur Erfassung der Umgebung 20 des Fahrzeugs 10. Das Fahrzeug 10 fährt in Fahrtrichtung 22, wie in Figur 1 dargestellt ist. Die Sensorinformationen werden somit ebenfalls als Sequenz von Sätzen 24 von Sensorinformationen von der Steuerungseinheit 16 verarbeitet. Dabei können die Sätze 24 von Sensorinformationen zu regelmäßigen Zeitabständen oder in einer beliebigen zeitlichen Abfolge verarbeitet werden. Wichtig ist lediglich, dass die Verarbeitung der Sensorinformationen in einzelnen Sätzen sequentiell erfolgt. Dies betrifft eine Verarbeitung von aktuellen Sätzen 24 von Sensorinformationen im unmittelbaren Betrieb, nicht jedoch eine nachgelagerte Verarbeitung im Sinne beispielsweise eines „post processing“.
Dabei kann es aufgrund der Datenverarbeitung und/oder der Datenübertragung durchaus zu Überschneidungen bei der Erfassung und Übertragung der Sensorinformationen kommen. Auch können die Sätze 24 von Sensorinformationen quasi als kontinuierlicher Datenstrom und/oder unterbrechungsfrei bereitgestellt werden, wobei dies nicht der Bereitstellung der Sensorinformationen als Sequenz von abgeschlossenen Sätzen 24 von Sensorinformationen widerspricht. Solche abgeschlossenen Sätze 24 von Sensorinformationen werden von den Ultraschallsensoren 14 als Ergebnisse einzelner Ultraschallmessungen bereitgestellt. Dabei können die Sätze 24 von Sensorinformationen durch Informationen in Bezug auf einzelne, in einem von dem jeweiligen Ultraschallsensor 14 empfangenen Ultraschallechosignal enthaltene Ultraschallechos gebildet werden. Alternativ oder zusätzlich kann können die Sätze 24 von Sensorinformationen jeweils durch das empfangene Ultraschallechosignal selbst gebildet werden, wobei ein Satz 24 von Sensorinformationen beispielsweise eine Hüllkurve des empfangenen Ultraschallechosignals ist.
Die Steuerungseinheit 16 verarbeitet im Zuge der Totwinkelüberwachung die Sätze 24 von Sensorinformationen, die von den hinten rechts bzw. links angeordneten Ultraschallsensoren 14 bereitgestellt werden, um potentielle Hindernisse im toten Winkel des Fahrzeugs 10 zu erfassen und den Führer des Fahrzeugs 10 zu warnen oder eine entsprechende Warnung beispielsweise im Rahmen von autonomen Fahrfunktionen zu erzeugen und weiter zu verarbeiten. Die Steuerungseinheit 16 führt eine Verarbeitung der sequentiellen Sätze 24 von Sensordaten durch, wie sich aus Figur 2 ergibt und nachstehend im Detail erläutert wird.
Nachfolgend wird unter Bezug auf Figur 9 ein Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen 24 von Sensorinformationen beschrieben, das mit dem Fahrunterstützungssystem 12 des Fahrzeugs aus Figur 1 durchgeführt wird. Das Verfahren wird unter zusätzlichem Bezug auf die Figuren 2 bis 8 erläutert.
Das Verfahren beginnt in Schritt S100 mit einem Ermitteln einer Verfügbarkeit eines aktuellen Satzes 24 von gültigen Sensorinformationen. Dazu wird zunächst die Verfügbarkeit des aktuellen Satzes 24 von Sensorinformationen ermittelt, d.h. es erfolgt eine Prüfung, ob ein aktueller Satz 24 Sensorinformationen zur Verarbeitung vorliegt. Die Verfügbarkeit eines aktuellen Satzes 24 von Sensorinformationen wird einerseits proaktiv ermittelt, indem die Funktion des jeweiligen Ultraschallsensors 14 und/oder der Steuerungseinheit 16 überwacht wird. Dabei werden insbesondere low level Funktionen in Bezug auf den Ultraschallsensor 14 überwacht, um zu ermitteln, ob der jeweilige Ultraschallsensor 14 für die Bereitstellung eines aktuellen Satzes 24 von gültigen Sensorinformationen zur Verfügung steht oder nicht. Im Detail wird einer Verfügbarkeit eines aktuellen Satzes 24 von gültigen Sensorinformationen basierend auf einer Task-Planung eines Betriebssystems ermittelt. Dabei wird ermittelt, ob die Sensorinformationen durch einen OS-Scheduler verzögert werden, wenn zum Beispiel verschiedene Programme oder Tasks in unterschiedlich langen Zyklen abgearbeitet werden. Wenn z.B. ein Messzyklus des Ultraschallsensors 42ms dauert, und ein Zyklus für die Signalverarbeitung in der Steuerungseinheit dauert 40ms, dann kann alle ~21 Zyklen die Frist für die sequentielle Verarbeitung nicht eingehalten werden. Dadurch ergibt sich ein Verarbeitungszyklus 26, in dem alle ~21 Zyklen kein aktueller Satz 24 von Sensorinformationen bereitgestellt ist, wodurch die Verarbeitung der Sensorinformationen verzögert wird, wie in Figur 2 a) dargestellt ist. Dort sind unten die Bereitstellung der Sätze 24 von Sensorinformationen durch den jeweiligen Ultraschallsensor 14 und oben die Verarbeitung der Sätze 24 von Sensorinformationen durch die Steuerungseinheit 16 dargestellt.
Die Verfügbarkeit eines aktuellen Satzes 24 von Sensorinformationen wird außerdem jeweils aktuell ermittelt, indem eine Verfügbarkeit des jeweiligen Ultraschallsensors 14 zur Bereitstellung eines aktuellen Satzes 24 von gültigen Sensorinformationen basierend auf Anforderungen an eine Kalibrierung des jeweiligen Ultraschallsensors 14 und/oder einer Änderung einer Messstrategie mit dem Ultraschallsensor 14 ermittelt wird. Kalibrierungen können basierend auf einem Temperaturkompensationsalgorithmus zur Kompensation von Temperaturänderungen im Betrieb erforderlich werden. Entsprechendes kann für andere, veränderliche Umgebungsbedingungen gelten, beispielsweise Luftdruck oder relative Luftfeuchtigkeit. Auch kann abhängig von aktuellem oder vorherigem Niederschlag eine Anpassung an das Auftreten von Gischt durchgeführt werden. Beim Durchführen der Kalibrierung kann zumindest ein Satz 24 von Sensorinformationen nicht bereitgestellt werden. Wenn ein aktueller Satzes 24 von Sensorinformationen vorliegt, wird zusätzlich geprüft, ob diese Sensorinformationen gültig sind. Es wird also die Gültigkeit des aktuellen Satzes 24 von gültigen Sensorinformationen ermittelt, indem der entsprechende aktuelle Satz 24 von Sensorinformationen auf seinen Informationsgehalt überprüft wird. Dazu gehört, dass ungültige Informationen in dem aktuellen Satz 24 von Sensorinformationen ermittelt werden. Die ungültige Information kann durch ein Fehlen einer erwarteten Information und/oder ein Vorhandensein einer nicht erwarteten Information gegeben sein. Wenn also beispielsweise ein Echo eines Objekts in der Umgebung 20 des Fahrzeugs 10 nicht in dem Satz 24 von Sensorinformationen enthalten ist, kann dieser Satz 24 von Sensorinformationen ungültig sein, beispielsweise wenn die von dem Ultraschallsensor 14 empfangene reflektierte Energie des Echos des Objekts eine Mindestschwelle nicht überschreitet und beispielsweise im Rahmen einer Rauschfilterung herausgefiltert wird oder unterhalb eines Grenzwerts für den Empfang von Echos liegt.
Figur 3 zeigt einen beispielhaften Verlauf eines Ultraschallechosignals 28, wie es von dem Ultraschallsensor 14 aufgenommen wird. Darin sind verschiedene, beispielhafte Peaks zu den Zeitpunkten ti, t2 und ts zu erkennen. Zusätzlich ist ein Grenzwert 30 für valide Echos eingezeichnet. Wenn das Ultraschallechosignal 28 den Grenzwert 30 für valide Echos überschreitet, wird dies als Echo erkannt und somit Teil des entsprechenden Satzes 24 von Sensorinformationen, wie zum Zeitpunkt t3. Außerdem ist ein Grenzwert 32 für freespace dargestellt, der hier nicht betrachtet wird. Für den Zeitpunkt ti liegt das Ultraschallechosignal 28 unterhalb beider Grenzwerte 30, 32. Es wird kein valides Echo erkannt, und der Peak wird nicht Teil eines Satzes 24 von Sensorinformationen. Zum Zeitpunkt t2 liegt das Ultraschallechosignal 28 zwar oberhalb des Grenzwerts 32 für freespace, aber unterhalb des Grenzwerts 30 für valide Echos. Es wird kein valides Echo erkannt, und der Peak wird nicht Teil eines Satzes 24 von Sensorinformationen.
Das Ermitteln der ungültigen Informationen in dem aktuellen Satz 24 von Sensorinformationen basierend auf einem Fenster 34 mit einer Mehrzahl Sätze 24 vorheriger, gültiger Sensorinformationen. Das Fenster 34 umfasst hier fünf vorherige Sätze 24 von gültigen Sensorinformationen. Im Falle, dass die vorherigen Sätze 24 von Sensorinformationen teilweise nicht gültige Sensorinformationen enthalten, können die fünf vorherige Sätze 24 von gültigen Sensorinformationen einem Überfenster 36 entnommen werden. Falls sich in dem Überfenster 36 weniger als fünf vorherige Sätze 24 von gültigen Sensorinformationen befinden, wird der Schritt mit den vorherigen Sätzen 24 von gültigen Sensorinformationen in dem Überfenster 36 durchgeführt, unabhängig von deren Anzahl. Fenster 34 und Überfenster 36 wandern mit dem aktuellen Satz 24 von Sensorinformationen mit. Fenster 34 und Überfenster 36 sind in Figur 2 schematisch dargestellt ist, wie sie zu dem Satz 24 von Sensorinformationen gehören, der mit „908“ beschriftet ist.
Im Detail können in jedem Satz 24 von Sensorinformationen enthaltene Informationen wie Anzahl, Entfernung, Amplitude und/oder Standardabweichung von empfangenen Echos ausgewertet werden, um zu überprüfen, ob die Sensorinformationen gültig sind. Wenn beispielsweise ein einzelnes Echo, das über seine Entfernung und Amplitude über mehrere Sätze 24 von Sensorinformationen verfolgt werden kann, aber in dem aktuellen Satz 24 von Sensorinformationen nicht enthalten ist, kann dies anzeigen, dass der aktuelle Satz 24 von Sensorinformationen ungültig ist.
Das Ermitteln einer Verfügbarkeit eines aktuellen Satzes 24 von gültigen Sensorinformationen ist schematisch in Figur 4 anhand eines einzelnen Objekts 38 visualisiert. In Schritt ID 928 wird das Objekt 38 nicht detektiert. Hier wird kein Satz 24 von aktuellen Sensorinformationen bereitgestellt basierend auf einer Verzögerung durch den OS-Scheduler, wie oben in Bezug auf Figur 2 diskutiert wurde. In Schritt ID 933 wird das Objekt 38 ebenfalls nicht detektiert, weil wegen einer Kalibrierung des Ultraschallsensors 14 ebenfalls kein Satz 24 von aktuellen Sensorinformationen bereitgestellt wird.
Die Figuren 5 bis 8 betreffen eine Nachverfolgung eines einzelnen Objekts 38 in den Sätzen 24 von Sensorinformationen gemäß den Schritt IDs 934 bis 937, wie es in Figur 4 dargestellt ist. Die Figuren 5 bis 8 zeigen jeweils einen Verlauf des Grenzwerts 30 für valide Echos und des Grenzwerts 32 für freespace.
Figur 5 zeigt Schritt ID 934, in dem das Objekt 38 durch sein Echo oberhalb des Verlaufs der Grenzwerte 30, 32 erfasst wird. Dazu ist beispielhaft ein Peak für das jeweils empfangene Echo durch das Objekt 38 oberhalb des Verlaufs der Grenzwerte 30, 32 markiert. Der zu Schritt ID 934 gehörende Satz 24 von Sensorinformationen wird somit als gültig erkannt.
Wie in Figur 6 für Schritt ID 935 dargestellt ist, wird zu dem Objekt 38 kein Echo erfasst. Wie weiter in Figur 7 für Schritt ID 936 dargestellt ist, wird zu dem Objekt 38 ein Echo erfasst, das unterhalb des Verlaufs der Grenzwerte 30, 32 liegt. Ein beispielhafter Peak für das empfangene Echo durch das Objekt 38 ist unterhalb der des Verlaufs der Grenzwerte 30, 32 markiert. Die zu den Schritt IDs 935 und 936 gehörenden Sätze 24 von Sensorinformationen werden somit als nicht gültig erkannt.
Figur 8 zeigt eine entsprechende Darstellung für Schritt ID 937. Das Objekt 38 wird wieder durch sein Echo oberhalb des Verlaufs der Grenzwerte 30, 32 erfasst. Dazu ist wieder beispielhaft ein Peak für das jeweils empfangene Echo durch das Objekt 38 oberhalb des Verlaufs der Grenzwerte 30, 32 markiert. Der zu Schritt ID 937 gehörende Satz 24 von Sensorinformationen wird somit als gültig erkannt.
Schritt S110 betrifft bei negativer Verfügbarkeit eines aktuellen Satzes 24 von gültigen Sensorinformationen ein Bereitstellen eines aktuellen Satzes 24 von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz 24 von Sensorinformationen. Dies betrifft in Figur 4 die fehlenden Sätze 24 von Sensorinformationen der Schritt IDs 928, 933, 935 und 936.
Gemäß der ersten Ausführungsform wird dazu ein vorheriger, gültiger Satz 24 von Sensorinformationen als aktueller Satz 24 von gültigen Sensorinformationen bereitgestellt. Dies ist in Figur 2 b) schematisch dargestellt, indem die vorherigen Sätze 24 von gültigen Sensorinformationen jeweils wiederholt für die Steuerungseinheit 16 bereitgestellt werden, wie dort für die Sätze 24 von Sensorinformationen, die mit „68“ bzw. „908“ beschriftet sind und Sätze 24 mit gültigen Sensorinformationen darstellen, schematisch gezeigt ist. Wenn der letzte Satz 24 vorheriger, gültiger Sensorinformationen zu lange zurückliegt, kann der aktuelle Satz 24 gültiger Sensorinformationen alternativ durch den vorherigen Satz 24 von Sensorinformationen bereitgestellt werden unabhängig von dessen Gültigkeit. Dies kann durchgeführt werden, wenn sich beispielsweise in dem Fenster 34 kein Satz 24 von gültigen Sensorinformationen befindet. In einer alternativen Ausführungsform umfasst das Bereitstellen eines aktuellen Satzes 24 von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz 24 von Sensorinformationen ein Bereitstellen des aktuellen Satzes 24 von gültigen Sensorinformationen als synthetischen Satz 24 von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze 24 von gültigen Sensorinformationen.
Der synthetische Satz 24 von Sensorinformationen wird basierend auf den vorherigen Sätzen 24 von Sensorinformationen in dem Fenster 34 bereitgestellt, Dabei kann der aktuelle Satz 24 von gültigen Sensorinformationen basierend auf einer linearen Regression ausgehend von den vorherigen Sätzen 24 von Sensorinformationen, basierend auf einer Duplizierung von Eigenschaften der vorherigen Sätze 24 von Sensorinformationen, basierend auf eine Anpassung der Sensorinformationen an eine Kurve für erwartete Sensorinformationen abhängig von einer aktuellen Fahrsituation, und/oder einer Markov-Kette mit Wahrscheinlichkeiten für das Erzeugen des synthetischen Satzes 24 von Sensorinformationen bereitgestellt werden.
In Schritt S120 erfolgt ein Verarbeiten des aktuellen Satzes 24 von gültigen Sensorinformationen, wobei der aktuelle Satz 24 von gültigen Sensorinformationen entweder von dem Ultraschallsensor 14 bereitgestellt wurde, oder in Schritt S110 basierend auf zumindest einem vorherigen Satz 24 von Sensorinformationen bereitgestellt wurde.
Bezugszeichenliste
10 Fahrzeug
12 Fahrunterstützungssystem
14 Ultraschallsensor
16 Steuerungseinheit
18 Datenbus
20 Umgebung
22 Fahrtrichtung
24 Satz von Sensorinformationen
26 Verarbeitungszyklus
28 Ultraschallechosignal
30 Grenzwert „Echo“
32 Grenzwert „freespace“
34 Fenster
36 Überfenster
38 Objekt

Claims

Patentansprüche Verfahren zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen (24) von Sensorinformationen, insbesondere von Sensorinformationen eines Ultraschallsensors (14) eines Fahrunterstützungssystems (12) für ein Fahrzeug (10) zur Erfassung einer Umgebung (20) des Fahrzeugs (10), mit einer Steuerungseinheit (16), insbesondere zur Bereitstellung einer Fahrunterstützungsfunktion für das Fahrzeug (10), umfassend die Schritte
Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen, und bei negativer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen Bereitstellen eines aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz (24) von Sensorinformationen. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass das Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen ein Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf einer Task-Planung eines Betriebssystems umfasst. Verfahren nach einem der Ansprüche 1 oder 2, dadurch gekennzeichnet, dass das Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen ein Ermitteln einer Verfügbarkeit des Ultraschallsensors (14) zur Bereitstellung eines aktuellen Satzes (24) von gültigen Sensorinformationen umfasst, insbesondere basierend auf Anforderungen an eine Kalibrierung des Ultraschallsensors (14) und/oder einer Änderung einer Messstrategie mit dem Ultraschallsensor (14). Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Ermitteln einer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen ein Ermitteln ungültiger Informationen in dem aktuellen Satz (24) von Sensorinformationen umfasst. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass das Ermitteln ungültiger Informationen in dem aktuellen Satz (24) von Sensorinformationen ein Bereitstellen eines beweglichen Fensters (28) mit einer Mehrzahl Sätze (24) vorheriger Sensorinformationen und ein Ermitteln der ungültigen Informationen in dem aktuellen Satz (24) von Sensorinformationen basierend auf dem Fenster (28) mit der Mehrzahl Sätze (24) vorheriger Sensorinformationen umfasst. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass das Bereitstellen eines beweglichen Fensters (28) mit einer Mehrzahl Sätze (24) vorheriger Sensorinformationen ein Bereitstellen eines beweglichen Fensters (28) mit einer Mehrzahl Sätze (24) vorheriger, gültiger Sensorinformationen umfasst. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Bereitstellen eines aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz (24) von Sensorinformationen ein Bereitstellen eines vorherigen Satzes (24) von Sensorinformationen als aktuellen Satz (24) von gültigen Sensorinformationen umfasst, insbesondere ein Bereitstellen des unmittelbar vorherigen Satzes (24) von gültigen Sensorinformationen. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Bereitstellen eines aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz (24) von Sensorinformationen ein Bereitstellen des aktuellen Satzes (24) von gültigen Sensorinformationen als synthetischen Satz (24) von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze (24) von Sensorinformationen umfasst. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass das Bereitstellen des aktuellen Satzes (24) von gültigen Sensorinformationen als synthetischen Satz (24) von Sensorinformationen basierend auf einer Mehrzahl vorheriger Sätze (24) von Sensorinformationen ein Bereitstellen des aktuellen Satzes (24) von gültigen Sensorinformationen basierend auf einer linearen Regression ausgehend von den vorherigen Sätzen (24) von Sensorinformationen, basierend auf einer Duplizierung von Eigenschaften der vorherigen Sätze (24) von Sensorinformationen, basierend auf eine Anpassung der Sensorinformationen an eine Kurve für erwartete Sensorinformationen abhängig von einer aktuellen Fahrsituation, und/oder einer Markov-Kette mit Wahrscheinlichkeiten für das Erzeugen des synthetischen Satzes (24) von Sensorinformationen umfasst. Fahrunterstützungssystem (12) für ein Fahrzeug (10) mit einem Ultraschallsensor (14), der ausgeführt ist, sequentiell Sätze (24) von Sensorinformationen bereitzustellen, und einer Steuerungseinheit (16), die ausgeführt ist, Sätze (24) von Sensorinformationen sequentiell zu verarbeiten, insbesondere zur Erfassung einer Umgebung (20) des Fahrzeugs (10), wobei das Fahrunterstützungssystem (12) ausgeführt ist, das Verfahren nach einem der vorhergehenden Ansprüche durchzuführen. Fahrunterstützungssystem (12) nach Anspruch 10, dadurch gekennzeichnet, dass das Fahrunterstützungssystem (12) eine Verarbeitungseinheit aufweist, die ausgeführt ist, die sequentiell bereitgestellten Sätzen (24) von Sensorinformationen von dem Ultraschallsensor (14) zu empfangen, die Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen zu ermitteln, bei negativer Verfügbarkeit eines aktuellen Satzes (24) von gültigen Sensorinformationen einen aktuellen Satz (24) von gültigen Sensorinformationen basierend auf zumindest einem vorherigen Satz (24) von Sensorinformationen bereitzustellen, und einen entsprechenden aktuellen Satz (24) von gültigen Sensorinformationen an die Steuerungseinheit (16) zu übertragen.
PCT/EP2023/068959 2022-07-12 2023-07-10 Verfahren und fahrunterstützungssystem zum sequentiellen verarbeiten von sequentiell bereitgestellten sätzen von sensorinformationen WO2024013048A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102022117279.1 2022-07-12
DE102022117279.1A DE102022117279A1 (de) 2022-07-12 2022-07-12 Verfahren und Fahrunterstützungssystem zum sequentiellen Verarbeiten von sequentiell bereitgestellten Sätzen von Sensorinformationen

Publications (1)

Publication Number Publication Date
WO2024013048A1 true WO2024013048A1 (de) 2024-01-18

Family

ID=87312019

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2023/068959 WO2024013048A1 (de) 2022-07-12 2023-07-10 Verfahren und fahrunterstützungssystem zum sequentiellen verarbeiten von sequentiell bereitgestellten sätzen von sensorinformationen

Country Status (2)

Country Link
DE (1) DE102022117279A1 (de)
WO (1) WO2024013048A1 (de)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010033207A1 (de) 2010-08-03 2012-02-09 Valeo Schalter Und Sensoren Gmbh Verfahren und Vorrichtung zur Umfeldüberwachung für ein Fahrzeug
DE102018119263B3 (de) * 2018-08-08 2019-12-19 Valeo Schalter Und Sensoren Gmbh Erkennung eines beweglichen Objekts und einer Annäherung eines Objekts
GB2576206A (en) * 2018-08-10 2020-02-12 Jaguar Land Rover Ltd Sensor degradation
KR20210037407A (ko) * 2019-09-27 2021-04-06 엘아이지넥스원 주식회사 빅데이터 기반의 소나 성능 검증 시스템 및 그 방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018220024B3 (de) 2018-11-22 2020-03-12 Audi Ag Verfahren zur Fusion von Sensordaten von mehreren Sensoren und Fusionsvorrichtung zum Fusionieren von Sensordaten von mehreren Sensoren

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010033207A1 (de) 2010-08-03 2012-02-09 Valeo Schalter Und Sensoren Gmbh Verfahren und Vorrichtung zur Umfeldüberwachung für ein Fahrzeug
DE102018119263B3 (de) * 2018-08-08 2019-12-19 Valeo Schalter Und Sensoren Gmbh Erkennung eines beweglichen Objekts und einer Annäherung eines Objekts
GB2576206A (en) * 2018-08-10 2020-02-12 Jaguar Land Rover Ltd Sensor degradation
KR20210037407A (ko) * 2019-09-27 2021-04-06 엘아이지넥스원 주식회사 빅데이터 기반의 소나 성능 검증 시스템 및 그 방법

Also Published As

Publication number Publication date
DE102022117279A1 (de) 2024-01-18

Similar Documents

Publication Publication Date Title
EP2191293B1 (de) Objektklassifizierungsverfahren, einparkhilfeverfahren und einparkhilfesystem
EP2081052B1 (de) Detektionsvorrichtung eines Fahrzeugs und entsprechendes Detektionsverfahren
EP2867093B1 (de) Verfahren und system zur informationsnutzung
DE102005026386A1 (de) Verfahren und Vorrichtung zum Bestimmen von Freiflächen in der Umgebung eines Fahrzeugs
DE10133945A1 (de) Verfahren und Vorrichtung zum Austausch und zur Verarbeitung von Daten
DE102010045657A1 (de) Umfeld-Überwachungssystem für ein Fahrzeug
DE102017103275A1 (de) Verfahren zum Erfassen eines Objekts in einem Umgebungsbereich eines Kraftfahrzeugs mithilfe eines Ultraschallsensors mit verbesserter Filterung von Bodenreflexionen, Steuergerät, Ultraschallsensorvorrichtung sowie Kraftfahrzeug
EP1517157A1 (de) Verfahren und Vorrichtung zur Abstandsmessung
DE102009028451A1 (de) Kollisionsüberwachung für ein Kraftfahrzeug
EP1801613B1 (de) Verfahren und Vorrichtung zum Erfassen von Objekten in der Umgebung eines Fahrzeugs
WO2021069137A1 (de) Verfahren und fahrerassistenzsystem zum klassifizieren von objekten in der umgebung eines fahrzeugs
EP2895880B1 (de) Verfahren zur funktionsüberwachung von ultraschallsensoren
EP2254104B1 (de) Verfahren zum automatischen Erkennen einer Situationsänderung
WO2024013048A1 (de) Verfahren und fahrunterstützungssystem zum sequentiellen verarbeiten von sequentiell bereitgestellten sätzen von sensorinformationen
DE102014118035B4 (de) Verfahren zum Erkennen einer Abschattung einer Sensoreinrichtung eines Kraftfahrzeugs durch ein Objekt, Recheneinrichtung, Fahrerassistenzsystem sowie Kraftfahrzeug
DE60303577T2 (de) Verfahren zum Überwachen der Umgebung eines Fahrzeugs
WO2022122339A1 (de) Verfahren und system zum testen eines steuergeräts eines fahrzeugs
WO2021185722A1 (de) Verfahren zum überwachen eines schwenkbereichs einer tür während eines schwenkvorgangs, computerprogrammprodukt, computerlesbares speichermedium sowie schwenkbereichsüberwachungssystem
EP2605039A1 (de) Verfahren zur Erkennung von Objekten im Umfeld eines Fahrzeugs
WO2021104805A1 (de) Verfahren zum betreiben einer umgebungserfassungsvorrichtung mit einer gridbasierten auswertung und mit einer fusionierung, sowie umgebungserfassungsvorrichtung
DE102018130431A1 (de) Verfahren zum Prognostizieren eines verfrühten Spurwechsels, Fahrerassistenzsystem, Kraftfahrzeug und Computerprogrammprodukt
DE102019218078A1 (de) Bestimmung eines Sachverhalts im Umfeld eines Kraftfahrzeugs
DE102019101127A1 (de) Verfahren zum Verarbeiten mittels Ultraschall erhaltener Daten
DE102018126497A1 (de) Verfahren zur Überprüfung einer Reichweite einer optischen Detektionsvorrichtung und optische Detektionsvorrichtung
EP2320248B2 (de) Verfahren zum Erfassen eines Objekts in einem Totwinkelbereich eines Fahrzeugs und Fahrerassistenzsystem zur Erfassung eines Objekts in einem Totwinkelbereich eines Fahrzeugs

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23741625

Country of ref document: EP

Kind code of ref document: A1