EP3871134A1 - Method and device for testing a driver assistance system - Google Patents

Method and device for testing a driver assistance system

Info

Publication number
EP3871134A1
EP3871134A1 EP19797196.3A EP19797196A EP3871134A1 EP 3871134 A1 EP3871134 A1 EP 3871134A1 EP 19797196 A EP19797196 A EP 19797196A EP 3871134 A1 EP3871134 A1 EP 3871134A1
Authority
EP
European Patent Office
Prior art keywords
traffic scenario
traffic
parameter
test
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
EP19797196.3A
Other languages
German (de)
French (fr)
Inventor
Emre Kaplan
Andrea LEITNER
Ahmetcan ERDOGAN
Markus NAGER
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AVL List GmbH
Original Assignee
AVL List GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AVL List GmbH filed Critical AVL List GmbH
Publication of EP3871134A1 publication Critical patent/EP3871134A1/en
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M17/00Testing of vehicles
    • G01M17/007Wheeled or endless-tracked vehicles
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B23/00Testing or monitoring of control systems or parts thereof
    • G05B23/02Electric testing or monitoring
    • G05B23/0205Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults
    • G05B23/0218Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults
    • G05B23/0256Electric testing or monitoring by means of a monitoring system capable of detecting and responding to faults characterised by the fault detection method dealing with either existing or incipient faults injecting test signals and analyzing monitored process response, e.g. injecting the test signal while interrupting the normal operation of the monitored system; superimposing the test signal onto a control signal during normal operation of the monitored system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W60/00Drive control systems specially adapted for autonomous road vehicles
    • B60W60/001Planning or execution of driving tasks
    • B60W60/0011Planning or execution of driving tasks involving control alternatives for a single driving scenario, e.g. planning several paths to avoid obstacles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00Program-control systems
    • G05B2219/20Pc systems
    • G05B2219/26Pc applications
    • G05B2219/2637Vehicle, car, auto, wheelchair
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2218/00Aspects of pattern recognition specially adapted for signal processing

Definitions

  • the present invention relates to a method and a device for testing a driver assistance system for a vehicle in a test environment.
  • ADAS advanced driver assistance systems
  • Support ranges from the mere display of possibly relevant information (e.g. issuing a warning by a lane change assistant) to semi-autonomous interventions (e.g. regulation of the torque applied to the wheel axles by an anti-lock braking system) to fully autonomous interventions in the control of the vehicle (e.g. adaptive cruise control) thanks to an adaptive cruise control (ACC).
  • ADAS advanced driver assistance systems
  • the basis for such driver assistance systems is formed by sensor data, for example provided signals from ultrasound sensors, radar sensors or cameras, which can be used to determine the current driving situation and in response to this the function of the respective driver assistance system can be carried out.
  • sensor data for example provided signals from ultrasound sensors, radar sensors or cameras, which can be used to determine the current driving situation and in response to this the function of the respective driver assistance system can be carried out.
  • the current driving situation must be able to be classified in a highly reliable manner using the sensor data.
  • certain rules or criteria associated with a driving situation are set up, and if they are fulfilled, it can be concluded that a known driving situation exists. Fulfilling the rule or criteria acts, for example, as a trigger for an action by the driver assistance system.
  • a traffic scenario in which a neighboring vehicle in front of the vehicle equipped with the driver assistance system (EGO vehicle) can cut into the same lane can be recognized by the fact that a sensor-detected transverse distance decreases perpendicular to the direction of travel to the neighboring vehicle and finally, at least essentially, assumes the value 0 if the neighboring vehicle is immediately in front of the EGO vehicle.
  • classified sensor data are generally provided with respect to a known traffic scenario and the driver assistance system to be tested is fed with these classified sensor data.
  • a large number of sensor data which may also characterize slight variations in the traffic scenario, are generally required.
  • WO 2017/210222 A1 discloses the automatic generation of simulation scenarios for validating a driver assistance system.
  • a large number of such simulation scenarios can be generated in particular by varying recorded scenarios, the variations being based on a data stream which is generated by isolating differences between similar recorded scenarios.
  • a first aspect of the invention relates to a, in particular computer-aided, method for testing a driver assistance system for a vehicle in a test environment, comprising the following working steps: (i) determining traffic scenario descriptions, each of which describes a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, characterize and have at least one parameter by means of which the respective traffic scenario can be adapted to boundary conditions, the traffic scenario descriptions preferably, in particular in each case, being stored in a traffic scenario file in which the at least one parameter is stored in a predetermined, in particular generic, format; (ii) Selecting at least one traffic scenario description based on an input by a user, in particular an indication of the at least one parameter or at least one value or entered by the user Range of values for the at least one parameter and / or of predetermined criteria; and (iii) generating a test case on the basis of the at least one selected traffic scenario description and at least one predetermined value, in particular entered by the user, for the at least one parameter and preferably further
  • a boundary condition in the sense of the invention is, in particular, a traffic situation, weather, an initial speed of the vehicle with the driver assistance system to be tested (hereinafter: test vehicle) and / or other road users, a road geometry or a course of the road, a distance from the test vehicle one or more other road users, a configuration of the test vehicle and / or other road users such as a load, for example a trailer, and / or the like.
  • test vehicle an initial speed of the vehicle with the driver assistance system to be tested
  • a boundary condition can in particular be any conceivable factor that influences the control of the vehicle equipped with the driver assistance system by the driver assistance system.
  • a test case in the sense of the invention is in particular a script, e.g. a sequence of actions by road users, which enables testing of a driver assistance system.
  • a test case can be, for example, a script, on the basis of which a simulation for testing the driver assistance system can be carried out.
  • a test environment in the sense of the invention is, in particular, the content of a simulation that generates a concrete (virtual) implementation of a traffic scenario.
  • a test environment can be, for example, a simulated environment of the test vehicle, in which at least other road users, possibly also the test vehicle itself, move in a predefined manner, in particular carry out predetermined actions.
  • a predetermined format in the sense of the invention is in particular a predefined (data) structure.
  • a predetermined format can, for example, correspond to a certain scheme, for example a certain arrangement or sequence of several parameters and / or a certain coding of the at least one parameter in the traffic scenario file. It is conceivable, for example, that several parameters are stored in a table, in particular in a two- or three-dimensional, possibly also multidimensional, matrix.
  • Determining traffic scenario descriptions within the meaning of the invention is in particular capturing, e.g. when performing real or simulated tests. Determining traffic scenario descriptions can also be reading in, e.g. from databases and / or the like.
  • the invention is based in particular on the approach to select at least one traffic scenario description from preferably a plurality of traffic scenario descriptions, each characterizing a particular traffic scenario and preferably in a predetermined, in particular generic, format, and on the basis thereof at least one test case to generate a test environment that is suitable for testing a driver assistance system.
  • the traffic scenarios characterized by the traffic scenario descriptions preferably correspond to specific traffic scenarios such as cut-in maneuvers (single-maneuvers) or a cut-out maneuvers (maneuvering out).
  • the traffic scenario descriptions preferably describe the respective traffic scenario in a general, generic form, however, without the traffic scenario descriptions specifying a specific execution of these maneuvers.
  • the test case on the other hand, preferably corresponds to a concrete implementation of the traffic scenario, which is characterized by the at least one selected description of the traffic scenario.
  • Both the at least one traffic scenario description can be selected on the basis of a user input, for example by specifying at least one parameter or entered values or value ranges for one or more parameters which adapt, in particular, define boundary conditions of the traffic scenarios, and the at least one test case who has at least one selected traffic scenario description are generated.
  • the parameters can serve, for example, as variables in the traffic scenarios.
  • the user can input that the test vehicle, i.e. the vehicle equipped with the driver assistance system, drives straight ahead in a first lane at a speed selected by the user and is overtaken by another vehicle in an adjacent second lane, the other vehicle being in the first lane at a distance selected by the user from the test vehicle reevers.
  • a database with traffic scenario files stored therein which contain the traffic scenario descriptions in the specified format, can be searched in the following in order to select traffic scenario descriptions with which the specific traffic scenario characterized by the user input can be implemented.
  • the parameters and / or boundary conditions entered by the user can then, like values in a mathematical function, be inserted into the at least one selected traffic scenario description in order to generate at least one test case with which a simulation is carried out and the driver assistance system is thereby tested can be.
  • At least one traffic scenario description in particular from a large number of traffic scenario descriptions, can be selected by the user input, it is possible to dispense with a possibly complex, scenario- or maneuver-specific preparation of data records for generating test environments.
  • test runs for testing a driver assistance system can therefore be carried out particularly easily and quickly and / or in large numbers.
  • the traffic scenario descriptions can be stored in a predetermined, preferably generic, format, access to a wide range of traffic scenarios is made possible.
  • the invention makes it possible to further improve the testing of driver assistance systems, in particular to simplify them and / or to make them more flexible.
  • the method further comprises the following step: performing a test run using the test case generated.
  • the method also has the following work steps: (i) determining at least one data set which characterizes at least one, in particular real, traffic scenario; and (ii) identifying at least one parameter in the at least one determined data set, by means of which the respective traffic scenario can be adapted to boundary conditions, in particular an initial speed of an EGO vehicle, to which the traffic scenario relates.
  • An EGO vehicle in the sense of the invention is in particular a vehicle from the point of view of which the, in particular real, traffic scenario is running.
  • the identification of at least one parameter in the at least one data record allows, in a particularly reliable manner, subsequently to select at least one traffic scenario description from a multiplicity of traffic scenario descriptions based on the user input.
  • at least one traffic scenario can thus be selected based on the identified parameter, e.g. all traffic scenario descriptions that characterize a traffic scenario corresponding to a determined data set and therefore also have the identified parameter.
  • the number of possible traffic scenarios relevant for testing the driver assistance system can be increased in this way.
  • the at least one data record is preferably determined on the basis of a sensor data stream that is generated, for example, by a sensor device for detecting the (real) vehicle environment of the EGO vehicle, in particular extracted from the sensor data stream.
  • the sensor data stream can be processed, for example, in such a way that the vehicle environment of the EGO vehicle is classified, that is to say, for example, objects such as other road users, traffic signs, obstacles and / or the like are identified and labeled.
  • the at least one data record can then be generated from the processed sensor data stream.
  • the at least one determined data record is preferably based on prepared sensor data that was generated when a real vehicle environment was detected and that contains additional meta information, ie information derived from raw data and therefore going beyond the pure physical information contained in the sensor data stream.
  • This meta information in particular allows the identification of the at least one parameter, by means of which the respective traffic scenario can be adapted to boundary conditions.
  • the identification of the at least one parameter is carried out by means of a comparison of a classified vehicle environment in chronologically successive scenes of the at least one traffic scenario characterized by the at least one determined data record.
  • a classified vehicle environment in the sense of the invention is in particular a description of the vehicle environment of a vehicle that goes beyond pure physical information.
  • the classified vehicle environment which is preferably characterized by the data set provided, can in particular contain meta information which makes the classified vehicle environment comparable at different times.
  • the classified vehicle environment preferably contains meta information, on the basis of which in individual scenes of the at least one traffic scenario characterized and characterized by the at least one determined data record, objects can be identified and labeled, e.g. whose positions, their speed, their configuration and / or the like are comparable to one another in the successive scenes.
  • the at least one parameter can be identified in a particularly reliable and / or automated manner.
  • the states of the elements of the vehicle environment ie, for example, the objects identified in the vehicle environment, such as other road users, are preferably derived from the classified vehicle environment in each scene of the at least one traffic scenario characterized by the at least one determined data set and compared with one another in chronologically successive scenes , especially subtracted from each other.
  • a state of an element of the vehicle environment in the sense of the invention contains in particular at least one physical variable that characterizes the element, in particular relative to the EGO vehicle, for example the speed of the element, the position of the element, the configuration of the element and / or similar. If the state of an element changes in the successive scenes, the at least one parameter is preferably identified as the physical variable that causes the change in the state. As a result, the at least one parameter can be identified particularly easily.
  • the speed and size of another road user can be taken from the classified vehicle environment in a first scene and compared with the speed or size of this road user in a subsequent second scene.
  • the speed of the road user will usually change in the course of the traffic scenario and can therefore be identified as a parameter.
  • the size of the road user usually does not change and is therefore not identified as a parameter.
  • the method further comprises the following step: generating at least one traffic scenario description on the basis of the determined data record or the determined data records, the traffic scenario description characterizing the determined traffic scenario and the at least one identified parameter in the predetermined format is filed.
  • the storage of the at least one identified parameter in the specific format corresponds in a preferred manner to the generation of a standardized format or a standardized traffic scenario description.
  • a standardized definition of the at least one corresponding traffic scenario which is characterized by the at least one determined data record, is stored.
  • the at least one data record extracted from a sensor data stream can thereby be provided in particular in a generic form as a description of the traffic scenario and subsequently selected to generate at least one test case.
  • the method also has the following work step: storing the generated traffic scenario description, in particular the traffic scenario file, in a traffic scenario database, wherein further traffic scenario files are also stored in the traffic scenario database.
  • This traffic scenario database is preferably set up as a No-SQL database and contains a standardized definition of the at least one link. reverse scenarios that are characterized by the at least one determined data set.
  • the method further comprises at least one of the following work steps: (i) determining the predetermined values from a test run database; and / or (ii) determining the predetermined values from a user input, in particular via a user interface.
  • at least one value or range of values for the at least one parameter which e.g. has proven to be useful in previous tests of a driver assistance system, read from the test run database and used to generate the at least one test case.
  • a user can specify at least one value or range of values for the at least one parameter when inputting a user, in particular when inputting to select at least one traffic scenario description.
  • test cases can be generated automatically and quickly and / or the user can be given a high degree of control over the generation of the test cases and thus over the checking of the driver assistance system.
  • a second aspect of the invention relates to a device for testing a driver assistance system for a vehicle in a test environment, which has a means for determining traffic scenario descriptions, wherein the traffic scenario descriptions preferably each have a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, characterize it and have at least one parameter by means of which the respective traffic scenario can be adapted to boundary conditions.
  • the means for determining traffic scenario descriptions is also preferably set up to store the traffic scenario descriptions, in particular in each case, in a traffic scenario file in which the at least one parameter is stored in a predetermined, in particular generic, format.
  • the means for determining traffic scenario descriptions can in particular be set up as an interface or sensor device.
  • the device preferably has a means for selecting at least one traffic scenario description on the basis of an input from a user and / or predefined criteria, the means for selecting at least one traffic scenario description in particular as a first module a data processing device, for example as appropriate software.
  • the device preferably has a means for generating a test case on the basis of the at least one selected traffic scenario description and at least one predetermined value for the at least one parameter and preferably further traffic scenario descriptions, the test case with a concrete implementation of the the at least one selected traffic scenario description characterized traffic scenarios and preferably further traffic scenarios corresponding to the at least one predetermined value of the at least one parameter and is suitable for generating a test environment in which a driver assistance system can be subjected to a test run.
  • the means for generating the test case can in particular be set up as a second module of the data processing device, for example as appropriate software.
  • a means within the meaning of the present invention can be designed in terms of hardware and / or software, in particular one that is data or signal linked, preferably digital, processing, in particular microprocessor unit (CPU) or a, preferably with a memory and / or bus system Have module of such and / or one or more programs or program modules.
  • the CPU can be designed to process commands implemented as a program stored in a memory system, to detect input signals from a data bus and / or to output signals to a data bus.
  • a storage system can have one or more, in particular different, storage media, in particular optical, magnetic, solid-state and / or other non-volatile media.
  • the program can be designed in such a way that it embodies or is capable of executing the methods described here, so that the CPU can carry out the steps of such methods and thus in particular can control and / or monitor a reciprocating piston engine.
  • the device has a traffic scenario database in which traffic scenario descriptions are or are stored in the form of traffic scenario files, each of which has at least one parameter present in a predetermined, in particular generic, format, by means of which a through the respective traffic scenario description characterized traffic scenario can be adapted to boundary conditions.
  • the device also has an input device by means of which a user can make an input for selecting at least one traffic scenario description, in particular from traffic scenario descriptions stored in the traffic scenario database.
  • the device has a simulation device which is set up to carry out a test run using the test case generated.
  • the simulation device can have, for example, a simulation environment such as MATLAB / Simulink, IPG CarMaker, PreScan, SUMO SCANer or Virtual Test Drive (VTD).
  • FIG. 1 shows a preferred embodiment of a device according to the invention
  • FIG. 1 shows a preferred embodiment of a device 100 according to the invention for testing a driver assistance system for a vehicle in a test environment.
  • the device 100 has a traffic scenario database 2 with traffic scenario descriptions stored therein, each of which characterizes a specific traffic scenario, an input device 3 for selecting at least one of the traffic scenario descriptions stored in the traffic scenario database 2, and a data processing device 4 for creating a test case which, with a concrete realization of the traffic scenario selected by the at least one Description characterized traffic scenarios corresponds, based on the at least one selected traffic scenario description and a simulation device 5 for performing a test run using the test case generated, in particular a test environment generated based on the test case.
  • the traffic scenario descriptions preferably characterize a specific traffic scenario, for example a cut-in maneuver or a cut-out maneuver, in a generic manner.
  • the traffic scenario descriptions preferably each represent a traffic scenario, in particular at least one concrete driving maneuver of a vehicle involved in the traffic scenario, in an abstract form.
  • the traffic scenario descriptions are preferably stored in the traffic scenario database 2 in the form of traffic scenario files. Because of the preferred generic character of the traffic scenario descriptions, the traffic scenario files can be stored in a predetermined, in particular generic, format, regardless of the (specific) traffic scenario characterized in each case. This enables or at least simplifies, for example, an identification and / or a parameterization of the traffic scenario characterized by the respective traffic scenario description.
  • the traffic scenario descriptions stored in the traffic scenario database 2 can have, for example, at least one parameter, for example speeds and / or positions of the traffic participants contained in the traffic scenario, with which the respective traffic scenario can be adapted to boundary conditions.
  • the at least one parameter is preferably contained in the traffic scenario files.
  • the predefined format of the traffic scenario files can correspond to the predefined format of the at least one parameter with which the at least one parameter is stored in the traffic scenario file.
  • the predetermined format of the traffic scenario files can be predetermined or formed by the structure with which the at least one parameter is stored in the traffic scenario database 2. This enables the parameterization of the traffic scenarios.
  • At least one traffic scenario description can also be selected via the at least one parameter contained in the traffic scenario files.
  • a user can use the input device 3 to specify or specify at least one parameter which is to be taken into account when creating test cases.
  • the user can enter at least one value or range of values for the at least one parameter via the input device 3, so that those traffic scenario descriptions which have the corresponding parameter or in which the corresponding one can be selected can be selected in the database Parameter can take the entered value or range of values.
  • the input device 3 can have, for example, a graphical user interface, in which the user can provide information on the selection of the at least one traffic scenario description, in particular the at least one parameter.
  • the input device 3 thus preferably serves as a user interface.
  • the data processing device 4 is preferably set up to take into account at least one predefined value for the at least one parameter for generating the test case on the basis of the at least one selected traffic scenario description, the at least one predefined value being provided, for example, by the input device 3 can.
  • the traffic scenario characterized by the selected, preferably generic or abstract, traffic scenario description can be concretized, so that the test case preferably corresponds to a specific implementation of the traffic scenario.
  • the simulation device 5 can preferably generate a test environment in which a driver assistance system can be subjected to a test run.
  • the simulation device 5 can simulate a virtual, in particular dynamic, vehicle environment in which the reaction of the driver assistance system is tested in the traffic scenario specified by the test case.
  • the parameterization of the traffic scenarios each of which is characterized by a description of the traffic scenario, allows the driver to be tested accordingly. assistance systems under different conditions, for example in different weather conditions, on different road segments, at different vehicle speeds, with or without a trailer and / or the like.
  • FIG. 2 shows a preferred embodiment of a method 1 according to the invention for testing a driver assistance system for a vehicle in a test environment 6.
  • a sensor data stream 7 generated when a real vehicle environment is detected by means of a sensor device is preferably processed.
  • the sensor data stream 7 can in particular be prepared in such a way that parameterizable data records, each characterizing at least one traffic scenario, can be generated and stored in a database 2 as, in particular, generic traffic scenario descriptions.
  • these traffic scenario descriptions serve as the basis for the generation of at least one test case with which the test environment 6 can be generated for testing the driver assistance system.
  • the sensor data stream 7 is preferably processed in method step S1, in particular analyzed, e.g. by the vehicle environment mapped by the sensor data stream 7 is classified.
  • elements of the vehicle environment can be identified and labeled in individual snapshots of the vehicle environment obtained by sensor data fusion, which correspond to individual scenes of a real (specific) traffic scenario.
  • Meta information which goes beyond the pure physical information due to the sensory detection of the vehicle environment, is preferably generated.
  • object lists of objects recognized in the vehicle environment, such as other road users or traffic signs can be generated in this frame.
  • Such processing of the sensor data stream 7 can be implemented, for example, by a rule-based approach in which predetermined events are recognized and marked.
  • an environment model is preferably generated on the basis of the sensor data stream 7, which, for example, represents the objects around the EGO vehicle equipped with the sensor device.
  • step S2a on the basis of the sensor data stream 7 processed in this way, in particular from the meta-information generated in the process, such as an object list, at least one data record that contains at least one characterized, determined traffic scenario.
  • processed sensor data corresponding to individual traffic scenarios which are identified, for example, by recognized predetermined events, can be selectively extracted from the sensor data stream 7. This can also be called scenario mining.
  • At least one parameter is preferably identified for the at least one determined data set, by means of which the at least one traffic scenario characterized by the at least one determined data set is based on boundary conditions, such as weather conditions, a speed of the EGO vehicle and / or the like , can be adjusted.
  • boundary conditions such as weather conditions, a speed of the EGO vehicle and / or the like
  • the at least one traffic scenario characterized by the at least one determined data record can be parameterized.
  • the identification of the at least one parameter can be achieved, for example, by using the classified vehicle environment, i.e. the at least one data record, the states of elements of the vehicle environment, for example of recognized objects such as other road users, are determined and compared with one another in successive scenes of the traffic scenario characterized by the at least one data record.
  • a state of an element of the vehicle environment can be defined, for example, by physical variables such as a speed, position, configuration and / or the like.
  • at least one parameter is identified in particular when a change in a state of an element occurs in the temporally successive scenes of the traffic scenario, for example a change in speed or position.
  • method steps S2a and S2b can also be understood as determining traffic scenario descriptions and summarized in a method step S2c will.
  • traffic scenario descriptions can also be determined in some other way, for example from other databases such as NCAP, DVP and / or accident databases (not shown).
  • step S3 the at least one data record with the at least one traffic scenario parameterized in this way as, in particular generic, Traffic scenario description stored in a traffic scenario file and stored in the traffic scenario database 2.
  • the at least one identified parameter can be stored in a predetermined, in particular generic, format in the traffic scenario file.
  • step S4 at least one of the traffic scenario descriptions ascertained and stored in the traffic scenario database 2 can then be selected by inputting a user, for example via an input device 3.
  • the user can specify at least one parameter with which the traffic scenarios characterized by the traffic scenario descriptions can be adapted to boundary conditions.
  • the at least one traffic scenario description that is relevant or selected with regard to the user input is made available to a data processing device that, based on this traffic scenario description and at least one value, in particular by the user input, for the at least one parameter in a further method step S6 at least one test case is generated which corresponds to a concrete implementation of the traffic scenario characterized by the at least one selected traffic scenario description.
  • the at least one test case generated can be used to generate a test environment for testing the driver assistance system.
  • the user can influence, in particular configure, the test of the driver assistance system via his input, for example by specifying boundary conditions for the traffic scenario characterized by the at least one traffic scenario description, in particular the course of the traffic scenario, e.g. resolving a traffic situation, specified.
  • the user can e.g. select appropriate parameters on the basis of which the at least one test case is created. It is particularly conceivable that the user directly selects relevant traffic scenario descriptions and, e.g. by specifying at least one value or range of values of a corresponding parameter.
  • Such modified traffic scenario descriptions can be carried out in a further method step S5, possibly together with generated test cases, in the traffic scenario database, where you can be selected at a later point in time, especially faster, to create test cases.
  • a test environment 6 for testing a driver assistance system is generated from the at least one test case generated by means of a simulation device 5.
  • the simulation device 5 can have a simulation environment, such as MATLAB / Simulink, IPG CarMaker, PreScan, SUMO SCANer or Virtual Test Drive (VTD).
  • the test environment 6 can be generated independently of the simulation environment used, since the traffic scenario descriptions in the traffic scenario database 2 are stored as traffic scenario files in a predetermined, in particular generic, format and, accordingly, the test cases in a standardized format, e.g. the OpenSCENARIO format, who can.
  • FIG 3 shows an example of a traffic scenario description 1 1 in a schematic representation.
  • the traffic scenario description 12 shown corresponds to a general description of a specific traffic scenario, in particular a driving maneuver such as a cut-in maneuver in the example shown, in which an EGO vehicle 8 to which the traffic scenario relates , from a first lane 9a to a second, adjacent lane 9b behind a preceding vehicle 10, as indicated by the arrow.
  • a driver assistance system for example adaptive cruise control (ACC)
  • ACC adaptive cruise control
  • Such a traffic scenario description 12 characterizing a traffic scenario can be determined in various ways.
  • traffic scenario descriptions can be loaded from NCAP, DVP and / or accident databases.
  • sensor data can be collected which characterize the traffic scenario, for example by carrying out corresponding simulations or the EGO vehicle 8 equipped with a sensor device for detecting the vehicle environment is taking a test drive and a section of a sensor data stream generated by the sensor device, which corresponds to the traffic scenario when sensor data is extracted.
  • the sensor data stream is distinguished, for example, by the fact that the vehicle 10 driving ahead is suddenly detected in the middle of a detection region 11 of a sensor unit of the sensor device, for example a LIDAR sensor, when the lanes 9a, 9b change .
  • This event can therefore be interpreted as a trigger for the cut-in maneuver and, preferably together with other corresponding triggers, can be used to extract the sensor data from the sensor data stream.
  • parameters are preferably identified in the following which determine the boundary conditions of the traffic scenario, for example the speed of the ego vehicle 8 and the vehicle 10 driving ahead, the distance of the ego vehicle 8 from the vehicle 10 driving ahead at the beginning and / or at the end of the cut-in maneuver, the lanes 9a, 9b and / or the like used by the vehicles 8, 10 each.
  • the parameters identified in this way preferably determine how the cut-in maneuver proceeds.
  • the parameters can in particular be identified by comparing different states of the two vehicles 8, 10 which are defined by the parameters and which occur during the course of the traffic scenario, in particular at the beginning and at the end of the traffic scenario, in particular subtractively from one another here.
  • the parameters identified in this way are preferably stored at least as part of the traffic scenario description 12 in a traffic scenario file which, together with other traffic scenario files, for example from NCAP, DVP and / or accident Databases, which forms a traffic scenario database.
  • the traffic scenario file is preferably provided with a marker (tag) which identifies the traffic scenario description 12 stored in the traffic scenario as corresponding to a cut-in maneuver.
  • test vehicle On the basis of which a test environment can be generated in which the driver assistance system of the EGO vehicle 8 (hereinafter referred to as test vehicle, since it is equipped with the driver assistance system to be tested) can be tested the traffic scenario description 12 of the cut-in maneuver, which was determined as described above, is selected, eg by a user input, by means of which all traffic scenario descriptions 12 identified with the corresponding marking are called up. Values for the parameters of the selected traffic scenario description 12 can e.g. also by user input or by retrieving from a parameter database.
  • the cut-in maneuver characterized by the selected traffic scenario description 12 is then preferably matched to the parameters set by the parameters and / or others, e.g. Boundary conditions defined by the user input are adapted.
  • a value can be specified for the, in particular lateral, speed of the test vehicle 8, which value is lower than when the real cut-in maneuver was recorded. Accordingly, the implementation of the cut-in maneuver characterized by the test case proceeds more slowly or takes longer. In this way, at least one value or range of values can also be specified for other parameters in order to produce one or more implementations of the cut-in maneuver. Correspondingly, several different test cases can be generated easily and without great effort on the basis of the one traffic scenario description 12. Reference list

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)

Abstract

The invention relates to a method and to a device for testing a driver assistance system for a vehicle in a test environment. Traffic scenario descriptions are determined, which each characterize a certain traffic scenario and comprise at least one parameter, by means of which the traffic scenario in question can be adapted to constraints. The traffic scenario descriptions are stored in a traffic scenario file, in which the at least one parameter is stored in a predefined format. At least one traffic scenario description is selected on the basis of an input of a user and/or specified criteria. Furthermore, a test case is produced on the basis of the at least one selected traffic scenario description and at least one specified value for the at least one parameter. The test case corresponds to a specific realization of the traffic scenario characterized by the at least one selected traffic scenario description, with respect to the at least one specified value of the at least one parameter, and is suitable for producing a test environment in which a driver assistance system can be subjected to a test run. A test run can be carried out using the produced test case.

Description

VERFAHREN UND VORRICHTUNG ZUM TESTEN EINES  METHOD AND DEVICE FOR TESTING ONE
FAHRERASSISTENZSYSTEMS  DRIVER ASSISTANCE SYSTEM
Die vorliegende Erfindung betrifft ein Verfahren und eine Vorrichtung zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumgebung. The present invention relates to a method and a device for testing a driver assistance system for a vehicle in a test environment.
Moderne Fahrzeuge sind zunehmend mit Fahrerassistenzsystemen (engl. Advanced Driver Assistance Systems, ADAS) ausgestattet, welche den Fahrer in bestimmten Fahr situationen unterstützen. Die Unterstützung reicht von reinem Anzeigen möglicherweise relevanter Information (z.B. Ausgeben einer Warnung durch einen Spurwechselassis tent) über teilautonome Eingriffe (z.B. Regulierung des auf die Radachsen aufgebrachten Moments durch ein Antiblockiersystem) bis hin zu vollautonomen Eingriffen in die Steue rung des Fahrzeugs (z.B. adaptive Geschwindigkeitsregelung durch einen Abstandsre geltempomat, engl. Adaptive Cruise Control, ACC). Modern vehicles are increasingly equipped with advanced driver assistance systems (ADAS), which support the driver in certain driving situations. Support ranges from the mere display of possibly relevant information (e.g. issuing a warning by a lane change assistant) to semi-autonomous interventions (e.g. regulation of the torque applied to the wheel axles by an anti-lock braking system) to fully autonomous interventions in the control of the vehicle (e.g. adaptive cruise control) thanks to an adaptive cruise control (ACC).
Die Grundlage für solche Fahrerassistenzsysteme bilden in der Regel Sensordaten, etwa bereitgestellte Signale von Ultraschallsensoren, Radarsensoren oder Kameras, anhand denen die gegenwärtige Fahrsituation bestimmt und in Reaktion darauf die Funktion des jeweiligen Fahrerassistenzsystems ausgeführt werden kann. Insbesondere bei Fahrer assistenzsystem, die (autonom) in die Steuerung des Fahrzeugs eingreifen, muss an hand der Sensordaten die gegenwärtige Fahrsituation höchst zuverlässig klassifiziert werden können. As a rule, the basis for such driver assistance systems is formed by sensor data, for example provided signals from ultrasound sensors, radar sensors or cameras, which can be used to determine the current driving situation and in response to this the function of the respective driver assistance system can be carried out. Particularly with driver assistance systems that (autonomously) intervene in the control of the vehicle, the current driving situation must be able to be classified in a highly reliable manner using the sensor data.
Im Allgemeinen werden dabei bestimmte, einer Fahrsituation zugeordnete Regeln bzw. Kriterien aufgestellt, bei deren Erfüllung auf ein Vorliegen einer bekannten Fahrsituation geschlossen werden kann. Das Erfüllen der Regel bzw. Kriterien wirkt dabei z.B. als Auslöser für eine Aktion des Fahrerassistenzsystems. Beispielsweise kann ein Ver kehrsszenario, in dem ein benachbartes Fahrzeug vor dem mit dem Fahrerassistenzsys tem ausgestatteten Fahrzeug (EGO-Fahrzeug) in die gleiche Fahrspur einschert, dadurch erkannt werden, dass ein sensorisch erfasster transversaler Abstand senkrecht zur Fahrtrichtung zum benachbarten Fahrzeug abnimmt und schließlich, zumindest im Wesentlichen, den Wert 0 annimmt, wenn das benachbarte Fahrzeug sich unmittelbar vor dem EGO-Fahrzeug befindet. Um solche Fahrerassistenzsysteme, insbesondere deren Reaktion in bereits bekannten Verkehrsszenarien, zu testen, werden im Allgemeinen bezüglich eines bekannten Ver kehrsszenarios klassifizierte Sensordaten (engl labeled sensor data) bereitgestellt und das zu testende Fahrerassistenzsystem mit diesen klassifizierten Sensordaten gefüttert. Um das Fahrerassistenzsystem zuverlässig zu testen, werden in der Regel eine Vielzahl von Sensordaten, die gegebenenfalls auch leichte Variationen des Verkehrsszenarios charakterisieren, benötigt. In general, certain rules or criteria associated with a driving situation are set up, and if they are fulfilled, it can be concluded that a known driving situation exists. Fulfilling the rule or criteria acts, for example, as a trigger for an action by the driver assistance system. For example, a traffic scenario in which a neighboring vehicle in front of the vehicle equipped with the driver assistance system (EGO vehicle) can cut into the same lane can be recognized by the fact that a sensor-detected transverse distance decreases perpendicular to the direction of travel to the neighboring vehicle and finally, at least essentially, assumes the value 0 if the neighboring vehicle is immediately in front of the EGO vehicle. In order to test such driver assistance systems, in particular their reaction in already known traffic scenarios, classified sensor data are generally provided with respect to a known traffic scenario and the driver assistance system to be tested is fed with these classified sensor data. In order to test the driver assistance system reliably, a large number of sensor data, which may also characterize slight variations in the traffic scenario, are generally required.
Aus WO 2017/210222 A1 ist dazu das automatische Erzeugen von Simulationsszenarien zum Validieren eines Fahrerassistenzsystems bekannt. Eine Vielzahl solcher Simulati onsszenarien kann dabei insbesondere durch Variation von aufgenommenen Szenarien erzeugt werden, wobei die Variationen auf einem Datenstrom basieren, der durch die Isolation von Unterschieden zwischen ähnlichen aufgenommenen Szenarien erzeugt wird. For this purpose, WO 2017/210222 A1 discloses the automatic generation of simulation scenarios for validating a driver assistance system. A large number of such simulation scenarios can be generated in particular by varying recorded scenarios, the variations being based on a data stream which is generated by isolating differences between similar recorded scenarios.
Es ist eine Aufgabe der vorliegenden Erfindung, das Testen von Fahrerassistenzsyste men weiter zu verbessern, insbesondere zu vereinfachen und/oder flexibler zu machen. It is an object of the present invention to further improve the testing of driver assistance systems, in particular to simplify and / or make them more flexible.
Diese Aufgabe wird gelöst durch ein Verfahren und eine Vorrichtung zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumgebung gemäß den unabhän gigen Ansprüchen. Vorteilhafte Ausgestaltungen der Erfindung sind Gegenstand der ab hängigen Ansprüche. This object is achieved by a method and a device for testing a driver assistance system for a vehicle in a test environment in accordance with the independent claims. Advantageous embodiments of the invention are the subject of the dependent claims.
Ein erster Aspekt der Erfindung betrifft ein, insbesondere computergestütztes, Verfahren zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumgebung, aufweisend die folgenden Arbeitsschritte: (i) Ermitteln von Verkehrsszenario- Beschreibungen, welche jeweils ein bestimmtes Verkehrsszenario, insbesondere ein Cut-In-Manöver oder ein Cut-Out-Manöver, charakterisieren und wenigstens einen Pa rameter aufweisen, mittels welchem das jeweilige Verkehrsszenario an Randbedingun gen angepasst werden kann, wobei die Verkehrsszenario-Beschreibungen vorzugswei se, insbesondere jeweils, in einer Verkehrsszenario-Datei abgelegt sind, in welcher der wenigstens eine Parameter in einem vorbestimmten, insbesondere generischen, Format abgelegt ist; (ii) Auswählen von wenigstens einer Verkehrsszenario-Beschreibung auf der Grundlage einer Eingabe eines Benutzers, insbesondere einer Angabe des wenigs tens einen Parameters oder wenigstens eines vom Benutzer eingegebenen Werts oder Wertebereichs für den wenigstens einen Parameter, und/oder von vorgegebenen Krite rien; und (iii) Erzeugen eines Testfalls auf der Grundlage der wenigstens einen ausge wählten Verkehrsszenario-Beschreibung und von wenigstens einem vorgegebenen, ins besondere vom Benutzer eingegebenen, Wert für den wenigstens einen Parameter und vorzugsweise weiterer Verkehrsszenario-Beschreibungen, wobei der Testfall mit einer konkreten Realisierung des durch die wenigstens eine ausgewählte Verkehrsszenario- Beschreibung charakterisierten Verkehrsszenarios und vorzugsweise weiterer Verkehrs szenarien in Bezug auf den wenigstens einen vorgegebenen Wert des wenigstens einen Parameters korrespondiert und geeignet ist, eine Prüfumgebung zu erzeugen, in welcher ein Fahrerassistenzsystem einem Prüflauf unterzogen werden kann. A first aspect of the invention relates to a, in particular computer-aided, method for testing a driver assistance system for a vehicle in a test environment, comprising the following working steps: (i) determining traffic scenario descriptions, each of which describes a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, characterize and have at least one parameter by means of which the respective traffic scenario can be adapted to boundary conditions, the traffic scenario descriptions preferably, in particular in each case, being stored in a traffic scenario file in which the at least one parameter is stored in a predetermined, in particular generic, format; (ii) Selecting at least one traffic scenario description based on an input by a user, in particular an indication of the at least one parameter or at least one value or entered by the user Range of values for the at least one parameter and / or of predetermined criteria; and (iii) generating a test case on the basis of the at least one selected traffic scenario description and at least one predetermined value, in particular entered by the user, for the at least one parameter and preferably further traffic scenario descriptions, the test case having a concrete implementation of the traffic scenario characterized by the at least one selected traffic scenario description and preferably further traffic scenarios in relation to the at least one predetermined value of the at least one parameter corresponds and is suitable for generating a test environment in which a driver assistance system can be subjected to a test run.
Eine Randbedingung im Sinne der Erfindung ist insbesondere eine Verkehrssituation, eine Witterung, eine initiale Geschwindigkeit des Fahrzeugs mit dem zu testenden Fah rerassistenzsystem (im Folgenden: Testfahrzeug) und/oder anderen Verkehrsteilneh mern, eine Straßengeometrie bzw. ein Straßenverlauf, ein Abstand des Testfahrzeugs zu einem oder mehreren anderen Verkehrsteilnehmern, eine Konfiguration des Testfahr zeugs und/oder anderer Verkehrsteilnehmer wie etwa eine Beladung, z.B. ein Anhänger, und/oder dergleichen. Eine Randbedingung kann insbesondere jeder denkbare Faktor sein, der die Steuerung des mit dem Fahrerassistenzsystem ausgestatteten Fahrzeugs durch das Fahrerassistenzsystem beeinflusst. A boundary condition in the sense of the invention is, in particular, a traffic situation, weather, an initial speed of the vehicle with the driver assistance system to be tested (hereinafter: test vehicle) and / or other road users, a road geometry or a course of the road, a distance from the test vehicle one or more other road users, a configuration of the test vehicle and / or other road users such as a load, for example a trailer, and / or the like. A boundary condition can in particular be any conceivable factor that influences the control of the vehicle equipped with the driver assistance system by the driver assistance system.
Ein Testfall (Engl: Test Case) im Sinne der Erfindung ist insbesondere ein Script, z.B. eine Abfolge von Aktionen von Verkehrsteilnehmern, welches eine Prüfung eines Fah rerassistenzsystems ermöglicht. Ein Testfall kann beispielsweise ein Script sein, auf dessen Grundlage eine Simulation zum Testen des Fahrerassistenzsystems durchge führt werden kann. A test case in the sense of the invention is in particular a script, e.g. a sequence of actions by road users, which enables testing of a driver assistance system. A test case can be, for example, a script, on the basis of which a simulation for testing the driver assistance system can be carried out.
Eine Prüfumgebung im Sinne der Erfindung ist insbesondere der Inhalt einer Simulation, die eine konkrete (virtuelle) Realisierung eines Verkehrsszenarios erzeugt. Mit anderen Worten kann eine Prüfumgebung beispielsweise eine simulierte Umgebung des Test fahrzeugs sein, in der sich wenigstens andere Verkehrsteilnehmer, gegebenenfalls auch das Testfahrzeug selber, in einer vordefinierten Weise bewegen, insbesondere vorgege bene Aktionen ausführen. Ein vorbestimmtes Format im Sinne der Erfindung ist insbesondere eine vordefinierte (Daten-)Struktur. Ein vorbestimmtes Format kann beispielsweise einem bestimmten Schema, z.B. einer bestimmten Anordnung bzw. Reihenfolge mehrerer Parameter und/oder einer bestimmen Kodierung des wenigstens einen Parameter in der Verkehrs- szenario-Datei, entsprechen. Es ist etwa denkbar, dass mehrere Parameter in einer Ta belle, insbesondere einer zwei- oder drei-, gegebenenfalls auch mehrdimensionalen, Matrix abgespeichert werden. A test environment in the sense of the invention is, in particular, the content of a simulation that generates a concrete (virtual) implementation of a traffic scenario. In other words, a test environment can be, for example, a simulated environment of the test vehicle, in which at least other road users, possibly also the test vehicle itself, move in a predefined manner, in particular carry out predetermined actions. A predetermined format in the sense of the invention is in particular a predefined (data) structure. A predetermined format can, for example, correspond to a certain scheme, for example a certain arrangement or sequence of several parameters and / or a certain coding of the at least one parameter in the traffic scenario file. It is conceivable, for example, that several parameters are stored in a table, in particular in a two- or three-dimensional, possibly also multidimensional, matrix.
Ein Ermitteln von Verkehrsszenario-Beschreibungen im Sinne der Erfindung ist insbe sondere Erfassen, z.B. beim Durchführen realer oder simulierter Versuche. Ein Ermitteln von Verkehrsszenario-Beschreibungen kann aber auch ein Einlesen sein, z.B. aus Da tenbanken und/oder dergleichen. Determining traffic scenario descriptions within the meaning of the invention is in particular capturing, e.g. when performing real or simulated tests. Determining traffic scenario descriptions can also be reading in, e.g. from databases and / or the like.
Die Erfindung basiert insbesondere auf dem Ansatz, aus vorzugsweise mehreren Ver kehrsszenario-Beschreibungen, die jeweils ein bestimmtes Verkehrsszenario charakteri sieren und in bevorzugter Weise in einem vorbestimmten, insbesondere generischen, Format vorliegen, wenigstens eine Verkehrsszenario-Beschreibung auszuwählen und auf Grundlage davon wenigstens einen Testfall zum Erzeugen einer Prüfumgebung, die sich zum Testen eines Fahrerassistenzsystems eignet, zu generieren. Die von den Ver kehrsszenario-Beschreibungen charakterisierten Verkehrsszenarien entsprechen dabei vorzugsweise spezifischen Verkehrsszenarien wie etwa Cut-In-Manövern (Einscherma növern) oder einem Cut-Out-Manövern (Ausschermanövern). Die Verkehrsszenario- Beschreibungen beschreiben das jeweilige Verkehrsszenario in bevorzugter Weise je doch in einer allgemeinen, generischen Form, ohne durch die Verkehrsszenario- Beschreibungen dabei eine konkrete Ausführung dieser Manöver vorgegeben ist. Der Testfall hingegen korrespondiert in bevorzugter Weise mit einer konkreten Realisierung des Verkehrsszenarios, das durch die wenigstens eine ausgewählte Verkehrsszenario- Beschreibung charakterisiert ist. The invention is based in particular on the approach to select at least one traffic scenario description from preferably a plurality of traffic scenario descriptions, each characterizing a particular traffic scenario and preferably in a predetermined, in particular generic, format, and on the basis thereof at least one test case to generate a test environment that is suitable for testing a driver assistance system. The traffic scenarios characterized by the traffic scenario descriptions preferably correspond to specific traffic scenarios such as cut-in maneuvers (single-maneuvers) or a cut-out maneuvers (maneuvering out). The traffic scenario descriptions preferably describe the respective traffic scenario in a general, generic form, however, without the traffic scenario descriptions specifying a specific execution of these maneuvers. The test case, on the other hand, preferably corresponds to a concrete implementation of the traffic scenario, which is characterized by the at least one selected description of the traffic scenario.
Dabei kann sowohl die wenigstens eine Verkehrsszenario-Beschreibung auf Grundlage einer Benutzereingabe, beispielsweise durch Angabe wenigstens eines Parameters oder eingegebenen Werten oder Wertebereichen für einen oder mehrere Parameter, welche Randbedingungen der Verkehrsszenarien anpassen, insbesondere festlegen, ausge wählt werden als auch der wenigstens eine Testfall aus der wenigstens einen ausge- wählten Verkehrsszenario-Beschreibung erzeugt werden. Die Parameter können dabei beispielsweise als Variablen in den Verkehrsszenarien dienen. Both the at least one traffic scenario description can be selected on the basis of a user input, for example by specifying at least one parameter or entered values or value ranges for one or more parameters which adapt, in particular, define boundary conditions of the traffic scenarios, and the at least one test case who has at least one selected traffic scenario description are generated. The parameters can serve, for example, as variables in the traffic scenarios.
Der Benutzer kann beispielsweise eingeben, dass das Testfahrzeug, d.h. das mit dem Fahrerassistenzsystem ausgestattete Fahrzeug, mit einer konstanten, vom Benutzer gewählten Geschwindigkeit auf einer ersten Fahrspur geradeaus fährt und von einem anderen Fahrzeug auf einer benachbarten zweiten Fahrspur überholt wird, wobei das andere Fahrzeug in einem vom Benutzer gewählten Abstand zum Testfahrzeug auf die erste Fahrspur einschert. Anhand dieser Eingaben kann im Folgenden eine Datenbank mit darin gespeicherten Verkehrsszenario- Dateien, welche die Verkehrsszenario- Beschreibungen in dem vorgegebenen Format enthalten, durchsucht werden, um Ver kehrsszenario-Beschreibungen auszuwählen, mit denen das durch die Benutzereingabe charakterisierte konkrete Verkehrsszenario realisierbar ist. Die vom Benutzer eingege benen Parameter und/oder Randbedingungen können dann, etwa wie Werte in eine ma thematische Funktion, in die wenigstens eine ausgewählte Verkehrsszenario- Beschreibung eingesetzt werden, um wenigstens einen Testfall zu erzeugen, mit dem eine Simulation durchgeführt und dadurch das Fahrerassistenzsystem getestet werden kann. For example, the user can input that the test vehicle, i.e. the vehicle equipped with the driver assistance system, drives straight ahead in a first lane at a speed selected by the user and is overtaken by another vehicle in an adjacent second lane, the other vehicle being in the first lane at a distance selected by the user from the test vehicle reevers. Based on these inputs, a database with traffic scenario files stored therein, which contain the traffic scenario descriptions in the specified format, can be searched in the following in order to select traffic scenario descriptions with which the specific traffic scenario characterized by the user input can be implemented. The parameters and / or boundary conditions entered by the user can then, like values in a mathematical function, be inserted into the at least one selected traffic scenario description in order to generate at least one test case with which a simulation is carried out and the driver assistance system is thereby tested can be.
Dadurch, dass durch die Benutzereingabe wenigstens eine Verkehrsszenario- Beschreibung, insbesondere aus einer Vielzahl von Verkehrsszenario-Beschreibungen, auswählbar ist, kann auf eine gegebenenfalls aufwändige, Szenario- bzw. Manöver spezifische Aufbereitung von Datensätzen zur Erzeugung von Prüfumgebungen verzich tet werden. Erfindungsgemäß können Prüfläufe zum Testen eines Fahrerassistenzsys tems daher besonders unkompliziert und schnell und/oder in großer Anzahl durchgeführt werden. Insbesondere dadurch, dass die Verkehrsszenario-Beschreibungen in einem vorgegebenen, vorzugsweise generischen, Format abgelegt sein können, wird ein Zugriff auf eine große Bandbreite von Verkehrsszenarien ermöglicht. Because at least one traffic scenario description, in particular from a large number of traffic scenario descriptions, can be selected by the user input, it is possible to dispense with a possibly complex, scenario- or maneuver-specific preparation of data records for generating test environments. According to the invention, test runs for testing a driver assistance system can therefore be carried out particularly easily and quickly and / or in large numbers. In particular, because the traffic scenario descriptions can be stored in a predetermined, preferably generic, format, access to a wide range of traffic scenarios is made possible.
Insgesamt erlaubt es die Erfindung, das Testen von Fahrerassistenzsystemen weiter zu verbessern, insbesondere zu vereinfachen und/oder flexibler zu machen. Overall, the invention makes it possible to further improve the testing of driver assistance systems, in particular to simplify them and / or to make them more flexible.
Nachfolgend werden bevorzugte Ausführungsformen der Erfindung und deren Weiterbil dungen beschrieben, die jeweils, soweit dies nicht ausdrücklich ausgeschlossen wird, beliebig miteinander sowie mit den im Weiteren beschriebenen Aspekten der Erfindung kombiniert werden können. Preferred embodiments of the invention and their further developments are described below, each of which, unless expressly excluded, can be combined as desired with one another and with the aspects of the invention described below.
In einer bevorzugten Ausführungsform weist das Verfahren des Weiteren den folgenden Arbeitsschritt auf: Durchführen eines Prüflaufs unter Anwendung des erzeugten Testfalls. Dadurch kann das Fahrerassistenzsystem auf zuverlässige Weise, insbesondere auf Grundlage eines spezifisch angepassten Verkehrsszenarios, getestet werden. In a preferred embodiment, the method further comprises the following step: performing a test run using the test case generated. As a result, the driver assistance system can be tested in a reliable manner, in particular on the basis of a specifically adapted traffic scenario.
In einer weiteren bevorzugten Ausführungsform weist das Verfahren des Weiteren die folgende Arbeitsschritte auf: (i) Ermitteln wenigstens eines Datensatzes, der wenigstens ein, insbesondere reales, Verkehrsszenario charakterisiert; und (ii) Identifizieren von we nigstens einem Parameter in dem wenigstens einen ermittelten Datensatz, mittels wel chem das jeweilige Verkehrsszenario an Randbedingungen angepasst werden kann, insbesondere an eine initiale Geschwindigkeit eines EGO-Fahrzeugs, auf welches sich das Verkehrsszenario bezieht. Ein EGO-Fahrzeug im Sinne der Erfindung ist insbeson dere ein Fahrzeug, aus dessen Sicht das, insbesondere reale, Verkehrsszenario abläuft. In a further preferred embodiment, the method also has the following work steps: (i) determining at least one data set which characterizes at least one, in particular real, traffic scenario; and (ii) identifying at least one parameter in the at least one determined data set, by means of which the respective traffic scenario can be adapted to boundary conditions, in particular an initial speed of an EGO vehicle, to which the traffic scenario relates. An EGO vehicle in the sense of the invention is in particular a vehicle from the point of view of which the, in particular real, traffic scenario is running.
Das Identifizieren von wenigstens einem Parameter in dem wenigstens einen Datensatz erlaubt es in besonders zuverlässiger Weise, im Folgenden auf Grundlage der Benutzer eingabe wenigstens eine Verkehrsszenario-Beschreibung aus einer Vielzahl von Ver kehrsszenario-Beschreibungen auszuwählen. Insbesondere kann somit wenigstens ein Verkehrsszenario auf Grundlage des identifizierten Parameters ausgewählt werde, z.B. alle Verkehrsszenario-Beschreibungen, die ein mit einem ermittelten Datensatz korres pondierendes Verkehrsszenario charakterisieren und daher auch den identifizierten Pa rameter aufweisen. Mit anderen Worten kann auf diese Weise die Anzahl möglicher, zum Testen des Fahrerassistenzsystems relevanter Verkehrsszenarien erhöht werden. The identification of at least one parameter in the at least one data record allows, in a particularly reliable manner, subsequently to select at least one traffic scenario description from a multiplicity of traffic scenario descriptions based on the user input. In particular, at least one traffic scenario can thus be selected based on the identified parameter, e.g. all traffic scenario descriptions that characterize a traffic scenario corresponding to a determined data set and therefore also have the identified parameter. In other words, the number of possible traffic scenarios relevant for testing the driver assistance system can be increased in this way.
Der wenigstens eine Datensatz wird dabei vorzugsweise auf Grundlage eines Sensorda tenstroms, der beispielsweise von einer Sensoreinrichtung zum Erfassen des (realen) Fahrzeugumfelds des EGO-Fahrzeugs erzeugt wird, ermittelt, insbesondere aus dem Sensordatenstrom extrahiert. Der Sensordatenstrom kann dabei beispielsweise in der Weise verarbeitet werden, dass das Fahrzeugumfeld des EGO-Fahrzeugs klassifiziert wird, also z.B. Objekte wie andere Verkehrsteilnehmer, Verkehrszeichen, Hindernisse und/oder dergleichen erkannt und markiert (engl: labeled) werden. Aus dem verarbeite ten Sensordatenstrom kann dann der wenigstens eine Datensatz erzeugt werden. Mit anderen Worten basiert der wenigstens eine ermittelte Datensatz vorzugsweise auf auf bereiteten Sensordaten, die beim Erfassen eines realen Fahrzeugumfelds erzeugt wur den und die zusätzliche Meta-Information, d.h. aus Rohdaten abgeleitete und daher über die im Sensordatenstrom enthaltene reine physikalische Information hinausgehende In formation, enthalten. Insbesondere diese Meta-Information erlaubt die Identifikation des wenigstens einen Parameters, mittels welchem das jeweilige Verkehrsszenario an Randbedingungen angepasst werden kann. The at least one data record is preferably determined on the basis of a sensor data stream that is generated, for example, by a sensor device for detecting the (real) vehicle environment of the EGO vehicle, in particular extracted from the sensor data stream. The sensor data stream can be processed, for example, in such a way that the vehicle environment of the EGO vehicle is classified, that is to say, for example, objects such as other road users, traffic signs, obstacles and / or the like are identified and labeled. The at least one data record can then be generated from the processed sensor data stream. With In other words, the at least one determined data record is preferably based on prepared sensor data that was generated when a real vehicle environment was detected and that contains additional meta information, ie information derived from raw data and therefore going beyond the pure physical information contained in the sensor data stream. This meta information in particular allows the identification of the at least one parameter, by means of which the respective traffic scenario can be adapted to boundary conditions.
In einer weiteren bevorzugten Ausführungsform wird das Identifizieren des wenigstens einen Parameters mittels eines Vergleichs eines klassifizierten Fahrzeugumfelds in zeit lich aufeinander folgenden Szenen des wenigstens einen, durch den wenigstens einen ermittelten Datensatz charakterisierten Verkehrsszenarios durchgeführt. Ein klassifizier tes Fahrzeugumfeld im Sinne der Erfindung ist hierbei insbesondere eine Beschreibung des Fahrzeugumfelds eines Fahrzeugs, die über reine physikalische Information hinaus geht. Das klassifizierte Fahrzeugumfeld, welches vorzugsweise durch den bereitgestell ten Datensatz charakterisiert ist, kann dabei insbesondere Meta-Information enthalten, welche das klassifizierte Fahrzeugumfeld zu verschiedenen Zeitpunkten vergleichbar macht. Vorzugsweise enthält das klassifizierte Fahrzeugumfeld dabei Meta-Information, auf deren Grundlage in einzelnen Szenen des wenigstens einen, durch den wenigstens einen ermittelten Datensatz charakterisierten Verkehrsszenarios erkannte und markierte (engl labeled) Objekte identifizierbar und z.B. deren Positionen, deren Geschwindigkei ten, deren Konfiguration und/oder dergleichen in den aufeinanderfolgenden Szenen mit einander vergleichbar sind. Dadurch kann der wenigstens eine Parameter besonders zuverlässig und/oder automatisiert identifiziert werden. In a further preferred embodiment, the identification of the at least one parameter is carried out by means of a comparison of a classified vehicle environment in chronologically successive scenes of the at least one traffic scenario characterized by the at least one determined data record. A classified vehicle environment in the sense of the invention is in particular a description of the vehicle environment of a vehicle that goes beyond pure physical information. The classified vehicle environment, which is preferably characterized by the data set provided, can in particular contain meta information which makes the classified vehicle environment comparable at different times. The classified vehicle environment preferably contains meta information, on the basis of which in individual scenes of the at least one traffic scenario characterized and characterized by the at least one determined data record, objects can be identified and labeled, e.g. whose positions, their speed, their configuration and / or the like are comparable to one another in the successive scenes. As a result, the at least one parameter can be identified in a particularly reliable and / or automated manner.
Vorzugsweise werden aus dem klassifizierten Fahrzeugumfeld in jeder Szene des we nigstens einen, durch den wenigstens einen ermittelten Datensatz charakterisierten Ver kehrsszenarios die Zustände der Elemente des Fahrzeugumfelds, d.h. z.B. der im Fahr zeugumfeld identifizierten Objekte wie etwa andere Verkehrsteilnehmer, abgeleitet und in zeitlich aufeinanderfolgenden Szenen miteinander verglichen, insbesondere vonei nander subtrahiert. Ein Zustand eines Elements des Fahrzeugumfelds im Sinne der Er findung enthält hierbei insbesondere wenigstens eine physikalische Größe, die das Ele ment, insbesondere relativ zum EGO-Fahrzeug, charakterisiert, z.B. die Geschwindigkeit des Elements, die Position des Elements, die Konfiguration des Elements und/oder der gleichen. Ändert sich der Zustand eines Elements in den aufeinanderfolgenden Szenen, wird der wenigstens eine Parameter in bevorzugter Weise als diejenige physikalische Größe identifiziert, die die Änderung des Zustands bedingt. Dadurch kann der wenigstens eine Parameter besonders leicht identifiziert werden. The states of the elements of the vehicle environment, ie, for example, the objects identified in the vehicle environment, such as other road users, are preferably derived from the classified vehicle environment in each scene of the at least one traffic scenario characterized by the at least one determined data set and compared with one another in chronologically successive scenes , especially subtracted from each other. A state of an element of the vehicle environment in the sense of the invention contains in particular at least one physical variable that characterizes the element, in particular relative to the EGO vehicle, for example the speed of the element, the position of the element, the configuration of the element and / or similar. If the state of an element changes in the successive scenes, the at least one parameter is preferably identified as the physical variable that causes the change in the state. As a result, the at least one parameter can be identified particularly easily.
Beispielsweise kann aus dem klassifizierten Fahrzeugumfeld in einer ersten Szene die Geschwindigkeit und die Größe eines anderen Verkehrsteilnehmers entnommen werden und mit der Geschwindigkeit bzw. Größe dieses Verkehrsteilnehmers in einer darauffol genden zweiten Szene verglichen werden. Üblicherweise wird sich die Geschwindigkeit des Verkehrsteilnehmers im Verlauf des Verkehrsszenario ändern und kann daher als Parameter identifiziert werden. Die Größe das Verkehrsteilnehmers ändert sich dagegen üblicherweise nicht und wird daher auch nicht als Parameter identifiziert. For example, the speed and size of another road user can be taken from the classified vehicle environment in a first scene and compared with the speed or size of this road user in a subsequent second scene. The speed of the road user will usually change in the course of the traffic scenario and can therefore be identified as a parameter. In contrast, the size of the road user usually does not change and is therefore not identified as a parameter.
In einer weiteren bevorzugten Ausführungsform weist das Verfahren des Weiteren den folgenden Arbeitsschritt auf: Erzeugen wenigstens einer Verkehrsszenario-Beschreibung auf der Grundlage des ermittelten Datensatzes oder der ermittelten Datensätze, wobei die Verkehrsszenario-Beschreibung das bestimmte Verkehrsszenario charakterisiert und wobei der wenigstens eine identifizierte Parameter in dem vorbestimmten Format abge legt wird. Das Ablegen des wenigstens einen identifizierten Parameters im bestimmten Format, insbesondere in einer Verkehrsszenario-Datei, entspricht dabei in bevorzugter Weise dem Erzeugen eines standardisierten Formats bzw. einer standardisierten Ver kehrsszenario-Beschreibung. Mit anderen Worten wird durch das Ablegen des wenigs tens einen identifizierten Parameters im bestimmten Format eine standardisierte Definiti on des wenigstens einen entsprechenden Verkehrsszenarios, das durch die wenigstens einen ermittelten Datensatz charakterisiert ist, gespeichert. Der aus einem Sensordaten strom extrahierte wenigstens eine Datensatz kann dadurch insbesondere in einer gene rischen Form als Verkehrsszenario-Beschreibung bereitgestellt und im Folgenden zur Erzeugung wenigstens eines Testfalls ausgewählt werden. In a further preferred embodiment, the method further comprises the following step: generating at least one traffic scenario description on the basis of the determined data record or the determined data records, the traffic scenario description characterizing the determined traffic scenario and the at least one identified parameter in the predetermined format is filed. The storage of the at least one identified parameter in the specific format, in particular in a traffic scenario file, corresponds in a preferred manner to the generation of a standardized format or a standardized traffic scenario description. In other words, by storing the at least one identified parameter in the specific format, a standardized definition of the at least one corresponding traffic scenario, which is characterized by the at least one determined data record, is stored. The at least one data record extracted from a sensor data stream can thereby be provided in particular in a generic form as a description of the traffic scenario and subsequently selected to generate at least one test case.
In einer weiteren bevorzugten Ausführungsform weist das Verfahren des Weiteren den folgenden Arbeitsschritt auf: Ablegen der erzeugten Verkehrsszenario-Beschreibung, insbesondere der Verkehrsszenario-Datei, in einer Verkehrsszenario-Datenbank, wobei auch weitere Verkehrsszenario-Dateien in der Verkehrsszenario-Datenbank abgelegt sind. Diese Verkehrsszenario-Datenbank ist dabei vorzugsweise als No-SQL-Datenbank eingerichtet und beinhaltet eine standardisierte Definition des wenigstens einen Ver- kehrsszenarios, dass durch den wenigstens einen ermittelten Datensatz charakterisiert ist. Durch Ablegen der erzeugten Verkehrsszenario-Beschreibung in der Datenbank kann dem Erzeugen von Testfällen eine Vielzahl von, insbesondere realen, Verkehrs szenarien zu Grunde gelegt werden. In a further preferred embodiment, the method also has the following work step: storing the generated traffic scenario description, in particular the traffic scenario file, in a traffic scenario database, wherein further traffic scenario files are also stored in the traffic scenario database. This traffic scenario database is preferably set up as a No-SQL database and contains a standardized definition of the at least one link. reverse scenarios that are characterized by the at least one determined data set. By storing the generated traffic scenario description in the database, the generation of test cases can be based on a large number of, in particular real, traffic scenarios.
In einer weiteren bevorzugten Ausführungsform weist das Verfahren des Weiteren we nigstens einen der folgenden Arbeitsschritte auf: (i) Ermitteln der vorgegebenen Werte aus einer Prüflauf-Datenbank; und/oder (ii) Ermitteln der vorgegebenen Werte aus einer Benutzereingabe, insbesondere über eine Benutzerschnittstelle. Beispielsweise kann wenigstens ein Wert oder Wertebereich für den wenigstens einen Parameter, der sich z.B. bei vorangehenden Tests eines Fahrerassistenzsystems als sinnvoll erwiesen hat, aus der Prüflauf-Datenbank ausgelesen und zum Erzeugen des wenigstens einen Test fall herangezogen werden. Alternativ oder zusätzlich kann ein Benutzer bei einer Benut zereingabe, insbesondere bei der Eingabe zur Auswahl von wenigstens einer Verkehrs szenario-Beschreibung, wenigstens einen Wert oder Wertebereich für den wenigstens einen Parameter angeben. Dadurch können Testfälle automatisiert und schnell erzeugt und/oder dem Benutzer ein hohes Maß an Kontrolle über die Erzeugung der Testfälle und damit über das Prüfen des Fahrerassistenzsystems gegeben werden. In a further preferred embodiment, the method further comprises at least one of the following work steps: (i) determining the predetermined values from a test run database; and / or (ii) determining the predetermined values from a user input, in particular via a user interface. For example, at least one value or range of values for the at least one parameter, which e.g. has proven to be useful in previous tests of a driver assistance system, read from the test run database and used to generate the at least one test case. Alternatively or additionally, a user can specify at least one value or range of values for the at least one parameter when inputting a user, in particular when inputting to select at least one traffic scenario description. As a result, test cases can be generated automatically and quickly and / or the user can be given a high degree of control over the generation of the test cases and thus over the checking of the driver assistance system.
Ein zweiter Aspekt der Erfindung betrifft eine Vorrichtung zum Testen eines Fahrerassis tenzsystems für ein Fahrzeug in einer Prüfumgebung, die ein Mittel zum Ermitteln von Verkehrsszenario-Beschreibungen aufweist, wobei die Verkehrsszenario- Beschreibungen vorzugsweise jeweils ein bestimmtes Verkehrsszenario, insbesondere ein Cut-In-Manöver oder ein Cut-Out-Manöver, charakterisieren und wenigstens einen Parameter aufweisen, mittels welchem das jeweilige Verkehrsszenario an Randbedin gungen angepasst werden kann. Das Mittel zum Ermitteln von Verkehrsszenario- Beschreibungen ist zudem vorzugsweise dazu eingerichtet, die Verkehrsszenario- Beschreibungen, insbesondere jeweils, in einer Verkehrsszenario-Datei abzulegen, in welcher der wenigstens eine Parameter in einem vorbestimmten, insbesondere generi schen, Format abgelegt ist. Das Mittel zum Ermitteln von Verkehrsszenario- Beschreibungen kann dabei insbesondere als Schnittstelle oder Sensoreinrichtung ein gerichtet sein. Zudem weist die Vorrichtung vorzugsweise ein Mittel zum Auswählen von wenigstens einer Verkehrsszenario-Beschreibung auf der Grundlage einer Eingabe ei nes Benutzers und/oder von vorgegebenen Kriterien auf, wobei das Mittel zum Auswäh len von wenigstens einer Verkehrsszenario-Beschreibung insbesondere als erstes Modul einer Datenverarbeitungseinrichtung, z.B. als entsprechende Software, ausgebildet sein kann. Zudem weist die Vorrichtung vorzugsweise ein Mittel zum Erzeugen eines Testfalls auf der Grundlage der wenigstens einen ausgewählten Verkehrsszenario-Beschreibung und von wenigstens einem vorgegebenen Wert für den wenigstens einen Parameter und vorzugsweise weiterer Verkehrsszenario-Beschreibungen auf, wobei der Testfall mit ei ner konkreten Realisierung des durch die wenigstens eine ausgewählte Verkehrsszena rio-Beschreibung charakterisierten Verkehrsszenarios und vorzugsweise weiterer Ver kehrsszenarien in Bezug auf den wenigstens einen vorgegebenen Wert des wenigstens einen Parameters korrespondiert und geeignet ist, eine Prüfumgebung zu erzeugen, in welcher ein Fahrerassistenzsystem einem Prüflauf unterzogen werden kann. Das Mittel zum Erzeugen des Testfalls kann insbesondere als zweites Modul der Datenverarbei tungseinrichtung, z.B. als entsprechende Software, eingerichtet sein kann. A second aspect of the invention relates to a device for testing a driver assistance system for a vehicle in a test environment, which has a means for determining traffic scenario descriptions, wherein the traffic scenario descriptions preferably each have a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, characterize it and have at least one parameter by means of which the respective traffic scenario can be adapted to boundary conditions. The means for determining traffic scenario descriptions is also preferably set up to store the traffic scenario descriptions, in particular in each case, in a traffic scenario file in which the at least one parameter is stored in a predetermined, in particular generic, format. The means for determining traffic scenario descriptions can in particular be set up as an interface or sensor device. In addition, the device preferably has a means for selecting at least one traffic scenario description on the basis of an input from a user and / or predefined criteria, the means for selecting at least one traffic scenario description in particular as a first module a data processing device, for example as appropriate software. In addition, the device preferably has a means for generating a test case on the basis of the at least one selected traffic scenario description and at least one predetermined value for the at least one parameter and preferably further traffic scenario descriptions, the test case with a concrete implementation of the the at least one selected traffic scenario description characterized traffic scenarios and preferably further traffic scenarios corresponding to the at least one predetermined value of the at least one parameter and is suitable for generating a test environment in which a driver assistance system can be subjected to a test run. The means for generating the test case can in particular be set up as a second module of the data processing device, for example as appropriate software.
Ein Mittel im Sinne der vorliegenden Erfindung kann hard- und/oder softwaretechnisch ausgebildet sein, insbesondere eine, vorzugsweise mit einem Speicher- und/oder Bus system daten- bzw. signalverbundene, insbesondere digitale, Verarbeitungs-, insbeson dere Mikroprozessoreinheit (CPU) oder ein Modul einer solchen und/oder ein oder meh rere Programme oder Programmmodule aufweisen. Die CPU kann dazu ausgebildet sein, Befehle, die als ein in einem Speichersystem abgelegtes Programm implementiert sind, abzuarbeiten, Eingangssignale von einem Datenbus zu erfassen und/oder Aus gangssignale an einen Datenbus abzugeben. Ein Speichersystem kann ein oder mehre re, insbesondere verschiedene, Speichermedien, insbesondere optische, magnetische, Festkörper- und/oder andere nicht-flüchtige Medien, aufweisen. Das Programm kann derart beschaffen sein, dass es die hier beschriebenen Verfahren verkörpert bzw. auszu führen imstande ist, so dass die CPU die Schritte solcher Verfahren ausführen kann und damit insbesondere eine Hubkolbenmaschine steuern und/oder überwachen kann. A means within the meaning of the present invention can be designed in terms of hardware and / or software, in particular one that is data or signal linked, preferably digital, processing, in particular microprocessor unit (CPU) or a, preferably with a memory and / or bus system Have module of such and / or one or more programs or program modules. The CPU can be designed to process commands implemented as a program stored in a memory system, to detect input signals from a data bus and / or to output signals to a data bus. A storage system can have one or more, in particular different, storage media, in particular optical, magnetic, solid-state and / or other non-volatile media. The program can be designed in such a way that it embodies or is capable of executing the methods described here, so that the CPU can carry out the steps of such methods and thus in particular can control and / or monitor a reciprocating piston engine.
In einer bevorzugten Ausführungsform weist die Vorrichtung eine Verkehrsszenario- Datenbank auf, in der Verkehrsszenario-Beschreibungen in Form von Verkehrsszenario- Dateien abgelegt sind bzw. werden, die jeweils wenigstens einen in einem vorbestimm ten, insbesondere generischen, Format vorliegenden Parameter, mittels welchem ein durch die jeweilige Verkehrsszenario-Beschreibung charakterisiertes Verkehrsszenario an Randbedingungen angepasst werden kann, enthalten. In einer weiteren bevorzugten Ausführungsform weist die Vorrichtung auch eine Einga beeinrichtung auf, mittels der ein Benutzer eine Eingabe zur Auswahl von wenigstens einer Verkehrsszenario-Beschreibung, insbesondere aus in der Verkehrsszenario- Datenbank gespeicherten Verkehrsszenario-Beschreibungen, vornehmen kann. In a preferred embodiment, the device has a traffic scenario database in which traffic scenario descriptions are or are stored in the form of traffic scenario files, each of which has at least one parameter present in a predetermined, in particular generic, format, by means of which a through the respective traffic scenario description characterized traffic scenario can be adapted to boundary conditions. In a further preferred embodiment, the device also has an input device by means of which a user can make an input for selecting at least one traffic scenario description, in particular from traffic scenario descriptions stored in the traffic scenario database.
In einer weiteren bevorzugten Ausführungsform weist die Vorrichtung eine Simulations einrichtung auf, die dazu eingerichtet ist, einen Prüflauf unter Anwendung des erzeugten Testfalls auszuführen. Die Simulationseinrichtung kann dazu beispielsweise ein Simula tionsumgebung wie MATLAB/Simulink, IPG CarMaker, PreScan, SUMO SCANer oder Virtual Test Drive (VTD) aufweisen. In a further preferred embodiment, the device has a simulation device which is set up to carry out a test run using the test case generated. For this purpose, the simulation device can have, for example, a simulation environment such as MATLAB / Simulink, IPG CarMaker, PreScan, SUMO SCANer or Virtual Test Drive (VTD).
Die in Bezug auf den ersten Aspekt der Erfindung und dessen vorteilhafte Ausgestaltung beschriebenen Merkmale und Vorteile gelten, zumindest wo technisch sinnvoll, auch für den zweiten Aspekt der Erfindung und dessen vorteilhafte Ausgestaltung sowie umge kehrt. The features and advantages described in relation to the first aspect of the invention and its advantageous embodiment also apply, at least where it makes technical sense, to the second aspect of the invention and its advantageous embodiment, and vice versa.
Weitere Merkmale, Vorteile und Anwendungsmöglichkeiten der Erfindung ergeben sich aus der nachfolgenden Beschreibung im Zusammenhang mit den Figuren, in denen durchgängig dieselben Bezugszeichen für dieselben oder einander entsprechende Ele mente der Erfindung verwendet werden. Es zeigen wenigstens teilweise schematisch: Further features, advantages and possible applications of the invention will become apparent from the following description in connection with the figures, in which the same reference numerals are used for the same or corresponding elements of the invention. At least partially, they show schematically:
Fig. 1 eine bevorzugte Ausführungsform einer erfindungsgemäßen Vorrichtung; 1 shows a preferred embodiment of a device according to the invention;
Fig. 2 eine bevorzugte Ausführungsform eines erfindungsgemäßen Verfahrens; und 2 shows a preferred embodiment of a method according to the invention; and
Fig. 3 ein Beispiel für eine Verkehrsszenario-Beschreibung. 3 shows an example of a traffic scenario description.
Figur 1 zeigt eine bevorzugte Ausführungsform einer erfindungsgemäßen Vorrich tung 100 zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumge bung. Die Vorrichtung 100 weist eine Verkehrsszenario-Datenbank 2 mit darin gespei cherten Verkehrsszenario-Beschreibungen, die jeweils ein bestimmtes Verkehrsszenario charakterisieren, eine Eingabeeinrichtung 3 zum Auswählen wenigstens einer der in der Verkehrsszenario-Datenbank 2 gespeicherten Verkehrsszenario-Beschreibungen, eine Datenverarbeitungseinrichtung 4 zum Erstellen eines Testfalls, der mit einer konkreten Realisierung des durch die wenigstens eine ausgewählte Verkehrsszenario- Beschreibung charakterisierten Verkehrsszenarios korrespondiert, auf Grundlage der wenigstens einen ausgewählten Verkehrsszenario-Beschreibung und einer Simulations einrichtung 5 zum Durchführen eines Prüflaufs unter Anwendung des erzeugten Test falls, insbesondere einer auf Grundlage des Testfalls erzeugten Prüfumgebung. FIG. 1 shows a preferred embodiment of a device 100 according to the invention for testing a driver assistance system for a vehicle in a test environment. The device 100 has a traffic scenario database 2 with traffic scenario descriptions stored therein, each of which characterizes a specific traffic scenario, an input device 3 for selecting at least one of the traffic scenario descriptions stored in the traffic scenario database 2, and a data processing device 4 for creating a test case which, with a concrete realization of the traffic scenario selected by the at least one Description characterized traffic scenarios corresponds, based on the at least one selected traffic scenario description and a simulation device 5 for performing a test run using the test case generated, in particular a test environment generated based on the test case.
Die Verkehrsszenario-Beschreibungen charakterisieren in bevorzugter Weise jeweils ein spezifisches Verkehrsszenario, beispielsweise ein Cut-In-Manöver oder ein Cut-Out- Manöver, in einer generischen Weise. Mit anderen Worten stellen die Verkehrsszenario- Beschreibungen vorzugsweise jeweils ein Verkehrsszenario, insbesondere wenigstens ein konkretes Fahrmanöver eines am Verkehrsszenario beteiligten Fahrzeugs, in einer abstrakten Form dar. The traffic scenario descriptions preferably characterize a specific traffic scenario, for example a cut-in maneuver or a cut-out maneuver, in a generic manner. In other words, the traffic scenario descriptions preferably each represent a traffic scenario, in particular at least one concrete driving maneuver of a vehicle involved in the traffic scenario, in an abstract form.
Die Verkehrsszenario-Beschreibungen sind dabei in bevorzugter Weise in Form von Verkehrsszenario-Dateien in der Verkehrsszenario-Datenbank 2 gespeichert. Aufgrund des bevorzugten generischen Charakters der Verkehrsszenario-Beschreibungen können die Verkehrsszenario-Dateien unabhängig vom jeweils charakterisierten (spezifischen) Verkehrsszenario dabei in einem vorbestimmten, insbesondere generischen, Format gespeichert sein. Dadurch wird beispielsweise eine Identifikation und/oder eine Paramet risierung des durch die jeweilige Verkehrsszenario-Beschreibung charakterisierten Ver kehrsszenarios ermöglicht oder zumindest vereinfacht. The traffic scenario descriptions are preferably stored in the traffic scenario database 2 in the form of traffic scenario files. Because of the preferred generic character of the traffic scenario descriptions, the traffic scenario files can be stored in a predetermined, in particular generic, format, regardless of the (specific) traffic scenario characterized in each case. This enables or at least simplifies, for example, an identification and / or a parameterization of the traffic scenario characterized by the respective traffic scenario description.
Die in der Verkehrsszenario-Datenbank 2 gespeicherten Verkehrsszenario-Beschreibun gen können zu diesem Zweck beispielsweise wenigstens einen Parameter, etwa Ge schwindigkeiten und/oder Positionen der im Verkehrsszenario enthaltenen Verkehrsteil nehmer, aufweisen, mit dem das jeweilige Verkehrsszenario an Randbedingungen an gepasst werden kann. Der jeweils wenigstens eine Parameter ist in bevorzugter Weise in den Verkehrsszenario-Dateien enthalten. Insbesondere kann das vorgegebene Format der Verkehrsszenario- Dateien dem vorgegebenen Format des wenigstens einen Para meters, mit dem der wenigstens eine Parameter in der Verkehrsszenario-Datei abgelegt ist, entsprechen. Mit anderen Worten kann das vorgegebene Format der Verkehrsszena rio-Dateien durch die Struktur, mit welcher der wenigstens eine Parameter in der Ver kehrsszenario-Datenbank 2 gespeichert ist, vorgegeben bzw. gebildet sein. Dadurch wird die Parametrisierung der Verkehrsszenarien ermöglicht. Über den wenigstens einen, in den Verkehrsszenario-Dateien jeweils enthaltenen Para meter kann auch wenigstens eine Verkehrsszenario-Beschreibung ausgewählt werden. Beispielsweise kann ein Benutzer über die Eingabeeinrichtung 3 wenigstens einen Pa rameter angeben bzw. spezifizieren, welcher bei der Erstellung von Testfällen berück sichtigt werden soll. Insbesondere ist es denkbar, dass der Benutzer über die Eingabe einrichtung 3 wenigstens einen Wert oder Wertebereich für den wenigstens einen Para meter eingibt, so dass in der Datenbank diejenigen Verkehrsszenario-Beschreibungen ausgewählt werden können, welche den entsprechenden Parameter aufweisen bzw. in denen der entsprechende Parameter den eingegebenen Wert oder Wertebereich an nehmen kann. For this purpose, the traffic scenario descriptions stored in the traffic scenario database 2 can have, for example, at least one parameter, for example speeds and / or positions of the traffic participants contained in the traffic scenario, with which the respective traffic scenario can be adapted to boundary conditions. The at least one parameter is preferably contained in the traffic scenario files. In particular, the predefined format of the traffic scenario files can correspond to the predefined format of the at least one parameter with which the at least one parameter is stored in the traffic scenario file. In other words, the predetermined format of the traffic scenario files can be predetermined or formed by the structure with which the at least one parameter is stored in the traffic scenario database 2. This enables the parameterization of the traffic scenarios. At least one traffic scenario description can also be selected via the at least one parameter contained in the traffic scenario files. For example, a user can use the input device 3 to specify or specify at least one parameter which is to be taken into account when creating test cases. In particular, it is conceivable for the user to enter at least one value or range of values for the at least one parameter via the input device 3, so that those traffic scenario descriptions which have the corresponding parameter or in which the corresponding one can be selected can be selected in the database Parameter can take the entered value or range of values.
Zu diesem Zweck kann die Eingabeeinrichtung 3 beispielsweise eine graphische Benut zeroberfläche aufweisen, in welcher der Benutzer Angaben zur Auswahl der wenigstens einen Verkehrsszenario-Beschreibung, insbesondere zu dem wenigstens einen Parame ter, machen kann. Somit dient die Eingabeeinrichtung 3 in bevorzugter Weise als Benut zerschnittstelle. For this purpose, the input device 3 can have, for example, a graphical user interface, in which the user can provide information on the selection of the at least one traffic scenario description, in particular the at least one parameter. The input device 3 thus preferably serves as a user interface.
Die Datenverarbeitungseinrichtung 4 ist in bevorzugter Weise dazu eingerichtet, wenigs tens einen vorgegebenen Wert für den wenigstens einen Parameter zur Erzeugung des Testfalls auf Grundlage der wenigstens einen ausgewählten Verkehrsszenario- Beschreibung zu berücksichtigen, wobei der wenigstens eine vorgegebene Wert bei spielsweise durch die Eingabeeinrichtung 3 bereitgestellt werden kann. Durch Vorgeben wenigstens eines Wertes für den wenigstens einen Parameter kann das durch die aus gewählte, vorzugsweise generische bzw. abstrakte, Verkehrsszenario-Beschreibung charakterisierte Verkehrsszenario konkretisiert werden, so dass der Testfall in bevorzug ter Weise einer spezifischen Realisierung des Verkehrsszenarios entspricht. The data processing device 4 is preferably set up to take into account at least one predefined value for the at least one parameter for generating the test case on the basis of the at least one selected traffic scenario description, the at least one predefined value being provided, for example, by the input device 3 can. By specifying at least one value for the at least one parameter, the traffic scenario characterized by the selected, preferably generic or abstract, traffic scenario description can be concretized, so that the test case preferably corresponds to a specific implementation of the traffic scenario.
Anhand des von der Datenverarbeitungseinrichtung 4 erzeugten Testfalls kann die Simu lationseinrichtung 5 in bevorzugter Weise eine Prüfumgebung erzeugen, in welcher ein Fahrerassistenzsystem einem Prüflauf unterzogen werden kann. Beispielsweise kann die Simulationseinrichtung 5 auf Grundlage des erzeugten Testfalls ein virtuelles, insbe sondere dynamisches, Fahrzeugumfeld simulieren, in welchem die Reaktion des Fahrer assistenzsystems in dem durch den Testfall konkretisierten Verkehrsszenario getestet wird. Die Parametrisierung der Verkehrsszenarien, die jeweils durch eine Verkehrssze nario-Beschreibung charakterisiert sind, erlaubt entsprechend das Testen des Fahreras- sistenzsystems unter verschiedenen Bedingungen, z.B. bei verschiedenen Witterungen, auf verschiedenen Straßensegmenten, bei verschiedenen Fahrzeuggeschwindigkeiten, mit oder ohne Anhänger und/oder dergleichen. Based on the test case generated by the data processing device 4, the simulation device 5 can preferably generate a test environment in which a driver assistance system can be subjected to a test run. For example, on the basis of the test case generated, the simulation device 5 can simulate a virtual, in particular dynamic, vehicle environment in which the reaction of the driver assistance system is tested in the traffic scenario specified by the test case. The parameterization of the traffic scenarios, each of which is characterized by a description of the traffic scenario, allows the driver to be tested accordingly. assistance systems under different conditions, for example in different weather conditions, on different road segments, at different vehicle speeds, with or without a trailer and / or the like.
Figur 2 zeigt eine bevorzugte Ausführungsform eines erfindungsgemäßen Verfahrens 1 zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumgebung 6. Dabei wird in einem Verfahrensschritt S1 vorzugsweise ein beim Erfassen eines realen Fahrzeugumfelds mittels einer Sensoreinrichtung erzeugter Sensordatenstrom 7 verar beitet. Der Sensordatenstrom 7 kann insbesondere derart aufbereitet werden, dass pa- rametrisierbare Datensätze, die jeweils wenigstens ein Verkehrsszenario charakterisie ren, erzeugt und als, insbesondere generische, Verkehrsszenario-Beschreibungen in einer Datenbank 2 abgelegt werden können. Diese Verkehrsszenario-Beschreibungen dienen im Folgenden als Grundlage für die Erzeugung wenigstens eines Testfalls, mit dem die Prüfumgebung 6 zum Testen des Fahrerassistenzsystems erzeugbar ist. FIG. 2 shows a preferred embodiment of a method 1 according to the invention for testing a driver assistance system for a vehicle in a test environment 6. In a method step S1, a sensor data stream 7 generated when a real vehicle environment is detected by means of a sensor device is preferably processed. The sensor data stream 7 can in particular be prepared in such a way that parameterizable data records, each characterizing at least one traffic scenario, can be generated and stored in a database 2 as, in particular, generic traffic scenario descriptions. In the following, these traffic scenario descriptions serve as the basis for the generation of at least one test case with which the test environment 6 can be generated for testing the driver assistance system.
Vorzugsweise wird der Sensordatenstrom 7 im Verfahrensschritt S1 verarbeitet, insbe sondere analysiert, z.B. indem das durch den Sensordatenstrom 7 abgebildete Fahr zeugumfeld klassifiziert wird. Dabei können beispielsweise Elemente des Fahrzeugum felds in einzelnen durch Sensordatenfusion erhaltenen Momentaufnahmen des Fahr zeugumfelds, die einzelnen Szenen eines realen (spezifischen) Verkehrsszenarios ent sprechen, erkannt und markiert (engl labeled) werden. Somit wird vorzugsweise sog. Meta-Information, die über die reine aufgrund der sensorischen Erfassung des Fahr zeugumfelds physikalische Information hinausgeht, erzeugt. Beispielsweise können in diesem Rahmen Objektlisten von im Fahrzeugumfeld erkannten Objekten, etwa anderen Verkehrsteilnehmern oder Verkehrszeichen, erzeugt werden. Eine solche Verarbeitung des Sensordatenstroms 7 kann beispielsweise durch einen regelbasierten Ansatz, bei dem vorgegebene Ereignisse erkannt und markiert werden, implementiert werden. The sensor data stream 7 is preferably processed in method step S1, in particular analyzed, e.g. by the vehicle environment mapped by the sensor data stream 7 is classified. For example, elements of the vehicle environment can be identified and labeled in individual snapshots of the vehicle environment obtained by sensor data fusion, which correspond to individual scenes of a real (specific) traffic scenario. Thus, so-called. Meta information, which goes beyond the pure physical information due to the sensory detection of the vehicle environment, is preferably generated. For example, object lists of objects recognized in the vehicle environment, such as other road users or traffic signs, can be generated in this frame. Such processing of the sensor data stream 7 can be implemented, for example, by a rule-based approach in which predetermined events are recognized and marked.
Mit anderen Worten wird auf Grundlage des Sensordatenstroms 7 vorzugsweise ein Umgebungsmodell erzeugt, welches beispielsweise die Objekte um das mit der Sen soreinrichtung ausgestatteten EGO-Fahrzeugs repräsentiert. In other words, an environment model is preferably generated on the basis of the sensor data stream 7, which, for example, represents the objects around the EGO vehicle equipped with the sensor device.
In einem weiteren Verfahrensschritt S2a kann auf Grundlage des derart verarbeiteten Sensordatenstroms 7, insbesondere aus der dabei erzeugte Meta-Information wie etwa einer Objektliste, wenigstens ein Datensatz, der wenigstens ein durch die Sensoreinrich- tung erfasstes Verkehrsszenario charakterisiert, ermittelt werden. Z.B. können mit ein zelnen Verkehrsszenarien korrespondierende aufbereitete Sensordaten, die etwa durch erkannte vorgegebene Ereignisse identifiziert werden, aus dem Sensordatenstrom 7 se lektiv extrahiert werden. Dies kann auch als Szenario-Mining bezeichnet werden. In a further method step S2a, on the basis of the sensor data stream 7 processed in this way, in particular from the meta-information generated in the process, such as an object list, at least one data record that contains at least one characterized, determined traffic scenario. For example, processed sensor data corresponding to individual traffic scenarios, which are identified, for example, by recognized predetermined events, can be selectively extracted from the sensor data stream 7. This can also be called scenario mining.
In einem weiteren Verfahrensschritt S2b wird vorzugsweise für den wenigstens einen ermittelten Datensatz wenigstens ein Parameter identifiziert, mittels dem das durch den wenigstens einen ermittelten Datensatz charakterisierte wenigstens eine Verkehrsszena rio an Randbedingungen, etwa an eine Witterung, eine Geschwindigkeit des EGO- Fahrzeugs und/oder dergleichen, angepasst werden kann. Mit anderen Worten kann das durch den wenigstens einen ermittelten Datensatz charakterisierte wenigstens eine Ver kehrsszenario parametrisiert werden. In a further method step S2b, at least one parameter is preferably identified for the at least one determined data set, by means of which the at least one traffic scenario characterized by the at least one determined data set is based on boundary conditions, such as weather conditions, a speed of the EGO vehicle and / or the like , can be adjusted. In other words, the at least one traffic scenario characterized by the at least one determined data record can be parameterized.
Die Identifikation des wenigstens einen Parameters kann beispielsweise erreicht werden, indem aus dem klassifizierten Fahrzeugumfeld, d.h. dem wenigstens einen Datensatz, die Zustände von Elementen des Fahrzeugumfelds, etwa von erkannten Objekten wie andere Verkehrsteilnehmer, ermittelt und in aufeinanderfolgenden Szenen des durch den wenigstens einen Datensatz charakterisierten Verkehrsszenarios miteinander verglichen werden. Dabei kann ein Zustand eines Elementes des Fahrzeugumfelds beispielsweise durch physikalische Größen wie etwa eine Geschwindigkeit, Position, Konfiguration und/oder dergleichen definiert sein. In bevorzugter Weise wird wenigstens ein Parameter insbesondere dann identifiziert, wenn eine Änderung eines Zustands eines Elementes in den zeitlich aufeinanderfolgenden Szenen des Verkehrsszenarios, Beispielsweise eine Änderung der Geschwindigkeit oder der Position, auftritt. The identification of the at least one parameter can be achieved, for example, by using the classified vehicle environment, i.e. the at least one data record, the states of elements of the vehicle environment, for example of recognized objects such as other road users, are determined and compared with one another in successive scenes of the traffic scenario characterized by the at least one data record. In this case, a state of an element of the vehicle environment can be defined, for example, by physical variables such as a speed, position, configuration and / or the like. In a preferred manner, at least one parameter is identified in particular when a change in a state of an element occurs in the temporally successive scenes of the traffic scenario, for example a change in speed or position.
Da die Verkehrsszenario-Beschreibung in bevorzugter Weise durch den in Verfahrens schritt S2a ermittelten Datensatz und den wenigstens einen in Verfahrensschritt S2b identifizierten Parameter definiert ist, können die Verfahrensschritte S2a und S2b auch als ein Ermitteln von Verkehrsszenario-Beschreibungen verstanden und in einem Verfah rensschritt S2c zusammengefasst werden. Alternativ oder zusätzlich können solche Ver kehrsszenario-Beschreibungen aber auch anderweitig ermittelt werden, etwa aus ande ren Datenbanken wie etwa NCAP-, DVP und/oder Unfalldatenbanken (nicht gezeigt). Since the traffic scenario description is preferably defined by the data set determined in method step S2a and the at least one parameter identified in method step S2b, method steps S2a and S2b can also be understood as determining traffic scenario descriptions and summarized in a method step S2c will. As an alternative or in addition, such traffic scenario descriptions can also be determined in some other way, for example from other databases such as NCAP, DVP and / or accident databases (not shown).
In einem weiteren Verfahrensschritt S3 wird der wenigstens eine Datensatz mit dem we nigstens einen derart parametrisierten Verkehrsszenario als, insbesondere generische, Verkehrsszenario-Beschreibung in einer Verkehrsszenario-Datei abgelegt und in der Verkehrsszenario-Datenbank 2 gespeichert. Dabei kann insbesondere der wenigstens eine identifizierte Parameter in einem vorgegebenen, insbesondere generischen, Format in der Verkehrsszenario-Datei abgelegt werden. In a further method step S3, the at least one data record with the at least one traffic scenario parameterized in this way as, in particular generic, Traffic scenario description stored in a traffic scenario file and stored in the traffic scenario database 2. In particular, the at least one identified parameter can be stored in a predetermined, in particular generic, format in the traffic scenario file.
In einem weiteren Verfahrensschritt S4 kann dann durch eine Eingabe eines Benutzers, etwa über eine Eingabeeinrichtung 3, wenigstens eine der ermittelten und in der Ver kehrsszenario-Datenbank 2 gespeicherten Verkehrsszenario-Beschreibungen ausge wählt werden. Z.B. kann der Benutzer wenigstens einen Parameter, mit dem die durch die Verkehrsszenario-Beschreibungen charakterisierten Verkehrsszenarien an Randbe dingungen angepasst werden können, angeben. In a further method step S4, at least one of the traffic scenario descriptions ascertained and stored in the traffic scenario database 2 can then be selected by inputting a user, for example via an input device 3. E.g. the user can specify at least one parameter with which the traffic scenarios characterized by the traffic scenario descriptions can be adapted to boundary conditions.
Die wenigstens eine bezüglich der Benutzereingabe relevante bzw. ausgewählte Ver kehrsszenario-Beschreibung wird einer Datenverarbeitungseinrichtung zur Verfügung gestellt, die auf Grundlage dieser Verkehrsszenario-Beschreibung und wenigstens ei nem, insbesondere durch die Benutzereingabe, vorgegebenen Wert für den wenigstens einen Parameter in einem weiteren Verfahrensschritt S6 wenigstens einen Testfall er zeugt, welcher mit einer konkreten Realisierung des durch die wenigstens eine ausge wählte Verkehrsszenario-Beschreibung charakterisierten Verkehrsszenarios korrespon diert. Der wenigstens eine erzeugte Testfall kann zur Erzeugung einer Prüfumgebung zum Testen des Fahrerassistenzsystems genutzt werden. The at least one traffic scenario description that is relevant or selected with regard to the user input is made available to a data processing device that, based on this traffic scenario description and at least one value, in particular by the user input, for the at least one parameter in a further method step S6 at least one test case is generated which corresponds to a concrete implementation of the traffic scenario characterized by the at least one selected traffic scenario description. The at least one test case generated can be used to generate a test environment for testing the driver assistance system.
Der Benutzer kann dabei über seine Eingabe den Test des Fahrerassistenzsystems be einflussen, insbesondere konfigurieren, beispielsweise indem er Randbedingungen für den das von der wenigstens einen Verkehrsszenario-Beschreibung charakterisierte Ver kehrsszenario vorgibt, insbesondere den Ablauf des Verkehrsszenarios, z.B. das Auflö sen einer Verkehrssituation, spezifiziert. Dazu kann der Benutzer z.B. entsprechende Parameter, auf deren Grundlage der wenigstens eine Testfall erstellt wird, auswählen. Es ist insbesondere denkbar, dass der Benutzer über seine Eingabe direkt relevante Verkehrsszenario-Beschreibungen auswählt und, z.B. durch Vorgeben wenigstens eines Wertes oder Wertebereichs eines entsprechenden Parameters, modifiziert. The user can influence, in particular configure, the test of the driver assistance system via his input, for example by specifying boundary conditions for the traffic scenario characterized by the at least one traffic scenario description, in particular the course of the traffic scenario, e.g. resolving a traffic situation, specified. For this, the user can e.g. select appropriate parameters on the basis of which the at least one test case is created. It is particularly conceivable that the user directly selects relevant traffic scenario descriptions and, e.g. by specifying at least one value or range of values of a corresponding parameter.
Solche modifizierten Verkehrsszenario-Beschreibungen können in einem weiteren Ver fahrensschritt S5, gegebenenfalls zusammen mit erzeugten Testfällen, in der Verkehrs- szenario-Datenbank abgelegt werden, wo Sie zu einem späteren Zeitpunkt zum, insbe sondere schnelleren, Erzeugen von Testfällen ausgewählt werden können. Such modified traffic scenario descriptions can be carried out in a further method step S5, possibly together with generated test cases, in the traffic scenario database, where you can be selected at a later point in time, especially faster, to create test cases.
In einem weiteren Verfahrensschritt S7 wird mittels einer Simulationseinrichtung 5 aus dem wenigstens einen erzeugten Testfall eine Prüfumgebung 6 zum Testen eines Fah rerassistenzsystems erzeugt, beispielsweise ein virtuelles Fahrzeugumfeld. Die Simula tionseinrichtung 5 kann zu diesem Zweck eine Simulationsumgebung, etwa MATLAB/Simulink, IPG CarMaker, PreScan, SUMO SCANer oder Virtual Test Drive (VTD) aufweisen. Die Prüfumgebung 6 kann dabei unabhängig von der verwendeten Simulationsumgebung erzeugt werden, da die Verkehrsszenario-Beschreibungen in der Verkehrsszenario-Datenbank 2 als Verkehrsszenario-Dateien in einem vorgegebenen, insbesondere generischen, Format abgelegt sind und dementsprechend auch die Test fälle in einem standardisierten Format, z.B. dem OpenSCENARIO-Format, erzeugt wer den können. In a further method step S7, a test environment 6 for testing a driver assistance system, for example a virtual vehicle environment, is generated from the at least one test case generated by means of a simulation device 5. For this purpose, the simulation device 5 can have a simulation environment, such as MATLAB / Simulink, IPG CarMaker, PreScan, SUMO SCANer or Virtual Test Drive (VTD). The test environment 6 can be generated independently of the simulation environment used, since the traffic scenario descriptions in the traffic scenario database 2 are stored as traffic scenario files in a predetermined, in particular generic, format and, accordingly, the test cases in a standardized format, e.g. the OpenSCENARIO format, who can.
Es wird darauf hingewiesen, dass es sich bei den Ausführungsbeispielen lediglich um Beispiele handelt, die den Schutzbereich, die Anwendungen und den Aufbau in keiner Weise einschränken sollen. Vielmehr wird dem Fachmann durch die vorausgehende Be schreibung ein Leitfaden für die Umsetzung von mindestens eines Ausführungsbeispiels gegeben, wobei diverse Änderungen, insbesondere in Hinblick auf die Funktion und An ordnung der beschriebenen Bestandteile, vorgenommen werden können, ohne den Schutzbereich zu verlassen, wie er sich aus den Ansprüchen und diesen äquivalenten Merkmalskombinationen ergibt. It is pointed out that the exemplary embodiments are merely examples which are not intended to restrict the scope of protection, the applications and the structure in any way. Rather, the person skilled in the art is given a guide for the implementation of at least one exemplary embodiment by the preceding description, wherein various changes, in particular with regard to the function and arrangement of the described components, can be carried out without leaving the scope of protection as it is results from the claims and these equivalent combinations of features.
Figur 3 zeigt ein Beispiel für eine Verkehrsszenario-Beschreibung 1 1 in einer schemati schen Darstellung. In bevorzugter Weise entspricht die gezeigte Verkehrsszenario- Beschreibung 12 einer allgemeinen Beschreibung eines spezifischen Verkehrsszenarios, insbesondere einem Fahrmanöver wie etwa einem Cut-In-Manöver (Einschermanöver) im gezeigten Beispiel, bei dem ein EGO-Fahrzeug 8, auf welches sich das Verkehrssze nario bezieht, von einer ersten Fahrspur 9a auf eine zweite, benachbarte Fahrspur 9b hinter einem vorausfahrenden Fahrzeug 10 einschert, wie durch den Pfeil angedeutet ist. Auf Grundlage einer entsprechenden Verkehrsszenario-Beschreibung 12 könnte z.B. ein Fahrerassistenzsystem, z.B. ein Abstandsregeltempomat (Adaptive Cruise Control, ACC) auf seine Reaktion beim und/oder nach dem Einscheren getestet werden. Eine solche, ein Verkehrsszenario charakterisierende Verkehrsszenario-Beschrei bung 12 kann auf verschiedene Weisen ermittelt werden. Beispielsweise können Ver kehrsszenario-Beschreibungen aus NCAP, DVP und/oder Unfall-Datenbanken geladen werden. Alternativ oder zusätzlich können Sensordaten gesammelt werden, welche das Verkehrsszenario charakterisieren, etwa indem entsprechende Simulationen durchge führt oder das mit einer Sensoreinrichtung zur Erfassung des Fahrzeugumfelds ausge stattete EGO-Fahrzeug 8 eine Testfahrt absolviert und aus einem dabei von der Sen soreinrichtung erzeugten Sensordatenstrom ein Abschnitt, der mit dem Verkehrsszenario korrespondiert, als Sensordaten extrahiert wird. Figure 3 shows an example of a traffic scenario description 1 1 in a schematic representation. Preferably, the traffic scenario description 12 shown corresponds to a general description of a specific traffic scenario, in particular a driving maneuver such as a cut-in maneuver in the example shown, in which an EGO vehicle 8 to which the traffic scenario relates , from a first lane 9a to a second, adjacent lane 9b behind a preceding vehicle 10, as indicated by the arrow. On the basis of a corresponding traffic scenario description 12, for example, a driver assistance system, for example adaptive cruise control (ACC), could be tested for its reaction during and / or after reeving. Such a traffic scenario description 12 characterizing a traffic scenario can be determined in various ways. For example, traffic scenario descriptions can be loaded from NCAP, DVP and / or accident databases. As an alternative or in addition, sensor data can be collected which characterize the traffic scenario, for example by carrying out corresponding simulations or the EGO vehicle 8 equipped with a sensor device for detecting the vehicle environment is taking a test drive and a section of a sensor data stream generated by the sensor device, which corresponds to the traffic scenario when sensor data is extracted.
Der Sensordatenstrom zeichnet sich im Hinblick auf das Cut-In-Manöver beispielsweise dadurch aus, dass das vorausfahrende Fahrzeug 10 plötzlich mitten in einem Erfas sungsbereich 1 1 einer Sensoreinheit der Sensoreinrichtung, etwa einem LIDAR-Sensor, beim Wechseln der Fahrspuren 9a, 9b erfasst wird. Dieses Ereignis kann daher als Aus löser (Trigger) für das Cut-In-Manöver aufgefasst und, vorzugsweise zusammen mit wei teren entsprechenden Auslösern, zur Extraktion der Sensordaten aus dem Sensordaten strom genutzt werden. With regard to the cut-in maneuver, the sensor data stream is distinguished, for example, by the fact that the vehicle 10 driving ahead is suddenly detected in the middle of a detection region 11 of a sensor unit of the sensor device, for example a LIDAR sensor, when the lanes 9a, 9b change . This event can therefore be interpreted as a trigger for the cut-in maneuver and, preferably together with other corresponding triggers, can be used to extract the sensor data from the sensor data stream.
Auf Grundlage der derart extrahierten Sensordaten werden vorzugsweise im Folgenden Parameter identifiziert, die Randbedingungen des Verkehrsszenarios festlegen, bei spielsweise die Geschwindigkeit des Ego-Fahrzeugs 8 und des vorausfahrenden Fahr zeugs 10, der Abstand des Egofahrzeugs 8 vom vorausfahrenden Fahrzeug 10 zu Be ginn und/oder am Ende des Cut-In-Manövers, die von den Fahrzeugen 8, 10 jeweils be nutzten Fahrspuren 9a, 9b und/oder dergleichen. Die derart identifizierten Parameter legen in bevorzugter Weise fest, wie das Cut-In-Manöver abläuft. On the basis of the sensor data extracted in this way, parameters are preferably identified in the following which determine the boundary conditions of the traffic scenario, for example the speed of the ego vehicle 8 and the vehicle 10 driving ahead, the distance of the ego vehicle 8 from the vehicle 10 driving ahead at the beginning and / or at the end of the cut-in maneuver, the lanes 9a, 9b and / or the like used by the vehicles 8, 10 each. The parameters identified in this way preferably determine how the cut-in maneuver proceeds.
Die Parameter können dabei insbesondere identifiziert werden, indem verschiedene Zu stände der beiden Fahrzeuge 8, 10, welche durch die Parameter definiert sind und die während des Ablaufs des Verkehrsszenarios, insbesondere zu Beginn und am Ende des Verkehrsszenarios, auftreten, miteinander verglichen, insbesondere voneinander subtra hiert, werden. The parameters can in particular be identified by comparing different states of the two vehicles 8, 10 which are defined by the parameters and which occur during the course of the traffic scenario, in particular at the beginning and at the end of the traffic scenario, in particular subtractively from one another here.
Die derart identifizierten Parameter werden in bevorzugter Weise zumindest als Teil der Verkehrsszenario-Beschreibung 12 in einer Verkehrsszenario-Datei abgelegt, die zu sammen mit weiteren Verkehrsszenario-Dateien, z.B. aus NCAP, DVP und/oder Unfall- Datenbanken, eine Verkehrsszenario-Datenbank bildet. Vorzugsweise wird die Ver kehrsszenario-Datei dabei mit einer Markierung (Tag) versehen, welche die in der Ver kehrsszenario-abgelegte Verkehrsszenario-Beschreibung 12 als mit einem Cut-In- Manöver korrespondierend kennzeichnet. The parameters identified in this way are preferably stored at least as part of the traffic scenario description 12 in a traffic scenario file which, together with other traffic scenario files, for example from NCAP, DVP and / or accident Databases, which forms a traffic scenario database. The traffic scenario file is preferably provided with a marker (tag) which identifies the traffic scenario description 12 stored in the traffic scenario as corresponding to a cut-in maneuver.
Zur Erzeugung eines Testfalls (Test Case), auf dessen Grundlage eine Prüfumgebung generierbar ist, in der das Fahrerassistenzsystem des EGO-Fahrzeugs 8 (im Folgenden als Testfahrzeug bezeichnet, da es mit dem zu testenden Fahrerassistenzsystem ausge stattet ist), getestet werden kann, kann die Verkehrsszenario-Beschreibung 12 des Cut- In-Manövers, die wie voranstehend beschrieben ermittelt wurde, ausgewählt werden, z.B. durch eine Benutzereingabe, durch die alle mit der entsprechenden Markierung ge kennzeichnete Verkehrsszenario-Beschreibungen 12 abgerufen werden. Werte für die Parameter der ausgewählten Verkehrsszenario-Beschreibung 12 können, z.B. ebenfalls durch eine Benutzereingabe oder durch Abrufen aus einer Parameter-Datenbank, vor gegeben werden. Das durch die ausgewählte Verkehrsszenario-Beschreibung 12 cha rakterisierte Cut-In-Manöver wird daraufhin in bevorzugter Weise an die durch die Para meter und/oder weitere, z.B. durch die Benutzereingabe vorgegebene, Kriterien definier ten Randbedingungen angepasst. To generate a test case, on the basis of which a test environment can be generated in which the driver assistance system of the EGO vehicle 8 (hereinafter referred to as test vehicle, since it is equipped with the driver assistance system to be tested) can be tested the traffic scenario description 12 of the cut-in maneuver, which was determined as described above, is selected, eg by a user input, by means of which all traffic scenario descriptions 12 identified with the corresponding marking are called up. Values for the parameters of the selected traffic scenario description 12 can e.g. also by user input or by retrieving from a parameter database. The cut-in maneuver characterized by the selected traffic scenario description 12 is then preferably matched to the parameters set by the parameters and / or others, e.g. Boundary conditions defined by the user input are adapted.
Beispielsweise kann für die, insbesondere laterale, Geschwindigkeit des Testfahrzeugs 8 ein Wert vorgegeben werden, der geringer ist als beim Erfassen des realen Cut-In- Manövers. Entsprechend läuft die durch den Testfall charakterisierte Realisierung des Cut-In-Manövers langsamer ab bzw. dauert länger. Auf diese Weise kann auch für ande re Parameter wenigstens ein Wert oder Wertebereich vorgegeben werden, um eine oder mehrere Realisierungen des Cut-In-Manövers zu erzeugen. Entsprechend können leicht und ohne großen Aufwand mehrere verschiedene Testfälle auf Grundlage der einen Verkehrsszenario-Beschreibung 12 erzeugt werden. Bezuaszeichenliste For example, a value can be specified for the, in particular lateral, speed of the test vehicle 8, which value is lower than when the real cut-in maneuver was recorded. Accordingly, the implementation of the cut-in maneuver characterized by the test case proceeds more slowly or takes longer. In this way, at least one value or range of values can also be specified for other parameters in order to produce one or more implementations of the cut-in maneuver. Correspondingly, several different test cases can be generated easily and without great effort on the basis of the one traffic scenario description 12. Reference list
1 Verfahren 1 procedure
S1 -S7 Verfahrensschritte S1 -S7 process steps
2 Verkehrsszenario-Datenbank 2 Traffic scenario database
3 Eingabeeinrichtung  3 input device
4 Datenverarbeitungseinrichtung  4 data processing device
5 Simulationseinrichtung  5 simulation device
6 Prüfumgebung 6 test environment
7 Sensordatenstrom  7 sensor data stream
8 EGO- Fahrzeug bzw. Testfahrzeug8 EGO vehicle or test vehicle
9a, 9b Fahrspur 9a, 9b lane
10 anderes Fahrzeug  10 other vehicle
11 Erfassungsbereich  11 Detection area
12 Verkehrsszenario-Beschreibung  12 Description of the traffic scenario
100 Vorrichtung 100 device

Claims

Patentansprüche Claims
1. Verfahren (1 ) zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer1. Method (1) for testing a driver assistance system for a vehicle in one
Prüfumgebung (6), aufweisend die folgenden Arbeitsschritte: Test environment (6), comprising the following steps:
- Ermitteln (S2c) von Verkehrsszenario-Beschreibungen (12), welche jeweils ein bestimmtes Verkehrsszenario, insbesondere ein Cut-In- anöver oder ein Cut-Out-Manöver, charakterisieren und wenigstens einen Parameter aufwei sen, mittels welchem das jeweilige Verkehrsszenario an Randbedingungen angepasst werden kann, wobei die Verkehrsszenario-Beschreibungen (12) vorzugsweise, insbesondere jeweils, in einer Verkehrsszenario-Datei abgelegt sind oder werden, in welcher der wenigstens eine Parameter in einem vorbestimmten, insbesondere generischen, Format abgelegt ist;  - Determining (S2c) traffic scenario descriptions (12), each of which characterizes a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, and has at least one parameter by means of which the respective traffic scenario is adapted to boundary conditions can be, the traffic scenario descriptions (12) preferably, in particular in each case, being stored in a traffic scenario file, in which the at least one parameter is stored in a predetermined, in particular generic, format;
- Auswahlen (S4) von wenigstens einer Verkehrsszenario-Beschreibung (12) auf der Grundlage einer Eingabe eines Benutzers und/oder von vorgegebe nen Kriterien; und  - Selections (S4) of at least one traffic scenario description (12) on the basis of an input from a user and / or of specified criteria; and
- Erzeugen (S6) eines Testfalis auf der Grundlage der wenigstens einen aus gewählten Verkehrsszenario-Beschreibung (12) und von wenigstens einem vorgegebenen Wert für den wenigstens einen Parameter und vorzugsweise weiterer Verkehrsszenario-Beschreibungen, wobei der Testfall mit einer konkreten Realisierung des durch die wenigstens eine ausgewählte Verkehrsszenario-Beschreibung (1 ) charakterisierten Verkehrsszenarios und vor zugsweise weiterer Verkehrsszenarien in Bezug auf den wenigstens einen vorgegebenen Wert des wenigstens einen Parameters korrespondiert und geeignet ist, eine Prüfumgebung (6) zu erzeugen, in welcher ein Fahrerassis- tenzsystem einem Prüflauf unterzogen werden kann.  - Generation (S6) of a test case on the basis of the at least one selected traffic scenario description (12) and at least one predetermined value for the at least one parameter and preferably further traffic scenario descriptions, the test case with a concrete realization of the by the at least a selected traffic scenario description (1) characterizes traffic scenarios and, before further traffic scenarios, preferably corresponds to the at least one predetermined value of the at least one parameter and is suitable for generating a test environment (6) in which a driver assistance system is subjected to a test run can.
2. Verfahren nach Anspruch 1 , des Weiteren aufweisend den folgenden Arbeits- schritt: 2. The method of claim 1, further comprising the following step:
- Durchführen (S7) eines Prüflaufs unter Anwendung des erzeugten Testfalls.  - Carrying out (S7) a test run using the generated test case.
3. Verfahren (1) nach einem der Ansprüche 1 oder 2, des Weiteren folgende Arbeitsschritte aufweisend: - Ermitteln (S2a) wenigstens eines Datensatzes, der wenigstens ein, insbesondere reales, Verkehrsszenario charakterisiert; und 3. The method (1) according to claim 1 or 2, further comprising the following steps: - Determining (S2a) at least one data record that characterizes at least one, in particular real, traffic scenario; and
- Identifizieren (S2b) von wenigstens einem Parameter in dem wenigstens einen ermittelten Datensatz, mittels welchem das jeweilige Verkehrsszenario an Randbedingungen angepasst werden kann, insbesondere an eine initiale Geschwindigkeit eines Ego-Fahrzeugs, auf welches sich das Verkehrsszenario bezieht.  - Identifying (S2b) at least one parameter in the at least one determined data set, by means of which the respective traffic scenario can be adapted to boundary conditions, in particular an initial speed of a first-person vehicle, to which the traffic scenario relates.
4. Verfahren nach Anspruch 3, wobei das Identifizieren des wenigstens einen Parameters mittels eines Vergleichs eines klassifizierten Fahrzeugumfelds in zeitlich aufeinander folgenden Szenen des wenigstens einen, durch den wenigstens einen ermittelten Datensatz charakterisierten Verkehrsszenarios durchgeführt wird. 4. The method according to claim 3, wherein the identification of the at least one parameter is carried out by comparing a classified vehicle environment in chronologically successive scenes of the at least one traffic scenario characterized by the at least one determined data record.
5. Verfahren nach Anspruch 3 oder 4, des Weiteren den Arbeitsschritt aufweisend: 5. The method according to claim 3 or 4, further comprising the step:
- Erzeugen wenigstens einer Verkehrsszenario-Beschreibung (12) auf der Grundlage des ermittelten Datensatzes oder der ermittelten Datensätze, wobei die Verkehrsszenario-Beschreibung (12) das bestimmte Verkehrsszenario charakterisiert und wobei der wenigstens eine identifizierte Parameter in dem vorbestimmten Format abgelegt wird.  - Generating at least one traffic scenario description (12) on the basis of the determined data record or the determined data records, the traffic scenario description (12) characterizing the determined traffic scenario and the at least one identified parameter being stored in the predetermined format.
6. Verfahren nach einem der Ansprüche 1 bis 5, des Weiteren den Arbeitsschritt auf weisend: 6. The method according to any one of claims 1 to 5, further comprising the step of:
Ablegen (S3) der erzeugten Verkehrsszenario-Beschreibung (12), insbesondere der Verkehrsszenario-Datei, in einer Verkehrsszenario- Datenbank (2), wobei auch weitere Verkehrsszenario-Dateien in der Verkehrsszenario-Datenbank (2) abge- legt sind.  Filing (S3) of the generated traffic scenario description (12), in particular the traffic scenario file, in a traffic scenario database (2), further traffic scenario files also being stored in the traffic scenario database (2).
7. Verfahren nach einem der Ansprüche 1 bis 6, des Weiteren wenigstens einen der folgenden Arbeitsschritte aufweisend: 7. The method according to any one of claims 1 to 6, further comprising at least one of the following steps:
- Ermitteln der vorgegebenen Werte aus einer Prüflauf-Datenbank; und/oder ~ Ermitteln der vorgegebenen Werte aus einer Benutzereingabe, insbesondere über eine Benutzerschnittstelle. - Determining the specified values from a test run database; and or ~ Determining the specified values from a user input, in particular via a user interface.
8. Vorrichtung (100) zum Testen eines Fahrerassistenzsystems für ein Fahrzeug in einer Prüfumgebung (6), aufweisend: 8. Device (100) for testing a driver assistance system for a vehicle in a test environment (6), comprising:
- Mittel, insbesondere Schnittstelle oder Sensoreinrichtung, zum Ermitteln von Verkehrsszenario-Beschreibungen (12), welche jeweils ein bestimmtes Verkehrsszenario, insbesondere ein Cut-In-Manöver oder ein Cut-Out-Manöver, charakterisieren und wenigstens einen Parameter aufweisen, mittels welchem das jeweilige Verkehrsszenario an Randbedingungen angepasst werden kann, und vorzugsweise zum Ablegen der Verkehrsszenario- Beschreibungen (12), insbesondere jeweils, in einer Verkehrsszenario-Datei, in welcher der wenigstens eine Parameter in einem vorbestimmten, insbe sondere generischen, Format abgelegt ist;  - Means, in particular interface or sensor device, for determining traffic scenario descriptions (12), each of which characterize a specific traffic scenario, in particular a cut-in maneuver or a cut-out maneuver, and have at least one parameter by means of which the respective Traffic scenario can be adapted to boundary conditions, and preferably for storing the traffic scenario descriptions (12), in particular in each case, in a traffic scenario file in which the at least one parameter is stored in a predetermined, in particular special, generic format;
- Mittel, insbesondere erstes Modul einer Datenverarbeitungseinrichtung, zum Auswahlen von wenigstens einer Verkehrsszenario-Beschreibung (12) auf der Grundlage einer Eingabe eines Benutzers und/oder von vorgegebenen Kriterien; und  - Means, in particular a first module of a data processing device, for selecting at least one traffic scenario description (12) on the basis of an input from a user and / or predetermined criteria; and
- Mittel, insbesondere zweites Modul einer Datenverarbeitungseinrichtung, zum Erzeugen eines Testfails auf der Grundlage der wenigstens einen ausgewählten Verkehrsszenario-Beschreibung (12) und von wenigstens einem vorgegebenen Wert für den wenigstens einen Parameter und vorzugsweise weite rer Verkehrsszenario-Beschreibungen, wobei der Testfall mit einer konkreten Realisierung des durch die wenigstens eine ausgewählte Verkehrsszenario- Beschreibung charakterisierten Verkehrsszenarios und vorzugsweise weiterer Verkehrsszenarien in Bezug auf den wenigstens einen vorgegebenen Wert des wenigstens einen Parameters korrespondiert und geeignet ist, eine Prüfumgebung (6) zu erzeugen, in welcher ein Fahrerassistenzsystem einem Prüfiauf unterzogen werden kann.  - Means, in particular a second module of a data processing device, for generating a test fail based on the at least one selected traffic scenario description (12) and on at least one predetermined value for the at least one parameter and preferably further traffic scenario descriptions, the test case having a Concrete implementation of the traffic scenario characterized by the at least one selected traffic scenario description and preferably further traffic scenarios in relation to the at least one predetermined value of the at least one parameter corresponds and is suitable for generating a test environment (6) in which a driver assistance system is subjected to a test run can.
EP19797196.3A 2018-10-24 2019-10-23 Method and device for testing a driver assistance system Pending EP3871134A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
ATA50922/2018A AT521607B1 (en) 2018-10-24 2018-10-24 Method and device for testing a driver assistance system
PCT/EP2019/078898 WO2020083996A1 (en) 2018-10-24 2019-10-23 Method and device for testing a driver assistance system

Publications (1)

Publication Number Publication Date
EP3871134A1 true EP3871134A1 (en) 2021-09-01

Family

ID=68424851

Family Applications (1)

Application Number Title Priority Date Filing Date
EP19797196.3A Pending EP3871134A1 (en) 2018-10-24 2019-10-23 Method and device for testing a driver assistance system

Country Status (7)

Country Link
US (1) US20220048536A1 (en)
EP (1) EP3871134A1 (en)
JP (1) JP2022505759A (en)
KR (1) KR20210078546A (en)
CN (1) CN113168524B (en)
AT (1) AT521607B1 (en)
WO (1) WO2020083996A1 (en)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016220913A1 (en) * 2015-11-06 2017-05-11 Ford Global Technologies, Llc Method and device for generating test cases for autonomous vehicles
KR20220127131A (en) * 2019-12-17 2022-09-19 포레텔릭스 엘티디. System and method for monitoring correct operation of autonomous vehicle
AT523834B1 (en) * 2020-09-15 2021-12-15 Avl List Gmbh Method and system for testing a driver assistance system
CN112306042B (en) * 2020-10-30 2022-11-04 重庆长安汽车股份有限公司 Automatic test system and method for automatic driving controller
CN112434412A (en) * 2020-11-14 2021-03-02 武汉中海庭数据技术有限公司 SUMO and UNITY combined simulation traffic network method and system
CN113570727B (en) * 2021-06-16 2024-04-16 阿波罗智联(北京)科技有限公司 Scene file generation method and device, electronic equipment and storage medium
CN113704993B (en) * 2021-08-25 2024-04-26 娄底职业技术学院 Traffic scene digitizing method
DE102021131115A1 (en) 2021-11-26 2023-06-01 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Process for scenario identification for an application of driver assistance systems
CN113901285B (en) * 2021-12-09 2022-03-15 深圳佑驾创新科技有限公司 Vehicle road test method, device, electronic equipment and storage medium
DE102022107846A1 (en) 2022-04-01 2023-10-05 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Method, system and computer program product for creating parameterized scenarios
CN114740759A (en) * 2022-04-18 2022-07-12 中国第一汽车股份有限公司 Test method and device for automatic driving system, storage medium and electronic device
DE102022119179A1 (en) 2022-08-01 2024-02-01 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Method, system and computer program product for testing and training a driver assistance system (ADAS) and/or an automated driving system (ADS) and/or a driving function
CN115542882B (en) * 2022-09-30 2024-02-27 东风汽车股份有限公司 Controller interface configuration method and device
CN115509212B (en) * 2022-11-18 2023-03-14 联友智连科技有限公司 Automated testing system and method based on VTD
CN116108569A (en) * 2023-04-10 2023-05-12 国汽(北京)智能网联汽车研究院有限公司 Combined simulation method and device for vehicle, computer equipment and storage medium

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4371137B2 (en) * 2006-11-10 2009-11-25 トヨタ自動車株式会社 Automatic operation control device
DE102011088807A1 (en) * 2011-12-16 2013-06-20 Bayerische Motoren Werke Aktiengesellschaft Method for developing and/or testing driver assistance system for motor car, involves determining set of scenarios and characterizing set of scenarios by parameter that is related to driving conditions of car
DE102012004650A1 (en) * 2012-03-07 2013-09-12 Audi Ag Method for testing the functionality of a driver assistance system installed in a test vehicle
US8457827B1 (en) * 2012-03-15 2013-06-04 Google Inc. Modifying behavior of autonomous vehicle based on predicted behavior of other vehicles
DE102013200116A1 (en) * 2013-01-08 2014-07-10 Bayerische Motoren Werke Aktiengesellschaft Method for developing and/or testing driver assistance system for motor vehicle, involves determining motor vehicle parameter, and transferring control function of vehicle between rider and corresponding driver assistance system
AT514754B1 (en) * 2013-09-05 2018-06-15 Avl List Gmbh Method and device for optimizing driver assistance systems
AT513370B1 (en) * 2013-11-05 2015-11-15 Avl List Gmbh Virtual test optimization for driver assistance systems
DE102015104890A1 (en) * 2015-03-30 2016-10-06 Gpi Gesellschaft Für Prüfstanduntersuchungen Und Ingenieurdienstleistungen Mbh Test system and test method for testing a vehicle and / or vehicle driver specific signal perception and response and configuration system and configuration method for vehicle and / or vehicle driver specific configuration of at least one driver system interface
DE102016220913A1 (en) * 2015-11-06 2017-05-11 Ford Global Technologies, Llc Method and device for generating test cases for autonomous vehicles
DE102015224558A1 (en) * 2015-12-08 2017-06-08 Robert Bosch Gmbh Method for validating a driver assistance function of a motor vehicle
CN105718065B (en) * 2016-01-27 2018-08-21 北京交通大学 Interactive inspection analogue system under bus or train route cooperative surroundings
US10552573B2 (en) * 2016-03-18 2020-02-04 Toyota Jidosha Kabushiki Kaisha Vehicle simulation device for crowd-sourced vehicle simulation data
DE102016205153A1 (en) * 2016-03-29 2017-10-05 Avl List Gmbh A method for generating control data for rule-based driver assistance
US11137763B2 (en) * 2016-05-30 2021-10-05 Faraday & Future Inc. Generating and fusing traffic scenarios for automated driving systems
DE102016008218A1 (en) * 2016-07-06 2018-01-11 Audi Ag Method for improved recognition of objects by a driver assistance system
DE102016116135A1 (en) * 2016-08-30 2018-03-01 Dspace Digital Signal Processing And Control Engineering Gmbh Method for simulating a collision situation
AT518792B1 (en) * 2016-09-12 2018-01-15 Avl List Gmbh Modular test bench for complete vehicles ready to drive
DE102016218277B4 (en) * 2016-09-22 2021-08-12 Benjamin May Method for functional testing of a driver assistance system as well as control unit and reference device for a driver assistance system
US10228693B2 (en) * 2017-01-13 2019-03-12 Ford Global Technologies, Llc Generating simulated sensor data for training and validation of detection models
WO2018176000A1 (en) * 2017-03-23 2018-09-27 DeepScale, Inc. Data synthesis for autonomous control systems
CN108646586A (en) * 2018-03-20 2018-10-12 重庆邮电大学 A kind of intelligent network connection automobile assemblage on-orbit, test verification System and method for
CN108681264A (en) * 2018-08-10 2018-10-19 成都合纵连横数字科技有限公司 A kind of intelligent vehicle digitalized artificial test device
US20200209874A1 (en) * 2018-12-31 2020-07-02 Chongqing Jinkang New Energy Vehicle, Ltd. Combined virtual and real environment for autonomous vehicle planning and control testing
US10636295B1 (en) * 2019-01-30 2020-04-28 StradVision, Inc. Method and device for creating traffic scenario with domain adaptation on virtual driving environment for testing, validating, and training autonomous vehicle

Also Published As

Publication number Publication date
CN113168524A (en) 2021-07-23
KR20210078546A (en) 2021-06-28
AT521607B1 (en) 2020-03-15
US20220048536A1 (en) 2022-02-17
JP2022505759A (en) 2022-01-14
AT521607A4 (en) 2020-03-15
WO2020083996A1 (en) 2020-04-30
CN113168524B (en) 2024-06-14

Similar Documents

Publication Publication Date Title
AT521607B1 (en) Method and device for testing a driver assistance system
EP3438901A1 (en) Test drive scenario database system for realistic virtual test drive scenarios
AT523834B1 (en) Method and system for testing a driver assistance system
DE102016224291A1 (en) Method for the computer-aided adaptation of a predetermined semi-automated driving system of a motor vehicle
DE102009028451A1 (en) Collision monitoring for a motor vehicle
WO2021058223A1 (en) Method for applying automated driving functions efficiently and in a simulated manner
WO2018068917A1 (en) Categorization of vehicles in the environment of a motor vehicle
EP3789926A1 (en) Method for detecting an adversarial fault in the input data of a neural network
DE102019008093A1 (en) Method for merging sensor data from a large number of detection devices using a sparse occupancy grid, as well as a driver assistance system
WO2020051618A1 (en) Analysis of dynamic spatial scenarios
WO2020048669A1 (en) Method for determining a lane change indication of a vehicle, computer-readable storage medium, and vehicle
DE102016207463A1 (en) Method and device for operating at least one vehicle with respect to at least one passable object in the vicinity of the at least one vehicle
DE102020113611A1 (en) Method and safety system for securing an automated vehicle function and motor vehicle
DE102014210752A1 (en) Method and device for monitoring a target trajectory of a vehicle
DE102016120066A1 (en) A computer implemented method for controlling an object recognition system
DE102017208692A1 (en) Method for providing training data for a functional test of a recognition device and database system
DE102018125712A1 (en) Driving support method for a vehicle
WO2022251890A1 (en) Method and system for testing a driver assistance system for a vehicle
EP4248418A2 (en) Method and system for annotating sensor data
WO2022122553A1 (en) Comparing digital representations of driving situations of a vehicle
AT524821A1 (en) Method and system for generating scenario data for testing a driver assistance system of a vehicle
WO2020160801A1 (en) Method, device, computer program and computer program product for operating a vehicle
DE102020203829A1 (en) Method for monitoring a vehicle system for recognizing the surroundings of a vehicle
DE102019127322A1 (en) Method for detecting objects in a vehicle environment, device for data processing, computer program product and computer-readable data carrier
DE102015202343A1 (en) Method and system for performing automated driving maneuvers

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: UNKNOWN

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20210520

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20221209

P01 Opt-out of the competence of the unified patent court (upc) registered

Effective date: 20230503