DE102004057947B4 - Method for functional testing of a driver assistance system integrated on the vehicle side - Google Patents

Method for functional testing of a driver assistance system integrated on the vehicle side Download PDF

Info

Publication number
DE102004057947B4
DE102004057947B4 DE200410057947 DE102004057947A DE102004057947B4 DE 102004057947 B4 DE102004057947 B4 DE 102004057947B4 DE 200410057947 DE200410057947 DE 200410057947 DE 102004057947 A DE102004057947 A DE 102004057947A DE 102004057947 B4 DE102004057947 B4 DE 102004057947B4
Authority
DE
Germany
Prior art keywords
vehicle
simulation
sensor signal
driver
continuously
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE200410057947
Other languages
German (de)
Other versions
DE102004057947A1 (en
Inventor
Thomas Bock
Karl-Heinz Siedersberger
Martin Zavrel
Alexander Breu
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE200410057947 priority Critical patent/DE102004057947B4/en
Publication of DE102004057947A1 publication Critical patent/DE102004057947A1/en
Application granted granted Critical
Publication of DE102004057947B4 publication Critical patent/DE102004057947B4/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/04Monitoring the functioning of the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Human Computer Interaction (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Traffic Control Systems (AREA)

Abstract

Verfahren zur Funktionsprüfung eines in einem Kraftfahrzeug integrierten, in Abhängigkeit eines von wenigstens einem Sensor, der die Verkehrssituation im Fahrzeugumfeld überwacht, gegebenen Sensorsignals über ein Steuergerät betriebenen Fahrerassistenzsystems, dadurch gekennzeichnet, dass dem Fahrer während der Fahrt eine in Abhängigkeit eines oder mehrerer kontinuierlich erfasster, die Fahrzeugbewegung beschreibender Fahrzeugparameter erzeugte und kontinuierlich angepasste optische Simulationsdarstellung einer virtuellen Verkehrssituation in sein zum Fahrzeugumfeld gerichtetes Blickfeld eingeblendet wird, während der Fahrer nach wie vor das reale Fahrzeugumfeld erfassen kann, und dass zur jeweiligen Simulationsdarstellung ein das wenigstens eine Sensorsignal in Abhängigkeit von der simulierten Verkehrssituation simulierendes Sensorsignal erzeugt wird, wobei das simulierte Sensorsignal einem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät gegeben wird.Method for functional testing of an integrated in a motor vehicle, depending on one of at least one sensor that monitors the traffic situation in the vehicle environment given sensor signal via a control unit operated driver assistance system, characterized in that the driver while driving one in dependence of one or more continuously detected, the vehicle movement descriptive vehicle parameters generated and continuously adapted optical simulation representation of a virtual traffic situation is displayed in his eyes to the vehicle environment field of view, while the driver can still capture the real vehicle environment, and that the respective simulation representation of the at least one sensor signal in response to the simulated traffic situation simulating sensor signal is generated, wherein the simulated sensor signal is given to the operation of the driver assistance system controlling the control device.

Figure 00000001
Figure 00000001

Description

Die Erfindung betrifft ein Verfahren zur Funktionsprüfung eines in einem Kraftfahrzeug integrierten, in Abhängigkeit eines von wenigstens einem Sensor, der die Verkehrssituation im Fahrzeugumfeld überwacht, gegebenen Sensorsignals über ein Steuergerät betriebenen Fahrerassistenzsystems.The The invention relates to a method for functional testing of a motor vehicle integrated, depending one of at least one sensor that regulates the traffic situation in the Monitored vehicle environment, given sensor signal over a control unit operated driver assistance system.

Zum Funktionstest von im Kraftfahrzeug integrierten Fahrerassistenzsystemen unterschiedlicher Art werden zunehmend Simulationsprogramme eingesetzt, welche in Fahrsimulatoren zur Verkehrssimulation genutzt werden. Über diese Simulationsprogramme werden synthetische Verkehrsszenen erzeugt, die dem Fahrer entweder aus der Fahrersicht oder aus einer Vogelperspektive auf einem Monitor visualisiert werden. Im Rahmen dieser Visualisierung erfolgt lediglich eine rudimentäre Darstellung von Straße und Fremdfahrzeugen, so dass kein realistisches Bild der Wirklichkeit erzeugt wird. Vielmehr bewegt sich das Erprobungsfahrzeug stets in einer synthetischen, virtuellen Welt. Weiterhin erfolgt wie beschrieben die Visualisierung auf einem Monitor, so dass sich der Fahrer nicht völlig auf die Fahraufgabe und die Beurteilung des Fahrerassistenzsystems konzentrieren kann. Nachdem aber die Komplexität von Fahrerassistenzsystemen sowie deren Funktionalität immer weiter zunimmt, ist eine zuverlässige Funktionsprüfung, im Rahmen welcher etwaige Fehler erkannt werden, um eben diese bis zur Serienreife zu beheben, unerlässlich. Als sensorbasierte Fahrerassistenzsysteme sind beispielsweise das Notbrems-Assistenzsystem, bei dem über eine oder mehrere in der vorderen Stoßstange integrierte Radarsensoren ein vorausfahrendes Fahrzeug, auf das gegebenenfalls aufgefahren werden kann, erfasst wird, und das automatisch eine Notbremsung unabhängig von einer Fahreraktion einleitet, wenn dies erforderlich ist, oder ein Anhalteweg-Verkürzungs-System, bei dem ebenfalls frontseitige Radarsensoren vorausfahrenden Verkehr erfassen und bei einer Erfassung kurzzeitig die Bremsen angelegt werden, so dass ein haptisch spürbarer Ruck den Fahrer alarmiert. Diese Aufzählung ist jedoch nicht abschließend, weitere Systeme sind beispielsweise ein ACC-System (ACC = Adaptive-Cruise-Control), also ein automatisches Abstandshalte- bzw. Folgesystem, bei dem das Fahrzeug automatisch einen definierten Abstand zum vorausfahrenden Fahrzeug, erfasst über frontseitige Radarsensoren, einhält, oder ein LDW-System (LDW = Lane Departure-Warning), bei dem eine Abweichung von einer ausgezeichneten Fahrspur erfasst und der Fahrer alarmiert wird.To the Functional test of driver assistance systems integrated in the motor vehicle different types of simulation programs are increasingly being used which are used in driving simulators for traffic simulation. About these Simulation programs are generated synthetic traffic scenes, the driver either from the driver's perspective or from a bird's eye view be visualized on a monitor. As part of this visualization is done only a rudimentary Presentation of street and foreign vehicles, so no realistic picture of reality is produced. Rather, the test vehicle always moves in a synthetic, virtual world. Furthermore, as described the visualization on a monitor, so that the driver does not completely concentrate on the driving task and the assessment of the driver assistance system can. But after the complexity of Driver assistance systems and their functionality is still increasing, is a reliable functional test, in Frame which any errors are detected, just this until to fix to production maturity, essential. As sensor-based Driver assistance systems are for example the emergency brake assistance system, at the over one or more radar sensors integrated in the front bumper a vehicle driving in front, on which, if necessary, ascended can be detected, and automatically an emergency stop independently of a driver action, if necessary, or a stopping distance shortening system, at the front of the radar sensors ahead traffic capture and briefly apply the brakes during an acquisition be, making a haptic noticeable Jerk alerted the driver. However, this list is not exhaustive, more Systems are, for example, an ACC system (ACC = Adaptive Cruise Control), So an automatic distance or follow-up system, in which the vehicle automatically a defined distance to the vehicle in front Vehicle, captured over front radar sensors, or a LDW (Lane Departure-Warning) system, in which a Deviation detected from an excellent lane and the driver is alerted.

DE 103 09 934 A1 offenbart einen Fahrsimulator und ein Verfahren zum Simulieren des Fahrzeugzustands eines Fahrzeuges. Dabei ist außerhalb des Fahrzeugs eine Simulationseinheit vorgesehen, die über eine Schnittstelle mit einem im Fahrzeug enthaltenen Steuergerät verbunden ist. Über Umgebungs- und Verkehrsmodelle werden simulierte Umgebungsdaten erzeugt, die über einen externen Sichtsimulator dargestellt werden können. Es ist auch ein „technisches Sehen” realisiert, wonach die aktuellen simulierten Umgebungsdaten auch an das Fahrzeug übermittelt werden können. DE 103 09 934 A1 discloses a driving simulator and method for simulating the vehicle condition of a vehicle. In this case, a simulation unit is provided outside the vehicle, which is connected via an interface with a control unit contained in the vehicle. Environmental and traffic models generate simulated environmental data, which can be displayed via an external visual simulator. It is also realized a "technical vision", according to which the current simulated environment data can also be transmitted to the vehicle.

Ein Verfahren zum Prüfen von Laserscannern, insbesondere von Abstandssensoren eines ACC-Systems (adaptive cruise control), beschreibt die DE 100 37 219 A1 . Ein Messobjekt wird aufgestellt und die Signale des Laserscanners werden gemessen, wobei eine Relativbewegung gegenüber dem Messobjekt erzeugt wird. Insbesondere ist dort vorgeschlagen, dass Versuche mit einzelnen Messobjekten an unterschiedlichen Positionen im Erfassungsbereich durchgeführt werden, um ACC-Systeme für eine Verwendung in Ballungsräumen überprüfen zu können. Eine Simulation wird nicht vorgenommen.A method for testing laser scanners, in particular distance sensors of an ACC system (adaptive cruise control), describes the DE 100 37 219 A1 , A measurement object is set up and the signals of the laser scanner are measured, whereby a relative movement is generated with respect to the measurement object. In particular, it is proposed there that tests with individual measurement objects are carried out at different positions in the detection area in order to be able to check ACC systems for use in metropolitan areas. A simulation is not made.

DE 199 28 490 A1 offenbart eine Vorrichtung zur Ausstattung eines fahrtüchtigen Fahrzeugs zum Fahrsimulator. Die Vorderräder werden dabei auf Drehteller gefahren, die auch den Lenkradeinschlag messen. Weiterhin ist ein Fahrcomputer mit Bildgenerator, einem Sichtsystem, einem Lautsprecher und Sensoren zur Erfassung der Positionen der Bedienungselemente vorgesehen. Die gesamte Vorrichtung soll leicht zu installieren sein. DE 199 28 490 A1 discloses a device for equipping a roadworthy vehicle to the driving simulator. The front wheels are driven on turntable, which also measure the steering wheel angle. Furthermore, a driving computer with image generator, a vision system, a speaker and sensors for detecting the positions of the controls is provided. The entire device should be easy to install.

EP 1 467 319 A2 betrifft die Simulation einer Strecke, insbesondere einer Eisenbahnstrecke, aufgrund eines zuvor aufgenommenen Films dieser Strecke. Dieser Film soll dabei für jedes Pixel mit einer Tiefeninformation versehen werden, die den Abstand des dort dargestellten Objektes vom Fahrzeug wiedergibt. Durch die zusätzliche Abstandsinformation soll es ermöglicht werden, insbesondere die Effekte verschiedener Wetterlagen und Lichtsituationen nachträglich in den Film aufzunehmen. EP 1 467 319 A2 relates to the simulation of a route, in particular a railway line, based on a previously recorded film of this route. This film is to be provided for each pixel with a depth information that reflects the distance of the object shown there from the vehicle. The additional distance information should make it possible to record the effects of different weather conditions and lighting situations in the film in retrospect.

DE 199 62 533 A1 beschreibt eine Einrichtung zur Prüfung der Funktionsweise einer Abstandsregeleinrichtung eines Kraftfahrzeugs. Diese ermöglicht eine Bewertung der von der Abstandsregeleinrichtung ausgegebenen Daten, ohne dass die Abstandsregeleinrichtung im Fahrzeug verbaut ist. DE 199 62 533 A1 describes a device for testing the operation of a distance control device of a motor vehicle. This allows an evaluation of the output from the distance control device data without the distance control device is installed in the vehicle.

Aus der DE 100 47 082 A1 ist ein Simulationssystem für die Entwicklung eines automatischen Distanzregelungssystems bekannt. Dieses umfasst mehrere Recheneinheiten, die im Zusammenspiel dazu ausgebildet sind, reproduzierbare Situationen mit unterschiedlichen Softwareversionen und Parametern beliebig oft zu überprüfen.From the DE 100 47 082 A1 For example, a simulation system for the development of an automatic distance control system is known. This includes a plurality of arithmetic units, which are designed in interaction to repeatedly check reproducible situations with different software versions and parameters.

Der Erfindung liegt damit die Aufgabe zugrunde, ein Funktionsprüfungsverfahren anzugeben, das dem Fahrer eine realistischere Verkehrssituation, die dem Systemtest zugrunde liegt, bietet, so dass die Funktion des Fahrerassistenzsystems besser in Bezug auf reale Umgebungsbedingungen überprüft werden kann.The invention is therefore based on the object of specifying a functional test method, provides the driver with a more realistic traffic situation underlying the system test, so that the function of the driver assistance system can be better checked in relation to real environmental conditions.

Zur Lösung dieses Problems ist bei einem Verfahren der eingangs genannten Art erfindungsgemäß vorgesehen, dass dem Fahrer während der Fahrt eine in Abhängigkeit eines oder mehrerer kontinuierlich erfasster, die Fahrzeugbewegung beschreibender Fahrzeugparameter erzeugte und kontinuierlich angepasste optische Simulationsdarstellung einer virtuellen Verkehrssituation in sein zum Fahrzeugumfeld gerichtetes Blickfeld eingeblendet wird, während der Fahrer nach wie vor das reale Fahrzeugumfeld erfassen kann, und dass zur jeweiligen Simulationsdarstellung ein das wenigstens eine Sensorsignal in Abhängigkeit von der simulierten Verkehrssituation simulierendes Sensorsignal erzeugt wird, wobei das simulierte Sensorsignal einem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät gegeben wird, das das Fahrerassistenzsystem gegebenenfalls in Betrieb setzt.to solution This problem is in a method of the type mentioned provided according to the invention, that during the driver the ride one in dependence one or more continuously detected, the vehicle movement descriptive vehicle parameters produced and continuously adapted optical simulation representation of a virtual traffic situation is displayed in its field of vision directed to the vehicle, while the driver can still capture the real vehicle environment, and that the respective simulation representation that at least a sensor signal depending from the simulated traffic situation simulating sensor signal is generated, wherein the simulated sensor signal to a the operation the driver assistance system controlling the control device is given, which is the driver assistance system possibly put into operation.

Um dem Fahrer im Testfahrzeug eine realistischere Verkehrssituation im Fahrzeug als Basis für den Funktionstest bieten zu können, wird erfindungsgemäß die synthetische Welt mit der realen Umwelt ”gekoppelt”. Das Fahrzeug bewegt sich auf einer normalen Straße, gegebenenfalls einer Teststrecke, der Fahrer nimmt beim normalen Fahrbetrieb die Umgebung wie üblich wahr. Der umgebende Verkehr allerdings wird synthetisch über die optische Simulationsdarstellung erzeugt und mit der realen Umgebung im Fahrzeug ”überlagert”, wozu die Simulationsdarstellung in das Blickfeld des Fahrers eingeblendet wird. Dies kann beispielsweise durch Projizieren des Simulationsbilds auf die Windschutzscheibe, durch die der Fahrer nach wie vor blicken und die Umgebung erkennen kann, erfolgen oder aber in Verbindung mit einer Visualisierungsbrille oder dergleichen, die halbdurchlässig ist und nach wie vor das optische Erfassen der Fahrzeugumgebung ermöglicht, gleichwohl aber in die Brille die Simulationsdarstellung eingeblendet werden kann. Die Simulationsdarstellung selbst wird kontinuierlich der realen Fahrzeugbewegung angepasst, wozu entsprechende Fahrzeugparameter wie die Geschwindigkeit, die Quer- und Längsbeschleunigung sowie etwaige Gierraten erfasst werden. Hierüber kann also jede Fahrzeugbewegung wie auch die Fahrzeugrichtung erfasst werden. Über die hierüber erfasste Fahrzeugbewegung wird kontinuierlich die Simulationsdarstellung angepasst. Wird beispielsweise ein Notbremsassistenzsystem getestet, so wird über die erfasste Fahrzeugbewegung im Rahmen der Simulationsdarstellung die schnelle Annäherung des Testfahrzeugs an das simulierte vorausfahrende Fahrzeug simuliert und entsprechend signalisiert, so dass sich für den Fahrer aufgrund der Simulationsdarstellungsüberlagerung rein optisch tatsächlich ein schnelles Auffahren ergibt.Around the driver in the test vehicle a more realistic traffic situation in the vehicle as the basis for the To be able to offer a function test According to the invention, the synthetic World "coupled" with the real environment. The vehicle moves on a normal road, possibly a test track, the driver perceives the environment as normal during normal driving. The surrounding traffic however becomes synthetically over the generated optical simulation representation and with the real environment in the vehicle "superimposed", why the simulation representation faded into the driver's field of vision becomes. This can be done, for example, by projecting the simulation image on the windshield, through which the driver still looks and can recognize the environment, done or in conjunction with a visualization goggle or the like which is semipermeable and still allows the optical detection of the vehicle environment, nevertheless the simulation presentation is shown in the glasses can be. The simulation representation itself becomes continuous adapted to the real vehicle movement, including corresponding vehicle parameters such as the speed, the transverse and longitudinal acceleration and any Yaw rates are recorded. About here So every vehicle movement as well as the vehicle direction can be detected become. about the over here recorded vehicle movement is continuously the simulation representation customized. For example, if an emergency braking assistance system is tested, so will over the detected vehicle movement in the simulation representation the fast approach of the test vehicle to the simulated preceding vehicle and signaled accordingly, so that is pure for the driver due to the simulation representation overlay visually indeed a fast startup results.

Die jeweilige Simulationsdarstellung ist des weiteren Basis für die Erzeugung eines simulierten Sensorsignals, das in Abhängigkeit von der simulierten Verkehrssituation erzeugt wird. Nähert sich also das reale Fahrzeug dem virtuel len vorausfahrenden Fahrzeug, wird über eine entsprechende Simulationseinrichtung kontinuierlich in Abhängigkeit der simulierten Verkehrssituation ein Sensorsignal erzeugt, das dem entspricht, das ein realer Sensor bei Annäherung an ein reales vorausfahrendes Fahrzeug erzeugen würde. Dieses simulierte Sensorsignal wird dem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät als Eingangssignal gegeben, das je nach Signalinhalt gegebenenfalls das Fahrerassistenzsystem in Betrieb setzt, also beispielsweise den Notbremsassistenten zuschaltet, wenn das Simulationssensorsignal eine hinreichende Annäherung an das vorausfahrende Fahrzeug angibt.The respective simulation representation is further basis for the generation a simulated sensor signal, which depends on the simulated Traffic situation is generated. Approaches the real vehicle the virtuel len preceding vehicle is via a corresponding simulation device continuously dependent the simulated traffic situation generates a sensor signal, the that is a real sensor when approaching a real car ahead Vehicle would produce. This simulated sensor signal becomes the operation of the driver assistance system controlling controller given as an input signal, depending on the signal content, if necessary puts the driver assistance system in operation, so for example switches on the emergency brake assistant when the simulation sensor signal a reasonable approach indicates to the preceding vehicle.

Das erfindungsgemäße Verfahren bietet durch die Kopplung der realen Welt mit der virtuellen Verkehrssituation im Sinne einer Augmented Reality den Vorteil, dass der Fahrer bei der Beurteilung und Entwicklung von Umfeldbedingungen ausgehen kann, die im Wesentlichen der Realität entsprechen. Die reproduzierbare Wiederholung entsprechender Verkehrssituationen ist im Gegensatz zu Erprobungsfahrten im normalen Straßenverkehr, wo niemals reproduzierbare Szenarien vorkommen, ohne weiteres möglich. Kritische Verkehrssituationen lassen sich aufgrund der Kombination der realen Umwelt mit synthetisch erzeugten Verkehrsszenen beliebig oft und ohne Gefahren für andere Verkehrsteilnehmer erzeugen.The inventive method provides by coupling the real world with the virtual traffic situation in the sense of an augmented reality the advantage that the driver at the assessment and development of environmental conditions, essentially the reality correspond. The reproducible repetition of corresponding traffic situations is in contrast to test drives in normal traffic, where reproducible scenarios never occur, readily possible. critical Traffic situations can be due to the combination of the real Environment with synthetically generated traffic scenes as often as and without dangers for generate other road users.

Zur Erzeugung der Simulationsdarstellung wird erfindungsgemäß die reale Fahrzeugposition in Bezug auf die befahrene Fahrbahn kontinuierlich bestimmt. Anhand der realen Fahrzeugposition wird somit die Simulationsdarstellung und damit der eingeblendete Verkehr, also vorausfahrende oder entgegenkommende oder überholende Fahrzeuge etc., positionsbezogen errechnet, so dass sie korrekt bezogen auf die reale Fahrzeugposition eingeblendet werden können. Die Bestimmung der Fahrzeugposition kann dabei entweder anhand des oder der Fahrzeugparameter selbst, also odometrisch erfolgen. Alternativ kann dies auch unmittelbar anhand eines mittels einer das Fahrzeugumfeld erfassenden Kamera aufgenommenen Bilds über eine entsprechende Bildanalyse erfolgen. Wird das Simulationsverfahren zu einem bestimmten Zeitpunkt angestoßen, so kann ausgehend von der lokalen Fahrzeugstartposition im Anstoßzeitpunkt entweder allein anhand der Fahrzeugparameter oder alternativ oder zusätzlich dazu anhand der Bildanalyse die Weiterbewegung des Fahrzeugs und damit seine reale Position in Bezug auf die Ausgangs- oder Startposition ermittelt werden. Die Positionsbestimmung über eine odometrische Parameterverarbeitung ist bekannt, gleichermaßen die Positionsbestimmung über eine Bildanalyse in Verbindung mit entsprechenden Bildanalysealgorithmen.In order to generate the simulation representation, according to the invention, the real vehicle position with respect to the traveled roadway is determined continuously. Based on the real vehicle position thus the simulation representation and thus the displayed traffic, ie preceding or oncoming or overtaking vehicles, etc., calculated position-related, so that they can be displayed correctly based on the real vehicle position. The determination of the vehicle position can be done either on the basis of or the vehicle parameters themselves, ie odometrically. Alternatively, this can also be done directly on the basis of a captured by means of a vehicle surrounding camera image via a corresponding image analysis. If the simulation method is triggered at a specific point in time, starting from the local vehicle start position at the moment of initiation, either solely based on the vehicle parameters or alternatively or additionally thereto Based on the image analysis, the further movement of the vehicle and thus its real position with respect to the starting or starting position are determined. The position determination via an odometric parameter processing is known, likewise the position determination via an image analysis in connection with corresponding image analysis algorithms.

Der oder die Fahrzeugparameter werden zweckmäßigerweise von einem fahrzeugseitig integrierten Datenbus, insbesondere dem CAN-Bus (CAN = Controller Area Network), abgegriffen, wobei als Fahrzeugparameter wie beschrieben zumindest die Geschwindigkeit, die Querbeschleunigung, die Längsbeschleunigung und/oder die Gierrate aufgenommen werden.Of the or the vehicle parameters are expediently from a vehicle side integrated data bus, in particular the CAN bus (CAN = controller Area Network), using as vehicle parameters as described at least the speed, the lateral acceleration, the longitudinal acceleration and / or the yaw rate are recorded.

Wie beschrieben erfolgt die kontinuierliche Erzeugung bzw. Anpassung der Verkehrssimulationsdarstellung auf Basis der die Fahrzeugbewegung beschreibenden Fahrzeugparameter. Hierüber wird letztlich die reale Fahrzeugposition bestimmt und es ermöglicht, den vorausfahrenden Verkehr etc. exakt in Bezug auf die reale Fahrzeugposition einblenden zu können, so dass ein vorausfahrendes virtuelles Fahrzeug auch tatsächlich als vor dem Testfahrzeug vorausfahrend dargestellt wird, und nicht versetzt dazu, beispielsweise auf einer Nachbarspur oder nahe dem Straßengraben, so dass also letztlich die simulierte Darstellung und die reale Fahrzeugumgebung nicht zusammenfallen würden. Diese exakte Darstellung ist ohne weiteres möglich, wenn die erfassten Fahrzeugparameter sehr exakt sind, so dass auf Basis dieser Parameter die Fahrzeugposition sehr genau bestimmt werden kann. Dies ist jedoch nicht immer der Fall. Ergeben sich aber Ungenauigkeiten, wird die reale Fahrzeugposition über die abweichenden Parameter falsch bestimmt. Entspricht beispielsweise das aufgenommene Geschwindigkeitssignal nicht der realen Geschwindigkeit, ist das Geschwindigkeitssignal beispielsweise niedriger als die reale Geschwindigkeit, so würde die darauf basierend ermittelte Fahrzeug-Ist-Position als lokal gesehen hinter der realen Fahrzeugposition, die aufgrund der realen höheren Geschwindigkeit eingenommen wird, liegend bestimmt werden. Dies würde dazu führen, dass das Simulationsbild in Bezug auf eine nicht reale Fahrzeugposition ermittelt und eingeblendet wird. Ein vorausfahrendes Kraftfahrzeug würde also beispielsweise im Falle einer Kurvenfahrt des Testfahrzeugs zum einen an einer falschen Position eingeblendet (das Testfahrzeug befindet sich real an einem anderen Kurvenpunkt als ermittelt), im Übrigen würde auch der Abstand zwischen realem Fahrzeug und virtuellem Fahrzeug nicht korrekt sein.As described is the continuous generation or adaptation the traffic simulation representation based on the vehicle movement descriptive Vehicle parameters. About here ultimately determines the real vehicle position and makes it possible the preceding traffic etc. exactly in relation to the real vehicle position to be able to show so that a leading virtual vehicle actually as is shown ahead of the test vehicle, and not offset for example, on a neighboring track or near the ditch, so that ultimately the simulated representation and the real Vehicle environment would not coincide. This exact representation is easily possible if the detected vehicle parameters are very accurate, so that on Based on these parameters, the vehicle position determined very accurately can be. However, this is not always the case. Surrender but inaccuracies, the real vehicle position is over the deviating parameter incorrectly determined. Corresponds for example the recorded speed signal is not the real speed, For example, the speed signal is lower than that real speed, so would the vehicle actual position determined thereon as local seen behind the real vehicle position, due to the real higher Speed is determined lying down. This would do it lead that the simulation image with respect to a non-real vehicle position is determined and displayed. A preceding vehicle so would For example, in the case of cornering of the test vehicle for one in a wrong position (the test vehicle is actually at a different curve point than determined), Furthermore would too the distance between the real vehicle and the virtual vehicle is not to be correct.

Um dem zu begegnen ist im Rahmen einer besonders vorteilhaften Erfindungsweiterbildung vorgesehen, dass der oder die über fahrzeugseitig integrierte Erfassungsmittel erfassten Fahrzeugparameter mit kontinuierlich erfassten Informationen, die mittels eines GPS- oder DGPS-Systems (GPS = Global Positioning System, deutsch: Globales Positionsbestimmungssystem; DGPS = Differential Global Positioning System, deutsch: Globales Positionsbestimmungssystem mit Differentialsignal) ermittelt werden, und/oder kontinuierlich erfassten Informationen, die anhand von mittels einer Kamera aufgenommenen und das Fahrzeugumfeld zeigenden Kamerabildern ermittelt werden, abgeglichen werden. Die über das GPS- oder DGPS-System erfassten Informationen liefern äußerst exakte Positionskoordinaten über den Standort des realen Fahrzeugs. Aus diesen Informationen ermittelt über die Zeit kann beispielsweise die exakte Geschwindigkeit ermittelt werden und der über den CAN-Bus abgegriffene Geschwindigkeitswert gegebenenfalls korrigiert werden, sofern sich eine Differenz ergibt. Entsprechendes kann gleichermaßen im Hinblick auf Quer- und Längsbeschleunigungswerte etc. erfolgen. Es erfolgt also über die GPS- oder DGPS-Informationen eine Verifizierung oder Überprüfung der aufgenommenen Ist-Fahrzeugparameter und gegebenenfalls eine Korrektur. Entsprechendes kann alternativ oder zusätzlich auf Basis einer Bildanalyse des Fahrzeugvorfelds erfolgen. Über die Bildanalyse kann beispielsweise die Lage des Fahrzeugs in Bezug auf die Fahrspur ermittelt werden, wenn die fahrspurbegrenzenden Seitenlinien im Bild erfasst werden. Auch diese Information kann zum Parameterabgleich herangezogen werden. Sofern auf der Fahrbahn, beispielsweise einer Teststrecke, auch entsprechende Fahrtstreckenmarkierungen vorhanden sind, die im Kamerabild erfasst werden können, kann aus dem Kamerabild auch die reale Geschwindigkeit durch entsprechende Analyse von Folgebildern ermittelt werden etc.Around This is to be countered in the context of a particularly advantageous invention further education provided that the or over On-board integrated detection means detected vehicle parameters with continuously collected information generated by means of a GPS or DGPS-Systems (GPS = Global Positioning System, German: Globales Positioning system; DGPS = Differential Global Positioning System, German: Global Positioning System with Differential Signal) be determined and / or continuously collected information, the basis of recorded by means of a camera and the vehicle environment be detected with camera images. The via the GPS or DGPS system information provided extremely accurate Position coordinates via the location of the real vehicle. From this information determined via the Time, for example, the exact speed can be determined and the over If necessary, correct the velocity value picked up on the CAN bus if there is a difference. The same can be done equally with regard to on lateral and longitudinal acceleration values etc. take place. It is done over the GPS or DGPS information is a verification or verification of the recorded actual vehicle parameters and optionally a correction. The same may alternatively or additionally on the basis of an image analysis of the vehicle apron. About the For example, image analysis may relate the location of the vehicle be determined on the lane when the lane-limiting Side lines are captured in the image. Also this information can used for parameter adjustment. Unless on the road, for example, a test track, also corresponding route markings can be detected in the camera image can from the camera image, the real speed through appropriate Analysis of subsequent images can be determined etc.

In jedem Fall ist anhand dieser Informationen eine Verifizierung der über die Erfassungsmittel fahrzeugseitig aufgenommenen Fahrzeugparameter möglich, so dass ein Abgleich der der Simulationsdarstellung und der Positionen des simulierten Verkehrs zugrunde liegenden Fahrzeugposition mit der realen Fahrzeugposition möglich ist. Damit kann der simulierte Verkehr höchst positionsgenau in Bezug auf die reale Fahrzeugposition eingeblendet werden.In In each case, on the basis of this information, a verification of the information about the Detecting means recorded on the vehicle side vehicle parameters possible, so that a match of the simulation representation and the positions the simulated traffic underlying vehicle position with the real vehicle position possible is. This allows the simulated traffic to be highly accurate in terms of position the real vehicle position are displayed.

Wie beschrieben wird ausgehend von der Verkehrssimulationsdarstellung das ”reale” Sensorsignal in Bezug auf die Fahrzeugposition simuliert und dem Steuergerät des Assistenzsystems gegeben. Dieses simulierte Sensorsignal ist das die mögliche Zuschaltung des Systems, also beispielsweise der Bremsen im Falle eines Notbremsassistenten oder dergleichen, auslösende Moment. Hierzu ist es erforderlich, dass das simulierte Sensorsignal so exakt wie möglich dem realen Sensorsignal, das vom realen Fahrzeug in der momentanen Fahrsituation erzeugt werden würde, entspricht. Um dem gerecht zu werden ist zweckmäßigerweise vorgesehen, bei der Erzeugung des Sensorsignals mittels einer Simulationseinrichtung, also einem entsprechenden Sensorsimulationsmodell, die momentane Längs- und Querneigung zu berücksichtigen. Wurde beispielsweise aufgrund eines ”zu engen Auffahrens” auf das virtuelle vorausfahrende Fahrzeug das Assistenzsystem in Betrieb gesetzt und wurden die Bremsen betätigt, so taucht das Fahrzeug aufgrund der Bremsverzögerung frontseitig ab, es kommt zu einem Nicken. Dies führt dazu, dass die frontseitig integrierten Sensoren eine andere Position bezüglich des ”virtuellen” vorausfahrenden Fahrzeugs einnehmen, das heißt, die Radarkeulen würden real einen etwas anderen Bereich erfassen, so dass es mithin gegebenenfalls zu einer Signalveränderung kommt. Diese sich real einstellende Fahrzeugstellungsänderung wird beispielsweise bei Erfassen des Nickwinkels über einen geeigneten Nickwinkelsensor erkannt und kann im Rahmen der Sensorsignalsimulation berücksichtigt werden. Ähnliches gilt im Falle einer Kurvenfahrt, bei der sich je nach Krümmungsrichtung der Kurve das Fahrzeug zur rechten oder linken Seite etwas aufstellt, so dass sich auch in diesem Fall die Relativposition der Sensoren zum virtuellen voraus fahrenden Fahrzeug ändert. Entsprechendes gilt auch im Falle einer Fahrzeugbeschleunigung, hier stellt sich der umgekehrte Fall wie beim Bremsen ein.As described, based on the traffic simulation representation, the "real" sensor signal is simulated with respect to the vehicle position and given to the control unit of the assistance system. This simulated sensor signal is the moment triggering the possible connection of the system, for example the brakes in the case of an emergency brake assistant or the like. For this purpose, it is necessary that the simulated sensor signal corresponds as accurately as possible to the real sensor signal that would be generated by the real vehicle in the current driving situation. To do it justice it is expediently provided to take into account the instantaneous longitudinal and lateral inclination in the generation of the sensor signal by means of a simulation device, that is to say a corresponding sensor simulation model. If, for example, the assistance system was put into operation due to a "too narrow approach" to the virtual preceding vehicle and the brakes were actuated, the vehicle would submerge due to the braking deceleration at the front, and there would be a nod. As a result, the front-integrated sensors assume a different position relative to the "virtual" preceding vehicle, that is, the radar lobes would actually detect a slightly different area, so that, if appropriate, a signal change occurs. This actually adjusting vehicle position change is detected for example when detecting the pitch angle via a suitable pitch angle sensor and can be taken into account in the sensor signal simulation. The same applies in the case of cornering, in which depending on the direction of curvature of the curve, the vehicle to the right or left side something sets up, so that changes in this case, the relative position of the sensors to the virtual vehicle ahead. The same applies in the case of a vehicle acceleration, here is the reverse case as in braking.

Einen Einfluss auf das reale Sensorsignal hat aber nicht nur die reale Fahrzeugstellung, sondern auch im abgetasteten Erfassungsbereich des oder der Sensoren befindliche Gegenstände wie beispielsweise Verkehrszeichen, Leitplanken, Bäume etc. Infolgedessen ist auch eine Berücksichtigung derartiger in der Fahrzeugumgebung befindlicher Gegenstände über das Sensorsignalsimulationsmodell vorteilhaft. Dies kann auf unterschiedliche Weise erfolgen. Zum einen können die Gegenstände anhand eines mit einer Kamera kontinuierlich aufgenommenen Bilds der Fahrzeugumgebung kontinuierlich über einen entsprechenden Bildanalysealgorithmus ermittelt werden, so dass deren Vorhandensein und Lage bezüglich der Fahrzeug-Ist-Position bestimmt werden kann und diese Gegenstände im Rahmen der Sensorsignalsimulation berücksichtigt werden können. Alternativ ist es denkbar, bei Befahren einer von der Fahrbahnumgebung bekannten Fahrstrecke wie beispielsweise einem stets gleichen Testgelände entsprechende Gegenstände in der Simulationseinrichtung, also im Sensorsignalsimulationsmodell, fest zu implementieren. Nachdem stets die reale Fahrzeugposition bekannt ist, kann zu jeder Zeit auf die entsprechende ”Umgebungsinformation” zurückgegriffen werden.a However, not only the real one has an influence on the real sensor signal Vehicle position, but also in the scanned detection area of the sensor (s), such as traffic signs, Crash barriers, trees etc. As a result, consideration is also given to such objects in the vehicle environment via the sensor signal simulation model advantageous. This can be done in different ways. To the one can things using an image shot continuously with a camera the vehicle environment continuously via a corresponding image analysis algorithm be determined so that their presence and location with respect Vehicle actual position can be determined and these items in the frame considered the sensor signal simulation can be. Alternatively, it is conceivable when driving one of the road environment known route such as an always the same test area corresponding objects in the simulation device, ie in the sensor signal simulation model, firmly to implement. Having always the real vehicle position is known, can at any time resorted to the corresponding "environment information" become.

Wie beschrieben kann die Simulationsdarstellung entweder über eine vom Fahrer getragene Visualisierungsbrille, in die die simulierte Verkehrsdarstellung eingeblendet werden kann, oder durch Projektion auf die Frontscheibe oder gegebenenfalls wenigstens eine Seitenscheibe über eine geeignete Projektionseinrichtung, bevorzugt einen Beamer, erfolgen. Dabei ist es zweckmäßig, wenn kontinuierlich der Blickwinkel und/oder die Kopflage des Fahrers erfasst wird und die Wiedergabe der Simulationsdarstellung in Abhängigkeit des Blickwinkels, der auch aus der Kopflage bestimmt werden kann, erfolgt. Das heißt, die eingeblendete Simulationsdarstellung wird der tatsächlichen Fahrersicht exakt angepasst. Der Blickwinkel kann beispielsweise über ein Eye-Tracking (deutsch: Blickbewegungsregistrierung), bei dem die Augenbewegung über eine entsprechende Erfassungseinrichtung, z. B. eine Kamera, aufgenommen und bestimmt wird, oder über eine Kamera, die den Kopfbereich des Fahrers aufnimmt und auswertet, oder über Positionssensoren an der Brille oder dergleichen bestimmt werden, wobei die entsprechenden Daten der Simulationseinrichtung, über die die Simulationsdarstellung des Verkehrs erzeugt wird, gegeben werden.As described the simulation representation either via a driver-worn visualization goggles into which the simulated Traffic representation can be displayed or by projection on the windscreen or optionally at least one side window on a suitable projection device, preferably a projector, take place. It is useful if continuously detects the perspective and / or the head position of the driver and the reproduction of the simulation representation in dependence the angle of view, which can also be determined from the head position, he follows. This means, the displayed simulation representation becomes the actual Driver's view exactly adapted. The viewing angle can be over, for example Eye tracking (German: eye movement registration), in which the Eye movement over a corresponding detection device, for. As a camera, recorded and is determined, or over a camera that picks up and evaluates the driver's head, or over Position sensors on the glasses or the like are determined the corresponding data of the simulation device, via the the simulation representation of the traffic is generated.

Neben dem erfindungsgemäßen Verfahren betrifft die Erfindung ferner eine Vorrichtung zur Durchführung eines Funktionstests eines in einem Kraftfahrzeug integrierten sensorbasierten Fahrerassistenzsystems. Diese Vorrichtung umfasst eine erste Simulationseinrichtung zur Erzeugung einer kontinuierlich angepassten optischen Simulationsdarstellung einer virtuellen Verkehrssituation in Abhängigkeit eines oder mehrerer kontinuierlich erfasster, die Fahrzeugbewegung beschreibender Fahrzeugparameter, eine Wiedergabeeinrichtung zum kontinuierlichen Einblenden der Simulationsdarstellung in das zum Fahrzeugumfeld gerichtete Blickfeld des Fahrers, während der Fahrer nach wie vor das reale Fahrzeugumfeld erfassen kann, sowie eine zweite Simulationseinrichtung zum kontinuierlichen Erzeugen eines das wenigstens eine Sensorsignal in Abhängigkeit von der simulierten Verkehrssituation simulierenden Sensorsignals, welches simulierte Sensorsignal dem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät gegeben wird, über das das Fahrerassistenzsystem gegebenenfalls in Betrieb setzbar ist. Die erste und die zweite Simulationseinrichtung können als softwarebasierte Simulationsmodelle auf einer geeigneten Recheneinrichtung, die entweder während der Testfahrt im Fahrzeug selbst angeordnet ist oder extern dazu an einer Beobachterposition angeordnet ist und über Datenfunk mit entsprechenden Komponenten des Fahrzeugs kommuniziert, implementiert sein.Next relates to the inventive method the invention further comprises an apparatus for performing a functional test a sensor-based driver assistance system integrated in a motor vehicle. This device comprises a first simulation device for Generation of a continuously adapted optical simulation representation a virtual traffic situation depending on one or more continuously detected vehicle parameters describing the vehicle movement, a display device for continuously fading in the simulation representation in the vehicle field of view of the driver, during the Driver can still capture the real vehicle environment, as well a second simulation device for continuous generation one of the at least one sensor signal as a function of the simulated Traffic situation simulating sensor signal, which simulated Sensor signal which controls the operation of the driver assistance system control unit is given about that the driver assistance system can optionally be put into operation. The first and the second simulation device can as Software-based simulation models on a suitable computing device, the either during the test drive is arranged in the vehicle itself or externally thereto is arranged at an observer position and via radio data transmission with appropriate Components of the vehicle communicates, implements.

Um den virtuellen Verkehr exakt bezogen auf die reale Fahrzeugposition einblenden zu können, ist eine Positionsbestimmungseinrichtung zur kontinuierlichen Bestimmung der realen Fahrzeugposition in Bezug auf die befahrene Fahrbahn vorgesehen und ferner die erste Simulationseinrichtung zur Erzeugung der Simulationsdarstellung unter Berücksichtigung der ihr kontinuierlich mitgeteilten Fahrzeugposition ausgebildet. Die Positionsbestimmungseinrichtung zur Fahrzeugpositionsbestimmung ermittelt diese entweder anhand des oder der Fahrzeugparameter odometrisch und/oder unmittelbar anhand eines mittels einer das Fahrzeugumfeld erfassenden Kamera aufgenommenen Bilds. Zur Erfassung der Fahrzeugparameter, insbesondere der Geschwindigkeit, der Querbeschleunigung, der Längsbeschleunigung und/oder der Gierrate, kommuniziert die Positionsbestimmungseinrichtung zur Positionsbestimmung zweckmäßigerweise mit einem Fahrzeugbus, an dem die entsprechenden Parameter Hegen, insbesondere dem CAN-Bus.In order to be able to superimpose the virtual traffic exactly with reference to the real vehicle position, a position determining device is provided for the continuous determination of the real vehicle position with respect to the traveled roadway and furthermore the first simulation device for generating the simulation representation taking into account tion of her continuously communicated vehicle position formed. The position determining device for determining the vehicle position determines this either on the basis of the vehicle parameter (s) odometrically and / or directly on the basis of an image recorded by means of a camera detecting the vehicle surroundings. For detecting the vehicle parameters, in particular the speed, the lateral acceleration, the longitudinal acceleration and / or the yaw rate, the position determination device for position determination communicates expediently with a vehicle bus, to which the corresponding parameters, in particular the CAN bus, are attached.

Weiterhin ist die Positionsbestimmungseinrichtung erfindungsgemäß zum Abgleich des oder der über fahrzeugseitig integrierte Erfassungsmittel erfassten Fahrzeugparameter mit kontinuierlich erfassten Informationen, die mittels eines GPS- oder DGPS-Systems ermittelt werden, und/oder kontinu ierlich erfassten Informationen, die anhand eines von einer Kamera aufgenommenen und das Fahrzeugumfeld zeigenden Kamerabilds ermittelt werden, ausgebildet. Über die Positionsbestimmungseinrichtung erfolgt also in Verbindung mit den die reale Position in Form entsprechender Raumkoordinaten wiedergebenden GPS- oder DGPS-Informationen ein exakter Parameterabgleich. Dies ist auch wie beschrieben anhand oder in Verbindung mit aus einer Bildanalyse gewonnenen Informationen möglich. Zur Erfassung der GPS- oder DGPS-Daten weist das Fahrzeug natürlich eine entsprechende Erfassungseinrichtung, in der Regel ein ohnehin fahrzeugseitig integriertes Navigationssystem, auf.Farther is the position determination device according to the invention for adjustment of or over On-board integrated detection means detected vehicle parameters with continuously collected information generated by means of a GPS or DGPS system, and / or continuously recorded Information taken from a camera taken and the vehicle environment facing camera image are determined trained. About the Position determining device thus takes place in conjunction with the reproduce the real position in the form of corresponding spatial coordinates GPS or DGPS information an exact parameter adjustment. This is also as described by or in connection with an image analysis obtained information possible. Of course, the vehicle has one to capture the GPS or DGPS data corresponding detection device, usually an already integrated on the vehicle side Navigation system, on.

In Weiterbildung der Erfindung ist vorgesehen, dass die zweite Simulationseinrichtung mit wenigstens einem die Längs- oder Querneigung des Fahrzeugs zur Fahrbahn erfassenden Sensor direkt oder indirekt kommuniziert und zum Erzeugen des simulierten Sensorsignals unter Berücksichtigung der Sensorinformation ausgebildet ist. Über den Sensor kann beispielsweise ein Nicken des Fahrzeugs bei einer Bremsverzögerung oder ein Aufstellen bei einer Beschleunigung oder einer Kurvenfahrt erfasst werden, wobei sich in diesen Fahrsituationen die jeweilige Position des oder der realen Sensoren im Raum ändert, was mitunter zu einer Änderung des realen Sensorsignals führen würde, die im Rahmen der Signalsimulation berücksichtigt werden kann.In Further development of the invention is provided that the second simulation device with at least one of the longitudinal or bank of the vehicle to the lane sensing sensor directly or indirectly communicates and to generate the simulated sensor signal considering the sensor information is formed. For example, via the sensor a pitching of the vehicle during a braking deceleration or erection be detected during acceleration or cornering, wherein in these driving situations, the respective position of the or the real sensors in the room changes, which sometimes leads to a change lead the real sensor signal would, which can be taken into account in the context of signal simulation.

Des Weiteren kann die zweite Simulationseinrichtung mit einer Bildverarbeitungseinrichtung, die in einem mittels einer Kamera aufgenommenen Bild definierte Gegenstände analysiert, die das reale Sensorsignal beeinflussen können, kommunizieren und zur Erzeugung des simulierten Sensorsignals unter Berücksichtigung der gegenstandsbezogenen Informationen ausgebildet sein. Wird beispielsweise im Rahmen der Kamerabildanalyse eine Leitplanke oder ein Verkehrszeichen oder ähnliches im realen Fahrzeugumfeld definiert, kann diese in Bezug auf die reale Fahrzeugposition ermittelbare Information der zweiten Simulationseinrichtung gegeben werden, die die hieraus resultierende mögliche Sensorsignalbeeinflussung berücksichtigt. Alternativ dazu kann bei Befahren einer bekannten Fahrbahnumgebung die Lage und Art entsprechender Gegenstände fest in der Simulationseinrichtung bzw. im Simulationsmodell implementiert sein, so dass bei bekannter Ist-Fahrzeugposition auf die jeweiligen relevanten Umgebungsinformationen zurückgegriffen werden kann.Of Furthermore, the second simulation device can be equipped with an image processing device, which defined in an image captured by a camera objects analyzed, which can affect the real sensor signal communicate and for generating the simulated sensor signal under consideration be formed of subject-related information. For example as part of the camera image analysis a guardrail or a traffic sign or similar in the defined real vehicle environment, this may be in relation to the real Vehicle position detectable information of the second simulation device given the resulting possible sensor signal influencing considered. Alternatively, when driving on a known roadway environment the location and type of objects fixed in the simulation facility or implemented in the simulation model, so that when known Actual vehicle position to the relevant relevant environment information be resorted to can.

Die Wiedergabeeinrichtung selbst kann entweder eine vom Fahrer zu tragende Visualisierungsbrille oder dergleichen oder eine Projektionseinrichtung zum Projizieren des Simulationsbilds auf die Frontscheibe und gegebenenfalls wenigstens eine Seitenscheibe und/oder ein Rück- oder Außenspiegel sein, wobei dies zweckmäßigerweise in Abhängigkeit des Blickwinkels des Fahrers erfolgen sollte. Hierzu ist eine Einrichtung zur kontinuierlichen Erfassung des Blickwinkels und/oder der Kopflage des Fahrers vorgesehen, die mit der ersten Simulationseinrichtung und/oder der Wiedergabeeinrichtung, je nachdem wo die Anpassung der Simulationsdarstellung an den Blickwinkel erfolgt, kommuniziert.The Playback device itself can either be worn by the driver Visualization glasses or the like or a projection device for projecting the simulation image on the windscreen and, if necessary at least one side window and / or a rear or exterior mirror, this being expediently dependent on the driver's perspective. This is a device for continuous detection of the viewing angle and / or the head position the driver provided with the first simulation device and / or the playback device, depending on where the adaptation the simulation representation takes place at the viewing angle, communicates.

Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus dem im folgenden beschriebenen Ausführungsbeispiel sowie anhand der Zeichnungen. Dabei zeigen:Further Advantages, features and details of the invention will become apparent the embodiment described below and with reference to the Drawings. Showing:

1 eine Prinzipdarstellung eines Kraftfahrzeugs mit einer erfindungsgemäßen Vorrichtung, und 1 a schematic diagram of a motor vehicle with a device according to the invention, and

2 ein Flussdiagramm zur Darstellung des Verfahrensablaufs. 2 a flowchart illustrating the process flow.

1 zeigt ein Kraftfahrzeug 1, in dem wie in der Prinzipskizze herausgezogen dargestellt eine erfindungsgemäße Vorrichtung 2 zur Durchführung eines Funktionstests eines Fahrerassistenzsystems, im Folgenden ”FAS” genannt, integriert ist. Diese umfasst zum einen eine Recheneinrichtung 3, umfassend eine erste Simulationseinrichtung 4 zum Erzeugen einer kontinuierlich angepassten optischen Simulationsdarstellung einer virtuellen Verkehrssituation, eine zweite Simulationseinrichtung 5 zum kontinuierlichen Erzeugen wenigstens eines simulierten Sensorsignals, über welches der Betrieb des FAS gesteuert wird, sowie eine Positionsbestimmungseinrichtung 6 zur kontinuierlichen Bestimmung der realen Fahrzeugposition. Die beiden Simulationseinrichtungen 4, 5 sind in Form geeigneter softwarebasierter Simulationsmodelle implementiert, die Positionsbestimmungseinrichtung 6 ist ebenfalls in Form eines geeigneten Rechenmoduls implementiert. 1 shows a motor vehicle 1 in which pulled out as shown in the schematic diagram of a device according to the invention 2 for performing a functional test of a driver assistance system, hereinafter referred to as "FAS" integrated. This includes on the one hand a computing device 3 comprising a first simulation device 4 for generating a continuously adapted optical simulation representation of a virtual traffic situation, a second simulation device 5 for continuously generating at least one simulated sensor signal, via which the operation of the FAS is controlled, as well as a position determining device 6 for the continuous determination of the real vehicle position. The two simulation facilities 4 . 5 are implemented in the form of suitable software-based simulation models, the position-determining device 6 is also in the form of a implemented appropriate computing module.

Die Recheneinrichtung 3 kommuniziert mit einem Fahrzeugbus 7, hier bevorzugt dem CAN-Bus. Über diesen werden von der Recheneinrichtung 3 verschiedene Fahrzeugparameter abgegriffen, die über entsprechende Erfassungsmittel in Form von Sensoren oder dergleichen fahrzeugseitig erfasst und auf den Fahrzeugbus 7 gegeben werden. Dies sind zum einen die Geschwindigkeit v, zum anderen die Längs- und Querbeschleunigungen, dargestellt durch das Symbol a, ferner die Gierrate, dargestellt durch ”Gier”, sowie die Längs- und/oder Querneigung ”L/Q” des Fahrzeugs, die sich bei einer Bremsverzögerung oder starken Beschleunigung durch ein Nicken oder frontseitiges Anheben oder eine Kippung um die Längsachse bei einer Kurvenfahrt einstellen. Diese Fahrzeugparameter werden von unterschiedlichen Komponenten der Recheneinrichtung wie nachfolgend noch beschrieben wird verarbeitet.The computing device 3 communicates with a vehicle bus 7 , here preferably the CAN bus. About this are from the computing device 3 tapped various vehicle parameters, which detected via corresponding detection means in the form of sensors or the like on the vehicle side and on the vehicle bus 7 are given. These are on the one hand the speed v, on the other hand the longitudinal and lateral accelerations, represented by the symbol a, furthermore the yaw rate, represented by "yaw", as well as the longitudinal and / or bank angle "L / Q" of the vehicle, which itself during a braking deceleration or strong acceleration by a nodding or frontal lifting or tilting about the longitudinal axis when cornering. These vehicle parameters are processed by different components of the computing device as described below.

Weiterhin kommuniziert die Recheneinrichtung 3 mit einer Erfassungseinrichtung 8, die GPS- oder DGPS-Positionskoordinaten ermittelt. Solche Einrichtungen sind hinreichend bekannt und kommen bei Navigationssystemen umfangreich zum Einsatz. Die hierüber bestimmten sehr exakten realen Fahrzeugpositionsdaten in Form der entsprechenden Raumkoordinaten werden der Recheneinrichtung 3 gegeben.Furthermore, the computing device communicates 3 with a detection device 8th which determines GPS or DGPS position coordinates. Such devices are well known and are widely used in navigation systems. The very exact real vehicle position data determined in this regard in the form of the corresponding spatial coordinates become the computing device 3 given.

Ferner ist eine Kamera 9 mit nachgeschalteter Bildverarbeitungseinrichtung 10 gegeben, die ebenfalls mit der Recheneinrichtung 3 kommuniziert. Auch hierüber werden Informationen ermittelt, die der realen Positionsbestimmung dienen, worauf nachfolgend noch eingegangen wird.There is also a camera 9 with downstream image processing device 10 given, which also with the computing device 3 communicated. Also over this information is determined, which serve the real position determination, which will be discussed below.

Weiterhin kommuniziert die Recheneinrichtung 3 im gezeigten Ausführungsbeispiel mit einer Bilderzeugungseinrichtung 11, die in einer Visualisierungsbrille 12, die vom Fahrer getragen wird, integriert ist, und über die die von der ersten Simulationseinrichtung 4 erzeugte Verkehrssimulationsdarstellung dem Fahrer eingeblendet werden kann. Dieser kann durch die Brille das Fahrzeugumfeld nach wie vor betrachten, sieht jedoch den eingeblendeten virtuellen Verkehr. Weiterhin ist eine Projektionseinrichtung 13 vorgesehen, die ebenfalls mit der Recheneinrichtung 3 kommuniziert und über die die Simulationsdarstellung des virtuellen Verkehrs auf die Frontscheibe 14 des Fahrzeugs projiziert werden kann, wo, wie gezeigt ist, ein virtuelles Fahrzeug 15 dem Fahrer, der nach wie vor durch die Frontscheibe 14 blicken und die Umgebung erkennen kann, dargestellt wird. Die Recheneinrichtung 3 kommuniziert entweder mit der Visualisierungsbrille 12 oder mit der Projektionseinrichtung 13, je nachdem, welches System zur Visualisierung verwendet wird.Furthermore, the computing device communicates 3 in the illustrated embodiment with an image forming device 11 in a visualization goggles 12 , which is carried by the driver, is integrated, and about that of the first simulation device 4 generated traffic simulation representation can be displayed to the driver. This can still look at the vehicle environment through the glasses, but sees the virtual traffic displayed. Furthermore, a projection device 13 provided, which also with the computing device 3 communicates and displays the simulation of virtual traffic on the windscreen 14 of the vehicle where, as shown, a virtual vehicle 15 the driver, who is still through the windscreen 14 look and recognize the environment is presented. The computing device 3 communicates with either the visualization glasses 12 or with the projection device 13 , depending on which system is used for visualization.

Weiterhin ist eine zweite Kamera oder allgemein eine Erfassungseinrichtung 16 mit zugeordneter Verarbeitungseinrichtung 17 vorgesehen, über die durch Erfassung der Bewegung der Augen 18 des Fahrers kontinuierlich sein Blickwinkel bestimmt wird. Die entsprechenden Informationen werden ebenfalls der Recheneinrichtung 3 gegeben und dort zur blickwinkelbezogenen Erzeugung der Verkehrssimulationsdarstellung oder der entsprechenden Wiedergabe verarbeitet.Furthermore, a second camera or generally a detection device 16 with associated processing device 17 provided, over which by detecting the movement of the eyes 18 the driver continuously determines his viewing angle. The corresponding information will also be the computing device 3 given and processed there for the viewing angle-related generation of the traffic simulation representation or the corresponding playback.

Die Positionsbestimmungseinrichtung 6 zur Bestimmung der realen Fahrzeugposition ermittelt diese anhand der die Fahrzeugbewegung beschreibenden Parameter, hier bevorzugt der Geschwindigkeit v, der Längs- und Querbeschleunigung a sowie der Gierrate. Diese über entsprechende Sensoren aufgenommenen Parameter werden über Informationen, die über die GPS- oder DGPS-Einrichtung 8 hinsichtlich der realen Fahrzeugposition ermittelt werden, verifiziert. Aus diesen GPS- oder DGPS-Daten kann die genaue Geschwindigkeit, Beschleunigung und Gierrate rechnerisch ermittelt werden und auf diese Weise überprüft werden, inwieweit die über die Fahrzeugsensorik aufgenommenen Fahrzeugparameter exakt sind. Es ist also ein Abgleich der Parameter möglich. Auf diese Weise kann über die Positionsbestimmungseinrichtung 6 die reale Fahrzeugposition absolut exakt bestimmt werden. In entsprechender Weise können alternativ oder zusätzlich die sensormäßig aufgenommenen Fahrzeugparameter auch über entsprechende Informationen, die aus der Bildaufnahme über die Bildverarbeitungseinrichtung 10 zur Fahrzeug-Ist-Position bestimmt werden, verifiziert und abgeglichen werden.The position determination device 6 to determine the real vehicle position, this is determined on the basis of the parameters describing the vehicle movement, here preferably the speed v, the longitudinal and lateral acceleration a and the yaw rate. These parameters, recorded via corresponding sensors, are transmitted via information via the GPS or DGPS device 8th Verified with respect to the real vehicle position verified. From this GPS or DGPS data, the exact speed, acceleration and yaw rate can be calculated and checked in this way, to what extent the vehicle parameters recorded via the vehicle sensors are accurate. So it is possible to adjust the parameters. In this way, via the position determination device 6 the real vehicle position can be determined absolutely exactly. In a corresponding manner, as an alternative or in addition, the sensor parameters recorded vehicle parameters can also via corresponding information from the image acquisition via the image processing device 10 be determined to the vehicle-actual position, verified and matched.

Diese Fahrzeugposition wie auch die gegebenenfalls verifizierten bzw. korrigierten Fahrzeugparameter sind weiterhin Grundlage für die Erzeugung einer Verkehrssimulationsdarstellung über die erste Simulationseinrichtung 4. Diese Simulationsdarstellung wird kontinuierlich in Abhängigkeit der Fahrzeugbewegung, also basierend auf den Fahrzeugparametern, errechnet und angepasst.This vehicle position as well as the possibly verified or corrected vehicle parameters are furthermore the basis for the generation of a traffic simulation representation via the first simulation device 4 , This simulation representation is continuously calculated and adjusted as a function of the vehicle movement, ie based on the vehicle parameters.

Die zweite Simulationseinrichtung 5 dient zum Erzeugen eines simulierten Sensorsignals, das dem Signal entspricht, das ein realer, stoßstangenseitig integrierter Radarsensor oder dergleichen, der ein reales vorausfahrendes Fahrzeug erfassen würde, erzeugen würde. Dieses Sensorsignal wird in Bezug auf das über die Simulationseinrichtung 4 erzeugte virtuelle vorausfahrende Fahrzeug, beispielsweise das gezeigte Fahrzeug 15, ermittelt, das heißt, die zweite Simulationseinrichtung 5 erhält entsprechende Informationen von der ersten Simulationseinrichtung 4 über die Position eines virtuellen Fahrzeugs in Bezug auf die reale Fahrzeugposition. Um das Sensorsignal möglichst exakt ermitteln zu können, damit es weitestgehend dem realen Signal entsprich, das gegebenenfalls durch Umgebungseinflüsse beeinflusst ist, wird zum einen über den Fahrzeugbus 7 auf Informationen über die Fahrzeugstellung, nämlich die Längs- oder Querneigung ”L/Q”, zurückgegriffen und dies berücksichtigt. Über die Kamera 9 wird wie beschrieben das Fahrzeugvorfeld aufgenommen. Wird über die Bildverarbeitungseinrichtung 10 eine Analyse möglicher im Bild befindlicher Gegenstände, die die Abtastung über den Sensor oder damit das Sensorsignal selbst beeinflussen können, vorgenommen und werden solche Gegenstände wie beispielsweise Leitplanken, Verkehrsschilder oder dergleichen erfasst, können diese – nachdem ihre lokale Position bekannt ist – von der zweiten Simulationseinrichtung ebenfalls berücksichtigt werden und das simulierte Sen sorsignal entsprechend angepasst werden, damit den realen Gegebenheiten weitestgehend Rechnung getragen werden kann.The second simulation device 5 is used to generate a simulated sensor signal corresponding to the signal that a real bumper-side integrated radar sensor or the like that would detect a real preceding vehicle would produce. This sensor signal is relative to that via the simulation device 4 generated virtual preceding vehicle, such as the vehicle shown 15 , that is, the second simulation device 5 receives corresponding information from the first simulation device 4 about the position of a virtual vehicle with respect to the real vehicle position. In order to determine the sensor signal as accurately as possible, so that it ent ent largely the real signal In other words, which may be affected by environmental influences, on the one hand via the vehicle bus 7 to information about the vehicle position, namely the longitudinal or lateral inclination "L / Q", resorted to and taken into account. About the camera 9 As described, the vehicle apron is recorded. Is about the image processing device 10 an analysis of possible in-picture objects that can influence the scanning via the sensor or the sensor signal itself, and are detected such items as crash barriers, traffic signs or the like, they - after their local position is known - from the second simulation device must also be taken into account and the simulated Sen sorsignal be adjusted accordingly, so that the real conditions can be largely taken into account.

Wie beschrieben wird die kontinuierlich angepasste Verkehrssimulationsdarstellung dem Fahrer eingeblendet. Zu jeder aktuell ermittelten Verkehrssimulationsdarstellung wird das aktuelle simulierte Sensorsignal ermittelt und dem Steuergerät 19 des FAS gegeben. Beschreibt das Sensorsignal einen Zustand, der ein Eingreifen des FAS erfordert, steuert das Steuergerät die entsprechenden fahrzeugseitig vorhandenen realen Systemkomponenten wie beispielsweise die Bremsen zur Durchführung einer Notbremsung oder dergleichen an. Eine entsprechende Änderung der Fahrzeugbewegung wird unmittelbar über die kontinuierlich aufgenommenen Fahrzeugparameter, nämlich die Geschwindigkeit, Längs- oder Querbeschleunigung sowie die Gierrate, erfasst. Entsprechendes gilt auch für etwaige Längs- und Querneigungen, z. B. den Nickwinkel im Falle einer Bremsung. Diese werden unmittelbar wieder auf die Recheneinrichtung 3 rückgekoppelt und über die parallele GPS- oder DGPS-Datenerfassung oder die Bildanalyse seitens der Bildverarbeitungseinrichtung 10 verifiziert oder abgeglichen. Auf Basis der geänderten Fahrzeugparameter erfolgt dann die entsprechende Anpassung der Simulationsdarstellung wie auch die erneute Erzeugung eines simulierten Sensorsignals etc. Es ist also ein geschlossener Kommunikationskreis realisiert, bestehend aus einer virtuellen Verkehrssituationserzeugung, einer virtuellen Sensorik sowie einem real betriebenen Fahrerassistenzsystem.As described, the continuously adjusted traffic simulation representation is displayed to the driver. For each currently determined traffic simulation representation, the current simulated sensor signal is determined and the control unit 19 given the FAS. Describing the sensor signal a state that requires intervention of the FAS, the controller controls the corresponding on-vehicle real system components such as the brakes to perform emergency braking or the like. A corresponding change in the vehicle movement is detected directly via the continuously recorded vehicle parameters, namely the speed, longitudinal or lateral acceleration as well as the yaw rate. The same applies to any longitudinal and transverse slopes, z. B. the pitch angle in the event of braking. These are immediately returned to the computing device 3 fed back via the parallel GPS or DGPS data acquisition or image analysis by the image processing device 10 verified or matched. On the basis of the changed vehicle parameters then the corresponding adjustment of the simulation representation as well as the renewed generation of a simulated sensor signal, etc. Thus, there is a closed communication circuit realized, consisting of a virtual traffic situation generation, a virtual sensor system and a real operated driver assistance system.

2 zeigt ein Flussdiagramm, das den Ablauf und die Abhängigkeiten innerhalb des erfindungsgemäßen Verfahrens beschreibt. Auf Basis der Informationen über den CAN-Bus, also der Fahrzeugparameter (Feld a), der Informationen über das GPS- oder DGPS-System zur realen Fahrzeugposition (Feld b) und/oder der Informationen über die Bildverarbeitung zur Fahrzeugposition (Feld c) wird im Feld d die reale Fahrzeugposition sowie der Fahrzeugeigenzustand auf Basis der hierüber gegebenenfalls verifizierten oder abgeglichenen CAN-Fahrzeugparameter bestimmt. Anschließend erfolgt, siehe Feld e, die Verkehrssimulation, also die Erzeugung der Simulationsdarstellung über die erste Simulationseinrichtung, sowie, siehe Feld f, die Bestimmung der Positionen der virtuellen Verkehrsteilnehmer wie auch des eigenen Fahrzeugs bzw. deren Relation zueinander. Die Simulationsdarstellung bzw. die virtuellen Verkehrsteilnehmer werden gemäß Feld g visualisiert, was entweder über ein Head-Mounted-Display (Feld h), also die Visualisierungsbrille 12, oder über eine großflächige Projektion (Feld i) über die Projektionseinrichtung 13 erfolgen kann. Die großflächige Projektion kann nicht nur auf der Windschutzscheibe, sondern optional auch auf Seitenscheiben oder Rück- oder Seitenspiegeln erfolgen, siehe Schritt j. Auch eine Darstellung an einem größeren LCD-Bildschirm ist denkbar. Die Visualisierung wird, siehe Feld k, der Kopf- und/oder Augenposition, also blickwinkelspezifisch, angepasst. 2 shows a flowchart that describes the process and the dependencies within the method according to the invention. On the basis of the information about the CAN bus, ie the vehicle parameters (field a), the information about the GPS or DGPS system for real vehicle position (field b) and / or the information about the image processing to the vehicle position (field c) in the field d, the real vehicle position and the vehicle's own state are determined on the basis of the optionally verified or adjusted CAN vehicle parameters. Subsequently, see field e, the traffic simulation, ie the generation of the simulation representation on the first simulation device, and, see field f, the determination of the positions of the virtual road users as well as the own vehicle or their relation to each other. The simulation representation or the virtual road users are visualized according to field g, which is either via a head-mounted display (field h), ie the visualization goggles 12 , or via a large-area projection (field i) via the projection device 13 can be done. The large-area projection can be done not only on the windscreen, but optionally also on side windows or rear or side mirrors, see step j. A representation on a larger LCD screen is conceivable. The visualization is, see box k, the head and / or eye position, so view angle specific adapted.

Neben der Visualisierung gemäß Feld g werden parallel dazu in der zweiten Simulationseinrichtung 5 unter Rückgriff auf dort abgelegte Simulationsmodelle bzw. Sensormodelle der fahrzeugseitigen spezifischen Fahrerassistenzsysteme, auf die im Feld I zurückgegriffen wird, (in der Regel sind fahrzeugseitig von Haus aus Sensoren, die zu bestimmten Fahrerassistenzsystemen gehören, wie beispielsweise die Radarsensoren eines ACC-Systems, vorhanden) Sensorsignale, siehe Feld m, simuliert, die den realen Sensorsignalen weitestgehend entsprechen, wozu beispielsweise auf Informationen über die Bildverarbeitung gemäß Feld c im Hinblick auf etwaige die Signalerzeugung im Realfall beeinflussende, im Fahrzeugumfeld befindliche Gegenstände zurückgegriffen wird. Die simulierten Sensorsignale werden, siehe Schritt n, dem Steuergerät des Fahrerassistenzsystems gegeben, das gegebenenfalls eine Fahrzeugreaktion durch Inbetriebnahme des Bremssystems oder dergleichen einleitet, siehe Feld o, wobei diese Fahrzeugreaktion über entsprechende Informationen, wie in den Feldern a, b, c dargestellt, wiederum erfasst wird, und entsprechend in die Bestimmung der neuen Fahrzeugpositionen und des Fahrzeugeigenzustands im Feld d eingeht.In addition to the visualization according to field g, the second simulation device will be used in parallel 5 recourse to simulation models or sensor models of the vehicle-specific driver assistance systems used there, which are used in field I (as a rule, sensors inherent in certain driver assistance systems, such as the radar sensors of an ACC system, are present on the vehicle side) Sensor signals, see field m, simulated, which largely correspond to the real sensor signals, for which, for example, information about the image processing in accordance with field c with regard to any signal generation in real-case affecting, located in the vehicle environment objects is used. The simulated sensor signals are, see step n, given to the control unit of the driver assistance system, which optionally initiates a vehicle reaction by commissioning the braking system or the like, see box o, this vehicle reaction via appropriate information, as shown in the fields a, b, c, turn is detected, and accordingly enters into the determination of the new vehicle positions and the vehicle state in the field d.

Um eine Testaussage treffen zu können, hat zum einen der Fahrer selbst die Möglichkeit, in Verbindung mit der mit der realen Umwelt gekoppelten virtuellen Visualisierung zu prüfen, ob das Fahrerassistenzsystem bezogen auf die visualisierte Verkehrssituation richtig reagiert hat. Darüber hinaus werden die visualisierten Darstellungen oder Informationen, die mit einem entsprechenden Zeitstempel versehen sind, in einer geeigneten Speichereinrichtung seitens der Recheneinrichtung 3 abgespeichert. Entsprechend werden Informationen oder Signale, die das Steuergerät 19 des Fahrerassistenzsystems an entsprechende reale Systemkomponenten wie Bremsen oder dergleichen ausgibt, mit demselben Zeitstempel versehen und in der Recheneinrichtung 3 abgelegt. Auf diese Weise ergibt sich eine Zeitkorrelation zwischen den verschiedenen Daten oder Informationen, auf Basis welcher nachfolgend die rechnerische Funktionsauswertung erfolgen kann.In order to be able to make a test statement, the driver himself has the possibility, in conjunction with the virtual visualization coupled to the real environment, to check whether the driver assistance system has responded correctly to the visualized traffic situation. In addition, the visualized representations or information, which are provided with a corresponding time stamp, in a suitable memory device by the computing device 3 stored. Accordingly, information or signals that the controller 19 of the driver assistance system to appropriate real system components such as brakes or the like outputs provided with the same time stamp and in the computing device 3 stored. This results in a time correlation between the various data or information, on the basis of which the arithmetical function evaluation can subsequently take place.

Claims (22)

Verfahren zur Funktionsprüfung eines in einem Kraftfahrzeug integrierten, in Abhängigkeit eines von wenigstens einem Sensor, der die Verkehrssituation im Fahrzeugumfeld überwacht, gegebenen Sensorsignals über ein Steuergerät betriebenen Fahrerassistenzsystems, dadurch gekennzeichnet, dass dem Fahrer während der Fahrt eine in Abhängigkeit eines oder mehrerer kontinuierlich erfasster, die Fahrzeugbewegung beschreibender Fahrzeugparameter erzeugte und kontinuierlich angepasste optische Simulationsdarstellung einer virtuellen Verkehrssituation in sein zum Fahrzeugumfeld gerichtetes Blickfeld eingeblendet wird, während der Fahrer nach wie vor das reale Fahrzeugumfeld erfassen kann, und dass zur jeweiligen Simulationsdarstellung ein das wenigstens eine Sensorsignal in Abhängigkeit von der simulierten Verkehrssituation simulierendes Sensorsignal erzeugt wird, wobei das simulierte Sensorsignal einem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät gegeben wird.Method for functional testing of an integrated in a motor vehicle, depending on one of at least one sensor that monitors the traffic situation in the vehicle environment given sensor signal via a control unit operated driver assistance system, characterized in that the driver during the drive one depending on one or more continuously detected, the vehicle movement descriptive vehicle parameters generated and continuously adapted optical simulation representation of a virtual traffic situation is displayed in his eyes to the vehicle environment field of view, while the driver can still capture the real vehicle environment, and that the respective simulation representation of the at least one sensor signal as a function of the simulated traffic situation simulating sensor signal is generated, wherein the simulated sensor signal is given to the operation of the driver assistance system controlling the control device. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass zur Erzeugung der Simulationsdarstellung kontinuierlich die reale Fahrzeugposition in Bezug auf die befahrene Fahrbahn bestimmt wird.Method according to claim 1, characterized in that that for generating the simulation representation continuously the determined real vehicle position in relation to the road used becomes. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass die Bestimmung der Fahrzeugposition anhand des oder der Fahrzeugparameter und/oder anhand eines mittels einer das Fahrzeugumfeld erfassenden Kamera aufgenommenen Bilds erfolgt.Method according to claim 2, characterized in that that the determination of the vehicle position based on the or the vehicle parameters and / or by means of a vehicle environment detecting Camera recorded image takes place. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass der oder die Fahrzeugparameter von einem fahrzeugseitig integrierten Datenbus, insbesondere dem CAN-Bus, abgegriffen werden.A method according to claim 3, characterized in that the one or more vehicle parameters integrated from a vehicle side Data bus, in particular the CAN bus, are tapped. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass als Fahrzeugparameter die Geschwindigkeit, die Querbeschleunigung, die Längsbeschleunigung und/oder die Gierrate aufgenommen werden.Method according to one of the preceding claims, characterized characterized in that the speed, the lateral acceleration, the longitudinal acceleration and / or the yaw rate are recorded. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass der oder die über fahrzeugseitig integrierte Erfassungsmittel erfassten Fahrzeugarameter mit kontinuierlich erfassten Informationen, die mittels eines GPS- oder DGPS-Systems ermittelt werden, und/oder kontinuierlich erfassten Informationen, die anhand von mittels einer Kamera aufgenommenen und das Fahrzeugumfeld zeigenden Kamerabildern ermittelt werden, abgeglichen werden.Method according to one of the preceding claims, characterized characterized in that the one or more integrated on the vehicle side Recording means recorded vehicle parameters with continuously recorded Information obtained using a GPS or DGPS system and / or continuously collected information, based on from being recorded by a camera and showing the vehicle environment Camera images are determined to be matched. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass bei der Erzeugung des simulierten Sensorsignals die momentane Längs- und Querneigung des Fahrzeugs berücksichtigt wird.Method according to one of the preceding claims, characterized characterized in that in the generation of the simulated sensor signal the current longitudinal and bank of the vehicle is taken into account. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass das reale Sensorsignal beeinflussende, in der realen Fahrzeugumgebung befindliche Gegenstände bei der Erzeugung des simulierten Sensorsignals berücksichtigt werden.Method according to one of the preceding claims, characterized characterized in that the real sensor signal influencing, in the real vehicle environment in the generation of the simulated Sensor signal are taken into account. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass die Gegenstände anhand eines mit einer Kamera kontinuierlich aufgenommenen Bilds der Fahrzeugumgebung kontinuierlich ermittelt und bei der Erzeugung des Sensorsignals berücksichtig werden, oder dass bezogen auf die bekannte Fahrbahnumgebung entsprechende Gegenstände in der Simulationseinrichtung fest implementiert sind.Method according to claim 8, characterized in that that the objects using an image shot continuously with a camera the vehicle environment continuously determined and during generation the sensor signal is taken into account be, or that based on the known road environment corresponding objects are firmly implemented in the simulation device. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass die Simulationsdarstellung mittels einer vom Fahrer getragenen Visualisierungsbrille oder durch Projektion auf die Frontscheibe erfolgt.Method according to one of the preceding claims, characterized characterized in that the simulation representation by means of a Driver worn visualization goggles or by projection on the Windscreen takes place. Verfahren nach Anspruch 10, dadurch gekennzeichnet, dass die Simulationsdarstellung zusätzlich durch Projektion auf wenigstens eine Seitenscheibe und/oder einen Rück- oder Außenspiegel erfolgt.Method according to claim 10, characterized in that that the simulation representation in addition by projection on at least one side window and / or a rear or exterior mirror takes place. Verfahren nach einem der vorangehenden Ansprüche, dadurch gekennzeichnet, dass kontinuierlich der Blickwinkel und/oder die Kopflage des Fahrers erfasst wird und die Wiedergabe der Simulationsdarstellung in Abhängigkeit des Blickwinkels erfolgt.Method according to one of the preceding claims, characterized characterized in that continuously the angle of view and / or the Head position of the driver is detected and the reproduction of the simulation representation dependent on of the angle of view. Vorrichtung zur Durchführung eines Funktionstests eines in einem Kraftfahrzeug integrierten, in Abhängigkeit eines von wenigstens einem Sensor, der die Verkehrssituation im Fahrzeugumfeld überwacht, gegebenen Sensorsignals über ein Steuergerät betriebenen Fahrerassistenzsystems, umfassend: – eine erste Simulationseinrichtung (4) zum Erzeugen einer kontinuierlich angepassten optischen Simulationsdarstellung einer virtuellen Verkehrssituation in Abhängigkeit eines oder mehrerer kontinuierlich erfasster, die Fahrzeugbewegung beschreibender Fahrzeugparameter, – eine Wiedergabeeinrichtung (12, 13) zum kontinuierlichen Einblenden der Simulationsdarstellung in das zum Fahrzeugumfeld gerichtete Blickfeld des Fahrers, während der Fahrer nach wie vor das reale Fahrzeugumfeld erfassen kann, – eine zweite Simulationseinrichtung (5) zum kontinuierlichen Erzeugen eines das wenigstens eine Sensorsignal in Abhängigkeit von der simulierten Verkehrssituation simulierenden Sensorsignals, welches simulierte Sensorsignal dem den Betrieb des Fahrerassistenzsystems steuernden Steuergerät (19) gegeben wird.Device for carrying out a functional test of a driver assistance system, which is integrated in a motor vehicle and is dependent on a sensor signal supplied by at least one sensor which monitors the traffic situation in the vehicle environment, via a control device, comprising: a first simulation device ( 4 ) for generating a continuously adapted optical simulation representation of a virtual traffic situation as a function of one or more continuously detected vehicle parameters describing the vehicle movement, 12 . 13 ) for continuous display of the simulation representation in the field of vision of the driver while the driver is still able to detect the real vehicle environment, - a second simulation device ( 5 ) for continuously generating a sensor signal which simulates the at least one sensor signal as a function of the simulated traffic situation, which simulated sensor signal is sent to the control device controlling the operation of the driver assistance system ( 19 ) is given. Vorrichtung nach Anspruch 13, dadurch gekennzeichnet, dass eine Positionsbestimmungseinrichtung (6) zur kontinuierlichen Bestimmung der realen Fahrzeugposition in Bezug auf die befahrene Fahrbahn vorgesehen und die erste Simulationseinrichtung (4) zur Erzeugung der Simulationsdarstellung unter Berücksichtigung der ihr kontinuierlich mitgeteilten Fahrzeugposition ausgebildet ist.Apparatus according to claim 13, characterized in that a position-determining device ( 6 ) for the continuous determination of the real vehicle position with respect to the driven lane and the first simulation device ( 4 ) is designed to generate the simulation representation taking into account the continuously notified vehicle position. Vorrichtung nach Anspruch 14, dadurch gekennzeichnet, dass die Positionsbestimmungseinrichtung (6) zur Bestimmung der Fahrzeugposition anhand des oder der Fahrzeugparameter und/oder anhand eines mittels einer das Fahrzeugumfeld erfassenden Kamera (9) aufgenommenen Bilds ausgebildet ist.Apparatus according to claim 14, characterized in that the position-determining device ( 6 ) for determining the vehicle position on the basis of the vehicle parameter (s) and / or on the basis of a camera detecting the vehicle environment ( 9 ) recorded image is formed. Vorrichtung nach Anspruch 15, dadurch gekennzeichnet, dass die Positionsbestimmungseinrichtung (6) mit einem Fahrzeugbus (7), insbesondere dem CAN-Bus, kommuniziert und von diesem den oder die Fahrzeugparameter, insbesondere die Geschwindigkeit, die Querbeschleunigung, die Längsbeschleunigung und/oder die Gierrate, abgreift.Apparatus according to claim 15, characterized in that the position-determining device ( 6 ) with a vehicle bus ( 7 ), in particular the CAN bus, communicates and picks up therefrom the vehicle parameter or parameters, in particular the speed, the lateral acceleration, the longitudinal acceleration and / or the yaw rate. Vorrichtung nach einem der Ansprüche 13 bis 16, dadurch gekennzeichnet, dass die Positionsbestimmungseinrichtung (6) zum Abgleichen des oder der über fahrzeugseitig integrierte Erfassungsmittel erfassten Fahrzeugarameter mit kontinuierlich erfassten Informationen, die mittels ei nes GPS- oder DGPS-Systems (8) ermittelt werden, und/oder kontinuierlich erfassten Informationen, die anhand von mittels einer Kamera (9) aufgenommenen und das Fahrzeugumfeld zeigenden Kamerabilds ermittelt werden, ausgebildet ist.Device according to one of claims 13 to 16, characterized in that the position-determining device ( 6 ) for calibrating the vehicle parameter (s) acquired via on-board integrated detection means with continuously acquired information obtained by means of a GPS or DGPS system ( 8th ) and / or continuously acquired information obtained by means of a camera ( 9 ) and the vehicle environment facing camera image are determined is formed. Vorrichtung nach einem der Ansprüche 13 bis 17, dadurch gekennzeichnet, dass die zweite Simulationseinrichtung (5) mit wenigstens einem die Längs- oder Querneigung des Fahrzeugs zur Fahrbahn erfassenden Sensor direkt oder indirekt kommuniziert und zum Erzeugen des simulierten Sensorsignals unter Berücksichtigung der Sensorinformation ausgebildet ist.Device according to one of claims 13 to 17, characterized in that the second simulation device ( 5 ) is directly or indirectly communicated with at least one of the longitudinal or transverse inclination of the vehicle to the road surface detecting sensor and designed to generate the simulated sensor signal taking into account the sensor information. Vorrichtung nach einem der Ansprüche 13 bis 18, dadurch gekennzeichnet, dass die zweite Simulationseinrichtung (5) mit einer Bildverarbeitungseinrichtung (10), die in einem mittels einer Kamera (9) aufgenommenen Bild Gegenstände analysiert, die das reale Sensorsignal beeinflussen können, kommuniziert und zur Erzeugung des simulierten Sensorsignals unter Berücksichtigung der gegenstandsbezogenen Informationen ausgebildet ist, oder dass in der zweiten Simulationseinrichtung (5) bezogen auf die bekannte Fahrbahnumgebung entsprechende Gegenstände fest implementiert sind.Device according to one of claims 13 to 18, characterized in that the second simulation device ( 5 ) with an image processing device ( 10 ), which in one by means of a camera ( 9 ) analyzed objects that can affect the real sensor signal, communicates and is designed to generate the simulated sensor signal taking into account the object-related information, or that in the second simulation device ( 5 ) based on the known road environment corresponding objects are implemented. Vorrichtung nach einem der Ansprüche 13 bis 19, dadurch gekennzeichnet, dass die Wiedergabeeinrichtung eine vom Fahrer zu tragende Visualisierungsbrille (12) oder eine Projektionseinrichtung (13) zum Projizieren des Simulationsbilds auf die Frontscheibe (14) ist.Device according to one of claims 13 to 19, characterized in that the display device to be worn by the driver visualization glasses ( 12 ) or a projection device ( 13 ) for projecting the simulation image on the windscreen ( 14 ). Vorrichtung nach Anspruch 20, dadurch gekennzeichnet, dass die Projektionsreinrichtung zusätzlich zum Projizieren des Simulationsbilds auf wenigstens eine Seitenscheibe und/oder einen Rück- oder Außenspiegel ausgebildet istApparatus according to claim 20, characterized in that the projection device in addition for projecting the simulation image on at least one side window and / or a return or Mirrors is trained Vorrichtung nach einem der Ansprüche 13 bis 21, dadurch gekennzeichnet, dass eine Einrichtung (16, 17) zur kontinuierlichen Erfassung des Blickwinkels und/oder der Kopflage des Fahrers vorgesehen ist, die mit der ersten Simulationseinrichtung (4) und/oder der Wiedergabeeinrichtung (12, 13) kommuniziert, so dass die Wiedergabe der Simulationsdarstellung in Abhängigkeit des Blickwinkels erfolgt.Device according to one of claims 13 to 21, characterized in that a device ( 16 . 17 ) is provided for continuous detection of the driver's angle of view and / or head position associated with the first simulation device ( 4 ) and / or the playback device ( 12 . 13 ) communicates, so that the reproduction of the simulation representation takes place as a function of the viewing angle.
DE200410057947 2004-11-30 2004-11-30 Method for functional testing of a driver assistance system integrated on the vehicle side Expired - Fee Related DE102004057947B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE200410057947 DE102004057947B4 (en) 2004-11-30 2004-11-30 Method for functional testing of a driver assistance system integrated on the vehicle side

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE200410057947 DE102004057947B4 (en) 2004-11-30 2004-11-30 Method for functional testing of a driver assistance system integrated on the vehicle side

Publications (2)

Publication Number Publication Date
DE102004057947A1 DE102004057947A1 (en) 2006-06-08
DE102004057947B4 true DE102004057947B4 (en) 2009-10-29

Family

ID=36441614

Family Applications (1)

Application Number Title Priority Date Filing Date
DE200410057947 Expired - Fee Related DE102004057947B4 (en) 2004-11-30 2004-11-30 Method for functional testing of a driver assistance system integrated on the vehicle side

Country Status (1)

Country Link
DE (1) DE102004057947B4 (en)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013008921A1 (en) * 2013-05-25 2014-11-27 Audi Ag Method for carrying out a crash test of a motor vehicle
CN107884202A (en) * 2016-09-30 2018-04-06 福特全球技术公司 Method and apparatus for test driver accessory system
US10404565B2 (en) 2017-12-13 2019-09-03 Ford Global Technologies, Llc Simulation latency indication
DE102019212761A1 (en) * 2019-08-26 2021-03-04 Siemens Mobility GmbH Driving simulator

Families Citing this family (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102006044086B4 (en) * 2006-09-20 2013-05-29 Audi Ag System and method for the simulation of traffic situations, in particular accident-critical dangerous situations, as well as a driving simulator
DE102007031040B4 (en) * 2007-07-04 2015-06-03 Edag Gmbh & Co. Kgaa Test device and method for a driver assistance system of a vehicle
DE102007035474B4 (en) * 2007-07-26 2009-06-25 Volkswagen Ag System and method for functional testing of a driver assistance system
DE102007046971A1 (en) * 2007-09-28 2009-04-16 Continental Automotive Gmbh Motor vehicle with a display and a camera
US20090228172A1 (en) * 2008-03-05 2009-09-10 Gm Global Technology Operations, Inc. Vehicle-to-vehicle position awareness system and related operating method
DE102008012646A1 (en) 2008-03-05 2009-09-10 Carl Zeiss Microimaging Gmbh Scene observing arrangement for use in agricultural commercial vehicle e.g. tractor, classifies covered partial area, information related to scene and/or information related to influence of scene for observer of screen
DE102009016243B4 (en) * 2009-04-03 2015-02-26 Audi Ag Method for testing the function of a driver assistance system of a motor vehicle and system
DE102009019399B4 (en) * 2009-04-29 2015-09-24 Audi Ag Method for automatically determining at least one target variable describing the change in the position of a motor vehicle
DE102013207546A1 (en) * 2013-04-25 2014-10-30 Bayerische Motoren Werke Aktiengesellschaft System for testing a distance control device
DE102014000803B4 (en) 2014-01-22 2019-05-09 Audi Ag Vehicle, display system and method for displaying traffic-related information
DE102014208973A1 (en) 2014-05-13 2015-11-19 Volkswagen Aktiengesellschaft Device for a driver assistance system, method and computer program
CN104316339B (en) * 2014-09-29 2017-04-26 四川长虹电器股份有限公司 Function testing method and function testing system
DE102016223581A1 (en) * 2016-11-28 2018-05-30 Continental Teves Ag & Co. Ohg Device and method for checking a functionality of a sensor
DE102017107396B4 (en) * 2017-04-06 2021-03-25 Iav Gmbh Ingenieurgesellschaft Auto Und Verkehr Test procedure and test device for driver assistance systems
DE102017112634B4 (en) 2017-06-08 2024-02-15 Deutsches Zentrum für Luft- und Raumfahrt e.V. Motor vehicle with driving mode and simulation mode
CN108303271A (en) * 2018-03-01 2018-07-20 北京理工华创电动车技术有限公司 Auxiliary drives product testing system and test method
DE102018003130A1 (en) * 2018-04-17 2019-10-17 Psa Automobiles Sa Testing a vehicle with simulated road users
US11415484B2 (en) 2019-07-11 2022-08-16 Horiba Instruments Incorporated Apparatus and method for testing automated vehicles via movable target body or electronic target simulator
CN111859618B (en) * 2020-06-16 2024-03-29 长安大学 Virtual-real combined traffic comprehensive scene simulation test system and method for multi-terminal ring
CN113340608B (en) * 2021-05-28 2023-11-17 东风汽车有限公司东风日产乘用车公司 Automobile testing method and automobile testing bench

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19928490A1 (en) * 1999-06-22 2000-12-28 Reiner Foerst Arrangement for equipping a roadworthy vehicle as a driving simulator has sensors that can be applied with few simple manual operations, compensated by software using simple technique
DE10047082A1 (en) * 1999-10-07 2001-05-17 Volkswagen Ag Simulation system for developing an automatic system to regulate motor vehicle distances has sensors to observe traffic by looking ahead and actuators to react to information from the sensors for slowing down or accelerating.
DE19962533A1 (en) * 1999-12-23 2001-07-05 Mannesmann Vdo Ag Functional test device of spacing control equipment of vehicle, has simulator to output control values to spacing control equipment based on actual data of distance sensor and data gathered during transit
DE10037219A1 (en) * 2000-07-31 2002-03-21 Volkswagen Ag Laser scanner testing method e.g. for distance sensors for automobile adaptive cruise control, uses measuring objects placed at different points within detection range of laser scanner
DE10309934A1 (en) * 2003-03-07 2004-09-23 Audi Ag Driving simulator has simulation unit with central control unit, view simulator, interface connecting unit to controller via bi-directional communications link; controller is motor vehicle component
EP1467319A2 (en) * 2003-01-23 2004-10-13 Melerit AB Simulation method

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19928490A1 (en) * 1999-06-22 2000-12-28 Reiner Foerst Arrangement for equipping a roadworthy vehicle as a driving simulator has sensors that can be applied with few simple manual operations, compensated by software using simple technique
DE10047082A1 (en) * 1999-10-07 2001-05-17 Volkswagen Ag Simulation system for developing an automatic system to regulate motor vehicle distances has sensors to observe traffic by looking ahead and actuators to react to information from the sensors for slowing down or accelerating.
DE19962533A1 (en) * 1999-12-23 2001-07-05 Mannesmann Vdo Ag Functional test device of spacing control equipment of vehicle, has simulator to output control values to spacing control equipment based on actual data of distance sensor and data gathered during transit
DE10037219A1 (en) * 2000-07-31 2002-03-21 Volkswagen Ag Laser scanner testing method e.g. for distance sensors for automobile adaptive cruise control, uses measuring objects placed at different points within detection range of laser scanner
EP1467319A2 (en) * 2003-01-23 2004-10-13 Melerit AB Simulation method
DE10309934A1 (en) * 2003-03-07 2004-09-23 Audi Ag Driving simulator has simulation unit with central control unit, view simulator, interface connecting unit to controller via bi-directional communications link; controller is motor vehicle component

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102013008921A1 (en) * 2013-05-25 2014-11-27 Audi Ag Method for carrying out a crash test of a motor vehicle
DE102013008921B4 (en) 2013-05-25 2018-06-07 Audi Ag Method with which a crash test of a motor vehicle is performed and device
CN107884202A (en) * 2016-09-30 2018-04-06 福特全球技术公司 Method and apparatus for test driver accessory system
US10404565B2 (en) 2017-12-13 2019-09-03 Ford Global Technologies, Llc Simulation latency indication
DE102019212761A1 (en) * 2019-08-26 2021-03-04 Siemens Mobility GmbH Driving simulator

Also Published As

Publication number Publication date
DE102004057947A1 (en) 2006-06-08

Similar Documents

Publication Publication Date Title
DE102004057947B4 (en) Method for functional testing of a driver assistance system integrated on the vehicle side
DE102017107396B4 (en) Test procedure and test device for driver assistance systems
DE102017202115B4 (en) VEHICLE DEVICE, METHOD FOR CONTROLLING A VEHICLE DEVICE AND COMPUTER READABLE STORAGE MEDIUM
DE112009003557B4 (en) Vehicle display device and display method
EP2583263B1 (en) Method for combining a road sign recognition system and a lane detection system of a motor vehicle
EP2805183B1 (en) Method and device for visualizing the surroundings of a vehicle
DE102006044086B4 (en) System and method for the simulation of traffic situations, in particular accident-critical dangerous situations, as well as a driving simulator
EP3101404B1 (en) Test system and test method and configuration system and configuration method for configuring at least one vehicle driver system interface
DE112017003916T5 (en) Head-up display device, display control method and control program
EP1405124A1 (en) Head-up display system and method for carrying out the location-correct display of an object situated outside a vehicle with regard to the position of the driver
DE102010049093A1 (en) Method for operating at least one sensor of a vehicle and vehicle with at least one sensor
DE102014116037A1 (en) Method for operating a driver assistance system of a motor vehicle, driver assistance system and motor vehicle
DE10359241B4 (en) Driving assistance apparatus and driving assistance method for a vehicle
DE102009027547A1 (en) Assistance system for a motor vehicle
DE102013010818A1 (en) Method for inserting textures in road surface diagram and/or in view field of driver of vehicle, involves determining a situation in front of vehicle road surface and inserting textures in determined road surface on display device
DE102017220268B4 (en) Detection and visualization of system uncertainty when displaying augmented image content in head-up displays
DE102013219023A1 (en) Method and device for assisting a driver of a vehicle when changing lanes
DE112017007631T5 (en) Display system and display method
DE102016207353A1 (en) Method and device for detecting a use of an electronic device by a driver for a vehicle
DE102017111468A1 (en) A vehicle system and method for determining whether a vehicle occupant has sensed an off-vehicle object
WO2018166779A1 (en) Method and device for reminding a driver about an approach to a light signal apparatus
DE102016207435A1 (en) A vehicle and system and method for generating feedback forces applied to a steering wheel of a steer-by-wire steering system
DE102010049216A1 (en) Method for operating camera i.e. stereo camera, arranged at car, involves detecting distance of object via image evaluation, and calibrating camera when distance determined by sensing unit deviates from distance determined by evaluation
DE112019007195T5 (en) DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD AND DISPLAY CONTROL PROGRAM
DE102019109491A1 (en) DATA PROCESSING DEVICE, MONITORING SYSTEM, WECKSYSTEM, DATA PROCESSING METHOD AND DATA PROCESSING PROGRAM

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8364 No opposition during term of opposition
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee
R079 Amendment of ipc main class

Free format text: PREVIOUS MAIN CLASS: G01M0019000000

Ipc: G01M0099000000